cdh6集成streamsets3详解

夏虫不可语冰★

于 2020-08-28 16:41:33 发布

阅读量669

点赞数

CC 4.0 BY-SA版权

分类专栏： Streamsets 文章标签：其他

本文链接：https://blog.csdn.net/qq_37056683/article/details/108280529

Streamsets 专栏收录该内容

1 篇文章

订阅专栏

本文详细介绍如何从官网下载并安装StreamSets Data Collector，包括前期准备、启动httpd-server、配置本地parcel包、激活parcel及故障排除等关键步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、前期准备

官网下载地址：https://archives.streamsets.com/index.html
需要下载以下三个文件：
在这里插入图片描述

二、启动httpd-server

#查看启动状态
service httpd status
#启动
service httpd start

三、配置本地parcel包

在这里插入图片描述

四、配置csd

# 复制jar包
cp STREAMSETS-3.6.1.jar /opt/cloudera/csd

#修改权限
chown cloudera-scm:cloudera-scm STREAMSETS-3.6.1.jar

在这里插入图片描述

五、parcel包操作

配本地parcel：主机 => Parcel => 配置
在这里插入图片描述

在这里插入图片描述

激活步骤：主机 => Parcel => 下载 => 分配 => 激活（需要重启）
在这里插入图片描述
如果激活失败执行以下命令：

curl -u {admin}:{admin} -X POST http://${cloudera-managerIP}/api/v19/clusters/{clusterName}/parcels/products/{product}/versions/{version}/commands/deactivate

#测试
curl -u admin:admin -X POST http://localhost:7180/api/v19/clusters/ClusterHuanle/parcels/products/STREAMSETS_DATACOLLECTOR/versions/3.6.1/commands/deactivate