五十二、 Storm 组件安装部署(MINI版)

举报
托马斯-酷涛 发表于 2022/05/26 01:00:29 2022/05/26
【摘要】 前景连接: Hadoop HA部署(MINI版)https://blog.csdn.net/m0_54925305/article/details/121566611?spm=1001.2014.3001.5501Spark组件部署(MINI版)https://blog.csdn.net/m0_54925305/article/det...

前景连接:

Hadoop HA部署(MINI版)icon-default.png?t=LA92https://blog.csdn.net/m0_54925305/article/details/121566611?spm=1001.2014.3001.5501Spark组件部署(MINI版)icon-default.png?t=LA92https://blog.csdn.net/m0_54925305/article/details/121615781?spm=1001.2014.3001.5501Kafka组件部署(MINI版)icon-default.png?t=LA92https://blog.csdn.net/m0_54925305/article/details/121647743?spm=1001.2014.3001.5501

环境准备:

编号 主机名 类型 用户 密码
1 master1-1 主节点 root passwd
2 slave1-1 从节点 root passwd
3 slave1-2 从节点 root passwd

apache-storm-1.2.4.tar.gz

        注:提取码均为:0000

环境部署:

一、前置安装 Zookeeper 集群,截图并保存结果

        1、启动三台机器zookeeper

bin/zkServer.sh start
 

二、解压 Storm 安装包到“/usr/local/src”路径,并修改解压后文件夹名为 storm,截图并保存结果

        1、进入/h3cu目录找到storm

cd /h3cu
 

         2、解压storm

tar -zxvf apache-storm-1.2.4.tar.gz -C /usr/local/src
 

        3、重命名storm

mv apache-storm-1.2.4 storm
 

 

三、配置“conf/storm.yaml”文件,截图并保存结果

四、传送配置好的“conf/storm.yaml”文件,截图并保存结果

五、配置 nimbus.seeds 文件,截图并保存结果

六、配置 supervisor.slots.ports,截图并保存结果

        1、进入storm/conf目录下

cd /usr/local/src/storm/conf
 

更改前:

更改后:

 参数配置:


   
  1. # Zookeeper集群的主机列表
  2. storm.zookeeper.servers:
  3. - "master1-1"
  4. - "slave1-1"
  5. - "slave1-2"
  6. # Nimbus的节点列表
  7. nimbus.seeds: ["master1-1", "slave1-1"]
  8. # Nimbus和Supervisor需要使用本地磁盘上来存储少量状态(如jar包,配置文件等)
  9. storm.local.dir: "/usr/local/src/storm/data"
  10. #workers进程的端口,每个worker进程会使用一个端口来接收消息
  11. supervisor.slots.ports:
  12. - 6700
  13. - 6701
  14. #指定storm集群中的nimbus节点所在的服务器
  15. nimbus.host: "master1-1"
  16. #web页面端口号
  17. ui.port: 9999

        注:文件内容的格式一定要注意,冒号后有空格,格式错误,进程是启动不了的

七、拷贝主节点 Storm 包到从节点,截图并保存结果

        1、集群分发

scp -r /usr/local/src/storm slave1-1:/usr/local/src/
 
scp -r /usr/local/src/storm slave1-2:/usr/local/src/
 

八、设置 Storm 环境变量,并使环境变量只对当前 root 用户生效,截图并保存结果

        1、添加环境变量

vi /root/.bashrc
 

 

        2、使环境变量立即生效 

source /root/.bashrc
 

九、在主节点和从节点启动,并截图保存(要求截到 url 和状态)

master端启动如下服务

        1、进入storm/bin目录下

cd /usr/local/src/storm/bin
 

        2、启动master和slave1的主节点 nimbus服务

nohup sh storm nimbus &
 

        3、启动从节点 supervisor服务

nohup sh storm supervisor &
 

        4、启动UI界面 ui

nohup sh storm ui &
 

        5、启动日志查看服务 logviewer

nohup sh storm logviewer &
 

slave端启动如下服务

        1、启动从节点 supervisor

nohup sh storm supervisor &
 

        2、启动日志查看服务 logviewer

nohup sh storm logviewer &
 

监控各节点的状态(web端)

        1、浏览器输入master1-1:9999查看集群状态

master1-1:9999
 

 

 

Storm 组件安装部署(MINI版)完成


不能打败你的必将使你愈发强大!

文章来源: tuomasi.blog.csdn.net,作者:托马斯-酷涛,版权归原作者所有,如需转载,请联系作者。

原文链接:tuomasi.blog.csdn.net/article/details/121659323

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。