大数据-Storm流式框架(三)--Storm搭建教程
【摘要】 一、两种搭建方式1、storm单节点搭建2、完全分布式搭建二、storm单节点搭建准备下载地址:Index of /dist/storm1、环境准备:Java 6+Python 2.6.6+2、上传、解压安装包3、在storm目录中创建logs目录mkdir logs启动./storm help4、启动Zookeeper./bin/storm dev-zookeeper >> ./log...
一、两种搭建方式
1、storm单节点搭建
2、完全分布式搭建
二、storm单节点搭建
准备
下载地址:
1、环境准备:
Java 6+
Python 2.6.6+
2、上传、解压安装包
3、在storm目录中创建logs目录
启动
4、启动Zookeeper
5、启动Nimbus
6、启动Storm UI
7、启动Supervisor
8、启动Logviewer
查看进程信息
jps
ss-nel
访问UI
http://node1:8080
三、完全分布式搭建
killall java 杀死所有java进程
准备
1、环境准备
java 6+
Python 2.6.6+
2、部署ZooKeeper
版本3.4.5+(高版本Zookeeper实现了对于自身持久化数据的定期删除功能)
(autopurge.purgeInterval; autopurge.snapRetainCount)
3、上传、解压安装包
4、在Storm目录中创建logs目录
5、修改配置文件
6、配置文件内容
7、分发storm
8、启动Zookeeper集群
9、在node1上启动Nimbus
10、在node2、node3上启动Supervisor和Logviewer
(按照配置每个Supervisor上启动4个slots)
STORM UI
启动Storm UI
./storm ui >> ./logs/ui.out 2>&1 &
通过
访问
【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)