2021年大数据环境命令(一):常用命令汇总

举报
Lansonli 发表于 2021/09/27 23:28:19 2021/09/27
【摘要】 2021大数据领域优质创作博客,带你从入门到精通,该博客每天更新,逐渐完善大数据各个知识体系的文章,帮助大家更高效学习。 有对大数据感兴趣的可以关注微信公众号:三帮大数据 目录 汇总Hadoop Hive ZooKeeper HBase Kafka等常见命令 Hadoop命令 Hive命令 ZooKeeper命...

2021大数据领域优质创作博客,带你从入门到精通,该博客每天更新,逐渐完善大数据各个知识体系的文章,帮助大家更高效学习。

有对大数据感兴趣的可以关注微信公众号:三帮大数据

目录

汇总Hadoop Hive ZooKeeper HBase Kafka等常见命令

Hadoop命令

Hive命令

ZooKeeper命令

HBase命令 

Kafka命令


汇总Hadoop Hive ZooKeeper HBase Kafka等常见命令

Hadoop命令


  
  1. # Hadoop一键启动命令
  2. # 启动HDFS
  3. start-dfs.sh
  4. # 启动Yarn
  5. start-yarn.sh
  6. # 启动历史任务服务进程
  7. mr-jobhistory-daemon.sh start historyserver
  8. # 快速重启和停止
  9. stop-all.sh start-all.sh
  10. # 停止集群
  11. stop-dfs.sh
  12. stop-yarn.sh
  13. mr-jobhistory-daemon.sh stop historyserver

Hive命令


  
  1. # 首先启动metastore服务,然后启动hiveserver2服务
  2. nohup /export/server/hive-2.1.0/bin/hive --service metastore &
  3. nohup /export/server/hive-2.1.0/bin/hive --service hiveserver2 &
  4. # 一键启动脚本
  5. expect /export/server/beenline.exp
  6. set hive.exec.mode.local.auto=true; --开启本地mr

ZooKeeper命令


  
  1. # 开启zk
  2. zkServer.sh start
  3. # 关闭zk
  4. zkServer.sh stop
  5. # 查看zk状态
  6. zkServer.sh status

HBase命令 


  
  1. # 单节点启动
  2. start-hbase.sh
  3. # 关闭
  4. stop-hbase.sh
  5. # 单独启动节点(高可用启用)
  6. hbase-daemon.sh start master
  7. hbase-daemon.sh start regionserver
  8. 关闭
  9. hbase-daemon.sh stop regionserve
  10. hbase-daemon.sh stop master
  11. # HBase客户端进入
  12. hbase shell
  13. # 开启phoenix客户端
  14. cd /export/server/apache-phoenix-5.0.0-HBase-2.0-bin/
  15. bin/sqlline.py node1:2181

Kafka命令


  
  1. # kafka开启
  2. cd /export/server/kafka_2.12-2.4.1/bin
  3. ./kafka-server-start.sh ../config/server.properties
  4. # 一键集群开启
  5. cd /export/onekey
  6. start-kafka.sh # 开启
  7. stop-kafka.sh # 关闭

  
  1. # 常用案例
  2. ./kafka-topics.sh --create --zookeeper node1:2181,node2:2181,node3:2181 --topic test01 --partitions 3 --replication-factor 3
  3. ./kafka-topics.sh --alter --zookeeper node1:2181,node2:2181,node3:2181 --topic test02 --partitions 6
  4. ./kafka-topics.sh --list --zookeeper node1:2181,node2:2181,node3:2181
  5. ./kafka-topics.sh --describe --zookeeper node1:2181,node2:2181,node3:2181 --topic test01
  6. ./kafka-console-producer.sh --broker-list node1:9092,node2:9092,node3:9092 --topic test02
  7. ./kafka-console-consumer.sh --bootstrap-server node1:9092,node2:9092,node3:9092 --topic test02
  8. ./kafka-topics.sh --zookeeper node1:2181,node2:2181,node3:2181 --create --topic benchmark --partitions 1 --replication-factor 1

文章来源: lansonli.blog.csdn.net,作者:Lansonli,版权归原作者所有,如需转载,请联系作者。

原文链接:lansonli.blog.csdn.net/article/details/115561803

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。