Kafka单机模式和集群模式环境搭建
【摘要】 快速开始教程:http://kafka.apache.org/quickstart
单节点服务
1、下载解压: http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.2.1/kafka_2.11-2.2.1.tgz
2、启动服务 需要先启动ZooKeeper服务
$ zkServer.sh start
# 如果没...
快速开始教程:http://kafka.apache.org/quickstart
单节点服务
1、下载解压:
http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.2.1/kafka_2.11-2.2.1.tgz
2、启动服务
需要先启动ZooKeeper服务
$ zkServer.sh start
# 如果没有,可以使用单节点的ZooKeeper
$ bin/zookeeper-server-start.sh config/zookeeper.properties
- 1
- 2
- 3
- 4
启动Kafka
> bin/kafka-server-start.sh config/server.properties
- 1
3、创建话题
$ bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test
# 查看话题
$ bin/kafka-topics.sh --list --bootstrap-server localhost:9092
- 1
- 2
- 3
- 4
- 5
4、发送消息
$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
This is a message
This is another message
- 1
- 2
- 3
5、接收消息
$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
This is a message
This is another message
- 1
- 2
- 3
多节点服务
1、修改配置
broker.id 在集群中需要唯一
$ cp config/server.properties config/server-1.properties
$ cp config/server.properties config/server-2.properties
$ cat config/server-1.properties:
broker.id=1
listeners=PLAINTEXT://:9093
log.dirs=/tmp/kafka-logs-1
$ config/server-2.properties:
broker.id=2
listeners=PLAINTEXT://:9094
log.dirs=/tmp/kafka-logs-2
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
- 11
- 12
2、创建话题
> bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 3 --partitions 1 --topic my-replicated-topic
# 查看话题描述
> bin/kafka-topics.sh --describe --bootstrap-server localhost:9092 --topic test
> bin/kafka-topics.sh --describe --bootstrap-server localhost:9092 --topic my-replicated-topic
- 1
- 2
- 3
- 4
- 5
- 6
3、查看进程,一共有6个(我的天)
$ jps
72513 Kafka # 3个Kafka组成集群
72816 Kafka
73081 Kafka
73872 Jps
73347 ConsoleProducer # 生产者
73609 ConsoleConsumer # 消费者
35198
68590 QuorumPeerMain # Zookeeper
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
文章来源: pengshiyu.blog.csdn.net,作者:彭世瑜,版权归原作者所有,如需转载,请联系作者。
原文链接:pengshiyu.blog.csdn.net/article/details/91988532
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)