目录
零、前置
一、Topic命令
查看当前服务器中的所有 topic
创建 first topic
查看 first 主题的详情
修改分区数量
删除 topic
二、生产者命令行操作
发送消息
三、消费者命令行操作
消费 first 主题中的数据
零、前置
Kafka集群的搭建:Kafka + Zookeeper + Hadoop 集群配置
一、Topic命令
参数 | 功能 |
--bootstrap-server | 连接的 Kafka Broker 主机名称和端口号 |
--topic | 操作的 topic 名称 |
--create | 创建主题 |
--delete | 删除主题 |
--alter | 修改主题 |
--list | 查看所有主题 |
--describe | 查看主题详细描述 |
--partitions | 设置分区数 |
--replication-factor | 设置分区副本 |
--config | 更新系统默认的配置 |
查看当前服务器中的所有 topic
注意位置:
cd /opt/module/kafka
bin/kafka-topics.sh --bootstrap-server test1:9092 --list
因为咱们还没有创建主题,所以这里是空着的。
创建 first topic
bin/kafka-topics.sh --bootstrap-server test1:9092 --create --partitions 1 --replication-factor 3 --topic first
选项说明:
--topic 定义 topic 名
--replication-factor 定义副本数
--partitions 定义分区数
查看 first 主题的详情
bin/kafka-topics.sh --bootstrap-server test1:9092 --describe --topic first
修改分区数量
注:分区数只能增加不能减少
bin/kafka-topics.sh --bootstrap-server test1:9092 --alter --topic first --partitions 3
减少时则会报错:
删除 topic
bin/kafka-topics.sh --bootstrap-server test1:9092 --delete --topic first
二、生产者命令行操作
参数 | 描述 |
--bootstrap-server | 连接的 Kafka Broker 主机名称和端口号 |
--topic | 操作的 topic 名称 |
发送消息
bin/kafka-console-producer.sh --bootstrap-server test1:9092 --topic first
三、消费者命令行操作
参数 | 描述 |
--bootstrap-server | 连接的 Kafka Broker 主机名称和端口号 |
--topic | 操作的 topic 名称 |
--from-beginning | 从头开始消费 |
--group | 指定消费者组名称 |
消费 first 主题中的数据
bin/kafka-console-consumer.sh --bootstrap-server test1:9092 --topic first
可以看到这里消费不到咱们之前发的 hello world ,如果想要查看之间生产的数据需要加上 --from-beginning 。
bin/kafka-console-consumer.sh --bootstrap-server test1:9092 --from-beginning --topic first
文章来源:https://www.toymoban.com/news/detail-594591.html
加上重新进入后即可消费到之前的数据。文章来源地址https://www.toymoban.com/news/detail-594591.html
到了这里,关于Kafka - Topic命令 & 命令行操作的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!