kafka操作命令

笑着哭i 提交于 2019-12-15 20:41:52
  • kafka启动
bin/kafka-server-start.sh -daemon config/server.properties
  • 创建topic
bin/kafka-topics.sh -zookeeper localhost:2181 --create --partitions 1 --replication-factor 1 --topic test

--partitions指定分区数,--replication-factor表示副本数

  • 查看topic列表
bin/kafka-topics.sh --list --zookeeper localhost:2181
bin/kafka-topics.sh --list --bootstrap-server localhost:9092

-- 查看集群描述

bin/kafka-topics.sh --describe --zookeeper localhost:2181
  • 删除topic
./bin/kafka-topics --delete --zookeeper localhost:2181 --topic test
  • 生产消息
bin/kafka-producer-perf-test.sh --topic test --throughput -1 --record-size 10 --num-records 500000 --producer-props bootstrap.servers=localhost:9092
  • 消费消息
./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
  • 获取topic消息数
bin/kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list localhost:9092 --topic test --time -1
bin/kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list localhost:9092 --topic test --time -2

--time -1表示要获取topic所有分区当前的最大位移, --time -2表示获取当前最早位移。两个命令输出相减便可得到所有分区当前的消息总数。在没有删除过消息的情况下,第二个命令的结果是0。

  • 查询消费组列表
bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --list
  • 查询某个消费组的消费详情
bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --group my-group
  • 压力测试
bin/kafka-producer-perf-test.sh --topic test --num-records 100 --record-size 1 --throughput 100 --producer-props bootstrap.servers=localhost:9092
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!