我是靠谱客的博主 贪玩胡萝卜,最近开发中收集的这篇文章主要介绍kafka使用与报错解决,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

cdh5.10安装的kafka版本为:2.2.1-kafka-4.1.0,安装成功后看到kafka快速开始的第一条命令为创建kafka-topics.sh,执行find / -name "kafka-topics.sh",
路径为/opt/cloudera/parcels/KAFKA-4.1.0-1.4.1.0.p0.4/lib/kafka/bin/,进入此路径,执行如下命令():
创建一个topic:
./kafka-topics.sh --create --topic quickstart-events2 --bootstrap-server CDH02:9092 --partitions 1 --replication-factor 4
查验创建好的topic:
./kafka-topics.sh --describe --topic quickstart-events2 --bootstrap-server CDH02:9092    
执行kafka-console-producer.sh生产数据(此步报错Connection to node -1 could not be established. Broker may not be available,百度后查得需修改server.properties,执行find / -name "server.properties",执行 vi /opt/cloudera/parcels/KAFKA-4.1.0-1.4.1.0.p0.4/etc/kafka/conf.dist/server.properties,修改两处地方:listeners=PLAINTEXT://192.168.123.202:9092和advertised.listeners=PLAINTEXT://192.168.123.202:9092):
./kafka-console-producer.sh --broker-list CDH02:9092 --topic quickstart-events2
执行kafka-console-consumer.sh消费数据:
./kafka-console-consumer.sh --bootstrap-server CDH02:9092 --topic quickstart-events2 --from-beginning
执行如上命令不报错,但是consumer接收不到数据,于是在百度搜索“kafka消费不到数据也不报错”,找到https://blog.csdn.net/haoxiaoyan/article/details/90269305,在cdh中kafka的实例添加两个主机后(之前是一个)执行以上命令,成功消费到数据。

最后

以上就是贪玩胡萝卜为你收集整理的kafka使用与报错解决的全部内容,希望文章能够帮你解决kafka使用与报错解决所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(63)

评论列表共有 0 条评论

立即
投稿
返回
顶部