英俊摩托

文章
3
资源
0
加入时间
3年0月21天

kafka集群和单机版安装教程  1、下载和安装2、启动kafka和zookeeper3、topic操作4、测试生产者和消费者

目录1、下载和安装1.1下载1.2安装2、启动kafka和zookeeper2.1、启动kafka自带的zookeeper2.2、启动kafka2.3、关闭kafka3、topic操作3.1、创建topic3.2、查看topic列表3.3、查看分片信息4、测试生产者和消费者4.1、生产者4.2、消费者1、下载和安装1.1下载官网地址: https://kafka.apache.org/downloads...

消费后不提交offset情况的分析总结

消费者在消费消息的过程中,配置参数设置为不自动提交offset,在消费完数据之后如果不手动提交offset,那么在程序中和kafak中的数据会如何被处理呢?1. 如果在消费kafka的数据过程中,一直没有提交offset,那么在此程序运行的过程中它不会重复消费。但是如果重启之后,就会重复消费之前没有提交offset的数据。2. 如果在消费的过程中有几条或者一批数据数据没有提交offset,后面其他的消息消费后正常提交offset,那么服务端会更新为消费后最新的offset,不会重新消费,就算重启