精明摩托

文章
11
资源
0
加入时间
3年0月9天
Kafka消费者之Consumer的偏移量如何管理

Kafka消费者之Consumer的偏移量如何管理

偏移量管理每个consumer内存里的数据结构保存每个topic的每个分区的消费的offset，定期会提交offset，老版本是写入zookeeper，但是我们知道zookeeper是不支持高并发的，kafka当初的架构设计的不合理采用zk用来控制并发，是不够的，zk是用来做分布式协调的，轻量级的可以，不能负责高并发操作，作为简单的数据存储可以，例如集群信息等和clickhouse现在面临的问题一样现在新的版本提交offset发送给kafka内部topic：__consumer_offset，提
kafka 2023-08-23

他的专栏

JavaScript（0）
Windows 10（0）
Photoshop教程（1）
微信营销（1）
CorelDraw教程（1）
Apple Mac（1）
Oracle（1）
ADC/DAC（1）
kafka（1）
网络（1）
网络流（1）
Python相关（1）
servlet（1）

他的归档

2023年08月（2）

热门文章

1
微信运营技巧大全介绍
2
CorelDRAW10 螺旋线工具的简单使用方法
3
Photoshop为树林图片添加上高清的投射光束效果
4
MAC Finder卡死如何重启Finder
5
Oracle用户密码过期和用户被锁的解决方法
6
信纳比（SINAD）介绍
7
Kafka消费者之Consumer的偏移量如何管理
8
计算机网络分类、网络设备、网络协议（一）
9
CCPC2019秦皇岛 - Escape
10
Python中的迭代器(Iterator)与生成器(Generator)生成器(Generator)迭代器(Iterator)小练习