笑点低山水

文章
5
资源
0
加入时间
2年10月18天

平时只会用Kafka发消息,昨天突然遇到一次Kafka消息堆积生产事故!

线上kafka消息堆积,所有consumer全部掉线,到底怎么回事?最近处理了一次线上故障,具体故障表现就是kafka某个topic消息堆积,这个topic的相关consumer全部掉线。整体排查过程和事后的复盘都很有意思,并且结合本次故障,对kafka使用的最佳实践有了更深刻的理解。好了,一起来回顾下这次线上故障吧,最佳实践总结放在最后,千万不要错过。1、现象线上kafka消息突然开始堆积消费者应用反馈没有收到消息(没有处理消息的日志)kafka的consumer group上看没有消费者注册