我是靠谱客的博主 爱听歌滑板,最近开发中收集的这篇文章主要介绍kafka手动提交,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

kafka手动提交

spring:
  kafka:
    track_topic: track.data.receive
    bootstrap-servers: localhost:9092
    listener:
      # 主题不存在不报错
      missing-topics-fatal: false
      # 并发消费
      concurrency: 3
      # 手动提交
      ack-mode: manual_immediate
    consumer:
      group-id: XXX
      enable-auto-commit: false
      # earliest:当各分区下有已提交的offset时,从提交的offset开始消费;无提交的offset时,从头开始消费
      # latest:当各分区下有已提交的offset时,从提交的offset开始消费;无提交的offset时,消费新产生的该分区下的数据
      # none:topic各分区都存在已提交的offset时,从offset后开始消费;只要有一个分区不存在已提交的offset,则抛出异常
      auto-offset-reset: earliest
      # 自动提交时间,时间过长,可能存在重复消费问题
      # auto-commit-interval: 2000
      # bootstrap-servers: localhost:9092
      # key/value的反序列化
      key-deserializer: org.apache.kafka.common.serialization.IntegerDeserializer
      value-deserializer: org.apache.kafka.common.serialization.StringDeserializer
    producer:
      # 重试次数
      retries: 0
      # 批量抓取
      batch-size: 65536
      # 缓存容量
      buffer-memory: 524288
      # bootstrap-servers: localhost:9092
      # key/value的序列化
      key-serializer: org.apache.kafka.common.serialization.IntegerSerializer
      value-serializer: org.apache.kafka.common.serialization.StringSerializer
  @KafkaListener(topics = "${spring.kafka.track_topic}")
  public void getMessage(String messageJsonString, Acknowledgment ack) {
    Message message = JSONObject.parseObject(messageJsonString, Message.class);
      boolean b = deviceTrackService.saveMessage(message);
      if (b) {
        log.info("SELF-消费成功");
        ack.acknowledge();
      } else {
        log.error("消费失败:"+message);
      }
  }
}

最后

以上就是爱听歌滑板为你收集整理的kafka手动提交的全部内容,希望文章能够帮你解决kafka手动提交所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(70)

评论列表共有 0 条评论

立即
投稿
返回
顶部