filebeat 采集 kafka 的数据 到 ES 当中的配置

公司 通过 多个 filebeat 将数据采集到 kafka 上。 

由于 kafka 数据可视化不是很强，需要暂时将数据 在 kibana 上展示。

涉及到数据不计算，暂时先再启用一个 filebeat 采集 kafka 的数据到 ES 中。

###################### Filebeat Configuration Example #########################
# This file is an example configuration file highlighting only the most common
# options. The filebeat.reference.yml file from the same directory contains all the
# supported options with more comments. You can use it as a reference.
#
# You can find the full configuration reference here:
# https://www.elastic.co/guide/en/beats/filebeat/7.8/kafka-output.html#kafka-compatibility
# For more available modules and options, please see the filebeat.reference.yml sample
# configuration file.
# 只采集 json 格式的日志
# 将 message 内容进行了json 话解析，并过滤掉了 message 字段
# event time 覆盖 process time
#
# ============================

最后

以上就是细腻电源为你收集整理的filebeat 采集 kafka 的数据 到 ES 当中的配置的全部内容，希望文章能够帮你解决filebeat 采集 kafka 的数据 到 ES 当中的配置所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。