1.flume 需要Java1.7以上版本，然后需要配置好Java环境变量

2.下载软件。

到Flume官网上http://flume.apache.org/download.html下载软件包,

wget "http://mirrors.cnnic.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz"

tar -zxvf apache-flume-1.6.0-bin.tar.gz

3.简单示例。

修改配置文件。

  cd conf/

cp cp flume-conf.properties.template test.conf  

输入内容vim test.conf

保存并退出

启动flume agent

bin/flume-ng agene --confconf--conf-file conf/flume.conf --name a1 -Dflume.root.logger=INFO,console

3.测试

写入内容。

vim 1.log

输入内容 this is a test 保存并退出。

 cp 1.log /home/chao/txt/

接着就可以在前一个终端看到刚刚采集的内容了,如下：

syslog数据测试。

root@m1:/home/hadoop# echo "hello idoall.orgsyslog"| nc localhost 5140

syslog数据到flume到kafka

配置文件。

单个source 多个sink。

Source类型。

 Channel 类型。

Sink类型：

配置

1.sinks.k1.sink.rollInterval = 0

每30秒滚动一次文件。指定0将禁用滚动，并导致将所有事件写入一个文件。

a1.sinks.k1.type = file_roll 写文件。

a1.sinks.k1.sink.directory = /home/chao/log文件路径

a1.sinks.k1.sink.rollInterval = 0 只写一个文件。

最后

以上就是大意大白为你收集整理的flume 安装和使用教程syslog数据到flume到kafka单个source 多个sink。Source类型。的全部内容，希望文章能够帮你解决flume 安装和使用教程syslog数据到flume到kafka单个source 多个sink。Source类型。所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。