概述
一、Flume地址
1.Flume官网地址:Welcome to Apache Flume — Apache Flume
2.文档查看地址:Flume 1.10.0 User Guide — Apache Flume
3.下载地址:http://archive.apache.org/dist/flume/
二、安装
1.解压命令
安装1.9.0稳定版
[root@liuyizhao01 /]$ tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt
1.-C(大写)指定安装目录
修改apache-flume-1.9.0-bin的名称为flume
[root@liuyizhao01 /]$ mv /opt/apache-flume-1.9.0-bin /opt/flume
将lib文件夹下的guava-11.0.2.jar删除(或修改名称)以兼容Hadoop 3.1.3(3.0.0及以上),否则依赖冲突
1.删除
[root@liuyizhao01 lib]$ rm /opt/flume/lib/guava-11.0.2.jar
2.修改名称
[root@liuyizhao01 lib]$ mv /opt/flume/lib/guava-11.0.2.jar /opt/flume/lib/guava-11.0.2.jar.rm
修改conf下的log4j.properties确定日志打印的位置
[root@liuyizhao01 flume]$ cd /opt/flume/conf
[root@liuyizhao01 flume]$ vim log4j.properties
修改:
#console表示同时将日志输出到控制台,LOGFILE生成文件,console打印控制台
flume.root.logger=INFO,LOGFILE,console
#固定日志输出的位置
flume.log.dir=/opt/module/flume/logs
#日志文件的名称
flume.log.file=flume.log
三、调试flume
1.调试官方案例:
监控端口数据,使用Flume监听一个端口,收集该端口数据,并打印到控制台。
未写完待定……
最后
以上就是受伤小懒猪为你收集整理的Flume安装部署及配置的全部内容,希望文章能够帮你解决Flume安装部署及配置所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
发表评论 取消回复