我是靠谱客的博主 受伤小懒猪,最近开发中收集的这篇文章主要介绍Flume安装部署及配置,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

一、Flume地址

1.Flume官网地址:Welcome to Apache Flume — Apache Flume

2.文档查看地址:Flume 1.10.0 User Guide — Apache Flume

3.下载地址:http://archive.apache.org/dist/flume/

二、安装

1.解压命令

安装1.9.0稳定版

[root@liuyizhao01 /]$ tar  -zxvf  /opt/software/apache-flume-1.9.0-bin.tar.gz  -C  /opt

1.-C(大写)指定安装目录

修改apache-flume-1.9.0-bin的名称为flume

[root@liuyizhao01 /]$  mv /opt/apache-flume-1.9.0-bin /opt/flume

将lib文件夹下的guava-11.0.2.jar删除(或修改名称)以兼容Hadoop 3.1.3(3.0.0及以上),否则依赖冲突

1.删除

[root@liuyizhao01 lib]$  rm /opt/flume/lib/guava-11.0.2.jar

2.修改名称

[root@liuyizhao01 lib]$  mv /opt/flume/lib/guava-11.0.2.jar /opt/flume/lib/guava-11.0.2.jar.rm

修改conf下的log4j.properties确定日志打印的位置

[root@liuyizhao01 flume]$ cd /opt/flume/conf

[root@liuyizhao01 flume]$ vim log4j.properties

修改:

#console表示同时将日志输出到控制台,LOGFILE生成文件,console打印控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

三、调试flume

1.调试官方案例:

监控端口数据,使用Flume监听一个端口,收集该端口数据,并打印到控制台。

未写完待定……

最后

以上就是受伤小懒猪为你收集整理的Flume安装部署及配置的全部内容,希望文章能够帮你解决Flume安装部署及配置所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(53)

评论列表共有 0 条评论

立即
投稿
返回
顶部