义气翅膀

文章
7
资源
0
加入时间
2年10月21天

再战flume关于实时监控多个目录下多个追加文件原理解释配置文件解读开始前可能遇到的bug

我们上次练习的source用的是简单的netcat,除了它之外比较常见的还用:Exec source:适用于监控一个实时追加的文件,不能实现断点续传;Spooldir Source:适合用于同步新文件,但不适合对实时追加日志的文件进行监听并同步;以上两种source都有各种缺陷,所以这次我们将使用更强的大Taildir Source来实验Taildir Source适合用于监听多个实时追加的文件,并且能够实现断点续传。原理解释首先介绍下Taildir Source断点续传的原理:我们用flum