优秀金毛

文章
2
资源
0
加入时间
2年10月21天

Apache Flume : 简单案例采集目录到HDFS采集文件到HDFS

采集目录到HDFS采集需求:服务器的某特定目录下,会不断产生新的文件,每当有新文件出现,就需要把文件采集到HDFS中去根据需求,首先定义以下3大要素采集源,即source——监控文件目录 : spooldir下沉目标,即sink——HDFS文件系统 : hdfs sinksource和sink之间的传递通道——channel,可用file channel 也可以用内存channel...