flume实战

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了flume实战相关的知识,希望对你有一定的参考价值。

业务背景:

 A,B两台机器实时生产日志主要类型为access.log,ugcheader.log,ugctail.log

实现要求:

把A,B机器中的access.log,ugcheader.log,ugctail.log汇总到C机器上然后统一收集到HDFS中

但是在HDFS中要求的目录为:


/source/access/20160101/**

/source/ugcheader/20160101/**

/source/ugctail/20160101/**


以上是关于flume实战的主要内容,如果未能解决你的问题,请参考以下文章

Flume从入门到实战

Flume从入门到实战

flume实战应用解析

flume实战

Hadoop实战-Flume之自定义Sink(十九)

Flume系列二之案例实战