flume--exec源

Posted pangzx

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了flume--exec源相关的知识,希望对你有一定的参考价值。

创建a2.conf文件并且编写

Sources 类型是exec

配置文件如下

 技术图片

 

 

启动集群

 技术图片

 

 

 

启动flume

 

 技术图片

 

 

产生临时文件 ...tmp

 

 技术图片

 

 

关闭临时文件

 

 技术图片

 

 

再次写入文本,会再次产生一个临时文件。截图左边是一个内容输入和时间对照

从时间上看出大概是30s会关闭这个文件。

 技术图片

 

 

 

在hdfs 上查看内容

 技术图片

 

 

 

以上根据自己的理解,如有错误请谅解:

官方文档:

http://flume.apache.org/FlumeUserGuide.html#exec-source

以上是关于flume--exec源的主要内容,如果未能解决你的问题,请参考以下文章

如何在没有源的情况下使用Kafka频道配置Flume?

例外如下。 org.apache.flume.FlumeException:无法在flume twitter分析中加载源类型

如何使用 Apache Flume 过滤多个源数据?

flume系列之:源码编译添加阿里源和CDH仓库

源,数据,Hadoop——我们为什么需要Flume

Flume学习之路 Flume的配置方式