大数据软件安装之Flume(日志采集)

Posted 千锤百炼仍是猴

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据软件安装之Flume(日志采集)相关的知识,希望对你有一定的参考价值。

一、安装地址

1) Flume官网地址

http://flume.apache.org/

2)文档查看地址

http://flume.apache.org/FlumeUserGuide.html

3)下载地址

http://archive.apache.org/dist/flume/

二、安装部署

1)将apache-flume-1.7.0-bin.tar.gz上传到服务器的/opt/software目录下

2)解压apache-flume-1.7.0-bin.tar.gz到 /opt/moldule 目录下

[test@hadoop102 software]$ tar -zxf apache-flume-1.7.0-bin.tar.gz -C /opt/module/

3)修改apache-flume-1.7.0-bin的名称为flume

[test@hadoop102 module]$ mv apache-flume-1.7.0-bin flume

4)将flume/conf下的flume-env.sh.template文件修改为flume-env.sh,并配置flume-env.sh文件

[test@hadoop102 conf]$ mv flume-env.sh.template flume-env.sh

[test@hadoop102 conf]$ vi flume-env.sh

export JAVA_HOME=/opt/module/jdk1.8.0_144

 

传到HDFS需要将jar包置入/opt/module/flume/lib中

 

以上是关于大数据软件安装之Flume(日志采集)的主要内容,如果未能解决你的问题,请参考以下文章

带你看懂大数据采集引擎之Flume&采集目录中的日志

带你看懂大数据采集引擎之Flume&采集目录中的日志

大数据数据采集之Flume

日志采集框架Flume的安装及使用

0#1hadoop生态圈之日志采集框架Flume入门

大数据系列|Flume的架构和环境安装