安装flume

Posted wyju

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了安装flume相关的知识,希望对你有一定的参考价值。

1.上传Flume到master的/home/hadoop目录

2.把Flume压缩文件,解压到/usr/local中,使用以下命令:

sudo tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local

3. 进入/usr/local目录,使用以下命令:

cd /usr/local

4.将解压后的apache-flume-1.9.0-bin目录重命名为flume,使用以下命令:

sudo mv apache-flume-1.9.0-bin/ flume

5.授权当前用户hadoop拥有flume目录的所有者权限,使用以下命令:

sudo chown -R hadoop flume

6.编辑环境变量文件,使用以下命令:

vim /home/hadoop/.bashrc

7.在环境变量文件最后添加以下内容:

export FLUME_HOME=/usr/local/flume
export PATH=$PATH:$FLUME_HOME/bin

8.刷新环境变量,使用以下命令:

source /home/hadoop/.bashrc

9.验证是否安装成功,使用以下命令:

flume-ng version

flume小测试

1.进入/home/hadoop目录,使用以下命令:

cd /home/hadoop/

2.创建touch tail-test.txt文件,使用以下命令:

touch tail-test.txt

3.向tail-test.txt文件中追加一些内容,使用以下命令:

echo 'hello 11111' >> tail-test.txt
echo 'hello 22222'>> tail-test.txt
echo 'hello 33333'>> tail-test.txt

4.查看tail-test.txt文件中的内容,使用以下命令:

cat tail-test.txt

5.新开一个xshell窗口监控tail-test.txt文件内容的变化,使用以下命令:

tail -F tail-test.txt

6.回到上一个xshell窗口,继续向tail-test.txt文件中追加一些内容,使用以下命令:

echo 'hello 44444' >> tail-test.txt
echo 'hello 55555'>> tail-test.txt
echo 'hello 66666'>> tail-test.txt

7.查看tail -F命令是否监控到内容的变化,

以上是关于安装flume的主要内容,如果未能解决你的问题,请参考以下文章

flume 1.7在windows下的安装与运行

Flume介绍与安装

Flume NG 学习笔记单机与集群Flume 配置

Flume自定义Source

Flume使用入门

flume中的拦截器