flume的介绍和简单安装
Posted lyr999736
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了flume的介绍和简单安装相关的知识,希望对你有一定的参考价值。
一:介绍
(1)日志采集系统
(2)是一种分布式,可靠且可用的服务,用于有效地收集,聚合和移动大量日志数据。
(3)具有基于流数据流的简单灵活的架构。
(4)具有可靠的可靠性机制和许多故障转移和恢复机制,具有强大的容错能力。
二:flume的三个组件:【Source,Channel,Sink】构成Agent。
三:安装
a.下载flume压缩包 链接:http://flume.apache.org/download.html
apache-flume-1.8.0-bin.tar.gz
b.解压至相关目录下
$>tar -zxvf apache-flume-1.8.0-bin.tar.gz
c.配置环境变量
$>cd ~
$>vim .bash_profile
追加代码
export FLUME_HOME=/home/Alex_lei/soft/flume
export PATH=$FLUME_HOME/bin:$PATH
$>source .bash_profile
d.安装完成
查看Flume安装目录bin/下,只有flume-ng命令
验证成功:$>flume-ng version
以上是关于flume的介绍和简单安装的主要内容,如果未能解决你的问题,请参考以下文章
Hadoop详解——Hive的原理和安装配置和UDF,flume的安装和配置以及简单使用,flume+hive+Hadoop进行日志处理