flume的介绍和简单安装

Posted lyr999736

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了flume的介绍和简单安装相关的知识,希望对你有一定的参考价值。

一:介绍

(1)日志采集系统

(2)是一种分布式,可靠且可用的服务,用于有效地收集,聚合和移动大量日志数据。

(3)具有基于流数据流的简单灵活的架构。

(4)具有可靠的可靠性机制和许多故障转移和恢复机制,具有强大的容错能力。

 

二:flume的三个组件:【Source,Channel,Sink】构成Agent。

 

三:安装

  a.下载flume压缩包 链接:http://flume.apache.org/download.html

    apache-flume-1.8.0-bin.tar.gz

  b.解压至相关目录下

    $>tar -zxvf apache-flume-1.8.0-bin.tar.gz 

  c.配置环境变量

    $>cd ~

    $>vim .bash_profile

      追加代码

        export FLUME_HOME=/home/Alex_lei/soft/flume

        export PATH=$FLUME_HOME/bin:$PATH

    $>source .bash_profile 

 

  d.安装完成

    查看Flume安装目录bin/下,只有flume-ng命令

    验证成功:$>flume-ng version  



以上是关于flume的介绍和简单安装的主要内容,如果未能解决你的问题,请参考以下文章

Flume 介绍及安装

Flume系列一之架构介绍和安装

flume安装及ganglia使用

flume安装及ganglia使用

日志采集框架Flume的安装及使用

Hadoop详解——Hive的原理和安装配置和UDF,flume的安装和配置以及简单使用,flume+hive+Hadoop进行日志处理