centos7搭建filebeat

Posted mutong1228

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了centos7搭建filebeat相关的知识,希望对你有一定的参考价值。

filebeat的环境搭建

cd /home/elk
wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.2.4-linux-x86_64.tar.gz
tar -zvxf filebeat-6.2.4-linux-x86_64.tar.gz
mv filebeat-6.2.4-linux-x86_64 filebeat

修改配置文件

filebeat.prospectors:
- input_type: log
  paths:
    - /opt/dev/log/claimzuul/*.log
  document_type: "claimzuul" # 定义写入 ES 时的 _type 值
  multiline:
    #pattern: ‘^s*(d{4}|d{2})-(d{2}|[a-zA-Z]{3})-(d{2}|d{4})‘   # 指定匹配的表达式(匹配以 2017-11-15 08:04:23:889 时间格式开头的字符串)
    pattern: ‘^s*("{)‘                         # 指定匹配的表达式(匹配以 "{ 开头的字符串)
    negate: true                                # 是否匹配到
    match: after                                # 合并到上一行的末尾
    max_lines: 1000                             # 最大的行数
    timeout: 30s                                # 如果在规定的时候没有新的日志事件就不等待后面的日志
  fields:
    logsource: localhost
    logtype: claimzuul

#- input_type: log
 # paths:
  #  - /var/log/messages
    #- /var/log/*.log
  #document_type: "syslog" # 定义写入 ES 时的 _type 值
  #fields:
   # logsource: localhost
    #logtype: syslog

#output.elasticsearch:
#  hosts: ["localhost:9200"]

output.logstash:
  hosts: ["localhost:8082"]

启动

nohup ./filebeat -e -c filebeat.yml &

 

借鉴https://www.cnblogs.com/xishuai/p/elk-elasticsearch-kibana-logstash-filebeat-log4j2.html

以上是关于centos7搭建filebeat的主要内容,如果未能解决你的问题,请参考以下文章

filebeat+redis+elk日志平台搭建

centos7搭建ELK Cluster集群日志分析平台:简单测试

Kafka+Zookeeper+Filebeat+ELK 搭建日志收集系统

从0开始搭建ELK及采集日志的简单应用

图文详解Docker搭建 ELK Stack (elk) [使用es-logstash-filebeat-kibana]

Centos7+kafka+ELK6.5.x安装搭建