Logstash 安装和使用

Posted dongma

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Logstash 安装和使用相关的知识,希望对你有一定的参考价值。

下载地址

https://artifacts.elastic.co/downloads/logstash/logstash-5.6.8.zip

下载后解压,测试

#将键盘内容输出到控制台
logstash -e input { stdin { } } output { stdout {}}

 

从文件中读取配置,然后连接mysql然后输出到es

新建 mysqletc 文件夹

技术分享图片

 

input{
     jdbc {
         jdbc_driver_library => "D:downloadlogstash-5.6.8mysqletcmysql-connector-java-5.1.47.jar"
         jdbc_driver_class => "com.mysql.jdbc.Driver"
         jdbc_connection_string => "jdbc:mysql://127.0.0.1:3306/tensquare_article?useUnicode=true&characterEncoding=UTF8"
         jdbc_user => "root"
         jdbc_password => "1234"
         jdbc_paging_enabled => "true"
         jdbc_page_size => "50"
         jdbc_default_timezone =>"Asia/Shanghai"
         #都为*每分钟都执行
         schedule => "* * * * *"
         statement => "SELECT id,title,content,state FROM tb_article"
         use_column_value => true
         tracking_column => "updatetime"
       } 
} 
output{
    elasticsearch {
        hosts => "127.0.0.1:9200"
        index => "tensquare"
        document_id => "%{id}"
        document_type => "article"
     }
     stdout {
     #以json格式输出
        codec => json_lines
     }
} 

 测试

logstash -f ../mysqletc/mysql.conf

 

以上是关于Logstash 安装和使用的主要内容,如果未能解决你的问题,请参考以下文章

02 - logstash 安装和简单使用

elastic search&logstash&kibana 学习历程Logstash使用场景和安装部署

Logstash使用grok解析IIS日志

Logstash使用grok解析IIS日志

干货安装部署Logstash和Kibana

Logstash Filebeat 安装配置之使用 Kibana 分析日志数据