logstash读取redis数据

Posted 网络终结者

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了logstash读取redis数据相关的知识,希望对你有一定的参考价值。

类型设置:

logstash中的redis插件,指定了三种方式来读取redis队列中的信息。

 

  • list=>BLPOP                                    (相当于队列)
  • channel=>SUBSCRIBE                     (相当于发布订阅的某个特定的频道)
  • pattern_channel=>PSUBSCRIBE       (相当于发布订阅某组频道)

 

其中list,相当于队列;channel相当于发布订阅的某个特定的频道;pattern_channel相当于发布订阅某组频道

 

参数设置:

db:

Redis里面有数据库的概念,一般是16个,默认登录后是0,可以通过命令选择。如果应用系统选择使用了不同的数据库,那么可以通过配置这个参数从指定的数据库中读取信息。

key:

Redis中的数据都是通过键值来索引的,不管是字符串还是列表,所以这个key相当于数据库中的表。
如果是list或者channel模式,key都是指定的键值;而如果是pattern_channel,那么key可以通过glob通配的方式来指定。

password:

有的Redis为了安全,是需要进行验证的。只有设置了password,才能正确的读取信息。相反,如果redis没有设置密码,而logstash中配置了密码,也会报错!

batch_count:

这个属性设置了服务器端返回的事件数目,比如设置了5条,那么每次请求最多会直接获取5条日志返回。

 

以上是关于logstash读取redis数据的主要内容,如果未能解决你的问题,请参考以下文章

ELK部署

Logstash2.3.4趟坑之集成Redis哨兵模式

logstash对nginx日志进行解析

Logstash之Logstash inputs(file和redis插件)Logstash outputs和Filter plugins

filebeat收集日志传输到Redis集群,logstash从Redis集群中拉取数据

es redis logstash 日志收集系统排错