应用程序的日志通过rsyslog推送到syslog服务器
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了应用程序的日志通过rsyslog推送到syslog服务器相关的知识,希望对你有一定的参考价值。
centos5系列系统自带为syslog1.4.1
centos6系列自带rsyslog版本为5.8.10
centos7系列自带rsyslog版本为7.4.7
目前最新版rsyslog为8.27.0,rsyslog从8.5.0后对imfile模块进行重构,文件名中可以支持通配符。
rsyslog官网:http://www.rsyslog.com/
升级rsyslog需要配置yum源,centos默认的升级不到最新的版本。
1、配置yum
为了能够使用RPM存储库,您需要一个.repo文件。使用您的webbrowser,请访问http://rpms.adiscon.com。在这里,可以下载rsyslogall.repo文件,或者转到所需版本的子文件夹(例如v8-stable),然后从中下载rsyslog.repo文件。(google翻译来的)
[[email protected] yum.repos.d]# pwd /etc/yum.repos.d [[email protected] yum.repos.d]# ls dvd.repo packagekit-media.repo rhel-source.repo rsyslog.repo [[email protected] yum.repos.d]# cat rsyslog.repo [rsyslog_v8] name=Adiscon CentOS-$releasever - local packages for $basearch baseurl=http://rpms.adiscon.com/v8-stable/epel-$releasever/$basearch enabled=1 gpgcheck=0 gpgkey=http://rpms.adiscon.com/RPM-GPG-KEY-Adiscon protect=1 [[email protected] yum.repos.d]# rpm -qa|grep -i rsyslog rsyslog-5.8.10-10.el6_6.x86_64 [[email protected] yum.repos.d]# yum -y install rsyslog [[email protected] yum.repos.d]# rpm -qa|grep -i rsyslog rsyslog-8.27.0-2.el6.x86_64 [[email protected] yum.repos.d]#
根据官方网文档如果复制以上配置可能解析变量不正确导致安装不成功,此时需要替换第三行中的变量“$ releasever”,$releasever的值表示当前系统的发行版本,可以通过rpm -qi centos-release命令查看,其中的Version:6就是我们系统的版本号;$basearch是我们的系统硬件架构(CPU指令集),使用命令arch得到。
[[email protected] yum.repos.d]# rpm -qi centos-release Name : centos-release Relocations: (not relocatable) Version : 6 Vendor: CentOS Release : 5.el6.centos.11.1 Build Date: Wed 27 Nov 2013 07:53:33 PM CST Install Date: Thu 27 Apr 2017 06:39:55 PM CST Build Host: c6b9.bsys.dev.centos.org Group : System Environment/Base Source RPM: centos-release-6-5.el6.centos.11.1.src.rpm Size : 32670 License: GPLv2 Signature : RSA/SHA1, Wed 27 Nov 2013 09:26:58 PM CST, Key ID 0946fca2c105b9de Packager : CentOS BuildSystem <http://bugs.centos.org> Summary : CentOS release file Description : CentOS release files [[email protected] yum.repos.d]# arch x86_64 [[email protected] yum.repos.d]#
2、配置rsyslog
rsyslog默认只可以传送系统的日志,比如DHCP,cron、kern等,现在要传送一个服务的日志到远端的rsyslog服务器,要使用rsyslog的imfile模块。该模块提供将任何标准文本文件转换为syslog消息的功能。该文件逐行读取,任何读取的行都传递给rsyslog的规则引擎。
官方文档:
http://www.rsyslog.com/doc/v8-stable/configuration/modules/imfile.html
上图为配置样例,各参数可以参考文中的对应模块参数说明,module参考文中Module Parameters说明;input参考文中Input Parameters说明。
[[email protected] yum.repos.d]# cp /etc/rsyslog.conf{,.20170613bak} [[email protected] yum.repos.d]# vim /etc/rsyslog.conf module(load="imfile" PollingInterval="10") input(type="imfile" File="/opt/CalculationUnit/java/sh/logs/bigada.log" Tag="CalculationUnit" Severity="info" Facility="local0" freshStartTail="on" deleteStateOnFileDelete="on") local0.* @10.10.15.175:514 [[email protected] yum.repos.d]# /etc/init.d/rsyslog restart
module
load="imfile" 加载imfile模块
PollingInterval="10" 轮询文件的频率,单位秒,默认10秒,
input
type="imfile"
File="/opt/CalculationUnit/java/sh/logs/bigada.log" 发送到syslog的文件绝对路径
Tag="CalculationUnit"
Severity="info"
Facility="local0"
freshStartTail="on" 设置为on每次重启rsyslog时只读取最新的数据丢弃旧日志,默认关
deleteStateOnFileDelete="on" 如此文件会重新生成需要开启次参数,例如bigdata.log每天凌晨会重命名为bigdata%YYYY%mm%dd%.log,然后重新生成bigdata.log
local0.* @10.10.15.175:514 定义syslog服务器地址
现在可以在syslog服务端数据库里查看到信息
以上是关于应用程序的日志通过rsyslog推送到syslog服务器的主要内容,如果未能解决你的问题,请参考以下文章
syslog+rsyslog+logstash+elasticsearch+kibana搭建日志收集
Rsyslog日志收集服务并结合Loganalyzer工具展示