使用ELK分析腾讯云CLB日志

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用ELK分析腾讯云CLB日志相关的知识,希望对你有一定的参考价值。

参考技术A 最近在使用腾讯云,想对访问日志进行收集与分析,发现CLB(负责均衡)日志只能保存到COS上面,而且是每个CLB没小时压发送个gz压缩包到COS。

CLB配置日志存储到COS,Filebeat客户端CVM安装cosfs挂载COS,并配置Filebeat输出到Elasticsearch集群,最后通过Kibana和Grafana分析。

日志访问:当前仅支持HTTP/HTTPS访问日志的收集,腾讯云默认在CLB底层为客户保留3天的日志;开启日志访问后,日志将存入COS,支持更长期地存储,详情请见 https://cloud.tencent.com/document/product/214/10329 。

安装Filebeat或Logstash客户端上安装COSFS工具,挂载COS,安装参考 https://cloud.tencent.com/document/product/436/6883 。

a. Logstash主要配置信息如下:

b. Nginx模板配置信息如下:

c. Filebeat主配置文件如下:

a. Grafana制图模板如下:

ELK收集监控nginx请求日志

基于ELK Nginx日志分析 - 云+社区 - 腾讯云
https://cloud.tencent.com/developer/article/1586589

ELK收集监控nginx请求日志_sdmei-CSDN博客_es采集nginx日志
https://blog.csdn.net/sdmei/article/details/80011438



以上是关于使用ELK分析腾讯云CLB日志的主要内容,如果未能解决你的问题,请参考以下文章

Nginx结合腾讯云CLB完成请求头Host重写

腾讯云Log4j/Logback日志采集最佳实践

基于腾讯云CLB实现K8S v1.10.1集群高可用+负载均衡

腾讯云容器微服务API设计

腾讯云公网负载均衡技术实现详解

ELK收集监控nginx请求日志