DockerCAdvisor+InfluxDB+Granfana容器监控

Posted 2023-04-02 Al6n Lee

文章目录

• • 原生命令 `docker stats`
  • 容器监控3剑客CIG
  • • CAdvisor
    • InfluxDB
    • Granfana
  • compose容器编排，一套带走
  • • 新建目录
    • 新建3件套组合的 docker-compose.yml
    • 检查配置，有问题才有输出 `docker-compose config -q`
    • 启动docker-compose文件 `docker-compose up -d`
  • 测试
  • • 浏览cAdvisor收集服务，http://ip:8080/
    • 浏览influxdb存储服务，http://ip:8083/
    • 浏览grafana展现服务，http://ip:3000
  • 配置grafana
  • • 配置数据源
    • 配置面板panel
    • 配置面板panel 查询配置

原生命令 docker stats

docker stats命令的结果
通过docker stats命令可以很方便的看到当前宿主机上所有容器的CPU,内存以及网络流量等数据，一般小公司够用。

• 但是，docker stats统计结果只能是当前宿主机的全部容器，数据资料是实时的，没有地方存储、没有健康指标过线预警等功能

容器监控3剑客CIG

CAdvisor监控收集+InfluxDB存储数据+Granfana展示图表

• CAdvisor

  CAdvisor是一个容器资源监控工具包括容器的内存,CPU,网络IO,磁盘IO等监控,同时提供了一个WEB页面用于查看容器的实时运行状态。CAdvisor默认存储2分钟的数据,而且只是针对单物理机。不过，CAdvisor提供了很多数据集成接口,支持InfluxDB,Redis,Kafka,Elasticsearch等集成,可以加上对应配置将监控数据发往这些数据库存储起来。

  • CAdvisor功能主要有两点:
    • 展示Host和容器两个层次的监控数据
    • 展示历史变化数据。

• InfluxDB

  lnfluxDB是用Go语言编写的一个开源分布式时序、事件和指标数据库,无需外部依赖。

  • CAdvisor默认只在本机保存最近2分钟的数据，为了持久化存储数据和统一收集展示监控数据，需要将数据存储到InfluxDB中。InfluxDB是一个时序数据库专门用于存储时序相关数据，很适合存储CAdvisor的教据。而且，CAdvisor本身已经提供了InfluxDB的集成方法，丰启动容器时指定配置即可。

  • InfluxDB主要功能:
    • 基于时间序列,支持与时间有关的相关函数(如最大、最小、求和等)
    • 可度量性:你可以实时对大量数据进行计算:
    • 基于事件:它支持任意的事件数据;

• Granfana

  Grafana是一个开源的数据监控分析可视化平台,支持多种数据源配置(支持的数据源包括InfluxDB,mysqlElasticsearch,OpenTSDB,Graphite等)和丰富的插件及模板功能,支持图表权限控制和报警。

  • Grafan主要特性
    • 灵活丰富的图形化选项
    • 可以混合多种风格
    • 支持白天和夜间模式
    • 多个数据源

compose容器编排，一套带走

• 新建目录

  

• 新建3件套组合的 docker-compose.yml

  version: '3.1'
  
  volumes:
    grafana_data: 
   
  services:
   influxdb:
    image: tutum/influxdb:0.9
    restart: always
    environment:
      - PRE_CREATE_DB=cadvisor
    ports:
      - "8083:8083"
      - "8086:8086"
    volumes:
      - ./data/influxdb:/data
   
   cadvisor:
    image: google/cadvisor
    links:
      - influxdb:influxsrv
    command: -storage_driver=influxdb -storage_driver_db=cadvisor -storage_driver_host=influxsrv:8086
    restart: always
    ports:
      - "8080:8080"
    volumes:
      - /:/rootfs:ro
      - /var/run:/var/run:rw
      - /sys:/sys:ro
      - /var/lib/docker/:/var/lib/docker:ro
   
   grafana:
    user: "104"
    image: grafana/grafana
    user: "104"
    restart: always
    links:
      - influxdb:influxsrv
    ports:
      - "3000:3000"
    volumes:
      - grafana_data:/var/lib/grafana
    environment:
      - HTTP_USER=admin
      - HTTP_PASS=admin
      - INFLUXDB_HOST=influxsrv
      - INFLUXDB_PORT=8086
      - INFLUXDB_NAME=cadvisor
      - INFLUXDB_USER=root
      - INFLUXDB_PASS=root
  

• 检查配置，有问题才有输出 docker-compose config -q

  

• 启动docker-compose文件 docker-compose up -d

  docker-compose up -d

  

测试

• 浏览cAdvisor收集服务，http://ip:8080/

  • 第一次访问慢，请稍等

  • cadvisor也有基础的图形展现功能，这里主要用它来作数据采集

    

• 浏览influxdb存储服务，http://ip:8083/

  

• 浏览grafana展现服务，http://ip:3000

  默认帐户密码（admin/admin）

  

配置grafana

• 配置数据源

  
  
  
  
  

• 配置面板panel

  
  
  

• 配置面板panel 查询配置

  
  

Grafanacollectd 和 InfluxDB 打造现代监控系统安装篇

为什么研究Grafana、collectd 和 InfluxDB，是因为本人工作中使用到的开源监控软件（nagios、Cacti）画图都是基于RRD实现的，老实说都不太美观，并且无法自定义图表，但是凭本人的开发水平还无法做到自己写图表。

Grafana+collectd+InfluxDB，采用客户端->服务端存储->WEB界面显示的工作模式，使用UTP传输数据，并且支持自定义图表，有良好的扩展性，重要的是Grafana页面展示比较美观。

页面展示可浏览官方演示平台：http://play.grafana.org/

首先说说这个组合的工作模式和分工：

采集数据（collectd）-> 存储数据（InfluxDB) -> 显示数据（Grafana）。
InfluxDB 是 Go 语言开发的一个开源分布式时序数据库，非常适合存储指标、事件、分析等数据，看版本号（v0.8.8）就知道这个项目还很年轻；
collectd 就不用介绍了吧，C 语言写的一个系统性能采集工具；
Grafana 是纯 Javascript 开发的前端工具，用于访问 InfluxDB，自定义报表、显示图表等

collectd负责把数据从客户端采集到服务端的InfluxDB这个数据库中，Grafana负责把数据从InfluxDB库中取出来在页面展示

测试环境介绍：
server端：172.18.1.113
安装程序：InfluxDB Grafana

Client端：172.18.2.125
安装程序：Collectd

server端

一、influxdb安装

（1）配置YUM源
cat <<EOF |tee /etc/yum.repos.d/influxdb.repo
[influxdb]
name = InfluxDB Repository - RHEL \$releasever
baseurl = https://repos.influxdata.com/rhel/\$releasever/\$basearch/stable
enabled = 1
gpgcheck = 1
gpgkey = https://repos.influxdata.com/influxdb.key
EOF

（2）安装和启动
#yum install -y influxdb
#service influxdb start

（3）相关信息
web后台http://172.18.1.113:8083/
API接口 172.18.1.113:8086
配置文件路径：/etc/influxdb/influxdb.conf

二、grafana安装

1.RPM包安装
（1）安装
#wget https://grafanarel.s3.amazonaws.com/builds/grafana-2.6.0-1.x86_64.rpm
#rpm -Uvh grafana-2.6.0-1.x86_64.rpm

（2）修改配置
日志路径：
/var/log/grafana/grafana.log

配置文件路径：
/etc/grafana/grafana.ini

#vim /etc/grafana/grafana.ini

//由于默认端口3000和我测试环境的一个程序冲突，所以修改默认服务端口为
http_port = 3001

#/etc/init.d/grafana-server restart

启动服务后访问 http://172.18.1.113:3001

Client端

collectd安装，大部分Linux版本自带的YUM源都有此软件
#yum insatll -y collectd

本文出自 “无技术不疯魔” 博客，请务必保留此出处http://s8576.blog.51cto.com/9510968/1745439