一米辐、容器監(jiān)控概要

??使用docker compose組合應(yīng)用并利用scale可以實(shí)現(xiàn)快速對(duì)容器擴(kuò)容。由于docker compose啟動(dòng)的服務(wù)都在同一臺(tái)宿主機(jī)上兽愤，對(duì)于一個(gè)宿主機(jī)上運(yùn)行多個(gè)容器應(yīng)用時(shí)尤蛮，容器的運(yùn)行情況如：CPU使用率、內(nèi)存使用率肥缔、網(wǎng)絡(luò)狀態(tài)、磁盤空間等一系列隨時(shí)間變化的時(shí)序數(shù)據(jù)信息汹来，都是需要去了解的续膳，因此監(jiān)控是必須的怒见。

二、容器監(jiān)控方案選擇

1姑宽、docker stats

??對(duì)于容器的監(jiān)控方案可謂多種多樣，本身自帶命令docker stats命令闺阱、Scount炮车、Data Dog、Sysdig Cloud酣溃、Sensu Monitoring Framework, CAdvisor等瘦穆。

??通過docker stats命令可以很方便地看到當(dāng)前宿主機(jī)上所有容器的CPU、內(nèi)存以及網(wǎng)絡(luò)流量等數(shù)據(jù)赊豌。但是docker stats命令的缺點(diǎn)就是統(tǒng)計(jì)的只是當(dāng)前宿主機(jī)的所有容器扛或，而獲取的監(jiān)控?cái)?shù)據(jù)是實(shí)時(shí)的。碘饼，沒有地方存儲(chǔ)熙兔，也沒有報(bào)警功能。

docker stats

2艾恼、其他方案

Scount住涉、SysdigCloud、Data Dog雖然都提供了較完善的服務(wù)钠绍，但是它們都是托管的服務(wù)舆声，而且都收費(fèi)。Sensu Monitoring Framework集成度較高柳爽，也免費(fèi)媳握，但是部署過于復(fù)雜。綜合考慮磷脯，選擇CAvisor做容器監(jiān)控工具蛾找。

（1）CAdvisor
??CAdvisor谷歌出品，優(yōu)點(diǎn)是開源產(chǎn)品争拐，監(jiān)控指標(biāo)齊全腋粥，部署方便，而且有官方的docker鏡像架曹。缺點(diǎn)是集成度不高隘冲，默認(rèn)只在本地保存2分鐘數(shù)據(jù)。不過可以加上InfluxDB存儲(chǔ)數(shù)據(jù)绑雄，對(duì)接Grafana展示圖表展辞，比較便利地搭建好了容器監(jiān)控系統(tǒng)，數(shù)據(jù)收集和圖表展示效果良好万牺，對(duì)系統(tǒng)的性能也幾乎沒有什么影響罗珍。

??CAdvisor是一個(gè)容器資源監(jiān)控工具洽腺，包括容器的內(nèi)存、CPU覆旱、網(wǎng)絡(luò)IO蘸朋、磁盤IO等監(jiān)控，同時(shí)提供了一個(gè)WEB頁面用于查看容器的實(shí)時(shí)運(yùn)行狀態(tài)扣唱。CAdvisor默認(rèn)存儲(chǔ)2分鐘的數(shù)據(jù)藕坯，而且只是針對(duì)單物理機(jī)。不過CAdvisor提供了很多數(shù)據(jù)集成接口噪沙，支持InfluxDB炼彪、Redis、Kafka正歼、Elasticsearch等集成辐马，可以加上對(duì)應(yīng)配置將監(jiān)控?cái)?shù)據(jù)發(fā)往這些數(shù)據(jù)庫存儲(chǔ)起來。

CAdvisor功能主要有兩點(diǎn)：

• 展示Host和容器兩個(gè)層次的監(jiān)控?cái)?shù)據(jù)局义。
• 展示歷史變化數(shù)據(jù)喜爷。

（2）InfluxDB
??influxDB是用Go語言編寫的一個(gè)開源分布式時(shí)序、事件和指標(biāo)數(shù)據(jù)庫旭咽，無需外部依賴贞奋。

influxDB主要功能：

• 基于時(shí)間序列，支持與時(shí)間有關(guān)的相關(guān)函數(shù)（如最大癌蚁、最小幻梯、求和等）
• 可度量幸：可以實(shí)時(shí)對(duì)大量數(shù)據(jù)進(jìn)行計(jì)算；
• 基于事件：支持任意的事件數(shù)據(jù)努释；

influxDB主要特點(diǎn)：

• 無結(jié)構(gòu)（無模式）碘梢；
• 可以是任意數(shù)量的列；
• 可拓展的伐蒂；
• 支持min, max, sum, count, mean, median等一系列函數(shù)煞躬，方便統(tǒng)計(jì)；
• 原生的HTTP支持，內(nèi)置HTTP API恩沛；
• 強(qiáng)大的類SQL語法在扰；
• 自帶管理界面，方便使用

（3）Grafana
??Grafana是一個(gè)開源的數(shù)據(jù)監(jiān)控分析可視化平臺(tái)雷客，支持多種數(shù)據(jù)源配置（支持的數(shù)據(jù)源包括influxDB芒珠、MySql、Elasticsearch搅裙、OpenTSDB妓局、Graphite等）和豐富的插件及模板功能，支持圖表權(quán)限和報(bào)警呈宇。

Grafana主要特性：

• 靈活豐富的圖形化選項(xiàng)
• 可以混合多種風(fēng)格
• 支持白天和夜間模式
• 多個(gè)數(shù)據(jù)源

3、Cadvisor + InfluxDB + Grafana

三局雄、安裝部署

1甥啄、部署InfluxDB服務(wù)

docker run -d --name influxDB -p 8086:8086 \
-v /data/influxdb:/var/influxdb \
--hostname=influxdb \
influxdb

說明：

• --name：?jiǎn)?dòng)容器分配名字influxdb
• -p：映射端口，8083端口為influxdb管理端口炬搭，8086端口是influxdb的數(shù)據(jù)端口
• -v：掛載數(shù)據(jù)
• -d：后臺(tái)運(yùn)行此容器
• influxdb：通過這個(gè)容器來運(yùn)行的蜈漓，默認(rèn)會(huì)在docker官方倉庫pull下來

（1）瀏覽器訪問influxdb的管理端，http://ip:8083

docker exec -it influxdb influx

CREATE DATABASE "test"
CREATE USER "root" WITH PASSWORD 'root' WITH ALL PRIVILEGES

2融虽、部署Cadvisor服務(wù)

??谷歌的cadvisor可以用于收集Docker容器的時(shí)序信息，包括容器運(yùn)行過程中的資源使用情況和性能數(shù)據(jù)灼芭。

docker run --volume=/:rootfs:ro --volume=/var/run:/var/run:ro\
--volume=/sys:/sys:ro --volume=/var/lib/docker/:/var/lib/docker:ro\
--volume=/dev/disk/:/dev/disk:ro --volume=/cgroup:/cgroup:ro \
--publish=8080:8080 --detach=true --privileged=true --name=cadvisor \
google/cadvisor:latest\
-storage_driver=influxdb-storage_driver_host=influxdb:8086\
-storage_driver_db=test-storage_driver_user=root\
-storage_driver_password=root

說明：

• -d:后臺(tái)運(yùn)行此容器
• --name:啟動(dòng)容器分配名字cadvisor
• -p:映射端口8080
• --mount:把宿主機(jī)的相關(guān)目錄綁定到容器中有额，這些目錄都是cadvisor需要采集的目錄文件 和監(jiān)控內(nèi)容
• -storage_driver:需要指定cadvisor的存儲(chǔ)驅(qū)動(dòng)、數(shù)據(jù)庫主機(jī)彼绷、數(shù)據(jù)庫名

（1）通過ip + 8080端口訪問測(cè)試以下巍佑，第一次訪問該頁面比較慢

3、部署Grafana服務(wù)

??Grafana是一款開源的時(shí)序數(shù)據(jù)分析工具寄悯，而且界面專業(yè)易用萤衰。

docker run -d -p 3000:3000 \
-v /data/grafana:/var/lib/grafana \
--link=influxdb:influxdb\
--name grafana grafana/grafana

注意：如果使用-v把數(shù)據(jù)掛載出來會(huì)出現(xiàn)容器啟動(dòng)失敗，錯(cuò)誤為mkdir:cannot create directory '/var/lib/grafana/plugins':Permission denied,此時(shí)可以使用docker run --entrypoint "id" grafana/grafana得到uid,gid,groups(默認(rèn)是472);

接著使用chown -R 472:472 /data/grafana/修改目錄權(quán)限就可以啟動(dòng)成功猜旬。

（1）通過ip + 3000端口訪問grafana的web服務(wù)脆栋，第一次訪問需要修改admin用戶密碼，默認(rèn)用戶名/密碼為admin/admin

4洒擦、docker-compose集成和快速部署

創(chuàng)建編輯docker-compose.yml文件

version: '3.1'

volumes:
  grafana_data: {}

services:
 # 收集數(shù)據(jù)服務(wù)
 influxdb:
  image: tutum/influxdb:0.9
  #image: influxdb
  restart: always 
  environment:
    - PRE_CREATE_DB=cadvisor
  ports:
    - "8083:8083"
    - "8086:8086"
  expose:
    - "8090"
    - "8099"
  volumes:
    - ./data/influxdb:/data

 # 存儲(chǔ)數(shù)據(jù)
 cadvisor:
  image: google/cadvisor
  links:
    - influxdb:influxsrv
  command: -storage_driver=influxdb -storage_driver_db=cadvisor -storage_driver_host=influxsrv:8086
  restart: always
  ports:
    - "8080:8080"
  volumes:
    - /:/rootfs:ro
    - /var/run:/var/run:rw
    - /sys:/sys:ro
    - /var/lib/docker/:/var/lib/docker:ro

 # 展示數(shù)據(jù)
 grafana:
  user: "104"
  image: grafana/grafana
  user: "104"
  restart: always
  links:
    - influxdb:influxsrv
  ports:
    - "3000:3000"
  volumes:
    - grafana_data:/var/lib/grafana
  environment:
    - HTTP_USER=admin
    - HTTP_PASS=admin
    - INFLUXDB_HOST=influxsrv
    - INFLUXDB_PORT=8086
    - INFLUXDB_NAME=cadvisor
    - INFLUXDB_USER=root
    - INFLUXDB_PASS=root

在yml所在目錄下執(zhí)行以下命令啟動(dòng)：

docker-compose up

查詢是否正常啟動(dòng)

（2）配置面板