Prometheus 收集 Docker 信息時头镊,通常使用 cAdvisor(Container Advisor)作為收集器妆丘。cAdvisor 是一個開源的工具部翘,專門用于收集容器運行時的資源使用情況和性能數(shù)據(jù)暇务,支持 Docker 容器劣针。它能夠監(jiān)控 CPU亡脸、內(nèi)存押搪、網(wǎng)絡、磁盤 I/O 等多種指標浅碾,并將這些數(shù)據(jù)暴露為 Prometheus 可以抓取的指標大州。
官方地址:
https://github.com/google/cadvisor
在CentOS上運行參考地址:
https://github.com/google/cadvisor/blob/master/docs/running.md
運行 cAdvisor 容器
你可以通過 Docker 啟動一個 cAdvisor 容器
命令如下:
docker run \
--volume=/:/rootfs:ro \
--volume=/var/run:/var/run:ro \
--volume=/sys:/sys:ro \
--volume=/var/lib/docker/:/var/lib/docker:ro \
--volume=/cgroup:/cgroup:ro \
--publish=8080:8080 \
--detach=true \
--restart unless-stopped \
--name=cadvisor \
google/cadvisor:latest
在 Docker 中,--volume(或者簡寫為 -v)選項用于將宿主機的文件或目錄掛載到容器中垂谢。這里的命令示例中使用了多個 --volume 選項厦画,每個選項都將宿主機上的目錄或文件掛載到容器內(nèi)的某個位置。以下是這些掛載的含義:
如:--volume=/:/rootfs:ro:
- 宿主機路徑:/ (根目錄)
- 容器內(nèi)路徑:/rootfs
- 掛載模式:ro (只讀)
- 含義:將宿主機的根文件系統(tǒng)以只讀模式掛載到容器的 /rootfs 目錄中滥朱。這樣容器能夠訪問宿主機的所有文件系統(tǒng)結構苛白,但不能進行任何修改。
其他目錄:
- /var/run: 通常包含一些運行時的進程和服務相關的文件焚虱,如 Docker 守護進程的 Unix socket购裙,這樣容器可以讀取這些文件,但無法修改鹃栽。
- /sys: 文件系統(tǒng)是 Linux 中用于存儲和訪問系統(tǒng)設備的信息和狀態(tài)的虛擬文件系統(tǒng)躏率,通過只讀方式掛載躯畴,可以讓容器獲取系統(tǒng)的狀態(tài)信息。
- /var/lib/docker:宿主機的 Docker 數(shù)據(jù)目錄(存放容器薇芝、鏡像蓬抄、網(wǎng)絡等信息),cAdvisor 通過訪問這個目錄夯到,可以獲取有關 Docker 容器的信息嚷缭。
- cgroup 是 Linux 內(nèi)核提供的一種機制,用于對系統(tǒng)資源(CPU耍贾、內(nèi)存阅爽、I/O 等)進行分組管理和限制,通過訪問 cgroup 文件系統(tǒng)荐开,cAdvisor 可以獲取和監(jiān)控容器的資源使用情況付翁。
查看指標
啟動 cAdvisor 后,它會在 http://<cAdvisor_host>:8080/metrics 路徑下暴露所有收集的指標數(shù)據(jù)晃听。Prometheus 將按照配置的抓取間隔自動抓取這些指標百侧。
如:
- http://192.168.31.77:8080/metrics
- http://192.168.31.77:8080/containers/
- http://192.168.31.77:8080/containers/docker
在 Prometheus 中配置抓取
在 Prometheus 的配置文件 prometheus.yml 中,添加一個 scrape job 來抓取 cAdvisor 暴露的指標能扒。比如:
scrape_configs:
- job_name: 'cadvisor'
static_configs:
- targets: ['<cAdvisor_host>:8080']
重啟容器:
docker restart prometheus
prometheus 也是docker安裝的
查看:
Grafana可視化配置
要在 Grafana 中展示 cAdvisor 收集的 Docker 容器信息佣渴,可以使用以儀表盤模板。這些模板已經(jīng)預先配置好初斑,可以直接導入并使用辛润,從而快速開始監(jiān)控 Docker 容器的資源使用情況。
使用模板
在儀表盤中選擇新建 -> 導入越平,填如復制的模板ID频蛔,選擇數(shù)據(jù)源,保存
搜索模板:
https://grafana.com/grafana/dashboards/?search=Docker
通過關鍵詞如 "Docker" 或 "cAdvisor" 進行搜索
可用模板如:
- cAdvisor Dashboard
- ID: 19792
- Docker Dashboard for Prometheus 中文版
- ID:11558
- Docker overview with Cadvisor + docker state exporter + node exporter
- ID:21154
- Docker and system monitoring
- ID: 893
- Docker Swarm and Containers
- ID:609
- docker container & OS node(node_exporter, cadvisor)
- ID: 16314
- 中文 docker 容器 cadvisor 和主機指標面板
- 主機指標 ( 可綁定到主機秦叛,需要 node-exporter 的 instance 標簽值與 cadvisor 的 instance 標簽值相同 )
將 cadvisor 與 node_exporter 指標關聯(lián)
有的面板可以同時監(jiān)控 cadvisor 和 node_exporter 指標晦溪,如需將 cadvisor 與 node_exporter 指標關聯(lián),需要將 cadvisor 和 node_exporter 的 instance 標簽設置為相同的值 ( 例如主機名挣跋、ip地址等 )
cAdvisor 和 node_exporter 是常用的兩個數(shù)據(jù)源三圆。cAdvisor 用于監(jiān)控 Docker 容器的資源使用情況,而 node_exporter 用于監(jiān)控主機級別的系統(tǒng)資源(如 CPU避咆、內(nèi)存舟肉、磁盤等)。
為了在同一個 Grafana 面板中同時展示這兩者的數(shù)據(jù)查库,并確保它們的監(jiān)控數(shù)據(jù)能夠正確關聯(lián)起來路媚,你需要確保這兩個數(shù)據(jù)源的 instance 標簽具有相同的值。通常這個值是主機名或 IP 地址樊销。
如何設置 instance 標簽為相同值
你需要在 prometheus.yml 配置文件中使用 relabel_configs 來覆蓋 instance 標簽的默認值整慎。
找到配置 cAdvisor 和 docker宿主機Node Exporter 的抓取任務的部分脏款,并添加 relabel_configs 來替換 instance 標簽的。
如:
# 監(jiān)控Docker宿主機主機的 Node Exporter
- job_name: 'docker_node_exporter'
static_configs:
- targets: ['192.168.31.77:9100']
relabel_configs:
- target_label: instance
replacement: 'DockerHost'
# 監(jiān)控Docker相關信息
- job_name: 'cadvisor'
static_configs:
- targets: ['192.168.31.77:8080']
relabel_configs:
- target_label: instance
replacement: 'DockerHost'
- target_label 指定要替換或設置的目標標簽裤园。在這個例子中撤师,instance 標簽就是我們要替換的目標標簽。
- replacement 定義了 target_label 標簽的新值拧揽。在這個例子中剃盾,我們將 instance 標簽的值設置為 'DockerHost'。
重啟
docker restart prometheus
在 Prometheus 的 Status -> Targets 中查看
這樣 cAdvisor 的 instance 標簽將與 宿主機的 node_exporter 的 instance 標簽一致淤袜。
展示效果如: