要监控linux容器资源使用，可通过cadvisor结合prometheus实现细粒度监控。1. 安装配置cadvisor：拉取镜像并运行容器，访问其web界面查看容器资源使用情况；2. 安装配置prometheus：下载并配置其yaml文件以cadvisor为监控目标，启动服务后通过web界面查询指标数据；3. 自定义监控指标：编写并部署exporter程序，将其加入prometheus配置中；4. 监控其他资源：cadvisor还支持网络、磁盘i/o、文件系统、gpu等指标；5. 数据可视化：使用grafana连接prometheus，创建dashboard展示图表，并可设置报警规则实现告警通知。
监控Linux容器资源使用，简单来说，就是得知道容器吃了多少CPU、用了多少内存、网络流量跑了多少。用cAdvisor结合Prometheus，能实现容器级别的细粒度监控，而且数据可视化也方便。
解决方案
-
安装和配置cAdvisor:
- 下载cAdvisor镜像：
docker pull google/cadvisor - 运行cAdvisor容器：
docker run --volume=/:/rootfs:ro --volume=/var/run:/var/run:ro --volume=/sys:/sys:ro --volume=/var/lib/docker/:/var/lib/docker:ro --volume=/dev/disk/:/dev/disk:ro --publish=8080:8080 --detach=true --name=cadvisor google/cadvisor - 现在，访问
http://your_server_ip:8080，就能看到cAdvisor的Web界面，里面展示了所有容器的资源使用情况。
- 下载cAdvisor镜像：
-
安装和配置Prometheus:
- 下载Prometheus：去Prometheus官网下载对应系统的安装包。
- 配置Prometheus：创建一个
prometheus.yml文件，添加cAdvisor作为监控目标：
global: scrape_interval: 15s evaluation_interval: 15s scrape_configs: - job_name: 'cadvisor' static_configs: - targets: ['your_server_ip:8080'] # 替换成你的cAdvisor地址- 启动Prometheus：
./prometheus --config.file=prometheus.yml
-
验证监控数据:
- 访问Prometheus的Web界面：
http://your_server_ip:9090。 - 在Prometheus的查询框中，输入
container_cpu_usage_seconds_total，就能看到各个容器的CPU使用率数据。
- 访问Prometheus的Web界面：
如何自定义Prometheus的监控指标？
有时候，cAdvisor提供的默认指标可能不够用，需要自定义一些指标。这可以通过编写Exporter来实现。Exporter是一个小型程序，它从目标系统（比如容器内部的应用）收集数据，然后以Prometheus可以理解的格式暴露出来。
举个例子，假设你的应用暴露了一个HTTP接口，可以获取一些自定义的性能指标。你可以编写一个Exporter，定期调用这个接口，然后将数据转换成Prometheus的指标格式。Prometheus会定期抓取这些指标，然后你就可以在Prometheus中查询和分析这些数据了。
具体步骤：
- 编写Exporter：可以使用Go、Python等语言编写Exporter。
- 部署Exporter：将Exporter部署到你的服务器上，确保Prometheus可以访问它。
- 配置Prometheus：在
prometheus.yml文件中添加Exporter作为监控目标。
除了CPU和内存，还能监控哪些容器资源？
除了CPU和内存，cAdvisor还能监控很多其他的容器资源，比如：
- 网络: 容器的网络流量、连接数、错误率等。
- 磁盘I/O: 容器的磁盘读写速度、I/O延迟等。
- 文件系统: 容器的文件系统使用率、inode使用率等。
- GPU: 如果容器使用了GPU，cAdvisor还可以监控GPU的使用率、显存使用量等。
这些指标对于诊断容器性能问题非常有帮助。比如，如果发现容器的网络流量异常高，可能是容器内部的应用正在进行大量的网络请求；如果发现容器的磁盘I/O延迟很高，可能是容器正在频繁地读写磁盘。
如何将监控数据可视化？
Prometheus本身只提供了一个简单的查询界面，不太适合做数据可视化。通常会结合Grafana来做数据可视化。Grafana是一个开源的数据可视化工具，可以连接到Prometheus，然后将Prometheus的监控数据以图表的形式展示出来。
步骤：
- 安装Grafana：去Grafana官网下载对应系统的安装包。
- 配置Grafana：启动Grafana后，添加Prometheus作为数据源。
- 创建Dashboard：在Grafana中创建Dashboard，然后添加各种图表，将Prometheus的监控数据展示出来。
Grafana提供了丰富的图表类型，比如折线图、柱状图、热力图等。可以根据自己的需求选择合适的图表类型，将监控数据可视化。还可以设置报警规则，当监控指标超过阈值时，Grafana会发送报警通知。
