「快学Docker」监控和日志记录容器的健康和性能

拼搏现实的明天。 2024-02-06 04:53 11阅读 0赞

#### 「快学Docker」监控和日志记录容器的健康和性能 ####

*   *   *  1. 容器健康状态监控
         *  2. 性能监控
         *  3. 日志记录
         *   *  几种采集架构图
         *  4. 监控工具和平台
         *   *  cAdvisor（Container Advisor）
             *  Prometheus
             *  Grafana
         *  5. 自动化运维

#### 1. 容器健康状态监控 ####

*  方法1：需要实时监测容器的运行状态，包括 CPU 使用率、内存占用、网络流量等指标。
 *  方法2：使用容器编排工具（如 Docker Compose 或 Kubernetes）来设置容器的健康检查，确保异常容器能够被及时重新部署或替换。  
    ![在这里插入图片描述][e0a2c85395f14eb386202219e87ae137.png]
 *  方法3：利用 Docker 自带的健康检查机制或第三方监控工具，定期对容器进行健康状态的检测和报告。  
    ![在这里插入图片描述][40ce53945ac942f2980389b790248408.png]

#### 2. 性能监控 ####

*  监控容器的性能指标，例如 CPU 利用率、内存使用情况、磁盘 I/O 等，以便及时发现潜在的性能瓶颈。

1.  使用`docker stats`命令查看：  
    ![在这里插入图片描述][24a4f480ddf349c2981cee5b3b96afc5.png]
2.  `docker ps -a` 找到容器的container id，再使用`ps -ef` 找到容器对应的进程，获得容器对应的pid后，使用top、pmap、ps等查看进程内存的命令查看容器的内存占用情况。
    
     *  使用监控工具收集容器的性能数据，并进行实时展示和历史趋势分析。  
        ![在这里插入图片描述][376b7d0f1b064a929c0eeb68540b3bc7.png]
     *  针对高负载的容器，可以考虑使用监控告警系统，设定阈值并及时通知相关人员进行处理。

#### 3. 日志记录 ####

*  在容器中设置合适的日志级别，并将日志输出到标准输出或标准错误流中。
 *  将容器的日志集中存储至日志管理系统（如 ELK Stack、Splunk 等），以便统一管理和分析。
 *  通过日志聚合工具对容器日志进行搜索、过滤和分析，快速定位问题并进行故障排除。

##### 几种采集架构图 #####

1.  业务埋点数据、应用日志数据  
    **log-pilot->kafka->logstash->es->kibana  
    log-pilot->kafka->storm/spark**

![在这里插入图片描述][0abb8e052e11425bb5b93b1b5f10e637.png]  
2. 应用日志数据  
**log-pilot->logstash->es->kibana**  
![在这里插入图片描述][355e74250fbf42819f5e3b4159c85804.png]  
3. 采集文件日志  
![在这里插入图片描述][a4282acbbbf44d668388304295087c91.png]

#### 4. 监控工具和平台 ####

*  使用专门的容器监控工具（如 cAdvisor、Prometheus、Grafana 等）来实现容器的监控和性能采集。
 *  整合容器监控到现有的监控平台中，实现对整个系统的统一监控和管理。

##### cAdvisor（Container Advisor） #####

*  cAdvisor 是由 Google 开发的开源容器监控工具，专门用于分析容器的资源使用情况和性能特征。
 *  它能够自动采集容器的 CPU 使用率、内存占用、文件系统使用情况等数据，并提供 Web 界面展示监控信息。
 *  cAdvisor 对于 Docker 等容器平台的集成较为简单，并且可以作为 Prometheus 的数据源。  
    ![在这里插入图片描述][1f045709f7a344148243dfc78d892f2c.png]

##### Prometheus #####

*  Prometheus 是一种开源的事件监控和报警工具，旨在收集、存储和展示大规模环境下的监控数据。
 *  它支持多维度数据模型和强大的查询语言，可应对动态环境下的监控需求。
 *  Prometheus 提供了灵活的图形化界面和报警管理功能，对于大规模容器环境的监控非常有用。  
    ![在这里插入图片描述][e9dab4c2e22a4ca1b5ba547192dae522.png]

##### Grafana #####

*  Grafana 是一款开源的数据可视化和监控平台，支持多种数据源，并提供丰富的图表和面板展示监控数据。
 *  通过与 Prometheus 等数据源的整合，Grafana 能够提供直观、灵活的监控数据展示，并支持告警、通知等功能。
 *  Grafana 的用户界面友好且定制性强，适合于定制化的监控需求和大屏幕展示。  
    ![在这里插入图片描述][108c7609df2f4f7b98d0b60ebdd7ec32.png]

> 在实际应用中，这几个工具经常会结合使用，cAdvisor 用来采集容器的基本监控数据，Prometheus 用来存储和查询这些数据，而 Grafana 则用来展示和可视化这些数据，形成一个完整的容器监控系统。

#### 5. 自动化运维 ####

*  结合自动化运维工具，通过容器编排平台自动进行健康检查、扩缩容和故障恢复，提高容器系统的稳定性和可靠性。

> 通过对容器的健康状态和性能进行监控和日志记录，可以及时发现问题、调整资源配置，并为持续优化容器化应用提供数据支持。这些措施有助于确保容器化环境的稳定性和高效性。

[e0a2c85395f14eb386202219e87ae137.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/c0b70f6dd2f547bd99bc0380342a2d6d.png
[40ce53945ac942f2980389b790248408.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/6a94f633d5814a1889c91a2084001976.png
[24a4f480ddf349c2981cee5b3b96afc5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/4cabedcadba04251b57c5f18c9b110e9.png
[376b7d0f1b064a929c0eeb68540b3bc7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/43028fb3535843a49b9c6b5687e57f45.png
[0abb8e052e11425bb5b93b1b5f10e637.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/4cb3c28b3a5c4d8487fbe354516bc613.png
[355e74250fbf42819f5e3b4159c85804.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/f272a7f49ee042068867804eb83d0720.png
[a4282acbbbf44d668388304295087c91.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/cb125026d4b44b75b8c7635c6800cbe4.png
[1f045709f7a344148243dfc78d892f2c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/c45410ac206d4be29da03439ac8b9f4f.png
[e9dab4c2e22a4ca1b5ba547192dae522.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/51fe70e4bb0942a0902e9ff5eeaddc7c.png
[108c7609df2f4f7b98d0b60ebdd7ec32.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/4e04175ad9f249d6afce9e385026fde8.png