IT运维监控平台

布满荆棘的人生 2023-08-17 16:57 73阅读 0赞

> 最近设计了公司监控系统，已向高层汇报；会上沟通还不错，领导也非常认可
> 
> 这边现在来总结分享设计思路及监控方案

## 背景条件 ##

首先是业务系统多、团队多，而且还有不少流动的厂商及外包人员

所以这里面就有一个规划的问题，包括监控点、日志格式是否统一

目前上述这些都是单打独斗，无整体规划的

其次是目前对监控系统的需求性不高，底层有公有云提供的稳定服务和简单监控

业务层面有业务人员报障，也有业务运维针对关键业务编写了监控脚本

其余的非关键业务，则对服务的可用性没有那么高要求

最后是已经有部分监控系统在做测试及试用：Grafana/Prometheus/ELK

基于以上背景，和公司提出的一些需求（特别是网络拓扑图），在研究了主流的开源产品后

Zabbix/Prometheus/OpenFalcon

数据处理还是使用zabbix吧，开箱即用，web管理界面做的好

## 架构概要 ##

![m9Ktyt.png][]

由grafana负责数据可视化，zabbix系统负责数据的采集和分析处理

当前zabbix版本为4.2，感觉更加开放了，支持数据推送、支持Prometheus

但是仍然有不少缺点，api有点啰嗦（个人觉得），web操作繁琐

所以我大量使用了zabbix的discovery功能生成监控

## 管理平台 ##

![m9GgC8.png][]

为了方便（偷懒）监控配置，单独写了一个统一管理平台，可以说是一种CMDB

但是不想把话说那么满，仅是用来维护监控对象的一套系统

同样是 django + jq 一把梭

把django用成不是django的样子，改天可以再单独写写这个内容

![m9GL2F.png][]

通过录入一些业务主机的基本信息，再辅以zabbix的自动发现，可以快速生成监控配置

部分 discovery 脚本：

discovery_app_monitor_script.py
    discovery_business_child_node.py
    discovery_business.py
    discovery_db_backup_ip.py
    discovery_host_monitor.py
    discovery_jvm_app.py
    discovery_wan_ip.py

我觉得挺方便的，各位业务运维同仁可以自己维护信息，我就可以休息了

同时也可以录入系统间调用关系，达到监控业务A -> B端调用是否正常等等

利用这些信息用来绘制一个系统的拓扑图，但目前仅监控了由A -> B端端口

更详细的业务层面探测，还未开始进行

![m9JosH.png][]

根据信息绘制的关系图

[![m9JTLd.md.png][]][m9JTLd.md.png 1]

本来想根据关系直接生成zabbix上的系统拓扑图，但是内容太多，一时掌握不了

目前还是手动配置中

## 后续展望 ##

对于整个框架我觉得是没有什么问题了，当前的能力也就做到这样了

继续在细节上完善，引入日志分析，告警聚合等

外部界面再加个壳就可以做成产品出售了，呵呵。

转载于:https://www.cnblogs.com/tutuye/p/11351813.html

[m9Ktyt.png]: /images/20230809/57770f1b68ea4e198d6062aedace2374.png
[m9GgC8.png]: /images/20230809/38b5a29adf3c42e698ad77b9fa853a08.png
[m9GL2F.png]: /images/20230809/99e0829ca5624cae99d1fbf91e90d03d.png
[m9JosH.png]: /images/20230809/564db01d69fd48da8d077ce75fba22f5.png
[m9JTLd.md.png]: /images/20230809/9e1a0ed3d1e642bba54b18508496d612.png
[m9JTLd.md.png 1]: https://imgchr.com/i/m9JTLd

发表评论取消回复

表情：

评论列表（有 0 条评论，73人围观）

还没有评论，来说两句吧...

相关阅读

相关 SpringBoot-运维监控工具（actuator）

通过浏览器 [http://localhost:18080/actuator/health][http_localhost_18080_actuator_health] ...

妖狐艹你老母/ 2024年04月17日 05:49/ 0 赞/ 18 阅读

相关 IT运维监控平台

> 最近设计了公司监控系统，已向高层汇报；会上沟通还不错，领导也非常认可 > > 这边现在来总结分享设计思路及监控方案背景条件首先是业务系统多、团队多，而且还有不

布满荆棘的人生/ 2023年08月17日 16:57/ 0 赞/ 74 阅读

相关建设DevOps统一运维监控平台，先从日志监控说起

转截自：[https://cloud.tencent.com/developer/article/1080865][https_cloud.tencent.com_develo

偏执的太偏执、/ 2023年01月17日 02:28/ 0 赞/ 128 阅读

相关运维监控体系

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

青旅半醒/ 2023年01月12日 01:55/ 0 赞/ 97 阅读

相关金融行业IT运维监控体系建设

IT运维体系的架构中，IT运维监控是IT运维体系中重要的组成部分，作为运维的生命线，安全生产保障的生命线仍需强调。运维的安全生产保障，主要以“监、管、控”为核心，其中“监”则主

灰太狼/ 2022年09月05日 12:51/ 0 赞/ 163 阅读

相关 Solr 运维管理监控

摘要：有时候需要对Solr状态进行监控，但是Solr自身不支持这种功能。需要借助一个工具Cloudera Manager。 cloudera manager四大功能

缺乏、安全感/ 2022年06月11日 01:13/ 0 赞/ 234 阅读

相关开源运维管理平台

[http://www.osapub.com/][http_www.osapub.com] [http://blog.liuts.com/post/184/][http_bl

今天药忘吃喽~/ 2022年04月23日 11:32/ 0 赞/ 265 阅读

相关运维监控数据模型

Counter（计数器）模型计数器是一个累积指标，单调递增，其值仅能增长或重置为0。类似于“服务请求数”、“任务完成数”和“错误数”等可以使用计数器模型，而“进程数”等可

谁借莪１个温暖的怀抱￠/ 2022年04月22日 05:48/ 0 赞/ 312 阅读

相关数据库运维平台

1、数据库集中管理，通过浏览器网页方式对数据库在线管理，支持MySQL，Oracle，DB2，PostgreSQL， SQL Server，mongoDB，Hive，S

傷城~/ 2021年12月12日 00:34/ 0 赞/ 376 阅读

相关建设DevOps统一运维监控平台，先从日志监控说起

https://blog.csdn.net/jessise\_zhan/article/details/80129915 https://blog.csdn.net/JThi

桃扇骨/ 2021年09月17日 14:14/ 0 赞/ 261 阅读