一种全链路监控系统的制作方法

本发明涉及互联网运维，尤其涉及ipc h04l12领域，进一步的，涉及一种全链路监控系统。

背景技术：

1、随着业务规模的扩展，特别是伴随销售目标的达成，逐渐形成系统用户数日益增加，前端用户的请求频度增加，链路变得更长，应用之间的调用关系变得越来越复杂，系统对业务的支持作用也日益增大，在数字化转型推进时期，为了帮助it运维团队全面洞察系统运行的状态，在系统遇到故障时能够早发现，根因定位，防止再发，因此需要建立一种全新的全链路监控系统，通过实现可视可控可追溯的全链路监控，强化了系统运维的保障能力，提升故障发现和故障定位的时间效率。

2、中国专利cn 109962792 a公开了一种基于大数据的全链路监控系统，包括监控目标、数据抽取单元、日志传输单元、存储单元、监控展现单元以及任务调度服务框架；其解决的技术问题是通过系统的监控日志，分析并展现当前系统各种状态的平台环境，通过从系统的运行节点获取的日志信息，并对其进行收集清洗、汇总并转换后，将这些信息存储在分布式的搜索引擎环境中，然后通过对这些信息进行分析，最终以图表等方式展现或通知给运维以及系统开发人员。然而该专利的监控数据比较分散，不能及时的对故障进行处理。

技术实现思路

1、针对运维管理中发生的故障对应时长大于业务恢复时长、运维工时成本逐年增长、核心系统故障多发，实现快速有效追踪、定位故障并降低系统故障导致的业务影响等问题，本发明通过从业务视角出发提供了一种全链路监控系统对应用基础设施进行全面链路监控，可支持的监控类型超过数十种，支持监控指标超200个。

2、本发明提供了一种全链路监控系统，包括it架构、监控工具、数据采集服务、告警服务、全链路数据服务、全链路监控和全链路配置服务。

3、优选的，所述全链路监控系统还包括用户管理服务、接入规范和监控指标体系。

4、优选的，所述it架构包括容器化、数据库、服务器、应用服务、中间件、存储设备、安全设备、终端设备、链路和网络设备。

5、优选的，所述监控工具包括apex、efk、prometheus、ipaas、vmware、听云apm、博睿apm和博睿npm。

6、优选的，所述数据采集服务包括接口适配、数据转换、数据清洗、调度管理、任务控制、链路追踪、日志数据采集、指标数据采集和告警数据采集；所述接口适配和数据清洗用于监控数据接口适配与清洗；所述数据采集服务可将全部监控运维工具产生的数据进行统一的处理和存储，打通信息孤岛，并可以确保每个业务系统的每个监控指标都有唯一且定义明确的数据来源；实现准确、低延迟、低入侵、低资源消耗的监控数据采集和处理。

7、优选的，所述告警服务包括告警源管理、告警压缩、告警合并、级别映射、告警处置、告警通知、告警升级和告警屏蔽；用于对告警信息进行有效的关联、收敛和压缩，精确指标/日志定位告警；所述告警服务可准确定义告警和事件级别，以及对应的处理和通知流程，有效抑制“告警风暴”。

8、优选的，所述全链路数据服务包括数据建模、指标汇聚、数据接入、数据存储、数据处理和流式计算；用于用户数据接入、处理和存储。

9、优选的，所述全链路配置服务包括配置项管理、拓扑管理、关联关系管理、模型管理和资源分区；所述配置项管理用于进行it资产配置管理；所述拓扑管理用于构造并管理整个网络的拓扑结构，以反映设备的组网情况和运行状态。通过拓扑视图中网元或子网图标所显示的颜色及状态，可以实时监控整个网络的运行情况。

10、优选的，所述全链路监控包括业务概述、全链路视图、业务分析、告警定位、告警分析、性能分析、日志分析和影响分析；所述全链路监控通过建立全链路拓扑大屏，用于用户进行整个链路视图监控。

11、优选的，所述用户管理服务包括组织机构管理、用户管理、角色权限管理和用户组管理。

12、优选的，所述接入规范包括告警接入规范、指标接入规范和日志接入规范；用于规范化接口接入标准，统一接口数据格式，规范化技术栈，降低全链路监控系统本身的构建和运维成本；针对全链路监控数据实施有效的数据治理，为后续的运维能力建设与拓展提供有效的数据支撑体系。

13、优选的，所述监控指标体系包括运维对象、监控指标和指标阈值；通过建立一套面向业务服务、层次化、可量化的监控指标体系用于规范接入的监控工具基于统一指标体系进行监控，规范企业监控指标的选取和使用。

14、有益效果：

15、(1)统一规范：收敛技术栈，降低全链路监控系统本身的构建和运维成本；针对全链路监控数据实施有效的数据治理，为后续的运维能力建设与拓展提供有效的数据支撑体系。

16、(2)统一数据：支持集成和打通监控运维工具间的数据孤岛，将全部监控运维工具产生的数据进行统一的处理和存储，确保每个业务系统的每个监控指标都有唯一且定义明确的数据来源。

17、(3)统一标准：指定面向整个组织的运维数据处理和运维事件处理技术规范，包括运维监控数据处理规范、运维事件和告警处理流程规范、监控指标定义。

18、(4)统一服务：用户可通过统一的服务接口消费运维监控相关的数据和功能，包括：数据呈现服务、数据分析服务、监控指标异常检测服务、监控告警通知订阅服务等。

19、(5)实现全链路可视化，通过建立全链路监控拓扑可视化大屏，统一关联业务系统的应用/基础/网络视图情况，联动it服务管理系统，实现it事件与运维实况共享、数据分析，提升运维效率；建立以网络为核心的拓扑视图、统一关联设备本身的运行、设备之间、设备与系统间的关系视图情况，提升运维效率。

技术特征：

1.一种全链路监控系统，其特征在于，包括it架构、监控工具、数据采集服务、告警服务、全链路数据服务、全链路监控和全链路配置服务。

2.根据权利要求1所述的一种全链路监控系统，其特征在于，所述全链路监控系统还包括用户管理服务、接入规范和监控指标体系。

3.根据权利要求1所述的一种全链路监控系统，其特征在于，所述it架构包括容器化、数据库、服务器、应用服务、中间件、存储设备、安全设备、终端设备、链路和网络设备。

4.根据权利要求1所述的一种全链路监控系统，其特征在于，所述数据采集服务包括接口适配、数据转换、数据清洗、调度管理、任务控制、链路追踪、日志数据采集、指标数据采集和告警数据采集。

5.根据权利要求1所述的一种全链路监控系统，其特征在于，所述告警服务包括告警源管理、告警压缩、告警合并、级别映射、告警处置、告警通知、告警升级和告警屏蔽。

6.根据权利要求1所述的一种全链路监控系统，其特征在于，所述全链路数据服务包括数据建模、指标汇聚、数据接入、数据存储、数据处理和流式计算。

7.根据权利要求1所述的一种全链路监控系统，其特征在于，所述全链路监控包括业务概述、全链路视图、业务分析、告警定位、告警分析、性能分析、日志分析和影响分析。

8.根据权利要求1所述的一种全链路监控系统，其特征在于，所述全链路配置服务包括配置项管理、拓扑管理、关联关系管理、模型管理和资源分区。

9.根据权利要求2所述的一种全链路监控系统，其特征在于，所述接入规范包括告警接入规范、指标接入规范和日志接入规范。

10.根据权利要求2所述的一种全链路监控系统，其特征在于，所述监控指标体系包括运维对象、监控指标和指标阈值。

技术总结
本发明涉及互联网运维技术领域，尤其涉及IPC H04L12领域，进一步的，涉及一种全链路监控系统。包括IT架构、监控工具、数据采集服务、告警服务、全链路数据服务、全链路监控和全链路配置服务；所述全链路监控系统还包括用户管理服务、接入规范和监控指标体系。本发明能够收敛技术栈，降低全链路监控系统本身的构建和运维成本；打通监控运维工具间的数据孤岛，将全部监控运维工具产生的数据进行统一的处理和存储；实现精确监控和有效告警；实现全链路可视化，实现IT事件与运维实况共享、数据分析，提升运维效率；建立以网络为核心的拓扑视图、统一关联设备本身的运行、设备之间、设备与系统间的关系视图情况，提升运维效率。

技术研发人员：孙玉新,金春雷,李宝丹
受保护的技术使用者：迈威科技（广州）有限公司
技术研发日：
技术公布日：2024/1/12