本发明涉及数据处理领域,尤其涉及一种性能瓶颈的定位方法、装置、设备及存储介质。
背景技术:
1、app、应用程序,通常由一系列功能模块组成,每个功能模块,由一系列web页面、api接口对外提供服务。
2、由于高可用性的要求,上述功能模块,通常都采用分布式集群方式,部署在多台虚拟机或者容器中,带来的运维问题是,用户访问服务不可用、不好用等,造成上述运维问题的性能瓶颈可能是某个用户自身的客户端问题,也可能是某个功能模块问题,也可能是整个app、应用程序问题,也可能是运行环境如虚拟机、容器问题。
3、目前,现有技术在针对上述运维问题的性能瓶颈进行定位时,针对用户使用的每一个功能模块做一对一的监控,收集所有用户的操作信息后,根据用户对每个功能的使用情况来分析最慢的操作,最后根据指标一个一个分析排查,定位性能瓶颈,这种方法不仅定位性能瓶颈的定位速度慢,定位准确度低,且对用户的功能模块进行一对一监控的方式也增加了系统资源的消耗,使得用户设备不能发挥最大性能,从而造成性能与资源浪费等情况。
技术实现思路
1、本发明提供了一种性能瓶颈的定位方法、装置、设备及存储介质,可以解决现有技术在定位性能瓶颈时性能瓶颈定位工作的资源消耗高,性能瓶颈定位的效率与准确率均较低的问题。
2、第一方面,本发明实施例提供了一种性能瓶颈的定位方法,该方法包括:
3、实时采集各运行日志,并对各运行日志进行结构化解析,得到目标时间段内的运行日志集的服务模块信息;其中,所述服务模块信息中包括目标时间段内的模块调用关系、各模块调用关系的调用次数以及模块结构信息;
4、通过解析各运行日志得到与各运行日志匹配的运行时间,并按照运行时间的长短对各运行日志进行排序;
5、在历史运行时间集中查找与所述目标时间段匹配的目标数量的各历史时间段信息,并基于各历史时间段信息与排序后的各运行日志的运行时间判断在所述目标时间段内是否存在性能瓶颈;
6、当判断存在性能瓶颈时,根据所述服务模块信息定位所述性能瓶颈的位置。
7、第二方面,本发明实施例提供了一种性能瓶颈的定位装置,该装置包括:
8、运行日志收集模块,用于实时采集各运行日志,并对各运行日志进行结构化解析,得到目标时间段内的运行日志集的服务模块信息;其中,所述服务模块信息中包括目标时间段内的模块调用关系、各模块调用关系的调用次数以及模块结构信息;
9、运行日志排序模块,用于通过解析各运行日志得到与各运行日志匹配的运行时间,并按照运行时间的长短对各运行日志进行排序;
10、性能瓶颈判断模块,用于在历史运行时间集中查找与所述目标时间段匹配的目标数量的各历史时间段信息,并基于各历史时间段信息与排序后的各运行日志的运行时间判断在所述目标时间段内是否存在性能瓶颈;
11、性能瓶颈定位模块,用于当判断存在性能瓶颈时,根据所述服务模块信息定位所述性能瓶颈的位置。
12、第三方面,本发明实施例提供了一种电子设备,所述电子设备包括:
13、至少一个处理器;以及
14、与所述至少一个处理器通信连接的存储器;其中,
15、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的一种性能瓶颈的定位方法。
16、第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的一种性能瓶颈的定位方法。
17、本发明实施例的技术方案,通过首先实时采集各运行日志,并对各运行日志进行结构化解析,得到目标时间段内的运行日志集的服务模块信息,之后通过解析各运行日志得到与各运行日志匹配的运行时间,并按照运行时间的长短对各运行日志进行排序,之后在历史运行时间集中查找与所述目标时间段匹配的目标数量的各历史时间段信息,并基于各历史时间段信息与排序后的各运行日志的运行时间判断在所述目标时间段内是否存在性能瓶颈,最后当判断存在性能瓶颈时,根据所述服务模块信息定位所述性能瓶颈的位置,解决了现有技术在定位性能瓶颈时性能瓶颈定位工作的资源消耗高,性能瓶颈定位的效率与准确率均较低的问题,能够基于运行日志定位性能瓶颈的位置,降低了性能瓶颈定位工作的资源消耗,提高了性能瓶颈定位的效率与准确率。
18、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
1.一种性能瓶颈的定位方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,基于各历史时间段信息与排序后的各运行日志的运行时间判断在所述目标时间段内是否存在性能瓶颈,包括:
3.根据权利要求1所述的方法,其特征在于,当判断存在性能瓶颈时,根据所述服务模块信息定位所述性能瓶颈的位置,包括:
4.根据权利要求3所述的方法,其特征在于,识别调用次数最多的模块调用关系作为性能瓶颈的定位结果进行输出之后,还包括:
5.根据权利要求1所述的方法,其特征在于,对各运行日志进行结构化解析,得到目标时间段内的运行日志集的服务模块信息,包括:
6.根据权利要求5所述的方法,其特征在于,基于各标准分词在各运行日志中的位置顺序,将各标准分词进行分层并基于分层结果得到与所述运行日志匹配的模块调用关系之后,还包括:
7.根据权利要求5所述的方法,其特征在于,基于各标准分词在各运行日志中的位置顺序,将各标准分词进行分层并基于分层结果得到与所述运行日志匹配的模块调用关系之后,还包括:
8.一种性能瓶颈的定位装置,其特征在于,包括:
9.一种电子设备,其特征在于,所述电子设备包括:
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的一种性能瓶颈的定位方法。