数据库日志文件的处理方法、装置及计算机设备与流程

文档序号:20486906发布日期:2020-04-21 21:44阅读:178来源:国知局
数据库日志文件的处理方法、装置及计算机设备与流程

本发明涉及清算技术领域,尤其涉及一种数据库日志文件的处理方法、装置及计算机设备。



背景技术:

在清算平台运行过程中,数据库的日志文件会不断地增加,而随着日志文件的不断增加,计算机磁盘空间日益地减少,查看大量的日志文件会影响清算平台运行的业务,增加清算平台交易的等待时长。

相关技术中,通常是由用户采用手动的方式对日志进行相应的管理,例如,对数据库中的错误日志、慢日志和通用日志等进行手动的切割和归档。

这种方式下,不能够实现自动化地对日志文件进行切割归档处理,影响数据库的运行性能,降低了数据库数据的读写效率,数据库的运行稳定性不佳。



技术实现要素:

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此,本发明的一个目的在于提出一种数据库日志文件的处理方法,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

本发明的另一个目的在于提出一种数据库日志文件的处理装置。

本发明的另一个目的在于提出一种非临时性计算机可读存储介质。

本发明的另一个目的在于提出一种计算机程序产品。

本发明的另一个目的在于提出一种计算机设备。

为达到上述目的,本发明第一方面实施例提出的数据库日志文件的处理方法,应用于清算平台中,所述清算平台具有对应的数据库,包括:在所述数据库处于在线状态下,检测所述数据库是否输出日志文件;若确定输出所述日志文件,则获取所述数据库对应存储空间的使用情况;根据所述使用情况,对所输出的日志文件进行自动化切割归档处理。

本发明第一方面实施例提出的数据库日志文件的处理方法,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为达到上述目的,本发明第二方面实施例提出的数据库日志文件的处理装置,应用于清算平台中,所述清算平台具有对应的数据库,包括:检测模块,用于在所述数据库处于在线状态下,检测所述数据库是否输出日志文件;获取模块,用于若确定输出所述日志文件,则获取所述数据库对应存储空间的使用情况;处理模块,用于根据所述使用情况,对所输出的日志文件进行自动化切割归档处理。

本发明第二方面实施例提出的数据库日志文件的处理装置,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为达到上述目的,本发明第三方面实施例提出的非临时性计算机可读存储介质,当所述存储介质中的指令由处理器被执行时,使得终端能够执行一种数据库日志文件的处理方法,应用于清算平台中,所述清算平台具有对应的数据库,所述方法包括:本发明第一方面实施例提出的数据库日志文件的处理方法。

本发明第三方面实施例提出的非临时性计算机可读存储介质,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为达到上述目的,本发明第四方面实施例提出的计算机程序产品,当所述计算机程序产品中的指令由处理器执行时,执行一种数据库日志文件的处理方法,应用于清算平台中,所述清算平台具有对应的数据库,所述方法包括:本发明第一方面实施例提出的数据库日志文件的处理方法。

本发明第四方面实施例提出的计算机程序产品,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为达到上述目的,本发明第五方面实施例还提出一种计算机设备,该计算机设备包括壳体、处理器、存储器、电路板和电源电路,其中,所述电路板安置在所述壳体围成的空间内部,所述处理器和所述存储器设置在所述电路板上;所述电源电路,用于为所述计算机设备的各个电路或器件供电;所述存储器用于存储可执行程序代码;所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序,以用于执行:本发明第一方面实施例提出的数据库日志文件的处理方法。

本发明第五方面实施例还提出一种计算机设备,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:

图1是本发明一实施例提出的数据库日志文件的处理方法的流程示意图;

图2是本发明另一实施例提出的数据库日志文件的处理方法的流程示意图;

图3为本发明数据库日志文件的处理流程图;

图4是本发明一实施例提出的数据库日志文件的处理装置的结构示意图;

图5是本发明另一实施例提出的数据库日志文件的处理装置的结构示意图;

图6是本发明一个实施例提出的计算机设备的结构示意图。

具体实施方式

下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。

图1是本发明一实施例提出的数据库日志文件的处理方法的流程示意图。

本实施例以数据库日志文件的处理方法被配置为数据库日志文件的处理装置中来举例说明。

本实施例中数据库日志文件的处理方法可以被配置在数据库日志文件的处理装置中,数据库日志文件的处理装置可以设置在服务器中,或者也可以设置在计算机设备中,本发明实施例对此不作限制。

本实施例以数据库日志文件的处理方法被配置在服务器中为例。

本发明实施例应用于清算平台中,清算平台具有对应的数据库。

需要说明的是,本发明实施例的执行主体,在硬件上可以例如为服务器或者计算机设备中的中央处理器(centralprocessingunit,cpu),在软件上可以例如为服务器或者计算机设备中的相关的后台服务,对此不作限制。

参见图1,该方法包括:

s101:在数据库处于在线状态下,检测数据库是否输出日志文件。

其中,日志文件可以例如包括错误日志、慢日志、通用日志等,通常当数据库启动运行或者停止运行时产生错误日志,在客户端连接数据库执行语句时产生通用日志,在数据库查询超过指定时间产生慢日志。

在具体执行过程中,数据库处于在线运行状态,即数据库存在大量的数据读写操作时,可以启动预配置的检测程序,从而采用该预配置的检测程序从服务器中检测数据库是否输出日志文件,即,判断数据库是否输出有错误日志、慢日志、通用日志等,对此不作限制。

s102:若确定输出日志文件,则获取数据库对应存储空间的使用情况。

其中,存储空间的使用情况可以例如为存储空间的占用率,或者,当前运行的线程数量等,对此不作限制。

在具体执行过程中,检测程序查找到数据库输出的错误日志、慢日志、通用日志时,可以启动预配置的存储空间检测程序,从而采用该预配置的存储空间检测程序检测得到数据库存储磁盘中的存储空间,判断磁盘空间的占有率,从而将该占有率作为存储空间的使用情况。

s103:根据使用情况,对所输出的日志文件进行自动化切割归档处理。

在具体执行过程中,可以预先对磁盘空间占有率设置阈值,在磁盘空间占有率低于设置的阈值时,对数据库中的错误日志、慢日志、通用日志等进行切割归档,在磁盘空间占有率高于设置的阈值时,输出判断信息,提醒用户。

其中,对日志文件的切割归档可以以时间作为切割依据,将一定时间之间的数据进行切割归档,也可以以相同业务为切割依据,将同种业务的数据切割归档在一起进行处理,对此不作限制。

本实施例中,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

图2是本发明另一实施例提出的数据库日志文件的处理方法的流程示意图。

参见图2,该方法包括:

s201:在设定时间点上对数据库进行检测,并在检测时,检测数据库在设定时间点之前的预设时间内是否输出日志文件。

在具体执行过程中,可以预先在数据库中配置相应的定时程序,通过执行该定时程序以在设定时间点,启动上述预配置的检测程序,从而执行在设定时间点上对数据库进行检测,并在检测时,检测数据库在设定时间点之前的预设时间内是否输出日志文件的步骤,即,检测数据库在设定时间点之前的预设时间内是否输出错误日志、慢日志、通用日志等。

其中的预设时间可以是预先设定的,也可以是由数据库日志文件的处理装置的出厂程序预先设定的,对此不作限制。

s202:若确定输出日志文件,则获取数据库对应存储空间的使用情况。

其中,存储空间的使用情况可以例如为存储空间的占用率,或者,当前运行的线程数量等,对此不作限制。

在具体执行过程中,检测程序查找到数据库输出的错误日志、慢日志、通用日志时,可以启动预配置的存储空间检测程序,从而采用该预配置的存储空间检测程序检测得到数据库存储磁盘中的存储空间,判断磁盘空间的占有率,从而将该占有率作为存储空间的使用情况。

s203:判断使用情况是否大于设定阈值。

其中设定阈值可以是预先设定的,也可以是由数据库日志文件的处理装置的出厂程序预先设定的,对此不作限制。

其中,以存储空间的使用情况为存储空间的占用率进行示例,设定阈值可以为存储空间的占用率的阈值,该阈值可以例如为90%。

s204:若使用情况大于或者等于设定阈值,则对所输出的日志文件进行自动化切割归档处理。

其中,在判断使用情况是否大于设定阈值的同时,可以对数据库的会话级别的日志进行关闭处理,避免会话级别的日志对日志分割归档造成影响,导致分割归档的日志出现查错,能够有效保障分割归档的适用性,避免对数据库的正常运行造成影响。

s205:若使用情况小于设定阈值,则不对所输出的日志文件进行自动化切割归档处理。

在具体执行过程中,可以通过执行上述预配置的磁盘空间检测程序读取当前的磁盘空间使用情况,将使用的磁盘空间与磁盘总空间进行对比,计算得出磁盘空间占有率,并将计算得出的磁盘空间占有率与设置的阈值进行对比,从而根据比对的结果触发或者不触发对日志文件进行自动化切割归档处理。

作为一种示例,在当前磁盘空间占有率大于或者等于设置的阈值,启动切割归档程序,对日志文件进行切割归档处理;在当前磁盘空间占有率小于设置的阈值,判断不执行切割归档程序,并生成提示信息,提醒用户。

s206:根据使用情况,生成目标日志名称,并对所输出的日志文件进行自动化切割归档处理。

其中,目标日志名称可以用于描述切割归档后的日志的名称,对切割归档后的日志的命名可以依据时间信息、业务信息等,对此不作限制。

在具体执行过程中,切割归档程序正常启动后,对需要切割归档的日志进行切割,并对需要归档的日志生成相应的日志目录,在日志目录下生成一个或者多个归档的日志文件,并且,还可以针对切割归档后的日志文件自动化地生成相应的日志名称。

s207:采用目标日志名称,对所切割归档处理后的日志进行命名。

作为一种示例,参见图3,图3为本发明数据库日志文件的处理流程图,调度系统配置定时任务,配置完成后,检测程序定时开启,判断日志文件是否输出,在未输出日志文件时,判断自动切割归档日志文件的条件不满足,显示切割归档程序未执行,生成失败标志文件,提醒用户未切割归档日志文件,并显示失败原因,从而提醒用户可以采用手动的方式对日志文件进行调整。

作为另一种示例,在判断日志文件输出后,对数据库中磁盘剩余空间进行判断,通过磁盘空间检测程序,在磁盘使用率大于等于90%时,判断自动切割归档日志文件的条件不满足,其中,磁盘使用率为磁盘剩余空间与磁盘总空间的比值,在显示切割归档程序未执行,生成失败标志文件,提醒用户未切割归档日志文件,并显示失败原因,从而提醒用户可以采用手动的方式对磁盘空间进行清理,并刷新检测程序,从而重新确定是否输出相应的日志文件。

作为另一种示例,在磁盘使用率小于90%时,判断自动切割归档日志文件的条件满足,自动切割归档日志文件程序启动,建立归档目录,并生成相应目录名称,对应的日志文件移动至相应的目录名称下,采用mvslow.lognew_slow.log和mverror.lognew_error.log语句将日志文件移动到归档目录中,并通过enerallog归档方式进行归档,即,程序设置为setgloralgeneral_log=‘off’;mvgeneral_lognew_log;setgloralgeneral_log=‘on’;在执行mysqlflush刷新日志,并对日志切割归档进行判断,若程序执行失败,显示切割归档程序执行失败,生成失败标志文件,提醒用户未切割归档日志文件,并显示失败原因,从而提醒用户可以采用手动的方式对日志文件进行调整,而若判断程序执行成功,输出成功标志,程序结束,并等待定时程序启动。

本实施例中,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。通过在设定时间点上对数据库进行检测,并在检测时,检测数据库在设定时间点之前的预设时间内是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,判断使用情况是否大于设定阈值,若使用情况大于或者等于设定阈值,则对所输出的日志文件进行自动化切割归档处理,若使用情况小于设定阈值,则不对所输出的日志文件进行自动化切割归档处理,根据使用情况,生成目标日志名称,并对所输出的日志文件进行自动化切割归档处理,以及采用目标日志名称,对所切割归档处理后的日志进行命名,由此可见,针对不同的情况采用不同的解决方案,能够有效提升自动化切割归档的适用性和实用性,并且,能够快捷生成日志名称,提高日志文件自动化分割归档效率。

图4是本发明一实施例提出的数据库日志文件的处理装置的结构示意图。

应用于清算平台中,清算平台具有对应的数据库。

参见图4,装置400包括:

检测模块401,用于在数据库处于在线状态下,检测数据库是否输出日志文件;

获取模块402,用于若确定输出日志文件,则获取数据库对应存储空间的使用情况;

处理模块403,用于根据使用情况,对所输出的日志文件进行自动化切割归档处理。

可选地,一些实施例中,检测模块401,具体用于:

在设定时间点上对数据库进行检测,并在检测时,检测数据库在设定时间点之前的预设时间内是否输出日志文件。

可选地,一些实施例中,参见图5,处理模块403,包括:

生成子模块4031,用于根据使用情况,生成目标日志名称,并对所输出的日志文件进行自动化切割归档处理;

命名子模块4032。用于采用目标日志名称,对所切割归档处理后的日志进行命名。

可选地,一些实施例中,参见图5,装置400,还包括:

判断模块404。用于判断使用情况是否大于设定阈值;

若使用情况大于或者等于设定阈值,则对所输出的日志文件进行自动化切割归档处理;

若使用情况小于设定阈值,则不对所输出的日志文件进行自动化切割归档处理。

可选地,一些实施例中,参见图5,装置400,还包括:

关闭模块405,用于对数据库的session级别的日志进行关闭处理。

需要说明的是,前述图1-图2实施例中对数据库日志文件的处理方法实施例的解释说明也适用于该实施例的数据库日志文件的处理装置400,其实现原理类似,此处不再赘述。

本实施例中,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

图6是本发明一个实施例提出的计算机设备的结构示意图。

参见图6,本实施例的计算机设备60包括:壳体601、处理器602、存储器603、电路板604、电源电路605,电路板604安置在壳体601围成的空间内部,处理器602、存储器603设置在电路板604上;电源电路605,用于为计算机设备60各个电路或器件供电;存储器603用于存储可执行程序代码;其中,处理器602通过读取存储器603中存储的可执行程序代码来运行与可执行程序代码对应的程序,以用于执行:

在数据库处于在线状态下,检测数据库是否输出日志文件;

若确定输出日志文件,则获取数据库对应存储空间的使用情况;

根据使用情况,对所输出的日志文件进行自动化切割归档处理。

需要说明的是,前述图1-图2实施例中对数据库日志文件的处理方法实施例的解释说明也适用于该实施例的计算机设备60,其实现原理类似,此处不再赘述。

本实施例中,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为了实现上述实施例,本发明还提出一种非临时性计算机可读存储介质,当存储介质中的指令由终端的处理器执行时,使得终端能够执行一种数据库日志文件的处理方法,应用于清算平台中,清算平台具有对应的数据库,方法包括:

在数据库处于在线状态下,检测数据库是否输出日志文件;

若确定输出日志文件,则获取数据库对应存储空间的使用情况;

根据使用情况,对所输出的日志文件进行自动化切割归档处理。

本实施例中的非临时性计算机可读存储介质,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

为了实现上述实施例,本发明还提出一种计算机程序产品,当计算机程序产品中的指令被处理器执行时,执行一种数据库日志文件的处理方法,应用于清算平台中,清算平台具有对应的数据库,方法包括:

在数据库处于在线状态下,检测数据库是否输出日志文件;

若确定输出日志文件,则获取数据库对应存储空间的使用情况;

根据使用情况,对所输出的日志文件进行自动化切割归档处理。

本实施例中的计算机程序产品,通过在数据库处于在线状态下,检测数据库是否输出日志文件,并确定输出日志文件,获取数据库对应存储空间的使用情况,以及根据使用情况,对所输出的日志文件进行自动化切割归档处理,能够实现自动化地对日志文件进行切割归档处理,有效提升数据库的运行性能,保障数据库数据的读写效率,提升数据库的运行稳定性。

需要说明的是,在本发明的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。

应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(pga),现场可编程门阵列(fpga)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。

此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器,磁盘或光盘等。

在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1