系统间数据同步方法、装置、计算机系统、存储介质与流程

文档序号:25586669发布日期:2021-06-22 17:01阅读:来源:国知局

技术特征:

1.一种系统间数据同步方法,包括:

获取第一数据库系统的第一数据日志与第二数据库系统的第二数据日志;

读取所述第一数据日志和所述第二数据日志,将其中的数据操作语句按照时间顺序重新排列,生成融合数据日志;

将所述融合数据日志中的数据操作语句转换为所述第一数据库系统和所述第二数据库系统中的待同步数据库可识别的数据操作语句;

将转换后的所述融合数据日志发送给所述待同步数据库,使所述待同步数据库执行所述数据操作语句,实现数据同步。

2.根据权利要求1所述的方法,所述将所述融合数据日志中的数据操作语句转换为所述第一数据库系统和所述第二数据库系统中的待同步数据库可识别的数据操作语句包括:

解析所述融合数据日志中的数据操作语句,获取所述数据操作语句包括的表、操作函数及字段名称;

根据待同步数据库的类型,将所述操作函数转换为所述待同步数据库可识别的操作函数;

基于所述表、所述待同步数据库可识别的操作函数及所述字段名称,重构所述数据操作语句,得到所述待同步数据库可操作的数据操作语句。

3.根据权利要求2所述的方法,还包括:

预设包括各类数据库的函数转换关系的函数转换库,基于所述函数转换库进行所述操作函数的转换。

4.根据权利要求2所述的方法,还包括:

在重构所述数据操作语句的过程中,忽略所述待同步数据库自身的所述第一数据日志或所述第二数据日志中在预设时间段内已执行的所述数据操作语句。

5.根据权利要求1所述的方法,在所述待同步数据库执行所述数据操作语句,实现数据同步的过程中,包括:

记录各所述数据操作语句、各所述数据操作语句的执行时间、执行结果。

6.根据权利要求1所述的方法,所述第一数据库系统包括至少一个第一数据库,所述第二数据库系统包括至少一个第二数据库,所述获取第一数据库系统的第一数据日志与第二数据库系统的第二数据日志包括:

定期获取各所述第一数据库的第一数据日志和各所述第二数据库的第二数据日志;

将所有所述第一数据日志均存储于所述第一数据库系统中,将所有所述第二数据日志均存储于第二数据库系统中。

7.根据权利要求6所述的方法,所述读取所述第一数据日志和所述第二数据日志,将其中的数据操作语句按照时间顺序重新排列,生成融合数据日志包括:

读取所述第一数据库系统中全部的所述第一数据日志和所述第二数据库系统中全部的所述第二数据日志,将具有所包括的数据操作语句按照时间顺序排列,生成所述融合数据日志。

8.根据权利要求6所述的方法,还包括:

打包备份所述第一数据日志、所述第二数据日志和所述融合数据日志。

9.一种系统间数据同步装置,包括:

日志获取模块,用于获取第一数据库系统的第一数据日志与第二数据库系统的第二数据日志;

日志融合模块,用于读取所述第一数据日志和所述第二数据日志,将其中的数据操作语句按照时间顺序重新排列,生成融合数据日志;

语句转换模块,用于将所述融合数据日志中的数据操作语句转换为所述第一数据库系统和所述第二数据库系统中的待同步数据库可识别的数据操作语句;

数据同步模块,用于将转换后的所述融合数据日志发送给所述待同步数据库,使所述待同步数据库执行所述数据操作语句,实现数据同步。

10.根据权利要求9所述的装置,所述语句转换模块包括:

语句解析单元,用于解析所述融合数据日志中的数据操作语句,获取所述数据操作语句包括的表、操作函数及字段名称;

函数转换单元,用于根据待同步数据库的类型,将所述操作函数转换为所述待同步数据库可识别的操作函数;

语句重构单元,用于基于所述表、所述待同步数据库可识别的操作函数及所述字段名称,重构所述数据操作语句,得到所述待同步数据库可操作的数据操作语句。

11.根据权利要求9所述的装置,所述数据同步模块包括:

同步记录单元,用于记录各所述数据操作语句、各所述数据操作语句的执行时间、执行结果。

12.根据权利要求9所述的方法,还包括:

日志备份模块,用于定时打包备份所述第一数据日志、所述第二数据日志和所述融合数据日志。

13.一种计算机系统,包括:

一个或多个处理器;

存储器,用于存储一个或多个程序,

其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至8中任一项所述的方法。

14.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器实现权利要求1至8中任一项所述的方法。


技术总结
本公开提供了一种系统间数据同步方法,包括:获取第一数据库系统的第一数据日志与第二数据库系统的第二数据日志,读取第一数据日志和第二数据日志,将其中的数据操作语句按照时间顺序重新排列,生成融合数据日志,将融合数据日志中的数据操作语句转换为第一数据库系统和第二数据库系统中的待同步数据库可识别的数据操作语句,将转换后的融合数据日志发送给待同步数据库,使待同步数据库执行数据操作语句,实现数据同步。该方法可以实现系统间的异构数据同步的问题。此外,本公开还提供了与该方法对应的装置、计算机系统和计算机可读存储介质。

技术研发人员:王明飞;张曙晟;刘玉红
受保护的技术使用者:工银科技有限公司;中国工商银行股份有限公司
技术研发日:2021.04.06
技术公布日:2021.06.22
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1