本公开涉及软件测试或金融科技领域,尤其涉及一种数据传输方法、装置、电子设备、存储介质和程序产品。
背景技术:
1、系统上线前需安排验收测试,为了让测试环境的数据更贴近生产真实情况,会先对数据进行恢复,即将脱敏后的生产数据传输至测试环境,然后在测试环境再进行导入操作。
2、在实现本公开构思的过程中,发明人发现相关技术中至少存在如下问题,在生产数据的数据量大的情况下,数据的传输需消耗大量时间,且将脱敏后的生产数据导入测试环境时报错几率较高,数据传输效率较低。
技术实现思路
1、鉴于上述问题,本公开提供了一种数据传输方法、装置、电子设备、存储介质和程序产品。
2、根据本公开的第一个方面,提供了一种数据传输方法,包括:对生产数据进行脱敏,得到脱敏数据,上述脱敏数据包括多个版本子数据;将上述脱敏数据传输至测试环境的投演测试数据库中;针对上述投演测试数据库中的每个上述版本子数据,基于上述版本子数据的数据量确定上述版本子数据对应的测试传输方式;将上述投演测试数据库中的上述版本子数据,传输至上述测试环境中上述测试传输方式对应的子测试数据库中,其中,上述子测试数据库用于对上述版本子数据进行测试。
3、根据本公开的实施例,上述针对上述投演测试数据库中的每个上述版本子数据,基于上述版本子数据的数据量确定上述版本子数据对应的测试传输方式,包括:在上述版本子数据的数据量大于预设数据量的情况下,确定上述版本子数据对应的测试传输方式为同步复制的方式;在上述版本子数据的数据量小于或等于上述预设数据量的情况下,确定上述版本子数据对应的测试传输方式为数据快照的方式。
4、根据本公开的实施例,上述方法还包括:利用异步复制的方式,将生产主数据库中的生产数据传输至异地备份数据库中;在上述生产数据完成向上述异地备份数据库传输的情况下,中断上述生产数据基于上述异步复制方式传输的传输通道。
5、根据本公开的实施例,上述方法还包括:利用数据克隆的方式,将上述异地备份数据库中的上述生产数据传输至上述脱敏环境中。
6、根据本公开的实施例,在上述将上述投演测试数据库中的上述版本子数据,传输至上述测试环境中上述测试传输方式对应的子测试数据库中之后,还包括:将上述脱敏环境的配置文件导入上述测试环境中,对上述测试环境中的上述投演测试数据库和上述子测试数据库的配置进行变更。
7、根据本公开的实施例,上述方法还包括:利用网络传输的方式,将上述生产主数据库中的生产数据传输至同城备份数据库中。
8、根据本公开的实施例,上述方法在采用预设方式进行数据传输的情况下,利用基于块级别的磁盘传输复制技术进行数据传输,其中,上述预设方式包括同步复制、异步复制、数据快照或数据克隆的方式。
9、本公开的第二方面提供了一种数据传输装置,包括:脱敏模块,用于对生产数据进行脱敏,得到脱敏数据,上述脱敏数据包括多个版本子数据;脱敏传输模块,用于将上述脱敏数据传输至测试环境的投演测试数据库中;方式确定模块,用于针对上述投演测试数据库中的每个上述版本子数据,基于上述版本子数据的数据量确定上述版本子数据对应的测试传输方式;测试传输模块,用于将上述投演测试数据库中的上述版本子数据,传输至上述测试环境中上述测试传输方式对应的子测试数据库中,其中,上述子测试数据库用于对上述版本子数据进行测试。
10、本公开的第三方面提供了一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,其中,当上述一个或多个程序被上述一个或多个处理器执行时,使得一个或多个处理器执行上述方法。
11、本公开的第四方面还提供了一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行上述方法。
12、本公开的第五方面还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述方法。
13、根据本公开提供的数据传输方法、装置、设备、介质和程序产品,通过在测试环境中设置投演测试数据库,其中,投演测试数据库中的版本子数据作为生产数据测试的原始副本,在测试过程中,将版本子数据传输至对应的子测试数据库中进行测试。通过投演测试数据库实现了一套生产数据的多次复用,且基于版本子数据的数据量确定其在测试环境中的传输方式,能够在测试环境中快速地完成数据的传输,有效提升了数据传输的效率。
1.一种数据传输方法,包括:
2.根据权利要求1所述的方法,其中,所述针对所述投演测试数据库中的每个所述版本子数据,基于所述版本子数据的数据量确定所述版本子数据对应的测试传输方式,包括:
3.根据权利要求1所述的方法,还包括:
4.根据权利要求3所述的方法,还包括:
5.根据权利要求1所述的方法,在所述将所述投演测试数据库中的所述版本子数据,传输至所述测试环境中所述测试传输方式对应的子测试数据库中之后,还包括:
6.根据权利要求3所述的方法,还包括:
7.根据权利要求2至6中任意一项所述的方法,其中,
8.一种数据传输装置,包括:
9.一种电子设备,包括:
10.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~7中任一项所述的方法。
11.一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现根据权利要求1~7中任一项所述的方法。