技术特征：
1.一种数据库共享字典压缩方法，其特征在于，应用于数据库，所述数据库包括多个数据库表，所述数据库表包括多个数据页，所述数据页包括多个数据行；所述方法包括：对所述数据页执行写入操作，所述写入操作用于将写入数据写入多个所述数据行；当所述数据库表的写入数据达到预设阈值后，利用所述写入数据训练至少一个字典；所述数据页存储有第一元数据，所述数据行存储有第二元数据，所述第一元数据用于存储所述字典与至少一个所述数据页的映射关系，所述第二元数据用于存储所述数据行的属性信息；将训练完成的所述字典存储到字典文件中；基于所述映射关系，从所述字典文件中选取对应的所述字典对所述数据页中所述数据行的所述写入数据进行压缩。2.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述当所述数据库表的写入数据达到预设阈值后，利用所述写入数据训练至少一个字典，还包括：获取所述数据库表中未压缩的所述数据页的未压缩数量；当所述未压缩数量达到预设数量阈值后，将未压缩的所述数据页的写入数据作为字典训练数据；将所述字典训练数据输入字典生成模型，生成多个所述字典，所述字典的数量为预设数量。3.根据权利要求2所述的数据库共享字典压缩方法，所述将所述字典训练数据输入字典生成模型，生成多个所述字典，还包括：根据所述字典训练数据和预设压缩率生成所述预设数量和字典大小；将所述字典训练数据输入字典生成模型，基于所述预设数量和所述字典大小生成多个所述字典；基于所述映射关系生成所述数据页对所述字典的所述第一元数据。4.根据权利要求2所述的数据库共享字典压缩方法，所述当所述未压缩数量达到预设数量阈值后，将未压缩的所述数据页的写入数据作为字典训练数据，还包括：将未压缩的所述数据页的写入数据作为初始字典训练数据；按照预设选取策略从所述初始字典训练数据中选取得到所述字典训练数据。5.根据权利要求4所述的数据库共享字典压缩方法，所述按照预设选取策略从所述初始字典训练数据中选取得到所述字典训练数据，还包括：获取训练数据阈值；根据所述训练数据阈值在所述初始字典训练数据中随机选取或者预设位置选取对应数量大小的数据作为所述字典训练数据。6.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述基于所述映射关系从所述字典文件中选取对应的所述字典对所述数据页中所述数据行的所述写入数据进行压缩之后，还包括：若所述数据页的压缩比未达到预设压缩阈值，则将所述数据页的所述写入数据作为备选数据；获取新增写入数据；利用所述新增写入数据和所述备选数据训练所述字典，以更新所述数据页的字典；
利用更新后的所述字典对所述数据页进行压缩。7.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述第一元数据存储在所述数据页的第一预设位置，所述第一元数据包括：字典文件名、文件偏移量、字典长度中的一种或多种。8.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述第二元数据存储在所述数据行的第二预设位置，所述第二元数据包括：行数据长度和/或行事务信息。9.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述字典与至少一个所述数据页的映射关系根据预设映射规则生成，所述预设映射规则包括连续映射规则、非连续映射规则或内容相关映射规则；当所述预设映射规则为连续映射规则时，选取连续的第一数量的数据页与同一所述字典关联；当所述预设映射规则为非连续映射规则时，选取非连续的第二数量的数据页与同一所述字典关联；当所述预设映射规则为内容相关映射规则时，选取写入数据存在相关性的第三数量的数据页与同一所述字典关联。10.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，对所述数据库表中所述数据页的所述写入数据进行压缩时，对所述数据页的所述第一元数据和每个所述数据页中所述数据行的所述第二元数据不进行压缩。11.根据权利要求1所述的数据库共享字典压缩方法，其特征在于，所述基于所述映射关系从所述字典文件中选取对应的所述字典对所述数据页中所述数据行的所述写入数据进行压缩之后，还包括：对压缩后的所述数据行进行解压，得到对应的所述写入数据；所述解压的过程包括：读取所述数据页的所述第一元数据，得到所述映射关系；利用所述映射关系在所述字典文件查找对应的所述字典；利用所述字典对所述数据行的所述写入数据进行解压。12.一种数据库共享字典压缩装置，其特征在于，包括：写入模块，用于对数据页执行写入操作，所述写入操作用于将写入数据写入多个数据行；训练模块，用于当数据库表的所述写入数据达到预设阈值后，利用所述写入数据训练至少一个字典；存储模块，用于将训练完成的所述字典存储到字典文件中；压缩模块，用于基于映射关系从所述字典文件中选取对应的所述字典对所述数据页中所述数据行的所述写入数据进行压缩。13.一种电子设备，其特征在于，包括存储器、处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至11中任意一项所述的数据库关系字典压缩方法。14.一种计算机可读存储介质，其特征在于，所述存储介质存储有程序，所述程序被处理器执行实现如权利要求1至11中任意一项所述的数据库共享字典压缩方法。
技术总结
本申请实施例公开了一种数据库共享字典压缩方法、装置、电子设备及存储介质，涉及数据压缩技术领域，通过对数据页执行写入操作，将写入数据写入到数据行中，当写入数据达到预设阈值后利用其训练字典，然后在数据页中存储第一元数据，记录数据页和字典的映射关系，再将训练完成的字典存储到单独的字典文件中，最后根据映射关系从字典文件选取对应的字典对数据页的数据行的写入数据进行压缩，压缩过程中对第一元数据保持未压缩状态，从而有效减小了解压次数，采用少量写入数据训练字典，提升字典训练效率，并且以独立的文件存储字典，缓存到内存中便于查询及管理，有效提升了数据库性能。能。能。
技术研发人员：林科旭 张程伟 张皖川
受保护的技术使用者：本原数据（北京）信息技术有限公司
技术研发日：2023.01.30
技术公布日：2023/3/10