本发明涉及数据处理,尤其涉及一种文件写入方法、装置、电子设备以及存储介质。
背景技术:
1、在车辆检测、人脸识别等业务中,图片等小文件存储是一项重要课题。为提高文件存储的安全性,通常采用将小文件合并为大文件之后的纠删写入方案。
2、在纠删写入方案中,纠删码的数据分布在不同的存储节点上,从而可以保证一个节点或多个节点异常情况下的数据可靠性。纠删码的数据组织可以表示为n+m,n为数据分片的个数,m为校验数据的分片个数,校验数据的分片个数意味着可以容忍的最大存储节点宕机个数。比如纠删码的数据组织为4+1时,即4个数据分片和1个校验数据,可以容忍1台存储设备宕机后依然正常读取所有数据。但是现有的文件纠删写入方式中,条带深度是固定的,这就造成了可能出现一个小文件存储在多个节点的多个条带的情况,导致读取完整的文件需要多次io,影响文件读取性能。
技术实现思路
1、本发明提供了一种文件写入方法、装置、电子设备以及存储介质,以实现提高文件读取效率,提高文件存储的安全性。
2、第一方面,本发明实施例提供了一种文件写入方法,该方法包括:
3、获取当前待写入文件;
4、若确定当前条带不满足当前待写入文件写入条件,则根据当前待写入文件的文件大小以及条带深度阈值,对当前条带的条带深度进行调整;
5、根据条带深度调整后的当前条带,对当前待写入文件进行写入。
6、第二方面,本发明实施例还提供了一种文件写入装置,该装置包括:
7、当前待写入文件获取模块,用于获取当前待写入文件;
8、条带深度调整模块,用于若确定当前条带不满足当前待写入文件写入条件,则根据当前待写入文件的文件大小以及条带深度阈值,对当前条带的条带深度进行调整;
9、当前待写入文件写入模块,用于根据条带深度调整后的当前条带,对当前待写入文件进行写入。
10、第三方面,本发明实施例还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如本发明实施例中任一所述的文件写入方法。
11、第四方面,本发明实施例还提供了一种存储计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例中任一所述的文件写入方法。
12、本发明实施例的技术方案,通过在当前条带无法实现当前待写入文件的写入时,根据当前待写入文件的文件大小以及条带深度阈值,对当前条带的条带深度进行调整,并根据调整后的当前条带,进行当前待写入文件的写入。根据当前待写入文件的文件大小以及条带深度阈值,对当前条带的条带深度进行灵活调整,解决了现有技术中条带深度固定所造成的一个文件存储在多个节点的多个条带,导致读取完整的文件需要多次io,影响文件读取性能的问题,提高了文件读取效率,以及文件存储的安全性。
13、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
1.一种文件写入方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,当前条带不满足当前待写入文件写入条件,包括:
3.根据权利要求1所述的方法,其特征在于,根据当前待写入文件的文件大小以及条带深度阈值,对当前条带的条带深度进行调整,包括:
4.根据权利要求1所述的方法,其特征在于,在确定当前条带不满足当前待写入文件写入条件之后,还包括:
5.根据权利要求4所述的方法,其特征在于,根据当前条带的碎片率,完成当前条带的纠删写入,包括:
6.根据权利要求5所述的方法,其特征在于,所述根据当前条带的碎片率确定满足当前条带纠删写入条件,包括:
7.根据权利要求1或4所述的方法,其特征在于,所述方法,还包括:
8.一种文件写入装置,其特征在于,包括:
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-7中任一所述的文件写入方法。
10.一种存储计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的文件写入方法。