预览加载中,请您耐心等待几秒...
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10

亲,该文档总共14页,到这已经超出免费预览范围,如果喜欢就直接下载吧~

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113886347A(43)申请公布日2022.01.04(21)申请号202111115133.X(22)申请日2021.09.23(71)申请人北京金山云网络技术有限公司地址100085北京市海淀区西二旗中路33号院4号楼6层006号(72)发明人张丞(74)专利代理机构北京华夏泰和知识产权代理有限公司11662代理人曾军(51)Int.Cl.G06F16/174(2019.01)G06F3/06(2006.01)权利要求书2页说明书8页附图3页(54)发明名称节点数据压缩方法、装置、存储介质和电子设备(57)摘要本发明公开了一种节点数据压缩方法、装置、存储介质和电子设备。该方法包括:获取节点上数据分片的对象列表文件和存储文件;通过一次读取从对象列表文件中读取第一目标大小的第一对象元数据;对第一对象元数据进行整合,得到有效的第二对象元数据;根据第二对象元数据从存储文件中的第一对象数据中确定出目标对象数据,其中,第一对象数据为从存储文件中读取的对象数据;保留目标对象数据与第二对象元数据。本发明解决了对节点上的节点数据进行压缩的过程中,由于频繁的读写降低数据压缩的效率的技术问题。CN113886347ACN113886347A权利要求书1/2页1.一种节点数据压缩方法,其特征在于,包括:获取节点上数据分片的对象列表文件和存储文件,其中,所述对象列表文件中记录有所述数据分片中所有对象的对象元数据,所述对象元数据包括对象的对象数据在所述存储文件中的偏移和长度,所述存储文件存储有所述所有对象的对象数据;通过一次读取从所述对象列表文件中读取第一目标大小的第一对象元数据;对所述第一对象元数据进行整合,得到有效的第二对象元数据;根据所述第二对象元数据从所述存储文件中的第一对象数据中确定出目标对象数据,其中,所述第一对象数据为从所述存储文件中读取的对象数据;保留所述目标对象数据与所述第二对象元数据。2.根据权利要求1所述的方法,其特征在于,所述保留所述目标对象数据与所述第二对象元数据包括:通过一次写入将所述第二对象元数据写入到目标对象列表文件中,且通过一次写入将所述目标对象数据写入到目标存储文件中。3.根据权利要求2所述的方法,其特征在于,在通过一次写入将所述第二对象元数据写入到目标对象列表文件中,且通过一次写入将所述目标对象数据写入到目标存储文件中之前,所述方法还包括:在所述目标对象数据包括多个的情况下,将多个所述目标对象数据按照读取的先后顺序组合为新的所述目标对象数据。4.根据权利要求2所述的方法,其特征在于,在通过一次写入将所述第二对象元数据写入到目标对象列表文件中,且通过一次写入将所述目标对象数据写入到目标存储文件中之后,所述方法还包括:使用所述目标对象列表文件替换所述对象列表文件且使用所述目标存储文件替换所述存储文件。5.根据权利要求2至4任意一项所述的方法,其特征在于,在通过一次写入将所述第二对象元数据写入到目标对象列表文件中,且通过一次写入将所述目标对象数据写入到目标存储文件中之后,所述方法还包括:将所述第一对象元数据与所述第一对象数据保存在内存中。6.根据权利要求2至4任意一项所述的方法,其特征在于,在通过一次写入将所述第二对象元数据写入到目标对象列表文件中,且通过一次写入将所述目标对象数据写入到目标存储文件中时,所述方法还包括:在接收到写入指令的情况下,将所述写入指令所指示的数据同步写入到所述目标存储文件中。7.根据权利要求1所述的方法,其特征在于,所述保留所述目标对象数据与所述第二对象元数据包括:确定所述第一对象数据中除所述目标对象数据之外的第二对象数据;将所述存储文件中的所述第二对象数据删除;通过一次写入将所述第二对象元数据写入到目标对象列表文件中。8.根据权利要求1至4、7任意一项所述的方法,其特征在于,所述根据所述第二对象元数据从所述存储文件中的第一对象数据中确定出目标对象数据包括:2CN113886347A权利要求书2/2页从所述第二对象元数据中查找所述第一对象数据的删除记录;将未查找到所述删除记录的第一对象数据确定为所述目标对象数据。9.一种节点数据压缩装置,其特征在于,包括:获取单元,用于获取节点上数据分片的对象列表文件和存储文件,其中,所述对象列表文件中记录有所述数据分片中所有对象的对象元数据,所述对象元数据包括对象的对象数据在所述存储文件中的偏移和长度,所述存储文件存储有所述所有对象的对象数据;读取单元,用于通过一次读取从所述对象列表文件中读取第一目标大小的第一对象元数据;整合单元,用于对所述第一对象元数据进行整合,得到有效的第二对象元数据;确定单元,用于根据所述第二对象元数据从所述存储文件中的第一对象数据中确定出目标对象数据,