数据压缩管理的方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113742335A(43)申请公布日2021.12.03(21)申请号202110117777.6(22)申请日2021.01.28(71)申请人北京沃东天骏信息技术有限公司地址100176北京市北京经济技术开发区科创十一街18号院2号楼4层A402室(72)发明人刘伟科(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人张效荣韩黎捷(51)Int.Cl.G06F16/22(2019.01)G06F16/242(2019.01)G06F16/2455(2019.01)权利要求书2页说明书9页附图5页(54)发明名称数据压缩管理的方法和装置(57)摘要本发明公开了数据压缩管理的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：获取待压缩数据的合并标识；判断所述合并标识是否存在于已压缩数据列表；所述已压缩数据列表包括：合并标识和标量数组；若是，则根据所述待压缩数据的数据值和所述标量数组，确定所述待压缩数据的数据标量，将所述待压缩数据的数据标量写入所述标量数组；否则，基于所述待压缩数据生成新的压缩数据列表。该实施方式能够根据合并标识对待压缩数据进行聚合，克服常规压缩结转方式无法用于查询的技术问题，达到根据数据的合并标识进行数据查询的技术效果。CN113742335ACN113742335A权利要求书1/2页1.一种数据压缩管理的方法，其特征在于，包括：获取待压缩数据的合并标识；判断所述合并标识是否存在于已压缩数据列表；所述已压缩数据列表包括：合并标识和标量数组；若是，则根据所述待压缩数据的数据值和所述标量数组，确定所述待压缩数据的数据标量，将所述待压缩数据的数据标量写入所述标量数组；否则，基于所述待压缩数据生成新的压缩数据列表。2.如权利要求1所述的方法，其特征在于，所述已压缩数据列表还包括：时间偏移数组；所述方法还包括：若所述合并标识存在于已压缩数据列表，则根据所述待压缩数据的发生时间和所述时间偏移数组，确定所述待压缩数据的时间标量，将所述待压缩数据的时间标量写入所述时间偏移数组。3.如权利要求2所述的方法，其特征在于，所述已压缩数据列表还包括：跨度记录；所述方法还包括：若所述合并标识存在于已压缩数据列表，则根据所述待压缩数据的唯一标识和所述跨度记录，确定所述待压缩数据的跨度索引；根据所述跨度索引将所述待压缩数据的唯一标识写入所述跨度记录；根据所述跨度索引确定所述待压缩数据的数据标量在所述标量数组中的写入位置、以及所述待压缩数据的时间标量在所述时间偏移数组中的写入位置。4.如权利要求3所述的方法，其特征在于，还包括：响应于数据查询请求，获取待查询数据的合并标识；获取与待查询数据的合并标对应的已压缩数据列表；根据所述待查询数据的唯一标识和所述已压缩数据列表的跨度记录，确定所述待查询数据在所述已压缩数据列表中的跨度索引；根据所述跨度索引和所述已压缩数据列表的时间偏移数组还原所述待查询数据的发生时间，根据所述跨度索引和所述待查询数据的标量数组还原所述待查询数据的数据值，得到所述待查询数据；返回所述待查询数据。5.如权利要求1‑4任一所述的方法，其特征在于，还包括：在获取待压缩数据的合并标识之前，根据所述待压缩数据的数据量确定所述待压缩数据的提取方式。6.一种数据压缩管理的装置，其特征在于，包括：获取模块，获取待压缩数据的合并标识；判断模块，判断所述合并标识是否存在于已压缩数据列表；所述已压缩数据列表包括：合并标识和标量数组；压缩模块，当所述合并标识存在于已压缩数据列表时，根据所述待压缩数据的数据值和所述标量数组，确定所述待压缩数据的数据标量，将所述待压缩数据的数据标量写入所述标量数组；当所述合并标识不存在于已压缩数据列表时，基于所述待压缩数据生成新的压缩数据列表。7.如权利要求6所述的装置，其特征在于，所述已压缩数据列表还包括：时间偏移数组；2CN113742335A权利要求书2/2页所述压缩模块还用于：若所述合并标识存在于已压缩数据列表，则根据所述待压缩数据的发生时间和所述时间偏移数组，确定所述待压缩数据的时间标量，将所述待压缩数据的时间标量写入所述时间偏移数组。8.如权利要求7所述的装置，其特征在于，所述已压缩数据列表还包括：跨度记录；所述压缩模块还用于：若所述合并标识存在于已压缩数据列表，则根据所述待压缩数据的唯一标识和所述跨度记录，确定所述待压缩数据的跨度索引；根据所述跨度索引将所述待压缩数据的唯一标识写入所述跨度记录；根据所述跨度索引确定所述待压缩数据的数据标量在所述标量数组中的写入位置、以及所述待压缩数据的时间标量在所述时间偏移数组中的写入位置。9.一种数据压缩管理的电子设备，其特征在于，包括：一个或多个处理器；存储装置