数据清理方法、数据清理装置、存储介质及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113656385A(43)申请公布日2021.11.16(21)申请号202010396586.3G06Q30/06(2012.01)(22)申请日2020.05.12(71)申请人北京沃东天骏信息技术有限公司地址100176北京市北京经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人邱俊傑尹伟郭利伟邢大飞李怡姗(74)专利代理机构北京律智知识产权代理有限公司11438代理人孙宝海赵新龙(51)Int.Cl.G06F16/215(2019.01)G06Q10/10(2012.01)G06Q30/00(2012.01)权利要求书2页说明书8页附图3页(54)发明名称数据清理方法、数据清理装置、存储介质及电子设备(57)摘要本发明公开一种数据清理方法、数据清理装置、存储介质及电子设备。该数据清理方法包括：定期从每个项目的原始数据中识别出该项目的待清理数据；接收清理指令；在当前时间到达清理开启时间时，统计出所有项目的原始数据量以及清理范围内的项目的待清理数据量；在清理开启时间到清理结束时间的时期内，每间隔一个核减周期对清理范围内的项目的原始数据量进行核减，每次核减后将所有项目的原始数据量进行重新排行。该数据清理方法中基于待清理数据量对原始数据量进行核减来使得排行榜更加精准，不需要从底层数据库中删除待清理数据，保证了数据整体的稳定性。CN113656385ACN113656385A权利要求书1/2页1.一种统计排行榜的数据清理方法，其特征在于，包括：定期从每个项目的原始数据中识别出该项目的待清理数据；接收清理指令，所述清理指令包括清理开启时间、清理结束时间和清理范围；在当前时间到达清理开启时间时，统计出所有项目的原始数据量以及清理范围内的项目的待清理数据量；在清理开启时间到清理结束时间的时期内，每间隔一个核减周期对清理范围内的项目的原始数据量进行核减，每次核减后将所有项目的原始数据量进行重新排行，其中，一个项目在所述时期内被减掉的原始数据量等于该项目的待清理数据量。2.如权利要求1所述的数据清理方法，其特征在于，在清理开启时间到清理结束时间的时期内，每间隔一个核减周期对清理范围内的项目的原始数据量进行核减，每次核减后将所有项目的原始数据量进行重新排行，其中，一个项目在所述时期内被减掉的原始数据量等于该项目的待清理数据量，包括以下步骤：根据清理开启时间、清理结束时间以及核减周期计算出每次核减的时间点；根据每个时间点的时刻、清理开启时间以及待清理数据量计算出清理范围的每个项目的原始数据量在每个时间点的核减量；当前时间到达任意一时间点时，从清理范围内的每个项目的原始数据量中核减该项目当前所到达的时间点所对应的核减量，每次进行核减后对所有项目的原始数据量进行重新排行以更新排行榜。3.如权利要求2所述的数据清理方法，其特征在于，清理范围的同一个项目的原始数据量在每个时间点的核减量互不相同。4.如权利要2所述的数据清理方法，其特征在于，根据下列算式分别计算出每个时间点应当从每个项目的原始数据量中核减的核减量：其中，Qm为第m个时间点对应的核减量，Δt为核减周期，t0为清理开始时间，tm为第m个时间点的时刻，a为小于零的预设数值，A为总的待清理数据量。5.如权利要求4所述的数据清理方法，其特征在于，a由随机数生成器生成。6.如权利要求2所述的数据清理方法，其特征在于，当前时间到达任意一时间点时，从清理范围内的每个项目的原始数据量中核减该项目当前所到达的时间点所对应的核减量，每次进行核减后对所有项目的原始数据量进行重新排行以更新排行榜，包括以下步骤：核减步骤：当前时间到达一时间点后，从清理范围内的每个项目的原始数据量中核减掉当前所到达的时间点所对应的核减量；对所有项目的原始数据量进行排行；判断当前时间之后是否还具有未经过的时间点，若具有则进入到核减步骤。7.如权利要求1至6中任一项所述的数据清理方法，其特征在于，所述数据清理方法应用于电商场景，原始数据为销售记录，原始数据量为销售量，待清理数据为虚假销售记录，待清理数据量为虚假销售量。8.一种统计排行榜的数据清理装置，其特征在于，包括：2CN113656385A权利要求书2/2页信息处理模块；连接于所述信息处理模块的数据模块，用于定期从每个项目的原始数据中识别出该项目的待清理数据，；连接于所述信息处理模块的指令模块，用于向所述信息处理模块发送清理指令，所述清理指令包括清理开启时间、清理结束时间和清理范围；其中，所述信息处理模块用于在清理开启时间到清理结束时间的时期内，每间隔一个核减周期对清理范围内的项目的原始数据量进行核减，每次核减后将所有项目的原始数据量进行重新排行，其中，一