延迟数据重构方法、装置、存储节点和存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116028276A(43)申请公布日2023.04.28(21)申请号202310166673.3(22)申请日2023.02.27(71)申请人深圳市泛联信息科技有限公司地址518000广东省深圳市南山区粤海街道高新区社区科技南十二路007号九洲电器大厦B座301(72)发明人经宁樊官跃齐泽青(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463专利代理师戴尧罡(51)Int.Cl.G06F11/14(2006.01)G06F11/30(2006.01)权利要求书2页说明书14页附图7页(54)发明名称延迟数据重构方法、装置、存储节点和存储介质(57)摘要本发明实施例提出延迟数据重构方法、装置、存储节点和存储介质，根据故障硬盘获取待恢复数据对象和关联硬盘。其中，生命周期到期的数据对象跳过数据重构，当生命周期内待恢复数据对象的数据可靠性低于可靠性阈值时，将其确定为重构对象，并针对全部重构对象按照优先级从高到低的顺序进行数据重构；优先级与生命周期正相关，与数据可靠性概率负相关。可见，本方案通过筛选生命周期内数据可靠性低的待恢复数据对象进行数据重构，数据重构过程中，数据可靠性低的数据对象优先重构，临近生命周期尾期的数据对象以较低优先级进行重构，从而大幅度减少重构数据量和重构次数，提升重构效率，有效降低重构对系统性能的影响。CN116028276ACN116028276A权利要求书1/2页1.一种延迟数据重构方法，其特征在于，应用于存储节点，所述方法包括：获取待恢复数据对象、关联硬盘列表、所述待恢复数据对象的生命周期和关联硬盘的可靠因子；所述待恢复数据对象为数据位于故障硬盘上的数据对象；所述关联硬盘列表用来记录全部待恢复数据对象所对应条带中未发生故障的硬盘信息；所述可靠因子用来表征所述关联硬盘的可靠性，根据关联硬盘列表中的关联硬盘的自我监测、分析及报告技术SMART信息评估所得；分别获取目标数据对象的目标关联硬盘和所述目标关联硬盘的平均无故障工作时间MTBF数据；所述目标关联硬盘为关联硬盘列表中的至少一个；所述目标数据对象为生命周期内的所述待恢复数据对象；分别根据所述生命周期、所述MTBF数据和所述目标关联硬盘的可靠因子，计算得到所述目标数据对象的数据可靠性概率；当所述数据可靠性概率低于可靠性阈值时，将所述目标数据对象确定为重构对象；针对全部所述重构对象按照优先级从高到低的顺序进行数据重构；所述优先级与所述生命周期正相关，与所述数据可靠性概率负相关。2.根据权利要求1所述的延迟数据重构方法，其特征在于，所述获取待恢复数据对象、关联硬盘列表的步骤，包括：接收数据重构指令；所述数据重构指令中包括故障硬盘信息；遍历硬盘数据分布元数据，获取与故障硬盘相关的所述待恢复数据对象和所述关联硬盘列表。3.根据权利要求1所述的延迟数据重构方法，其特征在于，所述方法还包括：当所述待恢复数据对象的生命周期到期或过期时，跳过针对所述待恢复数据对象的数据重构。4.根据权利要求1所述的延迟数据重构方法，其特征在于，所述分别根据所述生命周期、所述MTBF数据和所述目标关联硬盘的可靠因子，计算得到所述目标数据对象的数据可靠性概率的步骤，包括：根据所述生命周期和所述MTBF数据，计算得到所述目标关联硬盘的故障概率；根据所述故障概率和所述目标关联硬盘的可靠因子，得到所述数据可靠性概率。5.根据权利要求1所述的延迟数据重构方法，其特征在于，所述针对全部所述重构对象按照优先级从高到低的顺序进行数据重构的步骤，包括：根据数据可靠性概率的数值范围，划分至少一个优先级；每个所述优先级对应一个重构队列；按照优先级，将全部所述重构对象加入对应的所述重构队列；按照优先级从高到低的顺序，依次从对应的所述重构队列中取出所述重构对象，进行数据重构。6.根据权利要求5所述的延迟数据重构方法，其特征在于，所述按照优先级，将全部所述重构对象加入对应的所述重构队列的步骤之后，还包括：当所述重构对象满足移除条件时，将所述重构对象从重构队列中移除；所述移除条件表征所述重构对象被删除或迁移。7.根据权利要求1所述的延迟数据重构方法，其特征在于，所述待恢复数据对象的数据2CN116028276A权利要求书2/2页可靠性概率的公式为：其中，y为所述待恢复数据对象在生命周期内发生数据丢失的概率；x为所述待恢复数据对象的数据可靠性概率；N为所述待恢复数据对象的数据块数量；M为所述待恢复数据对象的校验块数量或数据块对应的副本数量；b为所述待恢复数据对象的生命周期；a为所述目标关联硬盘的MTBF数据；d为所述目标关联硬盘的可靠因子。8.一种延迟数据重构装置，其特征在于，应用于存储节点，所述装置包括：获取模块，用于获取待恢复数据对象、