用于分布式存储的数据存储方法及系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106020739A(43)申请公布日2016.10.12(21)申请号201610547862.5(22)申请日2016.07.12(71)申请人乐视控股（北京）有限公司地址100025北京市朝阳区姚家园路105号3号楼10层1102申请人乐视云计算有限公司(72)发明人吴兴义(74)专利代理机构北京商专永信知识产权代理事务所(普通合伙)11400代理人方挺黄谦(51)Int.Cl.G06F3/06(2006.01)G06F11/16(2006.01)权利要求书2页说明书6页附图4页(54)发明名称用于分布式存储的数据存储方法及系统(57)摘要本发明实施例提供一种用于分布式存储的数据存储方法，包括：监控集群中各存储装置的工作状态；当存在失效存储装置时，确定失效存储装置所在的至少一个存储阵列、至少一个存储阵列中剩余的存活存储装置及与所述至少一个存储阵列相关的全部数据组；基于用户对全部数据组中的至少一个数据组的访问，生成第一队列和第二队列，其中，第一队列与全部数据组中未被访问的数据组对应，第二队列与全部数据组中被访问的数据组对应；从集群中选择可用存储装置替换失效存储装置；基于第二队列先于第一队列的顺序，利用所述至少一个存储阵列中剩余的存活存储装置向可用存储装置迁移数据组。本发明优先迁移热点数据，降低热点数据丢失的概率，提高数据安全性。CN106020739ACN106020739A权利要求书1/2页1.一种用于分布式存储的数据存储方法，其特征在于，包括：监控分布式存储的集群中各存储装置的工作状态；当存在失效存储装置时，确定所述失效存储装置所在的至少一个存储阵列、所述至少一个存储阵列中剩余的存活存储装置及与所述至少一个存储阵列相关的全部数据组；基于用户对所述全部数据组中的至少一个数据组的访问，生成第一队列和第二队列，其中，第一队列与所述全部数据组中未被访问的数据组对应，第二队列与所述全部数据组中被访问的数据组对应；从集群中选择可用存储装置替换所述失效存储装置；基于第二队列先于第一队列的顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组。2.根据权利要求1所述的数据存储方法，其特征在于，对于第二队列中的数据组，被访问次数越多，在第二队列中越靠前。3.根据权利要求1所述的数据存储方法，其特征在于，在确定所述失效存储装置所在的至少一个存储阵列、所述至少一个存储阵列中剩余的存活存储装置及与所述至少一个存储阵列相关的全部数据组后，所述方法还包括：当剩余的存活存储装置的数量为两个以上时，根据剩余的各存活存储装置在存储阵列中的位置，生成存储装置恢复顺序；基于第二队列先于第一队列的顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组包括：基于第二队列先于第一队列的顺序，按照存储装置恢复顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组。4.根据权利要求1所述的数据存储方法，其特征在于，在确定所述失效存储装置所在的至少一个存储阵列、所述至少一个存储阵列中剩余的存活存储装置及与所述至少一个存储阵列相关的全部数据组，所述方法还包括：当失效存储装置的数量为两个以上时，根据与所述失效存储装置对应的至少两个可用存储装置在存储阵列中的位置，生成存储装置恢复顺序；基于第二队列先于第一队列的顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组包括：基于第二队列先于第一队列的顺序，按照存储装置恢复顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组。5.一种用于分布式存储的数据存储系统，其特征在于，包括：监控模块，用于监控分布式存储的集群中各存储装置的工作状态；迁移数据确定模块，用于当存在失效存储装置时，确定所述失效存储装置所在的至少一个存储阵列、所述至少一个存储阵列中剩余的存活存储装置及与所述至少一个存储阵列相关的全部数据组；迁移序列生成模块，基于用户对所述全部数据组中的至少一个数据组的访问，生成第一队列和第二队列，其中，第一队列与所述全部数据组中未被访问的数据组对应，第二队列与所述全部数据组中被访问的数据组对应；存储修复模块，从集群中选择可用存储装置替换所述失效存储装置；2CN106020739A权利要求书2/2页数据迁移模块，基于第二队列先于第一队列的顺序，利用所述至少一个存储阵列中剩余的存活存储装置向替换后的可用存储装置迁移数据组。6.根据权利要求5所述的数据存储系统，其特征在于，对于第二队列中的数据组，被访问次数越多，在第二队列中越靠前。7.根据权利要求5所述的数据存储系统，其特征在于，所述系统还包括存储顺序确定模块，用于当剩余