一种数据存储方法和系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113407108A(43)申请公布日2021.09.17(21)申请号202010182503.0(22)申请日2020.03.16(71)申请人北京沃东天骏信息技术有限公司地址100176北京市北京经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人袁帅(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人李阳王志远(51)Int.Cl.G06F3/06(2006.01)G06F9/50(2006.01)权利要求书2页说明书14页附图4页(54)发明名称一种数据存储方法和系统(57)摘要本发明公开了一种数据存储方法和系统，涉及计算机技术领域。该方法的实施方式包括：将多个服务器进行分组，得到多个服务器组，将待存储的数据进行分组，得到多个待存储数据组；确定待存储数据组与服务器组之间的存储映射关系，并根据存储映射关系进行存储；根据各服务器组的负载值确定第一服务器组和第二服务器组；确定存储在第一服务器组上的第一目标数据，以及确定存储在第二服务器组上的第二目标数据；更新存储映射关系，将第一目标数据迁移到第二服务器组、将第二目标存储数据迁移到在第一服务器组。该实施方式能够有效缓解存储压力，节省服务器资源，同时能够动态调整数据的存储位置，自动分散热点数据和访问压力，实现负载均衡化。CN113407108ACN113407108A权利要求书1/2页1.一种数据存储方法，其特征在于，所述方法包括多个服务器，所述方法还包括：将所述多个服务器进行分组，得到多个服务器组，按照预设的规则将待存储的数据进行分组，得到多个待存储数据组；确定所述待存储数据组与所述服务器组之间的存储映射关系，并根据所述存储映射关系将待存储数据组存储在对应的服务器组上；确定各服务器组的负载值，并根据所述负载值从所有服务器组中确定第一服务器组和第二服务器组；根据预设的第一条件，确定存储在第一服务器组上的第一目标数据，以及根据预设的第二条件，确定存储在第二服务器组上的第二目标数据；更新所述存储映射关系，将第一目标数据迁移到第二服务器组以及将第二目标存储数据迁移到第一服务器组。2.根据权利要求1所述的方法，其特征在于，确定各服务器组的负载值包括：对于每一服务器组，确定所述服务器组中每个服务器的负载指标值；根据所述负载指标值以及其对应的权重，确定每个服务器的负载值；根据所述每个服务器的负载值，确定所述服务器组的负载值。3.根据权利要求2所述的方法，其特征在于，所述负载指标值包括以下一种或多种：cpu使用率、内存使用率和接口响应时间。4.根据权利要求2所述的方法，其特征在于，根据所述负载值从所有服务器组中确定第一服务器组和第二服务器组包括：将所有服务器组中负载值大于或等于预设阈值的服务器组作为第一服务器组；根据各服务器组的负载值，确定负载平均值；将所有服务器组中负载值小于所述负载平均值的服务器组作为第二服务器组。5.根据权利要求4所述的方法，其特征在于，根据预设的第一条件，确定存储在第一服务器组上的第一目标数据包括：确定第一目标数据的数量；当第一服务器组的数量为1时，从所述第一服务器组上获取第一数据，所述第一数据的数量等于所述第一目标数据的数量；当第一服务器组的数量大于1时，根据各第一服务器组的负载值与所述负载平均值的差值，确定各第一服务器组之间的差值比；根据所述差值比，从各第一服务器组上获取第一数据，将所述第一数据作为第一目标数据，其中，所述第一数据之间的数量比等于所述差值比，且所述第一数据的数量之和等于所述第一目标数据的数量；根据预设的第二条件，确定存储在第二服务器组上的第二目标数据包括：确定第二目标数据的数量，其中，所述第二目标数据的数量等于第一目标数据的数量；当第二服务器组的数量为1时，从所述第二服务器组上获取第二数据，所述第二数据的数量等于所述第二目标数据的数量；当第二服务器组的数量大于1时，根据各第二服务器组的负载值与所述负载平均值的差值，确定各第二服务器组之间的差值比；根据所述差值比，从各第二服务器组上获取第二数据，将所述第二数据作为第二目标数据，其中，所述第二数据之间的数量比等于所述差值比，且所述第二数据的数量之和等于第二目标数据的数量。2CN113407108A权利要求书2/2页6.根据权利要求5所述的方法，其特征在于，根据如下过程确定第一数据：确定存储在第一服务器组上的数据的访问次数；根据所述访问次数对所述存储在第一服务器组上的数据进行排序，其中，访问次数越大相应的数据的排序越靠前；将所述存储在第一服务器组上的数据中排序靠前的至少一个数据作为第一数据；根据如下过程确定第二数据：确定存储在第二服务器组上的数据的访问次数；根据所述访问