一种数据存储和读取方法、系统、装置、设备及介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113849307A(43)申请公布日2021.12.28(21)申请号202111105659.X(22)申请日2021.09.22(71)申请人网易（杭州）网络有限公司地址310052浙江省杭州市滨江区长河街道网商路599号4幢7层(72)发明人余利华蒋鸿翔范欣欣祝江华(74)专利代理机构北京同达信恒知识产权代理有限公司11291代理人王媛媛(51)Int.Cl.G06F9/50(2006.01)G06F16/27(2019.01)权利要求书3页说明书26页附图9页(54)发明名称一种数据存储和读取方法、系统、装置、设备及介质(57)摘要本公开涉及一种数据存储和读取方法、系统、装置、设备及介质。由于在确定用于存储目标数据的目标存储节点时，不仅考虑到了每个副本存储节点分别对应的预先配置的第一坐标，对每个副本存储节点分别与客户端节点之间的距离的影响，还考虑到了每个副本存储节点分别所在的机架，对每个副本存储节点分别与客户端节点之间的距离的影响，从而有利于更准确地确定每个副本存储节点分别与客户端节点之间的距离，也方便准确地确定用于存储目标数据的目标存储节点，也有利于在采用将距离客户端节点最近的副本存储节点确定为目标存储节点时，实现有效缩短数据存储和读写的耗时，提高存储节点间交互的效率。CN113849307ACN113849307A权利要求书1/3页1.一种数据存储方法，其特征在于，所述方法包括：接收客户端节点发送的目标数据的数据存储请求；基于至少两个副本存储节点分别所在的机架、以及所述至少两个副本存储节点分别对应的预先配置的第一坐标，从所述至少两个副本存储节点中，确定M个目标存储节点；其中，所述M为大于等于2的正整数，所述M个目标存储节点的剩余存储空间的大小满足所述目标数据所需的存储空间的大小；将所述M个目标存储节点的信息发送至所述客户端节点，以使所述客户端节点将所述目标数据发送至所述M个目标存储节点进行存储。2.根据权利要求1所述的方法，其特征在于，若所述客户端节点与所述至少两个副本存储节点位于同一数据中心，且所述至少两个副本存储节点被部署于至少两个机架上，所述基于至少两个副本存储节点分别所在的机架、以及所述至少两个副本存储节点分别对应的预先配置的第一坐标，从所述至少两个副本存储节点中，确定M个目标存储节点，包括：获取所述至少两个机架的顺序；按照所述至少两个机架的顺序，针对所述至少两个机架，确定已确定的目标存储节点的数量是否达到M个；若未达到，则根据该机架上的至少一个副本存储节点分别对应的第一坐标，确定目标存储节点；若达到，则停止继续确定目标存储节点。3.根据权利要求1所述的方法，其特征在于，若所述客户端节点与所述至少两个副本存储节点不位于同一数据中心，且所述至少两个副本存储节点被部署于至少两个机架上，所述基于至少两个副本存储节点分别所在的机架、以及所述至少两个副本存储节点分别对应的预先配置的第一坐标，从所述至少两个副本存储节点中，确定M个目标存储节点，包括：根据所述至少两个副本存储节点的剩余存储空间、以及所述目标数据所需的存储空间，确定至少两个候选存储节点；统计被部署于各机架上的候选存储节点的第二数量；根据多个所述第二数量以及预设的数量阈值Z，从所述至少两个候选存储节点中，确定归属于第一集合的目标存储节点；其中，所述Z为小于所述M，且大于等于1的正整数；根据任一已确定的目标存储节点对应的第一坐标、至少一个其它候选存储节点分别对应的第一坐标、及该目标存储节点分别与所述至少一个其它候选存储节点之间的访问路径，确定所述至少一个其它候选存储节点分别与该已确定的目标存储节点之间的第三距离；其中，所述其它候选存储节点为所述至少两个候选存储节点中，未被确定为所述目标存储节点的候选存储节点；基于所述至少一个其它存储节点分别对应的第三距离，从所述至少一个其它存储节点中，确定归属于第二集合的目标存储节点；其中，所述第一集合和所述第二集合中包含的目标存储节点的总数量为所述M。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：接收所述目标存储节点发送的通知信息；其中，所述通知消息为所述目标存储节点将所述目标数据存储完毕后发送的，所述通知信息携带有所述目标数据在所述目标存储节点中的存储路径；保存所述存储路径。5.根据权利要求1所述的方法，其特征在于，任一副本存储节点对应的第一坐标是根据2CN113849307A权利要求书2/3页该副本存储节点所在的机架在数据中心中的第一机架序号、该副本存储节点所在的机架在预设坐标系中的第二机架序号、及该副本存储节点在其所在的机架上的位置所对应的机器序号确定的。6.一种数据读取方法，其特征在于，所述方法应用于客户端节点，所述方法包括：