预览加载中,请您耐心等待几秒...
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10

亲,该文档总共25页,到这已经超出免费预览范围,如果喜欢就直接下载吧~

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114968668A(43)申请公布日2022.08.30(21)申请号202210692395.0(22)申请日2022.06.17(71)申请人重庆紫光华山智安科技有限公司地址400700重庆市北碚区云汉大道117号附386号(72)发明人赵旭东易曌平(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463专利代理师张欣欣(51)Int.Cl.G06F11/14(2006.01)G06F11/10(2006.01)G06F3/06(2006.01)权利要求书2页说明书11页附图11页(54)发明名称数据处理方法、装置、数据接入端及存储介质(57)摘要本发明实施例提供的一种数据处理方法、装置、数据接入端及存储介质,涉及分布式存储领域。首先,接收数据写请求,数据写请求包括待存储数据;然后,对待存储数据进行处理,得到多个数据块,每个数据块均分配有序号;接着,针对每个数据块,根据数据块的序号,从多个存储节点中确定出目标节点,并将数据块与待存储数据的数据版本号发送给目标节点,以使目标节点将数据块和数据版本号分别存储至目标节点的第一空间和第二空间,其中,数据块的序号与目标节点的编号满足预设映射关系,第一空间位于第二空间之前,避免出现各存储节点中数据版本号一致,而数据块存储失败的情况,使数据接入端能及时恢复存储失败的数据块恢复,保证数据的一致性。CN114968668ACN114968668A权利要求书1/2页1.一种数据处理方法,其特征在于,应用于分布式存储系统中的数据接入端,所述分布式存储系统还包括多个存储节点,每个所述存储节点均设置有编号,每个所述存储节点均与所述数据接入端通信连接,所述方法包括:接收数据写请求,所述数据写请求包括待存储数据;对所述待存储数据进行处理,得到多个数据块,每个所述数据块均分配有序号;针对每个所述数据块,根据所述数据块的序号,从所述多个存储节点中确定出目标节点,并将所述数据块与所述待存储数据的数据版本号发送给所述目标节点,以使所述目标节点将所述数据块和所述数据版本号分别存储至所述目标节点的第一空间和第二空间,其中,所述数据块的序号与所述目标节点的编号满足预设映射关系,所述第一空间位于所述第二空间之前。2.如权利要求1所述的方法,其特征在于,所述对所述待存储数据进行处理,得到多个数据块的步骤前,所述方法还包括:若所述数据写请求为一个,则将当前时间戳作为所述待存储数据的数据版本号;若所述数据写请求为多个,则对所述当前时间戳进行多次自增运算,并按照每个所述数据写请求的接收时间的先后,将每次自增运算的结果作为一个所述数据写请求中的待存储数据的数据版本号。3.如权利要求1所述的方法,其特征在于,所述对所述待存储数据进行处理,得到多个数据块的步骤包括:按照预设长度将所述待存储数据切分为多个数据条带;将每预设数量个所述数据条带组成一个原始数据块,得到多个原始数据块;对所述多个原始数据块进行纠删编码,得到多个校验数据块,所述多个数据块包括所述多个原始数据块和所述多个校验数据块。4.如权利要求1所述的方法,其特征在于,所述方法还包括:接收数据读请求,所述数据读请求包括待读取数据的写入节点顺序;根据所述写入节点顺序,从每个所述存储节点的第二空间中读取目标数据版本号;若所有所述目标数据版本号均一致,则根据所述写入节点顺序,从每个所述存储节点的第一空间中读取目标数据块;根据所述预设映射关系和所有所述目标数据块,生成所述待读取数据,以响应所述数据读请求。5.如权利要求4所述的方法,其特征在于,所述方法还包括:若存在不一致的所述目标数据版本号,则根据每个所述目标数据版本号将多个所述存储节点划分为正常节点和异常节点,其中,所有所述正常节点对应的目标数据版本号均一致,每个所述异常节点对应的目标数据版本号与所有所述正常节点对应的目标数据版本号不一致;根据所述写入节点顺序,从每个所述正常节点的第一空间中读取目标数据块;根据每个所述正常节点对应的目标数据块,恢复每个所述异常节点对应的目标数据块;根据所述预设映射关系和所有所述目标数据块,生成所述待读取数据,以响应所述数据读请求。2CN114968668A权利要求书2/2页6.如权利要求4或5所述的方法,其特征在于,所述根据所述预设映射关系和所有所述目标数据块,生成所述待读取数据的步骤包括:根据所述预设映射关系和每个所述存储节点的编号,为每个所述目标数据块分配序号;按照每个所述目标数据块的序号对所有所述目标数据块进行排序,得到所述待读取数据。7.如权利要求5所述的方法,其特征在于,所述方法还包括:根据所述写入节点顺序和预设大小,确定每个所述异常节点的第一空间中的目标区域;针对每个所述异常节点,利用所述异常节点对应的目