数据处理方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113821507A(43)申请公布日2021.12.21(21)申请号202110859453.X(22)申请日2021.07.28(71)申请人腾讯科技（深圳）有限公司地址518000广东省深圳市南山区高新区科技中一路腾讯大厦35层(72)发明人严石伟(74)专利代理机构广州华进联合专利商标代理有限公司44224代理人陈小娜(51)Int.Cl.G06F16/22(2019.01)G06F16/25(2019.01)G06F9/48(2006.01)权利要求书3页说明书23页附图10页(54)发明名称数据处理方法和装置(57)摘要本申请涉及一种数据处理方法和装置。所述方法包括：获取待处理任务；待处理任务中包括有任务数据；确定与待处理任务对应的操作类型；操作类型至少包括数据下载类型、数据存储类型、数据访问类型、和数据整理类型中的一种；确定与任务数据相关的存储空间所属的空间类型；确定与空间类型相匹配的目标处理接口；目标处理接口基于空间类型所支持的通信协议设计得到；调用目标处理接口，并按照与操作类型对应的操作方式，基于任务数据对存储空间进行操作，以执行待处理任务。采用本方法能够提升数据操作的多样性。CN113821507ACN113821507A权利要求书1/3页1.一种数据处理方法，其特征在于，所述方法包括：获取待处理任务；所述待处理任务中包括有任务数据；确定与所述待处理任务对应的操作类型；所述操作类型至少包括数据下载类型、数据存储类型、数据访问类型、和数据整理类型中的一种；确定与所述任务数据相关的存储空间所属的空间类型；确定与所述空间类型相匹配的目标处理接口；所述目标处理接口基于所述空间类型所支持的通信协议设计得到；调用所述目标处理接口，并按照与所述操作类型对应的操作方式，基于所述任务数据对所述存储空间进行操作，以执行所述待处理任务。2.根据权利要求1所述的方法，其特征在于，所述获取待处理任务，包括：获取当前的任务队列，并确定所述任务队列的第一队列长度；当所述第一队列长度小于预设队列阈值时，确定缓存队列的第二队列长度；当所述第二队列长度不为零时，根据第一队列长度与预设队列阈值之间的差值，将存储于所述缓存队列中的差值数量的任务标识转存于所述任务队列中；将与所述任务队列中的任务标识对应的任务，分别均作为待处理任务。3.根据权利要求2所述的方法，其特征在于，所述调用所述目标处理接口，并按照与所述操作类型对应的操作方式，基于所述任务数据对所述存储空间进行操作，以执行所述待处理任务，包括：对于每个待处理任务，均调用与相应待处理任务对应的目标处理接口，并按照与相应待处理任务所属操作类型所对应的操作方式，基于相应待处理任务中的任务数据，对相关的存储空间进行操作，以并行执行所述待处理任务。4.根据权利要求2所述的方法，其特征在于，所述方法还包括：接收用户操作请求，并基于所述用户操作请求中携带的任务数据和任务标识生成对应的任务；将所述任务数据存储于缓存空间中，并当所述第一队列长度小于所述预设队列阈值时，将所述任务标识存储于所述任务队列；当所述第一队列长度等于所述预设队列阈值时，将所述任务标识存储于所述缓存队列。5.根据权利要求4所述的方法，其特征在于，所述方法还包括：当确定所述待处理任务处理异常时，获取存储于所述任务队列中的任务标识，并根据所述任务标识重新从所述缓存空间中读取相应的任务数据；基于所述任务数据重新执行所述待处理任务。6.根据权利要求1所述的方法，其特征在于，所述待处理任务至少包括数据下载任务、数据导入任务、数据转存任务、数据访问任务、和数据整理任务中的一种；与所述数据下载任务相对应的任务数据包括待下载数据标识；与所述数据导入任务相对应的任务数据包括导入空间标识；与所述数据转存任务相对应的任务数据包括源空间标识和转存空间标识；与所述数据访问任务相对应的任务数据包括访问数据标识；与所述数据整理任务相对应的任务数据包括整理空间标识。7.根据权利要求6所述的方法，其特征在于，所述确定与所述任务数据相关的存储空间2CN113821507A权利要求书2/3页所属的空间类型，包括：当所述待处理任务为数据下载任务时，根据所述待下载数据标识，确定存储有待下载数据的存储空间的空间类型；当所述待处理任务为数据导入任务时，根据所述导入空间标识，确定用于存储待导入数据的存储空间的空间类型；当所述待处理任务为数据转存任务时，根据所述源空间标识确定当前存储有待转存数据的源存储空间的空间类型，并根据所述转存空间标识确定用于转存所述待转存数据的转存空间的空间类型；当所述待处理任务为数据访问任务时，根据所述访问数据标识，确定存储有待访问数据的存储空间的空间类型；当所述待处理任务为数据整理