数据处理方法、装置、设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113779452A(43)申请公布日2021.12.10(21)申请号202011197930.2(22)申请日2020.10.30(71)申请人北京沃东天骏信息技术有限公司地址100076北京市北京经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人马喜鹏(74)专利代理机构北京同立钧成知识产权代理有限公司11205代理人朱颖刘芳(51)Int.Cl.G06F16/957(2019.01)G06F16/215(2019.01)G06F16/25(2019.01)权利要求书3页说明书14页附图5页(54)发明名称数据处理方法、装置、设备及存储介质(57)摘要本实施例提供的数据处理方法、装置、设备及存储介质，通过获取带有至少一个目标数据源标识的用户数据展示请求，并根据预设数据处理规则和每个目标数据源的数据处理服务实例，分别从缓存服务层中获取每个目标数据源的目标展示数据，然后将每个目标数据源的目标展示数据通过结点层接口传输至对应目标数据源标识关联的数据展示平台中。该技术方案，通过缓存服务层和结点层接口，将目标展示数据传输至数据展示平台，提高了数据展示平台展示数据的稳定性，并提高了用户体验。CN113779452ACN113779452A权利要求书1/3页1.一种数据处理方法，其特征在于，包括：获取用户的数据展示请求，所述数据展示请求包括：至少一个目标数据源的标识；根据预设数据处理规则和每个目标数据源的数据处理服务实例，分别从缓存服务层中获取每个目标数据源的目标展示数据；将每个目标数据源的目标展示数据通过结点层接口传输至对应目标数据源标识关联的数据展示平台中。2.根据权利要求1所述的方法，其特征在于，所述根据预设数据处理规则和每个目标数据源的数据处理服务实例，分别从缓存服务层中获取每个目标数据源的目标展示数据，包括：针对每个目标数据源，调用所述目标数据源的数据处理服务实例，判断所述缓存服务层中的缓存数据单元中是否存在所述目标数据源的实时缓存数据；在所述缓存数据单元中存在所述目标数据源的实时缓存数据时，从所述缓存数据单元中获取所述目标展示数据；在所述缓存数据单元中不存在所述目标数据源的实时缓存数据时，判断所述缓存服务层中的关系型数据单元中是否存在所述目标数据源的历史缓存数据；在所述关系型数据单元中存在所述目标数据源的历史缓存数据时，从所述关系型数据单元中获取所述目标展示数据；在所述关系型数据单元中不存在所述目标数据源的历史缓存数据时，从所述缓存服务层中的全量数据单元中获取所述目标展示数据。3.根据权利要求1所述的方法，其特征在于，在所述根据预设数据处理规则和每个目标数据源的数据处理服务实例，分别从缓存服务层中获取每个目标数据源的目标展示数据之前，所述方法还包括：根据所述数据展示请求，调用所述缓存服务层中获取接口，获取数据传输接口的使用方法；所述根据预设数据处理规则和每个目标数据源的数据处理服务实例，分别从缓存服务层中获取每个目标数据源的目标展示数据，包括：根据预设数据处理规则和每个目标数据源的数据处理服务实例，调用所述数据传输接口和所述缓存服务层内的对象获取函数，从缓存服务层中获取所述目标数据源的目标展示数据。4.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：接收第一数据源的数据存储请求，所述数据存储请求包括：第一数据源的标识；基于所述缓存服务层内的对象存储函数和所述第一数据源的标识，从所述第一数据源接收待存储数据；根据所述缓存服务层支持的数据存储模式和预设转换规则，将所述待存储数据转换成目标存储类型数据；存储所述目标存储类型数据。5.根据权利要求4所述的方法，其特征在于，在所述将所述目标展示数据通过结点层接口传输至所述目标数据源标识关联的数据展示平台中之前，所述方法还包括：确定所述目标数据源标识对应的初始数据类型；2CN113779452A权利要求书2/3页根据所述预设转换规则，将所述目标展示数据转换成所述初始数据类型的数据。6.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：接收第二数据源的缓存层接口调用请求，所述缓存层接口调用请求携带所述第二数据源的标识；根据所述缓存层接口调用请求，在所述缓存服务层，为所述第二数据源的部署数据处理服务实例，所述数据处理服务实例用于支持针对所述第二数据源的数据存储服务和数据读取服务。7.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：检测每个数据源未调用缓存层接口的连续时长；将所述连续时长大于预设时长的数据源，确定为候选清理数据源，所述候选清理数据源包括：未配置清理规则的第一类候选数据源和配置有清理规则的第二类候选数据源；对于