一种数据管理方法、装置、设备及存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114968926A(43)申请公布日2022.08.30(21)申请号202210606084.8(22)申请日2022.05.31(71)申请人济南浪潮数据技术有限公司地址250101山东省济南市自由贸易试验区济南片区浪潮路1036号浪潮科技园S05楼S311室(72)发明人孙业宽刘洪栋(74)专利代理机构北京集佳知识产权代理有限公司11227专利代理师张志梅(51)Int.Cl.G06F16/13(2019.01)G06F16/16(2019.01)G06F16/182(2019.01)权利要求书2页说明书11页附图9页(54)发明名称一种数据管理方法、装置、设备及存储介质(57)摘要本申请公开了一种数据管理方法、装置、设备及存储介质，涉及分布式存储集群领域，包括：接收元数据服务集群上传的数据变更信息；基于所述数据变更信息生成层级变更表并基于所述数据搜索分析引擎中存储的全部数据信息生成全量表；接收用户发送的检索请求，并基于所述检索请求按照预设检索方式在所述层级变更表中进行检索，以得到检索结果；基于所述检索结果在所述全量表中进行检索，以得到与所述检索请求对应的目标信息；将所述目标信息返回至网页以便用户查看。本申请中数据搜索分析引擎通过接到的数据变更信息构建数据库表，根据用户的检索请求在数据库表中检索，提高了数据的检索效率以及产品的竞争力。CN114968926ACN114968926A权利要求书1/2页1.一种数据管理方法，其特征在于，应用于数据搜索分析引擎，包括：接收元数据服务集群上传的数据变更信息；基于所述数据变更信息生成层级变更表并基于所述数据搜索分析引擎中存储的全部数据信息生成全量表；接收用户发送的检索请求，并基于所述检索请求按照预设检索方式在所述层级变更表中进行检索，以得到检索结果；基于所述检索结果在所述全量表中进行检索，以得到与所述检索请求对应的目标信息；将所述目标信息返回至网页以便用户查看。2.根据权利要求1所述的数据管理方法，其特征在于，所述接收元数据服务集群定时上传的数据变更信息，包括：接收元数据服务集群定时上传的元数据以及与所述元数据对应的当前路径；其中，所述元数据为所述元数据服务集群监控到的存在变更的数据，所述当前路径上传的形式为索引结点号的形式。3.根据权利要求2所述的数据管理方法，其特征在于，所述基于所述数据变更信息生成层级变更表，包括：基于所述元数据、所述当前路径、历史路径以及变更时间生成层级变更表；其中，每个所述元数据的每一次变更对应所述层级变更表中的一个变更项。4.根据权利要求2所述的数据管理方法，其特征在于，所述基于所述数据搜索分析引擎中存储的全部数据信息生成全量表，包括：基于所述数据搜索分析引擎中存储的所述元数据以及对应的所述当前路径生成全量表；当每次接收到所述元数据服务集群上传的所述数据变更信息时，利用所述数据变更信息更新所述全量表。5.根据权利要求1所述的数据管理方法，其特征在于，所述接收用户发送的检索请求，并基于所述检索请求按照预设检索方式在所述层级变更表中进行检索，以得到检索结果，包括：接收用户发送的检索请求，并判断所述检索请求中的检索条件是否包含路径；其中，所述检索条件包含所述路径、文件名、文件大小以及操作时间；若所述检索条件包含所述路径，则基于所述检索请求并按照预设检索方式在所述层级变更表中进行检索，以得到检索结果；相应的，所述基于所述检索结果在所述全量表中进行检索，以得到与所述检索请求对应的目标信息，包括：若所述检索条件中不包含所述路径，则直接基于所述检索条件在所述全量表中进行检索，以得到与所述检索请求对应的目标信息。6.根据权利要求1至5任一项所述的数据管理方法，其特征在于，所述基于所述检索请求按照预设检索方式在所述层级变更表中进行检索，以得到检索结果，包括：获取所述检索请求中待检索数据的目标索引结点号；利用所述目标索引结点号在所述层级变更表中逐条遍历检索；2CN114968926A权利要求书2/2页若存在移入的目录则对所述移入的目录再次进行逐条遍历检索，若不存在所述移入的目录和移出的目录，则结束检索；基于所述目标索引结点号、所述移入的目录对应的所述索引结点号、所述移出的目录对应的所述索引结点号生成目标检索式。7.根据权利要求6所述的数据管理方法，其特征在于，所述基于所述检索结果在所述全量表中进行检索，以得到与所述检索请求对应的目标信息，包括：基于所述目标检索式在所述全量表中进行检索，以得到对应的所述索引结点号形式的路径信息；基于所述索引结点号形式的路径信息逐层查找父目录的目录名；将所述父目录的目录名逐层拼接，以得到目标信息。8.一种数据管理装置，其特征在于，应用于数据搜索分析引擎，包括：信息接收模块，用于接