数据信息查询方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113626473A(43)申请公布日2021.11.09(21)申请号202110943857.7(22)申请日2021.08.17(71)申请人北京京东振世信息技术有限公司地址100086北京市海淀区知春路76号6层(72)发明人李小保(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人徐敏杨倩(51)Int.Cl.G06F16/2453(2019.01)G06F16/22(2019.01)G06F16/23(2019.01)G06F16/27(2019.01)G06F16/16(2019.01)G06F16/17(2019.01)权利要求书2页说明书10页附图6页(54)发明名称数据信息查询方法和装置(57)摘要本发明公开了一种数据信息查询方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：接收针对目标表的目标字段的查询指令；其中，所述目标表存储在目标数据库中，所述查询指令包含所述目标字段的取值；在所述目标表对应的外部存储中，查询所述目标字段的取值对应的目标记录标识；其中，所述外部存储用于存储所述目标表中所述目标字段的取值与所述目标表的记录标识的对应关系；在所述目标数据库的所述目标表中，查询所述目标记录标识对应的数据信息。该实施方式能够提高针对非索引字段的查询效率。CN113626473ACN113626473A权利要求书1/2页1.一种数据信息查询方法，其特征在于，包括：接收针对目标表的目标字段的查询指令；其中，所述目标表存储在目标数据库中，所述查询指令包含所述目标字段的取值；在所述目标表对应的外部存储中，查询所述目标字段的取值对应的目标记录标识；其中，所述外部存储用于存储所述目标字段的取值与所述目标表的记录标识的对应关系；在所述目标数据库的所述目标表中，查询所述目标记录标识对应的数据信息。2.根据权利要求1所述的方法，其特征在于，所述在所述目标表对应的外部存储中，查询所述目标字段的取值对应的目标记录标识之前，还包括：确定所述目标字段是否对应于所述目标表的索引字段；若是，则在所述目标数据库的所述目标表中查询所述目标字段的取值对应的数据信息；若否，则确定所述目标字段是否对应于所述外部存储的索引字段；若是，则执行所述在所述目标表对应的外部存储中，查询所述目标字段的取值对应的目标记录标识的步骤。3.根据权利要求2所述的方法，其特征在于，所述确定所述目标字段是否对应于所述外部存储的索引字段之后，还包括：若否，则确定所述目标字段对应的查询频率；确定所述查询频率是否大于频率阈值；若是，则将所述目标字段作为所述外部存储的索引字段，在所述外部存储中存储所述目标字段的取值与所述目标表的记录标识的对应关系。4.根据权利要求1所述的方法，其特征在于，所述在所述目标表对应的外部存储中，查询所述目标字段的取值对应的目标记录标识之前，还包括：确定所述目标表中的非索引字段，并选择至少一个所述非索引字段作为所述外部存储的索引字段；在所述目标表中，获取所述外部存储的索引字段的取值与记录标识的对应关系；将所述外部存储的索引字段的取值与记录标识的对应关系存储在所述外部存储中。5.根据权利要求1所述的方法，其特征在于，所述目标数据库采用HBase，所述外部存储采用ElasticSearch；所述在所述目标表对应的外部存储中，查询所述目标字段的取值对应的记录标识之前，还包括：获取所述HBase的日志文件中的日志记录；根据所述日志记录，对所述目标表进行数据同步处理；根据所述日志记录，对所述外部存储进行数据同步处理。6.根据权利要求5所述的方法，其特征在于，所述获取所述HBase的日志文件中的日志记录之后，还包括：确定所述日志记录是否已被同步到所述目标表及所述外部存储中；若是，则删除所述日志记录。7.根据权利要求6所述的方法，其特征在于，所述日志记录包括：第一标志位及第二标志位；所述根据所述日志记录，对所述目标表进行数据同步之后，还包括：2CN113626473A权利要求书2/2页设置所述第一标志位，设置后的第一标志位标识所述日志记录已被同步到所述目标表中；所述根据所述日志记录，对所述外部存储进行数据同步之后，还包括：设置所述第二标志位，设置后的第二标志位标识所述日志记录已被同步到所述外部存储中；所述确定所述日志是否已被同步到所述目标表及所述外部存储中，包括：根据所述第一标志位及所述第二标志位，确定所述日志是否已被同步到所述目标表及所述外部存储中。8.一种数据信息查询装置，其特征在于，包括：指令接收模块，用于接收针对目标表的目标字段的查询指令；其中，所述目标表存储在目标数据库中，所述查询指令包含所述目标字段的取值；标识查询模块，用于在所述目标表对应的外部存储中，查