数据查询方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113127416A(43)申请公布日2021.07.16(21)申请号202010044001.1(22)申请日2020.01.15(71)申请人北京沃东天骏信息技术有限公司地址100176北京市北京经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人祝江华(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人张效荣冯培培(51)Int.Cl.G06F16/13(2019.01)G06F16/172(2019.01)G06F16/182(2019.01)权利要求书2页说明书9页附图5页(54)发明名称数据查询方法和装置(57)摘要本发明公开了一种数据查询方法和装置，涉及计算机技术领域。其中，该方法包括：接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。通过以上步骤，能够提高数据查询效率，改善存储系统的查询性能。CN113127416ACN113127416A权利要求书1/2页1.一种数据查询方法，其特征在于，所述方法包括：接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。2.根据权利要求1所述的方法，其特征在于，在所述根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引之前，还包括，将所述与其他数据块相对应的索引加载至第三缓存中。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：将从文件系统中查询出的数据更新至第二缓存中，并将第三缓存中与所述查询出的数据相对应的索引移动至第一缓存。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：在所述第一缓存存在与所述查询请求对应的索引的情况下，根据与所述查询请求对应的索引查询第二缓存，并将从第二缓存中查询出的数据返回至客户端。5.根据权利要求1至4任一所述的方法，其特征在于，所述方法应用于HBase服务端，所述文件系统为HDFS系统。6.一种数据查询装置，其特征在于，所述装置包括：第一缓存查询模块，用于接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；第三缓存查询模块，用于响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；文件系统查询模块，用于根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。7.根据权利要求6所述的装置，其特征在于，所述装置还包括：加载模块，用于在第三缓存查询模块根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引之前，将所述与其他数据块相对应的索引加载至第三缓存中。8.根据权利要求6所述的装置，其特征在于，所述装置还包括：更新模块，用于将从文件系统中查询出的数据更新至第二缓存中，并将第三缓存中与所述查询出的数据相对应的索引移动至第一缓存。9.一种电子设备，其特征在于，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5中任一所述的方法。2CN113127416A权利要求书2/2页10.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-5中任一所述的方法。3CN113127416A说明书1/9页数据查询方法和装置技术领域[0001]本发明涉及计算机技术领域，尤其涉及一种数据查询方法和装置。背景技术[0002]为了快速响应访问请求，现有的存储系统中普遍设有缓存机制。如图1所述，在现有缓存机制下，内存中设有两个内存空间，具体为内存空间L1和内存空间L2。其中，内存空间L1用于存储部分索引(Index)