信息采集方法、装置和电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113641704A(43)申请公布日2021.11.12(21)申请号202110925080.1(22)申请日2021.08.12(71)申请人北京金山云网络技术有限公司地址100000北京市海淀区西二旗中路33号院4号楼6层006号(72)发明人李江伟(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人徐丽(51)Int.Cl.G06F16/2453(2019.01)G06F16/2458(2019.01)权利要求书2页说明书8页附图2页(54)发明名称信息采集方法、装置和电子设备(57)摘要本发明提供了一种信息采集方法、装置和电子设备，统计预设时间段内，针对目标数据文件中的至少一个数据单元的访问频率；其中的数据文件包括至少一个数据单元；数据单元包括：数据属性和数据属性对应的数据内容；根据至少一个数据单元的访问频率，从至少一个数据单元中确定需要采集统计信息的目标数据单元；采集目标数据单元对应的统计信息。该方式中，根据目标数据文件中每个数据单元在一段时间内的访问频率，确定实际需要采集统计信息的目标数据单元，进而采集目标数据单元对应的统计信息，能够根据实际情况采集统计信息，避免了统计信息中无用信息过多的问题，提高了查询优化器的查询效率，同时降低了网络带宽和内存的占用。CN113641704ACN113641704A权利要求书1/2页1.一种信息采集方法，其特征在于，包括：统计预设时间段内，针对目标数据文件中的至少一个数据单元的访问频率；其中，所述目标数据文件包括至少一个数据单元；所述数据单元包括：数据属性和所述数据属性对应的数据内容；根据所述至少一个数据单元的访问频率，从所述至少一个数据单元中确定需要采集统计信息的目标数据单元；采集所述目标数据单元对应的统计信息。2.根据权利要求1所述的方法，其特征在于，根据所述至少一个数据单元的访问频率，从所述至少一个数据单元中确定需要采集统计信息的目标数据单元的步骤，包括：从所述至少一个数据单元的访问频率中确定大于或等于预设阈值的目标访问频率；将所述目标访问频率对应的数据单元，确定为需要采集统计信息的目标数据单元。3.根据权利要求1所述的方法，其特征在于，采集所述目标数据单元对应的统计信息的步骤，包括：根据所述目标数据单元包括的数据属性和所述数据属性对应的数据内容，采集所述目标数据单元对应的统计信息；其中，所述统计信息包括：所述目标数据文件中数据单元的元数据。4.根据权利要求1所述的方法，其特征在于，采集所述目标数据单元对应的统计信息的步骤，包括：如果所述目标数据文件中包括新增数据单元，采集所述新增数据单元对应的统计信息，以及所述目标数据单元对应的统计信息。5.根据权利要求4所述的方法，其特征在于，采集所述新增数据单元对应的统计信息，以及所述目标数据单元对应的统计信息的步骤，包括：根据所述新增数据单元包括的数据属性和所述数据属性对应的数据内容，采集所述新增数据单元对应的统计信息；根据所述目标数据单元包括的数据属性和所述数据属性对应的数据内容，采集所述目标数据单元对应的统计信息。6.根据权利要求1所述的方法，其特征在于，统计预设时间段内，针对目标数据文件中的至少一个数据单元的访问频率的步骤之前，所述方法还包括：采集指定的数据属性对应的数据单元的初始统计信息；将所述初始统计信息保存至目标内存。7.根据权利要求6所述的方法，其特征在于，采集所述目标数据单元对应的统计信息的步骤之后，所述方法还包括：将所述目标内存中的所述初始统计信息更新为所述目标数据单元对应的统计信息。8.根据权利要求1所述的方法，其特征在于，所述数据单元包括所述目标数据文件的数据行或者数据列。9.一种信息采集装置，其特征在于，包括：访问频率统计模块，用于统计预设时间段内，针对目标数据文件中的至少一个数据单元的访问频率；其中，所述目标数据文件包括至少一个数据单元；所述数据单元包括：数据属性和所述数据属性对应的数据内容；2CN113641704A权利要求书2/2页目标数据单元确定模块，用于根据所述至少一个数据单元的访问频率，从所述至少一个数据单元中确定需要采集统计信息的目标数据单元；统计信息采集模块，用于采集所述目标数据单元对应的统计信息。10.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的机器可执行指令，所述处理器执行所述机器可执行指令以实现权利要求1‑8任一项所述的信息采集方法。11.一种机器可读存储介质，其特征在于，所述机器可读存储介质存储有机器可执行指令，所述机器可执行指令在被处理器调用和执行时，所述机器可执行指令促使所述处理器实现权利要求1‑8任一项所述的信息采集方法。3CN113