数据处理方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113822272A(43)申请公布日2021.12.21(21)申请号202011261210.8(22)申请日2020.11.12(71)申请人北京沃东天骏信息技术有限公司地址100176北京市大兴区经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人张娟(74)专利代理机构北京英赛嘉华知识产权代理有限责任公司11204代理人王达佐马晓亚(51)Int.Cl.G06K9/32(2006.01)G06K9/62(2006.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书4页说明书12页附图4页(54)发明名称数据处理方法和装置(57)摘要本申请公开了数据处理方法和装置，具体实现方案为：响应于接收到页面图像，对页面图像进行标注，生成与标注数据对应的各个图像集，各个图像集包括：用于识别容器类型的第一图像集、用于识别文本信息的第二图像集和用于检测图像元素的第三图像集，页面图像基于页面模板而生成；将各个图像集输入至训练得到的图像识别模型，生成与第一图像集对应的容器类型数据集、与第二图像集对应的文本数据集和与第三图像集对应的图像元素数据集；基于页面的模板信息，对容器类型数据集、文本数据集和图像元素数据集进行转换，生成与页面图像对应的模板数据集并上传。该方案利用图像识别技术，将页面图像转化为模板数据，实现了模板数据的精准定位。CN113822272ACN113822272A权利要求书1/4页1.一种数据处理方法，所述方法包括：响应于接收到页面图像，对所述页面图像进行标注，生成与所述标注数据对应的各个图像集，其中，所述各个图像集包括：用于识别容器类型的第一图像集、用于识别文本信息的第二图像集和用于检测图像元素的第三图像集，所述页面图像基于页面模板而生成；将各个图像集输入至训练得到的图像识别模型，生成与所述第一图像集对应的容器类型数据集、与所述第二图像集对应的文本数据集和与所述第三图像集对应的图像元素数据集，其中，所述图像识别模型用于表征对所述第一图像集中各个图像进行容器类型判定、对所述第二图像集中各个图像进行文字检测和文本识别、对所述第三图像集中各个图像进行图像元素检测和识别；基于所述页面的模板信息，对所述容器类型数据集、所述文本数据集和所述图像元素数据集进行转换，生成与所述页面图像对应的模板数据集，并上传所述模板数据集，其中，所述转换基于特定语言结构对所述容器类型数据集、所述文本数据集和所述图像元素数据集进行转换。2.根据权利要求1所述方法，其中，所述对所述页面图像进行标注，生成与所述标注数据对应的各个图像集，包括：对所述页面图像进行标注，得到与所述页面图像对应的标注数据；将所述标注数据输入至位置确定模型，生成与所述标注数据对应的各个区块的位置信息，其中，所述位置确定模型由所述标注数据的历史相关数据训练得到；基于所述各个区块的位置信息，确定与所述标注数据对应的各个图像集。3.根据权利要求1所述方法，其中，所述图像识别模型通过如下方式训练得到：获取训练样本集，其中，所述训练样本集中的训练样本包括用于识别容器类型的第一图像集、用于识别文本信息的第二图像集、用于检测图像元素的第三图像集、与所述第一图像集对应的容器类型数据集、与所述第二图像集对应的文本数据集和与所述第三图像集对应的图像元素数据集；利用深度学习方法，将所述训练样本集中训练样本包括的所述第一图像集、所述第二图像集和所述第三图像集作为输入数据，将与所述第一图像集对应的容器类型数据集、与所述第二图像集对应的文本数据集和与所述第三图像集对应的图像元素数据集作为期望输出数据，训练得到图像识别模型。4.根据权利要求1所述方法，其中，所述图像识别模型包括容器类型识别子模型、文本识别子模型和元素识别子模型；所述将各个图像集输入至训练得到的图像识别模型，生成与所述第一图像集对应的容器类型数据集、与所述第二图像集对应的文本数据集和与所述第三图像集对应的图像元素数据集，包括：将所述第一图像集输入至所述容器类型识别子模型，生成与所述第一图像集对应的容器类型数据集，其中，所述容器类型识别子模型用于表征对所述第一图像集中各个图像进行容器类型判定；将所述第二图像集输入至所述文本识别子模型，生成与所述第二图像集对应的文本数据集，其中，所述文本识别子模型用于表征对所述第二图像集中各个图像进行文字检测和文本识别；将所述第三图像集输入至所述元素识别子模型，生成与所述第三图像集对应的图像元2CN113822272A权利要求书2/4页素数据集，其中，所述元素识别子模型用于表征对所述第三图像集中各个图像进行图像元素检测和识别。5.根据权利要求4所述方法，其中，所述文本