图像检测方法、装置、设备和存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115018775A(43)申请公布日2022.09.06(21)申请号202210575258.9G06V10/44(2022.01)(22)申请日2022.05.24(71)申请人阿里巴巴（中国）有限公司地址310023浙江省杭州市余杭区五常街道文一西路969号3幢5层554室(72)发明人夏英达张灵姚佳文吕乐华先胜(74)专利代理机构北京太合九思知识产权代理有限公司11610专利代理师孙明子(51)Int.Cl.G06T7/00(2017.01)G06T7/10(2017.01)G06V10/764(2022.01)G06V10/774(2022.01)权利要求书3页说明书14页附图4页(54)发明名称图像检测方法、装置、设备和存储介质(57)摘要本申请提供一种图像检测方法、装置、设备和存储介质，该方法包括：获取通过平扫CT得到的检测图像，从检测图像中提取出目标身体部位图像；通过第一图像检测模型对目标身体部位图像进行第一图像分类分割处理，以确定目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对目标身体部位图像进行第二图像分类分割处理，以确定目标身体部位图像中存在的第二目标病灶类型及病灶区域，第二目标病灶类型是第一目标病灶类型的子类别。通过两个图像检测模型的协同，可以实现包含病灶类型和病灶区域的图像的精细化检测。CN115018775ACN115018775A权利要求书1/3页1.一种图像检测方法，其特征在于，包括：获取通过平扫电子计算机断层扫描得到的检测图像；从所述检测图像中提取出对应于目标身体部位的目标身体部位图像；通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，所述第二目标病灶类型是所述第一目标病灶类型的子类别。2.根据权利要求1所述的方法，其特征在于，所述第一图像检测模型用于进行第一组病灶类型的检测，所述第一组病灶类型中包括：按所述目标身体部位对应的疾病严重程度依次划分出的第三目标病灶类型、所述第一目标病灶类型和无病灶，其中，所述第一目标病灶类型是指除所述第三目标病灶类型外的病灶类型的统称。3.根据权利要求1所述的方法，其特征在于，所述第一图像检测模型包括第一特征提取子模型和第一分类分割子模型，所述第一特征提取子模型包括第一编码模块、第一解码模块以及所述第一编码模块和所述第一解码模块之间的跳接层；所述通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，包括：通过所述第一编码模块提取所述目标身体部位图像对应的第一特征图组，所述第一特征图组由多个尺度的特征图构成；通过所述跳接层将所述第一特征图组输入到所述第一解码模块；通过所述第一解码模块获取所述目标身体部位图像对应的第二特征图组，所述第二特征图组由多个尺度的特征图构成；将所述第二特征图组输入到所述第一分类分割子模型，以通过所述第一分类分割子模型对所述第二特征图组中包含的特征图进行融合，并基于融合后的特征图确定所述目标身体部位图像中是否存在第一目标病灶类型及对应于所述第一目标病灶类型的病灶区域。4.根据权利要求1所述的方法，其特征在于，所述第二图像检测模型包括第二特征提取子模型、第二分类分割子模型和池化模块，所述第二分类分割子模型中包括记忆单元和注意力模块；其中，所述记忆单元被训练为用于存储所述第一目标病灶类型下包含的不同病灶类型在所述目标身体部位中对应的位置和视觉特征，所述记忆单元被配置为以目标数量的记忆向量来存储所述位置和视觉特征；所述通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，包括：通过所述第二特征提取子模型提取所述目标身体部位图像对应的第三特征图组，所述第三特征图组由多个尺度的特征图构成；依次针对所述多个尺度的特征图中的目标特征图：通过所述池化模块对所述目标特征图进行池化处理，以将所述目标特征图压缩为所述目标数量的特征向量；以及通过所述注意力模块对所述目标数量的参考向量与所述目标数量的特征向量进行交叉注意力处理，对所述目标数量的参考向量进行自注意力处理，加和交叉注意力处理结果和自注意力处理结果；其中，当所述目标特征图是所述多个尺度的特征图中的第一个时，所述参考向量为所述2CN115018775A权利要求书2/3页记忆向量，当所述目标特征图不是所述多个尺度的特征图中的第一个时，所述参考向量为前一个目标特征图对应的交叉注意力处理结果和自注意力处理结果的加和结果；所述目标特征图是所述多个尺度