图像处理装置、图像处理方法和计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113836985A(43)申请公布日2021.12.24(21)申请号202010589735.8(22)申请日2020.06.24(71)申请人富士通株式会社地址日本神奈川县(72)发明人周嵘孙俊汪留安(74)专利代理机构北京集佳知识产权代理有限公司11227代理人王萍王鹏(51)Int.Cl.G06K9/00(2006.01)G06K9/32(2006.01)G06K9/62(2006.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书1页说明书9页附图4页(54)发明名称图像处理装置、图像处理方法和计算机可读存储介质(57)摘要本公开内容涉及图像处理装置和图像处理方法以及计算机可读存储介质。该图像处理装置包括：提取单元，被配置成从图像中提取包含待检测物体的前景，并且从图像的包含待检测物体的前景中提取包围待检测物体的边框；以及检测单元，使用边框在图像的前景中提取待检测物体，使得确定待检测物体的类别和位置，其中，提取单元和检测单元被配置成使用注意力机制来分别实现它们的提取操作和检测操作。根据本公开内容的图像处理技术，通过在图像处理的提取操作和检测操作中分别使用注意力机制，能够强化前景目标的特征提取并且弱化背景和噪声的信息，从而能够准确和快速地从遥感图像中检测目标物体的类别和位置。CN113836985ACN113836985A权利要求书1/1页1.一种图像处理装置，包括：提取单元，被配置成从图像中提取包含待检测物体的前景，并且从所述图像的包含待检测物体的前景中提取包围所述待检测物体的边框；以及检测单元，使用所述边框在所述图像的前景中提取所述待检测物体，使得确定所述待检测物体的类别和位置，其中，所述提取单元和所述检测单元被配置成使用注意力机制来分别实现它们的提取操作和检测操作。2.根据权利要求1所述的图像处理装置，其中，所述图像是遥感图像。3.根据权利要求1所述的图像处理装置，其中，所述图像处理装置使用卷积神经网络CNN模型来实现。4.根据权利要求1所述的图像处理装置，还包括：预处理单元，被配置成对所述图像进行预处理并且将经预处理的图像提供给所述提取单元。5.根据权利要求1所述的图像处理装置，其中，所述注意力机制使用基于所述待检测物体的实例分割掩模。6.根据权利要求5所述的图像处理装置，其中，所述提取单元的注意力机制使用基于全部类别的待检测物体的实例分割掩模，以及其中，所述检测单元的注意力机制使用基于单个类别的待检测物体的实例分割掩模。7.根据权利要求1所述的图像处理装置，其中，所述提取单元被配置成使用区域生成网络RPN模型来实现其提取操作。8.根据权利要求1所述的图像处理装置，其中，所述检测单元被配置成使用区域卷积神经网络RCNN模型来实现其检测操作。9.一种图像处理方法，包括：提取步骤，成从图像中提取包含待检测物体的前景，并且从所述图像的包含待检测物体的前景中提取包围所述待检测物体的边框；以及检测步骤，使用所述边框在所述图像的前景中提取所述待检测物体，使得最终确定所述待检测物体的类别和位置，其中，所述提取步骤和所述检测步骤使用注意力机制执行。10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序在被计算机执行时能够实现图像处理方法，所述图像处理方法包括：提取步骤，成从图像中提取包含待检测物体的前景，并且从所述图像的包含待检测物体的前景中提取包围所述待检测物体的边框；以及检测步骤，使用所述边框在所述图像的前景中提取所述待检测物体，使得最终确定所述待检测物体的类别和位置，其中，所述提取步骤和所述检测步骤使用注意力机制执行。2CN113836985A说明书1/9页图像处理装置、图像处理方法和计算机可读存储介质技术领域[0001]本文公开的实施方式涉及图像处理的技术领域。特别地，本公开内容的实施方式涉及用于从图像中检测目标物体的类别和位置的图像处理装置和图像处理方法以及计算机可读存储介质。背景技术[0002]近年来，随着遥感技术的发展，遥感图像的目标检测引起了广泛的关注。研究遥感图像的目标检测对于资源勘探、自然灾害评估、地面目标检测和识别等都具有重要的意义。[0003]不同于自然场景检测，遥感图像通常从高空拍摄，由于受到地表温度以及大气衰减等因素的影响，遥感系统所受到的干扰比普通的地面监控系统更强，甚至干扰强度有时会大大超过所要检测目标的强度。此外，“鸟瞰”式的俯视拍摄角度会带来诸如复杂背景、目标的尺度或方向变化、类别不平衡、不同拍摄设备或不同时间拍摄的图像亮度不一致等的各种问题。发明内容[0004]在下文中将给出关于本公开内容的简要概述，以便提供关于本公开内容的某些方面的基本理解。应当理解，这个概述并不是