一种基于U型网络的多目标分割方法及装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115082381A(43)申请公布日2022.09.20(21)申请号202210597579.9G06V10/42(2022.01)(22)申请日2022.05.27G06V10/80(2022.01)G06V10/774(2022.01)(71)申请人西安电子科技大学广州研究院G06V10/82(2022.01)地址510000广东省广州市黄埔区中新知G06N3/04(2006.01)识城海丝中心B5、B6、B7栋G06N3/08(2006.01)申请人广州市丰海科技股份有限公司(72)发明人陈睿阳文斌肖潇胡晓鹏杨俊(74)专利代理机构西安嘉思特知识产权代理事务所(普通合伙)61230专利代理师刘长春(51)Int.Cl.G06T7/00(2017.01)G06T7/13(2017.01)G06V10/44(2022.01)权利要求书2页说明书9页附图3页(54)发明名称一种基于U型网络的多目标分割方法及装置(57)摘要本发明涉及一种基于U型网络的多目标分割方法及装置，多目标分割方法包括：对待分割图像进行块分区，得到输入图像；将输入图像输入基于上下文转换网络自注意力机制的编码模块中进行统一的局部语义特征信息的提取，并定位分割目标，得到编码器输出图像；将编码器输出图像与编码模块进行局部语义特征信息提取过程中得到的语义特征信息进行融合，并统一待分割图像的全局语义特征信息，得到解码器输出图像；将解码器输出图像的不同目标进行映射输出，得到分割结果图。该多目标分割方法兼顾了局部语义提取优化和全局语义信息统一优化，可以克服医疗图像面临的图像模糊、噪声较大、视觉对比度低的问题，分割结果精确度高，鲁棒性强，分割效率高。CN115082381ACN115082381A权利要求书1/2页1.一种基于U型网络的多目标分割方法，其特征在于，包括步骤：S1、对待分割图像进行块分区，得到输入图像；S2、将所述输入图像输入基于上下文转换网络自注意力机制的编码模块中进行统一的局部语义特征信息的提取，并定位分割目标，得到编码器输出图像；S3、将所述编码器输出图像与所述编码模块进行局部语义特征信息提取过程中得到的语义特征信息进行融合，并统一所述待分割图像的全局语义特征信息，得到解码器输出图像；S4、将所述解码器输出图像的不同目标进行映射输出，得到分割结果图。2.根据权利要求1所述的基于U型网络的多目标分割方法，其特征在于，步骤S2包括：S21、将所述输入图像进行线性嵌入后输入到两个连续的上下文转换模块中进行表示学习，保持所述输入图像的特征维度和分辨率不变，得到第一多尺度特征；S22、将所述第一多尺度特征输入块合并层进行下采样，得到第一下采样特征；S23、将所述第一下采样特征输入到两个连续的上下文转换模块中进行表示学习，保持所述第一下采样特征的特征维度和分辨率不变，得到第二多尺度特征；S24、将所述第二多尺度特征输入块合并层进行下采样，得到第二下采样特征；S25、将所述第二下采样特征输入到两个连续的上下文转换模块中进行表示学习，保持所述第二下采样特征的特征维度和分辨率不变，得到第三多尺度特征；S26、将所述第三多尺度特征输入块合并层进行下采样，得到所述编码器输出图像。3.根据权利要求2所述的基于U型网络的多目标分割方法，其特征在于，所述块合并层中的执行步骤包括：将输入块连接在一起，使得图像的分辨率被下采样2倍，同时特征维度增加4倍，得到连接特征；利用线性层将所述连接特征的特征维度统一为所述输入块的原始特征维度的2倍，得到块合并层输出的下采样特征。4.根据权利要求2所述的基于U型网络的多目标分割方法，其特征在于，步骤S3包括：S31、将所述编码器输出图像输入到块扩展层进行上采样，得到第一上采样特征；S32、将所述第一上采样特征与所述第三多尺度特征输入到两个连续的上下文转换模块中进行融合，得到第一融合特征；S33、将所述第一融合特征输入到块扩展层进行上采样，得到第二上采样特征；S34、将所述第二上采样特征与所述第二多尺度特征输入到两个连续的上下文转换模块中进行融合，得到第二融合特征；S35、将所述第二融合特征输入到块扩展层进行上采样，得到第三上采样特征；S36、将所述第三上采样特征与所述第一多尺度特征输入到两个连续的上下文转换模块中进行融合，得到第三融合特征；S37、将所述第三融合特征输入到块扩展层进行上采样，得到所述解码器输出图像。5.根据权利要求4所述的基于U型网络的多目标分割方法，其特征在于，所述块扩展层中的执行步骤包括：利用线性层将输入特征的特征维度增加为原始特征维度的2倍；使用重新排列操作将所述输入特征的分辨率扩展为原始分辨率的2倍，并将所述输入2CN115082381A权利要求书2/2页