图像融合方法、装置、图像处理设备及存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115170450A(43)申请公布日2022.10.11(21)申请号202210772856.5(22)申请日2022.06.30(71)申请人中国第一汽车股份有限公司地址130011吉林省长春市汽车经济技术开发区新红旗大街1号(72)发明人张文娟丁冠源回姝黄嘉桐郭富琦郑彤王兆麟(74)专利代理机构北京远智汇知识产权代理有限公司11659专利代理师刘欣(51)Int.Cl.G06T5/50(2006.01)G06T5/00(2006.01)权利要求书2页说明书14页附图5页(54)发明名称图像融合方法、装置、图像处理设备及存储介质(57)摘要本发明公开了一种图像融合方法、装置、图像处理设备及存储介质。所述图像融合方法，包括：通过双边纹理滤波器将源图像分解为基础层和细节层，所述源图像包括红外图像和可见光图像；基于显著性检测算法将所述源图像的基础层进行融合，得到第一融合图像；基于视觉保真度将所述源图像的细节层进行融合，得到第二融合图像；将所述第一融合图像与所述第二融合图像融合，得到所述源图像的融合图像。上述技术方案通过显著性检测算法对源图像的基础层进行融合，通过视觉保真度对细节层进行融合，保留了源图像的对比度信息和纹理，同时避免伪边缘现象产生，提高了红外图像与可见光图像融合的清晰度。CN115170450ACN115170450A权利要求书1/2页1.一种图像融合方法，其特征在于，包括：通过双边纹理滤波器将源图像分解为基础层和细节层，所述源图像包括红外图像和可见光图像；基于显著性检测算法将所述源图像的基础层进行融合，得到第一融合图像；基于视觉保真度将所述源图像的细节层进行融合，得到第二融合图像；将所述第一融合图像与所述第二融合图像融合，得到所述源图像的融合图像。2.根据权利要求1所述的方法，其特征在于，基于显著性检测算法将所述源图像的基础层进行融合，得到第一融合图像，包括：提取所述红外图像的基础层的第一显著图以及所述可见光图像的基础层的第二显著图；比较所述第一显著图与所述第二显著图，得到第一决策图和第二决策图；根据所述红外图像的基础层、所述可见光图像的基础层、所述第一决策图和所述第二决策图生成所述第一融合图像。3.根据权利要求1所述的方法，其特征在于，基于视觉保真度将所述源图像的细节层进行融合，得到第二融合图像，包括：将所述红外图像的细节层以及所述可见光图像的细节层对应分解为多个图像块，所述红外图像的细节层的每个图像块与对应的所述可见光图像的细节层图像块作为一个图像块组；计算各所述图像块组的视觉保真度；根据各所述图像块组的视觉保真度以及视觉保真度阈值，确定第一类视觉保真度对应的第一权重图以及第二类视觉保真度对应的第二权重图，其中，所述第一类视觉保真度高于第二类视觉保真度；根据所述第一类视觉保真度对应的第一类视觉保真度纹理、所述第二类视觉保真度对应的第二类视觉保真度纹理、所述第一权重图以及所述第二权重图生成所述第二融合图像。其中，所述第一类视觉保真度纹理对应于所述红外图像的细节层和所述可见光图像的细节层，所述第二类视觉保真度纹理对应于所述红外图像的细节层和所述可见光图像的细节层。4.根据权利要求3所述的方法，其特征在于，在计算各所述图像块组的视觉保真度之前，还包括：对各所述图像块组进行高斯金字塔变换。5.根据权利要求3所述的方法，其特征在于，还包括：基于显著性估计确定所述第一类视觉保真度对应的第一类视觉保真度纹理；基于引导滤波确定所述第二类视觉保真度对应的第二类视觉保真度纹理。6.根据权利要求5所述的方法，其特征在于，基于显著性估计确定所述第一类视觉保真度对应的第一类视觉保真度纹理，包括：根据元素一致性和元素分配的正则化结果确定所述第一类视觉保真度的图像块组中每个元素的显著性估计值；比较各所述元素的显著性估计值，得到所述第一类视觉保真度对应的第一类视觉保真2CN115170450A权利要求书2/2页度纹理。7.根据权利要求5所述的方法，其特征在于，基于引导滤波确定所述第二类视觉保真度对应的第二类视觉保真度纹理，包括：根据所述第二类视觉保真度的图像块组对应的所述红外图像的细节层与所述可见光图像的细节层的比较结果，确定所述第二类视觉保真度的初始决策图；根据滤波尺度和模糊程度对所述初始决策图和所述可见光图像进行引导滤波，得到所述第二类视觉保真度对应的第二类视觉保真度纹理。8.一种图像融合装置，其特征在于，包括：源图像分解模块，用于通过双边纹理滤波器将源图像分解为基础层和细节层，所述源图像包括红外图像和可见光图像；基础层融合模块，用于基于显著性检测算法将所述源图像的基础层进行融合，得到第一融合图像；细节层融合模块，用于基于视觉保真度将所述源图像的细节层进行融合，得到第二融合