图像融合方法、装置及计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111738969A(43)申请公布日2020.10.02(21)申请号202010567705.7(22)申请日2020.06.19(71)申请人无锡英菲感知技术有限公司地址214028江苏省无锡市新吴区菱湖大道200号中国传感网国际创新园A502(72)发明人李聪科杨思雨(74)专利代理机构北京集佳知识产权代理有限公司11227代理人刘新雷(51)Int.Cl.G06T5/50(2006.01)权利要求书2页说明书10页附图4页(54)发明名称图像融合方法、装置及计算机可读存储介质(57)摘要本申请公开了一种图像融合方法、装置及计算机可读存储介质。其中，方法包括基于红外相机和可见光相机的相对几何位置关系确定拍摄同一目标、且图像宽高比值相同的红外图像和可见光图像的坐标映射关系；根据像素融合需求调用包括不同图像中满足坐标映射关系的像素点和同一张图像中满足位置关系的像素点的像素排布模板，按照周期排布格式将像素排布模板填充至空白融合图像，将红外图像和可见光图像中满足位置选择条件的目标像素点对应填充至各像素排布模板的相应位置处以得到可见光图像和红外图像的所有像素点均有分布的融合图像，在充分保留可见光图像和红外图像的所有有效信息且不引入额外人造信息的前提下实现两者的图像融合。CN111738969ACN111738969A权利要求书1/2页1.一种图像融合方法，其特征在于，包括：基于红外相机和可见光相机的相对几何位置关系确定拍摄同一目标、且图像宽高比值相同的红外图像和可见光图像的坐标映射关系；根据像素融合需求调用所需像素排布模板，并按照周期排布格式将各像素排布模板填充至空白融合图像相应位置处；所述周期排布格式根据所述像素融合需求、所述红外图像和所述可见光图像的分辨率值确定；所述像素排布模板中待填充像素点包括不同图像中满足坐标映射关系的像素点和同一张图像中满足位置关系的像素点；对每个像素排布模板，将所述红外图像和所述可见光图像中满足位置选择条件的目标像素点对应填充至所述当前像素排布模板的相应位置处，得到融合图像；所述位置选择条件基于所述当前像素排布模板所处所述空白融合图像的位置和所述像素排布模板的像素布局格式确定，以使所述可见光图像和所述红外图像的所有像素点均分布在所述融合图像中。2.根据权利要求1所述的图像融合方法，其特征在于，所述像素融合需求为将高分辨率图像的像素点融合至低分辨率图像的像素点中，所述像素排布模板中包括按照所述像素布局格式分布的第一类像素点、第二类像素点和第三类像素点；所述第一类像素点为低分辨率图像中的同一个像素点，所述第二类像素点为所述第一类像素点基于所述坐标映射关系在高分辨率图像中确定的像素点，所述第三类像素点为所述高分辨图像中位于所述第二类像素点邻近区域的像素点；所述第一类像素点随着所述像素排布模板在所述空白融合图像的位置不同而不同。3.根据权利要求2所述的图像融合方法，其特征在于，所述当前像素排布模板位于所述空白融合图像的第i行第j列，所述将所述红外图像和所述可见光图像中满足位置选择条件的目标像素点对应填充至所述当前像素排布模板的相应位置处，得到融合图像包括：对所述当前像素排布模板，将所述低分辨率图像的第i行第j列的像素点作为所述第一类像素点填充至所述第一类像素点位于所述当前像素排布模板的位置处；基于所述坐标映射关系确定所述第一类像素点在所述高分辨率图像中对应像素点的目标坐标位置第m行第n列，并将所述目标坐标位置的像素点作为所述第二类像素点填充至所述第二类像素点位于所述当前像素排布模板的位置处；将所述高分辨率图像中第m±Δ1行、第n±Δ2列的像素点作为所述第三类像素点填充至所述第三类像素点位于所述当前像素排布模板的位置处；Δ1＝1,2,3,…，Δ2＝1,2,3,…。4.根据权利要求3所述的图像融合方法，其特征在于，所述基于所述坐标映射关系确定所述第一类像素点在所述高分辨率图像中对应像素点的目标坐标位置包括：基于所述坐标映射关系确定所述第一类像素点在所述高分辨率图像中对应像素点的目标坐标位置；若所述目标坐标位置的数值不为整数，则向下取整得到整数，将整数对应的坐标位置作为目标坐标位置。5.根据权利要求1所述的图像融合方法，其特征在于，所述像素排布模板中包含的像素点个数根据所述可见光图像和所述红外图像的分辨率比值确定，且所述像素排布模板的高宽比与所述可见光图像的高宽比相同。2CN111738969A权利要求书2/2页6.根据权利要求1至5任意一项所述的图像融合方法，其特征在于，所述像素融合需求为将高分辨率图像的像素点融合至低分辨率图像的像素点中，所述低分辨率图像的分辨率为w2*h2，所述按照周期排布格式将各像素排布模板填充至空白融合图像相应