双目可见光及红外热成像复合成像系统、方法及介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109410159A(43)申请公布日2019.03.01(21)申请号201811056589.1(22)申请日2018.09.11(71)申请人上海创客科技有限公司地址201102上海市闵行区平阳路258号一层H1142室(72)发明人傅德銄蔡力(74)专利代理机构上海段和段律师事务所31334代理人李佳俊郭国中(51)Int.Cl.G06T5/50(2006.01)G06T7/33(2017.01)权利要求书3页说明书9页附图1页(54)发明名称双目可见光及红外热成像复合成像系统、方法及介质(57)摘要本发明提供了一种双目可见光及红外热成像复合成像系统、方法及介质，包括：热成像模块：利用光学器件将场景中的物体发出的红外能量聚焦在红外探测器上，然后来自于每个红外探测器的红外数据转换成预设的图片格式，得到原始红外图像；可见光成像模块：通过摄像头采集原始可见光图像；ARM系统模块：对所述原始红外图像进行预处理，获得预处理后的红外图像。本发明相对于传统的红外仪，本发明使用的图像融合算法能去除红外图像中多数冗余信息，将剩余的目标等轮廓信息与可见光图像进行图像融合，使得融合后的图像不但具有良好的目标与背景特性，能提供丰富背景信息，同时也增强了重要的目标信息。CN109410159ACN109410159A权利要求书1/3页1.一种双目可见光及红外热成像复合成像系统，其特征在于，包括：热成像模块：利用光学器件将场景中的物体发出的红外能量聚焦在红外探测器上，然后来自于每个红外探测器的红外数据转换成预设的图片格式，得到原始红外图像；可见光成像模块：通过摄像头采集原始可见光图像；ARM系统模块：对所述原始红外图像进行预处理，获得预处理后的红外图像；图像处理模块：根据所述预处理后的红外图像，进行融合，得到彩色图像。2.根据权利要求1所述的双目可见光及红外热成像复合成像系统，其特征在于，所述图像处理模块，包括：红外图像增强模块：对预处理后的红外图像进行图像增强，获得增强后的红外图像；尺寸变换模块：将原始可见光图像、增强后的红外图像设置成相同的尺寸大小，获得尺寸变换后的可见光图像、尺寸变换后的红外图像；图像配准模块：对尺寸变换后的可见光图像、尺寸变换后的红外图像进行图像配准，获得配准后可见光图像、配准后红外图像；图像融合模块：对配准后可见光图像、配准后红外图像进行图像融合，获得融合后的图像；图像伪彩色处理模块：对融合后的图像进行伪彩色处理，获得伪彩色处理后的彩色图像。3.根据权利要求1所述的双目可见光及红外热成像复合成像系统，其特征在于，还包括：智能移动终端应用软件模块：对伪彩色处理后的彩色图像的指定区域或点，进行温度分析处理，获得热成像数据信息；ARM系统模块：记录热成像数据信息的时空定位信息，上传伪彩色处理后的彩色图像、热成像数据信息、时空定位信息。4.根据权利要求3所述的双目可见光及红外热成像复合成像系统，其特征在于，所述原始可见光图像包括：RGB图像；所述对原始红外热成像图像进行预处理包括：非均匀校正、盲元补偿、中值滤波中的任一种或任多种处理；所述温度分析处理包括：伪彩色处理后的彩色图像的指定区域或点的温度标识、记忆、比较、分析中的任一种或任多种处理；所述温度标识包括：将摄取的域点温度标注在融合后的图像上；所述时空定位信息包括：热成像数据分别对应的位置信息、时间信息、地点信息中的任一种或任多种信息；所述ARM系统模块还包括：GPS定位模块、WIFI无线通信模块、4G通信模块、BT通信模块中的任一种或任多种模块。5.根据权利要求2所述的双目可见光及红外热成像复合成像系统，其特征在于，所述图像融合模块包括：细节图像提取模块：提取配准后可见光图像的细节图像；所述细节图像包括：图片分别在不同比例、方向和角度下的线条、形状、边缘；底层图像获取模块：对配准后红外图像进行拉普拉斯金字塔多尺度分解，获得配准后2CN109410159A权利要求书2/3页红外图像的拉普拉斯金字塔的底层图像；初步融合模块：将配准后红外图像的拉普拉斯金字塔的底层图像与配准后可见光图像的细节图像进行融合，获得初步融合图像；重构融合模块：重构初步融合图像，获得融合后的图像；所述拉普拉斯金字塔多尺度分解包括：将配准后红外图像分解为多尺度金字塔图像序列，从底层图像开始向上层方向，依次执行操作，形成一个金字塔形的图像数据结构；其中，所述操作包括：针对本层图像与本层图像的上一层图像这两者，将所述两者中较低分辨率的图像设置在上层，较高分辨率的图像设置在下层，上层图像的大小为下一层图像大小的1/4；所述底层图像指：原始图像减去其上一层图像经过内插放大后的图像，得到的差值图像；所述重构融合模块：从其顶层开始逐层从上至下