基于频域变换的视频流车身全景图像拼接装置和方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112132751A(43)申请公布日2020.12.25(21)申请号202011040988.6(22)申请日2020.09.28(71)申请人广西信路威科技发展有限公司地址530000广西壮族自治区南宁市总部路3号中国-东盟科技企业孵化基地二期1号厂房第三层(72)发明人胡中华廖原覃立源陈炫憧(74)专利代理机构北京汇信合知识产权代理有限公司11335代理人朱鹏(51)Int.Cl.G06T3/40(2006.01)G06T5/00(2006.01)G06T5/10(2006.01)G06T7/194(2017.01)权利要求书2页说明书5页附图2页(54)发明名称基于频域变换的视频流车身全景图像拼接装置和方法(57)摘要本发明公开了一种基于频域变换的视频流车身全景图像拼接装置和方法，图像拼接装置中，图像采集单元以图像采集方向垂直于车道方向设置，图像采集单元对车侧图像进行采集；频域变换单元对车侧图像进行频域变换得到频谱图；预处理单元对频谱图进行频域滤波和频域逆变换，得到预处理图像；前景背景分离单元对预处理图像进行前景图像与背景图像的分离，得到前景图像；图像拼接单元确定前景图像相对于前景匹配模板的匹配信息，并根据匹配信息对前景图像中模板区域至图像末端进行拼接处理，形成拼接图像。通过本发明的技术方案，简化了成像物特征，减少了噪声干扰的同时保留纹理特征，且识别结果不受背景影响，提高了图像拼接的准确性。CN112132751ACN112132751A权利要求书1/2页1.一种基于频域变换的视频流车身全景图像拼接装置，其特征在于，包括：图像采集单元、频域变换单元、预处理单元、前景背景分离单元和图像拼接单元；所述图像采集单元以图像采集方向垂直于车道方向设置，所述图像采集单元对车道上行驶车辆的车侧图像进行采集；所述频域变换单元对所述图像采集单元采集的所述车侧图像进行频域变换得到频谱图；所述预处理单元对所述频谱图进行频域滤波和频域逆变换，得到预处理图像；所述前景背景分离单元对所述预处理图像利用背景模型进行前景图像与背景图像的分离，得到前景图像；所述图像拼接单元利用前景匹配模板确定所述前景图像相对于所述前景匹配模板的匹配信息，并根据匹配信息对所述前景图像中模板区域至图像末端进行拼接处理，形成拼接图像。2.根据权利要求1所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，所述预处理单元将所述频谱图的预设频域范围的频域分量进行过滤，并对所述频谱图进行傅里叶逆变换，得到预处理图像。3.根据权利要求1所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，所述前景背景分离单元判断存储单元中是否存在背景模型，若不存在，则根据多幅预处理图像分析背景区域，根据背景区域建立背景模型，若已存在所述背景模型，则根据所述背景模型，将所述预处理图像中对应所述背景模型的背景区域进行分离，得到所述前景图像。4.根据权利要求1所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，所述图像拼接单元判断存储单元中是否存在前景匹配模板，若不存在，则将当前帧的所述前景图像作为前景匹配模板，并将当前帧作为拼接图像的起始帧，若已存在所述前景匹配模板，则将所述前景图像与所述前景匹配模板进行匹配处理，计算得到当前帧的所述前景图像中相对于所述前景匹配模板区域的匹配坐标，作为匹配信息。5.根据权利要求4所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，所述图像拼接单元根据所述匹配信息，计算并截取当前帧的预处理图像与所述前景匹配模板的匹配坐标起至图像尾部图像，拷贝至所述拼接图像中所述前景匹配模板区域坐标的起始位置。6.根据权利要求5所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，所述图像拼接单元对当前帧的前景图像进行图像拼接后，以当前的拼接图像作为新的前景匹配模板，对下一帧的前景图像进行图像拼接处理，直至输出完整车身侧面全景图像。7.一种基于频域变换的视频流车身全景图像拼接方法，应用于权利要求1至6中任一项所述的基于频域变换的视频流车身全景图像拼接装置，其特征在于，包括：利用图像采集单元采集行驶车辆的车侧视频流图像，并获得当前帧图像的频谱图；对当前帧图像的频谱图进行频域滤波和频域逆变换，得到预处理图像；对所述预处理图像利用背景模型进行前景图像与背景图像的分离，得到当前帧的车辆前景图像；利用前景匹配模板确定所述前景图像相对于所述前景匹配模板的匹配信息，并根据匹配信息对所述前景图像中模板区域至图像末端进行拼接处理，形成拼接图像。2CN112132751A权利要求书2/2页8.根据权利要求7所述的基于频域变换的视频流车身全景图像拼接方法，其特征在于，还包括：对当前帧的前景图像进行