图像拼接方法、装置、存储介质及电子装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113962864A(43)申请公布日2022.01.21(21)申请号202111343077.5(22)申请日2021.11.12(71)申请人上海闪马智能科技有限公司地址200210上海市浦东新区自由贸易试验区临港新片区环湖西二路888号C楼申请人杭州闪马智擎科技有限公司(72)发明人彭垚宋庆龙林亦宁(74)专利代理机构北京康信知识产权代理有限责任公司11240代理人张丹红(51)Int.Cl.G06T3/40(2006.01)G06N3/04(2006.01)权利要求书2页说明书9页附图3页(54)发明名称图像拼接方法、装置、存储介质及电子装置(57)摘要本发明实施例提供了一种图像拼接方法、装置、存储介质及电子装置，其中，该方法包括：获取待拼接的图像帧序列，其中，图像帧序列中包括对处于移动状态的目标对象进行连续拍摄所得到的一组图像帧；确定图像帧序列的像素位移向量，其中，像素位移向量中包括图像帧序列中的任两个相邻图像帧之间的像素位移；基于像素位移向量按照任两个相邻图像帧对应的权重对图像帧序列进行拼接，以得到目标图像。通过本发明，解决了相关技术中存在的图像拼接精度较差的问题，进而达到了提高图像拼接的精度的效果。CN113962864ACN113962864A权利要求书1/2页1.一种图像拼接方法，其特征在于，包括：获取待拼接的图像帧序列，其中，所述图像帧序列中包括对处于移动状态的目标对象进行连续拍摄所得到的一组图像帧；确定所述图像帧序列的像素位移向量，其中，所述像素位移向量中包括所述图像帧序列中的任两个相邻图像帧之间的像素位移；基于所述像素位移向量按照任两个相邻图像帧对应的权重对所述图像帧序列进行拼接，以得到目标图像。2.根据权利要求1所述的方法，其特征在于，确定所述图像帧序列的像素位移向量包括：利用目标神经网络的卷积层提取所述图像帧序列的第一特征向量图；利用所述目标神经网络的池化层对所述第一特征向量图进行池化处理，以得到第二特征向量图；利用所述目标神经网络的全连接层对所述第二特征向量图进行处理，以得到所述像素位移向量。3.根据权利要求1所述的方法，其特征在于，基于所述像素位移向量按照任两个相邻图像帧对应的权重对所述图像帧序列进行拼接，以得到目标图像包括：针对所述像素位移向量中包括的每一个目标像素位移，均执行以下操作：基于所述目标像素位移对所述图像帧序列中所包括的前后相邻的第一图像帧和第二图像帧按照所述第一图像帧和所述第二图像帧分别对应的权重进行拼接，以得到目标子图像，其中，所述目标像素位移用于指示所述第一图像帧和所述第二图像帧之间的像素位移；基于所述目标子图像确定出所述目标图像。4.根据权利要求3所述的方法，其特征在于，基于所述目标像素位移对所述图像帧序列中所包括的前后相邻的第一图像帧和第二图像帧按照所述第一图像帧和所述第二图像帧分别对应的权重进行拼接，以得到目标子图像包括：基于所述目标像素位移从所述第一图像帧中获取第一子图像，以及，基于所述目标像素位移从所述第二图像帧中获取第二子图像；通过按照所述第一图像帧和所述第二图像帧分别对应的权重融合所述第一子图像和所述第二子图像的方式将所述第一图像帧和所述第二图像帧进行拼接，以得到所述目标子图像。5.根据权利要求4所述的方法，其特征在于，基于所述目标像素位移从所述第一图像帧中获取第一子图像包括：从所述第一图像帧的第一预设区域内截取所述目标像素位移所指示的宽度的图像，以得到所述第一子图像；基于所述目标像素位移从所述第二图像帧中获取第二子图像包括：从所述第二图像帧的第二预设区域内截取所述目标像素位移所指示的宽度的图像，以得到所述第二子图像。6.根据权利要求4所述的方法，其特征在于，通过按照所述第一图像帧和所述第二图像帧分别对应的权重融合所述第一子图像和所述第二子图像的方式将所述第一图像帧和所述第二图像帧进行拼接包括：通过按照如下公式融合所述第一子图像和所述第二子图像的方式将所述第一图像帧和所述第二图像帧进行拼接：2CN113962864A权利要求书2/2页P＝X1*P1+X2*P2，X1+X2＝1，其中，P表示所述目标子图像，P1、P2分别表示所述第一子图像中包括的多列像素、所述第二子图像中包括的多列像素，X1、X2分别表示P1、P2的每列像素的权重系数。7.根据权利要求6所述的方法，其特征在于，所述X1按如下公式进行确定：X1＝1/(1+exp(‑kx))；其中，k为超参数，x表示所述目标子图像的各列序号。8.一种图像拼接装置，其特征在于，包括：获取模块，用于获取待拼接的图像帧序列，其中，所述图像帧序列中包括对处于移动状态的目标对象进行连续拍摄所得到的一组图像帧；确定模块，用于确定所述图像帧序列的像素位