图像拼接方法及装置、存储介质及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113469880A(43)申请公布日2021.10.01(21)申请号202110597189.7(22)申请日2021.05.28(71)申请人北京迈格威科技有限公司地址100090北京市海淀区科学院南路2号融科资讯中心A座316-318(72)发明人范淼胡晨周舒畅黄哲威(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人唐正瑜(51)Int.Cl.G06T3/40(2006.01)权利要求书3页说明书23页附图4页(54)发明名称图像拼接方法及装置、存储介质及电子设备(57)摘要本申请涉及图像处理技术领域，提供一种图像拼接方法及装置、存储介质及电子设备。所述方法包括：获取第一图像和第二图像；根据第一图像和第二图像，计算得到第一中间光流和第二中间光流，第一中间光流为中间图像和第一图像之间的光流，第二中间光流为中间图像和第二图像之间的光流，中间图像为视角介于第一图像和第二图像之间的图像，第一中间光流的尺寸与第一图像的尺寸相同，第二中间光流的尺寸与第二图像的尺寸相同；根据第一中间光流、第二中间光流、第一图像和第二图像，计算得到第一图像和第二图像的拼接图像。上述图像拼接方法不需要通过复杂的迭代对多个单应性矩阵进行计算即可完成图像拼接，因此可以提高图像拼接的效率。CN113469880ACN113469880A权利要求书1/3页1.一种图像拼接方法，其特征在于，包括：获取第一图像和第二图像；根据所述第一图像和所述第二图像，计算得到第一中间光流和第二中间光流，所述第一中间光流为中间图像和所述第一图像之间的光流，所述第二中间光流为所述中间图像和所述第二图像之间的光流，所述中间图像为视角介于第一图像和第二图像之间的图像，所述第一中间光流的尺寸与所述第一图像的尺寸相同，所述第二中间光流的尺寸与所述第二图像的尺寸相同；根据所述第一中间光流、所述第二中间光流、所述第一图像和所述第二图像，计算得到所述第一图像和所述第二图像的拼接图像。2.根据权利要求1所述的图像拼接方法，其特征在于，所述根据所述第一图像和所述第二图像，计算得到第一中间光流和第二中间光流，包括：分别截取所述第一图像和所述第二图像中包含共同画面的图像区域，得到第一截图和第二截图；将所述第一截图和所述第二截图输入光流计算网络，得到第一截图光流和第二截图光流，所述第一截图光流为所述中间图像和所述第一截图之间的光流，所述第二截图光流为所述中间图像和所述第二截图之间的光流；将所述第一截图光流上采样至所述第一图像的尺寸，得到所述第一中间光流，以及，将所述第二截图光流上采样至所述第二图像的尺寸，得到所述第二中间光流。3.根据权利要求1或2所述的图像拼接方法，其特征在于，所述根据所述第一中间光流、所述第二中间光流、所述第一图像和所述第二图像，计算得到所述第一图像和所述第二图像的拼接图像，包括：根据所述第一中间光流和所述第一图像，映射得到第一中间图像，以及，根据所述第二中间光流和所述第二图像，映射得到第二中间图像；根据所述第一中间光流和所述第二中间光流，计算得到目标光流；根据所述目标光流和所述第一中间图像，映射得到第一拼接图像，以及，根据所述目标光流和所述第二中间图像，映射得到第二拼接图像；根据所述第一拼接图像和所述第二拼接图像，拼接得到所述拼接图像。4.根据权利要求3所述的图像拼接方法，其特征在于，所述根据所述第一中间光流和所述第二中间光流，计算得到目标光流，包括：根据所述第一中间光流和所述第二中间光流，插值计算至少一个过渡光流；根据所述第一中间光流、所述至少一个过渡光流以及所述第二中间光流，融合得到所述目标光流。5.根据权利要求4所述的图像拼接方法，其特征在于，所述根据所述第一中间光流和所述第二中间光流，插值计算至少一个过渡光流，包括：获取至少一个权重值；分别基于每个权重值，对所述第一中间光流和所述第二中间光流进行加权求和，得到所述至少一个过渡光流。6.根据权利要求5所述的图像拼接方法，其特征在于，所述权重值的大小与该权重值对应的过渡光流的视角位置相关。2CN113469880A权利要求书2/3页7.根据权利要求6所述的图像拼接方法，其特征在于，所述第一中间光流的加权系数和所述第二中间光流的加权系数之和为1，所述权重值为所述第一中间光流的加权系数，所述权重值的大小与该权重值对应的过渡光流的视角位置和所述第一中间光流的视角位置之间的接近程度正相关。8.根据权利要求5‑7中任一项所述的图像拼接方法，其特征在于，所述至少一个权重值在区间(0,1)内均匀分布。9.根据权利要求3‑8中任一项所述的方法，其特征在于，所述根据所述第一中间光流和所述第二中间光流，计算得到目标光流，包括：根据所述第一中间光流