重建图像的方法、装置、计算机可读存储介质和处理器.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114092315A(43)申请公布日2022.02.25(21)申请号202010857911.1(22)申请日2020.08.24(71)申请人阿里巴巴集团控股有限公司地址英属开曼群岛大开曼资本大厦一座四层847号邮箱(72)发明人盛骁杰(74)专利代理机构北京博浩百睿知识产权代理有限责任公司11134代理人谢湘宁张文华(51)Int.Cl.G06T3/00(2006.01)G06T3/40(2006.01)权利要求书3页说明书22页附图8页(54)发明名称重建图像的方法、装置、计算机可读存储介质和处理器(57)摘要本发明公开了一种重建图像的方法、装置、计算机可读存储介质和处理器。其中，该方法包括：检测到操作界面上发生交互操作，获取虚拟视点在操作界面上发生位移后的目标位置；控制虚拟视点从目标位置过渡到预定位置，其中，预定位置为与虚拟视点的空间自由度位置重合的相机位置；使用图像变形模型处理虚拟视点位于预定位置上的图像，获取重建图像。本发明解决了在虚拟视点重建图像时的时效性差的技术问题。CN114092315ACN114092315A权利要求书1/3页1.一种重建图像的方法，包括：检测到操作界面上发生交互操作，获取虚拟视点在所述操作界面上发生位移后的目标位置；控制所述虚拟视点从所述目标位置过渡到预定位置，其中，所述预定位置为与所述虚拟视点的空间自由度位置重合的相机位置；使用图像变形模型处理所述虚拟视点位于所述预定位置上的图像，获取重建图像。2.根据权利要求1所述的方法，其中，如果检测到所述目标位置处的交互操作中断，则启动执行所述虚拟视点从所述目标位置过渡到所述预定位置的过渡操作。3.根据权利要求1所述的方法，其中，在控制所述虚拟视点从所述目标位置过渡到预定位置的过程中，所述方法还包括：使用DIBR虚拟视点插值算法，生成过渡图像帧的插值；基于所述过渡图像帧的插值，来重建过渡过程中的图像。4.根据权利要求3所述的方法，其中，在控制所述虚拟视点从所述目标位置过渡到预定位置之后，调用Warping图像变形算法，切换为使用所述图像变形模型来进行图像重建。5.根据权利要求1至4中任意一项所述的方法，其中，使用图像变形模型处理虚拟视点位于所述预定位置上的图像，包括：基于所述虚拟视点所处的预定位置，从所述相机上读取到对应的图像；根据所述虚拟视点所在的空间坐标系上的旋转自由度，使用所述图像变形模型来处理所述读取到的图像。6.根据权利要求5所述的方法，其中，所述空间自由度为所述虚拟视点位于所述空间坐标系上的坐标值，所述旋转自由度为围绕所述空间坐标系的坐标轴旋转的自由度。7.根据权利要求1所述的方法，其中，在控制所述虚拟视点从所述目标位置过渡到预定位置之前，所述方法还包括：获取所述虚拟视点当前所在的所述目标位置与所述预定位置之间的间距；如果所述间距超过阈值，则控制所述虚拟视点按照预设的相机优先级，从所述目标位置移动到优先级最高的相机所在的视点位置；如果所述间距未超过所述阈值，则执行所述虚拟视点从所述目标位置过渡到预定位置的步骤。8.根据权利要求1所述的方法，其中，在检测到操作界面上发生交互操作之后，所述方法还包括：弹出用于指示至少一个选择控件的提示信息；通过触发任意一个选择控件，选择所述重建图像的显示分辨率。9.一种重建图像的方法，包括：在直播过程中，检测到直播画面上接收到移动操作；获取虚拟视点在所述直播画面上发生位移后的目标位置；控制所述虚拟视点从所述目标位置移动到预定位置，其中，所述预定位置为与所述虚拟视点的空间自由度位置重合的相机位置；使用图像变形模型处理所述虚拟视点位于所述预定位置上的图像，获取重建图像。10.一种重建图像的方法，其中，包括：2CN114092315A权利要求书2/3页检测到操作界面上发生控制虚拟视点从第一位置移动到第二位置的交互操作；控制所述虚拟视点从所述第二位置过渡到第三位置，其中，所述第三位置为部署有相机的真实视点的位置；读取位于所述第三位置的相机的图像；使用基于平面的图像变形模型处理所述图像，获取重建图像。11.根据权利要求10所述的方法，其中，选择距离所述第二位置最近的真实视点位置作为所述第三位置。12.一种重建图像的方法，其中，包括：感应到操作对象在操作界面上的交互操作；响应所述交互操作，显示虚拟视点基于所述交互操作在所述操作界面上发生的位移，其中，所述位移为从第一位置移动到第二位置；显示所述虚拟视点从所述第二位置过渡到第三位置，其中，所述第三位置为部署有相机的真实视点的位置；显示使用基于平面的图像变形模型处理目标图像而生成的重建图像，其中，所述目标图像为位于所述第三位置的相机捕获的图像。13.一种重建图像的方法，其中，包括：感应操作对