全景场景切换的方法、装置及电子设备.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116152409A(43)申请公布日2023.05.23(21)申请号202211348398.9(22)申请日2022.10.31(71)申请人北京百度网讯科技有限公司地址100085北京市海淀区上地十街10号百度大厦二层(72)发明人董浩孙昊曲达赵涛涛(74)专利代理机构北京清亦华知识产权代理事务所(普通合伙)11201专利代理师张润(51)Int.Cl.G06T15/00(2011.01)权利要求书3页说明书12页附图5页(54)发明名称全景场景切换的方法、装置及电子设备(57)摘要本公开提供了一种全景场景切换的方法、装置及电子设备，涉及人工智能技术领域，具体为增强现实、虚拟现实、计算机视觉、深度学习等技术领域，可应用于元宇宙、智慧城市等场景。具体方案为：生成当前场景的第一深度图和目标场景的第二深度图；根据第一深度图确定第一全景球模型中顶点的坐标，根据第二深度图确定第二深度图中顶点的坐标；获取视点和对应的可视区域以确定目标顶点，对第一全景球模型和第二全景球模型进行渲染；将视点向目标方向移动，并调整第一全景球模型和第二全景球模型的状态。本公开根据深度信息对全景球模型进行渲染，以实现从当前场景切换到目标场景的效果。本公开实施例可以根据深度信息使切换过程更真实，提高展示效果。CN116152409ACN116152409A权利要求书1/3页1.一种全景场景切换的方法，包括：获取当前场景和目标场景的全景图数据中各个像素的深度信息，以生成当前场景对应的第一深度图和目标场景对应的第二深度图，其中，所述全景图数据包含多个瓦片图；创建当前场景对应的第一全景球模型和目标场景对应的第二全景球模型，根据所述第一深度图确定所述第一全景球模型中顶点的坐标，并根据所述第二深度图确定所述第二深度图中顶点的坐标；获取视点和对应的可视区域，并将所述可视区域内第一全景球模型和第二全景球模型的顶点确定为目标顶点，根据所述目标顶点对应的瓦片图对所述第一全景球模型和第二全景球模型进行渲染；响应于场景切换指令，将所述视点向目标方向移动，并调整所述第一全景球模型和第二全景球模型的状态，以展示所述目标场景。2.根据权利要求1所述的方法，其中，所述根据所述第一深度图确定所述第一全景球模型中顶点的坐标，包括：获取所述第一全景球模型中顶点在所述第一深度图中对应的第一映射点，根据所述第一映射点的深度信息调整所述顶点的坐标。3.根据权利要求1所述的方法，其中，所述根据所述第二深度图确定所述第二深度图中顶点的坐标，包括：获取所述第二全景球模型中顶点在所述第二深度图中对应的第二映射点，根据所述第二映射点的深度信息调整所述顶点的坐标。4.根据权利要求1所述的方法，其中，所述获取视点和对应的可视区域，包括：确定所述视点的坐标和可视方向，以所述视点为起点，沿所述可视方向做射线；确定所述射线与所述第一全景球模型或第二全景球模型相交的区域为所述可视区域。5.根据权利要求1所述的方法，其中，所述根据所述目标顶点对应的瓦片图对所述第一全景球模型和第二全景球模型进行渲染，包括：加载所述瓦片图到缓存空间中，其中，所述瓦片图包括第一瓦片图和第二瓦片图，所述第一瓦片图的分辨率小于所述第二瓦片图；获取所述第一瓦片图和第二瓦片图的瓦片图顶点坐标；根据所述目标顶点从所述瓦片图顶点中确定目标瓦片图顶点；根据所述目标瓦片图顶点对应的瓦片图渲染所述第一全景球模型和第二全景球模型。6.根据权利要求5所述的方法，其中，所述根据所述目标顶点从所述瓦片图顶点中确定目标瓦片图顶点，包括：获取所述目标顶点与所述瓦片图顶点的映射关系表，根据所述映射关系表将与所述目标顶点对应的瓦片图顶点确定为所述目标瓦片图顶点。7.根据权利要求5所述的方法，其中，所述根据所述目标瓦片图顶点对应的瓦片图渲染所述第一全景球模型和第二全景球模型，包括：响应于所述缓存空间中包含所述目标瓦片图顶点对应的第二瓦片图，根据所述第二瓦片图对所述目标顶点进行渲染；响应于所述缓存空间中不包含所述目标瓦片图顶点对应的第二瓦片图，且包含所述目标瓦片图顶点对应的第一瓦片图，根据所述目标瓦片图顶点对应的第一瓦片图对所述目标2CN116152409A权利要求书2/3页顶点进行渲染。8.根据权利要求5所述的方法，其中，所述方法包括：响应于所述缓存空间中不包含所述目标瓦片图顶点对应的第二瓦片图和第一瓦片图，将所述第一瓦片图加载到所述缓存空间中，并根据所述目标瓦片图顶点对应的第一瓦片图对所述目标顶点进行渲染。9.根据权利要求1所述的方法，其中，所述将所述视点向目标方向移动，并调整所述第一全景球模型和第二全景球模型的状态，包括：将所述第一全景球模型由不透明状态转变为透明状态，并保持所述第二全景球为不透明状态，根据所述视