沉浸式直播的信息显示方法及系统、信息推送方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114401414A(43)申请公布日2022.04.26(21)申请号202111619865.2G06T19/00(2011.01)(22)申请日2021.12.27(71)申请人北京达佳互联信息技术有限公司地址100089北京市海淀区上地西路6号1幢1层101D1-7(72)发明人刘海伟郭小燕(74)专利代理机构北京康信知识产权代理有限责任公司11240代理人黄海英(51)Int.Cl.H04N21/2187(2011.01)H04N21/2343(2011.01)H04N21/431(2011.01)H04N21/4402(2011.01)G06F3/01(2006.01)权利要求书2页说明书18页附图4页(54)发明名称沉浸式直播的信息显示方法及系统、信息推送方法(57)摘要本公开关于一种沉浸式直播的信息显示方法及系统、信息推送方法，在进入预设沉浸式直播模式时，直播设备基于当前直播位置的位置数据以及全局真实场景的地图数据，将虚实融合数据渲染的立体图像投射至直播设备的显示模块上，以显示虚实融合图像；云服务器，基于主播用户对于局部虚拟场景的交互数据，将局部虚拟场景与直播设备采集的眼位视频数据进行合成处理，得到虚实融合数据；虚拟现实设备，接收虚实融合数据，对虚实融合数据中的眼位图像进行变形处理，得到对应于虚拟现实设备的视角图像；将视角图像分别投射至虚拟现实设备中每个眼位所处的眼位区域，显示三维虚实图像。CN114401414ACN114401414A权利要求书1/2页1.一种沉浸式直播的信息显示方法，其特征在于，包括：在进入预设沉浸式直播模式的情况下，获取当前直播位置的位置数据以及全局真实场景的地图数据；基于所述位置数据和所述地图数据，将虚实融合数据渲染的立体图像投射至直播设备的显示模块上，以显示虚实融合图像，其中，所述虚实融合数据中至少包含：所述直播设备拍摄的局部真实场景以及与所述局部真实场景对应的局部虚拟场景，所述局部真实场景为所述全局真实场景中的部分区域场景。2.根据权利要求1所述的信息显示方法，其特征在于，所述获取当前直播位置的位置数据以及全局真实场景的地图数据，包括：在所述预设沉浸式直播模式下，控制所述直播设备读取所述当前直播位置的位置数据；获取所述直播设备当前所处位置的世界坐标系；基于所述直播设备当前所处位置的世界坐标系，确定所述全局真实场景的世界坐标系，并以全局真实场景的世界坐标系表征所述全局真实场景的地图数据。3.根据权利要求2所述的信息显示方法，其特征在于，在获取当前直播位置的位置数据以及全局真实场景的地图数据之前，还包括：对所述当前直播位置所处的空间区域进行雷达扫描，得到雷达扫描数据；采集当前直播位置的空间图像，并确定采集图像时的时间数据；基于所述空间图像、采集图像时的时间数据以及所述雷达扫描数据，构建三维空间模型；基于所述三维空间模型以及所述当前直播位置所处的空间区域的区域地图数据，构建全局虚拟场景，其中，所述全局虚拟场景中的场景结构与所述全局真实场景的场景结构一一对应。4.一种沉浸式直播的信息推送方法，其特征在于，应用于云服务器，包括：接收直播设备传输的眼位视频数据和主播用户对于局部虚拟场景的交互数据，其中，所述眼位视频数据为所述直播设备采集主播用户当前所处的直播位置的视频数据；基于所述交互数据，将所述局部虚拟场景与所述眼位视频数据进行合成处理，得到虚实融合数据；将所述虚实融合数据推送至虚拟现实设备。5.一种沉浸式直播的信息显示方法，其特征在于，应用于虚拟现实设备，包括：接收虚实融合数据，其中，所述虚实融合数据中至少包括：直播设备采集的眼位视频数据和直播设备拍摄的局部真实场景以及与所述局部真实场景对应的局部虚拟场景，所述眼位视频数据包括连续帧眼位图像；对所述虚实融合数据中的眼位图像进行变形处理，得到对应于虚拟现实设备的视角图像；将所述视角图像分别投射至所述虚拟现实设备中每个眼位所处的眼位区域，显示三维虚实图像。6.一种沉浸式直播的方法，其特征在于，包括：在进入预设沉浸式直播模式时，直播设备基于当前直播位置的位置数据以及全局真实2CN114401414A权利要求书2/2页场景的地图数据，将虚实融合数据渲染的立体图像投射至直播设备的显示模块上，以显示虚实融合图像，其中，所述虚实融合数据中至少包含：所述直播设备拍摄的局部真实场景以及与所述局部真实场景对应的局部虚拟场景；云服务器，基于主播用户对于局部虚拟场景的交互数据，将所述局部虚拟场景与所述直播设备采集的眼位视频数据进行合成处理，得到虚实融合数据；虚拟现实设备，接收所述虚实融合数据，对所述虚实融合数据中的眼位图像进行变形处理，得到对应于虚拟现实设备的视角图像；将所述视角图像分别