一种基于视角的VR流媒体播放方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112188303A(43)申请公布日2021.01.05(21)申请号202010917754.9H04N13/122(2018.01)(22)申请日2020.09.03(71)申请人北京火眼目测科技有限公司地址100089北京市海淀区上地东路5号院3号楼7层705室(72)发明人洪钧(74)专利代理机构北京知呱呱知识产权代理有限公司11577代理人杜立军(51)Int.Cl.H04N21/81(2011.01)H04N21/845(2011.01)H04N21/44(2011.01)H04N19/597(2014.01)H04N19/30(2014.01)权利要求书2页说明书5页附图3页(54)发明名称一种基于视角的VR流媒体播放方法及装置(57)摘要本申请公开了一种基于视角的VR流媒体播放方法和装置，其中，所述方法包括：基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理；基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面；将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备。采用本申请所述的基于视角的VR流媒体播放方法，能够大大降低VR全景视频传输带宽，能在现行网络中快速投放VR全景视频，同时降低了用户端的解码规模要求，仅支持4K解码的VR设备能具备8K的VR全景视频的解码能力，在当前主流VR设备中即可获得更高质量的VR全景视频画面。CN112188303ACN112188303A权利要求书1/2页1.一种基于视角的VR流媒体播放方法，其特征在于，包括：基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理；基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面；将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备。2.根据权利要求1所述的基于视角的VR流媒体播放方法，其特征在于，所述基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理，包括：将VR全景视频画面切分不同视角的若干个视频画面，采用分层编码技术同时为VR全景视频画面转码出两层视频，所述两层视频中第一层视频为低分辨率的基本层视频，第二层视频为高分辨率的增强层视频，所述增强层视频为用户视区部分的清晰内容，所述基本层视频为用户视区之外部分的填充内容；将所述若干个视频画面拼接为一个完整的全向视频。3.根据权利要求1所述的基于视角的VR流媒体播放方法，其特征在于，所述基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面，包括：采用两层M3U8索引文件，第一层M3U8对视区参数进行扩展，第二层M3U8定义为与所述HLS协议相同；在用户观看时，通过所述第一层M3U8获取不同视区的二级M3U8文件列表，根据用户当前视区获取对应的二级M3U8文件，展示相应的目标视频画面。4.根据权利要求3所述的基于视角的VR流媒体播放方法，其特征在于，所述二级M3U8文件包括：视区内高分辨率的增强层视频内容和视区外低分辨率的基本层视频内容。5.根据权利要求1所述的基于视角的VR流媒体播放方法，其特征在于，所述将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备，包括：在用户端创建多个视频的解码器对视角切片进行解码，拼接各个视角切片视频，还原为全幅的视频画面，最后渲染到VR显示设备对应的球面上。6.一种基于视角的VR流媒体播放装置，其特征在于，包括：分层编码单元，基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理；协议扩展单元，基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面；拼接及渲染单元，用于将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备。7.根据权利要求6所述的基于视角的VR流媒体播放装置，其特征在于，所述分层编码单元用于：将VR全景视频画面切分不同视角的若干个视频画面，采用分层编码技术同时为VR全景视频画面转码出两层视频，所述两层视频中第一层视频为低分辨率的基本层视频，第二层视频为高分辨率的增强层视频，所述增强层视频为用户视区部分的清晰内容，所述基本层视频为用户视区之外部分的填充内容；将所述若干个视频画面拼接为一个完整的全向视频。2CN112188303A权利要求书2/2页8.根据权利要求6所述的基于视角的VR流媒体播放装置，其特征在于，所述协议扩展单元用于：采用两层M3U8索引文件，第一层M3U8对视区参数进行扩展，第二层M3U8定义为与所述HLS协议相同；