用于生成和渲染沉浸式视频内容的方法、系统和介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110710203A(43)申请公布日2020.01.17(21)申请号201880037196.8(74)专利代理机构中原信达知识产权代理有限责任公司1(22)申请日2018.09.141219代理人李宝泉任庆威(30)优先权数据15/840,3612017.12.13US(51)Int.Cl.H04N13/194(2006.01)(85)PCT国际申请进入国家阶段日G06T17/20(2006.01)2019.12.04H04N13/282(2006.01)(86)PCT国际申请的申请数据H04N13/296(2006.01)PCT/US2018/0510722018.09.14H04N13/271(2006.01)(87)PCT国际申请的公布数据H04N5/232(2006.01)WO2019/118028EN2019.06.20H04N21/2343(2006.01)H04N13/279(2006.01)(71)申请人谷歌有限责任公司地址美国加利福尼亚州(72)发明人塞缪尔·克瓦伦权利要求书2页说明书10页附图5页(54)发明名称用于生成和渲染沉浸式视频内容的方法、系统和介质(57)摘要提供了用于生成和渲染沉浸式视频内容的方法、系统和介质。在一些实施例中，该方法包括：接收指示多个照相机中的照相机的位置的信息；基于所述多个照相机中的照相机的位置生成待在其上投影视频内容的网格，其中该网格由面式柱体的一部分组成，并且其中该面式柱体具有多个面，所述多个面中的每一个面对应于来自所述多个照相机中的照相机的投影；接收与所述多个照相机对应的视频内容；以及响应于从用户设备接收到对视频内容的请求，将视频内容和所生成的网格发送到用户设备。CN110710203ACN110710203A权利要求书1/2页1.一种用于生成沉浸式视频内容的方法，包括：接收指示多个照相机中的照相机的位置的信息；基于所述多个照相机中的照相机的位置生成视频内容将被投影到的网格，其中所述网格由面式柱体的一部分组成，并且其中所述面式柱体具有多个面，所述多个面中的每一个面对应于来自所述多个照相机中的照相机的投影；接收与所述多个照相机对应的视频内容；以及响应于从用户设备接收到对所述视频内容的请求，将所述视频内容和所生成的网格发送到所述用户设备。2.根据权利要求1所述的方法，其中，生成所述网格包括以并排的取向拼接所述多个面。3.根据权利要求1或2所述的方法，进一步包括在将视频文件传输到所述用户设备之前，将所生成的网格插入到包括所述视频内容的所述视频文件中。4.根据前述权利要求中的任一项所述的方法，其中，所述视频内容包括深度图。5.根据前述权利要求中的任一项所述的方法，进一步包括将所生成的网格转换成用于投影视频内容的第二类型的网格。6.根据权利要求5所述的方法，其中，所述第二类型的网格是鱼眼投影。7.根据前述权利要求中的任一项所述的方法，进一步包括：接收与所渲染的视频内容项目相关联的结果图像信息；以及基于指示所述多个照相机中的照相机的位置的信息，使指示被呈现以移位所述多个相机中的一个或多个照相机。8.一种用于生成沉浸式视频内容的系统，所述系统包括：存储器；和硬件处理器，所述硬件处理器在执行存储在所述存储器中的计算机可执行指令时被配置为：接收指示多个照相机中的照相机的位置的信息；基于所述多个照相机中的照相机的位置生成视频内容将被投影到的网格，其中所述网格由面式柱体的一部分组成，并且其中所述面式柱体具有多个面，所述多个面中的每一个面对应于来自所述多个照相机中的照相机的投影；接收与所述多个照相机对应的视频内容；以及响应于从用户设备接收到对所述视频内容的请求，将所述视频内容和所生成的网格发送到所述用户设备。9.根据权利要求8所述的系统，其中，所述硬件处理器被配置成以并排的取向拼接所述多个面以生成所述网格。10.根据权利要求8或9所述的系统，其中，所述硬件处理器进一步被配置成：在将视频文件传输到所述用户设备之前，将所生成的网格插入到包括所述视频内容的所述视频文件中。11.根据权利要求8至10中的任一项所述的系统，其中，所述视频内容包括深度图。12.根据权利要求8至11中的任一项所述的系统，其中，所述硬件处理器进一步被配置成将所生成的网格转换成用于投影视频内容的第二类型的网格。2CN110710203A权利要求书2/2页13.根据权利要求12所述的系统，其中，所述第二类型的网格是鱼眼投影。14.根据权利要求8至13中的任一项所述的系统，其中，所述硬件处理器进一步被配置成：接收与所渲染的视频内容项目相关联的结果图像信息；以及基于指示所述多个照相机中的照相机的位置的信息，使指示被呈现以移位所述多个相机中的一个或多个照相