三维虚拟偶像直播中角色形象变形的方法、系统及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN108961367A(43)申请公布日2018.12.07(21)申请号201810641244.6(22)申请日2018.06.21(71)申请人珠海金山网络游戏科技有限公司地址519000广东省珠海市香洲区前岛环路325号金山软件园3号楼申请人珠海西山居互动娱乐科技有限公司(72)发明人强项芦振华贺子彬胡文彬(74)专利代理机构广州嘉权专利商标事务所有限公司44205代理人俞梁清(51)Int.Cl.G06T13/40(2011.01)权利要求书2页说明书6页附图7页(54)发明名称三维虚拟偶像直播中角色形象变形的方法、系统及装置(57)摘要本发明涉及一种三维虚拟偶像直播中角色形象变形的方法、系统及装置，用于解决.创建三维虚拟偶像的3D角色模型及贴图文件；对3D角色模型进行变形，生成对应的变形动画和骨骼动画；将3D角色模型导入至3D游戏引擎；实时捕捉真实的演员动作信息，然后关联和控制3D角色模型，以及执行变形动画，将所述3D角色模型的合成动画叠加至录制的视频画面。本发明的有益效果为：通过本发明实现了在三维虚拟偶像直播中，虚拟偶像主角实时可以改变的自己的形象，而根据不同的形象可以延伸出不同的节目表演风格，提升了节目的娱乐性和可观赏性；解决了以往的三维偶像直播中，无法表现主角的变形过程，由人变为人狼的具体变形过程，成为了现实。CN108961367ACN108961367A权利要求书1/2页1.三维虚拟偶像直播中角色形象变形的方法，其特征在于，该方法包括以下步骤：A.创建三维虚拟偶像的3D角色模型，并为3D角色模型创建对应的贴图文件；B.对步骤A得到的3D角色模型进行变形，得到变体后的3D模型文件，进一步，基于3D角色模型和变体后的3D角色模型顶点生成对应的变形动画和骨骼动画；C.将所述基于3D角色模型和变体后的3D角色模型导入至3D游戏引擎，其中导入3D引擎的基于3D角色模型和变体后的3D角色模型可以被引擎蓝图调用；D.实时捕捉真实的演员动作信息，然后关联和控制3D角色模型，以及执行变形动画，将所述3D角色模型的合成动画叠加至录制的视频画面。2.根据权利要求1所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述步骤A包括：根据原画资料，为虚拟的三维虚拟偶像配置人设特性数据，人设特性数据包含职业信息、性格信息或人物背景特性，并且为所述三维虚拟偶像创建对应的3D角色模型；将3D角色模型进行法线光滑处理并创建映射UV坐标，根据UV坐标绘制三维虚拟偶像对应的模型贴图文件，进一步生成三维虚拟偶像的材质球文件；将模型贴图与3D角色模件进行关联，并将所述然材质球文件赋予模型贴图文件；为赋予模型贴图文件的3D角色模型绑定骨骼和刷制权重模型。3.根据权利要求1所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述步骤B包括：根据所述步骤A进一步创建三维虚拟偶像变形后的变体3D模型文件，进一步，创建多个基于相同骨骼的不同外形的模型文件；然后创建基于变体3D模型的模型和贴图材质文件，绑定到与所述步骤A三维虚拟偶像同一模型文件并刷制权重；创建基于所述步骤A创建三维虚拟偶像的3D角色模型及变体3D模型的顶点变形动画，进而创建对应两个模型的骨骼变形动画。4.根据权利要求1所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述步骤C包括：将基于三维偶像的3D角色模型和变体模型，以及，对应的的材质贴图和动画文件导入到3D游戏引擎中归档；使用3D游戏引擎创建变动动画的关卡蓝图和对应插件，最后联调相关功能，并通过接口连接到控制程序。5.根据权利要求1或4所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述步骤D包括：配置至少一组灯光，用于在增强现实的物体附近展现光影效果，以及在真实场景与虚拟影像交界附近补偿光影过渡；实时地计算摄影机影像的位置及角度，并配置到所述虚拟的3D角色模型中，以进行交互及应对拍摄；捕捉演员的肢体动作、面部表情和声音，转换为与3D角色模型的人设特性关联的动作数据，然后关联至图形引擎中的相应的3D角色模型，并且配置所述演员的动作信息和声音与所述3D角色模型动画的动作信息和声音实时同步；2CN108961367A权利要求书2/2页将动作信息传输到加载至3D游戏引擎的相关图形工作站中，驱动最终3D引擎中的三维实时动画；控制相关变形动画控制程序，最终完成三维虚拟偶像的实时变形，以及通过视频采集装置实时将画面传输到直播平台。6.根据权利要求5所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述动作数据包括肢体动作数据、面部动作数据和角色混音数据。7.根据权利要求5所述的三维虚拟偶像直播中角色形象变形的方法，其特征在于，所述动作信息包括肢