直播控制方法、装置、存储介质与电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113822970A(43)申请公布日2021.12.21(21)申请号202111114506.1(22)申请日2021.09.23(71)申请人广州博冠信息科技有限公司地址510000广东省广州市天河区科韵路16号自编第5栋801、901(72)发明人王毅钱骏尹浩然(74)专利代理机构北京律智知识产权代理有限公司11438代理人王辉阚梓瑄(51)Int.Cl.G06T13/40(2011.01)G06T19/00(2011.01)权利要求书3页说明书15页附图4页(54)发明名称直播控制方法、装置、存储介质与电子设备(57)摘要本公开提供了一种直播控制方法、装置、存储介质与电子设备，涉及直播技术领域。所述方法包括：根据获取的虚拟形象的模型数据创建虚拟形象；将采集的动捕演员在真实场景中的表演数据与所述虚拟形象进行关联，以基于所述动捕演员的表演数据驱动所述虚拟形象；根据所述真实场景与直播场景的场景映射规则，在所述直播场景中确定与所述动捕演员在所述真实场景中的位置匹配的目标位置，按照所述目标位置将所述虚拟形象合成至所述直播场景，生成直播视频流；将包含所述虚拟形象的所述直播视频流发送至直播客户端进行播放。本公开通过采用动捕演员的表演数据驱动虚拟形象，并将虚拟形象合成至直播场景，可以提高直播方式的互动性。CN113822970ACN113822970A权利要求书1/3页1.一种直播控制方法，其特征在于，所述方法包括：根据获取的虚拟形象的模型数据创建虚拟形象；将采集的动捕演员在真实场景中的表演数据与所述虚拟形象进行关联，以基于所述动捕演员的表演数据驱动所述虚拟形象；根据所述真实场景与直播场景的场景映射规则，在所述直播场景中确定与所述动捕演员在所述真实场景中的位置匹配的目标位置，按照所述目标位置将所述虚拟形象合成至所述直播场景，生成直播视频流；将包含所述虚拟形象的所述直播视频流发送至直播客户端进行播放；其中，包含所述虚拟形象的直播场景的画面与包含所述动捕演员的真实场景的画面保持帧同步。2.根据权利要求1所述的直播控制方法，其特征在于，通过以下方式获取所述虚拟形象的模型数据：利用角色模型创建工具获取所述虚拟形象的三维角色模型；将所述三维角色模型导入模型引擎，并通过所述模型引擎对所述三维角色模型进行解析，获得所述虚拟形象的模型数据；其中，所述模型数据包括模型贴图数据和动画控制数据，所述模型贴图数据是通过对所述虚拟形象的模型框架进行烘焙处理生成的。3.根据权利要求2所述的直播控制方法，其特征在于，所述动画控制数据包括所述虚拟形象的骨骼绑定数据和蒙皮数据，所述表演数据包括所述动捕演员的动作数据，所述将采集的动捕演员在真实场景中的表演数据与所述虚拟形象进行关联，以基于所述动捕演员的表演数据驱动所述虚拟形象，包括：通过惯性传感器采集所述动捕演员的动作数据，所述惯性传感器配置于所述动捕演员的动作部位；通过所述模型引擎的第一虚拟引擎插件将所述动作数据实时传输至所述模型引擎，将所述动作数据与所述虚拟形象的肢体动作进行关联，并通过所述骨骼绑定数据和蒙皮数据驱动所述虚拟形象执行所述动作数据。4.根据权利要求2所述的直播控制方法，其特征在于，所述动画控制数据包括所述虚拟形象的表情控制数据，所述表演数据包括所述动捕演员的表情数据，所述将采集的动捕演员在真实场景中的表演数据与所述虚拟形象进行关联，以基于所述动捕演员的表演数据驱动所述虚拟形象，包括：采用动画蓝图将所述模型引擎中加载的虚拟现实插件与所述表情控制数据进行连接；通过包含深度摄像头的图像获取设备获取所述动捕演员的表情数据；利用所述模型引擎的第二虚拟引擎插件将所述动捕演员的表情数据与所述虚拟形象的面部表情进行关联，并通过所述表情控制数据驱动所述虚拟形象执行所述表情数据。5.根据权利要求3所述的直播控制方法，其特征在于，所述根据所述真实场景与直播场景的场景映射规则，在所述直播场景中确定与所述动捕演员在所述真实场景中的位置匹配的目标位置，包括：通过所述惯性传感器采集的所述动捕演员的动作数据确定所述动捕演员在所述真实场景中的移动距离和/或移动方向；2CN113822970A权利要求书2/3页按照所述场景映射规则中的距离映射比例，确定所述动捕演员在所述真实场景中的移动距离所对应的所述虚拟形象在所述直播场景中的距离值；和/或按照所述场景映射规则中的方向映射比例，确定所述动捕演员在所述真实场景中的移动方向所对应的所述虚拟形象在所述直播场景中的方向值；根据所述虚拟形象在所述直播场景中的距离值和/或方向值确定所述目标位置。6.根据权利要求1所述的直播控制方法，其特征在于，在根据所述真实场景与直播场景的场景映射规则，在所述直播场景中确定与所述动捕演员