虚拟形象直播方法、终端、计算机设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110557625A(43)申请公布日2019.12.10(21)申请号201910877546.8H04N21/81(2011.01)(22)申请日2019.09.17(71)申请人北京达佳互联信息技术有限公司地址100085北京市海淀区上地西路6号1幢1层101D1-7(72)发明人黄旭为马里千张国鑫刘晓强张博宁(74)专利代理机构北京三高永信知识产权代理有限责任公司11138代理人祝亚男(51)Int.Cl.H04N13/275(2018.01)H04N21/2187(2011.01)H04N21/44(2011.01)H04N21/4415(2011.01)权利要求书2页说明书10页附图4页(54)发明名称虚拟形象直播方法、终端、计算机设备及存储介质(57)摘要本公开关于一种虚拟形象直播方法、装置、计算机设备及存储介质。该方法包括：从服务器获取虚拟形象模型以及虚拟素材数据，虚拟素材数据用于渲染虚拟形象模型；响应于服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据，驱动虚拟形象模型做出对应的动作；基于虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染，将渲染后所获得的虚拟形象视频播放。本公开的实施例当主播以虚拟形象进行直播时，向服务器上传主播的表情数据和动作数据，直播观看终端接收表情数据和动作数据后，在本地进行虚拟形象的渲染实现虚拟形象直播，降低了主播终端侧对网络带宽的要求，提高了虚拟形象视频的渲染质量。CN110557625ACN110557625A权利要求书1/2页1.一种虚拟形象直播方法，其特征在于，应用于直播观看终端，包括：从服务器获取虚拟形象模型以及虚拟素材数据，所述虚拟素材数据用于渲染所述虚拟形象模型；响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据，驱动所述虚拟形象模型做出对应的动作；基于所述虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染，将渲染后所获得的虚拟形象视频播放。2.根据权利要求1所述的方法，其特征在于，所述响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据，驱动所述虚拟形象模型做出对应的动作，包括：基于所述面部表情数据驱动所述虚拟形象模型的面部模型，使所述面部模型做出相应的面部表情；基于所述头部动作数据驱动所述虚拟形象模型的头部模型，使所述头部模型做出相应的头部动作；基于所述身体动作数据驱动所述虚拟形象模型的身体模型，使所述身体模型做出相应的身体动作。3.根据权利要求1所述的方法，其特征在于，所述虚拟素材数据至少包括虚拟形象皮肤数据、环境数据、贴图数据中的一种。4.根据权利要求1所述的方法，其特征在于，所述将渲染后所获得的虚拟形象视频播放，包括：获取主播的声音数据；将所述声音数据与所述渲染后所获得的虚拟形象视频合并后播放。5.一种虚拟形象直播方法，其特征在于，应用于直播终端，包括：获取主播的直播视频，所述直播视频包括多个视频帧；识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据；向服务器发送携带有所述面部表情数据、头部动作数据和身体动作数据的直播指令，所述直播指令用于指示直播终端基于面部表情数据、头部动作数据和身体动作数据驱动预配置的虚拟形象模型做出对应的动作，并基于虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染，将渲染后所获得的虚拟形象视频在直播观看终端上播放，其中，所述直播终端从服务器获取所述虚拟形象模型以及虚拟素材数据。6.根据权利要求5所述的方法，其特征在于，所述识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据，包括：对每个视频帧进行面部识别和身体识别，获得主播的面部图像和身体图像；分别对所述面部图像和身体图像进行分析，获得所述每个视频帧的面部参数、头部参数以及身体参数；将所述每个视频帧的面部参数、头部参数以及身体参数按照视频帧顺序分别进行合并，获得面部表情数据、头部动作数据和身体动作数据。7.一种直播观看终端，其特征在于，包括：获取单元，被配置为执行从服务器获取虚拟形象模型以及虚拟素材数据，所述虚拟素2CN110557625A权利要求书2/2页材数据用于渲染所述虚拟形象模型；驱动单元，被配置为响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据，驱动所述虚拟形象模型做出对应的动作；渲染单元，被配置为基于所述虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染，将渲染后所获得的虚拟形象视频播放。8.一种直播终端，其特征在于，包括：获取单元，被配置为获取主播的直播视频，所述直播视频包括多个视频帧；识别单元，被配置为识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据