角色表情的驱动方法及装置、存储介质、电子装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115690281A(43)申请公布日2023.02.03(21)申请号202211706249.5(22)申请日2022.12.29(71)申请人海马云（天津）信息技术有限公司地址301700天津市武清区京津科技谷产业园和园道89号29栋2D25室(72)发明人惠寒硕王科张竺(74)专利代理机构北京云嘉湃富知识产权代理有限公司11678专利代理师刘新桐(51)Int.Cl.G06T13/40(2011.01)G06T15/04(2011.01)权利要求书2页说明书14页附图4页(54)发明名称角色表情的驱动方法及装置、存储介质、电子装置(57)摘要本发明提供了一种角色表情的驱动方法及装置、存储介质、电子装置，所述方法包括：获取虚拟角色的面捕表情；解析所述面捕表情的表情类型；计算与所述表情类型匹配的表情肌参数，并计算与所述表情肌参数匹配的材质参数；采用所述表情肌参数和所述材质参数驱动所述虚拟角色的骨骼网格体，以在所述虚拟角色上渲染所述面捕表情。本方案解决了相关技术中虚拟角色面捕过程中细节效果不足等技术问题，可以优化数字人面捕的细节驱动，使人物表情更生动真实。CN115690281ACN115690281A权利要求书1/2页1.一种角色表情的驱动方法，其特征在于，包括：获取虚拟角色的面捕表情；解析所述面捕表情的表情类型；计算与所述表情类型匹配的表情肌参数，并计算与所述表情肌参数匹配的材质参数；采用所述表情肌参数和所述材质参数驱动所述虚拟角色的骨骼网格体，以在所述虚拟角色上渲染所述面捕表情。2.根据权利要求1所述的方法，其特征在于，采用所述表情肌参数和所述材质参数驱动所述虚拟角色的骨骼网格体包括：在所述虚拟角色的骨骼网格体上查找与所述表情肌参数和所述材质参数分别匹配的目标表情肌和目标材质球；采用所述表情肌参数驱动所述目标表情肌，以及采用所述目标材质参数配置所述目标材质球。3.根据权利要求1所述的方法，其特征在于，计算与所述表情肌参数匹配的材质参数包括：查找所述骨骼网格体的面部材质球；在所述面部材质球上查找与所述表情肌参数匹配的浮点类型参数；获取所述表情类型的遮罩贴图，以及获取所述面部材质球的皮肤颜色贴图集合和法线贴图集合；采用所述浮点类型参数将所述遮罩贴图和所述皮肤颜色贴图集合融合为第一融合参数，采用所述浮点类型参数将所述遮罩贴图和所述法线贴图集合融合为第二融合参数；将所述第一融合参数和所述第二融合参数确定为所述面部材质球的材质参数。4.根据权利要求3所述的方法，其特征在于，在所述面部材质球上查找与所述表情肌参数匹配的浮点类型参数包括：读取所述表情肌参数的参数标识，其中，所述参数标识与所述表情肌参数作用的面部区域对应；截取所述参数标识的指定字段；以所述指定字段为关键字，在所述面部材质球的材质参数集合中搜索命中所述指定字段的浮点类型参数。5.根据权利要求3所述的方法，其特征在于，采用所述浮点类型参数将所述遮罩贴图和所述皮肤颜色贴图集合融合为第一融合参数包括：将所述浮点类型参数转换为四维向量；将所述四维向量与所述遮罩贴图的RGBA通道和单位向量分别进行点乘运算，得到第一运算值和第二运算值；判断所述第二运算值是否大于预设阈值；若所述第二运算值大于预设阈值，选择输出所述第一运算值；获取基础皮肤颜色贴图的第一RGB向量和N张情绪皮肤颜色贴图的第二RGB向量，其中，所述皮肤颜色贴图集合包括所述基础皮肤颜色贴图和所述N张情绪皮肤颜色贴图，N为大于1的整数；针对每张情绪皮肤颜色贴图的第二RGB向量，采用对应的第二RGB向量减去所述第一2CN115690281A权利要求书2/2页RGB向量，得到N个第三运算值；针对所述N个第三运算值中的每个第三运算值，分别与所述第一运算值进行乘法运算，得到N个第四运算值；对所述N个第四运算值进行相加，得到第五运算值；将所述第五运算值与所述第一RGB向量进行相加运算，得到第一融合参数。6.根据权利要求3所述的方法，其特征在于，采用所述浮点类型参数将所述遮罩贴图和所述法线贴图集合融合为第二融合参数包括：将所述浮点类型参数转换为四维向量；将所述四维向量与所述遮罩贴图的RGBA通道和单位向量分别进行点乘运算，得到第一运算值和第二运算值；判断所述第二运算值是否大于预设阈值；若所述第二运算值大于预设阈值，选择输出所述第一运算值；获取基础法线贴图的第一法线向量和N张情绪法线贴图的第二法线向量，其中，所述法线贴图集合包括所述基础法线贴图和所述N张情绪法线贴图；针对每张情绪法线贴图的第二法线向量，采用对应的第二法线向量减去所述第一法线向量，得到N个第六运算值；针对所述N个第六运算值中的每个第六运算值，分别与所述第一运算值进行乘法运算，得到N个第七运算值；对所述N个第七运