表情生成方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111627095A(43)申请公布日2020.09.04(21)申请号201910152339.6(22)申请日2019.02.28(71)申请人北京小米移动软件有限公司地址100085北京市海淀区清河中街68号华润五彩城购物中心二期9层01房间(72)发明人王旭(74)专利代理机构北京尚伦律师事务所11477代理人段玉华(51)Int.Cl.G06T13/40(2011.01)G06K9/00(2006.01)权利要求书2页说明书12页附图9页(54)发明名称表情生成方法及装置(57)摘要本公开是关于一种表情生成方法及装置。该方法包括：获取目标对象的原始表情和原始声音；根据所述原始表情确定选自预设动画库中的参考动画的表情；根据所述原始声音以及预设声音模型中的参考声音特征生成目标声音，所述目标声音的声音特征与所述参考声音特征相同；根据所述目标声音以及所述参考动画的表情生成目标表情。本公开可提升动态表情的娱乐性。CN111627095ACN111627095A权利要求书1/2页1.一种表情生成方法，其特征在于，包括：获取目标对象的原始表情和原始声音；根据所述原始表情确定选自于预设动画库中的参考动画的表情；根据所述原始声音以及预设声音模型中的参考声音特征生成目标声音，所述目标声音的声音特征与所述参考声音特征相同；根据所述目标声音以及所述参考动画的表情生成目标表情。2.根据权利要求1所述的方法，其特征在于，根据所述原始声音以及预设声音模型中的参考声音特征生成目标声音包括：提取所述原始声音的内容信息和原始声音特征，所述原始声音特征包括音色、音调、响度、音长和音强；采用所述预设声音模型中选定的参考声音特征置换所述原始声音特征；根据所述原始声音的内容信息以及置换之后的所述参考声音特征生成所述目标声音。3.根据权利要求2所述的方法，其特征在于，根据所述原始声音以及预设声音模型中的参考声音特征生成目标声音还包括：获取针对所述预设声音模型中的一参考声音特征的选取指令，所述选取指令指向该参考声音特征携带的标签；响应所述选取指令在所述预设声音模型中的多个参考声音特征中调用所述标签对应的所述参考声音特征。4.根据权利要求2所述的方法，其特征在于，还包括：在提取所述原始声音的原始声音特征之后，检测所述原始声音特征与所述预设声音模型中的任一个参考声音特征是否相同；在检测到所述原始声音特征与任一个所述参考声音特征相同时，将所述原始声音特征保存至该相同的所述参考声音特征携带的标签中。5.根据权利要求1所述的方法，其特征在于，获取目标对象的原始表情和原始声音包括：获取采集指令，所述采集指令指示同步采集所述目标对象的原始表情和原始声音；响应所述采集指令拍摄所述目标对象的原始表情，所述原始表情为三维动态表情或者三维静态表情；响应所述采集指令录制所述目标对象的原始声音，所述原始声音为所述目标对象发出的声音和/或背景声音。6.根据权利要求5所述的方法，其特征在于，根据所述原始表情确定选自预设动画库中的参考动画的表情包括：根据所述原始表情分析得出所述原始表情对应的三维数据；采用所述参考动画结合所述三维数据模拟得到所述参考动画的表情。7.一种表情生成装置，其特征在于，包括：目标获取模块，用于获取目标对象的原始表情和原始声音；表情确定模块，用于根据所述原始表情确定选自于预设动画库中的参考动画的表情；声音生成模块，用于根据所述原始声音以及预设声音模型中的参考声音特征生成目标声音，所述目标声音的声音特征与所述参考声音特征相同；2CN111627095A权利要求书2/2页表情生成模块，用于根据所述目标声音以及所述参考动画的表情生成目标表情。8.根据权利要求7所述的装置，其特征在于，所述声音生成模块包括：提取单元，用于提取所述原始声音的内容信息和原始声音特征，所述原始声音特征包括音色、音调、响度、音长和音强；置换单元，用于采用所述预设声音模型中选定的参考声音特征置换所述原始声音特征；生成单元，用于根据所述原始声音的内容信息以及置换之后的所述参考声音特征生成所述目标声音。9.根据权利要求8所述的装置，其特征在于，所述声音生成模块还包括：获取单元，用于获取针对所述预设声音模型中的一参考声音特征的选取指令，所述选取指令指向该参考声音特征携带的标签；调用单元，用于响应所述选取指令在所述预设声音模型中的多个参考声音特征中调用所述标签对应的所述参考声音特征。10.根据权利要求8所述的装置，其特征在于，还包括：声音检测模块，用于在提取所述原始声音的原始声音特征之后，检测所述原始声音特征与所述预设声音模型中的任一个参考声音特征是否相同；特征保存模块，用于在检测到所述原始声音特征与任一个所述参考声音特征相同时，将所述原始