一种口型切换渲染方法、系统、装置和存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110796718A(43)申请公布日2020.02.14(21)申请号201910846231.7(22)申请日2019.09.09(71)申请人天脉聚源（杭州）传媒科技有限公司地址310000浙江省杭州市西湖区转塘科技经济区块16号3幢650室(72)发明人呼伦夫陈炜(74)专利代理机构广州嘉权专利商标事务所有限公司44205代理人黎扬鹏(51)Int.Cl.G06T13/40(2011.01)G06T13/20(2011.01)权利要求书2页说明书5页附图3页(54)发明名称一种口型切换渲染方法、系统、装置和存储介质(57)摘要本发明公开了一种口型切换渲染方法、系统、装置和存储介质，其中方法包括以下步骤：获取汉语文本，并对汉语文本进行解析后，获得汉语文本中每个汉字的拼音；将各汉字的拼音进行拆解后，获得与拼音对应的音素数组；采用预设的融合曲线对音素数组进行融合，并获得混合曲线；根据混合曲线驱动口型的变化，从而渲染出不同的口型。本发明通过将汉字的拼音拆解为音素数组，再结合融合曲线生成在时间上连续混合曲线，再由混合曲线驱动口型的变化，从而使口型更加平滑，可广泛应用于人脸表情动画研究领域。CN110796718ACN110796718A权利要求书1/2页1.一种口型切换渲染方法，其特征在于，包括以下步骤：获取汉语文本，并对汉语文本进行解析后，获得汉语文本中每个汉字的拼音；将各汉字的拼音进行拆解后，获得与拼音对应的音素数组；采用预设的融合曲线对音素数组进行融合，并获得混合曲线；根据混合曲线驱动口型的变化，从而渲染出不同的口型。2.根据权利要求1所述的一种口型切换渲染方法，其特征在于，所述音素数组包括声母和韵母，所述将各汉字的拼音进行拆解后，获得与拼音对应的音素数组这一步骤，具体包括以下步骤：依次将各汉字的拼音拆解为声母和韵母，并对声母和韵母分配时间权重后，获得与拼音对应的音素数组；按照汉字的顺序对音素数组进行排序后，获得音素序列。3.根据权利要求2所述的一种口型切换渲染方法，其特征在于，所述依次将各汉字的拼音拆解为声母和韵母这一步骤，具体包括以下步骤：依次获取拼音的首位字母，并结合首位字母和预设的声母表检测是否存有声母；若存有声母，根据拼音遍历声母表后，获得声母的类型，以及获取韵母和韵母的类型；若不存有声母，则根据拼音获取韵母以及韵母的类型。4.根据权利要求3所述的一种口型切换渲染方法，其特征在于，所述采用预设的融合曲线对音素数组进行融合，并获得混合曲线这一步骤，具体包括以下步骤：根据声母的类获取声母曲线，以及根据韵母的类型获取韵母曲线；将同一音素数组的声母曲线和韵母曲线进行融合，并获得音素曲线；将音素序列上相邻的音素数组的音素曲线进行融合，获得混合曲线。5.根据权利要求4所述的一种口型切换渲染方法，其特征在于，所述根据混合曲线驱动口型的变化，从而渲染出不同的口型这一步骤，具体包括以下步骤：对混合曲线进行解析后，获得连续的驱动值；依次结合驱动值和预设的口型模型驱动口型的变化，从而渲染出不同的口型。6.一种口型切换渲染系统，其特征在于，包括：拼音转换模块，用于获取汉语文本，并对汉语文本进行解析后，获得汉语文本中每个汉字的拼音；拼音拆解模块，用于将各汉字的拼音进行拆解后，获得与拼音对应的音素数组；音素混合模块，用于采用预设的融合曲线对音素数组进行融合，并获得混合曲线；口型驱动模块，用于根据混合曲线驱动口型的变化，从而渲染出不同的口型。7.根据权利要求6所述的一种口型切换渲染系统，其特征在于，所述拼音拆解模块包括拼音拆解单元和音素组合单元；所述拼音拆解单元用于依次将各汉字的拼音拆解为声母和韵母，并对声母和韵母分配时间权重后，获得与拼音对应的音素数组；所述音素组合单元用于按照汉字的顺序对音素数组进行排序后，获得音素序列。8.根据权利要求7所述的一种口型切换渲染系统，其特征在于，所述音素混合模块包括曲线获取单元、曲线融合单元和音素融合单元；所述曲线获取单元用于根据声母的类获取声母曲线，以及根据韵母的类型获取韵母曲2CN110796718A权利要求书2/2页线；所述曲线融合单元用于将同一音素数组的声母曲线和韵母曲线进行融合，并获得音素曲线；所述音素融合单元用于将音素序列上相邻的音素数组的音素曲线进行融合，获得混合曲线。9.一种口型切换渲染装置，其特征在于，包括：至少一个处理器；至少一个存储器，用于存储至少一个程序；当所述至少一个程序被所述至少一个处理器执行，使得所述至少一个处理器实现权利要求1-5任一项所述的一种口型切换渲染方法。10.一种存储介质，其中存储有处理器可执行的指令，其特征在于，所述处理器可执行的指令在由处理器执行时用于执行如权利要求1-5任一项所述方法