预览加载中,请您耐心等待几秒...
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10

亲,该文档总共17页,到这已经超出免费预览范围,如果喜欢就直接下载吧~

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112349269A(43)申请公布日2021.02.09(21)申请号202011446751.8(22)申请日2020.12.11(71)申请人平安科技(深圳)有限公司地址518000广东省深圳市福田区福田街道福安社区益田路5033号平安金融中心23楼(72)发明人孙奥兰王健宗程宁(74)专利代理机构深圳市力道知识产权代理事务所(普通合伙)44507代理人张传义(51)Int.Cl.G10L13/02(2013.01)G10L13/04(2013.01)G10L13/10(2013.01)G10L25/24(2013.01)权利要求书2页说明书10页附图4页(54)发明名称语音合成方法、装置、设备及存储介质(57)摘要本发明涉及语义合成技术领域,公开了一种语音合成方法、装置、计算机设备及计算机可读存储介质,该方法包括:获取待合成文本,并通过语音合成模型将所述待合成文本转换为图嵌入向量信息,根据图编码器对所述图嵌入向量信息进行编码,生成对应的第一中间向量信息,根据所述第一中间向量信息生成对应的梅尔语谱信息,输出所述梅尔语谱信息对应的语音合成信息,实现通过图辅助编码器分析文本信息的具体语义信息来映射到不同的语音韵律节奏,使得韵律调节的过程成为一个全自动化的过程,提高了语音合成的准确率。同时,本发明还涉及区块链技术,且本发明可适用于智慧政务、智慧教育、智慧医疗等领域,从而可以进一步推动智慧城市的建设。CN112349269ACN112349269A权利要求书1/2页1.一种语音合成方法,其特征在于,包括:获取待合成文本,并将所述待合成文本输入语音合成模型,其中,所述语音合成模型包括应用层、输出层、图编码器和注意力机制;基于所述应用层将所述待合成文本转换为图嵌入向量信息;根据所述图编码器对所述图嵌入向量信息进行编码,生成对应的第一韵律向量信息,并将所述第一韵律向量信息作为第一中间向量信息;基于所述注意力机制,根据所述第一中间向量信息生成对应的梅尔语谱信息;通过所述输出层输出所述梅尔语谱信息对应的语音合成信息。2.如权利要求1所述的语音合成方法,其特征在于,所述语音合成模型还包括编码器;所述并将所述第一韵律向量信息作为第一中间向量信息之后,所述通过所述输出层输出所述梅尔语谱信息对应的语音合成信息之前,还包括:基于所述应用层将所述待合成文本转换为文本向量信息;根据所述编码器对所述文本向量信息进行编码,生成对应的隐藏向量信息;将所述隐藏向量信息和所述第一中间向量信息进行拼接,生成对应的第二中间向量信息;基于所述注意力机制和所述第二中间向量信息,生成对应的梅尔语谱信息。3.如权利要求1所述的语音合成方法,其特征在于,所述图嵌入向量信息包括点多个结点向量和多个边向量;所述根据所述图编码器对所述图嵌入向量信息进行编码,生成对应的第一韵律向量信息,包括:通过所述图编码器获取各个所述结点向量之间的边向量,并对所述边向量进行编码,得到所述图嵌入向量信息对应的第一韵律向量信息,其中,所述边向量表示对应两个所述结点向量的韵律关系。4.如权利要求1所述的语音合成方法,其特征在于,所述基于所述注意力机制,根据所述第一中间向量信息生成对应的梅尔语谱信息,包括:将所述第一中间向量信息输入到所述注意力机制中,通过所述注意力机制中的权重矩阵获取所述第一中间向量信息中各个结点的上下文韵律信息;通过对所述第一中间向量信息中各个结点的上下文韵律信息进行解码,生成对应的梅尔频谱信息。5.如权利要求1所述的语音合成方法,其特征在于,所通过所述输出层输出所述梅尔语谱信息对应的语音合成信息,包括:通过所述输出层提取所述梅尔频谱信息中的语音频域特征;并对所述语音频域特征进行映射,获取所述输出层输出对应的语音合成信息。6.如权利要求1所述的语音合成方法,其特征在于,所述基于所述应用层将所述待合成文本转换为图嵌入向量信,包括:通过所述应用层将所述待合成文本拆分为各个字词,并获取各个字词之间的顺序关系;对各个字词以及各个所述字词之间的顺序关系进行映射转换,得到所述待合成文本对应的图嵌入向量信息。2CN112349269A权利要求书2/2页7.如权利要求1所述的语音合成方法,其特征在于,所述获取待合成文本之前,还包括:获取待训练语音文本,其中,所述待训练语音文本包括文本信息以及所述文本信息对应的语音信息;通过所述文本信息和所述语音信息训练预置语音序列模型,得到所述文本信息对应的图嵌入向量信息和所述语音信息对应的梅尔频谱信息;通过所述图嵌入向量信息和所述梅尔频谱信息得到对应的损失函数,并通过所述损失函数更新所述预置语音序列模型的模型参数,生成对应的语音合成模型。8.一种语音合成装置,其特征在于,包括:第一获取模块