语音控制方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114121005A(43)申请公布日2022.03.01(21)申请号202111433111.8(22)申请日2021.11.29(71)申请人OPPO广东移动通信有限公司地址523860广东省东莞市长安镇乌沙海滨路18号(72)发明人陈科鑫冉茂松张晓帆(74)专利代理机构深圳市智圈知识产权代理事务所(普通合伙)44351代理人吕静(51)Int.Cl.G10L15/22(2006.01)H04M1/72448(2021.01)H04M1/72433(2021.01)H04M1/72484(2021.01)G06F3/16(2006.01)权利要求书3页说明书16页附图7页(54)发明名称语音控制方法、装置、电子设备及存储介质(57)摘要本申请公开了一种语音控制方法、装置、电子设备及存储介质，该语音控制方法包括：获取语音指令；识别所述语音指令的指令类型；当所述语音指令的指令类型为非即时类型时，获取所述语音指令所对应的触发条件信息和目标执行信息；当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标操作界面执行目标操作。本方法可以实现通过语音控制图形界面时的非即时指令的实现，提升用户体验。CN114121005ACN114121005A权利要求书1/3页1.一种语音控制方法，其特征在于，所述方法包括：获取语音指令；当所述语音指令的指令类型为非即时类型时，获取所述语音指令所对应的触发条件信息和目标执行信息；当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标操作界面执行目标操作。2.根据权利要求1所述的方法，其特征在于，所述当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标界面执行目标操作，包括：当满足所述触发条件信息所对应的触发条件时，将所述目标执行信息与界面可操作元素进行匹配，得到所述目标操作界面，于所述目标操作界面执行目标操作。3.根据权利要求2所述的方法，其特征在于，所述将所述目标执行信息与界面可操作元素进行匹配，得到所述目标操作界面，于所述目标操作界面执行目标操作，包括：将所述目标执行信息与界面可操作元素进行匹配，得到所述目标操作界面中匹配的界面可操作元素作为目标可操作元素；于所述目标界面执行所述目标可操作元素对应的操作。4.根据权利要求1所述的方法，其特征在于，在所述当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标操作界面执行目标操作之前，所述方法还包括：将所述目标执行信息与界面可操作元素进行匹配，得到所述目标操作界面。5.根据权利要求4所述的方法，其特征在于，所述当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标操作界面执行目标操作，包括：根据所述触发条件信息以及所述目标操作界面，生成对应的控制指令；执行所述控制指令，所述控制指令用于当满足所述触发条件信息所对应的触发条件时，于所述目标执行信息对应的目标操作界面执行目标操作。6.根据权利要求1所述的方法，其特征在于，所述获取所述语音指令所对应的触发条件信息和目标执行信息，包括：获取所述语音指令对应的指令文本；获取所述指令文本中包含的触发条件信息和目标执行信息。7.根据权利要求6所述的方法，其特征在于，所述获取所述指令文本中包含的触发条件信息和目标执行信息，包括：将所述语音指令对应的指令文本，输入至预先训练的指令识别模型，得到所述指令文本中包含的触发条件信息以及目标执行信息，所述指令识别模型基于分层强化学习的方式训练得到。8.根据权利要求7所述的方法，其特征在于，所述指令识别模型包括触发条件信息对应的第一子模块、目标执行信息对应的第二子模块以及协同控制模块，所述指令识别模型的训练过程包括：创建用于识别触发条件信息的识别任务对应的第一子模块、用于识别目标执行信息的识别任务对应的第二子模块以及用于协调所述识别任务的协同控制模块，所述第一子模块以及所述第二子模块用于决策其对应的识别任务的动作，且所述协同控制模块的决策优先2CN114121005A权利要求书2/3页级高于所述第一子模块以及所述第二子模块的决策优先级；基于被标注有触发条件信息、目标执行信息以及所述识别任务的识别顺序的文本样本，对所述协同控制模块、所述第一子模块以及所述第二子模块进行深度强化学习训练，得到训练后的所述指令识别模型。9.根据权利要求8所述的方法，其特征在于，所述基于被标注有触发条件信息、目标执行信息以及所述识别任务的识别顺序的文本样本，对所述协同控制模块、所述第一子模块以及所述第二子模块进行深度强化学习训练，得到训练后的所述指令识别模型，包括：将所述文本样本输入至所述协同控制模块、所述第一子模块以及所述第二子模块，得到所述第一