一种基于用户情绪的智能交互方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113743126A(43)申请公布日2021.12.03(21)申请号202111310673.3G06N3/04(2006.01)(22)申请日2021.11.08G06N3/08(2006.01)G10L15/22(2006.01)(71)申请人北京博瑞彤芸科技股份有限公司G10L15/26(2006.01)地址100026北京市朝阳区东三环北路甲G10L25/63(2013.01)26号楼17层1702室(72)发明人李响高峰杜正平刘沛丰(74)专利代理机构北京慧诚智道知识产权代理事务所(特殊普通合伙)11539代理人李楠(51)Int.Cl.G06F40/30(2020.01)G06F40/284(2020.01)G06F40/242(2020.01)G06F16/33(2019.01)权利要求书4页说明书17页附图2页(54)发明名称一种基于用户情绪的智能交互方法和装置(57)摘要本发明实施例涉及一种基于用户情绪的智能交互方法和装置，所述方法包括：获取第一输入信息；若为语音类型则对第一输入信息进行语音情绪识别生成第一情绪类型；并对第一输入信息进行语音‑文本转换生成第一文本数据；若为文本类型则将第一输入信息作为第一文本数据；对第一文本数据进行主语实体特征提取生成第一实体数据组；对第一文本数据进行对应的情绪识别生成第二情绪类型；生成当前用户情绪类型；若第一实体类型数据为未知实体类型，则根据当前用户情绪类型执行启发式或安抚式应答；若不为未知实体类型，则抽取与当前用户情绪类型匹配的第一实体内容记录向用户进行推送。本发明解决了无视用户情绪变化进行盲推导致的用户体验度下降的问题。CN113743126ACN113743126A权利要求书1/4页1.一种基于用户情绪的智能交互方法，其特征在于，所述方法包括：获取用户的第一输入信息；若所述第一输入信息的信息类型为语音类型，则对所述第一输入信息进行语音情绪识别处理，生成第一情绪类型；并对所述第一输入信息进行语音‑文本转换处理，生成第一文本数据；若所述第一输入信息的信息类型为文本类型，则将所述第一输入信息作为所述第一文本数据；根据预设的实体词典，对所述第一文本数据进行主语实体特征提取生成第一实体数据组；所述第一实体数据组包括第一实体文本数据和第一实体类型数据；根据所述第一实体类型数据，对所述第一文本数据进行对应的情绪识别处理，生成第二情绪类型；若所述第一情绪类型不为空且所述第二情绪类型为中性情绪类型，则将所述第一情绪类型作为当前用户情绪类型；若所述第一情绪类型为空或所述第二情绪类型不为中性情绪类型，则将所述第二情绪类型作为所述当前用户情绪类型；若所述第一实体类型数据为未知实体类型，则根据所述当前用户情绪类型，执行对应的启发式应答处理或安抚式应答处理；若所述第一实体类型数据不为未知实体类型，则根据所述第一实体类型数据和所述第一实体文本数据查询预设的第一实体内容数据库得到对应的第一实体内容记录集合；并从所述第一实体内容记录集合中抽取与所述当前用户情绪类型匹配的第一实体内容记录向用户进行推送。2.根据权利要求1所述的基于用户情绪的智能交互方法，其特征在于，所述第一情绪类型和所述第二情绪类型均至少包括负面情绪类型、中性情绪类型和正面情绪类型；所述实体词典包括多个实体词语数据元；所述实体词语数据元至少包括实体词语文本数据、实体词语词性标签和实体词语类型标签；所述实体词语类型标签至少包括人名实体类型、地名实体类型、产品/服务实体类型、知识实体类型和未知实体类型；所述第一实体内容数据库包括多个所述第一实体内容记录；所述第一实体内容记录至少包括第一类型字段、第一名称字段、第一内容字段、第一评分字段和第一更新时间字段。3.根据权利要求1所述的基于用户情绪的智能交互方法，其特征在于，所述对所述第一输入信息进行语音情绪识别处理，生成第一情绪类型，具体包括：对所述第一输入信息按预设采样频率进行语音信号采样处理，生成第一语音数据序列；对所述第一语音数据序列进行声谱图转换处理，生成第一声谱图矩阵；所述第一声谱图矩阵的横坐标为时间，纵坐标为频率，坐标点值为振幅；将所述第一声谱图矩阵输入训练成熟的语音情绪识别模型进行运算，生成多个第一输出情绪类型和对应的第一输出类型概率；所述语音情绪识别模型至少包括基于卷积循环神经网络CRNN的语音情绪识别模型；将概率值最大的所述第一输出类型概率对应的所述第一输出情绪类型，作为所述第一情绪类型。2CN113743126A权利要求书2/4页4.根据权利要求1所述的基于用户情绪的智能交互方法，其特征在于，所述对所述第一输入信息进行语音‑文本转换处理，生成第一文本数据，具体包括：对所述第一输入信息按预设采样频率进