预览加载中,请您耐心等待几秒...
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10

亲,该文档总共23页,到这已经超出免费预览范围,如果喜欢就直接下载吧~

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113919344A(43)申请公布日2022.01.11(21)申请号202111130296.5(22)申请日2021.09.26(71)申请人腾讯科技(深圳)有限公司地址518057广东省深圳市南山区高新区科技中一路腾讯大厦35层(72)发明人黄剑辉(74)专利代理机构广州三环专利商标代理有限公司44202代理人熊永强贾允(51)Int.Cl.G06F40/289(2020.01)G06F40/205(2020.01)G06K9/62(2022.01)权利要求书2页说明书14页附图6页(54)发明名称文本处理方法和装置(57)摘要本申请提供了一种文本处理方法和装置,涉及互联网技术领域,可以应用于云技术、人工智能、智慧交通、辅助驾驶等各种场景,方法包括:获取目标文本对应的文本分词序列和多个待识别词;分别获取文本分词序列对应的文本特征向量和多个待识别词各自对应的分词特征向量;基于低秩参数矩阵分别将各分词特征向量与文本特征向量进行特征融合处理,得到多个待识别词各自对应的目标特征向量;根据目标特征向量从多个待识别词中识别出目标文本对应的目标词。基于上述方案,本申请能够有效提高训练效率和文本分析效率,以及目标词识别的准确性。CN113919344ACN113919344A权利要求书1/2页1.一种文本处理方法,其特征在于,所述方法包括:获取目标文本对应的文本分词序列和多个待识别词;分别获取所述文本分词序列对应的文本特征向量和所述多个待识别词各自对应的分词特征向量;基于低秩参数矩阵分别将各分词特征向量与所述文本特征向量进行特征融合处理,得到所述多个待识别词各自对应的目标特征向量;根据所述目标特征向量从所述多个待识别词中识别出所述目标文本对应的目标词。2.根据权利要求1所述的方法,其特征在于,所述基于低秩参数矩阵分别将各分词特征向量与所述文本特征向量进行特征融合处理,得到所述多个待识别词各自对应的目标特征向量包括:利用所述低秩参数矩阵分别对所述各分词特征向量和所述文本特征向量进行语义空间映射处理,以分别将所述各分词特征向量与所述文本特征向量映射至同一语义空间,得到所述各自对应的目标特征向量。3.根据权利要求2所述的方法,其特征在于,所述低秩参数矩阵包括第一参数矩阵和第二参数矩阵,所述利用所述低秩参数矩阵分别对所述各分词特征向量和所述文本特征向量进行语义空间映射处理,以分别将所述各分词特征向量与所述文本特征向量映射至同一语义空间包括:分别将所述各分词特征向量,与所述第一参数矩阵、第二参数矩阵和所述文本特征向量相乘,以分别将所述各分词特征向量与所述文本特征向量映射至同一语义空间。4.根据权利要求1所述的方法,其特征在于,分别获取所述文本分词序列对应的文本特征向量和所述多个待识别词各自对应的分词特征向量包括:对所述文本分词序列进行语义编码处理,得到对应的文本特征向量;分别对所述多个待识别词进行语义编码处理,得到所述所述多个待识别词各自对应的分词特征向量。5.根据权利要求4所述的方法,其特征在于,所述对所述文本分词序列进行语义编码处理,得到对应的文本特征向量包括:采用第一嵌入网络对所述文本分词序列进行编码处理,得到对应的分词向量序列;采用文本编码网络基于自注意力机制对所述分词向量序列进行特征提取,得到所述文本特征向量。6.根据权利要求4所述的方法,其特征在于,所述分别对所述多个待识别词进行语义编码处理,得到所述所述多个待识别词各自对应的分词特征向量包括:采用第二嵌入网络分别对所述多个待识别词进行特征嵌入处理,得到多个待识别词各自对应的初始分词向量;采用分词编码网络分别对各所述初始分词向量进行特征交叉处理,得到所述所述多个待识别词各自对应的分词特征向量。7.根据权利要求5所述的方法,其特征在于,所述采用第一嵌入网络对所述文本分词序列进行编码处理,得到对应的分词向量序列包括:利用所述第一嵌入网络对所述文本分词序列中的各文本分词进行词嵌入处理,得到所述各词向量;2CN113919344A权利要求书2/2页利用所述第一嵌入网络,基于所述各文本分词在所述文本分词序列中的位置对所述各文本分词进行位置嵌入处理,得到所述各文本分词的位置向量;对所述各文本分词的词向量和位置向量进行拼接处理,得到所述分词向量序列。8.根据权利要求1所述的方法,其特征在于,所述获取目标文本对应的文本分词序列和多个待识别词包括:对目标文本进行分词处理,得到所述文本分词序列和各文本分词;基于所述各文本分词在所述目标文本中的位置顺序,对所述各文本分词进行组合处理,得到至少一个组合分词;将所述各文本分词和所述至少一个组合分词确定为所述目标文本对应的多个待识别词。9.根据权利要求1所述的方法,其特征在于,所述根据