一种连续手语识别方法.pdf
英哲****公主
亲,该文档总共39页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
一种连续手语识别方法.pdf
本发明一种连续手语识别方法,涉及用于识别图形的记录载体的处理,是基于对多模态图像序列特征融合和自注意力机制的编码解码网络的连续手语识别的方法,首先获得光流图像序列,通过原始手语图像序列和光流图像序列时空特征的提取和多模态图像序列时空特征融合,和手语句子标签的文本特征序列的提取,将融合后的多模态图像序列时空特征和提取的手语句子标签的文本特征序列输入到基于自注意力机制的编码解码网络中进行手语标签预测输出,克服了现有技术存在的特征单一、视频需要分割的缺陷。
一种连续手语的识别方法及其装置.pdf
本发明提供了一种连续手语的识别方法及其装置,包括Kinect拍摄模块,Kinect拍摄模块包括深度图像存储单元和彩色图像存储单元;目标手形分割单元,对彩色图像和深度图像进行处理,得到图像中的目标手形部分;特征整合单元,对目标手形部分的几何特征和轮廓特征进行整合,得到手语特征序列;匹配模块,将手语特征序列与手语模板库中的手语模板进行对比识别,得到与待识别连续手语识别相匹配的连续手语模板,并输出连续手续模板的含义。该装置能够通过上述方法实现连续手语的识别,提高了手语识别的准确率。
基于模态匹配的连续手语语句识别方法.pdf
本发明公开了一种基于模态匹配的连续手语语句识别方法,将手语语句的彩色视频和光流图像序列的关键帧和目标词语片段序列作为输入,通过基于模态匹配的连续手语语句识别模型,将手语语句的彩色视频和光流图像序列的关键帧片段序列与语义匹配对齐,得到最终的语义序列。本发明公开了一种基于模态匹配的连续手语语句识别模型,用轻量的特征提取网络,减少其参数量,针对手语数据集进行任务特定性训练,在数据集中样本的标注较少的情况下对连续手语语句进行识别,减少了在传统手语识别方法中对人体姿势信息高度依赖的问题。
一种基于SCHMM的手语识别方法.docx
一种基于SCHMM的手语识别方法Abstract:Signlanguagerecognitionisanimportantareaofresearchthataimstohelpthedeafcommunityintheircommunicationwiththehearingcommunity.TheuseofHiddenMarkovModels(HMMs)hasbeenwidelyacceptedasasuccessfulmethodforrecognizinghandsigns.However,co
一种三目视觉手语识别装置及多信息融合手语识别方法.pdf
本发明公开了一种三目视觉手语识别装置及多信息融合手语识别方法,涉及手语的智能翻译技术领域;解决双目设备的视觉盲区缺陷,以及独立的手势识别方案无法准确地获取聋哑人手语所要传达的信息的问题;本发明在双目设备的垂直平面增加一个单目摄像装置,采集视觉盲区中的信息,作为双目设备视觉盲区的数据补足;提出由手语表达者表情、正在进行手语交流时手在人身体的相对位置以及手语手势识别共同定义一组手语手势,这样组合定义手语的方式增加了可识别手势的数量,扩大了手语库的丰富性;同时,多种组合要素细化了每个手语,提高了每个手语的特异性