预览加载中,请您耐心等待几秒...
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10

亲,该文档总共17页,到这已经超出免费预览范围,如果喜欢就直接下载吧~

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114973394A(43)申请公布日2022.08.30(21)申请号202110221060.6(22)申请日2021.02.26(71)申请人广州视享科技有限公司地址510000广东省广州市黄埔区云埔四路6号(1)栋1001房(仅限办公)(72)发明人甘东融(74)专利代理机构北京市立方律师事务所11330专利代理师刘延喜(51)Int.Cl.G06V40/20(2022.01)G06V40/10(2022.01)G06V10/764(2022.01)G06V10/25(2022.01)权利要求书2页说明书7页附图7页(54)发明名称手势动作识别方法、装置、电子设备及计算机存储介质(57)摘要本申请涉及一种手势动作识别方法、装置、电子设备及计算机存储介质,所述方法包括:对输入的原始图像进行全局检测,获取所述原始图像中手势图像的目标位置;对所述原始图像的所述目标位置所在区域进行精确检测,截取局部的手势ROI图像;对所述手势ROI图像进行手势类型识别,确定所述手势ROI图像所在的原始图像的手势分类结果。该技术方案,将检测和分类的过程进行了解耦,将分类模型拆分为全局检测、局部跟踪检测和分类识别等过程,便于在嵌入式上部署多个对应的小模型,从而可以解决耗时长、系统资源开销较大、分类精度低等缺陷。CN114973394ACN114973394A权利要求书1/2页1.一种手势动作识别方法,其特征在于,包括以下步骤:对输入的原始图像进行全局检测,获取所述原始图像中手势图像的目标位置;对所述原始图像的所述目标位置所在区域进行精确检测,截取局部的手势ROI图像;对所述手势ROI图像进行手势类型识别,确定所述手势ROI图像所在的原始图像的手势分类结果。2.根据权利要求1所述的手势动作识别方法,其特征在于,所述对所述手势ROI图像进行手势类型识别之前,还包括:对所述手势ROI图像进行筛查,剔除误检的手势ROI图像并保留真实的手势ROI图像。3.根据权利要求2所述的手势动作识别方法,其特征在于,在主线程执行对输入的上一帧原始图像进行全局检测得到的手势图像的目标位置所在的区域进行精确检测的步骤,以及执行对所述手势ROI图像进行手势类型识别,确定所述手势ROI图像所在的原始图像的手势分类结果的步骤;在对输入的上一帧原始图像进行全局检测,获取所述原始图像中手势图像的目标位置之后,启动子线程对输入的下一帧原始图像进行全局检测,并在得到上一帧原始图像的手势分类结果后,将识别的下一帧的原始图像中手势图像的目标位置发送给所述主线程,对该对下一帧原始图像的所述目标位置所在区域进行精确检测。4.根据权利要求1所述的手势动作识别方法,其特征在于,所述对输入的原始图像进行全局检测,获取所述原始图像中手势图像的目标位置,包括:接收输入的一帧原始图像;将所述原始图像输入全检测器模型,检测出所述原始图像中的手势图像的目标位置,其中,所述全检测器模型为预先训练的用于对图像中手势图像进行检测的模型。5.根据权利要求1所述的手势动作识别方法,其特征在于,所述对所述原始图像的所述目标位置所在区域进行精确检测,截取局部的手势ROI图像,包括:根据所述目标位置在所述原始图像中的区域截取ROI图像,并对所述ROI图像的四边方向进行扩展;将所述扩展后的ROI图像输入跟踪检测器,确定手势图像在所述扩展ROI图像中的位置,并截取出局部的手势ROI图像;其中,所述跟踪检测器为预先训练的用于对图像中手势图像进行精确检测的模型。6.根据权利要求2所述的手势动作识别方法,其特征在于,所述对所述手势ROI图像进行筛查,剔除误检的手势ROI图像并保留真实的手势ROI图像,包括:将所述手势ROI图像输入误检过滤器进行分类识别,将识别为非手势的手势ROI图像进行剔除,将识别为手势的手势ROI图像保留;其中,所述误检过滤器为预先训练的用于对图像中手势进行识别的网络模型。7.根据权利要求1所述的手势动作识别方法,其特征在于,所述对所述手势ROI图像进行手势类型识别,确定所述手势ROI图像所在的原始图像的手势分类结果,包括:将所述手势ROI图像输入手势分类器,通过所述手势分类器判断手势ROI图像中的手势形状,得到所述手势ROI图像对应的原始图像的手势分类结果;其中,所述手势分类器为预先训练的识别手势形状类型的分类器模型。8.一种手势动作识别装置,其特征在于,包括:2CN114973394A权利要求书2/2页全局检测模块,用于对输入的原始图像进行全局检测,获取所述原始图像中手势图像的目标位置;局部跟踪检测模块,用于对所述原始图像的所述目标位置所在区域进行精确检测,截取局部的手势ROI图像;手势分类模块,用于对所述手势ROI图像进行手势类型识别,确定所述手