一种悬空手势识别的方法、装置、电子设备和存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111652182A(43)申请公布日2020.09.11(21)申请号202010555991.5(22)申请日2020.06.17(71)申请人广东小天才科技有限公司地址528850广东省东莞市长安镇霄边社区东门中路168号(72)发明人赵华(74)专利代理机构广州智斧知识产权代理事务所(普通合伙)44649代理人孔德超(51)Int.Cl.G06K9/00(2006.01)权利要求书3页说明书12页附图6页(54)发明名称一种悬空手势识别的方法、装置、电子设备和存储介质(57)摘要本发明实施例公开了一种悬空手势识别的方法、装置、电子设备和存储介质。该方法包括：接收触发拍照的指令，通过第一图像采集装置和第二图像采集装置对承载体进行拍照，分别得到第一图像和第二图像；对第一图像和第二图像中的手指进行识别；在第一图像和第二图像分别识别到第一指尖和第二指尖时，检测第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置；位于相同位置时，保留第一图像或/和第二图像；位于不同位置时，删除第一图像和第二图像。实施本发明实施例，可以在点读场景下，通过两个或多个摄像头获取的手势在承载体上的位置确认是否为悬空手势，可以有效减少无效手势导致的误触，进一步提升用户体验。CN111652182ACN111652182A权利要求书1/3页1.一种悬空手势识别的方法，其特征在于，包括：接收触发拍照的指令，通过第一图像采集装置和第二图像采集装置对承载体进行拍照，分别得到第一图像和第二图像；对所述第一图像和第二图像中的手指进行识别；在第一图像和第二图像分别识别到第一指尖和第二指尖时，检测所述第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置；在第一指尖坐标和第二指尖坐标位于承载体图像的相同位置时，保留所述第一图像或/和第二图像；在第一指尖坐标和第二指尖坐标位于承载体图像的不同位置时，删除所述第一图像和第二图像。2.根据权利要求1所述的方法，其特征在于，对所述第一图像和第二图像中的手指进行识别，包括：利用肤色分割方法或基于机器学习的指尖识别模型对所述第一图像和第二图像中的指尖进行识别。3.根据权利要求1所述的方法，其特征在于，所述在第一图像和第二图像分别识别到第一指尖和第二指尖时，检测所述第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置，包括：获取第一指尖和第二指尖的坐标；计算所述第一指尖坐标和第二指尖坐标的距离，在所述距离小于或等于第一预设阈值时，第一指尖坐标和第二指尖坐标位于承载体图像的相同位置。4.根据权利要求3所述的方法，其特征在于，计算所述第一指尖坐标和第二指尖坐标的距离，包括：利用仿射变换的方式将所述第一指尖和第二指尖的坐标转换到同一坐标系中；计算在同一坐标系下，第一指尖坐标和第二指尖坐标之间的欧氏距离或曼哈顿距离。5.根据权利要求1所述的方法，其特征在于，所述第二图像采集装置为多个；在第一图像和第二图像分别识别到第一指尖和第二指尖时，检测所述第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置，包括：获取第一指尖和多个第二指尖的坐标；计算所述第一指尖坐标和每个第二指尖坐标的距离，在所述距离均小于或等于第一预设阈值，或者所述距离的平均值小于或等于第一预设阈值时，第一指尖坐标和第二指尖坐标位于承载体图像的相同位置。6.根据权利要求1所述的方法，其特征在于，所述方法，还包括：在第一图像和第二图像其中之一识别不到指尖坐标时，删除所述第一图像和第二图像。7.根据权利要求1所述的方法，其特征在于，所述第二图像采集装置为多个；所述方法还包括：在第二图像采集装置中其中一个或多个无法识别第二指尖时，删除所述第一图像和第二图像。8.根据权利要求1所述的方法，其特征在于，所述第二图像采集装置为多个，所述第一图像识别得到第一指尖坐标，部分第二图像中识别得到第二指尖坐标；2CN111652182A权利要求书2/3页所述检测所述第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置，包括：计算第一指尖坐标和每个第二指尖坐标的距离，并获取所述距离中小于或等于第一预设阈值的个数；计算所述个数占第二图像采集装置总数量的比例，在所述比例大于或等于第二预设阈值时，第一指尖坐标和第二指尖坐标位于承载体图像的相同位置。9.一种悬空手势识别的装置，其特征在于，所述装置，包括：拍照单元，用于接收触发拍照的指令，通过第一图像采集装置和第二图像采集装置对承载体进行拍照，分别得到第一图像和第二图像；识别单元，用于对所述第一图像和第二图像中的手指进行识别；判断单元，用于在第一图像和第二图像分别识别到第一指尖和第二指尖时，检测所述第一指尖的坐标和第二指尖的坐标是否位于承载体图像的相同位置；处理