手掌位置确定方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114170620A(43)申请公布日2022.03.11(21)申请号202111305734.7G06V10/24(2022.01)(22)申请日2021.11.05G06V10/40(2022.01)(71)申请人深圳市鸿合创新信息技术有限责任公司地址518000广东省深圳市坪山区坑梓街道沙田社区丹梓北路1号鸿合大厦1栋A座101及整栋(72)发明人朱理森孙红伟(74)专利代理机构深圳市君之泉知识产权代理有限公司44366代理人黄燕霞(51)Int.Cl.G06V40/10(2022.01)G06V40/20(2022.01)G06V10/25(2022.01)权利要求书2页说明书12页附图4页(54)发明名称手掌位置确定方法、装置、电子设备及存储介质(57)摘要本申请提供一种手掌位置确定方法、装置、电子设备及存储介质。所述方法，先检测目标手掌的关键点，对目标手掌掌根的关键点和同属一个手指的多个关键点进行线性拟合，得到与多个手指对应的线性拟合直线，由多个线性拟合直线确定目标手掌的倾斜度，结合关键点的位置，得到一个涵盖目标手掌所有关键点的位置框，可以指示目标手掌的大小和位置。基于初步检测得到的关键点来分析手掌的倾斜度，基于倾斜度，结合得到的所有关键点得到位置框，可以确保生成的位置框的倾斜度、大小与目标手掌基本一致，定位也更为精确，后续基于该位置框进行手势识别及目标手掌的持续追踪时，可以减少图像中背景环境的干扰或者遗漏关键点，确保特征的提取更为准确。CN114170620ACN114170620A权利要求书1/2页1.一种手掌位置确定方法，其特征在于，所述方法包括：对包含目标手掌的待检测图像进行关键点检测，确定所述目标手掌的各个关键点；对所述目标手掌掌根的关键点和同属一个手指的多个关键点进行线性拟合，得到与多个手指对应的线性拟合直线；根据多个所述线性拟合直线的斜率确定所述目标手掌的倾斜度；依据所述倾斜度和所述目标手掌各个关键点的位置，得到指示所述目标手掌的大小和位置的位置框，所述位置框涵盖所述目标手掌的所有关键点。2.如权利要求1所述的手掌位置确定方法，其特征在于，对包含目标手掌的待检测图像进行关键点检测前，所述方法还包括：通过目标检测定位模型对获取的图像进行目标手掌的预定位，得到预定位结果；依据所述预定位结果从所述获取的图像中裁剪包含所述目标手掌的子图像，得到所述待检测图像。3.如权利要求1所述的手掌位置确定方法，其特征在于，所述根据多个所述线性拟合直线的斜率确定所述目标手掌的倾斜度包括：根据所述多个线性拟合直线的斜率确定对应的多个倾斜角；去除所述多个倾斜角中的离群值后，得到多个有效倾斜角；对所述多个有效倾斜角求取平均值，得到平均角度，确定所述平均角度为所述目标手掌的倾斜度。4.如权利要求1所述的手掌位置确定方法，其特征在于，所述依据所述倾斜度和所述目标手掌各个关键点的位置，得到指示所述目标手掌的大小和位置的位置框包括：依据所述倾斜度，确定所述目标手掌的方向；若所述目标手掌的方向为竖直或水平方向，根据所述目标手掌各个关键点的位置计算初始检测框的四个顶点位置，根据初始检测框确定所述位置框；若所述目标手掌的方向不是竖直或水平方向，计算初始检测框的四边对应的函数，依据所述初始检测框确定所述位置框。5.如权利要求4所述的手掌位置确定方法，其特征在于，所述依据所述倾斜度，确定所述目标手掌的方向包括：当所述倾斜度符合第一预设条件时，判定所述目标手掌的方向为竖直或水平方向；当所述倾斜度不符合第一预设条件，判定所述目标手掌的方向不是竖直或水平方向，其中，第一预设条件为：所述倾斜度对应的斜率值的绝对值大于等于第一预设阈值T1或小于1/T1。6.如权利要求4所述的手掌位置确定方法，其特征在于，所述根据所述目标手掌各个关键点的位置计算初始检测框的四个顶点位置，根据初始检测框确定所述位置框包括：以所有关键点中的最小横坐标值作为第一横坐标值Xs，最大横坐标值作为第二横坐标值Xg；以所有关键点中的最小纵坐标值作为第一纵坐标值Ys，最大纵坐标值作为第二纵坐标值Yg；以(Xs,Ys)、(Xs,Yg)、(Xg,Ys)、(Xg,Yg)作为所述初始检测框的各个顶点坐标；将所述初始检测框放大后，得到所述位置框。2CN114170620A权利要求书2/2页7.如权利要求4所述的手掌位置确定方法，其特征在于，所述计算所述初始检测框的四边对应的函数，依据所述初始检测框确定所述位置框包括：计算以平均斜率K为斜率的直线，经过所述目标手掌的所有关键点时所确定的第一最大截距Pg和第一最小截距Ps；所述平均斜率K根据所述目标手掌的倾斜度确定；计算以所述平均斜率K的负倒数为斜率的直线，经过所述目标手掌的