一种视觉跟踪方法和跟踪装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106845425A(43)申请公布日2017.06.13(21)申请号201710060901.3(22)申请日2017.01.25(71)申请人迈吉客科技（北京）有限公司地址100080北京市海淀区海淀大街3号1幢801室-810L-181(72)发明人周鸣金宇林伏英娜(74)专利代理机构北京布瑞知识产权代理有限公司11505代理人孟潭(51)Int.Cl.G06K9/00(2006.01)权利要求书2页说明书6页附图5页(54)发明名称一种视觉跟踪方法和跟踪装置(57)摘要本发明的视觉跟踪方法和视觉跟踪装置，用于解决眼部对象无法准确实时定位的技术问题。包括：获取眼部图案；建立眼部对象关键点；利用眼部对象关键点作为对象处理方法的测试数据处理眼部图案，确定眼部对象位置，形成视觉焦点数据。避免了大量冗余图像信号的处理，精简了图像处理的运算量。眼部关键点的建立采用监督或半监督学习，利用量化工具形成具有较高的标定数据质量，关键点标定数据在图像处理方法中对眼部对象如虹膜数据的分类起到定向裁剪的效果，满足眼部对象的准确定位。并有利于进一步确定其他眼部对象如瞳孔边界，进一步形成准确的视觉焦点和视觉运动轨迹。CN106845425ACN106845425A权利要求书1/2页1.一种视觉跟踪方法，包括：获取眼部图案；建立眼部对象关键点；利用眼部对象关键点作为对象处理方法的测试数据处理眼部图案，确定眼部对象位置，形成视觉焦点数据。2.如权利要求1所述的视觉跟踪方法，还包括：将眼部对象的连续变化，形成视觉跟踪数据；将视觉跟踪数据作为控制信号用于虚拟视觉的动作变化。3.如权利要求2所述的视觉跟踪方法，其特征在于，所述获取眼部图案包括：获取脸部的五官轮廓；根据眼部特征点裁剪出对称的眼部图像。4.如权利要求2所述的视觉跟踪方法，其特征在于，所述建立眼部对象关键点包括：利用半人工或自动的方式建立眼部对象；利用半人工或自动的方式形成眼部对象的关键点。5.如权利要求2所述的视觉跟踪方法，其特征在于，所述利用眼部对象关键点作为对象处理方法的测试数据处理眼部图案，确定眼部对象位置，形成视觉焦点数据包括：将眼部图案的像素数据导入ERT算法作为训练数据进行处理；将确定的眼部对象及眼部对象关键点作为测试数据修正ERT算法的处理结果；根据修正的处理结果形成眼部对象的准确轮廓和准确的相对位置关系。6.如权利要求2所述的视觉跟踪方法，其特征在于，所述将眼部对象的连续变化，形成视觉跟踪数据包括：在实时获取的眼部图案中，根据眼部对象的相对位置变化形成视觉跟踪数据；在实时获取的眼部图案中，根据眼部对象的相应关键点的相对位置变化形成视觉跟踪数据。7.如权利要求2所述的视觉跟踪方法，其特征在于，所述将视觉跟踪数据作为控制信号用于虚拟视觉的动作变化包括：建立眼部对象和/或眼部对象的关键点，与眼部三维模型或二维模型中的对象和对象的关键点的映射，形成虚拟视觉焦点；利用视觉跟踪数据控制眼部三维模型或二维模型中的对象和/或对象的关键点的移动，形成虚拟视觉的变化。8.一种视觉跟踪装置，包括：图像获取模块，用于获取眼部图案；关键数据建立模块，用于建立眼部对象关键点；对象识别模块，用于利用眼部对象关键点作为对象处理方法的测试数据处理眼部图案，确定虹膜位置，形成视觉焦点数据。9.如权利要求8所述的视觉跟踪装置，其特征在于还包括：视觉跟踪数据生成模块，用于将眼部对象的连续变化，形成视觉跟踪数据；虚拟视觉控制模块，用于将视觉跟踪数据作为控制信号用于虚拟视觉的动作变化。10.如权利要求9所述的视觉跟踪装置，其特征在于，所述图像获取模块包括：2CN106845425A权利要求书2/2页轮廓获取子模块，用于获取脸部的五官轮廓；图像裁剪子模块，用于根据眼部特征点裁剪出对称的眼部图像。11.如权利要求9所述的视觉跟踪装置，其特征在于，所述关键数据建立模块包括：眼部对象建立子模块，用于利用半人工或自动的方式建立眼部对象；对象关键点建立子模块，用于利用半人工或自动的方式形成眼部对象的关键点。12.如权利要求9所述的视觉跟踪装置，其特征在于，所述对象识别模块包括：图像导入子模块，用于将眼部图案的像素数据导入ERT算法作为训练数据进行处理；图像处理子模块，用于将确定的眼部对象及眼部对象关键点作为测试数据修正ERT算法的处理结果；眼部对象位置生成子模块，用于根据修正的处理结果形成眼部对象的准确轮廓和准确的相对位置关系。13.如权利要求9所述的视觉跟踪装置，其特征在于，所述视觉跟踪数据生成模块包括：眼部对象轨迹生成子模块，用于在实时获取的眼部图案中，根据眼部对象的相对位置变化形成视觉跟踪数据；对象关键点轨迹生成子模块，用于在实时获取的眼部图案中，根