人脸跟踪的方法、装置、电子设备及计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110009662A(43)申请公布日2019.07.12(21)申请号201910262510.9(22)申请日2019.04.02(71)申请人北京迈格威科技有限公司地址100190北京市海淀区科学院南路2号融科资讯中心A座316-318(72)发明人杨弋周舒畅张一山(74)专利代理机构北京市立方律师事务所11330代理人张筱宁(51)Int.Cl.G06T7/246(2017.01)G06K9/00(2006.01)权利要求书2页说明书10页附图3页(54)发明名称人脸跟踪的方法、装置、电子设备及计算机可读存储介质(57)摘要本申请实施例提供了一种人脸跟踪的方法、装置、电子设备及计算机可读存储介质，涉及图像处理技术领域。该方法包括：通过对视频流中的至少一帧帧图像进行处理，得到至少一个人脸的检测框信息，然后基于检测框信息，确定至少一个人脸对应的属性信息，然后基于至少一个人脸的检测框信息以及至少一个人脸对应的属性信息，对至少一个人脸进行跟踪。本申请实施例实现了降低在对多个人脸进行追踪时，发生多个人脸的跟踪轨迹交替的概率，提升对人脸进行跟踪的准确度，进而可以提升用户体验。CN110009662ACN110009662A权利要求书1/2页1.一种人脸跟踪的方法，其特征在于，包括：通过对视频流中的至少一帧帧图像进行处理，得到至少一个人脸的检测框信息；基于检测框信息，确定至少一个人脸对应的属性信息；基于所述至少一个人脸的检测框信息以及所述至少一个人脸对应的属性信息，对至少一个人脸进行跟踪。2.根据权利要求1所述的方法，其特征在于，基于所述至少一个人脸的检测框信息以及所述至少一个人脸对应的属性信息，对至少一个人脸进行跟踪，包括：根据所述至少一个人脸的检测框信息以及所述至少一个人脸的属性信息，与已有的跟踪轨迹信息进行匹配；基于匹配结果，更新所述已有的跟踪轨迹信息，以实现对所述至少一个人脸进行跟踪处理。3.根据权利要求2所述的方法，其特征在于，根据所述至少一个人脸的检测框信息以及所述至少一个人脸的属性信息，与已有的跟踪轨迹信息进行匹配；基于匹配结果，更新所述已有的跟踪轨迹信息，包括：根据所述已有的跟踪轨迹信息以及至少一个人脸的检测框信息和属性信息，计算相似度矩阵；根据相似度矩阵，更新所述已有的跟踪轨迹信息。4.根据权利要求3所述的方法，其特征在于，根据相似度矩阵，更新所述已有的跟踪轨迹信息，包括：确定所述相似度矩阵中不大于预设阈值的元素；基于所述相似度矩阵中不大于预设阈值的元素，并通过二分图最佳匹配算法，确定匹配边的集合，所述匹配边的集合中任一匹配边表征任一组匹配的跟踪轨迹信息以及人脸的检测框信息和属性信息；根据所述匹配边的集合，更新所述已有的跟踪轨迹信息。5.根据权利要求2-4任一项所述的方法，其特征在于，所述更新所述已有的跟踪轨迹信息，包括以下至少一项：若视频流中的任一帧帧图像对应的人脸信息中不包含所述已有的跟踪轨迹信息，则在所述已有的跟踪轨迹信息中删除所述任一帧帧图像对应的人脸信息中不包含的跟踪轨迹信息；若所述已有的跟踪轨迹信息中不包含视频流中的任一帧帧图像对应的人脸信息，则在所述已有跟踪轨迹信息中添加所述任一帧帧图像对应的人脸信息；所述人脸信息包括：人脸的检测框信息以及人脸对应的属性信息。6.根据权利要求1-5任一项所述的方法，其特征在于，任一人脸对应的属性信息包括以下至少一项：年龄信息；性别信息。7.根据权利要求3或4所述的方法，其特征在于，根据所述已有的跟踪轨迹信息以及至少一个人脸的检测框信息和属性信息，计算相似度矩阵，包括：根据特定公式，计算相似度矩阵中的任一元素；根据计算出的相似度矩阵中的各个元素，确定相似度矩阵；2CN110009662A权利要求书2/2页所述特定公式为：222Aij＝(Ti1-fj1)×a+(Ti2-fj2)×b+(Ti3-fj3)×c+(Ti4-fj4)×d，其中，Ti1为已有的跟踪轨迹中任一跟踪轨迹中人脸对应的年龄信息，fj1为人脸检测框对应的年龄信息；Ti2为已有的跟踪轨迹中任一跟踪轨迹中人脸对应的性别为男性或者女性的概率信息、fj2为人脸检测框对应的性别为男性或者女性的概率信息；Ti3-fj3表示已有的跟踪轨迹中任一跟踪轨迹与人脸检测框之间的中心点位置的欧式距离；Ti4-fj4为已有的跟踪轨迹中任一跟踪轨迹与人脸框之间的特征距离。8.根据权利要求1-7任一项所述的方法，其特征在于，基于检测框信息，确定至少一个人脸对应的属性信息，包括：基于所述检测框信息并通过训练后的网络模型，输出所述至少一个人脸对应的属性特征向量。9.一种人脸跟踪的装置，其特征在于，包括：处理模块，用于通过对视频流中的至少一帧帧图像进行处理，得到至少一