面部关键点的标注方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114092752A(43)申请公布日2022.02.25(21)申请号202010694528.9(22)申请日2020.07.17(71)申请人北京达佳互联信息技术有限公司地址100085北京市海淀区上地西路6号1幢1层101D1-7(72)发明人张博宁(74)专利代理机构北京东方亿思知识产权代理有限责任公司11258代理人赵秀芹(51)Int.Cl.G06V10/774(2022.01)G06V40/16(2022.01)G06K9/62(2022.01)G06T7/40(2017.01)G06T7/90(2017.01)权利要求书3页说明书15页附图6页(54)发明名称面部关键点的标注方法、装置、电子设备及存储介质(57)摘要本公开关于一种面部关键点的标注方法、装置、电子设备及存储介质，该方法包括：获取目标面部纹理图像上至少一个颜色中的每个颜色的像素点个数；当至少一个颜色中的第一颜色的像素点个数大于或等于预定阈值时，获取第一轮廓线上的最左侧端点和最右侧端点，其中，第一轮廓线为第一颜色对应的第一部位的轮廓线，最左侧端点和最右侧端点将第一轮廓线分为两个子轮廓线；在两个子轮廓线中的每个子轮廓线上，分别获取位于最左侧端点和最右侧端点之间且等距分布的多个目标轮廓点，以得到第一部位的多个第一关键点；根据多个第一关键点，进行关键点标注。利用本公开实施例，不仅可以提高标注效率以及节省人工标注所消耗的成本，而且在利用本公开实施例标注的关键点来训练模型时，可以提高模型训练的精度。CN114092752ACN114092752A权利要求书1/3页1.一种面部关键点的标注方法，其特征在于，包括：获取目标面部纹理图像上至少一个颜色中的每个颜色的像素点个数，所述至少一个颜色与所述目标面部纹理图像上的至少一个部位一一对应，所述至少一个部位包括以下至少一项：左眼、右眼、左眉毛和右眉毛；当所述至少一个颜色中的第一颜色的像素点个数大于或等于预定阈值时，获取第一轮廓线上的最左侧端点和最右侧端点，其中，所述第一轮廓线为所述第一颜色对应的第一部位的轮廓线，所述最左侧端点和最右侧端点将所述第一轮廓线分为两个子轮廓线；在所述两个子轮廓线中的每个子轮廓线上，分别获取位于所述最左侧端点和所述最右侧端点之间且等距分布的多个目标轮廓点，以得到所述第一部位的多个第一关键点，所述多个第一关键点包括所述最左侧端点、所述最右侧端点以及所述多个目标轮廓点；根据所述多个第一关键点，进行关键点标注。2.根据权利要求1所述的方法，其特征在于，所述根据所述多个第一关键点，进行关键点标注包括：当所述至少一个颜色中的第二颜色的像素点个数小于所述预定阈值，以及所述第二颜色对应的第二部位与所述第一部位为对称部位时，根据所述多个第一关键点，确定所述第二部位的多个第二关键点，所述多个第一关键点与所述多个第二关键点一一对应；根据所述多个第二关键点，对所述第二部位的关键点进行标注。3.根据权利要求2所述的方法，其特征在于，所述获取目标面部纹理图像上至少一个颜色中的每个颜色的像素点个数之前，所述方法还包括：获取预设面部纹理图像，其中，所述预设面部纹理图像中的人脸相对于竖直方向上的坐标轴的倾斜角度为第一角度；将所述预设面部纹理图像朝向竖直方向旋转，且绕所述坐标轴旋转所述第一角度，得到所述目标面部纹理图像；根据所述第一角度以及所述坐标轴，计算出旋转矩阵；所述根据所述多个第二关键点，对所述第二部位的关键点进行标注，包括：将每个所述第二关键点在所述目标面部纹理图像上的坐标位置分别与所述旋转矩阵的逆矩阵相乘，得到每个所述第二关键点在所述预设面部纹理图像上的坐标位置；根据每个所述第二关键点在所述预设面部纹理图像上的坐标位置，在所述预设面部纹理图像上对所述第二部位的关键点进行标注。4.根据权利要求3所述的方法，其特征在于，所述根据所述多个第一关键点，确定所述第二部位的多个第二关键点，包括：对于所述目标面部纹理图像和所述预设面部纹理图像中任意的第一面部纹理图像上的每个所述第一关键点分别执行：在所述第一面部纹理图像上，获取所述第一关键点沿目标方向上的射线与至少一个相关部位的轮廓线之间的多个交点，其中，所述多个交点沿所述目标方向依次排列，所述至少一个相关部位包括鼻子部位；将沿所述目标方向依次排列的所述多个交点中的最后一个交点，确定为所述第一关键点对应的第二关键点。5.根据权利要求4所述的方法，其特征在于，当所述第一面部纹理图像为所述预设面部2CN114092752A权利要求书2/3页纹理图像时，所述获取所述第一关键点沿目标方向上的射线与至少一个相关部位的轮廓线之间的多个交点之前，所述方法还包括：根据所述第二部位为面部左侧部位或者面部右侧部位，确定第一