人脸图像特征处理方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109377556A(43)申请公布日2019.02.22(21)申请号201811400818.7(22)申请日2018.11.22(71)申请人厦门美图之家科技有限公司地址361000福建省厦门市火炬高新区软件园华讯楼C区B1F-089(72)发明人何恕预刘兴云胡伟伦张伟李志阳(74)专利代理机构北京超凡志成知识产权代理事务所(普通合伙)11371代理人邓超(51)Int.Cl.G06T17/00(2006.01)G06T3/00(2006.01)权利要求书2页说明书9页附图5页(54)发明名称人脸图像特征处理方法及装置(57)摘要本申请实施例提供一种人脸图像特征处理方法及装置，通过对目标用户的待处理图像进行检测得到脸部特征点，并结合预存的三维脸型基系数得到待处理图像对应的三维人脸模型及姿态矩阵，再通过将预存的参考人脸模板映射至与待处理图像一致的待处理模板上以得到标志有用户想要保留的标志特征的位置的待处理模板。对待处理图像进行标志特征检测，并对检测到的标志特征中除与待处理模板上用户想要保留的标志特征的区域对应的标志特征之外的其他标志特征进行去除处理。从而得到了用户想要保留的标志特征的处理后的图像。通过上述过程，可在达到自动保留用户指定的特征并在去除其他的斑点、瑕疵的效果下，为用户提供快速、自动、定制化的面部图像处理方案。CN109377556ACN109377556A权利要求书1/2页1.一种人脸图像特征处理方法，其特征在于，所述方法包括：获得目标用户的待处理图像，对所述待处理图像进行人脸检测得到所述待处理图像的脸部特征点，根据预存的与所述目标用户对应的三维脸型基系数及所述脸部特征点进行人脸三维重建得到所述待处理图像对应的三维人脸模型及姿态矩阵；根据所述三维人脸模型中的平均脸模型的顶点的纹理坐标及所述姿态矩阵，将预存的与所述目标用户对应的参考人脸模板映射到大小与所述待处理图像一致的待处理模板上，其中，映射后得到的待处理模板上像素值为255的区域即对应所述待处理图像上用户想要保留的标志特征的位置；对所述待处理图像进行标志特征检测，并对检测到的标志特征中除与所述待处理模板上像素值为255的区域所对应的标志特征之外的其他标志特征进行去除处理。2.根据权利要求1所述的人脸图像特征处理方法，其特征在于，所述预存的与所述目标用户对应的三维脸型基系数通过以下步骤获得：采集目标用户的在不同姿态下的多张参考图像；对所述多张参考图像进行人脸检测与人脸三维重建得到所述目标用户的三维人脸模型的三维脸型基系数。3.根据权利要求2所述的人脸图像特征处理方法，其特征在于，所述预存的与所述目标用户对应的参考人脸模板通过以下步骤获得：获得所述多张参考图像中包含的所述目标用户的正面人脸图像，对所述正面人脸图像进行人脸检测得到所述正面人脸图像的脸部特征点；根据得到的所述三维脸型基系统及所述正面人脸图像的脸部特征点进行人脸三维重建得到所述正面人脸图像对应的正面三维人脸模型及正面姿态矩阵；对所述正面人脸图像进行标志特征检测，并获得用户选定的标志特征；对用户选定的标志特征进行处理以得到正面人脸模板，根据所述正面人脸模板及所述正面三维人脸模型和所述正面姿态矩阵获得所述目标用户对应的参考人脸模板。4.根据权利要求3所述的人脸图像特征处理方法，其特征在于，所述对所述正面人脸图像进行标志特征检测以得到所述正面人脸图像上的标志特征的步骤，包括：对所述正面人脸图像进行标志特征检测以得到所述正面人脸图像上的标志特征；基于用户的选择获得所述正面人脸图像上的标志特征中用户选定的标志特征。5.根据权利要求3所述的人脸图像特征处理方法，其特征在于，所述对用户选定的标志特征进行处理以得到正面人脸模板，根据所述正面人脸模板及所述正面三维人脸模型和所述正面姿态矩阵获得所述目标用户对应的参考人脸模板的步骤，包括：将所述正面人脸图像上用户选定的标志特征的区域的像素值置为255，其他的标志特征的区域的像素值置为0，以生成与所述正面人脸图像尺寸一致的正面人脸模板；根据所述正面三维人脸模型中的平均脸模型顶点的纹理坐标及所述正面姿态矩阵得到所述正面三维人脸模型的纹理展开图；将所述正面人脸模板映射至所述纹理展开图得到所述目标用户对应的参考人脸模板。6.一种人脸图像特征处理装置，其特征在于，所述装置包括：第一重建模块，用于获得目标用户的待处理图像，对所述待处理图像进行人脸检测得到所述待处理图像的脸部特征点，根据预存的与所述目标用户对应的三维脸型基系数及所2CN109377556A权利要求书2/2页述脸部特征点进行人脸三维重建得到所述待处理图像对应的三维人脸模型及姿态矩阵；映射模块，用于根据所述三维人脸模型中的平均脸模型的顶点的纹理坐