三维人脸重建方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113744384A(43)申请公布日2021.12.03(21)申请号202010479102.1(22)申请日2020.05.29(71)申请人北京达佳互联信息技术有限公司地址100085北京市海淀区上地西路6号1幢1层101D1-7(72)发明人金博张国鑫马里千刘晓强张博宁孙佳佳(74)专利代理机构广州华进联合专利商标代理有限公司44224代理人方高明(51)Int.Cl.G06T17/00(2006.01)G06K9/00(2006.01)权利要求书2页说明书12页附图5页(54)发明名称三维人脸重建方法、装置、电子设备及存储介质(57)摘要本公开涉及一种三维人脸重建方法、装置、电子设备及存储介质。该方法包括：获取目标三维人脸模型和标准三维人脸模型；按照目标三维人脸模型的形状，对标准三维人脸模型进行拟合，得到拟合三维人脸模型；将拟合三维人脸模型中的顶点变换至目标三维人脸模型中的顶点处，得到目标三维人脸模型对应的三维人脸重建模型。根据本公开，以目标三维人脸模型的形状为基准，对标准三维人脸模型进行拟合，并在拟合三维人脸模型与目标三维人脸模型对齐的基础上，将拟合三维人脸模型中的顶点变换至目标三维人脸模型中的顶点处，最小化三维人脸重建模型与待重建的目标三维人脸模型的误差，使最终得到的三维人脸重建模型更加自然，提高三维人脸模型重建的精度。CN113744384ACN113744384A权利要求书1/2页1.一种三维人脸重建方法，其特征在于，包括：获取目标三维人脸模型和标准三维人脸模型；按照所述目标三维人脸模型的形状，对所述标准三维人脸模型进行拟合，得到拟合三维人脸模型；将所述拟合三维人脸模型中的顶点变换至所述目标三维人脸模型中的顶点处，得到所述目标三维人脸模型对应的三维人脸重建模型。2.根据权利要求1所述的三维人脸重建方法，其特征在于，所述标准三维人脸模型中包括标准三维人脸关键点；所述按照所述目标三维人脸模型的形状，对所述标准三维人脸模型进行拟合，得到拟合三维人脸模型，包括：按照所述目标三维人脸模型的形状，对所述标准三维人脸模型进行拟合，得到初始三维人脸模型；其中，所述初始三维人脸模型中的初始三维人脸关键点与所述标准三维人脸关键点一一对应；获取所述目标三维人脸模型中的目标三维人脸关键点；根据所述初始三维人脸关键点和所述目标三维人脸关键点，构建损失函数；将满足预设条件的损失函数对应的初始三维人脸模型，确定为所述拟合三维人脸模型。3.根据权利要求2所述的三维人脸重建方法，其特征在于，所述获取所述目标三维人脸模型中的目标三维人脸关键点，包括：将所述目标三维人脸模型投影至二维图像上，得到二维人脸图像；其中，所述目标三维人脸模型中的顶点与所述二维人脸图像中的顶点之间存在一个顶点对应关系；检测所述二维人脸图像中的二维人脸关键点；根据所述二维人脸关键点和所述顶点对应关系，确定出所述目标三维人脸关键点。4.根据权利要求1所述的三维人脸重建方法，其特征在于，所述将所述拟合三维人脸模型中的顶点变换至所述目标三维人脸模型中的顶点处，得到所述目标三维人脸模型对应的三维人脸重建模型，包括：对于所述拟合三维人脸模型中的顶点，在所述目标三维人脸模型中查找对应的顶点，得到至少一个顶点对；将所述顶点对中与所述拟合三维人脸模型对应的顶点变换至所述目标三维人脸模型对应的顶点处，得到所述三维人脸重建模型。5.根据权利要求4所述的三维人脸重建方法，其特征在于，所述对于所述拟合三维人脸模型中的顶点，在所述目标三维人脸模型中查找对应的顶点，得到至少一个顶点对，包括：在所述目标三维人脸模型中，查找与所述拟合三维人脸模型中的每一顶点距离最近的顶点；将所述拟合三维人脸模型中的顶点和在所述目标三维人脸模型中查找到的距离最近的顶点，确定为所述至少一个顶点对。6.根据权利要求4所述的三维人脸重建方法，其特征在于，所述将所述顶点对中与所述拟合三维人脸模型对应的顶点变换至所述目标三维人脸模型对应的顶点处，得到所述三维人脸重建模型，包括：2CN113744384A权利要求书2/2页应用拉普拉斯算法，将所述顶点对中与所述拟合三维人脸模型对应的顶点变换至所述目标三维人脸模型对应的顶点处，得到所述三维人脸重建模型。7.根据权利要求4所述的三维人脸重建方法，其特征在于，所述顶点对中与所述拟合三维人脸模型对应的顶点位于所述拟合三维人脸模型中的人脸区域；所述将所述顶点对中与所述拟合三维人脸模型对应的顶点变换至所述目标三维人脸模型对应的顶点处，得到所述三维人脸重建模型之后，包括：获取所述拟合三维人脸模型中非人脸区域的顶点；获取将所述顶点对中与所述拟合三维人脸模型对应的顶点变换至所述目标三维人脸模型对应的顶点处的变换系数；按照所述