人脸纹理图像的获取方法、装置、设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111325823A(43)申请公布日2020.06.23(21)申请号202010080827.3(22)申请日2020.02.05(71)申请人腾讯科技（深圳）有限公司地址518057广东省深圳市南山区高新区科技中一路腾讯大厦35层(72)发明人林祥凯暴林超(74)专利代理机构北京三高永信知识产权代理有限责任公司11138代理人祝亚男(51)Int.Cl.G06T15/04(2011.01)G06K9/00(2006.01)G06T17/20(2006.01)权利要求书3页说明书14页附图8页(54)发明名称人脸纹理图像的获取方法、装置、设备及存储介质(57)摘要本申请提供了一种人脸纹理图像的获取方法、装置、设备及存储介质。所述方法包括：获取目标对象的三维人脸模型的点云和该目标对象的n种头部姿态的人脸图像；通过柱形展开计算点云中的三维数据点的索引信息；获取点云中的三维数据点与人脸图像上的像素点之间的映射关系；分别从n个人脸图像中获取与头部姿态相对应的图像区域，得到n个有效区域；根据索引信息和映射关系，生成n个有效区域分别对应的区域纹理图像；对n个区域纹理图像进行图像融合，生成目标对象的人脸纹理图像。本申请能够针对任意重建得到的三维人脸模型，生成相应的人脸纹理图像，从而有助于提升三维人脸模型的纹理渲染效果，且能够提升最终生成的人脸纹理图像的真实性。CN111325823ACN111325823A权利要求书1/3页1.一种人脸纹理图像的获取方法，其特征在于，所述方法包括：获取目标对象的三维人脸模型的点云，以及所述目标对象的n种头部姿态对应的n个人脸图像，所述n为正整数；通过柱形展开计算所述点云中的三维数据点在所述目标对象的人脸纹理图像上对应的像素点坐标，得到所述三维数据点的索引信息；获取所述三维数据点与所述人脸图像上的像素点之间的映射关系；分别从所述n个人脸图像中获取与头部姿态相对应的图像区域，得到n个有效区域；对于所述n个有效区域中的第i个有效区域，根据所述映射关系获取所述第i个有效区域中的像素点对应的目标三维数据点，所述i为小于等于所述n的正整数；根据所述索引信息获取所述目标三维数据点在所述第i个有效区域对应的区域纹理图像上的目标像素点；对所述目标像素点进行渲染，生成所述第i个有效区域对应的区域纹理图像；其中，所述目标像素点的像素值根据所述第i个有效区域中的像素点的像素值确定；对所述n个区域纹理图像进行图像融合，生成所述目标对象的所述人脸纹理图像。2.根据权利要去1所述的方法，其特征在于，所述对所述n个区域纹理图像进行图像融合，生成所述目标对象的所述人脸纹理图像，包括：计算所述n个区域纹理图像的平均颜色；将所述n个区域纹理图像的颜色变换为所述平均颜色，得到n个变换后的区域纹理图像；对所述n个变换后的区域纹理图像进行拼合，生成所述人脸纹理图像。3.根据权利要求2所述的方法，其特征在于，所述计算所述n个区域纹理图像的平均颜色，包括：对于所述n个区域纹理图像中的第i个区域纹理图像，从所述第i个区域纹理图像的所述有效区域中采样获取至少一个像素点的像素值，计算得到所述第i个区域纹理图像的像素值均值，所述i为小于等于所述n的正整数；根据所述n个区域纹理图像的像素值均值，计算得到所述n个区域纹理图像的平均颜色。4.根据权利要求1所述的方法，其特征在于，所述分别从所述n个人脸图像中获取与头部姿态相对应的图像区域，得到n个有效区域，包括：对于所述n个人脸图像中的第i个人脸图像，从所述第i个人脸图像中检测得到人脸关键点；根据所述人脸关键点的位置和预定义的规则，获取所述第i个人脸图像中的有效区域。5.根据权利要求1所述的方法，其特征在于，所述获取所述三维数据点与所述人脸图像上的像素点之间的映射关系，包括：对于所述n个人脸图像中的第i个人脸图像，采用透视投影将所述三维数据点投影到所述第i个人脸图像上，得到所述三维数据点在所述第i个人脸图像上对应的像素点坐标作为第i组映射关系；其中，所述映射关系包括n组，且所述n组映射关系中的第i组映射关系与所述第i个人脸图像相对应，所述i为小于等于所述n的正整数。2CN111325823A权利要求书2/3页6.根据权利要求1所述的方法，其特征在于，所述通过柱形展开计算所述点云中的三维数据点在所述目标对象的人脸纹理图像上对应的像素点坐标，得到所述三维数据点的索引信息，包括：获取所述点云中的三维数据点在三维坐标系中的三维坐标；根据所述三维数据点的三维坐标，通过柱形展开计算所述三维数据点在所述人脸纹理图像上对应的像素点坐标，得到所述索引信息。7.根据权利要求1至6任一项所述的方法，其特征在于，所述对所述n个区域纹理图像进行图像融合，生成所述目