基于三维模型的渲染方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109118569A(43)申请公布日2019.01.01(21)申请号201810934565.5(22)申请日2018.08.16(71)申请人OPPO广东移动通信有限公司地址523860广东省东莞市长安镇乌沙海滨路18号(72)发明人欧阳丹(74)专利代理机构北京清亦华知识产权代理事务所(普通合伙)11201代理人张润(51)Int.Cl.G06T15/20(2011.01)权利要求书2页说明书12页附图6页(54)发明名称基于三维模型的渲染方法和装置(57)摘要本申请提出了一种基于三维模型的渲染方法和装置，其中，方法包括：获取从多个角度采集的多张二维人脸图像，根据多张二维人脸图像融合生成皮肤纹理图；检测正面采集的二维人脸图像获取二维面部特征点，并将二维面部特征点与预存的三维面部特征点进行匹配；若获知存在与二维面部特征点匹配成功的目标三维面部特征点，则将与目标三维面部特征点对应的三维模型与皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像。由此，提高了三维模型的渲染效率。CN109118569ACN109118569A权利要求书1/2页1.一种基于三维模型的渲染方法，其特征在于，包括以下步骤：获取从多个角度采集的多张二维人脸图像，根据所述多张二维人脸图像融合生成皮肤纹理图；检测正面采集的二维人脸图像获取二维面部特征点，并将所述二维面部特征点与预存的三维面部特征点进行匹配；若获知存在与所述二维面部特征点匹配成功的目标三维面部特征点，则将与所述目标三维面部特征点对应的三维模型与所述皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像。2.如权利要求1所述的方法，其特征在于，在将所述二维面部特征点与预存的三维面部特征点进行匹配之后，还包括：若获知不存在与所述二维面部特征点匹配成功的目标三维面部特征点，则获取与所述多张二维人脸图像对应的深度信息；根据所述深度信息和所述多张二维人脸图像，对人脸进行三维重构，获取与所述人脸对应的三维模型；将与所述人脸对应的三维模型与所述皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像。3.如权利要求1所述的方法，其特征在于，在将与所述目标三维面部特征点对应的三维模型与所述皮肤纹理图进行渲染之前，还包括：计算所述目标三维面部特征点与所述二维面部特征点之间的匹配度，查询预设的模型修正信息，获取与所述匹配度对应的调整参数；根据所述调整参数对所述三维模型进行调整。4.如权利要求1所述的方法，其特征在于，所述将与所述目标三维面部特征点对应的三维模型与所述皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像，包括：根据所述多张二维人脸图像计算每两张二维人脸图像之间人脸角度差；将所有的人脸角度差与预设的第一角度门限和第二角度门限进行比较，获取大于等于所述第二角度门限的人脸角度差为第一数量，以及大于等于所述第一角度门限且小于所述第二角度门限的人脸角度差为第二数量；若获知所述第一数量大于等于所述第二数量，则按照预设的第一单位面积划分所述皮肤纹理图，根据划分后的皮肤纹理区域与所述三维模型的相应区域进行贴合；若获知所述第二数量大于所述第一数量，则按照预设的第二单位面积划分所述皮肤纹理图，根据划分后的皮肤纹理区域与所述三维模型的相应区域进行贴合，其中，所述第二单位面积小于所述第一单位面积。5.如权利要求1-4任一所述的方法，其特征在于，在所述获取渲染处理后的三维人脸头像之后，还包括获取当前的场景亮度信息；查询预设的皮肤修正信息，获取与皮肤颜色和所述场景亮度信息对应的皮肤渲染补偿系数；根据所述皮肤渲染补偿系数对所述渲染处理后的三维人脸头像进行修正处理。6.一种基于三维模型的渲染装置，其特征在于，包括：2CN109118569A权利要求书2/2页生成模块，用于获取从多个角度采集的多张二维人脸图像，根据所述多张二维人脸图像融合生成皮肤纹理图；匹配模块，用于检测正面采集的二维人脸图像获取二维面部特征点，并将所述二维面部特征点与预存的三维面部特征点进行匹配；渲染模块，用于若获知存在与所述二维面部特征点匹配成功的目标三维面部特征点，则将与所述目标三维面部特征点对应的三维模型与所述皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像。7.如权利要求6所述的装置，其特征在于，还包括：第一获取模块，用于若获知不存在与所述二维面部特征点匹配成功的目标三维面部特征点，则获取与所述多张二维人脸图像对应的深度信息；建模模块，用于根据所述深度信息和所述多张二维人脸图像，对人脸进行三维重构，获取与所述人脸对应的三维模型；所述渲染模块，还用于将与所述人脸对应的三维模型与所述皮肤纹理图进行渲染，获取渲染处理后的三维人脸头像。8.如权利要求6所述的装置，其特征在于，还包括：第二获取模块，用于计算