图像处理方法、图像处理装置及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109712080A(43)申请公布日2019.05.03(21)申请号201811338572.5(22)申请日2018.11.12(30)优先权数据16/159,0372018.10.12US(71)申请人迈格威科技有限公司地址美国华盛顿州(72)发明人白雪刘帅成王珏(74)专利代理机构北京市柳沈律师事务所11105代理人彭久云(51)Int.Cl.G06T5/00(2006.01)G06T3/00(2006.01)权利要求书3页说明书13页附图9页(54)发明名称图像处理方法、图像处理装置及存储介质(57)摘要一种图像处理方法、图像处理装置及存储介质，该图像处理方法包括：将待处理图像包括的待处理人脸的信息和参考人脸的信息在三维空间中融合，以根据所述待处理人脸的信息得到目标人脸的混合系数；根据所述目标人脸的混合系数，对所述待处理图像中的待处理人脸执行人脸变形处理以得到包括所述目标人脸的输出图像。该图像处理方法可以调整图像中的人脸的脸型、五官形状和分布，可适应多个拍摄角度，解决了二维空间中人脸的对齐问题，并且无需手动调节参数，可有效提升图像中的人脸颜值。CN109712080ACN109712080A权利要求书1/3页1.一种图像处理方法，包括：将待处理图像包括的待处理人脸的信息和参考人脸的信息在三维空间中融合，以根据所述待处理人脸的信息得到目标人脸的混合系数；根据所述目标人脸的混合系数，对所述待处理图像中的待处理人脸执行人脸变形处理以得到包括所述目标人脸的输出图像。2.根据权利要求1所述的图像处理方法，其中，将待处理图像包括的待处理人脸的信息和参考人脸的信息在三维空间中融合，以根据所述待处理人脸的信息得到目标人脸的混合系数，包括：获取并根据所述待处理人脸的混合系数和所述参考人脸的混合系数，得到所述目标人脸的混合系数，其中，所述混合系数包括形状系数、表情系数和投影系数。3.根据权利要求2所述的图像处理方法，其中，获取并根据所述待处理人脸的混合系数和所述参考人脸的混合系数，得到所述目标人脸的混合系数，包括：对所述待处理图像中的所述待处理人脸执行三维拟合，得到所述待处理人脸的混合系数；获取所述参考人脸的混合系数；将所述待处理人脸的混合系数与所述参考人脸的混合系数融合，得到所述目标人脸的混合系数。4.根据权利要求3所述的图像处理方法，其中，对所述待处理图像中的所述待处理人脸执行三维拟合，得到所述待处理人脸的混合系数，包括：对所述待处理图像执行人脸检测，得到所述待处理人脸的二维关键点；基于所述待处理人脸的二维关键点和所述待处理图像，执行所述三维拟合，得到所述待处理人脸的混合系数。5.根据权利要求4所述的图像处理方法，其中，所述三维拟合包括三维人脸模型拟合或基于深度学习的三维拟合。6.根据权利要求4所述的图像处理方法，其中，基于所述待处理人脸的二维关键点和所述待处理图像，执行所述三维拟合，得到所述待处理人脸的混合系数，包括：根据所述待处理人脸的二维关键点、所述待处理图像和三维人脸模型数据库，执行三维人脸模型拟合，得到所述待处理人脸的混合系数，其中，所述三维人脸模型数据库包括多个形状基和多个表情基，以及还包括每个基的三维点的坐标和每个基的三维关键点。7.根据权利要求3所述的图像处理方法，其中，所述待处理人脸的混合系数包括第一形状系数、第一表情系数和第一投影系数，所述参考人脸的混合系数包括第二形状系数、第二表情系数和第二投影系数，所述目标人脸的混合系数包括第三形状系数、第三表情系数和第三投影系数，将所述待处理人脸的混合系数与所述参考人脸的混合系数融合，得到所述目标人脸的混合系数，包括：将所述第二形状系数作为所述第三形状系数，将所述第一表情系数作为所述第三表情系数，将所述第一投影系数作为所述第三投影系数。2CN109712080A权利要求书2/3页8.根据权利要求3所述的图像处理方法，其中，获取所述参考人脸的混合系数，包括：对包含所述参考人脸的图像执行人脸检测，得到所述参考人脸的二维关键点；基于所述参考人脸的二维关键点和包含所述参考人脸的图像，执行所述三维拟合，得到所述参考人脸的混合系数。9.根据权利要求3所述的图像处理方法，其中，获取所述参考人脸的混合系数，包括：从参考人脸数据库中获取所述参考人脸的混合系数，其中，所述参考人脸数据库包括至少一个参考人脸以及每个所述参考人脸的混合系数。10.根据权利要求1所述的图像处理方法，其中，根据所述目标人脸的混合系数，对所述待处理图像中的待处理人脸执行人脸变形处理以得到包括所述目标人脸的输出图像，包括：根据所述目标人脸的混合系数得到所述目标人脸的三维关键点，其中，所述混合系数包括形状系数、表情系数和投影系数；根据所述目标人脸