图像渲染方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113313631A(43)申请公布日2021.08.27(21)申请号202110645988.7(22)申请日2021.06.10(71)申请人北京百度网讯科技有限公司地址100085北京市海淀区上地十街10号百度大厦2层(72)发明人郭紫垣赵亚飞陈超张世昌(74)专利代理机构北京英赛嘉华知识产权代理有限责任公司11204代理人王达佐马晓亚(51)Int.Cl.G06T3/40(2006.01)G06T13/40(2011.01)G06T15/00(2011.01)权利要求书2页说明书8页附图5页(54)发明名称图像渲染方法和装置(57)摘要本公开提供了图像渲染方法和装置，涉及图像处理增强现实和深度学习等人工智能领域。具体实现方案为：获取人脸图像；基于人脸图像进行人脸建模，生成原始模型；将人脸图像转换成分辨率提高预定倍数的目标图像；将原始模型放大预定倍数，生成目标模型；基于目标图像对目标模型进行渲染。该实施方式使得经渲染得到的图像更加清晰、自然。CN113313631ACN113313631A权利要求书1/2页1.一种图像渲染方法，包括：获取人脸图像；基于所述人脸图像进行人脸建模，生成原始模型；将所述人脸图像转换成分辨率提高预定倍数的目标图像；将所述原始模型放大所述预定倍数，生成目标模型；基于所述目标图像对所述目标模型进行渲染。2.根据权利要求1所述的方法，其中，所述将所述人脸图像转换成分辨率提高预定倍数的目标图像，包括：通过超分辨率模型将所述人脸图像转换成分辨率提高预定倍数的目标图像。3.根据权利要求1所述的方法，其中，所述将所述原始模型放大所述预定倍数，生成目标模型，包括：将所述原始模型的点云之间的距离增加至预定倍数；在距离增加至所述预定倍数的点云之间插入新的点云，以生成所述目标模型。4.根据权利要求1所述的方法，其中，所述基于所述目标图像对所述目标模型进行渲染，包括：从所述目标图像中提取颜色信息，生成纹理贴图；将所述纹理贴图中每个点的颜色对应到所述目标模型的表面，在点与点之间的间隙位置进行图像光滑插值处理。5.根据权利要求1所述的方法，其中，所述获取人脸图像，包括：获取人脸视频帧集合；从所述人脸视频帧集合中检测出人脸表情为中性的人脸视频帧作为所述人脸图像。6.根据权利要求1‑5中任一项所述的方法，其中，所述方法还包括：将所述目标图像和所述目标模型存储到本地；响应于接收到表情参数，根据所述表情参数调整所述目标模型的关键点，得到调整后的目标模型；基于所述目标图像对所述调整后的目标模型进行渲染。7.一种图像渲染装置，包括：获取单元，被配置成获取人脸图像；重建单元，被配置成基于所述人脸图像进行人脸建模，生成原始模型；转换单元，被配置成将所述人脸图像转换成分辨率提高预定倍数的目标图像；放大单元，被配置成将所述原始模型放大所述预定倍数，生成目标模型；渲染单元，被配置成基于所述目标图像对所述目标模型进行渲染。8.根据权利要求7所述的装置，其中，所述转换单元进一步被配置成：通过超分辨率模型将所述人脸图像转换成分辨率提高预定倍数的目标图像。9.根据权利要求7所述的装置，其中，所述放大单元进一步被配置成：将所述原始模型的点云之间的距离增加至预定倍数；在距离增加至所述预定倍数的点云之间插入新的点云，以生成所述目标模型。10.根据权利要求7所述的装置，其中，所述渲染单元进一步被配置成：从所述目标图像中提取颜色信息，生成纹理贴图；2CN113313631A权利要求书2/2页将所述纹理贴图中每个点的颜色对应到所述目标模型的表面，在点与点之间的间隙位置进行图像光滑插值处理。11.根据权利要求7所述的装置，其中，所述获取单元进一步被配置成：获取人脸视频帧集合；从所述人脸视频帧集合中检测出人脸表情为中性的人脸视频帧作为所述人脸图像。12.根据权利要求7‑11中任一项所述的装置，其中，所述装置还包括驱动单元，被配置成：将所述目标图像和所述目标模型存储到本地；响应于接收到表情参数，根据所述表情参数调整所述目标模型的关键点，得到调整后的目标模型；基于所述目标图像对所述调整后的目标模型进行渲染。13.一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1‑6中任一项所述的方法。14.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1‑6中任一项所述的方法。15.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1‑6中任一项所述的方法。3CN113