渲染图像超分辨率纹理增强方法、装置、设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112801878A(43)申请公布日2021.05.14(21)申请号202110172485.2(22)申请日2021.02.08(71)申请人广东三维家信息科技有限公司地址510000广东省广州市天河区天河软件园软件路15号（孵化二期F栋）9楼902室（仅限办公用途）(72)发明人卢燕青(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人余菲(51)Int.Cl.G06T3/40(2006.01)G06T15/00(2011.01)G06T15/06(2011.01)权利要求书2页说明书8页附图2页(54)发明名称渲染图像超分辨率纹理增强方法、装置、设备及存储介质(57)摘要本申请提供一种渲染图像超分辨率纹理增强方法、装置、设备及存储介质，其中，渲染图像超分辨率纹理增强方法包括步骤：生成目标场景的第一分辨率的渲染效果图；生成所述目标场景的第二分辨率的无光照纹理图、第二分辨率的无光照带凹凸纹理的法线图、第二分辨率的渲染效果图，所述第二分辨率大于所述第一分辨率；根据预设数据组合算法将所述第二分辨率的无光照纹理图、所述第二分辨率的无光照带凹凸纹理的法线图合成一合成图；根据超分辨率重建算法和所述合成图将所述目标场景的第一分辨率的渲染效果图重建为第二分辨率的渲染效果图。本申请能够在保证将低分辨率的图像渲染成高分辨率的图像的同时，降低渲染耗时及计算量。CN112801878ACN112801878A权利要求书1/2页1.一种渲染图像超分辨率纹理增强方法，其特征在于，所述方法包括：生成目标场景的第一分辨率的渲染效果图；生成所述目标场景的第二分辨率的无光照纹理图、第二分辨率的无光照带凹凸纹理的法线图、第二分辨率的渲染效果图，所述第二分辨率大于所述第一分辨率；根据预设数据组合算法将所述第二分辨率的无光照纹理图、所述第二分辨率的无光照带凹凸纹理的法线图合成一合成图；基于所述第二分辨率的渲染效果图，根据超分辨率重建算法和所述合成图将所述目标场景的第一分辨率的渲染效果图重建为所述目标场景在所述第二分辨率下的重建渲染效果图。2.如权利要求1所述的方法，其特征在于，所述基于所述第二分辨率的渲染效果图，根据超分辨率重建算法和所述合成图将所述目标场景的第一分辨率的渲染效果图重建为所述目标场景在所述第二分辨率下的重建渲染效果图，包括：将所述合成图、所述目标场景的第一分辨率的渲染效果图作为对抗网络的输入，以使得所述对抗网络输出所述重建渲染效果图。3.如权利要求2所述的方法，其特征在于，所述对抗网络包括生成器和鉴别器，所述生成器包括第一卷积网络和第二卷积网络，所述第一卷积网络用于提取所述目标场景的第一分辨率的渲染效果图、所述合成图的图像特征，所述第二卷积网络用于根据所述图像特征输出候选分辨率的渲染效果图；所述鉴别器用于将所述候选分辨率的渲染效果图与所述第二分辨率的渲染效果图进行迭代比较计算，使得所述生成器学习第一分辨率与第二分辨率之间的重建映射关系。4.如权利要求2所述的方法，其特征在于，所述生成目标场景的第一分辨率的渲染效果图，包括：根据光线追踪算法对目标场景进行渲染并得到所述目标场景的第一分辨率的渲染效果图。5.如权利要求2所述的方法，其特征在于，所述根据预设数据组合算法将所述第二分辨率的无光照纹理图、所述第二分辨率的无光照带凹凸纹理的法线图合成一合成图，包括：将所述第二分辨率的无光照纹理图与所述第二分辨率的无光照带凹凸纹理的法线图进行做差运算，并得到第一运算结果；根据所述第一运算结果的绝对值得到所述合成图。6.一种渲染图像超分辨率纹理增强装置，其特征在于，所述装置包括：第一生成模块，用于生成目标场景的第一分辨率的渲染效果图；第二生成模块，用于生成所述目标场景的第二分辨率的无光照纹理图、第二分辨率的无光照带凹凸纹理的法线图、第二分辨率的渲染效果图，所述第二分辨率大于所述第一分辨率；图案合成模块，用于根据预设数据组合算法将所述第二分辨率的无光照纹理图、所述第二分辨率的无光照带凹凸纹理的法线图合成一合成图；重建模块，用于基于所述第二分辨率的渲染效果图，根据超分辨率重建算法和所述合成图将所述目标场景的第一分辨率的渲染效果图重建为所述目标场景在所述第二分辨率下的重建渲染效果图。2CN112801878A权利要求书2/2页7.如权利要求6所述的装置，其特征在于，所述重建模块执行基于所述第二分辨率的渲染效果图，根据超分辨率重建算法和所述合成图将所述目标场景的第一分辨率的渲染效果图重建为所述目标场景在所述第二分辨率下的重建渲染效果图，包括：将所述合成图、所述目标场景的第一分辨率的渲染效果图作为对抗网络的输入，以使得所述对抗网络输出所述目标场景所述重建渲染图。8.如权