用于在渲染图像中使用的可重新照明纹理.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN105374065A(43)申请公布日2016.03.02(21)申请号201510484716.8(22)申请日2015.08.07(30)优先权数据1414144.42014.08.08GB1418090.52014.10.13GB1418092.12014.10.13GB1418093.92014.10.13GB(71)申请人想象技术有限公司地址英国赫特福德郡(72)发明人J·伊姆伯A·希尔顿J-Y·吉耶莫特(74)专利代理机构北京市金杜律师事务所11256代理人王茂华潘聪(51)Int.Cl.G06T15/50(2011.01)权利要求书2页说明书20页附图8页(54)发明名称用于在渲染图像中使用的可重新照明纹理(57)摘要可重新照明的自由视点渲染允许基于来自多个照相机视点的场景的多视图的场景的新视图被渲染和重新照明。可将来自多个照相机视点的图像值分离成漫射图像分量和镜面反射图像分量，使得通过使用分离的漫反射图像分量可以确定镜面反射场景的可重新照明纹理的本征颜色分量。而且，通过基于初始表面法线场的保守分量构建高度映射，然后基于所构建的高度映射确定细化的表面法线，可以对场景中几何的表面法线进行细化。CN105374065ACN105374065A权利要求书1/2页1.一种确定在场景的一个或多个图像中可见的对象的表面的表面法线估计的方法，其中所述对象由从所述场景的所述一个或多个图像构建的几何表示，所述方法包括：获得所述对象的所述表面的表面法线估计，所述表面法线估计表示第一表面法线场；基于所述第一表面法线场的保守分量构建所述对象的所述表面的高度映射；使用所述高度映射来确定所述对象的所述表面的细化表面法线估计，所述细化表面法线估计表示所述对象的所述表面的保守表面法线场；以及存储所述细化表面法线估计以用于在渲染所述对象的图像中的后续使用。2.根据权利要求1所述的方法，其中所述获得所述对象的所述表面的表面法线估计包括：确定所述场景的照明估计；确定所述对象的所述表面的表面阴影估计；以及使用所述对象的所述表面的所确定的照明估计和所确定的表面阴影估计来确定所述对象的所述表面的所述表面法线估计。3.根据权利要求2所述的方法，其中所述确定所述表面法线估计还使用从构建自所述场景的所述一个或多个图像的所述几何而预测的所述对象的粗糙表面法线。4.根据权利要求3所述的方法，其中所述确定所述表面法线估计包括：对于多个样本位置中的每个样本位置，找到最小化包括所述样本位置的所确定的表面阴影估计和所述表面法线的方向的所确定的照明估计之间的差异的测量的误差量度的所述表面法线，其中所述误差量度还包括正则项，所述正则项是所述样本位置的所述表面法线与从构建自所述场景的所述一个或多个图像的所述几何而预测的所述样本位置的粗糙表面法线之间的差异的函数。5.根据前述任一项权利要求所述的方法，还包括分析所述场景的所述一个或多个图像以构建表示所述对象的所述几何。6.根据前述任一项权利要求所述的方法，其中所述第一表面法线场是包括非保守分量和所述保守分量的非保守场。7.根据前述任一项权利要求所述的方法，其中所述第一表面法线场的发散在所述构建所述对象的所述表面的高度映射中被使用，使得基于所述第一表面法线场的所述保守分量来构建所述高度映射。8.根据前述任一项权利要求所述的方法，其中使用泊松方程版本来构建所述高度映射。9.根据权利要求8所述的方法，其中基于相邻的样本位置的高度以及基于所述第一表面法线场的发散，使用迭代松弛法来确定多个样本位置中的每个样本位置处的高度。10.根据权利要求9所述的方法，其中在所述迭代松弛法的第i次迭代中，在针对所述对象的所述表面的纹理的样本位置(x，y)处的高度Hi(x，y)由下式给出：其中δ是相邻的样本位置之间的间隔，并且Ni是所述第一表面法线场。11.根据权利要求9或10所述的方法，其中所述松弛法在若干次迭代后终止，使得所述松弛法在会聚之前终止。2CN105374065A权利要求书2/2页12.根据前述任一项权利要求所述的方法，其中所述使用所述高度映射来确定所述对象的所述表面的细化表面法线估计包括确定所述高度映射的梯度。13.根据权利要求12所述的方法，其中所述细化表面法线估计Nr使用所述高度映射H根据等式而被确定。14.根据前述任一项权利要求所述的方法，其中从一个或多个照相机视点捕捉所述场景的所述一个或多个图像，并且其中存储的细化表面法线估计以用于在任意照明条件下从渲染视点渲染所述对象的图像中的后续使用。15.根据权利要求14所述的方法，其中所述细化表面法线估计与可重新照明纹理的本征颜色分量一起存储以用于在任意照明条件下从渲染视点渲染所述对象的图像中的后续使用。16.一种图像