图像生成装置、图像显示装置及图像生成方法.pdf

(19)中华人民共和国国家知识产权局*CN103379352A*(12)发明专利申请(10)申请公布号(10)申请公布号CNCN103379352103379352A(43)申请公布日2013.10.30(21)申请号201310135262.4(22)申请日2013.04.18(30)优先权数据2012-0963112012.04.20JP(71)申请人NLT科技股份有限公司地址日本神奈川县川崎市(72)发明人吴荻坂本道昭(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人关兆辉谢丽娜(51)Int.Cl.H04N13/00(2006.01)H04N13/04(2006.01)权权利要求书4页利要求书4页说明书13页说明书13页附图15页附图15页(54)发明名称图像生成装置、图像显示装置及图像生成方法(57)摘要本发明提供了一种图像生成装置、三维图像显示装置、及图像生成方法。一种用于生成虚拟视点图像的图像生成装置，包括：差异图像生成部，其通过使用深度图像和虚拟相机的参数生成对应于二维图像的差异图像；差异图像校正部，其基于从二维图像和差异图像提取的轮廓线校正该差异图像，或者基于从二维图像和深度图像提取的轮廓线校正要用于生成差异图像的深度图像；像素位移处理部，其根据所校正的差异图像对二维图像中的每个像素进行位移以生成中间图像；和未固定像素区域内插部，其对在中间图像中未向其分配经位移图像的未固定像素进行内插以生成虚拟视点图像。CN103379352ACN1037952ACN103379352A权利要求书1/4页1.一种图像生成装置，所述图像生成装置使用二维图像、表示所述二维图像的深度信息的深度图像以及布置在三维空间的虚拟位置处的虚拟相机的参数，来生成要在所述虚拟位置处利用所述虚拟相机捕捉的虚拟视点图像，所述图像生成装置包括：差异图像生成部，所述差异图像生成部通过使用所述深度图像和所述虚拟相机的所述参数生成表示所述二维图像的每个像素的差异值的差异图像；差异图像校正部，所述差异图像校正部执行以下项中的一项：基于从所述二维图像提取的轮廓线和从所述差异图像提取的轮廓线对由所述差异图像生成部生成的所述差异图像的像素中的每一个的差异值进行校正，和基于从所述二维图像提取的轮廓线和从所述深度图像提取的轮廓线对要在所述差异图像生成部中生成所述差异图像所使用的所述深度图像的像素中的每一个的深度信息进行校正；像素位移处理部，所述像素位移处理部根据已经被校正的所述差异图像对所述二维图像的每个像素进行位移以生成中间图像；和未固定像素区域内插部，所述未固定像素区域内插部对所述中间图像中还未向其分配所述二维图像的经平移像素的未固定像素进行内插以生成所述虚拟视点图像。2.根据权利要求1所述的图像生成装置，其中所述差异图像校正部从所述二维图像提取轮廓线并且从所述差异图像提取轮廓线，基于所述二维图像的轮廓线和所述差异图像的轮廓线估算出自所述差异图像的误差区域，并且对所述误差区域中的每个像素的差异值进行校正，并且其中为了对所述误差区域进行估算，所述差异图像校正部：定义所述二维图像的轮廓线的像素作为基准像素，该像素位于作为行和列之一的线中的预定的一条上，确定所述差异图像的轮廓线的两个像素，使得该两个像素在包括在所述预定的一条线附近作为行和列之一的线的区域内以最大距离沿行和列中的另一个在正方向和负方向上分开，并且将位于该两个像素之间并且沿行和列中的该另一个延伸的区域估算为所述误差区域。3.根据权利要求1所述的图像生成装置，其中所述差异图像校正部从所述二维图像提取轮廓线并且从所述深度图像提取轮廓线，基于所述二维图像的轮廓线和所述深度图像的轮廓线估算出自所述深度图像的误差区域，并且对所述误差区域中的每个像素的深度信息进行校正，并且其中为了对所述误差区域进行估算，所述差异图像校正部：定义所述二维图像的轮廓线的像素作为基准像素，该像素位于作为行和列之一的线中的预定的一条上，确定所述深度图像的轮廓线的两个像素，使得该两个像素在包括在所述预定的一条线附近作为行和列之一的线的区域内以最大距离沿行和列中的另一个在正方向和负方向上分开，并且将位于该两个像素之间并且沿行和列中的该另一个延伸的区域估算为所述误差区域。4.一种图像生成装置，所述图像生成装置使用多个二维图像来生成要利用布置在三维空间中的虚拟位置处的虚拟相机捕捉的虚拟视点图像，所述图像生成装置包括：2CN103379352A权利要求书2/4页差异图像生成部，所述差异图像生成部通过使用所述多个二维图像生成表示所述多个二维图像中的一个的每个像素的差异值的差异图像；差异图像校正部，所述差异图像校正部基于从所述多个二维图像中的所述一个提取的轮廓线和从所述差异图像提取的轮廓线，对由所述差异图像生成部生成的所述差异图像的像素中