图像生成方法、装置、设备及存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116051737A(43)申请公布日2023.05.02(21)申请号202211720867.5(22)申请日2022.12.30(71)申请人东风汽车有限公司东风日产乘用车公司地址510800广东省广州市花都区风神大道12号(72)发明人张昭覃梓雨刘塞(74)专利代理机构深圳市世纪恒程知识产权代理事务所44287专利代理师胡庆(51)Int.Cl.G06T17/00(2006.01)G06T15/00(2011.01)G06T19/20(2011.01)G06T3/40(2006.01)权利要求书2页说明书9页附图5页(54)发明名称图像生成方法、装置、设备及存储介质(57)摘要本发明公开了一种图像生成方法、装置、设备及存储介质，属于三维建模技术领域。本发明通过获取输入的含待重建物体图像的原始图像集；根据所述原始图像集生成原始三维点云；将生成的原始三维点云进行压缩变换；对压缩变换后的三维点云进行渲染，并通过渲染后的三维点云生成所述待重建物体在各个不同角度的图像，利用离散余弦变换将点云所在的三维空间进行投影压缩，通过不断采样使得映射空间将更能表征真实场，通过投影压缩的方式降低了高维度带来的训练负担。CN116051737ACN116051737A权利要求书1/2页1.一种图像生成方法，其特征在于，所述图像生成方法包括：获取输入的含待重建物体图像的原始图像集；根据所述原始图像集生成原始三维点云；将生成的原始三维点云进行压缩变换；对压缩变换后的三维点云进行渲染，并通过渲染后的三维点云生成所述待重建物体在各个不同角度的图像。2.如权利要求1所述的图像生成方法，其特征在于，所述将生成的原始三维点云进行压缩变换，包括：对生成的原始三维点云进行变换，得到参考三维点云；通过所述参考三维点云进行体积压缩，得到压缩后的参考三维点云；对所述压缩后的参考三维点云进行反变换，得到压缩变换后的三维点云。3.如权利要求2所述的图像生成方法，其特征在于，所述对所述生成的原始三维点云进行变换，得到参考三维点云，包括：通过连续的三维离散余弦变换对所述原始三维点云的色彩进行变换，得到参考三维点云的变换关系式；基于重要性抽样生成采样点，所述采样点在相机拍摄方向对应的射线上；将所述采样点代入所述变换关系式得到参考三维点云。4.如权利要求2所述的图像生成方法，其特征在于，所述通过所述参考三维点云进行体积压缩，得到压缩后的参考三维点云，包括：根据所述参考三维点云确定色彩重要度；根据所述色彩重要度对所述参考三维点云进行体积压缩，得到压缩后的参考三维点云。5.如权利要求2所述的图像生成方法，其特征在于，所述对所述压缩后的参考三维点云进行反变换，得到压缩变换后的三维点云，包括：对所述压缩后的参考三维点云进行反变换，得到点云的色彩与不透明度；根据所述色彩与所述不透明度得到压缩变换后的三维点云。6.如权利要求1至5中任一项所述的图像生成方法，其特征在于，所述对压缩变换后的三维点云进行渲染，并通过渲染后的三维点云生成所述待重建物体在各个不同角度的图像，包括：获取输入的新的拍摄角度所对应的相机位姿；根据所述相机位姿以及所述压缩变换后的三维点云中像素点的位置确定新的拍摄角度所对应的拍摄射线方向；基于所述拍摄射线方向构建体积渲染关系式；根据所述体积渲染关系式对压缩变换后的三维点云的色彩进行积分，以完成渲染，以得到所述待重建物体在所述新的拍摄角度对应的图像。7.如权利要求6所述的图像生成方法，其特征在于，所述基于所述拍摄射线方向构建体积渲染关系式，包括：根据压缩变换后的三维点云所处的位置确定光线反射点与透明区域；根据所述光线反射点与所述透明区域确定所述拍摄射线方向上的光线分布函数式；2CN116051737A权利要求书2/2页基于所述光线分布函数式确定体积渲染关系式。8.一种图像生成装置，其特征在于，所述图像生成装置包括：获取模块，用于获取输入的含待重建物体图像的原始图像集；生成模块，用于根据所述原始图像集生成原始三维点云；压缩模块，用于将生成的原始三维点云进行压缩变换；渲染模块，用于对压缩变换后的三维点云进行渲染，并通过渲染后的三维点云生成所述待重建物体在各个不同角度的图像。9.一种图像生成设备，其特征在于，所述图像生成设备包括：存储器、处理器及存储在所述存储器上并在所述处理器上运行的图像生成程序，所述图像生成程序配置为实现如权利要求1至7中任一项所述的图像生成方法。10.一种存储介质，其特征在于，所述存储介质上存储有图像生成程序，所述图像生成程序被处理器执行时实现如权利要求1至7任一项所述的图像生成方法。3CN116051737A说明书1/9页图像生成方法、装置、设备及存储介质技术领域[0001]本发明涉及三维建模技术