动态三维成像方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113614791A(43)申请公布日2021.11.05(21)申请号202080023405.0(74)专利代理机构北京易光知识产权代理有限(22)申请日2020.02.03公司11596代理人武晨燕(30)优先权数据FR19010132019.02.01FR(51)Int.Cl.G06T17/00(2006.01)(85)PCT国际申请进入国家阶段日G06T7/593(2006.01)2021.09.23(86)PCT国际申请的申请数据PCT/IB2020/0508382020.02.03(87)PCT国际申请的公布数据WO2020/157733FR2020.08.06(71)申请人O·酷睿柏斯地址法国新市区申请人V·酷睿柏斯-杜兰特(72)发明人O·酷睿柏斯V·酷睿柏斯-杜兰特权利要求书2页说明书8页附图4页(54)发明名称动态三维成像方法(57)摘要本文公开了一种允许生成呈现被观察的三维场景的三维数值模型的动态三维成像方法。生成的模型最优地结合(404)来自两个中间三维数值模型的数据，两个中间三维数值模型分别通过立体三维重构计算方法(402)和通过学习的三维重构计算方法(403)获得。此外，生成的每个新模型帮助提高通过学习的三维重构计算方法的整体性能。CN113614791ACN113614791A权利要求书1/2页1.一种动态三维成像方法，包括由计算单元执行的下列步骤：接收呈现被观察的三维场景的至少两个二维数字图像，所述至少两个二维数字图像由至少一个确定的图像传感器从空间中的至少两个相应位置获取；基于立体三维重构计算方法，从所述二维数字图像生成与所述被观察的三维场景相关联的第一中间三维数值模型；基于通过学习的三维重构计算方法，从所述二维数字图像生成与所述被观察的三维场景相关联的第二中间三维数值模型；通过所述第一中间三维数值模型和第二中间三维数值模型的结合生成最终三维数值模型，所述生成包括：针对所述最终三维数值模型的确定部分，基于针对所述部分的所述第一中间三维数值模型和第二中间三维数值模型的至少一个特征参数的比较，选择所述第一中间三维数值模型和第二中间三维数值模型的确定部分的相应部分，最大化所述被观察的三维场景的呈现质量标准，所述特征参数代表所述被观察的三维场景的呈现质量；在存储器中存储数字信息，所述数字信息包括至少一个接收到的二维数字图像、与所述二维数字图像相关联的最终三维数值模型、以及代表所述被观察的三维场景的呈现质量的所述最终三维数值模型的特征参数；以及使用存储的数字信息作为学习数据，以训练和再训练所述计算单元执行通过学习的三维重构计算方法。2.根据权利要求1所述的方法，进一步包括通过至少一个确定的图像传感器，优选CMOS型或CCD型的无源视频传感器，获取呈现所述被观察的三维场景的二维数字图像。3.根据权利要求1或2所述的方法，进一步包括通过显示装置显示所述最终三维数值模型，所述显示装置诸如为二维扫描或LED显示屏、虚拟或增强现实眼镜、或三维显示屏。4.根据权利要求1至3中的一项所述的方法，其中，通过结合所述第一中间三维数值模型和第二中间三维数值模型生成所述最终三维数值模型包括：如果仅第一中间三维数值模型或第二中间三维数值型模具有用于为所述被观察的三维场景的呈现的给定部分建模的三维像素的值，则该值被分派到所述最终三维数值模型；如果第一中间三维数值模型或第二中间三维数值模型两者都具有用于为所述被观察的三维场景的呈现的给定部分建模的三维像素的值，则分派到所述最终三维数值模型的值基于所述三维数值模型的至少一个特征参数的比较从这两个相应的值中选择，所述特征参数与该三维像素的值相关联；以及如果没有三维数值模型具有用于为所述被观察的三维场景的呈现的给定部分建模的三维像素的值，则没有值被分派到该三维像素，或者被分派到该三维像素的值根据平滑计算方法确定。5.根据权利要求1至4中的一项所述的方法，其中，所述第二中间三维数值模型的生成在所述第一中间三维数值模型的生成之间执行，并且其中，生成的第二中间三维数值模型被用作通过立体三维重构计算方法生成所述第一中间三维数值模型的先验。6.根据权利要求1至5中的一项所述的方法，其中，所述三维数值模型的特征参数是与所述三维数值模型的每个值相关联的不确定性。7.根据权利要求1至6中的一项所述的方法，其中，由所述计算单元用来训练和再训练通过学习的三维重构计算方法的学习数据包括：2CN113614791A权利要求书2/2页来自共享或不共享的数据库的数据，包括二维数字图像和相关联的三维数值模型；和/或包括二维数字图像和相关联的三维数值模型的数据，该数据由另一计算单元执行所述方法而产生；和/或包括二维数字图像和相关联的三维数值