用于提供增强的媒体的系统和方法.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114510626A(43)申请公布日2022.05.17(21)申请号202111209661.1G06Q30/06(2012.01)(22)申请日2021.10.18G06Q20/12(2012.01)(30)优先权数据21173750.72021.05.13EP17/0822162020.10.28US(71)申请人秀铺菲公司地址加拿大安大略省(72)发明人B·L·德尔加多S·勒鲁D·博尚(74)专利代理机构中国专利代理(香港)有限公司72001专利代理师李雪娜吕传奇(51)Int.Cl.G06F16/9535(2019.01)G06T15/00(2011.01)权利要求书2页说明书45页附图21页(54)发明名称用于提供增强的媒体的系统和方法(57)摘要本公开部分涉及包括属于真实世界空间的三维（3D）空间信息的空间意识媒体。空间意识媒体可以将该3D空间信息映射到诸如图像之类的媒体，例如，以为媒体提供3D空间上下文。这可以允许用户更灵活且高效地与真实世界空间中与他们相关的虚拟内容进行交互。根据一个实施例，空间意识媒体被增强以提供覆盖有相对于真实世界空间的3D空间特征定义的3D模型的渲染的真实世界空间的图像。在增强空间意识媒体之前，可以基于3D模型和/或空间意识媒体来确定3D模型相对于真实世界空间的3D空间特征的推荐位置。CN114510626ACN114510626A权利要求书1/2页1.一种计算机实现的方法，包括：获得对物理产品的搜索查询的结果，所述搜索查询源自与用户相关联的设备处的用户输入，并且所述结果包括为所搜索的物理产品标识的多个三维3D模型；从存储器获得存储的媒体，所述存储的媒体包括如使用相机模块捕获的真实世界空间的图像，所述存储的媒体进一步包括参数，所述参数包括标识真实世界空间的3D空间特征的信息、标识相机模块当捕获图像时相对于3D空间特征的位置的信息、以及标识相机模块的相机参数的信息；以及基于所存储的媒体和多个3D模型中的至少一些来提供增强的媒体，所提供的增强的媒体包括增强的媒体的多个不同实例，所述增强的媒体的多个不同实例每个包括覆盖有所搜索的物理产品的渲染的真实世界空间的图像的至少一部分，所述增强的媒体是从相对于所存储的媒体参数定义的所述多个3D模型中的至少一些中的相应一个生成的。2.根据权利要求1所述的计算机实现的方法，其中输出增强的媒体的多个不同实例以用于在设备上同时显示。3.根据权利要求1所述的计算机实现的方法，其中：所述图像是从第一视角与用户相关联的真实世界空间的第一图像；所述存储的媒体进一步包括从第二视角与用户相关联的真实世界空间的第二图像；以及所提供的增强的媒体进一步包括增强的媒体的不同实例，每个实例包括覆盖有如从相对于3D空间特征定义的所述多个3D模型中的至少一些中的相应一个生成的所搜索的物理产品的渲染的真实世界空间的第二图像的至少一部分。4.根据权利要求3所述的计算机实现的方法，其中提供增强的媒体包括基于第一视角来渲染所述3D模型中的至少一些。5.根据权利要求3所述的计算机实现的方法，其中提供增强的媒体包括基于第二视角来渲染所述3D模型中的至少一些。6.根据权利要求3所述的计算机实现的方法，进一步包括：当设备正在显示增强的媒体的多个不同实例中的增强的媒体的第一实例时，从设备接收相对于真实世界空间的3D空间特征虚拟地重新定位所述多个3D模型中的至少一些中的特定3D模型的指令，其中所述增强的媒体的第一实例包括覆盖有相对于3D空间特征定义的特定3D模型的渲染的真实世界空间的第一图像的至少一部分；基于指令，相对于真实世界空间的3D空间特征重新定义特定3D模型；提供增强的媒体的更新的第一实例，所述增强的媒体的更新的第一实例包括覆盖有相对于真实世界空间的3D空间特征重新定义的特定3D模型的第一更新渲染的第一图像的至少一部分；从设备接收显示基于第二图像的增强的媒体的更新的第二实例的指令；以及提供包括覆盖有相对于真实世界空间的3D空间特征重新定义的特定3D模型的第二更新渲染的第二图像的至少一部分的增强的媒体的更新的第二实例。7.根据权利要求3所述的计算机实现的方法，其中所述存储的媒体包括真实世界空间的视频，第一图像对应于视频的第一帧，以及第二图像对应于视频的第二帧。8.根据权利要求3所述的计算机实现的方法，进一步包括生成所存储的媒体，所述生成2CN114510626A权利要求书2/2页包括：基于真实世界空间的3D扫描来标识3D空间特征；捕获真实世界空间的第一图像；在捕获第一图像之后，在真实世界空间的3D扫描内重新初始化设备；以及在重新初始化设备之后，使用设备捕获真实世界空间的第二图像。9.根据权利要求8所述的计算机实现的方法，其中在真实世界空