显示方法及装置、设备、存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113012299A(43)申请公布日2021.06.22(21)申请号202110198389.5H04N13/239(2018.01)(22)申请日2021.02.22H04N13/296(2018.01)(71)申请人北京市商汤科技开发有限公司地址100080北京市海淀区北四环西路58号11层1101-1117室(72)发明人侯欣如栾青郑少林(74)专利代理机构北京派特恩知识产权代理有限公司11270代理人刘晖铭张颖玲(51)Int.Cl.G06T19/00(2011.01)G06T15/00(2011.01)G06T15/60(2006.01)G06F3/01(2006.01)G06F3/14(2006.01)权利要求书2页说明书13页附图4页(54)发明名称显示方法及装置、设备、存储介质(57)摘要本申请实施例公开了显示方法及装置、设备、存储介质；其中，所述方法包括：根据获取的当前真实场景的第一图像数据，对所述当前真实场景进行三维重建，得到与所述当前真实场景匹配的三维场景模型；获取所述当前真实场景的第二图像数据以及与所述第二图像数据对应的渲染效果参数；在利用所述渲染效果参数在所述第二图像数据上渲染特定虚拟对象的情况下，根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的增强现实AR效果，并在显示设备上显示所述AR效果。CN113012299ACN113012299A权利要求书1/2页1.一种显示方法，其特征在于，所述方法包括：根据获取的当前真实场景的第一图像数据，对所述当前真实场景进行三维重建，得到与所述当前真实场景匹配的三维场景模型；获取所述当前真实场景的第二图像数据以及与所述第二图像数据对应的渲染效果参数；在利用所述渲染效果参数在所述第二图像数据上渲染特定虚拟对象的情况下，根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的增强现实AR效果，并在显示设备上显示所述AR效果。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取所述当前真实场景的图像集合，所述图像集合是由所述显示设备的双目摄像头在当前时刻之前的第一时间段内多次拍摄得到的；从所述图像集合中，选取目标图像对作为所述第一图像数据。3.根据权利要求2所述的方法，其特征在于，所述从所述图像集合中，选取目标图像对作为所述第一图像数据，包括：从所述图像集合中，选取拍摄时间差满足同步精度的第一目标图像和第二目标图像作为所述目标图像对，并将所述目标图像对作为所述第一图像数据；其中，所述第一目标图像是所述双目摄像头的第一摄像头在所述当前真实场景中拍摄得到的；所述第二目标图像是所述双目摄像头的第二摄像头在所述当前真实场景中拍摄得到的。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：获取历史目标图像对集合，所述历史目标图像对集合包括在当前时刻之前的第二时间段内拍摄得到的多个历史目标图像对和每一所述历史目标图像对的拍摄时间差；根据每一所述历史目标图像对的拍摄时间差，对所述双目摄像头的硬件参数进行调整，以使所述双目摄像头在下一时刻的拍摄时间差缩小。5.根据权利要求4所述的方法，其特征在于，所述根据每一所述历史目标图像对的拍摄时间差，对所述双目摄像头的硬件参数进行调整，以使所述双目摄像头在下一时刻的拍摄时间差缩小，包括：根据每一所述历史目标图像对的拍摄时间差，确定拍摄时间差的均值；根据所述均值对所述双目摄像头的硬件参数进行调整，以使所述双目摄像头在下一时刻的拍摄时间差小于所述均值。6.根据权利要求1至5任一项所述的方法，其特征在于，所述根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的AR效果，包括：确定所述三维场景模型中的阴影信息；根据所述三维场景模型中的阴影信息，对所述特定虚拟对象进行阴影效果渲染，得到具有阴影效果的虚拟对象；生成所述第二图像数据与所述具有阴影效果的虚拟对象相叠加的AR效果。7.根据权利要求2至5任一项所述的方法，其特征在于，所述根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的AR效果，包括：从所述三维场景模型中，确定与所述双目摄像头之间的距离小于特定阈值的目标对2CN113012299A权利要求书2/2页象；在所述第二图像数据包含的所述目标对象上叠加所述特定虚拟对象，得到AR效果。8.根据权利要求7所述的方法，其特征在于，所述在所述第二图像数据包含的所述目标对象上叠加所述特定虚拟对象，得到AR效果，包括：确定所述第二图像数据中待模糊化处理的目标图像区域，所述目标图像区域包括所述目标对象所在区域以外的部分区域；对所述第二图像数据中的所述目标图像区域进行模糊化处理，得到背景虚化图像；在所述背景虚化