图像显示方法及装置、设备、计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111833458A(43)申请公布日2020.10.27(21)申请号202010624327.1G06T19/20(2011.01)(22)申请日2020.06.30G06N3/02(2006.01)(71)申请人北京市商汤科技开发有限公司地址100080北京市海淀区北四环西路58号11层1101-1117室(72)发明人侯欣如(74)专利代理机构北京派特恩知识产权代理有限公司11270代理人刘鹤张颖玲(51)Int.Cl.G06T19/00(2011.01)G06T15/00(2011.01)G06K9/00(2006.01)G06T7/11(2017.01)G06T7/194(2017.01)权利要求书2页说明书12页附图10页(54)发明名称图像显示方法及装置、设备、计算机可读存储介质(57)摘要本公开提供了一种图像显示方法、装置、设备及计算机可读存储介质，所述方法包括：采集真实场景图像，并获取与真实场景图像对应的虚拟对象数据；基于真实场景图像，确定虚拟对象数据对应的虚拟对象的显示数据；基于显示数据以及虚拟对象数据，进行渲染处理得到虚拟效果图像，虚拟效果图像中的虚拟对象不被真实场景图像中的真实对象遮挡；在显示设备上展示真实场景图像与虚拟效果图像相叠加的增强现实效果。通过本公开，能够提高展示的灵活性和丰富性。CN111833458ACN111833458A权利要求书1/2页1.一种图像显示方法，其特征在于，所述方法包括：采集真实场景图像，并获取与所述真实场景图像对应的虚拟对象数据；基于所述真实场景图像，确定所述虚拟对象数据对应的虚拟对象的显示数据；基于所述显示数据以及所述虚拟对象数据，进行渲染处理得到虚拟效果图像，所述虚拟效果图像中的虚拟对象不被所述真实场景图像中的真实对象遮挡；在显示设备上展示所述真实场景图像与所述虚拟效果图像相叠加的增强现实效果。2.根据权利要求1所述的方法，其特征在于，所述基于所述真实场景图像，确定所述虚拟对象数据对应的虚拟对象的显示数据，包括：基于所述真实场景图像，确定所述虚拟对象在所述真实场景图像中的目标区域，和/或，与所述虚拟对象相关的至少一个真实对象所对应的三维模型的显示参数。3.根据权利要求2所述的方法，其特征在于，所述基于所述真实场景图像，确定所述虚拟对象在所述真实场景图像中的目标区域，包括：对所述真实场景图像进行识别，得到所述真实场景图像中背景区域；将所述背景区域中的至少部分区域，确定为所述目标区域。4.根据权利要求2所述的方法，其特征在于，所述基于所述真实场景图像，确定所述虚拟对象在所述真实场景图像中的目标区域，包括：确定所述真实场景图像中，与所述虚拟对象对应的目标真实对象；其中，所述目标真实对象为所述真实场景图像中多个真实对象中的至少一个；对所述目标真实对象所处的局部图像进行边缘检测，得到所述目标真实对象的边缘轮廓线；基于所述目标真实对象的边缘轮廓线，确定所述目标区域。5.根据权利要求4所述的方法，其特征在于，所述基于所述目标真实对象的边缘轮廓线，确定所述目标区域之前，还包括：获取采集所述真实场景图像时的视角信息；所述基于所述目标真实对象的边缘轮廓线，确定所述目标区域，包括：基于所述视角信息和所述目标真实对象的边缘轮廓线，确定所述目标区域。6.根据权利要求2-5任一项所述的方法，其特征在于，所述基于所述真实场景图像，确定所述虚拟对象在所述真实场景图像中的目标区域，包括：确定所述虚拟对象在所述真实场景图像中的占据面积；若所述占据面积小于所述真实场景图像的背景区域的面积，则确定所述背景区域的部分区域为所述目标区域；若所述占据面积大于所述背景区域的面积，则基于所述真实场景图像中的目标真实对象的边缘轮廓线，确定所述目标区域。7.根据权利要求2-6任一项所述的方法，其特征在于，所述确定与所述虚拟对象相关的至少一个真实对象所对应的三维模型的显示参数，包括：在所述虚拟对象与所述真实场景图像中至少一个真实对象所对应的三维模型的部分区域重叠的情况下，调整所述至少一个真实对象所对应的三维模型的部分区域的显示参数，得到调整后的显示参数，以使在利用调整后的显示参数显示所述至少一个真实对象的三维模型时，所述虚拟对象不被所述至少一个真实对象遮挡。2CN111833458A权利要求书2/2页8.根据权利要求1-7任一项所述的方法，其特征在于，所述确定与所述虚拟对象相关的至少一个真实对象所对应的三维模型的显示参数之前，还包括：获取所述真实场景图像的图像信息和深度信息；根据所述真实场景图像的图像信息和深度信息，对所述真实场景图像中的多个真实对象进行三维建模，得到所述多个真实对象的三维模型；所述多个真实对象包含所述至少一个真实对象。9.根