AR数据的展示方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112991556A(43)申请公布日2021.06.18(21)申请号202110514210.2(22)申请日2021.05.12(71)申请人航天宏图信息技术股份有限公司地址100195北京市海淀区西杉创意园四区5号楼3层301室(72)发明人王宇翔王帅王娟程欢廖通逵(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人唐菲(51)Int.Cl.G06T19/00(2011.01)G06K9/62(2006.01)G06T15/00(2011.01)G06T15/04(2011.01)权利要求书2页说明书10页附图5页(54)发明名称AR数据的展示方法、装置、电子设备及存储介质(57)摘要本申请提供一种AR数据的展示方法、装置、电子设备及存储介质，方法包括：获取现实世界的图像序列和电子设备的运动信息；基于图像序列和运动信息，确定相对于现实世界的虚拟世界的第一坐标位姿；基于图像序列和第一坐标位姿，确定用于放置预设AR模型的目标平面和现实世界的光照信息；将图像序列、第一坐标位姿、目标平面、光照信息和预设AR模型进行结合渲染，得到AR世界，并展示AR世界。本申请能够基于电子设备的位姿变化而追踪预设AR模型的位姿，以及通过光照信息使得预设AR模型与现实世界融合的更加真实，并基于位姿变化，展示预设AR模型的表面动态变化，提高预设AR模型的展示效果。CN112991556ACN112991556A权利要求书1/2页1.一种AR数据的展示方法，其特征在于，应用于电子设备，所述方法包括：获取现实世界的图像序列和所述电子设备的运动信息；基于所述图像序列和所述运动信息，确定相对于所述现实世界的虚拟世界的第一坐标位姿；基于所述图像序列和所述第一坐标位姿，确定用于放置预设AR模型的目标平面和所述现实世界的光照信息；将所述图像序列、所述第一坐标位姿、所述目标平面、所述光照信息和所述预设AR模型进行结合渲染，得到AR世界，并展示所述AR世界。2.根据权利要求1所述的AR数据的展示方法，其特征在于，所述基于所述图像序列和所述运动信息，确定相对于所述现实世界的虚拟世界的第一坐标位姿，包括：将所述图像序列中连续的每两张图像进行特征点匹配，得到连续的每两张图像的特征点匹配结果；根据连续的每两张图像的特征点匹配结果，确定所述电子设备的位姿变化信息；将所述位姿变化信息与所述运动信息进行对比分析，得到所述现实世界的第二坐标位姿；基于所述现实世界的第二坐标位姿，更新所述虚拟世界的第一坐标位姿。3.根据权利要求1所述的AR数据的展示方法，其特征在于，所述基于所述图像序列和所述第一坐标位姿，确定用于放置预设AR模型的目标平面和所述现实世界的光照信息，包括：对所述图像序列中的每张图像进行特征点检测，得到特征点云；将所述特征点云与预设特征点样式匹配，并将所述特征点云中与所述预设特征点样式匹配的特征点位置确定为所述目标平面；对所述图像序列中的每张图像进行亮度检测，得到每张图像的亮度信息；根据每张图像的所述亮度信息和与每张图像对应的所述第一坐标位姿，确定所述现实世界的光照信息，所述光照信息包括光照强度和光照照入角度。4.根据权利要求1所述的AR数据的展示方法，其特征在于，所述将所述图像序列、所述第一坐标位姿、所述目标平面、所述光照信息和所述预设AR模型进行结合渲染，得到AR世界，并展示所述AR世界，包括：以所述图像序列中与所述第一坐标位姿对应的图像作为所述AR世界的世界背景，将所述预设AR模型融入到所述世界背景中的所述目标平面；根据所述光照信息和所述预设AR模型的模型材质，对所述预设AR模型进行光照渲染，得到所述AR世界，展示所述AR世界。5.根据权利要求4所述的AR数据的展示方法，其特征在于，所述将所述预设AR模型融入到所述世界背景中的所述目标平面，包括：对所述世界背景进行物体检测，得到物体信息；根据所述物体信息，确定所述预设AR模型的模型大小比例；根据所述模型大小比例，调整所述预设AR模型的模型大小；将模型大小调整后的所述预设AR模型融入到所述目标平面。6.根据权利要求1所述的AR数据的展示方法，其特征在于，所述获取现实世界的图像序列和所述电子设备的运动信息，包括：2CN112991556A权利要求书2/2页初始化所述电子设备的AR展示功能，以所述电子设备的当前位置作为原点，生成所述AR世界的世界坐标系；在所述世界坐标系下，采集所述电子设备相对于所述世界坐标系的位置变化信息和角度变化信息，得到所述运动信息；以预设采集频率采集所述现实世界的现实图像，得到所述图像序列，其中每张所述现实图像对应一个所述运动信息。7.根据权利要求1所述的AR数据的展示方法，其特征在于，所述将所述