增强现实场景展现方法、装置及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110378990A(43)申请公布日2019.10.25(21)申请号201910592392.8(22)申请日2019.07.03(71)申请人北京悉见科技有限公司地址100000北京市海淀区西三旗昌临813号16B101室(72)发明人徐宝平刘洋(74)专利代理机构北京康盛知识产权代理有限公司11331代理人李晓芳(51)Int.Cl.G06T15/00(2011.01)G06T19/00(2011.01)权利要求书2页说明书10页附图6页(54)发明名称增强现实场景展现方法、装置及存储介质(57)摘要本申请涉及一种增强现实场景展现的方法，包括：基于增强现实AR设备获取的真实场景画面数据，确定第一虚拟相机的当前位姿信息，其中，所述第一虚拟相机渲染的第一虚拟场景中包括窗体；在根据所述当前位姿信息确定所述第一虚拟相机位于所述窗体的第一设定方位的情况下，将所述窗体的材质基于第二虚拟相机采集的画面进行渲染；根据所述当前位姿信息，以及所述窗体的边长信息，配置所述第二虚拟相机的拍照参数；将所述第一虚拟相机采集的第一当前实时虚拟场景，以及所述第二虚拟相机采集的第二当前实时虚拟场景进行融合，并进行增强现实展现。可使得展现的窗体AR画面真实性较强，用户的接受度高。还公开了增强现实场景展现的装置以及计算机可读存储介质。CN110378990ACN110378990A权利要求书1/2页1.一种增强现实场景展现的方法，其特征在于，包括：基于增强现实AR设备获取的真实场景画面数据，确定第一虚拟相机的当前位姿信息，其中，所述第一虚拟相机渲染的第一虚拟场景中包括窗体；在根据所述当前位姿信息确定所述第一虚拟相机位于所述窗体的第一设定方位的情况下，将所述窗体的材质基于第二虚拟相机采集的画面进行渲染；根据所述当前位姿信息，以及所述窗体的边长信息，配置所述第二虚拟相机的拍照参数；将所述第一虚拟相机采集的第一当前实时虚拟场景，以及所述第二虚拟相机采集的第二当前实时虚拟场景进行融合，并进行增强现实展现。2.根据权利要求1所述的方法，其特征在于，所述确定第一虚拟相机的当前位姿信息包括：基于AR设备获取的真实场景画面数据，通过相机位姿估计(PNP)运算，得到第一虚拟相机的当前位姿信息。3.根据权利要求1所述的方法，其特征在于，所述配置所述第二虚拟相机的拍照参数包括：根据第一虚拟相机与第二虚拟相机之间的位置转换关系，确定与所述当前位姿信息中第一当前位置信息对应的第二当前位置信息，其中，所述位置转换关系是根据所述第一虚拟相机的第一初始位置信息，以及所述第二虚拟相机的第二初始位置确定的；根据所述当前位姿信息，以及所述窗体的边长信息，确定第二虚拟相机的当前拍摄角度信息；根据所述第二当前位置信息，所述当前拍摄角度信息，修改所述第二虚拟相机对应的拍照参数，并维持所述第二虚拟相机向着所述第二初始位置的朝向不变。4.根据权利要求3所述的方法，其特征在于，所述确定与所述当前位姿信息中第一当前位置信息对应的第二当前位置信息包括：根据第一虚拟相机与第二虚拟相机之间的位置转换矩阵，确定与所述当前位姿信息中第一当前位置信息矩阵变换后得到的位置信息；将所述矩阵变换后得到的位置信息进行向量归一处理，得到钳制在设定范围内的第二当前位置信息。5.根据权利要求3所述的方法，其特征在于，所述确定第二虚拟相机的当前拍摄角度信息包括：根据所述当前位姿信息，确定所述第一虚拟相机与所述窗体之间的相对距离信息；根据所述窗体的边长信息、以及所述相对距离信息进行正切运算，得到所述第二虚拟相机的当前拍摄角度信息。6.根据权利要求1所述的方法，其特征在于，所述进行增强现实展现包括：将融合后携带窗体AR模型的实时虚拟场景，叠加到所述真实场景画面数据上，生成AR视频流数据；加载所述AR视频流数据进行展现。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：在根据所述当前位姿信息确定所述第一虚拟相机位于所述窗体的第二设定方位的情2CN110378990A权利要求书2/2页况下，将所述第二虚拟相机对应的目标纹理层摘除，根据所述第二虚拟相机采集的所述第二当前实时虚拟场景进行增强现实显示，其中，所述第一设定方位与所述第二设定方位分别位于所述窗体的两侧。8.一种增强现实场景展现的装置，其特征在于，包括：位姿确定模块，被配置为基于增强现实AR设备获取的真实场景画面数据，确定第一虚拟相机的当前位姿信息，其中，所述第一虚拟相机渲染的第一虚拟场景中包括窗体；渲染处理模块，被配置为在根据所述当前位姿信息确定所述第一虚拟相机位于所述窗体的第一设定方位的情况下，将所述窗体的材质基于第二虚拟相机采集的画面进行渲染；参数配置模块，被配置为根据所述当前位姿信息，以及所述窗