一种增强现实方法及其相关设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113066125A(43)申请公布日2021.07.02(21)申请号202110221723.4G06K9/62(2006.01)(22)申请日2021.02.27(71)申请人华为技术有限公司地址518129广东省深圳市龙岗区坂田华为总部办公楼(72)发明人李志豪邵滨吴小飞张镇嵩(74)专利代理机构深圳市深佳知识产权代理事务所(普通合伙)44285代理人王仲凯(51)Int.Cl.G06T7/73(2017.01)G06T5/50(2006.01)G06T19/00(2011.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书5页说明书29页附图14页(54)发明名称一种增强现实方法及其相关设备(57)摘要本申请提供一种增强现实方法及其相关装置，能够将虚拟物体的朝向与真实物体的朝向动态关联，使得目标图像中呈现的真实物体和虚拟物体结合更加逼真，提高用户体验。本申请的方法包括：获取相机拍摄的目标图像，和第一物体在目标图像中的第一位置信息；获取第二物体在相机对应的三维坐标系中的第二位置信息，和第三物体在三维坐标系中的第三位置信息，第二物体为第一物体的参照物；根据第一位置信息和第二位置信息，获取第一物体相对于第二物体的位姿变化量；根据位姿变化量对第三位置信息进行变换，以得到第三物体在三维坐标系中的第四位置信息；根据第四位置信息在目标图像中渲染第三物体，以得到新的目标图像。CN113066125ACN113066125A权利要求书1/5页1.一种增强现实方法，其特征在于，包括：响应于用户的第一操作，显示目标图像，第一物体呈现在所述目标图像中，所述第一物体为真实环境中的物体；响应于用户的第二操作，在所述目标图像中呈现虚拟物体，所述虚拟物体叠加在所述第一物体上；响应于所述第一物体的移动，更新所述第一物体在所述目标图像中的位姿，以及更新所述虚拟物体在所述目标图像中的位姿，以得到新的目标图像；其中，所述位姿包括位置和朝向，所述虚拟物体的朝向与所述第一物体的朝向相关联。2.根据权利要求1所述的方法，其特征在于，在所述新的目标图像中，所述虚拟物体的朝向与所述第一物体的朝向相同，且更新所述第一物体和所述虚拟物体的位姿之后所述虚拟物体与所述第一物体之间的相对位置不变。3.根据权利要求1或2所述的方法，其特征在于，所述第一物体为人体，所述虚拟物体为虚拟翅膀。4.根据权利要求1至3任一项所述的方法，其特征在于，所述第一操作为开启应用的操作，所述第二操作为添加特效的操作。5.一种增强现实方法，其特征在于，所述方法包括：获取目标图像，和第一物体在所述目标图像中的第一位置信息；获取第二物体在三维坐标系中的第二位置信息，和第三物体在所述三维坐标系中的第三位置信息，所述第二物体为所述第一物体的参照物，所述第二位置信息和所述第三位置信息为预置的信息；根据所述第一位置信息和所述第二位置信息，获取所述第一物体相对于所述第二物体的位姿变化量；根据所述位姿变化量对所述第三位置信息进行变换，以得到所述第三物体在所述三维坐标系中的第四位置信息；根据所述第四位置信息在所述目标图像中渲染所述第三物体，以得到新的目标图像。6.根据权利要求5所述的方法，其特征在于，所述根据所述第一位置信息和所述第二位置信息，获取所述第一物体相对于所述第二物体的位姿变化量包括：获取所述第一物体的深度信息；根据所述第一位置信息和所述深度信息，获取所述第一物体在所述三维坐标系中的第五位置信息；根据所述第二位置信息和所述第五位置信息，得到所述第一物体相对于所述第二物体的位姿变化量。7.根据权利要求5所述的方法，其特征在于，所述根据所述第一位置信息和所述第二位置信息，获取所述第一物体相对于所述第二物体的位姿变化量包括：对所述第二位置信息进行变换，以得到第一物体在所述三维坐标系中的第五位置信息；将所述第五位置信息投影至所述目标图像，得到第六位置信息；若所述第六位置信息与所述第一位置信息之间的变化量满足预置的条件，则所述第一物体相对于所述第二物体的位姿变化量为用于对所述第二位置信息进行变换的变换矩阵。2CN113066125A权利要求书2/5页8.根据权利要求6或7所述的方法，其特征在于，所述根据所述第四位置信息在所述目标图像中渲染所述第三物体，得到新的目标图像包括：根据所述第四位置信息进行小孔成像，以得到所述第三物体的图像；获取所述第三物体与所述第一物体之间的遮挡关系；根据所述遮挡关系将所述第三物体的图像和所述第一物体的图像进行融合，以得到新的目标图像。9.根据权利要求8所述的方法，其特征在于，所述获取所述第三物体与所述第一物体之间的遮挡关系包括：根据所述第五位置信息计算所述第一物体与所述三维坐标系