一种基于增强现实的检查方法、检查设备和远程协助方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113920501A(43)申请公布日2022.01.11(21)申请号202111177170.3(22)申请日2021.10.09(71)申请人蒂姆维澳（上海）网络技术有限公司地址201600上海市松江区新桥镇千帆路288弄6号601室-2(72)发明人王加辉吕新伟(51)Int.Cl.G06V20/70(2022.01)G06V10/764(2022.01)G06V10/774(2022.01)G06T3/00(2006.01)G06T7/246(2017.01)G06T7/80(2017.01)G06F3/01(2006.01)权利要求书3页说明书11页附图5页(54)发明名称一种基于增强现实的检查方法、检查设备和远程协助方法(57)摘要本申请涉及一种基于增强现实的检查方法、检查设备和远程协助方法，其包括以下步骤：定位步骤，获取取景框内的目标图像并与数据库内的预设图像进行匹配，并基于匹配结果确定问题对象，其中，取景框设置于目镜上，目标图像为取景框对准目标物体后落入取景框内目标物体的图像；示教步骤，获取问题对象对应的解决方案，并在目镜上投映解决方案对应的示教信息。本申请具有使得非专业人员能够对热力管道进行修复的优点。CN113920501ACN113920501A权利要求书1/3页1.一种基于增强现实的检查方法，其特征在于，包括以下步骤：定位步骤，获取取景框内的目标图像并与数据库内的预设图像进行匹配，并基于匹配结果确定问题对象，其中，取景框设置于目镜上，目标图像为取景框对准目标物体后落入取景框内目标物体的图像；示教步骤，获取问题对象对应的解决方案，并在目镜上投映解决方案对应的示教信息。2.根据权利要求1所述的检查方法，其特征在于，所述定位步骤包括：对取景框内的目标物体进行拍摄并进行特征提取；基于预设特征信息与所提取特征的比较结果，识别出目标物体的种类；基于识别结果的预录入损坏特征与所提取特征的比较结果，获得目标物体的损坏信息；基于损坏信息判断目标物体是否为问题对象。3.根据权利要求1所述的检查方法，其特征在于，所述定位步骤还包括：基于问题对象判断结果连接远程协助系统；对取景框内的目标物体进行拍摄并传输至远程协助系统；获取远程协助系统发出的标定指令，并将标定点投映在目镜上，其中，标定点对应于标定指令中标定的物体；获取取景框内的标定图像并传输至远程协助系统，其中，取景框基于目镜与标定物体的距离进行选取而得，标定图像为取景框对准标定物体后落入取景框内标定物体的图像，标定物体基于远程协助系统的指令被拆卸；基于远程协助系统的判断被标定的物体是否为问题对象。4.根据权利要求1所述的检查方法，其特征在于，所述示教步骤包括：基于问题对象判断结果自动或手动连接协助系统，其中，协助系统包括本地协助系统或远程协助系统；基于协助系统和显示模组在目镜上生成指示点移动轨迹，其中，问题对象相对于佩戴者眼睛在目镜上具有中心投影图像，指示点移动轨迹位于问题对象的中心投影上，指示点移动轨迹对应于问题对象解决方案的操作步骤。5.根据权利要求1所述的检查方法，其特征在于，取景框对准目标物体的步骤包括：基于目镜与目标物体的距离选择取景框，其中，纵向刻度线上的每个刻度均在作为中心以在周围形成有取景框；调整目镜的位置，以使得目标物体相对移动到取景框的中心位置。6.一种基于增强现实的远程协助方法，其特征在于，包括以下步骤：获取检查设备上传的远程图像；录入标定指令，其中，所述标定指令为基于标定物体在远程图像上的位置所输入，标定物体相对于佩戴者眼睛在目镜上具有中心投影图像，所述标定指令对应的标定点位于所述中心投影图像上的标定物体上；向检查设备输出所述标定指令；再次获取检查设备上传的远程图像，并判断远程图像中对应于取景框的物体是否为问题对象；输出所述判断结果到检查设备；2CN113920501A权利要求书2/3页再次获取检查设备上传的远程图像；录入协助指令，其中，远程图像上对应于取景框的物体为问题对象，问题对象相对于在检查设备上相对于佩戴者的眼睛具有中心投影图像，协助指令包括位于检查设备上的问题对象中心投影上的指示点移动轨迹，指示点移动轨迹对应于问题对象解决方案的操作步骤；输出所述协助指令到检查设备。7.一种用于权利要求1‑5任意一项所述检查方法的基于增强现实的检查设备，其特征在于，包括：镜架，所述镜架上形成有相互垂直的纵向参考面和横向参考面，所述横向参考面用于作为平视平面，所述纵向参考面用于作为俯仰时正视视线活动的平面；目镜，设置于镜架上，并带有位于纵向参考面上的纵向刻度线，所述纵向刻度线在横向参考面上设置有校位刻度；显示模组，设置于镜架上以用于在目镜上成像；摄像头，设置于镜架上，所述摄像头的镜