显示控制装置、显示控制方法及程序.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110520904A(43)申请公布日2019.11.29(21)申请号201780089088.0(51)Int.Cl.(22)申请日2017.03.29G06T19/00(2006.01)(85)PCT国际申请进入国家阶段日2019.09.26(86)PCT国际申请的申请数据PCT/JP2017/0130402017.03.29(87)PCT国际申请的公布数据WO2018/179176JA2018.10.04(71)申请人乐天株式会社地址日本东京(72)发明人武笠知幸(74)专利代理机构北京律盟知识产权代理有限责任公司11287代理人林斯凯权利要求书3页说明书17页附图15页(54)发明名称显示控制装置、显示控制方法及程序(57)摘要本发明将减轻提供扩增实境(AugmentedReality)的计算机的处理负荷。显示控制装置(10)的获取机构(110)获取能够在现实空间中移动的摄影机构以特定帧率拍摄所得的摄影图像。第1显示控制机构(121)基于摄影图像推定摄影机构的当前位置与朝向，将表示从基于推定结果的虚拟视点观察到的虚拟三维物体的情况的虚拟图像与摄影图像合成后予以显示。第2显示控制机构(122)在第1显示控制机构(121)进行显示控制之后的帧中，基于与摄影机构的移动相关的移动信息对虚拟图像进行加工，并与摄影图像合成后予以显示。CN110520904ACN110520904A权利要求书1/3页1.一种显示控制装置，其特征在于包含：获取机构，获取由能够在现实空间中移动的摄影机构以特定的视频帧率拍摄所得的摄影图像；第1显示控制机构，基于所述摄影图像推定所述摄影机构的当前位置与朝向，将表示从基于推定结果的虚拟视点观察到的虚拟三维物体的情况的虚拟图像与所述摄影图像合成后予以显示；及第2显示控制机构，在所述第1显示控制机构进行显示控制之后的帧中，基于与所述摄影机构的移动相关的移动信息对所述虚拟图像进行加工，并与所述摄影图像合成后予以显示。2.根据权利要求1所述的显示控制装置，其特征在于：第1显示控制帧多次重复到来，该第1显示控制帧为所述第1显示控制机构进行显示控制的帧，在各第1显示控制帧之后，至少设定1个第2显示控制帧，该第2显示控制帧为所述第2显示控制机构进行显示控制的帧。3.根据权利要求2所述的显示控制装置，其特征在于：所述第2显示控制机构基于关于所述摄影机构相对于所述多次重复到来的所述第1显示控制帧中最近的所述第1显示控制帧的移动的所述移动信息，对该最近的第1显示控制帧中产生的所述虚拟图像进行加工。4.根据权利要求1至3中任一项所述的显示控制装置，其特征在于：所述第2显示控制机构基于所述摄影图像的特征点的变化获取所述移动信息。5.根据权利要求4所述的显示控制装置，其特征在于：所述第2显示控制机构将所述摄影图像中的与所述虚拟图像的显示位置对应的区域设为所述特征点的提取对象。6.根据权利要求1至5中任一项所述的显示控制装置，其特征在于：所述第2显示控制机构基于能够检测所述摄影机构的位置变化的传感器的检测结果与能够检测所述摄影机构的朝向变化的传感器的检测结果的至少一个，获取所述移动信息。7.根据权利要求1至6中任一项所述的显示控制装置，其特征在于：第1显示控制帧多次重复到来，该第1显示控制帧为所述第1显示控制机构进行显示控制的帧，在各第1显示控制帧之后，设定至少1个第2显示控制帧，该第2显示控制帧为所述第2显示控制机构进行显示控制的帧，所述第2显示控制机构基于利用所述第1显示控制机构所得的所述摄影机构的位置与朝向的推算结果的变化，获取所述移动信息。8.根据权利要求1至7中任一项所述的显示控制装置，其特征在于：所述第2显示控制机构基于所述移动信息，进一步决定加工后的所述虚拟图像的显示位置，在该显示位置显示加工后的所述虚拟图像。9.根据权利要求1至8中任一项所述的显示控制装置，其特征在于：所述第1显示控制机构基于能够检测所述摄影机构的位置变化的传感器的检测结果与能够检测所述摄影机构的朝向变化的传感器的检测结果的至少一个，推定所述摄影机构的2CN110520904A权利要求书2/3页当前位置与朝向。10.根据权利要求1至9中任一项所述的显示控制装置，其特征在于：所述获取机构实时获取由所述摄影机构拍摄所得的所述摄影图像，所述第1显示控制机构将实时获取的所述摄影图像与所述虚拟图像合成后予以显示，所述第2显示控制机构将实时获取的所述摄影图像与加工后的所述虚拟图像合成后予以显示。11.根据权利要求1至10中任一项所述的显示控制装置，其特征在于：第1显示控制帧多次重复到来，该第1显示控制帧为所述第1显示控制机构进行显示控制的帧，在各第1显示控制帧之后，设定至少1个第2显示