显示处理装置、显示处理方法和程序.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111316202A(43)申请公布日2020.06.19(21)申请号201880070967.3(74)专利代理机构北京康信知识产权代理有限(22)申请日2018.10.26责任公司11240代理人吴孟秋(30)优先权数据2017-2177212017.11.10JP(51)Int.Cl.G06F3/01(2006.01)(85)PCT国际申请进入国家阶段日G06F3/0346(2006.01)2020.04.29G06F3/0484(2006.01)(86)PCT国际申请的申请数据G06F3/16(2006.01)PCT/JP2018/0398392018.10.26G09G5/00(2006.01)(87)PCT国际申请的公布数据G09G5/32(2006.01)WO2019/093156JA2019.05.16G09G5/36(2006.01)G09G5/377(2006.01)(71)申请人索尼半导体解决方案公司H04M1/00(2006.01)地址日本神奈川(72)发明人中川贵晶石川庆太权利要求书2页说明书13页附图13页(54)发明名称显示处理装置、显示处理方法和程序(57)摘要本公开涉及显示处理装置、显示处理方法以及程序，其能够在真实空间中执行虚拟显示时提供更令人满意的用户体验。指示点识别处理部执行识别指示点的识别处理，所述指示点用于指示真实空间中用于创建虚拟渲染图像(虚拟渲染图像)的点。操作信息获取部获取与对创建中的虚拟渲染图像进行改变的用户操作有关的操作信息。虚拟渲染数据处理部生成虚拟渲染数据，用于渲染根据指示点创建的虚拟渲染图像，同时包含基于操作信息的改变。基于虚拟渲染数据，虚拟渲染图像显示处理部执行显示处理，用于使显示画面实时显示正在创建的虚拟渲染图像。本技术可以应用于AR显示装置。CN111316202ACN111316202A权利要求书1/2页1.一种显示处理装置，包括：识别处理单元，被配置为执行识别处理，以识别指示点，所述指示点指示用于创建虚拟绘制图像的真实空间上的点，所述虚拟绘制图像是虚拟绘制的图像；操作信息获取单元，被配置为获取与对创建中的所述虚拟绘制图像进行改变的用户操作有关的操作信息；数据处理单元，被配置为生成用于绘制根据所述指示点创建的所述虚拟绘制图像的虚拟绘制数据，同时反映基于所述操作信息的改变；以及显示处理单元，被配置为基于所述虚拟绘制数据执行在显示画面上实时显示创建中的所述虚拟绘制图像的显示处理。2.根据权利要求1所述的显示处理装置，其中，所述操作信息获取单元响应于用户在包括显示单元的触摸面板上的触摸操作获取所述操作信息，所述显示单元显示所述显示画面。3.根据权利要求2所述的显示处理装置，其中，所述识别处理单元通过跟踪连续移动的点来识别所述指示点，所述操作信息获取单元获取与所述用户在所述触摸面板上的所述触摸操作的连续变化有关的所述操作信息，并且所述数据处理单元将由所述指示点指示的所述点的连续移动的时间与基于所述操作信息的所述连续变化的时间相关联，以生成所述虚拟绘制数据。4.根据权利要求1所述的显示处理装置，其中，所述识别处理单元通过使用由获得到物体的距离的飞行时间(TOF)传感器基于发射光的时间和接收通过所述物体反射所述光获得的反射光的时间之间的时间差获得的距离图像来识别所述指示点。5.根据权利要求1所述的显示处理装置，还包括反馈控制单元，被配置为向用户反馈正在创建所述虚拟绘制图像。6.根据权利要求1所述的显示处理装置，还包括语音识别单元，被配置为识别用户发出的语音，以获取通过对所述语音进行文字化获得的说话信息，其中，所述数据处理单元生成用于绘制其中基于所述说话信息的文字虚拟地放置在所述文字被说出时由所述指示点指示的位置的所述虚拟绘制图像的所述虚拟绘制数据。7.根据权利要求1所述的显示处理装置，还包括存储单元，被配置为存储由所述数据处理单元生成的所述虚拟绘制数据，其中，所述数据处理单元将从所述存储单元读取的所述虚拟绘制数据提供给所述显示处理单元，以执行所述虚拟绘制图像的所述显示处理。8.一种显示处理方法，所述显示处理方法由显示虚拟绘制图像的显示处理装置执行，所述虚拟绘制图像是虚拟绘制的图像，所述方法包括：执行识别处理，以识别指示点，所述指示点指示用于创建所述虚拟绘制图像的真实空间上的点；获取与对创建中的所述虚拟绘制图像进行改变的用户操作有关的操作信息；生成用于绘制根据所述指示点创建的所述虚拟绘制图像的虚拟绘制数据，同时反映基2CN111316202A权利要求书2/2页于所述操作信息的改变；并且执行基于所述虚拟绘制数据在显示画面上实时显示创建中的所述虚拟绘制图像的显示处理。9.一种用于使显示处理装置的计算