虚拟键盘显示方法、装置、设备、介质和程序产品.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114721508A(43)申请公布日2022.07.08(21)申请号202210202499.9(22)申请日2022.03.02(71)申请人奇点临近技术（上海）有限公司地址201306上海市自由贸易试验区临港新片区环湖西二路888号C楼(72)发明人赵宇鹏(74)专利代理机构北京东方亿思知识产权代理有限责任公司11258专利代理师黄亚雄(51)Int.Cl.G06F3/01(2006.01)G06F3/04886(2022.01)权利要求书2页说明书16页附图5页(54)发明名称虚拟键盘显示方法、装置、设备、介质和程序产品(57)摘要本申请公开了一种虚拟键盘显示方法、装置、设备、介质和程序产品，所述方法包括，接收所述ToF器件扫描第一空间区域后生成的第一图像数据；根据所述第一图像数据，分别实时计算所述人手在所述第一空间区域中的三维位置信息与人手轮廓图形；根据所述三维位置信息，计算虚拟键盘的目标位置；在所述目标位置生成所述虚拟键盘；将所述虚拟键盘与所述人手轮廓图形进行叠加，得到叠加后的虚拟键盘数据；将所述叠加后的虚拟键盘数据发送至所述显示屏，以使所述显示屏显示所述叠加后的虚拟键盘数据对应的虚拟键盘图像。通过本申请的实施例可以利用智能眼镜实现轻便以及低功耗的虚拟键盘输入与显示，同时保护隐私安全。CN114721508ACN114721508A权利要求书1/2页1.一种虚拟键盘显示方法，其特征在于，应用于智能眼镜的主控芯片，所述智能眼镜包括飞行时间ToF器件以及显示屏，所述方法包括：在智能眼镜应用软件输入功能开启、并检测到第一空间区域中存在人手的情况下，接收所述ToF器件扫描第一空间区域后生成的第一图像数据；根据所述第一图像数据，分别实时确定所述人手在所述第一空间区域中的三维位置信息与人手轮廓图形；在所述三维位置信息相关联的目标位置生成虚拟键盘；将所述虚拟键盘与所述人手轮廓图形进行叠加，得到叠加后的虚拟键盘数据；将所述叠加后的虚拟键盘数据发送至所述显示屏，以使所述显示屏显示所述叠加后的虚拟键盘数据对应的虚拟键盘图像。2.根据权利要求1所述的方法，其特征在于，在将所述叠加后的虚拟键盘图像发送至所述显示屏，以使所述显示屏显示所述叠加后的虚拟键盘数据对应的虚拟键盘图像之后，所述方法还包括：根据所述第一图像数据，计算所述人手的手指指尖与所述虚拟键盘所在空间平面的第一距离；当所述第一距离大于或等于第一阈值时，生成提示信息，其中，所述提示信息用于提示用户改变人手的位置以使人手与所述虚拟键盘相匹配；将所述提示信息发送至所述显示屏，以使所述显示屏显示所述提示信息。3.根据权利要求1所述的方法，其特征在于，所述目标位置包括根据所述人手的至少一个手指指尖的三维位置信息，计算的一个空间平面，其中，所述空间平面位于所述手指指尖之下。4.根据权利要求1所述的方法，其特征在于，在将所述叠加后的虚拟键盘数据发送至所述显示屏，以使所述显示屏显示所述叠加后的虚拟键盘数据对应的虚拟键盘图像之后，所述方法还包括：响应于人手对虚拟键盘的第一输入，更新所述虚拟键盘的显示信息，得到更新后虚拟键盘显示信息；所述将所述叠加后的虚拟键盘数据发送至所述显示屏，以使所述显示屏显示所述叠加后的虚拟键盘数据对应的虚拟键盘图像，包括：将所述更新后虚拟键盘显示信息发送至所述显示屏，以使显示屏显示所述更新后虚拟键盘显示信息对应的虚拟键盘图像。5.根据权利要求3所述的方法，其特征在于，所述响应于人手对虚拟键盘的第一输入，更新所述虚拟键盘的显示信息，得到更新后虚拟键盘显示信息，具体包括：根据第一图像数据，计算人手相对于所述虚拟键盘的位移；当所述位移大于或等于第二阈值时，更新所述虚拟键盘的显示信息，得到更新后虚拟键盘显示信息。6.根据权利要求1所述的方法，其特征在于，在智能眼镜应用软件输入功能开启、并检测到第一空间区域中存在人手的情况下，接收所述ToF器件扫描第一空间区域后生成的第一图像数据之前，所述方法还包括：响应于用于激活虚拟键盘的第二输入，启动所述ToF器件，以使所述ToF器件扫描第一2CN114721508A权利要求书2/2页空间区域。7.根据权利要求1‑5任一项所述的方法，其特征在于，所述方法还包括：在检测到第一空间区域中不存在人手的情况下，生成预警信息，所述预警信息用于提示用户所述第一空间区域内不存在人手；将所述预警信息发送至所述显示屏，以使所述显示屏显示所述预警信息。8.一种虚拟键盘显示装置，其特征在于，应用于智能眼镜的主控芯片，所述智能眼镜包括飞行时间ToF器件以及显示屏，所述装置包括：接收模块，用于在智能眼镜应用软件输入功能开启、并检测到第一空间区域中存在人手的情况下，接收所述ToF器件扫描第一空间区域后生成的第