交互控制方法、终端设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111930231A(43)申请公布日2020.11.13(21)申请号202010734378.X(22)申请日2020.07.27(71)申请人歌尔光学科技有限公司地址261031山东省潍坊市高新区东明路以东玉清东街以北（歌尔电子办公楼502室）(72)发明人王程龙(74)专利代理机构深圳市世纪恒程知识产权代理事务所44287代理人梁馨怡(51)Int.Cl.G06F3/01(2006.01)G06F3/0487(2013.01)G06F21/32(2013.01)G06T17/00(2006.01)权利要求书2页说明书9页附图4页(54)发明名称交互控制方法、终端设备及存储介质(57)摘要本发明公开了一种交互控制方法，包括以下步骤：获取用户的肢体图像数据；确定所述肢体图像数据与历史肢体图像数据之间的相似度，其中，所述历史肢体图像数据为所述终端设备保存的肢体图像数据；在所述相似度满足预设条件时，根据所述历史肢体图像数据确定所述用户的肢体对应的三维模型；根据所述三维模型，在显示画面中渲染所述用户肢体的三维图像，以基于所述包含所述三维图像的显示画面进行交互控制。本发明还公开了一种终端设备及计算机可读存储介质，达成了提升HMD人机交互的方案的便捷性的效果。CN111930231ACN111930231A权利要求书1/2页1.一种交互控制方法，其特征在于，所述交互控制方法应用于终端设备，所述交互控制方法包括：获取用户的肢体图像数据；确定所述肢体图像数据与历史肢体图像数据之间的相似度，其中，所述历史肢体图像数据为所述终端设备保存的肢体图像数据；在所述相似度满足预设条件时，根据所述历史肢体图像数据确定所述用户的肢体对应的三维模型；根据所述三维模型，在显示画面中渲染所述用户肢体的三维图像，以基于所述包含所述三维图像的显示画面进行交互控制。2.如权利要求1所述的交互控制方法，其特征在于，所述根据所述三维模型，在显示画面中渲染所述用户肢体的三维图像，以基于所述包含所述三维图像的显示画面进行交互控制的步骤之前，还包括：在所述相似度不满足预设条件时，获取所述用户的肢体特征信息以及所述用户的肢体深度数据；基于所述肢体特征信息、所述肢体图像数据和所述肢体深度数据确定所述三维模型。3.如权利要求2所述的交互控制方法，其特征在于，所述基于所述肢体特征信息、所述肢体图像数据和所述肢体深度数据确定所述三维模型的步骤之后，还包括：将所述肢体图像数据作为历史肢体图像数据与所述三维模型关联保存。4.如权利要求2所述的交互控制方法，其特征在于，所述获取所述用户的肢体特征信息以及所述用户的肢体深度数据的步骤之前，还包括：获取用户身份信息；所述获取所述用户的肢体特征信息以及所述用户的肢体深度数据的步骤包括：根据所述身份信息获取所述肢体特征信息；通过肢体深度数据采集装置采集所述用户的肢体深度数据。5.如权利要求4所述的交互控制方法，其特征在于，所述根据所述身份信息获取所述肢体特征信息的步骤包括：获取预存的与所述身份信息关联的所述肢体特征信息。6.如权利要求4所述的交互控制方法，其特征在于，所述获取用户身份信息的步骤包括：获取所述终端设备中的骨传导传感器采集的骨传导信号，并获取所述骨传导信号对应的骨声纹特征；根据所述骨声纹特征确定所述身份信息。7.如权利要求6所述的交互控制方法，其特征在于，所述获取所述终端设备中的骨传导传感器采集的骨传导信号，并获取所述骨传导信号对应的骨声纹特征步骤之前还包括：控制所述终端设备中的音频播放装置播放预设音频文件。8.如权利要求1所述的交互控制方法，其特征在于，所述根据所述历史肢体图像数据确定所述三维模型的步骤包括：在相似度满足预设条件的所述历史肢体图像数据为多个时，获取与所述肢体图像数据之间的相似度最大的所述历史肢体图像数据关联的所述三维模型。2CN111930231A权利要求书2/2页9.如权利要求1所述的交互控制方法，其特征在于，所述预设条件包括所述肢体图像数据与所述历史肢体图像数据之间的相似度大于预设相似度。10.一种终端设备，其特征在于，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的交互控制程序，所述交互控制程序被所述处理器执行时实现如权利要求1至9中任一项所述的交互控制方法的步骤。11.如权利要求10所述的终端设备，其特征在于，所述终端设备为头戴式显示器；所述头戴式显示器包括音频播放装置以及骨传导传感器，其中，所述音频播放装置与所述骨传导传感器设置于所述头戴式显示器的不同位置上。12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有交互控制程序，所述交互控制程序被处理器执行时实现如权利要求1至9中任一项所述