虚拟乐器处理方法、装置、虚拟乐器设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109166565A(43)申请公布日2019.01.08(21)申请号201810965724.8(22)申请日2018.08.23(71)申请人百度在线网络技术（北京）有限公司地址100085北京市海淀区上地十街10号百度大厦三层(72)发明人杜雅洁(74)专利代理机构北京同立钧成知识产权代理有限公司11205代理人柴海平刘芳(51)Int.Cl.G10H1/00(2006.01)G10H1/34(2006.01)G06F3/01(2006.01)权利要求书3页说明书9页附图4页(54)发明名称虚拟乐器处理方法、装置、虚拟乐器设备及存储介质(57)摘要本发明实施例提供一种虚拟乐器处理方法、装置、虚拟乐器设备及存储介质。本发明实施例的方法，通过在用户弹奏虚拟乐器键盘的过程中，实时地获取用户的各个手指相对于所述虚拟乐器键盘的手势信息；根据所述各个手指相对于所述虚拟乐器键盘的手势信息，确定手指按下的至少一个虚拟琴键的标识；根据所述手指按下的至少一个虚拟琴键的标识，播放所述至少一个虚拟琴键的标识对应的乐器模拟声音，无需携带实体钢琴等键盘乐器，通过终端设备和虚拟乐器键盘随时随地均可实现虚拟乐器的演奏，便于携带，且降低了购买实体乐器的成本。CN109166565ACN109166565A权利要求书1/3页1.一种虚拟乐器处理方法，其特征在于，包括：在用户弹奏虚拟乐器键盘的过程中，实时地获取用户的各个手指相对于所述虚拟乐器键盘的手势信息；根据所述各个手指相对于所述虚拟乐器键盘的手势信息，确定手指按下的至少一个虚拟琴键的标识；根据所述手指按下的至少一个虚拟琴键的标识，播放所述至少一个虚拟琴键的标识对应的乐器模拟声音。2.根据权利要求1所述的方法，其特征在于，所述在用户弹奏虚拟乐器键盘的过程中，实时地获取用户的各个手指相对于所述虚拟乐器键盘的手势信息，包括：接收摄像装置实时采集并发送的用户的各个手指弹奏所述虚拟乐器键盘的图像信息，所述摄像装置设置于所述虚拟乐器键盘的上方，所述摄像装置的拍摄范围覆盖所述虚拟乐器键盘；对所述各个手指弹奏所述虚拟乐器键盘的图像信息进行图像处理，识别出每个手指相对于所述虚拟乐器键盘的手势。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：将所述虚拟乐器键盘投影到水平设置的平台上的预设区域内，所述摄像装置设置于所述虚拟乐器键盘的上方，所述摄像装置的拍摄范围覆盖所述平台上的预设区域。4.根据权利要求2所述的方法，其特征在于，所述虚拟乐器键盘的每一个虚拟琴键上设置有唯一的标识，所述根据所述各个手指相对于所述虚拟乐器键盘的手势信息，确定手指按下的至少一个虚拟琴键的标识，包括：根据所述各个手指相对于所述虚拟乐器键盘的手势信息，确定做出按下琴键手势的手指按下的位置；根据所述做出按下琴键手势的手指按下的位置，确定所述做出按下琴键手势的手指按下的虚拟琴键的标识。5.根据权利要求1所述的方法，其特征在于，所述根据所述手指按下的至少一个虚拟琴键的标识，播放所述至少一个虚拟琴键的标识对应的乐器模拟声音，包括：根据所述手指按下的至少一个虚拟琴键的标识，获取所述至少一个虚拟琴键的标识对应的音乐参数；根据所述至少一个虚拟琴键的标识对应的音乐参数，播放乐器模拟声音。6.根据权利要求5所述的方法，其特征在于，所述虚拟琴键的标识为二维码信息，所述二维码信息包括所述虚拟琴键对应的音乐参数。7.根据权利要求5所述的方法，其特征在于，所述根据所述手指按下的至少一个虚拟琴键的标识，获取所述至少一个虚拟琴键的标识对应的音乐参数之后，还包括：向播放终端发送播放指令，所述播放指令包括所述至少一个虚拟琴键的标识对应的音乐参数，以使所述播放终端根据所述至少一个虚拟琴键的标识对应的音乐参数播放乐器模拟声音。8.一种虚拟乐器处理装置，其特征在于，包括：2CN109166565A权利要求书2/3页手势识别模块，用于在用户弹奏虚拟乐器键盘的过程中，实时地获取用户的各个手指相对于所述虚拟乐器键盘的手势信息；处理模块，用于根据所述各个手指相对于所述虚拟乐器键盘的手势信息，确定手指按下的至少一个虚拟琴键的标识；播放模块，用于根据所述手指按下的至少一个虚拟琴键的标识，播放所述至少一个虚拟琴键的标识对应的乐器模拟声音。9.根据权利要求8所述的装置，其特征在于，所述手势识别模块还用于：接收摄像装置实时采集并发送的用户的各个手指弹奏所述虚拟乐器键盘的图像信息，所述摄像装置设置于所述虚拟乐器键盘的上方，所述摄像装置的拍摄范围覆盖所述虚拟乐器键盘；对所述各个手指弹奏所述虚拟乐器键盘的图像信息进行图像处理，识别出每个手指相对于所述虚拟乐器键盘的手势。10.根据权利要求9所述的装置，其特征在于，所述装置还包括：