空间音频下混频.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111052770A(43)申请公布日2020.04.21(21)申请号201880057194.5(74)专利代理机构北京市金杜律师事务所(22)申请日2018.09.2611256代理人罗利娜(30)优先权数据62/566,2282017.09.29US(51)Int.Cl.H04S7/00(2006.01)(85)PCT国际申请进入国家阶段日2020.03.03(86)PCT国际申请的申请数据PCT/US2018/0529602018.09.26(87)PCT国际申请的公布数据WO2019/067620EN2019.04.04(71)申请人苹果公司地址美国加利福尼亚州(72)发明人C·T·尤班克M·S·康诺利S·E·平托权利要求书2页说明书8页附图5页(54)发明名称空间音频下混频(57)摘要空间音频对象中的音频数据信道与一个或多个所记录声音的方向和位置中的一者或多者相关联，这些信道将被再现为空间声音。可视化空间声音对象表示空间声音的快照/缩略图。为了(通过体验快照或缩略图)预览空间声音，用户操纵可视化空间声音对象的取向，并且渲染这些信道的加权下混频，以供作为空间预览声音输出，例如，将单个输出音频信号提供给空间音频渲染器；在预览声音中，被取向为朝向用户的一个或多个信道受到的突显超过被取向为背离用户的信道受到的突显。也描述了其他方面并要求对其他方面进行保护。CN111052770ACN111052770A权利要求书1/2页1.一种用于处理空间音频的计算机实现的方法，所述方法包括：接收被编码为保留一个或多个所记录声音的空间特征的空间音频对象，其中，所述空间音频对象包括表示所述一个或多个所记录声音的多个音频数据信道，每个信道与方向和位置中的任何一者或多者相关联；呈现所述空间音频对象的视觉表示，其中，所述多个音频数据信道中的每者基于其相应的方向或位置与所述视觉表示的一部分相关联；基于所述视觉表示的取向对所述多个音频数据信道中的每个信道进行加权，其中，与所述视觉表示的被取向为朝向预先确定对象的一部分相关联的信道受到的加权高于与所述视觉表示的被取向为背离所述预先确定对象的一部分相关联的信道受到的加权；对所述加权音频数据信道进行下混频；以及基于所述下混频加权信道呈现声音。2.根据权利要求1所述的计算机实现的方法，其中呈现所述视觉表示包括：显示所述视觉表示，其中所述视觉表示包括与所述视觉表示的所述部分中的一个相对应的图像，所述图像表示由所述多个信道中的一个或多个信道表示的占主导的所记录声音，所述一个或多个信道与所述视觉表示的所述部分中的所述一个部分相关联。3.根据前述权利要求中任一项所述的计算机实现的方法，其中，对所述加权音频数据信道进行下混频包括将所述加权信道中的每者取向为与相应加权信道的初始取向相对的方向，并且对所述重新取向的加权信道进行下混频。4.根据前述权利要求中任一项所述的计算机实现的方法，其中，基于所述下混频加权信道来呈现声音会将所述声音模拟为源自对应于所述视觉表示的位置。5.根据前述权利要求中任一项所述的计算机实现的方法，还包括：接收用户输入，所述用户输入用以相对于所述用户来重新取向所述视觉表示，使得所述视觉表示的不同部分对所述用户可见。6.根据权利要求5所述的计算机实现的方法，其中，所述视觉表示的对所述用户可见的所述不同部分包括表示由与所述视觉表示的所述不同部分相关联的信道表示的占主导的所记录声音的图像。7.根据前述权利要求中任一项所述的计算机实现的方法，其中，基于所述视觉表示的所述取向对所述多个音频数据信道中的每个信道进行加权是基于所述虚拟表示的更新取向重复执行的。8.根据前述权利要求中任一项所述的计算机实现的方法，其中，呈现所述视觉表示包括显示表面具有多个图像的属于球体或多面体中的一者的球体，其中，每个图像是所述视觉表示的所述不同部分并且表示由与所述不同部分相关联的所述一个或多个信道表示的不同的占主导的所记录声音。9.根据前述权利要求中任一项所述的计算机实现的方法，其中所述预先确定的对象是用户或者表示用户位置。10.一种空间音频处理计算机系统，所述系统包括：处理器和存储有指令的存储器，所述指令在由所述处理器执行时：接收被编码为保留多个所记录声音的空间特征的空间音频对象，其中所述空间音频对象包括表示所述所记录声音的多个音频数据信道，每个信道与方向、位置或空间分布中的2CN111052770A权利要求书2/2页任何一者或多者相关联；呈现所述空间音频对象的视觉表示，其中，所述所记录声音中的每者基于所述声音的相应方向或位置与所述视觉表示的一部分相关联；基于所述视觉表示的取向对所述多个音频数据信道中的每个信道进行加权，从而对与所述视觉表示的被取向为朝