音频和视频的多模式同步渲染.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109906613A(43)申请公布日2019.06.18(21)申请号201780066814.7(74)专利代理机构中国国际贸易促进委员会专(22)申请日2017.09.12利商标事务所11038代理人张劲松(30)优先权数据15/265,6092016.09.14US(51)Int.Cl.H04N21/43(2006.01)(85)PCT国际申请进入国家阶段日H04N21/41(2006.01)2019.04.26H04N21/439(2006.01)(86)PCT国际申请的申请数据H04N21/4363(2006.01)PCT/US2017/0510952017.09.12H04N21/44(2006.01)(87)PCT国际申请的公布数据WO2018/052881EN2018.03.22(71)申请人DTS有限责任公司地址美国加利福尼亚(72)发明人D·劳李春镐权利要求书2页说明书15页附图12页(54)发明名称音频和视频的多模式同步渲染(57)摘要选择媒体以用于通过第一设备进行视频回放和通过经由无线网络连接的一个或多个单独的设备进行音频回放。可以基于一个或多个因素来选择用于同步音频和视频的不同技术，以改善媒体回放。CN109906613ACN109906613A权利要求书1/2页1.一种用于选择在第一电子设备和第二电子设备之间同步音频回放的模式的方法，所述方法包括：在第一电子设备处接收视频数据和音频数据，所述第一电子设备包括电视或与电视耦合的媒体源；通过无线网络将与所述第一电子设备相关联的时钟信息无线地传送到所述第二电子设备，以在所述第一电子设备和第二电子设备之间建立同步时钟，所述第二电子设备是移动设备；使用所述第一电子设备的硬件处理器至少部分地基于所述视频数据来可编程地选择音频同步模式，其中所述音频同步模式在第一模式和第二模式之间选择，所述第一模式包括如果所述视频数据在大小上低于阈值则延迟视频，所述第二模式包括如果所述视频数据在大小上高于所述阈值则压缩音频数据；以及根据所选择的音频同步模式将所述音频数据从所述第一电子设备传送到所述第二电子设备。2.如权利要求1所述的方法，还包括响应于选择所述第一模式而延迟所述视频数据。3.如权利要求1或2所述的方法，还包括响应于选择所述第二模式而压缩所述音频数据。4.如权利要求1至3中的任一项所述的方法，还包括响应于选择所述第一模式而压缩所述音频数据并且延迟所述视频数据。5.如权利要求1至4中的任一项所述的方法，其中选择所述音频同步模式包括响应于在所述视频数据中检测到视频游戏而选择所述第二模式。6.如权利要求1至5中的任一项所述的方法，其中选择所述音频同步模式包括基于所述无线网络的稳定性或所述无线网络的带宽来选择所述第二模式。7.如权利要求1至6中的任一项所述的方法，其中无线传送所述时钟信息包括传送多个包，每个包以近似相等的时间间隔隔开。8.如权利要求1至7中的任一项所述的方法，还包括对所述第一模式确定延迟时间，所述延迟时间基于所述第一电子设备的缓冲容量来确定。9.如权利要求8所述的方法，其中所述确定延迟时间包括选择比包被从所述第一电子设备发送到所述第二电子设备的平均传送时间长的延迟时间。10.如权利要求1至9中的任一项所述的方法，还包括将经交织的前向错误校正信息传送到音频播放器。11.如权利要求1至9中的任一项所述的方法，其中在视频播放器和音频播放器之间同步时钟信号包括在音频渲染的时段之后对所述同步时钟进行重新同步以考虑时钟漂移。12.一种用于选择在第一电子设备和第二电子设备之间同步音频回放的模式的系统，所述系统包括：第一电子设备，所述第一电子设备包括：存储器，所述存储器包括处理器可执行指令；硬件处理器，所述硬件处理器被配置为执行所述处理器可执行指令；以及无线传送器，所述无线传送器与所述硬件处理器通信；其中所述处理器可执行指令被配置为：2CN109906613A权利要求书2/2页接收视频数据和音频数据；使所述无线传送器通过无线网络将与所述第一电子设备相关联的时钟信息无线地传送到第二电子设备，以在所述第一电子设备和第二电子设备之间建立同步时钟；至少部分地基于所述视频数据、缓冲器特性以及网络特性中的一个或多个来可编程地选择音频同步模式；以及使所述无线传送器根据所选择的音频同步模式将所述音频数据从所述第一电子设备传送到所述第二电子设备。13.如权利要求12所述的系统，其中所述第一设备是电视或机顶盒。14.如权利要求12或13所述的系统，其中所述音频同步模式从视频延迟模式和音频压缩模式选择。15.如权利要求14所述的系统，其中所述音频同步模式的选择包括评估所述视频数据的带宽大小。16.如权利要求15所述的系统