一种云会议实时音视频传输方法及装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116055461A(43)申请公布日2023.05.02(21)申请号202310175927.8(22)申请日2023.02.28(71)申请人全时云商务服务股份有限公司地址100010北京市东城区青龙胡同甲1号、3号2幢2层203-35室(72)发明人马华文(74)专利代理机构北京惟盛达知识产权代理事务所(普通合伙)11855专利代理师杨青(51)Int.Cl.H04L65/60(2022.01)H04L65/65(2022.01)H04L65/1066(2022.01)H04L65/80(2022.01)权利要求书1页说明书9页附图4页(54)发明名称一种云会议实时音视频传输方法及装置(57)摘要本申请公开提供了一种云会议实时音视频传输方法及装置，方法包括如下步骤：获取参会终端的音频数据及视频数据；将所述音频数据及所述视频数据分别进行TS流打包，获得TS音频流及TS视频流，发送至服务器进行处理；将处理后的TS音频流及TS视频流解包；将解包后的数据渲染输出。本发明通过TS传输协议实现音频和视频分离，音频数据和视频数据只需要打包一次，能够减少带宽；采用反馈机制生成反馈包消息提醒并通过TCP传输，以调整TS音视频流的发送状态及接收状态，有效解决了云会议中音视频在不同网络中实时可靠稳定的传输，同时还提升了用户对云会议的使用体验。CN116055461ACN116055461A权利要求书1/1页1.一种云会议实时音视频传输方法，其特征在于，包括如下步骤：获取参会终端的音频数据及视频数据；将所述音频数据及所述视频数据分别进行TS流打包，获得TS音频流及TS视频流，发送至服务器进行处理；将处理后的TS音频流及TS视频流解包；将解包后的数据渲染输出。2.根据权利要求1所述的一种云会议实时音视频传输方法，其特征在于，服务器对所述TS音频流和所述TS视频流进行解包，然后对所述TS音频流进行混频及降噪增强处理，生成处理后的TS音频流，对所述TS视频流进行合屏及质量优化处理，生成处理后的TS视频流。3.根据权利要求2所述的一种云会议实时音视频传输方法，其特征在于，所述将所述音频数据及所述视频数据分别进行TS流打包之后还包括：若网络延时和丢包率在调节范围内，生成反馈包消息提醒并通过TCP传输至服务器。4.根据权利要求3所述的一种云会议实时音视频传输方法，其特征在于，所述服务器进行处理还包括：接收反馈包消息提醒，并调整所述TS视频流及所述TS音频流的发送状态；更新反馈包消息提醒并通过TCP发送至参会终端。5.根据权利要求4所述的一种云会议实时音视频传输方法，其特征在于，所述将处理后的TS音频流及TS视频流解包的同时还包括：接收来自服务器的反馈包消息提醒，并调整所述TS视频流及所述TS音频流的接收状态。6.根据权利要求4所述的一种云会议实时音视频传输方法，其特征在于，若所述网络延时大于网络延时阈值，则所述网络延时在调节范围内；若所述丢包率大于丢包率阈值，则所述丢包率在调节范围内。7.根据权利要求4所述的一种云会议实时音视频传输方法，其特征在于，当所述反馈包消息提醒中用于检测码流的序列号不正确时，丢弃当前音频数据及视频数据，服务器不发送反馈消息包提醒。8.一种云会议实时音视频传输装置，设置在发送端，其特征在于，包括：获取单元，用于获取参会终端发送的音视频数据；打包单元，用于将所述参会客户端的音频数据和视频数据分别进行TS流打包，获得TS音频流及TS视频流；检测单元，用于对参会终端与服务器之间的网络状况进行实时监测，获取监测结果；反馈单元，用于根据TCP通道的反馈包消息提醒更新所述TS音频流及所述TS视频流；解包单元，用于将更新后的所述TS音频流及所述TS视频流解包；传输单元，用于将解包后的音视频数据传送给所述参会终端。9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1~7中任一项所述的方法。10.一种电子设备，包括存储器和处理器，所述存储器上存储有计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1~7中任一项所述的方法。2CN116055461A说明书1/9页一种云会议实时音视频传输方法及装置技术领域[0001]本发明涉及计算机技术领域，具体涉及一种云会议实时音视频传输方法及装置。背景技术[0002]随着视频云会议的快速发展，视频会议媒介逐渐多元化，打破了时域、地域限制，随时随地都能快速进行视频会议。这就要求在云会议中实现实时音视频可靠传输，使得不同设备上音视频均能有高质量的会议体验；同时，还能使得云会议的多种扩展功能有更好的使用体验，保证云会议中音视频高效可靠传输，也能提升会议直播、会议录制等领域中有更好的用户体验。[00