在线视频的视频帧生成方法、装置、存储介质及设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110213636A(43)申请公布日2019.09.06(21)申请号201810398279.1G06F9/50(2006.01)(22)申请日2018.04.28(71)申请人腾讯科技（深圳）有限公司地址518057广东省深圳市南山区高新区科技中一路腾讯大厦35层(72)发明人向晨宇(74)专利代理机构北京三高永信知识产权代理有限责任公司11138代理人刘映东(51)Int.Cl.H04N21/431(2011.01)H04N21/4788(2011.01)H04N21/488(2011.01)H04N21/44(2011.01)H04N21/2187(2011.01)权利要求书3页说明书19页附图7页(54)发明名称在线视频的视频帧生成方法、装置、存储介质及设备(57)摘要本申请实施例公开了一种在线视频的视频帧生成方法、装置、存储介质及设备，属于计算机技术领域。所述方法包括：接收视频数据流，所述视频数据流中包含不同类型的子数据流，每种子数据流具有不同的流标识；对于每种子数据流，创建一个任务线程和一个任务队列，并将所述子数据流中属于同一视频帧的数据段作为一个任务添加到所述任务队列中；对于存在任务的任务队列所对应的任务线程，利用所述任务线程对所述任务进行处理，得到各个处理结果；对各个处理结果进行渲染，得到视频帧。本申请实施例既可以提高终端性能，也可以提高画面播放的流畅度。CN110213636ACN110213636A权利要求书1/3页1.一种在线视频的视频帧生成方法，其特征在于，用于客户端中，所述方法包括：接收视频数据流，所述视频数据流中包含不同类型的子数据流，每种子数据流具有不同的流标识；对于每种子数据流，创建一个任务线程和一个任务队列，并将所述子数据流中属于同一视频帧的数据段作为一个任务添加到所述任务队列中；对于存在任务的任务队列所对应的任务线程，利用所述任务线程对所述任务进行处理，得到处理结果；对各个处理结果进行渲染，得到视频帧。2.根据权利要求1所述的方法，其特征在于，所述对各个处理结果进行渲染，得到视频帧，包括：利用各个任务线程将各自得到的所述处理结果发送给渲染线程；利用所述渲染线程将各个处理结果添加到视频缓冲区中；利用所述渲染线程依次对所述视频缓冲区中的各个处理结果进行渲染，得到各个渲染结果；通知图形处理器GPU对各个渲染结果进行渲染，得到所述视频帧。3.根据权利要求2所述的方法，其特征在于，当存在至少两个任务线程同时向所述渲染线程发送对应于同一视频帧的处理结果时，所述利用所述渲染线程将各个处理结果添加到视频缓冲区中，包括：利用所述渲染线程接收对应于同一视频帧的至少两个处理结果；利用所述渲染线程确定每个处理结果对应的子数据流的处理优先级；利用所述渲染线程根据所述处理优先级进行轮询，将每次轮询得到的一个处理结果添加到所述视频缓冲区中。4.根据权利要求2所述的方法，其特征在于，所述方法还包括：当接收到后台运行指令时，通知所述渲染线程停止轮询。5.根据权利要求2所述的方法，其特征在于，所述利用所述渲染线程依次对所述视频缓冲区中的各个处理结果进行渲染，得到各个渲染结果，包括：将所述客户端对应的进程的绘制上下文赋值给所述渲染线程；利用所述渲染线程按照所述处理结果被添加到所述视频缓冲区中的顺序，依次从所述视频缓冲区中读取一个处理结果；对于每个处理结果，利用所述渲染线程创建纹理，并将所述纹理添加到所述绘制上下文中，对所述处理结果进行渲染，得到中间数据，将所述中间数据添加到所述纹理中，得到所述渲染结果。6.根据权利要求5所述的方法，其特征在于，所述方法还包括：当接收到后台运行指令时，利用所述渲染线程清除所述绘制上下文中的纹理数据，将所述绘制上下文赋值给所述进程。7.根据权利要求1所述的方法，其特征在于，所述对各个渲染结果进行渲染，得到所述视频帧，包括：在每次得到一个视频帧对应的各个渲染结果时，向图形处理器GPU发送开始渲染指令，所述开始渲染指令用于指示所述GPU开始渲染所述视频帧对应的各个渲染结果，得到所述2CN110213636A权利要求书2/3页视频帧。8.根据权利要求1至7任一项所述的方法，其特征在于，所述方法还包括：当接收到后台运行指令时，向图形处理器GPU发送停止渲染指令，所述停止渲染指令用于指示所述GPU停止对所述渲染结果进行渲染。9.一种直播视频的视频帧播放方法，其特征在于，用于直播客户端中，所述方法包括：获取直播视频流，所述直播视频流包括直播画面数据流和互动数据流，所述互动数据流至少包括礼物数据流和弹幕数据流中的一种，所述直播视频流、所述礼物数据流和所述弹幕数据流具有不同的流标识；对于每种数据流，创建一个任务线程和一个任务队列，并将