视频帧处理方法、装置、用户端及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110769241A(43)申请公布日2020.02.07(21)申请号201911071434.XH04N21/44(2011.01)(22)申请日2019.11.05H04N21/81(2011.01)(71)申请人广州虎牙科技有限公司地址511400广东省广州市番禺区钟村街（汉溪商业中心）泽溪街13号1301(72)发明人樊健荣(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人张欣欣(51)Int.Cl.H04N13/111(2018.01)H04N13/122(2018.01)H04N13/161(2018.01)H04N21/2187(2011.01)H04N21/433(2011.01)权利要求书2页说明书9页附图3页(54)发明名称视频帧处理方法、装置、用户端及存储介质(57)摘要本申请提出一种视频帧处理方法、装置、用户端及存储介质，涉及互联网技术领域，通过获得当前视频帧对应的纹理对象以及颜色转换矩阵，并利用设定的着色器对该纹理对象以及颜色转换矩阵进行处理，从而生成该当前视频帧对应的RGB数据，以通过该RGB数据进行渲染，相比于现有技术，能够利用FLV格式的视频帧进行AR环境下的视频流播放，进而增加用户的可玩性，提升用户体验。CN110769241ACN110769241A权利要求书1/2页1.一种视频帧处理方法，其特征在于，所述方法包括：获得当前视频帧对应的纹理对象以及颜色转换矩阵；利用设定的着色器对所述纹理对象及所述颜色转换矩阵进行处理，生成所述当前视频帧对应的RGB数据，以通过所述RGB数据进行渲染。2.如权利要求1所述的方法，其特征在于，在获得当前视频帧对应的纹理对象的步骤之前，所述方法还包括：生成纹理缓冲池；获得当前视频帧对应的纹理对象的步骤，包括：将所述当前视频帧传递至所述纹理缓冲池，以使所述纹理缓冲池输出所述纹理对象。3.如权利要求1所述的方法，其特征在于，获得当前视频帧对应的颜色转换矩阵的步骤，包括：根据设定的颜色转换策略，获得与所述当前视频帧中第一标识对应的颜色转换矩阵；其中，所述颜色转换策略包括多个标识与多个颜色转换矩阵的对应关系。4.如权利要求1所述的方法，其特征在于，在利用设定的着色器对所述纹理对象及所述颜色转换矩阵进行处理，生成所述当前视频帧对应的RGB数据的步骤之前，所述方法还包括：调用所述设定的着色器。5.如权利要求1所述的方法，其特征在于，利用设定的着色器对所述纹理对象及所述颜色转换矩阵进行处理，生成所述当前视频帧对应的RGB数据的步骤，包括：将所述纹理对象以及所述颜色转换矩阵传输至所述设定的着色器进行处理，得到所述当前视频帧对应的初始RGB数据；对所述初始RGB数据进行伽马变换，生成所述RGB数据。6.如权利要求5所述的方法，其特征在于，对所述初始RGB数据进行伽马变换的计算公式满足如下：式中，linear(x)表示所述RGB数据，x表示所述初始RGB数据。7.如权利要求5所述的方法，其特征在于，将所述纹理对象以及所述颜色转换矩阵传输至所述设定的着色器进行处理，得到所述当前视频帧对应的初始RGB数据的步骤，包括：生成所述纹理对象对应的YUV数据；将所述YUV数据及所述颜色转换矩阵进行封装后传输至所述设定的着色器，以使所述设定的着色器输出所述初始RGB数据。8.一种视频帧处理装置，其特征在于，所述装置包括：预处理模块，用于获得当前视频帧对应的纹理对象以及颜色转换矩阵；转换模块，用于利用设定的着色器对所述纹理对象及所述颜色转换矩阵进行处理，生成所述当前视频帧对应的RGB数据，以通过所述RGB数据进行渲染。2CN110769241A权利要求书2/2页9.一种用户端，其特征在于，包括：存储器，用于存储一个或多个程序；处理器；当所述一个或多个程序被所述处理器执行时，实现如权利要求1-7中任一项所述的方法。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1-7中任一项所述的方法。3CN110769241A说明书1/9页视频帧处理方法、装置、用户端及存储介质技术领域[0001]本申请涉及互联网技术领域，具体而言，涉及一种视频帧处理方法、装置、用户端及存储介质。背景技术[0002]AR(AugmentedReality，增强现实)技术能够将虚拟信息应用到真实世界中，并将真实世界的环境和虚拟物体实时地叠加在同一画面或空间，能够极大的提高用户的趣味性和可玩性。[0003]在一些应用场景中，比如在视频直播领域，可以将主播的直播界面利用AR技术进行展示，以丰富主播和观众之间的互动。[0004]然而，目前尚无法在一些场景中流畅的播放AR环境下的F