一种云应用渲染视频帧处理方法与装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115278289A(43)申请公布日2022.11.01(21)申请号202211178006.9(22)申请日2022.09.27(71)申请人海马云（天津）信息技术有限公司地址301700天津市武清区京津科技谷产业园和园道89号29栋2D25室(72)发明人聂江红(51)Int.Cl.H04N21/2187(2011.01)H04N21/2343(2011.01)权利要求书2页说明书7页附图1页(54)发明名称一种云应用渲染视频帧处理方法与装置(57)摘要本申请提供了一种云应用渲染视频帧处理方法与装置，方法包括：确定终端支持的最大帧率，在云应用的实际运行帧率小于或等于终端支持的最大帧率，且云应用的实际运行帧率位于预设的至少一个帧率维持区间中一个帧率维持区间内时，将编码单元输入的视频流帧率或输出的视频流帧率调整为该帧率维持区间对应的帧率维持数值；通过编码单元对云应用的渲染视频帧进行编码，并将编码结果发送给终端，其中，渲染视频帧为系统渲染云应用运行过程中产生的画面得到的视频帧，通过上述方案不仅能将云系统实时画面视频流帧率稳定住，还能自适应云应用的帧率变化，使终端玩家获得应用本地运行时的体验，并节省带宽和云系统编码器资源。CN115278289ACN115278289A权利要求书1/2页1.一种云应用渲染视频帧处理方法，其特征在于，包括：确定终端支持的最大帧率，在云应用的实际运行帧率小于或等于所述终端支持的最大帧率，且所述云应用的实际运行帧率位于预设的至少一个帧率维持区间中一个帧率维持区间内时，将编码单元输入的视频流帧率或输出的视频流帧率调整为该帧率维持区间对应的帧率维持数值；通过所述编码单元对所述云应用的渲染视频帧进行编码，并将编码结果发送给所述终端，其中，所述渲染视频帧为系统渲染所述云应用运行过程中产生的画面得到的视频帧。2.如权利要求1所述的方法，其特征在于，所述编码单元输入的视频流或输出的视频流按照如下方法稳定帧率：休眠第一时长，在休眠结束后，若判断获知不存在错位帧，则进行第二时长的等待；若在等待结束时获知不存在新的渲染视频帧，则使用最新的渲染视频帧补一帧。3.如权利要求2所述的方法，其特征在于，所述第一时长=帧间隔*帧数+首帧时间‑系统当前时间，其中，所述帧间隔根据帧率确定，首帧时间表示首帧的渲染时间，*表示乘法。4.如权利要求2或3所述的方法，其特征在于，所述判断获知不存在错位帧，包括：判断最新的渲染视频帧的渲染时间和已发送的最后一个渲染视频帧的渲染时间是否一致；若一致，则确定不存在错位帧，否则，则确定存在错位帧。5.如权利要求1所述的方法，其特征在于，所述编码单元输入的视频流或输出的视频流按照如下方法稳定帧率：先将输入的视频流帧率或输出的视频流帧率补帧到所述云应用可支持的最大帧率，之后再对补帧后的视频帧队列进行丢帧处理。6.如权利要求1所述的方法，其特征在于，该帧率维持数值为该帧率维持区间的上限。7.如权利要求1所述的方法，其特征在于，还包括：在所述云应用的实际运行帧率小于或等于所述终端支持的最大帧率，且所述云应用的实际运行帧率位于预设的跟随运行区间内时，将所述编码单元输入的视频流帧率或输出的视频流帧率调整为所述云应用的实际运行帧率。8.一种云应用渲染视频帧处理装置，其特征在于，包括：调整单元，用于确定终端支持的最大帧率，在云应用的实际运行帧率小于或等于所述终端支持的最大帧率，且所述云应用的实际运行帧率位于预设的至少一个帧率维持区间中一个帧率维持区间内时，将编码单元输入的视频流帧率或输出的视频流帧率调整为该帧率维持区间对应的帧率维持数值；编码单元，用于对所述云应用的渲染视频帧进行编码，并将编码结果发送给所述终端，其中，所述渲染视频帧为系统渲染所述云应用运行过程中产生的画面得到的视频帧。9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1至7任一项所述的云应用渲染视频帧处理方法的步骤。10.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述机器可读指令，以执行如权利要求1至7任一项所述的2CN115278289A权利要求书2/2页云应用渲染视频帧处理方法的步骤。3CN115278289A说明书1/7页一种云应用渲染视频帧处理方法与装置技术领域[0001]本发明涉及云应用领域，特别涉及一种云应用渲染视频帧处理方法与装置、电子设备及存储介质。背景技术[0002]随着移动端应用移至云端运行技术的发展，这种对用户终端性能消耗较小的应用运营方式越来越多的被移