云应用渲染视频帧处理方法与装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115278309A(43)申请公布日2022.11.01(21)申请号202211177969.7(22)申请日2022.09.27(71)申请人海马云（天津）信息技术有限公司地址301700天津市武清区京津科技谷产业园和园道89号29栋2D25室(72)发明人聂江红(51)Int.Cl.H04N21/2343(2011.01)权利要求书1页说明书6页附图2页(54)发明名称云应用渲染视频帧处理方法与装置(57)摘要本申请提供了一种云应用渲染视频帧处理方法与装置，方法包括：休眠第一时长，在休眠结束后，若判断获知不存在错位帧，则进行第二时长的等待；若在等待结束时获知不存在新的视频帧，则对最新的视频帧进行编码，并将编码结果发送给终端，其中，所述最新的视频帧为系统渲染云应用运行过程中产生的画面得到的视频帧，能够解决现有技术存在的应用运行在云平台时，无法稳定渲染而引起的运行时视频流帧率和帧间隔不稳定的问题。CN115278309ACN115278309A权利要求书1/1页1.一种云应用渲染视频帧处理方法，其特征在于，包括：休眠第一时长，在休眠结束后，若判断获知不存在错位帧，则进行第二时长的等待；若在等待结束时获知不存在新的视频帧，则对最新的视频帧进行编码，并将编码结果发送给终端，其中，所述最新的视频帧为系统渲染云应用运行过程中产生的画面得到的视频帧。2.如权利要求1所述的方法，其特征在于，所述第一时长=帧间隔*帧数+首帧时间‑系统当前时间，其中，所述帧间隔根据帧率确定，首帧时间表示首帧的渲染时间，*表示乘法。3.如权利要求1或2所述的方法，其特征在于，所述判断获知不存在错位帧，包括：判断最新的视频帧的渲染时间和已发送的最后一个视频帧的渲染时间是否一致；若一致，则确定不存在错位帧，否则，则确定存在错位帧。4.如权利要求1所述的方法，其特征在于，所述在等待结束时获知不存在新的视频帧，包括：在等待过程中未收到Android虚拟屏的可用帧通知，则确定在等待结束时不存在新的视频帧。5.一种云应用渲染视频帧处理装置，其特征在于，包括：休眠单元，用于休眠第一时长，在休眠结束后，若判断获知不存在错位帧，则进行第二时长的等待；编码单元，用于若在等待结束时获知不存在新的视频帧，则对最新的视频帧进行编码，并将编码结果发送给终端，其中，所述最新的视频帧为系统渲染云应用运行过程中产生的画面得到的视频帧。6.如权利要求5所述的装置，其特征在于，所述第一时长=帧间隔*帧数+首帧时间‑系统当前时间，其中，所述帧间隔根据帧率确定，首帧时间表示首帧的渲染时间，*表示乘法。7.如权利要求5或6所述的装置，其特征在于，所述休眠单元，用于：判断最新的视频帧的渲染时间和已发送的最后一个视频帧的渲染时间是否一致；若一致，则确定不存在错位帧，否则，则确定存在错位帧。8.如权利要求5所述的装置，其特征在于，所述编码单元，用于：在等待过程中未收到Android虚拟屏的可用帧通知，则确定在等待结束时不存在新的视频帧。9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1至4任一项所述的云应用渲染视频帧处理方法的步骤。10.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述机器可读指令，以执行如权利要求1至4任一项所述的云应用渲染视频帧处理方法的步骤。2CN115278309A说明书1/6页云应用渲染视频帧处理方法与装置技术领域[0001]本发明涉及云应用领域，特别涉及一种云应用渲染视频帧处理方法与装置、电子设备及存储介质。背景技术[0002]随着移动端应用移至云端运行技术的发展，这种对用户终端性能消耗较小的应用运营方式越来越多的被移动互联网公司、平台、用户所接受。对于云端平台来说，关键技术就是使用户能够看到应用在云端的即时运行画面，并且尽可能的没有延迟和卡顿，以保证用户对于云应用的使用体验，无限接近于在终端设备本地运行时的体验。但随着当前应用的复杂度增加，可能引起渲染帧率不稳定，产生卡顿、延迟等问题，再加上网络传输产生的长尾效应，终端体验会严重恶化。[0003]具体地，一方面，由于现代应用的功能多样性、快速迭代，在开发过程中难免会产生各种各样的问题，如资源加载慢、视觉资源渲染过于复杂、网络延迟等，原本以60FPS(FramesPerSecond，每秒传输帧数)在刷新的UI（UserInterface，用户界面），会降至40FPS甚至更低，致使云平台采集到的运行时视频流也出现帧率下降，帧间隔不稳定。[0004]另一方面，云