视频显示控制方法及其装置、设备、介质、产品.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116095355A(43)申请公布日2023.05.09(21)申请号202310084572.1(22)申请日2023.01.18(71)申请人百果园技术（新加坡）有限公司地址新加坡巴西班让路枫树商业城30号楼15层31A(72)发明人包佳晶(74)专利代理机构广州利能知识产权代理事务所(普通合伙)44673专利代理师王增鑫(51)Int.Cl.H04N21/2187(2011.01)H04N21/234(2011.01)H04N21/2343(2011.01)H04N21/44(2011.01)H04N21/4402(2011.01)权利要求书2页说明书15页附图6页(54)发明名称视频显示控制方法及其装置、设备、介质、产品(57)摘要本申请涉及一种视频显示控制方法及其装置、设备、介质、产品，所述方法包括：获取直播视频流，所述直播视频流中包含多个图像帧及其目标质量指标；根据所述图像帧的编码分辨率及其相应的目标质量指标确定所述图像帧的缩放操作相对应的接口类型，所述接口类型为硬件接口类型或软件接口类型；调用所述接口类型相对应的缩放接口对所述图像帧进行缩放操作后渲染显示到直播间界面的视频播放窗口中。本申请以推送直播视频流时给定的图像帧的目标质量指标为标准，基于该目标质量指标确定相对应缩放接口实施对所述图像帧的缩放操作，使直播视频流在直播间界面中播放时，能够获得相对应较为优质、稳定的画面效果，能够提升网络直播用户的使用体验。CN116095355ACN116095355A权利要求书1/2页1.一种视频显示控制方法，其特征在于，包括：获取直播视频流，所述直播视频流中包含多个图像帧及其目标质量指标；根据所述图像帧的编码分辨率及其相应的目标质量指标确定所述图像帧的缩放操作相对应的接口类型，所述接口类型为硬件接口类型或软件接口类型；调用所述接口类型相对应的缩放接口对所述图像帧进行缩放操作后渲染显示到直播间界面的视频播放窗口中。2.根据权利要求1所述的视频显示控制方法，其特征在于，根据所述图像帧的编码分辨率及其相应的目标质量指标确定所述图像帧的缩放操作相对应的接口类型，包括：将所述图像帧的目标质量指标输入分辨率预测模型确定出理想分辨率；应用预设转换公式计算出所述图像帧在其既有目标质量指标下需要基于其编码分辨率缩放达到的目标分辨率。比较所述目标分辨率与所述理想分辨率的大小，当所述目标分辨率大于所述理想分辨率时，确定所述图像帧的缩放操作的接口类型为硬件接口类型，否则为软件接口类型。3.根据权利要求1所述的视频显示控制方法，其特征在于，根据所述图像帧的编码分辨率及其相应的目标质量指标确定所述图像帧的缩放操作相对应的接口类型，包括：基于所述图像帧的编码分辨率，在预设的接口映射表中查询出所述编码分辨率相对应的映射子集，所述映射子集包含不同目标质量指标及其相适配的接口类型；基于所述图像帧的目标质量指标，从所述映射子集中查询出与所述目标质量指标相对应的接口类型。4.根据权利要求1至3中任意一项所述的视频显示控制方法，其特征在于，调用所述接口类型相对应的缩放接口对所述图像帧进行缩放操作后渲染显示到直播间界面的视频播放窗口中，包括：当所述接口类型为硬件接口类型时，调用硬件缩放接口对所述图像帧进行缩放操作；当所述接口类型为软件接口类型时，调用软件缩放接口对所述图像帧进行缩放操作；将缩放操作后的所述图像帧渲染显示到直播间界面的视频播放窗口中。5.根据权利要求4所述的视频显示控制方法，其特征在于，当所述接口类型为软件接口类型时，调用软件缩放接口对所述图像帧进行缩放操作，包括：判断所述图像帧的缩放比率是否为二倍率，当为二倍率时，采用第一软件缩放接口实施对所述图像帧的缩放操作以消除所述图像帧在缩放过程中产生的摩尔纹，所述缩放比率为所述图像帧的目标分辨率与编码分辨率的比值；当所述缩放比率为非二倍率时，判断当前设备所属的硬件算力等级，根据硬件算力等级调用相应等级的软件缩放接口实施对所述图像帧的缩放操作。6.根据权利要求1至3中任意一项所述的视频显示控制方法，其特征在于，将缩放操作后的所述图像帧渲染显示到直播间界面的视频播放窗口中之前，包括：判断缩放操作后的所述图像帧是否超出所述视频播放窗口的边界，当超过所述边界时，对所述图像帧进行人脸检测以确定出人脸区域；以所述人脸区域为中心对所述图像帧进行裁剪，使所述图像帧的尺寸适配所述视频播放窗口的尺寸。7.根据权利要求1至3中任意一项所述的视频显示控制方法，其特征在于，获取直播视2CN116095355A权利要求书2/2页频流之前，包括：确定当前图像帧的主观评估参数，所述主观评估参数包括适于对当前图像帧编码的参考分辨率，及按照所述参考分辨率编码可预期获得的主观质量指标