一种生成视频摘要视点图的方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106713964A(43)申请公布日2017.05.24(21)申请号201611101886.4(22)申请日2016.12.05(71)申请人乐视控股（北京）有限公司地址100026北京市朝阳区姚家园路105号3号楼10层1102申请人乐视云计算有限公司(72)发明人叶芷白茂生祁海刘阳(74)专利代理机构北京弘权知识产权代理事务所(普通合伙)11363代理人逯长明许伟群(51)Int.Cl.H04N21/431(2011.01)H04N21/44(2011.01)H04N21/4545(2011.01)权利要求书2页说明书10页附图5页(54)发明名称一种生成视频摘要视点图的方法及装置(57)摘要本发明实施例提供了一种生成视频摘要视点图的方法及装置，其中方法包括：将视频划分为多个视频片段；对于每个所述视频片段：如果所述视频片段内包含关键帧，则提取所述关键帧，其中所述关键帧为视频画面中发生场景变化时的视频帧；根据提取的所有所述关键帧生成所述视频的摘要视点图。在本发明实施例中，先将视频划分为多个视频片段，然后判断各视频片段内是否包含视频画面中发生场景变化的视频帧，并将这些视频帧作为关键帧提取出来，生成视频摘要视点图，从而得到了对视频具有概括性的重要画面，这样用户通过查看这些重要画面，可大大提高浏览视频时的效率，也节省了用户的时间。CN106713964ACN106713964A权利要求书1/2页1.一种生成视频摘要视点图的方法，其特征在于，所述方法包括：将视频划分为多个视频片段；对于每个所述视频片段：如果所述视频片段内包含关键帧，则提取所述关键帧，其中所述关键帧为视频画面中发生场景变化时的视频帧；根据提取的所有所述关键帧生成所述视频的摘要视点图。2.根据权利要求1所述的方法，其特征在于，如果所述视频片段内包含关键帧，则提取所述关键帧，包括：将所述视频片段中的每个视频帧切分为多个画面子块；根据预设算法，获取每个视频帧的中心子块的中心梯度直方图，其中所述中心子块为位于中心区域的画面子块；判断相邻两个视频帧的中心梯度直方图的均方误差是否大于第一阈值；如果所述均方误差大于所述第一阈值，则提取所述相邻两个视频帧中的一个或两个视频帧作为关键帧。3.根据权利要求2所述的方法，其特征在于，根据提取的所有所述关键帧生成所述视频的摘要视点图之前，所述方法还包括：判断相邻两个视频片段中前一视频片段的最后一个关键帧和后一视频片段的第一个关键帧的所述均方误差是否大于所述第一阈值；如果不大于所述第一阈值，则滤除前一视频片段的最后一个关键帧或者后一视频片段的第一个关键帧。4.根据权利要求1所述的方法，其特征在于，根据提取的所有所述关键帧生成所述视频的摘要视点图之前，所述方法还包括：计算每个关键帧的信噪比；滤除信噪比小于第二阈值的关键帧。5.根据权利要求1所述的方法，其特征在于，根据提取的所有所述关键帧生成所述视频的摘要视点图，包括：获取每个所述关键帧在不同分辨率下的缩略图；将同一分辨率下的所有缩略图作为所述视频在所述分辨率下的摘要视点图。6.一种生成视频摘要视点图的装置，其特征在于，所述装置包括：视频划分模块，用于将视频划分为多个视频片段；关键帧提取模块，用于对于每个所述视频片段，如果所述视频片段内包含关键帧，则提取所述关键帧，其中所述关键帧为视频画面中发生场景变化时的视频帧；摘要视点图生成模块，用于根据提取的所有所述关键帧生成所述视频的摘要视点图。7.根据权利要求6所述的装置，其特征在于，所述关键帧提取模块包括：视频帧处理子模块，用于将所述视频片段中的每个视频帧切分为多个画面子块，根据预设算法，获取每个视频帧的中心子块的中心梯度直方图，其中所述中心子块为位于中心区域的画面子块；关键帧判断子模块，用于判断相邻两个视频帧的中心梯度直方图的均方误差是否大于第一阈值，如果所述均方误差大于所述第一阈值，则提取所述相邻两个视频帧中的一个或两个视频帧作为关键帧。2CN106713964A权利要求书2/2页8.根据权利要求7所述的装置，其特征在于，所述装置还包括：第一关键帧过滤模块，用于在所述摘要视点图根据提取的所有所述关键帧生成所述视频的摘要视点图之前，判断相邻两个视频片段中前一视频片段的最后一个关键帧和后一视频片段的第一个关键帧的所述均方误差是否大于所述第一阈值，如果不大于所述第一阈值，则滤除前一视频片段的最后一个关键帧或者后一视频片段的第一个关键帧。9.根据权利要求6所述的装置，其特征在于，所述装置还包括：第二关键帧过滤模块，用于在所述摘要视点图根据提取的所有所述关键帧生成所述视频的摘要视点图之前，计算每个关键帧的信噪比，滤除信噪比小于第二阈值的关键帧。10.根据权利要求6所述的装置，