视频摘要生成方法、装置、终端设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113949942A(43)申请公布日2022.01.18(21)申请号202010684719.7(22)申请日2020.07.16(71)申请人TCL科技集团股份有限公司地址516006广东省惠州市仲恺高新区惠风三路17号TCL科技大厦(72)发明人亚萨尔·阿巴斯·乌尔·雷赫曼杨捷文(74)专利代理机构深圳中一联合知识产权代理有限公司44414代理人任敏(51)Int.Cl.H04N21/845(2011.01)H04N21/8549(2011.01)G06N3/06(2006.01)权利要求书2页说明书12页附图3页(54)发明名称视频摘要生成方法、装置、终端设备及存储介质(57)摘要本申请适用于多媒体技术领域，提供了一种视频摘要生成方法、装置、终端设备及存储介质，方法包括：获取原始视频中每帧视频图像的初始视频特征；根据初始视频特征，计算每帧视频图像的视频分数；根据初始视频特征，确定原始视频的图像变化点；基于视频分数与图像变化点，从原始视频的所有视频图像中确定目标视频片段；根据图像变化点，提取目标视频片段对应的目标音频文件，并将目标音频文件与目标视频片段进行合成得到视频摘要。本申请可以解决现有技术中对于原始视频剪辑生成视频摘要耗时时间长的问题。CN113949942ACN113949942A权利要求书1/2页1.一种视频摘要生成方法，其特征在于，包括：获取原始视频中每帧视频图像的初始视频特征；根据所述初始视频特征，计算所述每帧视频图像的视频分数；根据所述初始视频特征，确定所述原始视频的图像变化点；基于所述视频分数与所述图像变化点，从所述原始视频的所有视频图像中确定目标视频片段；根据所述图像变化点，提取所述目标视频片段对应的目标音频文件，并将所述目标音频文件与所述目标视频片段进行合成得到视频摘要。2.如权利要求1所述的视频摘要生成方法，其特征在于，所述根据所述初始视频特征，计算所述每帧视频图像的视频分数，包括：对所述原始视频进行降采样处理，得到降采样视频，并获取所述降采样视频中每帧降采样视频图像的初始视频特征，所述每帧降采样视频图像的初始视频特征为降采样视频特征；根据所述降采样视频特征，计算各帧降采样视频图像的降采样视频分数；对所述降采样视频进行上采样处理，得到所述原始视频中的非降采样视频图像；根据所述降采样视频分数，计算所述非降采样视频图像的初始分数，得到所述原始视频中所述每帧视频图像的视频分数。3.如权利要求2所述的视频摘要生成方法，其特征在于，所述非降采样视频图像为任意两帧相邻降采样视频图像之间的视频图像；所述根据所述降采样视频分数，计算所述非降采样视频图像的初始分数，得到所述原始视频中所述每帧视频图像的视频分数，包括：计算与任意两帧相邻降采样视频图像一一对应的两个降采样视频分数的平均分数，所述平均分数为所述任意两帧相邻降采样视频图像之间的非降采样视频图像的初始分数；根据所述降采样视频分数或所述初始分数，确定所述原始视频中所述每帧视频图像的视频分数。4.如权利要求1-3任一项所述的视频摘要生成方法，其特征在于，所述基于所述视频分数与所述图像变化点，从所述原始视频的所有视频图像中确定目标视频片段，包括：分别获取任意两个相邻图像变化点之间的所有视频图像，所述任意两个相邻图像变化点之间的所有视频图像为一个初始视频片段；根据所述每帧视频图像中的视频分数，确定每个初始视频片段的片段分数；根据预设的视频摘要长度，确定待生成的视频摘要的目标帧数量；根据所述每个初始视频片段的片段分数从所有初始视频片段中查找符合所述目标帧数量的初始视频片段，所述符合所述目标帧数量的初始视频片段为目标视频片段。5.如权利要求4所述的视频摘要生成方法，其特征在于，所述根据所述每个初始视频片段的片段分数从所有初始视频片段中查找符合所述目标帧数量的初始视频片段，包括：根据所述每个初始视频片段中视频图像的帧数量，获取所有符合所述目标帧数量的初始视频片段组合；根据所述每个初始视频片段的片段分数，确定各个初始视频片段组合的组合分数；从所述所有符合所述目标帧数量的初始视频片段组合中选取最高组合分数对应的初2CN113949942A权利要求书2/2页始视频片段组合，所述最高组合分数对应的初始视频片段组合为所述目标视频片段。6.如权利要求5所述的视频摘要生成方法，其特征在于，所述根据所述图像变化点，提取所述目标视频片段对应的目标音频文件，并将所述目标音频文件与所述目标视频片段进行合成得到视频摘要，包括：根据所述图像变化点获取所述目标视频片段包括的各个初始视频片段在所述原始视频中的起始时间点与终止时间点；在所述原始视频中，获取所述起始时间点与终止时间点之间的音频文件，所述起始时间点与终止时间点之