一种基于人脸识别技术选取特定人脸视频片段的方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111061914A(43)申请公布日2020.04.24(21)申请号201911255820.4(22)申请日2019.12.10(71)申请人懂频智能科技（上海）有限公司地址201100上海市闵行区申长路518号4层412室(72)发明人朱赛赛郭怡良王海峰裴维勋(74)专利代理机构上海创开专利代理事务所(普通合伙)31374代理人汪发成(51)Int.Cl.G06F16/783(2019.01)G06K9/00(2006.01)权利要求书2页说明书6页附图5页(54)发明名称一种基于人脸识别技术选取特定人脸视频片段的方法(57)摘要本发明公开了一种基于人脸识别技术选取特定人脸视频片段的方法，涉及视频处理技术领域。本发明在人脸识别技术步骤S03与步骤S04之间依次设置步骤S031、步骤S032、步骤S033；步骤S021：设置可配置参数X、参数M、参数N；步骤S031：在基准至上选取C位框的区域范围，标定该人物对应的视频片段Clips为C位，否则为非C位，取该视频片段Clips中主角人脸面积最大X帧的平均面积；步骤S032：对步骤S031中的C位进一步判断；步骤S033：权重的分配和优劣排序。本发明解决了现有的人脸识别和智慧视频技术获取并生成的Clips碎片化程度高，新的Clips支离破碎，不能连续的观看、生硬、突兀问题。CN111061914ACN111061914A权利要求书1/2页1.一种基于人脸识别技术选取特定人脸视频片段的方法，基于人脸识别技术实现，用于获取特定人脸视频片段，包括以下步骤；S01：首先建立人脸特征库，包括面部的眼睛、鼻子和嘴巴特征，通过对源视频文件B的人脸区域进行检测和跟踪进行人脸定位；S02：然后进行人脸矫正并进行源视频文件B的人脸特征提取，通过将人脸特征库中的特征与源视频文件B中的人脸特征进行比对并获得特征匹配；S03：上述方法应用于源视频文件B某一特定人脸A出现的片段，并以该片段中特定人脸A的面部特征出现为起始帧，面部消失为结束帧；S04：然后利用ffmpeg程序对起始帧和结束帧之间的连续帧部分进行重新编码生成新的视频文件，从而获得某一张特定人脸A的个人视频片段Clips；S05：利用步骤S03和S04，由源视频文件B中定位并生成特定人脸A的若干个人视频片段C1、C2...Cn；其特征在于：在所述步骤S02与步骤S03之前设置步骤S021，在所述步骤S03与步骤S04之间依次设置步骤S031、步骤S032、步骤S033；所述步骤S021内容为：设置可配置参数X、参数M、参数N；参数X定义为：当X大于特定人脸A面部特征在源视频文件B中消失至再次出现之间的时间时，则分切成两个视频片段Clips；当参数X小于“特定人脸A面部特征在源视频文件B中消失至再次出现之间的时间时，则保留成一个视频片段Clips；参数M定义为：特定人脸A面部特征在源视频文件B中出现前补偿的时间；参数N定义为：特定人脸A面部特征在源视频文件B中消失后补偿的时间；所述步骤S031内容为：对所述源视频文件B某一特定人脸A出现的片段以视频分辨率为基准，在基准至上选取C位框的区域范围，并规定视频片段Clips中特定人脸A只要在C位框的区域范围内出现过，且出现的人脸面积最大帧的主角人脸面积满足C位框最小面积A1，则标定该人物对应的视频片段Clips为C位，否则标记该人物对应的视频片段Clips为非C位，每个所述视频片段Clips都附带该视频片段Clips的全部帧的信息，取该所述视频片段Clips中主角人脸面积最大X帧的平均面积；若判定为非C位，则进行下一步骤S032对步骤步骤S031中C位继续进行分析；所述步骤S032内容为：取C位框区域范围的对角线交叉点计算人脸范围框对角线交叉点距离的距离l1，其计算公式为：并对步骤S031中的C位进一步判断:以一个人脸的所有C位的视频片段Clips为例：取步骤S031中标记的视频片段Clips，计算并标记每个视频片段Clips中距离点最近的帧Fi；当标记Fi之后，取Fi帧出现的人脸，判断在该帧中，C位人员的脸面积是否为该帧中最大，如果不是最大，则取消该视频片段Clips的C位标记；如果是，则判断所述Fi帧中，C位人员脸范围框对角线距离点距离是否在Fi帧出现的人脸中距离点距离最近，如果不是，则取消该视频片段Clips的C位标记；2CN111061914A权利要求书2/2页所述步骤S033的内容为：对步骤S031和步骤S032过后的视频片段Clips进行权重的分配，取步骤S032中X帧平均人脸面积a，取步骤S033中距离点最近帧主角人脸面积b，根据不同拍摄场景选用不同模式确定权重Q1和权重Q2，且Q1>Q2，按照权重计算方式对