视频通话中视频图像的处理方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN108347578A(43)申请公布日2018.07.31(21)申请号201710058161.X(22)申请日2017.01.23(71)申请人腾讯科技（深圳）有限公司地址518000广东省深圳市南山区高新区科技中一路腾讯大厦35层(72)发明人李斌易成王新亮(74)专利代理机构北京律智知识产权代理有限公司11438代理人邢雪红乔彬(51)Int.Cl.H04N7/14(2006.01)G06K9/00(2006.01)权利要求书3页说明书14页附图10页(54)发明名称视频通话中视频图像的处理方法及装置(57)摘要本公开揭示了一种视频通话中视频图像的处理方法及装置，属于互联网技术领域。所述方法包括：接收第二终端发送的第二视频通话数据，第二视频通话数据包括第二视频图像数据，以及从第二视频图像数据中提取出的第二人脸特征点位置数据，根据第二人脸特征点位置数据确定第二视频图像数据中的第二人脸特征点，以第二人脸特征点为轮廓提取第二视频图像数据中的第二人脸数据，获取第一视频通话图像中第一人脸的人脸区域，根据第二人脸数据，在第一视频通话图像中第一人脸的人脸区域绘制第二特征人脸，以便将第一视频通话图像中的第一人脸替换为第二特征人脸。上述视频通话中视频图像的处理方法及装置能够在视频通话过程中实现人脸的实时更换。CN108347578ACN108347578A权利要求书1/3页1.一种视频通话中视频图像的处理方法，其应用于参与视频通话的第一终端，参与所述视频通话的终端还包括第二终端，其特征在于，所述方法包括：接收第二终端发送的第二视频通话数据，所述第二视频通话数据包括第二视频图像数据，以及从所述第二视频图像数据中提取出的第二人脸特征点位置数据；根据所述第二人脸特征点位置数据确定所述第二视频图像数据中的第二人脸特征点；以所述第二人脸特征点为轮廓提取所述第二视频图像数据中的第二人脸数据；获取第一视频通话图像中第一人脸的人脸区域；根据所述第二人脸数据，在所述第一视频通话图像中第一人脸的人脸区域绘制第二特征人脸，以便将所述第一视频通话图像中的第一人脸替换为所述第二特征人脸。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取自身采集的第一视频图像数据，所述第一视频图像数据用于显示第一视频通话图像；对所述第一视频图像数据进行人脸识别，获取所述第一视频通话图像中第一人脸的人脸区域；在所述第一人脸的人脸区域中提取所述第一视频通话图像中的第一人脸特征点位置数据；通过所述第一视频图像数据和第一人脸特征点位置数据得到第一视频通话数据，并向所述第二终端发送所述第一视频通话数据。3.根据权利要求2所述的方法，其特征在于，所述在所述第一人脸的人脸区域中提取所述第一视频通话图像中的第一人脸特征点位置数据步骤之前，所述方法还包括：判断对应于所述第一视频通话图像的人脸数量是否大于一个，若为是，则获取各人脸的人脸区域面积；选取人脸区域面积最大的一个人脸作为第一人脸，所述第一人脸的人脸区域将作为所述第一视频通话图像中提取第一人脸特征点位置数据的人脸区域。4.根据权利要求1所述的方法，其特征在于，所述根据所述第二人脸数据，在所述第一视频通话图像中第一人脸的人脸区域绘制第二特征人脸，以便将所述第一视频通话图像中的第一人脸替换为所述第二特征人脸，包括：根据所述第二人脸特征点位置数据和所述第一视频通话图像中的第一人脸特征点位置数据，进行所述第二人脸数据在所述第一视频通话图像中的纹理映射，得到在所述第一视频通话图像中第一人脸的人脸区域绘制的第二特征人脸。5.根据权利要求4所述的方法，其特征在于，所述根据所述第二人脸特征点位置数据和所述第一视频通话图像中的第一人脸特征点位置数据，进行所述第二人脸数据在所述第一视频通话图像中的纹理映射，得到在所述第一视频通话图像中第一人脸的人脸区域绘制的第二特征人脸，包括：根据所述第二人脸特征点位置数据和所述第一视频通话图像中的第一人脸特征点位置数据，分别将所述第二人脸数据对应第二人脸的人脸区域和所述第一视频通话图像中第一人脸的人脸区域相应地分割成多个三角形区域；按照所述第一人脸的人脸区域中的三角形区域，对所述第二人脸的人脸区域中相应的三角形区域进行变换，得到在所述第一视频通话图像中第一人脸的人脸区域绘制的第二特2CN108347578A权利要求书2/3页征人脸。6.根据权利要求1所述的方法，其特征在于，所述以所述第二人脸特征点为轮廓提取所述第二视频图像数据中的第二人脸数据步骤之后，所述方法还包括：根据所述第二人脸数据得到所述第二视频通话图像中第二人脸的人脸区域；根据所述第一视频通话图像中第一人脸的人脸区域对应的第一人脸数据，在所述第二视频通话图像中第二人脸的人脸区域绘