直播中数据处理的方法及装置、电子设备、存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111986301A(43)申请公布日2020.11.24(21)申请号202010924402.6(22)申请日2020.09.04(71)申请人网易（杭州）网络有限公司地址310052浙江省杭州市滨江区长河街道网商路599号4幢7层(72)发明人巢娅(74)专利代理机构北京润泽恒知识产权代理有限公司11319代理人吴文心(51)Int.Cl.G06T15/00(2011.01)G06K9/00(2006.01)H04L29/06(2006.01)权利要求书2页说明书18页附图6页(54)发明名称直播中数据处理的方法及装置、电子设备、存储介质(57)摘要本发明实施例提供了直播中数据处理的方法及装置、电子设备、存储介质，所述方法包括：在第一用户和第二用户进行直播连线的过程中，确定针对所述第一用户的第一属性信息和针对所述第二用户的第二属性信息；根据所述第一属性信息和所述第二属性信息，确定目标面部互换模式；按照所述目标面部互换模式，在所述直播连线的视频画面中对所述第一用户和所述第二用户进行面部互换处理。通过本发明实施例，实现了应用于任意直播场景中的面部切换处理，通过针对用户信息确定面部互换模式，能够达到主播实时换脸的目的，延迟低、效果好，并且兼顾了系统性能，增加了直播的趣味性和娱乐性。CN111986301ACN111986301A权利要求书1/2页1.一种直播中数据处理的方法，其特征在于，所述方法包括：在第一用户和第二用户进行直播连线的过程中，确定针对所述第一用户的第一属性信息和针对所述第二用户的第二属性信息；根据所述第一属性信息和所述第二属性信息，确定目标面部互换模式；按照所述目标面部互换模式，在所述直播连线的视频画面中对所述第一用户和所述第二用户进行面部互换处理。2.根据权利要求1所述的方法，其特征在于，所述根据所述第一属性信息和所述第二属性信息，确定目标面部互换模式，包括：获取预置的属性信息集合，并判断所述第一属性信息和所述第二属性信息是否均与所述属性信息集合相匹配；若是，则确定预置的第一面部互换模式为目标面部互换模式；否则，则确定预置的第二面部互换模式为目标面部互换模式。3.根据权利要求1或2所述的方法，其特征在于，在所述按照所述目标面部互换模式，在所述直播连线的视频画面中对所述第一用户和所述第二用户进行面部互换处理之前，还包括：从所述直播连线的视频画面中，获取针对所述第一用户的第一原始面部数据和针对所述第二用户的第二原始面部数据；所述按照所述目标面部互换模式，在所述直播连线的视频画面中对所述第一用户和所述第二用户进行面部互换处理，包括：获取所述目标面部互换模式对应的目标面部互换模型；采用所述目标面部互换模型，生成所述第一原始面部数据对应的第一互换面部数据和所述第二原始面部数据对应的第二互换面部数据；根据所述第一互换面部数据对所述第一原始面部数据作替换处理，以及根据所述第二互换面部数据对所述第二原始面部数据作替换处理。4.根据权利要求3所述的方法，其特征在于，所述获取所述目标面部互换模式对应的目标面部互换模型，包括：在所述目标面部互换模式为所述第一面部互换模式时，获取预置的第一面部互换模型为目标面部互换模型；其中，所述第一面部互换模型包括针对所述第一用户的第一解码模型和针对所述第二用户的第二解码模型；所述采用所述目标面部互换模型，生成所述第一原始面部数据对应的第一互换面部数据和所述第二原始面部数据对应的第二互换面部数据，包括：采用所述第二解码模型，生成所述第一原始面部数据对应的第一互换面部数据；采用所述第一解码模型，生成所述第二原始面部数据对应的第二互换面部数据。5.根据权利要求3所述的方法，其特征在于，所述获取所述目标面部互换模式对应的目标面部互换模型，包括：在所述目标面部互换模式为所述第二面部互换模式时，采用所述第一原始面部数据，构建针对所述第一用户的第二面部互换模型；采用所述第二原始面部数据，构建针对所述第二用户的第三面部互换模型；所述采用所述目标面部互换模型，生成所述第一原始面部数据对应的第一互换面部数2CN111986301A权利要求书2/2页据和所述第二原始面部数据对应的第二互换面部数据，包括：采用所述第二面部互换模型，生成所述第一原始面部数据对应的第一互换面部数据；采用所述第三面部互换模型，生成所述第二原始面部数据对应的第二互换面部数据。6.根据权利要求4或5所述的方法，其特征在于，根据所述第一互换面部数据对所述第一原始面部数据作替换处理，包括：生成所述第一原始面部数据对应的第一面部遮罩数据，并根据所述第一面部遮罩数据和所述第一互换面部数据，得到第一目标面部数据；采用所述第一目标面部数据替换所述第一原始面部数据；所述根据所述第二互