直播展示方法和装置、存储介质及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113965773A(43)申请公布日2022.01.21(21)申请号202111296396.5G06V10/22(2022.01)(22)申请日2021.11.03G06V10/80(2022.01)G06K9/62(2022.01)(71)申请人广州繁星互娱信息科技有限公司地址510000广东省广州市黄埔区广新路680、682、684号701房(72)发明人张树业蔡海军(74)专利代理机构北京康信知识产权代理有限责任公司11240代理人周婷婷(51)Int.Cl.H04N21/2187(2011.01)H04N21/43(2011.01)H04N21/4415(2011.01)H04N21/431(2011.01)G06V40/16(2022.01)权利要求书2页说明书12页附图8页(54)发明名称直播展示方法和装置、存储介质及电子设备(57)摘要本发明公开了一种直播展示方法和装置、存储介质及电子设备。其中，该方法包括：在当前直播画面中显示预先为主播对象配置的目标图片，其中，目标图片中显示有虚拟动物对象的面部，采集主播对象的人脸图像，基于人脸图像识别主播对象的面部表情变化特征，根据面部表情变化特征，驱动目标图片中虚拟动物对象的面部表情进行同步调整，得到调整后的目标图片，将调整后的目标图片封装为待推送的直播流数据，并推送直播流数据给播放客户端进行展示。本发明解决了现有的技术直播展示效率较低的技术问题。CN113965773ACN113965773A权利要求书1/2页1.一种直播展示方法，其特征在于，包括：在当前直播画面中显示预先为主播对象配置的目标图片，其中，所述目标图片中显示有虚拟动物对象的面部；采集所述主播对象的人脸图像；基于所述人脸图像识别所述主播对象的面部表情变化特征；根据所述面部表情变化特征，驱动所述目标图片中所述虚拟动物对象的面部表情进行同步调整，得到调整后的所述目标图片；将调整后的所述目标图片封装为待推送的直播流数据，并推送所述直播流数据给播放客户端进行展示。2.根据权利要求1所述的方法，其特征在于，基于所述人脸图像识别所述主播对象的面部表情变化特征包括：定位每张所述人脸图像中人脸关键点所在的位置；计算相邻两张所述人脸图像之间所述人脸关键点的位置的偏移量；根据所述位置的偏移量确定所述主播对象的面部表情变化特征。3.根据权利要求2所述的方法，其特征在于，根据所述面部表情变化特征，驱动所述目标图片中所述虚拟动物对象的面部表情进行同步调整，得到调整后的所述目标图片包括：定位所述虚拟动物对象的面部关键点所在的位置；根据所述面部表情变化特征更新所述虚拟动物对象的面部关键点的位置，得到更新后的关键点位置；基于所述更新后的关键点位置调整所述目标图片中所述虚拟动物对象的面部表情，其中，所述更新后的关键点位置将被作为用于渲染与所述虚拟动物对象的面部对应的面部网络的顶点坐标。4.根据权利要求1所述的方法，其特征在于，在当前直播画面中显示预先为主播对象配置的目标图片之前，还包括：输入目标动物图片；对所述目标图片进行面部识别；在识别出所述虚拟动物对象的面部的情况下，提取所述虚拟动物对象的面部区域；将所述虚拟动物对象的面部区域与目标背景图片进行融合，以生成所述目标图片。5.根据权利要求4所述的方法，其特征在于，输入所述目标动物图片包括以下之一：通过图像采集装置对当前所在环境中的实际动物进行图像采集，得到所述目标图片；从本地存储的图像集中获取所述目标动物图片；从直播客户端提供的候选图片中获取所述目标动物图片。6.根据权利要求4所述的方法，其特征在于，提取所述虚拟动物对象的面部区域包括：从所述目标动物图片中确定出包含所述虚拟动物对象的显示区域和未包含所述虚拟动物对象的背景区域；分离所述显示区域和所述背景区域；从所述显示区域中提取出所述虚拟动物对象的面部区域。7.根据权利要求4所述的方法，其特征在于，将所述虚拟动物对象的面部区域与目标背景图片进行融合，以生成所述目标图片包括：2CN113965773A权利要求书2/2页确定所述目标背景图片中用于显示所述虚拟动物对象的面部区域的候选区域；根据所述候选区域对所述虚拟动物对象的面部区域进行融合预处理，以使所述虚拟动物对象的面部区域与所述候选区域相适配，其中，所述融合预处理包括以下至少之一：缩放处理、旋转处理、平移处理；将融合预处理后得到的所述虚拟动物对象的面部区域与所述候选区域进行融合，以生成所述目标图片。8.根据权利要求1至7中任一项所述的方法，其特征在于，将调整后的所述目标图片封装为待推送的直播流数据，并推送所述直播流数据给播放客户端进行展示包括：通过视频编码技术对调整后的所述目标图片进行编码封装，得到所述直播流数