直播图像合成方法、装置、终端设备以及可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113837979A(43)申请公布日2021.12.24(21)申请号202111146482.8(22)申请日2021.09.28(71)申请人北京奇艺世纪科技有限公司地址100080北京市海淀区北一街2号爱奇艺创新大厦10、11层(72)发明人刘思阳(74)专利代理机构北京润泽恒知识产权代理有限公司11319代理人吕俊秀(51)Int.Cl.G06T5/50(2006.01)G06T7/11(2017.01)G06T7/194(2017.01)权利要求书2页说明书15页附图4页(54)发明名称直播图像合成方法、装置、终端设备以及可读存储介质(57)摘要本申请提供了一种直播图像合成方法、装置、终端设备以及可读存储介质。该方法包括：确定与目标视角相似度最高的真实视角，目标视角为无法采集真实图像的视角，真实视角为可采集真实图像的视角；利用从真实视角采集的背景图像获得目标视角的背景投影图像；利用从真实视角采集的前景图像获得目标视角的前景投影图像；合成背景投影图像和前景投影图像，将合成的图像作为从目标视角采集的图像。该方法在应用于网络直播场景时，利用了直播过程中摄像装备的空间位置和朝向不会发生变化而使得直播背景图不会变化的特性，合成一次背景投影图像，并将该合成的背景投影图像用于采集到前景图像时的直播图像合成，降低了图像合成量，提升了图像合成的效率。CN113837979ACN113837979A权利要求书1/2页1.一种直播图像合成方法，其特征在于，包括：确定与目标视角相似度最高的真实视角，所述目标视角为无法采集真实图像的视角，所述真实视角为可采集真实图像的视角；利用从所述真实视角采集的背景图像获得所述目标视角的背景投影图像；利用从所述真实视角采集的前景图像获得所述目标视角的前景投影图像；合成所述背景投影图像和所述前景投影图像，将合成的图像作为从所述目标视角采集的图像。2.根据权利要求1所述的方法，其特征在于，利用从所述真实视角采集的背景图像获得所述目标视角的背景投影图像，包括：利用直播开始前从所述真实视角采集的背景图像获得所述目标视角的背景投影图像；利用从所述真实视角采集的前景图像获得所述目标视角的前景投影图像，包括：利用直播开始后实时从所述真实视角采集的前景图像获得所述目标视角的实时的前景投影图像；合成所述背景投影图像和所述前景投影图像，将合成的图像作为从所述目标视角采集的图像，包括：合成所述背景投影图像和所述实时的前景投影图像，将合成的图像作为实时从所述目标视角采集的图像。3.根据权利要求1或2所述的方法，其特征在于，利用从所述真实视角采集的背景图像获得所述目标视角的背景投影图像，包括：获得所述背景图像对应的深度图像；根据所述背景图像、所述深度图像以及所述目标视角的视角参数获得所述目标视角的背景投影图像。4.根据权利要求1或2所述的方法，其特征在于，利用从所述真实视角采集的前景图像获得所述真实视角的前景投影图像，包括：获得从所述真实视角采集的完整图像；对所述完整图像进行图像分割，获得前景图像；利用所述前景图像获得所述真实视角的前景投影图像。5.根据权利要求4所述的方法，其特征在于，利用所述前景图像获得所述真实视角的前景投影图像，包括：获得所述前景图像对应的深度图像；根据所述前景图像、所述深度图像以及所述目标视角处的视角参数获得所述目标视角的前景投影图像。6.根据权利要求1所述的方法，其特征在于，确定与目标视角相似度最高的真实视角，包括：在多个真实视角对应的图像采集位置中，确定出与所述目标视角对应的图像采集位置距离最近的位置；将确定出的位置所对应的真实视角作为与所述目标视角相似度最高的真实视角。7.根据权利要求3所述的方法，其特征在于，所述方法还包括：对所述背景投影图像进行高斯模糊处理；2CN113837979A权利要求书2/2页合成所述背景投影图像和所述前景投影图像，包括：合成处理后的背景投影图像和所述前景投影图像。8.一种直播图像合成装置，其特征在于，包括：确定模块，用于确定与目标视角相似度最高的真实视角，所述目标视角为无法采集真实图像的视角，所述真实视角为可采集真实图像的视角；第一获得模块，用于利用从所述真实视角采集的背景图像获得所述目标视角的背景投影图像；第二获得模块，用于利用从所述真实视角采集的前景图像获得所述目标视角的前景投影图像；合成模块，用于合成所述背景投影图像和所述前景投影图像，将合成的图像作为从所述目标视角采集的图像。9.一种终端设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1至7