基于虚拟拍摄的抠图方法、装置、系统及图像融合方法.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115035147A(43)申请公布日2022.09.09(21)申请号202210760178.0G06T7/50(2017.01)(22)申请日2022.06.29G06T5/50(2006.01)G06T5/00(2006.01)(71)申请人卡莱特云科技股份有限公司地址518000广东省深圳市南山区西丽街道西丽社区留新四街万科云城三期C区八栋A座3801房(37-39层)(72)发明人何志民(74)专利代理机构深圳国海智峰知识产权代理事务所(普通合伙)44489专利代理师王庆海(51)Int.Cl.G06T7/194(2017.01)G06T3/00(2006.01)G06T7/13(2017.01)G06T3/40(2006.01)权利要求书2页说明书8页附图3页(54)发明名称基于虚拟拍摄的抠图方法、装置、系统及图像融合方法(57)摘要本发明公开一种基于虚拟拍摄的抠图方法、装置、系统及图像融合方法，抠图方法包括获取在同一时刻下对目标进行拍摄得到的第一图像以及第二图像，其中第一图像为普通相机或摄像机拍摄的图像，第二图像为深度相机拍摄得到的图像；利用第二图像，将第一图像中的前后景进行分离，并对分离后的前后景进行图像配准；对第二图像进行边缘处理，得到多条边缘线，从中确定抠图目标对应的目标边缘线；将目标边缘线映射至第一图像中进行显示，作为抠图目标的边缘；对第一图像进行超分辨率处理后，对第一图像中抠图目标的边缘的透明度进行调整，并从中提取出抠图目标。本发明提供的方法、装置及系统，能够提高抠图效率、效果，使图像融合的更真实、自然。CN115035147ACN115035147A权利要求书1/2页1.一种基于虚拟拍摄的抠图方法，其特征在于，所述方法包括：获取在同一时刻下对目标进行拍摄得到的第一图像以及第二图像，其中第一图像为普通相机或摄像机拍摄的图像，第二图像为深度相机拍摄得到的图像；利用所述第二图像，将所述第一图像中的前后景进行分离，并对分离后的前后景进行图像配准，调整所述第一图像中前后景的位置；根据抠图需求选择所述第一图像中的前景或后景作为抠图目标；对所述第二图像进行边缘处理，得到多条边缘线，从中确定抠图目标对应的目标边缘线；将所述目标边缘线映射至所述第一图像中进行显示，作为所述抠图目标的边缘；对所述第一图像进行超分辨率处理后，对所述第一图像中抠图目标的边缘的透明度进行调整，并从中提取出抠图目标。2.根据权利要求1所述的基于虚拟拍摄的抠图方法，其特征在于，所述利用所述第二图像，将所述第一图像中的前后景进行分离包括：从所述第二图像中提取深度信息，根据所述深度信息对所述第一图像进行二值化处理，以将所述第一图像中的前后景进行分离。3.根据权利要求1所述的基于虚拟拍摄的抠图方法，其特征在于，所述从中确定抠图目标对应的目标边缘线包括：将距离所述抠图目标最近的边缘线作为所述抠图目标对应的目标边缘线。4.根据权利要求1所述的基于虚拟拍摄的抠图方法，其特征在于，所述对所述第一图像中抠图目标的边缘的透明度进行调整包括：若所述抠图目标为前景，将所述抠图目标的边缘的透明度调整至[0.5，1]的范围内；若所述抠图目标为后景，将所述抠图目标的边缘的透明度调整为[0，0.5)的范围内。5.根据权利要求4所述的基于虚拟拍摄的抠图方法，其特征在于，所述抠图目标的边缘由多个边缘像素组成，所述对所述第一图像中抠图目标的边缘的透明度进行调整还包括：若所述抠图目标为前景，在所述抠图目标的边缘中，边缘像素与所述抠图目标的距离越大，设置所述边缘像素的透明度越小；若所述抠图目标为后景，在所述抠图目标的边缘中，边缘像素与所述抠图目标的距离越大，设置所述边缘像素的透明度越大。6.一种图像融合方法，其特征在于，所述方法包括：根据权利要求1‑5任一项所述的基于虚拟拍摄的抠图方法，提取出抠图目标；将所述抠图目标与待融合图像进行融合，并将融合后的图像发送至显示终端进行显示。7.一种基于虚拟拍摄的抠图装置，其特征在于，所述装置包括图像获取模块、前后景分离模块、边缘处理模块、映射模块、提取模块，其中：所述图像获取模块，与所述前后景分离模块连接，用于获取在同一时刻下对目标进行拍摄得到的第一图像以及第二图像，其中第一图像为普通相机或摄像机拍摄的图像，第二图像为深度相机拍摄得到的图像；所述前后景分离模块，与所述边缘处理模块连接，用于利用所述第二图像，将所述第一图像中的前后景进行分离，并对分离后的前后景进行图像配准，调整所述第一图像中前后2CN115035147A权利要求书2/2页景的位置；所述边缘处理模块，与所述映射模块连接，用于根据抠图需求选择所述第一图像中的前景或后景作为抠图目标；对所述第二图像进行边缘处理，得到多条边缘线，