图像处理和虚化方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112233150A(43)申请公布日2021.01.15(21)申请号202010943340.3(22)申请日2020.09.09(71)申请人北京迈格威科技有限公司地址100086北京市海淀区科学院南路2号融科资讯中心A座316-318(72)发明人聂旎(74)专利代理机构北京润泽恒知识产权代理有限公司11319代理人王婷婷(51)Int.Cl.G06T7/30(2017.01)G06T7/13(2017.01)G06T3/00(2006.01)权利要求书2页说明书12页附图2页(54)发明名称图像处理和虚化方法、装置、电子设备及存储介质(57)摘要本申请实施例提供了图像处理和图像虚化方法、装置、电子设备及存储介质，图像处理方法包括：对由第一摄像头采集的第一图像和第二摄像头采集的第二图像进行立体匹配得到视差图；对第一图像进行语义边缘检测，以确定第一图像中的语义边缘区域和非语义边缘区域；基于所述第一图像中的像素的梯度、语义边缘区域和非语义边缘区域，对视差图进行保边平滑滤波处理。CN112233150ACN112233150A权利要求书1/2页1.一种图像处理方法，其特征在于，所述方法包括：对由第一摄像头采集的第一图像和第二摄像头采集的第二图像进行立体匹配得到视差图；对第一图像进行语义边缘检测，以确定第一图像中的语义边缘区域和非语义边缘区域；基于所述第一图像中的像素的梯度、语义边缘区域和非语义边缘区域，对视差图进行保边平滑滤波处理。2.根据权利要求1所述的方法，其特征在于，基于所述第一图像中的像素的梯度、语义边缘区域和非语义边缘区域，对视差图进行保边平滑滤波处理包括：基于所述第一图像中的像素的梯度，确定视差图中的视差图像素的滤波窗口的范围；根据所述滤波窗口的范围，利用预设保边平滑滤波算法分别对所述视差图中与所述语义边缘区域相对应的第一区域进行滤波处理、对所述视差图中与所述非语义边缘区域相对应的第二区域进行滤波处理。3.根据权利要求2所述的方法，其特征在于，基于所述第一图像中的像素的梯度，确定视差图中的视差图像素的滤波窗口的范围包括：降低所述非语义边缘区域中的目标像素的梯度，其中，目标像素为梯度大于梯度阈值的像素，所述目标像素的降低后的梯度小于梯度阈值；基于目标像素的降低后的梯度、预设对应关系，确定视差图中与目标像素相对应的视差图像素的滤波窗口的范围，其中，预设对应关系描述小于梯度阈值的梯度与滤波窗口的范围的对应关系，小于梯度阈值的梯度的大小与小于梯度阈值的梯度对应的滤波窗口的范围的大小成反比。4.根据权利要求1所述的方法，其特征在于，对第一图像进行语义边缘检测，以确定第一图像中的语义边缘区域和非语义边缘区域包括：利用基于机器学习的语义边缘检测器对第一图像进行语义边缘检测，得到每一个像素的属于语义边缘的置信度；将每一个像素的属于语义边缘的置信度分别与置信度阈值进行比较，以确定第一图像中的语义边缘区域和非语义边缘区域。5.根据权利要求4所述的方法，其特征在于，利用基于机器学习的语义边缘检测器对第一图像进行语义边缘检测，得到每一个像素属于语义边缘的置信度包括：将第一图像的尺寸缩小至预设尺寸，得到缩小后的第一图像；将所述缩小后的第一图像输入到基于机器学习的语义边缘检测器，得到每一个像素属于语义边缘的置信度。6.根据权利要求1-5之一所述的方法，其特征在于，所述第一摄像头采集的第一图像为在人像模式下由第一摄像头采集的图像，所述第二摄像头采集的第二图像为在人像模式下由第二摄像头采集的图像。7.一种图像虚化方法，其特征在于，所述方法包括：对视差图进行处理，得到处理后的视差图，其中，所述视差图通过对由第一摄像头采集的第一图像和第二摄像头采集的第二图像进行立体匹配得到，处理后的视差图根据权利要求1-6中任一项所述的方法对所述视差图进行处理得到；2CN112233150A权利要求书2/2页利用所述处理后的视差图对所述第一图像进行虚化，得到虚化效果渲染图像。8.一种图像处理装置，其特征在于，所述装置包括：生成单元，被配置为对由第一摄像头采集的第一图像和第二摄像头采集的第二图像进行立体匹配得到视差图；检测单元，被配置为对第一图像进行语义边缘检测，以确定第一图像中的语义边缘区域和非语义边缘区域；处理单元，被配置为基于所述第一图像中的像素的梯度、语义边缘区域和非语义边缘区域，对视差图进行保边平滑滤波处理。9.一种电子设备，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如权利要求1至7中任一项所述的方法。10.一种存储介质，当所述存储介质中的指令由电子设备执行时，使得电子设备能够执行如权利要求1至7中任一项所述的方法。3CN11