图像处理方法、装置、电子设备以及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN112101330A(43)申请公布日2020.12.18(21)申请号202011310996.8G06T11/00(2006.01)(22)申请日2020.11.20(71)申请人北京沃东天骏信息技术有限公司地址100076北京市大兴区经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人白亚龙张炜梅涛周伯文(74)专利代理机构北京同立钧成知识产权代理有限公司11205代理人张娜臧建明(51)Int.Cl.G06K9/00(2006.01)G06K9/46(2006.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书2页说明书8页附图5页(54)发明名称图像处理方法、装置、电子设备以及存储介质(57)摘要本申请实施例提供一种图像处理方法、装置、电子设备以及存储介质，获取场景图，对场景图使用布局生成器处理获得多个对象之间的相对关系，对多个对象之间的相对关系使用布局生成器处理，确定多个对象的布局图，根据场景图和多个对象的布局图获得目标图像。根据各个对象的相互关系生成相应布局图，可以适应任意场景图，进而提高所生成场景图的准确度，提高所还原图像的准确度。CN112101330ACN112101330A权利要求书1/2页1.一种图像处理方法，其特征在于，包括：获取场景图，其中，所述场景图表示多个对象的语义关系；对所述场景图使用布局生成器处理获得所述多个对象之间的相对关系；对所述多个对象之间的相对关系使用所述布局生成器处理，确定所述多个对象的布局图；根据所述场景图和所述多个对象的布局图获得目标图像。2.根据权利要求1所述的图像处理方法，其特征在于，对所述场景图使用布局生成器处理获得所述多个对象之间的相对关系，具体包括：对所述场景图使用所述布局生成器处理，获得所述多个对象之间的相对位置。3.根据权利要求2所述的图像处理方法，其特征在于，所述多个对象之间的相对位置为所述多个对象在图像中的边界框之间的相对位置，或者所述多个对象在图像中的中心之间的相对位置。4.根据权利要求1至3中任意一项所述的图像处理方法，其特征在于，对所述场景图使用布局生成器处理获得所述多个对象之间的相对关系，具体包括：对所述场景图使用所述布局生成器处理获得所述多个对象之间的相对尺寸。5.根据权利要求4所述的图像处理方法，其特征在于，所述多个对象之间的相对尺寸为所述多个对象在图像中的边界框之间的相对尺寸。6.根据权利要求1所述的图像处理方法，其特征在于，根据所述场景图和所述多个对象的布局图获得目标图像，具体包括：对所述场景图处理使用特征图生成器，获得所述多个对象的特征图；对所述特征图和所述布局图使用图像生成器处理，获得所述目标图像。7.根据权利要求6所述的图像处理方法，其特征在于，对所述场景图处理使用特征图生成器，获得所述多个对象的特征图，具体包括：对所述场景图使用所述特征图生成器处理，获得所述多个对象之间的相对位置；对所述多个对象之间的相对位置使用所述特征图生成器，获得所述多个对象的特征图。8.根据权利要求6所述的图像处理方法，其特征在于，所述方法还包括：对所述布局生成器、所述特征图生成器以及所述图像生成器使用图像判别器和场景图判别器同时进行参数训练。9.根据权利要求8所述的图像处理方法，其特征在于，对所述布局生成器、所述特征图生成器以及所述图像生成器使用图像判别器和场景图判别器同时进行参数训练，具体包括：使用所述图像判别器对训练图像和图像样本处理，获得图像判别结果；使用所述场景图判别器对训练场景图和场景图样本处理，获得场景图判别结果；使用所述图像判别结果和场景图判别结果修正所述布局生成器、所述特征图生成器以及所述图像生成器的参数；其中，所述训练图像是对场景图样本使用所述布局生成器、所述特征图生成器以及所述图像生成器处理生成的，所述场景图样本是根据图像样本生成的，所述训练场景图是对所述训练图像进行特征提取生成的。2CN112101330A权利要求书2/2页10.一种图像处理装置，其特征在于，包括：获取模块，用于获取场景图，其中，所述场景图表示多个对象的语义关系；处理模块，用于对所述场景图使用布局生成器处理获得所述多个对象之间的相对关系；所述处理模块还用于对所述多个对象之间的相对关系使用所述布局生成器处理，确定所述多个对象的布局图；所述处理模块还用于根据所述场景图和所述多个对象的布局图获得目标图像。11.一种电子设备，其特征在于，包括：存储器，处理器；存储器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为实现如权利要求1至9中任一项所述的图像处理方法。12.一种计算机可读存储介质，其特征在于，所述计算机可