图像处理方法、图像处理系统及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114266621A(43)申请公布日2022.04.01(21)申请号202111545061.2(22)申请日2021.12.16(71)申请人阿里巴巴（中国）有限公司地址310052浙江省杭州市滨江区长河街道网商路699号4号楼5楼508室(72)发明人黄文军姚迪狄(74)专利代理机构北京太合九思知识产权代理有限公司11610代理人刘戈柴艳波(51)Int.Cl.G06Q30/06(2012.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书3页说明书16页附图7页(54)发明名称图像处理方法、图像处理系统及电子设备(57)摘要本申请实施例提供一种图像处理方法、图像处理系统及电子设备。其中，方法包括：响应于用户浏览商品时触发的试用请求，获取第一用户图像；确定目标商品；获取所述目标商品对应的商品试效模板，其中，所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的；将所述商品试效模板及所述第一用户图像输入合成模型，得到用户虚拟试用所述目标商品后的第二用户图像；显示所述第二用户图像。本申请各实施例提供的技术方案中，商品试效模板是预先生成的，这样在生成用户虚拟试用所述目标商品后的第二用户图像时，合成模型可采用较为简单的网络结构，时延小，对用户来说无感知。CN114266621ACN114266621A权利要求书1/3页1.一种图像处理方法，其特征在于，包括：响应于用户浏览商品时触发的试用请求，获取第一用户图像；确定目标商品；获取所述目标商品对应的商品试效模板，其中，所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的；将所述商品试效模板及所述第一用户图像输入合成模型，得到用户虚拟试用所述目标商品后的第二用户图像；显示所述第二用户图像。2.根据权利要求1所述的方法，其特征在于，所述模板生成网络包括：映射网络及生成网络；以及所述方法还包括：对所述目标商品的商品信息进行解析，得到商品参数；对所述商品参数进行编码；利用所述映射网络，确定编码后的所述商品参数对应的第一映射参数；将所述第一映射参数输入至所述生成网络中的不同网络层，执行所述生成网络得到所述目标商品对应的商品试效模板。3.根据权利要求2所述的方法，其特征在于，还包括：获取训练样本，其中，所述训练样本包括：样本参数、待处理样本图像、样本效果图及局部样本图；利用所述映射网络，确定所述样本参数对应的第二映射参数；将所述第二映射参数输入至所述生成网络中的不同网络层，执行所述生成网络得到目标试效模板；将所述目标试效模板与所述待处理样本图像输入渲染网络，执行所述渲染网络得到渲染效果图及局部图；根据所述渲染效果图及所述样本效果图，确定第一损失；根据所述局部图与所述局部样本图，确定第二损失；利用生成对抗损失函数，确定第三损失；基于所述第一损失、所述第二损失及所述第三损失，对所述生成网络进行优化。4.根据权利要求1至3中任一项所述的方法，其特征在于，所述目标商品为彩妆品；解析出的所述商品参数包括如下中的至少一种：颜色参数、材质参数、强度参数、反映所述彩妆品对应高光效果的高光参数、反映妆容效果的妆效参数；以及对所述商品参数进行编码，包括：对所述颜色参数对应直方图进行量化编码；利用独热编码方法，对所述材质参数进行编码；将所述强度参数、所述高光参数或所述妆效参数映射到对应的预设区间中，利用独热编码方法对完成区间映射的参数进行编码。5.根据权利要求1至3中任一项所述的方法，其特征在于，将所述商品试效模板及所述第一用户图像输入合成模型，得到用户虚拟试用所述目标商品后的第二用户图像，包括：基于所述目标商品，识别所述第一用户图像中的至少一个目标部位；对所述第一用户图像中所述至少一个目标部位外围的区域进行处理，以突出所述至少2CN114266621A权利要求书2/3页一个目标部位为试用所述目标商品的部位；将所述商品时效模板及所述处理后的所述第一用户图像输入合成模型，得到用户图像中所述至少一个目标部位虚拟试用所述目标商品后的第二用户图像。6.一种图像处理方法，其特征在于，包括：响应于用户的操作，确定第一图像及目标商品；获取所述目标商品对应的商品试效模板，其中，所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的；将所述商品试效模板及所述第一图像输入合成模型，得到所述第一图像中至少一个目标对象虚拟试用所述目标商品后的第二图像；显示所述第二图像。7.一种图像处理系统，其特征在于，包括：客户端，用于响应于用户的操作，确定第一图像及目标商品；向服务端发送获取所述目标商品对应的商品试效模板的请求；所述服务端，用于根据所述请求获取所述商品