虚拟试衣方法、装置、服务器及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114170405A(43)申请公布日2022.03.11(21)申请号202111406628.8(22)申请日2021.11.24(71)申请人深圳数联天下智能科技有限公司地址518000广东省深圳市南山区粤海街道高新区社区高新南七道20号深圳国家工程实验室大楼B1601(72)发明人张阿强(74)专利代理机构深圳市六加知识产权代理有限公司44372代理人陈金赏(51)Int.Cl.G06T19/00(2011.01)G06T19/20(2011.01)G06T5/50(2006.01)权利要求书2页说明书20页附图9页(54)发明名称虚拟试衣方法、装置、服务器及存储介质(57)摘要本申请实施例涉及图像处理技术领域，公开了一种虚拟试衣方法、装置、服务器及存储介质，一方面，本申请通过获取第一人体图像和第一衣服图像；根据第一人体图像，获取人体图像解析信息；根据人体图像解析信息和第一衣服图像，通过外观流变形模块进行处理，生成第一形变信息，能够保留衣服特征和细节；另一方面，通过获取第二衣服图像，通过第一形变信息对第二衣服图像进行变形，生成第三衣服图像；融合第三衣服图像和人体图像解析信息，生成第一试穿图像；通过第一形变信息对第一衣服图像进行变形，生成第四衣服图像；融合第四衣服图像以及第一试穿图像，生成目标穿衣图像，本申请实施例能够提高衣服的融合效果。CN114170405ACN114170405A权利要求书1/2页1.一种虚拟试衣方法，其特征在于，包括：获取第一人体图像和第一衣服图像；根据所述第一人体图像，获取人体图像解析信息；根据所述人体图像解析信息和所述第一衣服图像，通过外观流变形模块进行处理，生成第一形变信息；获取第二衣服图像，通过所述第一形变信息对所述第二衣服图像进行变形，生成第三衣服图像；融合所述第三衣服图像和所述人体图像解析信息，生成第一试穿图像；通过所述第一形变信息对所述第一衣服图像进行变形，生成第四衣服图像；融合所述第四衣服图像以及所述第一试穿图像，生成目标穿衣图像。2.根据权利要求1所述的方法，其特征在于，所述融合所述第三衣服图像和所述人体图像解析信息，生成第一试穿图像，包括：将所述第三衣服图像和所述人体图像解析信息输入第一生成模块，以融合所述第三衣服图像和所述人体图像解析信息，生成第一试穿图像。3.根据权利要求2所述的方法，其特征在于，所述融合所述第四衣服图像以及所述第一试穿图像，生成目标穿衣图像，包括：将所述第四衣服图像和所述第一试穿图像输入第二生成模块，以融合所述第四衣服图像和所述第一试穿图像，生成目标穿衣图像。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：通过第一生成模块对所述第二生成模块进行知识蒸馏，使得所述第二生成模块学习到第一生成模块的特征提取方式和特征融合方式。5.根据权利要求4所述的方法，其特征在于，所述第一生成模块包括第一外观流变形模块，所述第二生成模块包括第二外观流变形模块，所述通过第一生成模块对所述第二生成模块进行知识蒸馏，包括：通过所述第一外观流变形模块中的特征层对所述第二外观流变形模块中的特征层进行距离计算，将计算得到的距离作为损失函数，训练所述第二生成模块，使得所述第二外观流变形模块中的特征层接近第一外观流变形模块中的特征层。6.根据权利要求5所述的方法，其特征在于，所述方法还包括：获取生成对抗网络，其中，所述生成对抗网络包括生成网络和判别网络；基于所述生成对抗网络，对所述第二生成模块进行对抗训练。7.根据权利要求4或5所述的方法，其特征在于，所述第一生成模块包括有解析器生成模块，所述第二生成模块包括无解析器生成模块。8.一种虚拟试衣装置，其特征在于，包括：获取单元，用于获取第一人体图像和第一衣服图像；以及，根据所述第一人体图像，获取人体图像解析信息；形变单元，用于根据所述人体图像解析信息和第一衣服图像，通过外观流变形模块进行处理，生成第一形变信息；以及，用于通过所述第一形变信息对所述第一衣服图像进行变形，生成第四衣服图像；生成单元，用于获取第二衣服图像，通过所述第一形变信息对所述第二衣服图像进行2CN114170405A权利要求书2/2页变形，生成第三衣服图像；融合单元，用于融合所述第三衣服图像和所述人体图像解析信息，生成第一试穿图像；以及，融合所述第四衣服图像以及所述第一试穿图像，生成目标穿衣图像。9.一种服务器，其特征在于，包括：存储器以及一个或多个处理器，所述一个或多个处理器用于执行存储在所述存储器中的一个或多个计算机程序，所述一个或多个处理器在执行所述一个或多个计算机程序时，使得所述服务器实现如权利要求1‑7任一项所述的方法。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介