一种图像处理方法、装置、设备和存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114445601A(43)申请公布日2022.05.06(21)申请号202210366241.2(22)申请日2022.04.08(71)申请人北京大甜绵白糖科技有限公司地址100080北京市海淀区海淀北二街10号05层0505(72)发明人杨瑞健薛永娇赵代平(74)专利代理机构北京博思佳知识产权代理有限公司11415专利代理师李威(51)Int.Cl.G06T19/00(2011.01)G06T19/20(2011.01)G06Q30/06(2012.01)G06T15/00(2011.01)权利要求书3页说明书26页附图11页(54)发明名称一种图像处理方法、装置、设备和存储介质(57)摘要本申请提出一种图像处理方法、装置、设备和存储介质。所述方法可以包括：获取用户身体部位图像、待渲染的穿戴效果模型以及预设的身体部位模型；其中，所述穿戴效果模型具有预设的第一位姿信息，所述身体部位模型具有预设的第二位姿信息；根据所述用户身体部位图像，调整所述穿戴效果模型的第一位姿信息以及所述身体部位模型的第二位姿信息；根据调整后的第一位姿信息与调整后的第二位姿信息，确定所述穿戴效果模型与所述身体部位模型之间的遮挡关系；根据所述遮挡关系及所述穿戴效果模型，对所述用户身体部位图像进行渲染处理，得到穿戴效果图像。由此可以提升虚拟穿戴效果。CN114445601ACN114445601A权利要求书1/3页1.一种图像处理方法，其特征在于，包括：获取用户身体部位图像、待渲染的穿戴效果模型以及预设的身体部位模型；其中，所述穿戴效果模型具有预设的第一位姿信息，所述身体部位模型具有预设的第二位姿信息；根据所述用户身体部位图像，调整所述穿戴效果模型的第一位姿信息以及所述身体部位模型的第二位姿信息；根据调整后的第一位姿信息与调整后的第二位姿信息，确定所述穿戴效果模型与所述身体部位模型之间的遮挡关系；根据所述遮挡关系及所述穿戴效果模型，对所述用户身体部位图像进行渲染处理，得到穿戴效果图像。2.根据权利要求1所述的方法，其特征在于，在获取用户身体部位图像之后，所述方法还包括：对所述用户身体部位图像中的用户身体部位进行分割，得到身体部位分割图；所述身体部位分割图指示所述用户身体部位的区域形状；在根据调整后的第一位姿信息与调整后的第二位姿信息，确定所述穿戴效果模型与所述身体部位模型之间的遮挡关系之前，所述方法还包括：利用所述身体部位分割图，对所述身体部位模型进行调整，得到与所述用户身体部位匹配的身体部位模型。3.根据权利要求2所述的方法，其特征在于，所述利用所述身体部位分割图，对所述身体部位模型进行调整，得到与所述用户身体部位匹配的身体部位模型，包括：对所述身体部位模型进行三维到二维的投影方法，得到身体部位的二维模型；根据身体部位分割图，将所述二维模型中处于所述身体部位分割图以外的像素点删除，得到修正之后的二维模型；对所述二维模型进行二维到三维的映射，得到与所述用户身体部位匹配的身体部位模型。4.根据权利要求1‑3任一所述的方法，其特征在于，所述根据所述用户身体部位图像，调整所述穿戴效果模型的第一位姿信息以及所述身体部位模型的第二位姿信息，包括：提取所述用户身体部位图像中用户身体部位对应的第一关键点；根据所述第一关键点，和所述身体部位模型中的第二关键点之间的位置映射关系，调整所述第一位姿信息与所述第二位姿信息。5.根据权利要求4所述的方法，其特征在于，所述根据所述第一关键点，和所述身体部位模型中的第二关键点之间的位置映射关系，调整所述第一位姿信息与所述第二位姿信息，包括：根据所述第一关键点，和所述身体部位模型中的第二关键点之间的位置映射关系，确定所述身体部位模型对应的位姿调整信息；根据所述位姿调整信息，分别调整所述第一位姿信息与所述第二位姿信息。6.根据权利要求5所述的方法，其特征在于，所述根据所述第一关键点，和所述身体部位模型中的第二关键点之间的位置映射关系，确定所述身体部位模型对应的位姿调整信息，包括：获取所述第一关键点的第一位置信息以及所述第二关键点的第二位置信息；2CN114445601A权利要求书2/3页基于所述第一位置信息与所述第二位置信息，以及预设的位置映射关系，得到所述位姿调整信息。7.根据权利要求6所述的方法，其特征在于，所述用户身体部位图像为视频流中的图像；在基于所述第一位置信息与所述第二位置信息，以及预设的位置映射关系，得到所述位姿调整信息之前，所述方法还包括：获取所述视频流中位于所述用户身体部位图像之前的N帧图像中的第一关键点的历史位置信息；根据所述历史位置信息，对所述第一位置信息进行滤波，得到滤波后的第一位置信息。8.根据权利要求1所述的方法，其特征在于，所述根据调整后的第一