虚拟形象渲染方法、装置、系统、电子设备、介质及产品.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116137080A(43)申请公布日2023.05.19(21)申请号202111369600.1(22)申请日2021.11.16(71)申请人博泰车联网（南京）有限公司地址211500江苏省南京市江北新区江淼路88号腾飞大厦c座4楼(72)发明人李少君李明谢申汝王明丁云裴峥(74)专利代理机构北京润泽恒知识产权代理有限公司11319专利代理师李兴迪(51)Int.Cl.G06V40/16(2022.01)权利要求书2页说明书11页附图6页(54)发明名称虚拟形象渲染方法、装置、系统、电子设备、介质及产品(57)摘要本发明提供一种虚拟形象的渲染方法、装置，系统，电子设备、存储介质及产品，所述方法包括：获取用户的人脸图像块，以及获取所述人脸图像块对应的人脸运动单元编码列表；对所述人脸图像块的面部特征进行预测，得到预测结果；确定并展示与所述预测结果对应的虚拟形象推荐列表；获取所述用户从所述虚拟形象推荐列表中选择的目标虚拟形象；将所述人脸运动单元编码列表渲染至所述目标虚拟形象的脸部，生成个性化的目标虚拟形象。采用本发明实施例中，不但简化了生成个性化虚拟形象的操作步骤，而且还降低了虚拟形象的建模成本，丰富了虚拟形象的多样性。CN116137080ACN116137080A权利要求书1/2页1.一种虚拟形象的渲染方法，其特征在于，包括：获取用户的人脸图像块，以及获取所述人脸图像块对应的人脸运动单元编码列表；对所述人脸图像块的面部特征进行预测，得到预测结果；确定并展示与所述预测结果对应的虚拟形象推荐列表；获取所述用户从所述虚拟形象推荐列表中选择的目标虚拟形象；将所述人脸运动单元编码列表渲染至所述目标虚拟形象的脸部，生成个性化的目标虚拟形象。2.根据权利要求1所述的虚拟形象的渲染方法，其特征在于，所述对所述人脸图像块的面部特征进行预测，得到预测结果包括：对所述人脸图像块的面目特征进行年龄预测，得到所述人脸图像块的年龄预测结果；以及对所述人脸图像块的面目特征进行性别预测，得到所述人脸图像块的性别预测结果。3.根据权利要求2所述的虚拟形象的渲染方法，其特征在于，所述对所述人脸图像块的面目特征进行年龄预测，得到所述人脸图像块的年龄预测结果，包括：通过年龄段分类模型或年龄段识别算法对所述人脸图像块的面目特征进行年龄预测，得到所述人脸图像块的年龄预测结果；所述对所述人脸图像块的面目特征进行性别的预测，得到所述人脸图像块的性别预测结果，包括：通过性别分类模型或性别识别算法对所述人脸图像块的面目特征进行性别预测，得到所述人脸图像块的性别预测结果。4.根据权利要求2所述的虚拟形象的渲染方法，其特征在于，所述确定并展示与所述预测结果对应的虚拟形象推荐列表，包括：根据所述人脸图像块的年龄预测结果和性别预测结果，从虚拟形象素材库中检索出对应的虚拟形象推荐列表；将所述虚拟形象推荐列表展示给所述用户，以使所述用户选择目标虚拟形象。5.根据权利要求1至4任一项所述的虚拟形象的渲染方法，其特征在于，所述获取所述人脸图像块对应的人脸运动单元编码列表，包括：从云端人脸运动单元编码库中获取与所述人脸图像块对应的人脸运动单元编码列表；或者对所述人脸图像块进行人脸运动单元分类，得到人脸运动单元编码列表。6.根据权利要求5所述的虚拟形象的渲染方法，其特征在于，在对所述人脸图像块进行人脸运动单元分类后，所述方法还包括：将得到所述人脸运动单元编码列表存储到云端人脸运动单元编码库。7.一种虚拟形象的渲染装置，其特征在于，包括：第一获取模块，用于获取用户的人脸图像块；第二获取模块，用于获取所述人脸图像块对应的人脸运动单元编码列表；预测模块，用于对所述人脸图像块的面部特征进行预测，得到预测结果；确定模块，用于确定与所述预测结果对应的虚拟形象推荐列表；2CN116137080A权利要求书2/2页展示模块，用于展示所述确定模块确定的与所述预测结果对应的虚拟形象推荐列表；第三获取模块，用于获取所述用户从所述虚拟形象推荐列表中选择的目标虚拟形象；渲染模块，用于将所述人脸运动单元编码列表渲染至所述目标虚拟形象的脸部，得到个性化的目标虚拟形象。8.一种虚拟形象的渲染系统，其特征在于，包括：人脸检测模块，用于对人脸进行检测，得到人脸图像块；虚拟形象检索模块，用于对所述人脸图像块的面部特征进行预测，得到预测结果，确定并展示与所述预测结果对应的虚拟形象推荐列表，以及获取所述用户从所述虚拟形象推荐列表中选择的目标虚拟形象；人脸运动单元编码获取模块，用于对所述人脸检测模块检测得到的所述人脸图像块进行人脸运动单元分类，得到人脸运动单元编码列表；或者从云端人脸运动单元编码库中获取与所述人脸图像块对应的人脸运动单元编码列表；虚拟形象渲染模块，用于将所述