石刻模型构建方法、装置、设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113012293A(43)申请公布日2021.06.22(21)申请号202110301857.7G06T7/73(2017.01)(22)申请日2021.03.22G06K9/46(2006.01)G06N3/04(2006.01)(71)申请人平安科技（深圳）有限公司G06N3/08(2006.01)地址518033广东省深圳市福田区福田街道福安社区益田路5033号平安金融中心23楼(72)发明人刘奡智张立沛韩宝强肖京(74)专利代理机构北京市京大律师事务所11321代理人姚维(51)Int.Cl.G06T17/20(2006.01)G06T13/20(2011.01)G06T15/04(2011.01)G06T15/20(2011.01)权利要求书2页说明书12页附图5页(54)发明名称石刻模型构建方法、装置、设备及存储介质(57)摘要本发明涉及人工智能领域，公开了一种石刻模型构建方法、装置、设备及存储介质。该方法包括：采集目标石刻多角度的石刻图像；分别对各石刻图像进行三维空间数据提取，得到对应点云数据，分别对各石刻图像进行二维表征数据提取，得到对应表征数据；采用预置第一深度学习算法对各点云数据进行三维重建，得到三维网络模型，采用预置第二深度学习算法对所述各表征数据进行特征提取，得到石刻图像的纹理特征与颜色特征；根据纹理特征，对三维网络模型进行纹理融合，得到目标石刻的初始三维模型；根据颜色特征，对初始三维模型进行颜色渲染，得到目标石刻的三维仿真模型。本发明采用多目视觉和人工智能技术，提升了石刻模型的精度及视觉效果。CN113012293ACN113012293A权利要求书1/2页1.一种石刻模型构建方法，其特征在于，所述石刻模型构建方法包括：采集目标石刻多个角度的石刻图像；分别对所述各石刻图像进行三维空间数据提取，得到所述各石刻图像对应的点云数据，以及分别对所述各石刻图像进行二维表征数据提取，得到所述各石刻图像对应的表征数据；采用预置第一深度学习算法对所述各点云数据进行三维重建，得到所述石刻图像的三维网络模型，以及采用预置第二深度学习算法对所述各表征数据进行特征提取，得到所述石刻图像的纹理特征与颜色特征；根据所述纹理特征，对所述三维网络模型进行纹理融合，得到所述目标石刻的初始三维模型；根据所述颜色特征，对所述初始三维模型进行颜色渲染，得到所述目标石刻的三维仿真模型。2.根据权利要求1所述的石刻模型构建方法，其特征在于，所述分别对所述各石刻图像进行三维空间数据提取，得到所述各石刻图像对应的点云数据包括：采用棋盘格法对拍摄相机进行几何参数校准；采用多目视觉算法，对所述多角度的石刻图像进行三维特征点匹配，得到所述石刻图像的特征点匹配信息；根据所述特征点匹配信息，对所述拍摄相机进行姿态估计，得到相机姿态估算值；对所述相机姿态估算值进行三角化处理，得到所述石刻图像对应的点云数据；对所述点云数据进行密集匹配，得到密集点云数据。3.根据权利要求1所述的石刻模型构建方法，其特征在于，所述分别对所述各石刻图像进行二维表征数据提取，得到所述各石刻图像对应的表征数据包括：调整所述各石刻图像的尺寸，并对所述石刻图像进行裁剪，得到多个标准石刻图像；将所述标准石刻图像输入预置残差学习网络进行特征提取，得到所述标准石刻图像的特征图像；对所述特征图像的特征点数据进行标注，得到对应石刻图像的表征数据。4.根据权利要求1或2所述的石刻模型构建方法，其特征在于，所述采用预置第一深度学习算法对所述各点云数据进行三维重建，得到所述石刻图像的三维网络模型包括：对所述各点云数据进行多角度二维卷积运算，得到多个像素点输出值；根据所述多个像素点输出值，构建所述石刻图像的三维结构；对所述三维结构进行纹理渲染，得到所述石刻图像的三维网络模型。5.根据权利要求1或3所述的石刻模型构建方法，其特征在于，所述采用预置第二深度学习算法对所述各表征数据进行特征提取，得到所述石刻图像的纹理特征与颜色特征包括：将所述各表征数据输入预置Mask‑RCNN模型进行特征提取，得到多个第一特征图像；将所述多个第一特征图像输入预置GAN网络进行特征还原，得到多个第二特征图像；分别对所述多个第二特征图像进行特征提取，得到所述石刻图像的纹理特征与颜色特征。6.根据权利要求1所述的石刻模型构建方法，其特征在于，所述根据所述纹理特征，对2CN113012293A权利要求书2/2页所述三维网络模型进行纹理融合，得到所述目标石刻的初始三维模型包括：对所述纹理特征进行特征分类与识别，生成纹理特征图像；采用纹理映射算法，对所述纹理特征图像进行纹理映射，生成纹理图像；将所述纹理图像和所述三维网络模型进行纹理融合，得到所述目标石刻的初始三