一种基于多视角双目结构光的水下三维重建方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113971691A(43)申请公布日2022.01.25(21)申请号202111083286.0(22)申请日2021.09.16(71)申请人中国海洋大学地址266000山东省青岛市崂山区松岭路238号(72)发明人胡业琦董军宇范浩解志杰贾振霖杜秀瑞(74)专利代理机构北京喆翙知识产权代理有限公司11616代理人范琳(51)Int.Cl.G06T7/521(2017.01)权利要求书4页说明书9页附图3页(54)发明名称一种基于多视角双目结构光的水下三维重建方法(57)摘要本发明公开一种基于多视角双目结构光的水下三维重建方法，属于计算机视觉水下三维重建技术领域，其包括以下方法步骤：相机参数标定，首先调整相机的焦距、光圈直至获取到的图像清晰，固定好相机的焦距、光圈使其在图像采集过程中不变，拍摄若干组标定板图像，使用张正友标定法标定相机的内参数，整个参数标定过程在空气中完成；本发明提供了一种新型的水下目标物体的三维重建方法，免去了对相机进行水密加工的步骤，降低了设备制作成本；本发明采用固定多视角的方式可以重建水下物体进行完整的三维模，使用双目结构光能够重建低纹理物体表面；依靠本发明提供的方法，可以对水下物体进行三维重建，重建出高精度、完整、细节丰富的三维模型。CN113971691ACN113971691A权利要求书1/4页1.一种基于多视角双目结构光的水下三维重建方法，其特征在于，包括以下方法步骤：S1、相机参数标定，首先调整相机的焦距、光圈直至获取到的图像清晰，固定好相机的焦距、光圈使其在图像采集过程中不变，拍摄若干组标定板图像，使用张正友标定法标定相机的参数，整个参数标定过程在空气中完成；S2、图像采集，使用DLP光机投射一系列编码结构光的图像，包括以下步骤：S21、采用10位格雷码条纹图，包括10张纵向正格雷码，10张纵向逆格雷码，格雷码条纹图是黑白条纹相间的图像，其中，黑色条纹，代表编码值为0，白色条纹，代表编码值为1；正格雷码条纹图用于对二维图像的行进行编码，逆格雷码条纹图与正格雷码条纹图编码值相反，正格雷码条纹图中的黑色条纹变为白色条纹，白色条纹变为黑色条纹，逆格雷码条纹图用来辅助目标物体图像的二值化操作；S22、将目标物体置于水中，使用投影光机按顺序向目标物体投射格雷码条纹图，每投射一张格雷码条纹图，左右目相机就分别捕捉一张图像，双目相机依次捕捉带有格雷码条纹图的目标物体图像，直至20张格雷码条纹图投射结束，关闭双目相机和投影光机；S3、图像校正，步骤S2获取到的图像对其进行立体校正，把实际非共面行对准的两幅图像校正为共面行对准，用于左右图像的对应点匹配；S4、单视角三维重建，包括以下步骤：S41、图像二值化：将二值化后的格雷码图像记为对于左相机图像，将矫正后的带有正格雷码条纹的图像(记为)与带有逆格雷码条纹的图像(记为)进行逐像素比较，二值化的过程用以下公式表示：n(n＝0,1,...,9)表示条纹图的索引值，(i,j)表示图像每个像素位置的索引值。当时，该像素为属于无效区域，不对其进行二值化操作，右相机图像也通过此方式进行二值化操作；S42、解码：将一组格雷码图像解码到一组二进制图像解码到一张十进制图像D(i,j)；S43、匹配：格雷码条纹可对图像的列进行编码，图像经过立体校正后可将图像校正为共面行对准，以行方向进行搜索，左图像中有唯一点与右图像中一点对应；S44、求解点云：在成像过程中本方法以左相机为基准，即以左相机光心为原点建立世界坐标系，在步骤S43中获取到了左右目图像的所有匹配点对，计算目标物体上一点的深度值Zc，用公式表示为：其中，f为相机焦距，ul，ur分别为匹配点对在行方向上的像素位置，d为左右目图像的视差值，b为双目相机的基线；2CN113971691A权利要求书2/4页再根据针孔模型可解得目标物体上一点在世界坐标系下的三维坐标Pw＝Xw,Yw,Zw)，其中，针孔模型为：将记为K，记为T；在针孔模型中坐标都以齐次坐标形式表示，其中，(u,v,1)为世界坐标系下点Pw对应在左相机图像上的像素点位置，(x,y,1)为Pw在图像坐标系下的位置，(Xc,Yc,Zc,1)为Pw在相机坐标系下的位置，K表示相机的内参数矩阵，由相机参数标定获得，T表示外参数矩阵，世界坐标系原点建立在左相机光心上，T是一个单位矩阵可解得Pw为：对于左相机图像上的具有匹配点的像素点由上述方式求解其对应的三维坐标点，获取到目标物体的点云；S45、修正点云：在重建过程中的相机平面与玻璃平面是平行放置，使用水下折射模型对三维坐标Pw进行修正，修正后的目标点三维坐标记为Pr＝(Xr,Yr,Zr)，水下折射模型可表示为：其中，h为相机光心到玻璃平面的距离，