基于双目测距和图像分割对输电线舞动的检测方法.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN114998245A(43)申请公布日2022.09.02(21)申请号202210590232.1G06V10/82(2022.01)(22)申请日2022.05.26G01R31/00(2006.01)G01R31/08(2006.01)(71)申请人上海倍肯智能科技有限公司地址200030上海市徐汇区虹桥路333号1幢409A室(72)发明人刘东波李正波张永吴纯泉(74)专利代理机构上海秋冬专利代理事务所(普通合伙)31414专利代理师张月(51)Int.Cl.G06T7/00(2017.01)G06T7/11(2017.01)G06V10/26(2022.01)G06V10/44(2022.01)G06V10/764(2022.01)权利要求书1页说明书6页附图6页(54)发明名称基于双目测距和图像分割对输电线舞动的检测方法(57)摘要本发明提供了一种基于双目测距和图像分割对输电线舞动的检测方法，涉及图像识别技术领域，所述检测方法能通过深度学习图像分割算法模型进行推理识别，再将识别结果传送给双目测距系统，双目测距系统通过识别结果判断是否需要计算距离，最后将识别结果和计算的障碍物距离信息发送到手机APP端和设备终端，在手机APP端查看图片，导线和障碍物的轮廓和距离信息会以不同颜色标出，并和原图做了对比，根据在同一场景不同时刻的固定障碍物距离的异同，便可判断导线是否舞动以及舞动的剧烈程度。CN114998245ACN114998245A权利要求书1/1页1.一种基于双目测距和图像分割对输电线舞动的检测方法，其特征在于所述检测方法基于安装在输电线上的在线监测装置实时采集导线舞动、震动和风偏等工况图像信息，构建输电线三维运行姿态信息，检测过程中应用有包括硬件设备端、AI图像识别、双目测距系统、后端服务、APP端五大功能模块在内的检测系统，所述检测方法的步骤包括：S1:在输电线上安装好图像采集终端设备，标定准确双目相机；S2:终端设备获取双目图片并转发给AI服务器，AI服务器获取图片后，通过图像分割技术推理出图片中是否存在危险目标以及危险目标位置及类别信息；S3:双目测距系统获取到AI服务器提供的危险目标在图片中的位置信息，根据公式计算出危险目标和导线的距离以及危险目标和设备的距离，同时可构建出危险目标、导线和设备的三维姿态信息；S4:预警系统利用图像分割技术提供的目标类别和双目测距技术提供的[A1]危险等级；同时根据[A2]一段时间内的变化情况，计算出导线的舞动剧烈程度。2.根据权利要求1所述的基于双目测距和图像分割对输电线舞动的检测方法，其特征在于所述S2中的图像分割技术中利用的是DeepLabV3+的语义分割模型，由Encoder和Decoder两部分组成，将DeepLab的DCNN及ASPP部分看做Encoder，将ASPP输出的高层语义特征与DCNN中低层高分辨率信息融合后上采样成原图大小的部分看做Decoder，其中使用的上采样方式是双线性插值。3.根据权利要求2所述的基于双目测距和图像分割对输电线舞动的检测方法，其特征在于所述S2中对采集图像进行卷积上采样的方式是通过空洞卷积进行计算：对于卷积输出的特征y上的每个位置i以及对应的卷积核w，对于输入x，空洞卷积的计算如下所示：上式中r为空洞率，表示卷积核在卷积操作的输入x上的取样步长；k表示卷积核参数的位置，例如卷积核尺寸为3，则k=0,1,2；kernel_size表示卷积核尺寸。4.根据权利要求1所述的基于双目测距和图像分割对输电线舞动的检测方法，其特征在于所述S3中的双目测距系统中被测点与相机之间的距离计算方式为：z为被测点P到相机的距离，与分别为左右相机的光学中心，b为两光学中心的距离，和分别是被测点P在左右图像上的成像点，f为相机的焦距，和为成像点相对于图像中点的距离；根据三角形相似定理，可以得到公式（1）：简化公式（1），并将用d来替换后，得到公式2，即双目测距的原理公式：其中d被称为视差，所以在已知基线长度、相机焦距以及像点视差时，就可以通过公式（2）计算出被测点距离相机的实际距离。5.根据权利要求4所述的基于双目测距和图像分割对输电线舞动的检测方法，其特征在于所述S1中标定的相机数据包括自身的内在参数和摄像机相对位置外在参数。2CN114998245A说明书1/6页基于双目测距和图像分割对输电线舞动的检测方法技术领域[0001]本发明涉及图像识别技术领域，尤其涉及基于双目测距和图像分割对输电线舞动的检测方法。背景技术[0002]我国输电网建设大规模迅速扩大，输电线舞动引发的事故逐渐凸显，轻则造成闪络、跳闸，重则造成金属夹具损坏，导线断股、断线，杆塔螺栓松动、脱落，甚至倒杆等严重事故，容易造