一种电力杆塔作业围栏违规设置的检测方法、系统及设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114419483A(43)申请公布日2022.04.29(21)申请号202111547915.0(22)申请日2021.12.16(71)申请人山东鲁软数字科技有限公司地址250000山东省济南市高新技术产业开发区新泺大街2008号银荷大厦(72)发明人邢宏伟陆顺张建辉王军建李向阳刘涛李超(74)专利代理机构济南舜源专利事务所有限公司37205代理人赵阳(51)Int.Cl.G06V20/40(2022.01)G06V10/82(2022.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书2页说明书6页附图3页(54)发明名称一种电力杆塔作业围栏违规设置的检测方法、系统及设备(57)摘要本发明提供一种电力杆塔作业围栏违规设置的检测方法、系统及设备，构建图像数据库，将获得的待检测图像进行标注后存入图像数据库；以杆塔上的工人为检测的目标，训练施工场景检测模型，并形成场景检测模型；以地面上的围栏为检测的目标，训练围栏检测模型，并形成围栏检测模型；以图片中的地面为分割的目标，训练地面分割模型，并形成地面分割模型；将施工现场采集视频流处理为图片，并将图片分别输入场景检测模型、围栏检测模型、地面分割模型中，判定是否存在违规行为。本发明减少施工现场中人工巡检作业的工作量，防止漏检情况的发生，避免因施工人员违规作业导致的安全事故的发生。CN114419483ACN114419483A权利要求书1/2页1.一种面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，方法包括：步骤一：构建图像数据库，使用图像获取工具对监控视频解码处理获得待检测图像，并将获得的待检测图像进行标注后存入图像数据库；步骤二：训练施工场景检测模型，以杆塔上的工人为检测的目标，从步骤一所述的图像数据库中选取多个训练图像及标签数据，输入到yolov5算法中，直至所述的场景检测模型满足使用要求，形成场景检测模型；步骤三：训练围栏检测模型，以地面上的围栏为检测的目标，从步骤一所述的图像数据库选取多个训练图像及标签数据，输入到yolov5算法中，直至所述的围栏检测模型满足使用要求，形成围栏检测模型；步骤四：训练地面分割模型，以图片中的地面为分割的目标，从步骤一所述的图像数据库中选取多个训练图像及标签数据，输入到deeplabv3算法中，直至所述的地面分割模型满足使用要求，形成地面分割模型；步骤五：根据步骤一所述的方法将施工现场采集视频流处理为图片，并将图片分别输入到步骤二所述的场景检测模型、步骤三所述的围栏检测模型、步骤四所述的地面分割模型中；步骤六：对步骤五所述的场景检测模型、围栏检测模型、地面分割模型的输出结果进行判断及计算，判定是否存在违规行为。2.根据权利要求1所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，违规行为判断条件为：在地面检测模型中，设置阈值a；阈值a为判断地面分割模型输出的图像中地面所占整张图像的比例是否达到设定的条件；当场景检测模型中未检测出杆塔上工人，合规性判断输出结果为正常；当场景检测模型中检测出杆塔上工人，围栏检测模型检测存在围栏，合规性判断输出结果为正常；当场景检测模型检测出塔杆上工人，围栏检测模型未检测出围栏，且地面分割模型中预测出的地面占图像的比例未超过设定的阈值a，合规性判断输出结果为正常；当场景检测模型检测出塔杆上工人，围栏检测模型未检测出围栏，且地面分割模型中预测出的地面占图像的比例超过设定的阈值a，合规性判断输出结果为违规。3.根据权利要求1或2所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，步骤一还包括：对待检图像中的围栏和杆塔上工人，使用LabelImg标注工具分别以围栏和杆塔上的工人为目标，利用矩形框标注，形成XML标签文件；对待检图像的地面，使用PixelAnnotationTool标注工具将地面标注为mask标签。4.根据权利要求1或2所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，步骤二和步骤三中的训练图像按照8:2的比例设置训练集和验证集。5.根据权利要求1或2所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，步骤二和步骤三中的yolov5算法，在NVIDIAGPU服务器中以算法默认参数进行训练。2CN114419483A权利要求书2/2页6.根据权利要求1或2所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，步骤二和步骤三中的模型满足使用要求，指的是在训练完成后，以mAP作为评估标准进行评估，直至满足使用要求。7.根据权利要求1或2所述的面向电力杆塔作业的围栏设置合规性检测方法，其特征在于，步骤四中所述的deeplabv3算法，在NVIDIAGPU服务器