一种安全生产的视频监控方法及系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111325119A(43)申请公布日2020.06.23(21)申请号202010083313.3(22)申请日2020.02.09(71)申请人华瑞新智科技（北京）有限公司地址100083北京市海淀区中关村南大街5号二区683号楼9层91818室(72)发明人刘鑫张继勇庄浩(74)专利代理机构北京君慧知识产权代理事务所(普通合伙)11716代理人董延丽(51)Int.Cl.G06K9/00(2006.01)H04N7/18(2006.01)G06N3/04(2006.01)G06N3/08(2006.01)权利要求书2页说明书7页附图3页(54)发明名称一种安全生产的视频监控方法及系统(57)摘要本申请公开了一种安全生产的视频监控方法，包括接收与安全生产有关的视频流图像。从视频流图像中，每间隔若干帧图像，选取一帧图像。将所选取的图像输入深度卷积神经网络模型，以识别以下至少一项或几项与安全生产有关的违规内容：待识别对象的违规外观信息、待识别对象的违规行为信息、车辆种类或车辆驶入的区域信息、生产设备的异常状态、烟火状态、遗留物信息。将识别出的违规内容对应的图像进行存储，以输入至深度卷积神经网络模型对深度卷积神经网络模型进行再次训练。本申请通过上述方法实现了对生产环境全方位的安全监控，同时实现了深度卷积神经网络模型的自动更新升级，保证了安全隐患检测的准确度。CN111325119ACN111325119A权利要求书1/2页1.一种安全生产的视频监控方法，其特征在于，所述方法包括：接收与安全生产有关的视频流图像；从所述视频流图像中，每间隔若干帧图像，选取一帧图像；将所选取的图像输入深度卷积神经网络模型，识别以下至少一项或几项与安全生产有关的违规内容：待识别对象的违规外观信息、待识别对象的违规行为信息、车辆种类或车辆驶入的区域信息、生产设备的异常状态、烟火状态、遗留物信息；将识别出的所述违规内容对应的图像进行存储，以输入至所述深度卷积神经网络模型对所述深度卷积神经网络模型进行再次训练。2.根据权利要求1所述的方法，其特征在于，在所述将所选取的图像输入深度卷积神经网络模型之前，所述方法还包括：获取图像样本库；其中，所述图像样本库包含多种有关安全隐患场景的样本图像；标注所述图像样本库中每张样本图像所包含的与安全隐患相关的内容；使用所述图像样本库中的多张样本图像以及所述标注出的样本图像中包含的与安全隐患相关内容，通过机器学习训练得到所述深度卷积神经网络模型。3.根据权利要求1所述的方法，其特征在于，所述待识别对象的违规外观信息包括：待识别对象未戴安全帽、待识别对象未穿规定工装、待识别对象未戴手套；所述待识别对象的违规行为信息包括：待识别对象使用手机、待识别对象吸烟、待识别对象攀高；所述车辆种类或车辆驶入的区域信息包括：外来车辆信息、车辆驶入违禁区；所述生产设备的异常状态包括：生产设备出现腐蚀、生产设备破损、生产设备漏油；所述烟火状态包括：监控区域出现烟火；所述遗留物信息包括：监控区域出现纸箱、监控区域出现衣物。4.根据权利要求1所述的方法，其特征在于，在所述将所选取的图像输入深度卷积神经网络模型之前，所述方法还包括：获取图像样本库；其中，所述图像样本库包含多种有关安全隐患场景的样本图像；标注所述图像样本库中每张样本图像所包含的运动对象的至少一个部位点；使用所述图像样本库中的多张样本图像以及所述标注出的运动对象的至少一个部位点，通过机器学习训练得到所述深度卷积神经网络模型；其中，所述至少一个部位点包括以下任意一项或多项：头顶、左肩尾、右肩尾、左肘点、右肘点、左腕点、右腕点、左髋点、右髋点、左膝点、右膝点、左踝点、右踝点。5.根据权利要求1所述的方法，其特征在于，在所述将所选取的图像输入深度卷积神经网络模型之前，所述方法还包括：根据所述深度卷积神经网络模型对输入图像格式的要求，对所选取的图像进行预处理；所述预处理至少包括以下任意一项或者几项：改变所选取的图像的颜色、调整所选取的图像的大小、对所选取的图像进行校正。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：基于角色访问控制方法确定所述视频流图像对应的访问权限；所述访问权限与账号进行关联；所述访问权限的级别与所述账号对应用户的级别有2CN111325119A权利要求书2/2页关。7.根据权利要求1所述的方法，其特征在于，在所述将所选取的图像输入深度卷积神经网络模型，识别以下至少一项或几项与安全生产有关的违规内容之后，所述方法还包括：将所述与安全生产有关的视频流图像通过大于预设尺寸的屏幕进行展示；在所述屏幕的第一区域展示所述视频流图像，并通过预设方式在所述图像中对所述违规内容进行定位；在所述屏幕的第二区域以