一种电力员工进场作业智能安全管控系统

摘要

本发明涉及一种电力员工进场作业智能安全管控系统，它包括布控球、人脸信息采集模块、人脸信息识别模块、违章行为采集模块、人脸图像库、智能识别分析模块、违章行为库、工作票智能识别模型库、告警模块、高清视频传输模块、智能化图像识别模块、图像存储模块、图像抓取模块、网络传输模块、安全管控中心和移动智能终端，智能识别分析模块包括人脸识别比对模块、违章识别比对模块和工作票识别比对模块，告警模块包括弹窗告警模块和文字告警模块；本发明具有实时监测、智能识别分析违章行为、提高管理效率的优点。

说明书

技术领域

本发明属于施工现场安全管理技术领域，具体涉及一种电力员工进场作业智能安全管控系统。

背景技术

我国正处于经济和社会快速发展的时期，工程建设作为国家基本建设的重要部分正在蓬勃发展，纵观整个市场经济现状，建筑业在我国国民经济中占有举足轻重的地位，而建筑施工是整个建设环节中尤为重要的一环，随着建设工程规模不断扩大、进度不断加快，在工程施工过程中体现出来的安全问题也尤为明显，为了保证工程施工质量，确保施工人员安全，提高工程建设效率，降低工程建设成本，提高工程建设队伍自身的业务水平和专业素质；因此，提供一种实时监测、智能识别分析违章行为、提高管理效率的一种电力员工进场作业智能安全管控系统是非常有必要的。

发明内容

本发明的目的是为了克服现有技术的不足，而提供一种实时监测、智能识别分析违章行为、提高管理效率的一种电力员工进场作业智能安全管控系统。

本发明的目的是这样实现的：一种电力员工进场作业智能安全管控系统，它包括布控球、人脸信息采集模块、人脸信息识别模块、违章行为采集模块、人脸图像库、智能识别分析模块、违章行为库、工作票智能识别模型库、告警模块、高清视频传输模块、智能化图像识别模块、图像存储模块、图像抓取模块、网络传输模块、安全管控中心和移动智能终端，所述的智能识别分析模块包括人脸识别比对模块、违章识别比对模块和工作票识别比对模块，所述的告警模块包括弹窗告警模块和文字告警模块。

一种电力员工进场作业智能安全管控系统的使用方法，其特征在于：它包括以下步骤：

步骤1)：建立人脸图像库、建立违章行为库、建立工作票智能识别模型库；

步骤2)：设防布控：将多个布控球安装在防控区域内，实现多方位、无死角的防控区域；

步骤3)：采集目标信息，具体包括以下步骤：

3-1：采集目标人脸特征信息；

3-2：采集目标违章行为信息；

步骤4)：智能分析识别并进行相关信息的比对，具体包括以下步骤：

4-1：智能识别现场作业人员是否达到安全准入许可条件并与人脸图像库进行比对；

4-2：智能识别现场作业人员是否与工作票智能识别模型库所列名单一致；

4-3：智能识别现场作业人员是否存在变更；

4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库进行比对；

步骤5)：判断是否存在安全隐患行为，若判断结果为否，则智能识别图像并进行存储；若判断结构为是，则启动告警模块，并通过图像抓取模块抓取安全隐患行为证据图像；

步骤6)：步骤5)抓取的安全隐患行为证据图像通过网络传输模块向安全管控中心和移动智能终端发出弹窗和文字告警，安全管控中心对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端到达施工现场对安全隐患行为及时纠正和指导。

所述的工作票智能识别模型库包括工作负责人信息识别模型、工作班成员识别模型、工作任务识别模型、工作负责人及工作班成员变更识别模型、安全措施识别模型。

所述的步骤4)中的4-1与人脸图像库进行比对采用基于几何特征的方法、局部特征分析方法、特征脸方法、基于弹性模型的方法、神经网络方法、隐马尔可夫模型方法、Gabor小波变换和图形匹配方法、人脸等密度线分析匹配方法、特定人脸子空间(FSS)算法以及奇异值分解(SVD)方法中的一种或多种，其中特征脸方法包括以下步骤：

步骤一：获得包含M张人脸图像的集合S，每张图片转换成一个N维的向量，然后把M个向量放到集合S中，如下式所示：S＝{Γ

步骤二：在获取到的人脸向量集合S后，计算得到平均图像Ψ，计算公式为：

步骤三：计算每张图片和平均图像的差值Φ，即是用S集合中的每个元素减去步骤二中的平均值，计算公式为：Φ

步骤四：找到M个正交的单位向量u

步骤五：对于一张新的人脸，可以用特征脸对其进行表示：

所述的步骤4)中的4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库进行比对采用安全帽识别算法，包括以下步骤：

S1：前端通过布控球录制现场视频并上传至管理系统服务器；

S2：服务器实时分析视频流，通过深度学习算法准确判定是否有安全隐患行为；

S3：存储安全隐患行为发生的时间，地点和现场图片并发出警报；

S4：安全管控中心能够对作业现场进行安全隐患行为制止和纠正。

其中S2中的深度学习算法采用SSD算法，主要思路就是均匀地在图片上不同位置进行密集抽样，抽样时可以采用不同尺度和长宽比的先验框，然后利用 CNN网络提取特征后直接进行分类和回归，SSD算法提取了不同尺度的特征图来做检测，大尺度特征图可以用来检测小物体，而小特征图用来检测大物体，SSD 算法的具体步骤为：

A1：采用多尺度特征图用于检测，比较大的特征图用来检测相对比较小的的目标，而小的特征图负责用来检测大的物体；

A2：采用卷积做检测，SSD直接采用卷积对不同的特征图进行提取检测结果，对于形状为mxnxp的特征图，只需要采用3x3xp这样小的卷积核得到检测值；

A3：设置先验框，SSD借鉴了Faster R-CNN中anchors box的原理，每个单元设置尺度或者长宽比不同的先验框，预测的边界框都是以先验框为基准，一般情况下，每个单元会设置多个先验框，其尺度和长宽比存在差异，每个单元使用了4个不同的先验框，对于每个单元的每个先验框，其都输出一套独立的检测值，对应一个边界框，主要分为两个部分：第一部分是各个类别的置信度或者评分，值得注意的是SSD将背景也当做了一个特殊的类别，如果检测目标共有c个类别，SSD需要预测c+1个置信度值，其中第一个置信度指的是不含目标或者属于背景的评分,即真实的检测类别只有c-1个,在预测过程中，置信度最高的那个类别就是边界框所属的类别，特别地，当第一个置信度值最高时，表示边界框中并不包含目标,第二部分就是边界框的location，包含4个值 (cx,cy,w,h)，分别表示边界框的中心坐标以及宽高,但是真实预测值其实只是边界框相对于先验框的转换值,先验框位置用d＝(d

A4：对于先验框的尺度和长宽比，其遵守一个线性递增规则：随着特征图大小降低，先验框尺度线性增加：

A5：确定损失函数，损失函数定义为位置误差(loc)与置信度误差(conf) 的加权和：

A6：预测过程，对于每个预测框，首先根据类别置信度确定其类别(置信度最大者)与置信度值，并过滤掉属于背景的预测框，然后根据置信度阈值过滤掉阈值较低的预测框，对于留下的预测框进行解码，根据先验框得到其真实的位置参数，解码之后，一般需要根据置信度进行降序排列，然后仅保留top-k 个预测框，最后就是进行NMS算法，过滤掉那些重叠度较大的预测框，最后剩余的预测框即是检测结果。

本发明的有益效果：本发明建立人脸图像库、建立违章行为库、建立工作票智能识别模型库，并将多个布控球安装在防控区域内，实现多方位、无死角的防控区域，实现对防控区域的实时监测，通过布控球对目标采集人脸特征信息和违章行为信息，然后通过智能识别分析模块对现场作业人员是否达到安全准入条件、作业人员是否与工作票智能识别模型库所列名单一致(包括工作负责人、工作班成员、工作时间段、工作任务、工作负责人及工作班成员变更以及安全措施)，人员变更是否及时识别、作业人员是否存在不戴安全帽、不戴安全带等违章行为进行智能分析识别，如果存在安全隐患行为，则通过图像抓取模块抓取安全隐患行为证据图像，并通过网络传输模块向安全管控中心和移动智能终端发出弹窗和文字告警，安全管控中心对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端到达施工现场对安全隐患行为及时纠正和指导，大大提高管理效率，确保施工人员安全；本发明具有实时监测、智能识别分析违章行为、提高管理效率的优点。

附图说明

图1为本发明一种电力员工进场作业智能安全管控系统的结构框图。

图2为本发明一种电力员工进场作业智能安全管控系统的智能识别分析模块的结构框图。

图3为本发明一种电力员工进场作业智能安全管控系统的告警模块的结构框图。

图4为本发明一种电力员工进场作业智能安全管控系统的流程图。

图中：1、布控球 2、人脸信息采集模块 3、人脸信息识别模块 4、违章行为采集模块 5、人脸图像库 6、智能识别分析模块 7、违章行为库 8、工作票智能识别模型库 9、告警模块 10、高清视频传输模块 11、智能化图像识别模块 12、图像存储模块 13、图像抓取模块 14、网络传输模块 15、安全管控中心 16、人脸识别比对模块 17、违章识别比对模块18、工作票识别比对模块 19、弹窗告警模块 20、文字告警模块 21、移动智能终端。

具体实施方式

下面结合附图对本发明做进一步的说明。

实施例1

如图1-4所示，一种电力员工进场作业智能安全管控系统，它包括布控球1、人脸信息采集模块2、人脸信息识别模块3、违章行为采集模块4、人脸图像库 5、智能识别分析模块6、违章行为库7、工作票智能识别模型库8、告警模块9、高清视频传输模块10、智能化图像识别模块11、图像存储模块12、图像抓取模块13、网络传输模块14、安全管控中心15和移动智能终端21，所述的智能识别分析模块6包括人脸识别比对模块16、违章识别比对模块17和工作票识别比对模块18，所述的告警模块9包括弹窗告警模块19和文字告警模块20。

一种电力员工进场作业智能安全管控系统的使用方法，其特征在于：它包括以下步骤：

步骤1)：建立人脸图像库5、建立违章行为库7、建立工作票智能识别模型库8；

步骤2)：设防布控：将多个布控球1安装在防控区域内，实现多方位、无死角的防控区域；

步骤3)：采集目标信息，具体包括以下步骤：

3-1：采集目标人脸特征信息；

3-2：采集目标违章行为信息；

步骤4)：智能分析识别并进行相关信息的比对，具体包括以下步骤：

4-1：智能识别现场作业人员是否达到安全准入许可条件并与人脸图像库5 进行比对；

4-2：智能识别现场作业人员是否与工作票智能识别模型库8所列名单一致；

4-3：智能识别现场作业人员是否存在变更；

4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库7进行比对；

步骤5)：判断是否存在安全隐患行为，若判断结果为否，则智能识别图像并进行存储；若判断结构为是，则启动告警模块9，并通过图像抓取模块13抓取安全隐患行为证据图像；

步骤6)：步骤5)抓取的安全隐患行为证据图像通过网络传输模块14向安全管控中心15和移动智能终端21发出弹窗和文字告警，安全管控中心15对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端21 到达施工现场对安全隐患行为纠正和指导。

所述的工作票智能识别模型库8包括工作负责人信息识别模型、工作班成员识别模型、工作任务识别模型、工作负责人及工作班成员变更识别模型、安全措施识别模型。

所述的步骤4)中的4-1与人脸图像库5进行比对采用基于几何特征的方法、局部特征分析方法、特征脸方法、基于弹性模型的方法、神经网络方法、隐马尔可夫模型方法、Gabor小波变换和图形匹配方法、人脸等密度线分析匹配方法、特定人脸子空间(FSS)算法以及奇异值分解(SVD)方法中的一种或多种，其中特征脸方法包括以下步骤：

步骤一：获得包含M张人脸图像的集合S，每张图片转换成一个N维的向量，然后把M个向量放到集合S中，如下式所示：S＝{Γ

步骤二：在获取到的人脸向量集合S后，计算得到平均图像Ψ，计算公式为：

步骤三：计算每张图片和平均图像的差值Φ，即是用S集合中的每个元素减去步骤二中的平均值，计算公式为：Φ

步骤四：找到M个正交的单位向量u

步骤五：对于一张新的人脸，可以用特征脸对其进行表示：

所述的步骤4)中的4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库进行比对采用安全帽识别算法，包括以下步骤：

S1：前端通过布控球1录制现场视频并上传至管理系统服务器；

S2：服务器实时分析视频流，通过深度学习算法准确判定是否有安全隐患行为；

S3：存储安全隐患行为发生的时间，地点和现场图片并发出警报；

S4：安全管控中心能够对作业现场进行安全隐患行为制止和纠正。

其中S2中的深度学习算法采用SSD算法，主要思路就是均匀地在图片上不同位置进行密集抽样，抽样时可以采用不同尺度和长宽比的先验框，然后利用 CNN网络提取特征后直接进行分类和回归，SSD算法提取了不同尺度的特征图来做检测，大尺度特征图可以用来检测小物体，而小特征图用来检测大物体，SSD 算法的具体步骤为：

A1：采用多尺度特征图用于检测，比较大的特征图用来检测相对比较小的的目标，而小的特征图负责用来检测大的物体；

A2：采用卷积做检测，SSD直接采用卷积对不同的特征图进行提取检测结果，对于形状为mxnxp的特征图，只需要采用3x3xp这样小的卷积核得到检测值；

A3：设置先验框，SSD借鉴了Faster R-CNN中anchors box的原理，每个单元设置尺度或者长宽比不同的先验框，预测的边界框都是以先验框为基准，一般情况下，每个单元会设置多个先验框，其尺度和长宽比存在差异，每个单元使用了4个不同的先验框，对于每个单元的每个先验框，其都输出一套独立的检测值，对应一个边界框，主要分为两个部分：第一部分是各个类别的置信度或者评分，值得注意的是SSD将背景也当做了一个特殊的类别，如果检测目标共有c个类别，SSD需要预测c+1个置信度值，其中第一个置信度指的是不含目标或者属于背景的评分,即真实的检测类别只有c-1个,在预测过程中，置信度最高的那个类别就是边界框所属的类别，特别地，当第一个置信度值最高时，表示边界框中并不包含目标,第二部分就是边界框的location，包含4个值(cx,cy,w,h)，分别表示边界框的中心坐标以及宽高,但是真实预测值其实只是边界框相对于先验框的转换值,先验框位置用d＝(d

A4：对于先验框的尺度和长宽比，其遵守一个线性递增规则：随着特征图大小降低，先验框尺度线性增加：

A5：确定损失函数，损失函数定义为位置误差(loc)与置信度误差(conf) 的加权和：

A6：预测过程，对于每个预测框，首先根据类别置信度确定其类别(置信度最大者)与置信度值，并过滤掉属于背景的预测框，然后根据置信度阈值过滤掉阈值较低的预测框，对于留下的预测框进行解码，根据先验框得到其真实的位置参数，解码之后，一般需要根据置信度进行降序排列，然后仅保留top-k 个预测框，最后就是进行NMS算法，过滤掉那些重叠度较大的预测框，最后剩余的预测框即是检测结果。

本发明建立人脸图像库5、建立违章行为库7、建立工作票智能识别模型库 8，并将多个布控球1安装在防控区域内，实现多方位、无死角的防控区域，实现对防控区域的实时监测，通过布控球1对目标采集人脸特征信息和违章行为信息，然后通过智能识别分析模块6对现场作业人员是否达到安全准入条件、作业人员是否与工作票智能识别模型库8所列名单一致(包括工作负责人、工作班成员、工作时间段、工作任务、工作负责人及工作班成员变更以及安全措施)，人员变更是否及时识别、作业人员是否存在不戴安全帽、不戴安全带等违章行为进行智能分析识别，如果存在安全隐患行为，则通过图像抓取模块13抓取安全隐患行为证据图像，并通过网络传输模块14向安全管控中心15和移动智能终端21发出弹窗和文字告警，安全管控中心15对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端21到达施工现场对安全隐患行为及时纠正和指导，大大提高管理效率，确保施工人员安全；本发明具有实时监测、智能识别分析违章行为、提高管理效率的优点。

实施例2

如图1-4所示，一种电力员工进场作业智能安全管控系统，它包括布控球1、人脸信息采集模块2、人脸信息识别模块3、违章行为采集模块4、人脸图像库 5、智能识别分析模块6、违章行为库7、工作票智能识别模型库8、告警模块9、高清视频传输模块10、智能化图像识别模块11、图像存储模块12、图像抓取模块13、网络传输模块14、安全管控中心15和移动智能终端21，所述的智能识别分析模块6包括人脸识别比对模块16、违章识别比对模块17和工作票识别比对模块18，所述的告警模块9包括弹窗告警模块19和文字告警模块20。

一种电力员工进场作业智能安全管控系统的使用方法，其特征在于：它包括以下步骤：

步骤1)：建立人脸图像库5、建立违章行为库7、建立工作票智能识别模型库8；

步骤2)：设防布控：将多个布控球1安装在防控区域内，实现多方位、无死角的防控区域；

步骤3)：采集目标信息，具体包括以下步骤：

3-1：采集目标人脸特征信息；

3-2：采集目标违章行为信息；

步骤4)：智能分析识别并进行相关信息的比对，具体包括以下步骤：

4-1：智能识别现场作业人员是否达到安全准入许可条件并与人脸图像库5 进行比对；

4-2：智能识别现场作业人员是否与工作票智能识别模型库8所列名单一致；

4-3：智能识别现场作业人员是否存在变更；

4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库7进行比对；

步骤5)：判断是否存在安全隐患行为，若判断结果为否，则智能识别图像并进行存储；若判断结构为是，则启动告警模块9，并通过图像抓取模块13抓取安全隐患行为证据图像；

步骤6)：步骤5)抓取的安全隐患行为证据图像通过网络传输模块14向安全管控中心15和移动智能终端21发出弹窗和文字告警，安全管控中心15对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端21 到达施工现场对安全隐患行为纠正和指导。

所述的工作票智能识别模型库8包括工作负责人信息识别模型、工作班成员识别模型、工作任务识别模型、工作负责人及工作班成员变更识别模型、安全措施识别模型。

所述的步骤4)中的4-1与人脸图像库5进行比对采用基于几何特征的方法、局部特征分析方法、特征脸方法、基于弹性模型的方法、神经网络方法、隐马尔可夫模型方法、Gabor小波变换和图形匹配方法、人脸等密度线分析匹配方法、特定人脸子空间(FSS)算法以及奇异值分解(SVD)方法中的一种或多种，其中特征脸方法包括以下步骤：

步骤一：获得包含M张人脸图像的集合S，每张图片转换成一个N维的向量，然后把M个向量放到集合S中，如下式所示：S＝{Γ

步骤二：在获取到的人脸向量集合S后，计算得到平均图像Ψ，计算公式为：

步骤三：计算每张图片和平均图像的差值Φ，即是用S集合中的每个元素减去步骤二中的平均值，计算公式为：Φ

步骤四：找到M个正交的单位向量u

步骤五：对于一张新的人脸，可以用特征脸对其进行表示：

所述的步骤4)中的4-4：智能识别现场作业人员是否存在不戴安全帽、不戴安全带等安全隐患行为并与违章行为库进行比对采用安全帽识别算法，包括以下步骤：

S1：前端通过布控球1录制现场视频并上传至管理系统服务器；

S2：服务器实时分析视频流，通过深度学习算法准确判定是否有安全隐患行为；

S3：存储安全隐患行为发生的时间，地点和现场图片并发出警报；

S4：安全管控中心能够对作业现场进行安全隐患行为制止和纠正。

其中S2中的深度学习算法采用SSD算法，主要思路就是均匀地在图片上不同位置进行密集抽样，抽样时可以采用不同尺度和长宽比的先验框，然后利用 CNN网络提取特征后直接进行分类和回归，SSD算法提取了不同尺度的特征图来做检测，大尺度特征图可以用来检测小物体，而小特征图用来检测大物体，SSD 算法的具体步骤为：

A1：采用多尺度特征图用于检测，比较大的特征图用来检测相对比较小的的目标，而小的特征图负责用来检测大的物体；

A2：采用卷积做检测，SSD直接采用卷积对不同的特征图进行提取检测结果，对于形状为mxnxp的特征图，只需要采用3x3xp这样小的卷积核得到检测值；

A3：设置先验框，SSD借鉴了Faster R-CNN中anchors box的原理，每个单元设置尺度或者长宽比不同的先验框，预测的边界框都是以先验框为基准，一般情况下，每个单元会设置多个先验框，其尺度和长宽比存在差异，每个单元使用了4个不同的先验框，对于每个单元的每个先验框，其都输出一套独立的检测值，对应一个边界框，主要分为两个部分：第一部分是各个类别的置信度或者评分，值得注意的是SSD将背景也当做了一个特殊的类别，如果检测目标共有c个类别，SSD需要预测c+1个置信度值，其中第一个置信度指的是不含目标或者属于背景的评分,即真实的检测类别只有c-1个,在预测过程中，置信度最高的那个类别就是边界框所属的类别，特别地，当第一个置信度值最高时，表示边界框中并不包含目标,第二部分就是边界框的location，包含4个值 (cx,cy,w,h)，分别表示边界框的中心坐标以及宽高,但是真实预测值其实只是边界框相对于先验框的转换值,先验框位置用d＝(d

A4：对于先验框的尺度和长宽比，其遵守一个线性递增规则：随着特征图大小降低，先验框尺度线性增加：

A5：确定损失函数，损失函数定义为位置误差(loc)与置信度误差(conf) 的加权和：

A6：预测过程，对于每个预测框，首先根据类别置信度确定其类别(置信度最大者)与置信度值，并过滤掉属于背景的预测框，然后根据置信度阈值过滤掉阈值较低的预测框，对于留下的预测框进行解码，根据先验框得到其真实的位置参数，解码之后，一般需要根据置信度进行降序排列，然后仅保留top-k 个预测框，最后就是进行NMS算法，过滤掉那些重叠度较大的预测框，最后剩余的预测框即是检测结果。

本发明建立人脸图像库5、建立违章行为库7、建立工作票智能识别模型库 8，并将多个布控球1安装在防控区域内，实现多方位、无死角的防控区域，实现对防控区域的实时监测，通过布控球1对目标采集人脸特征信息和违章行为信息，然后通过智能识别分析模块6对现场作业人员是否达到安全准入条件、作业人员是否与工作票智能识别模型库8所列名单一致(包括工作负责人、工作班成员、工作时间段、工作任务、工作负责人及工作班成员变更以及安全措施)，人员变更是否及时识别、作业人员是否存在不戴安全帽、不戴安全带等违章行为进行智能分析识别，如果存在安全隐患行为，则通过图像抓取模块13抓取安全隐患行为证据图像，并通过网络传输模块14向安全管控中心15和移动智能终端21发出弹窗和文字告警，安全管控中心15对施工现场存在的安全隐患行为及时制止和纠正，操作人员可使用移动智能终端21到达施工现场对安全隐患行为及时纠正和指导大大提高管理效率，确保施工人员安全；本发明具有实时监测、智能识别分析违章行为、提高管理效率的优点。