CN116634098A - 基于视频监控的电力生产操作票操作风险识别系统和方法 - Google Patents

基于视频监控的电力生产操作票操作风险识别系统和方法 Download PDF

Info

Publication number
CN116634098A
CN116634098A CN202310441637.3A CN202310441637A CN116634098A CN 116634098 A CN116634098 A CN 116634098A CN 202310441637 A CN202310441637 A CN 202310441637A CN 116634098 A CN116634098 A CN 116634098A
Authority
CN
China
Prior art keywords
video
early warning
service
module
flow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310441637.3A
Other languages
English (en)
Inventor
董铖铖
吉云
党明锐
彭闯闯
张勤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guoneng Xinkong Internet Technology Co Ltd
Original Assignee
Guoneng Xinkong Internet Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guoneng Xinkong Internet Technology Co Ltd filed Critical Guoneng Xinkong Internet Technology Co Ltd
Priority to CN202310441637.3A priority Critical patent/CN116634098A/zh
Publication of CN116634098A publication Critical patent/CN116634098A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00—Audible signalling systems; Audible personal calling systems
    • G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B31/00—Predictive alarm systems characterised by extrapolation or other computation using updated historic data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0272—Virtual private networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/029—Firewall traversal, e.g. tunnelling or, creating pinholes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H04L63/0442—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload wherein the sending and receiving network entities apply asymmetric encryption, i.e. different keys for encryption and decryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0807—Network architectures or network communication protocols for network security for authentication of entities using tickets, e.g. Kerberos
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/105—Multiple levels of security
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/54—Presence management, e.g. monitoring or registration for receipt of user log-on information, or the connection status of the users
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/55—Push-based network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
    • Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
    • Y04S10/00—Systems supporting electrical power generation, transmission or distribution
    • Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications

Abstract

基于视频监控的电力生产操作票操作风险识别系统和方法，移动终端结合后台管理系统的人员权限管理、操作票管理以及业务服务模块的业务流程组件进行身份验证、票据处理，并进行票据处理操作过程中视频的获取、上传；视频服务模块进行票据处理操作过程中视频流采集，结合预警服务模块的预警规则进行视频内容分析和视频分析结果反馈；预警服务模块将结果推送至后台管理系统和移动终端，实现预警记录和预警提示；业务服务模块为后台管理系统提供用户管理和流程组件支撑。能够提升操作票操作过程中安全性，记录操作过程，并可进行语音提示相关风险，视频校验操作结果准确性，并可进行数据记录追溯。

Description

基于视频监控的电力生产操作票操作风险识别系统和方法
技术领域
本发明属于电力生产操作监控技术领域，涉及基于视频监控的电力生产操作票操作风险识别系统和方法。
背景技术
近年来，我国电力安全治理取得显著成效，治理理念愈发成熟，安全技术蓬勃发展，安全管理水平稳步提升，安全文化繁荣发展，安全责任层层压实，应急能力显著提高。电力安全生产形势持续稳定，为经济社会高质量发展提供了安全可靠的电力保障。操作票制度是安全生产一项重要制度，是保证电力安全生产的有效手段。正确执行操作票规范，是防止发生误操作事故的重要措施。同时增加风险点预控，尽可能消除安全生产的潜在风险，保证顺利生产。
目前电厂操作票实施过程中仍存在问题，如无票操作、票面信息不够规范、现场人员随意操作、安全措施摆放不达标等问题；操作现场无法管控，无法及时发现现场存在安全风险，现场操作过程无记录等问题。因此在现有操作票系统中无法对操作过程进行监控并进行风险预警。
发明内容
为解决现有技术中存在的不足，本发明提供基于视频监控的电力生产操作票操作风险识别系统和方法，包含操作票管理、视频分析、预警管理、移动端操作等，能够实现电力操作票管理及操作过程中视频监控、风险预警。
本发明采用如下的技术方案。
基于视频监控的电力生产操作票操作风险识别系统，包括PC端的后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块；
后台管理系统包括人员管理模块、操作票管理模块、视频管理模块和预警记录模块，分别用于人员权限管理、操作票管理、视频管理和预警记录；
所述移动终端包括身份验证模块、票据处理模块、视频上传模块和预警通知模块，分别用于身份验证、票据处理、视频上传和预警通知；
所述视频服务模块，用于视频流采集、视频内容分析和视频分析结果反馈，为后台管理系统和移动终端提供视频分析服务；
所述预警服务模块，用于预警规则制定、预警记录管理和预警推送，为后台管理系统和移动终端提供预警分析服务；
所述业务服务模块，用于为后台管理系统提供用户管理和流程组件支撑。
优选地，所述后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块采用内网通道进行连接，在无法使用内网情况下，通过搭建的VPN通道进行通信；
通过搭建的VPN通道进行通信时，用户通过指定账号进入VPN隧道，采用用户唯一Token方式进行身份验证，并进行24小时自动变更，验证过程中采用数据加密，采用自定义字符，采用公钥进行加密，私钥解密，数据传输过程中验证token并根据自定义数据头部进行数据验证，以保证VPN的网络及数据安全性。
优选地，所述后台管理系统采用前后端分离技术，后端采用SpringBoot微服务框架开发，进行容器化部署，采用Nacos服务注册中心集群，获取业务服务、视频服务、预警服务Nacos配置信息，当服务启动后，向注册中心登记自己的信息，注册中心记录所有服务实例，各服务通过心跳机制，定时向中心发送请求，证明其还活着，如果心跳消失，则中心进行服务清理；前端采用Vue3.0框架，实现后台管理系统前端页面功能。
优选地，所述人员管理模块进行人员权限管理，具体包括人员基本信息录入、人脸信息维护和权限设置；
所述权限配置是指根据部门、岗位，配置相关角色，为角色配置对应操作权限；
所述视频管理模块进行历史视频管理，具体包括关联操作票并对操作视频进行视频记录、备份与迁移；
所述预警记录模块进行历史预警信息记录。
优选地，所述操作票管理模块进行操作票管理，具体包括票据批量导入、历史票据管理和流程维护；
所述操作票管理模块通过数据excel及接口API的方式批量导入票据信息，数据导入过程中校验数据格式，并可提示导入过程中遇到数据问题；通过流程组件进行流程在线设计和配置，实现待办、已办、审批、同意、驳回、会签、转办流程处理，根据操作票业务流程，进行流程整体配置。
优选地，所述操作票管理模块基于H5在线流程设计，实现拖拽式流程建模与配置，配置方式如下：
通过业务模型设计业务对象，配置字段的控件、校验、数据类型；
通过选择不同样式的模板来生成表单内容，并通过编辑源码自由扩展业务逻辑；
通过在线流程设计器设计流程图配置流程的业务对象，表单，节点办理人员，至此就完成流程最基本的配置；
还可以通过驳回，自由跳转，分支来决策业务流的流转行为，也可以通过使用事件脚本，节点消息插件来扩展业务功能，在业务表单中绑定流程key即可完成与流程对接。
优选地，所述身份验证模块获取人脸信息后进行人脸识别并连接后台管理系统查询人员权限完成身份认证，验证通过则获取票据流程处理权限及操作权限，否则提示无权限。
优选地，所述移动端的票据处理模块根据人员权限查询对应票据，点击待处理票据列表项，进入票据详情，展示票据基本信息、流程节点和操作项，其中流程节点包含操作人、监护人、值班负责人、值长签字审批；在操作人签字审批节点需完成操作项提交，操作人进入操作项页面，点击开始操作，移动端自动打开前置摄像头进行录音录像，同时将视频流传输到视频服务模块，视频服务模块接收到视频流，根据安全帽检测算法、安全护栏位置检测算法进行算法识别，监控操作项整体操作过程。
优选地，所述视频上传模块进行视频上传，具体包括操作项处理过程中视频的获取、上传与播放、传输；
所述视频采用H.264、H.265编码，采用RTMP或HLS视频流协议传输。
优选地，所述预警通知模块采用websocket建立唯一通道，实时接收报警、风险和操作信息，并将信息转换为语音播报，进行预警语音提示、风险语音提示和操作完成语音提示。
优选地，所述预警服务模块通过规则引擎根据业务场景进行预警规则制定，包括设置预警类型、预警条件、风险等级；
所述视频服务模块通过RTMP或HLS视频流协议获取视频流并进行编码解析，设置算法持续时间阙值、取帧时间、视频保存时长算法规则，在识别算法部署前通过设置权重参数进行算法准确度训练，训练完成后部署算法，算法检测识别过程根据取帧时间截取视频图片，根据算法比对，识别截取图片中安全帽及安全护栏位置，根据识别的位置情况判断是否准确摆放，并将结果反馈至后台管理系统和移动终端。
优选地，预警服务模块与移动终端及后台管理系统采用websocket长连接形式通信，预警服务模块接收到视频服务模块的视频分析结果后进行中转，将结果推送至移动终端及后台管理系统。
基于视频监控的电力生产操作票操作风险识别方法，所述风险识别方法包括：
移动终端结合后台管理系统的人员权限管理、操作票管理以及业务服务模块的流程组件进行身份验证、票据处理，并进行票据处理操作过程中视频的获取、上传；
视频服务模块进行票据处理操作过程中视频流采集，结合预警服务模块的预警规则进行视频内容分析和视频分析结果反馈；
预警服务模块将结果推送至后台管理系统和移动终端，实现预警记录和预警提示。
本发明的有益效果在于，与现有技术相比：本发明采用手机作为载体，移动APP进行视频采集，并实现视频与预警同步操作，视频分析结果快速通知，及时响应，解决现有视频采集大多采用摄像头进行采集，需单独配置管理外设的问题；并将产生预警视频进行截取，根据用户设置时长，截取预警发生前后视频，用于预警问题回顾，结合预警处理结果，形成可追溯预警记录；同时结合移动端进行预警语音播报，实现视频采集与语音播报同步，根据报警文本自动转换为语音，进行语音播放。本发明根据操作票业务场景，设置预警规则，用户可自定义，进行时间、地点、设备温度、湿度规则，并可将规则写入识别算法，进行场景精准识别。视频及数据传输过程中，增加请求头部认证，并采用公钥、私钥配对方式进行数据加密处理，保证数据安全。
本发明能够提升操作票操作过程中安全性，记录操作过程，并可进行语音提示相关风险，视频校验操作结果准确性，并可进行数据记录追溯。
附图说明
图1是本发明基于视频监控的电力生产操作票操作风险识别系统结构图；
图2是本发明基于视频监控的电力生产操作票操作风险识别系统原理架构图；
图3是本发明基于视频监控的电力生产操作票操作风险识别实施流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明的技术方案进行清楚、完整地描述。本申请所描述的实施例仅仅是本发明一部分的实施例，而不是全部实施例。基于本发明精神，本领域普通技术人员在没有作出创造性劳动前提下所获得的有所其它实施例，都属于本发明的保护范围。
如图1和图2所示，本发明实施例1提供基于视频监控的电力生产操作票操作风险识别系统，包括PC端的后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块，在本发明优选但非限制性的实施方式中，所述后台管理系统包括人员管理模块、操作票管理模块、视频管理模块和预警记录模块，分别用于人员权限管理、操作票管理、视频管理和预警记录；可实现操作票内容管理、操作项、操作流程、操作人员权限维护等；
所述移动终端包括身份验证模块、票据处理模块、视频上传模块和预警通知模块，分别用于身份验证、票据处理、视频上传和预警通知；可查询操作票相关内容、处理操作票流程、获取操作项处理过程中视频情况，并通过语音提示相关风险等；
所述视频服务模块，用于操作过程中视频流采集、视频内容分析和视频分析结果反馈，为后台管理系统和移动终端提供视频分析服务；
所述预警服务模块，用于预警规则制定、预警记录管理和预警推送，为后台管理系统和移动终端提供预警分析服务；
所述业务服务模块，所述业务服务模块，用于为后台管理系统提供用户管理和流程组件支撑。主要用于提供平台支撑，包含用户管理、流程组件平台基础功能，为后台管理系统提供基础支撑。用户管理主要用于用户信息、角色、权限管理；流程组件主要用于操作票业务流实现，包含流程节点创建、流向配置。
进一步优选地，所述后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块采用内网通道进行连接，在使用人员无法使用内网情况下，通过搭建的VPN通道进行通信。
通过搭建的VPN通道进行通信时，用户通过指定账号进入VPN隧道，采用用户唯一Token方式进行身份验证，并进行24小时自动变更，验证过程中采用数据加密，采用自定义字符，采用公钥进行加密，私钥解密，数据传输过程中验证token并根据自定义数据头部进行数据验证，以保证VPN的网络及数据安全性。
后台管理系统与移动终端采用VPN通道时，利用隧道(Tunnel)技术，对传输报文进行封装，利用VPN骨干网建立专用数据传输通道，实现报文的安全传输。基于位于隧道两端设置的VPN网关，通过对原始报文的“封装”和“解封装”，建立一个点到点的虚拟通信隧道。
所述后台管理系统采用前后端分离技术，后端采用SpringBoot微服务框架开发，进行容器化部署，采用Nacos服务注册中心集群，获取业务服务、视频服务、预警服务Nacos配置信息，当服务启动后，会向注册中心登记自己的信息，注册中心便可记录所有服务实例，各服务通过心跳机制，定时向中心发送请求，证明其还活着，如果心跳消失，则中心进行服务清理。前端采用Vue3.0框架，实现后台管理系统前端页面功能实现。
进一步优选地，所述人员管理模块进行人员权限管理，具体包括人员基本信息录入、人脸信息维护和权限设置，实现人员角色配置，保障人员信息真实性；
所述权限配置是指根据部门、岗位，配置相关角色，为角色配置对应操作权限。
进一步优选地，所述操作票管理模块进行操作票管理，具体包括票据批量导入、历史票据管理和流程维护；
所述操作票管理模块支持数据excel导入及接口API导入批量票据信息，数据导入过程中进行票据信息检测、校验数据格式，并可提示导入过程中遇到数据问题，实现与第三方系统对接，票据信息同步。
所述后台管理系统不仅支持系统自身数据维护，还可对接其他系统批量导入相关数据。
所述票据管理包含票据批量导入、提供第三方票据导入API、票据流程配置、票据详细信息、票据关联操作视频、票据关联风险信息维护、是否存在相关预警记录等管理。
所述业务服务主要包含流程服务、用户管理，用于平台基础功能搭建。用户管理主要包含用户增加、变更、删除、角色配置、权限管理。
所述操作票管理模块通过流程组件进行流程在线设计和配置，实现待办、已办、审批、同意、驳回、会签、转办流程处理，根据操作票业务流程，进行流程整体配置，低代码，可独立部署。
进一步优选地，所述操作票管理模块基于H5在线流程设计,实现拖拽式流程建模与配置，流程组件配置方式如下：
通过业务模型设计业务对象，配置字段的控件、校验、数据类型；
通过选择不同样式的模板来生成表单内容，并通过编辑源码自由扩展业务逻辑；
通过在线流程设计器设计流程图配置流程的业务对象，表单，节点办理人员，至此就完成流程最基本的配置；
还可以通过驳回，自由跳转，分支来决策业务流的流转行为，也可以通过使用事件脚本，节点消息插件来扩展业务功能，在业务表单中绑定流程key即可完成与流程对接。
即流程组件，基于H5在线流程设计,实现'0'代码拖拽式流程建模，提供丰富的配置功能。流程配置步骤如下：
通过业务模型设计业务对象，配置字段的控件、校验、数据类型。
通过选择不同样式的模板来生成表单内容，可以编辑源码自由的扩展业务逻辑。
通过在线流程设计器设计流程图配置流程的业务对象，表单，节点办理人员至此就完成了流程最基本的配置。还可以通过驳回，自由跳转，分支来决策业务流的流转行为也可以通过使用事件脚本，节点消息等流程插件来扩展一些业务功能，或者业务特殊需求。在业务表单中绑定流程key即可完成与流程对接。
进一步优选地，所述视频管理模块进行历史视频管理，具体包括关联操作票并对操作视频进行视频记录、备份与迁移；
所述预警记录模块进行历史预警信息记录。
综上所述，后台管理系统可管理操作票内容流程、人员管理，包含人员信息录入，权限配置、关联操作票记录操作视频，管理及维护、预警历史记录，实时数据管理等。
进一步优选地，移动终端采用专业设备机，通过内网或VPN登录，通过VPN网关，进入VPN通道，增强数据传输安全可靠，并可解决终端只能使用内网情况。
所述身份验证模块进行身份验证，具体包括人脸识别与权限认证；
所述身份验证模块获取人脸信息后进行人脸识别并连接后台管理系统查询人员权限完成身份认证，验证通过则获取票据流程处理权限及操作权限，否则提示无权限。
所述移动终端进入票据操作项处理前进行风险语音播报，提示操作人员过程中需注意事项，提高人员安全意识。
进一步优选地，所述移动端的票据处理模块根据人员权限查询对应票据，点击待处理票据列表项，进入票据详情，展示票据基本信息、流程节点和操作项，其中流程节点包含操作人、监护人、值班负责人、值长签字审批；在操作人签字审批节点需完成操作项提交，操作人进入操作项页面，点击开始操作，移动端自动打开前置摄像头进行录音录像，同时将视频流传输到视频服务模块，视频服务模块接收到视频流，根据安全帽检测算法、安全护栏位置检测算法进行算法识别，监控操作项整体操作过程。
通过人脸识别快速验证人员权限，根据人员信息智能查找待处理票据时，进行条件的快速查找，可避免使用人员多级查找。
进一步优选地，所述视频上传模块进行视频上传，具体包括操作项处理过程中视频的获取、上传与播放、传输；
所述视频上传模块可接收高清视频流，支持视频流实时采集，获取现场操作信息，所述视频采用H.264、H.265编码，视频流传输采用RTMP或HLS协议，实现视频加密传输以及无卡顿传输。
进一步优选地，所述预警通知模块进行预警通知，具体包括预警处理和语音播报。
所述预警通知模块采用websocket建立唯一通道，实时接收报警、风险和操作信息，并将信息转换为语音播报，进行预警语音提示、风险语音提示和操作完成语音提示，操作人员可根据报警级别选择是否继续操作项处理。其中预警处理是指在收到预警信息后，根据现场情况判断，需在移动端填写预警处理文本信息，并提交，保障预警响应。
综上所述，移动终端包含VPN登录、用户权限验证、票据信息获取、票据流程处理、视频流采集、语音提示功能，具体支持人脸识别，动态确定人员信息权限，快速获取工作内容，操作过程中可根据返回预警通知内容，进行语音播报，并且不影响正常操作。
移动终端需要与视频服务模块配合，视频服务模块进行视频采集，视频结果根据预设预警规则进行结果分析，分析结果反馈至移动终端展示，移动终端包括识别人员信息、获取票据信息、获取视频流监控、接收预警提醒、完善票据信息及流程。
进一步优选地，所述预警服务模块通过规则引擎根据现场业务情况进行预警规则灵活制定，设置预警类型、预警条件、风险等级，管理人员可动态添加预警规则并设置是否启用；
所述视频服务模块通过RTMP或HLS视频流协议获取视频流并进行编码解析，设置算法持续时间阙值、取帧时间、视频保存时长算法规则，在识别算法部署前通过设置权重参数进行算法准确度训练，训练完成后部署算法，算法检测识别过程根据取帧时间截取视频图片，根据算法比对，识别截取图片中安全帽及安全护栏位置，根据识别的位置情况判断是否准确摆放，得到安全帽检测识别算法、安全护栏位置检测算法，用以检测操作过程中是否正确佩戴安全帽及是否进行施工围栏摆放，并将视频识别结果反馈至后台管理系统和移动终端。移动终端实时接收反馈信息，可以根据风险返回内容，进行语音播报，播报不影响正常操作页面。
本发明的视频分析是指进行人员穿戴安全、设备场景、现场操作周边环境、人员行为进行分析，具体将视频汇集到后端，由视频服务模块统一处理，可以有效节约视频流占用带宽。
综上所述，本发明的视频服务包含视频采集、视频备份、视频迁移、视频分析，视频采集支持RTMP、HLS视频协议，视频采集所需硬件需求较高，需支持多线程高频率的处理需求，数据采集服务器一定要速度快，稳定性，如果出现延迟高，卡顿等情况，会非常影响采集进行的。因此在选择服务器时一定要选择优化线路的服务器，低延迟，稳定性好的。
进一步优选地，预警服务模块与移动终端及后台管理系统采用websocket长连接形式通信，预警服务模块接收到视频服务模块的视频分析结果后进行中转，将结果推送至移动终端及后台管理系统，进行预警与记录。
综上所述，预警服务模块可实现预警记录，预警规则配置，预警规则采用规则引擎，灵活制定报警条件，预警提示推送等。本发明的预警服务包含规则引擎服务，规则引擎制定预警级别，预警内容，预警结果推送等。
本发明的视频服务、预警服务、业务服务可进行统一管理，一键启动，并且各服务间相互独立，不存在相互影响。
本发明实施例2提供基于视频监控的电力生产操作票操作风险识别方法，包括：
移动终端结合后台管理系统的人员权限管理、操作票管理以及业务服务模块的流程组件进行身份验证、票据处理，并进行票据处理操作过程中视频的获取、上传；
视频服务模块进行票据处理操作过程中视频流采集，结合预警服务模块的预警规则进行视频内容分析和视频分析结果反馈；
预警服务模块将结果推送至后台管理系统和移动终端，实现预警记录和预警提示。
如图3所示，人员操作使用流程包括：人员开始处理操作项内容，视频监测操作过程中风险实现风险提示、风险预警情况处理，有效提升电力安全生产的安全性。移动终端进行视频流采集，并传递到视频服务模块，视频服务模块对视频进行解析，并获取预警规则，检测到预警问题，发出预警，并通过预警服务模块推送至移动终端，整体监控过程不影响移动终端正常运行。
移动终端语音提示模块采用智能语音播放，移动终端通过获取服务预警通知内容，将文字转换为语音文件，通过MediaPlayer进行语音播放，仅支持普通话播放。在进入操作前进行风险提示，了解操作过程中可能遇到的问题，并确认操作环境是否安全。
一种终端，包括处理器及存储介质；所述存储介质用于存储指令；
所述处理器用于根据所述指令进行操作以执行所述方法的步骤。
计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现所述方法的步骤。
本发明的有益效果在于，与现有技术相比：本发明采用手机作为载体，移动APP进行视频采集，并实现视频与预警同步操作，视频分析结果快速通知，及时响应，解决现有视频采集大多采用摄像头进行采集，需单独配置管理外设的问题；并将产生预警视频进行截取，根据用户设置时长，截取预警发生前后视频，用于预警问题回顾，结合预警处理结果，形成可追溯预警记录；同时结合移动端进行预警语音播报，实现视频采集与语音播报同步，根据报警文本自动转换为语音，进行语音播放。本发明根据操作票业务场景，设置预警规则，用户可自定义，进行时间、地点、设备温度、湿度规则，并可将规则写入识别算法，进行场景精准识别。视频及数据传输过程中，增加请求头部认证，并采用公钥、私钥配对方式进行数据加密处理，保证数据安全。
本发明能够提升操作票操作过程中安全性，记录操作过程，并可进行语音提示相关风险，视频校验操作结果准确性，并可进行数据记录追溯。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其它自由传播的电磁波、通过波导或其它传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
最后应当说明的是，以上实施例仅用以说明本发明的技术方案而非对其限制，尽管参照上述实施例对本发明进行了详细的说明，所属领域的普通技术人员应当理解：依然可以对本发明的具体实施方式进行修改或者等同替换，而未脱离本发明精神和范围的任何修改或者等同替换，其均应涵盖在本发明的权利要求保护范围之内。

Claims (13)

1.基于视频监控的电力生产操作票操作风险识别系统，包括PC端的后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块，其特征在于：
后台管理系统包括人员管理模块、操作票管理模块、视频管理模块和预警记录模块，分别用于人员权限管理、操作票管理、视频管理和预警记录；
所述移动终端包括身份验证模块、票据处理模块、视频上传模块和预警通知模块，分别用于身份验证、票据处理、视频上传和预警通知；
所述视频服务模块，用于视频流采集、视频内容分析和视频分析结果反馈，为后台管理系统和移动终端提供视频分析服务；
所述预警服务模块，用于预警规则制定、预警记录管理和预警推送，为后台管理系统和移动终端提供预警分析服务；
所述业务服务模块，用于为后台管理系统提供用户管理和流程组件支撑。
2.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述后台管理系统、移动终端、视频服务模块、预警服务模块和业务服务模块采用内网通道进行连接，在无法使用内网情况下，通过搭建的VPN通道进行通信；
通过搭建的VPN通道进行通信时，用户通过指定账号进入VPN隧道，采用用户唯一Token方式进行身份验证，并进行24小时自动变更，验证过程中采用数据加密，采用自定义字符，采用公钥进行加密，私钥解密，数据传输过程中验证token并根据自定义数据头部进行数据验证，以保证VPN的网络及数据安全性。
3.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述后台管理系统采用前后端分离技术，后端采用SpringBoot微服务框架开发，进行容器化部署，采用Nacos服务注册中心集群，获取业务服务、视频服务、预警服务Nacos配置信息，当服务启动后，向注册中心登记信息，注册中心记录所有服务实例，各服务通过心跳机制，定时向中心发送请求，证明其还活着，如果心跳消失，则中心进行服务清理；前端采用Vue3.0框架，实现后台管理系统前端页面功能。
4.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述人员管理模块进行人员权限管理，具体包括人员基本信息录入、人脸信息维护和权限设置；
所述权限配置是指根据部门、岗位，配置相关角色，为角色配置对应操作权限；
所述视频管理模块进行历史视频管理，具体包括关联操作票并对操作视频进行视频记录、备份与迁移；
所述预警记录模块进行历史预警信息记录。
5.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述操作票管理模块进行操作票管理，具体包括票据批量导入、历史票据管理和流程维护；
所述操作票管理模块通过数据excel及接口API的方式批量导入票据信息，数据导入过程中校验数据格式，并可提示导入过程中遇到数据问题；通过流程组件进行流程在线设计和配置，实现待办、已办、审批、同意、驳回、会签、转办流程处理，根据操作票业务流程，进行流程整体配置。
6.根据权利要求5所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述操作票管理模块基于H5在线流程设计，实现拖拽式流程建模与配置，配置方式如下：
通过业务模型设计业务对象，配置字段的控件、校验、数据类型；
通过选择不同样式的模板来生成表单内容，并通过编辑源码自由扩展业务逻辑；
通过在线流程设计器设计流程图配置流程的业务对象，表单，节点办理人员，至此就完成流程最基本的配置；
还可以通过驳回，自由跳转，分支来决策业务流的流转行为，也可以通过使用事件脚本，节点消息插件来扩展业务功能，在业务表单中绑定流程key即可完成与流程对接。
7.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述身份验证模块获取人脸信息后进行人脸识别并连接后台管理系统查询人员权限完成身份认证，验证通过则获取票据流程处理权限及操作权限，否则提示无权限。
8.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述移动端的票据处理模块根据人员权限查询对应票据，点击待处理票据列表项，进入票据详情，展示票据基本信息、流程节点和操作项，其中流程节点包含操作人、监护人、值班负责人、值长签字审批；在操作人签字审批节点需完成操作项提交，操作人进入操作项页面，点击开始操作，移动端自动打开前置摄像头进行录音录像，同时将视频流传输到视频服务模块，视频服务模块接收到视频流，根据安全帽检测算法、安全护栏位置检测算法进行算法识别，监控操作项整体操作过程。
9.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述视频上传模块进行视频上传，具体包括操作项处理过程中视频的获取、上传与播放、传输；
所述视频采用H.264、H.265编码，采用RTMP或HLS视频流协议传输。
10.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述预警通知模块采用websocket建立唯一通道，实时接收报警、风险和操作信息，并将信息转换为语音播报，进行预警语音提示、风险语音提示和操作完成语音提示。
11.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
所述预警服务模块通过规则引擎根据业务场景进行预警规则制定，包括设置预警类型、预警条件、风险等级；
所述视频服务模块通过RTMP或HLS视频流协议获取视频流并进行编码解析，设置检测算法持续时间阙值、取帧时间、视频保存时长算法规则，在检测算法部署前通过设置权重参数进行算法准确度训练，训练完成后部署算法，算法检测识别过程根据取帧时间截取视频图片，根据算法比对，识别截取图片中安全帽及安全护栏位置，根据识别的位置情况判断是否准确摆放，并将结果反馈至后台管理系统和移动终端。
12.根据权利要求1所述的基于视频监控的电力生产操作票操作风险识别系统，其特征在于：
预警服务模块与移动终端及后台管理系统采用websocket长连接形式通信，预警服务模块接收到视频服务模块的视频分析结果后进行中转，将结果推送至移动终端及后台管理系统。
13.基于视频监控的电力生产操作票操作风险识别方法，基于权利要求1-12任一项所述风险识别系统实现，其特征在于：所述风险识别方法包括：
移动终端结合后台管理系统的人员权限管理、操作票管理以及业务服务模块的流程组件进行身份验证、票据处理，并进行票据处理操作过程中视频的获取、上传；
视频服务模块进行票据处理操作过程中视频流采集，结合预警服务模块的预警规则进行视频内容分析和视频分析结果反馈；
预警服务模块将结果推送至后台管理系统和移动终端，实现预警记录和预警提示。
CN202310441637.3A 2023-04-23 2023-04-23 基于视频监控的电力生产操作票操作风险识别系统和方法 Pending CN116634098A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310441637.3A CN116634098A (zh) 2023-04-23 2023-04-23 基于视频监控的电力生产操作票操作风险识别系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310441637.3A CN116634098A (zh) 2023-04-23 2023-04-23 基于视频监控的电力生产操作票操作风险识别系统和方法

Publications (1)

Publication Number Publication Date
CN116634098A true CN116634098A (zh) 2023-08-22

Family

ID=87590427

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310441637.3A Pending CN116634098A (zh) 2023-04-23 2023-04-23 基于视频监控的电力生产操作票操作风险识别系统和方法

Country Status (1)

Country Link
CN (1) CN116634098A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117115755A (zh) * 2023-10-23 2023-11-24 科曼智能科技有限公司 一种基于图像识别电力作业现场违章监控报警识别系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117115755A (zh) * 2023-10-23 2023-11-24 科曼智能科技有限公司 一种基于图像识别电力作业现场违章监控报警识别系统
CN117115755B (zh) * 2023-10-23 2024-01-23 科曼智能科技有限公司 一种基于图像识别电力作业现场违章监控报警识别系统

Similar Documents

Publication Publication Date Title
US11321734B2 (en) Information processing method, server, and computer storage medium
EP3130113B1 (en) Automated cloud-based analytics for security and/or surveillance
CN103020541B (zh) 个人空间（数据）对比于公司空间（数据）
CN110855676B (zh) 网络攻击的处理方法、装置及存储介质
US11822698B2 (en) Privacy transformations in data analytics
US10375036B2 (en) Content management system
CN110046297B (zh) 运维违规操作的识别方法、装置和存储介质
CN116634098A (zh) 基于视频监控的电力生产操作票操作风险识别系统和方法
US20230239294A1 (en) Access processing method and device for remotely controlling terminal and storage medium
CN113254947A (zh) 一种车辆数据保护方法、系统、设备和存储介质
CN115053269A (zh) 用于在用户设备上进行面部识别的方法和装置
CN208156681U (zh) 一种视频监控图像识别系统
CN110866265A (zh) 一种基于区块链的数据存储方法、设备及存储介质
CN108390857B (zh) 一种高敏感网络向低敏感网络导出文件的方法和装置
US8891524B2 (en) Method and apparatus of automatically providing registration information
CN110175316B (zh) 一种基于区块链的媒体号交互方法、系统及存储介质
CN113923610A (zh) 一种基于5g通信的短信消息服务平台
CN114598556B (zh) It基础设施配置完整性保护方法及保护系统
CN106971363A (zh) 一种警务通系统
CN104283703A (zh) 一种用户登录提醒方法及系统
CN110759191B (zh) 基于5g智慧园区电梯控制方法
CN109788249B (zh) 基于工业互联网操作系统的视频监控控制方法
CN112995342A (zh) 基于公安内外网传输的举报监控方法和系统
WO2023029121A1 (zh) 一种图片处理方法、网络设备、智能手表及存储介质
CN105656899B (zh) 一种去中心化登录方法、客户端及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination