CN114373150A - 一种工厂监控方法、装置、电子设备及存储介质 - Google Patents

一种工厂监控方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114373150A
CN114373150A CN202111613151.0A CN202111613151A CN114373150A CN 114373150 A CN114373150 A CN 114373150A CN 202111613151 A CN202111613151 A CN 202111613151A CN 114373150 A CN114373150 A CN 114373150A
Authority
CN
China
Prior art keywords
alarm
audio information
information
playing
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111613151.0A
Other languages
English (en)
Inventor
孙军伟
魏琨
徐恩龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Communication Technology Co Ltd
Original Assignee
Inspur Communication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Communication Technology Co Ltd filed Critical Inspur Communication Technology Co Ltd
Priority to CN202111613151.0A priority Critical patent/CN114373150A/zh
Publication of CN114373150A publication Critical patent/CN114373150A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00—Audible signalling systems; Audible personal calling systems
    • G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Alarm Systems (AREA)

Abstract

本发明提供一种工厂监控方法、装置、电子设备及存储介质，所述方法包括：获取目标监控视频；将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。本发明提供的工厂监控方法能够实现工厂园区全方位的视频监控，实时的语音告警播放，提高了工厂园区的安全性，降低了人工成本，提升了用户体验。

Description

一种工厂监控方法、装置、电子设备及存储介质
技术领域
本发明涉及数据处理技术领域，尤其涉及一种工厂监控方法、装置、电子设备及存储介质。
背景技术
随着制造业技术的不断发展、自动化水平的不断提高，我国工业取得了快速发展，工厂园区的安全也越来越得到重视。
目前，影响工厂园区安全的因素主要包括园区内的车辆、员工的不安全操作、不安全行为、不安全着装及外部闯入等等。虽然工厂园区内已普遍进行摄像头监控，通过摄像头设备实时对厂区进行视频监控，但是这些摄像头设备无法对不安全因素进行智能化分析，只能通过人工查看回放的方式来进行确认，导致人工成本较高；而且一般是在事故发生后才会进行检查，导致工厂园区的安全性较低，用户体验较差。
发明内容
本发明提供一种工厂监控方法、装置、电子设备及存储介质用以解决现有技术中工厂园区安全性较低、用户体验差，人工成本较高的技术问题，本发明以实现通过实时视频监控、告警播放，降低人工成本，提升用户体验的目的。
第一方面，本发明提供一种工厂监控方法，包括：
获取目标监控视频；
将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；
根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；
其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
进一步，根据本发明提供的工厂监控方法，所述根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放，包括：
根据所述安全行为威胁信息生成对应的告警文本信息，将所述告警文本信息发送至语音播报模块；
所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放。
进一步，根据本发明提供的工厂监控方法，所述将所述告警文本信息发送至语音播报模块，包括：
通过消息队列、API接口或消息队列遥测传输协议将所述告警文本信息发送至语音播报模块。
进一步，根据本发明提供的工厂监控方法，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，包括：
根据预先选定的音色将所述告警文本信息生成具有特定音色的告警音频信息；
所述语音播报模块将所述具有特定音色的告警音频信息发送至多个音柱，通过控制所述多个音柱播放具有特定音色的告警音频信息。
进一步，根据本发明提供的工厂监控方法，在所述通过多个音柱进行播放之后，还包括：
在所述告警音频信息播放完成的情况下，实时显示所述告警音频信息的播放结果。
进一步，根据本发明提供的工厂监控方法，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，还包括：
所述语音播报模块根据用户指定的音频文件在预设的播放时间内将所述音频文件发送至多个音柱进行播放。
进一步，根据本发明提供的工厂监控方法，所述语音播报模块包括缓存队列，
相应的，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放以提醒目标用户，还包括：
在所述语音播报模块接收到多个告警音频播放请求的情况下，将所述多个告警音频播放请求缓存在所述缓存队列中，所述语音播报模块将所述多个告警音频播放请求所对应的告警音频信息依次发送至多个音柱进行播放。
第二方面，本发明提供一种工厂监控装置，包括：
获取模块，用于获取目标监控视频；
输入模块，用于将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；
播放模块，用于根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。
第三方面，本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述工厂监控方法的步骤。
第四方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述工厂监控方法的步骤。
本发明提供一种工厂监控方法、装置、电子设备及存储介质，通过获取目标监控视频，将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。本发明提供的工厂监控方法能够实现工厂园区全方位的视频监控，实时的语音告警播放，提高了工厂园区的安全性，降低了人工成本，提升了用户体验。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的工厂监控方法的流程示意图；
图2是本发明提供的工厂监控方法的整体流程示意图；
图3是本发明提供的工厂监控装置的结构示意图；
图4是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明提供的工厂监控方法的流程示意图，如图1所示，本发明提供的工厂监控方法，具体包括以下步骤：
步骤101：获取目标监控视频。
在本实施例中，需要获取实时的目标监控视频，具体通过视频监控模块获取，视频监控模块可对摄像头进行管理，实现监控视频的实时播放、视频录像的回放等功能。
需要说明的是，本实施例中的目标监控视频可以是工厂园区内任意角落的监控视频，通过在工厂园区的各个角落安装摄像头，获取到目标监控视频。如在停车场、食堂、办公区、大门口等地方安装摄像头，实现对工厂园区的全方位监控。
步骤102：将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息。
在本实施例中，需要将获取的目标监控视频输入预先训练的视频识别模型中，对该目标监控视频进行安全行为识别确认，得到目标监控视频中存在的安全行为威胁信息，其中，安全行为威胁信息包括工人没有戴安全帽、没有戴口罩、在不能停车的地方停放车辆、发生烟雾威胁等信息。具体可以根据用户的实际需要进行设定，在此不作具体限定。
需要说明的是，视频识别模型属于人工智能的产品，通过基于样本视频、以及样本视频对应的标注信息对视频识别模型进行训练得到，视频识别模型能够对视频内容实现精准的识别，提高安全行为威胁信息确认的准确性。
步骤103：根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；
其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
在本实施例中，视频监控模块需要根据安全行为威胁信息确定出对应告警文本信息，然后将告警文本信息推送给语音播报模块，语音播报模块对该告警文本信息进行处理得到告警音频信息，并将该告警音频信息传输给音柱进行播放。其中，音柱是一种用于播放告警音频信息的播放器。
需要说明的是，需要根据确定的安全行为威胁信息确定出对应的告警文本信息。告警文本信息可以是食堂口有员工未佩戴安全帽等信息。
本发明提供一种工厂监控方法，通过获取目标监控视频，将目标监控视频输入预先训练的视频识别模型中，得到目标监控视频中存在的安全行为威胁信息，然后根据安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。本发明提供的视频监控方法能够实现工厂园区全方位的视频监控，实时的语音告警播放，提高了工厂园区的安全性和员工的安全意识，降低了人工成本，提升了用户体验。
基于上述任一实施例，在本实施例中，所述根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放，包括：
根据所述安全行为威胁信息生成对应的告警文本信息，将所述告警文本信息发送至语音播报模块；
所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放。
在本实施例中，视频监控模块根据得到的安全行为威胁信息生成对应的告警文本信息，然后将该告警文本信息发送至语音播报模块，语音播报模块可以根据需要播放的告警文本信息得到告警音频信息，主要是通过文字转音频功能将告警文本信息转换成告警音频信息，然后将生成的告警音频信息发送至多个音柱进行播放，用以提醒目标用户注意安全行为。
需要说明的是，本实施例中可以通过消息队列遥测传输协议(MQTT)实现视频监控模块和语音播报模块的告警文本信息的传输，其中，消息队列遥测传输协议是一种基于发布/订阅(publish/subscribe)模式的“轻量级”通讯协议，该协议构建于TCP/IP协议上，由IBM在1999年发布，其中，MQTT最大优点在于可以以极少的代码和有限的带宽，为连接远程设备提供实时可靠的消息服务。
根据本发明提供的工厂监控方法，通过将根据安全行为威胁信息生成对应的告警文本信息发送至语音播报模块，然后语音播报模块根据告警文本信息生成告警音频信息，并将告警音频信息发送至多个音柱进行播放，能够根据视频监控内容实时地进行告警音频信息的生成、播放，保证了工厂园区的安全，降低了人工成本，提升了用户体验。
基于上述任一实施例，在本实施例中，所述将所述告警文本信息发送至语音播报模块，包括：
通过消息队列、API接口或消息队列遥测传输协议将所述告警文本信息发送至语音播报模块。
在本实施例中，可以根据预设的消息队列、API接口或消息队列遥测传输协议将告警文本信息发送至语音播报模块中，用于生成告警音频信息，其中，消息队列可以是RabbitMQ，还可以是Redis，具体可以根据用户的实际需要进行选择。
需要说明的是，RabbitMQ是一种可以实现高级消息队列协议(AMQP)的开源消息代理软件，也就是说是一种面向消息的中间件。其中，RabbitMQ服务器是用Erlang语言编写的，而群集和故障转移是构建在开放电信平台框架上的。
根据本发明提供的工厂监控方法，通过消息队列、API接口或消息队列遥测传输协议中的任意一种方式将告警文本信息发送至语音播报模块，能够提高消息传输的速率，保证视频监控处理的实时性，提升用户体验。
基于上述任一实施例，在本实施例中，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，包括：
根据预先选定的音色将所述告警文本信息生成具有特定音色的告警音频信息；
所述语音播报模块将所述具有特定音色的告警音频信息发送至多个音柱，通过控制所述多个音柱播放具有特定音色的告警音频信息。
在本实施例中，语音播报模块除了具有将文本信息转换成音频信息的功能，还具有为音频信息设定音色的功能，可以根据用户的需要为告警音频信息提取特定的音色，用户可以根据需要选择男生音频或者女生音频，用户还可以上传特定的音色的音频文件作为模板，用于生成想要的告警音频信息。
需要说明的是，语音播报模块与多个音柱通过Socket服务进行连接，实现告警音频信息文件的传输，语音播报模块还可以对多个音柱进行控制管理，使多个音柱播放具有特定音色的告警音频信息，实现指定音柱播放指定的告警音频信息文件的目的。
根据本发明提供的工厂监控方法，通过根据预先选定的音色将告警文本信息生成具有特定音色的告警音频信息，语音播报模块将具有特定音色的告警音频信息发送至多个音柱，通过控制多个音柱播放具有特定音色的告警音频信息，提高视频监控的处理效率，提升了用户体验。
基于上述任一实施例，在本实施例中，在所述通过多个音柱进行播放之后，还包括：
在所述告警音频信息播放完成的情况下，实时显示所述告警音频信息的播放结果。
在本实施例中，当所述告警音频信息播放完成后，还需要在前端的显示屏上实时显示告警音频信息的播放结果。本实施例中语音播报模块采用集成WebSocket技术，将告警音频信息播放完成后的播放结果在系统前台处进行实时的显示。
需要说明的是，WebSocket是一种在单个TCP连接上进行全双工通信的协议，能够使得客户端和服务器之间的数据交换变得更加简单，允许服务端主动向客户端推送数据。在WebSocket API接口中，浏览器和服务器只需要完成一次握手，两者之间就直接可以创建持久性的连接，并进行双向数据传输。
根据本发明提供的工厂监控方法，当告警音频信息确定播放完成时，还可以在系统的前端实时显示该告警音频信息的播放结果，提高了数据传输的效率，保证了播放结果能够被实时观看到。
基于上述任一实施例，在本实施例中，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，还包括：
所述语音播报模块根据用户指定的音频文件在预设的播放时间内将所述音频文件发送至多个音柱进行播放。
在本实施例中，语音播报模块还具有自定义定时任务设置功能，可以根据用户指定的音频文件在预设的播放时间内通过多个音柱进行播放。如中午吃饭时间可以播放一些歌曲文件，下午下班期间还可以播放一些欢乐的音乐文件等，也就是说不一定只用于播放告警音频信息，还可以根据用户的需要播放其他的音频文件，而且还可以选择音频文件播放的时间。
根据本发明提供的工厂监控方法，可以根据用户指定的音频文件在预设的播放时间内将该音频文件发送至多个音柱中进行播放，不仅可以播放告警音频信息，还可以播放其他的音频文件，保证了视频监控的多样性，提升了用户体验。
基于上述任一实施例，在本实施例中，所述语音播报模块包括缓存队列，
相应的，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，还包括：
在所述语音播报模块接收到多个告警音频播放请求的情况下，将所述多个告警音频播放请求缓存在所述缓存队列中，所述语音播报模块将所述多个告警音频播放请求所对应的告警音频信息依次发送至多个音柱进行播放。
在本实施例中，语音播报模块还具有缓存队列，当接收到多个告警音频播放请求时，可以将多个告警音频播放请求缓存在该缓存队列中，然后将多个告警音频播放请求所对应的告警音频信息依次发送到音柱中进行播放。
根据本发明提供的工厂监控方法，通过将多个告警音频播放请求缓存在缓存队列中，然后依次将多个告警音频播放请求对应的告警音频信息发送至音柱中进行播放，能够缓解数据存储的压力，提高告警音频信息播放的准确性。
基于上述任一实施例，在本实施例中，如图2所示，视频监控模块通过流媒体服务管理多路摄像头，获取实时目标监控视频，同时通过视频识别模型对该目标监控视频的内容进行人工智能分析，确定出安全行为威胁信息，并生成告警文本信息，再将该告警文本信息推送给语音播报模块。
在本实施例中，语音播报模块通过MQTT、消息队列(RabbitMQ等)、API接口等方式获取需要播放的告警文字信息，然后通过文字转音频功能生成告警音频信息文件并传输给多个音柱进行播放。需要说明的是，语音播报模块还提供音色提取功能，在生成告警音频信息文件时，用户可自定义生成男声告警音频信息还是女声告警音频信息，同时，用户还可上传某一特定音色的音频文件作为模板，用于生成告警音频信息文件。
在本实施例中，语音播报模块通过Socket服务与多个音柱进行连接，实现告警音频信息文件的传输，还可以对多个音柱进行控制管理，实现在指定的音柱上播放指定的音频文件。而且，语音播报模块采用集成WebSocket技术，在告警音频信心文件播放完成后，系统前台可实时显示播放结果。
在本实施例中，语音播报模块还提供自定义定时任务配置功能，用户可指定要播放的音频文件，根据需要设置定时播放。另外，语音播报模块还包括缓存队列，当接收到多个音频播放请求时，会对多个音频播放请求进行缓存，然后逐个进行播放。
图3为本发明提供的一种工厂监控装置，如图3所示，本发明提供的工厂监控装置，包括：
获取模块301，用于获取目标监控视频；
输入模块302，用于将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；
播放模块303，用于根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；
其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
本发明提供一种工厂监控装置，通过获取目标监控视频，将目标监控视频输入预先训练的视频识别模型中，得到目标监控视频中存在的安全行为威胁信息，然后根据安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。本发明提供的视频监控方法能够实现工厂园区全方位的视频监控，实时的语音告警播放，提高了工厂园区的安全性和员工的安全意识，降低了人工成本，提升了用户体验。
由于本发明实施例所述装置与上述实施例所述方法的原理相同，对于更加详细的解释内容在此不再赘述。
图4为本发明实施例中提供的电子设备实体结构示意图，如图4所示，本发明提供一种电子设备，包括：处理器(processor)401、存储器(memory)402和总线403；
其中，处理器401、存储器402通过总线403完成相互间的通信；
处理器401用于调用存储器402中的程序指令，以执行上述各方法实施例中所提供的方法，例如包括：获取目标监控视频；将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
此外，上述的存储器403中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的方法，该方法包括：获取目标监控视频；将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各提供的方法，该方法包括：获取目标监控视频；将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种工厂监控方法，其特征在于，包括：
获取目标监控视频；
将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；
根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放；
其中，所述视频识别模型是根据样本视频以及样本视频对应的标注信息进行训练得到的。
2.根据权利要求1所述的工厂监控方法，其特征在于，所述根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放，包括：
根据所述安全行为威胁信息生成对应的告警文本信息，将所述告警文本信息发送至语音播报模块；
所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放。
3.根据权利要求2所述的工厂监控方法，其特征在于，所述将所述告警文本信息发送至语音播报模块，包括：
通过消息队列、API接口或消息队列遥测传输协议将所述告警文本信息发送至语音播报模块。
4.根据权利要求2所述的工厂监控方法，其特征在于，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，包括：
根据预先选定的音色将所述告警文本信息生成具有特定音色的告警音频信息；
所述语音播报模块将所述具有特定音色的告警音频信息发送至多个音柱，通过控制所述多个音柱播放具有特定音色的告警音频信息。
5.根据权利要求1所述的工厂监控方法，其特征在于，在所述通过多个音柱进行播放之后，还包括：
在所述告警音频信息播放完成的情况下，实时显示所述告警音频信息的播放结果。
6.根据权利要求2所述的工厂监控方法，其特征在于，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放，还包括：
所述语音播报模块根据用户指定的音频文件在预设的播放时间内将所述音频文件发送至多个音柱进行播放。
7.根据权利要求2所述的工厂监控方法，其特征在于，所述语音播报模块包括缓存队列，
相应的，所述语音播报模块根据所述告警文本信息生成告警音频信息，并将所述告警音频信息发送至多个音柱进行播放以提醒目标用户，还包括：
在所述语音播报模块接收到多个告警音频播放请求的情况下，将所述多个告警音频播放请求缓存在所述缓存队列中，所述语音播报模块将所述多个告警音频播放请求所对应的告警音频信息依次发送至多个音柱进行播放。
8.一种工厂监控装置，其特征在于，包括：
获取模块，用于获取目标监控视频；
输入模块，用于将所述目标监控视频输入预先训练的视频识别模型中，得到所述目标监控视频中存在的安全行为威胁信息；
播放模块，用于根据所述安全行为威胁信息确定出对应的告警音频信息，通过多个音柱进行播放。
9.一种电子设备，其特征在于，包括：处理器、存储器和总线，其中，
所述处理器和所述存储器通过所述总线完成相互间的通信；
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如权利要求1至7中任一项所述工厂监控方法的步骤。
10.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至7中任一项所述工厂监控方法的步骤。
CN202111613151.0A 2021-12-27 2021-12-27 一种工厂监控方法、装置、电子设备及存储介质 Pending CN114373150A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111613151.0A CN114373150A (zh) 2021-12-27 2021-12-27 一种工厂监控方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111613151.0A CN114373150A (zh) 2021-12-27 2021-12-27 一种工厂监控方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114373150A true CN114373150A (zh) 2022-04-19

Family

ID=81141742

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111613151.0A Pending CN114373150A (zh) 2021-12-27 2021-12-27 一种工厂监控方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114373150A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114598918A (zh) * 2022-05-10 2022-06-07 浪潮通信技术有限公司 一种告警消息中截取音视频片段的方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114598918A (zh) * 2022-05-10 2022-06-07 浪潮通信技术有限公司 一种告警消息中截取音视频片段的方法及系统

Similar Documents

Publication Publication Date Title
US11626117B2 (en) Contingent device actions during loss of network connectivity
JP2021015264A (ja) 視覚支援スピーチ処理
CN109473104B (zh) 语音识别网络延时优化方法及装置
EP4141786A1 (en) Defect detection method and apparatus, model training method and apparatus, and electronic device
CN110177300B (zh) 程序运行状态的监控方法、装置、电子设备和存储介质
WO2023098332A1 (zh) 一种音频处理方法、装置、设备、介质及程序产品
CN114373150A (zh) 一种工厂监控方法、装置、电子设备及存储介质
JP7375089B2 (ja) 音声応答速度確定方法、装置、コンピュータ読み取り可能な記憶媒体及びコンピュータプログラム
CN111202980B (zh) 信息传送方法、流媒体云平台和计算机可读存储介质
CN113766146B (zh) 音视频处理方法、装置、电子设备及存储介质
CN201805504U (zh) 一种远程音视频监控系统
CN104954429A (zh) 一种遇险自动求救系统的方法
CN113065879A (zh) 一种数据流质检方法及系统
CN113157241A (zh) 交互设备、交互装置及交互系统
CN107483544A (zh) 一种移动智能监控系统及监控方法
CN112135197B (zh) 字幕显示方法及装置、存储介质、电子设备
WO2020134646A1 (zh) 分布式语音监控方法、装置、系统、存储介质和设备
CN107920275B (zh) 视频播放方法、装置、终端及存储介质
CN111093091A (zh) 视频处理方法、服务器及系统
CN115393798A (zh) 预警方法、装置、电子设备及存储介质
CN112132079B (zh) 在线教学中监控学生的方法、装置及系统
CN112929372A (zh) 一种网络智能音频终端、监控方法及监控系统
CN113852835A (zh) 直播音频处理方法、装置、电子设备以及存储介质
CN113556313A (zh) 一种基于ai技术的实时对讲干预与告警平台
CN111083445A (zh) 一种校园立体防控系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination