CN112653873A - 一种基于嵌入式审讯主机智能分析报警的实现方法 - Google Patents
一种基于嵌入式审讯主机智能分析报警的实现方法 Download PDFInfo
- Publication number
- CN112653873A CN112653873A CN202011360600.0A CN202011360600A CN112653873A CN 112653873 A CN112653873 A CN 112653873A CN 202011360600 A CN202011360600 A CN 202011360600A CN 112653873 A CN112653873 A CN 112653873A
- Authority
- CN
- China
- Prior art keywords
- alarm
- intelligent analysis
- interrogation
- video stream
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 50
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000001514 detection method Methods 0.000 claims abstract description 28
- 230000008569 process Effects 0.000 claims abstract description 18
- 238000012545 processing Methods 0.000 claims abstract description 13
- 238000004364 calculation method Methods 0.000 claims abstract description 8
- 238000012544 monitoring process Methods 0.000 claims description 9
- 230000002159 abnormal effect Effects 0.000 claims description 7
- 230000009194 climbing Effects 0.000 claims description 7
- 238000013461 design Methods 0.000 claims description 6
- 238000004806 packaging method and process Methods 0.000 claims description 5
- 238000013135 deep learning Methods 0.000 claims description 3
- 238000003780 insertion Methods 0.000 claims description 3
- 230000037431 insertion Effects 0.000 claims description 3
- 230000007246 mechanism Effects 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000000630 rising effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Image Analysis (AREA)
Abstract
本发明提供了一种基于嵌入式审讯主机智能分析报警的实现方法，包括以下步骤：前端摄像机获取视频流通过网络传输给审讯主机，用户向审讯主机下发用于对视频流处理的项目设置规则，主机根据项目设置规则判断用户是否开启了报警检测；开启报警检测，内核模块分析要处理的智能分析类型，判断是否需要将视频流送至智能模块；智能模块的算法子模块进行计算，将计算的结果传送至内核模块对数据进行处理，处理后的数据传送给内置IE或平台进行显示。本发明所述的实现方法，引用HISI3559芯片专门处理智能分析，使代码模块化，减轻了主芯片的负荷，提高了智能分析的实时性与可靠性。
Description
技术领域
本发明属于安全防范、视频监控领域，尤其是涉及一种基于嵌入式审讯 主机智能分析报警的实现方法。
背景技术
审讯系统一直是我国政法行业较为关注的领域，近年来，AI的发展如火如 荼，越来越多的人工智能被应用到政法行业中。提高智能分析的准确性，及 时性也成为该技术的一项难点。
发明内容
有鉴于此，本发明旨在提出一种基于嵌入式审讯主机智能分析报警的实 现方法，以解决以往的嵌入式审讯主机，引入了智能笔录，智能录音等技术， 并未引入智能分析技术，由于其硬件能力的限制了其实现智能分析报警，即 使有些实现此功能，也是借助某些平台间接实现。
为达到上述目的，本发明的技术方案是这样实现的：
一种基于嵌入式审讯主机智能分析报警的实现方法，包括以下步骤：
S1、前端摄像机获取视频流通过网络传输给审讯主机，并将视频流保存 在审讯主机数字通道专属的数据中心中；
S2、用户向审讯主机下发用于对视频流处理的项目设置规则，主机根据 项目设置规则判断用户是否开启了报警检测；
S3、开启报警检测，内核模块分析智能分析类型，并判断是否需要将视 频流送至智能模块；
S4、智能模块的算法子模块将视频流进行计算，将计算的结果传送至 内核模块对数据进行处理，处理后的数据传送给内置IE或平台进行显示。
所述步骤S2中项目设计规则包括报警规则、监测区域、联动项设计。
所述步骤S2中内核模块的报警业务判断用户是否开启报警检测过程如 下：
1)用户设置数据固定保存至某一变量中；
2)设置定时检测机制，定时检测用户数据是否发生改变。
所述步骤S3中的智能分析类型包括：单人审讯/无人看管类、攀高类、 人数异常类、人员起身类、静止检测类、睡岗类、离床类、摔倒类、肢体接 触类、打架类、新离岗类。
所述步骤S3中的报警业务模块判断智能分析类型的步骤如下：主机支 持的智能分析类型预先写到固定变量中，若设置的类型在变量中可以检索到， 则通过媒体SDK下发至算法模块；否则，返回错误码，由内核模块进行处理。
所述步骤S4中算法子模块计算的过程如下：
1)算法模块获取用户设置，即智能分析类型和检测区域；
2)利用深度学习进行人体检测算法模型的学习；
3)监测用户设置的区域内是否发生报警或者消警，比如人数异常，离岗 等算法。
所述步骤S4中的内核模块对数据处理的过程为：内核的报警单元接收 到报警结果后，进行警情分析、插入用户数据、封装图片流操作，然后将插 入用户数据的视频流及封装后的图片流送回到数字通道的码流封装DC中。
相对于现有技术，本发明所述的一种基于嵌入式审讯主机智能分析报警 的实现方法具有以下优势：
(1)本发明所述的实现方法，引用HISI3559芯片专门处理智能分析， 使代码模块化，减轻了主芯片的负荷，提高了智能分析的实时性与可靠性。
(2)本发明所述的实现方法不需借助平台，一台审讯主机便可实现智 能分析报警的功能，增强了审讯主机的智能性，节约了成本。
附图说明
构成本发明的一部分的附图用来提供对本发明的进一步理解，本发明的 示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在 附图中：
图1为本发明实施例所述的一种基于嵌入式审讯主机智能分析报警的实 现方法流程图；
图2为本发明实施例所述的一种基于嵌入式审讯主机智能分析报警的实 现方法细化流程图；
图3为本发明实施例所述的智能分析设置示例图一；
图4为本发明实施例所述的智能分析设置示例图二。
具体实施方式
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特 征可以相互组合。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、 “上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、 “顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示 的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗 示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此 不能理解为对本发明的限制。此外，术语“第一”、“第二”等仅用于描述 目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征 的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包 括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的 含义是两个或两个以上。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语 “安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也 可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可 以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。 对于本领域的普通技术人员而言，可以通过具体情况理解上述术语在本发明 中的具体含义。
下面将参考附图并结合实施例来详细说明本发明。
如图1至图4所示，一种基于嵌入式审讯主机智能分析报警的实现方 法，包括以下步骤：
S1、前端摄像机获取视频流通过网络传输给审讯主机，并将视频流保存 在审讯主机数字通道专属的数据中心中；
S2、用户向审讯主机下发用于对视频流处理的项目设置规则，主机根据 项目设置规则判断用户是否开启了报警检测；
S3、开启报警检测，内核模块分析智能分析类型，并判断是否需要将视 频流送至智能模块；
S4、智能模块的算法子模块将视频流进行计算，将计算的结果传送至 内核模块对数据进行处理，处理后的数据传送给内置IE或平台进行显示。
所述步骤S2中项目设计规则包括报警规则、监测区域、联动项设计。
所述步骤S2中内核模块的报警业务判断用户是否开启报警检测过程如 下：
1)用户设置数据固定保存至某一变量中；
2)设置定时检测机制，定时检测用户数据是否发生改变。
所述步骤S3中的智能分析类型包括：单人审讯/无人看管类、攀高类、 人数异常类、人员起身类、静止检测类、睡岗类、离床类、摔倒类、肢体接 触类、打架类、新离岗类。
所述步骤S3中的报警业务模块判断智能分析类型的步骤如下：主机支 持的智能分析类型预先写到固定变量中，若设置的类型在变量中可以检索到， 则通过媒体SDK下发至算法模块；否则，返回错误码，由内核模块进行处理。
所述步骤S4中算法子模块计算的过程如下：
1)算法模块获取用户设置，即智能分析类型和检测区域；
2)利用深度学习进行人体检测算法模型的学习；
3)监测用户设置的区域内是否发生报警或者消警，比如人数异常，离岗 等算法；
其中，智能分析类型：1、单人询问/无人看管，全景相机上，去除被审 讯人员的位置区域的人，如果剩余1个人，则报警“单人询问”；如果剩余0 个人，则报警“无人看管”。
2、攀高，全景相机上，当算法检出被监测人(头肩)超过攀高线并超过 设定时间，即报警；人的头肩超过了攀高线，超过设定时间，则应该报警。
3、离岗，若审讯人员离开设定区域超过设定时间，则产生报警。支持单 人值岗和双人值岗，值岗人数设置为1时为单人值岗，设置为2是为双人值 岗；监测区域内无人员在岗，则应该报警。
4、起身
人员在区域内做起身运动，则产生报警，只能支持横向起身，要求摄像 机照向目标侧身，可明显看到起身活动；人员之前横躺状态，现在坐起来， 则应该报警。
5、静止检测/睡岗，当算法检出被监测人静止并超过设定时间，即报警；
比如人长时间趴在桌子上，或长时间坐在椅子上一动不动，则应该报警。
6、离床，若有被审讯人员离开床位所设定区域，则产生警情。
7、摔倒，若被审讯人由立状态改为横状态，则产生报警；人之前站在地 上，之后变为趴在地上，并且人的中心距离地面高度小于一定值，则应该产 生报警。
8、打架斗殴/肢体接触，当算法检出被监测人(大于等于两人)出现打 架斗殴、肢体接触时，即报警；
规则区域内，两个人出现状态超过20秒时，则应该产生报警。
具体方法如下：
1)审讯主机连接数字通道，前端相机视频流通过网络传输，被保存到到 主机数字通道专属的数据中心(DC)中；
2)当内核检测到用户开启了智能分析，并且设置报警规则后，内核从数 字通道的源数据中心中获取图片码流，并将用户设置和图片码流传递给智能 模块；
3)智能模块结合用户设置，来检测码流中人/物是否触发报警规则，并 将报警结果传给内核；
4)内核的报警单元接收到报警结果后，进行警情分析、插入用户数据、 封装图片流等操作
5)报警模块将插入用户数据的视频流及封装后的图片流送回到数字通 道的码流封装DC中，并将报警信息通过网络私有协议传递给内置ie或者平 台。
6)用户可通过提前设定的报警联动动作，或者直接ie/平台预览或者日 志查询知晓报警结果
图1中按主机内核模块和智能模块划分。内核向智能模块发送命令和视 频流，智能模块算法检测结束后再将处理结果发回内核模块，由内核进行下 一步处理。其中，报警单元在内核中实现，报警包括智能分析报警和一般报 警，本文中提到的报警指智能分析报警。
图2中，给出了内核和智能模块内部详细架构。内核是基于hi3536芯 片实现，智能模块是基于hi3559芯片实现，智能模块中dvr模块主要处理 审讯中的音频，合成通道编码等业务，算法模块处理智能分析处理。通过内 部通信将分析结果送至内核的dvr模块中，dvr在报警单元中，对处理结果 进行分析，若有必要，在与UI、SDK进行通信汇报。具体步骤如下：
1)数据搜集：
审讯主机连接数字通道，前端摄像机视频流通过网络传输，被保存到到 主机数字通道专属的数据中心(DC)中。进而内核模块可以从数字通道的源 数据中心中获取到图片码流。
2)用户设置分析：
用户可以使用内置网页客户端或者平台向主机下发报警规则、监测区域、 联动项等设置。主机通过SDK接收后分发到内核模块，之后报警业务记录保 存用户设置。如果用户开启了报警检测，则将数据搜集获取的图片流，通过 内部通信传输到本地SDK，媒体SDK对接收的数据进行分发，然后由RPC(远 程过程调用协议)客户端向hi3536外部传输。另外，还有一些特殊的硬件 接口报警，由政法外挂处理。
3)数据接收和分析
hi3559芯片中的本地SDK模块，先由RPC服务端接收客户端发送的数 据，在经过报警业务判断用户业务是否合法，若合法，通过媒体SDK下发至 算法模块；若不合法，返回错误码，由内核进行处理。
4)算法检测
对于到达算法模块的数据流(视频流)，算法业务通过对算法规则的检 测，来判断是否需要报警/消警。目前支持的智能算法包括单人审讯/无人看 管、攀高、人数异常、人员起身、静止检测、睡岗、离床、摔倒、肢体接触、 新离岗等11中算法。这些算法，通过对原有的yolo网络进行裁剪，训练， 达到了效果和性能上的指标平衡，更加具有实用性，并且解决了原有网络性 能差的问题，保障了智能分析的准确性。
5)报警结果及数据回传处理
3559将处理后的数据流通过双向传输在传回至hi3536的报警业务中， 内核的报警单元接收到报警结果后，进行警情分析、插入用户数据、封装图 片流等操作，然后将插入用户数据的视频流及封装后的图片流送回到数字通 道的码流封装DC中，并将报警信息通过网络私有协议传递给内置ie或者平 台。
6)通知用户
用户可通过提前设定的报警联动动作，或者直接ie/平台视频预览，或 者日志查询知晓报警结果。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本 发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在 本发明的保护范围之内。
Claims (7)
1.一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于包括以下步骤：
S1、前端摄像机获取视频流通过网络传输给审讯主机，并将视频流保存在审讯主机数字通道专属的数据中心中；
S2、用户向审讯主机下发用于对视频流处理的项目设置规则，主机根据项目设置规则判断用户是否开启了报警检测；
S3、开启报警检测，内核模块分析智能分析类型，并判断是否需要将视频流送至智能模块；
S4、智能模块的算法子模块将视频流进行计算，将计算的结果传送至内核模块对数据进行处理，处理后的数据传送给内置IE或平台进行显示。
2.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S2中项目设计规则包括报警规则、监测区域、联动项设计。
3.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S2中内核模块的报警业务判断用户是否开启报警检测过程如下：
1)用户设置数据固定保存至某一变量中；
2)设置定时检测机制，定时检测用户数据是否发生改变。
4.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S3中的智能分析类型包括：单人审讯/无人看管类、攀高类、人数异常类、人员起身类、静止检测类、睡岗类、离床类、摔倒类、肢体接触类、打架类、新离岗类。
5.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S3中的报警业务模块判断智能分析类型的步骤如下：主机支持的智能分析类型预先写到固定变量中，若设置的类型在变量中可以检索到，则通过媒体SDK下发至算法模块；否则，返回错误码，由内核模块进行处理。
6.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S4中算法子模块计算的过程如下：
1)算法模块获取用户设置，即智能分析类型和检测区域；
2)利用深度学习进行人体检测算法模型的学习；
3)监测用户设置的区域内是否发生报警或者消警，比如人数异常，离岗等算法。
7.根据权利要求1所述的一种基于嵌入式审讯主机智能分析报警的实现方法，其特征在于：所述步骤S4中的内核模块对数据处理的过程为：内核的报警单元接收到报警结果后，进行警情分析、插入用户数据、封装图片流操作，然后将插入用户数据的视频流及封装后的图片流送回到数字通道的码流封装DC中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011360600.0A CN112653873A (zh) | 2020-11-27 | 2020-11-27 | 一种基于嵌入式审讯主机智能分析报警的实现方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011360600.0A CN112653873A (zh) | 2020-11-27 | 2020-11-27 | 一种基于嵌入式审讯主机智能分析报警的实现方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112653873A true CN112653873A (zh) | 2021-04-13 |
Family
ID=75349645
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011360600.0A Pending CN112653873A (zh) | 2020-11-27 | 2020-11-27 | 一种基于嵌入式审讯主机智能分析报警的实现方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112653873A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1773911A (zh) * | 2005-10-17 | 2006-05-17 | 杭州中宁信息技术有限公司 | 数字视频报警及远程联网监控系统 |
| CN101123721A (zh) * | 2007-09-30 | 2008-02-13 | 湖北东润科技有限公司 | 一种智能视频监控系统及其监控方法 |
| CN105488927A (zh) * | 2016-01-18 | 2016-04-13 | 深圳市共济科技有限公司 | 一种微模块机房的声光报警装置及其系统 |
| WO2016107006A1 (zh) * | 2014-12-31 | 2016-07-07 | 中兴通讯股份有限公司 | 一种智能摄像头监控的方法及装置 |
| CN108040221A (zh) * | 2017-11-30 | 2018-05-15 | 江西洪都航空工业集团有限责任公司 | 一种智能视频分析与监控系统 |
-
2020
- 2020-11-27 CN CN202011360600.0A patent/CN112653873A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1773911A (zh) * | 2005-10-17 | 2006-05-17 | 杭州中宁信息技术有限公司 | 数字视频报警及远程联网监控系统 |
| CN101123721A (zh) * | 2007-09-30 | 2008-02-13 | 湖北东润科技有限公司 | 一种智能视频监控系统及其监控方法 |
| WO2016107006A1 (zh) * | 2014-12-31 | 2016-07-07 | 中兴通讯股份有限公司 | 一种智能摄像头监控的方法及装置 |
| CN105488927A (zh) * | 2016-01-18 | 2016-04-13 | 深圳市共济科技有限公司 | 一种微模块机房的声光报警装置及其系统 |
| CN108040221A (zh) * | 2017-11-30 | 2018-05-15 | 江西洪都航空工业集团有限责任公司 | 一种智能视频分析与监控系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10147184B2 (en) | Seizure detection | |
| US20050101334A1 (en) | System and method for incident reporting, information gathering, reconstructing and alerting | |
| CN107464406A (zh) | 基于可穿戴装置的报警方法、系统及相应的可穿戴装置 | |
| US20090089089A1 (en) | Apparatus and method for providing geriatric care management service | |
| US20220284788A1 (en) | Fall detection apparatus, a method of detecting a fall by a subject and a computer program product for implementing the method | |
| CN108200405A (zh) | 一种基于人脸识别的视频监控系统 | |
| CN113657150A (zh) | 一种跌倒检测方法、装置和计算机可读存储介质 | |
| CN104902119B (zh) | 一种聋哑人报警求助系统 | |
| CN109152557A (zh) | 用于短暂性脑缺血发作的早期检测的系统和方法 | |
| CN104183044A (zh) | 一种网络智能防盗门系统 | |
| KR101485449B1 (ko) | 스마트 기기를 이용한 사용자 간의 협조에 의한 응급 상황 대응 서비스 제공 방법 | |
| CN110148288A (zh) | 智能消防预警系统及预警方法 | |
| WO2006075352A1 (en) | Surveillance method and surveillance device operating with said method | |
| CN112653873A (zh) | 一种基于嵌入式审讯主机智能分析报警的实现方法 | |
| US11076778B1 (en) | Hospital bed state detection via camera | |
| CN113114977A (zh) | 智能看护系统以及智能看护方法 | |
| US11943567B2 (en) | Attention focusing for multiple patients monitoring | |
| CN107483544A (zh) | 一种移动智能监控系统及监控方法 | |
| US10623447B1 (en) | Method for triggering IMS communication based on data communication protocols | |
| CN109389809A (zh) | 一种智能手机坐姿监督与报警系统及方法 | |
| CN109815828A (zh) | 实现主动报警或求助行为检测控制的系统及方法 | |
| US11463583B1 (en) | Device communication with public safety answering point | |
| US11394827B1 (en) | Device communication from public safety answering point to sensor | |
| CN102525425A (zh) | 生理信息识别装置及生理信息识别方法 | |
| WO2004057853A2 (en) | A system and a method for enabling an automated customized service offer |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210413 |
|
| RJ01 | Rejection of invention patent application after publication |