CN106060471A

CN106060471A - 一种基于增强现实技术的智能监控方法及系统

Info

Publication number: CN106060471A
Application number: CN201610475473.6A
Authority: CN
Inventors: 孙少东
Original assignee: GUANGDONG ZHONGXING ELECTRONICS Co Ltd
Current assignee: GUANGDONG ZHONGXING ELECTRONICS Co Ltd
Priority date: 2016-06-23
Filing date: 2016-06-23
Publication date: 2016-10-26

Abstract

本发明的基于增强现实技术的智能监控方法，包括：建立与物联网系统数据连接的通信网关，通过通信网关获取物联网设备信息，发送控制信息；将物联网设备信息与监控对象关联，形成数据库中的关联信息；通过不同类型的摄像头的光学视场形成监控区域，采集监控区域内的监控视频，获取监控视频内的监控对象；将物联网设备信息形成可视信息，与监控对象适配形成增强现实视频输出。克服了光学视频监控的固有缺陷，扩展了对视频监控中监控对象的智能化分析和显示效果的增强。根据监控对象的行为判断，配合改变监控对象所处环境中的物联网网元设备的工作状态，可以形成相应物联网网元设备间的相互正反馈或负反馈。还包括基于增强现实技术的智能监控系统。

Description

一种基于增强现实技术的智能监控方法及系统

技术领域

本发明涉及一种视频监控方法和系统，特别是涉及物联网技术与增强现实技术的闭路电视系统的视频监控方法和系统。

背景技术

在传统监控技术中，采用在关键位置设置摄像头的模式采集视频信号，通过交叠的覆盖范围形成监控区域，对影像的分析、判断基本都要靠人力去完成。随着数据处理技术的进步，逐渐可以完成监控区域内固定对象的识别和跟踪，但目前多局限于交通监控对已发生了的违章行为的判断识别。但是，监控区域依靠单一的光学视频器件形成，只能通过多布、广布摄像头来拓展监控功能，覆盖范围、传输带宽和识别精度都受到建设成本的制约，传统视频监控技术对社会安全所提供的帮助已发展到瓶颈。

并且，传统的视频监控仅能获取监控区域内的视频信息并形成基本的告警类反馈控制，只能将摄像头捕捉的视频通过显示器直观展示，无法利用监控区域内的其他类型传感器和其他信息系统的数据形成复杂的综合信息分析处理结果，无法将具有利用价值的客观数据和信息可视化，关联反映在显示器展示的视频影像中。也无法与其他系统联动，形成系统间的状态智能传递或连续的控制过程。

发明内容

有鉴于此，本发明实施例提供了一种基于增强现实技术的智能监控方法，解决了依靠光学视频信号无法形成复杂视频内容数据处理的技术问题。

本发明实施例提供了一种基于增强现实技术的智能监控系统，解决了受覆盖区域限制无法形成连续的反馈控制状态传递的技术问题。

本发明的基于增强现实技术的智能监控方法，包括：

步骤400，建立与物联网系统数据连接的通信网关，通过通信网关获取物联网设备信息，发送控制信息；

步骤300，将物联网设备信息与监控对象关联，形成数据库中的关联信息；

步骤100，通过不同类型的摄像头的光学视场形成监控区域，采集监控区域内的监控视频，获取监控视频内的监控对象；

步骤500，将物联网设备信息形成可视信息，与监控对象适配形成增强现实视频输出。

还包括：

步骤200，根据行为判断模型，形成监控对象的行为判断数据，结合关联信息形成相应物联网设备的控制信息，通过通信网关完成相应控制。

所述步骤500，还包括：

步骤510，向数据库请求与监控对象相应的物联网设备信息；

步骤520，将物联网设备信息过滤形成增强现实数据；

步骤530，将增强现实数据形成与监控对象视频适配的可视信息。

所述步骤500，还包括：

步骤540，根据监控对象的行为判断，形成可视信息，与监控对象适配形成增强现实视频。

针对步骤200，还包括：

步骤210，根据行为判断模型，形成监控对象的位置数据、现有轨迹数据、预测轨迹数据；

步骤220，根据监控对象的位置数据和轨迹数据，过滤获得相关的物联网设备，形成相应状态变换数据。

针对步骤300，还包括：

步骤310，响应对物联网设备信息的请求，向数据库或物联网请求信息并转发；

步骤320，根据监控区域的监控对象，自动生成物联网设备信息的请求，将获得的物联网设备信息存入数据库；

步骤330，接收数据读写请求，将数据写入数据库结构或从数据库结构中读出数据。

本发明的基于增强现实技术的智能监控系统，包括视频对象捕捉装置、信息挖掘数据库、物联网网关服务器和增强现实处理装置，其中：

视频对象捕捉装置，用于通过不同类型的摄像头的光学视场形成监控区域，采集监控区域内的监控视频，获取监控视频内的监控对象；

信息挖掘装置，用于将物联网设备信息与监控对象关联，形成数据库中的关联信息；

物联网网关服务器，用于建立与物联网系统数据连接的通信网关，通过通信网关获取物联网设备信息，发送控制信息；

增强现实处理装置，用于将物联网设备信息形成可视信息，与监控对象适配形成增强现实视频输出。

还包括视频监控服务器，用于根据行为判断模型，形成监控对象的行为判断数据，结合关联信息形成相应物联网设备的控制信息，通过物联网网关服务器完成相应控制。

所述增强现实处理装置还包括增强数据请求装置、增强数据形成装置和增强数据显示装置，其中：

增强数据请求装置，用于向数据库请求与监控对象相应的物联网设备信息；

增强数据形成装置，用于将物联网设备信息过滤形成增强现实数据；

增强数据显示装置，用于将增强现实数据形成与监控对象视频适配的可视信息。

所述视频监控服务器包括视频对象分析装置、物联网信号生成装置和增强现实调用装置，其中：

视频对象分析装置，用于根据行为判断模型，形成监控对象的位置数据、现有轨迹数据、预测轨迹数据；

物联网信号生成装置，用于根据监控对象的位置数据和轨迹数据，过滤获得相关的物联网设备，形成相应状态变换数据；

增强现实调用装置，用于根据监控对象的行为判断，形成可视信息，与监控对象适配形成增强现实视频。

本发明的基于增强现实技术的智能监控方法，克服了光学视频监控的固有缺陷，大大扩展了对视频监控中监控对象的智能化分析和显示效果的增强。将监控对象所处监控环境中的可控、可感知的物联网系统中的各种复杂网元的状态参数与监控区域有机结合，将与监控对象相关的环境状态数据根据关联紧密程度，以可视效果形成视频元素，以直观方式增强了光学视频监控中的信息表达，丰富了监控视频信息。可以形成对监控对象当前行为或可预测行为的抑制或促进。根据监控对象的行为判断，配合改变监控对象所处环境中的物联网网元设备的工作状态，形成相应的封闭环境或开放环境，也可以形成相应物联网网元设备间的相互正反馈或负反馈。

基于增强现实技术的智能监控系统，可以灵活部署在现有视频监控平台上，具有规模伸缩性，可以与不同的信息系统和物联网类型连接，数据匹配关联形式灵活，数据响应和自动请求分别处理，实行效率高，可以配合监控平台现有的处理模型形成高级的任务处理过程，增加平台功能，提升系统间的协调效能。具有监控环境内物联网设备的访问及控制功能，可以为安全防范、治安执法提供强有力的支持平台。

附图说明

图1为本发明的基于增强现实技术的智能监控方法的一实施例的流程图；

图2为本发明的基于增强现实技术的智能监控系统一实施例的结构示意图一；

图3为本发明的基于增强现实技术的智能监控系统一实施例的结构示意图二；

图4为本发明的基于增强现实技术的智能监控系统一实施例的结构示意图三；

图5为本发明的基于增强现实技术的智能监控系统一实施例的结构示意图四。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。图纸中的步骤编号仅用于作为该步骤的附图标记，不表示执行顺序。

如图1所示，本发明实施例的基于增强现实技术的智能监控方法，包括：

本实施例的基于增强现实技术的智能监控方法，克服了光学视频监控的固有缺陷，大大扩展了对视频监控中监控对象的智能化分析和显示效果的增强。将监控对象所处监控环境中的可控、可感知的物联网系统中的各种复杂网元的状态参数与监控区域有机结合，将与监控对象相关的环境状态数据根据关联紧密程度，以可视效果形成视频元素，以直观方式增强了光学视频监控中的信息表达。使得操控者或决策者可以实时获得判断依据，使得监控对象的行为预测模型可以获得更丰富的多形态的基础数据，增加了对监控对象行为预测的准确性。让视频监控所呈现的场景信息远大于光学视场，在现有监控图像的有限信息量上，可以结合图像识别技术，可调取并加载更多的图像之外的信息，以补充传统的光学监控。

进一步，本发明实施例的基于增强现实技术的智能监控方法，还包括：

本发明实施例的基于增强现实技术的智能监控方法，通过将对监控对象的行为判断与物联网的网元设备控制相结合，可以形成对监控对象当前行为或可预测行为的抑制或促进。根据监控对象的行为判断，配合改变监控对象所处环境中的物联网网元设备的工作状态，形成相应的封闭环境或开放环境，也可以形成相应物联网网元设备间的相互正反馈或负反馈。

本发明实施例的基于增强现实技术的智能监控方法，针对步骤500，还包括：

步骤510，向数据库请求与监控对象相应的物联网设备信息；

步骤520，将物联网设备信息过滤形成增强现实数据；

本实施例的基于增强现实技术的智能监控方法，可以简化物联网设备信息在形成可视信息过程中的系统资源消耗，提升可视信息处理效率。

本实施例的基于增强现实技术的智能监控方法，可以按需加载增强现实处理过程，有效控制系统资源的分配效率。

本发明实施例的基于增强现实技术的智能监控方法，针对步骤200，还包括：

本实施例的基于增强现实技术的智能监控方法，可以形成并利用位置数据和轨迹数据形成精确的物联网设备控制数据，实现了对监控对象行为的有效抑制或促进。

本发明实施例的基于增强现实技术的智能监控方法，针对步骤300，还包括：

本实施例的基于增强现实技术的智能监控方法，可以实现物联网网元设备信息的自动采集和提取，形成相应的数据库内容，并能够根据增强现实过程和控制过程的数据请求，提供相应的物联网设备信息，使得物联网的设备信息更新及时，数据可靠。

上述物联网设备信息，为执法部门及社会行政机关所掌握的数据信息，所述数据信息包括人脸数据、建筑设施属性、车牌信息、商标信息等。

上述关联信息，以数据库数据形式存储在数据库的关联表格中。

上述摄像头的类型，包括道路监控摄像头011、楼宇监控摄像头012和重点区域监控摄像头013等。

上述监控对象，是利用现有视频监控平台的视频对象捕捉模型获得。

上述可视信息，包括物联网设备信息的数据、状态、图表、3D模型等表达形式。

上述适配形成增强现实视频，包括与监控对象在视频显示场景中的空间适配、位置适配、色差适配和轨迹适配等。

上述行为判断模型，包括利用现有视频监控平台的行为判断模型对监控对象在监控区域形成的位置判断，时间-移动轨迹判断，触发状态判断等。

上述控制信息，包括对监控区域内单一物联网设备的状态控制，与行为关联的多类型物联网设备的状态控制等。

上述物联网设备信息过滤，包括过滤得到直观可视表达的数据基础。

上述根据监控对象的行为判断，包括根据监控对象的行为形成现实增强视频或不形成现实增强视频。

如图2所示。本发明实施例的基于增强现实技术的智能监控系统，包括视频对象捕捉装置001、信息挖掘数据库003、物联网网关服务器004和增强现实处理装置005，其中：

视频对象捕捉装置001，用于通过不同类型的摄像头的光学视场形成监控区域，采集监控区域内的监控视频，获取监控视频内的监控对象；

信息挖掘装置003，用于将物联网设备信息与监控对象关联，形成数据库中的关联信息；

物联网网关服务器004，用于建立与物联网系统数据连接的通信网关，通过通信网关获取物联网设备信息，发送控制信息；

增强现实处理装置005，用于将物联网设备信息形成可视信息，与监控对象适配形成增强现实视频输出。

本发明实施例的基于增强现实技术的智能监控系统，还包括视频监控服务器002，用于根据行为判断模型，形成监控对象的行为判断数据，结合关联信息形成相应物联网设备的控制信息，通过物联网网关服务器完成相应控制。

如图3所示，本实施例的增强现实处理装置005还包括增强数据请求装置051、增强数据形成装置052和增强数据显示装置053，其中：

增强数据请求装置051，用于向数据库请求与监控对象相应的物联网设备信息；

增强数据形成装置052，用于将物联网设备信息过滤形成增强现实数据；

增强数据显示装置053，用于将增强现实数据形成与监控对象视频适配的可视信息。

如图4所示，本实施例的信息挖掘装置003包括数据请求响应装置031、系统请求生成装置032和数据存取装置033，其中：

数据请求响应装置031，用于响应对物联网设备信息的请求，向数据库或物联网请求信息并转发；

系统请求生成装置032，用于根据监控区域的监控对象，自动生成物联网设备信息的请求，将获得的物联网设备信息存入数据库；

数据存取装置033，用于接收数据读写请求，将数据写入数据库结构或从数据库结构中读出数据。

如图5所示，本实施例的视频监控服务器002包括视频对象分析装置021、物联网信号生成装置022和增强现实调用装置023，其中：

视频对象分析装置021，用于根据行为判断模型，形成监控对象的位置数据、现有轨迹数据、预测轨迹数据；

物联网信号生成装置022，用于根据监控对象的位置数据和轨迹数据，过滤获得相关的物联网设备，形成相应状态变换数据。

增强现实调用装置023，用于根据监控对象的行为判断，形成可视信息，与监控对象适配形成增强现实视频。

在实际应用中的一种应用场景，本发明实施例的基于增强现实技术的智能监控方法及系统布置在重要会议场所或是重点控制的出入口，加载增强现实处理装置，并开启信息挖掘装置实时访问功能，则各类型摄像头捕捉到人脸、车牌或其他设定监控对象的图像后，通过人脸识别技术，获得捕捉对象的信息，通过增强现实处理装置，把所获得的信息实时加载到视频当中，则监控工作人员可实时全面地获得监控画面内的信息。当监控系统捕捉到安防系统设定禁止对象或公安系统标定的犯罪嫌疑对象时，则会加载报警信息到监控屏上，并发出警报，提示安防人员监控范围遭遇禁止对象入侵。

在实际应用中的另一种应用场景，本发明实施例的基于增强现实技术的智能监控方法及系统部署在监控区域的视频监控平台中，通过物联网网关服务器实时获取犯罪嫌疑人的消费地点、消费内容，并获取嫌疑对象最近的视频监控权，根据嫌疑人租车或机票、车票等消费信息获取未来出行计划，根据购物、娱乐消费信息可获得最近一段时间内活动区域等，警方根据本发明所述监控系统获取的信息，拟定抓捕计划，策划抓捕地点。当嫌疑人进入楼宇，利用增强现实处理装置的功能，将当前楼宇透视三维模型嵌入监控信息中，以供警方设定抓捕计划，通过物联网网关服务器获取楼宇门禁系统的控制权，通过视频监控服务器向其发送限止特定对象活动指令，当嫌疑人进入设定的抓捕地点，视频监控通过人脸识别验证对象，楼宇门禁系统执行上述命令，达到将嫌疑人孤立并困于某一窄小空间内，等待警方到达并实施抓捕。

在实际应用中的另一种应用场景，通过物联网网关服务器获取道路上行驶车辆间的移动物联信息，获取对嫌疑车辆周边车辆的状态信息，通过增强现实处理装置获取车辆的可视状态信息供监控人员拟定限制路线，利用视频监控服务器向相关车辆发送干扰嫌疑车辆速度的活动指令，使得嫌疑车辆的运行状态逐渐受限，无法进行快速机动。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换等，均应包含在本发明的保护范围之内。

Claims

1.一种基于增强现实技术的智能监控方法，包括：

2.如权利要求1所述的基于增强现实技术的智能监控方法，还包括：

3.如权利要求1所述的基于增强现实技术的智能监控方法，所述步骤500，还包括：

步骤510，向数据库请求与监控对象相应的物联网设备信息；

步骤520，将物联网设备信息过滤形成增强现实数据；

4.如权利要求1所述的基于增强现实技术的智能监控方法，所述步骤500，还包括：

5.如权利要求2所述的基于增强现实技术的智能监控方法，针对步骤200，还包括：

6.如权利要求1所述的基于增强现实技术的智能监控方法，针对步骤300，还包括：

7.一种基于增强现实技术的智能监控系统，包括视频对象捕捉装置(001)、信息挖掘数据库(003)、物联网网关服务器(004)和增强现实处理装置(005)，其中：

视频对象捕捉装置(001)，用于通过不同类型的摄像头的光学视场形成监控区域，采集监控区域内的监控视频，获取监控视频内的监控对象；

信息挖掘装置(003)，用于将物联网设备信息与监控对象关联，形成数据库中的关联信息；

物联网网关服务器(004)，用于建立与物联网系统数据连接的通信网关，通过通信网关获取物联网设备信息，发送控制信息；

增强现实处理装置(005)，用于将物联网设备信息形成可视信息，与监控对象适配形成增强现实视频输出。

8.如权利要求7所述基于增强现实技术的智能监控系统，还包括视频监控服务器(002)，用于根据行为判断模型，形成监控对象的行为判断数据，结合关联信息形成相应物联网设备的控制信息，通过物联网网关服务器完成相应控制。

9.如权利要求7所述基于增强现实技术的智能监控系统，所述增强现实处理装置(005)还包括增强数据请求装置(051)、增强数据形成装置(052)和增强数据显示装置(053)，其中：

增强数据请求装置(051)，用于向数据库请求与监控对象相应的物联网设备信息；

增强数据形成装置(052)，用于将物联网设备信息过滤形成增强现实数据；

增强数据显示装置(053)，用于将增强现实数据形成与监控对象视频适配的可视信息。

10.如权利要求8所述基于增强现实技术的智能监控系统，所述视频监控服务器(002)包括视频对象分析装置(021)、物联网信号生成装置(022)和增强现实调用装置(023)，其中：

视频对象分析装置(021)，用于根据行为判断模型，形成监控对象的位置数据、现有轨迹数据、预测轨迹数据；

物联网信号生成装置(022)，用于根据监控对象的位置数据和轨迹数据，过滤获得相关的物联网设备，形成相应状态变换数据；

增强现实调用装置(023)，用于根据监控对象的行为判断，形成可视信息，与监控对象适配形成增强现实视频。