CN107426508A - 一种利用ar实现远程安保巡查的方法 - Google Patents

Abstract

一种利用AR实现远程安保巡查的方法，本发明将AR眼镜通过无线通信模块与远程终端控制系统远程信号连接，使得巡查人员在AR眼镜上看到的图像能够实时传送给位于巡查区域之外的远程终端控制系统，让后勤人员即使在办公室也能够身临其境般地看到巡查人员看到的巡查区域，由于AR眼镜增强现实的作用，因此能有效地帮助巡查区域里的巡查人员发现巡查人员未注意到的盲点，从而大大提升巡查的效率；巡查人员能够迅速地将需要远程协助侦测、调查的人员、位置标示出来让后勤人员看到在后台进行调查，后勤人员也能迅速地将需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员标示出来让巡查人员重点关注，大大提高了巡查的效率。

Description

一种利用AR实现远程安保巡查的方法

技术领域

本发明涉及安保巡查设备领域，尤其是指一种利用AR实现远程安保巡查的方法。

背景技术

现今，提供安保巡查主要是利用警察、警卫、保安等人员进行地毯式的来回巡查，但是人力毕竟有限，再细致的巡查人员在巡查过程中都必不可少地会存在盲点误区，而只要该盲点的存在，该巡查人员即便在该地区往复巡查多次也难以获得有用的信息，并且如果是在缉捕罪犯、寻找危险物等需要争分夺秒的案件中，巡查时间越久，案件将越难侦破。

增强现实技术（AR技术）是利用计算机生成一种逼真的视、听、力、触和动等感觉的虚拟环境，通过各种传感设备使用户“沉浸”到该环境中，实现用户和环境直接进行自然交互。它是一种全新的人机交互技术，利用这样一种技术，可以模拟真实的现场景观 ，它是以交互性和构想为基本特征的计算机高级人机界面。增强现实技术，不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。如果能将AR技术应用到安保巡查领域，则将有可能彻底改变现有的安保巡查模式，但是至今安保巡查领域依然鲜有AR技术的身影。

中国发明专利一种基于AR技术和地理信息技术的埋地管线巡检方法及装置（申请公布号：CN106791620A），公开了其包括AR眼镜和安装在AR眼镜上的摄像头、数据处理融合终端；所述数据处理融合终端包括摄像头接口、GPS定位模块、网络通信模块、微处理模块、视频接口，所述摄像头接口、GPS定位模块、网络通信模块、视频接口分别与微处理模块连接；所述摄像头与摄像头接口连接，所述AR眼镜与视频接口连接。将该发明应用到安保巡查，也仅能让巡查人员通过云端数据自行调取相应的罪犯等信息，而无法让巡查人员在画面上与后勤人员进行动态的互动。

发明内容

本发明提供一种利用AR实现远程安保巡查的方法，其主要目的在于克服现有的安保巡查技术主要依靠单兵作战，效果差的缺陷。

为解决上述技术问题，本发明采用如下技术方案：

一种利用AR实现远程安保巡查的方法，包括以下步骤：

1)正在巡查区域进行巡查的巡查人员戴上AR眼镜，AR眼镜上的摄像头根据巡查人员的视角实时采集当前的巡查区域实景，并将该巡查区域实景实时传输到CPU模块；

2)所述CPU模块通过视频接口将该巡查区域实景传输到所述AR眼镜上进行实时的投影显示；同时，该CPU模块还将该巡查区域实景的数据通过无线通信模块传输到远程终端控制系统上实时显示；

3)巡查人员对AR眼镜投影出来的巡查区域实景中需要远程协助侦测、调查的人员、位置进行标记，该巡查人员标记的数据再实时传输至所述CPU模块中，与CPU模块中的巡查区域实景进行叠加；

4)CPU模块将叠加有所述巡查人员标记的巡查区域实景数据通过无线通信模块传输到所述远程终端控制系统上实时显示；

5)后勤人员对显示在远程终端控制系统上的巡查区域实景中需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员进行标记，该后勤人员标记的数据再通过无线通信模块实时传输到所述CPU模块，与CPU模块中的巡查区域实景、巡查人员标记进行叠加；

6)CPU模块通过所述视频接口将叠加有所述巡查人员标记、后勤人员标记的巡查区域实景传输到所述AR眼镜上进行实时的投影显示；

7)步骤1～6进行的同时，巡查人员通过AR眼镜上的蓝牙耳机与位于远程终端控制系统处的后勤人员进行实时对话。

进一步的，步骤3中，巡查人员进行标记的方法为：巡查人员通过操作与所述CPU模块信号控制连接的驱动装置使所述AR眼镜中的系统光标移动至要标记的位置进行标记。

进一步的，所述驱动装置可以为外置的触摸板、手柄、鼠标中的一种。

进一步的，所述远程终端控制系统为PC、手机、平板电脑中的一种。

和现有技术相比，本发明产生的有益效果在于:

本发明将AR眼镜通过无线通信模块与远程终端控制系统远程信号连接，使得巡查人员在AR眼镜上看到的图像能够实时传送给位于巡查区域之外的远程终端控制系统，让后勤人员即使在办公室也能够身临其境般地看到巡查人员看到的巡查区域，由于AR眼镜增强现实的作用，因此能有效地帮助巡查区域里的巡查人员发现巡查人员未注意到的盲点，从而大大提升巡查的效率；此外，由于AR眼镜的图像叠加功能，使得巡查人员可在AR眼镜投影出来的巡查区域实景中进行标记，并将该巡查人员标记与巡查区域实景叠加的图像实时发送给远程终端控制系统，后勤人员则可在远程终端控制系统上的巡查区域实景中进行标记，并将该后勤人员标记实时发送给CPU模块叠加，最终使得巡查人员与后勤人员能够同步地看到巡查区域实景、巡查人员标记、后勤人员标记三者叠加的图像，从而让巡查人员能够在AR眼镜上与后勤人员进行动态的互动，让巡查人员能够迅速地将需要远程协助侦测、调查的人员、位置标示出来让后勤人员看到在后台进行调查，后勤人员也能迅速地将需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员标示出来让巡查人员重点关注，如此一来，双方信息便都能够得到及时的反馈而没有滞后性，不会错过任何需要注意的点，大大提高了巡查的效率。

附图说明

图1为本发明的结构示意图。

图2为本发明中所述AR眼镜上的模块连接框图。

图3为本发明的数据信号传输框图。

图4为本发明的应用框图。

具体实施方式

下面参照附图说明本发明的具体实施方式。

参照图1、图2、图3和图4。一种利用AR实现远程安保巡查的设备，包括供巡查人员佩戴的AR眼镜1、装设于该AR眼镜1上的摄像头2、CPU模块3、无线通信模块4、摄像头接口51、视频接口52、供后勤人员使用的远程终端控制系统7，其中，CPU模块3、无线通信模块4、视频接口52、摄像头接口51集成在一控制盒8内并装设于AR眼镜1上；

CPU模块3通过无线通信模块4与远程终端控制系统7无线信号连接；

摄像头2通过摄像头接口51与CPU模块3连接，AR眼镜1通过视频接口52与CPU模块3连接。

具体的，参照图1、图2、图3和图4。

AR眼镜1具有镜片11和镜架12，该摄像头2可以采用双目深度摄像头，该双目深度摄像头嵌设在镜架12的中间位置，双目深度摄像头是使用立体视觉的原理（stereo，MVS）来估计深度，其利用视差原理来求取深度的，投射一个图案，然后进行比较，其能起到增强现实的作用。

无线通信模块4可以采用WiFi、2G、3G、4G等无线通信模式。

远程终端控制系统7可以为PC、手机、平板电脑、另外一个AR眼镜中的一种。远程终端控制系统7中也设有无线通信模块，并能与AR眼镜1上的无线通信模块4达成信号对接。

用于集成CPU模块3、无线通信模块4、视频接口52、摄像头接口51的控制盒8可以装设在镜架12的侧边上或者镜架12的中间位置与摄像头2邻接。

另外，参照图1、图2、图3和图4。还包括一蓝牙耳机9，蓝牙耳机9通过一活动连接件91连接在AR眼镜1的镜架12上，具体应用时，也可设置一对蓝牙耳机9，并且分别通过一活动连接件91连接在镜架12的左右两侧；该蓝牙耳机与巡查人员的手机蓝牙对接，其具有接听电话的功能，使得巡查人员能通过蓝牙耳机与后勤人员通话，而不需另外再取出手机，释放了巡查人员的双手，让他能够边通话边巡查。

参照图1、图2、图3和图4。具体的，活动连接件91为一挠性连接管，挠性连接管可依据用户的需求弯折成各种形状，其使用方法为：

①、当用户要使用蓝牙耳机时，掰动该挠性连接管，使其上的耳机插到用户的耳朵上；由于挠性连接管的挠性作用，使得蓝牙耳机能够牢靠地卡在耳朵上，即使进行剧烈运动也不会被轻易震落。

②、当用户使用完蓝牙耳机后，掰动该挠性连接管，使蓝牙耳机离开耳朵移动至其它不与用户头部直接接触的位置，避免给用户以不适的体验。

参照图1、图2、图3和图4。一种利用AR实现远程安保巡查的方法，包括以下步骤：

步骤一

正在巡查区域进行巡查的巡查人员戴上AR眼镜1，AR眼镜1上的摄像头2根据巡查人员的视角实时采集当前的巡查区域实景，并将该巡查区域实景实时传输到CPU模块3。

本发明中的巡查区域包括发生街区、楼道、仓库、银行、天安门广场等需要安保巡查的区域。

步骤二

CPU模块3通过视频接口52将该巡查区域实景传输到AR眼镜1上进行实时的投影显示；同时，该CPU模块3还将该巡查区域实景的数据通过无线通信模块4传输到远程终端控制系统7上实时显示。

步骤三

巡查人员对AR眼镜1投影出来的巡查区域实景中需要远程协助侦测、调查的人员、位置进行标记，该巡查人员标记的数据再实时传输至CPU模块3中，与CPU模块中的巡查区域实景进行叠加。

其中，巡查人员进行标记的方法为：巡查人员通过操作与CPU模块3信号控制连接的驱动装置6使AR眼镜1中的系统光标移动至要标记的位置进行标记。该驱动装置6可以为外置的触摸板、手柄、鼠标中的一种，此外，也可设置该驱动装置为指环或手环，既美观、便于携带，而且操作更加方便。

中国发明专利公开了一种光标控制方法与基于该方法的AR眼镜与智能指环（申请公布号：CN 106354253 A），该智能指环包括红外发射模块，可以发射出红外信号；蓝牙发射模块，发射蓝牙控制信号；触摸控制模块，通过不同的触摸方式，蓝牙发射模块发射出不同蓝牙控制信号以及控制红外发射模块发射红外信号。若本发明的驱动装置6设为指环，可采用该发明中智能指环的结构进行设计。

步骤四

CPU模块3将叠加有巡查人员标记的巡查区域实景数据通过无线通信模块4传输到远程终端控制系统7上实时显示。

远程终端控制系统7可以为PC、手机、平板电脑、另外一个AR眼镜中的一种。并且，远程终端控制系统7并不局限于个数只有一个，也可为复数个，即一个在巡查区域内的巡查人员，可以有多个后勤人员在巡查区域外提供协助，从而最大程度地减少巡查人员的盲点，使巡查更有效率。

步骤五

后勤人员对显示在远程终端控制系统7上的巡查区域实景中需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员进行标记，该后勤人员标记的数据再通过无线通信模块4实时传输到CPU模块3，与CPU模块3中的巡查区域实景、巡查人员标记进行叠加。

其中，后勤人员进行标记的方法为：后勤人员通过PC、手机、平板电脑或另外一个AR眼镜自带的功能组件在屏幕上显示的巡查区域实景上相应的位置做涂抹、画圈等标记。为了进一步更加便利地让每个普通人均能无碍地进行使用，还可在AR眼镜1的系统中与远程终端控制系统7中分别安装相同的软件（如APP等），双方均打开APP便可便捷地进行互动，该APP可利用现有的APP软件，也可找专业的APP开发机构进行设计开发，此处不再赘述。

此外，后勤人员还可以在远程终端控制系统7上通过无线通信模块4将巡查人员所负责的巡查区域地形图或嫌疑犯、危险物的影像资料数据发送至CPU模块3中的存储器内供巡查人员调取查看；巡查人员调取后，便可依据该巡查区域地形图进行全方位的巡查，避免出现漏查的地区，也可依据该嫌疑犯、危险物直观地与在巡查区域看到的人和物进行对比，避免出现由于巡查人员对嫌疑犯、危险物不熟悉而错过真正的嫌疑犯、危险物的情况。另外，由于该巡查区域地形图或嫌疑犯、危险物的影像资料传输至CPU模块3中，与CPU模块中的巡查区域实景进行叠加，再传输到远程终端控制系统7上显示，后勤人员便可根据该巡查区域地形图给巡查人员标出最佳的巡查路线，或者将在屏幕上显示的嫌疑犯、危险物与在巡查区域看到的人和物进行对比，从而减少巡查人员的盲点，若危险物（如定时炸弹等）的危险等级巡查人员无法确认，还可通过后勤人员在后台进行立即调查，并当即采取必要性措施，避免险情的发生。

除此之外，由于巡查区域实景已在远程终端控制系统7上实时显示，巡查人员巡查过程中所目击到的犯罪现场、现行犯均能以电子数据的证据形式保存在后台，而不仅仅是证人证言，有利于后期的立案起诉审理等刑事诉讼程序的进行，对于司法公正效率的提升具有不可估量的作用。

步骤六

CPU模块3通过视频接口52将叠加有巡查人员标记、后勤人员标记的巡查区域实景传输到AR眼镜上进行实时的投影显示。

若远程终端控制系统7的个数为复数个，则位于不同远程终端控制系统7处的后勤人员可采用不同颜色的后勤人员标记予以区分。

步骤七

步骤一～六进行的同时，巡查人员通过AR眼镜1上的蓝牙耳机9与位于远程终端控制系统7处的后勤人员进行实时对话。

本发明将AR眼镜通过无线通信模块与远程终端控制系统远程信号连接，使得巡查人员在AR眼镜上看到的图像能够实时传送给位于巡查区域之外的远程终端控制系统，让后勤人员即使在办公室也能够身临其境般地看到巡查人员看到的巡查区域，由于AR眼镜增强现实的作用，因此能有效地帮助巡查区域里的巡查人员发现巡查人员未注意到的盲点，从而大大提升巡查的效率；此外，由于AR眼镜的图像叠加功能，使得巡查人员可在AR眼镜投影出来的巡查区域实景中进行标记，并将该巡查人员标记与巡查区域实景叠加的图像实时发送给远程终端控制系统，后勤人员则可在远程终端控制系统上的巡查区域实景中进行标记，并将该后勤人员标记实时发送给CPU模块叠加，最终使得巡查人员与后勤人员能够同步地看到巡查区域实景、巡查人员标记、后勤人员标记三者叠加的图像，从而让巡查人员能够在AR眼镜上与后勤人员进行动态的互动，让巡查人员能够迅速地将需要远程协助侦测、调查的人员、位置标示出来让后勤人员看到在后台进行调查，后勤人员也能迅速地将需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员标示出来让巡查人员重点关注，如此一来，双方信息便都能够得到及时的反馈而没有滞后性，不会错过任何需要注意的点，大大提高了巡查的效率。

上述仅为本发明的具体实施方式，但本发明的设计构思并不局限于此，凡利用此构思对本发明进行非实质性的改动，均应属于侵犯本发明保护范围的行为。

Claims (4)

1.一种利用AR实现远程安保巡查的方法，其特征在于，包括以下步骤：

1) 正在巡查区域进行巡查的巡查人员戴上AR眼镜，AR眼镜上的摄像头根据巡查人员的视角实时采集当前的巡查区域实景，并将该巡查区域实景实时传输到CPU模块；

2) 所述CPU模块通过视频接口将该巡查区域实景传输到所述AR眼镜上进行实时的投影显示；同时，该CPU模块还将该巡查区域实景的数据通过无线通信模块传输到远程终端控制系统上实时显示；

3) 巡查人员对AR眼镜投影出来的巡查区域实景中需要远程协助侦测、调查的人员、位置进行标记，该巡查人员标记的数据再实时传输至所述CPU模块中，与CPU模块中的巡查区域实景进行叠加；

4) CPU模块将叠加有所述巡查人员标记的巡查区域实景数据通过无线通信模块传输到所述远程终端控制系统上实时显示；

5) 后勤人员对显示在远程终端控制系统上的巡查区域实景中需要巡查人员进一步调查的位置或需要巡查人员进行询问的人员进行标记，该后勤人员标记的数据再通过无线通信模块实时传输到所述CPU模块，与CPU模块中的巡查区域实景、巡查人员标记进行叠加；

6) CPU模块通过所述视频接口将叠加有所述巡查人员标记、后勤人员标记的巡查区域实景传输到所述AR眼镜上进行实时的投影显示；

7) 步骤1～6进行的同时，巡查人员通过AR眼镜上的蓝牙耳机与位于远程终端控制系统处的后勤人员进行实时对话。

2.如权利要求1所述一种利用AR实现远程安保巡查的方法，其特征在于：步骤3中，巡查人员进行标记的方法为：巡查人员通过操作与所述CPU模块信号控制连接的驱动装置使所述AR眼镜中的系统光标移动至要标记的位置进行标记。

3.如权利要求2所述一种利用AR实现远程安保巡查的方法，其特征在于：所述驱动装置可以为外置的触摸板、手柄、鼠标中的一种。

4.如权利要求1所述一种利用AR实现远程安保巡查的方法，其特征在于：所述远程终端控制系统为PC、手机、平板电脑中的一种。