CN104660995B - 一种救灾救援可视系统 - Google Patents

Abstract

本发明公开了一种救灾救援可视系统，属于增强现实技术领域。本发明系统包括智能眼镜和智能终端，其中：所述智能眼镜包括智能眼镜处理器、微型投影仪以及智能眼镜镜片；所述智能终端包括位置定位单元、智能终端存储器、智能终端处理器、智能眼镜通信接口以及外部通信接口。本发明利用虚拟现实技术，通过对救灾救援人员的位置进行定位，生成救援人员所在位置的虚拟现实图像，将生成的虚拟现实图像发送到智能眼镜。本发明利用增强现实技术在现场场景图像基础上叠加现场地图或其他信息，通过可视化的方式使救灾救援人员能够及时定位自己所在的位置所在，提高救援效率。

Description

一种救灾救援可视系统

技术领域

本发明属于增强现实技术领域，更具体地，涉及一种救灾救援可视系统。

背景技术

我国是个地震灾害多发的国家，近年来，频发的地震严重影响了人们的生活，造成了惨重的人员伤亡。地震发生后，对压埋人员抢救越快越及时，救出救活的可能性就越大。我国的地震救援队已配备了搜救犬和多种搜救仪器，包括音频式、视频式和雷达式生命探测仪等。这些手段虽然能够探测到生命信息的存在，但是在精确定位方面做得还不够，往往会耽误宝贵的救援时间，影响了救援的效率。另外在救灾救援现场，救援人员往往也难以定位被困人员所在位置，导致不能及时救援被困人员。因此灾害发生后如何进行精确定位、可视化救援是当前救灾救援中一个亟待解决的难题。

发明内容

针对现有技术的以上缺陷或改进需求，本发明提供一种救灾救援可视系统，其目的在于在救灾救援现场，能够对救灾救援人员进行准确定位，并将现成的地图等数据信息以可视化的方式显示给救灾救援人员，便于救灾救援行动的实施。

为实现上述目的，本发明提供了一种救灾救援可视系统，包括智能眼镜和智能终端，其中：

所述智能眼镜包括智能眼镜处理器、微型投影仪以及智能眼镜镜片，其中：

所述智能眼镜处理器，用于接收智能终端发送来的虚拟现实图像，并将所述虚拟现实图像发送到微型投影仪上；其中所述虚拟现实图像是救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图；

所述微型投影仪，用于接收所述智能眼镜处理器发送来的虚拟现实图像，并在所述智能眼镜处理器的控制下将所述虚拟现实图像投影到所述智能眼镜镜片上；

所述智能眼镜镜片为穿透式，用于将投影到智能眼镜镜片上的虚拟现实图像与现场的实际环境图像进行叠加，形成增强现实图像；

所述智能终端包括位置定位单元、智能终端存储器、智能终端处理器、智能眼镜通信接口以及外部通信接口，其中：

所述位置定位单元，用于对救灾救援人员的位置进行定位；

所述智能终端存储器，存储有救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图；

所述智能终端处理器，用于根据位置定位单元的定位结果，从智能终端存储器中获取救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图，并根据所述救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图生成救援人员所在位置的虚拟现实图像；

所述智能眼镜通信接口，用于将所述智能终端处理器生成的虚拟现实图像发送到智能眼镜；

所述外部通信接口，用于将所述虚拟现实图像发送到现场指挥终端或后台支援终端，以使现场指挥终端决策或提醒救灾救援人员。

在本发明的一个实施例中，所述智能眼镜还包括红外发射器、彩色摄像头、红外摄像头，其中：

所述红外发射器用于产生并发射红外激光，红外激光照射到救灾救援现场的物体上形成反射；

所述红外摄像头，用于接收红外摄像头接收到救灾救援现场的物体所反射的红外光线并生成现场红外图像；

所述彩色摄像头，用于接收救灾救援现场的物体所反射的红外光线并生成现场彩色图像；

所述智能眼镜处理器，还用于对所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像进行初步处理，并将所述经过初步处理的彩色图像和红外图像发送到所述智能终端，还用于接收所述智能终端发送回来的三维重建图像；

所述微型投影仪，还用于接收所述智能眼镜处理器发送来的三维重建图像，并在所述智能眼镜处理器的控制下将所述三维重建图像投影到所述智能眼镜镜片上；

所述智能眼镜通信接口，还用于接收智能眼镜发送的经过初步处理的彩色图像和红外图像；并在智能终端处理器完成三维重建后将三维重建图像发送回智能眼镜；

在所述智能终端中，智能终端处理器，还用于从接收自智能眼镜的彩色图像中提取获取深度数据信息，并对接收自智能眼镜发送的经过初步处理的彩色图像和红外图像进行融合处理得到融合图像，然后根据提取的深度数据信息以及融合图像构建救灾救援现场的三维重建图像；

所述外部通信接口，还用于将接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像发送到现场指挥终端，或者其他智能眼镜以供显示；另外，所述外部通信接口还用于将智能眼镜上的传感器所采集的信息发送到现场指挥终端，以供现场指挥终端决策或提醒救灾救援人员；

所述智能终端存储器，还用于缓存接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像。

在本发明的一个实施例中，所述智能眼镜还包括有下述传感器中的一种或多种：用于采集现场的烟雾浓度信息的烟雾传感器，或者用于采集现场的温度信息的温度传感器，或者用于采集有毒气体浓度的有毒气体浓度传感器。

在本发明的一个实施例中，所述智能眼镜还包括有用于缓存所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像，以及经过所述智能眼镜处理器初步处理后的彩色图像和红外图像的智能眼镜存储器。

在本发明的一个实施例中，所述智能眼镜还包括有语音对讲装置，与安装在指挥终端上的语音对讲装置构成救灾救援单兵与指挥终端的双向语音连接，其中语音对讲装置包括对讲耳机和对讲听筒接口。

在本发明的一个实施例中，所述智能终端中还包括下述传感器中的一种或多种：电子罗盘、重力感应器、加速传感器、光电传感器或超声波距离传感器。

在本发明的一个实施例中，所述智能终端中还集成有室内定位系统，室内定位系统为WiFi定位系统或者羲和系统。

在本发明的一个实施例中，所述位置定位单元为GPS定位芯片或北斗定位芯片。

在本发明的一个实施例中，所述系统还包括有现场指挥终端，所述现场指挥终端用于负责与救援人员联系和通信，接收来自救援人员的智能终端的视频、语音和数据信息，并根据所述信息对现场的形势进行判断决策，并将决策指令和支援数据发送给现场的救援人员；

在本发明的一个实施例中，所述系统还包括有后台支援终端，所述后台支援终端用于接收来自救援人员的智能终端或者是现场指挥终端的视频、语音和数据信息，并根据所述信息对现场的形势进行判断决策，并将决策指令和支援数据发送给现场的救援人员或者是现场指挥终端。

总体而言，通过本发明所构思的以上技术方案与现有技术相比，具有以下有益效果：本发明利用虚拟现实技术，通过对救灾救援人员的位置进行定位，根据定位结果，获取救灾现场的地图、或者目标对象的数据信息、或者救灾现场建筑物的平面图，并生成救援人员所在位置的虚拟现实图像；将生成的虚拟现实图像发送到智能眼镜；并能将所述虚拟现实图像发送到现场指挥终端或后台支援终端，以使现场指挥终端决策或提醒救灾救援人员。本发明利用增强现实技术在现场场景图像基础上叠加现场地图或其他信息，通过可视化的方式使救灾救援人员能够及时定位自己所在的位置所在，提高救援效率。

附图说明

图1为本发明实施例中一种救灾救援可视系统结构示意图；

图2为本发明实施例中另一种救灾救援可视系统结构示意图；

图3为本发明实施例中智能眼镜的结构示意图；

图4为本发明实施例中智能终端的结构示意图；

图5为本发明实施例中智能眼镜与智能终端的组合结构示意图；

图6为本发明实施例中在救灾现场的智能眼镜的投影成像示意图；

图7为本发明实施例中在设备维修现场的智能眼镜的投影成像示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。

增强现实技术是近年来在虚拟现实研究基础上发展起来的一个新的研究方向，也是虚拟现实研究领域的一个难点和热点问题。增强现实技术是将计算机生成的虚拟图像或其他信息有机、实时、动态地叠加到观察者所看到的现实环境中，使这些虚拟信息与用户周围的现实环境融为一体的技术。

本发明救灾救援可视系统就是利用增强现实技术在现场场景图像基础上叠加现场地图或其他信息，使救灾救援人员能够及时定位需救援位置或人员所在，提高救援效率。

如图1所示为本发明中一种救灾救援可视系统结构示意图，包括智能眼镜、智能终端和后台支援终端。其中，后台支援终端用于根据智能眼镜和智能终端反馈的现场信息，以及后台支援终端中保存的救援场所信息，制定救援措施及安排救援资源。后台支援终端与智能终端采用无线方式连接。

如图2所示为本发明中另一种救灾救援可视系统结构示意图，这种系统在图1的救灾救援可视系统结构基础上还包括了现场指挥终端。所述现场指挥终端处于智能终端与后台支援终端之间，用于接收智能终端反馈的现场信息，制定救援措施以指挥现场救援人员实施救援行动；或者将智能终端反馈的现场信息发送到后台支援终端，由后台支援终端制定救援措施或安排救援资源，并根据后台支援终端制定的救援措施在现场进行救灾救援指挥。所述现场指挥终端与智能终端以及后台支援终端均采用无线方式连接。

所述智能终端用于通过应用程序来处理现场信息得到需要的结果。智能眼镜用于显示智能终端的处理结果。智能终端与智能眼镜采用无线方式连接或有线方式连接。

如图3所示，为本发明实施例中智能眼镜的结构示意图；所述智能眼镜与智能终端通信连接，并通过智能终端经由无线通信方式与现场指挥终或后台支援终端进行无线数据通信。所述智能眼镜接收智能终端发送来的虚拟现实图像，经过智能眼镜处理器处理后，投影在智能眼镜镜片上，由现场图像与虚拟现实图像相叠加，形成增强现实图像。

具体地，所述智能眼镜至少包括智能眼镜处理器、微型投影仪以及智能眼镜镜片，其中：

所述智能眼镜处理器，用于接收智能终端发送来的虚拟现实图像，并将所述虚拟现实图像发送到微型投影仪上。其中所述虚拟现实图像可以是救灾现场的地图、目标对象的数据信息或救灾现场建筑物的平面图等。

所述微型投影仪，用于接收所述智能眼镜处理器发送来的虚拟现实图像，并在所述智能眼镜处理器的控制下将所述虚拟现实图像投影到所述智能眼镜镜片上。

所述智能眼镜镜片为穿透式，将投影到智能眼镜镜片上的虚拟现实图像与现场的实际环境图像进行叠加，形成增强现实图像。

进一步地，为了在救灾救援现场有浓烟和大火的情况下能够看清现场环境，可以通过红外摄像头采集现场红外图像，并将现场红外图像与采集的现场彩色图像发送到智能终端进行三维重建，生成三维重建图像，并投影到智能眼镜镜片上进行显示，从而使智能眼镜中显示的图像与救灾救援现场的图像吻合。具体地，所述智能眼镜上还安装有红外发射器、彩色摄像头、红外摄像头，其中，所述红外激光发射器用于发射红外激光，红外激光照射到救灾救援现场的物体上形成反射，红外摄像头接收到救灾救援现场的物体所反射的信号，并送到智能终端进行处理，智能终端根据接收的信号重建生成三维重建图像，三维重建图像从智能终端中传输到智能眼镜上经过微型投影仪投影到智能眼镜镜片上进行显示，从而使智能眼镜中显示的图像与救灾救援现场的图像吻合。

所述红外发射器用于产生并发射红外激光，红外激光照射到救灾救援现场的物体上形成反射；

所述红外摄像头，用于接收红外摄像头接收到救灾救援现场的物体所反射的红外光线并生成现场红外图像；

所述彩色摄像头，用于接收救灾救援现场的物体所反射的红外光线并生成现场彩色图像；

所述智能眼镜处理器，还用于对所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像进行初步处理，具体地，所述初步处理可以为降噪、滤波或增强处理，以及其他需要进行的处理。并且还用于将所述经过初步处理的彩色图像和红外图像发送到所述智能终端，还用于接收所述智能终端发送回来的三维重建图像；

所述微型投影仪，还用于接收所述智能眼镜处理器发送来的三维重建图像，并在所述智能眼镜处理器的控制下将所述三维重建图像投影到所述智能眼镜镜片上。

进一步地，所述智能眼镜还包括有存储器，用于缓存所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像，以及经过所述智能眼镜处理器初步处理后的彩色图像和红外图像。

进一步地，所述智能眼镜还包括有多种传感器，例如用于采集现场的烟雾浓度信息的烟雾传感器，或者用于采集现场的温度信息的温度传感器，或者用于采集有毒气体浓度的有毒气体浓度传感器。当然还可以根据实际需要配备其他类型传感器。

进一步地，所述智能眼镜还包括有语音对讲装置，安装在智能眼镜和现场指挥终端上。从而构成救灾救援单兵与现场指挥终端的双向语音连接。语音对讲装置包括对讲耳机和对讲听筒接口。

进一步地，所述智能眼镜还包括有电池，所述电池用于对所述智能眼镜中的其他各部件供电。

如图4所示，为本发明实施例中智能终端的电路结构示意图，所述智能终端至少包括位置定位单元，例如GPS定位芯片或北斗定位芯片，以及智能终端存储器，存储有各种APP、各种传感器应用，以及地图显示应用，以便在救灾救援时提供有效的地图显示功能，以及利用传感器采集各种现场数据信息；另外，所述智能终端存储器还可以存储有地图数据、建筑物内部结构图数据等，以使智能终端根据所述地图数据和建筑物内部结构图数据生成建筑物内部结构图，便于救灾救援人员在救灾救援过程中清楚了解建筑物内部结构和地形情况，制定合理的救灾救援方案。

具体地，所述智能终端至少包括位置定位单元、智能终端存储器、智能终端处理器、智能眼镜通信接口以及外部通信接口，其中：

所述位置定位单元，用于对救灾救援人员的位置进行定位，例如GPS定位芯片或北斗定位芯片。

所述智能终端存储器，存储有救灾现场的地图、目标对象的数据信息或救灾现场建筑物的平面图等数据信息，以使智能终端根据所述数据信息生成救灾现场的虚拟现实图像；

所述智能终端处理器，用于根据位置定位单元的定位结果，从智能终端存储器中获取救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图，并根据所述救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图生成救援人员所在位置的虚拟现实图像；

所述智能眼镜通信接口，用于将所述智能终端处理器生成的虚拟现实图像发送到智能眼镜；

所述外部通信接口，用于将所述虚拟现实图像发送到现场指挥终端或后台支援终端，以使现场指挥终端决策或提醒救灾救援人员。

进一步地，为了在救灾救援现场有浓烟和大火的情况下能够看清现场环境，可以通过由智能终端通过智能眼镜接口接收智能眼镜传输的经过初步处理后的红外图像和彩色图像，由智能终端处理器根据所述红外图像和彩色图像进行三维图像重建，从而生成三维重建图像，生成的三维重建图像通过智能眼镜通信接口传输到所述智能眼镜进行显示，并同时通过外部通信接口传输到现场指挥终端进行显示，从而使智能眼镜中显示的图像与救灾救援现场的图像吻合。其中：

所述智能眼镜通信接口，还用于接收智能眼镜发送的经过初步处理的彩色图像和红外图像；并在智能终端处理器完成三维重建后将三维重建图像发送回智能眼镜；

智能终端处理器，还用于从接收自智能眼镜的彩色图像中提取获取深度数据信息，并对接收自智能眼镜发送的经过初步处理的彩色图像和红外图像进行融合处理得到融合图像，然后根据提取的深度数据信息以及融合图像构建救灾救援现场的三维重建图像；

所述外部通信接口，还用于将接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像发送到现场指挥终端，或者其他智能眼镜以供显示；另外，所述外部通信接口还用于将智能眼镜上的传感器所采集的信息发送到现场指挥终端，以供现场指挥终端决策或提醒救灾救援人员；

所述智能终端存储器，还用于缓存接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像。

进一步地，所述智能终端中还包括电子罗盘、重力感应器、加速传感器、光电传感器、超声波距离传感器等传感器中的一种或多种。

进一步地，在所述智能终端中还集成了室内定位系统，室内定位系统可以是WiFi定位系统或者羲和系统等。

进一步地，所述智能终端还包括有近距离通信单元，近距离通信单元可以是WiFi、Bluetooth，或者对讲机。

具体所述智能终端可以是专用的智能终端，也可以使用IPad和智能手机这样的终端。智能终端的作用是处理现场的信息，比如定位信息、现场的地图信息等。在消防环境中，智能终端处理现场的建筑的平面图，并显示在智能眼镜上。同时，在消防现场中，还要将现场指挥终端的待救援人员的信息显示在智能眼镜上，方便救援人员实施救援。智能终端还要负责与现场现场指挥终端进行通信，通信的方式是无线通信方式。通信内容包括图像、语音和数据。

为了适合各种环境，在智能终端上的应用通常采用APP的方式。不同的应用环境，使用不同的APP。这些APP是一些专业的应用APP。比如在消防现场，就使用消防的APP。在抗震现场就使用抗震的APP。在维修现场，就使用维修的APP等。采用APP的模式有利于第三方可以开发更多的适合现场环境的应用，能够推广本发明的系统的推广和应用。

在本发明实施例中，智能眼镜可以是单目的，也可以是双目的。智能眼镜应该是穿透式的，这样，可以将智能终端的处理结果与现场的实际环境通过增强现实(AugmentedReality，AR)技术结合在一起。智能眼镜与智能终端的连接采用有线方式或者无线方式连接，例如WiFi、Bluetooth等。

在一些使用环境中，例如在消防的使用环境中，智能眼镜可以与头盔结合使用，例如图5所示，智能眼镜与智能终端通过有线方式连接，智能眼镜集成在头盔上。

为了适合各种环境，在智能终端上的应用通常采用APP的方式。不同的应用环境，使用不同的APP。这些APP是一些专业的应用APP。例如在消防现场就使用消防的APP；在抗震现场就使用抗震的APP；在维修现场就使用维修的APP等。采用APP的模式有利于第三方可以开发更多的适合现场环境的应用，能够推广本发明的系统和应用。

现场指挥终端是一个以计算机为中心的系统，负责与救援人员联系和通信。接收来自救援人员的智能终端的视频、语音和数据信息，了解现场的实际情况，对现场的形势进行判断，便于做出有效的指挥。同时将指令和支援数据发送给现场的救援人员。

现场指挥终端还可以与后台支援终端进行通信，将现场的实际情况及时发送给后台支援终端。同时，从后台支援终端中获得现场需要的信息和数据，例如现场地图等。在消防的环境中，获得建筑的平面图等信息。

后台支援终端是一个以计算机为中心的系统。接收来自救援人员的智能终端或者是现场指挥终端的视频、语音和数据信息，了解现场的实际情况，对现场的形式做出判断，便于做出有效的指挥。同时将指令和支援数据发送给现场的救援人员或者是现场指挥终端。

后台支援终端还负责向救援人员或者是现场指挥终端提供所需要的信息，例如现场需要的地图，待救援人员的位置等信息。在消防的环境中，负责提供建筑的平面图等信息。同时，在不同的应用环境中，还要向救援人员或者是现场指挥终端提供专用的APP，使得救援人员或者是现场指挥终端的效率更高。

后台支援终端的APP可以是来自第三方的APP。需要的地图等信息，例如建筑的平面图等，可以使来自第三方的。这种开放的体系结构，有利于带动第三方的积极性，从而使整个产业得到快速发展。

本发明利用虚拟现实技术，通过位置定位单对救灾救援人员的位置进行定位，根据位置定位单元的定位结果，获取救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图，并根生成救援人员所在位置的虚拟现实图像；将生成的虚拟现实图像发送到智能眼镜；并能将所述虚拟现实图像发送到现场指挥终端或后台支援终端，以使现场指挥终端决策或提醒救灾救援人员。本发明利用增强现实技术在现场场景图像基础上叠加现场地图或其他信息，通过可视化的方式使救灾救援人员能够及时定位自己所在的位置所在，提高救援效率。

本发明采用主动红外三维重建图像与一般的热成像比较，能够提供更清晰的现场图像。与此同时，主动红外三维重建图像采用发射红外激光的方式，可以探测物体的距离，形成深度信息，构建三维图像，而不是热成像技术的二维图像。主动红外三维重建图像形成的图像能够与现场的实际环境相吻合，与消防救灾单兵平时的视觉是一致的，使消防救灾单兵能够更准确把握现场的实际情况。

本发明采用主动红外三维重建图像与一般的热成像比较，在成本上只有几分之一，便于大范围推广。

本发明采用主动红外三维重建图像与一般的热成像比较，重量轻、方便携带，而且可以用于寒冷地区等各种救灾场景。

本发明采用各种传感技术对消防救灾单兵的体征信息进行时时采集，并及时有效地通过信道传送至指挥终端，为保障消防员的生命提供了有效的保障。

以下以具体实施例说明本发明救灾救援可视系统的应用场景：

实施例一，消防现场救援

将建筑物的平面图和待救援人员的信息显示在智能眼镜上，方便救援人员进行定位，快速实施救援。在消防现场都是浓烟，人眼视觉无法观察的情况下，通过AR和虚拟现实(Virtual Reality，VR)技术，可以在智能眼镜上再现一个实际的、与现场环境几乎一致的现场视觉图像，使救援人员感觉在实际的、没有浓烟的现场中移动，从而达到实施有效的救援。

在救援人员到达火场时，APP就可透过语音指令指示即时为救援人员提供火灾现场平面图，以找出重点搜救位置，还可以帮助救援人员找到最近的消防水龙头。

救援人员在建筑物内的定位，采用WiFi定位或者是羲和定位系统，定位精度可以达到2米。通过目标锁定的方式，使救援人员在移动和头部转动的情况下，看到的虚拟现场与实际的现场几乎一致。这样，救援人员就可以方便地找到门、楼梯等的位置，使救援更加方便和有效。

实施例二，目标锁定

在军事防卫领域，可视自然环境与不可视数据信息相结合可以帮助士兵更好的进行武器操作、行动监察、后勤支持、军事演练等。内置陀螺仪、加速度计、磁罗盘、支持头部运动跟踪和免提导航的智能眼镜，通过AR技术来锁定目标。在头部转动的时候，目标的位置始终保持在视场场景的位置上。

如图6所示，在智能眼镜上显示有现场的地图信息，并显示有救援人员在地图上的所在位置，便于救援人员了解现场地形分布，及时到达救援地点。

实施例三，复杂机械设备维修

在工业产品生产和维修过程中，特别是对大型复杂机械的组装、维护和检修，技术人员可以通过佩戴本发明的智能眼镜看到大量重叠在机械上的的注释注解、图形和文字，从而更加清楚直观的获取信息，以简化工程难度，提高工作效率及完成质量。

实施例四，远程指导通信设备维修

可以设备维修系统作为一个辅助操作系统涵盖了增强现实技术的很多方面，包括引导信息、图像合成、操作者操作和操作状态检测4个方面，各个方面相互配合，组成一个完整的维修向导系统。

如图7所示，操作维修过程是由一系列操作行为按照操作步骤规定的顺序组成的。操作人员按照操作步骤实施一次操作行为，引起所操作对象的设备上的特殊颜色标识发生变化进而通过摄像头获取到这种颜色标识信息的变化，然后计算机通过已有程序进行操作状态检测判断，同时根据检测结果发出下一步的操作指令，指导操作者完成设备的维修操作，这个过程是一次完整的操作，然后依次循环直到操作结束。

实施例五，复杂通信设备安装

在进行复杂通信设备安装的过程中，工程人员通过智能眼镜显示的提示来按流程进行安装。

本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种救灾救援可视系统，其特征在于，所述系统包括智能眼镜和智能终端，其中：

所述智能眼镜包括智能眼镜处理器、微型投影仪以及智能眼镜镜片，其中：

所述智能眼镜处理器，用于接收智能终端发送来的虚拟现实图像，并将所述虚拟现实图像发送到微型投影仪上；其中所述虚拟现实图像是救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图；

所述微型投影仪，用于接收所述智能眼镜处理器发送来的虚拟现实图像，并在所述智能眼镜处理器的控制下将所述虚拟现实图像投影到所述智能眼镜镜片上；

所述智能眼镜镜片为穿透式，用于将投影到智能眼镜镜片上的虚拟现实图像与现场的实际环境图像进行叠加，形成增强现实图像；

所述智能终端包括位置定位单元、智能终端存储器、智能终端处理器、智能眼镜通信接口以及外部通信接口，其中：

所述位置定位单元，用于对救灾救援人员的位置进行定位；

所述智能终端存储器，存储有救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图；

所述智能终端处理器，用于根据位置定位单元的定位结果，从智能终端存储器中获取救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图，并根据所述救灾现场的地图，或者目标对象的数据信息，或者救灾现场建筑物的平面图生成救援人员所在位置的虚拟现实图像；

所述智能眼镜通信接口，用于将所述智能终端处理器生成的虚拟现实图像发送到智能眼镜；

所述外部通信接口，用于将所述虚拟现实图像发送到现场指挥终端或后台支援终端，以使现场指挥终端决策或提醒救灾救援人员；

在所述智能眼镜中还包括红外发射器、彩色摄像头、红外摄像头，其中：

所述红外发射器用于产生并发射红外激光，红外激光照射到救灾救援现场的物体上形成反射；

所述红外摄像头，用于接收救灾救援现场的物体所反射的红外光线并生成现场红外图像；

所述彩色摄像头，用于接收救灾救援现场的物体所反射的红外光线并生成现场彩色图像；

所述智能眼镜处理器，还用于对所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像进行初步处理，并将所述经过初步处理的彩色图像和红外图像发送到所述智能终端，还用于接收所述智能终端发送回来的三维重建图像；

所述微型投影仪，还用于接收所述智能眼镜处理器发送来的三维重建图像，并在所述智能眼镜处理器的控制下将所述三维重建图像投影到所述智能眼镜镜片上；

所述智能眼镜通信接口，还用于接收智能眼镜发送的经过初步处理的彩色图像和红外图像；并在智能终端处理器完成三维重建后将三维重建图像发送回智能眼镜；

在所述智能终端中，所述智能终端处理器，还用于从接收自智能眼镜的彩色图像中提取获取深度数据信息，并对接收自智能眼镜发送的经过初步处理的彩色图像和红外图像进行融合处理得到融合图像，然后根据提取的深度数据信息以及融合图像构建救灾救援现场的三维重建图像；

所述外部通信接口，还用于将接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像发送到现场指挥终端，或者其他智能眼镜以供显示；另外，所述外部通信接口还用于将智能眼镜上的传感器所采集的信息发送到现场指挥终端，以供现场指挥终端决策或提醒救灾救援人员；

所述智能终端存储器，还用于缓存接收自智能眼镜的红外图像和彩色图像，以及智能终端处理器生成的三维重建图像。

2.如权利要求1所述的救灾救援可视系统，其特征在于，所述智能眼镜还包括有下述传感器中的一种或多种：用于采集现场的烟雾浓度信息的烟雾传感器，或者用于采集现场的温度信息的温度传感器，或者用于采集有毒气体浓度的有毒气体浓度传感器。

3.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述智能眼镜还包括有用于缓存所述彩色摄像头采集的彩色图像和红外摄像头采集的红外图像，以及经过所述智能眼镜处理器初步处理后的彩色图像和红外图像的智能眼镜存储器。

4.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述智能眼镜还包括有语音对讲装置，与安装在指挥终端上的语音对讲装置构成救灾救援单兵与指挥终端的双向语音连接，其中语音对讲装置包括对讲耳机和对讲听筒接口。

5.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述智能终端中还包括下述传感器中的一种或多种：电子罗盘、重力感应器、加速传感器、光电传感器或超声波距离传感器。

6.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述智能终端中还集成有室内定位系统，室内定位系统为WiFi定位系统或者羲和系统。

7.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述位置定位单元为GPS定位芯片或北斗定位芯片。

8.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述系统还包括有现场指挥终端，所述现场指挥终端用于负责与救援人员联系和通信，接收来自救援人员的智能终端的视频、语音和数据信息，并根据所述信息对现场的形势进行判断决策，并将决策指令和支援数据发送给现场的救援人员。

9.如权利要求1或2所述的救灾救援可视系统，其特征在于，所述系统还包括有后台支援终端，所述后台支援终端用于接收来自救援人员的智能终端或者是现场指挥终端的视频、语音和数据信息，并根据所述信息对现场的形势进行判断决策，并将决策指令和支援数据发送给现场的救援人员或者是现场指挥终端。