CN116898172A - 一种复杂作业场景探测头盔装置及应用方法 - Google Patents

一种复杂作业场景探测头盔装置及应用方法 Download PDF

Info

Publication number
CN116898172A
CN116898172A CN202310874394.2A CN202310874394A CN116898172A CN 116898172 A CN116898172 A CN 116898172A CN 202310874394 A CN202310874394 A CN 202310874394A CN 116898172 A CN116898172 A CN 116898172A
Authority
CN
China
Prior art keywords
helmet
scene
ground
millimeter wave
optical camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310874394.2A
Other languages
English (en)
Other versions
CN116898172B (zh
Inventor
冯翔
王晨旭
单正梁
周志权
赵占锋
王新胜
张天鹏
李迎春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology Weihai
Original Assignee
Harbin Institute of Technology Weihai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology Weihai filed Critical Harbin Institute of Technology Weihai
Priority to CN202310874394.2A priority Critical patent/CN116898172B/zh
Publication of CN116898172A publication Critical patent/CN116898172A/zh
Application granted granted Critical
Publication of CN116898172B publication Critical patent/CN116898172B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Radar Systems Or Details Thereof (AREA)

Abstract

本发明提供一种复杂作业场景探测头盔装置及应用方法,属于复杂场景环境探测技术领域。为解决现有头盔在复杂作业场景下难以进行全天时、全天候和全场景的立体观测,且难以进行立体感知、传输、分析和预警的问题。头盔主体上设有左右对称的毫米波雷达、红外成像传感器、光学摄像头、光源、可折叠显示屏、定位模块、语音通话模块和控制处理器,手持终端外置组件包括物联网模块、手持控制板和电源模块,通过光学摄像头、红外成像传感器或毫米波雷达获取信息。可应对井下作业、救援等场景中粉尘弥漫、泥浆飞溅、烟雾遮挡或落石塌方,使得作业或救援人员有效感知前视区域风险、躲避顶部物体塌落,实现全场景的对复杂作业场景进行立体观测、传输和分析。

Description

一种复杂作业场景探测头盔装置及应用方法
技术领域
本发明涉及复杂场景环境探测技术领域,具体而言,涉及一种复杂作业场景探测头盔装置及应用方法。
背景技术
井下作业、救援等复杂作业场景中常存在粉尘弥漫、泥浆飞溅、烟雾遮挡、落石塌方等因素,常规光学照明手段作用范围有限,作业/救援人员无法有效感知前视区域风险、躲避顶部物体塌落,极大威胁人员的生命安全,也给社会安定造成诸多不利影响。场景中粉尘、泥浆、光线等因素容易造成光学图像、激光传感器失效,红外成像传感器在感知距离有限(<20m)、无法准确定位任务区域,常规探测传感器难以对场景进行全天时、全天候、全场景的立体观测;
常用的80GHz毫米波雷达具有距离(100m以内)和角度(±45°范围内)高分辨特性,在粉尘、泥浆和雨雾环境下依然能够保持优异的探测性能;通过天线集成、微波集成等技术,可实现模块化、小型化、低功率化(规避井下易燃气体风险),尤其适合复杂作业场景。
井下作业中头盔作为必备防护装具,考虑井下作业、救援场景的复杂性,如何利用头盔对作业场景进行立体感知、传输、分析和预警是目前亟待解决的问题。
发明内容
本发明要解决的技术问题是:
为了解决现有头盔在复杂作业场景下难以进行全天时、全天候和全场景的立体观测,且难以进行立体感知、传输、分析和预警的问题。
本发明为解决上述技术问题所采用的技术方案:
本发明提供了一种复杂作业场景探测头盔装置,包括头戴式盔体组件和手持终端外置组件,
所述头戴式盔体组件包括头盔主体,所述头盔主体的帽檐正上方中心处设有光源;头盔主体的顶部通过图像采集转轴连接有PCB电路板,所述PCB电路板上并排固定有光学摄像头与红外成像传感器;所述头盔主体的两侧对称设有毫米波雷达,所述毫米波雷达通过L型电动转轴与头盔主体连接,用于实现每侧的毫米波雷达可绕x轴方向旋转±90°,绕y轴方向旋转0°-90°;所述头盔主体帽檐处设有可折叠显示屏,所述可折叠显示屏放下后与佩戴者的面部平行且可收起至帽檐下方并与帽檐处平行;所述头盔主体靠近佩戴者耳部设有语音通话模块;
还包括设置在头盔主体上的定位模块与控制处理器,所述光源、光学摄像头、红外成像传感器、毫米波雷达、定位模块、语音通话模块和可折叠显示屏均与控制处理器连接;
所述手持终端外置组件包括物联网模块、手持控制板和电源模块,所述手持控制板为按钮布置且内部设有存储介质,手持控制板上设有物联网模块,手持控制板与控制处理器连接,用于将控制处理器发送来的部分毫米波雷达信息、红外信息和光学图像信息打包传输;所述电源模块设置在手持控制板内,用于为手持终端外置组件和头戴式盔体组件供电。
进一步地,利用手持控制板将信号发送至控制处理器进而控制光源的开闭和亮度,所述光源通过折叠底座与头盔主体连接,可实现0°-45°折叠。
进一步地,利用地面或远程终端控制手持终端外置组件和控制处理器来实现光源和光学摄像头配合进行光照条件下的图像采集,或红外成像传感器和光学摄像头交叉采集图像信息,将采集到的图像数据依次通过控制处理器和物联网模块传输到远程控制端,在地面或远程终端利用深度学习进行匹配处理获取图像信息,并将图像信息的立体显示和热场分布通过物联网模块和控制处理器显示在可折叠显示屏的复合图像显示区上。
进一步地,利用手持控制板将信号发送至控制处理器进而分别控制两侧毫米波雷达的开闭和旋转角度,以获取目标点云数据,所述目标点云数据包括各个散射回波点的距离、方位角度、俯仰角度和瞬时速度,可结合物体微动信息进行处理实现对发生落石或塌方的探测,并将点云布局通过控制处理器显示在可折叠显示屏的复合图像显示区上。
进一步地,所述可折叠显示屏上一侧为参数显示,所述参数显示包括左侧雷达横轴转动角度、左侧雷达纵轴转动角度、右侧雷达横轴转动角度、右侧雷达纵轴转动角度、定位模块方向指示、语音通话提示和剩余电量显示,另一侧为用于显示红外和光学融合切换图像的复合图像显示区。
一种复杂作业场景探测头盔装置的应用方法,包括以下步骤:
步骤一、对头盔装置进行前期检查并显示正常后,根据场景特点分别选取毫米波雷达、红外成像传感器、光学摄像头进行探测,实现对当前定位点场景的感知,并将数据传输到地面或远程控制终端,通过地面或远程终端进行数据处理,包括场景态势感知和建模,再将处理后的数据传输至控制处理器并在可折叠显示屏上显示;
步骤二、地面或远程控制端可通过物联网模块与工作人员通信,并可根据场景信息和定位信息来指导工作人员的具体活动,包括:发生意外时进行自救;电量不足或头盔装置损坏时的自动预警;静止状态时仅利用光学摄像头采集图像或利用红外成像传感器和光学摄像头交叉采集图像或利用毫米波雷达获取三维建模信息,用于指导工作人员救援、信息采集或作业。
进一步地,在步骤一中,在对当前定位点场景感知时,开启红外成像传感器的摄像头后与光学摄像头的工作方式为,前后10秒间隔,即分别工作10秒进行采集,此时的光学摄像头需结合照明灯源;数据同步上传于远程控制端,地面或远程终端利用深度学习算法实现白光条件下的两种图像机制的复合;该模式也可进行转动扫描机制进行环扫。
进一步地,左右侧的毫米波雷达可分别工作或同步工作,每次可沿x轴或y轴调整的角度为3°,探测时间为10s。
进一步地,在步骤二中,具体活动包括:
1、探测人员佩戴好头盔装置在工作时,定位模块实时向地面或远程控制端发送位置信息;当探测人员在井下发生意外情况时,可通过长按手持控制板上的语音通话按键,向地面发送求救信号,通知地面人员此时的工作人员遇到意外情况;
2、当控制处理器监测电源不足或监测到头盔装置遭到破坏,控制处理器判定为探测人员遇险,手持终端外置组件会立即向地面发出救援信号;
3、当工作人员呈静止状态以对当前场景进行探测和评估时,若光线降低,可开启光源配合光学摄像头进行探测,并将数据传输到地面或远程控制终端,地面或远程控制终端对光学摄像头图像进行处理,以识别待探测目标并标注,将处理后的图像再返回至可折叠显示屏上;
4、若地面或远程控制终端得到的信息仍然缺乏时,可关闭照明光源,并开启红外成像按钮进行探测,将数据传输到地面或远程控制终端,地面或远程控制终端对光学摄像头获取的图像与红外成像传感器获取的图像进行融合处理,以识别待探测目标并标注,再将处理后的图像返回至可折叠显示屏上;
5、若场景呈现雨雾或烟尘时,开启并控制左右两侧的毫米波雷达,将两侧毫米波雷达所获取的场景立体数据进行点云匹配和融合,并将点云数据传输到地面或远程控制终端,地面或远程控制终端进行聚类和三维坐标绘制后,返回至可折叠显示屏上。
进一步地,具体活动还包括将头盔装置作为临时静止探测装置或取证数据录取装置,将其固定在某一处,可实现对场景中围岩形变的持续观测。
相较于现有技术,本发明的有益效果是:
本发明一种复杂作业场景探测头盔装置及应用方法,头戴式盔体组件的头盔主体上设有左右对称的毫米波雷达、红外成像传感器、光学摄像头、光源、可折叠显示屏、定位模块、语音通话模块和控制处理器,手持终端外置组件包括物联网模块、手持控制板和电源模块,可在静止态下通过光学摄像头进行图像采集,或在红外条件下实现光学摄像头与红外成像传感器交叉进行图像采集并进行融合处理,还可利用毫米波雷达进行三维建模;
本发明一种复杂作业场景探测头盔装置及应用方法,可应对井下作业、救援等场景中粉尘弥漫、泥浆飞溅、烟雾遮挡或落石塌方的因素,可克服单一传感器的弊端,使得作业/救援人员有效感知前视区域风险、躲避顶部物体塌落,临时静止探测装置、取证数据录取装置,将其固定在某一处,可实现对场景中围岩形变的持续观测,实现全场景的对复杂作业场景进行立体观测、传输和分析,保障人员的生命安全;
本发明一种复杂作业场景探测头盔装置及应用方法,还可通过控制处理器监测电源不足或头盔装置遭到破坏时自动发出救援信号,实现了全天时和全天候检测、监测以及预警,进一步保障了施工人员或检测人员的生命安全。
附图说明
图1为本发明实施例中一种复杂作业场景探测头盔装置的系统结构与功能框图;
图2为本发明实施例中一种复杂作业场景探测头盔装置的头戴式盔体组件前视图;
图3为本发明实施例中一种复杂作业场景探测头盔装置的左侧毫米波雷达安装与视角图;
图4为本发明实施例中一种复杂作业场景探测头盔装置的右侧毫米波雷达安装与视角图;
图5为本发明实施例中一种复杂作业场景探测头盔装置的头盔显示屏界面图;
图6为本发明实施例中一种复杂作业场景探测头盔装置的手持控制板操作界面图;
图7为本发明实施例中一种复杂作业场景探测头盔装置的复合成像处理框图。
具体实施方式
在本发明的描述中,应当说明的是,各实施例中的术语名词例如“上”、“下”、“前”、“后”、“左”、“右”等指示方位的词语,只是为了简化描述基于说明书附图的位置关系,并不代表所指的元件和装置等必须按照说明书中特定的方位和限定的操作及方法、构造进行操作,该类方位名词不构成对本发明的限制。
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
具体实施方案一:结合图1至图7所示,本发明提供一种复杂作业场景探测头盔装置,包括头戴式盔体组件和手持终端外置组件,
所述头戴式盔体组件包括头盔主体,所述头盔主体的帽檐正上方中心处设有光源;头盔主体的顶部通过图像采集转轴连接有PCB电路板,所述PCB电路板上并排固定有光学摄像头与红外成像传感器;所述头盔主体的两侧对称设有毫米波雷达,所述毫米波雷达通过L型电动转轴与头盔主体连接,可实现毫米波雷达绕x轴方向±90°旋转,绕y轴方向0°-90°旋转;所述头盔主体帽檐处设有可折叠显示屏,可实现可折叠显示屏放下后与佩戴者的面部平行,收起后可收纳于帽檐下方;所述头盔主体靠近佩戴者耳部设有语音通话模块;
还包括设置在头盔主体上的定位模块与控制处理器,所述光源、光学摄像头、红外成像传感器、毫米波雷达、定位模块、语音通话模块和可折叠显示屏均与控制处理器通过通信线缆连接;
所述手持终端外置组件包括物联网模块、手持控制板和电源模块,所述手持控制板为按钮布置且内部设有大容量的存储介质和电源模块,手持控制板的背板上设有物联网模块,手持控制板与控制处理器通过通信线缆连接,将控制处理器发送来的部分毫米波雷达信息、红外信息和光学图像信息打包传输给地面或远程终端,通过地面或远程终端也给控制处理器发送指令;所述电源模块用于为手持终端外置组件和头戴式盔体组件进行供电。
优选地,可利用手持控制板将信号发送至控制处理器进而控制光源的开闭和亮度。
优选地,所述光源通过折叠底座与头盔主体连接,可实现俯仰方向折叠0°-45°,工作电压为5V。
优选地,利用控制处理器实现光源和光学摄像头配合实现光照条件下的图像采集,并实现红外成像传感器和光学摄像头交叉采集图像信息,将采集到的图像数据依次通过控制处理器和物联网模块传输到远程控制端,在地面或远程终端利用深度学习进行场景态势感知和建模,其中各个作业定位点的场景匹配图可结合实现目标/障碍物立体显示和热场分布,并可将目标/障碍物立体显示和热场分布通过物联网模块和控制处理器在可折叠显示屏的复合图像显示区上。
优选地,所述图像采集转轴的旋转范围为±30°,初始状态时所述PCB电路板上光学摄像头和红外成像传感器的镜头朝向为正对前方,即朝向佩戴头盔装置的工作人员正前方。
优选地,所述红外成像传感器为非制冷型红外成像模组,可感知30m范围内长波段红外信号,镜头处可实现变焦,红外成像可输出分辨率为1024*960的黑白图谱,所述光学摄像头可输出分辨率为1024*960的RGB彩色图谱。
进一步地,红外成像传感器可采用艾睿光电的XcoreMicroIII非制冷红外机芯组件。
优选地,利用手持控制板将信号发送至控制处理器进而分别控制两侧毫米波雷达的开闭和旋转角度,以获取目标点云数据,包括各个散射回波点的距离、方位角度、俯仰角度和瞬时速度,可结合物体微动信息处理实现对发生落石或塌方的探测,且将点云布局通过控制处理器在可折叠显示屏的复合图像显示区上。
优选地,所述L型电动转轴包括横向转轴和竖向转轴,所述横向转轴一端与头盔主体转动连接,横向转轴另一端与竖向转轴连接,所述毫米波雷达套接在竖向转轴上,通过横向小型步进电机控制横向转轴自转进而带动竖向转轴和毫米波步雷达绕x轴方向±90度旋转,通过竖向小型步进电机带动毫米波雷达在竖向转轴上绕y轴方向0-90°旋转。
进一步地,所述L型电动转轴中较长的转轴长度为40mm,较短的转轴长度为30mm。
优选地,所述毫米波雷达尺寸可为40mm*40mm,工作频率为80GHz,工作电压为5v,探测视角均为方位角±45°、俯仰角±45°,探测距离为100米。
进一步地,毫米波雷达可采用TIAWR1443或1642系列。
优选地,通过控制处理器控制定位模块的开闭,依靠井下定位传感器组网进行定位,也可按照机械陀螺仪(液浮陀螺仪)或井下5G通信网络进行定位。
优选地,利用手持控制板将信号发送至控制处理器进而控制语音开启、关闭及音量控制,所述语音通话模块用于与地面工作人员进行沟通。
优选地,所述语音通话模块包括带有麦的耳机,所述耳机可拆卸的设置在头盔主体上,所述耳机的数量可为一个或两个,当耳机的数量为两个时所述耳机对称的设置的佩戴者耳朵处,所述具有micro-USB插口,工作电压为5V。
优选地,所述控制处理器包括高性能DSP及CPU处理器,工作电压为5V。
优选地,所述可折叠显示屏上一侧为参数显示,所述参数显示包括左侧雷达横轴转动角度、左侧雷达纵轴转动角度、右侧雷达横轴转动角度、右侧雷达纵轴转动角度、定位模块方向指示、语音通话提示和剩余电量显示,另一侧为用于显示红外/光学融合切换图像的复合图像显示区。
优选地,所述物联网模块采用Lora系列模块F8L10D,所述电源模块为大容量锂电池,所述大容量的存储介质为存储硬盘。
具体实施方案二:结合图1至图7所示,本发明提供一种复杂作业场景探测头盔装置的应用方法,包括以下步骤:
步骤一、对头盔装置进行前期检查,包括,工作人员按照手持控制板上的按钮逐个分别进行操作,并结合显示屏显示信息,判断装置是否存在故障,尤其检查电源容量是否满足需要,定位模块、语音通话模块是否返回数据信息;
步骤二、根据场景特点分别选取毫米波雷达、红外成像传感器或光学摄像头的其中之一或组合进行探测,实现对当前定位点场景进行感知,数据传输到远程控制端,包括场景态势感知、建模与显示,其中各个作业定位点的场景匹配图可结合实现目标/障碍物立体显示、热场分布(红外数据),增强对场景的可视化认知,尤其对于救援和勘探的实际应用场景较为重要;
手持控制板内部自带的存储介质可对获取的数据进行存储和备份;物联网模块实时将数据打包上传至地面或远程控制端;
在对当前定位点场景感知时,红外成像传感器可不依赖光源进行探测,具有自主补充亮度的功能,开启红外成像传感器的摄像头后与光学摄像头的工作方式为:前后10秒间隔,即分别工作10秒,分别进行采集,此时的光学摄像头需结合照明灯源;数据同步上传于远程控制端,即5G网络实时传输,地面主控制端利用深度学习算法实现对于白光条件下两种图像机制的复合,所述深度学习算法可为GAN算法,以使得红外低光线场景能够像白天一样,便于识别障碍物、目标;同样,该模式也可进行转动扫描机制,进行环扫,即通过图像采集转轴的转动进行图像采集;
左右侧的毫米波雷达可分别工作或同步工作,每次可沿x轴或y轴调整的角度为2°或3°,探测时间为10s,在对作业场景上方、左右方探测过程中,对于发生落石、塌方等的探测,可结合物体微动信息进行处理;
步骤三、地面或远程控制端可通过物联网模块与工作人员通信,并可根据场景信息、定位信息,指导工作人员的具体活动,具体包括:
①、探测人员佩戴好头盔装置在井下工作时,定位模块将实时向地面或远程控制端发送位置信息;当探测人员在井下发生意外情况时,可通过长按手持控制板上的语音通话按键,长按时间可为10s,向地面发送求救信号,通知地面人员井下探测遇到意外情况,便于地面对遇险的探测人员及时开展搜救行动;或当控制处理器监测电源不足5%或监测到头盔装置遭到破坏,即头盔装置无法工作,控制处理器判定为探测人员遇险,手持终端外置组件会立即向地面发出救援信号;
②、当工作人员呈静止状态以对当前场景进行探测和评估时,若光线降低,可开启照明光源按钮,配合光学摄像头进行探测,并将数据传输到远程控制端,远程控制端对光学摄像头图像进行处理,以识别待探测目标并标注,并将处理后的图像返回给可折叠显示屏上;
③、若远程控制端得到的信息仍然缺乏时,可关闭照明光源,并开启红外成像按钮进行探测,将数据传输到远程控制端,远程控制端对摄像头图像(照明光源开启时所录取的数据)+红外成像进行融合处理,以识别待探测目标并标注,并将处理后的图像返回可折叠显示屏上,此方式适用于救援场合中具有红外特征的目标作业;
④、若场景呈现雨雾或烟尘时,开启左右的毫米波雷达,双侧毫米波雷达所获场景立体数据进行点云匹配、融合,将点云数据传输到远程控制端,远程控制端进行聚类、三维坐标绘制后,返回给可折叠显示屏上;其中,雷达工作与红外传感器、光学摄像头等不冲突,可同时工作,当同时工作时,获取的信息在可折叠显示屏上每隔5s自动切换;
⑤、该头盔装置可作为临时静止探测装置或取证数据录取装置,将其固定在某一处,可实现对场景中围岩形变的持续观测。本实施方案的其他组合和连接关系与具体实施方案一相同。
虽然本发明公开披露如上,但本发明公开的保护范围并非仅限于此。本发明领域技术人员在不脱离本发明公开的精神和范围的前提下,可进行各种变更与修改,这些变更与修改均将落入本发明的保护范围。

Claims (10)

1.一种复杂作业场景探测头盔装置,其特征在于:包括头戴式盔体组件和手持终端外置组件,
所述头戴式盔体组件包括头盔主体,所述头盔主体的帽檐正上方中心处设有光源;头盔主体的顶部通过图像采集转轴连接有PCB电路板,所述PCB电路板上并排固定有光学摄像头与红外成像传感器;所述头盔主体的两侧对称设有毫米波雷达,所述毫米波雷达通过L型电动转轴与头盔主体连接,用于实现每侧的毫米波雷达可绕x轴方向旋转±90°,绕y轴方向旋转0°-90°;所述头盔主体帽檐处设有可折叠显示屏,所述可折叠显示屏放下后与佩戴者的面部平行且可收起至帽檐下方并与帽檐处平行;所述头盔主体靠近佩戴者耳部设有语音通话模块;
还包括设置在头盔主体上的定位模块与控制处理器,所述光源、光学摄像头、红外成像传感器、毫米波雷达、定位模块、语音通话模块和可折叠显示屏均与控制处理器连接;
所述手持终端外置组件包括物联网模块、手持控制板和电源模块,所述手持控制板为按钮布置且内部设有存储介质,手持控制板上设有物联网模块,手持控制板与控制处理器连接,用于将控制处理器发送来的部分毫米波雷达信息、红外信息和光学图像信息打包传输;所述电源模块设置在手持控制板内,用于为手持终端外置组件和头戴式盔体组件供电。
2.根据权利要求1所述的一种复杂作业场景探测头盔装置,其特征在于:利用手持控制板将信号发送至控制处理器进而控制光源的开闭和亮度,所述光源通过折叠底座与头盔主体连接,可实现0°-45°折叠。
3.根据权利要求2所述的一种复杂作业场景探测头盔装置,其特征在于:利用地面或远程终端控制手持终端外置组件和控制处理器来实现光源和光学摄像头配合进行光照条件下的图像采集,或红外成像传感器和光学摄像头交叉采集图像信息,将采集到的图像数据依次通过控制处理器和物联网模块传输到远程控制端,在地面或远程终端利用深度学习进行匹配处理获取图像信息,并将图像信息的立体显示和热场分布通过物联网模块和控制处理器显示在可折叠显示屏的复合图像显示区上。
4.根据权利要求3所述的一种复杂作业场景探测头盔装置,其特征在于:利用手持控制板将信号发送至控制处理器进而分别控制两侧毫米波雷达的开闭和旋转角度,以获取目标点云数据,所述目标点云数据包括各个散射回波点的距离、方位角度、俯仰角度和瞬时速度,可结合物体微动信息进行处理实现对发生落石或塌方的探测,并将点云布局通过控制处理器显示在可折叠显示屏的复合图像显示区上。
5.根据权利要求4所述的一种复杂作业场景探测头盔装置,其特征在于:所述可折叠显示屏上一侧为参数显示,所述参数显示包括左侧雷达横轴转动角度、左侧雷达纵轴转动角度、右侧雷达横轴转动角度、右侧雷达纵轴转动角度、定位模块方向指示、语音通话提示和剩余电量显示,另一侧为用于显示红外和光学融合切换图像的复合图像显示区。
6.一种利用如权利要求5所述的复杂作业场景探测头盔装置的应用方法,其特征在于,包括以下步骤:
步骤一、对头盔装置进行前期检查并显示正常后,根据场景特点分别选取毫米波雷达、红外成像传感器、光学摄像头进行探测,实现对当前定位点场景的感知,并将数据传输到地面或远程控制终端,通过地面或远程终端进行数据处理,包括场景态势感知和建模,再将处理后的数据传输至控制处理器并在可折叠显示屏上显示;
步骤二、地面或远程控制端可通过物联网模块与工作人员通信,并可根据场景信息和定位信息来指导工作人员的具体活动,包括:发生意外时进行自救;电量不足或头盔装置损坏时的自动预警;静止状态时仅利用光学摄像头采集图像或利用红外成像传感器和光学摄像头交叉采集图像或利用毫米波雷达获取三维建模信息,用于指导工作人员救援、信息采集或作业。
7.根据权利要求6所述的一种复杂作业场景探测头盔装置的应用方法,其特征在于:在步骤一中,在对当前定位点场景感知时,开启红外成像传感器的摄像头后与光学摄像头的工作方式为,前后10秒间隔,即分别工作10秒进行采集,此时的光学摄像头需结合照明灯源;数据同步上传于远程控制端,地面或远程终端利用深度学习算法实现白光条件下的两种图像机制的复合;该模式也可进行转动扫描机制进行环扫。
8.根据权利要求7所述的一种复杂作业场景探测头盔装置的应用方法,其特征在于:左右侧的毫米波雷达可分别工作或同步工作,每次可沿x轴或y轴调整的角度为3°,探测时间为10s。
9.根据权利要求8所述的一种复杂作业场景探测头盔装置的应用方法,其特征在于,在步骤二中,具体活动包括:
1、探测人员佩戴好头盔装置在工作时,定位模块实时向地面或远程控制端发送位置信息;当探测人员在井下发生意外情况时,可通过长按手持控制板上的语音通话按键,向地面发送求救信号,通知地面人员此时的工作人员遇到意外情况;
2、当控制处理器监测电源不足或监测到头盔装置遭到破坏,控制处理器判定为探测人员遇险,手持终端外置组件会立即向地面发出救援信号;
3、当工作人员呈静止状态以对当前场景进行探测和评估时,若光线降低,可开启光源配合光学摄像头进行探测,并将数据传输到地面或远程控制终端,地面或远程控制终端对光学摄像头图像进行处理,以识别待探测目标并标注,将处理后的图像再返回至可折叠显示屏上;
4、若地面或远程控制终端得到的信息仍然缺乏时,可关闭照明光源,并开启红外成像按钮进行探测,将数据传输到地面或远程控制终端,地面或远程控制终端对光学摄像头获取的图像与红外成像传感器获取的图像进行融合处理,以识别待探测目标并标注,再将处理后的图像返回至可折叠显示屏上;
5、若场景呈现雨雾或烟尘时,开启并控制左右两侧的毫米波雷达,将两侧毫米波雷达所获取的场景立体数据进行点云匹配和融合,并将点云数据传输到地面或远程控制终端,地面或远程控制终端进行聚类和三维坐标绘制后,返回至可折叠显示屏上。
10.根据权利要求9所述的一种复杂作业场景探测头盔装置的应用方法,其特征在于:具体活动还包括将头盔装置作为临时静止探测装置或取证数据录取装置,将其固定在某一处,可实现对场景中围岩形变的持续观测。
CN202310874394.2A 2023-07-17 2023-07-17 一种复杂作业场景探测头盔装置及应用方法 Active CN116898172B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310874394.2A CN116898172B (zh) 2023-07-17 2023-07-17 一种复杂作业场景探测头盔装置及应用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310874394.2A CN116898172B (zh) 2023-07-17 2023-07-17 一种复杂作业场景探测头盔装置及应用方法

Publications (2)

Publication Number Publication Date
CN116898172A true CN116898172A (zh) 2023-10-20
CN116898172B CN116898172B (zh) 2024-06-14

Family

ID=88350558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310874394.2A Active CN116898172B (zh) 2023-07-17 2023-07-17 一种复杂作业场景探测头盔装置及应用方法

Country Status (1)

Country Link
CN (1) CN116898172B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117630914A (zh) * 2023-12-15 2024-03-01 哈尔滨工业大学(威海) 一种面向低空无人机探测的雷达光学红外一体化探测系统及方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103462295A (zh) * 2013-07-31 2013-12-25 深圳典邦科技有限公司 一种头盔
KR20160015089A (ko) * 2014-07-30 2016-02-12 쉐도우시스템즈(주) 소방관용 스마트 보호 헬멧 시스템 및 장치
CN107411212A (zh) * 2017-08-31 2017-12-01 中山市程博工业产品设计有限公司 一种可远程传送数据的角度可调式头盔摄像机
CN111650589A (zh) * 2020-06-18 2020-09-11 成都纳雷科技有限公司 一种无人机毫米波雷达探测系统、探测方法及无人机
CN213215573U (zh) * 2020-11-02 2021-05-18 杭州格物智安科技有限公司 一种具备抬头显示的安全帽
CN213663909U (zh) * 2020-11-25 2021-07-13 青岛大学 一种智能避障导航头盔
CN214283554U (zh) * 2021-01-20 2021-09-28 中国地震应急搜救中心 一种具备多源环境感知的ar智能应急救援头盔
US20220066292A1 (en) * 2020-09-02 2022-03-03 Pulkit Ahuja Gyro sensor or virtual joystick controlled smart helmet
CN114557510A (zh) * 2022-01-25 2022-05-31 北京中科海诚科技有限公司 一种利用智能安全帽监控风电场工作人员安全状态的方法
CN115426616A (zh) * 2021-07-27 2022-12-02 珠海市零距智研科技有限公司 一种基于救援场景救援人员动态在线监测系统及方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103462295A (zh) * 2013-07-31 2013-12-25 深圳典邦科技有限公司 一种头盔
KR20160015089A (ko) * 2014-07-30 2016-02-12 쉐도우시스템즈(주) 소방관용 스마트 보호 헬멧 시스템 및 장치
CN107411212A (zh) * 2017-08-31 2017-12-01 中山市程博工业产品设计有限公司 一种可远程传送数据的角度可调式头盔摄像机
CN111650589A (zh) * 2020-06-18 2020-09-11 成都纳雷科技有限公司 一种无人机毫米波雷达探测系统、探测方法及无人机
US20220066292A1 (en) * 2020-09-02 2022-03-03 Pulkit Ahuja Gyro sensor or virtual joystick controlled smart helmet
CN213215573U (zh) * 2020-11-02 2021-05-18 杭州格物智安科技有限公司 一种具备抬头显示的安全帽
CN213663909U (zh) * 2020-11-25 2021-07-13 青岛大学 一种智能避障导航头盔
CN214283554U (zh) * 2021-01-20 2021-09-28 中国地震应急搜救中心 一种具备多源环境感知的ar智能应急救援头盔
CN115426616A (zh) * 2021-07-27 2022-12-02 珠海市零距智研科技有限公司 一种基于救援场景救援人员动态在线监测系统及方法
CN114557510A (zh) * 2022-01-25 2022-05-31 北京中科海诚科技有限公司 一种利用智能安全帽监控风电场工作人员安全状态的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117630914A (zh) * 2023-12-15 2024-03-01 哈尔滨工业大学(威海) 一种面向低空无人机探测的雷达光学红外一体化探测系统及方法

Also Published As

Publication number Publication date
CN116898172B (zh) 2024-06-14

Similar Documents

Publication Publication Date Title
US11814173B2 (en) Systems and methods for unmanned aerial vehicles
US20200344420A1 (en) Display device and control method for display device
CN100559874C (zh) 基于全方位视觉传感器的头盔
CN116898172B (zh) 一种复杂作业场景探测头盔装置及应用方法
CN109737981B (zh) 基于多传感器的无人车目标搜索装置及方法
CN110244314A (zh) 一种“低慢小”目标探测识别系统与方法
CN108897342B (zh) 针对快速移动的民用多旋翼无人机的定位跟踪方法及系统
CN114113118B (zh) 一种地铁隧道衬砌裂缝渗漏水病害快速检测装置及其检测方法
CN112173103B (zh) 一种用于钻爆法施工隧道工作面检测装置及方法
JP2017183852A (ja) 表示装置および表示制御方法
CN112687113A (zh) 一种路侧信息感知设备
CN209176802U (zh) 一种多功能越障救援机器人
WO2019085945A1 (zh) 探测装置、探测系统和探测方法
CN110022438A (zh) 一种水上应急搜救系统
CN111836021B (zh) 一种全景可视的巡逻小车远程实时控制系统
CN212718674U (zh) 测绘机器人
CN215678754U (zh) 一种便携式三维点云激光雷达探测预警装置
CN105592294B (zh) 一种vsp激发炮群的监控系统
CN115251511A (zh) 一种基于可配置式矿井安全帽的智能综采工作面巡检系统
CN114353667A (zh) 基于ar与无人机单目视觉的地面目标测量方法及其应用
CN213812611U (zh) 一种手持式红外热像仪
US20240163549A1 (en) Imaging device, imaging method, and information processing device
JP2021030806A (ja) 操縦支援システム
CN218213464U (zh) 一种口岸智能检测机器人
CN205407108U (zh) 可进行身份认证的电力系统多功能便携式巡线仪

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant