CN209525006U - 可穿戴式声学检测识别系统 - Google Patents

可穿戴式声学检测识别系统 Download PDF

Info

Publication number
CN209525006U
CN209525006U CN201920566125.9U CN201920566125U CN209525006U CN 209525006 U CN209525006 U CN 209525006U CN 201920566125 U CN201920566125 U CN 201920566125U CN 209525006 U CN209525006 U CN 209525006U
Authority
CN
China
Prior art keywords
conformal
wearable
primary processor
identifying system
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201920566125.9U
Other languages
English (en)
Inventor
张若天
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Yunke Technology Co Ltd
Original Assignee
Beijing Yunke Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Yunke Technology Co Ltd filed Critical Beijing Yunke Technology Co Ltd
Priority to CN201920566125.9U priority Critical patent/CN209525006U/zh
Application granted granted Critical
Publication of CN209525006U publication Critical patent/CN209525006U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本实用新型实施例提供的可穿戴式声学检测识别系统,包括集成式多传感模块、佩戴装置、显控装置、主处理器、供电装置以及携行背包。集成式多传感模块及显控装置设置于佩带装置上,主处理器及供电装置设置于携行背包中。集成式多传感模块包括共形麦克风阵列、环境摄像头及共形超声传感器阵列,分别用于采集待测空间内的声音信号、环境视频图像及发出超声波信号并接收回波信号。如此,通过在佩戴装置上布设麦克风阵列、超声传感器阵列及摄像头等,结合携行背包及佩戴装置可将各部件佩戴至操作者身上,解放了操作者双手,简化了操作复杂度且提高了操作的敏捷性。

Description

可穿戴式声学检测识别系统
技术领域
本实用新型涉及声学检测技术领域,具体而言,涉及一种可穿戴式声学检测识别系统。
背景技术
对于从事环境噪声治理、设备声学故障诊断工作的工程师和科研人员来说,能够利用声学检测设备或者系统随心所欲地在现场直观地观察所关心的空间内噪声在时间和空间上的分布特点和频率成分,快速定位噪声源的位置,分析噪声源的信号特征,将有助于提高他们的工作质量和工作效率。目前能够实现空间噪声检测的声学设备或者系统主要包括声级计、声强计、麦克风阵列、手机应用APP以及声学照相机等。其中,声级计存在不能为使用人员提供噪声的空间分布信息、不能对噪声源进行定位及不能对噪声信号的特征进行分析等缺陷。而声强计在操作的同时,还需利用处理软件进行分析处理,其系统较为复杂。采用在检测空间内布设麦克风阵列的方式其系统更为复杂,并且还需依赖于相关人员的技术支持。采用手机应用APP的方式相对来说比较便利,但是由于手机内置的麦克风及采集设备不是针对声学检测专门设计的,因此数据精度上不高。
目前最常采用的是利用声学照相机来实现,一般分为固定布置和便携式布置。固定布置的方式阵列一般尺寸较大,且可移动性差,不适合对空间声学目标进行移动式常态化的巡检和监测。而便携式布置一般需要使用人员双手既作为设备的固定支架,又要操作设备,增加了使用人员的操作复杂度、降低了操作的敏捷性。
实用新型内容
有鉴于此,本实用新型实施例的目的在于,提供一种可穿戴式声学检测识别系统以解决上述问题。
本申请实施例提供一种可穿戴式声学检测识别系统,包括集成式多传感模块、佩戴装置、显控装置、主处理器、供电装置以及携行背包,所述集成式多传感模块设置在所述佩戴装置上,所述显控装置设置在所述集成式多传感模块上;
所述主处理器和供电装置设置在所述携行背包内,所述携行背包内部设置有电源线、数据线、电源接口及数据接口,所述供电装置和所述主处理器通过电源线与所述电源接口连接,所述主处理器还通过所述数据线与所述数据接口连接;
所述集成式多传感模块包括装置本体、设置在所述装置本体上的共形麦克风阵列、环境摄像头、共形超声传感器阵列及前置处理器,所述共形麦克风阵列、环境摄像头、共形超声传感器阵列以及显控装置与所述前置处理器连接,所述前置处理器通过所述电源线与所述电源接口连接、通过所述数据线与所述数据接口连接;
所述共形麦克风阵列用于采集待测空间内的多个方向上的声音信号;
所述环境摄像头用于采集待测空间内的环境视频图像;
所述共形超声传感器阵列用于发出高频超声波信号及低频超声波信号,并接收所述高频超声波信号和所述低频超声波信号的回波信号;
所述前置处理器用于对所述声音信号、环境视频图像及所述回波信号进行预处理及存储,并转发至所述主处理器;
所述主处理器用于对所述回波信号、所述声音信号和所述环境视频图像进行处理;
所述显控装置用于根据所述主处理器的处理结果显示对应的空间噪声分布图像。
可选地,所述主处理器还包括显示设备,所述显示设备用于与所述显控装置同步显示图像。
可选地,所述共形麦克风阵列包括多个麦克风,所述多个麦克风沿所述装置本体的外围分布设置,所述共形超声传感器阵列包括多个超声传感器,所述多个超声传感器沿所述装置本体的外围分布设置。
可选地,所述佩戴装置包括佩戴带以及设置在所述佩戴带上的第一连接部件,所述装置本体上设置有第二连接部件,所述第一连接部件和所述第二连接部件连接以使所述装置本体设置于所述佩戴带。
可选地,所述佩戴带的两端分别设置有适配的卡扣结构,所述卡扣结构用于将所述佩戴带的两端扣合或分离。
可选地,所述显控装置包括透视平视显示器、投影装置以及动作捕捉摄像头,所述透视平视显示器设置在所述装置本体的底部,所述装置本体呈“U”形结构,所述投影装置及所述动作捕捉摄像头设置在呈“U”形结构的装置本体的内侧。
可选地,所述装置本体包括布设部件以及设置在所述布设部件两端的支撑框架,所述布设部件及所述支撑框架构成“U”字形。
可选地,所述可穿戴式声学检测识别系统还包括近耳声学模块,所述近耳声学模块包括耳部固定结构、第一传输线以及设置在所述耳部固定结构上的二元麦克风阵列及近耳扬声器,所述二元麦克风阵列包括两个麦克风;
所述二元麦克风阵列中各所述麦克风用于采集操作者耳部周围环境的声音信号;
所述近耳扬声器用于对已采集到的声音信号进行回放;
所述第一传输线用于连接所述集成式多传感模块以及所述近耳声学模块。
可选地,所述可穿戴式声学检测识别系统还包括回放耳机模块,所述回放耳机模块包括包覆式耳罩、第二传输线以及设置在所述包覆式耳罩上的耳机共形麦克风阵列,所述耳机共形麦克风阵列包括多个麦克风,所述多个麦克风沿所述包覆式耳罩的外围分布设置;
所述耳机共形麦克风阵列用于采集操作者耳部周围环境的声音信号;
所述包覆式耳罩用于降低环境噪声对操作者的影响,并用于对已获得的声音信号进行回放;
所述第二传输线用于连接所述集成式多传感模块及所述回放耳机模块。
可选地,所述装置本体上还设置有多个按钮,所述多个按钮包括校准按钮、参数调节按钮以及界面操作按钮。
本实用新型实施例提供的可穿戴式声学检测识别系统,包括集成式多传感模块、佩戴装置、显控装置、主处理器、供电装置以及携行背包。集成式多传感模块及显控装置设置于佩带装置上,主处理器及供电装置设置于携行背包中。集成式多传感模块包括共形麦克风阵列、环境摄像头及共形超声传感器阵列,分别用于采集待测空间内的声音信号、环境视频图像及发出超声波信号并接收回波信号。如此,通过在佩戴装置上布设麦克风阵列、超声传感器阵列及摄像头等,结合携行背包及佩戴装置可将各部件佩戴至操作者身上,解放了操作者双手,简化了操作复杂度且提高了操作的敏捷性。
附图说明
为了更清楚地说明本实用新型实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍。应当理解,以下附图仅示出了本实用新型的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本实用新型实施例提供的可穿戴式声学检测识别系统的结构图之一。
图2为本实用新型实施例提供的携行背包的结构图。
图3为本实用新型实施例提供的可穿戴式声学检测识别系统的结构图之二。
图4为本实用新型实施例提供的可穿戴式声学检测识别系统的示意性结构框图。
图5为本实用新型实施例提供的可穿戴式声学检测识别系统的结构图之三。
图6为本实用新型实施例提供的近耳声学模块的结构图。
图标:10-可穿戴式声学检测识别系统;100-集成式多传感模块;110-装置本体;111-第二连接部件;112-布设部件;113-支撑框架;120-共形麦克风阵列;130-环境摄像头;140-共形超声传感器阵列;150-前置处理器;160-按钮;200-佩戴装置;210-佩戴带;220-第一连接部件;230-卡扣结构;300-显控装置;310-透视平视显示器;320-投影装置;330-动作捕捉摄像头;400-主处理器;410-显示设备;500-供电装置;600-携行背包;610-供电装置电源接口;611-主处理器电源接口;612-外接电源接口;620-主处理器数据接口;621-外接数据接口;700-近耳声学模块;710-耳部固定结构;720-二元麦克风阵列;730-近耳扬声器。
具体实施方式
下面将结合本实用新型实施例中的附图,对本实用新型实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本实用新型一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本实用新型实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本实用新型的实施例的详细描述并非旨在限制要求保护的本实用新型的范围,而是仅仅表示本实用新型的选定实施例。基于本实用新型的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本实用新型保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
请结合参阅图1和图2,本申请实施例提供一种可穿戴式声学检测识别系统10,所述可穿戴式声学检测识别系统10包括集成式多传感模块100、佩戴装置200、显控装置300、主处理器400、供电装置500以及携行背包600。所述集成式多传感模块100设置在所述佩戴装置200上,所述显控装置300设置在所述集成式多传感模块100上。
所述主处理器400和供电装置500设置在所述携行背包600内,所述主处理器400包括显示设备410,所述携行背包600内部设置有电源线、数据线、电源接口及数据接口。所述供电装置500和所述主处理器400通过电源线与所述电源接口连接,所述主处理器400还通过数据线与所述数据接口连接。
请结合参阅图3和图4,本实施例中,所述集成式多传感模块100包括装置本体110、设置在所述装置本体110上的共形麦克风阵列120、环境摄像头130、共形超声传感器阵列140及设置在装置本体110内部空腔的前置处理器150。所述共形麦克风阵列120、环境摄像头130、共形超声传感器阵列140以及显控装置300与所述前置处理器150连接。所述前置处理器150通过所述电源线与携行背包600上的电源接口连接、通过所述数据线与携行背包600上的数据接口连接。
可选地,所述装置本体110上包括数据接口和电源接口,所述共形麦克风阵列120、环境摄像头130、共形超声传感器阵列140以及显控装置300分别通过数据线和电源线与前置处理器150连接。所述装置本体110上的数据接口的一端与所述前置处理器150连接、另一端通过数据线连接至携行背包600上的数据接口。装置本体110上的电源接口的一端与所述前置处理器150连接、另一端通过电源线连接至携行背包600上的电源接口。
具体地,请再次参阅图2,携行背包600上的电源接口包括供电装置电源接口610、主处理器电源接口611及外接电源接口612。所述供电装置500通过电源线与所述供电装置电源接口610连接,所述主处理器400通过电源线与所述主处理器电源接口611连接,所述前置处理器150连接至装置本体110上的电源接口后再通过电源线与所述外接电源接口612连接。可选地,携行背包600上的数据接口包括主处理器数据接口620及外接数据接口621。所述主处理器400通过所述数据线与所述主处理器数据接口620连接,所述前置处理器150连接至所述装置本体110上的数据接口之后再通过数据线与所述外接数据接口621连接。
通过上述连接方式,主处理器400与前置处理器150之间可以实现数据、信息的交互,进而与集成式多传感模块100中的其他部件以及显控装置300实现数据、信息的交互。所述供电装置500可为所述主处理器400、集成式多传感模块100及显控装置300提供电能。图2中示出了携行背包600包括两个数据接口及三个电源接口,应当理解,数据接口及电源接口的数量可根据实际需求进行设定,本实施例不作具体限制。
请再次结合参阅图3和图4,本实施例中,所述共形麦克风阵列120包括多个麦克风,多个麦克风沿所述装置本体110的外围分布设置。所述共形麦克风阵列120可用于采集待测空间内的多个方向上的声音信号。所述环境摄像头130可用于采集待测空间内的环境视频图像。
所述共形超声传感器阵列140包括多个超声传感器,多个超声传感器可分布设置于装置本体110的前部表面以及侧面。
所述共形麦克风阵列120将采集到的声音信号发送至前置处理器150,所述环境摄像头130将采集到的环境视频图像发送至前置处理器150。所述前置处理器150对接收到的声音信号及环境视频图像进行预处理后发送至所述主处理器400。所述前置处理器150还可对声音信号及环境视频图像进行存储。其中,所述前置处理器150对声音信号及环境视频图像的预处理采用现有技术中的常用方式,本实施例不作赘述。
所述主处理器400可用于对所述声音信号和所述环境视频图像进行分析处理,以确定待测空间内的定位跟踪目标。其中,所述主处理器400对声音信号和环境视频图像进行处理以确定定位跟踪目标采用现有技术中的常用方式实现,本实施例不作阐述。所述显控装置300可用于根据主处理器400对所述声音信号及所述环境视频图像的处理结果显示对应的空间噪声分布图像。
本实施例中,所述主处理器400可以是例如平板电脑、笔记本电脑或者是其他可实现数据、信号处理等的移动设备。其中,所述主处理器400还包括显示设备410,所述显示设备410可用于与所述显控装置300同步显示图像。
所述共形超声传感器阵列140可用于发出高频超声波信号,并接收该高频超声波信号的回波信号。所述主处理器400可对所述高频超声波信号的回波信号进行分析处理,以根据回波信号的变化情况确定操作者的操作指令。
此外,所述共形超声传感器阵列140还可用于发出低频超声波信号。所述主处理器400可用于对所述共形超声传感器阵列140接收到的所述低频超声波信号的回波信号确定匹配的定位算法以对待测空间内的物体进行定位。
本实施例中,通过上述设置,可利用共形麦克风阵列120及环境摄像头130以实现对待测空间内的声音信号及图像的采集,通过主处理器400的分析处理以得到待测空间内的定位跟踪目标。并可通过显控装置300显示对应的空间噪声分布图像,使操作者直接可见空间内噪声源分布情况。并且通过共形超声传感器阵列140发出的高频超声波信号和低频超声波信号以确定操作者的操作指令及对待测空间内的物体进行定位。并且结合利用佩戴装置200和携行背包600可将各部件佩戴至操作者身上,解放了操作者双手,简化了操作复杂度且提高了操作的敏捷性。
具体地,在本实施例中,主处理器400根据所述共形超声传感器阵列140接收到的所述低频超声波信号的回波信号在不同方向上的时延差异以获得所述待测空间内的物体相对于所述共形超声传感器阵列140的相对位置。并且可根据得到的相对位置从预存的多个定位算法中选择匹配的定位算法以对待测空间内的物体进行定位。
其中,主处理器400对回波信号的分析处理方式可采用现有技术中的常用方式,在本实施例中不作赘述。
在本实施例中,所述佩戴装置200包括佩戴带210以及设置在所述佩戴带210上的第一连接部件220。所述装置本体110上设置有第二连接部件111,所述第一连接部件220和所述第二连接部件111可适配,如此可通过将第一连接部件220和第二连接部件111连接以使所述装置本体110设置于所述佩戴带210。
其中,所述佩戴带210可以由弹性织物制成,或者也可以由橡胶材料制成,具体本实施例不作限制。
在所述佩戴带210的两端还分别设置有适配的卡扣结构230,所述卡扣结构230可用于将所述佩戴带210的两端扣合或者分离所述佩戴带210的两端。利用卡扣结构230可以便于操作者对设备的佩戴。可选地,在所述佩戴带210扣合时,佩戴带210的形状可以是环形,如此,可将设备佩戴至操作者的头部,无需操作者一直手持设备。
请结合参阅图5,在本实施例中,所述装置本体110包括布设部件112以及设置在所述布设部件112两端的支撑框架113,所述布设部件112和两端的支撑框架113构成类似“U”字形。其中,所述布设部件112主要用于布设环境摄像头130、共形麦克风阵列120及共形超声传感器阵列140等。所述支撑框架113的形状类似于眼镜镜架形状,如此,在使用时,支撑框架113可架设在操作者的耳部,进一步实现稳定地佩戴设备的目的,并且还可缓解设备重量对操作者头部造成的压力。
在本实施例中,所述共形麦克风阵列120包括多个麦克风,可预先利用声学空间定位算法对麦克风的位置进行规划,以便将多个麦克风布设于装置本体110的表面。具体地,多个麦克风可布设于处于中间的布设部件112的表面以及两侧的支撑框架113的表面,以多方位地采集待测空间内不同方向上的声音信号。本实施例中,共形麦克风阵列120利用装置本体110所提供的支撑空间,实现在有限结构下对声音信号进行充分的空间采样。
所述环境摄像头130的数量可以是多个,例如2个或4个等不限。多个环境摄像头130可设置于所述装置本体110中的布设部件112的两侧,可呈对称设置,以采集待测空间的环境视频图像。
请结合参阅图4和图5,本实施例中,所述显控装置300包括透视平视显示器310、投影装置320以及动作捕捉摄像头330。所述透视平视显示器310可设置在所述装置本体110的底部,具体地,可设置在所述布设部件112的底部。所述投影装置320及所述动作捕捉摄像头330可设置在呈“U”形结构的装置本体110的内侧,具体地,所述投影装置320可设置在所述透视平视显示器310的内侧的斜上方,以便于将图像投射至透视平视显示器310。所述动作捕捉摄像头330可包括多个,例如两个。两个动作捕捉摄像头330可分别设置在所述透视平视显示器310的内侧的两端,以透过所述透视平视显示器310拍摄操作者的手势动作。
所述透视平视显示器310的形状可类似于眼镜镜框的形状,在操作者将佩戴装置200佩戴至头部时,透视平视显示器310可位于操作者的眼部前方,以便于操作者可观察透视平视显示器310上显示的图像,且可透过透视平视显示器310观察待测空间环境图像。
其中,所述投影装置320可用于根据所述主处理器400对所述声音信号及所述环境视频图像的处理结果得到对应的空间噪声分布图像,并将所述空间噪声分布图像投射至所述透视平视显示器310。所述投影装置320还可用于将预设的操作界面图像投射至所述透视平视显示器310进行显示。所述操作界面图像可以是主处理器400发送至所述投影装置320的包括多个元素控件的操作界面。
本实施例中,通过投影装置320投射至透视平视显示器310上的空间噪声分布图像和操作界面图像是经过准直的(平行光线)并且聚焦于无限距处的,所以操作者的眼睛不需要在待测空间环境景象和透视平视显示器310反射的图像之间调焦,操作者用双眼即可观察透视平视显示器310上的图像。
本实施例中,操作者还可通过所述透视平视显示器310观察真实的待测空间环境图像,在将空间噪声分布图像投射至透视平视显示器310之后,透视平视显示器310上的空间噪声分布图像将叠加至真实环境图像中,使操作者人眼即可观察到叠加后的声像图。
所述动作捕捉摄像头330可用于采集所述透视平视显示器310上的标志图像,以及操作者放置在所述透视平视显示器310的与所述动作捕捉摄像头330相对的一侧的手势图像。
在透视平视显示器310上对应人眼平视状态的视觉中心位置设有坐标系定位标志,可用于对系统的检测坐标和显示坐标进行校准。所述投影装置320投射至透视平视显示器310上的图像也带有投影装置320的坐标系定位标志图像。操作者在佩戴设备进行检测时,操作者的眼部可投射至透视平视显示器310上以形成投射图像。
具体地,所述动作捕捉摄像头330所采集的标志图像可以包括上述的透视平视显示器310上设的坐标系定位标志、投影装置320投射至透视平视显示器310上的坐标系定位标志图像以及操作者眼部在透视平视显示器310上的投射图像。动作捕捉摄像头330可采集上述三者的图像,并得到三者之间的位置关系。
本实施例中,在所述装置本体110上还设置有多个按钮160,包括界面操作按钮、参数调节按钮及校准按钮等。各个按钮160可设置在所述装置本体110的两侧的支撑框架113表面,如此,可便于操作者的调节。其中,界面操作按钮可用于操作者选择确定所述透视平视显示器的操作界面上要操作的元素控件。参数调节按钮可用于操作者调整待处理或待显示数据的参数。校准按钮可用于启动坐标自动校准功能。
请参阅图6,可选地,所述可穿戴式声学检测识别系统10还包括近耳声学模块700,所述近耳声学模块700包括耳部固定结构710、第一传输线以及设置在所述耳部固定结构710上的二元麦克风阵列720及近耳扬声器730。
所述二元麦克风阵列720可包括两个麦克风,可用于采集操作者耳部周围环境的声音信号。所述近耳扬声器730用于对已采集到的声音信号进行回放。所述第一传输线用于连接所述集成式多传感模块100以及所述近耳声学模块700,用于集成式多传感模块100和近耳声学模块700之间的数据传输及供电。
其中,所述耳部固定结构710的形状可类似耳廓形状,如此可方便将耳部固定结构710佩戴至操作者的外耳道外侧。通过耳部固定结构710将近耳声学模块700佩戴至操作者耳部时,近耳扬声器730位于操作者的外耳道外侧附近,如此,操作者在听近耳扬声器730播放的声音时还可以听到外界的声音。近耳声学模块700可供操作者在待测空间的环境噪声不会对人耳造成伤害的情况下使用。
此外,本实施例中,所述可穿戴式声学检测识别系统10还可包括回放耳机模块,所述回放耳机模块包括包覆式耳罩、第二传输线以及设置在所述包覆式耳罩上的耳机共形麦克风阵列。
所述耳机共形麦克风阵列用于采集操作者耳部周围环境的声音信号。所述包覆式耳罩用于降低环境噪声对操作者的影响,并用于对已获得的声音信号进行回放。所述第二传输线用于连接所述集成式多传感模块100及所述回放耳机模块,以用于集成式多传感模块100和回放耳机模块之间的数据传输及供电。
所述耳机共形麦克风阵列由沿所述包覆式耳罩的外壳分布设置的多个麦克风组成。回放耳机模块可供操作者在环境噪声可能对操作者人耳产生噪声伤害的环境中使用。
本实施例中,主处理器400可实现目标自动检测功能,可根据多个方向上的声音信号和环境视频图像确定待测空间内的定位跟踪目标,其具体方式可采用现有技术中的常用方式,在本实施例中不作赘述。
操作者可通过操作界面对定位跟踪目标的参数进行查看,可选择定位跟踪目标对应的声音信号的某个频带进行收听,可通过近耳声学模块700或回放耳机模块进行播放。
可选地,操作者在使用近耳声学模块700采集声音信号时,人耳与近耳声学模块700处于同步收听状态。当使用回放耳机模块时,回放耳机模块的耳机共形麦克风阵列120连续采集声音信号,包覆式耳罩中的扬声器同步播放这些声音信号让人耳接收。
当使用人员通过人耳的自然听力接收到某种感兴趣的声音信号时,可利用近耳声学模块700或回放耳机模块对采集到的声音信号进行回放,回放过程中操作者可以调整音量大小和频段范围以及播放时段,实现查找信号的功能。找到前述感兴趣的信号后,操作者通过选择时段和频率范围的方式固定此信号,将此信号设置为特定的待检测声学目标。系统对该目标进行检测与跟踪,方法与目标自动检测相同。在跟踪过程中不断向操作者通过图像显示目标跟踪信息。若被跟踪目标处于人眼视野坐标中心附近,则在透视平视显示器310上用目标确认标志对噪声目标位置进行提示,如果目标不在此区域,则在透视平视显示器310上用目标提示标志进行提示。
本实施例中,在对已采集到的声音信号进行回放时,还可对回放的声音信号进行进一步地分析处理。可通过主处理器400的显示设备410或透视平视显示器310实现回放分析模式下的操作。在回放分析模式下,可将之前获得的空间噪声分布信息以云图或等高线图的方式进行显示。可将空间噪声分布图和定位跟踪目标信息作为声学图像信息,并结合同步采集的真实环境图像在图像坐标系下叠加以合成新的图像信息,通过透视平视显示器310或主处理器400的显示设备410进行显示。
操作者可对不同空间位置上的声音信号进行常规信息分析,例如时域分析、频域分析、时频分析、统计分析或包络分析等不限。且可通过调整分析参数以重新对噪声目标进行定位。
本实施例中,操作者可通过手势动作实现对操作界面上的元素控件的操作。可利用动作捕捉摄像头330及共形超声传感器阵列140实现操作者动作手势的识别。例如,操作者将操作手势与想要操作的界面内显示的元素控件图形在图像上重合(这里所说的元素控件是指投影到透视平视显示器310上的操作界面与显示界面内的元素控件)。动作捕捉摄像头330记录该操作,并通过对该元素控件图形实现高亮显示,表示系统确认操作者准备对该元素控件进行操作。共形超声传感器阵列140发射和接收高频超声波信号,通过高频超声波信号的回波信号的变化识别操作者对元素控件的操作。通过前置处理器150对上述采集到的图像数据与超声数据进行预处理后传输至主处理器400。主处理器400根据上述数据进行手势操作的定位、跟踪、识别处理,生成操作指令,并执行该指令。
例如,操作者的手势远离透视平视显示器310表示对该元素控件进行点击操作,接近透视平视显示器310表示对该元素控件取消操作。可以通过高频超声波信号回波时延的变化实现对手势远离或接近透视平视显示器310的分辨。当高频超声波信号的回波时延逐渐变长,则代表手势远离透视平视显示器310。当高频超声波信号的回波时延逐渐变短,则代表手势接近透视平视显示器310置。主处理器400通过上述信息生成相应的操作指令,并执行该指令。
再例如,操作者的手势左右或上下移动表示对元素控件进行滑动操作。可以通过动作捕捉摄像头330对手势图像在图像坐标内的连续移动方向实现分辨。当手势图像在图像坐标内连续向左侧移动,则代表手势要实现向左实现滑动操作。
需要说明的是,上述的对操作手势的识别方式仅为举例说明,并不限定于此,在实际应用中还可根据需求进行相应设置。
具体实施时,在佩戴好识别设备后,需要对系统坐标系进行校准。坐标系校准是将集成式多传感模块100的定位参考坐标系、透视平视显示器310的坐标系和操作者在目视前方的条件下平视视野形成的坐标系进行统一,使操作者的双眼能够观察到准确的声源位置。
在对系统坐标校准时,可采用手动模式及自动模式。在手动模式下,操作者双眼水平直视前方,调整集成式多传感模块100的位置,使透视平视显示器310上自带的坐标系标志与双眼水平视野平行,使透视平视显示器310上的坐标系中心位于操作者水平视野中心位置。投影装置320将集成式多传感模块100的定位参考坐标系图像投影到透视平视显示器310上。操作者在保证目视视野坐标不移动的情况下,调整镜架式的集成式多传感模块100的位置,使光学透视平视显示器310上的坐标系定位标志与操作者的目视视野坐标重合,同时,集成式多传感模块100的定位参考坐标系通过投影装置320在透视平视显示器310上形成的坐标投影与透视平视显示器310上的坐标系定位标志重合,实现坐标系的校准。
在自动模式下,操作者双眼水平直视前方,调整集成式多传感模块100的位置,使透视平视显示器310上自带的坐标系标志与双眼水平视野平行,光学透视平视显示器310上的坐标中心位于使用人员水平视野中心位置。通过动作捕捉摄像头330同时获得投影到透视平视显示器310上的集成式多传感模块100的定位参考坐标系图像、投影到透视平视显示器310上的操作者的双眼的图像和透视平视显示器310上的坐标系定位标志。可通过集成式多传感模块100上的校准按钮,以启动自动校准功能。在启动自动校准功能后,自动调制集成式多传感模块100的定位参考坐标系的参数,使集成式多传感模块100的定位参考坐标系与透视平视显示器310上的坐标系定位标志重合,实现坐标系的校准。
综上所述,本实用新型实施例提供的可穿戴式声学检测识别系统10,包括集成式多传感模块100、佩戴装置200、显控装置300、主处理器400、供电装置500以及携行背包600。集成式多传感模块100及显控装置300设置于佩带装置200上,主处理器400及供电装置500设置于携行背包600中。集成式多传感模块100包括共形麦克风阵列120、环境摄像头130及共形超声传感器阵列140,分别用于采集待测空间内的声音信号、环境视频图像及发出超声波信号并接收回波信号。如此,通过在佩戴装置200上布设麦克风阵列、超声传感器阵列及摄像头等,结合携行背包600及佩戴装置200可将各部件佩戴至操作者身上,解放了操作者双手,简化了操作复杂度且提高了操作的敏捷性。
在本实用新型的描述中,还需要说明的是,除非另有明确的规定和限定,术语“设置”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接。可以是机械连接,也可以是电连接。可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本实用新型中的具体含义。
在本实用新型的描述中,需要说明的是,术语“上”、“下”等指示的方位或位置关系为基于附图所示的方位或位置关系,或者是该实用新型产品使用时惯常摆放的方位或位置关系,仅是为了便于描述本实用新型和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本实用新型的限制。此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
以上所述仅为本实用新型的优选实施例而已,并不用于限制本实用新型,对于本领域的技术人员来说,本实用新型可以有各种更改和变化。凡在本实用新型的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本实用新型的保护范围之内。

Claims (10)

1.一种可穿戴式声学检测识别系统,其特征在于,包括集成式多传感模块、佩戴装置、显控装置、主处理器、供电装置以及携行背包,所述集成式多传感模块设置在所述佩戴装置上,所述显控装置设置在所述集成式多传感模块上;
所述主处理器和供电装置设置在所述携行背包内,所述携行背包内部设置有电源线、数据线、电源接口及数据接口,所述供电装置和所述主处理器通过电源线与所述电源接口连接,所述主处理器还通过所述数据线与所述数据接口连接;
所述集成式多传感模块包括装置本体、设置在所述装置本体上的共形麦克风阵列、环境摄像头、共形超声传感器阵列及前置处理器,所述共形麦克风阵列、环境摄像头、共形超声传感器阵列以及显控装置与所述前置处理器连接,所述前置处理器通过所述电源线与所述电源接口连接、通过所述数据线与所述数据接口连接;
所述共形麦克风阵列用于采集待测空间内的多个方向上的声音信号;
所述环境摄像头用于采集待测空间内的环境视频图像;
所述共形超声传感器阵列用于发出高频超声波信号及低频超声波信号,并接收所述高频超声波信号和所述低频超声波信号的回波信号;
所述前置处理器用于对所述声音信号、环境视频图像及所述回波信号进行预处理及存储,并转发至所述主处理器;
所述主处理器用于对所述回波信号、所述声音信号和所述环境视频图像进行处理;
所述显控装置用于根据所述主处理器的处理结果显示对应的空间噪声分布图像。
2.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述主处理器还包括显示设备,所述显示设备用于与所述显控装置同步显示图像。
3.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述共形麦克风阵列包括多个麦克风,所述多个麦克风沿所述装置本体的外围分布设置,所述共形超声传感器阵列包括多个超声传感器,所述多个超声传感器沿所述装置本体的外围分布设置。
4.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述佩戴装置包括佩戴带以及设置在所述佩戴带上的第一连接部件,所述装置本体上设置有第二连接部件,所述第一连接部件和所述第二连接部件连接以使所述装置本体设置于所述佩戴带。
5.根据权利要求4所述的可穿戴式声学检测识别系统,其特征在于,所述佩戴带的两端分别设置有适配的卡扣结构,所述卡扣结构用于将所述佩戴带的两端扣合或分离。
6.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述显控装置包括透视平视显示器、投影装置以及动作捕捉摄像头,所述透视平视显示器设置在所述装置本体的底部,所述装置本体呈“U”形结构,所述投影装置及所述动作捕捉摄像头设置在呈“U”形结构的装置本体的内侧。
7.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述装置本体包括布设部件以及设置在所述布设部件两端的支撑框架,所述布设部件及所述支撑框架构成“U”字形。
8.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述可穿戴式声学检测识别系统还包括近耳声学模块,所述近耳声学模块包括耳部固定结构、第一传输线以及设置在所述耳部固定结构上的二元麦克风阵列及近耳扬声器,所述二元麦克风阵列包括两个麦克风;
所述二元麦克风阵列中各所述麦克风用于采集操作者耳部周围环境的声音信号;
所述近耳扬声器用于对已采集到的声音信号进行回放;
所述第一传输线用于连接所述集成式多传感模块以及所述近耳声学模块。
9.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述可穿戴式声学检测识别系统还包括回放耳机模块,所述回放耳机模块包括包覆式耳罩、第二传输线以及设置在所述包覆式耳罩上的耳机共形麦克风阵列,所述耳机共形麦克风阵列包括多个麦克风,所述多个麦克风沿所述包覆式耳罩的外围分布设置;
所述耳机共形麦克风阵列用于采集操作者耳部周围环境的声音信号;
所述包覆式耳罩用于降低环境噪声对操作者的影响,并用于对已获得的声音信号进行回放;
所述第二传输线用于连接所述集成式多传感模块及所述回放耳机模块。
10.根据权利要求1所述的可穿戴式声学检测识别系统,其特征在于,所述装置本体上还设置有多个按钮,所述多个按钮包括校准按钮、参数调节按钮以及界面操作按钮。
CN201920566125.9U 2019-04-24 2019-04-24 可穿戴式声学检测识别系统 Active CN209525006U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201920566125.9U CN209525006U (zh) 2019-04-24 2019-04-24 可穿戴式声学检测识别系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201920566125.9U CN209525006U (zh) 2019-04-24 2019-04-24 可穿戴式声学检测识别系统

Publications (1)

Publication Number Publication Date
CN209525006U true CN209525006U (zh) 2019-10-22

Family

ID=68232126

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201920566125.9U Active CN209525006U (zh) 2019-04-24 2019-04-24 可穿戴式声学检测识别系统

Country Status (1)

Country Link
CN (1) CN209525006U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109932054A (zh) * 2019-04-24 2019-06-25 北京耘科科技有限公司 可穿戴式声学检测识别系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109932054A (zh) * 2019-04-24 2019-06-25 北京耘科科技有限公司 可穿戴式声学检测识别系统
CN109932054B (zh) * 2019-04-24 2024-01-26 北京耘科科技有限公司 可穿戴式声学检测识别系统

Similar Documents

Publication Publication Date Title
US10880668B1 (en) Scaling of virtual audio content using reverberent energy
US11523213B2 (en) Audio system for dynamic determination of personalized acoustic transfer functions
US11176669B2 (en) System for remote medical imaging using two conventional smart mobile devices and/or augmented reality (AR)
WO2020221046A1 (zh) 一种画框电视的横竖屏切换方法及画框电视
US10154363B2 (en) Electronic apparatus and sound output control method
US11234092B2 (en) Remote inference of sound frequencies for determination of head-related transfer functions for a user of a headset
CN109932054A (zh) 可穿戴式声学检测识别系统
WO2020032991A1 (en) Customizing head-related transfer functions based on monitored responses to audio content
EP3954136A1 (en) Acoustic transfer function personalization using sound scene analysis and beamforming
US11082794B2 (en) Compensating for effects of headset on head related transfer functions
US11178481B2 (en) Ear-plug assembly for hear-through audio systems
JP2022550235A (ja) 組織トランスデューサのための調整機構
CN209525006U (zh) 可穿戴式声学检测识别系统
JP2022546161A (ja) 個別化された空間オーディオを作り出すためにビームフォーミングを介して耳殻情報を推論すること
CN114080820A (zh) 用于选择传感器阵列的声学传感器子集的方法及其系统
CN111982293B (zh) 体温测量方法、装置、电子设备及存储介质
US11816886B1 (en) Apparatus, system, and method for machine perception
CN115151858A (zh) 可集成于眼镜框的助听系统
JP6079551B2 (ja) ホルダ位置合わせ支援装置および脳機能計測装置
US20230196765A1 (en) Software-based user interface element analogues for physical device elements
CN105516875B (zh) 用于快速测量虚拟声音产生设备空间角度分辨率的装置
JP2022144577A (ja) 音声出力装置及び頭部装着型表示装置
CN115047465A (zh) 用于深度感测的超声换能器的相控阵列
WO2023049055A1 (en) Monitoring food consumption using an ultrawide band system
EP3609199A1 (en) Customizing head-related transfer functions based on monitored responses to audio content

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant