CN103875034B - 基于医疗环境中的声音分析的医疗反馈系统 - Google Patents
基于医疗环境中的声音分析的医疗反馈系统 Download PDFInfo
- Publication number
- CN103875034B CN103875034B CN201280050835.7A CN201280050835A CN103875034B CN 103875034 B CN103875034 B CN 103875034B CN 201280050835 A CN201280050835 A CN 201280050835A CN 103875034 B CN103875034 B CN 103875034B
- Authority
- CN
- China
- Prior art keywords
- sound
- medical
- list
- reponse system
- patient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 62
- 230000005236 sound signal Effects 0.000 claims abstract description 32
- 238000000034 method Methods 0.000 claims description 16
- 238000012544 monitoring process Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 10
- 238000004422 calculation algorithm Methods 0.000 claims description 6
- 230000006399 behavior Effects 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 4
- 239000002184 metal Substances 0.000 claims description 4
- 230000008569 process Effects 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000004891 communication Methods 0.000 claims description 3
- 238000006073 displacement reaction Methods 0.000 claims description 3
- 230000004048 modification Effects 0.000 claims description 3
- 238000012986 modification Methods 0.000 claims description 3
- 238000013500 data storage Methods 0.000 claims description 2
- 230000035479 physiological effects, processes and functions Effects 0.000 claims description 2
- 230000009471 action Effects 0.000 abstract description 5
- 230000000694 effects Effects 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 4
- 230000007958 sleep Effects 0.000 description 4
- 230000003595 spectral effect Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000000474 nursing effect Effects 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000001154 acute effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 240000002805 Triticum turgidum Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000011230 binding agent Substances 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000004153 renaturation Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000007790 scraping Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000013707 sensory perception of sound Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
- 125000000391 vinyl group Chemical group [H]C([*])=C([H])[H] 0.000 description 1
- 229920002554 vinyl polymer Polymers 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R29/00—Monitoring arrangements; Testing arrangements
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61N—ELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
- A61N1/00—Electrotherapy; Circuits therefor
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Business, Economics & Management (AREA)
- Business, Economics & Management (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Instructional Devices (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
本发明涉及一种基于医疗环境中的声音分析的医疗反馈系统(100)。利用能够分析并分类音频信号以便获得患者周围的所述医疗环境中的一个或多个声音源的列表的声音场景分析器(SSA,10),以及能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标的声音水平分析器(SLA,20),高级的声音分析是可能的。最后,声音分类器(SC,30)被布置用于相对于可避免程度对医疗环境中的所述一个或多个声源的列表进行分类,并生成针对由医务人员、患者和/或访客采取的适当动作的对应反馈信号(FEED,50)。
Description
技术领域
本发明涉及基于医疗环境中的声音分析的医疗反馈系统。本发明还涉及用于提供基于医疗环境中的声音分析的反馈的对应方法,以及用于实施本发明的对应计算机程序产品。
背景技术
医院设置中的噪声水平可能惊人地高,尤其是在重症监护病房(ICU)中。最近的探索性研究也指示患者受高噪声水平的负面影响。ICU环境中的大多数噪声源都可以归因于工作人员的行为,包括讲话和其他活动。
MacKenzie等人(“Noise levels and noise sources in acute care hospitalwards”,Building Serv.Eng.Res.Technol.28,2(2007),第117-131页)已例如观察并归类了ICU中24小时时期的三个噪声源,并且已识别了相当多数量的可避免的、高水平噪声事件:垃圾桶、椅子刮擦、关门/尖促声、柜门、以及甚至活页夹的打开。所有噪声事件中总计有30%被认为是完全可避免的,并且类似百分比为部分可避免的(例如,警报;掉落物体;电话铃响)。
存在有噪声水平反馈系统,其测量建筑物空间中的声音水平,并且以诸如交通灯的简单格式提供实时反馈。开发这些系统主要是用于学校环境,近来相当偶然地开始用于医院中。
然而,整体噪声水平通常为这样的系统被设计用于运行的唯一参数,并且因此,反馈可能常常太过模糊,而几乎不能提供关于实际噪声源是什么的信息。
本发明的发明人已认识到改进的医疗反馈系统与方法是有益的,并因此设计了本发明。
发明内容
实现提供基于医疗环境中的声音分析的反馈的智能方式将会是有利的。大体上,本发明优选寻求单独地或以任意组合缓和、减轻或消除上文提及的缺点中的一个或多个。具体而言,提供一种解决现有技术中的上述问题或其他问题的方法,可以被视为本发明的目的。
因此,旨在本发明的第一个方面中,通过提供一种基于医疗环境中的声音分析的医疗反馈系统,实现上述目的以及一些其他目的,所述系统包括:
声音场景分析器(SSA),所述声音场景分析器被布置用于接收指示所述医疗环境中患者附近的声音的音频信号,并且能够分析并分类所述音频信号,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
声音水平分析器(SLA),所述声音水平分析器被布置用于接收指示患者附近的声音的音频信号,并且还被布置用于接收来自所述声音场景分析器的所述一个或多个声音源的列表,所述声音水平分析器能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,以及
声音分类器(SC),所述声音分类器被布置用于接收来自所述声音场景分析器的所述声音源的列表,并一起接收来自所述声音水平分析器的针对来自所述声音源的列表的对应声音的感知到的水平的所述指标,并且所述声音分类器还被布置用于至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成对应反馈信号。
本发明尤其地,但非排他地,有利于获得医疗背景中的反馈系统,其中,应用对患者周围声音源的识别或分类,以生成,并在适当情况下发送对应的反馈信号,医务人员和其他相关人员可以利用该反馈信号。
因此,本发明提供了一种智能反馈系统,其能够执行实时声音分析和分类。作为这种分析和分类的结果,所述反馈系统可以提供主要声音源的列表以及关于它们是可避免的还是不可避免的以及它们对总体声音水平贡献多大的信息。具体而言,可以识别,并尽可能最小化,优选地消除不想要或不期望的声音源,即噪声音源。额外地,或备选地,能够考虑适当的对策以减轻声音源对患者周围的声环境的影响。
根据声音分析的结果,所述反馈系统可以利用所需动作即时提供适当反馈。在给定时刻,最主要的噪声音源可能是,例如不必要的报警声。在这种情况下,所述反馈系统可以通知医院工作人员采取行动来降低或关闭警报。如果对总体声音水平贡献最大的是医院工作人员间的讲话活动,则该系统可以直接通知他们考虑降低其声音,等等。
应注意,尽管在本发明的本系统阐述中将反馈系统列举成三个独立的模态,即声音场景分析器、声音水平分析器和声音分类器,但本领域的技术人员容易理解,在实际实施方式中,例如在适当的计算设备上,通常将三个模态集成到实施本发明的单个处理器中。
虽然如此,功能特性可以通过各种方式落在本发明的一般范围和教义之内。
在一个具体实施例中,声音场景分析器可以包括音频特征提取器和用于分析的分类器算法。更具体而言,所述音频特征提取器和分类器算法可以能够提取表示所述音频信号的物理、生理和/或心理特性的音频特征。可以将这样的水平描述为分别具有低、中和/或高水平特性的特征。下面将是对算法提取的这些不同水平特征的更详细解释。简而言之,该算法执行音频信号的分割,然后在几个水平中分析音频信号。
优选地,所述声音场景分析器可以能够至少部分根据表示所述医疗环境的预定义声音源的列表对所述音频信号进行分类。更具体而言,以下非穷举的列表可以包括以下声音事件或声音源的一个或多个:
-讲话,包括患者间、医务人员间以及医务人员和患者间的讲话,
-由所述医疗环境中的监测和/或监督设备产生的警报,
-医疗仪器,
-脚步,
-内部建筑物部分的运动或位移,例如门、窗、通风设备和家具的运动或位移,
-金属物体,
-计算机相关的事件,例如鼠标和键盘操作,和/或,
-消费娱乐设备,例如音乐/视频播放设备和电视设备。
有利地,所述声音场景分析器可以能够基于在所述医疗环境中至少初始执行的学习过程对音频信号进行分类。如果医疗环境具有独特的声环境,这是特别有益的。
通常,声音水平分析器可以包括心理声学模型,以用于提供针对感知到的响度的指标,例如常规的A或B加权,或者Zwicker响度,或声学领域技术人员容易理解的其他听觉模型。可能地,可以在本发明的教义之内应用基于噪度、尖锐度、粗糙度等的更先进模型。
有益地,所述声音分类器还可以被布置用于基于可避免程度确定是否从所述系统输出反馈信号。因此,例如,如果由于例如必要的警报而使声音是不可避免的,那么不生成和发射反馈信号。
在一个具体实施例中,所述声音分类器还可以被布置用于相对于声音源的估计烦扰对声音源的列表进行分类,更具体而言,可以相对于患者的状况和/或医疗环境估计烦扰。
有益地,生成的反馈信号还可以包括适当的行为修改信号,所述行为修改信号对应于所分类的声音源中的一个或多个。因此,例如,如果将声音源分类成高声讲话,那么发给相关人员的对应反馈信号能够是“请停止高声讲话”、“在本区域请降低您的声音”等。
类似于声音场景分析器,所述声音分类器可以能够基于在所述医疗环境中至少初始执行的学习过程对所述一个或多个声音源的列表进行分类。
在特别有利的实施例中,所述声音分类器可以被布置用于从所述医疗环境中的相关联的患者监测系统接收患者特异性信息,所述声音分类器使用所述患者特异性信息以至少相对于可避免程度进行分类。患者监测系统本身是另一个实体,但也能够是反馈系统的集成部分,反之亦然。患者监测系统可以包括,或可通信地布置有各种传感器,以获得相关患者数据,例如电子传感器、机械传感器、生物化学传感器。在一个具体实施例中,患者监测系统可以基于人工观察,例如从护士接收输入。
优选地,反馈系统可以被布置用于利用第二多个麦克风监测第一多个患者,即麦克风的数目不必等于患者数目。麦克风被布置用于通过有线或无线方式与反馈系统通信,如本领域技术人员将容易理解的。在一个实施例中,也可以仅有一个患者和一个麦克风,例如,床边应用的单个患者途径,例如在私人房间中。
优选地,所述反馈系统可以被布置用于与一个或多个反馈设备通信,所述反馈设备可由医务人员、访客和/或患者利用。所述反馈设备被布置用于通过有线或无线方式与所述反馈系统通信,如本领域技术人员将容易认识到的。例如作为移动电话、监测器等等。
在第二方面中,本发明涉及一种用于操作基于医疗环境中的声音分析的医疗反馈系统的方法,所述方法包括:
提供声音场景分析器(SSA),所述声音场景分析器被布置用于接收指示所述医疗环境中患者附近的声音的音频信号,并且能够分析并分类所述音频信号,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
提供声音水平分析器(SLA),所述声音水平分析器被布置用于接收指示患者附近的声音的音频信号,并且还被布置用于接收来自所述声音场景分析器的所述一个或多个声音源的列表,所述声音水平分析器能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,并且
提供声音分类器(SC),所述声音分类器被布置用于接收来自所述声音场景分析器的所述声音源的列表,并一起接收来自所述声音水平分析器的针对来自所述声音源的列表的对应声音的感知到的水平的所述指标,并且所述声音分类器还被布置用于至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成对应反馈信号。
在第三方面中,本发明涉及一种计算机程序产品,其适于使得计算机系统能够控制根据第二方面的基于医疗环境中的声音分析的医疗反馈系统,所述计算机系统包括至少一个计算机,所述计算机具有与其连接的数据存储器件。本发明的该方面尤其但非排他地有利,在于本发明可以由计算机程序产品完成,所述计算机程序产品当被下载或上载到计算机系统中时,使得计算机系统能够执行本发明的第一方面的所述系统的操作。这样的计算机程序产品可以被提供在任意种类的计算机可读介质上,或者通过网络来提供。
大体上,本发明的各个方面可以在本发明的范围内以任意可能的方式被组合和耦合。本发明的这些以及其他方面、特征和/或优点将从下文描述的实施例变得显而易见,并参考后文描述的实施例得以阐明。
附图说明
将参考附图,仅通过举例描述本发明的实施例,附图中
图1示出根据本发明的反馈系统100的示意图,
图2示出根据本发明的反馈系统100的更详细的实施例,
图3示出根据本发明的反馈系统100的实施例,其是在具有不同的患者房间200的医院环境中实施的,
图4示出来自提供对声音水平和声音源的概览的反馈系统100的反馈范例,并且
图5为系统流程图,其表示根据本发明的方法的操作或计算机程序产品的概要。
具体实施方式
图1示出了根据本发明的反馈系统100的示意图。医疗反馈系统100基于医疗环境中的声音分析,在医疗环境中,一个或多个麦克风1产生音频信号AUD2并向系统100发射该信号,如图示意性所示。如技术人员会理解的,可以通过有线或无线方式进行发射。
该系统包括声音场景分析器SSA10,其中,声音场景分析器被布置用于接收音频信号AUD2,音频信号AUD2指示医疗环境中患者(未示出)附近的声音。此外,分析器SSA10能够分析并分类音频信号AUD2,以便获得患者周围的医疗环境中的一个或多个声音源的列表。下文将进一步解释这种情况。
系统100额外地包括声音水平分析器SLA20,声音水平分析器SLA20还被布置用于接收所述音频信号AUD2,如连接麦克风1与SLA20的箭头示意性所示。此外,声音水平分析器20还被布置用于接收来自声音场景分析器SSA10的前述一个或多个声音源的列表,如箭头15所示。然而还预见到,可以在相反方向中,即从声音水平分析器SLA向声音场景分析器SSA发射特定信息,以辅助SSA执行其操作和功能。从由SSA10提供的信息,声音水平分析器SLA20能够通过适当的计算和模型,提供针对来自所述声音源的列表的对应声音的感知到的水平的指标。应注意,SLA可以提供多个指标,例如针对各个时间窗口和/或不同频带。
此外,系统100中存在声音分类器SC30,声音分类器SC30被布置用于接收来自声音场景分析器SSA的声音源的列表,如箭头11所示,并一起接受来自声音水平分析器SLA20的针对来自声音源的列表的对应声音的感知到的水平的指标,如箭头21所示。声音分类器CL还被布置用于相对于可避免程度对医疗环境中的一个或多个声音源的列表进行分类,并生成对应反馈信号FEED50。在简单的实施例中,可避免程度能够是声音源或事件作为“可避免”或“不可避免”的分类。然而,在本发明的教义之内还预见到这两种相对分类之间的程度。
本发明人已认识到,通过反馈系统100中的声音分析改善医院环境的目的需要目标途径。作为开始,给工作人员的反馈指标必须是有意义的(可被这些人解读),并且所述指标还可以与在其控制跨度内的声音事件相关。此外,所述指标应充分捕获声音对患者的负面影响(有意义)。
这些考虑已指出,仅有声音水平反馈是不够的。其还得到根本上不同于在其他情况(例如音乐分析)中发现的那些的归类方案。同样,控制跨度问题导致将烦扰的声音划分为可避免的和不可避免的。这些考虑与对在医院中进行的声音记录的筛选一起,使得本发明人定义了多个医院特异性类别以及用于识别这些的器件或器件的组合。
有在医院环境中频繁发生的多种类别的声音事件,本发明人已发现,它们中的一些可能对患者健康状况有显著影响,不仅因为它们对整体噪声水平的贡献,还因为它们特定的时间和频谱特性(例如脉冲性,等)。通过自动识别噪声源的这样的类别,并通知医务人员它们的潜在影响,主观性噪声烦扰水平能够因此得以有效降低,因而改善了患者的睡眠/休息质量,这也可以对他们的康复速度有积极影响。具体而言,本发明人已经识别了所述反馈系统将被训练以识别的以下非详尽的类别列表:
讲话(患者参与的以及其他的)
从其自己的记录以及对医院噪声的分析,本发明人已识别出,讲话活动在平均噪声水平方面不是最主要的噪声源。因此,重要的是将讲话与非讲话声音区分开来。为了检测输入信号内的讲话,可以使用多种特征,包括音高范围、梅尔倒频谱系数(MFCC)以及包络线变化。由于交谈的背景也应被考虑在内,因此难以区分可避免的/非可避免的讲话。因此,本发明人的途径则是识别患者参与的讲话活动,其显然是不可避免的(从患者的角度看),而其他讲话活动(例如医院工作人员之间的)能够被视为至少部分可避免的。为了区分患者参数的交谈,可以使用各种方式,其中之一能够为使用多个麦克风,仅从非常有限的区域(所述患者的床头)捕获音频信号的专用波束形成技术。其他范例之一能够为讲话者识别技术的使用。如果所述音频输入被归类为讲话,并且如果来自波束形成器(或讲话者识别器)的输入指示其来自患者,则所述系统假设是患者自己在讲话。一旦检测到患者讲话,则在所检测的时间附近(例如5-10分钟)的所有讲话活动都将被视为患者参与的讲话。因此,在该过程结束时,讲话将被进一步归类为患者参与的讲话和其他讲话活动。
警报
警报也是医院里的主要噪声源之一。通过产生警报声音,反馈设备向医务人员发送警告。然而,并非所有的警报声音均为不可避免的,因为从实地研究(以及还从文献)获悉,一些较不紧急的警报(例如用信号表示注射结束,等)被护理人员简单地忽略,而没有采取立即行动。首先,归类器将识别所有警报声音,尤其分析输入信号的音调、谐波结构和重复性。然后,所述系统将观察所述警报声音在没有工作人员介入情况下继续多久。如果所述警报持续长于预定阈值,则反馈系统被激活以通知责任医务人员。同样,所述系统能够从患者反馈系统获得警报声音的历史,并学习对它们做出的反应有多迫切(在医疗意义上),可以基于所述历史和能够调节针对每种类型的警报的阈值时间。然而,应清楚,所述反馈系统将仅关于警报声音的烦扰水平给出报警,而没有对医疗情势的严重性的任何指示(例如,所述反馈系统绝不会强迫医务人员使重要警报静音)。
医疗仪器噪声(例如机械呼吸机)
针对在急性阶段的患者,例如在重症监护病房中的那些,使用各种医疗设备以支持其生命。然而,这些设备因其在房间中的位置而可能持续地在患者的耳边生成噪声,这将对患者的睡眠/休息质量有负面影响。由于来自这样的设备的噪声是连续的且重复的,所述反馈系统将基于节律性和可预测性归类该类噪声。
脚步
为了易于维护卫生,乙烯基地板在医院中是常见的,其产生非常特别的脚步噪声,据观察,其显著贡献于整体噪声烦扰,尽管平均噪声水平没有那么高。所述反馈系统将使用节律性和频谱内容(例如MFCC),以便学习并识别特定医院环境中的脚步。
建筑物部分,例如门/抽屉/橱柜的打开和关闭;物体掉落;撞击
类似于脚步,该类声音事件并不对平均噪声水平贡献很多,但因其冲击性导致高的瞬时峰值噪声水平,而对患者睡眠/休息有显著影响。所述反馈系统将基于对突发尖锐度和冲击力的度量,归类这些事件。
来自金属物体的噪声(例如,推车、床框等)
类似于上面两个类别,金属物体噪声的物理水平可能不是很高,但由于其独特的音色,产生的烦扰可能是显著的。为了识别该类声音事件,所述反馈系统将检测彼此非谐频的尖锐谱峰。
计算机相关事件,例如鼠标点击
根据本发明人自己的声音记录,鼠标点击(拖拽)噪声被识别为非常令人不安的(因为靠近患者的耳朵,如具有鼠标的LCD监视器通常放置在床旁,用于护理人员访问患者数据),但几乎不被识别为潜在的严重噪声源。鼠标点击噪声的非常独特的时间谱特性将被用于归类,所述归类也部分地采用被开发为识别键盘敲击噪声的技术。
来自电视/广播的音乐
来自电视或广播的声音,当不想要时(例如,来自隔壁房间的)可能是非常令人不安的。因为电视/广播内容中的讲话可能已被归类为“其他讲话活动”,所述反馈系统将转而尝试基于被用于讲话的检测的类似特征(例如音乐的包络线变化小于讲话的),将音乐与非音乐内容区分开来。
针对以上类别所描述的特征中的大部分常被用于,例如讲话分析、音乐信息检索、音乐推荐系统以及其他研究领域(键盘敲击)中。然而,它们的组合,以及尤其针对医院环境的定制类别(基于有意义的影响的,工作人员可解读的,控制跨度)而对所述组合进行的修改和优化则是创造性的步骤。
下表汇总了可以由反馈系统100使用的声音事件的类别,以及相关联的主要类别特征:
应注意,从声音源的列表识别的声音事件被进一步归类为可避免的/不可避免的声音源,可能地为噪声。如果由所述声音场景分析器的所述归类足够准确,则一些声音事件可以在该阶段被容易地归类为可避免的或不可避免的。例如,物体掉落声音能够由分析器识别,并且能够直接被归类为不可避免的。另一方面,针对该智能归类可能需要额外的信息。为了将重要的警报声音与非必要的区分开来,例如,可能必须基于来自患者反馈系统PMS和/或医院中央反馈数据库250(参见图2)的信息来训练所述声音分类器SC:给定患者的状况,医院工作人员必须对哪些警报声音快速响应。讲话者识别系统也可以用于将可避免的讲话活动与不可避免(例如,患者参与在其中的交谈是不可避免的)的区分开来。此外,来自睡眠/休息反馈设备的数据(例如基于活动记录仪、电子诊断(包括EEG、ECG、EOG、EMG等)、基于摄像机的移动检测,等)能够用于更准确地评价噪声的影响,这取决于患者的状态。
图2示出了根据本发明的反馈系统100的更详细实施例。在图2中,与患者房间200中的麦克风1一起示出了系统100。
如上所述,为了采集声音,在每个患者房间200中放置麦克风1或类似设备,主要包含麦克风1,但也可以在本地放置麦克风放大器MIC AMP。
相对于声音分析,具有高计算能力的计算机可以承载反馈系统100,该反馈系统1)从患者房间200接收音频信号AUD(为了清晰起见仅示出一个房间),2)分析可能噪声的内容和水平,3)确定噪声是可避免的还是不可避免的,4)确定应当向谁以及如何递送反馈,并且5)向适当的反馈设备150发射输出。
此外,可以将反馈系统与患者房间200中示意性示出的患者监测系统PMS210集成。PMS可以利用技术人员可用的适当医疗监测设备,监测患者的物理状态和/或活动,以及任选的精神状态。PMS可以与SC通信,如箭头25所示,即,声音分类器被布置用于在医疗环境中接收来自患者监测系统PMS的患者特异性信息。声音分类器CL之后可以使用所述患者特异性信息,至少相对于可避免程度、要生成的反馈信号的类型和/或应当向谁发射信号来进行分类。
也可以将本发明与医院或正被监测的医疗环境的中央监测和监督单元250集成,如箭头22和24示意性所示。可能地,单元250可以向反馈设备150给出反馈信号FEED,如箭头23所示。对于反馈信号FEED或FEED',示出了各种设备150,其通知指定人员(主要是医院工作人员,但如有必要也有患者及其护理人员)噪声的内容和水平以及提议动作。在图2中,示出了各种反馈设备,例如护士站和/或房间入口处的监测器、向用户给出触觉和/或视觉响应的腕带以及手持式设备(移动电话等)。
尽管反馈系统100被示为单独的实体,也预见到本发明可以容易地与医院或正被监测的医疗环境的中央监测与监督单元250集成在一起,或为中央监测与监督单元250的一部分。
或者,本发明可以容易地与患者监测系统PMS210集成在一起或为患者监测系统PMS210的一部分。或者,也预见到本发明可以容易地与反馈设备150集成在一起,或为反馈设备150的一部分,例如作为移动设备/电话的一部分,反馈设备150具有足够的计算资源和通信能力,以实施本发明的教义。
图3示出在具有不同的患者房间200(编号为房间1至房间8)的医院环境中实施的根据本发明的反馈系统100的实施例,不同的患者房间200示于医疗部门的布局中,每个房间200均具有麦克风1,如所示的。还示出三个不同的反馈设备150,其接收来自系统100的反馈信号,如由所示的箭头指示的,例如反馈设备150a能够为房间1中的显示设备,反馈设备150b能够为该医疗部门的中央显示设备,并且反馈设备150c能够为由医务人员(未示出)携带的手持式设备。
图4示出来自提供了对诸如噪声水平40的声音水平和诸如噪声源45的声音源的概览的反馈系统100的反馈范例,一同示出了“可避免”或“不可避免”的分类。图4的布局与图3相同。图4中示出的反馈能够例如在图3的显示器150b上提供。
图5为示意性系统流程图,其表示根据本发明的方法的操作或对应的计算机程序产品的概况,所述方法包括以下步骤:
S1提供声音场景分析器SSA10,所述声音场景分析器被布置用于接收指示所述医疗环境中患者附近的声音的音频信号AUD,并且能够分析并分类所述音频信号,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
S2提供声音水平分析器SLA20,所述声音水平分析器被布置用于接收指示患者附近的声音的音频信号AUD,并且还被布置用于接收来自所述声音场景分析器的所述一个或多个声音源的列表,所述声音水平分析器能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,并且
S3提供声音分类器SC30,所述声音分类器被布置用于接收来自所述声音场景分析器的所述声音源的列表,并一起接收来自所述声音水平分析器的针对来自所述声音源的列表的对应声音的感知到的水平的所述指标,并且所述声音分类器还被布置用于至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成对应反馈信号。
简言之,本发明涉及一种基于医疗环境中的声音分析的医疗反馈系统100。利用能够分析并分类音频信号以便获得患者周围的所述医疗环境中的一个或多个声音源的列表的声音场景分析器SSA10,以及能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标的声音水平分析器SLA20,高级的声音分析是可能的。最后,声音分类器SC30被布置用于相对于可避免程度对医疗环境中的所述一个或多个声源的列表进行分类,并生成针对由医务人员、患者和/或访客采取的适当动作的对应反馈信号FEED50。
本发明能够借助于硬件、软件、固件或它们的任意组合而得以实施。本发明或其特征中的一些也能够被实施为在一个或多个数据处理器和/或数字信号处理器上运行的软件。
本发明的实施例的个体元件可以在物理上、功能上以及逻辑上被实施为任意合适的方式,例如在单个元件中、在多个元件中或者作为单独的功能单元的部分。本发明可以在单个单元中实施,或者在物理和功能两者上被分布在不同单元和处理器之间。
单个处理器或其他单元可以履行权利要求书中记载的若干项目的功能。互不相同的从属权利要求中记载了特定措施并不指示不能有利地使用这些措施的组合。计算机程序可以被存储/分布在合适的介质上,例如与其他硬件一起提供做作为其他硬件的一部分提供的光学存储介质或固态介质;但计算机程序也可以以其他形式分布,例如经由因特网或其他有线或无线远程通信系统。
尽管已在附图和前面的描述中详细说明并描述了本发明,但这样的说明和描述被认为是说明性或示范性的而非限制性的;本发明不限于所公开的实施例。通过研究附图、说明书以及权利要求书,本领域技术人员在实施要求保护的本发明时能够理解并实现对所公开实施例的其他变型。在权利要求书中,词语“包括”不排除其他元件或步骤,并且量词“一”或“一个”不排除多个。权利要求书中的任何附图标记不得被解释为对范围的限制。
Claims (20)
1.一种基于医疗环境中的声音分析的医疗反馈系统(100),所述系统包括:
声音场景分析器(SSA,10),所述声音场景分析器被布置用于接收指示所述医疗环境中患者附近的声音的音频信号(AUD,2),并且能够分析并分类所述音频信号,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
声音水平分析器(SLA,20),所述声音水平分析器被布置用于接收指示患者附近的声音的音频信号(AUD,2),并且还被布置用于接收来自所述声音场景分析器的所述一个或多个声音源的列表,所述声音水平分析器能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,以及
声音分类器(SC,30),所述声音分类器被布置用于接收来自所述声音场景分析器的所述声音源的列表,并一起接收来自所述声音水平分析器的针对来自所述声音源的列表的对应声音的感知到的水平的所述指标,并且所述声音分类器还被布置用于至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成针对所分类的声音源中的一个或多个的关于至少可避免程度的反馈信号(FEED,50)。
2.根据权利要求1所述的医疗反馈系统(100),其中,所述声音场景分析器包括音频特征提取器和分类器算法。
3.根据权利要求2所述的医疗反馈系统(100),其中,所述音频特征提取器和所述分类器算法能够提取表示所述音频信号的物理、生理和/或心理特性的音频特征。
4.根据权利要求1所述的医疗反馈系统(100),其中,所述声音场景分析器能够至少部分地根据表示所述医疗环境的预定义声音源列表对所述音频信号进行分类。
5.根据权利要求3所述的医疗反馈系统(100),其中,所述列表包括以下声音事件或声音源中的一个或多个:
-讲话,包括患者间、医务人员间以及医务人员和患者间的讲话,
-由所述医疗环境中的监测和/或监督设备产生的警报,
-医疗仪器,
-脚步,
-内部建筑物部分的运动或位移,
-金属物体,
-计算机相关的事件,和/或,
-消费娱乐设备。
6.根据权利要求5所述的医疗反馈系统(100),其中,所述内部建筑物部分为门、窗、通风设备和家具。
7.根据权利要求5所述的医疗反馈系统(100),其中,所述计算机相关的事件为鼠标和键盘操作。
8.根据权利要求5所述的医疗反馈系统(100),其中,所述消费娱乐设备为音乐/视频播放设备和电视设备。
9.根据权利要求1所述的医疗反馈系统(100),其中,所述声音场景分析器能够基于在所述医疗环境中的至少最初执行的学习过程对音频信号进行分类。
10.根据权利要求1所述的医疗反馈系统(100),其中,所述声音水平分析器包括心理声学模型,以用于提供针对感知到的响度的所述指标。
11.根据权利要求1所述的医疗反馈系统(100),其中,所述声音分类器还被布置用于基于所述可避免程度确定是否从所述系统输出反馈信号。
12.根据权利要求1所述的医疗反馈系统(100),其中,所述声音分类器还被布置用于相对于所述声音源的估计烦扰对所述声音源的列表进行分类。
13.根据权利要求1所述的医疗反馈系统(100),其中,所述反馈信号还包括适当的行为修改信号,所述行为修改信号对应于所分类的声音源中的一个或多个。
14.根据权利要求1所述的医疗反馈系统(100),其中,所述声音分类器能够基于在所述医疗环境中至少最初执行的学习过程对所述一个或多个声音源的列表进行分类。
15.根据权利要求1所述的医疗反馈系统(100),其中,所述声音分类器被布置用于从所述医疗环境中的相关联的患者监测系统接收患者特异性信息,所述声音分类器使用所述患者特异性信息以至少相对于所述可避免程度进行分类。
16.根据权利要求1所述的医疗反馈系统(100),其中,所述反馈系统被布置用于利用第二多个麦克风监测第一多个患者,所述麦克风被布置用于与所述反馈系统通信。
17.根据权利要求1所述的医疗反馈系统(100),其中,所述反馈系统被布置用于与一个或多个反馈设备通信,所述反馈设备能由医务人员、访客和/或患者利用。
18.一种用于操作基于医疗环境中的声音分析的医疗反馈系统(100)的方法,所述方法包括:
提供声音场景分析器(SSA,10),所述声音场景分析器被布置用于接收指示所述医疗环境中患者附近的声音的音频信号,并且能够分析并分类所述音频信号,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
提供声音水平分析器(SLA,20),所述声音水平分析器被布置用于接收指示患者附近的声音的音频信号,并且还被布置用于接收来自所述声音场景分析器的所述一个或多个声音源的列表,所述声音水平分析器能够提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,并且
提供声音分类器(SC,30),所述声音分类器被布置用于接收来自所述声音场景分析器的所述声音源的列表,并一起接收来自所述声音水平分析器的针对来自所述声音源的列表的对应声音的感知到的水平的所述指标,并且所述声音分类器还被布置用于至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成针对所分类的声音源中的一个或多个的关于至少可避免程度的反馈信号。
19.一种基于医疗环境中的声音分析的医疗反馈方法,所述方法包括:
接收指示所述医疗环境中患者附近的声音的音频信号,并且对所述音频信号进行分析并分类,以便获得所述患者周围的所述医疗环境中的一个或多个声音源的列表,
提供针对来自所述声音源的列表的对应声音的感知到的水平的指标,并且
至少相对于可避免程度对医疗环境中的所述一个或多个声音源的列表进行分类,并且生成针对所分类的声音源中的一个或多个的关于至少可避免程度的反馈信号。
20.一种计算机可读介质,其上存储了计算机程序,所述计算机程序适于使得计算机系统能够根据权利要求18来控制基于医疗环境中的声音分析的医疗反馈系统(100),所述计算机系统包括至少一个计算机,所述至少一个计算机具有与其连接的数据存储器件。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161547912P | 2011-10-17 | 2011-10-17 | |
US61/547,912 | 2011-10-17 | ||
PCT/IB2012/055603 WO2013057652A2 (en) | 2011-10-17 | 2012-10-15 | A medical feedback system based on sound analysis in a medical environment |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103875034A CN103875034A (zh) | 2014-06-18 |
CN103875034B true CN103875034B (zh) | 2018-03-09 |
Family
ID=47227990
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280050835.7A Active CN103875034B (zh) | 2011-10-17 | 2012-10-15 | 基于医疗环境中的声音分析的医疗反馈系统 |
Country Status (7)
Country | Link |
---|---|
US (1) | US10080090B2 (zh) |
EP (1) | EP2748811B1 (zh) |
JP (1) | JP6158815B2 (zh) |
CN (1) | CN103875034B (zh) |
BR (1) | BR112014008951A2 (zh) |
IN (1) | IN2014CN02551A (zh) |
WO (1) | WO2013057652A2 (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9124981B2 (en) * | 2012-11-14 | 2015-09-01 | Qualcomm Incorporated | Systems and methods for classification of audio environments |
EP2787746A1 (en) | 2013-04-05 | 2014-10-08 | Koninklijke Philips N.V. | Apparatus and method for improving the audibility of specific sounds to a user |
US10114927B2 (en) | 2013-11-01 | 2018-10-30 | Koninklijke Philips N.V. | Apparatus and method for acoustic alarm detection and validation |
US9396632B2 (en) * | 2014-12-05 | 2016-07-19 | Elwha Llc | Detection and classification of abnormal sounds |
CN104575520A (zh) * | 2014-12-16 | 2015-04-29 | 中国农业大学 | 一种结合心理声学评价的声波监测装置及方法 |
RU2714173C2 (ru) * | 2014-12-16 | 2020-02-12 | Конинклейке Филипс Н.В. | Мониторинг воздействия на пациента фактора окружающей среды |
US20170367663A1 (en) * | 2014-12-18 | 2017-12-28 | Koninklijke Philips N.V. | Method and device for effective audible alarm settings |
EP3151535A1 (en) | 2015-09-29 | 2017-04-05 | Thomson Licensing | Plenoptic camera having an array of sensors for generating digital images and method of capturing an image using a plenoptic camera |
EP3151534A1 (en) | 2015-09-29 | 2017-04-05 | Thomson Licensing | Method of refocusing images captured by a plenoptic camera and audio based refocusing image system |
US10229573B1 (en) * | 2017-05-06 | 2019-03-12 | David Lawrie | Immediate alert for tracking movement via wireless tethered devices |
CN108648748B (zh) * | 2018-03-30 | 2021-07-13 | 沈阳工业大学 | 医院噪声环境下的声学事件检测方法 |
EP3775962A4 (en) | 2018-04-09 | 2022-01-05 | Well Checked Systems International LLC | SYSTEM AND METHOD OF PREDICTIVE MAINTENANCE BY AUTOMATIC LEARNING, VIA HEARING SENSING, ON NATURAL GAS COMPRESSORS |
EP3582514B1 (en) * | 2018-06-14 | 2023-01-11 | Oticon A/s | Sound processing apparatus |
US20220117518A1 (en) * | 2019-03-18 | 2022-04-21 | Cochlear Limited | System and method for tinnitus suppression |
CN110415724A (zh) * | 2019-08-08 | 2019-11-05 | 中南大学湘雅二医院 | 报警数据的传输方法、装置、系统及计算机可读存储介质 |
JP7372210B2 (ja) * | 2020-06-03 | 2023-10-31 | ヤフー株式会社 | 情報処理装置、情報処理方法および情報処理プログラム |
CN114023296A (zh) * | 2021-11-24 | 2022-02-08 | 中国航空工业集团公司上海航空测控技术研究所 | 环境噪声采集和分析测试系统 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3350713B2 (ja) | 2000-08-15 | 2002-11-25 | 神戸大学長 | 騒音源の種類を特定する方法、その装置および媒体 |
WO2002086792A2 (en) | 2001-04-23 | 2002-10-31 | Cardionet, Inc. | Correlation of sensor signals with subjective information in patient monitoring |
US7221260B2 (en) * | 2003-11-21 | 2007-05-22 | Honeywell International, Inc. | Multi-sensor fire detectors with audio sensors and systems thereof |
US7315244B2 (en) * | 2004-07-14 | 2008-01-01 | Carmichel Eric L | Excessive noise level alerting device |
JP5139319B2 (ja) | 2005-12-23 | 2013-02-06 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ストレッサーセンサ及びストレス管理システム |
US20070183604A1 (en) * | 2006-02-09 | 2007-08-09 | St-Infonox | Response to anomalous acoustic environments |
US8706183B2 (en) * | 2007-06-28 | 2014-04-22 | University Of Pittsburgh-Of The Commonwealth System Of Higher Education | Electrode systems, devices and methods |
US8515095B2 (en) * | 2007-10-04 | 2013-08-20 | Apple Inc. | Reducing annoyance by managing the acoustic noise produced by a device |
US8824691B2 (en) * | 2008-02-01 | 2014-09-02 | Honeywell International Inc. | Apparatus and method for monitoring sound in a process system |
JP5781926B2 (ja) * | 2008-06-17 | 2015-09-24 | コーニンクレッカ フィリップス エヌ ヴェ | 音声分類器とマイクロホンを用いる音響患者モニタリング |
-
2012
- 2012-10-15 EP EP12791560.1A patent/EP2748811B1/en active Active
- 2012-10-15 US US14/352,484 patent/US10080090B2/en active Active
- 2012-10-15 WO PCT/IB2012/055603 patent/WO2013057652A2/en active Application Filing
- 2012-10-15 JP JP2014535223A patent/JP6158815B2/ja active Active
- 2012-10-15 CN CN201280050835.7A patent/CN103875034B/zh active Active
- 2012-10-15 BR BR112014008951A patent/BR112014008951A2/pt not_active Application Discontinuation
- 2012-10-15 IN IN2551CHN2014 patent/IN2014CN02551A/en unknown
Non-Patent Citations (2)
Title |
---|
Noise levels and noise sources in acute care hospital wards;DJ MacKenzie et al;《Building Serv. Eng. Res. Technol.》;20071231;第28卷(第2期);第127页左栏第3段,第124页表2 * |
Noise Pollution in Intensive Care Units and Emergency Wards;Gholamreza Khademi et al;《Iranian Journal of Otorhinolaryngology》;20110930;第23卷(第4期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
US20140254808A1 (en) | 2014-09-11 |
IN2014CN02551A (zh) | 2015-08-07 |
WO2013057652A3 (en) | 2013-07-18 |
CN103875034A (zh) | 2014-06-18 |
JP2014530438A (ja) | 2014-11-17 |
WO2013057652A2 (en) | 2013-04-25 |
JP6158815B2 (ja) | 2017-07-05 |
EP2748811A2 (en) | 2014-07-02 |
US10080090B2 (en) | 2018-09-18 |
BR112014008951A2 (pt) | 2017-05-02 |
EP2748811B1 (en) | 2017-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103875034B (zh) | 基于医疗环境中的声音分析的医疗反馈系统 | |
CN103874462B (zh) | 基于医疗环境中的声音分析的医疗监测系统 | |
CN107683399B (zh) | 声音输出装置、电子装置、以及其控制方法 | |
US20200312321A1 (en) | In-ear nonverbal audio events classification system and method | |
US9232904B2 (en) | Electroencephalogram recording apparatus, hearing aid, electroencephalogram recording method, and program thereof | |
Hartelius et al. | Long-term phonatory instability in individuals with multiple sclerosis | |
JP7422801B2 (ja) | 脳波データ分析方法及び脳波測定検査のための情報の呈示方法 | |
Tremblay et al. | The neural representation of consonant-vowel transitions in adults who wear hearing aids | |
CN116057627A (zh) | 提供用于自动婴幼儿啼哭评估的数据的计算机实施的方法 | |
US20120112909A1 (en) | Binaural audio signal-based applications | |
Denk et al. | Event-related potentials measured from in and around the ear electrodes integrated in a live hearing device for monitoring sound perception | |
US11189265B2 (en) | Systems and methods for assisting the hearing-impaired using machine learning for ambient sound analysis and alerts | |
Kestens et al. | The effect of cognition on the aided benefit in terms of speech understanding and listening effort obtained with digital hearing aids: a systematic review | |
CN114830691A (zh) | 包括压力评估器的听力设备 | |
Yellamsetty et al. | A comparison of environment classification among premium hearing instruments | |
Tremblay et al. | How neuroscience relates to hearing aid amplification | |
Beltrán et al. | Recognition of audible disruptive behavior from people with dementia | |
US20210026449A1 (en) | Neurofeedback focus and productivity system, process, and method of use | |
Petersen | Hearing-aid directionality improves neural speech tracking in older hearing-impaired listeners | |
CN114466298B (zh) | 基于多感官数据的声音调控装置及应用其的调控设备 | |
Nisha | Applications of Electroencephalography (EEG) in Neuro-Steered Hearing Aids: A scoping review | |
Tordini | Brightness and Tempo in Foreground/Background Selection with Loudness-Equalized Audio Streams | |
Budathoki | Time required to classify different sound types and their relation to hearing ability and speech understanding in noise | |
KR20210002400U (ko) | 뇌파인식시스템 | |
KR20210002509U (ko) | 뇌파인식시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |