WO2010142409A1 - Verfahren und einrichtung zur überwachung der hirnaktivität eines menschen - Google Patents
Verfahren und einrichtung zur überwachung der hirnaktivität eines menschen Download PDFInfo
- Publication number
- WO2010142409A1 WO2010142409A1 PCT/EP2010/003413 EP2010003413W WO2010142409A1 WO 2010142409 A1 WO2010142409 A1 WO 2010142409A1 EP 2010003413 W EP2010003413 W EP 2010003413W WO 2010142409 A1 WO2010142409 A1 WO 2010142409A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- brain activity
- person
- signal
- signals
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/372—Analysis of electroencephalograms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
- A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
- A61B5/0006—ECG or EEG signals
Definitions
- the invention relates to a method and a device for monitoring the brain activity of a human, in particular for the purpose of increasing safety in industrial plants.
- BMI brain-machine interfaces
- human-machine interfaces brain-computer interfaces or sometimes as brain-machine interfaces.
- brain-machine interfaces Numerous proposals for the use of brain signals for the control of technical devices can be found in this literature, mainly in the field of brain-actuated technology or brain-operated technologies, neuropathies and neurorobots.
- Brain-machine interfaces work with acquisition and processing of brain signals in real time, for the purpose of using the information obtained to control a technical device. Especially for medical applications, such possibilities are examined, for example, to use neuronal signals of a human with an intact motor cortex for real-time control of a prosthetic robotic arm (see: Velliste M, Perel S, Spalding MC, Whitford AS, Schwartz AB: Cortical control of a prosthetic arm for self-feeding, Nature 2008 Jun 19; 453 (7198): 1098-101).
- the main challenge for brain-machine interfaces is the interpretation of complex brain activity patterns to associate with a particular action or process.
- NIRS near infrared spectroscopy
- MEG Magnetoencephalography
- fMRI Functional magnetic resonance imaging
- EEG electroencephalography
- EEG brainwave measurement
- EEG signal is an extracellular current caused by cerebral electrical activity.
- cerebral current recordings In general, EEG signals are suitable for use in brain-machine interfaces (BMIs) (see: Wolpaw JR, Birbaumer N, McFarland DJ, Pfurtscheller G, Vaughan TM) in large areas of the cerebral cortex Brain-computer interfaces for communication and control, Clinical Neurophysiol 2002 Jun; 113 (6): 767-91).
- scalp-detected brainwaves can be used as part of the development of a mobile device to detect alertness or alertness (see: Ben Califa K: Portable Device for Alertness Detection.) Annual Annual IEEEEMBS Special Topic Conference on Microtechnologies in Medicine & Biology 2000: 584-6).
- WO 2006/096096135 A1 discloses a method for detecting mental fatigue by monitoring brain activity.
- DE 197 02 748 A1 describes a method for monitoring the condition of a vehicle driver by brainwave measurement and possibly also observation of head posture, musculature or respiration.
- US 20070010754 A1 proposes a method for measuring the brainwave flow of at least one vehicle occupant, preferably the driver, in order to detect the intention and, if appropriate, to influence the state of the vehicle.
- the invention has the object to provide a method and a device to detect a change of human brain activity as a result of particular significant anxiety, extreme attention or panic. Signals thus formed can be used in particular to increase the safety of industrial equipment or systems.
- the detected signals are processed by means of a portable, wearable device and analyzed and interpreted and then transmitted by telemetry to an interface device, influenced by a technical process, for example, can be turned off, or the detected signals are first transmitted to a receiving device , then processed and analyzed and interpreted, and then transmitted by telemetry to an interface device from which a technical process can be influenced, for example disconnected.
- the basic process steps are identical, only the order or sequence is different.
- the invention relates to a method for monitoring the brain activity of a person and / or formation of at least one signal for acting on a technical device in the event of a mental state of emergency, in particular a considerable state of anxiety and / or extreme attention and / or panic, at least one person, in which
- Brain activities are recorded, in particular using a non-invasive or minimally invasive electrophysiological method
- the transmitted brain activity signals in particular by means of real-time processing, are processed, analyzed and classified in terms of cha characteristic brain activity pattern for the detection of mental states of emergency, such as in particular unusual stress and / or anxiety and / or panic, the signal supplying each person, in both cases the results of this signal analysis are forwarded by the receiving device via an interface device to a device or a system, to cause, if necessary, a change of state of such a device as a security measure or information for the respective person,
- the invention comprises a device for monitoring the brain activity of a person and / or forming at least one signal for acting on a technical device in the case of a mental state of emergency, in particular a considerable state of anxiety and / or extreme attention and / or panic, at least one person, in which
- An interface device (10) is present, by means of which the results are forwarded to a device or a system to cause, if necessary, a change in state of such a technical device.
- the invention is based on the consideration that in the human brain, a preprocessing of a variety of data takes place through the use of the Total cost of implementing a monitoring device to increase the safety of operating personnel can be kept relatively low.
- Human sensory organs such as eyes, ears, nose and skin respond to a variety of environmental influences. Signals are directed to the brain and processed there, with filtering and prioritizing based on experience and instinct. Even merely instinctive perceptions can lead to anxiety, panic, or stressful alertness, generally causing a changed neuronal condition resulting in increased brain activity.
- the invention proposes to use precisely this increased brain activity to detect or recognize dangerous situations by detecting the increased brain activity by using a noninvasive or minimally invasive electrophysiological method, preferably by using multichannel EEG.
- the detected brain activity can be further interpreted and finally used to control technical facilities. Because of the fast reaction thus enabled, the safety of the person supplying the BMI EEG signals or other persons in the environment can be increased significantly.
- a worker cooperating with a robot could be protected against injuries / hazards by the machine, for example in the case of occurring stress due to misconduct of the robot and / or a person and / or a dangerous situation and / or physical complaints, for example due to heart attack or stroke or fall if, due to the detected With respect to signals directly and / or automatically a shutdown and / or a stop of the respective robot is effected.
- the individual person could be used in itself, for example, in a chemical production plant as a kind of additional sensor for supposedly dangerous plant states, which could ultimately lead to a shutdown of the respective system.
- Fig. 1 shows schematically required components of the embodiment and the associated exemplary process flow.
- Reference numeral 11 designates the components to be worn on a human body.
- a non-invasive electrophysiological method for example by means of the device 2 operating according to the multichannel or multi-channel EEG method, brain activities 1 of the human are recorded.
- the human brain acts as a collection point for a variety of sensor signals of the human body. Both rationally planned, as well as instinctive decisions, as well as reactions are processed in the brain and lead in certain situations to an increased neural activity.
- 3 denoted by 3 in FIG.
- the acquired measuring signals are supplied to a signal conditioning unit 4 as well as to a sophisticated real-time processing unit 5, which analyzes and classifies according to characteristic activity patterns in order to detect an unusual stress situation, anxiety or panic from the object that the human being observes is triggered and leads to the detected measurement signals.
- Analysis results are wireless, see reference numeral 7, by means of a transmitting device 6, z.
- B. a real-time telemetry transmitter and an associated tele-metry receiver 8 or a gateway, and transmitted with transmission means 9 to a device or a technical system 10, for example, a guide or a robot controller.
- the proposed method or device for detecting certain brain activities can significantly increase safety in industrial plants, eg. In connection with factory or process automation equipment. Real-time acquisition of neurophysiological signals can significantly contribute to controlling critical functions and conditions of technical installations, for example by emergency shutdown. This also works if a person who is equipped with the monitoring device according to the invention is not directly aware of a danger, or is unable to react adequately or quickly enough.
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Psychiatry (AREA)
- Surgery (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Psychology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Social Psychology (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
Die Erfindung bezieht sich auf ein Verfahren und eine entsprechende Einrichtung zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Fall eines psychischen Ausnahmezustandes, wie beispeislweise eins erheblichen Angstzustandes, extremer Aufmerksamkeit oder Panik wenigstens eines Menschen, wobei, insbesondere unter Anwendung einer nichtinvasiven elektrophysiologischen Methode, Hirnaktivitäten erfasst werden, erfasste Signale aufbereitet, analysiert und klassifiziert hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie ungewöhnlichem Stress, von Angst oder Panik, des jeweilig signalliefernden Menschen und die Ergebnisse dieser Signalanalyse mittels Messwertfernübertragung zu einer Empfangseinrichtung übertragen werden. Alternativ sind die erfassten Hirnaktivitäten zunächst auch zu einer Empfangseinrichtung übertragbar, wobei die übertragenen Hirnaktivitätssignale dann anschließend aufbereitet, analysiert und klassifiziert werden. Von der Empfangseinrichtung werden die Ergebnisse über eine Schnittstelleneinrichtung zu einem Gerät oder einer Anlage weitergeleitet, um gegebenenfalls eine Zustandsänderung einer solchen Einrichtung zu veranlassen.
Description
Verfahren und Einrichtung zur Überwachung der Hirnaktivität eines Menschen
Beschreibung
Die Erfindung bezieht sich auf ein Verfahren und eine Einrichtung zur Überwachung der Hirnaktivität eines Menschen, insbesondere zum Zweck der Erhöhung der Sicherheit in Industrieanlagen.
In den letzten Jahren sind zahlreiche Veröffentlichungen zu brain-machine interfaces (BMI) erschienen, die auch als Mensch-Maschine-Schnittstellen, Gehirn-Computer- Schnittstellen oder manchmal als Hirn-Maschine-Schnittstellen bezeichnet werden. Dieser Literatur sind vielfältige Vorschläge zur Nutzung von Gehirnsignalen zur Steuerung technischer Einrichtungen zu entnehmen, hauptsächlich auf dem Gebiet der brain-actuated technology oder Gehim-betätigten Technologien, der Neuropro- thesen und Neuroroboter.
Brain-machine interfaces arbeiten mit einer Erfassung und Verarbeitung von Gehirnsignalen in Echtzeit, zum Zweck der Nutzung der ermittelten Information zur Steuerung einer technischen Einrichtung. Insbesondere für medizinische Anwendungen werden solche Möglichkeiten untersucht, beispielsweise um neuronale Signale eines Menschen mit intaktem Motorkortex zur Echtzeit-Steuerung eines prothetischen Roboterarms zu nutzen (vergl.: Velliste M, Perel S, Spalding MC, Whitford AS, Schwartz AB: Cortical control of a prosthetic arm for self-feeding. Nature 2008 Jun 19;453(7198):1098-101). Neben Hilfen zur Wiedererlangung von motorischen Funktionen eines Menschen sind auch andere klinische Anwendungen von Interesse, wie
beispielsweise zur Diagnose und Behandlung epileptischer Anfälle (vergl.: Nicoleiis MA: Actions from thoughts. Nature 2001 Jan 18;409(6818):403-7).
Die hauptsächliche Herausforderung für brain-machine interfaces ist die Interpretation komplexer Gehirnaktivitäts-Muster, um sie einer bestimmten Aktion oder einem Prozess zuzuordnen. Dazu ist ein fundamentales Verständnis der Prinzipien erforderlich, nach denen neuronale Gebilde sensorische, motorische und kognitive Information entschlüsseln, um komplexe Steuerungen technischer Einrichtungen zu ermöglichen. Bisher wird diese Aufgabe meistens durch intrakraniale Messungen, also durch Messungen im Schädelinneren mittels einer Anordnung chirurgisch implantierter Mikroelektroden gelöst (vergl.: Nicoleiis MA, Ghazanfar AA, Stambaugh CR, ON- veira LM, Laubach M, Chapin JK, Nelson RJ, Kaas JH: Simultaneous encoding of tactile information by three primate cortical areas. Nature Neurosci. 1998 Nov;1(7):621-30). Damit ist eine simultane Erfassung extrazellularer Aktivitäten von Anordnungen individueller Neuronen möglich, verteilt über mehrere Gehirnstrukturen.
Nichtinvasive Erfassung menschlicher Neuronenaktivität ist jedoch auch eine potentielle Möglichkeit zur Realisierung von brain-machine interfaces. Eine Reihe unterschiedlicher metabolischer, optischer und elektro-physikalischer Methoden ist bereits untersucht worden. Mittels Nahinfrarotspektroskopie (NIRS, near infrared spectros- copy) können Änderungen von Hämoglobinkonzentrationen im Blut durch einen intakten Schädel hindurch detektiert werden, mittels Magnetoencephalographie (MEG) können magnetische Felder gemessen werden, die im Gehirn durch neuro- elektrische Aktivitäten erzeugt werden. Funktionelle Magnetresonanztomographie (fMRI, functional magnetic resonance imaging) ermöglicht die Messung der hämody- namischen Reaktion auf neuronale Aktivitäten des Gehirns.
Obwohl alle diese Techniken grundsätzlich nichtinvasiv sind, sind sie für einen portablen Einsatz ungeeignet, und der technische Aufwand ist groß. Wohingegen mittels Elektroenzephalographie (scalp electroencephalography, EEG, Hirnstrommessung) durch neuronale Stimulation hervorgerufene elektrische Aktivität mit ziemlich kompakten Geräten außerhalb des menschlichen Kopfes gemessen werden kann. Das EEG-Signal ist ein extrazellulärer Strom, der durch zerebrale elektrische Aktivität hervorgerufen wird. Obwohl solche Hirnstromaufzeichnungen das Durchschnittsver-
halten einer großen Anzahl von Neuronen in weit verteilten Gebieten der Hirnrinde wiedergeben, sind EEG-Signale grundsätzlich zur Nutzung für brain-machine inter- faces (BMIs) geeignet (vergl.: Wolpaw JR, Birbaumer N, McFarland DJ, Pfurtscheller G, Vaughan TM: Brain-computer interfaces for communication and control. Clinlcal Neurophysiol. 2002 Jun;113(6):767-91). Beispielsweise können an der Kopfhaut er- fasste Hirnströme im Rahmen der Entwicklung einer mobilen Einrichtung zum Erkennen von Wachheit oder Aufmerksamkeit genutzt werden (vergl.: Ben Califa K: A portable device for alertness detection. Ist Annual International IEEEEMBS Special Topic Conference on Microtechnologies in Medicine & Biology 2000:584-6).
Eine Reihe von Patentanmeldungen sind bekannt, die sich im Hinblick auf Sicherheitsaspekte mit der Messung der Wachsamkeit von Menschen befassen. Aus WO 2006/096096135 A1 ist eine Methode zur Erkennung einer geistigen Ermüdung durch Überwachung von Hirnaktivitäten bekannt. DE 197 02 748 A1 beschreibt ein Verfahren zum Überwachen des Zustandes eines Fahrzeugführers durch Hirnstrommessung und gegebenenfalls auch Beobachtung von Kopfhaltung, Muskulatur oder Atmung. In US 20070010754 A1 wird ein Verfahren zur Hirnstrommessung wenigstens eines Fahrzeuginsassen, vorzugsweise des Fahrers vorgeschlagen, um die Intention zu erfassen und gegebenenfalls auf den Zustand des Fahrzeugs einzuwirken.
Ausgehend vom dargelegten Stand der Technik, liegt der Erfindung die Aufgabe zugrunde, ein Verfahren und eine Einrichtung anzugeben, um eine Änderung von menschlichen Hirnaktivitäten als Folge insbesondere erheblicher Angst, extremer Aufmerksamkeit oder Panik zu detektieren. Damit gebildete Signale können insbesondere zur Erhöhung der Sicherheit bei industriellen Geräten oder Anlagen genutzt werden.
Diese Aufgabe wird gelöst durch ein Verfahren zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes eines Menschen, wie insbesondere erheblicher Angst, extremer Aufmerksamkeit oder Panik eines Menschen, das die im Anspruch 1 angegebenen Merkmale aufweist. Vorteilhafte Ausgestaltungen und eine entsprechende Einrichtung sind in weiteren Ansprüchen und der nachfolgenden Beschreibung angegeben.
Mit der Erfindung wird demnach vorgeschlagen, nichtinvasiv, also außen am Kopf eines Menschen mittels Elektroden Signale zu erfassen, die durch erhöhte Hirnaktivität verursacht sind. Die erfassten Signale werden mittels einer portablen, am Körper tragbaren Einrichtung verarbeitet und analysiert und interpretiert und daraufhin mittels Telemetrie zu einer Schnittstelleneinrichtung übertragen, von der aus ein technischer Prozess beeinflusst, beispielsweise abgeschaltet werden kann, oder aber die erfassten Signale werden zunächst an eine Empfangseinrichtung übertragen, dann verarbeitet und analysiert und interpretiert und daraufhin mittels Telemetrie zu einer Schnittstelleneinrichtung übertragen, von der aus ein technischer Prozess beeinflusst, beispielsweise abgeschaltet werden kann. Die grundlegenden Verfahrensschritte sind dabei identisch, lediglich die Reihenfolge beziehungsweise Abfolge unterscheidet sich.
Demgemäß betrifft die Erfindung ein Verfahren zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes, wie insbesondere eines erheblichen Angstzustandes und/oder extremer Aufmerksamkeit und/oder Panik, wenigstens eines Menschen, bei welchem
- Hirnaktivitäten erfasst werden, insbesondere unter Anwendung einer nichtinvasiven oder minimal-invasiven elektrophysiologischen Methode,
- derart in Signalform erfasste Hirnaktivitäten, insbesondere mittels Echtzeitverarbeitung, aufbereitet, analysiert und klassifiziert werden hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder Angst und/oder oder Panik, des jeweils signalliefernden Menschen,
- Ergebnisse dieser Signalanalyse mittels Messwertfernübertragung zu einer Empfangseinrichtung übertragen werden, sowie alternativ ein Verfahren, bei welchem
- in Signalform erfasste Hirnaktivitäten zunächst mittels Messwertfernübertragung zu einer Empfangseinrichtung übertragen werden und dann
- die übertragenen Hirnaktivitätssignale, insbesondere mittels Echtzeitverarbeitung, aufbereitet, analysiert und klassifiziert werden hinsichtlich cha-
rakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder Angst und/oder oder Panik, des jeweils signalliefernden Menschen, wobei bei beiden Verfahrensausprägungen die Ergebnisse dieser Signalanalyse von der Empfangseinrichtung über eine Schnittstelleneinrichtung zu einem Gerät oder einer Anlage weitergeleitet werden, um gegebenenfalls eine Zustandsänderung einer solchen Einrichtung als Sicherheitsmaßnahme oder Hinweise für den jeweiligen Menschen zu veranlassen,
Weiterhin umfasst die Erfindung eine Einrichtung zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes, wie insbesondere eines erheblichen Angstzustandes und/oder extremer Aufmerksamkeit und/oder Panik, wenigstens eines Menschen, wobei
- Mittel (2) zur Erfassung von Hirnaktivitäten, insbesondere unter Anwendung einer nichtinvasiven oder minimal-invasiven elektrophysiologischen Methode, vorhanden sind,
- Mittel (4, 5) zur Echtzeitverarbeitung und/oder Aufbereitung und/oder Analyse und/oder Klassifizierung erfasster und/oder übertragener Hirnaktivitätssignale hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder von Angst und/oder Panik des jeweils signalliefernden Menschen vorhanden sind,
- eine Einrichtung (6, 8) zur Messwertfernübertragung der erfassten Hinrak- tivitätssignale und/oder der Ergebnisse der Signalanalyse zu einer Empfangseinrichtung vorhanden ist, und
- eine Schnittstelleneinrichtung (10) vorhanden ist, mittels der die Ergebnisse zu einem Gerät oder einer Anlage weitergeleitet werden, um gegebenenfalls eine Zustandsänderung einer solchen technischen Einrichtung zu veranlassen.
Dabei liegt der Erfindung die Überlegung zugrunde, dass im menschlichen Gehirn eine Vorverarbeitung einer Vielzahl von Daten stattfindet, durch deren Nutzung der
Gesamtaufwand zur Realisierung einer Überwachungseinrichtung zur Erhöhung der Sicherheit von Betriebspersonal relativ gering gehalten werden kann. Menschliche Sinnesorgane, wie Augen, Ohren, die Nase und die Haut reagieren auf eine Vielzahl von Einflüssen aus der Umgebung. Es werden Signale zum Hirn geleitet und dort verarbeitet, wobei bereits eine Filterung und Priorisierung aufgrund von Erfahrung und Instinkt stattfindet. Selbst lediglich instinktive Wahrnehmungen können zu Angstzuständen, Panik oder stressiger Wachsamkeit führen, die allgemein einen geänderten neuronalen Zustand hervorrufen, der in einer gesteigerten Hirnaktivität resultiert. Mit der Erfindung wird vorgeschlagen, eben diese gesteigerte Hirnaktivität zur Erfassung oder Erkennung von Gefahrensituationen zu nutzen, und zwar durch detektieren der gesteigerten Hirnaktivität durch Anwendung einer nichtinvasiven oder minimal-invasiven elektrophysiologischen Methode, vorzugsweise durch Anwendung von Multichannel-EEG. Durch Weiterverarbeitung der erfassten Hirnaktivität unter Anwendung von bekannten Methoden zur schnellen Erkennung charakteristischer EEG-Signalmuster, insbesondere in höheren Frequenzbändern (beta waves), kann die erfasste Hirnaktivität weiter interpretiert und schließlich genutzt werden zur Steuerung technischer Einrichtungen. Aufgrund der so ermöglichten schnellen Reaktion kann vorteilhaft die Sicherheit der Person, die die BMI-EEG-Signale liefert, oder auch weiterer Personen im Umfeld deutlich erhöht werden.
Es versteht sich, dass auf diese Weise nicht nur die Sicherheit von z. B. Betriebspersonal erhöht wird, sondern auch industrielle Anlagen geschützt werden können. Ein Anwendungsbeispiel für eine solche Überwachungseinrichtung wäre die Ausrüstung von Betriebspersonal in chemischen oder nuklearen Anlagen mit einer erfindungsgemäßen Überwachungseinrichtung. Im Fall einer Panik bei einem oder mehreren Arbeitern könnte ein schneller Alarm ausgelöst werden, sogar dann, wenn kein Arbeiter bewusst eine Aktion veranlasst.
Als weiteres Anwendungsbeispiel könnte ein mit einem Roboter kooperierender Arbeiter vor Verletzungen/Gefährdungen durch die Maschine geschützt werden, bei- pielsweise bei auftretenden Stress aufgrund von Fehlverhalten des Roboters und/oder eines Menschen und/oder einer Gefahrensituation und/oder bei körperlichen Beschwerden, beispielsweise aufgrund eines Herzinfaktes oder Schlaganfalles oder Sturzes, wenn aufgrund der erfassten Hinraktivität beziehungsweise der dies-
bezüglichen Signale unmittelbar und/oder automatisch eine Abschaltung und/oder ein Stop des jeweiligen Roboters bewirkt wird.
Auch könnte der jeweilige Mensch an sich in beispielsweise einer chemischen Produktionsanlage als eine Art zusätzlicher Sensor für vermeintlich gefährliche Anlagen- zustände genutzt werden, die letztlich zu einer Abschaltung der jeweiligen Anlage führen könnten.
In einer Weiterbildung der Erfindung besteht die Möglichkeit die Signale mehrerer Menschen, beispielsweise einer Arbeitsgruppe, in Zusammenschau auszuwerten und eine Entscheidung über die weitere Vorgehensweise, insbesondere Abschaltung der Anlage, vom Zustand dieses Kollektivs abhängig zu machen.
Dabei könnte beispielsweise ausgewertet werden, ob sich lediglich eine einzelne Person oder gar mehrere Personen in einem psychischen Ausnahmezustand befinden und/oder beispielsweise anzahlabhängig zwischen meheren zur Verfügung stehenden Maßnahmen und/oder mehrere Maßnahmen selektiert werden.
Eine weitere Erläuterung der Erfindung und deren Vorteile ergeben sich aus der nachstehenden Beschreibung eines Ausführungsbeispiels anhand der Zeichnungsfigur 1.
Fig. 1 zeigt schematisiert erforderliche Komponenten des Ausführungsbeispiels und den zugehörigen beispielhaften Verfahrensablauf. Mit Bezugszeichen 11 sind die am Körper eines Menschen zu tragenden Komponenten bezeichnet. Mittels einer nichtinvasiven elektrophysiologischen Methode, beispielsweise nach dem Multichannel- oder auch Vielkanal -EEG-Verfahren arbeitenden Einrichtung 2 werden Hirnaktivitäten 1 des Menschen erfasst. Das Gehirn des Menschen wirkt als Sammelpunkt für eine Vielzahl von Sensorsignalen des menschlichen Körpers. Sowohl rational geplante, als auch instinktive Entscheidungen, sowie Reaktionen werden im Gehirn verarbeitet und führen in bestimmten Situationen zu einer gesteigerten neuronalen Aktivität.
Im nächsten, in Fig. 1 mit 3 bezeichneten Schritt werden die erfassten Messsignale einer Signalaufbereitung 4, sowie einer hochentwickelten Echtzeit- Verarbeitungseinrichtung 5 zugeführt, womit eine Analyse und Klassifizierung nach charakteristischen Aktivitätsmustern erfolgt, um eine ungewöhnliche Stresssituation, Angst oder Panik zu erkennen, die vom Objekt, das der Mensch beobachtet, ausgelöst wird und zu den erfassten Messsignalen führt.
Analyse-Ergebnisse werden drahtlos, vergl. Bezugszeichen 7, mittels einer Sendeeinrichtung 6, z. B. eines Echtzeit-Telemethesenders und eines zugehörigen TeIe- metrie-Empfängers 8 oder eines Gateway übertragen, und mit Übertragungsmitteln 9 weitergeleitet zu einem Gerät oder eine technische Anlage 10, beispielsweise eine Leiteinrichtung oder eine Robotersteuerung.
Das vorgeschlagene Verfahren, bzw. die Einrichtung zur Erfassung bestimmter Hirnaktivitäten kann die Sicherheit in Industrieanlagen deutlich erhöhen, z. B. in Verbindung mit Einrichtungen der Fabrik- oder Prozessautomation. Eine Echtzeiterfassung neurophysiologischer Signale kann wesentlich dazu beitragen kritische Funktionen und Zustände technischer Anlagen zu beherrschen, beispielsweise durch Notabschaltung. Das funktioniert auch dann, wenn eine Person, die mit der erfindungsgemäßen Überwachungseinrichtung ausgerüstet ist, sich nicht direkt einer Gefahr be- wusst ist, oder nicht in der Lage ist, adäquat oder schnell genug zu reagieren.
Im Rahmen der Erfindung liegt auch die Möglichkeit des Einbezugs weiterer menschlicher Reaktionen auf Gefahrensituationen, wie z. B. die Erfassung von anderen physiologischen Signalen, wie erhöhte Transpiration oder Pulsfrequenz. Solche Signale sind relativ einfach zu erfassen, beispielsweise mittels Sensoren in einer Computermaus. Außerdem können erfasste Hirnaktivitäten und andere erfasste Signale auch zu anderen Zwecken als zur Sicherheitserhöhung genutzt werden, beispielsweise auch zur Änderung von Eigenschaften einer technischen Anlage oder zum Aufruf von Hilfen oder Hinweisen für Wartenpersonal.
Claims
1. Verfahren zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes, wie insbesondere eines erheblichen Angstzustandes und/oder extremer Aufmerksamkeit und/oder Panik, wenigstens eines Menschen, wobei
Hirnaktivitäten, insbesondere unter Anwendung einer nichtinvasiven elektrophysiologischen Methode, erfasst werden,
- derart in signalform erfasste Hirnaktivitäten, insbesondere mittels Echtzeitverarbeitung, aufbereitet, analysiert und klassifiziert werden hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder Angst und/oder oder Panik, des jeweilig signalliefernden Menschen,
Ergebnisse dieser Signalanalyse mittels Messwertfernübertragung zu einer Empfangseinrichtung übertragen werden, und
- von dort über eine Schnittstelleneinrichtung zu einem Gerät oder einer Anlage weitergeleitet werden, um gegebenenfalls eine Zustandsänderung einer solchen Einrichtung als Sicherheitsmaßnahme oder Hinweise für den jeweiligen Menschen zu veranlassen.
2. Verfahren zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes, wie insbesondere eines erheblichen Angstzustandes und/oder extremer Aufmerksamkeit und/oder Panik, wenigstens eines Menschen, wobei
- Hirnaktivitäten, insbesondere unter Anwendung einer nichtinvasiven elektrophysiologischen Methode, erfasst werden, - derart in Signalform erfasste Hirnaktivitäten mittels Messwertfernübertragung zu einer Empfangseinrichtung übertragen werden,
- die übertragenen Hirnaktivitätssignale, insbesondere mittels Echtzeitverarbeitung, aufbereitet, analysiert und klassifiziert werden hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder Angst und/oder oder Panik, des jeweils signalliefernden Menschen, und
- Ergebnisse dieser Signalanalyse von dort über eine Schnittstelleneinrichtung zu einem Gerät oder einer Anlage weitergeleitet werden, um gegebenenfalls eine Zustandsänderung einer solchen Einrichtung als Sicherheitsmaßnahme oder Hinweise für den jeweiligen Menschen zu veranlassen.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass als elektrophysiologische Methode Vielkanal-EEG verwendet wird.
4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass bei der Echtzeitverarbeitung der erfassten Signale und zur schnellen Erkennung charakteristischer EEG-Signalmuster besonders solche in höheren Frequenzbändern (beta waves) interpretiert werden.
5. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass weitere physiologische Signale, insbesondere erhöhte Transpiration oder Pulsfrequenz erfasst und mit den durch Erfassung und Auswertung von Hirnaktivitäten gebildeten Signalen verknüpft werden.
6. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass weitere physiologische Signale, insbesondere erhöhte Transpiration oder Pulsfrequenz erfasst und mit den durch Erfassung und Auswertung von Hirnaktivitäten gebildeten Signalen verknüpft werden.
7. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass die Signale mehrerer Menschen, insbesondere einer Ar- beitsgruppe, in Zusammenschau analysiert und/oder ausgewertet werden und/oder eine Entscheidung über die weitere Vorgehensweise vom Zustand dieses Kollektivs abhängig gemacht wird.
8. Einrichtung zur Überwachung der Hirnaktivität eines Menschen und/oder Bildung wenigstens eines Signals zur Einwirkung auf eine technische Einrichtung im Falle eines psychischen Ausnahmezustandes, wie insbesondere eines erheblichen Angstzustandes und/oder extremer Aufmerksamkeit und/oder Panik, wenigstens eines Menschen, wobei
Mittel (2) zur Erfassung von Hirnaktivitäten, insbesondere unter Anwendung einer nichtinvasiven elektrophysiologischen Methode, vorhanden sind,
Mittel (4, 5) zur Echtzeitverarbeitung und/oder Aufbereitung und/oder Analyse und/oder Klassifizierung erfasster und/oder übertragener Hirnaktivitätssignale hinsichtlich charakteristischer Hirnaktivitätsmuster zur Erkennung von psychischen Ausnahmezuständen, wie insbesondere ungewöhnlichem Stress und/oder von Angst und/oder Panik des jeweils signalliefernden Menschen vorhanden sind,
- eine Einrichtung (6, 8) zur Messwertfernübertragung der erfassten Hinrak- tivitätssignale und/oder der Ergebnisse der Signalanalyse zu einer Empfangseinrichtung vorhanden ist, und
- eine Schnittstelleneinrichtung (10) vorhanden ist, mittels der die Ergebnisse zu einem Gerät oder einer Anlage weitergeleitet werden, um gegebenenfalls eine Zustandsänderung einer solchen technischen Einrichtung zu veranlassen.
9. Einrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die verwendete elektrophysiologische Methode Vielkanal-EEG ist.
10. Einrichtung nach einem der Ansprüche 8 oder 9, dadurch gekennzeichnet, dass die Mittel (4, 5) zur Echtzeitverarbeitung der erfassten Signale und zur schnellen Erkennung charakteristischer EEG-Signalmuster dafür eingerichtet sind, besonders solche in höheren Frequenzbändern (beta wa- ves) zu interpretieren.
11. Einrichtung nach einem der Ansprüche 8 bis 10, dadurch gekennzeichnet, dass die technische Einrichtung, deren Zustand gegebenenfalls geändert wird, eine Einrichtung im Bereich der Fabrik- oder Prozessautomatisierung, oder eine Kraftwerksanlage oder chemische Produktionsanlage oder eine sonstige Industrieanlage ist.
12. Einrichtung nach einem der Ansprüche 8 bis 11 , dadurch gekennzeichnet, dass die technische Einrichtung, auf die gegebenenfalls eingewirkt wird, eine Leiteinrichtung oder eine Robotersteuerung ist.
13. Einrichtung nach einem der Ansprüche 8 bis 12, dadurch gekennzeichnet, dass Mittel vorhanden sind, mit deren Hilfe weitere physiologische Signale, insbesondere erhöhte Transpiration oder Pulsfrequenz erfassbar und mit den durch Erfassung und Auswertung von Hirnaktivitäten gebildeten Signalen verknüpfbar sind.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102009024866.8 | 2009-06-09 | ||
| DE102009024866A DE102009024866A1 (de) | 2009-06-09 | 2009-06-09 | Verfahren und Einrichtung zur Überwachung der Hirnaktivität eines Menschen |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2010142409A1 true WO2010142409A1 (de) | 2010-12-16 |
Family
ID=42790632
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/EP2010/003413 Ceased WO2010142409A1 (de) | 2009-06-09 | 2010-06-08 | Verfahren und einrichtung zur überwachung der hirnaktivität eines menschen |
Country Status (2)
| Country | Link |
|---|---|
| DE (1) | DE102009024866A1 (de) |
| WO (1) | WO2010142409A1 (de) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107440714A (zh) * | 2017-09-07 | 2017-12-08 | 哈尔滨理工大学 | 一种专注度及眨眼动作提取装置及方法 |
| CN113039507A (zh) * | 2018-08-30 | 2021-06-25 | 西门子（中国）有限公司 | 用于安全控制的脑机接口装置以及机器人系统 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102012217645A1 (de) * | 2012-09-27 | 2014-03-27 | Siemens Aktiengesellschaft | Verfahren zu einer Erfassung eines emotionalen Zustands eines Patienten sowie eine medizinische Bildgebungsvorrichtung zu einer Ausführung des Verfahrens |
| DE102019217447A1 (de) * | 2019-11-12 | 2021-05-12 | Robert Bosch Gmbh | Vorrichtung und Verfahren zum Verarbeiten und Auswerten von Signalen von Gehirnaktivitäten |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070173733A1 (en) * | 2005-09-12 | 2007-07-26 | Emotiv Systems Pty Ltd | Detection of and Interaction Using Mental States |
| WO2007149553A2 (en) * | 2006-06-22 | 2007-12-27 | Us Government As Represented By The Secretary Of The Army | Alertness/drowsiness and cognitive capacity index |
| WO2008057365A2 (en) * | 2006-11-02 | 2008-05-15 | Caplan Abraham H | Epileptic event detection systems |
| US20080177197A1 (en) * | 2007-01-22 | 2008-07-24 | Lee Koohyoung | Method and apparatus for quantitatively evaluating mental states based on brain wave signal processing system |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| SE504715C2 (sv) | 1994-09-19 | 1997-04-07 | Mats Holger Goeran Hedstroem | Övervakningssystem för registrering av stöldbegärlig utrustning via elnätet |
| DE19702748A1 (de) | 1996-03-01 | 1997-09-18 | Kirchlechner Schwarz Monika | Verfahren zum Überwachen des Zustandes eines Menschen |
| DE10312519A1 (de) | 2003-03-20 | 2004-10-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren zum Auslösen insassenunterstützter Maßnahmen in einem Fahrzeug |
| WO2006096135A1 (en) * | 2005-03-08 | 2006-09-14 | National University Of Singapore | A system and method for monitoring mental fatigue |
-
2009
- 2009-06-09 DE DE102009024866A patent/DE102009024866A1/de not_active Withdrawn
-
2010
- 2010-06-08 WO PCT/EP2010/003413 patent/WO2010142409A1/de not_active Ceased
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070173733A1 (en) * | 2005-09-12 | 2007-07-26 | Emotiv Systems Pty Ltd | Detection of and Interaction Using Mental States |
| WO2007149553A2 (en) * | 2006-06-22 | 2007-12-27 | Us Government As Represented By The Secretary Of The Army | Alertness/drowsiness and cognitive capacity index |
| WO2008057365A2 (en) * | 2006-11-02 | 2008-05-15 | Caplan Abraham H | Epileptic event detection systems |
| US20080177197A1 (en) * | 2007-01-22 | 2008-07-24 | Lee Koohyoung | Method and apparatus for quantitatively evaluating mental states based on brain wave signal processing system |
Non-Patent Citations (5)
| Title |
|---|
| NICOLELIS MA: "Actions from thoughts", NATURE, vol. 409, no. 6818, 18 January 2001 (2001-01-18), pages 403 - 7 |
| NICOLELIS MA; GHAZANFAR AA; STAMBAUGH CR; OLIVEIRA LM; LAUBACH M; CHAPIN JK; NELSON RJ; KAAS JH: "Simultaneous encoding of tactile information by three primate cortical areas", NATURE NEUROSCI., vol. 1, no. 7, November 1998 (1998-11-01), pages 621 - 30 |
| TOPIC CONFERENCE ON MICROTECHNOLOGIES IN MEDICINE & BIOLOGY, 2000, pages 584 - 6 |
| VELLISTE M; PEREL S; SPALDING MC; WHITFORD AS; SCHWARTZ AB: "Cortical control of a prosthetic arm for self-feeding", NATURE, vol. 453, no. 7198, 19 June 2008 (2008-06-19), pages 1098 - 101 |
| WOLPAW JR; BIRBAUMER N; MCFARLAND DJ; PFURTSCHELLER G; VAUGHAN TM: "Brain-computer interfaces for communication and control", CLINLCAL NEUROPHYSIOL., vol. 113, no. 6, June 2002 (2002-06-01), pages 767 - 91 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107440714A (zh) * | 2017-09-07 | 2017-12-08 | 哈尔滨理工大学 | 一种专注度及眨眼动作提取装置及方法 |
| CN113039507A (zh) * | 2018-08-30 | 2021-06-25 | 西门子（中国）有限公司 | 用于安全控制的脑机接口装置以及机器人系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| DE102009024866A1 (de) | 2010-12-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Zhang et al. | A survey on deep learning-based non-invasive brain signals: recent advances and new frontiers | |
| DE102012002037B4 (de) | Vorrichtung zur Durchführung von Fahrerzustandsanalysen | |
| EP3025581B1 (de) | Verfahren zur erkennung von sprengstoffen und anderen zielsubstanzen | |
| US7460903B2 (en) | Method and system for a real time adaptive system for effecting changes in cognitive-emotive profiles | |
| DE10211765B4 (de) | Vorrichtung zur Lokalisation des Zielpunktes von Elektroden zur Hirnstimulation, insbesondere zur Tiefenhirnstimulation | |
| US20040267152A1 (en) | Method and system for predicting and preventing seizures | |
| DE202012001096U1 (de) | Vorrichtung zur Durchführung von Fahrerzustandsanalysen | |
| DE102008054442A1 (de) | Verfahren zur ferndiagnostischen Überwachung und Unterstützung von Patienten sowie Einrichtung und telemedizinisches Zentrum | |
| Buerkle et al. | Feasibility of detecting potential emergencies in symbiotic human-robot collaboration with a mobile EEG | |
| EP2457511A1 (de) | Signalerfassungsvorrichtung zur Erfassung eines Differenzsignals für eine elektrische Messung eines Vitalparameters eines Lebewesens, Elektrodenanordnung und Verfahren | |
| Major et al. | A survey of brain computer interfaces and their applications | |
| Coffey et al. | Brain–machine interfaces in space: using spontaneous rather than intentionally generated brain signals | |
| DE102020213483A1 (de) | Einrichtung und Verfahren zur Überwachung eines Fahrers mit Epilepsie unter Verwendung von Gehirnwellen | |
| Jahani et al. | Attention level quantification during a modified stroop color word experiment: an fNIRS based study | |
| WO2010142409A1 (de) | Verfahren und einrichtung zur überwachung der hirnaktivität eines menschen | |
| Djamal et al. | Significant variables extraction of post-stroke EEG signal using wavelet and SOM kohonen | |
| Ravindran et al. | Interpretable deep learning models for single trial prediction of balance loss | |
| DE102021108656A1 (de) | Sicherheitssystem eines Fahrzeugs | |
| WO2021240469A1 (de) | Technisches gerät und verfahren zur erzeugung, erfassung und identifikation charakteristischer muster in physiologischen und pathologischen daten | |
| Yeom et al. | F-value time-frequency analysis: Between-within variance analysis | |
| Sivakumar et al. | Analysis of alpha and theta band to detect driver drowsiness using electroencephalogram (EEG) signals. | |
| DE102020007891A1 (de) | Tragbares Vitalmessgerät | |
| Nouri et al. | Introducing a convolutional neural network and visualization of its filters for classification of EEG signal for SSVEP task | |
| DE102016112276B4 (de) | Sicherheitsvorrichtung und Verfahren zum Absichern einer Mensch-Maschine-Kooperation | |
| Aljuaid | Theoretical design of eeg-based neuroergonomics integrated portable system, applying direct psychophysiological indicators |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 10725986 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 10725986 Country of ref document: EP Kind code of ref document: A1 |