KR102102421B1 - EEG measuring earphone detecting sleepiness while driving and the system using it - Google Patents

EEG measuring earphone detecting sleepiness while driving and the system using it Download PDF

Info

Publication number
KR102102421B1
KR102102421B1 KR1020180002714A KR20180002714A KR102102421B1 KR 102102421 B1 KR102102421 B1 KR 102102421B1 KR 1020180002714 A KR1020180002714 A KR 1020180002714A KR 20180002714 A KR20180002714 A KR 20180002714A KR 102102421 B1 KR102102421 B1 KR 102102421B1
Authority
KR
South Korea
Prior art keywords
electrode
eeg
measurement
rubber
measuring
Prior art date
Application number
KR1020180002714A
Other languages
Korean (ko)
Other versions
KR20190084679A (en
Inventor
심준섭
차동현
Original Assignee
광운대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 광운대학교 산학협력단 filed Critical 광운대학교 산학협력단
Priority to KR1020180002714A priority Critical patent/KR102102421B1/en
Publication of KR20190084679A publication Critical patent/KR20190084679A/en
Application granted granted Critical
Publication of KR102102421B1 publication Critical patent/KR102102421B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/25Bioelectric electrodes therefor
    • A61B5/279Bioelectric electrodes therefor specially adapted for particular uses
    • A61B5/291Bioelectric electrodes therefor specially adapted for particular uses for electroencephalography [EEG]
    • A61B5/0478
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0024Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system for multiple sensor units attached to the patient, e.g. using a body or personal area network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/6803Head-worn items, e.g. helmets, masks, headphones or goggles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • A61B5/6815Ear
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7225Details of analog processing, e.g. isolation amplifier, gain or sensitivity adjustment, filtering, baseline or drift compensation

Abstract

본 발명은 뇌파측정 수단을 갖는 이어폰 및 이를 이용한 시스템에 관한 것으로서, 일정한 표면적을 가지는 기준전극과, 기준전극과 이격되어 설치되며, 뇌파를 감지하여 측정하는 측정전극과, 측정전극 및 기준전극과 분리되며 피부 표면에 부착되는 접지전극과, 기준전극과 측정전극 및 접지전극을 피부에 가압시키는 가압 하우징 및, 상기 측정전극에서 측정된 뇌파 신호를 전송하는 유선 또는 무선 통신모듈로 구성되며, 상기 측정전극과 기준전극 및 접지전극은 탄성 수지 재질인 것을 특징으로 함으로써, 굴곡과 머리카락 등으로 극히 불균일한 표면을 가지는 피부에 작은 압력으로 부착되어도 큰 크기의 뇌파 신호 정보를 획득할 수 있고, 반복 사용하여도 자주 교체할 필요가 없으므로, 뇌파를 측정하여 이를 활용하는 다양한 시스템을 불편한 착용감이나 착용의 통증 없이 사용이 간편한 이어폰 및 이를 이용한 시스템으로 제공하고자 한다. 이를 통해 졸음운전 감시가 절실하게 필요한 장거리 운전 상황에서, 불편한 착용감이나 착용의 통증으로 인하여 사실상 현실화될 수 없었던 졸음운전 감지가 기술적 장애의 극복으로 인하여 비로소 제대로 이루어질 수 있게 되어, 졸음운전으로 인한 대형 사고를 방지시킬 수 있는 뇌파 측정 이어폰 및 이를 이용한 시스템을 제공하고자 한다.The present invention relates to an earphone having an EEG measuring means and a system using the same, the reference electrode having a constant surface area, and is installed spaced apart from the reference electrode, and a measurement electrode for detecting and measuring the EEG, separated from the measurement electrode and the reference electrode It consists of a ground electrode attached to the skin surface, a reference electrode, a pressure electrode and a pressure housing for pressing the ground electrode to the skin, and a wired or wireless communication module for transmitting the EEG signal measured by the measurement electrode, the measurement electrode And the reference electrode and the ground electrode are made of an elastic resin material, so that even when attached to a skin having an extremely non-uniform surface such as bending and hair under a small pressure, it is possible to obtain a large amount of EEG signal information, and even if repeatedly used Since there is no need to replace it frequently, it is inconvenient to install various systems that measure and use EEG. The use without feeling pain or wear earphones and to provide a simple and using the same system. Through this, in the long-distance driving situation in which drowsy driving monitoring is desperately needed, drowsy driving detection, which could not be practically realized due to uncomfortable fit or pain in wear, can be properly realized due to overcoming technical obstacles, resulting in a large accident due to drowsy driving. It is intended to provide an EEG measuring earphone and a system using the same.

Description

뇌파 측정용 이어폰 및 이를 이용한 졸음운전 감지 시스템{EEG measuring earphone detecting sleepiness while driving and the system using it}EEG measuring earphone detecting sleepiness while driving and the system using it

본 발명은 뇌파 측정을 위한 이어폰 및 이를 이용한 졸음운전 감지 시스템에 관한 것으로, 특히 운전 중 졸림 현상을 조기에 발견할 수 있는 고해상도의 뇌파측정 수단을 갖는 이어폰 및 이를 이용한 시스템에 관한 것이다.The present invention relates to an earphone for measuring EEG and a drowsy driving detection system using the same, and more particularly, to an earphone having a high-resolution EEG measuring means capable of detecting drowsiness during driving and a system using the same.

최근 자동차 사고의 원인 중에 가장 사망률이 높은 사고는 운전자 피로에 의한 졸음운전으로 조사되고 있다. 특히 고속도로에서 발생하는 교통사고 비율 중 졸음운전에 의한 사고는 30 % 이상의 높은 비중을 차지하고 있기 때문에, 졸음운전을 예방하기 위해 스마트 차량 안전 기술에 대한 개발이 절실한 상황이다.Recently, among the causes of automobile accidents, the accident with the highest death rate has been investigated as drowsy driving due to driver fatigue. In particular, among the proportion of traffic accidents occurring on highways, drowsy driving accidents account for a high proportion of 30% or more, so the development of smart vehicle safety technology is urgently needed to prevent drowsy driving.

현재 차량용 전장 기술의 발전과 지능형 자동차 기술 요구 사항 증가에 따라 주행 안정성 향상 기술, 사고 예방 및 회피 기술, 자율주행 기술 등 차량 안전 시스템 기술이 발달하고 있다.BACKGROUND With the development of automotive electronics technology and increasing demands for intelligent automobile technology, vehicle safety system technologies such as driving stability improvement technology, accident prevention and avoidance technology, and autonomous driving technology have been developed.

특히, 졸음운전을 방지하기 위한 기술로는 급격한 핸들 조작의 빈도수 또는 영상 분석이나 뇌파 측정 방식을 통해 운전자의 졸음을 인식하는 연구가 활발히 진행되고 있다.Particularly, as a technique for preventing drowsy driving, research on recognizing the driver's drowsiness through a frequency of sudden steering wheel manipulation or image analysis or EEG measurement has been actively conducted.

영상분석 방식의 졸음운전 방지 시스템은 도 1의 사진에 도시된 바와 같이 눈꺼풀을 비롯한 안면 각 부위의 근육 움직임을 감지하여 졸음 상태의 근육 움직임 패턴의 범주인지를 판단하여 졸음 상태 여부를 식별하는 시스템이다.The drowsiness driving prevention system of the image analysis method is a system for detecting whether the person is drowsiness by detecting muscle movements of each part of the face, including the eyelids, as shown in the photo of FIG. .

그런데 상기 영상분석 방식 시스템은 운전자의 눈 형상 차이, 차량 내의 복잡한 조명환경 등으로 인하여 영상인식의 불확실성이 크므로 오히려 잘못된 졸음 인식으로 인한 차량 제어로 사고를 유발시킬 수도 있다.However, the image analysis method system may cause an accident by controlling the vehicle due to false drowsiness recognition because the uncertainty of image recognition is large due to a difference in the shape of the driver's eyes and a complicated lighting environment in the vehicle.

한편, 도 2에 도시된 바와 같이 안면 또는 귀 내부 이도에 삽입시키는 형태의 뇌파 측정 방식의 경우에는 사용되는 전극이 피부와 전극 사이의 임피던스를 최소화하기 위해 접착제가 도포된 패치 형식의 습식 전극이거나 물리적 힘을 가할 수 있는 지지대에 금도금이 된 고가의 건식 전극인데, 습식 전극의 경우에는 건조와 마모의 문제로 인하여 거의 1회 사용만 가능한 문제가 있고, 건식 전극은 높은 해상도의 뇌파 정보를 얻기 위해서는 전기 저항을 줄이기 위해 과도한 압력으로 피부를 압박해야 하므로, 장시간 착용하고 운전하기에는 통증이 유발되어 일정 시간 이상의 운전 과정에서 지속적으로 착용하기 힘든 문제가 있다.On the other hand, in the case of the EEG measurement method of inserting into the ear canal inside the face or ear as shown in FIG. 2, the electrode used is a wet electrode in the form of a patch with an adhesive applied to minimize impedance between the skin and the electrode, or physically It is an expensive dry electrode that is gold-plated on a support to which force can be applied. In the case of a wet electrode, there is a problem that can be used only once due to the problem of drying and abrasion, and the dry electrode has electricity to obtain high resolution EEG information. Since the skin has to be pressed under excessive pressure to reduce resistance, pain is caused to be worn while driving for a long time, and thus there is a problem that it is difficult to continuously wear in a driving process of a certain time or more.

따라서 굴곡과 머리카락 등으로 극히 불균일한 표면을 가지는 피부에 작은 압력으로 부착되어도 큰 크기의 뇌파 신호 정보를 획득할 수 있고, 반복 사용하여도 자주 교체할 필요가 없는 전극이 구비되어 실질적인 졸음운전으로 인한 대형 사고를 방지시킬 수 있는 졸음운전 감지 장치의 개발이 절실히 요청된다.Therefore, even if it is attached to the skin having an extremely non-uniform surface such as bending and hair with a small pressure, it is possible to obtain a large-sized EEG signal information, and even if it is repeatedly used, it is equipped with an electrode that does not need to be replaced frequently. Development of a drowsy driving detection device capable of preventing a large accident is urgently required.

공개특허공보 제10-2012-0031506호(공개일자: 2012.04.03.)Publication Patent Publication No. 10-2012-0031506 (Publication date: 2012.04.03.)

이에 본 발명은 종래기술의 문제점을 개선하기 위한 것으로써, 굴곡과 머리카락 등으로 극히 불균일한 표면을 가지는 피부에 작은 압력으로 부착되어도 큰 크기의 뇌파 신호 정보를 획득할 수 있고, 반복 사용하여도 자주 교체할 필요가 없는 전극이 구비되어 실질적인 졸음운전으로 인한 대형 사고를 방지시킬 수 있는 뇌파 측정 이어폰 및 졸음운전 감지 시스템을 제공하고자 한다.Accordingly, the present invention is to improve the problems of the prior art, it is possible to obtain large-sized EEG signal information even when attached to a skin having an extremely non-uniform surface such as curvature and hair under a small pressure, and frequently used repeatedly. It is intended to provide an EEG measuring earphone and a drowsiness driving detection system that are equipped with an electrode that does not need to be replaced to prevent a large accident due to a drowsy driving.

이러한 목적을 달성하기 위한 본 발명에 따른 뇌파 측정 이어폰은 인체 피부 표면에 부착되는 기준전극과, 기준전극과 이격되어 피부에 부착되며, 뇌파를 감지하여 측정하는 측정전극과, 측정전극 및 기준전극과 분리되며 피부 표면에 부착되는 접지전극과, 기준전극과 측정전극 및 접지전극을 피부에 가압시키는 가압 하우징 및, 상기 측정전극에서 측정된 뇌파 신호를 전송하는 유선 또는 무선 통신모듈로 구성되며, 상기 측정전극은 유연한 도전성 소재로 제작되는 것을 특징으로 한다.The EEG measuring earphone according to the present invention for achieving this purpose is a reference electrode attached to the surface of the human skin, attached to the skin spaced apart from the reference electrode, a measuring electrode for detecting and measuring EEG, a measuring electrode and a reference electrode It consists of a ground electrode that is separated and attached to the skin surface, a reference electrode, a pressure electrode and a pressure housing that presses the ground electrode against the skin, and a wired or wireless communication module that transmits the EEG signal measured at the measurement electrode, and the measurement The electrode is made of a flexible conductive material.

여기서 상기 측정전극은 바람직하게는 액상의 실리콘에 경화제 및 전도성 금속 분말이 첨가되어 형성된다.Here, the measuring electrode is preferably formed by adding a curing agent and a conductive metal powder to liquid silicone.

이 경우 상기 금속 분말은 바람직하게는 수지상 결정(dendrite) 조직으로 형성된다.In this case, the metal powder is preferably formed of a dendrite structure.

그리고 상기 가압 하우징은 바람직하게는 in-ear 이어폰 형태로 형성되어 양 측 귀에 하나씩 마련되며, 측정전극과 기준전극은 in-ear 이어폰의 실리콘 팁과 동일한 형태로 형성되어 가압 하우징에 각각 결합됨으로써, 측정전극과 기준전극은 서로 다른 귀에 삽입된다.And the pressure housing is preferably formed in the form of an in-ear earphone, and is provided on each side of the ear, and the measurement electrode and the reference electrode are formed in the same shape as the silicon tip of the in-ear earphone and are respectively coupled to the pressure housing to measure. The electrode and the reference electrode are inserted into different ears.

이때 기준전극과 접지전극은 바람직하게는 각각 하나의 실리콘 팁 형상의 일부를 이루고, 기준전극과 접지전극 사이에는 절연 밴드가 형성되며, 상기 가압 하우징에는 기준전극의 내면에 밀착되는 기준전극 접속 면과 접지전극의 내면에 밀착되는 접지전극 접속 면이 서로 독립된 원형 밴드 형태로 분리되어 돌출 형성된다.At this time, the reference electrode and the ground electrode preferably form part of one silicon tip, respectively, and an insulating band is formed between the reference electrode and the ground electrode, and the reference housing and the reference electrode connection surface that are in close contact with the inner surface of the reference electrode in the pressing housing. The ground electrode connection surface, which is in close contact with the inner surface of the ground electrode, is separated from each other in a circular band shape and protrudes.

또는 상기 가압 하우징은 바람직하게는 귓바퀴에 걸리는 행거와, 행거에 케이블로 연결되는 in-ear 이어폰 형태의 가압 하우징으로 이루어지고, 측정전극은 행거의 양 면 중 머리에 접촉되는 면에 설치되어 피부와 접촉되고, 접지전극과 기준전극은 가압 하우징에 결합되되, 접지전극과 기준전극은 각각 하나의 실리콘 팁 형상의 일부를 이루고, 기준전극과 접지전극 사이에는 절연 밴드가 형성되며, 상기 가압 하우징에는 기준전극의 내면에 밀착되는 기준전극 접속 면과 접지전극의 내면에 밀착되는 접지전극 접속 면이 서로 독립된 원형 밴드 형태로 분리되어 돌출 형성된다.Alternatively, the pressurized housing is preferably made of a hanger hanging on the auricle, and a pressurized housing in the form of an in-ear earphone connected to the hanger with a cable, and the measuring electrode is installed on the contacting head of both sides of the hanger to contact the skin. In contact, the ground electrode and the reference electrode are coupled to the pressure housing, and the ground electrode and the reference electrode each form a part of one silicon tip shape, an insulating band is formed between the reference electrode and the ground electrode, and the pressure housing is a reference The reference electrode connection surface in close contact with the inner surface of the electrode and the ground electrode connection surface in close contact with the inner surface of the ground electrode are separated from each other in a circular band shape to protrude.

한편, 본 발명에 따른 졸음운전 감지 시스템은 제1항 내지 제9항 중 어느 하나의 항으로 이루어지는 뇌파 측정 이어폰을 이용한 졸음운전 감시 시스템으로서, 상기 헤드셋과, 상기 통신부로부터 수신 받은 뇌파신호를 분석하여 졸음상태인지 여부를 식별하는 단말기로 구성되며, 상기 단말기는 안드로이드 또는 아이폰 운영체제로 구동되고, 뇌파신호 분석 앱으로 현재 뇌파 상태를 화면으로 식별 가능하게 현출시키는 것을 특징으로 한다.On the other hand, the drowsy driving detection system according to the present invention is a drowsy driving monitoring system using an EEG measuring earphone made of any one of claims 1 to 9, and analyzes EEG signals received from the headset and the communication unit It is composed of a terminal that identifies whether or not it is drowsy, and the terminal is driven by an Android or iPhone operating system, and is characterized by displaying the current EEG state on a screen identifiably with an EEG signal analysis app.

이 경우 상기 헤드셋에 구비되는 통신모듈에는 단말기로부터 블루투스로 음성신호를 수신 받아 증폭시키는 증폭모듈이 내장되고, 상기 가압 하우징 자체가 in-ear 이어폰 형태로 이루어질 때의 가압 하우징 내부 또는 가압 하우징에 in-ear 형태의 가압 하우징이 마련될 때의 가압 하우징 내부에는 증폭모듈로부터 증폭된 음성신호를 가청 가능한 주파수로 재생시키는 진동판이 내장되어, 상기 단말기가 수신 받은 뇌파가 졸음운전 상태인 것으로 판정될 경우, 단말기는 음성 경고 신호를 발신하고, 음성 경고 신호를 전송받는 증폭모듈은 음성 경고 신호를 증폭시켜 상기 진동판을 통하여 음성 경고를 재생시킨다.In this case, the communication module provided in the headset has a built-in amplification module that receives and amplifies a voice signal from a terminal via Bluetooth, and the in-ear housing or the in-ear housing when the pressurizing housing itself is formed in the form of in-ear earphones. When the ear-shaped pressurized housing is provided, a vibrating plate for reproducing the amplified voice signal at an audible frequency is built in the pressurized housing, and when it is determined that the brainwaves received by the terminal are in a drowsy driving state, the terminal The amplification module that transmits the voice warning signal and receives the voice warning signal amplifies the voice warning signal to reproduce the voice warning through the diaphragm.

본 발명에 따른 뇌파 측정 이어폰 및 이를 이용한 감지 시스템은 전도성 유연 전극이 사용됨으로써, 굴곡과 머리카락 등으로 극히 불균일한 표면을 가지는 피부에 작은 압력으로 부착되어도 큰 크기의 뇌파 신호 정보를 획득할 수 있고, 반복 사용하여도 자주 교체할 필요가 없으므로, 졸음운전 감시가 절실하게 필요한 장거리 운전 상황에서, 불편한 착용감이나 착용의 통증으로 인하여 사실상 현실화될 수 없었던 졸음운전 감지가 기술적 장애의 극복으로 인하여 비로소 제대로 이루어질 수 있게 되어, 졸음운전으로 인한 대형 사고를 방지시킬 수 있는 효과가 있다.The EEG measuring earphone according to the present invention and the sensing system using the same can be obtained by using a conductive flexible electrode, so that even when attached to a skin having an extremely non-uniform surface such as bends and hair with a small pressure, it is possible to acquire EEG signal information of a large size, Since it does not need to be replaced frequently even after repeated use, in long-distance driving situations where drowsy driving monitoring is desperately needed, drowsy driving detection that could not be practically realized due to uncomfortable fit or pain in wear can only be properly achieved due to overcoming technical obstacles. Since there is, there is an effect that can prevent a large accident due to drowsy driving.

도 1은 종래기술인 영상분석 졸음운전 감지 시스템을 나타내는 사진,
도 2a 내지 도 2c는 종래의 뇌파 측정 방식 시스템을 나타내는 도면,
도 3 내지 5는 본 발명에 따른 뇌파 측정 이어폰의 제1실시예의 사시도,
도 6은 본 발명에 따른 뇌파 측정 이어폰의 제2실시예의 사시도,
도 7 및 도 8은 본 발명에 따른 뇌파 측정 이어폰의 제1실시예의 사진,
도 9는 본 발명에 따른 졸음운전 감시 시스템의 개념도,
도 10은 뇌파 파장의 형태에 따른 상태를 나타낸 도면,
도 11은 뇌파 파장의 종류를 나타낸 그래프,
도 12는 뇌파 분석 알고리즘을 나타낸 식과 그래프,
도 13 및 도 14는 본 발명에 따른 졸음운전 감지 시스템에서 안드로이드 앱 화면을 나타내는 사진,
1 is a photograph showing a drowsy driving detection system for image analysis, which is a prior art,
2a to 2c are views showing a conventional EEG measuring system,
3 to 5 are perspective views of a first embodiment of an EEG measuring earphone according to the present invention,
6 is a perspective view of a second embodiment of the EEG measuring earphone according to the present invention,
7 and 8 are photographs of a first embodiment of an EEG measuring earphone according to the present invention,
9 is a conceptual diagram of a drowsiness driving monitoring system according to the present invention,
10 is a view showing a state according to the shape of the EEG wavelength,
11 is a graph showing the types of EEG wavelengths,
12 is an equation and graph showing the brain wave analysis algorithm,
13 and 14 are pictures showing the Android app screen in the drowsy driving detection system according to the present invention,

본 발명의 실시예에서 제시되는 특정한 구조 내지 기능적 설명들은 단지 본 발명의 개념에 따른 실시예를 설명하기 위한 목적으로 예시된 것으로, 본 발명의 개념에 따른 실시예들은 다양한 형태로 실시될 수 있다. 또한 본 명세서에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니 되며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경물, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The specific structure or functional descriptions presented in the embodiments of the present invention are exemplified for the purpose of describing the embodiments according to the concept of the present invention, and the embodiments according to the concept of the present invention may be implemented in various forms. In addition, it should not be construed as being limited to the embodiments described herein, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

이하에서는 첨부된 도면을 참조하여 본 발명에 대해 상세히 설명한다. Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

본 발명에 따른 헤드셋은 이도에 삽입되는 측정전극과, 측정 전극에 케이블로 연결되며, 측정전극으로부터 전달받는 뇌파 신호를 수신 받아 신호를 증폭시키는 차동 증폭모듈과, 차동 증폭 모듈로부터 증폭된 뇌파 신호를 전달 받아 생체 신호 이외의 노이즈를 제거시키는 저역 통과 필터 및 노치 필터와, 저역 통과 필터 및 노치 필터로부터 전달받는 뇌파 신호를 디지털 신호로 변환시키는 AD 컨버터 및, AD 컨버터로 변환된 디지털 신호를 유선 또는 무선으로 전송하는 통신모듈로 구성된다.The headset according to the present invention is connected to a measurement electrode inserted into the ear canal, a cable connected to the measurement electrode, and receives a brainwave signal received from the measurement electrode to amplify the signal and amplify the brainwave signal amplified from the differential amplification module. A low-pass filter and a notch filter that removes noise other than the bio-signal received, an AD converter that converts the EEG signal received from the low-pass filter and the notch filter into a digital signal, and a digital signal converted into the AD converter, wired or wirelessly It consists of a communication module to transmit.

여기서 측정전극은 탄성 재질의 수지로 제작되어 이도에 삽입되면 이도 내면에 측정전극의 표면이 밀착된다.Here, when the measurement electrode is made of an elastic material and inserted into the ear canal, the surface of the measurement electrode is in close contact with the inner surface of the ear canal.

그리고 측정전극은 이소프렌고무, 실리콘고무, 우레탄고무, 부타디엔고무, 스틸렌부타디엔고무, 아크릴로니티릴부타디엔고무, 클로로프렌 고무, 에틸렌프로필렌 고무, 부틸고무, 클로로술폰화 폴리에틸렌고무, 아크릴고무, 다황화고무, 불소고무, 에피클로로히드린고무 중 적어도 1개를 포함하는 탄성 소재에 은, 구리, 금, 백금, 카본, 카본나노튜브, 그래핀, 알루미늄 중 적어도 1개를 포함하는 전도성 분말이 첨가되어 형성되는 전도성 탄성 소재로 이루어질 수 있다.And the measurement electrodes are isoprene rubber, silicone rubber, urethane rubber, butadiene rubber, styrene-butadiene rubber, acrylonitrile-butadiene rubber, chloroprene rubber, ethylene propylene rubber, butyl rubber, chlorosulfonated polyethylene rubber, acrylic rubber, polysulfide rubber, It is formed by adding a conductive powder containing at least one of silver, copper, gold, platinum, carbon, carbon nanotubes, graphene, and aluminum to an elastic material containing at least one of fluorine rubber and epichlorohydrin rubber. It may be made of a conductive elastic material.

또는 측정전극은 액상의 실리콘에 경화제 및 전도성 금속 분말이 첨가되어 형성될 수 있다.Alternatively, the measuring electrode may be formed by adding a curing agent and a conductive metal powder to liquid silicone.

이 경우 상기 전도성 금속 분말을 이루는 입자 각각은 바람직하게는 내부가 수지상 결정(dendrite) 조직으로 형성된다.In this case, each of the particles constituting the conductive metal powder is preferably formed inside of a dendrite structure.

이렇게 형성되는 측정전극은 전도성 유연 전극이라 하며, 전도성 유연 전극은 종래의 습식전극 및 금속전극에 비해 다음과 같은 차이가 있다.The measurement electrode formed in this way is called a conductive flexible electrode, and the conductive flexible electrode has the following differences compared to a conventional wet electrode and a metal electrode.

1. 종래의 습식전극과 달리 젤 형태의 접착성분이 없는 점과 종래의 금속전극처럼 금속 촉감이 없으므로 사용자에게 착용으로 인한 불쾌감을 주지 않는다.1. Unlike the conventional wet electrode, there is no gel-like adhesive component and there is no metallic touch like the conventional metal electrode, so it does not give the user unpleasant feeling due to wearing.

2. 사람에 따라 이도 형태가 제각각 달라도 유연한 탄성 재질이어서 모든 종류의 이도 내면에 밀착될 수 있고 착용감이 좋다.2. Even if the shape of the ear canal varies from person to person, it is a flexible elastic material, so all types of ear canal can be closely adhered to the inner surface and have a good fit.

3. 귓속에 안정적으로 밀착되어 신체 활동으로 인한 운동 잡음 발생이 적고 밀착력 증대로 인하여 피부와 전극 사이의 임피던스를 최소화 시킬 수 있다.3. It can be stably adhered to the ear to minimize the occurrence of motor noise due to physical activity and to minimize the impedance between the skin and the electrode due to increased adhesion.

그리고 후술하는 바와 같이 측정전극에는 기준전극과 접지전극이 함께 설치될 수 있다. 여기서 뇌파의 직접적인 측정은 측정전극이 하게 되고, 기준전극(standard electrode)은 참조 전극(reference electrode)이라고도 하며, 화학 전지의 기전력 또는 전극전위를 측정할 때, 사용하는 단극 전위가 일정하여 기준이 될 수 있는 전극을 말한다.In addition, a reference electrode and a ground electrode may be installed on the measurement electrode as described below. Here, the direct measurement of EEG is the measurement electrode, the standard electrode is also referred to as the reference electrode, and when measuring the electromotive force or electrode potential of a chemical cell, the unipolar potential used is constant and becomes the reference. It refers to an electrode.

이러한 전극들은 피부의 서로 다른 부위에 각각 밀착되어야 한다. 그런데 졸음운전 감지를 위한 뇌파 측정은 판정이 잘못될 경우 졸음 상태가 아닌데도 졸음운전으로 인식하여 운전자가 경고신호를 받을 수 있으므로 오히려 사고를 유발시킬 가능성이 있으므로 졸음운전 감지를 위한 뇌파 신호는 최대한 큰 신호 값을 얻을 수 있도록 피부와 전극 간의 저항이 최소화 되어야 한다.These electrodes should be in close contact with different parts of the skin. However, the EEG measurement for drowsy driving detection is not as drowsy if the judgment is wrong, but it is recognized as drowsy driving, so the driver can receive a warning signal, so there is a possibility of causing an accident. In order to obtain a value, the resistance between the skin and the electrode should be minimized.

종래의 습식 전극은 전해질이 피부와 전극 사이에 존재하므로 전해질을 통한 전도가 원활하여 피부와 전극 사이의 저항이 매우 낮다. 따라서 낮은 저항을 통한 신호의 크기 면에서는 습식 전극이 유리하다.In the conventional wet electrode, since the electrolyte is present between the skin and the electrode, conduction through the electrolyte is smooth, and the resistance between the skin and the electrode is very low. Therefore, the wet electrode is advantageous in terms of the magnitude of the signal through the low resistance.

그런데 습식 전극은 젤 타입의 점착식 패드 형태로 피부에 부착되므로 착용이 불편하고, 젤 타입의 패드가 쉽게 건조되므로 시간이 흐를수록 측정 민감도가 저하되므로 착용감을 개선하여 장시간 착용 가능하더라도 습식 전극의 장점은 짧은 시간만 유지될 수 있다. 따라서 짧은 시간의 진찰 목적에는 사용가능하지만 장시간 운전 등에는 이러한 착용감과 민감도 저하로 사용이 불가능하다.However, since the wet electrode is attached to the skin in the form of a gel-type adhesive pad, it is inconvenient to wear, and since the gel-type pad dries easily, the sensitivity of measurement decreases with time. Can only be kept for a short time. Therefore, it can be used for short-term medical examination purposes, but it cannot be used for long-term driving due to the reduced wearing comfort and sensitivity.

건식 전극은 습식 전극과 달리 반복 사용은 가능하지만 종래의 건식 전극은 피부와 접촉될 때 특히 주름 기타 굴곡이 많고 땀샘으로 인해 불균일하며 머리카락이나 체모 등으로 공간이 발생될 수밖에 없는 피부의 특성상 저항이 크므로 큰 신호를 얻기 힘든 문제가 있다.Unlike the wet electrode, the dry electrode can be used repeatedly, but the conventional dry electrode has a lot of wrinkles and other curvatures when it comes into contact with the skin, is non-uniform due to sweat glands, and has a large resistance due to the nature of the skin, which is forced to generate space due to hair or body hair. As a result, it is difficult to obtain a large signal.

이러한 문제를 조금이라도 완화시키고자 종래기술은 도 2a에 도시된 바와 같이 귀 내부의 이도에 꽉 차게 밀착되도록 이도 내부의 본을 떠서 보청기처럼 이도 내면에 꽉 끼워지게 밀착시켜 큰 압력으로 귀 속의 피부를 눌러줌으로써 피부와 전극 간의 저항을 최소화 시키는 방법을 채택한다.In order to alleviate this problem even a little, the prior art opens the bone inside the ear canal so as to be tightly attached to the ear canal as shown in FIG. The method of minimizing the resistance between the skin and the electrode is adopted by pressing.

그러나 일반적인 in-ear 이어폰과 달리 귀 속을 꽉 채우는 보청기 형태는 이물감이 심하여 장시간 착용하기 힘들고, 주위 소리로부터 거의 차단되므로 오히려 다른 사고를 유발시킬 가능성도 있다.However, unlike regular in-ear earphones, the shape of the hearing aid that fills the inside of the ear is very difficult to wear for a long time due to a strong foreign body feeling, and it is likely to cause other accidents because it is almost blocked from ambient sounds.

따라서 본 발명에 따른 뇌파 측정 이어폰은 사용되는 측정전극과 기준전극 및 접지전극이 피부에 큰 압력 없이도 접촉시키면 밀착될 수 있을 뿐만 아니라, 굴곡과 머리카락 및 체모 등의 장애물이 있어도 피부 표면의 공간을 메우면서 피부에 접촉되어 습식 전극처럼 피부와의 사이에 저항이 최소화 되어 크고 해상도 높은 측정 신호를 얻을 수 있도록 탄성 재질의 전도성 유연 전극으로 이루어지도록 제안하는 것이다.Therefore, the EEG measuring earphone according to the present invention can be in close contact with the measurement electrode used and the reference electrode and the ground electrode without any great pressure on the skin, and fills the space on the skin surface even when there are obstacles such as bending, hair, and body hair. In addition, it is proposed to be made of a conductive flexible electrode made of an elastic material so that it can contact the skin and minimize resistance between the skin like a wet electrode and obtain a large and high-resolution measurement signal.

본 발명에서 제안하는 유연 전극은 (1) 첫째로는 내부 미세 조직 면에서 피부와의 사이에 저항을 최소화시킬 수 있는 구조를 가지며, (2) 둘째로는 표면 미세 형상에서도 피부 표면의 굴곡을 메우면서 작은 압력으로 피부에 밀착될 수 있는 유연 탄성 재질을 가진다.
The flexible electrode proposed in the present invention (1) first has a structure capable of minimizing the resistance between the skin and the surface of the internal microstructure, and (2) secondly, it fills the curvature of the skin surface even in the surface fine shape. It has a flexible elastic material that can be in close contact with the skin under a small pressure.

(1) 미세 조직 면에서 본 발명에서 제안하는 유연 섬모 전극은 액상의 수지에 경화제 및 도전성 금속 분말이 첨가되어 제조되는데, 특히 본 발명에서 금속 분말의 나노 단위에서의 조직 구조는 플레이크 구조나 구형 구조가 아닌 수지상(dendrite) 구조가 적용된다.(1) In terms of microstructure , the flexible ciliated electrode proposed in the present invention is prepared by adding a curing agent and a conductive metal powder to a liquid resin, and in particular, in the present invention, the structure of nanostructures of the metal powder is a flake structure or a spherical structure. A dendrite structure is applied.

구형 구조는 구형 입자들이 모인 형태이므로, 구형이라는 형태의 특성상 구형 입자들 간의 접촉 면적이 너무 작아서 미세한 전류 흐름 경로 중 상당수가 끊어지기 쉬워 전체적으로 전기 전도성이 낮을 수밖에 없다.Since the spherical structure is a collection of spherical particles, due to the nature of the spherical form, the contact area between the spherical particles is too small, so many of the fine current flow paths are easily broken, and thus the electrical conductivity is inevitably low.

플레이크 구조는 얇고 넓적한 파편과 같은 형태인데, 구형 구조에 비해서는 틈 사이가 더 많이 매워지므로, 단위부피당 접촉면적은 구형 구조에 비해 크고 전류가 통하는 경로가 더 많아지므로 전기 전도성이 더 좋다.The flake structure has the shape of a thin and broad debris, and since the gap is more filled than the spherical structure, the contact area per unit volume is larger than that of the spherical structure, and the electric current is better because it has more current paths.

하지만 본 발명에서 적용되는 수지상(dendrite)구조는 나뭇잎 중앙으로부터 테두리를 향하여 마치 나무 가지가 펼쳐나가는 형태와 같이 형성되므로 분지되는 각 가지마다 접촉 경로를 이루어서 접촉 지점이 고도로 많이 형성되어 전류가 흐를 수 있는 경로도 폭발적으로 증가되어 전도성이 매우 훌륭한 특성을 가진다.However, since the dendrite structure applied in the present invention is formed like a tree branch spreading from the center of the leaf toward the rim, a contact path is formed for each branched branch, so that a lot of contact points are formed, and current can flow. The path is also explosively increased, so the conductivity is very good.

이러한 전도도의 차이가 도 3에 구형 구조와 수지상 구조의 금속 입자 함유량에 따라 그래프로 도시되어 있다. 즉 도 3에서는 구형 구조를 가지는 금속 입자 분말이 액상의 수지에 첨가되어 제조된 유연 섬모 전극과 수지상(dendrite) 구조를 가지는 금속 입자 분말이 액상의 수지에 첨가되어 제조된 유연 섬모 전극에서 각각의 경우에 금속 분말 첨가량에 따른 전기저항의 저하 정도가 나타나 있다. 도 3에서 알 수 있듯이 수지상(dendrite) 구조를 가지는 금속 분말은 첨가량이 극히 적어도 현저한 저항 감소 효과가 나타난다.
The difference in conductivity is illustrated in FIG. 3 graphically according to the content of the metal particles of the spherical structure and the dendritic structure. That is, in FIG. 3, each of the flexible ciliated electrodes manufactured by adding a metal particle powder having a spherical structure to a liquid resin and the flexible ciliated electrodes produced by adding metal particle powder having a dendrite structure to a liquid resin The degree of reduction in electrical resistance according to the amount of metal powder added is shown. As can be seen in Figure 3, the metal powder having a dendrite (dendrite) structure has an extremely low resistance reduction effect.

(2) 한편 유연 탄성 재질의 면에서 본 발명에서의 유연 전극은 고무 재질에 미세 금속입자를 혼합하여 제작한다.(2) On the other hand, in terms of flexible elastic material , the flexible electrode in the present invention is produced by mixing fine metal particles with a rubber material.

이렇게 제작된 유연 섬모 전극은 피부에 주름으로 인한 굴곡이나 땀샘으로 인한 굴곡 또는 머리카락이나 체모로 인한 공간이 형성되어도 그 공간을 모두 채우는 형태로 피부와 접촉되므로 섬모가 형성되지 않은 평면 전극과 비교할 때 전극과 피부 사이의 저항이 극명하게 차이가 나게 된다.The flexible ciliated electrode produced in this way is in contact with the skin in a form that fills all the spaces even if a bend due to wrinkles or a bend due to sweat glands or a space caused by hair or body hair is formed, so that the electrode is compared to a flat electrode without cilia formed. The difference between the skin and the skin is markedly different.

따라서 본 발명에 따른 유연 전극을 이용하여 뇌파 측정을 할 때 종래의 전극에 비해 현저하게 큰 신호를 얻게 되어 훨씬 정확한 졸음상태의 판정이 가능해진다.
Therefore, when the EEG is measured using the flexible electrode according to the present invention, a significantly larger signal is obtained compared to the conventional electrode, so that much more accurate determination of drowsiness is possible.

한편, 뇌파의 측정으로 졸음운전 상태를 판단하는 것은 뇌파의 거동이 알고리즘 분석을 통해서 나온 결과의 분석으로 가능하다.On the other hand, it is possible to determine the state of drowsy driving by measuring the EEG by analyzing the results of the behavior of the EEG through algorithm analysis.

뇌파와 같이 시간의 변화에 따라 일견 불규칙하게 보이는 주파수를 분석할 때에는 주어진 신호에 따라 특정 값의 주파수, 크기와 위상이 결정 된다. 즉, 신호의 모양에 따라 N 개의 파동에 대한 주파수, 크기, 위상 이 각각 정해지므로 주파수 영역에서 신호의 주파수성분에 대한 크기와 위상을 분석하면 시간영역에서 그 신호의 형태를 파악하는 것과 동일하다. 이것은 각각 생김새가 다른 사람을 그 사람들의 DNA 만 정확히 안다면 그대로 각자 복제해서 만들 수 있는 것과 같이 신호의 주파수 성분은 신호에 있어서 인간의 DNA 와 같은 의미이므로 신호의 주파수 성분을 파악하면 그 신호의 의미를 정확히 분석할 수 있게 되는 것이다. When analyzing frequencies that seem irregular at first glance with changes in time, such as brain waves, the frequency, magnitude, and phase of a specific value are determined according to a given signal. That is, since the frequency, magnitude, and phase of N waves are respectively determined according to the shape of the signal, analyzing the magnitude and phase of the frequency component of the signal in the frequency domain is the same as determining the shape of the signal in the time domain. This is because the frequency component of a signal is synonymous with human DNA in a signal, as if each person of a different appearance can be made by copying each person as long as they know exactly the DNA of the people. It can be analyzed accurately.

따라서 이러한 신호 의미 분석에서 주파수 성분 파악이 알고리즘 분석으로 도출된다. 이러한 뇌파 알고리즘 도출 과정이 도 14에 수식과 그래프로 표현되어 있다.Therefore, in this signal semantic analysis, frequency component identification is derived by algorithm analysis. The process of deriving such an EEG algorithm is represented by equations and graphs in FIG. 14.

참고로 도 13의 그래프에서 α파는 긴장이완과 같은 편안한 상태에서 주로 나타나며, 안정되고 편안한 상태 일수록 진폭이 증가되고, 일반적으로 규칙적인 파동의 형태로 연속적으로 나타난다. β파는 깨어 있을 때, 말할 때와 같이 모든 의식적인 활동을 할 때 나타나며, 특히 불안한 상태나 긴장할 때나 복잡한 계산을 처리할 때 우세하게 나타나기도 한다. 그리고 θ파는 정서안정 또는 수면으로 이어지는 과정에서 주로 나타난다. 따라서 베타파에서 세타파로 넘어가는 과정이 중요한 포착 대상이 된다.For reference, in the graph of FIG. 13, the α-wave mainly appears in a relaxed state such as tension relaxation, and in a stable and comfortable state, the amplitude increases, and generally appears continuously in the form of a regular wave. β-waves appear in all conscious activities, such as when you are awake or speaking, and are especially prevalent when you are anxious or nervous, or when you are dealing with complex calculations. And θ wave appears mainly in the process leading to emotional stability or sleep. Therefore, the process of transition from beta to theta is an important target.

본 발명에서는 깨어 있는 상태에서 졸음 상태로 전이되는 과정이 초기에 포착되기 위해 해상도가 높은 큰 신호를 얻을 수 있도록 측정전극, 기준전극, 접지전극이 유연 섬모 전극으로 제작되어 접촉면 전기저항이 최소화되고, 또한 장시간 착용해도 통증이나 이물감 없이 착용 가능하여 실질적인 졸음운전 방지를 장거리 운전 중에도 실현시킬 수 있도록 평소에 머리에 착용하는 안경 또는 이어폰 형태의 헤드셋으로 구성된다. In the present invention, the measurement electrode, the reference electrode, and the ground electrode are made of flexible ciliated electrodes to obtain a large signal with high resolution so that the process of transitioning from the waking state to the drowsiness state is initially captured, and the electrical resistance of the contact surface is minimized. Also, it can be worn without a pain or foreign body even when worn for a long time, so it is composed of a headset in the form of glasses or earphones that are usually worn on the head so that practical drowsy driving can be realized even during long distance driving.

또한 측정전극은 기준전극과 거리가 멀수록 측정되는 신호의 크기가 커지는데, 본 발명에서는 최대한 큰 정보를 얻어 정확한 졸음 상태 측정이 가능하도록 측정전극과 기준전극이 측정이 간편하면서도 서로 최대 간격이 유지될 수 있는 효과적인 배치를 보여준다.In addition, as the distance between the reference electrode and the measurement electrode increases, the size of the measured signal increases. In the present invention, the measurement electrode and the reference electrode are easy to measure, but the maximum distance is maintained from each other so that accurate sleepiness can be measured by obtaining as much information as possible. It shows the effective placement that can be.

이하에서는 본 발명에 따른 뇌파 측정 이어폰을 세 가지 실시예의 형태로 설명하기로 한다. 다만 아래의 실시예는 예시적인 것이므로 아래의 세 가지 실시예가 조합된 실시예나 또는 아래의 세 가지 실시예와 극히 유사한 실시예가 본 발명에서 배재되는 것은 아니다.
Hereinafter, the EEG measuring earphone according to the present invention will be described in the form of three embodiments. However, the following examples are exemplary, and the following three exemplary embodiments are not combined, or an exemplary embodiment very similar to the following three exemplary embodiments is not excluded from the present invention.

<제1실시예><First Example>

제 1실시예는 도 3 내지 도 5에 도시된 바와 같이 in-ear 이어폰 형태로 형성되며, 또한 이도 내면에 직접 접촉되는 측정전극과 접지전극 및 기준전극이 전도성 유연 전극으로 이루어져, 장시간 착용하여도 귀에 통증을 유발시키지 않는다.The first embodiment is formed in the form of an in-ear earphone, as shown in FIGS. 3 to 5, and the measuring electrode, the ground electrode, and the reference electrode directly contacting the inner surface of the ear canal are made of conductive flexible electrodes. Does not cause ear pain.

제1실시예에서는 양쪽 귀 모두에 착용되는 형태로서, 측정전극은 양 측 이도에 모두 삽입될 수 있게 각각 양 측에 하나씩 형성될 수도 있고, 또는 한 쪽에는 측정전극이 설치되고, 나머지 한 쪽에는 접지전극과 기준전극이 설치될 수도 있다.In the first embodiment, as a form worn on both ears, the measurement electrodes may be formed on each side so that they can be inserted into both ear canals, or a measurement electrode is installed on one side and the other side. A ground electrode and a reference electrode may be installed.

측정전극이 양 쪽에 모두 설치되는 경우는 도 4에 도시된 형태로 양 측에 동일하게 형성되며, 한 쪽에는 측정전극과 기준전극이 일체로 형성되고, 나머지 한 쪽에는 측정전극과 접지전극이 일체로 형성된다.When both measurement electrodes are installed on both sides, they are formed identically on both sides in the form shown in FIG. 4, and measurement electrodes and reference electrodes are integrally formed on one side, and measurement electrodes and ground electrodes are integrally formed on the other side. It is formed of.

그리고 한 쪽에만 측정전극이 형성되고 나머지 한 쪽에는 기준전극과 접지전극이 일체로 형성되는 경우에는 도 5에 도시된 바와 같이 절연 밴드(123)는 기준전극(122)과 접지전극(121)을 서로 절연시키도록 한 쪽에만 형성되고, 측정전극(11)이 형성된 전도성 유연 전극은 전체가 측정전극(11) 만으로 이루어진다. 이 경우에는 기준전극(122)과 측정정극(11) 간의 거리가 최대가 될 수 있도록 양쪽 귀에 착용되는 별개의 유닛 각각에 기준전극(122)과 측정전극(11)이 설치되어 최대한 큰 신호를 얻을 수 있다. In addition, when the measurement electrode is formed on only one side and the reference electrode and the ground electrode are integrally formed on the other side, as shown in FIG. 5, the insulating band 123 includes the reference electrode 122 and the ground electrode 121. The conductive flexible electrode formed only on one side to insulate from each other and on which the measuring electrode 11 is formed is entirely composed of the measuring electrode 11. In this case, the reference electrode 122 and the measurement electrode 11 are installed in each of the separate units worn on both ears so that the distance between the reference electrode 122 and the measurement positive electrode 11 can be maximized to obtain the maximum signal possible. You can.

측정전극(11)은 도 3에 도시된 바와 같이 일반적으로 in-ear 이어폰 또는 커널형 이어폰 형태에서 귀 이도 내부에 삽입되어 이도 내면의 피부와 직접 접촉되는 실리콘 팁에 해당되는 부재이다. 다만 일반 실리콘 팁은 이도 내부에 부드럽게 안착되는 작용만 하지만, 본 발명에서는 나노 암페어 수준의 미세한 뇌파 신호를 수신하는 측정전극(11)으로 작용된다.As shown in FIG. 3, the measurement electrode 11 is a member corresponding to a silicon tip that is inserted into the ear canal in the form of an in-ear earphone or a kernel-type earphone and is in direct contact with the skin of the inner ear canal. However, the general silicon tip acts only to gently settle inside the ear canal, but in the present invention, it acts as a measuring electrode 11 that receives a fine EEG signal at the level of nanoamperes.

이 경우 측정전극(11)은 일반 이어폰의 실리콘 팁과 마찬가지로 탄성이 있는 유연한 소재로 제작된 전도성 유연 섬모 전극이므로 일반 이어폰과 마찬가지로 장시간 착용하더라도 별 다른 통증이나 이물감을 주진 않는다.In this case, the measurement electrode 11 is a conductive flexible ciliated electrode made of a flexible material that is elastic, like the silicon tip of a regular earphone, so it does not give any pain or foreign body sensation even when worn for a long time like a regular earphone.

그리고 여기서 일반 이어폰에서 음성 신호를 가청주파수 대역의 음파로 변형시키는 진동판이 내장되는 하우징에 해당되는 것이 바로 측정전극(11)을 이도 내면의 피부에 일정한 압력으로 접촉시킴과 동시에 측정전극(11)에서 측정된 신호를 단말기나 서버로 전송시키기 위해 도 5에서와 같이 마련되는 유선 또는 무선 통신모듈(36)로 전달하는 작용을 한다.And here, it corresponds to a housing in which a diaphragm that transforms an audio signal into sound waves in an audible frequency band is built-in, in which the measuring electrode 11 is brought into contact with the skin on the inner surface of the ear canal at the same time and at the measuring electrode 11 In order to transmit the measured signal to the terminal or the server, it functions to transmit to the wired or wireless communication module 36 provided as in FIG. 5.

그런데 도 4에 도시된 바와 같이 기준전극(122)과 접지전극(121)은 in-ear 이어폰에서 이도에 삽입되어 이도 내면의 피부와 직접 접촉되는 실리콘 팁에 해당되는 하나의 부재에 모두 마련되려면, 기준전극(122)과 접지전극(121) 각자의 작용이 가능하도록 전기적으로 절연될 필요가 있다.However, as shown in Figure 4, the reference electrode 122 and the ground electrode 121 are inserted into the ear canal in the in-ear earphone to be provided in one member corresponding to a silicon tip that directly contacts the skin of the inner ear canal, The reference electrode 122 and the ground electrode 121 need to be electrically insulated to enable their respective operations.

따라서 기준전극(122)과 접지전극(121)은 하나의 팁을 형성하되, 기준전극(122)과 접지전극(121) 사이에는 절연밴드(123)가 형성되어 둘 사이를 절연시킨다.Accordingly, the reference electrode 122 and the ground electrode 121 form one tip, but an insulating band 123 is formed between the reference electrode 122 and the ground electrode 121 to insulate the two.

이 경우 기준전극(122)과 접지전극(121) 내부로 삽입되는 가압 하우징(134)의 일 측에 형성된 돌출부의 외주면에는 기준전극(122)과 접지전극(121) 각각에 서로 별개로 통전이 되도록 기준전극 접속 면(133)과 접지전극 접속 면(132)이 서로 분리된 링 형상의 밴드 형태로 돌출 형성된다.In this case, the reference electrode 122 and the ground electrode 121 are inserted into the outer circumferential surface of the protrusion formed on one side of the pressing housing 134 so that the reference electrode 122 and the ground electrode 121 are energized separately from each other. The reference electrode connection surface 133 and the ground electrode connection surface 132 are protruded in a ring-shaped band shape separated from each other.

이와 같이 실시예1에서는 전도성 유연 섬모 전극이 일반적인 in-ear 형태로 형성되어 장시간 착용에서도 무리나 통증이 없고, 그러면서도 충분한 해상도로 큰 뇌파 신호를 얻을 수 있는 이도 내부 접촉 압력을 얻을 수 있으며, 측정전극(11)과 기준전극(122) 간의 거리가 크게 배치되어 또한 큰 신호를 얻을 수 있다.
As described above, in Example 1, the conductive flexible ciliated electrode is formed in a general in-ear form, so there is no stress or pain even when worn for a long time, and yet, an internal contact pressure can be obtained which can obtain a large EEG signal with sufficient resolution, and a measurement electrode. The distance between (11) and the reference electrode (122) is large and a large signal can also be obtained.

<제2실시예><Second Example>

제2실시예는 도 6에 도시된 바와 같이 귓바퀴에 걸리는 행거(34)와 행거(34)에 케이블로 연결되는 in-ear 이어폰 형태의 가압 하우징(334)로 이루어지는 가압 하우징(34,334)과, 가압 하우징(34,334)에서 가압 하우징에 결합되는 in-ear 이어폰의 실리콘 팁 형태의 접지전극(32) 및 기준전극(31)과, 행거(34)에서 관자놀이 쪽 피부에 접촉되는 면에 설치되어 피부에 밀착되는 측정전극(33) 및, 가압 하우징(34,334)의 가압 하우징(334)에서 연장되는 안테나(35)의 말단에 설치되는 통신모듈(36)로 이루어진다. 다만 안테나(35) 및 통신모듈(36)은 도 19에서와 달리 가압 하우징(334)가 아닌 행거(34)와 고정 연결될 수도 있다.The second embodiment is a pressurized housing (34,334) consisting of a pressurized housing (334) in the form of an in-ear earphone that is connected to a hanger (34) and a hanger (34) hanging on the wheel as shown in FIG. Silicon electrodes in the form of in-ear earphones coupled to a pressurized housing in the housings 34 and 334, a reference electrode 31 and a reference electrode 31, and installed on a surface in contact with the skin on the temple side of the hanger 34 to be in close contact with the skin It consists of a measurement electrode 33 and a communication module 36 installed at the end of the antenna 35 extending from the pressure housing 334 of the pressure housings 34 and 334. However, the antenna 35 and the communication module 36 may be fixedly connected to the hanger 34 rather than the pressurized housing 334 unlike in FIG. 19.

여기서 접지전극(32) 및 기준전극(31)은 제1실시예에서와 마찬가지로 어느 한 쪽의 in-ear 이어폰 형태에서 하나의 실리콘 팁에 모두 설치되어야 하므로, 제1실시예와 동일하게 절연 밴드(233)가 형성되고, 가압 하우징(334)에는 접지전극(32)과 기준전극(31) 내면에 독립적으로 밀착되는 기준전극 접속 면과 접지전극 접속 면(미도시)이 독립된 원형 밴드 형태로 돌출 형성된다.
Here, since the ground electrode 32 and the reference electrode 31 must be installed on one silicon tip in the form of one in-ear earphone, as in the first embodiment, the insulating band (as in the first embodiment) 233) is formed, and the reference electrode connection surface and the ground electrode connection surface (not shown) that are independently in close contact with the inner surfaces of the ground electrode 32 and the reference electrode 31 are formed in the pressure housing 334 to protrude in an independent circular band form. do.

한편, 본 발명에 따른 졸음운전 감지 시스템은 도 9에 도시된 바와 같이 상술한 뇌파 측정 이어폰의 세 가지 실시예 중 어느 하나와, 헤드셋에 설치된 통신모듈로부터 뇌파 신호를 수신 받아 뇌파신호 분석 앱으로 현재 뇌파 상태를 화면으로 식별 가능하게 현출시키는 단말기로 이루어진다.On the other hand, the drowsiness driving detection system according to the present invention receives one of the three embodiments of the above-described EEG measurement earphones as shown in FIG. 9 and the EEG signal from the communication module installed in the headset, and is currently used as an EEG signal analysis app. It consists of a terminal that makes the brain wave state identifiable on a screen.

여기서 단말기는 안드로이드 또는 IOS 체제로 운영되는 기기로서, 대표적인 것이 스마트폰이나 태블릿이다. 단말기는 도 21 또는 도 22에 도시된 것처럼 시간 흐름에 따른 뇌파의 주파수 및 뇌파의 상태에 따른 운전자의 두뇌 상태를 보여줄 수 있다.Here, the terminal is a device operated with an Android or IOS system, and a typical one is a smartphone or tablet. The terminal may show the frequency of the EEG over time and the brain state of the driver according to the state of the EEG as shown in FIG. 21 or FIG. 22.

단말기는 헤드셋에 설치된 통신모듈로부터 블루투스로 연동된다. 이때 통신모듈에는 미세한 뇌파 신호를 감지하여 증폭시키는 front-end 증폭회로 및 소형 블루투스 유닛(미도시)이 내장되어 pico ampere 레벨의 뇌파 신호도 감지하여 증폭시킨 후 증폭된 아날로그 신호를 AD 컨버터를 통하여 디지털 신호로 변환시켜, 변환된 디지털 신호를 내장된 상기 블루투스 유닛에 의해 단말기로 송신한다.The terminal is interlocked with Bluetooth from the communication module installed in the headset. At this time, the communication module has a built-in front-end amplifying circuit and a small Bluetooth unit (not shown) that detect and amplify the fine EEG signal, and detects and amplifies the EEG signal at the pico ampere level, and then amplifies the amplified analog signal through the AD converter. Converted into a signal, the converted digital signal is transmitted to the terminal by the built-in Bluetooth unit.

단말기에는 측정된 뇌파 신호의 진동수를 분석하여 뇌파 신호가 알파파, 베타파, 델타파, 감마파인지를 구분하고, 각 유형 내에서도 주파수별로 신호를 세분하여 알파파의 비중이 점점 증가되는 경향을 보일 경우 졸음 상태로 접어드는 것으로 판단하는 알고리즘 연산이 이루어진다.If the terminal analyzes the frequency of the measured EEG signal and distinguishes whether the EEG signal is alpha, beta, delta, or gamma, and within each type, the signal is subdivided by frequency to show the tendency of increasing the proportion of alpha waves. Algorithm calculation is performed to determine that it is entering a drowsiness state.

단말기에서 실행되는 앱에서는 뇌파 분석 알고리즘이 실행되어 시간별로 뇌파 변화의 추이가 기록되며, 이를 바탕으로 운전자의 신체 상태와 피로도가 분석되어 졸음여부의 판단의 보조 자료로 이용될 수 있다.In the app running on the terminal, the EEG analysis algorithm is executed to record the trend of EEG changes over time, and based on this, the body condition and fatigue of the driver can be analyzed and used as an auxiliary data for judging whether or not drowsiness.

이로써, 본 발명에 따른 뇌파 측정 이어폰 및 졸음운전 감지 시스템은 측정전극, 기준전극, 접지전극에 도전성 유연 섬모 전극이 사용되어, 장시간 착용하여도 운전자에게 통증이나 무리를 주지 않으면서, 특히 피부에 통증을 주지 않는 압력으로 접촉시켜도 해상도 높은 큰 신호를 얻을 수 있어, 졸음운전의 판단이 종래에 비해 현저하게 정확도가 높아질 뿐만 아니라, 장시간 착용이 가능해진 점에서 실질적으로 장거리 운전에서 절실하게 필요한 졸음운전 감지가 비로소 제대로 이루어질 수 있는 효과가 있다.
Accordingly, the EEG measuring earphone and the drowsy driving detection system according to the present invention use conductive flexible ciliated electrodes for the measuring electrode, the reference electrode, and the grounding electrode, and especially for the skin without causing pain or strain to the driver even when worn for a long time. It is possible to obtain a large signal with high resolution even when it is touched with pressure that does not give a sense of drowsiness, as well as significantly higher accuracy compared to the prior art. There is an effect that can be achieved properly.

이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능함은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명백할 것이다.
The present invention described above is not limited by the above-described embodiments and the accompanying drawings, and various substitutions, modifications and changes are possible within the scope of the present invention without departing from the technical spirit of the present invention. It will be obvious to those who have the knowledge of.

E : 귀 11,21 : 측정전극
21 : 템플 31,122 : 기준전극
33, 121 : 접지전극 34 : 행거
35 : 안테나 36,136 : 통신모듈
112 : 제1접속 홀 123,233 : 절연 밴드
124 : 제2접속 홀 131 : 측정전극 접속 면
132 : 접지전극 접속 면 133 : 기준전극 접속 면
134,334 : 가압 하우징 135 : 케이블
E: ear 11,21: measuring electrode
21: Temple 31,122: Reference electrode
33, 121: ground electrode 34: hanger
35: antenna 36,136: communication module
112: first connection hole 123,233: insulating band
124: second connection hole 131: measuring electrode connection surface
132: ground electrode connection surface 133: reference electrode connection surface
134,334: pressurized housing 135: cable

Claims (8)

삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 이도에 삽입되는 측정전극과; 측정 전극에 케이블로 연결되며, 측정전극으로부터 전달받는 뇌파 신호를 수신 받아 신호를 증폭시키는 차동 증폭모듈과; 차동 증폭 모듈로부터 증폭된 뇌파 신호를 전달 받아 생체 신호 이외의 노이즈를 제거시키는 저역 통과 필터 및 고역 통과 필터와; 저역 통과 필터 및 고역 통과 필터로부터 전달받는 뇌파 신호를 유선 또는 무선으로 전송하는 통신모듈로 구성되고, 측정전극은 탄성 재질의 수지로 제작되어 이도에 삽입되면 이도 내면에 측정전극의 표면이 밀착되며,
상기 측정전극은 이소프렌고무, 실리콘고무, 우레탄고무, 부타디엔고무, 스틸렌부타디엔고무, 아크릴로니티릴부타디엔고무, 클로로프렌 고무, 에틸렌프로필렌고무, 부틸고무, 클로로술폰화 폴리에틸렌고무, 아크릴고무, 다황화고무, 불소고무, 에피클로로히드린고무 중 적어도 1개를 포함하는 탄성 소재에 은 또는 백금으로 이루어지는 전도성 분말이 첨가되어 형성되는 전도성 탄성 소재로 이루어지고,
상기 측정전극은 액상의 실리콘에 경화제 및 전도성 금속 분말이 첨가되어 형성되고,
상기 금속 분말을 이루는 입자 각각은 내부가 수지상 결정(dendrite) 조직으로 형성되며,
상기 측정전극은 in-ear 이어폰에서 이도 내부의 피부와 접촉되는 실리콘 팁 형태로 형성되어 양 측 귀에 하나씩 마련되고, 측정전극은 기준전극 또는 접지전극과 일체로 형성되되, 측정전극은 기준전극 또는 접지전극과의 사이에 형성되는 환형 형태의 절연 밴드로 인해 전기적으로 절연되며,
상기 차동 증폭모듈과 저역 통과 필터 및 노치 필터가 내장되는 케이스로서, 일단에는 측정전극 및 기준전극 또는 측정전극 및 접지전극의 내부로 삽입되는 돌출부가 형성되어, 측정전극 및 기준전극 또는 측정전극 및 접지전극의 표면을 이도 내면에 밀착시키는 가압 하우징이 마련되며,
상기 돌출부는 외주면에 링 형태로 돌출되는 측정전극 접속 면과 접지전극 접속 면이 형성되거나, 또는 외주면에 링 형태로 돌출되는 측정전극 접속 면과 기준전극 접속 면이 형성되어, 측정전극이 접지전극 또는 기준전극과 전기적으로 서로 완전히 절연되게 구성되는 뇌파 측정 이어폰을 이용한 졸음운전 감지 시스템으로서,
상기 뇌파 측정 이어폰과;
상기 통신모듈로부터 수신 받은 뇌파신호를 분석하여 졸음상태인지 여부를 식별하는 단말기;로 구성되며,
상기 단말기는 안드로이드 또는 아이폰 운영체제로 구동되고, 단말기에는 액정 디스플레이가 설치되며, 단말기에는 상기 뇌파신호를 분석하는 뇌파신호 분석 앱이 설치되어, 차량 운전자의 뇌파 상태를 실시간으로 식별 가능하게 현출시키고,
상기 가압 하우징의 돌출부 내부에는 음성신호를 가청 가능한 주파수로 재생시키는 진동판이 내장되어, 상기 단말기에서 단말기가 수신 받은 뇌파가 졸음운전 상태인 것으로 판정될 경우, 단말기는 음성 경고 신호를 뇌파 측정 이어폰으로 송신하고, 뇌파 측정 이어폰에 내장되는 상기 진동판을 통하여 음성 경고를 재생시키는 것을 특징으로 하는 졸음운전 감지 시스템.
A measurement electrode inserted into the ear canal; A differential amplification module connected to the measurement electrode with a cable and receiving the EEG signal received from the measurement electrode and amplifying the signal; A low-pass filter and a high-pass filter for receiving noise amplified from the differential amplification module and removing noise other than a biosignal; It consists of a communication module that transmits the EEG signal received from the low-pass filter and the high-pass filter by wire or wireless, and the measuring electrode is made of an elastic material and inserted into the ear canal, the surface of the measuring electrode is in close contact with the inner surface of the ear canal.
The measurement electrodes are isoprene rubber, silicone rubber, urethane rubber, butadiene rubber, styrene-butadiene rubber, acrylonitrile-butadiene rubber, chloroprene rubber, ethylene propylene rubber, butyl rubber, chlorosulfonated polyethylene rubber, acrylic rubber, polysulfide rubber, Made of a conductive elastic material formed by adding a conductive powder made of silver or platinum to an elastic material containing at least one of fluorine rubber and epichlorohydrin rubber,
The measuring electrode is formed by adding a curing agent and a conductive metal powder to liquid silicone,
Each of the particles constituting the metal powder is formed inside of a dendrite crystal structure,
The measurement electrode is formed in the form of a silicone tip that contacts the skin inside the ear canal in an in-ear earphone, and is provided one by one on both ears, and the measurement electrode is formed integrally with a reference electrode or a ground electrode, and the measurement electrode is a reference electrode or ground. It is electrically insulated due to an annular insulating band formed between the electrodes,
As a case in which the differential amplification module, a low-pass filter, and a notch filter are built in, at one end, a measuring electrode and a reference electrode or a protrusion inserted into the inside of the measuring electrode and the ground electrode are formed, and the measuring electrode and the reference electrode or the measuring electrode and ground A pressure housing is provided to close the surface of the electrode to the inner ear canal,
The projecting portion has a measuring electrode connection surface and a ground electrode connection surface protruding in a ring shape on an outer circumferential surface, or a measuring electrode connection surface and a reference electrode connection surface protruding in a ring shape on an outer circumferential surface, so that the measuring electrode is a ground electrode or A drowsy driving detection system using EEG measuring earphones that are completely insulated from the reference electrode and electrically.
The EEG measuring earphone;
It is composed of a terminal that identifies whether or not the state of sleepiness by analyzing the EEG signal received from the communication module,
The terminal is driven by an Android or iPhone operating system, a liquid crystal display is installed on the terminal, and an EEG signal analysis app for analyzing the EEG signal is installed on the terminal, so that the EEG state of the vehicle driver can be identified in real time,
A vibration plate for reproducing the voice signal at an audible frequency is built in the protrusion of the pressurized housing, and when it is determined that the EEG received by the terminal from the terminal is in a drowsy driving state, the terminal transmits a voice warning signal to the EEG measurement earphone. And, drowsiness driving detection system characterized in that to reproduce the voice alert through the diaphragm embedded in the EEG measurement earphones.
삭제delete
KR1020180002714A 2018-01-09 2018-01-09 EEG measuring earphone detecting sleepiness while driving and the system using it KR102102421B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180002714A KR102102421B1 (en) 2018-01-09 2018-01-09 EEG measuring earphone detecting sleepiness while driving and the system using it

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180002714A KR102102421B1 (en) 2018-01-09 2018-01-09 EEG measuring earphone detecting sleepiness while driving and the system using it

Publications (2)

Publication Number Publication Date
KR20190084679A KR20190084679A (en) 2019-07-17
KR102102421B1 true KR102102421B1 (en) 2020-04-20

Family

ID=67512863

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180002714A KR102102421B1 (en) 2018-01-09 2018-01-09 EEG measuring earphone detecting sleepiness while driving and the system using it

Country Status (1)

Country Link
KR (1) KR102102421B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230069804A (en) 2021-11-12 2023-05-19 류경호 sleeping monitoring device and operating method thereof
KR20230163759A (en) 2022-05-24 2023-12-01 주식회사 슬로웨이브 Biometric information measuring device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112450950B (en) * 2020-12-10 2021-10-22 南京航空航天大学 Brain-computer aided analysis method and system for aviation accident

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018158089A (en) 2017-03-23 2018-10-11 富士ゼロックス株式会社 Brain wave measuring device and brain wave measuring system

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100956795B1 (en) * 2007-12-14 2010-05-11 한국전자통신연구원 Bio signal sensing apparatus
WO2011000375A1 (en) * 2009-07-02 2011-01-06 Widex A/S An ear plug with surface electrodes
SG177606A1 (en) 2009-07-13 2012-03-29 Widex As A hearing aid adapted fordetecting brain waves and a method for adapting such a hearing aid
KR101579364B1 (en) * 2014-01-16 2015-12-21 서울대학교산학협력단 Wireless Earhook Earset/Earphone concealing electrodes and acquisition system of electroencephalograph for brain monitoring and brain-computer interface
KR20220082852A (en) * 2015-01-06 2022-06-17 데이비드 버톤 Mobile wearable monitoring systems
KR20170091247A (en) * 2016-01-29 2017-08-09 서울대학교산학협력단 Apparatus and method for measuring electroencephalogram
KR20160024903A (en) * 2016-02-19 2016-03-07 고려대학교 산학협력단 method of manufaturing cap for detecting elctroencephalogram and Apparatus for detecting Electroencephalogram having shape of earphone with the cap

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018158089A (en) 2017-03-23 2018-10-11 富士ゼロックス株式会社 Brain wave measuring device and brain wave measuring system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230069804A (en) 2021-11-12 2023-05-19 류경호 sleeping monitoring device and operating method thereof
KR20230163759A (en) 2022-05-24 2023-12-01 주식회사 슬로웨이브 Biometric information measuring device

Also Published As

Publication number Publication date
KR20190084679A (en) 2019-07-17

Similar Documents

Publication Publication Date Title
US11690555B2 (en) EEG monitor with capacitive electrodes and method of monitoring brain waves
US11583215B2 (en) Generic ear device with electrodes
US20060094974A1 (en) Systems and methods for detecting brain waves
KR102102421B1 (en) EEG measuring earphone detecting sleepiness while driving and the system using it
US20070112277A1 (en) Apparatus and method for the measurement and monitoring of bioelectric signal patterns
JP6580497B2 (en) Apparatus, device, program and method for identifying facial expression with high accuracy using myoelectric signal
US11395615B2 (en) Fatigue and drowsiness detection
US20200275856A1 (en) An intra- and circum-aural eeg brain computer interface
US20210235203A1 (en) Portable system for gathering and processing data from eeg, eog, and/or imaging sensors
JP6452248B2 (en) Device, terminal, and program for identifying facial expression using myoelectric signal
CN113491504A (en) Earplug cover and wearable equipment containing earplug cover
US20230071021A1 (en) Electrooculogram measurement and eye-tracking
JP2019201995A (en) Electrode for acquiring biological signal and biological signal measuring system
Looney et al. Ear-EEG: Continuous brain monitoring
WO2019225244A1 (en) Biological signal acquisition electrode, biological signal acquisition electrode pair, and biological signal measurement system
US11931175B2 (en) In-ear and around-the-ear electroencephalography system with floating electrodes and method thereof
JP3156160B2 (en) Physiological condition detection sensor device
CN108236463A (en) Use the health monitoring systems of tack formula wearable device
RU2565652C1 (en) Method for analogue signal release for assessing functional state of listener using headphones
KR20200046612A (en) System for generating a warning and operating method thereof
JP2003000557A (en) Biological signal monitoring device
JP2024035728A (en) Biological information measuring device
RU147845U1 (en) HEADPHONES FOR REMOVING ANALOGUE SIGNALS AND THE FOLLOWING DETERMINATION OF THE FUNCTIONAL STATE OF THE HEARING

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant