WO2015178558A1 - P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법 - Google Patents

P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법 Download PDF

Info

Publication number
WO2015178558A1
WO2015178558A1 PCT/KR2014/011673 KR2014011673W WO2015178558A1 WO 2015178558 A1 WO2015178558 A1 WO 2015178558A1 KR 2014011673 W KR2014011673 W KR 2014011673W WO 2015178558 A1 WO2015178558 A1 WO 2015178558A1
Authority
WO
WIPO (PCT)
Prior art keywords
brain
word
input
genetic
word input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2014/011673
Other languages
English (en)
French (fr)
Inventor
김태성
아크람파라즈
한희석
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyung Hee University
Original Assignee
Kyung Hee University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyung Hee University filed Critical Kyung Hee University
Publication of WO2015178558A1 publication Critical patent/WO2015178558A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials

Definitions

  • the present invention relates to a word input method using a word input brain-computer interface system and a P300 brain-generating potential, and in particular, a P300 brain inputting characters using only a human thought in a computer or a tablet PC using the P300 brain-induced potential.
  • Word input using induced potential The present invention relates to a brain-computer interface system and a word input method using the P300 brain-genetic potential.
  • the trigger potential that occurs after 300 milliseconds (msec) when the user is given a cognitive stimulus is called the P300 brain-induced potential.
  • the method of brain-computer interface for inputting characters using the P300 brain-induced potential was devised by Farwell and Donchin (FD) in 1988. In this method, characters are arranged in rows and columns to generate the P300 brain-genetic potential, randomly blinking rows and columns are presented to the user, and when a column or row of characters to be input by the user is turned on, P300 This method detects brain-induced potentials and detects characters corresponding to the detected rows and columns.
  • the FD paradigm is a system for inputting characters one by one through visual stimulation of flickering of rows and columns in the input method, so the input speed is slow, which is disadvantageous for use in real life.
  • the research has been continued to improve the input speed and accuracy of the text input system by modifying and supplementing the recent FD paradigm.
  • the character color, the size of the character, and the spacing between the characters are modified and compared, or the size of the P300 brain-generating potential through various paradigms such as 4 ⁇ 4, 8 ⁇ 8, 12 ⁇ 12. (Amplitude) was compared or the recognition rate of P300 brain-genetic potential was improved through blinking stimulation of individual characters. In addition, the recognition rate is improved by eliminating the double blinking problem through an 8 ⁇ 9 check board paradigm.
  • SVM support vector machine
  • LDA linear discriminant analysis
  • ICA independent component analysis
  • cICA Constrained Independent Component Analysis
  • the present invention is obtained by the initial character input unit for blinking the character, the brain-genetic potential detector for detecting brain-genetic potential generated by the stimulus of the initial character inputter, the brain-genetic potential P300 brain-Word input brain-generating device comprising the smart dictionary for recommending words starting with the initial consonant letters, and a vocabulary word inputter for determining and inputting the words recommended in the smart dictionary by blinking.
  • the initial character input unit for blinking the character
  • the brain-genetic potential detector for detecting brain-genetic potential generated by the stimulus of the initial character inputter
  • the brain-genetic potential P300 brain-Word input brain-generating device comprising the smart dictionary for recommending words starting with the initial consonant letters
  • a vocabulary word inputter for determining and inputting the words recommended in the smart dictionary by blinking.
  • the initial character input unit may include an initial character input unit based on an FD paradigm in which 30 characters marked with alphabets, spaces, deletions, resets, and exits have a 6 ⁇ 5 matrix.
  • the FD paradigm-based initial character input unit blinks rows and columns.
  • the initial character input unit may include a first to seventh letter in which alphabets are grouped into three in order from A, an eighth character in which WXYZ is grouped, and a delete (DEL) letter in a 3x3 matrix.
  • a modified T9 interface paradigm based initial character input consisting of the numbers 1 to 9 below the first to eighth characters, respectively.
  • the modified T9 interface paradigm based initial character input unit blinks the numbers of the first to the ninth.
  • the smart dictionary is a TST (Ternary Search Tree) structure. Search for whole words that match the first letter and give the user the given number of words.
  • the general word input unit blinks a number assigned to a word recommended by the smart dictionary.
  • the present invention comprises the steps of the user receiving the entry of the initial letter through the initial letter input device blinking the character, and detecting the brain-gene potential generated by the stimulation of the initial letter input device with the brain-genetic potential detector, Recommending, by the smart dictionary, a word starting with a consonant letter obtained by the brain-generating stage, and confirming and inputting the word recommended by the smart dictionary by a flash word inputter by blinking.
  • P300 Provides a word input method using the brain-genetic generator.
  • the smart dictionary recommending a word starting with the leading letter obtained by the brain-genetic power generation step, the first entry of the word to be input by the user among the blinking rows and columns of the FD paradigm based entry letter inputter
  • the smart dictionary recommends words that begin with the leading letter obtained by the detected brain-genetic level.
  • the smart dictionary recommending a word starting with the leading letter obtained by the brain-generating stage may be performed by the user among the first to ninth numbers of blinking characters of the modified T9 interface paradigm-based starting letter input device.
  • the smart dictionary of the TST (Ternary Search Tree) structure recommends the word starting with the initial letter acquired by the detected brain-genetic potential.
  • the step of confirming and inputting a word recommended by the smart dictionary by the common word input unit by blinking is a word acquired by the detected brain-genetic potential when a number assigned to the word recommended by the smart dictionary blinks. Enter.
  • the present invention measures the P300 brain-genetic potential with an EEG, quickly inputs a whole word into a computer or a tablet PC, and based on this, a word using the P300 brain-genetic potential to quickly type a sentence based on the thought.
  • a word input method using an input brain-computer interface system and a P300 brain-genetic potential can be provided.
  • the present invention can quickly type a sentence only by thinking, the word input brain using the P300 brain-genetic potential capable of controlling a computer by using only an idea without using an input device such as a user's keyboard or a mouse such as Internet search word input. It is possible to provide a word input method using a computer interface system and a P300 brain-genetic generator.
  • FIG. 1 is a conceptual diagram of a character input system using a brain-computer interface according to the present invention.
  • Figure 2 is an exemplary interface diagram of the initial character input unit based on the FD paradigm of the character input system using a brain-computer interface according to the present invention.
  • FIG. 3 is an exemplary interface diagram of a modified T9 interface-based initial character input system of a character input system using a brain-computer interface according to the present invention.
  • FIG. 4 is a structure diagram of a Ternary Search Tree used in a smart dictionary of a character input system using a brain-computer interface according to the present invention.
  • FIG. 5 is a flowchart of a character input method using a brain-computer interface according to the present invention.
  • Figure 6 is an illustration of a leading letter received through the FD paradigm-based leading letter input method in the character input method using a brain-computer interface according to the present invention.
  • Figure 7 is an exemplary diagram of a first letter received through the first letter input method based on the modified T9 interface paradigm in the text input method using a brain-computer interface according to the present invention.
  • FIGS. 8 and 9 are exemplary diagrams of a general word input unit for detecting a recommended character through a smart dictionary in a character input method using a brain-computer interface according to the present invention.
  • FIGS. 10 and 11 are exemplary diagrams for finally inputting a recommended word through a smart dictionary in the character input method using a brain-computer interface according to the present invention.
  • FIG. 1 is a conceptual diagram of a character input system using a brain-computer interface according to the present invention.
  • Character input system using the brain-computer interface according to the present invention as shown in Figure 1, through the initial stimulus input device 100 for receiving the first consonant letters, and the visual stimulation by the initial letter input method 100
  • Brain-genetic potential detector 200 for inputting letters based on the acquired P300 brain-genetic potential
  • smart dictionary 300 for recommending the whole word as letters inputted from the brain-genetic potential detector 200
  • barrel word The input unit 400 is included.
  • FIG. 2 is an exemplary diagram illustrating an interface of a consonant letter input system based on the FD paradigm of the character input system using the brain-computer interface according to the present invention
  • FIG. It is an example of the interface of the interface-based initial character input method.
  • the first letter input unit 100 is for a user to input a first letter.
  • the present invention includes an initial letter input unit based on an FD based paradigm and a first type character input unit based on a modified T9 interface paradigm.
  • the FD-based paradigm-based initial character inputter is an initial character inputter based on the FD paradigm, and is composed of a 6 ⁇ 5 matrix of 30 characters marked with alphabets, spaces, deletions, resets, and exits.
  • the overheat flashes randomly at 100 millisecond (msec) intervals without limiting redundancy.
  • the modified T9 interface paradigm-based initial character inputter forms WXYZ as one group of characters, and the letters other than WXYZ form one group of three alphabets.
  • This modified T9 interface paradigm-based initial character input system consists of 'WXYZ', letters consisting of three alphabets except 'WXYZ', and 3D matrix of delete (DEL) characters.
  • DEL 3D matrix of delete
  • the FD based paradigm and the modified T9 interface paradigm have an interval of 75 milliseconds (msec) between blinking and blinking. This flicker is randomly generated 11 times, and this is repeated 15 times in total, which is 2.5 seconds (s) each time.
  • the generated P300 brain-genetic potential is provided to a brain-genetic potential detector which will be described later.
  • the blinking time and the number of occurrences of the initial character input unit can be arbitrarily changed without limiting.
  • the initial character inputter 100 flickers rows and columns, and in the case of the modified T9 interface paradigm-based number, a number including characters blinks randomly. Therefore, when the target character that the user thinks blinks, the P300 brain-generating potential is generated.
  • the generated P300 brain-generating potential is detected by the brain-generating potential detector 200 to be described later, and transmits the initial input character to the smart dictionary 300.
  • the brain-genetic potential detector 200 detects the P300 brain-genetic potential generated in the brain of the user. Given the somatic stimulus that the user is focused on, EEG generates an event-linked potential according to the stimulus. P300 refers to the peak towards the + potential at the event linkage potential that occurs about 300 ms after the stimulus is given. In the FD paradigm-based initial letter input system or the modified T9 interface-based initial letter input system, when the user is staring at the stimulus, the event linkage potential appears in the EEG, and after about 300 ms, the P300 is applied to the EEG. Occurs. The brain-genetic potential detector 200 detects the generated P300 brain-genetic potential at this time.
  • FIG. 4 is a structure diagram of a Ternary Search Tree used in a smart dictionary of a text input system using a brain-computer interface according to the present invention.
  • the barrel word input unit 400 recommends a barrel word possible with a combination of the first letter inputted from the smart dictionary 300.
  • the whole word input paradigm consists of a 3 * 3 matrix, where the key points corresponding to each number are randomly blinking at 100 millisecond intervals (msec) without limiting overlap, and between 75 milliseconds msec) interval. This flicker is generated randomly nine times.
  • the generated brain wave detects the P300 brain-genetic potential corresponding to the key point through the brain-genetic potential detector 200, so that the whole word can be input.
  • the smart dictionary 300 recommends a word defined based on the P300 brain-genetic potential obtained through the brain-genetic potential detector 200, and all words of the smart dictionary 300 are the same as those of FIG. 4. It consists of the structure of Ternary Search Tree (TST).
  • TST Ternary Search Tree
  • the smart dictionary 300 is based on the P300 brain-genetic potential obtained through the brain-genetic potential detector 200, and the initial letter is detected by the brain-genetic potential detector 200 by the Ternary Search Tree structure. Recommended.
  • the smart dictionary recommends a plurality of barrel words based on the initial letter detected by the initial letter input device and the brain-genetic potential detector, thereby allowing the user to quickly and accurately enter a word to be input.
  • FIG. 5 is a flowchart of a character input method using a brain-computer interface according to the present invention.
  • Character input method using a brain-computer interface as shown in Figure 5, the step of receiving a consonant character (S1), the step of detecting the brain-genetic potential (S2), recommending a general word Step S3, and step S4 of inputting a general word.
  • step S1 of receiving the initial letter the first letter of the user inputs through the initial letter input unit.
  • step of receiving the initial letter (S1) is a step of receiving the initial letter with the initial letter inputter based on the FD paradigm (S1-1), or the modified T9 interface paradigm-based initial letter inputter in order to receive the first letter.
  • step S1-2 an initial letter is input.
  • FIG. 6 is an exemplary diagram of a consonant letter received through a FD paradigm-based consonant letter input method in a text input method using a brain-computer interface according to the present invention.
  • step S1-1 the entry of the initial letter into the initial letter input method based on the FD paradigm gazes at the initial letter of the user to input from among the characters displayed on the initial letter input method of the FD paradigm.
  • FIG. 6 is a consonant character inputted through an FD paradigm based consonant character inputter when a user wants to input 'great'.
  • the initial character input method based on the FD paradigm consists of a 6 ⁇ 5 matrix of 30 characters marked with alphabets, spaces, deletions, resets, and exits, and the rows and columns are limited to overlapping at intervals of 100 milliseconds (msec). Randomly blinks without placing
  • FIG. 7 is an exemplary diagram of an initial letter received through a first letter input device based on a modified T9 interface paradigm in the method of inputting a letter using a brain-computer interface according to the present invention.
  • FIG. 7 is a consonant character received through a consonant character inputter based on a modified T9 interface paradigm when a user wants to input 'mountain'.
  • the initial character input system based on the modified T9 interface paradigm forms WXYZ as a group, and letters other than WXYZ are formed as a group of three alphabets.
  • This modified T9 interface paradigm-based initial character input system consists of 'WXYZ', letters consisting of three alphabets except 'WXYZ', and 3D matrix of delete (DEL) characters.
  • DEL 3D matrix of delete
  • Nine numbers are listed.
  • the points corresponding to the nine numbers are randomly blinking without limiting duplication at intervals of 100 milliseconds (msec). Of course, this blink interval may vary depending on the situation. That is, the numbers described below the characters are randomly blinking, and the user thinks of the target character to be input. At this time, as will be described later, when the number corresponding to the target character thinks the user blinks P300 brain-genetic potential is generated.
  • the brain-genetic potential is detected from the user who has been stimulated through the step S1 of receiving the initial letter.
  • EEG Given the somatic stimulus that the user is focused on, EEG generates an event-linked potential according to the stimulus.
  • P300 refers to the peak towards the + potential at the event linkage potential that occurs about 300 ms after the stimulus is given.
  • step S1-1 an initial letter is input using the first letter input method based on the FD paradigm, or the first letter is input using the first letter input method based on the modified T9 interface (S1-2).
  • the event linkage potential appears in the EEG, and P300 occurs in the EEG approximately 300 ms after the stimulus is given.
  • the generated P300 brain-genetic potential is detected.
  • FIG. 8 and 9 are exemplary diagrams of a general word input unit for detecting a recommended character through a smart dictionary in a character input method using a brain-computer interface according to the present invention.
  • FIG. 8 detects letters recommended by first letter characters entered through the FD paradigm-based entry letter characters
  • FIG. 9 is recommended by entry letters input through the modified T9 interface paradigm-based entry letters. To detect missing characters.
  • the general word is recommended in the smart dictionary based on the initial letter of the word to be input by the user obtained through the detection of the brain-genetic potential (S2).
  • S2 is an example of a whole word recommended by the smart dictionary based on the initial letter received through the initial letter input device based on the FD paradigm. Referring to FIG. 8, seven barrel words starting with 'gr' are preferred and starting with 'gr' are recommended.
  • 9 is an example of a general word recommended by a smart dictionary based on a consonant letter inputted through a consonant letter input unit based on a modified T9 interface paradigm. Referring to FIG. 9, the smart dictionary recommends nine barrel words starting with an alphabetical letter corresponding to '557'.
  • FIG. 10 and 11 are exemplary diagrams for finally inputting a recommended word through a smart dictionary in the character input method using a brain-computer interface according to the present invention.
  • FIG. 10 illustrates input of a finally selected word among letters recommended by the first entry characters inputted through the FD paradigm-based entry character inputter
  • FIG. 11 inputs through the entry system based on the modified T9 interface paradigm. It is to enter the last selected word among the letters recommended by the initial letter.
  • a user In the step S4 of inputting a barrel word, a user inputs a word to be input among the barrel words recommended in the step S3 of recommending the barrel word. 10 and 11, the user may finally input 'great' or 'mountain' recommended in the smart dictionary.
  • the present invention utilizes the P300 brain-generating potential to quickly and accurately input a word that a user wants to input by recommending a plurality of whole words based on the initial character detected by the initial character input and the brain-genetic potential detector. Provide a word input method.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 단어 입력 뇌-컴퓨터 인터페이스 및 P300 뇌-유발전위를 이용한 단어 입력 방법에 대한 것으로서, 특히 P300 뇌-유발 전위를 이용하여 컴퓨터 또는 태블릿 PC에서 사람의 생각만으로 문자를 입력하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법에 관한 것이다. 본 발명은 뇌파측정기(EEG)로 P300 뇌-유발전위를 측정하여, 컴퓨터나 태블릿 PC에 통 단어를 빠르게 입력하고, 이를 기반으로 생각만으로 문장을 빠르게 타이핑할 수 있다. 또한, 본 발명은 생각만으로 문장을 빠르게 타이핑할 수 있으므로, 인터넷 검색 단어 입력 등 사용자의 키보드나 마우스와 같은 입력 장치를 사용하지 않고 생각만으로 컴퓨터를 제어가 가능하다.

Description

P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법
본 발명은 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법에 대한 것으로서, 특히 P300 뇌-유발 전위를 이용하여 컴퓨터 또는 태블릿 PC에서 사람의 생각만으로 문자를 입력하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법에 관한 것이다.
사용자에게 일정한 인지 자극을 주었을 때, 300밀리세컨드(msec) 후에 발생하는 유발전위를 P300 뇌-유발 전위라 한다. P300 뇌-유발 전위를 이용하여 문자(character)를 입력하는 뇌-컴퓨터 인터페이스의 방법은 1988년 Farwell과 Donchin (FD)이 고안 하였다. 이 방법에서는 P300 뇌-유발전위 발생을 위하여 문자(character)를 행과 열로 배치하고, 임의로 깜빡이는 행과 열을 사용자에게 제시하고, 사용자가 입력하고자하는 문자의 열 혹은 행이 켜졌을 경우, 발생한 P300 뇌-유발 전위를 검출하여, 검출된 행과 열에 해당하는 문자를 검출하여 문자를 입력 시키는 방법이다. FD 패러다임의 경우 입력기의 행과 열의 깜빡임의 시각 자극을 통하여 문자를 한 글자씩 입력하는 시스템이기 때문에 입력 속도가 느려, 실제 일상생활에서 사용하기에는 단점이 있다.
P300 뇌-유발전위 기반의 문자 입력 시스템을 실생활에 적용하기 위하여, 최근 FD 패러다임을 수정 보완 하여, 문자 입력 시스템의 입력 속도 및 정확성을 높이기 위하여 연구가 계속 되고 있다. 즉 FD 패러다임을 기본으로 하여 문자의 색깔, 문자의 크기, 문자 간의 간격 등을 수정하여 비교하거나, 4×4, 8×8, 12×12 등 다양한 크기의 패러다임을 통하여 P300 뇌-유발전위의 크기(Amplitude)를 비교하거나, 개별 문자의 깜빡임 자극을 통하여 P300 뇌-유발전위의 검출 인식률을 향상시켰다. 또한, 8×9의 체크보드 패러다임을 통하여 이중 깜빡임 문제를 제거함으로써, 인식률을 향상시켰다. 또한 입력기의 정확성을 높이기 위하여, 서포트 벡터 머신(Suppot Vector Machine; SVM), 선형판별분석(Linear Discriminant Analysis; LDA), 신경망 분석(Neural Network), 독립 성분 분석법(Independent Component Analysis; ICA), 제한된 독립 성분 분석법(Constrained Independent Component Analysis; cICA)등의 P300 뇌-유발전위의 검출기를 제안하고 있다.
본 발명의 목적은 기존의 한 문자씩 입력하는 방법에서 탈피하여 사용자가 생각하는 통 단어를 빠르게 입력하여 사용자의 생각만으로 문장을 빠르게 타이핑할 수 있는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법을 제공하는 것이다.
상술한 목적을 달성하기 위해 본 발명은 문자를 점멸하는 초성 문자 입력기와, 상기 초성 문자 입력기의 자극에 의해 발생된 뇌-유발전위를 검출하는 뇌-유발전위 검출기, 상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 추천하는 스마트 사전, 및 상기 스마트 사전에서 추천한 단어를 점멸에 의해 확정하여 입력하는 통 단어 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템을 제공한다.
상기 초성 문자 입력기는, 알파벳과 스페이스, 삭제, 리셋 및 나가기가 표시된 30개의 문자가 6×5 행렬로 이루어진 FD 패러다임 기반의 초성 문자 입력기를 포함할 수 있다. 이 경우, 상기 FD 패러다임 기반의 초성 문자 입력기는 행과 열이 점멸한다.
또한, 본 발명에서 상기 초성 문자 입력기는, 알파벳이 A부터 순서대로 3개씩 하나로 그룹화된 제 1 내지 제 7 문자와, WXYZ가 그룹화된 제 8 문자, 및 삭제(DEL) 문자가 3×3 행렬로 이루어지며, 제 1 내지 제 8 문자 아래에 1 내지 9의 숫자가 각각 기재된, 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 포함한다. 이 경우, 상기 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 상기 제 1 내지 9의 숫자가 점멸한다.
상기 스마트 사전은 TST(Ternary Search Tree) 구조이다. 초성 문자와 일치하는 통단어를 검색하여 사용자에게 주어진 수의 통단어를 제공한다.
상기 통 단어 입력기는 상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸한다.
또한, 본 발명은 문자가 점멸되는 초성 문자 입력기를 통해 사용자가 초성 문자를 입력받는 단계와, 상기 초성 문자 입력기의 자극에 의해 발생된 뇌-유발전위를 뇌-유발전위 검출기로 검출하는 단계, 상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계, 및 통 단어 입력기로 상기 스마트 사전이 추천한 단어를 점멸에 의해 확정하여 입력하는 단계를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법을 제공한다.
이 경우, 상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계는, 상기 FD 패러다임 기반의 초성 문자 입력기의 점멸하는 행과 열 중 사용자가 입력하고자 하는 단어의 초성이 포함된 행 또는 열이 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 초성 문자로 시작하는 단어를 스마트 사전이 추천한다.
이 경우, 상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계는, 상기 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기의 점멸하는 제 1 내지 제 9 숫자 중 사용자가 입력하고자 하는 단어의 초성이 포함된 숫자가 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 초성 문자로 시작하는 단어를 TST(Ternary Search Tree) 구조의 스마트 사전이 추천한다.
상기 통 단어 입력기로 상기 스마트 사전이 추천한 단어를 점멸에 의해 확정하여 입력하는 단계는, 상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 단어를 입력한다.
또한, 상기 점멸은 소정 간격으로 중복에 제한을 두지 않고 임의적으로 수행되는 것이 효과적이다.
본 발명은 뇌파측정기(EEG)로 P300 뇌-유발전위를 측정하여, 컴퓨터나 태블릿 PC에 통 단어를 빠르게 입력하고, 이를 기반으로 생각만으로 문장을 빠르게 타이핑할 수 있는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법을 제공할 수 있다.
또한, 본 발명은 생각만으로 문장을 빠르게 타이핑할 수 있으므로, 인터넷 검색 단어 입력 등 사용자의 키보드나 마우스와 같은 입력 장치를 사용하지 않고 생각만으로 컴퓨터를 제어가 가능한 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 P300 뇌-유발전위를 이용한 단어 입력 방법을 제공할 수 있다.
도 1은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 개념도.
도 2는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 FD 패러다임 기반인 초성 문자 입력기의 인터페이스 예시도.
도 3은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 변형된 T9 인터페이스 기반의 초성 문자 입력기의 인터페이스 예시도.
도 4는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 스마트 사전에서 사용되는 Ternary Search Tree 구조도.
도 5는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법의 순서도.
도 6은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 FD 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자의 예시도.
도 7은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자의 예시도.
도 8과 도 9는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 스마트 사전을 통해 추천된 문자를 검출하는 통 단어 입력기의 예시도.
도 10과 도 11은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 스마트 사전을 통해 추천된 단어를 최종적으로 입력하는 예시도.
이하, 도면을 참조하여 본 발명의 실시예를 상세히 설명하기로 한다.
그러나 본 발명은 이하에서 개시되는 실시예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 도면상의 동일 부호는 동일한 요소를 지칭한다.
도 1은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 개념도이다.
본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템은 도 1에 도시된 바와 같이, 첫 번째 초성 문자를 입력받기 위한 초성 문자 입력기(100)와, 초성 문자 입력기(100)에 의한 시각적 자극을 통해 획득된 P300 뇌-유발전위를 기반으로 글자를 입력하는 뇌-유발전위 검출기(200), 뇌-유발전위 검출기(200)에서 입력된 글자로 통 단어를 추천하는 스마트 사전(300), 및 통 단어 입력기(400)를 포함한다.
도 2는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 FD 패러다임 기반인 초성 문자 입력기의 인터페이스 예시도이며, 도 3은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 변형된 T9 인터페이스 기반의 초성 문자 입력기의 인터페이스 예시도이다.
초성 문자 입력기(100)는 사용자가 초성 문자를 입력하기 위한 것으로서, 본 발명은 FD 기반 패러다임 기반의 초성 문자 입력기와 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 포함한다.
FD 기반 패러다임 기반의 초성 문자 입력기는 도 2에 도시된 바와 같이, FD 패러다임 기반인 초성 문자 입력기는 알파벳과, 스페이스, 삭제, 리셋, 나가기가 표시된 30개의 문자가 6×5 행렬로 이루어져 있으며, 행과 열이 100밀리세컨드(msec) 간격으로 중복에 제한을 두지 않고 임의적으로 깜박인다.
변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 도 3에 도시된 바와 같이, WXYZ가 하나의 그룹으로 문자를 이루고, WXYZ를 제외한 나머지 알파벳이 3개씩 하나의 그룹으로 문자를 이룬다. 이러한 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 'WXYZ'와, 'WXYZ'를 제외한 나머지 알파벳이 3개씩 모여 이루는 문자, 및 삭제(DEL) 문자가 3×3 행렬로 이루어져 있으며, 각각의 문자 아래에는 9개의 숫자가 기재된다. 또한, 9개의 숫자에 해당하는 포인트가 100 밀리세컨드(msec) 간격으로 중복에 제한을 두지 않고 임의적으로 깜빡이게 된다.
여기서, FD 기반 패러다임과 변형된 T9 인터페이스 패러다임은 깜빡임과 깜빡임 사이에 75 밀리세컨드(msec)의 간격을 갖는다. 이러한 깜빡임을 임의적으로 11번 발생시키게 되고 이것을 총 15번 반복하게 되는데, 반복되는 횟수마다 2.5초(s)를 갖게 된다. 이때 발생한 P300 뇌-유발전위를 후술될 뇌-유발전위 검출기에 제공한다. 한편, 본 발명에서 초성 문자 입력기의 깜빡이는 시간과 발생횟수 반복 횟수는 제한을 두지 않고 임의로 바꿀 수 있다.
즉, 초성 문자 입력기(100)는 FD 패러다임 기반의 경우에는 행과 열이 깜박이고, 변형된 T9 인터페이스 패러다임 기반의 경우 문자가 포함된 숫자가 임의로 깜박인다. 따라서, 사용자가 생각하는 대상 문자가 깜박일 때, P300 뇌-유발전위가 발생하게 된다. 본 발명은 이렇게 발생된 P300 뇌-유발전위를 후술될 뇌-유발전위 검출기(200)가 검출하게 되고, 초성 입력 문자를 스마트 사전(300)에 전달한다.
뇌-유발전위 검출기(200)는 사용자의 뇌에서 발생된 P300 뇌-유발전위를 검출한다. 사용자가 집중하고 있는 체성 자극이 주어지면 뇌파에는 해당 자극에 따른 사건 연계 전위가 발생하게 된다. P300은 자극이 주어진 이후 약 300ms 이후에 발생하는 사건 연계 전위에서의 +전위로 향하는 피크를 의미한다. FD 패러다임 기반인 초성 문자 입력기 또는 변형된 T9 인터페이스 기반의 초성 문자 입력기에서 사용자가 응시하고 있는 문자에 자극이 주어지게 되면 사건 연계 전위가 뇌파에 나타나게 되고, 자극이 주어진 약 300ms 이후에는 뇌파에 P300이 발생한다. 뇌-유발전위 검출기(200)는 이때 발생된 P300 뇌-유발전위를 검출한다.
도 4는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 시스템의 스마트 사전에서 사용되는 Ternary Search Tree 구조도이다.
통 단어 입력기(400)는 스마트 사전(300)에서 입력된 초성문자의 조합으로 가능한 통 단어를 추천해준다. 통 단어 입력 패러다임은 3*3 행렬로 이루어져 있으며, 각 번호에 해당하는 키 포인트가 100밀리세컨드(msec) 간격으로 중복에 제한을 두지 않고 임의적으로 깜빡이게 되고, 깜빡임과 깜빡임 사이는 75 밀리 세컨드(msec) 간격을 갖는다. 이러한 깜빡임을 임의적으로 9번 발생시키게 된다. 이때 발생한 뇌파를 뇌-유발전위 검출기(200)를 통하여 키 포인트에 해당하는 P300 뇌-유발전위를 검출하여 통 단어 입력을 할 수 있도록 한다.
여기서, 스마트 사전(300)은 뇌-유발전위 검출기(200)를 통해 획득한 P300 뇌-유발전위를 바탕으로 하여 정의된 단어를 추천하며, 이러한 스마트 사전(300)의 모든 단어는 도 4와 같은 Ternary Search Tree(TST)의 구조로 이루어져 있다. 스마트 사전(300)은 뇌-유발전위 검출기(200)를 통해 획득한 P300 뇌-유발전위를 바탕으로 하여, Ternary Search Tree 구조에 의해 뇌-유발전위 검출기(200)를 통해 검출된 초성 문자로 문자를 추천한다.
상술한 바와 같이, 본 발명은 초성 문자 입력기와 뇌-유발전위 검출기로 검출한 초성 문자를 기반으로 스마트 사전이 다수개의 통 단어를 추천함으로써 사용자가 입력하고자 하는 단어를 빠르고 정확하게 입력할 수 있는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템을 제공한다.
다음은 본 발명에 따른 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에 대해 도면을 참조하여 설명하고자 한다. 후술할 내용 중 전술된 본 발명에 따른 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법의 설명과 중복되는 내용은 생략하거나 간략히 설명한다.
도 5는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법의 순서도이다.
본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법은 도 5에 도시된 바와 같이, 초성 문자를 입력받는 단계(S1)와, 뇌-유발전위를 검출하는 단계(S2), 통 단어를 추천하는 단계(S3), 및 통 단어를 입력하는 단계(S4)를 포함한다.
초성 문자를 입력받는 단계(S1)는 초성 문자 입력기를 통하여 사용자가 입력하고자 하는 초성 문자를 입력받는다. 또한, 초성 문자를 입력받는 단계(S1)는 초성 문자를 입력받기 위해서, FD 패러다임 기반인 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-1), 또는 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-2)를 포함한다.
도 6은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 FD 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자의 예시도이다.
FD 패러다임 기반인 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-1)는 FD 패러다임 기반인 초성 문자 입력기에 표시된 문자 중에서 사용자가 입력하고자 하는 초성 문자를 응시한다. 도 6은 사용자가 'great'를 입력하길 원할 때 FD 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자이다. 여기서, FD 패러다임 기반인 초성 문자 입력기는 알파벳과, 스페이스, 삭제, 리셋, 나가기가 표시된 30개의 문자가 6×5 행렬로 이루어져 있으며, 행과 열이 100밀리세컨드(msec) 간격으로 중복에 제한을 두지 않고 임의적으로 깜박인다. 또한, 사용자는 자신이 입력하고자 하는 대상 문자를 생각한다. 이때, 후술될 바와 같이, 사용자가 생각하는 대상 문자가 깜박일 경우 P300 뇌-유발전위가 발생된다.
도 7은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자의 예시도이다.
변형된 T9(predictive text) 인터페이스 패러다임 기반의 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-2)는 변형된 T9 인터페이스 패러다임 기반인 초성 문자 입력기에 표시된 문자 중에서 사용자가 입력하고자 하는 초성 문자를 응시한다. 도 7은 사용자가 'mountain'을 입력하길 원할 때 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력받는 초성 문자이다.
변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 WXYZ가 하나의 그룹으로 문자를 이루고, WXYZ를 제외한 나머지 알파벳이 3개씩 하나의 그룹으로 문자를 이룬다. 이러한 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 'WXYZ'와, 'WXYZ'를 제외한 나머지 알파벳이 3개씩 모여 이루는 문자, 및 삭제(DEL) 문자가 3×3 행렬로 이루어져 있으며, 각각의 문자 아래에는 9개의 숫자가 기재된다. 또한, 9개의 숫자에 해당하는 포인트가 100 밀리세컨드(msec) 간격으로 중복에 제한을 두지 않고 임의적으로 깜빡이게 된다. 물론, 이러한 점멸 간격은 상황에 따라 달라질 수 있다. 즉, 문자 아래에 기재된 숫자가 임의적으로 깜박이며, 사용자는 자신이 입력하고자 하는 대상 문자를 생각한다. 이때, 후술될 바와 같이, 사용자가 생각하는 대상 문자에 해당하는 숫자가 깜박일 경우 P300 뇌-유발전위가 발생된다.
뇌-유발전위를 검출하는 단계(S2)는 초성 문자를 입력받는 단계(S1)를 통해 자극을 받은 사용자에게서 뇌-유발전위를 검출한다. 사용자가 집중하고 있는 체성 자극이 주어지면 뇌파에는 해당 자극에 따른 사건 연계 전위가 발생하게 된다. P300은 자극이 주어진 이후 약 300ms 이후에 발생하는 사건 연계 전위에서의 +전위로 향하는 피크를 의미한다. FD 패러다임 기반인 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-1), 또는 변형된 T9 인터페이스 기반의 초성 문자 입력기로 초성 문자를 입력받는 단계(S1-2)에서 사용자가 응시하고 있는 문자에 자극이 주어지게 되면 사건 연계 전위가 뇌파에 나타나게 되고, 자극이 주어진 약 300ms 이후에는 뇌파에 P300이 발생한다. 뇌-유발전위를 검출하는 단계(S2)는 이때 발생된 P300 뇌-유발전위를 검출한다.
도 8과 도 9는 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 스마트 사전을 통해 추천된 문자를 검출하는 통 단어 입력기의 예시도이다. 여기서, 도 8은 FD 패러다임 기반의 초성 문자 입력기를 통해 입력된 초성 문자에 의해 추천된 문자를 검출하는 것이며, 도 9는 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력받은 초성 문자에 의해 추천된 문자를 검출하는 것이다.
통 단어를 추천하는 단계(S3)는 뇌-유발전위를 검출하는 단계(S2)를 통해 획득된 사용자가 입력하고자 하는 단어의 초성 문자를 기반으로 스마트 사전에서 통 단어를 추천한다. 도 8은 FD 패러다임 기반의 초성 문자 입력기를 통해 입력받은 초성 문자를 기본으로 하여 스마트 사전이 추천한 통 단어의 예시이다. 도 8을 참조하면, 'gr'이 초성이고, 'gr'로 시작되는 7개의 통 단어가 추천된다. 또한, 도 9는 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력받은 초성 문자를 기본으로 하여 스마트 사전이 추천한 통 단어의 예시이다. 도 9를 참조하면, 스마트 사전이 '557'에 해당하는 영문자로 시작되는 9개의 통 단어를 추천하고 있다.
도 10과 도 11은 본 발명에 따른 뇌-컴퓨터 인터페이스를 이용한 문자 입력 방법에서 스마트 사전을 통해 추천된 단어를 최종적으로 입력하는 예시도이다. 여기서, 도 10은 FD 패러다임 기반의 초성 문자 입력기를 통해 입력된 초성 문자에 의해 추천된 문자 중 최종적으로 선택된 단어를 입력하는 것이며, 도 11은 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 통해 입력된 초성 문자에 의해 추천된 문자 중 최종적으로 선택된 단어를 입력하는 것이다.
통 단어를 입력하는 단계(S4)는 통 단어를 추천하는 단계(S3)에서 추천된 통 단어 중, 사용자가 입력하고자 하는 단어를 입력한다. 이는 도 10과 도 11에 도시된 바와 같이, 사용자는 스마트 사전에서 추천된 'great' 또는 'mountain'을 최종적으로 입력할 수 있다.
본 발명은 초성 문자 입력기와 뇌-유발전위 검출기로 검출한 초성 문자를 기반으로 스마트 사전이 다수개의 통 단어를 추천함으로써 사용자가 입력하고자 하는 단어를 빠르고 정확하게 입력할 수 있는 P300 뇌-유발전위를 이용한 단어 입력 방법을 제공한다.
이상에서는 도면 및 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허청구범위에 기재된 본 발명의 기술적 사상으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (20)

  1. 문자를 점멸하는 초성 문자 입력기와,
    상기 초성 문자 입력기의 자극에 의해 발생된 뇌-유발전위를 검출하는 뇌-유발전위 검출기,
    상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 추천하는 스마트 사전, 및
    상기 스마트 사전에서 추천한 단어를 점멸에 의해 확정하여 입력하는 통 단어 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  2. 청구항 1에 있어서,
    상기 초성 문자 입력기는,
    알파벳과 스페이스, 삭제, 리셋 및 나가기가 표시된 30개의 문자가 6×5 행렬로 이루어진 FD 패러다임 기반의 초성 문자 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  3. 청구항 2에 있어서,
    상기 FD 패러다임 기반의 초성 문자 입력기는 행과 열이 점멸하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  4. 청구항 1에 있어서,
    상기 초성 문자 입력기는,
    알파벳이 A부터 순서대로 3개씩 하나로 그룹화된 제 1 내지 제 7 문자와, WXYZ가 그룹화된 제 8 문자, 및 삭제(DEL) 문자가 3×3 행렬로 이루어지며, 제 1 내지 제 8 문자 아래에 1 내지 9의 숫자가 각각 기재된, 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  5. 청구항 4에 있어서,
    상기 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기는 상기 제 1 내지 9의 숫자가 점멸하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  6. 청구항 3에 있어서,
    상기 스마트 사전은 TST(Ternary Search Tree) 구조인 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  7. 청구항 6에 있어서,
    상기 통 단어 입력기는 상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  8. 청구항 7에 있어서,
    상기 점멸은 소정 간격으로 중복에 제한을 두지 않고 임의적으로 수행되는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  9. 청구항 5에 있어서,
    상기 스마트 사전은 TST(Ternary Search Tree) 구조인 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  10. 청구항 9에 있어서,
    상기 통 단어 입력기는 상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  11. 청구항 10에 있어서,
    상기 점멸은 소정 간격으로 중복에 제한을 두지 않고 임의적으로 수행되는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템.
  12. 문자가 점멸되는 초성 문자 입력기를 통해 사용자로부터 초성 문자를 입력받는 단계와,
    상기 초성 문자 입력기의 자극에 의해 발생된 뇌-유발전위를 뇌-유발전위 검출기로 검출하는 단계,
    상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계, 및
    통 단어 입력기로 상기 스마트 사전이 추천한 단어를 점멸에 의해 확정하여 입력하는 단계를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  13. 청구항 12에 있어서,
    상기 초성 문자 입력기는,
    알파벳과 스페이스, 삭제, 리셋 및 나가기가 표시된 30개의 문자가 6×5 행렬로 이루어진 FD 패러다임 기반의 초성 문자 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  14. 청구항 13에 있어서,
    상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계는,
    상기 FD 패러다임 기반의 초성 문자 입력기의 점멸하는 행과 열 중 사용자가 입력하고자 하는 단어의 초성이 포함된 행 또는 열이 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  15. 청구항 12에 있어서,
    상기 초성 문자 입력기는,
    알파벳이 A부터 순서대로 3개씩 하나로 그룹화된 제 1 내지 제 7 문자와, WXYZ가 그룹화된 제 8 문자, 및 삭제(DEL) 문자가 3×3 행렬로 이루어지며, 제 1 내지 제 8 문자 아래에 제 1 내지 제 9의 숫자가 각각 기재된, 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기를 포함하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  16. 청구항 15에 있어서,
    상기 뇌-유발전위에 의해 획득된 초성 문자로 시작하는 단어를 스마트 사전이 추천하는 단계는,
    상기 변형된 T9 인터페이스 패러다임 기반의 초성 문자 입력기의 점멸하는 제 1 내지 제 9 숫자 중 사용자가 입력하고자 하는 단어의 초성이 포함된 숫자가 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 초성 문자로 시작하는 단어를 TST(Ternary Search Tree) 구조의 스마트 사전이 추천하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  17. 청구항 14에 있어서,
    상기 통 단어 입력기로 상기 스마트 사전이 추천한 단어를 점멸에 의해 확정하여 입력하는 단계는,
    상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 단어를 입력하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  18. 청구항 17에 있어서,
    상기 점멸은 소정 간격으로 중복에 제한을 두지 않고 임의적으로 수행되는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  19. 청구항 16에 있어서,
    상기 통 단어 입력기로 상기 스마트 사전이 추천한 단어를 점멸에 의해 확정하여 입력하는 단계는,
    상기 스마트 사전에서 추천한 단어에 부여된 숫자가 점멸될 때, 검출된 뇌-유발전위에 의해 획득되는 단어를 입력하는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
  20. 청구항 19에 있어서,
    상기 점멸은 소정 간격으로 중복에 제한을 두지 않고 임의적으로 수행되는 것을 특징으로 하는 P300 뇌-유발전위를 이용한 단어 입력 방법.
PCT/KR2014/011673 2014-05-20 2014-12-02 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법 Ceased WO2015178558A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140060503A KR101581895B1 (ko) 2014-05-20 2014-05-20 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법
KR10-2014-0060503 2014-05-20

Publications (1)

Publication Number Publication Date
WO2015178558A1 true WO2015178558A1 (ko) 2015-11-26

Family

ID=54554200

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/011673 Ceased WO2015178558A1 (ko) 2014-05-20 2014-12-02 P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법

Country Status (2)

Country Link
KR (1) KR101581895B1 (ko)
WO (1) WO2015178558A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110833407A (zh) * 2019-09-17 2020-02-25 首都医科大学宣武医院 基于matlab的皮质-皮质间诱发电位数据处理方法
CN114020158A (zh) * 2021-11-26 2022-02-08 清华大学 网页搜索方法及装置、电子设备和存储介质

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10223634B2 (en) 2014-08-14 2019-03-05 The Board Of Trustees Of The Leland Stanford Junior University Multiplicative recurrent neural network for fast and robust intracortical brain machine interface decoders
KR101939363B1 (ko) 2016-09-09 2019-01-16 고려대학교 산학협력단 사용환경에 적응적인 뇌-컴퓨터 인터페이스 장치 및 그 장치의 동작 방법
US12008987B2 (en) 2018-04-30 2024-06-11 The Board Of Trustees Of The Leland Stanford Junior University Systems and methods for decoding intended speech from neuronal activity
US10949086B2 (en) 2018-10-29 2021-03-16 The Board Of Trustees Of The Leland Stanford Junior University Systems and methods for virtual keyboards for high dimensional controllers
KR102276522B1 (ko) 2019-08-19 2021-07-12 금오공과대학교 산학협력단 뇌-컴퓨터 인터페이스 시스템을 위한 다중 뇌 신호 기반의 사용자 의도 시점 검출 방법 및 그 장치
US11640204B2 (en) 2019-08-28 2023-05-02 The Board Of Trustees Of The Leland Stanford Junior University Systems and methods decoding intended symbols from neural activity

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070075113A (ko) * 2006-01-12 2007-07-18 주식회사 케이티프리텔 이동통신단말에서의 초성자음을 이용한 문자 입력장치 및방법과 이를 위한 이동통신단말
KR20080075299A (ko) * 2007-02-12 2008-08-18 한국과학기술원 뇌파를 이용한 단어 인식 시스템 및 단어 인식 방법
KR20120125072A (ko) * 2011-05-06 2012-11-14 고려대학교 산학협력단 뇌파를 이용한 문자 입력 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 매체
KR20130002590A (ko) * 2011-06-29 2013-01-08 한양대학교 산학협력단 안정상태 시각유발전위를 이용한 ｑｗｅｒｔｙ 타입의 문자 입력 인터페이스 장치 및 문자 입력 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070075113A (ko) * 2006-01-12 2007-07-18 주식회사 케이티프리텔 이동통신단말에서의 초성자음을 이용한 문자 입력장치 및방법과 이를 위한 이동통신단말
KR20080075299A (ko) * 2007-02-12 2008-08-18 한국과학기술원 뇌파를 이용한 단어 인식 시스템 및 단어 인식 방법
KR20120125072A (ko) * 2011-05-06 2012-11-14 고려대학교 산학협력단 뇌파를 이용한 문자 입력 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 매체
KR20130002590A (ko) * 2011-06-29 2013-01-08 한양대학교 산학협력단 안정상태 시각유발전위를 이용한 ｑｗｅｒｔｙ 타입의 문자 입력 인터페이스 장치 및 문자 입력 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110833407A (zh) * 2019-09-17 2020-02-25 首都医科大学宣武医院 基于matlab的皮质-皮质间诱发电位数据处理方法
CN114020158A (zh) * 2021-11-26 2022-02-08 清华大学 网页搜索方法及装置、电子设备和存储介质
US12182212B2 (en) 2021-11-26 2024-12-31 Tsinghua University Method, apparatus, electronic device, and storage medium for web search

Also Published As

Publication number Publication date
KR20150133937A (ko) 2015-12-01
KR101581895B1 (ko) 2016-01-04

Similar Documents

Publication Publication Date Title
WO2015178558A1 (ko) P300 뇌-유발전위를 이용한 단어 입력 뇌-컴퓨터 인터페이스 시스템 및 p300 뇌-유발전위를 이용한 단어 입력 방법
Shaki et al. Deconstructing spatial-numerical associations
Hwang et al. Development of an SSVEP-based BCI spelling system adopting a QWERTY-style LED keyboard
Huang et al. Attentional capture by emotional stimuli is modulated by semantic processing.
Qu et al. Tracking the time course of lexical access in orthographic production: An event-related potential study of word frequency effects in written picture naming
EP3396495B1 (en) Neurocomputer system for selecting commands on the basis of recording brain activity
Jin et al. P300 Chinese input system based on Bayesian LDA.
CN103995583A (zh) 实现针对p300成分的脑机接口界面的设备及其方法
Saravanakumar et al. A high performance asynchronous EOG speller system
KR101768106B1 (ko) 뇌-컴퓨터 인터페이스 기반 문자 입력 장치 및 방법
WO2014171598A1 (ko) 뇌파를 이용한 의도 인식용 두뇌 기계 인터페이스 장치 및 방법
KR20190091755A (ko) 파킨슨병의 진단을 위한 입력 패턴 분석 장치 및 방법
Fazel-Rezai et al. A comparison between a matrix-based and a region-based P300 speller paradigms for brain-computer interface
Gavett et al. Reducing human error in P300 speller paradigm for brain-computer interface
Elsawy et al. P300-based applications for interacting with smart mobile devices
Massol et al. Masked repetition priming of letter-in-string identification: An ERP investigation
Yu et al. A P300-based brain–computer interface for Chinese character input
Antal et al. IDENTITY INFORMATION REVEALED FROM MOBILE TOUCH GESTURES.
WO2017003102A1 (ko) 햅틱 패턴을 이용한 시각 장애인용 문자 표시 방법
He et al. Common constraints limit Korean and English character recognition in peripheral vision
Huang et al. The fastest BCI for writing Chinese characters using brain waves
Yang et al. EvoMoE: Evolutionary Mixture-of-Experts for SSVEP-EEG Classification With User-Independent Training
KR101290194B1 (ko) 뇌파를 이용한 문자 입력 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 매체
Pélissier et al. Effect of proficiency on subject-verb agreement processing in French learners of English: An ERP study
CN112433617A (zh) 一种两人协同的p300-bci目标决策系统及方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14892247

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14892247

Country of ref document: EP

Kind code of ref document: A1