WO2010082496A1 - 脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム - Google Patents

脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム Download PDF

Info

Publication number
WO2010082496A1
WO2010082496A1 PCT/JP2010/000197 JP2010000197W WO2010082496A1 WO 2010082496 A1 WO2010082496 A1 WO 2010082496A1 JP 2010000197 W JP2010000197 W JP 2010000197W WO 2010082496 A1 WO2010082496 A1 WO 2010082496A1
Authority
WO
WIPO (PCT)
Prior art keywords
electroencephalogram
user
electrode
interface system
face
Prior art date
Application number
PCT/JP2010/000197
Other languages
English (en)
French (fr)
Inventor
寺田佳久
森川幸治
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to JP2010541615A priority Critical patent/JP4652489B2/ja
Priority to CN201080002121.XA priority patent/CN102099770B/zh
Publication of WO2010082496A1 publication Critical patent/WO2010082496A1/ja
Priority to US12/955,016 priority patent/US8818498B2/en
Priority to US14/258,614 priority patent/US20140228652A1/en
Priority to US15/040,510 priority patent/US20160157778A1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103—Detecting eye twinkling
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/25—Bioelectric electrodes therefor
    • A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
    • A61B5/291—Bioelectric electrodes therefor specially adapted for particular uses for electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/377—Electroencephalography [EEG] using evoked responses
    • A61B5/378—Visual stimuli

Definitions

  • the present invention relates to an interface (electroencephalogram interface) system for operating a device using an electroencephalogram.
  • HMD head-mounted displays
  • a device interface a method such as pressing a button, moving a cursor to determine, or operating a mouse while viewing a screen has been used.
  • a device having a small body and features hands-free such as a glasses-type HMD
  • the features of hands-free are impaired and it is not effective. Therefore, an interface for easily controlling an apparatus without performing a physical operation, specifically, an interface using an electroencephalogram that can quickly control the apparatus just by thinking is attracting attention.
  • Electroencephalogram is brain activity (electrical activity of cranial nerve cells) measured as an electrical signal based on the difference in potential between the reference electrode and the measurement target electrode.
  • a method and apparatus for determining a person's psychological state using an event-related potential described in Patent Document 1 can be cited.
  • Patent Document 1 discloses a technique for discriminating an option that a user wants to select using a characteristic signal of an event-related potential of an electroencephalogram.
  • the electrode is attached to the top of the head, the word is displayed randomly on the screen, and the positive that appears in the time zone from 300 ms to 500 ms starting from the timing when the word that the user wants to select is displayed
  • An electroencephalogram interface for discriminating a word selected by the user using a component (P300 component) or the like is realized.
  • Electroencephalogram measurement must generally be performed using electrodes mounted on the top of the head as described above. Therefore, when using a device that does not have a structure in contact with the top of the head, such as the above-described HMD, the shape of the electroencephalograph needs to straddle the head like overhead type headphones. However, since there is a strong demand for a wearable device to be worn on the face portion such as an HMD, it may be determined that a portion extending over the head like a headphone is unnecessary in the future. high. In addition, the shape that extends over the head is poor in appearance and leads to disorder of the hairstyle due to wearing, so it is not ideal as the shape of the future HMD. Therefore, it is assumed that the shape of the HMD does not extend over the head.
  • Patent Document 2 discloses a method in which the HMD includes a plurality of electrodes having codes, and each electrode is attached to a desired location (head) (FIG. 4).
  • the HMD is a device that is frequently attached and detached without being attached at all times, it is a heavy burden on the user to attach a separate device in addition to the HMD.
  • Patent Document 3 is an example in which an electroencephalogram is measured by placing electrodes within the shape of the glasses.
  • FIG. 24 shows the configuration of the electroencephalogram electrode mounting tool disclosed in Patent Document 3.
  • This electroencephalogram electrode mounting device includes a contact belt having elasticity on the inner side of a C-shaped headband, and can measure an electroencephalogram with an electrode disposed on the contact belt. According to this electroencephalogram electrode mounting tool, it is possible to mount the electrode simultaneously with the mounting of the device, and there is no trouble of mounting another device, so that the burden of mounting the device on the user can be reduced.
  • Patent Document 3 supports the wearable device by supporting the user's comekomi portion by tightening the headband and supporting the user's forehead portion by pressing the contact belt.
  • the present invention has been made in view of the above problems, and an object of the present invention is to provide an electroencephalogram interface apparatus capable of ensuring stable electrode contact without increasing the burden on the user and increasing the burden.
  • An electroencephalogram interface system is an eyeglass-type electroencephalogram interface system worn on a user's head, and an output unit that presents a visual stimulus to the user, and a position that touches the user's ear when worn.
  • An ear electrode portion disposed on the lower surface of the user's face below the straight line connecting the user's outer corners and eyes when worn, and supporting the weight of the eyeglass-type electroencephalogram interface system
  • an electroencephalogram measurement determination unit that measures an event-related potential based on a potential difference between the ear electrode unit and the face electrode unit, starting from the timing at which the visual stimulus is presented. .
  • the face electrode portion may be a nose pad portion of the eyeglass-type electroencephalogram interface system.
  • the ear electrode part may be disposed on the same side as the face electrode part with respect to a straight line connecting the user's outer corners and eyes.
  • the ear electrode unit may be in contact with the user's ear.
  • the electroencephalogram measurement / determination unit holds a discriminant reference database in which data of a plurality of waveforms related to event-related potentials are accumulated, and the discriminant reference database stores waveform data of event-related potentials that appear when selection is desired. And event-related potential waveform data that appears when selection is not desired, and the electroencephalogram measurement / determination unit is configured to determine whether the measured event-related potential waveform is desired when the selection is made. When it is determined that it is closest to the potential, processing associated with the visual stimulus may be executed.
  • the electroencephalogram interface system is configured to determine whether the amplitude of a signal caused by the user's blink among the electroencephalogram signals of the user falls between predetermined upper and lower thresholds.
  • a face electrode position determining unit that determines the position of the part may be further provided.
  • the electroencephalogram measurement determination unit measures an electroencephalogram signal based on a potential difference between the ear electrode unit and the face electrode unit, and the face electrode position determination unit has a predetermined frequency band in the measured electroencephalogram signal. You may employ
  • the face electrode position discriminating unit may employ a signal in a frequency band of 1.7 Hz to 2.2 Hz among the measured electroencephalogram signals as a signal caused by the blink of the user.
  • the output unit When the amplitude of the signal caused by the user's blink is larger than the upper threshold or smaller than the lower threshold, the output unit indicates that the spectacle-type electroencephalogram interface system is shifted. A warning may be presented.
  • the electrode within the range of the shape of the glasses can be used without imposing a heavy burden on the user such as mounting of another device for mounting the electrode or tightening of the fixture of the apparatus.
  • An electroencephalogram interface apparatus can be realized.
  • FIG. 1 is a hardware configuration diagram of an electroencephalogram interface system 1.
  • FIG. 1 is a hardware configuration diagram of an electroencephalogram interface system 1.
  • FIG. (A) is a figure which shows the example which has arrange
  • (b) shows the state which the user 10 mounted
  • FIG. (A) is a figure which shows the example which performed the further process to the rim
  • (b) is a figure which shows the HMD type electroencephalogram interface system 1 shown to (a). It is a figure which shows the state with which the user 10 was mounted
  • FIG. 4 is a flowchart showing a processing procedure of the electroencephalogram interface apparatus 2. It is a flowchart which shows the detailed procedure of the process of the face electrode position determination part 15 shown to step S102 of FIG. 13, step S103, and step S104.
  • (A) is an illustration of an electroencephalogram signal when the ear electrode part 11 is attached to the right mastoid, the face electrode part 12 is attached to the upper edge of the right orbit, and blinking is performed
  • (b) is a signal of (a). It is an illustration figure of the result of having applied frequency to FFT and analyzing the frequency.
  • (A)-(c) is a figure which shows the example of the electroencephalogram signal at the time of attaching the ear electrode part 11 to the right mastoid and the face electrode part 12 to the upper part, middle part, and lower part of the upper edge of the right orbit and blinking. is there.
  • (A) And (b) is an illustration figure which presents a warning to a user.
  • FIG. 4 is a diagram showing a positional relationship between an eye head 231 and an eye corner 232. It is a figure which shows the structural example of another electroencephalogram interface system. It is a figure which shows the structure of the conventional electroencephalogram electrode mounting tool.
  • the inventors of the present application first searched for an effective position to arrange the electrodes within the range of the shape of the glasses-type wearable device.
  • a “glasses-type head-mounted display” was adopted as an example.
  • this “glasses-type head-mounted display” is simply referred to as “HMD”.
  • HMD shape of the HMD does not extend over the user's head.
  • the “shape range” of a wearable device such as an HMD refers to a range occupied by a shape normally required for the device.
  • an electrode arrangement capable of providing an electroencephalogram interface with the same degree of accuracy as when an electrode is arranged on the head, it is first necessary to know an electrode position having a high identification rate within the range of the HMD shape.
  • the optimum reference pole position search experiment within the range of the HMD shape carried out by the present inventors will be described.
  • FIG. 1 shows electrode positions included in the range of the HMD shape.
  • the shape of the HMD is, for example, as shown in FIG. FIG. 5 will be described in detail later.
  • the electrode 28a above the eye is mounted on the upper edge of the orbit 29, the electrode 28b next to the eye is on the outer edge of the orbit 29 (external eyelid angle), and the nasal electrode is the nasal root.
  • the electrode above the ear is attached to the upper part of the ear root 30e.
  • the HMD shape in addition to the facial electrodes used in electrooculogram measurement, the HMD shape has the earlobe 30b, the rear ear 30d (the rear of the base of the ear), and the lower ear (the base of the ear). The lower part of the ear) and the peripheral part of the ear, such as the front part 30c of the ear (shown in FIG. 1B). It is. Accordingly, the inventors of the present application have selected the mastoid 30a (mastoid process), which is the projection of the skull at the base of the back of the ear, representing the peripheral part of the ear.
  • the mastoid 30a massid process
  • polymate AP-1124 manufactured by Digitex
  • a low-pass filter with a sampling frequency of 200 Hz, a time constant of 3 seconds, and a filter of 30 Hz was applied.
  • each electrode shown in FIG. 1 was used as a reference electrode, and an electroencephalogram was measured by a potential difference from other electrodes, and an electroencephalogram interface evaluation experiment was conducted. Each subject was asked to select 40 times, and the accuracy was verified using the ratio of the correct discrimination results as the discrimination rate.
  • the electroencephalogram was measured by combining the electrodes at the positions shown in FIG. 1, and the discrimination rate of the electroencephalogram interface was compared.
  • the relationship between the combination of electrodes and the identification rate is shown in FIGS.
  • FIG. 2 shows the result of accuracy when the electrode placed on the face is used as a reference electrode
  • FIG. 3 shows the result of accuracy when the left and right ear mastoids (left mastoid and right mastoid) are used as a reference. From the experimental results of FIG. 3, an average discrimination rate of 57.8% on the left mastoid basis and 66.6% on the right mastoid basis was obtained.
  • the electroencephalogram obtained by measuring the facial potential with reference to the left and right mastoids has a higher average discrimination rate than any electroencephalogram measured with reference to the facial electrode shown in FIG. It was found to contain the EEG signals necessary for operating the system.
  • the identification rate of the electrode on the left eye was measured using the right mastoid as the reference electrode, the identification rate of the electrode on the left eye was 75.0%. It was found that the discrimination rate was the same as that measured at the top. This is because a part of the brain is included between the mastoid and the face electrode by placing a reference electrode on the mastoid, and a part of the brain activity is measured by measuring the potential between them. It is possible that the identification rate is high.
  • the inventors of the present application examined a position with less noise contamination within the range of the shape of the glasses-type wearable device.
  • one of the causes of noise is noise caused by blinking.
  • the distance between the electrode and the eyeball is close, so that it is measured as a large noise. Therefore, it is important to arrange the electrode at a position where blink noise is difficult to mix.
  • the mechanism of blink noise mixing will be described.
  • the eyelid slides on the cornea.
  • the cornea of the eyeball is positively charged, and when the eyelid is rubbed with the cornea, a positive potential of the cornea is transmitted to the eyelid.
  • the positive potential transmitted to the eyelid is transmitted to the electrode arranged on the upper side of the eye and measured as blinking noise.
  • FIG. 22 shows the positional relationship between the eyes 231 and the outer corners 232 around the eyes.
  • FIG. 22 shows an example of the left eye. Since the eyelid is located above the straight line 233 connecting the eye 231 and the outer corner 232 before and after blinking, the propagation of positive potential is considered to occur above the straight line 233. Therefore, it is considered that the electroencephalogram measurement in which the influence of noise due to blinking is suppressed can be achieved by disposing the electrodes on the face portion below the straight line 233 connecting the eyes 231 and the corners 232 of the eyes. As an example, a face portion electrode may be provided at the nose root portion of the nose 234 located below the straight line 233 in FIG.
  • such a face electrode functions as a nose pad.
  • the above-mentioned ear peripheral electrode on the same side as the face electrode with respect to the above-mentioned straight line 233, for example, on the mastoid 30a, the rear ear 30d, etc., the influence of noise caused by blinking can be reduced. It becomes possible to suppress more reliably.
  • FIG. 4 shows a functional block configuration of the electroencephalogram interface system 1 in the present embodiment.
  • FIG. 5 shows an example of the device shape of the electroencephalogram interface system 1.
  • FIG. 6 shows an example of the hardware configuration of the electroencephalogram interface system 1.
  • the electroencephalogram interface system 1 includes an ear electrode unit 11, a face electrode unit 12, an electroencephalogram measurement determination unit 13, and an output unit 14.
  • the user 10 is shown for convenience of understanding.
  • each part of the HMD is the same as that of glasses.
  • the part that is caught in the ear of the user 10 and fixes the HMD main body is referred to as the “front cell part 21”
  • the part that contacts the nose of the user 10 and supports the HMD main body is the “nose pad part 24”
  • the portion that connects and supports the rim portion 23 in front of both eyes is the “bridge portion 25”
  • the rim portion 23 and the tip cell portion 21 are connected.
  • the supporting portion is referred to as “temple portion 22”.
  • the electroencephalogram interface system 1 is realized as a glasses-type wearable device.
  • the ear electrode part 11 is provided around the user's ear, and the face electrode part 12 is provided around the user's face. More specifically, the ear electrode part 11 is installed inside the tip cell part 21 of the glasses, and contacts the ear peripheral part on one side of the user 10. Further, the face electrode part 12 is installed at a position where the HMD and the skin of the user's face part are in contact with each other at any position of the nose pad part 24.
  • the face electrode portion 12 may be disposed on the temple portion 22 and the rim portion 23 of the glasses.
  • the electroencephalogram measurement determination unit 13 is installed in the bridge portion 25 of the HMD.
  • the electroencephalogram measurement determination unit 13 measures the electroencephalogram from the potential difference between the ear electrode unit 11 and the face electrode unit 12 and determines whether or not an electroencephalogram is being measured. When the electroencephalogram is not measured, a determination result (signal) informing the fact is output to the output unit 14. When an electroencephalogram is measured, the electroencephalogram measurement determination unit 13 determines which menu item the user 10 desires to execute based on the electroencephalogram. This process will be described later.
  • the output unit 14 has a function of outputting video.
  • the output unit 14 is installed in front of the user's eyes and in the lens part of the glasses.
  • the output unit 16 displays information corresponding to the determination result. For example, when an electroencephalogram is not measured, the output unit 14 displays a message “HMD is misaligned. Please adjust” and displays a warning to the user so that the electrode position is appropriate. .
  • the output unit 14 sequentially highlights a plurality of menu items. Starting from this highlight display, the electroencephalogram measurement determination unit 13 can determine which menu item the user 10 desires to select. In addition, the output unit 14 displays a result of execution of processing corresponding to the selected menu item.
  • the electroencephalogram measurement determination unit 13 measures the electroencephalogram from the potential difference between the ear electrode unit 11 and the face electrode unit 12, and among them, the output unit 14 presents a visual stimulus (for example, a menu)
  • a visual stimulus for example, a menu
  • the brain wave of the user 10 is extracted from 200 to 400 ms starting from the timing at which the item is highlighted, and the menu item selected by the user is determined from the feature signal. Then, the determination result is output.
  • This electroencephalogram is also called “event-related potential P300 component”.
  • the visual stimulus is also used to determine the success or failure of the menu item selection result. More specifically, when a feedback result is presented as a visual stimulus, an electroencephalogram of 400 to 700 ms is extracted starting from the presentation timing of the visual stimulus. With this brain wave, it is possible to determine whether the presented result is what was expected or wrong. (Morikawa, Adachi, “Usability evaluation method using event-related brain potential”, Matsushita Technical Journal (current Panasonic Technical Report), Vol. 53, No. 1, pp. 51-55, Oct. 2007)
  • FIG. 23 shows a configuration example of an electroencephalogram interface system for determining the attention amount.
  • This electroencephalogram interface system has a plurality of LEDs (for example, LEDs 235) around the lens unit. Each LED is arranged to be visible in the peripheral visual field area of the user.
  • the electroencephalogram interface system lights up visual stimuli (LEDs) in the peripheral visual field region of the user at random intervals, and extracts the user's electroencephalogram (P300 component) from 200 to 400 ms from the lighting timing. From the size of the P300 component, the electroencephalogram interface system can determine how much attention has been directed to the peripheral visual field.
  • LEDs visual stimuli
  • menu item highlight display will be described as an example.
  • the user's response to the highlighted menu item can be obtained by acquiring the event-related potential from the moment the menu item is highlighted.
  • the electroencephalogram measurement / determination unit 13 collates the measured event-related potential waveform data with the determination criteria stored in the determination criterion database, and determines whether or not the user wishes to select the menu item.
  • the discrimination reference database stores the results of experiments performed on various subjects, and is held in advance in the electroencephalogram measurement / determination unit 13, for example.
  • a plurality of menu items are sequentially highlighted for a subject who wishes to select a certain menu item, and event-related potentials are acquired at the highlight timing. Then, the waveform data A of the event-related potential when the menu item desired to be selected is highlighted and the waveform data B of the event-related potential when the menu item not desired to be selected are averaged, respectively.
  • Each is stored as a discrimination reference database.
  • the electroencephalogram measurement / determination unit 13 uses each of the waveform data A and the waveform data B as templates, and the waveform of the event-related potential of the user 10 who is the operator of the electroencephalogram interface system 1 is close to, that is, the closest. Any one of the waveforms may be determined based on the Mahalanobis distance.
  • This Mahalanobis distance indicates the distance from the center of gravity of the group taking into account the variance / covariance of the data. For this reason, discrimination using the Mahalanobis distance has higher discrimination ability than simply discrimination by threshold processing. As a result, the menu item that the user wishes to select can be determined.
  • FIG. 6 is a hardware configuration diagram of the electroencephalogram interface system 1.
  • the ear electrode unit 11 and the face electrode unit 12 attached to the face unit are connected to a bus 131, and signals are transmitted to and received from the electroencephalogram measurement determination unit 13.
  • the electroencephalogram measurement determination unit 13 includes a CPU 112a, a RAM 112b, and a ROM 112c.
  • the CPU 112a reads the computer program 112d stored in the ROM 112c into the RAM 112b, and develops and executes the computer program 112d on the RAM 112b.
  • the electroencephalogram measurement / determination unit 13 switches and executes processing when detecting and not detecting electroencephalogram data according to the computer program 112d.
  • the ROM 111c and ROM 112c may be rewritable ROMs (for example, EEPROM).
  • the display 14 which is the output unit 14 includes an image processing circuit 121 and a screen 122.
  • the image processing circuit 121 outputs a video signal such as a selected content video display to the screen 122 according to the result of the CPU 112a.
  • the above-described display 16 has been described as having the image processing circuit 121 and the screen 122 on the assumption of control of video equipment.
  • the image processing circuit 121 and the screen 122 may be an audio processing circuit, a speaker, or the like depending on the modal type of the device to be controlled.
  • the above-mentioned computer program is recorded on a recording medium such as a CD-ROM and distributed as a product to the market, or transmitted through an electric communication line such as the Internet.
  • a recording medium such as a CD-ROM
  • an electric communication line such as the Internet.
  • the electroencephalogram measurement determination unit 13 and the image processing circuit 121 can also be realized as hardware such as a DSP in which a computer program is incorporated in a semiconductor circuit.
  • the ear electrode part 11 needs to be worn in the area around the ear of the user 10.
  • the electrodes can be brought into contact with the skin at the rear of the user's ear root or the position of the mastoid by arranging the electrodes at the inner tip of the tip cell portion 21 of the glasses.
  • the face electrode portion 12 is attached to the range of the face portion of the user 10 illustrated in FIG.
  • the portion of the face portion of the user 10 that is in strong contact with the HMD is the position of the komi-mami and the nose root portion from the top of the user's ear root.
  • the user's 10 head is pinched and the HMD is fixed so as not to move left and right, and the weight of the HMD is supported by the user's 10 upper root and nose root.
  • the output unit 14 includes a liquid crystal display device. Therefore, it can be said that the output unit 14 is the heaviest and largest in the hardware (FIG. 6) constituting the electroencephalogram interface system 1. Considering the shape of the HMD, the heaviest output portion 14 is located at the lens position, and components having a large volume are concentrated on the lens peripheral portion (front). Therefore, since the weight of the HMD is concentrated in the front and the center of gravity is biased forward, it is considered that most of the weight of the HMD is supported by the position of the front face (nasal root) of the user 10.
  • the face electrode portion 12 supports the weight of the HMD, and the face electrode portion 12 is placed at a position next to the nose root of the user 10 with the HMD weight. It will be in the state which touches strongly by this.
  • the face electrode unit 12 is not excessively pressed beyond the support of the HMD, and the face electrode unit 12 is supported by the force of supporting the HMD, so that the face electrode unit 12 is not easily displaced.
  • the tip cell part is displaced forward of the HMD.
  • the face electrode unit 12 is fixed to the face of the user 10 with an appropriate pressure, so that the face electrode unit 12 can be prevented from being displaced or lifted. Therefore, the tip cell portion needs to take a bent shape so as to be caught by the ear.
  • the electrode by placing the electrode at a position that supports the weight of the HMD, there is no need to fix the electrode by applying excessive pressure such as a hair band, so the burden on the user wearing the HMD can be reduced.
  • the electrode By placing the face electrode on the nasal root, the electrode is located below the straight line connecting the eyes and the corners of the eyes, and the influence of noise caused by blinking is suppressed. As a result, it is possible to measure clean brain waves with few artifacts.
  • the ear electrode part is on the same side as the face electrode part with respect to the straight line 233 (FIG. 23) connecting the eyes and the corners of the eyes.
  • the ear electrode part is on the same side as the face electrode part arranged on the nasal root with respect to the straight line 233 connecting the eyes and the corners of the eyes. Will be placed.
  • FIG. 7A shows an example in which the face electrode portion 12 is arranged on the rim portion 23 of the HMD.
  • the rim portion 23 of the HMD is processed so that the weight of the HMD can be supported by the position of the upper edge of the user's orbit, and the face electrode portion 12 is disposed at a position where the rim portion 23 and the upper edge of the orbit of the user 10 are in contact with each other.
  • FIG. 7B shows a state where the user 10 wears the electroencephalogram interface system 1 shown in FIG.
  • FIG. 8 (a) shows an example in which the face electrode portion 12 is arranged by further processing the rim portion 23 of the HMD. This is because the rim portion 23 and the bridge portion 25 are integrated, and the head cell portion 21 and the rim portion 23 sandwich the head of the user to fix the HMD, thereby supporting the weight of the front surface of the HMD with the rim portion 23.
  • FIG. 8B shows a state in which the user 10 wears the electroencephalogram interface system 1 shown in FIG. Also in this case, the face electrode portion 12 disposed on the rim portion 23 is fixed by the weight of the HMD applied to the rim portion 23 and is not easily displaced.
  • FIG. 9 shows the relationship between the distance from the upper root of the ear to the upper edge of the orbit in the human face.
  • the distance from the upper root portion 30e to the upper orbital edge 28a becomes shorter as it goes from the lower end to the upper end of the upper orbital edge 28a. That is, when comparing the distance ⁇ from the upper root portion 30e to the upper end of the upper orbital edge portion 28a with the distance ⁇ from the upper root portion to the lower end of the upper orbital edge portion 28a, the former is shorter.
  • the tip cell part and the face electrode part are fixed to the head of the user 10 in such a manner that the head is sandwiched between them. Therefore, since the HMD is hooked on the upper part of the ear root, a tip cell portion having a bent tip is required. This also applies to the example of FIG. 8 that the distance from the base of the front cell portion 21 to the face electrode portion 12 is set to a length not less than ⁇ and less than ⁇ .
  • the HMD nose pad portion 24 can be eliminated to prevent the HMD weight from being dispersed. If the nose pad portion 24 is eliminated and the weight of the HMD is concentrated and applied to the upper orbital edge portion 28a of the user, the HMD is strongly supported by the face electrode portion 12 disposed on the rim portion 23. It will be more difficult to shift.
  • the example in which the electroencephalogram measurement discriminating unit 13 is arranged in the bridge portion 25 and the rim portion 23 of the HMD has been shown.
  • the HMD such as the temple portion 22 and the tip cell portion 21 are arranged. Arranging at any of these positions is within the scope of the present invention.
  • FIG. 10 shows a configuration example of the electroencephalogram interface system 1 attached to one side of the face. Since the ear electrode 11 and the face electrode 12 can maintain a state in which the HMD is strongly supported, even if the configuration is worn on one side of the face as in this example, Can be worn for a long time.
  • the shape of the face and head varies from person to person, and the distances ⁇ and ⁇ shown in FIG. 9 may vary from person to person. Therefore, there may be a case where the user's head is not successfully sandwiched between the front cell portion and the face electrode portion 12.
  • the position of the face electrode portion 12 in contact with the face portion is shifted due to the weight of the HMD itself and the influence of the user's movement.
  • the electrodes are displaced in this way, the user 10 cannot directly see the displacement of the electrodes with his / her own eyes, and therefore it is difficult for the user 10 to notice that the electrodes are displaced. Therefore, even if the user 10 operates the electroencephalogram interface with the intention of wearing the HMD correctly, the identification rate is low and the user 10 cannot be used.
  • the HMD is fixed so as to reduce the displacement of the face electrode portion 12 regardless of the shape of the face or head by the individual as described above, and the position of the electrode on the face portion due to the influence of the posture and operation of the user 10
  • an HMD type electroencephalogram interface device capable of informing the user 10 with a warning sound and performing stable electroencephalogram measurement is realized.
  • FIG. 11A shows the configuration of the electroencephalogram interface apparatus 2 according to the present embodiment
  • FIG. 11B shows the position of the electroencephalogram interface apparatus 2 when worn.
  • elastic portions 111a and 111b that newly adjust the length of the temple portion
  • a tension detector 112 that detects whether tension is generated in the elastic portion
  • a face electrode A face electrode position discriminating unit 15 is provided for discriminating whether the unit 12 is mounted at the correct position on the face of the user 10.
  • the elastic portions 111a and 111b are arranged in the temple portion 22 and the length of the temple portion 22 can be adjusted.
  • the elastic portions 111a and 111b are formed of an elastic body such as a spring or rubber, for example.
  • the elastic part 111a has a signal line for transmitting a signal (electroencephalogram signal) detected by the ear electrode part 11 therein, and the elastic part 111a is measured by the ear electrode part 11 even if the elastic part 111a is an insulating material.
  • the electroencephalogram signal can be transmitted to the face electrode position determination unit 15 and the electroencephalogram measurement determination unit 13.
  • the tension detection unit 112 and the face electrode position determination unit 15 will be described with reference to FIG.
  • FIG. 12 shows a functional block configuration of the electroencephalogram interface apparatus 1.
  • the tension detector 112 is a sensor that is connected to the elastic part 111a and measures the magnitude of the tension applied to the elastic part 111a.
  • no tension detector is provided for the elastic part 111b.
  • a tension detector may be provided individually.
  • the elastic portion 111a connected to the tension detecting unit 112 is simply referred to as “elastic portion 111”.
  • the ear electrode part 11 and the face electrode part 12 are attached to the ear peripheral part and the face part of the user 10, respectively, and measure the brain waves of the user 10.
  • the measured electroencephalogram signal is sent to the face electrode position determination unit 15 and the electroencephalogram measurement determination unit 13.
  • the face electrode position determination unit 15 is installed in a temple part or a rim part of the HMD, and determines whether the face electrode part 12 is mounted at the correct position of the forehead of the user 10 by using the measured electroencephalogram signal as an input. When it is determined that the attachment is not correctly performed, the output unit 14 is instructed to output a warning to the user 10. A detailed processing flow will be described later.
  • the electroencephalogram measurement determination unit 13 instructs the output unit 14 to present a visual stimulus to the user 10.
  • the event-related potential is extracted from the measured electroencephalogram signal at the timing when the visual stimulus is presented, and the user selects it using characteristic signals (N100 component, P300 component, etc.) included in the event-related potential.
  • the option desired to be determined is determined, and the determination result is output to the output unit 14.
  • the output unit 14 outputs a visual stimulus to the user 10, displays a selection result, presents a warning sound when there is a problem with wearing the HMD, outputs a menu selection screen, video and audio, and the like.
  • the output unit 14 includes, for example, a display or a speaker.
  • the hardware of the electroencephalogram interface system 2 according to this embodiment is the same as that shown in FIG. However, it is necessary to add a sensor as the tension detection unit 112.
  • the face electrode position determination unit 15 may be provided with a CPU, a RAM, and the like. However, the CPU 112 a described as constituting the electroencephalogram measurement determination unit 13 in FIG. 6 corresponds to the face electrode position determination unit 15. By performing this processing, the face electrode position determination unit 15 may function.
  • FIG. 13 shows a processing procedure of the electroencephalogram interface apparatus 1. The processing flow of each block described above will be described with reference to FIG.
  • step S101 the tension detection unit 112 monitors the elastic part 111 and measures whether tension is generated in the elastic part 111.
  • the tension detection unit 112 can know the timing when the user 10 wears the HMD by monitoring the tension of the temple unit 22.
  • the tension detector 112 detects whether tension has occurred.
  • the tension detector 112 measures the tension applied to the elastic part 111 by fixing one side to the temple part and fixing the opposite side to the elastic part 111.
  • the force applied to the elastic part 111 is compared with a threshold (for example, 0 (zero) Newton), and the case where the force applied to the elastic part 111 exceeds the threshold is detected as the timing when the user 10 wears the HMD.
  • the tension detection unit 112 may be configured so that the tension measurement sensor continuously measures the tension, or the tension exceeds the threshold by having a switch that is physically connected when tension is generated in the elastic unit 111. It may be a circuit for determining this.
  • the elastic portions 111a and 111b expand and contract, it becomes possible to correspond to the length (distance ⁇ in FIG. 9) from the upper root of the ear to the upper edge of the orbit that differs for each user.
  • the face electrode position determination unit 15 measures the electroencephalogram using the ear electrode unit 11 and the face electrode unit 12 in step S102.
  • the electroencephalogram signal is output to the face electrode position determination unit 15 and the electroencephalogram measurement determination unit 13.
  • step S103 the face electrode position determination unit 15 determines whether or not the position of the face electrode unit 12 attached to the user 10 is attached to the correct position from the measured electroencephalogram signal. The determination method will be described later.
  • step S104 If it is determined that the position of the face electrode unit 12 is not optimal, the process proceeds to step S105.
  • step S104 the face electrode position determination unit 15 issues an instruction to present a warning to the output unit 14.
  • the face electrode position determination unit 15 outputs a warning video signal to be displayed on the output unit 14 to the output unit 14.
  • the output unit 14 issues a warning of electrode displacement to notify the user 10 that the position of the face electrode unit is not correct.
  • the output unit 14 presents a warning sound using a speaker, a warning screen using a display, or the like.
  • the face electrode position discriminating unit 15 again discriminates the face electrode position in step S103, and repeats the warning (step S104) and the discrimination (step S103) until it is determined that the position of the face electrode unit 12 is optimal. .
  • the electroencephalogram measurement determination unit 13 detects blinking, myoelectricity, etc. from the electroencephalogram signals measured by the ear electrode unit 11 and the face electrode unit 12. Remove noise components.
  • the removal of the noise component includes, for example, deletion of a portion where the amplitude of the electroencephalogram signal exceeds ⁇ 100 ⁇ V, or a method of removing the filter by regarding 30 Hz or more as myoelectricity by FFT.
  • step S106 the electroencephalogram measurement / determination unit 13 extracts an event-related potential from the electroencephalogram signal from which noise has been removed, starting from the timing at which the visual stimulus output by the output unit 14 is presented.
  • the electroencephalogram measurement determination unit 13 extracts an event-related potential corresponding to the presented multiple-choice stimulus, and determines which option the user 10 has selected from the feature signal of the event-related potential.
  • the magnitude of the P300 component of the event-related potential of each option (the average potential of the interval from 200 ms to 400 ms when the stimulus presentation is set to 0 ms) is compared, and the stimulus of the option having the largest P300 component is compared. Is determined as the option selected by the user 10. The determination result is output to the output unit 14.
  • step S107 the output unit 14 feeds back the determined result to the user 10 using a display device such as a liquid crystal screen. Also, video and audio are output according to the content of the option selected by the user 10.
  • step S101 may be omitted.
  • the processing after step S102 may be performed on the assumption that the timing at which the HMD is turned on is the timing at which the user 10 wears the HMD.
  • the process after step S102 may be performed on the assumption that the user 10 is wearing the HMD.
  • FIG. 14 shows the detailed procedure of the processing of the face electrode position determination unit 15 shown in steps S102, S103, and S104 of FIG.
  • step S102 as in step S102 of FIG. 13, the face electrode position determination unit 15 measures the electroencephalogram using the electrode unit 11 and the face electrode unit 12.
  • step S201 the face electrode position determination unit 15 detects whether the measured electroencephalogram signal includes a signal caused by blinking. Details of the blink detection method will be described below.
  • FIG. 15 is used to explain the characteristics of signals caused by blinking.
  • FIG. 15A shows an example of an electroencephalogram signal when the ear electrode unit 11 is attached to the right mastoid and the face electrode unit 12 is attached to the upper edge of the right orbit and blinking is performed.
  • a signal having a shape pointed in the plus direction in FIG. 15A is an electroencephalogram signal caused by blinking.
  • the potential of the electroencephalogram signal caused by brain activity is usually measured within ⁇ 100 ⁇ V, it can be seen that the signal caused by blinking has an amplitude exceeding ⁇ 100 ⁇ V.
  • FIG. 15B shows the result of frequency analysis performed by applying FFT to the signal of FIG.
  • an electroencephalogram signal caused by blinking generally appears in the ⁇ band (0.5 Hz to 4 Hz) (for example, paragraph 0024 of JP-A-2004-350797). From the experimental results this time, it can be seen that there is a strong response from 1.7 Hz to 2.2 Hz when a signal caused by blinking is included. Therefore, in the following description, the frequency band of 1.7 Hz to 2.2 Hz will be described as an example of the frequency band for detecting an electroencephalogram signal caused by blinking.
  • the measured EEG signal includes a signal in the frequency band of 1.7 Hz to 2.2 Hz, and by determining whether the signal exceeds ⁇ 100 ⁇ V, the EEG signal is a signal caused by blinking Can be determined. For example, by applying a band-pass filter of 1.7 Hz to 2.2 Hz to the electroencephalogram signal, only the waveform caused by blinking is extracted, and it is determined whether the amplitude of the waveform exceeds 100 ⁇ V.
  • step S201 If it is determined in step S201 that there is no blink, the position of the face electrode unit is not detected, and the process by the electroencephalogram determination / determination unit 13 is performed as described in step S105 of FIG.
  • step S201 the face electrode position determination unit 15 determines whether the electroencephalogram interface apparatus 1 has shifted to either below or above the face.
  • a method for determining the displacement of the electroencephalogram interface apparatus 1, that is, the direction of displacement of the face electrode unit 12 will be described with reference to FIG.
  • FIGS. 16A to 16C show examples of electroencephalogram signals when the ear electrode portion 11 is attached to the right mastoid and the face electrode portion 12 is attached to the upper edge of the right orbit and blinking is performed.
  • the electroencephalogram signal was measured using Polymate AP-1124 (manufactured by Digitex), applying a low-pass filter with a sampling frequency of 200 Hz, a time constant of 1 second, and a filter of 30 Hz, and using an active electrode.
  • the electrodes were arranged with the measurement positions at a distance of 6 cm, 4.5 cm, and 3 cm from the center of the right eye black eye, with the upper, middle, and lower portions of the upper edge of the orbit.
  • FIG. 16A shows an electroencephalogram signal when the face electrode portion 12 is arranged on the upper edge of the orbit
  • FIG. 16B shows an electroencephalogram when the face electrode portion 12 is arranged in the middle of the orbit
  • FIG. 16C shows an electroencephalogram signal when the face electrode portion 12 is arranged at the lower part of the upper edge of the orbit.
  • the amplitude of the signal resulting from blinking increases as the face electrode portion 12 moves downward from above the upper edge of the orbit. I understand. This is presumably because the cornea and eyelid of the positively charged eyeball were rubbed by blinking as described above with reference to FIG. 22, and the positive potential of the cornea was transmitted to the eyelid.
  • the reason why the noise in the lower part of the upper orbital edge is larger is that the lower part of the upper orbital edge is closer to the cornea and the influence of positive potential is greatly increased.
  • the face electrode position discriminating unit 15 determines the amplitude of the signal (signal of the measured electroencephalogram signal in the frequency band of 1.7 Hz to 2.2 Hz). To determine whether the amplitude exceeds the upper threshold.
  • the upper limit threshold is set based on FIG. 16C, it is set to 1200 ⁇ V, for example.
  • the face electrode position determination unit 15 presents a warning to the output unit 14 notifying the user 10 that “HMD is shifted downward” or “HMD should be moved upward”. Instruct.
  • the output unit 14 uses a display or a speaker to present a warning such as a warning display to the user 10 or a warning sound.
  • FIG. 17 (a) gives the user an adjustment instruction by displaying the characters “HMD is shifted downward. Please adjust” on the display. In this case, presentation may be continued until the deviation of the HMD is improved by blinking the character string, or display may be performed for a certain time such as 5 seconds immediately after the occurrence of the deviation.
  • FIG. 17B is an example in which a warning is presented to the user on the display 14 using an icon.
  • an upward arrow icon such as a direction for adjusting the HMD is displayed on the display.
  • the face electrode position determination unit 15 determines whether or not the signal amplitude caused by blinking is smaller than the lower limit threshold value in step S204 of FIG. Based on FIG. 16A, the lower threshold is set to 400 ⁇ V, for example.
  • the face electrode position determination unit 15 determines that the output unit 14 10 is instructed to present a warning notifying that “HMD is displaced upward”.
  • the output unit 14 uses a display or a speaker to present a warning such as a warning display to the user 10 or a warning sound.
  • the warning display method in this case is also the same as the above-described presentation method.
  • the face electrode unit 12 When the amplitude of the signal is equal to or greater than the lower threshold, it is determined that the face electrode unit 12 is correctly attached to the upper edge of the orbit of the user 10, and no warning is displayed to the user 10.
  • the face electrode position discriminating unit 15 continues to discriminate the position of the electroencephalogram interface apparatus 1 in the processing flow shown in FIG.
  • the face electrode position discriminating unit 15 discriminates the position of the face electrode unit 12 according to whether or not the amplitude of the signal caused by blinking is between the predetermined upper and lower thresholds. To do.
  • the face electrode position discriminating unit 15 employs a signal in the frequency band of 1.7 Hz to 2.2 Hz of the measured electroencephalogram signal as a signal caused by blinking.
  • the face electrode position determination unit 15 includes the output unit 14. A warning is given to the user 10 via.
  • This warning is information notifying the user of the presence of a deviation, such as the HMD being misaligned or the direction in which the HMD misalignment should be corrected.
  • a deviation such as the HMD being misaligned or the direction in which the HMD misalignment should be corrected.
  • the mounting position of the electroencephalogram interface apparatus 1 is likely to be shifted due to different face shapes for each individual, and (2) the mounting position is shifted slightly downward due to the weight of the electroencephalogram interface apparatus 1.
  • the above warning makes it possible to always measure the electroencephalogram at the correct electrode position, and the electroencephalogram interface can be operated with stable accuracy.
  • the method using the blinking amplitude is used for the determination of the position of the face electrode unit 12, but the magnitude of the amplitude of the signal caused by the eye movement and the matching of the amplitude and shape of the electroencephalogram signal are performed. Thus, the determination may be made.
  • 18A shows an icon such as “blue” when the LED is provided in the apparatus by the output unit 14 and the display 14 of FIG. It is an example which displays a mounting state by the color of.
  • 18B shows a bar indicating the range of the upper edge of the orbit on the display 14 or the LED 180, and the position of the face electrode unit 12 determined by the face electrode position determining unit 15 is shown to the user 10 in real time. The example which notifies the mounting state of HMD by showing is shown.
  • the electrode is a circular dish electrode generally used in electroencephalogram measurement.
  • this is an example, and electrodes having other shapes may be employed.
  • FIG. 19 shows electrodes having various shapes.
  • 19A shows a square electrode
  • FIG. 19B shows a long electrode (for example, an ellipse or a rectangle)
  • FIG. 19C shows an electrode including a protrusion 191 on the surface.
  • the shape of the tip cell portion 21 is the same as the shape of the tip cell portion of general glasses. Other shapes may be adopted for the front cell portion 21 as well.
  • FIG. 20A shows a tip cell portion 21a having a shape in which the tip of the temple portion described above is curved.
  • FIG. 20B shows a tip cell portion 21b having a shape in which a protrusion is provided on the temple portion and hooked on the upper portion of the user's 10 ear.
  • FIG.20 (c) shows the string installed in the temple part or the rim
  • the electroencephalogram interface system 1 is fixed to the ear of the user 10 by this string (or rubber).
  • FIG. 20D shows a tip cell portion 21d that can be removed by being inserted into the temple portion.
  • the shape of the electrode described above not only the ear electrode part 11 is arranged in a part of the tip cell part, but also the case where the ear electrode part 11 itself has the shape of the tip cell part. It is done.
  • 21 (a) to 21 (c) show part of the temple portion including the elastic portion 111 and the tension detecting portion 112, respectively.
  • FIG. 21 (a) shows the elastic part 210a including the spring mentioned in the second embodiment.
  • a thin solid line indicates the temple portion, and a broken line indicates the elastic portion 210a.
  • An elastic body such as a spring is included in the elastic portion 111, and one side of the elastic body is connected to the tension detecting portion 112, and the opposite side is connected to the temple portion on the front cell portion side.
  • the signal line for transmitting the electroencephalogram signal of the ear electrode unit 11 is connected to the face electrode position determination unit 15 and the electroencephalogram measurement determination unit 13 through the inside or outside of the elastic body.
  • FIG. 21B shows an example in which the elastic body is not a spring but rubber.
  • the elastic body is not limited to a spring or rubber, and various elastic bodies capable of changing the length can be used.
  • FIG. 21 (c) shows an example in which the elastic part 111 includes a sliding fixture 210c instead of an elastic body.
  • This is a mechanism in which the length of the temple portion can be adjusted stepwise, and the length can be fixed by the protrusion of one temple portion being fitted into the hole of the other temple portion.
  • the tension detection unit 112 is connected to both the temple units, and detects the position of the hole in which the projection of the temple unit is fitted, or the tension applied to both the temple units, thereby determining the HMD mounting timing of the user 10. To detect.
  • the above-described method for adjusting the length is merely an example, and a mechanism in which the length can be adjusted steplessly with a screw or the like is not included in the scope of this patent.
  • the electroencephalogram interface apparatus can be widely used when electroencephalogram measurement is performed on the face, and is not limited to a spectacle-type HMD having a lens in front of both eyes, but is a wearable that is worn on one side of the face shown in FIG. It can be used to construct an interface using brain waves in wearable devices such as devices that are worn on the face.
  • Electroencephalogram interface apparatus 10 User 11 Ear electrode part 12 Face electrode part 13 Electroencephalogram measurement determination part 14 Output part 15 Face electrode position determination part

Abstract

　ユーザへの締め付けを強くし負担を増加させること無く安定した電極接触を確保できる脳波インタフェース装置を提供する。 　本発明による脳波インタフェースシステムは、ユーザの頭部に装着される、眼鏡型の脳波インタフェースシステムであって、ユーザに視覚刺激を呈示する出力部と、装着されたときにユーザの耳に接する位置に配置された耳電極部と、装着されたときにユーザの目尻と目頭を結ぶ直線よりも下側で顔面部に接し、眼鏡型の脳波インタフェースシステムの重量を支持する位置に配置された顔電極部と、出力部に提示された視覚刺激を起点にして、耳電極部と顔電極部の電位差に基づいて事象関連電位を計測する脳波計測判定部とを備えている。

Description

脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム
　本発明は、脳波を利用して機器を操作するインタフェース（脳波インタフェース）システムに関する。
　近年、機器の小型軽量化により、ヘッドマウントディスプレイ（以下「ＨＭＤ」とも記述する。）等のウェアラブル機器が普及してきている。通常、機器のインタフェースとして、ボタンを押す、カーソルを移動させて決定する、画面を見ながらマウスを操作するなどの方法が用いられていた。しかしながら、眼鏡型のＨＭＤのように本体が小型でハンズフリーを特徴とする機器の操作では、上記のような物理的な機器操作を必須とするとハンズフリーの特徴を損ない、有効ではない。そこで、物理的な操作を行わずに手軽に機器を制御するインタフェース、具体的には、考えただけで機器をすばやく制御できる、脳波を利用したインタフェースが注目を浴びてきている。
　脳波とは、基準極と計測対象極の電位の差により電気信号として計測される脳活動（脳神経細胞の電気的活動）である。この脳波を利用したインタフェースとして、たとえば特許文献１に記載された、事象関連電位を利用した人の心理状態等の判定方法及び装置があげられる。特許文献１では、脳波の事象関連電位の特徴的な信号を用いてユーザが選択したいと思っている選択肢を判別する技術が開示されている。
　具体的には、頭頂部に電極を装着し、画面上にランダムに単語を表示し、ユーザが選択したいと思っている単語が表示されたタイミングを起点に３００ｍｓから５００ｍｓの時間帯に出現する陽性成分（Ｐ３００成分）などを利用して、ユーザが選択した単語の判別を行う脳波インタフェースが実現されている。
　従来の脳波計測では、電極を国際１０－２０法の場所表記にしたがって装着し、頭部に計測対象極を装着することで計測が行われてきた。特許文献１では、国際１０－２０法における位置Ｐｚ（正中頭頂）およびＣｚ（正中中心）の位置の特徴信号を用いて脳波計測が行われている。特許文献１で利用される特徴信号は位置Ｐｚの位置で強く計測できることが知られている。そのため、従来の脳波インタフェースの電極の位置は、Ｐｚが主に利用されている。
　脳波計測は、一般に、上述のように頭頂部に装着した電極を利用して行われなければならない。そのため、頭頂部と接触する構造を持たない機器、たとえば上述のＨＭＤを用いる場合には、脳波計の形状は、オーバーヘッドタイプのヘッドホンのように頭部をまたぐ必要がある。しかしながら、ＨＭＤのように顔面部に装着するウェアラブル機器に対しては、小型化してほしいという要望が強いため、将来的にはヘッドホンのように頭部にまたがる部分が不要と判断される可能性が高い。また、頭部にまたがった形状は見た目も悪く、装着による髪型の乱れにもつながることから、将来的なＨＭＤの形状としては理想的でない。そこでＨＭＤの形状は、頭部をまたがないことが前提となる。
　上記事情に鑑みると、ＨＭＤ型デバイスに脳波インタフェースを組み合わせて利用するためには、ＨＭＤ以外に、何らかの手段で頭頂部の脳波を計測するための電極を別途装着する必要がある。
　例えば、特許文献２は、ＨＭＤがコードを有する電極を複数備え、各電極を所望の場所（頭部）に貼り付けるという方法を開示している（図４）。
　しかし、ＨＭＤは、常時装着せず頻繁に脱着が行われる機器であるため、ＨＭＤ以外に別途機器を装着することは、ユーザにとって大きな負担となる。
　そこで、眼鏡の形状の範囲内に電極を配置して脳波計測を行う例として、特許文献３があげられる。図２４は、特許文献３に開示された脳波電極装着具の構成を示している。この脳波電極装着具は、Ｃ字状のヘッドバンドの内側に伸縮性を有する接触ベルトを備え、接触ベルト上に配置された電極により脳波を計測することを可能としている。この脳波電極装着具によれば、機器装着と同時に電極の装着も可能となり、別の機器を装着する手間も無いため、ユーザの機器装着負担が軽減できる。
特開２００５－３４６２０号公報 特開２００４－１６６５８号公報 実開平６－７０７０４号公報
　しかしながら、特許文献３の構成を用いて眼鏡型脳波インタフェース装置を構築しようとした場合、視覚刺激を呈示するための出力部を眼鏡のレンズの位置に配置する必要があるため、顔前面に配置した電極がずれやすくなる。その理由は特許文献３の構成が、ヘッドバンドの締め付けによるユーザのコメカミ部での支持と、接触ベルトの圧迫によるユーザの額部での支持とによってウェアラブル装置を支えているためである。
　ウェアラブル装置は、いずれもユーザへ押し付けられることで支えられている。そのため、眼鏡のレンズの位置に映像出力装置など設置されると、ウェアラブル装置前面にかかる重量が大きくなり、接触ベルトに配置された（顔前面に配置された）電極が、下向きにずれやすくなる。
　電極のずれを軽減するために、ヘッドバンドの締め付けまたは接触ベルトの圧迫を強くする対応も考えられるが、ユーザへの圧迫が強くすると、締め付けによるユーザへの負担が大きくなり、長時間の装着が困難になる。
　本発明は上記課題に鑑みてなされたものであり、その目的は、ユーザへの締め付けを強くし負担を増加させること無く安定した電極接触を確保できる脳波インタフェース装置を提供することにある。
　本発明による脳波インタフェースシステムは、ユーザの頭部に装着される、眼鏡型の脳波インタフェースシステムであって、ユーザに視覚刺激を呈示する出力部と、装着されたときに前記ユーザの耳に接する位置に配置された耳電極部と、装着されたときに前記ユーザの目尻と目頭を結ぶ直線よりも下側で前記ユーザの顔面部に接し、前記眼鏡型の脳波インタフェースシステムの重量を支持する位置に配置された顔電極部と、前記視覚刺激が呈示されたタイミングを起点にして、前記耳電極部と前記顔電極部の電位差に基づいて事象関連電位を計測する脳波計測判定部とを備えている。
　前記顔電極部は、前記眼鏡型の脳波インタフェースシステムのノーズパッド部であってもよい。
　前記耳電極部は、前記ユーザの目尻と目頭を結ぶ直線に対して、顔電極部と同じ側に配置されてもよい。
　前記耳電極部は、前記ユーザの耳後で接してもよい。
　前記脳波計測判定部は、事象関連電位に関する複数の波形のデータが蓄積された判別基準データベースを保持しており、前記判別基準データベースには、選択を希望するときに現れる事象関連電位の波形のデータと、選択を希望しないときに現れる事象関連電位の波形のデータとが蓄積されており、前記脳波計測判定部は、計測した前記事象関連電位の波形が前記選択を希望するときに現れる事象関連電位に最も近いと判断したときは、前記視覚刺激に対応付けられた処理を実行してもよい。
　前記脳波インタフェースシステムは、前記ユーザの脳波信号のうち、前記ユーザの瞬きに起因する信号の振幅が、予め定められた上限閾値および下限閾値の間に入っているか否かに応じて、前記顔電極部の位置を判定する顔電極位置判別部をさらに備えていてもよい。
　前記脳波計測判定部は、前記耳電極部および前記顔電極部の電位差に基づいて脳波信号を計測し、前記顔電極位置判別部は、計測された前記脳波信号のうちの、所定の周波数帯の信号を、前記ユーザの瞬きに起因する信号として採用してもよい。
　前記顔電極位置判別部は、計測された前記脳波信号のうちの、１．７Ｈｚ～２．２Ｈｚの周波数帯の信号を、前記ユーザの瞬きに起因する信号として採用してもよい。
　前記ユーザの瞬きに起因する信号の振幅が、前記上限閾値よりも大きい場合、または、前記下限閾値よりも小さい場合には、前記出力部は、前記眼鏡型の脳波インタフェースシステムがずれていることを示す警告を呈示してもよい。
　本発明によれば、ユーザに対して、電極装着のために別の機器の装着や、装置の固定具の締め付けを強くするなどの大きな負担を強いることなく、眼鏡の形状の範囲内の電極で脳波インタフェース装置を実現することができる。
（ａ）および（ｂ）は、ＨＭＤ形状の範囲に含まれる電極位置を示す図である。 顔面に配置した電極を基準極とした場合の精度の結果を示す図である。 左右の耳のマストイド（左マストイドおよび右マストイド）を基準とした場合の精度の結果を示す図である。 実施形態における脳波インタフェースシステム１の機能ブロックの構成を示す図である。 脳波インタフェースシステム１の装置形状の例を示す図である。 脳波インタフェースシステム１のハードウェア構成図である。 （ａ）は顔電極部１２をＨＭＤのリム部２３に配置した例を示す図であり、（ｂ）は、（ａ）に示すＨＭＤ型の脳波インタフェースシステム１をユーザ１０が装着した状態を示す図である。 （ａ）は、ＨＭＤのリム部２３にさらに異なる加工を施して、顔電極部１２を配置した例を示す図であり、（ｂ）は、（ａ）に示すＨＭＤ型の脳波インタフェースシステム１をユーザ１０が装着した状態を示す図である。 人間の顔における、耳付根上部から眼窩上縁部の距離の関係を示す図である。 顔面片側に装着する脳波インタフェースシステム１の構成例を示す図である。 （ａ）は本実施形態による脳波インタフェース装置２の構成を示す図であり、（ｂ）は装着時の脳波インタフェース装置２の位置を示す図である。 脳波インタフェース装置２の機能ブロックの構成を示す図である。 脳波インタフェース装置２の処理の手順を示すフローチャートである。 図１３のステップＳ１０２、ステップＳ１０３およびステップＳ１０４に示した顔電極位置判別部１５の処理の詳細な手順を示すフローチャートである。 （ａ）は、耳電極部１１を右マストイド、顔電極部１２を右眼窩上縁部に装着し、瞬きをした場合の脳波信号の例示図であり、（ｂ）は、（ａ）の信号にＦＦＴをかけて周波数解析した結果の例示図である。 （ａ）～（ｃ）は、耳電極部１１を右マストイド、顔電極部１２を右眼窩上縁部の上部、中部、下部に装着し、瞬きをした場合の脳波信号の例を示す図である。 （ａ）および（ｂ）はユーザに警告を呈示する例示図である。 （ａ）および（ｂ）は、ＨＭＤの装着状態を通知する例示図である。 （ａ）～（ｃ）は種々の形状の電極を示す図である。 （ａ）～（ｄ）は、種々の形状の先セル部を示す図である。 （ａ）～（ｃ）はそれぞれ弾性部１１１および張力検出部１１２を含むテンプル部の一部を示す図である。 目頭２３１および目尻２３２の位置関係を示す図である。 他の脳波インタフェースシステムの構成例を示す図である。 従来の脳波電極装着具の構成を示す図である。
　以下、添付の図面を参照して、本発明による脳波インタフェースシステムの実施形態を説明する。
　眼鏡の形状の範囲内の電極で脳波インタフェース装置を実現するためには、電極を安定して配置できる場所やノイズ混入の少ない電極位置を特定する必要がある。
　本願発明者らは、まず、眼鏡型ウェアラブル装置の形状の範囲内において、どの位置に電極を配置するのが効果的であるかの探索を行った。ここでは、例として「眼鏡型のヘッドマウントディスプレイ」を採用した。この「眼鏡型のヘッドマウントディスプレイ」を以下、単に「ＨＭＤ」と記述する。以下の実施形態の説明では、ＨＭＤの形状は、ユーザの頭部をまたがないことを前提とする。
　なお、本明細書において、ＨＭＤ等のウェアラブル装置の「形状の範囲」とは、その装置に通常必要とされる形状が占める範囲をいうとする。頭部に電極を配置した場合と同程度の精度で脳波インタフェースの提供が可能な電極配置を見つけ出すために、まずＨＭＤ形状の範囲内において識別率の高い電極位置を知る必要がある。実施形態の説明に入る前に、本願発明者らが実施したＨＭＤ形状の範囲内における最適基準極位置探索実験を説明する。
　図１は、ＨＭＤ形状の範囲に含まれる電極位置を示す。なお、ＨＭＤの形状については、たとえば図５に示されるとおりである。図５については後に詳述する。
　図１（ａ）に示すように、目の上２８ａの電極は眼窩２９の上縁に装着され、目の横２８ｂの電極は眼窩２９の外縁（外眼瞼角）に、鼻の電極は鼻根２８ｃに、耳の上の電極は耳付根上部３０ｅに装着される。ＨＭＤ形状の範囲を考察すると、眼電計測で利用されている顔面部の電極に加えて、ＨＭＤの形状では、耳朶部３０ｂ、耳後部３０ｄ（耳の付け根の後部）、耳下部（耳の付け根の下部）、耳前部３０ｃなどの耳周辺部（図１（ｂ）に図示。マストイド３０ａ、耳朶３０ｂ、耳珠３０ｃ、耳付根後部３０ｄの破線部内の範囲。）も計測対象として利用が可能である。そこで、本願発明者らは、上記耳周辺部を代表して、耳の裏の付け根の頭蓋骨の突起部であるマストイド３０ａ（乳様突起）を選択した。
　実験は、ＨＭＤ形状においてユーザの顔面に接触する位置の例として、図１に示す位置をあげ、それらの部分を利用した具体的な精度の検証を行った。
　実験には、２０代の被験者１５名に対して計測実験を行い、覚醒度が高く維持されていた８名を対象に解析を行った。
　脳波計測は、ポリメイトＡＰ－１１２４（デジテックス製）を使用し、サンプリング周波数は２００Ｈｚ、時定数は３秒、フィルタは３０Ｈｚのローパスフィルタをかけた。
　本実験では、図１に示した各電極を基準極とし、他の電極との電位差により脳波を計測し、脳波インタフェースの評価実験を実施した。各被験者に４０回ずつ選択してもらい、判別結果が的中した割合を識別率として精度検証を行った。
　同様の手法で頭頂部（Ｐｚ）を計測対象極として脳波計測を行ったところ、識別率は８１．３％であった。
　顔面部における最適基準極位置探索のため、図１に示す位置の電極を組み合わせて脳波を計測し、脳波インタフェースの識別率の比較を行った。電極の組合せと識別率との関係を図２、図３に示す。
　図２は、顔面に配置した電極を基準極とした場合の精度の結果を示し、図３は、左右の耳のマストイド（左マストイドおよび右マストイド）を基準とした場合の精度の結果を示す。図３の実験結果より、左マストイド基準で５７．８％、右マストイド基準で６６．６％の平均識別率が得られた。左右のマストイドを基準に顔面部の電位を計測した脳波は、図２に示した顔面部の電極を基準して計測されたいずれの脳波よりも平均識別率が高くなっており、後述する脳波インタフェースシステムを動作させるために必要な脳波信号を含んでいることがわかった。また、右マストイドを基準極にして左目上の電極の識別率を計測したところ７５．０％、同様に右目上の電極の識別率は７５．３％と８割弱の精度があり、ほぼ頭頂部で計測した場合と同等の識別率であることがわかった。これは、マストイドに基準電極を配置することで、マストイドと顔面部の電極の間に脳の一部が含まれ、これらの間の電位を計測することによって、脳活動の一部を計測することが可能となり、識別率が高くなっていると考えられる。
　このように耳周辺部（特にマストイド）を基準とした顔面部の電極の電位差により脳波を計測することで、頭頂部で脳波を計測した場合と同様の精度で脳波の計測が可能で、頭頂部に電極を装着しなくても十分な性能が得られることが確認できた。
　よって精度のよい脳波インタフェースシステムを構築するためには、耳周辺部（マストイド）を基準とした電極を少なくとも１つ配置しておく必要がある。
　次に、本願発明者らは、眼鏡型ウェアラブル装置の形状の範囲内において、ノイズ混入の少ない位置の検討を行った。
　脳波計測において、ノイズ要因の一つとして、瞬きによるノイズが挙げられる。眼鏡型ウェアラブル装置の形状の範囲内（顔面部）に電極を配置した場合、電極と眼球の距離が近いため、大きなノイズとして計測される。よって、瞬きノイズが混入しづらい位置に電極を配置することが重要となる。
　まず、瞬きノイズの混入メカニズムについて説明する。瞬き時、まぶたが角膜上をスライドする。眼球の角膜は陽性に帯電しており、まぶたが角膜とこすれることで、角膜の陽性の電位がまぶたに伝わる。まぶたに伝わった陽性の電位は、目の上側に配置された電極へと伝わり、瞬きのノイズとして計測される。
　図２２は、目周辺の目頭２３１および目尻２３２の位置関係を示す。図２２には左目の例が示されている。瞬きの前後においてまぶたは目頭２３１と目尻２３２とを結んだ直線２３３の上側に位置するため、陽性電位の伝播も、この直線２３３の上側で発生すると考えられる。従って、顔面部の電極を目頭２３１と目尻２３２とを結んだ直線２３３よりも下側に配置することにより、瞬きによるノイズの影響を抑えた脳波計測が可能になると考えられる。一例を挙げると、図２２中の直線２３３より下に位置する鼻２３４の鼻根部に顔面部の電極を設ければよい。ＨＭＤなどの眼鏡型脳波インタフェースシステムの場合には、そのような顔面部の電極はノーズパッドとして機能する。さらに、上述の耳周辺部の電極を、上述の直線２３３に対して、顔面部の電極と同じ側の、たとえばマストイド３０ａや耳後部３０ｄなどに配置することにより、瞬きに起因するノイズの影響をより確実に抑えることが可能になる。
　（実施形態１）
　図４は、本実施形態における脳波インタフェースシステム１の機能ブロックの構成を示す。図５は、脳波インタフェースシステム１の装置形状の例を示す。そして図６は、脳波インタフェースシステム１のハードウェア構成の例を示す。
　図４に示されるように、脳波インタフェースシステム１は、耳電極部１１と、顔電極部１２と、脳波計測判定部１３と、出力部１４とを有する。なお、図４では、ユーザ１０は理解の便宜のために記載されている。
　図５に示されるように、ＨＭＤの各部位の名称は眼鏡と同様である。以下では、ユーザ１０の耳に引っ掛かりＨＭＤ本体を固定する部分を「先セル部２１」と呼び、ユーザ１０の鼻に接地しＨＭＤ本体を支える部分を「ノーズパッド部２４」、ユーザ１０の各眼球の前に設置される出力部１６を保持し固定する部分を「リム部２３」、両目の前のリム部２３をつなぎ支える部分を「ブリッジ部２５」、リム部２３と先セル部２１をつなぎ支える部分を「テンプル部２２」と呼ぶ。
　脳波インタフェースシステム１は眼鏡型ウェアラブル機器として実現される。耳電極部１１はユーザの耳周辺部に設けられ、顔電極部１２はユーザの顔面周辺に設けられる。より具体的には、耳電極部１１は眼鏡の先セル部２１の内側に設置され、ユーザ１０の片側の耳周辺部と接触する。また顔電極部１２は、ノーズパッド部２４のいずれかの位置において、ＨＭＤとユーザの顔面部の皮膚とが接する位置に設置される。なお、顔電極部１２が眼鏡のテンプル部２２、リム部２３に配置されてもよい。　脳波計測判定部１３は、ＨＭＤのブリッジ部２５に設置されている。脳波計測判定部１３は、耳電極部１１と顔電極部１２との電位の差から脳波を計測し、脳波が計測されているか否かを判定する。脳波が計測されていない場合には、出力部１４に対し、その事実を知らせる判別結果（信号）を出力する。脳波が計測された場合には、脳波計測判定部１３は、当該脳波に基づいてユーザ１０がどのメニュー項目の実行を希望しているかを判別する。この処理は後述する。
　出力部１４は、映像出力を行う機能を有している。出力部１４は、ユーザの眼の前、眼鏡のレンズの部分に設置されている。出力部１６は、脳波計測判定部１３の判別結果に基づいて、その判別結果に対応する情報の表示を行う。たとえば、脳波が計測されなかった場合には、出力部１４は、「ＨＭＤがずれています。調整してください。」というメッセージを表示し、電極の位置を適切にするようユーザに警告を表示する。一方、脳波が計測された場合には、出力部１４は、複数のメニュー項目を順次ハイライト表示する。このハイライト表示を起点として脳波計測判定部１３は、ユーザ１０がどのメニュー項目の選択を希望するかを判定することが可能になる。また、出力部１４は、選択されたメニュー項目に対応する処理が実行された結果を表示する。
　以下、主として脳波計測判定部１３の動作を説明することにより、脳波インタフェースシステムの基本的な機能を説明する。
　脳波が計測されている場合には、脳波計測判定部１３は、耳電極部１１と顔電極部１２との電位の差から脳波を計測し、そのうち、出力部１４において視覚刺激の呈示（たとえばメニュー項目のハイライト表示）したタイミングを起点として、２００～４００ｍｓまでのユーザ１０の脳波を抽出して、その特徴信号からユーザが選択したメニュー項目を判別する。そして、その判別結果を出力する。この脳波は「事象関連電位のＰ３００成分」とも呼ばれている。
　視覚刺激は、上述のメニュー項目のハイライト以外にも利用される。
　たとえば、視覚刺激は、メニュー項目の選択結果の成否の判定でも利用される。より具体的には、フィードバック結果が視覚刺激として呈示されたときに、その視覚刺激の呈示タイミングを起点として、４００～７００ｍｓまでの脳波を抽出する。この脳波により、呈示されていた結果が予期していたものか間違っていたかを判別することができる。（森川、足立、「事象関連脳電位を用いたユーザビリティ評価手法」、松下テクニカルジャーナル（現パナソニック技報）、Ｖｏｌ．５３、Ｎｏ．１、ｐｐ．５１－５５、Ｏｃｔ．２００７）
　また、視覚刺激は、自動車運転時や歩行時における周辺視野に対する注意量の判定でも利用される。図２３は、注意量を判定する際の脳波インタフェースシステムの構成例を示す。この脳波インタフェースシステムは、レンズ部の周辺に複数のＬＥＤ（たとえばＬＥＤ２３５）を有している。各ＬＥＤは、ユーザの周辺視野領域において見えるよう配置されている。脳波インタフェースシステムは、ユーザの周辺視野領域の視覚刺激（ＬＥＤ）をランダムな間隔で点灯させ、点灯タイミングから２００～４００ｍｓまでのユーザの脳波（Ｐ３００成分）を抽出する。このＰ３００成分の大きさから、脳波インタフェースシステムは、周辺視野に対してどの程度注意を向けていたかを判定することができる。
　以下では、メニュー項目のハイライト表示を例として説明する。
　メニュー項目がハイライト表示された瞬間から事象関連電位を取得することにより、ハイライト表示されたメニュー項目に対するユーザの反応が得られる。
　脳波計測判定部１３は、計測された事象関連電位の波形データを、判別基準データベースに蓄積された判断基準と照合し、ユーザがそのメニュー項目の選択を希望したか否かを判定する。判別基準データベースには、種々の被験者に対して行った実験結果が格納されており、たとえば脳波計測判定部１３に予め保持されている。
　具体的には、あるメニュー項目の選択を希望している被験者に対して複数のメニュー項目を順次ハイライトさせ、ハイライトのタイミングで事象関連電位を取得する。そして、選択を希望するメニュー項目がハイライトされたときの事象関連電位の波形データＡと、選択を希望しないメニュー項目がハイライトされたときの事象関連電位の波形データＢとをそれぞれ平均化し、それぞれを判別基準データベースとして蓄積する。脳波計測判定部１３は、波形データＡおよび波形データＢのそれぞれをテンプレートとして用い、脳波インタフェースシステム１の操作者であるユーザ１０の事象関連電位の波形がどちらの波形に近いか、すなわち、最も近い波形はどれかを、マハラノビス距離に基づいて判別してもよい。
　このマハラノビス距離は、データの分散・共分散を考慮に入れたグループの重心からの距離を示す。そのため、マハラノビス距離を用いた判別は、単純に閾値処理によって判別するよりも、識別能力が高い。この結果、ユーザが選択を希望するメニュー項目を判別できる。
　このような処理によって、ボタン操作等することなく、脳波によってメニュー項目の選択が実現される。
　図６は、脳波インタフェースシステム１のハードウェア構成図である。
　耳電極部１１と顔面部に装着された顔電極部１２はバス１３１に接続されており、脳波計測判定部１３との信号の授受が行われる。脳波計測判定部１３は、ＣＰＵ１１２ａとＲＡＭ１１２ｂとＲＯＭ１１２ｃとを有している。ＣＰＵ１１２ａは、ＲＯＭ１１２ｃに格納されているコンピュータプログラム１１２ｄをＲＡＭ１１２ｂに読み出し、ＲＡＭ１１２ｂ上に展開して実行する。脳波計測判定部１３は、このコンピュータプログラム１１２ｄにしたがって、脳波データの検出時および非検出時の処理を切り替えて実行する。ＲＯＭ１１１ｃ、ＲＯＭ１１２ｃは書き換え可能なＲＯＭ（たとえばＥＥＰＲＯＭ）であってもよい。
　出力部１４であるディスプレイ１４は、画像処理回路１２１および画面１２２を有している。画像処理回路１２１は、ＣＰＵ１１２ａの結果に従い、選択されたコンテンツ映像表示などの映像信号を画面１２２へ出力する。
　なお、上述のディスプレイ１６は、映像機器の制御を想定して、ディスプレイ１６が画像処理回路１２１や画面１２２を有すると説明した。しかしながら、制御する機器のモーダルの種類に応じて、画像処理回路１２１や画面１２２を音声処理回路やスピーカーなどとしてもよい。
　上述のコンピュータプログラムは、ＣＤ－ＲＯＭ等の記録媒体に記録されて製品として市場に流通され、または、インターネット等の電気通信回線を通じて伝送される。なお、脳波計測判定部１３や画像処理回路１２１は、半導体回路にコンピュータプログラムを組み込んだＤＳＰ等のハードウェアとして実現することも可能である。
　次に、本実施形態における特徴のひとつである、電極の配置に関してより詳細に説明する。
　図１（ｂ）に示したとおり、耳電極部１１は、ユーザ１０の耳周辺部の範囲に装着される必要がある。眼鏡の形状を考慮した場合、眼鏡の先セル部２１の内側先端に電極を配置することにより、ユーザ１０の耳付根後部またはマストイドの位置の皮膚に電極を接触させることが可能となる。
　また、図５の例では耳電極部１１を右側の先セル部２１の内側に設置する例を示した。しかしながら、図３の実験の結果によれば、右側左側の基準電極の位置で精度に大きな違いは無い。よって、耳電極部１１を、他方の側（左側）の先セル部２１の内側に設置しても同様に高い精度の脳波計測ができる。
　顔電極部１２は、図１（ａ）に図示したユーザ１０の顔面部の範囲に装着される。通常の眼鏡型形状では、ユーザ１０の顔面部において、ＨＭＤと強く接している部分は、ユーザ１０の耳付根上部からコメカミの位置と鼻根部である。ユーザ１０のコメカミでは、ユーザ１０の頭を挟み込んでＨＭＤが左右にぶれないように固定され、ＨＭＤの重量は、ユーザ１０の耳付根上部と鼻根部で支えられている。
　出力部１４は液晶表示装置などによって構成される。そのため、出力部１４は、脳波インタフェースシステム１を構成するハードウェア（図６）の中では、最も重く、また最も大きいといえる。ＨＭＤの形状を考慮すると、最も重い出力部１４をレンズの位置に有し、かつ、体積が大きい構成要素がレンズ周辺部（前方）に集中している。したがって、ＨＭＤの重量は前方に重量が集中し、重心が前方に偏っているため、ＨＭＤの重さのほとんどは、ユーザ１０の顔面前方（鼻根）の位置で支えられていると考えられる。
　そこで、ノーズパッド部２４の先端に顔電極部１２を配置することで、ＨＭＤの重さを顔電極部１２が支える形となり、顔電極部１２がユーザ１０の鼻根横の位置にＨＭＤの重さによって強く接する状態となる。
　よって、顔電極部１２には、ＨＭＤを支える以上の過剰な圧迫はかからず、かつ、ＨＭＤを支える力で顔電極部１２が支えられることにより、顔電極部１２がずれにくくなる。
　また、先セル部がユーザ１０の耳付根上部と接触し、ユーザ１０の耳に引っかかる構造をとることにより、ユーザ１０の顔が前方に傾いた場合でも、先セル部がＨＭＤの前方へのズレを軽減し、顔電極部１２が適度な圧力でユーザ１０の顔面に固定されることにより、顔電極部１２のズレや浮きを防ぐことができる。よって先セル部は、耳に引っかかるように曲がった形状をとる必要がある。
　上記のように、ＨＭＤの重さを支持する位置に電極を配置することで、ヘアバンドのような過剰な圧迫をかけて電極を固定する必要がなくなるため、ユーザのＨＭＤ装着負担を軽減できる。
　顔面部の電極を鼻根に配置することで、電極が目頭と目尻を結んだ直線の下側に位置し、瞬きに起因するノイズの影響が抑制される。その結果、アーチファクトの少ないきれいな脳波の計測が可能になる。
　さらに、耳電極部を、目頭と目尻を結んだ直線２３３（図２３）に対して顔電極部と同じ側に配置することにより、縦方向の眼球運動のアーチファクトを軽減することができる。例えば、耳電極部をマストイド３０ａや耳後部３０ｄ（図１）に配置することにより、目頭と目尻を結んだ直線２３３に対して、耳電極部は鼻根に配置された顔電極部と同じ側に配置されることになる。耳電極部と顔電極部とが同側に配置されることで、眼球が上下方向に動いた際の電位の影響が耳電極部および顔電極部にほぼ均等に発生する。よって、耳電極部、顔電極部の電位差を計測した際、上下方向の眼電の影響がキャンセルされ、ノイズの少ない脳波計測が可能になる。
　尚、本実施形態では、顔電極部１２をノーズパット部に配置する例を示したが、それ以外の電極配置も可能である。図７および図８を参照しながら、電極配置の他の例を説明する。
　図７（ａ）に顔電極部１２をＨＭＤのリム部２３に配置した例を示す。ＨＭＤの重さをユーザの眼窩上縁部の位置で支えられるように、ＨＭＤのリム部２３を加工し、リム部２３とユーザ１０の眼窩上縁部が接する位置に顔電極部１２を配置した例である。図７（ｂ）は、図７（ａ）に示す脳波インタフェースシステム１をユーザ１０が装着した状態を示している。
　図８（ａ）は、ＨＭＤのリム部２３にさらに異なる加工を施して、顔電極部１２を配置した例を示す。これは、リム部２３とブリッジ部２５を一体化し、先セル部２１とリム部２３でユーザの頭を挟み込んでＨＭＤを固定する形状とすることで、リム部２３でＨＭＤ前面の重さを支えるようにした例である。図８（ｂ）は、図８（ａ）に示す脳波インタフェースシステム１をユーザ１０が装着した状態を示している。この場合も、リム部２３に配置された顔電極部１２がリム部２３にかかるＨＭＤの重さにより固定され、ずれにくくなる。
　図９は、人間の顔における、耳付根上部から眼窩上縁部の距離の関係を示している。人間の顔の形状において、耳付根上部３０ｅから眼窩上縁部２８ａまでの距離は、眼窩上縁部２８ａの下端から上端に行くに従って、短くなっている。すなわち、耳付根上部３０ｅから眼窩上縁部２８ａの上端までの距離αと、耳付根上部から眼窩上縁部２８ａの下端までの距離βとを比較すると、前者のほうが短い。
　よって、図７（ａ）に示す脳波インタフェースシステム１の先セル部２１の付け根から顔電極部１２までの距離をα以上β未満の長さにしておくことにより、先セル部の付け根がユーザ１０の耳に引っかかり、先セル部と顔電極部が頭を挟み込むような形でユーザ１０の頭に固定される。よってＨＭＤは、耳付根上部に引っ掛けるため、先が曲がっている先セル部が必要となる。これは、先セル部２１の付け根から顔電極部１２までの距離をα以上β未満の長さにしておくことは、図８の例にも当てはまる。
　上記のように装着されることにより、ＨＭＤの重量のほとんどは、図５に示した脳波インタフェース装置同様、顔前方の電極に支持されることになり、過剰な圧迫がかからずに顔電極１２がユーザ１０に押し当てられる。
　図５、図７または図８の形状により、ＨＭＤの重さを利用して、顔電極部１２を固定し、電極がずれにくい脳波インタフェース装置が構築できる。
　さらに、上記のようにリム部２３においてＨＭＤの重さを支えるようにした場合、ＨＭＤのノーズパッド部２４を無くすことで、ＨＭＤの重さの分散が防げる。ノーズパッド部２４を無くし、ＨＭＤの重さが集中してユーザの眼窩上縁部２８ａにかかるようにすると、リム部２３に配置された顔電極部１２においてＨＭＤが強く支持される状態になり、よりずれにくい状態になる。
　尚、本実施形態では、脳波計測判別部１３をＨＭＤのブリッジ部２５、リム部２３に配置する例を示したが、ＨＭＤの重量のバランスを考慮し、テンプル部２２や先セル部２１などＨＭＤのいずれの位置に配置することも、本発明の範疇である。
　図１０は、顔面片側に装着する脳波インタフェースシステム１の構成例を示す。耳電極部１１と顔電極部１２とにおいてＨＭＤが強く支持される状態を保つことができるため、この例のように顔面片側に装着する構成であっても、ずれにくい状態でユーザの頭部に長時間装着することができる。
　（実施形態２）
　実施形態１では、図５、図７、図８、図１０に示すように、先セル部をユーザ１０の耳付根上部に引っ掛け、ユーザ１０の顔面部に接する顔電極部１２がＨＭＤの重量を支え、先セル部と顔電極部１２で頭を挟み込むような状態で固定する構成を説明した。特に、図７および図８のＨＭＤの例では、図９に示す耳付根上部から眼窩上縁部の上端までの距離αと、耳付根上部から眼窩上縁部の下端までの距離βとの差を利用して、ユーザ１０の頭を挟み込む状態でＨＭＤの固定を行った。
　しかし、顔や頭部の形状は人によって異なっており、図９に示した距離αおよびβも個人によって異なることが考えられる。よって、先セル部と顔電極部１２によるユーザ頭部の挟み込みがうまくいかないケースが考えられる。
　また、ユーザ自身はうまく装着しているつもりでも、ＨＭＤ自体の重さやユーザの動きの影響により、顔面部に接する顔電極部１２の位置がずれてきてしまうことが考えられる。このように電極がずれた場合、ユーザ１０は自分の目で電極のずれ具合を直接見ることができないため、ユーザ１０は電極がずれたことに気づくのが難しい。よって、ユーザ１０はＨＭＤを正しく装着しているつもりで脳波インタフェースを動作させても、識別率が低く使用に耐えない状態になってしまう。
　本実施形態では、上記のような個人による顔や頭部の形状にかかわらず顔電極部１２のずれを少なくするようＨＭＤを固定し、ユーザ１０の姿勢や動作の影響により顔面部の電極の位置がずれた場合には、ユーザ１０に対して警告音で知らせ、安定した脳波計測が行えるＨＭＤ型脳波インタフェース装置を実現する。
　図１１および図１２を参照しながら、図９の距離αやβの個人差に対応することが可能な脳波インタフェース装置の一例を説明する。
　図１１（ａ）は本実施形態による脳波インタフェース装置２の構成を示し、（ｂ）は装着時の脳波インタフェース装置２の位置を示す。実施形態１の脳波インタフェース装置１の構成に対し、新たにテンプル部の長さを調節する弾性部１１１ａおよび１１１ｂと、弾性部に張力が発生しているかを検出する張力検出部１１２と、顔電極部１２がユーザ１０の顔の正しい位置に装着されているかを判別する顔電極位置判別部１５とが設けられている。
　弾性部１１１ａおよび１１１ｂは、テンプル部２２に配置され、テンプル部２２の長さを調節できる。弾性部１１１ａおよび１１１ｂは、たとえばバネやゴムなどの弾性体で形成されている。弾性部１１１ａは、その内部に耳電極部１１で検出された信号（脳波信号）を伝達するための信号線を有しており、弾性部１１１ａが絶縁物質であっても耳電極部１１で計測した脳波信号を顔電極位置判別部１５と脳波計測判定部１３にその脳波信号を伝達できる。
　張力検出部１１２および顔電極位置判別部１５については、次の図１２を参照しながら説明する。
　図１２は、脳波インタフェース装置１の機能ブロックの構成を示す。以下、図１２を参照しながら、脳波インタフェース装置１の各構成要素を説明する。　張力検出部１１２は、弾性部１１１ａと接続され、弾性部１１１ａにかかる張力の大きさを測定するセンサである。本例では、弾性部１１１ｂに対して張力検出部は設けていない。しかしながら、個々に張力検出部を設けてもよい。以下では、張力検出部１１２と接続された弾性部１１１ａを単に「弾性部１１１」と記述する。
　耳電極部１１および顔電極部１２は、それぞれユーザ１０の耳周辺部、顔面部に装着され、ユーザ１０の脳波を計測する。計測された脳波信号は顔電極位置判別部１５と脳波計測判定部１３に送られる。
　顔電極位置判別部１５は、ＨＭＤのテンプル部やリム部などに設置され、計測された脳波信号を入力として、顔電極部１２がユーザ１０の額の正しい位置に装着されているか判別を行う。正しく装着が行えていないと判断した場合は、出力部１４に対し、ユーザ１０への警告を出力するよう指示する。詳しい処理の流れに関しては後述する。
　脳波計測判定部１３は、出力部１４に対し、ユーザ１０への視覚刺激呈示を指示する。また、計測された脳波信号から視覚刺激呈示を行ったタイミングを起点とした事象関連電位を抽出し、事象関連電位に含まれる特徴的な信号（Ｎ１００成分やＰ３００成分など）を用いてユーザが選択したいと思っている選択肢を判別し、出力部１４に対して、判別結果を出力する。
　出力部１４では、ユーザ１０に対する視覚刺激の呈示や選択結果の表示、ＨＭＤ装着に不具合があった場合の警告音呈示、メニュー選択画面、映像音声などを出力する。出力部１４は、例えばディスプレイやスピーカなどで構成される。
　なお、本実施形態にかかる脳波インタフェースシステム２のハードウェアについても図６と同様である。ただし、張力検出部１１２としてセンサを追加する必要がある。なお、顔電極位置判別部１５については、別途ＣＰＵ、ＲＡＭ等を設けてもよいが、図６に脳波計測判定部１３を構成するものとして記載されたＣＰＵ１１２ａが、顔電極位置判別部１５に対応する処理を行うことによって、顔電極位置判別部１５として機能してもよい。
　図１３は、脳波インタフェース装置１の処理の手順を示す。図１３を用いて、上述した各ブロックの処理の流れを説明する。
　ステップＳ１０１において、張力検出部１１２は弾性部１１１を監視し、弾性部１１１に張力が発生したかどうかの計測を行う。たとえば弾性部１１１がバネで構成されているとき、バネが縮んだ状態かつテンプル部の長さをあらかじめ短くしておくことにより、ユーザ１０がＨＭＤを装着した場合、必ず弾性部１１１に張力が発生する。よって、張力検出部１１２は、テンプル部２２の張力を監視することで、ユーザ１０がＨＭＤを装着したタイミングを知ることができる。
　張力検出部１１２は、張力が発生したか否かを検出する。張力検出部１１２は、片側をテンプル部に固定し、反対側を弾性部１１１と固定することで、弾性部１１１にかかる張力を計測する。弾性部１１１にかかる力と閾値（例えば０（ゼロ）ニュートン）とを比較し、弾性部１１１にかかる力が閾値を超えた場合をユーザ１０がＨＭＤを装着したタイミングとして検知を行う。張力検出部１１２は、張力計測センサが常に張力を計測し続ける形態でもよいし、弾性部１１１に張力が発生したときに物理的に接続が確立されるスイッチを有することにより張力が閾値を超えたことを判別する回路であってもよい。
　弾性部１１１ａおよび１１１ｂが伸縮することにより、ユーザごとに異なる耳付根上部から眼窩上縁部までの長さ（図９の距離α）に対応することが可能になる。
　ユーザ１０がＨＭＤの装着を検知した後、ステップＳ１０２において、顔電極位置判別部１５は、耳電極部１１、顔電極部１２により脳波の計測を行う。脳波信号は顔電極位置判別部１５と脳波計測判定部１３に出力される。
　ステップＳ１０３で、顔電極位置判別部１５は、計測された脳波信号からユーザ１０に装着された顔電極部１２の位置が正しい位置に装着されているかの判別を行う。判別方法に関しては後述する。
　顔電極部１２の位置が最適でないと判断された場合は、処理はステップＳ１０４に進み、最適であると判断された場合には、処理はステップＳ１０５に進む。
　ステップＳ１０４において、顔電極位置判別部１５は、出力部１４に対し警告を呈示する指示を出す。たとえば顔電極位置判別部１５は、出力部１４において表示すべき警告の映像信号を出力部１４に出力する。この指示を受けて、出力部１４は、ユーザ１０に対し、顔電極部の位置が正しい位置でないことを知らせるための電極ずれの警告を行う。この電極ずれの警告として、出力部１４は例えば、スピーカを用いた警告音の呈示や、ディスプレイを用いた警告画面の呈示などを行う。
　その後、顔電極位置判別部１５は再度、ステップＳ１０３の顔電極位置の判別を行い、顔電極部１２の位置が最適と判別されるまで繰り返し警告（ステップＳ１０４）、判別（ステップＳ１０３）が繰り返される。
　顔電極部１２の位置が正しい位置であると判別されると、ステップＳ１０５で、脳波計測判別部１３は、耳電極部１１、顔電極部１２により計測された脳波信号から瞬きや筋電などのノイズ成分の除去を行う。ノイズ成分の除去は、例えば、脳波信号の振幅が±１００μＶを超えた部分の削除や、ＦＦＴにより３０Ｈｚ以上を筋電とみなしてフィルタ除去する方法などがある。
　ステップＳ１０６で、脳波計測判定部１３は、ノイズ除去した脳波信号から、出力部１４が出力した視覚刺激の呈示したタイミングを起点とした事象関連電位の切り出しを行う。脳波計測判定部１３は、呈示した複数選択肢の刺激に対応する事象関連電位を抽出し、事象関連電位の特徴信号から、ユーザ１０がどの選択肢を選んだのかを判別する。
　判別の方法としては、例えば、各選択肢の事象関連電位のＰ３００成分（刺激呈示を０ｍｓとした場合の２００ｍｓ～４００ｍｓの区間平均電位）の大きさを比較し、最も大きなＰ３００成分を持つ選択肢の刺激を、ユーザ１０が選択した選択肢として判別する。判別結果は、出力部１４に出力される。
　ステップＳ１０７で、出力部１４は、判別された結果を液晶画面などのディスプレイデバイスを利用してユーザ１０にフィードバックする。また、ユーザ１０が選択した選択肢の内容にしたがって、映像や音声の出力を行う。
　なお、ステップＳ１０１の処理を省略してもよい。ＨＭＤに電源を投入したタイミングを、ユーザ１０がＨＭＤを装着したタイミングであると見なして、ステップＳ１０２以降の処理を行ってもよい。または脳波インタフェース装置１が動作するときには、ユーザ１０がＨＭＤを装着しているとしてステップＳ１０２以降の処理を行ってもよい。
　図１４は、図１３のステップＳ１０２、ステップＳ１０３およびステップＳ１０４に示した顔電極位置判別部１５の処理の詳細な手順を示す。
　ステップＳ１０２では、図１３のステップＳ１０２と同様、顔電極位置判別部１５は、電極部１１、顔電極部１２により脳波の計測を行う。
　ステップＳ２０１で、顔電極位置判別部１５は、計測された脳波信号に瞬きに起因した信号が含まれているかを検出する。瞬きの検出方法の詳細を以下に説明する。
　図１５を用いて、瞬きに起因した信号の特徴を説明する。図１５（ａ）は、耳電極部１１を右マストイド、顔電極部１２を右眼窩上縁部に装着し、瞬きをした場合の脳波信号の例である。図１５（ａ）のプラス方向にとがった形状をしている信号が、瞬きに起因する脳波信号である。脳活動に起因する脳波信号の電位は通常±１００μＶ以内で計測されることを考慮すると、瞬きに起因する信号は±１００μＶを超える振幅を有していることがわかる。また、図１５（ｂ）は、図１５（ａ）の信号にＦＦＴをかけて周波数解析した結果を示す。瞬きに起因した脳波信号は、一般的にδ帯域（０．５Hz～４Hz）に出現するといわれている（たとえば特開２００４－３５０７９７号公報の段落００２４）。今回の実験結果では、瞬きに起因した信号を含む場合、１．７Hz～２．２Hzに強い反応が出ていることがわかる。そこで以下の説明では、１．７Hz～２．２Hzの周波数帯を瞬きに起因した脳波信号の検出の周波数帯の一例として説明を行う。
　上記の特徴を利用し、計測した脳波信号が１．７Hz～２．２Hzの周波数帯の信号を含み、その信号が±１００μＶを超えているかを判定することにより、脳波信号に瞬きに起因した信号が含まれているかを判別できる。例えば、脳波信号に１．７Hz～２．２Hzのバンドパスフィルタをかけることにより、瞬きに起因する波形のみを抽出し、その波形の振幅が１００μＶを超えているかを判別する。
　ステップＳ２０１にて瞬きが存在しないと判別された場合は、顔電極部の位置検出は行わずに、図１３のステップＳ１０５で説明したように、脳波計測判別部１３による処理が行われる。
　ステップＳ２０１にて瞬きが存在した場合、顔電極位置判別部１５は、脳波インタフェース装置１が顔面の下方／上方のいずれかにずれたのか判別を行う。脳波インタフェース装置１のずれ、すなわち顔電極部１２のずれの方向を判別する方法を、図１６を用いて説明する。
　図１６（ａ）～（ｃ）は、耳電極部１１を右マストイド、顔電極部１２を右眼窩上縁部に装着し、瞬きをした場合の脳波信号の例である。脳波信号の計測は、ポリメイトＡＰ－１１２４（デジテックス製）を使用し、サンプリング周波数は２００Ｈｚ、時定数は１秒、フィルタは３０Ｈｚのローパスフィルタをかけ、アクティブ電極を利用して行った。また計測位置は、右眼黒目中心からの距離６ｃｍ、４．５ｃｍ、３ｃｍの位置を眼窩上縁部の上部、中部、下部として電極を配置した。
　図１６（ａ）は眼窩上縁部の上部に顔電極部１２を配置した場合の脳波信号を示し、図１６（ｂ）は眼窩上縁部の中部に顔電極部１２を配置した場合の脳波信号を示し、図１６（ｃ）は眼窩上縁部の下部に顔電極部１２を配置した場合の脳波信号を示している。図１６（ａ）、（ｂ）および（ｃ）に示されるように、顔電極部１２が眼窩上縁部の上方から下方に行くにしたがって、瞬きに起因する信号の振幅が大きくなっていることがわかる。これは、先に図２２を参照しながら説明したように、陽性に帯電した眼球の角膜とまぶたとが瞬きによってこすられ、角膜の陽性の電位がまぶたに伝わったためと考えられる。眼窩上縁部の下部の方がノイズが大きい理由は、眼窩上縁部の下部が角膜により近く、陽性の電位の影響が大きく出たためといえる。
　よって、瞬きに起因する信号の振幅の大きさを計測することで、顔電極部１２が眼窩上縁部のどの位置に装着されているかの予測が可能となり、顔電極部１２が適正な位置に装着されているかの判別を行うことができる。
　顔電極部１２のずれ判別として、図１４のステップＳ２０２において、顔電極位置判別部１５は、瞬きに起因する信号（計測した脳波信号の１．７Ｈｚ～２．２Ｈｚの周波数帯の信号）の振幅を計測し、その振幅が上限閾値を超えているかを判別する。上限閾値は、図１６（ｃ）に基づいて設定すると、例えば１２００μＶに設定される。
　信号の振幅が上限閾値よりも大きい場合、顔電極部１２の位置が眼窩上縁部の下方にずれていると判別される。そこで、ステップＳ２０３で顔電極位置判別部１５は、出力部１４に対し、ユーザ１０へ「ＨＭＤが下方にずれている」こと、または「ＨＭＤを上方に移動させるべき」ことを知らせる警告を呈示するよう指示する。出力部１４は、ディスプレイやスピーカを利用して、ユーザ１０への警告表示や警告音を鳴らすなどの警告呈示を行う。
　図１７（ａ）および（ｂ）を参照しながら、図６に示すディスプレイ１４を利用してユーザに警告を呈示する例を示す。図１７（ａ）は、ディスプレイ上に「ＨＭＤが下方にずれています。調整してください」という文字を表示することで、ユーザに調整の指示を与えるものである。この場合、文字列を点滅させるなどしてＨＭＤのずれが改善されるまで呈示をし続けてもよいし、ずれが発生した直後5秒間など一定時間の表示を行ってもよい。
　また図１７（ｂ）は、ディスプレイ１４上に、アイコンを利用してユーザに警告を呈示する例である。ＨＭＤが下方にずれている場合、ＨＭＤを上方に移動させる必要があるため、ディスプレイ上にＨＭＤを調整する方向などの上向き矢印アイコンを表示する。
　信号の振幅が上限閾値以下であった場合、図１４のステップＳ２０４にて、顔電極位置判別部１５は、瞬きに起因する信号の振幅が下限閾値よりも小さいか否かを判別する。図１６（ａ）に基づけば、下限閾値は、例えば４００μＶに設定される。
　信号の振幅が下限閾値よりも小さい場合、顔電極部１２の位置が眼窩上縁部の上方にずれていると判別され、ステップＳ２０５で顔電極位置判別部１５は、出力部１４に対し、ユーザ１０へ「ＨＭＤが上方にずれている」ことを知らせる警告を呈示するよう指示する。出力部１４は、ディスプレイやスピーカを利用して、ユーザ１０への警告表示や警告音を鳴らすなどの警告呈示を行う。この場合の警告表示方法も、上述の呈示方法と同様である。
　信号の振幅が下限閾値以上であった場合、顔電極部１２はユーザ１０の眼窩上縁部に正しく装着されていると判別され、ユーザ１０への警告表示は行わない。
　顔電極位置判別部１５は、上記の図１４に記載の処理の流れで、脳波インタフェース装置１の位置の判別を継続する。
　上記のように、顔電極位置判別部１５は、瞬きに起因する信号の振幅が予め定められた上限閾値および下限閾値の間に入っているか否かに応じて、顔電極部１２の位置を判別する。ここで顔電極位置判別部１５は、計測した脳波信号の１．７Ｈｚ～２．２Ｈｚの周波数帯の信号を瞬きに起因する信号として採用する。そして、瞬きに起因する信号の振幅が上限閾値と下限閾値との間に入っていない場合には、ＨＭＤは正しく装着されていないと判断されるため、顔電極位置判別部１５は、出力部１４を介してユーザ１０に警告を与える。この警告は、ＨＭＤがずれていること、または、ＨＭＤのずれを修正すべき方向などの、ユーザに対してずれの存在を告知する情報である。これにより、（１）個人ごとに異なる顔の形により脳波インタフェース装置１の装着位置がずれやすくなってしまう場合、（２）脳波インタフェース装置１の自重により装着位置が少しずつ下方にずれてしまう場合、（３）ユーザ１０の動作、姿勢などにより、脳波インタフェース装置１の位置が変化してしまった場合などの、ユーザ１０自身が脳波インタフェース装置１のずれに気づかない状態でもユーザ１０に脳波インタフェース装置１を正しく装着するよう注意を促すことが可能になる。上記の警告により、常に正しい電極位置で脳波を計測することができるようになり、安定した精度で脳波インタフェースが動作させることができる。
　尚、本実施形態では、顔電極部１２の位置の判別に瞬きの振幅を利用する方式を用いたが、眼球運動に起因する信号の振幅の大きさや、脳波信号の振幅や形状のマッチングを行うことにより、判別を行ってもよい。
　尚、本実施形態では、脳波インタフェース装置１の装着が不適切な場合に、出力部１４よりユーザ１０に警告を呈示する例を示したが、装置の装着が適切に行われている状態においても、ユーザへのＨＭＤ装着状態の呈示を行ってもよい。呈示の例を、図１８を用いて説明する。
　図１８（ａ）は、出力部１４により装置に備えられたＬＥＤや図６のディスプレイ１４を利用して、正しく設定された状態は「青色」、ずれている場合は「赤色」のようにアイコンの色で装着状態を表示する例である。また、図１８（ｂ）は、ディスプレイ１４またはＬＥＤ１８０上に、眼窩上縁部の範囲を示すバーを表示し、顔電極位置判別部１５が判別した顔電極部１２の位置をリアルタイムにユーザ１０に呈示することによりＨＭＤの装着状態を通知する例を示す。
　以上、本発明の実施形態を説明した。
　上述した各実施形態に関連する図面では、電極は脳波計測で一般的に利用されている円形の皿電極を示した。しかしながら、これは一例であり、他の形状の電極を採用してもよい。
　図１９は、種々の形状の電極を示す。図１９（ａ）は四角い形状の電極を示し、図１９（ｂ）は長い電極（たとえば楕円や長方形）を示し、図１９（ｃ）は、表面に突起１９１を含む電極を示している。
　また、上述した各実施形態に関連する図面では、先セル部２１の形状は一般的な眼鏡の先セル部の形状と同じであるとした。先セル部２１についても、他の形状を採用してもよい。
　図２０（ａ）は、先に説明したテンプル部の先端がカーブした形状の先セル部２１ａを示している。
　図２０（ｂ）は、テンプル部に突起をもたせ、ユーザ１０の耳上部に引っかかる形状の先セル部２１ｂを示している。また図２０（ｃ）は、先セル部に代えて、テンプル部またはリム部に設置された紐を示す。この紐（またはゴム）により、脳波インタフェースシステム１をユーザ１０の耳に固定する。また、図２０（ｄ）は、テンプル部に挿入することで取り外し可能な先セル部２１ｄを示している。また、上記の電極の形状を含めて考えると、先セル部の一部に耳電極部１１が配置されるだけでなく、耳電極部１１自体が先セル部の形状となっている場合も考えられる。
　さらに、実施形態２において説明した弾性部１１１（図１１等）の具体的な構成も種々考えられる。
　図２１（ａ）～（ｃ）はそれぞれ弾性部１１１および張力検出部１１２を含むテンプル部の一部を図示している。
　図２１（ａ）は、実施形態２で言及した、バネを含む弾性部２１０ａを示している。細い実線はテンプル部で、破線は弾性部２１０ａを示す。弾性部１１１の中にバネなどの弾性体が含まれ、弾性体の片側が張力検出部１１２と接続され、反対側が先セル部側のテンプル部と接続されている。弾性体が伸びると張力検出部１１２に接続された弾性体の位置に力が加わり、張力検出部１１２は張力の検出が可能となり、ユーザ１０のＨＭＤ装着タイミングを検出することができる。また、耳電極部１１の脳波信号を伝達するための信号線は、弾性体の内部または外部を通して、顔電極位置判別部１５や脳波計測判定部１３と接続される。
　図２１（ｂ）は、弾性体がバネではなく、ゴムの例を示している。このように、弾性体は、バネやゴムなどに限らず、長さを変化させることが可能な様々な弾性体を利用することができる。
　さらに図２１（ｃ）は、弾性部１１１中に弾性体ではなくスライド式の固定具２１０ｃが含まれている例を示している。これはテンプル部が段階的に長さを調節できる機構となっており、一方のテンプル部の突起が他方のテンプル部の穴にはまることにより、長さの固定を可能としている。張力検出部１１２は、上記両方のテンプル部に接続され、テンプル部の突起がはまっている穴の位置、もしくは、上記両方のテンプル部にかかる張力を検出することにより、ユーザ１０のＨＭＤ装着タイミングを検出する。尚、上記の長さの調節の方法は一例であり、段階的ではなく、ねじ等で無段階に長さを調節できる機構も本特許の範疇である。
　本発明にかかる脳波インタフェース装置では、顔面部において脳波計測をする場合に広く利用可能であり、両眼の前にレンズを有する眼鏡型のＨＭＤにとどまらず、図１０に示す顔面片側に装着するウェアラブルデバイスなど顔面部に装着するウェアラブル機器において、脳波を利用したインタフェースを構築する際に利用可能である。
　１　脳波インタフェース装置
　１０　ユーザ
　１１　耳電極部
　１２　顔電極部
　１３　脳波計測判定部
　１４　出力部
　１５　顔電極位置判別部

Claims (9)

  1. 　ユーザの頭部に装着される、眼鏡型の脳波インタフェースシステムであって、
    　ユーザに視覚刺激を呈示する出力部と、
    　装着されたときに前記ユーザの耳に接する位置に配置された耳電極部と、
    　装着されたときに前記ユーザの目尻と目頭を結ぶ直線よりも下側で前記ユーザの顔面部に接し、前記眼鏡型の脳波インタフェースシステムの重量を支持する位置に配置された顔電極部と、
    　前記視覚刺激が呈示されたタイミングを起点にして、前記耳電極部と前記顔電極部の電位差に基づいて事象関連電位を計測する脳波計測判定部と
    　を備えた、脳波インタフェースシステム。
  2. 　前記顔電極部は、前記眼鏡型の脳波インタフェースシステムのノーズパッド部である、請求項１に記載の脳波インタフェースシステム。
  3. 　前記耳電極部は、前記ユーザの目尻と目頭を結ぶ直線に対して、顔電極部と同じ側に配置される、請求項１に記載の脳波インタフェースシステム。
  4. 　前記耳電極部は、前記ユーザの耳後で接する、請求項１に記載の脳波インタフェースシステム。
  5. 　前記脳波計測判定部は、事象関連電位に関する複数の波形のデータが蓄積された判別基準データベースを保持しており、
    　前記判別基準データベースには、選択を希望するときに現れる事象関連電位の波形のデータと、選択を希望しないときに現れる事象関連電位の波形のデータとが蓄積されており、
    　前記脳波計測判定部は、計測した前記事象関連電位の波形が前記選択を希望するときに現れる事象関連電位に最も近いと判断したときは、前記視覚刺激に対応付けられた処理を実行する、請求項１に記載の脳波インタフェースシステム。
  6. 　前記ユーザの脳波信号のうち、前記ユーザの瞬きに起因する信号の振幅が、予め定められた上限閾値および下限閾値の間に入っているか否かに応じて、前記顔電極部の位置を判定する顔電極位置判別部をさらに備えた、請求項１に記載の脳波インタフェースシステム。
  7. 　前記脳波計測判定部は、前記耳電極部および前記顔電極部の電位差に基づいて脳波信号を計測し、
    　前記顔電極位置判別部は、計測された前記脳波信号のうちの、所定の周波数帯の信号を、前記ユーザの瞬きに起因する信号として採用する、請求項６に記載の脳波インタフェースシステム。
  8. 　前記顔電極位置判別部は、計測された前記脳波信号のうちの、１．７Ｈｚ～２．２Ｈｚの周波数帯の信号を、前記ユーザの瞬きに起因する信号として採用する、請求項７に記載の脳波インタフェースシステム。
  9. 　前記ユーザの瞬きに起因する信号の振幅が、前記上限閾値よりも大きい場合、または、前記下限閾値よりも小さい場合には、前記出力部は、前記眼鏡型の脳波インタフェースシステムがずれていることを示す警告を呈示する、請求項８に記載の脳波インタフェースシステム。
PCT/JP2010/000197 2009-01-19 2010-01-15 脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム WO2010082496A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2010541615A JP4652489B2 (ja) 2009-01-19 2010-01-15 脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム
CN201080002121.XA CN102099770B (zh) 2009-01-19 2010-01-15 用于脑波接口系统的启动装置、方法以及计算机程序
US12/955,016 US8818498B2 (en) 2009-01-19 2010-11-29 Electroencephalogram interface system
US14/258,614 US20140228652A1 (en) 2009-01-19 2014-04-22 Electroencephalogram interface system
US15/040,510 US20160157778A1 (en) 2009-01-19 2016-02-10 Electroencephalogram interface system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-009179 2009-01-19
JP2009009179 2009-01-19

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US12/955,016 Continuation US8818498B2 (en) 2009-01-19 2010-11-29 Electroencephalogram interface system

Publications (1)

Publication Number Publication Date
WO2010082496A1 true WO2010082496A1 (ja) 2010-07-22

Family

ID=42339748

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/000197 WO2010082496A1 (ja) 2009-01-19 2010-01-15 脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム

Country Status (4)

Country Link
US (3) US8818498B2 (ja)
JP (1) JP4652489B2 (ja)
CN (1) CN102099770B (ja)
WO (1) WO2010082496A1 (ja)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1046862A (ja) * 1996-07-31 1998-02-17 Morimatsu Sogo Kenkyusho:Kk タンク周壁の施工方法及び施工装置
JP2012058530A (ja) * 2010-09-09 2012-03-22 Seiko Epson Corp シャッター眼鏡、及び、画像表示システム
JP2014145734A (ja) * 2013-01-30 2014-08-14 Nikon Corp 情報入出力装置、及び情報入出力方法
JP2015202188A (ja) * 2014-04-14 2015-11-16 株式会社ジェイアイエヌ アイウエア
WO2016052168A1 (ja) * 2014-10-01 2016-04-07 アルプス電気株式会社 人体特性検出装置及び眼鏡型電子機器
JP2016126500A (ja) * 2014-12-26 2016-07-11 Kddi株式会社 ウェアラブル端末装置およびプログラム
KR20160107261A (ko) * 2014-02-24 2016-09-13 소니 주식회사 스마트 착용형 디바이스들에 대한 신체 위치 최적화 및 바이오-신호 피드백
JP2017049775A (ja) * 2015-09-01 2017-03-09 株式会社東芝 メガネ型ウエアラブル端末およびこの端末を用いる方法
WO2018088187A1 (ja) * 2016-11-08 2018-05-17 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
JP2018529171A (ja) * 2015-09-16 2018-10-04 リキッドウェブ・ソチエタ・ア・レスポンサビリタ・リミタータＬＩＱＵＩＤＷＥＢ Ｓ．ｒ．ｌ． 支援技術を制御するためのシステムおよびその方法
JP2018186934A (ja) * 2017-04-28 2018-11-29 凸版印刷株式会社 生体信号検出装置、および、脳波測定方法
JP2019103581A (ja) * 2017-12-11 2019-06-27 日産自動車株式会社 脳波測定方法及び脳波測定装置
JP2020501625A (ja) * 2016-10-28 2020-01-23 ユルゴテック 脳活動信号を取得するためのデバイス
JP2020110582A (ja) * 2019-01-15 2020-07-27 督洋生技股▲ふん▼有限公司 脳波誘導用のヘッドマウント式装置、システム及びその誘導方法
CN112244837A (zh) * 2020-07-27 2021-01-22 长春中医药大学附属医院(吉林省中医院) 针对治疗失忆类脑病的中医治疗仪

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110066020A1 (en) * 2008-03-13 2011-03-17 Alexander Svojanovsky Multi-channel eeg electrode system
US10368771B2 (en) 2008-03-13 2019-08-06 Alexander Svojanovsky EEG electrode and multi-channel EEG electrode system
US8576143B1 (en) * 2010-12-20 2013-11-05 Google Inc. Head mounted display with deformation sensors
JP6340534B2 (ja) * 2011-06-01 2018-06-13 東海光学株式会社 大脳視覚野等の誘発活動による眼鏡レンズの評価方法
US20120310106A1 (en) * 2011-06-02 2012-12-06 James Cavuoto Device-independent neurological monitoring system
US9545225B2 (en) * 2011-06-02 2017-01-17 James Cavuoto Device-independent neurological monitoring system
EP2604183A1 (en) * 2011-12-16 2013-06-19 General Electric Company Method and arrangement for detecting movement artifact from bioelectrical signals measured from the head of a patient
JP5661067B2 (ja) * 2012-05-29 2015-01-28 株式会社ジェイアイエヌ アイウエア
US10130277B2 (en) 2014-01-28 2018-11-20 Medibotics Llc Willpower glasses (TM)—a wearable food consumption monitor
US10772559B2 (en) 2012-06-14 2020-09-15 Medibotics Llc Wearable food consumption monitor
US9814426B2 (en) 2012-06-14 2017-11-14 Medibotics Llc Mobile wearable electromagnetic brain activity monitor
WO2014055382A1 (en) * 2012-10-01 2014-04-10 Heck Sandy L Control system and apparatus utilizing signals originating in the periauricular neuromuscular system
JP5888205B2 (ja) * 2012-11-02 2016-03-16 ソニー株式会社 画像表示装置並びに情報入力装置
US20140228701A1 (en) * 2013-02-11 2014-08-14 University Of Washington Through Its Center For Commercialization Brain-Computer Interface Anonymizer
US9418617B1 (en) * 2013-03-13 2016-08-16 Google Inc. Methods and systems for receiving input controls
US20150081225A1 (en) * 2013-06-23 2015-03-19 Keady John P Method and System for the Visualization of Brain Activity
CN103637799A (zh) * 2013-12-17 2014-03-19 上海电机学院 人脑成像系统
CN103690161B (zh) * 2013-12-24 2015-05-20 天津师范大学 一种穿戴式脑电睡眠质量评估仪
SG10201709855UA (en) * 2014-01-06 2017-12-28 Interaxon Inc Wearable apparatus for brain sensors
US9436279B2 (en) * 2014-03-31 2016-09-06 Rovi Guides, Inc. Systems and methods for controlling user devices based on brain activity
US10368802B2 (en) 2014-03-31 2019-08-06 Rovi Guides, Inc. Methods and systems for selecting media guidance applications based on a position of a brain monitoring user device
JP6306926B2 (ja) * 2014-04-14 2018-04-04 株式会社ジンズ アイウエア
US9531708B2 (en) 2014-05-30 2016-12-27 Rovi Guides, Inc. Systems and methods for using wearable technology for biometric-based recommendations
US20170186236A1 (en) * 2014-07-22 2017-06-29 Sony Corporation Image display device, image display method, and computer program
EP3278174B1 (en) 2015-04-02 2023-06-07 Essilor International A monitoring system of the position of a head mounted device
WO2016176584A1 (en) * 2015-04-30 2016-11-03 Saranas, Inc. Noninvasive system and methods for utilizing impedance for the detection of cerebrospinal fluid volume
TWI563970B (zh) * 2015-09-16 2017-01-01 國立交通大學 眼球位置偵測裝置及其方法
JP6668811B2 (ja) * 2016-02-23 2020-03-18 セイコーエプソン株式会社 訓練装置、訓練方法、プログラム
US20170347905A1 (en) * 2016-06-02 2017-12-07 Graham Boulton Brain activity monitoring, supporting mental state development and training
CN106236088A (zh) * 2016-08-31 2016-12-21 博睿康科技（常州）股份有限公司 一种脑电电极
CN106445140B (zh) * 2016-09-26 2018-12-25 苏州神经元电子科技有限公司 静视野自动识别的非注意事件相关电位脑-机接口方法
US11751796B2 (en) * 2017-01-04 2023-09-12 Brainco, Inc. Systems and methods for neuro-feedback training using video games
US20180235540A1 (en) 2017-02-21 2018-08-23 Bose Corporation Collecting biologically-relevant information using an earpiece
JP2018142857A (ja) * 2017-02-28 2018-09-13 セイコーエプソン株式会社 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法
US11244315B2 (en) 2017-03-21 2022-02-08 Intelligent Technologies International, Inc. Authentication system for controlling access and use based on heartbeat shape
US10482227B2 (en) * 2017-03-28 2019-11-19 International Business Machines Corporation Electroencephalography (EEG) based authentication
US10213157B2 (en) * 2017-06-09 2019-02-26 Bose Corporation Active unipolar dry electrode open ear wireless headset and brain computer interface
US10567961B2 (en) 2017-11-02 2020-02-18 Bank Of America Corporation System for electroencephalogram patterning recognition for authentication
US11152086B2 (en) 2017-11-02 2021-10-19 Bank Of America Corporation Electroencephalogram triggered experience modification system
US10456054B2 (en) 2017-11-02 2019-10-29 Bank Of America Corporation Electroencephalogram triggered resource distribution query system
JP6691928B2 (ja) * 2018-02-07 2020-05-13 株式会社ジンズホールディングス アイウエアセット及び信号処理ユニット
US20190265473A1 (en) * 2018-02-23 2019-08-29 Oculus Vr, Llc Apparatus, systems, and methods for enabling low-power communications via wearers' bodies
JP7236852B2 (ja) * 2018-12-03 2023-03-10 株式会社ジンズホールディングス ノーズパッド及びアイウエア
JP6957695B1 (ja) * 2020-07-30 2021-11-02 株式会社ジンズホールディングス プログラム、情報処理方法、及び情報処理装置
US20230211117A1 (en) * 2021-12-30 2023-07-06 Koninklijke Philips N.V. Method for estimating device fit using physiological data

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001100144A (ja) * 1999-09-30 2001-04-13 Olympus Optical Co Ltd 医療用顔面装着型映像表示装置
WO2008152799A1 (ja) * 2007-06-12 2008-12-18 Panasonic Corporation 脳波インタフェースシステムおよび起動装置

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59174804A (ja) 1983-03-24 1984-10-03 Dainippon Printing Co Ltd 回折格子の作製方法
US4579125A (en) * 1984-01-23 1986-04-01 Cns, Inc. Real-time EEG spectral analyzer
JPH0226534A (ja) 1988-07-15 1990-01-29 Seiko Epson Corp バイオフィードバック装置
JP3127322B2 (ja) 1992-08-27 2001-01-22 東和化成工業株式会社 無糖グミゼリー及びその製造方法
US6647296B2 (en) * 1997-10-27 2003-11-11 Neuropace, Inc. Implantable apparatus for treating neurological disorders
JP2000041962A (ja) 1998-07-28 2000-02-15 Matsushita Electric Works Ltd 心拍信号処理装置
WO2000019383A2 (en) * 1998-09-11 2000-04-06 Loquitor Technologies Llc Generation and detection of induced current using acoustic energy
JP2001187034A (ja) 1999-10-19 2001-07-10 Nippon Koden Corp 脳波電極付ヘッドフォン及びストレス度診断装置
JP2001340312A (ja) 2000-03-31 2001-12-11 Tsutomu Kamei 脳波検出に用いる頭部装着用具
JP2003157136A (ja) 2001-11-20 2003-05-30 Canon Inc 生体反応を記録可能な高臨場感映像表示装置
US20030195588A1 (en) * 2002-04-16 2003-10-16 Neuropace, Inc. External ear canal interface for the treatment of neurological disorders
JP2004016658A (ja) 2002-06-19 2004-01-22 Ntt Docomo Inc 生体信号測定可能な携帯型端末および測定方法
JP2004350797A (ja) 2003-05-27 2004-12-16 Japan Science & Technology Agency 脳波の評価方法及びその評価装置
JP4369290B2 (ja) 2003-07-02 2009-11-18 尚之 加納 事象関連電位を利用したヒトの心理状態等の判定装置
US7496400B2 (en) * 2003-10-17 2009-02-24 Ge Healthcare Finland Oy Sensor arrangement
JP2006196995A (ja) 2005-01-11 2006-07-27 Matsushita Electric Ind Co Ltd ３次元めがね視聴検知
JP2006212348A (ja) 2005-02-07 2006-08-17 Olympus Corp 脳波電極接触検知装置、脳波電極接触検知方法および脳波電極ユニット
JP2006295520A (ja) 2005-04-11 2006-10-26 Olympus Corp 動画撮像装置
JP4722573B2 (ja) 2005-06-10 2011-07-13 株式会社エヌ・ティ・ティ・ドコモ 顔面情報検出装置および顔面情報検出式通信装置
CN1736327A (zh) * 2005-07-21 2006-02-22 高春平 脑电信号控制的健康及治疗装置
US20070060830A1 (en) * 2005-09-12 2007-03-15 Le Tan Thi T Method and system for detecting and classifying facial muscle movements
JP2008099834A (ja) 2006-10-18 2008-05-01 Sony Corp 表示装置、表示方法
US20090253996A1 (en) * 2007-03-02 2009-10-08 Lee Michael J Integrated Sensor Headset
JP2008301971A (ja) 2007-06-06 2008-12-18 Fujitsu Component Ltd 脳波検出装置
CN101669083B (zh) * 2007-10-29 2012-01-11 松下电器产业株式会社 用于脑波接口系统的启动装置、方法及计算机程序

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001100144A (ja) * 1999-09-30 2001-04-13 Olympus Optical Co Ltd 医療用顔面装着型映像表示装置
WO2008152799A1 (ja) * 2007-06-12 2008-12-18 Panasonic Corporation 脳波インタフェースシステムおよび起動装置

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1046862A (ja) * 1996-07-31 1998-02-17 Morimatsu Sogo Kenkyusho:Kk タンク周壁の施工方法及び施工装置
JP2012058530A (ja) * 2010-09-09 2012-03-22 Seiko Epson Corp シャッター眼鏡、及び、画像表示システム
US9057944B2 (en) 2010-09-09 2015-06-16 Seiko Epson Corporation Shutter glasses and image display system comprising at least one of a drive circuit or a drive power supply accommodated on a temple portion of a frame member
JP2014145734A (ja) * 2013-01-30 2014-08-14 Nikon Corp 情報入出力装置、及び情報入出力方法
JP2017512510A (ja) * 2014-02-24 2017-05-25 ソニー株式会社 スマートウェアラブル装置の身体位置最適化及び生体信号フィードバック
KR20160107261A (ko) * 2014-02-24 2016-09-13 소니 주식회사 스마트 착용형 디바이스들에 대한 신체 위치 최적화 및 바이오-신호 피드백
KR101939888B1 (ko) 2014-02-24 2019-01-17 소니 주식회사 스마트 착용형 디바이스들에 대한 신체 위치 최적화 및 바이오-신호 피드백
US10254825B2 (en) 2014-02-24 2019-04-09 Sony Corporation Body position optimization and bio-signal feedback for smart wearable devices
JP2015202188A (ja) * 2014-04-14 2015-11-16 株式会社ジェイアイエヌ アイウエア
WO2016052168A1 (ja) * 2014-10-01 2016-04-07 アルプス電気株式会社 人体特性検出装置及び眼鏡型電子機器
JPWO2016052168A1 (ja) * 2014-10-01 2017-08-03 アルプス電気株式会社 人体特性検出装置及び眼鏡型電子機器
JP2016126500A (ja) * 2014-12-26 2016-07-11 Kddi株式会社 ウェアラブル端末装置およびプログラム
JP2017049775A (ja) * 2015-09-01 2017-03-09 株式会社東芝 メガネ型ウエアラブル端末およびこの端末を用いる方法
JP2018529171A (ja) * 2015-09-16 2018-10-04 リキッドウェブ・ソチエタ・ア・レスポンサビリタ・リミタータＬＩＱＵＩＤＷＥＢ Ｓ．ｒ．ｌ． 支援技術を制御するためのシステムおよびその方法
US11291385B2 (en) 2015-09-16 2022-04-05 Liquidweb S.R.L. System for controlling assistive technologies and related method
JP2020501625A (ja) * 2016-10-28 2020-01-23 ユルゴテック 脳活動信号を取得するためのデバイス
WO2018088187A1 (ja) * 2016-11-08 2018-05-17 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
US10817057B2 (en) 2016-11-08 2020-10-27 Sony Corporation Information processing device, information processing method, and program
JP2018186934A (ja) * 2017-04-28 2018-11-29 凸版印刷株式会社 生体信号検出装置、および、脳波測定方法
JP2019103581A (ja) * 2017-12-11 2019-06-27 日産自動車株式会社 脳波測定方法及び脳波測定装置
JP7222176B2 (ja) 2017-12-11 2023-02-15 日産自動車株式会社 脳波測定方法及び脳波測定装置
JP2020110582A (ja) * 2019-01-15 2020-07-27 督洋生技股▲ふん▼有限公司 脳波誘導用のヘッドマウント式装置、システム及びその誘導方法
JP6991194B2 (ja) 2019-01-15 2022-01-12 督洋生技股▲ふん▼有限公司 ヘッドマウント式装置及び脳波誘導用のシステム
CN112244837A (zh) * 2020-07-27 2021-01-22 长春中医药大学附属医院(吉林省中医院) 针对治疗失忆类脑病的中医治疗仪

Also Published As

Publication number Publication date
JP4652489B2 (ja) 2011-03-16
US20110071416A1 (en) 2011-03-24
US20160157778A1 (en) 2016-06-09
CN102099770A (zh) 2011-06-15
US8818498B2 (en) 2014-08-26
CN102099770B (zh) 2014-01-08
US20140228652A1 (en) 2014-08-14
JPWO2010082496A1 (ja) 2012-07-05

Similar Documents

Publication Publication Date Title
JP4652489B2 (ja) 脳波インタフェースシステムのための起動装置、方法およびコンピュータプログラム
JP4465414B2 (ja) 脳波を用いた機器の制御方法および脳波インタフェースシステム
CN210835473U (zh) 耳戴式电极结构以及穿戴式生理感测装置
JP4921621B2 (ja) 脳波計測システム、脳波計測方法及びそのプログラム
US20190223747A1 (en) Wearable physiological activity sensor, sensing device, and sensing system
US10302944B2 (en) Head-mount type display device and method of controlling head-mount type display device
JP4778595B2 (ja) 電極装着状態判定システム、電極装着状態判定方法及びそのプログラム
TW201626951A (zh) 穿戴式生理監測裝置及系統
US20160345901A1 (en) Wearable Brain Activity Monitor
JP4531864B2 (ja) 咀嚼筋電を用いたインタフェースシステム
JP2015177403A (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
KR102185338B1 (ko) 안면 지지 마스크 및 이를 포함하는 헤드 마운트 디스플레이 장치
CN111434306B (zh) 用于导引脑波的头戴式装置、系统及其导引方法
US20230071021A1 (en) Electrooculogram measurement and eye-tracking
TWI610656B (zh) 穿戴式生理監測裝置
JP6687639B2 (ja) 情報処理方法、情報処理装置、プログラム及びアイウエア
TWM574026U (zh) 穿戴式生理監測裝置及系統
CN210204730U (zh) 多用途生理检测系统
TWI593388B (zh) Glasses physiological activity sensors and devices
KR20170026925A (ko) 뇌파를 이용한 스마트 글라스
TWM582375U (zh) Multi-purpose physiological detection system
TWM566551U (zh) Multi-purpose physiological detecting device and system
EP3716016B1 (en) Method and brain-computer interface system for recognizing brainwave signals
WO2019154312A1 (zh) 多用途生理检测装置及系统

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080002121.X

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10731165

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2010541615

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10731165

Country of ref document: EP

Kind code of ref document: A1