JP4788956B2 - 脳活動解析方法および装置 - Google Patents

脳活動解析方法および装置 Download PDF

Info

Publication number
JP4788956B2
JP4788956B2 JP2006021820A JP2006021820A JP4788956B2 JP 4788956 B2 JP4788956 B2 JP 4788956B2 JP 2006021820 A JP2006021820 A JP 2006021820A JP 2006021820 A JP2006021820 A JP 2006021820A JP 4788956 B2 JP4788956 B2 JP 4788956B2
Authority
JP
Japan
Prior art keywords
brain activity
time
response
brain
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006021820A
Other languages
English (en)
Other versions
JP2007202619A (ja
Inventor
直 岩木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Institute of Advanced Industrial Science and Technology AIST
Original Assignee
National Institute of Advanced Industrial Science and Technology AIST
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Institute of Advanced Industrial Science and Technology AIST filed Critical National Institute of Advanced Industrial Science and Technology AIST
Priority to JP2006021820A priority Critical patent/JP4788956B2/ja
Publication of JP2007202619A publication Critical patent/JP2007202619A/ja
Application granted granted Critical
Publication of JP4788956B2 publication Critical patent/JP4788956B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Description

本発明は、脳活動解析方法および装置に関し、より詳しくは、外部刺激に対する脳活動を解析する脳活動解析方法および装置に関する。
脳活動の解析は、脳機能障害の原因部位の特定などに有効であり、従来から種々の方法が提案されている。脳機能を非侵襲的に計測することができ、且つ、優れた時間分解能を有するものとして、脳波(EEG)や脳磁図(MEG)を利用した脳機能研究や臨床診断がすすめられている。
例えば、非特許文献1には、被験者に視覚・聴覚などの刺激を多数回与え、その刺激呈示を起点に全ての試行の信号を加算平均することにより、刺激に関連するEEG・MEG成分を抽出することが開示されている。
Hamalainen, M.S., Hari, R., Ilmoniemi, R.J., Knuutila, J., Lounasmaa, O.V., 1993. Magnetoencephalography - theory, instrumentation, and application to noninvasive studies of the working human brain. Rev. Mod. Phys. 65 413-497
上記のような計測信号の加算平均に基づく脳活動の解析は、刺激の呈示からほぼ同じ時刻に同じような活動が観測される低次な脳反応に対しては、ある程度有効である。ところが、言語処理などの高次な脳活動の解析を行う場合、被験者の示す行動学的指標(例えば、言語機能における刺激呈示から発声までの時間)に大きく関連する脳活動は、必ずしも刺激の呈示に同期するとは限らず、各試行で時間的に大きく変動することが多い。このため、上記従来の方法では、行動学的指標の変化に伴って変動する重要な成分を適切に検出することができないという問題があった。同時に、上記のような行動学的指標のばらつきと相関の高い成分は、病因との関連が深く臨床的にも重要であることが多い。
そこで、本発明は、脳活動の解析を容易に精度良く行うことができる脳活動解析方法および装置の提供を目的とする。
本発明の前記目的は、被験者に刺激を呈示する刺激呈示ステップと、刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測ステップと、刺激呈示に対する被験者の応答により応答信号を入力する応答入力ステップと、前記脳活動信号および応答信号に基づいて脳活動を解析する解析ステップと、脳活動の解析結果を出力する出力ステップとを備え、前記刺激呈示ステップは、刺激呈示を複数回行い、前記脳活動計測ステッ
プは、各刺激呈示に対して脳の複数部位における前記時系列データを取得し、前記解析ステップは、脳の各部位毎に、前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行い、前記出力ステップは、前記応答時間と脳活動時間との相関の程度を判別可能に出力する脳活動解析方法であって、前記出力ステップは、複数の前記時系列データを、前記応答時間に基づく順序に従って並び替え、前記応答時間のデータと同一時間軸上に表示するステップを備える脳活動解析方法により達成される。
また、前記出力ステップは、上記の構成に代えて、前記応答時間と脳活動時間との相関値を算出して表示するステップを備えることもできる。この場合、前記出力ステップは、算出した前記相関値を予め設定された基準値と比較することにより、脳の各部位における障害の有無を判別して表示するステップを更に備えることが可能である。
また、本発明の前記目的は、被験者に刺激を呈示する刺激呈示装置と、刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測装置と、刺激呈示に対する被験者の応答により応答信号を入力する応答入力装置と、前記脳活動信号および応答信号に基づいて脳活動を解析する解析装置と、脳活動の解析結果を出力する出力装置とを備え、前記解析装置は、前記刺激呈示装置からの複数回の刺激呈示に対して、前記脳活動計測装置により取得された脳の複数部位における前記時系列データを収集するデータ収集部と、脳の各部位毎に、収集された前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行うデータ解析部とを備え、前記出力装置は、前記脳活動時間と応答時間との相関の程度を判別可能に出力する脳活動解析装置であって、前記出力装置は、複数の前記時系列データを、前記応答時間に基づく順序に従って並び替え、前記応答時間のデータと同一時間軸上に表示する脳活動解析装置により達成される。
また、前記出力装置は、上記の構成に代えて、前記応答時間と脳活動時間との相関値を算出して表示することもできる。
本発明の脳活動解析方法および装置によれば、脳活動の解析を容易に精度良く行なうことができ、特に、行動学的に計測可能な現象と相関が高い脳活動の解析に好適である。
以下、本発明の実施の形態について添付図面を参照して説明する。図1は、本発明の一実施形態に係る脳活動解析装置の概略構成を示すブロック図である。 図1に示すように、脳活動解析装置1は、刺激呈示装置10と、脳活動計測装置20と、応答入力装置30と、解析装置40と、出力装置50とを備えている。
刺激呈示装置10は、被験者の視覚、聴覚、触覚などに刺激を付与する装置であり、自動又は手動操作による刺激の呈示タイミングと同期して、トリガ信号を出力する。
脳活動計測装置20は、脳の複数の部位における活動の時間的な変化を測定
して脳活動信号の時系列データを取得する装置であり、例えば、脳波(EEG)や脳磁図(MEG)など被験者の脳神経の電気活動を計測する装置を挙げることができる。
応答入力装置30は、刺激呈示に対する被験者の発声や動作などの応答により応答信号を入力する装置であり、例えば、マイクロフォン、キーボード、マウス、スイッチボタンなどを挙げることができる。
解析装置40は、データ収集部41及びデータ解析部42を備えている。データ収集部41は、脳活動計測装置20により取得された脳の複数部位における時系列データを、複数回の刺激呈示のそれぞれについて収集する。
データ解析部42は、データ収集部41に収集された複数の時系列データについて、刺激呈示装置10から入力されたトリガ信号に基づき刺激呈示時を基準時(時刻0)とした時間軸を設定し、活動状態にある各脳部位の脳活動時間を特定する。脳活動時間の特定は、時系列データの信号強度の絶対値が所定の閾値を超える時間幅を検出することにより行うことができるが、必ずしもこれに限定されるものではなく、例えば、時系列データの信号強度の絶対値が基準時から初めて所定の閾値を超えるまでの時間、或いは、基準時から最後に所定の閾値を下回るまでの時間に基づいて、脳活動時間を特定することもできる。また、ここでいう脳活動時間の特定は、必ずしも数値化される必要はなく、例えば、時系
列データの信号強度の分布が、色の違いや濃淡などで視覚的に判別可能な場合も含まれる。
また、データ解析部42は、刺激呈示装置10から入力されたトリガ信号と、応答入力装置30から入力された応答信号との入力タイミングに基づいて、時系列データ毎に刺激呈示から応答信号が入力されるまでの応答時間を算出し、上述した脳活動時間との関連付けを行う。応答信号は、応答入力装置30がキーボードやスイッチなどである場合には、入力操作によって生成可能であり、応答入力装置30がマイクロフォンである場合には、入力された音声信号の波形をデータ解析部42において分析し、例えば、子音の破裂から声帯が振動するまでの時間であるVOT(Voice Onset Time)を判別してこれを応答信号とすることができる。
出力装置50は、脳の部位毎に取得された複数の時系列データの脳活動時間及び応答時間に基づいて、これら脳活動時間と応答時間との相関の程度を判別可能に出力する。出力方法としては、例えば、画面上への表示や、紙媒体等への印刷が挙げられる。
図2は、上述した脳活動解析装置1の具体的な適用例として、難読症の被験者における脳機能障害の原因部位を特定するための概略構成を示す図である。
刺激呈示装置10は、パーソナルコンピュータを使用しており、画面上に種々の文字を順次表示することにより、被験者の視覚に刺激を与える。また、刺激呈示装置10は、文字の表示タイミングと同期したトリガ信号を生成し、解析装置40に入力する。
脳活動計測装置20は、SQUID(Superconducting quantum interference devices)セ
ンサを頭部の回りにヘルメット状に多数配置した全頭型脳磁界計測装置を使用し、図2の符号A〜Cで示すように、被験者の左側頭部における脳部位の後、中、前のセンサ群により、脳活動信号を測定する。測定部位をこのように設定したのは、言語処理における知覚→変換→運動(発話)の各処理が、主に左脳の後方から前方に向けて順次行われるからである。脳活動計測装置20としては、頭部に装着可能なキャップに脳波計を複数装着したものを使用することもできる。
応答入力装置30は、マイクロフォンにより構成され、被験者から入力された音声信号が増幅器(図示せず)で増幅された後、解析装置40に入力される。
解析装置40及び出力装置50は、同一のパーソナルコンピュータにより構成されており、解析装置40のデータ収集部41は、メモリにより構成されており、脳活動計測装置20から入力された脳活動信号の時系列データを、刺激呈示装置10から入力されたトリガ信号及び応答入力装置30から入力された音声信号と共に収集して格納する。データ解析部42は、CPUにより構成され、収集された脳活動信号の時系列データの解析を行い、出力装置50としてのモニタに画面表示する。データ解析部42における解析については、後述する。
次に、上述した脳活動解析装置1を用いて脳活動解析を行う方法を説明する。まず、被験者の頭部に脳活動計測装置20を装着した後、刺激呈示装置10による刺激の呈示を開始する。刺激の呈示は、ひらがなやカタカナなどの文字を一定の間隔で順次画面表示することにより行われ、各試行による脳活動信号の時系列変化が脳活動計測装置20により計測される。
被験者は、刺激呈示装置10に表示される文字を視認して、当該文字を順次発声する。応答入力装置30は、検出した音声信号を解析装置40に入力する。
解析装置40は、複数回の刺激呈示により収集された複数の脳活動信号の時系列データを脳部位A〜C毎に整理し、各時系列データに対して、刺激呈示装置10からのトリガ信号に基づいて基準時刻を設定する。また、応答入力装置30から入力された音声信号の波形から、上述のようにVOTを検出して応答信号を抽出し、刺激呈示時である基準時刻から応答信号が入力されるまでの応答時間を算出して、各時系列データに対応させる。そして、各脳部位A〜Cに対する複数の時系列データを、応答時間に基づき昇順又は降順に並び替え、応答時間と共に出力装置50に画面表示する。
出力装置50の表示例を、図3に示す。図3(a)は、図2の脳部位Aに対応しており、図3(b)は、図2の脳部位Bに対応している。図3(a)及び(b)において、時系列データは、上から下に向けて応答時間が長くなるように並び替えて表示されている。時系列データの信号強度は、色の濃淡で表示されており、色が濃い領域ほど信号強度の絶対値が大きいことを示している。図中の破線で囲んだ領域は、信号強度の絶対値が所定の閾値を越える領域であり、この領域の時間幅から脳活動時間を特定することができる。
解析者は、出力装置50の画面表示に基づき、脳活動時間と応答時間との相関の程度を判別する。図3(a)及び(b)に示す結果は、脳部位Aにおける脳活動よりも脳部位Bにおける脳活動の方が応答時間との相関性が高いことを示している。一般には、脳の後方側部位における脳活動よりも前方側部位における脳活動の方が、応答時間との相関性は高くなるので、図3(a)及び(b)の結果は、脳活動が正常であることを表している。一方、脳部位Aの脳活動時間の方が脳部位Bの脳活動時間よりも相関性が高い場合には、脳部位A又はBのいずれかが異常であると判断することができるので、出力装置50の出力結果から、脳の各部位における障害の有無を判別することが可能である。
図2の構成において、解析装置40は、各脳部位A〜Cに対する複数の時系列データにおける脳活動時間及び応答時間の平均値及び標準偏差を算出して、脳活動時間と応答時間との相関値を求め、図3(a)及び(b)に示すような時系列データの表示に代えて、或いは、時系列データの表示と共に、出力装置50に表示してもよい。このように、脳活動時間と応答時間との相関性を定量化することにより、脳の障害部位の特定をより容易に行うことができる。
算出された相関値は、解析装置40において、各脳部位A〜Cに対して予め設定された基準値と比較することにより、脳の障害部位の特定を自動的に行うこともできる。各脳部位A〜Cにおける相関値は、正常な状態では、上記のように脳の後方側部位よりも前方側部位の方が高い傾向にあるので、図4の斜線で示す領域を基準値として設定し、実際に計測した結果がこの基準値の領域から外れた脳部位(図4においては部位B)を、障害部位として特定することができる。
また、図2に示す構成においては、応答入力装置30をマイクロフォンにより構成しているが、キーボードやボタンにより構成することも可能であり、刺激呈示装置10に表示された文字のキー入力やボタンの押圧によって、応答信号を生成するようにしてもよい。
本発明の一実施形態に係る脳活動解析装置の概略構成を示すブロック図である。 図1に示す脳活動解析装置の具体的な適用例を示す概略構成図である。 図2に示す脳活動解析装置における出力装置の表示例を示す図である。 図2に示す脳活動解析装置における解析装置の解析方法の一例を示す模式図である。
符号の説明
1 脳活動解析装置
10 刺激呈示装置
20 脳活動計測装置
30 応答入力装置
40 解析装置
41 データ収集部
42 データ解析部
50 出力装置

Claims (5)

  1. 被験者に刺激を呈示する刺激呈示ステップと、
    刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測ステップと、
    刺激呈示に対する被験者の応答により応答信号を入力する応答入力ステップと、
    前記脳活動信号および応答信号に基づいて脳活動を解析する解析ステップと、
    脳活動の解析結果を出力する出力ステップとを備え、
    前記刺激呈示ステップは、刺激呈示を複数回行い、
    前記脳活動計測ステップは、各刺激呈示に対して脳の複数部位における前記時系列データを取得し、
    前記解析ステップは、脳の各部位毎に、前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行い、
    前記出力ステップは、前記応答時間と脳活動時間との相関の程度を判別可能に出力する脳活動解析方法であって、
    前記出力ステップは、複数の前記時系列データを、前記応答時間に基づく順序に従って並び替え、前記応答時間のデータと同一時間軸上に表示するステップを備える脳活動解析方法。
  2. 被験者に刺激を呈示する刺激呈示ステップと、
    刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測ステップと、
    刺激呈示に対する被験者の応答により応答信号を入力する応答入力ステップと、
    前記脳活動信号および応答信号に基づいて脳活動を解析する解析ステップと、
    脳活動の解析結果を出力する出力ステップとを備え、
    前記刺激呈示ステップは、刺激呈示を複数回行い、
    前記脳活動計測ステップは、各刺激呈示に対して脳の複数部位における前記時系列データを取得し、
    前記解析ステップは、脳の各部位毎に、前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行い、
    前記出力ステップは、前記応答時間と脳活動時間との相関の程度を判別可能に出力する脳活動解析方法であって、
    前記出力ステップは、前記応答時間と脳活動時間との相関値を算出して表示するステップを備える脳活動解析方法。
  3. 前記出力ステップは、算出した前記相関値を予め設定された基準値と比較することにより、脳の各部位における障害の有無を判別して表示するステップを更に備える請求項2に記載の脳活動解析方法。
  4. 被験者に刺激を呈示する刺激呈示装置と、
    刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測装置と、
    刺激呈示に対する被験者の応答により応答信号を入力する応答入力装置と、
    前記脳活動信号および応答信号に基づいて脳活動を解析する解析装置と、
    脳活動の解析結果を出力する出力装置とを備え、
    前記解析装置は、前記刺激呈示装置からの複数回の刺激呈示に対して、前記脳活動計測装置により取得された脳の複数部位における前記時系列データを収集するデータ収集部と、
    脳の各部位毎に、収集された前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行うデータ解析部とを備え、
    前記出力装置は、前記脳活動時間と応答時間との相関の程度を判別可能に出力する脳活動解析装置であって、
    前記出力装置は、複数の前記時系列データを、前記応答時間に基づく順序に従って並び替え、前記応答時間のデータと同一時間軸上に表示する脳活動解析装置。
  5. 被験者に刺激を呈示する刺激呈示装置と、
    刺激呈示に対する被験者の脳活動信号の時系列データを取得する脳活動計測装置と、
    刺激呈示に対する被験者の応答により応答信号を入力する応答入力装置と、
    前記脳活動信号および応答信号に基づいて脳活動を解析する解析装置と、
    脳活動の解析結果を出力する出力装置とを備え、
    前記解析装置は、前記刺激呈示装置からの複数回の刺激呈示に対して、前記脳活動計測装置により取得された脳の複数部位における前記時系列データを収集するデータ収集部と、
    脳の各部位毎に、収集された前記脳活動信号の時系列データから脳活動時間を特定すると共に、刺激呈示から前記応答信号が入力されるまでの応答時間と前記脳活動時間との関連付けを行うデータ解析部とを備え、
    前記出力装置は、前記脳活動時間と応答時間との相関の程度を判別可能に出力する脳活動解析装置であって、
    前記出力装置は、前記応答時間と脳活動時間との相関値を算出して表示する脳活動解析装置。
JP2006021820A 2006-01-31 2006-01-31 脳活動解析方法および装置 Expired - Fee Related JP4788956B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006021820A JP4788956B2 (ja) 2006-01-31 2006-01-31 脳活動解析方法および装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006021820A JP4788956B2 (ja) 2006-01-31 2006-01-31 脳活動解析方法および装置

Publications (2)

Publication Number Publication Date
JP2007202619A JP2007202619A (ja) 2007-08-16
JP4788956B2 true JP4788956B2 (ja) 2011-10-05

Family

ID=38482633

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006021820A Expired - Fee Related JP4788956B2 (ja) 2006-01-31 2006-01-31 脳活動解析方法および装置

Country Status (1)

Country Link
JP (1) JP4788956B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011001694A1 (ja) * 2009-07-03 2011-01-06 パナソニック株式会社 補聴器の調整装置、方法およびプログラム
US11357443B2 (en) 2016-02-29 2022-06-14 Daikin Industries, Ltd. Determination result output device, determination result provision device, and determination result output system
JP6371366B2 (ja) * 2016-12-12 2018-08-08 ダイキン工業株式会社 精神疾患判定装置
KR101869713B1 (ko) * 2016-12-30 2018-06-21 (주)씽크포비엘 뇌파 정보 기반의 사용성 테스트 방법 및 장치
JP6749278B2 (ja) * 2017-04-14 2020-09-02 ダイキン工業株式会社 生理状態判定装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10211182A (ja) * 1997-01-31 1998-08-11 Shimadzu Corp 生体磁気計測装置
JP3418730B2 (ja) * 2000-09-27 2003-06-23 金沢大学長 静脈性嗅覚検査装置
JP2002102190A (ja) * 2000-10-03 2002-04-09 Japan Science & Technology Corp 生体機能測定システム
JP3993882B2 (ja) * 2004-07-02 2007-10-17 松下電器産業株式会社 生体信号利用機器およびその制御方法
JP2006110234A (ja) * 2004-10-18 2006-04-27 Institute Of Physical & Chemical Research 脳活動情報データ処理方法およびその装置
JP4619809B2 (ja) * 2005-02-10 2011-01-26 独立行政法人情報通信研究機構 言語処理機能測定装置

Also Published As

Publication number Publication date
JP2007202619A (ja) 2007-08-16

Similar Documents

Publication Publication Date Title
US7844324B2 (en) Measurement of EEG reactivity
US9282934B2 (en) Composite brain function monitoring and display system
AU2007257335B8 (en) Brain function monitoring and display system
AU2007257336B2 (en) EEG analysis system
JPH021232A (ja) 睡眠ステージ監視装置
JPH08511710A (ja) 反復的睡眠評価
KR101768332B1 (ko) 우울 정도를 실시간으로 분석하는 방법 및 그 시스템
JP4788956B2 (ja) 脳活動解析方法および装置
US20160360992A1 (en) Method for quantifying the perceptive faculty of a person
US6416485B1 (en) Instrumental measurement of the neuro-psycho-physical state of a person
JP6055679B2 (ja) 生体信号加算平均処理装置
WO2019230528A1 (ja) 咀嚼側を判定するための学習モデル生成装置、その方法およびプログラム、ならびに咀嚼側判定装置、その方法およびプログラム
US20070179399A1 (en) Measurement of EEG reactivity
KR20080039808A (ko) 피험자 반응 분석 장치, 방법 및 적성 검사 장치
US8064993B2 (en) Measurement of EEG reactivity
JP4822796B2 (ja) 睡眠計及び睡眠状態判定方法
JP5011555B2 (ja) 睡眠計及び睡眠状態判定プログラム
KR101693716B1 (ko) 뇌파를 이용한 졸음정도 및 집중정도의 판단 방법 및 이를 이용한 집중력저감 알림 시스템
JP4986826B2 (ja) 精神状態測定方法および装置並びにプログラム
KR20220047187A (ko) 피처 결합을 이용한 인지 기능 검사 방법 및 서버
Branković Interlinked positive and negative feedback loops design emotional sweating
JP2021504068A (ja) 認知機能の活動のリアルタイム測定のためのシステムおよびかかるシステムを較正する方法
JPS60113111A (ja) 小動物の行動状態分析装置
JP6864407B1 (ja) データ解析プログラム、記録媒体、データ解析方法、データ解析装置、及び歯科治療システム
US11534094B2 (en) Brain response measurement system, brain response measurement method, and brain response measurement program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080905

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110609

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110705

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110706

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140729

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4788956

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140729

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees