JP4081686B2 - 生体情報の処理装置および映像音響再生装置 - Google Patents
生体情報の処理装置および映像音響再生装置 Download PDFInfo
- Publication number
- JP4081686B2 JP4081686B2 JP2004197791A JP2004197791A JP4081686B2 JP 4081686 B2 JP4081686 B2 JP 4081686B2 JP 2004197791 A JP2004197791 A JP 2004197791A JP 2004197791 A JP2004197791 A JP 2004197791A JP 4081686 B2 JP4081686 B2 JP 4081686B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- value
- biological information
- video
- arousal level
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/486—Bio-feedback
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
- A61B5/0816—Measuring devices for examining respiratory frequency
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/346—Analysis of electrocardiograms
- A61B5/349—Detecting specific parameters of the electrocardiograph cycle
- A61B5/352—Detecting R peaks, e.g. for synchronising diagnostic apparatus; Estimating R-R interval
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/389—Electromyography [EMG]
Description
対象者の複数の生体情報を有するアナログ生体信号を出力する単一の生体情報センサと、
上記アナログ生体信号を解析して上記複数の生体情報の信号に分離して出力する解析回路と、
上記複数の生体情報の信号の測定値と、その初期値あるいは標準値とから上記対象者の心理状態およびその強度を推定する回路と
を有し、
上記生体情報センサは、上記対象者の身体あるいは服飾品に装着される接触型あるいは非接触型のセンサとされ、
上記解析回路は、上記アナログ生体情報信号に対してフィルタリング処理およびFFT処理を行うことにより、上記アナログ生体情報信号から上記対象者の心電信号、筋電信号および呼吸信号を分離して出力し、
上記推定する回路は、上記呼吸信号の示す呼吸数と、上記心電信号あるいは上記筋電信号の示す脈拍数(心拍数の場合を含む)とから
覚醒度=Rrm−Rrr
Rrm:単位時間あたりの上記呼吸数の測定値
Rrr:単位時間あたりの上記呼吸数の初期値または標準値
または
覚醒度=Prm−Prr
Prm:単位時間あたりの上記脈拍数の測定値
Prr:単位時間あたりの上記脈拍数の初期値または標準値
で示される覚醒度を算出するとともに、
感情価=∫|Vemg(t)|dt−Vemg_rr
Vemg :上記筋電信号の振幅の測定値
Vemg_rr:上記筋電信号の振幅の積分値(初期値または標準値)
で示される感情価を算出し、
この算出した覚醒度および感情価から上記対象者の心理状態およびその強度を推定する
ようにした生体情報の処理装置
とするものである。
図1はこの発明を映像音響再生装置に適用した場合の一例を示す。この映像音響再生装置は、単一の生体情報センサにより視聴者(対象者)の複数の生体情報を取得し、その取得した複数の生体情報からそのときの視聴者の心理状態を表す指標として覚醒度および感情価を求め、これらの値に応じて再生する映像や音響に変化を与えるものである。
領域1は、覚醒度>0、かつ、感情価>0(覚醒度が高く、心地よい)
領域2は、覚醒度>0、かつ、感情価<0(覚醒度が高いが、不快である)
領域3は、覚醒度<0、かつ、感情価>0(覚醒度が低くいが、心地よい)
領域4は、覚醒度<0、かつ、感情価<0(覚醒度が低く、不快でもある)
となる。
視聴者の覚醒度および感情価が、現在、図4のどの領域に位置しているかは、次に述べる〔2−1〕、〔2−2〕の処理により知ることができる。そして、視聴者の現在の覚醒度および感情価が例えば図4の点Pにあるとき、その覚醒度および感情価が、点Pを含む曲線Aのどちらに向かうかは、覚醒度および感情価の変化の履歴から判断することができる。
覚醒度は、心電信号や呼吸信号から求めることができ、生体情報センサ11が非接触式および接触式のどちらであっても、呼吸数や脈拍数の初期値または標準値に対する変動から求めることができる。すなわち、覚醒度は、
覚醒度=Rrm−Rrr ・・・ (1)
Rrm:単位時間あたりの呼吸数の測定値
Rrr:単位時間あたりの呼吸数の初期値または標準値
または
覚醒度=Prm−Prr ・・・ (2)
Prm:単位時間あたりの脈拍数の測定値
Prr:単位時間あたりの脈拍数の初期値または標準値
から算出することができる。なお、脈拍数として心拍数を利用する場合にも、(2)式により覚醒度を求めることができる。
感情価は、筋電信号から例えば次の(3)式により算出することができる。
感情価=∫|Vemg(t)|dt−Vemg_init ・・・ (3)
Vemg :筋電の振幅の測定値
Vemg_init:筋電の振幅の積分値(初期値)
または
感情価=∫|Vemg(t)|dt−Vemg_ref ・・・ (4)
Vemg_ref :筋電の振幅の積分値(標準値)
なお、正の感情価の決定は頬骨筋の筋電により行い、負の感情価の決定は皺眉筋あるいは輪筋の筋電により行うことができる。
上述において、生体情報センサ11として圧力センサを使用することができるが、その圧力センサとして、例えば「特開2001−145605号公報」に記載されているように、気密性および柔軟性を有する袋体の内部に、空気圧センサを収納したものを使用することができる。また、上述においては、生体情報センサ11の装着位置を対象者の胸の付近としたが、心電あるいは脈波と筋電とを同時に含む信号を検出できる部位であれば、生体情報センサをどこに装着してもよい。
CD :Compact Disc
CD−R :CD Recordable
CD−RW:CD ReWritable
CPU :Central Processing Unit
DVD±R:DVD +Recordable, DVD Recordable
DVD−RAM:DVD Random Access Memory
DVD±RW:DVD +ReWritable, DVD ReWritable
FFT :Fast Fourier Transform
IC :Integrated Circuit
MD :Mini Disc
MV :Micro Vibration
RAM :Random Access Memory
ROM :Read Only Memory
RSA :Respiratory Sinus Arrhythmia
Claims (6)
- 対象者の複数の生体情報を有するアナログ生体信号を出力する単一の生体情報センサと、
上記アナログ生体信号を解析して上記複数の生体情報の信号に分離して出力する解析回路と、
上記複数の生体情報の信号の測定値と、その初期値あるいは標準値とから上記対象者の心理状態およびその強度を推定する回路と
を有し、
上記生体情報センサは、上記対象者の身体あるいは服飾品に装着される接触型あるいは非接触型のセンサとされ、
上記解析回路は、上記アナログ生体情報信号に対してフィルタリング処理およびFFT処理を行うことにより、上記アナログ生体情報信号から上記対象者の心電信号、筋電信号および呼吸信号を分離して出力し、
上記推定する回路は、上記呼吸信号の示す呼吸数と、上記心電信号あるいは上記筋電信号の示す脈拍数(心拍数の場合を含む)とから
覚醒度=Rrm−Rrr
Rrm:単位時間あたりの上記呼吸数の測定値
Rrr:単位時間あたりの上記呼吸数の初期値または標準値
または
覚醒度=Prm−Prr
Prm:単位時間あたりの上記脈拍数の測定値
Prr:単位時間あたりの上記脈拍数の初期値または標準値
で示される覚醒度を算出するとともに、
感情価=∫|Vemg(t)|dt−Vemg_rr
Vemg :上記筋電信号の振幅の測定値
Vemg_rr:上記筋電信号の振幅の積分値(初期値または標準値)
で示される感情価を算出し、
この算出した覚醒度および感情価から上記対象者の心理状態およびその強度を推定する
ようにした生体情報の処理装置。 - 請求項1に記載の処理装置において、
上記算出した覚醒度および感情価と、それらの履歴とから上記覚醒度および感情価の変化方向を判断する
ようにした生体情報の処理装置。 - 映像信号および音響信号の少なくとも一方を再生する再生手段と、
対象者の複数の生体情報を有するアナログ生体信号を出力する単一の生体情報センサと、
上記アナログ生体信号を解析して上記複数の生体情報の信号に分離して出力する解析回路と、
上記複数の生体情報の信号の測定値と、その初期値あるいは標準値とから上記対象者の心理状態およびその強度を推定する回路と、
上記再生手段により再生される映像信号および音響信号の少なくとも一方を、上記推定する回路の推定結果により変化させる手段と
を有し、
上記生体情報センサは、上記対象者の身体あるいは服飾品に装着される接触型あるいは非接触型のセンサとされ、
上記解析回路は、上記アナログ生体情報信号に対してフィルタリング処理およびFFT処理を行うことにより、上記アナログ生体情報信号から上記対象者の心電信号、筋電信号および呼吸信号を分離して出力し、
上記推定する回路は、上記呼吸信号の示す呼吸数と、上記心電信号あるいは上記筋電信号の示す脈拍数(心拍数の場合を含む)とから
覚醒度=Rrm−Rrr
Rrm:単位時間あたりの上記呼吸数の測定値
Rrr:単位時間あたりの上記呼吸数の初期値または標準値
または
覚醒度=Prm−Prr
Prm:単位時間あたりの上記脈拍数の測定値
Prr:単位時間あたりの上記脈拍数の初期値または標準値
で示される覚醒度を算出するとともに、
感情価=∫|Vemg(t)|dt−Vemg_rr
Vemg :上記筋電信号の振幅の測定値
Vemg_rr:上記筋電信号の振幅の積分値(初期値または標準値)
で示される感情価を算出し、
この算出した覚醒度および感情価から上記対象者の心理状態およびその強度を推定して上記推定結果を出力する
ことを特徴とする映像音響再生装置。 - 請求項3に記載の映像音響再生装置において、
上記覚醒度>0、かつ、上記感情価>0の状態の場合には、上記対象者がこのときの映像および音響を心地よく感じていると推定して上記再生手段により再生される映像信号および音響信号をそのままとし、
上記覚醒度>0、かつ、上記感情価<0の状態、あるいは上記覚醒度<0、かつ、上記感情価<0の状態の場合には、上記対象者がこのときの映像および音響を不快に感じていると推定して上記再生手段により再生される映像信号および音響信号を、上記不快感が小さくなるように制御し、
上記覚醒度<0、かつ、上記感情価>0の状態の場合には、上記対象者がこのときの映像および音響を快適に感じていると推定して上記再生手段により再生される映像信号および音響信号を、上記快適感が大きくなるように制御する
ことを特徴とする映像音響再生装置。 - 請求項4に記載の映像音響再生装置において、
上記覚醒度>0、かつ、上記感情価<0の状態、あるいは上記覚醒度<0、かつ、上記感情価<0の状態の場合に、上記不快感が小さくなるように制御しても、それらの状態が続くときには、上記映像および音響の再生を停止する
ことを特徴とする映像音響再生装置。 - 請求項4あるいは請求項5に記載の映像音響再生装置において、
上記覚醒度<0、かつ、上記感情価>0の状態の場合に、就寝モードに設定されているときには、このときの再生状態を維持する
ことを特徴とする映像音響再生装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004197791A JP4081686B2 (ja) | 2004-07-05 | 2004-07-05 | 生体情報の処理装置および映像音響再生装置 |
US11/158,729 US20060004266A1 (en) | 2004-07-05 | 2005-06-22 | Bio-information processing apparatus and video/sound reproduction apparatus |
KR1020050056532A KR20060048641A (ko) | 2004-07-05 | 2005-06-28 | 생체정보의 처리장치 및 영상음향 재생장치 |
CNA2005100807929A CN1720858A (zh) | 2004-07-05 | 2005-07-05 | 生物信息处理装置和视频/声音再现装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004197791A JP4081686B2 (ja) | 2004-07-05 | 2004-07-05 | 生体情報の処理装置および映像音響再生装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006015046A JP2006015046A (ja) | 2006-01-19 |
JP4081686B2 true JP4081686B2 (ja) | 2008-04-30 |
Family
ID=35514930
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004197791A Expired - Fee Related JP4081686B2 (ja) | 2004-07-05 | 2004-07-05 | 生体情報の処理装置および映像音響再生装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20060004266A1 (ja) |
JP (1) | JP4081686B2 (ja) |
KR (1) | KR20060048641A (ja) |
CN (1) | CN1720858A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019535396A (ja) * | 2016-11-10 | 2019-12-12 | ザ リサーチ ファウンデーション フォー ザ ステート ユニバーシティ オブ ニューヨーク | 気道閉塞に関するシステム、方法、及びバイオマーカ |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8951190B2 (en) * | 2005-09-28 | 2015-02-10 | Zin Technologies, Inc. | Transfer function control for biometric monitoring system |
US20070073266A1 (en) * | 2005-09-28 | 2007-03-29 | Zin Technologies | Compact wireless biometric monitoring and real time processing system |
US8764654B2 (en) | 2008-03-19 | 2014-07-01 | Zin Technologies, Inc. | Data acquisition for modular biometric monitoring system |
US8920343B2 (en) | 2006-03-23 | 2014-12-30 | Michael Edward Sabatino | Apparatus for acquiring and processing of physiological auditory signals |
EP2035098B1 (en) | 2006-07-04 | 2019-08-28 | Firstbeat Technologies OY | Method and system for guiding a person in physical exercise |
JP4749273B2 (ja) * | 2006-08-10 | 2011-08-17 | 三洋電機株式会社 | 電動自転車 |
EP2151260A1 (en) * | 2008-08-08 | 2010-02-10 | Koninklijke Philips Electronics N.V. | Calming device |
CN101730127A (zh) * | 2008-10-30 | 2010-06-09 | 华为技术有限公司 | 频点的信号质量检测方法、装置和系统 |
WO2010143535A1 (ja) * | 2009-06-08 | 2010-12-16 | 公立大学法人名古屋市立大学 | 眠気判定装置 |
JP5464072B2 (ja) * | 2010-06-16 | 2014-04-09 | ソニー株式会社 | 筋活動診断装置および方法、並びにプログラム |
CN103379254A (zh) * | 2012-04-13 | 2013-10-30 | 鸿富锦精密工业(深圳)有限公司 | 提高视频信号质量的视频装置及视频电路 |
JP6149450B2 (ja) * | 2013-03-21 | 2017-06-21 | 富士通株式会社 | 呼吸情報推定装置及び方法並びにプログラム |
WO2015046650A1 (ko) * | 2013-09-27 | 2015-04-02 | 엘지전자 주식회사 | 영상표시장치 및 영상표시장치 동작 방법 |
CN104407768B (zh) * | 2014-10-28 | 2019-05-17 | 深圳市金立通信设备有限公司 | 一种终端 |
CN104360735B (zh) * | 2014-10-28 | 2018-06-19 | 深圳市金立通信设备有限公司 | 一种界面显示方法 |
CN104523250A (zh) * | 2014-12-01 | 2015-04-22 | 成都智信优创科技有限公司 | 一种穿戴式健康医疗装置 |
CN107427267B (zh) * | 2014-12-30 | 2021-07-23 | 日东电工株式会社 | 用于导出主体的精神状态的方法和装置 |
CN107710050A (zh) | 2015-06-30 | 2018-02-16 | 3M创新有限公司 | 照明器 |
CN104983414A (zh) * | 2015-07-13 | 2015-10-21 | 瑞声声学科技(深圳)有限公司 | 可穿戴设备及其感知和调节使用者情绪的方法 |
JP6985005B2 (ja) * | 2015-10-14 | 2021-12-22 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 感情推定方法、感情推定装置、及び、プログラムを記録した記録媒体 |
CN108770336B (zh) | 2015-11-17 | 2021-08-24 | 庆熙大学校产学协力团 | 利用传感器阵列的生物信息测定装置及方法 |
CN105852823A (zh) * | 2016-04-20 | 2016-08-17 | 吕忠华 | 一种医学用智能化息怒提示设备 |
CN105725996A (zh) * | 2016-04-20 | 2016-07-06 | 吕忠华 | 一种智能控制人体器官情绪变化医疗器械装置及方法 |
US11369304B2 (en) | 2018-01-04 | 2022-06-28 | Electronics And Telecommunications Research Institute | System and method for volitional electromyography signal detection |
CN112932225B (zh) * | 2021-01-29 | 2023-07-18 | 青岛海尔空调器有限总公司 | 智能唤醒枕头以及基于智能唤醒枕头的唤醒方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2003069A (en) * | 1931-07-13 | 1935-05-28 | Carter Frederick Samuel | Steam trap, and apparatus for controlling or maintaining the supply of water or other fluid |
US2003009A (en) * | 1932-06-10 | 1935-05-28 | S S Mcclendon Jr | Method and apparatus for producing liquid from wells |
US2001028A (en) * | 1932-09-26 | 1935-05-14 | Frick Co | Defrosting system |
US2003012A (en) * | 1933-05-27 | 1935-05-28 | Westinghouse Electric & Mfg Co | Grid glow tube structure |
US2003060A (en) * | 1934-04-02 | 1935-05-28 | Ernest L Heckert | Thermostatic controlling device |
US5604112A (en) * | 1993-02-26 | 1997-02-18 | The Dupont Merck Pharmaceutical Company | Method for detecting the cardiotoxicity of compounds |
US6542081B2 (en) * | 1996-08-19 | 2003-04-01 | William C. Torch | System and method for monitoring eye movement |
US20030009078A1 (en) * | 1999-10-29 | 2003-01-09 | Elena A. Fedorovskaya | Management of physiological and psychological state of an individual using images congnitive analyzer |
US6854879B2 (en) * | 2001-04-19 | 2005-02-15 | Honeywell International Inc. | System and method using thermal image analysis for polygraph testing |
US6623427B2 (en) * | 2001-09-25 | 2003-09-23 | Hewlett-Packard Development Company, L.P. | Biofeedback based personal entertainment system |
US6665560B2 (en) * | 2001-10-04 | 2003-12-16 | International Business Machines Corporation | Sleep disconnect safety override for direct human-computer neural interfaces for the control of computer controlled functions |
-
2004
- 2004-07-05 JP JP2004197791A patent/JP4081686B2/ja not_active Expired - Fee Related
-
2005
- 2005-06-22 US US11/158,729 patent/US20060004266A1/en not_active Abandoned
- 2005-06-28 KR KR1020050056532A patent/KR20060048641A/ko not_active Application Discontinuation
- 2005-07-05 CN CNA2005100807929A patent/CN1720858A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019535396A (ja) * | 2016-11-10 | 2019-12-12 | ザ リサーチ ファウンデーション フォー ザ ステート ユニバーシティ オブ ニューヨーク | 気道閉塞に関するシステム、方法、及びバイオマーカ |
Also Published As
Publication number | Publication date |
---|---|
KR20060048641A (ko) | 2006-05-18 |
CN1720858A (zh) | 2006-01-18 |
US20060004266A1 (en) | 2006-01-05 |
JP2006015046A (ja) | 2006-01-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4081686B2 (ja) | 生体情報の処理装置および映像音響再生装置 | |
US20050283055A1 (en) | Bio-information processing apparatus and video/sound reproduction apparatus | |
CN100484465C (zh) | 处理生物信息的方法和装置 | |
JP4396175B2 (ja) | コンテンツ再生装置及びコンテンツ再生方法 | |
EP2371286B1 (en) | Organism fatigue evaluation device and organism fatigue evaluation method | |
KR101307248B1 (ko) | 사용자의 생체정보 분석을 통한 감정상태 분석장치 및 방법 | |
KR20110052783A (ko) | 생체 정보 획득 방법 및 장치 | |
KR20130010207A (ko) | 무구속 무자각 생체신호 획득을 통한 워치타입 건강상태 분석시스템 | |
JP7207468B2 (ja) | 出力制御装置、出力制御方法およびプログラム | |
KR102183435B1 (ko) | 가상현실 및 바이오피드백을 이용하여 사용자의 스트레스를 저감시키는 방법 및 시스템 | |
JP6666705B2 (ja) | 生体状態推定装置、生体状態推定方法及びコンピュータプログラム | |
KR20200072172A (ko) | 인지 능력 평가 방법, 이의 시스템 및 이를 위한 웨어러블 디바이스 | |
JP3154384U (ja) | 精神状態変動装置 | |
JP2009183346A (ja) | 精神状態変動装置 | |
Yarici et al. | Hearables: In-ear multimodal brain computer interfacing | |
Dourou et al. | IoT-enabled analysis of subjective sound quality perception based on out-of-lab physiological measurements | |
Niemi et al. | Digital sleep: expert evaluation of commercially available digital sleep trackers | |
Hu et al. | Investigating the correlation between the neural activity and task performance in a psychomotor vigilance test | |
Moyeenudin et al. | Analysis of Electroencephalographic Signals to Study the Behavior of Brain Frequencies for the Study of Academic Stress | |
JP7162780B1 (ja) | 音環境制御システムおよび音環境制御方法 | |
JP6942288B2 (ja) | 情報処理装置、サウンドマスキングシステム、制御方法、及び制御プログラム | |
WO2023074656A1 (ja) | プログラム、情報処理方法、及び情報処理装置 | |
KR20180101927A (ko) | 넥밴드 타입 헬스케어 웨어러블 장치 및 그 방법 | |
WO2020202958A1 (ja) | 分類装置および分類プログラム | |
WO2022209499A1 (ja) | 情動情報を表示する情報処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070827 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071114 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080129 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110222 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |