JP3851406B2 - Pedestrian speed / direction detector - Google Patents

Pedestrian speed / direction detector Download PDF

Info

Publication number
JP3851406B2
JP3851406B2 JP06686397A JP6686397A JP3851406B2 JP 3851406 B2 JP3851406 B2 JP 3851406B2 JP 06686397 A JP06686397 A JP 06686397A JP 6686397 A JP6686397 A JP 6686397A JP 3851406 B2 JP3851406 B2 JP 3851406B2
Authority
JP
Japan
Prior art keywords
speed
pedestrian
acceleration
output
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP06686397A
Other languages
Japanese (ja)
Other versions
JPH10260055A (en
Inventor
典之 篠塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP06686397A priority Critical patent/JP3851406B2/en
Publication of JPH10260055A publication Critical patent/JPH10260055A/en
Application granted granted Critical
Publication of JP3851406B2 publication Critical patent/JP3851406B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
この発明は、例えば、歩行者が携帯可能な歩行経路誘導装置に適用して好適な歩行者用移動速度・方向検出装置に関する。
【0002】
【従来の技術】
歩行者用移動速度・方向検出装置に関連する技術として、例えば、自動車用ナビゲーションシステムを掲げることができる。このシステムでは、GPSによる衛星航法によって自車の位置が得られ、ディスプレイの地図上に自車の位置、進行方向等を表示するようになっている。
【0003】
また、自動車用ナビゲーションシステムでは、仮にGPS衛星からの電波を受信することができない場合であっても、さらに、距離センサやレートセンサを併せて用いることで、いわゆる慣性航法により自車の位置を検出できるようにすることも知られている。
【0004】
一方、歩行者の携帯可能なナビゲーションシステムとして、例えば、特開平8−202982号公報に開示された技術がある。この技術では、歩行者の現在位置を検出する手段としてGPS受信機を用い、また、歩行方向を検出する手段としてジャイロや地磁気センサを用いている。
【0005】
【発明が解決しようとする課題】
しかしながら、上記従来の自動車用ナビゲーションシステムを歩行者用移動速度・方向検出装置として使用することを考えた場合、ビル街や建築物の中を歩行する際には、歩行者の位置検出が不可能となり、たとえ、慣性航法が付いたナビゲーションシステムであっても、ビル街や建築物の中を歩行する場合に、移動距離または移動速度をどのように検出すればよいのかという課題がある。
【0006】
一方、上述の歩行者が携帯可能なナビゲーションシステムを歩行者用移動速度・方向検出装置として使用することを考えた場合、その携帯可能なナビゲーションシステムを歩行者が常時一定向きに携帯保持しているという保証はなく、その出力の上下、左右が反転していることも考えられる。また、この歩行者が携帯可能なナビゲーションシステムでは、GPS受信機、地磁気センサ等を用いているため十分な精度での歩行者位置の検出が困難であるという課題がある。
【0007】
この発明はこのような課題を考慮してなされたものであり、歩行者がどのような状態で携帯保持していても移動速度・方向を検出することを可能とする歩行者用移動速度・方向検出装置を提供することを目的とする。
【0008】
また、この発明は、移動速度・方向を正確に検出することを可能とする歩行者用移動速度・方向検出装置を提供することを目的とする。
【0009】
【課題を解決するための手段】
この発明は、3軸の加速度検出手段と、
3軸のレート検出手段と、
前記3軸の加速度検出手段の出力より重力加速度方向を検出する重力加速度方向検出手段と、
前記重力加速度方向検出手段により得られた重力加速度方向を初期重力加速度方向として、前記3軸のレート検出手段の出力から補正値を算出する重力方向追尾手段と、
前記補正値に基づいて前記3軸の加速度検出手段の出力を補正する加速度信号補正手段と、
前記補正値に基づいて前記3軸のレート検出手段の信号を補正するレート信号補正手段と、
前記加速度信号補正手段の出力より地表面に対する上下振動成分を検出し、歩行者の歩く周期を歩周期として検出する歩周期検出手段と、
検出された前記歩周期に歩幅を乗じることによって歩数換算移動速度を算出する移動速度算出手段と、
前記レート信号補正手段の出力により地表面での進行方向を検出する移動方向検出手段と、
重力加速度成分を除去した前記歩行者の慣性移動速度が検出されているときに、振動成分が検出されていれば、前記歩数換算移動速度を選択して出力し、前記振動成分が検出されていなければ、前記慣性移動速度又はその変化速度を選択して出力する移動速度選択手段と
を備えることを特徴とする。
【0010】
この発明によれば、3軸の加速度検出手段によって地表面の方向(重力加速度方向)を検出し、当該歩行者移動速度・方向検出装置自体の保持されている姿勢を検出する。そして、3軸の加速度検出手段により歩行者の歩行によって生じる上下振動を検出し、この振動成分を解析することで、歩行者の歩く周期である歩周期(1歩を踏み出すのに要する時間)を検出する。この歩周期に歩幅を乗じることにより歩数換算移動速度を算出する。
【0011】
そして、3軸の加速度検出手段により検出された地表面の方向を3軸のレートセンサの初期値として利用することにより、歩行者が急激な運動を行っている場合や乗り物を利用している場合などの3軸のレート検出手段の出力に誤差が生じるような場合であっても、地表面上での移動方向を検出することができる。
【0012】
【発明の実施の形態】
以下、この発明の一実施の形態について図面を参照して説明する。
【0013】
図1は、歩行者の移動距離および移動方向(移動方位)を検出するための例としての歩行者用移動距離・方向検出手段10の構成を示すブロック図である。なお、この図1例の歩行者用移動距離・方向検出手段10を用いて歩行者用経路誘導装置を構成することができる。
【0014】
図2は、歩行者の歩幅を設定する例としての歩幅設定手段12の構成を示すブロック図である。
【0015】
図3は、歩行者の慣性移動速度を検出するための例としての慣性速度検出手段14の構成を示すブロック図である。
【0016】
図4は、図1例の歩行者用移動距離・方向検出手段10に図2例の歩幅設定手段12と図3例の慣性速度検出手段14を組み合わせ、全体として、例としての慣性速度の検出を含む歩行者用移動距離・方向検出手段17の構成を示している。
【0017】
図1に示す歩行者用移動距離・方向検出手段10は、直交3軸の加速度を検出する手段としての3軸加速度センサ16と、直交3軸のレートを検出する手段としての3軸レートセンサ18を有している。
【0018】
また、歩行者用移動距離・方向検出手段10は、3軸加速度センサ16の出力側に接続される重力加速度方向検出手段(重力方向検出手段)20と、3軸レートセンサ18と重力加速度方向検出手段20の各々の出力側に入力が接続される重力加速度方向追尾手段22を有している。
【0019】
さらに、歩行者用移動距離・方向検出手段10は、3軸加速度センサ16と重力加速度方向追尾手段22の出力側に入力が接続される加速度信号補正手段24と、3軸レートセンサ18と重力加速度方向追尾手段22の出力側に入力が接続されるレート信号補正手段26を有している。
【0020】
さらにまた、歩行者用移動距離・方向検出手段10は、加速度信号補正手段24の出力側に入力が接続されるとともに、クロック発生手段28からクロックが供給される歩周期検出手段30と、歩周期検出手段30の出力側に接続されるとともに、歩幅(歩幅信号または歩幅データともいう。)が供給される移動速度算出手段32と、レート信号補正手段26の出力側に接続される移動方向検出手段34を有している。
【0021】
図1に示す歩行者用移動距離・方向検出手段10は、基本的には、以上のように構成される。次に、その動作を説明する。なお、歩行者用移動距離・方向検出手段10を構成する各構成要素には、必要に応じてマイクロコンピュータが搭載され、コンピュータによる処理により以下の動作が遂行される。
【0022】
3軸加速度センサ16は、歩行者の動きに応じてx、y、zの各軸方向の加速度を検出し、各軸の加速度信号(単に、加速度ともいう。)Gx0、Gy0、Gz0(m/s2 )を出力する。3軸レートセンサ18は、歩行者の動きに応じて各軸方向のレートを検出し、各軸のレート信号(単に、レートともいう。)Rx0、Ry0、Rz0(rad/s)を出力する。
【0023】
重力加速度方向検出手段20は、3軸の加速度信号Gx0、Gy0、Gz0から重力による加速度成分を抽出し、その方位を重力加速度方向信号g(m/s2 )として出力する。この場合、重力加速度方向の検出は、3軸の加速度信号Gx0、Gy0、Gz0のうち、少なくとも1つの加速度信号の振幅が周期的に変化していると判断した場合、例えば、歩行者が歩行していると判断した場合には、低域通過フィルタ処理等により、比較的に高周波の振動成分を除去した残りの直流成分を重力加速度成分として分離することができる。また、歩行者が立ち止まっている場合等、加速度信号Gx0、Gy0、Gz0に振動成分が含まれていない状態においては、得られている加速度信号を重力加速度成分と同定すればよい。
【0024】
重力加速度方向追尾手段22は、重力加速度方向検出手段20が重力加速度方向信号gの検出に成功したときの3軸レート信号Rx0、Ry0、Rz0を初期値として設定し、この後に得られる各軸のレート信号Rx0、Ry0、Rz0を歩行者用移動距離・方向検出手段10の傾き(地表面に対しての傾き)として処理することにより、歩行者用移動距離・方向検出手段10が地表面に対してどのような状態(傾き)になっているかを算出し、その算出結果を補正量(補正値)として出力する。
【0025】
加速度信号補正手段24は、重力加速度方向追尾手段22から出力される補正値を用いて各軸の加速度信号Gx0、Gy0、Gz0を、地表面に対する3軸の加速度信号Gx、Gy、Gzに変換して出力する。
【0026】
同様に、レート信号補正手段26は、重力加速度方向追尾手段22より出力される補正値を用いて各軸のレート信号Rx0、Ry0、Rz0を地表面に対する3軸のレート信号Rx、Ry、Rzに変換して出力する。
【0027】
クロック発生手段28は、歩行者の歩く周期を検出するための一定周期(例えば、0.2ms)のクロックを発生する。歩周期検出手段30は、加速度信号補正手段24より出力される地表面方向に対する加速度運動に変換された3軸の加速度信号Gx、Gy、Gzから、例えば、高域通過フィルタ処理により振動成分(上下成分)を分離し、分離した振動成分の周期より歩行者が1歩1歩踏み出すのに要する時間を前記一定周期のクロックの数を計数して時間換算することにより検出し、歩周期(歩周期信号)として出力する。
【0028】
移動速度算出手段32は、歩周期検出手段30により検出された歩周期に、設定された利用者(歩行者)の歩幅、あるいはデフォルト値の歩幅を乗じることによって、移動速度(移動速度信号)を算出する。
【0029】
移動方向検出手段34は、レート信号補正手段26から出力される地表面方向に対するレート運動に変換された3軸レート信号Rx、Ry、Rzより、重力加速度方向の上下軸回りの回転角度を検出し、それを移動方向として出力する。
【0030】
この場合、図1例の歩行者用移動距離・方向検出手段10によれば、歩行者がどのような状態で携帯保持していても的確に地表面に対する移動距離・方向が検出可能となる。換言すれば、歩行者用移動距離・方向検出手段10自体の姿勢を検出することが可能となっている。また、図1例の歩行者用移動距離・方向検出手段10によれば、3軸加速度センサ16の出力に基づいて検出した歩周期に、設定した歩幅を乗じることによって移動速度を求めることが可能となり、例えば、GPS衛星からの電波を受信できない状況においても歩行者の移動速度を検出することが可能になるという効果が達成される。
【0031】
図2例の歩幅設定手段12は、GPS受信機42と、このGPS受信機42の出力側に接続される測定位置記憶手段44と、GPS受信機42の出力側に接続されるとともに前記歩周期検出手段30から歩周期が供給される歩数記憶手段46と、歩数記憶手段46と測定位置記憶手段44の出力側に接続される歩幅算出手段48と、歩幅算出手段48の出力側に接続されるとともに前記歩周期検出手段30からの歩周期が供給される歩幅記憶手段50と、測定位置記憶手段44と歩数記憶手段46の入力側に接続される計測タイミング指示手段52とを備える。
【0032】
図2に示す歩幅設定手段12は、基本的には、以上のように構成される。次に、その動作を説明する。なお、歩行者用移動距離・方向検出手段10を構成する各構成要素と同様に、歩幅設定手段12を構成する各構成要素には、必要に応じてマイクロコンピュータが搭載され、コンピュータによる処理により以下の動作が遂行される。
【0033】
GPS受信機42は、受信アンテナ43を通じてGPS衛星からの電波を受信して測定位置(緯度、経度、高度)を検出する。測定位置記憶手段44は、GPS受信機42が電波を受信可能なときの測定位置を記憶し、その測定位置間(2点間)の距離を計算して出力する。
【0034】
歩数記憶手段46は、GPS受信機42が電波を受信可能なときの任意の2点(測定位置)間の移動に要した歩数を記憶する。歩数は、測定位置間の歩周期信号を計数することによって計算することができる。
【0035】
歩幅算出手段48は、測定位置記憶手段44に記憶されている任意の2点(測定位置)間の距離を、歩数記憶手段46に記憶されている、対応する任意の2点間の歩数で除することにより歩幅を算出することができる。
【0036】
歩幅記憶手段50は、算出した歩幅をそのときの歩周期と関連づけた表(ルックアップテーブル)として記憶する。例えば、歩周期が0.5秒のときの1m等の歩幅を、歩周期が1秒のときの50cm等の歩幅と関連づけて記憶する。そして、この対応表を必要に応じて更新し、かつ歩周期に対応した歩幅を登録歩幅として出力する。
【0037】
計測タイミング指示手段52は、測定位置記憶手段44と歩数記憶手段46とで用いられる任意の2点(測定位置)の計測開始タイミングと計測終了タイミングを指示する。
【0038】
図2例の歩幅設定手段12によれば、利用者としての歩行者の個人差、あるいは、歩行者の体調等を原因とする歩幅の違いを登録歩幅として自動的に設定、更新することが可能になるという効果が達成される。
【0039】
この場合、歩周期、換言すれば、歩行者の歩きのテンポ(並足、早歩き、ゆっくり歩き、駆け足等)に応じて、歩幅を記憶するようにしているので、歩行者の歩きのテンポ(歩き方)に応じた歩幅を出力することができる。
【0040】
なお、移動速度算出手段32(図1参照)に設定される歩幅は、図2例による登録歩幅に限らず、図示していない入力設定手段により任意に設定することも可能である。
【0041】
また、歩幅の設定は、歩行者の移動経路と道路地図(電子的な道路形状情報)を用いて、いわゆるマップマッチング(位置予測手法)を行い、地図上の移動距離を歩数で除することによっても得ることができる。
【0042】
図3例の慣性速度検出手段14は、加速度信号補正手段24から出力される地表面に対する3軸の加速度信号Gx、Gy、Gzと重力加速度方向検出手段20から出力される重力加速度方向信号gを受け取る重力加速度除去手段60と、重力加速度除去手段60の出力側に接続されるとともにクロック発生手段28からのクロックが供給される速度変化算出手段62と、この速度変化算出手段62の出力側に接続される速度変化積算手段64とを備える。
【0043】
次に、慣性速度検出手段14の動作について説明する。なお、この慣性速度検出手段14を構成する各構成要素にも、必要に応じてマイクロコンピュータが搭載され、コンピュータ処理により以下の動作が遂行される。
【0044】
重力加速度除去手段60は、加速度信号補正手段24から得られる補正された加速度信号Gx、Gy、Gzから、重力加速度方向検出手段20により得られている重力加速度方向信号gを用いて重力加速度成分を除去した加速度信号Gx′、Gy′、Gz′を求めて出力する。速度変化算出手段62は、クロック発生手段28より与えられる所定のクロック周期(時間)を乗じることによって速度変化を検出する。速度変化積算手段64は、検出した速度変化値を連続的に積算して平均した値、いわゆる移動平均値を慣性移動速度として出力する。
【0045】
図4は、上述したように、図1例の歩行者用移動距離・方向検出手段10に図2例の歩幅設定手段12と図3例の慣性速度検出手段14を組み合わせた、例としての慣性速度の検出を含む歩行者用移動距離・方向検出手段17の構成を示している。
【0046】
この図4例では、歩周期と登録歩幅から移動速度算出手段32により得られる歩数換算移動速度と、慣性速度検出手段14により得られる瞬時的変化速度あるいは慣性移動速度を移動速度選択手段70により選択して出力できるように構成されている。
【0047】
なお、移動速度選択手段70は、移動速度として、高精度の移動速度検出が難しい比較的低速での移動状況では、歩数換算移動速度を選択し、十分な大きさの加速度が得られる高速での移動状況では、慣性移動速度または変化速度を選択することにより、いずれの状況においても高精度での移動速度の検出が可能となる。なお、移動速度選択手段70は、慣性移動速度または変化速度を選択する場合、変化速度より慣性移動速度の信号レベルが十分大きい場合に、その慣性移動速度を選択する。
【0048】
詳しく説明すると、通常、歩行者としての人が足を使って歩行する速度は、4〜8km/h程度であり、駆け足の場合でも20+αkm/h程度であって、充分な大きさの加速度信号を検出することが困難である。また、足による移動の場合には、振動ノイズが存在するため慣性移動速度を選択すると誤差が大きくなる。
【0049】
したがって、移動速度がある程度より大きい場合には、歩行者が乗物に乗って移動している可能性が高い。乗物による移動の場合には、充分な加速度信号が得られることが多いので、慣性移動速度を選択する。なお、徒歩による移動と乗物による移動の違いは、慣性移動速度が検出されているときに、振動成分が検出されていれば徒歩による移動と判断することができる。
【0050】
なお、この発明は、上述の実施の形態に限らず、この発明の要旨を逸脱することなく、種々の構成を採り得ることはもちろんである。
【0051】
【発明の効果】
以上説明したように、この発明によれば、歩行者用移動速度・方向検出装置の姿勢を検出することができることから、歩行者がどのような状態で携帯保持していても移動速度・方向を検出することができるという効果が達成される。
【0052】
また、この発明によれば、3軸の加速度検出手段とレート検出手段を用いて歩行者の上下動を検出するとともに、移動方向を検出しているので、GPS受信機を使用することなく、前記上下動の周期から移動速度を求めることが可能になるという効果が達成される。
【0053】
また、GPS受信機を用いた場合には、歩幅を校正することが可能となり、一層正確に移動速度を算出することができるという効果が達成される。
【0054】
そして、歩幅を校正できるように構成した場合には、利用者の個人差に応じた歩幅を設定することが可能になるという効果が達成される。
【図面の簡単な説明】
【図1】歩行者の移動距離および移動方向(移動方位)を検出するための歩行者用移動距離・方向検出手段の構成例を示すブロック図である。
【図2】歩行者の歩幅を設定する歩幅設定手段の構成例を示すブロック図である。
【図3】歩行者の慣性移動速度を検出するための慣性速度検出手段の構成例を示すブロック図である。
【図4】図1例の歩行者用移動距離・方向検出手段に図2例の歩幅設定手段と図3例の慣性速度検出手段を組み合わせた慣性速度の検出を含む歩行者用移動距離・方向検出手段の構成例を示すブロック図である。
【符号の説明】
10、17…歩行者用移動距離・方向検出手段
12…歩幅設定手段 14…慣性速度検出手段
16…3軸加速度センサ 18…3軸レートセンサ
20…重力加速度方向検出手段 22…重力加速度方向追尾手段
24…加速度信号補正手段 26…レート信号補正手段
30…歩周期検出手段 32…移動速度算出手段
34…移動方向検出手段
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a pedestrian movement speed / direction detection device suitable for application to a walking route guidance device that can be carried by a pedestrian, for example.
[0002]
[Prior art]
As a technology related to the pedestrian movement speed / direction detection device, for example, an automobile navigation system can be listed. In this system, the position of the own vehicle is obtained by satellite navigation using GPS, and the position, traveling direction, etc. of the own vehicle are displayed on a map on the display.
[0003]
In addition, even if a car navigation system cannot receive radio waves from GPS satellites, it can detect the position of the vehicle by so-called inertial navigation by using a distance sensor and rate sensor. It is also known to make it possible.
[0004]
On the other hand, as a navigation system that can be carried by a pedestrian, for example, there is a technique disclosed in JP-A-8-202982. In this technique, a GPS receiver is used as means for detecting the current position of the pedestrian, and a gyroscope or a geomagnetic sensor is used as means for detecting the walking direction.
[0005]
[Problems to be solved by the invention]
However, when considering using the conventional automobile navigation system as a pedestrian movement speed / direction detection device, it is impossible to detect the position of a pedestrian when walking in a building or building. Thus, even if the navigation system has inertial navigation, there is a problem of how to detect the moving distance or moving speed when walking in a building or building.
[0006]
On the other hand, when using the above-described navigation system that can be carried by a pedestrian as a pedestrian movement speed / direction detection device, the pedestrian always holds the portable navigation system in a fixed orientation. There is no guarantee that the output is upside down and left and right. In addition, since this navigation system that can be carried by a pedestrian uses a GPS receiver, a geomagnetic sensor, and the like, there is a problem that it is difficult to detect the position of the pedestrian with sufficient accuracy.
[0007]
The present invention has been made in consideration of such a problem, and it is possible to detect the moving speed and direction for a pedestrian that can detect the moving speed and direction even if the pedestrian is carrying it in any state. An object is to provide a detection device.
[0008]
Another object of the present invention is to provide a pedestrian movement speed / direction detection device capable of accurately detecting the movement speed / direction.
[0009]
[Means for Solving the Problems]
The present invention comprises a three-axis acceleration detection means,
3-axis rate detection means;
A gravitational acceleration direction detecting means for detecting a gravitational acceleration direction from an output of the triaxial acceleration detecting means;
Gravity direction tracking means for calculating a correction value from the output of the triaxial rate detection means, with the gravitational acceleration direction obtained by the gravitational acceleration direction detection means as an initial gravitational acceleration direction;
Acceleration signal correcting means for correcting the output of the triaxial acceleration detecting means based on the correction value;
Rate signal correction means for correcting the signal of the triaxial rate detection means based on the correction value;
Detecting a vertical vibration component with respect to the ground surface from the output of the acceleration signal correcting means, and detecting a walking cycle of a pedestrian as a walking cycle;
A moving speed calculating means for calculating a step number converted moving speed by multiplying the detected step period by a step length;
A moving direction detecting means for detecting a traveling direction on the ground surface by an output of the rate signal correcting means;
If a vibration component is detected when the inertial movement speed of the pedestrian from which the gravitational acceleration component has been removed is detected , the step conversion movement speed must be selected and output, and the vibration component must be detected. And a moving speed selecting means for selecting and outputting the inertial moving speed or its changing speed.
[0010]
According to the present invention, the direction of the ground surface (the direction of gravitational acceleration) is detected by the triaxial acceleration detecting means, and the posture held by the pedestrian moving speed / direction detecting device itself is detected. Then, by detecting the vertical vibration caused by the walking of the pedestrian by the three-axis acceleration detecting means, and analyzing the vibration component, the walking cycle (time required for taking one step) is determined. To detect. By multiplying the step period by the step length, the step-converted moving speed is calculated.
[0011]
Then, by using the direction of the ground surface detected by the triaxial acceleration detection means as the initial value of the triaxial rate sensor, when a pedestrian is making a sudden exercise or using a vehicle Even in the case where an error occurs in the output of the three-axis rate detection means such as the above, the moving direction on the ground surface can be detected.
[0012]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
[0013]
FIG. 1 is a block diagram showing a configuration of a pedestrian moving distance / direction detecting means 10 as an example for detecting a moving distance and moving direction (moving direction) of a pedestrian. In addition, the route guidance apparatus for pedestrians can be comprised using the movement distance and direction detection means 10 for pedestrians of this example of FIG.
[0014]
FIG. 2 is a block diagram showing the configuration of the stride setting means 12 as an example for setting the stride of a pedestrian.
[0015]
FIG. 3 is a block diagram showing a configuration of inertial speed detection means 14 as an example for detecting the pedestrian's inertial movement speed.
[0016]
4 is a combination of the pedestrian movement distance / direction detection means 10 of FIG. 1 with the stride setting means 12 of FIG. 2 and the inertia speed detection means 14 of FIG. The structure of the pedestrian movement distance / direction detection means 17 including the
[0017]
The pedestrian moving distance / direction detecting means 10 shown in FIG. 1 includes a triaxial acceleration sensor 16 as means for detecting orthogonal triaxial acceleration and a triaxial rate sensor 18 as means for detecting orthogonal triaxial rates. have.
[0018]
The pedestrian movement distance / direction detection means 10 includes a gravitational acceleration direction detection means (gravity direction detection means) 20 connected to the output side of the triaxial acceleration sensor 16, a triaxial rate sensor 18, and a gravitational acceleration direction detection. Gravity acceleration direction tracking means 22 having inputs connected to the output sides of the means 20 is provided.
[0019]
Further, the pedestrian movement distance / direction detection means 10 includes an acceleration signal correction means 24 whose inputs are connected to the output side of the triaxial acceleration sensor 16 and the gravitational acceleration direction tracking means 22, a triaxial rate sensor 18, and a gravitational acceleration. A rate signal correction unit 26 having an input connected to the output side of the direction tracking unit 22 is provided.
[0020]
Furthermore, the pedestrian moving distance / direction detecting means 10 has an input connected to the output side of the acceleration signal correcting means 24 and a step period detecting means 30 to which a clock is supplied from the clock generating means 28, and a step period. Connected to the output side of the detecting means 30, a moving speed calculating means 32 to which a stride (also referred to as a stride signal or stride data) is supplied, and a moving direction detecting means connected to the output side of the rate signal correcting means 26. 34.
[0021]
The pedestrian moving distance / direction detecting means 10 shown in FIG. 1 is basically configured as described above. Next, the operation will be described. Note that a microcomputer is mounted on each component constituting the moving distance / direction detecting means 10 for pedestrians as necessary, and the following operations are performed by processing by the computer.
[0022]
The triaxial acceleration sensor 16 detects the acceleration in each of the x, y, and z directions according to the movement of the pedestrian, and the acceleration signals (also simply referred to as acceleration) Gx0, Gy0, Gz0 (m / s 2 ) is output. The triaxial rate sensor 18 detects the rate in each axial direction according to the movement of the pedestrian, and outputs rate signals (also simply referred to as rates) Rx0, Ry0, Rz0 (rad / s) of each axis.
[0023]
The gravitational acceleration direction detecting means 20 extracts an acceleration component due to gravity from the triaxial acceleration signals Gx0, Gy0, Gz0, and outputs the direction as a gravitational acceleration direction signal g (m / s 2 ). In this case, the gravitational acceleration direction is detected when it is determined that the amplitude of at least one of the triaxial acceleration signals Gx0, Gy0, and Gz0 changes periodically, for example, when a pedestrian walks. If it is determined that the remaining DC component from which the relatively high-frequency vibration component has been removed can be separated as a gravitational acceleration component by low-pass filter processing or the like. Further, when the acceleration signal Gx0, Gy0, Gz0 does not include a vibration component, such as when the pedestrian is stopped, the obtained acceleration signal may be identified as the gravitational acceleration component.
[0024]
The gravitational acceleration direction tracking means 22 sets the triaxial rate signals Rx0, Ry0, Rz0 when the gravitational acceleration direction detection means 20 succeeds in detecting the gravitational acceleration direction signal g as initial values, and then obtains each axis obtained thereafter. By processing the rate signals Rx0, Ry0, Rz0 as the inclination of the pedestrian movement distance / direction detection means 10 (inclination with respect to the ground surface), the pedestrian movement distance / direction detection means 10 is The state (inclination) is calculated and the calculation result is output as a correction amount (correction value).
[0025]
The acceleration signal correction means 24 converts the acceleration signals Gx0, Gy0, Gz0 of each axis into triaxial acceleration signals Gx, Gy, Gz for the ground surface using the correction value output from the gravitational acceleration direction tracking means 22. Output.
[0026]
Similarly, the rate signal correction means 26 uses the correction value output from the gravitational acceleration direction tracking means 22 to convert the rate signals Rx0, Ry0, Rz0 of each axis into the triaxial rate signals Rx, Ry, Rz for the ground surface. Convert and output.
[0027]
The clock generation means 28 generates a clock having a constant period (for example, 0.2 ms) for detecting the walking period of the pedestrian. The step period detection means 30 uses, for example, vibration components (up and down) from the triaxial acceleration signals Gx, Gy, and Gz output from the acceleration signal correction means 24 and converted into acceleration motion in the ground surface direction by high-pass filtering. Component), and the time required for the pedestrian to step one step at a time from the separated vibration component cycle is detected by counting the number of clocks of the predetermined cycle and converting the time, and the step cycle (step cycle) Signal).
[0028]
The moving speed calculating means 32 multiplies the step period detected by the step period detecting means 30 by the set step length of the user (pedestrian) or a default step length, thereby calculating the moving speed (movement speed signal). calculate.
[0029]
The movement direction detection means 34 detects the rotation angle about the vertical axis in the direction of gravitational acceleration from the three-axis rate signals Rx, Ry, Rz converted from the rate motion to the ground surface direction output from the rate signal correction means 26. , Output it as the moving direction.
[0030]
In this case, according to the pedestrian movement distance / direction detection means 10 shown in FIG. 1, the movement distance / direction with respect to the ground surface can be accurately detected regardless of the pedestrian's carrying state. In other words, it is possible to detect the posture of the pedestrian movement distance / direction detection means 10 itself. Further, according to the pedestrian movement distance / direction detection means 10 of FIG. 1, it is possible to obtain the movement speed by multiplying the set step length by the step period detected based on the output of the triaxial acceleration sensor 16. Thus, for example, the effect that it is possible to detect the moving speed of a pedestrian even in a situation where radio waves from GPS satellites cannot be received is achieved.
[0031]
The step setting means 12 in the example of FIG. 2 is connected to the GPS receiver 42, the measurement position storage means 44 connected to the output side of the GPS receiver 42, and the output side of the GPS receiver 42, and the step cycle The step count storage means 46 to which the step period is supplied from the detection means 30, the step count calculation means 48 connected to the output side of the step count storage means 46 and the measurement position storage means 44, and the output side of the step length calculation means 48. In addition, a stride storage means 50 to which the step period from the step period detection means 30 is supplied, a measurement position storage means 44 and a measurement timing instruction means 52 connected to the input side of the step count storage means 46 are provided.
[0032]
The stride setting means 12 shown in FIG. 2 is basically configured as described above. Next, the operation will be described. Note that each component constituting the stride setting means 12 is equipped with a microcomputer as necessary, as with each component constituting the pedestrian movement distance / direction detection means 10, and the following processing is performed by the computer. Are performed.
[0033]
The GPS receiver 42 receives radio waves from a GPS satellite through the receiving antenna 43 and detects a measurement position (latitude, longitude, altitude). The measurement position storage means 44 stores the measurement position when the GPS receiver 42 can receive radio waves, calculates the distance between the measurement positions (between two points), and outputs it.
[0034]
The step count storage means 46 stores the number of steps required for movement between any two points (measurement positions) when the GPS receiver 42 can receive radio waves. The number of steps can be calculated by counting the step period signal between the measurement positions.
[0035]
The stride calculation means 48 divides the distance between any two points (measurement positions) stored in the measurement position storage means 44 by the number of steps between any corresponding two points stored in the step count storage means 46. By doing so, the stride can be calculated.
[0036]
The stride storage means 50 stores the calculated stride as a table (lookup table) associated with the step period at that time. For example, a step such as 1 m when the step period is 0.5 seconds is stored in association with a step such as 50 cm when the step period is 1 second. The correspondence table is updated as necessary, and the stride corresponding to the step period is output as the registered stride.
[0037]
The measurement timing instruction unit 52 instructs measurement start timings and measurement end timings at two arbitrary points (measurement positions) used in the measurement position storage unit 44 and the step count storage unit 46.
[0038]
According to the stride setting means 12 in the example of FIG. 2, it is possible to automatically set and update as a registered stride a step difference caused by individual differences of pedestrians as a user or physical condition of pedestrians. The effect of becoming is achieved.
[0039]
In this case, since the stride is stored according to the walking cycle, in other words, the pedestrian walking tempo (normal walking, fast walking, slow walking, running, etc.), the pedestrian walking tempo ( It is possible to output the stride according to the way of walking.
[0040]
Note that the stride set in the moving speed calculation means 32 (see FIG. 1) is not limited to the registered stride according to the example of FIG. 2, but can be arbitrarily set by input setting means not shown.
[0041]
The step length is set by performing so-called map matching (position prediction method) using the pedestrian's movement route and road map (electronic road shape information), and dividing the movement distance on the map by the number of steps. Can also be obtained.
[0042]
The inertial velocity detection means 14 in the example of FIG. 3 uses the triaxial acceleration signals Gx, Gy, Gz output from the acceleration signal correction means 24 and the gravitational acceleration direction signal g output from the gravitational acceleration direction detection means 20. Gravity acceleration removing means 60 to be received, speed change calculating means 62 connected to the output side of gravity acceleration removing means 60 and supplied with a clock from clock generating means 28, and connected to the output side of this speed change calculating means 62 Speed change integration means 64.
[0043]
Next, the operation of the inertia speed detection means 14 will be described. Note that each component constituting the inertial velocity detection means 14 is also equipped with a microcomputer as necessary, and the following operations are performed by computer processing.
[0044]
The gravitational acceleration removing means 60 uses the gravitational acceleration direction signal g obtained by the gravitational acceleration direction detecting means 20 from the corrected acceleration signals Gx, Gy, Gz obtained from the acceleration signal correcting means 24 to obtain a gravitational acceleration component. The removed acceleration signals Gx ′, Gy ′, and Gz ′ are obtained and output. The speed change calculating means 62 detects a speed change by multiplying a predetermined clock period (time) given from the clock generating means 28. The speed change integrating means 64 outputs a value obtained by continuously integrating and averaging the detected speed change values, that is, a so-called moving average value, as an inertial moving speed.
[0045]
FIG. 4 shows an example of inertia, as described above, in which the pedestrian movement distance / direction detection means 10 in FIG. 1 is combined with the stride setting means 12 in FIG. 2 and the inertia speed detection means 14 in FIG. The structure of the pedestrian movement distance / direction detection means 17 including speed detection is shown.
[0046]
In the example of FIG. 4, the movement speed selection means 70 selects the step number converted movement speed obtained by the movement speed calculation means 32 from the step period and the registered stride, and the instantaneous change speed or inertia movement speed obtained by the inertia speed detection means 14. Can be output.
[0047]
Note that the moving speed selection means 70 selects a step-converted moving speed as a moving speed at a relatively low speed where it is difficult to detect a high-accuracy moving speed, so that a sufficiently large acceleration can be obtained. In the moving situation, by selecting the inertial moving speed or the changing speed, the moving speed can be detected with high accuracy in any situation. When selecting the inertial movement speed or the change speed, the movement speed selection means 70 selects the inertial movement speed when the signal level of the inertial movement speed is sufficiently higher than the change speed.
[0048]
More specifically, the speed at which a person as a pedestrian walks using his / her feet is usually about 4 to 8 km / h, and even in the case of running, it is about 20 + α km / h, and a sufficiently large acceleration signal is given. It is difficult to detect. In addition, in the case of movement by foot, there is vibration noise, so that the error increases when the inertial movement speed is selected.
[0049]
Therefore, when the moving speed is higher than a certain level, there is a high possibility that the pedestrian is moving on the vehicle. In the case of movement by a vehicle, a sufficient acceleration signal is often obtained, so the inertial movement speed is selected. Note that the difference between movement by walking and movement by vehicle can be determined as movement by walking if the vibration component is detected when the inertial movement speed is detected.
[0050]
Note that the present invention is not limited to the above-described embodiment, and various configurations can be adopted without departing from the gist of the present invention.
[0051]
【The invention's effect】
As described above, according to the present invention, since the posture of the pedestrian movement speed / direction detection device can be detected, the movement speed / direction can be set regardless of the pedestrian's carrying state. The effect that it can be detected is achieved.
[0052]
Further, according to the present invention, since the pedestrian's vertical movement is detected using the three-axis acceleration detecting means and the rate detecting means, and the moving direction is detected, the GPS receiver can be used without using the GPS receiver. The effect that the moving speed can be obtained from the vertical movement cycle is achieved.
[0053]
Further, when a GPS receiver is used, the stride can be calibrated, and the effect that the moving speed can be calculated more accurately is achieved.
[0054]
When configured to be able to calibrate the stride, an effect is achieved that it becomes possible to set a stride according to individual differences among users.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration example of a pedestrian moving distance / direction detecting means for detecting a moving distance and a moving direction (moving direction) of a pedestrian.
FIG. 2 is a block diagram showing a configuration example of stride setting means for setting the stride of a pedestrian.
FIG. 3 is a block diagram showing a configuration example of inertia speed detection means for detecting the inertial movement speed of a pedestrian.
4 is a pedestrian movement distance / direction including detection of inertial speed in which the pedestrian movement distance / direction detection means of FIG. 1 is combined with the stride setting means of FIG. 2 and the inertial speed detection means of FIG. 3; It is a block diagram which shows the structural example of a detection means.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10, 17 ... Movement distance and direction detection means 12 for pedestrians 12 ... Stride setting means 14 ... Inertia speed detection means 16 ... 3-axis acceleration sensor 18 ... 3-axis rate sensor 20 ... Gravity acceleration direction detection means 22 ... Gravity acceleration direction tracking means 24 ... Acceleration signal correcting means 26 ... Rate signal correcting means 30 ... Step period detecting means 32 ... Moving speed calculating means 34 ... Moving direction detecting means

Claims (4)

3軸の加速度検出手段と、
3軸のレート検出手段と、
前記3軸の加速度検出手段の出力より重力加速度方向を検出する重力加速度方向検出手段と、
前記重力加速度方向検出手段により得られた重力加速度方向を初期重力加速度方向として、前記3軸のレート検出手段の出力から補正値を算出する重力方向追尾手段と、
前記補正値に基づいて前記3軸の加速度検出手段の出力を補正する加速度信号補正手段と、
前記補正値に基づいて前記3軸のレート検出手段の信号を補正するレート信号補正手段と、
前記加速度信号補正手段の出力より地表面に対する上下振動成分を検出し、歩行者の歩く周期を歩周期として検出する歩周期検出手段と、
検出された前記歩周期に歩幅を乗じることによって歩数換算移動速度を算出する移動速度算出手段と、
前記レート信号補正手段の出力により地表面での進行方向を検出する移動方向検出手段と、
重力加速度成分を除去した前記歩行者の慣性移動速度が検出されているときに、振動成分が検出されていれば、前記歩数換算移動速度を選択して出力し、前記振動成分が検出されていなければ、前記慣性移動速度又はその変化速度を選択して出力する移動速度選択手段と
を備えることを特徴とする歩行者用移動速度・方向検出装置。
Three-axis acceleration detection means;
3-axis rate detection means;
A gravitational acceleration direction detecting means for detecting a gravitational acceleration direction from an output of the triaxial acceleration detecting means;
Gravity direction tracking means for calculating a correction value from the output of the triaxial rate detection means, with the gravitational acceleration direction obtained by the gravitational acceleration direction detection means as an initial gravitational acceleration direction;
Acceleration signal correcting means for correcting the output of the triaxial acceleration detecting means based on the correction value;
Rate signal correction means for correcting the signal of the triaxial rate detection means based on the correction value;
Detecting a vertical vibration component with respect to the ground surface from the output of the acceleration signal correcting means, and detecting a walking cycle of a pedestrian as a walking cycle;
A moving speed calculating means for calculating a step number converted moving speed by multiplying the detected step period by a step length;
A moving direction detecting means for detecting a traveling direction on the ground surface by an output of the rate signal correcting means;
If a vibration component is detected when the inertial movement speed of the pedestrian from which the gravitational acceleration component has been removed is detected, the step conversion movement speed must be selected and output, and the vibration component must be detected. For example, a pedestrian movement speed / direction detection device comprising: movement speed selection means for selecting and outputting the inertial movement speed or a change speed thereof.
請求項1記載の装置において、前記移動速度算出手段で用いられる歩幅は、GPS受信機を利用して得られた移動距離を、当該移動距離を歩くのに要した歩数で除することにより求めることを特徴とする歩行者用移動速度・方向検出装置。  2. The apparatus according to claim 1, wherein the stride used by the moving speed calculating means is obtained by dividing the moving distance obtained by using the GPS receiver by the number of steps required to walk the moving distance. A pedestrian movement speed / direction detection device characterized by the above. 請求項1記載の装置において、前記移動速度算出手段で用いられる歩幅は、GPS受信機を利用して得られた移動距離と移動方向に対して、道路形状情報を用いた位置予測手法を施して得られる移動距離を、当該移動距離を歩くのに要した歩数で除することにより求めることを特徴とする歩行者用移動速度・方向検出装置。  2. The apparatus according to claim 1, wherein the stride used by the moving speed calculation means is obtained by applying a position prediction method using road shape information to a moving distance and a moving direction obtained using a GPS receiver. A pedestrian movement speed / direction detection device characterized in that the movement distance obtained is obtained by dividing the movement distance by the number of steps required to walk. 請求項1〜3のいずれか1項に記載の装置において、前記重力加速度方向に基づいて前記加速度信号補正手段の出力から前記重力加速度成分を除去する重力加速度除去手段と、前記重力加速度除去手段の出力に前記歩周期を乗じることによって前記変化速度を算出する速度変化算出手段と、前記変化速度を連続的に積算し平均化することにより前記慣性移動速度を算出する速度変化積算手段とをさらに備えることを特徴とする歩行者用移動速度・方向検出装置。  The apparatus according to claim 1, wherein a gravitational acceleration removing unit that removes the gravitational acceleration component from an output of the acceleration signal correcting unit based on the gravitational acceleration direction; Speed change calculation means for calculating the change speed by multiplying the output by the step period; and speed change integration means for calculating the inertial movement speed by continuously integrating and averaging the change speed. A pedestrian movement speed / direction detection device characterized by that.
JP06686397A 1997-03-19 1997-03-19 Pedestrian speed / direction detector Expired - Fee Related JP3851406B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP06686397A JP3851406B2 (en) 1997-03-19 1997-03-19 Pedestrian speed / direction detector

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP06686397A JP3851406B2 (en) 1997-03-19 1997-03-19 Pedestrian speed / direction detector

Publications (2)

Publication Number Publication Date
JPH10260055A JPH10260055A (en) 1998-09-29
JP3851406B2 true JP3851406B2 (en) 2006-11-29

Family

ID=13328131

Family Applications (1)

Application Number Title Priority Date Filing Date
JP06686397A Expired - Fee Related JP3851406B2 (en) 1997-03-19 1997-03-19 Pedestrian speed / direction detector

Country Status (1)

Country Link
JP (1) JP3851406B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220049698A (en) 2020-10-15 2022-04-22 서울대학교병원 Walking speed estimation device and thereof method

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001272247A (en) * 2000-03-28 2001-10-05 Japan Radio Co Ltd Portable complex positioning apparatus and its present position estimation method
JP4013614B2 (en) 2002-03-29 2007-11-28 ブラザー工業株式会社 Communication range guidance method and wireless communication device
JP4126388B2 (en) * 2002-04-08 2008-07-30 カシオ計算機株式会社 Walking direction detecting device and program
TW200407025A (en) * 2002-08-27 2004-05-01 Vitec Co Ltd Pocket terminal device
JP2004212146A (en) * 2002-12-27 2004-07-29 Sumitomo Precision Prod Co Ltd Dead reckoning navigation system and dead reckoning navigation for walker
JP2004233058A (en) * 2003-01-28 2004-08-19 Hitachi Ltd Cellular phone and positioning system
JP4547537B2 (en) * 2004-11-29 2010-09-22 独立行政法人産業技術総合研究所 BODY STATE DETECTION DEVICE, DETECTION METHOD AND DETECTION PROGRAM
WO2012002494A1 (en) * 2010-06-30 2012-01-05 北陸電気工業株式会社 Posture determination device
KR101356347B1 (en) * 2011-11-25 2014-01-29 울산대학교 산학협력단 Inertial navigation system of walk and method for estimating angle and height information using the same
JP6277674B2 (en) * 2013-10-30 2018-02-14 富士通株式会社 Information processing apparatus, method of operating information processing apparatus, and program
JP6459285B2 (en) * 2013-11-05 2019-01-30 セイコーエプソン株式会社 Speed estimation method, speed estimation apparatus, and portable device
JP6407685B2 (en) * 2014-12-01 2018-10-17 株式会社ゼンリンデータコム Navigation device, navigation method, and navigation program
JP6527024B2 (en) * 2015-05-29 2019-06-05 株式会社早稲田エルダリーヘルス事業団 Mobile motion analysis device, system and program
JP6527023B2 (en) * 2015-05-29 2019-06-05 株式会社早稲田エルダリーヘルス事業団 Mobile motion analysis device, system and program
CA3093839A1 (en) 2018-03-14 2019-09-19 Protect Animals with Satellites, LLC Corrective collar utilizing geolocation technology

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220049698A (en) 2020-10-15 2022-04-22 서울대학교병원 Walking speed estimation device and thereof method

Also Published As

Publication number Publication date
JPH10260055A (en) 1998-09-29

Similar Documents

Publication Publication Date Title
JP3851406B2 (en) Pedestrian speed / direction detector
US8086405B2 (en) Compensation for mounting misalignment of a navigation device
JP4515497B2 (en) Traveling direction measuring device and traveling direction measuring method
JP5459179B2 (en) Moving state discriminating apparatus, moving state discriminating method and program
KR102111104B1 (en) Route smoothing
US9651387B2 (en) Portable navigation system
EP3819592B1 (en) Positioning device, positioning method, and program
EP2951529B1 (en) Inertial device, method, and program
US20130196688A1 (en) Gps odometer
US8612146B2 (en) Accelerometer-aided gyroscope
JP2001221652A (en) Inertial guide apparatus and method for navigation system for car
WO1997008514A1 (en) Movement detector
JP2000097722A (en) Portable position detector and position managing system
JP2009264918A (en) Portable terminal, program, and method for determining progression direction of pedestrian by using acceleration sensor
JP3380404B2 (en) Movement detection device
WO2012045484A1 (en) Gps-calibrated pedometer
CN108663044B (en) Positioning method and device
JP2004125689A (en) Position calculation system for self-contained navigation
KR20020001257A (en) Positioning module and navigation method for personal navigation system using gps and inertial sensors
JP5072100B2 (en) Portable terminal, program and method for determining direction of travel of pedestrian using acceleration sensor and geomagnetic sensor
JP2008256381A (en) Attitude angle measuring instrument and attitude angle measuring method used for that attitude angle measuring instrument
JP2005156185A (en) Device for calculating speed
JP7172159B2 (en) Positioning device, positioning method and positioning program
KR101073626B1 (en) Distance and Speed Measurement System for a Walker and Runner
CA2691171C (en) Portable navigation system

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051206

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060328

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060517

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060620

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060901

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100908

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees