JP2012130543A - 運転者の疲労推定装置 - Google Patents

運転者の疲労推定装置 Download PDF

Info

Publication number
JP2012130543A
JP2012130543A JP2010285769A JP2010285769A JP2012130543A JP 2012130543 A JP2012130543 A JP 2012130543A JP 2010285769 A JP2010285769 A JP 2010285769A JP 2010285769 A JP2010285769 A JP 2010285769A JP 2012130543 A JP2012130543 A JP 2012130543A
Authority
JP
Japan
Prior art keywords
impedance
driver
fatigue
estimation
disturbance torque
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010285769A
Other languages
English (en)
Other versions
JP5541145B2 (ja
Inventor
Maki Yoshihira
真規 義平
Toshihiro Yamamura
智弘 山村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2010285769A priority Critical patent/JP5541145B2/ja
Publication of JP2012130543A publication Critical patent/JP2012130543A/ja
Application granted granted Critical
Publication of JP5541145B2 publication Critical patent/JP5541145B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Steering Control In Accordance With Driving Conditions (AREA)
  • Power Steering Mechanism (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

【課題】より精度良く運転者の疲労度を推定することを目的とする。
【解決手段】操作子であるステアリングホイール7に入力する外乱トルクに対する上記ステアリングホイール7を操作する運転者のインピーダンスを推定し、推定したインピーダンスと、予め設定若しくは計測した事前のインピーダンスとの差分に基づき、運転者の疲労度を推定する。
【選択図】 図1

Description

本発明は、運転者の疲労度を推定する技術に関する。
特許文献1の技術では、制御ユニットが、ICカード内の運転者情報やシートスライド位置などによって運転者の体格を推定し、推定した体格に基づいて機械的インピーダンスを推定する。または制御ユニットが、測定のためにステアリングホイールを強制的に所定量回転させ、それに反応して行われた運転者のステアリング操作の操作量に基づき機械的インピーダンスを推定する。そして、推定された機械的インピーダンスに基づいて、ステアリングの操舵反力を制御する。
特開2007−245904号公報
しかし運転者の手の位置等によって腕の硬さ(インピーダンス)が異なることから、上記特許文献1に記載の方法では運転者のインピーダンスを精度良く検出することが出来ない。この結果、特許文献1で推定した機械的インピーダンスだけから、運転者の疲労度を精度良く推定できないおそれがある。
本発明は、上記のような点に着目してなされたもので、より精度良く運転者の疲労度を推定することを目的とする。
上記課題を解決するために、本発明は、操作子に入力する外乱トルクに対する上記操作子を操作する運転者のインピーダンスを推定し、推定したインピーダンスと、 予め設定若しくは計測した事前のインピーダンスとの差に基づき、運転者の疲労度を推定する。
基準となる事前のインピーダンスとの差によって運転者の疲労度を推定する。これによって運転者のインピーダンスの推定精度が向上して、より精度良く運転者の疲労度を推定することが可能となる。
本発明に基づく実施形態に係る疲労推定装置を含む車両の概念図である。 本発明に基づく実施形態に係る運転者の疲労推定装置の説明図である。 本発明に基づく実施形態に係る運転者の疲労推定装置のシステム構成図である。 運転者の姿勢の検出を説明する図である。 外乱トルクAを説明する図である。 外乱トルクBを説明する図である。 インピーダンス計測のブロック図である。 インピーダンスの周波数特性を示す図である。 筋力推定値と差分との関係を示す図である。 インピーダンスの差分値から筋力を推定する説明図である。 手の位置によるインピーダンスの変化、および、判断閾値の設定の説明図である。 手の位置によるインピーダンスの変化、および、判断閾値の変更の説明図である。 肘の位置による判断閾値の変更の説明図である。 肘が体幹から遠い位置にあるほど、また肘の関節角度に応じて感度をかえる方法の説明図である。 疲労状態の検出を説明する図である。 疲労状態の検出を説明する図である。 運転者の疲労推定装置の処理例を説明するフローチャート図である。 本実施形態の動作例を説明する図である。
次に、本発明の実施形態について図面を参照しつつ説明する。
以下の実施形態では、運転者が操作する操作子としてステアリングホイール7を例に挙げて説明する。対象とする操作子は、ステアリングホイール7に限定されず、ブレーキペダルやシフトレバーなどであっても良い。要は、運転者が運転する際に操作する操作子であって、運転者に操作反力が発生する操作子であれば適用可能である。
図1は、本実施形態の疲労推定装置を搭載した車両の全体概要図である。
符号7は、運転者が操作する操作子としてのステアリングホイールを示す。ステアリングホイール7は、ステアリングを介してステアリングギヤ機構1に連結する。ステアリングギヤ機構1は、ラック/ピニオン機構などの変換機構によって、ステアリングの回転を車幅方向(横方向)の動きに変換する装置である。
符号2及び3は転舵輪である。転舵輪2,3は、ステアリングギヤ機構1による車幅方向への変位に応じて転舵する。その転舵輪2,3のタイヤは、例えば一般的なセダンタイプに取り付けられるタイヤが例示でき、その種類(扁平率、タイヤ径、ラジアル/スタッドレスなど)を問わない。
符号5は操舵反力用アクチュエータである。操舵反力用アクチュエータ5は、ステアリングコラムに設置されたモータである。操舵反力用アクチュエータ5は、運転者がステアリングを回転するのに要する力を増幅してアシストしたり、タイヤ側から入ってくる不要な外乱を減少したりするのに利用可能な装置である。操舵反力用アクチュエータ5は、反力装置コントローラ6からの指令に応じた制御電流を入力することにより、目的とする反力を発生する。
符号6は反力装置コントローラである。反力装置コントローラ6は、目標とする操舵反力と操舵角に応じた制御電流を出力する。反力装置コントローラ6は、上記操舵反力用アクチュエータ5を駆動するため制御装置である。
符号4は反力装置モータ角センサである。反力装置モータ角センサ4は、ステアリングコラムシャフトと操舵反力用アクチュエータ5の間に設置されたモータ角センサであって、回転するステアリングの角度を検出して出力する。
符号8はトルクセンサである。本実施形態ではステアリングリンク部内蔵型トルクセンサを例示している。トルクセンサ8は、運転者がステアリングホイール7を操作(操舵)することで発生する力を計測する。
符号9は操舵情報伝送ハーネスである。操舵情報伝送ハーネス9は、操舵反力用アクチュエータ5から、筋力計算/指示装置利用判定装置10まで、操舵力、操舵角、外乱トルク信号を伝送するためのケーブルからなる。
符号10は筋力計算/指示装置利用判定装置である。筋力計算/指示装置利用判定装置10は、運転者の上肢身体(対象とする筋骨格部)の筋力を推定し疲労度を推定するための演算装置である。筋力計算/指示装置利用判定装置10の詳細については後述する。
符号11は運転者用カメラである。運転者用カメラ11は、運転者の姿勢を検出するための撮像デバイスである。カメラとしては、CCDカメラやCMOSカメラなどが例示出来る。
符号12はタイヤ横力検出センサである。タイヤ横力検出センサ12は、タイヤに働く横力を計測するセンサである。
符号13は指示装置である。この指示装置13は、運転者が疲労状態あるいは今後疲労につながりそうな状態であることの信号を入力したら、例えば、運転者に休憩するように促す、もしくは、車線維持支援装置等の運転支援装置を使用するように促す。上記促しは、音声や表示などによって実施される。
次に、上記筋力計算/指示装置利用判定装置10について図2及び図3を参照しつつ説明する。
上記筋力計算/指示装置利用判定装置10は、コンピュータから構成され、機能的には図2及び図3に示すような構成となっている。
すなわち、筋力計算/指示装置利用判定装置10は、外乱トルク信号検出部14、腕の状態計測部15、筋全体のインピーダンス計測部16、筋力推定部17、疲労度推定部18、指示装置利用の判定部19を備える。
外乱トルク信号検出部14は、過去一定時間に発生した操舵反力、および、足回りの状態によって発生する操舵反力から、運転者のインピーダンス計測に利用できる所定の外乱トルクを検出するプログラムである。すなわち、外乱トルク信号検出部14は、トルクセンサ8から入力した過去一定時間の実測トルク信号、および、セルフアライニングトルクと路面外乱、横風外乱によってタイヤに働く力の信号(タイヤ発生トルク信号)から、つまり、タイヤ発生トルク信号と実測トルクの履歴から、運転者のインピーダンス計測に利用できる外乱トルクを検出する。
計測に利用するタイヤ発生トルク信号、及び、実測トルクの検出条件は、例えば以下の通りとする。すなわち、1Hz〜100Hzの周波数において、実測トルクとのコヒーレンスが0.9以上で、セルフアライニングトルクの方が位相が早い場合を検出条件とする。
この検出条件を満たさない場合は、外乱トルク信号検出部14は、事前に準備した所定の外乱トルク信号を利用する。すなわち、外乱トルク信号検出部14は、反力装置コントローラ6を介して操舵反力用アクチュエータ5を駆動して、予め設定したトルク条件の外乱トルクをステアリングホイール7に伝達する。
上記セルフアライニングトルクの推定は、タイヤ横力検出センサ12から入力した信号に基づくタイヤ横力とキャスタトレールとの積によって、転舵輪である前輪2,3に発生しているセルフアライニングトルクを推定する。そして、例えば、推定したセルフアライニングトルクを上記タイヤ発生トルク信号とする。
腕の状態計測部15は、運転者用カメラで撮像した画像から身体(主に腕)の状態を検出し、手・肘の位置、手・肘関節の角度を算出するプログラムである。例えば図4に示すように、カメラ11が撮影した画像によって、運転者の関節位置と関節角度を検出する。腕の状態計測部15は、運転者の把持位置も検出する。
筋全体のインピーダンス計測部16は、筋全体のインピーダンスを計測するためのプログラムである。筋全体のインピーダンス計測部16は、例えば、外乱トルクを用いた腕の周波数特性を求める手法を採用する。すなわち、筋全体のインピーダンス計測部16は、外乱トルクと実測トルクと操舵角とを入力し、下記式に基づきインピーダンスを演算し、そのインピーダンスHnmsをインピーダンス特性として出力とする。
インピーダンス計算式:
Hnms=−Swf/Swx [(Nm・Nm)/(Nm・deg)]
この式は、外乱トルクTaと実測トルクTbのクロススペクトルSwfを、外乱トルクTaと操舵角のクロススペクトルSwxで除した値をインピーダンスの値とする式である。なお、インピーダンス計測方法は、他の公知の手法を採用しても良い。
ここで、インピーダンスの算出方法は、一般に次の1)〜3)の3つに分類される。
下記1)と2)は、粘性、弾性、慣性を求めた後、2次の伝達関数に代入して、その周波数特性を求めることでインピーダンスが決まる。このため、粘性、弾性、慣性の求め方のみ記す。また、3)は、粘性、弾性、慣性を求めず、直接、周波数特性を求める手法である。
(インピーダンス算出方法の例)
1)連立方程式による算出方法
予め設定した所定の時間間隔で計測した実測トルクから、粘性、弾性、慣性を変数とする連立方程式を解くことでインピーダンスを算出する。
2)粘性、弾性、慣性を個別に測ってインピーダンスを算出する方法
すなわち、ステアリングホイール7にステップ状の外乱トルクを加えて弾性値を求めた後に、一定速度でステアリングホイール7を回転させて粘性項を求める。慣性項は、腕の重さを参考値として求める。
3)外乱トルクをステアリングホイール7に加えながら、実測トルクと操舵角を計測することでインピーダンスを算出する方法
この方法は、次の3−1)〜3−3)の処理によって算出する。
3−1)外乱トルクを運転者が操作する操作子に加える。
3−2)ステアリングホイール7に発生する実測トルクと操舵角の変移量を計測する。
3−1)と3−2)の周波数特性の比較から、運転者の身体のインピーダンスを計測する。
以上の3つのインピーダンス算出方法のうちでは3)が、最も精度よくインピーダンスを計測できる。これに基づき、本実施形態では、3)の算出方法によってインピーダンスを計測(算出)する。このインピーダンス算出方法は、ステアリングホイール7に伝達される外乱トルクを利用する。
ここで、対象とする外乱トルクとしては次の外乱トルクA、外乱トルクBを採用すればよい。
A)予め設定した所定の信号:0〜5Hzの周波数帯による正弦波を位相をずらして畳み込んだ擬似M系列、スイープ波形、ホワイトノイズなど(図5参照)による外乱トルクA
B)車両の走行データから得た外乱トルクB
この外乱トルクBは、例えば、タイヤからステアリングに伝わる力、若しくは、ステアリングからタイヤに伝わる力の時系列データを記憶部に記録する。そして時系列データの波形が予め設定した所定の形状、所定のスペクトルになるとき、外乱トルクとして利用する(図6参照)。
なお、外乱トルクは、ステアリングホイール7が動き出すレベルを下限値とし、運転者がオーバーライドできる限界を上限値とする。この範囲であれば、運転者のインピーダンスを計測できると推定される。
図7は、一番精度が良い上記3)の手法によるインピーダンス計測の模式図である。すなわち、図9は、運転者が操作部であるステアリングホイール7を握っている状態で、ステアリングホイール7に繋がっているアクチュエータ5で外乱トルクを加えた場合の模式図である。
この模式図中
Ta:外乱トルク
Tb:実測トルク
Tc:外乱トルクと実測トルクの差分値(=Ta−Tb)
x:操舵角
である。
このとき、運転者のインピーダンスは、上述のように「−STaTb/STax(外乱トルクと実測トルクのクロススペクトルを、外乱トルクと操舵角のクロススペクトルで除した値)」から求めることが出来る。図8にインピーダンス計測結果の例を示す。この左下図から、腕に入っている力の状態、つまり筋骨格部の硬さの状態を推定することが出来る。例えば、ステアリングホイール7を握る力が増すと、1Hz以下の周波数帯域でインピーダンスが上がることが確認できる。
また、筋力推定部17は、筋全体のインピーダンス計測部16が求めたインピーダンスに基づき、筋力を推定するプログラムである。
筋力推定部17は、まず、予め計測したリラックス時の腕のインピーダンス(事前のインピーダンス)と、現在のインピーダンスとの差である差分値を求める。
次に、筋力推定部17は、腕の状態計測部15の計測情報(運転者の姿勢)に基づいて、上記求めた差分値を補正する。具体的には、ステアリングホイール7に対する運転者の把持位置が当該ステアリングホイール7の下端にあるほど、また、肘の位置がアームレストに当接していたり、肘が体幹に触れているときは、力を抜いていてもインピーダンスが高くなる。これに鑑み、ステアリングホイール7に対する運転者の手の位置が当該ステアリングホイール7の下端にあるほど、また、肘の位置がアームレストに当たっていたり、肘の位置が体幹に触れる位置である場合には、上記差分値の絶対値を小さく補正する。なお、差分値の絶対値を補正する代わりに、次の腕の筋力を推定する際の感度を補正しても良い。後述の説明では、腕の筋力を推定する際の感度を補正する場合の例で説明する。
次に、筋力推定部17は、補正後の差分値に基づき、予め設定した「インピーダンス−筋力」のマップを参照して、腕の筋力を推定する。筋力推定部17は、予め設定した制御周期で腕の筋力を推定し、その推定する度に、筋の筋力を記録部(不図示)に記録する。「インピーダンス−筋力」のマップは、図9に示すように、差分値が大きいほど、筋力が大きいと推定できる。図9に示すものは、事前のインピーダンスとして、運転者がリラックスして把持している状態でのインピーダンスを採用した場合である。このため、差分値が零の場合には、筋力推定値が零となっている(y切片が0)。事前のインピーダンスが所定の筋力が発揮されている場合には、差分値が零の場合の筋力推定値はそれに応じた値とする。
ここで、上記予め計測したリラックス時の腕のインピーダンス(事前のインピーダンス)について説明する。
本実施形態においてリラックスとは、「直線走行、もしくは、停車状態においてステアリングホイール7を握ってはいるがステアリングホイール操作していない状態」若しくはその状態と推定される状態を指す。なお、ステアリングホイール7に外乱を加えて握っている腕の状態(インピーダンス)を測るため、ステアリングホイール7を握っていないときは計測が出来ない。
また、リラックス時のインピーダンスの計測方法や計測タイミングは、次の通りA〜Bに基づき実施すればよい。
A.予め実験等によって平均的運転者のリラックス時のインピーダンスを取得する。少なくとも、数十秒の車両信号を使って求めた運転者のインピーダンスでは、図8における横軸1Hz以下の波形が10〜20近辺にある場合はリラックスと判定する。そのときのインピーダンスを事前のインピーダンスとして求める。
B.運転者が初乗車時にリラックス時インピーダンスを計測する。まず、音声で「ステアリングホイール7を触れる程度の力で把持する」ように指示する。次に、インピーダンス用の外乱トルクをステアリングホイール7に入力し、そのときの実トルクと操舵角を計測する。そして、上記外乱トルクと実トルクと操舵角の関係から運転者のインピーダンスを事前のインピーダンスとして求める。
C.走行中の履歴から、リラックス時インピーダンスを計測する。路面外乱が全くなく、且つ、運転負荷が少ないと考えられる低速域(40km/h以上)における操舵の履歴から、「直線走行、もしくは、停車状態においてステアリングホイール7を握ってはいるがステアリングホイール7を操作していない状態」を抽出し、そのときの、車両信号から運転者のリラックス時インピーダンスを計測する。高速走行になるほど運転者は緊張して腕に力をいれることが過去の実験から分かっており、高速走行時のインピーダンスをリラックス時インピーダンスとしては用いない。
ここで、事前のインピーダンスとしては、リラックス時のインピーダンスを採用する方が差分を大きくとれるので好ましいが、事前のインピーダンスは、リラックス時のインピーダンスでなくても良い。事前のインピーダンスは、基準として特定可能なインピーダンスであれば良い。
また、上記筋力推定部17の処理について補足説明する。
運転者がステアリングホイール7を把持した状態で(図10(a)参照)、リラックスして保舵した状態での事前のインピーダンスとしっかり保舵した状態でのインピーダンスを実験で取得すると図10(b)に示す結果が得られた。この図10(b)から分かるように、ステアリングホイール7を握る力が増すと1Hz以下の周波数帯域(インピーダンス低周波成分)で、インピーダンスが高くなることが確認できる。
そして、図10(c)のように、リラックスして保舵した状態での事前のインピーダンスの特性値(物理値)と、現在の保舵状態でのインピーダンスの特性値(物理値)との差分値を求めることで、基準とする事前のインピーダンスからの差分値を求めることが出来る。そして、図10(d)のような「インピーダンス−筋力」のマップを使用することで筋力を指定することが出来る。
ここで、上記インピーダンスの特性値(物理値)としては、例えばインピーダンス低周波成分の平均値若しくは面積、又は腕を2次モデルと仮定して求めた弾性項を採用する。すなわち、インピーダンス低周波成分と比例した値をインピーダンスの特性値(物理値)として使用すればよい。
次に、上記ステアリングホイール7の把持位置、運転者の肘の位置による差分値の補正について説明する。
ステアリングホイール7の把持位置による、リラックスして把持した場合としっかり把持した場合とでの関係を求めたところ、図11に示す結果を得た。図11から分かるように、同じ把持力にも関わらず、運転者がステアリングホイール7の下側を把持するほど、インピーダンス特性値が大きくなる。また、ステアリングホイール7の下側を把持するほど、リラックス把持でのインピーダンス特性値としっかり把持でのインピーダンス特性値との差分が小さくなる。
また上記の結果(図11)から、把持位置がステアリングホイール7の上側にあるときは筋力を推定し易いが、ステアリングホイール7の下側にあるときは、リラックスして把持している状態としっかりして把持している状態との筋力の差が少なく推定し難い。これに基づき、把持位置によって筋力推定を行うかどうかの判断閾値を設定しても良い。例えば、把持位置が07:25の位置よりも下側の場合には、筋力推定つまり疲労推定を行わないようにしても良い。
また、上述のように把持位置がステアリングホイール7の上側にあるときは筋力を推定し易いが、ステアリングホイール7の下側にあるときは筋力の差が少なく推定し難い。これに基づき、把持位置によって筋力推定を行うための感度を変える。具体的には、ステアリングホイール7の下側を握るほど、図12に示すように、リラックス把持としっかり把持との差分値に対する筋力推定値の感度を高めるように補正する。
また、ステアリングホイール7をしっかり把持している状態において、運転者がアームレストに肘を置いて、ステアリングホイール7を把持するようにすると、運転者が腕に力を入れていなくてもインピーダンスが高まる。このようにインピータンスが高い場合、筋力推定値が実際よりも大きくなりがちである。これに対し、本実施形態では、運転者がアームレストに肘を置いて、ステアリングホイール7を把持している場合には、図13に示すように、リラックス把持としっかり把持の差分値に対する筋力推定値の感度を下げる。このとき、運転者がアームレストに肘をおいている場合には、筋力推定を実施しないようにしても良い。
また、肘の位置とインピーダンスとの関係については、図14(b)に示すようなに関係にある(上述のように肘を車体に支持させている場合は除く。)。すなわち、腕が伸びているなど体幹に対し肘が離れているほど、力を入れていてもインピーダンスが低くなる(リラックスしているときのインピーダンスに近づく)。つまり、力を入れているにも関わらず、体幹に対し肘が離れるほど、図14(b)のようにインピーダンスはリラックス把持状態でのインピーダンスに近づき差分値が小さくなる。これを鑑み、図14(c)のように、体幹に対し肘が離れるほど感度を下げる。
疲労度推定部18は、筋力推定部17の推定した筋力の履歴に基づき、疲労度を推定するプログラムである。
疲労度の推定は、例えば図15に示す筋力持続曲線に基づき疲労度を判定し、筋力の履歴から筋力持続曲線より上に位置すると疲労状態と判定する。また、その筋力持続曲線より上の継続時間が長いほど、疲労度が大きいと判定する。
更に詳説する。
ここで、疲労度の指標である筋力推定値に基づく運転者の疲労推定の処理方法について説明する。
一般に、筋力(瞬時値)の持続時間とは、図15に示すような関係がある。したがって、筋力が大きいと筋肉が力を出し続けられる持続時間が短い。逆に、筋力が小さいと筋肉が力を出し続けられる持続時間が長い。そして、上記図15のように、筋力が大きいほど、持続時間は指数関数的に減少する関係にある。
これに基づき、図15に基づく疲労推定の方法としては、例えば下記の方策1と方策2を例示出来る。
(疲労推定の方策1)
筋力の瞬時値の頻度から疲労を判定する。すなわち、上記図15の関係(疲労曲線)より瞬時値の継続時間に基づき、どの程度の疲労状態か、また運転者に報知すべき疲労状態かを推定する。
上記推定には統計的知見に基づく認識処理を実施すればよい。統計的処理は、例えば、ベイズ推定、ファジー推定、サポートベクターマシン、遺伝的アルゴリズム、ニューラルネットワーク、などが例示出来る。
(疲労推定の方策2)
筋力の瞬時値が予め設定した閾値を超えたか否かによってどの程度の疲労状態か、また運転者に報知すべき疲労状態かを推定する。閾値は1つでも良いし、何段階か複数持っていても良い。
ここで、筋肉は100%以上の力を出すとツルという現象を生じる。したがって、その極限状態を基準にして閾値を設定する。
次に、上記方策1を採用した疲労推定の処理について説明する。
まず、前処理として、筋力計算、筋力と時間のヒストグラムを算出する。
次に、特徴抽出処理として、ヒストグラムの面積や大きさなどを特徴量を求める。
次に、後処置として、特徴量の平均、中央値、最頻値を算出、もしくは、異なる複数の特徴量をもとに特徴空間を作成する。
次に判別処理として、予め設定した数値、もしくは、特徴空間の予め設定した所定範囲にある値(閾値を超える値)か否かを判別する。この判別を満足しない場合には、前処理に戻って処理を繰り返す。一方、この判別を満足する場合には、運転者への疲労に対する報知が必要と判定して処理を終了する。
また、筋力推定値をパワースペクトルで取得する場合には、図16に示すように、筋力推定値のパワースペクトルの高周波成分(例えば1Hz以上の帯域)が、予め設定した閾値以上の場合に、疲労しそうと判定し、筋力推定値のパワースペクトルの高周波成分が予め設定した閾値以上の状態が継続するほど疲労度を大きく設定する。
指示装置利用の判定部19は、疲労度推定部18が推定する疲労度に基づき、疲労しているか疲労しそうか否かを判定し、その旨の報知信号を指示装置に出力するプログラムである。指示装置利用の判定部19は、例えば上記疲労度が予め設定した疲労度閾値以上の場合に、疲労状態と判定する。
次に、上記筋力計算/指示装置利用判定装置10の処理の一例を、図17のフローチャートを参照して説明する。
筋力計算/指示装置利用判定装置10は、予め設定した制御周期で作動する。作動すると先ずステップS1にて、外乱トルクを計測する。すなわち、悪路にタイヤがとられることによって発生する外乱トルクを記憶部に記録する。その後ステップS2に移行する。
ステップS2では、ステップS1で記録した外乱トルクをFFT処理し、外乱トルクのパワースペクトルを求める。そして、求めた外乱トルクのパワースペクトルと、予め計測した良路走行時のパワースペクトルと比較する。若しくは、求めた外乱トルクのパワースペクトルについて、インピーダンス計算可能判断ラインを超えているかを計算する。その後ステップS3に移行する。
ステップS3では、ステップS2の処理によって、インピーダンスが計算可能であると判定した場合には、記憶部にある外乱トルクの時系列データから、予め設定した所定の時間間隔だけデータを切り取り、同時刻の実トルクと操舵角から運転者のインピーダンスを計測する。インピーダンスが計算可能であるか否かは、上述した外乱トルク条件を満足しているか否かで判定すれば良い。
ここで、予め設定した時間の間、インピーダンスが計算可能でないと判定した場合には、予め設定した外乱トルクをステアリングに入力して、実トルクと操舵角から運転者のインピーダンスを計測する。
その後ステップS4に移行する。
ステップS4では、ステップS3で計測したインピーダンスと、事前に設定した事前のインピーダンスとの差分値を算出する。本実施形態の事前のインピーダンスは、リラックス状態(運転者が腕に力を入れずにステアリングホイールを握っている除隊)のインピーダンスを予め計測して取得したものである。上記差分値は、腕の筋力に比例した値となる。その後ステップS5に移行する。ここで、上記差分値は、上述のようにインピーダンスの低周波成分の特性値についての差分値とする。
ステップS5では、上記差分値が予め設定した閾値よりも小さい場合には、処理を終了して復帰し、次の制御周期でステップS1を作動する。上記差分値が予め設定した閾値以上の場合にはステップS6に移行する。
ここで差分値が小さい場合には、分解能が低いので、筋力を推定できないおそれがある。また、差分値が小さい場合には、リラックス状態(運転者の腕に力が入っていない状態)に近いと推定される。そして、上記差分値が予め設定した閾値以上の場合に、腕に力が入っているとみなしてステップS6に移行する。
ステップS6では、上記求めた低周波成分の差分値から筋力推定値を求める。その後、ステップS7に移行する。
ステップS7では、1又は2以上のカメラ11が撮影した撮像データに基づき、ステアリングホイール7に対する運転者の把持位置と、運転者の体幹に対する肘の位置や肘の伸び具合を検出する。その後ステップS8に移行する。
ステップS8では、ステップS7の検出に基づき、ステアリングホイール7に対する把持位置が下側に位置するか否かを判定する。下側に位置する場合にはステップS9に移行する。下側に位置しない場合にはステップS10に移行する。
ステップS9では、ステアリングホイール7の下側を把持していると判定するほど、上記差分値に対する筋力推定値の感度を高める。その後ステップS10に移行する。
ステップS10では、肘がアームレストなどの車体の一部に当接しているか否かを判定する。肘がアームレストなどの車体の一部に当接していると判定した場合にはステップS11に移行する。そうでない場合にはステップS12に移行する。
ステップS11に移行する場合には、アームレストに肘を置いているなど、ステアリングホイール7を把持している状態であっても運転者が腕に力をいれていなくても、計測したインピーダンスが高まっている状態である。このためステップS11では、上記差分値に対する筋力推定値の感度を下げる。その後ステップS12に移行する。
ステップS12では、肘の角度が予め設定した所定角度以上になっているか否かを判定する。肘の角度が予め設定した所定角度以上の場合にはステップS13に移行する。肘の角度が予め設定した所定角度未満の場合にはステップS14に移行する。
ステップS13では、脇が開き肘関節を伸ばしている方が腕に力が入れ難くインピーダンスが低い。座り方によって腕が伸びているときは感度を下げる。その後ステップS14に移行する。
ステップS14では、最大筋力のデータを読み込む。その後ステップS15に移行する。最大筋力とは、求めた筋力の瞬時値(ピーク値)を指す。
ステップS15では、最大筋力に占める筋力推定値を計算する。その後ステップS16に移行する。
ステップS16では、最大筋力に占める筋力推定値と筋力持続曲線とのずれ量を計算する。ここで、各筋力推定値が筋力持続曲線の右上にある場合を正の値、左下にある場合を負の値とする。ステップS17に移行する。
ステップS17では、ステップS16で計算したずれ量が予め設定した所定値以上の場合にはステップS18に移行する。そうでない場合にはステップS19に移行する。
ステップS18では、ずれ量が所定以上の場合であるので、疲労状態と推定する。その後ステップS19に移行する。ずれ量が疲労度に相当する。
ステップS19では、疲労状態の累積値が予め設定した所定値を越えていると判定した場合にはステップS20に移行する。そうでない場合には、処理を終了して復帰し、次の制御周期でステップS1を作動する。
ステップS20では、指示装置の設定がスイッチON状態か否かを判定する。ONの場合は21に移行する。そうでない場合には、処理を終了して復帰し、次の制御周期でステップS1を作動する。
ステップS21では、指示装置をONにし、疲労状態であることを運転者に告知する。その後、処理を終了して復帰し、次の制御周期でステップS1を作動する。
(動作その他について)
ここで、従来の運転者の筋力を求める技術は以下の(a)(b)の二つに大別される。
(a)筋電図による筋力推定
(b)筋骨格モデルによる筋力推定
しかし、筋電図による筋力推定は、筋電センサを肌につける必要があり煩わしい。また、筋骨格モデルによる筋力推定は、膨大な記憶部を使用して筋力を推定する割に内部で相殺される力が予測できず誤差が大きい。
これに対し、本実施形態では、筋電センサも筋骨格モデルも利用することなく、つまり簡便に運転者の疲労が推定出来る。
また、基準とインピーダンスが高いのか、力をいれているのか抜いているのかが分からない。これに対し本実施形態では、基準とする前提のインピーダンスとの差分を利用することで、その分、精度良く推定することが可能となる。
次に、本実施形態に係る動作例を、図15を参照して説明する。
走行中に外乱トルクを検出し、その外乱トルクデータを記憶部に記録する。併行して、実測トルク及び操舵角についても検出して記憶部に記憶する。
そして、記憶部に記録した外乱トルクデータをFFT処理して得たパワースペクトルが、インピーダンス計測可能判断ラインを予め設定した継続時間越えている場合には、その所定の区間の外乱トルクデータを切り出す。
なお、予め設定した時間に、パワースペクトルが、インピーダンス計測可能判断ラインを予め設定した継続時間を越えている状況が発生しない場合には、操舵反力用アクチュエータ5を駆動して、予め設定した外乱トルクをステアリングに入力する。
そして、同時刻における、上記切り出した所定の区間の外乱トルクと実トルクと操舵角から、インピーダンスを計算する。続いて、事前に設定したリラックス状態のインピーダンスである事前のインピーダンスの低周波成分に対する、上記計算したインピーダンスの低周波成分の差である差分値を求め。その差分値から筋力を推定する。
このとき、運転者がステアリングホイール7の下側を把持していると判定した場合には、差分値から筋力推定値を求める際の感度を高める。また、運転者の体幹から肘が離れている場合には、感度を下げる。
なお、上記推定した筋力は記憶部に記憶する。
そして、推定した筋力に基づき、腕に力が入っている時間をカウントし、筋力推定値が筋力持続曲線の右上にあるとき、疲労すると判定する。
そして、疲労判定値を累積し所定値をこえると指示装置をONにして、例えば運転者に対し休憩を促す音を鳴らす。
ここで、ステアリングホイール7は、操作子を構成する。外乱トルク信号検出部14は外乱トルク検出手段を構成する。インピーダンス計測部16はインピーダンス推定手段を構成する。疲労度推定部18は疲労度推定手段を構成する。外乱トルク信号検出部14は、外乱トルク付与手段を構成する。腕の状態計測部18は、把持位置検出手段を構成する。カメラ11は、運転姿勢検出手段を構成する。
(本実施形態の効果)
(1)外乱トルク信号検出部14は、車両に対し運転指示を与えるための操作子に入力する外乱トルクを検出する。インピーダンス計測部16は、上記外乱トルク信号検出部14が検出する外乱トルクに対する上記操作子を操作する運転者のインピーダンスを推定する。疲労度推定部18は、予め設定若しくは計測した事前のインピーダンスと上記インピーダンス計測部16が推定したインピーダンスとの差に基づき、運転者の疲労度を推定する。
基準となる事前のインピーダンスとの差分によって運転者の疲労度を推定する。これによって運転者のインピーダンスの推定精度が向上して、より精度良く運転者の疲労度を推定することが可能となる。
なお、操作子に入力する外乱トルクは弱い負荷反力で構わないので、運転者の操作を邪魔しないようにすることが可能である。
(2)上記事前のインピーダンスは、運転者がリラックスしていると推定されるときに計測した値である。
基準となる事前のインピーダンスとして、運転者がリラックスしていると推定されるときのインピーダンスを使用することで、その分、差分を大きく取れる(分解能を大きくできる)結果、運転者の疲労度の推定精度が向上する。
(3)外乱トルク付与手段は、上記インピーダンスの推定に使用する外乱トルクを上記操作子に付与する。
これによって、操作子に対し外乱トルクが入力していない状態でも、運転者のインピーダンスを推定可能となる。
(4)把持位置検出手段は、運転者による上記ステアリングホイール7の把持位置を検出する。上記疲労度推定部18は、推定する疲労度を、把持位置検出手段が検出する把持位置によって補正する。
補正は、疲労度の判断閾値を補正したり、差分値から疲労を求めるための感度を変更したりすることで実施する。
上記差分値が同じでも把持位置によって疲労状態が異なる。これに対し、把持位置によって補正することで、疲労推定の精度が向上する。
なお、手の位置に応じて、力を入れているか抜いているかが検出し難いインピーダンス計測結果については、疲労推定を行わないようにして、運転者に不必要な情報を提供しないことが好ましい。
(5)運転姿勢検出手段は、運転者の運転姿勢を検出する。上記疲労度推定部18は、推定する疲労度を、運転姿勢検出手段が検出する運転姿勢に基づく肘位置によって補正する。
上記差分値が同じでも運転者の肘位置によって疲労状態が異なる。これに対し、運転車の肘位置によって補正することで、疲労推定の精度が向上する。
(6)上記肘位置による補正は、運転者の体幹に対する肘の位置に応じて補正量を変更する。例えば、肘が体幹から遠い位置にあるほど(肘の関節角度に応じて)、疲労度判定の感度を下げる。
腕が伸びているか曲がっているかによって、つまり肘の位置によって、差分値が同じでも実際のインピーダンスが異なる。これに基づき、運転者の体幹に対する肘の位置に応じて補正量を変更することで、疲労推定の精度が向上する。
5 操舵反力用アクチュエータ
6 反力装置コントローラ
7 ステアリングホイール(操作子)
8 トルクセンサ
10 筋力計算/指示装置利用判定装置
11 運転者用カメラ
13 指示装置
14 外乱トルク信号検出部
15 筋の状態計測部
16 インピーダンス計測部
17 筋力推定部
18 疲労度推定部
19 指示装置利用の判定部

Claims (6)

  1. 車両に対し運転指示を与えるための操作子に入力する外乱トルクを検出する外乱トルク検出手段と、
    上記外乱トルク検出手段が検出する外乱トルクに対する上記操作子を操作する運転者のインピーダンスを推定するインピーダンス推定手段と、
    予め設定若しくは計測した事前のインピーダンスと上記インピーダンス推定手段が推定したインピーダンスとの差に基づき、運転者の疲労度を推定する疲労度推定手段と、を備えることを特徴とする運転者の疲労推定装置。
  2. 上記事前のインピーダンスは、運転者がリラックスしていると推定されるときに計測した値であることを特徴とする請求項1に記載した運転者の疲労推定装置。
  3. 上記インピーダンスの推定に使用する外乱トルクを上記操作子に付与する外乱トルク付与手段を備えることを特徴とする請求項1に記載した運転者の疲労推定装置。
  4. 上記操作子はステアリングホイールであり、
    運転者による上記ステアリングホイールの把持位置を検出する把持位置検出手段を備え、
    上記疲労度推定手段は、推定する疲労度を、把持位置検出手段が検出する把持位置によって補正することを特徴とする請求項1〜請求項3のいずれか1項に記載した運転者の疲労推定装置。
  5. 運転者の運転姿勢を検出する運転姿勢検出手段を備え、
    上記疲労度推定手段は、推定する疲労度を、運転姿勢検出手段が検出する運転姿勢に基づく肘位置によって補正することを特徴とする請求項4に記載した運転者の疲労推定装置。
  6. 上記肘位置による補正は、運転者の体幹に対する肘の位置に応じて補正量を変更することを特徴とする請求項5に記載した運転者の疲労推定装置。
JP2010285769A 2010-12-22 2010-12-22 運転者の疲労推定装置 Active JP5541145B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010285769A JP5541145B2 (ja) 2010-12-22 2010-12-22 運転者の疲労推定装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010285769A JP5541145B2 (ja) 2010-12-22 2010-12-22 運転者の疲労推定装置

Publications (2)

Publication Number Publication Date
JP2012130543A true JP2012130543A (ja) 2012-07-12
JP5541145B2 JP5541145B2 (ja) 2014-07-09

Family

ID=46646880

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010285769A Active JP5541145B2 (ja) 2010-12-22 2010-12-22 運転者の疲労推定装置

Country Status (1)

Country Link
JP (1) JP5541145B2 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014104947A (ja) * 2012-11-29 2014-06-09 Toyota Central R&D Labs Inc 車両制御装置及びプログラム
JP2017047701A (ja) * 2015-08-31 2017-03-09 マツダ株式会社 運転支援装置
CN108451643A (zh) * 2013-03-15 2018-08-28 史赛克公司 能够以多种模式控制外科器械的外科操纵器
JP2021062845A (ja) * 2019-10-17 2021-04-22 日産自動車株式会社 ステアリングホイールの操作予測方法及びステアリングホイールの操作予測装置
US11179210B2 (en) 2012-08-03 2021-11-23 Stryker Corporation Surgical manipulator and method for controlling pose of an instrument based on virtual rigid body modelling
JP2022037789A (ja) * 2020-08-25 2022-03-09 いすゞ自動車株式会社 判別装置
US11471232B2 (en) 2012-08-03 2022-10-18 Stryker Corporation Surgical system and method utilizing impulse modeling for controlling an instrument

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005104240A (ja) * 2003-09-29 2005-04-21 Denso Corp 電動パワーステアリング制御装置
JP2007082594A (ja) * 2005-09-20 2007-04-05 Denso Corp 疲労検出装置
JP2007117608A (ja) * 2005-10-31 2007-05-17 Toyota Motor Corp 人の状態検出装置
JP2008146515A (ja) * 2006-12-13 2008-06-26 Hitachi Ltd 疲労度検出装置,自動車の制御装置および制御方法
JP2009006839A (ja) * 2007-06-28 2009-01-15 Hitachi Ltd 疲労度検出装置
JP2009136392A (ja) * 2007-12-04 2009-06-25 Toyota Motor Corp 運転者状態推定装置
JP2009265892A (ja) * 2008-04-24 2009-11-12 Daihatsu Motor Co Ltd 運転状態判定装置
JP2010049609A (ja) * 2008-08-25 2010-03-04 Fuji Heavy Ind Ltd 覚醒度判定装置
JP2010072800A (ja) * 2008-09-17 2010-04-02 Fuji Heavy Ind Ltd 覚醒度判定装置
JP2010515960A (ja) * 2007-01-09 2010-05-13 ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング 回転モーメント検出センサを用いて運転者の疲労状態を検知する方法及び装置
JP2012034829A (ja) * 2010-08-06 2012-02-23 Nissan Motor Co Ltd 運転者の疲労推定装置及び疲労推定方法
JP2012116413A (ja) * 2010-12-02 2012-06-21 Nissan Motor Co Ltd 移動体の操舵反力調整装置

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005104240A (ja) * 2003-09-29 2005-04-21 Denso Corp 電動パワーステアリング制御装置
JP2007082594A (ja) * 2005-09-20 2007-04-05 Denso Corp 疲労検出装置
JP2007117608A (ja) * 2005-10-31 2007-05-17 Toyota Motor Corp 人の状態検出装置
JP2008146515A (ja) * 2006-12-13 2008-06-26 Hitachi Ltd 疲労度検出装置,自動車の制御装置および制御方法
JP2010515960A (ja) * 2007-01-09 2010-05-13 ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング 回転モーメント検出センサを用いて運転者の疲労状態を検知する方法及び装置
JP2009006839A (ja) * 2007-06-28 2009-01-15 Hitachi Ltd 疲労度検出装置
JP2009136392A (ja) * 2007-12-04 2009-06-25 Toyota Motor Corp 運転者状態推定装置
JP2009265892A (ja) * 2008-04-24 2009-11-12 Daihatsu Motor Co Ltd 運転状態判定装置
JP2010049609A (ja) * 2008-08-25 2010-03-04 Fuji Heavy Ind Ltd 覚醒度判定装置
JP2010072800A (ja) * 2008-09-17 2010-04-02 Fuji Heavy Ind Ltd 覚醒度判定装置
JP2012034829A (ja) * 2010-08-06 2012-02-23 Nissan Motor Co Ltd 運転者の疲労推定装置及び疲労推定方法
JP2012116413A (ja) * 2010-12-02 2012-06-21 Nissan Motor Co Ltd 移動体の操舵反力調整装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11639001B2 (en) 2012-08-03 2023-05-02 Stryker Corporation Robotic system and method for reorienting a surgical instrument
US11672620B2 (en) 2012-08-03 2023-06-13 Stryker Corporation Robotic system and method for removing a volume of material from a patient
US12070288B2 (en) 2012-08-03 2024-08-27 Stryker Corporation Robotic system and method for removing a volume of material from a patient
US12004836B2 (en) 2012-08-03 2024-06-11 Stryker Corporation Surgical manipulator and method of operating the same using virtual rigid body modeling preliminary
US11179210B2 (en) 2012-08-03 2021-11-23 Stryker Corporation Surgical manipulator and method for controlling pose of an instrument based on virtual rigid body modelling
US11045958B2 (en) 2012-08-03 2021-06-29 Stryker Corporation Surgical robotic system and method for commanding instrument position based on iterative boundary evaluation
US11471232B2 (en) 2012-08-03 2022-10-18 Stryker Corporation Surgical system and method utilizing impulse modeling for controlling an instrument
JP2014104947A (ja) * 2012-11-29 2014-06-09 Toyota Central R&D Labs Inc 車両制御装置及びプログラム
CN108451643B (zh) * 2013-03-15 2021-02-26 史赛克公司 能够以多种模式控制外科器械的外科操纵器
CN108451643A (zh) * 2013-03-15 2018-08-28 史赛克公司 能够以多种模式控制外科器械的外科操纵器
JP2017047701A (ja) * 2015-08-31 2017-03-09 マツダ株式会社 運転支援装置
JP2021062845A (ja) * 2019-10-17 2021-04-22 日産自動車株式会社 ステアリングホイールの操作予測方法及びステアリングホイールの操作予測装置
JP7437904B2 (ja) 2019-10-17 2024-02-26 日産自動車株式会社 ステアリングホイールの操作予測方法及びステアリングホイールの操作予測装置
JP2022037789A (ja) * 2020-08-25 2022-03-09 いすゞ自動車株式会社 判別装置
JP7327322B2 (ja) 2020-08-25 2023-08-16 いすゞ自動車株式会社 判別装置

Also Published As

Publication number Publication date
JP5541145B2 (ja) 2014-07-09

Similar Documents

Publication Publication Date Title
JP5541145B2 (ja) 運転者の疲労推定装置
JP5589855B2 (ja) 操舵反力制御装置
CN107891909B (zh) 具有抓握感测的转向补偿
KR101621747B1 (ko) 전동식 조향장치 및 그 제어방법
JP5621559B2 (ja) 移動体の操舵反力調整装置
JP5576234B2 (ja) 生体状態監視装置
EP2883525B1 (en) Walking assistance moving vehicle
JP4893743B2 (ja) 車両操縦性能評価方法、評価装置およびプログラム
JP5412985B2 (ja) 車両走行支援装置
JP6722355B2 (ja) ステアリングホイールの手動操作を検出するための装置及び方法
JP2014008789A (ja) ペダリング状態計測装置
JP4534800B2 (ja) 車輪操舵システムおよび操舵反力制御方法
JP6926705B2 (ja) 把持判定装置、運転支援システム、および、把持判定方法
KR101720313B1 (ko) 차량의 전동식 조향장치 및 그 제어 방법
JP2015524364A (ja) 自動車の走行方向を検知するための方法
JP2010280290A (ja) 電動アシスト車両
JP4568996B2 (ja) 操舵装置と操舵装置の抗力算出装置
JP5640537B2 (ja) 運転者の疲労推定装置及び疲労推定方法
TW201632402A (zh) 具有電動驅動器的車輛,特別是電動腳踏車,以及操作這種車輛的方法
JP6274982B2 (ja) 運転補助装置、運転補助方法、及び運転補助プログラム
KR101743262B1 (ko) 휠체어용 동력 보조 제어 장치 및 그 방법
JP6011283B2 (ja) 車両制御装置及びプログラム
JP4961782B2 (ja) 車両用操舵装置
JP2007245908A (ja) 車両用操舵装置
JP2009241725A (ja) 車両用操舵反力制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131028

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140408

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140421

R151 Written notification of patent or utility model registration

Ref document number: 5541145

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151