JP3596158B2

JP3596158B2 - 運転者モニター装置とこれを用いた安全装置

Info

Publication number: JP3596158B2
Application number: JP12542896A
Authority: JP
Inventors: 雅彦松中; 栄一田中; 圭子中西
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1996-05-21
Filing date: 1996-05-21
Publication date: 2004-12-02
Anticipated expiration: 2016-05-21
Also published as: JPH09308614A

Description

【０００１】
【発明の属する技術分野】
本発明は運転者の疲労度・覚醒度または熟練度などの心身状態をモニターする技術に関する。また、本発明は、運転者のモニターされた情報を基に安全運転を支援する為の技術に関する。
【０００２】
【従来の技術】
車両内での運転者のモニタリングは、居眠りや疲労による集中力低下で起こる交通事故を未然に防ぐという意味で大変重要な技術である。運転者のモニタリング方法としてとして、これまでに様々な生体情報の検出技術が考案されてきた。生体信号を直接利用する場合の検出対象としては、心電情報や脈拍といった循環器系の情報に関連するもの（特開平４−１８３４３９号公報等）、瞬きや瞼の開閉など目の動きに関するもの（実開平１−１２５０３号公報等）、ステアリングの操舵状態に関するもの（特公昭６２−３４２１４号公報等）、運転中の姿勢に関するもの（特開平３−１５７５９８号公報等）などがあげられる。これ以外に、前方の車両との車間距離の変化（特開平５−１６２５６２号公報等）や、運転開始時からの経過時間により推定するもの（実公昭６３−２７２３２号公報等）などがある。このうち心電情報などの循環器系情報は、自律神経の働きを反映した指標として運転者の心身状態をより正確に推定する場合に有効であろう。
【０００３】
例えば特開平４−１８３４３９号公報ではステアリングホイールから心電図を検出する技術が開示されている。図４において、ステアリングホイール２０には、一対の電極２１ａと２１ｂが互いに分離した状態で配設されている。電極２１の信号は増幅器２２で増幅され、Ａ／Ｄ変換器２３によりデジタルに変換された後、ＣＰＵ２４に送られるよう構成されている。また、ＣＰＵ２４はＲＯＭ２５、ＲＡＭ２６、出力装置２７の為のインタフェース２８とバスを介して接続されている。
【０００４】
上記構成において、運転者がステアリングホイール２０を操作するとき、電極２１ａおよび２１ｂと接触することになるので心電信号が検出される。心電信号は増幅器２２により適当なレベルに増幅される。続いてＡ／Ｄ変換器２３でＡ／Ｄ変換されてＣＰＵ２４に送られる。送られたデータは、ＲＡＭ２６上にいったん保持される。ＣＰＵ２４はＲＯＭ２５に格納されているプログラムに従い処理を行う。すなわち、心電信号より最も高いヒークを持つ波であるＲ波の間隔を求め、さらにその移動平均とばらつきを算出する。覚醒度がこれらの値と相関を持つことから判断基準を設け、その基準に基づいて居眠りを検出すると、出力装置より運転者に警告が与えられる。
【０００５】
居眠りの検知では、心電ではなく例えば特開平２−６２３１号公報などのように脈波を用いる場合もある。また演算部分の処理方法としては、平均やばらつき以外に特開平１−１３１６４８号公報にあるようにフーリエ変換による周波数解析を行って特定の周波数帯域からのパワーから覚醒度を推定するものもある。
【０００６】
一方、Ｒ−Ｒ間隔のデータ処理にカオス理論を用いた非線形処理の方法が近年注目されるようになってきた。例えば特開平４−２０８１３６号公報によれば、脈波および心拍信号に対してそれらがカオスであるという条件を満たしているか否かをもって健康状態の診断を行う技術が開示されている。これは健康な生体から得られる脈波や心拍信号にはカオスがあるとされている知見を利用したものである。あるデータがカオスであるためには、非整数のフラクタル次元を持つこと、最大リアプノフ数が正であることなどの条件が一般によく用いられている。
【０００７】
【発明が解決しようとする課題】
従来の、車載用の運転者モニタリング技術において居眠りを検知する為のものにはそれぞれいくつかの課題がある。
【０００８】
まず目の動きを検知する方式については、運転者がサングラスなどをかけていると瞼の検出が出来なくなることがある。これを避けるために特別の眼鏡を運転者がかけなければならないという面倒もある。
【０００９】
また操舵状態から推定するものについては、高速運転時は有効であるといえよう。しかし、渋滞時ではほとんど操舵を行わない時間帯がことから居眠りを検出するのは困難になる。実際はこうした時間帯に覚醒度がさがり、小さな接触事故などを起こし易くなる。
【００１０】
運転中の姿勢をチェックする方式においては、居眠りと関連のある姿勢変化が生じた時点では既にかなり危険な状態であることが推測される。事故の未然防止という目的からすると、本来は姿勢変化などのはっきりとした症状が起こる前の状態を検知するべきである。
【００１１】
これらの課題からみると、心電情報や脈拍といった指標を用いる方式は、運転者の居眠りに至る前の覚醒状態も含んだいわゆる心身状態を推定するのに適した方式であるといえる。しかし、この方式についても従来技術においてはいくつかの課題がある。
【００１２】
第１に、心拍数や周波数解析によるパワーの積分値に対して閾値を設けて判断する方法では、個人差に対応することが難しい。心拍は確かに覚醒レベルによって変動するが、その変動幅は人によってかなり小さいことがあり正しい推定が得られない場合がある。同様に、パワーを積分する際に対象となる周波数帯域を固定してしまう場合も同じ課題が生じる。
【００１３】
第２に、概日リズムが考慮されていない。ヒトには約２４時間の概日リズムが存在し、心拍のＲ波の間隔（Ｒ−Ｒ間隔）もこのリズムの支配を受けて一日の中で変動している。従って、運転する時間帯によって心拍変動のベースラインは異なってくるのであるが、従来技術にはこの変化に配慮した判定アルゴリズムは認められない。
【００１４】
本発明は上記課題を解決するもので、その目的は、時刻情報を利用することにより、概日リズムによる生体信号のベースラインの変化についても配慮して心身状態を判定することである。
【００１５】
【課題を解決するための手段】
本発明は上記目的を達成するため第１の解決手段として、運転中の時刻を出力する計時手段と、運転者の生体信号を検出する生体信号検出手段と、前記生体信号検出手段により検出された生体信号が含む情報を定量化する演算手段と、運転者の生体情報から疲労度を判定するための判定基準を一日の時間帯ごとに予め記憶してある記憶手段と、前記計時手段からの時刻情報より前記記憶手段を参照して得られた判定基準を用いて前記演算手段による演算結果の変化から運転者の心身状態を判定する判定手段とを備えた構成としてある。
【００１６】
第２の構成手段として、運転者の起床時刻を入力する入力手段を設けた計時手段と、運転者の生体信号を検出する生体信号検出手段と、前記生体信号検出手段により検出された生体信号が含む情報を定量化する演算手段と、運転者の生体情報から疲労度を判定するための判定基準を一日の時間帯ごとに予め記憶してある記憶手段と、前記計時手段に入力された起床時からの経過時間より前記記憶手段を参照して得られた判定基準を用いて前記演算手段による演算結果の変化から運転者の心身状態を判定する判定手段とを備えた構成としてある。
【００１７】
第３の構成手段として、上記生体信号検知手段は、心臓の拍動に伴い生体表面の振動を検出することを特徴とする。
【００１８】
第４の構成手段として、上記構成の運転者モニター装置からの運転者の心身状態に関する情報を運転者に報知する報知手段を備えた構成としてある。
【００１９】
【発明の実施の形態】
上記の解決手段において、計時手段は現在時刻を示し、記憶手段には一日の時間帯ごとに判定手段が運転者の心身状態を判定するための基準情報が格納されている。判定手段は演算手段の演算結果に対して、計時手段からの時刻に基づいて記憶手段を参照して得られた判定基準を用いて心身状態を判定するので、生物リズムの影響を考慮した判定が可能になる。
【００２０】
また上記の解決手段において、運転者モニター装置からの運転者の心身状態に関する情報を、報知手段が運転者にフィードバックすることにより運転者は自分の状態を自覚して安全運転を行うことが出来る。
【００２１】
以下本発明の実施例について図面を用いて説明する。
【００２２】
図１は本発明の第１の実施例の構成を示すブロック図である。運転者１は運転座席２に座っている。運転座席２の内部には生体信号検出手段３が配設されている。生体信号検出手段３の出力は、演算手段４に接続し、さらに演算手段４から判定手段５に接続されている。
【００２３】
上記構成において、生体信号検出手段３は運転者１の臀部から運転者１の心機図を検出する。心機図とは心臓の拍動に伴う体表面の振動で、薄膜加工されたポリフッ化ビニリデンなどの高感度の圧力センサを用いれば容易にセンシングできる。得られた心機図から、ピーク間間隔を求めることにより、ほぼ心拍に対応した系列データを得ることが出来る。
【００２４】
このデータをスプライン曲線などで補完して時系列データとして扱い周波数解析をすると、１／ｆ様のゆらぎが認められることが知られている。これは、心拍間隔データに非線形成分が含まれていることを示唆している。演算手段４は、生体信号検出手段３が検出したデータについてカオス理論に基づく指標を求め、このデータが持つゆらぎを数値化する。カオス指標としては、相関次元（フラクタル次元）やリアプノフ指数などがあるが、ここではリアプノフ指数を例として説明する。
【００２５】
演算手段２において、心拍間隔データは５分ごとの単位に切り分けられる。切り分けられた５分単位の心拍間隔系列に対して、リアプノフ指数が求められる。ここでの５分という時間は絶対的なものではない。
【００２６】
リアプノフ指数を求める手順を以下に示す。リアプノフ指数とは、時間の経過に伴ってアトラクタ上の近接する点がどの程度離れるかを表す指標で、もととなるデータの将来の予測しにくさを表している。これはカオスの特徴の一つである初期値依存性と深く関わっている。アトラクタとは、ｎ次元空間における系の軌道を表すものもである。心拍間隔など一次元のデータ系列に対しては、
Ｘ(t1),Ｘ(t2),・・・・,Ｘ(ti),・・・・
に対して、これをｎ次元相空間に対してＮポイントのデータを埋め込むために以下のようなデータセットを用意する。
【００２７】
｛Ｘ(t1),Ｘ(t1+τ),・・・・,Ｘ(t1+(n-1)τ)｝
｛Ｘ(t2),Ｘ(t2+τ),・・・・,Ｘ(t2+(n-1)τ)｝
・・・・・
｛Ｘ(ti),Ｘ(ti+τ),・・・・,Ｘ(ti+(n-1)τ)｝
・・・・・
｛Ｘ(tN),Ｘ(tN+τ),・・・・,Ｘ(tN+(n-1)τ)｝
ここでｉ番目の点を、
Ｘin＝｛Ｘ(ti),Ｘ(ti+τ),・・・・,Ｘ(ti+(n-1)τ)｝
と表わすことができる。
【００２８】
この様にして得られたアトラクタ上のある点Ｘ(0)を基準としたとき、その軌道上の次の点Ｘ(1)についてベクトルＸ(0)Ｘ(1)に直交し、単位距離だけ離れた点をＹ０（０）とする。Ｘ（０）、Ｙ０（０）についてτ時間経過したときの点を、Ｘ（τ）、Ｙ０（τ）とする。そしてＸ（０）とＹ０（０）の距離をｄ０（０）、Ｘ（τ）とＹ０（τ）の距離をｄ０（τ）とする。このときの２点間の距離のτ時間経過後の拡大（縮小）率は、ｄ０（τ）をｄ０（０）で割ることにより求められる。
【００２９】
次に、Ｘ（τ）とＹ０（τ）と同一方向で単位距離だけ離れた点をＹ１（０）とする。Ｘ（τ）、Ｙ１（０）についてτ時間経過したときの点を、Ｘ（２τ）、Ｙ１（τ）とする。そしてＸ（τ）とＹ１（０）の距離をｄ１（０）、Ｘ（２τ）とＹ１（τ）の距離をｄ１（τ）とする。このときの２点間の距離のτ時間経過後の拡大（縮小）率は、ｄ１（τ）をｄ１（０）で割ることにより求められる。
【００３０】
このステップを繰り返し、各ステップで求められる距離の拡大（縮小）率の平均がリアプノフ指数である。これを一般化すると次のように表すことができる。
【００３１】
【数１】

【００３２】
なお、埋め込み次元が例えば３次元であれば、各次元ごとに計三つのリアプノフ指数が得られるが、そのうち最大のものを特に最大リアプノフ指数という。
【００３３】
図２は、健常な男性の心拍間隔について１５分を単位として最大リアプノフ指数の変化を示したものである。横軸は経過時間で単位は分である。運転開始と共にリアプノフ指数は低下し、休憩をとることによって再び上昇するというリズムが繰り返されていることがわかる。運転開始直後と、最初に渋滞に巻き込まれた時間帯ではその低下が著しい。心拍数についても、同様にプロットしている。リアプノフ指数と心拍数には負の相関がある。しかし、二つの指標の間には変化率に関してその解像度に大きな隔たりがあることがわかる。例えば、二度目の休憩の後の運転再開時には、最大リアプノフ数の方は大きく減少しているのに、心拍数の方は僅かな上昇しか見られない（二つの指数の間では単位は異なっているが、おのおのの軸の目盛りは等しい割合でとっているので、このまま視覚的な形で比較しても問題はない）。以上のことから、従来技術に対するカオス指標を用いた本発明の優位性は明らかであろう。
【００３４】
次に、判定手段５は演算手段４が求めたカオス指標を用いて運転者１の心身状態を判定する。ここでいう心身状態の判定とは、長時間の運転による疲労や渋滞に巻き込まれた場合のストレスの影響度を意味する。心拍のゆらぎは自律神経系に支配されており、これは交感神経系と副交感神経系の二重支配を受けている。交感神経系が活性化すると、心拍数は上昇し生体にとって活動に適した状態になる。副交感神経系が活性化すると、心拍数は下降する。生体においてはそれぞれの神経系が独立に作用してるのではなく、相互に求心性を持ちながら活動している。このフィードバック機能を有する拮抗支配が、心拍がカオス的ふるまいをする原因である。従って、どちらか一方の神経系が突出した場合には、カオス指標は小さくなる。この様な事態は、運転によるストレス負荷によって生じる。
【００３５】
判定手段５は、カオス指標の変化の微分値を求めこれを判定の基準とする。すなわち、一定時間以上リアプノフ指数が減少（微分値が負）した場合に、運転者には休憩が必要な程度にストレス負荷が生じていると判断する。このときの時間は、例えば１５分程度とすればよいが運転者に応じて任意の時間に設定してもよい。
【００３６】
なお、判定基準としては負の微分値が続く時間以外にも様々な基準を利用することが出来る。例えば、運転開始時のカオス指標との比較や、微分値の絶対値などが基準として考えられよう。本発明ではこれら判定基準に対して何ら拘束するものではない。
【００３７】
以上のように第１の実施例によれば、運転者の状態を判定するのにカオス指標を用いるためより精度の高い判定が可能となるという効果がある。
【００３８】
次に本発明の第２の実施例について説明する。図１において、計時手段６は現在の時刻を出力する。時刻情報は判定手段５に伝わるよう構成されている。また、記憶手段７には各時刻における運転者の心身状態判定の判定基準が格納されている。判定手段５は記憶手段７に対してアクセスできるよう構成されている。
【００３９】
上記構成において、判断手段５は演算手段４が出力するカオス指標に加えて計時手段６からの時刻情報も利用する。生体は、日内変動という生体リズムを有しており、時刻ごとに特徴のある変化を示す。図３は最大リアプノフ指数と心拍数の一日の変化を示したものである。横軸は時刻を表している。このときの被験者は午前７時２０分頃に起床しているが、その前後の時間帯はリアプノフ指数が大きく減少している。また午前中と午後に二つの山が認められる。午後にみられる山については加齢によって消失することがあるといわれている。なお、ここでも心拍数はリアプノフ指数と負の相関を持っているがその変動幅の割合はリアプノフ指数と比較してかなり小さいことがわかるであろう。
【００４０】
このように一日の間でカオス指標のベースラインが大きく変動することを考慮することにより、より正確な判定が出来るようになる。すなわち、起床直後の時間帯では、元々ベースラインが急激に下がる傾向にあるため休憩が必要であるという判断の基準（負の微分値が続く時間）をやや緩くしたり、夕方の比較的安定した時間帯では判断の基準を厳しくしたりする必要がある。記憶手段７には各時間帯に対応する基準が格納されている。
【００４１】
なお、夜間勤務の運転者など人によって生活リズムは様々に異なることが予想されるが、そのような場合には起床時刻を入力する入力手段を設けて計時手段を起床時からの経過時間に置き換えて情報を利用してもよい。
【００４２】
以上のように、第２の実施例によれば時刻情報に基づいて運転者の心身状態を判定するので、生体リズムを考慮した判定が出来るという効果がある。
【００４３】
次に、本発明の第３の実施例について説明する。図１において、監視手段８は運転者１によるハンドル９およびアクセル１０の操作状況を監視する。監視された結果は判定手段５へと送られるよう構成されている。
【００４４】
上記構成において、監視手段８は運転者１の運転の仕方を関する役割を負う。例えば、どれくらいの加速をしているのか、あるいはどれくらいの速度でカーブを曲がったのかといったことは、ハンドル操作とアクセル操作を監視していればわかる。
【００４５】
判定手段５は、監視手段８からの運転内容に関する情報と演算手段４からの生体信号を指標化した結果から運転者の熟練度を判定する。例えば、常に低速で運転しているにもかかわらず心拍の上昇などが見られる場合には、運転者はかなり緊張しておりおそらくは初心者であろうと予測される。逆に、かなり高い運転技術をもって運転していながら生体信号の指標にほとんど変化の見られない運転者については熟練者であろうと判断される。判定する際の運転状態の判断には、多くの運転者を用いて標準化した閾値を求めそれを採用すればよい。
【００４６】
以上のように、第３の実施例によれば運転内容を監視と生体信号の検出を合わせて行うことにより、運転者の熟練度を判定することが出来る。
【００４７】
次に、本発明の第４の実施例について説明する。図１において運転者モニター装置１１からの信号は報知手段１２によって運転者１に報知されるよう構成されている。
【００４８】
上記構成において、運転者モニター装置１１からは運転者の心身状態を表す判定結果、例えばカオス指標に基づいて状態を５段階に分類した結果や、休憩が必要であることを意味する信号が出力される。報知手段１２は、運転者モニター装置１１が出力した信号を、視覚あるいは聴覚的に運転者に伝える。例えば、休憩が必要と判定されたときに警告音により運転者に報知する。
【００４９】
以上のように第４の実施例によれば、運転者の心身状態に関する情報を運転者にフィードバックできるので安全運転を支援できるという効果がある。
【００５０】
次に、本発明の第５の実施例について説明する。図１において制御手段１３は運転者モニター装置１１と接続し、サスペンション１４の硬さを調節できるよう構成されている。
【００５１】
上記構成において、運転者モニター装置１１から運転者の熟練度に関する情報が出力された場合、制御手段１３はサスペンション１４に対し運転者の熟練度に合わせた硬さとなるように調整を行う。例えば、運転者が初心者であると判定された場合にはサスペンション１４を軟らかく設定し、熟練者であると判定された場合には硬くするなどの調整を行う。
【００５２】
もちろん、車両の設定はサスペンションだけではない。本発明においては運転者の熟練度によって変更すべきパラメータのすべてを制御の対象とする。
【００５３】
以上のように、第５の実施例によれば運転者の心身状態や熟練度を制御手段１３に伝えるため、車両を運転者に最適の設定にすることが出来るという効果がある。
【００５４】
次に、本発明の第６の実施例について説明する。図１において制御手段１３は運転者モニター装置１１と接続し、運転対象物である自動車の機器であるハザードランプ１５を点灯できるよう構成されている。
【００５５】
上記構成において、運転者モニター装置１１から運転者の心身状態に関連して運転者の疲労が蓄積されてきていると判断された場合には、制御手段１３はハザードランプ１５を点灯し後続の車両にしばらく後に減速または停止する旨を知らせる。もちろん制御対象はハザードランプ１５のみならず、ブレーキ機構やエンジンに制御をかけ強制的に減速を行うようにしてもよい。この様な制御を行うことにより、運転者の注意低下による事故の発生を未然に防ぐことが出来る。
【００５６】
以上のように、第６の実施例によれば運転者の心身状態や熟練度を制御手段１３に伝えるため、車両を運転者に最適の設定にすることが出来るという効果がある。
【００５７】
【発明の効果】
以上説明したように、本発明の運転者モニター装置とこれを用いた安全装置は次のような効果を持つ。
【００５８】
第１に、時刻情報を利用しその時間帯に応じた心身状態の判定基準を用いることにより、生物リズムを考慮した判定が出来る。
【００５９】
第２に、報知手段を設け運転者モニター装置からの信号を運転者にフィードバックすることが出来るため、運転者の安全運転を支援することが出来る。
【図面の簡単な説明】
【図１】本発明の実施例の構成図
【図２】運転時のカオス指標の変化を示すグラフ
【図３】カオス指標の日内変動を示すグラフ
【図４】従来技術の構成図
【符号の説明】
３生体信号検出手段
４演算手段
５判定手段
６計時手段
７記憶手段
８監視手段
１２報知手段
１３制御手段
１５機器

Claims

運転中の時刻を出力する計時手段と、運転者の生体信号を検出する生体信号検出手段と、前記生体信号検出手段により検出された生体信号が含む情報を定量化する演算手段と、運転者の生体情報から疲労度を判定するための判定基準を一日の時間帯ごとに予め記憶してある記憶手段と、前記計時手段からの時刻情報より前記記憶手段を参照して得られた判定基準を用いて前記演算手段による演算結果の変化から運転者の心身状態を判定する判定手段とを備えた運転者モニター装置。
運転者の起床時刻を入力する入力手段を設けた計時手段と、運転者の生体信号を検出する生体信号検出手段と、前記生体信号検出手段により検出された生体信号が含む情報を定量化する演算手段と、運転者の生体情報から疲労度を判定するための判定基準を一日の時間帯ごとに予め記憶してある記憶手段と、前記計時手段に入力された起床時からの経過時間より前記記憶手段を参照して得られた判定基準を用いて前記演算手段による演算結果の変化から運転者の心身状態を判定する判定手段とを備えた運転者モニター装置。
生体信号検知手段は、心臓の拍動に伴い生体表面の振動を検出することを特徴とした請求項１または２項記載の運転者モニター装置。
請求項１〜３のいずれか１項に記載の運転者モニター装置からの運転者の心身状態に関する情報を運転者に報知する報知手段を備えた安全装置。