JP2003000571A - 覚醒度推定装置および覚醒度推定方法 - Google Patents
覚醒度推定装置および覚醒度推定方法Info
- Publication number
- JP2003000571A JP2003000571A JP2001183028A JP2001183028A JP2003000571A JP 2003000571 A JP2003000571 A JP 2003000571A JP 2001183028 A JP2001183028 A JP 2001183028A JP 2001183028 A JP2001183028 A JP 2001183028A JP 2003000571 A JP2003000571 A JP 2003000571A
- Authority
- JP
- Japan
- Prior art keywords
- time
- blink
- value
- reference value
- frequency distribution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Emergency Alarm Devices (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
Abstract
(57)【要約】
【課題】 所定時間における瞬きデータを利用しかつ固
定閾値を用いず覚醒度を推定する方法を提供する。 【解決手段】 ドライバの瞬き及び瞬き時間を検出し、
検出した瞬き及び瞬き時間に基づいて瞬き時間別度数分
布作成１１０により所定時間における瞬き時間別度数分
布を作成し、基準値設定手段１１１により高覚醒時の所
定時間における瞬き時間別度数分布の分布重心を評価値
基準値とすると共に正規化基準値を設定し、覚醒度推定
手段１１２により所定時間における瞬き時間別度数分布
の分布重心を評価値として、この評価値の評価値基準値
に対する変化を正規化基準値で正規化したものを覚醒度
とする。
定閾値を用いず覚醒度を推定する方法を提供する。 【解決手段】 ドライバの瞬き及び瞬き時間を検出し、
検出した瞬き及び瞬き時間に基づいて瞬き時間別度数分
布作成１１０により所定時間における瞬き時間別度数分
布を作成し、基準値設定手段１１１により高覚醒時の所
定時間における瞬き時間別度数分布の分布重心を評価値
基準値とすると共に正規化基準値を設定し、覚醒度推定
手段１１２により所定時間における瞬き時間別度数分布
の分布重心を評価値として、この評価値の評価値基準値
に対する変化を正規化基準値で正規化したものを覚醒度
とする。
Description
【０００１】
【発明の属する技術分野】この発明は、所定時間におけ
る瞬き時間別度分布を用いて、覚醒度推定を行う装置お
よび方法を提供するものである。
る瞬き時間別度分布を用いて、覚醒度推定を行う装置お
よび方法を提供するものである。
【０００２】
【従来の技術】従来の覚醒度を推定する手法としては、
例えば特開昭６０−５９２号公報、特開平９−２７７８
４９号公報、または特開平１０−２７２９６０号公報等
に記載された技術がある。ここでは、（従来例１）特開
昭６０−５９２号公報、及び（従来例２）特開平９−２
７７８４９号公報の技術について、下記に説明する。
例えば特開昭６０−５９２号公報、特開平９−２７７８
４９号公報、または特開平１０−２７２９６０号公報等
に記載された技術がある。ここでは、（従来例１）特開
昭６０−５９２号公報、及び（従来例２）特開平９−２
７７８４９号公報の技術について、下記に説明する。
【０００３】従来例１．図１５は特開昭６０−５９２号
公報に示された居眠り防止装置のブロック構成図であ
る。図１５の居眠り防止装置は、まばたき信号波形計測
器２２２、パラメータ測定部２２３、覚醒パターン決定
部２２４、距離決定部２２５、比較器２２６、警告音発
生器２２７から構成される。この発明は、眠気が生じる
頃のまばたき信号波形は、波高が小さく、立ち上がり角
度、立ち下がり角度が緩やかでしかも持続時間が短いと
いう特色に着目している。
公報に示された居眠り防止装置のブロック構成図であ
る。図１５の居眠り防止装置は、まばたき信号波形計測
器２２２、パラメータ測定部２２３、覚醒パターン決定
部２２４、距離決定部２２５、比較器２２６、警告音発
生器２２７から構成される。この発明は、眠気が生じる
頃のまばたき信号波形は、波高が小さく、立ち上がり角
度、立ち下がり角度が緩やかでしかも持続時間が短いと
いう特色に着目している。
【０００４】具体的な手法としては、運転者２２１の瞼
又はまばたきに伴って生じる眼球の上下運動をまばたき
波形計測器２２２によって計測し、パラメータ測定部２
２３がその出力信号より運転者のまばたきの波高、立ち
上がり角度、立ち下がり角度、持続時間の４つのパラメ
ータを測定する。計測開始後は、運転者が覚醒状態にあ
るとみなし、例えば計測開始直後から２０回目までのま
ばたき信号波形から、上記４つのパラメータについてそ
れぞれの平均値と分散を求める。覚醒パターン決定部２
２４は、パラメータ測定部２２３で求めた４つのパラメ
ータのそれぞれに対しての平均値と分散から信頼限界９
５％の範囲を求め、それぞれの平均値から信頼区間の端
までの距離を覚醒パターンの距離限界とし、平均値と距
離限界を記録する。次に、２１回目以降のまばたき信号
波形は、パラメータ測定部２２３で４つのパラメータを
測定した後、その出力信号を距離決定部２２５へ送る。
距離決定部２２５では４つのパラメータの各測定値と、
既に定めた覚醒時における４つのパラメータの平均値と
の差を求め、距離と定義する。比較器２２６では各パラ
メータの距離限界と距離とを比較し、いずれか一つの距
離が距離限界よりも大きい場合に眠気が発生したと判断
し、警告音発生器２２７へ出力信号を送出する。
又はまばたきに伴って生じる眼球の上下運動をまばたき
波形計測器２２２によって計測し、パラメータ測定部２
２３がその出力信号より運転者のまばたきの波高、立ち
上がり角度、立ち下がり角度、持続時間の４つのパラメ
ータを測定する。計測開始後は、運転者が覚醒状態にあ
るとみなし、例えば計測開始直後から２０回目までのま
ばたき信号波形から、上記４つのパラメータについてそ
れぞれの平均値と分散を求める。覚醒パターン決定部２
２４は、パラメータ測定部２２３で求めた４つのパラメ
ータのそれぞれに対しての平均値と分散から信頼限界９
５％の範囲を求め、それぞれの平均値から信頼区間の端
までの距離を覚醒パターンの距離限界とし、平均値と距
離限界を記録する。次に、２１回目以降のまばたき信号
波形は、パラメータ測定部２２３で４つのパラメータを
測定した後、その出力信号を距離決定部２２５へ送る。
距離決定部２２５では４つのパラメータの各測定値と、
既に定めた覚醒時における４つのパラメータの平均値と
の差を求め、距離と定義する。比較器２２６では各パラ
メータの距離限界と距離とを比較し、いずれか一つの距
離が距離限界よりも大きい場合に眠気が発生したと判断
し、警告音発生器２２７へ出力信号を送出する。
【０００５】従来例２．図１６は特開平９−２７７８４
９号公報に示された覚醒度推定装置の全体構成を示す図
である。図１６の覚醒度推定装置は、ＴＶカメラ３０
２、ディスプレイ３０３、スピーカ３０４、画像処理部
３１０、瞬き閾値算出部３２０、長い瞬き比率算出部３
３０、長い瞬き比率表示部３４０、警報出力部３２７、
瞬き閾値タイマ３６０、瞬き比率算出用タイマ３７０、
全体制御部３８０から構成される。この発明は、人間の
瞬きの時間には個人差があるが、一般的には覚醒度が低
下するに従って瞬き時間が長くなることに着目してい
る。
９号公報に示された覚醒度推定装置の全体構成を示す図
である。図１６の覚醒度推定装置は、ＴＶカメラ３０
２、ディスプレイ３０３、スピーカ３０４、画像処理部
３１０、瞬き閾値算出部３２０、長い瞬き比率算出部３
３０、長い瞬き比率表示部３４０、警報出力部３２７、
瞬き閾値タイマ３６０、瞬き比率算出用タイマ３７０、
全体制御部３８０から構成される。この発明は、人間の
瞬きの時間には個人差があるが、一般的には覚醒度が低
下するに従って瞬き時間が長くなることに着目してい
る。
【０００６】具体的な手法としては、ＴＶカメラ３０２
にて撮像入力される顔画像を画像処理部３１０にて認識
処理を行い、例えば瞼の経時的変化（開閉）からその瞬
きを検出する。瞬きが検出される都度、その閉眼開始か
らその終了までの閉眼時間で示される瞬きの時間を検出
する。瞬き閾値算出部３２０では、上記画像処理によっ
て検出される瞬きの情報に従って、運転者の標準的な瞬
き時間よりも時間の長い瞬きを検出するための判定閾値
を設定する。その設定方法は、運転開始初期における所
定期間において検出される瞬き時間を順次記憶し、さら
に記憶された瞬き時間に従ってその頻度分布を求め、頻
度分布に基づいて判定閾値を設定する。長い瞬き比率演
算部３４０は、設定された判定閾値に基づき、画像処理
部３１０で検出される全ての瞬き回数に対する、標準的
な瞬き時間よりも時間の長い瞬きの回数の比率ＬＢＲを
求める。覚醒度推定はＬＢＲに基づいて推定し、覚醒度
低下時には警報を行う。前記瞬き閾値算出部３２０で設
定される判定閾値は、以下のように算出する。瞬き閾値
算出部３２０では、高覚醒時における瞬き時間の頻度分
布から、その最頻値に対してＸ％となる位置で頻度分布
をスライスしたときの時間範囲を、その個人に固有な標
準的な瞬き時間の範囲（＝標準的な瞬き時間の分布領域
の時間幅Ａ）とし、時間幅Ａの中心値を標準的な瞬き時
間Ｔｃとする。そしてＴｃよりも一定時間以上の長い瞬
き（例えば、時間幅ＡのＹ％）を、その個人固有の時間
の長い瞬きとして判定する。長い瞬き生起比率計算部で
は、例えば長い瞬き検出部にて評価された瞬きの全回数
と長い瞬きの数をそれぞれ計数し、所定期間における瞬
きの総数とその瞬き中の長い瞬きの回数とから、長い瞬
きの生起比率を求める。覚醒度評価値は所定時間におけ
る長い瞬きの生起比率で表される。
にて撮像入力される顔画像を画像処理部３１０にて認識
処理を行い、例えば瞼の経時的変化（開閉）からその瞬
きを検出する。瞬きが検出される都度、その閉眼開始か
らその終了までの閉眼時間で示される瞬きの時間を検出
する。瞬き閾値算出部３２０では、上記画像処理によっ
て検出される瞬きの情報に従って、運転者の標準的な瞬
き時間よりも時間の長い瞬きを検出するための判定閾値
を設定する。その設定方法は、運転開始初期における所
定期間において検出される瞬き時間を順次記憶し、さら
に記憶された瞬き時間に従ってその頻度分布を求め、頻
度分布に基づいて判定閾値を設定する。長い瞬き比率演
算部３４０は、設定された判定閾値に基づき、画像処理
部３１０で検出される全ての瞬き回数に対する、標準的
な瞬き時間よりも時間の長い瞬きの回数の比率ＬＢＲを
求める。覚醒度推定はＬＢＲに基づいて推定し、覚醒度
低下時には警報を行う。前記瞬き閾値算出部３２０で設
定される判定閾値は、以下のように算出する。瞬き閾値
算出部３２０では、高覚醒時における瞬き時間の頻度分
布から、その最頻値に対してＸ％となる位置で頻度分布
をスライスしたときの時間範囲を、その個人に固有な標
準的な瞬き時間の範囲（＝標準的な瞬き時間の分布領域
の時間幅Ａ）とし、時間幅Ａの中心値を標準的な瞬き時
間Ｔｃとする。そしてＴｃよりも一定時間以上の長い瞬
き（例えば、時間幅ＡのＹ％）を、その個人固有の時間
の長い瞬きとして判定する。長い瞬き生起比率計算部で
は、例えば長い瞬き検出部にて評価された瞬きの全回数
と長い瞬きの数をそれぞれ計数し、所定期間における瞬
きの総数とその瞬き中の長い瞬きの回数とから、長い瞬
きの生起比率を求める。覚醒度評価値は所定時間におけ
る長い瞬きの生起比率で表される。
【０００７】
【発明が解決しようとする課題】しかしながら、上記従
来例１のように距離限界を用いて瞬き個々に対して覚醒
度推定を行う方法では、各瞬き検出精度に大きく依存す
る。また、上記従来例２のように所定時間における長時
間瞬き回数割合などある指標に対する固定閾値を用いて
覚醒度推定を行う方法の場合、閾値設定を誤ると精度が
非常に悪くなる。また、所定時間に検出した瞬きをその
まま用いて覚醒度の判定を行うと、伏せ目等の誤検出瞬
き等の影響で覚醒度が正しく推定されない場合がある。
更に、システムの検出不良時に、検出良好時と同じ判定
を行う場合も同様に覚醒度が正しく推定されない可能性
がある。
来例１のように距離限界を用いて瞬き個々に対して覚醒
度推定を行う方法では、各瞬き検出精度に大きく依存す
る。また、上記従来例２のように所定時間における長時
間瞬き回数割合などある指標に対する固定閾値を用いて
覚醒度推定を行う方法の場合、閾値設定を誤ると精度が
非常に悪くなる。また、所定時間に検出した瞬きをその
まま用いて覚醒度の判定を行うと、伏せ目等の誤検出瞬
き等の影響で覚醒度が正しく推定されない場合がある。
更に、システムの検出不良時に、検出良好時と同じ判定
を行う場合も同様に覚醒度が正しく推定されない可能性
がある。
【０００８】この発明は、上記のような問題点を解消す
るためになされたものであり、所定時間における瞬きデ
ータを利用し、かつ固定閾値を用いず覚醒度を推定する
方法、あるいは検出した瞬きの信頼性を判定し、その信
頼性に応じて度数重みを変化させ覚醒度を推定する方
法、および検出した瞬き数が覚醒度推定に十分でないと
判断された場合は過去の瞬き情報を再利用し覚醒度を推
定する方法を用いることで、精度良く覚醒度推定を行
う。
るためになされたものであり、所定時間における瞬きデ
ータを利用し、かつ固定閾値を用いず覚醒度を推定する
方法、あるいは検出した瞬きの信頼性を判定し、その信
頼性に応じて度数重みを変化させ覚醒度を推定する方
法、および検出した瞬き数が覚醒度推定に十分でないと
判断された場合は過去の瞬き情報を再利用し覚醒度を推
定する方法を用いることで、精度良く覚醒度推定を行
う。
【０００９】
【課題を解決するための手段】請求項１による覚醒度推
定装置の発明は、被験者の瞬き及び瞬き時間を検出する
瞬き検出手段と、検出した瞬き時間をもとに所定時間に
おける瞬き時間別度数分布を作成する瞬き時間別度数分
布作成手段と、高覚醒時の所定時間における瞬き時間別
度数分布の分布重心を評価値基準値とすると共に正規化
基準値を設定する基準値設定手段と、所定時間における
瞬き時間別度数分布の分布重心を評価値として、この評
価値の上記評価値基準値に対する変化を上記正規化基準
値で正規化したものを覚醒度とする覚醒度推定手段を備
えたことを特徴とする。
定装置の発明は、被験者の瞬き及び瞬き時間を検出する
瞬き検出手段と、検出した瞬き時間をもとに所定時間に
おける瞬き時間別度数分布を作成する瞬き時間別度数分
布作成手段と、高覚醒時の所定時間における瞬き時間別
度数分布の分布重心を評価値基準値とすると共に正規化
基準値を設定する基準値設定手段と、所定時間における
瞬き時間別度数分布の分布重心を評価値として、この評
価値の上記評価値基準値に対する変化を上記正規化基準
値で正規化したものを覚醒度とする覚醒度推定手段を備
えたことを特徴とする。
【００１０】請求項２による覚醒度推定装置の発明は、
被験者の瞬き及び瞬き時間を検出する瞬き検出手段と、
検出した瞬き時間をもとに所定時間における瞬き時間別
度数分布を作成する瞬き時間別度数分布作成手段と、高
覚醒時の所定時間における瞬き時間別度数分布の分布重
心と分散値を定数倍した値の和を評価値基準値とすると
共に、正規化基準値を設定する基準値設定手段と、所定
時間における瞬き時間別度数分布の分布重心と分散値の
定数倍した値の和を評価値として、この評価値の評価値
基準値に対する変化を正規化基準値で正規化したものを
覚醒度とする覚醒度推定手段を備えたことを特徴とす
る。
被験者の瞬き及び瞬き時間を検出する瞬き検出手段と、
検出した瞬き時間をもとに所定時間における瞬き時間別
度数分布を作成する瞬き時間別度数分布作成手段と、高
覚醒時の所定時間における瞬き時間別度数分布の分布重
心と分散値を定数倍した値の和を評価値基準値とすると
共に、正規化基準値を設定する基準値設定手段と、所定
時間における瞬き時間別度数分布の分布重心と分散値の
定数倍した値の和を評価値として、この評価値の評価値
基準値に対する変化を正規化基準値で正規化したものを
覚醒度とする覚醒度推定手段を備えたことを特徴とす
る。
【００１１】請求項３による覚醒度推定装置の発明は、
被験者の瞬き及び瞬き時間を検出する瞬き検出手段と、
検出した瞬き時間をもとに所定時間における瞬き時間別
度数分布を作成する瞬き時間別度数分布作成手段と、高
覚醒時の所定時間における瞬き時間別度数分布の分布重
心と、分布重心より長い瞬きに対する分散値の定数倍し
た値の和を評価値基準値とすると共に、正規化基準値を
設定する基準値設定手段と、所定時間における瞬き時間
別度数分布の分布重心と、分布重心より長い瞬きに対す
る分散値の定数倍した値の和を評価値として、この評価
値の評価値基準値に対する変化を正規化基準値で正規化
したものを覚醒度とする覚醒度推定手段を備えたことを
特徴とする。
被験者の瞬き及び瞬き時間を検出する瞬き検出手段と、
検出した瞬き時間をもとに所定時間における瞬き時間別
度数分布を作成する瞬き時間別度数分布作成手段と、高
覚醒時の所定時間における瞬き時間別度数分布の分布重
心と、分布重心より長い瞬きに対する分散値の定数倍し
た値の和を評価値基準値とすると共に、正規化基準値を
設定する基準値設定手段と、所定時間における瞬き時間
別度数分布の分布重心と、分布重心より長い瞬きに対す
る分散値の定数倍した値の和を評価値として、この評価
値の評価値基準値に対する変化を正規化基準値で正規化
したものを覚醒度とする覚醒度推定手段を備えたことを
特徴とする。
【００１２】請求項４による覚醒度推定装置の発明は、
請求項１から請求項３の発明において、基準値設定手段
が設定する正規化基準値は、高覚醒時の所定時間におけ
る瞬き時間別度数分布の分散値とすることを特徴とす
る。
請求項１から請求項３の発明において、基準値設定手段
が設定する正規化基準値は、高覚醒時の所定時間におけ
る瞬き時間別度数分布の分散値とすることを特徴とす
る。
【００１３】請求項５による覚醒度推定装置の発明は、
請求項１から請求項３の発明において、基準値設定手段
が設定する正規化基準値は、高覚醒時の所定時間におけ
る瞬き時間別度数分布の分布重心より長い瞬きに対する
分散値とすることを特徴とする。
請求項１から請求項３の発明において、基準値設定手段
が設定する正規化基準値は、高覚醒時の所定時間におけ
る瞬き時間別度数分布の分布重心より長い瞬きに対する
分散値とすることを特徴とする。
【００１４】請求項６による覚醒度推定装置の発明は、
請求項１から請求項５の発明において、評価値基準値ま
たは正規化基準値の信頼性を判断する手段を備え、信頼
性が低い場合には評価値基準値または正規化基準値を更
新することを特徴とする。
請求項１から請求項５の発明において、評価値基準値ま
たは正規化基準値の信頼性を判断する手段を備え、信頼
性が低い場合には評価値基準値または正規化基準値を更
新することを特徴とする。
【００１５】請求項７による覚醒度推定装置の発明は、
請求項１から請求項６の発明において、瞬き時間別度数
分布作成手段は、瞬きの信頼度を判定する手段を備え、
信頼度に応じて度数重みを変化させ、所定時間における
瞬き時間別度数分布を作成することを特徴とする。
請求項１から請求項６の発明において、瞬き時間別度数
分布作成手段は、瞬きの信頼度を判定する手段を備え、
信頼度に応じて度数重みを変化させ、所定時間における
瞬き時間別度数分布を作成することを特徴とする。
【００１６】請求項８による覚醒度推定装置の発明は、
請求項１から請求項７の発明において、瞬き時間別度数
分布作成手段は、所定時間中の瞬き回数が覚醒度推定に
十分あるか否かを判定する手段を備え、十分でない場合
には過去の瞬きデータを再利用し、瞬き時間別度数分布
を再作成することを特徴とする。
請求項１から請求項７の発明において、瞬き時間別度数
分布作成手段は、所定時間中の瞬き回数が覚醒度推定に
十分あるか否かを判定する手段を備え、十分でない場合
には過去の瞬きデータを再利用し、瞬き時間別度数分布
を再作成することを特徴とする。
【００１７】請求項９による覚醒度推定方法の発明は、
被験者の瞬き及び瞬き時間を検出する瞬き検出ステップ
と、検出した瞬き時間をもとに所定時間における瞬き時
間別度数分布を作成する瞬き時間別度数分布作成ステッ
プと、高覚醒時の所定時間における瞬き時間別度数分布
の分布重心を評価値基準値とすると共に、正規化基準値
を設定する基準値設定ステップと、所定時間における瞬
き時間別度数分布の分布重心を評価値として、この評価
値の評価値基準値に対する変化を正規化基準値で正規化
したものを覚醒度とする覚醒度推定ステップを備えたこ
とを特徴とする。
被験者の瞬き及び瞬き時間を検出する瞬き検出ステップ
と、検出した瞬き時間をもとに所定時間における瞬き時
間別度数分布を作成する瞬き時間別度数分布作成ステッ
プと、高覚醒時の所定時間における瞬き時間別度数分布
の分布重心を評価値基準値とすると共に、正規化基準値
を設定する基準値設定ステップと、所定時間における瞬
き時間別度数分布の分布重心を評価値として、この評価
値の評価値基準値に対する変化を正規化基準値で正規化
したものを覚醒度とする覚醒度推定ステップを備えたこ
とを特徴とする。
【００１８】請求項１０による覚醒度推定方法の発明
は、被験者の瞬き及び瞬き時間を検出する瞬き検出ステ
ップと、検出した瞬き時間をもとに所定時間における瞬
き時間別度数分布を作成する瞬き時間別度数分布作成ス
テップと、高覚醒時の所定時間における瞬き時間別度数
分布の分布重心と、分散値を定数倍した値の和を評価値
基準値とすると共に、正規化基準値を設定する基準値設
定ステップと、所定時間における瞬き時間別度数分布の
分布重心と、分散値の定数倍した値の和を評価値とし
て、この評価値の評価値基準値に対する変化を正規化基
準値で正規化したものを覚醒度とする覚醒度推定ステッ
プを備えたことを特徴とする。
は、被験者の瞬き及び瞬き時間を検出する瞬き検出ステ
ップと、検出した瞬き時間をもとに所定時間における瞬
き時間別度数分布を作成する瞬き時間別度数分布作成ス
テップと、高覚醒時の所定時間における瞬き時間別度数
分布の分布重心と、分散値を定数倍した値の和を評価値
基準値とすると共に、正規化基準値を設定する基準値設
定ステップと、所定時間における瞬き時間別度数分布の
分布重心と、分散値の定数倍した値の和を評価値とし
て、この評価値の評価値基準値に対する変化を正規化基
準値で正規化したものを覚醒度とする覚醒度推定ステッ
プを備えたことを特徴とする。
【００１９】請求項１１による覚醒度推定方法の発明
は、被験者の瞬き及び瞬き時間を検出する瞬き検出ステ
ップと、検出した瞬き時間をもとに所定時間における瞬
き時間別度数分布を作成する瞬き時間別度数分布作成ス
テップと、高覚醒時の所定時間における瞬き時間別度数
分布の分布重心と、分布重心より長い瞬きに対する分散
値の定数倍した値の和を評価値基準値とすると共に、正
規化基準値を設定する基準値設定ステップと、所定時間
における瞬き時間別度数分布の分布重心と、分布重心よ
り長い瞬きに対する分散値の定数倍した値の和を評価値
として、この評価値の評価値基準値に対する変化を正規
化基準値で正規化したものを覚醒度とする覚醒度推定ス
テップを備えたことを特徴とする。
は、被験者の瞬き及び瞬き時間を検出する瞬き検出ステ
ップと、検出した瞬き時間をもとに所定時間における瞬
き時間別度数分布を作成する瞬き時間別度数分布作成ス
テップと、高覚醒時の所定時間における瞬き時間別度数
分布の分布重心と、分布重心より長い瞬きに対する分散
値の定数倍した値の和を評価値基準値とすると共に、正
規化基準値を設定する基準値設定ステップと、所定時間
における瞬き時間別度数分布の分布重心と、分布重心よ
り長い瞬きに対する分散値の定数倍した値の和を評価値
として、この評価値の評価値基準値に対する変化を正規
化基準値で正規化したものを覚醒度とする覚醒度推定ス
テップを備えたことを特徴とする。
【００２０】請求項１２による覚醒度推定方法の発明
は、請求項９から請求項１１の発明において、基準値設
定ステップにおける正規化基準値は、高覚醒時の所定時
間における瞬き時間別度数分布の分散値とすることを特
徴とする。
は、請求項９から請求項１１の発明において、基準値設
定ステップにおける正規化基準値は、高覚醒時の所定時
間における瞬き時間別度数分布の分散値とすることを特
徴とする。
【００２１】請求項１３による覚醒度推定方法の発明
は、請求項９から請求項１１の発明において、基準値設
定ステップにおける正規化基準値は、高覚醒時の所定時
間における瞬き時間別度数分布の分布重心より長い瞬き
に対する分散値とすることを特徴とする。
は、請求項９から請求項１１の発明において、基準値設
定ステップにおける正規化基準値は、高覚醒時の所定時
間における瞬き時間別度数分布の分布重心より長い瞬き
に対する分散値とすることを特徴とする。
【００２２】請求項１４による覚醒度推定方法の発明
は、請求項９から請求項１３の発明において、基準値設
定ステップは、評価値基準値または正規化基準値の信頼
性を判断するステップを備え、信頼性が低い場合には評
価値基準値または正規化基準値を更新することを特徴と
する。
は、請求項９から請求項１３の発明において、基準値設
定ステップは、評価値基準値または正規化基準値の信頼
性を判断するステップを備え、信頼性が低い場合には評
価値基準値または正規化基準値を更新することを特徴と
する。
【００２３】請求項１５による覚醒度推定方法の発明
は、請求項９から請求項１４の発明において、瞬き時間
別度数分布作成ステップは、瞬きの信頼度を判定するス
テップを備え、信頼度に応じて度数重みを変化させ、所
定時間における瞬き時間別度数分布を作成することを特
徴とする。
は、請求項９から請求項１４の発明において、瞬き時間
別度数分布作成ステップは、瞬きの信頼度を判定するス
テップを備え、信頼度に応じて度数重みを変化させ、所
定時間における瞬き時間別度数分布を作成することを特
徴とする。
【００２４】請求項１６による覚醒度推定方法の発明
は、請求項９から請求項１５の発明において、瞬き時間
別度数分布作成ステップは、所定時間中の瞬き回数が覚
醒度推定に十分あるか否かを判定するステップを備え、
十分でない場合には過去の瞬きデータを再利用し、瞬き
時間別度数分布を再作成することを特徴とする。
は、請求項９から請求項１５の発明において、瞬き時間
別度数分布作成ステップは、所定時間中の瞬き回数が覚
醒度推定に十分あるか否かを判定するステップを備え、
十分でない場合には過去の瞬きデータを再利用し、瞬き
時間別度数分布を再作成することを特徴とする。
【００２５】
【発明の実施の形態】実施の形態１．以下、この発明の
実施の形態１を図に基づいて説明する。図１はこの発明
の実施の形態１による覚醒度推定装置の概要を示すブロ
ック構成図である。
実施の形態１を図に基づいて説明する。図１はこの発明
の実施の形態１による覚醒度推定装置の概要を示すブロ
ック構成図である。
【００２６】図１において、覚醒度推定装置は、ドライ
バ等の顔画像を撮像するＣＣＤカメラ等の撮像手段１
と、撮像手段１により取り込まれた画像データを記憶す
る画像メモリ２と、画像メモリ２の記憶データに基づい
て画像処理を行う処理部１０と、処理部１０の画像処理
結果に基づいてドライバ等に注意を促す警報部２０とで
概略構成される。
バ等の顔画像を撮像するＣＣＤカメラ等の撮像手段１
と、撮像手段１により取り込まれた画像データを記憶す
る画像メモリ２と、画像メモリ２の記憶データに基づい
て画像処理を行う処理部１０と、処理部１０の画像処理
結果に基づいてドライバ等に注意を促す警報部２０とで
概略構成される。
【００２７】図２は撮像手段１（ＣＣＤカメラ等）から
出力された画像データの一例１０１を示す図である。
出力された画像データの一例１０１を示す図である。
【００２８】図３は図１の処理部１０内の処理を行うブ
ロック図であり、顔画像入力手段１１と、目画像抽出手
段１２と、瞬き検出手段１３と、覚醒度判定手段１４と
から構成される。
ロック図であり、顔画像入力手段１１と、目画像抽出手
段１２と、瞬き検出手段１３と、覚醒度判定手段１４と
から構成される。
【００２９】図３において、まず、顔画像入力手段１１
により画像メモリ２から顔画像データを処理部１０に入
力する。次に、入力された画像内で目画像抽出手段１２
により目候補を抽出し、瞬き検出手段１３により瞬きお
よび瞬き時間を推定する。更に、瞬き検出手段１３によ
り推定した瞬き時間から覚醒度判定手段１４によりドラ
イバの覚醒度を判定する。覚醒度判定手段１４により覚
醒度低下と判断された場合は警報部２０より警報を発し
てドライバに注意を促す。以下、各手段について詳細を
説明する。
により画像メモリ２から顔画像データを処理部１０に入
力する。次に、入力された画像内で目画像抽出手段１２
により目候補を抽出し、瞬き検出手段１３により瞬きお
よび瞬き時間を推定する。更に、瞬き検出手段１３によ
り推定した瞬き時間から覚醒度判定手段１４によりドラ
イバの覚醒度を判定する。覚醒度判定手段１４により覚
醒度低下と判断された場合は警報部２０より警報を発し
てドライバに注意を促す。以下、各手段について詳細を
説明する。
【００３０】図４及び図５は処理部１０の説明図であ
る。瞬き検出は、図２に示すような入力画像１０１より
目画像抽出手段１２を用いて図４に示すような目画像領
域１０２を抽出し、目画像領域を２値化画像変換した後
に行う。ここでは、２値化された目画像の黒色画素群の
中心を通る回帰直線１０３に対する相関値を評価関数と
し、開または閉を判定する。図５のａは開、図５のｂは
閉を示す図である。図５のｂに示すように、閉の場合に
は目を示す黒色画素が直線に近づくので、回帰直線１０
３と目画像を示す黒色画素の相関値が高くなる。また、
図５のｃは評価関数値を表す。図５のｃにおける閾値ｔ
ｈより評価関数が大きければ開、小さければ閉と判定す
る。
る。瞬き検出は、図２に示すような入力画像１０１より
目画像抽出手段１２を用いて図４に示すような目画像領
域１０２を抽出し、目画像領域を２値化画像変換した後
に行う。ここでは、２値化された目画像の黒色画素群の
中心を通る回帰直線１０３に対する相関値を評価関数と
し、開または閉を判定する。図５のａは開、図５のｂは
閉を示す図である。図５のｂに示すように、閉の場合に
は目を示す黒色画素が直線に近づくので、回帰直線１０
３と目画像を示す黒色画素の相関値が高くなる。また、
図５のｃは評価関数値を表す。図５のｃにおける閾値ｔ
ｈより評価関数が大きければ開、小さければ閉と判定す
る。
【００３１】図６は覚醒度判定手段１４の詳細を示すブ
ロック図である。また、図７及び図８は覚醒度判定手段
の説明図である。図６に示すように覚醒度判定手段１４
は、瞬き時間別度数分布作成手段１１０、基準値設定手
段１１１、覚醒度推定手段１１２から構成される。瞬き
時間別度数分布作成手段１１０は、図７に示すように基
準値設定または覚醒度推定に十分な所定時間Ｔ０または
Ｔ［分］の全瞬きに対し、瞬き時間別に度数分布１１３
を作成する。
ロック図である。また、図７及び図８は覚醒度判定手段
の説明図である。図６に示すように覚醒度判定手段１４
は、瞬き時間別度数分布作成手段１１０、基準値設定手
段１１１、覚醒度推定手段１１２から構成される。瞬き
時間別度数分布作成手段１１０は、図７に示すように基
準値設定または覚醒度推定に十分な所定時間Ｔ０または
Ｔ［分］の全瞬きに対し、瞬き時間別に度数分布１１３
を作成する。
【００３２】次に、基準値設定が行われていない場合は
基準値設定手段１１１による基準値設定を行い、既に基
準値設定が行われている場合は覚醒度推定手段１１２に
より覚醒度推定を行う。システム動作後即時はドライバ
が覚醒状態であると仮定し、基準値設定手段１１１は、
下記の式Ｓ０１（所定時間Ｔにおける瞬き時間別度数分
布における分布重心である時間Ｊを求める式）により、
例えばシステム起動から所定時間Ｔ０（例えば３分間）
における時間Ｊ０（ＮＴＳＣ信号の１Ｆｒａｍｅ＝３３
ｍｓｅｃを単位時間とする）を求め、時間Ｊ０を評価値
基準値Ｈ０とする。また、下記の式Ｓ０２（所定時間Ｔ
における瞬き時間度数別分布における分散値Ｂを求める
式）により、システム起動から所定時間Ｔ０における分
散値である時間Ｂ０を求め、正規化基準値Ｋ０として算
出する。
基準値設定手段１１１による基準値設定を行い、既に基
準値設定が行われている場合は覚醒度推定手段１１２に
より覚醒度推定を行う。システム動作後即時はドライバ
が覚醒状態であると仮定し、基準値設定手段１１１は、
下記の式Ｓ０１（所定時間Ｔにおける瞬き時間別度数分
布における分布重心である時間Ｊを求める式）により、
例えばシステム起動から所定時間Ｔ０（例えば３分間）
における時間Ｊ０（ＮＴＳＣ信号の１Ｆｒａｍｅ＝３３
ｍｓｅｃを単位時間とする）を求め、時間Ｊ０を評価値
基準値Ｈ０とする。また、下記の式Ｓ０２（所定時間Ｔ
における瞬き時間度数別分布における分散値Ｂを求める
式）により、システム起動から所定時間Ｔ０における分
散値である時間Ｂ０を求め、正規化基準値Ｋ０として算
出する。
【００３３】一方、覚醒度推定手段１１２でも基準値設
定手段１１１と同様に、下記の式Ｓ０１で表すような所
定時間Ｔの瞬き時間別度数分布における分布重心である
時間Ｊを評価値Ｈとして一定時間間隔で（例えば１０秒
おきに過去Ｔ分のデータをもとに）算出し、下記の式Ｓ
０６のように覚醒度Ｄｒを推定する。一般的には覚醒度
が低下すると長い瞬きが増え、瞬き時間のばらつきが大
きくなる傾向にあることから、図８に示すようにＤｒは
覚醒度が低下するに従って大きくなる。また、高覚醒時
と低覚醒時における分布重心の変化は各個人によって異
なるが、実際の実験結果より分散値が大きい者は覚醒低
下による分布重心のずれが大きいことがわかった。そこ
で正規化基準値Ｋ０を用いて正規化することで、分布重
心における個人差を吸収することが可能である。
定手段１１１と同様に、下記の式Ｓ０１で表すような所
定時間Ｔの瞬き時間別度数分布における分布重心である
時間Ｊを評価値Ｈとして一定時間間隔で（例えば１０秒
おきに過去Ｔ分のデータをもとに）算出し、下記の式Ｓ
０６のように覚醒度Ｄｒを推定する。一般的には覚醒度
が低下すると長い瞬きが増え、瞬き時間のばらつきが大
きくなる傾向にあることから、図８に示すようにＤｒは
覚醒度が低下するに従って大きくなる。また、高覚醒時
と低覚醒時における分布重心の変化は各個人によって異
なるが、実際の実験結果より分散値が大きい者は覚醒低
下による分布重心のずれが大きいことがわかった。そこ
で正規化基準値Ｋ０を用いて正規化することで、分布重
心における個人差を吸収することが可能である。
【００３４】警報部２０では上記で推定した覚醒度Ｄｒ
が所定値以上であれば警報レベルであると判定し、ドラ
イバに注意を促す。但し、上記基準値設定時の瞬き時間
別度数分布を作成する所定時間Ｔ０と、覚醒度推定時の
瞬き時間別度数分布を作成する所定時間Ｔは、同じまた
は異なっても良いものとする。
が所定値以上であれば警報レベルであると判定し、ドラ
イバに注意を促す。但し、上記基準値設定時の瞬き時間
別度数分布を作成する所定時間Ｔ０と、覚醒度推定時の
瞬き時間別度数分布を作成する所定時間Ｔは、同じまた
は異なっても良いものとする。
【００３５】
【数１】
【００３６】以上のように実施の形態１によれば、所定
時間における瞬き検出値を用いることにより個々の瞬き
検出精度に大きく依存することない。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける分布重心の変化を用いることで閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
時間における瞬き検出値を用いることにより個々の瞬き
検出精度に大きく依存することない。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける分布重心の変化を用いることで閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
【００３７】実施の形態２．本実施の形態は、実施の形
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
【００３８】実施の形態２において、基準値設定手段１
１１は、下記の式に示すように、例えばシステム起動か
ら所定時間Ｔ０（例えば３分間）において、瞬き時間別
度数分布の重心である時間Ｊ０、および分散値である時
間Ｂ０を算出し、（Ｊ０＋Ｃ×Ｂ０）を評価値基準値Ｈ
０とし、さらに分散値である時間Ｂ０を正規化基準値Ｋ
０とする。また、覚醒度推定手段１１２でも基準値設定
手段１１１と同様に、所定時間Ｔの瞬き時間別度数分布
の分散値である時間Ｂを算出し、（Ｊ０＋Ｃ×Ｂ）を評
価値Ｈとして、上記の式Ｓ０６により覚醒度Ｄｒを推定
する。なお、上記においてＣは定数とする。
１１は、下記の式に示すように、例えばシステム起動か
ら所定時間Ｔ０（例えば３分間）において、瞬き時間別
度数分布の重心である時間Ｊ０、および分散値である時
間Ｂ０を算出し、（Ｊ０＋Ｃ×Ｂ０）を評価値基準値Ｈ
０とし、さらに分散値である時間Ｂ０を正規化基準値Ｋ
０とする。また、覚醒度推定手段１１２でも基準値設定
手段１１１と同様に、所定時間Ｔの瞬き時間別度数分布
の分散値である時間Ｂを算出し、（Ｊ０＋Ｃ×Ｂ）を評
価値Ｈとして、上記の式Ｓ０６により覚醒度Ｄｒを推定
する。なお、上記においてＣは定数とする。
【００３９】一般的に覚醒度が低下すると長い瞬きが増
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図９に示すようにＤｒは覚醒度が低下するに従って
大きくなる。また、高覚醒時と低覚醒時における分布重
心の変化は各個人によって異なるが、実際の実験結果よ
り分散値が大きい者は覚醒低下による分布重心のずれが
大きいことがわかった。そこで正規化基準値Ｋ０を用い
て正規化することで、分布重心における個人差を吸収す
ることが可能である。
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図９に示すようにＤｒは覚醒度が低下するに従って
大きくなる。また、高覚醒時と低覚醒時における分布重
心の変化は各個人によって異なるが、実際の実験結果よ
り分散値が大きい者は覚醒低下による分布重心のずれが
大きいことがわかった。そこで正規化基準値Ｋ０を用い
て正規化することで、分布重心における個人差を吸収す
ることが可能である。
【００４０】警報部２０では、推定した覚醒度Ｄｒが所
定値以上であれば警報レベルであると判定し、ドライバ
に注意を促す。なお、所定時間Ｔ０の瞬き時間別度数分
布の重心である時間Ｊ０のかわりに、所定時間Ｔの瞬き
時間別度数分布の重心である時間Ｊを用いて、（Ｊ＋Ｃ
×Ｂ）を評価値Ｈとしても良い。
定値以上であれば警報レベルであると判定し、ドライバ
に注意を促す。なお、所定時間Ｔ０の瞬き時間別度数分
布の重心である時間Ｊ０のかわりに、所定時間Ｔの瞬き
時間別度数分布の重心である時間Ｊを用いて、（Ｊ＋Ｃ
×Ｂ）を評価値Ｈとしても良い。
【００４１】
【数２】
【００４２】以上のように実施の形態２によれば、所定
時間における瞬き検出値を用いることで個々の瞬き検出
精度に大きく依存することない。また、固定閾値を用い
ず高覚醒時および低覚醒時の瞬き時間別度数分布におけ
る分布重心の変化を用いることで閾値設定ミスによる誤
判がなくなる。さらに、各被験者における瞬きデータを
用いて正規化することで個人差を吸収し精度よく覚醒度
を推定することができる。
時間における瞬き検出値を用いることで個々の瞬き検出
精度に大きく依存することない。また、固定閾値を用い
ず高覚醒時および低覚醒時の瞬き時間別度数分布におけ
る分布重心の変化を用いることで閾値設定ミスによる誤
判がなくなる。さらに、各被験者における瞬きデータを
用いて正規化することで個人差を吸収し精度よく覚醒度
を推定することができる。
【００４３】実施の形態３．本実施の形態は、実施の形
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
【００４４】実施の形態３において、基準値設定手段１
１１は、例えばシステム起動から所定時間Ｔ０（例えば
３分間）において、瞬き時間別度数分布の重心である時
間Ｊ０、下記の式Ｓ１０で示すような瞬き時間度数別分
布における分布重心である時間Ｊ０よりも長い瞬きに対
する分散値である時間ＢＬを算出し、その和（Ｊ０＋Ｃ
×ＢＬ０）を評価値基準値Ｈ０とし、瞬き時間度数別分
布における分散値である時間Ｂ０を正規化基準値Ｋ０と
して算出する。
１１は、例えばシステム起動から所定時間Ｔ０（例えば
３分間）において、瞬き時間別度数分布の重心である時
間Ｊ０、下記の式Ｓ１０で示すような瞬き時間度数別分
布における分布重心である時間Ｊ０よりも長い瞬きに対
する分散値である時間ＢＬを算出し、その和（Ｊ０＋Ｃ
×ＢＬ０）を評価値基準値Ｈ０とし、瞬き時間度数別分
布における分散値である時間Ｂ０を正規化基準値Ｋ０と
して算出する。
【００４５】また、覚醒度推定手段１１２でも基準値設
定手段１１１と同様に、下記の式Ｓ１０で示すような所
定時間ＴのＪ０よりも長い瞬きに対する分散値である時
間ＢＬを算出し、（Ｊ０＋Ｃ×ＢＬ）を評価値Ｈとし
て、上記の式Ｓ０６のように覚醒度Ｄｒを推定する。な
おＣは定数とする。
定手段１１１と同様に、下記の式Ｓ１０で示すような所
定時間ＴのＪ０よりも長い瞬きに対する分散値である時
間ＢＬを算出し、（Ｊ０＋Ｃ×ＢＬ）を評価値Ｈとし
て、上記の式Ｓ０６のように覚醒度Ｄｒを推定する。な
おＣは定数とする。
【００４６】一般的に覚醒度が低下すると長い瞬きが増
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図１０に示すようにＤｒは覚醒度が低下するに従っ
て大きくなる。また、高覚醒時と低覚醒時における分布
重心の変化は各個人によって異なるが、実際の実験結果
より分散値が大きい者は覚醒低下による分布重心のずれ
が大きいことがわかった。そこで正規化基準値Ｋ０を用
いて正規化することで、分布重心における個人差を吸収
することが可能である。
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図１０に示すようにＤｒは覚醒度が低下するに従っ
て大きくなる。また、高覚醒時と低覚醒時における分布
重心の変化は各個人によって異なるが、実際の実験結果
より分散値が大きい者は覚醒低下による分布重心のずれ
が大きいことがわかった。そこで正規化基準値Ｋ０を用
いて正規化することで、分布重心における個人差を吸収
することが可能である。
【００４７】警報部２０では、推定した覚醒度Ｄｒが所
定値以上であれば警報レベルであると判定し、ドライバ
に注意を促す。なお、所定時間Ｔ０の瞬き時間別度数分
布の重心である時間Ｊ０のかわりに、所定時間Ｔの瞬き
時間別度数分布の重心である時間Ｊを用いて、所定時間
ＴのＪよりも長い瞬きに対する分散値である時間ＢＬを
算出し、（Ｊ＋Ｃ×ＢＬ）を評価値Ｈとしても良い。
定値以上であれば警報レベルであると判定し、ドライバ
に注意を促す。なお、所定時間Ｔ０の瞬き時間別度数分
布の重心である時間Ｊ０のかわりに、所定時間Ｔの瞬き
時間別度数分布の重心である時間Ｊを用いて、所定時間
ＴのＪよりも長い瞬きに対する分散値である時間ＢＬを
算出し、（Ｊ＋Ｃ×ＢＬ）を評価値Ｈとしても良い。
【００４８】
【数３】
【００４９】以上のように実施の形態３によれば、所定
時間における瞬き検出値を用いることで個々の瞬き検出
精度に大きく依存することない。また、固定閾値を用い
ず高覚醒時および低覚醒時の瞬き時間別度数分布におけ
る分布重心の変化を用いることで閾値設定ミスによる誤
判がなくなる。さらに、各被験者における瞬きデータを
用いて正規化することで個人差を吸収し精度よく覚醒度
を推定することができる。
時間における瞬き検出値を用いることで個々の瞬き検出
精度に大きく依存することない。また、固定閾値を用い
ず高覚醒時および低覚醒時の瞬き時間別度数分布におけ
る分布重心の変化を用いることで閾値設定ミスによる誤
判がなくなる。さらに、各被験者における瞬きデータを
用いて正規化することで個人差を吸収し精度よく覚醒度
を推定することができる。
【００５０】実施の形態４．本実施の形態は、実施の形
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
態１における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
【００５１】実施の形態４において、基準値設定手段１
１１は、例えばシステム起動から所定時間Ｔ０（例えば
３分間）において、下記の式に示すように、瞬き時間別
度数分布における分布重心である時間Ｊを評価値基準値
Ｈ０、および瞬き時間度数別分布における分布重心であ
る時間Ｊよりも長い瞬きに対する分散値である時間ＢＬ
０を正規化基準値Ｋ０として算出する。
１１は、例えばシステム起動から所定時間Ｔ０（例えば
３分間）において、下記の式に示すように、瞬き時間別
度数分布における分布重心である時間Ｊを評価値基準値
Ｈ０、および瞬き時間度数別分布における分布重心であ
る時間Ｊよりも長い瞬きに対する分散値である時間ＢＬ
０を正規化基準値Ｋ０として算出する。
【００５２】また、覚醒度推定手段１１２でも基準値設
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布における分布重心である時間Ｊを評価値Ｈとして算出
し、上記の式Ｓ０６のように覚醒度Ｄｒを推定する。な
お、Ｃは定数である。
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布における分布重心である時間Ｊを評価値Ｈとして算出
し、上記の式Ｓ０６のように覚醒度Ｄｒを推定する。な
お、Ｃは定数である。
【００５３】一般的には覚醒度が低下すると長い瞬きが
増え、瞬き時間のばらつきが大きくなる傾向にあること
から、図８に示すようにＤｒは覚醒度が低下するに従っ
て大きくなる。また、高覚醒時と低覚醒時における分布
重心の変化は各個人によって異なるが、実際の実験結果
より分散値が大きい者は覚醒低下による分布重心のずれ
が大きいことがわかった。さらに、分布重心より長い瞬
きに対する分散値の方が、分散値よりも分布重心の変化
と相関がるとがわかった。そこで正規化基準値Ｋ０を用
いて正規化することで、分布重心における個人差をさら
に精度良く吸収することが可能である。従って、推定し
た覚醒度Ｄｒが所定値以上であれば警報レベルであると
判定し、警報部２０にてドライバに注意を促す。
増え、瞬き時間のばらつきが大きくなる傾向にあること
から、図８に示すようにＤｒは覚醒度が低下するに従っ
て大きくなる。また、高覚醒時と低覚醒時における分布
重心の変化は各個人によって異なるが、実際の実験結果
より分散値が大きい者は覚醒低下による分布重心のずれ
が大きいことがわかった。さらに、分布重心より長い瞬
きに対する分散値の方が、分散値よりも分布重心の変化
と相関がるとがわかった。そこで正規化基準値Ｋ０を用
いて正規化することで、分布重心における個人差をさら
に精度良く吸収することが可能である。従って、推定し
た覚醒度Ｄｒが所定値以上であれば警報レベルであると
判定し、警報部２０にてドライバに注意を促す。
【００５４】
【数４】
【００５５】実施の形態５．本実施の形態は、実施の形
態２における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
態２における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
【００５６】実施の形態５において、基準値設定手段１
１１は、下記の式に示すように、例えばシステム起動か
ら所定時間Ｔ０（例えば３分間）において、瞬き時間別
度数分布の重心である時間Ｊ０、および分散値である時
間Ｂ０を算出し、その和（Ｊ０＋Ｃ×Ｂ０）を評価値基
準値Ｈ０とし、さらに瞬き度数分布における重心Ｊ０よ
りも長い瞬きに対する分散値である時間ＢＬ０を正規化
基準値Ｋ０として算出する。
１１は、下記の式に示すように、例えばシステム起動か
ら所定時間Ｔ０（例えば３分間）において、瞬き時間別
度数分布の重心である時間Ｊ０、および分散値である時
間Ｂ０を算出し、その和（Ｊ０＋Ｃ×Ｂ０）を評価値基
準値Ｈ０とし、さらに瞬き度数分布における重心Ｊ０よ
りも長い瞬きに対する分散値である時間ＢＬ０を正規化
基準値Ｋ０として算出する。
【００５７】また、覚醒度推定手段１１２でも基準値設
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布の分散値である時間Ｂを算出し、（Ｊ０＋Ｃ×Ｂ）を
評価値Ｈとして、上記の式Ｓ０６のように覚醒度Ｄｒを
推定する。なお、Ｃは定数である。
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布の分散値である時間Ｂを算出し、（Ｊ０＋Ｃ×Ｂ）を
評価値Ｈとして、上記の式Ｓ０６のように覚醒度Ｄｒを
推定する。なお、Ｃは定数である。
【００５８】一般的に覚醒度が低下すると長い瞬きが増
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図９に示すようにＤｒは覚醒度が低下するに従って
大きくなる。従って、推定した覚醒度Ｄｒが所定値以上
であれば警報レベルであると判定し、警報部２０にてド
ライバに注意を促す。但し、所定時間Ｔ０の瞬き時間別
度数分布の重心である時間Ｊ０のかわりに、所定時間Ｔ
の瞬き時間別度数分布の重心である時間Ｊを用いて、
（Ｊ＋Ｃ×Ｂ）を評価値Ｈとしても良い。
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図９に示すようにＤｒは覚醒度が低下するに従って
大きくなる。従って、推定した覚醒度Ｄｒが所定値以上
であれば警報レベルであると判定し、警報部２０にてド
ライバに注意を促す。但し、所定時間Ｔ０の瞬き時間別
度数分布の重心である時間Ｊ０のかわりに、所定時間Ｔ
の瞬き時間別度数分布の重心である時間Ｊを用いて、
（Ｊ＋Ｃ×Ｂ）を評価値Ｈとしても良い。
【００５９】
【数５】
【００６０】実施の形態６．本実施の形態は、実施の形
態２における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
態２における覚醒度判定手段１４の基準値設定及び覚醒
度推定を下記のように変更したものである。覚醒度判定
手段１４のブロック図は図６と同様である。
【００６１】実施の形態６において、基準値設定手段１
１１は、下記の式に示すように、例えば、システム起動
から所定時間Ｔ０（例えば３分間）において、瞬き時間
別度数分布の重心である時間Ｊ０、瞬き時間度数別分布
における分布重心である時間Ｊ０よりも長い瞬きに対す
る分散値である時間ＢＬ０を算出し、その和（Ｊ０＋Ｃ
×ＢＬ０）を評価値基準値Ｈ０とし、さらにＢＬ０を正
規化基準値Ｋ０として算出する。
１１は、下記の式に示すように、例えば、システム起動
から所定時間Ｔ０（例えば３分間）において、瞬き時間
別度数分布の重心である時間Ｊ０、瞬き時間度数別分布
における分布重心である時間Ｊ０よりも長い瞬きに対す
る分散値である時間ＢＬ０を算出し、その和（Ｊ０＋Ｃ
×ＢＬ０）を評価値基準値Ｈ０とし、さらにＢＬ０を正
規化基準値Ｋ０として算出する。
【００６２】また、覚醒度推定手段１１２でも基準値設
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布における分布重心である時間Ｊよりも長い瞬きに対す
る分散値である時間ＢＬを算出し、その和（Ｊ０＋Ｃ×
ＢＬ）を評価値Ｈとして、上記の式Ｓ０６のように覚醒
度Ｄｒを推定する。なお、Ｃは定数である。
定手段１１１と同様に、所定時間Ｔの瞬き時間別度数分
布における分布重心である時間Ｊよりも長い瞬きに対す
る分散値である時間ＢＬを算出し、その和（Ｊ０＋Ｃ×
ＢＬ）を評価値Ｈとして、上記の式Ｓ０６のように覚醒
度Ｄｒを推定する。なお、Ｃは定数である。
【００６３】一般的に覚醒度が低下すると長い瞬きが増
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図１０に示すように、Ｄｒは覚醒度が低下するに従
って大きくなる。従って、推定した覚醒度Ｄｒが所定値
以上であれば警報レベルであると判定し、警報部２０に
てドライバに注意を促す。但し、所定時間Ｔ０の瞬き時
間別度数分布の重心である時間Ｊ０のかわりに、所定時
間Ｔの瞬き時間別度数分布の重心である時間Ｊを用い
て、所定時間ＴのＪよりも長い瞬きに対する分散値であ
る時間ＢＬを算出し、（Ｊ＋Ｃ×ＢＬ）を評価値Ｈとし
ても良い。
え、瞬き時間のばらつきが大きくなる傾向にあることか
ら、図１０に示すように、Ｄｒは覚醒度が低下するに従
って大きくなる。従って、推定した覚醒度Ｄｒが所定値
以上であれば警報レベルであると判定し、警報部２０に
てドライバに注意を促す。但し、所定時間Ｔ０の瞬き時
間別度数分布の重心である時間Ｊ０のかわりに、所定時
間Ｔの瞬き時間別度数分布の重心である時間Ｊを用い
て、所定時間ＴのＪよりも長い瞬きに対する分散値であ
る時間ＢＬを算出し、（Ｊ＋Ｃ×ＢＬ）を評価値Ｈとし
ても良い。
【００６４】
【数６】
【００６５】実施の形態７．本実施の形態は、実施の形
態１の覚醒度推定手段１４を下記のように変更したもの
である。図１１は実施の形態７による覚醒度推定手段１
４のブロック図である。
態１の覚醒度推定手段１４を下記のように変更したもの
である。図１１は実施の形態７による覚醒度推定手段１
４のブロック図である。
【００６６】実施の形態７では、図１１に示すように、
基準値設定手段１１１において設定された基準値が不適
か否かの基準値正誤判定手段１１４を設ける。基準値正
誤判定手段１１４では、例えば、覚醒度推定手段１１２
により推定された覚醒度Ｄｒが負の値をとる場合、基準
値が実際の値より長めに設定されたと判断し、基準値再
設定手段１１５により再設定を行う。そして再設定され
た正規化基準値および評価値基準値が共に、最初に設定
された正規化基準値および評価値基準値より小（すなわ
ち高覚醒時のもの）である場合に、これらを基準値更新
手段１１６により更新する。これにより覚醒度判定の誤
判定を軽減する。
基準値設定手段１１１において設定された基準値が不適
か否かの基準値正誤判定手段１１４を設ける。基準値正
誤判定手段１１４では、例えば、覚醒度推定手段１１２
により推定された覚醒度Ｄｒが負の値をとる場合、基準
値が実際の値より長めに設定されたと判断し、基準値再
設定手段１１５により再設定を行う。そして再設定され
た正規化基準値および評価値基準値が共に、最初に設定
された正規化基準値および評価値基準値より小（すなわ
ち高覚醒時のもの）である場合に、これらを基準値更新
手段１１６により更新する。これにより覚醒度判定の誤
判定を軽減する。
【００６７】以上のように実施の形態７によれば、評価
基準値および正規化基準値の信頼性を判断するようにし
たので、誤った評価基準値および正規化基準値を用いる
ことによる覚醒度誤判定を減少させることができる。
基準値および正規化基準値の信頼性を判断するようにし
たので、誤った評価基準値および正規化基準値を用いる
ことによる覚醒度誤判定を減少させることができる。
【００６８】実施の形態８．本実施の形態は、実施の形
態１から実施の形態７の覚醒度判定手段１４を下記のよ
うに変更したものである。
態１から実施の形態７の覚醒度判定手段１４を下記のよ
うに変更したものである。
【００６９】画像を用いて瞬きを検出する瞬き検出手段
では、ドライバがメータ視認等のために下を向く動作
（以下、伏せ目と呼ぶ）と通常の瞬きを区別することが
困難な場合がある。伏せ目時間は通常の瞬き時間に比べ
て長い場合が多く、これらを瞬きと判断すると、覚醒度
の誤判定の原因となる。
では、ドライバがメータ視認等のために下を向く動作
（以下、伏せ目と呼ぶ）と通常の瞬きを区別することが
困難な場合がある。伏せ目時間は通常の瞬き時間に比べ
て長い場合が多く、これらを瞬きと判断すると、覚醒度
の誤判定の原因となる。
【００７０】また、太陽光やその他の外乱等により、目
画像がうまく抽出できなかった場合等、通常では考えら
れないような短い瞬きや長い瞬きとして検出される場合
がある。これらも覚醒度の誤判定の原因となる。本実施
の形態ではその解決法の一例をあげる。
画像がうまく抽出できなかった場合等、通常では考えら
れないような短い瞬きや長い瞬きとして検出される場合
がある。これらも覚醒度の誤判定の原因となる。本実施
の形態ではその解決法の一例をあげる。
【００７１】実施の形態８による覚醒度推定手段１４の
ブロック図を図１２に示す。ここでは瞬き時間別度数分
布作成手段１１０に瞬き重み設定手段１１７を設け、瞬
き時間別度数分布を作成する前に、瞬き重み設定手段１
１７により検出された瞬きの信頼性を判定して重みを付
加する。瞬き重み設定手段１１７では、例えば、通常で
は瞬きと考えにくい瞬き時間（ａ：短い瞬き時間、ｂ：
長い瞬き時間、ｃ:伏せ目と考えられる瞬き時間）にお
いて、通常の瞬き度数の重みを１とした場合に、それ以
下の重み（０〜１．０）、例えば下記の表１のような重
みを付加する。これにより覚醒度判定の誤判定を軽減す
る。
ブロック図を図１２に示す。ここでは瞬き時間別度数分
布作成手段１１０に瞬き重み設定手段１１７を設け、瞬
き時間別度数分布を作成する前に、瞬き重み設定手段１
１７により検出された瞬きの信頼性を判定して重みを付
加する。瞬き重み設定手段１１７では、例えば、通常で
は瞬きと考えにくい瞬き時間（ａ：短い瞬き時間、ｂ：
長い瞬き時間、ｃ:伏せ目と考えられる瞬き時間）にお
いて、通常の瞬き度数の重みを１とした場合に、それ以
下の重み（０〜１．０）、例えば下記の表１のような重
みを付加する。これにより覚醒度判定の誤判定を軽減す
る。
【００７２】
【表１】
【００７３】ここでは、重みを各瞬き時間別に固定値と
したが、例えば瞬き時間別度数分布重心等各個人のデー
タを基に可変としても良い。
したが、例えば瞬き時間別度数分布重心等各個人のデー
タを基に可変としても良い。
【００７４】上記のような重みを付加することで、高覚
醒時は、長い瞬きまたは伏せ目区間の瞬き誤検出や伏せ
目による覚醒度推定への悪影響を下げる効果がある。ま
た、標準的な瞬き区間の瞬き誤検出または伏せ目は、重
みは下げなくとも覚醒度推定に影響は ない。低覚醒時
は、長い瞬きまたは伏せ目区間の瞬きの発生率は多くな
り、標準的な区間の瞬きは減少 するため、重みは下げ
ても十分覚醒度推定が可能である。
醒時は、長い瞬きまたは伏せ目区間の瞬き誤検出や伏せ
目による覚醒度推定への悪影響を下げる効果がある。ま
た、標準的な瞬き区間の瞬き誤検出または伏せ目は、重
みは下げなくとも覚醒度推定に影響は ない。低覚醒時
は、長い瞬きまたは伏せ目区間の瞬きの発生率は多くな
り、標準的な区間の瞬きは減少 するため、重みは下げ
ても十分覚醒度推定が可能である。
【００７５】実施の形態９．本実施の形態は、実施の形
態１から実施の形態６の覚醒度判定手段１４を下記のよ
うに変更したものである。本実施の形態による覚醒度推
定手段１４のブロック図を図１３に示す。
態１から実施の形態６の覚醒度判定手段１４を下記のよ
うに変更したものである。本実施の形態による覚醒度推
定手段１４のブロック図を図１３に示す。
【００７６】実施の形態９では、瞬き時間別度数分布作
成手段１１０により瞬き時間別度数分布を作成する前
に、検出された瞬きの瞬き時間を時系列的に記憶する瞬
き時間記憶手段１１８を設ける。瞬き時間記憶手段１１
８では、例えば、瞬き時間別度数分布を作成する所定時
間×５（所定倍）の期間分の瞬きを記憶するメモリを持
ち、現在の瞬き時間別度数分布作成期間と前回〜４回前
の瞬き時間別度数分布作成期間の全瞬きを記憶する。そ
して、現在の瞬き時間別度数分布作成期間の瞬き数が何
らかの理由（瞬き不検出または目画像未検出など）によ
り基準値設定または覚醒度を判定するに十分でないと判
断された場合、前回〜４回前の瞬き時間別度数分布作成
期間の瞬きを現在に近いものより順にメモリより必要数
呼だし、瞬き時間別度数分布補正手段１１９により瞬き
時間別度数分布を補正する。
成手段１１０により瞬き時間別度数分布を作成する前
に、検出された瞬きの瞬き時間を時系列的に記憶する瞬
き時間記憶手段１１８を設ける。瞬き時間記憶手段１１
８では、例えば、瞬き時間別度数分布を作成する所定時
間×５（所定倍）の期間分の瞬きを記憶するメモリを持
ち、現在の瞬き時間別度数分布作成期間と前回〜４回前
の瞬き時間別度数分布作成期間の全瞬きを記憶する。そ
して、現在の瞬き時間別度数分布作成期間の瞬き数が何
らかの理由（瞬き不検出または目画像未検出など）によ
り基準値設定または覚醒度を判定するに十分でないと判
断された場合、前回〜４回前の瞬き時間別度数分布作成
期間の瞬きを現在に近いものより順にメモリより必要数
呼だし、瞬き時間別度数分布補正手段１１９により瞬き
時間別度数分布を補正する。
【００７７】図１４は基準値設定または覚醒度を判定す
るに十分な瞬き数を１所定時間あたり２０回とした場合
の説明図である。Ｔｉｍｅ４〜Ｔｉｍｅ２では各所定時
間における瞬きが２０回以上あり、基準値設定または覚
醒度推定は各所定時間のデータのみを用いた瞬き時間別
度数分布を用いて行われる。Ｔｉｍｅ１〜Ｔｉｍｅ０で
は、各所定時間における瞬きが２０回未満であり、瞬き
時間別度数分布の補正を行い、基準値設定または覚醒度
推定を行う。補正はＴｉｍｅ１では２０回に足りない７
回分の瞬きデータをＤＡＴＡ２のＴｉｍｅ１に時間的に
近いもの７回分ＤＡＴＡ２ｐ７で補う。Ｔｉｍｅ０では
２０回に足りない１５回分の瞬きデータをＤＡＴＡ１の
１３回分とＤＡＴＡ２のＴｉｍｅ１に時間的に近いもの
２回分ＤＡＴＡ２ｐ２で補う。
るに十分な瞬き数を１所定時間あたり２０回とした場合
の説明図である。Ｔｉｍｅ４〜Ｔｉｍｅ２では各所定時
間における瞬きが２０回以上あり、基準値設定または覚
醒度推定は各所定時間のデータのみを用いた瞬き時間別
度数分布を用いて行われる。Ｔｉｍｅ１〜Ｔｉｍｅ０で
は、各所定時間における瞬きが２０回未満であり、瞬き
時間別度数分布の補正を行い、基準値設定または覚醒度
推定を行う。補正はＴｉｍｅ１では２０回に足りない７
回分の瞬きデータをＤＡＴＡ２のＴｉｍｅ１に時間的に
近いもの７回分ＤＡＴＡ２ｐ７で補う。Ｔｉｍｅ０では
２０回に足りない１５回分の瞬きデータをＤＡＴＡ１の
１３回分とＤＡＴＡ２のＴｉｍｅ１に時間的に近いもの
２回分ＤＡＴＡ２ｐ２で補う。
【００７８】以上のように実施の形態９によれば、現在
検出された瞬きを覚醒度判定に反映させるとともに、現
在と大きく違わないであろうと推定される現在に近い時
間に発生した瞬き時間を用いることにより、瞬き検出が
十分でないことによる誤判定を軽減する。
検出された瞬きを覚醒度判定に反映させるとともに、現
在と大きく違わないであろうと推定される現在に近い時
間に発生した瞬き時間を用いることにより、瞬き検出が
十分でないことによる誤判定を軽減する。
【００７９】
【発明の効果】請求項１及び請求項９の発明によれば、
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
【００８０】請求項２及び請求項１０の発明によれば、
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
【００８１】請求項３及び請求項１１の発明によれば、
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
所定時間における瞬きを用いることで個々の瞬き検出精
度に大きく依存することがなくなる。また、固定閾値を
用いず高覚醒時および低覚醒時の瞬き時間別度数分布に
おける重心の変化を用いることにより閾値設定ミスによ
る誤判定がなくなる。さらに、各被験者における瞬きデ
ータを用いて正規化することで個人差を吸収し精度よく
覚醒度を推定することができる。
【００８２】請求項４及び請求項１２の発明によれば、
基準値設定における正規化基準値を高覚醒時の所定時間
における瞬き時間別度数分布における分散値とすること
により、各被験者における瞬き時間の標準的なばらつき
を反映することができ、高覚醒時と低覚醒時の重心の変
化度合いにおける個人差を吸収し、精度よく覚醒度を推
定することができる。
基準値設定における正規化基準値を高覚醒時の所定時間
における瞬き時間別度数分布における分散値とすること
により、各被験者における瞬き時間の標準的なばらつき
を反映することができ、高覚醒時と低覚醒時の重心の変
化度合いにおける個人差を吸収し、精度よく覚醒度を推
定することができる。
【００８３】請求項５及び請求項１３の発明によれば、
基準値設定における正規化基準値を高覚醒時の所定時間
における瞬き時間別度数分布における分布重心より長い
瞬きに対する分散値とすることにより、各被験者におけ
る高覚醒時の所定時間における瞬き時間別度数分布にお
ける分布重心より長い瞬きに対する瞬き時間の標準的な
ばらつきを反映することができ、瞬き時間別度数分布が
正規分布でない可能性もあることから分散値で正規化す
るよりもさらに、高覚醒時と低覚醒時の重心の変化度合
いにおける個人差を吸収し、精度よく覚醒度を推定する
ことができる。
基準値設定における正規化基準値を高覚醒時の所定時間
における瞬き時間別度数分布における分布重心より長い
瞬きに対する分散値とすることにより、各被験者におけ
る高覚醒時の所定時間における瞬き時間別度数分布にお
ける分布重心より長い瞬きに対する瞬き時間の標準的な
ばらつきを反映することができ、瞬き時間別度数分布が
正規分布でない可能性もあることから分散値で正規化す
るよりもさらに、高覚醒時と低覚醒時の重心の変化度合
いにおける個人差を吸収し、精度よく覚醒度を推定する
ことができる。
【００８４】請求項６及び請求項１４の発明によれば、
基準値設定において評価基準値および正規化基準値の信
頼性を判断することにより、誤った評価基準値および正
規化基準値を用いることによる覚醒度誤判定を減少させ
ることができる。
基準値設定において評価基準値および正規化基準値の信
頼性を判断することにより、誤った評価基準値および正
規化基準値を用いることによる覚醒度誤判定を減少させ
ることができる。
【００８５】請求項７及び請求項１５の発明によれば、
瞬き時間別度数分布作成において、瞬きの信頼度を判定
するようにし、信頼度に応じて度数重みを変化させ、所
定時間の瞬き時間別度数分布を作成することで、誤った
瞬き検出による覚醒度誤判定を減少させることができ
る。
瞬き時間別度数分布作成において、瞬きの信頼度を判定
するようにし、信頼度に応じて度数重みを変化させ、所
定時間の瞬き時間別度数分布を作成することで、誤った
瞬き検出による覚醒度誤判定を減少させることができ
る。
【００８６】請求項８及び請求項１６の発明によれば、
瞬き時間別度数分布作成において、所定時間中の瞬き回
数が覚醒度推定に十分あるか否かを判定し、十分でない
場合には過去の瞬きデータを再利用し、所定時間の瞬き
時間別度数分布を作成することにより、瞬き未検出によ
る覚醒度誤判定を減少させることができる。
瞬き時間別度数分布作成において、所定時間中の瞬き回
数が覚醒度推定に十分あるか否かを判定し、十分でない
場合には過去の瞬きデータを再利用し、所定時間の瞬き
時間別度数分布を作成することにより、瞬き未検出によ
る覚醒度誤判定を減少させることができる。
【図１】 この発明による覚醒度推定装置の概要を示す
ブロック構成図である。
ブロック構成図である。
【図２】 撮像手段の画像データの一例を示す図であ
る。
る。
【図３】 図１の覚醒度推定装置の処理部のブロック図
である。
である。
【図４】 実施の形態１による目画像抽出手段の説明図
である。
である。
【図５】 実施の形態１による瞬き検出手段の説明図で
ある。
ある。
【図６】 実施の形態１による覚醒度判定手段を示すブ
ロックである。
ロックである。
【図７】 実施の形態１による瞬き時間別度数分布作成
手段の説明図である。
手段の説明図である。
【図８】 実施の形態１又は４による基準値設定手段、
覚醒度推定手段の説明図である。
覚醒度推定手段の説明図である。
【図９】 実施の形態２又は５による基準値設定手段、
覚醒度推定手段の説明図である。
覚醒度推定手段の説明図である。
【図１０】 実施の形態３又は６による基準値設定手
段、覚醒度推定手段の説明図である。
段、覚醒度推定手段の説明図である。
【図１１】 実施の形態７による覚醒度判定手段を示す
ブロック図である。
ブロック図である。
【図１２】 実施の形態８による覚醒度判定手段を示す
ブロック図である。
ブロック図である。
【図１３】 実施の形態９による覚醒度判定手段を示す
ブロック図である。
ブロック図である。
【図１４】 実施の形態９による瞬き時間別度数分布補
正手段の説明図である。
正手段の説明図である。
【図１５】 従来例１の装置全体の構成を示す図であ
る。
る。
【図１６】 従来例２の装置全体の構成を示す図であ
る。
る。
１ 撮像手段、２ 画像メモリ、１０ 処理部、１１
顔画像入力手段、１２目画像抽出手段、１３ 瞬き検出
手段、１４ 覚醒度判定手段、２０ 警報部、１１０
瞬き時間別度数分布作成手段、１１１ 基準値設定手
段、１１２ 覚醒度推定手段、１１４ 基準値正誤判定
手段、１１５ 基準値再設定手段、１１６ 基準値更新
手段、１１７ 瞬き重み設定手段、１１８ 瞬き時間記
憶手段、１１９ 瞬き時間別度数分布補正手段。
顔画像入力手段、１２目画像抽出手段、１３ 瞬き検出
手段、１４ 覚醒度判定手段、２０ 警報部、１１０
瞬き時間別度数分布作成手段、１１１ 基準値設定手
段、１１２ 覚醒度推定手段、１１４ 基準値正誤判定
手段、１１５ 基準値再設定手段、１１６ 基準値更新
手段、１１７ 瞬き重み設定手段、１１８ 瞬き時間記
憶手段、１１９ 瞬き時間別度数分布補正手段。
Claims (16)
- 【請求項１】 被験者の瞬き及び瞬き時間を検出する瞬
き検出手段と、検出した瞬き時間をもとに所定時間にお
ける瞬き時間別度数分布を作成する瞬き時間別度数分布
作成手段と、高覚醒時の所定時間における瞬き時間別度
数分布の分布重心を評価値基準値とすると共に、正規化
基準値を設定する基準値設定手段と、所定時間における
瞬き時間別度数分布の分布重心を評価値として、この評
価値の評価値基準値に対する変化を正規化基準値で正規
化したものを覚醒度とする覚醒度推定手段を備えたこと
を特徴とする覚醒度推定装置。 - 【請求項２】 被験者の瞬き及び瞬き時間を検出する瞬
き検出手段と、検出した瞬き時間をもとに所定時間にお
ける瞬き時間別度数分布を作成する瞬き時間別度数分布
作成手段と、高覚醒時の所定時間における瞬き時間別度
数分布の分布重心と、分散値を定数倍した値の和を評価
値基準値とすると共に、正規化基準値を設定する基準値
設定手段と、所定時間における瞬き時間別度数分布の分
布重心と、分散値の定数倍した値の和を評価値として、
この評価値の評価値基準値に対する変化を正規化基準値
で正規化したものを覚醒度とする覚醒度推定手段を備え
たことを特徴とする覚醒度推定装置。 - 【請求項３】 被験者の瞬き及び瞬き時間を検出する瞬
き検出手段と、検出した瞬き時間をもとに所定時間にお
ける瞬き時間別度数分布を作成する瞬き時間別度数分布
作成手段と、高覚醒時の所定時間における瞬き時間別度
数分布の分布重心と、分布重心より長い瞬きに対する分
散値の定数倍した値の和を評価値基準値とすると共に、
正規化基準値を設定する基準値設定手段と、所定時間に
おける瞬き時間別度数分布の分布重心と、分布重心より
長い瞬きに対する分散値の定数倍した値の和を評価値と
して、この評価値の評価値基準値に対する変化を正規化
基準値で正規化したものを覚醒度とする覚醒度推定手段
を備えたことを特徴とする覚醒度推定装置。 - 【請求項４】 上記基準値設定手段における正規化基準
値は、高覚醒時の所定時間における瞬き時間別度数分布
の分散値とすることを特徴とする請求項１から請求項３
のいずれか１項に記載の覚醒度推定装置。 - 【請求項５】 上記基準値設定手段における正規化基準
値は、高覚醒時の所定時間における瞬き時間別度数分布
の分布重心より長い瞬きに対する分散値とすることを特
徴とする請求項１から請求項３のいずれか１項に記載の
覚醒度推定装置。 - 【請求項６】 上記基準値設定手段は、評価値基準値ま
たは正規化基準値の信頼性を判断する手段を備え、信頼
性が低い場合には評価値基準値または正規化基準値を更
新することを特徴とする請求項１から請求項５のいずれ
か１項に記載の覚醒度推定装置。 - 【請求項７】 上記瞬き時間別度数分布作成手段は、瞬
きの信頼度を判定する手段を備え、信頼度に応じて度数
重みを変化させ、所定時間における瞬き時間別度数分布
を作成することを特徴とする請求項１から請求項６のい
ずれか１項に記載の覚醒度推定装置。 - 【請求項８】 上記瞬き時間別度数分布作成手段は、所
定時間中の瞬き回数が覚醒度推定に十分あるか否かを判
定する手段を備え、十分でない場合には過去の瞬きデー
タを再利用し、瞬き時間別度数分布を再作成することを
特徴とする請求項１から請求項７のいずれか１項に記載
の覚醒度推定装置。 - 【請求項９】 被験者の瞬き及び瞬き時間を検出する瞬
き検出ステップと、検出した瞬き時間をもとに所定時間
における瞬き時間別度数分布を作成する瞬き時間別度数
分布作成ステップと、高覚醒時の所定時間における瞬き
時間別度数分布の分布重心を評価値基準値とすると共
に、正規化基準値を設定する基準値設定ステップと、所
定時間における瞬き時間別度数分布の分布重心を評価値
として、この評価値の評価値基準値に対する変化を正規
化基準値で正規化したものを覚醒度とする覚醒度推定ス
テップを備えたことを特徴とする覚醒度推定方法。 - 【請求項１０】 被験者の瞬き及び瞬き時間を検出する
瞬き検出ステップと、検出した瞬き時間をもとに所定時
間における瞬き時間別度数分布を作成する瞬き時間別度
数分布作成ステップと、高覚醒時の所定時間における瞬
き時間別度数分布の分布重心と、分散値を定数倍した値
の和を評価値基準値とすると共に、正規化基準値を設定
する基準値設定ステップと、所定時間における瞬き時間
別度数分布の分布重心と、分散値の定数倍した値の和を
評価値として、この評価値の評価値基準値に対する変化
を正規化基準値で正規化したものを覚醒度とする覚醒度
推定ステップを備えたことを特徴とする覚醒度推定方
法。 - 【請求項１１】 被験者の瞬き及び瞬き時間を検出する
瞬き検出ステップと、検出した瞬き時間をもとに所定時
間における瞬き時間別度数分布を作成する瞬き時間別度
数分布作成ステップと、高覚醒時の所定時間における瞬
き時間別度数分布の分布重心と、分布重心より長い瞬き
に対する分散値の定数倍した値の和を評価値基準値とす
ると共に、正規化基準値を設定する基準値設定ステップ
と、所定時間における瞬き時間別度数分布の分布重心
と、分布重心より長い瞬きに対する分散値の定数倍した
値の和を評価値として、この評価値の評価値基準値に対
する変化を正規化基準値で正規化したものを覚醒度とす
る覚醒度推定ステップを備えたことを特徴とする覚醒度
推定方法。 - 【請求項１２】 上記基準値設定ステップにおける正規
化基準値は、高覚醒時の所定時間における瞬き時間別度
数分布の分散値とすることを特徴とする請求項９から請
求項１１のいずれか１項に記載の覚醒度推定方法。 - 【請求項１３】 上記基準値設定ステップにおける正規
化基準値は、高覚醒時の所定時間における瞬き時間別度
数分布の分布重心より長い瞬きに対する分散値とするこ
とを特徴とする請求項９から請求項１１のいずれか１項
に記載の覚醒度推定方法。 - 【請求項１４】 上記基準値設定ステップは、評価値基
準値または正規化基準値の信頼性を判断するステップを
備え、信頼性が低い場合には評価値基準値または正規化
基準値を更新することを特徴とする請求項９から請求項
１３のいずれか１項に記載の覚醒度推定方法。 - 【請求項１５】 上記瞬き時間別度数分布作成ステップ
は、瞬きの信頼度を判定するステップを備え、信頼度に
応じて度数重みを変化させ、所定時間における瞬き時間
別度数分布を作成することを特徴とする請求項９から請
求項１４のいずれか１項に記載の覚醒度推定方法。 - 【請求項１６】 上記瞬き時間別度数分布作成ステップ
は、所定時間中の瞬き回数が覚醒度推定に十分あるか否
かを判定するステップを備え、十分でない場合には過去
の瞬きデータを再利用し、瞬き時間別度数分布を再作成
することを特徴とする請求項９から請求項１５のいずれ
か１項に記載の覚醒度推定方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001183028A JP3681657B2 (ja) | 2001-06-18 | 2001-06-18 | 覚醒度推定装置および覚醒度推定方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001183028A JP3681657B2 (ja) | 2001-06-18 | 2001-06-18 | 覚醒度推定装置および覚醒度推定方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003000571A true JP2003000571A (ja) | 2003-01-07 |
| JP3681657B2 JP3681657B2 (ja) | 2005-08-10 |
Family
ID=19023033
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001183028A Expired - Fee Related JP3681657B2 (ja) | 2001-06-18 | 2001-06-18 | 覚醒度推定装置および覚醒度推定方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3681657B2 (ja) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005013626A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 覚醒状態検出装置 |
| JP2007151798A (ja) * | 2005-12-05 | 2007-06-21 | Nissan Motor Co Ltd | 開閉眼判定装置及び方法 |
| JP2007195615A (ja) * | 2006-01-24 | 2007-08-09 | Toyota Motor Corp | 覚醒度推定装置および覚醒度推定方法 |
| JP2008073450A (ja) * | 2006-09-25 | 2008-04-03 | Toyota Motor Corp | 人の状態推定装置及び人の状態推定方法 |
| JP2008099884A (ja) * | 2006-10-19 | 2008-05-01 | Toyota Motor Corp | 状態推定装置 |
| JP2008212298A (ja) * | 2007-03-01 | 2008-09-18 | Toyota Central R&D Labs Inc | 眠気判定装置及びプログラム |
| CN102821690A (zh) * | 2010-03-23 | 2012-12-12 | 爱信精机株式会社 | 清醒度判定装置与清醒度判定方法以及程序 |
| JP5447657B2 (ja) * | 2010-04-05 | 2014-03-19 | トヨタ自動車株式会社 | 生体状態判定装置 |
| JP2016202419A (ja) * | 2015-04-18 | 2016-12-08 | トヨタ自動車株式会社 | 眠気検知装置 |
| WO2016206831A1 (de) * | 2015-06-22 | 2016-12-29 | Robert Bosch Gmbh | Verfahren und vorrichtung zum unterscheiden von blinzelereignissen und instrumentenblicken unter verwendung einer augenöffnungsweite |
| JP2019013737A (ja) * | 2017-07-04 | 2019-01-31 | パナソニックＩｐマネジメント株式会社 | 眠気検知装置、眠気検知方法、及び、プログラム記録媒体 |
| CN109767763A (zh) * | 2018-12-25 | 2019-05-17 | 苏州思必驰信息科技有限公司 | 自定义唤醒词的确定方法和用于确定自定义唤醒词的装置 |
| JP7416112B2 (ja) | 2022-03-23 | 2024-01-17 | いすゞ自動車株式会社 | 覚醒度判定装置 |
-
2001
- 2001-06-18 JP JP2001183028A patent/JP3681657B2/ja not_active Expired - Fee Related
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005013626A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 覚醒状態検出装置 |
| JP2007151798A (ja) * | 2005-12-05 | 2007-06-21 | Nissan Motor Co Ltd | 開閉眼判定装置及び方法 |
| JP2007195615A (ja) * | 2006-01-24 | 2007-08-09 | Toyota Motor Corp | 覚醒度推定装置および覚醒度推定方法 |
| JP2008073450A (ja) * | 2006-09-25 | 2008-04-03 | Toyota Motor Corp | 人の状態推定装置及び人の状態推定方法 |
| JP2008099884A (ja) * | 2006-10-19 | 2008-05-01 | Toyota Motor Corp | 状態推定装置 |
| JP2008212298A (ja) * | 2007-03-01 | 2008-09-18 | Toyota Central R&D Labs Inc | 眠気判定装置及びプログラム |
| JP5585648B2 (ja) * | 2010-03-23 | 2014-09-10 | アイシン精機株式会社 | 覚醒度判定装置、覚醒度判定方法及びプログラム |
| CN102821690A (zh) * | 2010-03-23 | 2012-12-12 | 爱信精机株式会社 | 清醒度判定装置与清醒度判定方法以及程序 |
| JPWO2011118393A1 (ja) * | 2010-03-23 | 2013-07-04 | アイシン精機株式会社 | 覚醒度判定装置、覚醒度判定方法及びプログラム |
| US8866896B2 (en) | 2010-04-05 | 2014-10-21 | Toyota Jidosha Kabushiki Kaisha | Biological body state assessment device including drowsiness occurrence assessment |
| JP5447657B2 (ja) * | 2010-04-05 | 2014-03-19 | トヨタ自動車株式会社 | 生体状態判定装置 |
| JP2016202419A (ja) * | 2015-04-18 | 2016-12-08 | トヨタ自動車株式会社 | 眠気検知装置 |
| WO2016206831A1 (de) * | 2015-06-22 | 2016-12-29 | Robert Bosch Gmbh | Verfahren und vorrichtung zum unterscheiden von blinzelereignissen und instrumentenblicken unter verwendung einer augenöffnungsweite |
| CN107809952A (zh) * | 2015-06-22 | 2018-03-16 | 罗伯特·博世有限公司 | 用于在使用眼睛张开度的情况下对眨眼事件和仪表察看进行区分的方法和装置 |
| JP2018526045A (ja) * | 2015-06-22 | 2018-09-13 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 目開幅を利用してまばたき事象と計器視線とを区別する方法および装置 |
| US10278619B2 (en) | 2015-06-22 | 2019-05-07 | Robert Bosch Gmbh | Method and device for distinguishing blinking events and instrument gazes using an eye opening width |
| CN107809952B (zh) * | 2015-06-22 | 2022-05-27 | 罗伯特·博世有限公司 | 用于在使用眼睛张开度的情况下对眨眼事件和仪表察看进行区分的方法和装置 |
| JP2019013737A (ja) * | 2017-07-04 | 2019-01-31 | パナソニックＩｐマネジメント株式会社 | 眠気検知装置、眠気検知方法、及び、プログラム記録媒体 |
| JP7054820B2 (ja) | 2017-07-04 | 2022-04-15 | パナソニックＩｐマネジメント株式会社 | 眠気検知装置、眠気検知方法、及び、プログラム記録媒体 |
| CN109767763A (zh) * | 2018-12-25 | 2019-05-17 | 苏州思必驰信息科技有限公司 | 自定义唤醒词的确定方法和用于确定自定义唤醒词的装置 |
| JP7416112B2 (ja) | 2022-03-23 | 2024-01-17 | いすゞ自動車株式会社 | 覚醒度判定装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3681657B2 (ja) | 2005-08-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5679066B2 (ja) | 居眠り検出方法と装置 | |
| JP2003000571A (ja) | 覚醒度推定装置および覚醒度推定方法 | |
| CN107427233B (zh) | 脉波检测装置、以及脉波检测程序 | |
| KR100296534B1 (ko) | 각성도추정장치 | |
| JP5078815B2 (ja) | 開眼度推定装置 | |
| US9526448B2 (en) | State estimation device and state estimation program | |
| US20110216181A1 (en) | Drowsiness determination apparatus and program | |
| US11045115B2 (en) | Blink detection apparatus | |
| JP2009090028A (ja) | 眠気度判定装置 | |
| JP2008212298A (ja) | 眠気判定装置及びプログラム | |
| JP6399311B2 (ja) | 居眠り検知装置 | |
| US20220246015A1 (en) | Fall detection method and apparatus, and wearable device | |
| JP3116638B2 (ja) | 覚醒状態検知装置 | |
| JP2001043382A (ja) | 目追跡装置 | |
| JP2019087170A (ja) | 瞼開閉判定装置および眠気検知装置 | |
| JP5139470B2 (ja) | 眠気度推定装置および眠気度推定方法 | |
| JP2000163564A (ja) | 目の追跡装置および瞬き検出装置 | |
| JP5349350B2 (ja) | 開眼度判定装置及び開眼度判定方法 | |
| JPH08225028A (ja) | 運転者の覚醒度検出装置 | |
| JP2002279410A (ja) | 居眠り検出装置 | |
| JPH0596971A (ja) | 居眠り運転防止装置 | |
| JP5050794B2 (ja) | 眠気検知装置、眠気検知方法 | |
| US20220284718A1 (en) | Driving analysis device and driving analysis method | |
| JP2017068576A (ja) | 状態判定装置、閉眼判定装置、状態判定方法、状態判定プログラムおよび記録媒体 | |
| CN115050102A (zh) | 移动设备规范坐姿分析处理方法、系统及其存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050331 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050517 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050518 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080527 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090527 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100527 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100527 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110527 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110527 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120527 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120527 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130527 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140527 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |