JP6107595B2 - 状態監視装置 - Google Patents

Description

本発明は、自動車の運転者の状態を監視する状態監視装置に関する。

従来、自動車の安全な走行を実現することを目的として、当該自動車の運転者の状態を監視する状態監視装置（いわゆるドライバステータスモニタ）であって、発光部と、撮像部と、制御部とを備えた状態監視装置が知られている（例えば、特許文献１参照）。

状態監視装置における発光部は、運転者の顔面が存在する規定領域に近赤外波長の光を含む光を照射する。撮像部は、規定領域を含む領域を撮像領域として画像を撮像する。制御部は、撮像部で撮像した画像を画像処理することで運転者の状態を監視する。

さらに、特許文献１に記載の状態監視装置における制御部では、エンジン停止状態またはアイドリング状態であれば、発光を禁止している。

特許第３６５１５７１号公報

ところで、エンジン停止状態またはアイドリング状態であっても、運転席に着座した運転者が直ちに運転を開始する場合には、その運転者の状態が運転に適した状態であるか否かを監視することが好ましい。このため、状態監視装置においては、運転者が直ちに運転を開始する場合には、エンジン停止状態またはアイドリング状態であっても、発光部を発光させて状態監視をすることが求められている。

しかしながら、特許文献１に記載された状態監視装置では、エンジン停止状態またはアイドリング状態である場合には、発光部の発光を禁止しているため、発光すべきタイミングで発光部を発光させて、状態監視をすることができないという課題があった。

そこで、本発明は、状態監視装置において、適切なタイミングで発光することを目的とする。

上記目的を達成するためになされた本発明は、車両に搭載される状態監視装置に関する。
本発明の状態監視装置は、発光手段（９）と、撮像手段（７）と、状態監視手段（４０，Ｓ２００，Ｓ２１０）と、状況判定手段（４０，Ｓ１２０〜Ｓ１４０）と、発光制御手段（４０，Ｓ１５０，Ｓ２４０）とを備えている。

発光手段は、規定領域に光が照射されるように発光する。ここで言う規定領域とは、車両の運転者の顔面が位置する領域である。撮像手段は、規定領域を含む領域を撮影領域とした画像を撮像する。

状態監視手段は、撮像手段で撮像された画像を画像処理した結果に基づいて、運転者の状態を監視する。状況判定手段は、運転者が車両を運転する準備が整っていない運転待機状況であるか、運転者が車両を運転する準備が整っている運転可能状況であるかを判定する。

発光制御手段は、状況判定手段での判定の結果、運転待機状況である場合、発光手段における発光機能を低下させる特定処理を実行し、運転可能状況であれば、発光手段における発光機能を低下させることなく発光手段に発光させる。

このような状態監視装置によれば、運転待機状況である場合には、発光手段における発光機能を低下させることができる。一方、本発明の状態監視装置によれば、運転可能状況である場合には、発光手段における発光機能を低下させること無く発光することができる。

つまり、本発明の状態監視装置によれば、不要なタイミングでの発光を抑制し、適切なタイミングで発光することができる。
この結果、本発明の状態監視装置によれば、消費電力を抑制することができる。

ところで、状態監視装置の状態監視手段が実行する画像処理では、一般的に、撮像手段で撮像した画像から抽出した運転者の顔面の特徴を、運転者が正常な状態である場合の顔面の特徴を表すデータとして用意された基準データに照合することが実施される。

この基準データは、運転者が自動車に乗り込んだ直後に、撮像手段にて撮像した画像に基づいて生成されることが多い。
しかしながら、特許文献１に記載の状態監視装置では、エンジン停止状態またはアイドリング状態である場合に発光を禁止しているため、エンジン停止状態またはアイドリング状態である場合に画像を撮像して、基準データを生成することができないという課題が生じる。

これに対して、本願の状態監視装置によれば、エンジン停止状態またはアイドリング状態であっても、運転者の顔面が明確に写り込んだ画像を撮像でき、エンジン停止状態またはアイドリング状態中に撮像した画像に基づいて、基準データを生成することができる。

この結果、本発明の状態監視装置によれば、基準データを生成するまでに要する時間を短縮でき、ひいては、運転者の状態監視を、運転者が自動車に乗り込んでから早期に開始できる。

なお、本発明の状態監視装置は、脱着信号を取得する脱着取得手段（４０，Ｓ１１０）、開閉信号を取得する開閉取得手段（４０，Ｓ１１０）、及び着座信号を取得する着座取得手段（４０，Ｓ１１０）のうちの少なくとも一つを備えていても良い。

ここで言う脱着信号とは、自動車に搭載されたシートベルトの着用状態を表す信号である。また、開閉信号とは、車両に設けられたドアの開閉状態を表す信号である。着座信号とは、運転席への着座状況を表す信号である。

すなわち、運転者がシートベルトを外した状態であれば、運転者は、自動車の運転を直ちに開始する可能性が低いと考えられる。また、自動車のドアが開いた状態であれば、運転者は、自動車の運転を直ちに開始する可能性が低いと考えられる。そして、運転者が運転席に着座していなければ、運転者は、自動車の運転を直ちに開始する可能性が低いと考えられる。

このため、本発明における状況判定手段は、脱着信号が運転席のシートベルトが着用されていないことを表している場合、開閉信号によりドアが開いていることを表している場合、着座信号が運転席に着座していないことを表している場合の少なくとも一つの場合に、運転待機状況であるものと判定しても良い。

このような状態監視装置によれば、運転待機状況であるか運転可能状況であるかを確実に判定できる。
なお、課題を解決するための手段の欄及び特許請求の範囲に記載した括弧内の符号は、後述する実施形態に記載の具体的手段との対応関係を示すことを目的とするものであって、本発明の技術的範囲を限定するものではない。

本発明が適用された状態監視装置の設置位置を示す図である。 状態監視装置の概略構成を示すブロック図である。 実施形態における状態監視処理の処理手順を示すフローチャートである。 発光部を発光させるタイミングを示すタイミングチャートである。 変形例における状態監視処理の処理手順を示すフローチャートである。 発光部を発光させるタイミングの変形例を示すタイミングチャートである。

以下に本発明の実施形態を図面と共に説明する。
〈状態監視装置〉
図１に示す状態監視装置１は、自動車ＡＭの安全な走行または乗員の快適な運転環境を実現することを目的として自動車ＡＭに搭載されるドライバモニタリングシステムである。この状態監視装置１は、自車両ＡＭの乗員（本実施形態では、運転者）Ｈｍの頭部を含む画像に基づいて乗員Ｈｍの状態を監視する。

この状態監視装置１は、図２に示すように、画像ＰＩを生成する撮像システム５と、画像ＰＩに対して画像認識処理を実行して乗員Ｈｍの状態を監視する状態監視ＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）４０とを備えている。さらに、状態監視装置１には、自動車ＡＭにおける各種状況を検出する各種センサ群１１と、自車両ＡＭに搭載された各種装置を含むアクチュエータ部５０とが接続されている。

撮像システム５は、撮像部７と、発光部９とを備え、少なくとも近赤外領域の波長を含む波長の光（以下、「照明光」と称す）を発光すると共に、画像ＰＩを生成するシステムである。撮像システム５は、自車両ＡＭの乗員Ｈｍの頭部が位置する可能性のある車室内空間での領域（以下、規定領域ＰＡ（図１参照）と称す）を含む領域を撮像領域とするように予め規定された設置位置に設置される。本実施形態における規定領域ＰＡとは、例えば、通常の運転姿勢をとっている運転者の目が存在する位置を表す楕円状の領域（即ち、アイリプス）内を包含する領域である。

撮像システム５の設置位置としては、例えば、ステアリングコラムの上部が考えられる。
発光部９は、状態監視ＥＣＵ４０からの制御指令ＣＯに従って、照明光を発光する発光器である。本実施形態における発光部９として、発光ダイオード（ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ））が考えられる。また、発光部９は、規定領域ＰＡに照明光を照射するように設置される。

撮像部７は、撮像素子（いわゆるＣＣＤやＣＭＯＳなどイメージセンサ）、光学レンズ、光学フィルタ、発振器、インターフェース回路、電源等の周辺電子回路を有した周知の撮像装置である。この撮像部７は、光学フィルタとしての可視光カットフィルタや、光学レンズを介して撮像素子に入射した光を各画素が受光して、光の強弱に応じた陰影のある画像ＰＩを生成する。なお、ここで言う可視光カットフィルタとは、状態監視ＥＣＵ４０での画像処理に適した光の成分として予め定められた光の成分（例えば、近赤外領域の波長）を少なくとも透過すると共に、画像処理に不適な光の成分（例えば、可視光領域の波長）の透過を低減（カット）するフィルタである。

アクチュエータ部５０には、報知部５１と、外部記憶装置５２とが少なくとも含まれている。
報知部５１は、状態監視ＥＣＵ４０からの制御信号に従って報知する機構であり、スピーカ部５４と、表示部５５とを含む。スピーカ部５４は、音を出力する機構であり、表示部５５は、異なる内容の情報を表示態様の変更によって示す機構（例えば、液晶ディスプレイやインジケータ）である。

外部記憶装置５２は、記憶内容を書換可能な不揮発性の記憶装置（例えば、ハードディスクドライブやフラッシュメモリ）である。
〈センサ群〉
各種センサ群１１には、少なくとも、シートベルト着脱センサ１３と、ドア開閉センサ１５と、着座センサ１７とを含む。

シートベルト着脱センサ１３は、自動車ＡＭの各座席（即ち、運転席や助手席）におけるシートベルトの着用の有無（即ち、着用状態）を検出する周知のセンサである。そして、シートベルト着脱センサ１３は、着用状態を表す着脱信号を状態監視ＥＣＵ４０へと出力する。

また、ドア開閉センサ１５は、自動車ＡＭに設けられた各ドアの開閉状態を検出する周知のセンサである。そして、ドア開閉センサ１５は、各ドアの開閉状態を表す開閉信号を状態監視ＥＣＵ４０へと出力する。

着座センサ１７は、自動車ＡＭの各座席（即ち、運転席や助手席）への着座の有無（即ち、着座状況）を検出する周知のセンサである。この着座センサ１７は、着座状況を表す着座信号を状態監視ＥＣＵ４０へと出力する。

なお、各種センサ群１１は、状態監視ＥＣＵ４０に直接接続されていても良いし、周知の車載ネットワークを介して接続されていても良い。
〈状態監視ＥＣＵ４０〉
状態監視ＥＣＵ４０は、ＲＯＭ４１と、ＲＡＭ４２と、ＣＰＵ４３とを少なくとも備えた周知のマイクロコンピュータを中心に構成されている。

ＲＯＭ４１は、電源を切断しても記憶内容を保持する必要のあるデータやプログラムを記憶する記憶装置である。ＲＡＭ４２は、データを一時的に格納するメモリである。ＣＰＵ４３は、ＲＯＭ４１やＲＡＭ４２に記憶されたプログラムに従って処理を実行する演算処理装置である。

ＲＯＭ４１には、乗員Ｈｍの状態を監視した結果、自車両ＡＭの運転に対する乗員Ｈｍの安全性が低い状態である場合に、自車両ＡＭの安全な走行が実現されるようにアクチュエータ部５０を制御する状態監視処理をＣＰＵ４３が実行するためのプログラムが格納されている。

つまり、本実施形態の状態監視ＥＣＵ４０は、撮像システム５を制御し、撮像部７にて生成した画像ＰＩを画像処理した結果に基づいて、自車両ＡＭの乗員Ｈｍの状態を監視する。さらに、状態監視ＥＣＵ４０は、自車両ＡＭの乗員Ｈｍの状態を監視した結果に基づいて、アクチュエータ部５０を制御する。
〈状態監視処理〉
次に、状態監視ＥＣＵ４０が実行する状態監視処理について説明する。

この状態監視処理は、自動車ＡＭのイグニッションスイッチがオンされた後、予め規定された時間間隔毎に起動されるものである。
この状態監視処理は、起動されると、図３に示すように、まず、センサ群１１からの信号を取得する（Ｓ１１０）。具体的に、本実施形態のＳ１１０では、シートベルト着脱センサ１３からの着脱信号、ドア開閉センサ１５からの開閉信号、及び着座センサ１７からの着座信号を取得する。

続いて、Ｓ１１０にて取得したドア開閉センサ１５からの開閉信号に基づいて、自動車ＡＭにおける各ドアが開いているか否かを判定する（Ｓ１２０）。このＳ１２０での判定の結果、自動車ＡＭにおける少なくとも一つのドアが開いていれば（Ｓ１２０：ＮＯ）、運転者Ｈｍが自動車ＡＭを直ちに運転することが不可能であり、車両を運転する準備が整っていない状況（以下、「運転待機状況」と称す）であるものと判定し、詳しくは後述するＳ２４０へと移行する。

一方、Ｓ１２０での判定の結果、自動車ＡＭにおけるドアが全て閉じていれば（Ｓ１２０：ＹＥＳ）、着座センサ１７からの着座信号に基づいて、運転席に着座しているか否かを判定する（Ｓ１３０）。このＳ１３０での判定の結果、運転席に着座していなければ（Ｓ１３０：ＮＯ）、運転待機状況であるものと判定し、Ｓ２４０へと移行する。

Ｓ１３０での判定の結果、運転席に着座していれば（Ｓ１３０：ＹＥＳ）、シートベルト着脱センサ１３からの着脱信号に基づいて、運転席においてシートベルトが着用されているか否かを判定する（Ｓ１４０）。このＳ１４０での判定の結果、運転席においてシートベルトが着用されていなければ（Ｓ１４０：ＮＯ）、運転待機状況であるものと判定し、Ｓ２４０へと移行する。

一方、運転席においてシートベルトが着用されていれば（Ｓ１４０：ＹＥＳ）、運転者Ｈｍが自動車ＡＭを直ちに運転することが可能であり、運転する準備が整っている状況（以下、「運転可能状況」と称す）であるものと判定し、発光部９に対して制御指令ＣＯを出力する（Ｓ１５０）。この制御指令ＣＯが入力された発光部９は、照明光を発光して規定領域ＰＡに照射する。

続いて、撮像部７に対して撮像指令を出力する（Ｓ１６０）。この撮像指令が入力された撮像部７は、一枚の画像ＰＩを撮像して状態監視ＥＣＵ４０に出力する。そして、状態監視ＥＣＵ４０は、画像ＰＩをＲＡＭ４２に格納する。

本実施形態において、発光部９が照明光を発光するタイミングと、撮像部７が画像ＰＩを撮像するタイミングとは、発光部９が照明光を発光する期間が、撮像部７の露光期間に同期するように設定される。ここで言う同期とは、発光部９における発光から消灯までの期間が、撮像部７の露光期間と完全一致することでも良いが、露光期間よりも若干長く規定されていることが望ましい。これは、車室内で撮像する場合、太陽光などの外乱ノイズ光によって画質が低下することを防ぐためには、Ｓ／Ｎ比を高めることが有効となるためである。

さらに、状態監視処理では、運転者Ｈｍの状態を監視するために用いる基準データを生成済みであるか否かを判定する（Ｓ１７０）。このＳ１７０での判定の結果、基準データを生成済みであれば（Ｓ１７０：ＹＥＳ）、詳しくは後述するＳ２００へと移行する。

一方、Ｓ１７０での判定の結果、基準データを未生成であれば（Ｓ１７０：ＮＯ）、Ｓ１６０における画像ＰＩの撮像回数が、下限閾値Ｔｈｍｉｎよりも大きく、かつ上限閾値Ｔｈｍａｘ以下であるかを判定する（Ｓ１８０）。このＳ１８０での判定の結果、画像ＰＩの撮像回数が、下限閾値Ｔｈｍｉｎよりも大きく、かつ上限閾値Ｔｈｍａｘ以下であれば（Ｓ１８０：ＹＥＳ）、ＲＡＭ４２に蓄積された画像ＰＩに基づいて、周知の学習処理を実行する（Ｓ１９０）。

ここで言う学習処理では、ＲＡＭ４２に蓄積された画像ＰＩに基づいて、運転者の顔の骨格を表す特徴点や、目、鼻、口を表す特徴点を抽出し、それらの特徴点及び特徴点間の位置関係を表す骨格データを生成する。さらに、学習処理では、ＲＡＭ４２に蓄積された画像ＰＩに基づいて、運転者Ｈｍが覚醒しているものとみなせる状態における目の開度や、運転者Ｈｍが車両の進行方向を見ているものとみなせる状態における顔の向き及び視線の向きを表す比較対象データを生成する。なお、骨格データや比較対象データは、基準データの一例である。これらの骨格データや比較対象データの生成は、例えば、ＲＡＭ４２に蓄積された画像ＰＩに基づく特徴点や目の開度、顔の向き、視線の向きを算術平均することで実施されても良い。

状態監視処理では、学習処理が終了すると、Ｓ２００へと移行する。
なお、Ｓ１８０での判定の結果、Ｓ１６０における画像ＰＩの撮像回数が、下限閾値Ｔｈｍｉｎ以下、または、上限閾値Ｔｈｍａｘよりも大きければ（Ｓ１８０：ＮＯ）、Ｓ１９０での学習処理を実行することなく、Ｓ２００へと移行する。

そのＳ２００では、Ｓ１６０で撮像した画像ＰＩに対して、運転者Ｈｍの目の開度を導出する周知の画像処理や、運転者Ｈｍの顔の向き及び視線の方向を検出する周知の画像処理を実行する。そして、Ｓ２００での画像処理の結果に基づいて、運転者Ｈｍの状態を判定する運転者状態判定として実行する（Ｓ２１０）。

このＳ２１０にて実行する運転者状態判定は、運転者Ｈｍの覚醒度や、運転者Ｈｍが脇見運転をしているか否か等を判定する周知の処理である。本実施形態の運転者状態判定における覚醒度の導出は、例えば、比較対象データのうちの目の開度に、Ｓ２００にて導出した目の開度を照合することで実施しても良い。また、本実施形態の運転者状態判定における脇見運転の有無の判定は、例えば、比較対象データのうちの顔の向き及び視線の向きに、Ｓ２００にて導出した運転者Ｈｍの顔の向き及び視線の向きを照合することで実施しても良い。

本実施形態では、具体的には、顔向きや視線の向きが正面でない状態が規定時間継続している場合に、脇見運転をしているものと判定すれば良い。なお、脇見運転をしているか否かの判定方法は、これに限るものではなく、自動車ＡＭに設けられた周辺監視装置や車速などの情報と連携して判定しても良い。これは、運転者Ｈｍの行動が、脇見であるのか、自動車ＡＭを走行するために必要な安全確認であるのかを判定するためである。

続いて、Ｓ２１０での運転者状態判定の結果に基づいて、乗員Ｈｍに対して警告を出力する必要の有無を判定する（Ｓ２２０）。本実施形態におけるＳ２２０での判定では、例えば、運転者Ｈｍの覚醒度が予め規定された閾値未満（すなわち、運転者Ｈｍに所定以上の眠気があると推定した）の場合や、運転者Ｈｍが脇見運転を実施している場合に、自車両ＡＭの運転に対する乗員Ｈｍの安全性が低い状態であり、警告を出力する必要があるものと判定している。

そして、Ｓ２２０での判定の結果、警告を出力する必要があれば（Ｓ２２０：ＹＥＳ）、アクチュエータ部５０に対して制御信号を出力して警告を出力する（Ｓ２３０）。
例えば、運転者Ｈｍの覚醒度が閾値未満である場合にＳ２２０にて出力される警告は、休息を促す旨を報知部５１から出力することや、運転者Ｈｍの覚醒度が閾値未満となった時刻、場所などを対応付けて外部記憶装置５２に記憶することを含む。

その後、本状態監視処理を終了し、次の起動タイミングまで待機する。
なお、Ｓ２２０での判定の結果、警告を出力する必要が無ければ（Ｓ２２０：ＮＯ）、Ｓ２３０を実行することなく、本状態監視処理を終了し、次の起動タイミングまで待機する。

ところで、Ｓ１２０での判定の結果、自動車ＡＭにおける少なくとも一つのドアが開いている場合（Ｓ１２０：ＮＯ）に移行するＳ２４０では、発光部９における発光機能を低下させる特定処理を実行する。具体的に、本実施形態のＳ２４０では、発光部９に対する制御指令ＣＯの出力を禁止することを特定処理として実行する。

なお、Ｓ２４０へは、Ｓ１３０での判定の結果、運転席に着座していない場合（Ｓ１３０：ＹＥＳ）や、Ｓ１４０での判定の結果、運転席においてシートベルトが着用されていない場合（Ｓ１４０：ＮＯ）にも移行する。

続いて、撮像部７に対する撮像指令の出力を停止する（Ｓ２５０）。その後、本状態監視処理を終了し、次の起動タイミングまで待機する。
以上説明したように、本実施形態の状態監視処理では、図４に示すように、自動車ＡＭにおける全てのドアが閉じており、運転席に着座し、さらに、運転席においてシートベルトが着用されている場合、運転可能状況であるものとして、発光部９を発光（点灯）して規定領域ＰＡに照明光を照射する。さらに、状態監視処理では、その照明光が照射されている期間に撮像部７にて撮像された画像ＰＩを画像処理した結果に基づいて、運転者の状態を監視する。

一方、状態監視処理では、自動車ＡＭにおける少なくとも一つのドアが閉じている場合、運転席に着座していない場合、及び運転席においてシートベルトが着用されていない場合のうちの少なくとも一つを満たす場合には、運転待機状況であるものとして、発光部９の発光を禁止する。この場合には、状態監視処理では、さらに、撮像部７による画像ＰＩの撮像を停止する。
［実施形態の効果］
以上説明したように、運転者Ｈｍがシートベルトを外した状態や、自動車ＡＭのドアが開いた状態、運転者Ｈｍが運転席に着座していない状態であれば、運転者Ｈｍが自動車ＡＭの運転を直ちに開始する可能性は低い。

このため、状態監視装置１では、脱着信号が運転席のシートベルトが着用されていないことを表している場合、開閉信号が、ドアが開いていることを表している場合、着座信号が運転席に着座していないことを表している場合のうちの少なくとも一つを満たす場合に、運転待機状況であるものと判定している。

そして、状態監視装置１によれば、運転待機状況である場合には、発光部９における発光を停止できる。
このような状態監視装置１によれば、不必要な状況で発光部９による発光が実施されることを防止できる。この結果、状態監視装置１によれば、発光部９における消費電力を抑制することができると共に、不必要な発光により、運転者らが違和感を覚えることを低減できる。

一方、状態監視装置１では、自動車ＡＭにおける全てのドアが閉じており、運転席に着座し、さらに、運転席においてシートベルトが着用されている場合を、運転可能状態と判定している。

したがって、状態監視装置１によれば、運転待機状況であるか運転可能状況であるかを確実に判定できる。
そして、状態監視装置１によれば、運転可能状況である場合には、発光部９における発光を停止することなく、規定領域ＰＡに照明光を照射できる。

つまり、状態監視装置１によれば、不要なタイミングでの発光を抑制し、適切なタイミングで発光できる。
ところで、状態監視装置１においては、運転可能状況であれば、エンジン停止状態またはアイドリング状態であっても、発光部９を発光して照明光を規定領域に照射する。このため、状態監視装置１によれば、エンジン停止状態またはアイドリング状態であっても、運転者Ｈｍの顔面が明確に写り込んだ画像ＰＩを撮像できる。そして、状態監視装置１によれば、その撮像された画像ＰＩに基づいて、基準データを生成することができる。

この結果、状態監視装置１によれば、従来の技術に比べて、イグニッションスイッチをオンしてから基準データを生成するまでに要する時間を短縮でき、ひいては、運転者Ｈｍが自動車ＡＭに乗り込んでから早期に運転者Ｈｍの状態監視を開始できる。
［その他の実施形態］
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、様々な態様にて実施することが可能である。

例えば、上記実施形態の状態監視処理におけるＳ２４０では、発光部９に対する制御指令ＣＯの出力を禁止することを特定処理として実施していたが、Ｓ２４０にて実行する特定処理の内容は、これに限るものではない。すなわち、特定処理は、発光部９による発光強度を低減させることであっても良い。

この場合の状態監視装置によれば、発光部９からの発光強度を低下させることができ、発光部９における消費電力を抑制できる。
また、上記実施形態の状態監視処理では、運転待機状態である場合（Ｓ１２０：ＮＯ，Ｓ１３０：ＮＯ，Ｓ１４０：ＮＯ）には、発光部９の発光を禁止する（Ｓ２４０）と共に、撮像部７による画像ＰＩの撮像を停止（Ｓ２５０）していた。しかしながら、本発明における状態監視処理では、図５に示すように、運転待機状態である場合（Ｓ１２０：ＮＯ，Ｓ１３０：ＮＯ，Ｓ１４０：ＮＯ）に、発光部９の発光を禁止し（Ｓ２４０）、撮像部７にて画像ＰＩを撮像（Ｓ２６０）しても良い。

この場合、Ｓ２６０にて撮像した画像ＰＩは、陰影の無い画像となるが、状態監視処理においては、この陰影の無い画像を画像処理し（Ｓ２００）、その画像処理の結果に基づいて、運転者状態判定（Ｓ２１０）を実行しても良い。

また、上記実施形態では、発光部９を発光して規定領域ＰＡに照明光を照射する期間を、自動車ＡＭにおける全てのドアが閉じており、運転席に着座し、さらに、運転席においてシートベルトが着用されている期間としていたが、照明光を照射する期間の決定方法は、これに限るものではない。すなわち、照明光を照射する期間は、図６に示すように、運転席においてシートベルトが着用されている期間とし、他の条件を考慮しなくとも良い。

また、照明光を照射する期間は、上記第一実施形態に記載された条件から、ドアの開閉、運転席への着座、及び運転席におけるシートベルト着用の有無のうちの１つまたは２つの条件が省略されていても良いし、上記第一実施形態に記載された条件に他の条件が加わっても良い。

ここで言う他の条件の一例として、シフトポジションセンサからのポジション信号に基づくシフトポジションがドライブ以外のポジションである場合に、発光部９からの照明光の発光を禁止することが考えられる。ただし、この場合、状態監視装置１には、自動車ＡＭのシフトポジションを検出するシフトポジションセンサが接続されている必要がある。このシフトポジションセンサは、シフトポジションを表すポジション信号を状態監視ＥＣＵ４０へと出力する周知のセンサである。

なお、発光部９における照明光の発光は、運転可能状況である場合に常時実施しても良いし、運転可能状況である場合に、画像ＰＩを撮像するタイミングに合わせてパルス発光しても良い。後者であれば、発光部９を必要以上に発光することが無いため、発光部９における消費電力を抑制できる。

上記実施形態の構成の一部を、課題を解決できる限りにおいて省略した態様も本発明の実施形態である。また、上記実施形態と変形例とを適宜組み合わせて構成される態様も本発明の実施形態である。また、特許請求の範囲に記載した文言によって特定される発明の本質を逸脱しない限度において考え得るあらゆる態様も本発明の実施形態である。

１…状態監視装置 ５…撮像システム ７…撮像部 ９…発光部 １１…センサ群 １３…シートベルト着脱センサ １５…ドア開閉センサ １７…着座センサ ４０…状態監視ＥＣＵ ４１…ＲＯＭ ４２…ＲＡＭ ４３…ＣＰＵ ５０…アクチュエータ部 ５１…報知部 ５２…外部記憶装置 ５４…スピーカ部 ５５…表示部

Claims (6)

1. 車両に搭載される状態監視装置（１）であって、
   車両の運転者の顔面が位置する領域として規定された規定領域に光が照射されるように発光する発光手段（９）と、
   前記規定領域を含む領域を撮影領域とした画像を撮像する撮像手段（７）と、
   前記撮像手段で撮像された画像を画像処理した結果に基づいて、前記運転者の覚醒状態を監視する状態監視手段（４０，Ｓ２００，Ｓ２１０）と、
   前記運転者が車両を運転する準備が整っていない運転待機状況であるか、前記運転者が車両を運転する準備が整っている運転可能状況であるかを判定する状況判定手段（４０，Ｓ１２０〜Ｓ１４０）と、
   前記状況判定手段での判定の結果、前記運転待機状況である場合、前記発光手段における発光機能を低下させる特定処理を実行し、前記運転可能状況であれば、前記発光手段における発光機能を低下させることなく前記発光手段に発光させる発光制御手段（４０，Ｓ１５０，Ｓ２４０）と、を備え、
   前記発光制御手段は、
   前記状態監視手段が前記運転者の覚醒状態を監視している場合に、前記状況判定手段での判定の結果が、前記運転可能状況から前記運転待機状況になると、前記特定処理を実行すると共に、前記撮像手段による画像の撮像を停止させるように構成され、
   前記状況判定手段は、
   前記車両のシフトポジションがドライブ以外のシフトポジションである場合に、前記運転待機状況であるものと判定するように構成されている、
   状態監視装置。
2. 自動車に搭載されたシートベルトの着用状態を表す脱着信号を取得する脱着取得手段（４０，Ｓ１１０）を備え、
   前記状況判定手段は、
   前記脱着取得手段で取得した脱着信号が運転席のシートベルトが着用されていないことを表していれば、前記運転待機状況であるものと判定する
   ことを特徴とする請求項１に記載の状態監視装置。
3. 前記車両に設けられたドアの開閉状態を表す開閉信号を取得する開閉取得手段（４０，Ｓ１１０）を備え、
   前記状況判定手段は、
   前記開閉取得手段にて取得した開閉信号が、ドアが開いていることを表していれば、前記運転待機状況であるものと判定する
   ことを特徴とする請求項１または請求項２に記載の状態監視装置。
4. 運転席への着座状況を表す着座信号を取得する着座取得手段（４０，Ｓ１１０）を備え、
   前記状況判定手段は、
   前記着座取得手段にて取得した着座信号が運転席に着座していないことを表していれば、前記運転待機状況であるものと判定する
   ことを特徴とする請求項１から請求項３までのいずれか一項に記載の状態監視装置。
5. 前記発光制御手段は、
   前記発光手段による発光の停止を前記特定処理として実行する
   ことを特徴とする請求項１から請求項４までのいずれか一項に記載に状態監視装置。
6. 前記発光制御手段は、
   前記発光手段による発光強度を低減することを、前記特定処理として実行する
   ことを特徴とする請求項１から請求項４までのいずれか一項に記載に状態監視装置。