JP2021046121A - 制御装置、車載装置及び制御方法 - Google Patents

Abstract

【課題】顔画像の認証に要する時間を短縮し、車両のドアの解錠を適切に制御可能にする。【解決手段】自車両５に搭載された制御装置５０であって、顔画像から抽出した第１照合用データ６３を記憶した記憶部６０と、車両の外部を撮像する撮像部１０によって撮像された撮像画像を取得する画像取得部７１と、画像取得部７１が取得した撮像画像から顔画像を検出し、検出した顔画像から抽出した第２照合用データと、第１照合用データ６３と照合して顔認証を行う顔認証部７７と、撮像部が備える可視光ＬＥＤ１１５を点灯させて、撮像部１０が顔画像を撮像可能な位置を光学的に表示させる点灯制御部７５と、を備える。【選択図】図１

Description

本発明は、制御装置、車載装置及び制御方法に関する。

従来、顔認証により車両のドアの施錠や解錠を行うシステムが知られている。例えば、特許文献１は、車外の人の顔をカメラで撮像し、予め記憶している車内で撮像されたユーザの顔の画像と一致した場合に、車両のドアの解錠を行うドア制御装置を開示する。

特開２００５−１４６７２５号公報

しかしながら、車外の人の顔を画像認識する場合、顔がカメラの画角の外にあって顔の特徴点を検出することができず、認証に時間がかかる場合がある。

本発明は上記事情に鑑みてなされたものであり、顔認証に要する時間を短縮し、車両のドアの解錠を適切に制御することを目的とする。

上記目的を達成するため、本発明の制御装置は、車両に搭載された制御装置であって、顔画像を記憶した記憶部と、前記車両の外部を撮像する撮像装置によって撮像された撮像画像を取得する画像取得部と、前記画像取得部が取得した前記撮像画像から顔画像を抽出し、抽出した前記顔画像を、前記記憶部が記憶した前記顔画像と照合して認証を行う認証部と、前記撮像装置が備える光源を点灯させて、前記撮像装置が前記顔画像を撮像可能な位置を光学的に表示させる点灯制御部と、を備えることを特徴とする。

上記制御装置において、前記認証部は、顔画像の照合に成功した場合、前記車両の車体を制御する制御装置に、前記車両のドアロックの解錠を指示する構成でもよい。

上記制御装置において、前記認証部は、顔画像の照合に失敗した場合、前記車両が備える音声出力部を制御する制御装置に、予め設定された音声を出力させる構成でもよい。

上記制御装置において、前記画像取得部は、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記撮像装置に撮像を実行させる構成でもよい。

上記制御装置において、前記点灯制御部は、顔画像の照合に失敗した場合に、前記光源を点灯させる、又は前記光源を予め設定されたパターンで点滅させる構成でもよい。

上記制御装置において、前記点灯制御部は、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記光源を点灯させる構成でもよい。

本発明の車載装置は、撮像部と、前記撮像部を制御する制御部とを備え、車両に搭載された車載装置であって、前記撮像部は、光源を備え、前記制御部は、顔画像を記憶した記憶部と、前記撮像部が撮像した撮像画像を取得する画像取得部と、前記画像取得部が取得した前記撮像画像から顔画像を抽出し、抽出した前記顔画像を、前記記憶部が記憶した前記顔画像と照合して認証を行う認証部と、前記光源を点灯させる点灯制御部と、を備え、前記光源は、前記撮像部が顔画像を撮像可能な位置にて、前記光源の発光を目視となる位置に設置されている、ことを特徴とする。

上記車載装置において、前記撮像部は、前記撮像部を回転させる駆動部を備え、前記制御部は、前記車両の車体を制御する制御装置から、前記車両のドアロックの解錠を指示する信号を受信したとの通知を受けた場合に、前記駆動部を制御して、前記車両の車外を撮像可能な方向に前記撮像部を回転させる構成でもよい。

本発明の制御方法は、車両に搭載された制御装置の制御方法であって、前記車両の外部を撮像する撮像装置によって撮像された撮像画像を取得する取得ステップと、取得した前記撮像画像から顔画像を抽出する抽出ステップと、抽出した前記顔画像を、記憶部に記憶された前記顔画像と照合して認証を行う認証ステップと、前記撮像装置が備える光源を点灯させて、前記撮像装置が前記顔画像を撮像可能な位置を光学的に表示させる表示ステップと、を有することを特徴とする。

上記制御方法において、前記認証ステップにおいて顔画像の照合に成功した場合、前記車両の車体を制御する制御装置に、前記車両のドアロックの解錠を指示する指示ステップを有する構成でもよい。

上記制御方法において、前記認証ステップにおいて顔画像の照合に失敗した場合、前記車両が備える音声出力部を制御する制御装置に、予め設定された音声を出力させる報知ステップを有する構成でもよい。

上記制御方法において、前記表示ステップは、顔画像の照合に失敗した場合に、前記光源を点灯させる、又は前記光源を予め設定されたパターンで点滅させる構成でもよい。

上記制御方法において、前記表示ステップは、前記表示ステップは、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記光源を点灯させる構成でもよい。

本発明によれば、顔画像の認証に要する時間を短縮し、車両のドアの解錠を適切に制御可能にすることができる。

車載装置の構成図である。 撮像部の正面図である。 カバー部材の側面図である。 撮像部の撮像方向を示す図である。 制御装置の動作を示すフローチャートである。 撮像部の変形例を示す図である。

以下、添付図面を参照しながら本発明の実施形態について説明する。
図１は、本発明を適用した車載装置１の構成図である。
車載装置１は、車両に搭載された装置であり、車外にいる者の顔を撮像して、予め登録された顔画像との認証を行い、車両のドアの解錠を指示する装置である。車載装置１が搭載された車両を以下では自車両５という。

車載装置１は、撮像部１０、通信Ｉ／Ｆ２０、ＴＣＵ（Telematics Communication Unit）３０及び制御装置５０を備える。撮像部１０は、本発明の「撮像装置」の一例に対応する。

撮像部１０は、光照射部１１、光学系１３、赤外線イメージセンサ１５、信号処理部１７及び駆動部１９を備え、例えば、車両のダッシュボード１４１（図２参照）等に設置される。

光照射部１１は、赤外光を照射する赤外線ＬＥＤ（light emitting diode）１１１、１１３と、可視光を照射する可視光ＬＥＤ１１５を備える。可視光ＬＥＤ１１５は、本発明の「光源」の一例に相当する。

光学系１３は、例えば、レンズ（図２参照）や絞り等を備え、被写体の光学像を形成する。赤外線イメージセンサ１５は、光学系１３により集光された赤外光を電気信号に変換する。

信号処理部１７は、赤外線イメージセンサ１５から出力されるアナログ信号のＡＤ変換やノイズ除去等の各種信号処理を行う。信号処理部１７から出力されるデジタル画像データは、制御装置５０に入力される。

駆動部１９は、モーターや、このモーターを駆動する駆動回路等を備え、撮像部１０をパン方向に回転させる。撮像部１０が回動することにより、撮像部１０の撮像方向が変更される。

図２は、撮像部１０の正面図である。
撮像部１０は、正面において、レンズ１３１と、赤外線ＬＥＤ１１１、１１３と、可視光ＬＥＤ１１５とを備える。レンズ１３１は、撮像部１０の正面の中央に設置され、レンズ１３１の左右には、赤外線ＬＥＤ１１１、１１３がそれぞれ配置される。レンズ１３１は、赤外線ＬＥＤ１１１、１１３が照射した赤外光の反射光を、赤外線イメージセンサ１５に入射させる。また、レンズ１３１の上部には、可視光ＬＥＤ１１５が配置される。撮像部１０の外観は、図２の例に限定されない。

図３は、カバー部材１１７の側面図である。
可視光ＬＥＤ１１５は、撮像部１０が顔画像を撮像可能な位置にて、ユーザ７が可視光ＬＥＤ１１５の発光を目視となる位置に設置されている。具体的には、可視光ＬＥＤ１１５は、円柱形状のカバー部材１１７の内部に収容されている。このため、可視光ＬＥＤ１１５により照射される可視光が周囲に広がるのを防止することができる。可視光ＬＥＤ１１５が照射する可視光は、図３に示すＡの方向、すなわち、円柱形状のカバー部材１１７の軸方向であって、可視光ＬＥＤ１１５自体が視認可能な位置から見た場合に視認できる。

可視光ＬＥＤ１１５から照射される光の広がりが、カバー部材１１７によって防止されることで、可視光ＬＥＤ１１５が照射する光を視認可能な位置を制限することができる。可視光ＬＥＤ１１５が照射する光を視認可能な位置が、撮像部１０が顔を撮像可能な位置となるように、撮像部１０に可視光ＬＥＤ１１５及びカバー部材１１７を設けることで、撮像部１０が顔を撮像可能な位置にユーザ７を誘導することができる。

図４は、撮像部１０の撮像方向を示す図である。
図４に示す撮像部１０は、ダッシュボード１４１上であって、運転席と助手席との間に設置される。撮像部１０の設置位置は、図４に示す位置に限定されず、運転席側に設置してもよい。

撮像部１０は、駆動部１９の駆動により、撮像方向を、第１の方向と第２の方向とに変更することができる。図４に破線で示す方向が第１の方向に対応する。第１の方向は、運転席及び助手席に着座したユーザ７を撮像可能な方向である。また、図４に実線で示す方向が第２の方向に対応する。第２の方向は、自車両５の車外を撮像可能な方向であって、自車両５の運転席側の窓１４３に近づいたユーザ７を撮像可能な方向である。
撮像部１０の撮像方向を、第１の方向と第２の方向とに変更可能な構成とすることにより、ユーザ７が自車両５に搭乗するときには、撮像部１０が撮像した顔画像により顔認証を行うことできる。また、ユーザ７が自車両５に搭乗した後は、車内のユーザ７を撮像して、ユーザ７の状態監視を行うことができる。

図１に戻り、車載装置１の構成について引き続き説明する。
通信Ｉ／Ｆ２０は、インターフェイス回路を備える。通信Ｉ／Ｆ２０は、自車両５に搭載されたＥＣＵ（Electronic Control Unit）やセンサ等に通信バス２０１を介して接続される。通信Ｉ／Ｆ２０は、通信プロトコルに従ってＥＣＵやセンサとデータ通信を行う。本実施形態の通信Ｉ／Ｆ２０は、自車両５に搭載されたボディＥＣＵ２１０、音声ＥＣＵ２２１等とデータ通信を行う。通信バス２０１には、例えば、ＣＡＮ（Controller Area Network）、ＬＩＮ（Local Interconnect Network）、ＦｌｅｘＲａｙ（登録商標）、イーサネット（登録商標）等の規格に対応したバスを採用可能である。

ボディＥＣＵ２１０は、自車両５のボディ制御を行うコンピュータであり、受信部２１１と、認証部２１３とを備える。ボディＥＣＵ２１０は、本発明の「車体を制御する制御装置」の一例に対応する。受信部２１１は、ユーザ７が所持する電子キーから、高周波帯の電波を介して送信される施錠信号及び解錠信号を受信する。認証部２１３は、受信部２１１が受信した施錠信号又は解錠信号に含まれるキーＩＤが、不図示の記憶部に予め記憶されたキーＩＤと一致するか否かを判定し、施錠信号又は解錠信号が正当な電子キーから送信されたものであることを認証する。ボディＥＣＵ２１０は、認証部２１３が認証に成功した場合、認証が成功したことを通知する通知信号を制御装置５０に通知する。また、ボディＥＣＵ２１０は、認証部２１３が認証に失敗した場合、電子キーから施錠信号又は解錠信号を再度受信するまで待機する。

音声ＥＣＵ２２１は、音声出力の制御を行うコンピュータである。音声ＥＣＵ２２１は、本発明の「音声出力部を制御する制御装置」の一例に対応する。音声ＥＣＵ２２１は、音声ＥＣＵ２２１の記憶部（不図示）に記憶されている音声情報を用いてスピーカ２２３から音声を出力する。スピーカ２２３は、本発明の「音声出力部」の一例に対応する。

ＴＣＵ３０は、通信装置である。ＴＣＵ３０は、例えば、ＬＴＥ（Long Term Evolution）や４Ｇ等の通信規格に従って、ユーザ７が所持するスマートフォンや携帯電話等の携帯機器２５０と通信を行う。

制御装置５０は、記憶部６０と、プロセッサ７０と、を備える。制御装置５０は、本発明の「制御装置」及び「制御部」に相当する。

記憶部６０は、例えば、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）やフラッシュメモリ等の不揮発性の半導体メモリにより構成される。記憶部６０は、プロセッサ７０が実行する制御プログラム６１や、自車両５のユーザ７の顔画像から抽出した第１照合用データ６３を記憶する。第１照合用データ６３は、ユーザ７の顔画像から目、鼻、口等の顔の特徴点を検出し、検出した特徴点の位置関係を正規化することで得られたデータである。第１照合用データ６３は、顔画像から抽出される「特徴量」に相当する。また、記憶部６０は、ユーザ情報６５を記憶する。ユーザ情報６５には、ユーザ７が所持する携帯機器２５０の電話番号や電子メールアドレス等が含まれる。

プロセッサ７０は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）により構成される演算装置である。プロセッサ７０は、制御プログラム６１を実行して車載装置１の各部を制御する。プロセッサ７０は、単一のプロセッサにより構成してもよいし、複数のプロセッサにより構成することも可能である。また、プロセッサ７０は、記憶部６０の一部又は全部、若しくはその他の回路と統合されたＳｏＣ（System on Chip）により構成してもよい。また、プロセッサ７０は、プログラムを実行するＣＰＵと、所定の演算処理を実行するＤＳＰ（Digital Signal Processor）との組み合せにより構成してもよい。さらに、プロセッサ７０の機能の全てをハードウェアに実装した構成としてもよく、プログラマブルデバイスを用いて構成してもよい。

制御装置５０は、機能ブロックとして、画像取得部７１、撮像方向制御部７３、点灯制御部７５、顔認証部７７及び報知制御部７９を備える。これらの機能ブロックは、プロセッサ７０が制御プログラム６１に記述された命令セットを実行してデータの演算や制御を行うことにより実現される機能をブロックにより示したものである。顔認証部７７は、本発明の「認証部」に相当する。

画像取得部７１は、撮像部１０に撮像を実行させ、撮像部１０が撮像した撮像画像を取得する。画像取得部７１は、例えば、ボディＥＣＵ２１０からキーＩＤの認証に成功したことを通知する通知信号を受信した場合に、撮像部１０に撮像を実行させる。画像取得部７１は、撮像部１０が撮像した撮像画像を記憶部６０に一時的に記憶させる。

撮像方向制御部７３は、撮像部１０の撮像方向を制御する。撮像方向制御部７３は、撮像部１０に駆動信号を出力し、撮像部１０の撮像方向を第１の方向と、第２の方向とのいずれかに切り替える。例えば、撮像方向制御部７３は、ボディＥＣＵ２１０から通知信号を受信した場合であって、撮像部１０の撮像方向が第１の方向である場合、撮像方向を第１の方向から第２の方向に切り替える。

点灯制御部７５は、光照射部１１の赤外線ＬＥＤ１１１、１１３、及び可視光ＬＥＤ１１５の点灯及び消灯を制御する。
例えば、点灯制御部７５は、ボディＥＣＵ２１０から通知信号を受信した場合に、赤外線ＬＥＤ１１１、１１３を点灯させる。また、点灯制御部７５は、ボディＥＣＵ２１０から通知信号を受信した場合や、撮像部１０が顔画像の撮像に失敗した場合に、可視光ＬＥＤ１１５を予め設定されたパターンで点滅させてもよい。可視光ＬＥＤ１１５を点灯させることで、撮像部１０が顔画像を撮像可能な位置を光学的に表示させることができる。また、撮像部１０が顔画像の撮像に失敗した場合に、可視光ＬＥＤ１１５を点滅させることで、撮像部１０が顔画像を撮像可能な位置を光学的に表示させることができ、さらに、顔画像の撮像に失敗したことをユーザ７に通知することができる。

顔認証部７７は、撮像部１０が撮像した撮像画像から顔画像を抽出し、抽出した顔画像に基づいて顔認証を行う。
顔認証部７７は、まず、顔抽出処理を実行して顔画像を抽出する。顔認証部７７は、一定サイズ以上の肌色領域を顔領域と判定する。顔認証部７７は、顔領域を検出できない場合、撮像画像に顔画像が撮像されていないと判定する。

顔認証部７７は、撮像画像から顔画像を検出した場合、特徴点検出処理を実行する。顔認証部７７は、顔画像において、目、鼻、口等の顔の特徴点の位置を特定する。顔認証部７７は、得られた特徴点の位置関係を正規化して照合用データを生成する。生成した照合用データを、以下では第２照合用データという。第２照合用データは、顔画像から抽出される「特徴量」に相当する。

顔認証部７７は、第１照合用データ６３と第２照合用データとを比較して、第１照合用データ６３と第２照合用データとの一致度を示す数値を算出する。撮像部１０が撮像した人物が、登録されたユーザ７であれば、第１照合用データ６３と第２照合用データとの一致度を示す数値が大きくなる。顔認証部７７は、算出した数値が、予め設定された設定値よりも小さい場合、撮像画像に撮像された人物は、登録されたユーザ７ではないと判定する。また、顔認証部７７は、算出した数値が、予め設定された設定値以上である場合、撮像画像に撮像された人物は、登録されたユーザ７であると判定する。

報知制御部７９は、顔認証部７７が、撮像画像に顔画像が撮像されていないと判定した場合、音声ＥＣＵ２２１に、予め設定された音声を出力するように指示する。音声ＥＣＵ２２１は、制御装置５０から指示が入力されると、スピーカ２２３から予め設定された報知音を出力する。また、顔認証部７７が、撮像画像に顔画像が撮像されていないと判定した場合、点灯制御部７５が、可視光ＬＥＤ１１５を、予め設定された点滅パターンで点滅させてもよい。例えば、点灯制御部７５は、ボディＥＣＵ２１０から通知信号を受信したときに可視光ＬＥＤ１１５を点灯させている。点灯制御部７５は、顔認証部７７が、撮像画像に顔画像が撮像されていないと判定した場合、可視光ＬＥＤ１１５を点滅させる。

また、報知制御部７９は、撮像画像から抽出した顔画像に基づいて生成した第２照合用データと、記憶部６０に記憶したユーザ７の第１照合用データ６３とが一致しなかった場合、ＴＣＵ３０を制御して、ユーザ情報６５に含まれる電話番号に発呼する。報知制御部７９は、予め登録された電話番号に発呼し、自車両５のドアロックを解除しようとする者がいることを音声出力する。また、報知制御部７９は、ユーザ情報６５に含まれるメールアドレスを取得し、取得したメールアドレス宛に、自車両５のドアロックを解除しようとする者がいることを案内するメッセージを送信してもよい。

図５は、制御装置５０の動作を示すフローチャートである。
図５に示すフローチャートを参照しながら制御装置５０の動作を説明する。
制御装置５０は、まず、ボディＥＣＵ２１０から通知信号が入力されたか否かを判定する（ステップＳ１）。制御装置５０は、通知信号の入力がない場合（ステップＳ１／ＹＥＳ）、Ｏ）、通知信号が入力されるまで待機する。また、制御装置５０は、通知信号が入力されると（ステップＳ１／ＹＥＳ）、撮像部１０に電源を供給して撮像部１０を起動する（ステップＳ２）。その後、制御装置５０は、駆動部１９を制御して撮像部１０を駆動し、撮像部１０の撮像方向を、第１の方向から第２の方向に変更する（ステップＳ３）。

次に、制御装置５０は、赤外線ＬＥＤ１１１、１１３を点灯して赤外光を照射させる（ステップＳ４）。また、制御装置５０は、可視光ＬＥＤ１１５を点灯し（ステップＳ５）、撮像部１０の撮像位置を、可視光ＬＥＤ１１５が照射する光によって光学的に表示する。次に、制御装置５０は、撮像部１０に撮像を指示して、撮像部１０が撮像した撮像画像を取得する（ステップＳ６）。ステップＳ６は、本発明の「取得ステップ」に相当する。制御装置５０は、取得した撮像画像を記憶部６０に一時的に記憶させる。

次に、制御装置５０は、記憶部６０から撮像画像を読み出し、読み出した撮像画像に対して顔抽出処理を実行する（ステップＳ７）。ステップＳ７は、本発明の「抽出ステップ」に相当する。制御装置５０は、顔抽出処理により顔画像を抽出できなかった場合（ステップＳ８／ＮＯ）、報知動作の実行を指示する（ステップＳ９）。制御装置５０は、音声ＥＣＵ２２１に、予め設定された音声を出力するように指示する。予め設定された報知音をスピーカ２２３から出力することで、顔画像の撮像に失敗したことをユーザ７に認識させることできる。また、制御装置５０は、可視光ＬＥＤ１１５を、予め設定された点滅パターンで点滅させてもよい。可視光ＬＥＤ１１５を点滅させることで、顔画像の撮像に失敗したことをユーザ７に認識させることができる。ステップＳ９は、本発明の「表示ステップ」及び「報知ステップ」に相当する。

また、制御装置５０は、顔抽出処理により顔画像を抽出した場合（ステップＳ８／ＹＥＳ）、特徴点検出処理を実行して第２照合用データを生成する（ステップＳ１０）。制御装置５０は、第２照合用データを生成すると、記憶部６０から第１照合用データを読み出し、第１照合用データと第２照合用データとを照合する（ステップＳ１１）。ステップＳ１１は、本発明の「認証ステップ」に相当する。制御装置５０は、第１照合用データと第２照合用データとの一致度を示す数値を算出して第１照合用データと第２照合用データとを照合する。制御装置５０は、算出した数値が、予め設定された設定値よりも小さい場合、第１照合用データと第２照合用データとは一致していないと判定する（ステップＳ１１／ＮＯ）。この場合、制御装置５０は、ＴＣＵ３０を制御して、ユーザ情報６５に含まれる電話番号に発呼し、自車両５のドアロックの解除を試みた者がいることを通知する（ステップＳ１２）。

また、制御装置５０は、算出した数値が、予め設定された設定値以上である場合、第１照合用データと第２照合用データとが一致したと判定する（ステップＳ１１／ＹＥＳ）。この場合、制御装置５０は、ドアロックの解除をボディＥＣＵ２１０に指示する（ステップＳ１３）。ステップＳ１３は、本発明の「指示ステップ」に相当する。

以上説明したように本実施形態の制御装置５０は、自車両５に搭載された制御装置であって、記憶部６０、画像取得部７１、顔認証部７７及び点灯制御部７５を備える。
記憶部６０は、顔画像から抽出した第１照合用データ６３を記憶する。
画像取得部７１は、自車両５の外部を撮像する撮像部１０により撮像された撮像画像を取得する。
顔認証部７７は、画像取得部７１が取得した撮像画像から顔画像を抽出し、抽出した顔画像を、記憶部６０が記憶した顔画像と照合して認証を行う。
点灯制御部７５は、撮像部１０が可視光ＬＥＤ１１５を点灯させて、撮像部１０が顔画像を撮像可能な位置を光学的に表示させる。
従って、ユーザ７は、光学的に表示された位置に顔を合わせることで、撮像部１０がユーザ７の顔画像の撮像に成功する確率を高めることができる。このため、顔認証に要する時間を短縮することでき、車両のドアの解錠を適切に制御することができる。

顔認証部７７は、顔画像の照合に成功した場合、ボディＥＣＵ２１０に、自車両５のドアロックの解錠を指示する。
従って、顔画像の照合により自車両５のドアロックを解錠することができる。

顔認証部７７は、顔画像の照合に失敗した場合、音声ＥＣＵ２２１に、予め設定された音声を出力させる。
従って、予め設定された音声をスピーカ２２３から出力することで、顔画像の撮像に失敗したことをユーザ７に通知することができる。

画像取得部７１は、ボディＥＣＵ２１０から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、撮像部１０に撮像を実行させる。
従って、顔画像による認証に加えて電子キーによる認証を行うことで、自車両５のセキュリティーを向上させることができる。

点灯制御部７５は、顔画像の照合に失敗した場合に、前記光源を点灯させる、又は可視光ＬＥＤ１１５を予め設定されたパターンで点滅させる。
従って、顔画像の照合に失敗したことをユーザ７に通知することができる。また、光源が点灯又は点滅することで、撮像部１０が顔画像を撮像可能な位置をユーザ７に認識させることができる。

点灯制御部７５は、ボディＥＣＵ２１０から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、可視光ＬＥＤ１１５を点灯させる。
従って、電子キーによる認証に成功した場合、可視光ＬＥＤ１１５を点灯させて、撮像部１０が顔画像を撮像可能な位置をユーザ７に通知することができる。

撮像部１０は、撮像部１０を回転させる駆動部１９を備える。
制御装置５０は、ボディＥＣＵ２１０から、自車両５のドアロックの解錠を指示する信号を受信したとの通知を受けた場合に、駆動部１９を制御して、車両の車外を撮像可能な方向に撮像部１０を回転させる。
従って、ユーザ７が自車両５に搭乗するときには、撮像部１０に顔認証用の撮像画像を撮像させることができる。また、ユーザ７が自車両５に搭乗した後は、車内のユーザ７を撮像して、ユーザ７の状態を監視することできる。

図６は、撮像部１０の変形例を示す図である。
上述した実施形態では、撮像部１０に駆動部１９を設けて、撮像部１０の撮像方向を第１の方向又は第２の方向に切り替える構成を説明した。
撮像部１０の他の構成として、図６に示すように、撮像部１０が第１レンズ１３３と、第２レンズ１３５とを備える構成であってもよい。制御装置５０は、ボディＥＣＵ２１０から通知信号を受信した場合に、レンズを、第１レンズ１３３から第２レンズ１３５に切り替える。第１レンズ１３３と第２レンズ１３５とはレンズの画角が異なる。第１レンズ１３３は、画角が標準、又は標準よりも狭いレンズであり、第２レンズ１３５は、画角が第１レンズ１３３よりも広い広角のレンズである。第２レンズ１３５の画角は、運転席に着座したユーザ、及び自車両５の運転席側の窓１４３に近づいたユーザ７を撮像可能な画角を有している。

上述した実施形態は、本発明の好適な実施の形態である。但し、本発明は、上述した実施形態に限定されることなく、本発明の要旨を逸脱しない範囲内において種々の変形実施が可能である。
例えば、図１には、車載装置１が、撮像部１０及び制御装置５０を備える構成を図示したが、撮像部１０と、制御装置５０とをそれぞれ別体の装置として構成してもよい。

また、図１は、本願発明を理解容易にするために、車載装置１の機能構成を主な処理内容に応じて分類して示した概略図であり、車載装置１の構成は、処理内容に応じてさらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。また、各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。また、各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。

また、図１に示した制御装置５０において、プロセッサ７０により実行される制御プログラム６１は、例えば、通信ネットワークを介して外部のサーバ装置からダウンロードされ、記憶部６０にロードされてプロセッサ７０により実行されるようにしてもよい。また、通信ネットワークを介して、外部のサーバ装置から記憶部６０に直接ロードされ、プロセッサ７０により実行されるようにしてもよい。或いは、制御装置５０に接続された記憶媒体から、記憶部６０にロードされるようにしてもよい。

また、図５に示したフローチャートの処理単位は、制御装置５０による処理の理解を容易にするために、主な処理内容に応じて分割したものである。処理単位の分割の仕方や名称によって本発明が制限されることはない。制御装置５０の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、同様の処理結果が得られるのであれば、上記各フローチャートの処理順序も、図示した例に限られるものではない。

また、本発明の制御方法を、コンピュータを用いて実現する場合、このコンピュータに実行させるプログラムを記録媒体、又はこのプログラムを伝送する伝送媒体の態様で構成することも可能である。記録媒体には、磁気的、光学的記録媒体又は半導体メモリーデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ（Hard Disk Drive）、ＣＤ−ＲＯＭ（Compact Disk Read Only Memory）、ＤＶＤ、Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリ、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。また、上記記録媒体は、制御装置５０が備えるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。

１ 車載装置
５ 車両
７ ユーザ
１０ 撮像部
１１ 光照射部
１３ 光学系
１５ 赤外線イメージセンサ
１７ 信号処理部
１９ 駆動部
２０ 通信Ｉ／Ｆ
３０ ＴＣＵ
５０ 制御装置
６０ 記憶部
６１ 制御プログラム
６３ 第１照合用データ
６５ ユーザ情報
７０ プロセッサ
７１ 画像取得部
７３ 撮像方向制御部
７５ 点灯制御部
７７ 顔認証部
７９ 報知制御部
１１１、１１３ 赤外線ＬＥＤ
１１５ 可視光ＬＥＤ
１１７ カバー部材
１３１ レンズ
１３３ 第１レンズ
１３５ 第２レンズ
１４１ ダッシュボード
１４３ 窓
２０１ 通信バス
２１０ ボディＥＣＵ
２１１ 受信部
２１３ 認証部
２２１ 音声ＥＣＵ
２２３ スピーカ
２５０ 携帯機器

Claims (14)

1. 車両に搭載された制御装置であって、
   顔画像を記憶した記憶部と、
   前記車両の外部を撮像する撮像装置によって撮像された撮像画像を取得する画像取得部と、
   前記画像取得部が取得した前記撮像画像から顔画像を抽出し、抽出した前記顔画像を、前記記憶部が記憶した前記顔画像と照合して認証を行う認証部と、
   前記撮像装置が備える光源を点灯させて、前記撮像装置が前記顔画像を撮像可能な位置を光学的に表示させる点灯制御部と、
   を備えることを特徴とする制御装置。
2. 前記認証部は、顔画像の照合に成功した場合、前記車両の車体を制御する制御装置に、前記車両のドアロックの解錠を指示する、ことを特徴とする請求項１記載の制御装置。
3. 前記認証部は、顔画像の照合に失敗した場合、前記車両が備える音声出力部を制御する制御装置に、予め設定された音声を出力させる、ことを特徴とする請求項１又は２記載の制御装置。
4. 前記画像取得部は、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記撮像装置に撮像を実行させる、ことを特徴とする請求項１から３のいずれか１項に記載の制御装置。
5. 前記点灯制御部は、顔画像の照合に失敗した場合に、前記光源を点灯させる、又は前記光源を予め設定されたパターンで点滅させる、ことを特徴とする請求項１から４のいずれか１項に記載の制御装置。
6. 前記点灯制御部は、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記光源を点灯させる、ことを特徴とする請求項１から４のいずれか１項に記載の制御装置。
7. 撮像部と、前記撮像部を制御する制御部とを備え、車両に搭載された車載装置であって、
   前記撮像部は、光源を備え、
   前記制御部は、
   顔画像を記憶した記憶部と、
   前記撮像部が撮像した撮像画像を取得する画像取得部と、
   前記画像取得部が取得した前記撮像画像から顔画像を抽出し、抽出した前記顔画像を、前記記憶部が記憶した前記顔画像と照合して認証を行う認証部と、
   前記光源を点灯させる点灯制御部と、を備え、
   前記光源は、前記撮像部が顔画像を撮像可能な位置にて、前記光源の発光を目視となる位置に設置されている、ことを特徴とする車載装置。
8. 前記撮像部は、前記撮像部を回転させる駆動部を備え、
   前記制御部は、前記車両の車体を制御する制御装置から、前記車両のドアロックの解錠を指示する信号を受信したとの通知を受けた場合に、前記駆動部を制御して、前記車両の車外を撮像可能な方向に前記撮像部を回転させる、ことを特徴とする請求項７記載の車載装置。
9. 車両に搭載された制御装置の制御方法であって、
   前記車両の外部を撮像する撮像装置によって撮像された撮像画像を取得する取得ステップと、
   取得した前記撮像画像から顔画像を抽出する抽出ステップと、
   抽出した前記顔画像を、記憶部に記憶された前記顔画像と照合して認証を行う認証ステップと、
   前記撮像装置が備える光源を点灯させて、前記撮像装置が前記顔画像を撮像可能な位置を光学的に表示させる表示ステップと、
   を有することを特徴とする制御方法。
10. 前記認証ステップにおいて顔画像の照合に成功した場合、前記車両の車体を制御する制御装置に、前記車両のドアロックの解錠を指示する指示ステップを有する、ことを特徴とする請求項９記載の制御方法。
11. 前記認証ステップにおいて顔画像の照合に失敗した場合、前記車両が備える音声出力部を制御する制御装置に、予め設定された音声を出力させる報知ステップを有する、ことを特徴とする請求項９又は１０記載の制御方法。
12. 前記取得ステップは、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記撮像装置に撮像を実行させる、ことを特徴とする請求項９から１１のいずれか１項に記載の制御方法。
13. 前記表示ステップは、顔画像の照合に失敗した場合に、前記光源を点灯させる、又は前記光源を予め設定されたパターンで点滅させる、ことを特徴とする請求項９から１２のいずれか１項に記載の制御方法。
14. 前記表示ステップは、前記車両の車体を制御する前記制御装置から、電子キーとの間で、無線通信による認証処理に成功したとの通知を受信した場合に、前記光源を点灯させる、ことを特徴とする請求項９から１２のいずれか１項に記載の制御方法。

Images