JPH0796803A - 車両用インタフェース - Google Patents

Abstract

(57)【要約】 【目的】 運転者に非接触で運転者の注目する方向に関
連させて付属装置を制御する。 【構成】 不可視光の第１、第２照明２、３で運転者１
５の顔面を照らし、画像入力部１で顔面領域の画像を入
力する。画像メモリに格納された画像データから眼球特
徴抽出部７で角膜反射像や瞳孔領域を抽出し、視線方向
算出部８で運転者の視線方向を算出する。移動平均算出
部９で視線方向の移動平均を算出して、照射範囲可変型
の補助前照灯１１により、移動平均の方向を照射する。
非接触で視線方向を求め、その時間的な変化量に応じて
照射方向を決定するから、運転者を束縛せず、また視線
の微動によって不用の変動を招くことがない。他にＴＶ
カメラを付属装置とするときには、視線方向を撮影させ
て、道路標識などを再度確認することもできる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は車両用インタフェースに
関し、例えば、車両などの運転者の視線方向に追従し
て、照射方向を制御したり、撮影範囲を制御する車両用
インタフェースに関する。

【０００２】

【従来の技術】近年、この種の車両用インタフェースに
は、移動体に適用した例として、車両用前照灯の制御装
置がある。 通常、車両用前照灯は、車両の前方付近を
最も明るく照らすように設計されており、その照射方向
は変更できない。一方、ドライバが運転時に必要とする
情報は、必ずしも車両の前方のみから入ってくる訳では
なく、直進時に側方の人影に注目したり、右左折時に斜
め前方を注目したり等、広範囲から得る必要がある。と
ころが、従来の前照灯では照射方向が固定されているた
め、広範囲から必要な情報を十分に得るのが難しい。

【０００３】そこで、前照灯の、照射方向を可変にする
従来技術として、特開平２−１１９００２号公報及び実
開平２−９５１０１号公報等に開示されているものがあ
る。これらの従来技術は、ステアリングの操舵角に連動
して前照灯の照射方向を変更し、車両の進行方向を明る
く照らすようにしている。また最近では、右左折時のウ
インカ操作に連動して、曲がる方向に照射するコーナリ
ングランプを備えた車両が実用化されている。

【０００４】しかしながら、上記の技術では、ステアリ
ングの操舵角やウインカの作動状態に応じて照射方向や
照射状態を制御するため、運転者が本当に見たい方向を
照射しているとは限らないという問題があった。また、
直進時には側方を照射することができないため、路側の
歩行者や自転車の存在を素早く認知できないおそれがあ
るという問題があった。

【０００５】運転者が見たい方向という観点からは、特
開平２−５４８９８号公報に、ドライバの視線の方向に
照明の照射方向を変える技術が開示されている。この視
線による従来の車両用インタフェースは図１７に示す構
成を有する。光源８１は運転者の視線方向に位置する対
象物８４を照射し、電源回路８２は光源８１に電気を供
給する。駆動部８３は光源８１を駆動して、照射方向を
設定する。視線方向検出部８５は運転者の視線方向を検
出し、制御部８６は、視線方向検出部８５で検出された
視線方向に光源８１の照射方向を移動させるように、駆
動部８３の動作を制御する。

【０００６】視線方向検出部８５には、アイマークカメ
ラ（登録商標）やＥＯＧ（登録商標）が使用されてい
る。アイマークカメラの場合には、運転者の頭部に装着
するゴーグルに、光源と、該光源から照射された光の反
射光を検知する光検知素子と検知した反射光から視線方
向を演算する回路等を具備した構成が用いられる。また
ＥＯＧの場合には、運転者の目の側部に電極を設置し
て、眼球を動かしたときに発生する電圧を検知して、こ
の電圧の変化から眼球の動きを演算し、視線方向を検出
する構成が用いられる。視線方向検出部８５は、アイマ
ークカメラ、ＥＯＧのいずれの構成の場合においても、
運転者の人体に直接設置するものである。

【０００７】この車両用インタフェースでは、対象物８
４に運転者の視線方向が向くと、視線方向検出部８５に
より、視線方向が検出される。制御部８６は、視線方向
検出部８５から受けとった視線方向の情報に従って、駆
動部８３に、光源８１の駆動方向を指示する。駆動部８
３は、指示された駆動方向に従って光源８１を駆動し、
照射方向を設定する。この際、視線の微細な運動、すな
わち、特定周波数成分を除去して、照明の照射方向を制
御するようになっている。このようにして、対象物８４
は、視線方向に追随して移動する光源８１から照射され
る。

【０００８】車両には上述した前照灯制御のほか、快適
な運転支援のため、車両の自車位置を道路地図上にマッ
ピングして、自車の存在位置や進行方向を明確にするナ
ビゲーションシステム（以下ナビシステムという）が実
用化されており、これにより不案内な場所でも道路形状
や自車位置に関する情報が呈示され、快適な走行が促進
される。

【０００９】しかし、ナビシステムでは道路形状や自車
位置情報は得られるが、道路標識、電光掲示板、特定の
建造物、個人的な興味の対象等の運転者の視点からの情
報については対応できないのが現状であり、運転者に提
供できる情報に限界がある場合、運転中に見落とされた
情報や既に通過した場所の情報が得られないこともある
ので、目的地までスムーズに運行できなくなる場合があ
る。このような運転者の視点からの情報についても、運
転者の視線方向に基づくインタフェースを用いて必要情
報を入手記録して利用を図ることが考えられる。

【００１０】

【発明が解決しようとする課題】しかしながら、特開平
２−５４８９８号公報のものでは、単に特定周波数成分
をカットしただけでは、眼球の固視微動が完全に除去で
きる保証はなく、照明の動きがぎこちなくなるおそれが
ある。さらに、ドライバの視線の方向を照射する構成に
なっているが、運転者は、まず周辺視によって注意すべ
きものの存在を見付け、その点に視線を移す眼球運動を
行っているというプロセスを考えると（視覚情報処理、
第３６８頁、田崎京二著、朝倉書店参照）、単に視線方
向を照射しただけの構成なので、運転者が本当に見たい
方向を照射できないおそれがあるという問題があった。

【００１１】さらにまた、この装置では、視線方向を検
出するために、直接、人体に器具を設置しなければなら
ないので、運転者にとって鬱陶しく、使い勝手が悪いと
いう問題があった。したがって本発明は、このような従
来の問題点に着目し、運転者の注目する方向に対応して
付属装置を制御する場合に、運転者に非接触で、精度良
く、安定して、運転者の注目する方向を得ることができ
る車両用インタフェースを提供することを目的とする。

【００１２】

【課題を解決するための手段】このため、請求項１に記
載の本発明は、運転者の顔面領域の画像データを入力す
る画像入力手段と、画像入力手段により入力された画像
データに基づいて運転者の視線方向を検出する視線方向
検出手段と、視線方向検出手段により検出された視線方
向に応じて車両に設置された付属装置を位置決め制御す
る制御手段とを備えるものとした。

【００１３】請求項２に記載の発明は、さらに視線方向
検出手段により検出された視線方向の時間的な変化量を
検出する視線変化検出手段を備え、制御手段が視線方向
の変化量に応じて付属装置を位置決め制御するものとし
た。また請求項３に記載の発明は、上記車両に設置され
た付属装置をその照射方向を制御可能な照明手段とし、
制御手段が視線変化検出手段により検出された視線方向
の変化量に応じて上記照明手段の照射方向を制御するも
のとした。制御手段は上記変化量としてとくに視線方向
の移動平均を求め、この移動平均の方向に照射方向に定
めるものとすることができる。上記の移動平均は、さら
に運転者の正面方向に高い重みを持たせた重み付き移動
平均とすることができる。

【００１４】また請求項６に記載の発明は、制御手段
が、視線方向の周辺視の方向を照明手段の照射方向に定
めるものとした。この際、視線方向の変化が小さいとき
には、その注視方向を照射方向とすることができる。さ
らには、車両前方を複数の領域に分割し、そのうち検出
された視線方向が属する領域を照明手段の照射方向とす
ることもできる。

【００１５】請求項９に記載の発明は、上記車両に設置
された付属装置をその撮影条件を制御可能な撮影手段と
し、制御手段が視線方向に応じて上記撮影手段の撮影条
件を制御するものとした。また請求項１０に記載の発明
は、視線変化検出手段により検出された視線方向の変化
量に応じて上記撮影手段の撮影条件を制御するものとし
た。そして請求項１１に記載の発明は、さらに撮影手段
の撮影により得られた映像を映像データとして記憶する
記憶手段と、該記憶手段に記憶された映像データに基づ
く映像を再生する再生手段とを備えるものとした。上記
の撮影条件は、撮影方向とすることができる。

【００１６】また、請求項１３に記載の発明は、撮影条
件を、撮影方向に加え、画角とし、制御手段が、視線方
向の注視時間を計測する注視時間計測部を有して、注視
時間が長いときには撮影手段の画角を狭視野に、注視時
間が短いときは画角を広視野に制御するものとした。な
お、本発明における画像入力手段は、撮像手段と、該撮
像手段と共軸に配置された第１の照明と、撮像手段と非
共軸に配置された第２の照明とを有し、視線方向検出手
段は、撮像手段で撮像された上記第１および第２の照明
による運転者の眼球の反射光の位置に基づいて視線方向
を算出するものとすることができる。

【００１７】

【作用】請求項１の車両用インタフェースは、車両に設
置された付属装置を位置決め制御する場合、運転者の顔
面領域の画像データを入力し、入力された画像データに
基づいて運転者の視線方向を検出し、検出された視線方
向に応じて、制御手段が上記付属装置の位置決め制御を
行う。請求項２に記載のものでは、さらに視線変化検出
手段で視線方向の時間的な変化量を検出し、制御手段は
この視線方向の変化量に応じて付属装置を位置決め制御
する。これにより視線の微動によって不用の変動を招く
ことがない。

【００１８】請求項３のものは、運転者の顔面領域の画
像を入力し、入力された顔面画像に基づいて運転者の視
線方向を検出し、制御手段が視線方向の時間的な変化量
を検出し、検出された変化量に応じて例えば前照灯など
の照明手段の照射方向を制御する。これにより、例えば
運転者が注目している方向が照明される。請求項６のも
のでは、検出された視線方向の周辺視の方向が照明手段
の照射方向とされるので、運転者が注目している方向の
周辺視環境の視界が向上し、運転環境が容易に認識され
る。

【００１９】請求項９に記載の発明では、車両に設置さ
れた撮影手段を制御するに際して、運転者の顔面領域の
画像を入力し、入力された顔面画像に基づいて運転者の
視線方向を検出し、制御手段が視線方向に応じて上記撮
影手段の例えば撮影方向などの撮影条件を制御する。請
求項１０のものでは、さらに視線変化検出手段で視線方
向の時間的な変化量を検出し、制御手段はこの視線方向
の変化量に応じて上記撮影手段の撮影条件を制御する。
これにより視線の微動によって撮影条件に不用の変動を
招くことがない。

【００２０】請求項１１に記載の発明では、撮影手段の
撮影により得られた映像が映像データとして記憶手段に
記憶され、再生手段により映像が再生される。これによ
り視線方向に関連した情報を再現し確認することができ
る。請求項１３のものは、制御手段が視線方向の注視時
間を計測する注視時間計測部を有して、撮影条件として
視線方向に基づいて撮影方向を制御するとともに、、注
視時間が長いときには撮影手段の画角を狭視野に、注視
時間が短いときは画角を広視野に制御する。これによ
り、注視時間の長い注目方向ほど狭い範囲が大きく撮影
される。

【００２１】

【実施例】以下、この発明を図面に基づいて説明する。
図１〜図５は、この発明を車両用前照灯の制御に適用し
た第１の実施例を示す。本実施例は、補助前照灯として
照射範囲可変型灯具を用い、運転者の視線方向の時間変
化する各Ｎ個のデータから算出した移動平均の方向に補
助前照灯の照射範囲を制御し、注意の向いている方向を
より明るく照らすものである。

【００２２】まず図１により構成を説明する。 車両の
運転者１５に対向して配置されその顔面領域の画像を入
力するＣＣＤ（電荷結合デバイス）センサ等を有する画
像入力部１が設けられ、顔面領域のアナログの画像デー
タを出力する。近赤外ＬＥＤ等の不可視光を発する第１
照明２が、画像入力部１のレンズ軸中心に、画像入力部
と共軸系をなすように配される。第１照明２との相対関
係が既知の位置に第１照明２と同一仕様を有する第２照
明３が設置される。第１照明２及び第２照明３の発光は
照明発光制御部４により制御される。

【００２３】画像入力部１から入力した画像信号はＡ／
Ｄ変換器５でディジタルデータに変換され、画像メモリ
６に格納される。画像メモリ６には眼球特徴抽出部７が
接続され、格納された画像データから視線計測に必要な
角膜反射像や瞳孔領域を抽出する。これら抽出された眼
球特徴の位置関係を基に視線方向算出部８が運転者の視
線方向を算出し、算出した視線方向データにより、移動
平均算出部９がその移動平均を算出する。

【００２４】照射方向制御部１０は、移動平均算出部９
からの移動平均を基に、車両前端に設置された補助前照
灯１１の照射方向を制御するとともに、前照灯方向表示
部１２に補助前照灯１１の照射方向を伝える。補助前照
灯１１は照射方向可変機能を有する灯具を具備した付属
装置で、車両前方領域を照射範囲とする。前照灯方向表
示部１２は、照射方向制御部１０から伝えられた照射方
向を基に補助補助前照灯１１の現在の照射方向を運転者
に向けて表示する。

【００２５】Ａ／Ｄ変換器５および照明発光制御部４に
接続されて、装置全体を制御する全体制御部１４が設け
られ、また全体制御部１４と照射方向制御部１０には、
補助前照灯１１の移動平均による方向制御を解除する解
除信号を伝える制御解除スイッチ１３が接続されてい
る。照射方向制御部１０は、解除信号に従って、照射方
向を予め決められた所定の方向に移動させる。全体制御
部１４は、装置全体を制御するＣＰＵ（中央処理装
置）、各種制御プログラムを格納したＲＯＭ、各種プロ
グラムのワークエリアとして用いるＲＡＭを具備する。

【００２６】上記構成における運転者の視線方向算出ま
での処理は図２のフローにしたがって行なわれる。全体
制御部１４から、図示しない前照灯スイッチに連動さ
せ、計測開始信号を出力して装置が起動されると、ま
ず、ステップ１０１において、画像入力部による画像の
取り込みが行なわれる。すなわち、照明発光制御部４か
らの照明発光信号によって、第２照明３は消灯したま
ま、第１照明２が点灯され、同時に画像入力部１で運転
者１５の顔面領域の画像が取り込まれる。取り込まれた
画像は、Ａ／Ｄ変換器５でＡ／Ｄ変換され、ステップ１
０２で、ディジタル画像Ｉ１（ｘ、ｙ）として画像メモ
リ６に格納記憶される。

【００２７】画像Ｉ１（ｘ、ｙ）が格納されたあと、ス
テップ１０３において、照明発光制御部４からの照明発
光信号によって、こんどは第１照明２が消灯され、第２
照明３が点灯される。そして同時に、画像入力部１によ
り再度運転者１５の顔面領域の画像が取り込まれる。取
り込まれた画像は、Ａ／Ｄ変換器５でＡ／Ｄ変換され
て、ステップ１０４で、ディジタル画像Ｉ２（ｘ、ｙ）
として、画像メモリ６に記憶される。

【００２８】このあとステップ１０５において、眼球特
徴抽出部７で、画像Ｉ１（ｘ、ｙ）から運転者の眼球の
瞳孔領域と角膜反射像が抽出され、画像Ｉ２（ｘ、ｙ）
から運転者の眼球の角膜反射像が抽出される。すなわ
ち、画像Ｉ１（ｘ，ｙ）から画像Ｉ２（ｘ，ｙ）を差し
引きして、画像Ｉ１（ｘ，ｙ）の中にある瞳孔領域（網
膜反射像）を強調し、２値化によって瞳孔候補領域を選
択した後、円形に近いという形状特徴を利用して、瞳孔
を決定する。次に瞳孔の近傍で、輝点として観測される
角膜反射像を、画像Ｉ１（ｘ，ｙ）、画像Ｉ２（ｘ，
ｙ）からそれぞれ抽出する。

【００２９】ついで、ステップ１０６で、視線方向算出
部８において、画像から抽出した上記各像の位置関係か
ら運転者の視線方向と眼球存在位置が算出される。すな
わち、眼球特徴抽出部７で抽出された瞳孔領域の重心位
置を基に、２つの第１、第２照明２、３の位置と整合の
とれる反射像を選択して２つの角膜反射像を求め、これ
らの角膜反射像の位置・眼球サイズ（例えば、角膜球半
径７．８ｍｍ、角膜球中心−瞳孔中心間距離４．２ｍ
ｍ）から演算により視線方向を決定する。 上記眼球特
徴の抽出および視線方向の算出については、すでに特願
平５−５０６１９号においても説明している。

【００３０】図３は、視線方向と照射方向との関係を平
面的に示すものである。時刻ｔにおいて計測された視線
方向を（Ｘ（ｔ）、Ｙ（ｔ）、Ｚ（ｔ））とする。ここ
で、Ｘは運転者１５の左右方向成分（ｘ成分）、Ｙは運
転者１５の前後方向成分（ｙ成分）、Ｚは運転者１５の
上下方向成分（ｚ成分）である。各軸は、視線計測用セ
ンサである画像入力部１の設置位置、設置方向によって
規定されるものとする。なお、図３は、車載されたシス
テムを真上から見たものであり、センサのＺ軸は、鉛直
に向いているものとする。

【００３１】なお、運転者の眼球存在位置と補助前照灯
設置位置の間には、若干のずれが存在するが、補助前照
灯１１は所定幅をもった配光パターンを有するため、多
少の方向ずれは、照射方向に影響しない。また、照射位
置までの距離に対し、運転者１５と補助前照灯１１間の
位置ずれは非常に小さいから、補助前照灯１１の照射方
向は、視線方向と平行に設定することができる。また、
照明の照射方向を上下方向に動かすと、対向車の幻惑を
引き起こすおそれがあるから、照射の移動方向は水平方
向のみに限定する。

【００３２】このようにして、視線方向が算出された後
には、移動平均算出部９において、上に算出された視線
方向の移動平均が求められる。移動平均の算出は、図４
の流れで実行される。ここでは運転者の視線計測に要す
る時間Δｔとし、Ｎ（Ｎは自然数／固定値）回の視線計
測データＸ（ｔ）、Ｙ（ｔ）、Ｚ（ｔ）の移動平均が算
出される。まず、ステップ３０１において、データ取込
回数のカウンタｎが１にセットされ、ステップ２０２で
は、視線計測データの内、視線方向のｘ成分であるＸ
（ｔ）、ｙ成分であるＹ（ｔ）を格納しておく配列Ｄｘ
（ｎ）、Ｄｙ（ｎ）、及びその総和を格納しておくレジ
スタＤｘ、Ｄｙがそれぞれ０にセットされる。

【００３３】そしてステップ３０３で、前述した図２の
処理によって実際の視線計測が行なわれ、視線方向算出
部８で算出取得されたデータＸ（ｔ）、Ｙ（ｔ）が配列
Ｄｘ（ｎ）、Ｄｙ（ｎ）に格納される。ステップ３０４
では、計測した視線方向取得データの総和がレジスタＤ
ｘ、Ｄｙに格納される。次のステップ３０５で、カウン
タｎがインクリメントされ、ステップ３０６で、このカ
ウンタ値がＮになったか否かがチェックされる。もしＮ
に達していないときは、ステップ３０３に戻り、上記ス
テップ２０３〜ステップ２０５の視線計測からレジスタ
格納までが繰り返される。

【００３４】視線計測がＮ回繰り返されると、ステップ
３０７に進んで、再度視線計測が行なわれ、得られた視
線計測データＸ（ｔ）、Ｙ（ｔ）からその時刻における
移動平均Ｍｘ（ｔ）、Ｍｙ（ｔ）が次式により算出され
る。 Ｍｘ（ｔ）＝（Ｄｘ−Ｄｘ（１）＋Ｘ（ｔ））／Ｎ Ｍｙ（ｔ）＝（Ｄｙ−Ｄｙ（１）＋Ｙ（ｔ））／Ｎ そしてステップ３０８において、データ配列Ｄｘ
（ｎ）、Ｄｙ（ｎ）の内容をシフトして、最新の視線方
向が配列Ｄｘ（Ｎ）、Ｄｙ（Ｎ）にセットされるととも
に、ステップ３０９で、先の移動平均Ｍｘ（ｔ）、Ｍｙ
（ｔ）が照射方向制御部１０に出力される。 これによ
り、Δｔの時間間隔で移動平均が出力される。

【００３５】照射方向制御部１０では、移動平均算出部
９から入力された移動平均Ｍｘ（ｔ）、Ｍｙ（ｔ）に基
づいて、補助前照灯１１の照射方向を制御する。以上の
ステップ２０７〜２０９の処理を繰り返して、補助前照
灯１１の照射方向が連続的に制御される。 この間、常
に運転者１５に補助前照灯１１の照射方向を知らせるた
め、補助前照灯１１の照射方向が前照灯方向表示部１２
に表示される。これは、例えば、図５に示す照射方向Ｒ
の表示により、ヘッドアップディスプレイによってウィ
ンドシールドに示される。補助前照灯１１の方向制御が
不要のときは、運転者１５は制御解除スイッチ１３を動
作させる。これにより、補助前照灯１１はあらかじめ設
定された通常の照射方向、すなわち車両正面方向を向い
て停止される。

【００３６】この実施例は以上のように構成され、運転
者１５の注目する方向に追従して動作させる付属装置、
すなわち補助前照灯１１を位置決め制御する場合に、運
転者に全く触れずに、視線から注目する方向を精度良
く、安定して取得することができ、運転者に鬱陶しさを
与えずに済む。運転者の視線方向から算出した移動平均
方向に向けて補助前照灯１１の向きを制御するようにし
たので、視線の微動によって不用の変動を招くことなく
運転者の本当に見たい方向、すなわち注目方向が照射さ
れ、そこから十分な情報を得ることができるという効果
を有する。

【００３７】なお、上記移動平均算出に際しては、図６
のテーブルに示すような重み付けを行なうことができ
る。 Ｗは重みを示し、Ｗ１＞Ｗ２＞Ｗ３の関係を持
つ。θは車両の直進方向（または正面方向）を０度とし
て右回り、左回りの方向に正負の符号を持つ。すなわ
ち、運転者の視線方向は、通常は直進方向を向いている
ため、その直進方向に高い重みＷ１を持たせ、この重み
付けした移動平均方向を補助前照灯の照射方向とする。
これにより、運転者が十分な注視を行わないと、照射方
向は、脇方向へは移動しにくいので、運転者の視線の微
動に追従して補助前照灯の照射方向が移動してしまうこ
とがより効果的に防止される。

【００３８】さらにまた、補助前照灯の照射方向につい
ては、上述のように連続的に変化させるほか、図７に示
すように車両前方の照射範囲を複数の照射領域、例えば
６領域Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに分割し、上記移動平均
あるいは重み付けした移動平均により算出された視線方
向がどの領域に属しているかを判定して、予め段階的に
決めておいた領域Ａ〜Ｆの内から、視線方向が属する照
射領域を注目方向として照射するようにしてもよい。

【００３９】一般の前照灯の配光パターンによれば、照
射方向の周辺部も相当レベルの明るさを持っているか
ら、視線方向が所定範囲内に入っていれば、照射方向を
連続的に細かく変化させなくても、運転者は十分な情報
を得られる。したがってこれによれば、照射方向の変化
が頻繁になく安定して、不要の変化で運転者に違和感を
与えるおそれもない。

【００４０】図８および図９には、この発明の第２の実
施例を示す。この実施例は、補助前照灯として照射方向
の異なる複数の灯具を備え、運転者の視線方向から算出
した周辺視の方向に対応した灯具のみ点灯し、周辺視方
向をより明るく照らすものである。まず、構成を図８に
より説明する。車両の運転者１５の顔面領域の画像を入
力するＣＣＤセンサ等を有する画像入力部１が設けら
れ、近赤外ＬＥＤ等の不可視光を発する第１照明２が画
像入力部１のレンズ中心に、画像入力部と共軸系をなす
ように配される。第１照明２との相対関係が既知の位置
に第１照明２と同一仕様を有する第２照明３が設置され
る。第１照明２及び第２照明３の発光は照明発光制御部
４により制御される。

【００４１】画像入力部１から入力した画像信号はＡ／
Ｄ変換器５でディジタルデータに変換され、画像メモリ
６に格納される。画像メモリ６には眼球特徴抽出部７が
接続され、格納された画像データから視線計測に必要な
角膜反射像や瞳孔領域を抽出する。これら抽出された眼
球特徴の位置関係を基に、視線方向算出部８が運転者の
視線方向を算出する。視線方向算出部８には周辺視方向
算出部１９が接続され、視線方向から、運転者の周辺視
方向を算出する。

【００４２】車両前端には照射方向の異なる複数の補助
前照灯２１ａ〜２１ｅが設置され、この補助前照灯２１
ａ〜２１ｅの各々には、照射範囲が固定された固定型灯
具が用いられている。照明選択部２０が周辺視方向算出
部１９から入力される周辺視方向に対応した補助前照灯
を選択し点灯させる。Ａ／Ｄ変換器５および照明発光制
御部４に接続されて、装置全体を制御する全体制御部２
２はＣＰＵ（中央処理装置）、各種制御プログラムを格
納したＲＯＭ、各種プログラムのワークエリアとして用
いるＲＡＭを具備する。その他の構成は第１の実施例と
同様である。

【００４３】次に、上記構成における制御処理について
説明する。視線方向算出部８において視線方向が算出さ
れるまでは、図２に示した各ステップの流れと同じであ
る。視線方向算出部８において、画像から抽出した各像
の位置関係から運転者の眼球存在位置と視線方向が算出
されると、周辺視方向算出部１９において、上に算出さ
れた視線方向に最も近い照射方向を持つ補助前照灯を２
１ａ〜２１ｅの中から求め、その左右両側の補助前照灯
が選択される。

【００４４】図９は、車載されたシステムを真上から見
たものであり、ＡＡ、ＢＢ、ＣＣ、ＤＤ、ＥＥはそれぞ
れ補助前照灯２１ａ、２１ｂ、２１ｃ、２１ｄ、２１ｅ
に対応した照射エリアを示す。図３におけると同様に、
時刻ｔにおいて計測された視線方向をＸ（ｔ）、Ｙ
（ｔ）、Ｚ（ｔ）とする。ここでは、運転者の頭部位置
の変動は小さく、補助前照灯の照射エリアは図９におけ
るＡＡ〜ＥＥのように予め決まっているから、運転者の
視線方向が算出されればその周辺視方向に対応する補助
前照灯は一義的に決定される。

【００４５】これにより、視線方向が例えば図９に示さ
れる方向の場合には、この視線方向は照射エリアＢＢ内
に入っているから、周辺視方向は照射エリアＡＡとＣＣ
でカバーされる。また、算出された視線方向が照射エリ
アＡＡあるいはＥＥに入っていたときは、それぞれ周辺
視方向として照射エリアＢＢ、照射エリアＤＤのみが選
択される。なお、視線方向算出部８で算出される視線方
向は３次元成分を持っているが、補助前照灯２１ａ〜２
１ｅの照射方向は前述の通り対向車への影響を考慮して
上下方向には変化させない。

【００４６】このようにして、周辺視方向算出部１９に
おいて、視線方向に最も近い照射方向を持つ補助前照灯
を補助前照灯２１ａ〜２１ｅの中から求められ、その左
右両側の補助前照灯が周辺視方向として決定されると、
照明選択部２０により、周辺視方向の補助前照灯が選択
され、点灯する。以上の処理が繰り返され、視線方向に
応じて照明方向が連続的に制御される。

【００４７】以上のようにこの実施例によれば、運転者
の周辺視方向を向いている補助前照灯を選択して照射す
るものとしたので、運転者が本当に注目している方向、
すなわち、周辺視環境の視界がより向上し、より良く運
転環境を認識できるという効果が得られる。前実施例で
は、補助前照灯１１に可変型灯具を用いたので、可変制
御を解除するために制御解除スイッチ１３が設けられて
いるが、本実施例では補助前照灯に固定型灯具を用いた
ので、特に制御解除スイッチを設定せずに済む利点があ
る。

【００４８】図１０には、本発明の第３の実施例を示
す。 この実施例は、運転者が視線方向を注視している
と考えられるとき、周辺視方向のかわりにその視線方向
を照明して、中心視を補助するようにしたものである。
その構成は、前実施例における視線方向算出部８と周辺
視方向算出部１９の間に、算出された視線方向から視線
移動を判定する視線移動判定部２４が設けられるととも
に、この視線移動判定部２４と照明選択部２７の間に、
周辺視方向算出部１９と並列に、注視方向算出部２５が
設けられている。注視方向算出部２５は、視線移動が小
さいとき、注視方向を算出するものである。

【００４９】上記構成において、視線方向算出部８で視
線方向が算出されるまでは、図２に示した流れと同じで
ある。 このあとの処理は、図１１に示される。まずス
テップ４０１において、視線移動判定部２４では、視線
方向算出部８で算出された時間的に連続した２つの視線
方向の差分Ｓが演算される。そして、ステップ４０２
で、差分Ｓを所定値と比較して視線方向の変化量がチェ
ックされる。

【００５０】Ｓが所定値より大きいときは、視線方向が
移動し、運転者は周辺視を行っているものとして、周辺
視方向算出部１９に視線方向が伝えられ、ステップ４０
３に進む。ステップ４０３では、周辺視方向算出部１９
において前述の図９で説明したと同じ要領で周辺視方向
が算出される。これに基づいてステップ４０４で照明選
択部２７が周辺視方向に対応した補助照明灯を選択し
て、当該周辺視方向が照明される。

【００５１】またステップ４０２でのチェックで差分Ｓ
が小さいときは、運転者が視線方向を注視しているもの
として、ステップ４０５に進み、注視方向算出部２５に
おいて注視方向が算出される。このあとステップ４０４
において、照明選択部２７で注視方向に対応した補助照
明灯を選択して、注視方向が照明される。以上のように
この実施例によれば、視線移動が殆どないときは、視線
方向を照明するようにしたので、周辺視による余裕のあ
る状況把握と、中心視による対象の十分な観察とが運転
者の挙動に対応して満足される。

【００５２】図１２は、本発明を車両用情報伝達装置に
適用した第４の実施例を示す。これは、運転者が注目し
た道路標識、電光掲示板等の情報を再度呈示して確認な
どに供するものである。車両には付属装置としてのテレ
ビカメラ（以下ＴＶカメラという）５１が車両前方領域
を撮影方向として搭載され、ＴＶカメラ５１は電動雲台
を備えてその撮影方向の可変機能を有する。このＴＶカ
メラ５１は、撮影により得られた映像信号をＡ／Ｄ変換
し、ディジタルの録画データとして出力する。

【００５３】画像入力部４１は車両の運転者に対向して
配置されたＣＣＤ（電荷結合デバイス）センサ等の視線
計測用センサであり、運転者１５の顔面領域を撮影し、
上記顔面領域のアナログの画像データを入力する。第１
照明４２は、画像入力部４１のレンズ中心に対して、画
像入力部１と共軸系をなすように配され、近赤外ＬＥＤ
（発光ダイオード）等のように不可視光を発する。第２
照明４３は第１照明４２と同一仕様を有し、第１照明４
２と相対関係が既知の位置に設置される。

【００５４】照明発光制御部４４は第１照明４２及び第
２照明４３の発光を制御し、Ａ／Ｄ変換器４５は画像入
力部４１から入力された画像データをアナログ−ディジ
タル変換する。画像メモリ４６はＡ／Ｄ変換器４５に接
続され、Ａ／Ｄ変換されたディジタル画像データを格納
する。眼球特徴抽出部４７は画像メモリ４６に接続さ
れ、格納された画像データから視線計測に必要な角膜反
射像や瞳孔領域を抽出する。視線方向算出部４８は眼球
特徴抽出部４７に接続され、抽出された眼球特徴（角膜
反射像や瞳孔領域）の位置関係を基に視線方向を算出す
る。

【００５５】視線方向算出部４８で算出された視線方向
データはカメラ方向制御部５０に入力され、ここでは、
視線方向を基に車両前方を撮影するＴＶカメラ５１の撮
影条件である撮影方向を制御する。全体制御部５４は、
装置全体を制御するＣＰＵ（中央処理装置）、各種制御
プログラムを格納したＲＯＭ、各種プログラムのワーク
エリアとして用いるＲＡＭを具備する。

【００５６】ＴＶカメラ５１には映像録画部５６が接続
され、ＴＶカメラ５１からの出力（映像）を録画する。
この映像録画部５６からの録画データは映像メモリ５７
に送られて格納され、映像メモリ５７は一定時間毎にそ
のメモリ内容を更新する。映像メモリ５７は、例えば、
５１２×５１２画素の半導体メモリを２０枚持ち、サン
プリングレートを０．５ｓｅｃとする。このサンプリン
グレートにより、１０ｓｅｃ分の映像データが録画可能
であるが、１０ｓｅｃ後からの０．５ｓｅｃ分の録画デ
ータは、最初に書き込まれた半導体メモリに上書きして
格納される。すなわち、映像メモリ５７では、１０ｓｅ
ｃ毎に、録画データが更新される。

【００５７】映像メモリ５７には映像再生部５８が接続
され、映像メモリ５７に格納された録画データを読み出
して映像を再生する。そして、映像再生部５８で再生さ
れた映像は、センターコンソール等に設置されたＣＲＴ
や液晶パネル等からなるモニタの構成を有する映像表示
部５９に表示されるようになっている。映像メモリ５７
には再生開始スイッチ（以下再生開始ＳＷという）６０
が接続されており、映像メモリ５７に格納された映像デ
ータを基にした映像の再生開始を起動する。この再生開
始ＳＷ６０は、例えば、ステアリングに設置され、運転
の邪魔にならずに容易に操作できる。

【００５８】次に動作について説明する。第１照明４
２、第１照明４３を用いて画像入力部４１で運転者の顔
面領域を撮影しそのデータから視線方向を求めるまで
は、図２で説明したフローと同じである。この視線方向
のデータを受けてカメラ方向制御部５０ではＴＶカメラ
の観測方向を制御する。

【００５９】図１３は、視線方向と観測方向との関係を
平面的に示しており、同図において、時刻ｔにおいて計
測された視線方向、すなわち、視線計測データをＸ
（ｔ）、Ｙ（ｔ）、Ｚ（ｔ）とする。ここで、Ｘは運転
者１５の左右方向成分（ｘ成分）、Ｙは運転者１５の前
後方向成分（ｙ成分）、Ｚは運転者１５の上下方向成分
（ｚ成分）である。各Ｘ、Ｙ、Ｚ軸は、画像入力部４１
の設置位置、設置方向によって規定されるものとする。
なお、図１３は、車載された車両インタフェースのシス
テムを真上から見たものであり、画像入力部４１のＺ軸
は、鉛直に向いているものとする。

【００６０】なお、運転者１５の眼球存在位置とＴＶカ
メラ５１の設置位置との間には、若干のずれが存在する
が、ＴＶカメラ５１の撮影範囲は、ある広さを持ってい
るため、多少の方向ずれは観測方向に影響せず、また観
測点までの距離に対して、運転者１５とＴＶカメラ５１
との位置ずれは非常に小さい。したがって、少なくとも
２軸方向に制御可能な電動雲台を備えたＴＶカメラ５１
は、視線方向と同一方向に観測方向を位置決め制御され
る。すなわち、カメラ方向制御部５０は、視線方向算出
部４８から入力された視線方向Ｘ（ｔ）、Ｙ（ｔ）、Ｚ
（ｔ）に基づいてＴＶカメラ５１の観測方向Ｍｘ
（ｔ）、Ｍｙ（ｔ）、Ｍｚ（ｔ）を制御する。以上の処
理を繰り返して、ＴＶカメラ５１の観測方向が連続的に
制御される。

【００６１】次に録画・再生処理について図１４により
説明する。まず、ステップ６０１において、ＴＶカメラ
５１から出力された映像信号は、映像録画部５６で記録
され、逐次映像メモリ５７に格納される。この映像メモ
リ５７に格納される録画データは、１０ｓｅｃ間隔で更
新される。その間、ステップ６０２で、再生開始ＳＷ６
０の操作の有無が常にチェックされる。

【００６２】運転者１５は、車外情報の見落としに気付
いたとき、あるいは、過去（本実施例では過去１０ｓｅ
ｃ分の映像）の情報をもう一度見たいときに、再生開始
ＳＷ６０をＯＮする。ステップ６０２でこのスイッチ操
作が確認されると、ステップ６０３に進んで、映像メモ
リ５７から映像再生部５８に過去１０ｓｅｃ分の映像デ
ータが順次読み出され、ステップ６０４において、映像
表示部５９で再生映像が表示される。そしてステップ６
０５で、過去１０ｓｅｃ分の情報の再生表示が終了した
ことが確認されると。ステップ６０１に戻り、新たな映
像録画とその映像メモリ５７への格納が行なわれる。

【００６３】この実施例は以上のように構成され、運転
者の注意の向いている注目方向を観測方向としてＴＶカ
メラの映像を録画し、必要に応じて再生表示できるよう
にしたので、目を向けたにも拘らず、見落としてしまっ
た情報や理解できなかった情報を再生して確認すること
ができる。これにより、情報の見落としや曖昧な理解に
よる心理的不安を取り除くことができるので、運転操作
に安心して集中できるという効果が得られる。そして、
運転者１５の注目する方向として、運転者に全く触れず
に、その視線方向を精度良く、安定して取得するので運
転者に鬱陶しさを与えずに済む。

【００６４】次に図１５は、第５の実施例を示す。これ
は、前実施例についてさらにＴＶカメラの撮影条件であ
るレンズの画角をも制御するようにしたものである。具
体的には、運転者の注視時間の大小に応じて、ＴＶカメ
ラの画角を制御し、注視時間が長いときには視線方向の
狭視野の画像を記録し、注視時間が短いときには視線方
向の広視野の画像を記録するものである。第４の実施例
と同様の機能及び構成を有する部位には、図１３で使用
した符号と同様の符号を用いて、説明を省略する。

【００６５】この実施例においては、視線方向算出部４
８に、カメラ方向制御部５０に加えて注視時間計測部６
１が接続され、視線方向を基に注視時間を計測するよう
になっている。そして、注視時間計測部６１にはレンズ
画角制御部６２が接続され、注視時間に応じてＴＶカメ
ラ６４のレンズの画角を制御する。ＴＶカメラ６４は電
動雲台を備えて撮影方向が制御可能であるとともに、ズ
ーム機能によって画角を可変にするズームレンズ６５を
有する。このズームレンズ６５がレンズ画角制御部６２
により制御される。その他の構成は前実施例と同じであ
る。

【００６６】次に動作について説明する。 第１照明４
２、第１照明４３を用いて画像入力部４１で運転者の顔
面領域を撮影しそのデータから視線方向を求めるまで
は、図２で説明したフローと同じである。視線方向算出
部４８で運転者の視線方向が求められたあとの、ＴＶカ
メラのレンズ画角の制御処理が図１６に示される。ま
ず、ステップ７０１において、注視回数ｍ（ｍは自然
数）が０にセットされて、注視時間計測部６１での視線
方向の時間変化、すなわち、変化量の計測が開始され
る。

【００６７】ステップ７０２で、視線方向算出部４８か
らの視線方向が入力され、ステップ７０３で、その視線
方向のずれ角が算出される。そしてステップ７０４にお
いて、そのずれ角が所定の範囲（例えば、Ｘ，Ｙ，Ｚ各
軸方向のずれ角が２度以下）に入るかどうかがチェック
される。ずれ角が上記所定範囲に入る場合には、ステッ
プ７０５でｍがインクリメントされたあと、また所定範
囲に入らない場合には、そのままステップ７０６に進
む。ステップ７０６では、あらかじめ設定された一定時
間Δｔが経過したかどうかがチェックされ、当該一定時
間の間視線方向の計測ごとに上記のステップ７０２〜７
０５が繰り返される。

【００６８】そして一定時間Δｔが経過すると、ステッ
プ７０７において、注視回数ｍがあらかじめ設定された
基準値Ｍ（自然数）と比較され、ｍ＞Ｍのときにはステ
ップ７０８に進んで、レンズ画角制御部６２がレンズ画
角を狭視野とするようＴＶカメラ６４のズームレンズ６
５を制御して焦点距離を長くする。また、ｍ≦Ｍのとき
にはステップ７０９に進んで、レンズ画角制御部がＴＶ
カメラを広視野とする。以上のステップ７０１〜７０９
の処理を繰り返すことで、注視時間に応じて、長いとき
にはＴＶカメラ６４の画角が狭視野に、短いときは広視
野に制御される。

【００６９】以上のようにこの実施例によれば、第４の
実施例と同様の効果を得られるとともに、注視されてい
る注目方向ほど狭い範囲が大きく高解像度の映像として
得られ、とくに関心の大きかったものが鮮明に再生呈示
されるという効果が得られる。

【００７０】なお、上記第４および第５の実施例では、
映像メモリ５７を２０枚の半導体メモリで構成されるも
のとしたが、メモリ容量は、再生映像の時間に応じて、
任意に設定可能である。さらには、映像メモリ５７に
は、半導体メモリのほか、光磁気ディスクやリアルタイ
ムディスク等の記憶媒体から構成されたものを用いるこ
ともできる。

【００７１】なお、第４および第５の実施例では視線方
向算出部４８からの視線方向計測データをそのままカメ
ラ方向制御部５０へ入力するものとしたが、第１の実施
例におけると同じく、移動平均算出部を設けて視線方向
計測データの移動平均を求めたうえカメラ方向制御部５
０へ入力するようにして、視線の微動によって、観測方
向の不要の変動の発生を確実に抑さえるようにすること
ができる。さらに、視線の移動によりＴＶカメラ５１の
観測方向を制御することが不要のときは、第１の実施例
の制御解除スイッチ１３に相当するスイッチを設けてこ
れにより解除するようにしてもよい。これに連動して、
ＴＶカメラ５１は、予め設定された通常の観測方向、す
なわち、車両正面方向を向いて、停止する。

【００７２】

【発明の効果】以上のとおり、本発明は、車両に設置さ
れた付属装置を位置決め制御するインターフェースにお
いて、運転者の顔面領域の画像データを入力し、入力さ
れた画像データに基づいて運転者の視線方向を検出し、
検出された視線方向に応じて、制御手段が上記付属装置
の位置決め制御を行うものとしたので、運転者にまった
く触れることなく、精度良く、安定して、運転者の注目
する方向に関連させて付属装置を制御することができ、
運転者に鬱陶しさを与えないという効果を有する。そし
て、とくに視線方向の時間的な変化量に応じて上記位置
決め制御を行うようにしたときには、視線の微動によっ
て不用の変動を招くことがなく、より安定した制御が行
なわれる。

【００７３】また、上記付属装置として車両の前照灯な
ど照明手段の照明方向を視線方向に基づいて制御するこ
とにより、運転者が本当に注目している方向、例えば、
周辺視や中心視の方向に対応した照射範囲を得ることが
できるという効果が得られる。さらに、運転者の顔面領
域の画像データに基づいてその視線方向を検出し、視線
方向に応じて車両に設置した撮影手段の撮影方向など撮
影条件を制御することにより、運転者に非接触で運転者
の注目する方向に関連させた撮影を行なうことができ
る。

【００７４】そして、とくに撮影条件として視線方向に
基づいて撮影方向を制御するとともに、、注視時間が長
いときには撮影手段の画角を狭視野に、注視時間が短い
ときは画角を広視野に制御するようにしたときには、通
常は広い範囲が撮影され、関心が大きく注視時間が長く
なるとその注目する狭い範囲が大きく撮影されるので、
精度良くしかも注目度に応じて大きな画像が得られると
いう効果がある。さらに、撮影手段で撮影した映像を映
像データとして記憶手段に記憶させるようにしこれを再
生する再生手段を設けることにより、目を向けたにも拘
らず、見落としてしまった道路標識、電光掲示板、特定
の建造物などの情報を必要に応じて再生して確認するこ
とができる。これにより、情報の見落としや曖昧な理解
による心理的不安を取り除くことができるので、運転操
作に安心して集中できるという効果が得られる。

【図面の簡単な説明】

【図１】本発明の第１の実施例の構成を示すブロック図
である。

【図２】視線方向算出処理の流れを示すフローチャート
である。

【図３】視線方向と補助前照灯の照射方向との関係を示
す図である。

【図４】視線方向の移動平均算出処理の流れを示すフロ
ーチャートである。

【図５】補助前照灯の照射方向の表示例を示す図であ
る。

【図６】視線方向の移動平均算出における重み付けの一
例を示す図である。

【図７】照射方向の領域分割例を示す図である。

【図８】本発明の第２の実施例の構成を示すブロック図
である。

【図９】周辺視方向に対応して補助前照灯を選択する要
領を示す説明図である。

【図１０】本発明の第３の実施例の構成を示すブロック
図である。

【図１１】補助前照灯選択処理の流れを示すフローチャ
ートである。

【図１２】第４の実施例の構成を示すブロック図であ
る。

【図１３】視線方向とテレビカメラの観測方向との関係
を示す図である。

【図１４】録画・再生処理の流れを示すフローチャート
である。

【図１５】発明の第５の実施例の構成を示すブロック図
である。

【図１６】レンズ画角制御処理の流れを示すフローチャ
ートである。

【図１７】従来例を示すブロック図である。

【符号の説明】

１、４１ 画像入力部 ２、４２ 第１照明 ３、４３ 第２照明 ４、４４ 照明発光制御部 ５、４５ Ａ／Ｄ変換器 ６、４６ 画像メモリ ７、４７ 眼球特徴抽出部 ８、４８ 視線方向算出部 ９ 移動平均算出部 １０ 照射方向制御部 １１ 補助前照灯（付属装置） １２ 前照灯方向表示部 １３ 制御解除スイッチ １４、２２、５４ 全体制御部 １５ 運転者 １９ 周辺視方向算出部 ２０、２７ 照明選択部 ２１ａ〜２１ｅ 補助前照灯（付属装置） ２４ 視線移動判定部 ２５ 注視方向算出部 ５１、６４ テレビカメラ（付属装置） ５０ カメラ方向制御部 ５６ 映像録画部 ５７ 映像メモリ ５８ 映像再生部 ５９ 映像表示部 ６０ 再生開始スイッチ ６１ 注視時間計測部 ６２ レンズ画角制御部 ６５ ズームレンズ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 岡林 繁 神奈川県横浜市神奈川区宝町２番地 日産 自動車株式会社内 (72)発明者 藤本 浩 神奈川県横浜市神奈川区宝町２番地 日産 自動車株式会社内

Claims (14)

【特許請求の範囲】
1. 【請求項１】 運転者の顔面領域の画像データを入力す
   る画像入力手段と、該画像入力手段により入力された画
   像データに基づいて前記運転者の視線方向を検出する視
   線方向検出手段と、該視線方向検出手段により検出され
   た視線方向に応じて車両に設置された付属装置を位置決
   め制御する制御手段とを備えたことを特徴とする車両用
   インタフェース。
2. 【請求項２】 運転者の顔面領域の画像データを入力す
   る画像入力手段と、該画像入力手段により入力された画
   像データに基づいて前記運転者の視線方向を検出する視
   線方向検出手段と、該視線方向検出手段により検出され
   た視線方向の時間的な変化量を検出する視線変化検出手
   段と、前記視線変化検出手段により検出された変化量に
   応じて車両に設置された付属装置を位置決め制御する制
   御手段とを備えたことを特徴とする車両用インタフェー
   ス。
3. 【請求項３】 車両に設置され、その照射方向を制御可
   能な照明手段と、運転者の顔面領域の画像データを入力
   する画像入力手段と、該画像入力手段により入力された
   画像データに基づいて前記運転者の視線方向を検出する
   視線方向検出手段と、該視線方向検出手段により検出さ
   れた視線方向の時間的な変化量を検出する視線変化検出
   手段と、該視線変化検出手段により検出された変化量に
   応じて前記照明手段の照射方向を制御する制御手段とを
   備えたことを特徴とする車両用インタフェース。
4. 【請求項４】 前記制御手段は、前記運転者の視線方向
   の移動平均の方向を前記照射方向に定めるものであるこ
   とを特徴とする請求項２または３記載の車両用インタフ
   ェース。
5. 【請求項５】 前記移動平均を、運転者の正面方向に高
   い重みを持たせた重み付き移動平均としたことを特徴と
   する請求項４記載の車両用インタフェース。
6. 【請求項６】 前記制御手段は、前記運転者の視線方向
   の周辺視の方向を前記照射方向に定めるものであること
   を特徴とする請求項３記載の車両用インタフェース。
7. 【請求項７】 前記制御手段は、前記運転者の視線方向
   の変化が小さいときには、注視方向を前記照射方向に定
   めるものであることを特徴とする請求項６記載の車両用
   インタフェース。
8. 【請求項８】 前記照射方向は、車両前方を複数の領域
   に分割し、該領域のうち前記検出された視線方向が属す
   る領域とすることを特徴とする請求項３、４、５、６ま
   たは７記載の車両用インタフェース。
9. 【請求項９】 車両に設置され、その撮影条件を制御可
   能な撮影手段と、運転者の顔面領域の画像データを入力
   する画像入力手段と、該画像入力手段により入力された
   画像データに基づいて前記運転者の視線方向を検出する
   視線方向検出手段と、該視線方向検出手段により検出さ
   れた視線方向に応じて前記撮影手段の撮影条件を制御す
   る制御手段とを備えたことを特徴とする車両用インタフ
   ェース。
10. 【請求項１０】 車両に設置され、その撮影条件を制御
    可能な撮影手段と、運転者の顔面領域の画像データを入
    力する画像入力手段と、該画像入力手段により入力され
    た画像データに基づいて前記運転者の視線方向を検出す
    る視線方向検出手段と、該視線方向検出手段により検出
    された視線方向の時間的な変化量を検出する視線変化検
    出手段と、該視線変化検出手段により検出された変化量
    に応じて前記撮影手段の撮影条件を制御する制御手段と
    を備えたことを特徴とする車両用インタフェース。
11. 【請求項１１】 車両に設置され、その撮影条件を制御
    可能な撮影手段と、運転者の顔面領域の画像データを入
    力する画像入力手段と、該画像入力手段により入力され
    た画像データに基づいて前記運転者の視線方向を検出す
    る視線方向検出手段と、該視線方向検出手段により検出
    された視線方向に応じて前記撮影手段の撮影条件を制御
    する制御手段と、前記撮影手段の撮影により得られた映
    像を映像データとして記憶する記憶手段と、該記憶手段
    に記憶された映像データに基づく映像を再生する再生手
    段とを備えたことを特徴とする車両用インタフェース。
12. 【請求項１２】 前記撮影条件が撮影手段の撮影方向で
    あることを特徴とする請求項９、１０または１１記載の
    車両用インタフェース。
13. 【請求項１３】 前記撮影条件が撮影手段の撮影方向と
    画角であり、前記制御手段は、前記視線方向検出手段に
    より検出された運転者の視線方向の注視時間を計測する
    注視時間計測部を有して、注視時間が長いときには撮影
    手段の画角を狭視野に、注視時間が短いときは画角を広
    視野に制御するものであることを特徴とする請求項９、
    １０または１１記載の車両用インタフェース。
14. 【請求項１４】 前記画像入力手段は、撮像手段と、該
    撮像手段と共軸に配置された第１の照明と、撮像手段と
    非共軸に配置された第２の照明とを有し、前記視線方向
    検出手段は、前記撮像手段で撮像された前記第１および
    第２の照明による運転者の眼球の反射光の位置に基づい
    て前記視線方向を算出するものであることを特徴とする
    請求項１、２、３、４、５、６、７、８、９、１０、１
    １、１２または１３記載の車両用インタフェース。