JPH06323832A

JPH06323832A - 車両用インターフェイス

Info

Publication number: JPH06323832A
Application number: JP5135340A
Authority: JP
Inventors: Hiroshi Saito; 浩斎藤
Original assignee: Nissan Motor Co Ltd
Current assignee: Nissan Motor Co Ltd
Priority date: 1993-05-13
Filing date: 1993-05-13
Publication date: 1994-11-25

Abstract

(57)【要約】【目的】眼球位置を拘束しない自由空間においても、
眼鏡装用の車両運転者の注目方向を的確に精度よく計測
できる車両用インターフェイスを提供する。【構成】画像入力手段１において互いに位置を異なら
せて設けられた複数の光源２ａ、２ｂ、…を個別に点灯
して眼球部を照明し、その反射像を撮像して複数の画像
データを得る。差分演算手段３で２つの画像データの差
分演算を行なったあと、ずれ量計測手段４で反射像の位
置ずれ量を計測し、角膜反射像抽出手段５が所定値以下
の位置ずれ量をもつ反射像のペアを角膜反射像として抽
出する。この角膜反射像の位置を用いて注目方向算出手
段が注目方向を算出する。差分演算によりペアの判別が
容易となり、自由空間で眼鏡フレーム等の反射像が混入
しても高精度に注目方向が算出できる。算出した注目方
向によって、車両に情報伝達を行い、スイッチ操作など
を行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は、車両運転者の注目方
向を遠隔から非接触で計測し、注目方向によって、車両
への情報伝達を行なう車両用インターフェイスに関す
る。

【０００２】

【従来の技術】このような、車両用の非接触マンマシン
インターフェイスは、車両運転者の注目している方向に
視覚情報を表示する、注目方向によってスイッチを作動
させる等、種々の利用が期待されている。このような、
インターフェイスを構成するために必要な、車両運転者
の注目方向の計測には、従来、眼球の角膜反射像の位置
を画像情報として取り入れて計測する装置が提案されて
いる。角膜反射像は、眼球への照射光が、眼球を構成す
る光学系の各面で反射・屈折することによって生じる像
であり、プルキンエ像とも呼ばれている。とくに、自動
車では、画像入力用カメラを、車両運転者に比較的近接
して設置でき、さらに、車両運転者の眼球位置は、ＪＩ
Ｓ（日本工業規格）Ｄ００２１に、自動車の運転者のア
イレンジとして統計的に示された限定領域のみに存在す
るため、カメラの撮像範囲はそこに限定できる。したが
って、車両運転者の眼球部を拡大撮影可能であるため、
比較的高精度で、広範囲にわたる注目方向を計測可能で
ある。

【０００３】しかしながら、車両運転者が眼鏡装用者で
ある場合には、その眼鏡による反射像も発生するため、
これを識別して眼鏡装用者にも対応できる注目方向計測
の実現が課題の一つとなっている。このため、眼鏡を装
用していても視線計測が行える装置として、例えば特開
平４−１３８４３１号公報や特開平４−１３８４３２号
公報に提案されているものがある。これらの装置では、
カメラのファインダーを覗いている撮影者の視線方向を
計測するものであり、２個の光源を用いて眼球に同時照
射したときの反射像の間隔が、図９に示されるように、
眼鏡レンズの反射像では大きくなり、角膜反射像では小
さくなることを利用して、眼鏡反射像を識別している。

【０００４】しかしながら、上記従来例にあっては、カ
メラのファインダーを覗いている撮影者の視線のみを計
測対象としているため、これを、被験者に何ら拘束を与
えない、自由空間での視線計測に用いたときには、眼鏡
レンズだけでなく眼鏡フレームからの反射光も画像情報
として混入することになる。眼鏡レンズによる反射像
は、先の図９に示されるように、２個の光源を結ぶライ
ンとほぼ平行の同一ライン上に観測されるが、眼鏡フレ
ームによる反射像はランダムな位置に発生する。したが
って、どの反射像とどの反射像がペアとなるのか判別が
困難で、とくに眼鏡フレームによる反射像が他の反射像
の近傍に現われるとそれらを誤って角膜反射像と判断し
てしまうなど、従来例におけるアルゴリズムをそのまま
適用しても対応できないという問題が生じる。したがっ
て、この発明は、上記のような従来の問題点に鑑み、車
両運転者が眼鏡を装用していても、注目方向を的確に精
度よく計測することができる車両用インターフェースを
提供することを目的とする。

【０００５】

【課題を解決するための手段】このため本発明は、図１
に示すように、車両運転者の眼球部を照明する光源と、
該光源による明るさ分布を入力する撮像手段と、前記明
るさ分布から運転者の注目している方向を算出する手段
を有し、運転者の注目している方向によって、車両への
情報伝達を行なう車両用インターフェイスにおいて、互
いに位置を異ならせて設けられ車両運転者の眼球部を個
別に照明する複数の光源２ａ、２ｂを備え、前記照明ご
とに前記眼球部における反射像を撮像して複数の画像デ
ータを得る画像入力手段１と、該画像入力手段１で得ら
れた複数の前記画像データのうち、２つの画像データの
差分演算を行なう差分演算手段３と、前記差分演算結果
に基づいて得られる反射像の位置ずれ量を計測するずれ
量計測手段４と、前記位置ずれ量が所定値以下である反
射像のペアを角膜反射像として抽出し該角膜反射像位置
を求める角膜反射像抽出手段５と、前記角膜反射像位置
を用いて、車両運転者の注目方向を算出する注目方向算
出手段６と、算出された注目方向に応じて、車両への情
報伝達を行なう情報伝達手段７とを有するものとした。

【０００６】

【作用】異なる複数位置の光源により眼球部を照明する
ことにより照明光源ごとに反射像の位置がずれた複数の
画像データが得られる。そして、眼鏡レンズの曲率は眼
球の曲率に比べて小さいので、眼鏡レンズによる反射像
の位置ずれは角膜によるものよりも大きい。これに対応
して、画像データにおける反射像のずれ量計測手段で計
測された位置ずれ量が所定値以下である反射像のペアが
角膜反射像として抽出される。ここで、位置ずれ量の計
測に先立って、差分演算手段により２つの画像データの
差分演算が行なわれるので、同一部位における同レベル
の反射光が除去されるとともに、ペアとなるべき反射像
のデータ値は正側と負側に別れる。したがって、正側ま
たは負側いずれでも同じ側において位置ずれ量が小さい
ものがあってもペアとして抽出する必要がない。これに
より、被験者が眼鏡を装用している場合にも、角膜反射
像が確実に識別特定され、高精度に注目方向が算出され
る。

【０００７】

【実施例】以下、この発明を図面に基づいて説明する。
図２、図３は、本発明を車両用視線スイッチとして適用
したものである。図２に示すように、本実施例は、ステ
アリング４０５に配置されたメインスイッチ４０６、ス
テアリングスイッチ４０４、ステアリング４０５の近傍
に配設されたＣＣＤカメラ４０１と近赤外光線４０２を
共軸系に配したセンサ、センサの近傍に配設された近赤
外光線４０３、ウインドシールド４０７上に表示された
視線スイッチエリア４０８、ＨＵＤ（ヘッドアップディ
スプレイ）表示エリア４０９とから構成されている。な
お、図２の（ｂ）は同図の（ａ）における視線スイッチ
エリア４０８の項目表示例の拡大図、（ｃ）はステアリ
ングスイッチ４０４の拡大図である。

【０００８】また、図３は、図２の視線スイッチの全体
構成を示す図である。図３に示すように、車両運転者の
面前には、運転者の眼球部に向けて、同一仕様をもつＬ
ＥＤ等の第１の発散照明１０２、第２の発散照明１０３
が設けられる。車両運転者１２２の面前にはまた、眼球
を撮影するためのカメラ１０１が配置される。カメラは
その撮像素子にＣＣＤを備えている。

【０００９】次に、図２、図３に示す実施例の作用につ
いてエアコンの設定温度を変更する場合を例にとって説
明する。

【００１０】車両運転者がエアコンを操作したいと考え
た時、ウインドシールド４０７上の視線スイッチエリア
４０８のうち、エアコンの領域（図２の（ｂ）中のＡ／
Ｃ領域）を注視する。同時に車両運転者は、ステアリン
グ４０５のメインスイッチ４０６を押す。すると、図３
の装置が動作を開始し、車両運転者の注目している方向
の計測が行なわれる。

【００１１】第１の発散照明１０２は、カメラ１０１の
レンズの前面に、カメラの光軸と照射方向が一致するよ
うに設置され、第２の発散照明１０３は第１の発散照明
１０２との相対関係があらかじめ設定された所定の位置
に設置されている。なお、第１の発散照明１０２および
第２の発散照明１０３に用いられるＬＥＤには、操作者
に不可視で、カメラのＣＣＤには感知される近赤外光を
発する。第１の発散照明１０２および第２の発散照明１
０３には、それらの発光を制御する照明発光制御部１０
４が接続されている。この照明発光制御部１０４は装
置全体の動作を制御する全体制御部１２１からの信号に
基づいて作動する。

【００１２】カメラ１０１には、データをデジタルデー
タに変換するＡ／Ｄ変換器１０５を経て、撮影入力され
た画像データを格納する画像メモリ１０６が接続されて
いる。画像メモリ１０６に接続されて、入力画像データ
から角膜反射光の位置を特定する角膜反射識別部１０７
が設けられるとともに、入力画像データから瞳孔位置を
抽出する瞳孔抽出部１０８が設けられ、注目方向算出部
１０９において、眼球特徴であるこれら角膜反射光の位
置と瞳孔位置から、操作者の注目方向Ｔを算出するよう
になっている。

【００１３】以上の注目方向の計測を繰り返し、停留判
断部１１０において、注目方向が視線スイッチエリア１
１３のエアコン領域に一定時間（例えば０．３秒）停留
していることが認識されると、車両運転者１２２がエア
コンスイッチを見ていると判断し、ＨＵＤ表示エリア１
１２に現在のエアコン設定温度が表示される。それと同
時に、注目方向計測の動作が停止する。

【００１４】ＨＵＤ表示エリアにエアコン表示がなされ
ると、ステアリングスイッチ１１５のアップ・ダウンボ
タンがエアコン設定温度の上下を行なうように機能する
ようになる。

【００１５】運転者１２２は、ステアリングスイッチ１
１５のアップ・ダウンボタンを操作して、ＨＵＤ表示を
見ながら、所定の設定温度にセットする。セットした情
報は、コントローラ切り替え部１１６を通して、エアコ
ンコントローラ１１８に送られ、所定の温度制御が行な
われる。一定時間（例えば５秒間）、ステアリングスイ
ッチ１１５が操作されないと、操作が終了したものと判
断する。このあとは、再び操作したい視線スイッチエリ
アの所定領域の注視と、メインスイッチ４０６の操作に
移る。ここで、角膜反射識別部１０７、瞳孔抽出部１０
８、注目方向算出部１０９、および全体制御部１２１は
マイクロコンピュータで構成され、処理データを一時記
憶しておく図示しないメモリを有している。

【００１６】次に上記構成における動作の流れを図４の
フローチャートに基づいて説明する。まずステップ２０
１において、全体制御部１２１から計測開始信号が出力
されると、これに基づきステップ２０２で、照明発光制
御部１０４からトリガ信号が発せられて、第１の発散照
明１０２が点灯され、車両運転者１２２の顔面が照明さ
れる。そして、ステップ２０３において、この照明され
た顔面領域の画像がカメラによって取り込まれ、画像情
報がＡ／Ｄ変換器１０５によりＡ／Ｄ変換されて、デジ
タルの画像データＩ1 （ｘ，ｙ）として、画像メモリ１
０６に格納される。

【００１７】引き続きステップ２０４において、照明発
光制御部１０４からのトリガ信号によって、第２の発散
照明１０３が点灯され、車両運転者１２２の顔面が照明
される。ステップ２０５でこの照明された顔面領域の画
像がカメラ１０１によって取り込まれ、上述と同様に画
像情報がＡ／Ｄ変換器１０５によりＡ／Ｄ変換されて、
デジタルの画像データＩ2 （ｘ，ｙ）として、画像メモ
リ１０６に格納される。ステップ２０２〜２０５が、発
明の画像入力手段を構成している。

【００１８】この後、ステップ２０６において、角膜反
射識別部１０７により、画像データＩ1 （ｘ，ｙ）、Ｉ
2 （ｘ，ｙ）から車両運転者１２２の角膜反射像の位置
が計測される。ところで、角膜反射像は眼球部光学系の
どの面で生じた像であるかによって、第１〜第４のプル
キンエ像に分類できる。ここで着目するのは、その中で
最も明るい、角膜表面で生じた第１プルキンエ像とす
る。ここで、もし、車両運転者１２２が眼鏡を装用して
いる場合には、角膜反射像の他に、眼鏡レンズや眼鏡フ
レームでの反射光が同時に観測される。これらは、角膜
反射像と同様に明るい領域として観測される。角膜反射
識別部１０７では、これらの観測される反射光の中から
真の角膜反射像が特定される。

【００１９】すなわち、角膜反射識別部１０７において
は、図５に示す画像信号処理が行われる。まず、ステッ
プ３０１において、画像データＩ1 （ｘ，ｙ）、Ｉ2
（ｘ，ｙ）の差分演算が行われ、その結果が次のような
新たな画像データＩ3 （ｘ，ｙ）とされる。Ｉ3 （ｘ，ｙ）＝Ｉ1 （ｘ，ｙ）−Ｉ2 （ｘ，ｙ）これにより、図６に示されるように、画像データＩ1
（ｘ，ｙ）とＩ2 （ｘ，ｙ）の間で濃淡値がほぼ等しい
眼鏡領域や頬領域、さらに白目領域が除去され、両デー
タで表わされる２画像（ａ）、（ｂ）間で濃淡値が大き
く異なる角膜反射像Ａ1 、Ａ2 、網膜反射像Ｂ1 、眼鏡
レンズ反射像Ｃ1 、Ｃ1 ’、Ｃ2 、Ｃ2 ’、眼鏡フレー
ム反射像Ｄ1 、Ｄ1 ’、Ｄ2 、Ｄ2 ’などの領域が
（ｃ）のように強調される。なお、上記画像データＩ3
（ｘ，ｙ）は、正値および負値の双方がそのまま記憶さ
れる。（ｃ）における塗りつぶし部は負値を示す。

【００２０】ステップ３０２で、画像データＩ3 （ｘ，
ｙ）が、予め設定した所定のしきい値Ｔｈ１（Ｔｈ１＞
０）で２値化され、画像データＩ4 （ｘ，ｙ）が得られ
る。画像データＩ4 （ｘ，ｙ）による画像は、図６の
（ｄ）に示されるようなものとなる。これにより、第１
の発散照明１０２による角膜反射像および眼鏡反射像の
みが抽出されることになる。ここでは、抽出された領域
にはＩ4 （ｘ，ｙ）＝Ｋ、その他の領域についてはＩ4
（ｘ，ｙ）＝Ｌが付与されてメモリに格納されるものと
する。

【００２１】次いでステップ３０３では、上記抽出され
た各領域の画像データＩ4 （ｘ，ｙ）に番号付けを行な
うラベリング処理が施こされる。このあとステップ３０
４において、領域面積によるしきい値処理が行なわれ
る。すなわち、角膜反射によって得られる像（輝点）の
面積はごく小さいのに対して、眼鏡レンズの反射や眼鏡
フレームの反射によって得られる像には、大きな広がり
をもったものが多いから、上記ラベリングを施した結果
に対して、面積によるしきい値処理を行って、一定面積
Ｓth以上の領域が除去される。

【００２２】次のステップ３０５では、抽出した領域の
位置を特定するために、残った領域に対して、下記の式
により各領域ｉの重心座標（Ｘｇｉ，Ｙｇｉ）を求める
処理が行なわれる。

【数１】

【数２】

【００２３】ステップ３０６では、第２の発散照明１０
３による反射像の探索領域の設定が行なわれる。すなわ
ち、上記のようにして第１の発散照明１０２による反射
像の位置（Ｘｇｉ，Ｙｇｉ）が特定されれば、第２の発
散照明１０３による反射像の発生位置は、その近傍に限
定されることになる。そこで、前ステップで算出された
各重心位置の周りにｍ×ｎ画素の小領域が設定され、そ
の領域内で第２の発散照明１０３による反射像の探索を
行なうものとされる。

【００２４】領域ｉの重心位置に対する探索領域の設定
位置は、第１、第２の発散照明の設定状態に応じて決定
される。例えば図２に示した発散照明の配置と逆に、図
７の（ａ）に示されるように第２の発散照明１０３’を
第１の発散照明１０２の左側にレイアウトした場合に
は、（ｂ）のように、第１の発散照明１０２による角膜
反射像Ａ1 よりも、第２の発散照明１０３’による角膜
反射像Ａ2 の方が、画像上で左方に位置することとな
る。したがって、同図の（ｃ）に示すように、領域ｉの
重心位置Ｐから左方へ延びる探索領域Ｒを設定すればよ
い。

【００２５】こうして探索領域が設定されると、つぎの
ステップ３０７において、その探索領域内で、領域ｉご
とに探索が行なわれる。この探索は、設定した探索領域
のｘアドレス、ｙアドレスに一致した画像データＩ3
（ｘ，ｙ）上の濃淡値をモニタし、あらかじめ設定され
たしきい値Ｔｈ２（ただしＴｈ２＜０）を用いて、Ｉ3 （ｘ，ｙ）＜Ｔｈ２を満足する画素を抽出することによって行なわれる。

【００２６】この２値化処理の後、抽出された領域のラ
ベリングが行なわれ、その結果に応じて次の３通りの処
理が行なわれる。（１）探索領域内にＩ3 （ｘ，ｙ）＜Ｔｈ２を満足する
画素が発見されない場合。このときには、領域ｉに対応
した領域が探索領域内に存在しない、すなわち領域ｉは
角膜反射像でないこととなる。

【００２７】（２）探索領域内にＩ3 （ｘ，ｙ）＜Ｔｈ
２を満足する画素で構成された領域が、唯１つ発見され
る。このときには、発見された領域の重心座標を求め、
（Ｘｇｉ，Ｙｇｉ）とその重心座標間の距離Ｄｉを算出
し、Ｄｉ、（Ｘｇｉ，Ｙｇｉ）、ならびに算出した重心
座標がペアでメモリに記憶される。

【００２８】（３）探索領域内にＩ3 （ｘ，ｙ）＜Ｔｈ
２を満足する画素で構成された領域が、２つ以上発見さ
れる。この場合には、発見された各領域の重心座標を求
め、（Ｘｇｉ，Ｙｇｉ）とその各々の重心座標との間の
距離Ｄｉを算出し、Ｄｉの最小値、（Ｘｇｉ，Ｙｇ
ｉ）、ならびにＤｉの最小値を与える領域の重心座標と
がペアでメモリに記憶される。

【００２９】そして、ステップ３０８において、真の角
膜反射像が識別決定される。これは、前ステップで計測
された重心座標間の距離Ｄｉの最小値を与える領域ｉを
求めることによって行なわれる。すなわち、一般に眼鏡
レンズの曲率は眼球の曲率に比べて小さいので、異なる
２点からの照明光の反射像の位置ずれは、眼球による反
射光の方が小さくなり、したがってＤｉの最小値を与え
る領域ｉが角膜反射像であると判断されることによる。
こうして算出された角膜反射像の重心座標がメモリに記
憶される。ステップ３０１が発明の差分演算手段を構成
し、またステップ３０２〜３０７がずれ量計測手段を、
ステップ３０８が角膜反射像抽出手段を構成している。

【００３０】図４のフローチャートに戻って、このあと
ステップ２０７において、瞳孔抽出部１０８で、画像デ
ータＩ1 （ｘ，ｙ）から瞳孔領域が抽出される。ここで
は、共軸系としてレイアウトされたカメラ１０１と第１
の発散照明１０２によって、操作者１１３の瞳孔領域を
示す網膜反射光が、明るい領域として観測されることが
利用される。この抽出処理手法は、既に特願平５−５０
６１９号に提案されている。そして抽出された瞳孔領域
の重心座標が算出されてメモリに記憶される。

【００３１】このあと、ステップ２０８で、注目方向算
出部１０９において、これまでに求められた２つの角膜
反射像の重心座標および瞳孔領域の重心座標から、従来
例と同様にして、車両運転者１２２の注目方向が算出さ
れる。そして、ステップ２０９において、算出された注
目方向が連続して、視線スイッチエリア１１３のエアコ
ンスイッチ方向を向いているか否かを判定し、例えば、
もし０．３秒以上エアコンスイッチ方向を向いていると
判断されたら、ステップ２１０において、エアコン制御
モードへの切り替えが行なわれる。ステップ２０９、２
１０が発明の情報伝達手段を構成している。

【００３２】本実施例は上記のように構成されているか
ら、車両運転者に拘束を与えない自由空間において運転
者が眼鏡を装用していても精度よくその注目方向が計測
され、これにより、運転者の注目によるスイッチ制御や
情報提示等の非接触マンマシンインターフェイスを構築
することができる。

【００３３】図８は、本発明の第２の実施例を示す。こ
れは、前実施例の第１の発散照明１０２および第２の発
散照明１０３に加え、さらに第３の発散照明１１４を運
転者の顔面に向け設けたものである。これら第１〜第３
の発散照明は、前実施例におけると同様に、交互に照明
発光制御部１０４’からのトリガ信号により点灯され
る。その他の構成は前第１実施例と同じであり、図示省
略してある。

【００３４】この構成によれば、各発散照明が交互に点
灯されるのと同期してカメラにより撮影される反射光の
数が増え、しかもそのうち角膜反射像の位置ずれは小さ
く、眼鏡の表面反射による像の位置ずれは大きくなるの
で、近接した３像を抽出することにより、角膜反射像抽
出の精度がさらに向上する。またこの際、照明が３個に
なったことによって、角膜反射像と眼鏡表面反射による
像とが重なる確率が非常に小さくなるというメリットが
ある。

【００３５】つぎに第３の実施例では、上述の各実施例
でカメラで取り込んだ全画像範囲内から角膜反射像候補
を抽出しているのに対して、網膜反射像を先に抽出し、
その近傍のみで角膜反射像を探索する。すなわち、角膜
反射像の発生位置は網膜反射像の位置の近傍に限定され
る一方、網膜反射像はある程度大きい円形領域を抽出す
るもので眼鏡の反射パターンとは明確に識別でき誤抽出
の可能性は少ない。

【００３６】したがって、とくに図示しないが、図４に
おけるステップ２０６とステップ２０７の順序を入れ替
えて、まず網膜反射像が抽出され、その網膜反射像の重
心位置が算出される。そして、この重心位置を中心とす
る縦Ｎ画素、横Ｍ画素の探索エリアが設定される。次い
で次のステップで、上記探索エリア内のみで角膜反射像
が探索される。

【００３７】この実施例によれば、角膜反射像の探索エ
リアが限定されるからその探索時間が大幅に短縮される
という利点が得られる。そしてさらには、例えば運転者
が比較的小さな丸いイヤリングを着用しており、照明に
よる２つの角膜反射像間の距離よりもイヤリングからの
２つの反射像間の距離の方が小さくなるようなことがあ
っても、前記探索エリアの設定によりイヤリングからの
反射像を角膜反射像であると誤検出することが防止され
るという効果も得られる。

【００３８】

【発明の効果】以上のとおり、本発明は、異なる複数位
置の光源により眼球部を個別に照明して複数の画像デー
タを得るようにし、２つの画像データの差分演算を行な
う差分演算手段を設けたから、両画像間で変化のない部
分が除去されるとともに、複数の反射像におけるペアの
判別が容易となり、その位置ずれ量が所定値以下である
反射像のペアを角膜反射像として抽出するようにしたか
ら、被験者に拘束を与えない自由空間において被験者が
眼鏡を装用していても、眼鏡レンズや眼鏡フレームから
角膜反射像が確実に識別特定され、高精度に注目方向が
算出され、信頼性の高い車両用インターフェイスが実現
できるという効果を有する。

【図面の簡単な説明】

【図１】本発明の構成を示す図である。

【図２】発明の第１の実施例を示す構成図である。

【図３】発明の第１の実施例を示すブロック図である。

【図４】実施例における注目方向計測の流れを示すフロ
ーチャートである。

【図５】角膜反射識別部１０７における画像信号処理の
流れを示すフローチャートである。

【図６】差分演算の処理を示す説明図である。

【図７】探索領域の設定要領を示す説明図である。

【図８】第２の実施例を示す図である。

【図９】従来例を示す図である。

【符号の説明】

１画像入力手段２ａ、２ｂ光源３差分演算手段４ずれ量計測手段５角膜反射像抽出手段６注目方向算出手段７情報伝達手段１０１、４０１カメラ１０２、４０２第１の発散照明１０３、４０３第２の発散照明１０４、１０４’ 照明発光制御部１０５Ａ／Ｄ変換器１０６画像メモリ１０７角膜反射識別部１０８瞳孔抽出部１０９注目方向算出部１１０停留判断部１１１ＨＵＤ（ヘッドアップディスプレイ）表示制
御部１１２、４０９ＨＵＤ表示１１３、４０８視線スイッチエリア１１４、４０６メインスイッチ１１５、４０４ステアリングスイッチ１１６コントローラ切り替え部１１８エアコンコントローラ１２１全体制御部１２２車両運転者１２３第３の発散照明４０５ステアリング４０７ウインドシールド

Claims

【特許請求の範囲】

【請求項１】車両運転者の眼球部を照明する光源と、
該光源による明るさ分布を入力する撮像手段と、前記明
るさ分布から運転者の注目している方向を算出する手段
を有し、運転者の注目している方向によって、車両への
情報伝達を行なう車両用インターフェイスにおいて、互
いに位置を異ならせて設けられ車両運転者の眼球部を個
別に照明する複数の光源を備え、前記照明ごとに前記眼
球部における反射像を撮像して複数の画像データを得る
画像入力手段と、該画像入力手段で得られた複数の前記
画像データのうち、２つの画像データの差分演算を行な
う差分演算手段と、前記差分演算結果に基づいて得られ
る反射像の位置ずれ量を計測するずれ量計測手段と、前
記位置ずれ量が所定値以下である反射像のペアを角膜反
射像として抽出し該角膜反射像位置を求める角膜反射像
抽出手段と、前記角膜反射像位置を用いて、車両運転者
の注目方向を算出する注目方向算出手段と、算出された
注目方向に応じて、車両への情報伝達を行なう情報伝達
手段とを有することを特徴とする車両用インターフェイ
ス。