JP3530648B2 - 視線検出装置及び光学装置 - Google Patents
視線検出装置及び光学装置Info
- Publication number
- JP3530648B2 JP3530648B2 JP22860895A JP22860895A JP3530648B2 JP 3530648 B2 JP3530648 B2 JP 3530648B2 JP 22860895 A JP22860895 A JP 22860895A JP 22860895 A JP22860895 A JP 22860895A JP 3530648 B2 JP3530648 B2 JP 3530648B2
- Authority
- JP
- Japan
- Prior art keywords
- line
- sight
- detection
- observer
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Automatic Focus Adjustment (AREA)
- Eye Examination Apparatus (AREA)
Description
どの位置を注視しているかを検出する視線検出装置及び
該装置を具備するカメラ等の光学装置の改良に関するも
のである。
を検知し、撮影者がファインダ視野内のどの領域(位
置)を観察しているか、いわゆる撮影者の注視方向をカ
メラの一部に設けた視線検出手段で検知し、該視線検出
手段からの信号に基づいて自動焦点調節や自動露出等の
各種撮影機能を制御するようにしたカメラが種々提案さ
れている。
11号公報において、撮影者の注視方向を検出する視線
検出手段と、複数個の測光感度分布を持つ自動露出制御
手段とを有し、前記視線検出手段からの出力信号に基づ
いて焦点検出手段や自動露出制御手段の駆動を制御する
ようにしたカメラを提案している。
出した信号によってカメラ等の制御を行う上で、問題と
なるのが人間の生理現象である「瞬き」であり、この
「瞬き」を検出し、その情報を制御に取り入れた提案も
種々なされており、特開平6−308371公報では、
撮影者の「瞬き」を検出した場合には、視線検出結果を
無効とする視線検出装置が提案されている。
いては、何らかの原因で視線検出の一回目の失敗をした
とき、次回の視線検出の制御をどうするかという問題に
対して、初回の視線検出が失敗したと判断されると、撮
影者の眼球を照明する照明手段の照明位置、あるいは照
明出力を変更したり、該眼球の眼球像を受光する撮像素
子の蓄積時間、あるいは信号増幅率の変更等を行って、
該眼球像の像出力信号を変更し、再度視線検出動作を行
うことにより、視線検出の精度及び成功率の向上を図っ
た視線検出装置の提案を行っている。
開平6−138367号公報においては、観察者がカメ
ラ等の光学機器のファインダを覗き、視線入力動作を行
っているとき(正確には眼球像を受光するための撮像素
子の蓄積時間中)に「瞬き」を行ってしまうと、視線検
出が失敗したと判断して、前記の如く次回の眼球像蓄積
時には照明手段等の変更動作を行ってしまう。そのた
め、初回の視線検出時に「瞬き」を行ったために、次回
の視線検出において、眼球への不適切な照明等の条件に
て検出が行われ、この条件で得られた眼球像信号はやは
り視線検出不能となってしまい、結果的に2回とも視線
検出失敗となってしまうという問題があった。
中に「瞬き」をしてしまうと、裸眼用よりも一対の照明
手段の間隔が離れていて、照明出力が強く設定されてい
る眼鏡用の照明手段による照明が、次回撮影者の眼球に
対して行われる。その結果本来、裸眼用の照明出力にて
受けるよりも多くのエネルギーを眼球に受けることにな
り、眼球像出力が高くなりすぎて飽和レベルに達した
り、角膜反射像(プルキンエ像)が眼球の角膜部の外に
発生してしまったりして、視線検出の精度に悪影響を与
えることになる。
察者が視線検出中に瞬きを行ってしまっても、該観察者
の安定した眼球像信号を得、視線検出の精度を向上させ
ると共に、視線検出の成功率を高めることのできる視線
検出装置及び光学装置を提供することにある。
性がそれ程高くなくとも、視線検出が円滑に機能するよ
うにすることのできる視線検出装置及び光学装置を提供
することにある。
るために、請求項1記載の本発明は、得られた視線情報
が有効でないと判定し、かつ、視線検出中に観察者が瞬
きを行っていないと判定した場合は、次回の視線検出を
行う際の、観察者の眼球を照明する照明手段と観察者の
眼球像を検出する受光手段の制御を、前回と異なる制御
にて行うようにし、視線検出中に観察者が瞬きを行った
と判定した場合は、次回の視線検出を行う際の、前記照
明手段と前記受光手段の制御を、前回と同じ制御にて行
うようにしている。
請求項2記載の本発明は、観察者の眼球を照明する照明
手段と、観察者の眼球像を検出する受光手段と、前記照
明手段と前記受光手段のうちの少なくとも一方の動作状
態を制御する制御手段と、前記眼球像を利用して観察者
の視線情報を検出する視線検出手段とを備えた視線検出
装置において、前記視線検出手段によって得られた視線
情報が有効か否かを判定する視線情報判定手段と、視線
検出中に観察者が瞬きを行ったか否かを判定する瞬き判
定手段とを具備し、前記視線情報判定手段によって視線
情報が有効でないと判定され、かつ、前記瞬き判定手段
によって視線検出中に観察者が瞬きを行っていないと判
定された場合は、次回の視線検出を行う際の前記照明手
段と前記受光手段の制御を、前回と異なる制御にて行っ
て再度視線情報を検出し、前記視線情報判定手段によっ
て視線情報が有効でないと判定され、かつ、前記瞬き判
定手段によって視線検出中に観察者が瞬きを行ったと判
定された場合は、次回の視線検出を行う際の前記照明手
段と前記受光手段の制御を、前回と同じ制御にて行って
再度視線情報を検出するようにしている。
に基づいて詳細に説明する。
ときの実施の第1の形態を示す要部構成図、図2
(A),(B)は図1の一眼レフカメラの上面及び背面
を示す図、図3は同じく図1の一眼レフカメラのファイ
ンダ内を示す図である。
便宜上2枚のレンズで示したが、実際はさらに多数のレ
ンズから構成されている。2は主ミラーで、ファインダ
系による被写体像の観察状態と被写体像の撮影状態に応
じて撮影光路へ斜設され或は退去される。3はサブミラ
ーで、主ミラー2を透過した光束をカメラボディの下方
の後述する焦点検出装置6へ向けて反射する。
ルム或はCCDやMOS型等の固体撮像素子、或は、ビ
ディコン等の撮像管より成っている。
置されたフィールドレンズ6a,反射ミラー6b及び6
c,二次結像レンズ6d,絞り6e,複数のCCDから
成るラインセンサ6f等から構成されている。
相差方式にて焦点検出を行うものであり、図3に示すよ
うに、被写界内の複数の領域(測距点マーク70〜74
で示される5箇所)を測距点(焦点検出点)として、該
測距点が焦点検出可能となるように構成されている。
たピント板、8はファインダ光路変更用のペンタプリズ
ムである。9,10は各々観察画面内の被写体輝度を測
定するための結像レンズと測光センサであり、結像レン
ズ9はペンタプリズム8内の反射光路を介してピント板
7と測光センサ10を共役に関係付けている。
置される、光分割器11aを備えた接眼レンズ11であ
り、撮影者の眼15によるピント板7の観察に使用され
る。光分割器11aは、例えば可視光を透過し赤外光を
反射するダイクロイックミラーより成っている。
リズム8,接眼レンズ11によってファインダ光学系が
構成されている。
変換素子列を二次元的に配したイメージセンサで、結像
レンズ12に関して所定の位置にある撮影者の眼球15
の瞳孔近傍と共役になるように配置されている。13a
〜13fは各々照明光源であるところの赤外発光ダイオ
ード(以下、IREDと記す)で、図2(B)に示すよ
うに接眼レンズ11の回りに配置されている。
とによって視線検出装置が構成されている。
輝度のスーパーインポーズ用LEDで、ここから発光さ
れた光は投光用プリズム22を介し、主ミラー2で反射
されてピント板7の表示部に設けた微小プリズムアレイ
7aで垂直方向に曲げられ、ペンタプリズム8,接眼レ
ンズ11,接眼部の開口17を通って撮影者の眼15に
達する。
判かるように、各々の測距点マーク70〜74がファイ
ンダ視野内で光り、焦点検出領域(検出点)を表示させ
ることができるものである(以下、これをスーパーイン
ポーズ表示という)。
74の内部には、ドットマーク70’、74’が刻印さ
れており、これは眼球の個人差による視線の検出誤差を
補正するための視線補正データを採取する(キャリブレ
ーションと称されている)際の視標を示すものである。
絞り値表示のセグメント、50は視線入力状態であるこ
とを示す視線入力マーク、53は撮影レンズ1の合焦状
態を示す合焦マークである。24はファインダ視野外に
撮影情報を表示するためのファインダ内LCD(以下、
F−LCDとも記す)で、照明用LED25によって照
明される。
リズム26によって、図3の24で示したようにファイ
ンダ視野外に導かれ、撮影者は各種の撮影情報を知るこ
とができる。
けた絞り、32は絞り駆動回路111を含む絞り駆動装
置、33はレンズ駆動用モータ、34は駆動ギヤ等から
成るレンズ駆動部材である。35はフォトカプラで、前
記レンズ駆動部材34に連動するパルス板36の回転を
検知してレンズ焦点調節回路110に伝えており、該焦
点調節回路110は、この情報とカメラ側からのレンズ
駆動量の情報に基づいて前記レンズ駆動用モータ33を
所定量駆動させ、撮影レンズ1を合焦位置に移動させる
ようになっている。37は公知のカメラとレンズとのイ
ンターフェイスとなるマウント接点である。
でカメラが横位置で構えられたか、縦位置で構えられた
かを検出するものである。
ーズ釦である。42は外部モニタ表示装置としてのモニ
タ用LCDで、予め決められたパターンを表示する固定
セグメント表示部と、可変数値表示用の7セグメント表
示部とから成っている。
の選択を行うためのものである。カメラ本体に刻印され
た指標43を表示に合わせる事によって、その表示内容
で撮影モードが設定される。例えば、カメラを不作動と
するロックポジション、予め設定した撮影プログラムに
よって制御される自動撮影モードのポジション、撮影者
が撮影内容を認定できるマニュアル撮影モードで、プロ
グラムAE、シャッタ優先AE,絞り優先AE,被写体
深度優先AE,マニュアル露出の各撮影モードが設定可
能である。また、視線入力用の「CAL」ポジションも
モードダイヤル44中にあり、「CAL」ポジションに
して、後述の電子ダイヤル45を操作する事により、視
線入力のON,OFF、そしてキャリブレーションの実
行及び選択を行うことができる。
クパルスを発生させることによってモードダイヤル44
で選択されたモードの中でさらに選択し得る設定値を選
択する為のものである。例えば、モードダイヤル44に
てシャッタ優先の撮影モードを選択すると、ファインダ
内LCD24及びモニタ用LCD42には、現在設定さ
れているシャッタ速度が表示される。この表示を見て、
撮影者が電子ダイヤル45を回転させると、その回転方
向にしたがって現在設定されているシャッタ速度から順
次シャッタ速度が変化していくように構成されている。
直接関係ないのでその説明は省略する。
れた電気的構成を示すブロック図であり、図1と同一の
ものは同一番号をつけている。
ータの中央処理装置(以下、CPUと記す)100に
は、視線検出回路101,測光回路102,自動焦点検
出回路103,信号入力回路104,LCD駆動回路1
05,LED駆動回路106,IRED駆動回路10
7,シャッタ制御回路108,モータ制御回路109が
接続されている。また、撮影レンズ1内に配置された焦
点調節回路110,絞り駆動回路111とは、図1で示
したマウント接点37を介して信号の伝達がなされる。
0aは記憶手段としての視線の個人差を補正する視線補
正データの記憶機能を有している。
サ14(CCD−EYE)からの眼球像の信号をA/D
変換し、この像情報をCPU100に送信する。CPU
100は視線検出に必要な眼球像の各特徴点を所定のア
ルゴリズムにしたがって抽出し、さらに各特徴点の位置
から撮影者の視線を算出する。また同時に、前記眼球像
をA/D変換した出力をもとに、撮影者が「瞬き」をし
たか否かの判定もCPU100内で行われる。
らの信号を増幅後、対数圧縮,A/D変換し、各センサ
の輝度情報としてCPU100に送信する。測光センサ
10は、ファインダ画面内の4つの領域を測光するSP
C−L,SPC−C,SPC−R,SPC−Aから成る
4つのフォトダイオードから構成されており、いわゆる
分割測光が可能である。
た、画面内の5つの測距点70〜74に対応した5組の
ラインセンサCCD−L2,CCD−L1,CCD−
C,CCD−R1,CCD−R2から構成される公知の
CCDラインセンサである。
インセンサ6fから得た電圧をA/D変換し、CPU1
00に送る。
でONし、測光,AF,視線検出動作等を開始させる為
のスイッチ、SW2はレリーズ釦41の第2ストローク
でONするレリーズスイッチである。SW−DIALI
とSW−DIAL2は、既に説明した電子ダイヤル45
内に設けられたダイヤルスイッチで、信号入力回路10
4のアップダウンカウンタに入力され、電子ダイヤル4
5の回転クリック量をカウントする。SW−HV1,S
W−HV2は姿勢検出スイッチ27に相当する姿勢検出
スイッチであり、この信号を基にカメラの姿勢状態が検
出される。
に入力され、データバスによってCPU100に送信さ
れる。
子であるLCDを表示駆動させるための公知の構成より
成るもので、CPU100からの信号に従い、絞り値,
シャッタ秒時,設定した撮影モード等の表示をモニタ用
LCD42とファインダ内LCD(F−LCD)24の
両方に同時に表示させることができる。
D(F−LED)25とスーパーインポーズ用LED2
1を点灯,点滅制御する。前記IRED駆動回路107
は、CPU100の指示に従って赤外発光ダイオード
(IRED1〜6)13a〜13fを選択的に点灯させ
たり、赤外発光ダイオード(IRED1〜6)13a〜
13fへの出力電流値(あるいはパルス数)を変化させ
て照明パワーを制御する。
と先幕を走行させるマグネットMG−1と、後幕を走行
させるマグネットMG−2を制御し、感光部材に所定光
量を露光させる。前記モータ制御回路109は、フィル
ムの巻き上げ、巻き戻しを行うモータM1と主ミラー2
及びシャッタ4のチャージを行うモータM2を制御する
ためのものである。
回路109によって、一連のカメラのレリーズシーケン
ス動作する。
について、図5のフローチャートを用いて説明する。
不作動状態から所定の撮影モードに設定すると(この実
施の形態では、シャッタ優先AEに設定された場合をも
とに説明する)、カメラの電源がONされ(ステップ#
100)、CPU100のEEPROM100aに記憶
された視線のキャリブレーションデータ以外の視線検出
に使われる変数がリセットされる(ステップ#10
1)。そして、カメラはレリーズ釦41が押し込まれて
スイッチSW1がONされるまで待機する(ステップ#
102)。
W1がONされたことを信号入力回路104が検出する
と、CPU100は視線検出を行う際にどのキャリブレ
ーションデータを使用するかを視線検出回路101に確
認する(ステップ#103)。この時、確認されたキャ
リブレーションデータナンバーのキャリブレーションデ
ータが初期値のままで変更されていなかったり、あるい
は、視線禁止モードに設定されていたら(ステップ#1
03)、視線検出は実行せずに、すなわち視線情報を用
いずに測距点自動選択サブルーチンによって特定の測距
点を選択する(ステップ#115)。そして、この測距
点において自動焦点検出回路103は焦点検出動作を行
う(ステップ#107)。
くつかの方法が考えられるが、多点AFカメラでは公知
となっている中央測距点に重み付けを置いた近点優先ア
ルゴリズムが有効である。
バーに対応する視線のキャリブレーションデータが所定
の値に設定されていてそのデータが撮影者により入力さ
れたものであることが認識されると(ステップ#10
3)、視線検出回路101はそのキャリブレーションデ
ータにしたがって視線検出を実行され、視線はピント板
7上の注視点座標に変換される(ステップ#104)。
視線情報は成功か否かの判定にかけられる(ステップ#
105)。ここでの判定条件は、角膜反射像であるプル
キンエ像及び瞳孔中心位置の信頼性及び眼球の回転角等
である。この結果、不成功ならばステップ#115の
「測距点自動選択サブルーチン」に進む。また、視線検
出が成功ならば、CPU100は該注視点座標に近接し
た測距点を選択する(ステップ#106)。そして、自
動焦点検出回路103は検出された視線情報も用いて選
択がなされた測距点での焦点検出を実行する(ステップ
#107)。
あるかを判定し(ステップ#108)、不能であればC
PU100はLCD駆動回路105に信号を送ってファ
インダ内LCD24の合焦マーク79を点滅させ、測距
がNGであることを撮影者に警告し(ステップ#11
7)、スイッチSW1が離されるまでこの警告を続ける
(ステップ#118→#117→#118……)。
ズムで選択された測距点の焦点調節状態が合焦でなけれ
ば(ステップ#109)、CPU100はレンズ焦点調
節回路110に信号を送って所定量撮影レンズ1を駆動
させる(ステップ#116)。レンズ駆動後は、自動焦
点検出回路103は再度焦点検出を行い(ステップ#1
07)、撮影レンズ1が合焦しているか否かの判定を行
う(ステップ#109)。
していたならば、CPU100はLCD駆動回路105
に信号を送ってファインダ内LCD24の合焦マーク5
3を点灯させるとともに、LED駆動回路106にも信
号を送って合焦している測距点に対応したスーパーイン
ポーズ用LED21を点灯させ、該測距点を光らせるこ
とで合焦表示させる(ステップ#110)。
たのを撮影者が見て、その測距点が正しくない、あるい
は撮影を中止すると判断してレリーズ釦41から手を離
し、スイッチSW1をOFFすると(ステップ#11
1)、引き続きカメラはスイッチSW1がONされるま
で待機するステップ#102へ戻る。
て、引き続きスイッチSW1をONし続けたならば(ス
テップ#111)、CPU100は測光回路102に信
号を送信して測光を行わせる(ステップ#112)。
重み付けを行った露出値が演算される。本実施の形態の
場合、測光演算結果としてセグメントと小数点を用いて
絞り値(図3の52に示すF5.6)を表示している。
ッチSW2がONされているかどうかの判定を行い(ス
テップ#113)、スイッチSW2がOFF状態であれ
ば再びスイッチSW1の状態の確認を行う(ステップ#
111)。
CPU100はシャッタ制御回路108、モータ制御回
路109、及び、絞り駆動回路111にそれぞれ信号を
送信して、公知のシャッタレリーズ動作を行う(ステッ
プ#114)。
を介してモータM2に通電して主ミラー2をアップさ
せ、絞り31を絞り込んだ後、マグネットMG−1に通
電し、シャッタ4の先幕を開放する。絞り31の絞り値
及びシャッタ4のシャッタスピードは、前記測光回路1
02にて検出された露出値とフィルム5の感度から決定
される。所定のシャッタ秒時(1/125秒)経過後、
マグネットMG−2に通電し、シャッタ4の後幕を閉じ
る。フィルム5への露光が終了すると、モータM2に再
度通電し、ミラーダウン、シャッタチャージを行うとと
もにフィルム給送用のモータM1にも通電し、フィルム
の駒送りを行い、一連のシャッタレリーズシーケンスの
動作が終了する。
されるまで待機する(ステップ#102)。
ーズ動作(ステップ#114)以外の一連の動作中に、
モードダイヤル44によってモードが変更され、視線の
キャリブレーションモードに設定されたことを信号入力
回路104が検出すると、CPU100はカメラの動作
を一時停止し、視線検出回路101に送信して視線のキ
ャリブレーション(ステップ#115)が可能な状態に
設定する。
は、撮影者がファインダ視野内の測距点のドットマーク
右端74’、左端70’をそれぞれ一定時間固視するこ
とで行い、そこから得られた眼球像データから視線補正
データを採取するというもので、詳細は本発明と特に関
係が無いため省略する。
トである。
101は、CPU100より信号を受け取ると視線検出
を実行する(ステップ#104)。視線検出回路101
は撮影モードの中での視線検出かあるいは視線のキャリ
ブレーションモードの中での視線検出かの判定を行う
(ステップ#200)。同時に視線検出回路101はカ
メラが後述するどのキャリブレーションデータナンバー
に設定されているかを認識する。
線検出の場合はまず最初にカメラがどのような姿勢にな
っているかを信号入力回路104を介して検出する(ス
テップ#202)。信号入力回路104は水銀スイッチ
27(SW−ANG)の出力信号を処理してカメラが横
位置であるか縦位置であるか、また縦位置である場合は
例えばレリーズ釦41が天方向にあるか地(面)方向に
あるか判断する。
2から撮影領域の明るさの情報を入手する(ステップ#
203)。
キャリブレーションデータに含まれる撮影者の眼鏡情報
より赤外発光ダイオード(以下、IREDと称す)13
a〜13fの選択を行う(ステップ#204)。
影者が眼鏡をかけていなかったならば、図2(b)に示
すファインダ光軸よりのIRED13a,13bが選択
される。また、カメラが横位置で、撮影者が眼鏡をかけ
ていれば、ファインダ光軸から離れた13c,13dの
IREDが選択される。このとき撮影者の眼鏡で反射し
た照明光の一部は、眼球像が投影されるイメージセンサ
14上の所定の領域以外に達するため、眼球像の解析に
支障は生じない。
ば、撮影者の眼球を下方から照明するようなIREDの
組み合わせ、すなわち13a,13eもしくは13b,
13fのどちらかの組み合わせが選択される。
EYEと称す)の蓄積時間及びIREDの照明パワーが
前記測光情報及び撮影者の眼鏡情報等に基づいて設定さ
れる(ステップ#205)。該CCD−EYE14の蓄
積時間及びIREDの照明パワーは前回の視線検出時に
得られた眼球像のコントラスト等から判断された値を基
にして設定を行っても構わない。
Dの照明パワーが設定されると、CPU100はIRE
D駆動回路107を介してIRED13を所定のパワー
で点灯させるとともに、視線検出回路101はCCD−
EYE14の蓄積を開始する(ステップ#206)。ま
た、先に設定されたCCD−EYE14の蓄積時間にし
たがってここでの蓄積を終了し、それとともにIRED
13も消灯される。
ブレーションの設定であると判断され、ステップ#20
1にて、今回の視線検出がキャリブレーションモードの
中で2回目以上の視線検出であると判定されると、CC
D−EYE14の蓄積時間およびIREDの照明パワー
は前回の値が採用され、直ちにIRED13の点灯とC
CD−EYE14の蓄積が開始される(ステップ#20
6)。
像信号は順次読み出され、視線検出回路101でA/D
変換された後にCPU100にメモリされる(ステップ
#207)。
て、撮影者が「瞬き」をしたか否かの判定を行う(ステ
ップ#208)。
は、CCD−EYE14の像信号の中の角膜反射像信号
を利用する。
像信号を画像化したもので、眼球15の角膜においてI
RED13の発光によって角膜反射像(以下、プルキン
エ像と記す)19が生じる。また、17は虹彩、18は
瞳孔である。
9を含んだXーX’断面の像信号を表したのが図7
(b)であり、これからも判るようにプルキンエ像19
が眼球像信号の中で最も高い出力となる。そこで、像信
号の中で最も高い出力が、例えば規定値W以下であれば
プルキンエ像19が存在しないものと判定し、この場合
撮影者が「瞬き」をしたとみなす。
された時は、ステップ#206へ戻り、前回視線検出を
行った時と同じ条件のCCD−EYE14の蓄積制御
(この場合、蓄積時間及び信号増幅特性)とIRED1
3の制御(この場合、IREDの選択及び電流値)を再
び行い、撮影者が「瞬き」をしてしない状態の眼球像信
号を得る。この時、前回得られた像信号は新たなCCD
−EYE14にて蓄積された像信号に取って替わられ
る。
て、撮影者が「瞬き」をしていないと判定された場合
は、公知であるところの視線検出処理が行われる(ステ
ップ#209)。
照明に使用された1組のIRED13の虚像であるプル
キンエ像19の位置が検出される。
強い輝点として現れるため、光強度に対する所定のしき
い値を設け、該しきい値を超える光強度のものをプルキ
ンエ像19とすることにより検出可能である。また、瞳
孔の中心位置は瞳孔18と虹彩17の境界点を複数検出
し、各境界点を基に円の最小二乗近似を行うことにより
算出される。これらプルキンエ像位置と瞳孔中心位置と
から眼球に回転角度θが求まり、さらに二つのプルキン
エ像19の間隔かたカメラの接眼レンズ11と撮影者の
眼球15との距離が算出され、CCD−EYE14に投
影された眼球像の結像倍率βを得ることができる。
倍率β、さらにキャリブレーションで得られた個人差補
正情報を用いて、撮影者の視線方向のピント板7上の位
置座標を求めることができる。
に視線情報の信頼性判定を行う(ステップ#105)。
ここでは、上記求めた撮影者の視線位置がピント板7の
視野外であれば、視線検出は何らかの原因で失敗したと
みなしている。
の図5のステップ#106の測距点選択ヘリターンする
が、視線検出が失敗と判定されると、次に検出の失敗の
回数がチェックされる(ステップ#105)。ここで失
敗が視線検出の一回目であれば、一回目に失敗したCC
D−EYE14とIRED13の制御と異なった制御が
なされる。
IRED13a,13bが選択、照明がなされたのであ
れば、二回目ではCCD−EYE14の蓄積時間、ゲイ
ンは一回目と同じで、IRED13は眼鏡用のIRED
13c,13dが選択される。また一回目が眼鏡用のI
RED13c,13dで制御されたのであれば、二回目
ではIREDの選択はそのままで、CCD−EYE14
の蓄積時間が2倍の時間に設定しなおされる(ステップ
#210)。
定が終了すると、再びステップ#206にて、眼球像を
得るためのCCD−EYE14の蓄積制御が行われる。
ステップ#105’にて、視線検出が二回失敗(ステッ
プ#105において)と判定された場合には、図5のス
テップ#115の測距点自動選択へリターンする。
の第2の形態に係るカメラの視線検出動作を示すフロー
チャートであり、以下これにしたがって説明する。な
お、カメラの光学的配置や電気的構成は上記実施の第1
の形態と同様であるので、これらについては説明及びそ
の図示は省略する。
の形態で説明した図6の視線検出動作のフローチャート
に対し、「瞬き」判定を視線検出適否判定で視線検出失
敗と判断された後に行うことによって、「瞬き」判定自
体の信頼度があまり高くなくとも視線検出が円滑に機能
するように改良を加えたものである。
より動作を開始するが、ステップ300からステップ#
307までは、図6のステップ#200からステップ#
207までと全く同じなので、その説明は省略する。
の眼球像信号がCCD−EYE14からCPU100へ
読み出しが行われると、直ちに該眼球像信号を用いて前
記視線検出処理が行われ(ステップ#308)、視線検
出処理で求まった撮影者の視線位置を基に視線情報の信
頼性判定を行う(ステップ#105)。ここで視線検出
が信頼性判定にて成功と判定されると、前述の図5のス
テップ#106の測距点選択へリターンするが、視線検
出が失敗と判定されると、視線検出の失敗回数がチェッ
ク(ステップ#105’)され、二回続けて視線検出に
失敗していると視線検出は不可能と判断し、図5のステ
ップ#115の測距点自動選択へリターンする。
ての場合は、ここで「瞬き」判定が行われる。判定条件
は実施の第1の形態と同様、眼球像信号中にプルキンエ
像19の信号があるか否かで行う(ステップ#30
9)。ここで、「瞬き」を行ったと判定された場合は、
ステップ#306へ戻り、前回視線検出を行った時と同
じ条件のCCD−EYE14の蓄積制御(この場合、蓄
積時間及びゲイン)とIRED13の制御(この場合、
IREDの選択及び電流値)を再び行い、撮影者が「瞬
き」をしていない状態の眼球像信号を得る。この時、前
回得られた像信号は、新たなCCD−EYE14にて蓄
積された像信号に取って替わられる。
って、撮影者が「瞬き」をしていないと判定された場合
は、一回目に失敗したCCD−EYE14とIRED1
3の制御と異なった制御がなされる(ステップ#31
0)。これも前記実施の第1の形態と同様(図6のステ
ップ#210)である。CCD−EYE14とIRED
13の再設定が終了すると、再びステップ#306に
て、眼球像を得るためのCCD−EYE14の蓄積制御
が行われる。
に接眼している撮影者が視線検出中に瞬きを行ったか否
かを判定し、撮影者が「瞬き」を行ったと判定した場合
は、次回の視線検出を行うための画像取り込み制御、つ
まりCCD−EYE14の蓄積時間,ゲインやIRED
13の選択,電流値の制御を、「瞬き」を行った前回と
同じ制御で行うようにしている為、撮影者が視線検出中
に「瞬き」を行ってしまっても、該撮影者の安定した眼
球像信号を得ることができるため、視線検出の精度、及
び成功率の高い視線検出装置を提供することが可能とな
る。
において、IRED駆動回路107及び赤外発光ダイオ
ード13a〜13fが本発明の照明手段に相当し、イメ
ージセンサ(CCD−EYE)14が受光手段に相当
し、CPU100内のプログラムを実行する部分が本発
明の制御手段,視線検出手段,瞬き判定手段,視線情報
判定手段に相当する。
成の対応関係であるが、本発明は、これら実施の形態の
構成に限定されるものではなく、請求項で示した機能、
又は実施の形態がもつ機能が達成できる構成であればど
のようなものであってもよいことは言うまでもない。
用した場合を述べているが、レンズシャッタカメラ,ビ
デオカメラ等のカメラにも適用可能である。更に、その
他の光学機器や他の装置、構成ユニットとしても適用す
ることができるものである。
得られた視線情報が有効でないと判定し、かつ、視線検
出中に観察者が瞬きを行っていないと判定した場合は、
次回の視線検出を行う際の、観察者の眼球を照明する照
明手段と観察者の眼球像を検出する受光手段の制御を、
前回と異なる制御にて行うようにし、視線検出中に観察
者が瞬きを行ったと判定した場合は、次回の視線検出を
行う際の、前記照明手段と前記受光手段の制御を、前回
と同じ制御にて行うようにしている。
てしまっても、該観察者の安定した眼球像信号を得、視
線検出の精度を向上させると共に、視線検出の成功率を
高めることができる。
によって視線情報が有効でないと判定され、かつ、瞬き
判定手段によって視線検出中に観察者が瞬きを行ってい
ないと判定された場合は、次回の視線検出を行う際の照
明手段と受光手段の制御を、前回と異なる制御にて行っ
て再度視線情報を検出し、前記視線情報判定手段によっ
て視線情報が有効でないと判定され、かつ、前記瞬き判
定手段によって視線検出中に観察者が瞬きを行ったと判
定された場合は、次回の視線検出を行う際の前記照明手
段と前記受光手段の制御を、前回と同じ制御にて行って
再度視線情報を検出するようにしている。
なくとも、視線検出が円滑に機能するようにすることが
できる。
ラの光学的配置を示す図である。
である。
ある。
トである。
ートである。
る為の図である。
ラの視線検出動作を示すフローチャートである。
Claims (7)
- 【請求項1】得られた視線情報が有効でないと判定し、
かつ、視線検出中に観察者が瞬きを行っていないと判定
した場合は、次回の視線検出を行う際の、観察者の眼球
を照明する照明手段と観察者の眼球像を検出する受光手
段の制御を、前回と異なる制御にて行うようにし、視線
検出中に観察者が瞬きを行ったと判定した場合は、次回
の視線検出を行う際の、前記照明手段と前記受光手段の
制御を、前回と同じ制御にて行うようにしたことを特徴
とする視線検出装置。 - 【請求項2】観察者の眼球を照明する照明手段と、観察
者の眼球像を検出する受光手段と、前記照明手段と前記
受光手段のうちの少なくとも一方の動作状態を制御する
制御手段と、前記眼球像を利用して観察者の視線情報を
検出する視線検出手段とを備えた視線検出装置におい
て、前記視線検出手段によって得られた視線情報が有効か否
かを判定する視線情報判定手段と、 視線検出中に観察者
が瞬きを行ったか否かを判定する瞬き判定手段とを具備
し、前記視線情報判定手段によって視線情報が有効でな
いと判定され、かつ、前記瞬き判定手段によって視線検
出中に観察者が瞬きを行っていないと判定された場合
は、次回の視線検出を行う際の前記照明手段と前記受光
手段の制御を、前回と異なる制御にて行って再度視線情
報を検出し、 前記視線情報判定手段によって視線情報が有効でないと
判定され、かつ、前記瞬き判定手段によって視線検出中
に観察者が 瞬きを行ったと判定された場合は、次回の視
線検出を行う際の前記照明手段と前記受光手段の制御
を、前回と同じ制御にて行って再度視線情報を検出する
ことを特徴とする視線検出装置。 - 【請求項3】前記制御手段は、前記照明手段に付加する
電流値を変化させる手段であることを特徴とする請求項
2記載の視線検出装置。 - 【請求項4】前記制御手段は、複数個備わった前記照明
手段の選択位置を異ならせる手段であることを特徴とす
る請求項2記載の視線検出装置。 - 【請求項5】前記制御手段は、前記受光手段の蓄積時間
を変化させる手段であることを特徴とする請求項2記載
の視線検出装置。 - 【請求項6】前記制御手段は、前記受光手段の出力信号
の増幅率を変化させる手段であることを特徴とする請求
項2記載の視線検出装置。 - 【請求項7】上記請求項1乃至6のいずれかに記載の視
線検出装置を具備したことを特徴とする光学装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22860895A JP3530648B2 (ja) | 1995-08-15 | 1995-08-15 | 視線検出装置及び光学装置 |
US08/900,398 US5926655A (en) | 1995-08-15 | 1997-07-21 | Line of sight detection device and an apparatus having a line of sight detection device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22860895A JP3530648B2 (ja) | 1995-08-15 | 1995-08-15 | 視線検出装置及び光学装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH0951874A JPH0951874A (ja) | 1997-02-25 |
JP3530648B2 true JP3530648B2 (ja) | 2004-05-24 |
Family
ID=16879023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP22860895A Expired - Fee Related JP3530648B2 (ja) | 1995-08-15 | 1995-08-15 | 視線検出装置及び光学装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3530648B2 (ja) |
-
1995
- 1995-08-15 JP JP22860895A patent/JP3530648B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH0951874A (ja) | 1997-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6674964B2 (en) | Visual axis detecting apparatus | |
JP3297481B2 (ja) | 視線検出装置 | |
US5402199A (en) | Visual axis detecting apparatus | |
JPH07289517A (ja) | 視線検出装置およびそれを備えた光学機器 | |
JP2004008323A (ja) | 視線機能付光学装置 | |
JP2002301030A (ja) | 視線検出機能付き機器 | |
JP3530647B2 (ja) | 視線検出装置及び光学装置 | |
JP3184633B2 (ja) | カメラ | |
JP3530648B2 (ja) | 視線検出装置及び光学装置 | |
JP4054436B2 (ja) | 光学装置 | |
JP3256294B2 (ja) | 視線検出装置および視線検出方法 | |
JP2003307774A (ja) | 視線検出機能付き光学機器 | |
JP3559622B2 (ja) | 視線検出装置および視線検出装置を有する光学機器 | |
JP2003339642A (ja) | 視線検出装置及びそれを有した光学装置 | |
JP3176147B2 (ja) | 視線検出装置 | |
JP3391892B2 (ja) | 視線検出装置、光学装置及び視線検出方法 | |
JP3184634B2 (ja) | 視線検出装置を有する光学装置 | |
JPH10148864A (ja) | カメラの測光装置 | |
JP3219491B2 (ja) | 視線検出装置 | |
JP2002341239A (ja) | 視線検出装置 | |
JP3332581B2 (ja) | 光学装置、カメラ、視線検出装置、視線検出方法、及び、接眼部と眼球位置の相対位置判別方法。 | |
JPH0954234A (ja) | 視線検出装置及びカメラ | |
JPH06138364A (ja) | 視線検出装置を有するカメラ | |
JPH0943680A (ja) | 視線検出装置 | |
JP2002186587A (ja) | 視線検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040105 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040224 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040301 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080305 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090305 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120305 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140305 Year of fee payment: 10 |
|
LAPS | Cancellation because of no payment of annual fees |