JP2021182736A - 電子機器 - Google Patents

Abstract

【課題】顔の位置、顔の向き、眼鏡の位置、眼鏡の向きなどの調整をユーザーが容易に行うことができ、ひいては検出精度の高い視線検出を行うことができる電子機器を提供する。【解決手段】本発明の電子機器は、表示手段を見る眼を撮像した眼画像に基づいて視線検出を行う検出手段と、眼画像における瞳孔像の位置と、眼画像における角膜反射像の数との少なくとも一方に基づいて、表示手段を視認する視認状態の調整方法に関する所定の通知を行うように制御する制御手段とを有することを特徴とする。【選択図】図９

Description

本発明は、視線検出機能を有する電子機器に関する。

視線検出機能でユーザーの視線（視線方向）を検出し、視線の検出結果に基づいて測距点選択などを行うことが可能なカメラ（ビデオカメラを含む）が実用化されている。

特許文献１には、ユーザーの眼画像を表示装置に表示する技術が開示されている。ユーザーが眼画像に基づいて顔の位置、顔の向き、眼鏡の位置、眼鏡の向きなどを調整することで、眼鏡の反射光などの不要光による視線検出精度の低下を抑制することができる。

特開２０１８−３２１９８号公報

しかしながら、特許文献１に開示された従来技術では、視線検出機能に不慣れなユーザーは、視線検出精度の低下を防止するための具体的な調整方法を容易に判断できず、調整を容易に行えない。その結果、眼の位置が視線検出範囲（視線検出が可能な範囲）を超えたり、眼鏡の反射光などの不要光が除去できなかったりすることなどにより、視線検出精度が低下してしまう。

そこで本発明は、顔の位置、顔の向き、眼鏡の位置、眼鏡の向きなどの調整をユーザーが容易に行うことができ、ひいては検出精度の高い視線検出を行うことができる電子機器を提供することである。

本発明の電子機器は、表示手段を見る眼を撮像した眼画像を取得可能な電子機器であって、前記眼画像に基づいて視線検出を行う検出手段と、前記眼画像における瞳孔像の位置と、前記眼画像における角膜反射像の数との少なくとも一方に基づいて、前記表示手段を視認する視認状態の調整方法に関する所定の通知を行うように制御する制御手段とを有することを特徴とする。

本発明によれば、顔の位置、顔の向き、眼鏡の位置、眼鏡の向きなどの調整をユーザーが容易に行うことができ、ひいては検出精度の高い視線検出を行うことができる。

本実施形態に係るカメラの外観図である。 本実施形態に係るカメラのブロック図である。 本実施形態に係るカメラの断面図である。 本実施形態に係るカメラのＥＶＦ部分を示す図である。 本実施形態に係る赤外ＬＥＤから発せられた光の光路を示す図である。 本実施形態に係る視線検出方法の原理を説明するための図である。 本実施形態に係る眼画像を示す図である。 本実施形態に係る視線検出動作のフローチャートである。 本実施形態に係るキャリブレーション動作のフローチャートである。 本実施形態に係る表示画像と眼画像を示す図である。 変形例に係るカメラの断面図である。 変形例に係る眼画像を示す図である。

（実施形態）
以下、添付の図面を参照して本発明の好適な実施形態を説明する。

＜構成の説明＞
図１（ａ），１（ｂ）は、本実施形態に係るカメラ１（デジタルスチルカメラ；レンズ交換式カメラ）の外観を示す。なお、本発明は、画像、文字等の情報を表示するデバイスや、接眼光学系を通して光学像を視認するユーザーの視線を検出することが可能な任意の電子機器にも適用可能である。これらの電子機器には、例えば携帯電話機、ゲーム機、タブレット端末、パーソナルコンピュータ、時計型や眼鏡型の情報端末、ヘッドマウントディスプレイ、双眼鏡などが含まれてよい。表示部を見る眼を撮像した眼画像を取得可能な全ての電子機器に対して、本発明は適用可能である。

図１（ａ）は正面斜視図であり、図１（ｂ）は背面斜視図である。図１（ａ）に示すように、カメラ１は、撮影レンズユニット１Ａ及びカメラ筐体１Ｂを有する。カメラ筐体１Ｂには、ユーザー（撮影者）からの撮像操作を受け付ける操作部材であるレリーズボタン３４が配置されている。図１（ｂ）に示すように、カメラ筐体１Ｂの背面には、カメラ筐体１Ｂ内に含まれている後述の表示パネル６をユーザーが覗き込むための接眼窓枠１２１が配置されている。接眼窓枠１２１は覗き口１２を形成し、カメラ筐体１Ｂに対しては外側（背面側）に突出している。カメラ筐体１Ｂの背面には、ユーザーからの各種操作を受け付ける操作部材４１〜４３も配置されている。例えば、操作部材４１はタッチ操作を受け付けるタッチパネルであり、操作部材４２は各方向に押し倒し可能な操作レバーであり、操作部材４３は４方向のそれぞれに押し込み可能な４方向キーである。操作部材４１（タッチパネル）は、液晶パネル等の表示パネルを備えており、表示パネルで画像を表示する機能を有する。

図２は、カメラ１内の構成を示すブロック図である。

撮像素子２は例えばＣＣＤやＣＭＯＳセンサー等の撮像素子であり、撮影レンズユニット１Ａの光学系により撮像素子２の撮像面上に結像された光学像を光電変換し、得られたアナログ画像信号をＡ／Ｄ変換部（不図示）に出力する。Ａ／Ｄ変換部は、撮像素子２により得られたアナログ画像信号をＡ／Ｄ変換し、画像データとして出力する。

撮影レンズユニット１Ａは、ズームレンズ、フォーカスレンズ、絞り等を含む光学系で構成され、カメラ筐体１Ｂに装着された状態で、被写体からの光を撮像素子２に導き、被写体像を撮像素子２の撮像面上に結像する。絞り制御部１１８、焦点調節部１１９、ズーム制御部１２０は、それぞれマウント接点１１７を介してＣＰＵ３からの指示信号を受信し、該指示信号に従い、絞り、フォーカスレンズ、ズームレンズを駆動制御する。

カメラ筐体１Ｂが備えるＣＰＵ３は、カメラ筐体１Ｂが備える各ブロックに対する制御プログラムをメモリ部４の有するＲＯＭより読み出し、メモリ部４の有するＲＡＭに展開して実行する。これによりＣＰＵ３は、カメラ筐体１Ｂが備える各ブロックの動作を制御する。ＣＰＵ３には、視線検出部２０１、測光部２０２、自動焦点検出部２０３、信号入力部２０４、表示デバイス駆動部２１０、光源駆動部２０５等が接続されている。また、ＣＰＵ３は、撮影レンズユニット１Ａ内に配置された絞り制御部１１８、焦点調節部１１
９、ズーム制御部１２０に、マウント接点１１７を介して信号を伝達する。本実施形態では、メモリ部４は、撮像素子２および視線検出センサー３０からの撮像信号の記憶機能を備える。

視線検出部２０１は、視線検出センサー３０上に眼球像が結像した状態での視線検出センサー３０の出力（眼を撮像した眼画像）をＡ／Ｄ変換し、その結果をＣＰＵ３に送信する。ＣＰＵ３は、後述する所定のアルゴリズムに従って眼画像から視線検出に必要な特徴点を抽出し、特徴点の位置からユーザーの視線（視認用画像における視点）を算出する。

測光部２０２は、測光センサーの役割を兼ねた撮像素子２から得られる信号、具体的には被写界の明るさに対応した輝度信号の増幅、対数圧縮、Ａ／Ｄ変換等を行い、その結果を被写界輝度情報としてＣＰＵ３に送る。

自動焦点検出部２０３は、撮像素子２（例えばＣＣＤ）の中に含まれる、位相差検出のために使用される複数の検出素子（複数の画素）からの信号電圧をＡ／Ｄ変換し、ＣＰＵ３に送る。ＣＰＵ３は、複数の検出素子の信号から、各焦点検出ポイントに対応する被写体までの距離を演算する。これは撮像面位相差ＡＦとして知られる公知の技術である。本実施形態では、一例として、ファインダー内の視野像（視認用画像）を分割し、撮像面上の分割された１８０か所のそれぞれに、焦点検出ポイントがあるとする。

光源駆動部２０５は、ＣＰＵ３からの信号（指示）に基づいて、後述する赤外ＬＥＤ１８，１９，２２〜２７を駆動する。

画像処理部２０６は、ＲＡＭに格納されている画像データに対して、各種画像処理を行う。例えば、光学系や撮像素子に起因する画素欠陥の補正処理、デモザイキング処理、ホワイトバランス補正処理、色補間処理、ガンマ処理など、デジタル画像データを現像し表示・記録するための様々な画像処理が行われる。

信号入力部２０４には、スイッチＳＷ１とスイッチＳＷ２が接続されている。スイッチＳＷ１は、カメラ１の測光、測距、視線検出動作等を開始するためのスイッチであり、レリーズボタン３４の第１ストロークでＯＮする。スイッチＳＷ２は、撮影動作を開始するためのスイッチであり、レリーズボタン３４の第２ストロークでＯＮする。スイッチＳＷ１，ＳＷ２からのＯＮ信号は信号入力部２０４に入力され、ＣＰＵ３に送信される。また信号入力部２０４は、図１（ｂ）の操作部材４１（タッチパネル）、操作部材４２（操作レバー）、操作部材４３（４方向キー）からの操作入力も受け付ける。

記録／出力部２０７は、着脱可能なメモリカード等の記録媒体に画像データを含むデータを記録、またはこれらのデータを外部インターフェースを介して外部装置に出力する。

表示デバイス駆動部２１０は、ＣＰＵ３からの信号に基づいて、表示デバイス２０９を駆動する。表示デバイス２０９は、後述する表示パネル５，６である。

図３は、図１（ａ）に示したＹ軸とＺ軸が成すＹＺ平面でカメラ１を切断した断面図であり、カメラ１の構成を概念的に示した図である。

シャッター３２と撮像素子２は撮影レンズユニット１Ａの光軸方向に順に並ぶ。

カメラ筐体１Ｂの背面には表示パネル５が設けられ、表示パネル５は、カメラ１の操作やカメラ１で得られた画像の鑑賞・編集のために、メニュー表示や画像表示を行う。表示パネル５は、バックライト付きの液晶パネルや、有機ＥＬパネル等で構成される。

カメラ筐体１Ｂに設けられたＥＶＦは、通常のＥＶＦとして表示パネル５のようにメニューや画像の表示が行えることに加えて、ＥＶＦを覗くユーザーの視線を検出し、検出結果をカメラ１の制御に反映することが可能な構成となっている。

表示パネル６は、ユーザーがファインダーを覗いているときに、表示パネル５と同様の表示（カメラ１の操作やカメラ１で得られた画像の鑑賞・編集のためのメニュー表示や画像表示）を行う。表示パネル６は、バックライト付きの液晶パネルや、有機ＥＬパネル等で構成される。表示パネル６は一般的なカメラにおける撮影画像と同様に、３：２や４：３、１６：９といったＸ軸方向（水平方向）のサイズがＹ軸方向（垂直方向）のサイズよりも長い長方形で構成される。

パネルホルダー７は表示パネル６を保持するパネルホルダーで、表示パネル６とパネルホルダー７は接着固定され、表示パネルユニット８を構成している。

第一光路分割プリズム９、第二光路分割プリズム１０は貼り付け接着されて光路分割プリズムユニット１１（光路分割部材）を構成している。光路分割プリズムユニット１１は、表示パネル６からの光を覗き口１２に設けられたアイピース窓１７に導き、逆にアイピース窓１７から導かれる眼（瞳）からの反射光などを視線検出センサー３０に導く。

表示パネルユニット８と光路分割プリズムユニット１１は、マスク３３を挟んで固定され、一体形成されている。

接眼光学系１６は、Ｇ１レンズ１３、Ｇ２レンズ１４、Ｇ３レンズ１５により構成される。

アイピース窓１７は、可視光を透過する透明な部材である。表示パネルユニット８に表示された画像は、光路分割プリズムユニット１１と接眼光学系１６とアイピース窓１７を通して観察される。

照明窓２０，２１は、赤外ＬＥＤ１８，１９，２２〜２７が外から視認できないように隠すための窓で、可視光を吸収し赤外光を透過する樹脂で構成されている。

図４（ａ）は、カメラ１のＥＶＦ部分の構成を示す斜視図、図４（ｂ）はＥＶＦ部分の光軸の横断面図である。

赤外ＬＥＤ１８，１９，２２〜２７は、赤外光を発する光源である。赤外ＬＥＤ１８，１９，２３，２５は近距離照明用の赤外ＬＥＤである。赤外ＬＥＤ２２，２４，２６，２７は遠距離照明用の赤外ＬＥＤである。なお、赤外ＬＥＤ以外の光源が使用されてもよい。

絞り２８、視線結像レンズ２９を含む視線検出光学系は、光路分割プリズムユニット１１によってアイピース窓１７から導かれた赤外反射光を、視線検出センサー３０に導く。視線検出センサー３０は、ＣＣＤやＣＭＯＳなどの固体撮像素子で構成される。

ここで、赤外ＬＥＤ１８，１９，２２〜２７の少なくともいずれかから、ファインダーを覗いているユーザーの眼球に光が照射された場合を考える。この場合は、図４（ｂ）の光路３１ａで示すように、光が照射された眼球の光学像（眼球像）が、アイピース窓１７、Ｇ３レンズ１５、Ｇ２レンズ１４、Ｇ１レンズ１３を通り、第二光路分割プリズム１０の第２面１０ａから第二光路分割プリズム１０内に入る。

第二光路分割プリズムの第１面１０ｂには、赤外光を反射するダイクロイック膜が形成されており、反射光路３１ｂで示すように、第二光路分割プリズム１０内に入った眼球像は、第１面１０ｂで、第２面１０ａの側に反射される。

そして、結像光路３１ｃで示すように、反射された眼球像は、第２面１０ａで全反射され、第二光路分割プリズム１０の第３面１０ｃから第二光路分割プリズム１０外へ出て、絞り２８を通り、視線結像レンズ２９により視線検出センサー３０に結像される。視線検出には、このような眼球像と共に、赤外ＬＥＤから発せられた光が角膜で正反射して形成された角膜反射像が用いられる。

図５は、近距離照明用の赤外ＬＥＤ１８，１９，２３，２５から発せられた光が眼球の角膜３７で正反射し、視線検出センサー３０で受光されるまでの光路の例を示す。

＜視線検出動作の説明＞
図６，７（ａ），７（ｂ），８を用いて、視線検出方法について説明する。ここでは、赤外ＬＥＤ２６，２７を用いた場合の例について説明するが、その他の赤外ＬＥＤ１８，１９，２２〜２５を用いた場合も同様である。図６は、視線検出方法の原理を説明するための図であり、視線検出を行うための光学系の概略図である。図６に示すように、赤外ＬＥＤ２６，２７はユーザーの眼球１４０に赤外光を照射する。赤外ＬＥＤ２６，２７から発せられて眼球１４０で反射した赤外光の一部は、視線結像レンズ２９によって、視線検出センサー３０近傍に結像される。図６では、視線検出方法の原理が理解しやすいよう、赤外ＬＥＤ２６，２７、視線結像レンズ２９、視線検出センサー３０の位置が調整されている。

図７（ａ）は、視線検出センサー３０で撮像された眼画像（視線検出センサー３０に投影された眼球像）の概略図であり、図７（ｂ）は視線検出センサー３０（例えばＣＣＤ）の出力強度を示す図である。図８は、視線検出動作の概略フローチャートを表す。

視線検出動作が開始すると、図８のステップＳ８０１で、赤外ＬＥＤ２６，２７は、光源駆動部２０５からの指示に従って、ユーザーの眼球１４０に向けて視線検出用の発光強度Ｅ２で赤外光を発する。

ステップＳ８０２では、ＣＰＵ３は、視線検出センサー３０による眼画像の取得を開始する。赤外光によって照明されたユーザーの瞳孔像や角膜反射像は、視線結像レンズ２９（受光レンズ）を通して視線検出センサー３０近傍に結像され、視線検出センサー３０により光電変換される。これにより、処理可能な眼画像の電気信号が得られる。眼画像は一定時間おきに取得され続ける。

ステップＳ８０３では、視線検出部２０１（視線検出回路）は、視線検出センサー３０から得られた眼画像（眼画像信号；眼画像の電気信号）をＣＰＵ３に送る。

ステップＳ８０４では、ＣＰＵ３は、ステップＳ８０２で得られた眼画像から、瞳孔中心ｃに対応する点の座標を求める。

ステップＳ８０５では、ＣＰＵ３は、赤外ＬＥＤ２６，２７の角膜反射像Ｐｄ，Ｐｅに対応する２点の座標を求める。

赤外ＬＥＤ２６，２７より発せられた赤外光は、ユーザーの眼球１４０の角膜１４２を照明する。このとき、角膜１４２の表面で反射した赤外光の一部により形成される角膜反
射像Ｐｄ，Ｐｅは、視線結像レンズ２９により集光され、視線検出センサー３０上に結像して、眼画像における角膜反射像Ｐｄ’，Ｐｅ’となる。同様に瞳孔１４１の端部ａ，ｂからの光も視線検出センサー３０上に結像して、眼画像における瞳孔端像ａ’，ｂ’となる。

図７（ｂ）は、図７（ａ）の眼画像における領域α’の輝度情報（輝度分布）を示す。図７（ｂ）では、眼画像の水平方向をＸ軸方向、垂直方向をＹ軸方向とし、Ｘ軸方向の輝度分布が示されている。本実施形態では、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標（Ｘ軸方向（水平方向）の座標）をＸｄ，Ｘｅとし、瞳孔端像ａ’，ｂ’のＸ座標をＸａ，Ｘｂとする。図７（ｂ）に示すように、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標Ｘｄ，Ｘｅでは、極端に高いレベルの輝度が得られる。瞳孔１４１の領域（瞳孔１４１からの光が視線検出センサー３０上に結像して得られる瞳孔像の領域）に相当する、Ｘ座標ＸａからＸ座標Ｘｂまでの領域では、Ｘ座標Ｘｄ，Ｘｅを除いて、極端に低いレベルの輝度が得られる。そして、瞳孔１４１の外側の虹彩１４３の領域（虹彩１４３からの光が結像して得られる、瞳孔像の外側の虹彩像の領域）では、上記２種の輝度の中間の輝度が得られる。具体的には、Ｘ座標がＸ座標Ｘａより小さい領域と、Ｘ座標がＸ座標Ｘｂより大きい領域とで、上記２種の輝度の中間の輝度が得られる。

図７（ｂ）に示すような輝度分布から、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標Ｘｄ，Ｘｅと、瞳孔端像ａ’，ｂ’のＸ座標Ｘａ，Ｘｂを得ることができる。具体的には、輝度が極端に高い座標を角膜反射像Ｐｄ’，Ｐｅ’の座標として得ることができ、輝度が極端に低い座標を瞳孔端像ａ’，ｂ’の座標として得ることができる。また、視線結像レンズ２９の光軸に対する眼球１４０の光軸の回転角θｘが小さい場合には、瞳孔中心ｃからの光が視線検出センサー３０上に結像して得られる瞳孔中心像ｃ’（瞳孔像の中心）のＸ座標Ｘｃは、Ｘｃ≒（Ｘａ＋Ｘｂ）／２と表すことができる。つまり、瞳孔端像ａ’，ｂ’のＸ座標Ｘａ，Ｘｂから、瞳孔中心像ｃ’のＸ座標Ｘｃを算出できる。このようにして、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標と、瞳孔中心像ｃ’のＸ座標とを見積もることができる。

ＣＰＵ３は、Ｙ座標（Ｙ軸方向（垂直方向）の座標）も同様に算出し、瞳孔中心像ｃ’の座標（Ｘｃ，Ｙｃ）、角膜反射像Ｐｄ’の座標（Ｘｄ，Ｙｄ）、及び、角膜反射像Ｐｅ’の座標（Ｘｅ，Ｙｅ）を得る。

ステップＳ８０６では、ＣＰＵ３は、眼球像の結像倍率βを算出する。結像倍率βは、視線結像レンズ２９に対する眼球１４０の位置により決まる倍率で、角膜反射像Ｐｄ’，Ｐｅ’の間隔（Ｘｄ−Ｘｅ）の関数を用いて求めることができる。

ステップＳ８０７では、ＣＰＵ３は、視線結像レンズ２９の光軸に対する眼球１４０の光軸の回転角を算出する。角膜反射像Ｐｄと角膜反射像Ｐｅの中点のＸ座標と角膜１４２の曲率中心ＯのＸ座標とはほぼ一致する。このため、角膜１４２の曲率中心Ｏから瞳孔１４１の中心ｃまでの標準的な距離をＯｃとすると、Ｚ−Ｘ平面（Ｙ軸に垂直な平面）内での眼球１４０の回転角θｘは、以下の式１で算出できる。Ｚ−Ｙ平面（Ｘ軸に垂直な平面）内での眼球１４０の回転角θｙも、回転角θｘの算出方法と同様の方法で算出できる。
β×Ｏｃ×ＳＩＮθｘ≒｛（Ｘｄ＋Ｘｅ）／２｝−Ｘｃ ・・・（式１）

ステップＳ８０８では、ＣＰＵ３は、ステップＳ８０７で算出した回転角θｘ，θｙを用いて、表示パネル６に表示された視認用画像におけるユーザーの視点（視線位置；視線が注がれた位置；ユーザーが見ている位置）を求める（推定する）。視点の座標（Ｈｘ，Ｈｙ）が瞳孔中心ｃに対応する座標であるとすると、視点の座標（Ｈｘ，Ｈｙ）は後述する式４，５（または式４’，５’）で算出できる。

ステップＳ８０９では、ＣＰＵ３は、視点の座標（Ｈｘ，Ｈｙ）をメモリ部４に格納し、視線検出動作を終える。

ここで、眼が所定の位置（本実施形態では接眼光学系１６の光軸上）から大きく離れている場合や、眼画像における角膜反射像の数が所定数（発光している赤外ＬＥＤの数）と異なる場合に、視線検出精度が低下してしまう。

角膜反射像の数が所定数よりも少ない場合の例を説明する。赤外ＬＥＤ２６，２７から発せられた赤外光が角膜１４２の表面で反射して視線検出センサー３０に結像するまでの間に、当該赤外光がユーザーのまぶたやまつ毛によって遮光されることがある。その場合には、遮光された赤外光に対応する角膜反射像は形成されないため、角膜反射像の数は２つより少なくなる。角膜反射像の数が１つ以下であると、結像倍率βが算出できないため、視線検出精度が低下してしまう。まぶたやまつ毛によって赤外光が遮光されないようにユーザーがまぶたを大きく開けば、視線検出精度の低下を抑制できる。

角膜反射像の数が所定数よりも多い場合の例を説明する。ユーザーが眼鏡をかけている場合に、眼鏡の位置や向きに依っては、赤外光が眼鏡のレンズの入射面（表面）または射出面（裏面）で反射することにより、眼画像に偽像が発生する。偽像が角膜反射像として誤検出されると、角膜反射像の数（検出数）は２つより多くなる。その結果、偽像の座標に基づいて誤った視線が検出されてしまう（視線検出精度が低下してしまう）。角膜反射像と誤検出されうる範囲に偽像が発生しないように、ユーザーが眼鏡の位置や向きを調整すれば、視線検出精度の低下を抑制できる。

このように、視線検出精度が低下する理由は様々であり、視線検出精度の低下を抑制するための調整方法（表示パネル６を視認する視認状態の調整方法）も様々である。そこで、本実施形態では、視認状態の調整方法を好適に通知する。表示による通知や音声による通知、表示と音声の組み合わせによる通知など、様々な通知が可能であるが、本実施形態では、表示パネル６での表示によって通知が行われる例を説明する。

＜キャリブレーション動作の説明＞
図９，１０（ａ）〜１０（ｊ）を用いて、キャリブレーション動作と通知動作について説明する。図９は、キャリブレーション動作の概略フローチャートを表し、図１０（ａ）〜１０（ｊ）は、表示画像や眼画像の一例を表す。視線には個人差があり、当該個人差を考慮しなければ、高精度に視線を検出することができない。そのため、そのような個人差を考慮するためのキャリブレーション動作が必要となる。キャリブレーション動作は、ユーザー個人の視線の特徴に基づく補正値を得るための動作であり、図８の視線検出動作よりも前に行われる。通知動作は、視認状態の調整方法を通知する動作である。本実施形態では、図８の視線検出動作よりも前にユーザーがカメラ１の使用方法（表示パネル６の視認方法；ファインダーの覗き方）に慣れることを期待して、キャリブレーション動作に通知動作を含めるとする。もちろん、図８の視線検出動作に通知動作を含めてもよい。

キャリブレーション動作が開始すると、図９のステップＳ９０１で、ＣＰＵ３は、キャリブレーション用の指標や指示などを、表示パネル６に表示する。例えば、図１０（ａ）に示すように、ユーザーが見る（注視する）べき指標１００２と、指標１００２を見ることや理想の視認状態（視認方法）などを通知する指示１００３とが表示される。表示範囲１００１は、表示パネル６の表示範囲（表示面の領域）を示す。

ステップＳ９０２〜Ｓ９０５は、図８のステップＳ８０１〜Ｓ８０４と同じである。なお、ステップＳ９０５では、眼画像に輝度が極端に低い座標が存在しない場合に、ＣＰＵ３は、瞳孔中心像ｃ’（瞳孔像の中心）の座標（Ｘｃ，Ｙｃ）が検出（算出）不可能であ
ると判断する。

ステップＳ９０６では、ＣＰＵ３は、眼画像に瞳孔像が写っているか否か、具体的には瞳孔中心像ｃ’の座標（Ｘｃ，Ｙｃ）が検出可能であったか否かを判定する。瞳孔像が写っている（座標（Ｘｃ，Ｙｃ）が検出可能であった）と判定された場合はステップＳ９０８に進み、そうでない場合はステップＳ９０７に進む。

ステップＳ９０７では、ＣＰＵ３は、所定の位置へ眼を移動させることが通知されるように、表示パネル６の表示を更新する。例えば、図１０（ｂ）に示すように、表示パネル６の中心軸（表示面に垂直な中心軸）上または接眼光学系１６の光軸上、つまりファインダーの中央に眼を並進移動させることを通知する指示１００４が表示される。ここでは、図１０（ｃ）に示すように、瞳孔像が視線検出センサー３０の視野範囲１００５（撮像範囲）の外側に位置するなどの理由から、眼画像に瞳孔像が写っていない。この場合には、ＣＰＵ３は、瞳孔像の位置の把握が困難であるため、眼の目標位置のみを通知し、眼の移動方向は通知しない。

ステップＳ９０８では、ＣＰＵ３は、眼画像における所定の範囲内に瞳孔像が写っているか否か、具体的には瞳孔中心像ｃ’の座標（Ｘｃ，Ｙｃ）が所定の範囲内で検出されたか否かを判定する。所定の範囲内に瞳孔像が写っている（所定の範囲内で座標（Ｘｃ，Ｙｃ）が検出された）と判定された場合は、ステップＳ９１０に進む。そうでない場合、つまり所定の範囲内に瞳孔像が写っていない（所定の範囲内で座標（Ｘｃ，Ｙｃ）が検出されなかった；所定の範囲外に瞳孔像が写っている；所定の範囲外で座標（Ｘｃ，Ｙｃ）が検出された）と判定された場合は、ステップＳ９０９に進む。

本実施形態では、図１０（ｄ）に示すように、視線検出センサー３０の視野範囲１００５が、Ｘ座標の閾値Ｘｃ１，Ｘｃ２とＹ座標の閾値Ｙｃ１，Ｙｃ２を境として、９つの領域Ａ１〜Ａ９に分割（区分）されているとする。そして、ステップＳ９０８では、ＣＰＵ３は、Ｘｃ１≦Ｘｃ≦Ｘｃ２かつＹｃ１≦Ｙｃ≦Ｙｃ２であるか否かを判定するとする。そして、Ｘｃ１≦Ｘｃ≦Ｘｃ２かつＹｃ１≦Ｙｃ≦Ｙｃ２の場合、つまり中央の領域Ａ５で座標（Ｘｃ，Ｙｃ）が検出された場合に、ステップＳ９１０に進むとする。また、Ｘｃ１≦Ｘｃ≦Ｘｃ２かつＹｃ１≦Ｙｃ≦Ｙｃ２でない場合、つまり領域Ａ５以外の領域Ａ１〜Ａ４，Ａ６〜Ａ９のいずれかで座標（Ｘｃ，Ｙｃ）が検出された場合に、ステップＳ９０９に進むとする。

ファインダーの中央に眼が位置するようにユーザーが顔の位置や向き（姿勢）を維持していても、ユーザーが眼球を回転させれば、瞳孔像は移動し、座標（Ｘｃ，Ｙｃ）は変化する。そのように変化した座標（Ｘｃ，Ｙｃ）は適切な視認状態に対応するため、眼を並進移動をユーザーに促すのは好ましくない。従って、上記変化した座標（Ｘｃ，Ｙｃ）を含む領域が領域Ａ５として設定されるように閾値Ｘｃ１，Ｘｃ２，Ｙｃ１，Ｙｃ２を決定することが好ましい。

ステップＳ９０９では、ＣＰＵ３は、ステップＳ９０７と同様に、所定の位置へ眼を移動させることが通知されるように、表示パネル６の表示を更新する。ここでは、ＣＰＵ３は、瞳孔中心像ｃ’の座標（Ｘｃ，Ｙｃ）に基づいて、瞳孔像から所定の範囲に向かう方向を判断できる。具体的には、領域Ａ１〜Ａ４，Ａ６〜Ａ９のうち、座標（Ｘｃ，Ｙｃ）が検出された領域から、領域Ａ５に向かう方向を判断できる。そして、ＣＰＵ３は、判断した方向に対応する、所定の位置（ファインダーの中央）への眼の移動方向も判断できる。このため、ＣＰＵ３は、判断した移動方向がさらに通知されるように、表示パネル６の表示を更新する。例えば、図１０（ｅ）に示すように、判断した移動方向に眼を並進移動させることを通知する指示１００６と、判断した移動方向の矢印１００７とが表示される
。図１０（ｄ）の状態の場合、つまり座標（Ｘｃ，Ｙｃ）が領域Ａ７で検出された場合には、図１０（ｅ）で示すように、眼を右上に移動させるための指示１００６と矢印１００７が表示される。

ステップＳ９１０は、図８のステップＳ８０５と同じである。なお、ステップＳ９１０では、ＣＰＵ３は、さらに、眼画像における角膜反射像の数（検出数）をカウントする。

ステップＳ９１１では、ＣＰＵ３は、眼画像における角膜反射像の数（検出数）を所定数と比較する。所定数は、発光している赤外ＬＥＤの数（赤外光の照射数）であり、赤外ＬＥＤ２６，２７のみが発光している場合には２である。検出数＝照射数と判定された場合はステップＳ９１６に進み、検出数＞照射数と判定された場合はステップＳ９１２に進み、検出数＜照射数と判定された場合はステップＳ９１５に進む。

ステップＳ９１２では、ＣＰＵ３は、偽像（偽の角膜反射像）を特定するために、眼鏡を移動させることが通知されるよう、表示パネル６の表示を更新する。

ここでは、角膜反射像の検出数が所定数（赤外光の照射数）よりも多い。図１０（ｆ）は、角膜反射像の検出数が赤外光の照射数より多い場合の眼画像の例を示す。図１０（ｆ）において、像１００８ａ，１００９ａは、赤外ＬＥＤ２６，２７によって照射された赤外光がユーザーの眼鏡のレンズで反射せずに眼の角膜表面でのみ反射して視線検出センサー３０に結像した角膜反射像であり、視線検出に必要な像である。像１００８ｂ，１００９ｂは、赤外ＬＥＤ２６，２７によって照射された赤外光が、ユーザーの眼鏡のレンズで反射して視線検出センサー３０に結像した偽像であり、視線検出に不要な像である。偽像１００８ｂ，１００９ｂは、角膜反射像１００８ａ，１００９ａと大きさや輝度が似ているため、角膜反射像として誤検出されやすい。そのような誤検出がされた場合に、１枚の眼画像を詳細に解析しても、角膜反射像として検出された像１００８ａ，１００９ａ，１００８ｂ，１００９ｂから偽像を特定（判別）するのは困難である。

そこで、ステップＳ９１２では、ＣＰＵ３は、図１０（ｇ）に示すように、眼を移動させずに眼鏡のみを移動させること（眼鏡のみの位置や向きを変更させること）を通知する指示１０１０を表示する。

ステップＳ９１３では、ＣＰＵ３は、複数枚の眼画像に基づいて、検出された複数の角膜反射像から偽像を特定（判別）する。図１０（ｈ）は、図１０（ｇ）の指示１０１０に応じてユーザーが眼鏡のみを移動させた後の眼画像の例を示す。図１０（ｈ）に示すように、眼鏡のみを移動させた場合には、偽像でない角膜反射像の移動距離は小さく、偽像の移動距離は大きい。このため、複数枚の眼画像から、検出された角膜反射像の移動を検出することで、偽像を特定することができる。

具体的には、ＣＰＵ３は、公知の画像解析技術である特徴点追跡により、眼鏡の移動前に得られた眼画像と、眼鏡の移動後に得られた眼画像との間の、像（角膜反射像として検出された像）の対応関係を判断する。ここで、眼鏡の移動前に得られた眼画像が図１０（ｆ）の眼画像であり、眼鏡の移動後に得られた眼画像が図１０（ｈ）の眼画像であるとする。その場合には、図１０（ｈ）の像１００８ａ’が図１０（ｆ）の像１００８ａに対応し、像１００９ａ’が像１００９ａに対応し、像１００８ｂ’が像１００８ｂに対応し、像１００９ｂ’が像１００９ｂに対応すると判断される。

次に、ＣＰＵ３は、眼鏡の移動前後での各像の座標に基づいて、眼鏡の移動による各像の移動量（移動距離）を算出する。

そして、ＣＰＵ３は、移動距離が所定距離以下である像１００８ａ’，１００９ａ’を角膜反射像として特定し、移動距離が所定距離よりも長い像１００８ｂ’，１００９ｂ’を偽像として特定する。

ステップＳ９１４では、ＣＰＵ３は、偽像除去のために、眼鏡を移動させることが通知されるよう、表示パネル６の表示を更新する。例えば、図１０Ｉに示すように、特定された偽像１００８ｂ’，１００９ｂ’にそれぞれ対応するアイテム１００８ｂ”，１００９ｂ”と、眼画像の範囲に対応する範囲のアイテム１００５”とが表示される。アイテム１００５”の範囲に対するアイテム１００８ｂ”，１００９ｂ”の相対位置は、図１０Ｈにおける視野範囲１００５に対する偽像１００８ｂ’，１００９ｂ’との相対位置と一致する。偽像１００８ｂ’，１００９ｂ’が移動すると、アイテム１００８ｂ”，１００９ｂ”も移動する。そして、アイテム１００８ｂ”，１００９ｂ”がアイテム１００５”の範囲外に移動するように眼鏡を移動させると、偽像１００８ｂ’，１００９ｂ’が消え、アイテム１００８ｂ”，１００９ｂ”も消える。このため、図１０Ｉに示すように、眼鏡を移動させてアイテム１００８ｂ”，１００９ｂ”をアイテム１００５”の範囲外に移動させることを通知する指示１０１１も表示される。

ステップＳ９１５では、ＣＰＵ３は、まぶたの開きを大きくすることを通知するように、表示パネル６の表示を更新する。例えば、図１０（ｊ）に示すように、まぶたの開きを大きくすることを通知する指示１０１２やグラフィック１０１３が表示される。一般的に、一方の眼のまぶたを閉じると、他方の眼のまぶたの開きは小さくなる。従って、ファインダーを覗いていない眼のまぶたを閉じている場合には、ファインダーを覗いている眼のまぶたの開きは小さい。このため、図１０（ｊ）に示すように、両目のまぶたの開きを大きくすること（両目のまぶたを開くこと）を通知する指示が、指示１０１２として表示される。さらに、そのような通知を行うグラフィック１０１４が表示される。

ステップＳ９１６，Ｓ９１７は、図８のステップＳ８０６，Ｓ８０７と同じである。

ステップＳ９１８では、ＣＰＵ３は、ステップＳ９１７で算出した回転角θｘ，θｙを用いて、表示パネル６に表示された視認用画像におけるユーザーの視点を求める（推定する）。ここでは、キャリブレーション動作の結果（補正値）が反映されていない視点、つまりユーザー個人の視線の特徴が反映されていない視点が求められる。そのような視点の座標（Ｈ’ｘ，Ｈ’ｙ）は以下の式２，３で算出できる。
Ｈ’ｘ＝ｍ×θｘ ・・・（式２）
Ｈ’ｙ＝ｍ×θｙ ・・・（式３）

式２，３のパラメータｍは、カメラ１のファインダー光学系（視線結像レンズ２９等）の構成で定まる定数であり、回転角θｘ，θｙを視認用画像において瞳孔中心ｃに対応する座標に変換する変換係数であり、予め決定されてメモリ部４に格納されるとする。

ステップＳ９１９では、ＣＰＵ３は、ステップＳ９１８で算出した座標（Ｈ’ｘ，Ｈ’ｙ）を用いて、補正値Ｂｘ，Ｂｙを算出する。

キャリブレーション動作の結果（補正値Ｂｘ，Ｂｙ）が反映された視点、つまりユーザー個人の視線の特徴が反映された視点の座標（Ｈｘ，Ｈｙ）は、以下の式４，５で表される。
Ｈｘ＝ｍ×（θｘ＋Ｂｘ） ・・・（式４）
Ｈｙ＝ｍ×（θｙ＋Ｂｙ） ・・・（式５）

ここでは、図１０（ａ）などに示す指標１００２をユーザーが注視しているはずであり
、指標１００２は表示範囲１００１の中央に表示されているため、正しい視点の座標（Ｈｘ，Ｈｙ）は（０，０）である。そのため、座標（Ｈｘ，Ｈｙ）＝（０，０）と、式２〜５とから、補正値Ｂｘ＝−Ｈ’ｘ／ｍと、補正値Ｂｙ＝−Ｈ’ｙ／ｍとが算出できる。

ステップＳ９２０では、ＣＰＵ３は、ステップＳ９１８で算出した補正値Ｂｘ，Ｂｙをメモリ部４に格納し、キャリブレーション動作を終える。

なお、キャリブレーション動作において、ユーザーが見るべき指標として、表示範囲１００１の中央に表示される指標１００２を用いる例を説明したが、ユーザーが見るべき指標の位置は表示範囲１００１の中央に限られない。例えば、表示範囲１００１の中央から上下左右のいずれかの方向にずれた位置に、ユーザーが見るべき指標が表示されてもよい。

ユーザーが複数の位置を順番に見るように、ユーザーが見るべき複数の指標が順番に又は共に表示されてもよい。その場合は、例えば、ステップＳ８０８，Ｓ９１９などで使用される（考慮される）式４，５を、以下の式４’，５’に置き換える。
Ｈｘ＝ｍ×（Ａｘ×θｘ＋Ｂｘ） ・・・（式４’）
Ｈｙ＝ｍ×（Ａｙ×θｙ＋Ｂｙ） ・・・（式５’）

この場合には、ステップＳ９１８では、ＣＰＵ３は、ユーザーが見るべき複数の指標のそれぞれについて、視点の座標（Ｈ’ｘ，Ｈ’ｙ）を算出する。ステップＳ９１９では、ＣＰＵ３は、複数の指標のそれぞれについて視点の座標（Ｈｘ，Ｈｙ）の誤差（座標（Ｈｘ，Ｈｙ）と正しい座標との差）が最小となるように、補正値Ａｘ，Ａｙ，Ｂｘ，Ｂｙを算出する。ステップＳ９２０では、ＣＰＵ３は、補正値Ａｘ，Ａｙ，Ｂｘ，Ｂｙをメモリ部４に格納する。このようにキャリブレーション動作を行うことで、より高精度な視線検出を行うことが可能となる。

以上説明したように、本実施形態によれば、眼画像における瞳孔像の位置と、眼画像における角膜反射像の数（検出数）との少なくとも一方に基づいて、表示部を視認する視認状態の調整方法が通知される。これにより、眼の位置（顔の位置や向き）、眼鏡の位置、眼鏡の向きなどの調整をユーザーが容易に行うことができ、ひいては検出精度の高い視線検出を行うことができる。

（変形例）
前述した実施形態では、正面を見ているユーザーの視線と視線検出用の光学系の光軸が一致する構成について例示的に説明したが、これに限定されるものではない。例えば、視線検出の方式としては、正面を見ているユーザーの視線と視線検出に係る眼球像の撮影軸とが異なるような、所謂軸外系視線検出方式を採用する構成であってもよい。すなわち、ユーザーの眼球を他の光学系を介することなく直接視線検出ユニットで検出する方式を採用してもよい。この場合、前述した接眼光学系１６を介することなくユーザーの眼球像を撮像する視線検出センサーを、接眼光学系１６の光軸外に配し、前述した表示パネル６を視認している状態のユーザー眼球を、該光軸に対して斜め方向から撮像するような構成であればよい。

以下、光路分割プリズムユニット１１を使用せず、直接ユーザーの視線を検出する方式を用いた変形例について説明する。なお、本変形例に係る撮像装置であるカメラ１の基本的な構成および駆動方法については、前述した実施形態と略同一であるため、各部に付す符号は同一とし、説明は省略する。本変形例では、前述した実施形態と異なる構成について、以下で詳細に説明する。

図１１は、本変形例に係るカメラ１の断面図の一例である。図１１において、表示パネルユニット８には、カバーガラス１１０１が配置されている。すなわち、前述した実施形態に対して、本変形例では、カメラ１の内部から光路分割プリズムユニット１１（光路分割部材）を除外し、カバーガラス１１０１を新たに備える点が異なる。カバーガラス１１０１は、素通しのガラス部材であり、前述した実施形態における光路分割プリズム１１に比べて、ＥＶＦ部分の光軸方向における厚みを薄型化できる。したがって、本変形例に係るカメラ１では、接眼光学系１６を表示パネルユニット８に近接させることにより、接眼光学系１６の表示倍率を大きくすることができるなど、光学性能を向上させることができる。

また、図１１に図示するように、赤外ＬＥＤ１８と並んで、視線結像レンズ１１０２ａと視線検出センサー１１０２ｂにより形成される視線検出モジュール１１０２が配されている。視線検出モジュール１１０２は、接眼光学系１６の光軸（すなわちＥＶＦ部分の光軸）に対して所定の角度θだけ傾いて配されており、撮影者の眼球を、照明窓２０を介して直接撮像することができる。本変形例では、視線結像レンズ１１０２ａの光軸と接眼光学系１６の光軸との成す角度が所定の角度θであるとする。

ここで、本変形例における視線検出モジュール１１０２は、接眼光学系１６を介することなく被写体の眼球を撮像するため、視線検出センサー１１０２ｂに投影される眼球像の大きさや位置が、視線検出モジュール１１０２と撮影者の眼球との距離に応じて変化する。

また、本変形例のように、視線検出モジュール１１０２が撮影者の眼球に対して下側に位置する場合は、撮影者の眼球までの距離に応じて視線検出センサー１１０２ｂ上に結像する眼球像の倍率（大きさ）が変化しながら、眼球像が上下方向に移動する。なお、カメラ１におけるＥＶＦ部分が配された側を上側とする。したがって、本変形例における視線検出センサー１１０２ｂの撮像範囲１２０１（図１２（ａ），１２（ｂ））は、前述した実施形態と比較して上下方向に拡大される。なお、仮に、撮影者の眼球に対して左右側に視線検出モジュール１１０２を配置した場合は、撮影者の眼球との距離により眼球像が左右方向に移動するため、撮像範囲が左右方向に拡大した撮像範囲とすることが望ましい。

図１２（ａ），１２（ｂ）は、本変形例に係る視線検出センサー１１０２ｂ上に結像する撮影者の眼球像を例示的に説明する図である。図１２（ａ）は、撮影者の眼球が視線検出センサー１１０２ｂに近い場合を示し、図１２（ｂ）は撮影者の眼球が視線検出センサー１１０２ｂから遠い場合を示している。すなわち、図１２（ａ），１２（ｂ）に図示するように、視線検出センサー１１０２ｂと撮影者（の眼球）との距離に応じて、検出に用いる眼画像に占める眼球像の割合や眼画像における眼球像の位置も変化する。

そこで、本変形例では、図１２（ａ），１２（ｂ）に図示するように、視線検出センサー１１０２ｂと撮影者（の眼球）までの距離に応じて、視線センサー１１０２ｂ上の眼球を検出する範囲を範囲１２０２や範囲１２０３のように変化させる。すなわち、本変形例では、上述した範囲内の眼球像の有無を検出し、前述した実施形態のような種々の通知をユーザーに対して表示する。なお、視線検出センサー１１０２ｂと撮影者との距離は、前述した実施形態のように角膜反射像を用いた結像倍率βに基づいて算出してもよいし、眼球像における虹彩部の大きさに基づいて推定してもよい。

なお、上述した実施形態（変形例を含む）はあくまで一例であり、本発明の要旨の範囲内で上述した構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。上述した構成を適宜組み合わせて得られる構成も、本発明に含まれる。例えば、上述した実施形態（変形例を含む）では、撮像装置に設けられたＥＶＦ部分に視線検出
ユニットを設ける構成について説明したが、これに限定されるものではない。前述した視線検出ユニットを備える（組み合わせる）電子機器としては、例えば、ヘッドマウントディスプレイなど、どのような機器であってもよい。

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１：カメラ ３：ＣＰＵ ６：表示パネル ３０：視線検出センサー

Claims (16)

1. 表示手段を見る眼を撮像した眼画像を取得可能な電子機器であって、
   前記眼画像に基づいて視線検出を行う検出手段と、
   前記眼画像における瞳孔像の位置と、前記眼画像における角膜反射像の数との少なくとも一方に基づいて、前記表示手段を視認する視認状態の調整方法に関する所定の通知を行うように制御する制御手段と
   を有することを特徴とする電子機器。
2. 前記制御手段は、視線検出に関するキャリブレーション動作中における前記眼画像に基づいて、前記所定の通知を行う
   ことを特徴とする請求項１に記載の電子機器。
3. 前記制御手段は、前記眼画像における所定の範囲内に前記瞳孔像が写っていない場合に、前記所定の通知として、前記所定の範囲に対応する所定の位置へ前記眼を移動させることの通知を行うように制御する
   ことを特徴とする請求項１または２に記載の電子機器。
4. 前記所定の範囲外に前記瞳孔像が写っている場合に、前記制御手段は、前記所定の通知として、前記瞳孔像から前記所定の範囲に向かう方向に対応する、前記所定の位置への前記眼の移動方向の通知をさらに行うように制御する
   ことを特徴とする請求項３に記載の電子機器。
5. 前記移動方向の通知は、前記表示手段での矢印の表示を含む
   ことを特徴とする請求項４に記載の電子機器。
6. 前記制御手段は、前記角膜反射像の数が所定数よりも少ないか否かを判定し、当該判定の結果に基づいて、前記所定の通知の通知内容を異ならせるように制御する
   ことを特徴とする請求項１に記載の電子機器。
7. 前記角膜反射像の数が前記所定数よりも少ない場合に、前記制御手段は、前記所定の通知として、まぶたの開き度合いに関する内容の通知を行うように制御する
   ことを特徴とする請求項６に記載の電子機器。
8. 前記まぶたの開き度合いに関する内容は、まぶたの開きを大きくすることである
   ことを特徴とする請求項７に記載の電子機器。
9. 前記角膜反射像の数が所定数よりも多い場合に、前記制御手段は、前記所定の通知として、眼鏡の移動に関する内容の通知を行うように制御する
   ことを特徴とする請求項６記載の電子機器。
10. 前記制御手段は、
    前記眼鏡の移動に関する内容の通知を行うように制御した後に、
    所定距離よりも長い距離を移動した角膜反射像に対応する第１のアイテムと、前記眼画像の範囲に対応する範囲の第２のアイテムとを、前記表示手段に表示するように制御し、
    前記眼鏡を移動させて前記第１のアイテムを前記第２のアイテムの範囲外に移動させることの通知を行うように制御する
    ことを特徴とする請求項９に記載の電子機器。
11. 前記視線検出に関するキャリブレーション動作中の状態は、前記表示手段にキャリブレーション用のアイテムを表示している状態である
    ことを特徴とする請求項１に記載の電子機器。
12. 視線検出センサーを更に備え、
    前記視線検出センサーは、前記表示手段と接眼部との間に設けられた前記表示手段用の光学系を介して入射した光学像に基づいて前記眼画像を取得可能である
    ことを特徴とする請求項１乃至１１の何れか１項に記載の電子機器。
13. 視線検出センサーを更に備え、
    前記視線検出センサーは、前記表示手段と接眼部との間に設けられた前記表示手段用の光学系を介することなく、入射した光学像に基づいて前記眼画像を取得可能であり、
    前記検出手段は、前記視線検出センサーと撮影者との距離に関する情報に応じて、前記眼画像において視線検出を行う範囲を変更する
    ことを特徴とする請求項１乃至１１の何れか１項に記載の電子機器。
14. 表示手段を見る眼を撮像した眼画像を取得可能な電子機器の制御方法であって、
    前記眼画像に基づいて視線検出を行うステップと、
    前記眼画像における瞳孔像の位置と、前記眼画像における角膜反射像の数との少なくとも一方に基づいて、前記表示手段を視認する視認状態の調整方法に関する所定の通知を行うように制御するステップと
    を有することを特徴とする制御方法。
15. コンピュータを、請求項１乃至１３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラム。
16. コンピュータを、請求項１乃至１３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

Images