JP2022171084A - 撮像装置及びその制御方法、並びにプログラム - Google Patents

Abstract

【課題】脱着可能に装着されるアクセサリの違いにより焦点制御可能な範囲が変化した場合にも、キャリブレーション時の視線検出精度を維持できる撮像装置及びその制御方法、並びにプログラムを提供する。【解決手段】カメラ筐体部１Ｂは、内部のファインダにおけるキャリブレーション作業用の指標の表示位置と、その指標に注がれる、視線検出回路２０１により検出されたユーザの視線位置とに基づくキャリブレーションにより、眼球の個人差の補正情報を取得し、その補正情報を使用して視線検出回路２０１のキャリブレーションを行った後、ファインダ１０に表示されるスルー画像に注がれるユーザの視線位置を視線検出回路２０１で検出し、焦点枠に設定する。カメラ筐体部１Ｂは、アクセサリ装着時にアクセサリよりその焦点検出領域を取得し、取得された焦点検出領域に応じて、上記キャリブレーションの方法を変更する。【選択図】図８

Description

本発明は、撮像装置及びその制御方法、並びにプログラムに関し、特に検出された視線位置の情報に基づき焦点制御を行う撮像装置及びその制御方法、並びにプログラムに関する。

近年、撮像装置の自動化・インテリジェント化が進み、手動で被写体位置を入力せずとも、ファインダを覗くユーザの視線位置の情報に基づいてユーザが意図する被写体を認識し、焦点制御を行うことを可能とする撮像装置が提案されている。この際、撮像装置がユーザの視線位置を検出する際に、ユーザの意図した視線位置と撮像装置が認識するユーザの視線位置の間にズレが生じ、ユーザの意図する被写体に焦点を合わせることができない場合がある。

これに対し、撮影前にファインダ内に指標を表示し、ユーザにその指標を注視するよう指示を出し、その注視状態において、ユーザの視線位置を検出し、該指標位置とのずれ量を検出するキャリブレーションを実行する。その後、撮影時において、その検出されたずれ量だけ、撮像装置が認識するユーザの視線位置を補正することで、補正後の視線位置をよりユーザの意図どおりの視線位置とする技術が知られている（例えば、特許文献１参照）。

また、視線の検出精度を判定し、判定された検出精度に応じて、表示オブジェクトの表示形態を異ならせ、ユーザの意図しない視線位置が選択されないようにする技術が知られている（例えば、特許文献２参照）。具体的には、キャリブレーションの際にユーザに注視させた指標の付近ではキャリブレーションの精度が高くなるため、その指標の数は多いほどキャリブレーションの全体の精度は上がる。しかし、指標が多い程、キャリブレーション時にユーザに要求する操作は増え、ユーザの負担が大きくなる。そこで、特許文献２では、視線位置の検出精度を判定し、判定された検視線検出精度が低い箇所においては、表示オブジェクトを疎に表示し、視線検出精度が高い箇所においては表示オブジェクトを密に表示する。

特開２００４－００８３２３号公報 特開２０１５－１５２９３８号公報

しかしながら、特許文献１のキャリブレーションでは、撮像装置に脱着可能に装着されるアクセサリの違いにより焦点制御可能な範囲が異なる点が考慮されていない。

例えば、キャリブレーション時に撮像装置に装着されていた撮影レンズが、３５ｍｍフルサイズセンサ用撮影レンズである場合、焦点制御可能な範囲は縦３６ｍｍ、横２４ｍｍとなる。一方、ＡＰＳ－Ｃセンサ用撮影レンズである場合、焦点制御可能な範囲は縦約１５．５ｍｍ、横約２３．３ｍｍとなる。すなわち、前者より後者の方が焦点制御可能な範囲が小さい。

よって、撮像装置に装着される撮影レンズに関係なく、キャリブレーション時にファインダ内の同一位置に指標を表示するようにすると、キャリブレーションされた指標が焦点制御可能な範囲外となってしまうという課題が生じる。この課題は、対象センサは同じだが性能の異なる複数の撮影レンズが撮像装置に装着されうる場合においても生じうる。一方、精度をあげるために指標の数を増やすと、それだけキャリブレーションに時間がかかり、またユーザの負担が大きくなる。

特許文献２においては、例えば検出精度が悪い箇所では焦点枠を大きくすることで、視線検出の誤検出を防ぐことは可能であるが、焦点枠が大きくなってしまうと、ユーザの望む焦点制御を行うことができないという課題が生じる。

そこで、本発明の目的は、脱着可能に装着されるアクセサリの違いにより焦点制御可能な範囲が変化した場合にも、キャリブレーション時の視線検出精度を維持できる撮像装置及びその制御方法、並びにプログラムを提供することにある。

本発明の請求項１に係る撮像装置は、内部にファインダを有する、複数のアクセサリを脱着可能な撮像装置であって、前記ファインダに注がれるユーザの視線位置を検出する視線検出手段と、前記ファインダにキャリブレーション作業用の指標を表示し、前記指標の前記ファインダにおける表示位置と、前記指標に注がれる、前記視線検出手段により検出されたユーザの視線位置とに基づくキャリブレーションにより、眼球の個人差の補正情報を取得し、前記補正情報を使用して前記視線検出手段の補正を行うキャリブレーション手段と、前記ファインダにスルー画像を表示し、前記スルー画像に注がれるユーザの視線位置を前記視線検出手段により検出し、焦点枠に設定する設定手段と、前記複数のアクセサリの１つが装着された場合に、前記装着されたアクセサリよりその焦点検出領域を取得する焦点検出領域取得手段と、を備え、前記取得された焦点検出領域に応じて、前記キャリブレーション手段は前記キャリブレーションの方法を変更することを特徴とする。

本発明によれば、撮像装置に脱着可能に装着されるアクセサリの違いにより焦点制御可能な範囲が変化した場合にも、キャリブレーション時の視線検出精度を維持できる。

実施例１に係る撮像システムの内部構成の概略を示す図である。 撮像システムの外観を示す図である。 撮像システムに内蔵された電気的構成を示すブロック図である。 図３におけるファインダが動作する状態におけるファインダ内視野を示す図である。 視線検出方法の原理を説明するための図である。 眼画像データから、角膜反射像及び瞳孔中心に対応する座標を検出する方法を説明するための図である。 視線検出処理のフローチャートである。 焦点検出領域が異なる撮影レンズが図１におけるカメラ筐体部に装着された夫々の場合のキャリブレーション時のファインダ視野内に表示される焦点検出領域の例を示した図である。 焦点検出領域が異なる撮影レンズがカメラ筐体部に装着された夫々の場合のキャリブレーション時のファインダ視野内における焦点検出領域の他の例を示した図である。 異なるファインダ視野角におけるキャリブレーション時のファインダ視野内における焦点検出領域の例を示した図である。 カメラ筐体部へのアクセサリ装着時に実行されるキャリブレーション方法決定処理のフローチャートである。 カメラ筐体部に装着されるアクセサリの交換時に実行される再キャリブレーション方法決定処理のフローチャートである。 図１２のステップＳ１２０４でファインダに表示される再キャリブレーションの警告画面の一例である。 図１２のステップＳ１２０８で視線検出精度に応じて大きさが決定され、ファインダに表示される測距点指標を説明するための図である。

以下、添付図面を参照して本発明の実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。

（実施例１）
以下、図１～１１を参照して、本発明の実施例１による、カメラ筐体部に脱着可能に装着されるアクセサリの違いにより焦点制御可能な範囲が変化した場合のキャリブレーションについて説明する。尚、本実施例では撮影レンズをアクセサリとして例示しているが、撮像装置により焦点制御可能な範囲が変化するアクセサリであればこれに限定されない。例えば、カメラ筐体部と撮影レンズの間にアクセサリとしてエクステンダを装着した場合も、以下説明するキャリブレーションが実行される。

図１～図３を用いて、アクセサリの一つである撮影レンズ１Ａと、これを脱着可能に装着する撮像装置としてのカメラ筐体部１Ｂと、からなる撮像システム１の構成に関して説明する。

図２は、撮像システム１の外観を示す図であり、図２（ａ）は正面斜視図、図２（ｂ）は背面斜視図、図２（ｃ）は図２（ｂ）の操作部材４２を説明するための図である。

カメラ筐体部１Ｂの正面には、図２（ａ）で示すようにレリーズボタン５が設けられる。

レリーズボタン５は、ユーザからの撮像操作を受ける操作部材である。

また、図２（ｂ）で示すように、カメラ筐体部１Ｂの背面には、接眼窓６、操作部材４１～４３が設けられる。

接眼窓６は、カメラ筐体部１Ｂの内部に含まれる図１で後述するファインダ１０上に表示される視認用画像をユーザが覗くための窓である。

操作部材４１は、タッチパネル対応液晶であり、操作部材４２は、レバー式操作部材であり、操作部材４３は、ボタン式十字キーである。尚、本実施例では、後述のファインダ１０上の焦点枠の手動操作による移動制御等のカメラ操作に使用する操作部材４１～４３がカメラ筐体部１Ｂに設けられているがこれに限定されない。例えば、電子ダイヤル等の他の操作部材がカメラ筐体部１Ｂに更にまたは操作部材４１～４３の代わりに設けられていてもよい。

図１は、図２（ａ）で図示したＹ軸とＺ軸が成すＹＺ平面でカメラ筐体Ｂを切った断面図であり、撮像システム１の内部構成の概略を示す図である。尚、図１では、図２と同一の構成には同一の符号が付されている。

図１において、撮影レンズ１Ａは、カメラ筐体部１Ｂに脱着可能に装着される撮影レンズである。本実施例では便宜上撮影レンズ１Ａの内部にあるレンズとして二枚のレンズ１０１，１０２のレンズのみが図示されているが、実際はさらに多数のレンズで構成されていることは周知の通りである。

カメラ筐体部１Ｂは、その内部に、撮像素子２、ＣＰＵ３、メモリ部４、ファインダ１０、ファインダ駆動回路１１、接眼レンズ１２、光源１３ａ～１３ｂ、光分割器１５、受光レンズ１６、及び眼用撮像素子１７を備える。

撮像素子２は、撮影レンズ１Ａの予定結像面に配置され、画像を撮像する。また、撮像素子２は、測光センサの役割も兼ねる。

ＣＰＵ３は、撮像システム１全体を制御するマイクロコンピュータの中央処理装置である。

メモリ部４は、撮像素子２にて撮像された画像を記録する。またメモリ部４は、撮像素子２および眼用撮像素子１７からの撮像信号の記憶機能及び、後述する視線の個人差を補正する補正情報（視線補正係数Ａｘ，Ｂｘ，Ａｙ，Ｂｙ）を記憶する。

ファインダ１０は、撮像素子２にて撮像された画像（スルー画像）を表示するための液晶等の表示素子で構成される。

ファインダ駆動回路１１は、ファインダ１０を駆動する回路である。

接眼レンズ１２は、ファインダ１０に表示される視認用画像を接眼窓６（図２）からユーザが覗き込んで観察するためのレンズである。

光源１３ａ～１３ｂは、ユーザの視線方向を検出するため、ユーザの眼球１４を照明するための赤外発光ダイオードからなる光源であり、接眼窓６（図２）の周りに配置されている。光源１３ａ～１３ｂの点灯により眼球１４には光源１３ａ～１３ｂの角膜反射像（プルキニエ像）Ｐｄ，Ｐｅ（図５）が形成される。この状態で眼球１４からの光が接眼レンズ１２を透過し、光分割器１５で反射され、受光レンズ１６によってＣＭＯＳ等の光電素子列を２次元的に配した眼用撮像素子１７（生成手段）上に眼球像を含む眼画像が結像され、眼画像データが生成される。受光レンズ１６はユーザの眼球１４の瞳孔と眼用撮像素子１７を共役な結像関係に位置付けている。後述する所定のアルゴリズムにより、視線検出回路２０１（視線検出手段：図３）が、眼用撮像素子１７上に結像された眼球像における角膜反射像の位置から、視線方向（視認用画像に注がれるユーザの視点、以下、第１の推定注視点位置と称する。）を検出する。

光分割器１５は、接眼レンズ１２を透過した光を反射し、受光レンズ１６を介して眼用撮像素子１７上に結像させると共に、ファインダ１０からの光を透過し、ユーザがファインダ１０に表示される視認用画像を見ることができるように構成されている。

撮影レンズ１Ａは、絞り１１１、絞り駆動装置１１２、レンズ駆動用モーター１１３、駆動ギヤ等からなるレンズ駆動部材１１４、フォトカプラー１１５、パルス板１１６、マウント接点１１７、及び焦点調節回路１１８を備える。

フォトカプラー１１５は、レンズ駆動部材１１４に連動するパルス板１１６の回転を検知して、焦点調節回路１１８に伝えている。

焦点調節回路１１８は、フォトカプラー１１５からの情報とカメラ筐体部１Ｂからのレンズ駆動量の情報にもとづいてレンズ駆動用モーター１１３を所定量駆動させ、撮影レンズ１Ａを合焦点位置に移動させる。

マウント接点１１７は、カメラ筐体部１Ｂと撮影レンズ１Ａとのインターフェイスであり、公知の構成を有する。カメラ筐体部１Ｂと撮影レンズ１Ａでは、マウント接点１１７を介して信号の伝達がなされる。カメラ筐体部１ＢのＣＰＵ３は、撮影レンズ１Ａの種別情報や光学情報などを取得することで、カメラ筐体部１Ｂに装着された撮影レンズ１Ａによる焦点可能な範囲を判定する。

図３は、撮像システム１に内蔵された電気的構成を示すブロック図である。尚、図３では、図１、図２と同一の構成には同一番号が付されている。

カメラ筐体部１Ｂは、視線検出回路２０１、測光回路２０２、自動焦点検出回路２０３、信号入力回路２０４、ファインダ駆動回路１１、光源駆動回路２０５、視線検出信頼度判別回路３１、及び通信回路３２を備え、これらは夫々ＣＰＵ３と接続されている。また、撮影レンズ１Ａは、焦点調節回路１１８、及び絞り駆動装置１１２（図１）に含まれる絞り制御回路２０６を備え、これらは夫々マウント接点１１７を介してカメラ筐体部１ＢのＣＰＵ３との間で信号の伝達を行う。

視線検出回路２０１は、眼用撮像素子１７上で結像・出力された眼画像データをＡ／Ｄ変換し、この眼画像データをＣＰＵ３に送信する。ＣＰＵ３は、眼画像データから視線検出に必要な眼画像の各特徴点を後述する所定のアルゴリズムに従って抽出し、更に抽出された各特徴点の位置から推定されたユーザの視線位置（第１の推定注視点位置）を算出する。

測光回路２０２は、測光センサの役割も兼ねる撮像素子２から得られる信号を元に、被写界の明るさに対応した輝度信号出力を増幅後、対数圧縮、Ａ／Ｄ変換し、被写界輝度情報として、ＣＰＵ３に送る。

自動焦点検出回路２０３は、撮像素子２に含まれる、位相差検出の為に使用される複数の画素からの信号電圧をＡ／Ｄ変換し、ＣＰＵ３に送る。ＣＰＵ３は前記複数の画素からの信号電圧から、各焦点検出ポイントに対応する被写体までの距離を演算する。これは撮像面位相差ＡＦとして知られる公知の技術である。本実施例では、図４に示すファインダ内視野像（視認用画像）で示すように、ファインダ１０の撮像面上に１８０か所の焦点検出ポイントがある。

信号入力回路２０４は、不図示のスイッチＳＷ１，ＳＷ２と接続される。スイッチＳＷ１は、レリーズボタン５（図２（ａ））の第一ストロークでＯＮし、撮像システム１の測光、測距、視線検出動作等を開始するためスイッチである。スイッチＳＷ２は、レリーズボタン５の第二ストロークでＯＮし、レリーズ動作を開始するためのスイッチである。スイッチＳＷ１，ＳＷ２からの信号が信号入力回路２０４に入力され、ＣＰＵ３に送信される。

視線検出信頼度判別回路３１（信頼度判別手段）は、ＣＰＵ３によって算出された第１の推定注視点位置の信頼度を判別する。この判別は、後述するキャリブレーション時に取得した眼画像データと、撮影時に取得した眼画像データの２つの眼画像データの差異に基づき実行される。ここでの差異は、具体的には、上記２つの眼画像データの夫々から検出される、瞳孔径の大きさの違い、角膜反射像の数の違い、外光の入り込みの違いである。より具体的には、図５～図７で後述する視線検出方法により瞳孔端を算出するのだが、例えばこの瞳孔端の抽出数が閾値以上の場合に信頼度が高いと判別し、そうでない場合信頼度は低いと判別する。なぜなら瞳孔端をつなぎ合わせることでユーザの眼球１４の瞳孔１４１（図５）として推定するため、抽出できる瞳孔端の個数が多いほど、推定精度があがるためである。またほかにも瞳孔端をつなぎ合わせて算出される瞳孔１４１が円に対してどれだけ歪んでいるかで信頼度を判別してもよい。またその他の手法として後述するキャリブレーション時にユーザに注視させた指標の付近では信頼度を高く、指標から離れるほど信頼度を低いものとして判別してもよい。視線検出回路２０１によって算出されたユーザの視線位置情報をＣＰＵ３に送信する際、視線検出信頼度判別回路３１がその視線位置情報の信頼度をＣＰＵ３に送信する。

通信回路３２は、ＣＰＵ３の制御に基づき、ＬＡＮやインターネットといったネットワーク（不図示）を介して、サーバ上のＰＣ（不図示）に対する通信を行う。

また、前述した操作部材４１～４３は、ＣＰＵ３にその操作信号が伝わる構成となっており、それに応じて後述する第１の推定注視点位置の手動操作による移動制御等が行われる。

図４は、ファインダ視野内を示した図であり、ファインダ１０が動作する状態（視認用画像を表示した状態）を示す。

図４に示すように、ファインダ内視野には、視野マスク３００、焦点検出領域４００、１８０個の測距点指標４００１～４１８０等がある。

測距点指標４００１～４１８０の夫々は、ファインダ１０において、撮像素子２の撮像面上における複数の焦点検出ポイントの一つと対応する位置に表示されるように、ファインダ１０に表示されたスルー画像（ライブビュー画像）に重畳表示される。また、測距点指標４００１～４１８０のうち、現在の第１の推定注視点位置である位置Ａと一致する測距点指標は、ＣＰＵ３（設定手段）により焦点枠に設定され、ファインダ１０において強調表示される。レリーズボタン５が半押しされた場合、現在ファインダ１０において設定されている焦点枠をフォーカス位置とする焦点調節がＣＰＵ３の指示の下、自動焦点検出回路２０３及び焦点調節回路１１８により行われる。

次に、図５～図７を用いて撮像システム１による視線検出方法について説明する。

図５は、視線検出方法の原理を説明するための図であり、視線検出を行うための光学系の概略図である。

図５において、光源１３ａ，１３ｂは、ユーザに対して不感の赤外光を放射する発光ダイオード等の光源であり、各光源は受光レンズ１６の光軸に対して略対称に配置されユーザの眼球１４を照らす。光源１３ａ，１３ｂから発せられて眼球１４で反射した照明光の一部は受光レンズ１６によって、眼用撮像素子１７に集光する。

図６（ａ）は、眼用撮像素子１７で撮像された眼画像（眼用撮像素子１７に投影される眼画像）の概略図であり、図６（ｂ）は眼用撮像素子１７における光電素子列の出力強度を示す図である。

図７は、視線検出処理のフローチャートである。本処理はＣＰＵ３が、図３において不図示のＲＯＭに記録されるプログラムを読み出すことにより実行される。

図７において、視線検出処理が開始すると、ステップＳ７０１において、ＣＰＵ３は、光源１３ａ、１３ｂからユーザの眼球１４に向けて赤外光を放射させる。赤外光によって照明されたユーザの眼画像は、受光レンズ１６を通して眼用撮像素子１７上に結像され、眼用撮像素子１７により光電変換される。これにより、処理可能な眼画像の電気信号（眼画像データ）が得られる。

ステップＳ７０２において、ＣＰＵ３は、上記のように眼用撮像素子１７から得られた眼画像データを眼用撮像素子１７から取得する。

ステップＳ７０３では、ＣＰＵ３は、ステップＳ７０２において得られた眼画像データから、光源１３ａ，１３ｂの角膜反射像Ｐｄ，Ｐｅ及び瞳孔中心ｃに対応する座標を検出する。

光源１３ａ、１３ｂより発せられた赤外光は、ユーザの眼球１４の角膜１４２を照明する。このとき、角膜１４２の表面で反射した赤外光の一部により形成される角膜反射像Ｐｄ，Ｐｅは、受光レンズ１６により集光され、眼用撮像素子１７上に結像して、角膜反射像Ｐｄ’，Ｐｅ’となる。同様に瞳孔１４１の端部ａ，ｂからの光束も眼用撮像素子１７上に結像して、瞳孔端像ａ’，ｂ’となる。

図６（ｂ）は、図６（ａ）の眼画像における領域αの輝度情報（輝度分布）を示す。図６（ｂ）では、眼画像の水平方向をＸ軸、垂直方向をＹ軸とし、Ｘ軸方向の輝度分布が示されている。本実施例では、角膜反射像Ｐｄ’，Ｐｅ’のＸ軸方向（水平方向）の座標をＸｄ，Ｘｅとし、瞳孔端像ａ’，ｂ’のＸ軸方向の座標をＸａ，Ｘｂとする。図６（ｂ）に示すように、角膜反射像Ｐｄ’，Ｐｅ’の座標Ｘｄ，Ｘｅでは、極端に高いレベルの輝度が得られる。瞳孔１４１の領域（瞳孔１４１からの光束が眼用撮像素子１７上に結像して得られる瞳孔像１４１’の領域）に相当する、座標Ｘａより大きく座標Ｘｂより小さい範囲では、座標Ｘｄ，Ｘｅを除いて、極端に低いレベルの輝度が得られる。これに対し、瞳孔１４１の外側の光彩１４３の領域（光彩１４３からの光束が結像して得られる、瞳孔像１４１’の外側の光彩像１４３’の領域）では、上記２種の輝度の中間の輝度が得られる。具体的には、Ｘ座標（Ｘ軸方向の座標）が座標Ｘａより小さい領域と、Ｘ座標が座標Ｘｂより大きい領域とで、上記２種の輝度の中間の輝度が得られる。

図６（ｂ）に示すような輝度分布から、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標Ｘｄ，Ｘｅと、瞳孔端像ａ’，ｂ’のＸ座標Ｘａ，Ｘｂを得ることができる。具体的には、輝度が極端に高い座標を角膜反射像Ｐｄ’，Ｐｅ’の座標として得ることができ、輝度が極端に低い座標を瞳孔端像ａ’，ｂ’の座標として得ることができる。また、受光レンズ１６の光軸に対する眼球１４の光軸の回転角θｘが小さい場合には、瞳孔中心ｃからの光束が眼用撮像素子１７上に結像して得られる瞳孔中心像ｃ’（瞳孔像１４１’の中心）の座標Ｘｃは、Ｘｃ≒（Ｘａ＋Ｘｂ）／２と表すことができる。つまり、瞳孔端像ａ’，ｂ’のＸ座標Ｘａ，Ｘｂから、瞳孔中心像ｃ’のＸ座標Ｘｃを算出できる。このようにして、角膜反射像Ｐｄ’，Ｐｅ’のＸ座標と、瞳孔中心像ｃ’のＸ座標とを見積もることができる。

図７に戻り、ステップＳ７０４では、ＣＰＵ３は、眼球像の結像倍率βを算出する。結像倍率βは、受光レンズ１６に対する眼球１４の位置により決まる倍率で、角膜反射像Ｐｄ‘、Ｐｅ’の間隔（Ｘｄ－Ｘｅ）の関数として求めることができる。

ステップＳ７０５では、ＣＰＵ３は、受光レンズ１６の光軸に対する眼球１４の光軸の
回転角を算出する。角膜反射像Ｐｄと角膜反射像Ｐｅの中点のＸ座標と角膜１４２の曲率中心ＯのＸ座標とはほぼ一致する。このため、角膜１４２の曲率中心Ｏと瞳孔１４１の中心ｃまでの標準的な距離をＯｃとすると、Ｚ－Ｘ平面（Ｙ軸に垂直な平面）内の眼球１４の回転角θＸは、以下の式１で算出できる。Ｚ－Ｙ平面（Ｘ軸に垂直な平面）内での眼球１４の回転角θｙも、回転角θｘの算出方法と同様の方法で算出できる。
β×Ｏｃ×ＳＩＮθｘ≒｛（Ｘｄ＋Ｘｅ）／２｝－Ｘｃ・・・（式１）

ステップＳ７０６では、ＣＰＵ３は、メモリ部４から補正係数（係数ｍ、及び視線補正係数Ａｘ，Ｂｘ，Ａｙ，Ｂｙ）を取得する。係数ｍは撮像システム１のファインダ光学系（受光レンズ１６等）の構成で定まる定数であり、回転角θｘ，θｙを視認用画像において瞳孔中心ｃに対応する座標に変換する変換係数であり、予め決定されてメモリ部４に格納されている。また、視線補正係数Ａｘ，Ｂｘ，Ａｙ，Ｂｙは、眼球の個人差を補正するパラメータであり、後述するキャリブレーション作業を行うことで取得され、本処理が開始する前にメモリ部４に格納されている。

ステップＳ７０７では、ＣＰＵ３は、視線検出回路２０１に指示し、ファインダ１０に表示された視認用画像に注がれるユーザの視点の位置（第１の推定注視点位置）を算出させる。具体的には、視線検出回路２０１は、ステップＳ７０５で算出した眼球１４の回転角θｘ，θｙ、及びステップＳ７０６で取得した補正係数データを用いて、第１の推定注視点位置を算出する。第１の推定注視点位置の座標（Ｈｘ，Ｈｙ）が瞳孔中心ｃに対応する座標であるとすると、第１の推定注視点位置の座標（Ｈｘ，Ｈｙ）は以下の式２，３で算出できる。
Ｈｘ＝ｍ×（Ａｘ×θｘ＋Ｂｘ）・・・（式２）
Ｈｙ＝ｍ×（Ａｙ×θｙ＋Ｂｙ）・・・（式３）

ステップＳ７０８では、ＣＰＵ３は、ステップＳ７０６で算出した第１の推定注視点位置の座標（Ｈｘ，Ｈｙ）をメモリ部４に格納して、本処理を終える。

以上、本実施例の視線検出処理においては、眼球１４の回転角度θｘ，θｙを、及び後述するキャリブレーション作業等により予め取得している補正係数（係数ｍ、及び視線補正係数Ａｘ，Ｂｘ，Ａｙ，Ｂｙ）を用いて、第１の推定注視点位置が算出された。

しかし、人間の眼球の形状の個人差等の要因により、第１の推定注視点位置を高精度に推定できないことがある。具体的には、視線補正係数Ａｘ，Ａｙ，Ｂｘ，Ｂｙの値をユーザに適した値に調整しなければ、図４（ｂ）に示したように、ユーザが実際に注視している位置ＢとステップＳ７０７で算出された第１の推定注視点位置である位置Ｃとのずれが生じてしまう。図４（ｂ）では、ユーザは位置Ｂの人物を注視しているが、撮像システム１は、ユーザが第１の推定注視点位置である位置Ｃの背景を注視していると誤って推定している。この結果、ユーザが注視している位置Ｂに対する適切な焦点検出及び調整ができない状態に陥ってしまっている。

そこで、ＣＰＵ３（キャリブレーション手段）は、撮像システム１が撮像（焦点検出）を行う前に、キャリブレーション作業を行い、ユーザに適した視線補正係数Ａｘ，Ａｙ，Ｂｘ，Ｂｙを取得し、メモリ部４に格納する。

従来より、キャリブレーション作業は、撮像前に図４（ｃ）のような位置に異なる複数のキャリブレーション作業用の指標Ｄ１～Ｄ５をファインダ１０に強調表示し、ユーザにその指標を見てもらうことで行われている。そして、各指標Ｄ１～Ｄ５の注視時に視線検出処理を行い、算出された複数の第１の推定注視点位置の座標と、注視された指標の座標とから、ユーザに適した視線補正係数Ａｘ，Ａｙ，Ｂｘ，Ｂｙを求める技術が、公知の技術として知られている。なお、ユーザの見るべき位置が示唆されれば、図４（ｃ）のように、各指標Ｄ１～Ｄ５の位置を四角枠で示す強調表示の方法に限定されない。例えば、輝度や色の変更で各指標Ｄ１～Ｄ５の位置が強調されてもよい。

しかしながら、本実施例のカメラ筐体部１Ｂは、撮影レンズ１Ａ以外の複数のアクセサリを脱着可能に装着するため、装着されるアクセサリによって、カメラ筐体部１Ｂによる焦点制御可能な範囲が異なることが知られている。

以下、図８～図１１を用いてカメラ筐体部１Ｂへ装着されるアクセサリに応じた最適なキャリブレーション方法に関して説明する。

以下、本実施例では、撮影レンズ１Ａの他、これより焦点検出領域が狭い撮影レンズ１Ａ’が夫々カメラ筐体部１Ｂに脱着可能に装着される場合について説明する。具体的には、撮影レンズ１Ａ，１Ａ’は夫々、３５ｍｍフルサイズセンサ（縦：３６ｍｍ，横：２４ｍｍ）用撮影レンズ、及び、ＡＰＳ－Ｃセンサ（縦：約１５．５ｍｍ，横：約２３．３ｍｍ）用撮影レンズであって、同様のハードウェア構成を有する。但し、撮影レンズ１Ａ，１Ａ’の焦点検出領域が異なればこれに限定されない。例えば、撮影レンズ１Ａ，１Ａ’は、対象センサは同じだが性能の異なる撮影レンズであってもよい。

図８は、焦点検出領域が異なる撮影レンズがカメラ筐体部１Ｂに装着された夫々の場合のキャリブレーション時のファインダ視野内に表示される焦点検出領域の例を示した図である。図８（ａ）は、撮影レンズ１Ａをカメラ筐体部１Ｂに装着した時にファインダ視野内に表示される焦点検出領域８００を示す。また、図８（ｂ）は、撮影レンズ１Ａ’をカメラ筐体部１Ｂに装着した時にファインダ視野内に表示される焦点検出領域８１０を示す図である。尚、図８において、図４と同様であるところは説明を省略する。

図８（ａ）に示すように、焦点検出領域８００の内部には、撮影レンズ１Ａをカメラ筐体部１Ｂに装着した際のキャリブレーション作業用の指標８０１が表示される。

一方、図８（ｂ）に示すように、焦点検出領域８１０の内部には、撮影レンズ１Ａ’を装着した際のキャリブレーション作業用の指標８１１が表示される。

図８（ａ）においては、焦点検出領域８００は、ファインダ内視野の視野マスク３００内の視野領域の全てを網羅している。これに対して図８（ｂ）においては、焦点検出領域８１０は、視野領域の一部しか網羅していない。そのため、指標８０１を、図８（ａ）と図８（ｂ）の両方で使用した場合、図８（ｂ）の焦点検出領域８１０の外部にほとんどの指標があるため、視線検出の精度が悪化してしまう。また逆に、指標８１１を、図８（ａ）と図８（ｂ）の両方で使用した場合、図８（ａ）の焦点検出領域８００の端部には指標が存在しなくなるため、焦点検出領域８００内であってもその端部では視線検出の精度が悪化してしまう。

そこで、図８の例では、図８（ａ），（ｂ）に示すように、カメラ筐体部１Ｂに装着された撮影レンズの焦点検出領域に応じて、その焦点検出領域内部に収まるようにキャリブレーション作業用の指標が設定される。

尚、図８の例においてはキャリブレーション作業用の指標が５つである場合を説明したが、指標の数はこれに限定されない。すなわち、ファインダ視野内の視野領域に応じてではなく焦点検出領域に応じて、キャリブレーション作業用の指標の表示位置、大きさ、指標数が決定されればよい。

図８の例では、キャリブレーションにかかる時間を維持しつつ、視線検出の精度が悪化するのを抑制するため、焦点検出領域の大きさに応じて最適となるよう、キャリブレーション指標の位置を変更するようにした。これに対し、以下に説明する図９の例では、焦点検出領域が広い場合は、焦点検出領域が狭い場合と同程度の視線検出精度を視線検出回路２０１に持たせるため、キャリブレーションの時間はかかるが、指標の数を増やすよう変更する。

図９は、焦点検出領域が異なる撮影レンズがカメラ筐体部１Ｂに装着された夫々の場合のキャリブレーション時のファインダ視野内における焦点検出領域の他の例を示した図である。図９において、図４、図８と同様であるところは説明を省略する。

図９（ａ）は、撮影レンズ１Ａをカメラ筐体部１Ｂに装着した時にファインダ視野内に表示される焦点検出領域８００を示す。また、図９（ｂ）は、撮影レンズ１Ａ’をカメラ筐体部１Ｂに装着した時にファインダ視野内に表示される焦点検出領域８１０を示す。

図９（ａ）に示すように、焦点検出領域８００の内部には、撮影レンズ１Ａをカメラ筐体部１Ｂに装着した際のキャリブレーション作業用の指標９０１が表示される。

一方、図９（ｂ）に示すように、焦点検出領域８１０の内部には、撮影レンズ１Ａ’を装着した際のキャリブレーション作業用の指標９１１が表示される。

図９（ａ）の指標９０１は、焦点検出領域４００の内部に表示される数が図８（ａ）の指標８０１が多い点で、図８，９は異なる。

先述したように、キャリブレーションは注視させた指標の付近では検出精度が高くなり、そこから離れるほど検出精度が低くなる傾向にある。よって、図９に示す他の例では、求められる視線検出精度に応じて焦点検出領域内に表示されるキャリブレーション作業用の指標の個数が設定される。すなわち、図９の例では、焦点検出領域が異なる撮影レンズがカメラ筐体部１Ｂに装着された夫々の場合のキャリブレーション作業用指標の数を焦点検出領域に応じて変更する。これにより、必要最小のキャリブレーション時間で期待する視線検出精度を出すことができる。

本実施例のＣＰＵ３（表示画像変更手段）は、液晶等で構成されるファインダ１０のファインダ視野角を変更する視野角変更機能を備える。この機能は、例えばユーザがメガネをつけているため、接眼窓６を覗いてもファインダ１０の表示画像の一部しか見えない場合、ユーザがファインダ１０の表示画像の大きさを縮小してその全体が見えるように調整する際に使用される。

図１０は、異なるファインダ視野角におけるキャリブレーション時のファインダ視野内における焦点検出領域の例を示した図である。図１０において、図４、図８～９と同様であるところは説明を省略する。

図１０（ａ）、図１０（ｂ）はどちらも、撮影レンズ１Ａをカメラ筐体部１Ｂに装着した状態でキャリブレーションが行われた時のファインダ視野内における焦点検出領域である。

図１０（ａ）は、初期設定のファインダ視野角である場合のファインダ視野内における焦点検出領域８００である。図１０（ｂ）は、ユーザが視野角変更機能を用いてファインダ視野角を初期設定から変更し、ファインダ１０の表示画像の大きさを縮小した場合のファインダ視野内における焦点検出領域１０００である。

図１０（ｂ）に示すように、撮影レンズ１Ａがカメラ筐体部１Ｂに装着された後、視野角変更機能によりファインダ１０の表示画像の大きさが縮小された場合、焦点検出領域１０００には、キャリブレーション作業用の指標１００１が表示される。

注目してもらいたいのは、図１０（ａ）、図１０（ｂ）のいずれのファインダ１０の表示画像においても、測距点視標の個数は同数の１８０個であるが、その大きさは異なっているという点である。このように、ファインダ１０の表示画像の大きさに応じて、その測距点視標の大きさが変更すると、キャリブレーション作業用の指標の大きさもこれに応じて変更する。

尚、図１０では、測距点指標とキャリブレーション作業用の指標が同じ大きさと形である場合を例示しているが、必ずしも測距点指標とキャリブレーション作業用指標を同じ大きさと形にする必要はない。すなわち、ファインダ視野内の測距点視標の大きさに応じてキャリブレーション作業用指標の大きさ、形の少なくとも１つが変更されればよい。例えば、測距点指標とキャリブレーション作業用指標の大きさや形は違うものであってもよく、測距点指標の変化比率に応じて、キャリブレーション作業用の指標の大きさを変化させるようにしてもよい。また、測距点指標の大きさが予め設定されている閾値を下回ったらキャリブレーション作業用の指標の大きさや形を切り替えるようにしてもよい。また視線検出回路２０１の性能によっては、ファインダ１０の出力画像が小さくなりすぎると、測距点指標ごとの視線検出精度を出すことが難しい場合がある。このような場合は、キャリブレーション作業用指標の大きさを測距点指標複数個分の大きさに変更してキャリブレーションを行ってもよい。

図１１は、カメラ筐体部１Ｂへのアクセサリ装着時に実行されるキャリブレーション方法決定処理のフローチャートである。本処理は、カメラ筐体部１Ｂにアクセサリが未装着の状態において、カメラ筐体部１ＢのＣＰＵ３が、図３において不図示のＲＯＭに記録されるプログラムを読み出すことにより実行される。

ステップＳ１１０１において、ＣＰＵ３は、カメラ筐体部１Ｂにアクセサリが装着されたか否かを判別する。具体的には、ＣＰＵ３は、マウント接点１１７から出力される信号の状態が変化したときに、カメラ筐体部１Ｂに撮影レンズ１Ａ等のアクセサリが装着されたと判別する。アクセサリが装着されたことが検出された場合、ステップＳ１１０２へと進む。以下、本処理ではアクセサリとして撮影レンズ１Ａが装着された場合を例に説明する。

ステップＳ１１０２において、ＣＰＵ３はマウント接点１１７を介して、撮影レンズ１Ａと通信を行い、アクセサリ情報を取得する。撮影レンズ１Ａの場合のアクセサリ情報とは、二枚のレンズ１０１，１０２の種別情報や、光学情報等である。一般的には、各レンズの固有な情報は撮影レンズ１Ａ内部の不図示の記憶媒体に記憶されており、撮影レンズ１Ａとの通信によって、カメラ筐体部１ＢのＣＰＵ３はその情報を取得する。アクセサリ情報を取得後、ステップＳ１１０３へと進む。

ステップＳ１１０３において、ＣＰＵ３（焦点検出領域取得手段）は、ステップＳ１１０２で取得したアクセサリ情報に基づき焦点検出領域Ａを算出する。この焦点検出領域Ａは、カメラ筐体部１Ｂに装着されるアクセサリが撮影レンズ１Ａの場合は、図８（ａ）の焦点検出領域８００となり、カメラ筐体部１Ｂに装着されるアクセサリが撮影レンズ１Ａ’の場合は、図８（ｂ）の焦点検出領域８１０となる。すなわち、装着されるアクセサリの光学情報より、焦点検出領域Ａがどの領域となるかは一意に求められる。焦点検出領域Ａを算出後、ステップＳ１１０４へと進む。

ステップＳ１１０４において、ＣＰＵ３は、視線検出精度の期待値に応じてキャリブレーション作業用の指標の個数を決定する。視線検出精度の期待値は、ＣＰＵ３にあらかじめ設定されていてもよいし、ユーザが任意に設定可能としてもよい。先述したが、一般的に、キャリブレーションは注視させた指標の付近では検出精度が高くなるため、キャリブレーションの指標は多いほどよい。しかし、キャリブレーションの工程は、ユーザに一定の操作を強要するため、負担が大きくなりやすい。そのため、ユーザに視線検出精度の期待値を設定させるのではなく、キャリブレーションの許容時間を設定してもらい、その時間内で可能なキャリブレーション指標の個数を設定するようにしても良い。キャリブレーション指標の個数の決定後、ステップＳ１１０５へと進む。

ステップＳ１１０５において、ＣＰＵ３は、ファインダ１０の表示画像の大きさが、視野角変更機能を用いてユーザにより変更されているか否かを判別する。このようにファインダ１０の表示画像をユーザがあえて変更を行う理由は図１０において説明済みのため説明を省略する。判別の結果、ファインダ１０の表示画像の大きさが変更されている場合はステップＳ１１０６へと進み、変更されていない場合はステップＳ１１１０へと進む。本実施例では、ＣＰＵ３は、視野角の値が初期設定と異なる値となっている場合、ファインダ１０の表示画像の大きさが変更されていると判別するがこれに限るものではない。例えば、前回のキャリブレーション時のファインダ１０の表示画像の大きさを記憶しておき、その時の大きさと現在の大きさを比較することで、ファインダ１０の表示画像の大きさが変化しているか否かを判別するようにしても良い。

ステップＳ１１０６において、ＣＰＵ３は、ステップＳ１１０３で取得した焦点検出領域Ａを、ファインダ１０の表示画像の大きさの変化割合をかけることで、焦点検出領域Ａ２（図１０（ｂ）の焦点検出領域１０００）を算出する。焦点検出領域Ａ２を算出後、ステップＳ１１０７へと進む。

ステップＳ１１０７において、ＣＰＵ３は、ステップＳ１１０６で取得した焦点検出領域Ａ２内部に入るようにキャリブレーション指標の位置を決定する。このキャリブレーション指標の位置の決定方法の詳細に関しては図８にて説明したとおりである。キャリブレーション指標の位置の決定後、ステップＳ１１０８へと進む。

ステップＳ１１０８において、ＣＰＵ３は、初期設定の測距点指標の大きさに、ファインダ１０の出力画像の大きさの変化割合をかけることで、測距点指標の大きさを算出すると共に、算出された値でメモリ部４に保持される測距点指標の大きさを更新する。その後、ステップＳ１１１０へと進む。

ステップＳ１１０９において、ＣＰＵ３は、ステップＳ１１０３で取得した焦点検出領域Ａ内部に入るようにキャリブレーション指標の位置を決定する。このキャリブレーション指標の位置の決定方法の詳細に関しては図８にて説明したとおりである。キャリブレーション指標の位置の決定後、その後、ステップＳ１１１０へと進む。

ステップＳ１１１０において、ＣＰＵ３は、メモリ部４に保持される測距点指標の大きさに応じて、キャリブレーション指標の大きさを決定する。このキャリブレーション指標の大きさの決定方法の詳細に関しては図１０にて説明したとおりである。その後、本処理を終了する。

図１１の処理によれば、焦点検出領域に応じて最適な数及び大きさのキャリブレーション指標をキャリブレーション時にファインダ１０に表示するので、キャリブレーション時の視線検出精度を維持できる。

（実施例２）
以下、図１２～図１４を参照して、本発明の実施例２による、カメラ筐体部に脱着可能に装着されるアクセサリ（ここでは、撮影レンズ）の違いにより焦点制御可能な範囲が変化した場合の再キャリブレーションについて説明する。

尚、本実施例において、実施例１と同一の構成については同一の付番を付し、重複した説明は省略する。

実施例１においては、撮影レンズ１Ａがカメラ筐体部１Ｂに装着している際のキャリブレーションの方法について説明した。これに対して本実施例では、撮影レンズ１Ａ’がカメラ筐体部１Ｂに装着している際にキャリブレーションが行われたあとに、カメラ筐体部１Ｂに装着される撮影レンズを撮影レンズ１Ａに変更した場合の再キャリブレーションの方法について説明する。

図１２は、カメラ筐体部１Ｂに装着されるアクセサリの交換時に実行される再キャリブレーション方法決定処理のフローチャートである。本処理は、カメラ筐体部１Ｂにアクセサリが装着されている状態において、カメラ筐体部１ＢのＣＰＵ３が、図３において不図示のＲＯＭに記録されるプログラムを読み出すことにより実行される。また、図１２のステップのうち、図１１と同一の内容のステップについては、同一番号を付し、重複した説明は省略する。

ステップＳ１２０１において、ＣＰＵ３は、カメラ筐体部１Ｂに装着されるアクセサリが交換されたか否かを判別する。具体的には、ＣＰＵ３は、マウント接点１１７から出力される信号の状態が変化したときに、カメラ筐体部１Ｂに交換後のアクセサリが装着されたと判別する。以下、本処理では、カメラ筐体部１Ｂに装着されているアクセサリが、撮影レンズ１Ａ’から撮影レンズ１Ａに交換された場合を例に説明する。

判別の結果、アクセサリが交換されたことが検出された場合（ステップＳ１２０１でＹＥＳ）、ステップＳ１１０２へと進む。ここでステップＳ１１０２，Ｓ１１０３は図１１で前述しているため説明を割愛する。ステップＳ１１０３の後、ステップＳ１２０２へと進む。

ステップＳ１２０２において、ＣＰＵ３は、ステップＳ１１０３によって算出された焦点検出領域Ａが過去にキャリブレーション済みかどうかを判別する。本実施例では、過去にキャリブレーションが行われる毎に、焦点検出領域とそのキャリブレーションで得られた補正情報（視線補正係数Ａｘ，Ｂｘ，Ａｙ，Ｂｙ）をメモリ部４（記憶手段）に紐づけて格納しておく。そしてステップＳ１２０１でのアクセサリの交換により新たに装着された撮影レンズ１Ａの焦点検出領域Ａがメモリ部４に格納されている場合、ＣＰＵ３は焦点検出領域Ａが過去にキャリブレーション済みであると判別する。尚、カメラ筐体部１Ｂを複数のユーザが使用する場合は、過去にキャリブレーションが行われる毎に、そのキャリブレーションを行ったユーザの情報も格納する。この場合、ステップＳ１２０２では、そのユーザの情報を用いて、現在カメラ筐体部１Ｂを使用しているユーザが、過去に焦点検出領域Ａのキャリブレーションを行ったかを判別する。

判別の結果、新たに装着された撮影レンズ１Ａの焦点検出領域Ａがキャリブレーション済みである場合（ステップＳ１２０２でＹＥＳ）、ステップＳ１２０３へと進む一方、まだキャリブレーション済ではない場合、ステップＳ１２０４へと進む。

ステップＳ１２０３において、ＣＰＵ３（キャリブレーション手段）は、新たに装着された撮影レンズ１Ａの焦点検出領域Ａに対する過去のキャリブレーションの際に得られた補正情報をメモリ部４から取得し、視線検出回路２０１の補正を行う。その後、本処理を終了する。

ステップＳ１２０４において、ＣＰＵ３は、ファインダ１０に再キャリブレーションの実施を促す警告画面をファインダ１０に表示する。この警告画面については図１３において後述する。警告画面の表示後、ステップＳ１２０５へと進む。

ステップＳ１２０５において、ＣＰＵ３は、再キャリブレーションが実施されたか、再キャリブレーションを実施しない旨のユーザ指示があったかを判別する。判別の結果、再キャリブレーションを実施する旨のユーザ指示があった場合（ステップＳ１２０５でＹＥＳ）、ステップＳ１２０６へと進む。一方、再キャリブレーションを実施しない旨のユーザ指示があった場合、ステップＳ１２０７へと進む。ここで、再キャリブレーションを実施しない旨のユーザ指示とは、例えば、撮影をすぐしたい場合など、再キャリブレーションをせずに視線検出を使用したい場合になされるユーザ指示である。具体的には、ユーザが操作部材４１～４３を用いてファインダ１０に表示中の警告画面のキャンセル操作を行った場合や、レリーズボタン５を押した場合に、ＣＰＵ３は再キャリブレーションを実施しない旨のユーザ指示があったと判別する。但し、再キャリブレーションを実施しない旨のユーザ指示は、特にこれに限るものでなく、例えば音声を用いて再キャリブレーションを実施しないことをカメラ筐体部１Ｂに通知するなど種々の方法を採ることが可能である。

ステップＳ１２０６において、ＣＰＵ３は、新たに装着された撮影レンズ１Ａの焦点検出領域Ａに対応した再キャリブレーションで得られた補正情報を用いて、視線検出を行う。その後、本処理を終了する。

ステップＳ１２０７において、ＣＰＵ３（算出手段）は、メモリ部４に格納されている補正情報を用いた場合、焦点検出領域Ａに対する視線検出精度がどの程度になるかを算出する。視線検出精度の算出は、キャリブレーション指標の間隔がどのくらい離れているかや、キャリブレーションの実施回数などから算出可能である。その後ステップＳ１２０８へと進む。尚、補正情報がメモリ部４に複数格納されている場合は、新たに装着された撮影レンズ１Ａの焦点検出領域Ａともっとも誤差の小さい焦点検出領域に対応するキャリブレーションにより得られた補正情報を選定するようにしてもよい。また、過去のキャリブレーション時の夫々の視線検出精度を算出し、もっとも精度が高いものを選んでもよいし、焦点検出領域Ａよりも大きい領域に対応するキャリブレーションにより得られた補正情報を選定するようにしてもよい。

ステップＳ１２０８において、ＣＰＵ３は、ステップＳ１２０７において算出された視線検出精度に応じて、測距点指標の大きさを変更し、ファインダ１０に表示する。この決定方法に関しては図１４を用いて後述する。その後ステップＳ１２０９へと進む。

ステップＳ１２０９において、ＣＰＵ３は、新たに装着された撮影レンズ１Ａに対して、メモリ部４に格納されている補正情報を用いて、視線検出回路２０１の補正を行う。尚、補正情報がメモリ部４に複数格納されている場合は、ステップＳ１２０７で上述した方法で選定された補正情報を用いる。その後、本処理を終了する。

図１３は、図１２のステップＳ１２０４でファインダ１０に表示される再キャリブレーションの警告画面の一例である。尚、図１３において、図４と同様であるところは説明を省略する。

図１３に示すように、警告画面には、再キャリブレーションの実施を促す警告メッセージ１３００が表示される。本実施例では、警告メッセージ１３００として「再キャリブレーションを実施してください」との文言を例示しているがこれに限るものではない。また、図１３の警告画面の表示は所定時間表示後に解除するようにしても良い。また、ステップＳ１２０５で、再キャリブレーションが実施されたか、再キャリブレーションを実施しない旨のユーザ指示があるまで、所定の期間で再度、図１３の警告画面を表示するようにしてもよい。

図１４は、図１２のステップＳ１２０８で視線検出精度に応じて大きさが決定され、ファインダ１０に表示される測距点指標を説明するための図である。尚、図１４において、図４と同様であるところは説明を省略する。

図１４（ａ）は、焦点検出領域Ａに対応したキャリブレーションが実施できた場合の撮影時における焦点枠１４０１を示す図である。

図１４（ｂ）は、焦点検出領域Ａに対応したキャリブレーションが実施できていない場合の撮影時における焦点枠１４０２を示す図である。

図１４（ｂ）に示すように、視線検出精度に応じて、測距点指標の大きさを大きくすることでユーザの意図しない位置に焦点枠が設定されないように構成することができる。また本実施例では、最適なキャリブレーションがされている場合は、焦点枠１４０１のように丸型（第１の表示オブジェクト）とする。一方、最適なキャリブレーションがされておらず焦点枠が大きくなっている場合は、焦点枠１４０２のように菱形（第２の表示オブジェクト）とする。但し、最適なキャリブレーションが完了しているか否かがユーザ識別可能であれば焦点枠１４０２は本実施例の形態に限るものでなく、例えば、別の形状や色で表示してもよい。また、焦点枠１４０２の付近に「再キャリブレーションを実施してください」との文言を併記してもよい。

上記構成により、カメラ筐体部１Ｂに装着するアクセサリの交換時において最適なキャリブレーション結果を使用し、視線検出を行うことができる。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実行可能である。

１ 撮像システム
１Ａ 撮影レンズ
１Ｂ カメラ筐体
３ ＣＰＵ
４ メモリ部
５ レリーズボタン
１０ ファインダ
１１８ 焦点調節回路
２０１ 視線検出回路
２０３ 自動焦点検出回路

Claims (10)

1. 内部にファインダを有する、複数のアクセサリを脱着可能な撮像装置であって、
   前記ファインダに注がれるユーザの視線位置を検出する視線検出手段と、
   前記ファインダにキャリブレーション作業用の指標を表示し、前記指標の前記ファインダにおける表示位置と、前記指標に注がれる、前記視線検出手段により検出されたユーザの視線位置とに基づくキャリブレーションにより、眼球の個人差の補正情報を取得し、前記補正情報を使用して前記視線検出手段の補正を行うキャリブレーション手段と、
   前記ファインダにスルー画像を表示し、前記スルー画像に注がれるユーザの視線位置を前記視線検出手段により検出し、焦点枠に設定する設定手段と、
   前記複数のアクセサリの１つが装着された場合に、前記装着されたアクセサリよりその焦点検出領域を取得する焦点検出領域取得手段と、を備え、
   前記取得された焦点検出領域に応じて、前記キャリブレーション手段は前記キャリブレーションの方法を変更することを特徴とする撮像装置。
2. 前記キャリブレーション手段は、前記複数のアクセサリのうち、装着されたアクセサリの焦点検出領域が広い程、前記ファインダに表示される前記指標の個数を多くすることを特徴とする請求項１記載の撮像装置。
3. 前記ファインダの表示画像の大きさを変更する表示画像変更手段をさらに備え、
   前記キャリブレーション手段は、
   前記ファインダに表示される複数の測距点指標の夫々の大きさを、前記表示画像変更手段によって変更された前記表示画像の大きさに応じて変更し、
   前記変更された複数の測距点指標の夫々の大きさに応じて、前記指標の大きさ及び形の少なくとも１つを変更させることを特徴とする請求項１又は２記載の撮像装置。
4. 前記複数のアクセサリの１つが装着される毎に、前記装着されたアクセサリの焦点検出領域と前記キャリブレーション手段により取得された前記補正情報とを紐づけて記憶する記憶手段をさらに備え、
   前記複数のアクセサリの１つが新たに装着された際、前記新たに装着されたアクセサリの焦点検出領域が、前記記憶手段に記憶される焦点検出領域と同じである場合、前記キャリブレーション手段は、前記記憶手段に記憶される焦点検出領域と紐づけられて記憶される補正情報を使用して前記視線検出手段のキャリブレーションを行うことを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記新たに装着されたアクセサリの焦点検出領域が、前記記憶手段に記憶される焦点検出領域と異なる場合、前記キャリブレーション手段による再キャリブレーションを促す警告画面を前記ファインダに表示することを特徴とする請求項４記載の撮像装置。
6. 前記警告画面が前記ファインダに表示された後、前記キャリブレーション手段による再キャリブレーションを実施しない旨のユーザ指示があった場合、前記記憶手段に記憶される焦点検出領域と紐づけられて記憶される補正情報を使用して前記視線検出手段のキャリブレーションを行うことを特徴とする請求項５記載の撮像装置。
7. 前記ユーザ指示があった場合、前記記憶手段に記憶される焦点検出領域と紐づけられて記憶される補正情報を使用した場合の、前記新たに装着されたアクセサリの焦点検出領域に対する視線検出精度を算出する算出手段を更に備え、
   前記算出された視線検出精度に応じて、前記焦点枠の大きさを決定することを特徴とする請求項６記載の撮像装置。
8. 前記新たに装着されたアクセサリの焦点検出領域が前記記憶手段に記憶される焦点検出領域と同じである場合に前記焦点枠として表示される第１の表示オブジェクトと、前記新たに装着されたアクセサリの焦点検出領域が前記記憶手段に記憶される焦点検出領域と異なる場合に前記焦点枠として表示される第２の表示オブジェクトとは、形状及び色の少なくともいずれか１つが異なることを特徴とする請求項７記載の撮像装置。
9. 内部にファインダを有する、複数のアクセサリを脱着可能な撮像装置の制御方法であって、
   前記ファインダに注がれるユーザの視線位置を検出する視線検出ステップと、
   前記ファインダにキャリブレーション作業用の指標を表示し、前記指標の前記ファインダにおける表示位置と、前記指標に注がれる、前記視線検出ステップにおいて検出されたユーザの視線位置とに基づくキャリブレーションにより、眼球の個人差の補正情報を取得し、前記補正情報を使用して前記視線検出ステップの補正を行うキャリブレーションステップと、
   前記ファインダにスルー画像を表示し、前記スルー画像に注がれるユーザの視線位置を前記視線検出ステップにおいて検出し、焦点枠に設定する設定ステップと、
   前記複数のアクセサリの１つが装着された場合に、前記装着されたアクセサリよりその焦点検出領域を取得する焦点検出領域取得ステップと、を有し、
   前記取得された焦点検出領域に応じて、前記キャリブレーションステップにおける前記キャリブレーションの方法を変更することを特徴とする制御方法。
10. コンピュータを、請求項１乃至８のいずれか１項に記載の撮像装置の各手段として機能させる、コンピュータにより実行可能なプログラム。

Images