JP2022094796A - 撮像装置、制御方法、プログラム及び記憶媒体 - Google Patents

Abstract

【課題】 画素グループ毎に露光時間を制御する撮像装置において、被写体ブレを抑制した赤外カットフィルタの挿抜制御を行うこと。【解決手段】 可視光の透過率が赤外光の透過率よりも大きいフィルタが撮像光学系１０１の光路上に挿入された第１のモードと、フィルタが撮像光学系１０１の光路上から抜去された第２のモードとに撮像モードを切り替えて撮像する撮像装置１００が、１以上の画素を画素グループとして、画素グループ毎に決定された露光時間で撮像光学系１０１による像を撮像する撮像部２０１と、画素グループ毎の露光時間を決定することにより露出を制御する露出制御部２０２と、露出部２０２が決定した露光時間に基づいて、第１のモードと第２のモードとのいずれか一方に撮像モードを決定する決定部２０３と、決定部２０３の決定に応じて、フィルタの挿抜を制御するフィルタ制御部２０４とを有する。【選択図】 図１

Description

本発明は、 撮像装置、制御方法、プログラム及び記憶媒体に関する。

監視カメラなどでは、屋内および屋外における、明暗差の大きな環境や照明が異なる環境などに対してダイナミックレンジを拡大して撮像することが望まれている。

特許文献１では、画像を複数の領域に分割し、分割された領域毎あるいは画素毎に露光時間を制御することでダイナミックレンジを拡大する技術が開示されている。

一方、特許文献２では、画像を複数の領域に分割し、分割された領域毎に輝度の平均値を算出し、輝度の平均値が所定の基準値を下回った場合に赤外カットフィルタを抜去することで、時間帯や被写体に応じて最適な画像を撮像する技術が開示されている。（一般に、赤外カットフィルタを挿入して撮像するモードをデイモード、赤外カットフィルタを抜去して撮像するモードをナイトモードと呼ぶ）

ＷＯ２０１７／０１８１８８ 特許第６５２５７２３号

特許文献１の撮像装置は、輝度の平均値が低い領域に対して、露光時間を長くすることで被写体像を明るくして撮像する。仮に、特許文献２の方法を特許文献１に適用した場合、領域毎の輝度の平均値が所定の基準値を下回らないため、赤外カットフィルタが挿抜されない。

そのため、被写体が、露光時間が短い領域と露光時間が長い領域とを跨ぐように移動した場合、露光時間の長い領域で被写体ぶれが発生する可能性がある。この場合、被写体像の視認性が低下するおそれがある。

そこで本発明が解決しようとする課題は、領域毎に露光時間を制御する撮像装置において、被写体ぶれを抑制した赤外カットフィルタの挿抜制御を行うことである。

上記課題を解決するために、本発明の撮像装置は、可視光の透過率が赤外光の透過率よりも大きいフィルタが撮像光学系の光路上に挿入された第１のモードと、前記フィルタが前記撮像光学系の光路上から抜去された第２のモードとに撮像モードを切り替えて前記撮像光学系による像を撮像する撮像装置であって、１以上の画素を１つの画素グループとして、該画素グループ毎に決定された露光時間で前記撮像光学系による像を撮像する撮像部と、前記画素グループ毎の露光時間を決定することにより露出を制御する露出制御部と、前記露出制御部が決定した露光時間に基づいて、前記第１のモードと前記第２のモードとのいずれか一方に撮像モードを決定する決定部と、該決定部により決定した撮像モードに応じて、前記フィルタの挿抜を制御するフィルタ制御部とを有することを特徴とする。

領域毎に露光時間を制御する撮像装置において、被写体ぶれを抑制した赤外カットフィルタの挿抜制御を行うことができる。

第１の実施形態に係る撮像装置の装置構成を示す模式図である。 第１の実施形態に係る撮像装置の機能構成を示す模式図である。 第１の実施形態に係る撮像装置によって、デイモードで撮像された画像および画素グループ毎の露光時間、輝度の平均値および基準値を示す図である。 第１の実施形態に係る撮像装置のデイモードにおける動作を示すフローチャートである。 第１の実施形態に係る撮像装置によって、ナイトモードで撮像された画像および画素グループ毎の露光時間、輝度の平均値を示す図である。 第１の実施形態に係る撮像装置によって、ナイトモードに切り替えた後に時間が経過してから撮像された画像および画素グループの露光時間、輝度の平均値を示す図である。 第１の実施形態に係る撮像装置のナイトモードにおける動作を示すフローチャートである。 第２の実施形態に係る撮像装置の機能構成を示す模式図である。 第２の実施形態に係る撮像装置のデイモードにおける動作を示すフローチャートである。 第２の実施形態に係る撮像装置によって、ナイトモードに切り替わった直後に撮像された画像および画素グループ毎の露光時間、輝度の平均値および基準値を示す図である。 第２の実施形態に係る撮像装置によって、ナイトモードに切り替わった後に時間が経過してから撮像された画像および画素グループ毎の露光時間、輝度の平均値を示す図である。 第２の実施形態に係る撮像装置のナイトモードにおける動作を示すフローチャートである。

＜実施形態１＞
以下に、本発明の第１の実施形態について詳細に説明する。なお、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成してもよい。

（装置構成）
図１は、第１の実施形態に係る撮像装置１００の構成を例示的に説明するブロック図である。図１に示す撮像装置１００は、撮像光学系１０１、赤外カットフィルタ１０２、撮像素子１０３、Ａ／Ｄ変換部１０４、画像処理部１０５、エンコーダ部１０６、ネットワークＩ／Ｆ１０７から構成されている。また、撮像装置１００は、ＣＰＵ１０８、ＲＯＭ１０９、ＲＡＭ１１０、フィルタ駆動部１１１、撮像系駆動部１１２、通信制御部１１３を具備する。

撮像光学系１０１はズームレンズ、フォーカスレンズ、ブレ補正レンズ、絞りやシャッターなどから構成され、被写体像を結像させる光学部材群である。

赤外カットフィルタ１０２は、撮像光学系１０１と撮像素子１０３との間の光路上に設けられており、後述するフィルタ駆動部１１１が駆動することで、赤外カットフィルタ１０２は光路上に対して挿抜可能になっている。赤外カットフィルタ１０２は、撮像素子１０３に入射する光のうち、可視光（例えば、３８０～７８０ナノメートルの波長）の透過率が赤外光（例えば、７８０ナノメートル以長の波長）の透過率よりも大きくフィルタである。すなわち、赤外カットフィルタ１０２は撮像素子１０３に入射する光のうち赤外光の光量を減衰させる。なお、赤外カットフィルタ１０２は撮像光学系１０１に含まれていてもよいし、撮像光学系１０１よりも光の入射側に設けられてもよい。

撮像素子１０３は、撮像光学系１０１により結像した被写体像を電気信号へと光電変換する。撮像素子１０３はＣＣＤやＣＭＯＳなどの光電変換素子からなる画素がマトリクス状に配列されたＩＣチップである。撮像素子１０３は、主に可視光（波長３８０～７８０ナノメートル）に高い感度を有しており、画素毎に赤（Ｒ）、緑（Ｇ）、青（Ｂ）のいずれかに高い感度を有するが、赤外光にもある程度の感度を有している。そのため、太陽光が存在する時間帯、および赤外光照明によって照らされている場所などの赤外光で明るい被写体を鮮明に撮像することができる。なお、撮像素子１０３は、後述する露出制御部２０２によって画素毎あるいは画素グループ毎に任意の露光時間を設定可能である。

Ａ／Ｄ変換部１０４は、撮像素子１０３にて検知した被写体の光量をデジタル信号値に変換する。

画像処理部１０５は、撮像素子１０３から出力されたデジタル信号の画像データに対して、画像処理を行う画像処理手段である。

エンコーダ部１０６は、画像処理部１０５にて処理された画像データをＭоｔｉоｎ ＪｐｅｇやＨ２６４、Ｈ２６５などのファイルフォーマットに変換処理を行う変換手段である。

ネットワークＩ／Ｆ１０７は、不図示の外部装置とのネットワーク１１４を介した通信に利用されるインターフェースであって、通信制御部１１３によって制御される。

ＣＰＵ１０８は、撮像装置１００の動作を統括的に制御する制御部である。ＣＰＵ１０８は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０９や、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１１０に格納された命令を読み込み、その結果に従って処理を実行する。

フィルタ駆動部１１１は、ガルバノメータやステッピングモーターなどであり、ＣＰＵ１０８の指示に従って、赤外カットフィルタ１０２が挿入された状態と抜去された状態とを切り替えるように駆動する。なお、赤外カットフィルタ１０２が挿入された状態で撮像する撮像モードをデイモード（第１のモード）と呼び、赤外カットフィルタ１０２が抜去された状態で撮像する撮像モードをナイトモード（第２のモード）と呼ぶ。

撮像系駆動部１１２は、ＣＰＵ１０８の指示によるフォーカス制御、シャッター制御、絞り調整などを、撮像光学系１０１に対し駆動して実行する。

通信制御部１１３は、コンピュータなどの不図示の外部装置とのネットワーク１１４を介した通信によって、撮像装置１００の各部に係る制御をＣＰＵ１０８に伝達するため制御を行う。従って、外部装置からの命令がＣＰＵ１０８へと伝達されることによって撮像装置１００の各部に係る制御が行われてもよいし、ＲＯＭ１０９やＲＡＭ１１０に格納された命令を読み込むことによって撮像装置１００の各部に係る制御が行われてもよい。

（機能構成）
図２は第１の実施形態に係る撮像装置１００の機能・構成を例示的に説明するブロック図である。図２に図示する各部のうち、露出制御部２０２、決定部２０３およびフィルタ制御部２０４はＣＰＵ１０８がＲＯＭ１０９やＲＡＭ１１０に格納された命令を読み込み、実行することで成し得る機能・構成である。従って、これらの各部はＣＰＵ１０８と同義であり、撮像装置１００のＣＰＵ１０８は、露出制御部２０２、決定部２０３、フィルタ制御部２０４を有する。

撮像部２０１は、撮像素子１０３の撮像面における１以上の画素を１つの画素グループとして、画素グループ毎に決定された露光時間で、撮像光学系１０１によって集光される光束を光電変換して撮像する。また、撮像部２０１は画素グループ毎に決定されたアナログゲインで、光電変換された画素グループ毎のアナログ信号値を増幅する。

Ａ／Ｄ変換部１０４はアナログ信号値をデジタル信号値に変換することで画像データ生成する。

Ａ／Ｄ変換部１０４から出力された画像データの各画素値は、各画素が受光した光量情報を輝度情報として示している。露出制御部２０２はその輝度情報に基づき、撮像素子１０３の露光時間とアナログゲインとを画素グループ毎に決定する。より具体的には、各画素グループの輝度情報（例えば輝度の平均値）に基づき決定する。

決定部２０３は、露出制御部２０２によって決定された各画素グループの露光時間に基づき、デイモードとナイトモードとのいずれか一方に撮像モードを決定する（詳細は後述する）。

決定部２０３の決定した撮像モードに応じて、フィルタ制御部２０４はフィルタ駆動部１１１を駆動させ、赤外カットフィルタ１０２の挿抜を制御する。より具体的には、決定部２０３がデイモードに決定した場合には、赤外カットフィルタ１０２を光路上に挿入するように制御し、ナイトモードに決定した場合には、赤外カットフィルタ１０２を光路上から抜去するように制御する。

（動作説明）
次に、図３、図４および図５を参照して、本実施形態に係る赤外カットフィルタ１０２の抜去制御について説明する（挿入制御については後述する）。

図３（ａ）は、撮像部２０１がデイモードで撮像した画像を示している。本実施形態では、撮像素子１０３の撮像における１以上の画素を１つの画素グループとして、１２個の画素グループにグループ化している。ここでは、撮像素子１０３の撮像面は１９２０×１０８０の画素で構成されているものとし、４８０×３６０の画素を１つの画素グループとしてグループ化している。破線は各画素グループで撮像された画像領域の境界を示している。以降、各画素グループに対応する画像領域をＡ１～Ａ３、Ｂ１～Ｂ３、Ｃ１～Ｃ３、Ｄ１～Ｄ３、として記載する。

図３（ｂ）は、各画素グループにおける露光時間と輝度の平均値とを表している（輝度の諧調が８ｂｉｔの例）。前述の通り、各画素グループの露光時間は露出制御部２０２によって各画素グループの輝度情報（例えば輝度の平均値）に基づき、制御されている。従って、図３（ｂ）における各画素グループの輝度差は、露光時間が制御される前の各画素グループの輝度差（不図示）と比べて小さくなる。

一方で、露出制御部２０２によってＡ３の露光時間が他の領域（例えばＢ３）の領域と比較して長くなっている。ここで、Ｂ３からＡ３へと高速で移動する被写体が存在する場合を考える。この場合、Ｂ３からＡ３で露光時間が長くなるため、Ｂ３で生じていなかった被写体ブレがＡ３で生じてしまう可能性がある。これは、移動する被写体を撮像する場合に、視認性が要求されるような機能（例えば、被写体の追尾機能）が阻害される要因となりうる。

図３（ｃ）は、露光時間の基準値を示している。この基準値はあらかじめ設定されていてもよいし、ユーザーが任意に設定できるようにしてもよい。これにより、想定され得る様々な移動体の速度に適した基準値を設定することが可能になる。また、図３（ｃ）に示した露光時間の基準値は、撮像素子１０３が設定可能な露光時間の最大値としてもよい。この手法によれば、可能な限り被写体をカラー撮像したい場合に有効である。

図４は本実施形態に係る撮像装置１００の動作を示すフローチャートである。

ステップＳ４０１において、決定部２０３は露出制御部２０２が決定した各画素グループの露光時間と基準値とを比較する。比較の結果、１以上の画素グループが基準値より上回っている場合は撮像モードをナイトモードに決定し、ステップＳ４０２へと進む。基準値より上回っていない場合はＳ４０１に戻る。図３（ｂ）および図３（ｃ）においては、Ａ３の露光時間（１／３０）が閾値（１／４０）を上回っているため、ステップＳ４０２へと進む。

ステップＳ４０２では、決定部２０３が撮像モードをナイトモードに決定したに応じて、フィルタ制御部２０４がフィルタ駆動部１１１に赤外カットフィルタ１０２を光路上から抜去させ、ナイトモードへと切り替える。

図５（ａ）は、赤外カットフィルタ１０２が抜去された後、撮像部２０１が撮像した画像を示している（輝度の諧調が８ｂｉｔの例）。図５（ｂ）は、図５（ａ）の画像における各画素グループの露光時間と各画素グループによって撮像された画像の輝度の平均値とを表している。赤外カットフィルタ１０２は光路上から抜去されているため、デイモードの場合と比べて、撮像素子１０３へ入射する光量が増加している。従って、露出制御部２０２は各画素グループの露光時間は図３（ｂ）の露光時間と比べて短くなるように制御される。これにより、Ｂ３からＡ３に高速で移動する被写体が存在する場合でも、Ａ３の露光時間が短くなったことで、被写体ブレが生じにくくなる。即ち、本実施形態によれば、被写体ブレが生じるような長秒の露光時間になる前にデイモードからナイトモードへと切り替わるので、被写体の視認性の悪化を低減できる。

次に、図６および図７を参照して赤外カットフィルタ１０２の挿入制御について説明する。図６（ａ）は赤外カットフィルタ１０２を抜去した後に時間が経過してから撮像された画像である。また図６（ｂ）および図６（ｃ）はその画像における各画素グループの露光時間、輝度の平均値および露光時間の基準値を示している。

図７は本実施形態における赤外カットフィルタ１０２の挿入制御を示すフローチャートである。

ステップＳ７０１において、決定部２０３は画素グループ毎の露光時間と基準値とを比較する。比較の結果、１以上の画素グループが基準値より下回っている場合は撮像モードをデイモードに決定し、ステップＳ７０２へと進む。基準値より下回っていない場合はＳ７０１に戻る。図６（ｂ）および図６（ｃ）においては、Ａ３の露光時間（１／６００）が基準値（１／５５０）を上回っているため、ステップＳ７０２へと進む。

ステップＳ７０２では、決定部２０３が撮像モードをデイモードに決定したに応じて、フィルタ制御部２０４がフィルタ駆動部１１１に赤外カットフィルタ１０２を光路上に挿入させ、デイモードへと切り替える。

＜実施形態２＞
本実施形態では、赤外カットフィルタ１０２の挿入制御について説明する。本実施形態に係る撮像装置１００は、まず、赤外カットフィルタ１０２を抜去することを決定部２０３が決定した場合に、決定部２０３が比較した画素グループの位置情報を記憶する。次に、記憶した位置情報と各画素グループの露光時間とに基づいて、赤外カットフィルタ１０２を挿入するか否かを決定部２０３が決定することを特徴とする。なお、本実施形態に係る撮像装置１００の装置構成については、前述した実施形態１と同一なので説明を省略する。

（機能構成）
図８は本実施形態に係る撮像装置の機能・構成を例示的に説明するブロック図である。実施形態１の構成に加え、本実施形態に係る撮像装置には記憶部２０５を備えている。記憶部２０５以外の各部は前述した実施形態１と同じであるため説明を省略する。

記憶部２０５は、決定部２０３が赤外カットフィルタ１０２を抜去することを決定した場合に、前記画素グループの位置情報をＲＡＭ１１０などの記憶媒体に記憶する。

（動作説明）
図９は本実施形態における赤外カットフィルタ１０２の抜去制御を示すフローチャートである。なお、ステップＳ９０１の動作はステップＳ４０１との動作と同じであるため、説明を省略する。

決定部２０３が撮像モードをナイトモードに決定した場合、Ｓ９０３において、記憶部２０５は決定部２０３が撮像モードをナイトモードに決定した際に参照した画素グループの位置情報を記憶する。ここでは、実施形態１と同様にＡ３の露光時間を参照してナイトモードに決定したとし、記憶部２０３によって画素グループの位置情報（ここではＡ３）がＲＡＭ１１０などの記憶媒体に一時的に記憶される。

次にステップＳ９０４において実施形態１と同様に赤外カットフィルタ１０２を抜去し、ナイトモードへと切り替える。なお、Ｓ９０３とＳ９０４の順序を逆にしてもよい。

以下、図１０、図１１および図１２を参照して本実施形態における赤外カットフィルタ１０２の挿入制御について説明する。

図１０（ａ）はナイトモードに切り替わった直後に撮像された画像であり、図１０（ｂ）は該画像における各画素グループの露光時間と輝度の平均値とである（輝度の諧調は８ｂｉｔ）。図１０（ｃ）は露光時間の基準値である。

ここでは、撮像装置内あるいは撮像装置とは別に設けられた不図示の赤外光照明によってＣ２が照射されている。

また、図１１（ａ）はナイトモードに切り替わってから時間が経過し、画像全体が図１０（ａ）と比べて明るくなってから撮像された画像あり、図１１（ｂ）は該画像における各画素グループの露光時間と輝度の平均値とである（輝度の諧調は８ｂｉｔ）。図１１（ｃ）は露光時間の基準値である。

露光時間の基準値は、赤外カットフィルタ１０２の抜去制御における露光時間の基準値と比べて短く設定される。しかし、基準値を短く設定しすぎるとナイトモードの撮像時間が長くなり、被写体の色情報が失われるため、ハンチングしない程度に長い基準値が設定される。また、単一の値ではなくナイトモードに切り替わった直後の露光時間からの差分などを用いてもよい。図１０（ｃ）および図１１（ｃ）では単一の値として、露光時間の基準値は１／６００に設定されている。

図１２はナイトモードにおける、赤外カットフィルタ１０２の挿入制御を示すフローチャートである。まずステップＳ１２０１では、記憶部２０５に記憶された画素グループの位置情報を読み出す。すなわちＡ３がここでは読み出される。

ステップＳ１２０２では、決定部２０３が読み出された位置情報に対応する画素グループの露光時間を参照し、基準値と比較する。比較した結果、基準値を下回った場合は撮像モードをデイモードに決定し、ステップＳ１２０３へ進む。基準値を下回っていない場合はＳ１２０２へ戻る。ここでは、Ａ３における露光時間と基準値とを比較する。ナイトモードに切り替わった直後である図１０（ｂ）および図１０（ｃ）の場合、Ａ３における露光時間は１／６０であり、基準値である１／５５０を下回っていないため（基準値よりも露光時間が長いため）、ステップＳ１２０３へ戻る。図１１（ｂ）および図１１（ｃ）の場合、Ａ３における露光時間は１／６００であり、基準値である１／５５０下回っているため（基準値よりも露光時間が短いため）、撮像モードをデイモードに決定し、Ｓ１２０４へ進む。

ここで、画素グループの位置情報を記憶せずに、ナイトモードからデイモードへと切り替える場合、前述したようにナイトモードでは、デイモードからナイトモードに切り替える際に参照した領域とは異なる領域に不図示の赤外光照明が照射されている場合がある。この場合、以下のような問題が生じる。

図１０（ｂ）において、Ａ３における画素グループの露光時間は基準値を下回っていない（基準値よりも露光時間が長い）。一方で、Ｃ２における画素グループの露光時間は基準値を下回っている（基準値よりも露光時間が短い）。この場合、実施形態１では、図７のステップＳ７０１でＹｅｓとなるため、ナイトモードに切り替わった直後であるにも関わらず、撮像モードがデイモードに切り替わってしまう。これにより、デイモードからナイトモードに撮影モードが切り替わった直後に再度デイモードに撮影モードが切り替わるというハンチングが起こる可能性が高くなる。

一方、本実施形態では、ナイトモード切り替え時に参照した画素グループの位置情報を記憶するようにしたので、ハンチング発生の可能性を抑えることが可能となる。

Ｓ１２０４は実施形態１のＳ４０２と同じであるため、説明は省略する。

Ｓ１２０５では、ＲＡＭ１１０などの記憶媒体に記憶された画素グループの位置情報を消去する。

（その他の実施形態）
本発明は、上述の実施形態１および実施形態２の１以上の機能を実現するプログラムを読み出し実行する処理によって実現可能である。このプログラムは、ネットワークまたは記憶媒体を介してシステム又は装置に供給され、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサによって読み出され、実行される。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００ 撮像装置
１０１ 撮像光学系
１０２ 赤外カットフィルタ
１０３ 撮像素子
１０４ Ａ／Ｄ変換部
１０５ 画像処理部
１０６ エンコーダ部
１０７ ネットワークＩ／Ｆ
１０８ ＣＰＵ
１０９ ＲＯＭ
１１０ ＲＡＭ
１１１ フィルタ駆動部
１１２ 撮像系駆動部
１１３ 通信制御部
２０１ 撮像部
２０２ 露出制御部
２０３ 決定部
２０４ フィルタ制御部

Claims (16)

1. 赤外光を減衰させるフィルタが撮像光学系の光路上に挿入された第１のモードと、前記フィルタが前記撮像光学系の光路上から抜去された第２のモードとに撮像モードを切り替えて前記撮像光学系による像を撮像する撮像装置であって、
   １以上の画素を１つの画素グループとして、該画素グループ毎に決定された露光時間で前記撮像光学系による像を撮像する撮像部と、
   前記画素グループ毎の露光時間を決定することにより露出を制御する露出制御部と、
   前記露出制御部が決定した露光時間に基づいて、前記第１のモードと前記第２のモードとのいずれか一方に撮像モードを決定する決定部と、
   前記決定部により決定した撮像モードに応じて、前記フィルタの挿抜を制御するフィルタ制御部と、
   を有することを特徴とする撮像装置。
2. 前記フィルタ制御部は、前記決定部が前記第１のモードに決定した場合には、前記フィルタを光路上に挿入するように制御し、前記決定部が第２のモードに決定した場合には、前記フィルタを光路上に抜去するように制御する請求項１に記載の撮像装置。
3. 前記決定部は、前記露光時間が第１の基準値を下回った場合には、前記撮像モードを前記第１のモードに決定し、前記露光時間が第２の基準値を上回った場合には、前記撮像モードを前記第２のモードに決定する請求項１に記載の撮像装置。
4. 前記第１の基準値は前記第２の基準値より小さいことを特徴とする請求項３に記載の撮像装置。
5. 前記第１の基準値と前記第２の基準値とはユーザーが設定可能に構成した請求項３に記載の撮像装置。
6. 前記決定部が前記撮像モードを第２のモードに決定した場合には、前記決定部の決定に関する前記画素グループの位置情報を記憶する記憶部をさらに有する請求項１に記載の撮像装置。
7. 前記決定部は、前記記憶部が記憶した画素グループの位置情報と前記露光時間とに基づき、前記第１のモードと前記第２のモードとを切り替えるように決定する請求項６に記載の撮像装置。
8. 可視光の透過率が赤外光の透過率よりも大きいフィルタが撮像光学系の光路上に挿入された第１のモードと、前記フィルタが前記撮像光学系の光路上から抜去された第２のモードとに撮像モードを切り替えて前記撮像光学系による像を撮像する撮像装置の制御方法であって、
   前記撮像装置の撮像部の１以上の画素を１つの画素グループとして、該画素グループ毎の露光時間を決定する露出制御ステップと、
   前記画素グループ毎に決定された露光時間で前記撮像光学系による像を撮像する撮像ステップと、
   前記露出制御ステップで決定した露光時間に基づいて、前記第１のモードと前記第２のモードとのいずれか一方に撮像モードを決定する決定ステップと、
   前記決定ステップにより決定した撮像モードに応じて、前記フィルタの挿抜を制御するフィルタ制御ステップと、
   を有する撮像装置の制御方法。
9. 前記フィルタ制御ステップでは、前記決定ステップで第１のモードに決定した場合には、前記フィルタを光路上に挿入するように制御し、前記決定部が第２のモードに決定した場合には、前記赤外フィルタを光路上に抜去するように制御する請求項８に記載の撮像装置の制御方法。
10. 前記決定ステップでは、前記露光時間が第１の基準値を下回った場合には、前記第１のモードに決定し、前記露光時間が第２の基準値を上回った場合には、前記第２のモードに決定する請求項８に記載の撮像装置の制御方法。
11. 前記第１の基準値は前記第２の基準値より小さいことを特徴とする請求項１０に記載の撮像装置の制御方法。
12. 前記第１の基準値と前記第２の基準値とはユーザーが設定可能に構成した請求項１０に記載の撮像装置の制御方法。
13. 前記決定ステップで前記フィルタを抜去することを決定した場合、前記決定ステップにおける決定に関する前記画素グループの位置情報を記憶する記憶ステップをさらに有する請求項８に記載の撮像装置の制御方法。
14. 前記決定ステップでは、前記記憶ステップで記憶した前記画素グループの位置情報と前記露光時間とに基づき、前記第１のモードと前記第２のモードとを切り替えるように決定する請求項１３に記載の撮像装置の制御方法。
15. 請求項８乃至１４のいずれか１項に記載の撮像装置の制御方法をコンピュータに実行させるためのプログラム。
16. 請求項８乃至１４のいずれか１項に記載の撮像装置の制御方法をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。

Images