JPWO2019181515A1 - 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム - Google Patents

撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム Download PDF

Info

Publication number
JPWO2019181515A1
JPWO2019181515A1 JP2020508173A JP2020508173A JPWO2019181515A1 JP WO2019181515 A1 JPWO2019181515 A1 JP WO2019181515A1 JP 2020508173 A JP2020508173 A JP 2020508173A JP 2020508173 A JP2020508173 A JP 2020508173A JP WO2019181515 A1 JPWO2019181515 A1 JP WO2019181515A1
Authority
JP
Japan
Prior art keywords
brightness
imaging
image pickup
image
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020508173A
Other languages
English (en)
Other versions
JP6785395B2 (ja
Inventor
仁史 桜武
仁史 桜武
小林 誠
誠 小林
長谷川 亮
亮 長谷川
智紀 増田
智紀 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Application granted granted Critical
Publication of JP6785395B2 publication Critical patent/JP6785395B2/ja
Publication of JPWO2019181515A1 publication Critical patent/JPWO2019181515A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B11/00Filters or other obturators specially adapted for photographic purposes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/28Circuitry to measure or to take account of the object contrast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/75Circuitry for compensating brightness variation in the scene by influencing optical camera components

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Blocking Light For Cameras (AREA)

Abstract

合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供する。システム制御部(11)は、被写体を撮像して得られる第一の撮像画像信号に設定されている合焦対象エリアの分割エリアAF1〜AF3毎の明るさを求め、この明るさに基づいて決められる明るさの設定値に基づいて、撮像素子(5)の撮像条件を、明るさが最低となる分割エリアである最低分割エリアの明るさが設定値となる状態に制御し、可変NDフィルタ(3)における最低分割エリアを除く他の分割エリアに対応するエリアの光透過率を制御して、他の分割エリアの明るさを低下させた後、被写体を撮像して得られる撮像画像信号の合焦対象エリアに基づいて、フォーカスレンズの合焦制御を行う。

Description

本発明は、撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムに関する。
特許文献1と特許文献2には、撮像素子に入射する光量を調節することができる透過率可変の光学素子を備える撮像装置が記載されている。特許文献1に記載の撮像装置は、被写体光の光量を光学素子によって部分的に低下させて、撮像素子の高輝度側ダイナミックレンジ外となる白飛び領域について受光量を補正し、ダイナミックレンジを広げている。
特許文献2に記載の撮像装置は、被写界中に輝度が高い箇所がある場合に、光学素子のその箇所に対応する透過率を下げることで飽和を防ぎ、正確な測光を可能としている。
日本国特開2013−12997号公報 日本国特開平7−120309号公報
撮像装置においてAF(Auto Focus、自動合焦制御)を行う場合には、被写体を撮像して得られる撮像画像データに設定される合焦対象エリア内の画像データが用いられる。この合焦対象エリア内に、明るさの異なる被写体が混在している場合に、例えば、合焦対象エリア内の被写体の明るさの平均値に合わせてAF用の撮像時の露出を決めてしまうと、逆光時等、焦点を合わせたい人物が非常に暗くなっている状況では、人物に焦点を合わせられなくなる可能性がある。
特許文献1,2には、測光を行う際に、明るすぎる被写体領域の飽和を防ぐことしか考慮しておらず、AFの精度を向上させる点については考慮されていない。
本発明は、上記事情に鑑みてなされたものであり、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することを目的とする。
本発明の撮像制御装置は、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御部と、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御部と、上記撮像条件制御部によって上記撮像条件が制御され、且つ、上記透過率制御部によって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御部と、を備えるものである。
本発明の撮像装置は、上記撮像制御装置と、上記撮像素子と、を備えるものである。
本発明の撮像制御方法は、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備えるものである。
本発明の撮像制御プログラムは、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるためのものである。
本発明によれば、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
本発明の撮像装置の一実施形態であるデジタルカメラ100の概略構成を示す図である。 可変NDフィルタ3の分割例を示す模式図である。 撮像画像信号50の分割例を示す模式図である。 図1に示すシステム制御部11の機能ブロック図である。 ブロック50Aの分割例を示す図である。 図5に示すブロック50Aに対応する可変NDフィルタ3のブロック30を示す図である。 合焦対象エリアにおける図5の分割エリアAF1〜AF3の各々の明るさの一例を示す図である。 図7の状態から撮像条件制御部11Bによって撮像条件が制御された状態の分割エリアAF1〜AF3の各々の明るさを示す図である。 図8の状態から透過率制御部11Cによって光透過率が制御された状態の分割エリアAF1〜AF3の各々の明るさを示す図である。 図1に示すデジタルカメラ100の撮像モード時の動作を説明するためのフローチャートである。 透過率制御部11Cによる制御の第一の変形例を説明するための図である。 本発明の撮像装置の一実施形態であるスマートフォン200の外観を示すものである。 図12に示すスマートフォン200の構成を示すブロック図である。
以下、本発明の実施形態について図面を参照して説明する。
図1は、本発明の撮像装置の一実施形態であるデジタルカメラ100の概略構成を示す図である。
図1に示すデジタルカメラ100は、撮像レンズ1、絞り2、レンズ制御部4、レンズ駆動部8、及び絞り駆動部9を有するレンズ装置40Aと、本体部40Bと、を備える。
レンズ装置40Aは、本体部40Bに着脱可能なものであってもよいし、本体部40Bと一体化されたものであってもよい。レンズ装置40Aが本体部40Bに着脱可能な構成では、本体部40Bが撮像装置を構成する。
撮像レンズ1は、光軸方向に移動可能なフォーカスレンズ又はズームレンズ等を含む。フォーカスレンズは、撮像レンズ1の焦点位置を調節するためのレンズであり、単一のレンズ又は複数のレンズで構成される。フォーカスレンズが撮像レンズ1の光軸方向に移動することで焦点位置の調節が行われる。
なお、フォーカスレンズとしては、レンズの曲面を可変制御して焦点位置を変えることのできる液体レンズを用いてもよい。
レンズ装置40Aのレンズ制御部4は、本体部40Bのシステム制御部11と有線又は無線によって通信可能に構成される。
レンズ制御部4は、システム制御部11からの指令にしたがい、レンズ駆動部8を介して撮像レンズ1に含まれるフォーカスレンズを制御してフォーカスレンズの主点の位置(焦点位置)を変更したり、レンズ駆動部8を介して撮像レンズ1に含まれるズームレンズを制御してズームレンズの位置を変更したり、絞り駆動部9を介して絞り2の絞り値を制御したりする。
本体部40Bは、撮像レンズ1及び絞り2を含む撮像光学系を通して被写体を撮像するCCD(Charged Coupled Device)型イメージセンサ又はMOS(Metal Oxide Semiconductor)型イメージセンサ等の撮像素子5と、撮像素子5を駆動する撮像素子駆動部5Aと、撮像素子5と撮像光学系の間に配置された可変ND(Neutral Density)フィルタ3と、可変NDフィルタ3を駆動するND駆動部3Aと、全体を統括制御するシステム制御部11と、操作部14と、を備える。
撮像素子5は、複数の画素が二次元状に配置された撮像面を有し、撮像光学系によってこの撮像面に結像される被写体像をこの複数の画素によって画素信号に変換して出力する。撮像素子5の各画素から出力される画素信号の集合を以下では撮像画像信号という。
撮像素子駆動部5Aは、システム制御部11からの指令に基づいて駆動信号を生成してこの駆動信号を撮像素子5に供給することで、撮像素子5を駆動する。
可変NDフィルタ3は、撮像素子5に入射する光量を制御するための光学素子であり、部分的に光透過率を変えることができるものである。可変NDフィルタ3は、撮像素子5の撮像面の前方(撮像面よりも被写体側)に配置されている。
可変NDフィルタ3は、具体的には、印加電圧によって光透過率を変えられる特性素子(例えば液晶素子又はエレクトロクロミック素子等)が二次元状に配置された構成である。
可変NDフィルタ3は、撮像素子5と一体的に形成されたものであってもよい。例えば、撮像素子5は、撮像素子チップと、これを収容するパッケージと、このパッケージを封止する保護カバーとを備える。そして、この保護カバーに可変NDフィルタ3が積層されていてもよい。
ND駆動部3Aは、システム制御部11からの指示に応じて、可変NDフィルタ3の各特性素子に印加する電圧を制御することによって可変NDフィルタ3の透過率を制御する。
システム制御部11は、デジタルカメラ100全体を統括制御するものであり、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う各種のプロセッサである。
各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるCPU(Central Prosessing Unit)、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、又はASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
システム制御部11は、各種のプロセッサのうちの1つで構成されてもよいし、同種又は異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせ又はCPUとFPGAの組み合わせ)で構成されてもよい。
本体部40Bは、更に、RAM(Random Accsess Memory)及びROM(Read only memory)を含むメモリ16と、メモリ16へのデータ記憶及びメモリ16からのデータ読み出しの制御を行うメモリ制御部15と、撮像素子5から出力される撮像画像信号に対しデジタル信号処理を行って、例えばJPEG(Joint Photographic Experts Group)形式等の各種フォーマットにしたがった撮像画像データを生成するデジタル信号処理部17と、記憶媒体21へのデータ記憶及び記憶媒体21からのデータ読み出しの制御を行う外部メモリ制御部20と、画像を表示するための有機EL(electroluminescence)パネル又は液晶パネル等を含む表示部22と、を備える。
メモリ16に含まれるROMには、撮像制御プログラムを含むプログラムが記憶されている。
メモリ制御部15、デジタル信号処理部17、外部メモリ制御部20、及び表示部22は、制御バス24及びデータバス25によって相互に接続され、システム制御部11からの指令によって制御される。
デジタル信号処理部17は、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う上記に例示した各種のプロセッサである。デジタル信号処理部17は画像処理部として機能する。
可変NDフィルタ3の光透過エリアは、図2に示すように、例えば複数(図2の例では25個)のブロック30に分割されたものとして取り扱われる。撮像素子5から出力される撮像画像信号50は、図3に示すように、図2の各ブロック30に対応した複数(図2の例では25個)のブロック50Aの集合として取り扱われる。各ブロック50Aは、これに対応するブロック30を透過した被写体光から光電変換して得られたものである。
デジタルカメラ100はAF機能を有しており、撮像素子5から出力される撮像画像信号に含まれるどの被写体領域に焦点を合わせるべきかを事前に設定することができる。撮像画像信号に設定される焦点を合わせるべきエリアを合焦対象エリアという。
図4は、図1に示すシステム制御部11の機能ブロック図である。
システム制御部11は、メモリ16のROMに記憶された撮像制御プログラムを含むプログラムを実行することにより、明るさ測定部11A、撮像条件制御部11B、透過率制御部11C、合焦制御部11D、及び測光処理部11Eとして機能する。
測光処理部11Eは、撮像素子5から出力される撮像画像信号に基づいて被写体の明るさを測定し、測定した明るさに基づいて適正露出を決定し、この適正露出に基づいて、記憶媒体21への記憶用の撮像の撮像条件(撮像素子5の露光時間、絞り2の絞り値、及び撮像感度等)を決定する。
明るさ測定部11A、撮像条件制御部11B、透過率制御部11C、及び合焦制御部11Dは、AF時に動作する機能ブロックである。
明るさ測定部11Aは、撮像素子5から出力される撮像画像信号のうちの合焦対象エリアを複数の分割エリアに分割し、この分割エリア毎の明るさを求める。
以下では、合焦対象エリアとして図3に示すブロック50Aのうちの1つが設定されているものとし、例えば、明るさ測定部11Aが、このブロック50Aを、図5に示すように、分割エリアAF1、分割エリアAF2、及び分割エリアAF3に3分割するものとして説明する。
図6は、図5に示すブロック50Aに対応する可変NDフィルタ3のブロック30を示す図である。図6に示すように、合焦対象エリアに対応するブロック30は、分割エリアAF1に対応するエリアaf1と、分割エリアAF2に対応するエリアaf2と、分割エリアAF3に対応するエリアaf3とに分けられる。図5の各分割エリアAF1〜AF3は、これに対応するエリアaf1〜af3を透過した被写体光から光電変換して得られたものとなる。
撮像条件制御部11Bは、明るさ測定部11Aにより求められた分割エリアAF1〜AF3毎の明るさに基づいて決められる明るさの設定値に基づいて、AF用の撮像時の撮像素子5の撮像条件を制御する。具体的には、撮像条件制御部11Bは、分割エリアAF1〜AF3のうちの明るさが最低となる分割エリアである最低分割エリアの明るさが、上記の設定値となる状態に、撮像条件を制御する。
図7は、合焦対象エリアにおける図5の分割エリアAF1〜AF3の各々の明るさの一例を示す図である。図7に示す例では、分割エリアAF1の明るさが最低であり、分割エリアAF1が最低分割エリアとなる。
上記の明るさの設定値は、例えば、これら分割エリアAF1〜AF3の各々の明るさの平均値として求められる。この設定値は、分割エリアAF1〜AF3の各々の明るさの代表値であればよく、例えば最頻値又は中央値等が用いられてもよい。
図7に示す例では、分割エリアAF2の明るさは上記の設定値となっており、分割エリアAF1の明るさは上記の設定値より小さくなっており、分割エリアAF3の明るさは上記の設定値より大きくなっている。
明るさ測定部11Aによる明るさの測定結果が図7に示すものであった場合には、撮像条件制御部11Bは、最低分割エリアである分割エリアAF1の明るさが上記の設定値となるような露出を決定し、この露出を得るための撮像条件を設定する。
図8は、図7の状態から撮像条件制御部11Bによって撮像条件が設定された状態の分割エリアAF1〜AF3の各々の明るさを示す図である。図8の例では、撮像条件の設定によって、元々の分割エリアAF1の明るさと設定値の差に相当する補正量D1だけ、分割エリアAF1〜AF3の各々の明るさが上昇する。
透過率制御部11Cは、可変NDフィルタ3における、分割エリアAF1〜AF3のうちの上記の最低分割エリアを除く他の分割エリアに対応するエリアの光透過率を制御して、この他の分割エリアの明るさを低下させる。
図7及び図8の例では、分割エリアAF2と分割エリアAF3が、最低分割エリアを除く他の分割エリアとなる。透過率制御部11Cは、分割エリアAF2に対応するエリアaf2の光透過率と、分割エリアAF3に対応するエリアaf3の光透過率とを制御して、図9に示すように、これら分割エリアAF2と分割エリアAF3の各々の明るさが上記の設定値となる状態を得る。
以上の処理によって、分割エリアAF1〜AF3の各々の明るさが均一化された状態を得ることができる。
合焦制御部11Dは、このような状態にて撮像素子5により被写体を撮像して撮像素子5から得られる撮像画像信号の合焦対象エリアに基づいて、フォーカスレンズの合焦制御を行う。合焦制御は、コントラストAF方式又は位相差AF方式のどちらで行ってもよい。
図10は、図1に示すデジタルカメラ100の撮像モード時の動作を説明するためのフローチャートである。
なお、撮像モードを設定した初期の状態では、システム制御部11の透過率制御部11Cは、可変NDフィルタ3の全ての特性素子の透過率を100%に制御している。
撮像モードが設定されると、システム制御部11は、撮像素子5によりライブビュー画像を表示するための撮像を行わせる(ステップS1)。
この撮像によって撮像素子5から出力された撮像画像信号はデジタル信号処理部17によって処理されてライブビュー表示用の画像データが生成され、この画像データに基づいてライブビュー画像が表示部22に表示される(ステップS2)。
ステップS2の後、ステップS3において、操作部14に含まれるレリーズボタンの押下等によってAFとAE(AutoExposure)の実行指示がなされるまでは、ステップS1とステップS2の処理が繰り返される。
ステップS3においてAFとAEの実行指示がなされると(ステップS3:YES)、システム制御部11の測光処理部11Eは、撮像素子5から出力された撮像画像信号を取得し、この撮像画像信号に基づいて、被写体の明るさを測定する。そして、この明るさに基づいて適正露出を決定し、適正露出に基づいて記憶時の撮像条件を決定する(ステップS4)。ステップS4は測光処理ステップを構成する。
また、システム制御部11の明るさ測定部11Aは、撮像素子5から出力された撮像画像信号を取得し、この撮像画像信号の合焦対象エリアの各分割エリアAF1〜AF3の明るさを求める(ステップS5)。ステップS5は明るさ測定ステップを構成する。
システム制御部11の撮像条件制御部11Bは、ステップS5で求められた明るさに基づいて、上述した方法によりAF用の撮像時の撮像条件を設定する(ステップS6)。この処理により、合焦対象エリア内の最低分割エリア(例えば図5の分割エリアAF1)の明るさが設定値まで上昇される状態となる。ステップS6は撮像条件制御ステップを構成する。
次に、システム制御部11の透過率制御部11Cは、可変NDフィルタ3のうち、最低分割エリア以外の分割エリア(例えば図5の分割エリアAF2,AF3)に対応するエリア(例えば図6のエリアaf2,af3)の光透過率を制御して、最低分割エリア以外の分割エリアの明るさを上記の設定値まで低下させる(ステップS7)。ステップS7は透過率制御ステップを構成する。
次に、システム制御部11の合焦制御部11Dは、ステップS6にて設定された撮像条件及びステップS7にて制御された光透過率の状態にて、撮像素子5にAF用の撮像を行わせる(ステップS8)。
合焦制御部11Dは、ステップS8の撮像により撮像素子5から出力された撮像画像信号に基づいてフォーカスレンズの主点の位置を変更する合焦制御を行う(ステップS9)。ステップS9は合焦制御ステップを構成する。
その後、操作部14に含まれるレリーズボタンの押下によって撮像指示がなされると(ステップS10:YES)、システム制御部11は、可変NDフィルタ3の全ての特性素子の透過率を100%に戻し、撮像条件を、ステップS4にて決定された内容に設定して、撮像素子5により記憶用の撮像を行わせる(ステップS11)。ステップS10において撮像指示がなされなかった場合(ステップS10:NO)には、ステップS8に処理が戻る。
ステップS11の後、ステップS11の撮像により撮像素子5から出力された撮像画像信号がデジタル信号処理部17により処理されて撮像画像データが生成され、これが記憶媒体21に記憶される(ステップS12)。ステップS12の後は、ステップS1に処理が戻る(リターン)。
以上のように、デジタルカメラ100によれば、AF用の撮像を、合焦対象エリアの各分割エリアの明るさが等しい状態且つ適正に近い状態にて行うことができる。このため、逆光時等、合焦対象エリアに部分的に非常に暗い被写体が含まれている場合であっても、この暗い被写体を明るくした状態にてAF用の撮像を行うことができ、合焦制御を高精度に行うことができる。また、合焦対象エリアのもともと明るかった部分については、可変NDフィルタ3によって適正な明るさまで減光されるため、合焦制御を高精度に行うことができる。
なお、図10のステップS6において設定される撮像条件のうち、絞り2の絞り値については、ステップS4にて決定した撮像条件に含まれる絞り値と同じ値とすることが好ましい。絞り値が例えば小絞り側に変更される場合には、露光時間を長くしたり、撮像感度を上げたりする等して、最低分割エリアの明るさが上記の設定値となるよう撮像条件を決定すればよい。
このようにすることで、ステップS8のAF用の撮像と、ステップS11の記憶用の撮像との間において絞り2の駆動が不要となる。このため、記憶用の撮像を高速に行うことが可能となる。
または、図10のステップS6において設定される撮像条件のうち、絞り2の絞り値については、ステップS1のライブビュー画像の表示用の撮像時における撮像条件に含まれる絞り値と同じ値としてもよい。
このようにすることでも、フォーカスレンズの移動回数を減らすことができ、AF用の撮像を高速に行うことが可能となる。また、合焦制御部11Dによる合焦制御が位相差AF方式にて行われる場合には、ライブビュー画像の表示用の撮像時において絞り値が例えば開放側にある場合には、合焦精度を高くすることができる。
なお、合焦制御部11Dによる合焦制御がコントラストAF方式にて行われる場合であっても、フォーカスレンズを動かす距離は、絞りが開放に近いほど少なくなるため、合焦評価値の計算誤差を減らして合焦精度を高めることができる。
図10では説明が省略されているが、ステップS8にてAF用の撮像が行われると、この撮像により撮像素子5から出力された撮像画像信号がデジタル信号処理部17により処理されて、表示用画像データが生成される。そして、この表示用画像データは、表示部22に出力されて、ライブビュー画像として表示部22に表示される。
このように、ステップS8のAF用の撮像で得た撮像画像信号からライブビュー画像を表示させる場合には、ステップS6とステップS7において、この撮像画像信号の明るさが実際の被写体の明るさに対して補正されていることから、ライブビュー画像が実際の被写体の見た目と異なるものとなっている。
これに対応するため、まず、デジタル信号処理部17は、ステップS8のAF用の撮像で得られた撮像画像信号の全体の明るさを、ステップS5にて求められた最低分割エリアの明るさと上記の設定値との差(図8の補正量D1)だけ減少させる。更に、デジタル信号処理部17は、ステップS8のAF用の撮像で得られた撮像画像信号の合焦対象エリアにおける最低分割エリア以外の各分割エリアの明るさを、ステップS5にて求められたこの各分割エリアの明るさまで増加させる。この処理が画像処理ステップを構成する。
このような処理を行って得た撮像画像信号を処理して表示用画像データを生成することで、表示用画像データに基づくライブビュー画像と、実際の撮像中の被写体との見た目の差をなくすことができ、合焦精度の向上とライブビュー画像の高品質化とを両立させることができる。
また、図10では、記憶用の撮像として静止画を撮像する場合の動作を示しているが、動画撮像の場合には、動画の記憶開始指示がなされた後、ステップS5〜ステップS9の処理を、複数フレーム(例えば4フレーム)に1回の頻度にて行うことで、被写体の変化が大きい動画撮像中であっても、高精度の合焦制御を行うことができる。
以上の説明では、システム制御部11の透過率制御部11Cは、合焦対象エリアの最低分割エリア以外の各分割エリアAF2,AF3の明るさが上記の設定値となるように、可変NDフィルタ3の光透過率を制御するものとした。以下では、透過率制御部11Cによる光透過率の制御の変形例について説明する。
図11は、透過率制御部11Cによる制御の第一の変形例を説明するための図である。
透過率制御部11Cは、撮像条件制御部11Bによって設定された撮像条件によって、撮像画像信号の合焦対象エリアの明るさが図8に示すように変更された状態にて、分割エリアAF2,AF3に対応するエリアaf2,af3の光透過率を、図11に示すように、分割エリアAF2,AF3の明るさが補正量D1の分だけ低下する値に制御する。
この第一の変形例によれば、分割エリアAF3の明るさが過度に低下するのを防ぐことができるため、分割エリアAF3の黒潰れを防ぐことができる。黒潰れが防がれることで、上述したライブビュー画像表示のための補正処理を問題なく行うことができ、ライブビュー画像品質を向上させることができる。
なお、透過率制御部11Cは、図11の制御を行う場合に、分割エリアAF2と分割エリアAF3の少なくとも一方の明るさが予め決めた閾値以上になっている場合には、その閾値以上の明るさの分割エリアに対応する可変NDフィルタ3のエリアの光透過率を、この分割エリアの明るさが上記の設定値となる値に制御してもよい。
明るさがある程度大きい分割エリアについては、明るさを設定値まで下げても黒潰れの可能性は少ないため、このようにすることで、合焦精度を向上させることができる。
以上の明るさ測定部11A,撮像条件制御部11B、透過率制御部11C、及び合焦制御部11Dと、デジタル信号処理部17とによって、撮像制御装置が構成される。なお、デジタル信号処理部17の機能をシステム制御部11が担う構成としてもよい。
図1のデジタルカメラ100において、可変NDフィルタ3とND駆動部3Aは、着脱可能なレンズ装置40Aに内蔵され、レンズ制御部4が、システム制御部11からの指示に応じてND駆動部3Aを制御するものであってもよい。
次に、本発明の撮像装置の実施形態としてスマートフォンの構成について説明する。
図12は、本発明の撮像装置の一実施形態であるスマートフォン200の外観を示すものである。
図12に示すスマートフォン200は、平板状の筐体201を有し、筐体201の一方の面に表示面としての表示パネル202と、入力部としての操作パネル203とが一体となった表示入力部204を備えている。
また、この様な筐体201は、スピーカ205と、マイクロホン206と、操作部207と、カメラ部208とを備えている。なお、筐体201の構成はこれに限定されず、例えば、表示面と入力部とが独立した構成を採用したり、折り畳み構造又はスライド機構を有する構成を採用したりすることもできる。
図13は、図12に示すスマートフォン200の構成を示すブロック図である。
図13に示すように、スマートフォンの主たる構成要素として、無線通信部210と、表示入力部204と、通話部211と、操作部207と、カメラ部208と、記憶部212と、外部入出力部213と、GPS(Global Positioning System)受信部214と、モーションセンサ部215と、電源部216と、主制御部220とを備える。
また、スマートフォン200の主たる機能として、図示省略の基地局装置BSと図示省略の移動通信網NWとを介した移動無線通信を行う無線通信機能を備える。
無線通信部210は、主制御部220の指示にしたがって、移動通信網NWに収容された基地局装置BSに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータ等の送受信、ウェブデータ又はストリーミングデータ等の受信を行う。
表示入力部204は、主制御部220の制御により、画像(静止画像及び動画像)又は文字情報等を表示して視覚的に利用者に情報を伝達するとともに、表示した情報に対する利用者操作を検出する、いわゆるタッチパネルであって、表示パネル202と、操作パネル203と、を備える。
表示パネル202は、LCD(Liquid Crystal Display)、OELD(Organic Electro−Luminescence Display)等を表示デバイスとして用いたものである。
操作パネル203は、表示パネル202の表示面上に表示される画像を視認可能に載置され、利用者の指又は尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスを利用者の指又は尖筆によって操作すると、操作に起因して発生する検出信号を主制御部220に出力する。次いで、主制御部220は、受信した検出信号に基づいて、表示パネル202上の操作位置(座標)を検出する。
図13に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン200の表示パネル202と操作パネル203とは一体となって表示入力部204を構成しているが、操作パネル203が表示パネル202を完全に覆うような配置となっている。
係る配置を採用した場合、操作パネル203は、表示パネル202外の領域についても、利用者操作を検出する機能を備えてもよい。換言すると、操作パネル203は、表示パネル202に重なる重畳部分についての検出領域(以下、表示領域と称する)と、それ以外の表示パネル202に重ならない外縁部分についての検出領域(以下、非表示領域と称する)とを備えていてもよい。
なお、表示領域の大きさと表示パネル202の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル203が、外縁部分と、それ以外の内側部分の2つの感応領域を備えていてもよい。さらに、外縁部分の幅は、筐体201の大きさ等に応じて適宜設計されるものである。
さらにまた、操作パネル203で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式等が挙げられ、いずれの方式を採用することもできる。
通話部211は、スピーカ205又はマイクロホン206を備え、マイクロホン206を通じて入力された利用者の音声を主制御部220にて処理可能な音声データに変換して主制御部220に出力したり、無線通信部210あるいは外部入出力部213により受信された音声データを復号してスピーカ205から出力させたりするものである。
また、図12に示すように、例えば、スピーカ205を表示入力部204が設けられた面と同じ面に搭載し、マイクロホン206を筐体201の側面に搭載することができる。
操作部207は、キースイッチ等を用いたハードウェアキーであって、利用者からの指示を受け付けるものである。例えば、図12に示すように、操作部207は、スマートフォン200の筐体201の側面に搭載され、指等で押下されるとオンとなり、指を離すとバネ等の復元力によってオフ状態となる押しボタン式のスイッチである。
記憶部212は、主制御部220の制御プログラム及び制御データ、アプリケーションソフトウェア、通信相手の名称又は電話番号等を対応づけたアドレスデータ、送受信した電子メールのデータ、WebブラウジングによりダウンロードしたWebデータ、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータ等を一時的に記憶するものである。また、記憶部212は、スマートフォン内蔵の内部記憶部217と着脱自在な外部メモリスロットを有する外部記憶部218により構成される。
なお、記憶部212を構成するそれぞれの内部記憶部217と外部記憶部218は、フラッシュメモリタイプ(flash memory type)、ハードディスクタイプ(hard disk type)、マルチメディアカードマイクロタイプ(multimedia card micro type)、カードタイプのメモリ(例えば、MicroSD(登録商標)メモリ等)、RAM(Random Access Memory)、ROM(Read Only Memory)等の格納媒体を用いて実現される。
外部入出力部213は、スマートフォン200に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等(例えば、ユニバーサルシリアルバス(USB)、IEEE1394等)又はネットワーク(例えば、インターネット、無線LAN、ブルートゥース(Bluetooth)(登録商標)、RFID(Radio Frequency Identification)、赤外線通信(Infrared Data Association:IrDA)(登録商標)、UWB(Ultra Wideband)(登録商標)、ジグビー(ZigBee)(登録商標)等)により直接的又は間接的に接続するためのものである。
スマートフォン200に連結される外部機器としては、例えば、有/無線ヘッドセット、有/無線外部充電器、有/無線データポート、カードソケットを介して接続されるメモリカード(Memory card)、SIM(Subscriber Identity Module Card)/UIM(User Identity Module Card)カード、オーディオ・ビデオI/O(Input/Output)端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有/無線接続されるスマートフォン、有/無線接続されるパーソナルコンピュータ、有/無線接続されるパーソナルコンピュータ、イヤホン等がある。
外部入出力部213は、このような外部機器から伝送を受けたデータをスマートフォン200の内部の各構成要素に伝達したり、スマートフォン200の内部のデータが外部機器に伝送されるようにしたりすることができる。
GPS受信部214は、主制御部220の指示にしたがって、GPS衛星ST1〜STnから送信されるGPS信号を受信し、受信した複数のGPS信号に基づく測位演算処理を実行し、スマートフォン200の緯度、経度、高度からなる位置を検出する。GPS受信部214は、無線通信部210又は外部入出力部213(例えば、無線LAN)から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
モーションセンサ部215は、例えば、3軸の加速度センサ等を備え、主制御部220の指示にしたがって、スマートフォン200の物理的な動きを検出する。スマートフォン200の物理的な動きを検出することにより、スマートフォン200の動く方向又は加速度が検出される。係る検出結果は、主制御部220に出力されるものである。
電源部216は、主制御部220の指示にしたがって、スマートフォン200の各部に、バッテリ(図示しない)に蓄えられる電力を供給するものである。
主制御部220は、マイクロプロセッサを備え、記憶部212が記憶する制御プログラム及び制御データにしたがって動作し、スマートフォン200の各部を統括して制御するものである。また、主制御部220は、無線通信部210を通じて、音声通信又はデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
アプリケーション処理機能は、記憶部212が記憶するアプリケーションソフトウェアにしたがって主制御部220が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部213を制御して対向機器とデータ通信を行う赤外線通信機能、電子メールの送受信を行う電子メール機能、又はウェブページを閲覧するウェブブラウジング機能等がある。
また、主制御部220は、受信データ又はダウンロードしたストリーミングデータ等の画像データ(静止画像又は動画像のデータ)に基づいて、映像を表示入力部204に表示する等の画像処理機能を備える。
画像処理機能とは、主制御部220が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部204に表示する機能のことをいう。
さらに、主制御部220は、表示パネル202に対する表示制御と、操作部207、操作パネル203を通じた利用者操作を検出する操作検出制御を実行する。
表示制御の実行により、主制御部220は、アプリケーションソフトウェアを起動するためのアイコン又はスクロールバー等のソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。
なお、スクロールバーとは、表示パネル202の表示領域に収まりきれない大きな画像等について、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
また、操作検出制御の実行により、主制御部220は、操作部207を通じた利用者操作を検出したり、操作パネル203を通じて、上記アイコンに対する操作と上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付けたりする。
さらに、操作検出制御の実行により主制御部220は、操作パネル203に対する操作位置が、表示パネル202に重なる重畳部分(表示領域)か、それ以外の表示パネル202に重ならない外縁部分(非表示領域)かを判定し、操作パネル203の感応領域又はソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
また、主制御部220は、操作パネル203に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。
ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指等によって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも1つについて軌跡を描く操作を意味する。
カメラ部208は、図1に示したデジタルカメラ100における外部メモリ制御部20、記憶媒体21、表示部22、及び操作部14以外の構成を含む。
カメラ部208によって生成された撮像画像は、記憶部212に記憶したり、外部入出力部213又は無線通信部210を通じて出力したりすることができる。
図12に示すスマートフォン200において、カメラ部208は表示入力部204と同じ面に搭載されているが、カメラ部208の搭載位置はこれに限らず、表示入力部204の背面に搭載されてもよい。
また、カメラ部208はスマートフォン200の各種機能に利用することができる。例えば、表示パネル202にカメラ部208で取得した画像を表示したり、操作パネル203の操作入力のひとつとして、カメラ部208の画像を利用したりすることができる。
また、GPS受信部214が位置を検出する際に、カメラ部208からの画像を参照して位置を検出することもできる。さらには、カメラ部208からの画像を参照して、3軸の加速度センサを用いずに、或いは、3軸の加速度センサと併用して、スマートフォン200のカメラ部208の光軸方向を判断したり、現在の使用環境を判断したりすることもできる。勿論、カメラ部208からの画像をアプリケーションソフトウェア内で利用することもできる。
その他、静止画又は動画の画像データにGPS受信部214により取得した位置情報、マイクロホン206により取得した音声情報(主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい)、モーションセンサ部215により取得した姿勢情報等を付加して記憶部212に記憶したり、外部入出力部213又は無線通信部210を通じて出力したりすることもできる。
以上のような構成のスマートフォン200においても、合焦精度を向上させることができる。
以上説明してきたように、本明細書には以下の事項が開示されている。
(1)
フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、
上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御部と、
上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御部と、
上記撮像条件制御部によって上記撮像条件が制御され、且つ、上記透過率制御部によって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御部と、を備える撮像制御装置。
(2)
(1)記載の撮像制御装置であって、
上記透過率制御部は、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記設定値となる値に制御する撮像制御装置。
(3)
(1)記載の撮像制御装置であって、
上記透過率制御部は、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記最低分割エリアの明るさと上記設定値との差の分だけ低下する値に制御する撮像制御装置。
(4)
(3)記載の撮像制御装置であって、
上記透過率制御部は、上記他の上記分割エリアに明るさが閾値以上となる分割エリアがある場合には、その分割エリアに対応する上記エリアの光透過率を、その分割エリアの明るさが上記設定値となる値に制御する撮像制御装置。
(5)
(1)から(4)のいずれか1つに記載の撮像制御装置であって、
上記第二の撮像画像信号の全体の明るさを、上記明るさ測定部により求められた上記最低分割エリアの明るさと上記設定値との差の分だけ減少させ、更に、上記第二の撮像画像信号における上記合焦対象エリアの上記他の上記分割エリアの明るさを、上記明るさ測定部により求められた上記他の上記分割エリアの明るさまで増加させて得られる上記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理部を更に備える撮像制御装置。
(6)
(1)から(5)のいずれか1つに記載の撮像制御装置であって、
上記撮像条件制御部によって上記撮像条件を制御し、且つ、上記透過率制御部によって上記光透過率を制御した状態にて上記撮像素子により被写体を撮像させる撮像制御を、複数フレームに1回の頻度で実行する撮像制御装置。
(7)
(1)から(6)のいずれか1つに記載の撮像制御装置であって、
上記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理部を更に備え、
上記撮像条件制御部は、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記測光処理部によって測定された上記明るさに基づいて決められる上記絞りの絞り値と同じ値にする撮像制御装置。
(8)
(1)から(6)のいずれか1つに記載の撮像制御装置であって、
上記撮像条件制御部は、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記第一の撮像画像信号を得るための撮像時における上記絞りの絞り値と同じ値にする撮像制御装置。
(9)
(1)から(8)のいずれか1つに記載の撮像制御装置と、
上記撮像素子と、を備える撮像装置。
(10)
(9)記載の撮像装置であって、
上記光学素子を更に備える撮像装置。
(11)
フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、
上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、
上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備える撮像制御方法。
(12)
(11)記載の撮像制御方法であって、
上記透過率制御ステップでは、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記設定値となる値に制御する撮像制御方法。
(13)
(11)記載の撮像制御方法であって、
上記透過率制御ステップでは、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記最低分割エリアの明るさと上記設定値との差の分だけ低下する値に制御する撮像制御方法。
(14)
(13)記載の撮像制御方法であって、
上記透過率制御ステップでは、上記他の上記分割エリアに明るさが閾値以上となる分割エリアがある場合には、その分割エリアに対応する上記エリアの光透過率を、その分割エリアの明るさが上記設定値となる値に制御する撮像制御方法。
(15)
(11)から(14)のいずれか1つに記載の撮像制御方法であって、
上記第二の撮像画像信号の全体の明るさを、上記明るさ測定ステップにより求められた上記最低分割エリアの明るさと上記設定値との差の分だけ減少させ、更に、上記第二の撮像画像信号における上記合焦対象エリアの上記他の上記分割エリアの明るさを、上記明るさ測定ステップにより求められた上記他の上記分割エリアの明るさまで増加させて得られる上記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理ステップを更に備える撮像制御方法。
(16)
(11)から(15)のいずれか1つに記載の撮像制御方法であって、
上記撮像条件制御ステップによって上記撮像条件を制御し、且つ、上記透過率制御ステップによって上記光透過率を制御した状態にて上記撮像素子により被写体を撮像させる撮像制御を、複数フレームに1回の頻度で実行する撮像制御方法。
(17)
(11)から(16)のいずれか1つに記載の撮像制御方法であって、
上記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップを更に備え、
上記撮像条件制御ステップでは、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記測光処理ステップによって測定された上記明るさに基づいて決められる上記絞りの絞り値と同じ値にする撮像制御方法。
(18)
(11)から(16)のいずれか1つに記載の撮像制御方法であって、
上記撮像条件制御ステップでは、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記第一の撮像画像信号を得るための撮像時における上記絞りの絞り値と同じ値にする撮像制御方法。
(19)
フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、
上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、
上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるための撮像制御プログラム。
以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
なお、本出願は、2018年3月23日出願の日本特許出願(特願2018−057244)に基づくものであり、その内容は本出願の中に参照として援用される。
本発明によれば、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
100 デジタルカメラ
40A レンズ装置
1 撮像レンズ
2 絞り
4 レンズ制御部
8 レンズ駆動部
9 絞り駆動部
40B 本体部
3 可変NDフィルタ
3A ND駆動部
30 ブロック
af1、af2、af3 エリア
5 撮像素子
5A 撮像素子駆動部
50 撮像画像信号
50A ブロック
AF1、AF2、AF3 分割エリア
11 システム制御部
11A 明るさ測定部
11B 撮像条件制御部
11C 透過率制御部
11D 合焦制御部
11E 測光処理部
D1 補正量
14 操作部
15 メモリ制御部
16 メモリ
17 デジタル信号処理部
20 外部メモリ制御部
21 記憶媒体
22 表示部
24 制御バス
25 データバス
200 スマートフォン
201 筐体
202 表示パネル
203 操作パネル
204 表示入力部
205 スピーカ
206 マイクロホン
207 操作部
208 カメラ部
210 無線通信部
211 通話部
212 記憶部
213 外部入出力部
214 GPS受信部
215 モーションセンサ部
216 電源部
217 内部記憶部
218 外部記憶部
220 主制御部
ST1〜STn GPS衛星

Claims (19)

  1. フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、
    前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御部と、
    前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御部と、
    前記撮像条件制御部によって前記撮像条件が制御され、且つ、前記透過率制御部によって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御部と、を備える撮像制御装置。
  2. 請求項1記載の撮像制御装置であって、
    前記透過率制御部は、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記設定値となる値に制御する撮像制御装置。
  3. 請求項1記載の撮像制御装置であって、
    前記透過率制御部は、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記最低分割エリアの明るさと前記設定値との差の分だけ低下する値に制御する撮像制御装置。
  4. 請求項3記載の撮像制御装置であって、
    前記透過率制御部は、前記他の前記分割エリアに明るさが閾値以上となる分割エリアがある場合には、当該分割エリアに対応する前記エリアの光透過率を、当該分割エリアの明るさが前記設定値となる値に制御する撮像制御装置。
  5. 請求項1から4のいずれか1項記載の撮像制御装置であって、
    前記第二の撮像画像信号の全体の明るさを、前記明るさ測定部により求められた前記最低分割エリアの明るさと前記設定値との差の分だけ減少させ、更に、前記第二の撮像画像信号における前記合焦対象エリアの前記他の前記分割エリアの明るさを、前記明るさ測定部により求められた前記他の前記分割エリアの明るさまで増加させて得られる前記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理部を更に備える撮像制御装置。
  6. 請求項1から5のいずれか1項記載の撮像制御装置であって、
    前記撮像条件制御部によって前記撮像条件を制御し、且つ、前記透過率制御部によって前記光透過率を制御した状態にて前記撮像素子により被写体を撮像させる撮像制御を、複数フレームに1回の頻度で実行する撮像制御装置。
  7. 請求項1から6のいずれか1項記載の撮像制御装置であって、
    前記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理部を更に備え、
    前記撮像条件制御部は、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記測光処理部によって測定された前記明るさに基づいて決められる前記絞りの絞り値と同じ値にする撮像制御装置。
  8. 請求項1から6のいずれか1項記載の撮像制御装置であって、
    前記撮像条件制御部は、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記第一の撮像画像信号を得るための撮像時における前記絞りの絞り値と同じ値にする撮像制御装置。
  9. 請求項1から8のいずれか1項記載の撮像制御装置と、
    前記撮像素子と、を備える撮像装置。
  10. 請求項9記載の撮像装置であって、
    前記光学素子を更に備える撮像装置。
  11. フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
    前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御ステップと、
    前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御ステップと、
    前記撮像条件制御ステップによって前記撮像条件が制御され、且つ、前記透過率制御ステップによって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備える撮像制御方法。
  12. 請求項11記載の撮像制御方法であって、
    前記透過率制御ステップでは、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記設定値となる値に制御する撮像制御方法。
  13. 請求項11記載の撮像制御方法であって、
    前記透過率制御ステップでは、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記最低分割エリアの明るさと前記設定値との差の分だけ低下する値に制御する撮像制御方法。
  14. 請求項13記載の撮像制御方法であって、
    前記透過率制御ステップでは、前記他の前記分割エリアに明るさが閾値以上となる分割エリアがある場合には、当該分割エリアに対応する前記エリアの光透過率を、当該分割エリアの明るさが前記設定値となる値に制御する撮像制御方法。
  15. 請求項11から14のいずれか1項記載の撮像制御方法であって、
    前記第二の撮像画像信号の全体の明るさを、前記明るさ測定ステップにより求められた前記最低分割エリアの明るさと前記設定値との差の分だけ減少させ、更に、前記第二の撮像画像信号における前記合焦対象エリアの前記他の前記分割エリアの明るさを、前記明るさ測定ステップにより求められた前記他の前記分割エリアの明るさまで増加させて得られる前記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理ステップを更に備える撮像制御方法。
  16. 請求項11から15のいずれか1項記載の撮像制御方法であって、
    前記撮像条件制御ステップによって前記撮像条件を制御し、且つ、前記透過率制御ステップによって前記光透過率を制御した状態にて前記撮像素子により被写体を撮像させる撮像制御を、複数フレームに1回の頻度で実行する撮像制御方法。
  17. 請求項11から16のいずれか1項記載の撮像制御方法であって、
    前記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップを更に備え、
    前記撮像条件制御ステップでは、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記測光処理ステップによって測定された前記明るさに基づいて決められる前記絞りの絞り値と同じ値にする撮像制御方法。
  18. 請求項11から16のいずれか1項記載の撮像制御方法であって、
    前記撮像条件制御ステップでは、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記第一の撮像画像信号を得るための撮像時における前記絞りの絞り値と同じ値にする撮像制御方法。
  19. フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
    前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御ステップと、
    前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御ステップと、
    前記撮像条件制御ステップによって前記撮像条件が制御され、且つ、前記透過率制御ステップによって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるための撮像制御プログラム。
JP2020508173A 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム Active JP6785395B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018057244 2018-03-23
JP2018057244 2018-03-23
PCT/JP2019/008920 WO2019181515A1 (ja) 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム

Publications (2)

Publication Number Publication Date
JP6785395B2 JP6785395B2 (ja) 2020-11-18
JPWO2019181515A1 true JPWO2019181515A1 (ja) 2020-12-03

Family

ID=67986202

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020508173A Active JP6785395B2 (ja) 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム

Country Status (3)

Country Link
US (1) US11102419B2 (ja)
JP (1) JP6785395B2 (ja)
WO (1) WO2019181515A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019172437A1 (ja) * 2018-03-09 2019-09-12 富士フイルム株式会社 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
JP7371685B2 (ja) * 2019-05-21 2023-10-31 ソニーグループ株式会社 撮像装置、透過率指示装置、透過率制御方法、プログラム
KR20210149542A (ko) * 2020-06-02 2021-12-09 삼성에스디에스 주식회사 이미지 촬영 및 판독 방법, 이를 위한 장치
CN111736401B (zh) * 2020-06-30 2021-11-16 联想(北京)有限公司 光学面板、图像采集设备及图像采集方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07120309A (ja) 1993-10-26 1995-05-12 Nikon Corp カメラの測光装置
US5815743A (en) * 1995-10-04 1998-09-29 Minolta Co., Ltd. Flash-assisted photographing system and a device for use in the same
JP2002365522A (ja) * 2001-06-06 2002-12-18 Ricoh Co Ltd 合焦制御装置
KR101940481B1 (ko) * 2011-05-18 2019-04-10 엘지이노텍 주식회사 카메라 모듈 및 그의 구동 방법
JP2013012997A (ja) 2011-06-30 2013-01-17 Canon Inc 調光素子制御装置、その制御方法、および制御プログラム、並びに撮像装置
JP5546692B2 (ja) * 2011-09-30 2014-07-09 富士フイルム株式会社 撮影装置、撮影方法およびプログラム
WO2015016085A1 (ja) * 2013-08-01 2015-02-05 富士フイルム株式会社 撮影方法及び装置
JP6338471B2 (ja) * 2014-07-01 2018-06-06 キヤノン株式会社 撮像装置、制御方法およびプログラム

Also Published As

Publication number Publication date
US20210006701A1 (en) 2021-01-07
JP6785395B2 (ja) 2020-11-18
WO2019181515A1 (ja) 2019-09-26
US11102419B2 (en) 2021-08-24

Similar Documents

Publication Publication Date Title
JP6785395B2 (ja) 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
EP3076659B1 (en) Photographing apparatus, control method thereof, and non-transitory computer-readable recording medium
KR20200019728A (ko) 촬영 이동 단말
US20230018004A1 (en) Photographing method and apparatus
JP6028112B2 (ja) 撮像装置及び合焦制御方法
US11032483B2 (en) Imaging apparatus, imaging method, and program
US9942483B2 (en) Information processing device and method using display for auxiliary light
US10778903B2 (en) Imaging apparatus, imaging method, and program
US10863095B2 (en) Imaging apparatus, imaging method, and imaging program
US11082623B2 (en) Imaging control device, imaging apparatus, imaging control method, and imaging control program with light measurement
JP7210517B2 (ja) 撮像装置、撮像制御方法、撮像制御プログラム
EP4236295A1 (en) Image capturing method and electronic device
WO2020170945A1 (ja) 表示制御装置、撮像装置、表示制御方法、及び表示制御プログラム
JP6765027B2 (ja) 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
JP7085651B2 (ja) 撮像装置の制御装置、撮像装置、撮像装置の制御方法、撮像装置の制御プログラム
WO2018051699A1 (ja) 撮像装置、撮像方法、撮像プログラム
WO2018088121A1 (ja) 撮像装置、撮像方法、及び、撮像プログラム
US11861874B2 (en) Imaging apparatus, imaging control method, and imaging control program
US20210337113A1 (en) Face region detection device, imaging apparatus, face region detection method, and face region detection program
WO2014073441A1 (ja) 撮像装置およびその動作制御方法
JP2023175877A (ja) 撮像装置のプロセッサ、撮像装置、撮像装置の制御方法、及び撮像装置の制御プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200720

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20200720

TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20200929

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201006

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201026

R150 Certificate of patent or registration of utility model

Ref document number: 6785395

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250