WO2015040935A1 - 撮影機器、撮影方法及び撮影表示プログラム - Google Patents
撮影機器、撮影方法及び撮影表示プログラム Download PDFInfo
- Publication number
- WO2015040935A1 WO2015040935A1 PCT/JP2014/068416 JP2014068416W WO2015040935A1 WO 2015040935 A1 WO2015040935 A1 WO 2015040935A1 JP 2014068416 W JP2014068416 W JP 2014068416W WO 2015040935 A1 WO2015040935 A1 WO 2015040935A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- focus
- contrast
- captured image
- unit
- recorded
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/18—Focusing aids
- G03B13/24—Focusing screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/18—Signals indicating condition of a camera member or suitability of light
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Automatic Focus Adjustment (AREA)
- Focusing (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
Abstract
撮影機器は、被写体を撮像し撮像画像を得る撮像部と、上記撮像画像を表示する表示部と、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準コントラストを取得する基準コントラスト判定部と、記録する上記撮像画像の各部のコントラストを求める記録画像コントラスト判定部と、上記基準コントラスト判定部が取得した基準コントラストと上記記録画像コントラスト判定部が求めたコントラストとの比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定部と、上記合焦判定部による判定結果を、記録する上記撮像画像と共に上記表示部に表示する表示制御部とを具備する。
Description
本発明は、コントラスト法によるオートフォーカスが可能なものに好適な撮影機器、撮影方法及び撮影表示プログラムに関する。
近年、デジタルカメラなどの撮影機能付き携帯機器(撮影機器)が普及している。この種の撮影機器においては表示部を有して、撮影画像を表示する機能を有するものもある。また、表示部にメニュー画面を表示して、撮影機器の操作を容易にしたものもある。
このような表示部は、携帯機器本体の背面に設けられることが多く、ユーザは撮影時に、背面の表示部に表示されたスルー画を確認しながら撮影操作をすることも可能である。また、この種の撮影機器においては、記録画像を確認するためのレックビュー機能を搭載したものがある。レックビュー機能は、撮像して記録した画像を撮像の直後において所定時間表示させるものである。ユーザは、表示部に表示されたレックビューによって撮影状態を確認することができる。
しかしながら、携帯機器に設けられた表示部のサイズは比較的小さく、表示された画像のサイズも小さいことから、レックビューによって撮像画像の細部まで確認することは容易ではない。このため、撮像画像のピントが合っていない場合等、ユーザが意図していない撮影が行われたとしても、レックビューによって簡単に確認することができないことがある。
そこで、日本国特開2008-92299号公報においては、画像判定部によって撮影画像が失敗画像であるか否かを判定し、失敗画像の部分領域を拡大表示する技術が開示されている。
しかしながら、日本国特開2008-92299号公報の提案においては、失敗部分の拡大表示によって失敗部分を確認するようになっており、成功部分や失敗部分を含む撮像画像全体の様子を一目で確認することはできない。例えば、被写界深度が比較的浅い場合には、画像の一部にのみピントが合うようになっており、このような画像について、ユーザは撮像画像の状態を簡単に把握することはできず、また、次回の撮影のための有効な示唆も得られないという問題があった。
本発明は、ピントが合っている画像部分についての案内表示を表示することによって、ユーザの撮影操作を効果的に支援することができる撮影機器、撮影方法及び撮影表示プログラムを提供することを目的とする。
本発明に係る撮影機器は、被写体を撮像し撮像画像を得る撮像部と、上記撮像画像を表示する表示部と、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準コントラストを取得する基準コントラスト判定部と、記録する上記撮像画像の各部のコントラストを求める記録画像コントラスト判定部と、上記基準コントラスト判定部が取得した基準コントラストと上記記録画像コントラスト判定部が求めたコントラストとの比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定部と、上記合焦判定部による判定結果を、記録する上記撮像画像と共に上記表示部に表示する表示制御部とを具備する。
また、本発明に係る撮影方法は、被写体を撮像し撮像画像を得る撮像ステップと、上記撮像画像を表示部に表示する第1の表示制御ステップと、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準コントラストを取得する基準コントラスト判定ステップと、記録する上記撮像画像の各部のコントラストを求める記録画像コントラスト判定ステップと、上記基準コントラスト判定ステップにおいて取得した基準コントラストと上記記録画像コントラスト判定ステップにおいて求めたコントラストとの比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップとを具備する。
また、本発明に係る撮影機器は、撮像用の画素及び焦点検出用の画素を備え、被写体を撮像し撮像画像を得る撮像部と、上記撮像画像を表示する表示部と、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定部と、記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定部と、上記基準位相差判定部が取得した基準位相差と上記記録画像位相差判定部が求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定部と、上記合焦判定部による判定結果を、記録する上記撮像画像と共に上記表示部に表示する表示制御部とを具備する。
また、本発明に係る撮影方法は、撮像用の画素及び焦点検出用の画素を備え、被写体を撮像し撮像画像を得る撮像ステップと、上記撮像画像を表示部に表示する第1の表示制御ステップと、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定ステップと、記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定ステップと、上記基準位相差判定ステップにおいて取得した基準位相差と上記記録画像位相差判定ステップにおいて求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップとを具備する。
また、本発明に係る撮影表示プログラムは、コンピュータに、撮像用の画素及び焦点検出用の画素を備えた撮像部が被写体を撮像して得た撮像画像を表示部に表示する第1の表示制御ステップと、上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定ステップと、記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定ステップと、上記基準位相差判定ステップにおいて取得した基準位相差と上記記録画像位相差判定ステップにおいて求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップとを実行させる。
以下、図面を参照して本発明の実施の形態について詳細に説明する。
(第1の実施の形態)
図1は本発明の第1の実施の形態に係る撮影機器を示すブロック図である。本実施の形態は、撮像画像の各部について合焦、非合焦の判定に用いるコントラスト(以下、基準コントラストという)を求め、記録する撮像画像の各部のコントラストと基準コントラストとを比較することで合焦状態を判定し、判定結果を表示するものである。例えば、記録直前における合焦時の画像各部のコントラストを基準コントラストとし、記録する画像の各部のコントラストとの変化を検出することで、ピントが合っている画像部分を示す案内表示を表示することを可能にする
図2は撮影画像における合焦部分と非合焦部分とを説明するための説明図であり、図3は本実施の形態における案内表示を説明するための説明図である。
図1は本発明の第1の実施の形態に係る撮影機器を示すブロック図である。本実施の形態は、撮像画像の各部について合焦、非合焦の判定に用いるコントラスト(以下、基準コントラストという)を求め、記録する撮像画像の各部のコントラストと基準コントラストとを比較することで合焦状態を判定し、判定結果を表示するものである。例えば、記録直前における合焦時の画像各部のコントラストを基準コントラストとし、記録する画像の各部のコントラストとの変化を検出することで、ピントが合っている画像部分を示す案内表示を表示することを可能にする
図2は撮影画像における合焦部分と非合焦部分とを説明するための説明図であり、図3は本実施の形態における案内表示を説明するための説明図である。
図2(a)はユーザ30が樹木の枝33を撮影する様子を示している。ユーザ30は右手31及び左手32でカメラの筐体10aを保持し、枝33を撮影範囲に収めた状態でシャッタボタン(図示せず)を押下する。図2(b)~(d)はこの場合におけるレックビュー表示された撮像画像41~43の例を示している。
図2(b)に示す撮像画像41は、例えば合焦操作の失敗によって、被写体である枝33の画像33aの全ての部分が非合焦となっていることを示している。図2(c)に示す撮像画像42は、レックビュー画像では一見ピントが合っているように見えるが、枝33の画像33bには枝33が揺れたことなどの理由によってぶれが生じたことを示している。また、図2(d)に示す画像43は、枝33の画像33cの一部の領域が合焦部分となっており、他の領域が非合焦部分となっていることを示している。
レックビュー表示は、撮影機器に設けられた比較的小さい表示画面上に表示されることから、合焦部分及び非合焦部分を確認することは容易ではない。この場合でも、図2(b),(c)のように、画像の全ての部分でピントがぼけている場合、ぶれが生じている場合には、レックビュー表示での確認も比較的容易である。しかしながら、図2(d)のように、非合焦部分と合焦部分とが混在している場合には、撮像画像の確認は容易ではない。即ち、ユーザは、撮像画像の各部を順次拡大表示して合焦状態を確認する必要があり、確認作業に長時間を要する。
図2(b),(c)の撮像画像は、明確な失敗画像であり、次の撮影操作のために撮像画像を利用することは困難である。しかし、図2(d)の撮像画像は、一部に合焦部分又は鮮明な部分があるので、この合焦部分等を確認することで、次の撮影操作のための有効な情報が得られることがある。或いは、図2(d)の撮像画像は、ユーザが意図した合焦状態である可能性もある。
そこで、本実施の形態においては、記録前後における画像各部のコントラストの変化を検出することで、ユーザが意図した合焦状態の撮像画像が得られているか否かを判別すると共に、次の撮影操作の為に有効な情報が得られる領域を特定し、この情報を案内表示によってユーザに提示するようになっている。
図3(a)は図2(d)と同一のレックビュー表示による画像43を示している。ここで、ユーザが、画像を確認するために、レックビュー表示を見ながら適当な領域の拡大を指示するものとする。図3(a)の領域44は、ユーザがレックビュー表示上からピントが合っていると想定した領域、或いは、ユーザが撮影時にピントを合わせようとした領域、或いは画面の中央の領域である。
図3(b)は図3(a)の撮像画像の一部の領域44を画面一杯に拡大表示した画像44aを示している。画像44a中には、枝33の一部の拡大画像44b及び葉っぱの一部の拡大画像44c等が含まれている。図3(b)の例は、これらの画像44b,44cにピントが合っておらず、領域44が非合焦領域であることを示している。ユーザは、この領域44の拡大画像を見ただけでは、次の撮影操作のための有効な情報を得ることはできない。即ち、予め設定されている中央の領域やユーザが闇雲に指定した領域を拡大しただけでは、次の撮影操作に有効な情報を得られず、有効な情報を得るために、ユーザは拡大領域を順次ずらしながら画面の各部分の状態を確認する必要があった。
これに対し、本実施の形態は、今回の撮影の状態を簡単に把握可能にすると共に、次の撮影操作のための有効な情報が得られる候補の領域を指示する案内表示を表示することができるようになっている。図3(c)は本実施の形態における案内表示の一例を示している。図3(a)の撮像画像43中の一部の領域45は合焦部分となっており、案内表示によって、この合焦部分が撮像画像43中のどの位置であるかを示すことができるようになっている。図3(c)では、合焦部分を、近傍に「候補」と表示した四角の枠による案内表示46によって示している。この案内表示46は拡大する候補の領域として最適な領域を示すものである。
図3(d)は案内表示46の部分を拡大した拡大画像46aを示している。拡大画像46a中には、ピントが合った葉っぱの画像部分46bが含まれる。この拡大画像46aを参照することで、領域45においてはピントが合っていることをユーザは簡単に確認することができる。また、図3(c)の案内表示46によって、ユーザが想定しているピント合わせの位置に対して、ピントのずれが奥行き方向にずれていたか手前側にずれていたかを把握することもできる。
また、図3(e)は図3(d)の案内表示46の部分を拡大した拡大画像46aの他の例を示すものである。図3(e)の拡大画像46a中には、ぶれが生じている葉っぱの画像部分46cが含まれる。即ち、図3(e)の例は、領域45の画像部分にはぶれが生じていることを示している。このように、案内表示46によって指定された領域45を拡大することで、ピントのずれやボケについてより詳細な情報を得ることができる。
図1において、本実施の形態における撮影機器1は、本体部10及び交換レンズ20によって構成されている。本体部10は、撮影機器1の主要な回路部分が収納されており、前面に交換レンズ20が着脱自在に取り付けられている。
交換レンズ20は、本体部10の撮像部12に被写体像を導く光学系21を有している。光学系21は、物体側から撮像部12の撮像面(像面)に至る光軸上に図示しない複数のレンズが配置されて構成される。即ち、光学系21中には、ピント合わせによりフォーカス(合焦)状態に設定するために可動されるフォーカスレンズ及びフォーカス状態で変倍するズームレンズを有する。また、光学系21は、これらのレンズ及び絞りを駆動する図示しない機構部を有する。
駆動部24は光学系21の機構部を制御して、これらのフォーカスレンズ、ズームレンズ及び絞りを駆動制御するようになっている。なお、絞りは、例えば、光学系21の所定のレンズ相互間に配置される。
交換レンズ20には、ユーザによる撮影に関するパラメータ、例えば、ピント、ズームや絞りに関するパラメータの設定操作のために、図示しない操作リング等の操作部が設けられており、操作検出部27は、この操作部に対するユーザ操作を検出して検出結果を制御部23に出力するようになっている。制御部23は、マイコン等によって構成されており、操作検出部27の検出結果と後述する本体部10の信号処理及び制御部11からの信号とに基づいて、交換レンズ20の各部を制御する。
制御部23の駆動制御部23aは、操作検出部27の検出結果と信号処理及び制御部11の制御とに従って各種制御信号を発生する。例えば、駆動制御部23aは、フォーカス信号、ズーム信号及び絞り制御信号を発生して、駆動部24を制御する。駆動部24は、フォーカス信号に基づいてフォーカスレンズを駆動制御し、ズーム信号に基づいてズームレンズを駆動制御し、絞り制御信号に基づいて絞りを駆動制御する。
状態判定部25は、ズームレンズ、フォーカスレンズのレンズ位置を判定してレンズ状態を示す信号を制御部23に出力すると共に、絞り量を判定して絞り状態を示す信号を制御部23に出力する。制御部23は、ピント位置、ズーム位置及び絞り量の判定結果を用いて、操作検出部27の検出結果や信号処理及び制御部11からの制御信号に応じたピント位置、ズーム位置、絞り量となるように、駆動部24を制御する。
交換レンズ20には、通信部28が設けられている。また、本体部10には通信部13が設けられている。通信部28は、所定の伝送路を介して本体部10の通信部13との間で情報の送受を行う。制御部23は、本体部10の通信部13との間の通信が確立すると、記録部29に格納したレンズ固有の情報及びズーム操作に関する情報、ピント位置、絞り状態等の情報をレンズ情報として通信部28,13によって本体部10に送信させることができる。
本体部10は、レンズ情報により、交換レンズ20がどのようなズーム機能を有しているか、ズームレンズの焦点距離範囲(倍率)、焦点距離、最短焦点距離、無限遠距離、明るさナンバー等を認識することができる。また、制御部23は、操作検出部27の検出結果の情報も本体部10に送信するようになっている。
撮影機器1を構成する本体部10は、CCDやCMOSセンサ等の撮像素子によって構成された撮像部12を有している。撮像部12は、本体部10の前面に設けられた交換レンズ20からの被写体像を光電変換して撮影画像を得る。撮像部12は、信号処理及び制御部11によって駆動制御されて、撮像画像を出力する。
信号処理及び制御部11は、例えばCPU等によって構成されて撮影機器1の各部を制御する。信号処理及び制御部11は、撮像部12に撮像素子の駆動信号を出力すると共に、撮像部12からの撮像画像を読み出す。信号処理及び制御部11は、読み出した撮像画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。
本体部10には、時計部14及び操作判定部15も配設されている。時計部14は信号処理及び制御部11が用いる時間情報を発生する。操作判定部15は、本体部10に設けられた図示しないレリーズボタン、ファンクションボタン、撮影モード設定等の各種スイッチ等を含む操作部に対するユーザ操作に基づく操作信号を発生して、信号処理及び制御部11に出力するようになっている。信号処理及び制御部11は、操作信号に基づいて、各部を制御する。
信号処理及び制御部11は、撮像画像の記録及び再生に関する処理を行うことができる。例えば、信号処理及び制御部11は、信号処理後の撮影画像を圧縮処理し、圧縮後の画像を記録部19に与えて記録させることができる。記録部19としては、例えばカードインターフェースを採用することができ、記録部19はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。本実施の形態において、記録部19には、後述するように、各画像部分のコントラストを記述したテーブル19aが記録されるようになっている。
信号処理及び制御部11の表示制御部11aは表示に関する各種処理を実行する。表示制御部11aは、信号処理後の撮影画像を表示部17及び接眼表示部18に与えることができる。表示部17及び接眼表示部18は、LCD等の表示画面を有しており、表示制御部11aから与えられた画像を表示する。また、表示制御部11aは、各種メニュー表示等を表示部17及び接眼表示部18の表示画面に表示させることもできるようになっている。
また、本体部10には、ユーザが目を接眼表示部18に近接させたことを検出するアイセンサ18aが設けられている。アイセンサ18aの検出結果によって、信号処理及び制御部11は、ユーザが目を接眼表示部18に近接させたか否かを判定することができるようになっている。
信号処理及び制御部11は、記録部19に記録されている撮像画像を読み出して伸張処理することができる。表示制御部11aは伸張処理された撮像画像を表示部17や接眼表示部18に与えることで、記録画像の再生が可能である。
表示部17は、後述するように、撮像画像を表示する表示画面17bを有している。また、表示画面17b上には、タッチパネル17aが設けられている。タッチパネル17aは、ユーザが指で指し示した表示画面17b上の位置に応じた操作信号を発生することができる。この操作信号は、信号処理及び制御部11に供給される。これにより、信号処理及び制御部11は、ユーザが表示画面17b上をタッチしたりスライドさせたりした場合には、ユーザのタッチ位置、指を閉じ離間させる操作(ピンチ操作)、スライド操作やスライド操作によって到達した位置、スライド方向、タッチしている期間等の各種操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。
なお、表示部17は、本体部10の例えば背面の略全域を占めるように配設されており、撮影者は、撮影時に表示部17の表示画面17b上に表示されたスルー画を確認することができ、スルー画を確認しながら撮影操作を行うこともできる。
本体部10には、振動判定部16が設けられている。振動判定部16は、ジャイロセンサ、加速度センサ等によって構成されており、本体部10を収納する筐体のぶれや振動を検出することができるようになっている。振動判定部16の判定結果は信号処理及び制御部11に与えられる。
また、本体部10には、手ブレ補正部12aが設けられている。手ブレ補正部12aは、信号処理及び制御部11に制御されて、手ブレの状態に応じて撮像部12を制御することにより、撮像部12から手ブレの影響を除去した撮像画像を出力させるようになっている。
本実施の形態においては、上述したように、撮像画像についてユーザが合焦状態を確認することを容易にすると共に、次回の撮影操作にとって有効な情報が得られるように、案内表示を表示することができる。
このような案内表示を表示させるために、本実施の形態においては、信号処理及び制御部11は、顔検出部11b、コントラスト判定記録部11c、合焦判定部11d及びレックビュー制御部11eを有している。
顔検出部11bは、撮像画像に対する公知の手法によって、撮像画像から顔検出処理を行う。例えば、顔検出部11bは、顔の明るさの特徴をモデル化した複数の濃淡画像と撮影画像とを順次比較することで、人物の顔を検出することもできる。また、顔検出部11bは、人物の顔だけでなく、人物の体全体を検出することも可能である。更に、顔検出部11bは、例えばパターン判定により、ペットや特定の物体の被写体又はその一部等の領域を検出することも可能である。
コントラスト判定記録部11cは、基準コントラストを求めると共に、記録する画像のコントラストを求める。コントラスト判定記録部11cは、ピント位置を変化させながら撮像画像の各部のコントラストを判定することができる。例えば、コントラスト判定記録部11cは、撮像画像を複数の領域に分割し、分割した各部のコントラストを判定する。コントラスト判定記録部11cは、求めた各部のコントラストを記述したテーブル19aを記録部19に記録する。コントラスト判定記録部11cは、コントラストが最も大きくなったピント位置を合焦位置と判定し、例えば、このピント位置におけるコントラストを合焦時の基準コントラストとする。
例えば、コントラスト判定記録部11cは、いわゆる山登り方式のオートフォーカスによって各部毎に求められたコントラストを記録するようにしてもよい。また、コントラスト判定記録部11cは、マニュアルフォーカスによる各ピント位置における撮像画像の各部のコントラストを求めて記録するようにしてもよい。コントラスト判定記録部11cによるコントラストの判定及び記録は、例えば実際の撮影の直前に行われる。直前と書いたのは、被写体と撮影者の位置関係が、撮影時と大きく変わっていない事が重要だということで、比較的固定された状況や、焦点深度、被写界深度が深い状態では、これに限る必要はない。画像を比較して、状況が変わっていないことを判定して、記録結果が有効かどうかを判定しても良い。複数のピント位置での結果を持っていれば、基準としての信頼性が高まる。
なお、このコントラスト情報は、ピント合わせ時の相対変化が重要で、もともとコントラストが低い物のジャスピン(ピントがぴったり合った状態の通称)状態と、もともとコントラストの高いもののジャスピンでない状態では、ジャスピン状態のものの方がコントラストが低かったりするので、図5のように、ピント合わせによって、コントラストがどのような変化をするかを判定しなければ、正しいピント合わせ制御は困難である。したがって、ピント合わせ時のコントラスト情報は、同じ被写体部位に対しては比較が有効であるが、異なる被写体同士では比較は、ピントの判定という意味では意味をなさない。そこで、ピント合わせ時のコントラスト変化の情報を持つことに意味がある。画像のどの位置で、どのようなコントラストが得られたかを比較してもよいが、同じ被写体同士を画像判定で比較してもよい。また、コントラスト判定、記録部位は多いほど情報量を増加させられるが、記録容量や通信スピードに影響するので、特定のブロックや特定の特徴画像(顔など)についてのみデータを残すようにしても良い。
また、コントラスト判定記録部11cは、撮影されて実際に記録される撮像画像の各部のコントラストを求めて、記録部19に記録させるようになっている。
合焦判定部11dは、記録される撮像画像の各部のコントラストを記録部19から読出す。また、合焦判定部11dは、記録部19に記録されたテーブル19aの情報(基準コントラスト)を読み出す。合焦判定部11dは、記録される撮像画像の各部のコントラストとテーブル19aに記述されている撮影直前(記録直前)における各部のコントラストとを撮像画像の各部毎に比較する。即ち、合焦判定部11dは、記録前のコントラストと記録後のコントラストとを撮像画像の各部毎に比較することで、撮像画像の各部毎に合焦の状態を判定する。合焦判定部11dは、判定結果をレックビュー制御部11eに出力する。
例えば、合焦判定部11dは、顔検出による主被写体の位置や、画面中央の位置や、最も近い被写体の位置等、ピントを合わせることを想定した領域(以下、ピント合わせ想定部という)についてのコントラストを調べる。なお、マニュアルフォーカス時においては、マニュアルフォーカスを支援するために、ユーザが指定した領域を部分拡大して表示することがあり、この場合には、部分拡大する領域をピント合わせ想定部にしてもよい。また、ピーキング機能時にユーザが指定した領域をピント合わせ想定部にしてもよい。
ピント合わせ想定部におけるコントラストが記録後において記録前よりも同等以上に大きくなった場合には、合焦に関して撮影が成功したものと判定する。この場合には、合焦判定部11dは、ピント合わせ想定部を拡大表示するのに適した領域の候補(以下、拡大候補領域という)に設定してもよい。
また、例えば、合焦判定部11dは、ピント合わせ想定部についてのコントラストが、記録後において記録前よりも小さくなった場合には、ピント合わせ想定部以外の他の部分についてのコントラストが、記録後において記録前よりも同等以上に大きくなったか否かを判定する。そのような部分が存在する場合には、当該部分を拡大候補領域であるものと判定する。合焦判定部11dは、判定結果をレックビュー制御部11eに出力する。
レックビュー制御部11eは、表示制御部11aを制御することで、撮影直後において信号処理及び制御部11によって撮像部2から取り込まれて画像処理された撮像画像を、レックビュー画像として接眼表示部18又は背面表示部17の表示画面上に表示させるレックビュー表示を行う。本実施の形態においては、レックビュー制御部11eは、合焦判定部11dの判定結果が与えられ、判定結果に基づく案内表示をレックビュー表示に重ねて表示画面上に表示させるようになっている。
例えば、レックビュー制御部11eは、拡大候補領域の位置を示す枠による案内表示を表示させる。また、レックビュー制御部11eは、枠の近傍に拡大表示の候補の位置であることを示す「候補」の文字を表示させるようにしてもよい。
更に、レックビュー制御部11eは、ユーザの拡大操作又はレックビュー表示から所定の時間経過後に、拡大候補領域を表示画面一杯に拡大表示するようにしてもよい。
次に、このように構成された実施の形態の動作について図4乃至図8を参照して説明する。図4はカメラ制御を説明するためのフローチャートであり、図5及び図6は合焦判定を説明するための説明図である。図7は合焦判定の具体例を示すフローチャートであり、図8は案内表示の表示例を示す説明図である。
撮影機器1の電源が投入されると、信号処理及び制御部11は、図4のステップS1において、撮影モードが指示されたか否かを判定する。撮影モードが指示されると、信号処理及び制御部11は、ステップS2において、カメラ撮影制御を行う。これにより、信号処理及び制御部11は、撮像部12から画像信号を取得し、表示部17に撮像画像(スルー画)をライブビュー表示させる。信号処理及び制御部11は、ステップS3において、顔検出処理、ピント合わせ処理、コントラスト判定処理及びコントラストの記録処理等を行う。
即ち、顔検出部11bは、撮像画像中の顔を検出して検出結果をコントラスト判定記録部11cに出力する。信号処理及び制御部11は、被写体の検出結果に従って被写体を追尾しながらピント合わせ処理(オートフォーカス処理)を行ったり、予め設定された位置、例えば、画面中央の位置にピントを合わせるようにオートフォーカス処理を行う。
コントラスト判定記録部11cは、このピント合わせ処理、例えば、山登り方式のオートフォーカス処理において求められた各レンズ位置におけるコントラストを撮像画像の各部毎に記録する。即ち、コントラスト判定記録部11cは、ピント合わせ想定部だけでなく、撮像画像の各部におけるコントラストを判定する。各レンズ位置における撮像画像の各部のコントラストによるテーブル19aが作成されて記録部19に記録される。ここで注意すべきは、このコントラスト情報は、ピント合わせによって、コントラストがどのような変化をするかを判定した結果と、撮影した後の、同じ被写体部位のコントラストを比較することが重要である。ピント合わせ時のコントラスト情報は、同じ被写体部位に対しては比較が有効であるが、異なる被写体同士では比較は、ピントの判定という意味では意味をなさないので、同じ被写体部位(顔など)で比較する必要がある。厳密に言えば、同じ顔でも、動きによって光線の当たり方が変わって、厳密なピント変化によるコントラスト変化が生じうるので、このような場合は、色分布や陰影分布で画像の一致度を判定してから、極端な変化がないときにのみ、コントラスト比較を有効にしても良い。つまり、このように、被写体にピントがあったかどうかを判定するための基準コントラストは、そのときの状況、被写体等によって異なる。このような問題を解決するには、画面内の同じ部位同士を撮影前後で比較したり、撮影前後の画像を比較して同じ形状や色のものなどを比較対象とする。同様の考え方で、撮影前より撮影時にむしろピントが良くなった被写体も判定しようとしている。撮影前に複数のピント位置での結果を持っていれば、判定基準としての信頼性が高まる。
図5は表示画面17b上に表示されているスルー画51と、コントラストの判定領域との関係を示している。図5は画面中央の1~9の数字を配置した枠にて示す9箇所の部分にて、コントラストが判定されることを示している。なお、図5のスルー画51中には、図2(a)の枝33を撮像して得られた枝の画像51aを含む。
図6は横軸にピント位置をとって図5の1~9の数字で示す各領域(以下、領域1~9という)におけるコントラストの変化を示している。なお、領域5はピント合わせ想定部である。図6の縦線は撮影直前におけるピント位置を示しており、このタイミングでは、領域5のコントラストが最も高く、領域5にピントが合っている状態になっていることが分かる。図6に示す各領域1~9の各ピント位置におけるコントラストが、テーブル19aに記録される。
ステップS4では、撮影操作が行われたか否かが判定される。例えばレリーズボタン操作等によって静止画撮影が指示されると、信号処理及び制御部11は、撮影を行う。即ち、信号処理及び制御部11は、撮像部12からの撮像画像に信号処理を施して圧縮した後、記録部19に与えて記録する。また、コントラスト判定記録部11cは、撮影されて記録される撮像画像の各画像部分(被写体)についてコントラストを求め、求めたコントラストを記録部19に記録する(ステップS5)。
次に、信号処理及び制御部11は、ステップS6において、レックビューの表示時間を監視しながら、記録した撮像画像を表示部17に与えてレックビュー表示させる(ステップS7)。レックビューの表示開始から所定の時間が経過すると、信号処理及び制御部11は、ステップS12において電源オフ操作があったか否かを判定する。電源オフ操作があるまでは、ステップS1~S11の処理が繰り返される。電源オフ操作が行われると、信号処理及び制御部11は、電源をオフにして処理を終了する。
本実施の形態においては、レックビュー表示期間において、撮像画像中の合焦状態に基づく案内表示をユーザに提示することができる。即ち、合焦判定部11dは、ステップS8において、合焦状態を判定する。
図7はこの場合の動作フローを示しており、合焦判定部11dは、ステップS31において、テーブル19aから撮影直前の各部のコントラストを読出す。次に、合焦判定部11dは、ステップS32において記録部19に記録されている各部のコントラストを読出す。次に、合焦判定部11dは、撮影直前のコントラストが合焦時の基準コントラストであるものとし、この基準コントラストと記録される撮像画像のコントラストとを各部毎に比較する(ステップS33)。
合焦判定部11dは、撮影直前にコントラストが最も高い領域、即ち、ピント合わせ想定部における撮影直前のコントラスト(基準コントラスト)と、記録される撮像画像の同一領域のコントラストとが同等であるか否か、又は撮影直前のコントラスが低下していないか否かを判定する(ステップS34)。撮影直前のコントラストが記録される撮像画像のコントラストに比べて同等以上である場合には、当該ピント合わせ想定部を拡大表示の候補とする(ステップS35)。また、この場合には、合焦判定部11dは、撮影は成功したものと判定してもよい。
また、合焦判定部11dは、撮影直前にコントラストが最も高い領域、即ち、ピント合わせ想定部における撮影直前のコントラストよりも、記録される撮像画像の同一領域のコントラストの方が大きい場合には、ピント合わせ想定部以外の部分において、記録される撮像画像のコントラストが撮影直前のコントラストよりも大きくなった部分を検出する(ステップS36)。そのような部分が存在しない場合には、処理をステップS35に移行し、存在する場合には、処理をステップS37に移行して、当該部分を拡大表示の候補とする。
図6は黒丸によって記録される撮像画像の領域5,3におけるコントラストを示しており、領域5は撮影直前よりもコントスラトが低下し、領域3では撮影直前よりもコントラストが増大したことを示している。従って、図6の例では、領域3が拡大表示の候補に設定される。
レックビュー制御部11eは、合焦判定部11dの判定結果が与えられて、表示画面上にピントが合っている領域であって拡大候補の領域を示す案内表示46(図3(c)参照)を表示する(ステップS9)。レックビュー制御部11eは、ステップS10において、ユーザによる拡大操作の有無を判定する。拡大操作があった場合には、レックビュー制御部11eは、拡大表示の候補の領域を拡大表示する(ステップS11)。
このように、ここでは、領域ごとの変化を見て、撮影前のコントラスト変化を基準とし、同じ領域で撮影後にコントラストがどうなったを判定している。大きなぶれや、大きな被写体の画面内の揺れがなければ、この方法は有効であるが、撮影前後で被写体の画面内位置が変わってしまう場合などは、領域ごとでなく、上下左右に被写体が揺れた場合を想定し、隣接領域(ブロック)のコントラストデータを利用したり、同じ画像を追尾した結果で、コントラスト変化を判定しても良い。ここでは、このような領域分割で同じ領域の利用という例で単純化したが、他に隣接領域の利用、類似画像判定などを駆使して、同じ被写体に対するコントラスト変化を撮影前後で判定しようとしている。
また、同じ領域であっても、図6のような撮影前のコントラストカーブを判定して、このカーブに即した(このカーブ内で検出された)コントラスト変化なら信用に値するが、比較してあまりに大きな変化であれば、コントラストが上昇しても、ピントが合ったという判定はしないようにする。つまり、複数のピント位置での結果を持っていれば、基準としての信頼性が高まる。
つまり、図7のS36の上昇判定で、上昇判定結果が所定量を超えたり、コントラスト変化カーブで検出された値を外れる場合はNoに分岐するようにする。
また、S36の判定も、想定部以外のコントラストが上昇しているかどうかを、分割された領域内のコントラスト変化で判定するのみならず、画像認識や追尾を行って、追尾した結果、同じ被写体のコントラストが上昇した場合は、S36をYesに分岐するようにしても良い。つまり、上記基準コントラストは、合焦制御時に得られたコントラスト変化データに従って得られた値であり、それは同一ブロック(領域)隣接ブロック(領域)の値を利用したり、被写体追尾して、撮影前後で同じ被写体を判定して利用できるようにする。同様の考え方で、撮影前より撮影時にむしろピントが良くなった被写体も判定しようとしている。つまり、以上の処理は、上記基準コントラストは、撮影前後の同じ被写体に対するコントラストを利用して決定するとも言え、撮影後の被写体から、撮影前の被写体のコントラスト情報を選択して判定するようにしても良い。
図8は案内表示及び拡大表示の表示例を示している。図8(a)は、表示画面17b上に、撮像画像全体の縮小画像61a及び候補領域の拡大画像62aを2画面表示する例を示している。縮小画像61a中に案内表示46が表示されている。また、図8(b)は、表示画面17b上に撮像画像全体を親画像61bとして親画面表示し、表示画面の一部の領域に拡大画像62bを子画面表示する例を示している。親画像61b中に案内表示46が表示されている。また、図8(c)は、表示画面上に拡大画像62cを親画面表示し、表示画面の一部の領域に撮像画像全体を子画像61cとして子画面表示する例を示している。子画像61c中に案内表示46が表示されている。ステップS11においては、ユーザ操作に従って、図8の各表示の切り換えが可能である。
ユーザは図8の表示によって、撮影が失敗したか成功したかを比較的簡単に把握することができる。また、撮影が失敗している場合でも、拡大表示を参照することで、次の撮影操作の有効な示唆を得ることができる。
信号処理及び制御部11は、図4のステップS1において撮影モードが指示されていないものと判定した場合には、ステップS15において、再生モードが指示されたか否かを判定する。再生モードが指示されると、信号処理及び制御部11は、ステップS16において、サムネイルの一覧表示を行う。サムネイル一覧を参照したユーザによる画像の選択が行われると、ステップS17からステップS18に処理を移行して、信号処理及び制御部11は選択画像の再生を行う。なお、信号処理及び制御部11は、ステップS25において再生が終了したものと判定すると、ファイル一覧表示(ステップS16)を繰り返す。ファイル選択が行われない場合には、ステップS19において再生モードの終了を判定する。
本実施の形態においては、再生時においても合焦状態の確認が可能である。信号処理及び制御部11は、ステップS20において、合焦状態の確認を行うための操作が行われた否かを判定する。この操作が行われない場合には、処理をステップS25に移行して再生モードの終了が判定される。合焦状態の確認のための操作が行われると、ステップS21~S24において、ステップS8~S11と同様の処理が行われる。即ち、再生時においても、案内表示及び候補領域の拡大表示が行われる。
このように本実施の形態においては、記録直前の撮像画像の各部のコントラストと記録後の撮像画像の各部のコントラストとを比較することによって、合焦状態を判定して判定結果をユーザに提示するようになっている。これにより、ピントを合わせを行った部分のピントが合った撮像画像が得られたか否かを一目で確認することができる。また、ピントを合わせを行った部分以外でピントが合った部分がどこにあるかを簡単に確認することができると共に、その部分の拡大画像を簡単に確認することができ、撮影の分析を自分で行うことで、次回の撮影操作に有効な示唆を容易に得ることができる。
(変形例)
図9は合焦状態の判定方法の変形例を示すフローチャートであり、図7に代えて採用することができる。図9の例は、山登りコントラスト方式に代えて像面位相差法によるフォーカス制御を利用したものである。即ち、本変形例は、撮像画像の各部について合焦、非合焦の判定に用いる位相差(以下、基準位相差という)を求め、記録する撮像画像の各部の位相差と基準位相差とを比較することで合焦状態を判定し、判定結果を表示するものである。例えば、記録直前における合焦時の画像各部の位相差を基準位相差とし、記録する画像の各部の位相差との変化を検出することで、ピントが合っている画像部分を示す案内表示を表示することを可能にする
像面位相差法においては、被写体からの各光路を射出瞳において例えば右方向と左方向とに分割して、右方向からの光束(右光束)と左方向からの光束(左光束)とを撮像素子の撮像面(受光面)に入射させる。撮像素子に、右光束を受光する画素(以下、R画素という)と左光束を受光する画素(以下、L画素)とを構成して、右光束と左光束とをR画素とL画素(以下、これらをAF画素という)の各撮像面に別々に結像させる。
図9は合焦状態の判定方法の変形例を示すフローチャートであり、図7に代えて採用することができる。図9の例は、山登りコントラスト方式に代えて像面位相差法によるフォーカス制御を利用したものである。即ち、本変形例は、撮像画像の各部について合焦、非合焦の判定に用いる位相差(以下、基準位相差という)を求め、記録する撮像画像の各部の位相差と基準位相差とを比較することで合焦状態を判定し、判定結果を表示するものである。例えば、記録直前における合焦時の画像各部の位相差を基準位相差とし、記録する画像の各部の位相差との変化を検出することで、ピントが合っている画像部分を示す案内表示を表示することを可能にする
像面位相差法においては、被写体からの各光路を射出瞳において例えば右方向と左方向とに分割して、右方向からの光束(右光束)と左方向からの光束(左光束)とを撮像素子の撮像面(受光面)に入射させる。撮像素子に、右光束を受光する画素(以下、R画素という)と左光束を受光する画素(以下、L画素)とを構成して、右光束と左光束とをR画素とL画素(以下、これらをAF画素という)の各撮像面に別々に結像させる。
R画素とL画素とに夫々入射する画像信号同士の撮像面上における位相差は、ピントのずれ量に比例する。従って、AF画素から得た位相差と所定の演算パラメータを用いて、デフォーカス量及びデフォーカス方向を算出することができる。撮像部12の撮像画素中には、画像を生成するための通常の画素の他に、画面の各部にAF画素が配置されており、AF画素の画素値から画面の各部におけるピントのずれ量を求めることができる。
合焦判定部11dは、ステップS41において、テーブル19aから撮影直前の各部の位相差を基準位相差として読出す。次に、合焦判定部11dは、ステップS42において記録部19に記録されている各部の位相差を読出す。次に、合焦判定部11dは、撮影直前の位相差と記録された撮像画像の位相差とを各部毎に比較する(ステップS43)。なお、撮像部12から出力される撮像画像には、通常画素及びAF画素のデータが含まれている。信号処理及び制御部11は、圧縮処理前の撮像画像からAF画素のデータを取りだして、撮像画像の各部の位相差を取得することができる。
合焦判定部11dは、撮影直前に位相差が最も小さい領域、即ち、ピント合わせ想定部における撮影直前の位相差(基準位相差)と、記録された撮像画像の同一領域の位相差とが同等であるか否か、又は撮影直前の位相差が増大していないか否かを判定する(ステップS44)。記録された撮像画像の位相差が撮影直前の位相差に比べて増大していない場合には、当該ピント合わせ想定部を拡大表示の候補とする(ステップS45)。また、この場合には、合焦判定部11dは、撮影は成功したものと判定してもよい。
また、合焦判定部11dは、撮影直前に位相差が最も小さい領域、即ち、ピント合わせ想定部における撮影直前の位相差よりも、記録された撮像画像の同一領域の位相差の方が大きい場合には、ピント合わせ想定部以外の部分において、記録された撮像画像の位相差が撮影直前の位相差よりも低下した部分を検出する(ステップS46)。そのような部分が存在しない場合には、処理をステップS45に移行し、存在する場合には、処理をステップS47に移行して、当該部分を拡大表示の候補とする。
このように、ここでは、領域ごとの変化を見て、撮影前の位相差を基準とし、同じ領域で撮影後に位相差がどうなったを判定している。大きなぶれや、大きな被写体の画面内の揺れがなければ、この方法は有効であるが、撮影前後で被写体が変わってしまう場合などは、領域ごとでなく、同じ画像を追尾した結果で、位相差変化を判定しても良い。つまり、S44で位相差が増大した場合、ピント合わせ対象が、横のブロックに揺れただけの場合があり得る。この場合は、失敗写真ではないかもしれず、狙った被写体と同じ形状や色のものを被写体判定して追尾し、その位相差が良好なら、その部分を拡大すればよい。上記基準位相差情報は、撮影前後の同じ被写体に対する位相差情報を利用して決定するようにしても良い。
この場合は、S44で、像を追尾した結果で位相差判定してYesに分岐するような設計にしても良いし、S44では同一エリアでの比較とし、仮にとなりのブロックやエリア、領域に被写体がずれても、S46で救えるようにすれば良い。この場合もYesに分岐して、ピントの合った部分が拡大され視認確認可能である。この場合、ピント合わせした領域の隣接ブロックを重点的に検出するようにしたり、あまりに大きく離れたブロックは見ないようにしても良い。また、複数のピント位置での位相差変化の結果を持っていれば、基準として使ってピント変化の状況を判断する時の信頼性が高まる。例えば、撮影前と後で、同じ被写体の位置がずれたのか、完全に消失して、別被写体が現れたのか、などの判定が可能となる。
大きなぶれや、大きな被写体の画面内の揺れがなければ、同じブロック(領域)の位相差情報を利用する方法は有効であるが、撮影前後で被写体の画面内位置が変わってしまう場合などは、領域ごとでなく、上下左右に被写体が揺れた場合を想定し、隣接領域(ブロック)の位相差データを利用したり、同じ画像を追尾した結果で、位相差変化を判定しても良い。ここでは、このような領域分割で同じ領域の利用、隣接領域の利用、類似画像判定などを駆使して、同じ被写体に対する位相差変化を撮影前後で判定しようとしている。
このような用途があるため、撮影時の画像から画像ファイル等に位相差情報を記録しておくと、狙った部分にピントが合ったかどうかが撮影後、いつでも判定しやすい。同様の考え方で、撮影前より撮影時にむしろピントが良くなった被写体も判定しようとしている。
このように、図9の変形例では、像面位相差法を利用した合焦判定が可能である。
(第2の実施の形態)
図10は本発明の第2の実施の形態に採用されるフローチャートである。図10において図4と同一の手順には同一符号を付して説明を省略する。なお、図10では再生時の動作フローは図示を省略している。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図11は横軸にピント位置をとって、丸印によって図5の1~9の数字で示す各領域1~9におけるコントラストの変化を示す説明図である。
図10は本発明の第2の実施の形態に採用されるフローチャートである。図10において図4と同一の手順には同一符号を付して説明を省略する。なお、図10では再生時の動作フローは図示を省略している。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図11は横軸にピント位置をとって、丸印によって図5の1~9の数字で示す各領域1~9におけるコントラストの変化を示す説明図である。
第1の実施の形態においては、撮影直前の各部のコントラストを合焦時の基準コントラストとし、基準コントラストと記録する撮像画像の各部のコントラストとを比較することで、合焦状態を判定した。しかし、撮影直前にオートフォーカスが行われずにマニュアルフォーカスが行われた場合には多くのピント位置でのコントラスト判定が行われないことがあることから、画像各部においてピント位置に応じたコントラストの変化を、合焦判定に必要な分だけ記録することができないことが考えられる。
そこで、本実施の形態においては、撮影直後において、レンズを高速に微小振動させるウォブリング動作を実施させることで、撮影後において合焦判定に用いる各部のコントラストを基準コントラストとして取得する。撮影後の極めて短い時間にウォブリング動作を行うことで、撮影時と略同様の撮影範囲の画像について基準コントラストを求めることができる。
ウォブリング動作によって撮影時に対してピント位置が遠側及び近側にずれた状態の2つの基準コントラストが各部毎に求められる。撮影時におけるコントラストは、記録する撮像画像から取得することができる。撮像画像の各部において、撮影時におけるコントラストが遠側及び近側にピント位置をずらした場合の2つの基準コントラストよりも大きいか否かによって、各部における合焦状態を判定することができる。
図10において、ステップS3’は、図4のステップS3と同様の処理が行われるが、本実施の形態のステップS3’においては、コントラストの判定及び記録処理は不要である。撮影操作に応答して、ステップS50では撮影及び撮像画像の記録が行われる。
次のステップS51においては、コントラスト判定記録部11cは、撮影時のピント位置を遠側にずらす。コントラスト判定記録部11cは、次のステップS52において、撮像部12からの撮像画像が与えられて、各部のコントラストを求める。こうして、撮影時のピント位置よりも遠側にずらされたピント位置での各部のコントラストが求められる。
同様にして、コントラスト判定記録部11cは、ステップS53において、ピント位置を撮影時のピント位置から近側にずらし、その状態において撮像された画像から各部のコントラストを求める(ステップS54)。こうして、撮影時のピント位置よりも近側にずらされたピント位置での各部のコントラストが求められる。
コントラスト判定記録部11cは、ステップS55において、記録される撮像画像の各部のコントラスト、即ち、撮影時における各部のコントラストを求める。コントラスト判定記録部11cの判定結果は合焦判定部11dに与えられる。
合焦判定部11dは、ステップS56において、合焦状態を判定する。即ち、合焦判定部11dは、撮像画像の各部について、撮影時のコントラストとピント位置を遠側及び近側にずらした場合のコントラストとを比較する。合焦判定部11dは、ピント合わせ想定部において、撮影時のコントラストがピント位置を遠側及び近側にずらした場合の基準コントラストの両方よりも大きい場合には、ピント合わせ想定部を拡大表示の候補とする。また、この場合には、合焦判定部11dは、合焦に関して撮影が成功したものと判定してもよい。
また、合焦判定部11dは、ピント合わせ想定部において、撮影時のコントラストがピント位置を遠側及び近側にずらした場合のコントラストのいずれか一方よりも小さい場合には、ピント合わせ想定部以外の各部分について、撮影時のコントラストがピント位置を遠側及び近側にずらした場合のコントラストの両方よりも大きいか否かを判定する。そのような部分が存在しない場合には、ピント合わせ想定部を拡大表示の候補とし、存在する場合には、当該部分を拡大表示の候補とする。
図11は領域5において、撮影時のコントラストに比べてピント位置を遠側にずらした場合のコントラストの方が大きい。一方、領域3については、撮影時のコントラストは、ピント位置を遠側及び近側にずらした場合のコントラストのいずれよりも大きい。従って、図11の例では、領域3が拡大表示の候補に設定される。この場合も、同一領域(ブロック)で撮影前後で比較するだけでなく、被写体が縦横にずれて隣のブロックにずれた場合も考慮し、隣接ブロックのコントラスト変化を基準に、ピントが合ったかどうかを判定してもよく、被写体追尾結果を併用しても良いことは言うまでもない。大きなぶれや、大きな被写体の画面内の揺れがなければ、同じ領域で判定する方法は有効であるが、撮影前後で被写体の画面内位置が変わってしまう場合などは、領域ごとでなく、上下左右に被写体が揺れた場合を想定し、隣接領域(ブロック)のコントラストデータを利用したり、同じ画像を追尾した結果で、コントラスト変化を判定しても良い。ここでは、このような領域分割で同じ領域の利用、隣接領域の利用、類似画像判定などを駆使して、極力、同じ被写体に対するコントラスト変化を撮影前後で判定しようとしており、同様の考え方で、撮影前より撮影時にむしろピントが良くなった被写体も判定しようとしている。
他の作用及び効果は第1の実施の形態と同様である。本実施の形態は、撮影直前に、合焦判定を可能とする程度のコントラストの変化を検出することができない場合等であっても、確実に合焦判定が可能である。
なお、絞りを開くことで、コントラストの変化を強調することが可能である。従って、ステップS51に先だって絞りを開くようにしてもよい。また、上記説明では、撮影直前におけるコントラストは記録しないものとして説明したが、撮影直前において有効なコントラストの記録が行われた場合には、第1の実施の形態と同様に、撮影直前の各部のコントラストと記録する撮像画像の各部のコントラストとの比較によって合焦状態を判定するようにしてもよい。
(第3の実施の形態)
図12は本発明の第3の実施の形態に採用されるフローチャートである。図12において図10と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図13は絞りとぼけ量(コントラスト)との関係を説明するための説明図である。図14は横軸にピント位置をとって、丸印によって図5の1~9の数字で示す各領域1~9におけるコントラストの変化を示す説明図である。
図12は本発明の第3の実施の形態に採用されるフローチャートである。図12において図10と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図13は絞りとぼけ量(コントラスト)との関係を説明するための説明図である。図14は横軸にピント位置をとって、丸印によって図5の1~9の数字で示す各領域1~9におけるコントラストの変化を示す説明図である。
第2の実施の形態においては、撮影時における各部のコントラストと撮影直後に遠側及び近側にピント位置を変化させた場合の各部の基準コントラストとを比較することで、合焦状態を判定した。本実施の形態においては、撮影直後において絞りを変化させた場合の各部のコントラストを基準コントラストとし、撮影時における各部のコントラストと各部の基準コントラストとを比較することで、合焦状態を判定するものである。
図13(a)は合焦時の様子を示しており、被写体から発した光がレンズ71を介して、撮像面に導かれることを示している。レンズ71からの光線73aは絞り72が閉状態の場合を示しており、レンズ71からの光線73b(破線)は絞り72が開状態の場合を示している。ピントが合っている場合には、絞り72の開閉状態に拘わらず、レンズ71からの光線は撮像面において結像する。
一方、図13(b)は非合焦時の様子を示している。図13(b)の例は、ピントが近側にずれて、撮像面からずれた位置に合焦面が位置することを示している。絞り72が閉状態では、レンズ71からの光線は実線の光線74aで表され、絞りが開状態の場合にはレンズ71からの光線は破線の光線74bで表される。絞り72が閉状態では、点光源から発した光は、撮像面上では、図13(b)のずれ量(閉)だけ広がって受光される。また、絞り72が開状態では、点光源から発した光は、撮像面上では、図13(b)のずれ量(開)だけ広がって受光される。
図13(a),(b)から、絞りが閉状態では、合焦時と非合焦時のボケ量は比較的小さく、絞りが開状態では、合焦時と非合焦時のボケ量は比較的大きいことが分かる。ボケ量とコントラストとは対応しており、撮影時におけるコントラストと、絞りを変化させた場合のコントラストとの変化量が小さいほど合焦状態に近く、変化量が大きいほどピントのずれ量が大きいことが分かる。
本実施の形態においては、撮影直後において、絞りを変化させて、各部のコントラストを取得する。なお、この場合にも、撮影後の極めて短い時間に絞りの開閉及びコントラストの判定を行った方がよい。
図12のステップS61においては、コントラスト判定記録部11cは、交換レンズ20の制御部23と通信を行って、図示しない絞りを開方向に変化させることができるか否かを判定する。絞りが閉状態の場合には、十分な光量を受光するためにシャッタースピードを遅くする必要があり、撮影直後の短時間での計測が困難となるので、なるべく絞りを開方向に変化させてコントラストを求めた方がよい。
絞りを開方向に変化させることができる場合には、コントラスト判定記録部11cは、制御部23によって図示しない絞りを開方向に変化させる。コントラスト判定記録部11cは、ステップS62において、撮像部12からの撮像画像が与えられて、絞り開の状態での各部のコントラストを求める。こうして、撮影時の絞り状態と異なる絞り状態での各部の基準コントラストが求められる。
絞りを開方向に変化させることができない場合には、コントラスト判定記録部11cは、絞りを閉方向に変化させるように制御部23を制御する。この場合には、コントラスト判定記録部11cは、ステップS63において、各部の基準コントラストを求める。こうして、ステップS62又はステップS63において、撮影時の絞り状態と異なる絞り状態での各部の基準コントラストが求められる。
コントラスト判定記録部11cは、ステップS55において、記録される撮像画像の各部のコントラスト、即ち、撮影時における各部のコントラストを求める。コントラスト判定記録部11cの判定結果は合焦判定部11dに与えられる。
合焦判定部11dは、ステップS64において、合焦状態を判定する。即ち、合焦判定部11dは、撮像画像の各部について、撮影時のコントラストと絞り状態を変化させた場合のコントラストとの変化量を比較する。合焦判定部11dは、ピント合わせ想定部において、コントラストの変化量が最も小さいか否かを判定する。合焦判定部11dは、ピント合わせ想定部において、コントラストの変化量が最も小さい場合には、ピント合わせ想定部を拡大表示の候補とする。また、この場合には、合焦判定部11dは、合焦に関して撮影が成功したものと判定してもよい。
また、合焦判定部11dは、ピント合わせ想定部において、コントラストの変化量が比較的大きい場合には、ピント合わせ想定部以外の各部分について、コントラストの変化量が十分に小さいか否かを判定する。そのような部分が存在しない場合には、ピント合わせ想定部を拡大表示の候補とし、存在する場合には、当該部分を拡大表示の候補とする。
図14の黒丸は、各領域1~9について、撮影時のコントラストと絞りを変化させた場合の基準コントラストとを示している。2つの黒丸の位置が一致している場合には、合焦状態と判定することができ、2つの黒丸同士の距離が大きいほど、ピントのずれ量が大きいと判断することができる。図14の例では、領域5において、撮影時のコントラストと絞りを変化させた場合のコントラストとの差が比較的大きい。一方、領域3については、撮影時のコントラストと絞りを変化させた場合のコントラストとは相互に一致している。従って、図14の例では、領域3が拡大表示の候補に設定される。
他の作用及び効果は第2の実施の形態と同様である。なお、上記説明においても、撮影直前におけるコントラストは記録しないものとして説明したが、撮影直前において有効なコントラストの記録が行われた場合には、第1の実施の形態と同様に、撮影直前の各部のコントラストと記録する撮像画像の各部のコントラストとの比較によって合焦状態を判定するようにしてもよい。
(第4の実施の形態)
図15は本発明の第4の実施の形態に採用されるフローチャートである。図15において図12と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図16は本実施の形態において採用するピントデータベースの内容を説明するための説明図である。
図15は本発明の第4の実施の形態に採用されるフローチャートである。図15において図12と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第1の実施の形態と同様である。また、図16は本実施の形態において採用するピントデータベースの内容を説明するための説明図である。
上記各実施の形態においては、撮影直前のピント位置、撮影直後のピント位置又は撮影直後の絞りを変化させてコントラストを判定することで、合焦状態を判定した。これに対し、本実施の形態においては、被写体(対象物)や撮影環境毎に予め規定された合焦時の基準コントラスト等の情報を保持するピントデータベースを用い、記録される撮像画像の各部のコントラスト等の被写体情報とピントデータベースから読出した基準コントラスト等の情報との比較によって、撮影パラメータを変更することなく、合焦状態を判定するものである。
図16は記録部19に記録されたピントデータベースの内容を示している。図16では、対象物の例として、人間の眼と文字とを例示している。人間の眼の近傍のまつげや文字等は、合焦状態ではある一定のコントラストが得られるものと考えられる。この場合、例えば、明るい環境下ではコントラストの値は比較的高くなり、暗い環境下ではコントラストの値は比較的低くなる。対象物毎で且つ環境毎に、合焦時に得られるであろうコントラストが基準コントラストとしてピントデータベースに記述されている。
図16の例では、人間の眼は、明るい屋外においては、合焦時にCont1という基準コントラストが得られ、暗い屋内においては、合焦時にCont2という基準コントラストが得られることを示している。同様に、文字については、明るい屋外において合焦時にCont3という基準コントラストが得られ、暗い屋内において合焦時にCont4という基準コントラストが得られる。
また、人間の眼の画像の輪郭の幅についても合焦時においては規定の値が得られるものと考えられる。ピントデータベースには、この値として基準輪郭幅が、明るい屋外用と暗い屋内用とで設定されている。
更に、コントラスト判定記録部11cは、記録部9に記録するピントデータベースを更新する機能を有する。図16の現状新設1(パターン判定)及び現状新設2(パターン判定)は、コントラスト判定記録部11cによって更新記録された情報を示している。コントラスト判定記録部11cは、実際の撮像画像について被写体検出や明るさ検出を行い、検出した被写体毎で撮影環境毎に、合焦時に得られるコントラストを基準コントラストとして記録する。また、コントラスト判定記録部11cは、同一の被写体の撮影についての履歴を記録部9等に保持することにより、最適な基準コントラストに更新する学習機能を備えていてもよい。
図15のステップS71においては、顔検出部11bは、撮像画像中の被写体を検出する。コントラスト判定記録部11cは、検出された被写体毎に、ピントデータベースの情報を参照する(ステップS72)。コントラスト判定記録部11cは、ステップS73において、ピントデータベースが想定している被写体のサイズに合わせて、撮像画像中の被写体のサイズを拡大又は縮小することで一致させる。この状態で、コントラスト判定記録部11cは、撮影画像の各被写体のコントラストを求める(ステップS55)。コントラスト判定記録部11cの判定結果は合焦判定部11dに与えられる。
合焦判定部11dは、ステップS74において、合焦状態を判定する。即ち、合焦判定部11dは、撮像画像の各被写体について、撮像画像のコントラストとピントデータベースに記述された基準コントラストとを比較する。合焦判定部11dは、ピント合わせ想定部において、撮像画像のコントラストと基準コントラストとの差が最も小さいか否かを判定する。合焦判定部11dは、ピント合わせ想定部において、コントラストの差が最も小さい場合には、ピント合わせ想定部を拡大表示の候補とする。また、この場合には、合焦判定部11dは、合焦に関して撮影が成功したものと判定してもよい。
また、合焦判定部11dは、ピント合わせ想定部について、撮像画像のコントラストと基準コントラストとの差が比較的大きい場合には、ピント合わせ想定部以外の各被写体について、コントラストの差が十分に小さいか否かを判定する。そのような部分が存在しない場合には、ピント合わせ想定部を拡大表示の候補とし、存在する場合には、当該部分を拡大表示の候補とする。
なお、合焦判定部11dは、撮像画像中の被写体の輪郭幅とピントデータベース中の基準輪郭幅との差を用いて、合焦判定してもよい。
他の作用及び効果は第3の実施の形態と同様である。なお、上記説明においても、撮影直前におけるコントラストは記録しないものとして説明したが、撮影直前において有効なコントラストの記録が行われた場合には、第1の実施の形態と同様に、撮影直前の各部のコントラストと記録する撮像画像の各部のコントラストとの比較によって合焦状態を判定するようにしてもよい。
さらに、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末(PDA:Personal Digital Assist)等に内蔵されるカメラでも勿論構わない。また、内視鏡、顕微鏡のような産業用、医療用の光学機器でもよい。撮影機器でなくとも、このような工夫によって、ユーザが希望する画像を正確に観察できる観察装置、表示装置を提供することが可能となる。
また、撮影機器でなくとも、撮影の失敗判定用の表示機器にも、こうした画像の特徴を判定して、ユーザに次回撮影時の示唆や教訓やアドバイスを与える技術は重要である。ここで分析する画像ファイルに、カメラの設定情報が入っていれば、画像の特徴としてコントラストの情報を含ませる事も可能である。
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。
また、ここで説明した技術のうち、主にフローチャートで説明した制御や機能は、多くがプログラムにより設定可能であり、そのプログラムをコンピュータが読み取り実行することで上述した制御や機能を実現することができる。そのプログラムは、コンピュータプログラム製品として、フレキシブルディスク、CD-ROM等、不揮発性メモリ等の可搬媒体や、ハードディスク、揮発性メモリ等の記憶媒体に、その全体あるいは一部を記録又は記憶することができ、製品出荷時又は可搬媒体或いは通信回線を介して流通又は提供可能である。利用者は、通信ネットワークを介してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールすることで、容易に本実施の形態の撮影機器を実現することができる。
本出願は、2013年9月17日に日本国に出願された特願2013-192252号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。
Claims (15)
- 被写体を撮像し撮像画像を得る撮像部と、
上記撮像画像を表示する表示部と、
上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準コントラストを取得する基準コントラスト判定部と、
記録する上記撮像画像の各部のコントラストを求める記録画像コントラスト判定部と、
上記基準コントラスト判定部が取得した基準コントラストと上記記録画像コントラスト判定部が求めたコントラストとの比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定部と、
上記合焦判定部による判定結果を、記録する上記撮像画像と共に上記表示部に表示する表示制御部と
を具備したことを特徴とする撮影機器。 - 上記基準コントラストは、合焦制御時に得られたコントラスト変化データに従って得られた値である
ことを特徴とする請求項1に記載の撮影機器。 - 上記基準コントラストは、撮影前後の同じ被写体に対するコントラストを利用して決定する
ことを特徴とする請求項1又は2に記載の撮影機器。 - 上記合焦判定部は、記録する上記撮像画像の各部のうち合焦状態の部分を示す案内表示を上記判定結果として上記表示制御部に表示させる
ことを特徴とする請求項1乃至3のいずれか1つに記載の撮影機器。 - 上記合焦判定部は、上記撮像画像中に設定されるピント合わせ想定部以外の部分について上記案内表示を上記表示制御部に表示させる
ことを特徴とする請求項4に記載の撮影機器。 - 上記表示制御部は、上記案内表示の部分を拡大表示する
ことを特徴とする請求項4又は5に記載の撮影機器。 - 上記基準コントラスト判定部は、記録する上記撮像画像の撮影前におけるフォーカス操作時のコントラストの最大値を上記基準コントラストとする
ことを特徴とする請求項1乃至6のいずれか1つに記載の撮影機器。 - 上記基準コントラスト判定部は、記録する上記撮像画像の撮影後においてピント位置を遠側及び近側に移動させて取得したコントラストを上記基準コントラストとする
ことを特徴とする請求項1乃至6のいずれか1つに記載の撮影機器。 - 上記基準コントラスト判定部は、記録する上記撮像画像の撮影後において絞りを変化させて取得したコントラストを上記基準コントラストとする
ことを特徴とする請求項1乃至6のいずれか1つに記載の撮影機器。 - 上記基準コントラスト判定部は、被写体及び撮影環境毎に予め求められた合焦時のコントラストを上記基準コントラストとする
ことを特徴とする請求項1乃至6のいずれか1つに記載の撮影機器。 - 被写体を撮像し撮像画像を得る撮像ステップと、
上記撮像画像を表示部に表示する第1の表示制御ステップと、
上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準コントラストを取得する基準コントラスト判定ステップと、
記録する上記撮像画像の各部のコントラストを求める記録画像コントラスト判定ステップと、
上記基準コントラスト判定ステップにおいて取得した基準コントラストと上記記録画像コントラスト判定ステップにおいて求めたコントラストとの比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、
上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップと
を具備したことを特徴とする撮影方法。 - 撮像用の画素及び焦点検出用の画素を備え、被写体を撮像し撮像画像を得る撮像部と、
上記撮像画像を表示する表示部と、
上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定部と、
記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定部と、
上記基準位相差判定部が取得した基準位相差と上記記録画像位相差判定部が求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定部と、
上記合焦判定部による判定結果を、記録する上記撮像画像と共に上記表示部に表示する表示制御部と
を具備したことを特徴とする撮影機器。 - 上記基準位相差は、合焦制御時に得られた位相差データに従って得られた値である
ことを特徴とする請求項12に記載の撮影機器。 - 撮像用の画素及び焦点検出用の画素を備え、被写体を撮像し撮像画像を得る撮像ステップと、
上記撮像画像を表示部に表示する第1の表示制御ステップと、
上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定ステップと、
記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定ステップと、
上記基準位相差判定ステップにおいて取得した基準位相差と上記記録画像位相差判定ステップにおいて求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、
上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップと
を具備したことを特徴とする撮影機器。 - コンピュータに、
撮像用の画素及び焦点検出用の画素を備えた撮像部が被写体を撮像して得た撮像画像を表示部に表示する第1の表示制御ステップと、
上記撮像画像の各部について、合焦及び非合焦の判定に用いる基準位相差を上記焦点検出用の画素の出力に基づいて取得する基準位相差判定ステップと、
記録する上記撮像画像の各部について上記焦点検出用の画素の出力に基づく位相差を求める記録画像位相差判定ステップと、
上記基準位相差判定ステップにおいて取得した基準位相差と上記記録画像位相差判定ステップにおいて求めた位相差との比較によって、記録する上記撮像画像の合焦状態を判定する合焦判定ステップと、
上記合焦判定ステップにおける判定結果を、記録する上記撮像画像と共に上記表示部に表示する第2の表示制御ステップと
を実行させるための撮影表示プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201480001865.8A CN104641627B (zh) | 2013-09-17 | 2014-07-10 | 拍摄设备和拍摄方法 |
EP14815210.1A EP2878983A4 (en) | 2013-09-17 | 2014-07-10 | IMAGING DEVICE, IMAGING METHOD, AND IMAGE DISPLAY PROGRAM |
US14/589,529 US9756235B2 (en) | 2013-09-17 | 2015-01-05 | Photographing apparatus, photographing method and recording medium on which photographing/display program is recorded |
US15/668,255 US10367990B2 (en) | 2013-09-17 | 2017-08-03 | Photographing apparatus, photographing method and recording medium on which photographing/display program is recorded |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013192252A JP5743236B2 (ja) | 2013-09-17 | 2013-09-17 | 撮影機器及び撮影方法 |
JP2013-192252 | 2013-09-17 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US14/589,529 Continuation US9756235B2 (en) | 2013-09-17 | 2015-01-05 | Photographing apparatus, photographing method and recording medium on which photographing/display program is recorded |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2015040935A1 true WO2015040935A1 (ja) | 2015-03-26 |
Family
ID=52688595
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2014/068416 WO2015040935A1 (ja) | 2013-09-17 | 2014-07-10 | 撮影機器、撮影方法及び撮影表示プログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US9756235B2 (ja) |
EP (1) | EP2878983A4 (ja) |
JP (1) | JP5743236B2 (ja) |
CN (1) | CN104641627B (ja) |
WO (1) | WO2015040935A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104390981A (zh) * | 2014-12-12 | 2015-03-04 | 宁波江丰生物信息技术有限公司 | 基于图像采集装置的快速准确对焦扫描病理切片组织的方法 |
CN105004723A (zh) * | 2015-06-25 | 2015-10-28 | 宁波江丰生物信息技术有限公司 | 病理切片扫描3d成像与融合装置及方法 |
US10761294B2 (en) | 2015-06-18 | 2020-09-01 | Sony Corporation | Display control device and display control method |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5743236B2 (ja) * | 2013-09-17 | 2015-07-01 | オリンパス株式会社 | 撮影機器及び撮影方法 |
US10904425B2 (en) * | 2017-11-06 | 2021-01-26 | Canon Kabushiki Kaisha | Image processing apparatus, control method therefor, and storage medium for evaluating a focusing state of image data |
KR102438201B1 (ko) * | 2017-12-01 | 2022-08-30 | 삼성전자주식회사 | 사진 촬영과 관련된 추천 정보를 제공하는 방법 및 시스템 |
CN109600604B (zh) * | 2018-11-09 | 2020-07-03 | 歌尔股份有限公司 | 对比度测试方法、装置和计算机可读存储介质 |
CN112584043B (zh) * | 2020-12-08 | 2023-03-24 | 维沃移动通信有限公司 | 辅助对焦方法、装置、电子设备及存储介质 |
KR20230149932A (ko) * | 2022-04-21 | 2023-10-30 | 주식회사 케이랩 | 초점 거리 측정 장치 및 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007235869A (ja) * | 2006-03-03 | 2007-09-13 | Casio Comput Co Ltd | 撮影装置及びプログラム |
JP2008004996A (ja) * | 2006-06-20 | 2008-01-10 | Casio Comput Co Ltd | 撮像装置及びそのプログラム |
JP2008092299A (ja) | 2006-10-02 | 2008-04-17 | Nikon System:Kk | 電子カメラ |
JP2011124806A (ja) * | 2009-12-10 | 2011-06-23 | Canon Inc | 撮像装置及びその制御方法及びプログラム |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3956860B2 (ja) * | 2003-02-05 | 2007-08-08 | コニカミノルタフォトイメージング株式会社 | 撮像装置 |
JP2006058405A (ja) * | 2004-08-18 | 2006-03-02 | Casio Comput Co Ltd | カメラ装置、オートフォーカス制御方法 |
JP2006086952A (ja) | 2004-09-17 | 2006-03-30 | Casio Comput Co Ltd | デジタルカメラ、および、プログラム |
JP4288612B2 (ja) * | 2005-09-14 | 2009-07-01 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
JP2007248782A (ja) * | 2006-03-15 | 2007-09-27 | Olympus Imaging Corp | 焦点調節装置およびカメラ |
US7483054B2 (en) * | 2006-03-16 | 2009-01-27 | Altek Corporation | Image unsharpness test method for a camera device |
JP4127297B2 (ja) * | 2006-06-09 | 2008-07-30 | ソニー株式会社 | 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム |
US20080084584A1 (en) * | 2006-10-04 | 2008-04-10 | Nokia Corporation | Emphasizing image portions in an image |
JP2008096610A (ja) * | 2006-10-11 | 2008-04-24 | Sanyo Electric Co Ltd | 自動焦点調節装置およびその調節方法 |
US7844176B2 (en) * | 2007-08-01 | 2010-11-30 | Olympus Imaging Corp. | Imaging device, and control method for imaging device |
JP5173453B2 (ja) * | 2008-01-22 | 2013-04-03 | キヤノン株式会社 | 撮像装置及び該撮像装置の表示制御方法 |
JP5027029B2 (ja) * | 2008-03-25 | 2012-09-19 | オリンパスイメージング株式会社 | 拡大表示機能付きカメラおよびカメラの制御方法 |
KR101505681B1 (ko) * | 2008-09-05 | 2015-03-30 | 엘지전자 주식회사 | 터치 스크린을 구비한 이동 단말기 및 이를 이용한 이미지 촬상 방법 |
JP5163446B2 (ja) * | 2008-11-25 | 2013-03-13 | ソニー株式会社 | 撮像装置、撮像方法及びプログラム |
JP5223644B2 (ja) * | 2008-12-15 | 2013-06-26 | パナソニック株式会社 | 撮像装置 |
JP2011017800A (ja) * | 2009-07-07 | 2011-01-27 | Canon Inc | 焦点検出装置 |
JP5657235B2 (ja) * | 2009-11-10 | 2015-01-21 | オリンパスイメージング株式会社 | 画像撮像装置及び画像撮像方法 |
JP5623254B2 (ja) * | 2010-11-29 | 2014-11-12 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP5800498B2 (ja) * | 2010-12-17 | 2015-10-28 | キヤノン株式会社 | 自動焦点調整装置およびそれを有するレンズ装置 |
US8717477B2 (en) * | 2011-03-30 | 2014-05-06 | Panasonic Corporation | Imaging apparatus switching between display of image and enlarged image of focus area |
WO2013061947A1 (ja) | 2011-10-28 | 2013-05-02 | 富士フイルム株式会社 | 撮像方法及び画像処理方法並びにそれらのプログラム、記録媒体、及び撮像装置 |
KR101822462B1 (ko) * | 2011-11-29 | 2018-01-30 | 삼성전자주식회사 | Ui 제공 방법 및 이를 적용한 영상 촬영 장치 |
JP5936404B2 (ja) * | 2012-03-23 | 2016-06-22 | キヤノン株式会社 | 撮像装置、その制御方法およびプログラム |
JP5967432B2 (ja) * | 2012-09-11 | 2016-08-10 | ソニー株式会社 | 処理装置、処理方法、及び、プログラム |
JP5743236B2 (ja) * | 2013-09-17 | 2015-07-01 | オリンパス株式会社 | 撮影機器及び撮影方法 |
-
2013
- 2013-09-17 JP JP2013192252A patent/JP5743236B2/ja not_active Expired - Fee Related
-
2014
- 2014-07-10 WO PCT/JP2014/068416 patent/WO2015040935A1/ja active Application Filing
- 2014-07-10 CN CN201480001865.8A patent/CN104641627B/zh not_active Expired - Fee Related
- 2014-07-10 EP EP14815210.1A patent/EP2878983A4/en not_active Withdrawn
-
2015
- 2015-01-05 US US14/589,529 patent/US9756235B2/en active Active
-
2017
- 2017-08-03 US US15/668,255 patent/US10367990B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007235869A (ja) * | 2006-03-03 | 2007-09-13 | Casio Comput Co Ltd | 撮影装置及びプログラム |
JP2008004996A (ja) * | 2006-06-20 | 2008-01-10 | Casio Comput Co Ltd | 撮像装置及びそのプログラム |
JP2008092299A (ja) | 2006-10-02 | 2008-04-17 | Nikon System:Kk | 電子カメラ |
JP2011124806A (ja) * | 2009-12-10 | 2011-06-23 | Canon Inc | 撮像装置及びその制御方法及びプログラム |
Non-Patent Citations (1)
Title |
---|
See also references of EP2878983A4 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104390981A (zh) * | 2014-12-12 | 2015-03-04 | 宁波江丰生物信息技术有限公司 | 基于图像采集装置的快速准确对焦扫描病理切片组织的方法 |
US10761294B2 (en) | 2015-06-18 | 2020-09-01 | Sony Corporation | Display control device and display control method |
US11500174B2 (en) | 2015-06-18 | 2022-11-15 | Sony Corporation | Display control device and display control method |
CN105004723A (zh) * | 2015-06-25 | 2015-10-28 | 宁波江丰生物信息技术有限公司 | 病理切片扫描3d成像与融合装置及方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2015059998A (ja) | 2015-03-30 |
CN104641627B (zh) | 2018-11-16 |
EP2878983A4 (en) | 2016-04-06 |
US10367990B2 (en) | 2019-07-30 |
US9756235B2 (en) | 2017-09-05 |
EP2878983A1 (en) | 2015-06-03 |
JP5743236B2 (ja) | 2015-07-01 |
CN104641627A (zh) | 2015-05-20 |
US20170359502A1 (en) | 2017-12-14 |
US20150116551A1 (en) | 2015-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5743236B2 (ja) | 撮影機器及び撮影方法 | |
JP6112925B2 (ja) | 表示機器及び表示方法 | |
US8654203B2 (en) | Imaging device controlling operation of a zoom lens and a focus lens to create movie image data | |
JP2014179942A (ja) | 撮影機器及び撮影方法 | |
JP2019176249A (ja) | 画像処理装置、画像処理方法、画像処理プログラム及び撮像装置 | |
JP2014107750A (ja) | 撮影機器 | |
KR20130081069A (ko) | 디지털 촬영 장치 및 이의 제어 방법 | |
JP4941141B2 (ja) | 撮像装置 | |
JP2014220622A (ja) | 撮影機器、撮影支援方法、表示装置及び表示方法 | |
JP2014053863A (ja) | 撮影機器 | |
JP5608803B1 (ja) | 撮影機器、撮影方法及び撮影制御プログラム | |
JP6042936B2 (ja) | 撮影機器及び撮影方法 | |
JP5581838B2 (ja) | 自動合焦制御装置、電子カメラ及び自動合焦制御方法 | |
JP4922066B2 (ja) | カメラ | |
JP2008244805A (ja) | デジタルカメラ | |
JP2015061129A (ja) | 撮影機器及び撮影方法 | |
JP6357922B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP5551526B2 (ja) | 撮影装置及び撮影装置の動作方法 | |
JP6610713B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2015088783A (ja) | 撮影機器、表示方法及び表示制御プログラム | |
JP2016127492A (ja) | 撮像装置、操作支援方法及び操作支援プログラム | |
JP2016127451A (ja) | 撮像装置及び撮像方法 | |
JP2014036269A (ja) | 撮影機器 | |
JP2014207580A (ja) | 撮影機器 | |
JP5659856B2 (ja) | 撮像装置、撮像方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 2014815210 Country of ref document: EP |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 14815210 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |