JP5454158B2 - Imaging apparatus, control method thereof, and program - Google Patents

Imaging apparatus, control method thereof, and program Download PDF

Info

Publication number
JP5454158B2
JP5454158B2 JP2010006576A JP2010006576A JP5454158B2 JP 5454158 B2 JP5454158 B2 JP 5454158B2 JP 2010006576 A JP2010006576 A JP 2010006576A JP 2010006576 A JP2010006576 A JP 2010006576A JP 5454158 B2 JP5454158 B2 JP 5454158B2
Authority
JP
Japan
Prior art keywords
image
imaging
live view
captured
designated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010006576A
Other languages
Japanese (ja)
Other versions
JP2011146957A5 (en
JP2011146957A (en
Inventor
一記 喜多
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2010006576A priority Critical patent/JP5454158B2/en
Publication of JP2011146957A publication Critical patent/JP2011146957A/en
Publication of JP2011146957A5 publication Critical patent/JP2011146957A5/ja
Application granted granted Critical
Publication of JP5454158B2 publication Critical patent/JP5454158B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)

Description

本発明は、デジタルカメラ等の撮像装置、その制御方法およびプログラムに関し、特に、画像再生用の表示部を備えた撮像装置、その制御方法およびプログラムに関する。   The present invention relates to an imaging apparatus such as a digital camera, a control method thereof, and a program, and more particularly, to an imaging apparatus provided with a display unit for image reproduction, a control method thereof, and a program thereof.

フィルムを感光させることによって被写体像を写し取る、いわゆる銀塩カメラは古くから使用されてきたが、今日においては、CCD等の電子撮像デバイスと、導体メモリ等の記憶デバイスとを用いて被写体像を電子的に記録する、いわゆるデジタルカメラ等の撮像装置が広く普及している。この電子記録画像は、正確には画像ファイルであり、必要に応じてそのカメラや他の画像処理装置(パーソナルコンピュータ等)の画面に表示され、あるいは、紙の上に印刷される。厳密には“写真”は、この印刷物のことをいうが、広く一般には画面に表示された画像のことも(ただし、それがカメラで撮影されたものである場合)、“写真”と表現されていることを考慮し、本明細書でも画像と写真を区別しないことにする。   A so-called silver salt camera that captures a subject image by exposing a film to light has been used for a long time. Today, however, an electronic image pickup device such as a CCD and a storage device such as a conductor memory are used to electronically capture the subject image. An image pickup apparatus such as a so-called digital camera that records images is widely used. This electronically recorded image is precisely an image file, and is displayed on the screen of the camera or other image processing apparatus (such as a personal computer) as necessary, or printed on paper. Strictly speaking, "photograph" refers to this printed matter, but generally, an image displayed on the screen (if it was taken with a camera) is also expressed as "photograph". In this specification, the image and the photograph are not distinguished from each other.

デジタルカメラの利点の第一は、フィルム代がかからないことにある。つまり撮影コストが安いことにあり、第二は、その場ですぐに撮影結果を確認できることにある。この第二の利点は画像再生用の表示部を必要とするが、安価なものを除いて多くのデジタルカメラにはプレビューやレビュー用の表示部(一般的に数インチ程度の大きさの液晶表示パネル)が備えられているのが普通であるので、ほとんどのデジタルカメラは上記の第一と第二の利点を有していると言って差し支えない。   The first advantage of a digital camera is that it does not cost a film. In other words, the shooting cost is low, and the second is that the shooting result can be confirmed immediately on the spot. The second advantage is that it requires a display unit for image playback, but many digital cameras, except for inexpensive ones, have a display unit for previews and reviews (typically a liquid crystal display with a size of several inches). It is normal to say that most digital cameras have the first and second advantages described above.

さて、かかる二つの利点を有するデジタルカメラ等の撮像装置にあっては、旧来の銀塩カメラに比べて、完成度の高い写真を容易に撮影することができる。これは、上記の第一の利点から、撮影可能な写真枚数がきわめて多い(記憶デバイスの容量によっては数千枚にも及ぶ)からであり、たとえば、ある被写体に対して露出条件等を段階的に変更したブラケット撮影をいつでも気軽に行うことができるからである。加えて、上記の第二の利点から、撮影後の画像をその場ですぐに確認できるため、気に入らなければ試行錯誤的に何度でも撮り直すことができるからである。   Now, in an imaging apparatus such as a digital camera having these two advantages, it is possible to easily take a photograph with a high degree of completeness compared to a conventional silver salt camera. This is because, from the above-mentioned first advantage, the number of photographs that can be taken is extremely large (thousands depending on the capacity of the storage device). This is because it is possible to easily perform bracket shooting that has been changed to. In addition, because of the second advantage described above, an image after photographing can be confirmed immediately on the spot, and therefore, if the user does not like it, it can be retaken again and again by trial and error.

このように、デジタルカメラ等の撮像装置は、誰でも簡単に完成度の高い写真を撮影することができるが、それでも、撮影意図にマッチしたピント合わせ位置調整や、被写体の露出に適合した露出調整などの面倒な操作を行わなければならない点は、旧来の銀塩カメラと同じであることから、これらの調整作業を支援する様々な技術が提案されている。   In this way, an imaging device such as a digital camera can be used to easily capture highly complete photos, but it is still possible to adjust the focus position that matches the shooting intention and exposure adjustment that matches the exposure of the subject. Since the troublesome operation such as the above is the same as the conventional silver halide camera, various techniques for supporting these adjustment operations have been proposed.

たとえば、下記の特許文献1には、画像撮影直後に撮影画像を再生表示する際に、その画像の一部を拡大表示してピントの状態を確認できるようにした技術(以下、従来技術1という)が記載されている。
また、下記の特許文献2には、撮影画像の再生画面上に、任意の位置に移動可能なターゲットフレームを表示し、そのターゲットフレーム内の合焦ポイントを特定して、その特定位置に、小さなフレームを表示するようにした技術(以下、従来技術2という)が記載されている。
また、下記の特許文献3には、顔認識機能を備えた撮像装置において、所定のボタンを押すたびにそれぞれの顔を順繰りに拡大表示するようにした技術(以下、従来技術3という)が記載されている。
また、下記の特許文献4には、被写体像の輝度分布を三次元グラフで表示すると共に、コントラストの分布状態を表示するようにした技術(以下、従来技術4という)が記載されている。
また、下記の特許文献5には、手動でピント合わせ(マニュアルフォーカス)を行う際に、ライブビュー画像の被写体のエッジからフォーカスの程度を示す評価値を求め、その評価値をバーグラフで視覚的に表示するようにした技術(以下、従来技術5という)が記載されている。
For example, in Patent Document 1 below, when a captured image is reproduced and displayed immediately after the image is captured, a part of the image is displayed in an enlarged manner so that the focus state can be confirmed (hereinafter referred to as Conventional Technology 1). ) Is described.
Further, in Patent Document 2 below, a target frame that can be moved to an arbitrary position is displayed on a reproduction screen of a captured image, a focusing point in the target frame is specified, and a small point is displayed at the specific position. A technique for displaying a frame (hereinafter referred to as conventional technique 2) is described.
Patent Document 3 below describes a technique (hereinafter referred to as Conventional Technology 3) in which each face is sequentially enlarged and displayed each time a predetermined button is pressed in an imaging apparatus having a face recognition function. Has been.
Patent Document 4 below describes a technique (hereinafter referred to as Conventional Technique 4) that displays a luminance distribution of a subject image in a three-dimensional graph and a contrast distribution state.
In Patent Document 5 below, when manually focusing (manual focus), an evaluation value indicating the degree of focus is obtained from the edge of the subject of the live view image, and the evaluation value is visually displayed as a bar graph. The technique (hereinafter referred to as the conventional technique 5) that is displayed on the screen is described.

特開2000−236474号公報JP 2000-236474 A 特開2004−242011号公報JP 2004-242011 A 特開2007−20029号公報Japanese Patent Laid-Open No. 2007-20029 特開2007−151034号公報JP 2007-155103 A 特開2002−209135号公報JP 2002-209135 A

しかしながら、上記の従来技術1〜4は、いずれも、撮影済み画像に対するピント合わせや露出条件設定の結果確認を行うものであって、要するに“事後的”な確認手段を提供しているに過ぎないから、その確認によって失敗写真であると判断され場合に撮り直しを行わなければならないという問題点がある。また、上記の従来技術5は、マニュアルフォーカスを行う際に用いられるものであるから、そのまま、ピント合わせを自動で行うもの(オートフォーカス)に適用できないという問題点がある。   However, each of the above prior arts 1 to 4 is for confirming the result of focusing or setting exposure conditions for a photographed image, and in short, only provides a “post-mortem” confirmation means. Therefore, there is a problem that if the photograph is determined to be a failed photo by the confirmation, it must be retaken. Further, since the above-described conventional technique 5 is used when performing manual focusing, there is a problem that it cannot be applied to an apparatus that automatically performs focusing (autofocus).

具体例を説明する。今、撮影済み画像を確認したところ、露出不足の写真であったとする。この場合、一般的にはプラス側の露出補正を行って撮り直しを行うが、不適切な補正量によっては再び露出アンダーや露出オーバーとなって再度、失敗写真になるおそれがある。   A specific example will be described. Suppose now that the photographed image is confirmed to be an underexposed photograph. In this case, in general, a positive exposure correction is performed and re-shooting is performed. However, depending on an inappropriate correction amount, there is a risk that the image will again be underexposed or overexposed and become a failed photo again.

ピントのズレも同様である。とりわけ、低めのシャッター速度の場合は手ブレに起因するピントズレが生じやすく、または、合焦ポイントを自動選択する撮像装置の場合には、意図しないポイントにピントが合ってしまうことがあり、いずれも失敗写真につながる。   The same applies to the focus shift. In particular, at low shutter speeds, it is easy to cause out-of-focus due to camera shake, or in the case of an imaging device that automatically selects the in-focus point, it may focus at an unintended point. Lead to failure photos.

そこで、本発明の目的は、ライブビュー画像を見ながら、写真の仕上がりに影響する各種パラメータ、たとえば、合焦ポイントの指定や露出条件(絞り値やシャッタ速度及び撮影感度等)の設定、前景や背景のボケ具合などを“事前に”設定できるようにし、もって撮り直しを極力回避できる撮像装置、その制御方法およびプログラムを提供することにある。   Accordingly, an object of the present invention is to set various parameters that affect the finish of a photograph while viewing a live view image, such as designation of a focus point, setting of exposure conditions (aperture value, shutter speed, shooting sensitivity, etc.), foreground, An object of the present invention is to provide an imaging apparatus capable of setting a background blur condition “in advance” and avoiding re-shooting as much as possible, a control method therefor, and a program therefor.

本発明は、撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、を備え、前記撮影制御手段は、前記指定位置の画像状態を変化させる場合に、前記撮像手段による撮像の際の撮影条件を優先的に変化させ、この撮影条件の変化では指定された画像状態にすることができない場合に、撮影画像の記録前に行う画像処理の画像処理条件を変化させることを特徴とする撮像装置は、請求項1記載の発明は、撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、を備えたことを特徴とする撮像装置、撮像装置の制御方法またはプログラムである。The present invention provides display control means for sequentially displaying live view images for confirmation of shooting composition, which are sequentially output from the imaging means, on the display means, and allows the user to specify an arbitrary position on the live view image, and this designated position. And an image picked up by the image pickup means so that the image state based on the predetermined viewpoint at the specified position becomes the specified image state. Shooting control means for changing the imaging condition or image processing condition when recording the image, and the shooting control means, when changing the image state at the specified position, the shooting condition at the time of imaging by the imaging means Is changed preferentially, and if this change in shooting conditions does not produce the specified image state, In the imaging apparatus characterized in that the image processing conditions of the image processing are changed, the invention according to claim 1 is a display in which a live view image for photographing composition confirmation sequentially output from the imaging means is displayed on the display means. A control unit; a specifying unit that allows a user to specify an arbitrary position on the live view image; and a user to arbitrarily specify an image state based on a predetermined viewpoint at the specified position; and the predetermined viewpoint at the specified position. Imaging control means for changing an imaging condition or an image processing condition when recording an image captured by the imaging means so that an image state based on the image becomes the designated image state. An imaging apparatus, an imaging apparatus control method, or a program.
また、他の態様による発明は、撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、を備え、前記指定手段は、前記ライブビュー画像上に、前記画像状態を変化させる方向が夫々異なる複数のマーカオブジェクトを表示し、このマーカオブジェクト上のユーザー操作に応じて、操作されたマーカオブジェクトに対応する方向に画像状態を変化させることを指定することを特徴とする撮像装置、撮像装置の制御方法またはプログラムである。According to another aspect of the invention, display control means for sequentially displaying live view images for confirming shooting composition sequentially output from the imaging means on the display means, and allowing a user to specify an arbitrary position on the live view image. In addition, designation means for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position, and the imaging so that the image state based on the predetermined viewpoint at the designated position becomes the designated image state. Photographing control means for changing an imaging condition or an image processing condition for recording an image picked up by the means, and the designation means has a plurality of directions in which the image state is changed on the live view image. The marker object is displayed, and the operated marker object is displayed according to the user operation on this marker object. Imaging apparatus characterized by specifying the changing image states in the direction corresponding to the extract, which is a control method or a program of an imaging device.
また、他の態様による発明は、撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、前記撮像手段から取り込まれた撮影画像を複数の領域に分割し、この分割された各領域毎に、2次元フーリエ変換または2次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化した画質評価値を算出する画質評価手段と、前記画質評価手段により各領域毎に数値化された画質評価値を前記ライブビュー画像とともに表示する画質表示手段とを備えたことを特徴とする撮像装置、撮像装置の制御方法またはプログラムである。According to another aspect of the invention, display control means for sequentially displaying live view images for confirming shooting composition sequentially output from the imaging means on the display means, and allowing a user to specify an arbitrary position on the live view image. In addition, designation means for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position, and the imaging so that the image state based on the predetermined viewpoint at the designated position becomes the designated image state. The imaging control means for changing the imaging condition or image processing condition when recording the image captured by the means, and the captured image captured from the imaging means are divided into a plurality of areas, and for each of the divided areas, Performs two-dimensional Fourier transform or two-dimensional discrete cosine transform to obtain the distribution state of each frequency component, and the ratio of high frequency components or low frequency Image quality evaluation means for calculating an image quality evaluation value in which the ratio of components is quantified, and image quality display means for displaying the image quality evaluation value quantified for each area by the image quality evaluation means together with the live view image. An image pickup apparatus, an image pickup apparatus control method, or a program.

本発明によれば、ライブビュー画像を見ながら、写真の仕上がりに影響する各種パラメータ、たとえば、合焦ポイントの指定や露出条件(絞り値やシャッタ速度及び撮影感度等)の設定、前景や背景のボケ具合などを“事前に”設定することができ、もって撮り直しを極力回避できる撮像装置、その制御方法およびプログラムを提供することができる。   According to the present invention, while viewing a live view image, various parameters that affect the finish of a photograph, such as designation of a focus point, setting of exposure conditions (aperture value, shutter speed, photographing sensitivity, etc.), foreground and background It is possible to provide an imaging apparatus that can set a blur condition and the like “in advance” and can avoid re-taking as much as possible, a control method thereof, and a program therefor.

デジタルカメラ1の正面図及び背面図である。2 is a front view and a rear view of the digital camera 1. FIG. デジタルカメラの内部ブロック構成図である。It is an internal block block diagram of a digital camera. 従来公知の撮影モードと再生モードの状態遷移図である。It is a state transition diagram of a conventionally known shooting mode and playback mode. 本実施形態の特徴的事項を示す概念的な構成図である。It is a notional block diagram which shows the characteristic matter of this embodiment. インターフェース画面の一例を示す図である。It is a figure which shows an example of an interface screen. インターフェース画面60の直感的操作を示す図である。It is a figure which shows intuitive operation of the interface screen. 露出補正の概念図である。It is a conceptual diagram of exposure correction. 色温度と画像との関係を示す図である。It is a figure which shows the relationship between color temperature and an image. 中央制御部53のCPU53aで実行される制御プログラムの要部フローを示す図である。It is a figure which shows the principal part flow of the control program run by CPU53a of the central control part 53. FIG. ボケのある劣化画像からボケの無い原画像を復元する場合の概念図である。It is a conceptual diagram in the case of restoring the original image without blur from the degraded image with blur. ボケの調節結果を確認する為のいくつかのユーザインターフェース例を示す図である。It is a figure which shows some user interface examples for confirming the adjustment result of a blur.

以下、本発明の実施形態を、デジタルカメラへの適用を例にして、図面を参照しながら説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings, taking application to a digital camera as an example.

図1は、デジタルカメラ1の正面図及び背面図である。この図において、デジタルカメラ1は、たとえば、箱状薄形のカメラボディ2の前面に沈胴式のレンズ鏡筒3や、ストロボ発光窓4、光学式ファインダ前面窓5及びマイク用集音穴6などを配置すると共に、カメラボディ2の上面に電源スイッチ7及びシャッターボタン8などを配置しており、さらに、カメラボディ2の背面に光学式ファインダ後面窓9、スピーカ用拡声穴10、撮影モード/再生モード切り換えスイッチ11、ズーム操作兼再生表示モード切替スイッチ12、MENUボタン13、上下左右方向移動ボタン14、SETボタン15、DISPボタン16、タッチパネル17及び液晶パネル18などを配置し、加えて、カメラボディ2の底面に不図示の三脚固定用ネジ穴部及び蓋19を設け、この蓋19の内部にバッテリ20とカード型メモリまたはカード型ハードディスクなどの大容量記憶デバイス21とを着脱可能な状態で実装している。また、カメラボディ2の任意位置(図では背面から見た右側面の上部位置)に横方向の深穴22が穿設されており、この深穴22に、タッチパネル17を操作するためのスタイラスペン23を収容できるようになっている。   FIG. 1 is a front view and a rear view of the digital camera 1. In this figure, a digital camera 1 includes, for example, a retractable lens barrel 3, a strobe light emission window 4, an optical viewfinder front window 5, a microphone sound collecting hole 6 and the like on a front surface of a box-shaped thin camera body 2. And a power switch 7 and a shutter button 8 are arranged on the upper surface of the camera body 2, and an optical viewfinder rear window 9, a speaker loudspeaker 10, a shooting mode / playback on the rear surface of the camera body 2. A mode switch 11, zoom operation / playback display mode switch 12, MENU button 13, up / down / left / right direction move button 14, SET button 15, DISP button 16, touch panel 17, and liquid crystal panel 18 are arranged. A screw hole for fixing a tripod (not shown) and a lid 19 are provided on the bottom surface of the battery 2, and the battery 2 is placed inside the lid 19. And implementing the mass storage device 21, such as a card-type memory or a card type hard disk removable state. Further, a horizontal deep hole 22 is formed at an arbitrary position of the camera body 2 (upper position on the right side as viewed from the back in the figure), and a stylus pen for operating the touch panel 17 is formed in the deep hole 22. 23 can be accommodated.

図2は、デジタルカメラの内部ブロック構成図である。この図において、デジタルカメラ1は、レンズ鏡筒3に収められた撮影レンズ24やズームレンズ25、フォーカスレンズ26及び絞り機構27などを含む光学系28と、この光学系28を介して取り込まれた被写体29の像を撮像するCCDやCMOS等の二次元イメージセンサを含む撮像部30と、被写体29までの距離を測定するコントラストAF方式やハイブリッドAF方式などの測距部31と、撮像部30から出力される画像信号に所要の画像処理(ガンマ補正等)を施す画像処理部32と、光学系28の絞り機構27を駆動する絞り駆動部33と、光学系28のフォーカスレンズ26を駆動するフォーカス駆動部34と、光学系28のズームレンズ25を駆動するズーム駆動部35と、各種キーやスイッチ及びボタン類(シャッターボタン8、撮影モード/再生モード切り換えスイッチ11、ズーム操作兼再生表示モード切替スイッチ12、MENUボタン13、上下左右方向移動ボタン14、SETボタン15、DISPボタン16等)を含む操作部36と、マイク用集音穴6の裏側に取り付けられたマイクロホン37やスピーカ用拡声穴10の裏側に取り付けられたスピーカ38を含む音声処理部39と、ストロボ発光窓4の裏側に取り付けられたストロボ発光部40及びストロボ駆動部41と、液晶パネル18を駆動する液晶駆動部42と、タッチパネル17のタッチ座標を取り込むタッチ座標入力部43と、大容量記憶デバイス21のデータ入出力を制御するデバイスデータ入出力部44と、デジタルカメラ1の姿勢を検出する姿勢検出部45と、不図示のGPS(Global Positioning System:全地球測位システム)衛星からの信号を受信してデジタルカメラ1の位置情報(少なくとも緯度経度の座標情報)を検出するGPS受信部46と、必要に応じてパーソナルコンピュータ等の外部機器47との間のデータ入出力を仲介する外部入出力部48と、充電可能な電池49やその電池49の充電部50及び商用電源からの充電用外部端子51を含みデジタルカメラ1の各部の動作に必要な電力を発生する電源部52と、中央制御部53とを備える。   FIG. 2 is an internal block diagram of the digital camera. In this figure, the digital camera 1 is captured via an optical system 28 including a photographing lens 24, a zoom lens 25, a focus lens 26, a diaphragm mechanism 27 and the like housed in a lens barrel 3, and the optical system 28. From the imaging unit 30 including a two-dimensional image sensor such as a CCD or CMOS that captures an image of the subject 29, a distance measuring unit 31 such as a contrast AF method or a hybrid AF method that measures the distance to the subject 29, and the imaging unit 30 An image processing unit 32 that performs required image processing (gamma correction or the like) on the output image signal, a diaphragm driving unit 33 that drives the diaphragm mechanism 27 of the optical system 28, and a focus that drives the focus lens 26 of the optical system 28. The drive unit 34, the zoom drive unit 35 that drives the zoom lens 25 of the optical system 28, and various keys, switches, and buttons (shutter) A button 8, a shooting mode / playback mode switch 11, a zoom operation / playback display mode switch 12, a MENU button 13, an up / down / left / right movement button 14, a SET button 15, a DISP button 16, and the like) and a microphone A sound processing unit 39 including a microphone 37 attached to the back side of the sound collecting hole 6 and a speaker 38 attached to the back side of the speaker sounding hole 10, a strobe light emitting unit 40 attached to the back side of the strobe light emitting window 4, and A strobe drive unit 41, a liquid crystal drive unit 42 that drives the liquid crystal panel 18, a touch coordinate input unit 43 that captures touch coordinates on the touch panel 17, and a device data input / output unit 44 that controls data input / output of the mass storage device 21. A posture detection unit 45 that detects the posture of the digital camera 1, and a G (not shown) A GPS receiving unit 46 that receives signals from S (Global Positioning System) satellites and detects position information (at least latitude and longitude coordinate information) of the digital camera 1, and a personal computer or the like as necessary Each part of the digital camera 1 includes an external input / output unit 48 that mediates data input / output with the external device 47, a rechargeable battery 49, a charging unit 50 of the battery 49, and an external terminal 51 for charging from a commercial power source. The power supply part 52 which generate | occur | produces electric power required for this operation | movement, and the central control part 53 are provided.

中央制御部53は、コンピュータ(以下、CPU)53a、不揮発性メモリ(以下、ROM)53b、揮発性メモリ(以下、RAM)53c及び書き換え可能型不揮発性メモリ(以下、PROM)53dを備えており、ROM53bに予め格納されている制御プログラムやPROM53dに予め又は任意に書き込まれるデータをRAM53cにロードしてCPU53aで実行することにより、つまり、プログラム制御方式によって、このデジタルカメラ1の各部の動作を統括制御するものであるが、この方式(プログラム制御方式)に限定されない。その機能の全て又は一部をハードロジックで実現してもよい。   The central control unit 53 includes a computer (hereinafter referred to as CPU) 53a, a nonvolatile memory (hereinafter referred to as ROM) 53b, a volatile memory (hereinafter referred to as RAM) 53c, and a rewritable nonvolatile memory (hereinafter referred to as PROM) 53d. The control program stored in the ROM 53b and the data previously or arbitrarily written in the PROM 53d are loaded into the RAM 53c and executed by the CPU 53a, that is, the operation of each part of the digital camera 1 is controlled by the program control method. Although it controls, it is not limited to this system (program control system). All or part of the function may be realized by hard logic.

図示のデジタルカメラ1は、操作部36の撮影モード/再生モード切り換えスイッチ11が「撮影」位置にあるときに撮影モード(静止画又は動画撮影モード)で動作し、「再生」位置にあるときに再生モードで動作する。   The illustrated digital camera 1 operates in the shooting mode (still image or moving image shooting mode) when the shooting mode / playback mode switch 11 of the operation unit 36 is in the “shooting” position, and when in the “playback” position. Operates in playback mode.

静止画又は動画撮影モードを選択した場合、撮像部30から周期的(毎秒数十フレーム)に出力される画像信号が、画像処理部32と中央制御部53及び液晶駆動部42を経て液晶パネル18に出力され、構図確認用のライブビュー画像(スルー画像ともいう)として継続的に表示される。一般的に撮影者は、ライブビュー画像を見ながら所望の構図になるように撮影方向や撮像部30の画角(ズームレンズ25のズーム量)を調節し、所望の構図が得られたときにレリーズ操作(シャッターボタン8の押し下げ操作)を行う。また、このとき、必要に応じ、撮影シーンに適合した撮影プログラム(いわゆるベストショット)の選択や適切と思われる露出補正などをレリーズ操作前に行うこともある。   When the still image or moving image shooting mode is selected, the image signal output periodically (several tens of frames per second) from the imaging unit 30 passes through the image processing unit 32, the central control unit 53, and the liquid crystal driving unit 42, and the liquid crystal panel 18 And is continuously displayed as a live view image for composition confirmation (also referred to as a through image). In general, the photographer adjusts the shooting direction and the angle of view of the imaging unit 30 (the zoom amount of the zoom lens 25) so as to obtain a desired composition while viewing a live view image, and when a desired composition is obtained. A release operation (depressing the shutter button 8) is performed. At this time, if necessary, selection of a shooting program (so-called best shot) suitable for the shooting scene, exposure correction that seems appropriate, and the like may be performed before the release operation.

そして、レリーズ操作に応答して、フォーカスレンズ26のAF(自動焦点)処理や絞り機構27のAE(自動露出)処理などが実行され、撮像部30から高画質の画像信号が取り出される。この画像信号は、画像処理部32と中央制御部53及びデバイスデータ入出力部44を経て大容量記憶デバイス21に送られ、撮影済み画像として大容量記憶デバイス21に記録保存される。この撮影済み画像は、撮像部30から取り出された高画質、高解像度の画像信号に相当する生画像(RAW画像)であってもよいが、生画像はサイズが大きく、大容量記憶デバイス21の記憶容量を圧迫するので、ユーザーが記録時の画像サイズ(解像度)を任意に指定し、この指定された画像サイズ(解像度)となるように、生画像の画素を間引いたり複数画素の加算などを行っている。また、解像度を下げること無く画像サイズを低減させるためには、たとえば、JPEG(Joint Photographic Experts Group)等の汎用圧縮技術を用いて圧縮した画像を撮影済み画像として記録することが望ましい。   Then, in response to the release operation, AF (automatic focus) processing of the focus lens 26, AE (automatic exposure) processing of the aperture mechanism 27, and the like are executed, and a high-quality image signal is extracted from the imaging unit 30. The image signal is sent to the mass storage device 21 via the image processing unit 32, the central control unit 53, and the device data input / output unit 44, and is recorded and saved in the mass storage device 21 as a captured image. The captured image may be a raw image (RAW image) corresponding to a high-quality, high-resolution image signal extracted from the imaging unit 30, but the raw image has a large size and is stored in the mass storage device 21. Since the storage capacity is compressed, the user can arbitrarily specify the image size (resolution) at the time of recording, and thin out the pixels of the raw image or add multiple pixels so that this specified image size (resolution) will be achieved. Is going. In order to reduce the image size without reducing the resolution, it is desirable to record an image compressed using a general-purpose compression technique such as JPEG (Joint Photographic Experts Group) as a captured image.

一方、再生モードを選択した場合は、たとえば、直近に撮影された画像を大容量記憶デバイス21から読み出して液晶パネル18に表示するか、あるいは、撮影済み画像の縮小画像を大容量記憶デバイス21から読み出して液晶パネル18に一覧表示し、その一覧の中からユーザ操作によって選択された画像(ユーザが再生を希望する画像)の元画像を大容量記憶デバイス21から読み出して液晶パネル18に表示する。なお、液晶パネル18の表示解像度は、撮像部30による撮像時の解像度よりも低く、一般的な用途で撮影記録する場合の記録時の解像度よりも低くなっているため、撮影記録された画像を表示する場合には、画素を間引いたり複数画素の加算などを行って表示部の解像度に合わせてから表示を行う。後述するライブビュー画像を表示する場合も同様である。   On the other hand, when the playback mode is selected, for example, the most recently captured image is read from the large-capacity storage device 21 and displayed on the liquid crystal panel 18, or a reduced image of the captured image is read from the large-capacity storage device 21. The data is read and displayed in a list on the liquid crystal panel 18, and an original image of an image selected by a user operation from the list (an image that the user desires to reproduce) is read from the mass storage device 21 and displayed on the liquid crystal panel 18. The display resolution of the liquid crystal panel 18 is lower than the resolution at the time of imaging by the imaging unit 30 and lower than the resolution at the time of recording when recording and recording for general purposes. In the case of display, display is performed after thinning out pixels or adding a plurality of pixels to match the resolution of the display unit. The same applies when a live view image to be described later is displayed.

以上の撮影モードと再生モードの動作は、従来公知のものである。
図3は、従来公知の撮影モードと再生モードの状態遷移図である。この図において、デジタルカメラ1の電源がオンになると状態P1(動作モード判定状態)に至り、この状態P1で撮影モード/再生モード切り換えスイッチ11の現在位置を判定し、その判定結果に従い、状態P2(撮影モード状態)または状態P3(再生モード状態)のいずれかに遷移する。
The operations in the above shooting mode and playback mode are conventionally known.
FIG. 3 is a state transition diagram between a conventionally known shooting mode and playback mode. In this figure, when the power of the digital camera 1 is turned on, the state P1 (operation mode determination state) is reached. In this state P1, the current position of the shooting mode / playback mode switch 11 is determined, and the state P2 is determined according to the determination result. Transition is made to either (shooting mode state) or state P3 (playback mode state).

状態P2では、液晶パネル18でライブビュー画像の継続的表示が行われるとともに、ユーザ操作に基づく各種撮影パラメータ設定、たとえば、ズーム倍率の調整(状態P4)や、撮影プログラム(例:ポートレイト撮影用、風景撮影用、スポーツシーン撮影用、室内撮影用、夜景撮影用・・・・)の選択(状態P5)、および、露出補正(状態P6)などが行われる。必要な撮影パラメータの設定を完了し、且つ、所望の構図が得られた場合、撮影者によるシャッタレリーズに応答して状態P7(画像記録状態)から状態P8(確認用画像の表示状態)へと遷移し、状態P1を経て再び状態P2に復帰する。   In the state P2, the live view image is continuously displayed on the liquid crystal panel 18, and various shooting parameter settings based on the user operation, for example, the adjustment of the zoom magnification (state P4) and the shooting program (for example, portrait shooting) , Landscape shooting, sports scene shooting, indoor shooting, night scene shooting,...) Selection (state P5), exposure correction (state P6), and the like. When setting of necessary shooting parameters is completed and a desired composition is obtained, the state is changed from the state P7 (image recording state) to the state P8 (display state of the confirmation image) in response to the shutter release by the photographer. It transits and returns to the state P2 again through the state P1.

通常、撮影後の画像確認は状態P8で行われるが、一般的に状態P8の時間は数秒程度と短時間であることから、じっくりと時間をかけて撮影済み画像の評価を行いたい場合は、撮影モード/再生モード切り換えスイッチ11を「撮影」から「再生」へと切り替え、状態P3(再生モード状態)へと遷移させることによって時間をかけた画像の評価を行う。   Usually, the image check after shooting is performed in the state P8, but generally the time of the state P8 is about several seconds, so if you want to evaluate the shot image over time, The shooting mode / playback mode switch 11 is switched from “shooting” to “playback” and transitioned to the state P3 (playback mode state) to evaluate the time-consuming image.

さて、この画像評価の結果、意図した仕上がりになっていないと判断された場合は、撮影モード/再生モード切り換えスイッチ11を「再生」から「撮影」へと切り替え、再び状態P2へと遷移させて上記の撮影動作をもう一度繰り返す。つまり、画像の「撮り直し」を行うことになる。   As a result of the image evaluation, if it is determined that the intended finish is not achieved, the shooting mode / playback mode switching switch 11 is switched from “playback” to “shooting”, and the state is again shifted to the state P2. Repeat the above shooting operation again. That is, the image is “re-taken”.

冒頭で説明したとおり、デジタルカメラは、コストを気にせずに何枚でも写真を撮影できるという利点がある。したがって、上記の「撮り直し」それ自体に特段の不都合はない。気にいった仕上がりが得られるまで、何度でも撮り直しを行えばよい。しかしながら、このような撮り直しの手法は試行錯誤的なものであって、あまりスマートとはいえない。   As explained at the beginning, digital cameras have the advantage that they can take any number of photos without worrying about cost. Therefore, there is no particular inconvenience in the “re-shooting” itself. You can re-shoot as many times as you like until you get the finish you want. However, such a re-shooting technique is trial and error and is not very smart.

そこで、本実施形態では、本番の撮影前に、写真の仕上がりに影響する各種撮影パラメータを事前設定できるようにし、以て、試行錯誤的な撮り直しを極力行わないようにすることができるスマートな撮影支援技術を提供する。   Therefore, in the present embodiment, before the actual shooting, various shooting parameters that affect the finish of the photo can be set in advance, so that it is possible to prevent trial and error reshooting as much as possible. Provide photography support technology.

図4は、本実施形態の特徴的事項を示す概念的な構成図である。この図において、中央制御部53は、プログラム制御方式によって機能的に実現されたいくつかのブロック部、具体的には、撮影パラメータ設定インターフェース部54、ボケ補正部55、露出補正部56、ボケ調整画像処理部57、色温度補正部58、フォーカスポイント設定部59などを含む。   FIG. 4 is a conceptual configuration diagram illustrating the characteristic items of the present embodiment. In this figure, the central control unit 53 includes several block units functionally realized by a program control method, specifically, a shooting parameter setting interface unit 54, a blur correction unit 55, an exposure correction unit 56, a blur adjustment. An image processing unit 57, a color temperature correction unit 58, a focus point setting unit 59, and the like are included.

撮影パラメータ設定インターフェース部54は、ライブビュー画像を表示中の液晶パネル18に、本番撮影前に設定することが望ましい各種撮影パラメータ、たとえば、(1)前景や背景のボカシ具合(以下、ボケという)、(2)写真の明るさを適正露出にするのか、それともアンダー気味(ローキー)やオーバー気味(ハイキー)にするのかを示す露出補正、(3)写真の色調を示す色温度(いわゆるホワイトバランスのことで、たとえば、早朝は青味がかった高い温度、夕景は赤味がかった低い温度・・・・)、さらには、フォーカスポイントの位置などを総合的に設定する為の直感的なインターフェース画面を表示する。   The shooting parameter setting interface unit 54 sets various shooting parameters to be set on the liquid crystal panel 18 displaying the live view image before the actual shooting, for example, (1) blurring of foreground and background (hereinafter referred to as blur). (2) Exposure correction to indicate whether the brightness of the photo is properly exposed or under (low key) or over (high key), (3) Color temperature indicating the color tone of the photo (so-called white balance So, for example, a high temperature that is bluish in the early morning, a low temperature that is reddish in the evening, ...), and an intuitive interface screen for comprehensively setting the position of the focus point, etc. indicate.

図5は、インターフェース画面の一例を示す図である。この図において、インターフェース画面60は、ライブビュー画像表示領域61の周囲(図では右側と下側)に適宜に配列された複数のスイッチオブジェクト(タッチパネル18のタッチ操作または操作部36の上下左右方向移動ボタン14によるカーソル移動とSETボタン15の押し下げ操作のいずれかに応答してオンになるもの)を有する。たとえば、右側に上下に並べられた三つのスイッチオブジェクト62〜64は、上から順にそれぞれ「ボケ大」、「ボケ中」、「ボケ小」のタイトルが付けられており、以下、各々をボケ大スイッチ62、ボケ中スイッチ63およびボケ小スイッチ64ということにする。   FIG. 5 is a diagram illustrating an example of an interface screen. In this figure, an interface screen 60 has a plurality of switch objects (touch operation on the touch panel 18 or vertical / horizontal movement of the operation unit 36) appropriately arranged around the live view image display area 61 (right side and lower side in the figure). A button that is turned on in response to either the cursor movement by the button 14 or the pressing operation of the SET button 15). For example, the three switch objects 62 to 64 arranged vertically on the right side are respectively given the titles “large blur”, “middle blur”, and “small blur” in order from the top. The switch 62, the blurring switch 63, and the small blur switch 64 will be referred to.

また、下側に左右に並べられた四つのスイッチオブジェクト65〜68は、左から順にそれぞれ「黒基準」、「白基準」、「フォーカス」、「色温度」のタイトルが付けられており、以下、各々を黒基準スイッチ65、白基準スイッチ66、フォーカススイッチ67および色温度スイッチ68ということにする。なお、色温度スイッチ68のタイトルの両側には各々左右に向いた三角記号が付けられており、この色温度スイッチ68は、左端や右端を択一的に操作することにより、設定値(ここでは色温度)を線形的または所定量ずつ段階的に減少または増加させることができる、いわゆるシーソー形式のスイッチオブジェクトである。   In addition, the four switch objects 65 to 68 arranged on the left and right are respectively titled “Black Standard”, “White Standard”, “Focus”, and “Color Temperature” in order from the left. These are referred to as a black reference switch 65, a white reference switch 66, a focus switch 67, and a color temperature switch 68, respectively. Note that a triangle symbol pointing to the left and right is attached to both sides of the title of the color temperature switch 68, and the color temperature switch 68 can be set by selectively operating the left end or the right end. Color temperature) is a so-called seesaw type switch object that can be decreased or increased linearly or stepwise by a predetermined amount.

ここで、図示のインターフェース画面60における“直感的操作”について説明する。
図6は、インターフェース画面60の直感的操作を示す図である。この図において、(a)はライブビュー画像69の一例である。このライブビュー画像69がインターフェース画面60のライブビュー画像表示領域61に映し出されるようになっている。ちなみに、ライブビュー画像69には横長の崖からカーテン状に流れ落ちる滝、その滝下の淀み、および、滝上の木々などが被写体として映しこまれている。なお、(b)はライブビュー画像69が映し出された状態のインターフェース画面60を示しているが、この図(b)では、作図の都合上、ライブビュー画像69を単純化した線画で表している。
Here, “intuitive operation” on the illustrated interface screen 60 will be described.
FIG. 6 is a diagram illustrating an intuitive operation of the interface screen 60. In this figure, (a) is an example of a live view image 69. This live view image 69 is displayed in the live view image display area 61 of the interface screen 60. Incidentally, in the live view image 69, a waterfall flowing in a curtain form from a horizontally long cliff, a stagnation under the waterfall, trees on the waterfall, and the like are reflected as subjects. Note that (b) shows the interface screen 60 in a state where the live view image 69 is displayed, but in this figure (b), the live view image 69 is represented by a simplified line drawing for the sake of drawing. .

(b)において、インターフェース画面60のライブビュー画像69の上に、いくつかのマーカオブジェクト(図案化された指標;以下、単にマーカという)が表示されている。二重丸マーカはそれぞれ大中小のボケマーカ62a、63a、64a、二つの菱形マーカはそれぞれ黒基準マーカ65aと白基準マーカ66a、さらに、クロス十字状マーカはフォーカスポイントマーカ67aである。   In (b), several marker objects (designed indices; hereinafter simply referred to as markers) are displayed on the live view image 69 of the interface screen 60. The double circle markers are large, medium, and small blur markers 62a, 63a, and 64a, the two rhombus markers are the black reference marker 65a and the white reference marker 66a, respectively, and the cross-shaped marker is the focus point marker 67a.

なお、ボケマーカ62a、63a、64aの二重丸の大きさは大中小と異なっており、それらによって「ボケ大」、「ボケ中」および「ボケ小」を現している。また、黒基準マーカ65aと白基準マーカ66aの違いは菱形枠内の色にあり、黒基準マーカ65aは黒(または黒をイメージさせる色調)、白基準マーカ66aは白(または白をイメージさせる色調)になっている。   Note that the size of the double circles of the blur markers 62a, 63a, and 64a is different from the large, medium, and small sizes, and “blur large”, “middle blur”, and “small blur” are represented by them. Further, the difference between the black reference marker 65a and the white reference marker 66a is in the color within the diamond frame, the black reference marker 65a is black (or a color tone that images black), and the white reference marker 66a is white (or a color tone that images white). )It has become.

このようにデザインされたボケマーカ62a、63a、64aや黒基準マーカ65a及び白基準マーカ66aは、マーカの形や大きさおよび色などにより、そのマーカが“ボケ”に関するものであるのか、または、黒基準や白基準といった“露出補正”に関するものであるのかを直感的に知ることができる。なお、クロス十字状のフォーカスポイントマーカ67aについては、そのクロス位置によってフォーカスポイントを表すことが公知であるものの、直感的なマーカスタイルであることに相違はない。   The blur markers 62a, 63a, 64a, the black reference marker 65a, and the white reference marker 66a designed in this way are related to “blur” or black according to the shape, size, and color of the marker. You can intuitively know whether it is related to "exposure correction" such as the standard or white standard. The cross-shaped focus point marker 67a is known to represent the focus point by its cross position, but there is no difference in the intuitive marker style.

以上のとおり、本実施形態のマーカ62a、63a、64a、65a、66a、67aは、いずれもそれらのマーカの意味を直感的に知ることができるように適切にデザインされたものであるが、これらのデザインに限定されないことは当然である。すなわち、図示のマーカ62a、63a、64a、65a、66a、67aは、「それらのマーカの意味を直感的に知ることができる」ことを意図して図案化されたものであって、単なる一例にすぎないものであり、この目的(それらのマーカの意味を直感的に知ることができる)に沿うものであれば他のデザインであってももちろんかまわない。   As described above, the markers 62a, 63a, 64a, 65a, 66a, and 67a of the present embodiment are all appropriately designed so that the meaning of these markers can be intuitively understood. Of course, it is not limited to the design. In other words, the markers 62a, 63a, 64a, 65a, 66a, and 67a shown in the figure are designed with the intention of “being able to know the meaning of these markers intuitively”, and are merely examples. Of course, other designs may be used as long as they meet this purpose (intuitively know the meaning of those markers).

各マーカの使い方を説明すると、まず、三種類のボケマーカ62a、63a、64aは、それぞれ対応するスイッチオブジェクト62、63、64を操作した時に、インターフェース画面60のライブビュー画像69の上に出現する。出現の初期位置は、好ましくは、対応するスイッチオブジェクト62、63、64の近くである。たとえば、ボケ大スイッチ62を操作したときに、そのボケ大スイッチ62の直ぐ隣にボケ大用のマーカ62aを表示すれば、ボケ大スイッチ62とボケ大用のマーカ62aとの関係を直感的に知ることができるから好ましい。他のスイッチ63、64とマーカ63a、64aについても同様である。   Explaining how to use each marker, first, three types of blur markers 62a, 63a, 64a appear on the live view image 69 of the interface screen 60 when the corresponding switch objects 62, 63, 64 are operated. The initial position of the occurrence is preferably near the corresponding switch object 62, 63, 64. For example, if the large blur marker 62a is displayed immediately next to the large blur switch 62 when the large blur switch 62 is operated, the relationship between the large blur switch 62 and the large blur marker 62a is intuitively understood. It is preferable because it can be known. The same applies to the other switches 63 and 64 and the markers 63a and 64a.

撮影者は、タッチパネル18や上下左右方向移動ボタン14を操作して、所望の位置にボケ大用のマーカ62aを移動させ、決定操作(タッチパネル18へのダブルタッチ操作またはSETボタン15の操作)を行う。ここで、“所望の位置”とは、前景や背景に大きなボケを与えたい位置(または場所)のことである。この位置は、ボケ中の場合は中程度のボケを与えたい位置(または場所)となり、あるいは、ボケ小の場合は小さなボケを与えたい位置(または場所)となる。なお、ボケの大中小を与える位置はそれぞれ一か所ずつであってもよいし、複数個所ずつであってもよい。   The photographer operates the touch panel 18 or the up / down / left / right direction movement button 14 to move the large blur marker 62a to a desired position, and performs a determination operation (double touch operation on the touch panel 18 or operation of the SET button 15). Do. Here, the “desired position” is a position (or place) where a large blur is to be given to the foreground or background. This position is a position (or place) where it is desired to give a medium degree of blur when blurring, or a position (or place) where a small blur is desired when blurring is small. It should be noted that each of the positions where the large, medium, and small blurs may be given may be one place or plural places.

なお、上記操作例では、スイッチオブジェクトの操作によって所望のマーカを表示させた後に、この表示されたマーカを移動させることで、所望の位置に対して所望の画像状態を指定できるようにしたが、スイッチ操作が行われた段階ではマーカを表示させずに、タッチパネル上へのタッチ操作が行われた後に、タッチ操作が行われた位置にマーカを表示させるようにしてもよい。   In the above operation example, after displaying a desired marker by operating the switch object, it is possible to specify a desired image state for a desired position by moving the displayed marker. The marker may not be displayed when the switch operation is performed, but may be displayed at the position where the touch operation is performed after the touch operation on the touch panel is performed.

また、上記操作例では、スイッチオブジェクトやマーカを、ボケの大中小であるボケ量の絶対値に対応させて設けたが、スイッチオブジェクトやマーカを、ボケを増加、ボケを減少などのボケ量の変化方向に対応させて設け、これらマーカにより指定された位置のボケ量を、その位置における現在のボケ量に対して増加または減少させるようにしてもよい。また、スイッチオブジェクトやマーカを、ボケを1レベル増加、ボケを3レベル減少など、ボケ量の変化量に対応させて設け、指定された位置のボケ量を指定された量だけ増加または減少させるようにしてもよい。   In the above operation example, the switch object and the marker are provided corresponding to the absolute value of the blur amount that is large, medium, and small. However, the switch object and the marker have a blur amount that increases or decreases the blur. It may be provided corresponding to the change direction, and the blur amount at the position designated by these markers may be increased or decreased with respect to the current blur amount at that position. Also, a switch object or marker is provided corresponding to the amount of change in the blur amount, such as increasing the blur by one level and decreasing the blur by three levels, so that the blur amount at the specified position is increased or decreased by the specified amount. It may be.

一般的な撮影手法の場合、ボケの調節はレンズの絞り値で行われている。絞りを開けばボケが大きくなり、絞り込めばボケが小さくなるからである。本実施形態においても、この絞り調整によってボケの大中小をコントロールしてもよい。つまり、ボケの大中小マーク62a、63a、64aの位置を検出し、それらの位置のボケ量が適正(ボケ大マーク62の位置にあっては大きなボケ、ボケ中マーク62bの位置の位置にあっては中程度のボケ、ボケ小マーク62cの位置にあっては小さなボケ)となるようにレンズの絞りを自動調整するようにしてもよい。   In the case of a general photographing technique, the blur is adjusted by the aperture value of the lens. This is because the blur is increased when the aperture is opened, and the blur is decreased when the aperture is reduced. Also in the present embodiment, the large / medium / small of the blur may be controlled by this aperture adjustment. In other words, the positions of the large, medium, and small marks 62a, 63a, and 64a of the blur are detected, and the amount of blur at those positions is appropriate (if the blur large mark 62 is at the position of the large blur and the blur mark 62b). In other words, the lens aperture may be automatically adjusted so that the blur is small at the position of medium blur or small blur mark 62c.

しかし、絞りは露出補正とも関係するので、単純に絞り値=ボケ量とすることはできない。一般的にボケの調整よりも露出補正が優先するからであり、まずは露出補正量(絞り値の補正量)を決め、その後、余裕があれはボケに適合した絞り値に微調整するという手順を踏むからである。このように、実際問題としてみた場合、ボケの調整に絞り値を用いることは適当とはいえない。このため、本実施形態では、絞りを用いず、画像処理によってボケの大中小をコントロールすることとした。ただし、これは実用に即することを意図したからであり、ボケの調整に「絞り値」を用いてもかまわないことはもちろんである。なお、画像処理によるボケの調整手法については後述する。   However, since the aperture is also related to exposure correction, it is not possible to simply set the aperture value = the amount of blur. This is because exposure correction generally takes priority over blur adjustment. First, determine the exposure correction amount (aperture value correction amount), and then fine-tune the aperture value to suit the blur if there is a margin. Because it steps on. As described above, when viewed as an actual problem, it is not appropriate to use the aperture value for blur adjustment. For this reason, in this embodiment, the large, medium, and small blurs are controlled by image processing without using a diaphragm. However, this is because it is intended for practical use, and of course, “aperture value” may be used for blur adjustment. Note that a blur adjustment method by image processing will be described later.

また、上記操作例では、1または複数のマーカで指定される位置の画像状態が指定された状態となるように撮影条件や画像処理の内容を決定したが、画像内のメイン被写体に対するフォーカスを維持した状態で(メイン被写体のボケが無い状態で)、マーカで指定される各部の画像状態だけを調整するようにしてもよい。また、この場合において、メイン被写体を人物の顔とし、公知である顔検出技術により検出された人物の顔部分をメイン被写体としてフォーカスを維持するようにしてもよい。   In the above operation example, the shooting conditions and the contents of the image processing are determined so that the image state at the position specified by one or more markers is in the specified state, but the focus on the main subject in the image is maintained. In such a state (with no blur of the main subject), only the image state of each part specified by the marker may be adjusted. Further, in this case, the focus may be maintained with the main subject as the face of the person and with the face portion of the person detected by a known face detection technique as the main subject.

本実施形態のインターフェース画面60によれば、ライブビュー画像69の中の任意位置のボケ量を加減したいときには、その位置に、ボケの大中小マーク62a、63a、64aのいずれかを置くだけでよく、簡単で、しかも直感性に優れたボケ設定用のインターフェースを提供することができる。   According to the interface screen 60 of the present embodiment, when the amount of blur at an arbitrary position in the live view image 69 is to be adjusted, it is only necessary to place one of the large, medium, and small marks 62a, 63a, and 64a of the blur at that position. It is possible to provide a bokeh setting interface that is simple and excellent in intuition.

次に、黒基準マーカ65aと白基準マーカ66aも、それぞれ対応するスイッチオブジェクト65、66を操作した時に、インターフェース画面60のライブビュー画像69の上に出現する。出現の初期位置は、前記のボケマーカ62a、63a、64aと同様に、好ましくは、対応するスイッチオブジェクト65、66の近くである。たとえば、黒基準スイッチ65を操作したときに、その黒基準スイッチ65の直ぐ上に黒基準マーカ65aを表示すれば、黒基準スイッチ65と黒基準マーカ65aとの関係を直感的に知ることができるから好ましい。他のスイッチ66とマーカ66aについても同様である。   Next, the black reference marker 65a and the white reference marker 66a also appear on the live view image 69 on the interface screen 60 when the corresponding switch objects 65 and 66 are operated. The initial position of the appearance is preferably in the vicinity of the corresponding switch object 65, 66, like the blur markers 62a, 63a, 64a. For example, when the black reference switch 65 is operated, if the black reference marker 65a is displayed immediately above the black reference switch 65, the relationship between the black reference switch 65 and the black reference marker 65a can be intuitively known. To preferred. The same applies to the other switches 66 and the marker 66a.

黒基準マーカ65aと白基準マーカ66aは、それぞれライブビュー画像69の中で、どの部分を露出の黒基準(暗部基準ともいう)とするのか、または白基準(明部基準ともいう)とするのかを指定するためのものであり、この指定は、撮影者の希望(写真の仕上がり期待)によって任意に行われる。たとえば、暗目の仕上がり(いわゆるローキー基調または単にローキー)を期待する場合は、ライブビュー画像69の中の暗部に黒基準マーカ65aを合わせ、あるいは、明る目の仕上がり(いわゆるハイキー基調または単にハイキー)を期待する場合は、ライブビュー画像69の中の明部に白基準マーカ66aを合わせる。もしくは、暗部から明部までをまんべんなく再現した、いわゆる適正露出の仕上がりを期待する場合は、ライブビュー画像69の中の暗部に黒基準マーカ65aを合わせるとともに、ライブビュー画像69の中の明部に白基準マーカ66aを合わせる。   Which part of the black reference marker 65a and the white reference marker 66a is used as an exposure black reference (also referred to as a dark reference) or a white reference (also referred to as a bright reference) in the live view image 69? This designation is arbitrarily made according to the photographer's desire (photo finish expectation). For example, when the dark eye finish (so-called low key tone or simply low key) is expected, the black reference marker 65a is aligned with the dark portion in the live view image 69, or the bright eye finish (so-called high key tone or simply high key). Is expected, the white reference marker 66 a is aligned with the bright part in the live view image 69. Alternatively, in the case of expecting a so-called appropriate exposure finish that reproduces the entire dark area to the bright area, the black reference marker 65a is aligned with the dark area in the live view image 69, and the bright area in the live view image 69 is displayed. The white reference marker 66a is aligned.

なお、一般的に“暗部”や“明部”は画像内の最も暗い部分や明るい部分のことをいうが、撮影意図によっては必ずしもそうといえないことがある。たとえば、最暗部よりも若干明るい部分を暗部としたり、また、最明部よりも若干暗い部分を明部としたりすることもある。いずれにせよ、露出補正における暗部基準や明部基準の指定はもっぱら撮影者の主観による。   In general, “dark part” and “bright part” refer to the darkest part or the brightest part in an image, but this may not always be true depending on the purpose of photographing. For example, a part slightly brighter than the darkest part may be a dark part, and a part slightly darker than the brightest part may be a bright part. In any case, the specification of the dark part reference and the bright part reference in the exposure correction is entirely based on the subjectivity of the photographer.

図7は、露出補正の概念図である。この図において、ヒストグラム70は、ライブビュー画像69の画素値の明るさ分布を示すものであり、横軸の左側が暗、右側が明で、且つ、グラフ71の高さが横軸の各位置における画素の量になっている。   FIG. 7 is a conceptual diagram of exposure correction. In this figure, the histogram 70 shows the brightness distribution of the pixel values of the live view image 69. The left side of the horizontal axis is dark, the right side is bright, and the height of the graph 71 is the horizontal axis. The amount of pixels in

図中の(a)は適性露出の場合のヒストグラム70、(b)はローキーの場合のヒストグラム70、(c)はハイキーの場合のヒストグラム70である。すなわち、(a)のヒストグラム70はライブビュー画像69の中の暗部に黒基準マーカ65aを合わせるとともに、ライブビュー画像69の中の明部に白基準マーカ66aを合わせたときのものである。このときのヒストグラム70は暗部や命部の欠けがなく、暗い部分から明るい部分までがまんべんなく再現されているので適正露出である。   In the figure, (a) is a histogram 70 for proper exposure, (b) is a histogram 70 for low key, and (c) is a histogram 70 for high key. That is, the histogram 70 in (a) is obtained when the black reference marker 65 a is aligned with the dark portion in the live view image 69 and the white reference marker 66 a is aligned with the bright portion in the live view image 69. The histogram 70 at this time is appropriate exposure because there is no lack of dark parts or life parts, and the dark to bright parts are reproduced evenly.

これに対して、(b)のヒストグラム70はライブビュー画像69の中の暗部に黒基準マーカ65aを合わせたときのものであり、暗部を基準にマイナス方向の露出補正が行われたものである。つまり、黒基準マーカ65aによって指定された明るさ(この図では暗部)が基準となるように、矢印72で示す左方向に適量だけグラフ71を移動させたものである。このようなマイナス補正は、画像を暗くするローキー基調の補正であり、たとえば、静寂やしっとり感、あるいは、重さなどを表現するのに多用される撮影技法である。   On the other hand, the histogram 70 of (b) is obtained when the black reference marker 65a is aligned with the dark part in the live view image 69, and the exposure correction in the negative direction is performed based on the dark part. . That is, the graph 71 is moved by an appropriate amount in the left direction indicated by the arrow 72 so that the brightness designated by the black reference marker 65a (the dark portion in this figure) becomes a reference. Such a minus correction is a low-key tone correction that darkens an image, and is, for example, a photographing technique that is often used to express silence, moist feeling, or weight.

同様に、(c)のヒストグラム70はライブビュー画像69の中の明部に白基準マーカ66aを合わせたときのものであり、明部を基準にプラス方向の露出補正が行われたものである。つまり、白基準マーカ66aによって指定された明るさ(この図では明部)が基準となるように、矢印73で示す右方向に適量だけグラフ71を移動させたものである。このようなプラス補正は、画像を明るくするハイキー基調の補正であり、たとえば、軽快さや若さなどを表現するのに多用される撮影技法である。   Similarly, the histogram 70 in (c) is obtained when the white reference marker 66a is aligned with the bright part in the live view image 69, and the positive exposure correction is performed with the bright part as a reference. . That is, the graph 71 is moved by an appropriate amount in the right direction indicated by the arrow 73 so that the brightness designated by the white reference marker 66a (in this figure, the bright portion) becomes a reference. Such a positive correction is a high-key tone correction that brightens an image, and is, for example, a photographing technique often used to express lightness, youth, and the like.

なお、これらの図においては、ヒストグラム70の両端を黒基準、白基準としているが、これは露出補正の典型例を示しているにすぎない。前記のとおり、露出補正における暗部基準や明部基準の指定はもっぱら撮影者の主観によるものであるから、ヒストグラム70の両端から内側に入った適当な位置(撮影者によって任意に指定された位置)をそれぞれ黒基準、白基準としてもかまわない。   In these figures, both ends of the histogram 70 are used as a black reference and a white reference, but this is merely a typical example of exposure correction. As described above, the specification of the dark part reference and the bright part reference in the exposure correction is mainly based on the subjectivity of the photographer, and therefore, an appropriate position (position arbitrarily designated by the photographer) entering from the both ends of the histogram 70. May be used as the black standard and the white standard, respectively.

従来から行われている露出補正の方法は、カメラボディに設けられた露出補正ボタンや、液晶パネル18に表示される露出補正ボタンを操作するというものであり、これらのボタン操作によって、マイナス方向への露出補正(図7(b)相当)を行ったり、あるいは、プラス方向への露出補正(図7(c)相当)を行ったりするというものであるが、多くの撮影者は、そのような面倒なボタン操作による露出補正を全く行っていないことも事実である。その理由は必ずしも明確ではないものの、どのぐらいの補正量で且つどの方向(プラス/マイナス)へ補正すべきなのかが即座に分からないことが大きな要因であると考えられる。   Conventionally, the exposure compensation method is to operate an exposure compensation button provided on the camera body or an exposure compensation button displayed on the liquid crystal panel 18, and these buttons are operated in the minus direction. The exposure correction (equivalent to FIG. 7B) or the positive exposure correction (equivalent to FIG. 7C) is performed. It is also true that no exposure compensation is performed by troublesome button operations. Although the reason for this is not necessarily clear, it is thought that a major factor is that it is not immediately possible to know how much correction amount and in which direction (plus / minus) it should be corrected.

この点において、本実施形態のインターフェース画面60によれば、ライブビュー画像69の中の任意の明るさ部分に黒基準マーカ65aや白基準マーカ66aを置くだけで、図7の(a)に示す適性露出や、同(b)に示すローキー基調、または、同(c)に示すハイキー基調を自在に得ることができ、しかも、その間、まったく露出補正量や方向(プラス/マイナス)を意識しなくてもよいから、誰でも容易に使いこなすことができる直感性に優れた露出補正用のインターフェースを提供することができる。   In this regard, according to the interface screen 60 of the present embodiment, the black reference marker 65a and the white reference marker 66a are simply placed at an arbitrary brightness portion in the live view image 69, as shown in FIG. Appropriate exposure, low key tone as shown in (b), or high key tone as shown in (c) can be freely obtained, and during that time, exposure compensation amount and direction (plus / minus) are completely unaware. Therefore, it is possible to provide an intuitive interface for exposure compensation that anyone can easily use.

次に、色温度スイッチ68は、カラー画像の色温度を増減調整するためのものであり、色温度スイッチ68の右側を操作すると色温度が上昇し、左側を操作すると色温度が下降する。   Next, the color temperature switch 68 is used to increase or decrease the color temperature of the color image. When the right side of the color temperature switch 68 is operated, the color temperature increases, and when the left side is operated, the color temperature decreases.

一般的に黒い物体を熱していくと温度が低い時は暗いオレンジ色であり、温度が高くなるにつれて黄色みを帯びた白になり、さらに高くなると青みがかった白になる。このように、白という色を黒体の温度で表現することができ、この温度のことを色温度といい、単位はK(ケルビン)である。たとえば、晴天天空光は12000K〜18000K、快晴北向空は10000K〜12000K、もやの多い空は8000K〜10000K、全雲天空光は6500K〜7000K、平均昼光は5000K〜6000K、朝夕の野外は4400K〜5400K、日の出日の入り前後は3600K〜4000K、蛍光灯は4200K〜6500K、電球色は2800K2800K前後、写真用タングステンは2800K〜3400K、タングステンライトは2600K〜2800Kである。温度が高くなるほど青味が強くなり、低くなるほど赤味が強くなる。   In general, when a black object is heated, it becomes dark orange when the temperature is low, becomes yellowish white as the temperature increases, and becomes bluish white when the temperature is higher. In this way, the color white can be expressed by the temperature of a black body, this temperature is called the color temperature, and the unit is K (Kelvin). For example, clear sky skylight is 12000K-18000K, clear sky northward sky is 10000K-12000K, haze sky is 8000K-10000K, whole cloud skylight is 6500K-7000K, average daylight is 5000K-6000K, morning and evening outdoors is 4400K -5400K, 3600K-4000K before and after sunrise, 4200K-6500K for fluorescent lamps, 2800K-2800K for bulbs, 2800K-3400K for photographic tungsten, 2600K-2800K for tungsten lights. The higher the temperature, the stronger the blueness, and the lower the temperature, the stronger the redness.

さて、写真撮影時の光源の色温度については、たとえば、スタジオ撮影ライトで3200K、ストロボライトで6000K、太陽光線で5500K・・・・等々という一般的な標準値が設定されており、カメラのオートホワイトバランス機能によって撮影環境に適合した色温度補正が行われるようになっているものの、とりわけ、各種の光源が混在した多灯撮影環境下ではオートホワイトバランスが誤動作することがあり、意図しない色調になってしまうことがしばしば発生する。   As for the color temperature of the light source at the time of taking a picture, for example, a standard value of 3200K for studio photography light, 6000K for strobe light, 5500K for sunlight, etc. is set. Although the white balance function allows color temperature correction to suit the shooting environment, auto white balance may malfunction in multi-flash shooting environments where various light sources are mixed, resulting in unintended color tone. Often happens.

このような場合、撮影者によるホワイトバランスのマニュアル調整が欠かせない。このため、多くのカメラには「ストロボ」や「太陽光」、「白熱電球」、「蛍光灯」などといった色温度を選択できる補正ボタンが備えられているが、これらのボタン操作による色温度補正は正確さに欠ける。「ストロボ」や「太陽光」、「白熱電球」、「蛍光灯」などの選択項目は、大雑把に光源種別を分けたものにすぎず、実際の撮影場面における色温度は、たとえば、同じ太陽光であっても時間帯によって異なり、また、蛍光灯なども昼光色や白色光など様々な波長の光(色温度が異なる光)を発するものも存在するからである。   In such a case, manual adjustment of white balance by the photographer is indispensable. For this reason, many cameras are equipped with correction buttons that allow you to select the color temperature, such as “strobe”, “sunlight”, “incandescent light bulb”, and “fluorescent light”. Lacks accuracy. The selection items such as “strobe”, “sunlight”, “incandescent light bulb”, and “fluorescent light” are roughly divided light source types, and the color temperature in the actual shooting scene is, for example, the same sunlight However, it is different depending on the time zone, and fluorescent lamps and the like emit light of various wavelengths (light having different color temperatures) such as daylight color and white light.

これに対して、本実施形態のインターフェース画面60によれば、ライブビュー画像69を見ながら色温度スイッチ68を操作するだけでよく、たとえば、ライブビュー画像69の青味を強めたければ色温度スイッチ68の右側を操作し、あるいは、赤味を強めたければ色温度スイッチ68の左側を操作するだけでよい。画像を確認しながらリアルタイムに色温度を調節できるので、その場の光源の色温度を知る必要がなく、また、色温度スイッチ68の操作回数によって微妙な色味調整も容易に行うことができるから、誰でも容易に使いこなすことができる直感性に優れた色温度補正用のインターフェースを提供することができる。   On the other hand, according to the interface screen 60 of the present embodiment, it is only necessary to operate the color temperature switch 68 while viewing the live view image 69. For example, if it is desired to enhance the blueness of the live view image 69, the color temperature switch 68 It is only necessary to operate the right side of the color temperature switch 68 or to operate the right side of the color temperature switch 68 to enhance redness. Since the color temperature can be adjusted in real time while checking the image, it is not necessary to know the color temperature of the light source on the spot, and the subtle color adjustment can be easily performed by the number of operations of the color temperature switch 68. It is possible to provide an intuitive color temperature correction interface that anyone can easily use.

図8は、色温度と画像との関係を示す図である。この図において、代表的に示す三枚の画像69a〜69cは、それぞれ左から順に、(a)色温度を低めに設定した赤味強調の画像69a、(b)適度な色温度の画像69b、(c)色温度を高めに設定した青味強調の画像69cである。なお。出願図面に色をつけられないため、便宜的にハッチングで色を表現している。   FIG. 8 is a diagram illustrating the relationship between the color temperature and the image. In this figure, three representative images 69a to 69c are respectively shown in order from the left: (a) a reddish-enhanced image 69a with a lower color temperature; (b) an image 69b with an appropriate color temperature; (C) A bluish-enhanced image 69c with a higher color temperature. Note that. Since the application drawing cannot be colored, the color is expressed by hatching for convenience.

一般的な成功写真としては(b)の適度な色温度の画像69bであるが、撮影者の意図により、(a)の赤味の強い画像69aや、(c)の青味の強い画像69cも成功写真と看做されることがある。(a)の赤味の強い画像69aでは暖かさなどを表現でき、(c)の青味の強い画像69cでは鋭さや清涼感などを表現できるからである。通常、このような色味が異なる写真を得ようとした場合は、ホワイトバランスを意図的に変えたり(たとえば、太陽光の下で「白熱電球」を選択したり)、あるいは、色温度直接入力方式のカメラの場合であれば、所望の色温度を入力したりしなければならず、結構面倒であったが、本実施形態のインターフェース画面60によれば、ライブビュー画像69を見ながら色温度スイッチ68を操作するだけでよいので、誰でも容易に希望の色味の写真を得ることができる。   A typical successful photograph is an image 69b having an appropriate color temperature of (b). However, depending on the photographer's intention, an image 69a having a strong reddish color (a) or an image 69c having a strong bluish color (c). May be regarded as a success photo. This is because the image 69a having a strong reddish color (a) can express warmth and the like, and the image 69c having a strong bluish color (c) can express sharpness and coolness. Usually, when you want to obtain a photo with a different color, you can intentionally change the white balance (for example, select “Incandescent Light Bulb” under sunlight) or enter the color temperature directly. In the case of a camera of the type, it is necessary to input a desired color temperature, which is quite troublesome. However, according to the interface screen 60 of this embodiment, the color temperature is viewed while viewing the live view image 69. Since it is only necessary to operate the switch 68, anyone can easily obtain a photograph of a desired color.

次に、本実施形態の動作を説明する。
図9は、中央制御部53のCPU53aで実行される制御プログラムの要部フローを示す図である。この図において、デジタルカメラ1の電源をオンにすると、まず、撮影モード/再生モード切り換えスイッチ11の切り替え位置から現在の動作モードを判定し(ステップS1)、「再生モード」が判定された場合は、不図示の再生モード処理に進み、「撮影モード」が判定された場合は、ライブビュー画像の取得(ステップS2)およびインターフェース画面60(図5参照)の表示(ステップS3)に進む。
Next, the operation of this embodiment will be described.
FIG. 9 is a diagram showing a main part flow of a control program executed by the CPU 53 a of the central control unit 53. In this figure, when the power of the digital camera 1 is turned on, first, the current operation mode is determined from the switching position of the shooting mode / playback mode switch 11 (step S1), and the “playback mode” is determined. Then, the process proceeds to a reproduction mode process (not shown), and when the “shooting mode” is determined, the process proceeds to the acquisition of the live view image (step S2) and the display of the interface screen 60 (see FIG. 5) (step S3).

そして、インターフェース画面60の各スイッチオブジェクト(ボケ大スイッチ62、ボケ中スイッチ63、ボケ小スイッチ64、黒基準スイッチ65、白基準スイッチ66、フォーカススイッチ67および色温度スイッチ68)に対する撮影者の操作有無を判定し(ステップS4)、各々の操作種別に対応した処理を実行する。   The photographer's operation on each switch object (large blur switch 62, blurred switch 63, small blur switch 64, black reference switch 65, white reference switch 66, focus switch 67, and color temperature switch 68) on the interface screen 60. (Step S4) and processing corresponding to each operation type is executed.

すなわち、ボケ大スイッチ62、ボケ中スイッチ63またはボケ小スイッチ64が操作された場合は、ボケ大中小制御(ステップS5)を実行し、黒基準スイッチ65または白基準スイッチ66が操作された場合は、露出補正制御(ステップS6)を実行し、フォーカススイッチ67が操作された場合は、フォーカスポイント制御(ステップS7)を実行し、色温度スイッチ68が操作された場合は、ホワイトバランス制御(ステップS8)を実行する。   That is, when the large blur switch 62, the middle blur switch 63, or the smaller blur switch 64 is operated, the large blur medium / small control (step S5) is executed, and when the black reference switch 65 or the white reference switch 66 is operated. When exposure correction control (step S6) is executed and the focus switch 67 is operated, focus point control (step S7) is executed. When the color temperature switch 68 is operated, white balance control (step S8) is executed. ).

また、インターフェース画面60で所定の撮影準備完了操作(たとえば、不図示の撮影準備完了ボタン操作)が行われた場合は、シャッタレリーズ操作があるまで待機し(ステップS9)、シャッタレリーズ操作が行われた場合は、画像を撮影してその画像を大容量記憶デバイス61に保存(ステップS10)した後、確認用画像を液晶パネル18に所定時間表示し(ステップS11)、再び、ステップS1に復帰するが、このとき、撮影画像を大容量記憶デバイス61に保存(ステップS10)する前、または、保存した後に、その撮影画像に対して所要の補正を行う。   When a predetermined shooting preparation completion operation (for example, a shooting preparation completion button operation (not shown)) is performed on the interface screen 60, the process waits until a shutter release operation is performed (step S9), and the shutter release operation is performed. In such a case, after taking an image and storing the image in the mass storage device 61 (step S10), the confirmation image is displayed on the liquid crystal panel 18 for a predetermined time (step S11), and the process returns to step S1 again. However, at this time, before the captured image is stored in the large-capacity storage device 61 (step S10) or after the storage, the necessary correction is performed on the captured image.

ここで、“所要の補正”とは、前記のライブビュー画像69に対して行われた補正と同じものである。つまり、ライブビュー画像69に対してボケの大中小補正が行われていた場合は、この撮影画像に対しても同様のボケの大中小補正を行い、また、ライブビュー画像69に対して色温度補正が行われていた場合は、この撮影画像に対しても同様の色温度補正を行う。ただし、ライブビュー画像69に対して露出補正が行われていた場合は、すでにシャッタレリーズ時の本番撮影段階で同様の露出補正(ライブビュー画像69に対して行われた露出補正と同様のもの)が行われているため、この露出補正については、ステップS10の段階における上記の“所要の補正”には含まれない。   Here, “required correction” is the same as the correction performed on the live view image 69 described above. That is, when the blur large / medium / small correction is performed on the live view image 69, the same blur large / small correction is performed on the captured image, and the color temperature is corrected on the live view image 69. If correction has been performed, the same color temperature correction is performed on this captured image. However, if exposure correction has been performed on the live view image 69, the same exposure correction has already been performed in the actual shooting stage during shutter release (similar to the exposure correction performed on the live view image 69). Therefore, this exposure correction is not included in the above “required correction” in the step S10.

<ボケ大中小制御>
先にも述べたとおり、本実施形態におけるボケ大中小制御は、画像処理によって行うことも可能である。画像のボケ効果を調整するための画像処理手法としては様々なものが知られており、画像のボケを増加させる方向の画像補正処理に関しては、各種画像ぼかしフィルターなどが一般的に知られているため、ここでの詳細な説明は省略するが、いずれの方法を用いてもよい。
<Defocus large / small control>
As described above, the blur large / medium / small control in this embodiment can also be performed by image processing. Various image processing methods for adjusting the blurring effect of the image are known, and various image blurring filters are generally known for the image correction processing in the direction of increasing the blurring of the image. Therefore, although detailed description here is omitted, any method may be used.

また、画像のボケを低減させる方向の画像補正処理に関しても、シャープネスフィルタなどとして一般的に知られており、特に、ボケのある劣化画像からボケの無い原画像を復元する際の再現性の高い方法もいくつか知られている。
ボケのある劣化画像からボケの無い原画像を復元する場合の再現性の高い方法の概略を以下に説明する。ただし、これらの技術自体は周知であるため、詳細説明は省略する。
Also, image correction processing in a direction to reduce image blur is generally known as a sharpness filter and the like, and particularly has high reproducibility when restoring an original image without blur from a degraded image with blur. Several methods are also known.
An outline of a highly reproducible method for restoring an original image without blur from a blurred image with blur will be described below. However, since these techniques are well known, detailed description is omitted.

図10は、ボケのある劣化画像からボケの無い原画像を復元する場合の概念図である。この図において、画像74の座標(x、y)における画素の輝度をg[x、y]としたとき、基本的に、ボケのある劣化画像g(x,y)とボケの無い原画像i(x,y)は、g(x,y)=p(x,y)*i(x,y)の関係で表される。ここで、p(x,y)は、PSF(点像分布関数あるいは点広がり関数)などの画像変換関数であり、「*」は、コンボリューションj(畳み込み積分)を表す。   FIG. 10 is a conceptual diagram in the case of restoring an original image without blur from a degraded image with blur. In this figure, when the luminance of the pixel at the coordinates (x, y) of the image 74 is g [x, y], basically, the blurred image g (x, y) with blur and the original image i without blur. (X, y) is represented by the relationship g (x, y) = p (x, y) * i (x, y). Here, p (x, y) is an image conversion function such as PSF (point spread function or point spread function), and “*” represents convolution j (convolution integration).

このp(x.y)を求めることができれば、p(x,y)の逆関数により、ボケのある劣化画像g(x,y)からボケの無い原画像i(x,y)を復元することができる。   If p (x, y) can be obtained, the original image i (x, y) without blur is restored from the blurred degraded image g (x, y) by the inverse function of p (x, y). be able to.

p(x,y)を推定する方法としては、たとえば、PSF(Point Spread Function/点像分布関数、点広がり関数)法を利用することができる。このPSF法では劣化画像(ボケを調整する対象画像)に対してフーリエ変換(FFT)と離散フーリエ変換(DFT)を適用してフーリエ変換画像を求め、そのフーリエ変換画像の形状などからブレやボケのない一般画像、一方向の直線ブレを含む直線ブレ画像、直線ブレと焦点ボケを含む複合画像、焦点ボケのみのボケ画像を取り出し、それらの画像に対して、直線ブレや焦点ボケの度合い推定と評価を行ってPSF関数を推定する。さらに、このPSF関数の逆関数に基づいてボケやブレを補正した画像の復元処理を行っているが、その間に用いられる演算パラメータを適宜に調節することにより、ボケの大きさ制御(大中小の制御)を自由に行うことができる。   As a method for estimating p (x, y), for example, a PSF (Point Spread Function / point spread function, point spread function) method can be used. In this PSF method, a Fourier transform image is obtained by applying Fourier transform (FFT) and discrete Fourier transform (DFT) to a deteriorated image (target image whose blur is to be adjusted), and blur or blur is determined from the shape of the Fourier transform image. General-purpose images with no blurring, straight-line blurring image including straight blurring in one direction, composite image including straight-line blurring and out-of-focus blur, and out-of-focus blur image are extracted. To evaluate the PSF function. Furthermore, image restoration processing is performed in which blurring and blurring are corrected based on the inverse function of the PSF function. By appropriately adjusting calculation parameters used during that time, the size of the blur (large, medium, and small) is controlled. Control) can be performed freely.

その他、1枚の画像に基づいて画像変換関数であるp(x,y)を推定する方法としては、ゼロクロス法、ハフ変換法(Hough変換法)、逆フィルタ法なども知られており、また、複数の画像に基づいて画像変換関数であるp(x,y)を推定する方法としては、レンチュキラーレンズなどの複数の小レンズを配置した撮像部で撮影された複数画像を利用して画像のボケを補正する技術なども知られているが、いずれの方法を用いることも可能である。   Other known methods for estimating the image conversion function p (x, y) based on one image include a zero-cross method, a Hough transform method (Hough transform method), and an inverse filter method. As a method for estimating p (x, y), which is an image conversion function, based on a plurality of images, a plurality of images taken by an imaging unit in which a plurality of small lenses such as a lenticular killer lens are arranged are used. A technique for correcting image blur is also known, but any method can be used.

なお、既述のとおり、ボケの調節は、このような画像処理よりも、撮像手段による撮像を行う際の撮影条件による補正を優先して実行する。この撮影条件による補正は、フォーカスレンズを移動させることによるフォーカス距離を調整したり、光学レンズの絞り値(絞り機構27の開き量)を調整して被写界深度を加減し、これによってボケの大きさを調節してもよい。被写界深度以外の背景や前景の部分をぼかすことができるからである。本発明の思想は、インターフェース画面60を用いて直感的なボケ調整を行わしめることにあり、したがって、ボケ調整の手法は問わない。画像処理によるものであってもよく、絞り値調整によるものであってもよく、あるいは、それらを併用したものであってもよい。   Note that, as described above, the blur adjustment is performed with priority given to the correction based on the shooting conditions when the imaging unit performs imaging, rather than such image processing. The correction based on this shooting condition adjusts the focus distance by moving the focus lens, or adjusts the aperture value (opening amount of the aperture mechanism 27) of the optical lens to increase or decrease the depth of field. The size may be adjusted. This is because background and foreground parts other than the depth of field can be blurred. The idea of the present invention is to perform intuitive blur adjustment using the interface screen 60. Therefore, the method of blur adjustment is not limited. It may be based on image processing, may be based on aperture value adjustment, or may be a combination thereof.

なお、前述したように、撮像または記録時の画像の解像度と比べて表示部の解像度が低いため、通常のライブビュー画像を見ただけでは、実際に撮像または記録される画像の微妙なボケ具合を確認することができない。そのため、ボケの調整を行う前の段階で、撮影画像のどの部分がどの程度ボケでいるかを詳細に確認したり、ボケの調整を行った後のボケの調節結果を詳細に確認する為に、次のようなユーザインターフェースを備えていてもよい。   As described above, since the resolution of the display unit is lower than the resolution of the image at the time of image capture or recording, just looking at the normal live view image will cause subtle blurring of the image actually captured or recorded. Can not be confirmed. Therefore, in order to confirm in detail which part of the shot image is blurred before adjusting the blur, and to check the blur adjustment result in detail after adjusting the blur, The following user interface may be provided.

図11は、ボケの調節結果を確認する為のいくつかのユーザインターフェース例を示す図である。この図において、(a)はライブビュー画像75と、そのライブビュー画像75に重畳表示されるフォーカスポイント76の拡大表示領域77とを示している。この拡大表示領域77は、単純にフォーカスポイント76に囲まれた部分画像を拡大表示するものであってもよいが、たとえば、以下の例のようにすることが好ましい。   FIG. 11 is a diagram illustrating several user interface examples for confirming the blur adjustment result. In this figure, (a) shows a live view image 75 and an enlarged display area 77 of a focus point 76 displayed superimposed on the live view image 75. The enlarged display area 77 may simply display a partial image surrounded by the focus point 76 in an enlarged manner, but for example, the following example is preferable.

(b)は第一の例を示し、この例では、拡大表示領域77を細かな升目に分割して各升目を所定の画質評価値で埋めている。第一の例における画質評価値は、ライブビュー画像75に対応する撮影画像を構成する画素(または複数画素)ごとの周波数成分を表す数値であり、たとえば、ライブビュー画像75に対応する撮影画像を複数の領域(1画素単位または複数画素単位)に分割し、この分割された各領域毎に、2次元フーリエ変換や2次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化したものである。一般的に画素(または複数画素)ごとの周波数成分は、ボケの度合いに相関する性質(ボケが大きいほど低くなる/ボケが小さいほど高くなる)性質があるので、この(b)のようなインターフェースを用いることにより、数値化された画質評価値を目視確認するだけで、どの程度のボケに調節されたのかを定量的に把握することができるので好ましい。なお、(b)において、数値化された画質評価値と一緒に、フォーカスポイント76の拡大画像を重畳表示するようにしてもよい。実際の画像とボケの具合を比較対照できるのでさらに好ましい。   (B) shows a first example. In this example, the enlarged display area 77 is divided into fine cells and each cell is filled with a predetermined image quality evaluation value. The image quality evaluation value in the first example is a numerical value representing a frequency component for each pixel (or a plurality of pixels) constituting the captured image corresponding to the live view image 75. For example, the captured image corresponding to the live view image 75 It is divided into a plurality of regions (one pixel unit or a plurality of pixel units), and each divided region is subjected to a two-dimensional Fourier transform or a two-dimensional discrete cosine transform to obtain a distribution state of each frequency component. The ratio or the ratio of low frequency components is quantified. In general, the frequency component for each pixel (or a plurality of pixels) has a property that correlates with the degree of blurring (the lower the blur, the higher the blur, the higher the blur). It is preferable that the degree of blurring can be quantitatively grasped only by visually confirming the digitized image quality evaluation value. In (b), the enlarged image of the focus point 76 may be superimposed and displayed together with the digitized image quality evaluation value. It is further preferable because the actual image and the degree of blur can be compared and contrasted.

(c)は第二の例を示しており、上記の第一の例との相違は、数値化された画質評価値の代わりに、色分けまたはパターン分けされた画質評価値を用いることにある。すなわち、第一の例における画質評価値(数値化されたもの)の値を色分けしたり、または、塗りつぶしパターン分けしたりしたものであり、このようにすると、どの程度のボケに調節されたのかを“直感的”に把握できるのでより好ましい。なお、この第二の例においても、色分けまたはパターン分けされた画質評価値と一緒に、フォーカスポイント76の拡大画像を重畳表示するようにしてもよい。   (C) shows a second example. The difference from the first example is that color-coded or pattern-divided image quality evaluation values are used instead of the digitized image quality evaluation values. In other words, the image quality evaluation values (quantized values) in the first example are color-coded or filled patterns, and how much blur is adjusted in this way Is more preferable because it can be understood intuitively. In the second example as well, an enlarged image of the focus point 76 may be superimposed and displayed together with the image quality evaluation values that have been color-coded or patterned.

<露出補正制御>
露出補正制御処理は、インターフェース画面60を用いて直感的に指定された黒基準または白基準もしくはその双方に適合した露出補正量を決定するための処理であり、その具体的手法も問わないが、たとえば、絞り値を変更することによって所望の露出補正量を決定する態様であってもよく、または、シャッタ速度を変更することによって所望の露出補正量を決定する態様であってもよい。もしくは、撮影感度(ISO感度)を変更することによって所望の露出補正量を決定する態様であってよい。さらに、それらを併用したものであってもよい。
<Exposure compensation control>
The exposure correction control process is a process for determining an exposure correction amount adapted to the black standard and / or the white standard intuitively specified using the interface screen 60, and the specific method is not limited. For example, the desired exposure correction amount may be determined by changing the aperture value, or the desired exposure correction amount may be determined by changing the shutter speed. Alternatively, a desired exposure correction amount may be determined by changing photographing sensitivity (ISO sensitivity). Further, they may be used in combination.

<フォーカスポイント制御>
フォーカスポイント制御処理は、フォーカスマーカ67aの十字クロス部分に焦点を合わせる処理を行うものであり、たとえば、当該部分までの距離を測距部31で測り、その測定結果に基づいてフォーカス駆動部34を駆動し、光学系のフォーカスレンズの前後位置を調節するものであってもよい。
<Focus point control>
The focus point control process is a process for focusing on the cross-cross portion of the focus marker 67a. For example, the distance to the portion is measured by the distance measuring unit 31, and the focus driving unit 34 is controlled based on the measurement result. It may be driven to adjust the front / rear position of the focus lens of the optical system.

<ホワイトバランス制御>
ホワイトバランス制御処理は、インターフェース画面60を用いて直感的に指定された色温度に適合したホワイトバランス補正量を決定するための処理であり、たとえば、当該ホワイトバランス補正が画像処理部32で行われているものとすれば、この画像処理部32に対し、インターフェース画面60を用いて直感的に指定された色温度の値またはそれに相関する値を与え、その目標値になるように、画像処理部32でホワイトバランスの補正を行わせるようにしてもよい。
<White balance control>
The white balance control process is a process for determining a white balance correction amount suitable for the color temperature intuitively specified using the interface screen 60. For example, the white balance correction is performed by the image processing unit 32. If this is the case, the image processing unit 32 is provided with a color temperature value that is intuitively specified using the interface screen 60 or a value correlated therewith, so that the target value is obtained. The white balance may be corrected at 32.

以上のとおり、本実施形態によれば、(ア)ライブビュー画像内の任意場所に対するボケの大中小指定、(イ)ライブビュー画像内の任意明るさ部分を黒基準や白基準とした露出補正指定、および、(ウ)ライブビュー画像を見ながらの色温度補正指定など写真の仕上がりに影響する各種パラメータを「撮影本番前」に撮影者に簡単、かつ、総合的に設定させることができる直感的に優れたインターフェースを提供することができるから、取り直しを極力回避できるスマートな撮影支援技術を提供できるという特有の効果が得られる。   As described above, according to the present embodiment, (a) large / medium / small designation of blur for an arbitrary place in a live view image, and (b) exposure correction using an arbitrary brightness portion in a live view image as a black reference or a white reference. Intuition that allows the photographer to easily and comprehensively set various parameters that affect the finish of the photo, such as designation and (c) color temperature correction specification while viewing the live view image "before the actual shooting" Therefore, it is possible to provide a smart shooting support technology that can avoid re-taking as much as possible.

1 デジタルカメラ(撮像装置)
18 液晶パネル(表示手段)
30 撮像部(撮像手段)
53 中央制御部(表示制御手段、第一補正手段、第二補正手段、復元手段、画質評価手段、画質表示手段、特定手段)
60 インターフェース画面(ユーザインターフェース)
62 ボケ大スイッチ(スイッチオブジェクト)
63 ボケ中スイッチ(スイッチオブジェクト)
64 ボケ小スイッチ(スイッチオブジェクト)
65 黒基準スイッチ(スイッチオブジェクト)
66 白基準スイッチ(スイッチオブジェクト)
67 フォーカススイッチ(スイッチオブジェクト)
68 色温度スイッチ(スイッチオブジェクト)
62a ボケマーカ(マーカオブジェクト)
63a ボケマーカ(マーカオブジェクト)
64a ボケマーカ(マーカオブジェクト)
65a 黒基準マーカ(マーカオブジェクト)
66a 白基準マーカ(マーカオブジェクト)
69 ライブビュー画像
1 Digital camera (imaging device)
18 Liquid crystal panel (display means)
30 Imaging unit (imaging means)
53 Central control unit (display control means, first correction means, second correction means, restoration means, image quality evaluation means, image quality display means, identification means)
60 Interface screen (user interface)
62 Bokeh large switch (switch object)
63 Out of focus switch (switch object)
64 Bokeh small switch (switch object)
65 Black reference switch (switch object)
66 White reference switch (switch object)
67 Focus switch (switch object)
68 Color temperature switch (switch object)
62a Blur marker (marker object)
63a Blur marker (marker object)
64a Blur marker (marker object)
65a Black reference marker (marker object)
66a White reference marker (marker object)
69 Live View image

Claims (23)

撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、
を備え、
前記撮影制御手段は、前記指定位置の画像状態を変化させる場合に、前記撮像手段による撮像の際の撮影条件を優先的に変化させ、この撮影条件の変化では指定された画像状態にすることができない場合に、撮影画像の記録前に行う画像処理の画像処理条件を変化させることを特徴とする撮像装置。
Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
With
When changing the image state at the specified position, the shooting control unit preferentially changes shooting conditions at the time of shooting by the imaging unit, and the change of the shooting conditions causes the designated image state to be obtained. An image pickup apparatus that changes image processing conditions for image processing performed before recording of a captured image when it cannot be performed .
前記指定手段は、前記ライブビュー画像上において任意に指定された複数の指定位置の各々に対して、前記所定の観点に基づく画像状態を独立して任意に指定させ、
前記撮影制御手段は、前記複数の指定位置の各々の画像状態が独立して指定された画像状態になるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させることを特徴とする請求項1に記載の撮像装置。
The designation means allows the image state based on the predetermined viewpoint to be arbitrarily designated independently for each of a plurality of designated positions arbitrarily designated on the live view image,
The imaging control unit changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that each of the image states of the plurality of designated positions becomes an independently designated image state. The imaging apparatus according to claim 1, wherein:
前記指定手段は、前記指定位置における前記所定の観点に基づく画像状態を指定時の画像状態に対して変化させる方向と量をユーザーに指定させ、
前記撮影制御手段は、前記指定位置における所定の観点に基づく画像状態が前記指定された方向に指定された量だけ変化するように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させることを特徴とする請求項1または2に記載の撮像装置。
The designation means allows a user to designate a direction and an amount to change an image state based on the predetermined viewpoint at the designated position with respect to an image state at the time of designation,
The imaging control means is an imaging condition or image when recording an image taken by the imaging means so that an image state based on a predetermined viewpoint at the designated position changes by a designated amount in the designated direction. The imaging apparatus according to claim 1, wherein processing conditions are changed.
前記撮影制御手段は、前記指定位置のボケ具合を変化させる場合に、前記撮像手段による撮像の際の被写界深度に係るフォーカス距離および絞り値を優先的に変化させ、フォーカス距離および絞り値の変化では指定された画像状態にすることができない場合に、撮影画像の記録前に行う画像処理の画像処理条件を変化させることを特徴とする請求項1乃至3のいずれかに記載の撮像装置。 The imaging control unit preferentially changes a focus distance and an aperture value related to a depth of field at the time of imaging by the imaging unit when changing the degree of blur at the designated position, and sets the focus distance and the aperture value. 4. The imaging apparatus according to claim 1 , wherein when the change cannot make the designated image state, the image processing condition of the image processing to be performed before recording the captured image is changed. ボケの無い原画像をボケのある劣化画像に変換する画像変換関数を、前記撮像手段から取り込まれた撮影画像を劣化画像とした場合において推定し、この推定された画像変換関数の逆変換を行う逆画像変換関数によって前記撮影画像を変換することで復元画像を生成する復元手段を更に備え、
前記撮影制御手段は、対象とする画像に対してボケを低減する方向への補正を行う場合には、前記復元手段により生成された復元画像に基づいてボケ量を補正する画像処理を実行することを特徴とする請求項4に記載の撮像装置。
An image conversion function that converts an original image without blur into a degraded image with blur is estimated when the captured image captured from the imaging unit is a degraded image, and the estimated image conversion function is inversely converted. Further comprising a restoring means for generating a restored image by converting the captured image by an inverse image conversion function;
The image capturing control unit performs image processing for correcting the amount of blur based on the restored image generated by the restoration unit when performing correction in a direction to reduce blur on the target image. The imaging apparatus according to claim 4 .
前記復元手段は、前記撮像手段から取り込まれた撮影画像に対して2次元フーリエ変換または2次元離散コサイン変換を施したフーリエ変換画像に基づいて前記逆画像変換関数を推定することを特徴とする請求項5に記載の撮像装置。 The restoring means, claims and estimates the inverse image transform function based on the Fourier transform image subjected to two-dimensional Fourier transform or two-dimensional discrete cosine transform on the captured image captured by the image capturing unit (11-18) Item 6. The imaging device according to Item 5 . 撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、
を備え、
前記指定手段は、前記ライブビュー画像上に、前記画像状態を変化させる方向が夫々異なる複数のマーカオブジェクトを表示し、このマーカオブジェクト上のユーザー操作に応じて、操作されたマーカオブジェクトに対応する方向に画像状態を変化させることを指定することを特徴とする撮像装置。
Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
With
The designation means displays a plurality of marker objects having different directions for changing the image state on the live view image, and a direction corresponding to the operated marker object in response to a user operation on the marker object. imaging apparatus characterized by specifying the changing image states.
前記指定手段は、前記マーカオブジェクトに対する操作回数によって前記画像状態を変化させる量を指定することを特徴とする請求項7に記載の撮像装置。 The imaging apparatus according to claim 7 , wherein the designation unit designates an amount by which the image state is changed depending on the number of operations on the marker object. 撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、
前記撮像手段から取り込まれた撮影画像を複数の領域に分割し、この分割された各領域毎に、2次元フーリエ変換または2次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化した画質評価値を算出する画質評価手段と、
前記画質評価手段により各領域毎に数値化された画質評価値を前記ライブビュー画像とともに表示する画質表示手段と
を備えたことを特徴とする撮像装置。
Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
The captured image captured from the imaging unit is divided into a plurality of regions, and each divided region is subjected to two-dimensional Fourier transform or two-dimensional discrete cosine transform to obtain a distribution state of each frequency component, thereby obtaining a high-frequency component An image quality evaluation means for calculating an image quality evaluation value obtained by quantifying the ratio of low frequency components or
An image pickup apparatus comprising: image quality display means for displaying an image quality evaluation value digitized for each area by the image quality evaluation means together with the live view image.
前記撮像手段から取り込まれた撮影画像内で、前記画質評価手段による画質評価値の算出対象となる位置を特定する特定手段を更に備え、
前記画質評価手段は、前記特定手段により特定された位置を含む複数の領域に対して前記画質評価値を算出し、
前記画質表示手段は、前記画質評価手段により各領域毎に数値化された画質評価値を、格子状に拡大して表示することを特徴とする請求項9に記載の撮像装置。
In the captured image captured from the imaging means, further comprising a specifying means for specifying a position that is a calculation target of the image quality evaluation value by the image quality evaluation means,
The image quality evaluation means calculates the image quality evaluation value for a plurality of regions including the position specified by the specifying means,
The image pickup apparatus according to claim 9 , wherein the image quality display unit displays the image quality evaluation value digitized for each region by the image quality evaluation unit in an enlarged manner in a grid pattern.
前記画質表示手段は、各領域に対応する画質評価値を色またはパターンに変換して各格子内に表示することを特徴とする請求項10に記載の撮像装置。 11. The image pickup apparatus according to claim 10 , wherein the image quality display means converts an image quality evaluation value corresponding to each area into a color or a pattern and displays it in each grid. 前記指定手段は、前記ライブビュー画像上において任意に指定された複数の指定位置の各々に対して、前記画像状態を変化させる方向と量を独立して任意に指定させ、
前記撮影制御手段は、前記複数の指定位置の各々の画像状態が独立して指定方向に指定量だけ変化するように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させることを特徴とする請求項1乃至11のいずれかに記載の撮像装置。
The designation means, for each of a plurality of designated positions arbitrarily designated on the live view image, to arbitrarily designate the direction and amount to change the image state independently,
The imaging control means sets an imaging condition or an image processing condition when recording an image captured by the imaging means so that an image state of each of the plurality of designated positions independently changes by a designated amount in a designated direction. The imaging apparatus according to claim 1 , wherein the imaging apparatus is changed.
前記撮影制御手段は、更に、前記指定位置における所定の観点に基づく画像状態が前記指定された方向に指定された量だけ変化するように、前記撮像手段により撮像した画像を前記ライブビュー画像として表示する際の撮像条件または画像処理条件を変化させることを特徴とする請求項1乃至12のいずれかに記載の撮像装置。 The imaging control unit further displays an image captured by the imaging unit as the live view image so that an image state based on a predetermined viewpoint at the specified position changes by a specified amount in the specified direction. The imaging apparatus according to claim 1, wherein an imaging condition or an image processing condition at the time of changing is changed. 前記所定の観点は、撮影画像のボケ具合であり、
前記指定手段は、前記指定位置における指定時の撮影画像のボケ具合に対してボケ量を増やすか減らすかの変化方向と変化量をユーザーに指定させることを特徴とする請求項1乃至13のいずれかに記載の撮像装置。
The predetermined viewpoint is a blurred state of a captured image,
It said designation means, one of the claims 1 to 13, characterized in that the specified amount of change and of changing direction to increase or decrease the blur amount to the blurriness of the captured image is specified in the specified position the user An imaging apparatus according to claim 1.
前記指定手段は、前記所定の観点をユーザーに任意に指定させることを特徴とする請求項1乃至14のいずれかに記載の撮像装置。 The imaging device according to claim 1 , wherein the designation unit causes the user to arbitrarily designate the predetermined viewpoint. 前記所定の観点は、撮影画像の明るさを含み、
前記指定手段は、前記指定位置における指定時の撮影画像の明るさに対して明るさを増やすか減らすかの変化方向と変化量をユーザーに指定させることを特徴とする請求項1乃至15のいずれかに記載の撮像装置。
The predetermined viewpoint includes the brightness of the captured image,
16. The device according to claim 1 , wherein the designating unit causes the user to designate a change direction and a change amount as to whether the brightness is increased or decreased with respect to the brightness of the captured image at the time of designation at the designated position. An imaging apparatus according to claim 1.
前記所定の観点は、撮影画像の色温度であり、
前記指定手段は、前記指定位置における指定時の撮影画像の色温度に対して色温度を増やすか減らすかの変化方向と変化量をユーザーに指定させることを特徴とする請求項1乃至16のいずれかに記載の撮像装置。
The predetermined viewpoint is a color temperature of a captured image,
It said designation means, one of the claims 1 to 16, characterized in that the specified amount of change and of changing direction to increase or decrease the color temperature to the color temperature is specified in the captured image in the designated position on the user An imaging apparatus according to claim 1.
前記指定手段は、ユーザインターフェースとして、前記画像状態を指定するためのスイッチオブジェクトを備え、該スイッチオブジェクトに対するユーザ操作に応答して、前記位置指定を行うためのマーカオブジェクトを前記ライブビュー画像上に出現させることを特徴とする請求項1乃至17のいずれかに記載の撮像装置。 The designation means includes a switch object for designating the image state as a user interface, and a marker object for designating the position appears on the live view image in response to a user operation on the switch object. The imaging apparatus according to claim 1, wherein 前記マーカオブジェクトは、ユーザ操作に応じて前記ライブビュー画像上で位置を移動することを特徴とする請求項18に記載の撮像装置。 The imaging apparatus according to claim 18 , wherein the marker object moves on the live view image in accordance with a user operation. 撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御処理と、
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定処理と、
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御処理と、
を含み、
前記撮影制御処理は、前記指定位置の画像状態を変化させる場合に、前記撮像手段による撮像の際の撮影条件を優先的に変化させ、この撮影条件の変化では指定された画像状態にすることができない場合に、撮影画像の記録前に行う画像処理の画像処理条件を変化させ、
前記指定処理は、前記ライブビュー画像上に、前記画像状態を変化させる方向が夫々異なる複数のマーカオブジェクトを表示し、このマーカオブジェクト上のユーザー操作に応じて、操作されたマーカオブジェクトに対応する方向に画像状態を変化させることを指定することを特徴とする、撮像装置の制御方法。
Display control processing for sequentially displaying live view images for confirmation of shooting composition, which are sequentially output from the imaging means, on the display means;
A designation process for causing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
A shooting control process for changing an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
Including
In the shooting control process, when the image state at the designated position is changed, the shooting condition at the time of imaging by the imaging unit is preferentially changed, and the change to the shooting condition causes the designated image state. If this is not possible, change the image processing conditions for image processing before recording the shot image,
In the designation process, a plurality of marker objects having different directions for changing the image state are displayed on the live view image, and a direction corresponding to the operated marker object according to a user operation on the marker object A method for controlling an image pickup apparatus, characterized in that an image state is designated to be changed .
撮像装置のコンピュータを、
撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、
して機能させ、
前記撮影制御手段は、前記指定位置の画像状態を変化させる場合に、前記撮像手段による撮像の際の撮影条件を優先的に変化させ、この撮影条件の変化では指定された画像状態にすることができない場合に、撮影画像の記録前に行う画像処理の画像処理条件を変化させることを特徴とするプログラム。
The computer of the imaging device,
Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
To function,
When changing the image state at the specified position, the shooting control unit preferentially changes shooting conditions at the time of shooting by the imaging unit, and the change of the shooting conditions causes the designated image state to be obtained. A program characterized by changing image processing conditions of image processing performed before recording of a photographed image when it cannot be performed .
撮像装置のコンピュータを、The computer of the imaging device,
撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
して機能させ、To function,
前記指定手段は、前記ライブビュー画像上に、前記画像状態を変化させる方向が夫々異なる複数のマーカオブジェクトを表示し、このマーカオブジェクト上のユーザー操作に応じて、操作されたマーカオブジェクトに対応する方向に画像状態を変化させることを指定することを特徴とするプログラム。The designation means displays a plurality of marker objects having different directions for changing the image state on the live view image, and a direction corresponding to the operated marker object in response to a user operation on the marker object. A program characterized by specifying to change the image state.
撮像装置のコンピュータを、The computer of the imaging device,
撮像手段から逐次出力される撮影構図確認用のライブビュー画像を表示手段に逐次表示させる表示制御手段と、Display control means for sequentially displaying on the display means live view images for confirmation of shooting composition that are sequentially output from the imaging means;
前記ライブビュー画像上における任意の位置をユーザーに指定させるとともに、この指定位置における所定の観点に基づく画像状態をユーザーに任意に指定させる指定手段と、Designating means for allowing the user to designate an arbitrary position on the live view image and for allowing the user to arbitrarily designate an image state based on a predetermined viewpoint at the designated position;
前記指定位置における前記所定の観点に基づく画像状態が前記指定された画像状態となるように、前記撮像手段により撮像した画像を記録する際の撮像条件または画像処理条件を変化させる撮影制御手段と、An imaging control unit that changes an imaging condition or an image processing condition when recording an image captured by the imaging unit so that an image state based on the predetermined viewpoint at the specified position becomes the specified image state;
前記撮像手段から取り込まれた撮影画像を複数の領域に分割し、この分割された各領域毎に、2次元フーリエ変換または2次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化した画質評価値を算出する画質評価手段と、The captured image captured from the imaging unit is divided into a plurality of regions, and each divided region is subjected to two-dimensional Fourier transform or two-dimensional discrete cosine transform to obtain a distribution state of each frequency component, thereby obtaining a high-frequency component An image quality evaluation means for calculating an image quality evaluation value obtained by quantifying the ratio of low frequency components or
前記画質評価手段により各領域毎に数値化された画質評価値を前記ライブビュー画像とともに表示する画質表示手段とImage quality display means for displaying an image quality evaluation value digitized for each area by the image quality evaluation means together with the live view image;
して機能させることを特徴とするプログラム。A program characterized by making it function.
JP2010006576A 2010-01-15 2010-01-15 Imaging apparatus, control method thereof, and program Expired - Fee Related JP5454158B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010006576A JP5454158B2 (en) 2010-01-15 2010-01-15 Imaging apparatus, control method thereof, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010006576A JP5454158B2 (en) 2010-01-15 2010-01-15 Imaging apparatus, control method thereof, and program

Publications (3)

Publication Number Publication Date
JP2011146957A JP2011146957A (en) 2011-07-28
JP2011146957A5 JP2011146957A5 (en) 2013-01-31
JP5454158B2 true JP5454158B2 (en) 2014-03-26

Family

ID=44461413

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010006576A Expired - Fee Related JP5454158B2 (en) 2010-01-15 2010-01-15 Imaging apparatus, control method thereof, and program

Country Status (1)

Country Link
JP (1) JP5454158B2 (en)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5737880B2 (en) * 2010-08-20 2015-06-17 キヤノン株式会社 IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
EP2579591A1 (en) * 2011-10-04 2013-04-10 Thomson Licensing Method of and device for encoding an HDR image, method of and device for reconstructing an HDR image and non-transitory storage medium
US9179062B1 (en) * 2014-11-06 2015-11-03 Duelight Llc Systems and methods for performing operations on pixel data
US9531961B2 (en) 2015-05-01 2016-12-27 Duelight Llc Systems and methods for generating a digital image using separate color and intensity data
US9918017B2 (en) 2012-09-04 2018-03-13 Duelight Llc Image sensor apparatus and method for obtaining multiple exposures with zero interframe time
US9819849B1 (en) 2016-07-01 2017-11-14 Duelight Llc Systems and methods for capturing digital images
US9807322B2 (en) 2013-03-15 2017-10-31 Duelight Llc Systems and methods for a digital image sensor
US10558848B2 (en) 2017-10-05 2020-02-11 Duelight Llc System, method, and computer program for capturing an image with correct skin tone exposure
JP6188377B2 (en) * 2013-03-29 2017-08-30 キヤノン株式会社 Display control apparatus, control method thereof, and control program
JP6102602B2 (en) 2013-07-23 2017-03-29 ソニー株式会社 Image processing apparatus, image processing method, image processing program, and imaging apparatus
JP6249678B2 (en) * 2013-08-21 2017-12-20 キヤノン株式会社 Display control apparatus, control method therefor, program, and storage medium
US9712756B2 (en) 2013-08-21 2017-07-18 Canon Kabushiki Kaisha Image capturing apparatus and control method thereof
US10924688B2 (en) 2014-11-06 2021-02-16 Duelight Llc Image sensor apparatus and method for obtaining low-noise, high-speed captures of a photographic scene
US11463630B2 (en) 2014-11-07 2022-10-04 Duelight Llc Systems and methods for generating a high-dynamic range (HDR) pixel stream
CN109792478B (en) 2016-09-01 2021-11-12 迪尤莱特公司 Apparatus and method for adjusting focus based on focus target information

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09113957A (en) * 1995-10-20 1997-05-02 Canon Inc Image pickup device
JP4090851B2 (en) * 2002-11-19 2008-05-28 オリンパス株式会社 White balance processing apparatus, white balance processing method, and digital camera
JP2005109740A (en) * 2003-09-29 2005-04-21 Casio Comput Co Ltd Image photographing processing apparatus and program
JP4929630B2 (en) * 2005-07-06 2012-05-09 ソニー株式会社 Imaging apparatus, control method, and program
JP4586707B2 (en) * 2005-10-28 2010-11-24 株式会社ニコン Image processing apparatus, electronic camera, and image processing program
JP2008079193A (en) * 2006-09-25 2008-04-03 Fujifilm Corp Digital camera
JP2009267523A (en) * 2008-04-22 2009-11-12 Nikon Corp Image restoration apparatus and imaging apparatus

Also Published As

Publication number Publication date
JP2011146957A (en) 2011-07-28

Similar Documents

Publication Publication Date Title
JP5454158B2 (en) Imaging apparatus, control method thereof, and program
KR101058011B1 (en) How to Operate Digital Camera Using Touch Screen
JP4644883B2 (en) Imaging device
US8937677B2 (en) Digital photographing apparatus, method of controlling the same, and computer-readable medium
KR100942634B1 (en) Image correction device, image correction method, and computer readable medium
KR101930460B1 (en) Photographing apparatusand method for controlling thereof
JP4509081B2 (en) Digital camera and digital camera program
JP2001211362A (en) Composition assisting frame selecting method for digital camera and digital camera
KR101286953B1 (en) Photographing apparatus
US11245852B2 (en) Capturing apparatus for generating two types of images for display from an obtained captured image based on scene luminance and exposure
JP4284440B2 (en) Electronic camera
US8570394B1 (en) Systems, methods, and mediums for adjusting an exposure of an image using a histogram
JP2004289383A (en) Image pickup device, image data generating device, image data processor, and image data processing program
JP4842919B2 (en) Display device, photographing device, and display method
JP2004109247A (en) Digital camera, image processor, and program
JP2010141609A (en) Imaging apparatus
KR101828410B1 (en) Imaging device, imaging mode selecting method, and recording medium storing computer program
JP2009157242A (en) Imaging apparatus
JP5854235B2 (en) Imaging apparatus, imaging method, and program
JP4760496B2 (en) Image data generation apparatus and image data generation method
JP2009033386A (en) Photographing device and method
JP5029765B2 (en) Image data generation apparatus and image data generation method
JP2006295774A (en) Imaging apparatus, control method thereof, and image processing program for digital camera
KR100919982B1 (en) Control method of digital camera having function of screen partition
JP4760497B2 (en) Image data generation apparatus and image data generation method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121207

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130926

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131223

R150 Certificate of patent or registration of utility model

Ref document number: 5454158

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees