JP5948960B2 - Camera, image processing apparatus and program - Google Patents
Camera, image processing apparatus and program Download PDFInfo
- Publication number
- JP5948960B2 JP5948960B2 JP2012044326A JP2012044326A JP5948960B2 JP 5948960 B2 JP5948960 B2 JP 5948960B2 JP 2012044326 A JP2012044326 A JP 2012044326A JP 2012044326 A JP2012044326 A JP 2012044326A JP 5948960 B2 JP5948960 B2 JP 5948960B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- synthesis
- image
- unit
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、カメラ、画像処理装置及びプログラムに関する。
The present invention relates to a camera, an image processing apparatus, and a program .
次のような画像処理装置が知られている。この画像処理装置は、連続撮影画像の中からベストショット画像を選択して記録する(例えば、特許文献1)。 The following image processing apparatus is known. This image processing apparatus selects and records a best shot image from among continuously shot images (for example, Patent Document 1).
しかしながら、従来の画像処理装置では、ベストショット画像を取得して記録することはできるが、取得したベストショット画像に演出効果を付すことはできなかった。 However, in the conventional image processing apparatus, the best shot image can be acquired and recorded, but it is not possible to give a production effect to the acquired best shot image.
本発明によるカメラは、被写体を撮像し、複数の画像データを生成する撮像部と、前記撮像部で撮像された複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択部と、前記選択部で選択された合成用画像データを前記特定の画像データに合成する合成部と、前記合成部によって合成された合成画像データを記録する記録部と、を備え、前記合成部は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定する。
本発明による画像処理装置は、複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択部と、前記選択部で選択された合成用画像データを前記特定の画像データに合成する合成部と、前記合成部によって合成された合成画像データを記録する記録部と、を備え、前記合成部は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定する。
本発明によるプログラムは、コンピュータに、被写体を撮像し、複数の画像データを生成する撮像手順、前記撮像手順で撮像された複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択手順、前記選択手順で選択された合成用画像データを前記特定の画像データに合成する合成手順、前記合成手順によって合成された合成画像データを記録する記録手順、を実行させるためのプログラムであって、前記合成手順は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定する。
本発明によるプログラムは、コンピュータに、複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択手順、前記選択手順で選択された合成用画像データを前記特定の画像データに合成する合成手順、 前記合成手順によって合成された合成画像データを記録する記録手順、を実行させるためのプログラムであって、前記合成手順は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定する。
The camera according to the present invention captures an object and generates a plurality of image data, and combines the specific image data and the specific image data from the plurality of image data captured by the imaging unit. A selection unit for selecting image data for synthesis, a synthesis unit for synthesizing the image data for synthesis selected by the selection unit with the specific image data, and a record for recording the synthesized image data synthesized by the synthesis unit And the combining unit determines the number of combined image data to be combined with the specific image data based on the amount of movement of the subject .
The image processing apparatus according to the present invention, a specific image data from a plurality of image data, and a selector for selecting and combining image data to be synthesized with the specific image data, for the selected synthesis by the selector A synthesis unit that synthesizes image data with the specific image data; and a recording unit that records the synthesized image data synthesized by the synthesis unit. The number of combined image data to be combined with the image data is determined .
The program according to the present invention includes an imaging procedure for imaging a subject and generating a plurality of image data on a computer, specific image data among the plurality of image data captured by the imaging procedure, and the specific image data. A selection procedure for selecting image data for synthesis to be synthesized, a synthesis procedure for synthesizing the image data for synthesis selected in the selection procedure with the specific image data, and a record for recording the synthesized image data synthesized by the synthesis procedure The composition step determines the number of images of the image data for composition to be combined with the specific image data based on the movement amount of the subject .
Program according to the present invention, the computer, the specific image data from a plurality of image data, selection procedure for selecting and combining image data to be synthesized with the specific image data, for the selected synthesis by the selection procedure synthetic procedures of synthesizing image data in the specific image data, recording procedure for recording the composite image data synthesized by said synthesis procedure, a program for execution, the synthesis procedure, the amount of movement of the object Based on this, the number of images to be combined with the specific image data is determined .
本発明によれば、ベストショット画像を含んだ合成画像を生成して、ベストショット画像に演出効果を付すことができる。 According to the present invention, it is possible to generate a composite image including the best shot image and to provide a rendering effect to the best shot image.
図1は、本実施の形態におけるカメラの一実施の形態の構成を示すブロック図である。カメラ100は、操作部材101と、レンズ102と、撮像素子103と、制御装置104と、メモリカードスロット105と、モニタ106とを備えている。操作部材101は、使用者によって操作される種々の入力部材、例えば電源ボタン、レリーズボタン、ズームボタン、十字キー、決定ボタン、再生ボタン、削除ボタンなどを含んでいる。
FIG. 1 is a block diagram illustrating a configuration of an embodiment of a camera according to the present embodiment. The
レンズ102は、不図示のマウント部を介してカメラ100に着脱可能な構成となっていてもよいし、カメラ100と一体となっていてもよい。なお、レンズ102は、複数の光学レンズから構成されるが、図1では代表して1枚のレンズで表している。撮像素子103は、例えばCMOSなどのイメージセンサにより構成され、レンズ102を通過した光束による被写体像を光電変換してアナログ画像信号を生成し、生成したアナログ画像信号を制御装置104へ出力する。
The
制御装置104は、CPU、メモリ、およびその他の周辺回路により構成され、カメラ100を制御する。なお、制御装置104を構成するメモリには、SDRAMやフラッシュメモリが含まれる。SDRAMは、揮発性のメモリであって、CPUがプログラム実行時にプログラムを展開するためのワークメモリとして使用されたり、データを一時的に記録するためのバッファメモリとして使用される。また、フラッシュメモリは、不揮発性のメモリであって、制御装置104が実行するプログラムのデータや、プログラム実行時に読み込まれる種々のパラメータなどが記録されている。
The
制御装置104は、撮像素子103から入力されたアナログ画像信号をデジタル画像信号に変換し、種々の画像処理を施した後に所定の画像形式、例えばJPEG形式の本画像データを生成する。また、制御装置104は、生成した本画像データに基づいて、表示用画像データ、例えばサムネイル画像データを生成する。制御装置104は、本画像データとサムネイル画像データとを含み、さらにヘッダ情報を付加した画像ファイルを生成してメモリカードスロット105へ出力する。
The
メモリカードスロット105は、記憶媒体としてのメモリカードを挿入するためのスロットであり、制御装置104から出力された画像ファイルをメモリカードに書き込んで記録する。また、メモリカードスロット105は、制御装置104からの指示に基づいて、メモリカード内に記憶されている画像ファイルを読み込む。
The
モニタ106は、カメラ100の背面に搭載された液晶モニタ(背面モニタ)であり、当該モニタ106には、メモリカードに記憶されている画像やカメラ100を設定するための設定メニューなどが表示される。また、制御装置104は、使用者によってカメラ100のモードがライブビューモードに設定されると、撮像素子103から時系列で取得した画像の表示用画像データをモニタ106に出力する。これによってモニタ106にはスルー画が表示される。
The
本実施の形態におけるカメラ100は、使用者によって撮影のための予備操作が行われたときに、高速(例えば、30fpsや60fps等の速度)で連写を行ってプリキャプチャー撮影を行い、その後、使用者によって撮影指示のための操作が行われたときに、上記プリキャプチャー撮影によって取得された複数の画像を、あらかじめ決められた評価値を用いて評価することにより、特定の1枚の画像をベストショット画像として選択し、選択したベストショット画像をメモリカードに記録するベストショット撮影機能を備えている。
The
例えば、制御装置104は、使用者による操作部材101に含まれるレリーズボタンの半押し操作を上記予備操作として検出し、オートフォーカス処理等の撮影準備処理を開始するとともに、上述したプリキャプチャー撮影を行う。制御装置104は、その後、使用者によってレリーズボタンが全押しされたときに、撮影指示のための操作がなされたと判断して、ベストショット画像の選択を行う。
For example, the
なお、ベストショット画像の選択方法は、公知の処理であるため詳細な説明は省略するが、プリキャプチャー画像のそれぞれを解析して、一般的に良いと評価される画像が自動的に選択されるように評価値が算出される。例えば、手ブレ量が大きい画像の評価値や、人物が目を閉じている画像は、評価値が低く算出され、ベストショット画像として選択されにくくなっている。制御装置104は、プリキャプチャー撮影によって取得された複数の画像の中から、ベストショット画像選択のために算出された評価値が最も高い画像をベストショット画像として選択する。
The best shot image selection method is a well-known process and will not be described in detail. However, each pre-capture image is analyzed and an image generally evaluated as good is automatically selected. Thus, the evaluation value is calculated. For example, an evaluation value of an image with a large amount of camera shake or an image in which a person closes his / her eyes is calculated with a low evaluation value and is difficult to be selected as a best shot image. The
また、本実施の形態では、制御装置104は、上述したプリキャプチャー撮影機能により取得された複数の画像の中から、所定の選択条件に基づいて少なくともベストショット画像を含んだ2枚以上の画像を選択し、それらの画像を合成することにより、ベストショット画像に演出効果を付与した合成画像を生成する。なお、合成に用いる画像の選択条件については後述する。制御装置104は、使用者による一連の予備操作と撮影指示のための操作により取得したベストショット画像と合成画像とを関連付けてメモリカードに記録する。これによって、本実施の形態におけるカメラ100では、ベストショット画像を自動的に選択するとともに、ベストショット画像に演出効果を付与した合成画像を生成して、それぞれを関連付けて記録することができる。
In the present embodiment, the
図2は、本実施の形態における撮影処理の流れを示すフローチャートである。図2に示す処理は、使用者によってカメラ100のモードが上述したベストショット画像と合成画像とを関連付けて記録するモードに設定されたときに起動するプログラムとして、制御装置104によって実行される。
FIG. 2 is a flowchart showing a flow of photographing processing in the present embodiment. The process shown in FIG. 2 is executed by the
ステップS1において、制御装置104は、使用者によって操作部材101に含まれるレリーズボタンが半押しされることにより、上述した撮影のための予備操作が行われたか否かを判断する。ステップS1で肯定判断した場合には、ステップS2へ進む。
In step S <b> 1, the
ステップS2では、制御装置104は、図3に示すように、プリキャプチャー撮影における画像の取得タイミングを制御するための時間A、B、Cを設定する。時間A、B、Cの設定例を図3に示す。図3では、横軸が時刻を表しており、時刻t0でレリーズボタンが半押しされ、時刻t1でレリーズボタンが全押しされている。本実施の形態では、制御装置104は、時刻t0でレリーズボタンの半押しを検出した後、時間Cの間、プリキャプチャー撮影による高速連写を行って複数枚の画像を取得する。
In step S2, the
例えば、時間Cとしては、連写速度と連写によって取得すべき画像の枚数に応じて設定され、ここでは、60fpsの速度で高速連写を行って20枚の画像を取得するために必要な時間が設定される。時間Aは、時刻t1でレリーズボタンが全押しされる前に何枚の画像を取得するかに応じて設定され、時間Bは、時刻t1でレリーズボタンが全押しされた後に何枚の画像を取得するかに応じて設定される。例えば、20枚の画像のうち、レリーズボタンが全押しされる前に12枚、レリーズボタンが全押しされた後に8枚取得する場合には、時間C=時間A+時間B、かつ時間A:時間Bが6:4となるように、時間AとBとを設定する。その後、ステップS3へ進む。 For example, the time C is set according to the continuous shooting speed and the number of images to be acquired by continuous shooting. Here, the time C is necessary to acquire 20 images by performing high-speed continuous shooting at a speed of 60 fps. Time is set. Time A is set according to how many images are acquired before the release button is fully pressed at time t1, and time B is how many images are acquired after the release button is fully pressed at time t1. It is set according to whether to acquire. For example, out of 20 images, when acquiring 12 images before the release button is fully pressed and 8 images after the release button is fully pressed, time C = time A + time B and time A: time Times A and B are set so that B is 6: 4. Then, it progresses to step S3.
ステップS3では、制御装置104は、レリーズ待機処理を実行する。本実施の形態では、上述したように、高速連写を行ってプリキャプチャー撮影を行いながら、レリーズボタンからの入力信号の検出を継続して、使用者によるレリーズボタンの全押し操作を待ち受ける。なお、本実施の形態では、図3に示したように、レリーズボタンが全押しされる前は、時間Aの間だけ連写撮影を行えばよいが、レリーズボタンが全押しされるタイミング(時刻t1)は、使用者の操作タイミングに依存するため、制御装置104は、このタイミングを予測することができない。よって、制御装置104は、使用者によってレリーズボタンが半押しされた後にプリキャプチャー撮影を開始して画像を取得しておき、後の処理において、ここで取得しておいた画像の中から時間Aの間に撮影した画像のみを抽出する。
In step S3, the
その後、ステップS4へ進み、制御装置104は、レリーズボタンの半押しを検出してから所定時間以内に使用者によるレリーズボタンの全押し操作を検出したか否かを判断する。ステップS4で否定判断した場合には、ステップS1へ戻る。これにより、レリーズボタンの半押し操作から所定時間以内に全押し操作が行われない場合には、処理をタイムアウトさせることができる。これに対して、ステップS4で肯定判断した場合には、ステップS5へ進む。
Thereafter, the process proceeds to step S4, and the
ステップS5では、制御装置104は、レリーズ処理を開始する。具体的には、制御装置104は、図3に示したように、時刻t1でレリーズボタンが全押しされてから時間Bの間連写を継続する。その後、ステップS6へ進み、制御装置104は、図3に示したように、時刻t1から時間Bの経過した後に連写を終了して、プリキャプチャー撮影による画像の取得を終了する。このとき、制御装置104は、上述したように時刻t1よりも前にプリキャプチャー撮影により取得した画像のうち、時刻t1の前の時間Aの間に取得した画像を抽出する。そして、抽出した時刻t1の前の時間Aの間に取得した画像と、時刻t1の後に取得した画像とをプリキャプチャー撮影により取得した画像(以下、「プリキャプチャー画像」と呼ぶ)としてバッファメモリに記録する。これによって、図3に示した時間Cの間に取得したプリキャプチャー画像(予備画像)をバッファメモリに記録することができる。その後、ステップS7へ進む。
In step S5, the
ステップS7では、制御装置104は、ステップS6でバッファメモリに記録したプリキャプチャー画像を対象として、公知のベストショット画像選択処理を実行し、算出された評価値が最も高い画像をベストショット画像として選択する。これによって、例えば、時間Cの間に撮影された20枚のプリキャプチャー画像の中から1枚のベストショット画像が選択される。
In step S7, the
その後、ステップS8へ進み、制御装置104は、プリキャプチャー画像の中から複数の合成用画像を選択する。本実施の形態では、合成する画像の枚数はあらかじめ設定されているものとする。この設定枚数は、使用者が任意に変更できるようにしてもよい。あるいは、制御装置104が撮影条件や被写体に基づいて枚数を設定するようにしてもよい。例えば、被写体の動きが早い場合や移動量が大きい場合には、制御装置104は、設定枚数を多くして、合成画像が被写体の動きを的確に表すようにする。また、4枚の画像を合成するように設定されている場合には、制御装置104は、ステップS7で選択したベストショット画像を含む4枚の画像を合成するために、プリキャプチャー画像の中からベストショット画像を除いて選択した3枚の画像を合成用画像として選択する。
Thereafter, the process proceeds to step S8, and the
ここで、本実施の形態における合成用画像の選択条件の一例を示す。本実施の形態では、制御装置104は、例えば、撮影条件や被写体に基づいて合成用画像を選択するものとする。具体的には、制御装置104は、使用者がプリキャプチャー画像の撮影時にカメラを振って撮影方向を変更した場合のそれぞれのプリキャプチャー画像におけるカメラの移動方向やカメラの移動量、主要被写体の種類、撮影シーンの種類、主要被写体の移動量、主要被写体のポーズや配置等の1つまたはこれらの組み合わせに応じて合成用画像を選択する。なお、カメラの移動方向や移動量は、カメラ100にジャイロセンサ等を備えることに検出可能であり、撮影時にこれらを検出して画像に関連付けておくことで判定が可能になる。主要被写体の種類や撮影シーンの種類については、撮影時のシーン判定結果を画像に関連付けておくことで判定が可能になる。主要被写体の移動量や主要被写体のポーズや配置については、撮影時に被写体認識を行って、認識結果を画像に関連付けておくことで判定が可能になる。
Here, an example of selection conditions for the composition image in the present embodiment will be shown. In the present embodiment, it is assumed that the
図4〜図6に生成される合成用画像の一例を示す。図4はバスケットボールの試合中にシュートする人物の合成用画像、図5はジャンプするバレリーナの合成用画像、図6は揺らめいている旗Fの合成用画像である。
例えば、プリキャプチャー撮影によって取得された画像がバスケットボールの試合中にシュートをするゴルフのスイングをする人物を撮影した画像であるとする。この場合には、被写体の移動量(人物ゴルフクラブの移動量)に応じた枚数(図4の例では3枚)の合成用画像が選択される。その結果、図4に示すように、演出効果としてバスケットゴールに向けてシュートする人物の移動軌跡を表した合成用画像を作成することが可能となる。
An example of the composition image generated in FIGS. 4 to 6 is shown. 4 is a composite image of a person shooting during a basketball game, FIG. 5 is a composite image of a jumping ballerina, and FIG. 6 is a composite image of a fluttering flag F.
For example, it is assumed that an image acquired by pre-capture shooting is an image of a person who makes a golf swing to shoot during a basketball game. In this case, the number of images for composition (three in the example of FIG. 4) corresponding to the amount of movement of the subject (the amount of movement of the person golf club) is selected. As a result, as shown in FIG. 4, it is possible to create an image for synthesis that represents the movement trajectory of the person shooting toward the basket goal as a production effect.
あるいは、プリキャプチャー撮影によって取得された画像がジャンプをするバレリーナを撮影した画像であるとする。この場合には、カメラのスイング方向、スイング量、被写体の移動量に応じた枚数(図5の例では3枚)の合成用画像が選択される。その結果、図5に示すように、演出効果としてバレリーナのジャンプの軌跡を表した合成用画像を作成することが可能となる。あるいは、プリキャプチャー撮影によって取得された画像が静止している物体をカメラをスイングさせて撮影した画像である場合には、カメラのスイング方向、スイング量に応じた枚数の合成用画像を選択することにより、幻想的な演出効果を付した合成用画像を作成することが可能となる。 Alternatively, it is assumed that an image acquired by pre-capture shooting is an image of a ballerina that jumps. In this case, the number of compositing images (three in the example of FIG. 5) corresponding to the camera swing direction, swing amount, and subject movement amount is selected. As a result, as shown in FIG. 5, it is possible to create an image for synthesis that represents the trajectory of the ballerina jump as a production effect. Alternatively, if the image acquired by the pre-capture shooting is an image obtained by swinging the camera with a stationary object, select the number of compositing images according to the camera swing direction and the swing amount. Thus, it is possible to create a composition image with a fantastic effect.
あるいは、プリキャプチャー撮影によって取得された画像が揺らめいている旗を撮影した画像であるとする。この場合には、旗Fの形の変化量が一定間隔になるように複数の合成用画像が選択される。その結果、図6に示すように、演出効果として旗F1〜F3の揺らめきを表した合成用画像を作成することが可能となる。 Alternatively, it is assumed that the image acquired by the pre-capture shooting is an image obtained by shooting a waving flag. In this case, a plurality of compositing images are selected so that the amount of change in the shape of the flag F is a constant interval. As a result, as shown in FIG. 6, it is possible to create a composition image that represents the flickering of the flags F1 to F3 as a production effect.
その後、ステップS9へ進み、制御装置104は、ステップS7で選択したベストショット画像と、ステップS8で選択した合成用画像とに対して現像処理を施す。例えば、制御装置104は、ステップS7で選択したベストショット画像と、ステップS8で選択した合成用画像がRAWデータである場合には、公知の現像処理を施して、画像データを生成する。その後、ステップS10へ進み、制御装置104は、ステップS9で現像処理を行った後のベストショット画像(以下、「現像後ベストショット画像」と呼ぶ)をメモリカードに記録する。その後、ステップS11へ進む。
Thereafter, the process proceeds to step S9, and the
ステップS11では、制御装置104は、ステップS9で現像処理を行った後の合成用画像(以下、「現像後合成用画像」と呼ぶ)に対してゲイン補正を行う。このとき、制御装置104は、現像後合成用画像の枚数に応じて各現像後合成用画像にかけるゲイン補正量を決定してゲイン補正を行う。例えば、現像後合成用画像の枚数が4枚の場合には、各現像後合成用画像にかけるゲイン補正量を0.25として、ゲイン量の合計が1となるようにする。あるいは、合成画像の演出効果を高めるために、ベストショット画像の撮影タイミング(撮影時間)に近い合成用画像には、他に比べて高いゲインをかけて、少し明るめにゲイン補正を行うようにし、ベストショット画像から撮影時間が遠くなるほど、掛けるゲインを低くするようにしてもよい。その後、ステップS12へ進む。
In step S <b> 11, the
ステップS12では、制御装置104は、プリキャプチャー画像を撮影したときのカメラ100のスイング量が所定のスイング量以下であるか否か(スイング量が僅かであるか否か)を判断する。例えば、制御装置104は、プリキャプチャー撮影時の手触れを検出し、手触れ量が所定値以下のときに、ステップS12で肯定判断する。ステップS12で肯定判断した場合には、ステップS13へ進む。
In step S12, the
ステップS13では、制御装置104は、現像後ベストショット画像と複数の現像後合成用画像とを対象として、画像内の一部の領域でフレーム間の位置合わせを行う。例えば、制御装置104は、各画像の一部の領域の特徴点を重ね合わせるようにして位置合わせ量を決定し、それぞれの画像毎に位置合わせ処理(座標シフト)を行う。位置合わせに用いる特徴点としては、例えば、画像内で位置が変化しない背景から抽出した任意の点を用いればよい。具体的には、図6に示すような旗Fの揺らめきを表した合成用画像を作成する場合であれば、旗Fを支える支柱上の任意の点(たとえば図6では支柱P)等を用いることが考えられる。また、被写体が人物である場合には、顔認識処理によって検出した被写体の顔上の任意の点を用いるようにしてもよい。
In step S <b> 13, the
このように座標シフトをして複数の画像の位置合わせを行うと、画像の周辺画素では合成する全画像分データが揃わないので、制御装置104は、全画像分のデータが揃う最大の大きさとなるように各画像をクロップする。その後、ステップS14へ進む。これに対して、ステップS12で否定判断した場合には、そのままステップS14へ進む。 When the plurality of images are aligned by performing the coordinate shift in this way, the data for all the images to be synthesized are not prepared in the peripheral pixels of the image. Crop each image so that Then, it progresses to step S14. On the other hand, if a negative determination is made in step S12, the process proceeds directly to step S14.
ステップS14では、制御装置104は、現像後ベストショット画像とゲイン補正された現像後合成用画像とを合成する。このとき、制御装置104は、ステップS13で画像の位置合わせとクロップを行った場合には、クロップ後の画像を合成する。これによって演出効果を付した合成画像を作成することができる。
In step S <b> 14, the
その後、ステップS15へ進み、制御装置104は、ステップS14で作成した合成画像を、ステップS10で記録した現像後ベストショット画像に関連付けてメモリカードに記録して、処理を終了する。これによって、複数のプリキャプチャー画像の中から選択したベストショット画像と、ベストショット画像に演出効果を付した合成画像とを関連付けてメモリカードに記録することができる。
Thereafter, the process proceeds to step S15, and the
以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
(1)制御装置104は、プリキャプチャー撮影によって取得したプリキャプチャー画像の中からベストショット画像を選択し、プリキャプチャー画像の中から複数の合成用画像を抽出し、複数の合成用画像とベストショット画像とを合成するようにした。そして、ベストショット画像と合成画像とを関連付けて記録するようにした。これによって、ベストショット画像と、ベストショット画像に演出効果を付した合成画像とを関連付けて記録することができる。
According to the present embodiment described above, the following operational effects can be obtained.
(1) The
(2)制御装置104は、プリキャプチャー画像の中からベストショット画像選択処理における評価値が最も高い画像をベストショット画像として選択するようにした。これによって、プリキャプチャー画像の中か一般的に最も良いと評価される画像をベストショット画像として選択することができる。
(2) The
(3)制御装置104は、プリキャプチャー画像の中から撮影条件や被写体に基づいて複数の合成用画像を抽出するようにした。これによって、撮影条件や被写体に応じた最適な合成用画像を抽出することができる。
(3) The
(4)制御装置104は、撮影条件や被写体に基づいて、プリキャプチャー画像の中から抽出する合成用画像の数を決定するようにした。これによって、撮影条件や被写体に応じた最適な枚数の合成用画像を抽出することができる。
(4) The
(5)制御装置104は、現像後合成用画像に対してゲイン補正を行い、ゲイン補正を行った後の合成用画像を合成するようにした。これによって、演出効果を付与した合成画像を生成することができる。
(5) The
(6)制御装置104は、合成用画像の数に基づいて、各合成用画像かけるゲイン量を決定するようにした。これによって、合成用画像の数に応じた最適なゲイン量を決定することができる。
(6) The
(7)制御装置104は、ベストショット画像の撮影タイミング(撮影時間)に近い合成用画像には、他に比べて高いゲインをかけて、少し明るめにゲイン補正を行うようにし、ベストショット画像から撮影時間が遠くなるほど、掛けるゲインを低くするようにした。これによって、合成画像の演出効果をさらに高めることができる。
(7) The
(8)制御装置104は、プリキャプチャー撮影時の手振れ量が所定値以下のときは、ベストショット画像と合成用画像の画像内の一部の領域を用いて位置合わせを行うようにした。これによって、手ブレ量が微少であるときには、位置合わせを行った合成画像を作成することができる。
(8) When the amount of camera shake at the time of pre-capture photographing is equal to or less than a predetermined value, the
(9)制御装置104は、位置合わせをした後に、各画像をクロップするようにした。これによって、位置合わせによって画像の周辺画素において合成する全画像分データが揃わなくなる場合でも、全ての合成用画像の大きさが揃えて合成することができる。
(9) The
―変形例―
なお、上述した実施の形態のカメラは、以下のように変形することもできる。
(1)上述した実施の形態では、制御装置104は、公知のベストショット画像選択処理によって算出された評価値が最も高い画像をベストショット画像として選択する例について説明した。しかしながら、制御装置104が自動選択したベストショット画像を使用者が他の画像に変更できるようにしてもよい。例えば、制御装置104は、自動選択したベストショット画像と他のプリキャプチャー画像とをモニタ106に表示して使用者に提示し、使用者からのベストショット画像との変更を受け付けるようにしてもよい。そして、制御装置104は、使用者によってプリキャプチャー画像の中から制御装置104が自動選択した画像とは異なる画像がベストショット画像として選択された場合には、ベストショット画像を使用者によって選択された画像に選択し直す。これによって、使用者は、ベストショット画像を好みの画像に変更することができる。
-Modification-
The camera according to the above-described embodiment can be modified as follows.
(1) In the above-described embodiment, the
(2)上述した実施の形態では、制御装置104は、現像処理を行った後の合成用画像に対してゲイン補正を行ってから合成を行う例について説明した。しかしながら、制御装置104は、現像処理を行う前のRAWデータに対してゲイン補正を行ってから合成を行い、合成後のRAWデータを現像処理するようにしてもよい。また、現像処理を行ってからゲイン補正を行うか、現像処理前にゲイン補正を行うかを、主要被写体の種類、撮影シーンの種類、ISO感度、画質モード、現像処理にかかる演算時間の少なくとも1つに基づいて、切り替えるようにしてもよい。
(2) In the above-described embodiment, the example in which the
(3)制御装置104は、合成用画像を現像する際には、カメラのスイング方向、カメラのスイング量、主要被写体の種類、撮影シーンの種類、主要被写体の移動量、主要被写体のポーズや配置に基づいて、各合成用画像に適用する現像用パラメータを変更するようにしてもよい。ただし、ベストショット画像が基調となるよう、ベストショット画像の撮影タイミング付近の合成用画像は、デフォルトの現像用パラメータを施すのが好ましい。
(3) When developing the composition image, the
(4)上述した実施の形態では、制御装置104は、1枚のベストショット画像に対して1枚の合成用画像を作成し、それらを関連付けて記録する例について説明した。しかしながら、制御装置104は、1枚のベストショット画像に対して、演出効果が異なる複数枚の合成用画像を作成するようにしてもよい。この場合、合成画像の枚数は使用者が任意に設定できるようにしてもよいし、カメラ100があらかじめ準備されたアルゴリズムにより、自動的に設定するようにしてもよい。
(4) In the above-described embodiment, the
(5)上述した実施の形態では、制御装置104は、現像後合成用画像の枚数に応じて各現像後合成用画像にかけるゲイン補正量を決定してゲイン補正を行う例について説明した。しかしながら、制御装置104は、撮影条件や被写体に基づいて各現像後合成用画像にかけるゲイン補正量を決定するようにしてもよい。
(5) In the above-described embodiment, an example has been described in which the
(6)制御装置104は、合成画像の演出効果をさらに高めるために、以下のような処理を行ってもよい。例えば、合成画像に特徴ある演出効果を出すために、プリキャプチャー撮影時にショット毎にピントを合わせる距離を変えておいてもよい。その際、プリキャプチャー撮影の前に主要被写体の種類や撮影シーンの種類を判断し、この判断結果に応じてデフォーカス量を可変としても良い。また、レリーズボタン全押しのタイミングではデフォーカス量を最小としてもよい。あるいは、制御装置104は、合成画像を解析し、解析結果に応じた画像処理を施すようにしてもよい。例えば、制御装置104は、合成画像の階調を解析し、適応的に階調補正処理を行ってもよい。また、合成画像の雰囲気を解析し、適応的にデジタルフィルターをかけてぼかし処理を行うようにしてもよい。また、制御装置104は、合成画像の彩度を解析し、彩度強調処理を行うようにしてもよい。
(6) The
なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。 Note that the present invention is not limited to the configurations in the above-described embodiments as long as the characteristic functions of the present invention are not impaired. Moreover, it is good also as a structure which combined the above-mentioned embodiment and a some modification.
100 カメラ、101 操作部材、102 レンズ、103 撮像素子、104 制御装置、105 メモリカードスロット、106 モニタ 100 Camera, 101 Operation member, 102 Lens, 103 Image sensor, 104 Control device, 105 Memory card slot, 106 Monitor
Claims (15)
前記撮像部で撮像された複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択部と、
前記選択部で選択された合成用画像データを前記特定の画像データに合成する合成部と、
前記合成部によって合成された合成画像データを記録する記録部と、を備え、
前記合成部は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定するカメラ。 An imaging unit that images a subject and generates a plurality of image data;
A selection unit that selects specific image data from a plurality of image data captured by the imaging unit, and image data for synthesis to be combined with the specific image data ;
A synthesis unit that synthesizes the image data for synthesis selected by the selection unit with the specific image data;
A recording unit that records the synthesized image data synthesized by the synthesizing unit,
The combining unit is a camera that determines the number of combined image data to be combined with the specific image data based on a moving amount of a subject .
前記合成用画像データのゲインを補正するゲイン補正部と、を備え、A gain correction unit for correcting the gain of the image data for synthesis,
前記合成部は、前記ゲイン補正部でゲインが補正された前記合成用画像データを前記特定の画像データに合成するカメラ。The synthesizing unit is a camera that synthesizes the image data for synthesis whose gain is corrected by the gain correction unit with the specific image data.
前記ゲイン補正部は、前記特定の画像データに合成する前記合成用画像データの合成枚数に基づいて、前記合成用画像データのゲインを決定するカメラ。The gain correction unit is a camera that determines a gain of the image data for synthesis based on the number of synthesized image data to be synthesized with the specific image data.
前記ゲイン補正部は、前記特定の画像データの撮影時間と、前記合成用画像データの撮影時間とに基づいて、前記合成用画像データのゲインの強さを決定するカメラ。The gain correction unit determines the strength of the gain of the image data for synthesis based on the shooting time of the specific image data and the shooting time of the image data for synthesis.
前記ゲイン補正部は、前記合成用画像データのうち、前記特定の画像データに撮影時間が近いものには高いゲインを掛け、前記特定の画像データから撮影時間が遠くなるほど、掛けるゲインを低くするカメラ。 In the camera according to any one of claims 2 to 4 ,
The gain correction unit, among the combination-use image data, the multiplied high gain to those close shooting time to a particular image data, the higher the imaging time from a specific image data becomes farther, lower the gain multiplied camera.
前記選択部は、前記画像データのそれぞれを解析して評価値を算出し、前記評価値が最も高い画像を前記特定の画像データとして選択するカメラ。 In the camera according to any one of claims 1 to 5 ,
The selection unit, the analyzes each image data to calculate the evaluation value, selected to Luke camera highest image the evaluation value as the specific image data.
前記選択部によって選択された前記特定の画像データを、使用者からの指示に基づいて、前記画像データの中から選択し直すカメラ。 In the camera according to any one of claims 1 to 6 ,
The specific image data selected by the selecting unit, based on an instruction from the user, the selected straight to camera from among the image data.
前記合成部によって生成された前記合成画像データに対して画像処理を施すことにより、演出効果をさらに高める画像処理部をさらに備えるカメラ。 In the camera according to any one of claims 1 to 7,
Wherein by performing image processing on the synthetic image data generated by the synthesis unit further comprises Luke camera image processing unit to further enhance the presentation effect.
前記画像処理部は、前記合成画像データに対して、階調補正処理、ぼかし処理、彩度強調処理のうちの少なくとも1つを施すカメラ。 The camera according to claim 8, wherein
Wherein the image processing unit, with respect to the synthetic image data, the gradation correction process, blurring, at least Tsuo施to camera of the saturation enhancement processing.
撮影時の手振れを検出する手振れ検出部をさらに備え、
前記合成部は、前記手振れ検出部によって検出された手振れ量が所定値以下のときは、前記特定の画像データと前記合成用画像データの画像内の一部の領域を用いて前記合成用画像データの位置合わせを行って合成を行うカメラ。 In the camera according to any one of claims 1 to 9,
A camera shake detection unit that detects camera shake during shooting is further provided.
When the amount of camera shake detected by the camera shake detection unit is equal to or less than a predetermined value, the synthesizing unit uses the specific image data and a partial area in the image of the image data for synthesis to generate the image data for synthesis. line emergence Mera the synthesis carried out of alignment.
前記合成部は、位置合わせをした後に、全ての画像の大きさが揃うように、前記特定の画像データと前記合成用画像データとをクロップするカメラ。 The camera of claim 10, wherein
The combining unit, after alignment, so that the size of all the images aligned, crop to Luke Mera said the specific image data and the composite image data.
前記記録部は、前記特定の画像データと前記合成画像データとを関連付けて記録するカメラ。 The camera according to any one of claims 1 to 11,
The recording unit, Luke camera to record in association with the the specific image data and the composite image data.
前記選択部で選択された合成用画像データを前記特定の画像データに合成する合成部と、
前記合成部によって合成された合成画像データを記録する記録部と、を備え、
前記合成部は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定する画像処理装置。 A selection unit that selects specific image data from a plurality of image data and image data for synthesis to be combined with the specific image data ;
A synthesis unit that synthesizes the image data for synthesis selected by the selection unit with the specific image data;
A recording unit that records the synthesized image data synthesized by the synthesizing unit,
The synthesizing unit is an image processing apparatus that determines the number of synthesized image data to be synthesized with the specific image data based on a movement amount of a subject .
被写体を撮像し、複数の画像データを生成する撮像手順、
前記撮像手順で撮像された複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択手順、
前記選択手順で選択された合成用画像データを前記特定の画像データに合成する合成手順、
前記合成手順によって合成された合成画像データを記録する記録手順、
を実行させるためのプログラムであって、
前記合成手順は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定するプログラム。 On the computer,
An imaging procedure for imaging a subject and generating a plurality of image data;
A selection procedure for selecting specific image data and image data for synthesis to be combined with the specific image data from a plurality of image data captured in the imaging procedure;
A synthesis procedure for synthesizing the image data for synthesis selected in the selection procedure with the specific image data;
A recording procedure for recording synthesized image data synthesized by the synthesis procedure;
A program for executing
The synthesis procedure is a program for determining the number of synthesized image data to be synthesized with the specific image data based on a movement amount of a subject .
複数の画像データの中から特定の画像データと、前記特定の画像データに合成する合成用画像データとを選択する選択手順、
前記選択手順で選択された合成用画像データを前記特定の画像データに合成する合成手順、
前記合成手順によって合成された合成画像データを記録する記録手順、
を実行させるためのプログラムであって、
前記合成手順は、被写体の移動量に基づいて、前記特定の画像データに合成する前記合成用画像データの合成枚数を決定するプログラム。
On the computer,
A selection procedure for selecting specific image data from a plurality of image data and image data for synthesis to be combined with the specific image data ;
A synthesis procedure for synthesizing the image data for synthesis selected in the selection procedure with the specific image data;
A recording procedure for recording synthesized image data synthesized by the synthesis procedure;
A program for executing
The synthesis procedure is a program for determining the number of synthesized image data to be synthesized with the specific image data based on a movement amount of a subject .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012044326A JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012044326A JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016115325A Division JP6213619B2 (en) | 2016-06-09 | 2016-06-09 | Camera and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013183220A JP2013183220A (en) | 2013-09-12 |
JP5948960B2 true JP5948960B2 (en) | 2016-07-06 |
Family
ID=49273618
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012044326A Active JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5948960B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016192779A (en) * | 2016-06-09 | 2016-11-10 | 株式会社ニコン | Camera, image processing apparatus, and program |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4853320B2 (en) * | 2007-02-15 | 2012-01-11 | ソニー株式会社 | Image processing apparatus and image processing method |
JP2010045421A (en) * | 2008-08-08 | 2010-02-25 | Casio Comput Co Ltd | Imaging apparatus, image processing method, and program |
JP5495598B2 (en) * | 2009-03-30 | 2014-05-21 | キヤノン株式会社 | Imaging apparatus and control method thereof |
JP4818393B2 (en) * | 2009-05-07 | 2011-11-16 | キヤノン株式会社 | Image processing method and image processing apparatus |
JP5581728B2 (en) * | 2010-02-24 | 2014-09-03 | カシオ計算機株式会社 | Image processing apparatus and method, and program |
-
2012
- 2012-02-29 JP JP2012044326A patent/JP5948960B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016192779A (en) * | 2016-06-09 | 2016-11-10 | 株式会社ニコン | Camera, image processing apparatus, and program |
Also Published As
Publication number | Publication date |
---|---|
JP2013183220A (en) | 2013-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5234119B2 (en) | Imaging apparatus, imaging processing method, and program | |
JP5394296B2 (en) | Imaging apparatus and image processing method | |
JP2017220892A (en) | Image processing device and image processing method | |
JP5195660B2 (en) | Imaging apparatus, focusing method, and program | |
JP5186021B2 (en) | Imaging apparatus, image processing apparatus, and imaging method | |
JP2006033241A (en) | Image pickup device and image acquiring means | |
JP6304293B2 (en) | Image processing apparatus, image processing method, and program | |
JP5400486B2 (en) | Imaging apparatus and imaging method | |
US20140267836A1 (en) | Image capture apparatus that can display review image, image capture method, and storage medium | |
US9601158B2 (en) | Moving image selection apparatus for selecting moving image to be combined, moving image selection method, and storage medium | |
JP2006025311A (en) | Imaging apparatus and image acquisition method | |
JP2010136058A (en) | Electronic camera and image processing program | |
JP5948960B2 (en) | Camera, image processing apparatus and program | |
JP5397426B2 (en) | Imaging apparatus, focusing method, and program | |
JP6242428B2 (en) | Imaging apparatus and imaging method | |
JP6213619B2 (en) | Camera and program | |
JP2007281532A (en) | Apparatus and method for generating image data | |
JP5332668B2 (en) | Imaging apparatus and subject detection program | |
JP2018026838A (en) | Camera and image processing apparatus | |
JP5636660B2 (en) | Image processing apparatus, image processing method, and program | |
JP2019050591A (en) | Electronic equipment, program | |
JP2013162272A (en) | Imaging device | |
JP5613145B2 (en) | Imaging apparatus and program | |
JP2011125051A (en) | Image data generating apparatus and image data generating method | |
JP6013574B2 (en) | Imaging apparatus and imaging method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151105 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160523 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5948960 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |