JP6346529B2 - Imaging device, control method thereof, and program - Google Patents
Imaging device, control method thereof, and program Download PDFInfo
- Publication number
- JP6346529B2 JP6346529B2 JP2014181595A JP2014181595A JP6346529B2 JP 6346529 B2 JP6346529 B2 JP 6346529B2 JP 2014181595 A JP2014181595 A JP 2014181595A JP 2014181595 A JP2014181595 A JP 2014181595A JP 6346529 B2 JP6346529 B2 JP 6346529B2
- Authority
- JP
- Japan
- Prior art keywords
- special effect
- moving image
- effect
- imaging apparatus
- added
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Studio Circuits (AREA)
- Television Signal Processing For Recording (AREA)
Description
本発明は、撮像装置、その制御方法、及びプログラムに関する。 The present invention relates to an imaging apparatus, a control method thereof, and a program.
近年、撮影した動画をインターネット上で共有するという動画共有サイトが発展し、クリエイティブで面白い動画を撮影したいというユーザのニーズが高まっている。しかしながら、動画撮影に慣れていない一般的なユーザにとって、クリエイティブで面白い動画を撮影するということは容易ではない。また、そのようなユーザにとっては、動画に特殊効果を加えたり、動画を結合したりするなどの編集作業が煩雑であることも、面白い動画を生成する上での課題となっている。 In recent years, video sharing sites for sharing captured videos on the Internet have been developed, and the needs of users who want to capture creative and interesting videos are increasing. However, it is not easy for a general user who is not familiar with moving image shooting to shoot a creative and interesting moving image. For such users, complicated editing operations such as adding special effects to moving images and combining moving images are also problems in generating interesting moving images.
動画の結合を容易にする技術として、特許文献1が知られている。特許文献1のデジタルカメラによれば、モード設定ダイヤルによって連続記録モードが設定されると、撮影した動画が、動画が記録されている既存のファイルに追加記録される。
As a technique for facilitating the combination of moving images,
また、スマートフォンアプリを中心に、簡単な操作でユーザに特殊効果を付加した動画撮影を可能とさせる機能が提案されている。例えば、動画に特殊な色・階調変換フィルタ効果を付加する機能や、予め決められた短秒の動画を複数回撮影し、それらを自動的に結合する機能などが提案されている。 In addition, a function that enables a user to take a moving image with a special effect by a simple operation has been proposed with a focus on a smartphone application. For example, a function of adding a special color / gradation conversion filter effect to a moving image, a function of photographing a predetermined short-second moving image a plurality of times, and automatically combining them are proposed.
結合された複数の動画を連続再生する場合、各動画に付加された特殊効果が連続的にユーザに認識される。従って、動画間の特殊効果の関係も動画の面白さに影響すると考えられるが、従来の技術はこの点を考慮していない。 When continuously playing a plurality of combined videos, special effects added to the videos are continuously recognized by the user. Therefore, it is considered that the relationship of special effects between moving images also affects the interest of moving images, but the conventional technology does not consider this point.
本発明はこのような状況に鑑みてなされたものであり、複数の動画に付加する特殊効果を共通化するか否かを、特殊効果の種類に応じて制御する技術を提供することを目的とする。 The present invention has been made in view of such a situation, and an object thereof is to provide a technique for controlling whether or not to share a special effect added to a plurality of moving images according to the type of the special effect. To do.
上記課題を解決するために、本発明は、複数の動画を撮影する撮影手段と、前記複数の動画の各々に対して、特殊効果を付加する制御手段と、前記制御手段により特殊効果が付加された前記複数の動画から構成される結合動画を生成する生成手段と、を備え、前記特殊効果は、色及び階調のうちの少なくとも一方を変換するフィルタの適用制御に対応する色・階調変換フィルタ効果を含む第1の特殊効果と、動画の再生速度の制御に対応する可変フレームレート効果、及び、移動する被写体に対する残像の付加制御に対応する残像効果の少なくとも1つを含む第2の特殊効果と、を含み、前記制御手段は、前記撮影手段で撮影された動画を解析した結果に基づいて前記特殊効果を付加するものであって、前記結合動画を構成する前記複数の動画の全てに対して、同じ色・階調変換フィルタ効果を得るための前記第1の特殊効果を付加するとともに、前記結合動画を構成する前記複数の動画のそれぞれに対して、前記複数の動画のそれぞれに応じた可変フレームレート効果及び残像効果の少なくとも1つを得るための前記第2の特殊効果を付加することを特徴とする撮像装置を提供する。 In order to solve the above problems, the present invention includes a photographing unit for photographing a plurality of moving, with respect to each of the plurality of moving image, and a control means for adding special effects, adding special effects by the control means Generating a combined moving image composed of the plurality of moving images , wherein the special effect is a color / gradation corresponding to filter application control for converting at least one of color and gradation A second special effect including at least one of a first special effect including a conversion filter effect, a variable frame rate effect corresponding to control of a moving image reproduction speed, and an afterimage effect corresponding to additional control of an afterimage with respect to a moving subject. And the control means adds the special effect based on the result of analyzing the moving image shot by the shooting means, and the plurality of motions constituting the combined moving image. The first special effect for obtaining the same color / gradation conversion filter effect is added to all of the plurality of moving images, and each of the plurality of moving images constituting the combined moving image is to provide an imaging apparatus characterized that you added to the second special effect for obtaining at least one of the variable frame-rate effect and residual image effect corresponding to each.
なお、その他の本発明の特徴は、添付図面及び以下の発明を実施するための形態における記載によって更に明らかになるものである。 Other features of the present invention will become more apparent from the accompanying drawings and the following description of the preferred embodiments.
本発明によれば、複数の動画に付加する特殊効果を共通化するか否かを、特殊効果の種類に応じて制御することが可能となる。 According to the present invention, whether or not to share a special effect added to a plurality of moving images can be controlled according to the type of the special effect.
以下、添付図面を参照して、本発明の実施形態を説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定されるのであって、以下の個別の実施形態によって限定されるわけではない。また、実施形態の中で説明されている特徴の組み合わせすべてが、本発明に必須とは限らない。 Embodiments of the present invention will be described below with reference to the accompanying drawings. The technical scope of the present invention is determined by the claims, and is not limited by the following individual embodiments. In addition, not all combinations of features described in the embodiments are essential to the present invention.
[第1の実施形態]
図1は、第1の実施形態に係る撮像装置100の構成を示すブロック図である。図1において、101は複数のレンズ群と絞り機構を含む光学系であり、具体的には、測距用レンズ(FocusLens)、ズーム用レンズ(ZoomLens)、及び絞り機構を含む。
[First Embodiment]
FIG. 1 is a block diagram illustrating a configuration of the
102はCCDやCMOS等からなる撮像素子であり、アナログ信号をデジタル信号に変換するA/D変換器を含む。撮像素子102の表面は例えばベイヤー配列のようなRGBカラーフィルタにより覆われ、カラー撮影が可能な構成となっている。被写体像が撮像素子102上で結像されると、画像データ(画像信号)が生成され、メモリ103に記憶される。
103はメモリであり、撮像素子102によって生成された画像信号や、撮像装置100の処理全般に必要なデータなどを保持することができる。104は画像処理回路であり、メモリ103に保持された画像信号に対して所定の画素補間処理や色変換処理等を行う。画像処理回路104は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいて撮影条件を決定し、システム制御部105に撮影条件を通知する。また、画像処理回路104は、画像の解析、フィルタ処理、ノイズリダクション処理、合成処理などの各種機能を有し、後述するアルゴリズムに従って撮影シーンに最適な特殊効果を選択する特殊効果処理決定部を含む。
105は撮像装置100全体を制御するシステム制御部である。システム制御部105は、画像処理回路104が決定した撮影条件で撮影を行うために、シャッター速度、絞り機構、フォーカスレンズ、及びズームレンズの制御を統括する。そのために、システム制御部105は、露光量制御部106、フォーカスレンズ制御部107、及び焦点距離制御部108に対して指示を行う。
106は露光量制御部であり、光学系101の絞り機構、撮像素子102の露光時間、及び撮影感度を調整し、適切な露光量制御を行う。107はフォーカスレンズ制御部であり、光学系101のフォーカスレンズを制御する。108は光学系101のズーム用レンズを制御する焦点距離制御部であり、システム制御部105の指示に従って焦点距離を変更する。
An exposure
109は圧縮回路であり、動画像をH.264/AVCに代表される圧縮アルゴリズムに従って圧縮し、MPEGやMOVファイル等に変換する。変換後の動画像は、記録媒体110に記録される。
111は表示部であり、画像処理回路104によって生成された撮影画像を、撮像装置100のLCDや、外部モニタなどに表示する。112はユーザの入力を受け付ける操作部材であり、ボタンやタッチパネル等が具備されている。システム制御部105は、操作部材112により受け付けたユーザ操作に従って、撮像装置100の動作の決定や変更を行う。
次に、図2乃至図5を参照して、撮像装置100による動画撮影処理の概要について説明する。撮像装置100は、動画撮影を複数回行い、各撮影により得られた動画像データを結合して1つの動画像データを生成する。図2において、「チャプタ」は1回の撮影により得られる動画像データを示し、「結合動画ファイル」は複数のチャプタを結合して得られる1つの動画像データを示す。
Next, an overview of the moving image shooting process performed by the
撮像装置100は、撮影される各動画(各チャプタ)に対して、例えば以下に列挙するような様々な種類の特殊効果を付加する。
(1)色・階調変換フィルタ効果
(2)テンプレート合成効果
(3)可変フレームレート効果
(4)残像効果
The
(1) Color / tone conversion filter effect (2) Template composition effect (3) Variable frame rate effect (4) Afterimage effect
「(1)色・階調変換フィルタ効果」は、画像処理回路104によって動画の色味やコントラストを変更することにより、被写体や撮影シーンに合った雰囲気を動画に加える特殊効果である。換言すると、「(1)色・階調変換フィルタ効果」は、色及び階調のうちの少なくとも一方を変換するフィルタの適用制御に対応する。例えば、画像処理回路104は、撮影されたカラー動画から、コントラストの高いモノクロ動画を生成することができる。
“(1) Color / gradation conversion filter effect” is a special effect that adds an atmosphere suitable for a subject or a shooting scene to a moving image by changing the color and contrast of the moving image by the
「(2)テンプレート合成効果」は、画像処理回路104によって動画の各フレームに所定のテンプレートデータ(以下、単に「テンプレート」と呼ぶ)を合成する処理により得られる特殊効果である。換言すると、「(2)テンプレート合成効果」は、テンプレートの合成制御に対応する。例えば、画像処理回路104によっては、図3の左側に示すようにフレームに飾り枠を合成したり、図3の右側に示すように周辺減光効果を加えたりすることができる。
“(2) Template synthesis effect” is a special effect obtained by a process of synthesizing predetermined template data (hereinafter simply referred to as “template”) to each frame of a moving image by the
「(3)可変フレームレート効果」は、動画の全体又は一部をスローモーションにしたり、早送り再生にしたりすることによって、被写体の動きを強調する特殊効果である。換言すると、「(3)可変フレームレート効果」は、動画の再生速度の制御に対応する。この効果の実現方法としては、再生フレームレートFplayのN倍のフレームレートFrec(=N×Fplay)で動画を記録することにより、(1/N)倍のスロー再生にすることが可能である。反対に、Fplayと同じフレームレートFrec(=Fplay)で撮影した動画像のフレームを1/Nに間引いて再生することにより、N倍の早送り再生が可能である。このように、再生速度の制御は、撮影フレームレート及び記録フレームレートの制御により実現可能である。また、このような仕組みを用いて、例えば図4(B)に示すように、再生速度が「通常→スロー→通常」のように変化する動画を生成することができる。具体的には、再生フレームレートFplay=30[fps]の場合、撮像装置100は、Frec=90[fps]で数秒間撮影したデータの一部区間を1/3に間引いて記録する。これにより、間引きが行われない区間を1/3倍のスロー再生することができる。このように、動画の少なくとも一部がスロー再生される再生パターンを、「スロー再生パターン」と呼ぶ。また、図4(C)に示すように、再生速度が「通常→早送り→通常」のように変化する動画を生成することができる。具体的には、再生フレームレートFplay=30[fps]の場合、撮像装置100は、Frec=30[fps]で数秒間撮影したデータの一部区間を1/3に間引いて記録する。これにより、間引きが行われた区間を3倍の早送り再生することができる。このように、動画の少なくとも一部が早送り再生される再生パターンを、「早送り再生パターン」と呼ぶ。また、図4(A)に示すように、Fplay=Frecであり、間引きが行われない場合には、動画全体が通常再生される。このように、動画の全体が通常の速度で再生される再生パターンを、通常再生パターンと呼ぶ。
The “(3) variable frame rate effect” is a special effect that emphasizes the movement of the subject by making the whole or part of the moving image slow motion or fast-forward playback. In other words, “(3) variable frame rate effect” corresponds to control of the playback speed of a moving image. As a method for realizing this effect, by recording a moving image at a frame rate Frec (= N × Fplay) which is N times the playback frame rate Fplay, it is possible to achieve slow playback of (1 / N) times. On the other hand, N times fast-forward playback is possible by thinning out the frames of a moving image shot at the same frame rate Frec (= Fplay) as Fplay to 1 / N. As described above, the playback speed can be controlled by controlling the shooting frame rate and the recording frame rate. Further, using such a mechanism, for example, as shown in FIG. 4B, it is possible to generate a moving image whose playback speed changes as “normal → slow → normal”. Specifically, when the playback frame rate Fplay = 30 [fps], the
「(4)残像効果」は、巡回型フィルタを用いて、動く被写体に残像を付加する特殊効果である。換言すると、「(4)残像効果」は、移動する被写体に対する残像の付加制御に対応する。 “(4) Afterimage effect” is a special effect that adds an afterimage to a moving subject using a recursive filter. In other words, “(4) Afterimage effect” corresponds to afterimage addition control for a moving subject.
撮像装置100は、それぞれの種類の特殊効果について、撮影シーンに基づいて特殊効果の内容を決定する。例えば、撮像装置100は、「(2)テンプレート合成効果」という種類の特殊効果について、撮影シーンに基づいて、「飾り枠合成」、「周辺減光」、又は「合成なし」を選択する。決定アルゴリズムの詳細については、後述する。
The
ところで、特殊効果の中には、チャプタ間で特殊効果を統一(共通化)した方が結合動画全体の品位が向上する種類のものもあれば、チャプタ毎(動画毎)に撮影シーンに応じた特殊効果を付加した方が動画の面白さが向上すると期待される種類のものもある。本実施形態では、前者の種類の特殊効果を「特殊効果処理A群」と呼び、後者の種類の特殊効果を「特殊効果処理B群」と呼ぶ。図5に示すように、本実施形態では、「(1)色・階調変換フィルタ効果」及び「(2)テンプレート合成効果」が「特殊効果処理A群」であるものとし、「(3)可変フレームレート効果」及び「(4)残像効果」が「特殊効果処理B群」であるものとする。図5から理解できるように、「(2)テンプレート合成効果」のような特定の種類の特殊効果(特殊効果グループ)の中に、「飾り枠合成」や「周辺減光」のような複数の特殊効果が含まれる。 By the way, there are some special effects that can improve the overall quality of the combined video if the special effects are unified (shared) between chapters. Depending on the shooting scene for each chapter (for each video) There are also types that are expected to improve the fun of moving images with special effects. In the present embodiment, the special effect of the former type is referred to as “special effect processing A group”, and the special effect of the latter type is referred to as “special effect processing B group”. As shown in FIG. 5, in this embodiment, “(1) color / tone conversion filter effect” and “(2) template composition effect” are “special effect processing A group”, and “(3) Assume that “variable frame rate effect” and “(4) afterimage effect” are “special effect processing B group”. As can be understood from FIG. 5, a plurality of special effects such as “decorative frame composition” and “peripheral dimming” are included in a specific type of special effect (special effect group) such as “(2) template composition effect”. Includes special effects.
なお、「特殊効果処理A群」と「特殊効果処理B群」の分類は、図5に示すものに限定されない。また、特殊効果の種類や、各種類の特殊効果について選択可能な特殊効果についても、図5に示すものに限定されない。本実施形態では、「特殊効果処理A群」に分類される少なくとも1種類の特殊効果(第1の特殊効果グループ)と、「特殊効果処理B群」に分類される少なくとも1種類の特殊効果(第2の特殊効果グループ)とがあればよい。 The classification of “special effect processing A group” and “special effect processing B group” is not limited to that shown in FIG. Also, the types of special effects and the special effects that can be selected for each type of special effect are not limited to those shown in FIG. In the present embodiment, at least one type of special effect (first special effect group) classified into “special effect processing A group” and at least one type of special effect (first special effect processing B group) ( A second special effect group).
次に、図6を参照して、撮像装置100による動画撮影処理の詳細について説明する。なお、本実施形態の各図のフローチャートの各ステップの処理は、特に断らない限り、システム制御部105が制御プログラムに従って撮像装置100の各構成要素を制御することにより実施される。
Next, with reference to FIG. 6, the details of the moving image shooting process by the
S601で、撮像装置100は、撮影シーンの解析を行う。具体的には、撮像装置100は、撮影対象シーンの明るさ、被写体が人物かどうか、被写体が動いているかどうか、等を解析する。この解析は、加速度センサ(不図示)やジャイロセンサ(不図示)等の各種センサからの情報や、撮像素子102により生成された画像データなどに基づいて行われる。画像データに基づく解析は、画像処理回路104を用いて行うことができる。
In step S601, the
S602で、撮像装置100は、ユーザによる撮影指示が行われたか否かを判定する。撮影指示が行われるまでは、撮像装置100は、S601におけるシーン解析を繰り返す。撮影指示が行われると、処理はS603に進む。
In step S602, the
S603で、撮像装置100は、S601におけるシーン解析結果に基づき、特殊効果処理A群(図5参照)に関して、撮影した動画に付加する特殊効果を決定する。この決定処理の詳細については後述する。
In S603, the
S604で、撮像装置100は、S601におけるシーン解析結果に基づき、特殊効果処理B群(図5参照)に関して、撮影した動画に付加する特殊効果を決定する。この決定処理の詳細については後述する。
In step S604, the
S603及びS604の処理により、これから撮影するチャプタに付加する特殊効果が、このチャプタの撮影開始直前に決定される。 By the processing of S603 and S604, a special effect to be added to the chapter to be photographed is determined immediately before the chapter photographing is started.
S605で、撮像装置100は、動画の撮像制御を行い、動画の1フレームを取得する。ここでは、撮像装置100は、S604で決定された可変フレームレート効果の内容に従い、撮像系の駆動周波数・露光量制御を行う。例えば、動画にスロー再生効果を付加する場合、撮像装置100は、再生フレームレートよりも高い周波数で撮像を行うように撮像素子102を制御する。また、動画に早送り再生効果を付加する場合、撮像装置100は、再生フレームレートと同じ周波数で撮像を行うように撮像素子102を制御する。また、撮像装置100は、絞り、シャッタースピード、感度からなる露光量を、露光量制御部106を介して正しく設定する。
In step S605, the
S606で、撮像装置100は、S603において決定した特殊効果処理A群の特殊効果を、S605において取得したフレームに付加する。S607で、撮像装置100は、S604において決定した特殊効果処理B群の特殊効果を、S605において取得したフレームに付加する。例えば、撮像装置100は、S604において決定された可変フレームレート効果に対応する再生速度で再生される動画が記録されるように、撮影フレームレート及び記録フレームレート(間引き)を制御することにより、動画に可変フレームレートを付加する。
In step S606, the
なお、特殊効果を付加する順序は、図6に示すものに限定されない。例えば、特殊効果処理B群の特殊効果を先に付加し、その後、特殊効果処理A群の特殊効果を付加してもよい。或いは、特殊効果処理A群の特殊効果の一部を先に付加し、その後、特殊効果処理B群の特殊効果を付加し、最後に、特殊効果処理A群の特殊効果の残りを付加してもよい。 Note that the order of adding special effects is not limited to that shown in FIG. For example, the special effect of the special effect process B group may be added first, and then the special effect of the special effect process A group may be added. Or, add a part of special effects of special effect processing A group first, then add special effects of special effect processing group B, and finally add the rest of special effects of special effect processing group A Also good.
S608で、撮像装置100は、特殊効果が付加されたフレームを圧縮し、結合動画ファイル(図2参照)のフレームとして記録する。なお、撮像装置100は、任意のタイミングでチャプタの結合を行うことができる。例えば、撮像装置100は、チャプタ毎に別個の動画ファイルを生成し、所定数の動画ファイルが生成された後に、これらの動画ファイルを結合して結合動画ファイルを生成することができる。或いは、撮像装置100は、新たなチャプタのフレームを直前のチャプタに追記することにより、結合動画ファイルを生成してもよい。また、図4(B)及び図4(C)に示すように間引き記録を行う場合は、撮像装置100は、現在のフレームが間引き対象のフレームであれば、このフレームは記録せずに破棄する。
In S608, the
S609で、撮像装置100は、ユーザによる撮影終了指示が行われたか否かを判定する。撮影終了指示が行われるまでは、撮像装置100はS605からS608の処理を繰り返すことにより、現在のチャプタの撮影を継続する。あるいは、撮像装置100は、動画の撮影が開始されていから所定時間経過するまでS605からS608の処理を繰り返し、所定時間経過した場合に動画撮影を終了すると判断する。
In step S609, the
撮影終了指示が行われると、処理はS609からS601に戻り、次の撮影指示が行われるまで、撮像装置100はシーン解析を行う。次の撮影指示が行われると、撮像装置100は、再びS603以降の処理を実行することにより、次のチャプタの撮影を行う。但し、S603における特殊効果処理A群の決定処理については、2番目以降のチャプタの撮影を行う場合は、最初(先頭)のチャプタと同じ特殊効果が決定される。
When a shooting end instruction is performed, the process returns from S609 to S601, and the
また、図示しないが、撮像装置100は、所定数のチャプタを撮影した後は、別の結合動画ファイルの1番目のチャプタを撮影してもよい。例えば、撮像装置100は、4つのチャプタからなる結合動画ファイルを生成するように構成されているものとする。この場合、撮像装置100による4番目のチャプタの撮影を終了して処理がS609からS601に戻り、撮影指示が行われると、S603で、撮像装置100は、次の結合動画ファイルの1番目のチャプタのために、特殊効果処理A群の特殊効果を決定する。
Although not shown, the
次に、図7乃至図9を参照して、図6のS603における特殊効果処理A群の決定処理の詳細について説明する。まず、図7のS701で、撮像装置100は、現在の撮影対象のチャプタが結合動画ファイルにおける最初(先頭)のチャプタであるか否かを判定する。最初のチャプタの場合、S702で、撮像装置100は、特殊効果処理A群の選択アルゴリズムを実行する。最初のチャプタでない場合、S703で、撮像装置100は、以前にS702において最初のチャプタについて選択したものと同じ特殊効果を選択する。
Next, the details of the special effect process A group determination process in S603 of FIG. 6 will be described with reference to FIGS. First, in S701 of FIG. 7, the
図7の処理により、特殊効果処理A群については、結合動画ファイル内の各チャプタに付加される特殊効果を統一し、より高品位で一体感のある動画を生成することができる。但し、図示しないが、撮像装置100は、2番目以降のチャプタであっても、ユーザによるフィルタ効果の変更指示を受信した場合には、ユーザの意思(ユーザ指示)を優先してフィルタを選択することができる。即ち、この場合、撮像装置100は、ユーザ指示に対応するチャプタに対して、最初のチャプタについてS702で選択された特殊効果の代わりに、ユーザ指示により選択された特殊効果を付加する。
With the processing in FIG. 7, for special effect processing A group, it is possible to unify the special effects added to each chapter in the combined moving image file and to generate a moving image with higher quality and a sense of unity. However, although not shown, the
図8は、図7のS702における特殊効果処理A群の選択アルゴリズムの詳細を示すフローチャートである。ここでは、特殊効果処理A群に属する種類の特殊効果の一例である「(1)色・階調変換フィルタ効果」について説明するが、他の種類の特殊効果(例えば、「(2)テンプレート合成効果」)についても同様のアルゴリズムを利用可能である。 FIG. 8 is a flowchart showing details of the special effect processing A group selection algorithm in S702 of FIG. Here, “(1) color / gradation conversion filter effect” which is an example of a special effect belonging to the special effect processing group A will be described. However, other types of special effects (for example, “(2) template composition” A similar algorithm can be used for “effect”).
本実施形態においては、撮像装置100は、M種類の色・階調変換フィルタを選択可能なものとする。まず、S801で、撮像装置100は、以下の式(1)に従い、M個のフィルタの評価値x[m]を一律に初期値Pに設定する。
x[m]=P(m=0,1,2,…,M−1)・・・(1)
In the present embodiment, the
x [m] = P (m = 0, 1, 2,..., M−1) (1)
S802で、撮像装置100は、図6のS601におけるシーン解析結果(例えば、被写体情報や撮影画像の色分布情報等)に従い、評価値を更新する。例えば、撮像装置100は、被写体が人物を含む場合に、「人物と相性の良いフィルタの評価値を上げ、人物と相性の悪いフィルタの評価値を下げる」、等の評価値演算処理を、撮影シーンの解析結果に応じて複数回実行する。これにより、図9に示すように、最終的な評価値x[m]は撮影シーンに応じたばらつきを持つ。
In S802, the
その後、S803で、撮像装置100は、最も評価値の高いフィルタを選択する。或いは、撮像装置100は、予め定められた閾値よりも評価値の高いフィルタの中からランダムに1つのフィルタを選択する等の方法により、撮影シーンに相性の良いフィルタ効果を選択することが可能である。
Thereafter, in S803, the
次に、図10乃至図17を参照して、図6のS604における特殊効果処理B群の決定処理の詳細について説明する。ここでは、特殊効果処理B群に属する種類の特殊効果の一例である「(3)可変フレームレート効果」について説明するが、他の種類の特殊効果(例えば、「(4)残像効果」)についても同様のアルゴリズムを利用可能である。 Next, details of the special effect process B group determination process in S604 of FIG. 6 will be described with reference to FIGS. Here, “(3) variable frame rate effect” which is an example of a special effect belonging to the special effect processing group B will be described, but other types of special effects (for example, “(4) afterimage effect”) will be described. A similar algorithm can be used.
まず、S1001で、撮像装置100は、図6のS601におけるシーン解析結果に基づき、撮像装置100の動き情報を取得する。ユーザが移動被写体を追尾撮影している状態は、花や風景などの被写体を撮影している状態と比べて、撮像装置100自体の動き量が大きいと予測される。そのため、撮像装置100は、撮像装置100に具備された速度センサや加速度センサ等の出力に基づき、撮像装置100の動きの有無を検出する。撮像装置100の動きの有無を決定する方法としては、速度センサ等の出力値を所定時間平均し、その平均値が予め決められた閾値Th_Gを上回る場合は「動き有り」、閾値以下の場合は「動き無し」とする方法が考えられる。
First, in S1001, the
S1002で、撮像装置100は、図6のS601におけるシーン解析結果に基づき、被写体種別(被写体に含まれる主要被写体の種類)を検出する。一般的に、パターンマッチングなどの方法によって画面内の顔を検出することが可能であり、顔が見つかった場合は被写体種別を「人物」と定義する。また、画面内の輝度や色の領域分布やエッジ情報から画面内に主要な被写体が存在するかどうかを判定する主要被写体検出アルゴリズムが一般的に知られている。そこで、顔が検出されず、かつ主要被写体検出アルゴリズムによって被写体が検出された場合には、被写体種別を「人物以外の主要被写体有」と定義する。上記いずれの方法によっても被写体が検出されない場合は「主要被写体無」と定義する。
In S1002, the
S1003で、撮像装置100は、S1002において検出した被写体種別に応じて、被写体の動き情報を取得する。被写体の動きを検出する方法としては、被写体種別が「人物」の場合、例えば図11(A)に示すように、ある時刻F(t)のフレームとF(t+α)のフレームの間の顔位置の変化量が閾値Th_Fを上回る場合に「被写体動き有」と検出する方法がある。また、被写体種別が「人物以外の主要被写体有」の場合、図11(B)に示すように、時刻F(t)のフレームとF(t+α)のフレームの間の主要被写体領域の重心位置の変化量が閾値Th_Mを上回る場合に「被写体動き有」と検出する方法がある。また、被写体種別が「主要被写体無」の場合は、図11(C)に示すように、画面内の所定領域に対して、下記の式(2)に従ってフレーム間の輝度差分値の総和Sを計算し、総和Sが閾値Th_Sadを上回った場合に「被写体動き有」と検出する方法がある。
S=Σ(Y1(x,y)−Y0(x,y))・・・(2)
Y1:フレーム1の輝度
Y0:フレーム0の輝度
In step S1003, the
S = Σ (Y1 (x, y) −Y0 (x, y)) (2)
Y1: Brightness of
次に、S1004で、撮像装置100は、S1001及びS1003にて取得した動き情報に基づき、動き検出エリアを判定する。動き検出エリアは、撮像装置100の動き有・無、及び被写体の動き有・無に応じて、図12に示す4つのエリアに区分することができる。
Next, in S1004, the
S1005で、撮像装置100は、S1004におけるエリア判定結果とS1002で検出した被写体種別に応じて、可変フレームレート効果の重みパターンを決定する。ここで、重みパターンとは、図4を参照して説明した通常/スロー/早送りの効果の発生比率を表すものである。重みパターンは、図13に示すように、エリアと被写体種別に応じて、図14に示す4つのパターンのいずれかが選択される。各パターンには、「通常」が選択される確率(第1の確率)、「スロー」が選択される確率(第2の確率)、及び「早送り」が選択される確率(第3の確率)が定義されている。そして、例えば「通常優先」のパターンについては、「通常」が優先的に選択されるように、「通常」が選択される確率(第1の確率)が最も高く設定されている。また、「通常固定」のパターンについては、「通常」が固定的に選択されるように、「通常」が選択される確率(第1の確率)が「100%」に設定されている。
In step S1005, the
なお、図13の例では、撮像装置100は、撮像装置100の動き、被写体の動き、及び主要被写体の全てに基づいて重みパターンを決定しているが、撮像装置100は、これらのうちの一部にのみ基づいて重みパターンを決定してもよい。例えば、撮像装置100は、被写体の動きの有無に応じては、「スロー優先」(被写体の動き有の場合)又は「通常優先」(被写体の動き無の場合)を選択するように構成されてもよい。
In the example of FIG. 13, the
S1006で、撮像装置100は、現在の撮影対象のチャプタ番号や過去に選択した可変フレームレート効果の種類、及び撮像装置100の焦点距離などに基づき、S1005において決定された重みパターンを修正する。以下に、S1005において「スロー優先」が選択された場合における、重み修正方法の例を4つ挙げる。
In step S1006, the
(i)現在の撮影対象のチャプタがチャプタ1である場合、「通常」の比率を少し上げてそれ以外の比率を下げる。
(修正前)通常:スロー:早送り=20:60:20
(修正後)通常:スロー:早送り=30:40:30
→結合動画ファイルの先頭のチャプタにはなるべく特殊効果を付加しない。
(I) If the chapter to be photographed is
(Before correction) Normal: Slow: Fast forward = 20:60:20
(After correction) Normal: Slow: Fast forward = 30:40:30
→ Do not add special effects as much as possible to the first chapter of the combined video file.
(ii)現在の撮影対象のチャプタが最終チャプタNである場合、「スロー」と「早送り」の比率を少し上げてそれ以外の比率を下げる。
(修正前)通常:スロー:早送り=20:60:20
(修正後)通常:スロー:早送り=10:65:25
→結合動画ファイルの最後(末尾)のチャプタにはなるべく特殊効果を付加する。
(Ii) If the current chapter to be photographed is the final chapter N, the ratio of “slow” and “fast forward” is slightly increased and the other ratios are decreased.
(Before correction) Normal: Slow: Fast forward = 20:60:20
(After correction) Normal: Slow: Fast forward = 10:65:25
→ Add special effects as much as possible to the last (end) chapter of the combined video file.
(iii)現在の撮影対象のチャプタがチャプタ1以外であり、かつチャプタ1で選択された効果が「スロー」だった場合に、「スロー」の比率を上げてそれ以外の比率を下げる。
(修正前)通常:スロー:早送り=20:60:20
(修正後)通常:スロー:早送り=10:80:10
→結合動画ファイル内で同じような特殊効果が選択される確率を上げる。
(Iii) If the chapter to be photographed is other than
(Before correction) Normal: Slow: Fast forward = 20:60:20
(After correction) Normal: Slow: Fast forward = 10:80:10
→ Increase the probability that similar special effects will be selected in the combined video file.
(iv)撮像装置100の焦点距離が予め設定された焦点距離f_Th以上(閾値以上)である場合、手振れが動画像に与える影響が大きくなるため、「早送り」の比率を下げてそれ以外の比率を上げる。
(修正前)通常:スロー:早送り=20:60:20
(修正後)通常:スロー:早送り=30:70:0
以上に示した重みパターンの修正は、複数のチャプタを連結した結合動画ファイル全体として動画を鑑賞した場合に視聴者の満足度を高めることを目的とした工夫である。なお、重みパターンの修正方法は、ここで説明した4種類に限定されず、設計者の思想に従って様々な重みパターンの修正方法が考えられる。より一般的に言えば、撮像装置100は、可変フレームレート効果について、所定のチャプタに付加する特殊効果を、このチャプタの撮影パラメータ、結合動画ファイルにおけるこのチャプタの位置、及び先頭チャプタに付加される特殊効果を考慮して決定する。なお、撮像装置100は、これらの要素の全てを考慮する必要はなく、そのうちの一部のみを考慮してもよい。
(Iv) When the focal length of the
(Before correction) Normal: Slow: Fast forward = 20:60:20
(After correction) Normal: Slow: Fast forward = 30: 70: 0
The correction of the weight pattern described above is a device aimed at increasing the satisfaction of the viewer when the moving image is viewed as the whole combined moving image file in which a plurality of chapters are connected. The weight pattern correction methods are not limited to the four types described here, and various weight pattern correction methods may be considered according to the designer's idea. More generally speaking, the
最後に、S1007で、撮像装置100は、最終的な可変フレームレート効果の内容を決定する。具体的には、図15のS1501で、撮像装置100は、[1,100]の正規乱数Rを発生させ、R<Tdであるか否かを判定する。Tdは、「通常」の発生確率である。R<Tdの場合、S1502で、撮像装置100は、可変フレームレート効果として「通常」を選択する。R≧Tdの場合、S1503で、撮像装置100は、R<Td+Tsであるか否かを判定する。Tsは、「スロー」の発生確率である。R<Td+Tsの場合、S1504で、撮像装置100は、可変フレームレート効果として「スロー」を選択する。R≧Td+Tsの場合、S1505で、撮像装置100は、可変フレームレート効果として「早送り」を選択する。
Finally, in S1007, the
なお、図6及び図10の記載に従えば、可変フレームレート効果の内容は、撮影開始直前に決定される。しかしながら、撮像装置100は、他のタイミングで可変フレームレート効果の内容を決定してもよい。例えば、図16に示すように、撮像装置100は、撮影中に一定間隔で動き情報を解析し、被写体の動きがあることを検出した場合に、その後一定期間撮像レートを上げることにより、動画に可変フレームレート効果「スロー」を付加することができる。或いは、図17に示すように、撮像装置100は、最も高いフレームレートで動画を撮影しておき、撮影後に動画中の被写体動きを解析した上で、動画に所定の内容の可変フレームレート効果を付加することができる。
6 and 10, the content of the variable frame rate effect is determined immediately before the start of shooting. However, the
以上説明した処理により、撮影シーンに応じた各種の特殊効果が付加された結合動画ファイルが生成される。こうして生成される結合動画ファイルの一例を図18に示す。図18の結合動画ファイルは、4つのチャプタを含み、各チャプタに4種類の特殊効果が付加されている。特殊効果処理A群に属する種類の特殊効果である「(1)色・階調変換フィルタ効果」及び「(2)テンプレート合成効果」については、各チャプタに共通の特殊効果が付加されている。また、特殊効果処理B群に属する種類の特殊効果である「(3)可変フレームレート効果」及び「(4)残像効果」については、チャプタ毎に、撮影シーンに応じた特殊効果が付加されている。チャプタ1の残像効果が「なし」であることから理解できるように、特殊効果処理B群については、必ずしも全てのチャプタに特殊効果が付加されるとは限らない。換言すると、撮像装置100は、特殊効果処理B群については、結合動画ファイルを構成する複数のチャプタのうちの1以上のチャプタの各々に対して、チャプタ毎に決定される特殊効果を付加する。これにより、結合動画ファイル全体としての統一感を維持しながらも、撮影シーンに適応的な「面白い」動画を生成することが可能である。
Through the processing described above, a combined moving image file to which various special effects according to the shooting scene are added is generated. An example of the combined moving image file generated in this way is shown in FIG. The combined moving image file of FIG. 18 includes four chapters, and four types of special effects are added to each chapter. For “(1) color / gradation conversion filter effect” and “(2) template synthesis effect” which are special effects of the type belonging to the special effect processing group A, a special effect common to each chapter is added. In addition, with regard to “(3) variable frame rate effect” and “(4) afterimage effect” which are special effects of the type belonging to the special effect processing group B, special effects corresponding to the shooting scene are added for each chapter. Yes. As can be understood from the fact that the afterimage effect of
以上説明したように、第1の実施形態によれば、撮像装置100は、特殊効果処理A群については、各チャプタに共通の特殊効果を付加し、特殊効果処理B群については、チャプタ毎に決定される特殊効果を付加する。このように、撮像装置100は、複数の動画に付加する特殊効果を共通化するか否かを、特殊効果の種類に応じて制御するように構成されている。また、撮像装置100は、被写体の動きや主要被写体の種類などの従来は考慮されていなかった条件に基づいて、動画に可変フレームレート効果を付加する(即ち、記録される動画の再生速度を制御する)ように構成されている。
As described above, according to the first embodiment, the
[その他の実施形態]
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムを読み出して実行する処理である。
[Other Embodiments]
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed.
100…撮像装置、101…光学系、102…撮像素子、103…メモリ、104…画像処理回路、105…システム制御部、106…露光量制御部、107…フォーカスレンズ制御部、108…焦点距離制御部、109…圧縮回路、110…記録媒体、111…表示部、112…操作部材
DESCRIPTION OF
Claims (7)
前記複数の動画の各々に対して、特殊効果を付加する制御手段と、
前記制御手段により特殊効果が付加された前記複数の動画から構成される結合動画を生成する生成手段と、
を備え、
前記特殊効果は、色及び階調のうちの少なくとも一方を変換するフィルタの適用制御に対応する色・階調変換フィルタ効果を含む第1の特殊効果と、動画の再生速度の制御に対応する可変フレームレート効果、及び、移動する被写体に対する残像の付加制御に対応する残像効果の少なくとも1つを含む第2の特殊効果と、を含み、
前記制御手段は、前記撮影手段で撮影された動画を解析した結果に基づいて前記特殊効果を付加するものであって、前記結合動画を構成する前記複数の動画の全てに対して、同じ色・階調変換フィルタ効果を得るための前記第1の特殊効果を付加するとともに、前記結合動画を構成する前記複数の動画のそれぞれに対して、前記複数の動画のそれぞれに応じた可変フレームレート効果及び残像効果の少なくとも1つを得るための前記第2の特殊効果を付加することを特徴とする撮像装置。 Photographing means for photographing a plurality of videos;
For each of the plurality of moving image, and a control means for adding special effect,
Generating means for generating a combined moving image composed of the plurality of moving images to which a special effect is added by the control means;
Equipped with a,
The special effect includes a first special effect including a color / gradation conversion filter effect corresponding to application control of a filter for converting at least one of color and gradation, and a variable corresponding to control of a moving image reproduction speed. A second special effect including at least one of a frame rate effect and an afterimage effect corresponding to an afterimage addition control for a moving subject,
The control means adds the special effect based on the result of analyzing the moving image shot by the shooting means, and the same color / The first special effect for obtaining the gradation conversion filter effect is added, and for each of the plurality of moving images constituting the combined moving image, a variable frame rate effect corresponding to each of the plurality of moving images, and imaging apparatus characterized that you added to the second special effect for obtaining at least one of the afterimage effect.
ことを特徴とする請求項1に記載の撮像装置。 The imaging apparatus according to claim 1, wherein the control unit determines the first special effect based on a result of analyzing a first moving image in the combined moving image.
前記ユーザ指示が受信された場合、前記制御手段は、前記所定の動画に対して、前記撮影手段で撮影された動画を解析した結果に基づく前記第1の特殊効果の代わりに前記ユーザ指示により選択された特殊効果を付加する
ことを特徴とする請求項1又は2に記載の撮像装置。 Further comprising a receiving means for receiving a user instruction to select a special effect including color and gradation conversion filter effect of adding a predetermined video of the plurality of video,
When the user instruction is received, the control means selects the predetermined moving image according to the user instruction instead of the first special effect based on the result of analyzing the moving image shot by the shooting means. the imaging apparatus according to claim 1 or 2, characterized in that the addition of special effects that have been.
ことを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。 Said control means said second special effect of adding a predetermined video of the plurality of video, according to claim 1, wherein the determining based on a result of analysis of the the predetermined video The imaging device according to any one of the above.
ことを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。 The control means adds the second special effect to be added to a predetermined moving image among the plurality of moving images, the shooting parameter of the predetermined moving image, the position of the predetermined moving image in the combined moving image, and the combined moving image. the head of the imaging apparatus according to any one of claims 1 to 4, wherein the determining based on at least one of said second special effect to be added to the moving image.
複数の動画を撮影する撮影工程と、
前記複数の動画の各々に対して、特殊効果を付加する制御工程と、
前記制御工程により特殊効果が付加された前記複数の動画から構成される結合動画を生成する生成工程と、
を備え、
前記特殊効果は、色及び階調のうちの少なくとも一方を変換するフィルタの適用制御に対応する色・階調変換フィルタ効果を含む第1の特殊効果と、動画の再生速度の制御に対応する可変フレームレート効果、及び、移動する被写体に対する残像の付加制御に対応する残像効果の少なくとも1つを含む第2の特殊効果を含み、
前記制御工程において、前記撮影工程で撮影された動画を解析した結果に基づいて前記特殊効果を付加するものであって、前記結合動画を構成する前記複数の動画の全てに対して、同じ色・階調変換フィルタ効果を得るための前記第1の特殊効果を付加するとともに、前記結合動画を構成する前記複数の動画のそれぞれに対して、前記複数の動画のそれぞれに応じた可変フレームレート効果及び残像効果の少なくとも1つを得るための前記第2の特殊効果を付加することを特徴とする制御方法。 A method for controlling an imaging apparatus,
An imaging step of taking multiple videos,
For each of the previous SL multiple videos, and a control step of adding a special effect,
A generation step of generating combined moving composed before Symbol control step said plurality of video special effect is added by,
Equipped with a,
The special effect includes a first special effect including a color / gradation conversion filter effect corresponding to application control of a filter for converting at least one of color and gradation, and a variable corresponding to control of a moving image reproduction speed. A second special effect including at least one of a frame rate effect and an afterimage effect corresponding to an afterimage addition control for a moving subject;
In the control step, the special effect is added based on the result of analyzing the moving image shot in the shooting step, and all the plurality of moving images constituting the combined moving image have the same color The first special effect for obtaining the gradation conversion filter effect is added, and for each of the plurality of moving images constituting the combined moving image, a variable frame rate effect corresponding to each of the plurality of moving images, and control wherein that you added to the second special effect for obtaining at least one of the afterimage effect.
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014181595A JP6346529B2 (en) | 2014-09-05 | 2014-09-05 | Imaging device, control method thereof, and program |
EP15181738.4A EP2993895A1 (en) | 2014-09-05 | 2015-08-20 | Image capturing apparatus and control method therefor |
US14/839,787 US9723201B2 (en) | 2014-09-05 | 2015-08-28 | Image capturing apparatus and control method therefor |
KR1020150123405A KR101871675B1 (en) | 2014-09-05 | 2015-09-01 | Image capturing apparatus and control method therefor |
CN201510551146.XA CN105407266B (en) | 2014-09-05 | 2015-09-01 | Photographic device and its control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014181595A JP6346529B2 (en) | 2014-09-05 | 2014-09-05 | Imaging device, control method thereof, and program |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016058792A JP2016058792A (en) | 2016-04-21 |
JP2016058792A5 JP2016058792A5 (en) | 2017-10-05 |
JP6346529B2 true JP6346529B2 (en) | 2018-06-20 |
Family
ID=55756636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014181595A Active JP6346529B2 (en) | 2014-09-05 | 2014-09-05 | Imaging device, control method thereof, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6346529B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109275028B (en) | 2018-09-30 | 2021-02-26 | 北京微播视界科技有限公司 | Video acquisition method, device, terminal and medium |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006067065A (en) * | 2004-08-25 | 2006-03-09 | Canon Inc | Imaging apparatus |
US7752548B2 (en) * | 2004-10-29 | 2010-07-06 | Microsoft Corporation | Features such as titles, transitions, and/or effects which vary according to positions |
JP5646960B2 (en) * | 2010-11-11 | 2014-12-24 | オリンパスイメージング株式会社 | Imaging apparatus, imaging method, and imaging program |
JP5750692B2 (en) * | 2011-02-03 | 2015-07-22 | オリンパス株式会社 | Imaging apparatus, imaging program, and imaging method |
JP2014057169A (en) * | 2012-09-11 | 2014-03-27 | Olympus Imaging Corp | Image generating apparatus, imaging apparatus including the same, image generating method and image generation program |
-
2014
- 2014-09-05 JP JP2014181595A patent/JP6346529B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016058792A (en) | 2016-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101871675B1 (en) | Image capturing apparatus and control method therefor | |
US8638374B2 (en) | Image pickup apparatus, image pickup system, and image pickup method | |
JP5234119B2 (en) | Imaging apparatus, imaging processing method, and program | |
JP4637045B2 (en) | Imaging device | |
JP2008139683A (en) | Imaging apparatus and autofocus control method | |
KR102172114B1 (en) | Moving image selection apparatus for selecting moving image to be combined, moving image selection method, and storage medium | |
JP6304293B2 (en) | Image processing apparatus, image processing method, and program | |
JP2018207497A (en) | Image processing apparatus and image processing method, imaging apparatus, program, and storage medium | |
JP2009194770A (en) | Imaging device, moving image reproducing apparatus, and program thereof | |
JP2008005540A (en) | Image processing apparatus and method | |
US10348957B2 (en) | Image capturing apparatus, method of controlling the same, and storage medium for shooting a still image without interrupting shooting of moving images | |
JP6346529B2 (en) | Imaging device, control method thereof, and program | |
JP6378589B2 (en) | Imaging device, control method thereof, and program | |
JP6152009B2 (en) | Imaging apparatus, imaging method, program, and recording medium | |
JP2016187093A (en) | Image processing apparatus, image processing method and program | |
JP6075829B2 (en) | IMAGING DEVICE, CAMERA SYSTEM, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
JP2004274344A (en) | Image processing apparatus and method | |
JP5406619B2 (en) | MOVING IMAGE REPRODUCTION DEVICE, IMAGING DEVICE, CONTROL METHOD THEREOF, AND PROGRAM | |
JP6632385B2 (en) | Image processing device, imaging device, image processing method, and program | |
JP6555978B2 (en) | Image processing apparatus, control method thereof, and program | |
JP6679333B2 (en) | Image processing apparatus, image processing method, and program | |
JP2008042326A (en) | Imaging apparatus and simultaneous display control method | |
JP6742862B2 (en) | Imaging device, image processing device, control method of imaging device, and program | |
JP2020141189A (en) | Imaging apparatus and control method of the same | |
JP2019080104A (en) | Image processing device, image processing method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170824 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170824 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180409 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180427 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180525 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6346529 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |