JP2016197919A - Control device, control method and control program - Google Patents
Control device, control method and control program Download PDFInfo
- Publication number
- JP2016197919A JP2016197919A JP2016158165A JP2016158165A JP2016197919A JP 2016197919 A JP2016197919 A JP 2016197919A JP 2016158165 A JP2016158165 A JP 2016158165A JP 2016158165 A JP2016158165 A JP 2016158165A JP 2016197919 A JP2016197919 A JP 2016197919A
- Authority
- JP
- Japan
- Prior art keywords
- image
- range
- cameras
- preview
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Details Of Cameras Including Film Mechanisms (AREA)
- Studio Devices (AREA)
Abstract
Description
この発明は制御装置、制御方法、および制御プログラムに関し、特に、複数の撮影画像を用いて画像合成を行なう制御装置、制御方法、および制御プログラムに関する。 The present invention relates to a control device, a control method, and a control program, and more particularly to a control device, a control method, and a control program for performing image composition using a plurality of captured images.
複数の撮影画像を取り扱う方法として、たとえば特開2003−209793号公報(以下、特許文献1)は、基準画像情報を記録し、次の撮影時に記録していた基準画像を再生してその画像上の所望のポイントを指示し、撮影画像情報と基準画像情報とを関連付けて2次元管理が可能なデジタルカメラを提案している。このデジタルカメラでは、撮影画像をメモリに格納し、その画像が選択されると、再度、その撮影画像を表示部に表示をした上で撮影を行なう。 As a method of handling a plurality of photographed images, for example, Japanese Patent Application Laid-Open No. 2003-209793 (hereinafter referred to as Patent Document 1) records reference image information, reproduces the reference image recorded at the next photographing, A digital camera capable of two-dimensional management by associating desired image points and associating captured image information with reference image information is proposed. In this digital camera, a photographed image is stored in a memory, and when that image is selected, the photographed image is displayed again on the display unit and photographed.
また、フォトショップ(登録商標)などの画像編集ツールでは、撮影画像を編集先の画像とし、その画像に編集元の画像を重ね合わせるなどの編集が行なわれる。 In addition, in an image editing tool such as Photoshop (registered trademark), a shot image is used as an editing destination image, and editing such as superimposing the editing source image on the image is performed.
しかしながら、上記特許文献1に開示された方法では、撮影画像をいったん保存し、保存した撮影画像の一部領域を切り抜き操作などによって選択した上で、再度、カメラを起動して撮影画像と合成し、撮影する、という煩雑な操作が必要、という問題があった。
However, in the method disclosed in
また、撮影画像をいったん保存する必要があったために、保存エリアの容量が2倍必要となる、という問題もあった。 In addition, since it is necessary to save the photographed image once, there is a problem that the capacity of the storage area is doubled.
また、上記のような画像編集ツールでは、編集元の画像と編集先の画像との2つの画像データが必要であるために、撮影済みのデータを展開するためのPC(パーソナルコンピュータ)等のカメラとは別のデバイスやアプリケーションが必要となる、という問題があった。 In addition, since the image editing tool as described above requires two image data of an editing source image and an editing destination image, a camera such as a PC (personal computer) for expanding captured data. There was a problem that another device or application was required.
さらに、上記のような画像編集ツールでは、編集元の画像の選択や切り取り、編集先の画像の選択や、編集元の画像の貼り付けなどの、複数の工程が必要であり、操作が煩雑、という問題があった。 Furthermore, the image editing tool as described above requires a plurality of steps such as selection and cutting of the image of the editing source, selection of the image of the editing destination, and pasting of the image of the editing source, and the operation is complicated. There was a problem.
本発明はこのような問題に鑑みてなされたものであって、容易な操作で、また、撮影とリアルタイムで撮影画像を用いた合成画像を作成できる制御装置、制御方法、および制御プログラムを提供することを目的としている。 The present invention has been made in view of such a problem, and provides a control device, a control method, and a control program capable of creating a composite image using a photographed image in real time with easy operation. The purpose is that.
上記目的を達成するために、本発明のある局面に従うと、制御装置は複数のカメラに接続されて当該複数のカメラを制御可能な制御装置であって、複数のカメラそれぞれから撮影画像の入力を受け付けるための入力手段と、複数の撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するためのプレビュー表示手段と、撮影指示を受け付けるための指示手段と、撮影指示に従って複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るための合成手段とを備える。プレビュー表示された画面に対して切出範囲の指定を受け付けると、プレビュー表示手段は、切出範囲において最上位に配置された撮影画像の切出範囲の領域を、最上位の直下に配置された撮影画像の該当する範囲に置き換えてプレビュー表示用の画面を更新し、合成手段は、複数の画像データのそれぞれの、撮影指示を受け付けた際のプレビュー表示における表示範囲に従う領域を合成する。 In order to achieve the above object, according to one aspect of the present invention, the control device is a control device that is connected to a plurality of cameras and can control the plurality of cameras, and inputs a captured image from each of the plurality of cameras. An input unit for receiving, a preview display unit for generating a preview display screen by superimposing a plurality of captured images, and displaying on the display device; an instruction unit for receiving a shooting instruction; And a synthesizing unit for obtaining a synthesized image by fixing the captured images from the respective cameras and synthesizing the obtained image data. When receiving the designation of the cut-out range for the preview-displayed screen, the preview display means arranges the cut-out range area of the shot image arranged at the top in the cut-out range immediately below the top. The screen for preview display is updated by replacing with the corresponding range of the photographed image, and the combining means combines the areas according to the display range in the preview display when the shooting instruction is received for each of the plurality of image data.
好ましくは、制御装置は表示装置としてのタッチパネルを備え、プレビュー表示用の画面が表示されたタッチパネル上でのタッチ操作に基づいて、切出範囲を特定するための特定手段をさらに備える。 Preferably, the control device includes a touch panel as a display device, and further includes specifying means for specifying a cutout range based on a touch operation on the touch panel on which a preview display screen is displayed.
より好ましくは、特定手段は、切出範囲に対して変更の指示を受け付けると、変更の指示に従って切出範囲を調整する。 More preferably, when the specifying unit receives an instruction to change the cutout range, the specifying unit adjusts the cutout range in accordance with the change instruction.
本発明のさらに他の局面に従うと、制御方法は複数のカメラを制御して当該複数のカメラそれぞれからの撮影画像に基づいた合成画像を得るための制御方法であって、複数のカメラそれぞれから撮影画像の入力を受け付けるステップと、複数の撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するステップと、プレビュー表示された画面に対して切出範囲の指定を受け付けると、切出範囲において最上位に配置された撮影画像の切出範囲の領域を、最上位の直下に配置された撮影画像の該当する範囲に置き換えてプレビュー表示用の画面を更新するステップと、表示装置にプレビュー表示がなされている状態において撮影指示を受け付けると、複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るステップとを備える。合成画像を得るステップでは、複数の画像データのそれぞれの、撮影指示を受け付けた際のプレビュー表示における表示範囲に従う領域を合成することで合成画像を得る。 According to still another aspect of the present invention, the control method is a control method for controlling a plurality of cameras to obtain a composite image based on the captured images from each of the plurality of cameras, which is captured from each of the plurality of cameras. A step of receiving an image input, a step of generating a preview display screen by superimposing a plurality of captured images, and displaying on a display device; A step of updating the preview display screen by replacing the area of the cutout area of the photographed image arranged at the highest position in the output range with the corresponding area of the photographed image arranged immediately below the highest position; When a shooting instruction is accepted while the preview is displayed, the shot images from each of the multiple cameras are fixed and the obtained image data is combined. And a step of obtaining a composite image by. In the step of obtaining a composite image, a composite image is obtained by compositing areas of the plurality of image data according to the display range in the preview display when a photographing instruction is received.
本発明のさらに他の局面に従うと、制御プログラムは複数のカメラに接続されたコンピュータに当該複数のカメラそれぞれからの撮影画像に基づいた合成画像を得る処理を実行させるためのプログラムであって、複数のカメラそれぞれから撮影画像の入力を受け付けるステップと、複数の撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するステップと、プレビュー表示された画面に対して切出範囲の指定を受け付けると、切出範囲において最上位に配置された撮影画像の切出範囲の領域を、最上位の直下に配置された撮影画像の該当する範囲に置き換えてプレビュー表示用の画面を更新するステップと、表示装置にプレビュー表示がなされている状態において撮影指示を受け付けると、複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るステップとをコンピュータに実行させ、合成画像を得るステップでコンピュータは、複数の画像データのそれぞれの、撮影指示を受け付けた際のプレビュー表示における表示範囲に従う領域を合成することで合成画像を得る。 According to still another aspect of the present invention, a control program is a program for causing a computer connected to a plurality of cameras to execute a process of obtaining a composite image based on a captured image from each of the plurality of cameras. Accepting input of captured images from each of the cameras, generating a preview display screen by superimposing multiple captured images, displaying them on the display device, and specifying the clipping range for the previewed screen Is received, the step of updating the preview display screen by replacing the area of the cut-out range of the shot image arranged at the top in the cut-out range with the corresponding range of the shot image arranged immediately below the top level When a shooting instruction is received in a state where a preview is displayed on the display device, shooting from each of a plurality of cameras is performed. The step of obtaining a composite image by fixing the image and synthesizing the obtained image data to the computer, and in the step of obtaining the composite image, the computer receives a shooting instruction for each of the plurality of image data. A synthesized image is obtained by synthesizing the area according to the display range in the preview display.
この発明によると、容易な操作で、また、撮影とリアルタイムで、複数カメラそれぞれからの撮影画像を用いた合成画像を得ることができる。 According to the present invention, it is possible to obtain a composite image using captured images from each of a plurality of cameras by an easy operation and in real time by shooting.
以下に、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。したがって、これらの説明は繰り返さない。 Embodiments of the present invention will be described below with reference to the drawings. In the following description, the same parts and components are denoted by the same reference numerals. Their names and functions are also the same. Therefore, these descriptions will not be repeated.
<装置構成>
図1(A)および図1(B)は、本実施の形態にかかる撮影装置の第1の具体例としての撮影装置100Aの外観の具体例を表わした概略図である。ここでは、撮影装置として、カメラ付き携帯電話機などの撮影機能を有する端末装置が想定されている。撮影装置100Aは2面を有して、図1(A)および図1(B)は、それぞれの面から見た外観の具体例を表わしている。
<Device configuration>
FIG. 1A and FIG. 1B are schematic views showing a specific example of the appearance of a photographing
詳しくは、図1(A)および図1(B)を参照して、撮影装置100Aは、メインのカメラとしての第1カメラ16と、サブのカメラとしての第2カメラ17とをそれぞれの面に有している。さらに、タッチパネルとして表示部15および入力部14を有している。
Specifically, referring to FIGS. 1A and 1B, photographing
撮影装置100Aは複数のカメラを制御可能であればよく、3以上のカメラを備えていてもよい。さらに、本実施の形態にかかる撮影装置は必ずしも複数のカメラを備える必要はなく、複数のカメラを制御可能であればよい。たとえば、自身に1つのカメラを備え、カメラを備えた他の撮影装置と通信可能で該カメラを制御可能な撮影装置であってもよい。また、他の例として、自身はカメラを備えず、2台以上のカメラと通信可能でこれらカメラ群を制御可能なPC(パーソナルコンピュータ)などの制御装置であってもよい。
The photographing
図2は、本実施の形態にかかる撮影装置の第2の具体例としての撮影装置100Bの外観の具体例を表わす概略図である。
FIG. 2 is a schematic diagram illustrating a specific example of the appearance of a photographing
図2を参照して、撮影装置100Bは(図示された面と逆側の面に)第1カメラ16を有し、有線または無線にて、第2カメラ17を有する他の撮影装置と通信可能に接続されている。
Referring to FIG. 2,
以降の説明では本実施の形態にかかる撮影装置が図1(A)および図1(B)に表わされた撮影装置100Aであるものとするが、図2に表わされた撮影装置100Bであっても同様である。
In the following description, the photographing apparatus according to the present embodiment is assumed to be the photographing
図3は、撮影装置100Aの装置構成の具体例を示すブロック図である。
FIG. 3 is a block diagram illustrating a specific example of the apparatus configuration of the
図3を参照して、撮影装置100Aは、当該撮影装置100A全体を制御する演算を実行し、第1カメラ16および第2カメラ17の制御装置として機能するCPU(Central Processing Unit)10と、CPU10で実行されるプログラム(アプリケーション)などを記憶するためのROM(Read Only Memory)11と、CPU10でプログラムを実行する際の作業領域として機能するためのRAM(Random Access Memory)12と、画像データなどを記憶するためのメモリ13と、当該撮影装置100Aに対する操作入力を受け付けるための入力部14と、表示部15と、第1カメラ16と、第2カメラ17とを含む。
Referring to FIG. 3, photographing apparatus 100 </ b> A executes a calculation for controlling the entire photographing apparatus 100 </ b> A, and functions as a CPU (Central Processing Unit) 10 that functions as a control device for
図1(A)および図1(B)の例では、入力部14および表示部15がタッチパネルを構成しているが、ボタンおよびディスプレイのように、それぞれ別個に撮影装置100Aに設けられてもよい。
In the example of FIGS. 1A and 1B, the
<動作概要>
図4は、撮影装置100Aでの動作概要を表わしたフローチャートである。
<Overview of operation>
FIG. 4 is a flowchart showing an outline of the operation in the photographing
図4を参照して、撮影装置100Aは、第1カメラ16および第2カメラ17それぞれで撮影を行ない、撮影画像の入力を受け付ける(ステップS1)。ここでは、一例としてリアルタイムに動画が撮影されて、入力される。
Referring to FIG. 4, photographing
撮影装置100Aは、これら入力画像を表示部15にプレビュー表示する(ステップS3)。このプレビュー表示の方法については後述する。
The photographing
プレビュー表示は、撮影指示がなされるまで(ステップS5でNO)継続される。この間、撮影装置100Aは両カメラでの撮影画像の入力を受け付けて、リアルタイムにこれら入力画像をプレビュー表示する。
The preview display is continued until a shooting instruction is given (NO in step S5). During this time, the
プレビュー表示した状態において入力部14にてユーザからの撮影指示を受け付けると(ステップS5でYES)、撮影装置100Aは、第1カメラ16および第2カメラ17それぞれに対してキャプチャ指示を出し(ステップS7)、そのときの撮影画像を固定して画像データとして取り込む。そして、撮影装置100Aは、各画像データを、プレビュー表示された状態となるよう画像合成し(ステップS9)、その結果を表示部15に表示する。
When the
図5は、上記ステップS3でのプレビュー表示時の、階層表示の概念を表わした図である。 FIG. 5 is a diagram showing the concept of hierarchical display at the time of preview display in step S3.
図5を参照して、撮影装置100Aは、第1カメラ16からの入力画像と第2カメラ17からの入力画像とを、メモリ13に設けられた一時記憶領域において、それぞれ異なる階層で保持して、これら表示部15に階層表示(重ね合わせて表示)する。撮影装置100Aが3つ以上のカメラを有する場合にも同様に、撮影装置100Aはそれぞれのカメラからの入力画像を順に異なる階層で保持して、これらを階層順に重ね合わせて表示部15に表示する。
Referring to FIG. 5, photographing
このとき、撮影装置100Aは、図5に表わされたように最上位階層に保持された入力画像であって表示されている入力画像に対して範囲指定を受け付けることで、当該入力画像のその範囲をその入力画像についての非表示範囲とする。そして、撮影装置100Aは、当該非表示範囲には、当該階層よりも1段下の階層に保持されている入力画像の該当する範囲を表示する。これは、上の階層の入力画像をくり抜くことで直下の階層の入力画像が見えることと同じ状態である。以下、くり抜く範囲として指定される範囲を「切出範囲」とも称する。
At this time, the
カメラが3つ以上あって表示階層が3階層以上ある場合も同様に、最上位階層に対して切出範囲の指定を受け付けることで、該切出範囲には最上位階層よりも1段下の階層の入力画像が表示されることになり、当該切出範囲に表示されている最上位階層よりも1段下の階層の入力画像に対してさらに切出範囲の指定を受け付けることで、さらにその入力画像がくり抜かれてその階層よりも1段下の階層の入力画像が表示されることになる。 Similarly, when there are three or more cameras and there are three or more display hierarchies, by accepting designation of a cutout range for the highest hierarchy, the cutout range is one level lower than the highest hierarchy. The input image of the hierarchy will be displayed, and by specifying the extraction range further for the input image of the hierarchy one level lower than the highest hierarchy displayed in the extraction range, The input image is cut out, and the input image at a level one level lower than that level is displayed.
切出範囲の指定は、たとえば、タッチパネルである表示部15にプレビュー画面が表示されている状態において、当該表示部15をタッチすることでなされてもよい。他の方法として、表示部15にプレビュー画面が表示されている状態においてボタンやタッチパッドなどである入力部14を操作することでなされてもよい。
The cutout range may be specified by touching the
図6は、切出範囲の指定方法の具体例を表わした図である。図6を参照して、タッチパネルである表示部15において、指等で丸(図6(A))や矩形(図6(B))や星型などの多角形(図6(C))などの形状に沿ってスライドすることで切出範囲として指定することができる。
FIG. 6 is a diagram showing a specific example of a method for designating the extraction range. Referring to FIG. 6, in
撮影装置100Aは、タッチパネルである表示部15にプレビュー画面が表示されている状態においてスライド操作がなされると、タッチの軌跡に閉じた領域がある場合に、その領域を切出範囲として特定してもよい。たとえば、図6(D)のように、タッチの軌跡中に閉じた領域が検出されると、撮影装置100Aは、その領域を切出範囲とする。
When a slide operation is performed in a state where the preview screen is displayed on the
たとえば、図6(E)や図6(F)のように、連続した1回のスライド操作で複数の閉じた領域を作ることで、1回のスライド操作によって複数の切出範囲を指定することもできる。 For example, as shown in FIGS. 6E and 6F, a plurality of closed areas are created by a single continuous slide operation, and a plurality of cutout ranges are designated by a single slide operation. You can also.
さらに、撮影装置100Aは、上記スライド操作によって指定された切出範囲を拡大や縮小したり、位置を変更したりしてもよい。ユーザは、上記スライド操作によって切出範囲を指定した後、その切出範囲に対してさらにピンチイン操作、ピンチアウト操作、ドラッグ操作などを行なうことで、切出範囲の変形を指示することができる。
Furthermore, the
さらに、撮影装置100Aは、ユーザのスライド操作によって指定された切出範囲を入力画像をくり抜く範囲として用いるだけでなく、最上位の階層に保持されていた入力画像のうちのその範囲の画像をスタンプ画像として用いてもよい。
Furthermore, the
なお、第1カメラ16および第2カメラ17の解像度が異なるとき、それぞれからの入力画像の解像度も異なるため、そのままプレビュー表示すると画質が低下することになる。そこでこの場合、撮影装置100Aは、各入力画像の解像度をこれらカメラのうちの最も解像度の低いカメラの解像度に変換する、すなわち、解像度の高いカメラからの入力画像の解像度を、最も解像度の低いカメラでの最高解像度まで縮小することですべての入力画像の解像度を統一する。
Note that when the resolutions of the
または、撮影装置100Aは、各カメラからの入力画像のサイズを予め記憶している表示部15の画面サイズに変換することでサイズを統一してもよい。すなわち、撮影装置100Aは、表示部15の最大画面サイズに各カメラからの入力画像の解像度を拡大・縮小してもよい。
Alternatively, the
なお、各入力画像の解像度(サイズ)は必ずしも統一する必要はない。他の例として、撮影装置100Aは、最上位の階層に保持する入力画像(たとえば第1カメラ16からの入力画像)の解像度は変換することなくプレビュー表示し、その入力画像に対して切出範囲が指定されると、最上位よりも1段下の階層に保持する入力画像(たとえば第2カメラ17からの入力画像)のサイズを切出範囲のサイズとするように変換した上で切出範囲にその入力画像をプレビュー表示してもよい。このとき、撮影装置100Aは、好ましくは、最上位よりも1段下の階層に保持する入力画像のアスペクト比を保持したまま画像サイズを変換する。また、撮影装置100Aは、好ましくは、最上位よりも1段下の階層に保持する入力画像の中央点を切出範囲の中央点と一致するように切出範囲に表示する。または、撮影装置100Aは、最上位よりも1段下の階層に保持する入力画像の、切出範囲における表示位置の指定を受け付けてもよい。
Note that the resolution (size) of each input image does not necessarily have to be unified. As another example, the
図7〜図10は、上記ステップS3でのプレビュー表示の具体的な流れを説明するための図である。すなわち、図7は、第1カメラ16および第2カメラ17それぞれに対する被写体であるユーザA〜Cの位置関係を表わした図である。図8は図7の状態での第1カメラ16での撮影画像の具体例を表わした図であり、図9は第2カメラ17での撮影画像の具体例を表わした図である。図10は、図7および図8の撮影画像に基づくプレビュー表示の具体例を表わした図である。
7 to 10 are diagrams for explaining a specific flow of the preview display in step S3. That is, FIG. 7 is a diagram showing the positional relationship between the users A to C as subjects with respect to the
図7に示されたように、ユーザA,Bを被写体として、ユーザCがユーザA,Bに対して第1カメラ16を向けた状態とする。このとき、第2カメラ17は撮影者であるユーザCを向いている。そのため、図8に示されたように第1カメラ16ではユーザA,Bが撮影され、図9に示されたように第2カメラ17ではユーザCが撮影される。
As shown in FIG. 7, it is assumed that the users A and B are subjects and the user C points the
撮影装置100Aは、図8の第1カメラ16での撮影画像である第1カメラ16からの入力画像と、図9の第2カメラ17での撮影画像である第2カメラ17からの入力画像とを、それぞれ、メモリ13に設けられた一時記憶領域において、異なる階層で保持する。
The
プレビュー表示時に図8の第1カメラ16からの入力画像を上位層とし、図9の第2カメラ17からの入力画像を下位層として階層表示すると、表示部15には、図8の入力画像がプレビュー表示される。その状態において切出範囲が指定されると、図10に示されたように、撮影装置100Aは切出範囲として指定された領域に、1段下の階層に保持している図9の第2カメラ17からの入力画像をプレビュー表示する。
If the input image from the
図10の状態で入力部14でユーザ(この例の場合、ユーザC)から撮影指示を受け付けると、撮影装置100Aは、各カメラでの入力画像を固定(キャプチャ)して画像データを得ると共に、図10のプレビュー表示の状態に従ってこれら画像データの画像合成を行なう。
In the state of FIG. 10, when receiving a shooting instruction from the user (in this example, user C) by the
<機能構成>
図11は、上記動作を行なうための撮影装置100Aの機能構成の具体例を示すブロック図である。図11に示された各機能は、撮影装置100AのCPU10がROM11に記憶されているプログラムを読み出してRAM12上に展開しつつ実行することで、主にCPU10上に形成されるものである。しかしながら、少なくとも一部が図3に表わされたハードウェア構成によって実現されてもよい。
<Functional configuration>
FIG. 11 is a block diagram illustrating a specific example of a functional configuration of the
図11を参照して、メモリ13には、第1カメラ16からの入力画像を記憶するための記憶領域であって、上記階層表示において上位階層に入力画像を保持するための記憶領域である第1入力画像記憶部131と、第2カメラ17からの入力画像を記憶するための記憶領域であって、上記階層表示において下位階層に入力画像を保持するための記憶領域である第2入力画像記憶部132とが設けられる。
Referring to FIG. 11,
ざらに図11を参照して、CPU10は、第1カメラ16からの撮影画像の入力および第2カメラ17からの撮影画像の入力を受け付けるための撮影画像入力部101と、入力画像をそれぞれの記憶部に格納するための画像格納部102と、入力部14からのユーザの指示入力を受け付け、指示内容を特定するための指示入力部103と、入力された指示が切出範囲を指定する指示である場合に、その指示内容に従って切出範囲を特定するための特定部104と、特定された切出範囲に基づいて各カメラからの入力画像を階層表示したプレビュー画面を表示部15に表示するためのプレビュー表示部105と、入力された指示が撮影指示である場合に、その指示内容に従って各カメラからの入力画像を固定(キャプチャ)して画像データを得ることで各カメラでの撮影を行なうための撮影部106と、各カメラでの撮影画像を切出範囲を用いてプレビュー表示された状態と同じ状態となるように合成するための合成部107とを含む。
Referring to FIG. 11, the
<動作フロー>
図12は、撮影装置100Aでの動作の流れを表わすフローチャートである。図12のフローチャートに表わされた動作は、撮影装置100AのCPU10がROM11に記憶されているプログラムを読み出してRAM12上に展開しつつ実行し、図11の各機能を発揮させることによって実現される。
<Operation flow>
FIG. 12 is a flowchart showing the flow of operations in the photographing
図12を参照して、CPU10は、たとえばユーザ指示などに従って、メインカメラである第1カメラ16を起動したときに(ステップS101)、他のカメラ、つまり、サブカメラである第2カメラ17がすでに起動しており、階層表示でプレビュー画面を表示する必要があるか否かを確認する。
Referring to FIG. 12, when
第2カメラ17が起動している場合(ステップS103でYES)、CPU10は、第1カメラ16からの入力画像、第2カメラ17からの入力画像を、それぞれ異なる階層となるように階層で保持する(ステップS105)。この例では、メインカメラである第1カメラ16からの入力画面を最上位の階層(第1層)に保持し、サブカメラである第2カメラ17からの入力画面をその直下の階層(第2層)に保持する。これ以上のカメラを有する場合にも、同様に、順に階層に入力画像を保持していく。
When the
そして、CPU10は、階層順に重ねて表示するプレビュー表示画面を生成して、表示部15に表示する(ステップS107)。この例の場合、第1層である第1カメラ16からの入力画面を上方に、第2層である第2カメラ17からの入力画面を下方となるようにこれら入力画像を重ねてプレビュー表示する。後述する切出範囲の指定がまだなされていない場合には、プレビュー画面前面に第1カメラ16からの入力画面が表示されることになる。
Then, the
表示部15にプレビュー表示された状態で、予め規定されている切出範囲を指定する操作がなされると(ステップS109でYES)、CPU10は、指定された範囲において最上位の階層に保持されている入力画像の該当する範囲を非表示とし、その部分をその直下の階層の該当する範囲の入力画像に置き換えて、プレビュー表示を更新する(ステップS111)。このとき、CPU10は、切出範囲をプレビュー表示上に重ねて表示すると共に、その範囲の調整(拡大、縮小、移動等)を受け付けるためのUI(ユーザインタフェース)をさらに表示するようにしてもよい。そして、CPU10は、その指示に応じて切出範囲を調整してもよい。
When an operation for designating a predetermined clipping range is performed in a state where the preview is displayed on the display unit 15 (YES in step S109), the
最初に切出範囲を指定されたときには、CPU10は、その範囲の第1カメラ16からの入力画像を、その範囲の第2カメラ17からの入力画像に置き換える。または、CPU10は、切出範囲の第1カメラ16からの入力画像を、その範囲のサイズに応じて縮小または拡大した第2カメラ17からの入力画像に置き換えてもよい。
When the cutout range is first designated, the
CPU10は、以上の動作を、ユーザから撮影指示を受け付けるまで(ステップS113でNO)、繰り返す。すなわち、所定の時間間隔で第1カメラ16および第2カメラ17からの撮影画像の入力を受け付けてプレビュー表示を更新すると共に、切出範囲を指定する指示がなされると、それに応じて切出範囲を特定して、その範囲の上位層である第1カメラ16からの入力画像を第2層に保持される第2カメラ17の入力画像に置き換える動作を繰り返す。
The
ユーザより撮影指示を受け付けると(ステップS113でYES)、CPU10は、第1カメラ16および第2カメラ17からの入力画像を固定することで画像データを得る(ステップS115)。そして、CPU10は、これら画像データを用いて画像合成し、表示部15に表示する(ステップS117)。このとき、CPU10は、各画像データについて、プレビュー表示の画面にて表示された各入力画像の範囲を特定して、各画像データのその範囲を合成する。たとえば、図10のようなプレビュー表示された状態において撮影指示がなされると、第1カメラ16からの撮影画像より得られた画像データの切出範囲以外の領域と、第2カメラ17からの撮影画像より得られた画像データの切出し範囲の領域とを合成する。これにより、第1カメラ16からの入力画像に対して設定された切出範囲に第2カメラ17からの入力画像がはめ込まれた、プレビュー表示された状態となるような合成画像が得られる。
When a photographing instruction is received from the user (YES in step S113), the
なお、上記ステップS101で第1カメラ16を起動した際に第2カメラ17が起動していない場合には(ステップS101でNO)、CPU10、通常の撮影動作を行なってよい(ステップS119)。その際、通常の撮影動作中に第2カメラ17の起動が指示された場合には、上記した動作に切り替えてもよい。または、第1カメラ16を起動した際に、CPU10は、第2カメラ17の起動の要否をユーザに確認するようにしてもよい。
If the
<実施の形態の効果>
以上の動作が撮影装置100Aで行なわれることで、ユーザは、携帯電話機などの複数のカメラを備えた撮影装置100A、または、上記したようにカメラを備えた他の装置と接続されて制御可能な制御装置で、複数カメラからの入力画像を階層的に保持して表示部に同時にプレビュー表示しながら撮影することで、容易に、これら入力画像の合成画像を得ることができる。
<Effect of Embodiment>
The above operation is performed by the photographing
さらに、従来の画像合成処理で必要とされていた撮影画像をいったん記憶するための記憶領域を不要とすることができるため、記憶容量の少ない装置であっても画像合成を行なうことが可能となる。 Furthermore, since it is possible to eliminate the storage area for temporarily storing the photographed image that has been required in the conventional image composition processing, it is possible to perform image composition even with an apparatus having a small storage capacity. .
また、撮影装置100Aでは、画像が合成された状態でプレビュー表示を行なうため、ユーザは、撮影とリアルタイムで合成画像を確認することができる。そのため、撮影画像をいったん展開するためのPCなどの別の装置やアプリケーションを不要とすることができる。
In addition, since shooting
さらに、上述の処理を撮影装置100AのCPU10に実行させるためのプログラムを提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、CD−ROM(Compact Disk-Read Only Memory)、ROM、RAMおよびメモリカードなどのコンピュータ読取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。あるいは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。
Further, it is possible to provide a program for causing the
なお、本発明にかかるプログラムは、コンピュータのオペレーティングシステム(OS)の一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の配列で所定のタイミングで呼出して処理を実行させるものであってもよい。その場合、プログラム自体には上記モジュールが含まれずOSと協働して処理が実行される。このようなモジュールを含まないプログラムも、本発明にかかるプログラムに含まれ得る。 The program according to the present invention is a program module that is provided as a part of a computer operating system (OS) and calls necessary modules in a predetermined arrangement at a predetermined timing to execute processing. Also good. In that case, the program itself does not include the module, and the process is executed in cooperation with the OS. A program that does not include such a module can also be included in the program according to the present invention.
また、本発明にかかるプログラムは他のプログラムの一部に組込まれて提供されるものであってもよい。その場合にも、プログラム自体には上記他のプログラムに含まれるモジュールが含まれず、他のプログラムと協働して処理が実行される。このような他のプログラムに組込まれたプログラムも、本発明にかかるプログラムに含まれ得る。 The program according to the present invention may be provided by being incorporated in a part of another program. Even in this case, the program itself does not include the module included in the other program, and the process is executed in cooperation with the other program. Such a program incorporated in another program can also be included in the program according to the present invention.
提供されるプログラム製品は、ハードディスクなどのプログラム格納部にインストールされて実行される。なお、プログラム製品は、プログラム自体と、プログラムが記録された記録媒体とを含む。 The provided program product is installed in a program storage unit such as a hard disk and executed. The program product includes the program itself and a recording medium on which the program is recorded.
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.
10 CPU、11 ROM、12 RAM、13 メモリ、14 入力部、15 表示部、16 第1カメラ、17 第2カメラ、100A,100B 撮影装置、101 撮影画像入力部、102 画像格納部、103 指示入力部、104 特定部、105 プレビュー表示部、106 撮影部、107 合成部、131 第1入力画像記憶部、132 第2入力画像記憶部。 10 CPU, 11 ROM, 12 RAM, 13 memory, 14 input section, 15 display section, 16 first camera, 17 second camera, 100A, 100B photographing apparatus, 101 photographed image input section, 102 image storage section, 103 instruction input , 104 specifying unit, 105 preview display unit, 106 photographing unit, 107 composition unit, 131 first input image storage unit, 132 second input image storage unit.
Claims (5)
前記複数のカメラそれぞれから撮影画像の入力を受け付けるための入力手段と、
複数の前記撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するためのプレビュー表示手段と、
撮影指示を受け付けるための指示手段と、
前記撮影指示に従って前記複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るための合成手段とを備え、
前記プレビュー表示された画面に対して切出範囲の指定を受け付けると、前記プレビュー表示手段は、前記切出範囲において最上位に配置された撮影画像の前記切出範囲の領域を、前記最上位の直下に配置された撮影画像の該当する範囲に置き換えて前記プレビュー表示用の画面を更新し、
前記合成手段は、複数の前記画像データのそれぞれの、前記撮影指示を受け付けた際の前記プレビュー表示における表示範囲に従う領域を合成する、制御装置。 A control device connected to a plurality of cameras and capable of controlling the plurality of cameras,
Input means for accepting input of captured images from each of the plurality of cameras;
A preview display means for generating a preview display screen by superimposing a plurality of the captured images, and displaying the screen on a display device;
Instruction means for accepting shooting instructions;
A fixed image obtained from each of the plurality of cameras according to the shooting instruction, and a combining means for obtaining a combined image by combining the obtained image data, and
When the designation of the cutout range is accepted for the preview-displayed screen, the preview display means sets the cutout range area of the photographed image arranged at the topmost position in the cutout range to the topmost position. Update the preview display screen by replacing it with the corresponding range of the captured image placed directly below,
The said synthetic | combination means is a control apparatus which synthesize | combines the area | region according to the display range in the said preview display when the said imaging | photography instruction | indication is received of each of the said several image data.
前記プレビュー表示用の画面が表示された前記タッチパネル上でのタッチ操作に基づいて、前記切出範囲を特定するための特定手段をさらに備える、請求項1に記載の制御装置。 A touch panel as the display device;
The control device according to claim 1, further comprising: a specifying unit that specifies the cut-out range based on a touch operation on the touch panel on which the preview display screen is displayed.
前記複数のカメラそれぞれから撮影画像の入力を受け付けるステップと、
複数の前記撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するステップと、
前記プレビュー表示された画面に対して切出範囲の指定を受け付けると、前記切出範囲において最上位に配置された撮影画像の前記切出範囲の領域を、前記最上位の直下に配置された撮影画像の該当する範囲に置き換えて前記プレビュー表示用の画面を更新するステップと、
前記表示装置に前記プレビュー表示がなされている状態において撮影指示を受け付けると、前記複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るステップとを備え、
前記合成画像を得るステップでは、複数の前記画像データのそれぞれの、前記撮影指示を受け付けた際の前記プレビュー表示における表示範囲に従う領域を合成することで前記合成画像を得る、制御方法。 A control method for controlling a plurality of cameras to obtain a composite image based on captured images from each of the plurality of cameras,
Receiving input of captured images from each of the plurality of cameras;
Generating a preview display screen by superimposing a plurality of the captured images and displaying the screen on a display device;
When designation of a cutout range is accepted for the preview-displayed screen, the area of the cutout range of the shot image arranged at the top in the cutout range is captured immediately below the topmost position. Updating the preview display screen by replacing it with the corresponding range of the image;
Receiving a shooting instruction in a state where the preview display is made on the display device, and fixing a captured image from each of the plurality of cameras and synthesizing the obtained image data to obtain a composite image. ,
In the step of obtaining the composite image, the composite image is obtained by compositing a region according to a display range in the preview display when receiving the photographing instruction of each of the plurality of image data.
前記複数のカメラそれぞれから撮影画像の入力を受け付けるステップと、
複数の前記撮影画像を重ねてプレビュー表示用の画面を生成し、表示装置に表示するステップと、
前記プレビュー表示された画面に対して切出範囲の指定を受け付けると、前記切出範囲において最上位に配置された撮影画像の前記切出範囲の領域を、前記最上位の直下に配置された撮影画像の該当する範囲に置き換えて前記プレビュー表示用の画面を更新するステップと、
前記表示装置に前記プレビュー表示がなされている状態において撮影指示を受け付けると、前記複数のカメラそれぞれからの撮影画像を固定し、得られた画像データを合成することで合成画像を得るステップとを前記コンピュータに実行させ、
前記合成画像を得るステップで前記コンピュータは、複数の前記画像データのそれぞれの、前記撮影指示を受け付けた際の前記プレビュー表示における表示範囲に従う領域を合成することで前記合成画像を得る、制御プログラム。 A program for causing a computer connected to a plurality of cameras to execute a process of obtaining a composite image based on captured images from each of the plurality of cameras,
Receiving input of captured images from each of the plurality of cameras;
Generating a preview display screen by superimposing a plurality of the captured images and displaying the screen on a display device;
When designation of a cutout range is accepted for the preview-displayed screen, the area of the cutout range of the shot image arranged at the top in the cutout range is captured immediately below the topmost position. Updating the preview display screen by replacing it with the corresponding range of the image;
When receiving a shooting instruction in a state where the preview display is made on the display device, the step of fixing a shot image from each of the plurality of cameras and obtaining a synthesized image by synthesizing the obtained image data; Let the computer run,
In the step of obtaining the composite image, the computer obtains the composite image by synthesizing a region according to a display range in the preview display when receiving the shooting instruction of each of the plurality of image data.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016158165A JP2016197919A (en) | 2016-08-10 | 2016-08-10 | Control device, control method and control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016158165A JP2016197919A (en) | 2016-08-10 | 2016-08-10 | Control device, control method and control program |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012201731A Division JP5990068B2 (en) | 2012-09-13 | 2012-09-13 | Control device, control method, and control program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016197919A true JP2016197919A (en) | 2016-11-24 |
Family
ID=57358615
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016158165A Pending JP2016197919A (en) | 2016-08-10 | 2016-08-10 | Control device, control method and control program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2016197919A (en) |
-
2016
- 2016-08-10 JP JP2016158165A patent/JP2016197919A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102045957B1 (en) | Method and apparatus for photographing of a portable terminal | |
WO2021175269A1 (en) | Image processing method and mobile terminal | |
US9307153B2 (en) | Method and apparatus for previewing a dual-shot image | |
KR102076773B1 (en) | Method for obtaining video data and an electronic device thereof | |
US20080231740A1 (en) | Camera with multiple displays | |
WO2015030126A1 (en) | Image processing device and image processing program | |
US20080231741A1 (en) | Camera with multiple displays | |
KR101501028B1 (en) | Method and Apparatus for Generating and Editing a Detailed Image | |
KR101984616B1 (en) | System for providing contents using images | |
JP2008258745A (en) | Camera | |
JP6746450B2 (en) | Display control method and display device | |
JP5990068B2 (en) | Control device, control method, and control program | |
KR102514702B1 (en) | A mobile terminal for generating a photographed image and a method for generating a photographed image | |
JP2015012535A (en) | Imaging equipment and imaging method | |
JP2016197919A (en) | Control device, control method and control program | |
JP6673459B2 (en) | Image processing apparatus, image processing system, and program | |
JP2010097449A (en) | Image composition device, image composition method and image composition program | |
KR20140127131A (en) | Method for displaying image and an electronic device thereof | |
KR100976470B1 (en) | Method for editing picture in mobile terminal | |
KR20200037929A (en) | Method For Photographing A Composed Image, Mobile Communication Device With An Application Programme Of The Same Installed, Online Business Method And Server For The Same | |
JP7566502B2 (en) | Imaging device, image capture processing method, program, and storage medium | |
JP6221452B2 (en) | Image processing apparatus, image display apparatus, and imaging apparatus | |
RU2792413C1 (en) | Image processing method and mobile terminal | |
JP7443100B2 (en) | Electronic devices, control methods for electronic devices, programs and storage media | |
WO2023231696A1 (en) | Photographing method and related device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160923 |
|
A917 | Reason for reinstatement of right to file examination request |
Free format text: JAPANESE INTERMEDIATE CODE: A917 Effective date: 20160923 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20160923 |
|
A917 | Reason for reinstatement of right to file examination request |
Free format text: JAPANESE INTERMEDIATE CODE: A917 Effective date: 20161109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20161109 |
|
A59 | Written plea |
Free format text: JAPANESE INTERMEDIATE CODE: A59 Effective date: 20170802 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170802 |