JP2013168909A - Imaging device, image generation method, and program - Google Patents
Imaging device, image generation method, and program Download PDFInfo
- Publication number
- JP2013168909A JP2013168909A JP2012032642A JP2012032642A JP2013168909A JP 2013168909 A JP2013168909 A JP 2013168909A JP 2012032642 A JP2012032642 A JP 2012032642A JP 2012032642 A JP2012032642 A JP 2012032642A JP 2013168909 A JP2013168909 A JP 2013168909A
- Authority
- JP
- Japan
- Prior art keywords
- image
- specific area
- same
- displayed
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、広角画像を生成する撮影装置、画像生成方法およびプログラムに関する。 The present invention relates to a photographing apparatus that generates a wide-angle image, an image generation method, and a program.
近年、撮影装置であるカメラの機能が携帯電話等の携帯端末に搭載されることが一般的になってきている。 In recent years, it has become common for the functions of a camera, which is a photographing apparatus, to be mounted on a mobile terminal such as a mobile phone.
ここで、カメラの機能の1つとして広角撮影がある。広角撮影を行うためには、広角撮影を行うための広角レンズを用いるのが一般的である。しかし、携帯端末やコンパクトデジタルカメラにおいてはレンズを交換することができない。 Here, there is wide-angle shooting as one of the functions of the camera. In order to perform wide-angle shooting, it is common to use a wide-angle lens for performing wide-angle shooting. However, lenses cannot be exchanged in portable terminals and compact digital cameras.
この場合、パン撮影で複数の画像を取得し、取得した複数の画像を用いて広角画像(パノラマ画像)を得るという方法が用いられる。 In this case, a method is used in which a plurality of images are acquired by pan shooting and a wide-angle image (panoramic image) is obtained using the acquired plurality of images.
なお、パン撮影で得られる広角画像の品質を向上させるための技術が例えば、特許文献1に開示されている。
For example,
特許文献1に開示されている技術においてカメラは、画像を取り込むと、その画像を用いた合成パノラマ画像を作成するために、表示シーンのどの部分を次に撮影する画像に取り込むべきかを指示する合成ガイドを実写画面上に表示する。
In the technique disclosed in
これにより、カメラの撮影者は、次に撮影する撮影方向を容易に把握することができる。 Thereby, the photographer of the camera can easily grasp the shooting direction for the next shooting.
上述した特許文献1に開示されている技術を用いれば、品質の高い広角画像を得ることが可能であるように思える。
It seems that a high-quality wide-angle image can be obtained by using the technique disclosed in
しかし、特許文献1に開示されている技術を用いた場合でも、広角画像を得るためには、撮影者は、撮影装置として機能する携帯端末やコンパクトデジタルカメラを保持しつつ撮影方向を変えながら、連続してシャッターボタンを押下していく必要があるため、撮影に手間がかかってしまう。
However, even when the technique disclosed in
そこで、別々の撮影にて得られた複数の画像を、例えばその一部を重ね合わせるように合成することが考えられる。この場合、それら複数の画像をパーソナルコンピュータ等にコピーするとともに、複数の画像を合成するための専用のソフトウェアをそのパーソナルコンピュータにインストールする必要がある。そのため、画像をパーソナルコンピュータにコピーしたり、専用のソフトウェアをインストールしたりする手間がかかるとともに、そのためのスキルや知識等が必要となる。従って、誰もが手軽に広角画像を得ることができないという問題点がある。 Therefore, it is conceivable to combine a plurality of images obtained by separate photographing so that, for example, a part of them is overlapped. In this case, it is necessary to copy the plurality of images to a personal computer or the like and to install dedicated software for synthesizing the plurality of images in the personal computer. For this reason, it takes time and effort to copy images to a personal computer or to install dedicated software, and skills and knowledge for that purpose are required. Therefore, there is a problem that no one can easily obtain a wide-angle image.
本発明の目的は、上述した課題を解決する撮影装置、画像生成方法およびプログラムを提供することである。 The objective of this invention is providing the imaging device, the image generation method, and program which solve the subject mentioned above.
本発明の撮影装置は、
撮影部と、
前記撮影部が撮影している第1の画像を表示する表示部と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて前記表示部に表示させ、前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を前記表示部に表示させ、前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する制御部とを有する。
The photographing apparatus of the present invention
A shooting section;
A display unit for displaying a first image taken by the photographing unit;
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. When the same image that is the same image as the specific area image is included in the first image, the same image is displayed so as to overlap the specific area image. A guide image that guides the shooting direction is displayed on the display unit, and the third image and the second image that are shot in a state where the same image and the specific area image are displayed in an overlapping manner are displayed on the same screen. And a control unit that synthesizes the image and the specific region image of the second image at a position where the image overlaps.
また、本発明の画像生成方法は、
撮影する処理と
撮影している第1の画像を表示する処理と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて表示する処理と、
前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を表示する処理と、
前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する処理とを行う。
The image generation method of the present invention includes:
A process of shooting, a process of displaying the first image being shot,
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. Processing to overlay and display,
When the same image that is the same image as the specific area image is included in the first image, a guide image that guides the shooting direction is displayed so that the same image is displayed overlapping the specific area image. Processing,
The third image and the second image captured in a state where the same image and the specific area image are displayed in an overlapping manner, and the specific area image of the same image and the second image Are combined at the position where the two overlap.
また、本発明のプログラムは、
コンピュータに実行させるためのプログラムであって、
撮影する手順と
撮影している第1の画像を表示する手順と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて表示する手順と、
前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を表示する手順と、
前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する手順とを実行させる。
The program of the present invention is
A program for causing a computer to execute,
A procedure for shooting, a procedure for displaying the first image being shot,
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. On top of the display,
When the same image that is the same image as the specific area image is included in the first image, a guide image that guides the shooting direction is displayed so that the same image is displayed overlapping the specific area image. Procedure and
The third image and the second image captured in a state where the same image and the specific area image are displayed in an overlapping manner, and the specific area image of the same image and the second image And a procedure for synthesizing at the position where the two overlap.
本発明は以上説明したように構成されているので、広角画像を手軽に得ることが可能となる。 Since the present invention is configured as described above, a wide-angle image can be easily obtained.
以下に、本発明の実施の形態について図面を参照して説明する。 Embodiments of the present invention will be described below with reference to the drawings.
図1は、本発明の撮影装置を適用した画像生成システムの実施の一形態を示す図である。 FIG. 1 is a diagram showing an embodiment of an image generation system to which a photographing apparatus of the present invention is applied.
本実施形態の画像生成システムは図1に示すように、複数の撮影装置である撮影装置10−1,10−2を有している。 As shown in FIG. 1, the image generation system according to the present embodiment includes a plurality of photographing devices 10-1 and 10-2.
なお、ここでは、画像生成システムが有する撮影装置の数を2つとしているが、2つに限定しない。 Note that, here, the number of photographing devices included in the image generation system is two, but the number is not limited to two.
また、本形態において、撮影装置10−1,10−2のうちの一方の撮影装置である第1の撮影装置は、撮影して記憶した画像を、撮影装置10−1,10−2のうちの第1の撮影装置以外の撮影装置である第2の撮影装置へ送信する。このように、画像生成システムが有する複数の撮影装置のそれぞれは、第1の撮影装置または第2の撮影装置として動作する。 In the present embodiment, the first imaging device, which is one of the imaging devices 10-1 and 10-2, captures and stores an image stored in the imaging devices 10-1 and 10-2. To a second imaging device that is an imaging device other than the first imaging device. As described above, each of the plurality of imaging devices included in the image generation system operates as the first imaging device or the second imaging device.
図2は、図1に示した撮影装置10−1の内部構造の一例を示すブロック図である。なお、撮影装置10−2の内部構造も図2に示す撮影装置10−1の内部構造と同様である。 FIG. 2 is a block diagram illustrating an example of the internal structure of the photographing apparatus 10-1 illustrated in FIG. The internal structure of the photographing apparatus 10-2 is the same as the internal structure of the photographing apparatus 10-1 shown in FIG.
図3は、図1に示した撮影装置10−1の外観の一例を示す図であり、(a)は正面図、(b)は背面図である。なお、撮影装置10−2も同様の外観である。 3A and 3B are diagrams illustrating an example of the appearance of the photographing apparatus 10-1 illustrated in FIG. 1, in which FIG. 3A is a front view and FIG. 3B is a rear view. The imaging device 10-2 also has the same appearance.
本形態の撮影装置10−1は図2に示すように、制御部11と、操作部12と、撮影部13と、表示部14と、通信部15と、記憶部16とを備えている。
As shown in FIG. 2, the photographing apparatus 10-1 according to the present embodiment includes a control unit 11, an operation unit 12, a
通信部15は、例えば、Bluetooth(登録商標)による無線通信機能を備えている。本形態では、第1の撮影装置と第2の撮影装置とは予めペアリングされており、相互に無線通信が可能であるものとする。但し、撮影装置10−1と撮影装置10−2との間の無線通信は、近距離無線通信に限定されるものではなく、例えば移動体通信事業者が提供する移動体通信網を介した無線通信でもよい。また、本形態において第1の撮影装置と第2の撮影装置とは無線通信を行うものとしているが、第1の撮影装置と第2の撮影装置との間の通信は無線通信に限定されず、有線による通信でもよい。
The
表示部14は、図3に示すように、撮影装置10−1の正面に設けられており、例えばLCD(Liquid Crystal Display)を備えている。表示部14は、制御部11からの指示に従い、撮影部13が撮影した被写体の画像や、撮影装置10−1のユーザに撮影装置10−1が備える機能を選択させるためのメニュー等を表示する。
As shown in FIG. 3, the
撮影部13は、図3に示すように、撮影装置10−1の背面に設けられている。撮影部13は、制御部11からの指示に従い、被写体の撮影を開始する。これにより、撮影された被写体の画像がライブビュー画像として表示部14に表示される。ライブビュー画像とは、ユーザが画角や撮影方向等をリアルタイムに確認するための動画像のことである。また、撮影部13は、制御部11からの指示に従い、ライブビュー画像として撮影された画像を静止画像としての取り込み、取り込んだ静止画像を自身が備える記憶部16に記憶する。
As shown in FIG. 3, the
操作部12は、ユーザの操作を受け付けるための各種のボタン等を備えている。操作部12は、ユーザが所定の操作をすることで、各種指示や選択等の入力を受け付ける。具体的には例えば、操作部12は、撮影モードへの移行の指示や、撮影モードの種類の選択をユーザから受け付ける。撮影モードの種類とは例えば、広角撮影モード、通常撮影モード等である。また、操作部12は、画像の取り込みの指示をユーザから受け付ける。これは、撮影装置10−1のユーザが例えばシャッターボタンを押下したような場合である。なお、操作部12は、表示部14に積層されたタッチパネルを備え、表示部14に表示されたアイコン等が押下されることで各種指示や選択等の入力が受け付けられるものでもよい。
The operation unit 12 includes various buttons for receiving user operations. The operation unit 12 receives inputs such as various instructions and selections when the user performs a predetermined operation. Specifically, for example, the operation unit 12 receives an instruction to shift to a shooting mode and selection of the type of shooting mode from the user. Examples of the shooting mode include a wide-angle shooting mode and a normal shooting mode. In addition, the operation unit 12 receives an instruction for capturing an image from the user. This is a case where the user of the photographing apparatus 10-1 has pressed the shutter button, for example. Note that the operation unit 12 may include a touch panel stacked on the
ここで、上述したように、本形態の画像生成システムが有する複数の撮影装置のそれぞれは、第1の撮影装置または第2の撮影装置として動作する。第1の撮影装置として動作する場合と、第2の撮影装置として動作する場合とで、制御部11の動作は異なる。そこで、制御部11については、以下の(1)および(2)に示すように、撮影装置10−1が第1の撮影装置として動作する場合と、第2の撮影装置として動作する場合とに分けて説明する。 Here, as described above, each of the plurality of imaging devices included in the image generation system according to the present embodiment operates as the first imaging device or the second imaging device. The operation of the control unit 11 differs between when operating as the first imaging device and when operating as the second imaging device. Therefore, as shown in the following (1) and (2), the control unit 11 includes a case where the photographing device 10-1 operates as the first photographing device and a case where the photographing device 10-1 operates as the second photographing device. Separately described.
(1)撮影装置10−1が第1の撮影装置として動作する場合
制御部11は、操作部12にて撮影モードへの移行の指示がユーザから受け付けられると、撮影部13に被写体の撮影を開始させる。次に、制御部11は、操作部12にて広角撮影モードの選択がユーザから受け付けられた場合、操作部12にて画像の取り込みの指示がユーザから受け付けられると、制御部11は、ライブビュー画像として撮影している画像を静止画像として撮影部13に取り込ませ、取り込ませた静止画像を記憶部16へ記憶させる(書き込む)。次に、制御部11は、記憶部16から静止画像を読み出し、通信部15を介して無線通信機能を用いて第2の撮影装置へ送信する。
(1) When the imaging apparatus 10-1 operates as the first imaging apparatus When the operation unit 12 receives an instruction from the user to shift to the imaging mode, the control unit 11 causes the
(2)撮影装置10−1が第2の撮影装置として動作する場合
制御部11は、第1の撮影装置から送信されてきた静止画像を受信すると、撮影部13を起動させる。そして、制御部11は、静止画像のうちの特定の領域の画像である特定領域画像を、ライブビュー画像に対する相対位置が受信した静止画像に対する相対位置と異なる位置になるように、ライブビュー画像と重畳させて表示部14に表示させる。なお、特定の領域は、ユーザが予め指定できるようにしておけばよい。具体的には例えば、受信した静止画像の左辺または右辺から任意の大きさの領域を特定の領域として操作部12を介してユーザが指定(操作)できるようにしておく。特定の領域の大きさとしては例えば、その静止画像の左辺または右辺から当該静止画像全体の30%程度の領域としてもよい。そして、操作部12にて特定の領域の指定が受け付けられると、特定の領域を示す情報、つまり、特定領域が、その静止画像のどの部分(位置や範囲等)であるかを制御部11が記憶するようにすればよい。また、左右だけではなく例えば、静止画像の上辺または下辺から任意の大きさの領域を特定の領域としてユーザが指定できるようにしてもよい。
(2) When the imaging device 10-1 operates as the second imaging device The control unit 11 activates the
また、表示部14に表示される特定領域画像は例えば、その画像の透過率を所定の割合にした透過画像である。
The specific area image displayed on the
次に、制御部11は、表示部14に表示されたライブビュー画像中に特定領域画像と同一の画像である同一画像が含まれる場合、その同一画像を検出する。そして、制御部11は、特定領域画像と同一画像とが重なり合うように撮影方向を誘導するためのガイド画像をライブビュー画像と重畳させて表示部14に表示させる。なお、このようにガイド画像を表示する技術については、上述した特開2004−304801号公報や、特開2009−60278号公報に記載されている。
Next, when the same image that is the same image as the specific area image is included in the live view image displayed on the
次に、操作部12にて画像の取り込みの指示(操作)が受け付けられると、制御部11は、ライブビュー画像として撮影している画像を第1の静止画像(第1の画像)として撮影部13に取り込ませ、取り込ませた第1の静止画像を記憶部16へ記憶させる。そして、制御部11は、記憶部16に記憶された第1の静止画像を読み出し、読み出した第1の静止画像と、受信した静止画像(以下、第2の静止画像(第2の画像))との重複領域を用いて第1の静止画像と第2の静止画像とを合成することで広角画像を生成する。そして、制御部11は、生成した広角画像を表示部14に表示させる。
Next, when an instruction (operation) for capturing an image is received by the operation unit 12, the control unit 11 captures an image captured as a live view image as a first still image (first image). 13 and the
以下に、上記のように構成された画像生成システムにおいて広角画像を生成する動作について説明する。ここでは、撮影装置10−1が第1の撮影装置として動作し、撮影装置10−2が第2の撮影装置として動作する場合を一例として説明する。 The operation for generating a wide-angle image in the image generation system configured as described above will be described below. Here, the case where the imaging device 10-1 operates as the first imaging device and the imaging device 10-2 operates as the second imaging device will be described as an example.
図4は、図1に示した画像生成システムにおいて広角画像を生成する対象となる被写体の一例と、その被写体に対する第1の撮影装置と第2の撮影装置との撮影方向の一例を示す図である。 FIG. 4 is a diagram illustrating an example of a subject that is a target for generating a wide-angle image in the image generation system illustrated in FIG. 1, and an example of a photographing direction of the first photographing device and the second photographing device with respect to the subject. is there.
ここでは被写体は図4に示すように、山や花、建物等を含む風景であるものとする。また、ここでは、撮影装置10−2は図4に示すように、被写体に向かって撮影装置10−1の左側に存在しているものとする。なお、図4において撮影装置10−1,10−2からの破線は、撮影装置10−1,10−2のそれぞれの画角を表している。 Here, it is assumed that the subject is a landscape including mountains, flowers, buildings, etc., as shown in FIG. Here, it is assumed that the photographing apparatus 10-2 is present on the left side of the photographing apparatus 10-1 toward the subject as shown in FIG. In FIG. 4, the broken lines from the imaging devices 10-1 and 10-2 represent the respective angles of view of the imaging devices 10-1 and 10-2.
図5は、図1〜図4に示した画像生成システムにおいて広角画像を生成する動作を説明するためのフローチャートである。 FIG. 5 is a flowchart for explaining an operation of generating a wide-angle image in the image generation system shown in FIGS.
まず、撮影装置10−1の操作部12は、撮影モードへの移行の指示をユーザから受け付ける(ステップS1)。 First, the operation unit 12 of the photographing apparatus 10-1 receives an instruction to shift to the photographing mode from the user (Step S1).
操作部12にて撮影モードへの移行の指示が受け付けられると、制御部11は、撮影部13に被写体の撮影を開始させる。これにより、表示部14にライブビュー画像が表示される(ステップS2)。
When the operation unit 12 receives an instruction to shift to the shooting mode, the control unit 11 causes the
次に、操作部12は、広角撮影モードの種類の選択をユーザから受け付ける(ステップS3)。なお、操作部12に、撮影モードへの移行のための操作と同時に広角撮影モードの種類の選択のための操作が行われるものも考えられる。その場合、それらの2つの操作を操作部12は同時(処理上のタイムラグがあるが)に受け付けるものであっても良い。 Next, the operation unit 12 receives a selection of the type of the wide-angle shooting mode from the user (step S3). It is also possible that the operation unit 12 is operated for selecting the type of the wide-angle shooting mode simultaneously with the operation for shifting to the shooting mode. In that case, the operation unit 12 may receive these two operations simultaneously (although there is a processing time lag).
次に、ユーザは、操作部12を操作することで、例えばシャッターボタンを押下することで、画像の取り込みの指示を行う。 Next, the user operates the operation unit 12 to instruct to capture an image, for example, by pressing a shutter button.
すると、操作部12は、画像の取り込みの指示をユーザから受け付ける(ステップS4)。 Then, the operation unit 12 receives an image capture instruction from the user (step S4).
操作部12にて画像の取り込みの指示が受け付けられると、制御部11は、撮影部13に、ライブビュー画像として撮影している画像を第2の静止画像として取り込ませ、取り込ませた第2の静止画像を記憶部16へ記憶させる(ステップS5)。
When the operation unit 12 receives an instruction for capturing an image, the control unit 11 causes the photographing
次に、制御部11は、記憶部16に記憶された第2の静止画像を読み出す。
Next, the control unit 11 reads the second still image stored in the
そして、制御部11は、読み出した第2の静止画像を通信部15から無線通信機能を用いて撮影装置10−2へ送信する(ステップS6)。
And the control part 11 transmits the read 2nd still image from the
撮影装置10−2の通信部15は、撮影装置10−1から無線通信機能を用いて送信されてきた第2の静止画像を受信する(ステップS7)。
The
図6は、図1〜図4に示した画像生成システムにおいて第2の撮影装置にて受信された第2の静止画像の一例を示す図である。 FIG. 6 is a diagram illustrating an example of a second still image received by the second imaging device in the image generation system illustrated in FIGS. 1 to 4.
図6に示すように第2の静止画像は、図4に示した被写体のうちの図中右側部分の画像である。そして、図6において特定領域画像51aとして示した領域(破線で囲んだ部分)が上述した特定領域画像の一例である。以下の説明の便宜上、特定領域画像51aには、花31が含まれている場合を例に挙げて説明する。
As shown in FIG. 6, the second still image is an image on the right side in the drawing of the subject shown in FIG. And the area | region (part enclosed with the broken line) shown as the specific area image 51a in FIG. 6 is an example of the specific area image mentioned above. For convenience of the following description, the specific region image 51a will be described by taking a case where the
次に、撮影装置10−2の制御部11は、撮影部13を起動させる。これにより、被写体の撮影が開始され、表示部14にライブビュー画像が表示される(ステップS8)。なお、ここでは、撮影装置10−1から送信されてきた第2の静止画像の受信をトリガにして撮影装置10−2の制御部11が撮影部13を起動しているが、第2の静止画像を受信した時には、すでに撮影装置10−2の撮影部13が起動しているものであってもかまわない。
Next, the control unit 11 of the photographing apparatus 10-2 activates the photographing
そして、制御部11は、表示部14において、特定領域画像を、ライブビュー画像に対する相対位置が第2の静止画像に対する相対位置と異なる位置になるように、ライブビュー画像と重畳させて表示部14に表示させる(ステップS9)。
Then, the control unit 11 causes the
次に、制御部11は、表示部14に表示されたライブビュー画像中から特定領域画像と同一の画像である同一画像を検出する(ステップS10)。この同一画像の検出は、一般的な類似画像検索等の技術を利用して行うものであっても良い。 Next, the control unit 11 detects the same image that is the same image as the specific region image from the live view image displayed on the display unit 14 (step S10). The detection of the same image may be performed using a technique such as a general similar image search.
そして、制御部11は、特定領域画像と同一画像とが重なり合うように撮影方向を誘導するためのガイド画像をライブビュー画像に重畳させて表示部14に表示させる(ステップS11)。
Then, the control unit 11 causes the
図7は、図2および図3に示した表示部14に表示されたライブビュー画像と特定領域画像とガイド画像との一例を示す図である。
FIG. 7 is a diagram illustrating an example of a live view image, a specific area image, and a guide image displayed on the
図7に示すように、表示部14に表示されているライブビュー画像に対する特定領域画像51bの相対位置は、図6に示した第2の静止画像に対する特定領域画像51aの相対位置とは異なる。
As shown in FIG. 7, the relative position of the specific area image 51b with respect to the live view image displayed on the
撮影装置10−2のユーザは、特定領域画像と同一画像との表示位置が重なり合うように、ガイド画像52(図7中、矢印)が指し示す方向に従って撮影方向を移動させる。そして、撮影装置10−2のユーザは、操作部12を操作することで、例えばシャッターボタンを押下することで、当該押下時のライブビュー画像の取り込みの指示を行う。 The user of the imaging device 10-2 moves the imaging direction according to the direction indicated by the guide image 52 (arrow in FIG. 7) so that the display positions of the specific area image and the same image overlap. Then, the user of the photographing apparatus 10-2 operates the operation unit 12 to instruct to capture a live view image at the time of pressing the shutter button, for example.
操作部12は、画像の取り込みの指示をユーザから受け付ける(ステップS12)。 The operation unit 12 receives an instruction for capturing an image from the user (step S12).
操作部12にて画像の取り込みの指示が受け付けられると、制御部11は、撮影部13に、ライブビュー画像として撮影している画像を第3の静止画像(第3の画像)として取り込ませ、取り込ませた第3の静止画像を記憶部16へ記憶させる(ステップS13)。
When the operation unit 12 receives an instruction to capture an image, the control unit 11 causes the photographing
図8は、図1〜図4に示した画像生成システムにおいて第2の撮影装置にて記憶した第3の静止画像の一例を示す図である。 FIG. 8 is a diagram illustrating an example of a third still image stored in the second imaging device in the image generation system illustrated in FIGS. 1 to 4.
図8に示すように第3の静止画像は、図4に示した被写体のうちの図中左側部分の画像である。 As shown in FIG. 8, the third still image is an image of the left portion of the subject shown in FIG.
次に、制御部11は、記憶部16に記憶された第3の静止画像を読み出し、読み出した第3の静止画像と、受信した第2の静止画像との重複領域を用いて、第2の静止画像と第3の静止画像とを合成することで広角画像を生成する(ステップS14)。図6と図8とを参照すると、花32を含む特定領域画像が第2の静止画像と第3の静止画像とで重複している。従って、制御部11は、この重複領域を用いて、つまり、第2の静止画像の重複領域と、第3の静止画像の重複領域とを重ね合わせた位置で、第2の静止画像と第3の静止画像とを合成することで広角画像を生成する。
Next, the control unit 11 reads out the third still image stored in the
図9は、第2の静止画像と第3の静止画像とから生成された広角画像の一例を示す図である。 FIG. 9 is a diagram illustrating an example of a wide-angle image generated from the second still image and the third still image.
図9に示すように、第2の静止画像61(図9中、一点鎖線で囲んだもの)の花31を含む特定領域画像と、第3の静止画像62(図9中、粗い破線で囲んだもの)の花31を含む特定領域画像とが重複した重複画像となり、互いの花31を含む特定領域画像を重ね合わせるように合成し、広角画像63(図9中、細かな破線で囲んだもの)を生成する。
As shown in FIG. 9, the specific region image including the
そして、制御部11は、生成した広角画像を表示部14に表示させる(ステップS15)。 And the control part 11 displays the produced | generated wide angle image on the display part 14 (step S15).
なお、広角画像は、撮影装置10−2から撮影装置10−1へ送信されるようにしてもよい。これにより、撮影装置10−1においても広角画像を表示することができる。 Note that the wide-angle image may be transmitted from the imaging device 10-2 to the imaging device 10-1. Thereby, a wide-angle image can be displayed also in the imaging device 10-1.
なお、上述した例では、第2の静止画像が、広角画像を生成する撮影装置とは異なる他の撮影装置から送信されてくる場合を例に挙げて説明したが、例えば、インターネット上から取得して当該撮影装置の記憶部16にすでに記憶しているものや、当該撮影装置が撮影した画像であってすでに記憶部16に記憶しているものであっても良い。
In the above-described example, the case where the second still image is transmitted from another imaging device different from the imaging device that generates the wide-angle image has been described as an example. However, for example, the second still image is acquired from the Internet. The image may be already stored in the
これにより、また、広角画像を得るために、複数の画像をパーソナルコンピュータ等にコピーするとともに、それら複数の画像を合成するための専用のソフトウェアをそのパーソナルコンピュータにインストールする必要がない。従って、広角画像を手軽に得ることが可能となる。 Thereby, in order to obtain a wide-angle image, it is not necessary to copy a plurality of images to a personal computer or the like and to install dedicated software for synthesizing the plurality of images in the personal computer. Therefore, a wide-angle image can be easily obtained.
また、撮影者は、広角画像を得るために、撮影装置を保持しつつ撮影方向を変えながら、連続してシャッターボタンを押下していく必要がない。これにより、手ぶれの度合いが大きくなってしまうことがなく、高品質の広角画像を得ることができる。 In addition, the photographer does not need to continuously press the shutter button while changing the shooting direction while holding the shooting device in order to obtain a wide-angle image. Thereby, the degree of camera shake does not increase and a high-quality wide-angle image can be obtained.
また、上述した処理を用いて、多くの静止画像を合成すれば、超広角画像を得ることも可能となる。 Further, if a large number of still images are synthesized using the above-described processing, it is possible to obtain a super-wide-angle image.
なお、本実施形態においては図4に示すように、被写体に対して右側の撮影装置10−1で被写体の右側を撮影し、被写体に対して左側の撮影装置10−2で被写体の左側を撮影したが、複数の撮影装置のそれぞれが撮影する方向は、これに限定されない。例えば、被写体に対して右側の撮影装置で被写体の左側を撮影し、被写体に対して左側の撮影装置で被写体の右側を撮影しても、広角画像を生成することができる。 In this embodiment, as shown in FIG. 4, the right side of the subject is photographed by the right side photographing device 10-1 and the left side of the subject is photographed by the left side photographing device 10-2. However, the direction in which each of the plurality of imaging devices captures images is not limited to this. For example, it is possible to generate a wide-angle image by photographing the left side of the subject with the right photographing device and photographing the right side of the subject with the left photographing device.
なお、本実施形態において撮影装置は、デジタルカメラを想定していたが、撮影装置としては、デジタルカメラだけではなく例えば、撮影機能を備えた携帯電話機や、スマートフォン等であってもよい。また、例えば、撮影機能および通信機能を備えた携帯音楽プレーヤーや、携帯ゲーム機、パーソナルコンピュータ等であってもよい。 In the present embodiment, the photographing apparatus is assumed to be a digital camera. However, the photographing apparatus may be not only a digital camera but also a mobile phone having a photographing function, a smartphone, or the like. For example, a portable music player, a portable game machine, a personal computer, etc. provided with the imaging | photography function and the communication function may be sufficient.
また、本実施形態では、第1の撮影装置にて記憶した画像を第2の撮影装置へ送信し、第2の撮影装置において広角画像を生成する場合について説明したが、第2の撮影装置にて記憶した画像を第1の撮影装置へ送信し、第1の撮影装置で広角画像を生成するようにしてもよい。 In the present embodiment, the case where the image stored in the first imaging device is transmitted to the second imaging device and a wide-angle image is generated in the second imaging device has been described. The stored image may be transmitted to the first photographing device, and the first photographing device may generate a wide-angle image.
また、本実施形態では、第1の撮影装置と第2の撮影装置との相対的な位置関係が水平方向(子午線に垂直の方向)に異なる場合について説明したが、第1の撮影装置と第2の撮影装置との相対的な位置関係がこれ以外の場合であっても良い。つまり、第1の撮影装置と第2の撮影装置との相対的な位置関係が、垂直方向(子午線の方向)や斜め方向等に異なる場合でも、広角画像を生成することができる。 In the present embodiment, the case where the relative positional relationship between the first imaging device and the second imaging device is different in the horizontal direction (the direction perpendicular to the meridian) has been described. The relative positional relationship with the second photographing apparatus may be other than this. That is, a wide-angle image can be generated even when the relative positional relationship between the first imaging device and the second imaging device differs in the vertical direction (the direction of the meridian), the oblique direction, or the like.
また、本実施形態では、第2の撮影装置は、第2の撮影装置のユーザから画像の取り込みの指示を受け付けた場合に、画像を取り込む場合について説明した。これ以外にも、第2の撮影装置において、特定領域画像と同一画像とが重なり合ったとき、または、重なり合ったとみなされる状態となったときに、自動的に画像を取り込むようにしてもよい。 Further, in the present embodiment, a case has been described in which the second image capturing device captures an image when receiving an image capture instruction from a user of the second image capturing device. In addition to this, in the second photographing apparatus, when the specific area image and the same image overlap each other or when it is assumed that they overlap each other, the images may be automatically captured.
また、本実施形態では、第1の撮影装置から第2の撮影装置へ画像を送信する場合について説明したが、第1の撮影装置における撮影のAE(露出)や、AWB(ホワイトバランス)、ズーム、フォーカス等の撮影条件に関する情報等も第2の撮影装置に送信するようにしてもよい。これにより、第2の撮影装置では、これらの情報に基づいて撮影条件を設定することが可能となる。 In the present embodiment, the case where an image is transmitted from the first photographing apparatus to the second photographing apparatus has been described. Information regarding shooting conditions such as focus may be transmitted to the second imaging apparatus. Thereby, in the 2nd imaging device, it becomes possible to set imaging conditions based on these information.
また、本実施形態では、第1の撮影装置と第2の撮影装置とが同じ機能を有する場合を前提として説明した。例えば第1の撮影装置と第2の撮影装置とで画角が異なっている場合、第1の撮影装置と第2の撮影装置との間で、それぞれの画角を示す画角情報を交換することで、第1の撮影装置と第2の撮影装置との画角を予め一致させておけばよい。 Further, in the present embodiment, the description has been made on the assumption that the first imaging device and the second imaging device have the same function. For example, when the angle of view is different between the first imaging device and the second imaging device, the angle of view information indicating each angle of view is exchanged between the first imaging device and the second imaging device. Thus, the angle of view of the first imaging device and the second imaging device may be matched in advance.
また、本実施形態では、第1の撮影装置にて記憶した画像と、第2の撮影装置にて記憶した画像との間に重複領域があることを前提として説明した。第1の撮影装置にて記憶した画像と、第2の撮影装置にて記憶した画像との間に重複領域がない場合、広角画像を生成する撮影装置が、インターネット上や写真ライブラリから、それらの間を埋め合わせる画像を取得し、取得した画像も含めて広角画像を合成するようにしてもよい。 Further, in the present embodiment, the description has been made on the assumption that there is an overlapping area between the image stored in the first image capturing device and the image stored in the second image capturing device. When there is no overlap area between the image stored in the first image capturing device and the image stored in the second image capturing device, the image capturing device that generates a wide-angle image is stored on the Internet or from a photo library. An image that compensates for the gap may be acquired, and a wide-angle image including the acquired image may be synthesized.
また、撮影装置の演算性能が十分でない場合には、第1の撮影装置および第2の撮影装置にて記憶した画像を所定のサーバへ送信し、そのサーバにて広角画像を生成するようにしてもよい。この場合、サーバは、生成された広角画像を、第1の撮影装置および第2の撮影装置、または、第1の撮影装置もしくは第2の撮影装置へ送信すればよい。 In addition, when the computing performance of the photographing device is not sufficient, the image stored in the first photographing device and the second photographing device is transmitted to a predetermined server, and a wide-angle image is generated by the server. Also good. In this case, the server may transmit the generated wide-angle image to the first imaging device and the second imaging device, or the first imaging device or the second imaging device.
また、生成された広角画像は横長の画像となるため、撮影装置において広角画像を表示する場合には、一画面におさまるように縮小して表示するようにしてもよい。また、スクロールすることで広角画像を少しずつ左右に動かしながら表示できるようにしてよい。また、垂直方向に合成された広角画像については、スクロールすることで垂直方向に広角画像を少しずつ動かして表示できるようにしてもよい。 In addition, since the generated wide-angle image is a horizontally long image, when the wide-angle image is displayed on the photographing apparatus, the image may be reduced and displayed so as to fit on one screen. Further, by scrolling, the wide-angle image may be displayed while being moved little by little to the left and right. In addition, the wide-angle image synthesized in the vertical direction may be displayed by moving the wide-angle image little by little in the vertical direction by scrolling.
上述した撮影装置10−1,10−2に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム(以下、プログラムと称する)を撮影装置10−1,10−2にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを情報処理装置100に読み込ませ、実行するものであっても良い。撮影装置10−1,10−2にて読取可能な記録媒体とは、フロッピー(登録商標)ディスク、光磁気ディスク、DVD、CDなどの移設可能な記録媒体の他、撮影装置10−1,10−2に内蔵された記憶部16、ROM、RAM等のメモリやHDD等を指す。この記録媒体に記録されたプログラムは、撮影装置10−1,10−2に設けられた制御部11にて読み込まれ、制御部11の制御によって、上述したものと同様の処理が行われる。ここで、制御部11は、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
The processing performed by each component provided in the above-described photographing apparatuses 10-1 and 10-2 may be performed by a logic circuit that is produced according to the purpose. Further, a computer program (hereinafter referred to as a program) in which processing contents are described as a procedure is recorded on a recording medium readable by the photographing apparatuses 10-1 and 10-2, and the program recorded on the recording medium is processed as information processing. It may be read by the apparatus 100 and executed. The recording media that can be read by the photographing apparatuses 10-1 and 10-2 include transferable recording media such as a floppy (registered trademark) disk, a magneto-optical disk, a DVD, and a CD, as well as the photographing apparatuses 10-1 and 10. -2 indicates a
10−1,10−2 撮影装置
11 制御部
12 操作部
13 撮影部
14 表示部
15 通信部
16 記憶部
31 花
51a,51b 特定領域画像
52 ガイド画像
61 第2の静止画像
62 第1の静止画像
63 広角画像
10-1, 10-2 Image capturing apparatus 11 Control unit 12
Claims (5)
前記撮影部が撮影している第1の画像を表示する表示部と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて前記表示部に表示させ、前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を前記表示部に表示させ、前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する制御部とを有する撮影装置。 A shooting section;
A display unit for displaying a first image taken by the photographing unit;
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. When the same image that is the same image as the specific area image is included in the first image, the same image is displayed so as to overlap the specific area image. A guide image that guides the shooting direction is displayed on the display unit, and the third image and the second image that are shot in a state where the same image and the specific area image are displayed in an overlapping manner are displayed on the same screen. An imaging apparatus comprising: a control unit configured to combine an image and the specific area image of the second image at a position where the image overlaps.
前記第2の画像が当該撮影装置以外の装置から送信されてきた場合、該送信されてきた第2の画像を受信する通信部を有し、
前記制御部は、前記通信部が受信した第2の画像を用いることを特徴する撮影装置。 The imaging device according to claim 1,
When the second image is transmitted from a device other than the image capturing device, the communication device has a communication unit that receives the transmitted second image;
The control device uses the second image received by the communication unit.
前記第2の画像を記憶する記憶部を有し、
前記制御部は、前記記憶部から読み出した第2の画像を用いることを特徴する撮影装置。 The imaging device according to claim 1,
A storage unit for storing the second image;
The control unit uses a second image read from the storage unit.
撮影している第1の画像を表示する処理と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて表示する処理と、
前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を表示する処理と、
前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する処理とを行う画像生成方法。 A process of shooting, a process of displaying the first image being shot,
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. Processing to overlay and display,
When the same image that is the same image as the specific area image is included in the first image, a guide image that guides the shooting direction is displayed so that the same image is displayed overlapping the specific area image. Processing,
The third image and the second image captured in a state where the same image and the specific area image are displayed in an overlapping manner, and the specific area image of the same image and the second image Image generating method for performing processing to synthesize at a position where the two overlap.
撮影する手順と
撮影している第1の画像を表示する手順と、
第2の画像のうち特定領域の画像である特定領域画像の前記第1の画像に対する相対位置が、前記第2の画像に対する相対位置とは異なるように、該特定領域画像を前記第1の画像に重ねて表示する手順と、
前記第1の画像の中に前記特定領域画像と同一の画像である同一画像が含まれる場合、前記同一画像が前記特定領域画像と重なって表示されるように撮影方向を導くガイド画像を表示する手順と、
前記同一画像と前記特定領域画像とが重なって表示された状態で撮影された第3の画像と前記第2の画像とを、前記同一画像と前記第2の画像のうちの前記特定領域画像とが重なる位置で合成する手順とを実行させるためのプログラム。 On the computer,
A procedure for shooting, a procedure for displaying the first image being shot,
Among the second images, the specific region image is the first image so that the relative position of the specific region image that is an image of the specific region with respect to the first image is different from the relative position with respect to the second image. On top of the display,
When the same image that is the same image as the specific area image is included in the first image, a guide image that guides the shooting direction is displayed so that the same image is displayed overlapping the specific area image. Procedure and
The third image and the second image captured in a state where the same image and the specific area image are displayed in an overlapping manner, and the specific area image of the same image and the second image For executing the procedure of synthesizing at the position where the two overlap.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012032642A JP2013168909A (en) | 2012-02-17 | 2012-02-17 | Imaging device, image generation method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012032642A JP2013168909A (en) | 2012-02-17 | 2012-02-17 | Imaging device, image generation method, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2013168909A true JP2013168909A (en) | 2013-08-29 |
Family
ID=49178970
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012032642A Pending JP2013168909A (en) | 2012-02-17 | 2012-02-17 | Imaging device, image generation method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2013168909A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150078752A (en) * | 2013-12-31 | 2015-07-08 | 삼성전자주식회사 | Method for photographing based on WiFi Direct and electronic device performing thereof |
JP2020171040A (en) * | 2015-09-18 | 2020-10-15 | ソニー株式会社 | Image processing device, image processing method, program and image pickup device |
-
2012
- 2012-02-17 JP JP2012032642A patent/JP2013168909A/en active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150078752A (en) * | 2013-12-31 | 2015-07-08 | 삼성전자주식회사 | Method for photographing based on WiFi Direct and electronic device performing thereof |
KR102150905B1 (en) * | 2013-12-31 | 2020-09-02 | 삼성전자주식회사 | Method for photographing based on WiFi Direct and electronic device performing thereof |
JP2020171040A (en) * | 2015-09-18 | 2020-10-15 | ソニー株式会社 | Image processing device, image processing method, program and image pickup device |
US11381740B2 (en) | 2015-09-18 | 2022-07-05 | Sony Group Corporation | Image processing apparatus, image processing method, program, and image pickup system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6106764B2 (en) | Imaging apparatus and time-lapse imaging method | |
JP5681329B2 (en) | Imaging apparatus and image display method | |
JP6302564B2 (en) | Movie editing apparatus, movie editing method, and movie editing program | |
WO2014071840A1 (en) | Method and device for taking photo and video | |
JP5740045B2 (en) | Image processing apparatus and method, and imaging apparatus | |
WO2013155804A1 (en) | Photograph shooting method and electronic device | |
JP5889441B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and image processing program | |
WO2014097734A1 (en) | Image processing device, imaging device, image processing method, and image processing program | |
JPWO2014045689A1 (en) | Image processing apparatus, imaging apparatus, program, and image processing method | |
JP2005328497A (en) | Image pickup apparatus and image pickup method | |
WO2014077065A1 (en) | Image processor, image-capturing device, and image processing method and program | |
JP5687803B2 (en) | Image processing apparatus and method, and imaging apparatus | |
JP5955417B2 (en) | Image processing apparatus, imaging apparatus, program, and image processing method | |
JPWO2014054498A1 (en) | Imaging apparatus and image display method | |
JP4635477B2 (en) | Image photographing apparatus, pseudo three-dimensional image generation method, and program | |
JP2012015619A (en) | Stereoscopic display device and stereoscopic photographing device | |
JP2013168909A (en) | Imaging device, image generation method, and program | |
JP5972302B2 (en) | Operator terminal, portable terminal, instruction transmission method, program for operator terminal | |
JP2012124614A (en) | Imaging apparatus and imaging apparatus control method | |
JP2012073512A (en) | Photographing device and program | |
JPWO2015111269A1 (en) | Image processing apparatus, imaging apparatus, image processing method, and image processing program | |
JP5934844B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and image processing program | |
JP2013126180A (en) | Video apparatus | |
WO2014045741A1 (en) | Image processing device, imaging device, image processing method, and image processing program | |
JP6332827B2 (en) | Imaging apparatus, imaging method, and program |