JP5641352B2 - Image processing apparatus, image processing method, and program - Google Patents
Image processing apparatus, image processing method, and program Download PDFInfo
- Publication number
- JP5641352B2 JP5641352B2 JP2011084376A JP2011084376A JP5641352B2 JP 5641352 B2 JP5641352 B2 JP 5641352B2 JP 2011084376 A JP2011084376 A JP 2011084376A JP 2011084376 A JP2011084376 A JP 2011084376A JP 5641352 B2 JP5641352 B2 JP 5641352B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- imaging
- panoramic
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
Description
本発明は、デジタルカメラや撮像機能を有する携帯電話などの画像処理装置、画像処理方法、及びプログラムに関する。 The present invention relates to an image processing apparatus such as a digital camera or a mobile phone having an imaging function, an image processing method, and a program.
デジタルカメラや、撮像機能を有する携帯電話などにおいて、撮像画角の限界は、レンズの焦点距離、撮像素子のサイズなど、装置本体が備えるハードスペックに依存している。そして、このような撮像画角の限界の問題に対しては、撮像装置の中には、広角撮像用のコンバージョンレンズなどを、既存のレンズ前に装着したり(例えば、特許文献1、2、3参照)、複数のレンズを予め備え、撮像目的に応じてレンズを切り替えることで対処していた(例えば、特許文献4参照)。
In a digital camera, a mobile phone having an imaging function, and the like, the limit of the imaging angle of view depends on hardware specifications included in the apparatus main body, such as the focal length of the lens and the size of the imaging element. For such a problem of the limit of the imaging angle of view, a conversion lens for wide-angle imaging or the like is mounted in front of an existing lens in the imaging apparatus (for example,
しかしながら、上記従来技術では、広角撮像を行うために、いちいち広角撮像用のコンバージョンレンズを装着したり、撮像目的に応じてレンズを切り替えたりしなくてはならず、操作性や、コストの面で問題があった。また、これら広角撮像用のコンバージョンレンズや、切り替え可能なレンズを用いたとしても、撮影者が希望する広角画像を得ることは難しいという問題があった。 However, in the above prior art, in order to perform wide-angle imaging, it is necessary to attach a conversion lens for wide-angle imaging one by one, or switch the lens according to the imaging purpose, and in terms of operability and cost There was a problem. In addition, there is a problem that it is difficult to obtain a wide-angle image desired by the photographer even if these conversion lenses for wide-angle imaging and switchable lenses are used.
そこで本発明は、レンズ交換を行うことなく、容易に、かつ効率的に広角画像の生成に必要な画像を得ることができる画像処理装置、画像処理方法、及びプログラムを提供することを目的とする。 Therefore, an object of the present invention is to provide an image processing apparatus, an image processing method, and a program that can easily and efficiently obtain an image necessary for generating a wide-angle image without exchanging lenses. .
この発明は、複数の画像を合成することにより各々生成された、一方向に長い複数のパノラマ画像を取得する取得手段と、前記取得手段により取得された複数のパノラマ画像同士の撮像範囲のサイズを比較する比較手段と、前記比較手段による比較の結果、前記撮像範囲のサイズの小さい方のパノラマ画像に合わせたサイズになるように、且つ、前記複数のパノラマ画像同士を前記一方向に対し直交方向に合成して1つの広角画像を生成する広角画像生成手段とを備えることを特徴とする画像処理装置である。 The present invention provides an acquisition unit that acquires a plurality of panoramic images that are each generated by combining a plurality of images and that is long in one direction, and a size of an imaging range between the plurality of panoramic images acquired by the acquisition unit. As a result of the comparison by the comparison means and the comparison means, the panorama images are arranged in a direction orthogonal to the one direction so that the panorama images have a size matching the smaller panorama image of the imaging range. And a wide-angle image generating means for generating a single wide-angle image by combining with the image processing apparatus.
この発明によれば、レンズ交換を行うことなく、容易に、かつ効率的に広角画像の生成に必要な画像を得ることができるという利点が得られる。 According to the present invention, there is an advantage that an image necessary for generating a wide-angle image can be obtained easily and efficiently without exchanging lenses.
以下、本発明の実施の形態を、図面を参照して説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
A.第1実施形態
A−1.第1実施形態の構成
図1は、本発明の第1実施形態によるデジタルカメラの構成を示すブロック図である。図において、デジタルカメラ1は、撮像レンズ2、レンズ駆動部3、絞り兼用シャッタ4、CCD5、TG(Timing
Generator)6、ユニット回路7、画像処理部8、CPU11、DRAM12、メモリ13、フラッシュメモリ14、画像表示部15、キー入力部16、カードI/F17、及びメモリ・カード18を備えている。
A. First embodiment A-1. Configuration of First Embodiment FIG. 1 is a block diagram showing a configuration of a digital camera according to a first embodiment of the present invention. In the figure, a
Generator) 6, unit circuit 7, image processing unit 8,
撮像レンズ2は、フォーカスレンズ、ズームレンズなどを含み、レンズ駆動部3が接続されている。レンズ駆動部3は、撮像レンズ2を構成するフォーカスレンズ、ズームレンズをそれぞれ光軸方向に駆動させるモータと、CPU11からの制御信号に従ってフォーカスモータ、ズームモータを駆動させるフォーカスモータドライバ、ズームモータドライバから構成されている。
The
絞り4は、図示しない駆動回路を含み、駆動回路はCPU11から送られてくる制御信号に従って絞り4を動作させる。該絞り4は、撮像レンズ2から入ってくる光の量を制御する。CCD(撮像素子)5は、撮像レンズ2、絞り4を介して投影された被写体の光を電気信号に変換し、撮像信号としてユニット回路7に出力する。また、CCD5は、TG6によって生成された所定周波数のタイミング信号に従って駆動される。
The diaphragm 4 includes a drive circuit (not shown), and the drive circuit operates the diaphragm 4 in accordance with a control signal sent from the
ユニット回路7は、CCD5から出力される撮像信号を相関二重サンプリングして保持するCDS(Correlated
Double Sampling)回路、そのサンプリング後の撮像信号の自動利得調整を行うAGC(Automatic
Gain Control)回路、その自動利得調整後のアナログの撮像信号をデジタル信号に変換するA/D変換器から構成されている。CCD5の撮像信号は、ユニット回路7を経てデジタル信号として画像処理部8に送られる。なお、ユニット回路7は、TG6によって生成された所定周波数のタイミング信号に従って駆動される。
The unit circuit 7 is a CDS (Correlated) that holds the imaging signal output from the CCD 5 by correlated double sampling.
Double Sampling) circuit, AGC (Automatic) for automatic gain adjustment of the imaged signal after sampling
(Gain Control) circuit and an A / D converter for converting an analog image pickup signal after the automatic gain adjustment into a digital signal. The imaging signal of the CCD 5 is sent to the image processing unit 8 as a digital signal through the unit circuit 7. The unit circuit 7 is driven according to a timing signal having a predetermined frequency generated by the TG 6.
画像処理部8は、ユニット回路7から送られてきた画像データの画像処理(画素補間処理、γ補正、輝度色差信号の生成、ホワイトバランス処理、露出補正処理等)、画像データの圧縮・伸張(例えば、JPEG形式やM−JPEG形式又はMPEG形式の圧縮・伸張)の処理、複数の撮像画像を合成する処理などを行う。なお、画像処理部8は、TG6によって生成された所定周波数のタイミング信号に従って駆動される。 The image processing unit 8 performs image processing (pixel interpolation processing, γ correction, luminance color difference signal generation, white balance processing, exposure correction processing, etc.) of image data sent from the unit circuit 7, and compression / decompression of image data ( For example, JPEG format, M-JPEG format, or MPEG format compression / expansion processing, processing of combining a plurality of captured images, and the like are performed. The image processing unit 8 is driven according to a timing signal having a predetermined frequency generated by the TG 6.
CPU11は、デジタルカメラ1の各部を制御するワンチップマイコンである。特に、本第1実施形態では、ユーザがデジタルカメラ1を動かしている間に、CPU11は、所定の周期(時間間隔)で複数枚の画像を連写し、撮像した複数の画像を、一部が重複するように(例えば、αブレンドを用いて)合成していき、広角で撮像したような1枚の合成画像を生成すべく各部を制御する。なお、画像合成の詳細については後述する。
The
DRAM12は、CCD5によって撮像された後、CPU11に送られてきた画像データを一時記憶するバッファメモリとして使用されるとともに、CPU11のワーキングメモリとして使用される。メモリ13は、CPU11によるデジタルカメラ1の各部の制御に必要なプログラム、及び各部の制御に必要なデータが記録されており、CPU11は、このプログラムに従って処理を行う。フラッシュメモリ14や、メモリ・カード18は、CCD5によって撮像された画像データなどを保存しておく記録媒体である。
The
画像表示部15は、カラーLCDとその駆動回路を含み、撮像待機状態にあるときには、CCD5によって撮像された被写体をスルー画像として表示し、記録画像の再生時には、フラッシュメモリ14や、メモリ・カード23から読み出され、伸張された記録画像を表示させる。キー入力部16は、シャッタSW、ズームSW、モードキー、SETキー、十字キー等の複数の操作キーを含み、ユーザのキー操作に応じた操作信号をCPU11に出力する。カードI/F17には、デジタルカメラ1本体の図示しないカードスロットを介してメモリ・カード18が着脱自在に装着されている。
The
図2は、通常の撮像モードを説明するための概念図である。デジタルカメラ1で、通常の撮像モードで撮影する場合には、図2に示すように、当該デジタルカメラ1の撮像系の画角Sでしか撮影できない。
FIG. 2 is a conceptual diagram for explaining a normal imaging mode. When the
図3は、本第1実施形態によるデジタルカメラ1でのパノラマ撮像モードを説明するための概念図である。また、図4は、本第1実施形態によるデジタルカメラ1でのパノラマ撮像モードでのデジタルカメラ1の動き(ユーザによる動かし方)を示す概念図である。
FIG. 3 is a conceptual diagram for explaining a panoramic imaging mode in the
ユーザは、所望する景色に対して、画角の長手方向を縦方向になるように、デジタルカメラ1を縦方向に構え、左上端でシャッタSWを押下(半押し→全押し)し、図3に示す矢印のように、まず、シャッタSWを押下して水平方向に動かし(状態#1:図4参照)、所定の位置で垂直方向に動かし(状態#2:図4参照)、さらに、水平方向に動かす(状態#3:図4参照)。デジタルカメラ1では、所定のタイミングで画像を順次撮像していく。
The user holds the
デジタルカメラ1では、水平方向に動かしている状態#1で撮像した複数の画像から第1のパノラマ画像を合成し、同じく水平方向に動かしている状態#3で撮影した複数の画像から第2のパノラマ画像を合成し、第1のパノラマ画像と第2のパノラマ画像とを合成し、最終的に、所望する広角画像(図3の下側)を生成する。なお、垂直方向に動かしている状態#2では、パノラマ画像の生成に必要としないので、画像を撮像することはない。
In the
A−2.第1実施形態の動作
次に、上述した第1実施形態の動作について説明する。
図5は、本第1実施形態によるデジタルカメラ1の動作を説明するためのフローチャートである。まず、CPU11は、シャッタSWが半押しされると(ステップS10)、AF(オートフォーカス)処理を実行し(ステップS12)、シャッタSWが全押しされると(ステップS14)、所定の周期(時間間隔)で複数枚の画像を連写する(ステップS16)。なお、連写処理の詳細については後述する。
A-2. Operation of First Embodiment Next, the operation of the first embodiment described above will be described.
FIG. 5 is a flowchart for explaining the operation of the
このとき、ユーザは、図3に示すように、所望する景色に対して、画角の長手方向が縦方向になるように、デジタルカメラ1を縦方向に構え、左上でシャッタSWを押下(半押し→全押し)し、図3に示す矢印のように、デジタルカメラ1を、まず、シャッタSWを押下して水平方向(左端から右方向)に動かし(状態#1:図4参照)、所定の位置で垂直方向(下方向)に動かし(状態#2:図4参照)、さらに、水平方向(左方向)に動かす(状態#3:図4参照)。そして、連写が終了したか否か、すなわち、パノラマ撮影が終了したか否かを判断し(ステップS18)、連写が終了していなければ、ステップS16に戻り、連写処理を継続する。
At this time, as shown in FIG. 3, the user holds the
一方、連写が終了した場合、すなわち、パノラマ撮影が終了した場合には(ステップS18のYES)、左端から右方向に動かしている状態#1で撮像した複数の画像から第1のパノラマ画像を合成し、右端から左方向に動かしている状態#3で撮影した複数の画像から第2のパノラマ画像を合成し、第1のパノラマ画像と第2のパノラマ画像とを合成し、最終的に、所望する広角画像を生成する(ステップS20)。なお、合成処理の詳細については後述する。
On the other hand, when the continuous shooting is finished, that is, when panoramic photography is finished (YES in step S18), the first panoramic image is taken from a plurality of images taken in the
図6は、本第1実施形態によるデジタルカメラ1での連写処理の動作を説明するためのフローチャートである。まず、CPU11は、1つ前の撮像画像と現在の撮影画像との位置合わせを行い(ステップS30)、現在の状態が状態#1、#2、#3のいずれであるかを判断する(ステップS32)。
FIG. 6 is a flowchart for explaining the operation of the continuous shooting process in the
そして、ユーザが、デジタルカメラ1を、水平方向(左端から右方向)に動かしている状態#1である場合には(ステップS32の状態#1)、撮像した画像をパノラマ作成用の画像として保存する(ステップS34)。次に、デジタルカメラ1が所定の位置(この場合、状態#1での終位置である右端)に到達したか否かを判断する(ステップS36)。そして、所定の位置に達していない場合には(ステップS36のNO)、現在の状態#1を変更することなく、当該処理を終了し、図5に示すメインルーチンに戻る。
When the user moves the
以下、デジタルカメラ1が所定の位置(この場合、状態#1での終位置である右端)に達するまで、ステップS34で、撮像した画像をパノラマ作成用の画像として保存していく。そして、デジタルカメラ1が所定の位置に到達すると(ステップS36のYES)、状態#1から状態#2へ移行するので、現在の状態を状態#2に変更する(ステップS38)。
Thereafter, until the
次に、ユーザが、デジタルカメラ1を、垂直方向(下方向)に動かしている状態#2に移行すると(ステップS32の状態#2)、取り込んだ画像をパノラマ作成用の画像として保存することなく(ステップS40)、デジタルカメラ1が所定の位置(この場合、状態#2での終位置である下部右端)に到達したか否かを判断する(ステップS42)。そして、所定の位置に達していない場合には(ステップS42のNO)、現在の状態#2を変更することなく、当該処理を終了し、図5に示すメインルーチンに戻る。
Next, when the user shifts to the
以下、デジタルカメラ1が所定の位置(この場合、状態#2での終位置である下部右端)に達するまで、パノラマ作成用の画像として保存せずにそのまま動作を継続し、デジタルカメラ1が所定の位置に到達すると(ステップS42のYES)、状態#2から状態#3へ移行するので、現在の状態を状態#3に変更する(ステップS44)。
Thereafter, until the
次に、ユーザが、デジタルカメラ1を、水平方向(右から左方向)に動かしている状態#3に移行すると(ステップS32の状態#3)、撮像した画像をパノラマ作成用の画像として保存する(ステップS46)。そして、デジタルカメラ1が所定の位置(この場合、状態#3での終位置である左端)に到達したか否かを判断する(ステップS48)。そして、所定の位置に達していない場合には(ステップS48のNO)、現在の状態#3を変更することなく、当該処理を終了し、図5に示すメインルーチンに戻る。
Next, when the user moves to the state # 3 in which the
以下、デジタルカメラ1が所定の位置(この場合、状態#3での終位置である左端)に達するまで、ステップS46で、撮像した画像をパノラマ作成用の画像として保存していく。そして、デジタルカメラ1が所定の位置に到達すると(ステップS48のYES)、連写終了とする(ステップS50)。
Thereafter, until the
上述した動作の結果、ユーザが、デジタルカメラ1を、左端から右方向に動かしている状態#1で撮像された複数の画像と、デジタルカメラ1を、右から左方向に動かしている状態#3で撮像された複数の画像とが得られる。次に、これら撮像された複数の画像を用いて最終的な広角画像を得る方法について説明する。
As a result of the above-described operation, the user moves the
図7は、本第1実施形態によるデジタルでの合成処理の動作を説明するためのフローチャートである。また、図8は、本第1実施形態によるデジタルでの合成処理の動作を説明するための概念図である。まず、CPU11は、パノラマ作成用の画像を取得し(ステップS60)、その画像の撮影時の状態を判別する(ステップS62)。その画像の撮影時の状態が状態#1である場合には、パノラマ#1として合成処理を行う(ステップS64)。
FIG. 7 is a flowchart for explaining the operation of the digital synthesizing process according to the first embodiment. FIG. 8 is a conceptual diagram for explaining the operation of digital synthesis processing according to the first embodiment. First, the
その後、パノラマ合成が終了したか否かを判断し(ステップS68)、終了していなければ、ステップS60に戻る。以下、図8(a)に示すように、状態#1で撮影された複数の画像FR1〜FR6を一部が重複するように(例えば、αブレンドを用いて)合成し、パノラマ#1を作成する。
Thereafter, it is determined whether or not the panorama synthesis has ended (step S68). If not, the process returns to step S60. Hereinafter, as shown in FIG. 8A, a plurality of images FR1 to FR6 photographed in the
一方、取得したパノラマ作成用の画像が状態#2で撮像された画像である場合には、パノラマ#2として合成処理を行う(ステップS66)。その後、パノラマ合成が終了したか否かを判断し(ステップS68)、終了していなければ、ステップS60に戻る。以下、図8(b)に示すように、状態#2で撮影された複数の画像FL1〜FL6を一部が重複するように(例えば、αブレンドを用いて)合成し、パノラマ#2を作成する。
On the other hand, when the acquired panorama creation image is an image captured in the
次に、パノラマ合成が終了した場合には(ステップS68のYES)、図8(c)に示すように、上記パノラマ#1の下側の所定領域とパノラマ#2の上側の所定領域とを、一部が重複するように(例えば、αブレンドを用いて)合成し、1つの広角画像を作成する(ステップS70)。
Next, when the panorama composition is completed (YES in step S68), as shown in FIG. 8C, a predetermined area on the lower side of the
なお、上述した第1実施形態においては、キー入力部から予め広角画像の撮像範囲を指定しておくと、指定された撮像範囲に基づく、サイズのパノラマ画像を生成するようにしてもよい。また、画像処理部8において、パノラマ画像同士を合成する際に、合成すべきパノラマ画像同士の撮像範囲を比較し、該比較の結果、撮像範囲が小さい方のパノラマ画像に他のパノラマ画像の撮像範囲を合わせて合成することで、最終的な広角画像を生成するようにしてもよい。 In the first embodiment described above, when a wide-angle image capturing range is designated in advance from the key input unit, a panoramic image having a size based on the designated capturing range may be generated. In addition, when the panorama images are combined in the image processing unit 8, the imaging ranges of the panoramic images to be combined are compared, and as a result of the comparison, another panoramic image is captured in the panoramic image with the smaller imaging range. A final wide-angle image may be generated by combining the ranges.
上述した第1実施形態によれば、レンズ交換を行うことなく、容易に、かつ効率的に広角画像の生成に必要な画像を得ることができる。 According to the first embodiment described above, an image necessary for generating a wide-angle image can be obtained easily and efficiently without exchanging lenses.
B.第2実施形態
次に、本発明の第2実施形態について説明する。
本第2実施形態では、パノラマ撮影時にユーザがデジタルカメラ1を動かす際の、状態#1から状態#2、状態#2から状態#3へと移動方向の変化を、カメラ要因として、移動量、方位センサや加速度センサなどの情報、ユーザ要因として、移動方向指示操作、シャッタキー等のキー操作、ユーザのジェスチャー、音声などをトリガとして用いることを特徴としている。
B. Second Embodiment Next, a second embodiment of the present invention will be described.
In the second embodiment, when the user moves the
なお、デジタルカメラ1の構成は、図1と同様であるので説明を省略する。また、パノラマ撮影モードのメインルーチンは、図5と同様であり、合成処理は、図7と同様であるので説明を省略する。
The configuration of the
図9は、本第2実施形態によるデジタルカメラ1での連写処理の動作を説明するためのフローチャートである。また、図10は、本第2実施形態によるデジタルカメラ1での連写処理の動作を説明するための概念図である。
FIG. 9 is a flowchart for explaining the operation of the continuous shooting process in the
本第2実施形態では、トリガ検出に伴い、現在、デジタルカメラ1が状態#1、#2、#3のいずれの状態にあるかを判別するために、トリガが検出される度に反転されるフラグと、トリガが検出される度に、1ずつインクリメントされる状態#N(係数)とを用意している。フラグは、初期値を「0」とし、トリガが検出される度に反転されるようになっている。また、状態#Nは、初期値を「1」とし、現在のデジタルカメラ1が状態#1、#2、#3のいずれの状態にあるかを示す係数である。状態#Nは、1回目のトリガが検出されるまでは、「1」となって状態#1を示し、トリガが検出される度に、「2」となって状態#2を示し、「3」となって状態#3を示すようになっている。
In the second embodiment, in accordance with trigger detection, in order to determine whether the
まず、CPU11は、1つ前の撮像画像と現在の撮影画像との位置合わせを行い(ステップS80)、トリガが検出されたか否かを判断する(ステップS82)。トリガが検出されない場合には、図10に示すように、状態#1から状態#2へ移行していない、すなわち、水平方向(左端から右方向)に動かしている状態#1にあると判断し、フラグが「1」であるか否を判断する(ステップS88)。この場合、トリガがまだ検出されていないため、フラグは「0」であり、状態#Nは、「1」である。
First, the
そして、フラグが「0」であるので(ステップS88のNO)、撮像した画像を、状態#N(=1)のパノラマ作成用の画像として保存する(ステップS90)。その後、当該処理を終了し、図5に示すメインルーチンに戻る。以下、トリガが検出されるまで、ステップS90で、撮像した画像を、状態#N(=1)のパノラマ作成用の画像として保存していく。 Since the flag is “0” (NO in step S88), the captured image is stored as an image for creating a panorama in state #N (= 1) (step S90). Thereafter, the process is terminated, and the process returns to the main routine shown in FIG. Hereinafter, in step S90, the captured image is stored as a panorama creation image in state #N (= 1) until a trigger is detected.
次に、図10に示すように、状態#1から状態#2へ移行する際、例えば、カメラ要因として、移動量や、方位センサの情報や、ユーザ要因として、移動方向、シャッタキー等のキー操作、ユーザのジェスチャー、音声などにより、デジタルカメラ1が状態#1の終端に到達したことが検出された場合、これらがトリガとして検出される(ステップS82のYES)。トリガが検出されると、フラグを反転し(ステップS84)、状態#NをN+1とする(ステップS86)。この場合、フラグは「1」となり、状態#Nは、「2」となる。
Next, as shown in FIG. 10, when transitioning from
次に、フラグが「1」であるか否かを判断する(ステップS86)。この場合、フラグが「1」であるので、取り込んだ画像をパノラマ作成用の画像として保存することなく(ステップS92)、当該処理を終了し、図5に示すメインルーチンに戻る。以下、次のトリガが検出されるまで(デジタルカメラ1の移動方向が状態#3になるまで)、取り込んだ画像をパノラマ作成用の画像として保存することなく、当該処理を終了し、図5に示すメインルーチンに戻る動作を繰り返す。したがって、状態#2では、撮影画像は保存されることはない。
Next, it is determined whether or not the flag is “1” (step S86). In this case, since the flag is “1”, the captured image is not saved as a panoramic image (step S92), the process is terminated, and the process returns to the main routine shown in FIG. Hereinafter, until the next trigger is detected (until the moving direction of the
次に、図10に示すように、状態#2から状態#3へ移行する際、例えば、カメラ要因として、移動量や、方位センサの情報や、ユーザ要因として、移動方向、シャッタキー等のキー操作、ユーザのジェスチャー、音声などにより、デジタルカメラ1が状態#2の終端に到達し、状態#3へ移行することが検出された場合、これらがトリガとして検出される(ステップS82のYES)。トリガが検出されると、フラグを反転し(ステップS84)、状態#NをN+1とする(ステップS86)。この場合、フラグは「0」となり、状態#Nは、「3」となる。
Next, as shown in FIG. 10, when transitioning from
次に、フラグが「1」であるか否かを判断する(ステップS86)。この場合、フラグが「0」であるので、撮像した画像を、状態#N(=3)のパノラマ作成用の画像として保存する(ステップS90)。その後、当該処理を終了し、図5に示すメインルーチンに戻る。以下、次のトリガが検出されるまで、ステップS90で、撮像した画像を、状態#N(=3)のパノラマ作成用の画像として保存していく。 Next, it is determined whether or not the flag is “1” (step S86). In this case, since the flag is “0”, the captured image is stored as an image for creating a panorama in state #N (= 3) (step S90). Thereafter, the process is terminated, and the process returns to the main routine shown in FIG. Hereinafter, until the next trigger is detected, in step S90, the captured image is stored as an image for creating a panorama in state #N (= 3).
上述した動作の結果、ユーザが、デジタルカメラ1を、左端から右方向に動かしている状態#1で撮像された複数の画像と、デジタルカメラ1を、右下から左方向に動かしている状態#3で撮像された複数の画像とが得られる。
As a result of the above-described operation, the user is moving the
次に、これら撮像された複数の画像を用いて、上述した第1実施形態と同様の方法(図7参照)で、状態#1の複数の画像を合成してパノラマ#1、状態#3の複数の画像を合成してパノラマ#2を作成し、さらに、パノラマ#1の下側の所定領域とパノラマ#2の上側の所定領域とを一部が重複するように(例えば、αブレンドを用いて)合成し、1つの広角画像を作成する。
Next, using the plurality of captured images, a plurality of images in
上述した第2実施形態によれば、レンズ交換を行うことなく、容易に、かつ効率的に広角画像の生成に必要な画像を得ることができる。 According to the second embodiment described above, an image necessary for generating a wide-angle image can be obtained easily and efficiently without exchanging lenses.
C.第3実施形態
次に、本発明の第3実施形態について説明する。
上述した第1、第2実施形態では、ユーザは、広画角の合成画像を得るために必要とされる全ての画像を撮像するために、図3の矢印で示すように、所望する景色に対して、画角の長手方向を縦方向になるようにデジタルカメラ1を縦方向に構え、左上でシャッタSWを押下し(半押し→全押し)、まず、シャッタSWを押下して水平方向(左端から右方向)に動かし(状態#1)、所定の位置で垂直方向に動かし(状態#2)、さらに、水平方向(左方向)に動かす(状態#3)ことになる。しかしながら、ユーザにとっては、どのようにデジタルカメラ1を動かしたらよいか、あるいは必要とされる画像が確実に得られているのかが分かりにくい。
C. Third Embodiment Next, a third embodiment of the present invention will be described.
In the first and second embodiments described above, the user takes a desired scene as shown by the arrows in FIG. 3 in order to capture all the images required to obtain a wide-angle composite image. On the other hand, the
そこで、本第3実施形態では、パノラマ撮像モードにおいて、ユーザによりシャッタSWを押下されると、デジタルカメラ1で撮像すべき領域を示す撮影枠や、どちらの方向に移動させたらよいかを示す移動方向を画像表示部15に表示することで、ユーザを誘導するようになっている。また、パノラマ撮像モード中は、現在、デジタルカメラ1のCCD5に結像した画像を、プレビュー画像(低解像度)として画像表示部15にスルー表示するとともに、プレビュー画像を用いて合成した合成画像を画像表示部15に半透明(透過率50%)で表示するようになっている。
Therefore, in the third embodiment, when the user presses the shutter switch in the panoramic imaging mode, the shooting frame indicating the area to be imaged by the
このように、パノラマ撮像モード中、次に撮像すべき撮像領域を示す撮影枠や、どちらの方向に移動させたらよいかを示す移動方向、さらには、撮影済みの画像を合成した縮小画像を画像表示部15に表示するようにしたので、ユーザは、どの方向にデジタルカメラ1を移動させたらよいかを容易に認識することができる。
In this way, during the panoramic imaging mode, an imaging frame indicating an imaging area to be imaged next, a moving direction indicating which direction should be moved, and a reduced image obtained by combining captured images are displayed as images. Since the display is made on the
なお、デジタルカメラ1の構成は、図1と同様であるので説明を省略する。また、パノラマ撮影モードのメインルーチンは、図5と同様であり、合成処理は、図7と同様であるので説明を省略する。
The configuration of the
図11は、本第3実施形態によるデジタルカメラ1での連写処理の動作を説明するためのフローチャートである。また、図12は、本第3実施形態によるデジタルカメラ1での連写処理の動作を説明するための概念図である。
FIG. 11 is a flowchart for explaining the operation of the continuous shooting process in the
まず、CPU11は、1つ前の撮像画像と現在の撮影画像との位置合わせを行い(ステップS100)、現在の状態が状態#1、#2、#3のいずれであるかを判断する(ステップS102)。そして、ユーザが、デジタルカメラ1を、左端から右方向に動かしている状態#1である場合には(ステップS102の状態#1)、図12に示すように、撮影枠FR1、移動方向M1を表示する(ステップS104)。そして、撮像した画像を状態#1でのパノラマ作成用の画像として保存し(ステップS106)、保存した撮像画像の縮小画像から簡易合成画像IMGを作成して半透明(透過率50%)で表示する(ステップS108)。
First, the
次に、デジタルカメラ1が所定の位置P1(この場合、状態#1での終位置:図12参照)に到達したか否かを判断する(ステップS110)。そして、所定の位置P1に達していない場合には(ステップS110のNO)、現在の状態#1を変更することなく、当該処理を終了し、メインルーチンに戻る。
Next, it is determined whether or not the
以下、デジタルカメラ1が所定の位置P1に達するまで、ステップS106で、撮像した画像を状態#1でのパノラマ作成用の画像として保存しながら、ステップS108で、その時点の合成画像を半透明(透過率50%)で表示していく。そして、デジタルカメラ1が所定の位置P1に到達すると(ステップS110のYES)、状態#1から状態#2へ移行するので、現在の状態を状態#2に変更する(ステップS112)。
Thereafter, until the
次に、ユーザが、デジタルカメラ1を、状態#1の終端位置から下方向に動かす状態#2に移行すると(ステップS102の状態#2)、図12に示すように、撮影枠FR2、移動方向M2を表示する(ステップS114)。そして、取り込んだ画像をパノラマ作成用の画像として保存することなく(ステップS116)、デジタルカメラ1が所定の位置P2(この場合、状態#2での終位置:図12参照)に到達したか否かを判断する(ステップS118)。そして、所定の位置P2に達していない場合には(ステップS118のNO)、現在の状態#2を変更することなく、当該処理を終了し、図5に示すメインルーチンに戻る。
Next, when the user shifts to the
以下、デジタルカメラ1が所定の位置P2に達するまで、パノラマ作成用の画像として保存せずにそのまま動作を継続し、デジタルカメラ1が所定の位置P2に到達すると(ステップS118のYES)、状態#2から状態#3へ移行するので、現在の状態を状態#3に変更する(ステップS120)。
Hereinafter, until the
次に、ユーザが、デジタルカメラ1を、状態#2から左方向に動かす状態#3に移行すると(ステップS102の状態#3)、図12に示すように、撮影枠FR3、移動方向M3を表示する(ステップS122)。そして、撮像した画像を状態#3でのパノラマ作成用の画像として保存し(ステップS124)、保存した撮像画像の縮小画像から簡易合成画像を作成して半透明(透過率50%)で表示する(ステップS126)。
Next, when the user shifts the
以下、デジタルカメラ1が所定の位置P3(終点)に達するまで、ステップS124で、撮像した画像を状態#3でのパノラマ作成用の画像として保存しながら、ステップS126で、その時点の合成画像を半透明(透過率50%)で表示していく。そして、デジタルカメラ1が所定の位置P3に到達すると(ステップS128のYES)、連写終了とする(ステップS130)。
Thereafter, until the
上述した動作の結果、ユーザが、デジタルカメラ1を、左端から右方向に動かしている状態#1で撮像された複数の画像と、デジタルカメラ1を、右下から左方向に動かしている状態#3で撮像された複数の画像とが得られる。
As a result of the above-described operation, the user is moving the
次に、これら撮像された複数の画像を用いて、上述した第1、第2実施形態と同様の方法(図7参照)で、状態#1の複数の画像を合成してパノラマ#1、状態#3の複数の画像を合成してパノラマ#2を作成し、さらに、パノラマ#1の下側の所定領域とパノラマ#2の上側の所定領域とを一部が重複するように(例えば、αブレンドを用いて)合成し、1つの広角画像を作成する。
Next, using the plurality of captured images, a plurality of images in
なお、上述した第3実施形態において、画像表示部15に表示される撮影枠FR1〜FR3には、図12に示すように、マージン(余裕)MGを設けること、すなわち実際に撮像される画像範囲より多少大きめの撮影枠とすることが好ましい。マージンMGを設けることで、デジタルカメラ1を動かす範囲に余裕が生じ、ユーザのストレスを軽減することができる。
In the above-described third embodiment, as shown in FIG. 12, a margin (margin) MG is provided in the photographing frames FR1 to FR3 displayed on the
また、上述した第3実施形態においては、状態#1から状態#2、状態#2から状態#3への移動方向の変化を、所定の位置に到達したか否かで判断するようにしたが、これに限らず、上述した第2実施形態と同様に、カメラ要因として、移動量、方位センサや加速度センサなどの情報、ユーザ要因として、移動方向指示操作、シャッタキー等のキー操作、ユーザのジェスチャー、音声などをトリガとして用いるようにしてもよい。
In the third embodiment described above, the change in the movement direction from
上述した第3実施形態によれば、リアルタイムで、合成画像を画像表示部15に表示するとともに、デジタルカメラ1を移動させるべき、撮影枠や移動方向を表示するようにしたので、ユーザは、撮影枠や移動方向を見ながらデジタルカメラ1を動かせばよいので、一度の撮像では得られない広画角の画像を生成するために必要とされる複数の画像を容易に、かつ効率的に撮像することができ、広画角の画像を容易に生成することができる。
According to the third embodiment described above, the composite image is displayed on the
なお、上述した第1から第3実施形態では、パノラマ撮影時に、デジタルカメラ1を左から右、上から下、そして、右から左へと移動させたが、これに限らず、例えば、図13(a)に示すように、一方向に動かしている間に複数の画像を撮像し、それらを合成して1つの広角画像を生成するようにしてもよい。あるいは、図13(b)に示すように、デジタルカメラ1を左から右、上から下、右から左、上から下、そして左から右というように、横方向の移動を3回以上繰り返すようにしてもよいし、3つ以上のパノラマ画像を合成して広角画像を生成するようにしてもい。
In the first to third embodiments described above, the
また、上述した第3実施形態では、撮影範囲を示す撮影枠や、移動方向を表示させるようにしたが、これに限らず、図14に示すように、最終の広角画像の全体枠20に対して撮像画像として取得した部分30を塗り潰すようにしてもよい。
In the third embodiment described above, the shooting frame indicating the shooting range and the moving direction are displayed. However, the present invention is not limited to this, and as shown in FIG. 14, the
以上、この発明のいくつかの実施形態について説明したが、この発明は、これらに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下に、本願出願の特許請求の範囲に記載された発明を付記する。
As mentioned above, although several embodiment of this invention was described, this invention is not limited to these, The invention described in the claim, and its equal range are included.
Below, the invention described in the claims of the present application is appended.
(付記1)
付記1に記載の発明は、複数のパノラマ画像を取得する取得手段と、前記取得手段により取得した前記複数のパノラマ画像同士を合成して1つの広角画像を生成する広角画像生成手段とを備えることを特徴とする画像処理装置である。
(Appendix 1)
The invention according to
(付記2)
付記2に記載の発明は、撮像手段と、前記撮像手段により順次撮像する撮像制御手段と、前記撮像制御手段による撮像制御によって前記撮像手段で順次撮像された複数の画像を合成してパノラマ画像を生成するパノラマ画像生成手段とを更に備え、前記取得手段は、前記パノラマ画像生成手段によって生成された複数のパノラマ画像を取得することを特徴とする付記1に記載の画像処理装置である。
(Appendix 2)
The invention described in
(付記3)
付記3に記載の発明は、前記パノラマ画像生成手段は、前記撮像手段による撮像領域を所定の方向に移動させながら順次撮像された複数の画像から、前記複数のパノラマ画像を生成することを特徴とする付記2に記載の画像処理装置である。
(Appendix 3)
The invention according to attachment 3 is characterized in that the panoramic image generation unit generates the plurality of panoramic images from a plurality of images sequentially captured while moving an imaging region of the imaging unit in a predetermined direction. The image processing apparatus according to
(付記4)
付記4に記載の発明は、前記パノラマ画像生成手段は、前記撮像手段による撮像領域を所定の方向に複数回移動させながら順次撮像された複数の画像から、前記複数のパノラマ画像を生成することを特徴とする付記2に記載の画像処理装置である。
(Appendix 4)
According to the fourth aspect of the present invention, the panoramic image generation unit generates the plurality of panoramic images from a plurality of images sequentially captured while moving the imaging region of the imaging unit a plurality of times in a predetermined direction. The image processing apparatus according to
(付記5)
付記5に記載の発明は、前記パノラマ画像生成手段は、前記撮像手段による撮像領域を一方向に移動させる過程で順次撮像された複数の画像と、前記一方向とは逆方向に移動させる過程で順次撮像された複数の画像とのそれぞれから、前記複数のパノラマ画像を生成することを特徴とする付記4に記載の画像処理装置である。
(Appendix 5)
According to the fifth aspect of the present invention, the panoramic image generation means is a process in which a plurality of images sequentially captured in the process of moving the imaging region by the imaging means in one direction and a process in which the panorama image generation means moves in a direction opposite to the one direction The image processing apparatus according to appendix 4, wherein the plurality of panoramic images are generated from each of the plurality of images sequentially captured.
(付記6)
付記6に記載の発明は、前記パノラマ画像生成手段は、前記撮像手段による撮像領域を一方向に移動させる過程で、所定時間、または所定枚数、または所定の範囲分の画像を前記撮像手段で撮像すると、それらの画像から1つのパノラマ画像を生成し、前記撮像手段による撮像領域を前記一方向とは逆方向に移動させる過程で、所定時間、または所定枚数、または所定の範囲分の画像を前記撮像手段で撮像すると、それらの画像から1つのパノラマ画像を生成することを特徴とする付記5に記載の画像処理装置である。
(Appendix 6)
According to the sixth aspect of the present invention, the panoramic image generation means captures a predetermined time, a predetermined number of images, or a predetermined range of images by the imaging means in the process of moving the imaging region by the imaging means in one direction. Then, one panoramic image is generated from these images, and in the process of moving the imaging region by the imaging means in the direction opposite to the one direction, images for a predetermined time, a predetermined number, or a predetermined range are obtained. The image processing apparatus according to appendix 5, wherein one panorama image is generated from these images when the image is picked up by the image pickup means.
(付記7)
付記7に記載の発明は、予め広角画像の撮像範囲を指定する指定手段を更に備え、前記パノラマ画像生成手段は、前記指定手段によって指定された撮像範囲に基づいて、前記パノラマ画像を生成することを特徴とする付記2から6のいずれかに記載の画像処理装置である。
(Appendix 7)
The invention according to appendix 7 further includes designation means for designating a wide-angle image imaging range in advance, and the panorama image generating means generates the panoramic image based on the imaging range designated by the designation means. An image processing apparatus according to any one of
(付記8)
付記8に記載の発明は、合成すべきパノラマ画像同士の撮像範囲を比較する比較手段を更に備え、前記広角画像生成手段は、前記比較手段による比較の結果、撮像範囲が小さい方のパノラマ画像に他のパノラマ画像の撮像範囲を合わせて合成することで、前記広角画像を生成することを特徴とする付記1から7のいずれかに記載の画像処理装置である。
(Appendix 8)
The invention according to attachment 8 further includes a comparison unit that compares the imaging ranges of the panoramic images to be combined, and the wide-angle image generation unit converts the panorama image with the smaller imaging range as a result of the comparison by the comparison unit. The image processing apparatus according to any one of
(付記9)
付記9に記載の発明は、前記広角画像生成手段は前記取得手段により取得した前記複数のパノラマ画像の上側の所定領域と下側の所定領域どうしを合成して1つの広角画像を生成することを特徴とする付記1から8のいずれかに記載の画像処理装置である。
(Appendix 9)
The invention according to attachment 9 is characterized in that the wide-angle image generation unit generates one wide-angle image by combining upper predetermined regions and lower predetermined regions of the plurality of panoramic images acquired by the acquisition unit. 9. The image processing apparatus according to any one of
(付記10)
付記10に記載の発明は、複数のパノラマ画像を取得する取得ステップと、前記取得ステップで取得した前記複数のパノラマ画像同士を合成して1つの広角画像を生成する広角画像生成ステップとを含むことを特徴とする画像処理方法である。
(Appendix 10)
The invention according to
(付記11)
付記11に記載の発明は、画像処理を行う画像処理装置のコンピュータに、複数のパノラマ画像を取得する取得機能、前記取得機能で取得した前記複数のパノラマ画像同士を合成して1つの広角画像を生成する広角画像生成機能を実行させることを特徴とするプログラムである。
(Appendix 11)
The invention described in
1 デジタルカメラ
2 撮像レンズ
3 レンズ駆動部
4 絞り兼用シャッタ
5 CCD
6 TG
7 ユニット回路
8 画像処理部
11 CPU
12 DRAM
13 メモリ
14 フラッシュメモリ
15 画像表示部
16 キー入力部
17 カードI/F
18 メモリ・カード
DESCRIPTION OF
6 TG
7 Unit Circuit 8
12 DRAM
13
18 Memory card
Claims (15)
前記取得手段により取得された複数のパノラマ画像同士の撮像範囲のサイズを比較する比較手段と、
前記比較手段による比較の結果、前記撮像範囲のサイズの小さい方のパノラマ画像に合わせたサイズになるように、且つ、前記複数のパノラマ画像同士を前記一方向に対し直交方向に合成して1つの広角画像を生成する広角画像生成手段と
を備えることを特徴とする画像処理装置。 Acquisition means for acquiring a plurality of panoramic images that are each generated by combining a plurality of images and that are long in one direction;
Comparison means for comparing the sizes of the imaging ranges of a plurality of panoramic images acquired by the acquisition means;
As a result of the comparison by the comparison unit, the plurality of panoramic images are synthesized in a direction orthogonal to the one direction so as to have a size that matches the smaller panoramic image of the imaging range. An image processing apparatus comprising: a wide-angle image generation unit configured to generate a wide-angle image.
前記撮像手段により順次撮像された複数の画像を合成してパノラマ画像を生成するパノラマ画像生成手段と
を更に備え、
前記取得手段は、
前記パノラマ画像生成手段によって生成された複数のパノラマ画像を取得することを特徴とする請求項1に記載の画像処理装置。 Imaging means;
Panorama image generating means for generating a panoramic image by combining a plurality of images sequentially captured by the imaging means;
The acquisition means includes
The image processing apparatus according to claim 1, wherein a plurality of panoramic images generated by the panoramic image generating unit are acquired.
前記パノラマ画像生成手段は、前記検出手段によって所定のトリガが検出されると、当該トリガが検出されるまで前記撮像手段によって順次撮像された複数の画像を合成してパノラマ画像を生成し、
前記広角画像生成手段は、前記パノラマ画像生成手段によって生成された複数のパノラマ画像同士を合成して広角画像を生成することを特徴とする請求項2に記載の画像処理装置。 Detecting means for detecting a predetermined trigger;
When the predetermined trigger is detected by the detection unit, the panoramic image generation unit generates a panoramic image by combining a plurality of images sequentially captured by the imaging unit until the trigger is detected;
The image processing apparatus according to claim 2, wherein the wide-angle image generation unit generates a wide-angle image by combining a plurality of panoramic images generated by the panorama image generation unit.
前記検出手段によって所定のトリガが検出されると、当該トリガが検出されるまで前記撮像手段によって順次撮像された複数の画像から、前記パノラマ画像を生成することを特徴とする請求項3に記載の画像処理装置。 The panoramic image generating means
The panorama image is generated from a plurality of images sequentially captured by the imaging unit until a predetermined trigger is detected by the detection unit. Image processing device.
前記検出手段によって所定のトリガが検出されると、前記撮像される画像を前記記憶手段へ記憶させる記憶制御手段を更に備え、
前記記憶制御手段により前記画像が記憶された後に、前記検出手段によって所定のトリガが検出されると、当該所定のトリガ間で前記記憶制御手段によって前記記憶手段に記憶された複数の画像から、前記パノラマ画像を生成することを特徴とする請求項4に記載の画像処理装置。 Storage means for sequentially storing the sequentially captured images;
A storage control unit for storing the captured image in the storage unit when a predetermined trigger is detected by the detection unit;
After the image has been stored by the Symbol 憶 control means, when a predetermined trigger is detected by said detecting means, from a plurality of images stored in said storage means by said storage control means between the predetermined trigger, The image processing apparatus according to claim 4, wherein the panorama image is generated.
移動量、または方位センサの情報、または移動方向の変化、またはユーザによる所定の指示操作、またはユーザの音声による指示、またはユーザの動作による指示を、前記所定のトリガとして検出することを特徴とする請求項3に記載の画像処理装置。 The detection means includes
A movement amount or direction sensor information, a change in a movement direction, a predetermined instruction operation by a user, an instruction by a user's voice, or an instruction by a user's operation is detected as the predetermined trigger. The image processing apparatus according to claim 3.
前記検出手段によってトリガが検出された場合には、それ以降の前記撮像手段によって撮像される画像の前記記憶手段への記憶を禁止し、
前記記憶の禁止中に、前記検出手段によってトリガが検出された場合には、それ以降の前記撮像手段によって撮像される画像の前記記憶手段への記憶を再開する
ことを特徴とする請求項5に記載の画像処理装置。 The storage control means
When a trigger is detected by the detection unit, the storage of the image captured by the imaging unit after that is prohibited in the storage unit,
6. When the trigger is detected by the detection unit while the storage is prohibited, the subsequent storage of the image captured by the imaging unit is resumed in the storage unit. 6 . The image processing apparatus described.
前記撮像手段の撮像領域が所定の方向に移動されながら順次撮像された複数の画像から、前記複数のパノラマ画像を生成することを特徴とする請求項2に記載の画像処理装置。 The panoramic image generating means
The image processing apparatus according to claim 2, wherein the plurality of panoramic images are generated from a plurality of images sequentially captured while an imaging region of the imaging unit is moved in a predetermined direction.
前記撮像手段の撮像領域が所定の方向に複数回移動されながら順次撮像された複数の画像から、前記複数のパノラマ画像を生成することを特徴とする請求項2に記載の画像処理装置。 The panoramic image generating means
The image processing apparatus according to claim 2 , wherein the plurality of panoramic images are generated from a plurality of images sequentially captured while the imaging region of the imaging unit is moved a plurality of times in a predetermined direction.
前記撮像手段の撮像領域が一方向に移動された過程で順次撮像された複数の画像と、前記一方向とは逆方向に移動された過程で順次撮像された複数の画像とのそれぞれから、前記複数のパノラマ画像を生成することを特徴とする請求項9に記載の画像処理装置。 The panoramic image generating means
From each of a plurality of images sequentially captured in the process of moving the imaging region of the imaging means in one direction and a plurality of images sequentially captured in the process of moving in the direction opposite to the one direction, The image processing apparatus according to claim 9, wherein a plurality of panoramic images are generated.
前記撮像手段による撮像領域が一方向に移動される過程で、所定時間、または所定枚数、または所定の範囲分の画像を前記撮像手段で撮像すると、それらの画像から1つのパノラマ画像を生成し、
前記撮像手段の撮像領域が前記一方向とは逆方向に移動される過程で、所定時間、または所定枚数、または所定の範囲分の画像を前記撮像手段で撮像すると、それらの画像から1つのパノラマ画像を生成する
ことを特徴とする請求項10に記載の画像処理装置。 The panoramic image generating means
In the process of moving the imaging region by the imaging means in one direction, when images for a predetermined time, a predetermined number, or a predetermined range are imaged by the imaging means, one panoramic image is generated from those images,
When the imaging area of the imaging means is moved in a direction opposite to the one direction, images for a predetermined time, a predetermined number, or a predetermined range are captured by the imaging means, and one panorama is obtained from these images. The image processing apparatus according to claim 10, wherein an image is generated.
前記パノラマ画像生成手段は、
前記指定手段によって指定された撮像範囲に基づいて、前記パノラマ画像を生成することを特徴とする請求項2から11のいずれかに記載の画像処理装置。 Further comprising a designation means for designating a wide-angle image capturing range in advance;
The panoramic image generation hand stage,
The image processing apparatus according to claim 2, wherein the panoramic image is generated based on an imaging range designated by the designation unit.
前記取得ステップにより取得された複数のパノラマ画像同士の撮像範囲のサイズを比較する比較ステップと、
前記比較ステップによる比較の結果、前記撮像範囲のサイズの小さい方のパノラマ画像に合わせたサイズになるように、且つ、前記取得ステップで取得した前記複数のパノラマ画像同士を前記一方向に対し直交方向に合成して1つの広角画像を生成する広角画像生成ステップと
を含むことを特徴とする画像処理方法。 An acquisition step of acquiring a plurality of panoramic images that are each generated by combining a plurality of images and that are long in one direction;
A comparison step of comparing the sizes of the imaging ranges of a plurality of panoramic images acquired by the acquisition step ;
As a result of the comparison in the comparison step, the plurality of panoramic images acquired in the acquisition step are orthogonal to the one direction so as to have a size that matches the smaller panoramic image of the imaging range. And a wide-angle image generation step of generating one wide-angle image by combining with the image processing method.
複数の画像を合成することにより各々生成された、一方向に長い複数のパノラマ画像を取得する取得機能、
前記取得機能により取得された複数のパノラマ画像同士の撮像範囲のサイズを比較する比較機能、
前記比較機能による比較の結果、前記撮像範囲のサイズの小さい方のパノラマ画像に合わせたサイズになるように、且つ、前記取得機能で取得した前記複数のパノラマ画像同士を前記一方向に対し直交方向に合成して1つの広角画像を生成する広角画像生成機能
を実行させることを特徴とするプログラム。 In the computer of the image processing apparatus that performs image processing,
An acquisition function for acquiring a plurality of panoramic images each generated by combining a plurality of images and being long in one direction;
Comparing function of comparing the size of the imaging range of the plurality of panorama images between acquired by the acquisition function,
The comparison function by the comparison result, so that the size matching the size of the smaller of the panoramic image in the imaging range and orthogonal direction of the plurality of panorama images between acquired by the acquisition function to said one direction A program for executing a wide-angle image generation function for generating a wide-angle image by combining the two.
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011084376A JP5641352B2 (en) | 2011-04-06 | 2011-04-06 | Image processing apparatus, image processing method, and program |
US13/437,346 US9007429B2 (en) | 2011-04-06 | 2012-04-02 | Image processing device capable of generating wide-range image |
TW101111973A TWI514847B (en) | 2011-04-06 | 2012-04-05 | Image processing device, image processing method, and recording medium |
KR1020120035625A KR101391042B1 (en) | 2011-04-06 | 2012-04-05 | Image processing device capable of generating wide-range image |
CN201210157105.9A CN102739962B (en) | 2011-04-06 | 2012-04-06 | The image processing apparatus of wide angle picture can be generated |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011084376A JP5641352B2 (en) | 2011-04-06 | 2011-04-06 | Image processing apparatus, image processing method, and program |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2012222492A JP2012222492A (en) | 2012-11-12 |
JP2012222492A5 JP2012222492A5 (en) | 2014-03-27 |
JP5641352B2 true JP5641352B2 (en) | 2014-12-17 |
Family
ID=47273584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011084376A Active JP5641352B2 (en) | 2011-04-06 | 2011-04-06 | Image processing apparatus, image processing method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5641352B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103139479A (en) * | 2013-02-25 | 2013-06-05 | 广东欧珀移动通信有限公司 | Method and device for finishing panorama preview scanning |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004228711A (en) * | 2003-01-20 | 2004-08-12 | Sony Corp | Supervisory apparatus and method, program, and supervisory system |
JP4947060B2 (en) * | 2007-01-18 | 2012-06-06 | 富士通株式会社 | Image composition apparatus, image composition method, and program |
-
2011
- 2011-04-06 JP JP2011084376A patent/JP5641352B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012222492A (en) | 2012-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5665013B2 (en) | Image processing apparatus, image processing method, and program | |
JP4985808B2 (en) | Imaging apparatus and program | |
KR101391042B1 (en) | Image processing device capable of generating wide-range image | |
JP5054583B2 (en) | Imaging device | |
US20110018970A1 (en) | Compound-eye imaging apparatus | |
JP2001211351A (en) | Image pickup device and its operation control method | |
JP5782813B2 (en) | Imaging apparatus and image display method | |
JP2008141518A (en) | Imaging apparatus | |
KR101433121B1 (en) | Image processing device for generating composite image having predetermined aspect ratio | |
JP2007215091A (en) | Imaging apparatus and program therefor | |
JP4767838B2 (en) | Imaging apparatus and imaging method | |
KR101431536B1 (en) | Digital photographing apparatus and method for controlling the same | |
JP6706167B2 (en) | Imaging device, image synthesizing method, and program | |
JP2009223056A (en) | Photographic apparatus and method | |
JP2006276683A (en) | Imaging apparatus and program | |
JP5641352B2 (en) | Image processing apparatus, image processing method, and program | |
JP5655804B2 (en) | Imaging apparatus and program | |
JP5648563B2 (en) | Image processing apparatus, image processing method, and program | |
JP5163333B2 (en) | CAMERA DEVICE, IMAGE DISPLAY METHOD, AND IMAGE DISPLAY PROGRAM | |
JP2005278003A (en) | Image processing apparatus | |
JP5370662B2 (en) | Imaging device | |
JP2006234993A (en) | Camera and program | |
JP4362094B2 (en) | Focus control device and focus control method | |
JP2008283454A (en) | Imaging apparatus and imaging method | |
JP2009201158A (en) | Imaging unit, photographing range adjustment method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140205 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140205 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20140206 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20140303 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140401 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140905 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141002 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141015 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5641352 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |