JP4565909B2 - camera - Google Patents

camera Download PDF

Info

Publication number
JP4565909B2
JP4565909B2 JP2004196426A JP2004196426A JP4565909B2 JP 4565909 B2 JP4565909 B2 JP 4565909B2 JP 2004196426 A JP2004196426 A JP 2004196426A JP 2004196426 A JP2004196426 A JP 2004196426A JP 4565909 B2 JP4565909 B2 JP 4565909B2
Authority
JP
Japan
Prior art keywords
image
frame
captured
shooting
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004196426A
Other languages
Japanese (ja)
Other versions
JP2006020111A (en
Inventor
聡一郎 川上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hoya Corp
Original Assignee
Hoya Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hoya Corp filed Critical Hoya Corp
Priority to JP2004196426A priority Critical patent/JP4565909B2/en
Publication of JP2006020111A publication Critical patent/JP2006020111A/en
Application granted granted Critical
Publication of JP4565909B2 publication Critical patent/JP4565909B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は複数の撮影コマの画像を結合したパノラマ画像、または2つの撮影コマを利用して立体画像を得るステレオ画像を再生するのに最適なカメラに関するものである。   The present invention relates to a camera optimal for reproducing a panoramic image obtained by combining images of a plurality of shooting frames, or a stereo image for obtaining a stereoscopic image using two shooting frames.

1つの撮影コマで撮影可能な画角以上の画像を得るために複数の撮影コマの各画像を合成してパノラマ画像を得るようにしたカメラが提案されている。銀塩フィルムへの撮影を行うカメラでは、撮影した複数の画像のうち隣合う2つのコマの画像の特徴となる部分、例えば被写体の輪郭や特徴のある部分を抽出し、これらの特徴部分をフィルム上で、あるいは印画上で重ねることで複数の連続したコマ画像を合成し、パノラマ画像を得ている。同様に、デジタルカメラでは撮像した複数の画像のうち隣合う2つのコマの画像の特徴なる部分が重なる画像データが一致するようにこれらの画像を画像処理によって合成してパノラマ画像を得ている。特許文献1では、撮影した画像の特徴点を検出してその座標を抽出し、次に撮影した隣接する画像の同じ特徴点の座標を抽出し、これらの特徴点が一致するように隣接する画像を合成してパノラマ画像を得ている。   In order to obtain an image with an angle of view or larger that can be shot with one shooting frame, a camera that combines panoramic images to obtain a panoramic image has been proposed. In a camera that shoots on a silver halide film, a portion that is a feature of two adjacent frames, for example, a contour or a feature portion of a subject, is extracted from a plurality of shot images, and these feature portions are filmed. A panoramic image is obtained by combining a plurality of continuous frame images by superimposing them on the top or on the print. Similarly, in the digital camera, panoramic images are obtained by combining these images by image processing so that the image data in which the characteristic portions of the adjacent two frames of the plurality of captured images coincide with each other. In Patent Document 1, feature points of a photographed image are detected and their coordinates are extracted, then the coordinates of the same feature points of the photographed adjacent images are extracted, and adjacent images so that these feature points coincide with each other. To obtain a panoramic image.

また、デジタルカメラにおいて1つの撮影光学系でステレオ画像を構成する2つの撮影画像を得るために、被写体に対してそれぞれ異なる方向から撮影した被写体像を1つの駒内に並べて配置するように合成してステレオ画像を得ている。この場合には、例えば特許文献2に記載のように、最初に被写体の左側から撮像した左画像をモニタの左半分に表示し、当該被写体を右側から撮像する際に撮影しようとする被写体のスルー画像を当該モニタの右半分に表示して右画像を得るようにしたカメラがある。撮影により左右の各画像は1つの駒内に並んだ状態で合成される。このとき、左右の画像が1つの駒内の左半分と右半分の同じ位置に写し込まれるように、左画像と右側のスルー画像のそれぞれの位置決めを行うためのフレームガイドパターンをスーパインポーズしている。
特開平11−282100号公報 特開20003−244727号公報
Also, in order to obtain two captured images constituting a stereo image with a single imaging optical system in a digital camera, the subject images taken from different directions with respect to the subject are combined so as to be arranged in one frame. To obtain stereo images. In this case, as described in Patent Document 2, for example, a left image first captured from the left side of the subject is displayed on the left half of the monitor, and the subject to be photographed is captured when the subject is captured from the right side. There is a camera that displays an image on the right half of the monitor to obtain a right image. The left and right images are combined in a single frame by shooting. At this time, the frame guide pattern for positioning each of the left image and the right through image is superposed so that the left and right images are imprinted at the same positions in the left half and the right half of one frame. ing.
JP-A-11-282100 JP 20003-244727 A

特許文献1及び2の技術は、いずれも被写体の特徴点を抽出し、この特徴点を隣接する画像で一致させてパノラマ画像を得ており、あるいは特徴点をフレームガイドパターンに位置決めしてステレオ画像を得るものであるため、被写体に特徴点が見いだすことが困難な場合、換言すれば特徴点を一義的に決めることが困難な被写体のパノラマ画像やステレオ画像を得ようとした場合には適正な画像を得ることが難しいという問題がある。すなわち、特許文献1のパノラマ画像を得る技術は撮影した画像の特徴点を抽出しているが、遠景を撮影する場合のように特徴点が抽出し難い被写体の場合には、抽出される特徴点があいまいなものになり、隣接する画像を正確に合成したパノラマ画像を得ることが困難である。これは特許文献2のステレオ画像を得る場合も同様であり、被写体に特徴点がある場合にはフレームガイドパターンに被写体を対応位置させることができるが、被写体に特徴点を見いだすことが困難な場合にはフレームガイドパターンに対して被写体を対応位置させることが困難であり、結局左右の画像をそれぞれ正確に位置決めした状態でステレオ画像を得ることは困難である。   The techniques of Patent Documents 1 and 2 both extract feature points of an object and match the feature points with adjacent images to obtain a panoramic image, or position the feature points on a frame guide pattern to obtain a stereo image. Therefore, if it is difficult to find a feature point on the subject, in other words, if you are trying to obtain a panoramic image or a stereo image of the subject where it is difficult to uniquely determine the feature point, it is appropriate. There is a problem that it is difficult to obtain an image. That is, the technique for obtaining a panoramic image in Patent Document 1 extracts feature points of a photographed image, but in the case of a subject whose feature points are difficult to extract, such as when photographing a distant view, the feature points to be extracted are extracted. Becomes ambiguous, and it is difficult to obtain a panoramic image obtained by accurately synthesizing adjacent images. The same applies to the case of obtaining a stereo image of Patent Document 2. If the subject has a feature point, the subject can be positioned corresponding to the frame guide pattern, but it is difficult to find the feature point in the subject. However, it is difficult to position the subject corresponding to the frame guide pattern, and it is difficult to obtain a stereo image with the left and right images positioned accurately.

本発明の目的は、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適正なパノラマ画像またはステレオ画像を得ることを可能にしたカメラを提供するものである。   An object of the present invention is to provide a camera that can obtain an appropriate panoramic image or stereo image even in the case of a subject in which it is difficult to uniquely determine the feature points of the subject.

本発明は、複数の画像を撮像し、撮像した複数の画像からパノラマ画像またはステレオ画像を得るようにしたカメラにおいて、先に撮影した画像の撮影範囲を示す既撮影フレームと、これから撮影する画像の撮影範囲を示す撮影フレームとを同時に表示することが可能なモニタ装置を備えることを特徴とする。本発明のカメラは、具体的には、撮影しようとする画像をスルー画像としてモニタ装置に表示する手段と、撮影する撮影範囲を検知する手段と、検知した撮影範囲を撮影フレームとしてモニタ装置に表示する手段と、撮影した画像の画像データを取り込むと共に撮影フレームのデータを取り込んで記憶する手段と、記憶した撮影フレームのデータに基づいて既撮影フレームとしてモニタ装置に表示する手段とを備える。 The present invention is a camera that captures a plurality of images and obtains a panorama image or a stereo image from the captured images. and wherein the obtaining Bei a capable monitor device to display the photographing frame indicating the photographic range at the same time. Specifically, the camera of the present invention includes means for displaying an image to be photographed on the monitor device as a through image, means for detecting the photographing range to be photographed, and displaying the sensed photographing range on the monitor device as a photographing frame. Means for capturing the image data of the captured image and capturing and storing the data of the captured frame, and means for displaying on the monitor device as an already captured frame based on the stored captured frame data.

ここで、撮影範囲を検知する手段は、カメラの垂直方向を検知する垂直方向センサと、水平方位を検知する方位センサと、各センサの出力と撮像光学系の焦点距離等の情報に基づいて撮影範囲を演算する手段とを備える構成とする。また、垂直方向センサにより検知された垂直方向を示す垂直線と、方位センサにより検知された水平方位を示す水平線とをモニタ装置に表示する手段を備える構成とするHere, the means for detecting the shooting range is a shooting based on information such as a vertical direction sensor for detecting the vertical direction of the camera, an orientation sensor for detecting the horizontal direction, the output of each sensor, and the focal length of the imaging optical system. And a means for calculating a range. In addition, the monitor device is configured to display a vertical line indicating the vertical direction detected by the vertical direction sensor and a horizontal line indicating the horizontal direction detected by the direction sensor on the monitor device.

本発明によれば、先に撮影した画像の撮影範囲を示す既撮影フレームと、これから撮影しようとする画像の撮影範囲を示す撮影フレームとを重ねた状態でモニタ装置に表示することにより、既撮影フレームを基準とし、これに撮影フレームを重ねるようにして位置決めを行うことで、先の撮影画像と次の撮影画像とを隣接した状態に、あるいは同じ位置に撮影することができる。これにより、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適切なパノラマ撮影やステレオ撮影が実現できる。特に、撮影範囲を検知する手段として垂直方向センサ、方位センサ、及びこれらセンサの出力と撮像光学系の焦点距離等の情報に基づいて撮影範囲を演算する手段を備えているので、撮影フレームはカメラの撮影方向が変化した場合でも被写体に対する絶対位置が一定の撮影フレームとしてモニタ装置に表示することができる。 According to the present invention, an already captured frame indicating the capturing range of the previously captured image and a captured frame indicating the capturing range of the image to be captured are displayed on the monitor device in a state of being overlapped. By positioning the frame so that the frame is used as a reference, the previous captured image and the next captured image can be captured adjacent to each other or at the same position. As a result, appropriate panoramic shooting and stereo shooting can be realized even in the case of a subject in which it is difficult to uniquely determine the feature point of the subject. In particular, as a means for detecting the shooting range, a vertical direction sensor, an orientation sensor, and means for calculating the shooting range based on information such as the output of these sensors and the focal length of the imaging optical system are provided. Even when the shooting direction changes, the absolute position with respect to the subject can be displayed on the monitor device as a fixed shooting frame.

本発明においては、既撮影フレームと撮影フレームを判別可能な形態で表示し、両者の重ね合わせや位置決めを容易に行うようにする。例えば、既撮影フレームと撮影フレームを異なる色で表示する。さらには、既撮影フレームで囲まれる範囲と撮影フレームで囲まれる範囲とが重なる範囲を他と区別可能な色で表示することが好ましい。   In the present invention, the already-captured frame and the captured frame are displayed in a discriminable form so that they can be easily superimposed and positioned. For example, the captured frame and the captured frame are displayed in different colors. Furthermore, it is preferable to display a range in which the range surrounded by the already-captured frames and the range surrounded by the captured frames overlap with each other in a distinguishable color.

本発明を先に撮影した画像と次に撮影した画像の2つ以上の画像を順次水平方向又は垂直方向に配列して1つの画像とするパノラマ撮影可能なカメラに適用したときには、撮影した画像の駒番号を前記モニタ装置に表示するように構成することが好ましい。また、本発明を先に撮影した画像と次に撮影した画像の2つの画像を水平方向に並べて1つの画像とするステレオ撮影可能なカメラに適用したときには、撮影した画像が左画像又は右画像であることをモニタ装置に表示するように構成することが好ましい。   When the present invention is applied to a panoramic camera capable of arranging two or more images of a first image and a next image sequentially arranged in the horizontal direction or the vertical direction into one image, It is preferable that the frame number is displayed on the monitor device. In addition, when the present invention is applied to a stereo camera capable of arranging two images, a first image and a next image, in a horizontal direction to form one image, the captured image is a left image or a right image. It is preferable to be configured to display the fact on the monitor device.

次に、本発明の実施例を図面を参照して説明する。実施例1では電子ビューファインダとしてのモニタ装置を備えるデジタルカメラに適用している。図1はデジタルカメラの主要部の構成を示すブロック構成図であり、撮像レンズ系1で結像した被写体像をCCDやCMOS等の撮像素子2で撮像し、画像信号を得る。画像信号はCDS(相関2重サンプリング)回路3においてサンプリングされ、A/D変換器4においてデジタルの画像信号に変換され、マイコン100に入力される。マイコン100では入力された画像信号に対してカラープロセス処理やガンマ補正等の所定の信号処理が施され、その後例えば輝度信号と色信号に対応する画像データが生成される。生成された画像データはDRAM等のメモリ5に書き込まれた後、VRAM(ビデオメモリ)6に書き込まれる。VRAM6に書き込まれた画像データは、D/A変換器7においてアナログの画像信号に変換され、その後ビデオエンコーダ8においてビデオ信号に変換される。ビデオエンコーダ8において変換されたビデオ信号は、ミックスアンドキー等の合成器9に入力され、ここでOSD(オンスクリーンディスプレイ)回路10からのオンスクリーン信号と合成される。オンスクリーン信号と合成されたビデオ信号はLCD等からなるモニタ装置11に出力され、動画または静止画として表示される。前記オンスクリーン信号は、後述するようにパノラマ画像、ステレオ画像を得る際の撮影の位置決め基準となる撮影フレームを表示する信号となる。   Next, embodiments of the present invention will be described with reference to the drawings. The first embodiment is applied to a digital camera including a monitor device as an electronic viewfinder. FIG. 1 is a block diagram showing the configuration of the main part of a digital camera. A subject image formed by an imaging lens system 1 is imaged by an imaging element 2 such as a CCD or CMOS to obtain an image signal. The image signal is sampled by a CDS (correlated double sampling) circuit 3, converted to a digital image signal by an A / D converter 4, and input to the microcomputer 100. The microcomputer 100 performs predetermined signal processing such as color process processing and gamma correction on the input image signal, and then, for example, image data corresponding to a luminance signal and a color signal is generated. The generated image data is written in a memory 5 such as a DRAM and then written in a VRAM (video memory) 6. The image data written in the VRAM 6 is converted into an analog image signal by the D / A converter 7 and then converted into a video signal by the video encoder 8. The video signal converted by the video encoder 8 is input to a synthesizer 9 such as a mix-and-key, where it is synthesized with an on-screen signal from an OSD (on-screen display) circuit 10. The video signal combined with the on-screen signal is output to the monitor device 11 composed of an LCD or the like and displayed as a moving image or a still image. As will be described later, the on-screen signal is a signal for displaying a shooting frame that is a positioning reference for shooting when a panoramic image and a stereo image are obtained.

前記撮像レンズ系1の焦点調節動作はフォーカシングレンズ駆動機構12により行われ、また前記撮像素子2は撮像素子ドライバ、ここではCCDドライバ13により駆動制御される。これらフォーカシングレンズ駆動機構12及びCCDドライバ13は前記マイコン100により制御される。前記メモリ5に書き込まれた画像データはマイコン100によりインターフェース回路14を介してCFカード等の記録媒体15に記録可能である。   The focus adjustment operation of the imaging lens system 1 is performed by a focusing lens driving mechanism 12, and the imaging device 2 is driven and controlled by an imaging device driver, here a CCD driver 13. The focusing lens driving mechanism 12 and the CCD driver 13 are controlled by the microcomputer 100. The image data written in the memory 5 can be recorded on a recording medium 15 such as a CF card by the microcomputer 100 via the interface circuit 14.

前記マイコン100には、各種のスイッチが接続され、これらのスイッチのオン・オフに基づてい所定の制御動作を実行する。例えば、カメラをスリープ状態からオン状態にするためのメインスイッチ21が接続される。また、カメラを記録モード、再生モード、編集モード等のモード設定を行うためのモード切替ダイヤル22が接続される。なお、実施例1ではこのモード切替ダイヤル22により、パノラマ撮影モードとステレオ撮影モードが選択可能とされている。前記モニタ装置11において各種メニュー選択を行うための選択スイッチ23と、当該選択スイッチ23により選択されたメニューの決定を行う決定スイッチ24とが接続される。画像記録、すなわち撮像を行うためのカメラに設けられている図外のレリーズボタンによって操作されるレリーズスイッチ25と、測光及びオートフォーカス動作を行うためのレリーズボタンの半押により操作される測光スイッチ26が接続される。   Various switches are connected to the microcomputer 100, and predetermined control operations are executed based on on / off of these switches. For example, a main switch 21 for connecting the camera from a sleep state to an on state is connected. Further, a mode switching dial 22 for connecting the camera to a mode setting such as a recording mode, a reproduction mode, and an editing mode is connected. In the first embodiment, the panorama shooting mode and the stereo shooting mode can be selected with the mode switching dial 22. A selection switch 23 for selecting various menus in the monitor device 11 and a determination switch 24 for determining a menu selected by the selection switch 23 are connected. A release switch 25 that is operated by a release button (not shown) provided in a camera for recording an image, that is, an image pickup, and a photometry switch 26 that is operated by half-pressing a release button for performing photometry and autofocus operations. Is connected.

さらに、前記マイコン100には前記したモニタ装置11に撮影フレームを表示するためのオンスクリーン信号を生成するための3軸加速度センサ16と磁気方位センサ17とが接続されている。前記3軸加速度センサ16は重力加速度方向を検知することができ、カメラの重力方向、すなわち垂直方向を検知し、検知した垂直信号を出力する。また、前記磁気方位センサ17は地磁気を検出して水平方向360°の方位を検知し、検知した方位信号を出力する。これらの垂直信号と方位信号は前記マイコン100に取り込まれ、マイコン100においては、撮像レンズ系1で撮影する撮影範囲を表示するための撮影フレームのデータとなるオンスクリーン信号を生成し、前記OSD回路10においてビデオ信号に合成し、モニタ装置11に表示する撮影画像と共に撮影フレームを表示する。   Further, the microcomputer 100 is connected with a three-axis acceleration sensor 16 and a magnetic direction sensor 17 for generating an on-screen signal for displaying an imaging frame on the monitor device 11 described above. The triaxial acceleration sensor 16 can detect the gravitational acceleration direction, detects the gravitational direction of the camera, that is, the vertical direction, and outputs the detected vertical signal. The magnetic azimuth sensor 17 detects geomagnetism, detects the azimuth of 360 ° in the horizontal direction, and outputs the detected azimuth signal. These vertical signals and azimuth signals are taken into the microcomputer 100, and the microcomputer 100 generates an on-screen signal that becomes shooting frame data for displaying a shooting range shot by the imaging lens system 1, and the OSD circuit 10 is combined with the video signal, and a shooting frame is displayed together with a shot image to be displayed on the monitor device 11.

ここで前記マイコン100において生成する撮影フレームについて説明する。図2はモニタ装置に表示される撮影フレームであり、3軸加速度センサ16で検知した垂直信号に基づいて、撮像レンズ系1の光軸を通る垂直方向を画像データとして演算するとともに、この垂直方向に直交する水平方向を画像データとして演算する。そして演算されたこれらの画像データを光軸を通る垂直線VL、水平線HLとしてモニタ装置11に表示する。また、磁気方位センサ17で検知した方位信号と、撮影時における撮像レンズ系1の焦点距離の情報、換言すれば撮影画角の情報とに基づいて、撮像レンズ系1において撮影しようとする被写体の撮像画角よりも予め設定した画角だけ上下、左右にそれぞれ小さい画角に設定した矩形枠状の撮影フレームFを画像データとして演算し、得られる画像データをモニタ装置11に表示する。これにより、モニタ装置11では撮影しようとする被写体のスルー画像に前記垂直線VL、水平線HL、撮影フレームFをスーパインポーズする。そのため、カメラの撮影位置がほぼ同じ位置に保たれていることを前提とすれば、撮影フレームの画像データは、カメラの光軸方向、すなわち撮影方向を変化したことに伴って各センサで検知される垂直方向や水平方位の変化に追従して変化演算されるため、カメラの撮影方向が変化した場合でも被写体に対する絶対位置が一定の撮影フレームFとしてモニタ装置11に表示することが可能になる。   Here, a photographing frame generated in the microcomputer 100 will be described. FIG. 2 shows a photographic frame displayed on the monitor device. Based on the vertical signal detected by the triaxial acceleration sensor 16, the vertical direction passing through the optical axis of the imaging lens system 1 is calculated as image data. The horizontal direction orthogonal to is calculated as image data. These calculated image data are displayed on the monitor device 11 as vertical lines VL and horizontal lines HL passing through the optical axis. Further, based on the azimuth signal detected by the magnetic azimuth sensor 17 and information on the focal length of the imaging lens system 1 at the time of photographing, in other words, information on the angle of view of photographing, the subject to be photographed in the imaging lens system 1 A rectangular frame-like photographic frame F set to a smaller angle of view up and down and left and right by an angle of view set in advance from the imaged angle of view is calculated as image data, and the obtained image data is displayed on the monitor device 11. Thereby, the monitor device 11 superimposes the vertical line VL, the horizontal line HL, and the shooting frame F on the through image of the subject to be shot. Therefore, if it is assumed that the shooting position of the camera is maintained at almost the same position, the image data of the shooting frame is detected by each sensor as the camera's optical axis direction, that is, the shooting direction is changed. Therefore, even when the shooting direction of the camera changes, the absolute position relative to the subject can be displayed on the monitor device 11 as a fixed shooting frame F.

なお、この実施例では前述のようにモード切替ダイヤル22によって説明を省略した他のモードと共にパノラマ撮影モードとステレオ撮影モードとが切替設定可能に構成されている。また、ここでは前記モニタ装置11をカラーモニタ装置で構成しており、当該モニタ装置11に表示する前記各線やフレームをカラー表示しており、ここでは前記垂直線VLと水平線HLは青色線で表示し、モニタ装置11に被写体のスルー画像をモニタ表示している段階では撮影フレームFを後述するように赤色線または黄色線で表示することが可能とされている。   In this embodiment, as described above, the panorama shooting mode and the stereo shooting mode can be switched and set together with the other modes not described with the mode switching dial 22. Further, here, the monitor device 11 is composed of a color monitor device, and the lines and frames displayed on the monitor device 11 are displayed in color. Here, the vertical lines VL and the horizontal lines HL are displayed as blue lines. When the through image of the subject is displayed on the monitor device 11 on the monitor, the photographing frame F can be displayed with a red line or a yellow line as will be described later.

以上の構成のカメラにおけるパノラマ撮影について説明する。図3はメインフローである。メインスイッチ21がオンされると(S101)、モード切替ダイヤル22を判定し、モード切替ダイヤル22がパノラマ撮影モードに設定されているとパノラマ撮影フローに入る(S102)。パノラマ撮影モードではないときには、パノラマ撮影以外の撮影フローに移行する。パノラマ撮影フローでは、内蔵カウンタをn=1に設定し(S103)、後述するパノラマ撮影モニタリングフローを実行する(S104)。パノラマ撮影モニタリングの状態でレリーズスイッチ25がオンしたときには(S105)、後述するパノラマ画像取込を実行し、n=1駒目の撮影が完了する(S106)。これでパノラマ撮影が終了か否かを判定し(S107)、終了ではないときには内蔵カウンタをn=n+1に設定し、前記パノラマ撮影モニタリングフローに戻る(S108)。以下、n=1駒目と同様にパノラマ撮影モニタリングフローS104ないしパノラマ画像取込みフローS106を実行し、レリーズスイッチ25のオンを待ってパノラマn+1駒目の画像取込を実行する。所定の駒数の撮影を行い、パノラマ撮影が終了したときにはパノラマ撮影フローを終了する(S107)。   The panoramic shooting with the camera having the above configuration will be described. FIG. 3 is a main flow. When the main switch 21 is turned on (S101), the mode switching dial 22 is determined, and when the mode switching dial 22 is set to the panorama shooting mode, the panorama shooting flow is entered (S102). When not in the panorama shooting mode, the process proceeds to a shooting flow other than panorama shooting. In the panorama shooting flow, the built-in counter is set to n = 1 (S103), and a panorama shooting monitoring flow described later is executed (S104). When the release switch 25 is turned on in the panoramic shooting monitoring state (S105), a panoramic image capture described later is executed, and the shooting of n = 1 frame is completed (S106). It is determined whether or not panoramic shooting is completed (S107). If not, the built-in counter is set to n = n + 1, and the process returns to the panoramic shooting monitoring flow (S108). Thereafter, the panorama shooting monitoring flow S104 or the panorama image capturing flow S106 is executed as in the case of n = 1 frame, and the panorama n + 1 frame image capturing is executed after the release switch 25 is turned on. When a predetermined number of frames are shot and the panorama shooting is finished, the panorama shooting flow is finished (S107).

図4は前記パノラマ撮影モニタリングフローS104である。まず、撮像レンズ系1で結像した被写体を撮像素子2で撮像し、得られたビデオ信号をモニタ装置11に表示する(S201)。このときには、図6(a)に示すように、モニタ装置11にはこれから撮影しようとする被写体のスルー画像が表示される。これと同時に、3軸加速度センサ16及び磁気方位センサ17で検知した垂直信号及び方位信号に基づいて得た矩形枠状の撮影フレームFrを赤色線(以下、赤色撮影フレームと称する)でモニタ装置11に重ねて表示する(S202)。また、モニタリング動作中は、赤色撮影フレームFrで囲まれた領域の被写体の画像データ、すなわちビデオ信号を検出しておく(S203)。   FIG. 4 shows the panorama shooting monitoring flow S104. First, the subject imaged by the imaging lens system 1 is imaged by the imaging device 2, and the obtained video signal is displayed on the monitor device 11 (S201). At this time, as shown in FIG. 6A, the monitor device 11 displays a through image of the subject to be photographed. At the same time, the rectangular frame-shaped imaging frame Fr obtained based on the vertical signal and the orientation signal detected by the three-axis acceleration sensor 16 and the magnetic orientation sensor 17 is indicated by a red line (hereinafter referred to as a red imaging frame). (S202). During the monitoring operation, the image data of the subject in the area surrounded by the red photographing frame Fr, that is, the video signal is detected (S203).

次いで、撮影駒数nを判定する(S204)。n=1のときには、3軸加速度センサ16で検知した垂直信号に基づいて得た垂直線VLと水平線HLを青色線でモニタ装置11に重ねて表示する(S205)。撮影者はモニタ装置11を視認しながら表示されている垂直線VLと水平線HLとを参照して被写体に対する垂直方向と水平方向を設定し、同じく表示されている赤色撮影フレームFrによって撮影範囲を設定する(S210)。このとき赤色撮影フレームFrにはn=1が同時に表示される。この状態でメインフローに示したようにレリーズスイッチ25がオンされるとパノラマ画像取込フローS106を行う。   Next, the number n of shooting frames is determined (S204). When n = 1, the vertical line VL and the horizontal line HL obtained based on the vertical signal detected by the three-axis acceleration sensor 16 are overlaid on the monitor device 11 with a blue line (S205). The photographer sets the vertical direction and the horizontal direction with respect to the subject with reference to the vertical line VL and the horizontal line HL displayed while viewing the monitor device 11, and sets the photographing range by the red photographing frame Fr also displayed. (S210). At this time, n = 1 is simultaneously displayed in the red photographing frame Fr. When the release switch 25 is turned on in this state as shown in the main flow, a panoramic image capturing flow S106 is performed.

図5はパノラマ画像取込フローS106である。レリーズスイッチ25がオンされるとモニタ装置11に表示されていた被写体像のビデオ信号が画像データとしてメモリ5に書き込まれる(S301)。取り込まれた画像データには、撮像情報としてnの値、ここではn=1を付加する(S302)。また、同時に赤色撮影フレームによって設定された撮影範囲の情報を付加する(S303)。そして、これら付加した情報とともに当該画像データをパノラマ撮影の画像データの第n駒としてファイルに格納する(S304)。   FIG. 5 is a panoramic image capture flow S106. When the release switch 25 is turned on, the video signal of the subject image displayed on the monitor device 11 is written in the memory 5 as image data (S301). A value of n, here, n = 1 is added to the captured image data as imaging information (S302). At the same time, information on the photographing range set by the red photographing frame is added (S303). Then, together with the added information, the image data is stored in the file as the nth frame of the panoramic image data (S304).

このとき、撮影した第n駒目の画像と共に付加された撮影範囲の情報は3軸加速度センサ16で検知した垂直信号、そのときの撮像光学系1の撮影画角、カメラの撮影位置等のデータに基づき、撮影した画像の範囲を垂直方向及び水平方向の絶対値として格納することが可能である。したがって、撮影後にモニタ装置11には第n駒目の撮影した範囲を表示することが可能になる。   At this time, information on the photographing range added together with the photographed image of the nth frame is data such as a vertical signal detected by the triaxial acceleration sensor 16, a photographing field angle of the imaging optical system 1 at that time, a photographing position of the camera, and the like The range of the captured image can be stored as absolute values in the vertical and horizontal directions. Therefore, it is possible to display the nth frame imaged range on the monitor device 11 after the image capture.

前記パノラマ撮影モニタリングフローS104のステップS204において、n=1ではないとき、すなわち2駒以降の撮影時には、第1駒目のときと同様にモニタ装置11に被写体のスルー画像を表示する。このとき、撮影範囲を設定するための赤色撮影フレームを重ねて表示することも同じである。次いで、カメラに予め設定されているパノラマ撮影方向を判定し、パノラマ撮影を被写体に向かって順次右方向、あるいは左方向のいずれに行うように設定されているかを判定する(S207)。このときパノラマ撮影方向が設定されていない場合には、直前のn−1駒目の撮影光軸情報と現在のn駒目の光軸情報とを比較すればカメラの撮影方向を自動で判定できるように構成することも可能である。パノラマ撮影方向が右方向の場合には、直前の駒n−1を左とし、今回の駒nを右とする(S208)。左方向の場合にはこれと反対とする(S209)。なお、ここでは右方向に設定されているものとする。そして、図6(b)に示すように、モニタ装置11には、今度撮影する撮影駒数、すなわちn駒を示す値n=2が赤色文字で表示される。しかし、この場合にはモニタ装置11は図6(a)に示した垂直線VLと水平線HLを表示する代わりに、その直前に撮影した第n−1駒の画像データと共にファイルに格納した撮影フレームを読み出し、これをモニタ装置に黄色線で表示する。この黄色線の撮影フレームは前回撮影した画像の範囲を示す既撮影フレームFyとなるものであり(以下、黄色既撮影フレームと称する)、モニタ装置11に表示された黄色既撮影フレームFyで囲まれる範囲は第n−1駒目で撮影が完了した範囲を示している。この黄色既撮影フレームFyはモニタ装置11に表示される被写体のスルー画像の特定の位置に対応して表示されることになり、被写体に対する絶対位置は変化しないため、カメラを移動して被写体のスルー画像がモニタ装置11上で移動されたときには黄色既撮影フレームFyも当該スルー画像と共に移動されることになる。また、この黄色既撮影フレームFyと同時に、黄色既撮影フレームFyの撮影駒数、すなわちn−1駒を示す値n=1が黄色文字で表示される。さらに、この黄色既撮影フレームFyが今度撮影する画像の左側の画像であることを示す表示を行うようにしてもよい。   In step S204 of the panorama shooting monitoring flow S104, when n = 1, that is, when shooting two frames or more, a through image of the subject is displayed on the monitor device 11 as in the first frame. At this time, the red photographing frame for setting the photographing range is displayed in an overlapping manner. Next, the panoramic shooting direction set in advance in the camera is determined, and it is determined whether panoramic shooting is set to be sequentially performed in the right direction or the left direction toward the subject (S207). At this time, if the panoramic shooting direction is not set, the shooting direction of the camera can be automatically determined by comparing the immediately preceding n-1 frame shooting optical axis information with the current nth frame optical axis information. It is also possible to configure as described above. When the panorama shooting direction is the right direction, the immediately preceding frame n-1 is set to the left and the current frame n is set to the right (S208). In the case of the left direction, the opposite is true (S209). In this case, it is assumed that the right direction is set. Then, as shown in FIG. 6B, the monitor device 11 displays the number of frames to be captured next time, that is, the value n = 2 indicating n frames, in red characters. However, in this case, instead of displaying the vertical line VL and the horizontal line HL shown in FIG. 6A, the monitor device 11 displays the shooting frame stored in the file together with the image data of the (n-1) th frame shot immediately before. Read out and display this on the monitor device with a yellow line. The yellow frame is an already captured frame Fy indicating the range of the previously captured image (hereinafter referred to as a yellow captured frame), and is surrounded by the yellow captured frame Fy displayed on the monitor device 11. The range indicates the range in which shooting is completed at the (n-1) th frame. The yellow already captured frame Fy is displayed in correspondence with a specific position of the through image of the subject displayed on the monitor device 11, and the absolute position with respect to the subject does not change. When the image is moved on the monitor device 11, the yellow already captured frame Fy is also moved together with the through image. At the same time as the yellow shot frame Fy, the number of shot frames of the yellow shot frame Fy, that is, the value n = 1 indicating n−1 frames is displayed in yellow characters. Further, a display may be made to indicate that the yellow already captured frame Fy is an image on the left side of the image to be captured next time.

したがって、モニタ装置11には、先に撮影した被写体の範囲が黄色既撮影フレームFyで表示され、これと同時に今度撮影しようとする被写体のスルー像を撮影する範囲が赤色撮影フレームFrで表示されることになる。そのため、先に撮影した被写体の右側領域を水平方向に連続してパノラマ撮影する場合には、図6(c)に示すように、黄色既撮影フレームFyの右側の縦線に赤色撮影フレームFrの左側の縦線を重ねることで、第n−1駒目で撮影した画像に水平方向の右側に接した画像を撮影することができる。この場合、通常では黄色既撮影フレームFyと赤色撮影フレーム線Frが完全に一致するように重ね、その上で赤色撮影フレームFrが水平右方向に移動するようにカメラの方位を変化させて撮影範囲を設定するが、このとき重ねられた各フレームの赤色線と黄色線は加色混合によって白色に近い高輝度の線として表示されるため、両フレームの重なりを正確に行うことが可能になる。このとき、これら両フレームの重なり状態を判定し、先に判定したパノラマ撮影方向と、両フレームの重なり方向とが一致していないときにはパノラマ撮影方向を反対向きに撮影する状況であると判定し、モニタ装置11に「NG」の表示を行うようにすることも可能である。   Accordingly, on the monitor device 11, the range of the previously captured subject is displayed in the yellow already captured frame Fy, and at the same time, the range in which the through image of the subject to be captured is captured is displayed in the red captured frame Fr. It will be. Therefore, when panoramic shooting is continuously performed in the horizontal direction in the right area of the previously shot subject, as shown in FIG. 6C, the red shooting frame Fr is displayed on the right vertical line of the yellow shooting frame Fy. By superimposing the left vertical line, an image in contact with the right side in the horizontal direction can be captured with the image captured at the (n-1) th frame. In this case, usually, the yellow photographing frame Fy and the red photographing frame line Fr are overlapped so as to completely coincide with each other, and the camera direction is changed so that the red photographing frame Fr moves in the horizontal right direction. However, since the red line and the yellow line of each frame superimposed at this time are displayed as a high-luminance line close to white by additive color mixing, it is possible to accurately overlap the frames. At this time, the overlapping state of these two frames is determined, and when the panorama shooting direction determined earlier and the overlapping direction of both frames do not coincide with each other, it is determined that the panorama shooting direction is shot in the opposite direction. It is also possible to display “NG” on the monitor device 11.

次の第n+1駒目の撮影では、n駒目で撮影した被写体像の範囲が黄色既撮影フレームFyで表示され、その撮影駒数が黄色文字で表示されることになり、第n+1駒目の被写体のスルー画像と共に第n+1回目で撮影を行う範囲が赤色撮影フレームFrで表示され、かつ今度の撮影駒数が赤色文字で表示されることになる。したがって、第n駒目の場合と同様に黄色既撮影フレームFyと赤色撮影フレームFrを利用しながら撮影範囲を設定することで水平方向右側に接した被写体を撮影することが可能である。そして、バノラマ画像取込フローで説明したように撮影した画像を付加情報とともに画像データの第n+1駒としてファイルに格納する。   In the next shooting of the (n + 1) th frame, the range of the subject image shot at the nth frame is displayed in the yellow already shot frame Fy, and the number of shooting frames is displayed in yellow characters. The range of shooting at the (n + 1) th time together with the through image of the subject is displayed in the red shooting frame Fr, and the current number of shooting frames is displayed in red characters. Therefore, as in the case of the n-th frame, it is possible to photograph a subject in contact with the right side in the horizontal direction by setting the photographing range while using the yellow photographed frame Fy and the red photographed frame Fr. The captured image is stored in the file as the (n + 1) th frame of the image data together with the additional information as described in the vanorama image capturing flow.

以上のようにして第n+x駒まで所定の駒数の撮影を完了すると、ファイルされた画像データを第1駒から第n+x駒の順序で右方向に並べ、これらを水平方向に合成することで一つの画像となる。この合成された画像は、黄色既撮影フレームを基準とし、これに赤色撮影フレームを重ねるようにして並べられるため、隣接する画像が適切に連続された画像となる。このように、撮影者は黄色既撮影フレームと赤色撮影フレームを利用し、両フレームの一部を重ねるだけで、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適切なパノラマ撮影が実現できる。   When a predetermined number of frames have been photographed up to the (n + x) th frame as described above, the filed image data is arranged in the right direction in the order from the first frame to the (n + x) th frame, and these are combined in the horizontal direction. It becomes an image. Since these synthesized images are arranged with a yellow photographing frame as a reference and a red photographing frame superimposed on the yellow photographing frame, adjacent images become appropriately continuous images. In this way, the photographer uses the yellow and red shooting frames, and by simply overlapping a part of both frames, appropriate panoramic shooting can be performed even for subjects where it is difficult to uniquely determine the feature points of the subject. realizable.

以上の説明は、パノラマ撮影を右方向に順次撮影する場合を示したが、左方向に順次撮影する場合も同様である。また、重力加速度センサの出力を利用することで垂直方向、すなわち上下方向に順次撮影して合成するパノラマ撮影を行う場合も同様である。   Although the above description has shown the case where panoramic shooting is sequentially performed in the right direction, the same applies to the case where sequential shooting is performed in the left direction. The same applies to panoramic shooting that uses the output of the gravitational acceleration sensor to sequentially shoot and synthesize in the vertical direction, that is, the vertical direction.

次に、以上の構成のカメラにおけるステレオ撮影について説明する。図3のメインフローを再度参照すると、ステップS102においてモード切替ダイヤル22を判定し、モード切替ダイヤル25がパノラマ撮影モードでなく、ステレオ撮影モードに設定されていることを判定するとステレオ撮影フローに入る(S110)。ステレオ撮影モードではないときには、その他の撮影フローに移行する(S120)。ステレオ撮影フローでは、内蔵カウンタをn=1に設定し(S111)、後述するステレオ撮影モニタリングフローを実行する(S112)。ステレオ撮影モニタリングの状態でレリーズスイッチ25がオンしたときには(S113)、後述するステレオ画像取込を実行する(S114)。これによりn=1駒目の撮影が完了するが、このときには、n=2であるか否かを判定し、n=2のときにはステレオ撮影を終了する(S115)。n=2ではないと判定したときには、内蔵カウンタをn=n+1、すなわちn=2に設定し(S116)、前記ステレオ撮影モニタリングフローS112に戻り、以下n=1駒目と同様にレリーズスイッチ25のオンを待ってステレオn=2駒目の画像取込を実行する(S114)。   Next, stereo shooting in the camera having the above configuration will be described. Referring again to the main flow of FIG. 3, when the mode switching dial 22 is determined in step S102 and it is determined that the mode switching dial 25 is set to the stereo shooting mode instead of the panoramic shooting mode, the stereo shooting flow is entered ( S110). When the stereo shooting mode is not selected, the flow proceeds to another shooting flow (S120). In the stereo shooting flow, the built-in counter is set to n = 1 (S111), and a stereo shooting monitoring flow described later is executed (S112). When the release switch 25 is turned on in the state of stereo shooting monitoring (S113), a stereo image capture described later is executed (S114). This completes the shooting of n = 1 frame. At this time, it is determined whether or not n = 2, and when n = 2, the stereo shooting is terminated (S115). If it is determined that n = 2, the built-in counter is set to n = n + 1, that is, n = 2 (S116), and the process returns to the stereo shooting monitoring flow S112. Waiting for the on state, the stereo n = 2 frame image capture is executed (S114).

図7は前記ステレオ撮影モニタリングフローS112である。撮像レンズ系1で結像した被写体を撮像素子2で撮像し、得られたビデオ信号をモニタ装置11に表示する(S401)。このときにはモニタ装置11にはこれから撮影する被写体のスルー画像が表示される。これと同時に、図9(a)に示すように、3軸加速度センサ16で検知した垂直信号と磁気方位センサ17で検知した方位信号に基づいて得た矩形枠状の撮影フレームFrを赤色線(以下、赤色撮影フレームと称する)でモニタ装置11に重ねて表示する(S402)。また、モニタリング動作中は、赤色撮影フレームFrで囲まれた領域の被写体の画像データ、すなわちビデオ信号を検出しておく(S403)。なお、ステレオ撮影においては、この赤色撮影フレームFrは1つの画像を水平方向に2分した1/2の範囲に設定されている。   FIG. 7 shows the stereo photographing monitoring flow S112. The subject imaged by the imaging lens system 1 is imaged by the imaging device 2, and the obtained video signal is displayed on the monitor device 11 (S401). At this time, a through image of the subject to be photographed is displayed on the monitor device 11. At the same time, as shown in FIG. 9A, a rectangular frame-shaped imaging frame Fr obtained based on the vertical signal detected by the three-axis acceleration sensor 16 and the direction signal detected by the magnetic direction sensor 17 is represented by a red line ( Hereinafter, the image is displayed on the monitor device 11 in a superimposed manner (S402). During the monitoring operation, the image data of the subject in the area surrounded by the red photographing frame Fr, that is, the video signal is detected (S403). In stereo shooting, the red shooting frame Fr is set to a range of 1/2 that divides one image into two in the horizontal direction.

次いで、ステレオ撮影を最初に被写体に向かって左側の位置から撮影し、次に右側の位置から撮影を行う撮影方式、すなわち左先撮影方式に設定されているか、あるいはその反対の右先撮影方式に設定されているかを判定する(S404)。左先撮影の場合には、n値を判定し(S405)、n=1のときには撮影画像の左画像の撮影であると認識し、モニタ装置11に表示される被写体のスルー画像に、3軸加速度センサ16で検知した垂直信号に基づいて得た垂直線VLと水平線HLを青色線でモニタ装置11に重ねて表示する(S406)。撮影者はモニタ装置11を視認しながら表示されている垂直線VLと水平線HLとを参照して被写体に対する垂直方向と水平方向を設定し、同じく表示されている赤色フレームFrによってスルー画像の撮影範囲を設定する。このとき、撮影画像のn値とこれに対応して撮影画像が左画像であることを表示する(S407)。この状態でメインフローに示したようにレリーズスイッチ25がオンされると画像取込フローを行う。   Next, stereo shooting is first performed from the left position toward the subject, and then shooting is performed from the right position, that is, the left-end shooting method is set, or vice versa. It is determined whether it is set (S404). In the case of left-end shooting, the n value is determined (S405). When n = 1, it is recognized that the left image of the shot image is shot, and the subject through image displayed on the monitor device 11 is displayed in three axes. The vertical line VL and the horizontal line HL obtained based on the vertical signal detected by the acceleration sensor 16 are displayed on the monitor device 11 so as to overlap each other with a blue line (S406). The photographer refers to the vertical line VL and the horizontal line HL displayed while viewing the monitor device 11, and sets the vertical direction and the horizontal direction with respect to the subject. The photographing range of the through image is displayed by the red frame Fr also displayed. Set. At this time, the n value of the photographed image and the fact that the photographed image is the left image are displayed (S407). In this state, when the release switch 25 is turned on as shown in the main flow, an image capture flow is performed.

図8はステレオ画像取込フローS114である。レリーズスイッチ25がオンされるとモニタ装置11に表示されていた被写体像のビデオ信号が画像データとしてメモリ5に書き込まれる。取り込まれた画像データには、撮像情報としてn値を付加する(S502)。また、同時に赤色撮影フレームFrによって設定された撮影範囲の情報を付加する(S503)。そして、これら付加した情報とともに当該画像データをステレオ撮影の画像データの第1駒としてファイルに格納する(S504)。この格納された画像は1つの画像の水平方向の1/2の範囲であることは言うまでもない。   FIG. 8 is a stereo image capturing flow S114. When the release switch 25 is turned on, the video signal of the subject image displayed on the monitor device 11 is written into the memory 5 as image data. An n value is added as imaging information to the captured image data (S502). At the same time, information on the photographing range set by the red photographing frame Fr is added (S503). Then, together with the added information, the image data is stored in the file as the first frame of stereo image data (S504). Needless to say, the stored image is a range of ½ of the horizontal direction of one image.

このとき、撮影した第1駒目の画像と共に付加された撮影範囲の情報は、3軸加速度センサ16から得られる垂直線と水平線、そのときの撮像光学系1の撮影画角、カメラの撮影位置等のデータに基づき、撮影した画像の範囲を垂直方向及び水平方向の絶対値として格納することが可能である。したがって、撮影後にモニタ装置11には第1駒目の撮影した範囲を表示することが可能になる。   At this time, information on the photographing range added together with the photographed first frame image includes vertical and horizontal lines obtained from the triaxial acceleration sensor 16, the photographing field angle of the imaging optical system 1 at that time, and the photographing position of the camera. Based on such data, it is possible to store the range of captured images as absolute values in the vertical and horizontal directions. Therefore, it is possible to display the range of the first frame shot on the monitor device 11 after shooting.

前記ステレオ撮影モニタリングフローS112において、ステップS405においてn=1ではないとき、すなわちn=2のときの撮影時には、撮影者は適切な距離(10数〜数十cm)だけカメラを右方向に移動した上で、第1駒目のときと同様にモニタ装置11に被写体のスルー画像を表示し、同時に撮影範囲を設定するための赤色撮影フレームFrを重ねて表示し、撮影範囲を検出することは同じである(S401〜S403)。しかし、この場合には図9(b)に示すように、モニタ装置11には垂直線と水平線を表示する代わりに、その直前に撮影した第1駒の画像データと共にファイルに格納した撮影フレームを読み出し、この撮影フレームFyをモニタ装置11に黄色線で表示する(S408)。この黄色線の撮影フレームFy(以下、黄色既撮影フレームと称する)は、第1駒目の画像データに対応しているため、モニタ装置11に表示されて黄色既撮影フレームFyで囲まれる領域は第1駒目で撮影が完了した範囲である。すなわち、この黄色既撮影フレームFyはモニタ装置11に表示される被写体のスルー画像の特定の位置に対応して表示されることになり、カメラを移動して被写体のスルー画像がモニタ装置11上で移動されたときには黄色既撮影フレームFyも当該スルー像と共に移動されることになる。   In the stereo shooting monitoring flow S112, when n = 1 is not satisfied in step S405, that is, when shooting is performed when n = 2, the photographer moves the camera to the right by an appropriate distance (10 to several tens of centimeters). In the same manner as in the case of the first frame, the through image of the subject is displayed on the monitor device 11, and the red shooting frame Fr for setting the shooting range is displayed at the same time, and the shooting range is detected. (S401 to S403). However, in this case, as shown in FIG. 9B, instead of displaying the vertical line and the horizontal line on the monitor device 11, the captured frame stored in the file is read together with the image data of the first frame captured immediately before that. The photographing frame Fy is displayed with a yellow line on the monitor device 11 (S408). Since this yellow line shooting frame Fy (hereinafter referred to as a yellow already shot frame) corresponds to the image data of the first frame, the area displayed on the monitor device 11 and surrounded by the yellow already shot frame Fy is This is the range in which shooting is completed in the first frame. That is, the yellow already captured frame Fy is displayed corresponding to a specific position of the through image of the subject displayed on the monitor device 11, and the camera is moved so that the through image of the subject is displayed on the monitor device 11. When it is moved, the yellow already-captured frame Fy is also moved together with the through image.

したがって、モニタ装置11には、先に撮影した被写体の範囲が黄色既撮影フレームFyで表示され、これと同時に今度撮影する被写体のスルー画像を撮影する範囲が赤色撮影フレームFrで表示されることになる。また、同時に今度の撮影画像のn値とこれに対応する撮影画像が右画像であることを表示する(S409)。したがって、先に撮影した被写体をステレオ撮影する場合には、黄色既撮影フレームFyと赤色撮影フレームFrを重ねることで、第1駒目で撮影した画像と同じ範囲を第2駒目で撮影することができる。このように、黄色既撮影フレームFyと赤色撮影フレームFrを重ねると、重ねられたフレーム線は加色混合によって白色に近い高輝度の線として表示されるため、両フレームの重なりを正確に行うことが可能になる。その後はステレオ画像取込みフローで説明したように画像データを第2駒としてファイルに格納する。   Accordingly, the monitor device 11 displays the range of the previously captured subject in the yellow already captured frame Fy, and simultaneously displays the range in which the through image of the subject to be captured is captured in the red captured frame Fr. Become. At the same time, it is displayed that the n value of the current captured image and the corresponding captured image are the right image (S409). Therefore, when stereo shooting is performed on the previously shot subject, the same range as the image shot at the first frame is shot at the second frame by superimposing the yellow shot frame Fy and the red shooting frame Fr. Can do. As described above, when the yellow photographed frame Fy and the red photographed frame Fr are overlapped, the overlapped frame lines are displayed as high-intensity lines close to white by additive color mixing, so that both frames are accurately overlapped. Is possible. Thereafter, the image data is stored in the file as the second frame as described in the stereo image capturing flow.

以上のようにして第1駒目と第2駒目の各撮影を完了すると、ファイルされた画像データを第1駒目と第2駒目を左右に並べ、これらを合成することで両画像が一体化された1つのステレオ画像となる。このように、撮影者は黄色既撮影フレームと赤色撮影フレームを重ねるだけで、被写体の特徴点を一義的に決めることが難しい被写体の場合でも全く同じ範囲を異なる位置から撮影することができ、適切なステレオ撮影が実現できる。   When each shooting of the first frame and the second frame is completed as described above, the filed image data is arranged on the left and right of the first frame and the second frame, and the two images are synthesized by combining them. One unified stereo image is obtained. In this way, the photographer can shoot the exact same range from different positions even in the case of a subject where it is difficult to uniquely determine the feature point of the subject by simply overlapping the yellow and red frames. Stereo shooting is possible.

なお、ステップS404において右先撮影に設定されていた場合は、左先撮影のフローにおいて破線で囲んだステップS405〜S409の左右を反対にしたフローとなるので、等価なステップを破線で囲んでその詳細な図示と説明は省略する。また、ステレオ撮影においてもパノラマ撮影時と同様に撮影光軸方向の変化に基づいて第2駒目を左画像あるいは右画像であることを自動的に判定するように構成することは可能である。   If the right-handed shooting is set in step S404, the left-handed shooting flow is a flow in which the left and right of steps S405 to S409 surrounded by a broken line are reversed. Detailed illustration and description are omitted. In stereo shooting, it is possible to automatically determine that the second frame is the left image or the right image based on the change in the direction of the shooting optical axis as in panoramic shooting.

ここで、パノラマ撮影及びステレオ撮影のいずれにおいても、黄色既撮影フレームFyと赤色撮影フレームFrとが重なっている領域を特別な色で表示することで、両フレームの位置合わせずれを明確に表示して両フレーム線の位置合わせを容易に行うことができる。例えば、図10に示すように、黄色既撮影フレームFyで囲まれる範囲と赤色撮影フレームFrで囲まれる範囲の画像は通常のカラーで表示しているが、両撮影フレームが重なっている範囲の画像範囲Vxを赤一色で表示することで両撮影フレームの重なりを容易に確認することができ、赤色画像が表示されないようにすることで迅速な撮影範囲の設定が可能になる。   Here, in both panoramic shooting and stereo shooting, the area where the yellow shooting frame Fy and the red shooting frame Fr overlap is displayed in a special color, so that the misalignment of both frames is clearly displayed. Thus, it is possible to easily align both frame lines. For example, as shown in FIG. 10, images in a range surrounded by a yellow captured frame Fy and a range surrounded by a red captured frame Fr are displayed in normal colors, but an image in a range where both captured frames overlap. By displaying the range Vx in a single red color, it is possible to easily confirm the overlap of the two shooting frames, and by setting the red image not to be displayed, it is possible to set the shooting range quickly.

本発明の実施例の主要部の構成を示すブロック構成図である。It is a block block diagram which shows the structure of the principal part of the Example of this invention. モニタ装置に表示する水平線、垂直線、撮影フレームを説明する図である。It is a figure explaining the horizontal line, vertical line, and imaging | photography frame which are displayed on a monitor apparatus. メインフローのフローチャートである。It is a flowchart of a main flow. パノラマ撮影モニタリングフローのフローチャートである。It is a flowchart of a panoramic photography monitoring flow. パノラマ画像取込フローのフローチャートである。It is a flowchart of a panoramic image capture flow. パノラマ撮影におけるモニタ装置の表示を示す図である。It is a figure which shows the display of the monitor apparatus in panoramic imaging. ステレオ撮影モニタリングフローのフローチャートである。It is a flowchart of a stereo imaging | photography monitoring flow. ステレオ画像取込フローのフローチャートである。It is a flowchart of a stereo image capture flow. ステレオ撮影におけるモニタ装置の表示を示す図である。It is a figure which shows the display of the monitor apparatus in stereo imaging | photography. モニタ装置の他の表示形態を示す図である。It is a figure which shows the other display form of a monitor apparatus.

符号の説明Explanation of symbols

1 撮像光学系
2 撮像素子(CCD)
5 メモリ(DRAM)
6 VRAM
8 ビデオエンコーダ
11 モニタ装置
16 3軸加速度センサ
17 磁気方位センサ
21 メインスイッチ
22 モード切替スイッチ
25 レリーズスイッチ
100 マイコン
VL 垂直線
HL 水平線
F 撮影フレーム
Fr 赤色撮影フレーム
Fy 黄色既撮影フレーム

1 Imaging optical system 2 Imaging device (CCD)
5 Memory (DRAM)
6 VRAM
8 Video Encoder 11 Monitor 16 Triaxial Acceleration Sensor 17 Magnetic Direction Sensor 21 Main Switch 22 Mode Switch 25 Release Switch 100 Microcomputer VL Vertical Line HL Horizontal Line F Shooting Frame Fr Red Shooting Frame Fy Yellow Already Shooting Frame

Claims (10)

複数の画像を撮像し、撮像した複数の画像からパノラマ画像またはステレオ画像を得るようにしたカメラにおいて、先に撮影した画像の撮影範囲を示す既撮影フレームと、これから撮影する画像の撮影範囲を示す撮影フレームとを同時に表示することが可能なモニタ装置を備えており、さらに、撮影しようとする画像をスルー画像として前記モニタ装置に表示する手段と、撮影する撮影範囲を検知する手段と、検知した撮影範囲を前記撮影フレームとして前記モニタ装置に表示する手段と、撮影した画像の画像データを取り込むと共に前記撮影フレームのデータを取り込んで記憶する手段と、前記記憶した撮影フレームのデータに基づいて前記既撮影フレームとして前記モニタ装置に表示する手段とを備え、前記撮影範囲を検知する手段は、カメラの垂直方向を検知する垂直方向センサと、水平方位を検知する方位センサと、前記各センサの出力と撮像光学系の焦点距離等の情報に基づいて前記撮影範囲を演算する手段とを備えることを特徴とするカメラ。 In a camera that captures a plurality of images and obtains a panorama image or a stereo image from the plurality of captured images, it indicates the already-captured frame indicating the capture range of the image captured first, and the capture range of the image to be captured in the future A monitor device capable of simultaneously displaying a shooting frame; a means for displaying an image to be shot on the monitor device as a through image; a means for detecting a shooting range to be shot; Means for displaying the photographing range on the monitor device as the photographing frame; means for capturing image data of the photographed image and capturing and storing the data of the photographing frame; and based on the stored photographing frame data. Means for displaying on the monitor device as a photographing frame, and means for detecting the photographing range, Comprise a vertical sensor for detecting a vertical camera, an azimuth sensor for detecting an horizontal orientation, and means for calculating the imaging range based on the focal length information output an imaging optical system of each sensor Camera characterized by. 前記垂直方向センサにより検知された垂直方向を示す垂直線と、前記方位センサにより検知された水平方位を示す水平線とを前記モニタ装置に表示する手段を備える請求項に記載のカメラ。 2. The camera according to claim 1 , further comprising means for displaying a vertical line indicating a vertical direction detected by the vertical direction sensor and a horizontal line indicating a horizontal direction detected by the direction sensor on the monitor device. 前記既撮影フレームと前記撮影フレームを判別可能な形態で表示したことを特徴とする請求項1又は2に記載のカメラ。 The camera according to claim 1 or 2, characterized in that displaying the captured frame and the already captured frame in distinguishable forms. 前記既撮影フレームと前記撮影フレームを異なる色で表示することを特徴とする請求項に記載のカメラ。 The camera according to claim 3 , wherein the captured frame and the captured frame are displayed in different colors. 前記既撮影フレームで囲まれる範囲と、前記撮影フレームで囲まれる範囲とが重なる範囲を他と区別可能な色で表示することを特徴とする請求項3又は4に記載のカメラ。 The camera according to claim 3 or 4 , wherein a range in which the range surrounded by the already-captured frames and the range surrounded by the captured frames overlap is displayed in a color distinguishable from the others. 前記カメラは先に撮影した画像と次に撮影した画像の2つ以上の画像を順次水平方向又は垂直方向に配列して1つの画像とするパノラマ撮影可能なカメラであることを特徴とする請求項1ないし5のいずれかに記載のカメラ。 The camera is a panoramic camera capable of taking a single image by sequentially arranging two or more images of a first image and a next image in the horizontal direction or the vertical direction. The camera according to any one of 1 to 5 . 前記撮影した画像の駒番号を前記モニタ装置に表示する手段を備えることを特徴とする請求項に記載のカメラ。 The camera according to claim 6 , further comprising means for displaying a frame number of the photographed image on the monitor device. 前記カメラは先に撮影した画像と次に撮影した画像の2つの画像を水平方向に並べて1つの画像とするステレオ撮影可能なカメラであることを特徴とする請求項1ないし5のいずれかに記載のカメラ。 The camera according to any one of claims 1 characterized in that it is a stereo camera capable of photographing of one image by arranging two images in the horizontal direction of the images captured in the image and the next taken in the previous 5 Camera. 前記撮影した画像が左画像又は右画像であることをモニタ装置に表示する手段を備えることを特徴とする請求項に記載のカメラ。 The camera according to claim 8 , further comprising means for displaying on the monitor device that the photographed image is a left image or a right image. 前記カメラはデジタルカメラであり、撮影した2つ以上の画像を1つの画像に合成する手段を備えることを特徴とする請求項1ないし9のいずれかに記載のカメラ。 It said camera is a digital camera, camera according to any one of claims 1 to 9, characterized in that it comprises means for combining two or more images captured in a single image.
JP2004196426A 2004-07-02 2004-07-02 camera Expired - Fee Related JP4565909B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004196426A JP4565909B2 (en) 2004-07-02 2004-07-02 camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004196426A JP4565909B2 (en) 2004-07-02 2004-07-02 camera

Publications (2)

Publication Number Publication Date
JP2006020111A JP2006020111A (en) 2006-01-19
JP4565909B2 true JP4565909B2 (en) 2010-10-20

Family

ID=35793922

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004196426A Expired - Fee Related JP4565909B2 (en) 2004-07-02 2004-07-02 camera

Country Status (1)

Country Link
JP (1) JP4565909B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI821753B (en) * 2020-10-06 2023-11-11 日商山葉發動機股份有限公司 straddle type vehicle

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100827089B1 (en) 2006-04-25 2008-05-02 삼성전자주식회사 Method for photographing panorama picture
JP5021370B2 (en) * 2007-06-05 2012-09-05 オリンパスイメージング株式会社 Imaging apparatus, display method, and program
JP4922106B2 (en) * 2007-08-30 2012-04-25 オリンパスイメージング株式会社 Camera, panorama shooting guide display method applied thereto, panorama shooting guide display program
JP4851406B2 (en) * 2007-08-31 2012-01-11 富士フイルム株式会社 Image display method for adjustment in multi-view imaging system and multi-view imaging system
EP2290947A4 (en) 2008-05-20 2011-07-27 Nec Corp Imaging device, mobile information processing terminal, monitor display method for imaging device, and program
JP5248951B2 (en) * 2008-08-12 2013-07-31 ソニーモバイルコミュニケーションズ, エービー CAMERA DEVICE, IMAGE SHOOTING SUPPORT DEVICE, IMAGE SHOOTING SUPPORT METHOD, AND IMAGE SHOOTING SUPPORT PROGRAM
JP5499754B2 (en) * 2010-02-19 2014-05-21 株式会社ニコン Imaging device
JP5402719B2 (en) * 2010-02-26 2014-01-29 富士通株式会社 Stereoscopic image capturing apparatus, stereoscopic image capturing method, and stereoscopic image capturing program
WO2013031155A1 (en) 2011-08-30 2013-03-07 パナソニック株式会社 Imaging device
JP2013078038A (en) * 2011-09-30 2013-04-25 Sharp Corp Imaging device, image processing method, and program
JP5827292B2 (en) * 2013-10-29 2015-12-02 三菱電機株式会社 refrigerator
JP5985029B2 (en) * 2015-10-15 2016-09-06 三菱電機株式会社 refrigerator
KR101717602B1 (en) * 2016-12-21 2017-03-17 (주)지오시스템리서치 System for monitoring an ambient condition of an ocean facility

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000032319A (en) * 1998-07-08 2000-01-28 Canon Inc System, method and device for controlling camera, image processor to be used for the same and record medium
JP2000050136A (en) * 1999-03-23 2000-02-18 Canon Inc Device for photography
JP2000101895A (en) * 1998-09-25 2000-04-07 Sony Corp Image signal photographing device and its method
JP2001145095A (en) * 1999-11-15 2001-05-25 Canon Inc Camera control system and method and storage medium having its operation processing program stored therein
JP2003244727A (en) * 2002-02-13 2003-08-29 Pentax Corp Stereoscopic image pickup system

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05183790A (en) * 1992-01-07 1993-07-23 Canon Inc Electronic still camera
JPH05328205A (en) * 1992-05-26 1993-12-10 Asahi Optical Co Ltd Video signal processing unit
JPH09266561A (en) * 1996-03-28 1997-10-07 Sanyo Electric Co Ltd Digital still camera for generating continuous image and continuous image generating method
JPH1155553A (en) * 1997-08-07 1999-02-26 Sharp Corp Electronic still camera
JP4355371B2 (en) * 1997-09-10 2009-10-28 株式会社ニコン camera
JPH11112841A (en) * 1997-09-30 1999-04-23 Minolta Co Ltd Digital camera

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000032319A (en) * 1998-07-08 2000-01-28 Canon Inc System, method and device for controlling camera, image processor to be used for the same and record medium
JP2000101895A (en) * 1998-09-25 2000-04-07 Sony Corp Image signal photographing device and its method
JP2000050136A (en) * 1999-03-23 2000-02-18 Canon Inc Device for photography
JP2001145095A (en) * 1999-11-15 2001-05-25 Canon Inc Camera control system and method and storage medium having its operation processing program stored therein
JP2003244727A (en) * 2002-02-13 2003-08-29 Pentax Corp Stereoscopic image pickup system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI821753B (en) * 2020-10-06 2023-11-11 日商山葉發動機股份有限公司 straddle type vehicle

Also Published As

Publication number Publication date
JP2006020111A (en) 2006-01-19

Similar Documents

Publication Publication Date Title
JP4363642B2 (en) Map display system and digital camera
JP3896505B2 (en) Electronic camera
JP6833746B2 (en) Imaging equipment, imaging methods, programs and recording media
JP4565909B2 (en) camera
JP2007295547A (en) Digital camera
JP2007201539A (en) Digital camera
JP2005328497A (en) Image pickup apparatus and image pickup method
JP4957825B2 (en) Imaging apparatus and program
JP4635477B2 (en) Image photographing apparatus, pseudo three-dimensional image generation method, and program
JP2011035752A (en) Imaging apparatus
JP5724057B2 (en) Imaging device
JP2010114577A (en) Imaging apparatus, image processor, control method and image processing method of imaging apparatus
JP2010141609A (en) Imaging apparatus
JPH1188731A (en) Camera
JP4522232B2 (en) Imaging device
JP2007267063A (en) Imaging apparatus
JPH10304227A (en) Electronic still camera
JP6836306B2 (en) Imaging control device, its control method, program and recording medium
JP6399120B2 (en) Imaging device
JP2008306284A (en) Photographing apparatus, display method and program
JP2006019852A (en) Image pickup device, zoom image pickup method and program
JP2005278003A (en) Image processing apparatus
JP4897577B2 (en) Imaging device
JP2014241621A (en) Imaging apparatus and program
JP2004363935A (en) Digital camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070607

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20080501

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100413

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100720

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100803

R150 Certificate of patent or registration of utility model

Ref document number: 4565909

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130813

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130813

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130813

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees