JP4565909B2 - camera - Google Patents
camera Download PDFInfo
- Publication number
- JP4565909B2 JP4565909B2 JP2004196426A JP2004196426A JP4565909B2 JP 4565909 B2 JP4565909 B2 JP 4565909B2 JP 2004196426 A JP2004196426 A JP 2004196426A JP 2004196426 A JP2004196426 A JP 2004196426A JP 4565909 B2 JP4565909 B2 JP 4565909B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- captured
- shooting
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Indication In Cameras, And Counting Of Exposures (AREA)
- Studio Devices (AREA)
- Stereoscopic And Panoramic Photography (AREA)
Description
本発明は複数の撮影コマの画像を結合したパノラマ画像、または2つの撮影コマを利用して立体画像を得るステレオ画像を再生するのに最適なカメラに関するものである。 The present invention relates to a camera optimal for reproducing a panoramic image obtained by combining images of a plurality of shooting frames, or a stereo image for obtaining a stereoscopic image using two shooting frames.
1つの撮影コマで撮影可能な画角以上の画像を得るために複数の撮影コマの各画像を合成してパノラマ画像を得るようにしたカメラが提案されている。銀塩フィルムへの撮影を行うカメラでは、撮影した複数の画像のうち隣合う2つのコマの画像の特徴となる部分、例えば被写体の輪郭や特徴のある部分を抽出し、これらの特徴部分をフィルム上で、あるいは印画上で重ねることで複数の連続したコマ画像を合成し、パノラマ画像を得ている。同様に、デジタルカメラでは撮像した複数の画像のうち隣合う2つのコマの画像の特徴なる部分が重なる画像データが一致するようにこれらの画像を画像処理によって合成してパノラマ画像を得ている。特許文献1では、撮影した画像の特徴点を検出してその座標を抽出し、次に撮影した隣接する画像の同じ特徴点の座標を抽出し、これらの特徴点が一致するように隣接する画像を合成してパノラマ画像を得ている。
In order to obtain an image with an angle of view or larger that can be shot with one shooting frame, a camera that combines panoramic images to obtain a panoramic image has been proposed. In a camera that shoots on a silver halide film, a portion that is a feature of two adjacent frames, for example, a contour or a feature portion of a subject, is extracted from a plurality of shot images, and these feature portions are filmed. A panoramic image is obtained by combining a plurality of continuous frame images by superimposing them on the top or on the print. Similarly, in the digital camera, panoramic images are obtained by combining these images by image processing so that the image data in which the characteristic portions of the adjacent two frames of the plurality of captured images coincide with each other. In
また、デジタルカメラにおいて1つの撮影光学系でステレオ画像を構成する2つの撮影画像を得るために、被写体に対してそれぞれ異なる方向から撮影した被写体像を1つの駒内に並べて配置するように合成してステレオ画像を得ている。この場合には、例えば特許文献2に記載のように、最初に被写体の左側から撮像した左画像をモニタの左半分に表示し、当該被写体を右側から撮像する際に撮影しようとする被写体のスルー画像を当該モニタの右半分に表示して右画像を得るようにしたカメラがある。撮影により左右の各画像は1つの駒内に並んだ状態で合成される。このとき、左右の画像が1つの駒内の左半分と右半分の同じ位置に写し込まれるように、左画像と右側のスルー画像のそれぞれの位置決めを行うためのフレームガイドパターンをスーパインポーズしている。
特許文献1及び2の技術は、いずれも被写体の特徴点を抽出し、この特徴点を隣接する画像で一致させてパノラマ画像を得ており、あるいは特徴点をフレームガイドパターンに位置決めしてステレオ画像を得るものであるため、被写体に特徴点が見いだすことが困難な場合、換言すれば特徴点を一義的に決めることが困難な被写体のパノラマ画像やステレオ画像を得ようとした場合には適正な画像を得ることが難しいという問題がある。すなわち、特許文献1のパノラマ画像を得る技術は撮影した画像の特徴点を抽出しているが、遠景を撮影する場合のように特徴点が抽出し難い被写体の場合には、抽出される特徴点があいまいなものになり、隣接する画像を正確に合成したパノラマ画像を得ることが困難である。これは特許文献2のステレオ画像を得る場合も同様であり、被写体に特徴点がある場合にはフレームガイドパターンに被写体を対応位置させることができるが、被写体に特徴点を見いだすことが困難な場合にはフレームガイドパターンに対して被写体を対応位置させることが困難であり、結局左右の画像をそれぞれ正確に位置決めした状態でステレオ画像を得ることは困難である。
The techniques of
本発明の目的は、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適正なパノラマ画像またはステレオ画像を得ることを可能にしたカメラを提供するものである。 An object of the present invention is to provide a camera that can obtain an appropriate panoramic image or stereo image even in the case of a subject in which it is difficult to uniquely determine the feature points of the subject.
本発明は、複数の画像を撮像し、撮像した複数の画像からパノラマ画像またはステレオ画像を得るようにしたカメラにおいて、先に撮影した画像の撮影範囲を示す既撮影フレームと、これから撮影する画像の撮影範囲を示す撮影フレームとを同時に表示することが可能なモニタ装置を備えることを特徴とする。本発明のカメラは、具体的には、撮影しようとする画像をスルー画像としてモニタ装置に表示する手段と、撮影する撮影範囲を検知する手段と、検知した撮影範囲を撮影フレームとしてモニタ装置に表示する手段と、撮影した画像の画像データを取り込むと共に撮影フレームのデータを取り込んで記憶する手段と、記憶した撮影フレームのデータに基づいて既撮影フレームとしてモニタ装置に表示する手段とを備える。 The present invention is a camera that captures a plurality of images and obtains a panorama image or a stereo image from the captured images. and wherein the obtaining Bei a capable monitor device to display the photographing frame indicating the photographic range at the same time. Specifically, the camera of the present invention includes means for displaying an image to be photographed on the monitor device as a through image, means for detecting the photographing range to be photographed, and displaying the sensed photographing range on the monitor device as a photographing frame. Means for capturing the image data of the captured image and capturing and storing the data of the captured frame, and means for displaying on the monitor device as an already captured frame based on the stored captured frame data.
ここで、撮影範囲を検知する手段は、カメラの垂直方向を検知する垂直方向センサと、水平方位を検知する方位センサと、各センサの出力と撮像光学系の焦点距離等の情報に基づいて撮影範囲を演算する手段とを備える構成とする。また、垂直方向センサにより検知された垂直方向を示す垂直線と、方位センサにより検知された水平方位を示す水平線とをモニタ装置に表示する手段を備える構成とする。 Here, the means for detecting the shooting range is a shooting based on information such as a vertical direction sensor for detecting the vertical direction of the camera, an orientation sensor for detecting the horizontal direction, the output of each sensor, and the focal length of the imaging optical system. And a means for calculating a range. In addition, the monitor device is configured to display a vertical line indicating the vertical direction detected by the vertical direction sensor and a horizontal line indicating the horizontal direction detected by the direction sensor on the monitor device.
本発明によれば、先に撮影した画像の撮影範囲を示す既撮影フレームと、これから撮影しようとする画像の撮影範囲を示す撮影フレームとを重ねた状態でモニタ装置に表示することにより、既撮影フレームを基準とし、これに撮影フレームを重ねるようにして位置決めを行うことで、先の撮影画像と次の撮影画像とを隣接した状態に、あるいは同じ位置に撮影することができる。これにより、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適切なパノラマ撮影やステレオ撮影が実現できる。特に、撮影範囲を検知する手段として垂直方向センサ、方位センサ、及びこれらセンサの出力と撮像光学系の焦点距離等の情報に基づいて撮影範囲を演算する手段を備えているので、撮影フレームはカメラの撮影方向が変化した場合でも被写体に対する絶対位置が一定の撮影フレームとしてモニタ装置に表示することができる。 According to the present invention, an already captured frame indicating the capturing range of the previously captured image and a captured frame indicating the capturing range of the image to be captured are displayed on the monitor device in a state of being overlapped. By positioning the frame so that the frame is used as a reference, the previous captured image and the next captured image can be captured adjacent to each other or at the same position. As a result, appropriate panoramic shooting and stereo shooting can be realized even in the case of a subject in which it is difficult to uniquely determine the feature point of the subject. In particular, as a means for detecting the shooting range, a vertical direction sensor, an orientation sensor, and means for calculating the shooting range based on information such as the output of these sensors and the focal length of the imaging optical system are provided. Even when the shooting direction changes, the absolute position with respect to the subject can be displayed on the monitor device as a fixed shooting frame.
本発明においては、既撮影フレームと撮影フレームを判別可能な形態で表示し、両者の重ね合わせや位置決めを容易に行うようにする。例えば、既撮影フレームと撮影フレームを異なる色で表示する。さらには、既撮影フレームで囲まれる範囲と撮影フレームで囲まれる範囲とが重なる範囲を他と区別可能な色で表示することが好ましい。 In the present invention, the already-captured frame and the captured frame are displayed in a discriminable form so that they can be easily superimposed and positioned. For example, the captured frame and the captured frame are displayed in different colors. Furthermore, it is preferable to display a range in which the range surrounded by the already-captured frames and the range surrounded by the captured frames overlap with each other in a distinguishable color.
本発明を先に撮影した画像と次に撮影した画像の2つ以上の画像を順次水平方向又は垂直方向に配列して1つの画像とするパノラマ撮影可能なカメラに適用したときには、撮影した画像の駒番号を前記モニタ装置に表示するように構成することが好ましい。また、本発明を先に撮影した画像と次に撮影した画像の2つの画像を水平方向に並べて1つの画像とするステレオ撮影可能なカメラに適用したときには、撮影した画像が左画像又は右画像であることをモニタ装置に表示するように構成することが好ましい。 When the present invention is applied to a panoramic camera capable of arranging two or more images of a first image and a next image sequentially arranged in the horizontal direction or the vertical direction into one image, It is preferable that the frame number is displayed on the monitor device. In addition, when the present invention is applied to a stereo camera capable of arranging two images, a first image and a next image, in a horizontal direction to form one image, the captured image is a left image or a right image. It is preferable to be configured to display the fact on the monitor device.
次に、本発明の実施例を図面を参照して説明する。実施例1では電子ビューファインダとしてのモニタ装置を備えるデジタルカメラに適用している。図1はデジタルカメラの主要部の構成を示すブロック構成図であり、撮像レンズ系1で結像した被写体像をCCDやCMOS等の撮像素子2で撮像し、画像信号を得る。画像信号はCDS(相関2重サンプリング)回路3においてサンプリングされ、A/D変換器4においてデジタルの画像信号に変換され、マイコン100に入力される。マイコン100では入力された画像信号に対してカラープロセス処理やガンマ補正等の所定の信号処理が施され、その後例えば輝度信号と色信号に対応する画像データが生成される。生成された画像データはDRAM等のメモリ5に書き込まれた後、VRAM(ビデオメモリ)6に書き込まれる。VRAM6に書き込まれた画像データは、D/A変換器7においてアナログの画像信号に変換され、その後ビデオエンコーダ8においてビデオ信号に変換される。ビデオエンコーダ8において変換されたビデオ信号は、ミックスアンドキー等の合成器9に入力され、ここでOSD(オンスクリーンディスプレイ)回路10からのオンスクリーン信号と合成される。オンスクリーン信号と合成されたビデオ信号はLCD等からなるモニタ装置11に出力され、動画または静止画として表示される。前記オンスクリーン信号は、後述するようにパノラマ画像、ステレオ画像を得る際の撮影の位置決め基準となる撮影フレームを表示する信号となる。
Next, embodiments of the present invention will be described with reference to the drawings. The first embodiment is applied to a digital camera including a monitor device as an electronic viewfinder. FIG. 1 is a block diagram showing the configuration of the main part of a digital camera. A subject image formed by an
前記撮像レンズ系1の焦点調節動作はフォーカシングレンズ駆動機構12により行われ、また前記撮像素子2は撮像素子ドライバ、ここではCCDドライバ13により駆動制御される。これらフォーカシングレンズ駆動機構12及びCCDドライバ13は前記マイコン100により制御される。前記メモリ5に書き込まれた画像データはマイコン100によりインターフェース回路14を介してCFカード等の記録媒体15に記録可能である。
The focus adjustment operation of the
前記マイコン100には、各種のスイッチが接続され、これらのスイッチのオン・オフに基づてい所定の制御動作を実行する。例えば、カメラをスリープ状態からオン状態にするためのメインスイッチ21が接続される。また、カメラを記録モード、再生モード、編集モード等のモード設定を行うためのモード切替ダイヤル22が接続される。なお、実施例1ではこのモード切替ダイヤル22により、パノラマ撮影モードとステレオ撮影モードが選択可能とされている。前記モニタ装置11において各種メニュー選択を行うための選択スイッチ23と、当該選択スイッチ23により選択されたメニューの決定を行う決定スイッチ24とが接続される。画像記録、すなわち撮像を行うためのカメラに設けられている図外のレリーズボタンによって操作されるレリーズスイッチ25と、測光及びオートフォーカス動作を行うためのレリーズボタンの半押により操作される測光スイッチ26が接続される。
Various switches are connected to the microcomputer 100, and predetermined control operations are executed based on on / off of these switches. For example, a main switch 21 for connecting the camera from a sleep state to an on state is connected. Further, a mode switching dial 22 for connecting the camera to a mode setting such as a recording mode, a reproduction mode, and an editing mode is connected. In the first embodiment, the panorama shooting mode and the stereo shooting mode can be selected with the mode switching dial 22. A
さらに、前記マイコン100には前記したモニタ装置11に撮影フレームを表示するためのオンスクリーン信号を生成するための3軸加速度センサ16と磁気方位センサ17とが接続されている。前記3軸加速度センサ16は重力加速度方向を検知することができ、カメラの重力方向、すなわち垂直方向を検知し、検知した垂直信号を出力する。また、前記磁気方位センサ17は地磁気を検出して水平方向360°の方位を検知し、検知した方位信号を出力する。これらの垂直信号と方位信号は前記マイコン100に取り込まれ、マイコン100においては、撮像レンズ系1で撮影する撮影範囲を表示するための撮影フレームのデータとなるオンスクリーン信号を生成し、前記OSD回路10においてビデオ信号に合成し、モニタ装置11に表示する撮影画像と共に撮影フレームを表示する。
Further, the microcomputer 100 is connected with a three-axis acceleration sensor 16 and a magnetic direction sensor 17 for generating an on-screen signal for displaying an imaging frame on the
ここで前記マイコン100において生成する撮影フレームについて説明する。図2はモニタ装置に表示される撮影フレームであり、3軸加速度センサ16で検知した垂直信号に基づいて、撮像レンズ系1の光軸を通る垂直方向を画像データとして演算するとともに、この垂直方向に直交する水平方向を画像データとして演算する。そして演算されたこれらの画像データを光軸を通る垂直線VL、水平線HLとしてモニタ装置11に表示する。また、磁気方位センサ17で検知した方位信号と、撮影時における撮像レンズ系1の焦点距離の情報、換言すれば撮影画角の情報とに基づいて、撮像レンズ系1において撮影しようとする被写体の撮像画角よりも予め設定した画角だけ上下、左右にそれぞれ小さい画角に設定した矩形枠状の撮影フレームFを画像データとして演算し、得られる画像データをモニタ装置11に表示する。これにより、モニタ装置11では撮影しようとする被写体のスルー画像に前記垂直線VL、水平線HL、撮影フレームFをスーパインポーズする。そのため、カメラの撮影位置がほぼ同じ位置に保たれていることを前提とすれば、撮影フレームの画像データは、カメラの光軸方向、すなわち撮影方向を変化したことに伴って各センサで検知される垂直方向や水平方位の変化に追従して変化演算されるため、カメラの撮影方向が変化した場合でも被写体に対する絶対位置が一定の撮影フレームFとしてモニタ装置11に表示することが可能になる。
Here, a photographing frame generated in the microcomputer 100 will be described. FIG. 2 shows a photographic frame displayed on the monitor device. Based on the vertical signal detected by the triaxial acceleration sensor 16, the vertical direction passing through the optical axis of the
なお、この実施例では前述のようにモード切替ダイヤル22によって説明を省略した他のモードと共にパノラマ撮影モードとステレオ撮影モードとが切替設定可能に構成されている。また、ここでは前記モニタ装置11をカラーモニタ装置で構成しており、当該モニタ装置11に表示する前記各線やフレームをカラー表示しており、ここでは前記垂直線VLと水平線HLは青色線で表示し、モニタ装置11に被写体のスルー画像をモニタ表示している段階では撮影フレームFを後述するように赤色線または黄色線で表示することが可能とされている。
In this embodiment, as described above, the panorama shooting mode and the stereo shooting mode can be switched and set together with the other modes not described with the mode switching dial 22. Further, here, the
以上の構成のカメラにおけるパノラマ撮影について説明する。図3はメインフローである。メインスイッチ21がオンされると(S101)、モード切替ダイヤル22を判定し、モード切替ダイヤル22がパノラマ撮影モードに設定されているとパノラマ撮影フローに入る(S102)。パノラマ撮影モードではないときには、パノラマ撮影以外の撮影フローに移行する。パノラマ撮影フローでは、内蔵カウンタをn=1に設定し(S103)、後述するパノラマ撮影モニタリングフローを実行する(S104)。パノラマ撮影モニタリングの状態でレリーズスイッチ25がオンしたときには(S105)、後述するパノラマ画像取込を実行し、n=1駒目の撮影が完了する(S106)。これでパノラマ撮影が終了か否かを判定し(S107)、終了ではないときには内蔵カウンタをn=n+1に設定し、前記パノラマ撮影モニタリングフローに戻る(S108)。以下、n=1駒目と同様にパノラマ撮影モニタリングフローS104ないしパノラマ画像取込みフローS106を実行し、レリーズスイッチ25のオンを待ってパノラマn+1駒目の画像取込を実行する。所定の駒数の撮影を行い、パノラマ撮影が終了したときにはパノラマ撮影フローを終了する(S107)。
The panoramic shooting with the camera having the above configuration will be described. FIG. 3 is a main flow. When the main switch 21 is turned on (S101), the mode switching dial 22 is determined, and when the mode switching dial 22 is set to the panorama shooting mode, the panorama shooting flow is entered (S102). When not in the panorama shooting mode, the process proceeds to a shooting flow other than panorama shooting. In the panorama shooting flow, the built-in counter is set to n = 1 (S103), and a panorama shooting monitoring flow described later is executed (S104). When the
図4は前記パノラマ撮影モニタリングフローS104である。まず、撮像レンズ系1で結像した被写体を撮像素子2で撮像し、得られたビデオ信号をモニタ装置11に表示する(S201)。このときには、図6(a)に示すように、モニタ装置11にはこれから撮影しようとする被写体のスルー画像が表示される。これと同時に、3軸加速度センサ16及び磁気方位センサ17で検知した垂直信号及び方位信号に基づいて得た矩形枠状の撮影フレームFrを赤色線(以下、赤色撮影フレームと称する)でモニタ装置11に重ねて表示する(S202)。また、モニタリング動作中は、赤色撮影フレームFrで囲まれた領域の被写体の画像データ、すなわちビデオ信号を検出しておく(S203)。
FIG. 4 shows the panorama shooting monitoring flow S104. First, the subject imaged by the
次いで、撮影駒数nを判定する(S204)。n=1のときには、3軸加速度センサ16で検知した垂直信号に基づいて得た垂直線VLと水平線HLを青色線でモニタ装置11に重ねて表示する(S205)。撮影者はモニタ装置11を視認しながら表示されている垂直線VLと水平線HLとを参照して被写体に対する垂直方向と水平方向を設定し、同じく表示されている赤色撮影フレームFrによって撮影範囲を設定する(S210)。このとき赤色撮影フレームFrにはn=1が同時に表示される。この状態でメインフローに示したようにレリーズスイッチ25がオンされるとパノラマ画像取込フローS106を行う。
Next, the number n of shooting frames is determined (S204). When n = 1, the vertical line VL and the horizontal line HL obtained based on the vertical signal detected by the three-axis acceleration sensor 16 are overlaid on the
図5はパノラマ画像取込フローS106である。レリーズスイッチ25がオンされるとモニタ装置11に表示されていた被写体像のビデオ信号が画像データとしてメモリ5に書き込まれる(S301)。取り込まれた画像データには、撮像情報としてnの値、ここではn=1を付加する(S302)。また、同時に赤色撮影フレームによって設定された撮影範囲の情報を付加する(S303)。そして、これら付加した情報とともに当該画像データをパノラマ撮影の画像データの第n駒としてファイルに格納する(S304)。
FIG. 5 is a panoramic image capture flow S106. When the
このとき、撮影した第n駒目の画像と共に付加された撮影範囲の情報は3軸加速度センサ16で検知した垂直信号、そのときの撮像光学系1の撮影画角、カメラの撮影位置等のデータに基づき、撮影した画像の範囲を垂直方向及び水平方向の絶対値として格納することが可能である。したがって、撮影後にモニタ装置11には第n駒目の撮影した範囲を表示することが可能になる。
At this time, information on the photographing range added together with the photographed image of the nth frame is data such as a vertical signal detected by the triaxial acceleration sensor 16, a photographing field angle of the imaging
前記パノラマ撮影モニタリングフローS104のステップS204において、n=1ではないとき、すなわち2駒以降の撮影時には、第1駒目のときと同様にモニタ装置11に被写体のスルー画像を表示する。このとき、撮影範囲を設定するための赤色撮影フレームを重ねて表示することも同じである。次いで、カメラに予め設定されているパノラマ撮影方向を判定し、パノラマ撮影を被写体に向かって順次右方向、あるいは左方向のいずれに行うように設定されているかを判定する(S207)。このときパノラマ撮影方向が設定されていない場合には、直前のn−1駒目の撮影光軸情報と現在のn駒目の光軸情報とを比較すればカメラの撮影方向を自動で判定できるように構成することも可能である。パノラマ撮影方向が右方向の場合には、直前の駒n−1を左とし、今回の駒nを右とする(S208)。左方向の場合にはこれと反対とする(S209)。なお、ここでは右方向に設定されているものとする。そして、図6(b)に示すように、モニタ装置11には、今度撮影する撮影駒数、すなわちn駒を示す値n=2が赤色文字で表示される。しかし、この場合にはモニタ装置11は図6(a)に示した垂直線VLと水平線HLを表示する代わりに、その直前に撮影した第n−1駒の画像データと共にファイルに格納した撮影フレームを読み出し、これをモニタ装置に黄色線で表示する。この黄色線の撮影フレームは前回撮影した画像の範囲を示す既撮影フレームFyとなるものであり(以下、黄色既撮影フレームと称する)、モニタ装置11に表示された黄色既撮影フレームFyで囲まれる範囲は第n−1駒目で撮影が完了した範囲を示している。この黄色既撮影フレームFyはモニタ装置11に表示される被写体のスルー画像の特定の位置に対応して表示されることになり、被写体に対する絶対位置は変化しないため、カメラを移動して被写体のスルー画像がモニタ装置11上で移動されたときには黄色既撮影フレームFyも当該スルー画像と共に移動されることになる。また、この黄色既撮影フレームFyと同時に、黄色既撮影フレームFyの撮影駒数、すなわちn−1駒を示す値n=1が黄色文字で表示される。さらに、この黄色既撮影フレームFyが今度撮影する画像の左側の画像であることを示す表示を行うようにしてもよい。
In step S204 of the panorama shooting monitoring flow S104, when n = 1, that is, when shooting two frames or more, a through image of the subject is displayed on the
したがって、モニタ装置11には、先に撮影した被写体の範囲が黄色既撮影フレームFyで表示され、これと同時に今度撮影しようとする被写体のスルー像を撮影する範囲が赤色撮影フレームFrで表示されることになる。そのため、先に撮影した被写体の右側領域を水平方向に連続してパノラマ撮影する場合には、図6(c)に示すように、黄色既撮影フレームFyの右側の縦線に赤色撮影フレームFrの左側の縦線を重ねることで、第n−1駒目で撮影した画像に水平方向の右側に接した画像を撮影することができる。この場合、通常では黄色既撮影フレームFyと赤色撮影フレーム線Frが完全に一致するように重ね、その上で赤色撮影フレームFrが水平右方向に移動するようにカメラの方位を変化させて撮影範囲を設定するが、このとき重ねられた各フレームの赤色線と黄色線は加色混合によって白色に近い高輝度の線として表示されるため、両フレームの重なりを正確に行うことが可能になる。このとき、これら両フレームの重なり状態を判定し、先に判定したパノラマ撮影方向と、両フレームの重なり方向とが一致していないときにはパノラマ撮影方向を反対向きに撮影する状況であると判定し、モニタ装置11に「NG」の表示を行うようにすることも可能である。
Accordingly, on the
次の第n+1駒目の撮影では、n駒目で撮影した被写体像の範囲が黄色既撮影フレームFyで表示され、その撮影駒数が黄色文字で表示されることになり、第n+1駒目の被写体のスルー画像と共に第n+1回目で撮影を行う範囲が赤色撮影フレームFrで表示され、かつ今度の撮影駒数が赤色文字で表示されることになる。したがって、第n駒目の場合と同様に黄色既撮影フレームFyと赤色撮影フレームFrを利用しながら撮影範囲を設定することで水平方向右側に接した被写体を撮影することが可能である。そして、バノラマ画像取込フローで説明したように撮影した画像を付加情報とともに画像データの第n+1駒としてファイルに格納する。 In the next shooting of the (n + 1) th frame, the range of the subject image shot at the nth frame is displayed in the yellow already shot frame Fy, and the number of shooting frames is displayed in yellow characters. The range of shooting at the (n + 1) th time together with the through image of the subject is displayed in the red shooting frame Fr, and the current number of shooting frames is displayed in red characters. Therefore, as in the case of the n-th frame, it is possible to photograph a subject in contact with the right side in the horizontal direction by setting the photographing range while using the yellow photographed frame Fy and the red photographed frame Fr. The captured image is stored in the file as the (n + 1) th frame of the image data together with the additional information as described in the vanorama image capturing flow.
以上のようにして第n+x駒まで所定の駒数の撮影を完了すると、ファイルされた画像データを第1駒から第n+x駒の順序で右方向に並べ、これらを水平方向に合成することで一つの画像となる。この合成された画像は、黄色既撮影フレームを基準とし、これに赤色撮影フレームを重ねるようにして並べられるため、隣接する画像が適切に連続された画像となる。このように、撮影者は黄色既撮影フレームと赤色撮影フレームを利用し、両フレームの一部を重ねるだけで、被写体の特徴点を一義的に決めることが難しい被写体の場合でも適切なパノラマ撮影が実現できる。 When a predetermined number of frames have been photographed up to the (n + x) th frame as described above, the filed image data is arranged in the right direction in the order from the first frame to the (n + x) th frame, and these are combined in the horizontal direction. It becomes an image. Since these synthesized images are arranged with a yellow photographing frame as a reference and a red photographing frame superimposed on the yellow photographing frame, adjacent images become appropriately continuous images. In this way, the photographer uses the yellow and red shooting frames, and by simply overlapping a part of both frames, appropriate panoramic shooting can be performed even for subjects where it is difficult to uniquely determine the feature points of the subject. realizable.
以上の説明は、パノラマ撮影を右方向に順次撮影する場合を示したが、左方向に順次撮影する場合も同様である。また、重力加速度センサの出力を利用することで垂直方向、すなわち上下方向に順次撮影して合成するパノラマ撮影を行う場合も同様である。 Although the above description has shown the case where panoramic shooting is sequentially performed in the right direction, the same applies to the case where sequential shooting is performed in the left direction. The same applies to panoramic shooting that uses the output of the gravitational acceleration sensor to sequentially shoot and synthesize in the vertical direction, that is, the vertical direction.
次に、以上の構成のカメラにおけるステレオ撮影について説明する。図3のメインフローを再度参照すると、ステップS102においてモード切替ダイヤル22を判定し、モード切替ダイヤル25がパノラマ撮影モードでなく、ステレオ撮影モードに設定されていることを判定するとステレオ撮影フローに入る(S110)。ステレオ撮影モードではないときには、その他の撮影フローに移行する(S120)。ステレオ撮影フローでは、内蔵カウンタをn=1に設定し(S111)、後述するステレオ撮影モニタリングフローを実行する(S112)。ステレオ撮影モニタリングの状態でレリーズスイッチ25がオンしたときには(S113)、後述するステレオ画像取込を実行する(S114)。これによりn=1駒目の撮影が完了するが、このときには、n=2であるか否かを判定し、n=2のときにはステレオ撮影を終了する(S115)。n=2ではないと判定したときには、内蔵カウンタをn=n+1、すなわちn=2に設定し(S116)、前記ステレオ撮影モニタリングフローS112に戻り、以下n=1駒目と同様にレリーズスイッチ25のオンを待ってステレオn=2駒目の画像取込を実行する(S114)。
Next, stereo shooting in the camera having the above configuration will be described. Referring again to the main flow of FIG. 3, when the mode switching dial 22 is determined in step S102 and it is determined that the
図7は前記ステレオ撮影モニタリングフローS112である。撮像レンズ系1で結像した被写体を撮像素子2で撮像し、得られたビデオ信号をモニタ装置11に表示する(S401)。このときにはモニタ装置11にはこれから撮影する被写体のスルー画像が表示される。これと同時に、図9(a)に示すように、3軸加速度センサ16で検知した垂直信号と磁気方位センサ17で検知した方位信号に基づいて得た矩形枠状の撮影フレームFrを赤色線(以下、赤色撮影フレームと称する)でモニタ装置11に重ねて表示する(S402)。また、モニタリング動作中は、赤色撮影フレームFrで囲まれた領域の被写体の画像データ、すなわちビデオ信号を検出しておく(S403)。なお、ステレオ撮影においては、この赤色撮影フレームFrは1つの画像を水平方向に2分した1/2の範囲に設定されている。
FIG. 7 shows the stereo photographing monitoring flow S112. The subject imaged by the
次いで、ステレオ撮影を最初に被写体に向かって左側の位置から撮影し、次に右側の位置から撮影を行う撮影方式、すなわち左先撮影方式に設定されているか、あるいはその反対の右先撮影方式に設定されているかを判定する(S404)。左先撮影の場合には、n値を判定し(S405)、n=1のときには撮影画像の左画像の撮影であると認識し、モニタ装置11に表示される被写体のスルー画像に、3軸加速度センサ16で検知した垂直信号に基づいて得た垂直線VLと水平線HLを青色線でモニタ装置11に重ねて表示する(S406)。撮影者はモニタ装置11を視認しながら表示されている垂直線VLと水平線HLとを参照して被写体に対する垂直方向と水平方向を設定し、同じく表示されている赤色フレームFrによってスルー画像の撮影範囲を設定する。このとき、撮影画像のn値とこれに対応して撮影画像が左画像であることを表示する(S407)。この状態でメインフローに示したようにレリーズスイッチ25がオンされると画像取込フローを行う。
Next, stereo shooting is first performed from the left position toward the subject, and then shooting is performed from the right position, that is, the left-end shooting method is set, or vice versa. It is determined whether it is set (S404). In the case of left-end shooting, the n value is determined (S405). When n = 1, it is recognized that the left image of the shot image is shot, and the subject through image displayed on the
図8はステレオ画像取込フローS114である。レリーズスイッチ25がオンされるとモニタ装置11に表示されていた被写体像のビデオ信号が画像データとしてメモリ5に書き込まれる。取り込まれた画像データには、撮像情報としてn値を付加する(S502)。また、同時に赤色撮影フレームFrによって設定された撮影範囲の情報を付加する(S503)。そして、これら付加した情報とともに当該画像データをステレオ撮影の画像データの第1駒としてファイルに格納する(S504)。この格納された画像は1つの画像の水平方向の1/2の範囲であることは言うまでもない。
FIG. 8 is a stereo image capturing flow S114. When the
このとき、撮影した第1駒目の画像と共に付加された撮影範囲の情報は、3軸加速度センサ16から得られる垂直線と水平線、そのときの撮像光学系1の撮影画角、カメラの撮影位置等のデータに基づき、撮影した画像の範囲を垂直方向及び水平方向の絶対値として格納することが可能である。したがって、撮影後にモニタ装置11には第1駒目の撮影した範囲を表示することが可能になる。
At this time, information on the photographing range added together with the photographed first frame image includes vertical and horizontal lines obtained from the triaxial acceleration sensor 16, the photographing field angle of the imaging
前記ステレオ撮影モニタリングフローS112において、ステップS405においてn=1ではないとき、すなわちn=2のときの撮影時には、撮影者は適切な距離(10数〜数十cm)だけカメラを右方向に移動した上で、第1駒目のときと同様にモニタ装置11に被写体のスルー画像を表示し、同時に撮影範囲を設定するための赤色撮影フレームFrを重ねて表示し、撮影範囲を検出することは同じである(S401〜S403)。しかし、この場合には図9(b)に示すように、モニタ装置11には垂直線と水平線を表示する代わりに、その直前に撮影した第1駒の画像データと共にファイルに格納した撮影フレームを読み出し、この撮影フレームFyをモニタ装置11に黄色線で表示する(S408)。この黄色線の撮影フレームFy(以下、黄色既撮影フレームと称する)は、第1駒目の画像データに対応しているため、モニタ装置11に表示されて黄色既撮影フレームFyで囲まれる領域は第1駒目で撮影が完了した範囲である。すなわち、この黄色既撮影フレームFyはモニタ装置11に表示される被写体のスルー画像の特定の位置に対応して表示されることになり、カメラを移動して被写体のスルー画像がモニタ装置11上で移動されたときには黄色既撮影フレームFyも当該スルー像と共に移動されることになる。
In the stereo shooting monitoring flow S112, when n = 1 is not satisfied in step S405, that is, when shooting is performed when n = 2, the photographer moves the camera to the right by an appropriate distance (10 to several tens of centimeters). In the same manner as in the case of the first frame, the through image of the subject is displayed on the
したがって、モニタ装置11には、先に撮影した被写体の範囲が黄色既撮影フレームFyで表示され、これと同時に今度撮影する被写体のスルー画像を撮影する範囲が赤色撮影フレームFrで表示されることになる。また、同時に今度の撮影画像のn値とこれに対応する撮影画像が右画像であることを表示する(S409)。したがって、先に撮影した被写体をステレオ撮影する場合には、黄色既撮影フレームFyと赤色撮影フレームFrを重ねることで、第1駒目で撮影した画像と同じ範囲を第2駒目で撮影することができる。このように、黄色既撮影フレームFyと赤色撮影フレームFrを重ねると、重ねられたフレーム線は加色混合によって白色に近い高輝度の線として表示されるため、両フレームの重なりを正確に行うことが可能になる。その後はステレオ画像取込みフローで説明したように画像データを第2駒としてファイルに格納する。
Accordingly, the
以上のようにして第1駒目と第2駒目の各撮影を完了すると、ファイルされた画像データを第1駒目と第2駒目を左右に並べ、これらを合成することで両画像が一体化された1つのステレオ画像となる。このように、撮影者は黄色既撮影フレームと赤色撮影フレームを重ねるだけで、被写体の特徴点を一義的に決めることが難しい被写体の場合でも全く同じ範囲を異なる位置から撮影することができ、適切なステレオ撮影が実現できる。 When each shooting of the first frame and the second frame is completed as described above, the filed image data is arranged on the left and right of the first frame and the second frame, and the two images are synthesized by combining them. One unified stereo image is obtained. In this way, the photographer can shoot the exact same range from different positions even in the case of a subject where it is difficult to uniquely determine the feature point of the subject by simply overlapping the yellow and red frames. Stereo shooting is possible.
なお、ステップS404において右先撮影に設定されていた場合は、左先撮影のフローにおいて破線で囲んだステップS405〜S409の左右を反対にしたフローとなるので、等価なステップを破線で囲んでその詳細な図示と説明は省略する。また、ステレオ撮影においてもパノラマ撮影時と同様に撮影光軸方向の変化に基づいて第2駒目を左画像あるいは右画像であることを自動的に判定するように構成することは可能である。 If the right-handed shooting is set in step S404, the left-handed shooting flow is a flow in which the left and right of steps S405 to S409 surrounded by a broken line are reversed. Detailed illustration and description are omitted. In stereo shooting, it is possible to automatically determine that the second frame is the left image or the right image based on the change in the direction of the shooting optical axis as in panoramic shooting.
ここで、パノラマ撮影及びステレオ撮影のいずれにおいても、黄色既撮影フレームFyと赤色撮影フレームFrとが重なっている領域を特別な色で表示することで、両フレームの位置合わせずれを明確に表示して両フレーム線の位置合わせを容易に行うことができる。例えば、図10に示すように、黄色既撮影フレームFyで囲まれる範囲と赤色撮影フレームFrで囲まれる範囲の画像は通常のカラーで表示しているが、両撮影フレームが重なっている範囲の画像範囲Vxを赤一色で表示することで両撮影フレームの重なりを容易に確認することができ、赤色画像が表示されないようにすることで迅速な撮影範囲の設定が可能になる。 Here, in both panoramic shooting and stereo shooting, the area where the yellow shooting frame Fy and the red shooting frame Fr overlap is displayed in a special color, so that the misalignment of both frames is clearly displayed. Thus, it is possible to easily align both frame lines. For example, as shown in FIG. 10, images in a range surrounded by a yellow captured frame Fy and a range surrounded by a red captured frame Fr are displayed in normal colors, but an image in a range where both captured frames overlap. By displaying the range Vx in a single red color, it is possible to easily confirm the overlap of the two shooting frames, and by setting the red image not to be displayed, it is possible to set the shooting range quickly.
1 撮像光学系
2 撮像素子(CCD)
5 メモリ(DRAM)
6 VRAM
8 ビデオエンコーダ
11 モニタ装置
16 3軸加速度センサ
17 磁気方位センサ
21 メインスイッチ
22 モード切替スイッチ
25 レリーズスイッチ
100 マイコン
VL 垂直線
HL 水平線
F 撮影フレーム
Fr 赤色撮影フレーム
Fy 黄色既撮影フレーム
1 Imaging
5 Memory (DRAM)
6 VRAM
8
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004196426A JP4565909B2 (en) | 2004-07-02 | 2004-07-02 | camera |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004196426A JP4565909B2 (en) | 2004-07-02 | 2004-07-02 | camera |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006020111A JP2006020111A (en) | 2006-01-19 |
JP4565909B2 true JP4565909B2 (en) | 2010-10-20 |
Family
ID=35793922
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004196426A Expired - Fee Related JP4565909B2 (en) | 2004-07-02 | 2004-07-02 | camera |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4565909B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI821753B (en) * | 2020-10-06 | 2023-11-11 | 日商山葉發動機股份有限公司 | straddle type vehicle |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100827089B1 (en) | 2006-04-25 | 2008-05-02 | 삼성전자주식회사 | Method for photographing panorama picture |
JP5021370B2 (en) * | 2007-06-05 | 2012-09-05 | オリンパスイメージング株式会社 | Imaging apparatus, display method, and program |
JP4922106B2 (en) * | 2007-08-30 | 2012-04-25 | オリンパスイメージング株式会社 | Camera, panorama shooting guide display method applied thereto, panorama shooting guide display program |
JP4851406B2 (en) * | 2007-08-31 | 2012-01-11 | 富士フイルム株式会社 | Image display method for adjustment in multi-view imaging system and multi-view imaging system |
EP2290947A4 (en) | 2008-05-20 | 2011-07-27 | Nec Corp | Imaging device, mobile information processing terminal, monitor display method for imaging device, and program |
JP5248951B2 (en) * | 2008-08-12 | 2013-07-31 | ソニーモバイルコミュニケーションズ, エービー | CAMERA DEVICE, IMAGE SHOOTING SUPPORT DEVICE, IMAGE SHOOTING SUPPORT METHOD, AND IMAGE SHOOTING SUPPORT PROGRAM |
JP5499754B2 (en) * | 2010-02-19 | 2014-05-21 | 株式会社ニコン | Imaging device |
JP5402719B2 (en) * | 2010-02-26 | 2014-01-29 | 富士通株式会社 | Stereoscopic image capturing apparatus, stereoscopic image capturing method, and stereoscopic image capturing program |
WO2013031155A1 (en) | 2011-08-30 | 2013-03-07 | パナソニック株式会社 | Imaging device |
JP2013078038A (en) * | 2011-09-30 | 2013-04-25 | Sharp Corp | Imaging device, image processing method, and program |
JP5827292B2 (en) * | 2013-10-29 | 2015-12-02 | 三菱電機株式会社 | refrigerator |
JP5985029B2 (en) * | 2015-10-15 | 2016-09-06 | 三菱電機株式会社 | refrigerator |
KR101717602B1 (en) * | 2016-12-21 | 2017-03-17 | (주)지오시스템리서치 | System for monitoring an ambient condition of an ocean facility |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000032319A (en) * | 1998-07-08 | 2000-01-28 | Canon Inc | System, method and device for controlling camera, image processor to be used for the same and record medium |
JP2000050136A (en) * | 1999-03-23 | 2000-02-18 | Canon Inc | Device for photography |
JP2000101895A (en) * | 1998-09-25 | 2000-04-07 | Sony Corp | Image signal photographing device and its method |
JP2001145095A (en) * | 1999-11-15 | 2001-05-25 | Canon Inc | Camera control system and method and storage medium having its operation processing program stored therein |
JP2003244727A (en) * | 2002-02-13 | 2003-08-29 | Pentax Corp | Stereoscopic image pickup system |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05183790A (en) * | 1992-01-07 | 1993-07-23 | Canon Inc | Electronic still camera |
JPH05328205A (en) * | 1992-05-26 | 1993-12-10 | Asahi Optical Co Ltd | Video signal processing unit |
JPH09266561A (en) * | 1996-03-28 | 1997-10-07 | Sanyo Electric Co Ltd | Digital still camera for generating continuous image and continuous image generating method |
JPH1155553A (en) * | 1997-08-07 | 1999-02-26 | Sharp Corp | Electronic still camera |
JP4355371B2 (en) * | 1997-09-10 | 2009-10-28 | 株式会社ニコン | camera |
JPH11112841A (en) * | 1997-09-30 | 1999-04-23 | Minolta Co Ltd | Digital camera |
-
2004
- 2004-07-02 JP JP2004196426A patent/JP4565909B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000032319A (en) * | 1998-07-08 | 2000-01-28 | Canon Inc | System, method and device for controlling camera, image processor to be used for the same and record medium |
JP2000101895A (en) * | 1998-09-25 | 2000-04-07 | Sony Corp | Image signal photographing device and its method |
JP2000050136A (en) * | 1999-03-23 | 2000-02-18 | Canon Inc | Device for photography |
JP2001145095A (en) * | 1999-11-15 | 2001-05-25 | Canon Inc | Camera control system and method and storage medium having its operation processing program stored therein |
JP2003244727A (en) * | 2002-02-13 | 2003-08-29 | Pentax Corp | Stereoscopic image pickup system |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI821753B (en) * | 2020-10-06 | 2023-11-11 | 日商山葉發動機股份有限公司 | straddle type vehicle |
Also Published As
Publication number | Publication date |
---|---|
JP2006020111A (en) | 2006-01-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4363642B2 (en) | Map display system and digital camera | |
JP3896505B2 (en) | Electronic camera | |
JP6833746B2 (en) | Imaging equipment, imaging methods, programs and recording media | |
JP4565909B2 (en) | camera | |
JP2007295547A (en) | Digital camera | |
JP2007201539A (en) | Digital camera | |
JP2005328497A (en) | Image pickup apparatus and image pickup method | |
JP4957825B2 (en) | Imaging apparatus and program | |
JP4635477B2 (en) | Image photographing apparatus, pseudo three-dimensional image generation method, and program | |
JP2011035752A (en) | Imaging apparatus | |
JP5724057B2 (en) | Imaging device | |
JP2010114577A (en) | Imaging apparatus, image processor, control method and image processing method of imaging apparatus | |
JP2010141609A (en) | Imaging apparatus | |
JPH1188731A (en) | Camera | |
JP4522232B2 (en) | Imaging device | |
JP2007267063A (en) | Imaging apparatus | |
JPH10304227A (en) | Electronic still camera | |
JP6836306B2 (en) | Imaging control device, its control method, program and recording medium | |
JP6399120B2 (en) | Imaging device | |
JP2008306284A (en) | Photographing apparatus, display method and program | |
JP2006019852A (en) | Image pickup device, zoom image pickup method and program | |
JP2005278003A (en) | Image processing apparatus | |
JP4897577B2 (en) | Imaging device | |
JP2014241621A (en) | Imaging apparatus and program | |
JP2004363935A (en) | Digital camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070607 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20080501 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100413 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100610 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100720 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100803 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4565909 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130813 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130813 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130813 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |