JP2002218501A - Image pickup device - Google Patents

Image pickup device

Info

Publication number
JP2002218501A
JP2002218501A JP2001010307A JP2001010307A JP2002218501A JP 2002218501 A JP2002218501 A JP 2002218501A JP 2001010307 A JP2001010307 A JP 2001010307A JP 2001010307 A JP2001010307 A JP 2001010307A JP 2002218501 A JP2002218501 A JP 2002218501A
Authority
JP
Japan
Prior art keywords
image
stereo
display
monocular
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001010307A
Other languages
Japanese (ja)
Other versions
JP4512276B2 (en
Inventor
Hideaki Yoshida
英明 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Optical Co Ltd filed Critical Olympus Optical Co Ltd
Priority to JP2001010307A priority Critical patent/JP4512276B2/en
Publication of JP2002218501A publication Critical patent/JP2002218501A/en
Application granted granted Critical
Publication of JP4512276B2 publication Critical patent/JP4512276B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide an image pickup device that can display an image suitable for image pickup of stereo pair images onto its finder so as to very easily realize stereoscopic photographing. SOLUTION: A system controller 112 is provided with an EVF display control section 112d that has a function of selecting a usual photographing mode or a stereoscopic photographing mode for image display on an LCD image display system 111 used for an electronic finder (EVF). The EVF display control section 112d uses an object image signal as usual for display on the LCD image display system 111 in a usual photographing mode but uses a monocular image segmented from a trimming area for display on the LCD image display system 111 in a stereoscopic photographing mode.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は立体画像を取り扱う
ことが可能な撮像装置に関し、特に多眼式ステレオ画像
の撮像に好適な撮像装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an imaging device capable of handling a stereoscopic image, and more particularly to an imaging device suitable for capturing a multi-view stereo image.

【0002】[0002]

【従来の技術】画像を立体的情報を含んで撮影記録し、
これを再生観察する方式には多種多様な提案がある。そ
の中でも、左右両眼の視点に対応する視差を持った2画
像を記録し、これを左右両眼に対してそれぞれ提示する
いわゆる2眼式ステレオ方式は、構成が最も簡単で安価
な割に効果が大きいため、旧くから今日に至るまで利用
されている。
2. Description of the Related Art An image is photographed and recorded including three-dimensional information.
There are a variety of proposals for reproducing and observing this. Among them, the so-called twin-lens stereo system, which records two images with parallax corresponding to the viewpoints of the left and right eyes and presents the two images to the left and right eyes, respectively, is advantageous in that it is simplest in configuration and inexpensive. Because of its large size, it has been used from old days to today.

【0003】この2眼式ステレオにおいても提示方式に
はまた各種あり、例えば大画面による多人数同時観察を
行なう場合には、偏光メガネを併用した偏光投影方式
や、シャッタメガネを併用した時分割提示方式が使用さ
れているが、これらはいずれも大がかりで高価なシステ
ムを必要とするため特殊な業務用途以外には使用される
ことは少ない。そこでいわゆるパーソナルユースに対し
ては、同時には1人しか観察できないという制約はある
ものの、最も基本的かつ古典的な方法であるステレオペ
ア画像を用いる方式が、極めて安価にまた鮮明な画像を
観察できる方式として、今日なお広く使用されている。
[0003] In this twin-lens stereo, there are various presentation methods. For example, in the case of simultaneous observation by a large number of people on a large screen, a polarization projection method using polarized glasses or a time-sharing presentation using shutter glasses is used. Although these methods are used, all of them require a large-scale and expensive system, so that they are rarely used except for special business use. Therefore, for so-called personal use, there is a restriction that only one person can observe at the same time, but the method using stereo pair images, which is the most basic and classic method, can observe clear images at very low cost. As a method, it is still widely used today.

【0004】このステレオペア画像について詳述すれ
ば、左眼視点対応画像であるL画像と右眼視点対応画像
であるR画像とが、通常僅かな隙間を介して2枚並列に
並べられて1つの画像を構成している。この種の画像の
最も手軽な撮影装置として普及している35ミリ1眼レ
フカメラ+ステレオアダプタのシステム上の制約等のた
め、LR画像は実際には1つの標準横位置画像(横3:
縦2)を縦に2分割した形で構成されており、従って各
画像すなわち観察される立体画像は縦位置(横縦比約
3:4程度)になっているのが一般的である。
[0004] The stereo pair image will be described in detail. An L image corresponding to a left-eye viewpoint image and an R image corresponding to a right-eye viewpoint image are usually arranged in parallel with a slight gap, and are arranged in parallel. Make up one image. The LR image is actually a single standard horizontal position image (horizontal 3: horizontal) due to system limitations of a 35 mm single-lens reflex camera + stereo adapter, which are widely used as the simplest image capturing apparatus for this type of image.
The vertical 2) is vertically divided into two parts, so that each image, that is, the stereoscopic image to be observed, is generally at a vertical position (horizontal-to-vertical ratio of about 3: 4).

【0005】本明細書に於いては、このようにLRの2
画像が空間的に(画像平面上に)併置されて1つの画像
を構成しているものをステレオペア画像と称する。な
お、上記した具体的な構成(数値等)は一例に過ぎない
が、説明を簡明にするために、特記しない場合は上記具
体例のものが例として取り上げられていることを前提に
説明する。
[0005] In this specification, the LR of 2
An image in which images are spatially juxtaposed (on the image plane) to form one image is called a stereo pair image. Note that the above specific configuration (numerical values and the like) is merely an example, but for simplicity of description, unless otherwise specified, description will be made on the premise that the above specific example is taken as an example.

【0006】このステレオペア画像は、 (1)記録、印画、伝送、印刷等に際して何らの特殊な
システムを要しない。 (2)適切な条件を満たせば直接立体観察できる。即
ち、左右像の融合が何らの装置を用いることなくでき
る。 という極めて優れた特長を有している。
This stereo pair image does not require any special system for (1) recording, printing, transmission, printing and the like. (2) If appropriate conditions are satisfied, direct stereoscopic observation is possible. That is, the left and right images can be fused without using any device. It has an extremely excellent feature.

【0007】特に(2)に関して詳述すれば、LR画像
が正しく左右眼によって捉えられ、2つの異なる画像で
は無く一つの立体画像として認識される状態を左右像の
融合と称するが、例えば適当な大きさ(具体的には横幅
が眼幅の2倍よりやや小さい程度=10〜13cm)に
印画された「平行配置」(Lを左、Rを右に配置)のも
のであれば、観察に際しても視線を平行に向けるいわゆ
る「平行法」(人によっては若干の練習を要するが)を
用いることで融合可能である。またこれとは左右の画像
を入れ替えた「交差配置」も使用され、こちらは印画サ
イズの制約が無く、視線を交差させる「交差法」によっ
てやはり直接立体視観察できるが、観察時の眼の疲労と
立体観察時の不自然さ(箱庭現象)がやや大きいため、
上記平行配置の方がより普及しているものである。
More specifically, in the case of (2), a state in which the LR image is correctly captured by the left and right eyes and recognized as one stereoscopic image instead of two different images is referred to as fusion of the left and right images. In the case of a "parallel arrangement" (L is arranged on the left and R is arranged on the right) printed in a size (specifically, the width is slightly smaller than twice the interpupillary distance = 10 to 13 cm), it is necessary for observation. They can be fused by using the so-called "parallel method" that turns the gaze parallel (although it takes some practice for some people). In addition, "crossing arrangement" in which the left and right images are exchanged is also used, and there is no restriction on the print size, and you can still directly observe stereoscopically by the "crossing method" that crosses the eyes, but eyestrain at the time of observation And the unnaturalness during stereoscopic observation (the miniature garden phenomenon) is somewhat large,
The parallel arrangement is more popular.

【0008】いずれにせよこのように(1)システムを
選ばず(2)直接観察も可能であるという2つの大きな
特長をもつステレオペア画像は、特にインターネットや
デジタルカメラの普及などいわゆるメディアミックス化
が進めば進むほどその不朽の価値が見直され、利用され
続けるものと予想される。
In any case, a stereo pair image having two great features that (1) a system can be selected and (2) direct observation is possible, is a so-called media mix, especially in the spread of the Internet and digital cameras. It is expected that its value will be reviewed and used as it progresses.

【0009】そこで、本出願人は先にステレオアダプタ
を通常の単眼撮像光学系に装着し、これによって得られ
る複数の視差画像を元に電子的なステレオペア画像たる
SPM(Stereo Pear in Multimedia)を生成し、これ
を所定フォーマットの電子画像ファイルSGM(Stereo
Gram in Multimedia)として記録する撮像装置を提案
している(特願2000−259489号)。
In view of this, the present applicant first attaches a stereo adapter to a normal single-lens image pickup optical system, and based on a plurality of parallax images obtained thereby, creates an electronic stereo pair image, SPM (Stereo Pear in Multimedia). And generates an electronic image file SGM (Stereo
An imaging device for recording as "Gram in Multimedia" has been proposed (Japanese Patent Application No. 2000-259489).

【0010】[0010]

【発明が解決しようとする課題】ところで、通常の単眼
カメラの撮像系に外付けのステレオアダプタを追加した
場合には、ステレオアダプタの光学系を理想的に設定し
た場合であっても、LR画像のオーバーラップやケラレ
などの不具合現象が生じる。この現象はカメラ側の絞り
の値にも依存し、例えば、図7(a)のようにF値が小
さい(開放側の)場合はLR画像のオーバーラップが大
きくなり、また図7(b)のようにF値が大きい(絞り
込み側の)場合はLR画像間に生じる暗黒のケラレ領域
が大きくなる、という現象が生じる。ここでケラレ領域
とは一般の光学系でのケラレと同義であり、ここではス
テレオアダプタによって十分な光が到達しない領域を意
味することになる。オーバーラップやケラレはLR画像
の境界部のみならず、ステレオアダプタの光学系の特性
等によっては撮像画枠の周囲部にも生じる現象である。
By the way, when an external stereo adapter is added to the image pickup system of a normal monocular camera, even if the optical system of the stereo adapter is ideally set, the LR image is obtained. Troubles such as overlap and vignetting occur. This phenomenon also depends on the aperture value on the camera side. For example, when the F value is small (open side) as shown in FIG. 7A, the overlap of the LR images becomes large, and FIG. When the F-number is large (at the narrowing-down side), a phenomenon occurs in which the dark vignetting region generated between the LR images becomes large. Here, the vignetting region has the same meaning as vignetting in a general optical system, and here means a region where sufficient light does not reach by the stereo adapter. Overlap and vignetting are phenomena that occur not only at the boundary of the LR image but also at the periphery of the image frame depending on the characteristics of the optical system of the stereo adapter.

【0011】上記先願の撮像装置では、画像ケラレやオ
ーバーラップの問題に対して、撮像画像信号に対して適
当な領域トリミングを行なうことによって高画質なステ
レオ画像の記録を実現している。しかし、このようにし
てもなお、ステレオペア画像の撮像に際しては実際には
難しい問題が残っている。これは、ファインダによる構
図の問題である。
In the imaging apparatus of the prior application, recording of a high-quality stereo image is realized by performing appropriate area trimming on a captured image signal with respect to problems of image vignetting and overlap. However, even in this case, there still remains a difficult problem in capturing a stereo pair image. This is a problem of composition by the finder.

【0012】すなわち、ファインダから観察される像は
撮影光学系から入力されたものとなるため、ステレオア
ダプタを用いた場合にはファインダから実際に観察され
る像もLR画像となり、LとRの両画像が並んで観察さ
れることになる。このため、その観察されるLとRのど
ちらの像に注目してフレーミングすべきであるかの把握
が難しく、これは特に上述のケラレやオーバーラップが
生じている場合に顕著となる。
That is, since the image observed from the finder is input from the photographing optical system, when a stereo adapter is used, the image actually observed from the finder is also an LR image. The images will be observed side by side. For this reason, it is difficult to grasp which of the observed L and R images should be framed, and this is particularly noticeable when the above-mentioned vignetting or overlap occurs.

【0013】さらに、上記先願の撮像装置のようにトリ
ミングによって記録用のステレオ画像を生成する技術を
用いた場合には、実際に取り出される画像は領域トリミ
ングによって切り出された部分画像となるが、ファイン
ダ上ではそのトリミングの位置つまり実際の撮像画角を
確認することができない。特に、上記撮像装置では、標
準横位置画像を縦に2分割した縦位置のLR画像のみな
らず、トリミングの画枠設定を替えることで横位置のL
R画像も生成できるので、どの部分が実際にステレオ画
像として撮影されるかの確認も難しくなる。
Further, when a technique for generating a stereo image for recording by trimming is used as in the imaging apparatus of the prior application, the actually extracted image is a partial image cut out by area trimming. On the finder, the position of the trimming, that is, the actual imaging angle of view cannot be confirmed. In particular, in the above-described imaging device, the horizontal position L image is changed by changing the trimming image frame setting as well as the vertical position LR image obtained by vertically dividing the standard horizontal position image into two.
Since an R image can also be generated, it is difficult to confirm which part is actually photographed as a stereo image.

【0014】本発明は上記事情を考慮してなされたもの
で、その目的とするところは、ステレオペア画像の撮像
に適した画像を表示できるようにし、立体撮影を極めて
容易に実現することが可能な撮像装置を提供することに
ある。
SUMMARY OF THE INVENTION The present invention has been made in view of the above circumstances, and an object of the present invention is to enable display of an image suitable for capturing a stereo pair image, so that stereoscopic imaging can be realized extremely easily. To provide a simple imaging device.

【0015】[0015]

【課題を解決するための手段】上述の課題を解決するた
め、本発明は、撮像光学系と、この撮像光学系を介して
入力された被写体像を光電変換する撮像素子と、該撮像
素子の出力に基づいて被写体画像信号を得る撮像手段
と、前記被写体画像信号を表示するための電子ファイン
ダ手段とを具備する撮像装置であって、立体撮影が可能
なステレオ撮影モードと通常の単眼撮影を行うための通
常撮影モードとを有し、前記通常撮影モード時には前記
被写体画像信号を前記電子ファインダ手段への表示に使
用し、前記ステレオ撮影モード時には、前記被写体画像
信号に対して所定のトリミングを行うことで、前記被写
体画像信号から1つの多眼式ステレオ画像の構成要素で
ある複数のモノキュラ画像の少なくとも1つを抽出し、
該抽出後のモノキュラ画像を前記電子ファインダ手段へ
の表示に使用するように構成されていることを特徴とす
る。
SUMMARY OF THE INVENTION In order to solve the above-mentioned problems, the present invention provides an image pickup optical system, an image pickup device for photoelectrically converting a subject image input via the image pickup optical system, and an image pickup device. An imaging apparatus comprising: an imaging unit that obtains a subject image signal based on an output; and an electronic finder unit that displays the subject image signal. The imaging device performs a stereo photography mode capable of stereoscopic photography and normal monocular photography. A normal shooting mode for use in the normal shooting mode, wherein the subject image signal is used for display on the electronic viewfinder means, and in the stereo shooting mode, predetermined trimming is performed on the subject image signal. Extracting at least one of a plurality of monocular images that are components of one multi-view stereo image from the subject image signal;
The monocular image after the extraction is used for display on the electronic finder means.

【0016】この撮像装置によれば、通常撮影モード時
とステレオ撮影モード時とでファインダ表示が切り替え
られ、通常撮影モード時には通常通り被写体画像信号が
そのまま電子ファインダ手段への表示に使用されるが、
ステレオ撮影モード時には、トリミングによって被写体
画像信号から抽出された少なくとも1つのモノキュラ画
像が電子ファインダ手段への表示に使用される。このよ
うにトリミングによって得られた抽出後のモノキュラ画
像をファインダ表示に利用することにより、ケラレやオ
ーバーラップ領域を除いた状態の画像をファインダに表
示することができ、立体撮影を極めて容易に実現するこ
とが可能となる。
According to this imaging apparatus, the viewfinder display is switched between the normal shooting mode and the stereo shooting mode. In the normal shooting mode, the subject image signal is used as it is for display on the electronic viewfinder means as usual.
In the stereo shooting mode, at least one monocular image extracted from the subject image signal by trimming is used for display on the electronic finder means. By using the extracted monocular image obtained by trimming for the viewfinder display, an image without vignetting or overlapped area can be displayed on the viewfinder, and stereoscopic photography can be realized extremely easily. It becomes possible.

【0017】特に、ファインダへの表示には、1)被写
体画像信号から抽出された単一のモノキュラ画像を電子
ファインダ手段に表示する、2)被写体画像信号から抽
出された複数のモノキュラ画像を並列配置した状態で電
子ファインダ手段に表示する、3)被写体画像信号から
抽出された複数のモノキュラ画像それぞれの画枠が一致
するように抽出後の複数のモノキュラ画像を重ねた状態
で電子ファインダ手段に表示する、のいずれかのモード
を利用することが好ましい。
In particular, for display on the finder, 1) a single monocular image extracted from the subject image signal is displayed on the electronic finder means, and 2) a plurality of monocular images extracted from the subject image signal are arranged in parallel. 3) Display the plurality of monocular images extracted from the subject image signal on the electronic finder means in a superimposed state so that the respective image frames coincide with each other. , It is preferable to use one of the modes.

【0018】1)のモードではステレオペア画像の撮像
時にはLとRのどちらか1画像のみを表示できるので、
ファインダによる構図の設定を通常撮影の場合と同様に
行うことが可能となり、極めて有効となる。また2)の
モードでは実際に生成されるステレオペア画像と同様の
画像をファインダで確認しながら撮影を行うことができ
る。さらに3)のモードではLR画像の融合状態を確認
しながら撮影を行うことが可能となる。
In the mode 1), only one of L and R images can be displayed when capturing a stereo pair image.
The composition setting by the viewfinder can be performed in the same manner as in normal shooting, which is extremely effective. In the mode 2), it is possible to shoot an image while confirming an image similar to an actually generated stereo pair image with a viewfinder. Further, in the mode 3), it is possible to shoot while confirming the fusion state of the LR images.

【0019】また、撮像素子の撮像領域の中に、1つの
多眼式ステレオ画像の構成要素である複数のモノキュラ
画像に対応した複数の撮影画枠を設定するステレオ撮像
画枠設定手段と、前記複数の撮影画枠に対応して得られ
た複数のモノキュラ画像を用いて、所定のステレオ画像
取扱いフォーマットに従った構造化ステレオ画像を生成
するステレオ画像生成手段とをさらに具備し、前記ステ
レオ撮影モード時には、前記ステレオ撮像画枠設定手段
によって設定された撮像画枠に対応するモノキュラ画像
を前記電子ファインダ手段に表示するように構成するこ
とが望ましい。
Also, a stereo image frame setting means for setting a plurality of image frames corresponding to a plurality of monocular images which are components of one multi-view stereo image in an image area of the image sensor, Stereo image generating means for generating a structured stereo image according to a predetermined stereo image handling format by using a plurality of monocular images obtained corresponding to a plurality of shooting image frames; In some cases, it is desirable that a monocular image corresponding to the image frame set by the stereo image frame setting means be displayed on the electronic finder means.

【0020】これにより、画像ケラレやオーバーラップ
の問題を回避して高画質なステレオ画像を生成できると
共に、最終的なステレオ画像とファインダに表示される
画像との間で画枠を合わせることが可能となる。よっ
て、どの部分が実際にステレオ画像として撮影されるか
を確認しながら立体撮影を行うことが可能となる。
Thus, a high-quality stereo image can be generated while avoiding the problem of image vignetting and overlap, and the image frame can be matched between the final stereo image and the image displayed on the viewfinder. Becomes Therefore, it is possible to perform three-dimensional imaging while checking which part is actually captured as a stereo image.

【0021】また、本発明は、撮像光学系と、この撮像
光学系により結像された被写体像を光電変換する撮像素
子と、該撮像素子の出力に基づいて被写体画像信号を得
る撮像手段と、前記被写体画像信号を表示する表示手段
と、前記被写体画像信号に対して所定のトリミングを行
なうことで、前記撮像素子の撮像領域の中に、1つの多
眼式ステレオ画像の構成要素である複数のモノキュラ画
像に対応した複数の撮影画枠を設定するステレオ撮像画
枠設定手段と、前記複数の撮影画枠に対応して得られた
複数のモノキュラ画像を用いて、所定のステレオ画像取
扱いフォーマットに従った構造化ステレオ画像を生成す
るステレオ画像生成手段とを具備する撮像装置であっ
て、前記複数の撮影画枠より1を選択的に使用して前記
表示手段に表示する単フレーム表示モード、前記複数の
撮影画枠を並列位置した状態で前記表示手段に表示する
構造化ステレオ画像表示モード、または前記複数の撮影
画枠が一致するように前記複数の撮影画枠を重ねた状態
で前記表示手段に表示する重ねフレーム表示モードを用
いて、前記表示手段への表示を行う手段を具備すること
を特徴とする。
The present invention also provides an image pickup optical system, an image pickup device for photoelectrically converting a subject image formed by the image pickup optical system, and an image pickup means for obtaining a subject image signal based on an output of the image pickup device. A display unit that displays the subject image signal; and performing a predetermined trimming on the subject image signal so that a plurality of constituent elements of one multi-view stereo image are included in an imaging region of the imaging device. A stereo image frame setting unit for setting a plurality of image frames corresponding to a monocular image, and a plurality of monocular images obtained corresponding to the plurality of image frames, according to a predetermined stereo image handling format. And a stereo image generating means for generating a structured stereo image, wherein the display means selectively displays one of the plurality of photographed image frames on the display means. A frame display mode, a structured stereo image display mode in which the plurality of captured image frames are displayed on the display in a state where the plurality of captured image frames are arranged in parallel, or the plurality of captured image frames are overlapped so that the plurality of captured image frames match. The display device may further include a unit that performs display on the display unit by using a superimposed frame display mode that is displayed on the display unit in a state.

【0022】この構成においても、画像ケラレやオーバ
ーラップの問題を回避して高画質なステレオ画像を生成
できると共に、最終的なステレオ画像と表示画像との間
で画枠を合わせることができるので、トリミング位置を
確認しながら極めて容易に立体撮影を行うことが可能と
なる。
Also in this configuration, a high-quality stereo image can be generated by avoiding the problems of image vignetting and overlap, and the image frame can be matched between the final stereo image and the display image. It is possible to extremely easily perform three-dimensional imaging while checking the trimming position.

【0023】[0023]

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。図1は、本発明の一実施形態に係わ
る電子カメラの回路構成を示すブロック図である。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram illustrating a circuit configuration of an electronic camera according to an embodiment of the present invention.

【0024】図中101は各種レンズからなる撮像レン
ズ系、102はレンズ系101を駆動するためのレンズ
駆動機構、103はレンズ系101の絞り及びシャッタ
装置を制御するための露出制御機構、104はローパス
及び赤外カット用のフィルタ、105は被写体像を光電
変換するためのCCDカラー撮像素子、106は撮像素
子105を駆動するためのCCDドライバ、107はA
/D変換器等を含むプリプロセス回路、108は色信号
生成処理,マトリックス変換処理,その他各種のデジタ
ル処理を行うためのデジタルプロセス回路、109はカ
ードインターフェース、110はメモリカード、111
はLCD画像表示系を示している。
In the figure, reference numeral 101 denotes an imaging lens system including various lenses; 102, a lens driving mechanism for driving the lens system 101; 103, an exposure control mechanism for controlling the aperture and shutter device of the lens system 101; A low-pass and infrared cut filter; 105, a CCD color image sensor for photoelectrically converting a subject image; 106, a CCD driver for driving the image sensor 105;
A pre-processing circuit including a / D converter, etc .; 108, a digital processing circuit for performing color signal generation processing, matrix conversion processing, and other various digital processing; 109, a card interface; 110, a memory card;
Denotes an LCD image display system.

【0025】また、図中の112は各部を統括的に制御
するためのシステムコントローラ(CPU)、113は
各種SWからなる操作スイッチ系、114は操作状態及
びモード状態等を表示するための操作表示系、115は
レンズ駆動機構102を制御するためのレンズドライ
バ、116は発光手段としてのストロボ、117は露出
制御機構103及びストロボ116を制御するための露
出制御ドライバ、118は各種設定情報等を記憶するた
めの不揮発性メモリ(EEPROM)を示している。
In the figure, reference numeral 112 denotes a system controller (CPU) for comprehensively controlling each unit, 113 denotes an operation switch system composed of various SWs, and 114 denotes an operation display for displaying an operation state, a mode state, and the like. System, 115 is a lens driver for controlling the lens driving mechanism 102, 116 is a strobe as a light emitting means, 117 is an exposure control driver for controlling the exposure control mechanism 103 and the strobe 116, and 118 is various kinds of setting information and the like. 1 shows a non-volatile memory (EEPROM) for performing the operation.

【0026】本実施形態の電子カメラにおいては、シス
テムコントローラ112が全ての制御を統括的に行って
おり、露出制御機構103とCCDドライバ106によ
るCCD撮像素子105の駆動を制御して露光(電荷蓄
積)及び信号の読み出しを行い、それをプリプロセス回
路107を介してデジタルプロセス回路108に取込ん
で、各種信号処理を施した後にカードインターフェース
109を介してメモリカード110に記録するようにな
っている。
In the electronic camera of this embodiment, the system controller 112 performs overall control, and controls the exposure control mechanism 103 and the CCD driver 106 to drive the CCD image pickup device 105 for exposure (charge accumulation). ) And read out the signal, take it into the digital process circuit 108 via the pre-process circuit 107, perform various signal processing, and record it on the memory card 110 via the card interface 109. .

【0027】ここまでの基本的な構成は従来一般的な電
子カメラと同様であるが、本実施形態ではこれに加え
て、操作スイッチ系113には、立体撮影が可能なステ
レオ撮影モードと通常の単眼撮影を行うための通常撮影
モードを切り替えるためのモード切り替えスイッチが設
けられている。また、システムコントローラ112に
は、撮像エリアのトリミング領域を設定するための画枠
設定部112a、モノキュラ画像からSPM画像を合成
して得るためのSPM合成部112b、SPM画像から
SGM画像データを生成するためのSGM生成部112
cが設けられている。
Although the basic configuration up to this point is the same as that of a conventional general electronic camera, in this embodiment, in addition to this, the operation switch system 113 includes a stereo photography mode capable of stereo photography and a normal photography mode. A mode changeover switch is provided for switching between normal shooting modes for performing monocular shooting. Further, the system controller 112 includes an image frame setting unit 112a for setting a trimming area of an imaging area, an SPM synthesizing unit 112b for synthesizing an SPM image from a monocular image, and generating SGM image data from the SPM image. Generation unit 112 for
c is provided.

【0028】さらに、本実施形態では、システムコント
ローラ112には、電子ファインダ(EVF)として使
用されるLCD画像表示系111への画像表示を通常撮
影モードとステレオ撮影モードとで切り換える機能を持
つEVF表示制御部112dが設けられている。このE
VF表示制御部112dは、通常撮影モード時には通常
通り被写体画像信号をそのままLCD画像表示系111
への表示に使用するが、ステレオ撮影モード時には、ト
リミング領域から切り出したモノキュラ画像をLCD画
像表示系111への表示に使用する。トリミング処理は
デジタルプロセス回路108によるデジタル演算処理に
より実行され、データバッファ108a上の撮像画像信
号に対してトリミング処理を行うことによって得られた
表示用の画像信号が表示メモリ108bに書き込まれ、
それがLCD画像表示系111へに表示される。
Further, in this embodiment, the system controller 112 has an EVF display having a function of switching the image display on the LCD image display system 111 used as an electronic finder (EVF) between a normal shooting mode and a stereo shooting mode. A control unit 112d is provided. This E
In the normal shooting mode, the VF display control unit 112d outputs the subject image signal as it is in the LCD image display system 111 as usual.
In the stereo shooting mode, a monocular image cut out from the trimming area is used for display on the LCD image display system 111. The trimming process is executed by digital arithmetic processing by the digital process circuit 108, and a display image signal obtained by performing the trimming process on the captured image signal in the data buffer 108a is written to the display memory 108b.
It is displayed on the LCD image display system 111.

【0029】本実施形態の電子カメラにおいては、図2
に示すように、カメラ本体100のレンズ鏡筒にミラー
式ステレオアダプタ200が着脱可能となっている。こ
のアダプタ200は、視差程度離れた位置にミラー20
1,202をそれぞれ配置し、更にこれらのミラー20
1,202で反射した光をカメラ側に導くためのミラー
203,204を配置して構成される。アダプタ200
の左眼視用ミラー201に入射した光はミラー203及
び撮影レンズ101を介して撮像素子105の領域Lに
結像され、右眼視用ミラー202に入射した光はミラー
204及び撮影レンズ101を介して撮像素子105の
領域Rに結像されるようになっている。
In the electronic camera of this embodiment, FIG.
As shown in FIG. 1, a mirror type stereo adapter 200 is detachable from the lens barrel of the camera body 100. The adapter 200 is located at a position about a parallax away from the mirror 20.
1 and 202 are arranged, and these mirrors 20
Mirrors 203 and 204 are provided to guide the light reflected by the mirrors 202 to the camera. Adapter 200
Is incident on the area L of the image sensor 105 via the mirror 203 and the photographing lens 101, and the light incident on the mirror 202 for the right eye is reflected by the mirror 204 and the photographing lens 101. An image is formed on a region R of the image sensor 105 via the image sensor 105.

【0030】なお、通常撮影モードとステレオ撮影モー
ドの切り替えは前記したモード切り替えスイッチで行わ
れるが、ミラー式ステレオアダプタ200を取り付けて
いるか否かに応じて自動的に切り替えるようにしてもよ
い。
The switching between the normal shooting mode and the stereo shooting mode is performed by the above-described mode changeover switch. However, the mode may be automatically changed according to whether or not the mirror type stereo adapter 200 is attached.

【0031】ステレオ撮影モードでは、ステレオアダプ
タ200を取り付けた状態でシャッタートリガー操作を
行うことにより、CCD撮像素子105の露光および信
号読み出しが通常撮影モードの場合と同様にして行われ
る。これにより、CCD撮像素子105の撮像エリアの
全領域から画像信号が読み出されるが、ステレオ撮影モ
ードでは、この画像信号に対して以下の処理を行う。
In the stereo shooting mode, by performing a shutter trigger operation with the stereo adapter 200 attached, exposure and signal reading of the CCD image pickup device 105 are performed in the same manner as in the normal shooting mode. As a result, image signals are read from the entire image pickup area of the CCD image pickup device 105. In the stereo shooting mode, the following processing is performed on the image signals.

【0032】まず、システムコントローラ112に含ま
れる画枠設定部112aによって撮像画枠の設定が行わ
れ、その撮像画枠からモノキュラ画像を切り出すための
トリミング処理がデジタルプロセス回路108において
行われる。即ち、図3に示すように、画面を縦に2分割
し、左半分をL画像、右半分をR画像と割り当てる(1
00%トリミング)。なお、100%トリミングで使用
することも可能であるが、本実施形態ではオーバーラッ
プやケラレが画像に出るのを防ぐために横幅を90%に
制限し、更に(必須ではないが)縦横バランスを整える
ために縦幅も同率でトリミングしたものをそれぞれL,
R画像に割り当てる。このような画枠設定により撮像画
角自体は小さく制限されることになるものの、アダプタ
200のミラーに対して中央付近に位置する比較的良好
な画像を抽出して利用することが可能となる。
First, an image frame is set by an image frame setting section 112a included in the system controller 112, and a trimming process for cutting out a monocular image from the image frame is performed in the digital process circuit 108. That is, as shown in FIG. 3, the screen is vertically divided into two, and the left half is assigned to the L image and the right half is assigned to the R image (1).
00% trimming). Although it is possible to use 100% trimming, in the present embodiment, the width is limited to 90% in order to prevent an overlap or vignetting from appearing in an image, and furthermore (although not essential) the height and width balance is adjusted. L and L are trimmed at the same rate
Assign to R image. Although the imaging field angle itself is limited to a small value by such an image frame setting, a relatively good image located near the center with respect to the mirror of the adapter 200 can be extracted and used.

【0033】なお、例えば縦幅の制限率を横幅よりも大
きく設定することで、図3のような縦位置のLR画像の
みならず、横位置のLR画像に対応する画枠設定を行う
こともできる。
It is to be noted that, for example, by setting the vertical width limiting ratio to be larger than the horizontal width, not only the LR image at the vertical position as shown in FIG. it can.

【0034】次いで、システムコントローラ112に含
まれるSPM合成部112bの制御の下、デジタルプロ
セス回路108においてSPM画像が生成される。即
ち、上記のトリミングにより得られたL,R画像は、図
4に示すように合成され、2つの画像が左右に隙間無く
並列配置された1つの画像(SPM画像)となる。この
とき、境界領域に或いはさらにSPM画像の周囲に1〜
数画素幅の枠線(例えばR=G=B=0の黒)を配し
て、SPM画像であることが視覚的にも明確となるよう
にすることも好適な変形例である。
Next, under the control of the SPM synthesizing unit 112b included in the system controller 112, an SPM image is generated in the digital process circuit 108. That is, the L and R images obtained by the above-described trimming are combined as shown in FIG. 4 to be one image (SPM image) in which two images are arranged in parallel on the left and right without any gap. At this time, 1 to 1 around the boundary area or around the SPM image
It is also a preferable modification to arrange a frame line having a width of several pixels (for example, black where R = G = B = 0) so that the SPM image is visually clear.

【0035】そして、SPM画像は、システムコントロ
ーラ112に含まれるSGM(Stereo Gram in Multime
dia)生成部112cによって、ステレオデータがヘッ
ダ部として付加されたJPEG画像データに生成され
る。即ち、記録や伝送に際して画像情報を圧縮しておく
ことが好適であり、その際任意の方法を用いることが可
能であるが、最も標準的な公知のJPEG圧縮を用い
る。その際、例えばヘッダ部のユーザー情報領域の所定
のタグにステレオデータを割り当てる。記録する情報
は、 a:ステレオであるか否か(デフォルト:Y) b:ステレオの場合の画像枚数(デフォルト:2) c:各モノキュラ画像の配置(縦横画素数を含む存在領
域) が基本情報となる。
The SPM image is stored in an SGM (Stereo Gram in Multime) contained in the system controller 112.
dia) The stereo data is generated by the generation unit 112c into JPEG image data added as a header. That is, it is preferable to compress the image information at the time of recording or transmission. At this time, any method can be used, but the most standard known JPEG compression is used. At this time, for example, stereo data is assigned to a predetermined tag in the user information area of the header section. The information to be recorded is: a: stereo or not (default: Y) b: number of images in stereo (default: 2) c: arrangement of each monocular image (existing area including number of vertical and horizontal pixels) is basic information Becomes

【0036】これらの情報があれば、自身或いは他の装
置はこの情報を読み取ることによって、元の各モノキュ
ラ画像を分離、再現することができる(画像を伸張した
後に数,配置情報に従って各画像を切り出せばよい)。
このようなSGMは、1つのステレオ画像の全画像デー
タと、画像データ以外に必要なステレオデータとを1フ
ァイル、即ち取り扱い単位としたものであるから、(狭
義の)構造化ステレオ画像の一例である。一般の、例え
ば汎用PCでの使用やインターネット上での伝送に際し
ての不可分な取り扱い単位であるから、このうちの一部
だけが誤って記録,伝送,消去されるような不具合は生
じない。
With this information, the apparatus itself or another apparatus can separate and reproduce the original monocular image by reading this information (after expanding the image, each image can be separated according to the number and arrangement information). Just cut it out).
Such an SGM is one file, ie, a handling unit, of all image data of one stereo image and necessary stereo data other than the image data. Therefore, the SGM is an example of a (narrowly defined) structured stereo image. is there. Since it is an inseparable handling unit for general use, for example, for use on a general-purpose PC or transmission on the Internet, there is no problem that only a part of the unit is erroneously recorded, transmitted, or erased.

【0037】但し、本発明においては、構造化ステレオ
画像としては広義のものを対象とする。従って、上記例
以外にも、画像データが複数ファイルに分かれているよ
うな形でSGMを構成してもよい。即ち、SGMの形式
に拘わらず、小型軽量化やアダプタ使用時の不具合回避
などの効果が同様に得られることは自明である。なお、
このような複数ファイル形式のSGMを構成するために
は、上記トリミング(1つの撮像画枠からのL、R各画
像の切り出し)が不可欠となる。
However, in the present invention, the structured stereo image is intended to be broadly defined. Therefore, other than the above example, the SGM may be configured such that the image data is divided into a plurality of files. That is, it is obvious that effects such as reduction in size and weight and avoidance of troubles when using the adapter can be similarly obtained regardless of the SGM format. In addition,
In order to configure such a multi-file format SGM, the above-described trimming (cutting out each of the L and R images from one captured image frame) is indispensable.

【0038】生成されたSGMは、システムコントロー
ラ112の指示により働くデジタルプロセス回路108
内の記録手段でカードインターフェース109を介して
メモリカード110に記録される。
The generated SGM is processed by a digital process circuit 108 which operates according to an instruction from the system controller 112.
The data is recorded on the memory card 110 via the card interface 109 by the recording means in the inside.

【0039】なお、SGMが記録されたカードは、例え
ば汎用PC等のスロット等に差し替えて使用される。カ
メラ本体は他に入出力ポートを持っており、有線又は無
線接続により、生成されたSGMを入出力可能である。
また、カード(カードインターフェース)経由で、SG
Mを入出力することも可能である。
The card on which the SGM is recorded is used, for example, by replacing it with a slot of a general-purpose PC or the like. The camera body further has an input / output port, and can input / output the generated SGM through a wired or wireless connection.
In addition, SG via card (card interface)
It is also possible to input and output M.

【0040】このような本撮像動作に先立ち、EVF表
示のための動画像信号を得るため、CCD撮像素子10
5からは画像信号が連続的に読み出される。ステレオ撮
影モードにおいては、この画像信号に対してEVF表示
制御部112dの制御により、上述と同様のトリミング
処理さらには必要に応じてSPM合成処理が行われた後
にLCD画像表示系111への表示が行われる。EVF
表示のために行われるトリミング処理およびSPM合成
処理は、扱う画像の解像度の違い等を除けば本撮像時に
行われるトリミング処理およびSPM合成処理と同じで
あり、それぞれ画枠設定部112aおよびSPM合成部
112bによって行うことができる。
Prior to such a main image pickup operation, a CCD image pickup device 10 is required to obtain a moving image signal for EVF display.
5, the image signal is continuously read. In the stereo shooting mode, the image signal is displayed on the LCD image display system 111 after being subjected to the same trimming processing as described above and, if necessary, SPM synthesis processing under the control of the EVF display control unit 112d. Done. EVF
The trimming process and the SPM synthesizing process performed for display are the same as the trimming process and the SPM synthesizing process performed at the time of main imaging except for a difference in resolution of an image to be handled, and the image frame setting unit 112a and the SPM synthesizing unit, respectively. 112b.

【0041】EVF表示には以下の4つの表示モードが
ある。 1)撮像領域全体の画像信号をそのまま使用する非ステ
レオ表示モード 2)トリミングされたLまたはRのいずれか1つのモノ
キュラ画像のみを1画像として表示する単フレーム表示
モード 3)トリミングされたLおよびRのモノキュラ画像同士
を左右に並べて合成することによって得られたSPMを
表示するSPM表示モード 4)トリミングされたLおよびRのモノキュラ画像同士
を重ね合わせて表示する重ねフレームモード 通常撮影モードでは「非ステレオ表示モード」が使用さ
れ、またステレオ撮影モードでは「単フレーム表示モー
ド」、「SPM表示モード」、「重ねフレームモード」
のいずれかが選択的に利用できる。これら表示モードそ
れぞれで表示される表示画像を図5、図6に示す。
The EVF display has the following four display modes. 1) Non-stereo display mode in which the image signal of the entire imaging area is used as it is 2) Single frame display mode in which only one of the trimmed L or R monocular images is displayed as one image 3) Trimmed L and R SPM display mode for displaying the SPM obtained by arranging left and right monocular images side by side and combining them 4) Overlapping frame mode for displaying the trimmed L and R monocular images superimposed on each other Display mode ”is used. In the stereo shooting mode,“ Single frame display mode ”,“ SPM display mode ”,“ Overlapped frame mode ”
Can be selectively used. Display images displayed in each of these display modes are shown in FIGS.

【0042】図5は縦位置のLR画像に対応する画枠設
定を行った場合における表示画像の例を示しており、ま
た図6は横位置のLR画像に対応する画枠設定を行った
場合における表示画像の例を示している。
FIG. 5 shows an example of a display image when an image frame corresponding to a vertical LR image is set, and FIG. 6 shows a case where an image frame corresponding to a horizontal LR image is set. 3 shows an example of a display image.

【0043】図5(a),図6(a)は「非ステレオ表
示モード」を使用した場合であり、トリミング処理を行
う前の画像、つまりステレオアダプタ200によって得
られる、ケラレ(またはオーバーラップ領域)を含むL
R画像全体がファインダ像として表示される。
FIGS. 5A and 6A show the case where the “non-stereo display mode” is used. The image before the trimming process is performed, that is, the vignetting (or overlapping area) obtained by the stereo adapter 200. L)
The entire R image is displayed as a finder image.

【0044】図5(b),図6(b)は「単フレーム表
示モード」を使用した場合であり、トリミングによって
切り出された1つのモノキュラ画像(ここではL画像)
のみがファインダ像として表示され、ケラレ領域やオー
バーラップ領域は表示されない。この表示モードではス
テレオアダプタ200を用いたステレオ撮像でありなが
ら、通常の単眼撮像と同様の画像を表示できるので、フ
ァインダによる構図の設定を通常撮影モードの場合と同
様に行うことが可能となる。しかも、表示されるのはケ
ラレ領域やオーバーラップ領域をトリミングによって除
外した後の画像であり、観察される画角がSGMとして
実際に生成・記録される各モノキュラ画像と等しくなる
ので、ファインダ像を見ながら極めて容易に構図を決め
ることができる。
FIGS. 5B and 6B show the case where the “single frame display mode” is used, and one monocular image (here, an L image) cut out by trimming.
Only the finder image is displayed, and the vignetting area and the overlap area are not displayed. In this display mode, an image similar to that of normal single-lens imaging can be displayed while stereo imaging using the stereo adapter 200, so that composition setting by the finder can be performed in the same manner as in the normal imaging mode. Moreover, what is displayed is the image after the vignetting area and the overlapping area have been removed by trimming, and the observed angle of view becomes equal to each monocular image actually generated and recorded as SGM. The composition can be determined very easily while watching.

【0045】LとRのどちらの画像を表示するかはスイ
ッチ操作などによって切り替えることができる。この場
合、図示のように、現在表示されている画像がL画像で
あるかR画像であるかを示す文字やマークなどの識別情
報を一緒に画面表示することが望ましい。なお、EVF
表示時には、表示に使用するLまたはRの一方のみをト
リミングすればよい。
Which of L and R images to display can be switched by a switch operation or the like. In this case, as shown in the drawing, it is desirable to display on the screen together identification information such as characters and marks indicating whether the currently displayed image is an L image or an R image. In addition, EVF
At the time of display, only one of L and R used for display needs to be trimmed.

【0046】図5(c),図6(c)は「SPM表示モ
ード」を使用した場合であり、SPM合成によって左右
に隙間無く並列配置されたLR画像がファインダ像とし
て表示される。この場合にも、ケラレ領域やオーバーラ
ップ領域は表示されない。本撮像で得られる最終的なS
MP画像を予め確認しながら立体撮像を行うことが可能
となる。
FIGS. 5C and 6C show the case where the "SPM display mode" is used, and LR images arranged side by side with no gap on the left and right by SPM synthesis are displayed as finder images. Also in this case, the vignetting area and the overlap area are not displayed. Final S obtained by actual imaging
It is possible to perform stereoscopic imaging while checking the MP image in advance.

【0047】図5(d),図6(d)は「重ねフレーム
表示モード」を使用した場合であり、トリミングによっ
て切り出されたLR画像それぞれの画枠が一致するよう
に両画像が重ね合わされた状態で画面表示される。この
表示画像は、例えば、画素毎にL画像とR画像の平均値
を算出すること等によって得ることができる。(2画像
の平均値として得られる画像は、1回の露光量を標準の
1/2にして撮影した2重露光画像と等価であるか
ら。)ステレオ撮影モードにおけるデフォルトのEVF
表示モードを例えば「単フレーム表示モード」に設定し
ておき、スイッチ操作などによって必要に応じて「SP
M表示モード」、「重ねフレーム表示モード」に切り換
え可能に構成しておくことにより、状況に応じて様々な
角度からフレーミングの調整を行うことが可能となる。
FIGS. 5D and 6D show the case where the “overlapping frame display mode” is used, and the two images are superimposed so that the respective picture frames of the LR images cut out by trimming match. The screen is displayed in the state. This display image can be obtained, for example, by calculating an average value of the L image and the R image for each pixel. (Because an image obtained as an average value of two images is equivalent to a double-exposure image photographed with a single exposure amount of 標準 of the standard.) Default EVF in the stereo photography mode
For example, the display mode is set to “single frame display mode”, and “SP
By being configured to be switchable between the “M display mode” and the “superimposed frame display mode”, framing can be adjusted from various angles according to the situation.

【0048】このように本実施形態によれば、1つの撮
像素子105の撮像エリア上に複数のモノキュラ画枠を
設定し、これから得た複数のモノキュラ画像によりステ
レオ画像を得るようにしているので、アダプタ方式特有
のオーバーラップやケラレなどの不具合を回避すること
ができる。特に、モノキュラ画枠によるトリミングをE
VF表示にも利用しているので、オーバーラップやケラ
レを除いた状態で構図の設定を行うことが可能となると
共に、最終的に生成されるSPM画像のトリミング位置
を確認することが可能となる。
As described above, according to the present embodiment, a plurality of monocular image frames are set on the imaging area of one image sensor 105, and a stereo image is obtained from a plurality of monocular images obtained from this. Problems such as overlap and vignetting specific to the adapter method can be avoided. In particular, trimming using the monocular frame
Since it is also used for VF display, it is possible to set the composition without overlapping or vignetting, and to confirm the trimming position of the finally generated SPM image. .

【0049】なお、本発明は上述した実施形態に限定さ
れるものではない。上述の実施形態においては、SPM
やSGM等は静止画の場合を例示したが、これに限られ
ることなく、EVF表示における信号処理の説明からも
明らかなように動画によるSPM、SGMにも全く同様
に適用可能である。即ち、上記SPM合成のやり方、S
GM生成に際して付加するステレオデータに関しては、
静止画動画の別によらない要素しか含まれていないか
ら、従来の動画撮像技術をそのまま使用し、例えば代表
的な動画圧縮フォーマットの1つであるMPEGを上記
JPEGに代えて用いることによって、全く同様に実施
して効果を得ることができるものである。
The present invention is not limited to the above embodiment. In the above embodiment, the SPM
Although SGM and SGM are examples of still images, the present invention is not limited to this, and can be applied to SPMs and SGMs using moving images in the same way as is clear from the description of signal processing in EVF display. That is, the method of the SPM synthesis, S
Regarding the stereo data added when generating GM,
Since only the elements that are not dependent on the still image and moving image are included, the conventional moving image capturing technology is used as it is, and for example, MPEG, which is one of the typical moving image compression formats, is used in place of the above-described JPEG. And the effect can be obtained.

【0050】また、本実施形態で使用したステレオアダ
プタは平面鏡を組み合わせたミラー式アダプタであった
が、これに替えて任意の形式のアダプタを使用可能であ
り、例えばカメラの視野方向(視線)を偏向させる楔形
プリズムを対向させて左右に配置したプリズム式ステレ
オアダプタの使用も好適な一例である。
Although the stereo adapter used in this embodiment is a mirror type adapter combining a plane mirror, any type of adapter can be used instead. For example, the direction of the visual field (line of sight) of the camera can be changed. Use of a prism type stereo adapter in which wedge-shaped prisms to be deflected are arranged on the left and right with facing each other is also a preferable example.

【0051】また、本実施形態では撮像エリアに2つの
画枠を設定したが、例えば、公知のレンチキュラー方式
(レンチキュラーシートプリントやレンチキュラースク
リーンを用いたマルチプロジェクション方式など)に用
いられる一般の多眼式立体画像を得るべく、3眼以上の
ステレオアダプタとこれに対応した3つ以上の画枠設定
を使用しても良い。さらに、ファインダ像の表示時のみ
ならず、例えばメモリカードに記録されている通常のL
R画像に対してモノキュラ画枠の設定を行って、上述の
「単フレーム表示モード」、「SPM表示モード」、
「重ねフレームモード」のいずれかでLCD画像表示系
111に再生表示することも可能である。
In the present embodiment, two image frames are set in the image pickup area. In order to obtain a stereoscopic image, three or more stereo adapters and three or more image frame settings corresponding thereto may be used. Further, not only when a finder image is displayed, but also when a normal L
By setting the monocular image frame for the R image, the above-described “single frame display mode”, “SPM display mode”,
It is also possible to reproduce and display the image on the LCD image display system 111 in any of the “overlap frame mode”.

【0052】また、上記実施形態には種々の段階の発明
が含まれており、開示される複数の構成要件における適
宜な組み合わせにより種々の発明が抽出され得る。例え
ば、実施形態に示される全構成要件から幾つかの構成要
件が削除されても、発明が解決しようとする課題の欄で
述べた課題が解決でき、発明の効果の欄で述べられてい
る効果の少なくとも1つが得られる場合には、この構成
要件が削除された構成が発明として抽出され得る。
The above-described embodiment includes various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some components are deleted from all the components shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effects described in the column of the effect of the invention can be solved. When at least one of the above is obtained, a configuration from which this configuration requirement is deleted can be extracted as an invention.

【0053】[0053]

【発明の効果】以上説明したように、本発明によれば、
ステレオペア画像の撮像に適した画像をファインダに表
示することができ、また実際に生成されるステレオ画像
のフレーミングを確認することが可能となる。
As described above, according to the present invention,
An image suitable for capturing a stereo pair image can be displayed on a finder, and framing of an actually generated stereo image can be confirmed.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施形態に係わる電子カメラの構成
を示すブロック図。
FIG. 1 is a block diagram showing a configuration of an electronic camera according to an embodiment of the present invention.

【図2】同実施形態の電子カメラに装着するミラー式ス
テレオアダプタの構成を示す図。
FIG. 2 is an exemplary view showing a configuration of a mirror type stereo adapter mounted on the electronic camera of the embodiment.

【図3】同実施形態において撮像エリアに設定される画
枠を示す図。
FIG. 3 is a view showing an image frame set in an imaging area in the embodiment.

【図4】同実施形態においてL,R画像を合成してSP
M画像を生成し、更にSGMを生成する様子を示す図。
FIG. 4 is a diagram showing an embodiment in which L and R images are combined to form an SP.
The figure which shows a mode that an M image is generated and SGM is further generated.

【図5】同実施形態におけるEVF表示モードを説明す
るための図。
FIG. 5 is an exemplary view for explaining an EVF display mode in the embodiment.

【図6】同実施形態におけるEVF表示モードを説明す
るための図。
FIG. 6 is an exemplary view for explaining an EVF display mode in the embodiment.

【図7】従来の問題点であるアダプタ方式特有のオーバ
ーラップとケラレを示す図。
FIG. 7 is a diagram showing an overlap and vignetting peculiar to the adapter method, which is a conventional problem.

【符号の説明】[Explanation of symbols]

100…カメラ本体 101…レンズ系 102…レンズ駆動機構 103…露出制御機構 104…フィルタ系 105…CCDカラー撮像素子 106…CCDドライバ 107…プリプロセス部 108…デジタルプロセス部 109…カードインターフェース 110…メモリカード 111…LCD画像表示系 112…システムコントローラ(CPU) 112a…画枠設定部 112b…SPM合成部 112c…SGM生成部 112d…EVF表示制御部 200…ミラー式ステレオアダプタ 201〜204…ミラー REFERENCE SIGNS LIST 100 camera body 101 lens system 102 lens driving mechanism 103 exposure control mechanism 104 filter system 105 CCD color imaging device 106 CCD driver 107 preprocessing unit 108 digital processing unit 109 card interface 110 memory card 111: LCD image display system 112: System controller (CPU) 112a: Image frame setting unit 112b: SPM synthesis unit 112c: SGM generation unit 112d: EVF display control unit 200: Mirror type stereo adapter 201 to 204: Mirror

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】撮像光学系と、この撮像光学系を介して入
力された被写体像を光電変換する撮像素子と、該撮像素
子の出力に基づいて被写体画像信号を得る撮像手段と、
前記被写体画像信号を表示するための電子ファインダ手
段とを具備する撮像装置であって、 立体撮影が可能なステレオ撮影モードと通常の単眼撮影
を行うための通常撮影モードとを有し、前記通常撮影モ
ード時には前記被写体画像信号を前記電子ファインダ手
段への表示に使用し、前記ステレオ撮影モード時には、
前記被写体画像信号に対して所定のトリミングを行うこ
とで、前記被写体画像信号から1つの多眼式ステレオ画
像の構成要素である複数のモノキュラ画像の少なくとも
1つを抽出し、該抽出後のモノキュラ画像を前記電子フ
ァインダ手段への表示に使用するように構成されている
ことを特徴とする撮像装置。
An image pickup optical system, an image pickup device for photoelectrically converting a subject image input through the image pickup optical system, and image pickup means for obtaining a subject image signal based on an output of the image pickup device.
An image pickup apparatus comprising electronic finder means for displaying the subject image signal, comprising: a stereo photographing mode capable of stereoscopic photographing and a normal photographing mode for performing normal monocular photographing, wherein the normal photographing mode In the mode, the subject image signal is used for display on the electronic finder means, and in the stereo shooting mode,
By performing predetermined trimming on the subject image signal, at least one of a plurality of monocular images that are components of one multi-view stereo image is extracted from the subject image signal, and the monocular image after the extraction is extracted. An image pickup apparatus is configured to be used for displaying on the electronic finder means.
【請求項2】前記ステレオ撮影モード時には、前記被写
体画像信号から抽出された単一のモノキュラ画像を前記
電子ファインダ手段に表示するように構成されているこ
とを特徴とする請求項1記載の撮像装置。
2. The image pickup apparatus according to claim 1, wherein in the stereo shooting mode, a single monocular image extracted from the subject image signal is displayed on the electronic finder means. .
【請求項3】前記ステレオ撮影モード時には、前記被写
体画像信号から抽出された複数のモノキュラ画像を並列
配置した状態で前記電子ファインダ手段に表示するよう
に構成されていることを特徴とする請求項1記載の撮像
装置。
3. In the stereo shooting mode, a plurality of monocular images extracted from the subject image signal are displayed on the electronic finder in a state of being arranged in parallel. An imaging device according to any one of the preceding claims.
【請求項4】前記ステレオ撮影モード時には、前記被写
体画像信号から抽出された複数のモノキュラ画像それぞ
れの画枠が一致するように前記抽出後の複数のモノキュ
ラ画像を重ねた状態で前記電子ファインダ手段に表示す
るように構成されていることを特徴とする請求項1記載
の撮像装置。
4. In the stereo shooting mode, the plurality of monocular images after extraction are superimposed on the electronic finder means so as to coincide with respective image frames of the plurality of monocular images extracted from the subject image signal. The imaging device according to claim 1, wherein the imaging device is configured to display the image.
【請求項5】前記撮像素子の撮像領域の中に、1つの多
眼式ステレオ画像の構成要素である複数のモノキュラ画
像に対応した複数の撮影画枠を設定するステレオ撮像画
枠設定手段と、前記複数の撮影画枠に対応して得られた
複数のモノキュラ画像を用いて、所定のステレオ画像取
扱いフォーマットに従った構造化ステレオ画像を生成す
るステレオ画像生成手段とをさらに具備し、 前記ステレオ撮影モード時には、前記ステレオ撮像画枠
設定手段によって設定された撮像画枠に対応するモノキ
ュラ画像が前記電子ファインダ手段に表示されるように
構成されていることを特徴とする請求項1乃至4のいず
れか1項記載の撮像装置。
5. A stereo image frame setting means for setting a plurality of image frames corresponding to a plurality of monocular images, which are components of one multi-view stereo image, in an image area of the image sensor. Stereo image generating means for generating a structured stereo image according to a predetermined stereo image handling format by using a plurality of monocular images obtained corresponding to the plurality of image frames; 5. The electronic camera according to claim 1, wherein in the mode, a monocular image corresponding to the image frame set by the stereo image frame setting unit is displayed on the electronic finder unit. 2. The imaging device according to claim 1.
【請求項6】撮像光学系と、この撮像光学系により結像
された被写体像を光電変換する撮像素子と、該撮像素子
の出力に基づいて被写体画像信号を得る撮像手段と、前
記被写体画像信号を表示する表示手段と、前記被写体画
像信号に対して所定のトリミングを行なうことで、前記
撮像素子の撮像領域の中に、1つの多眼式ステレオ画像
の構成要素である複数のモノキュラ画像に対応した複数
の撮影画枠を設定するステレオ撮像画枠設定手段と、前
記複数の撮影画枠に対応して得られた複数のモノキュラ
画像を用いて、所定のステレオ画像取扱いフォーマット
に従った構造化ステレオ画像を生成するステレオ画像生
成手段とを具備する撮像装置であって、前記複数の撮影
画枠より1を選択的に使用して前記表示手段に表示する
単フレーム表示モード、前記複数の撮影画枠を並列位置
した状態で前記表示手段に表示する構造化ステレオ画像
表示モード、または前記複数の撮影画枠が一致するよう
に前記複数の撮影画枠を重ねた状態で前記表示手段に表
示する重ねフレーム表示モードを用いて、前記表示手段
への表示を行う手段を具備することを特徴とする撮像装
置。
6. An imaging optical system, an imaging device for photoelectrically converting a subject image formed by the imaging optical system, imaging means for obtaining a subject image signal based on an output of the imaging device, and the subject image signal Display means for displaying a plurality of monocular images, which are components of one multi-view stereo image, in the imaging region of the imaging device by performing predetermined trimming on the subject image signal. Stereo imaging frame setting means for setting a plurality of captured image frames, and a structured stereo according to a predetermined stereo image handling format using a plurality of monocular images obtained corresponding to the plurality of imaging frames. An image pickup apparatus comprising: a stereo image generating means for generating an image; a single frame display mode for selectively using one of the plurality of photographed image frames to display the image on the display means. In a structured stereo image display mode in which the plurality of captured image frames are displayed on the display in a state where the plurality of captured image frames are arranged in parallel, or in a state in which the plurality of captured image frames are overlapped so that the plurality of captured image frames match. An imaging apparatus comprising: means for performing display on the display means using a superimposed frame display mode for displaying on the display means.
【請求項7】前記複数のモノキュラ画像は2眼式ステレ
オ画像の構成要素であるLおよびR画像であり、前記ス
テレオ画像生成手段が生成する構造化ステレオ画像は、
前記LおよびR画像を左右に配置したステレオペア画像
に対応するものであることを特徴とする請求項6記載の
撮像装置。
7. The stereoscopic image generated by the stereo image generating means, wherein the plurality of monocular images are L and R images that are components of a binocular stereo image.
The image pickup apparatus according to claim 6, wherein the image pickup apparatus corresponds to a stereo pair image in which the L and R images are arranged on the left and right.
JP2001010307A 2001-01-18 2001-01-18 Imaging device Expired - Fee Related JP4512276B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001010307A JP4512276B2 (en) 2001-01-18 2001-01-18 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001010307A JP4512276B2 (en) 2001-01-18 2001-01-18 Imaging device

Publications (2)

Publication Number Publication Date
JP2002218501A true JP2002218501A (en) 2002-08-02
JP4512276B2 JP4512276B2 (en) 2010-07-28

Family

ID=18877647

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001010307A Expired - Fee Related JP4512276B2 (en) 2001-01-18 2001-01-18 Imaging device

Country Status (1)

Country Link
JP (1) JP4512276B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1413917A2 (en) * 2002-10-23 2004-04-28 Olympus Corporation Finder, marker presentation member, and presentation method of positioning marker for calibration photography
JP2006121553A (en) * 2004-10-25 2006-05-11 Sharp Corp Video display unit
WO2007004633A1 (en) * 2005-07-05 2007-01-11 Sanyo Electric Co., Ltd. 3-d image processing method and 3-d image processing device and program and program-stored recording medium
JP2007018078A (en) * 2005-07-05 2007-01-25 Sanyo Electric Co Ltd Stereoscopic image processing method, stereoscopic image processor, program, and recording medium with program stored therein
JP2007019629A (en) * 2005-07-05 2007-01-25 Sanyo Electric Co Ltd Telescopic image processing method and stereoscopic image processing, apparatus program, and recording medium with program stored
JP2011029699A (en) * 2009-07-21 2011-02-10 Fujifilm Corp Compound-eye imaging apparatus
WO2012014494A1 (en) * 2010-07-30 2012-02-02 Sony Corporation Image processing apparatus and method and program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07274214A (en) * 1994-03-30 1995-10-20 Sanyo Electric Co Ltd Stereoscopic video camera
JPH08149515A (en) * 1994-11-18 1996-06-07 Sanyo Electric Co Ltd Stereoscopic image pickup device
JPH0951551A (en) * 1995-08-04 1997-02-18 Canon Inc Image pickup device
JPH10322725A (en) * 1997-05-19 1998-12-04 Sony Corp Stereoscopic photographed image positioning device
JPH11127369A (en) * 1997-10-21 1999-05-11 Canon Inc Image pickup display system, its control program and recording medium
JPH11285026A (en) * 1998-03-31 1999-10-15 Ricoh Co Ltd Image pickup device and photographed image storage method
JP2001222083A (en) * 2000-02-07 2001-08-17 Canon Inc Image pickup device, method of controlling image pickup device, and medium that supplies program in whch controlling method is described to computer

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07274214A (en) * 1994-03-30 1995-10-20 Sanyo Electric Co Ltd Stereoscopic video camera
JPH08149515A (en) * 1994-11-18 1996-06-07 Sanyo Electric Co Ltd Stereoscopic image pickup device
JPH0951551A (en) * 1995-08-04 1997-02-18 Canon Inc Image pickup device
JPH10322725A (en) * 1997-05-19 1998-12-04 Sony Corp Stereoscopic photographed image positioning device
JPH11127369A (en) * 1997-10-21 1999-05-11 Canon Inc Image pickup display system, its control program and recording medium
JPH11285026A (en) * 1998-03-31 1999-10-15 Ricoh Co Ltd Image pickup device and photographed image storage method
JP2001222083A (en) * 2000-02-07 2001-08-17 Canon Inc Image pickup device, method of controlling image pickup device, and medium that supplies program in whch controlling method is described to computer

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1413917A3 (en) * 2002-10-23 2004-07-28 Olympus Corporation Finder, marker presentation member, and presentation method of positioning marker for calibration photography
US6915072B2 (en) 2002-10-23 2005-07-05 Olympus Corporation Finder, marker presentation member, and presentation method of positioning marker for calibration photography
EP1413917A2 (en) * 2002-10-23 2004-04-28 Olympus Corporation Finder, marker presentation member, and presentation method of positioning marker for calibration photography
JP4602737B2 (en) * 2004-10-25 2010-12-22 シャープ株式会社 Video display device
JP2006121553A (en) * 2004-10-25 2006-05-11 Sharp Corp Video display unit
KR101005998B1 (en) * 2005-07-05 2011-01-05 산요덴키가부시키가이샤 3-d image processing method and 3-d image processing device and program-stored recording medium
JP2007019629A (en) * 2005-07-05 2007-01-25 Sanyo Electric Co Ltd Telescopic image processing method and stereoscopic image processing, apparatus program, and recording medium with program stored
JP2007018078A (en) * 2005-07-05 2007-01-25 Sanyo Electric Co Ltd Stereoscopic image processing method, stereoscopic image processor, program, and recording medium with program stored therein
WO2007004633A1 (en) * 2005-07-05 2007-01-11 Sanyo Electric Co., Ltd. 3-d image processing method and 3-d image processing device and program and program-stored recording medium
JP4688590B2 (en) * 2005-07-05 2011-05-25 三洋電機株式会社 Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program
JP4698307B2 (en) * 2005-07-05 2011-06-08 三洋電機株式会社 Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program
US8217991B2 (en) 2005-07-05 2012-07-10 Sanyo Electric Co., Ltd. Method, device and program for processing stereoscopic images and recording medium storing the program
JP2011029699A (en) * 2009-07-21 2011-02-10 Fujifilm Corp Compound-eye imaging apparatus
WO2012014494A1 (en) * 2010-07-30 2012-02-02 Sony Corporation Image processing apparatus and method and program
CN103026714A (en) * 2010-07-30 2013-04-03 索尼公司 Image processing apparatus and method and program
EP2599320A1 (en) * 2010-07-30 2013-06-05 Sony Corporation Image processing apparatus and method and program
EP2599320A4 (en) * 2010-07-30 2014-07-16 Sony Corp Image processing apparatus and method and program

Also Published As

Publication number Publication date
JP4512276B2 (en) 2010-07-28

Similar Documents

Publication Publication Date Title
JP3841630B2 (en) Image handling device
US8384802B2 (en) Image generating apparatus and image regenerating apparatus
JP4620271B2 (en) Image processing method
JP5595499B2 (en) Monocular stereoscopic imaging device
CN102172031A (en) Three-dimensional display device, three-dimensional display method, and program
JPH10336705A (en) Compound eye camera
KR20080033990A (en) 3d image file, imaging device, image reproducing device, image processing device
JP5567901B2 (en) Interchangeable lens and imaging system for stereo photography
JP2011024003A (en) Three-dimensional moving image recording method and apparatus, and moving image file conversion method and apparatus
JP4536231B2 (en) Imaging device
JP2002218506A (en) Image pickup device
JP2004297540A (en) Stereoscopic video recording and reproducing device
JP4512276B2 (en) Imaging device
JP3939127B2 (en) Imaging device
JP2002125245A (en) Stereoscopic image edit method, stereoscopic image editor and stereoscopic image display system
JP4646459B2 (en) Solid-state imaging device
JP3689976B2 (en) Optical adapter device for video shooting of 3D stereoscopic video signal converter
JP4516221B2 (en) Imaging device
JP2006013609A (en) Multi-viewpoint stereoscopic image photographing device
JP4668602B2 (en) Stereoscopic image generation apparatus and method, and program
JP2006238086A (en) Digital camera for stereoscopic photography and stereoscopic photography method
JP2010102137A (en) Three-dimensional photographing device, method and program
JP2000102035A (en) Stereoscopic photograph system
JP2002214515A (en) Image pickup unit
JP2002209232A (en) Compound eye camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070914

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100209

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100409

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100427

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100510

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130514

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130514

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140514

Year of fee payment: 4

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees