JP2003047028A - Imaging apparatus and stereogram-photographing method - Google Patents

Imaging apparatus and stereogram-photographing method

Info

Publication number
JP2003047028A
JP2003047028A JP2001233866A JP2001233866A JP2003047028A JP 2003047028 A JP2003047028 A JP 2003047028A JP 2001233866 A JP2001233866 A JP 2001233866A JP 2001233866 A JP2001233866 A JP 2001233866A JP 2003047028 A JP2003047028 A JP 2003047028A
Authority
JP
Japan
Prior art keywords
image
image pickup
stereo
chromatic aberration
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001233866A
Other languages
Japanese (ja)
Other versions
JP4646459B2 (en
Inventor
Hideaki Yoshida
英明 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Optical Co Ltd filed Critical Olympus Optical Co Ltd
Priority to JP2001233866A priority Critical patent/JP4646459B2/en
Publication of JP2003047028A publication Critical patent/JP2003047028A/en
Application granted granted Critical
Publication of JP4646459B2 publication Critical patent/JP4646459B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To perform high-quality stereo adapter three-dimensional photographing with a compact, lightweight, and inexpensive apparatus, by eliminating image deterioration and pseudo three-dimensional information caused by a prism, and utilizing the original advantages of a prism-type stereo adaptor. SOLUTION: The imaging apparatus for photographing a multiple-lens stereo image comprises a color imaging element 105 for photoelectrically converting an object image that is formed by an imaging optical system 101 to obtain an object image signal, a prism type stereo adaptor 200 that is arranged at the pre-stage of the imaging optical system 101, receives light from the object at different positions depending on parallax, and guides the received light to different regions in the imaging element 105, and an aberration correction circuit that gives a relative image positional shift for each color constituent, for correcting color aberration corresponding to the deviation of an image position for each of a plurality of color constituents in a subject image signal caused by the prism type stereo adaptor to the object image signal.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、プリズム式ステレ
オアダプタを使用した場合に生じる左右方向の色収差を
補正することで、異常立体感及び画質劣化を回避する撮
像装置及び立体画像撮影方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image pickup apparatus and a stereoscopic image pickup method for avoiding abnormal stereoscopic effect and image quality deterioration by correcting lateral chromatic aberration that occurs when a prism type stereo adapter is used.

【0002】[0002]

【従来の技術】鏡やプリズムを使用した像分離光学系に
より視点の異なる複数の画像(視差画像)の同時撮像を
可能とするステレオアダプタによって2(多)眼式ステ
レオ画像を撮像する技術は公知であり、これをデジタル
カメラ(電子スチルカメラ)等の電子撮像装置に適用す
ることで、ケラレ等の従来の欠点を解消しつつ画像の管
理を容易化した技術も本発明者自身が特願2000−2
59489号などに提案している。また、ステレオアダ
プタのうち特にプリズム式ステレオアダプタは、両眼視
差の設計自由度が高くかつ小型軽量化及び製作の容易性
に優れたものである。
2. Description of the Related Art A technique for capturing a two (multi) -eye stereo image by a stereo adapter capable of simultaneously capturing a plurality of images (parallax images) having different viewpoints by an image separation optical system using a mirror or a prism is known. Therefore, the present inventor himself applied for a technique in which this is applied to an electronic imaging device such as a digital camera (electronic still camera) to facilitate the management of images while eliminating the conventional defects such as vignetting. -2
No. 59489 and so on. Further, of the stereo adapters, the prism type stereo adapter has a high degree of freedom in designing binocular parallax, is small in size and light in weight, and is easy to manufacture.

【0003】しかしながら、このプリズム式ステレオア
ダプタにおいては、水平方向の色収差が生じるというプ
リズム式特有の問題点を有している。これは、解像度の
劣化や白黒エッジ部への着色現象という通常の意味での
画質劣化を生じるばかりでなく、特に立体画像固有の問
題として異常立体感の原因となるものであった。
However, this prism type stereo adapter has a problem peculiar to the prism type that horizontal chromatic aberration occurs. This not only causes deterioration of image quality in the usual sense of deterioration of resolution and coloring of black and white edge portions, but also causes abnormal stereoscopic effect as a problem peculiar to stereoscopic images.

【0004】具体例を挙げれば、交通標識の「駐車禁
止」標識のように赤地に青といった被写体では、上記水
平方向の色収差によって赤部と青部の結像位置が相対的
に左右にずれる。この左右方向のずれは2眼式ステレオ
画像における視差情報に相当するものとなるため、観察
者にとっては奥行きとして認識されてしまう。従って、
本来平板である上記標識が前後に飛び出したレリーフ状
の物体として観察されることになる。このような本来の
立体情報とは異なる誤った立体感或いは立体情報を表現
する定まった用語は無いが、ここでは異常立体感或いは
擬似立体情報と定義する。
As a specific example, in a subject such as a red sign on a red background such as a "no parking" sign of a traffic sign, the image forming positions of the red part and the blue part are relatively shifted left and right due to the horizontal chromatic aberration. Since the shift in the left-right direction corresponds to the parallax information in the twin-lens stereo image, it is perceived by the observer as depth. Therefore,
The above-mentioned sign which is originally a flat plate is observed as a relief-like object protruding forward and backward. There is no fixed term for expressing an incorrect stereoscopic effect or stereoscopic information different from the original stereoscopic information, but here, it is defined as an abnormal stereoscopic effect or pseudo stereoscopic information.

【0005】上記の欠点を解消するためには、特開20
00−193883号公報記載のような色消しプリズム
を使用することも一案ではある。しかし、色消しプリズ
ムを採用した場合には、プリズムの製作困難性が高くま
たより高価な硝材が必要となる、厚みが増すため(また
同じ光学有効径を得るための実口径が大きく必要となる
ことも相まって)全体としての形状,重量が大きくな
る。その結果、大型で重くまた高価なアダプタとなって
しまい、プリズム方式本来の小型軽量安価といった特長
が失われてしまうという問題があった。
In order to solve the above drawbacks, Japanese Patent Laid-Open No.
It is also an idea to use an achromatic prism as described in JP-A-00-193883. However, when an achromatic prism is adopted, it is difficult to manufacture the prism and a more expensive glass material is required, and the thickness increases (and the actual aperture for obtaining the same optical effective diameter is also required to be large). (In combination with this), the overall shape and weight increase. As a result, there is a problem in that a large, heavy, and expensive adapter is lost, and the features of the prism system such as small size, light weight, and low cost are lost.

【0006】[0006]

【発明が解決しようとする課題】このように従来、デジ
タルカメラで多眼式ステレオ画像を撮像するためにプリ
ズム式ステレオアダプタを用いる方法があるが、プリズ
ム式ステレオアダプタは水平方向の色収差が生じるとい
うプリズム式特有の問題点を有しており、画質劣化や異
常立体感を招く原因となる。また、色収差を解消するた
めに色消しプリズムを採用した場合には、大型で重くま
た高価なアダプタとなってしまい、プリズム方式本来の
小型軽量安価といった特長が失われてしまう問題があっ
た。
As described above, conventionally, there is a method of using a prism type stereo adapter to capture a multi-view type stereo image with a digital camera. However, the prism type stereo adapter causes horizontal chromatic aberration. There is a problem peculiar to the prism type, which causes deterioration of image quality and abnormal stereoscopic effect. Further, when an achromatic prism is used to eliminate chromatic aberration, there is a problem that a large, heavy, and expensive adapter is used, and the features of the prism system such as small size, light weight, and low cost are lost.

【0007】本発明は、上記事情を考慮して成されたも
ので、その目的とするところは、プリズムに起因する画
質劣化及び擬似立体情報を色消しプリズムを用いること
なく解消(低減)することができ、プリズム式ステレオ
アダプタの本来の利点を生かした小型軽量安価で高画質
なステレオアダプタ立体撮像を行なうことができる撮像
装置及び立体画像撮影方法を提供することにある。
The present invention has been made in consideration of the above circumstances, and an object thereof is to eliminate (reduce) image quality deterioration and pseudo three-dimensional information due to a prism without using an achromatic prism. It is possible to provide an image pickup apparatus and a stereoscopic image photographing method capable of performing stereoscopic image pickup of a small size, light weight, low cost, and high quality stereo adapter that makes use of the original advantages of the prism type stereo adapter.

【0008】[0008]

【課題を解決するための手段】(構成)上記課題を解決
するために本発明は次のような構成を採用している。
(Structure) In order to solve the above problems, the present invention adopts the following structure.

【0009】即ち本発明は、多眼式ステレオ画像を撮影
するための撮像装置において、撮像光学系により結像さ
れた被写体像を光電変換する撮像素子と、前記撮像素子
の出力に基づいてカラーの被写体画像信号を得るカラー
撮像手段と、前記撮像光学系の前段に配置され、視差に
応じた異なる位置で前記被写体からの光を受光して、前
記撮像素子の異なる領域に導くためのプリズム式ステレ
オアダプタと、前記被写体画像信号に対し前記プリズム
式ステレオアダプタに起因して生じる色収差の補正を行
なう色収差補正手段と、を有したことを特徴とする。
That is, according to the present invention, in an image pickup apparatus for picking up a multi-view stereo image, an image pickup element for photoelectrically converting a subject image formed by an image pickup optical system, and a color image based on the output of the image pickup element. A color image pickup means for obtaining a subject image signal and a prism type stereo arranged in front of the image pickup optical system for receiving light from the subject at different positions according to parallax and guiding it to different regions of the image pickup device. An adapter and a chromatic aberration correcting unit that corrects chromatic aberration caused by the prism type stereo adapter with respect to the subject image signal are provided.

【0010】ここで、本発明の望ましい実施態様として
は次のものが挙げられる。 (1) 色収差補正手段における色収差の補正は、プリズム
式ステレオアダプタに起因して生じる被写体画像信号の
複数の色成分毎の像位置のずれに対応して、各色成分毎
に相対的な像位置ずらしを与えることによって行なわれ
ること。 (2) 像位置ずらしは、1画素単位で行なわれること。
The following are preferred embodiments of the present invention. (1) The correction of the chromatic aberration in the chromatic aberration correction means corresponds to the shift of the image position of each of the plurality of color components of the subject image signal caused by the prism type stereo adapter, and the relative image position is shifted for each color component. Be done by giving. (2) Image position shifting must be performed in pixel units.

【0011】(3) ステレオアダプタの装着を検出するア
ダプタ検出手段を更に有してなり、色収差補正手段にお
ける色収差の補正は、アダプタ検出手段によるステレオ
アダプタ装着の検出に基づいて行なわれること。 (4) 適用可能なステレオアダプタの種類が複数であり、
色収差補正手段における色収差の補正はステレオアダプ
タの種類に対応して行なわれること。
(3) It further comprises adapter detection means for detecting the attachment of the stereo adapter, and the correction of the chromatic aberration in the chromatic aberration correction means is performed based on the detection of the stereo adapter attachment by the adapter detection means. (4) There are multiple types of applicable stereo adapters,
Correction of chromatic aberration in the chromatic aberration correction means should be performed according to the type of stereo adapter.

【0012】(5) 被写体画像信号に対して所定のトリミ
ングを行なうことで、撮像素子の撮像領域の中に、1つ
の多眼式ステレオ画像の構成要素である複数のモノキュ
ラ画像に対応した複数の撮影画枠を設定する撮影画枠設
定手段と、複数の撮影画枠に対応して得られた複数のモ
ノキュラ画像に基づいて、所定のステレオ画像取り扱い
フォーマットに従った構造化ステレオ画像を生成するス
テレオ画像生成手段と、を更に有したこと。
(5) By subjecting the subject image signal to predetermined trimming, a plurality of monocular images corresponding to a plurality of monocular images, which are constituent elements of one multi-view stereo image, are provided in the image pickup area of the image pickup device. Stereo for generating a structured stereo image according to a predetermined stereo image handling format based on a photographing image frame setting means for setting a photographing image frame and a plurality of monocular images obtained corresponding to a plurality of photographing image frames And an image generating unit.

【0013】(6) 被写体画像信号に対するトリミング
は、当該被写体画像信号の色成分毎に独立に行ない得る
ように構成されており、色収差補正手段における色収差
の補正は、ステレオアダプタに起因して生じる色成分毎
の像位置のずれに対応してトリミングを行なうことによ
って成されること。
(6) The subject image signal is trimmed independently for each color component of the subject image signal, and the chromatic aberration correction means corrects the chromatic aberration by the stereo adapter. It is performed by trimming corresponding to the shift of the image position for each component.

【0014】また本発明は、撮像光学系により結像され
た被写体像を光電変換する撮像素子と、前記撮像素子の
出力に基づいてカラーの被写体画像信号を得るカラー撮
像手段と、を有した撮像装置に対し、前記撮像光学系の
前段に、視差に応じた異なる位置で前記被写体からの光
を受光して、前記撮像素子の異なる領域に導くためのプ
リズム式ステレオアダプタを配置し、この状態で撮影を
行なって立体画像を生成する立体画像撮影方法であっ
て、前記被写体画像信号に対して前記ステレオアダプタ
に起因して生じる色収差の補正を施すことを特徴とす
る。
The present invention also includes an image pickup device that photoelectrically converts a subject image formed by the image pickup optical system, and a color image pickup device that obtains a color subject image signal based on the output of the image pickup device. A prism type stereo adapter for receiving light from the subject at different positions according to parallax and guiding it to different regions of the image pickup device is arranged in front of the image pickup optical system with respect to the apparatus. A stereoscopic image capturing method of capturing an image to generate a stereoscopic image, characterized in that the subject image signal is corrected for chromatic aberration caused by the stereo adapter.

【0015】ここで、色収差の補正を施すために、プリ
ズム式ステレオアダプタに起因して生じる被写体画像信
号の複数の色成分毎の像位置のずれに対応して、各色成
分毎に相対的な像位置ずらしを与えることが望ましい。
Here, in order to correct chromatic aberration, a relative image is obtained for each color component in response to a shift in image position for each of a plurality of color components of the subject image signal caused by the prism type stereo adapter. It is desirable to provide a displacement.

【0016】(作用)本発明によれば、プリズム式ステ
レオアダプタに起因して生じる被写体画像信号の複数の
色成分毎の像位置のずれに対応して、各色成分毎に相対
的な像位置ずらしを与える色収差補正手段を設けること
によって、撮像信号の色成分及び画像の左右によって異
なる量の水平位置ずらしを行なうことができ、これによ
り色収差及びそれによって生じる擬似立体情報を補正す
ることができる。そしてこの場合、プリズムに起因する
画質劣化及び擬似立体情報を色消しプリズムを用いるこ
となく解消(低減)することができるから、プリズム式
アダプタの本来の利点を生かした小型軽量安価で高画質
なステレオアダプタ立体撮像を行なうことが可能とな
る。
(Operation) According to the present invention, relative image position shifts are made for each color component in response to image position shifts for a plurality of color components of the subject image signal caused by the prism type stereo adapter. By providing the chromatic aberration correcting means for providing the above, it is possible to shift the horizontal position by different amounts depending on the color component of the image pickup signal and the left and right of the image, and thereby it is possible to correct the chromatic aberration and the pseudo three-dimensional information caused thereby. In this case, since the image quality deterioration and the pseudo three-dimensional information caused by the prism can be eliminated (reduced) without using the achromatizing prism, the stereo advantage of the small size, the light weight, the low cost, and the high image quality can be obtained by utilizing the original advantage of the prism type adapter. It becomes possible to perform stereoscopic imaging of the adapter.

【0017】[0017]

【発明の実施の形態】以下、本発明の詳細を図示の実施
形態によって説明する。
DETAILED DESCRIPTION OF THE INVENTION The details of the present invention will be described below with reference to the illustrated embodiments.

【0018】(実施形態)図1は、本発明の一実施形態
に係わるデジタルカメラの基本構成を示すブロック図で
ある。
(Embodiment) FIG. 1 is a block diagram showing a basic configuration of a digital camera according to an embodiment of the present invention.

【0019】図中101は各種レンズからなるレンズ
系、102はレンズ系101を駆動するためのレンズ駆
動機構である。103は露出を制御するための露出制御
機構であり、絞り及びこの絞りを駆動する駆動機構を含
み、レンズ系101を通過した光線の入射光量を制限し
てその絞りを制御するために設けられている。104は
ローパス及び赤外カット用のフィルタを備えたフィルタ
系、105はCCDカラー撮像素子であり、露出制御機
構103を通過した光線は、フィルタ104を介して撮
像素子105に導かれる。従って、撮像素子105に
は、被写体に対応した画像が結像される。
In the figure, 101 is a lens system including various lenses, and 102 is a lens drive mechanism for driving the lens system 101. Reference numeral 103 denotes an exposure control mechanism for controlling exposure, which includes a diaphragm and a driving mechanism for driving the diaphragm, and is provided for controlling the diaphragm by limiting the amount of incident light rays passing through the lens system 101. There is. Reference numeral 104 is a filter system including a low-pass filter and an infrared cut filter, and 105 is a CCD color image pickup device. A light beam that has passed through the exposure control mechanism 103 is guided to the image pickup device 105 via the filter 104. Therefore, an image corresponding to the subject is formed on the image sensor 105.

【0020】107は、ゲインコントロールアンプ,A
/D変換器等を含むプリプロセス回路であり、撮像素子
105により得られた撮像信号はこのプリプロセス回路
107に入力され、デジタル化された画素信号がこのプ
リプロセス回路107から出力される。108は、色信
号生成処理,マトリックス変換処理,その他各種のデジ
タル処理を行なうためのデジタルプロセス回路であり、
このデジタルプロセス回路108において上記デジタル
化された画像信号を処理することによりカラー画像デー
タが生成される。109はデジタルプロセス回路108
に接続されたカードインターフェース、110はCF
(Compact Flash Memory Card)やスマートメディア等
のメモリカード、111はLCD画像表示系である。メ
モリカード110はカラー画像データを格納するもので
あり、LCD表示系111はカラー画像データを表示す
るものである。
Reference numeral 107 denotes a gain control amplifier, A
This is a pre-process circuit including a D / D converter and the like, and an image pickup signal obtained by the image pickup device 105 is input to the preprocess circuit 107, and a digitized pixel signal is output from the preprocess circuit 107. Reference numeral 108 denotes a digital process circuit for performing color signal generation processing, matrix conversion processing, and other various digital processing.
Color image data is generated by processing the digitized image signal in the digital process circuit 108. 109 is a digital process circuit 108
Card interface connected to, 110 is CF
A memory card such as (Compact Flash Memory Card) or smart media, and 111 is an LCD image display system. The memory card 110 stores color image data, and the LCD display system 111 displays color image data.

【0021】また、図中の112は各部を統括的に制御
するためのシステムコントローラ(CPU)、113は
各種SWからなる操作スイッチ系、114は操作状態及
びモード状態等を表示するための操作表示系、115は
レンズ駆動機構102を制御するためのレンズドライ
バ、116は発光手段としてのストロボ、117は露出
制御機構103及びストロボ116を制御するための露
出制御ドライバ、118は各種設定情報等を記憶するた
めの不揮発性メモリ(EEPROM)を示している。
Further, in the figure, 112 is a system controller (CPU) for centrally controlling each part, 113 is an operation switch system including various SWs, and 114 is an operation display for displaying an operation state and a mode state. Reference numeral 115 is a lens driver for controlling the lens driving mechanism 102, 116 is a strobe as a light emitting means, 117 is an exposure control driver for controlling the exposure control mechanism 103 and the strobe 116, and 118 is various setting information and the like. 3 shows a non-volatile memory (EEPROM) for doing so.

【0022】本実施形態のデジタルカメラにおいては、
各信号処理はシステムコントローラ112の管理化にデ
ジタルプロセス108が行なうものであって、これらは
一体的に機能し演算実行に関して多くの場合は不可分な
ものである。従って、説明の便宜上この一方が行なうか
のように表現された部分があってもこれに限られるもの
ではない。
In the digital camera of this embodiment,
Each signal processing is performed by the digital process 108 in order to manage the system controller 112, and these functions integrally and in many cases are indivisible with respect to execution of operations. Therefore, for convenience of explanation, even if there is a portion expressed as if one of them is performed, it is not limited to this.

【0023】撮像素子105としては、RGBベイヤ配
列の撮像素子を使用する。各種信号処理に際して、始め
に出力信号を同時化する。記号cはRGBのうちのいず
れかを表すものとし、原画素情報をx(i,j)、同時化後
の画素情報をxc(i,j)、原画素の色コーディング(R
GBのいずれか)をid{x(i,j)}とすれば同時化処理
は、 (case1)when c =id{x(i,j)} → xc(i,j) = x(i,j) (case2)when c ≠ id{x(i,j)},c = G → xc(i,j) = {x(i,j-1)+x(i-1,j)+x(i+1,j)+x(i,j+1)}/4 (case3)when c ≠ id{x(i,j)},c ≠ G ,id{x(i,j)} ≠ G → xc(i,j) = {x(i-1,j-1)+x(i+1,j-1)+x(i-1,j+1)+x(i+1,j+1)}/4 (case4)when c ≠ G ,id{x(i,j)} = G ,id{x(i-1,j)} = c → xc(i,j) = {x(i-1,j)+x(i+1,j)}/2 (case5)when c ≠ G ,id{x(i,j)} = G ,id{x(i-1,j)} ≠ c → xc(i,j) = {x(i,j-1)+x(i,j+1)}/2 と行なわれる。
As the image pickup device 105, an image pickup device having an RGB Bayer array is used. In various signal processing, output signals are first synchronized. The symbol c represents one of RGB, the original pixel information is x (i, j), the pixel information after synchronization is xc (i, j), and the color coding (R
If any of GB) is id {x (i, j)}, the synchronization processing is (case1) when c = id {x (i, j)} → xc (i, j) = x (i, j) (case2) when c ≠ id {x (i, j)}, c = G → xc (i, j) = {x (i, j-1) + x (i-1, j) + x ( i + 1, j) + x (i, j + 1)} / 4 (case3) when c ≠ id {x (i, j)}, c ≠ G, id {x (i, j)} ≠ G → xc (i, j) = (x (i-1, j-1) + x (i + 1, j-1) + x (i-1, j + 1) + x (i + 1, j + 1 )} / 4 (case4) when c ≠ G, id {x (i, j)} = G, id {x (i-1, j)} = c → xc (i, j) = {x (i- 1, j) + x (i + 1, j)} / 2 (case5) when c ≠ G, id {x (i, j)} = G, id {x (i-1, j)} ≠ c → xc (i, j) = {x (i, j-1) + x (i, j + 1)} / 2.

【0024】即ち、当該画素が持っている色情報はその
まま用い(case1)、R又はB画素のG情報は隣接する
4つのG画素より(case2)、R(B)画素のB(R)
情報は対角隣接する4つのB(R)画素より(case
3)、G画素のR又はB情報は、各色の行に属する場合
は左右に隣接する2画素より(case4)、各色の列に属
する場合は上下に隣接する2画素より(case5)それぞ
れ補間する。
That is, the color information held by the pixel is used as it is (case 1), the G information of the R or B pixel is obtained from four adjacent G pixels (case 2), and the B (R) of the R (B) pixel is used.
Information is (case) from four diagonally adjacent B (R) pixels.
3) The R or B information of the G pixel is interpolated from two adjacent pixels on the left and right (case 4) when it belongs to each color row, and from two pixels vertically adjacent (case 5) when it belongs to each color column. .

【0025】本実施形態のデジタルカメラでは、アダプ
タが装着されていない通常撮影モードの場合は、従来の
カメラと同様の処理が採用される。即ち、この同時化さ
れた画素データxc(i,j)をRGBデータとして用い、従
来公知の各種信号処理を施して所定フォーマットの画像
信号と為して後にメモリカード109に記録する。
In the digital camera of this embodiment, in the normal photographing mode in which the adapter is not mounted, the same processing as that of the conventional camera is adopted. That is, the synchronized pixel data xc (i, j) is used as RGB data and subjected to various conventionally known signal processing to form an image signal of a predetermined format, which is later recorded in the memory card 109.

【0026】なお、この後段の回路における処理は、そ
の必要に応じて適宜使用されるそれ自体は公知の、例え
ば色バランス処理、マトリクス演算による輝度−色差信
号への変換或いはその逆変換処理、帯域制限等による偽
色除去或いは低減処理、γ変換に代表される各種非線型
処理、各種情報圧縮処理、等々である。
Incidentally, the processing in the circuit at the subsequent stage is known per se, which is appropriately used as necessary, for example, color balance processing, conversion into a luminance-color difference signal by matrix calculation or its inverse conversion processing, and bandwidth. False color removal or reduction processing due to restrictions, various non-linear processing represented by γ conversion, various information compression processing, and the like.

【0027】基本的な構成は従来一般的なデジタルカメ
ラと同様であるが、本実施形態ではこれに加えて、操作
スイッチ系113には、通常モードとステレオモードを
切り替えるためのモード切り替えスイッチが設けられて
いる。さらに、システムコントローラ112には、撮像
エリアのトリミング領域を設定するための画枠設定部,
アダプタの色収差に起因する色ずれを補正するための色
収差補正部,モノキュラ画像からSPM(Stereo Pear
in Multimedia)画像を合成するためのSPM合成部,
SPM画像からJPEG画像データを生成するためのS
GM(Stereo Gram in Multimedia)生成部が設けられ
ている。
The basic structure is the same as that of a conventional general digital camera, but in the present embodiment, in addition to this, the operation switch system 113 is provided with a mode selection switch for switching between the normal mode and the stereo mode. Has been. Further, the system controller 112 includes an image frame setting unit for setting a trimming area of the imaging area,
Chromatic aberration corrector to correct color shift due to chromatic aberration of adapter, SPM (Stereo Pear) from monocular image
in Multimedia) SPM synthesizer for synthesizing images,
S for generating JPEG image data from SPM image
A GM (Stereo Gram in Multimedia) generation unit is provided.

【0028】本実施形態のデジタルカメラにおいては、
図2に示すように、カメラ本体100にプリズム式ステ
レオアダプタ200が着脱可能となっている。このアダ
プタ200の左右各部分に入射した光は撮影レンズ10
1を介して撮像素子105の左側領域L及び右側領域R
にそれぞれ結像されるようになっている。
In the digital camera of this embodiment,
As shown in FIG. 2, the prism type stereo adapter 200 is attachable to and detachable from the camera body 100. The light incident on the left and right parts of the adapter 200 is taken by the photographing lens 10
1 to the left side region L and the right side region R of the image sensor 105
Are imaged respectively.

【0029】通常モードでは、ステレオアダプタ200
を取り付けることなく、通常(単眼)カメラと同様に撮
像される。なお、通常モードとステレオモードの切り替
えは前記したモード切り替えスイッチで行われるが、ス
テレオアダプタ200を取り付けているか否かに応じて
自動的に切り替えるようにしてもよい。
In the normal mode, the stereo adapter 200
The image is taken in the same way as with a normal (monocular) camera without attaching. The normal mode and the stereo mode are switched by the above-mentioned mode switch, but may be automatically switched depending on whether or not the stereo adapter 200 is attached.

【0030】ここで、ステレオアダプタ200を取り付
けているか否かを検出する方法としては、(1) メカニカ
ルスイッチ(電気接点スイッチ)をレンズ系101の鏡
筒の適所に設け、アダプタ200を装着したときにこれ
を動作させる、(2) 異方性導電ゴムによる開接点をレン
ズ系101の鏡筒の適所に設け、アダプタ200を装着
するとアダプタ200の対応箇所に設けられた導電部
(金属板など)によってこの接点が導通する、ようにす
ればよい。
Here, as a method for detecting whether or not the stereo adapter 200 is attached, (1) when a mechanical switch (electric contact switch) is provided at an appropriate position on the lens barrel of the lens system 101 and the adapter 200 is attached. (2) An open contact made of anisotropic conductive rubber is provided at an appropriate position of the lens barrel of the lens system 101, and when the adapter 200 is attached, a conductive part (metal plate, etc.) provided at a corresponding position of the adapter 200. This contact may be made conductive by.

【0031】ステレオモードになったら、ズームが所定
位置に固定される。所定位置とは左右の像の撮影範囲が
等しくなるような位置であり、予め設計時点で与えられ
ている。本実施形態ではワイド端である。即ち、アダプ
タ200のプリズムの偏向角度の設定(プリズムガラス
の屈折率及び頂角で決まる)は、ワイド端で左右像の範
囲が等しくなるように為されている。なお、単焦点撮影
レンズの場合は、その焦点距離に合わせて偏向角度を設
定すれば良いことは言うまでもない。
When in the stereo mode, the zoom is fixed at a predetermined position. The predetermined position is a position where the left and right images are captured in the same shooting range, and is given in advance at the time of design. In this embodiment, it is the wide end. That is, the setting of the deflection angle of the prism of the adapter 200 (determined by the refractive index and the apex angle of the prism glass) is such that the left and right image ranges are equal at the wide end. Needless to say, in the case of a single-focus photographing lens, the deflection angle may be set according to the focal length.

【0032】プリズム式のアダプタであるから、ガラス
の分散及び偏向角度に応じた色収差が偏向方向(即ち像
の分離方向=水平方向)に生じる。この場合の像の水平
方向の位置ずれは、プリズム(ガラスの分散と偏向角
度)及び撮影レンズ101の焦点距離によって決まる
が、本実施形態のデジタルカメラのステレオモードで
は、Gを基準にR,Bはそれぞれ内側,外側に5画素の
ずれを生ずるものとする。ここで、「内側」とは右画像
においては左側、左画像においては右側を、「外側」は
その逆を意味する。
Since it is a prism type adapter, chromatic aberration depending on the dispersion of glass and the deflection angle occurs in the deflection direction (that is, the image separation direction = horizontal direction). The positional shift of the image in the horizontal direction in this case is determined by the prism (dispersion of glass and deflection angle) and the focal length of the photographing lens 101. In the stereo mode of the digital camera of the present embodiment, R and B are set with G as a reference. Is to generate a shift of 5 pixels inside and outside, respectively. Here, "inside" means the left side in the right image, right side in the left image, and "outside" means the opposite.

【0033】この様子を、図3に模式的に示した。但
し、ずれ量を極端に誇張した表現となっており、また文
字L,Rは左右の各画像であることを意味する単なる記
号に過ぎず、実際の立体画像では左右とも類似の画像が
得られることは勿論である。
This state is schematically shown in FIG. However, the amount of deviation is extremely exaggerated, and the letters L and R are merely symbols indicating that the images are the left and right images. In an actual stereoscopic image, similar images can be obtained on the left and right. Of course.

【0034】なお、このずれが実際には4.7画素など
1画素以下の端数を含んでいるような場合であっても、
以下における色収差補正では1画素単位の補正処理を行
なうものであり、上記「5画素」はこのような意味、即
ち「適用されるべき補正が(1画素単位では)5画素で
ある」ということを意味するものである。0.5画素以
下のずれは、事実上無視できるから、このように補正を
敢えて1画素単位で扱うことで処理の単純化をはかるこ
とができる。
Even if this deviation actually includes a fraction of 1 pixel or less such as 4.7 pixels,
In the chromatic aberration correction described below, correction processing is performed in a unit of one pixel, and the above "5 pixels" has such a meaning, that is, "the correction to be applied is (in one pixel unit) 5 pixels". It is meant. Since the deviation of 0.5 pixels or less can be practically ignored, the processing can be simplified by intentionally treating the correction in a unit of one pixel.

【0035】ステレオモードでは、ステレオアダプタ2
00を取り付けた状態でトリガー操作によって、通常の
カメラと全く同様の撮像を行なう。そして、撮像エリア
の全領域から読み出した画像信号に対して、以下の処理
を行なう。
In the stereo mode, the stereo adapter 2
With the 00 attached, a trigger operation is performed to take an image exactly like a normal camera. Then, the following processing is performed on the image signal read from the entire imaging area.

【0036】まず、システムコントローラ112に含ま
れる画枠設定部によって、デジタルプロセス回路108
においてトリミングが行われる。即ち、図4に示すよう
に、画面を縦に2分割し、左半分をL画像、右半分をR
画像と割り当てる(100%トリミング)。なお、10
0%トリミングで使用することも可能であるが、本実施
形態ではオーバーラップやケラレが画像に出るのを防ぐ
ために横幅を90%に制限し、更に(必須ではないが)
縦横バランスを整えるために縦幅も同率でトリミングし
たものをそれぞれL,R画像に割り当てる。
First, the digital process circuit 108 is set by the image frame setting unit included in the system controller 112.
Trimming is performed at. That is, as shown in FIG. 4, the screen is vertically divided into two, and the left half is the L image and the right half is the R image.
Assign with image (100% trimming). 10
Although it is possible to use with 0% trimming, in the present embodiment, the width is limited to 90% in order to prevent overlap and vignetting from appearing in the image, and further (though not essential).
In order to adjust the horizontal and vertical balance, the vertical width is also trimmed at the same ratio and assigned to the L and R images, respectively.

【0037】このトリミング画像は色収差による色ずれ
を含んでいるので、システムコントローラ112に含ま
れる色収差補正部において、次式の演算(アドレス割り
当て変更処理)によって補正処理(色収差補正)を行な
う。補正後の信号を yc(i,j)と書けば、 (1) G信号については基準として用いる。即ち補正は施
さない。 → yG(i,j) = xG(i,j) (2) L(左)画像のB信号及びR(右)画像のR信号に
ついては、左に5画素ずれているので右に5画素シフト
させる。 → yc(i,j) = xc(i-5,j) (3) L(左)画像のR信号及びR(右)画像のB信号に
ついては、右に5画素ずれているので左に5画素シフト
させる。 → yc(i,j) = xc(i+5,j) このようにして得られた補正後のトリミング画像は、色
収差の影響が除去された、本来の各モノキュラ画像とな
っている。即ち、前記図3のような画像が図4のような
本来の画像に補正されるものである。次段では、この補
正後のトリミング画像を用いてSPM画像の生成等を行
なう。但しこの場合、左右両端に5画素(シフト量分)
の無効領域が生じるので、その分はさらにトリミングに
て整形して後に次段に移行する。
Since this trimmed image contains a color shift due to chromatic aberration, the chromatic aberration correcting unit included in the system controller 112 performs correction processing (chromatic aberration correction) by the calculation of the following equation (address assignment changing processing). If the corrected signal is written as yc (i, j), (1) G signal is used as a reference. That is, no correction is applied. → yG (i, j) = xG (i, j) (2) The B signal of the L (left) image and the R signal of the R (right) image are shifted by 5 pixels to the right because they are shifted by 5 pixels to the left. Let → yc (i, j) = xc (i-5, j) (3) For the R signal of the L (left) image and the B signal of the R (right) image, there are 5 pixels to the right, so 5 to the left. Pixel shift. → yc (i, j) = xc (i + 5, j) The corrected trimmed image thus obtained is each original monocular image from which the influence of chromatic aberration is removed. That is, the image shown in FIG. 3 is corrected to the original image shown in FIG. In the next stage, the SPM image is generated using the corrected trimmed image. However, in this case, 5 pixels at the left and right ends (for the shift amount)
Since an invalid area of is generated, that portion is further shaped by trimming, and the process moves to the next stage.

【0038】勿論、予め5画素分だけ左右両側にオーバ
ートリミングするようにしておくことはさらに好適な変
形例である。これによって、色収差補正によって画像が
小さくなることが回避できる。同じことは、トリミング
を施す段階で、RGBの各色によって独立なトリミング
が可能な構成とし、上記した5画素(シフト量)分だけ
RGB各色成分によってトリミング枠をずらしておくよ
うにしても実現できる。これによって、さらにトリミン
グ時のバッファ領域を節減することができる。
Of course, it is a further preferable modification to perform over-trimming on the left and right sides by 5 pixels in advance. This makes it possible to prevent the image from becoming smaller due to the chromatic aberration correction. The same thing can be realized by making it possible to perform independent trimming by each color of RGB at the trimming stage and shifting the trimming frame by each color component of RGB by the above-mentioned 5 pixels (shift amount). As a result, the buffer area during trimming can be further reduced.

【0039】次いで、システムコントローラ112に含
まれるSPM合成部によって、デジタルプロセス回路1
08においてSPM画像が生成される。即ち、上記のト
リミングにより得られた(収差補正後の)L,R画像
は、図5に示すように合成され、2つの画像が左右に隙
間無く並列配置された1つの画像(SPM画像)とな
る。このとき、境界領域に或いはさらにSPM画像の周
囲に1〜数画素幅の枠線(例えばR=G=B=0の黒)
を配して、SPM画像であることが視覚的にも明確とな
るようにすることも好適な変形例である。
Next, the SPM synthesizer included in the system controller 112 causes the digital process circuit 1 to operate.
At 08, an SPM image is generated. That is, the L and R images (after the aberration correction) obtained by the above trimming are combined as shown in FIG. 5, and two images are arranged side by side without a gap (SPM image). Become. At this time, a frame line having a width of one to several pixels (for example, R = G = B = 0 black) in the boundary area or around the SPM image.
It is also a preferable modified example to arrange so that it is visually clear that the image is an SPM image.

【0040】そして、SPM画像は、システムコントロ
ーラ112に含まれるSGM(Stereo Gram in Multime
dia)生成部によって、ステレオデータをヘッダ部とし
て付加されたJPEG画像データに生成される。即ち、
記録や伝送に際して画像情報を圧縮しておくことが好適
であり、その際任意の方法を用いることが可能である
が、最も標準的な公知のJPEG圧縮を用いる。その
際、例えばヘッダ部のユーザー情報領域の所定のタグに
ステレオ情報を割り当てる。記録する情報は、 a:ステレオであるか否か(デフォルト:Y) b:ステレオの場合の画像枚数(デフォルト:2) c:各モノキュラ画像の配置(縦横画素数を含む存在領
域) が基本情報となる。
The SPM image is an SGM (Stereo Gram in Multime) included in the system controller 112.
The dia) generation unit generates stereo data into JPEG image data added with a header portion. That is,
It is preferable to compress the image information at the time of recording or transmitting, and any method can be used at that time, but the most standard known JPEG compression is used. At that time, for example, stereo information is assigned to a predetermined tag in the user information area of the header part. The information to be recorded is: a: whether it is stereo (default: Y) b: the number of images in the case of stereo (default: 2) c: the arrangement of each monocular image (the existing area including the number of vertical and horizontal pixels) is the basic information Becomes

【0041】これらの情報があれば、自身或いは他の装
置はこの情報を読み取ることによって、元の各モノキュ
ラ画像を分離、再現することができる(画像を伸張した
後に数,配置情報に従って各画像を切り出せばよい)。
このようなSGMは、1つのステレオ画像の全画像デー
タと、画像データ以外に必要なステレオデータとを1フ
ァイル、即ち取り扱い単位としたものであるから、(狭
義の)構造化ステレオ画像の一例である。一般の、例え
ば汎用PCでの使用やインターネット上での伝送に際し
ての不可分な取り扱い単位であるから、このうちの一部
だけが誤って記録,伝送,消去されるような不具合は生
じない。
With this information, the device itself or another device can separate and reproduce each original monocular image by reading this information (each image is expanded according to the number and arrangement information after decompressing the image). Just cut it out).
Such an SGM is an example of a structured stereo image (in a narrow sense) because all image data of one stereo image and stereo data other than the image data are one file, that is, a handling unit. is there. Since it is an indivisible handling unit for general use, for example, in a general-purpose PC or transmission on the Internet, there is no problem that only a part of this is erroneously recorded, transmitted, or erased.

【0042】但し、本発明においては、構造化ステレオ
画像としては広義のものを対象とする。従って、上記例
以外に例えば、画像データが複数ファイルに分かれてい
るような形でSGMを構成してもよい。即ち、SGMの
形式に拘わらず、小型軽量化やアダプタ使用時の不具合
回避などの効果が同様に得られることは自明である。な
お、このような複数ファイル形式のSGMを構成するた
めには、上記トリミング(1つの撮像画枠からのL、R
各画像の切り出し)が不可欠となる。
However, in the present invention, the structured stereo image is intended in a broad sense. Therefore, in addition to the above example, the SGM may be configured such that the image data is divided into a plurality of files. That is, it is self-evident that regardless of the format of the SGM, effects such as reduction in size and weight and avoidance of troubles when using the adapter can be similarly obtained. In addition, in order to configure such a multi-file format SGM, the above trimming (L, R from one imaging image frame
It is essential to cut out each image).

【0043】生成されたSGMを、システムコントロー
ラ112の指示により働くデジタルプロセス回路108
内の記録手段でカードインターフェース109を介して
メモリカード110に記録する。
The digital process circuit 108 that operates the generated SGM according to an instruction from the system controller 112.
The data is recorded in the memory card 110 via the card interface 109 by the recording means inside.

【0044】なお、SGMが記録されたカードは、例え
ば汎用PC等のスロット等に差し替えて使用される。カ
メラ本体は他に入出力ポートを持っており、有線又は無
線接続により、生成されたSGMを入出力可能である。
また、カード(カードインターフェース)経由で、SG
Mを入出力することも可能である。
The card on which the SGM is recorded is used by being replaced with a slot of a general-purpose PC or the like. The camera body also has an input / output port, and can input / output the generated SGM by wired or wireless connection.
In addition, SG via the card (card interface)
It is also possible to input / output M.

【0045】このように本実施形態によれば、通常の単
眼式電子カメラと同様の構成である電子カメラ100に
プリズム式ステレオアダプタ200を取り付け、1つの
撮像素子105の撮像エリア上に複数のモノキュラ画枠
を設定し、これから得た複数のモノキュラ画像によりス
テレオ画像を得るようにしているので、複数の撮像素子
を要しない。このため、小型化及び低価格化が可能とな
る。しかも、色消しプリズムを用いるのではなく色収差
補正手段を設け、撮像信号の色成分及び画像の左右によ
って異なる量の水平位置ずらしを行なうようにしている
ので、色収差及びそれによって生じる擬似立体情報を補
正することができる。
As described above, according to this embodiment, the prism type stereo adapter 200 is attached to the electronic camera 100 having the same structure as a normal monocular type electronic camera, and a plurality of monoculars are provided on the image pickup area of one image pickup device 105. Since an image frame is set and a stereo image is obtained from a plurality of monocular images obtained from this, a plurality of image pickup elements are not required. Therefore, downsizing and cost reduction can be achieved. Moreover, instead of using an achromatic prism, chromatic aberration correcting means is provided to shift the horizontal position by different amounts depending on the color components of the image pickup signal and the left and right of the image, so that chromatic aberration and pseudo-stereoscopic information caused by it are corrected. can do.

【0046】(変形例)なお、本発明は上述した実施形
態に限定されるものではない。実施形態においては適用
するアダプタは1つのみを想定したが、例えば他に、
(1) 偏向角度が異なる設計になっており、その結果色収
差による像ずれが異なるもの、(2) 色消しプリズムによ
って色収差が光学的に補正されており(或いはミラータ
イプのアダプタ)、大型かつ高価ではあるが信号処理に
よる色収差補正が不要なもの、など複数の、像ずれの異
なるアダプタを併用するために、各アダプタに対応する
像ずれ情報をアダプタに持たせてこれをアダプタ検知機
構を介して自動的に取込む(あるいは手動的に入力して
も良い)ことによって補正量を異ならしめるように構成
することも好適である。
(Modification) The present invention is not limited to the above embodiment. In the embodiment, only one adapter is applied, but other
(1) Designed with different deflection angles, resulting in different image shift due to chromatic aberration, (2) Chromatic aberration is optically corrected by an achromatic prism (or a mirror-type adapter), which is large and expensive. However, in order to use multiple adapters with different image shifts, such as those that do not require chromatic aberration correction by signal processing, the image shift information corresponding to each adapter is given to the adapter and this is sent via the adapter detection mechanism. It is also preferable that the correction amount is made different by automatically fetching (or manually inputting).

【0047】実施形態では、色収差補正は1画素を最小
単位として行ない、処理の単純化を図ったが、適当な補
間を用いて1画素以下の単位で補正を施しても良く、こ
れによってより厳密な従ってより大きな効果が得られる
ことは勿論である。
In the embodiment, the chromatic aberration correction is performed by using one pixel as the minimum unit to simplify the process, but the correction may be performed in the unit of one pixel or less by using an appropriate interpolation. Therefore, it goes without saying that a larger effect can be obtained.

【0048】実施形態では、色収差補正以前に同時化処
理を行ない、このような構成とすることで補正演算を極
めて簡単なものとすることができたが、同時化以前のベ
イヤ(点順次カラー)画像の段階で色収差補正を行なっ
ても良い。この場合、上記例と同様に1画素単位の処理
を行なうと、色コーディング配列が維持されない場合が
生じる得るため、その後の信号処理が複雑化する場合が
ある(例えばRGB同時化を経ずにダイレクトに同時化
されたY色差コンポーネント信号を算出する処理の場合
など)が、色収差補正を2画素単位(即ち偶数画素分の
シフト)で行なうようにすれば、ベイヤパターンは維持
されるから信号処理方式に係らず問題を生じることなく
本発明を適用することができ、極めて効果的である。
In the embodiment, the synchronization processing is performed before the correction of the chromatic aberration, and the correction operation can be made extremely simple by adopting such a configuration. However, the Bayer before the synchronization (dot sequential color). The chromatic aberration correction may be performed at the image stage. In this case, if the pixel-by-pixel processing is performed in the same manner as in the above example, the color coding array may not be maintained, which may complicate the subsequent signal processing (for example, direct RGB synchronization without performing RGB synchronization). If the chromatic aberration correction is performed in units of two pixels (that is, even pixel shifts), the Bayer pattern is maintained and the signal processing method is used. However, the present invention can be applied without causing any problem and is extremely effective.

【0049】その他、本発明の要旨を逸脱しない範囲
で、種々変形して実施することができる。
In addition, various modifications can be made without departing from the scope of the present invention.

【0050】[0050]

【発明の効果】以上詳述したように本発明によれば、プ
リズム式ステレオアダプタに起因して生じる被写体画像
信号の複数の色成分毎の像位置のずれに対応して、各色
成分毎に相対的な像位置ずらしを与える色収差補正手段
を設けることによって、色消しプリズムを用いることな
しにプリズムに起因する画質劣化及び擬似立体情報を解
消(低減)することができ、プリズム式ステレオアダプ
タの本来の利点を生かした小型軽量安価で高画質なステ
レオアダプタ立体撮像を行なうことができる。
As described in detail above, according to the present invention, relative to each color component, relative to each other, the image position deviation of each color component of the subject image signal caused by the prism type stereo adapter is caused. By providing a chromatic aberration correcting means that gives a desired image position shift, it is possible to eliminate (reduce) the image quality deterioration and the pseudo three-dimensional information due to the prism without using the achromatic prism. It is possible to perform stereoscopic imaging with a small size, light weight, low cost, and high image quality by taking advantage of its advantages.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の一実施形態に係わるデジタルカメラの
基本構成を示すブロック図。
FIG. 1 is a block diagram showing a basic configuration of a digital camera according to an embodiment of the present invention.

【図2】プリズム式ステレオアダプタとその適用例を示
す図。
FIG. 2 is a diagram showing a prism type stereo adapter and its application example.

【図3】プリズムの色収差による色ずれの様子を模式的
に示す図。
FIG. 3 is a diagram schematically showing a state of color shift due to chromatic aberration of a prism.

【図4】画枠トリミングの例を説明するための図。FIG. 4 is a diagram for explaining an example of image frame trimming.

【図5】SPM画像とSGMファイルを説明するための
図。
FIG. 5 is a diagram for explaining an SPM image and an SGM file.

【符号の説明】[Explanation of symbols]

100…カメラ本体 101…レンズ系 102…レンズ駆動機構 103…露出制御機構 104…フィルタ系 105…CCDカラー撮像素子 106…CCDドライバ 107…プリプロセス部 108…デジタルプロセス部 109…カードインターフェース 110…メモリカード 111…LCD画像表示系 112…システムコントローラ(CPU) 113…操作スイッチ系 114…操作表示系 115…レンズドライバ 116…ストロボ 117…露出制御ドライバ 118…不揮発性メモリ(EEPROM) 200…プリズム式ステレオアダプタ 100 ... Camera body 101 ... Lens system 102 ... Lens drive mechanism 103 ... Exposure control mechanism 104 ... Filter system 105 ... CCD color image sensor 106 ... CCD driver 107 ... Preprocessing section 108 ... Digital Process Department 109 ... Card interface 110 ... Memory card 111 ... LCD image display system 112 ... System controller (CPU) 113 ... Operation switch system 114 ... Operation display system 115 ... Lens driver 116 ... Strobe 117 ... Exposure control driver 118 ... Nonvolatile memory (EEPROM) 200 ... Prism stereo adapter

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 13/02 H04N 13/02 // H04N 101:00 101:00 Fターム(参考) 2H059 AA09 AA18 2H101 EE01 EE14 EE21 EE52 EE73 FF00 2H105 EE32 5C061 AA08 AA25 AB03 AB08 AB18 5C065 AA03 AA07 BB25 CC02 CC03 DD17 EE05 EE06 EE20 GG01 GG50 ─────────────────────────────────────────────────── ─── Continuation of front page (51) Int.Cl. 7 Identification code FI theme code (reference) H04N 13/02 H04N 13/02 // H04N 101: 00 101: 00 F term (reference) 2H059 AA09 AA18 2H101 EE01 EE14 EE21 EE52 EE73 FF00 2H105 EE32 5C061 AA08 AA25 AB03 AB08 AB18 5C065 AA03 AA07 BB25 CC02 CC03 DD17 EE05 EE06 EE20 GG01 GG50

Claims (9)

【特許請求の範囲】[Claims] 【請求項1】撮像光学系により結像された被写体像を光
電変換する撮像素子と、 前記撮像素子の出力に基づいてカラーの被写体画像信号
を得るカラー撮像手段と、 前記撮像光学系の前段に配置され、視差に応じた異なる
位置で前記被写体からの光を受光して、前記撮像素子の
異なる領域に導くためのプリズム式ステレオアダプタ
と、 前記被写体画像信号に対し前記プリズム式ステレオアダ
プタに起因して生じる色収差の補正を行なう色収差補正
手段と、 を有したことを特徴とする撮像装置。
1. An image pickup device for photoelectrically converting a subject image formed by an image pickup optical system, a color image pickup means for obtaining a color subject image signal based on an output of the image pickup device, and a pre-stage of the image pickup optical system. A prism type stereo adapter for receiving light from the subject at different positions according to parallax and guiding the light to different regions of the image sensor, and the prism type stereo adapter for the subject image signal. An image pickup apparatus comprising: a chromatic aberration correcting unit that corrects chromatic aberration that occurs as a result.
【請求項2】前記色収差補正手段における色収差の補正
は、前記プリズム式ステレオアダプタに起因して生じる
前記被写体画像信号の複数の色成分毎の像位置のずれに
対応して、前記各色成分毎に相対的な像位置ずらしを与
えることによって行なわれることを特徴とする請求項1
に記載の撮像装置。
2. The correction of the chromatic aberration in the chromatic aberration correction means is performed for each of the color components in correspondence with the deviation of the image position of each of the plurality of color components of the subject image signal caused by the prism type stereo adapter. 2. The process is performed by giving a relative image position shift.
The imaging device according to.
【請求項3】前記像位置ずらしは、1画素単位で行なわ
れることを特徴とする請求項2に記載の撮像装置。
3. The image pickup device according to claim 2, wherein the image position shift is performed in units of one pixel.
【請求項4】前記ステレオアダプタの装着を検出するア
ダプタ検出手段を更に有してなり、 前記色収差補正手段における色収差の補正は、前記アダ
プタ検出手段による前記ステレオアダプタ装着の検出に
基づいて行なわれることを特徴とする請求項1〜3のい
ずれかに記載の撮像装置。
4. The apparatus further comprises adapter detection means for detecting the mounting of the stereo adapter, and the correction of chromatic aberration in the chromatic aberration correction means is performed based on the detection of the mounting of the stereo adapter by the adapter detection means. The image pickup apparatus according to any one of claims 1 to 3, wherein:
【請求項5】適用可能な前記ステレオアダプタの種類が
複数であり、前記色収差補正手段における色収差の補正
は前記ステレオアダプタの種類に対応して行なわれるこ
とを特徴とする請求項1〜4のいずれかに記載の撮像装
置。
5. A plurality of types of applicable stereo adapters, and correction of chromatic aberration in said chromatic aberration correction means is performed corresponding to the type of said stereo adapter. The image pickup device according to claim 1.
【請求項6】前記被写体画像信号に対して所定のトリミ
ングを行なうことで、前記撮像素子の撮像領域の中に、
1つの多眼式ステレオ画像の構成要素である複数のモノ
キュラ画像に対応した複数の撮影画枠を設定する撮影画
枠設定手段と、前記複数の撮影画枠に対応して得られた
複数のモノキュラ画像に基づいて、所定のステレオ画像
取り扱いフォーマットに従った構造化ステレオ画像を生
成するステレオ画像生成手段と、を更に有したことを特
徴とする請求項1〜5のいずれかに記載の撮像装置。
6. By performing a predetermined trimming on the subject image signal, an image pickup area of the image pickup device is formed.
Shooting image frame setting means for setting a plurality of shooting image frames corresponding to a plurality of monocular images which are constituent elements of one multi-view stereo image, and a plurality of monoculars obtained corresponding to the plurality of shooting image frames The image pickup apparatus according to claim 1, further comprising: a stereo image generation unit that generates a structured stereo image according to a predetermined stereo image handling format based on the image.
【請求項7】前記被写体画像信号に対するトリミング
は、当該被写体画像信号の色成分毎に独立に行ない得る
ように構成されており、前記色収差補正手段における色
収差の補正は、前記ステレオアダプタに起因して生じる
色成分毎の像位置のずれに対応して前記トリミングを行
なうことによって成されることを特徴とする請求項6に
記載の撮像装置。
7. The trimming of the subject image signal is configured so that it can be independently performed for each color component of the subject image signal, and the correction of chromatic aberration in the chromatic aberration correcting means is caused by the stereo adapter. 7. The image pickup apparatus according to claim 6, wherein the image pickup apparatus is formed by performing the trimming in correspondence with a generated image position shift for each color component.
【請求項8】撮像光学系により結像された被写体像を光
電変換する撮像素子と、前記撮像素子の出力に基づいて
カラーの被写体画像信号を得るカラー撮像手段と、を有
した撮像装置に対し、 前記撮像光学系の前段に、視差に応じた異なる位置で前
記被写体からの光を受光して、前記撮像素子の異なる領
域に導くためのプリズム式ステレオアダプタを配置し、
この状態で撮影を行なって立体画像を生成する立体画像
撮影方法であって、 前記被写体画像信号に対して前記ステレオアダプタに起
因して生じる色収差の補正を施すことを特徴とする立体
画像撮影方法。
8. An image pickup apparatus comprising: an image pickup device for photoelectrically converting a subject image formed by an image pickup optical system; and a color image pickup means for obtaining a color subject image signal based on an output of the image pickup device. In the preceding stage of the image pickup optical system, a prism type stereo adapter for receiving light from the subject at different positions according to parallax and guiding it to different regions of the image pickup device is arranged,
A three-dimensional image photographing method for photographing in this state to generate a three-dimensional image, wherein the subject image signal is corrected for chromatic aberration caused by the stereo adapter.
【請求項9】前記色収差の補正を施すために、前記プリ
ズム式ステレオアダプタに起因して生じる前記被写体画
像信号の複数の色成分毎の像位置のずれに対応して、前
記各色成分毎に相対的な像位置ずらしを与えることを特
徴とする請求項8に記載の立体画像撮影方法。
9. In order to correct the chromatic aberration, relative to each of the color components in response to a shift in image position of each of a plurality of color components of the subject image signal caused by the prism type stereo adapter. The stereoscopic image capturing method according to claim 8, wherein the image position shift is given.
JP2001233866A 2001-08-01 2001-08-01 Solid-state imaging device Expired - Fee Related JP4646459B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001233866A JP4646459B2 (en) 2001-08-01 2001-08-01 Solid-state imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001233866A JP4646459B2 (en) 2001-08-01 2001-08-01 Solid-state imaging device

Publications (2)

Publication Number Publication Date
JP2003047028A true JP2003047028A (en) 2003-02-14
JP4646459B2 JP4646459B2 (en) 2011-03-09

Family

ID=19065585

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001233866A Expired - Fee Related JP4646459B2 (en) 2001-08-01 2001-08-01 Solid-state imaging device

Country Status (1)

Country Link
JP (1) JP4646459B2 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004334833A (en) * 2003-04-17 2004-11-25 Sony Corp 3-dimensional view image processing device, information providing method, image display method
KR100709370B1 (en) * 2005-07-05 2007-04-20 삼성전자주식회사 Optical system to take a picture of cubic image
JP2011247965A (en) * 2010-05-24 2011-12-08 Olympus Imaging Corp Stereo photographing adaptive interchangeable lens, imaging apparatus body, and imaging apparatus
WO2012132270A1 (en) * 2011-03-30 2012-10-04 株式会社ニコン Image processing device, imaging device, and image processing program
CN103399410A (en) * 2013-08-08 2013-11-20 彭波 Single-lens three-dimensional spectroscope imaging device
CN103472668A (en) * 2013-09-24 2013-12-25 东北大学 Stereo imaging device and method
JP2014003545A (en) * 2012-06-20 2014-01-09 Nippon Hoso Kyokai <Nhk> Correction device, program thereof and stereoscopic imaging system
WO2017064746A1 (en) * 2015-10-13 2017-04-20 オリンパス株式会社 Imaging device, endoscopic device and imaging method
WO2024075515A1 (en) * 2022-10-04 2024-04-11 株式会社日立製作所 Stereo adapter, stereo camera, and stereo camera system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62253283A (en) * 1986-04-25 1987-11-05 Olympus Optical Co Ltd Image pickup device
JPH0654350A (en) * 1992-07-28 1994-02-25 Sony Corp Method and device for observing stereoscopic picture
JPH08149515A (en) * 1994-11-18 1996-06-07 Sanyo Electric Co Ltd Stereoscopic image pickup device
JPH10322725A (en) * 1997-05-19 1998-12-04 Sony Corp Stereoscopic photographed image positioning device
JPH11127369A (en) * 1997-10-21 1999-05-11 Canon Inc Image pickup display system, its control program and recording medium
JP2001222083A (en) * 2000-02-07 2001-08-17 Canon Inc Image pickup device, method of controlling image pickup device, and medium that supplies program in whch controlling method is described to computer

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62253283A (en) * 1986-04-25 1987-11-05 Olympus Optical Co Ltd Image pickup device
JPH0654350A (en) * 1992-07-28 1994-02-25 Sony Corp Method and device for observing stereoscopic picture
JPH08149515A (en) * 1994-11-18 1996-06-07 Sanyo Electric Co Ltd Stereoscopic image pickup device
JPH10322725A (en) * 1997-05-19 1998-12-04 Sony Corp Stereoscopic photographed image positioning device
JPH11127369A (en) * 1997-10-21 1999-05-11 Canon Inc Image pickup display system, its control program and recording medium
JP2001222083A (en) * 2000-02-07 2001-08-17 Canon Inc Image pickup device, method of controlling image pickup device, and medium that supplies program in whch controlling method is described to computer

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004334833A (en) * 2003-04-17 2004-11-25 Sony Corp 3-dimensional view image processing device, information providing method, image display method
US7605776B2 (en) 2003-04-17 2009-10-20 Sony Corporation Stereoscopic-vision image processing apparatus, stereoscopic-vision image providing method, and image display method
KR100709370B1 (en) * 2005-07-05 2007-04-20 삼성전자주식회사 Optical system to take a picture of cubic image
JP2011247965A (en) * 2010-05-24 2011-12-08 Olympus Imaging Corp Stereo photographing adaptive interchangeable lens, imaging apparatus body, and imaging apparatus
WO2012132270A1 (en) * 2011-03-30 2012-10-04 株式会社ニコン Image processing device, imaging device, and image processing program
JP5942984B2 (en) * 2011-03-30 2016-06-29 株式会社ニコン Image processing apparatus, imaging apparatus, and image processing program
JP2014003545A (en) * 2012-06-20 2014-01-09 Nippon Hoso Kyokai <Nhk> Correction device, program thereof and stereoscopic imaging system
CN103399410A (en) * 2013-08-08 2013-11-20 彭波 Single-lens three-dimensional spectroscope imaging device
CN103399410B (en) * 2013-08-08 2015-09-30 彭波 Single-lens splitter cube imaging device
CN103472668A (en) * 2013-09-24 2013-12-25 东北大学 Stereo imaging device and method
WO2017064746A1 (en) * 2015-10-13 2017-04-20 オリンパス株式会社 Imaging device, endoscopic device and imaging method
WO2024075515A1 (en) * 2022-10-04 2024-04-11 株式会社日立製作所 Stereo adapter, stereo camera, and stereo camera system

Also Published As

Publication number Publication date
JP4646459B2 (en) 2011-03-09

Similar Documents

Publication Publication Date Title
US7920176B2 (en) Image generating apparatus and image regenerating apparatus
JP3841630B2 (en) Image handling device
KR100947394B1 (en) 3d image file, imaging device, image reproducing device, image processing device
US8593531B2 (en) Imaging device, image processing method, and computer program
JP2010068182A (en) Three-dimensional imaging device, method, and program
CN105323423A (en) Image processing method, image processing apparatus, and image pickup apparatus
WO2005112475A9 (en) Image processor
JP5567901B2 (en) Interchangeable lens and imaging system for stereo photography
JP4646459B2 (en) Solid-state imaging device
JP5164617B2 (en) Imaging apparatus and image processing method
JP2004297540A (en) Stereoscopic video recording and reproducing device
JP2002218506A (en) Image pickup device
JP4536231B2 (en) Imaging device
JP2003189171A (en) Image processing apparatus and method, control program, and storage medium
JP4512276B2 (en) Imaging device
JP2003134534A (en) Image pickup device
US7832951B2 (en) Lens unit and digital camera
JP2010102137A (en) Three-dimensional photographing device, method and program
JP4847500B2 (en) Three-dimensional display device, method and program
JP2002218507A (en) Image pickup device
US20130120374A1 (en) Image processing device, image processing method, and image processing program
JP2000102035A (en) Stereoscopic photograph system
JP2002209232A (en) Compound eye camera
JP4536527B2 (en) Electronic camera and image generation apparatus for generating stereo image
JP2010109785A (en) Three-dimensional imaging apparatus and method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080801

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101124

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101207

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131217

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4646459

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131217

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees