JPH0583643A - Image pickup device - Google Patents

Image pickup device

Info

Publication number
JPH0583643A
JPH0583643A JP3239046A JP23904691A JPH0583643A JP H0583643 A JPH0583643 A JP H0583643A JP 3239046 A JP3239046 A JP 3239046A JP 23904691 A JP23904691 A JP 23904691A JP H0583643 A JPH0583643 A JP H0583643A
Authority
JP
Japan
Prior art keywords
image
circuit
image pickup
output
solid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP3239046A
Other languages
Japanese (ja)
Inventor
Takahiro Asai
隆宏 浅井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP3239046A priority Critical patent/JPH0583643A/en
Publication of JPH0583643A publication Critical patent/JPH0583643A/en
Pending legal-status Critical Current

Links

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

PURPOSE:To provide a simple image signal processing part to an image pickup parts including plural solid state image pickup elements arranged at the optical positions where the image pickup areas different optically from each other are received relatively and adjacently and the optical image transmitted through an image pick-up lens set on the optical axis of the lens is divided and reflected by a reflector having plural reflecting faces and therefore to read the images at high image resolution. CONSTITUTION:The single screen image data storage circuits 6 are provided in the number corresponding to the number of solid state image pickup elements. The output image signals outputted from the solid state image pickup elements by an interlace system are simultaneously stored in the odd or even fields for each line corresponding circuit 6. Meanwhile a storage circuit control circuit 13 includes the input/output switch control parts 9 and 10 which read the single screen image signals out of the fields different from the working field storing the image signals. In such a constitution, an image signal processing part is secured to synthesize the image signals outputted from the circuits 6. Then these processes image signals are outputted through a single screen.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、例えば電子カメラやT
Vカメラなどに用いられる撮像装置に関する。
BACKGROUND OF THE INVENTION The present invention relates to, for example, an electronic camera and a T
The present invention relates to an imaging device used for a V camera or the like.

【0002】[0002]

【従来の技術】近年、この種の撮像装置では高品位化の
研究開発が進められており、例えば日本放送協会を中心
とした高品位TV規格による撮像方式等として実用化の
段階にある。これによれば、使用周波数帯域が20〜3
0MHz帯域のように非常に高くなる特徴を持つ。
2. Description of the Related Art In recent years, research and development of high-definition imaging devices of this type have been advanced, and for example, they are in the stage of practical application as an imaging method based on the high-definition TV standard mainly by the Japan Broadcasting Corporation. According to this, the used frequency band is 20 to 3
It has a very high characteristic such as 0 MHz band.

【0003】一方、このような撮像方式の高精細化と並
んで、撮像素子の固体化も推し進められている。しか
し、上記の高精細な撮像方式に対応可能な固体撮像素子
を考えると、画素数で100万個以上、クロック周波数
で30MHz以上が必要となる。このような固体撮像素
子は現状では実用段階になっていない。
On the other hand, along with the high definition of such an image pickup system, solidification of the image pickup element is being promoted. However, considering a solid-state image sensor capable of supporting the above high-definition image capturing method, the number of pixels is required to be 1 million or more and the clock frequency is required to be 30 MHz or more. At present, such a solid-state image sensor is not in a practical stage.

【0004】そこで、現状の固体撮像素子、駆動方式に
より高精細化を実現する方式が検討されており、例えば
特開昭60−213178号公報に示されるようなもの
がある。これは、撮像レンズを通して得られた光像を光
学系の瞳位置に配置させた反射体、例えば四角錐体の4
つの反射面により分割反射させ、分割反射される各構造
が各受光面上の互いに光学的に所定ピッチ分ずれた位置
に結像するように、例えば4個の固体撮像素子を配置さ
せたものである。
Therefore, a method for realizing high definition by the current solid-state image pickup device and driving method is being studied, for example, there is one disclosed in Japanese Patent Laid-Open No. 60-213178. This is a reflector, such as a quadrangular pyramid, which has an optical image obtained through an image pickup lens arranged at the pupil position of the optical system.
For example, four solid-state image pickup elements are arranged so that each of the structures, which are divided and reflected by one reflecting surface, are imaged at positions optically shifted by a predetermined pitch from each other on each light receiving surface. is there.

【0005】ところが、この方式の固体撮像素子の構造
を見た場合、各々の画素ピッチに対する受光部の大きさ
により、各撮像素子の各画素が光学的に分離されておら
ず、全ての画素が部分的に重なっているため、実質的な
解像度を高くとれないものである。特に、受光部と転送
用CCDの面積を大きくするため、アモーファスSi光
電変換膜を積層したタイプの固体撮像素子においては、
その受光部の大きさにより、さらに実質的な解像度の向
上を期待できない。また、反射体を瞳位置に正確に配置
させることも容易ではない。
However, when looking at the structure of the solid-state image pickup device of this system, each pixel of each image pickup device is not optically separated due to the size of the light receiving portion with respect to each pixel pitch, and all the pixels are Since they partially overlap, the actual resolution cannot be increased. In particular, in order to increase the area of the light receiving portion and the transfer CCD, in a solid-state image sensor of a type in which an amorphous Si photoelectric conversion film is laminated,
Due to the size of the light receiving portion, further substantial improvement in resolution cannot be expected. Further, it is not easy to accurately arrange the reflector at the pupil position.

【0006】[0006]

【発明が解決しようとする課題】このようなことから、
撮像レンズと、この撮像レンズの光軸上に配置されて前
記撮像レンズを透過した光像を分割反射させる複数の反
射面を有する反射体とを設けるとともに、この反射体に
より分割反射された各光像に対して複数の固体撮像素子
を各々光学的に異なる撮像領域を相対的に隣接状態で受
光する光学的位置に配置させて設けたものが、特願平1
−331971号として本出願人により提案されてい
る。
From the above,
An image pickup lens and a reflector having a plurality of reflecting surfaces arranged on the optical axis of the image pickup lens to divide and reflect an optical image transmitted through the image pickup lens are provided, and each light divided and reflected by the reflector is provided. Japanese Patent Application No. Hei 1 (1999) -1104 discloses a device in which a plurality of solid-state image pickup devices are arranged at optical positions where light-receiving regions that are optically different from each other are relatively adjacent to each other with respect to an image.
Proposed by the applicant as No. 331971.

【0007】これによれば、反射体の各反射面により分
割反射される光像を各々の固体撮像素子で受光するが、
各光像に対して各固体撮像素子が、各々光学的に異なる
一部の撮像領域の光像を相対的に隣接状態で受光する光
学的位置とされているので、読取り後に各々の固体撮像
素子の読取領域の読取り画像信号を合成することによ
り、1画面分の画像が再現される。よって、固体撮像素
子の受光部の大きさに拘らず、単一の固体撮像素子で読
取る場合に対して、固体撮像素子の個数倍の高解像度で
読取ることができる。
According to this, each solid-state image pickup device receives the light image divided and reflected by each reflecting surface of the reflector.
Since each solid-state image pickup element is located at an optical position where the light-images of some optically different image pickup areas are relatively adjacent to each other for each light image, each solid-state image pickup element is read after reading. An image for one screen is reproduced by synthesizing the read image signals of the reading area. Therefore, regardless of the size of the light receiving portion of the solid-state image sensor, it is possible to read with high resolution, which is twice as many as that of the solid-state image sensor, as compared with the case of reading with a single solid-state image sensor.

【0008】しかし、このような複数の固体撮像素子か
ら得られる画像信号を、如何に安価で簡単な構成・制御
の画像処理部で合成処理するかについては言及されてい
ないものである。
However, there is no mention of how to combine the image signals obtained from such a plurality of solid-state image pickup devices by an image processing unit having a low cost and a simple structure and control.

【0009】[0009]

【課題を解決するための手段】請求項1記載の発明で
は、撮像レンズと、この撮像レンズの光軸上に配置され
て前記撮像レンズを透過した光像を分割反射させる複数
の反射面を有する反射体と、この反射体により分割反射
された各光像に対して各々光学的に異なる撮像領域を相
対的に隣接状態で受光する光学的位置に配置させた複数
の固体撮像素子とよりなる撮像部を設け、各固体撮像素
子の個数に対応した数の1画面画像データ記憶回路と、
各固体撮像素子からインターレス方式で出力される画像
信号を対応する1画面画像データ記憶回路に対してライ
ン単位で奇数又は偶数の何れかのフィールドに同時に記
憶させる一方、記憶動作中のフィールドと異なる他方の
フィールドから1画面画像信号をライン単位で読出させ
る入出力切換え制御部を有する記憶回路制御手段とより
なり、これらの1画面画像データ記憶回路からの画像信
号を合成処理して1画面の画像信号として出力する画像
信号処理部を設けた。
According to a first aspect of the present invention, there is provided an image pickup lens, and a plurality of reflecting surfaces arranged on the optical axis of the image pickup lens for dividing and reflecting an optical image transmitted through the image pickup lens. Imaging with a reflector and a plurality of solid-state image sensors arranged at optical positions to receive image areas that are optically different from each other and are optically received by the reflector in a relatively adjacent state. And a single-screen image data storage circuit of a number corresponding to the number of each solid-state image sensor,
An image signal output from each solid-state image sensor in the interlace system is simultaneously stored in an odd field or an even field on a line-by-line basis in a corresponding one-screen image data storage circuit, but different from the field during storage operation. It is composed of a storage circuit control means having an input / output switching control section for reading out a one-screen image signal from the other field in units of lines, and the image signals from these one-screen image data storage circuits are combined to process one screen image. An image signal processing unit for outputting as a signal is provided.

【0010】この際、請求項2記載の発明では、画像信
号処理部に、各1画面画像データ記憶回路からの1画面
画像信号を全て加算する加算回路と、該当する読取有効
画素対応の1画面画像データ記憶回路以外の1画面画像
データ記憶回路の画像信号をゼロとして加算回路に出力
させる制御手段とを設けた。
In this case, according to the second aspect of the invention, an addition circuit for adding all the one-screen image signals from each one-screen image data storage circuit to the image signal processing section and one screen corresponding to the corresponding read effective pixel. A control means for causing the addition circuit to output the image signal of the one-screen image data storage circuit other than the image data storage circuit as zero is provided.

【0011】また、請求項3記載の発明では、記憶回路
制御手段が、各1画面画像データ記憶回路に対する記憶
時又は読出し時に、画像信号順序を水平方向で逆転させ
る順序制御手段を有するものとし、請求項4記載の発明
では、記憶回路制御手段が、各1画面画像データ記憶回
路に対する記憶時又は読出し時に、画像信号順序を垂直
方向で逆転させる順序制御手段を有するものとした。
According to the third aspect of the invention, the storage circuit control means has a sequence control means for reversing the image signal sequence in the horizontal direction at the time of storing or reading the one-screen image data storage circuit, According to a fourth aspect of the invention, the storage circuit control means has a sequence control means for reversing the image signal sequence in the vertical direction when storing or reading the one-screen image data storage circuit.

【0012】また、請求項5記載の発明において、撮像
部における各固体撮像素子の読取有効画素部の配置を各
々の光学的位置関係の接続部で部分的に重ならせるとと
もに、少なくとも水平方向に2つ以上の反射面を有する
反射体とし、画像信号処理部中に、加算回路により加算
された画像信号を1/2倍する1/2除算回路と、1/
2除算回路の出力と前記加算回路の出力とを選択的に切
換え出力する切換え回路とを設け、1つの固体撮像素子
単独の部分では前記加算回路の出力を選択させる一方、
部分的に重なりを持つ接続部では1/2除算回路の出力
を選択させる切換え回路制御手段を設け、請求項6記載
の発明では、撮像部における各固体撮像素子の読取有効
画素部の配置を各々の光学的位置関係の接続部で部分的
に重ならせるとともに、反射体を四角錐プリズムミラー
とし、画像信号処理部中に、加算回路により加算された
画像信号を1/2倍する1/2除算回路と、加算回路に
より加算された画像信号を1/4倍する1/4除算回路
と、1/2除算回路の出力と1/4除算回路の出力と前
記加算回路の出力とを選択的に切換え出力する切換え回
路とを設け、1つの固体撮像素子単独の部分では前記加
算回路の出力を選択させる一方、水平方向、垂直方向で
各々部分的に重なりを持つ接続部では1/2除算回路の
出力を選択させ、水平方向及び垂直方向で部分的に重な
りを持つ接続部では1/4除算回路の出力を選択させる
切換え回路制御手段を設けた。
Further, in the invention according to claim 5, the arrangement of the read effective pixel portions of each solid-state image pickup device in the image pickup portion is partially overlapped with each other in the connection portion having the optical positional relationship, and at least in the horizontal direction. A reflector having two or more reflecting surfaces, a 1/2 division circuit for multiplying the image signal added by the addition circuit by 1/2 in the image signal processing unit, and 1 /
A switching circuit for selectively switching between the output of the divide-by-2 circuit and the output of the adder circuit is provided, and the output of the adder circuit is selected in a single solid-state image pickup device alone.
A switching circuit control means for selecting the output of the 1/2 division circuit is provided in the connection portion which partially overlaps, and in the invention according to claim 6, the read effective pixel portion of each solid-state image pickup element in the image pickup portion is arranged respectively. Of the optical position relationship, and the reflector is a quadrangular pyramid prism mirror, and the image signal added by the adder circuit is multiplied by 1/2 in the image signal processing unit. A division circuit, a 1/4 division circuit that multiplies the image signals added by the addition circuit by 1/4, an output of the 1/2 division circuit, an output of the 1/4 division circuit, and an output of the addition circuit are selected. And a switching circuit for switching output is provided to select the output of the adder circuit in a single solid-state image pickup device alone, and a 1/2 division circuit in a connection part that partially overlaps in the horizontal and vertical directions. Select the output of In connection portion having a partially overlap in horizontal direction and the vertical direction is provided a switching circuit control means for selecting the output of the 1/4 dividing circuit.

【0013】[0013]

【作用】請求項1記載の発明によれば、固体撮像素子の
個数倍の高解像度で読取り可能な撮像部に対して、それ
らの固体撮像素子からの出力画像を合成するのに必要な
1画面画像データ記憶回路を利用し、これらの1画面画
像データ記憶回路に対する画像信号の記憶・読出し時に
インターレス方式を活かし、現在記憶中のフィールドと
出力中のフィールドとを奇数・偶数フィールドで異なら
せることにより、制御簡単な構成にして1画面分の画像
合成が可能となる。
According to the first aspect of the present invention, one screen necessary for synthesizing the output images from the solid-state image pickup devices with respect to the image pickup unit capable of reading at a high resolution, which is a multiple of the number of the solid-state image pickup devices. Utilizing an image data storage circuit and utilizing an interlace method when storing / reading an image signal to / from these one-screen image data storage circuits, to make the currently stored field and the output field different between odd and even fields. This makes it possible to combine images for one screen with a simple control structure.

【0014】特に、請求項2記載の発明によれば、該当
する読取有効画素については自己のの固体撮像素子の画
像信号のみ有効とし他の固体撮像素子によるものはゼロ
として扱うことにより、加算回路による簡単な処理で済
むものとなる。
In particular, according to the second aspect of the present invention, regarding the corresponding read effective pixel, only the image signal of its own solid-state image pickup device is made effective, and those by other solid-state image pickup devices are treated as zero, whereby the adder circuit is added. The simple processing by

【0015】ここに、このような処理では鏡像が出力さ
れてしまうが、請求項3又は4記載の発明によれば、水
平方向又は垂直方向についてその記憶又は読出しの順序
を逆転制御することで、容易に正像出力とすることがで
きる。そのための構成も、元々各固体撮像素子に必要な
1画面画像データ記憶回路とインターレス方式を利用
し、これに鏡像データを正像に変換する順序制御手段を
付加するだけで済む。
Here, a mirror image is output in such processing, but according to the third or fourth aspect of the present invention, the order of storing or reading is reversed in the horizontal direction or the vertical direction. A normal image output can be easily obtained. The structure for that purpose only needs to utilize the one-screen image data storage circuit and the interlace system originally required for each solid-state image pickup device, and to add the sequence control means for converting the mirror image data to the normal image.

【0016】また、請求項5又は6記載の発明によれ
ば、各固体撮像素子の読取有効画素部の配置を互いに重
なる状態としたので相互の位置関係について正確に合わ
せなくても済むものとなるが、この際、加算回路出力に
対して1/2除算回路や1/4除算回路を設け、水平方
向、垂直方向での重複読取り部分、又は、水平方向及び
垂直方向の重複読取り部分では、これらの除算回路によ
り平均化した画像信号を出力させることにより、境界線
部分の目立たない合成処理が可能となる。
Further, according to the invention of claim 5 or 6, since the arrangement of the read effective pixel portions of the respective solid-state image pickup elements is made to overlap with each other, the mutual positional relationship need not be accurately adjusted. However, at this time, a 1/2 division circuit or a 1/4 division circuit is provided for the output of the addition circuit, and in the overlapping read portion in the horizontal direction and the vertical direction, or in the overlapping read portion in the horizontal direction and the vertical direction, these By outputting the averaged image signal by the division circuit of (1), it is possible to perform the unobtrusive synthesizing process of the boundary portion.

【0017】[0017]

【実施例】本発明の第一の実施例を図1ないし図6に基
づいて説明する。本実施例の撮像装置は、図2に示すよ
うな撮像部1と図3に示す画像信号処理部2とよりな
る。まず、撮像部1について説明する。本例では、4つ
の固体撮像素子3A〜3Dを用いて1画面分の画像を読
取るようにしたものであり、これらの4つの固体撮像素
子3A〜3Dの光学的配置関係を図4に示す。ここに、
何れの固体撮像素子3A〜3Dも読取有効画素数は水平
方向(H)が512、垂直方向(V)が490のもので
あり、同図では、各々の固体撮像素子3A〜3Dとして
読取有効画素部のみを矩形状に示す。また、同図中の矢
印Sは各々の固体撮像素子3A〜3Dの読取走査方向を
示す。しかして、本実施例では、1画面領域についての
撮像領域を光学的に4分割し、各々の撮像領域を4つの
固体撮像素子3A〜3Dの読取有効画素部に割当て、光
学的に見て互いに隣接した状態で読取るように配置され
ている。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A first embodiment of the present invention will be described with reference to FIGS. The image pickup apparatus of this embodiment includes an image pickup section 1 as shown in FIG. 2 and an image signal processing section 2 as shown in FIG. First, the image pickup unit 1 will be described. In this example, four solid-state image pickup devices 3A to 3D are used to read an image for one screen, and the optical arrangement relationship of these four solid-state image pickup devices 3A to 3D is shown in FIG. here,
In each of the solid-state image pickup devices 3A to 3D, the number of effective read pixels is 512 in the horizontal direction (H) and 490 in the vertical direction (V). In FIG. Only the part is shown in a rectangular shape. The arrow S in the figure indicates the reading and scanning direction of each of the solid-state image pickup devices 3A to 3D. Therefore, in the present embodiment, the image pickup area for one screen area is optically divided into four, and each image pickup area is assigned to the read effective pixel portions of the four solid-state image pickup elements 3A to 3D, and optically viewed from each other. They are arranged so that they can be read in an adjacent state.

【0018】このような4つの固体撮像素子3A〜3D
の光学的配置関係を実現する撮像部1は、図2に示すよ
うに、被写体(原稿)からの反射光による光像を結像さ
せる撮像レンズ(ズームレンズ)4と、その後段で光軸
上に頂点を配置させた反射体としての四角錐プリズム5
とともに構成されている。即ち、四角錐プリズム5は三
角形状の4つの錐面による反射面5A〜5Dを持ち、被
写体対応の光像を各々の反射面5A〜5Dで頂点部を中
心として4分割反射させるものである。ここに、各反射
面5A〜5Dは被写体に対して光軸周りに45°回転し
た状態で配置されている。また、各反射面5A〜5Dの
傾斜角も光軸に対して45°に形成されている。この
時、各反射面5A〜5Dの傾斜角が光軸に対して45°
であるため、反射光軸は撮像レンズ4の光軸に直交し、
固体撮像素子3A〜3Dの受光面が撮像レンズ4の光軸
に平行となり、四角錐プリズム4周りに対する配置が容
易となる。また、四角錐プリズム4による分割光像の受
光であり矩形状の領域画像となるため、長方形の有効画
素部を持つ通常の固体撮像素子で読取り可能となる。こ
の時、各固体撮像素子3A〜3Dは各々の反射面5A〜
5Dによる反射光像、即ち、1画面領域を図4に示した
ように1/4に分割させた異なる撮像領域のみの光像を
受光する位置に配置されている。よって、これらの各固
体撮像素子3A〜3Dにより分割読取りされた画像信号
について合成処理を施すことにより、全体の1画面分の
読取りができるものとなる。
Such four solid-state image pickup devices 3A to 3D
As shown in FIG. 2, the image pickup unit 1 that realizes the optical arrangement relationship of (1) includes an image pickup lens (zoom lens) 4 that forms an optical image of reflected light from a subject (original), and on the optical axis at the subsequent stage. A quadrangular pyramid prism 5 as a reflector with the apex placed on the
It is configured with. That is, the quadrangular pyramid prism 5 has reflecting surfaces 5A to 5D composed of four triangular conical surfaces, and reflects an optical image corresponding to a subject in four divisions with the reflecting surfaces 5A to 5D as the center. Here, each of the reflecting surfaces 5A to 5D is arranged in a state of being rotated by 45 ° around the optical axis with respect to the subject. Further, the inclination angles of the reflecting surfaces 5A to 5D are also formed to be 45 ° with respect to the optical axis. At this time, the inclination angles of the reflecting surfaces 5A to 5D are 45 ° with respect to the optical axis.
Therefore, the reflected optical axis is orthogonal to the optical axis of the imaging lens 4,
The light receiving surfaces of the solid-state image pickup devices 3A to 3D are parallel to the optical axis of the image pickup lens 4, and the arrangement around the quadrangular pyramid prism 4 becomes easy. In addition, since the divided light image is received by the quadrangular pyramid prism 4 and forms a rectangular area image, it can be read by a normal solid-state image sensor having a rectangular effective pixel portion. At this time, the solid-state image pickup devices 3A to 3D have their respective reflection surfaces 5A to 5D.
It is arranged at a position to receive a reflected light image by 5D, that is, a light image of only a different imaging region obtained by dividing one screen region into quarters as shown in FIG. Therefore, by performing a combining process on the image signals divided and read by each of the solid-state image pickup devices 3A to 3D, the entire one screen can be read.

【0019】このような撮像部1の構成によれば、1画
面を1つの固体撮像素子のみにより受光する場合に比し
て、1撮像領域を1画面領域と等価的な4倍に拡大した
状態で受光することになり、結局、4倍の解像度で読取
れるものとなる。この際、各々の撮像領域には1画素レ
ベルでの重複がないため、各固体撮像素子3A〜3Dの
受光部の大きさの影響を受けないものとなる。
According to the structure of the image pickup section 1 as described above, one image pickup area is expanded four times as much as one screen area as compared with the case where one screen receives light only by one solid-state image pickup element. Thus, the light is received by, which means that the image can be read with a resolution of 4 times. At this time, since there is no overlap at the level of one pixel in each image pickup region, it is not affected by the size of the light receiving portion of each solid-state image pickup device 3A to 3D.

【0020】しかして、合成処理を行なう画像信号処理
部2について説明する。まず、本実施例の画像信号処理
部2の構成に先立ち、この種の撮像部により得られる画
像信号について検討する。例えば、この種の撮像装置と
して特開昭63−131465号公報によれば、撮像レ
ンズを通して得られた光像を複数個に分割し、各々の固
体撮像素子により分割被写体像を受光した後、画像合成
部で結像する被写体像を示す画像信号の出力を行なうよ
うにしており、画像合成部では2つの記憶部と読出し時
の時間的遅延(シフト)により、処理するようにしてい
る。ところが、例えば本実施例のような撮像部1構成に
よる場合、固体撮像素子3A〜3D上には四角錐プリズ
ム5の各反射面5A〜5Dにより奇数回、ここでは1回
反射された鏡像(左右又は上下が反転している)が結像
されるので、このような画像信号をそのまま出力する
と、左右又は上下の反転した画像となる。特に、本実施
例のような4個の固体撮像素子3A〜3Dでは、1画面
の画像合成出力が、読出し時のデータの時間的遅延だけ
では不十分であるが、その画像合成処理については何ら
言及されていないものである。
Now, the image signal processing unit 2 for performing the combining process will be described. First, prior to the configuration of the image signal processing unit 2 of the present embodiment, an image signal obtained by this type of image pickup unit will be examined. For example, according to Japanese Patent Laid-Open No. 63-131465 as an image pickup apparatus of this type, an optical image obtained through an image pickup lens is divided into a plurality of images, and the image of the divided object image is received by each solid-state image pickup device. An image signal indicating a subject image formed by the combining unit is output, and the image combining unit processes the two storage units and the time delay (shift) at the time of reading. However, in the case of the configuration of the image pickup unit 1 as in the present embodiment, for example, on the solid-state image pickup devices 3A to 3D, the reflection surfaces 5A to 5D of the quadrangular pyramid prism 5 make an odd number of reflections (here, left and right). (Or inverted upside down) is imaged, so if such an image signal is output as it is, a left-right or upside-down image is obtained. In particular, in the four solid-state image pickup devices 3A to 3D as in the present embodiment, the image composition output of one screen is not sufficient only with the time delay of the data at the time of reading, but there is nothing about the image composition processing. It is not mentioned.

【0021】ここに、一般論で考える。通常、図5(a)
に示すような鏡像の画像信号を同図(b)のような正像に
変換するには、水平方向で画像の出力順序を逆転(1ラ
イン内で、固体撮像素子から出力されるラインデータ
を、最後の画像データ側から出力を始め、最初のデータ
を最後に出力する)しなければならない。このような逆
転処理には2ライン分以上のラインデータメモリを必要
とする。
Here, a general theory will be considered. Normally, Fig. 5 (a)
In order to convert the image signal of the mirror image as shown in Fig. 2 to the normal image as shown in Fig. 2B, the output order of the images is reversed in the horizontal direction (the line data output from the solid-state imaging device is changed within 1 line). , The output is started from the last image data side, and the first data is output last). Such a reversal process requires a line data memory for two lines or more.

【0022】一方、図5(a)に示すような鏡像の画像信
号は同図(c)に示すように、垂直方向に出力順序を逆転
させることによっても正像化は可能であるが、インター
レス信号の場合であって1フレーム以上の画像データメ
モリが必要となり、装置コストの増大と回路規模の増大
とが無視できないものとなってしまう。
On the other hand, an image signal of a mirror image as shown in FIG. 5 (a) can be formed into a normal image by reversing the output order in the vertical direction as shown in FIG. In the case of the reply signal, an image data memory of one frame or more is required, and the increase in the device cost and the increase in the circuit scale cannot be ignored.

【0023】しかして、本実施例の画像信号処理部2を
構成するに当たり、このような点を考慮し、4つの固体
撮像素子3A〜3Dの画像信号を合成して出力するため
には、元々1画面以上の画像データメモリが必要なこと
から、固体撮像素子3A〜3D毎に用意された1画面画
像データ記憶回路(フレームメモリ)6A〜6Dを利用
し、鏡像信号を正像へ変換する部分を付加した簡単な構
成とし、装置コストの増大と回路規模の増大とを回避し
得るようにしたものである。
Therefore, when the image signal processing unit 2 of the present embodiment is constructed, in consideration of such a point, in order to synthesize and output the image signals of the four solid-state image pickup devices 3A to 3D, originally, Since an image data memory of one screen or more is required, a portion for converting a mirror image signal into a normal image by using the one-screen image data storage circuits (frame memories) 6A to 6D prepared for each of the solid-state imaging devices 3A to 3D. Is added so that an increase in device cost and an increase in circuit scale can be avoided.

【0024】画像信号処理部2では、基本的には、各々
のフレームメモリ6A〜6Dに各固体撮像素子3A〜3
Dからの画像出力を同時に出力して記憶させる。この
時、画像の合成処理は書込み時又は読出し時に実施す
る。
In the image signal processing unit 2, basically, the solid-state image pickup devices 3A to 3 are stored in the frame memories 6A to 6D, respectively.
The image output from D is simultaneously output and stored. At this time, the image combining process is performed at the time of writing or reading.

【0025】このためのフレームメモリ6(6A〜6D
の何れも同じであり、A〜Dを省略して示す)の構成を
図2を参照して説明する。各フレームメモリ6は奇数フ
ィールドメモリ7と偶数フィールドメモリ8とに分割さ
れており、入力側には固体撮像素子3出力を何れに記憶
させるかを切換える入力データセレクタ(SEL=入出
力切換え制御部)9が設けられ、出力側にはメモリ7,
8の何れの内容を読出すかを切換える出力データセレク
タ(SEL=入出力切換え制御部)10が設けられてい
る。また、各メモリ7,8に対しては順序制御手段とな
る奇数、偶数フィールドメモリ用アドレスカウンタ1
1,12が接続されており、データ記憶時にメモリアド
レスに対して水平方向に逆順に記憶させるようにメモリ
アドレスを管理する。これらのセレクタ9,10、カウ
ンタ11,12を制御する記憶回路制御手段としてフレ
ームメモリ制御回路13が設けられている。
The frame memory 6 (6A to 6D) for this purpose
2 is the same, and A to D are omitted and shown) will be described with reference to FIG. Each frame memory 6 is divided into an odd-numbered field memory 7 and an even-numbered field memory 8, and an input data selector (SEL = input / output switching control unit) for switching which of the outputs of the solid-state imaging device 3 is stored on the input side. 9 is provided, and the memory 7,
An output data selector (SEL = input / output switching control unit) 10 for switching which content of 8 is read is provided. Further, for each of the memories 7 and 8, an address counter 1 for odd and even field memories which serves as sequence control means.
1 and 12 are connected and manage the memory addresses so that they are stored in reverse order in the horizontal direction when storing data. A frame memory control circuit 13 is provided as a storage circuit control means for controlling the selectors 9 and 10 and the counters 11 and 12.

【0026】このような構成において、固体撮像素子3
からは画像信号がインターレス方式により出力される
が、この画像信号が偶数フィールドの時には入力データ
セレクタ9は偶数フィールドメモリ8側を選択し、この
偶数フィールドメモリ8に格納させる。この時、偶数フ
ィールドメモリ用アドレスカウンタ12は各ライン毎に
設定値から順に減少するように制御されるため、偶数フ
ィールドメモリ8には各ラインの画像信号がアドレス的
に水平方向に逆順となって記憶されるものとなる。この
ような記憶動作に並行して、出力データセレクタ10が
奇数フィールドメモリ7側を選択しており、奇数フィー
ルドメモリ用アドレスカウンタ11はそのアドレスが昇
順に制御され、奇数フィールドメモリ7から奇数フィー
ルドの画像信号が正像データとして出力される。
In such a structure, the solid-state image pickup device 3
, The image data is output by the interlace system. When this image signal is in the even field, the input data selector 9 selects the even field memory 8 side and stores it in the even field memory 8. At this time, since the even field memory address counter 12 is controlled so as to sequentially decrease from the set value for each line, the image signals of each line in the even field memory 8 are in the reverse order in the address direction in the horizontal direction. It will be remembered. In parallel with such a storage operation, the output data selector 10 selects the odd field memory 7 side, the address of the odd field memory 11 is controlled in the ascending order, and the odd field memory 7 shifts to the odd field memory. The image signal is output as normal image data.

【0027】このように、フレームメモリ6についての
画像信号の記憶・読出し時に、現在記憶中の画像信号と
読出し出力中の画像信号とのフィールドが奇数・偶数で
異なっているので、フレームメモリ6としては制御容易
な簡易な構成となる。
As described above, when storing / reading the image signal from / to the frame memory 6, since the fields of the image signal currently being stored and the image signal being read and output are odd and even, they are different from each other. Has a simple structure that is easy to control.

【0028】このような動作は個々のフレームメモリ6
についてのものであるが、全体としては図3に示すよう
に4つのフレームモリ6A〜6Dの出力は画像信号処理
制御回路14による制御の下にセレクタ15で選択制御
されて1画面分の合成画像出力として出力される。
Such operation is performed by each frame memory 6
The output of the four frame memories 6A to 6D is selectively controlled by the selector 15 under the control of the image signal processing control circuit 14 as shown in FIG. It is output as output.

【0029】図6はこの図3に示すブロック図構成にお
いて、必要な画像信号が順次出力される様子を示すタイ
ミングチャートである。図中、各フレームメモリ6A〜
6Dに対する入力、出力はAin〜Din,Aout〜Doutで
示す。図示のように、フレーム画像の前半(4分割画面
の上半分)では、同一ライン内でフレームメモリ6Aが
前半のデータを出力し、フレームメモリ6Bが後半のデ
ータを出力し、さらに、フレーム画像の後半(4分割画
面の下半分)では、同一ライン内でフレームメモリ6C
が前半のデータを出力し、フレームメモリ6Dが後半の
データを出力するように、画像信号処理制御回路14に
よって各フレームメモリ6A〜6Dの出力が制御され
る。
FIG. 6 is a timing chart showing how necessary image signals are sequentially output in the block diagram structure shown in FIG. In the figure, each frame memory 6A-
Inputs and outputs for 6D are indicated by Ain to Din and Aout to Dout. As shown in the figure, in the first half of the frame image (upper half of the 4-split screen), the frame memory 6A outputs the first half data and the frame memory 6B outputs the latter half data in the same line. In the latter half (lower half of the 4-split screen), the frame memory 6C in the same line
Outputs the first half data and the frame memory 6D outputs the second half data, and the image signal processing control circuit 14 controls the outputs of the frame memories 6A to 6D.

【0030】このように、本実施例によれば、4つの固
体撮像素子3A〜3Dからの出力画像の合成に必要な4
つのフレームメモリ6A〜6Dを利用し、これに対して
固体撮像素子3A〜3Dからの鏡像出力データを正像に
変換する部分11,12を付加するだけの簡単な構成
で、正像が得られるものとなる。
As described above, according to the present embodiment, the four required for synthesizing the output images from the four solid-state image pickup devices 3A to 3D.
A normal image can be obtained with a simple configuration in which one frame memory 6A to 6D is used and the portions 11 and 12 for converting the mirror image output data from the solid-state image pickup devices 3A to 3D into a normal image are added thereto. Will be things.

【0031】ところで、上記の説明では、鏡像を正像化
するために水平方向で画像信号の記憶アドレス順序を逆
順とさせたが(読出しアドレス順序の逆転でもよい)、
垂直方向に画像信号の記憶順序を逆順とさせてもよい。
例えば、偶数フィールドメモリ用アドレスカウンタ12
はラインアドレス(通常、アドレスカウンタの上位ビッ
トを利用する)が所定値から1ライン毎に1ライン分の
アドレスが減少するものとし、ラインデータの記憶時に
はアドレスカウンタを順次カウントアップさせて偶数フ
ィールドメモリ8に記憶させる一方、これに並行して奇
数フィールドメモリ7からはメモリアドレスを昇順に制
御して読出すことにより正像が出力されるものとなる。
In the above description, the storage address order of the image signals is reversed in the horizontal direction in order to make the mirror image a normal image (the reading address order may be reversed).
The storage order of the image signals may be reversed in the vertical direction.
For example, even field memory address counter 12
Means that the line address (usually using the upper bits of the address counter) decreases from the predetermined value by one line for each line. When storing line data, the address counter is sequentially incremented to increase the even field memory. In parallel with this, the odd-numbered field memory 7 controls the memory addresses in ascending order and reads the same to output a normal image.

【0032】つづいて、本発明の第二の実施例を図7な
いし図9により説明する。前記実施例で示した部分と同
一部分は同一符号を用いて示す。本実施例は、図7に示
すように、4つの固体撮像素子3A〜3Dの読取有効画
素部を互いの接続部でその一部を重ねた光学的配置の撮
像部1構成のものに適用したものである。このような撮
像部1構成について読取り時に斜線を施して示す接続部
での画像の重複を避けるためには、基本的には、画像信
号を合成する際に接続部の一方の全て、又は、両方の一
部ずつを切捨てるとともにその切捨て画素分を画像信号
として相対的にシフト補正することにより、接続部での
幾何学的連続性を確保できる。ここに、水平方向、垂直
方向、水平・垂直方向の各接続部を、3′A+B,3′
C+D,3′A+C,3′B+D,3′A+B+C+D
で表すものとする。
Next, a second embodiment of the present invention will be described with reference to FIGS. The same parts as those shown in the above-mentioned embodiment are designated by the same reference numerals. As shown in FIG. 7, this embodiment is applied to an image pickup unit 1 having an optical arrangement in which the reading effective pixel portions of the four solid-state image pickup devices 3A to 3D are partially overlapped with each other at their connecting portions. It is a thing. In order to avoid overlapping of images in the connecting portions shown by hatching in the configuration of the image capturing unit 1 at the time of reading, basically, all of one or both of the connecting portions when synthesizing image signals are used. It is possible to secure the geometric continuity at the connection portion by cutting off each part of the above and performing relative shift correction on the cut-off pixels as an image signal. Connect the horizontal, vertical, and horizontal / vertical connections to 3'A + B, 3 '.
C + D, 3'A + C, 3'B + D, 3'A + B + C + D
Shall be represented by.

【0033】このように固体撮像素子3A〜3Dの光学
的配置の接続部を一部重複させて読取らせる構造とすれ
ば、固体撮像素子3A〜3Dの読取り有効画素部の端部
同士を正確に合わせなくても、読取り後の画素単位での
補正で済むものとなる。この場合であっても、四角錐プ
リズムミラー5の各反射面5A〜5Dからの分割光像の
受光であり、矩形状の領域画像となるため長方形の有効
画素部を持つ通常の固体撮像素子で読取り可能であり、
複雑な画像処理を必要としない。
As described above, when the connection portions of the optical arrangements of the solid-state image pickup devices 3A to 3D are partially overlapped and read, the end portions of the read effective pixel portions of the solid-state image pickup devices 3A to 3D are accurately aligned. Even if it is not adjusted, the correction can be made in pixel units after reading. Even in this case, since the divided light image is received from each of the reflection surfaces 5A to 5D of the quadrangular pyramid prism mirror 5, and a rectangular area image is formed, a normal solid-state image sensor having a rectangular effective pixel section is used. Readable,
No complicated image processing is required.

【0034】ところで、このような重なり接続部を持つ
構造の場合、上記のように単純に一方の画像信号を切捨
てる、といった画像合成処理では、固体撮像素子間での
画像信号の変化、特に色相や明るさの変化等が生ずるの
で、合成部分、即ち境界線が目立ってしまう。本実施例
では、このような重なり接続部での境界線を目立たなく
させる機能を持つ画像信号処理部2として図8に示すよ
うに構成したものである。
By the way, in the case of the structure having such an overlapping connection portion, in the image synthesizing process of simply discarding one image signal as described above, the change of the image signal between the solid-state image pickup elements, especially the hue. As a result, the combined portion, that is, the boundary line is conspicuous. In this embodiment, the image signal processing unit 2 having a function of making the boundary line in such an overlapping connection portion inconspicuous is configured as shown in FIG.

【0035】即ち、接続部では同一の画像を、3′A+
B,3′C+D等で示すように複数の固体撮像素子6A
〜6Dにより読取るが、画像合成出力時には隣合う接続
部間の出力信号、特に水平方向の接続部3′A+B,
3′C+Dについて平均化して合成出力を得るようにし
て、境界部の画像を改善し境界部が目立たないようにす
るものである。このため、本実施例にあっては、図8に
示すように、各固体撮像素子6A〜6Dの出力側にはそ
れらの画像信号全てを加算する加算回路16が設けられ
ている。また、この加算回路16の出力側にはこの出力
を1/2倍する1/2除算回路17が接続され、この1
/2除算回路17の出力と前記加算回路16の出力とを
選択切換えする切換え回路18が設けられている。さら
に、各フレームメモリ6A〜6Dとこの切換え回路18
とを制御する画像信号処理制御回路19が設けられてい
る。
That is, the same image is displayed at the connecting portion as 3'A +
A plurality of solid-state image pickup devices 6A as indicated by B, 3'C + D, etc.
6D, the output signal between the adjoining connecting portions, especially the horizontal connecting portion 3'A + B,
By averaging 3'C + D to obtain a composite output, the image of the boundary portion is improved and the boundary portion is made inconspicuous. Therefore, in the present embodiment, as shown in FIG. 8, an adder circuit 16 for adding all the image signals of the solid-state image pickup devices 6A to 6D is provided on the output side. Also, to the output side of the adder circuit 16 is connected a 1/2 divider circuit 17 which divides this output by 1/2.
A switching circuit 18 for selectively switching between the output of the / 2 division circuit 17 and the output of the addition circuit 16 is provided. Further, each frame memory 6A to 6D and this switching circuit 18
An image signal processing control circuit 19 for controlling the and is provided.

【0036】このような構成において、例えば図7を参
照してその動作を説明すると、固体撮像素子3A単独の
読取有効画素部ではこの固体撮像素子3Aの画像信号
(フレームメモリ6Aの内容)とゼロデータ(固体撮像
素子3Bは有効画像領域外であり、そのフレームメモリ
6Bの出力がゼロとなるようにその読出しが制御され
る)とが加算回路16により加算され、そのまま切換え
回路18を通して固体撮像素子3A単独部分の画像信号
が出力される。接続部3′A+Bにあっては、固体撮像
素子3A,3Bともに読取有効画素部であり、加算回路
16にはフレームメモリ6A,6Bの画像信号が入力さ
れる。加算回路16の出力は1/2除算回路17での除
算処理により1/2倍に平均化され、切換え回路18を
通して重複部分の画像信号が出力される。固体撮像素子
3B単独の読取有効画素部ではこの固体撮像素子3Bの
画像信号(フレームメモリ6Bの内容)とゼロデータ
(固体撮像素子3Aは有効画像領域外であり、そのフレ
ームメモリ6Aの出力がゼロとなるようにその読出しが
制御される)とが加算回路16により加算され、そのま
ま切換え回路18を通して固体撮像素子3B単独部分の
画像信号が出力される。固体撮像素子3C,3D側の画
像処理についても同様に行なわれる。このように水平方
向の重複読取り部分については平均化処理された画像信
号が出力されるので、境界線の目立たないものとなる。
In such a configuration, the operation will be described with reference to FIG. 7, for example, in the read effective pixel section of the solid-state image sensor 3A alone, the image signal (contents of the frame memory 6A) of the solid-state image sensor 3A and zero. The data (the solid-state image sensor 3B is outside the effective image area and its reading is controlled so that the output of the frame memory 6B becomes zero) is added by the adder circuit 16, and the solid-state image sensor is directly passed through the switching circuit 18. The image signal of the 3A single portion is output. In the connection section 3'A + B, both the solid-state image pickup elements 3A and 3B are read effective pixel sections, and the image signals of the frame memories 6A and 6B are input to the adder circuit 16. The output of the adder circuit 16 is averaged to 1/2 by the division processing in the 1/2 divider circuit 17, and the image signal of the overlapping portion is output through the switching circuit 18. In the read effective pixel section of the solid-state image sensor 3B alone, the image signal of the solid-state image sensor 3B (contents of the frame memory 6B) and zero data (the solid-state image sensor 3A is outside the effective image area, and the output of the frame memory 6A is zero). (The reading is controlled so that the above) is added by the adding circuit 16 and the image signal of the single portion of the solid-state image pickup device 3B is output as it is through the switching circuit 18. Image processing on the solid-state image pickup devices 3C and 3D side is similarly performed. In this way, since the image signal subjected to the averaging process is output for the overlapping read portion in the horizontal direction, the boundary line becomes inconspicuous.

【0037】なお、垂直方向に重複読取りする部分、
3′A+C及び3′B+Dについては、各々の領域でフ
レームメモリ6A,6C、6B,6Dの内容を加算回路
16で加算し、1/2除算回路17で1/2倍に平均化
したものが、順次出力される。
A portion to be read in duplicate in the vertical direction,
Regarding 3'A + C and 3'B + D, the contents of the frame memories 6A, 6C, 6B and 6D are added by the adder circuit 16 in each area and averaged by 1/2 by the 1/2 divider circuit 17. , Are sequentially output.

【0038】ところで、上述した構成だけでは、水平方
向及び垂直方向に重複読取りする部分3′A+B+C+
Dについては平均化処理できない。その平均化を行なう
には、図8中に破線で示すように、加算回路16の出力
側に1/4除算回路20を付加し、切換え回路18を加
算回路16出力、1/2除算回路17出力、1/4除算
回路20出力の何れかを選択するものとすればよい。
By the way, with only the above-mentioned structure, the portion 3'A + B + C + for overlapping reading in the horizontal and vertical directions is used.
Averaging processing cannot be performed on D. To perform the averaging, as shown by a broken line in FIG. 8, a 1/4 division circuit 20 is added to the output side of the addition circuit 16 and a switching circuit 18 is used to output the addition circuit 16 and the 1/2 division circuit 17. Either the output or the 1/4 division circuit 20 output may be selected.

【0039】これにより、固体撮像素子3A〜3Dの各
々単独読取り部分では加算回路16の出力を選択し、水
平方向又は垂直方向の一方のみの重複読取り部分では1
/2除算回路17の出力を選択し、水平方向及び垂直方
向の両方の重複読取り部分では1/4除算回路20の出
力を選択することで、境界線の目立たない1画面分の合
成画像が得られるものとなる。
As a result, the output of the adder circuit 16 is selected in the individual reading portion of each of the solid-state image pickup devices 3A to 3D, and is set to 1 in the overlapping reading portion in only one of the horizontal direction and the vertical direction.
By selecting the output of the / 2 division circuit 17 and the output of the 1/4 division circuit 20 in both the horizontal and vertical overlapping reading portions, a composite image for one screen in which the borderline is inconspicuous is obtained. Will be used.

【0040】このような1/4除算回路20を含めた加
算回路16以降の回路構成例を図8に示す。これは、1
/2除算回路17を1ビットシフトによる1/2除算、
1/4除算回路20を2ビットシフトによる1/4除算
により実現し、切換え回路18と一体的に組合せて構成
したものであり、3つのゲート回路21,22,23に
より構成されている。これらのゲート回路21,22,
23は画像信号処理制御回路19からの切換え信号によ
り出力信号が有効又は無効とされるものである。この
時、第1番目のゲート回路21は加算回路16からの入
力データ(10ビット)中の上位8ビット(D9〜D
2)を8ビット出力信号とすることにより2ビットのシ
フトを実行し、1/4除算を受け持つものとなる。同様
に、次のゲート回路22は入力データの最上位ビット
(D9)と最下位ビット(D0)以外のビット(D8〜
D1)を8ビット出力信号とすることにより1ビットの
シフトを実行し、1/2除算を受け持つものとなる。ゲ
ート回路23は入力データの下位8ビット(D7〜D
0)をそのまま8ビット出力信号とすることにより加算
回路16の出力をそのまま出力するものとなる。
FIG. 8 shows an example of the circuit configuration of the adder circuit 16 and the subsequent circuits including the 1/4 divider circuit 20. This is 1
1/2 division circuit 17 divides 1/2 by 1 bit shift,
The 1/4 division circuit 20 is realized by 1/4 division by 2-bit shift, and is configured integrally with the switching circuit 18, and is configured by three gate circuits 21, 22, and 23. These gate circuits 21, 22,
An output signal 23 is made valid or invalid by a switching signal from the image signal processing control circuit 19. At this time, the first gate circuit 21 outputs the upper 8 bits (D9 to D) of the input data (10 bits) from the adder circuit 16.
By making 2) an 8-bit output signal, 2-bit shift is executed and it becomes responsible for ¼ division. Similarly, the next gate circuit 22 receives bits (D8 to D8) other than the most significant bit (D9) and the least significant bit (D0) of the input data.
By shifting D1) to an 8-bit output signal, 1-bit shift is executed, and it becomes responsible for 1/2 division. The gate circuit 23 receives the lower 8 bits (D7 to D) of the input data.
(0) is directly used as an 8-bit output signal, so that the output of the adder circuit 16 is directly output.

【0041】ここに固体撮像素子3A〜3Dの出力信号
は8ビットであり、通常の単独読取有効画素部ではフレ
ームメモリ6A〜6Dの出力信号の内の3つ分がゼロで
あり、加算回路16の出力は最大でも8ビット以下の信
号となる。同様に、水平方向又は垂直方向の重複読取り
部では最大でも9ビット以下、水平方向及び垂直方向の
重複読取り部では最大でも10ビット以下の信号とな
り、全てのケースに対処し得るものとなる。
Here, the output signals of the solid-state image pickup devices 3A to 3D are 8 bits, three of the output signals of the frame memories 6A to 6D are zero in the normal single reading effective pixel portion, and the adder circuit 16 is provided. The maximum output is a signal of 8 bits or less. Similarly, the horizontal or vertical duplication reading unit has a maximum of 9 bits or less, and the horizontal or vertical duplication reading unit has a maximum of 10 bits or less, which can handle all cases.

【0042】[0042]

【発明の効果】本発明は、上述したように構成したの
で、請求項1記載の発明によれば、固体撮像素子の個数
倍の高解像度で読取り可能な撮像部に対して、それらの
固体撮像素子からの出力画像を合成するのに必要な個数
の1画面画像データ記憶回路とインターレス方式とを利
用し、これらの1画面画像データ記憶回路に対する画像
信号の記憶・読出し時に、現在記憶中のフィールドと出
力中のフィールドとを奇数・偶数フィールドで異ならせ
た画像信号処理部で合成処理させることにより、制御簡
単な構成の画像信号処理部にして適正な1画面分の画像
合成を可能とすることができる。
Since the present invention is configured as described above, according to the invention of claim 1, the solid-state image pickup units for the solid-state image pickup devices capable of reading with high resolution, which is a multiple of the number of the solid-state image pickup devices, are used. The number of one-screen image data storage circuits necessary for synthesizing the output image from the element and the interlace method are used, and when the image signals are stored / read out to / from these one-screen image data storage circuits By combining the fields and the field being output by different image signal processing units for odd / even fields, an image signal processing unit having a simple control configuration can be used to enable proper image composition for one screen. be able to.

【0043】特に、請求項2記載の発明によれば、画像
合成処理について、該当する読取有効画素については自
己のの固体撮像素子の画像信号のみを有効とし他の固体
撮像素子によるものはゼロとして扱うことにより、加算
回路による簡単な合成処理で済ませることができる。
In particular, according to the second aspect of the invention, regarding the image combining processing, only the image signal of its own solid-state image pickup device is valid for the corresponding read effective pixels, and zero is obtained by other solid-state image pickup devices. By handling, it is possible to complete the simple combining process by the adder circuit.

【0044】ここに、このような処理では鏡像が出力さ
れてしまうが、請求項3又は4記載の発明によれば、水
平方向又は垂直方向について順序制御手段により1画面
画像データ記憶回路に対するその記憶又は読出しの順序
を逆転制御するだけで、容易に正像出力とすることがで
き、そのための構成も、元々各固体撮像素子に必要な1
画面画像データ記憶回路とインターレス方式を利用し、
これに鏡像データを正像に変換する順序制御手段を付加
するだけの簡単なもので済むものである。
Here, although a mirror image is output in such processing, according to the invention of claim 3 or 4, according to the invention in the horizontal direction or the vertical direction, the sequence control means stores the image in the one-screen image data storage circuit. Alternatively, the normal image output can be easily performed only by controlling the reading order in the reverse direction, and the configuration therefor is originally required for each solid-state imaging device.
Utilizing the screen image data storage circuit and interlace system,
It is only necessary to add a sequence control means for converting mirror image data to a normal image.

【0045】また、請求項5又は6記載の発明によれ
ば、各固体撮像素子の読取有効画素部の配置を互いに重
なる状態としたので相互の位置関係について正確に合わ
せなくても済むものとなるが、この際、加算回路出力に
対して1/2除算回路や1/4除算回路を設け、水平方
向、垂直方向での重複読取り部分、又は、水平方向及び
垂直方向の重複読取り部分では、これらの除算回路によ
り平均化した画像信号を出力させることにより、境界線
部分の目立たない合成処理が可能となるものである。
According to the fifth or sixth aspect of the present invention, since the read effective pixel portions of the solid-state image pickup elements are arranged so as to overlap each other, the mutual positional relationship need not be accurately adjusted. However, at this time, a 1/2 division circuit or a 1/4 division circuit is provided for the output of the addition circuit, and in the overlapping read portion in the horizontal direction and the vertical direction, or in the overlapping read portion in the horizontal direction and the vertical direction, these By outputting the averaged image signal by the division circuit of (1), it is possible to perform the inconspicuous synthesizing process of the boundary portion.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の第一の実施例の1つのフレームメモリ
構成を示すブロック図である。
FIG. 1 is a block diagram showing one frame memory configuration of a first embodiment of the present invention.

【図2】撮像部構成を示す斜視図である。FIG. 2 is a perspective view showing a configuration of an image pickup unit.

【図3】画像信号処理部構成を示すブロック図である。FIG. 3 is a block diagram showing a configuration of an image signal processing unit.

【図4】固体撮像素子の相対的な光学的配置関係を示す
配置図である。
FIG. 4 is a layout diagram showing a relative optical layout relationship of solid-state image pickup devices.

【図5】鏡像−正像関係について示す模式図である。FIG. 5 is a schematic diagram showing a mirror image-normal image relationship.

【図6】画像信号処理部の動作を示すタイミングチャー
トである。
FIG. 6 is a timing chart showing the operation of the image signal processing unit.

【図7】本発明の第二の実施例の固体撮像素子の相対的
な光学的配置関係を示す配置図である。
FIG. 7 is a layout diagram showing a relative optical layout relationship of the solid-state imaging device of the second embodiment of the present invention.

【図8】画像信号処理部構成を示すブロック図である。FIG. 8 is a block diagram showing a configuration of an image signal processing unit.

【図9】その出力側の具体的構成例を示すブロック図で
ある。
FIG. 9 is a block diagram showing a specific configuration example of the output side.

【符号の説明】[Explanation of symbols]

1 撮像部 2 画像信号処理部 3A〜3D 固体撮像素子 4 撮像レンズ 5 反射体=4角錐プリズム 5A〜5D 反射面 6A〜6D 1画面画像データ記憶回路 9,10 入出力切換え制御部 11,12 順序制御手段 13 記憶回路制御回路 14 制御手段 16 加算回路 17 1/2除算回路 18 切換え回路 19 切換え回路制御手段 20 1/4除算回路 DESCRIPTION OF SYMBOLS 1 Image pick-up part 2 Image signal processing part 3A-3D Solid-state image pick-up element 4 Imaging lens 5 Reflector = 4-sided pyramid prism 5A-5D Reflective surface 6A-6D 1 screen image data storage circuit 9,10 Input / output switching control part 11,12 Sequence Control means 13 Storage circuit control circuit 14 Control means 16 Addition circuit 17 1/2 division circuit 18 Switching circuit 19 Switching circuit control means 20 1/4 division circuit

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 撮像レンズと、この撮像レンズの光軸上
に配置されて前記撮像レンズを透過した光像を分割反射
させる複数の反射面を有する反射体と、この反射体によ
り分割反射された各光像に対して各々光学的に異なる撮
像領域を相対的に隣接状態で受光する光学的位置に配置
させた複数の固体撮像素子とよりなる撮像部を設け、各
固体撮像素子の個数に対応した数の1画面画像データ記
憶回路と、各固体撮像素子からインターレス方式で出力
される画像信号を対応する1画面画像データ記憶回路に
対してライン単位で奇数又は偶数の何れかのフィールド
に同時に記憶させる一方、記憶動作中のフィールドと異
なる他方のフィールドから1画面画像信号をライン単位
で読出させる入出力切換え制御部を有する記憶回路制御
手段とよりなり、これらの1画面画像データ記憶回路か
らの画像信号を合成処理して1画面の画像信号として出
力する画像信号処理部を設けたことを特徴とする撮像装
置。
1. An image pickup lens, a reflector having a plurality of reflecting surfaces arranged on an optical axis of the image pickup lens and dividing and reflecting an optical image transmitted through the image pickup lens, and the reflector is divided and reflected. The number of each solid-state image sensor corresponds to the number of each solid-state image sensor by providing an image pickup unit consisting of a plurality of solid-state image sensors that are arranged at optical positions that receive the optically different image areas in relatively adjacent states for each optical image. The same number of one-screen image data storage circuits and the image signals output from each solid-state image sensor in the interlace method are simultaneously applied to the corresponding one-screen image data storage circuits in an odd or even field in line units. The storage circuit control means has an input / output switching control unit for storing one screen image signal in a line unit from the other field different from the field in which the storage operation is being performed. An image pickup apparatus, comprising: an image signal processing section for synthesizing image signals from these one-screen image data storage circuits and outputting the resultant as a one-screen image signal.
【請求項2】 画像信号処理部に、各1画面画像データ
記憶回路からの1画面画像信号を全て加算する加算回路
と、該当する読取有効画素対応の1画面画像データ記憶
回路以外の1画面画像データ記憶回路の画像信号をゼロ
として前記加算回路に出力させる制御手段とを設けたこ
とを特徴とする請求項1記載の撮像装置。
2. An addition circuit for adding all 1-screen image signals from each 1-screen image data storage circuit to the image signal processing section, and a 1-screen image other than the 1-screen image data storage circuit corresponding to the corresponding read effective pixels. The image pickup apparatus according to claim 1, further comprising: a control unit that outputs the image signal of the data storage circuit to the addition circuit as zero.
【請求項3】 記憶回路制御手段が、各1画面画像デー
タ記憶回路に対する記憶時又は読出し時に、画像信号順
序を水平方向で逆転させる順序制御手段を有することを
特徴とする請求項1又は2記載の撮像装置。
3. The storage circuit control means has sequence control means for reversing the image signal sequence in the horizontal direction at the time of storing or reading the one-screen image data storage circuit. Imaging device.
【請求項4】 記憶回路制御手段が、各1画面画像デー
タ記憶回路に対する記憶時又は読出し時に、画像信号順
序を垂直方向で逆転させる順序制御手段を有することを
特徴とする請求項1又は2記載の撮像装置。
4. The storage circuit control means has an order control means for reversing the image signal order in the vertical direction when storing or reading in each one-screen image data storage circuit. Imaging device.
【請求項5】 撮像部における各固体撮像素子の読取有
効画素部の配置を各々の光学的位置関係の接続部で部分
的に重ならせるとともに、少なくとも水平方向に2つ以
上の反射面を有する反射体とし、画像信号処理部中に、
加算回路により加算された画像信号を1/2倍する1/
2除算回路と、1/2除算回路の出力と前記加算回路の
出力とを選択的に切換え出力する切換え回路とを設け、
1つの固体撮像素子単独の部分では前記加算回路の出力
を選択させる一方、部分的に重なりを持つ接続部では1
/2除算回路の出力を選択させる切換え回路制御手段を
設けたことを特徴とする請求項2又は3記載の撮像装
置。
5. The reading effective pixel section of each solid-state image pickup element in the image pickup section is partially overlapped by the connection section having an optical positional relationship, and at least two or more reflecting surfaces are provided in the horizontal direction. As a reflector, in the image signal processing unit,
The image signal added by the adding circuit is multiplied by 1/2
A division circuit for dividing by 2 and a switching circuit for selectively switching between the output of the 1/2 division circuit and the output of the adder circuit;
The output of the adder circuit is selected in the part of one solid-state image pickup device alone, while it is set to 1 in the connection part which partially overlaps.
4. The image pickup apparatus according to claim 2, further comprising switching circuit control means for selecting an output of the / 2 division circuit.
【請求項6】 撮像部における各固体撮像素子の読取有
効画素部の配置を各々の光学的位置関係の接続部で部分
的に重ならせるとともに、反射体を四角錐プリズムミラ
ーとし、画像信号処理部中に、加算回路により加算され
た画像信号を1/2倍する1/2除算回路と、加算回路
により加算された画像信号を1/4倍する1/4除算回
路と、1/2除算回路の出力と1/4除算回路の出力と
前記加算回路の出力とを選択的に切換え出力する切換え
回路とを設け、1つの固体撮像素子単独の部分では前記
加算回路の出力を選択させる一方、水平方向、垂直方向
で各々部分的に重なりを持つ接続部では1/2除算回路
の出力を選択させ、水平方向及び垂直方向で部分的に重
なりを持つ接続部では1/4除算回路の出力を選択させ
る切換え回路制御手段を設けたことを特徴とする請求項
2,3又は4記載の撮像装置。
6. The image signal processing, wherein the arrangement of the reading effective pixel portions of each solid-state image pickup element in the image pickup portion is partially overlapped with each other in the connection portion of each optical positional relationship, and the reflector is a quadrangular pyramid prism mirror. In the unit, a 1/2 division circuit for multiplying the image signal added by the addition circuit by 1/2, a 1/4 division circuit for multiplying the image signal added by the addition circuit by 1/4, and a 1/2 division A switching circuit for selectively switching and outputting the output of the circuit, the output of the 1/4 division circuit, and the output of the addition circuit is provided, and the output of the addition circuit is selected in the portion of one solid-state image pickup device alone. The output of the 1/2 divider circuit is selected at the connection portion that partially overlaps in the horizontal and vertical directions, and the output of the 1/4 division circuit is selected at the connection portion that partially overlaps in the horizontal and vertical directions. Switching circuit control hand to select The image pickup device according to claim 2, 3 or 4, wherein a step is provided.
JP3239046A 1991-09-19 1991-09-19 Image pickup device Pending JPH0583643A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3239046A JPH0583643A (en) 1991-09-19 1991-09-19 Image pickup device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3239046A JPH0583643A (en) 1991-09-19 1991-09-19 Image pickup device

Publications (1)

Publication Number Publication Date
JPH0583643A true JPH0583643A (en) 1993-04-02

Family

ID=17039073

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3239046A Pending JPH0583643A (en) 1991-09-19 1991-09-19 Image pickup device

Country Status (1)

Country Link
JP (1) JPH0583643A (en)

Similar Documents

Publication Publication Date Title
JP2678062B2 (en) Photoelectric conversion device
JP4255345B2 (en) Imaging device
US6542429B2 (en) Method of controlling line memory
US20010042817A1 (en) Solid state imaging device and method for driving the same
JPH0583643A (en) Image pickup device
JP3222687B2 (en) Solid-state imaging device
JP3700488B2 (en) Wide-angle image pickup device
JPH05207381A (en) Image pickup device
JP2959823B2 (en) Image processing device
JPH10191185A (en) Image signal processing unit
JPH066686A (en) Image pickup device
JPH08251492A (en) High speed image pickup device
JP2002290838A (en) Video signal processing system and imaging apparatus
EP0932296A2 (en) Image reading apparatus
JP3566687B2 (en) Data array conversion device, image processing system, and image input device
JP2964502B2 (en) Video processing equipment
JPH0474071A (en) Solid-state image pickup device
JP3403588B2 (en) All-pixel readout electronic endoscope
JPH06205255A (en) Image pickup device
JPH0715732A (en) Color image pickup device
JPS61244183A (en) Scan conversion system
JP3461373B2 (en) Image handling equipment
JP2000032355A (en) Device and method for camera control and storage medium
JP3461374B2 (en) Image handling equipment
JPH1175218A (en) Video signal processing circuit