JP2000102024A - Image signal processor - Google Patents
Image signal processorInfo
- Publication number
- JP2000102024A JP2000102024A JP10272138A JP27213898A JP2000102024A JP 2000102024 A JP2000102024 A JP 2000102024A JP 10272138 A JP10272138 A JP 10272138A JP 27213898 A JP27213898 A JP 27213898A JP 2000102024 A JP2000102024 A JP 2000102024A
- Authority
- JP
- Japan
- Prior art keywords
- interpolation
- pixel
- signal
- pixels
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000001514 detection method Methods 0.000 claims abstract description 93
- 230000000295 complement effect Effects 0.000 claims abstract description 54
- 238000000576 coating method Methods 0.000 claims abstract description 16
- 239000011248 coating agent Substances 0.000 claims abstract description 15
- 239000003086 colorant Substances 0.000 claims abstract description 13
- 238000003384 imaging method Methods 0.000 claims description 15
- 238000000034 method Methods 0.000 claims description 15
- 238000009500 colour coating Methods 0.000 claims description 4
- 230000003111 delayed effect Effects 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 13
- 239000000284 extract Substances 0.000 description 11
- 238000005070 sampling Methods 0.000 description 11
- 230000001360 synchronised effect Effects 0.000 description 7
- 230000003595 spectral effect Effects 0.000 description 6
- 230000035945 sensitivity Effects 0.000 description 4
- 230000001934 delay Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
Landscapes
- Color Television Image Signal Generators (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、例えば補色系のコ
ーティングが施されたCCD等の撮像デバイスからの読
み出し信号に対して画素補間を行う画像信号処理装置に
関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image signal processing apparatus for performing pixel interpolation on a read signal from an image pickup device such as a CCD having a complementary color coating.
【0002】[0002]
【従来の技術】従来より、例えばイエロー(Ye)、シ
アン(Cy)、マゼンタ(Mg)、グリーン(G)等の
補色系のコーティングを施してなるCCD等の撮像デバ
イスを備えた補色カメラシステムは、レッド(R)、ブ
ルー(B)、グリーン(G)の原色系のコーティングを
施してなるCCD等の撮像デバイスを備えた原色カメラ
システムに比べて、各画素の感度が高く、各画素色成分
も多いため、解像度改善をしなくても比較的良好な画素
が得られることが特徴となっている。2. Description of the Related Art Conventionally, a complementary color camera system provided with an imaging device such as a CCD coated with a complementary color system such as yellow (Ye), cyan (Cy), magenta (Mg), and green (G) has been known. , Red (R), blue (B), green (G) primary color camera system provided with an imaging device such as CCD coated with primary color system coating, the sensitivity of each pixel is higher, and each pixel color component Therefore, it is characterized that relatively good pixels can be obtained without improving the resolution.
【0003】図11には、従来の補色カメラシステムに
おける、2画素混合読み出し時の輝度信号処理の構成例
を示す。なお、図11の補色カメラシステム例では、撮
像デバイスにいわゆる補色市松コーティングが施されて
おり、また、CCD等の撮像デバイスからの画像信号に
時間軸方向のフィルタリング処理を施して当該画像信号
の高周波成分を補償する信号処理(以下、アパーチャコ
ントロール処理と呼ぶ)を行うようになされている。FIG. 11 shows an example of a configuration of a luminance signal processing at the time of two-pixel mixed reading in a conventional complementary color camera system. In the example of the complementary color camera system shown in FIG. 11, a so-called complementary checkered coating is applied to the imaging device, and an image signal from an imaging device such as a CCD is subjected to filtering processing in the time axis direction to perform high-frequency filtering of the image signal. Signal processing for compensating components (hereinafter, referred to as aperture control processing) is performed.
【0004】この図11において、入力端子101に
は、CCD等の撮像デバイスから空間的に離散的に存在
するYe、Cy、Mg、Gの補色画像信号が供給され
る。この補色画像信号は、1/4Vフィルタ104と1
ラインディレイ回路102に送られ、また、当該1ライ
ンディレイ回路102の出力は1ラインディレイ回路1
03に送られる。In FIG. 11, an input terminal 101 is supplied with spatially discrete complementary color image signals of Ye, Cy, Mg, and G from an imaging device such as a CCD. This complementary color image signal is output to the 1/4 V filter 104 and 1
The output of the one-line delay circuit 102 is sent to the one-line delay circuit 1.
03 is sent.
【0005】1ラインディレイ回路102及び103
は、入力された画像信号をそれぞれ1ライン分遅延し、
各々の遅延出力を1/4Vフィルタ104に送る。これ
により、1/4Vフィルタ104には、3ライン同時化
された画像信号が供給されることになる。[0005] One-line delay circuits 102 and 103
Delays each input image signal by one line,
Each delayed output is sent to a 1 / 4V filter 104. As a result, the 信号 V filter 104 is supplied with an image signal that has been synchronized for three lines.
【0006】また、1ラインディレイ回路102にて1
ライン分遅延された画像信号は、水平方向方向ローパス
フィルタ107にも送られる。In addition, the one-line delay circuit 102
The image signal delayed by the line is also sent to the horizontal low-pass filter 107.
【0007】水平方向ローパスフィルタ107は、1ラ
インディレイ回路102にて1ライン分遅延された画像
信号の低域成分を抜き出すことで輝度信号を取り出し、
この輝度信号を、加算器112、1/4Hフィルタ10
5及び1/2Hフィルタ106に送る。The horizontal low-pass filter 107 extracts a luminance signal by extracting a low-frequency component of the image signal delayed by one line in the one-line delay circuit 102, and
This luminance signal is added to an adder 112, a 1 / 4H filter 10
5 and 1/2 H filters.
【0008】1/4Vフィルタ104は、3ライン同時
化された画像信号から、サンプリング周波数の垂直方向
1/4の高域成分を抜き出し、その周波数成分を乗算器
108に送る。1/4Hフィルタ105は、水平方向ロ
ーパスフィルタ107より取り出された輝度信号から、
サンプリング周波数の水平方向1/4の高域成分を抜き
出し、その周波数成分を乗算器109に送る。1/2H
フィルタ106は、水平方向ローパスフィルタ107よ
り取り出された輝度信号から、サンプリング周波数の水
平方向1/2の高域成分を抜き出し、その周波数成分を
乗算器110に送る。The 4V filter 104 extracts a high-frequency component of 垂直 of the sampling frequency in the vertical direction from the image signal of three lines, and sends the frequency component to the multiplier 108. The HH filter 105 outputs the luminance signal extracted from the horizontal low-pass filter 107
A high-frequency component in the horizontal direction 周波 数 of the sampling frequency is extracted, and the frequency component is sent to the multiplier 109. 1 / 2H
The filter 106 extracts a high-frequency component of サ ン プ リ ン グ of the sampling frequency in the horizontal direction from the luminance signal extracted from the horizontal low-pass filter 107, and sends the frequency component to the multiplier 110.
【0009】乗算器108は、1/4Vフィルタ104
からの垂直方向1/4の周波数成分に所定のアパーチャ
コントロールゲインを掛け、その出力信号を加算器11
1に送る。乗算器109は、1/4Hフィルタ105か
らの水平方向1/4の帯域の周波数成分に所定のアパー
チャコントロールゲインを掛け、その出力信号を加算器
111に送る。乗算器110は、1/2Hフィルタ10
6からの水平方向1/2の帯域の周波数成分に所定のア
パーチャコントロールゲインを掛け、その出力信号を加
算器111に送る。The multiplier 108 includes a 1/4 V filter 104
Is multiplied by a predetermined aperture control gain and the output signal is added to an adder 11.
Send to 1. The multiplier 109 multiplies the frequency component in the horizontal 帯 域 band from the H H filter 105 by a predetermined aperture control gain, and sends the output signal to the adder 111. The multiplier 110 is provided with the HH filter 10
A predetermined aperture control gain is multiplied by the frequency component of the band in the horizontal direction 6 from 6, and the output signal is sent to the adder 111.
【0010】加算器111では、乗算器108〜110
の各出力信号を加算し、アパーチャコントロール信号と
して出力する。この加算器111からのアパーチャコン
トロール信号は加算器112に送られる。In the adder 111, multipliers 108 to 110
Are added and output as an aperture control signal. The aperture control signal from the adder 111 is sent to the adder 112.
【0011】加算器112では、上記アパーチャコント
ロール信号と輝度信号を加算し、これにより、当該加算
器112からは、高周波成分を補償(アパーチャコント
ロール処理)した輝度信号が出力される。この加算器1
12から出力された輝度信号は、ガンマ(γ)補正回路
113に送られる。The adder 112 adds the aperture control signal and the luminance signal, whereby the adder 112 outputs a luminance signal in which high-frequency components have been compensated (aperture control processing). This adder 1
The luminance signal output from 12 is sent to a gamma (γ) correction circuit 113.
【0012】ガンマ補正回路113では、アパーチャコ
ントロール処理後の輝度信号をガンマ処理し、このガン
マ補正後の輝度信号が出力端子114から出力される。The gamma correction circuit 113 performs gamma processing on the luminance signal after the aperture control processing, and outputs the gamma corrected luminance signal from an output terminal 114.
【0013】この図11に示した従来の補色カメラシス
テムの2画素混合読み出し時の輝度信号処理では、入力
画像信号に対して水平方向のフィルタを掛けて輝度信号
を取り出し、また、同時化された水平,垂直信号に対し
てフィルタを通して高域成分(サンプリング周波数の垂
直1/4、水平1/2,1/4の高域成分)だけを抜き
出し、これらに適当なゲインを掛けてから足し合わせて
所望のアパーチャコントロール信号(高域周波数補償信
号)を生成し、このアパーチャコントロール信号を輝度
信号に加算するようにしている。In the luminance signal processing at the time of two-pixel mixture readout of the conventional complementary color camera system shown in FIG. 11, a luminance signal is extracted by applying a horizontal filter to the input image signal, and the luminance signal is synchronized. Only high-frequency components (vertical 1/4 of sampling frequency, high-frequency components of 1/2 and 1/4 of the sampling frequency) are extracted from the horizontal and vertical signals through a filter, multiplied by an appropriate gain, and added. A desired aperture control signal (high frequency compensation signal) is generated, and the aperture control signal is added to the luminance signal.
【0014】図12には、従来の補色カメラシステムに
おける、全画素独立読み出し時の輝度信号処理の構成例
を示す。なお、図12の例でも、撮像デバイスに補色市
松コーティングが施されており、また、アパーチャコン
トロール処理を行うようになされている。FIG. 12 shows a configuration example of luminance signal processing at the time of independent reading of all pixels in a conventional complementary color camera system. Note that, also in the example of FIG. 12, the imaging device is provided with a complementary color checkerboard coating, and an aperture control process is performed.
【0015】この図12において、入力端子121に
は、CCD等の撮像デバイスから空間的に離散的に存在
するYe、Cy、Mg、Gの補色画像信号が供給され
る。この補色画像信号は、Vフィルタ125と垂直方向
ローパスフィルタ128、及び1ラインディレイ回路1
22に送られる。In FIG. 12, complementary color image signals of Ye, Cy, Mg, and G, which are spatially discrete, are supplied to an input terminal 121 from an imaging device such as a CCD. This complementary color image signal is supplied to the V filter 125, the vertical low-pass filter 128, and the one-line delay circuit 1
22.
【0016】1ラインディレイ回路122の出力は、1
ラインディレイ回路123を介して更に1ラインディレ
イ回路124に送られる。これら1ラインディレイ回路
122〜124は、それぞれ入力された画像信号を1ラ
イン分遅延し、各々の遅延出力をVフィルタ125と垂
直方向ローパスフィルタ128に送る。これにより、V
フィルタ125と垂直方向ローパスフィルタ128に
は、4ライン同時化された画像信号が供給されることに
なる。The output of the one-line delay circuit 122 is 1
The signal is further sent to the one-line delay circuit 124 via the line delay circuit 123. Each of the one-line delay circuits 122 to 124 delays the input image signal by one line, and sends each delayed output to the V filter 125 and the vertical low-pass filter 128. Thereby, V
The filter 125 and the vertical low-pass filter 128 are supplied with an image signal synchronized with four lines.
【0017】上記垂直方向ローパスフィルタ128の信
号はさらに水平方向ローパスフィルタ129を通過する
ようになされており、これにより、4ライン同時化され
た画像信号から輝度信号が取り出される。この輝度信号
は、1/4Hフィルタ126と1/2Hフィルタ12
7、及び加算器134に送られる。The signal of the vertical low-pass filter 128 is further passed through a horizontal low-pass filter 129, whereby a luminance signal is extracted from an image signal obtained by synchronizing four lines. This luminance signal is output to the 4H filter 126 and the HH filter 12.
7, and sent to the adder 134.
【0018】Vフィルタ125は、4ライン同時化され
た画像信号から、サンプリング周波数の垂直方向の高域
成分を抜き出し、その周波数成分を乗算器130に送
る。1/4Hフィルタ126は、輝度信号から、サンプ
リング周波数の水平方向1/4の高域成分を抜き出し、
その周波数成分を乗算器131に送る。1/2Hフィル
タ127は、輝度信号から、サンプリング周波数の水平
方向1/2の高域成分を抜き出し、その周波数成分を乗
算器132に送る。The V filter 125 extracts a high-frequency component in the vertical direction of the sampling frequency from the image signal obtained by synchronizing the four lines, and sends the frequency component to the multiplier 130. The HH filter 126 extracts a high-frequency component of サ ン プ リ ン グ of the sampling frequency in the horizontal direction from the luminance signal,
The frequency component is sent to the multiplier 131. The HH filter 127 extracts a high-frequency component in the horizontal direction の of the sampling frequency from the luminance signal, and sends the frequency component to the multiplier 132.
【0019】乗算器130は、Vフィルタ125からの
垂直方向の周波数成分に所定のアパーチャコントロール
ゲインを掛け、その出力信号を加算器133に送る。乗
算器131は、1/4Hフィルタ126からの水平方向
1/4の帯域の周波数成分に所定のアパーチャコントロ
ールゲインを掛け、その出力信号を加算器133に送
る。乗算器132は、1/2Hフィルタ127からの水
平方向1/2の帯域の周波数成分に所定のアパーチャコ
ントロールゲインを掛け、その出力信号を加算器133
に送る。The multiplier 130 multiplies the vertical frequency component from the V filter 125 by a predetermined aperture control gain, and sends the output signal to the adder 133. The multiplier 131 multiplies the frequency component in the horizontal 1 / band from the H H filter 126 by a predetermined aperture control gain, and sends the output signal to the adder 133. Multiplier 132 multiplies the frequency component in the horizontal 2 band from H H filter 127 by a predetermined aperture control gain, and outputs the output signal to adder 133.
Send to
【0020】加算器133では、乗算器130〜132
の各出力信号を加算し、アパーチャコントロール信号と
して出力する。この加算器133からのアパーチャコン
トロール信号は加算器134に送られる。In the adder 133, multipliers 130 to 132
Are added and output as an aperture control signal. The aperture control signal from the adder 133 is sent to the adder 134.
【0021】加算器134では、上記アパーチャコント
ロール信号と輝度信号を加算し、これにより、当該加算
器134からは、高周波成分を補償(アパーチャコント
ロール処理)した輝度信号が出力される。この加算器1
34から出力された輝度信号は、ガンマ(γ)補正回路
135に送られる。In the adder 134, the aperture control signal and the luminance signal are added, whereby the adder 134 outputs a luminance signal in which high-frequency components have been compensated (aperture control processing). This adder 1
The luminance signal output from 34 is sent to a gamma (γ) correction circuit 135.
【0022】ガンマ補正回路135では、アパーチャコ
ントロール処理後の輝度信号をガンマ処理し、このガン
マ補正後の輝度信号が出力端子136から出力される。The gamma correction circuit 135 performs gamma processing on the luminance signal after the aperture control processing, and outputs the gamma corrected luminance signal from an output terminal 136.
【0023】この図12に示した従来の補色カメラシス
テムの全画素独立読み出し時の輝度信号処理では、入力
画像信号に対して垂直及び水平方向のフィルタを掛けて
輝度信号を取り出し、また、同時化された水平,垂直信
号に対してフィルタを通して高域成分(サンプリング周
波数の垂直、水平1/2,1/4の高域成分)だけを抜
き出し、これらに適当なゲインを掛けてから足し合わせ
て所望のアパーチャコントロール信号(高域周波数補償
信号)を生成し、このアパーチャコントロール信号を輝
度信号に加算するようにしている。In the luminance signal processing at the time of independent reading of all pixels of the conventional complementary color camera system shown in FIG. 12, a luminance signal is extracted by applying a filter in the vertical and horizontal directions to an input image signal, and the image signal is synchronized. From the horizontal and vertical signals obtained, only high-frequency components (vertical, horizontal 1/2 and 1/4 high-frequency components of the sampling frequency) are extracted through a filter, multiplied by an appropriate gain, and added to obtain a desired value. Is generated, and this aperture control signal is added to the luminance signal.
【0024】上述したように、従来の補色カメラシステ
ムでは、2画素混合読み出し時、全画素読み出し時のど
ちらの場合も、輝度信号と平行してアパーチャコントロ
ール信号を生成し、ガンマ(γ)補正前で輝度信号にア
パーチャコントロール信号を加えて、高周波成分を持ち
上げるようにしている。As described above, in the conventional complementary color camera system, the aperture control signal is generated in parallel with the luminance signal in both of the two-pixel mixed read mode and the all-pixel read mode, and before the gamma (γ) correction. The aperture control signal is added to the luminance signal to raise the high frequency component.
【0025】[0025]
【発明が解決しようとする課題】ところで、上述した従
来の補色カメラシステムの場合、斜め方向の解像度が低
く、特に静止画像では画質の劣化として目立ちやすい傾
向にある。すなわち例えば、斜め線が階段状になる現象
が見えやすいという問題がある。However, in the case of the above-mentioned conventional complementary color camera system, the resolution in the oblique direction is low, and particularly in a still image, the image quality tends to be conspicuous as deterioration. That is, for example, there is a problem that a phenomenon in which an oblique line becomes stair-like is easily seen.
【0026】そこで、本発明はこのような状況に鑑みて
なされたものであり、水平、垂直方向の解像度のみなら
ず、斜め方向の解像度を高めることが可能な画像信号処
理装置を提供することを目的とする。The present invention has been made in view of such a situation, and an object of the present invention is to provide an image signal processing apparatus capable of increasing not only the resolution in the horizontal and vertical directions but also the resolution in the oblique direction. Aim.
【0027】[0027]
【課題を解決するための手段】本発明の画像信号処理装
置は、補色系コーティングが施された画素を配列してな
る撮像手段からの読み出し信号を処理する画像信号処理
装置であり、撮像手段からの読み出し信号に対してそれ
ぞれ近傍の他色を画素補間する補間手段を有することに
より、上述した課題を解決する。An image signal processing apparatus according to the present invention is an image signal processing apparatus for processing a read signal from an image pickup means in which pixels coated with a complementary color system are arranged, and The above-mentioned problem is solved by having an interpolating means for performing pixel interpolation of other neighboring colors for each of the readout signals.
【0028】[0028]
【発明の実施の形態】本発明の好ましい実施の形態につ
いて、図面を参照しながら説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Preferred embodiments of the present invention will be described with reference to the drawings.
【0029】図1には、本発明の画像信号処理装置の第
1の実施の形態として、図2に示すようなイエロー(Y
e)、シアン(Cy)、マゼンタ(Mg)、グリーン
(G)の補色系の2×4市松コーティングを施してなる
CCD撮像デバイスからの画像信号を処理する補色カメ
ラシステムの概略構成を示す。なお、図1の補色カメラ
システムでは、全画素読み出し時の輝度信号の高周波成
分を補償するアパーチャコントロール処理を行う例を挙
げている。FIG. 1 shows a first embodiment of an image signal processing apparatus according to the present invention.
e) shows a schematic configuration of a complementary color camera system for processing an image signal from a CCD imaging device having a 2 × 4 checkered coating of complementary colors of cyan (Cy), magenta (Mg), and green (G). Note that, in the complementary color camera system of FIG. 1, an example is described in which an aperture control process is performed to compensate for a high-frequency component of a luminance signal when reading out all pixels.
【0030】この図1において、入力端子1には、上記
図2のような補色市松コーティングされたCCDからの
補色画像信号が供給される。この補色画像信号は、1ラ
インディレイ回路2と解像度改善検出補間回路9に送ら
れる。In FIG. 1, an input terminal 1 is supplied with a complementary color image signal from a CCD having a complementary color checkered coating as shown in FIG. This complementary color image signal is sent to the one-line delay circuit 2 and the resolution improvement detection interpolation circuit 9.
【0031】当該1ラインディレイ回路2の出力は、1
ラインディレイ回路3、4、5、6、7、8に順次送ら
れる。これら1ラインディレイ回路2〜8は、それぞれ
入力された画像信号を1ライン分遅延し、各々の遅延出
力を解像度改善検出補間回路9に送る。これにより、解
像度改善検出補間回路9には、8ライン同時化された画
像信号が供給されることになる。The output of the one-line delay circuit 2 is 1
The signals are sequentially sent to the line delay circuits 3, 4, 5, 6, 7, and 8. Each of the one-line delay circuits 2 to 8 delays the input image signal by one line, and sends each delayed output to the resolution improvement detection interpolation circuit 9. As a result, the image signal synchronized with eight lines is supplied to the resolution improvement detection interpolation circuit 9.
【0032】詳細については後述するが、当該解像度改
善検出補間回路9は、解像度改善のために、8ライン同
時化された信号の相関を検出し、その検出結果に基づい
て上記8ライン同時化された信号の同一ライン内の信号
(例えばYe画素とCy画素の信号、Mg画素とG画素
の信号)を補間し、4ラインの補間信号を生成するもの
である。言い換えれば、本実施の形態の補色カメラシス
テムでは、解像度改善検出補間回路9にて4ライン分の
補間を行うために、8ライン分の1ラインディレイ回路
2〜8が必要となっている。この解像度改善検出補間回
路9から出力された4ラインの補間信号は、垂直方向ロ
ーパスフィルタ13とVフィルタ10に送られる。As will be described in detail later, the resolution improvement detection interpolation circuit 9 detects the correlation of the signal synchronized for eight lines in order to improve the resolution, and based on the detection result, the signal is synchronized for the eight lines. The signals (for example, the signals of the Ye and Cy pixels and the signals of the Mg and G pixels) in the same line of the extracted signals are interpolated to generate an interpolation signal of four lines. In other words, in the complementary color camera system of the present embodiment, the 1-line delay circuits 2 to 8 for 8 lines are required in order for the resolution improvement detection interpolation circuit 9 to perform interpolation for 4 lines. The 4-line interpolation signal output from the resolution improvement detection interpolation circuit 9 is sent to the vertical low-pass filter 13 and the V filter 10.
【0033】垂直方向ローパスフィルタ13は、解像度
改善検出補間回路9からの4ラインの補間信号から、垂
直方向の低域成分を抜き出すことで輝度信号を取り出
す。すなわち、当該垂直方向ローパスフィルタ13で
は、図2のコーティングパターンのうち、解像度改善検
出補間回路9にてYe画素にCy画素の信号を補間した
ラインと、Mg画素にG画素の信号を補間したラインの
2つのラインを加えて、Ye+Cy+Mg+G=Yの輝
度信号を生成し、同様に、解像度改善検出補間回路9に
てCy画素にYe画素の信号を補間したラインと、G画
素にMg画素の信号を補間したラインの2つのラインを
加えてYe+Cy+Mg+G=Yの輝度信号を生成す
る。この輝度信号は、加算器18、1/4Hフィルタ1
1及び1/2Hフィルタ12に送られる。The vertical low-pass filter 13 extracts a luminance signal by extracting a low-frequency component in the vertical direction from the 4-line interpolation signal from the resolution improvement detection interpolation circuit 9. That is, in the vertical low-pass filter 13, a line obtained by interpolating the signal of the Cy pixel into the Ye pixel and the line interpolating the signal of the G pixel into the Mg pixel by the resolution improvement detection interpolation circuit 9 in the coating pattern of FIG. Are added to generate a luminance signal of Ye + Cy + Mg + G = Y, and similarly, a line obtained by interpolating the signal of the Ye pixel to the Cy pixel by the resolution improvement detection interpolation circuit 9 and the signal of the Mg pixel to the G pixel A luminance signal of Ye + Cy + Mg + G = Y is generated by adding two lines of the interpolated lines. This luminance signal is supplied to an adder 18, a 1 / 4H filter 1
It is sent to the 1 and 1/2 H filters 12.
【0034】Vフィルタ10は、4ラインの補間信号か
ら、垂直方向の高域成分を抜き出し、その周波数成分を
乗算器14に送る。1/4Hフィルタ11は、輝度信号
から、サンプリング周波数の水平方向1/4の高域成分
を抜き出し、その周波数成分を乗算器15に送る。1/
2Hフィルタ12は、輝度信号から、サンプリング周波
数の水平方向1/2の高域成分を抜き出し、その周波数
成分を乗算器16に送る。The V filter 10 extracts a high-frequency component in the vertical direction from the interpolation signal of four lines, and sends the frequency component to the multiplier 14. The HH filter 11 extracts a high-frequency component in the horizontal direction の of the sampling frequency from the luminance signal, and sends the frequency component to the multiplier 15. 1 /
The 2H filter 12 extracts a high-frequency component in the horizontal direction の of the sampling frequency from the luminance signal, and sends the frequency component to the multiplier 16.
【0035】乗算器14は、Vフィルタ10からの垂直
方向の周波数成分に所定のアパーチャコントロールゲイ
ンを掛け、その出力信号を加算器17に送る。乗算器1
5は、1/4Hフィルタ11からの水平方向1/4の帯
域の周波数成分に所定のアパーチャコントロールゲイン
を掛け、その出力信号を加算器17に送る。乗算器16
は、1/2Hフィルタ12からの水平方向1/2の帯域
の周波数成分に所定のアパーチャコントロールゲインを
掛け、その出力信号を加算器17に送る。The multiplier 14 multiplies the vertical frequency component from the V filter 10 by a predetermined aperture control gain, and sends the output signal to the adder 17. Multiplier 1
5 multiplies the frequency component in the horizontal 帯 域 band from the H H filter 11 by a predetermined aperture control gain, and sends the output signal to the adder 17. Multiplier 16
Multiplies the frequency component in the horizontal 1 / band from the H H filter 12 by a predetermined aperture control gain, and sends the output signal to the adder 17.
【0036】加算器17では、乗算器14〜16の各出
力信号を加算し、アパーチャコントロール信号として出
力する。この加算器17からのアパーチャコントロール
信号は加算器18に送られる。The adder 17 adds the output signals of the multipliers 14 to 16 and outputs the result as an aperture control signal. The aperture control signal from the adder 17 is sent to the adder 18.
【0037】加算器18では、上記アパーチャコントロ
ール信号と輝度信号を加算し、これにより、当該加算器
18からは、高周波成分を補償(アパーチャコントロー
ル処理)した輝度信号が出力される。この加算器18か
ら出力された輝度信号は、ガンマ(γ)補正回路19に
送られる。The adder 18 adds the aperture control signal and the luminance signal, whereby the adder 18 outputs a luminance signal in which high-frequency components have been compensated (aperture control processing). The luminance signal output from the adder 18 is sent to a gamma (γ) correction circuit 19.
【0038】ガンマ補正回路19では、アパーチャコン
トロール処理後の輝度信号をガンマ処理し、このガンマ
補正後の輝度信号が出力端子20から出力される。In the gamma correction circuit 19, the luminance signal after the aperture control processing is gamma-processed, and the luminance signal after the gamma correction is output from the output terminal 20.
【0039】この図1に示した実施の形態の補色カメラ
システムの全画素独立読み出し時の輝度信号処理では、
解像度改善検出補間回路9にて8ライン同時化した信号
を補間して4ラインの補間信号を生成し、その4ライン
の補間信号に対して、垂直方向のフィルタを掛けて輝度
信号を取り出し、また、4ラインの補間信号をフィルタ
に通して高域成分(垂直、水平1/2,1/4の高域成
分)だけを抜き出し、これらに適当なゲインを掛けてか
ら足し合わせて所望のアパーチャコントロール信号(高
域周波数補償信号)を生成し、このアパーチャコントロ
ール信号を輝度信号に加算するようにしている。In the luminance signal processing at the time of independent reading of all pixels of the complementary color camera system of the embodiment shown in FIG.
The resolution improvement detection interpolation circuit 9 interpolates the eight lines of the signal to generate a four-line interpolation signal, applies a vertical filter to the four-line interpolation signal, and extracts a luminance signal. , A desired aperture control by extracting only high-frequency components (high-frequency components of vertical and horizontal 1/2 and 1/4) by passing a 4-line interpolation signal through a filter, multiplying them by an appropriate gain, and adding them up A signal (high frequency compensation signal) is generated, and the aperture control signal is added to the luminance signal.
【0040】すなわち、図1に示した実施の形態の補色
カメラシステムでは、同一ライン内の信号を補間(Ye
画素とCy画素、Mg画素とG画素を補間)しているの
で、水平方向のローパスフィルタが無くても、輝度信号
を得ることができる。言い換えれば、撮像デバイスに図
2のような補色市松コーティングが施されている場合、
Ye画素とCy画素とMg画素とG画素の信号を足す
(Ye+Cy+Mg+G)ことで輝度信号(Y)を生成
できるので、本実施の形態の補色カメラシステムでは、
4ラインの補間信号を垂直方向ローパスフィルタ13に
通すことによって輝度信号を得るようにしている。ま
た、水平、垂直のアパーチャコントロール信号は、従来
と同様の方法で生成することができる。That is, in the complementary color camera system of the embodiment shown in FIG. 1, signals in the same line are interpolated (Ye
Since the pixel and the Cy pixel and the Mg pixel and the G pixel are interpolated), a luminance signal can be obtained without a horizontal low-pass filter. In other words, when the complementary color checkered coating as shown in FIG. 2 is applied to the imaging device,
Since the luminance signal (Y) can be generated by adding (Ye + Cy + Mg + G) the signals of the Ye pixel, the Cy pixel, the Mg pixel, and the G pixel, the complementary color camera system according to the present embodiment includes:
The luminance signal is obtained by passing the interpolation signal of four lines through the vertical low-pass filter 13. The horizontal and vertical aperture control signals can be generated by a method similar to the conventional method.
【0041】ここで、本発明実施の形態の最も特徴的な
点は、同一ライン内の信号を補間して後段のフィルタで
ライン加算をして輝度信号を作ることにある。なお、本
実施の形態との比較として、例えばR,G,B原色系の
カメラシステムでは、Gの画素にRとBの画素を補間す
るように、一つの画素に対して全画素の色データを補間
している。Here, the most characteristic point of the embodiment of the present invention resides in that a signal in the same line is interpolated, and line addition is performed by a subsequent filter to generate a luminance signal. As a comparison with the present embodiment, for example, in a camera system of the R, G, B primary color system, the color data of all pixels is assigned to one pixel so that the R pixel and the B pixel are interpolated into the G pixel. Is interpolated.
【0042】次に、図1の補色カメラシステムの解像度
改善検出補間回路9における相関検出と補間処理につい
て、以下に説明する。Next, correlation detection and interpolation processing in the resolution improvement detection interpolation circuit 9 of the complementary color camera system of FIG. 1 will be described below.
【0043】図3及び図4には、解像度改善検出補間回
路9にて扱う画素列を示す。FIGS. 3 and 4 show a pixel array handled by the resolution improvement detection interpolation circuit 9.
【0044】解像度改善検出補間回路9は、この図3及
び図4に示す画素列のうち、Ye画素とCy画素からな
るラインについては、Ye画素に対してCy画素を補間
し、Cy画素に対してYe画素を補間する。また、G画
素とMg画素からなるラインについては、G画素に対し
てMg画素を補間し、Mg画素に対してG画素を補間す
る。The resolution improvement detection interpolation circuit 9 interpolates the Cy pixel for the Ye pixel and the Cy pixel for the line composed of the Ye pixel and the Cy pixel in the pixel rows shown in FIGS. To interpolate Ye pixels. For a line composed of a G pixel and a Mg pixel, the G pixel is interpolated for the G pixel and the G pixel is interpolated for the Mg pixel.
【0045】このような補間処理を行う場合において、
解像度改善検出補間回路9では、各画素の相関を検出
し、その相関検出結果に応じた補間処理を行う。When performing such interpolation processing,
The resolution improvement detection interpolation circuit 9 detects the correlation of each pixel and performs an interpolation process according to the correlation detection result.
【0046】実際の相関検出例として、簡単な処理例を
以下に説明する。A simple processing example will be described below as an example of actual correlation detection.
【0047】例えば、図3に示すように、Mg画素に対
してG画素を補間する場合は、先ず、相関検出のため
に、 |G1−G4| の計算を行った値(レベル)と、 |G2−G3| の計算を行った値(レベル)とを比べて、前者のレベル
が大きければ水平相関が大きく、後者のレベルが大きけ
れば垂直相関が大きく、略々等しい場合は斜め方向の相
関が大きいと判断する。For example, as shown in FIG. 3, when a G pixel is interpolated with respect to an Mg pixel, first, a value (level) obtained by calculating | G1-G4 | Compared with the value (level) obtained by calculating G2-G3 |, the horizontal correlation is large if the former level is large, the vertical correlation is large if the latter level is large, and the oblique correlation is large if the levels are almost equal. Judge as big.
【0048】また例えば、図4に示すように、Ye画素
に対してCy画素を補間する場合は、先ず、相関検出の
ために、 |(Cy1+Cy3+Cy5)/3−(Cy2+Cy4
+Cy6)/3| の計算を行った値(レベル)と、 |(Cy1+Cy2)/2−(Cy5+Cy6)/2| の計算を行った値(レベル)とを比べて、前者のレベル
が大きければ水平相関が大きく、後者のレベルが大きけ
れば垂直相関が大きく、略々等しい場合は斜め方向の相
関が大きいと判断する。For example, as shown in FIG. 4, when interpolating Cy pixels with respect to Ye pixels, first, | (Cy1 + Cy3 + Cy5) / 3- (Cy2 + Cy4) for correlation detection.
+ Cy6) / 3 | is compared with the value (level) calculated as | (Cy1 + Cy2) / 2− (Cy5 + Cy6) / 2 |, and if the former level is larger, it is horizontal. If the correlation is large and the latter level is large, it is determined that the vertical correlation is large, and if they are substantially equal, it is determined that the correlation in the oblique direction is large.
【0049】上述の相関検出をした結果に基づき、例え
ばMg画素に対してG画素を補間する場合に、水平方向
の相関が大きければ、 (G2+G3)/2 の計算により補間を行い、また、垂直方向の相関が大き
ければ、 (G1+G4)/2 の計算により補間を行い、一方、斜め方向の相関が大き
ければ、 (G1+2×G2+2×G3+G4)/6 の計算により補間を行う。Based on the result of the above correlation detection, for example, when the G pixel is interpolated with respect to the Mg pixel, if the horizontal correlation is large, the interpolation is performed by calculating (G2 + G3) / 2, and the vertical is calculated. If the correlation in the direction is large, interpolation is performed by calculating (G1 + G4) / 2, while if the correlation in the oblique direction is large, interpolation is performed by calculating (G1 + 2 × G2 + 2 × G3 + G4) / 6.
【0050】同様に、上述のような相関検出をした結果
に基づき、例えばYe画素に対してCy画素を補間する
場合に、水平方向の相関が大きければ、 (Cy3+Cy4)/2 の計算により補間を行い、また、垂直方向の相関が大き
ければ、 (Cy1+Cy2+Cy3+Cy4+Cy5+Cy6)
/6 の計算により補間を行い、一方、斜め方向の相関が大き
ければ、(Cy2+Cy5)/2 又は、(Cy1+C
y6)/2 の計算により補間を行う。Similarly, based on the result of the above-described correlation detection, for example, when the Cy pixel is interpolated with respect to the Ye pixel, if the correlation in the horizontal direction is large, the interpolation is performed by calculating (Cy3 + Cy4) / 2. If the correlation in the vertical direction is large, (Cy1 + Cy2 + Cy3 + Cy4 + Cy5 + Cy6)
/ 6, and if the correlation in the oblique direction is large, (Cy2 + Cy5) / 2 or (Cy1 + C
Interpolation is performed by calculating y6) / 2.
【0051】なお、解像度改善検出補間回路9において
は、相関検出時に更に細かく縦と横の相関比を計算する
ことにより、垂直方向、水平方向、斜め方向の3つの方
向だけでなく、更に細かい方向の補間コントロールも可
能となる。Note that the resolution improvement detection interpolation circuit 9 calculates the vertical and horizontal correlation ratios more finely at the time of correlation detection, so that not only the three directions of the vertical direction, the horizontal direction, and the oblique direction, but also the finer directions. Interpolation control is also possible.
【0052】但し、上述した相関検出に基づく補間処理
において、Mg画素に対してG画素を補間する場合の相
関検出時には、1画素だけの演算で相関の判断を行って
いるため、当該画素の信号に例えばノイズが乗っている
ような場合に誤検出する可能性が大きい。また、Ye画
素に対してCy画素を補間する場合、垂直方向の相関が
強い場合に水平方向の3画素で補間が掛かるので、解像
度の面で不利となってしまう。これはCy画素に対して
Ye画素を補間する場合や、G画素に対してMg画素を
補間する場合も同様である。したがって、相関検出に基
づく補間処理の際には、これらを考慮する必要がある。However, in the above-described interpolation processing based on the correlation detection, when the correlation is detected when the G pixel is interpolated with respect to the Mg pixel, the correlation is determined by calculating only one pixel. For example, there is a high possibility that an erroneous detection will be made when noise is present on the vehicle. In addition, when the Cy pixel is interpolated with respect to the Ye pixel, if the correlation in the vertical direction is strong, the interpolation is performed on three pixels in the horizontal direction, which is disadvantageous in terms of resolution. The same applies to the case where the Ye pixel is interpolated for the Cy pixel and the case where the Mg pixel is interpolated for the G pixel. Therefore, it is necessary to take these factors into account in the interpolation processing based on the correlation detection.
【0053】ところで、図2の補色市松コーティングパ
ターンにおけるYe、Cy、Mg、Gの各画素の分光特
性は、図5に示すようになっており、この図5に示す分
光特性例から見てわかるように、Ye画素とCy画素の
ラインは、G画素とMg画素のラインに比べて、各波長
についての感度(レスポンス)が高いことがわかる。こ
れに対して、Mg画素は緑色光に対する感度が低く、G
画素は赤色光と青色光に対する感度が低い。これらか
ら、Mg画素とG画素のラインにおいて、Mg画素に対
してG画素を、また、G画素に対してMg画素を補間す
るだけで、解像度を補正することが充分に可能であるこ
とがわかる。By the way, the spectral characteristics of the Ye, Cy, Mg, and G pixels in the complementary color checkered coating pattern of FIG. 2 are as shown in FIG. 5, which can be seen from the spectral characteristic examples shown in FIG. Thus, it can be seen that the sensitivity (response) for each wavelength is higher in the line of the Ye pixel and the Cy pixel than in the line of the G pixel and the Mg pixel. In contrast, Mg pixels have low sensitivity to green light,
Pixels have low sensitivity to red and blue light. From these, it can be seen that in the line of the Mg pixel and the G pixel, the resolution can be sufficiently corrected only by interpolating the G pixel for the Mg pixel and the Mg pixel for the G pixel. .
【0054】このような補間処理の場合は、(Ye+C
y+Mg+G)=Yの輝度信号を生成する際に、水平方
向と垂直方向の2画素を必ず加算しなければならない。
したがって、このような場合、輝度信号を生成するため
には、垂直方向ローパスフィルタだけでなく水平方向ロ
ーパスフィルタも必要になる。In the case of such interpolation processing, (Ye + C
When generating a luminance signal of (y + Mg + G) = Y, two pixels in the horizontal direction and the vertical direction must always be added.
Therefore, in such a case, in order to generate a luminance signal, not only a vertical low-pass filter but also a horizontal low-pass filter is required.
【0055】上述のようにMgとGの画素のラインだけ
に対して補間を行う場合の本発明の第2の実施の形態の
補色カメラシステムの構成例を、図6に示す。なお、こ
の図6において、図1の各構成要素と略々同じ動作を行
う各構成要素には、それぞれ同一の指示符号を付してい
る。FIG. 6 shows an example of the configuration of a complementary color camera system according to the second embodiment of the present invention in a case where interpolation is performed only on lines of Mg and G pixels as described above. Note that, in FIG. 6, the same reference numerals are given to the respective components that perform substantially the same operation as the respective components in FIG.
【0056】すなわちこの図6に示す第2の実施の形態
の補色カメラシステムと、図1に示したシステムとの相
違点は、図6の解像度改善検出補間回路21において、
図1の解像度改善検出補間回路9のように図3や図4に
示した全ての画素について補間を行うのではなく、前記
図2の補色市松コーティングパターンのG画素とMg画
素のラインだけに対して相関検出と補間処理を行うよう
にした点と、輝度信号の生成のために、垂直方向ローパ
スフィルタ13の後段に更に水平方向ローパスフィルタ
22を設けた点である。したがって、この図6の構成の
場合、1/4Hフィルタ11と1/2Hフィルタ12及
び加算器18には、当該水平方向ローパスフィルタ22
からの輝度信号が送られる。なお、この図6の解像度改
善検出補間回路21でのG画素とMg画素の補間処理の
方法は、図1の解像度改善検出補間回路9におけるG画
素とMg画素の補間処理と同じである。That is, the difference between the complementary color camera system of the second embodiment shown in FIG. 6 and the system shown in FIG. 1 is that the resolution improvement detection interpolation circuit 21 of FIG.
Instead of performing interpolation for all the pixels shown in FIGS. 3 and 4 as in the resolution improvement detection interpolation circuit 9 of FIG. 1, only the G pixel and Mg pixel lines of the complementary checkered coating pattern of FIG. And a point that a horizontal low-pass filter 22 is further provided downstream of the vertical low-pass filter 13 in order to generate a luminance signal. Therefore, in the case of the configuration shown in FIG. 6, the 1 / 4H filter 11, the 1 / 2H filter 12, and the adder 18 are added to the horizontal low-pass filter 22.
Is sent. Note that the method of interpolating the G pixel and the Mg pixel in the resolution improvement detection interpolation circuit 21 of FIG. 6 is the same as the interpolation process of the G pixel and the Mg pixel in the resolution improvement detection interpolation circuit 9 of FIG.
【0057】次に、上述した相関検出及び補間処理の際
に考慮すべき点のうち、画素の信号にノイズが乗ってい
る場合の誤検出に対処するための本発明の第3の実施の
形態の補色カメラシステムについて説明する。なお、こ
の第3の実施の形態のシステム構成については、前記図
1のシステム構成と同じであるため、その図示を省略す
る。但し、第3の実施の形態の場合、解像度改善検出補
間回路における処理内容が第1の実施の形態の場合とは
異なるため、以下の説明では、第1の実施の形態での解
像度改善検出補間回路9と区別するため、解像度改善検
出回路の指示符号として23の番号(すなわち解像度改
善検出回路23とする)を用いることにする。Next, a third embodiment of the present invention for dealing with erroneous detection when noise is present in a pixel signal among points to be considered in the above-described correlation detection and interpolation processing. Will be described. Since the system configuration of the third embodiment is the same as the system configuration of FIG. 1, the illustration is omitted. However, in the case of the third embodiment, the processing content of the resolution improvement detection interpolation circuit is different from that of the first embodiment, and therefore, in the following description, the resolution improvement detection interpolation in the first embodiment will be described. In order to distinguish it from the circuit 9, a number 23 (that is, the resolution improvement detection circuit 23) is used as an instruction code of the resolution improvement detection circuit.
【0058】図7及び図8を用いて、当該第3の実施の
形態の解像度改善検出補間回路23にて扱う相関検出用
の画素列の説明を行う。The pixel rows for correlation detection handled by the resolution improvement detection interpolation circuit 23 of the third embodiment will be described with reference to FIGS.
【0059】本実施の形態の解像度改善検出補間回路2
3では、例えば図7中の矢印にて示す範囲のG画素とM
g画素を加えた信号を相関検出用の信号として相関検出
を行い、或いは、例えば図8中の矢印にて示す範囲のY
e、Cy、Mg、Gの各画素を加えた信号を相関検出用
の信号として相関検出を行うようにしている。以下、図
7に示すようにG画素とMg画素を加えて相関検出を行
うことを第1の相関検出方法と呼び、図8に示すように
Ye、Cy、Mg、Gの各画素を加えて相関検出を行う
ことを第2の相関検出方法と呼ぶことにする。なお、こ
の第3の実施の形態において、実際の補間画素及び補間
演算については前記第1の実施の形態にて説明した簡単
な水平、垂直、斜め方向の場合と同様である。The resolution improvement detection interpolation circuit 2 of the present embodiment
3, for example, G pixels and M in the range indicated by the arrow in FIG.
The signal obtained by adding the g pixel is subjected to correlation detection as a signal for correlation detection, or, for example, Y in a range indicated by an arrow in FIG.
Correlation detection is performed using a signal obtained by adding each pixel of e, Cy, Mg, and G as a signal for correlation detection. Hereinafter, performing the correlation detection by adding the G pixel and the Mg pixel as shown in FIG. 7 is referred to as a first correlation detection method, and adding each pixel of Ye, Cy, Mg, and G as shown in FIG. Performing the correlation detection will be referred to as a second correlation detection method. In the third embodiment, the actual interpolation pixels and interpolation calculations are the same as those in the simple horizontal, vertical, and oblique directions described in the first embodiment.
【0060】ここで、当該第3に実施の形態において、
上記第1と第2の相関検出方法は共にMg画素とG画素
を扱い、これらMg画素とG画素の信号を加えて得られ
る相関検出用信号の分光特性は一致する。すなわち、前
述した実施の形態では、相関検出時に使用するG画素、
Mg画素の信号の分光特性が違うため、水平、垂直、斜
め方向の補間処理選択時のレベルもこれに伴いG画素、
Mg画素で違う設定をしなければならなかったが、当該
第3の実施の形態では、G画素とMg画素を加えるよう
にしているため、相関検出時の判断レベルを別々に設定
にする必要がない。言い換えると、この第3の実施の形
態では、図7及び図8に示したように、各画素の相関判
断時の相関検出用信号の分光特性を揃えることにより、
相関検出レベル設定を容易にすることが可能になる。Here, in the third embodiment,
Both the first and second correlation detection methods handle Mg pixels and G pixels, and the spectral characteristics of correlation detection signals obtained by adding the signals of these Mg pixels and G pixels match. That is, in the embodiment described above, the G pixel used at the time of correlation detection,
Since the spectral characteristics of the signals of the Mg pixels are different, the level at the time of selecting the interpolation processing in the horizontal, vertical, and oblique directions is accordingly changed to the G pixel,
Although different settings had to be made for the Mg pixels, in the third embodiment, since the G pixels and the Mg pixels were added, it was necessary to set the judgment level for correlation detection separately. Absent. In other words, in the third embodiment, as shown in FIGS. 7 and 8, the spectral characteristics of the correlation detection signal at the time of determining the correlation of each pixel are made uniform,
It is possible to easily set the correlation detection level.
【0061】例えば、第1の相関検出方法を例に挙げ、
水平、垂直方向だけの補間処理の選択を行う場合、その
選択は一例として以下のようになされる。例えば、 G1Ja=(Mg5+2×G1+Mg1)/4 G2Ja=(Mg6+2×G2+Mg2)/4 G3Ja=(Mg2+2×G3+Mg3)/4 G4Ja=(Mg7+2×G4+Mg4)/4 とすると、この時、相関検出のために、 |G2Ja−G3Ja|−|G1Ja−G4Ja| の計算行い、この計算結果の値が正の値であったなら
は、 Ghokan=(G1+G4)/2 の演算により垂直方向の補間とし、一方、上記相関検出
のための計算結果の値が負の値あったならば、 Ghokan=(G2+G3)/2 の演算により水平方向の補間とする。For example, taking the first correlation detection method as an example,
When selecting the interpolation processing only in the horizontal and vertical directions, the selection is performed as follows as an example. For example, G1Ja = (Mg5 + 2 × G1 + Mg1) / 4 G2Ja = (Mg6 + 2 × G2 + Mg2) / 4 G3Ja = (Mg2 + 2 × G3 + Mg3) / 4 G4Ja = (Mg7 + 2 × G4 + Mg4) / 4 At this time, for correlation detection, | G2Ja−G3Ja | − | G1Ja−G4Ja |, and if the value of the calculation result is a positive value, Ghokan = (G1 + G4) / 2 is used to perform interpolation in the vertical direction. If the value of the calculation result for detection is a negative value, horizontal interpolation is performed by the operation of Ghokan = (G2 + G3) / 2.
【0062】またさらに、Mg、Gの4つの画素値の平
均値を使って、水平、垂直だけでなく斜め方向の補間処
理を行う場合は、以下のようになされる。例えば、斜め
方向の補間値(レベル)を1つ、Jlevとして設定し、 |G1Ja−G4Ja|−|G2Ja−G3Ja|<−Jlev の関係が成り立てば、 Ghokan=(G1+G4)/2 の演算により垂直方向の補間とし、一方で、 |G1Ja−G4Ja|−|G2Ja−G3Ja|>Jlev の関係が成り立てば、 Ghokan=(G2+G3)/2 の演算により水平方向の補間とし、さらに、それら関係
のどちらも成り立たない場合は、 Ghokan=(2*(G2+G3)+(G1+G4))/6
(平均) の演算により斜め方向の補間とする。Further, in the case of performing not only horizontal and vertical interpolation but also oblique interpolation using the average value of the four pixel values of Mg and G, the following is performed. For example, one interpolated value (level) in the oblique direction is set as Jlev, and if the relationship | G1Ja−G4Ja | − | G2Ja−G3Ja | <−Jlev holds, the calculation of Ghokan = (G1 + G4) / 2 is performed. If the relationship | G1Ja−G4Ja | − | G2Ja−G3Ja |> Jlev holds, the horizontal direction interpolation is performed by the calculation of Ghokan = (G2 + G3) / 2. If not, Ghokan = (2 * (G2 + G3) + (G1 + G4)) / 6
(Average) is calculated as diagonal interpolation.
【0063】上述したように、Mg画素とG画素の信号
を加えた相関検出用信号を使用して相関検出を行い、そ
の検出結果に応じて補間処理の選択を行う、第3の実施
の形態の解像度改善検出補間回路23の具体的な構成例
を図9に示す。As described above, the third embodiment performs the correlation detection using the correlation detection signal obtained by adding the signals of the Mg pixel and the G pixel, and selects the interpolation processing according to the detection result. FIG. 9 shows a specific configuration example of the resolution improvement detection interpolation circuit 23 of FIG.
【0064】この図9において、加算器31ではG2と
G3画素の信号を加算し、加算器32ではG1とG4の
画素の信号を加算する。加算器31の加算出力は1/2
倍演算器44と2倍演算器41に送られ、加算器32の
加算出力は加算器42と1/2倍演算器46に送られ
る。1/2倍演算器44では加算器31の加算出力を1
/2倍し、2倍演算器41では加算器31の加算出力を
2倍し、1/2倍演算器46では加算器32の加算出力
を1/2倍する。加算器42では2倍演算器41の出力
と加算器32の出力とを加算し、その加算出力を1/6
演算器45に送る。1/6演算器45では加算器42の
加算出力を1/6倍する。1/2倍演算器44と、1/
6倍演算器45と、1/2演算器46の各出力は、それ
ぞれ選択器47に送られる。In FIG. 9, an adder 31 adds signals of G2 and G3 pixels, and an adder 32 adds signals of G1 and G4 pixels. The addition output of the adder 31 is 2
The added output from the adder 32 is sent to the adder 42 and the 倍 -fold calculator 46. The 1 / multiplication unit 44 calculates the addition output of the adder 31 as 1
The doubling calculator 41 doubles the added output of the adder 31, and the 倍 calculator 46 doubles the added output of the adder 32. The adder 42 adds the output of the doubling calculator 41 and the output of the adder 32, and divides the added output by 1/6.
It is sent to the arithmetic unit 45. The 1/6 arithmetic unit 45 multiplies the addition output of the adder 42 by 1/6.倍 multiplication unit 44, 1 /
The outputs of the sixfold calculator 45 and the 1/2 calculator 46 are sent to the selector 47, respectively.
【0065】また、加算器33ではG1とMg1とMg
5画素の信号を加算してその加算結果を減算器37に送
り、加算器34ではG4とMg4とMg7画素の信号を
加算してその加算結果を減算器37に送る。加算器35
ではG2とMg2とMg6画素の信号を加算してその加
算結果を減算器38に送り、加算器36ではG3とMg
2とMg3画素の信号を加算してその加算結果を減算器
38に送る。減算器37では加算器33と34の加算出
力の差分を求めてその差分結果を絶対値化器39に送
り、減算器38では加算器35と36の加算出力の差分
を求めてその差分結果を絶対値化器40に送る。絶対値
化器39では減算器37の減算出力の絶対値を求めてそ
の絶対値出力を減算器43に送り、絶対値化器40では
減算器38の減算出力の絶対値を求めてその絶対値出力
を減算器43に送る。当該減算器43では、絶対値化器
39と40の絶対値出力の差分を求めてその差分結果を
比較器48に送る。また、当該比較器48には、前記斜
め方向の補間値(レベル)として設定した値Jlevが送
られ、これらの比較結果が選択器47に送られる。In the adder 33, G1, Mg1, Mg
The signals of the five pixels are added and the result of the addition is sent to the subtractor 37. The adder 34 adds the signals of the G4, Mg4 and Mg7 pixels and sends the addition result to the subtractor 37. Adder 35
Then, the signals of the G2, Mg2, and Mg6 pixels are added, and the addition result is sent to a subtractor 38.
2 and the signal of the Mg3 pixel are added, and the addition result is sent to the subtractor 38. The subtractor 37 calculates the difference between the addition outputs of the adders 33 and 34 and sends the difference result to the absolute value converter 39. The subtractor 38 calculates the difference between the addition outputs of the adders 35 and 36 and calculates the difference result. It is sent to the absolute value converter 40. The absolute value generator 39 calculates the absolute value of the subtraction output of the subtractor 37 and sends the absolute value output to the subtractor 43. The absolute value generator 40 calculates the absolute value of the subtraction output of the subtractor 38 and calculates the absolute value. The output is sent to the subtractor 43. The subtracter 43 calculates the difference between the absolute value outputs of the absolute value converters 39 and 40 and sends the difference result to the comparator 48. The value Jlev set as the oblique interpolation value (level) is sent to the comparator 48, and the comparison result is sent to the selector 47.
【0066】選択器47では、比較器48からの比較結
果に応じて、1/2倍演算器44と1/6倍演算器45
と1/2演算器46の各出力の何れかを選択し、この選
択出力が補間値Gとして出力される。In the selector 47, according to the comparison result from the comparator 48, the 倍 multiplication unit 44 and the 6 multiplication unit 45
And any one of the outputs of the 1/2 arithmetic unit 46 are selected, and the selected output is output as the interpolation value G.
【0067】この図9の例のように、解像度改善検出補
間回路23を、水平方向と垂直方向の相関の差分をその
レベルから補間方向を選ぶような回路構成にすれば、小
規模な回路での補間が実現可能となる。As shown in the example of FIG. 9, if the resolution improvement detection interpolation circuit 23 is configured to select the interpolation direction from the level of the difference between the correlation in the horizontal direction and the correlation in the vertical direction, a small-scale circuit can be used. Interpolation can be realized.
【0068】その他の例として、上記例の様に、水平方
向、垂直方向、斜め方向での3つの補間だけでなく、更
に細かい補間を行うためには、得られた水平方向、垂直
方向の相関データ比を取り、その結果から垂直方向、水
平方向の加算割合を決定する方法等が考えられる。As another example, in order to perform not only three interpolations in the horizontal direction, the vertical direction, and the diagonal direction as in the above example, but also to perform a finer interpolation, the obtained correlations in the horizontal direction and the vertical direction are obtained. A method of determining the data ratio and determining the addition ratio in the vertical direction and the horizontal direction from the result may be considered.
【0069】図10には、このように更に細かい補間を
行う場合の、解像度改善検出回路の構成例を示す。な
お、この図10の各構成要素のうち、図9と同じ構成要
素にはそれぞれ同一の指示符号を付してその説明は省略
する。FIG. 10 shows an example of the configuration of a resolution improvement detection circuit in the case where finer interpolation is performed as described above. Note that among the components in FIG. 10, the same components as those in FIG. 9 are denoted by the same reference numerals, and description thereof will be omitted.
【0070】この図10において、加算器31からの加
算出力は水平方向の補間値Ghとして乗算器53に送ら
れ、加算器32の加算出力は垂直方向の補間値Gvとし
て乗算器54に送られる。In FIG. 10, the addition output from the adder 31 is sent to a multiplier 53 as a horizontal interpolation value Gh, and the addition output of the adder 32 is sent to a multiplier 54 as a vertical interpolation value Gv. .
【0071】また、絶対値化器39からの絶対値出力D
iffVは除算器52と加算器51に送られ、絶対値化器4
0からの絶対値出力DiffHは加算器51に送られる。加
算器51では絶対値出力DiffVと絶対値出力DiffHを加
算しその加算出力(DiffV+DiffH)を除算器52に送
る。除算器52では絶対値化器39からの絶対値出力D
iffVを加算器51からの加算出力(DiffV+DiffH)で
除算し、その除算値α=(DiffV/(DiffV+Diff
H))と1−αの値を出力する。除算値αは乗算器53
に送られ、値(1−α)は乗算器54に送られる。The absolute value output D from the absolute value generator 39
iffV is sent to the divider 52 and the adder 51, and the absolute value
The absolute value output DiffH from 0 is sent to the adder 51. The adder 51 adds the absolute value output DiffV and the absolute value output DiffH, and sends the added output (DiffV + DiffH) to the divider 52. The divider 52 outputs an absolute value output D from the absolute value generator 39.
iffV is divided by the addition output (DiffV + DiffH) from the adder 51, and the divided value α = (DiffV / (DiffV + Diff)
H)) and outputs the value of 1-α. The division value α is a multiplier 53
, And the value (1−α) is sent to the multiplier 54.
【0072】乗算器53では加算器31からの補間値G
hと除算器52からの除算値αを乗算し、してその乗算
出力(α×Gh)を加算器55に送り、乗算器54では
加算器32からの補間値Gvと除算器52からの値(1
−α)を乗算してその乗算出力(1−α)Gvを加算器
55に送る。加算器55では、乗算器53からの乗算出
力(α×Gh)と乗算器54からの乗算出力(1−α)
Gvを加算する。この加算器55の加算出力(α×Gh+
(1−α)Gv)が補間値Gとして出力される。In the multiplier 53, the interpolation value G from the adder 31 is calculated.
h is multiplied by the division value α from the divider 52, and the multiplied output (α × Gh) is sent to the adder 55. The multiplier 54 interpolates the interpolated value Gv from the adder 32 and the value from the divider 52. (1
-Α) and sends the multiplied output (1-α) Gv to the adder 55. In the adder 55, the multiplication output (α × Gh) from the multiplier 53 and the multiplication output (1-α) from the multiplier 54
Add Gv. The addition output of this adder 55 (α × Gh +
(1-α) Gv) is output as the interpolation value G.
【0073】なお、第2の相関検出方法における画素選
択の場合も、図8で示されているYe、Cy、Mg、G
の各画素の加算結果から、上記例と同様に判断、処理す
れば補間検出と補間処理が実現できる。It should be noted that the pixel selection in the second correlation detection method also applies to Ye, Cy, Mg, G shown in FIG.
If the determination and processing are performed in the same manner as in the above example from the addition result of each pixel, interpolation detection and interpolation processing can be realized.
【0074】上述したように、本実施の形態の補色カメ
ラシステムにおいては、補色系コーティングが施された
画素配列のCCD等の撮像デバイスからの読み出し信号
に対して、近辺の他色を画素補間することにより、輝度
信号の解像度を改善することが可能となっている。ま
た、近辺の他色を画素補間する時に、全画素でなく一部
の画素に対して画素補間することにより、解像度を改善
することができる。As described above, in the complementary color camera system according to the present embodiment, in response to a read signal from an image pickup device such as a CCD having a pixel array provided with a complementary color system coating, pixel interpolation of other nearby colors is performed. This makes it possible to improve the resolution of the luminance signal. In addition, when performing pixel interpolation for other colors in the vicinity, the resolution can be improved by performing pixel interpolation on some pixels instead of all pixels.
【0075】本実施の形態の補色カメラシステムにおい
ては、Ye、Cy、Mg、G(2×4)補色市松画素配
列の撮像デバイスからの全画素独立読み出し信号に対し
て、Mg、G画素に対してだけ画素補間することによ
り、解像度の改善をすることができる。また、画素補間
する場合に、補間すべき色の情報だけでなく、幾つかの
他色の画素情報を用いて補間検出を行うことにより、精
度の良い補間検出をすることができる。さらに、画素補
間する場合に、Ye、Cy、Mg、Gの全画素情報を用
いて補間検出を行うことにより、誤差検出が無く精度の
良い補間検出をすることができる。In the complementary color camera system of the present embodiment, the Ye, Cy, Mg, G (2 × 4) complementary color checker pixel array is used for all pixel independent read signals from the imaging device, and for the Mg, G pixels. The resolution can be improved by interpolating the pixels only once. In addition, when performing pixel interpolation, accurate interpolation detection can be performed by performing interpolation detection using not only information on the color to be interpolated but also pixel information on some other colors. Further, when performing pixel interpolation, by performing interpolation detection using all pixel information of Ye, Cy, Mg, and G, accurate error detection can be performed without error detection.
【0076】本実施の形態の補色カメラシステムにおい
ては、補色市松画素配列の撮像デバイスからの読み出し
信号に対して補間検出を行う場合、水平方向、垂直方向
の画素レベル差分の大小関係を用いて補間方法を決定す
ることにより、少ない回路規模で精度の良い補間ができ
る。In the complementary color camera system of this embodiment, when performing interpolation detection on a read signal from an imaging device having a complementary color checkerboard pixel array, interpolation is performed using the magnitude relation of the pixel level differences in the horizontal and vertical directions. By determining the method, accurate interpolation can be performed with a small circuit scale.
【0077】上記の様に、本実施の形態の補色カメラシ
ステムによれば、補色市松画素配列の撮像デバイスに対
して処理を行うことにより、1個の補色市松CCDから
2画素混合、全画素の両読み出し方式それぞれに対し
て、最適な信号処理対応ができる。例えば、動画の時は
2画素混合読み出しで信号処理を行い、静止画の時は全
画素独立読み出しで信号処理するような場合、それぞれ
に最適な信号処理が一つのシステムで実現できる。As described above, according to the complementary color camera system of the present embodiment, by processing the image pickup device having the complementary color checkerboard pixel array, two pixels are mixed from one complementary color checker CCD and all pixels are mixed. Optimal signal processing can be performed for each of the two readout methods. For example, in the case where signal processing is performed by two-pixel mixed readout for a moving image and signal processing is performed for all pixels independently for a still image, optimal signal processing can be realized by one system.
【0078】[0078]
【発明の効果】以上の説明で明らかなように、本発明に
おいては、撮像手段からの読み出し信号に対してそれぞ
れ近傍の他色を画素補間することにより、輝度信号の解
像度を改善することができ、したがって水平、垂直方向
の解像度のみならず、斜め方向の解像度を高めることが
可能になる。また、撮像手段からの読み出し信号に対し
てそれぞれ近傍の他色を画素補間するとき、一部の画素
に対して画素補間を行うことにより、解像度を改善する
ことができる。As is apparent from the above description, in the present invention, the resolution of the luminance signal can be improved by interpolating the neighboring signals with the readout signal from the image pickup means. Therefore, it is possible to increase the resolution not only in the horizontal and vertical directions but also in the diagonal direction. In addition, when performing pixel interpolation of other neighboring colors with respect to the readout signal from the imaging unit, the resolution can be improved by performing pixel interpolation on some of the pixels.
【0079】また、本発明においては、撮像手段は格子
状に配列された各画素に対してイエロー、シアン、マゼ
ンタ、グリーンの補色系コーティングが市松状に施され
てなり、撮像手段からの全画素独立の読み出し信号に対
して、マゼンタ、グリーンの画素に対してのみ画素補間
を行うことにより、解像度の改善をすることができる。
または、撮像手段からの全画素独立の読み出し信号に対
して画素補間をする際に、補間すべき色の情報と同時に
複数の他色の画素の情報を用いて補間検出を行うことに
より、精度の良い補間検出をすることができる。或い
は、撮像手段からの全画素独立の読み出し信号に対して
画素補間をする際に、イエロー、シアン、マゼンタ、グ
リーンの全画素情報を用いて補間検出を行うことによ
り、誤差検出が無く精度の良い補間検出をすることがで
きる。Further, in the present invention, the image pickup means has a checkerboard-like coating of complementary colors of yellow, cyan, magenta, and green for each pixel arranged in a grid pattern. By performing pixel interpolation only on the magenta and green pixels for the independent readout signal, the resolution can be improved.
Alternatively, when pixel interpolation is performed on a readout signal independent of all pixels from the imaging unit, interpolation detection is performed by using information of pixels of a plurality of other colors simultaneously with information of a color to be interpolated. Good interpolation detection can be performed. Alternatively, when pixel interpolation is performed on all pixel-independent readout signals from the imaging unit, interpolation detection is performed using all pixel information of yellow, cyan, magenta, and green, so that there is no error detection and high accuracy. Interpolation detection can be performed.
【0080】さらに、本発明においては、補間検出を行
う際に、水平方向、垂直方向の画素レベル差分の大小関
係を用いて補間方法を決定することにより、少ない回路
規模で精度の良い補間ができる。Further, in the present invention, when performing interpolation detection, the interpolation method is determined by using the magnitude relation between the pixel level differences in the horizontal direction and the vertical direction, so that accurate interpolation can be performed with a small circuit scale. .
【0081】このようなことから、本発明によれば、撮
像手段からの2画素混合読み出し方式、或いは全画素の
両読み出し方式のそれぞれに対して、最適な信号処理対
応ができ、したがって、例えば動画の時には2画素混合
読み出しで信号処理を行い、例えば静止画の時には全画
素独立読み出しで信号処理するようなことができ、それ
ぞれに最適な信号処理を一つのシステムで実現可能であ
る。From the above, according to the present invention, it is possible to optimally cope with the signal processing for each of the two-pixel mixed readout method from the image pickup means or both readout methods for all pixels. In the case of (1), signal processing is performed by two-pixel mixed reading, and, for example, in the case of a still image, signal processing can be performed by all-pixel independent reading, and optimal signal processing can be realized by one system.
【図1】本発明の第1,第3の実施の形態の補色カメラ
システムの概略構成を示すブロック回路図である。FIG. 1 is a block circuit diagram illustrating a schematic configuration of a complementary color camera system according to first and third embodiments of the present invention.
【図2】全画素独立読み出しコーティングパターンの例
を示す図である。FIG. 2 is a diagram illustrating an example of an all-pixel independent readout coating pattern.
【図3】解像度改善検出補間回路にて扱う画素列を示
し、Mg画素に対してG画素を補間する場合の相関検出
の説明に用いる図である。FIG. 3 is a diagram illustrating a pixel row handled by a resolution improvement detection interpolation circuit, which is used to explain correlation detection when a G pixel is interpolated with respect to a Mg pixel.
【図4】解像度改善検出補間回路にて扱う画素列を示
し、Ye画素に対してCy画素を補間する場合の相関検
出の説明に用いる図である。FIG. 4 is a diagram illustrating a pixel row handled by a resolution improvement detection interpolation circuit, which is used for explaining correlation detection when a Cy pixel is interpolated with a Ye pixel.
【図5】補色コーティング分光特性例を示す特性図であ
る。FIG. 5 is a characteristic diagram showing an example of spectral characteristics of a complementary color coating.
【図6】本発明の第2の実施の形態の補色カメラシステ
ムの概略構成を示すブロック回路図である。FIG. 6 is a block circuit diagram illustrating a schematic configuration of a complementary color camera system according to a second embodiment of the present invention.
【図7】第1の相関検出方法の説明に用いる図である。FIG. 7 is a diagram used for describing a first correlation detection method.
【図8】第2の相関検出方法の説明に用いる図である。FIG. 8 is a diagram used to explain a second correlation detection method.
【図9】Mg画素とG画素の信号を加えた相関検出用信
号で相関検出を行い、その検出結果に応じて補間処理の
選択を行う、第3の実施の形態の解像度改善検出補間回
路の具体的な構成例を示す回路図である。FIG. 9 is a diagram of a resolution improvement detection interpolation circuit according to a third embodiment, which performs correlation detection using a correlation detection signal obtained by adding signals of Mg pixels and G pixels, and selects an interpolation process according to the detection result. FIG. 3 is a circuit diagram illustrating a specific configuration example.
【図10】水平、垂直、斜め方向での3つの補間だけで
なく、更に細かい補間を行う場合の解像度改善検出回路
の構成例を示す回路図である。FIG. 10 is a circuit diagram showing a configuration example of a resolution improvement detection circuit when performing not only three interpolations in the horizontal, vertical, and oblique directions but also finer interpolations.
【図11】従来の補色カメラシステムにおける2画素混
合読み出し時の輝度信号処理の構成例を示すブロック回
路図である。FIG. 11 is a block circuit diagram showing a configuration example of luminance signal processing at the time of two-pixel mixed reading in a conventional complementary color camera system.
【図12】従来の補色カメラシステムにおける全画素独
立読み出し時の輝度信号処理の構成例を示すブロック回
路図である。FIG. 12 is a block circuit diagram showing a configuration example of luminance signal processing at the time of independent reading of all pixels in a conventional complementary color camera system.
【符号の説明】 1 入力端子、 2〜8 1ラインディレイ回路、
9,21,23 解像度改善検出補間回路、 10 V
フィルタ、 11 1/4Hフィルタ、 121/2H
フィルタ、 13 垂直方向ローパスフィルタ、 14
〜16 乗算器、 17,18 加算器、 19 ガン
マ補正回路、 20 出力端子、 22水平方向ローパ
スフィルタ[Explanation of Signs] 1 input terminal, 2 to 8 1 line delay circuit,
9,21,23 Resolution improvement detection interpolation circuit, 10 V
Filter, 11 1 / 4H filter, 121 / 2H
Filter, 13 Vertical low-pass filter, 14
~ 16 multiplier, 17,18 adder, 19 gamma correction circuit, 20 output terminal, 22 horizontal low-pass filter
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C065 AA01 BB10 BB12 BB48 CC01 DD02 DD17 EE05 EE07 EE08 GG01 GG02 GG13 GG21 GG22 GG23 ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C065 AA01 BB10 BB12 BB48 CC01 DD02 DD17 EE05 EE07 EE08 GG01 GG02 GG13 GG21 GG22 GG23
Claims (7)
列してなる撮像手段からの読み出し信号を処理する画像
信号処理装置において、 上記撮像手段からの読み出し信号に対して、それぞれ近
傍の他色を画素補間する補間手段を有することを特徴と
する画像信号処理装置。1. An image signal processing apparatus for processing a read signal from an image pickup means comprising pixels arrayed with complementary color-based coatings, the read signal from the image pickup means being provided with other colors adjacent thereto. An image signal processing device comprising an interpolating unit for interpolating pixels.
み出し信号に対してそれぞれ近傍の他色を画素補間する
とき、一部の画素に対して画素補間を行うことを特徴と
する請求項1記載の画像信号処理装置。2. The apparatus according to claim 1, wherein said interpolation means performs pixel interpolation on some of the pixels when performing pixel interpolation of neighboring other colors with respect to the readout signal from said imaging means. The image signal processing device according to any one of the preceding claims.
画素に対してイエロー、シアン、マゼンタ、グリーンの
補色系コーティングが市松状に施されてなり、 上記補間手段は、当該撮像手段からの全画素独立の読み
出し信号に対して、マゼンタ、グリーンの画素に対して
のみ画素補間を行うことを特徴とする請求項1記載の画
像信号処理装置。3. The image pickup means includes a checkerboard-like coating of complementary colors of yellow, cyan, magenta, and green for each pixel arranged in a grid pattern. 2. The image signal processing apparatus according to claim 1, wherein pixel interpolation is performed only on magenta and green pixels for the readout signal independent of all pixels.
画素に対してイエロー、シアン、マゼンタ、グリーンの
補色系コーティングが市松状に施されてなり、 上記補間手段は、上記撮像手段からの全画素独立の読み
出し信号に対して画素補間をする際に、補間すべき色の
情報と同時に複数の他色の画素の情報を用いて補間検出
を行うことを特徴とする請求項1記載の画像信号処理装
置。4. The image pickup means includes a checkerboard-like complementary color coating of yellow, cyan, magenta, and green applied to each pixel arranged in a lattice. 2. A pixel according to claim 1, wherein when performing pixel interpolation on the readout signal independent of all pixels, information on a color to be interpolated and information on a plurality of other color pixels are used at the same time. Image signal processing device.
画素に対してイエロー、シアン、マゼンタ、グリーンの
補色系コーティングが市松状に施されてなり、 上記補間手段は、上記撮像手段からの全画素独立の読み
出し信号に対して画素補間をする際に、イエロー、シア
ン、マゼンタ、グリーンの全画素情報を用いて補間検出
を行うことを特徴とする請求項1記載の画像信号処理装
置。5. The image pickup means includes a checkerboard-shaped complementary color coating of yellow, cyan, magenta, and green applied to each pixel arranged in a grid pattern. 2. The image signal processing apparatus according to claim 1, wherein when performing pixel interpolation on the readout signal independent of all pixels, interpolation detection is performed using all pixel information of yellow, cyan, magenta, and green.
に、水平方向、垂直方向の画素レベル差分の大小関係を
用いて補間方法を決定することを特徴とする請求項4記
載の画像信号処理装置。6. An image signal according to claim 4, wherein said interpolation means determines an interpolation method using a magnitude relation between pixel level differences in horizontal and vertical directions when performing said interpolation detection. Processing equipment.
に、水平方向、垂直方向の画素レベル差分の大小関係を
用いて補間方法を決定することを特徴とする請求項5記
載の画像信号処理装置。7. The image signal according to claim 5, wherein, when performing the interpolation detection, the interpolation means determines an interpolation method using a magnitude relationship between pixel level differences in a horizontal direction and a vertical direction. Processing equipment.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10272138A JP2000102024A (en) | 1998-09-25 | 1998-09-25 | Image signal processor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10272138A JP2000102024A (en) | 1998-09-25 | 1998-09-25 | Image signal processor |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2000102024A true JP2000102024A (en) | 2000-04-07 |
Family
ID=17509626
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP10272138A Withdrawn JP2000102024A (en) | 1998-09-25 | 1998-09-25 | Image signal processor |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2000102024A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003032693A (en) * | 2001-07-11 | 2003-01-31 | Matsushita Electric Ind Co Ltd | Imaging apparatus |
KR100627706B1 (en) | 2003-06-18 | 2006-09-25 | 샤프 가부시키가이샤 | Data processing apparatus, image processing apparatus, camera, and data processing method |
JP2007312439A (en) * | 2007-08-31 | 2007-11-29 | Matsushita Electric Ind Co Ltd | Solid-state image pick-up device |
-
1998
- 1998-09-25 JP JP10272138A patent/JP2000102024A/en not_active Withdrawn
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003032693A (en) * | 2001-07-11 | 2003-01-31 | Matsushita Electric Ind Co Ltd | Imaging apparatus |
JP4654545B2 (en) * | 2001-07-11 | 2011-03-23 | パナソニック株式会社 | Single-plate color imaging device |
KR100627706B1 (en) | 2003-06-18 | 2006-09-25 | 샤프 가부시키가이샤 | Data processing apparatus, image processing apparatus, camera, and data processing method |
JP2007312439A (en) * | 2007-08-31 | 2007-11-29 | Matsushita Electric Ind Co Ltd | Solid-state image pick-up device |
JP4536762B2 (en) * | 2007-08-31 | 2010-09-01 | パナソニック株式会社 | Solid-state imaging device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8144221B2 (en) | Image sensor apparatus and methods employing unit pixel groups with overlapping green spectral content | |
WO1999004555A2 (en) | Color sample interpolation | |
JP2000165893A (en) | Image processor | |
JP2942903B2 (en) | Digital camera signal processor | |
KR920001009B1 (en) | Image pickup apparatus | |
JP4212134B2 (en) | Image signal processing device | |
JP4548390B2 (en) | Imaging apparatus and signal processing method | |
JP4451044B2 (en) | Hybrid pixel interpolation device and hybrid pixel interpolation method | |
JPH11313338A (en) | Signal processor and photographing signal processing method | |
JP4320807B2 (en) | Camera signal processing apparatus and camera signal processing method | |
JP2000102024A (en) | Image signal processor | |
JP3576600B2 (en) | Color imaging device | |
JP4269367B2 (en) | Camera signal processing apparatus and camera signal processing method | |
JP4284960B2 (en) | Image signal processing device | |
JP4269366B2 (en) | Camera signal processing apparatus and camera signal processing method | |
JP4122082B2 (en) | Signal processing apparatus and processing method thereof | |
JPH11220749A (en) | Camera signal processor and camera signal processing method | |
JPH10108208A (en) | Method for enhancing contour of image pickup output of solid-state image pickup element | |
JPH10126795A (en) | Fault correcting device of color image pickup device | |
JP4269369B2 (en) | Camera signal processing apparatus and camera signal processing method | |
JP4269368B2 (en) | Camera signal processing apparatus and camera signal processing method | |
JPH08256343A (en) | Video signal processor | |
US6373532B1 (en) | Method and apparatus for processing image data | |
JP2000308073A (en) | Image pickup element, picture signal processor, and camera device | |
JP4273546B2 (en) | Camera signal processing apparatus and camera signal processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20060110 |