KR0137232B1 - Still digital camera - Google Patents

Still digital camera

Info

Publication number
KR0137232B1
KR0137232B1 KR1019970020687A KR19970020687A KR0137232B1 KR 0137232 B1 KR0137232 B1 KR 0137232B1 KR 1019970020687 A KR1019970020687 A KR 1019970020687A KR 19970020687 A KR19970020687 A KR 19970020687A KR 0137232 B1 KR0137232 B1 KR 0137232B1
Authority
KR
South Korea
Prior art keywords
signal
recording
digital video
pixel
video signal
Prior art date
Application number
KR1019970020687A
Other languages
Korean (ko)
Inventor
히로시 사쿠라이
히로야스 오츠보
고지 아사다
마사루 노다
노리유키 이우라
다큐야 이마이데
쥰지 가미무라
히로유키 고마츠
도시로 기누가사
Original Assignee
가나이 츠토무
히다치세사큐쇼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP33139392A external-priority patent/JP3288776B2/en
Priority claimed from JP4339975A external-priority patent/JPH06189256A/en
Priority claimed from KR1019930026802A external-priority patent/KR0125108B1/en
Application filed by 가나이 츠토무, 히다치세사큐쇼 주식회사 filed Critical 가나이 츠토무
Priority to KR1019970020687A priority Critical patent/KR0137232B1/en
Application granted granted Critical
Publication of KR0137232B1 publication Critical patent/KR0137232B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00Details of colour television systems
    • H04N2209/04Picture signal generators
    • H04N2209/041Picture signal generators using solid-state devices
    • H04N2209/042Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
    • H04N2209/046Colour interpolation to calculate the missing colour values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00Details of colour television systems
    • H04N2209/04Picture signal generators
    • H04N2209/041Picture signal generators using solid-state devices
    • H04N2209/048Picture signal generators using solid-state devices having several pick-up sensors
    • H04N2209/049Picture signal generators using solid-state devices having several pick-up sensors having three pick-up sensors

Abstract

컴퓨터 등의 화상입력수단에 적합한 정지화상 기록 디지탈카메라에 관한 것으로, 색신호의 수직해상도의 저하가 적고, 고화질의 프레임 스틸화상이 얻어지는 촬상장치를 실현할 수 있음과 동시에 동작을 전환하는 것에 의해서 움직임 화상도 처리할 수 있도록 하기 위해, 입사광을 차단할 수 있는 광량제한수단, 입사광을 광전변화하는 화소를 갖고 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로 및 촬상수단 또는 신호처리회로에서 출력되는 정지화상의 디지탈 영상신호를 기록하는 기록수단을 포함하는 구성으로 하였다.The present invention relates to a still image recording digital camera suitable for an image input means such as a computer, which realizes an image pickup device which obtains a low resolution of a vertical color signal and obtains a high-quality frame still image, and also changes a motion image by switching operations. A light quantity limiting means capable of blocking incident light, an imaging means having a pixel for photoelectrically changing the incident light and outputting a signal of the pixel as a digital video signal, a signal processing circuit for generating a digital video signal of a predetermined format, And a recording means for recording a digital video signal of a still image output from the imaging means or the signal processing circuit.

이와 같은 디지탈카메라를 사용하는 것에 의해, 저렴한 영상입력수단을 공급할 수 있고, 또 색신호의 수직해상도의 저하가 적고 고화질의 프레임 스틸화상이 얻어지는 촬상장치를 실현할 수 있음과 동시에, 동작을 전환하는 것에 의해서 움직임 화상도 처리할 수 있다는 효과가 얻어진다.By using such a digital camera, it is possible to supply an inexpensive video input means, and to realize an image pickup device in which the vertical resolution of a color signal is reduced and a high-quality frame still image is obtained. The effect that a moving image can also be processed is obtained.

Description

정지화상기록 디지탈 카메라Still image recording digital camera

도1은 본 발명의 1실시예를 도시한 블럭도,1 is a block diagram showing an embodiment of the present invention;

도 2는 촬상소자의 구성도,2 is a configuration diagram of an image pickup device;

도 3은 촬상소자의 구동펄스와 그 출력을 도시한 도면,3 is a diagram showing a driving pulse of the imaging device and its output;

도 4는 촬상소자의 구동펄스와 그 출력을 도시한 도면,4 is a diagram showing a driving pulse of the imaging device and its output;

도 5는 신호처리회로의 구성도,5 is a configuration diagram of a signal processing circuit;

도 6은 매트릭스회로의 구체적인 예를 도시한 도면,6 shows a specific example of the matrix circuit;

도 7a, 도 7b 및 도 7c는 움직임화상 촬상시의 신호처리의 구체적인 예를 도시한 도면,7A, 7B and 7C show concrete examples of signal processing at the time of motion image pickup;

도 8a, 도 8b 및 도 8c는 움직임화상 촬상시의 신호처리의 구체적인 예를 도시한 도면,8A, 8B and 8C show concrete examples of signal processing at the time of motion image pickup;

도 9a, 도 9b 및 도 9c는 정지화상 촬상시의 신호처리의 구체적인 예를 도시한 도면,9A, 9B and 9C show concrete examples of signal processing at the time of still image pick-up;

도 10a, 도 10b 및 도 10c는 정지화상 촬상시의 신호처리의 구체적인 예를 도시한 도면,10A, 10B and 10C show specific examples of signal processing at the time of still image pick-up;

도 11a, 도 11b 및 도 11c 및 11d는 샘플링회로의 구체적인 예를 도시한 도면,11A, 11B and 11C and 11D show specific examples of the sampling circuits,

도 12는 본 발명의 다른 실시예를 도시한 블럭도,12 is a block diagram showing another embodiment of the present invention;

도 13a 및 도 13b는 도 12에 도시한 실시예의 설명도,13A and 13B are explanatory diagrams of the embodiment shown in FIG. 12;

도 14는 본 발명의 다른 실시예의 블럭도,14 is a block diagram of another embodiment of the present invention;

도 15는 본 발명의 다른 실시예의 블럭도,15 is a block diagram of another embodiment of the present invention;

도 16은 각 보색을 생성하는 보간방법의 설명도,16 is an explanatory diagram of an interpolation method for generating each complementary color;

도 17은 색보간회로의 하나의 구체적인 예를 도시한 도면,17 is a diagram showing one specific example of a color interpolation circuit;

도 18은 본 발명의 다른 실시예의 블럭도,18 is a block diagram of another embodiment of the present invention;

도 19는 수직 5라인에서 각 보색을 생성하는 보간방법의 설명도,19 is an explanatory diagram of an interpolation method for generating each interpolation color in five vertical lines;

도 20는 본 발명의 또 다른 실시예의 블럭도,20 is a block diagram of another embodiment of the present invention;

도 21은 적응색 처리회로의 하나의 구체적인 예를 도시한 도면,21 is a diagram showing one specific example of an adaptive color processing circuit;

도 22는 기준신호 생성회로의 하나의 구체적인 예를 도시한 도면,22 is a diagram showing one specific example of a reference signal generation circuit;

도 23는 계수합성회로의 하나의 구체적인 예를 도시한 도면,23 shows one specific example of the coefficient combining circuit;

도 24는 본 발명의 또 다른 실시예의 블럭도,24 is a block diagram of another embodiment of the present invention;

도 25는 본 발명의 다른 실시예의 블럭도,25 is a block diagram of another embodiment of the present invention;

도 26는 도 31에 도시한 실시예의 설명도,FIG. 26 is an explanatory diagram of the embodiment shown in FIG. 31;

도 27은 화이트 밸런스회로의 구성도,27 is a configuration diagram of a white balance circuit;

도 28a, 도 28b 및 도 28c는 신호출력의 구체적인 예를 도시한 도면,28A, 28B and 28C show specific examples of signal output;

도 29a, 도 29b는 신호출력의 구체적인 예를 도시한 도면,29A and 29B show specific examples of signal output;

도 30a, 도 30b는 신호출력의 구체적인 예를 도시한 도면,30A and 30B show specific examples of signal output;

도 31은 본 발명의 실시예를 도시한 블럭도,31 is a block diagram showing an embodiment of the present invention;

도 32는 본 발명의 실시예를 관한 신호의 공간분포도,32 is a spatial distribution diagram of a signal according to an embodiment of the present invention;

도 33은 본 발명의 실시예를 관한 촬상소자의 출력신호의 타이밍도,33 is a timing diagram of an output signal of the image pickup device according to the embodiment of the present invention;

도 34는 본 발명의 실시예를 관한 독립 리드시의 신호포맷도,34 is a signal format diagram at the time of independent read according to the embodiment of the present invention;

도 35는 본 발명의 실시예를 관한 비선형 입출력특성을 도시한 도면,35 is a view showing nonlinear input / output characteristics according to an embodiment of the present invention;

도 36은 본 발명의 실시예를 관한 비선형 입출력특성을 도시한 도면,36 shows non-linear input / output characteristics according to an embodiment of the present invention;

도 37은 본 발명의 실시예를 관한 화소 혼합리드시의 신호포맷도,37 is a signal format diagram at the time of pixel mixed read according to the embodiment of the present invention;

도 38은 본 발명의 실시예를 관한 신호의 공간분포도,38 is a spatial distribution diagram of a signal according to an embodiment of the present invention;

도 39는 본 발명의 실시예를 관한 촬상장치의 구성을 도시한 블럭도,39 is a block diagram showing the construction of an imaging device according to an embodiment of the present invention;

도 40은 본 발명의 실시예를 관한 신호의 공간분포도,40 is a spatial distribution diagram of a signal according to an embodiment of the present invention;

도 41은 본 발명의 실시예를 관한 신호보간회로의 구성을 도시한 블럭도,41 is a block diagram showing the construction of a signal interpolation circuit according to the embodiment of the present invention;

도 42은 본 발명의 실시예를 관한 화소 혼합리드시의 신호포맷도,42 is a signal format diagram at the time of pixel mixed read according to the embodiment of the present invention;

도 43은 본 발명의 실시예를 관한 신호의 공간분포도.43 is a spatial distribution diagram of a signal according to an embodiment of the present invention.

[발명의 목적][Purpose of invention]

[발명이속하는 기술분야 및 그 분야의 종래기술][Technical Field of the Invention and Prior Art in the Field]

본 발명은 디지탈카메라에 관한 것으로서, 특히 컴퓨터 등의 화상입력수단에 적합한 정지화상의 기록재생방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to digital cameras, and more particularly, to a method of recording and reproducing still images suitable for image input means such as a computer.

비디오 카메라는 신호처리의 디지탈화에 따라 다종 다양한 기능이 개발되고 있는 한편, 디지탈의 영상신호를 용이하게 출력할 수 있기 때문에 컴퓨터 등의 영상입력수단으로서 주목받고 있다. 영상입력수단으로서의 디지탈 카메라에 민생용의 카메라 일체형 VTR의 카메라부에서 사용되고 있는 부품을 가능한 한 많이 사용하는 것에 의해 낮은 가격의 영상입력수단을 공급할 수 있지만, 현재는 라인스캐너 등의 특수한 영상입력수단이 공급되어 있는데 머무르고 있다.A variety of functions have been developed in accordance with digitalization of signal processing, and video cameras are attracting attention as image input means such as computers because they can easily output digital image signals. Although low cost video input means can be supplied to the digital camera as a video input means by using as many parts as are used in the camera unit of the consumer camera integrated VTR as much as possible, at present, special video input means such as line scanners I'm staying in supply.

[발명이 이루고자하는 기술적 과제][Technical problem to be achieved]

낮은 가격의 영상입력수단을 공급하기 위한 중요한 과제로서 다음의 4개의 항목이 있다.There are four items as important tasks for supplying a low cost image input means.

[1] 자동제어계를 정지화상에도 대응시킬 수 있도록 한다. …일반적인 비디오 카메라에서는 영상신호를 사용해서 노출제어나 화이트 밸런스 제어를 실행하고 있다. 즉, 조도나 색온도 등을 검출하는 검출기를 별개로 갖고 있지 않고 영상신호에서 검출해서 각각의 제어부로 피드백하고 있다. 그러나, 정지화상의 영상신호에서 검출해도 검출한 정지화상의 피드백할 수 없다.[1] Automatic control system can cope with still image. … In general video cameras, exposure control or white balance control is performed using an image signal. That is, the detector detects the illuminance, the color temperature, and the like separately, and detects the image signal and feeds it back to each control unit. However, even if detected by the video signal of the still picture, the detected still picture cannot be fed back.

[2] 일반적인 촬상소자를 사용해서 프레임의 정지화상을 생성할 수 있도록 한다. …일반적인 촬상소자는 화소의 신호를 한번밖에 리드할 수 없는 파괴리드이고, 또 수직방향으로 인접하는 2개의 화소의 신호를 혼합해서 리드하는 화소 혼합방식이다. 상기 리드방식인 채로 신호처리를 실행하면 화소수에 맞는 해상도의 정지화상은 생성할 수 없다.[2] A still image of a frame can be generated by using a general image pickup device. … A general image pickup device is a breakdown lead that can read a pixel signal only once, and is a pixel mixing method that mixes and reads signals of two adjacent pixels in the vertical direction. If signal processing is executed while the read method is used, a still image with a resolution corresponding to the number of pixels cannot be generated.

[3] 범용의 촬상소자를 사용할 수 있도록 한다. …영상신호를 컴퓨터에 패치한 후에 그래픽 상에서 화상에 회전 등의 조작을 하는 경우가 있으며, 이 때 화상에 왜곡이 생기지 않도록 할 필요가 있다. 이를 위해서는 촬상피사체를 수평, 수직방향으로 동일한 공간적인 샘플링피치로 광전변환하면 좋다. 즉, 수평, 수직방향으로 동일한 거리로 배치된 화소를 갖는 촬상소자를 사용하면 좋다. 그러나, 민생용의 카메라 일체형 VTR의 카메라부에서 일반적으로 사용되고 있는 촬상소자는 화소가 수평, 수직방향으로 다른 피치로 배치되어 있다.[3] It is possible to use a general-purpose imaging device. … After patching a video signal to a computer, an operation such as rotation may be performed on the graphic on the graphic, and it is necessary to prevent distortion in the image at this time. For this purpose, the imaging subject may be photoelectrically converted to the same spatial sampling pitch in the horizontal and vertical directions. That is, an imaging device having pixels arranged at the same distance in the horizontal and vertical directions may be used. However, in the image pickup device which is generally used in the camera unit of the consumer camera integrated VTR, pixels are arranged at different pitches in the horizontal and vertical directions.

[4] 정지화상을 기록하는 기록수단의 용량을 가능한 한 작게한다. …컴퓨터에 페치하는 일반적인 영상신호인 RGB신호에 의해 정지화상을 기록하면 R, G, B 각각에 어드레스가 필요하여 기억용량이 커지게 된다.[4] The capacity of the recording means for recording the still image is as small as possible. … When a still image is recorded by an RGB signal, which is a general video signal fetched to a computer, an address is required for each of R, G, and B, thereby increasing the storage capacity.

본 발명의 목적은 상기한 문제점을 해결하기 위한 것으로서, 조도나 색온도 등을 검출하는 검출기를 필요로 하지 않고 일반적인 촬상소자를 사용해서 정지화상의 영상신호를 생성하여 저렴한 영상입력수단을 제공하는 것이다.SUMMARY OF THE INVENTION An object of the present invention is to solve the above problems and to provide a low cost image input means by generating a still image image signal using a general image pickup device without requiring a detector for detecting illuminance or color temperature.

본 발명의 다른 목적은 색신호의 수직해상도의 저하가 적고 고화질의 프레임 스틸화상이 얻어지는 촬상장치를 실현할 수 있음과 동시에, 동작을 전환하는 것에 의해서 움직임화상도 처리할 수 있는 기술을 제공하는 것이다.It is another object of the present invention to provide a technique capable of realizing an image pickup device in which the vertical resolution of a color signal is reduced and a frame still image of high quality can be obtained, and also a motion image can be processed by switching the operation.

[발명의 구성][Configuration of Invention]

상기 [1]의 문제점을 해결하는 수단으로서, 움직임화상(動畵) 촬상시의 검출결과를 기억해 두고 그 검출결과에 따라서 정지화상을 생성한다.As a means for solving the above problem [1], a detection result at the time of motion image pickup is stored and a still image is generated in accordance with the detection result.

또, 상기 [2]의 문제점을 해결하는 수단으로서, 정지화상 촬상시에는 촬상소자의 구동방법을 변경하여 화소의 신호를 혼합하지 않고 리드하여 신호처리회로에 정지화상의 영상신호가 입력되었을 때 신호처리의 내용을 정지화상용으로 전환한다.In addition, as a means for solving the above problem [2], when a still image image signal is input to the signal processing circuit by changing the driving method of the image pickup device without mixing the signal of the pixel by changing the driving method of the image pickup element. The contents of the process are switched to still images.

특히, 정지화상용 신호처리에 있어서는 라인마다 화소배열이 교대로 교체되는 Mg, G신호에 대해서 샘플홀드의 위상을 수평주사라인마다 반전하거나 또는 화소보간의 보간계수를 수평주사라인마다 전환한다.In particular, in still image signal processing, the phase of the sample hold is inverted for each horizontal scan line or the interpolation coefficient for each horizontal scan line is changed for Mg and G signals in which pixel arrays are alternately replaced for each line.

또, 상기 [3]의 문제점을 해결하는 수단으로서, 보간연산을 실행하는 신호 보간회로를 마련하고, 화소가 수평, 수직방향으로 다른 피치로 배열되어 있는 일반적인 촬상소자를 갖는 촬상수단에서 출력되는 영상신호에 보간연산을 실시하고, 수평, 수직방향에서 동일한 공간적인 샘플링피치의 영상신호를 생성한다.Further, as a means for solving the above problem [3], a signal interpolation circuit for performing interpolation operation is provided, and an image output from an image pickup means having a general image pickup device in which pixels are arranged at different pitches in the horizontal and vertical directions. The interpolation operation is performed on the signals, and video signals having the same spatial sampling pitch are generated in the horizontal and vertical directions.

또, 상기 [4]의 문제점을 해결하는 수단으로서, 기록수단에 기록할 때에는 촬상수단에서 출력되는 영상신호에 휘도신호처리나 색신호처리 등의 처리를 실시하지 않고 기록한다. 일반적인 촬상소자를 갖는 촬상수단에서는 소위 보색의 영상신호가 출력되므로 기록수단에서 출력된 영상신호에 휘도신호처리나 색신호 처리 등의 처리를 실시한다.In addition, as a means for solving the above problem [4], when recording to the recording means, the video signal output from the imaging means is recorded without performing processing such as luminance signal processing or color signal processing. In an image pickup means having a general image pickup device, a so-called complementary image signal is output, so that the image signal output from the recording means is subjected to processing such as luminance signal processing and color signal processing.

이하, 본 발명을 도면을 사용해서 설명한다.EMBODIMENT OF THE INVENTION Hereinafter, this invention is demonstrated using drawing.

도 1은 본 발명의 제1 실시예에 관한 촬상장치의 구성도이다. 동일 도면에 있어서, (101)은 렌즈, (102)는 셔터, (103)은 셔터제어회로, (104)는 촬상소자, (105)는 구동회로, (106)은 앰프, (107)은 A/D변환기, (108)은 메모리, (109)는 메모리 제어회로, (110)은 기록/재생 제어회로, (111)은 셔터버튼, (112)는 재생버튼, (113)은 선택회로, (114)는 신호처리회로, (115)는 신호처리 제어회로, (116)은 뷰파인더, (117)은 Full/Economy 전환 스위치이고, 촬상소자(104)의 구체적인 예를 도 2에 도시한다. 도 2에 있어서 (201)은 포토다이오드, (202)는 수직CCD, (203)은 수평CCD이고, gr, mg, cy, ye는 포토다이오드(201)의 각각에 배치된 색필터로서, gr은 그린, mg는 마젠타, cy는 시안, ye는 옐로우의 색필터인 것을 나타낸다. 상기와 같은 색필터가 배치된 포토다이오드는 일반적으로 화소라 불리어지고 있다. 상기 구성에 있어서, 렌즈(101)을 통해서 입력된 광은 셔터제어회로(103)에 의해 조리개값F가 제어된 셔터(102)를 통해서 촬상소자(104)에 입력되고, 촬상소자(104)의 표면에 배치된 도 2에 도시한 포토다이오드(201)에 의해서 광전변환된 신호전하는 수직CCD(202)를 경유해서 수평CCD(203)으로 전송되고 구동회로(105)에서 공급되는 수평주사펄스와 동기해서 전압 변환되어 출력된다.1 is a configuration diagram of an image pickup apparatus according to a first embodiment of the present invention. In the same drawing, reference numeral 101 denotes a lens, 102 denotes a shutter, 103 denotes a shutter control circuit, 104 denotes an imaging device, 105 denotes a driving circuit, 106 denotes an amplifier, and 107 denotes A. / D converter, 108 is a memory, 109 is a memory control circuit, 110 is a record / playback control circuit, 111 is a shutter button, 112 is a playback button, 113 is a selection circuit, 114 is a signal processing circuit, 115 is a signal processing control circuit, 116 is a viewfinder, and 117 is a full / economy switching switch, and a specific example of the imaging device 104 is shown in FIG. In FIG. 2, reference numeral 201 denotes a photodiode, reference numeral 202 denotes a vertical CCD, reference numeral 203 denotes a horizontal CCD, and gr, mg, cy, and ye denote color filters disposed on the photodiodes 201, respectively. Green, mg is magenta, cy is cyan, ye is yellow color filter. The photodiode in which the above color filter is arranged is generally called a pixel. In the above configuration, the light input through the lens 101 is input to the image pickup device 104 through the shutter 102 whose aperture value F is controlled by the shutter control circuit 103, The signal charge photoelectrically converted by the photodiode 201 shown in FIG. 2 disposed on the surface is transmitted to the horizontal CCD 203 via the vertical CCD 202 and synchronized with the horizontal scanning pulse supplied from the driving circuit 105. The voltage is converted and output.

우선, 움직임화상 촬영시의 동작을 설명한다. 촬상소자(104)는 일본국 특허공개공보 소화 63-114487호 「고체 컬러카메라」에 기재되어 있는 바와 같이 수직방향으로 인접하는 2개의 화소신호를 혼합해서 리드하는 소위 화소혼합방식으로 신호를 리드한다. 이하, 도 3을 사용해서 화소혼합리드에 대해서 설명한다.First, the operation at the time of motion image photographing is explained. The imaging device 104 reads signals in a so-called pixel mixing method in which two pixel signals adjacent in the vertical direction are mixed and read as described in Japanese Patent Laid-Open No. 63-114487 "Solid Color Camera". . Hereinafter, the pixel mixed lead will be described with reference to FIG. 3.

도 3은 화소혼합리드시에 있어서의 수직전송펄스와 수직CCD(202)에 있어서의 신호전하의 전송의 타이밍도를 도시한 도면이다. 동일 도면에 있어서 V1로 나타낸 수직전송펄스1의 3진 펄스가 고레벨로 되는 것에 의해 gr, mg행의 포토다이오드(201)에서, 또한 V3으로 나타낸 수직전송펄스3의 3진 펄스가 고레벨로 되는 것에 의해 cy, ye행의 포토다이오드(201)에서, 또한 V3으로 나타낸 수직전송펄스3의 3진 펄스가 고레벨로 되는 것에 의해, cy, ye행의 포토다이오드(201)에서 각각 수직CCD(202)로 신호전하가 전송된다. 수직CCD(202)로 전송된 신호전하는 도 3에 도시한 바와 같이 수직CCD(202)내에서 혼합되어 수평CCD(203)으로 전송된다. 촬상소자(104)의 출력신호는 앰프(106)에 의해서 증폭되어 A/D변환기(107)에 입력된다. A/D변환기(107)에 입력된 신호는 구동회로에서 공급되는 타이밍펄스에 의해 샘플링되어 디지탈신호로 변환된다.Fig. 3 is a diagram showing a timing diagram of the transfer of the signal transfer in the vertical transfer pulse and the vertical CCD 202 in the pixel mixed lead. In the same figure, the ternary pulse of the vertical transfer pulse 1 indicated by V1 becomes high level, so that the ternary pulse of the vertical transfer pulse 3 indicated by V3 becomes high level by the photodiode 201 of gr and mg rows. As a result, the ternary pulse of the vertical transfer pulse 3 indicated by V3 at the cy and ye rows becomes high level, so that the photodiodes 201 in the cy and ye rows are moved to the vertical CCD 202, respectively. Signal charge is transmitted. The signal charges transmitted to the vertical CCD 202 are mixed in the vertical CCD 202 and transmitted to the horizontal CCD 203 as shown in FIG. The output signal of the imaging device 104 is amplified by the amplifier 106 and input to the A / D converter 107. The signal input to the A / D converter 107 is sampled by the timing pulse supplied from the drive circuit and converted into a digital signal.

A/D변환기(107)에 의해 디지탈신호로 변환된 신호는 선택회로(113)에 의해서 신호처리회로(114)내에 입력된다. 신호처리회로(114)는 감마보정이나 화이트 밸런스보정 등의 일반적인 신호처리를 실행하여 휘도신호, 색(RGB)신호 등을 생성한다.The signal converted into the digital signal by the A / D converter 107 is input into the signal processing circuit 114 by the selection circuit 113. The signal processing circuit 114 performs general signal processing such as gamma correction or white balance correction to generate a luminance signal, a color (RGB) signal, and the like.

다음에 정지화상을 기록하는 동작을 설명한다.Next, the operation of recording still images will be described.

상기 구성에 있어서, 셔터버튼(111)을 누르는 것에 의해 기록/재생 제어회로(112)에서 셔트클로즈의 제어신호가 셔터제어회로(103)에 입력되고, 셔터제어회로(103)에 의해서 셔터(102)는 소정의 시간 후에 클로즈상태로 된다. 셔터(102)가 클로즈상태로 될 때까지 촬상소자(104)에 입력된 광은 촬상소자(104)에 배치된 포토다이오드(201)에 의해서 광전변환되어 셔터(102)가 클로즈상태인 동안에 수직CCD(202)를 경유해서 수평CCD(203)으로 전송되고, 구동회로(105)에서 공급되는 수평주사펄스와 동기해서 전압변환되어 출력된다. 이때, 촬상소자(104)는 포토다이오드(201)에서 한번 신호를 리드하면 포토다이오드(201)에 신호가 남지 않는 소위 파괴리드이므로, 움직임화상의 리드와 마찬가지로 화소 혼합리드를 하면 프레임의 정보가 손실된다. 수직방향의 해상도를 저하시키지 않고 정지화상을 얻기 위해서 다음에 설명하는 독립리드를 실행한다.In the above configuration, by pressing the shutter button 111, a control signal of the shutter close is input from the recording / reproduction control circuit 112 to the shutter control circuit 103, and the shutter control circuit 103 controls the shutter 102. ) Is closed after a predetermined time. Light input to the image pickup device 104 until the shutter 102 is in the closed state is photoelectrically converted by the photodiode 201 disposed in the image pickup device 104 so that the vertical CCD is held while the shutter 102 is in the closed state. It is transmitted to the horizontal CCD 203 via 202, and is voltage-transformed in synchronism with the horizontal scanning pulse supplied from the driving circuit 105 to be output. At this time, the image pickup device 104 is a so-called destructive lead in which the signal is not left in the photodiode 201 once the signal is read from the photodiode 201. Therefore, the information of the frame is lost when the pixel mixed lead is performed like the lead of the moving image. do. In order to obtain a still image without lowering the resolution in the vertical direction, the independent read described below is executed.

도 4는 독립리드시에 있어서의 수직전송펄스와 수직CCD(202)에 있어서의 신호전하의 전송의 타이밍도를 도시한 도면이다. 동일 도면에 있어서, 수직전송펄스1 및 수직전송펄스3의 3진 펄스가 고레벨로 되는 필드에서는 gr, mg행의 포토다이오드(201)에서만 신호전하가 수직CCD(202)로 전송되고, 다음의 1필드에서는 수직전송펄스3의 3진 펄스가 고레벨로 되는 것에 의해 cy, mg행의 포토다이오드(201)에서만 수직CCD(202)로 신호전하가 전송된다. 수직CCD(202)로 전송된 신호전하는 1필드기간에 모두 수평CCD(203)으로 전송되어 버리므로, 상기한 화소 혼합리드 방식과 같이 서로 인접합 포토다이오드(201)의 신호전하가 혼합되는 일없이 1개의 포토다이오드에 대해서 1개의 신호를 얻을 수 있다. 이하, 수평CCD(203)으로 전송된 신호전하는 구동회로(105)에서 공급되는 수평주사펄스와 동기해서 촬상소자(104)에서 출력된다.Fig. 4 is a diagram showing a timing diagram of the transfer of the signal transfer in the vertical transfer pulse and the vertical CCD 202 in the independent read. In the same figure, in the field where the ternary pulses of the vertical transfer pulse 1 and the vertical transfer pulse 3 become high levels, the signal charges are transferred to the vertical CCD 202 only in the photodiodes 201 in the gr and mg rows. In the field, the ternary pulse of the vertical transfer pulse 3 becomes high level, so that signal charge is transmitted to the vertical CCD 202 only in the photodiodes 201 of cy and mg rows. Since the signal charges transmitted to the vertical CCD 202 are all transmitted to the horizontal CCD 203 in one field period, the signal charges of the adjacent photodiodes 201 are not mixed with each other as in the pixel mixed lead method described above. One signal can be obtained for one photodiode. Hereinafter, the signal charge transmitted to the horizontal CCD 203 is output from the imaging device 104 in synchronization with the horizontal scanning pulse supplied from the driving circuit 105.

상기 동작에 의해서 각각의 화소에서 독립해서 리드된 신호 Gr, Mg, Cy, Ye는 A/D변환기(107)에 의해 디지탈신호로 변환되어 메모리 제어회로(109)에 의해서 제어된 메모리(108)에 기록된다. 한편, 상기 정지화상 기록을 실행하기전의 움직임화상 촬영시에 신호처리회로(114)에서 실행하고 있던 화이트 밸런스 등의 정보도 메모리(108)에 기록한다. 화이트 밸런스 등의 정보는 다른 기록 수단에 기록해도 좋다.The signals Gr, Mg, Cy, and Ye read independently in each pixel by the above operation are converted into digital signals by the A / D converter 107 to the memory 108 controlled by the memory control circuit 109. Is recorded. On the other hand, the memory 108 also records information such as the white balance, which was executed by the signal processing circuit 114 at the time of motion image photographing before performing the still image recording. Information such as the white balance may be recorded in other recording means.

다음에 기록된 정지화상을 출력하는 동작을 설명한다.Next, the operation of outputting the recorded still image will be described.

제어버튼(112)가 눌려지면 기록/재생 제어회로로 부터의 제어신호에 따라서 메모리(108)에 기록된 신호는 선택회로(113)에서 선택되어 신호처리회로(114)에 입력된다. 신호처리회로(114)는 화이트 밸런스 등의 정보를 리드해서 그 정보에 따라서 소정의 영상신호를 생성한다. 한편, 뷰파인더(116)은 피사체를 표시하는 것 이외에 기록/재생 제어회로(110)으로 부터의 제어신호에 의해 메모리(108)에 기록할 수 있는 정지화상의 매수나 Full/Economy전환, 대기상태 등의 후술하는 정보를 표시한다.When the control button 112 is pressed, the signal recorded in the memory 108 in accordance with the control signal from the recording / reproducing control circuit is selected by the selection circuit 113 and input to the signal processing circuit 114. The signal processing circuit 114 reads information such as white balance and generates a predetermined video signal according to the information. On the other hand, the viewfinder 116 displays the number of still images that can be recorded in the memory 108 by a control signal from the recording / playback control circuit 110, in addition to displaying the subject, or switching between Full / Economy and standby states. Information to be described later is displayed.

다음에, 신호처리회로(114)의 동작에 대해서 설명한다.Next, the operation of the signal processing circuit 114 will be described.

움직임화상 촬영시에는 상술한 바와 같이 화소 혼합리드에 의해 화소의 신호를 촬상소자(104)에서 리드하고 A/D변환기(107)에 의해 디지탈신호로 변환해서 도 3에 도시한 신호를 신호처리회로(114)에 입력한다. 이 입력신호에서 휘도신호와 색차신호를 생성하는 신호처리회로(144)의 구체적인 예를 도 5에 도시한다. 도 5에 있어서, (211)은 입력신호를 샘플링하여 출력신호, S1, S2, S3, S4를 생성하는 샘플링회로, (212)는 신호처리 제어회로(115)에 의해 설정된 휘도용 매트릭스를 사용해서 휘도신호를 생성하는 휘도매트릭스회로, (213)은 휘도매트릭스(212)가 생성한 휘도신호에 공지의 감마보정 등의 디지탈 신호처리를 실시하는 휘도신호 처리회로, (214)는 신호처리 제어회로(115)에 의해 설정된 RGB용 매트릭스를 사용해서 RGB신호를 생성하는 RGB매트릭스회로, (215)는 화이트 밸런스회로, (216)은 신호처리 제어회로(115)에 의해 설정된 색차신호용 매트릭스를 사용해서 색차신호를 생성하는 색차매트릭스회로이다. 도 6은 휘도 및 RGB매트릭스회로(212), (214)의 회로구성예이고, (221), (222), (223), (224)는 입력신호와 매트릭스계수를 승산하는 승산기, (225)는 승산기(221), (222), (223), (224)의 출력을 가산하는 가산기이다.At the time of moving image capturing, as described above, the pixel mixed lead reads the pixel signal from the image pickup device 104, and converts the signal shown in Fig. 3 into a digital signal by the A / D converter 107. Enter in (114). FIG. 5 shows a specific example of a signal processing circuit 144 that generates a luminance signal and a color difference signal from this input signal. In Fig. 5, reference numeral 211 denotes a sampling circuit for sampling an input signal to generate output signals, S1, S2, S3, and S4, and 212 using a luminance matrix set by the signal processing control circuit 115. A luminance matrix circuit for generating a luminance signal, 213 is a luminance signal processing circuit for performing digital signal processing such as known gamma correction on the luminance signal generated by the luminance matrix 212, and 214 is a signal processing control circuit ( An RGB matrix circuit which generates an RGB signal using the matrix for RGB set by 115, 215 is a white balance circuit, and 216 is a color difference signal using a matrix for color difference signals set by the signal processing control circuit 115. It is a color difference matrix circuit that generates. 6 is a circuit configuration example of the luminance and RGB matrix circuits 212, 214, and 221, 222, 223, and 224 are multipliers for multiplying an input signal with a matrix coefficient, and 225. Is an adder for adding the outputs of the multipliers 221, 222, 223, and 224.

도 5에 있어서, 샘플링회로(211)은 순차 신호가 전환되는 도 3에 도시한 신호 s1, s2, …를 도 7a, 도 7b, 7c에 도시한 바와 같이 샘플홀드한다. 도 7a 및 도 7c는 Cy+Gr 또는 Ye+Mg의 신호가 촬상소자(104)에서 출력되는 수평 기간의 타이밍도이고, 도 7b는 Cy+Mg 또는 Ye+Gr이 출력되는 수평기간의 타이밍도이다. 도시하고 있지 않지만, 샘플링회로(211)은 라인메모리를 갖고, 예를 들면 도 7b의 수평기간에 있어서 도 7a의 수평기간과 동일한 신호시계열의 신호 S1, S2를 출력하고, 도 7c의 수평기간에 있어도 도 7b의 수평기간과 동일한 신호 시계열의 신호S3, S4를 출력한다. 이 샘플홀드의 신호 Gr+Cy, Mg+Ye, Mg+Cy, Gr+Ye는 휘도매트릭스회로(212) 및 RGB매트릭스회로(214)에서 도 8a, 도 8c에 도시한 매트릭스계수 M1, M2가 승상되어 휘도신호Y 및 RGB신호, G, R, B로 변환된다. 도 8a, 도 8b에 도시한 매트릭스계수 M1, M2의 구체적인 예를 다음에 기술한다.In FIG. 5, the sampling circuit 211 is provided with the signals s1, s2,... Shown in FIG. 7A, 7B, and 7C hold the sample as shown. 7A and 7C are timing diagrams of horizontal periods in which Cy + Gr or Ye + Mg signals are output from the imaging device 104, and FIG. 7B is timing diagrams in horizontal periods in which Cy + Mg or Ye + Gr are output. . Although not shown, the sampling circuit 211 has a line memory, for example, outputs the signals S1 and S2 of the same signal time series as the horizontal period of FIG. 7A in the horizontal period of FIG. 7B, and outputs the horizontal period of FIG. 7C. Even if they are, signals S3 and S4 of the same signal time series as the horizontal period in Fig. 7B are output. The signals Gr + Cy, Mg + Ye, Mg + Cy, and Gr + Ye of this sample hold are raised by the matrix coefficients M1 and M2 shown in Figs. 8A and 8C in the luminance matrix circuit 212 and the RGB matrix circuit 214. The signal is converted into luminance signals Y and RGB signals, G, R, and B. Specific examples of the matrix coefficients M1 and M2 shown in Figs. 8A and 8B will be described next.

[식 1][Equation 1]

M11=M12=M13=M14=1M 11 = M 12 = M 13 = M 14 = 1

M21=-2, M22=2, M23=0, M24=1M 21 = -2, M 22 = 2, M 23 = 0, M 24 = 1

M31=1, M32=-1, M33=0, M34=2M 31 = 1, M 32 = -1, M 33 = 0, M 34 = 2

M41=1, M42=0, M43=2, M44=-2M 41 = 1, M 42 = 0, M 43 = 2, M 44 = -2

색차신호 R-Y, B-Y도 도 6에 도시한 회로구성에 의해 동일하게 생성할 수 있고, 도 8c에 도시한 매트릭스계수M3으로서는 다음에 기술하는 구체적인 예를 사용하면 좋다.The color difference signals R-Y and B-Y can also be generated similarly by the circuit configuration shown in FIG. 6, and the specific example described below may be used as the matrix coefficient M3 shown in FIG. 8C.

[식 2][Equation 2]

M51=0.7, M52=-0.59, M53=-0.11M 51 = 0.7, M 52 = -0.59, M 53 = -0.11

M61=-0.3, M62=-0.59, M63=0.89M 61 = -0.3, M 62 = -0.59, M 63 = 0.89

상기 매트릭스계수 M1, M2, M3은 신호처리 제어회로(115)에 의해서 설정된다.The matrix coefficients M1, M2, M3 are set by the signal processing control circuit 115.

다음에 정지화상의 신호생성에 대해서 설명한다.Next, signal generation of still images will be described.

정지화상 생성시에는 상술한 바와 같이 독립리드에 의해 각 화소의 신호를 독립해서 촬상소자(104)에서 리드하고, A/D변환기(107)에 의해 디지탈신호로 변환해서 도 4에 도시한 신호열을 메모리(108)에 기록한다.When generating a still image, as described above, the signal of each pixel is independently read from the imaging device 104 by an independent lead, and converted into a digital signal by the A / D converter 107 to convert the signal sequence shown in FIG. Write to memory 108.

메모리(108)에서는 도 2에 도시한 제1행의 포토다이오드(201)의 신호, 제2행의 포토다이오드(201)의 신호, …의 순으로 리드하여 신호처리회로(114)에 입력한다. 샘플링회로(211)은 도 9a, 도 9b, 도 9c에 도시한 바와 같이, Gr, Mg, Gr, Mg, … 또는 Cy, Ye, Cy, Ye의 시계열로 입력된 신호를 움직임화상 촬영시와 마찬가지로 샘플홀드하고, 신호처리 제어회로(115)에 의해서 매트릭스계수M1, M2, M3중의 M2를 하기의 매트릭스값M4로 다시 설정해서 도 10a, 도 10b, 도 10c에 도시한 정지화상 촬영시의 휘도신호Y, 색신호R, G, B 및 색차신호R-Y, B-Y를 생성한다.In the memory 108, the signal of the photodiode 201 in the first row, the signal of the photodiode 201 in the second row,. Are read in order and input to the signal processing circuit 114. As shown in Figs. 9A, 9B, and 9C, the sampling circuit 211 includes Gr, Mg, Gr, Mg,... Alternatively, the signals input in the time series of Cy, Ye, Cy, and Ye are sampled and held in the same manner as in the case of motion image photographing, and the signal processing control circuit 115 converts M2 in the matrix coefficients M1, M2, and M3 to the following matrix value M4. By setting again, luminance signals Y, color signals R, G, B and color difference signals RY, BY at the time of still image shooting shown in Figs. 10A, 10B, and 10C are generated.

[식 3][Equation 3]

M71=0, M72=1, M73=-1, M74=1M 71 = 0, M 72 = 1, M 73 = -1, M 74 = 1

M81=-1, M82=-1, M83=1, M84=1M 81 = -1, M 82 = -1, M 83 = 1, M 84 = 1

M91=0, M92=1, M93=1, M94=-1M 91 = 0, M 92 = 1, M 93 = 1, M 94 = -1

또, 도 2에 도시한 바와 같이 색필터gr, mg의 배치는 1행걸러 gr, mg, gr, …, 의 순서와 mg, gr, mg, …,의 순서를 반복하고 있다. 따라서, 도 9a, 도 9c에 도시한 바와 같이 신호처리회로(114)에 입력되는 Gr, Mg의 순서가 1화소분 어긋난다. 상기 어긋남을 보정하기 위한 샘플링회로(211)의 구체적인 예를 도 11a에 도시한다. 도 11a에 있어서, (241), (242)는 샘플홀드회로이고, A, B는 각각 샘플홀드회로(241), (242)의 샘플홀드펄스이다. 도 11b에 도시한 바와 같이 N행째의 포토다이오드(201)의 신호를 리드하는 라인N인 신호처리에 있어서, Mg, Gr, …,의 순서로 신호가 입력된 것으로 하면 샘플홀드펄스A, B를 도 11c와 같이 공급하고, 도 11d에 도시한 시계열로 샘플홀드한다. 여기에서, 샘플홀드회로(241), (242)는 샘플홀드펄스가 하이레벨일 때 입력신호를 통과시키고, 로우레벨일 때에는 직전의 하이레벨시의 신호를 출력한다. 한편, N+2행째의 포토다이오드(201)의 신호를 리드하는 라인N+2의 신호처리에 있어서는, Gr, Mg, …,의 순서로 신호가 입력되므로 샘플홀드펄스A, B를 도 11c의 라인N+2와 같이 공급하고, 도 11d의 라인N+2로 나타낸 시계열로 샘플홀드한다.As shown in Fig. 2, the arrangement of the color filters gr and mg is not more than one row gr, mg, gr,... And the order of, mg, gr, mg,. The sequence of, is repeated. Therefore, as shown in Figs. 9A and 9C, the order of Gr and Mg input to the signal processing circuit 114 is shifted by one pixel. 11A shows a specific example of the sampling circuit 211 for correcting the misalignment. In Fig. 11A, reference numerals 241 and 242 denote sample hold circuits, and A and B denote sample hold pulses of the sample hold circuits 241 and 242, respectively. As shown in Fig. 11B, in the signal processing which is the line N which leads the signal of the N-th photodiode 201, Mg, Gr,... Assuming that signals are input in the order of, the sample hold pulses A and B are supplied as shown in Fig. 11C, and sampled and held in the time series shown in Fig. 11D. Here, the sample hold circuits 241 and 242 pass the input signal when the sample hold pulse is at the high level, and output the signal at the previous high level when the sample hold pulse is at the high level. On the other hand, in the signal processing of the line N + 2 which leads the signal of the photodiode 201 of the N + 2nd line, Gr, Mg,... Since signals are input in the order of, the sample holding pulses A and B are supplied as shown by line N + 2 of FIG. 11C and sampled by the time series shown by line N + 2 of FIG. 11D.

다음에, 본 발명의 다른 실시예를 도 12에 도시한다. 도 12에 있어서 (251)은 신호처리회로, (252)는 카메라신호처리회로, (253)은 신호보간회로, (254)는 메모리, (255)는 신호처리 제어회로이고, 도 1의 실시예와 공통되는 것에는 동일한 번호를 붙이고 있다. 도 1의 실시예와 다른 점은 메모리(254)에 신호처리회로(251)의 출력신호를 기록하도록 구성한 것이다. 움직임화상 촬상시의 동작은 도 1의 실시예와 동일하기 때문에 정지화상 촬상시의 동작을 다음에 설명한다.Next, another embodiment of the present invention is shown in FIG. In FIG. 12, 251 is a signal processing circuit, 252 is a camera signal processing circuit, 253 is a signal interpolation circuit, 254 is a memory, and 255 is a signal processing control circuit. The common numbers are given the same number. The difference from the embodiment of FIG. 1 is that the output signal of the signal processing circuit 251 is written to the memory 254. Since the operation at the time of moving image pick-up is the same as the embodiment of Fig. 1, the operation at the time of still image pick-up is described next.

독립리드에 의해 촬상소자(104)에서 출력된 신호는 도 5에 도시한 신호처리회로를 갖는 카메라신호처리회로(252)에 입력되고, 휘도신호 또는 색차신호 생성경로중 어느 하나의 경로를 이용해서 통과하는 것에 의해 출력된다. 예를 들면 샘플링회로(211)은 입력신호를 그대로 S1로 출력하고, RGB매트릭스회로(212)는 S1에 1을 승산한 신호와 S2~S4에 0을 승산한 신호를 가산하고, 휘도신호 처리회로(213)은 휘도매트릭스회로(212)의 출력신호를 그대로 출력한다. 신호보간회로(253)은 신호처리 제어회로(255)로부터의 제어신호에 따라서 도 13a, 도 13b에 도시한 신호시계열 변환을 실행하고, 이 신호시계열 변환후의 신호를 메모리(254)에 기록한다. 여기에서, 도 13a, 도 13b는 촬상소자(104)에서 출력된 신호의 공간분포를 나타내고 있다.The signal output from the image pickup device 104 by the independent lead is input to the camera signal processing circuit 252 having the signal processing circuit shown in Fig. 5, using either the luminance signal or the color difference signal generation path. Output by passing. For example, the sampling circuit 211 outputs an input signal as S1, and the RGB matrix circuit 212 adds a signal multiplied by 1 to S1 and a signal multiplied by 0 to S2 to S4, and the luminance signal processing circuit. Reference numeral 213 outputs the output signal of the luminance matrix circuit 212 as it is. The signal interpolation circuit 253 performs signal time series conversion shown in Figs. 13A and 13B according to the control signal from the signal processing control circuit 255, and records the signal after the signal time series conversion in the memory 254. 13A and 13B show the spatial distribution of the signal output from the imaging device 104.

촬상소자(104)에서 출력된 신호를 메모리(254)에 다 기록한 후, 메모리(254)에 기록된 신호는 카메라 신호처리회로(252)에 입력되고, 신호처리 제어회로(255)로 부터의 제어신호에 따른 도 1의 실시예와 동일한 신호처리에 의해서 휘도신호Y와 색차신호R-Y, B-Y가 생성된다. 신호보간회로(253)은 신호처리 제어회로(255)로부터의 제어신호에 따라서 이 휘도신호Y와 색차신호R-Y, B-Y를 그대로 출력한다.After the signals output from the image pickup device 104 are all recorded in the memory 254, the signals recorded in the memory 254 are input to the camera signal processing circuit 252 and controlled from the signal processing control circuit 255. The luminance signal Y and the color difference signals RY and BY are generated by the same signal processing as in the embodiment of FIG. 1 according to the signal. The signal interpolation circuit 253 outputs the luminance signal Y, the color difference signals R-Y, and B-Y as they are in accordance with the control signal from the signal processing control circuit 255.

신호보간회로(253)에서 도 13a, 도 13b에 도시한 신호보간을 실행할 수 있으면 도 11b, 도 11c, 도 11d에 도시한 샘플링에 의한 신호 시계열 변환을 실행할 필요가 없다. 즉, 도 11b의 라인N으로 나타낸 시계열로 신호Mg, Gr이 입력된 경우, 신호보간회로(253)은 도 13a에 도시한 바와 같이 그래도 보간후의 신호Mg', Gr'로써 출력하고, 도 11b의 라인N+2에 나타낸 시계열로 신호Gr, Mg가 입력된 경우에 신호보간회로(253)은 도 13b에 도시한 바와 같이 2개의 입력Gr신호에서 보간후의 신호Gr'를 입력Mg신호의 위치에, 2개의 입력Mg신호에서 보간후의 신호Mg'를 입력Gr신호의 위치에 각각 보간생성해서 출력한다. 상기 신호보간을 실행하는 신호보간회로(253)의 구체적인 예를 도 26에 도시한다. 도 26에 있어서 (401)은 지연회로, (402), (403)은 승산기, (404)는 가산기, K1, K2는 신호처리 제어회로(255)에서 공급되는 계수이다. 지연회로(401)은 입력신호를 2화소분 지연시켜 도 3a에 도시한 보간시에는 계수K1을 0으로, K2를 1로 각각 설정하고, 도 13b에 도시한 보간시에는 계수K1, K2를 각각 0.5로 설정한다.If the signal interpolation circuit 253 can perform the signal interpolation shown in Figs. 13A and 13B, it is not necessary to perform signal time series conversion by sampling shown in Figs. 11B, 11C and 11D. That is, when signals Mg and Gr are input in the time series represented by the line N in FIG. 11B, the signal interpolation circuit 253 outputs the signals Mg 'and Gr' after interpolation as shown in FIG. When signals Gr and Mg are input in the time series shown by the line N + 2, the signal interpolation circuit 253 places the signal Gr 'after interpolation in two input Gr signals at the position of the input Mg signal as shown in Fig. 13B, Interpolation signal Mg 'after interpolation is generated at two input Mg signals at the position of input Gr signal, and output. Fig. 26 shows a specific example of the signal interpolation circuit 253 which executes the signal interpolation. In Fig. 26, reference numeral 401 denotes a delay circuit, 402, 403 denotes a multiplier, 404 denotes an adder, and K1 and K2 denote coefficients supplied from the signal processing control circuit 255. In FIG. The delay circuit 401 delays the input signal by two pixels, and sets the coefficients K1 to 0 and K2 to 1 for interpolation shown in FIG. 3A, and sets the coefficients K1 and K2 for interpolation shown in FIG. 13B, respectively. Set to 0.5.

도 14는 본 발명의 다른 실시예를 도시한 블럭도로서, (90)은 촬상소자, (91)은 프레임메모리, (92)는 신호선택회로, (3)은 색보간회로, (4)는 RGB매트릭스이다. 촬상소자(90)은 도 14에 도시한 바와 같이 4개의 화소A, B, C, D(설명을 위한 각 화소신호에는 위치를 나타내는 번호를 붙이고 있다)로 구성되고, 화소 혼합리드에 의해 식신호를 생성할 수 있도록 A, B의 화소가 1라인마다 교대로 배열된다. 본 실시예에서는 상기 촬상소자(90)를 화소 혼랍리드하지 않고 각 화소신호를 그대로 리드하여 프레임메모리(91)에 각 화소신호를 페치한다. 상기 프레임메모리(91)에 페치된 신호에서 신호선택회로(92)에 의해 인접한 수직3라인의 신호를 추출하여 색보간회로(3)으로 공급한다. 다음에 색보간회로(3)에 의해 상기 수직 3라인의 신호에서 각 색신호A, B, C, D를 보간 생성한 후 RGB매트릭스회로(5)에 의해서 RGB신호로서 출력된다.Fig. 14 is a block diagram showing another embodiment of the present invention, where 90 is an image pickup device, 91 is a frame memory, 92 is a signal selection circuit, 3 is a color interpolation circuit, and 4 is a block diagram. RGB matrix. The image pickup device 90 is composed of four pixels A, B, C, and D (each pixel signal for explanation is given a number indicating a position) as shown in FIG. The pixels of A and B are alternately arranged every one line so as to generate. In this embodiment, each pixel signal is read as it is without the pixel blending of the image pickup device 90, and each pixel signal is fetched into the frame memory 91. From the signal fetched in the frame memory 91, signals of three adjacent vertical lines are extracted by the signal selection circuit 92 and supplied to the color interpolation circuit 3. Next, the color interpolation circuit 3 interpolates each of the color signals A, B, C, and D from the signals of the three vertical lines, and then outputs them as RGB signals by the RGB matrix circuit 5.

그런데, 상술한 바와 같이 색보간회로(3)에 의해 각 색신호를 보간생성하는 것이지만 이 보간방법에 대해서 설명한다. 우선, n2라인의 색신호 보간생성에서는 A, B의 화소가 없으므로 수직방향에서는 n1, n3라인의 신호에 의해 보간한다. n1, n3라인에서는 A, B의 화소의 위치가 다르기 때문에 수평방향에서는 각각 보간계수를 변경할 필요가 있다. 여기서, 보간후의 색신호의 1화소를 보간전의 신호의 수평 5화소에서 생성하는 것으로 하면, 예를 들어Incidentally, as described above, the color interpolation circuit 3 generates interpolation of each color signal, but this interpolation method will be described. First, since there are no pixels of A and B in the color signal interpolation generation of n2 lines, interpolation is performed by signals of n1 and n3 lines in the vertical direction. Since the positions of the pixels A and B are different in the n1 and n3 lines, it is necessary to change the interpolation coefficient in the horizontal direction. Here, suppose that one pixel of the color signal after interpolation is generated from five horizontal pixels of the signal before interpolation.

A=1/2(1/2A12+1/2A14)A = 1/2 (1 / 2A12 + 1 / 2A14)

+1/2(1/4A31+1/2A33+1/4A35)+1/2 (1 / 4A31 + 1 / 2A33 + 1 / 4A35)

B=1/2(1/4B11+1/2B13+1/4A15)B = 1/2 (1 / 4B11 + 1 / 2B13 + 1 / 4A15)

+1/2(1/2B32+1/2B34)+1/2 (1 / 2B32 + 1 / 2B34)

인 식에 의해 수평화소의 중심에 가중해서 보간할 수 있다. 또, C, D에 대해서는 n2라인에 존재하므로 수평방향만 중심으로 가중해서 보간생성한다. 즉,Recognition can be weighted to the center of the horizontal pixel and interpolated. In addition, since C and D exist in the n2 line, interpolation is generated by weighting only the horizontal direction. In other words,

C=1/2(1/2C21+C23+1/2C25)C = 1/2 (1 / 2C21 + C23 + 1 / 2C25)

D=1/2(D22+D24)D = 1/2 (D22 + D24)

로 된다.It becomes

다음에, n3라인에서의 1수평 주사기간의 색신호의 생성에서는 C, D의 화소가 없으므로 n2, n4라인에서 보간하고, A, B는 n3라인에서 보간생성한다. 즉,Next, in the generation of the color signal between one horizontal syringe in n3 lines, since there are no pixels C and D, interpolation is performed at n2 and n4 lines, and A and B are interpolated at n3 lines. In other words,

A=1/2(1/2A31+A33+1/2A35)A = 1/2 (1 / 2A31 + A33 + 1 / 2A35)

B=1/2(B32+B34)B = 1/2 (B32 + B34)

C=1/2(1/4C21+1/2C23+1/4C25)C = 1/2 (1 / 4C21 + 1 / 2C23 + 1 / 4C25)

+1/2(1/4C41+1/2C43+1/4C45)+1/2 (1 / 4C41 + 1 / 2C43 + 1 / 4C45)

D=1/2(21/D22+1/2D24)D = 1/2 (21 / D22 + 1 / 2D24)

+1/2(1/2D42+1/2D44)+1/2 (1 / 2D42 + 1 / 2D44)

로 된다.It becomes

이하, A, B의 화소배치가 라인마다 교대로 교체되는 것을 고려해서 n4라인에서는Hereinafter, considering that pixel arrangements of A and B are alternately replaced for each line, in the n4 line,

A=1/2(1/4A31+1/2A33+1/4A35)A = 1/2 (1 / 4A31 + 1 / 2A33 + 1 / 4A35)

+1/2(1/2A52+1/2A54)+1/2 (1 / 2A52 + 1 / 2A54)

B=1/2(1/2B32+1/2B34)B = 1/2 (1 / 2B32 + 1 / 2B34)

+1/2(1/4B51+1/2B53+1/4B55)+1/2 (1 / 4B51 + 1 / 2B53 + 1 / 4B55)

C=1/2(1/2C41+C23+1/2C45)C = 1/2 (1 / 2C41 + C23 + 1 / 2C45)

D=1/2(D42+D24)D = 1/2 (D42 + D24)

n5라인에서는on line n5

A=1/2(A52+A54)A = 1/2 (A52 + A54)

B=1/2(1/2B51+B53+1/2B55)B = 1/2 (1 / 2B51 + B53 + 1 / 2B55)

C=1/2(1/4C41+1/2C43+1/4C45)C = 1/2 (1 / 4C41 + 1 / 2C43 + 1 / 4C45)

+1/2(1/4C61+1/2C63+1/4C65)+1/2 (1 / 4C61 + 1 / 2C63 + 1 / 4C65)

D=1/2(1/2D42+1/2D44)D = 1/2 (1 / 2D42 + 1 / 2D44)

+1/2(1/2D62+1/2D64)+1/2 (1 / 2D62 + 1 / 2D64)

로 된다. 이후에 n2, n3, n4, n5라인에서의 보간계수를 순차 반복하는 것에 의해 색신호를 생성할 수 있다.It becomes Thereafter, the color signal can be generated by sequentially repeating the interpolation coefficients in the n2, n3, n4, and n5 lines.

이상 설명한 바와 같이, 본 실시예에 의하면 수직 3라인에서 색신호를 보간생성할 수 있으므로, 색신호의 수직해상도 저하가 적은 촬상장치를 실현할 수 있다. 또, 본 실시예에서는 4개의 색신호를 A, B, C, D로 해서 설명했지만, 예를 들면 Mg, G, Cy, Ye의 4색이 일반적이지만, 정상적인 색을 재생할 수 있는 것이면 특별히 색에 구애받지 않고, 또 보간계수에 대해서도 1예를 들었을 뿐이며 수직 3라인에서 색신호를 보간생성할 수 있는 계수이면 특별히 본 계수에 구애받을 필요도 없다.As described above, according to the present embodiment, color signals can be interpolated in three vertical lines, thereby realizing an image pickup device with less vertical resolution degradation of color signals. In the present embodiment, four color signals are described as A, B, C, and D. For example, four colors of Mg, G, Cy, and Ye are common, but any color can be reproduced in particular. In addition, the interpolation coefficient is only one example. If the coefficient is capable of interpolating color signals in three vertical lines, there is no need to be particularly limited to this coefficient.

도 15는 본 발명의 실시예를 도시한 블럭도로서, 도 14의 실시예와의 상이 점은 신호선택회로(92)를 1H지연회로 구성한 점이며, 동일기능, 동일동작의 것에는 동일신호, 동일부호로 나타내고, 상세한 설명은 생략한다.Fig. 15 is a block diagram showing an embodiment of the present invention, which is different from the embodiment of Fig. 14 in that the signal selection circuit 92 is constituted by a 1H delay circuit, and the same function and the same operation have the same signal, The same reference numerals are used, and detailed description is omitted.

여기서, 촬상소자가 도 16에 도시한 바와 같은 화소배치인 경우 도 15에 있어서 메모리에서 리드된 촬상소자의 화소배열에 따른 신호는 1H지연회로(2), (3)에 의해 지연된 1H지연신호, 2H지연신호와 함께 색보간회로(3)으로 공급되고, Mg, G, Ye, Cy의 각 보색을 보간생성한 후 R, G, B매트릭스회로(4)에 의해서 R, G, B신호로서 출력된다. 본 실시예에 있어서도 도 14의 실시예와 마찬가지로 색신호를 보간생성하면 n2라인에서는Here, in the case where the imaging device is a pixel arrangement as shown in Fig. 16, the signal according to the pixel arrangement of the imaging device read from the memory in Fig. 15 is a 1H delay signal delayed by the 1H delay circuits 2 and 3, It is supplied to the color interpolation circuit 3 together with the 2H delay signal, and interpolated to generate Mg, G, Ye and Cy, and then output as R, G and B signals by the R, G and B matrix circuits 4. do. Also in the present embodiment, when the color signal is interpolated similarly to the embodiment of FIG.

Mg=1/2(1/2Mg12+1/2Mg14)Mg = 1/2 (1 / 2Mg12 + 1 / 2Mg14)

+1/2(1/4Mg31+1/2Mg33+1/4Mg35)+1/2 (1 / 4Mg31 + 1 / 2Mg33 + 1 / 4Mg35)

G=1/2(1/4G11+1/2G13+1/4G15)G = 1/2 (1 / 4G11 + 1 / 2G13 + 1 / 4G15)

+1/2(1/2G32+1/2G34)+1/2 (1 / 2G32 + 1 / 2G34)

Ye=1/2(Ye22+Ye24)Ye = 1/2 (Ye22 + Ye24)

Cy=1/2(1/2Cy21+Cy23+1/2Cy25)Cy = 1/2 (1/2 Cy21 + Cy23 + 1/2 Cy25)

n3라인에서는In line n3

Mg=1/2(1/2Mg31+Mg33+1/2Mg35)Mg = 1/2 (1 / 2Mg31 + Mg33 + 1 / 2Mg35)

G=1/2(G32+G34)G = 1/2 (G32 + G34)

Ye=1/2(1/2Ye22+1/2Ye24)Ye = 1/2 (1 / 2Ye22 + 1 / 2Ye24)

+1/2(1/2Ye42+1/2Ye44)+1/2 (1 / 2Ye42 + 1 / 2Ye44)

Cy=1/2(1/4Cy21+1/2Cy23+1/4Cy25)Cy = 1/2 (1 / 4Cy21 + 1 / 2Cy23 + 1 / 4Cy25)

+1/2(1/4Cy41+1/2Cy43+1/4Cy45)+1/2 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

n4라인에서는In line n4

Mg=1/2(1/4Mg31+1/2Mg33+1/2Mg35)Mg = 1/2 (1 / 4Mg31 + 1 / 2Mg33 + 1 / 2Mg35)

+1/2(1/2Mg52+1/2Mg54)+1/2 (1 / 2Mg52 + 1 / 2Mg54)

G=1/2(1/2G32+1/2G34)G = 1/2 (1 / 2G32 + 1 / 2G34)

+1/2(1/4G51+1/2G53+1/4G55)+1/2 (1 / 4G51 + 1 / 2G53 + 1 / 4G55)

Ye=1/2(Ye42+Ye44)Ye = 1/2 (Ye42 + Ye44)

Cy=1/2(1/2Cy41+Cy43+1/4Cy45)Cy = 1/2 (1/2 Cy41 + Cy43 + 1/4 Cy45)

n5라인에서는on line n5

Mg=1/2(Mg52+Mg54)Mg = 1/2 (Mg52 + Mg54)

G=1/2(1/2G51+G53+1/2G55)G = 1/2 (1 / 2G51 + G53 + 1 / 2G55)

Ye=1/2(1/2Ye42+1/2Ye44)Ye = 1/2 (1 / 2Ye42 + 1 / 2Ye44)

+1/2(1/2Ye62+1/2Ye64)+1/2 (1 / 2Ye62 + 1 / 2Ye64)

Cy=1/2(1/4Cy41+1/2Cy43+1/4Cy45)Cy = 1/2 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

+1/2(1/4Cy61+1/2Cy63+1/4Cy65)+1/2 (1 / 4Cy61 + 1 / 2Cy63 + 1 / 4Cy65)

로 된다.It becomes

이후에, 도 14의 실시예와 마찬가지로 n2, n3, n4, n5라인에서의 보간계수를 순차 반복하는 것에 의해 색신호를 생성할 수 있다.Thereafter, similarly to the embodiment of FIG. 14, the color signal can be generated by sequentially repeating the interpolation coefficients on the n2, n3, n4, and n5 lines.

다음에, 상기 색보간회로(3)의 하나의 구체적인 예를 도 17에 의해 설명한다. (5), (6), (7)은 수평보간필터, (21)~(24)는 가산기, (25)~(28)은 스위치회로이다. 수평보간필터(5), (6), (7)은 1화소 지연회로(8)~(11), 계수기(12)~(16), (19), (20) 및 가산기(17), (18)로 구성되어 있고, 2탭 처리와 3탭 처리를 출력한다. 메모리에서 리드된 원신호, 1H지연신호 및 2H지연신호는 각각 수평보간필터(5), (6), (7)로 공급되고, 원신호, 2H지연신호의 필터처리출력은 가산기(21)~(24)에 의해 2탭 출력, 3탭 출력을 각각 가산한 후, 또 1H지연신호의 필터처리출력은 직접 스위치회로(25)~(28)에 입력된다. 여기에서, 스위치회로(25)~(28)을 1H마다 4H주기로 순차 전환하도록 제어신호를 공급하는 것에 의해 상술한 보간식을 만족하는 각 보색을 출력할 수 있다.Next, one specific example of the color interpolation circuit 3 will be described with reference to FIG. (5), (6) and (7) are horizontal interpolation filters, (21) to (24) adders, and (25) to (28) switch circuits. The horizontal interpolation filters 5, 6, and 7 are composed of one pixel delay circuits 8 to 11, counters 12 to 16, 19, 20, and adders 17, ( 18) and outputs 2-tap processing and 3-tap processing. The original signal, the 1H delay signal and the 2H delay signal read out from the memory are supplied to the horizontal interpolation filters 5, 6, and 7, respectively, and the filter processing outputs of the original signal and the 2H delay signal are added to the adders 21 through. After adding the 2-tap output and 3-tap output, respectively, by 24, the filter processing output of the 1H delay signal is directly input to the switch circuits 25 to 28. Here, by supplying a control signal to sequentially switch the switch circuits 25 to 28 at 4H cycles per 1H, each complementary color that satisfies the above interpolation equation can be output.

또한, 이 색보간 회로의 하나의 구체적인 예에서는 1차원 필터를 조합해서 실현했지만, 상술한 보간식을 만족하면 특별히 구성에 구애받지 않고, 예를 들면 2차원 필터 등에 의해 실현할 수 있는 것은 물론이다.In addition, although one specific example of this color interpolation circuit is implemented by combining a one-dimensional filter, it is a matter of course that the two-dimensional filter can be realized, for example, regardless of the configuration if the above-described interpolation equation is satisfied.

또, 본 실시예에서는 수평 5화소를 사용해서 보간하도록 설명했지만, 예를 들면 3화소 또는 7화소 등 필요한 신호대역에 따라서 각 보색을 보간생성해도 아무런 지장이 없다.In the present embodiment, the interpolation is performed using five horizontal pixels. However, interpolation of each of the complementary colors in accordance with the required signal band such as three pixels or seven pixels is no problem.

이상 기술한 바와 같이, 본 실시예에 의하면 도 14의 실시예와 마찬가지로 수직 3라인에서 R, G, B신호를 생성할 수 있으므로, 색신호의 수직해상도의 저하가 적은 촬상장치를 실현할 수 있다.As described above, according to this embodiment, since the R, G, and B signals can be generated in three vertical lines as in the embodiment of Fig. 14, an image pickup device with less degradation in the vertical resolution of the color signal can be realized.

도 18은 본 발명의 다른 실시예를 도시한 블럭도이다. 본 실시예의 도 14의 실시예와의 상이점은 수직 5라인의 신호에서 각 보색을 보간생성하도록 구성한 점이며, 동일 기능, 동일 동작을 하는 것은 동일 기호, 동일 부호로 나타내고, 상세한 설명은 생략한다.18 is a block diagram illustrating another embodiment of the present invention. The difference from the embodiment of FIG. 14 of this embodiment is a point configured to generate interpolation colors in signals of five vertical lines. The same function and the same operation are indicated by the same symbols and the same reference numerals, and detailed description thereof will be omitted.

도 18에 있어서 색보간회로(33)에는 원신호와 1H지연회로(29)~(32)에 의해 지연된 1H지연신호, 2H지연신호, 3H지연신호, 4H지연신호가 각각 입력되어 보색 Mg, G, Ye, Cy가 생성되지만, 이 동작을 도 19를 사용해서 설명한다.In Fig. 18, the original signal and the 1H delayed signal, 2H delayed signal, 3H delayed signal, and 4H delayed signal delayed by the 1H delay circuits 29 to 32 are input to the color interpolation circuit 33, respectively. , Ye, and Cy are generated, but this operation will be described using FIG. 19.

도 19는 촬상소자의 화소배열상에 배열한 각 화소신호에 번호를 붙여서 도시한 도면으로서, 1수평 주사기간의 신호를 수직 5라인, 수평 5화소에서 생성하는 경우를 설명한다. 우선, n3라인에서의 1수평 주사기간의 색신호의 생성에서는 Cy, Ye의 화소신호가 존재하지 않으므로, Cy, Ye는 n2, n4라인에서 보간한다. 또, Mg, G에 대해서는 n3라인의 신호를 중심으로 가중해서, n1, n5라인에서 보간한다. 따라서,Fig. 19 is a diagram showing the numbering of each pixel signal arranged on the pixel array of the image pickup device, and illustrates the case where signals between one horizontal syringe are generated at five vertical lines and five horizontal pixels. First, since the pixel signals Cy and Ye do not exist in generating a color signal between one horizontal syringe in n3 lines, Cy and Ye are interpolated in n2 and n4 lines. The weights of Mg and G are centered around the signal of n3 lines, and interpolated between n1 and n5 lines. therefore,

Mg=1/4(1/2Mg12+1/2Mg14)Mg = 1/4 (1 / 2Mg12 + 1 / 2Mg14)

+1/2(1/4Mg31+1/2Mg33+1/4Mg35)+1/2 (1 / 4Mg31 + 1 / 2Mg33 + 1 / 4Mg35)

+1/4(1/2Mg52+1/2Mg54)+1/4 (1 / 2Mg52 + 1 / 2Mg54)

G=1/4(1/4G11+1/2G13+1/4G15)G = 1/4 (1 / 4G11 + 1 / 2G13 + 1 / 4G15)

+1/2(1/2G32+1/2G34)+1/2 (1 / 2G32 + 1 / 2G34)

+1/4(1/4G51+1/2G53+1/4G55)+1/4 (1 / 4G51 + 1 / 2G53 + 1 / 4G55)

Ye=1/2(1/2Ye22+1/2Ye24)Ye = 1/2 (1 / 2Ye22 + 1 / 2Ye24)

+1/2(1/2Ye42+1/2Ye44)+1/2 (1 / 2Ye42 + 1 / 2Ye44)

Cy=1/2(1/4Cy21+1/2Cy23+1/4Cy25)Cy = 1/2 (1 / 4Cy21 + 1 / 2Cy23 + 1 / 4Cy25)

+1/2(1/4Cy41+1/2Cy43+1/4Cy45)+1/2 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

로 된다. 다음에, n4라인에서는 Mg, G신호를 n3, n5라인에서 보간하고, Cy, Ye신호는 n4라인을 중심으로 가중해서 n2, n6라인에서 보간한다. 따라서,It becomes Next, in the n4 line, Mg and G signals are interpolated in n3 and n5 lines, and the Cy and Ye signals are weighted around the n4 line and interpolated in n2 and n6 lines. therefore,

Mg=1/2(1/4Mg31+1/2Mg33+1/4Mg35)Mg = 1/2 (1 / 4Mg31 + 1 / 2Mg33 + 1 / 4Mg35)

+1/2(1/2Mg52+1/2Mg54)+1/2 (1 / 2Mg52 + 1 / 2Mg54)

G=1/2(1/2G32+1/2G34)G = 1/2 (1 / 2G32 + 1 / 2G34)

+1/2(1/4G51+1/2G53+1/4G55)+1/2 (1 / 4G51 + 1 / 2G53 + 1 / 4G55)

Ye=1/4(1/2Ye22+1/2Ye24)Ye = 1/4 (1 / 2Ye22 + 1 / 2Ye24)

+1/2(1/2Ye42+1/2Ye44)+1/2 (1 / 2Ye42 + 1 / 2Ye44)

+1/4(1/2Ye62+1/2Ye64)+1/4 (1 / 2Ye62 + 1 / 2Ye64)

Cy=1/4(1/4Cy21+1/2Cy23+1/4Cy25)Cy = 1/4 (1 / 4Cy21 + 1 / 2Cy23 + 1 / 4Cy25)

+1/2(1/4Cy41+1/2Cy43+1/4Cy45)+1/2 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

+1/4(1/4Cy61+1/2Cy63+1/4Cy65)+1/4 (1 / 4Cy61 + 1 / 2Cy63 + 1 / 4Cy65)

로 된다. 이후, 도 14의 실시예와 마찬가지로 Mg, G의 화소배치가 라인마다 교체되는 것을 고려해서 n5라인에서는It becomes Subsequently, as in the embodiment of FIG. 14, in consideration of the fact that the pixel arrangement of Mg and G is replaced for each line, in the n5 line

Mg=1/4(1/4Mg31+1/2Mg33+1/4Mg35)Mg = 1/4 (1 / 4Mg31 + 1 / 2Mg33 + 1 / 4Mg35)

+1/2(1/2Mg52+1/2Mg54)+1/2 (1 / 2Mg52 + 1 / 2Mg54)

+1/4(1/4Mg71+1/2Mg73+1/4Mg75)+1/4 (1 / 4Mg71 + 1 / 2Mg73 + 1 / 4Mg75)

G=1/4(1/2G32+1/2G34)G = 1/4 (1 / 2G32 + 1 / 2G34)

+1/2(1/4G51+1/2G55+1/4G55)+1/2 (1 / 4G51 + 1 / 2G55 + 1 / 4G55)

+1/4(1/2G72+1/2G74)+1/4 (1 / 2G72 + 1 / 2G74)

Ye=1/2(1/2Ye42+1/2Ye44)Ye = 1/2 (1 / 2Ye42 + 1 / 2Ye44)

+1/2(1/2Ye62+1/2Ye64)+1/2 (1 / 2Ye62 + 1 / 2Ye64)

Cy=1/2(1/4Cy41+1/2Cy43+1/4Cy45)Cy = 1/2 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

+1/2(1/4Cy61+1/2Cy63+1/4Cy65)+1/2 (1 / 4Cy61 + 1 / 2Cy63 + 1 / 4Cy65)

n6라인에서는In line n6

Mg=1/2(1/2Mg52+1/2Mg54)Mg = 1/2 (1 / 2Mg52 + 1 / 2Mg54)

+1/2(1/4Mg71+1/2Mg73+1/4Mg75)+1/2 (1 / 4Mg71 + 1 / 2Mg73 + 1 / 4Mg75)

G=1/2(1/4G51+1/2G53+1/4G55)G = 1/2 (1 / 4G51 + 1 / 2G53 + 1 / 4G55)

+1/2(1/2G72+1/2G74)+1/2 (1 / 2G72 + 1 / 2G74)

Ye=1/2(1/2Ye42+1/2Ye44)Ye = 1/2 (1 / 2Ye42 + 1 / 2Ye44)

+1/2(1/2Ye62+1/2Ye64)+1/2 (1 / 2Ye62 + 1 / 2Ye64)

+1/4(1/2Ye82+1/2Ye84)+1/4 (1 / 2Ye82 + 1 / 2Ye84)

Cy=1/4(1/4Cy41+1/2Cy43+1/4Cy45)Cy = 1/4 (1 / 4Cy41 + 1 / 2Cy43 + 1 / 4Cy45)

+1/2(1/4Cy61+1/2Cy63+1/4Cy65)+1/2 (1 / 4Cy61 + 1 / 2Cy63 + 1 / 4Cy65)

+1/4(1/4Cy81+1/2Cy83+1/4Cy85)+1/4 (1 / 4Cy81 + 1 / 2Cy83 + 1 / 4Cy85)

로 된다. 이와 같이 도 14의 실시예와 마찬가지로 4라인마다 보간계수를 전환하는 것에 의해 순차 색신호를 생성할 수 있다.It becomes As described in the embodiment of Fig. 14, the interpolation coefficient is changed for every four lines to generate the sequential color signals.

또, 상기 식의 보간계수는 수직 5라인에서 색신호를 보간생성하는 계수의 1예이며, 특별히 본 계수에 구애받지는 않는다.The interpolation coefficient of the above formula is one example of the coefficient for interpolating the color signal in five vertical lines, and is not particularly limited to this coefficient.

이상 기술한 바와 같이, 본 발명에 의하면 수직 5라인에서 각 보색에 가중해서 보간생성하므로, 수직방향에서의 필터특성도 수평방향과 마찬가지로 2탭, 3탭 특성으로 되므로, 수평, 수직방향에서 보간특성이 일치된 신호처리를 실현할 수 있다.As described above, according to the present invention, since the interpolation is generated by weighting each complementary color in five vertical lines, the filter characteristics in the vertical direction also become two-tap and three-tap characteristics as in the horizontal direction, and thus interpolation characteristics in the horizontal and vertical directions. This matched signal processing can be realized.

도 20은 본 발명의 다른 실시예를 도시한 블럭도이다. 본 실시예의 제 1실시예와의 상이점은 적응 색처리 회로를 마련하고, 수직에지에서의 색므와레를 경감하도록 구성한 점이며, 동일 기능, 동일 동작을 하는 것은 동일 부호로 나타내고, 상세한 설명은 생략한다.20 is a block diagram illustrating another embodiment of the present invention. The difference from the first embodiment of this embodiment is that the adaptive color processing circuit is provided and configured to reduce the color moire at the vertical edges. The same functions and the same operations are denoted by the same reference numerals, and detailed description is omitted. do.

도 20에 있어서 (34)는 적응색 처리회로로서, 원신호, 1H지연신호, 2H지연신호가 입력되고, 수직에지에서는 각각 적정한 레벨로 이득조정한 후, 상기 3라인의 신호를 색보간회로(3)으로 공급한다. 다음에, 적응색 처리회로(34)의 동작을 도 21에 의해 상세하게 설명한다. 도 21에 있어서, (35)~(37)은 기준신호 생성회로, (38)은 계수합성회로, (39)~(41)은 승산회로이다. 기준신호 생성회로(35)~(37)은 각 라인마다의 기준으로 되는 신호레벨을 검출하는 회로로서, 이들 기준신호에 따른 비율로 각 라인의 이득 조정을 실행하므로 동일 조성의 신호로 할 필요가 있다.In Fig. 20, reference numeral 34 denotes an adaptive color processing circuit in which an original signal, a 1H delay signal, and a 2H delay signal are input, and gains are adjusted to appropriate levels at vertical edges, and then the signals of the three lines are converted into a color interpolation circuit ( 3) to supply. Next, the operation of the adaptive color processing circuit 34 will be described in detail with reference to FIG. In Fig. 21, reference numerals 35 to 37 denote reference signal generating circuits, reference numeral 38 denotes coefficient synthesis circuits, and reference numerals 39 to 41 are multiplication circuits. The reference signal generation circuits 35 to 37 are circuits for detecting the signal level serving as the reference for each line. The reference signal generation circuits 35 to 37 perform the gain adjustment of each line at a ratio corresponding to these reference signals, so that signals having the same composition need to be used. have.

MG+G=R+V+GMG + G = R + V + G

Ye+Cy=R+B+2GYe + Cy = R + B + 2G

이므로, Mg, G라인의 G를 2배해서So, double the G of Mg, G line

MG+2G=R+B+2GMG + 2G = R + B + 2G

로 하는 것에 의해 조성이 일치한 휘도신호를 얻는다. 여기에서, 원신호, 1H지연신호, 2H지연신호를 각각 S(n), S(n-1), S(n-2)로 하면 기준신호 생성회로(35)~(37)의 출력에는 각각의 라인의 기준신호Y(n), Y(n-1), Y(n-2)가 형성된다. 이들 기준신호Y(n), Y(n-1), Y(n-2)는 계수합성회로(38)로 공급되고, 원신호S(n), 1H지연신호S(n-1), 2H지연신호S(n-2)에 대한 이득계수 k1, k2, k3이 생성된다. 이들 계수 k1, k2, k3, k4은 각각 승산회로(39)~(41)에 의해 원신호S(n), 1H지연신호S(n-1), 2H지연신호S(n-2)과 승산된다.By using this method, the luminance signal having the same composition is obtained. Here, when the original signal, the 1H delay signal, and the 2H delay signal are S (n), S (n-1), and S (n-2), respectively, the outputs of the reference signal generation circuits 35 to 37 are respectively applied. The reference signals Y (n), Y (n-1), and Y (n-2) of the line are formed. These reference signals Y (n), Y (n-1) and Y (n-2) are supplied to the coefficient synthesizing circuit 38, and the original signals S (n), 1H delay signals S (n-1), 2H Gain coefficients k1, k2, and k3 for delay signal S (n-2) are generated. These coefficients k1, k2, k3, and k4 are multiplied by the original signals S (n), 1H delay signal S (n-1), and 2H delay signal S (n-2) by the multiplication circuits 39 to 41, respectively. do.

이와 같이 해서, 각 라인의 이득계수가 생성되는 것이지만, 보간된 신호의 레벨의 원신호의 레벨 이상으로 크게 되면 S/N의 저하의 원인으로 되기 때문에 보간된 신호의 레벨이 원신호의 레벨 이상으로 되지 않게 계수를 생성하도록 구성하고 있다. 예를 들면, 계수 k1, k2, k3은 다음과 같이 설정한다.In this way, although the gain coefficient of each line is generated, if the level of the interpolated signal is larger than the level of the original signal, the level of the interpolated signal is greater than or equal to the level of the original signal since it causes a decrease in S / N. It is configured to generate coefficients. For example, the coefficients k1, k2, and k3 are set as follows.

k1=(Yn-1)/MAX(Y(n), Y(n-1))k1 = (Yn-1) / MAX (Y (n), Y (n-1))

k2={Y(n)MAX(Y(n-1), Y(n)+Y(n-2)k2 = {Y (n) MAX (Y (n-1), Y (n) + Y (n-2)

/MAX(Y(n-1), Y(n-2)}/2/ MAX (Y (n-1), Y (n-2)} / 2

k3=Y(n-1)/MAX(Y(n-1), Y(n-2))k3 = Y (n-1) / MAX (Y (n-1), Y (n-2))

여기에서, 계수가 k1인 경우 분모가 MAX(Y(n), Y(n-1)이므로, Y(n-1)≤Y(n)이면 k1=Y(n-1)/Y(n)≤1로 되고, Y(n-1)Y(n)이라도 k1은 1보다 크게 되지 않는다. 따라서, 보간에 의해서 원신호S(n)이 증폭되는 일은 없다. 계수k3에 대해서도 마찬가지이다. 또, k2도 1보다 크게 되지 않지만 정확한 색재현을 얻기 위해 S(n-1)도 레벨보정하여 S(n), S(n-2)와의 레벨을 동일하게 하고 있다.Here, when the coefficient is k1, the denominator is MAX (Y (n), Y (n-1), so if Y (n-1) ≤ Y (n), k1 = Y (n-1) / Y (n) It becomes ≤ 1 and even if Y (n-1) Y (n), k1 does not become larger than 1. Therefore, the original signal S (n) is not amplified by interpolation, and the same applies to the coefficient k3. Although k2 does not become larger than 1, in order to obtain accurate color reproduction, S (n-1) is also level corrected so that the levels of S (n) and S (n-2) are the same.

도 22는 도 21에 있어서의 기준신호 생성회로의 하나의 구체적인 예를 도시한 블럭도로서, (42)~(45)는 1화소 지연회로, (46)~(55)는 계수회로, (56)~(60)은 스위치회로, (61)은 가산기이다. 여기에서, 도 4의 화소배치에 의해 신호가 출력되는 것으로 하면 각 라인의 기준신호는 Mg와 G가 출력되는 라인 S(n), S(n-2)에서는FIG. 22 is a block diagram showing one specific example of the reference signal generating circuit in FIG. 21, wherein (42) to (45) are one pixel delay circuits, (46) to (55) are counting circuits, and (56). ) To 60 are switch circuits, and 61 is an adder. Here, assuming that signals are output by the pixel arrangement of FIG.

S(n)=G+Mg+2G+Mg+GS (n) = G + Mg + 2G + Mg + G

=2R+2B+4G= 2R + 2B + 4G

S(N-2)=1/2Mg+2G+Mg+2G+1/2MgS (N-2) = 1 / 2Mg + 2G + Mg + 2G + 1 / 2Mg

=2R+2B+4G= 2R + 2B + 4G

로 된다. 또, Ye와 Cy가 출력되는 라인S(n-1)에서는It becomes In the line S (n-1) where Ye and Cy are outputted,

S(n-1)=1/2Ye+Cy+Ye+Cy+1/2YeS (n-1) = 1 / 2Ye + Cy + Ye + Cy + 1 / 2Ye

=2R+2B+4G= 2R + 2B + 4G

로 되도록 스위치회로(56)~(60)을 전환한다. 즉, 4H마다 계수를 전환해가는 것에 의해 각 라인의 조성이 일치한 기준신호를 얻을 수 있다.The switch circuits 56 to 60 are switched so as to be. In other words, by switching the coefficients every 4H, a reference signal having the same composition of each line can be obtained.

도 23은 도 21에 있어서의 계수합성회로(38)의 하나의 구체적인 예를 도시한 블럭도로서, (62), (63)은 비교회로, (64)~(67)은 제산기, (68)은 가산기, (69)은 계수기이다.FIG. 23 is a block diagram showing one specific example of the coefficient synthesizing circuit 38 in FIG. 21, wherein (62) and (63) are comparison circuits, (64) to (67) are dividers, and (68). ) Is an adder, and 69 is a counter.

도 23에 있어서, 입력되는 기준신호Y(n)과 Y(n-1)이 비교회로(62)에 의해 비교되고, 상기 기준신호가 큰 쪽이 선택되고 출력된다. 또, 상기 비교회로(62)의 출력신호는 제산회로(65)로 공급되어 기준신호Y(n-1)을 제산한다. 상기 제산회로(65)의 출력신호 k1로 된다. 마찬가지로 입력되는 기준신호Y(n-1)과 Y(n-2)에서 비교회로(63) 및 제산회로(66)에 의해서 k3이 생성된다. 또, 비교회로(62)의 출력신호는 제산회로(64)로 공급되어 기준신호Y(n)을 제산하고, 비교회로(63)의 출력신호는 제산회로(67)로 공급되어 기준신호 Y(n-2)를 제산한다. 상기 제산회로(64), (67)의 출력은 계수기(69)에 의해서 가산평균 되어 상기 계수 k2가 얻어진다.In Fig. 23, the input reference signals Y (n) and Y (n-1) are compared by the comparison circuit 62, and the larger one of the reference signals is selected and output. The output signal of the comparison circuit 62 is supplied to the division circuit 65 to divide the reference signal Y (n-1). The output signal k1 of the division circuit 65 is obtained. Similarly, k3 is generated by the comparison circuit 63 and the division circuit 66 in the input reference signals Y (n-1) and Y (n-2). The output signal of the comparison circuit 62 is supplied to the division circuit 64 to divide the reference signal Y (n), and the output signal of the comparison circuit 63 is supplied to the division circuit 67 to supply the reference signal Y ( divides n-2). The outputs of the division circuits 64 and 67 are added and averaged by the counter 69 to obtain the coefficient k2.

이상 설명한 바와 같이, 본 실시예어서는 수직에지가 있는 경우에도 수직 방향의 상관성이 저하하지 않으므로 S/N의 저하없이 수직 색므와레를 경감시킬 수 있음과 동시에 색신호의 수직 색해상도의 저하가 적은 촬상장치를 실현할 수 있다.As described above, in the present embodiment, even when there is a vertical edge, the correlation in the vertical direction does not decrease, so that the vertical color muware can be reduced without a decrease in S / N, and the vertical color resolution of the color signal is reduced. The imaging device can be realized.

도 24는 본 발명의 다른 실시예를 도시한 블럭도로서, 상기 실시예와의 상이점은 촬상소자에서 얻은 화상신호를 컴퓨터에 페치하고, 소프트웨어에 의해 처리한 후 출력하도록 구성한 점이며, 동일 기능, 동일 동작을 하는 것에는 동일기호, 동일 부호로 나타내고, 그 상세한 설명은 생략한다.FIG. 24 is a block diagram showing another embodiment of the present invention, wherein a difference from the above embodiment is that the image signal obtained from the image pickup device is fetched to a computer, processed by software, and then outputted after the same function. The same operation is denoted by the same symbol and the same symbol, and detailed description thereof is omitted.

도 24에 있어서, (73)은 인터페이스회로, (74)는 컴퓨터, (75)는 메모리이다. 촬상소자(90)에서 화소혼합되지 않고 리드된 신호는 프레임메모리(91)에 기억되고, 이 프레임메모리에 기억된 신호는 인터페이스회로(73)을 거쳐서 화상데이타로써 컴퓨터(74)로 공급된다. 상기 컴퓨터(74)에 있어서 상기 화상데이타를 처리하는 것이지만, 예를 들면 도 14의 실시예의 보간식에 따라서 소프트웨어 처리하는 것에 의해 보간한 색신호 데이타를 생성할 수 있다. 또, 다른 실시예에 있어서도 신호의 연산처리를 위해 소프트웨어 처리를 용이하게 실행할 수 있는 것은 물론이다.In Fig. 24, 73 is an interface circuit, 74 is a computer, and 75 is a memory. The signal read out from the image pickup device 90 without pixel mixing is stored in the frame memory 91, and the signal stored in the frame memory is supplied to the computer 74 as image data via the interface circuit 73. Although the computer 74 processes the image data, it is possible, for example, to generate interpolated color signal data by software processing according to the interpolation equation of the embodiment of FIG. In addition, of course, in the other embodiments, software processing can be easily executed for signal processing.

이와 같이, 소프트웨어에 의해 생성한 색신호데이타를 인터페이스회로(73)을 거쳐서 메모리(75)로 공급하고, 그 후 소정 시간에 상기 메모리(75)에서 신호를 출력하는 것에 의해 각 화소의 색신호를 보간생성할 수 있다.In this way, the color signal data generated by the software is supplied to the memory 75 via the interface circuit 73, and then a signal is output from the memory 75 at a predetermined time to interpolate the color signals of each pixel. can do.

본 실시예에 의하면, 소프트웨어에 의해 색신호를 보간생성할 수 있으므로, 하드웨어의 변경없이 본 발명의 다른 실시예에서 기술한 각 처리를 간단히 실행할 수 있어 요구되는 화질에 따라서 설계의 자유도가 우수한 촬상장치를 실현할 수 있다. 또한, 본 실시예에서는 각 화소신호를 보간생성하도록 설명했지만 RGB신호 또는 색차신호R-Y, B-Y신호의 생성까지 소프트웨어로 실행하더라도 좋은 것은 물론이고, 컴퓨터의 처리속도에 따라서 실시간처리, 저속처리를 적절하게 사용할 수도 있다.According to this embodiment, since the color signal can be interpolated by software, each process described in another embodiment of the present invention can be easily executed without changing the hardware, and an imaging device having excellent design freedom can be provided according to the required image quality. It can be realized. In addition, although the present embodiment has been described to generate interpolation of each pixel signal, it is also possible to perform generation of RGB signals, color difference signals RY, BY signals by software, and real-time processing and low-speed processing may be appropriately performed according to the processing speed of the computer. Can also be used.

도 25는 본 발명의 다른 실시예를 도시한 블럭도로서, 상술한 실시예에 의해 생성한 RGB신호에서 색차신호R-Y, B-Y를 생성하는 1예이다. 도 25에 있어서, (76), (77), (78), (79), (80), (81)은 승산회로, (82), (83)은 가산회로이다. 상기 RGB신호는 승산회로(76), (77), (78) 및 승산회로(79), (80), (81)로 각각 공급되고 상기 승산회로(76), (77), (78)에서는 순차 0.7-0.59, -0.11배하고, 또 상기 승산회로(79), (80), (81)에서는 순차 -0.3, -0.59, 0.89배해서 출력한다. 상기 출력된 신호는 가산회로(82), (83)에서 각각 가산되어 출력된다. 즉, 가산회로(82)의 출력에는FIG. 25 is a block diagram showing another embodiment of the present invention, in which the color difference signals R-Y and B-Y are generated from the RGB signals generated by the above-described embodiment. In Fig. 25, 76, 77, 78, 79, 80, and 81 are multiplication circuits, and 82 and 83 are addition circuits. The RGB signals are supplied to the multiplication circuits 76, 77, 78 and the multiplication circuits 79, 80, 81, respectively, and in the multiplication circuits 76, 77, 78, The order is 0.7-0.59, -0.11 times, and the multiplication circuits 79, 80, and 81 sequentially output -0.3, -0.59, and 0.89 times. The output signals are added by the addition circuits 82 and 83, respectively, and output. That is, the output of the addition circuit 82

0.7R-0.59G-0.11B0.7R-0.59G-0.11B

인 신호가, 또 가산회로(83)의 출력에는Signal to the output of the addition circuit 83

0.89B-0.59G-0.3R0.89B-0.59G-0.3R

인 신호가 얻어진다. 이들 2개의 식으로 표시되는 신호는 각각 R-Y, B-Y신호이다. 또한, 상기 승산회로의 승산계수를 각각 0.3, 0.59, 0.11로 하는 것에 의해,Is obtained. The signals represented by these two equations are R-Y and B-Y signals, respectively. Further, by setting the multiplication coefficient of the multiplication circuit to 0.3, 0.59 and 0.11, respectively.

0.3R+0.59G+0.11B0.3R + 0.59G + 0.11B

인 휘도신호Y를 얻을 수 있는 것도 물론이다.It goes without saying that the luminance signal Y can be obtained.

이상 설명한 바와 같이, 본 실시예에 의하면 RGB신호 뿐만 아니라 색차신호R-Y, B-Y 또는 휘도신호Y도 생성할 수 있다. 또한, 본 실시예에 있어서 도 제5실시예와 같이 컴퓨터에 화상신호를 페치하고, 소프트웨어에 의해 휘도신호를 생성할 수 있는 것은 물론이다.As described above, according to this embodiment, not only the RGB signal but also the color difference signal R-Y, B-Y or the luminance signal Y can be generated. In addition, in the present embodiment, as in the fifth embodiment, the image signal can be fetched to the computer and the luminance signal can be generated by software.

이상은 프레임정보를 손실시키지 않고 정지화상을 기록하는(Full모드라고 한다) 실시예이고, 다음에 화질의 저하를 수반하지만 적은 메모리용량으로 정지 화상을 기록하는(Economy모드라고 한다) 실시예를 설명한다.The above is an embodiment in which a still image is recorded (called a full mode) without losing the frame information. Next, an embodiment in which a still image is recorded (referred to as an economy mode) with a small memory capacity accompanied by a deterioration in image quality is described. do.

촬상소자(104)는 정지화상 촬상시에도 상술한 일반적인 화소혼합리드에 의해서 신호를 출력한다. 촬상소자(104)에서 출력된 신호는 도 1의 실시예에 있어서 메모리 제어회로(109)에 의해서 2개에 1개의 비율로 수평방향으로 시닝(thinning)해서 메모리(108)에 기록하고, 메모리(108)에서 리드한 신호에 움직임화상 촬상시와 마찬가지의 매트릭스처리를 실시해서 휘도신호와 색차신호를 생성한다. 또, 도 12의 실시예에 있어서는 신호보간회로(253)에서 2개의 1개의 비율로 수평 방향으로 신호보간을 실행해서 신호수를 반으로 줄여 메모리(254)에 기록한다.The imaging device 104 outputs a signal by the above-described general pixel mixed lead even in still image pick-up. The signals output from the image pickup device 104 are thinned in the horizontal direction at a ratio of two to one by the memory control circuit 109 in the embodiment of FIG. 1 to be written to the memory 108, and the memory ( The signal read out in step 108 is subjected to the same matrix processing as in motion image pickup to generate a luminance signal and a color difference signal. In the embodiment of Fig. 12, the signal interpolation circuit 253 performs signal interpolation in the horizontal direction at two ratios, and the number of signals is cut in half and written to the memory 254.

이상의 동작에 의해 Full모드에 비해서 수직 및 수평방향의 신호수를 각각 1/2로 할 수 있으므로, 메모리(108), (254)에 4배의 매수의 정지화상을 기록할 수 있다. 상기 Full모드와 Economy모드는 Full/Economy전환스위치(119)로 전환하고, 어느 모드에 있는지에 따라서 메모리(108), (254)에 앞으로 몇매의 정지화상을 기록할 수 있는지를 뷰파인더(116)에 표시한다. 또, 어느 모드에 있는지를 뷰파인더(116)에 표시한다.By the above operation, since the number of signals in the vertical and horizontal directions can be 1/2, respectively, compared to the full mode, four times the number of still images can be recorded in the memory 108,254. The full mode and the economy mode are switched to the full / economy switching switch 119, and the viewfinder 116 shows how many still images can be recorded in the memory 108 and 254 depending on which mode is present. Mark on. In addition, the viewfinder 116 displays which mode it is in.

도 27에 본 발명의 다른 실시예를 도시한다. 도 27은 화이트 밸런스회로(215)의 내부구성을 도시한 도면으로서, (303)은 R-앰프, (304)는 B-앰프, (305)는 이득제어회로, (306)은 R-Y검파회로, (307)은 B-Y검파회로이다. 본 발명에 있어서의 화이트 밸런스 제어는 색차 매트릭스회로(216)에서 생성한 R-Y, B-Y의 색차신호에서 R-Y검파회로(306), B-Y검파회로(307)에서 화이트어긋남 판별을 실행하여 얻어진 화이트 어긋남정보에 따라서 이득제어회로(305)가 R-앰프(303) 및 B-앰프(304)의 이득을 제어하는 것에 의해 실행하고 있다. 그리고, 셔터버튼(111)이 눌려진 경우에는 셔터 온(ON)하기 직전의 1필드 또는 복수필드의 평균에서 산출한 R-앰프(303), B-앰프(304)의 이득을 촬상소자(104)에서 리드한 화상신호와 함께 메모리(108)에 기록한다. 그리고, 재생시에는 메모리(108)에 기록한 상기 이득에 R-앰프(303), B-앰프(304)를 설정해서 영상신호를 생성한다.27 shows another embodiment of the present invention. 27 is a diagram showing the internal configuration of the white balance circuit 215, where 303 is an R-amp, 304 is a B-amp, 305 is a gain control circuit, 306 is an RY detection circuit, 307 is a BY detection circuit. In the present invention, the white balance control is applied to the white shift information obtained by performing white shift discrimination by the RY detection circuit 306 and the BY detection circuit 307 on the RY and BY color difference signals generated by the color difference matrix circuit 216. Therefore, the gain control circuit 305 executes by controlling the gains of the R-amp 303 and the B-amp 304. When the shutter button 111 is pressed, the image pickup device 104 obtains the gains of the R-amp 303 and the B-amp 304 calculated from the average of one field or a plurality of fields immediately before the shutter is turned on. The data is written to the memory 108 together with the image signal read by. At the time of reproduction, the R-amp 303 and the B-amp 304 are set to the gain recorded in the memory 108 to generate a video signal.

도 28~도 30에 본 발명의 다른 실시예를 도시한다. 동일 도면은 신호처리회로(114)에서 출력하는 디지탈 영상신호를 도시한 도면이고, 도 28a, 도 28b, 도 28c는 휘도신호/색차신호로 출력하는 경우의 예이고, 도 29a, 도 29b는 R/G/B신호로서의 출력예, 도 30a, 도 30b는 촬상소자(104)의 색필터에 대응하는 신호로서의 출력예이다. 도 28a는 일반적인 휘도/색차신호(4:2:2 디지탈)의 추출방법으로서, Y, R-Y, B-Y 모두 각각 출력하고 있다. 도 28b는 R-Y, B-Y의 색차 신호를 순차화회로(308)에서 순차화해서 출력한 도면이다. 또, 도 28c는 Y, R-Y, B-Y의 모든 신호를 순차화해서 출력한 도면이다. 도 29a는 R, G, B의 이득정보를 출력데이타에 부가하는 것에 의해, 본 장치 내부에서의 화이트 밸런스 제어를 실행하지 않고 외부에서 화이트 밸런스 제어를 실행할 수도 있다. 도 30a, 도 30b 도 마찬가지로, 촬상소자(104)에서 얻어지는 Gr, Mg, Cy, Ye의 보색신호에 화이트 밸런스 제어 등의 신호처리를 실시하지 않고 출력하고 있다. 또, 도면에는 도시하고 있지 않지만 각종 신호처리를 실시하는 R, B 이득 등의 파라미터는 출력데이타의 선두에 부가하고 있다. 또, 상기 R, G, B신호를 순차화해서 출력하는 경우 색차 매트릭스회로(216)의 매트릭스계수 M3을28 to 30 show another embodiment of the present invention. The same figure shows a digital image signal output from the signal processing circuit 114, and FIGS. 28A, 28B and 28C are examples of the case of outputting the luminance signal / color difference signal, and FIGS. 29A and 29B are R. FIG. An example of output as a / G / B signal, FIGS. 30A and 30B are examples of output as a signal corresponding to the color filter of the imaging device 104. Fig. 28A shows a method of extracting a general luminance / color difference signal (4: 2: 2 digital) and outputs Y, R-Y, and B-Y, respectively. FIG. 28B is a view of sequentially outputting the color difference signals of R-Y and B-Y by the sequential circuit 308. FIG. 28C is a diagram in which all signals of Y, R-Y, and B-Y are sequentially outputted. Fig. 29A adds gain information of R, G, and B to output data, whereby white balance control can be executed externally without executing white balance control in the present apparatus. 30A and 30B are similarly outputted without performing signal processing such as white balance control to the complementary color signals of Gr, Mg, Cy, and Ye obtained by the imaging device 104. Although not shown in the figure, parameters such as R and B gains for performing various signal processing are added to the head of the output data. When the R, G, and B signals are sequentially outputted, the matrix coefficient M3 of the color difference matrix circuit 216 is reduced.

[식 4][Equation 4]

M51=1, M52=0, M53=0M 51 = 1, M 52 = 0, M 53 = 0

M61=0, M62=0, M63=0M 61 = 0, M 62 = 0, M 63 = 0

으로 설정해서 R-Y 출력채널에서 R신호를 출력하고, 그 후 재차 메모리(108) 또는 (254)에서 신호를 리드함과 동시에 색차 매트릭스회로(216)의 매트릭스계수M3을Outputs the R signal from the R-Y output channel, and then reads the signal from the memory 108 or 254 again and simultaneously sets the matrix coefficient M3 of the color difference matrix circuit 216.

[식 5][Equation 5]

M51=0, M52=1, M53=0M 51 = 0, M 52 = 1, M 53 = 0

M61=0, M62=0, M63=0M 61 = 0, M 62 = 0, M 63 = 0

으로 설정해서 R-Y 출력채널에서 G신호를 출력하고, 그 후 재차 메모리(108) 또는 (254)에서 신호를 리드함과 동시에 색차 매트릭스회로(216)의 매트릭스계수M3을Outputs the G signal from the R-Y output channel, and then reads the signal from the memory 108 or 254 again and simultaneously sets the matrix coefficient M3 of the color difference matrix circuit 216.

[식 6][Equation 6]

M51=0, M52=0, M53=1M 51 = 0, M 52 = 0, M 53 = 1

M61=0, M62=0, M63=0M 61 = 0, M 62 = 0, M 63 = 0

으로 설정해서 R-Y를 출력채널에서 B신호를 출력해도 좋다.It is also possible to set R-Y to output the B signal from the output channel.

이하, 본 발명의 다른 실시예를 도면을 사용해서 설명한다.Hereinafter, another Example of this invention is described using drawing.

도 31은 본 발명의 다른 실시예에 관한 촬상장치의 구성도이다. 도 31에 있어서 (1901)은 렌즈, (1902)는 셔터, (1903)은 셔터제어회로, (1904)는 촬상소자, (1905)는 구동회로, (1906)은 앰프, (1907)은 A/D변환기, (1908)은 메모리, (1909)는 버퍼메모리, (1910)은 메인메모리, (1911)은 메모리 제어회로, (1912)는 기록/재생 제어회로, (1913)은 선택회로, (1914)는 신호처리회로, (1915)는 카메라신호 처리회로, (1916)은 신호보간회로, (1917)은 신호처리제어회로, (1918)은 셔터버튼, (1919)는 Full/Economy 전환스위치, (1920)는 표시장치이며, 촬상소자(1904)의 구체적인 예를 도 2에 도시한다. 도 2에 있어서 (201)은 포토다이오드, (202)는 수직CCD, (203)은 수평CCD이고, gr, mg, cy, ye는 포토다이오드(201)의 각각에 배치된 색필터로서, gr은 그린, mg는 마젠타, cy는 시안, ye는 옐로우의 색필터인 것을 나타낸다. 상기 구성에 있어서, 렌즈(1901)을 통해서 입력된 광은 셔터제어회로(1903)에 의해 조리개값F가 제어된 셔터(1902)를 통해서 촬상소자(1904)에 입력되고, 촬상소자(1904)의 표면에 배치된 도 2에 도시한 포토다이오드(201)에 의해서 광전변환된 신호전하는 수직CCD(202)를 경유해서 수평CCD(203)으로 전송되고 구동회로(1905)에서 공급되는 수평주사펄스와 동기해서 전압변환되어 출력된다.31 is a configuration diagram of an image pickup apparatus according to another embodiment of the present invention. In Fig. 31, 1901 is a lens, 1902 is a shutter, 1901 is a shutter control circuit, 1904 is an imaging device, 1905 is a driving circuit, 1906 is an amplifier, and 1907 is A /. D converter, 1908 is a memory, 1909 is a buffer memory, 1910 is a main memory, 1911 is a memory control circuit, 1912 is a write / replay control circuit, 1913 is a selector circuit, 1914 ) Is a signal processing circuit, 1915 is a camera signal processing circuit, 1916 is a signal interpolation circuit, 1917 is a signal processing control circuit, 1918 is a shutter button, and 1919 is a full / economy switching switch. 1920 is a display device, and a specific example of the imaging device 1904 is shown in FIG. In FIG. 2, reference numeral 201 denotes a photodiode, reference numeral 202 denotes a vertical CCD, reference numeral 203 denotes a horizontal CCD, and gr, mg, cy, and ye denote color filters disposed on the photodiodes 201, respectively. Green, mg is magenta, cy is cyan, ye is yellow color filter. In the above configuration, the light input through the lens 1901 is input to the imaging device 1904 through the shutter 1902 whose aperture value F is controlled by the shutter control circuit 1903, and the The signal charge photoelectrically converted by the photodiode 201 shown in FIG. 2 disposed on the surface is transmitted to the horizontal CCD 203 via the vertical CCD 202 and synchronized with the horizontal scanning pulse supplied from the driving circuit 1905. The voltage is converted and output.

우선, 움직임화상 촬영시의 동작을 설명한다. 촬상소자(1904)는 상기 공지예에 기재되어 있는 바와 같이 수직방향으로 인접하는 2개의 화소신호를 혼합해서 리드하는 소위 화소혼합방식으로 신호를 리드한다.First, the operation at the time of motion image photographing is explained. The imaging device 1904 reads signals in a so-called pixel mixing method in which two pixel signals adjacent in the vertical direction are mixed and read as described in the above known example.

촬상소자(1904)의 출력신호는 앰프(1906)에 의해서 증폭되어 A/D변환기(107)에 입력된다. A/D변환기(107)에 입력된 신호는 구동회로(1905)에서 공급되는 타이밍펄스에 의해 샘플링되어 디지탈신호로 변환된다. A/D변환기(107)에 의해 디지탈신호로 변환된 신호는 선택회로(1913)에 의해서 신호처리회로(1914)내에 입력된다. 신호처리회로(1914)는 감마보정이나 화이트 밸런스보정 등의 일반적인 신호처리를 실행하여 휘도신호, 색(RGB)신호 등을 생성한다.The output signal of the imaging device 1904 is amplified by the amplifier 1906 and input to the A / D converter 107. The signal input to the A / D converter 107 is sampled by the timing pulse supplied from the driving circuit 1905 and converted into a digital signal. The signal converted into the digital signal by the A / D converter 107 is input into the signal processing circuit 1914 by the selection circuit 1913. The signal processing circuit 1914 performs general signal processing such as gamma correction and white balance correction to generate a luminance signal, a color (RGB) signal, and the like.

다음에 정지화상을 기록하는 동작을 설명한다.Next, the operation of recording still images will be described.

상기 구성에 있어서, 셔터버튼(1918)을 누르는 것에 의해 기록/재생 제어회로(1912)에서 셔터클로즈의 제어신호가 셔터제어회로(1903)에 입력되고, 셔터제어회로(1903)에 의해서 셔터(1902)는 소정의 시간 후에 클로즈상태로 된다. 셔터(1902)가 클로즈상태로 될 때까지 촬상소자(1904)에 입력된 광은 촬상소자(1904)에 배치된 포토다이오드(201)에 의해서 광전변화되고, 셔터(1902)가 클로즈상태인 동안에 수직CCD(202)를 경유해서 수평CCD(203)으로 전송되고, 구동회로(1905)에서 공급되는 수평주사펄스와 동기해서 전압변환되어 출력된다. 이 때, 촬상소자(1904)는 포토다이오드(201)에서 한번 신호를 리드하면 포토다이오드(201)에 신호가 남지 않는 소위 파괴리드이므로, 움직임화상의 리드와 마찬가지로 화소혼합리드를 하면 프레임의 정보가 손실되어 버린다. 수직방향의 해상도를 저하시키지 않고 정지화상을 얻기 위해서 다음에 설명하는 독립 리드를 실행한다.In the above configuration, the control signal of the shutter close is input from the recording / reproduction control circuit 1912 to the shutter control circuit 1903 by pressing the shutter button 1918, and the shutter 1902 is made by the shutter control circuit 1903. ) Is closed after a predetermined time. Light input to the image pickup device 1904 until the shutter 1902 is in the closed state is photoelectrically changed by the photodiode 201 disposed in the image pickup device 1904, and is vertical while the shutter 1902 is in the closed state. It is transmitted to the horizontal CCD 203 via the CCD 202, and is voltage-converted and output in synchronization with the horizontal scanning pulse supplied from the driving circuit 1905. At this time, the image pickup device 1904 is a so-called destructive lead in which the signal is not left in the photodiode 201 once the signal is read from the photodiode 201. Thus, when the pixel mixed lead is performed similarly to the lead of the moving image, the frame information is displayed. It is lost. In order to obtain a still image without lowering the resolution in the vertical direction, the independent read described below is executed.

상기 동작에 의해서 각각의 화소에서 독립해서 리드된 신호 Gr, Mg, Cy, Ye는 A/D변환기(1907)에 의해 디지탈신호로 변환되어 메모리 제어회로(1911)에 의해서 제어된 메모리(1908)에 기록된다. 한편, 상기 정지화상 기록을 실행하기전의 움직임화상 촬영시에 신호처리회로(1914)에서 실행하고 있던 화이트 밸런스 등의 정보도 메모리(1908)에 기록한다. 화이트 밸런스 등의 정보는 다른 기록 수단에 기록해도 좋다.The signals Gr, Mg, Cy, and Ye read independently in each pixel by the above operation are converted into digital signals by the A / D converter 1907 to the memory 1908 controlled by the memory control circuit 1911. Is recorded. On the other hand, the memory 1908 also records information such as the white balance, which was executed by the signal processing circuit 1914 at the time of motion image photographing before performing the still image recording. Information such as the white balance may be recorded in other recording means.

다음에 기록된 정지화상을 출력하는 동작을 설명한다.Next, the operation of outputting the recorded still image will be described.

메모리(1908)에 기록된 신호는 선택회로(1913)에서 선택되어 신호처리회로(1914)에 입력된다. 신호처리회로(1914)는 화이트 밸런스 등의 정보를 리드해서 그 정보에 따라서 소정의 영상신호를 생성한다. 그런데, 촬상소자(1904)가 갖는 포토다이오드(201)은 일반적으로 수평수직에서 다른 간격으로 배치되어 있다. 즉, 포토다이오드(201)은 화소라고도 불리우고 있으며, 도 2에 도시한 화소피치Px, Py가 동일하지 않다. 따라서, 광학상의 공간적으로 등간격으로 샘플링되지 않게 되어 상술한 바와 같이 화상입력수단으로서는 바람직하지 않다. 그래서, 수평 및 수직의 화소피치를 동일하게 하기 위해 신호보간회로(1916)에 의해 내삽 보간한다. 도 26, 도 32 및 도 33을 사용해서 다음에 공간적인 샘플링피치를 동일하게 하는 내삽 보간에 대해서 설명한다.The signal recorded in the memory 1908 is selected by the selection circuit 1913 and input to the signal processing circuit 1914. The signal processing circuit 1914 reads information such as white balance and generates a predetermined video signal according to the information. By the way, the photodiode 201 which the imaging element 1904 has is arrange | positioned at the space | interval different generally from horizontal perpendicular | vertical. That is, the photodiode 201 is also called a pixel, and the pixel pitches Px and Py shown in FIG. 2 are not the same. Therefore, the sample is not spatially sampled at equal intervals and is not preferable as the image input means as described above. Thus, interpolation is performed by the signal interpolation circuit 1916 to equalize the horizontal and vertical pixel pitches. Next, the interpolation interpolation which makes spatial sampling pitches the same is demonstrated using FIG.26, FIG.32 and FIG.33.

도 26은 신호보간회로(1916)의 구체적인 예를 도시한 도면이다.FIG. 26 is a diagram showing a concrete example of the signal interpolation circuit 1916.

도 32에 있어서, 0으로 표시하고 있는 S1,1, S1,2, S1,3, S2,1, S2,2, S2,3은 신호보간회로(1916)에 입력되는 신호(보간전의 신호)의 공간분포를 나타내고, △로 표시하고 있는 S1,1', S1,2', S1,3', S2,1', S2,2', S2,3'는 가산기(404)의 출력(보간후의 신호)의 공간분포를 나타내고 있다. 보간전의 신호는 Px를 수평화소피치, Py를 수직화소피치로 하면 수평수직방향으로 각각 Px, Py의 정수배만큼 떨어져 있게 되고, 여기에서는 간단하게 하기 위해 Px, Py만큼 떨어져 있는 것으로 한다. S1,1'의 위치에 S1,1'로 표시하는 보간후의 신호를 생성했다고 하면 △를 표시한 보간후의 S1,2', S1,3'는 S1,1'에서 수평방향으로 Py, 2Py만큼 떨어진 곳에 생성하면 좋기 때문에, 다음식과 같이 내삽의 보간연산으로 구해진다.In FIG. 32, S 1 , 1 , S 1 , 2 , S 1 , 3 , S 2 , 1 , S 2 , 2 , S 2 , and 3 denoted by 0 are signals input to the signal interpolation circuit 1916. S 1 , 1 ′, S 1 , 2 ′, S 1 , 3 ′, S 2 , 1 ′, S 2 , 2 ′, S 2 , 3 , indicating the spatial distribution of the signal before interpolation Indicates a spatial distribution of the output of the adder 404 (signal after interpolation). When Px is the horizontal pixel pitch and Py is the vertical pixel pitch, the signals before interpolation are separated by integer multiples of Px and Py in the horizontal and vertical directions, respectively, and are here separated by Px and Py for simplicity. S 1, 1 S 1, 2 ', S 1, 3' after you have created a signal after the interpolation represented by "S 1, 1 to the position of the" display the △ interpolated in the horizontal direction from the S 1, 1 ' Since Py and 2Py may be generated at a distance away, the interpolation operation is obtained as shown in the following equation.

[식 7][Equation 7]

S1,2'=S1,1*(Px-Py)/Px+S1,2*Py/PxS 1 , 2 '= S 1 , 1 * (Px-Py) / Px + S 1 , 2 * Py / Px

[식 8][Equation 8]

S1,3'=S1,2*(2Px-2Py)/PxS 1 , 3 '= S 1 , 2 * (2Px-2Py) / Px

+S1,3*(2Py-Px)/Px+ S 1 , 3 * (2Py-Px) / Px

즉, 수직화소수를 M개, 수평화소수를 N개로 하고, 수평방향으로 다음의 N'개의 수평방향의 데이타를 내삽 보간에 의해 생성하면 좋다.That is, it is good to make M vertical pixels and N horizontal pixels, and generate next N 'horizontal data in the horizontal direction by interpolation interpolation.

[식 9][Equation 9]

N'=N*Px/PyN '= N * Px / Py

그러나, 상기 방법에 의해 보간해서 얻은 영상신호는 수평방향으로 간격이 넓어진다. 그래서, 촬상소자(1904)에는 그 수평화소에서 도출되는 주파수의 수평주사펄스보다도 고속인 수평주사펄스를 공급한다. 다음에 구체적인 방법을 도 33을 사용해서 설명한다.However, the video signal obtained by interpolation by the above method is widened in the horizontal direction. Thus, the imaging device 1904 is supplied with a horizontal scanning pulse which is faster than the horizontal scanning pulse of the frequency derived from the horizontal pixel. Next, a specific method is explained using FIG.

촬상소자(1904)에 수평방향의 화소피치Px가 9.6㎛, 수직방향의 화소피치 Py가 7.5㎛, 수평화소510화소, 수직화소수485화소의 일반적인 NTSC방식의 촬상소자를 사용한 경우 수평화소수에서 도출되는 수평주사펄스의 주파수는 하기의 610fH(fH: 수평주파수)이다.When the image pickup device 1904 uses a general NTSC image pickup device having a horizontal pixel pitch Px of 9.6 mu m, a vertical pixel pitch Py of 7.5 mu m, a horizontal pixel of 510 pixels, and a vertical pixel of 485 pixels, It is: (a horizontal frequency f H) the frequency of the horizontal scanning pulse to be derived is 610f H below.

[식 10][Equation 10]

510*63.56(63.56-10.5)=610.9510 * 63.56 (63.56-10.5) = 610.9

≒611≒ 611

한편, 상기 식 9에서 보간에 의해서 생성하는 수평방향의 신호수는 다음의 653개이다.On the other hand, the number of signals in the horizontal direction generated by interpolation in Equation 9 is as follows.

[식 11][Equation 11]

510*9.6/7.5=652.8≒653510 * 9.6 / 7.5 = 652.8 ≒ 653

따라서, 611fH의 주파수의 수평주사펄스를 사용하면 1수평기간내에 내삽보간이 종료하지 않게 된다. 상기 문제를 해결하기 위해서는 사용하는 수평주사펄스의 주파수를 다음의 782fH로 하면 좋다.Therefore, using a horizontal scanning pulse of frequency 611f H does not end the interpolation interpolation within one horizontal period. In order to solve the above problem, the frequency of the horizontal scanning pulse to be used is set to 782f H as shown below.

[식 12][Equation 12]

653*63.56/(63.56-10.5)=782.2653 * 63.56 / (63.56-10.5) = 782.2

≒782≒ 782

도 33에 있어서의 출력신호 1은 611fH의 수평주사펄스를 사용해서 상기 촬상소자에서 신호를 출력한 경우의 타이밍도이고, 출력신호2은 782fH의 수평주사펄스를 사용해서 상기 촬상소자에서 신호를 출력한 경우의 타이밍도이다. 본 실시예에 있어서는 782fH의 수평주사펄스를 사용해서 수평방향으로 510/653(또는 7.5/9.6)의 비율로 축소된 출력신호2를 얻는다. 출력신호2는 상기 신호보간에 의해 수평방향으로 653/510(또는 9.6/7.5)배 되므로, 얻어지는 영상신호의 애스팩트비는 변함이 없다.The output signal 1 in FIG. 33 is a timing diagram when a signal is output from the imaging device using a horizontal scanning pulse of 611f H , and the output signal 2 is a signal from the imaging device using a horizontal scanning pulse of 782f H. Is a timing diagram in the case of outputting. In this embodiment, an output signal 2 reduced in the ratio of 510/653 (or 7.5 / 9.6) in the horizontal direction is obtained using a horizontal scanning pulse of 782f H. Since the output signal 2 is multiplied by 653/510 (or 9.6 / 7.5) in the horizontal direction by the signal interpolation, the aspect ratio of the obtained video signal does not change.

다음에, 메모리(1908)로의 영상신호의 라이트에 대해서 설명한다.Next, writing of the video signal to the memory 1908 will be described.

정지화상 기록시에는 상술한 바와 같이 독립리드에 의해 각 화소의 신호를 독립해서 촬상소자(1904)에서 리드하고, A/D변환기(1907)에 의해 디지탈신호로 변환해서 메모리(1908)에 기록한다. 도 4에 도시한 바와 같이 수직전송펄스V1이 3진 펄스로 되는 필드에서는 Mg와 Gr이 순차로 출력되고, V3이 3진 펄스로 되는 필드에서는 Cy와 Ye가 출력되므로, 메모리(1908)는 도 34에 도시한 바와 같은 포맷으로 기록된다. 정지화상 출력시에는 상기한 메모리(1908)는 도 34에 도시한 바와 같은 포맷으로 기록된다. 정지화상 출력시에는 상기한 메모리(1098)에 기록된 신호를 순차 리드해서 신호처리회로(1914)에서 소정의 포맷의 영상신호를 생성한다. 예를 들면, 3원색 신호의 R, G, B를 생성하기 위해서는 이하에 기술하는 매트릭스연산을 실행하고 R, G, B의 각각의 신호에 상기한 바와 같은 신호보간을 실행하면 좋다.In the still picture recording, as described above, the signals of the respective pixels are independently read by the image pickup device 1904 by independent reads, converted into digital signals by the A / D converter 1907, and recorded in the memory 1908. . As shown in Fig. 4, Mg and Gr are sequentially output in the field where the vertical transfer pulse V1 is a ternary pulse, and Cy and Ye are output in the field where V3 is a ternary pulse. It is recorded in the format as shown in 34. When outputting still pictures, the above-described memory 1908 is recorded in the format as shown in FIG. When outputting a still image, the signals recorded in the memory 1098 are sequentially read, and the signal processing circuit 1914 generates a video signal of a predetermined format. For example, in order to generate R, G, and B of the three primary color signals, the matrix operation described below may be performed, and signal interpolation as described above may be performed on each of the signals of R, G, and B.

[식 13][Equation 13]

R=Mg-Cy+YeR = Mg-Cy + Ye

G=-Mg+Cy+Ye+GrG = -Mg + Cy + Ye + Gr

B=Mg+Cy-YeB = Mg + Cy-Ye

이 때, 가령 메모리(1908)를 신호처리회로(1914)의 후단에 배치하고, 촬상소자(1904)에서 출력된 신호에 식 13의 연산처리를 실시해서 보간후의 R, G, B신호를 생성하고, 이 R, G, B신호를 메모리(1908)에 기록한 경우 1프레임분의 화상신호를 기록하는데 필요한 메모리용량은At this time, for example, the memory 1908 is arranged at the rear end of the signal processing circuit 1914, and the signal output from the imaging device 1904 is subjected to the arithmetic processing of Equation 13 to generate the R, G, and B signals after interpolation. When the R, G, and B signals are recorded in the memory 1908, the memory capacity required for recording one image signal is

[식 14][Equation 14]

485*653*3*(RGB)*9비트≒8.6M비트485 * 653 * 3 * (RGB) * 9 bit ≒ 8.6 M bit

이다. 여기에서, 485는 라인수, 653은 수평도트수이고, A/D변환기(1907)의 분해능은 9비트로 하고 있다. 한편, 본 실시예에서는to be. Here, 485 is the number of lines, 653 is the number of horizontal dots, and the resolution of the A / D converter 1907 is 9 bits. On the other hand, in this embodiment

[식 15][Equation 15]

485*510*3*9비트≒2.2M비트485 * 510 * 3 * 9 bits ≒ 2.2M bits

의 용량으로 된다. 즉, 보색의 신호를 기록하는 것에 의해 데이타를 약 1/4로 압축한 것으로 된다.It becomes the capacity of. In other words, by recording a complementary color signal, data is compressed to about 1/4.

상기 식 14, 식 15에서 A/D변환기(1907)의 분해능을 9비트로 한 이유는 분해능 8비트시의 양자화 에러에 의한 S/N 저하가 허용량 이상이라는 화질평가 결과에 따르고 있다. 그러나, 범용메모리를 메모리(1908)로 사용하는 경우 범용메모리의 비트구성이 깊이방향 8비트인 것을 고려하면 A/D변환기(1907)의 분해능은 8비트인 것이 바람직하다. 그래서, 앰프(1906)에 도 35에 도시한 비선형의 입출력특성을 갖게 하고, 8비트의 분해능에 의해 디지탈신호로 변환한다. 양자화잡음이 현저한 저휘도의 영역에서는 9비트의 분해능에 의해 디지탈신호로 변환하고, 양자화 잡음이 현저하지 않은 고휘도의 영역에서는 8비트 이하의 분해능에 의해 디지탈신호로 변환하는 것에 의해 데이타를 압축해서 8비트의 일반적인 메모리를 사용할 수 있다. 이 때, 도 35에 도시한 입출력특성과는 반대의 도 36에 도시한 바와 같은 입출력특성을 신호처리회로(1914)에 갖게 하는 것에 의해 선형인 신호처리를 실행할 수 있다. 상기한 비선형의 입출력특성은 입력신호레벨에 따라서 앰프(1906)의 이득을 변화시키는 것에 의해 용이하게 실현할 수 있다. 다음에 도 31에 있어서의 메모리(1908)의 구체적인 구성예를 설명한다.The reason why the resolution of the A / D converter 1907 is 9 bits in Equations 14 and 15 is based on the result of the image quality evaluation that the S / N degradation due to the quantization error at the resolution of 8 bits is more than the allowable amount. However, when the general purpose memory is used as the memory 1908, considering that the bit structure of the general purpose memory is 8 bits in the depth direction, the resolution of the A / D converter 1907 is preferably 8 bits. Thus, the amplifier 1906 has the nonlinear input / output characteristics shown in FIG. 35, and is converted into a digital signal with an 8-bit resolution. In the low luminance region where quantization noise is significant, 9-bit resolution is converted into a digital signal, and in the high luminance region where quantization noise is not significant, the digital signal is compressed and converted to 8-bit or less resolution. The general memory of bits can be used. At this time, linear signal processing can be executed by having the signal processing circuit 1914 have the input / output characteristics shown in FIG. 36 as opposed to the input / output characteristics shown in FIG. The above-described nonlinear input and output characteristics can be easily realized by changing the gain of the amplifier 1906 according to the input signal level. Next, a specific configuration example of the memory 1908 in FIG. 31 will be described.

메모리(1908)의 내부구성은 도 31에 도시한 바와 같이 메인메모리(1910)과 버퍼메모리(1909)의 2개의 메모리를 사용한 구성으로 한다. 메모리(1908)은 A/D변환기(1907)에서 출력되는 신호를 기록하기 위해 비디오레이트로 신호를 입출력할 필요가 있다. 또, 정지화상을 여러매 기록하기 위해서는 대용량의 메모리가 필요하게 된다. 그러나, 이와 같은 메모리는 현재 매우 고가이다. 그래서, 메인메모리(1910)으로는 기억용량은 크지만 데이타액세스 속도가 느린 것(예를 들면 플래시메모리나 자기디스크 또는 광디스크 등)을 사용하고, 버퍼메모리(1909)로는 고속동작이 가능한 화상메모리 등을 사용한다. 기록시에는 A/D변환기(1907)에서 출력되는 신호를 비디오레이크로 동작하는 버퍼메모리(1909)에 일단 기록한다. 버퍼메모리(1909)에 기록된 정지화상 1매분의 신호는 메인메모리(1910)의 동작속도에 맞춰서 메인메모리(1910)으로 전송되어 기록된다.The internal structure of the memory 1908 is configured using two memories, a main memory 1910 and a buffer memory 1909, as shown in FIG. The memory 1908 needs to input and output the signal at the video rate in order to record the signal output from the A / D converter 1907. In addition, in order to record several still images, a large capacity memory is required. However, such memory is currently very expensive. Therefore, the main memory 1910 uses a large memory capacity but a slow data access speed (e.g., a flash memory, a magnetic disk or an optical disk), and the buffer memory 1909 uses an image memory capable of high speed operation. Use At the time of writing, the signal output from the A / D converter 1907 is written to the buffer memory 1909 which operates as a video lake. The signal for one still image recorded in the buffer memory 1909 is transmitted to the main memory 1910 and recorded according to the operation speed of the main memory 1910.

다음에, 화질의 저하를 수반하지만 더욱 적은 메모리용량으로 정지화상을 기록하는 방법을 이하 설명한다.Next, a method of recording still images with a smaller memory capacity accompanied by a deterioration of image quality is described below.

이하, 상기 정지화상 기록방법을 Full모드라 하고, 다음에 설명하는 정지화상 기록방법은 Economy모드라 한다.Hereinafter, the still image recording method will be referred to as Full mode, and the still image recording method described next will be referred to as Economy mode.

촬상소자(1904)는 상술한 일반적인 화소혼합리드에 의해서 신호를 출력한다. 촬상소자(1904)에서 출력된 신호는 Full모드 촬영시와 마찬가지로 해서 메인메모리(1910)에 도 37에 도시한 포맷으로 기록된다. 단, 이 방법에 의해 기록된 신호는 도 37에 도시한 바와 같이 Full모드와는 신호의 포맷이 다르고 재생시에 상기 Full모드와 신호처리의 방법이 다르다. 따라서, 소정 포맷의 영상신호를 생성할 때 Full모드로 기록된 신호인지 또는 Economy모드로 기록된 신호인지를 나타내는 식별신호가 필요하다. 이 식별신호는 화이트 밸런스 등의 정보와 함께 기록된다.The imaging device 1904 outputs a signal by the above-mentioned general pixel mixed lead. The signal output from the image pickup device 1904 is recorded in the main memory 1910 in the format shown in FIG. 37 in the same manner as in full-mode imaging. However, the signal recorded by this method has a different signal format from the Full mode as shown in Fig. 37, and the method of signal processing differs from the Full mode at the time of reproduction. Accordingly, when generating a video signal of a predetermined format, an identification signal indicating whether the signal is recorded in the full mode or the economy mode is required. This identification signal is recorded together with information such as the white balance.

다음에, Economy모드로 기록된 신호를 출력하는 동작을 설명한다.Next, an operation of outputting a signal recorded in the Economy mode will be described.

메인메모리(1910)에 기록된 신호 Full모드의 재생시와 마찬가지로 신호처리회로(1914)에 입력되고, 화이트 밸런스 등의 정보에 따라서 소정 포맷의 영상신호를 생성한다. 예를 들면, 3원색 신호의 R, G, B를 생성하기 위한 매트릭스 연산식은 상기한 식 13에 기재한 매트릭스 연산식과는 다른 다음에 기재하는 매트릭스 연산을 실행하고, R, G, B 각각의 신호에 도 38에 도시한 신호보간을 실행하면 좋다.As in the reproduction of the signal Full mode recorded in the main memory 1910, it is input to the signal processing circuit 1914, and generates a video signal of a predetermined format in accordance with information such as white balance. For example, the matrix equations for generating R, G, and B of the three primary color signals are different from the matrix equations described in Equation 13 described above, and the matrix equations described below are executed, and the respective signals of R, G, and B are executed. The signal interpolation shown in FIG. 38 may be executed.

[식 16][Equation 16]

R=2(Mg+Ye)+(Gr+Ye)-2(Gr+Cy)R = 2 (Mg + Ye) + (Gr + Ye) -2 (Gr + Cy)

G=-(Mg+Ye)+2(Gr+Ye)+(Gr+Cy)G =-(Mg + Ye) +2 (Gr + Ye) + (Gr + Cy)

B=2(Mg+Cy)-2(Gr+Ye)+(Gr+Cy)B = 2 (Mg + Cy) -2 (Gr + Ye) + (Gr + Cy)

도 38에 있어서, 0으로 표시하고 있는 S1,1, S1,2, S1,3, S1,4, S1,5, S2,1, S2,2, S2,3, S2,4, S2,5는 신호보간회로(1916)에 입력되는 신호(보간전의 신호)의 공간분포를 나타내고, △로 표시하고 있는 S1,1', S1,3', S1,5, S2,1', S2,3', S2,5'는 가산기(404)의 출력(보간후의 신호)의 공간분포를 나타내고 있다. 이 때, 화소혼합방식으로 신호를 리드했으므로, 보간전의 신호는 Px를 수평화소피치, Py를 수직화소피치로 하면 수평수직방향으로 각각 Px, 2Py의 정수배만큼 떨어져 있게 되고, 여기에서는 간단하게 하기 위해 Px, Py만큼 떨어져 있는 것으로 한다. 이 때, S수평방향의 신호를 2개의 1개의 비율로 시닝하면 신호의 공간분포는 수평방향으로 2Px, 수직방향으로 2Py의 간격으로 한다. 즉, 수평수직방향으로 각각 Px, Py의 정수배만큼 떨어져 있는 것으로 되고, 상기 도 32에 도시한 신호보간방법을 이용하면 수평수직방향의 신호의 공간분포를 동일하게 할 수 있다.In FIG. 38, S 1 , 1 , S 1 , 2 , S 1 , 3 , S 1 , 4 , S 1 , 5 , S 2 , 1 , S 2 , 2 , S 2 , 3 , denoted by 0. S 2 , 4 , S 2 , and 5 represent a spatial distribution of a signal (a signal before interpolation) input to the signal interpolation circuit 1916, and S 1 , 1 ′, S 1 , 3 ′, S 1 denoted by Δ. , 5 , S 2 , 1 ′, S 2 , 3 ′, S 2 , 5 ′ represent the spatial distribution of the output of the adder 404 (signal after interpolation). At this time, since the signal is read by the pixel mixing method, the signal before interpolation is separated by an integer multiple of Px and 2Py in the horizontal and vertical directions, respectively, when Px is the horizontal pixel pitch and Py is the vertical pixel pitch. It is assumed to be separated by Px and Py. At this time, when the signal in the S horizontal direction is thinned at two ratios, the spatial distribution of the signal is set at an interval of 2 Px in the horizontal direction and 2 Py in the vertical direction. In other words, the signals are separated by integer multiples of Px and Py in the horizontal and vertical directions, respectively, and the spatial distribution of the signals in the horizontal and vertical directions can be equalized by using the signal interpolation method shown in FIG.

또, 상기 방법에 의해 보간해서 얻은 영상신호는 수평방향으로 간격이 넓어진다. 그래서, 상기한 도 21에 도시한 방법으로 애스펙트변화를 실행하다.Also, the video signal obtained by interpolation by the above method is widened in the horizontal direction. Thus, the aspect change is executed by the method shown in FIG.

이 때, 촬상소자(1904)는 화소혼합방식에 의해서 신호를 출력했으므로, 상술한 Full모드에 의한 기록방법과 비교해서 메모리에 기록하는 정지화상 1매당의 신호수가 1/2로 된다. 따라서 2배의 매수의 정지화상을 기록할 수 있다.At this time, since the image pickup device 1904 outputs signals by the pixel mixing method, the number of signals per still image to be recorded in the memory is 1/2 compared with the above-described full mode recording method. Therefore, twice as many still images can be recorded.

상기한 Full모드, Economy모드의 2종류의 정지화상 기록방법의 선택에는 Full/Economy 전환스위치(1919)를 사용한다. Full/Economy 전환스위치(1919)가 선택하고 있는 모드에 따라서 매트릭스 연산식의 선택 촬상소자(1904)의 구동 방법 및 메모리(1908)의 구동방법 등을 선택한다. 또, Full/Economy 전환스위치(1919)의 조작에 따라서 표시장치(1920)은 어느쪽의 기록방식을 선택하고 있는지를 표시함과 동시에 현재 선택되어 있는 기록방식으로 앞으로 몇매분의 정지화상을 기록할 수 있는지를 표시한다.The full / economy switching switch (1919) is used to select the two types of still image recording methods described above in the full mode and the economy mode. The driving method of the image pickup device 1904, the driving method of the memory 1908, and the like are selected according to the mode selected by the Full / Economy switching switch 1919. In addition, according to the operation of the full / economy switching switch (1919), the display device 1920 indicates which recording method is selected, and records still images for the next few images in the currently selected recording method. Show if you can.

이하, 본 발명의 다른 실시예를 도면을 사용해서 설명한다.Hereinafter, another Example of this invention is described using drawing.

도 39는 본 발명의 다른 실시예에 관한 촬상장치의 구성도이다. 도 39에 있어서, (2701)은 렌즈, (2702)는 셔터, (2703)은 셔터제어회로, (2704)는 촬상소자, (2705)는 구동회로, (2706)은 앰프, (2707)은 A/D변환기, (2708)은 메모리, (2709)는 버퍼메모리, (2710)은 메인메모리, (2711)은 메모리 제어회로, (2712)는 기록/재생 제어회로, (2713)은 선택회로, (2714)는 신호처리회로, (2715)는 카메라신호처리회로, (2716)은 신호보간회로, (2717)은 신호 처리 제어회로, (2718)은 셔터벼튼, (2719)는 Full/Economy 전환스위치, (2720)은 표시장치이다. 본 실시예에 있어서 구성 및 동작은 상술한 실시예와 공통된 부분이 있고, 다른 점에 대해서 이하 설명한다.39 is a configuration diagram of an image pickup device according to another embodiment of the present invention. 39, reference numeral 2701 denotes a lens, 2702 a shutter, 2703 a shutter control circuit, 2704 an image pickup device, 2705 a driving circuit, 2706 an amplifier, and 2707 an A / D converter, 2708 is a memory, 2709 is a buffer memory, 2710 is a main memory, 2711 is a memory control circuit, 2712 is a write / replay control circuit, 2713 is a selection circuit, 2714 denotes a signal processing circuit, 2715 denotes a camera signal processing circuit, 2716 denotes a signal interpolation circuit, 2717 denotes a signal processing control circuit, 2718 denotes a shutter battens, and 2719 denotes a full / economy switching switch. 2720 is a display device. In the present embodiment, the configuration and operation have a part in common with the above-described embodiment, and the differences will be described below.

움직임화상을 촬영하는 동작은 상술한 실시예와 완전히 동일하다.The operation of photographing the moving image is exactly the same as in the above-described embodiment.

다음에 정지화상을 Full모드로 기록하는 경우의 동작을 설명한다.Next, the operation in the case of recording the still image in the full mode will be described.

상술한 실시예와 마찬가지로 촬상소자(2704)에서는 독립리드에 의해 신호를 출력한다. 촬상소자(2704)에서 출력된 신호는 A/D변환기(2707)에 의해 디지탈신호로 변환되어 버퍼메모리(2709)에 입력된다. 버퍼메모리(2709)는 정지화상 1매분의 신호를 기록하고, 그 신호를 선택회로(2713)을 거쳐서 신호처리회로(2714)로 출력한다. 신호처리회로(2714)는 입력된 신호에 상술한 실시예에서 실행한 비선형의 데이타압축과 동일한 데이타압출을 실시하고(압축을 실시하지 않아도 좋다), 그 신호를 메인메모리(2710)에 기록한다. 또, 상술한 실시예와 마찬가지로 화이트 밸런스 등의 정보도 기록한다.In the same manner as in the above-described embodiment, the image pickup device 2704 outputs signals by independent leads. The signal output from the image pickup device 2704 is converted into a digital signal by the A / D converter 2707 and input to the buffer memory 2709. The buffer memory 2709 writes a signal for one still image and outputs the signal to the signal processing circuit 2714 via the selection circuit 2713. The signal processing circuit 2714 performs the same data compression as the nonlinear data compression performed in the above-described embodiment on the input signal (compression does not need to be performed), and records the signal in the main memory 2710. In addition, similarly to the embodiment described above, information such as white balance is also recorded.

다음에 기록된 정지화상을 출력하는 동작을 설명한다.Next, the operation of outputting the recorded still image will be described.

메모리(1908)에 기록된 신호는 상술한 실시예와 마찬가지로 선택회로(2713)을 거쳐서 신호처리회로(2714)에 입력된다. 신호처리회로(2714)는 기록시에 비선형의 데이타압축을 실행하고 있으면 상술한 바와 같은 역의 데이타압축을 실시하고, 상술한 실시예와 마찬가지로 화이트 밸런스 등의 정보를 리드해서 그 정보에 따라서 소정의 영상신호를 생성하고, 이하 마찬가지로 수평수직의 화소피치를 동일하게 하기 위해 신호보간에 의한 내삽을 실행한다.The signal recorded in the memory 1908 is input to the signal processing circuit 2714 via the selection circuit 2713 as in the above-described embodiment. The signal processing circuit 2714 performs reverse data compression as described above if nonlinear data compression is performed at the time of writing, and reads information such as white balance and the like according to the information as in the above-described embodiment. An image signal is generated, and interpolation by signal interpolation is then performed in order to make the pixel pitches in the horizontal and vertical directions the same.

다음에 메모리(2708)에 신호를 기록하는 동작을 상세하게 설명한다.Next, the operation of writing signals to the memory 2708 will be described in detail.

메모리(2708)은 도 39에 도시한 바와 같이 상술한 실시예와 마찬가지로 버퍼메모리(2709)과 메인메모리(2710)의 구성으로 되어 있다. 촬상소자(2704)에서 출력된 신호는 선형인 입출력특성을 갖는 앰프(2706)에 의해 증폭되어 A/D변환기(2707)에 입력된다. 본 실시예에 있어서, 상술한 실시예에서 기술한 이유에 의해 A/D변환기(2707)은 앰프(2706)에서 출력되는 신호를 9비트의 디지탈신호로 변환한다. A/D변환기(2707)에 의해 디지탈신호로 변환된 신호는 상술한 실시예와 마찬가지로 메인메모리(2708)내의 버퍼메모리(2709)로 출력된다. 단, A/D변환기(2707)에서 출력된 신호의 비트수는 9비트이므로, 버퍼메모리(2709)는 비트구성이 깊이방향 9비트의 메모리인 것이 필요하다. 버퍼메모리(2709)에 기록된 정지화상 1매분의 신호는 메인메모리(2710)의 동작속도와 일치시킨 데이타레이트로 선택회로(2713)을 거쳐서 신호처리회로(2714)로 출력되고, 신호처리회로(2714)는 입력된 9비트의 디지탈신호를 상술한 실시예에서 실행한 비선형의 입출력특성에 의한 데이타압축과 동등한 변환에 의해서 8비트의 디지탈신호로 압축하여 메인메모리(2710)에 기록한다.As shown in Fig. 39, the memory 2708 has a configuration of a buffer memory 2709 and a main memory 2710 as in the above-described embodiment. The signal output from the image pickup device 2704 is amplified by the amplifier 2706 having linear input / output characteristics and input to the A / D converter 2707. In this embodiment, for the reason described in the above embodiment, the A / D converter 2707 converts the signal output from the amplifier 2706 into a 9-bit digital signal. The signal converted into the digital signal by the A / D converter 2707 is output to the buffer memory 2709 in the main memory 2708 as in the above-described embodiment. However, since the number of bits of the signal output from the A / D converter 2707 is 9 bits, the buffer memory 2709 needs to have a bit structure of 9 bits in the depth direction. The signal for one still image recorded in the buffer memory 2709 is outputted to the signal processing circuit 2714 via the selection circuit 2713 at a data rate that matches the operation speed of the main memory 2710, and then the signal processing circuit ( 2714 compresses the input 9-bit digital signal into an 8-bit digital signal and converts it into an 8-bit digital signal by conversion equivalent to the data compression by the nonlinear I / O characteristic performed in the above-described embodiment.

상술한 실시예에서는 아날로그신호는 비선형 처리에 의한 데이타압축을 실시했지만, 본 실시예에서 사용한 방법은 디지탈처리에 의해서 비선형 처리에 의한 데이타압축을 하는 것이 가능하다. 따라서, 편차가 없는 이상적인 데이타압축을 할 수 있다. 또, 신호보간회로(2716)은 비디오레이트로 동작시킬 필요가 없게 되어 동작에 시간적인 여유가 생기기 때문에 간단한 회로구성을 취할 수 있다.In the above embodiment, the analog signal is subjected to data compression by nonlinear processing. However, the method used in the present embodiment can perform data compression by nonlinear processing by digital processing. Therefore, ideal data compression without deviation can be achieved. In addition, since the signal interpolation circuit 2716 does not need to operate at the video rate, there is a time margin for the operation, and thus a simple circuit configuration can be taken.

다음에 화질의 저하를 수반하지만 더욱 적은 메모리용량으로 정지화상을 기록하는 방법(Economy 모드)을 이하 설명한다.Next, a method (Economy mode) for recording a still image with a smaller memory capacity but accompanied by a deterioration in image quality will be described below.

촬상소자(2704)를 상술한 일반적인 화소혼합리드에 의해서 신호를 출력한다. 촬상소자(2704)에서 출력된 신호는 Full모드 촬영시와 마찬가지로 버퍼메모리(2709)에 일단 기록하고 메인메모리(2710)의 동작속도에 맞춰서 신호처리회로(2714)로 출력된다. 신호보간회로(2716)은 도 40에 도시한 방법으로 신호보간을 실행한다. 이 경우, 입력신호의 서로 인접한 신호성분이 다르기 때문에 상술한 방법에 의한 신호보간을 할 수 없다. 도 41의 실시예에 있어서의 신호보간회로(2716)의 구체적인 구성예로서, (2901)은 분리회로, (2902), (2903)은 지연회로, (2904), (2905), (2906), (2907)은 승산기, (2908), (2909)는 가산기, (2910)은 멀티플렉서이다. Gr+Cy, Mg+Ye… 또는 Mg+Cy, Gr+Ye…의 순으로 입력되는 신호를 분리회로(2901)에 의해 Gr+Cy와 Mg+Ye 또는 Mg+Cy와 Gr+Ye로 분별하고, 2계통인 보간회로에 의해 각각의 신호를 도 40의 포맷에 따라서 보간한다.The image pickup device 2704 outputs a signal by the above-described general pixel mixed lead. The signal output from the image pickup device 2704 is once written to the buffer memory 2709 and output to the signal processing circuit 2714 in accordance with the operation speed of the main memory 2710 as in full-mode imaging. The signal interpolation circuit 2716 performs signal interpolation in the manner shown in FIG. In this case, since signal components adjacent to each other of the input signals are different, signal interpolation by the above-described method cannot be performed. As a specific configuration example of the signal interpolation circuit 2716 in the embodiment of Fig. 41, reference numeral 2901 denotes a separation circuit, 2902, 2903 a delay circuit, 2904, 2905, 2906, 2907 is a multiplier, 2908, 2909 is an adder, and 2910 is a multiplexer. Gr + Cy, Mg + Ye... Or Mg + Cy, Gr + Ye... The signals input in this order are divided into Gr + Cy and Mg + Ye or Mg + Cy and Gr + Ye by the separating circuit 2901, and each signal is separated by the two-phase interpolation circuit according to the format of FIG. Interpolate

신호보간회로(2716)에 의해 상기 동작에 의해 보간된 신호는 메인메모리(2710)에 기록된다. 도 42는 메인메모리(2710)에 기록된 Economy모드시의 신호포맷을 도시한 도면이다. 단, 상기 실시예와 마찬가지로 본 발명으로 기록된 신호는 재생시에 있어서 상기 Full모드와 신호처리의 방법이 다르다. 따라서, Full모드로 기록된 신호인지 또는 Economy모드로 기록된 신호인지를 나타내는 정보도 화이트 밸런스 등의 정보와 함께 기록한다.The signal interpolated by the above operation by the signal interpolation circuit 2716 is recorded in the main memory 2710. FIG. 42 shows signal formats in the Economy mode recorded in the main memory 2710. FIG. However, similarly to the above embodiment, the signal recorded in the present invention differs from the Full mode and the signal processing method in reproduction. Therefore, information indicating whether the signal is recorded in the Full mode or the Economy mode is also recorded with information such as the white balance.

다음에, Economy모드로 기록된 신호를 출력하는 동작을 설명한다.Next, an operation of outputting a signal recorded in the Economy mode will be described.

메인메모리(2710)에 기록된 신호는 Full모드의 재생시와 마찬가지로 신호처리회로(2714)에 입력되어 소정의 포맷에 영상신호를 생성한다.The signal recorded in the main memory 2710 is input to the signal processing circuit 2714 as in the reproduction of the full mode to generate a video signal in a predetermined format.

예를 들면, 3원색 신호의 R, G, B를 생성하기 위한 매트릭스 연산식은 상기한 식 15로 표시한 매트릭스 연산을 실행하고, R, G, B의 각각의 신호에 도 43에 도시한 신호보간을 실행하면 좋다.For example, the matrix arithmetic expression for generating R, G, and B of the three primary color signals executes the matrix arithmetic expression represented by the above expression 15, and interpolates the signal shown in Fig. 43 to each of the signals of the R, G, and B signals. You can run

도 43에 있어서, 0으로 표시하고 있는 S1,1, S1,2, S1,3, S2,1, S2,2, S2,3은 도 41에 신호보간회로에 입력되는 신호(보간적의 신호)의 공간분포를 나타내고, △로 표시하고 있는 S1,1', S1,3', S1,5', S2,1', S2,3', S2,5'는 상기 신호보간회로의 출력(보간후의 신호)의 공간분포를 나타내고 있다. 이 때, 화소혼합방식으로 신호를 리드하고 도 40에 도시한 신호보간을 실행했으므로, 보간전의 신호는 Px를 수평화소피치, Py를 수직화소피치로 하면, 수평수직방향으로 각각 2Px, 2Py의 정수배만큼 떨어져 있게 되고, 여기에서는 간단하게 하기 위해 2Px, 2Py만큼 떨어져 있는 것으로 한다. 즉, 수평수직방향으로 각각 Px, Py의 정수배만큼 떨어져 있는 것으로 되고, 상기 도 32에 도시한 신호보간방법을 이용하면 수평수직방향의 신호의 공간분포를 동일하게 할 수 있다.In FIG. 43, S 1 , 1 , S 1 , 2 , S 1 , 3 , S 2 , 1 , S 2 , 2 , S 2 , and 3 denoted by 0 are signals input to the signal interpolation circuit in FIG. 41. S 1 , 1 ′, S 1 , 3 ′, S 1 , 5 ′, S 2 , 1 ′, S 2 , 3 ′, S 2 , 5 , representing the spatial distribution of the (interpolated signal) Indicates a spatial distribution of the output (signal after interpolation) of the signal interpolation circuit. At this time, the signal is read by the pixel mixing method and the signal interpolation shown in Fig. 40 is executed. As far as it is, let's keep it 2Px, 2Py for the sake of simplicity. In other words, the signals are separated by integer multiples of Px and Py in the horizontal and vertical directions, respectively, and the spatial distribution of the signals in the horizontal and vertical directions can be equalized by using the signal interpolation method shown in FIG.

또, 상기 방법에 의해 보간해서 얻은 영상신호는 수평방향으로 간격이 넓어진다. 그래서, 상기한 도 21에 도시한 방법으로 액스펙트변화를 실행한다.Also, the video signal obtained by interpolation by the above method is widened in the horizontal direction. Thus, the aspect change is executed by the method shown in FIG.

이 때, 메인메모리(2710)에 기록되는 신호는 촬상소자(2704)에서 화소혼합방식에 의해서 신호를 출력했으므로, 수직방향의 데이타수가 1/2로 되고, 또 신호보간회로(2716)에 의해 수평방향의 신호수를 1/2로 했으므로, 상술한 Full모드에 의한 기록방법과 비교해서 1/4로 압축된 것으로 된다. 이 방법에 의하면, Full모드 기록시의 4배의 매수의 정지화상을 기록할 수 있다.At this time, since the signal written to the main memory 2710 outputs the signal by the pixel mixing method from the image pickup device 2704, the number of data in the vertical direction is 1/2, and the signal interpolation circuit 2716 is horizontal. Since the number of signals in the direction is 1/2, it is compressed to 1/4 compared with the recording method in the Full mode described above. According to this method, four times as many still images as in full mode recording can be recorded.

상기한 Full모드, Economy모드의 선택에는 Full/Economy 전환스위치(2719)를 사용한다. Full/Economy 전환스위치(2719)가 선택하고 있는 모드에 따라서 상술한 기록방법중의 어느 한쪽을 선택한다. 또, Full/Economy 전환스위치(2719)의 조작에 따라서 표시장치(2720)은 어느 기록방식을 선택하고 있는지를 표시함과 동시에 현재 선택되어 있는 기록방식으로 앞으로 몇매분의 정지화상을 기록할 수 있는지를 표시한다.The Full / Economy changeover switch 2719 is used to select the Full mode and the Economy mode. One of the above-described recording methods is selected according to the mode selected by the Full / Economy changeover switch 2719. In addition, depending on the operation of the Full / Economy selector switch 2719, the display device 2720 displays which recording method is selected and how many still images can be recorded in the future using the currently selected recording method. Is displayed.

[발명의 효과][Effects of the Invention]

이상의 실시예에 의하면, 조도나 색온도 등을 검출하는 검출기를 필요로 하지 않고 일반적인 촬상소자를 사용해서 정지화상의 영상신호를 생성할 수 있으므로, 저렴한 영상입력수단을 공급할 수 있다.According to the above embodiment, since a still image video signal can be generated using a general image pickup device without requiring a detector for detecting illuminance, color temperature, or the like, it is possible to supply an inexpensive video input means.

또, 색신호의 수직해상도의 저하가 적고 고화질의 프레임 스틸화상이 얻어지는 촬상장치를 실현할 수 있음과 동시에, 동작을 전환하는 것에 의해서 움직임 화상도 처리할 수 있다.In addition, the image pickup device which can reduce the vertical resolution of the color signal and obtain a frame still image of high quality can be realized, and the motion image can also be processed by switching the operation.

Claims (15)

입사광을 차단할 수 있는 광량제한수단, 입사광을 광전변환하는 화소를 갖고 상기 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로 및 상기 촬상수단 또는 신호처리회로에서 출력되는 정지화상의 디지탈 영상신호를 기록하는 기록수단을 포함하고, 상기 광량제한수단은 입사광량을 소정량으로 제한한 후에 입사광을 차단하고, 상기 촬상수단은 상기 광량제한수단에 의해 입사광량을 소정량으로 제한하고 있을 때에는 움직임 화상의 디지탈 영상신호를 출력하고, 차단한 후에 정지화상의 디지탈 영상신호를 출력하고, 상기 신호처리회로는 상기 움직임화상의 디지탈 영상신호가 공급되었을 때와 정지화상의 디지탈 영상신호가 공급되었을 때에 다른 신호처리를 실행하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.Light quantity limiting means capable of blocking incident light, imaging means having a pixel for photoelectric conversion of incident light and outputting a signal of the pixel as a digital video signal, a signal processing circuit for generating a digital video signal of a predetermined format, and the imaging means or signal processing Recording means for recording a digital video signal of a still image output from the circuit, wherein the light quantity limiting means blocks incident light after limiting the amount of incident light to a predetermined amount, and the image pickup means receives the amount of incident light by the light quantity limiting means; Is limited to a predetermined amount, a digital video signal of a moving picture is output, and after blocking, a digital video signal of a still picture is output, and the signal processing circuit outputs the digital video signal of the moving picture and when the digital video signal of the moving picture is supplied. Characterized in that different signal processing is executed when the digital video signal is supplied. The still picture recording digital camera. 제1항에 있어서, 상기 신호처리회로는 휘도신호 또는 색신호를 생성하는 매트릭스회로를 갖고, 상기 움직임화상의 디지탈 영상신호가 공급되었을 때와 정지화상의 디지탈 영상신호가 공급되었을 때 상기 매트릭스회로의 계수를 전환하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.2. The signal processing circuit according to claim 1, wherein the signal processing circuit has a matrix circuit for generating a luminance signal or a color signal, and coefficients of the matrix circuit when the digital video signal of the moving picture is supplied and when the digital video signal of a still picture is supplied. Still image recording digital camera, characterized in that for switching. 입사광을 차단할 수 있는 광량제한수단, 입사광을 광전변환하는 화소를 갖고 상기 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로 및 상기 촬상수단 또는 신호처리회로에서 출력되는 정지화상의 디지탈 영상신호를 기록하는 기록수단을 포함하고, 상기 광량제한수단은 입사광량을 소정량으로 제한한 후에 입사광을 차단하고, 상기 촬상수단은 상기 광량제한수단에 의해 입사광량을 소정량으로 제한하고 있을 때에는 움직임 화상의 디지탈 영상신호를 출력하고, 차단한 후에 정지화상의 디지탈 영상신호를 출력하고, 상기 신호처리회로는 공급된 상기 정지화상의 디지탈 영상신호에서 생성한 휘도신호와 색차신호 또는 RGB신호 또는 공급된 상기 정지화상의 디지탈 영상신호를 병렬 또는 직렬의 디지탈신호로 출력하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.Light quantity limiting means capable of blocking incident light, imaging means having a pixel for photoelectric conversion of incident light and outputting a signal of the pixel as a digital video signal, a signal processing circuit for generating a digital video signal of a predetermined format, and the imaging means or signal processing Recording means for recording a digital video signal of a still image output from the circuit, wherein the light quantity limiting means blocks incident light after limiting the amount of incident light to a predetermined amount, and the image pickup means receives the amount of incident light by the light quantity limiting means; Is limited to a predetermined amount, a digital video signal of a moving picture is output, and after blocking, a digital video signal of a still picture is output, and the signal processing circuit outputs a luminance signal generated from the supplied digital video signal. And a color difference signal or an RGB signal or a digital video signal supplied to the still picture in parallel or A still image recording digital camera, characterized by outputting a serial digital signal. 입사광을 차단할 수 있는 광량제한수단, 입사광을 광전변환하는 화소를 갖고 상기 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로 및 상기 촬상수단 또는 상기 신호처리회로에서 출력되는 디지탈 영상신호를 기록하는 기록수단을 포함하고, 상기 촬상수단은 상기 광량제한수단에 의해 입사광을 차단한 후에 정지화상의 디지탈 영상신호를 출력하고, 상기 신호처리회로는 상기 촬상수단 또는 상기 기록수단에서 공급되는 정지화상의 디지탈 영상신호를 내삽 보간하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.Light quantity limiting means capable of blocking incident light, imaging means having a pixel for photoelectric conversion of incident light and outputting a signal of the pixel as a digital video signal, a signal processing circuit for generating a digital video signal of a predetermined format, and the imaging means or the signal And recording means for recording the digital video signal output from the processing circuit, wherein the image pickup means outputs a digital video signal of a still image after the incident light is blocked by the light quantity limiting means, and the signal processing circuit outputs the digital image signal. Or interpolating and interpolating a digital video signal of a still picture supplied from said recording means. 제4항에 있어서, 상기 촬상수단은 수평방향Px, 수직방향Py(Px≠Py)의 간격으로 화소가 배치되어 있고, 상기 신호처리회로는 공급된 정지화상의 디지탈 영상신호를 수평방향으로 내삽 보간하고 수평방향 N개의 디지탈 영상신호에서 대략 N×Px/Py개의 디지탈 영상신호를 생성하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.5. The image pickup means according to claim 4, wherein pixels are arranged at intervals of a horizontal direction Px and a vertical direction Py (Px ≠ Py), and the signal processing circuit interpolates an interpolated digital image signal of a supplied still image in a horizontal direction. And generate approximately N × Px / Py digital video signals from the horizontal N digital video signals. 입사광을 차단할 수 있는 광량제한수단, 여러 종류의 분광특성 중의 어느 하나의 분광특성에 의해 입사광을 광전변환하는 여러 종류의 화소를 갖고 상기 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로 및 상기 촬상수단 또는 신호처리회로에서 출력되는 디지탈 영상신호를 기록하는 기록수단을 포함하고, 상기 촬상수단은 상기 광량제한수단에 의해 입사광량을 차단한 후에 상기 화소의 신호를 각각 독립된 화소신호로서 출력하고, 상기 기록수단에 기록한 상기 독립된 화소신호를 기록하고, 상기 신호처리회로는 상기 기록수단에 기록한 상기 독립된 화소신호에서 소정 포맷의 디지탈 영상신호를 생성하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.Light-limiting means for blocking incident light, imaging means for outputting a signal of the pixel as a digital video signal having various types of pixels for photoelectric conversion of incident light by any one of various types of spectral characteristics, A signal processing circuit for generating a digital video signal and recording means for recording a digital video signal output from the imaging means or signal processing circuit, wherein the imaging means blocks the incident light amount by the light quantity limiting means and then the pixel; Are output as independent pixel signals, and the independent pixel signals recorded in the recording means are recorded, and the signal processing circuit generates a digital video signal of a predetermined format from the independent pixel signals recorded in the recording means. Still image recording digital camera. 입사광을 차단할 수 있는 광량제한수단, 여러 종류의 분광특성중의 어느 하나의 분광특성에 의해 입사광을 광전변환하는 여러 종류의 화소를 갖고 상기 화소의 신호를 디지탈 영상신호로서 출력하는 촬상수단, 소정 포맷의 디지탈 영상신호를 생성하는 신호처리회로, 상기 촬상수단 또는 신호처리회로에서 출력되는 디지탈 영상신호를 기록하는 기록수단 및 기록재생 제어회로를 포함하고, 상기 기록재생 제어회로는 상기 광량제한수단에 의해 입사광을 차단한 후에 상기 촬상수단에서 상기 화소의 신호를 각각 독립된 화소신호로서 출력할지 또는 여러 화소의 신호를 혼합해서 혼합화소신호로서 출력할지를 제어하고, 상기 기록수단에는 상기 독립된 화소신호 또는 상기 혼합화소신호 중의 어느 하나를 기록하고, 상기 신호처리회로는 상기 기록수단에 기록한 상기 독립된 화소신호 또는 상기 혼합화소신호에서 소정 포맷의 디지탈 영상신호를 생성하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.Light-limiting means for blocking incident light, imaging means for outputting a signal of the pixel as a digital image signal having various types of pixels for photoelectric conversion of incident light by any one of various types of spectral characteristics, a predetermined format A signal processing circuit for generating a digital video signal of the apparatus, recording means for recording the digital video signal output from the image pickup means or the signal processing circuit, and a recording / playback control circuit, wherein the recording / playback control circuit is operated by the light quantity limiting means. After blocking the incident light, the imaging means controls whether the signal of the pixel is output as an independent pixel signal, or the signal of several pixels is mixed and output as a mixed pixel signal, and the recording means includes the independent pixel signal or the mixed pixel. Record any one of the signals, and the signal processing circuit And a digital image signal of a predetermined format is generated from the independent pixel signal or the mixed pixel signal recorded in the. 제7항에 있어서, 독립된 화소신호 또는 혼합화소신호 중 어느 화소신호가 기록되어 있는지를 식별하기 위한 식별신호를 상기 기록수단에 기록하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.8. The still image recording digital camera according to claim 7, wherein an identification signal for identifying which of an independent pixel signal or a mixed pixel signal is recorded is recorded in the recording means. 제7항 또는 제8항에 있어서, 독립된 화소신호 또는 혼합화소신호 중 어느 화소신호가 기록할지를 표시하기 위한 표시수단을 포함하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.9. A still image recording digital camera according to claim 7 or 8, comprising display means for indicating which pixel signal of an independent pixel signal or a mixed pixel signal is to be recorded. 제7항에 있어서, 상기 기록수단에 기록할 수 있는 정지화상의 매수를 표시하기 위한 표시수단을 포함하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.8. The still image recording digital camera according to claim 7, comprising display means for displaying the number of still images that can be recorded in said recording means. 제6항에 있어서, 상기 촬상수단 또는 상기 촬상수단에서 상기 기록수단에 도달할 때까지의 신호전달 경로에 비선형의 입출력특성을 갖는 회로를 배치한 것을 특징으로 하는 정지화상기록 디지탈 카메라.7. The still image recording digital camera according to claim 6, wherein a circuit having a nonlinear input / output characteristic is disposed in a signal transmission path from the image pickup means or the image pickup means to the recording means. 제7항에 있어서, 상기 촬상수단 또는 상기 촬상수단에서 상기 기록수단에 도달할 때까지의 신호전달 경로에 비선형의 입출력특성을 갖는 회로를 배치한 것을 특징으로 하는 정지화상기록 디지탈 카메라.8. The still image recording digital camera according to claim 7, wherein a circuit having a nonlinear input / output characteristic is arranged in a signal transmission path from the image pickup means or the image pickup means to the recording means. 제4항에 있어서, 상기 기록수단은 버퍼메모리와 메인메모리를 갖고, 상기 신호처리수단은 상기 버퍼메모리에 상기 정지화상의 디지탈 영상신호를 라이트하는 동작주파수보다 낮은 동작주파수로 상기 버퍼메모리에서 상기 정지화상의 디지탈 영상신호를 리드해서 상기 메인메모리에 라이트하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.5. The recording medium as claimed in claim 4, wherein the recording means has a buffer memory and a main memory, and the signal processing means stops at the buffer memory at an operating frequency lower than an operating frequency of writing a digital video signal of the still image to the buffer memory. And a digital image signal of an image is read and written to the main memory. 제6항에 있어서, 상기 기록수단은 버퍼메모리와 메인메모리를 갖고, 상기 신호처리후단은 상기 버퍼메모리에 상기 정지화상의 디지탈 영상신호를 라이트하는 동작주파수보다 낮은 동작주파수로 상기 버퍼메모리에서 상기 정지화상의 디지탈 영상신호를 리드해서 상기 메인메모리에 라이트하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.7. The recording medium according to claim 6, wherein said recording means has a buffer memory and a main memory, and said signal processing end stops at said buffer memory at an operating frequency lower than an operating frequency of writing a digital video signal of said still image to said buffer memory. And a digital image signal of an image is read and written to the main memory. 제7항에 있어서, 상기 기록수단은 버퍼메모리와 메인메모리를 갖고, 상기 신호처리수단은 상기 버퍼메모리에 상기 정지화상의 디지탈 영상신호를 라이트하는 동작주파수보다 낮은 동작주파수로 상기 버퍼메모리에서 상기 정지화상의 디지탈 영상신호를 리드해서 상기 메인메모리에 라이트하는 것을 특징으로 하는 정지화상기록 디지탈 카메라.8. The recording apparatus according to claim 7, wherein said recording means has a buffer memory and a main memory, and said signal processing means stops at said buffer memory at an operating frequency lower than an operating frequency of writing a digital video signal of said still image to said buffer memory. And a digital image signal of an image is read and written to the main memory.
KR1019970020687A 1992-12-11 1997-05-26 Still digital camera KR0137232B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1019970020687A KR0137232B1 (en) 1992-12-11 1997-05-26 Still digital camera

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP33139392A JP3288776B2 (en) 1992-12-11 1992-12-11 Imaging device
JP92-331393 1992-12-11
JP4339975A JPH06189256A (en) 1992-12-21 1992-12-21 Still image recording digital camera
JP92-339975 1992-12-21
KR1019930026802A KR0125108B1 (en) 1992-12-11 1993-12-08 A digital camera for still image recording
KR1019970020687A KR0137232B1 (en) 1992-12-11 1997-05-26 Still digital camera

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1019930026802A Division KR0125108B1 (en) 1992-12-11 1993-12-08 A digital camera for still image recording

Publications (1)

Publication Number Publication Date
KR0137232B1 true KR0137232B1 (en) 1998-04-28

Family

ID=27340484

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970020687A KR0137232B1 (en) 1992-12-11 1997-05-26 Still digital camera

Country Status (1)

Country Link
KR (1) KR0137232B1 (en)

Similar Documents

Publication Publication Date Title
KR0125108B1 (en) A digital camera for still image recording
EP0618739B1 (en) Digital video camera and recording apparatus
US5734424A (en) Image pickup apparatus capable of providing moving video signal and still video signal
US5305096A (en) Image signal processing apparatus using color filters and an image pick-up device providing, interlaced field signals
US20080186391A1 (en) Solid-state image pickup apparatus with horizontal thinning and a signal reading method for the same
US6031569A (en) Image sensing method and apparatus utilizing the same
EP1173029B1 (en) Color image pickup device
US6690418B1 (en) Image sensing apparatus image signal controller and method
US5150204A (en) Solid state image pickup having plural pixels arranged on plural lines
JP2001148805A (en) Solid-state image pickup device
US6249643B1 (en) Image sensing apparatus having photoelectric elements in a two-dimensional offset arrangement
KR0137232B1 (en) Still digital camera
JPH02107091A (en) Signal processing circuit for video camera
JPH07123421A (en) Image pickup device
JP3288776B2 (en) Imaging device
JPH06189256A (en) Still image recording digital camera
US5481304A (en) Apparatus for zooming a digital video signal of a predetermined color order which is derived from a charge-coupled device
JP3463695B2 (en) Imaging equipment
JP2004357333A (en) Digital camera for recording still picture
JP3658430B2 (en) Image signal processing device
JPH09149424A (en) Picture information processor
JPH06233316A (en) Image pickup device with frame still picture generating function
JP2002359772A (en) Digital camera for recording still picture
JP2000050288A (en) Video signal processing method and image-pickup device
JPH0918887A (en) Image pickup device

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130118

Year of fee payment: 16

EXPY Expiration of term