KR100970030B1 - 화상 처리 장치, 및 화상 처리 방법, 기록 매체 - Google Patents

화상 처리 장치, 및 화상 처리 방법, 기록 매체 Download PDF

Info

Publication number
KR100970030B1
KR100970030B1 KR1020047017843A KR20047017843A KR100970030B1 KR 100970030 B1 KR100970030 B1 KR 100970030B1 KR 1020047017843 A KR1020047017843 A KR 1020047017843A KR 20047017843 A KR20047017843 A KR 20047017843A KR 100970030 B1 KR100970030 B1 KR 100970030B1
Authority
KR
South Korea
Prior art keywords
pixel
thinning
interest
image
pixels
Prior art date
Application number
KR1020047017843A
Other languages
English (en)
Other versions
KR20050004836A (ko
Inventor
노부유끼 사또
겐 나까지마
가쯔아끼 히로따
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20050004836A publication Critical patent/KR20050004836A/ko
Application granted granted Critical
Publication of KR100970030B1 publication Critical patent/KR100970030B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/445Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by skipping some contiguous pixels within the read portion of the array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/447Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by preserving the colour pattern with or without loss of information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Image Processing (AREA)

Abstract

본 발명은, 모든 화소를 이용한 씨닝 처리를 실행할 수 있도록 한 화상 처리 장치, 및 화상 처리 방법, 기록 매체, 및 프로그램에 관한 것이다. 수평 성분 저역 통과 필터에 의해, 제1 라인의 녹의 화소를 주목 화소로 하여 (1, 0, 1, 0, 1)/3의 필터 처리가 행해진 경우, 녹의 화소에 1이 승산되고, 적의 화소에 0이 승산되고, 이들의 화소값의 합계가 3으로 제산되어, 주목 화소와 인접하는 녹의 화소와의 단순 평균이 산출된다. 제1 라인의 적의 화소를 주목 화소로 한 경우도 마찬가지로, 주목 화소와 인접하는 적의 화소와의 단순 평균이 산출된다. 마찬가지로 하여, 제2 라인의 녹의 화소와 청의 화소도 필터링된다. 그리고, 수평 1/3 씨닝 처리부에 의해, 수평 성분의 3 화소마다 씨닝되므로, 3 화소 간격의 화소를 주목 화소로 하여, 인접하는 동일 색의 화소와의 단순 평균값으로 구성되는 씨닝 화소군이 생성된다. 본 발명은, 디지털 카메라에 적용할 수 있다.
Figure R1020047017843
씨닝 화소군, 필터, 디지털 카메라, 수평 성분

Description

화상 처리 장치, 및 화상 처리 방법, 기록 매체{IMAGE PROCESSING SYSTEM, AND IMAGE PROCESSING METHOD, RECORDING MEDIUM}
본 발명은, 화상 처리 장치, 및 화상 처리 방법, 기록 매체, 및 프로그램에 관한 것으로, 특히 씨닝 처리를 행하는 경우에 이용하기에 적합한 화상 처리 장치, 및 화상 처리 방법, 기록 매체, 및 프로그램에 관한 것이다.
예를 들면, 디지털 카메라(디지털 스틸 카메라, 디지털 비디오 카메라, 및 정지 화상 및 동화상이 촬상 가능한 디지털 카메라)에 사용되고 있는, 광을 전기 신호로 변환하는 디바이스인 촬상 소자는, 칩의 표면에, 미세한 포토다이오드를 배열한 구조로 되어 있다. 포토다이오드는, 조사된 광의 강약에 따라 전하를 발생하는 반도체로, 그 자체에서는 색을 포착할 능력이 없기 때문에, 컬러 화상을 취득하기 위해서는, 입사광을 색 요소별로 취득할 필요가 있다.
일반적인 디지털 카메라, 혹은 비디오 카메라에 사용되고 있는 단판식의 컬러 촬상 소자는, 포토다이오드 위에, 3색 혹은 4색의 컬러 필터를 모자이크 형상으로 배치하여, 개개의 포토다이오드가 개별의 색 요소에 반응하는 구조로 되어 있다. 예를 들면, RGB(적, 녹, 청, 즉 광의 3원색) 각각에 개별로 촬상 소자를 갖 는, 즉 3장의 촬상 소자를 사용하는 3판식 카메라에 대하여, RBG의 컬러 필터가 모자이크 형상으로 배치되어 있는, 즉 1매의 촬상 소자를 사용하는 단판식의 컬러 촬상 소자를 이용하여 촬상하는 카메라를, 단판식 카메라라고 칭한다.
촬상 소자에는, 예를 들면, CCD(Charge Coupled Device)나, CMOS(Complementary Metal-Oxide Semiconductor : 상보형 금속 산화막 반도체) 센서 등이 이용되는 경우가 많다.
본래, CCD란, 전하를 버킷 릴레이식으로 전송하는 기능을 갖는 소자 전반을 가리키지만, 현재의 CCD란, 일반적으로 전하의 판독에 이 CCD를 이용한 CCD 촬상 소자를 가리키는 경우가 많다. CCD는, 디지털 카메라, 이미지 스캐너 등의 화상 입력을 행하는 이미지 디바이스 전반에서 사용되고 있다.
CCD 촬상 소자는, 포토다이오드와, 포토다이오드가 발생한 전하를 잇달아 씨닝하여 전송하는 회로로 이루어진다. CCD 촬상 소자의 구체적인 구조는, 실리콘 기판 상에 포토다이오드와 전극을 바둑판눈처럼(이 수가 CCD의 화소수로 됨) 배치하는 것이며, 이 바둑판눈 부분에, 필름과 동일하게 렌즈를 통과한 광학상이 결상되면, 개개의 포토다이오드는, 수광한 광의 강약에 따른 전하를 발생시킨다. 축적된 전하는, 전극에 교대로 전압을 인가해 감으로써, 마치 펌프로 밀어내어지듯이 이웃한 전극으로 이동하여, 최종적으로 하나씩 출력된다. 이것을 증폭하거나, 디지털값으로 변환함으로써, 2차원의 화상 데이터가 생성된다. 또한, 동화상인 경우에는, 이 프로세스를 연달아 반복하여, 연속된 정지 화상으로서의 동화상이 생성된다.
CMOS 센서란, CCD 대신에, 전하의 판독에 CMOS 스위치를 사용한 촬상 소자로서, 각 화소가 하나의 포토다이오드와 CMOS 트랜지스터를 사용한 스위치로 구성된다. 즉, 격자 형상으로 배열된 포토다이오드 각각에, 스위치를 부착한 구조로 되어 있고, 이 스위치를 잇달아 전환하여, 1 화소씩 전하를 판독해 간다. 이러한 구조로부터, 예를 들면, CCD 특유의 스미어가 원리적으로 발생하지 않고, 소비 전력이 적고(CCD의 1/10 정도), 단일의 저전압으로 구동할 수 있으며, 일반적인 칩과 동일한 제조 라인을 쓸 수 있고, 주변 기능과 아울러 원 칩으로 구성할 수 있으므로, 소형 저가격화가 가능하다는 등의 다양한 장점을 기대할 수 있다. 그러나, CMOS 센서를 촬상 소자로서 실용화하는 것에 있어서는, 스위칭 노이즈 등에 기인하는 잡음 대책이 필요하다.
고체 촬상 소자의 센서의 수, 즉 촬상되는 화상의 화소수는, 디지털 비디오 카메라에서는, 대부분의 경우 100만 화소 이하였다. 한편, 디지털 스틸 카메라에서는, 최근의 반도체 기술의 향상, 및 고해상도화 때문에, 화소수는 100만 화소, 200만 화소, 300만 화소로 증가하는 경향이 있다.
또한, 최근에는, 정지 화상 및 동화상을 촬상하는 것이 가능한 디지털 카메라가 개발되어, 널리 보급되었다.
그러나, 촬상되는 화상의 화소수가 증가함에 따라, 모든 화소를 판독하기 위해 걸리는 시간이 길어진다. 정지 화상과 달리, 동화상에서는, 화상을 판독하는 시간이 길어지면, 원활한 동화상을 얻을 수 없게 된다.
이것을 해결하기 위해, 해상도를 필요로 하지 않는 경우, 화소의 일부를 씨 닝하여 판독하는 방법이 있다.
종래, 특히 촬상 소자로서 CCD가 이용되고 있는 경우, 동화상의 표시 등에 있어서, 예를 들면, 2×2로 구성된 화소(여기서는, Gr, r, B, Gb의 4 화소)에서, 도 1에 도시된 바와 같이, 8 화소 중 2 화소만을 씨닝하여, 다른 화소를 이용하지 않는 방법이나, 도 2에 도시된 바와 같이, 12 화소 중 2 화소만을 씨닝하여, 다른 화소를 이용하지 않는 방법 등이 이용되었다.
그러나, 도 1, 혹은 도 2에 도시되는 씨닝 방법에서는, 등간격으로 씨닝을 행할 수 없을 뿐만 아니라, 모든 화소를 이용하지 않기 때문에, 표시, 혹은 기록되는 동화상에 겹쳐짐이 발생하게 되는 문제가 발생하였다.
<발명의 개시>
본 발명은 이러한 상황을 감안하여 이루어진 것으로, 겹쳐짐이 없는 양호한 씨닝 화상을 얻을 수 있는 씨닝 처리를 실현할 수 있도록 하는 것이다.
본 발명의 화상 처리 장치는, 복수의 색 성분으로 이루어지며, 2×2의 색 코딩을 갖는 화상 신호를 취득하는 취득 수단과, 취득 수단에 의해 취득된 화상 신호 중, 주목 화소와 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1) 개분의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하는 필터 수단과, 필터 수단에 의해 산출된 가산 평균값을 화소값으로 하는 화소를, 1/(2n-1)의 씨닝율로 씨닝할 수 있는 씨닝 수단을 포함하는 것을 특징으로 한다.
필터 수단에는, 1 프레임의 화상 신호의, 모든 화소의 화소값을 이용하여, 가산 평균값을 산출시키도록 할 수 있다.
필터 수단에는, 주목 화소에 대하여, 수평 방향으로 배열되는 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하게 할 수 있다.
필터 수단에는, 주목 화소에 대하여, 수직 방향으로 배열되어 있는 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하게 할 수 있다.
필터 수단에는, 주목 화소에 대하여, 수평 방향 및 수직 방향으로 소정의 범위 내의 동일한 색 성분의 화소를 선택시켜, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하게 할 수 있다.
필터 수단에는, 복수의 색 성분 중, 적어도 하나의 색 성분의 주목 화소에 대하여, 주목 화소에 가까운 위치에 배치되어 있는 것으로부터 순서대로 동일한 색 성분의 화소를 선택시켜, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하게 할 수 있다.
필터 수단에는, 복수의 색 성분의 모든 색 성분의 주목 화소에 대하여, 주목 화소에 가까운 위치에 배치되어 있는 것으로부터 순서대로 동일한 색 성분의 화소를 선택시켜, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하게 할 수 있다.
취득 수단에는, 화상 신호를 촬상하는 촬상 수단을 더 구비하게 할 수 있다.
촬상 수단은, CMOS IC로 구성시키도록 할 수 있다.
촬상 수단, 필터 수단, 및 씨닝 수단은, 동일한 CMOS IC로 구성시키도록 할 수 있다.
취득 수단에 의해 취득된 화상 신호에 대응하는 화상을 표시하는 표시 수단을 더 구비하게 할 수 있고, 표시 수단에 의해 표시되는 화상이 동화상인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단 및 씨닝 수단에 의해 처리하여, 표시 수단에 의해 표시되도록 할 수 있고, 표시 수단에 의해 표시되는 화상이 정지 화상인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단 및 씨닝 수단에 의해 처리하지 않고, 표시 수단에 의해 표시하도록 할 수 있다.
취득 수단에 의해 취득된 화상 신호를 기록하는 기록 수단을 더 구비하게 할 수 있고, 기록 수단에 의해 기록되는 화상 신호가 동화상에 대응하는 신호인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단 및 씨닝 수단에 의해 처리하여, 기록 수단에 의해 기록시키도록 할 수 있고, 기록 수단에 의해 기록되는 화상 신호가 정지 화상에 대응하는 신호인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단 및 씨닝 수단에 의해 처리하지 않고, 기록 수단에 의해 기록시키도록 할 수 있다.
취득 수단에 의해 취득된 화상 신호를 출력하는 출력 수단을 더 구비하게 할 수 있고, 출력 수단에 의해 출력되는 화상 신호가 동화상에 대응하는 신호인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단 및 씨닝 수단에 의해 처리하여, 출력 수단에 의해 출력시키도록 할 수 있으며, 출력 수단에 의해 출력되는 화상 신호가 정지 화상에 대응하는 신호인 경우, 취득 수단에 의해 취득된 화상 신호를, 필터 수단, 및 씨닝 수단에 의해 처리하지 않고, 출력 수단에 의해 출력시키도록 할 수 있다.
본 발명의 화상 처리 방법은, 복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 신호 중, 주목 화소와 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1) 개분의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하는 필터 연산 단계와, 필터 연산 단계의 처리에 의해 산출된 가산 평균값을 화소값으로 하는 화소를, 1/(2n-1)의 씨닝율로 씨닝하는 씨닝 단계를 포함하는 것을 특징으로 한다.
본 발명의 기록 매체에 기록되어 있는 프로그램은, 복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 신호 중, 주목 화소와 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1) 개분의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하는 필터 연산 단계와, 필터 연산 단계의 처리에 의해 산출된 가산 평균값을 화소값으로 하는 화소를, 1/(2n-1)의 씨닝율로 씨닝하는 씨닝 단계를 포함하는 것을 특징으로 한다.
본 발명의 프로그램은, 복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 신호 중, 주목 화소와 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1) 개분의 화소값의 가산 평균값을 산출하여, 주목 화소의 화소값으로 하는 필터 연산 단계와, 필터 연산 단계의 처리에 의해 산출된 가산 평균값을 화소값으로 하는 화소를, 1/(2n-1)의 씨닝율로 씨닝하는 씨닝 단계를 포함하는 것을 특징으로 한다.
본 발명의 화상 처리 장치 및 화상 처리 방법, 및 프로그램에서는, 복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호가 취득되고, 취득된 화상 신호 중, 주목 화소와 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1) 개분의 화소값의 가산 평균값이 산출되어, 주목 화소의 화소값으로 되어, 산출된 가산 평균값을 화소값으로 하는 화소가 1/(2n-1)의 씨닝율로 씨닝된다.
도 1은 종래의 수직 1/8 씨닝에 대하여 설명하는 도면.
도 2는 종래의 수직 2/12 씨닝에 대하여 설명하는 도면.
도 3은 본 발명을 적응한 비디오 카메라의 구성을 도시하는 블록도.
도 4는 도 3의 씨닝 처리부의 더 상세한 구성을 도시하는 블록도.
도 5는 베이어 배열을 설명하는 도면.
도 6은 도 4의 씨닝 처리부가 실행하는 처리에 대하여 설명하는 도면.
도 7은 도 4의 씨닝 처리부에 입력하는 화상의 대역에 대하여 설명하는 도면.
도 8은 도 4의 씨닝 처리부에 의해 필터링된 화상의 대역에 대하여 설명하는 도면.
도 9는 도 4의 씨닝 처리부로부터 출력되는 화상의 대역에 대하여 설명하는 도면.
도 10은 씨닝 처리부의 상이한 구성을 도시하는 블록도.
도 11은 도 10의 씨닝 처리부가 실행하는 처리에 대하여 설명하는 도면.
도 12는 도 10의 씨닝 처리부에 의해 필터링된 화상의 대역에 대하여 설명하는 도면.
도 13은 도 10의 씨닝 처리부로부터 출력되는 화상의 대역에 대하여 설명하는 도면.
도 14는 씨닝 처리부의 상이한 구성을 도시하는 블록도.
도 15는 도 14의 씨닝 처리부가 실행하는 처리에 대하여 설명하는 도면.
도 16은 씨닝 처리부의 상이한 구성을 도시하는 블록도.
도 17은 도 16의 씨닝 처리부에 입력되는 화상 신호를 설명하기 위한 도면.
도 18은 도 16의 씨닝 처리부가 실행하는 처리에 대하여 설명하기 위한 도면.
도 19는 도 16의 씨닝 처리부로부터 출력되는 화상 신호를 설명하기 위한 도면.
도 20은 도 16의 씨닝 처리부가 실행하는 처리의 상이한 예에 대하여 설명하기 위한 도면.
<발명을 실시하기 위한 최량의 형태>
이하, 도면을 참조하여, 본 발명의 실시예에 대하여 설명한다.
도 3은, 본 발명을 적용한, 디지털 카메라의 구성을 도시하는 블록도이다. 조작 입력부(11)는, 예를 들면, 버튼, 키, 죠그다이얼 등으로 구성되어, 사용자에 의해, 정지 화상의 촬상, 동화상의 녹화 개시 및 종료, 혹은 노광이나 핀트 조절 등의 화상 조정의 조작 입력을 받는다.
제어부(12)는, CPU(Central Processing Unit), ROM(Read Only Memory), 및 RAM(Random Access Memory)로 구성되어, 디지털 카메라(1)의 동작을 제어하는 것으로, 조작 입력부(11)로부터 입력된 사용자의 조작에 기초하여, 촬상부(13), 씨닝 처리부(14), 카메라 신호 처리부(15), 및 드라이브(18)를 제어하기 위한 제어 신호를 생성하여, 각 부에 출력한다.
촬상부(13)는, 예를 들면 광학 렌즈, 광학 렌즈를 구동하는 구동부, CCD 센서나 CMOS 센서 등의 촬상 소자, 및 이들 촬상 소자에 의해 취득된 아날로그의 전기 신호를 디지털 신호로 변환하는 A/D 변환부 등으로 구성되어, 제어부(12)의 제어에 따라, 정지 화상, 혹은 동화상을 촬상한다.
씨닝 처리부(14)는, 제어부(12)의 제어에 따라, 촬상부(13)로부터 입력된 화상 신호에 대하여, 필요에 따라 씨닝 처리를 행한다.
여기서, 촬상부(13)와 씨닝 처리부(14)는, 각각 상이한 처리 블록으로서 구성되도록 해도 되며, 동일한 칩으로서 구성(예를 들면, 촬상부(13)와 씨닝 처리부(14)가 하나의 CMOS IC로 구성)되도록 해도 된다.
카메라 신호 처리부(15)는, 제어부(12)의 제어에 따라, 입력된 화상 데이터에 대하여, 예를 들면, γ 처리, 화이트 밸런스, 디모자이크 등의 처리를 행한다.
표시부(16)는, 예를 들면, 액정 패널 등으로 구성되어, 입력된 화상 데이터를 표시한다. 표시부(16)는, 조작 입력부(11)로부터 입력되는 사용자의 조작에 따 라, 촬상하는 화상을 확인하기 위한 파인더로서 기능하거나, 촬상된 정지 화상, 혹은 녹화된 동화상을 표시하는 것이다. 출력부(17)는, 유선, 혹은 무선으로, 다른 장치 혹은 네트워크와 접속되어, 촬상된 정지 화상, 혹은 녹화된 동화상을 출력한다.
드라이브(18)에는, 자기 디스크(21), 광 디스크(22), 광자기 디스크(23), 혹은 반도체 메모리(24) 등이 적절하게 장착되어, 카메라 신호 처리부(15)로부터 공급된 화상 신호를, 자기 디스크(21), 광 디스크(22), 광자기 디스크(23), 혹은 반도체 메모리(24) 등에 출력하여 기록시키거나, 자기 디스크(21), 광 디스크(22), 광자기 디스크(23), 혹은 반도체 메모리(24) 등에 기록되어 있는 정지 화상 데이터, 혹은 동화상 데이터를, 표시부(16)에 출력시켜 표시시키거나, 출력부(17)로부터 다른 장치에 출력시킨다.
또한, 드라이브(18)에는, 자기 테이프를 장착할 수 있도록 해도 된다. 또한, 드라이브(18) 이외에, 예를 들면, 반도체 메모리나 하드디스크 등의 기록 매체를, 디지털 카메라(1)의 내부에 설치하도록 함으로써, 촬상된 화상 데이터를 디지털 카메라(1)의 내부에 기억할 수 있도록 해도 된다.
또한, 드라이브(18)에 장착되어 있는, 자기 디스크(21), 광 디스크(22), 광자기 디스크(23), 혹은 반도체 메모리(24) 등의 기록 매체로부터 판독된 프로그램은, 필요에 따라 제어부(12)에 공급되어, 인스톨된다.
사용자가, 조작 입력부(11)를 이용하여, 촬상부(13)에 의해 촬상 가능한 화상을 표시부(16)에 표시시키도록 조작하는 경우(즉, 표시부(16)를 파인더로서 이용 하고 있는 경우), 제어부(12)는, 촬상부(13)를 제어하여, 연속하여 화상 데이터를 취득하여, 씨닝 처리부(14)에 출력시킨다. 씨닝 처리부(14)는, 제어부(12)의 제어에 따라, 씨닝 처리를 실행하여, 씨닝된 화상 데이터를 카메라 신호 처리부(15)에 출력한다. 씨닝 처리의 상세 내용에 대해서는 후술한다. 카메라 신호 처리부(15)는, 씨닝 처리부(14)로부터 공급된, 씨닝된 화상 데이터에 소정의 처리를 실시하여, 표시부(16)에 출력하여 표시시킨다.
씨닝이 행해짐에 따라, 화상을 판독하기 위해 걸리는 시간을 단축할 수 있기 때문에, 표시부(16)에 원활하게 움직이는 동화상을 표시시키도록 할 수 있다.
사용자가, 표시부(16)에 표시되어 있는 화상을 참조하여, 조작 입력부(11)를 이용하여, 정지 화상의 촬상을 명령한 경우, 제어부(12)는 촬상부(13)를 제어하여, 1 프레임분의 화상 데이터를 취득하여, 씨닝 처리부(14)에 출력시킨다. 씨닝 처리부(14)는, 제어부(12)의 제어에 따라, 씨닝 처리를 실행하지 않고, 씨닝되지 않은 모든 화소로 구성되는 화상 데이터를 카메라 신호 처리부(15)에 출력한다. 카메라 신호 처리부(15)는, 씨닝 처리부(14)로부터 공급된, 씨닝되지 않은, 1 프레임분의 화상 데이터에 소정의 처리를 실시하여, 표시부(16)에 출력하여 표시시킴과 함께, 드라이브(18)에 장착되어 있는 소정의 기록 매체에 출력하여 기록시킨다.
씨닝이 행해지지 않음에 따라, 고해상도의 화상이 드라이브(18)에 장착되어 있는 소정의 기록 매체에 기록된다.
사용자가, 표시부(16)에 표시되어 있는 화상을 참조하여, 조작 입력부(11)를 이용하여, 동화상의 촬상을 명령한 경우, 제어부(12)는, 촬상부(13)를 제어하여, 연속하여 화상 데이터를 취득하여, 씨닝 처리부(14)에 출력시킨다. 씨닝 처리부(14)는, 제어부(12)의 제어에 따라, 씨닝 처리를 실행하여, 씨닝된 화상 데이터를 카메라 신호 처리부(15)에 출력한다. 카메라 신호 처리부(15)는, 씨닝 처리부(14)로부터 공급된, 씨닝된 화상 데이터에 소정의 처리를 실시하여, 표시부(16)에 출력하여 표시시킴과 함께, 드라이브(18)에 장착되어 있는 소정의 기록 매체에 출력하여 기록시킨다.
씨닝이 행해짐에 따라, 화상을 판독하기 위해 걸리는 시간을 단축할 수 있기 때문에, 동화상을 드라이브(18)에 장착되어 있는 소정의 기록 매체에 기록할 수 있다.
또한, 사용자는, 조작 입력부(11)를 조작함으로써, 드라이브(18)에 장착되어 있는 소정의 기록 매체에 기록되어 있는 정지 화상 데이터, 혹은 동화상 데이터를, 표시부(16)에 출력하여 표시시키거나, 출력부(17)로부터 다른 장치 등에 출력시킬 수 있다.
디지털 카메라(1)에는, 음성 데이터를 취득하기 위한 마이크, 취득된 음성 데이터를 처리하는 음성 데이터 처리부, 및 음성 데이터를 출력하는 스피커 등을 더 구비하도록 해도 된다.
도 4는, 씨닝 처리부(14)의 더 상세한 구성을 도시하는 블록도이다.
수평 성분 저역 통과 필터(31)는, 입력된 화상 신호에 대하여, 수평 방향으로 (1, 0, 1, 0, 1)/3의 필터 처리를 행한다. 수평 1/3 씨닝 처리부(32)는, 수평 방향으로 3 화소 간격으로 리샘플링(씨닝)을 행한다.
예를 들면, 도 5에 도시된 바와 같이, 제1 라인에 녹과 적의 각각의 컬러 필터, 제2 라인에 청과 녹의 각각의 컬러 필터가 배치되어 있는, 소위 2×2의 베이어 배열(G(그린) 바둑판 배열)로 코딩이 행해지는 경우의 필터링 및 리샘플링에 대하여, 도 6을 이용하여 설명한다.
제1 라인에서는, 녹의 컬러 필터의 배치 위치에 대응하는 화소(이하, 녹의 화소라고 칭하기로 함)와, 적의 컬러 필터의 배치 위치에 대응하는 화소(이하, 적의 화소라고 칭하기로 함)가 1 화소씩 교대로 배치되어 있다. 수평 성분 저역 통과 필터(31)가, 하나의 녹의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1)/3의 필터 처리를 행한 경우, 주목 화소를 포함하는 3개의 녹의 화소에 대응하는 부분에는 1이 승산되고, 적의 화소에 대응하는 부분은 0이 승산되고, 이들 화소값의 합계가 3으로 제산되므로, 주목 화소로 되는 녹의 화소와, 그 화소에 인접하는 녹의 화소와의 단순 평균이 산출된다.
한편, 수평 성분 저역 통과 필터(31)가, 하나의 적의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1)/3의 필터 처리를 행한 경우, 주목 화소를 포함하는 3개의 적의 화소에 대응하는 부분에는 1이 승산되고, 녹의 화소에 대응하는 부분은 0이 승산되고, 이들의 화소값의 합계가 3으로 제산되므로, 주목 화소로 되는 적의 화소와, 그 화소에 인접하는 적의 화소와의 단순 평균이 산출된다.
마찬가지로 하여, 제2 라인에서의 녹의 화소와, 청의 컬러 필터의 배치 위치에 대응하는 화소(이하, 청의 화소라고 칭하기로 함)도 수평 성분 저역 통과 필터(31)에 의해 필터링된다.
그리고, 수평 1/3 씨닝 처리부(32)에서, 각각의 화소가 수평 성분의 3 화소마다 씨닝되므로, 최종적으로는, 도 6의 도면에서 화살표로 도시되어 있는 3 화소 간격의 화소를 주목 화소로 하여, 그 화소에 인접하는 동일 색의 화소와의 단순 평균값을 산출함으로써 얻어지는 화소로 구성되는 씨닝 화소군이 생성된다.
도 6에서는, 녹의 화소를 주목 화소로 한 경우와, 적의 화소를 주목 화소로 한 경우, 및 청의 화소를 주목 화소로 한 경우와 녹의 화소를 주목 화소로 한 경우에 필터링된 화소에 대하여, 각각 상단과 하단으로 나누어 도시하고 있지만, 수평 성분 저역 통과 필터(31)는 동일한 라인의 처리를 동시에 실행하는 것이 가능하다.
도 7은, 씨닝 처리부(14)에 입력되기 전의 화상의 대역을 도시하는 도면이다. 씨닝 전의 화상에서의 나이키스트의 한계 주파수 fn은, 씨닝 전 화상의 샘플링 주파수 fs의 1/2이다.
도 8은, 수평 성분 저역 통과 필터(31)에서, 씨닝 전의 화상에 대하여, (1, 0, 1, 0, 1)/3의 필터 처리가 행해진 후의 대역을 도시하는 도면이고, 도 9는 수평 1/3 씨닝 처리부(32)에서, 씨닝 처리된 후의 대역을 도시하는 도면이다.
도 8 및 도 9에서, 나이키스트의 한계 주파수 fn' 및 샘플링 주파수 fs'는, 모두 도 7을 이용하여 설명한 씨닝 처리부(14)에 입력되기 전의 화상과 비교하여, 적절하게 제한된 값으로 되고, 또한 이들의 샘플링점은 등간격이다.
즉, 종래의 씨닝 화상의 생성 방법에서는, 대부분의 화소가 이용되지 않고, 일부의 화소만을 이용하여, 씨닝 화상이 생성되어 있었지만, 씨닝 처리부(14)의 처리에 의해, 모든 화소를 이용하여 필터 처리가 실행되어, 등간격으로 씨닝 처리가 행해져, 씨닝 화상이 생성되므로, 화상 위상의 어긋남이 없고, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.
씨닝 처리부(14)에서는, 수평 성분 저역 통과 필터(31)에서, 씨닝 전의 화상에 대하여, (1, 0, 1, 0, 1)/3의 필터 처리가 행해지고, 수평 1/3 씨닝 처리부(32)에서, 1/3로 씨닝되는 것으로서 설명했지만, 씨닝 후의 샘플링 주파수 fs'에 트랩 포인트가 들어가서, 나이키스트의 한계 주파수 fn'에서, 적절하게 대역 제한되는 필터이면서, 또한 씨닝 후에 화상 위상의 어긋남이 없는 것이면, 어떠한 필터가 이용되어도 무관하다.
예를 들면, 이러한 씨닝 방법은, 씨닝율 1/3 이외에도, 씨닝율 1/(2n-1)(단, n은 양의 정수)인 경우에 성립한다. 예를 들면, 도 3의 디지털 카메라(1)에서, 씨닝 처리부(14) 대신에, 도 10에 도시하는 씨닝 처리부(41)를 설치하도록 해도 된다.
수평 성분 저역 통과 필터(51)는, 입력된 화상 신호에 대하여, 수평 방향으로 (1, 0, 1, 0, 1, 0, 1, 0, 1)/5의 필터 처리를 행한다. 수평 1/5 씨닝 처리부(52)는, 수평 방향으로 5 화소 간격으로 리샘플링(씨닝)을 행한다.
예를 들면, 도 5를 이용하여 설명한, 2×2의 베이어 배열로 코딩이 행해지는 경우의 필터링 및 리샘플링에 대하여, 도 11을 이용하여 설명한다.
수평 성분 저역 통과 필터(51)가, 제1 라인에서, 하나의 녹의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1, 0, 1, 0, 1)/5의 필터 처리를 행한 경우, 주목 화소를 포함하는 5개의 녹의 화소에 대응하는 부분에는 1이 승산되고, 적의 화소에 대 응하는 부분은 0이 승산되고, 이들의 화소값의 합계가 5로 제산되므로, 주목 화소로 되는 녹의 화소와, 그 화소에 인접하는 녹의 화소와의 단순 평균이 산출된다.
한편, 수평 성분 저역 통과 필터(51)가, 하나의 적의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1, 0, 1, 0, 1)/5의 필터 처리를 행한 경우, 주목 화소를 포함하는 5개의 적의 화소에 대응하는 부분에는 1이 승산되고, 녹의 화소에 대응하는 부분은 0이 승산되고, 이들의 화소값의 합계가 5로 제산되므로, 주목 화소로 되는 적의 화소와, 그 화소에 인접하는 적의 화소와의 단순 평균이 산출된다.
마찬가지로 하여, 제2 라인에서의 녹의 화소와, 청의 화소도 수평 성분 저역 통과 필터(51)에 의해 필터링된다. 그리고, 수평 1/5 씨닝 처리부(52)에서, 각각의 화소가 수평 성분의 5 화소마다 씨닝되므로, 최종적으로는, 도 11의 도면에서 화살표로 도시되어 있는 5 화소 간격의 화소를 주목 화소로 하여, 그 화소에 인접하는 동일 색의 화소와의 단순 평균값을 산출함으로써 얻어지는 화소로 구성되는 씨닝 화소군이 생성된다.
도 11에서는, 녹의 화소를 주목 화소로 한 경우와, 적의 화소를 주목 화소로 한 경우, 및 청의 화소를 주목 화소로 한 경우와 녹의 화소를 주목 화소로 한 경우에 필터링된 화소에 대하여, 각각 상단과 하단으로 나눠 도시하고 있지만, 씨닝 처리부(41)는, 동일한 라인의 처리를 동시에 실행하는 것이 가능하다.
예를 들면, 도 7을 이용하여 설명한 바와 같이, 씨닝 전의 화상에서의 나이키스트의 한계 주파수 fn이, 씨닝 전 화상의 샘플링 주파수 fs의 1/2인 화상이, 씨닝 처리부(41)에 입력된 경우에 대하여, 도 12 및 도 13을 이용하여 설명한다.
도 12는, 수평 성분 저역 통과 필터(51)에서, 씨닝 전의 화상에 대하여, (1, 0, 1, 0, 1, 0, 1, 0, 1)/5의 필터 처리가 행해진 후의 대역을 도시하는 도면이고, 도 13은 수평 1/5 씨닝 처리부(52)에서, 씨닝 처리된 후의 대역을 도시하는 도면이다.
도 12 및 도 13에 도시된, 필터 처리가 행해진 후의 대역, 및 씨닝 처리된 후의 대역에서는, 나이키스트의 한계 주파수 fn' 및 샘플링 주파수 fs'는, 모두 도 7을 이용하여 설명한 씨닝 처리 전의 화상과 비교하여, 적절하게 제한된 값으로 되고, 또한 이들의 샘플링점은 등간격이다.
즉, 상술한 씨닝 처리부(14)에서의 경우와 마찬가지로 하여, 씨닝 처리부(41)의 처리에 의해, 모든 화소를 이용하여 필터 처리가 행해지며, 등간격으로 씨닝 처리가 행해짐에 따라, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.
이와 같이 하여, 씨닝율 1/(2n-1)(단, n은 양의 정수)에서, 주목 화소의 주변의 동일 색의 화소(2n-1)를 가산 평균하여 씨닝을 행함으로써, 씨닝 후의 샘플링 주파수 fs'에 트랩 포인트를 넣을 수 있어, 나이키스트의 한계 주파수 fn'에서, 적절하게 대역 제한되며, 또한 씨닝 후에 화상 위상의 어긋남이 없는 씨닝 처리를 행할 수 있다. 또, 이 씨닝 처리에서는, 모든 화소를 이용하여 씨닝 화상이 생성되므로, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.
이러한 씨닝 처리는, 예를 들면, 도 3의 디지털 카메라(1)에서, 씨닝 처리부(14) 대신에, 도 14에 도시하는 씨닝 처리부(61)를 설치함으로써, 수평 방향뿐만 아니라, 수직 방향으로 실행하는 것이 가능하다.
딜레이 라인(71)은, 4 라인분의 딜레이 라인이고, 5라인의 화상 신호를, 수직 방향으로 동시화하는 것이다. 수직 성분 저역 통과 필터(72)는, 입력된 화상 신호에 대하여, 수직 방향으로 (1, 0, 1, 0, 1)/3의 필터 처리를 행한다. 수직 1/3 씨닝 처리부(73)는, 수직 방향으로 3 화소 간격으로 리샘플링(씨닝)을 행한다.
예를 들면, 도 5를 이용하여 설명한, 2×2의 베이어 배열로 코딩이 행해지는 경우의 필터링 및 리샘플링에 대하여, 도 15를 이용하여 설명한다.
제1 수직 라인에서는, 녹의 화소와 청의 화소가 1 화소씩 교대로 배치되고, 제2 수직 라인에서는, 적의 화소와 녹의 화소가, 1 화소씩 교대로 배치되어 있다. 수직 성분 저역 통과 필터(72)가, 제1 수직 라인에서, 하나의 녹의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1)/3의 필터 처리를 행한 경우, 녹의 화소에 대응하는 부분에는 1이 승산되고, 적의 화소에 대응하는 부분은 0이 승산되고, 주목 화소를 포함하는 3개의 화소의 화소값의 합계가 3으로 제산되므로, 주목 화소로 되는 녹의 화소와, 그 화소에 인접하는 녹의 화소와의 단순 평균이 산출된다.
한편, 수직 성분 저역 통과 필터(72)가, 하나의 적의 화소를 주목 화소로 하여, (1, 0, 1, 0, 1)/3의 필터 처리를 행한 경우, 적의 화소에 대응하는 부분에는 1이 승산되고, 녹의 화소에 대응하는 부분은 0이 승산되고, 주목 화소를 포함하는 3개의 화소값의 합계가 3으로 제산되므로, 주목 화소로 되는 적의 화소와, 그 화소에 인접하는 적의 화소와의 단순 평균이 산출된다.
마찬가지로 하여, 제2 수직 라인에서의 녹의 화소와 청의 화소도, 수직 성분 저역 통과 필터(72)에 의해 필터링된다.
그리고, 수직 1/3 씨닝 처리부(73)에서, 각각의 화소가 수직 성분의 3 화소마다 씨닝되므로, 최종적으로는, 도 15의 도면에서 화살표로 도시되어 있는 3 화소 간격의 화소를 주목 화소로 하여, 그 화소에 인접하는 동일 색의 화소와의 단순 평균값을 산출함으로써 얻어지는 화소로 구성되는 씨닝 화소군이 생성된다.
도 15에서는, 녹의 화소를 주목 화소로 한 경우와 적의 화소를 주목 화소로 한 경우, 및 청의 화소를 주목 화소로 한 경우와 녹의 화소를 주목 화소로 한 경우에 필터링된 화소에 대하여, 각각 우측 라인과 좌측 라인으로 나눠 도시하고 있지만, 씨닝 처리부(61)는, 동일한 수직 라인의 처리를 동시에 실행하는 것이 가능하다.
도 14 및 도 15를 이용하여 설명한, 수직 성분의 씨닝 처리에서도, 씨닝 후의 샘플링 주파수 fs'에 트랩 포인트를 넣을 수 있어, 나이키스트의 한계 주파수 fn'에서 적절하게 대역 제한되며, 또한 씨닝 후에 화상 위상의 어긋남이 없는 씨닝 처리를 행할 수 있다. 또한, 이 씨닝 처리에서도, 모든 화소를 이용하여 씨닝 화상이 생성되므로, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.
또한, 도 3의 디지털 카메라(1)에서, 촬상부(13)가, 블록 단위로 화상의 판독이 가능한 경우, 씨닝 처리부(14)를 대신하여, 도 16에 도시하는 씨닝 처리부(81)를 설치함으로써, 수평 수직 동시에 씨닝 처리를 행할 수 있다.
수평 수직 성분 저역 통과 필터(91)는, 입력된 화상 신호에 대하여, 수평 방향으로 (1, 0, 1, 0, 1)/3, 수직 방향으로 (1, 0, 1, 0, 1)/3, 즉 수평 수직 방향으로 (3, 0, 3, 0, 3)/9의 필터 계수를 갖고, 수평 수직 방향의 인접하는 동일 색 의 9 화소를 가산 평균하는 처리를 행하는 필터이다. 수평 수직 1/3 씨닝 처리부(92)는, 수평 방향 및 수직 방향으로 각각 3 화소 간격, 즉 9 화소를 1 화소에 리샘플링(씨닝)한다.
예를 들면, 2×2의 베이어 배열로 코딩이 행하여지는 경우, 도 17에 도시한 바와 같이 입력 화소에 대하여, 수평 수직 성분 저역 통과 필터(91)는, 도 18에 도시한 바와 같이, 청 성분, 녹 성분, 적 성분의 화소 각각에, 수평 수직 방향으로 (3, 0, 3, 0, 3)/9의 필터 처리를 행하므로, 각각 주목 화소에 대하여, 대응하는 색 성분 이외의 화소에는 0이 승산되고, 대응하는 색 성분의 화소에는 1이 승산되고, 주목 화소를 포함하는 9개의 화소값의 합계가 9로 제산되므로, 주목 화소에 수평 수직 방향에 인접하는 동일 색의 9 화소가 가산 평균된다.
그리고, 수평 수직 1/3 씨닝 처리부(92)에서, 수평 수직 방향의 인접하는 9 화소가 1 화소로 씨닝되므로, 도 19에 도시한 바와 같은 씨닝 화상을 얻을 수 있다.
여기서는, 수평 수직의 동일 색의 3 화소에서, 주목 화소를 수평 수직 방향의 5×5 화소의 중앙 화소로 한 정방형의 화소군(n, m)(단, n은 1 내지 5, m은 1 내지 5의 값을 취함)에서, (1, 1)(1, 3)(1, 5)(3, 1)(3, 3)(즉 주목 화소)(3, 5)(5, 1)(5, 3)(5, 5)의 9개의 화소를, 가산 평균하도록 하고 있지만, 씨닝 후의 화소의 위상 위치가 변화하지 않으면, 어떠한 형상으로 가산 처리를 행하도록 해도 된다.
예를 들면, 수평 수직 성분 저역 통과 필터(91)는, 도 20에 도시된 바와 같 이, 청 성분, 및 적 성분의 화소에는, 수평 수직 방향으로 (3, 0, 3, 0, 3)/9의 필터 처리를 행하고, 녹 성분의 화소에는, 수평 수직 방향으로 (1, 2, 3, 2, 1)/9의 필터 계수로 필터 처리를 행하며, 주목 화소에 대하여, 마름모형 형상으로 인접하는 9 화소의 가산 평균을 행하도록 해도 된다.
이와 같이, 바둑판 형상으로 배치되어 있는 녹색 성분의 화소에 대하여, 수평 수직 방향으로 (1, 2, 3, 2, 1)/9의 필터를 이용하여, 마름모형 형상으로 인접하는 9 화소의 가산 평균을 행하도록 함으로써, 도 18을 이용하여 설명한 (3, 0, 3, 0, 3)/9의 필터 처리를 이용하는 경우와 비교하여, 녹의 화소에서, 주목 화소에 대하여 가장 인접하는 9 화소의 가산 평균을 산출할 수 있다.
이와 같이, 수평 수직 방향으로 동시에 씨닝 처리를 행하는 경우, 특히 도 20을 이용하여 설명한 바와 같이, 필터 계수가 화소에 의해 서로 다른 경우, 도 3의 디지털 카메라(1)의 촬상부(13)가 갖는 촬상 소자가 CCD라도 실현 가능하지만, 촬상 소자는, CCD보다도 CMOS가 더 적합하다.
또, 수평 수직 방향으로 동시에 씨닝 처리를 행하는 경우에도, 마찬가지의 효과를 발휘할 수 있는 씨닝 처리는, 씨닝율 1/3 이외라도, 씨닝율 1/(2n-1)(단, n은 양의 정수)에서 성립한다.
도 16 내지 도 20을 이용하여 설명한 바와 같이, 본 발명을 적용한 수평 수직 성분의 씨닝 처리에서도, 씨닝 후의 샘플링 주파수 fs'에 트랩 포인트를 넣을 수 있어, 나이키스트의 한계 주파수 fn'에서, 적절하게 대역 제한되며, 또한 씨닝 후에 화상 위상의 어긋남이 없는 씨닝 처리를 행할 수 있다. 또, 이 수평 수직 성 분의 씨닝 처리에서도, 모든 화소를 이용하여 씨닝 화상이 생성되므로, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.
이상 설명한 처리에서는, 가산 처리하는 각 색 성분의 화소 범위가 공간적으로 중복되어 있기 때문에, 씨닝 전과 씨닝 후와의 화상의 색 코딩이 동일하다. 따라서, 본 발명은, 2×2의 색 코딩이면, 어떠한 색 코딩을 이용한 처리에도 적용 가능하다.
여기서는, 광의 3원색을 이용한 베이어 배열이 이용되고 있는 경우에 대해 설명했지만, 예를 들면, 보색을 이용한 색 코딩이 이용되는 경우에도, 본 발명은 적용 가능하다. 예를 들면, 보색 필터에서는, 색의 3원색인 CMY(시안, 마젠더, 옐로우) 외에 G(녹)을 첨가한 「CMYG」로, 2×2의 패턴을 만드는 것이 많지만, 이러한 보색 필터가 이용되는 경우에도, 본 발명이 적용 가능한 것은 물론이다.
상술한 일련의 처리는, 소프트웨어에 의해 실행할 수도 있다. 그 소프트웨어는, 그 소프트웨어를 구성하는 프로그램이, 전용의 하드웨어에 내장되어 있는 컴퓨터, 또는, 각종 프로그램을 인스톨함으로써, 각종 기능을 실행하는 것이 가능한데, 예를 들면 범용의 퍼스널 컴퓨터 등에 기록 매체로부터 인스톨된다.
이 기록 매체는, 도 3에 도시한 바와 같이, 컴퓨터와는 별도로, 사용자에게 프로그램을 제공하기 위해 배포되는, 프로그램이 기록되어 있는 자기 디스크(21)(플렉시블 디스크를 포함함), 광 디스크(22)(CD-ROM(Compact Disk-Read Only Memory, DVD(Digital Versatile Disk)를 포함함), 광자기 디스크(23)(MD(Mini-Disk)(상표)를 포함함), 혹은 반도체 메모리(24) 등으로 이루어지는 패키지 미디어 등으로 구성된다.
또한, 본 명세서에서, 기록 매체에 기록되는 프로그램을 기술하는 단계는, 기재된 순서에 따라 시계열적으로 행해지는 처리는 물론, 반드시 시계열적으로 처리되지 않아도, 병렬적 혹은 개별로 실행되는 처리도 포함하는 것이다.
본 발명에 따르면, 촬상한 화상을 씨닝하여 표시하거나, 기록하거나, 출력할 수 있다.
또한, 본 발명에 따르면, 필요에 따라, 촬상한 화상에서, 모든 화소를 이용하여 동일 색의 (2n-1)(n은 양의 정수)개의 화소를 단순 평균한 후에, 1/(2n-1)로 씨닝함으로써, 씨닝 후에 화상 위상의 어긋남이 없고, 겹쳐짐이 적은 씨닝 화상을 얻을 수 있다.

Claims (16)

  1. 화상을 처리하는 화상 처리 장치에 있어서,
    복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호를 취득하는 취득 수단과,
    상기 취득 수단에 의해 취득된 상기 화상 신호 중, 주목 화소와 상기 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1)(n은 양의 정수) 개분의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 필터 수단과,
    상기 필터 수단에 의해 산출된 상기 가산 평균값을 화소값으로 하는 상기 주목 화소를, 1/(2n-1)(n은 양의 정수)의 씨닝(thinning)율로 씨닝하는 씨닝 수단
    을 포함하는 것을 특징으로 하는 화상 처리 장치.
  2. 제1항에 있어서,
    상기 필터 수단은, 1 프레임의 상기 화상 신호의, 모든 상기 화소의 화소값을 이용하여, 상기 가산 평균값을 산출하는 것을 특징으로 하는 화상 처리 장치.
  3. 제1항에 있어서,
    상기 필터 수단은, 상기 주목 화소에 대하여, 수평 방향으로 배열되어 있는 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 것을 특징으로 하는 화상 처리 장치.
  4. 제1항에 있어서,
    상기 필터 수단은, 상기 주목 화소에 대하여, 수직 방향으로 배열되어 있는 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 것을 특징으로 하는 화상 처리 장치.
  5. 제1항에 있어서,
    상기 필터 수단은, 상기 주목 화소에 대하여, 수평 방향 및 수직 방향으로 소정의 범위 내의 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 것을 특징으로 하는 화상 처리 장치.
  6. 제1항에 있어서,
    상기 필터 수단은, 복수의 상기 색 성분 중, 적어도 하나의 색 성분의 상기 주목 화소에 대하여, 상기 주목 화소에 가까운 위치에 배치되어 있는 것으로부터 순서대로 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 것을 특징으로 하는 화상 처리 장치.
  7. 제1항에 있어서,
    상기 필터 수단은, 복수의 상기 색 성분의 모든 색 성분의 상기 주목 화소에 대하여, 상기 주목 화소에 가까운 위치에 배치되어 있는 것으로부터 순서대로 동일한 색 성분의 화소를 선택하여, (2n-1)개의 화소의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 것을 특징으로 하는 화상 처리 장치.
  8. 제1항에 있어서,
    상기 취득 수단은, 상기 화상 신호를 촬상하는 촬상 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
  9. 제8항에 있어서,
    상기 촬상 수단은, CMOS IC로 구성되어 있는 것을 특징으로 하는 화상 처리 장치.
  10. 제8항에 있어서,
    상기 촬상 수단, 상기 필터 수단, 및 상기 씨닝 수단은, 동일한 CMOS IC로 구성되어 있는 것을 특징으로 하는 화상 처리 장치.
  11. 제1항에 있어서,
    상기 취득 수단에 의해 취득된 상기 화상 신호에 대응하는 화상을 표시하는 표시 수단을 더 구비하고,
    상기 표시 수단에 의해 표시되는 상기 화상이 동화상인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되어, 상기 표시 수단에 의해 표시되고,
    상기 표시 수단에 의해 표시되는 상기 화상이 정지 화상인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되지 않고, 상기 표시 수단에 의해 표시되는 것을 특징으로 하는 화상 처리 장치.
  12. 제1항에 있어서,
    상기 취득 수단에 의해 취득된 상기 화상 신호를 기록하는 기록 수단을 더 구비하고,
    상기 기록 수단에 의해 기록되는 상기 화상 신호가 동화상에 대응하는 신호인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되어, 상기 기록 수단에 의해 기록되고,
    상기 기록 수단에 의해 기록되는 상기 화상 신호가 정지 화상에 대응하는 신호인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되지 않고, 상기 기록 수단에 의해 기록되는 것을 특징으로 하는 화상 처리 장치.
  13. 제1항에 있어서,
    상기 취득 수단에 의해 취득된 상기 화상 신호를 출력하는 출력 수단을 더 구비하고,
    상기 출력 수단에 의해 출력되는 상기 화상 신호가 동화상에 대응하는 신호인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되어, 상기 출력 수단에 의해 출력되고,
    상기 출력 수단에 의해 출력되는 상기 화상 신호가 정지 화상에 대응하는 신호인 경우, 상기 취득 수단에 의해 취득된 상기 화상 신호는, 상기 필터 수단, 및 상기 씨닝 수단에 의해 처리되지 않고, 상기 출력 수단에 의해 출력되는 것을 특징으로 하는 화상 처리 장치.
  14. 화상을 처리하는 화상 처리 장치의 화상 처리 방법에 있어서,
    복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호의 취득을 제어하는 취득 제어 단계와,
    상기 취득 제어 단계의 처리에 의해 취득이 제어된 상기 화상 신호 중, 주목 화소와 상기 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1)(n은 양의 정수) 개분의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 필터 연산 단계와,
    상기 필터 연산 단계의 처리에 의해 산출된 상기 가산 평균값을 화소값으로 하는 상기 주목 화소를, 1/(2n-1)(n은 양의 정수)의 씨닝율로 씨닝하는 씨닝 단계
    를 포함하는 것을 특징으로 하는 화상 처리 방법.
  15. 화상을 처리하는 화상 처리 장치용의 프로그램이며,
    복수의 색 성분으로 이루어지고, 2×2의 색 코딩을 갖는 화상 신호의 취득을 제어하는 취득 제어 단계와,
    상기 취득 제어 단계의 처리에 의해 취득이 제어된 상기 화상 신호 중, 주목 화소와 상기 주목 화소 근방의 동일한 색 성분의 화소와의 (2n-1)(n은 양의 정수) 개분의 화소값의 가산 평균값을 산출하여, 상기 주목 화소의 화소값으로 하는 필터 연산 단계와,
    상기 필터 연산 단계의 처리에 의해 산출된 상기 가산 평균값을 화소값으로 하는 상기 주목 화소를, 1/(2n-1)(n은 양의 정수)의 씨닝율로 씨닝하는 씨닝 단계
    를 포함하는 것을 특징으로 하는 컴퓨터가 판독 가능한 프로그램이 기록되어 있는 기록 매체.
  16. 삭제
KR1020047017843A 2002-05-15 2003-04-16 화상 처리 장치, 및 화상 처리 방법, 기록 매체 KR100970030B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2002139574A JP3947969B2 (ja) 2002-05-15 2002-05-15 画像処理装置、および画像処理方法、記録媒体、並びにプログラム
JPJP-P-2002-00139574 2002-05-15
PCT/JP2003/004810 WO2003098941A1 (fr) 2002-05-15 2003-04-16 Systeme de traitement d'image, procede de traitement d'image, support d'enregistrement, et programme associe

Publications (2)

Publication Number Publication Date
KR20050004836A KR20050004836A (ko) 2005-01-12
KR100970030B1 true KR100970030B1 (ko) 2010-07-16

Family

ID=29544894

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020047017843A KR100970030B1 (ko) 2002-05-15 2003-04-16 화상 처리 장치, 및 화상 처리 방법, 기록 매체

Country Status (7)

Country Link
US (1) US7826658B2 (ko)
EP (1) EP1505839B1 (ko)
JP (1) JP3947969B2 (ko)
KR (1) KR100970030B1 (ko)
CN (1) CN1653823A (ko)
TW (1) TWI236839B (ko)
WO (1) WO2003098941A1 (ko)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4691930B2 (ja) * 2004-09-10 2011-06-01 ソニー株式会社 物理情報取得方法および物理情報取得装置、並びに物理量分布検知の半導体装置、プログラム、および撮像モジュール
JP4759293B2 (ja) * 2005-03-15 2011-08-31 キヤノン株式会社 撮像素子
US7956871B2 (en) * 2005-04-28 2011-06-07 Samsung Electronics Co., Ltd. Color disparity correction in image sensors methods and circuits
JP5084430B2 (ja) 2006-11-02 2012-11-28 ペンタックスリコーイメージング株式会社 撮像ユニット
JP4983423B2 (ja) * 2007-06-15 2012-07-25 ソニー株式会社 画像信号処理装置および画像信号処理方法
JP5109551B2 (ja) 2007-09-21 2012-12-26 コニカミノルタアドバンストレイヤー株式会社 画像処理装置、画像処理方法、及び撮像装置
JP5572940B2 (ja) * 2008-10-30 2014-08-20 株式会社ニコン 撮像装置
JP5446291B2 (ja) * 2009-02-02 2014-03-19 株式会社ニコン 撮像装置
US8587705B2 (en) * 2010-06-28 2013-11-19 Intel Corporation Hardware and software partitioned image processing pipeline
JP5868076B2 (ja) 2011-08-31 2016-02-24 キヤノン株式会社 画像処理装置及び画像処理方法
CN103177699B (zh) * 2011-12-20 2015-12-09 上海天马微电子有限公司 场序列液晶显示装置中的数据处理方法
JP2013251680A (ja) * 2012-05-31 2013-12-12 Jvc Kenwood Corp 画像処理装置及び画像処理方法
US9824651B2 (en) 2012-11-22 2017-11-21 Sharp Kabushiki Kaisha Display device and electronic device
JP6673333B2 (ja) * 2015-03-18 2020-03-25 ソニー株式会社 画像処理装置と画像処理方法および撮像装置
US20190257987A1 (en) * 2016-06-07 2019-08-22 Airy3D Inc. Light Field Imaging Device and Method for Depth Acquisition and Three-Dimensional Imaging
KR20210147694A (ko) 2020-05-29 2021-12-07 삼성전자주식회사 이미지 신호 프로세서, 이미지 프로세싱 방법 및 그 전자 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0295093A (ja) * 1988-09-30 1990-04-05 Victor Co Of Japan Ltd 点順次カラー多重信号の同時化回路
JP2000253415A (ja) 1998-12-28 2000-09-14 Sanyo Electric Co Ltd ディジタルカメラおよび撮像装置
JP2001245141A (ja) 2000-02-29 2001-09-07 Canon Inc 画像処理装置及びその方法

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4602289A (en) * 1982-05-31 1986-07-22 Tokyo Shibaura Denki Kabushiki Kaisha Solid state image pick-up device
EP0336430B1 (en) * 1988-04-08 1994-10-19 Dainippon Screen Mfg. Co., Ltd. Method of extracting contour of subject image from original
US5493335A (en) * 1993-06-30 1996-02-20 Eastman Kodak Company Single sensor color camera with user selectable image record size
JP2931520B2 (ja) * 1993-08-31 1999-08-09 三洋電機株式会社 単板式カラービデオカメラの色分離回路
US5418565A (en) 1994-02-15 1995-05-23 Eastman Kodak Company CFA compatible resolution reduction in a single sensor electronic camera
US5452338A (en) * 1994-07-07 1995-09-19 General Electric Company Method and system for real time offset correction in a large area solid state x-ray detector
WO1996007275A1 (fr) * 1994-08-31 1996-03-07 Sony Corporation Dispositif analyseur d'images
US5828406A (en) 1994-12-30 1998-10-27 Eastman Kodak Company Electronic camera having a processor for mapping image pixel signals into color display pixels
KR100209409B1 (ko) * 1995-03-20 1999-07-15 전주범 물체 왜곡을 이용한 물체 기반 부호화 방법 및 장치
US5852470A (en) * 1995-05-31 1998-12-22 Sony Corporation Signal converting apparatus and signal converting method
US5956468A (en) * 1996-07-12 1999-09-21 Seiko Epson Corporation Document segmentation system
JP4229481B2 (ja) * 1996-07-31 2009-02-25 オリンパス株式会社 撮像表示システム
JP4161384B2 (ja) * 1997-04-30 2008-10-08 ソニー株式会社 固体撮像装置、これを用いたカメラおよび固体撮像装置の駆動方法
JPH11103407A (ja) * 1997-09-29 1999-04-13 Nec Corp Ccdデータ画素補間回路およびこのccdデータ画素 補間回路を備えたデジタルスチルカメラ
JP4140077B2 (ja) * 1998-02-18 2008-08-27 ソニー株式会社 固体撮像素子の駆動方法及び固体撮像素子、並びにカメラ
US6069973A (en) * 1998-06-30 2000-05-30 Xerox Corporation Method and apparatus for color correction in a multi-chip imaging array
JP3893424B2 (ja) * 1998-11-06 2007-03-14 富士フイルム株式会社 固体撮像装置および信号読出し方法
US6625325B2 (en) * 1998-12-16 2003-09-23 Eastman Kodak Company Noise cleaning and interpolating sparsely populated color digital image using a variable noise cleaning kernel
US6539125B1 (en) * 1998-12-21 2003-03-25 Xerox Corporation Modified median filter that better preserves textures
DE69942005D1 (de) 1998-12-28 2010-03-25 Sanyo Electric Co Bildaufnahmegerät und digitale Kamera
US6970268B1 (en) * 1999-02-05 2005-11-29 Samsung Electronics Co., Ltd. Color image processing method and apparatus thereof
WO2000049812A1 (en) * 1999-02-19 2000-08-24 Sony Corporation Image signal processor, image signal processing method, learning device, learning method, and recorded medium
US7123299B1 (en) * 1999-04-15 2006-10-17 Olympus Optical Co., Ltd. Color image pickup device and color image pickup apparatus including a randomized color coding array
JP3621288B2 (ja) * 1999-04-16 2005-02-16 シャープ株式会社 画像処理装置
JP3663973B2 (ja) * 1999-05-06 2005-06-22 日本電気株式会社 画像信号処理装置および画像信号処理方法
US6992714B1 (en) * 1999-05-31 2006-01-31 Canon Kabushiki Kaisha Image pickup apparatus having plural pixels arranged two-dimensionally, and selective addition of different pixel color signals to control spatial color arrangement
US6744929B1 (en) * 1999-11-18 2004-06-01 Nikon Corporation Image data compression method image data compression apparatus and recording medium and data signal for providing image data compression program
JP4599672B2 (ja) * 1999-12-21 2010-12-15 株式会社ニコン 補間処理装置および補間処理プログラムを記録した記録媒体
JP2001298659A (ja) * 2000-02-08 2001-10-26 Canon Inc 撮像装置、画像処理システム、撮像方法、及び記憶媒体
JP3654420B2 (ja) * 2000-02-25 2005-06-02 インターナショナル・ビジネス・マシーンズ・コーポレーション 画像変換方法、画像処理装置、および画像表示装置
JP3631655B2 (ja) * 2000-03-22 2005-03-23 シャープ株式会社 固体撮像装置
JP4518616B2 (ja) * 2000-04-13 2010-08-04 ソニー株式会社 固体撮像装置およびその駆動方法並びにカメラシステム
GB2390423B (en) * 2000-10-23 2004-12-29 Halliburton Energy Serv Inc Fluid property sensors and associated methods of calibrating sensors in a subterranean well
US6833845B2 (en) * 2000-10-27 2004-12-21 Matsushita Electric Industrial Co., Ltd. Image object content generation device and padding device
US6816197B2 (en) * 2001-03-21 2004-11-09 Hewlett-Packard Development Company, L.P. Bilateral filtering in a demosaicing process
US20020184276A1 (en) * 2001-03-30 2002-12-05 Tinku Acharya Two-dimensional pyramid filter architecture
JP4145586B2 (ja) * 2001-07-24 2008-09-03 セイコーエプソン株式会社 画像処理装置及び画像処理プログラム、並びに画像処理方法
AU2002307889A1 (en) * 2002-04-22 2003-11-03 Nokia Corporation Generating lsf vectors
JP4142340B2 (ja) * 2002-05-22 2008-09-03 オリンパス株式会社 撮像装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0295093A (ja) * 1988-09-30 1990-04-05 Victor Co Of Japan Ltd 点順次カラー多重信号の同時化回路
JP2000253415A (ja) 1998-12-28 2000-09-14 Sanyo Electric Co Ltd ディジタルカメラおよび撮像装置
JP2001245141A (ja) 2000-02-29 2001-09-07 Canon Inc 画像処理装置及びその方法

Also Published As

Publication number Publication date
US7826658B2 (en) 2010-11-02
US20060055794A1 (en) 2006-03-16
EP1505839B1 (en) 2012-05-09
TWI236839B (en) 2005-07-21
JP2003333610A (ja) 2003-11-21
CN1653823A (zh) 2005-08-10
WO2003098941A1 (fr) 2003-11-27
KR20050004836A (ko) 2005-01-12
JP3947969B2 (ja) 2007-07-25
EP1505839A1 (en) 2005-02-09
TW200404452A (en) 2004-03-16
EP1505839A4 (en) 2006-05-03

Similar Documents

Publication Publication Date Title
JP4421793B2 (ja) ディジタルカメラ
JP5108172B2 (ja) 画像データサイズ変換処理装置、電子スチルカメラ、および画像データサイズ変換処理用記録媒体
KR100970030B1 (ko) 화상 처리 장치, 및 화상 처리 방법, 기록 매체
US7944496B2 (en) Imaging apparatus and driving method for CCD type solid-state imaging device
EP0869683B1 (en) Image pickup device
JP2010020055A (ja) 撮像装置とその制御方法
US8111298B2 (en) Imaging circuit and image pickup device
WO2012147515A1 (ja) 撮像装置及び撮像方法
JP5033711B2 (ja) 撮像装置及び撮像装置の駆動方法
US9148634B2 (en) Imaging device, method for controlling imaging device, and storage medium storing a control program where a basic color filter array pattern is repeated to reduce false color generation when image is thinned
JP4294810B2 (ja) 固体撮像装置および信号読出し方法
US20240015406A1 (en) Image sensor and imaging device
JP5607265B2 (ja) 撮像装置、撮像装置の制御方法、及び制御プログラム
JP2003101815A (ja) 信号処理装置及び信号処理方法
US20140320710A1 (en) Imaging device, method for controlling imaging device, and storage medium storing a control program
JP5124549B2 (ja) 固体撮像素子の動画像信号読出方法及び撮像装置
JP3967392B2 (ja) 撮像装置
US9113027B2 (en) Imaging device, method for controlling imaging device, and storage medium storing a control program
US8958000B2 (en) Imaging device, method for controlling imaging device, and storage medium storing a control program
JP2003116147A (ja) 固体撮像装置
JP2009253615A (ja) 撮像装置
JP2011114474A (ja) 撮像装置及び固体撮像素子の駆動方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130628

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140701

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee