WO2022145509A1 - 씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법 - Google Patents

씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법 Download PDF

Info

Publication number
WO2022145509A1
WO2022145509A1 PCT/KR2020/019278 KR2020019278W WO2022145509A1 WO 2022145509 A1 WO2022145509 A1 WO 2022145509A1 KR 2020019278 W KR2020019278 W KR 2020019278W WO 2022145509 A1 WO2022145509 A1 WO 2022145509A1
Authority
WO
WIPO (PCT)
Prior art keywords
adc
pixel
column
pixels
digital signal
Prior art date
Application number
PCT/KR2020/019278
Other languages
English (en)
French (fr)
Inventor
정준원
이성철
박원기
Original Assignee
한국전자기술연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자기술연구원 filed Critical 한국전자기술연구원
Publication of WO2022145509A1 publication Critical patent/WO2022145509A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components

Definitions

  • the present invention relates to a technology related to a CMOS image sensor (CIS) system, and more particularly, to a method of high-speed readout of a pixel array in a high-resolution CIS system.
  • CIS CMOS image sensor
  • the CIS system includes a pixel array 10 , a column-parallel readout circuit 20 , an amplifier 30 , and an interface (MIPI) 40 . is composed by
  • the readout circuit 20 includes ADCs that read analog electrical signals generated from pixels and convert them into digital signals, a Digital Signal Processor (DSP) that performs necessary digital signal processing, and a decoder that performs decoding.
  • DSP Digital Signal Processor
  • the signal read and processed by the readout circuit 20 is amplified by the amplifier 30 and then outputted to the outside through the interface 40 .
  • pixels are allocated in units of columns.
  • 2 is a simplified diagram of ADCs included in the pixel array and the readout circuit.
  • ADC is a device that has a large effect on the area of the CIS system due to its large volume. Therefore, an approach for reducing the area of the CIS system by reducing the number of ADCs is required. Furthermore, this approach should be coupled with recent ADC speed improvements.
  • the present invention has been devised to solve the above problems, and an object of the present invention is to reduce the number of ADCs in connection with improving the ADC speed, ultimately reducing the area of the CIS system and lowering the manufacturing cost. It is to provide a CIS system that can be processed by sharing the column to be processed.
  • an image sensor system includes: a pixel array in which pixels for converting an incident light amount into an analog electrical signal are arranged; a readout circuit that reads signals generated from pixels arranged in a lattice in a pixel array, converts them into digital signals, and processes them; the readout circuit includes, wherein some of pixel columns constituting the pixel array are converted to a single ADC It is read and converted into a digital signal, and the rest of the pixel columns constituting the pixel array is read by multiple ADCs and converted into a digital signal.
  • the readout circuit includes: a first ADC for reading m pixel columns and a portion of pixels in a specific pixel column and converting them into a digital signal; and a second ADC that reads the remaining pixels of a specific pixel column and m other pixel columns and converts them into a digital signal, and m may be an integer of 1 or more.
  • the first ADC and the second ADC may process (m + 0.5)*N or more pixel columns per second, and N may be FPS (Frame Per Second).
  • the first ADC and the second ADC may be sequentially arranged.
  • the first ADC and the second ADC may be asynchronous Successive Approximation Resister (SAR) ADCs.
  • SAR Successive Approximation Resister
  • the readout circuit includes: a first MUX connecting one of the m pixel columns and the specific pixel column to the first ADC; and a second MUX connecting one of the m different pixel columns and the specific pixel column to the second ADC.
  • the first MUX performs a switching operation such that one of the m pixel columns is connected to the first ADC when a specific pixel column is connected to the second ADC, and the second MUX is configured such that the specific pixel column is connected to the first ADC.
  • a switching operation may be performed such that one of m different pixel columns is connected to the second ADC.
  • the first ADC may be allocated half of the pixels of the specific pixel column, and the second ADC may be allocated the other half of the pixels of the specific pixel column.
  • the half pixels allocated to the first ADC may be pixels disposed above a specific pixel column, and the other half pixels allocated to the second ADC may be pixels disposed below the specific pixel column.
  • an image sensor readout method includes: reading some of pixel columns constituting a pixel array with a single ADC and converting it into a digital signal; and reading the rest of the pixel columns constituting the pixel array by a multi-ADC and converting it into a digital signal.
  • an image sensor readout circuit includes: ADCs for reading signals generated from pixels arranged in a lattice in a pixel array and converting them into digital signals; a processor for processing digital signals converted by ADCs; A decoder for decoding the signal processed by the processor; including, ADCs, some of the pixel columns constituting the pixel array are read by a single ADC and converted into a digital signal, and the rest of the pixel columns constituting the pixel array are It is read by multiple ADCs and converted into digital signals.
  • an image sensor readout method includes: reading some of pixel columns constituting a pixel array with a single ADC and converting it into a digital signal; reading the rest of the pixel columns constituting the pixel array by a multi-ADC and converting it into a digital signal; Signal processing the digital signal converted by ADCs; and decoding the processed signal.
  • FIG. 1 is a structural diagram of a CIS system
  • 3 and 4 are diagrams illustrating a column-shared readout scheme
  • FIG. 5 is a view provided for explaining a method of dividing pixels of one column and processing two column-shared ADCs together according to an embodiment of the present invention
  • FIG. 6 is a structural diagram of a synchronous SAR ADC
  • FIG. 7 is a structural diagram of an asynchronous SAR ADC
  • FIG. 9 is a timing diagram of an asynchronous SAR ADC.
  • FIG. 3 illustrates a structure in which ADCs that convert analog signals of pixels into digital signals in a readout circuit are configured in a column-shared manner.
  • ADCs that convert analog signals of pixels into digital signals in a readout circuit are configured in a column-shared manner.
  • two pixel columns are allocated to one column-shared ADC.
  • the conversion speed of the column-shared ADC shown in FIG. 3 should be twice that of the ADC shown in FIG. 2 .
  • FIG. 4 shows another structure in which ADCs are configured in a column-shared manner in a readout circuit.
  • ADCs are configured in a column-shared manner in a readout circuit.
  • four pixel columns are allocated to one column-shared ADC.
  • the column-shared ADC shown in FIG. 4 should have twice the conversion speed than the column-shared ADC shown in FIG. The conversion speed should be 4 times faster than the ADC shown.
  • the area occupied by the ADC in the readout circuit is halved.
  • the area is 1/4.
  • the problem is that the conversion speed of the ADC does not increase by an integer multiple of the existing conversion speed. In this case, the increase in the conversion speed cannot be reflected in the area reduction.
  • the column-shared ADCs share the pixel column to be processed, that is, for some columns of the pixel array, pixels constituting the column are divided so that the two column-shared ADCs process it together. .
  • FIG. 5 is a diagram provided to explain a method of dividing pixels of one column and processing two column-shared ADCs together according to an embodiment of the present invention.
  • some of the columns 11, 13, 14, and 16 constituting the pixel array are single ADCs 21, 22, 23, 24 is read and converted to a digital signal, but the remaining shared columns 12 and 15 are read by multiple ADCs 21&22,23&24 and converted into a digital signal.
  • the signals of the pixels constituting the column-1 (11) are converted into column-shared ADC-1 (21), and the signals of the pixels constituting the column-3 (13) are converted to the column-shared ADC-2 (22). ), and the signals of pixels constituting column-4 (14) are converted into column-shared ADC-3 (23), and signals of pixels constituting column-6 (16) are converted into column-shared ADC-4 (24).
  • the signals of the pixels constituting the shared column-2 (12) are divided and converted by the column-shared ADC-1 (21) and the column-shared ADC-2 (22), and constitute the shared column-5 (15).
  • the signal of the pixels to be converted is divided by the column-shared ADC-3 (23) and the column-shared ADC-4 (24).
  • the column-shared ADCs 21 , 22 , 23 , and 24 are selectively connected to the columns 11 , 12 , 13 , 14 , 15 and 16 through the MUXs 51 , 52 , 53 , 54 .
  • MUX-1 selectively connects column-shared ADC-1 (21) to column-1 (11) or shared column-2 (12)
  • MUX-2 is column-shared ADC-2 (22) is selectively connected to shared column-2 (12) or column-3 (13)
  • MUX-3 connects column-shared ADC-3 (23) to column-4 (14)
  • MUX-4 selectively connected column-shared ADC-4 (24) to shared column-5 (15) or column-6 (16) .
  • the MUXs 51, 52, 53, and 54 are controlled by a controller (not shown), so that two column-shared ADCs are not connected to one column at the same time.
  • the MUX-1 sets the column-shared ADC-1 (21) to the column.
  • MUX-2 is column-shared ADC- Connect 2 (22) to column-3 (13).
  • the MUX-3 (53) converts the column-shared ADC-3 (23) to the column-
  • MUX-4(54) is column-shared ADC-4 (24) is connected to column-6 (16).
  • column-shared ADC-1,3 (21,23) processes the upper pixels of the shared column (12,15)
  • column-shared ADC-2,4 (22,24) is the shared column (12,15) ) of the sub-pixels.
  • the column-shared ADC-1 (21) processes the upper two pixels of the shared column-2 (12)
  • the column-shared ADC-2 processes the lower two pixels of the shared column-2 (12).
  • processing pixels column-shared ADC-3 (23) processes the upper two pixels of shared column-5 (15)
  • column-shared ADC-4 (24) processes the lower part of shared column-5 (15) Two pixels are processed.
  • each column-shared ADC (21, 22, 23, 24) is as follows.
  • column-shared ADC-4(24) lower 2 pixels of shared column-5(15) ⁇ 4 pixels of column-6(16)
  • each ADC will process m columns and half of the shared columns. For example, if the ADC can process 2.5 columns per second, one ADC is designed to process two columns and half the pixels of one shared column. As another example, if the ADC can process 3.5 columns per second, then one ADC is designed to process three columns and half the pixels of one shared column.
  • the ADC that processes the general column (non-shared column) first and the ADC that processes the shared column first should be sequentially arranged in the pixel array.
  • the clock signal ⁇ latch output from the clock generation is used by the comparator and the synchronous SAR logic. According to the ⁇ latch , the comparator decides the value and the synchronous SAR logic generates the output code.
  • Synchronous SAR has a disadvantage in that the number of column-shared ADCs required for the CIS system is large because the worst case must be assumed in all bit decisions.
  • the comparator compares the sampled pixel voltage for each bit conversion and the voltage of the switching CDAC (Capacitive Digital-to-Analog Converter) and makes a bit decision.
  • CDAC Capacitive Digital-to-Analog Converter
  • the number of column-shared ADCs required is determined assuming the worst case quantization time for all bit conversions.
  • more column-shared ADC is used than necessary, and the die chip area of the CIS system increases, resulting in an increase in unit cost.
  • FIG. 7 is a diagram illustrating the structure of an asynchronous SAR ADC. There is no clock generation, and when the comparator starts latching and the output value is widened beyond a certain level, a flag signal is generated through the XOR gate. In accordance with this signal, asynchronous SAR Logic generates an output code.
  • FIG. 8 is a timing diagram of a synchronous SAR ADC
  • FIG. 9 is a timing diagram of an asynchronous SAR ADC.
  • the problem is that the required quantization time is different according to the difference between the comparator inputs (V SH and V DAC ).
  • the synchronous SAR ADC assumes this quantization time as the worst case for all bits and configures the hardware. Accordingly, the number of column-shared ADCs required in the CIS system increases.
  • the quantization phase is terminated immediately after the comparator decision is finished. Accordingly, since there is no need to assume the comparator decision time as the worst, it can be applied to the readout circuit of the CIS system according to the embodiment of the present invention as an ADC having improved speed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Analogue/Digital Conversion (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

CIS 시스템의 ADC 개수 저감을 위한 픽셀 파티셔닝 방법이 제공된다. 본 발명의 실시예에 따른 이미지 센서 시스템은, 입사되는 광량을 아날로그 전기 신호로 변환하는 픽셀들이 배열된 픽셀 어레이 및 픽셀 어레이에 격자로 배열된 픽셀들에서 생성된 신호를 읽어 들여 디지털 신호로 변환하고 처리하는 리드아웃 회로를 포함하고, 리드아웃 회로는 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하고, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털신호로 변환한다. 이에 의해, 픽셀 어레이의 컬럼들 중 일부에 대해서는 픽셀을 나누어 다수의 ADC들이 함께 처리하도록 함으로써, ADC 속도 개선이 기존 속도의 정수배에 미치지 못하는 경우에도, 속도 개선분 만큼 ADC의 개수를 감축시킬 수 있게 된다.

Description

씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법
본 발명은 CIS(CMOS Image Sensor) 시스템 관련 기술에 관한 것으로, 더욱 상세하게는 고해상도의 CIS 시스템에서 픽셀 어레이를 고속으로 리드아웃하는 방법에 관한 것이다.
도 1은 CIS 시스템의 구조도이다. 도시된 바와 같이, CIS 시스템은 픽셀 어레이(Pixel array)(10), 리드아웃 회로(Column-parallel Readout circuit)(20), 증폭기(Sense amplifier)(30) 및 인터페이스(MIPI)(40)를 포함하여 구성된다.
픽셀 어레이(10)에 격자로 배열된 픽셀들은 입사되는 광량을 아날로그 전기 신호로 변환한다. 리드아웃 회로(20)는 픽셀들에서 발생되는 아날로그 전기 신호를 읽어들여 디지털 신호로 변환하는 ADC들과 필요한 디지털 신호 처리를 수행하는 DSP(Digital Signal Processor) 와 디코딩을 수행하는 디코더를 포함한다.
리드아웃 회로(20)에 의해 읽어들여 처리된 신호는 증폭기(30)에서 증폭된 후에 인터페이스(40)를 통해 외부로 출력된다.
리드아웃 회로(20)에서 픽셀들에서 발생된 아날로그 신호를 디지털 신호로 변환하는 ADC(Analog-to-digital converter)들에는, 도 2에 도시된 바와 같이 픽셀들이 컬럼 단위로 할당된다. 도 2에는 픽셀 어레이와 리드아웃 회로에 구비되는 ADC들을 간략화하여 도시하였다.
ADC는 부피가 커서 CIS 시스템의 면적에 큰 영향을 미치는 소자이다. 따라서, ADC의 개수를 줄여 CIS 시스템의 면적을 줄이기 위한 접근이 필요하다. 나아가, 이러한 접근은 최근의 ADC 속도 개선과 연계되어져야 한다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, ADC 속도 개선에 연계하여 ADC의 개수를 줄여 궁극적으로 CIS 시스템의 면적을 줄이고 제조 단가를 낮추기 위한 방안으로, ADC들이 처리할 컬럼을 공유하여 함께 나누어 처리할 수 있는 CIS 시스템을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 이미지 센서 시스템은, 입사되는 광량을 아날로그 전기 신호로 변환하는 픽셀들이 배열된 픽셀 어레이; 픽셀 어레이에 격자로 배열된 픽셀들에서 생성된 신호를 읽어 들여 디지털 신호로 변환하고 처리하는 리드아웃 회로;를 포함하고, 리드아웃 회로는, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하고, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털신호로 변환한다.
리드아웃 회로는, m개의 픽셀 컬럼과 특정 픽셀 컬럼의 픽셀 일부를 읽어들여 디지털 신호로 변환하는 제1 ADC; 특정 픽셀 컬럼의 픽셀 나머지와 m개의 다른 픽셀 컬럼을 읽어들여 디지털 신호로 변환하는 제2 ADC;를 포함하고, m은 1 이상의 정수일 수 있다.
제1 ADC와 제2 ADC는, 초당 (m + 0.5)*N 개 이상의 픽셀 컬럼을 처리할 수 있고, N은 FPS(Frame Per Second)일 수 있다.
그리고, 리드아웃 회로에서, 제1 ADC와 제2 ADC는 번 차례로 나열되어 있을 수 있다.
제1 ADC와 제2 ADC는, asynchronous SAR(Successive Approximation Resister) ADC일 수 있다.
리드아웃 회로는, m개의 픽셀 컬럼과 특정 픽셀 컬럼 중 하나를 제1 ADC와 연결하는 제1 MUX; m개의 다른 픽셀 컬럼과 특정 픽셀 컬럼 중 하나를 제2 ADC와 연결하는 제2 MUX;를 포함할 수 있다.
제1 MUX는, 특정 픽셀 컬럼이 제2 ADC이 연결되는 경우에는, 제1 ADC에 m개의 픽셀 컬럼 중 하나가 연결되도록 스위칭 동작하고, 제2 MUX는, 특정 픽셀 컬럼이 제1 ADC이 연결되는 경우에는, 제2 ADC에 m개의 다른 픽셀 컬럼 중 하나가 연결되도록 스위칭 동작할 수 있다.
제1 ADC에는, 특정 픽셀 컬럼의 픽셀들 중 절반이 할당되고, 제2 ADC에는, 특정 픽셀 컬럼의 픽셀들 중 나머지 절반이 할당될 수 있다.
제1 ADC에 할당되는 절반의 픽셀들은, 특정 픽셀 컬럼의 상부에 배치되는 픽셀들이고, 제2 ADC에 할당되는 나머지 절반의 픽셀은, 특정 픽셀 컬럼의 하부에 배치되는 픽셀들일 수 있다.
한편, 본 발명의 다른 실시예에 따른, 이미지 센서 리드아웃 방법은, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하는 단계; 및 픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 단계;를 포함한다.
한편, 본 발명의 다른 실시예에 따른, 이미지 센서 리드아웃 회로는, 픽셀 어레이에 격자로 배열된 픽셀들에서 생성된 신호를 읽어 들여 디지털 신호로 변환하는 ADC들; ADC들에서 변환된 디지털 신호를 신호 처리하는 처리기; 처리기에서 처리된 신호를 디코딩하는 디코더;을 포함하고, ADC들은, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하고, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하다.
한편, 본 발명의 다른 실시예에 따른, 이미지 센서 리드아웃 방법은, 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하는 단계; 픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 단계; ADC들에서 변환된 디지털 신호를 신호 처리하는 단계; 처리된 신호를 디코딩하는 단계;를 포함한다.
이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 픽셀 어레이의 컬럼들 중 일부에 대해서는 픽셀을 나누어 다수의 ADC들이 함께 처리하도록 함으로써, ADC 속도 개선이 기존 속도의 정수배에 미치지 못하는 경우에도, 속도 개선분 만큼 ADC의 개수를 감축시킬 수 있게 되어, CIS 시스템의 면적을 줄이고 제조 단가가 낮출 수 있게 된다.
도 1은 CIS 시스템의 구조도,
도 2는 픽셀 어레이 리드아웃 방식,
도 3 및 도 4는 column-shared 리드아웃 방식을 예시한 도면들,
도 5는 본 발명의 일 실시예에 따른 한 컬럼의 픽셀들을 나누어 2개의 column-shared ADC들이 함께 처리하는 방법의 설명에 제공되는 도면,
도 6은 synchronous SAR ADC의 구조도,
도 7은 asynchronous SAR ADC의 구조도,
도 8는 synchronous SAR ADC의 timing diagram, 그리고,
도 9는 asynchronous SAR ADC의 timing diagram 이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 3은 리드아웃 회로에서 픽셀들의 아날로그 신호를 디지털 신호로 변환하는 ADC들을 column-shared 방식으로 구성한 구조를 도시하였다. 도 3에 도시된 구조에서는, 하나의 column-shared ADC에 두 개의 픽셀 컬럼이 할당된다.
하나의 column-shared ADC가 두 개의 픽셀 컬럼을 처리하여야 하므로, 도 3에 도시된 column-shared ADC는 도 2에 도시된 ADC 보다 변환 속도가 2배 빨라야 한다.
도 4는 리드아웃 회로에서 ADC들을 column-shared 방식으로 구성한 또 다른 구조를 도시하였다. 도 4에 도시된 구조에서는, 하나의 column-shared ADC에 네 개의 픽셀 컬럼이 할당된다.
따라서, 하나의 column-shared ADC가 네 개의 픽셀 컬럼을 처리하여야 하므로, 도 4에 도시된 column-shared ADC는, 도 3에 도시된 column-shared ADC 보다 변환 속도가 2배가 빨라야 하고, 도 2에 도시된 ADC 보다는 변환 속도가 4배가 빨라야 한다.
이와 같이, ADC의 변환 속도가 기존 변환 속도 보다 2배 빨라지면 도 3에 도시된 바와 같이 column-shared 방식을 적용하고, ADC의 변환 속도가 기존 변환 속도 보다 4배 빨라지면 도 4에 도시된 바와 같이 column-shared 방식을 적용하면 된다.
따라서, ADC의 변환 속도가 기존 변환 속도 보다 2배 빨라지면 리드아웃 회로에서 ADC가 차지하는 면적은 1/2이 되고, ADC의 변환 속도가 기존 변환 속도 보다 4배 빨라지면 리드아웃 회로에서 ADC가 차지하는 면적은 1/4이 된다.
만약, ADC의 변환 속도가 기존 변환 속도 보다 3배 빨라지면 리드아웃 회로에서 하나의 column-shared ADC가 3개의 픽셀 컬럼을 처리하도록 구성하여, 리드아웃 회로에서 ADC가 차지하는 면적을 1/3로 줄일 수 있다.
문제는 ADC의 변환 속도가 기존 변환 속도의 정수배로 빨라지지 않는 경우인데, 이 경우에는 변환 속도 상승분 만큼을 면적 저감에 반영할 수 없다는 것이다.
이를 테면, ADC의 변환 속도가 기존 변환 속도 보다 1.5배 빨라진 경우에는, 도 3에 도시된 구성을 적용할 수 없고, 도 2에 도시된 구성을 적용하여야 하며, 이에 따라 리드아웃 회로에서 ADC가 차지하는 면적은 1/1.5(=2/3)로 줄어들지 않는다.
마찬가지로, ADC의 변환 속도가 기존 변환 속도 보다 2.5배 빨라진 경우에는, 도 4에 도시된 구성을 적용할 수 없고, 도 3에 도시된 구성을 적용하여야 하므로, 리드아웃 회로에서 ADC가 차지하는 면적 감소분은 1/2.5(=2/5)가 아닌 1/2에 그치게 된다.
본 발명의 실시예에서는, 이와 같이 ADC의 변환 속도가 기존 변환 속도의 정수배에 미치게 못하는 정도로 개선된 경우에도, CIS 시스템의 ADC 개수 저감을 통해 리드아웃 회로의 면적을 줄이기 위한 방안을 제시한다.
구체적으로, 본 발명의 실시예에서는, column-shared ADC들이 처리할 픽셀 컬럼을 공유, 즉, 픽셀 어레이의 컬럼들 일부에 대해서는 컬럼을 구성하는 픽셀들을 나누어 2개의 column-shared ADC들이 함께 처리하도록 한다.
도 5는 본 발명의 일 실시예에 따른 한 컬럼의 픽셀들을 나누어 2개의 column-shared ADC들이 함께 처리하는 방법의 설명에 제공되는 도면이다.
본 발명의 실시예에 따른 리드아웃 회로는, 도 5에 도시된 바와 같이, 픽셀 어레이를 구성하는 컬럼들 중 일부(11,13,14,16)는 단일 ADC(21,22,23,24)로 읽어들여 디지털 신호로 변환하지만, 나머지 공유 컬럼들(12,15)은 다중 ADC(21&22,23&24)로 읽어들여 디지털 신호로 변환한다.
구체적으로, 컬럼-1(11)을 구성하는 픽셀들의 신호는 column-shared ADC-1(21)로 변환하고, 컬럼-3(13)을 구성하는 픽셀들의 신호는 column-shared ADC-2(22)로 변환하며, 컬럼-4(14)을 구성하는 픽셀들의 신호는 column-shared ADC-3(23)으로 변환하며, 컬럼-6(16)을 구성하는 픽셀들의 신호는 column-shared ADC-4(24)로 변환한다.
반면, 공유 컬럼-2(12)을 구성하는 픽셀들의 신호는 column-shared ADC-1(21)과 column-shared ADC-2(22)가 함께 나누어 변환하고, 공유 컬럼-5(15)을 구성하는 픽셀들의 신호는 column-shared ADC-3(23)과 column-shared ADC-4(24)가 함께 나누어 변환한다.
한편, column-shared ADC(21,22,23,24)들은 MUX들(51,52,53,54)을 통해 컬럼들(11,12,13,14,15,16)에 선택적으로 연결된다.
구체적으로, MUX-1(51)은 column-shared ADC-1(21)을 컬럼-1(11) 또는 공유 컬럼-2(12)에 선택적으로 연결하고, MUX-2(52)는 column-shared ADC-2(22)를 공유 컬럼-2(12) 또는 컬럼-3(13)에 선택적으로 연결하며, MUX-3(53)은 column-shared ADC-3(23)을 컬럼-4(14) 또는 공유 컬럼-5(15)에 선택적으로 연결하고, MUX-4(54)은 column-shared ADC-4(24)를 공유 컬럼-5(15) 또는 컬럼-6(16)에 선택적으로 연결한다.
MUX들(51,52,53,54)은 제어기(미도시)에 의해 제어되는데, 하나의 컬럼에 두 개의 column-shared ADC들이 동시에 연결되지 않도록 제어된다.
구체적으로, MUX-2(52)에 의해 column-shared ADC-2(22)가 공유 컬럼-2(12)에 연결된 경우, MUX-1(51)은 column-shared ADC-1(21)을 컬럼-1(11)에 연결하고, MUX-1(51)에 의해 column-shared ADC-1(21)이 공유 컬럼-2(12)에 연결된 경우, MUX-2(52)는 column-shared ADC-2(22)를 컬럼-3(13)에 연결한다.
또한, MUX-4(54)에 의해 column-shared ADC-4(24)가 공유 컬럼-5(15)에 연결된 경우, MUX-3(53)은 column-shared ADC-3(23)을 컬럼-4(14)에 연결하고, MUX-3(53)에 의해 column-shared ADC-3(23)이 공유 컬럼-5(15)에 연결된 경우, MUX-4(54)는 column-shared ADC-4(24)를 컬럼-6(16)에 연결한다.
한편, column-shared ADC-1,3(21,23)는 공유 컬럼(12,15)의 상부 픽셀들을 처리하고, column-shared ADC-2,4(22,24)는 공유 컬럼(12,15)의 하부 픽셀들을 처리한다. 구체적으로, column-shared ADC-1(21)는 공유 컬럼-2(12)의 상부 2개의 픽셀을 처리하고, column-shared ADC-2(22)는 공유 컬럼-2(12)의 하부 2개의 픽셀을 처리하며, column-shared ADC-3(23)은 공유 컬럼-5(15)의 상부 2개의 픽셀을 처리하고, column-shared ADC-4(24)는 공유 컬럼-5(15)의 하부 2개의 픽셀을 처리한다.
이에 따라, 각 column-shared ADC(21,22,23,24)에서 픽셀 처리 순서는 다음과 같다.
column-shared ADC-1(21) : 컬럼-1(11)의 4개 픽셀 → 공유 컬럼-2(12)의 상부 2개 픽셀
column-shared ADC-2(22) : 공유 컬럼-2(12)의 하부 2개 픽셀 → 컬럼-3(13)의 4개 픽셀
column-shared ADC-3(23) : 컬럼-4(14)의 4개 픽셀 → 공유 컬럼-5(15)의 상부 2개 픽셀
column-shared ADC-4(24) : 공유 컬럼-5(15)의 하부 2개 픽셀 → 컬럼-6(16)의 4개 픽셀
지금까지, column-shared ADC의 변환 속도가 기존 변환 속도 보다 1.5배 빨라져셔, column-shared ADC들이 초당 1.5*N[N은 FPS(Frame Per Second)]개의 컬럼을 처리할 수 있게 된 경우, 픽셀 파티셔닝 방법에 대해 바람직한 실시예를 들어 상세히 설명하였다.
위 구조에 따르면, 리드아웃 회로에서 ADC의 개수와 ADC가 차지하는 면적을 1/1.5(=2/3)로 줄일 수 있게 된다.
한편, ADC의 변환 속도가 초당 1.5*N개의 컬럼을 처리할 수 있도록 개선된 것은 예시적인 상황에 불과하며, 본 발명의 기술적 사상은 ADC들이 초당 (m + 0.5)*N개의 컬럼을 처리할 수 있게 개선된 경우 모두에 적용될 수 있다. 여기서, m은 1 이상의 정수이다.
이 경우, 각 ADC는 m개의 컬럼과 공유 컬럼의 절반을 처리하게 된다. 이를 테면, ADC가 초당 2.5개의 컬럼을 처리할 수 있다면, 하나의 ADC가 2개의 컬럼과 1개의 공유 컬럼의 픽셀 절반을 처리하도록 설계되는 것이다. 다른 예로, ADC가 초당 3.5개의 컬럼을 처리할 수 있다면, 하나의 ADC가 3개의 컬럼과 1개의 공유 컬럼의 픽셀 절반을 처리하도록 설계되는 것이다.
이 때, 리드아웃 회로에서는, 일반 컬럼(비-공유 컬럼)을 먼저 처리하는 ADC와 공유 컬럼을 먼저 처리하는 ADC를, 픽셀 어레이를 구성하는 번 차례로 나열하여야 한다.
이하에서는, ADC의 변환 속도 개선 방법에 대해 설명한다.
CIS 시스템의 해상도(Pixel resolution)와 속도(FPS)를 개선하기 위해, 다양한 ADC 구조가 제시되고 있는데, 이 중 SAR(Successive Approximation Resister) ADC는 준수한 분해능(ADC resolution)과 높은 변환 속도를 보이고 있다.
도 6은 synchronous SAR ADC의 구조이다. Clock Generation에서 출력되는 clock 신호 Φlatch를 Comparator와 synchronous SAR Logic이 사용한다. Φlatch에 맞추어 Comparator가 값을 decision 하고 synchronous SAR Logic 이 출력 code를 생성한다.
synchronous SAR는 모든 bit decision에서 worst case를 상정해야 하기 때문에, CIS 시스템에 필요한 column-shared ADC의 개수가 많다는 단점이 있다.
SAR ADC의 일반적인 동작에서, 각 bit conversion마다 sampling된 pixel 전압과 switching CDAC(Capacitive Digital-to-Analog Converter)의 전압을 comparator가 비교하여 bit decision을 한다.
이때 sample 전압과 CDAC 전압의 차이가 작아질수록 comparator가 결과를 출력하는데 걸리는 시간(quantization time)이 길어진다. 하지만, 픽셀 전압이 얼마인지 예상할 수 없기 때문에, 몇 번째 bit conversion에서 worst case quantization time이 발생할지 알 수 없다. 따라서 모든 bit conversion에 할당된 conversion time이 동일하다.
결과적으로, 모든 bit conversion에서 worst case quantization time을 상정하고 필요한 column-shared ADC의 개수를 결정한다. 결과적으로 필요 이상의 column-shared ADC가 사용되고, CIS system의 die chip 면적이 커져 단가가 상승하는 문제가 있다.
도 7은 asynchronous SAR ADC의 구조를 도시한 도면이다. Clock generation이 없으며, Comparator가 latching을 시작하여, 출력 값이 일정 이상으로 벌어지면 XOR 게이트를 통해 flag 신호가 생성된다. 이 신호에 맞추어 asynchronous SAR Logic이 출력 code를 생성한다.
도 8는 synchronous SAR ADC의 timing diagram이고, 도 9는 asynchronous SAR ADC의 timing diagram이다. Comparator 출력(VCOMP+,-)이 일정 값 이상으로 latching 되면 comparator가 decision을 완료(quantization phase) 한다.
문제는 comparator 입력 (VSH와 VDAC) 의 차이에 따라 요구되는 quantization time이 다르다는 것인데, synchronous SAR ADC는 모든 bit에서 이 quantization time을 worst case로 상정하고 하드웨어를 구성한다. 이에 따라, CIS 시스템에서 필요한 column-shared ADC의 개수가 많아진다.
따라서, 본 발명의 실시예에서는, asynchronous SAR ADC를 채택함으로써, comparator decision이 끝나면 곧바로 quantization phase를 종료하도록 한다. 이에 따라, Comparator decision time을 worst로 상정할 필요가 없기 때문에, 본 발명의 실시예에 따른 CIS 시스템의 리드아웃 회로에 속도가 개선된 ADC로 적용할 수 있는 것이다.
지금까지, 픽셀 어레이의 컬럼들 중 일부에 대해서는 픽셀을 나누어 다수의 ADC들이 함께 처리하도록 함으로써, ADC 속도 개선이 기존 속도의 정수배에 미치지 못하는 경우에도, 속도 개선분 만큼 ADC의 개수를 감축시킬 수 있는 방법을 제시하였다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (12)

  1. 입사되는 광량을 아날로그 전기 신호로 변환하는 픽셀들이 배열된 픽셀 어레이;
    픽셀 어레이에 격자로 배열된 픽셀들에서 생성된 신호를 읽어 들여 디지털 신호로 변환하고 처리하는 리드아웃 회로;를 포함하고,
    리드아웃 회로는,
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하고,
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 것을 특징으로 하는 이미지 센서 시스템.
  2. 청구항 1에 있어서,
    리드아웃 회로는,
    m개의 픽셀 컬럼과 특정 픽셀 컬럼의 픽셀 일부를 읽어들여 디지털 신호로 변환하는 제1 ADC;
    특정 픽셀 컬럼의 픽셀 나머지와 m개의 다른 픽셀 컬럼을 읽어들여 디지털 신호로 변환하는 제2 ADC;를 포함하고,
    m은 1 이상의 정수인 것을 특징으로 하는 이미지 센서 시스템.
  3. 청구항 2에 있어서,
    제1 ADC와 제2 ADC는,
    초당 (m + 0.5)*N 개 이상의 픽셀 컬럼을 처리할 수 있고,
    N은 FPS(Frame Per Second)인 것을 특징으로 하는 이미지 센서 시스템.
  4. 청구항 2에 있어서,
    리드아웃 회로에서,
    제1 ADC와 제2 ADC는 번 차례로 나열되어 있는 것을 특징으로 하는 이미지 센서 시스템.
  5. 청구항 2에 있어서,
    제1 ADC와 제2 ADC는,
    asynchronous SAR(Successive Approximation Resister) ADC인 것을 특징으로 하는 이미지 센서 시스템.
  6. 청구항 2에 있어서,
    리드아웃 회로는,
    m개의 픽셀 컬럼과 특정 픽셀 컬럼 중 하나를 제1 ADC와 연결하는 제1 MUX;
    m개의 다른 픽셀 컬럼과 특정 픽셀 컬럼 중 하나를 제2 ADC와 연결하는 제2 MUX;를 포함하는 것을 특징으로 하는 이미지 센서 시스템.
  7. 청구항 6에 있어서,
    제1 MUX는,
    특정 픽셀 컬럼이 제2 ADC이 연결되는 경우에는, 제1 ADC에 m개의 픽셀 컬럼 중 하나가 연결되도록 스위칭 동작하고,
    제2 MUX는,
    특정 픽셀 컬럼이 제1 ADC이 연결되는 경우에는, 제2 ADC에 m개의 다른 픽셀 컬럼 중 하나가 연결되도록 스위칭 동작하는 것을 특징으로 하는 이미지 센서 시스템.
  8. 청구항 2에 있어서,
    제1 ADC에는,
    특정 픽셀 컬럼의 픽셀들 중 절반이 할당되고,
    제2 ADC에는,
    특정 픽셀 컬럼의 픽셀들 중 나머지 절반이 할당되는 것을 특징으로 하는 이미지 센서 시스템.
  9. 청구항 8에 있어서,
    제1 ADC에 할당되는 절반의 픽셀들은,
    특정 픽셀 컬럼의 상부에 배치되는 픽셀들이고,
    제2 ADC에 할당되는 나머지 절반의 픽셀은,
    특정 픽셀 컬럼의 하부에 배치되는 픽셀들인 것을 특징으로 하는 이미지 센서 시스템.
  10. 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하는 단계;
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 단계;를 포함하는 것을 특징으로 하는 이미지 센서 리드아웃 방법.
  11. 픽셀 어레이에 격자로 배열된 픽셀들에서 생성된 신호를 읽어 들여 디지털 신호로 변환하는 ADC들;
    ADC들에서 변환된 디지털 신호를 신호 처리하는 처리기;
    처리기에서 처리된 신호를 디코딩하는 디코더;을 포함하고,
    ADC들은,
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하고,
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 것을 특징으로 하는 리드아웃 회로.
  12. 픽셀 어레이를 구성하는 픽셀 컬럼들 중 일부는 단일 ADC로 읽어들여 디지털 신호로 변환하는 단계;
    픽셀 어레이를 구성하는 픽셀 컬럼들 중 나머지는 다중 ADC로 읽어들여 디지털 신호로 변환하는 단계;
    ADC들에서 변환된 디지털 신호를 신호 처리하는 단계;
    처리된 신호를 디코딩하는 단계;를 포함하는 이미지 센서 리드아웃 방법.
PCT/KR2020/019278 2020-12-29 2020-12-29 씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법 WO2022145509A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020200185656A KR102408730B1 (ko) 2020-12-29 2020-12-29 Cis 시스템의 adc 개수 저감을 위한 픽셀 파티셔닝 방법
KR10-2020-0185656 2020-12-29

Publications (1)

Publication Number Publication Date
WO2022145509A1 true WO2022145509A1 (ko) 2022-07-07

Family

ID=81980546

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/019278 WO2022145509A1 (ko) 2020-12-29 2020-12-29 씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법

Country Status (2)

Country Link
KR (1) KR102408730B1 (ko)
WO (1) WO2022145509A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050103447A (ko) * 2004-04-26 2005-10-31 매그나칩 반도체 유한회사 고속 아날로그 신호 처리를 위한 ｃｍｏｓ 이미지센서
KR20070116938A (ko) * 2005-03-30 2007-12-11 마이크론 테크놀로지, 인크 공유 아날로그 디지털 컨버터와 램 메모리를 갖는 이미지센서용 판독 회로
KR20090065733A (ko) * 2007-12-18 2009-06-23 삼성전자주식회사 픽셀 데이터의 고속 출력이 가능한 ｃｍｏｓ 이미지 센서
KR20150009185A (ko) * 2013-07-16 2015-01-26 서강대학교산학협력단 커패시터-저항 하이브리드 dac를 이용한 sar adc
KR20170122425A (ko) * 2016-04-27 2017-11-06 주식회사 동부하이텍 이미지 센서 및 이미지 센서의 센싱 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050103447A (ko) * 2004-04-26 2005-10-31 매그나칩 반도체 유한회사 고속 아날로그 신호 처리를 위한 ｃｍｏｓ 이미지센서
KR20070116938A (ko) * 2005-03-30 2007-12-11 마이크론 테크놀로지, 인크 공유 아날로그 디지털 컨버터와 램 메모리를 갖는 이미지센서용 판독 회로
KR20090065733A (ko) * 2007-12-18 2009-06-23 삼성전자주식회사 픽셀 데이터의 고속 출력이 가능한 ｃｍｏｓ 이미지 센서
KR20150009185A (ko) * 2013-07-16 2015-01-26 서강대학교산학협력단 커패시터-저항 하이브리드 dac를 이용한 sar adc
KR20170122425A (ko) * 2016-04-27 2017-11-06 주식회사 동부하이텍 이미지 센서 및 이미지 센서의 센싱 방법

Also Published As

Publication number Publication date
KR102408730B1 (ko) 2022-06-14

Similar Documents

Publication Publication Date Title
US10721373B2 (en) Image sensing device, image reading device, image forming apparatus and image sensing method
US11722145B2 (en) Dual reset branch analog to digital conversion comprising a first side branch and a plurality of second side branches
US7230558B2 (en) Column analog-to-digital conversion apparatus and method supporting a high frame rate in a sub-sampling mode
US8169517B2 (en) Image sensor ADC and CDS per column with oversampling
JP4661891B2 (ja) Ａｄ変換装置、固体撮像素子、およびカメラシステム
JP3990857B2 (ja) 撮像装置及び撮像システム
US10778242B2 (en) Analog-to-digital converter device
US6788240B2 (en) Single-chip massively parallel analog-to-digital conversion
US8692177B2 (en) Solid-state imaging device including analog-to-digital converter and analog-to-digital conversion method
US4973976A (en) Multiplexing parallel analog-digital converter
WO2022145509A1 (ko) 씨모스 이미지 센서 시스템의 아날로그디지털 변환기 개수 저감을 위한 픽셀 파티셔닝 방법
WO2012047057A2 (ko) 넓은 동적범위를 갖는 씨모스 이미지 센서 및 이미지 센싱 방법
Mansoorian et al. A 250 mW, 60 frames/s 1280/spl times/720 pixel 9 b CMOS digital image sensor
WO2018151473A1 (ko) 아날로그 디지털 변환기 및 그 동작 방법
JP3566364B2 (ja) データ処理装置及び方法
US6028545A (en) Muti-bit successive-approximation analog-to-digital converter with improved conversion speed
WO2013042918A1 (ko) 복수 개의 램프 신호를 사용하는 다중 스텝 구조의 adc 및 이를 이용한 아날로그-디지털 변환 방법
CN1126402A (zh) 采用单一转换器模块的双输入模数转换器
JP4419681B2 (ja) 固体撮像装置
US7135680B2 (en) Focal plane processor for IR detection
WO2016140382A1 (ko) 멀티 애퍼처 카메라의 센서 어레이에 포함되는 노이즈 저감 유닛 및 그 동작 방법
WO2020105790A1 (ko) 커패시터가 직렬로 연결된 d/a 변환기를 사용한 축차 근사 a/d변환기
WO2018235997A1 (ko) 스위치드-커패시터 d/a 변환기를 사용한 축차 비교형 a/d 변환기
WO2023054792A1 (ko) 직렬 시간 인터리브 구조기반의 고성능 아날로그 디지털 컨버터
US20070002893A1 (en) Input/output (I/O) interface for high-speed data converters

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20968060

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20968060

Country of ref document: EP

Kind code of ref document: A1