WO2009154073A1 - 固体撮像素子およびカメラシステム - Google Patents

固体撮像素子およびカメラシステム Download PDF

Info

Publication number
WO2009154073A1
WO2009154073A1 PCT/JP2009/059964 JP2009059964W WO2009154073A1 WO 2009154073 A1 WO2009154073 A1 WO 2009154073A1 JP 2009059964 W JP2009059964 W JP 2009059964W WO 2009154073 A1 WO2009154073 A1 WO 2009154073A1
Authority
WO
WIPO (PCT)
Prior art keywords
gain
unit
frame
pixel
shutter
Prior art date
Application number
PCT/JP2009/059964
Other languages
English (en)
French (fr)
Inventor
勤 西出
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP09766521A priority Critical patent/EP2288143A4/en
Priority to BRPI0904319-5A priority patent/BRPI0904319A2/pt
Priority to KR1020107002991A priority patent/KR20110019725A/ko
Priority to US12/672,446 priority patent/US8605169B2/en
Priority to CN200980100152A priority patent/CN101779447A/zh
Publication of WO2009154073A1 publication Critical patent/WO2009154073A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/72Combination of two or more compensation controls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/531Control of the integration time by controlling rolling shutters in CMOS SSIS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/533Control of the integration time by using differing integration times for different sensor regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters

Definitions

  • the present invention relates to a solid-state imaging device represented by a CMOS image sensor and a camera system.
  • CMOS image sensors have attracted attention as solid-state image sensors (image sensors) that replace CCDs.
  • CMOS image sensor has overcome the following problems.
  • a dedicated process is required for manufacturing a CCD pixel, and a plurality of power supply voltages are required for its operation, and a plurality of peripheral ICs must be operated in combination.
  • the CMOS image sensor overcomes various problems such as a very complicated system.
  • the CMOS image sensor can be manufactured by using a manufacturing process similar to that of a general CMOS integrated circuit, can be driven by a single power source, and further, an analog circuit or logic using the CMOS process. Circuits can be mixed in the same chip.
  • the CMOS image sensor has a plurality of great merits such that the number of peripheral ICs can be reduced.
  • the output circuit of a CCD is mainly one channel (ch) output using an FD amplifier having a floating diffusion layer (FD: Floating Diffusion).
  • a CMOS image sensor has an FD amplifier for each pixel, and the output is mainly a column parallel output type in which a row in a pixel array is selected and read out in the column direction at the same time. It is.
  • CMOS image sensor when a pixel is reset, a method of sequentially resetting a pixel for each row is often used.
  • This method is called rolling shutter.
  • FIG. 1 is a diagram showing a pixel example of a CMOS image sensor composed of four transistors.
  • This pixel 1 has a photoelectric conversion element 11 made of, for example, a photodiode.
  • a photoelectric conversion element 11 for this one photoelectric conversion element 11, there are four transistors: a transfer transistor 12, a reset transistor 13, an amplification transistor 14, and a selection transistor 15. As an active element.
  • the photoelectric conversion element 11 photoelectrically converts incident light into an amount of electric charges (here, electrons) corresponding to the amount of light.
  • the transfer transistor 12 is connected between the photoelectric conversion element 11 and the floating diffusion FD, and a transmission signal (drive signal) TG is given to the gate (transfer gate) through the transfer control line LTx.
  • the reset transistor 13 is connected between the power supply line LVDD and the floating diffusion FD, and a reset signal RST is given to its gate through the reset control line LRST.
  • the gate of the amplification transistor 14 is connected to the floating diffusion FD.
  • the amplification transistor 14 is connected to the signal line 16 via the selection transistor 15, and constitutes a constant current source and a source follower outside the pixel portion.
  • an address signal (selection signal) SEL is given to the gate of the selection transistor 15 through the selection control line LSEL, and the selection transistor 15 is turned on.
  • the amplification transistor 14 When the selection transistor 15 is turned on, the amplification transistor 14 amplifies the potential of the floating diffusion FD and outputs a voltage corresponding to the potential to the signal line 16. The voltage output from each pixel through the signal line 16 is output to a column circuit (column processing circuit).
  • the charge accumulated in the photoelectric conversion element 11 turns on the transfer transistor 12 and transfers the charge accumulated in the photoelectric conversion element 11 to the floating diffusion FD.
  • the floating diffusion FD turns on the reset transistor 13 so as to receive the electric charge of the photoelectric conversion element 11 in advance so as to release the electric charge to the power supply side.
  • the reset transistor 13 is turned on in parallel with the transfer transistor 12 to directly charge the power supply.
  • the reset transistor 13 is turned on to reset the floating diffusion FD, and surplus charges (noise) are output to the output signal line 16 through the selection transistor 15 that is turned on in this state. This is called P-phase output.
  • the transfer transistor 12 is turned on to transfer the charge accumulated in the photoelectric conversion element 11 to the floating diffusion FD, and the output is output to the output signal line 16. This is called D-phase output.
  • the difference between the D-phase output and the P-phase output is taken outside the pixel circuit, and the reset noise of the floating diffusion FD is canceled to obtain an image signal.
  • FIG. 2 is a diagram showing a general configuration example of a CMOS image sensor (solid-state imaging device) in which the pixels of FIG. 1 are arranged in a two-dimensional array.
  • CMOS image sensor solid-state imaging device
  • a CMOS image sensor 20 in FIG. 2 includes a pixel array unit 21 in which the pixel circuits shown in FIG. 1 are arranged in a two-dimensional array, a pixel driving circuit (vertical scanning circuit) 22, and a column circuit (column processing circuit) 23. Has been.
  • the pixel drive circuit 22 controls on / off of the transfer transistor 12, the reset transistor 13, and the selection transistor 15 of the pixels in each row.
  • the column circuit 23 is a circuit that receives data of a pixel row that is controlled to be read out by the pixel driving circuit 22 and transfers the data to a signal processing circuit at a subsequent stage.
  • FIG. 3 is a timing chart of the rolling shutter operation of the circuit shown in FIG.
  • the pixel reset operation is performed successively, and then the pixel readout operation is performed in a manner to follow it.
  • the pixels in each row accumulate signals in the photoelectric conversion element during the pixel reset operation and the pixel read operation, and read them out by the pixel read operation.
  • WD wide dynamic range
  • DR wide dynamic range
  • the gain setting when the gain setting is reflected at the update timing after register communication, the gain setting is reflected in the frame.
  • the countermeasure is, for example, as shown in FIG. 5, in which a gain setting is performed in the next frame after the shutter setting frame.
  • a solid-state imaging device includes a pixel unit in which a plurality of pixel circuits having a mechanism for converting an optical signal into an electrical signal and storing the electrical signal in accordance with an exposure time are arranged in a matrix.
  • a pixel drive unit that can be driven to perform a shutter operation and a readout operation of the pixel unit according to the setting data, and external shutter setting data and gain setting data, and at least the shutter setting and gain setting
  • an interface unit including a function of controlling the timing to be reflected in the pixel driving unit, and the interface unit includes a function of reflecting the gain in the next frame one frame after being set.
  • the interface unit has a function of detecting driving of a plurality of frames and delaying the reflection of one frame gain.
  • the interface unit includes a switching unit that selects whether to reflect the gain setting value with a delay of one frame or without the delay of one frame.
  • the interface unit includes a data holding unit that holds external shutter setting data and gain setting data, a delay update timing generation unit that receives the update timing signal and generates a one-frame delay update timing signal, A gain holding unit that delays and outputs a gain setting value that is supplied in response to a delayed update timing signal, and a shutter setting value that is held in the data holding unit in response to the update timing signal.
  • a reflection control unit that supplies the gain setting value to the gain holding unit.
  • the interface unit includes a data holding unit that holds external shutter setting data and gain setting data, a delay update timing generation unit that receives the update timing signal and generates a one-frame delay update timing signal, A gain holding unit that delays and outputs a gain setting value that is supplied in response to a delayed update timing signal, and a shutter setting value and a gain setting value that are received in the data holding unit in response to the update timing signal
  • the reflection control unit that supplies the gain setting value to the gain holding unit and the non-delayed gain setting value output from the reflection control unit or the gain setting value delayed by the gain holding unit are selected. And a switching unit for outputting automatically.
  • the camera system of the present invention includes a solid-state image sensor, an optical system that forms a subject image on the image sensor, and a signal processing circuit that processes an output image signal of the image sensor, the solid-state image sensor A pixel unit in which a plurality of pixel circuits having a mechanism for converting an optical signal into an electrical signal and accumulating the electrical signal according to an exposure time are arranged in a matrix, and a shutter operation of the pixel unit according to setting data
  • a pixel driving unit that can be driven to perform a readout operation, a function of holding shutter setting data and gain setting data from the outside, and controlling timing for reflecting at least the shutter setting and gain setting to the pixel driving unit.
  • Including an interface unit, and the interface unit includes a function of reflecting the gain in the next frame one frame after being set.
  • shutter setting data and gain setting data are inputted and held in the interface unit from the outside.
  • the shutter setting value when reflecting the shutter setting and gain setting, the shutter setting value is reflected without delay, and the gain is reflected in the next frame one frame after the gain setting value is set.
  • FIG. 1 is a diagram illustrating a pixel example of a CMOS image sensor including four transistors.
  • FIG. 2 is a diagram illustrating a general configuration example of a CMOS image sensor (solid-state imaging device) in which the pixels of FIG. 1 are arranged in a two-dimensional array.
  • FIG. 3 is a timing chart showing the relationship between the shutter operation of a rolling shutter of a general CMOS image sensor and the horizontal period.
  • FIG. 4 is a diagram for explaining the occurrence of a problem that an invalid frame occurs.
  • FIG. 5 is a diagram for explaining that when the gain setting is performed in the frame subsequent to the frame for which the shutter setting has been performed, it is necessary to perform the communication twice for the shutter setting and the gain setting communication separately.
  • FIG. 1 is a diagram illustrating a pixel example of a CMOS image sensor including four transistors.
  • FIG. 2 is a diagram illustrating a general configuration example of a CMOS image sensor (solid-state imaging device) in which the pixels
  • FIG. 6 is a diagram for explaining that when the shutter setting and the gain setting are performed in the first frame, a problem that the previous one frame becomes an invalid frame occurs.
  • FIG. 7 is a diagram illustrating a configuration example of a CMOS image sensor (solid-state imaging device) according to the embodiment of the present invention.
  • FIG. 8 is a diagram illustrating an example of a pixel of a CMOS image sensor including four transistors according to the present embodiment.
  • FIG. 9 is a circuit diagram showing a configuration example of the interface unit according to the embodiment of the present invention.
  • FIG. 10 is a timing diagram showing a comparison of basic driving between the present embodiment and the existing technology.
  • FIG. 11 is a timing diagram showing a comparison between the present embodiment and the existing technology in the case of multi-frame driving.
  • FIG. 12 is a timing chart for explaining shutter setting and gain setting processing according to the present embodiment.
  • FIG. 13 is a diagram illustrating a configuration example of switching between the function of delaying the update timing of one frame and the function of not delaying the interface unit according to the present embodiment.
  • FIG. 14 is a block diagram illustrating a configuration example of a solid-state image pickup device (CMOS image sensor) equipped with column-parallel ADCs according to the present embodiment.
  • FIG. 15 is a diagram illustrating an example of a configuration of a camera system to which the solid-state imaging device according to the embodiment of the present invention is applied.
  • CMOS image sensor solid-state image pickup device
  • FIG. 7 is a diagram illustrating a configuration example of a CMOS image sensor (solid-state imaging device) according to the embodiment of the present invention.
  • the CMOS image sensor 100 includes a pixel array unit 110, a vertical scanning circuit 120 as a pixel driving unit, a horizontal scanning circuit 130, a column readout circuit 140, a control unit 150, a data processing unit 160, and an interface unit 170.
  • a plurality of pixel circuits 110A are arranged in a two-dimensional shape (matrix shape).
  • the solid-state imaging device 100 includes a configuration unit as a control system for sequentially reading signals from the pixel array unit 110.
  • the solid-state imaging device 100 includes a control unit 150 including an internal clock and an interface unit 170, a vertical scanning circuit 120 that controls row addresses and row scanning, a horizontal scanning circuit 130 that controls column addresses and column scanning, and a column readout circuit. 140 is arranged.
  • the interface unit 170 arranged in the control unit 150 will be described in detail later.
  • FIG. 8 is a diagram illustrating an example of a pixel of a CMOS image sensor including four transistors according to the present embodiment.
  • the pixel circuit 110A has a photoelectric conversion element 111 made of, for example, a photodiode.
  • the pixel circuit 110A has four transistors, that is, a transfer transistor 112, a reset transistor 113, an amplification transistor 114, and a selection transistor 115, as active elements, for the one photoelectric conversion element 111.
  • the photoelectric conversion element 111 photoelectrically converts incident light into an amount of electric charges (here, electrons) corresponding to the amount of light.
  • the transfer transistor 112 is connected between the photoelectric conversion element 111 and the floating diffusion FD as an output node, and a transmission signal TG as a control signal is given to the gate (transfer gate) through the transfer control line LTx.
  • the transfer transistor 112 transfers the electrons photoelectrically converted by the photoelectric conversion element 111 to the floating diffusion FD.
  • the reset transistor 113 is connected between the power supply line LVDD and the floating diffusion FD, and a reset signal RST, which is a control signal, is given to the gate of the reset transistor 113 through the reset control line LRST.
  • the reset transistor 113 resets the potential of the floating diffusion FD to the potential of the power supply line LVDD.
  • the gate of the amplification transistor 114 is connected to the floating diffusion FD.
  • the amplification transistor 114 is connected to the signal line 116 via the selection transistor 115, and constitutes a constant current source and a source follower outside the pixel portion.
  • the selection signal SEL which is a control signal corresponding to the address signal, is given to the gate of the selection transistor 115 through the selection control line LSEL, and the selection transistor 115 is turned on.
  • the amplification transistor 114 When the selection transistor 115 is turned on, the amplification transistor 114 amplifies the potential of the floating diffusion FD and outputs a voltage corresponding to the potential to the signal line 116. The voltage output from each pixel through the signal line 116 is output to the column readout circuit 140.
  • the reset control line LRST, transfer control line LTx, and selection control line LSEL wired to the pixel array unit 110 are wired as a set for each row of the pixel array.
  • the reset control line LRST, transfer control line LTx, and selection control line LSEL are driven by the vertical scanning circuit 120.
  • the vertical scanning circuit 120 has a function of specifying a row when performing a shutter operation / reading operation of the solid-state imaging device.
  • the vertical scanning circuit 120 reflects the shutter setting data by the interface unit 170 and the gain setting data related to the exposure ratio, and has a shutter drive processing function of the solid-state imaging device.
  • the column readout circuit 140 receives the readout data of the pixel row that is controlled to be read out by the vertical scanning circuit 120, and transfers this readout data to the subsequent data processing unit 160 via the horizontal scanning circuit 130.
  • the column readout circuit 140 has a function of performing signal processing such as correlated double sampling (CDS: Correlated Double Sampling).
  • CDS Correlated Double Sampling
  • the interface unit 170 has a function of holding shutter setting data and gain setting data in accordance with the clock CLK, data DT, and enable signal ENB, and controlling the timing at which the shutter setting data and gain setting data are reflected in the vertical scanning circuit 120. Have.
  • the interface unit 170 of the present embodiment includes a function of preventing an invalid frame from occurring by reflecting the gain one frame after the setting.
  • the interface unit 170 holds the gain setting data set from the outside and reflects it in the next frame.
  • the interface unit 170 has a function of detecting a drive having a plurality of frames and automatically delaying the reflection of one frame gain.
  • the interface unit 170 when the timing for reflecting the gain setting data is changed together with the shutter setting data, it is performed within the same communication period than when register setting communication is performed separately, and no invalid frame is generated. Reflect from the frame.
  • FIG. 9 is a circuit diagram showing a configuration example of the interface unit according to the embodiment of the present invention.
  • serial / parallel conversion unit 171 includes a serial / parallel conversion unit 171, a data holding unit 172, a one-frame delay update timing generation unit 173, a reflection control unit 174, and a gain holding unit 175.
  • the serial / parallel converter 171 converts the 3-line serial data into parallel data in accordance with the clock CLK, data DT, and enable signal ENB received from the outside.
  • the data holding unit 172 holds the shutter setting data and gain setting data converted into parallel data.
  • the 1-frame delay update timing generation unit 173 generates a delay update timing signal DUTM that is delayed by one frame in accordance with the update timing signal UTM supplied from the outside in synchronization with the vertical synchronization signal Vsync, and outputs the delayed update timing signal DUTM to the gain holding unit 175.
  • the reflection control unit 174 supplies the shutter setting data STR held in the data holding unit 172 to the subsequent vertical scanning circuit 120 and the like in synchronization with the update timing signal UTM given from the outside, and holds the gain setting data in gain. To the unit 175.
  • the gain holding unit 175 has one or a plurality of registers REG as latches, receives a delay update timing signal DUTM for delaying one frame, holds the supplied gain setting data for one frame, and then performs a subsequent vertical scanning circuit 120, etc.
  • FIG. 10 is a timing diagram showing a comparison of basic driving between the present embodiment and the existing technology.
  • FIG. 11 is a timing diagram showing a comparison of the case of the multi-frame drive between the present embodiment and the existing technology.
  • the data DT input from the outside by the 3-wire serial is converted from serial data to parallel data by the serial / parallel conversion unit 171 and held in the data holding unit 172.
  • the retained data is reflected in the solid-state imaging device 100 by the delay update timing signal DUTM generated internally, and each functional unit such as the vertical scanning circuit 120 is controlled by the control unit 150.
  • the operation of reflecting the data held in the data holding unit 172 to the inside delays the operation of reflecting only the gain setting.
  • the setting data held in the data holding unit 172 is not reflected in the update timing UTM only in the gain setting, and as shown in FIG. 10, the delay update delayed by one frame by the one frame delay update timing generation unit 173 Reflected internally by the timing signal DUTM.
  • the data of the gain register communicated at that time is reflected only by reflecting at the update timing delayed by one frame.
  • a register REG which is a latch is provided in the gain holding unit 175 and reflected at the one-frame delay update timing.
  • FIG. 12 is a timing chart for explaining shutter setting and gain setting processing according to the present embodiment.
  • the shutter setting value S1 and gain setting value G1 set during the communication period T1 are stored in the data holding unit 172.
  • the update timing signal UTM is reflected in the control internal register REG through the reflection control unit 174, but only the shutter setting value S1 is reflected inside at this time.
  • the gain setting value G1 is updated to the internal register through the gain holding unit 175 by the gain delay update timing signal DUTM after one frame.
  • the gain setting is reflected without generating an invalid frame by the above method.
  • interface unit 170 has been described as an example in which only the function of delaying the reflection of the gain setting is delayed by one frame, for example, as illustrated in FIG. 13, the function of delaying the update timing of one frame and the function of not delaying It is also possible to configure to switch.
  • FIG. 13 is a diagram illustrating a configuration example of switching between the function of delaying the update timing of one frame and the function of not delaying the interface unit according to the present embodiment.
  • 13 includes a switching unit 176 in addition to the configuration of FIG.
  • the switching unit 176 selectively switches the gain setting data not delayed by one frame by the reflection control unit 174 or the gain setting data delayed by one frame by the gain holding unit 175 by the switching signal S171 from the serial / parallel conversion unit 171A. Output.
  • the CMOS image sensor according to each embodiment is not particularly limited.
  • the CMOS image sensor may be configured as a CMOS image sensor equipped with a column parallel type analog-digital converter (hereinafter abbreviated as ADC (Analog-digital-converter)). Is possible.
  • ADC Analog-digital-converter
  • FIG. 14 is a block diagram showing a configuration example of a solid-state image pickup device (CMOS image sensor) equipped with a column parallel ADC according to the present embodiment.
  • CMOS image sensor solid-state image pickup device
  • the solid-state imaging device 200 includes a pixel array unit 210 as an imaging unit, a vertical scanning circuit 220 as a pixel driving unit, a horizontal transfer scanning circuit 230, and a timing control circuit 240.
  • the solid-state imaging device 200 includes an ADC group 250, a digital-analog converter (hereinafter abbreviated as a DAC (Digital Analog Converter)) 260, an amplifier circuit (S / A) 270, and a signal processing circuit 280.
  • a digital-analog converter hereinafter abbreviated as a DAC (Digital Analog Converter)
  • S / A amplifier circuit
  • the pixel array unit 210 includes photodiodes and in-pixel amplifiers, for example, pixels as shown in FIG. 8 are arranged in a matrix (matrix).
  • the following circuit is arranged as a control circuit for sequentially reading out the signals of the pixel array unit 210.
  • a timing control circuit 240 that generates an internal clock as a control circuit, a vertical scanning circuit 220 that controls row addresses and row scanning, and a horizontal transfer scanning circuit 230 that controls column addresses and column scanning. Be placed.
  • the control unit 150 including the interface units 170 and 170A described in relation to FIGS. 7 to 13 is disposed in the timing control circuit 240.
  • ADC group 250 a plurality of ADCs each having a comparator 251, a counter 252, and a latch 253 are arranged.
  • the comparator 251 compares the reference voltage Vslop, which is a ramp waveform (RAMP) obtained by changing the reference voltage generated by the DAC 260 in a stepped manner, and an analog signal obtained from the pixel via the vertical signal line for each row line. To do.
  • Vslop which is a ramp waveform (RAMP) obtained by changing the reference voltage generated by the DAC 260 in a stepped manner
  • the counter 252 counts the comparison time of the comparator 251.
  • the ADC group 250 has an n-bit digital signal conversion function and is arranged for each vertical signal line (column line) to constitute a column parallel ADC block.
  • each latch 253 is connected to a horizontal transfer line 290 having a 2n-bit width, for example.
  • the analog signal (potential Vsl) read out to the vertical signal line is compared with the reference voltage Vslop (a linearly changing slope waveform with a certain slope) by the comparator 251 arranged for each column.
  • the counters 252 arranged for each column are operating in the same manner as the comparators 251, and the potential of the vertical signal line (analogue) is changed by changing the potential Vslop having a ramp waveform and the counter value in a one-to-one correspondence.
  • Signal) Vsl is converted into a digital signal.
  • the change in the reference voltage Vslop is to convert the change in voltage into a change in time, and it is converted into a digital value by counting the time in a certain period (clock).
  • the data held in the latch 253 is input to the signal processing circuit 280 via the horizontal transfer line 290 and the amplifier circuit 270 by the horizontal transfer scanning circuit 230, and a two-dimensional image is generated.
  • a solid-state imaging device having such an effect can be applied as an imaging device for a digital camera or a video camera.
  • FIG. 15 is a diagram illustrating an example of a configuration of a camera system to which the solid-state imaging device according to the embodiment of the present invention is applied.
  • the camera system 300 guides incident light to an imaging device 310 to which the CMOS image sensors (solid-state imaging devices) 100 and 200 according to the present embodiment can be applied and a pixel region of the imaging device 310.
  • An optical system imaging a subject image
  • a lens 320 that forms incident light (image light) on an imaging surface
  • a drive circuit (DRV) 330 that drives the imaging device 310
  • an output signal of the imaging device 310
  • PRC signal processing circuit
  • the drive circuit 330 includes a timing generator (not shown) that generates various timing signals including a start pulse and a clock pulse that drive a circuit in the imaging device 310, and drives the imaging device 310 with a predetermined timing signal. .
  • the signal processing circuit 340 performs predetermined signal processing on the output signal of the imaging device 310.
  • the image signal processed by the signal processing circuit 340 is recorded on a recording medium such as a memory.
  • the image information recorded on the recording medium is hard copied by a printer or the like.
  • the image signal processed by the signal processing circuit 340 is displayed as a moving image on a monitor including a liquid crystal display.
  • an imaging apparatus such as a digital still camera
  • the above-described imaging elements 100 and 200 as the imaging device 310, a highly accurate camera with low power consumption can be realized.
  • DESCRIPTION OF SYMBOLS 100 Solid-state image sensor, 110 ... Pixel array part, 110A ... Pixel, 111 ... Photoelectric conversion element, 112 ... Transfer transistor, 113 ... Reset transistor, 114 ... Amplification transistor , 115 ... selection transistor, 120 ... vertical scanning circuit (pixel drive unit), 130 ... horizontal scanning circuit, 140 ... column readout circuit, 150 ... control unit, 160 ... data processing 170, interface unit, 171 ... serial / parallel conversion unit, 172 ... data holding unit, 173 ... 1 frame delay update timing generation unit, 174 ... reflection control unit, 175 ...
  • Gain holding unit 176, switching unit, 200, solid-state imaging device, 210, pixel array unit, 220, vertical scanning circuit, 230 Horizontal transfer scanning circuit, 240 ... Timing control circuit, 250 ... ADC group, 260 ... DAC, 270 ... Amplifier circuit (S / A), 280 ... Signal processing circuit, 300
  • a camera system 310 ... an imaging device, 320 ... a lens, 330 ... a drive circuit, 340 ... a signal processing circuit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Studio Devices (AREA)

Abstract

 シャッターとゲインを同時に設定する場合であっても、無効フレームの発生を防止することが可能な固体撮像素子およびカメラシステムを提供する。光信号を電気信号に変換し、その電気信号を露光時間に応じて蓄積する機構を有する複数の画素回路が行列状に配列された画素アレイ部110と、設定データに応じて上記画素部のシャッター動作、および読み出しを行うように駆動可能な画素駆動部120と、外部からのシャッター設定データおよびゲイン設定データを保持し、シャッター設定およびゲイン設定を少なくとも画素駆動部に反映させるタイミングを制御する機能を含むインタフェース部170と、を有し、インタフェース部170は、設定されてから1フレーム後の次フレームにゲインを反映させる機能を含む。

Description

固体撮像素子およびカメラシステム
 本発明は、CMOSイメージセンサに代表される固体撮像素子およびカメラシステムに関するものである。
 近年、CCDに代わる固体撮像素子(イメージセンサ)として、CMOSイメージセンサが注目を集めている。
 これはCMOSイメージセンサが次の課題を克服しているからである。
 すなわち、CCD画素の製造には専用プロセスを必要とし、また、その動作には複数の電源電圧が必要であり、さらに複数の周辺ICを組み合わせて動作させる必要がある。
 このようなCCDの場合、システムが非常に複雑化するといった処々の問題を、CMOSイメージセンサが克服しているからである。
 CMOSイメージセンサは、その製造には一般的なCMOS型集積回路と同様の製造プロセスを用いることが可能であり、また単一電源での駆動が可能で、さらにCMOSプロセスを用いたアナログ回路や論理回路を同一チップ内に混在させることができる。
 このため、CMOSイメージセンサは、周辺ICの数を減らすことができるといった、大きなメリットを複数持ち合わせている。
 CCDの出力回路は、浮遊拡散層(FD:Floating Diffusion)を有するFDアンプを用いた1チャネル(ch)出力が主流である。
 これに対して、CMOSイメージセンサは画素毎にFDアンプを持ち合わせており、その出力は、画素アレイの中のある一行を選択し、それらを同時に列方向へと読み出すような列並列出力型が主流である。
 これは、画素内に配置されたFDアンプでは十分な駆動能力を得ることは難しく、したがってデータレートを下げることが必要で、並列処理が有利とされているからである。
 そして、CMOSイメージセンサでは一般に画素をリセットする際に、行ごとに遂次画素をリセットしていく方式が取られることが多い。
 この方式をローリングシャッターと呼ぶ。
 図1は、4つのトランジスタで構成されるCMOSイメージセンサの画素例を示す図である。
 この画素1は、たとえばフォトダイオードからなる光電変換素子11を有し、この1個の光電変換素子11に対して、転送トランジスタ12、リセットトランジスタ13、増幅トランジスタ14、および選択トランジスタ15の4つのトランジスタを能動素子として有する。
 光電変換素子11は、入射光をその光量に応じた量の電荷(ここでは電子)に光電変換する。
 転送トランジスタ12は、光電変換素子11とフローティングディフュージョンFDとの間に接続され、転送制御線LTxを通じてそのゲート(転送ゲート)に送信信号(駆動信号)TGが与えられる。
 これにより、光電変換素子11で光電変換された電子をフローティングディフュージョンFDに転送する。
 リセットトランジスタ13は、電源ラインLVDDとフローティングディフュージョンFDとの間に接続され、リセット制御線LRSTを通してそのゲートにリセット信号RSTが与えられる。
 これにより、フローティングディフュージョンFDの電位を電源ラインLVDDの電位にリセットする。
 フローティングディフュージョンFDには、増幅トランジスタ14のゲートが接続されている。増幅トランジスタ14は、選択トランジスタ15を介して信号線16に接続され、画素部外の定電流源とソースフォロアを構成している。
 そして、選択制御線LSELを通してアドレス信号(選択信号)SELが選択トランジスタ15のゲートに与えられ、選択トランジスタ15がオンする。
 選択トランジスタ15がオンすると、増幅トランジスタ14はフローティングディフュージョンFDの電位を増幅してその電位に応じた電圧を信号線16に出力する。信号線16を通じて、各画素から出力された電圧は、カラム回路(列処理回路)に出力される。
 この画素のリセット動作とは、光電変換素子11に蓄積されている電荷を、転送トランジスタ12をオンし、光電変換素子11に蓄積された電荷をフローティングディフュージョンFDに転送してはき出すことになる。
 このとき、フローティングディフュージョンFDは事前に光電変換素子11の電荷を受け取れるように、リセットトランジスタ13をオンして電荷を電源側にはきすてている。あるいは転送トランジスタ12をオンしている間、これと並行としてリセットトランジスタ13をオンにして、直接電源に電荷をはきすてる場合もある。
 これら一連の動作を単純化して、「画素リセット動作」あるいは「シャッター動作」と呼ぶ。
 一方読み出し動作では、まずリセットトランジスタ13をオンにしてフローティングディフュージョンFDをリセットし、その状態でオンされた選択トランジスタ15を通じて余剰電荷(ノイズ)が出力信号線16に出力する。これをP相出力と呼ぶ。
 次に、転送トランジスタ12をオンにして光電変換素子11に蓄積された電荷をフローティングディフュージョンFDに転送し、その出力を出力信号線16に出力する。これをD相出力と呼ぶ。
 画素回路外部でD相出力とP相出力の差分をとり、フローティングディフュージョンFDのリセットノイズをキャンセルして画像信号とする。
 単純化してこれら一連の動作を単純に「画素読み出し動作」と呼ぶ。
 図2は、図1の画素を2次元アレイ状に配置したCMOSイメージセンサ(固体撮像素子)の一般的な構成例を示す図である。
 図2のCMOSイメージセンサ20は、図1に示した画素回路を2次元アレイ状に配置した画素アレイ部21、画素駆動回路(垂直走査回路)22、およびカラム回路(列処理回路)23により構成されている。
 画素駆動回路22は、各行の画素の転送トランジスタ12、リセットトランジスタ13、選択トランジスタ15のオン、オフを制御する。
 カラム回路23は、画素駆動回路22により読み出し制御された画素行のデータを受け取り、後段の信号処理回路に転送する回路である。
 図3は、図2に示した回路のローリングシャッター動作のタイミングチャートを示す図である。
 図3に示すように、行遂次に画素リセット動作を行っていき、それを追いかける形で行遂次に画素読み出し動作を行う。
 各行の画素は、画素リセット動作と画素読み出し動作の間、光電変換素子に信号を蓄積し、これを画素読み出し動作で読み出す。
 ところで、上述したような撮像素子を有するカメラにおいては、逆光のシーンや明暗の輝度差が大きいシーンを撮影する際には、被写体の照度に露光時間を合わせた標準画像だけでは白潰れや黒潰れが生じる。
 そこで、露光時間の異なる非標準画像を複数枚撮影し、標準画像で明るすぎる領域や暗すぎる領域を非標準画像に合成ゲインをかけた画像に置き換えることによってダイナミックレンジの拡大を行い、出力ビットに合わせて圧縮が行われる。
 たとえば、ワイドダイナミックレンジ(WD)と呼ばれる処理では、複数回露光によってダイナミックレンジ(DR)の広い画像を取得して、複数画像の合成とダイナミックレンジ(DR)の圧縮が行われる。
特開2004‐166269号公報
 ところで、ワイドダイナミックレンジ駆動で低輝度側と高輝度側の露光比を設定するために、シャッターのみではなく、ゲインも設定する必要が出てきた。
 しかし、既存の技術では、シャッターとゲインの設定を同時に行うと、無効フレームが発生するという問題が起こる。
 既存の技術では、ゲイン設定をレジスタ通信後の更新タイミングで反映されると、そのフレームにゲイン設定が反映される。
 ゲイン設定のみの変更であれば問題はない。
 しかし、シャッター設定とゲイン設定を同通信期間で行った場合、そのフレームに反映されるゲインに対してシャッター設定は1フレーム後から反映されるため、図4に示すように、1フレーム無効なフレームが発生してしまう問題が発生する。
 既存の技術で無効なフレームが発生してしまう問題を解決させることは可能である。
 その対策は、たとえば図5に示すように、シャッター設定を行ったフレームの次フレームでゲイン設定を行うといった手法である。
 しかし、この手法では、シャッター設定とゲイン設定の通信を分けて2度通信を行う必要があるため、設定に手間が掛かってしまう。
 また、ワイドダイナミックレンジ駆動のような複数のフレームを必要とする動作の場合、図6に示すように、先頭のフレームでシャッター設定とゲイン設定を行うと、同様に前の1フレームが無効フレームになるという問題が発生する。
 このため、ワイドダイナミックレンジ駆動を実現させている複数のフレームが無効となってしまう。
 本発明は、シャッターとゲインを同時に設定する場合であっても、無効フレームの発生を防止することが可能な固体撮像素子およびカメラシステムを提供することにある。
 本発明の第1の観点の固体撮像素子は、光信号を電気信号に変換し、その電気信号を露光時間に応じて蓄積する機構を有する複数の画素回路が行列状に配列された画素部と、設定データに応じて上記画素部のシャッター動作、および読み出し動作を行うように駆動可能な画素駆動部と、外部からのシャッター設定データおよびゲイン設定データを保持し、シャッター設定およびゲイン設定を少なくとも上記画素駆動部に反映させるタイミングを制御する機能を含むインタフェース部と、を有し、上記インタフェース部は、設定されてから1フレーム後の次フレームにゲインを反映させる機能を含む。
 上記インタフェース部は、複数フレームの駆動を検出し、1フレームゲインの上記反映を遅延させる機能を有する。
 好適には、上記インタフェース部は、ゲイン設定値の反映を1フレーム遅延させて行うか、1フレーム遅延させずに反映させるかを選択する切替部を有する。
 好適には、上記インタフェース部は、外部からのシャッター設定データおよびゲイン設定データを保持するデータ保持部と、更新タイミング信号を受けて1フレーム遅延更新タイミング信号を生成する遅延更新タイミング生成部と、上記遅延更新タイミング信号を受けて供給されるゲイン設定値を1フレーム分遅延させて出力するゲイン保持部と、上記更新タイミング信号を受けて、上記データ保持部に保持されたシャッター設定値をそのまま出力し、ゲイン設定値を上記ゲイン保持部に供給する反映制御部と、を含む。
 好適には、上記インタフェース部は、外部からのシャッター設定データおよびゲイン設定データを保持するデータ保持部と、更新タイミング信号を受けて1フレーム遅延更新タイミング信号を生成する遅延更新タイミング生成部と、上記遅延更新タイミング信号を受けて供給されるゲイン設定値を1フレーム分遅延させて出力するゲイン保持部と、上記更新タイミング信号を受けて、上記データ保持部に保持されたシャッター設定値およびゲイン設定値をそのまま出力し、ゲイン設定値を上記ゲイン保持部に供給する反映制御部と、上記反映制御部から出力される遅延されていないゲイン設定値または上記ゲイン保持部により遅延されたゲイン設定値を選択的に出力する切替部と、を含む。
 本発明のカメラシステムは、固体撮像素子と、上記撮像素子に被写体像を結像する光学系と、上記撮像素子の出力画像信号を処理する信号処理回路と、を有し、上記固体撮像素子は、光信号を電気信号に変換し、その電気信号を露光時間に応じて蓄積する機構を有する複数の画素回路が行列状に配列された画素部と、設定データに応じて上記画素部のシャッター動作、および読み出し動作を行うように駆動可能な画素駆動部と、外部からのシャッター設定データおよびゲイン設定データを保持し、シャッター設定およびゲイン設定を少なくとも上記画素駆動部に反映させるタイミングを制御する機能を含むインタフェース部と、を有し、上記インタフェース部は、設定されてから1フレーム後の次フレームにゲインを反映させる機能を含む。
 本発明によれば、外部からインタフェース部にシャッター設定データおよびゲイン設定データが入力され保持される。
 そして、インタフェース部では、シャッター設定およびゲイン設定を反映させるに際し、シャッター設定値は遅延させずにそのまま反映させ、ゲイン設定値を設定されてから1フレーム後の次フレームにゲインを反映させる。
 本発明によれば、シャッターとゲインを同時に設定する場合であっても、無効フレームの発生を防止することができる。
図1は、4つのトランジスタで構成されるCMOSイメージセンサの画素例を示す図である。 図2は、図1の画素を2次元アレイ状に配置したCMOSイメージセンサ(固体撮像素子)の一般的な構成例を示す図である。 図3は、一般的なCMOSイメージセンサのローリングシャッターのシャッター動作と水平周期の関係を示すタイミング図である。 図4は、1フレーム無効なフレームが発生してしまう問題が発生することを説明するための図である。 図5は、シャッター設定を行ったフレームの次フレームでゲイン設定を行う場合に、シャッター設定とゲイン設定の通信を分けて2度通信を行う必要があることを説明するための図である。 図6は、先頭のフレームでシャッター設定とゲイン設定を行うと、前の1フレームが無効フレームになるという問題が発生することを説明するための図である。 図7は、本発明の実施形態に係るCMOSイメージセンサ(固体撮像素子)の構成例を示す図である。 図8は、本実施形態に係る4つのトランジスタで構成されるCMOSイメージセンサの画素の一例を示す図である。 図9は、本発明の実施形態に係るインタフェース部の構成例を示す回路図である。 図10は、本実施形態と既存技術との基本的な駆動を比較して示すタイミング図である。 図11は、本実施形態と既存技術との複数フレーム駆動の場合を比較して示すタイミング図である。 図12は、本実施形態に係るシャッター設定およびゲイン設定処理を説明するためのタイミング図である。 図13は、本実施形態に係るインタフェース部の1フレーム更新タイミング遅延させる機能と、遅延させない機能とを切り替える構成例を示す図である。 図14は、本実施形態に係る列並列ADC搭載固体撮像素子(CMOSイメージセンサ)の構成例を示すブロック図である。 図15は、本発明の実施形態に係る固体撮像素子が適用されるカメラシステムの構成の一例を示す図である。
 以下、本発明の実施の形態を図面に関連付けて説明する。
 図7は、本発明の実施形態に係るCMOSイメージセンサ(固体撮像素子)の構成例を示す図である。
 本CMOSイメージセンサ100は、画素アレイ部110、画素駆動部としての垂直走査回路120、および水平走査回路130、カラム読み出し回路140、制御部150、データ処理部160、およびインタフェース部170を有する。
 画素アレイ部110は、複数の画素回路110Aが2次元状(マトリクス状)に配列されている。
 また、固体撮像素子100においては、画素アレイ部110の信号を順次読み出すための制御系としての構成部を有する。
 すなわち、固体撮像素子100は、内部クロックやインタフェース部170を含む制御部150、行アドレスや行走査を制御する垂直走査回路120、列アドレスや列走査を制御する水平走査回路130、およびカラム読み出し回路140が配置されている。
 制御部150に配置されたインタフェース部170については後で詳述する。
 図8は、本実施形態に係る4つのトランジスタで構成されるCMOSイメージセンサの画素の一例を示す図である。
 この画素回路110Aは、たとえばフォトダイオードからなる光電変換素子111を有する。
 そして、画素回路110Aは、この1個の光電変換素子111に対して、転送トランジスタ112、リセットトランジスタ113、増幅トランジスタ114、および選択トランジスタ115の4つのトランジスタを能動素子として有する。
 光電変換素子111は、入射光をその光量に応じた量の電荷(ここでは電子)に光電変換する。
 転送トランジスタ112は、光電変換素子111と出力ノードとしてのフローティングディフュージョンFDとの間に接続され、転送制御線LTxを通じてそのゲート(転送ゲート)に制御信号である送信信号TGが与えられる。
 これにより、転送トランジスタ112は、光電変換素子111で光電変換された電子をフローティングディフュージョンFDに転送する。
 リセットトランジスタ113は、電源ラインLVDDとフローティングディフュージョンFDとの間に接続され、リセット制御線LRSTを通してそのゲートに制御信号であるリセット信号RSTが与えられる。
 これにより、リセットトランジスタ113は、フローティングディフュージョンFDの電位を電源ラインLVDDの電位にリセットする。
 フローティングディフュージョンFDには、増幅トランジスタ114のゲートが接続されている。増幅トランジスタ114は、選択トランジスタ115を介して信号線116に接続され、画素部外の定電流源とソースフォロアを構成している。
 そして、選択制御線LSELを通してアドレス信号に応じた制御信号である選択信号SELが選択トランジスタ115のゲートに与えられ、選択トランジスタ115がオンする。
 選択トランジスタ115がオンすると、増幅トランジスタ114はフローティングディフュージョンFDの電位を増幅してその電位に応じた電圧を信号線116に出力する。信号線116を通じて、各画素から出力された電圧は、カラム読み出し回路140に出力される。
 これらの動作は、たとえば転送トランジスタ112、リセットトランジスタ113、および選択トランジスタ115の各ゲートが行単位で接続されていることから、1行分の各画素について同時に行われる。
 画素アレイ部110に配線されているリセット制御線LRST、転送制御線LTx、および選択制御線LSELが一組として画素配列の各行単位で配線されている。
 これらのリセット制御線LRST、転送制御線LTx、および選択制御線LSELは、垂直走査回路120により駆動される。
 垂直走査回路120は、固体撮像素子のシャッター動作・読み出し動作を行う際の行の指定を行う機能を有する。
 垂直走査回路120は、インタフェース部170によるシャッター設定データおよび露光比に関するゲイン設定データを反映させて、固体撮像素子のシャッター駆動処理機能を有する。
 カラム読み出し回路140は、垂直走査回路120により読み出し制御された画素行の読み出しデータを受け取り、この読み出しデータは水平走査回路130を介して後段のデータ処理部160に転送する。
 カラム読み出し回路140は、相関二重サンプリング(CDS:Correlated Double Sampling)などの信号処理を施す機能を有する。
 以下、本実施形態に係るインタフェース部170の具体的な構成および機能について説明する。
 インタフェース部170は、クロックCLK、データDT、イネーブル信号ENBに応じて、シャッター設定データやゲイン設定データを保持し、シャッター設定データおよびゲイン設定データを垂直走査回路120に反映させるタイミングを制御する機能を有する。
 既存技術では、ゲインの設定を行った際、設定を行ったフレームにゲインを反映すると、一つ前のフレームから反映されてしまい、1フレーム無効なフレームが発生してしまう。
 そこで、本実施形態のインタフェース部170は、設定されてから1フレーム後にゲインを反映させることで、無効なフレームが発生しないようにする機能を含む。
 インタフェース部170は、外部から設定されたゲイン設定データを保持し、次フレームで反映させる。
 インタフェース部170は、複数フレームを有する駆動を検出して、自動で1フレームゲインの反映を遅延させる機能を有する。
 インタフェース部170においては、ゲイン設定データを反映するタイミングを、シャッター設定データと合わせて変更する場合、分けてレジスタ設定通信を行うより同じ通信期間内に行い、かつ無効なフレームが発生せず、同フレームから反映させる。
 図9は、本発明の実施形態に係るインタフェース部の構成例を示す回路図である。
 図9のインタフェース部170は、シリアル/パラレル変換部171、データ保持部172、1フレーム遅延更新タイミング生成部173、反映制御部174、およびゲイン保持部175を有する。
 シリアル/パラレル変換部171は、外部から受けたクロックCLK、データDT、イネーブル信号ENBに応じて、3線シリアルデータをパラレルデータに変換する。
 データ保持部172は、パラレルデータに変換されたシャッター設定データおよびゲイン設定データを保持する。
 1フレーム遅延更新タイミング生成部173は、垂直同期信号Vsyncに同期して外部から与えられる更新タイミング信号UTMに応じ、1フレーム遅延させる遅延更新タイミング信号DUTMを生成し、ゲイン保持部175に出力する。
 反映制御部174は、外部から与えられる更新タイミング信号UTMに同期して、データ保持部172に保持されたシャッター設定データSTRを、後段の垂直走査回路120等に供給し、ゲイン設定データをゲイン保持部175に供給する。
 ゲイン保持部175は、ラッチとしてのレジスタREGを1または複数有し、1フレーム遅延させる遅延更新タイミング信号DUTMを受けて、供給されたゲイン設定データを1フレーム分保持した後、後段の垂直走査回路120等に供給する。
 図10は、本実施形態と既存技術との基本的な駆動を比較して示すタイミング図である。
 図11は、本実施形態と既存技術との複数フレーム駆動の場合を比較して示すタイミング図である。
 インタフェース部170において、3線シリアルで外部から入力されたデータDTは、シリアル/パラレル変換部171でシリアルデータからパラレルデータへと変換され、データ保持部172に保持される。
 そして、内部で生成される遅延更新タイミング信号DUTMにより、保持されていたデータは固体撮像素子100内部へと反映され、制御部150によって各機能部、たとえば垂直走査回路120等を制御する。
 データ保持部172に保持されていたデータを内部へと反映する動作は、ゲイン設定のみ反映する動作を遅らせている。
 データ保持部172で保持している設定データをゲイン設定のみ更新タイミングUTMで内部へと反映させず、図10に示すように、1フレーム遅延更新タイミング生成部173で1フレーム分遅延させた遅延更新タイミング信号DUTMで内部へ反映させる。
 また、図11に示すように、ワイドダイナミックレンジ駆動のような複数のフレームを必要とする場合は、上記で無効フレームの発生を防止できる。
 ただし、毎フレームにゲイン設定を変える駆動の場合、1フレーム遅延させた更新タイミングで反映させるだけでは、その時通信したゲインのレジスタのデータが反映されてしまう。
 このため、このような駆動でもゲイン設定の反映を1フレーム遅延させるために、本実施形態においては、ゲイン保持部175にラッチであるレジスタREGを設け、1フレーム遅延更新タイミングで反映させている。
 これにより、毎フレームにゲイン設定を行う場合でも無効フレームを発生させなくすることが可能となる。
 図12は、本実施形態に係るシャッター設定およびゲイン設定処理を説明するためのタイミング図である。
 通信期間T1に設定されたシャッター設定値S1、ゲイン設定値G1はデータ保持部172にデータ保持される。
 そして、更新タイミング信号UTMにより反映制御部174を通して制御内部レジスタREGへと反映されるが、この時点ではシャッター設定値S1のみが内部へ反映される。
 ゲイン設定値G1は、1フレーム後のゲインの遅延更新タイミング信号DUTMにより、ゲイン保持部175を通して内部レジスタへと更新される。
 そして、出力端子TOへと出力される。
 以上の手法で無効フレームを発生させることなく、ゲイン設定が反映されることを実現している。
 以上説明したように、本実施形態によれば、内部への更新タイミングを1フレーム遅延させた更新タイミングを設けることで、外部から設定されたゲイン設定の反映を1フレーム遅延させることが可能となる。
 また、通常の駆動では2度レジスタの通信を行う必要が無くなる。
 さらにまた、ゲイン専用の内部ラッチを設けることで、毎フレーム外部からゲイン設定を変更した場合でも、1フレーム遅延したゲイン反映が可能となり、無効フレームの発生を無くすことができる。
 なお、インタフェース部170は、ゲイン設定の反映を1フレーム遅延させる機能のみを有する場合を例に説明したが、たとえば図13に示すように、1フレーム更新タイミング遅延させる機能と、遅延させない機能とを切り替えるように構成することも可能である。
 図13は、本実施形態に係るインタフェース部の1フレーム更新タイミング遅延させる機能と、遅延させない機能とを切り替える構成例を示す図である。
 図13のインタフェース部170は、図9の構成に加えて切替部176を有する。
 切替部176は、シリアル/パラレル変換部171Aによる切替信号S171により反映制御部174よる1フレーム遅延されていないゲイン設定データまたはゲイン保持部175で1フレーム分遅延されたゲイン設定データを選択切り替えして出力する。
 図13の構成によれば、1フレーム更新タイミング遅延させる機能と、遅延させない機能とを切替える事を可能にすることで、これまでのゲイン設定の反映で使用したい場合にも対応が可能である。
 なお、各実施形態に係るCMOSイメージセンサは、特に限定されないが、たとえば列並列型のアナログ-デジタル変換装置(以下、ADC(Analog digital converter)と略す)を搭載したCMOSイメージセンサとして構成することも可能である。
 図14は、本実施形態に係る列並列ADC搭載固体撮像素子(CMOSイメージセンサ)の構成例を示すブロック図である。
 この固体撮像素子200は、図14に示すように、撮像部としての画素アレイ部210、画素駆動部としての垂直走査回路220、水平転送走査回路230、タイミング制御回路240を有する。
 さらに、固体撮像素子200は、ADC群250、デジタル-アナログ変換装置(以下、DAC (Digital Analog converter)と略す)260、アンプ回路(S/A)270、および信号処理回路280を有する。
 画素アレイ部210は、フォトダイオードと画素内アンプとを含む、たとえば図8に示すような画素がマトリックス状(行列状)に配置されて構成される。
 また、固体撮像素子200においては、画素アレイ部210の信号を順次読み出すための制御回路として次の回路が配置されている。
 すなわち、固体撮像素子200においては、制御回路として内部クロックを生成するタイミング制御回路240、行アドレスや行走査を制御する垂直走査回路220、そして列アドレスや列走査を制御する水平転送走査回路230が配置される。
 そして、タイミング制御回路240が、図7~図13に関連付けて説明した、インタフェース部170,170Aを含む制御部150が配置されている。
 ADC群250は、比較器251、カウンタ252、およびラッチ253を有するADCが複数列配列されている。
 比較器251は、DAC260により生成される参照電圧を階段状に変化させたランプ波形(RAMP)である参照電圧Vslopと、行線毎に画素から垂直信号線を経由し得られるアナログ信号とを比較する。
 カウンタ252は、比較器251の比較時間をカウントする。
 ADC群250は、nビットデジタル信号変換機能を有し、垂直信号線(列線)毎に配置され、列並列ADCブロックが構成される。
 各ラッチ253の出力は、たとえば2nビット幅の水平転送線290に接続されている。
 そして、水平転送線290に対応した2n個のアンプ回路270、および信号処理回路280が配置される。
 ADC群250においては、垂直信号線に読み出されたアナログ信号(電位Vsl)は列毎に配置された比較器251で参照電圧Vslop(ある傾きを持った線形に変化するスロープ波形)と比較される。
 このとき、比較器251と同様に列毎に配置されたカウンタ252が動作しており、ランプ波形のある電位Vslopとカウンタ値が一対一対応を取りながら変化することで垂直信号線の電位(アナログ信号)Vslをデジタル信号に変換する。
 参照電圧Vslopの変化は電圧の変化を時間の変化に変換するものであり、その時間をある周期(クロック)で数えることでデジタル値に変換するものである。
 そしてアナログ電気信号Vslと参照電圧Vslopが交わったとき、比較器251の出力が反転し、カウンタ252の入力クロックを停止し、AD変換が完了する。
 以上のAD変換期間終了後、水平転送走査回路230により、ラッチ253に保持されたデータが、水平転送線290、アンプ回路270を経て信号処理回路280に入力され、2次元画像が生成される。
 このようにして、列並列出力処理が行われる。
 このような効果を有する固体撮像素子は、デジタルカメラやビデオカメラの撮像デバイスとして適用することができる。
 図15は、本発明の実施形態に係る固体撮像素子が適用されるカメラシステムの構成の一例を示す図である。
 本カメラシステム300は、図15に示すように、本実施形態に係るCMOSイメージセンサ(固体撮像素子)100,200が適用可能な撮像デバイス310と、この撮像デバイス310の画素領域に入射光を導く(被写体像を結像する)光学系、たとえば入射光(像光)を撮像面上に結像させるレンズ320と、撮像デバイス310を駆動する駆動回路(DRV)330と、撮像デバイス310の出力信号を処理する信号処理回路(PRC)340と、を有する。
 駆動回路330は、撮像デバイス310内の回路を駆動するスタートパルスやクロックパルスを含む各種のタイミング信号を生成するタイミングジェネレータ(図示せず)を有し、所定のタイミング信号で撮像デバイス310を駆動する。
 また、信号処理回路340は、撮像デバイス310の出力信号に対して所定の信号処理を施す。
 信号処理回路340で処理された画像信号は、たとえばメモリなどの記録媒体に記録される。記録媒体に記録された画像情報は、プリンタなどによってハードコピーされる。また、信号処理回路340で処理された画像信号を液晶ディスプレイ等からなるモニターに動画として映し出される。
 上述したように、デジタルスチルカメラ等の撮像装置において、撮像デバイス310として、先述した撮像素子100,200を搭載することで、低消費電力で、高精度なカメラが実現できる。
 100・・・固体撮像素子、110・・・画素アレイ部、110A・・・画素、111・・・光電変換素子、112・・・転送トランジスタ、113・・・リセットトランジスタ、114・・・増幅トランジスタ、115・・・選択トランジスタ、120・・・垂直走査回路(画素駆動部)、130・・・水平走査回路、140・・・カラム読み出し回路、150・・・制御部、160・・・データ処理部、170・・・インタフェース部、171・・・シリアル/パラレル変換部、172・・・データ保持部、173・・・1フレーム遅延更新タイミング生成部、174・・・反映制御部、175・・・ゲイン保持部、176・・・切替部、200・・・固体撮像素子、210・・・画素アレイ部、220・・・垂直走査回路、230・・・水平転送走査回路、240・・・タイミング制御回路、250・・・ADC群、260・・・DAC、270・・・アンプ回路(S/A)、280・・・信号処理回路、300・・・カメラシステム、310・・・撮像デバイス、320・・・レンズ、330・・・駆動回路、340・・・信号処理回路。

Claims (6)

  1.  光信号を電気信号に変換し、その電気信号を露光時間に応じて蓄積する機構を有する複数の画素回路が行列状に配列された画素部と、
     設定データに応じて上記画素部のシャッター動作、および読み出し動作を行うように駆動可能な画素駆動部と、
     外部からのシャッター設定データおよびゲイン設定データを保持し、シャッター設定およびゲイン設定を少なくとも上記画素駆動部に反映させるタイミングを制御する機能を含むインタフェース部と、を有し、
     上記インタフェース部は、
      設定されてから1フレーム後の次フレームにゲインを反映させる機能を含む
     固体撮像素子。
  2.  上記インタフェース部は、
      複数フレームの駆動を検出し、1フレームゲインの上記反映を遅延させる機能を有する
     請求項1記載の固体撮像素子。
  3.  上記インタフェース部は、
      ゲイン設定値の反映を1フレーム遅延させて行うか、1フレーム遅延させずに反映させるかを選択する切替部を有する
     請求項1または2記載の固体撮像素子。
  4.  上記インタフェース部は、
      外部からのシャッター設定データおよびゲイン設定データを保持するデータ保持部と、
      更新タイミング信号を受けて1フレーム遅延更新タイミング信号を生成する遅延更新タイミング生成部と、
      上記遅延更新タイミング信号を受けて供給されるゲイン設定データを1フレーム分遅延させて出力するゲイン保持部と、
      上記更新タイミング信号を受けて、上記データ保持部に保持されたシャッター設定データをそのまま出力し、ゲイン設定データを上記ゲイン保持部に供給する反映制御部と、を含む
     請求項1または2記載の固体撮像素子。
  5.  上記インタフェース部は、
      外部からのシャッター設定データおよびゲイン設定データを保持するデータ保持部と、
      更新タイミング信号を受けて1フレーム遅延更新タイミング信号を生成する遅延更新タイミング生成部と、
      上記遅延更新タイミング信号を受けて供給されるゲイン設定値を1フレーム分遅延させて出力するゲイン保持部と、
      上記更新タイミング信号を受けて、上記データ保持部に保持されたシャッター設定値およびゲイン設定値をそのまま出力し、ゲイン設定値を上記ゲイン保持部に供給する反映制御部と、
      上記反映制御部から出力される遅延されていないゲイン設定値または上記ゲイン保持部により遅延されたゲイン設定値を選択的に出力する切替部と、を含む
     請求項3記載の固体撮像素子。
  6.  固体撮像素子と、
     上記撮像素子に被写体像を結像する光学系と、
     上記撮像素子の出力画像信号を処理する信号処理回路と、を有し、
     上記固体撮像素子は、
      光信号を電気信号に変換し、その電気信号を露光時間に応じて蓄積する機構を有する複数の画素回路が行列状に配列された画素部と、
      設定データに応じて上記画素部のシャッター動作、および読み出し動作を行うように駆動可能な画素駆動部と、
      外部からのシャッター設定データおよびゲイン設定データを保持し、シャッター設定およびゲイン設定を少なくとも上記画素駆動部に反映させるタイミングを制御する機能を含むインタフェース部と、を有し、
      上記インタフェース部は、
       設定されてから1フレーム後の次フレームにゲインを反映させる機能を含む
     カメラシステム。
PCT/JP2009/059964 2008-06-18 2009-06-01 固体撮像素子およびカメラシステム WO2009154073A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP09766521A EP2288143A4 (en) 2008-06-18 2009-06-01 SOLID BODY IMAGING ELEMENT AND CAMERA SYSTEM
BRPI0904319-5A BRPI0904319A2 (pt) 2008-06-18 2009-06-01 Dispositivo de formação de imagem em estado sólido, e, sistema de câmera
KR1020107002991A KR20110019725A (ko) 2008-06-18 2009-06-01 고체 촬상 소자 및 카메라 시스템
US12/672,446 US8605169B2 (en) 2008-06-18 2009-06-01 Solid-state imaging device with delayed reflection of gain setting and camera system with same
CN200980100152A CN101779447A (zh) 2008-06-18 2009-06-01 固体摄像器件和照相机装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008159471A JP5256874B2 (ja) 2008-06-18 2008-06-18 固体撮像素子およびカメラシステム
JP2008-159471 2008-06-18

Publications (1)

Publication Number Publication Date
WO2009154073A1 true WO2009154073A1 (ja) 2009-12-23

Family

ID=41433989

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/059964 WO2009154073A1 (ja) 2008-06-18 2009-06-01 固体撮像素子およびカメラシステム

Country Status (9)

Country Link
US (1) US8605169B2 (ja)
EP (1) EP2288143A4 (ja)
JP (1) JP5256874B2 (ja)
KR (1) KR20110019725A (ja)
CN (2) CN104580926A (ja)
BR (1) BRPI0904319A2 (ja)
RU (1) RU2010104873A (ja)
TW (1) TW201004318A (ja)
WO (1) WO2009154073A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011166657A (ja) * 2010-02-15 2011-08-25 Nikon Corp 固体撮像素子

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5656484B2 (ja) 2010-07-07 2015-01-21 キヤノン株式会社 固体撮像装置および撮像システム
JP5751766B2 (ja) * 2010-07-07 2015-07-22 キヤノン株式会社 固体撮像装置および撮像システム
JP5885401B2 (ja) 2010-07-07 2016-03-15 キヤノン株式会社 固体撮像装置および撮像システム
JP5643555B2 (ja) 2010-07-07 2014-12-17 キヤノン株式会社 固体撮像装置及び撮像システム
JP5697371B2 (ja) 2010-07-07 2015-04-08 キヤノン株式会社 固体撮像装置および撮像システム
JP5220964B1 (ja) 2011-07-05 2013-06-26 オリンパスメディカルシステムズ株式会社 内視鏡システム
US9307207B2 (en) * 2013-01-07 2016-04-05 GM Global Technology Operations LLC Glaring reduction for dynamic rearview mirror
US9369648B2 (en) 2013-06-18 2016-06-14 Alexander Krymski Image sensors, methods, and pixels with tri-level biased transfer gates
EP3448018A4 (en) * 2016-04-21 2019-06-12 Panasonic Intellectual Property Management Co., Ltd. IMAGING DEVICE AND CAMERA SYSTEM EQUIPPED WITH SAME
JP6750680B2 (ja) * 2016-08-23 2020-09-02 株式会社ニコン 撮像素子および撮像システム
CN110933341B (zh) * 2018-09-20 2022-08-16 西安中兴新软件有限责任公司 图像传感器及其控制方法、终端、计算机可读存储介质
EP3672228A1 (en) 2018-12-20 2020-06-24 Axis AB Method and system for adjusting an image pipeline setting
JP2022051408A (ja) 2020-09-18 2022-03-31 キヤノン株式会社 光電変換装置、光電変換システム及び移動体
KR20220058218A (ko) * 2020-10-30 2022-05-09 삼성전자주식회사 이미지 센서를 포함하는 전자 장치 및 그 동작 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0638097A (ja) * 1992-07-14 1994-02-10 Fuji Photo Film Co Ltd スチル/ムービ・ビデオ・カメラおよびその映像信号生成方法
JPH11113008A (ja) * 1997-10-08 1999-04-23 Olympus Optical Co Ltd 電子的撮像装置
US6836288B1 (en) 1999-02-09 2004-12-28 Linvatec Corporation Automatic exposure control system and method
EP1727360A1 (en) 2004-03-17 2006-11-29 Fujitsu Limited Automatic gain control circuit

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10210367A (ja) * 1997-01-20 1998-08-07 Olympus Optical Co Ltd 電子的撮像装置
JP4350936B2 (ja) * 2002-09-30 2009-10-28 富士フイルム株式会社 固体撮像素子の信号読み出し方法
CN1234234C (zh) * 2002-09-30 2005-12-28 松下电器产业株式会社 固体摄像器件及使用该固体摄像器件的设备
KR100562489B1 (ko) 2002-11-11 2006-03-21 삼성전자주식회사 셔터 타이밍 조절 가능한 로우 디코더를 갖는 이미지 센서
JP4075773B2 (ja) * 2003-11-05 2008-04-16 ソニー株式会社 固体撮像装置
JP4144517B2 (ja) * 2003-12-05 2008-09-03 ソニー株式会社 固体撮像装置、撮像方法
KR100548004B1 (ko) * 2004-05-03 2006-02-01 삼성테크윈 주식회사 디지털 촬영 장치의 제어 방법 및 이 방법을 사용한디지털 촬영 장치
JP4692196B2 (ja) * 2005-10-04 2011-06-01 ソニー株式会社 固体撮像装置、固体撮像装置の駆動方法および撮像装置
JP4208904B2 (ja) * 2006-07-03 2009-01-14 キヤノン株式会社 撮像装置及びその制御方法並びに撮像システム
JP5262047B2 (ja) * 2007-09-28 2013-08-14 ソニー株式会社 固体撮像装置及び撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0638097A (ja) * 1992-07-14 1994-02-10 Fuji Photo Film Co Ltd スチル/ムービ・ビデオ・カメラおよびその映像信号生成方法
JPH11113008A (ja) * 1997-10-08 1999-04-23 Olympus Optical Co Ltd 電子的撮像装置
US6567123B1 (en) 1997-10-08 2003-05-20 Olympus Optical Co., Ltd. Electronic camera
US6836288B1 (en) 1999-02-09 2004-12-28 Linvatec Corporation Automatic exposure control system and method
EP1727360A1 (en) 2004-03-17 2006-11-29 Fujitsu Limited Automatic gain control circuit

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2288143A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011166657A (ja) * 2010-02-15 2011-08-25 Nikon Corp 固体撮像素子

Also Published As

Publication number Publication date
JP5256874B2 (ja) 2013-08-07
US8605169B2 (en) 2013-12-10
KR20110019725A (ko) 2011-02-28
CN101779447A (zh) 2010-07-14
TW201004318A (en) 2010-01-16
BRPI0904319A2 (pt) 2015-06-30
CN104580926A (zh) 2015-04-29
EP2288143A4 (en) 2011-10-05
RU2010104873A (ru) 2011-08-20
JP2010004146A (ja) 2010-01-07
US20110085064A1 (en) 2011-04-14
EP2288143A1 (en) 2011-02-23

Similar Documents

Publication Publication Date Title
JP5256874B2 (ja) 固体撮像素子およびカメラシステム
US10681294B2 (en) Solid-state imaging device and camera system
US8310580B2 (en) Solid-state imaging device and camera system for suppressing occurrence of quantization vertical streaks
US8704898B2 (en) A/D converter, solid-state imaging device and camera system
JP5868065B2 (ja) 撮像装置
US8659693B2 (en) Solid-state image pickup element and camera system
US8547460B2 (en) Solid-state imaging element, driving method therefor, and camera system with a pixel drive control unit concurrently accessing a window region and the adjacent outer row
US20090237534A1 (en) Analog-to-digital converter, solid-state image pickup device, and camera system
US20110279724A1 (en) Solid-state imaging device and camera system
US8988560B2 (en) Solid-state image pickup element and camera system having mechanism for canceling potential drop on signal line
JP2010057097A (ja) 固体撮像素子およびカメラシステム
KR20140107212A (ko) 고체 촬상 소자 및 그 구동 방법, 카메라 시스템
JP2010011056A (ja) 固体撮像素子およびカメラシステム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980100152.6

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 12672446

Country of ref document: US

Ref document number: 808/DELNP/2010

Country of ref document: IN

Ref document number: 2009766521

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20107002991

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2010104873

Country of ref document: RU

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09766521

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: PI0904319

Country of ref document: BR

Kind code of ref document: A2

Effective date: 20100211