WO2022137790A1 - 固体撮像素子、センシング装置、および、固体撮像素子の制御方法 - Google Patents

固体撮像素子、センシング装置、および、固体撮像素子の制御方法 Download PDF

Info

Publication number
WO2022137790A1
WO2022137790A1 PCT/JP2021/039579 JP2021039579W WO2022137790A1 WO 2022137790 A1 WO2022137790 A1 WO 2022137790A1 JP 2021039579 W JP2021039579 W JP 2021039579W WO 2022137790 A1 WO2022137790 A1 WO 2022137790A1
Authority
WO
WIPO (PCT)
Prior art keywords
analog
digital
signal
clamp
unit
Prior art date
Application number
PCT/JP2021/039579
Other languages
English (en)
French (fr)
Inventor
之康 立澤
隆夫 小西
Original Assignee
ソニーセミコンダクタソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーセミコンダクタソリューションズ株式会社 filed Critical ソニーセミコンダクタソリューションズ株式会社
Publication of WO2022137790A1 publication Critical patent/WO2022137790A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components

Definitions

  • This technology relates to a solid-state image sensor. More specifically, the present invention relates to a solid-state image sensor that performs analog-to-digital conversion for each column, a sensing device, and a control method for the solid-state image sensor.
  • a clamp circuit that corrects a signal using the detection value in the OPB (OPtical Black) region has been used for the purpose of removing dark current noise.
  • OPB optical Black
  • a solid-state image sensor has been proposed in which an analog clamp circuit that corrects an analog signal and a digital clamp circuit that corrects a digital signal share one OPB region (see, for example, Patent Document 1). .).
  • the correction by the digital clamp circuit is started at the timing when the detection of the OPB region is completed, and the correction by the analog clamp circuit is started with a delay of one frame from that timing.
  • This technique was created in view of such a situation, and aims to improve the image quality of image data in a solid-state image sensor provided with a clamp circuit.
  • the present technology has been made to solve the above-mentioned problems, and the first aspect thereof is to specify analog signals from each of a predetermined number of light-shielding pixels and a predetermined number of non-light-shielded effective pixels.
  • the analog digital converter that converts to a digital signal based on the lamp signal of the above, and the statistics of the digital signal of the predetermined number of light-shielding pixels at the timing when the conversion of all the analog signals of the predetermined number of light-shielding pixels is completed.
  • the analog clamp circuit that starts the correction of the lamp signal based on the corresponding analog clamp value, the correction amount of the lamp signal by the analog clamp circuit, and the digital signal statistics of the predetermined number of light-shielding pixels.
  • It is a solid-state image pickup device provided with a digital clamp circuit which starts the correction of the digital signal of the effective pixel based on the digital clamp value at the above timing, and a control method thereof. This has the effect of improving the image quality.
  • the analog-to-digital converter may include a comparator that compares the lamp signal with the analog signal. This has the effect of generating a digital signal from the comparison result of the comparator.
  • the comparator is between a differential amplifier circuit that amplifies the difference between a predetermined reference voltage and a voltage of a predetermined node, and a vertical signal line that transmits the analog signal between the predetermined node.
  • the ratio of the voltage on the vertical signal line side inserted in, the capacitance on the lamp side inserted between the predetermined node and the analog clamp circuit, and the capacitance on the vertical signal line side and the capacitance on the lamp side is a predetermined number of capacitances. It may be equipped with a switch that changes to any of the ratios. This has the effect of controlling the volume ratio.
  • the analog clamp circuit corrects the analog clamp value based on the analog clamp value calculation unit that calculates the analog clamp value from the statistics and the capacitance ratio for each capacitance ratio.
  • the capacity ratio correction unit supplied as the correction analog clamp value, the selection unit for selecting one of the correction analog clamp values corresponding to each of the predetermined number of capacity ratios, and the selected correction analog clamp value are selected.
  • a digital-analog converter that converts an analog signal and a subtractor that obtains the difference between the analog signal and the lamp signal from the digital-analog converter may be provided. This has the effect of improving the image quality when the capacity ratio is variable.
  • the analog clamp circuit may calculate the analog clamp value from the statistic and the analog gain of the analog-to-digital converter. This has the effect of calculating the analog clamp value according to the analog gain.
  • the digital clamp circuit includes a moving average filter that obtains a moving average of the difference as the digital clamp value based on a predetermined filter coefficient, and whether or not the analog gain has changed and the analog.
  • a filter speed control unit that controls the filter coefficient based on whether or not the clamp value has changed may be provided. This has the effect of appropriately controlling the tracking speed of the moving average filter.
  • the second aspect of the present technology is an analog digital converter that converts an analog signal from each of a predetermined number of light-shielding pixels and a predetermined number of non-light-shielded effective pixels into a digital signal based on a predetermined lamp signal. And, at the timing when the conversion of all the analog signals of the predetermined number of light-shielding pixels is completed, the correction of the lamp signal is started based on the analog clamp value according to the statistics of the digital signal of the predetermined number of light-shielding pixels.
  • the digital signal of the effective pixel is based on the digital clamp value according to the difference between the analog clamp circuit, the correction amount of the analog signal by the analog clamp circuit, and the digital signal statistic of the predetermined number of light-shielding pixels.
  • ADC Analog to Digital Converter
  • FIG. 1 is a block diagram showing a configuration example of an image pickup apparatus 100 according to a first embodiment of the present technology.
  • the image pickup device 100 is a device for taking an image of image data (frame), and includes an optical unit 110, a solid-state image pickup element 200, and a DSP (Digital Signal Processing) circuit 120. Further, the image pickup apparatus 100 includes a display unit 130, an operation unit 140, a bus 150, a frame memory 160, a storage unit 170, and a power supply unit 180.
  • DSP Digital Signal Processing
  • the image pickup device 100 for example, in addition to a digital camera such as a digital still camera, a smartphone having an image pickup function, a personal computer, an in-vehicle camera, or the like is assumed.
  • the image pickup device 100 is an example of the sensing device described in the claims.
  • the optical unit 110 collects the light from the subject and guides it to the solid-state image sensor 200.
  • the solid-state image sensor 200 generates a frame by photoelectric conversion in synchronization with a vertical synchronization signal.
  • the vertical synchronization signal is a periodic signal having a predetermined frequency indicating the timing of imaging.
  • the solid-state image sensor 200 supplies the generated image data to the DSP circuit 120 via the signal line 209.
  • the DSP circuit 120 executes predetermined signal processing on the frame from the solid-state image sensor 200.
  • the DSP circuit 120 outputs the processed frame to the frame memory 160 or the like via the bus 150.
  • the display unit 130 displays a frame.
  • a liquid crystal panel or an organic EL (Electro Luminescence) panel is assumed.
  • the operation unit 140 generates an operation signal according to the operation of the user.
  • the bus 150 is a common route for the optical unit 110, the solid-state image sensor 200, the DSP circuit 120, the display unit 130, the operation unit 140, the frame memory 160, the storage unit 170, and the power supply unit 180 to exchange data with each other.
  • the frame memory 160 holds a frame.
  • the storage unit 170 stores various data such as frames.
  • the power supply unit 180 supplies power to the solid-state image sensor 200, the DSP circuit 120, the display unit 130, and the like.
  • FIG. 2 is a block diagram showing a configuration example of the solid-state image sensor 200 according to the first embodiment of the present technology.
  • the solid-state image sensor 200 includes a vertical scanning unit 210, a timing control unit 220, and a DAC (Digital to Analog Converter) 230. Further, the solid-state image sensor 200 further includes a pixel array unit 240, a column signal processing unit 250, a horizontal scanning unit 260, and an image signal processing unit 270.
  • DAC Digital to Analog Converter
  • a plurality of pixels are arranged in a two-dimensional grid pattern.
  • a set of pixels arranged in a predetermined horizontal direction is referred to as a "row”
  • a set of pixels arranged in a direction perpendicular to the horizontal direction is referred to as a "column” or a “column”.
  • the vertical scanning unit 210 selects and drives rows in order, and outputs an analog pixel signal to the column signal processing unit 250.
  • the timing control unit 220 controls the operation timings of the vertical scanning unit 210, the DAC 230, the column signal processing unit 250, and the horizontal scanning unit 260 in synchronization with the vertical synchronization signal XVS.
  • the DAC 230 generates a reference signal by DA (Digital to Analog) conversion and supplies it to the column signal processing unit 250.
  • DA Digital to Analog
  • the reference signal for example, a lamp signal whose level gradually decreases during the conversion of the P phase and the D phase is used.
  • the P phase is the level of the pixel signal when the floating diffusion layer in the pixel is initialized
  • the D phase is the level of the pixel signal when the charge is transferred to the floating diffusion layer in the pixel. ..
  • the column signal processing unit 250 uses the reference signal to perform various signal processing such as AD (Analog to Digital) conversion processing, CDS (Correlated Double Sampling) processing, and dark current correction for the pixel signal for each column. It is something to do.
  • the column signal processing unit 250 supplies the processed digital signal to the image signal processing unit 270.
  • the horizontal scanning unit 260 controls the column signal processing unit 250 to output digital signals in order.
  • the image signal processing unit 270 performs predetermined image processing on a frame in which digital signals are arranged.
  • the image signal processing unit 270 supplies the processed frame to the DSP circuit 120.
  • FIG. 3 is a plan view showing a configuration example of the pixel array unit 240 according to the first embodiment of the present technology.
  • the pixel array unit 240 is provided with a VOPB (Vertical OPtical Black) region 241 and a visible light region 245.
  • VOPB Very OPtical Black
  • a plurality of effective pixels 246 are arranged in a two-dimensional grid pattern.
  • the effective pixel 246 is a pixel that is not shaded.
  • Each of the effective pixels 246 receives visible light of, for example, one of R (Red), G (Green), and B (Blue) through a color filter and performs photoelectric conversion to generate a pixel signal. ..
  • the effective pixels 246 of these R, G and B are arranged by, for example, a Bayer array.
  • a plurality of shaded light-shielding pixels 242 are arranged in a two-dimensional grid pattern. Further, in the VOPB region 241 there are a light-shielding pixel 242 having the same circuit configuration as the effective pixel 246 of R, a light-shielding pixel 242 having the same circuit configuration as the effective pixel 246 of G, and a light-shielding pixel having the same circuit configuration as the effective pixel 246 of B. 242 and are arranged.
  • the pixels of R, G, and B are arranged in the pixel array unit 240, the color combination is not limited to the configuration of R, G, and B.
  • R, G, B and W White pixels can also be arranged.
  • the VOPB area 241 is used in both the analog clamp circuit and the digital clamp circuit described later.
  • FIG. 4 is a block diagram showing a configuration example of the column signal processing unit 250 according to the first embodiment of the present technology.
  • a column circuit 300 is arranged for each column.
  • Each of the column circuits 300 includes an analog clamp circuit 310, an ADC 320, a digital clamp circuit 330, a post-stage circuit 340, and a latch circuit 302.
  • An analog pixel signal Ain from the corresponding column is input to the column circuit 300 via the vertical signal line 249.
  • the vertical signal line 249 is a signal line for transmitting the pixel signal Ain, and is wired for each row in the pixel array unit 240.
  • each of the circuits in the column circuit 300 processes each of the pixel signals from the corresponding columns in order in synchronization with the horizontal synchronization signal.
  • This horizontal sync signal is a periodic signal with a higher frequency than the vertical sync signal.
  • the analog clamp circuit 310 corrects the lamp signal RMP from the DAC 230 based on each digital signal of the light-shielding pixel 242.
  • the analog clamp circuit 310 supplies the corrected lamp signal RMP'to the ADC 320.
  • the ADC 320 converts a pixel signal (analog signal) from the pixel array unit 240 into a digital signal Dout.
  • the ADC 320 supplies the digital signal Dout to the analog clamp circuit 310 and the digital clamp circuit 330.
  • the ADC 320 is an example of the analog-to-digital converter described in the claims.
  • the digital clamp circuit 330 corrects the digital signal Dout of the effective pixel 246 based on each digital signal Dout of the light-shielding pixel 242.
  • the digital clamp circuit 330 supplies the corrected digital signal Dout'to the latch circuit 302 via the subsequent circuit 340.
  • various processes are performed as needed.
  • the latch circuit 302 holds the digital signal from the subsequent circuit 340.
  • the latch circuit 302 supplies a digital signal to the image signal processing unit 270 under the control of the horizontal scanning unit 260.
  • FIG. 5 is a block diagram showing a configuration example of an analog clamp circuit 310 and a digital clamp circuit 330 according to the first embodiment of the present technology.
  • the analog clamp circuit 310 includes a VOPB detection unit 311, an analog clamp value calculation unit 350, a timing adjustment unit 312, a DAC 313, and a subtractor 314.
  • the digital clamp circuit 330 includes a VOPB detection unit 331, an analog clamp change amount subtraction unit 360, a digital clamp value calculation unit 370, and a subtractor 332.
  • the VOPB detection unit 311 calculates the statistic (average, etc.) of the digital signal Dout of all the light-shielding pixels 242 as the VOPB detection value.
  • the VOPB detection unit 311 supplies the calculated VOPB detection value to the analog clamp value calculation unit 350.
  • the analog clamp value calculation unit 350 calculates the analog clamp value from the VOPB detection value by the VOPB detection unit 311.
  • the analog clamp value calculation unit 350 supplies a DAC code indicating the calculated analog clamp value to the timing adjustment unit 312. Further, the analog clamp value calculation unit 350 calculates a parameter for obtaining a correction amount of the lamp signal by the analog clamp circuit 310 as an analog clamp change amount, and supplies the parameter to the analog clamp change amount subtraction unit 360. Further, the analog clamp value calculation unit 350 determines whether or not the analog clamp value has changed within the period of the vertical synchronization signal, and supplies the analog clamp change flag indicating the determination result to the digital clamp value calculation unit 370.
  • the timing adjustment unit 312 supplies the DAC code to the DAC 313 in synchronization with the region boundary pulse from the timing control unit 220.
  • This region boundary pulse is a signal indicating the timing at which the AD conversion of the pixel signals of all the pixels in the VOPB region 241 is completed.
  • the DAC 313 converts the DAC code from the timing adjustment unit 312 into an analog signal.
  • the DAC 313 supplies the analog signal to the subtractor 314.
  • the DAC 313 is an example of the digital-to-analog converter described in the claims.
  • the subtractor 314 subtracts the analog signal generated by the DAC 313 from the lamp signal RMP from the DAC 230 at the time of P-phase conversion of the effective pixel 242.
  • the pixel signal after the CDS processing is corrected by the correction of the lamp signal corresponding to the P phase conversion.
  • the subtractor 314 supplies the subtracted analog signal to the ADC 320 as a lamp signal RMP'.
  • the VOPB detection unit 311 calculates the statistic of the digital signal Dout of the light-shielding pixel 242 as the VOPB detection value for each color such as R, G, and B. For example, in a column in which R pixels and G pixels are arranged, the VOPB detection value of R and the VOPB detection value of G are used. The VOPB detection unit 311 supplies each of the calculated VOPB detection values to the analog clamp change amount subtraction unit 360.
  • the analog clamp change amount subtraction unit 360 obtains the correction amount of the lamp signal by the analog clamp circuit 310 from the analog clamp change amount, and obtains the difference between the correction amount and the VOPB detection value.
  • the analog clamp change amount subtraction unit 360 supplies the obtained difference to the digital clamp value calculation unit 370.
  • the digital clamp value calculation unit 370 calculates the digital clamp value from the difference calculated by the analog clamp change amount subtraction unit 360 using the moving average filter.
  • the digital clamp value calculation unit 370 supplies the calculated digital clamp value to the subtractor 332.
  • the analog clamp change flag from the analog clamp value calculation unit 350 and the analog gain change flag from the timing control unit 220 are input to the digital clamp value calculation unit 370.
  • the analog gain change flag indicates whether or not the analog gain of the ADC 320 has changed.
  • the digital clamp value calculation unit 370 controls the filter coefficient of the moving average filter based on these flags.
  • the subtractor 332 subtracts the digital clamp value from the digital signal Dout of the effective pixel 246.
  • the digital clamp value of R is subtracted from the digital signal Dout of R
  • the digital clamp value of G is subtracted from the digital signal Dout of G.
  • the subtractor 332 supplies the subtracted digital signal as Dout'to the subsequent circuit 340.
  • the analog clamp circuit 310 starts the correction of the lamp signal at the timing when the AD conversion of the pixel signals of all the light-shielding pixels 242 is completed (that is, the timing indicated by the region boundary pulse).
  • the analog clamp circuit 310 uses the statistic (VOPB detection value) of the digital signal Dout of all the light-shielding pixels 242.
  • the dark level of the pixel signal after the CDS processing in the visible light region 245 is clamped to a value corresponding to the VOPB detection value (in other words, an analog clamp).
  • the digital clamp circuit 330 obtains a digital clamp value according to the difference between the correction amount of the lamp signal by the analog clamp circuit 310 and the statistic (VOPB detection value) of the digital signal such as R and G. Then, the digital clamp circuit 330 starts the correction of the digital signal Dout at substantially the same timing as the analog clamp circuit 310 based on the digital clamp value. Due to the color-by-color correction, the dark level of the corrected digital signal Dout'in the visible light region 245 is clamped to an appropriate value for each color (in other words, digital clamp).
  • the detection value is obtained for all the pixels in the VOPB region 241 with the analog clamp, and the detection value for each color is obtained with the digital clamp.
  • the analog clamp can be used for coarse detection and the digital clamp can be used for fine detection. , Not limited to the above configuration. For example, when synthesizing a plurality of image data having different exposure times, it is possible to detect with an analog clamp regardless of the exposure time and with a digital clamp for each exposure time.
  • FIG. 6 is a block diagram showing a configuration example of the ADC 320 according to the first embodiment of the present technology.
  • the ADC 320 includes a comparator 400 and a counter 321.
  • the comparator 400 compares the lamp signal RMP'from the analog clamp circuit 310 with the pixel signal Ain from the pixel array unit 240, and outputs the comparison result to the counter 321.
  • the comparator 400 includes, for example, capacitances 401 and 402 and a differential amplifier circuit 430.
  • the differential amplifier circuit 430 amplifies the difference between the lamp signal input via the capacitance 401 and the pixel signal input via the capacitance 402, and outputs the comparison result to the counter 321.
  • the analog gain of the ADC 320 is controlled by, for example, the slope of the lamp signal RMP. The gentler the slope, the higher the analog gain of the ADC 320.
  • the counter 321 counts the count value over a period until the comparison result is reversed.
  • the counter 321 supplies the digital signal Dout indicating the count value to the digital clamp circuit 330.
  • the ADC consisting of the comparator 400 and the counter 321 is called a single slope type ADC.
  • the ADC 320 is not limited to the single slope type as long as it can convert an analog signal into a digital signal.
  • SARADC Successessive Approximation Register ADC
  • the ADC 320 can also be used as the ADC 320.
  • FIG. 7 is a block diagram showing a configuration example of the post-stage circuit 340 according to the first embodiment of the present technology.
  • the subsequent circuit 340 includes adders 341 and 342 and a truncated unit 343.
  • the adder 341 adds a pedestal level for fine adjustment to the digital signal Dout'from the digital clamp circuit 330, and supplies it to the adder 342.
  • the adder 342 adds a predetermined dither signal to the digital signal from the adder 341 for the purpose of producing decimal point accuracy, and supplies it to the truncating processing unit 343.
  • the truncate processing unit 343 performs predetermined rounding (trancate) processing on the digital signal from the adder 342.
  • the truncated digital signal 343 supplies the processed digital signal to the latch circuit 302.
  • FIG. 8 is a block diagram showing a configuration example of the analog clamp value calculation unit 350 according to the first embodiment of the present technology.
  • the analog clamp value calculation unit 350 includes an analog gain rebate calculation unit 351, a chattering prevention processing unit 352, an adder 353, a delay unit 354, and an analog clamp change flag generation unit 355.
  • the analog gain rebate calculation unit 351 performs an operation of dividing the VOPB detection value by the analog gain.
  • the VOPB detection value ave from the VOPB detection unit 311 is input to the analog gain rebate calculation unit 351.
  • the analog gain rebate calculation unit 351 calculates AVEin by, for example, the following equation.
  • AVEin ave ⁇ (V ADC / V clamp ) ⁇ 1 / ANAGAIN
  • the V ADC indicates a voltage value corresponding to 1 LSB (Least Significant Bit) of the ADC 320.
  • V clamp indicates the voltage value corresponding to 1LSB of the DAC code in the analog clamp circuit 310.
  • the unit of these voltage values is, for example, LSB ( ⁇ V / LSB) per microvolt.
  • ANAGAIN is the analog gain of the ADC 320.
  • the analog gain rebate calculation unit 351 supplies the digital signal AVEin obtained by the calculation to the chattering prevention processing unit 352.
  • the chattering prevention processing unit 352 performs processing for chattering prevention with respect to the input AVEin.
  • the chattering prevention processing unit 352 supplies the processed digital signal AVEout to the analog clamp change amount subtraction unit 360 and the adder 353 as the analog clamp change amount [n] of the nth (n is an integer) frame.
  • This analog clamp change amount [n] is used to obtain the correction amount of the lamp signal by the analog clamp circuit 310.
  • the adder 353 adds the analog clamp change amount [n] and the analog clamp value [n-1] of the n-1th frame.
  • the addition result is supplied to the timing adjustment unit 312 and the analog clamp change flag generation unit 355 as the analog clamp value [n] of the current frame (that is, the nth frame).
  • the delay unit 354 delays the analog clamp value [n] of the nth frame by the period of the vertical synchronization signal, and generates the adder 353 and the analog clamp change flag as the analog clamp value [n-1] of the n-1th frame. It is supplied to the unit 355.
  • the analog clamp change flag generation unit 355 determines whether or not the difference between the analog clamp value [n] and the analog clamp value [n-1] is "0" (in other words, whether or not the analog clamp value has changed). It is a judgment.
  • the analog clamp change flag generation unit 355 generates a flag indicating a determination result as an analog clamp change flag and supplies it to the digital clamp value calculation unit 370.
  • FIG. 9 is a graph showing an example of the input / output relationship of the chattering prevention processing unit 352 according to the first embodiment of the present technology.
  • the horizontal axis in the figure shows the digital signal AVEin input to the chattering prevention processing unit 352.
  • the vertical axis in the figure shows the digital signal AVE Meetingut output from the chattering prevention processing unit 352.
  • the digital signal AVEin When the digital signal AVEin is within the range from “0" to a predetermined upper limit, the digital signal AVE Todayut of the upper limit is output. Further, when the digital signal AVEin is within the range from the lower limit to "0", the lower limit digital signal AVE Meetingut is output. When the digital signal AVEin is larger than the upper limit or smaller than the lower limit, the digital signal AVEin is output as it is as a digital signal AVE Meetingut.
  • FIG. 10 is a block diagram showing a configuration example of the analog clamp change amount subtraction unit 360 according to the first embodiment of the present technology.
  • the analog clamp change amount subtraction unit 360 includes a black level correction amount conversion unit 361, a selector 362, and a subtractor 363.
  • the black level correction amount conversion unit 361 converts the analog clamp change amount [n] from the analog clamp value calculation unit 350 into the black level correction amount A by the following equation.
  • the black level correction amount A indicates the correction amount of the lamp signal by the analog clamp circuit 310.
  • A (V clamp / V ADC ) x ANAGAIN
  • the black level correction amount conversion unit 361 supplies the obtained black level correction amount A to the subtractor 363.
  • the selector 362 selects one of a plurality of VOPB detection values from the VOPB detection unit 331 according to the selection signal SEL from the timing control unit 220.
  • the selected VOPB detection value is supplied to the subtractor 363.
  • the VOPB detection value ave_R of R and the VOPB detection value ave_G of G are alternately selected in synchronization with the horizontal synchronization signal.
  • the subtractor 363 subtracts the black level correction amount A from the selected VOPB detection value.
  • the subtractor 363 supplies the subtraction result to the digital clamp value calculation unit 370 as the predicted VOPB detection value AVE_R (or AVE_G).
  • FIG. 11 is a block diagram showing a configuration example of the digital clamp value calculation unit 370 according to the first embodiment of the present technology.
  • the digital clamp value calculation unit 370 includes a moving average filter 371 and a filter speed control unit 377.
  • the moving average filter 371 obtains the moving average of the predicted VOPB detection value AVE_R (or AVE_G) from the analog clamp change amount subtractor 360, and outputs the moving average as the digital clamp value [n] of the nth frame to the subtractor 332. Is.
  • the moving average filter 371 includes an adder 372, a subtractor 373, a multiplier 374, a delay unit 375, and a multiplier 376.
  • the adder 372 adds the predicted VOPB detection value and the multiplication result of the multiplier 376, and supplies the addition result to the subtractor 373.
  • the subtractor 373 subtracts the output of the delay unit 375 from the addition result of the adder 372, and supplies the subtraction result to the multiplier 374.
  • the multiplier 374 uses ⁇ as a predetermined filter coefficient and multiplies the subtraction result of the subtractor 373 by 1 / ⁇ .
  • the multiplication result is supplied to the subtractor 332 and the delay unit 375 as a digital clamp value [n].
  • the delay unit 375 delays the digital clamp value [n] and supplies it to the subtractor 373 and the multiplier 376.
  • the multiplier 376 multiplies the output of the delay unit 375 by ⁇ , and supplies the multiplication result to the adder 372.
  • H (z) (1 / ⁇ ) / [1- ⁇ ( ⁇ -1) / ⁇ ⁇ Z -1 ]
  • the filter speed control unit 377 controls the value of the filter coefficient ⁇ based on the analog clamp change amount flag and the analog gain change flag.
  • the filter speed control unit 377 sets the filter coefficient ⁇ to a value smaller than a predetermined value (for example, “1”) and causes it to follow at high speed.
  • a predetermined value for example, “1”
  • the filter speed control unit 377 sets the filter coefficient ⁇ to a value larger than a predetermined value (for example, “32”) and causes the filter to follow at low speed.
  • the configuration of the moving average filter 371 is not limited to the configuration illustrated in the figure as long as the moving average can be obtained.
  • FIG. 12 is a graph showing an example of the frequency characteristics of the moving average filter 371 according to the first embodiment of the present technology.
  • the figure shows the characteristics when "32" is set for the filter coefficient ⁇ .
  • the vertical axis of a indicates the gain, and the horizontal axis indicates the frequency.
  • the vertical axis of b indicates the phase, and the horizontal axis indicates the frequency.
  • FIG. 13 is a timing chart showing an example of the image pickup operation of the first frame and the second frame of the solid-state image pickup device according to the first embodiment of the present technology.
  • the vertical sync signal XVS falls at timings T1, T2, and T3.
  • the first frame is imaged within the period from timing T1 to T2.
  • the ADC 320 of each column sequentially AD-converts a plurality of rows in the VOPB area 241.
  • the AD conversion of all the pixels in the VOPB area 241 is completed.
  • a plurality of rows in the visible light region 245 are AD-converted in order.
  • the analog clamp value calculation unit 350 uses the initial value (for example, "8.0") corresponding to the "0" level as the first analog clamp value at the timing T11.
  • An analog clamp value larger than "8.0” is set when clamping to a positive number larger than the "0" level after the second frame, and "8.0” when clamping to a negative number less than the "0" level.
  • An analog clamp value less than is set.
  • This analog clamp value is supplied to the DAC 313 as a DAC code immediately after the timing T11 by the timing adjusting unit 312. The lamp signal is corrected by this DAC code.
  • analog clamp value calculation unit 350 calculates "0" as the analog clamp change amount. Based on the correction amount according to the analog clamp change amount and the VOPB detection value for each color, each digital signal of the effective pixel 246 is corrected after the timing T11.
  • the second frame is imaged within the period from timing T2 to T3.
  • the ADC 320 of each column sequentially AD-converts a plurality of rows in the VOPB region 241.
  • a plurality of rows in the visible light region 245 are AD-converted in order.
  • the analog clamp value calculation unit 350 calculates "9.0", which is different from the previous value, as the second analog clamp value at the timing T21.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code immediately after the timing T21 by the timing adjusting unit 312.
  • analog clamp value calculation unit 350 calculates "1" as the analog clamp change amount.
  • FIG. 14 is a timing chart showing an example of the image pickup operation of the third frame and the fourth frame of the solid-state image pickup device according to the first embodiment of the present technology.
  • the vertical sync signal XVS falls at timings T3, T4, and T5.
  • the third frame is imaged within the period from timing T3 to T4.
  • a plurality of rows in the VOPB area 241 are AD-converted in order.
  • a plurality of rows in the visible light region 245 are AD-converted in order.
  • the analog clamp value calculation unit 350 calculates "9.0", which is the same as the previous value, as the third analog clamp value at the timing T31.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code immediately after the timing T 31 by the timing adjusting unit 312.
  • analog clamp value calculation unit 350 calculates "0" as the analog clamp change amount.
  • the fourth frame is imaged within the period from timing T4 to T5.
  • the ADC 320 of each column sequentially AD-converts a plurality of rows in the VOPB region 241.
  • a plurality of rows in the visible light region 245 are AD-converted in order.
  • the analog clamp value calculation unit 350 calculates "8.0", which is different from the previous value, as the fourth analog clamp value at the timing T41.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code immediately after the timing T41 by the timing adjusting unit 312.
  • analog clamp value calculation unit 350 calculates "-1" as the analog clamp change amount.
  • the DAC code is updated once every cycle of the vertical synchronization signal at the timing of the boundary between the VOPB region 241 and the visible light region 245.
  • the correction by the analog clamp circuit 310 is started.
  • the subsequent digital clamp circuit 330 uses the correction amount obtained from the change amount as the digital clamp value for the remaining portion that requires further accuracy. Can be obtained as. Therefore, the digital clamp circuit 330 can start the correction of the digital signal at substantially the same timing as the analog clamp circuit 310.
  • the number of high-speed tracking is reduced as compared with the comparative example described later, and the stability can be improved.
  • the analog clamp circuit 310 does not supply the analog clamp change amount to the digital clamp circuit 330.
  • FIG. 15 is a block diagram showing a configuration example of the analog clamp circuit 310 and the digital clamp circuit 330 in the first comparative example.
  • the analog clamp circuit 310 of this first comparative example does not calculate the analog clamp change amount. Therefore, the analog clamp change amount subtraction unit 360 is not arranged in the digital clamp circuit 330, and the detection value of the VOPB detection unit 331 is supplied to the digital clamp value as it is. Further, in the first comparative example, the timing adjusting unit 312 updates the DAC code at the timing of the falling edge of the vertical synchronization signal XVS. The reason why the update timing of the DAC code is different will be described later.
  • FIG. 16 is a timing chart showing an example of the image pickup operation of the first frame and the second frame of the solid-state image pickup device in the first comparative example.
  • decibel (dB) is set for the analog gain of the ADC 320.
  • the analog clamp value calculation unit 350 uses the initial value "8.0" as the first analog clamp value at the timing T11. This analog clamp value is supplied to the DAC 313 as a DAC code by the timing adjusting unit 312 at the timing T2 at which the vertical synchronization signal XVS falls next.
  • decibel (dB) is set for the analog gain of the ADC 320.
  • the analog clamp value calculation unit 350 calculates "9.0", which is different from the previous value, as the second analog clamp value at the timing T21.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code by the timing adjusting unit 312 at the timing T3 at which the vertical synchronization signal XVS falls next.
  • FIG. 17 is a timing chart showing an example of the image pickup operation of the third frame and the fourth frame of the solid-state image pickup device in the first comparative example.
  • the analog clamp value calculation unit 350 calculates "9.0", which is the same as the previous value, as the third analog clamp value at the timing T31.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code by the timing adjusting unit 312 at the timing T4 when the vertical synchronization signal XVS falls next.
  • the analog clamp value calculation unit 350 calculates "8.0", which is different from the previous value, as the fourth analog clamp value at the timing T41.
  • the calculated analog clamp value is supplied to the DAC 313 as a DAC code by the timing adjusting unit 312 at the timing T5 when the vertical synchronization signal XVS falls next.
  • the analog clamp value calculated in one frame is reflected in the DAC code in the next frame.
  • the digital clamp circuit 330 does not know the correction amount of the analog clamp circuit 310. Therefore, if the analog clamp circuit 310 starts the correction for the lamp signal at the timing when the analog clamp value is calculated (timing T11 or the like), the correction amount for the digital signal becomes an inappropriate value.
  • the correction amount of the analog clamp circuit 310 is "8" and the VOPB detection value of a certain color at the time of calculation is "9".
  • the amount that needs to be corrected by the digital clamp circuit 330 is "1" of the difference.
  • the difference "1" cannot be obtained, and if the correction is performed using the detected "9", it is excessive. It will be a correction.
  • the analog clamp value is not immediately reflected even though the dark current becomes large when long-time exposure such as 10 seconds or 30 seconds is performed, so noise due to the dark current. Will grow. As a result, the image data may appear black and the image quality may deteriorate.
  • both the VOPB area used in the analog clamp circuit 310 and the VOPB area used in the digital clamp circuit 330 are provided, it is not necessary to delay the update of the DAC code.
  • the chip area and cost of the solid-state image sensor 200 are large, it is difficult to apply the configuration particularly in mobile devices and the like.
  • the difference in these timings does not matter, but the correction accuracy may decrease only in the analog clamp circuit 310. Further, with the digital clamp circuit 330 alone, the dynamic range may decrease during long exposure.
  • the update of the DAC code is delayed by one frame, so that the dark current is used.
  • the noise becomes large and the image data appears black.
  • the update of the DAC code is not delayed and the analog clamp value is immediately reflected. Therefore, noise due to dark current is reduced, and the image quality of image data is improved.
  • the digital clamp circuit 330 corrects at substantially the same timing as the analog clamp circuit 310 based on the correction amount of the analog clamp circuit 310, so that dark current noise is generated. It can be sufficiently reduced. As a result, the image quality of the image data can be improved as compared with the case where the correction of the analog clamp circuit 310 is delayed.
  • Second Embodiment> In the first embodiment described above, the ratio of the capacitance 401 on the lamp side of the comparator 400 to the capacitance on the vertical signal line side is fixed, but these capacitance ratios can also be made variable.
  • the comparator 400 of the second embodiment is different from the first embodiment in that the capacitance ratio is variable.
  • FIG. 18 is a circuit diagram showing a configuration example of the comparator 400 according to the second embodiment of the present technology.
  • the capacitance ratio switching circuit 410 and the differential amplifier circuit 430 are arranged.
  • the capacity ratio switching circuit 410 includes a predetermined number of switches such as switches 411 to 415 and a plurality of capacities such as capacities 416 to 421.
  • One end of the capacities 416 to 421 is commonly connected to the node 422.
  • the other end of the capacitance 416 is connected to the pixel array unit 240, and the other end of the capacitance 421 is connected to the analog clamp circuit 310.
  • the switch 411 opens and closes the path between the other end of the capacity 416 and the other end of the capacity 417 according to the control code CAZCODE.
  • the switch 412 opens and closes a path between the other end of the capacitance 417 and the other end of the capacitance 418 according to CAZCODE.
  • the switch 413 opens and closes the path between the other end of the capacity 418 and the other end of the capacity 419 according to CAZCODE.
  • the switch 414 opens and closes a path between the other end of the capacity 419 and the other end of the capacity 420 according to CAZCODE.
  • the switch 415 opens and closes the path between the other end of the capacity 420 and the other end of the capacity 421 according to CAZCODE.
  • the timing control unit 220 controls only one of the switches 411 to 415 to be in the open state and the rest to the closed state. By this control, the capacity ratio between the combined capacity on the vertical signal line side and the combined capacity on the lamp signal side is changed.
  • VSL side capacity the former
  • lamp side capacity the latter
  • the timing control unit 220 can switch the capacity ratio in five stages by controlling five switches.
  • the analog gain of the ADC 320 is controlled by the capacitance ratio and the slope of the ramp signal.
  • a signal whose level gradually rises during P-phase or D-phase conversion is input as a lamp signal, and the analog clamp circuit 310 corrects the lamp signal during D-phase conversion. I do.
  • the pixel signal after the CDS processing is corrected by the correction of the lamp signal corresponding to the D-phase conversion.
  • the timing control unit 220 can switch the capacity ratio to a plurality of stages other than the 5 stages. Assuming that the number of stages is M (M is an integer), M switches and M + 1 capacitances are arranged in the capacitance ratio switching circuit 410.
  • the respective capacity values of the capacities 416 to 421 can be set to any value.
  • the capacity 440 holds a predetermined reference voltage VSH.
  • the differential amplifier circuit 430 amplifies the difference between the voltage of the node 422 and the reference voltage VSH.
  • the differential amplifier circuit 430 includes pMOS transistors 431 and 432, auto zero switches 436 and 437, and nMOS transistors 433 to 435.
  • the pMOS transistors 431 and 432 are connected in parallel to the power supply.
  • the gate of the pMOS transistor 431 is connected to its own drain and the gate of the pMOS transistor 432.
  • the drain of the nMOS transistor 433 is connected to the pMOS transistor 431, and the source is connected to the common node. Further, the gate of the nMOS transistor 433 is connected to the node 422. The drain of the nMOS transistor 434 is connected to the pMOS transistor 432 and the source is connected to the common node. Further, the gate of the nMOS transistor 434 is connected to the capacitance 440.
  • the nMOS transistor 435 is inserted between the common node and the ground terminal, and a predetermined bias voltage Vbias is input to the gate.
  • the auto zero switch 436 short-circuits between the drain and the gate of the nMOS transistor 433 according to the auto zero signal AZ from the timing control unit 220.
  • the auto zero switch 437 short-circuits between the drain and the gate of the nMOS transistor 434 according to the auto zero signal AZ.
  • comparison result CMP is output to the counter 321 from the connection point of the pMOS transistor 432 and the nMOS transistor 434.
  • FIG. 19 is a diagram showing an example of the relationship between the code and the capacity ratio in the second embodiment of the present technique.
  • the capacity ratio between the VSL side capacity C_VSL and the lamp side capacity C_RMP is set to R0 (for example, “1”).
  • the capacity ratio is set to R1 (eg, "3/2"), and when CAZCODE is "2", the capacity ratio is R2 (eg, "7/3”). Is set to.
  • CAZCODE is "3
  • the capacity ratio is set to R3 (eg, "4")
  • CAZCODE is "4"
  • the capacity ratio is set to R4 (eg, "9”). ..
  • FIG. 20 is a block diagram showing a configuration example of the analog clamp circuit 310 according to the second embodiment of the present technology.
  • the analog clamp circuit 310 of the second embodiment is different from the first embodiment in that it further includes a capacitance ratio correction unit 380 and a code selection unit 390.
  • the capacity ratio correction unit 380 corrects the analog clamp value for each capacity ratio based on the capacity ratio, and supplies the corrected analog clamp value to the code selection unit 390. When the capacity ratio is switched in 5 steps, 5 correction analog clamp values are supplied to the code selection unit 390.
  • the code selection unit 390 selects a value corresponding to the current CAZCODE from a plurality of corrected analog clamp values and supplies the value to the timing adjustment unit 312 and the analog clamp value calculation unit 350.
  • the code selection unit 390 is an example of the selection unit described in the claims.
  • timing adjusting unit 312 of the second embodiment supplies the DAC code not only at the timing of the region pulse but also at the timing indicated by the vertical synchronization signal XVS.
  • FIG. 21 is a circuit diagram showing a configuration example of the capacity ratio correction unit 380 and the code selection unit 390 according to the second embodiment of the present technology.
  • the capacity ratio correction unit 380 includes multipliers 381 to 385 and a calculation result holding unit 386.
  • the code selection unit 390 includes a selector 391.
  • the multiplier 381 multiplies the analog clamp value [n] from the analog clamp value calculation unit 350 by the capacitance ratio R0.
  • the multiplier 382 multiplies the analog clamp value [n] by the capacitance ratio R1.
  • the multiplier 383 multiplies the analog clamp value [n] by the capacitance ratio R2.
  • the multiplier 384 multiplies the analog clamp value [n] by the capacitance ratio R3.
  • the multiplier 385 multiplies the analog clamp value [n] by the capacitance ratio R4.
  • the selector 391 selects one of the multiplication results (corrected analog clamp value) of each of the multipliers 381 to 385 according to CAZCODE and supplies it to the timing adjustment unit 312.
  • the capacitance ratio correction unit 380 calculates the correction analog clamp value for all the capacitance ratios in advance. is doing.
  • the timing control unit 220 determines the capacitance ratio at the timing indicated by the vertical synchronization signal XVS, supplies the CAZCODE corresponding to the capacitance ratio to the selector 391, and causes the selector 391 to select the corrected analog clamp value.
  • FIG. 22 is a block diagram showing a configuration example of the analog clamp value calculation unit 350 according to the second embodiment of the present technology.
  • the analog clamp value calculation unit 350 of the second embodiment is different from the first embodiment in that it further includes a delay unit 356, a subtractor 357, and a rebate processing unit 358.
  • the delay unit 356 delays the DAC code [n] from the code selection unit 390 by the time required for reading the VOPB area 241.
  • the delayed code is supplied to the subtractor 357 as a DAC code [n-1].
  • the subtractor 357 obtains the difference between the DAC code [n] and the DAC code [n-1] and supplies it to the rebate processing unit 358.
  • the rebate processing unit 358 divides the subtraction result of the subtractor 357 by the capacity ratio corresponding to CAZCODE. The division result is supplied to the analog clamp change amount subtraction unit 360 as the analog clamp change amount [n].
  • the analog gain rebate calculation unit 351 of the second embodiment calculates AVEin.
  • the V DAC is a voltage value corresponding to 1 LSB of the DAC 313, and the unit is, for example, LSB ( ⁇ V / LSB) per microvolt.
  • FIG. 23 is a timing chart showing an example of the image pickup operation of the first frame and the second frame of the solid-state image pickup device in the second embodiment of the present technology.
  • the analog clamp value calculation unit 350 calculates "8.0” as the first analog clamp value at the timing T11.
  • the timing adjustment unit 312 updates the DAC code by "8" obtained by multiplying the "8.0” by the capacity ratio "1".
  • analog clamp value calculation unit 350 rebates "0", which is the difference between the previous value and the current value of the DAC code, by the capacity ratio "1" at the timing T11, and outputs "0" as the analog clamp change amount.
  • the timing adjustment unit 312 updates the DAC code by "72", which is obtained by multiplying the analog clamp value at this time by "9" of the capacitance ratio.
  • the analog clamp value calculation unit 350 calculates "9.0" as the second analog clamp value at the timing T21.
  • the timing adjustment unit 312 updates the DAC code by "81" obtained by multiplying the calculated "9.0” by the capacity ratio "9".
  • analog clamp value calculation unit 350 rebates "9", which is the difference between the previous value and the current value of the DAC code, by the capacity ratio "9" at the timing T21, and outputs "1" as the analog clamp change amount.
  • FIG. 24 is a timing chart showing an example of the image pickup operation of the third frame and the fourth frame of the solid-state image pickup device in the second embodiment of the present technology.
  • the timing adjustment unit 312 updates the DAC code by "36", which is obtained by multiplying the analog clamp value at this time by "4" of the capacitance ratio.
  • the analog clamp value calculation unit 350 calculates "9.0" as the third analog clamp value at the timing T31.
  • the timing adjustment unit 312 updates the DAC code by "36" obtained by multiplying the calculated "9.0” by the capacity ratio "4".
  • analog clamp value calculation unit 350 rebates "0", which is the difference between the previous value and the current value of the DAC code, by the capacity ratio "4" at the timing T31, and outputs "0" as the analog clamp change amount.
  • the timing adjustment unit 312 updates the DAC code by "36", which is obtained by multiplying the analog clamp value at this time by "4" of the capacitance ratio.
  • the analog clamp value calculation unit 350 calculates "8.0” as the fourth analog clamp value at the timing T41.
  • the timing adjustment unit 312 updates the DAC code by "32" obtained by multiplying the calculated "8.0” by the capacity ratio "4".
  • analog clamp value calculation unit 350 rebates "4", which is the difference between the previous value and the current value of the DAC code, by the capacity ratio "4" at the timing T41, and outputs "1" as the analog clamp change amount.
  • the analog clamp value is updated at the timing of the boundary pulse, but the capacitance ratio is updated at the timing indicated by the vertical synchronization signal. Since both the analog clamp value and the capacitance ratio are used in the calculation of the DAC code, the DAC code needs to be updated twice within the period of one frame at each update timing of the analog clamp value and the capacitance ratio. ..
  • FIG. 25 is a diagram showing an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the first and second updates in the second embodiment of the present technology.
  • a is a timing chart showing an example of the image pickup operation of the solid-state image pickup device.
  • b is a diagram showing an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the first update of the DAC code.
  • c is an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the second update of the DAC code.
  • the DAC code is updated at the boundary pulse timing T11, and then the DAC code is updated at the vertical synchronization signal XVS timing T2.
  • the capacity ratio correction unit 380 obtains in advance the value obtained by multiplying the analog clamp value by the capacity ratio as the correction analog clamp value for all the capacity ratios. For example, when the analog clamp value is "8" and the capacitance ratio can be switched to any of "1", “1.5”, “2.3”, “4" and “9”, “8", “ 12 ”,“ 18.6 ”,“ 32 ”and“ 72 ”are calculated.
  • the selector 391 in the code selection unit 390 selects "8" corresponding to the capacity ratio "1".
  • the selector 391 selects "72" corresponding to the capacity ratio "9" after switching.
  • FIG. 26 is a diagram showing an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the third and fourth updates in the second embodiment of the present technology.
  • a is a timing chart showing an example of the image pickup operation of the solid-state image pickup device.
  • b is an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the third update of the DAC code.
  • c is an example of the state of the capacity ratio correction unit 380 and the code selection unit 390 at the time of the fourth update of the DAC code.
  • the capacity ratio correction unit 380 obtains in advance the value obtained by multiplying the analog clamp value by the capacity ratio as the correction analog clamp value for all the capacity ratios. For example, when the analog clamp value is “9”, “9", “13.5", “20.7”, “36” and "81" are calculated.
  • the selector 391 in the code selection unit 390 selects "81" corresponding to the capacity ratio "9".
  • the selector 391 selects "36" corresponding to the capacity ratio "4" after switching.
  • FIG. 27 is a graph showing an example of fluctuations in the signal level before and after clamping of the solid-state image sensor in the second embodiment of the present technology.
  • a shows an example of the fluctuation of the signal level before and after the analog clamp of the pixel signal in a certain dark image.
  • b shows an example of the fluctuation of the signal level before and after the digital clamping of the pixel signal in a certain dark image.
  • the scale of the vertical axis of b in the figure is smaller than that of a in the figure.
  • the vertical axis of a indicates the signal level of the pixel signal
  • the horizontal axis indicates time.
  • the alternate long and short dash line shows the locus of the signal level before the analog clamp
  • the solid line shows the locus of the signal level after the analog clamp.
  • the vertical axis of b indicates the signal level of the pixel signal
  • the horizontal axis indicates time.
  • the solid line shows the locus of the signal level after the analog clamp and before the digital clamp
  • the alternate long and short dash line shows the locus of the signal level after the digital clamp.
  • the analog clamp circuit 310 clamps the level of the analog signal to a constant value based on the VOPB detection values of all the pixels, as illustrated by the solid line.
  • the digital clamp circuit 330 clamps the level of the digital signal to an appropriate value for each color based on the VOPB detection value for each color. ..
  • the analog clamp circuit 310 applies the comparator 400 having a variable capacitance ratio to the first comparative example in which the analog clamp change amount is not supplied to the digital clamp circuit 330.
  • FIG. 28 is a block diagram showing a configuration example of an analog clamp circuit and a digital clamp circuit in the second comparative example.
  • the capacity ratio correction unit 380 and the code selection unit 390 are further added.
  • FIG. 29 is a graph showing an example of fluctuations in the signal level before and after clamping of the solid-state image sensor in the second comparative example.
  • a shows an example of the fluctuation of the signal level before and after the analog clamp of the pixel signal in a certain dark image.
  • b shows an example of the fluctuation of the signal level before and after the digital clamp of the digital signal in a certain dark image.
  • the digital clamp circuit 330 clamps the pixel signal level to an appropriate value for each color based on the VOPB detection value for each color.
  • the black level is floating in the T0 frame even after the digital clamping, so that the image quality may deteriorate.
  • the capacity ratio correction unit 380 corrects the analog clamp value for each capacity ratio
  • the code selection unit 390 corrects the correction value corresponding to the capacity ratio. Therefore, it is possible to make an appropriate correction when the capacitance ratio is variable.
  • the technique according to the present disclosure can be applied to various products.
  • the technology according to the present disclosure is realized as a device mounted on a moving body of any kind such as an automobile, an electric vehicle, a hybrid electric vehicle, a motorcycle, a bicycle, a personal mobility, an airplane, a drone, a ship, and a robot. You may.
  • FIG. 30 is a block diagram showing a schematic configuration example of a vehicle control system, which is an example of a mobile control system to which the technique according to the present disclosure can be applied.
  • the vehicle control system 12000 includes a plurality of electronic control units connected via the communication network 12001.
  • the vehicle control system 12000 includes a drive system control unit 12010, a body system control unit 12020, an outside information detection unit 12030, an in-vehicle information detection unit 12040, and an integrated control unit 12050.
  • a microcomputer 12051, an audio image output unit 12052, and an in-vehicle network I / F (interface) 12053 are shown as a functional configuration of the integrated control unit 12050.
  • the drive system control unit 12010 controls the operation of the device related to the drive system of the vehicle according to various programs.
  • the drive system control unit 12010 has a driving force generator for generating a driving force of a vehicle such as an internal combustion engine or a driving motor, a driving force transmission mechanism for transmitting the driving force to the wheels, and a steering angle of the vehicle. It functions as a control device such as a steering mechanism for adjusting and a braking device for generating braking force of the vehicle.
  • the body system control unit 12020 controls the operation of various devices mounted on the vehicle body according to various programs.
  • the body system control unit 12020 functions as a keyless entry system, a smart key system, a power window device, or a control device for various lamps such as headlamps, back lamps, brake lamps, turn signals or fog lamps.
  • the body system control unit 12020 may be input with radio waves transmitted from a portable device that substitutes for the key or signals of various switches.
  • the body system control unit 12020 receives inputs of these radio waves or signals and controls a vehicle door lock device, a power window device, a lamp, and the like.
  • the outside information detection unit 12030 detects information outside the vehicle equipped with the vehicle control system 12000.
  • the image pickup unit 12031 is connected to the vehicle outside information detection unit 12030.
  • the vehicle outside information detection unit 12030 causes the image pickup unit 12031 to capture an image of the outside of the vehicle and receives the captured image.
  • the out-of-vehicle information detection unit 12030 may perform object detection processing or distance detection processing such as a person, a vehicle, an obstacle, a sign, or a character on the road surface based on the received image.
  • the image pickup unit 12031 is an optical sensor that receives light and outputs an electric signal according to the amount of the light received.
  • the image pickup unit 12031 can output an electric signal as an image or can output it as distance measurement information. Further, the light received by the image pickup unit 12031 may be visible light or invisible light such as infrared light.
  • the in-vehicle information detection unit 12040 detects the in-vehicle information.
  • a driver state detection unit 12041 that detects a driver's state is connected to the vehicle interior information detection unit 12040.
  • the driver state detection unit 12041 includes, for example, a camera that images the driver, and the in-vehicle information detection unit 12040 determines the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 12041. It may be calculated, or it may be determined whether the driver has fallen asleep.
  • the microcomputer 12051 calculates the control target value of the driving force generator, the steering mechanism, or the braking device based on the information inside and outside the vehicle acquired by the vehicle exterior information detection unit 12030 or the vehicle interior information detection unit 12040, and the drive system control unit.
  • a control command can be output to 12010.
  • the microcomputer 12051 realizes ADAS (Advanced Driver Assistance System) functions including vehicle collision avoidance or impact mitigation, follow-up driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, vehicle lane deviation warning, and the like. It is possible to perform cooperative control for the purpose of.
  • ADAS Advanced Driver Assistance System
  • the microcomputer 12051 controls the driving force generating device, the steering mechanism, the braking device, and the like based on the information around the vehicle acquired by the outside information detection unit 12030 or the inside information detection unit 12040, so that the driver can control the driver. It is possible to perform coordinated control for the purpose of automatic driving that runs autonomously without depending on the operation.
  • the microcomputer 12051 can output a control command to the body system control unit 12020 based on the information outside the vehicle acquired by the vehicle outside information detection unit 12030.
  • the microcomputer 12051 controls the headlamps according to the position of the preceding vehicle or the oncoming vehicle detected by the outside information detection unit 12030, and performs cooperative control for the purpose of anti-glare such as switching the high beam to the low beam. It can be carried out.
  • the audio image output unit 12052 transmits an output signal of at least one of audio and image to an output device capable of visually or audibly notifying information to the passenger or the outside of the vehicle.
  • an audio speaker 12061, a display unit 12062, and an instrument panel 12063 are exemplified as output devices.
  • the display unit 12062 may include, for example, at least one of an onboard display and a head-up display.
  • FIG. 31 is a diagram showing an example of the installation position of the image pickup unit 12031.
  • the image pickup unit 12101, 12102, 12103, 12104, 12105 is provided.
  • the image pickup units 12101, 12102, 12103, 12104, 12105 are provided, for example, at positions such as the front nose, side mirrors, rear bumpers, back doors, and the upper part of the windshield in the vehicle interior of the vehicle 12100.
  • the image pickup unit 12101 provided in the front nose and the image pickup section 12105 provided in the upper part of the windshield in the vehicle interior mainly acquire an image in front of the vehicle 12100.
  • the image pickup units 12102 and 12103 provided in the side mirror mainly acquire images of the side of the vehicle 12100.
  • the image pickup unit 12104 provided in the rear bumper or the back door mainly acquires an image of the rear of the vehicle 12100.
  • the image pickup unit 12105 provided on the upper part of the windshield in the vehicle interior is mainly used for detecting a preceding vehicle, a pedestrian, an obstacle, a traffic light, a traffic sign, a lane, or the like.
  • FIG. 31 shows an example of the shooting range of the imaging units 12101 to 12104.
  • the imaging range 12111 indicates the imaging range of the imaging unit 12101 provided on the front nose
  • the imaging ranges 12112 and 12113 indicate the imaging range of the imaging units 12102 and 12103 provided on the side mirrors, respectively
  • the imaging range 12114 indicates the imaging range.
  • the imaging range of the imaging unit 12104 provided on the rear bumper or the back door is shown. For example, by superimposing the image data captured by the imaging units 12101 to 12104, a bird's-eye view image of the vehicle 12100 can be obtained.
  • At least one of the image pickup units 12101 to 12104 may have a function of acquiring distance information.
  • at least one of the image pickup units 12101 to 12104 may be a stereo camera including a plurality of image pickup elements, or may be an image pickup element having pixels for phase difference detection.
  • the microcomputer 12051 has a distance to each three-dimensional object in the image pickup range 12111 to 12114 based on the distance information obtained from the image pickup unit 12101 to 12104, and a temporal change of this distance (relative speed with respect to the vehicle 12100). By obtaining can. Further, the microcomputer 12051 can set an inter-vehicle distance to be secured in advance in front of the preceding vehicle, and can perform automatic brake control (including follow-up stop control), automatic acceleration control (including follow-up start control), and the like. In this way, it is possible to perform coordinated control for the purpose of automatic driving or the like that autonomously travels without relying on the driver's operation.
  • automatic brake control including follow-up stop control
  • automatic acceleration control including follow-up start control
  • the microcomputer 12051 converts three-dimensional object data related to a three-dimensional object into two-wheeled vehicles, ordinary vehicles, large vehicles, pedestrians, electric poles, and other three-dimensional objects based on the distance information obtained from the image pickup units 12101 to 12104. It can be classified and extracted and used for automatic avoidance of obstacles. For example, the microcomputer 12051 distinguishes obstacles around the vehicle 12100 into obstacles that are visible to the driver of the vehicle 12100 and obstacles that are difficult to see. Then, the microcomputer 12051 determines the collision risk indicating the risk of collision with each obstacle, and when the collision risk is equal to or higher than the set value and there is a possibility of collision, the microcomputer 12051 via the audio speaker 12061 or the display unit 12062. By outputting an alarm to the driver and performing forced deceleration and avoidance steering via the drive system control unit 12010, driving support for collision avoidance can be provided.
  • At least one of the image pickup units 12101 to 12104 may be an infrared camera that detects infrared rays.
  • the microcomputer 12051 can recognize a pedestrian by determining whether or not a pedestrian is present in the captured image of the imaging unit 12101 to 12104.
  • recognition of a pedestrian is, for example, a procedure for extracting feature points in an image captured by an image pickup unit 12101 to 12104 as an infrared camera, and pattern matching processing is performed on a series of feature points indicating the outline of an object to determine whether or not the pedestrian is a pedestrian. It is done by the procedure to determine.
  • the audio image output unit 12052 determines the square contour line for emphasizing the recognized pedestrian.
  • the display unit 12062 is controlled so as to superimpose and display. Further, the audio image output unit 12052 may control the display unit 12062 so as to display an icon or the like indicating a pedestrian at a desired position.
  • the above is an example of a vehicle control system to which the technique according to the present disclosure can be applied.
  • the technique according to the present disclosure can be applied to, for example, the image pickup unit 12031 among the configurations described above.
  • the image pickup apparatus 100 of FIG. 1 can be applied to the image pickup unit 12031.
  • dark current noise can be reduced and a photographed image that is easier to see can be obtained, so that driver fatigue can be reduced.
  • the present technology can have the following configurations.
  • An analog-to-digital converter that converts an analog signal from each of a predetermined number of light-shielding pixels and a predetermined number of non-light-shielded effective pixels into a digital signal based on a predetermined lamp signal.
  • the analog that starts the correction of the lamp signal based on the analog clamp value according to the statistics of the digital signal of the predetermined number of light-shielding pixels.
  • the analog-to-digital converter includes a comparator that compares the lamp signal with the analog signal.
  • the comparator is A differential amplifier circuit that amplifies the difference between the predetermined reference voltage and the voltage of the predetermined node, The vertical signal line side capacitance inserted between the predetermined node and the vertical signal line transmitting the analog signal, The lamp-side capacitance inserted between the predetermined node and the analog clamp circuit, The solid-state image sensor according to (2) above, comprising a switch that changes the ratio of the vertical signal line side capacitance to the lamp side capacitance to any of a predetermined number of capacitance ratios.
  • the analog clamp circuit is An analog clamp value calculation unit that calculates the analog clamp value from the statistic, A capacity ratio correction unit that corrects the analog clamp value based on the capacity ratio and supplies it as a correction analog clamp value for each capacity ratio.
  • a digital-to-analog converter that converts the selected corrected analog clamp value into an analog signal The solid-state image sensor according to (3) above, comprising a subtractor for obtaining a difference between the analog signal and the lamp signal from the digital-to-analog converter. (5) The solid-state image sensor according to any one of (1) to (4), wherein the analog clamp circuit calculates the analog clamp value from the statistic and the analog gain of the analog-digital converter.
  • the digital clamp circuit is A moving average filter that obtains the moving average of the difference as the digital clamp value based on a predetermined filter coefficient
  • the solid according to any one of (1) to (4) above, comprising a filter speed control unit that controls the filter coefficient based on whether or not the analog gain has changed and whether or not the analog clamp value has changed.
  • Image sensor (7) An analog-to-digital converter that converts an analog signal from each of a predetermined number of light-shielding pixels and a predetermined number of non-light-shielded effective pixels into a digital signal based on a predetermined lamp signal.
  • a sensing device including a signal processing circuit for processing the corrected digital signal.
  • An analog-to-digital conversion procedure for converting an analog signal from each of a predetermined number of light-shielding pixels and a predetermined number of non-light-shielded effective pixels into a digital signal based on a predetermined lamp signal.
  • the analog that starts the correction of the lamp signal based on the analog clamp value according to the statistics of the digital signal of the predetermined number of light-shielding pixels.
  • Clamping procedure and The correction of the digital signal of the effective pixel is performed at the timing based on the digital clamp value according to the difference between the correction amount of the lamp signal by the analog clamping procedure and the statistic of the digital signal of the predetermined number of light-shielding pixels.
  • a method of controlling a solid-state imaging device comprising a digital clamping procedure to initiate.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

クランプ回路を設けた固体撮像素子において、画像データの画質を向上させる。 アナログデジタル変換器は、所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換する。アナログクランプ回路は、所定数の遮光画素の全てのアナログ信号の変換が完了したタイミングで所定数の遮光画素のデジタル信号の統計量に応じたアナログクランプ値に基づいてランプ信号の補正を開始する。デジタルクランプ回路は、アナログクランプ回路によるランプ信号の補正量と所定数の遮光画素のデジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて有効画素のデジタル信号の補正を、そのタイミングで開始する。

Description

固体撮像素子、センシング装置、および、固体撮像素子の制御方法
 本技術は、固体撮像素子に関する。詳しくは、カラム毎にアナログデジタル変換を行う固体撮像素子、センシング装置、および、固体撮像素子の制御方法に関する。
 従来より、OPB(OPtical Black)領域の検波値を用いて信号を補正するクランプ回路が、暗電流ノイズを除去する目的で利用されている。例えば、アナログ信号に対して補正を行うアナログクランプ回路と、デジタル信号に対して補正を行うデジタルクランプ回路とが1つのOPB領域を共用する固体撮像素子が提案されている(例えば、特許文献1参照。)。この固体撮像素子では、OPB領域の検波が完了したタイミングでデジタルクランプ回路による補正が開始され、そのタイミングから1フレーム遅延してアナログクランプ回路による補正が開始される。
特開平5-292530号公報
 上述の従来技術では、アナログクランプ回路とデジタルクランプ回路とでOPB領域を共用することにより、それらの回路のために別々にOPB領域を設ける場合と比較してチップ面積やコストの削減を図っている。しかしながら、アナログクランプ回路とデジタルクランプ回路とで補正を開始するタイミングが異なるために、暗電流ノイズを除去しきれず、画像データの画質が低下するという問題がある。
 本技術はこのような状況に鑑みて生み出されたものであり、クランプ回路を設けた固体撮像素子において、画像データの画質を向上させることを目的とする。
 本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、上記所定数の遮光画素の全ての上記アナログ信号の変換が完了したタイミングで上記所定数の遮光画素の上記デジタル信号の統計量に応じたアナログクランプ値に基づいて上記ランプ信号の補正を開始するアナログクランプ回路と、アナログクランプ回路による上記ランプ信号の補正量と上記所定数の遮光画素の上記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて上記有効画素の上記デジタル信号の補正を上記タイミングで開始するデジタルクランプ回路とを具備する固体撮像素子、および、その制御方法である。これにより、画質が向上するという作用をもたらす。
 また、この第1の側面において、上記アナログデジタル変換器は、上記ランプ信号と上記アナログ信号とを比較するコンパレータを含んでもよい。これにより、コンパレータの比較結果からデジタル信号が生成されるという作用をもたらす。
 また、この第1の側面において、上記コンパレータは、所定の基準電圧と所定ノードの電圧との差分を増幅する差動増幅回路と、上記所定ノードと上記アナログ信号を伝送する垂直信号線との間に挿入された垂直信号線側容量と、上記所定ノードと上記アナログクランプ回路との間に挿入されたランプ側容量と、上記垂直信号線側容量と上記ランプ側容量との比を所定数の容量比のいずれかに変更するスイッチとを備えてもよい。これにより、容量比が制御されるという作用をもたらす。
 また、この第1の側面において、上記アナログクランプ回路は、上記統計量から上記アナログクランプ値を算出するアナログクランプ値算出部と、上記容量比ごとに上記容量比に基づいて上記アナログクランプ値を補正して補正アナログクランプ値として供給する容量比補正部と、上記所定数の容量比のそれぞれに対応する上記補正アナログクランプ値のいずれかを選択する選択部と、上記選択された補正アナログクランプ値をアナログ信号に変換するデジタルアナログ変換器と、上記デジタルアナログ変換器からの上記アナログ信号と上記ランプ信号との差分を求める減算器とを備えてもよい。これにより、容量比が可変の際に画質が向上するという作用をもたらす。
 また、この第1の側面において、上記アナログクランプ回路は上記統計量と上記アナログデジタル変換器のアナログゲインとから上記アナログクランプ値を算出してもよい。これにより、アナログゲインに応じたアナログクランプ値が算出されるという作用をもたらす。
 また、この第1の側面において、上記デジタルクランプ回路は、所定のフィルタ係数に基づいて上記差分の移動平均を上記デジタルクランプ値として求める移動平均フィルタと、上記アナログゲインが変化したか否かと上記アナログクランプ値が変化したか否かに基づいて上記フィルタ係数を制御するフィルタ速度制御部とを備えてもよい。これにより、移動平均フィルタの追従速度が適切に制御されるという作用をもたらす。
 また、本技術の第2の側面は、所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、上記所定数の遮光画素の全ての上記アナログ信号の変換が完了したタイミングで上記所定数の遮光画素の上記デジタル信号の統計量に応じたアナログクランプ値に基づいて上記ランプ信号の補正を開始するアナログクランプ回路と、上記アナログクランプ回路による上記アナログ信号の補正量と上記所定数の遮光画素の上記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて上記有効画素の上記デジタル信号の補正を上記タイミングで開始するデジタルクランプ回路と、上記補正されたデジタル信号を処理する信号処理回路とを具備するセンシング装置である。これにより、センシング装置の撮像した画像の画質が向上するという作用をもたらす。
本技術の第1の実施の形態における撮像装置の一構成例を示すブロック図である。 本技術の第1の実施の形態における固体撮像素子の一構成例を示すブロック図である。 本技術の第1の実施の形態における画素アレイ部の一構成例を示す平面図である。 本技術の第1の実施の形態におけるカラム信号処理部の一構成例を示すブロック図である。 本技術の第1の実施の形態におけるアナログクランプ回路およびデジタルクランプ回路の一構成例を示すブロック図である。 本技術の第1の実施の形態におけるADC(Analog to Digital Converter)の一構成例を示すブロック図である。 本技術の第1の実施の形態における後段回路の一構成例を示すブロック図である。 本技術の第1の実施の形態におけるアナログクランプ値算出部の一構成例を示すブロック図である。 本技術の第1の実施の形態におけるチャタリング防止処理部の入出力の関係の一例を示すグラフである。 本技術の第1の実施の形態におけるアナログクランプ変化量減算部の一構成例を示すブロック図である。 本技術の第1の実施の形態におけるデジタルクランプ値算出部の一構成例を示すブロック図である。 本技術の第1の実施の形態における移動平均フィルタの周波数特性の一例を示すグラフである。 本技術の第1の実施の形態における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。 本技術の第1の実施の形態における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。 第1の比較例におけるアナログクランプ回路およびデジタルクランプ回路の一構成例を示すブロック図である。 第1の比較例における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。 第1の比較例における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。 本技術の第2の実施の形態におけるコンパレータの一構成例を示す回路図である。 本技術の第2の実施の形態におけるコードと容量比との関係の一例を示す図である。 本技術の第2の実施の形態におけるアナログクランプ回路の一構成例を示すブロック図である。 本技術の第2の実施の形態における容量比補正部およびコード選択部の一構成例を示す回路図である。 本技術の第2の実施の形態におけるアナログクランプ値算出部の一構成例を示すブロック図である。 本技術の第2の実施の形態における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。 本技術の第2の実施の形態における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。 本技術の第2の実施の形態における1回目および2回目の更新の際の容量比補正部およびコード選択部の状態の一例を示す図である。 本技術の第2の実施の形態における3回目および4回目の更新の際の容量比補正部およびコード選択部の状態の一例を示す図である。 本技術の第2の実施の形態における固体撮像素子のクランプ前後の信号レベルの変動一例を示すグラフである。 第2の比較例におけるアナログクランプ回路およびデジタルクランプ回路の一構成例を示すブロック図である。 第2の比較例における固体撮像素子のクランプ前後の信号レベルの変動の一例を示すグラフである。 車両制御システムの概略的な構成の一例を示すブロック図である。 車外情報検出部及び撮像部の設置位置の一例を示す説明図である。
 以下、本技術を実施するための形態(以下、実施の形態と称する)について説明する。説明は以下の順序により行う。
 1.第1の実施の形態(同じタイミングでアナログクランプおよびデジタルクランプを行う例)
 2.第2の実施の形態(容量比を可変にし、同じタイミングでアナログクランプおよびデジタルクランプを行う例)
 3.移動体への応用例
 <1.第1の実施の形態>
 [撮像装置の構成例]
 図1は、本技術の第1の実施の形態における撮像装置100の一構成例を示すブロック図である。この撮像装置100は、画像データ(フレーム)を撮像するための装置であり、光学部110、固体撮像素子200およびDSP(Digital Signal Processing)回路120を備える。さらに撮像装置100は、表示部130、操作部140、バス150、フレームメモリ160、記憶部170および電源部180を備える。撮像装置100としては、例えば、デジタルスチルカメラなどのデジタルカメラの他、撮像機能を持つスマートフォンやパーソナルコンピュータ、車載カメラ等が想定される。なお、撮像装置100は、特許請求の範囲に記載のセンシング装置の一例である。
 光学部110は、被写体からの光を集光して固体撮像素子200に導くものである。固体撮像素子200は、垂直同期信号に同期して、光電変換によりフレームを生成するものである。ここで、垂直同期信号は、撮像のタイミングを示す所定周波数の周期信号である。固体撮像素子200は、生成した画像データをDSP回路120に信号線209を介して供給する。
 DSP回路120は、固体撮像素子200からのフレームに対して所定の信号処理を実行するものである。このDSP回路120は、処理後のフレームをバス150を介してフレームメモリ160などに出力する。
 表示部130は、フレームを表示するものである。表示部130としては、例えば、液晶パネルや有機EL(Electro Luminescence)パネルが想定される。操作部140は、ユーザの操作に従って操作信号を生成するものである。
 バス150は、光学部110、固体撮像素子200、DSP回路120、表示部130、操作部140、フレームメモリ160、記憶部170および電源部180が互いにデータをやりとりするための共通の経路である。
 フレームメモリ160は、フレームを保持するものである。記憶部170は、フレームなどの様々なデータを記憶するものである。電源部180は、固体撮像素子200、DSP回路120や表示部130などに電源を供給するものである。
 [固体撮像素子の構成例]
 図2は、本技術の第1の実施の形態における固体撮像素子200の一構成例を示すブロック図である。この固体撮像素子200は、垂直走査部210、タイミング制御部220、および、DAC(Digital to Analog Converter)230を備える。また、固体撮像素子200は、画素アレイ部240、カラム信号処理部250、水平走査部260、および、画像信号処理部270をさらに備える。
 また、画素アレイ部240には、複数の画素が二次元格子状に配列される。以下、所定の水平方向に配列された画素の集合を「行」と称し、水平方向に垂直な方向に配列された画素の集合を「列」または「カラム」と称する。
 垂直走査部210は、行を順に選択して駆動し、アナログの画素信号をカラム信号処理部250に出力させるものである。
 タイミング制御部220は、垂直同期信号XVSに同期して垂直走査部210、DAC230、カラム信号処理部250および水平走査部260のそれぞれの動作タイミングを制御するものである。
 DAC230は、DA(Digital to Analog)変換により参照信号を生成して、カラム信号処理部250に供給するものである。参照信号として、例えば、P相およびD相の変換の際にレベルが徐々に低下するランプ信号が用いられる。ここで、P相は、画素内の浮遊拡散層を初期化したときの画素信号のレベルであり、D相は、画素内の浮遊拡散層に電荷が転送されたときの画素信号のレベルである。
 カラム信号処理部250は、参照信号を用いて、列ごとに、画素信号に対してAD(Analog to Digital)変換処理、CDS(Correlated Double Sampling)処理や、暗電流補正などの各種の信号処理を行うものである。このカラム信号処理部250は、処理後のデジタル信号を画像信号処理部270に供給する。
 水平走査部260は、カラム信号処理部250を制御して、デジタル信号を順に出力させるものである。
 画像信号処理部270は、デジタル信号を配列したフレームに対して所定の画像処理を行うものである。画像信号処理部270は、処理後のフレームをDSP回路120へ供給する。
 図3は、本技術の第1の実施の形態における画素アレイ部240の一構成例を示す平面図である。画素アレイ部240には、VOPB(Vertical OPtical Black)領域241と、可視光領域245とが設けられる。
 可視光領域245には、複数の有効画素246が二次元格子状に配列される。有効画素246は、遮光されていない画素である。有効画素246のそれぞれは、カラーフィルターを介して、例えば、R(Red)、G(Green)およびB(Blue)のいずれかの色の可視光を受光して光電変換し、画素信号を生成する。これらのR、GおよびBの有効画素246は、例えば、ベイヤー配列により配列される。
 VOPB(Vertical OPtical Black)領域241には、遮光された複数の遮光画素242が二次元格子状に配列される。また、VOPB領域241には、Rの有効画素246と同じ回路構成の遮光画素242と、Gの有効画素246と同じ回路構成の遮光画素242と、Bの有効画素246と同じ回路構成の遮光画素242とが配置される。
 なお、画素アレイ部240に、R、GおよびBの画素(有効画素246など)を配置しているが、色の組合せは、R、GおよびBに構成に限定されない。例えば、R、G、BおよびW(White)の画素を配置することもできる。
 VOPB領域241は、後述するアナログクランプ回路およびデジタルクランプ回路の両方で用いられる。
 [カラム信号処理部の構成例]
 図4は、本技術の第1の実施の形態におけるカラム信号処理部250の一構成例を示すブロック図である。このカラム信号処理部250には、列ごとに、カラム回路300が配列される。カラム回路300のそれぞれは、アナログクランプ回路310、ADC320、デジタルクランプ回路330、後段回路340およびラッチ回路302を備える。カラム回路300には、対応する列からのアナログの画素信号Ainが垂直信号線249を介して入力される。垂直信号線249は、画素信号Ainを伝送する信号線であり、画素アレイ部240において列ごとに配線される。
 また、カラム回路300内の回路のそれぞれは、水平同期信号に同期して、対応する列からの画素信号のそれぞれを順に処理する。この水平同期信号は、垂直同期信号よりも周波数の高い周期信号である。
 アナログクランプ回路310は、遮光画素242のそれぞれのデジタル信号に基づいて、DAC230からのランプ信号RMPを補正するものである。このアナログクランプ回路310は、補正後のランプ信号RMP'をADC320に供給する。
 ADC320は、画素アレイ部240からの画素信号(アナログ信号)をデジタル信号Doutに変換するものである。このADC320は、デジタル信号Doutをアナログクランプ回路310およびデジタルクランプ回路330に供給する。なお、ADC320は、特許請求の範囲に記載のアナログデジタル変換器の一例である。
 デジタルクランプ回路330は、遮光画素242のそれぞれのデジタル信号Doutに基づいて、有効画素246のデジタル信号Doutを補正するものである。このデジタルクランプ回路330は、補正後のデジタル信号Dout'を後段回路340を介してラッチ回路302に供給する。後段回路340において、必要に応じて各種の処理が行われる。
 ラッチ回路302は、後段回路340からのデジタル信号を保持するものである。このラッチ回路302は、水平走査部260の制御に従ってデジタル信号を画像信号処理部270に供給する。
 [クランプ回路の構成例]
 図5は、本技術の第1の実施の形態におけるアナログクランプ回路310およびデジタルクランプ回路330の一構成例を示すブロック図である。アナログクランプ回路310は、VOPB検波部311、アナログクランプ値算出部350、タイミング調整部312、DAC313および減算器314を備える。また、デジタルクランプ回路330は、VOPB検波部331、アナログクランプ変化量減算部360、デジタルクランプ値算出部370および減算器332を備える。
 VOPB検波部311は、全ての遮光画素242のデジタル信号Doutの統計量(平均など)をVOPB検波値として算出するものである。このVOPB検波部311は、算出したVOPB検波値をアナログクランプ値算出部350に供給する。
 アナログクランプ値算出部350は、VOPB検波部311によるVOPB検波値からアナログクランプ値を算出するものである。このアナログクランプ値算出部350は、算出したアナログクランプ値を示すDACコードをタイミング調整部312に供給する。また、アナログクランプ値算出部350は、アナログクランプ回路310によるランプ信号の補正量を求めるためのパラメータをアナログクランプ変化量として算出し、アナログクランプ変化量減算部360に供給する。また、アナログクランプ値算出部350は、垂直同期信号の周期内でアナログクランプ値が変化したか否かを判断し、その判断結果を示すアナログクランプ変化フラグをデジタルクランプ値算出部370に供給する。
 タイミング調整部312は、タイミング制御部220からの領域境界パルスに同期してDACコードをDAC313に供給するものである。この領域境界パルスは、VOPB領域241の全画素の画素信号のAD変換が完了したタイミングを示す信号である。
 DAC313は、タイミング調整部312からのDACコードをアナログ信号に変換するものである。DAC313は、そのアナログ信号を減算器314に供給する。なお、DAC313は、特許請求の範囲に記載のデジタルアナログ変換器の一例である。
 減算器314は、有効画素242のP相変換の際にDAC230からのランプ信号RMPから、DAC313により生成されたアナログ信号を減算するものである。P相変換に対応するランプ信号の補正により、CDS処理後の画素信号が補正される。この減算器314は、減算後のアナログ信号をランプ信号RMP'としてADC320に供給する。
 デジタルクランプ回路330において、VOPB検波部311は、R、G、およびBなどの色ごとに、遮光画素242のデジタル信号Doutの統計量をVOPB検波値として算出するものである。例えば、Rの画素とGの画素とが配列される列では、RのVOPB検波値とGのVOPB検波値とが用いられる。VOPB検波部311は、算出したVOPB検波値のそれぞれをアナログクランプ変化量減算部360に供給する。
 アナログクランプ変化量減算部360は、アナログクランプ変化量からアナログクランプ回路310によるランプ信号の補正量を求め、その補正量とVOPB検波値との差分を求めるものである。このアナログクランプ変化量減算部360は、求めた差分をデジタルクランプ値算出部370に供給する。
 デジタルクランプ値算出部370は、移動平均フィルタを用いて、アナログクランプ変化量減算部360により演算された差分からデジタルクランプ値を算出するものである。このデジタルクランプ値算出部370は、算出したデジタルクランプ値を減算器332に供給する。また、デジタルクランプ値算出部370には、アナログクランプ値算出部350からのアナログクランプ変化フラグと、タイミング制御部220からのアナログゲイン変化フラグとが入力される。アナログゲイン変化フラグは、ADC320のアナログゲインが変化したか否かを示す。デジタルクランプ値算出部370は、これらのフラグに基づいて移動平均フィルタのフィルタ係数を制御する。
 減算器332は、有効画素246のデジタル信号Doutから、デジタルクランプ値を減算するものである。Rの画素とGの画素とが配列される列では、Rのデジタル信号DoutからRのデジタルクランプ値が減算され、Gのデジタル信号DoutからGのデジタルクランプ値が減算される。減算器332は、減算後のデジタル信号をDout'として後段回路340に供給する。
 上述の構成により、アナログクランプ回路310は、全ての遮光画素242の画素信号のAD変換が完了したタイミング(すなわち、領域境界パルスの示すタイミング)で、ランプ信号の補正を開始する。この補正において、アナログクランプ回路310は、全ての遮光画素242のデジタル信号Doutの統計量(VOPB検波値)を用いる。ランプ信号の補正により、可視光領域245のCDS処理後の画素信号のダークレベルは、VOPB検波値に応じた値にクランプ(言い換えれば、アナログクランプ)される。
 また、デジタルクランプ回路330は、アナログクランプ回路310によるランプ信号の補正量と、RやGなどのデジタル信号の統計量(VOPB検波値)との差分に応じたデジタルクランプ値を求める。そして、デジタルクランプ回路330は、そのデジタルクランプ値に基づいて、アナログクランプ回路310と略同一のタイミングでデジタル信号Doutの補正を開始する。色毎の補正により、補正後の可視光領域245のデジタル信号Dout'のダークレベルは、色毎に適切な値にクランプ(言い換えれば、デジタルクランプ)される。
 また、アナログクランプでVOPB領域241の全画素について検波値を求め、デジタルクランプで色毎の検波値を求めているが、アナログクランプで粗く検波し、デジタルクランプで細かく検波することができるのであれば、上述の構成に限定されない。例えば、露光時間の異なる複数の画像データを合成する際に、アナログクランプで露光時間に関わらず検波し、デジタルクランプで露光時間ごとに検波することもできる。
 [ADCの構成例]
 図6は、本技術の第1の実施の形態におけるADC320の一構成例を示すブロック図である。このADC320は、コンパレータ400とカウンタ321とを備える。
 コンパレータ400は、アナログクランプ回路310からのランプ信号RMP'と、画素アレイ部240からの画素信号Ainとを比較し、比較結果をカウンタ321に出力するものである。このコンパレータ400は、例えば、容量401および402と、差動増幅回路430とを備える。差動増幅回路430は、容量401を介して入力されたランプ信号と、容量402を介して入力された画素信号との差分を増幅し、比較結果としてカウンタ321に出力する。なお、ADC320のアナログゲインは、例えば、ランプ信号RMPの傾きにより制御される。傾きが緩やかであるほど、ADC320のアナログゲインが高くなる。
 カウンタ321は、比較結果が反転するまでの期間に亘って、計数値を計数するものである。このカウンタ321は、計数値を示すデジタル信号Doutをデジタルクランプ回路330に供給する。
 同図に例示したように、コンパレータ400およびカウンタ321からなるADCは、シングルスロープ型のADCと呼ばれる。なお、ADC320は、アナログ信号をデジタル信号に変換することができるものであれば、シングルスロープ型に限定されない。例えば、SARADC(Successive Approximation Register ADC)をADC320として用いることもできる。
 [後段回路の構成例]
 図7は、本技術の第1の実施の形態における後段回路340の一構成例を示すブロック図である。この後段回路340は、加算器341および342と、トランケート処理部343とを備える。
 加算器341は、デジタルクランプ回路330からのデジタル信号Dout'に、微調整するためのペデスタルレベルを加算し、加算器342に供給するものである。
 加算器342は、加算器341からのデジタル信号に、小数点精度を出す目的で、所定のディザ信号を加算し、トランケート処理部343に供給するものである。
 トランケート処理部343は、加算器342からのデジタル信号に、所定の丸め(トランケート)処理を行うものである。このトランケート処理部343は、処理後のデジタル信号をラッチ回路302に供給する。
 [アナログクランプ値算出部の構成例]
 図8は、本技術の第1の実施の形態におけるアナログクランプ値算出部350の一構成例を示すブロック図である。このアナログクランプ値算出部350は、アナログゲイン割り戻し演算部351、チャタリング防止処理部352、加算器353、遅延部354およびアナログクランプ変化フラグ生成部355を備える。
 アナログゲイン割り戻し演算部351は、VOPB検波値をアナログゲインにより除算する演算を行うものである。このアナログゲイン割り戻し演算部351には、VOPB検波部311からのVOPB検波値aveが入力される。アナログゲイン割り戻し演算部351は、例えば、次の式により、AVEinを算出する。
  AVEin=ave×(VADC/Vclamp)×1/ANAGAIN
上式において、VADCは、ADC320の1LSB(Least Significant Bit)に対応する電圧値を示す。Vclampは、アナログクランプ回路310内のDACコードの1LSBに対応する電圧値を示す。これらの電圧値の単位は、例えば、マイクロボルト毎LSB(μV/LSB)である。ANAGAINは、ADC320のアナログゲインである。
 アナログゲイン割り戻し演算部351は、演算により求めたデジタル信号AVEinをチャタリング防止処理部352に供給する。
 チャタリング防止処理部352は、入力されたAVEinに対して、チャタリング防止のための処理を行うものである。このチャタリング防止処理部352は、処理後のデジタル信号AVEoutを、第n(nは、整数)フレームのアナログクランプ変化量[n]としてアナログクランプ変化量減算部360および加算器353に供給する。このアナログクランプ変化量[n]は、アナログクランプ回路310によるランプ信号の補正量を求めるために用いられる。
 加算器353は、アナログクランプ変化量[n]と、第n-1フレームのアナログクランプ値[n-1]とを加算するものである。加算結果は、現在フレーム(すなわち、第nフレーム)のアナログクランプ値[n]としてタイミング調整部312およびアナログクランプ変化フラグ生成部355に供給される。
 遅延部354は、第nフレームのアナログクランプ値[n]を垂直同期信号の周期分だけ遅延させ、第n-1フレームのアナログクランプ値[n-1]として加算器353およびアナログクランプ変化フラグ生成部355に供給するものである。
 アナログクランプ変化フラグ生成部355は、アナログクランプ値[n]とアナログクランプ値[n-1]との差分が「0」でないか否か(言い換えれば、アナログクランプ値が変化したか否か)を判断するものである。このアナログクランプ変化フラグ生成部355は、判断結果を示すフラグをアナログクランプ変化フラグとして生成し、デジタルクランプ値算出部370に供給する。
 図9は、本技術の第1の実施の形態におけるチャタリング防止処理部352の入出力の関係の一例を示すグラフである。同図における横軸は、チャタリング防止処理部352に入力されるデジタル信号AVEinを示す。同図における縦軸は、チャタリング防止処理部352から出力されるデジタル信号AVEоutを示す。
 デジタル信号AVEinが「0」から所定の上限までの範囲内である場合に、その上限のデジタル信号AVEоutが出力される。また、デジタル信号AVEinが、下限から「0」までの範囲内である場合に、その下限のデジタル信号AVEоutが出力される。デジタル信号AVEinが、上限より大きい場合、または、下限より小さい場合、デジタル信号AVEinがそのままデジタル信号AVEоutとして出力される。
 同図に例示するように、デジタル信号AVEоutが出力されない不感帯域が設定される。これにより、出力が微細に変動してしまうチャタリングを防止することができる。
 [アナログクランプ変化量減算部の構成例]
 図10は、本技術の第1の実施の形態におけるアナログクランプ変化量減算部360の一構成例を示すブロック図である。このアナログクランプ変化量減算部360は、黒レベル補正量変換部361、セレクタ362および減算器363を備える。
 黒レベル補正量変換部361は、アナログクランプ値算出部350からのアナログクランプ変化量[n]を、次の式により黒レベル補正量Aに変換するものである。ここで、黒レベル補正量Aは、アナログクランプ回路310による、ランプ信号の補正量を示す。
  A=(Vclamp/VADC)×ANAGAIN
 黒レベル補正量変換部361は、求めた黒レベル補正量Aを減算器363に供給する。
 セレクタ362は、タイミング制御部220からの選択信号SELに従って、VOPB検波部331からの複数のVOPB検波値のいずれかを選択するものである。選択されたVOPB検波値は、減算器363に供給される。
 例えば、ベイヤー配列においてRの画素と、Gの画素とが交互に配列される列においては、RのVOPB検波値ave_RとGのVOPB検波値ave_Gとが水平同期信号に同期して交互に選択される。
 減算器363は、選択されたVOPB検波値から、黒レベル補正量Aを減算するものである。減算器363は、減算結果を、予測後VOPB検波値AVE_R(または、AVE_G)としてデジタルクランプ値算出部370に供給する。
 [デジタルクランプ値算出部の構成例]
 図11は、本技術の第1の実施の形態におけるデジタルクランプ値算出部370の一構成例を示すブロック図である。このデジタルクランプ値算出部370は、移動平均フィルタ371およびフィルタ速度制御部377を備える。
 移動平均フィルタ371は、アナログクランプ変化量減算部360からの予測後VOPB検波値AVE_R(または、AVE_G)の移動平均を求め、第nフレームのデジタルクランプ値[n]として減算器332に出力するフィルタである。この移動平均フィルタ371は、加算器372、減算器373、乗算器374、遅延部375、および、乗算器376を備える。
 加算器372は、予測後VOPB検波値と、乗算器376の乗算結果とを加算し、加算結果を減算器373に供給するものである。
 減算器373は、加算器372の加算結果から、遅延部375の出力を減算し、減算結果を乗算器374に供給するものである。
 乗算器374は、αを所定フィルタ係数として、減算器373の減算結果に対して1/αを乗算するものである。この乗算結果は、デジタルクランプ値[n]として減算器332と遅延部375とに供給される。
 遅延部375は、デジタルクランプ値[n]を遅延させて、減算器373および乗算器376に供給するものである。
 乗算器376は、遅延部375の出力に対して、αを乗算し、乗算結果を加算器372に供給するものである。
 同図に例示した移動平均フィルタ371の伝達関数H(z)は、次の式により表される。
  H(z)=(1/α)/[1-{(α-1)/α}・Z-1
 フィルタ速度制御部377は、アナログクランプ変化量フラグと、アナログゲイン変化フラグとに基づいて、フィルタ係数αの値を制御するものである。アナログクランプ値が変化した場合、または、アナログゲインが変化した場合、フィルタ速度制御部377は、フィルタ係数αを所定値より小さな値(例えば、「1」)にして高速追従させる。一方、それらの変化がない場合にフィルタ速度制御部377は、フィルタ係数αを所定値より大きな値(例えば、「32」)にして低速追従させる。
 なお、移動平均フィルタ371の構成は、移動平均を求めることができるものであれば、同図に例示した構成に限定されない。
 図12は、本技術の第1の実施の形態における移動平均フィルタ371の周波数特性の一例を示すグラフである。同図は、フィルタ係数αに「32」が設定された際の特性を示す。同図におけるaの縦軸は、利得を示し、横軸は周波数を示す。同図におけるbの縦軸は、位相を示し、横軸は周波数を示す。
 同図に例示するように、フィルタ係数αが大きな値である場合、移動平均フィルタ371の追従は、比較的遅くなる。
 [固体撮像素子の動作例]
 図13は、本技術の第1の実施の形態における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。垂直同期信号XVSは、タイミングT1、T2、T3で立ち下る。タイミングT1からT2までの期間内に1枚目のフレームが撮像される。
 タイミングT1からT11までの期間内に、各列のADC320により、VOPB領域241内の複数の行が順にAD変換される。このタイミングT11で、VOPB領域241内の全画素のAD変換が完了する。タイミングT11の直後からは、可視光領域245内の複数の行が順にAD変換される。
 1枚目のフレームの撮像時では、ADC320のアナログゲインに「0」デシベル(dB)が設定されたものとする。このとき、暗電流のレベルは、「0.0」であるものとする。
 アナログクランプ値算出部350は、タイミングT11で、1枚目のアナログクランプ値として、「0」レベルに対応する初期値(例えば、「8.0」)が用いられる。2フレーム以降に「0」レベルより大きな正数にクランプする際には、「8.0」より大きなアナログクランプ値が設定され、「0」レベル未満の負数にクランプする際は「8.0」未満のアナログクランプ値が設定される。このアナログクランプ値は、タイミング調整部312により、タイミングT11の直後に、DACコードとしてDAC313に供給される。このDACコードにより、ランプ信号が補正される。
 また、アナログクランプ値算出部350により、アナログクランプ変化量として「0」が算出される。このアナログクランプ変化量に応じた補正量と、色毎のVOPB検波値とに基づいて、タイミングT11以降において、有効画素246のそれぞれのデジタル信号が補正される。
 また、1フレーム目のアナログクランプ値が変化していないため、移動平均フィルタ371のフィルタ係数に比較的大きな値が設定され、フィルタが低速追従する。
 次に、タイミングT2からT3までの期間内に2枚目のフレームが撮像される。タイミングT2からT21までの期間内に、各列のADC320により、VOPB領域241内の複数の行が順にAD変換される。タイミングT21の直後からは、可視光領域245内の複数の行が順にAD変換される。
 2枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。アナログゲインの変動などに起因して、暗電流のレベルは、「1.0」に上昇する。
 アナログクランプ値算出部350は、タイミングT21で、2枚目のアナログクランプ値として、前回値と異なる「9.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、タイミングT21の直後に、DACコードとしてDAC313に供給される。
 また、アナログクランプ値算出部350により、アナログクランプ変化量として「1」が算出される。
 また、2フレーム目のアナログクランプ値が前回値と異なり、また、アナログゲインが変化したため、移動平均フィルタ371のフィルタ係数に比較的小さな値が設定され、フィルタが高速追従する。
 図14は、本技術の第1の実施の形態における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。垂直同期信号XVSは、タイミングT3、T4、T5で立ち下る。タイミングT3からT4までの期間内に3枚目のフレームが撮像される。
 タイミングT3からT31までの期間内に、VOPB領域241内の複数の行が順にAD変換される。タイミングT31の直後からは、可視光領域245内の複数の行が順にAD変換される。
 3枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。暗電流のレベルは、「1.0」のままである。
 アナログクランプ値算出部350は、タイミングT31で、3枚目のアナログクランプ値として、前回値と同一の「9.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、タイミングT31の直後に、DACコードとしてDAC313に供給される。
 また、アナログクランプ値算出部350により、アナログクランプ変化量として「0」が算出される。
 3フレーム目のアナログクランプ値が前回値と同じであるため、移動平均フィルタ371のフィルタ係数に比較的大きな値が設定され、フィルタが低速追従する。
 次に、タイミングT4からT5までの期間内に4枚目のフレームが撮像される。タイミングT4からT41までの期間内に、各列のADC320により、VOPB領域241内の複数の行が順にAD変換される。タイミングT41の直後からは、可視光領域245内の複数の行が順にAD変換される。
 4枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。このとき、暗電流のレベルは、「0.0」に低下したものとする。
 アナログクランプ値算出部350は、タイミングT41で、4枚目のアナログクランプ値として、前回値と異なる「8.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、タイミングT41の直後に、DACコードとしてDAC313に供給される。
 また、アナログクランプ値算出部350により、アナログクランプ変化量として「-1」が算出される。
 4フレーム目のアナログクランプ値が前回値と異なるため、移動平均フィルタ371のフィルタ係数に比較的小さな値が設定され、フィルタが高速追従する。
 図13および図14に例示したように、DACコードは、VOPB領域241と可視光領域245との境界のタイミングで、垂直同期信号の周期ごとに、1回更新される。このタイミングでアナログクランプ回路310による補正が開始される。このとき、アナログクランプ回路310がアナログクランプ変化量を算出するため、後段のデジタルクランプ回路330は、その変化量から得られた補正量に基づいて、さらに精度が必要な残りの分をデジタルクランプ値として求めることができる。このため、デジタルクランプ回路330は、アナログクランプ回路310と略同一のタイミングでデジタル信号の補正を開始することができる。また、後述する比較例よりも高速追従の回数が減り、安定性を向上させることができる。
 ここで、アナログクランプ回路310が、アナログクランプ変化量をデジタルクランプ回路330に供給しない構成を第1の比較例として想定する。
 図15は、第1の比較例におけるアナログクランプ回路310およびデジタルクランプ回路330の一構成例を示すブロック図である。この第1の比較例のアナログクランプ回路310は、アナログクランプ変化量を算出しない。このため、デジタルクランプ回路330には、アナログクランプ変化量減算部360が配置されず、VOPB検波部331の検波値がそのままデジタルクランプ値に供給される。また、第1の比較例では、タイミング調整部312は、垂直同期信号XVSの立下りのタイミングでDACコードを更新する。DACコードの更新タイミングが異なる理由については後述する。
 図16は、第1の比較例における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。
 1枚目のフレームの撮像時では、ADC320のアナログゲインに「0」デシベル(dB)が設定されたものとする。
 アナログクランプ値算出部350は、タイミングT11で、1枚目のアナログクランプ値として、初期値「8.0」が用いられる。このアナログクランプ値は、タイミング調整部312により、垂直同期信号XVSが次に立ち下がるタイミングT2でDACコードとしてDAC313に供給される。
 タイミングT11の時点でアナログクランプ値が変化していないため、移動平均フィルタ371のフィルタ係数に比較的大きな値が設定され、フィルタが低速追従する。
 2枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。
 アナログクランプ値算出部350は、タイミングT21で、2枚目のアナログクランプ値として、前回値と異なる「9.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、垂直同期信号XVSが次に立ち下がるタイミングT3でDACコードとしてDAC313に供給される。
 タイミングT21の時点でアナログクランプ値が変化し、また、アナログゲインが変化したため、移動平均フィルタ371のフィルタ係数に比較的小さな値が設定され、フィルタが高速追従する。
 図17は、第1の比較例における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。
 3枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。
 アナログクランプ値算出部350は、タイミングT31で、3枚目のアナログクランプ値として、前回値と同一の「9.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、垂直同期信号XVSが次に立ち下がるタイミングT4でDACコードとしてDAC313に供給される。
 タイミングT31の時点でアナログクランプ値が変化しているため、移動平均フィルタ371のフィルタ係数に比較的小さな値が設定され、フィルタが高速追従する。
 4枚目のフレームの撮像時では、ADC320のアナログゲインに「24」デシベル(dB)が設定されたものとする。
 アナログクランプ値算出部350は、タイミングT41で、4枚目のアナログクランプ値として、前回値と異なる「8.0」を算出する。算出されたアナログクランプ値は、タイミング調整部312により、垂直同期信号XVSが次に立ち下がるタイミングT5でDACコードとしてDAC313に供給される。
 タイミングT41の時点でアナログクランプ値が変化していないため、移動平均フィルタ371のフィルタ係数に比較的大きな値が設定され、フィルタが低速追従する。
 図16および図17に例示したように、第1の比較例では、あるフレームで算出されたアナログクランプ値は次のフレームで、DACコードに反映される。
 第1の比較例では、デジタルクランプ回路330は、アナログクランプ回路310の補正量を把握していない。このため、仮に、アナログクランプ回路310が、アナログクランプ値を算出したタイミング(タイミングT11など)でランプ信号に対する補正を開始すると、デジタル信号に対する補正量が不適切な値になってしまう。
 例えば、アナログクランプ回路310の補正量が「8」で、その算出時点のある色のVOPB検波値が「9」であった場合を想定する。この場合、デジタルクランプ回路330で補正が必要な分は、それらの差分の「1」である。しかし、第1の比較例では、アナログクランプ変化量がデジタルクランプ回路330に供給されないために、差分の「1」を求めることができず、検波した「9」を用いて補正を行うと、過剰な補正となってしまう。これを避けるため、第1の比較例では、アナログクランプ値によるDACコードの更新を、次のフレームまで遅らせる必要がある。
 ただし、DACコードの更新を遅延させた場合、10秒や30秒などの長時間露光を行う際に暗電流が大きくなるにも関わらず、アナログクランプ値が即時に反映されないため、暗電流によるノイズが大きくなってしまう。この結果、画像データが黒浮きして画質が低下するおそれがある。
 なお、アナログクランプ回路310で用いるVOPB領域と、デジタルクランプ回路330で用いるVOPB領域との両方を設ければ、DACコードの更新を遅延させる必要が無くなる。しかし、固体撮像素子200のチップ面積やコストが大きくなるため、特にモバイル機器などでは、その構成を適用することが困難である。
 また、アナログクランプ回路310およびデジタルクランプ回路330の一方のみを設ける構成では、これらのタイミングの差が問題とならないが、アナログクランプ回路310のみでは、補正精度が低下するおそれがある。また、デジタルクランプ回路330のみでは、長時間露光時にダイナミックレンジが低下するおそれがある。
 第1の比較例と本技術の第1の実施の形態とのそれぞれの撮像画像に関して、前述したように第1の比較例では、DACコードの更新を1フレーム分だけ遅延させるため、暗電流によるノイズが大きくなり、画像データが黒浮きしてしまう。
 これに対して、第1の実施の形態では、DACコードの更新を遅延させず、アナログクランプ値が即時に反映される。このため、暗電流によるノイズが低減し、画像データの画質が向上する。
 このように、本技術の第1の実施の形態では、アナログクランプ回路310の補正量に基づいてデジタルクランプ回路330が、アナログクランプ回路310と略同一のタイミングで補正を行うため、暗電流ノイズを十分に低減することができる。これにより、アナログクランプ回路310の補正が遅延する場合と比較して、画像データの画質を向上させることができる。
 <2.第2の実施の形態>
 上述の第1の実施の形態では、コンパレータ400のランプ側の容量401と、垂直信号線側の容量との比率を固定としていたが、これらの容量比を可変にすることもできる。この第2の実施の形態のコンパレータ400は、容量比が可変である点において第1の実施の形態と異なる。
 図18は、本技術の第2の実施の形態におけるコンパレータ400の一構成例を示す回路図である。第2の実施の形態のコンパレータ400には、容量比切替回路410と差動増幅回路430とが配置される。容量比切替回路410は、スイッチ411乃至415などの所定数のスイッチと、容量416乃至421などの複数の容量とを備える。
 容量416乃至421の一端は、ノード422に共通に接続される。容量416の他端は、画素アレイ部240に接続され、容量421の他端は、アナログクランプ回路310と接続される。
 スイッチ411は、制御コードであるCAZCODEに従って容量416の他端と、容量417の他端との間の経路を開閉するものである。スイッチ412は、CAZCODEに従って容量417の他端と、容量418の他端との間の経路を開閉するものである。スイッチ413は、CAZCODEに従って容量418の他端と、容量419の他端との間の経路を開閉するものである。スイッチ414は、CAZCODEに従って容量419の他端と、容量420の他端との間の経路を開閉するものである。スイッチ415は、CAZCODEに従って容量420の他端と、容量421の他端との間の経路を開閉するものである。
 タイミング制御部220は、スイッチ411乃至415のいずれかのみを開状態にし、残りを閉状態に制御する。この制御により、垂直信号線側の合成容量と、ランプ信号側の合成容量との容量比が変更される。以下、前者を「VSL側容量」と称し、後者を「ランプ側容量」と称する。同図において、タイミング制御部220は、5つのスイッチの制御により容量比を5段階に切り替えることができる。第2の実施の形態において、ADC320のアナログゲインは、容量比とランプ信号の傾きとにより、制御される。また、第2の実施の形態では、P相やD相の変換の際に徐々にレベルが上昇する信号がランプ信号として入力され、アナログクランプ回路310は、D相変換の際にランプ信号の補正を行う。D相変換に対応するランプ信号の補正により、CDS処理後の画素信号が補正される。
 なお、容量比を5段階としているが、タイミング制御部220は、5段階以外の複数の段階に容量比を切り替えることもできる。段階数をM(Mは、整数)とすると、M個のスイッチとM+1個の容量とが容量比切替回路410に配置される。容量416乃至421のそれぞれの容量値は、任意の値に設定することができる。
 容量440は、所定の基準電圧VSHを保持するものである。
 差動増幅回路430は、ノード422の電圧と、基準電圧VSHとの差分を増幅するものである。この差動増幅回路430は、pMOSトランジスタ431および432と、オートゼロスイッチ436および437と、nMOSトランジスタ433乃至435とを備える。
 pMOSトランジスタ431および432は、電源に並列に接続される。pMOSトランジスタ431のゲートは、自身のドレインとpMOSトランジスタ432のゲートとに接続される。
 nMOSトランジスタ433のドレインは、pMOSトランジスタ431に接続され、ソースは、コモンノードに接続される。また、nMOSトランジスタ433のゲートは、ノード422に接続される。nMOSトランジスタ434のドレインは、pMOSトランジスタ432に接続され、ソースは、コモンノードに接続される。また、nMOSトランジスタ434のゲートは、容量440に接続される。
 nMOSトランジスタ435は、コモンノードと接地端子との間に挿入され、ゲートには、所定のバイアス電圧Vbiasが入力される。
 オートゼロスイッチ436は、タイミング制御部220からのオートゼロ信号AZに従ってnMOSトランジスタ433のドレインおよびゲートの間を短絡するものである。オートゼロスイッチ437は、オートゼロ信号AZに従ってnMOSトランジスタ434のドレインおよびゲートの間を短絡するものである。
 また、pMOSトランジスタ432およびnMOSトランジスタ434の接続点からは、比較結果CMPがカウンタ321へ出力される。
 図19は、本技術の第2の実施の形態におけるコードと容量比との関係の一例を示す図である。CAZCODEが「0」の場合に、VSL側容量であるC_VSLとランプ側容量であるC_RMPとの容量比は、R0(例えば、「1」)に設定される。CAZCODEが「1」の場合に、容量比は、R1(例えば、「3/2」)に設定され、CAZCODEが「2」の場合に、容量比は、R2(例えば、「7/3」)に設定される。CAZCODEが「3」の場合に、容量比は、R3(例えば、「4」)に設定され、CAZCODEが「4」の場合に、容量比は、R4(例えば、「9」)に設定される。
 図20は、本技術の第2の実施の形態におけるアナログクランプ回路310の一構成例を示すブロック図である。この第2の実施の形態のアナログクランプ回路310は、容量比補正部380およびコード選択部390をさらに備える点において第1の実施の形態と異なる。
 容量比補正部380は、容量比ごとに、その容量比に基づいてアナログクランプ値を補正し、補正アナログクランプ値としてコード選択部390に供給するものである。容量比が、5段階に切り替えられる場合、5個の補正アナログクランプ値がコード選択部390に供給される。
 コード選択部390は、複数の補正アナログクランプ値のうち、現在のCAZCODEに対応する値を選択し、タイミング調整部312およびアナログクランプ値算出部350に供給するものである。なお、コード選択部390は、特許請求の範囲に記載の選択部の一例である。
 また、第2の実施の形態のタイミング調整部312は、領域パルスのタイミングに加え、垂直同期信号XVSの示すタイミングにおいても、DACコードを供給する。
 図21は、本技術の第2の実施の形態における容量比補正部380およびコード選択部390の一構成例を示す回路図である。容量比補正部380は、乗算器381乃至385と、演算結果保持部386とを備える。コード選択部390は、セレクタ391を備える。
 乗算器381は、アナログクランプ値算出部350からのアナログクランプ値[n]に、容量比R0を乗算するものである。乗算器382は、アナログクランプ値[n]に、容量比R1を乗算するものである。乗算器383は、アナログクランプ値[n]に、容量比R2を乗算するものである。乗算器384は、アナログクランプ値[n]に、容量比R3を乗算するものである。乗算器385は、アナログクランプ値[n]に、容量比R4を乗算するものである。これらの乗算結果は、補正アナログクランプ値として演算結果保持部386に保持され、保持値は、セレクタ391に供給される。
 セレクタ391は、乗算器381乃至385のそれぞれの乗算結果(補正アナログクランプ値)のいずれかをCAZCODEに従って選択し、タイミング調整部312に供給するものである。
 アナログクランプ値が算出された時点では、次のフレームの容量比が未定であるため、同図に例示するように、容量比補正部380は、全ての容量比について補正アナログクランプ値を事前に計算している。
 タイミング制御部220は、垂直同期信号XVSの示すタイミングで容量比を決定し、その容量比に対応するCAZCODEをセレクタ391に供給して補正アナログクランプ値を選択させる。
 図22は、本技術の第2の実施の形態におけるアナログクランプ値算出部350の一構成例を示すブロック図である。この第2の実施の形態のアナログクランプ値算出部350は、遅延部356、減算器357および割り戻し処理部358をさらに備える点において第1の実施の形態と異なる。
 遅延部356は、コード選択部390からのDACコード[n]を、VOPB領域241の読出しに要する時間の分、遅延させるものである。遅延したコードは、DACコード[n-1]として減算器357に供給される。
 減算器357は、DACコード[n]と、DACコード[n-1]との差分を求め、割り戻し処理部358に供給するものである。
 割り戻し処理部358は、CAZCODEに対応する容量比により、減算器357の減算結果を除算するものである。除算結果は、アナログクランプ変化量[n]としてアナログクランプ変化量減算部360に供給される。
 例えば、アナログクランプ値[n]が「9」で、コード選択部390により、容量比が「9」のときの補正アナログクランプ値[n]である「81」が選択されたものとする。DACコード[n-1]が「72」であった場合、減算結果は、「9」である。この減算結果は、容量比の「9」により割り戻され、アナログクランプ変化量[n]として「1」が出力される。
 また、第2の実施の形態のアナログゲイン割り戻し演算部351は、AVEinを算出する。
Figure JPOXMLDOC01-appb-M000001
上式において、VDACは、DAC313の1LSBに対応する電圧値であり、単位は、例えば、マイクロボルト毎LSB(μV/LSB)である。
 図23は、本技術の第2の実施の形態における固体撮像素子の1フレーム目および2フレーム目の撮像動作の一例を示すタイミングチャートである。
 タイミングT1で、コンパレータ400において、「1」の容量比が設定されたものとする。アナログクランプ値算出部350は、タイミングT11で、1枚目のアナログクランプ値として、「8.0」を算出する。タイミング調整部312は、タイミングT11の直後に、その「8.0」に容量比の「1」を乗算した「8」によりDACコードを更新する。
 また、アナログクランプ値算出部350は、タイミングT11でDACコードの前回値および今回値の差分である「0」を容量比「1」により割り戻し、アナログクランプ変化量として「0」を出力する。
 次にタイミングT2で「9」の容量比が設定されたものとする。タイミング調整部312は、この時点のアナログクランプ値に、その容量比の「9」を乗算した「72」により、DACコードを更新する。
 そして、アナログクランプ値算出部350は、タイミングT21で、2枚目のアナログクランプ値として、「9.0」を算出する。タイミング調整部312は、タイミングT21の直後に、算出された「9.0」に容量比の「9」を乗算した「81」によりDACコードを更新する。
 また、アナログクランプ値算出部350は、タイミングT21でDACコードの前回値および今回値の差分である「9」を容量比「9」により割り戻し、アナログクランプ変化量として「1」を出力する。
 図24は、本技術の第2の実施の形態における固体撮像素子の3フレーム目および4フレーム目の撮像動作の一例を示すタイミングチャートである。
 タイミングT3で、コンパレータ400において、「4」の容量比が設定されたものとする。タイミング調整部312は、この時点のアナログクランプ値に、その容量比の「4」を乗算した「36」により、DACコードを更新する。
 そして、アナログクランプ値算出部350は、タイミングT31で、3枚目のアナログクランプ値として、「9.0」を算出する。タイミング調整部312は、タイミングT31の直後に、算出された「9.0」に容量比の「4」を乗算した「36」によりDACコードを更新する。
 また、アナログクランプ値算出部350は、タイミングT31でDACコードの前回値および今回値の差分である「0」を容量比「4」により割り戻し、アナログクランプ変化量として「0」を出力する。
 次にタイミングT4で「4」の容量比が設定されたものとする。タイミング調整部312は、この時点のアナログクランプ値に、その容量比の「4」を乗算した「36」により、DACコードを更新する。
 そして、アナログクランプ値算出部350は、タイミングT41で、4枚目のアナログクランプ値として、「8.0」を算出する。タイミング調整部312は、タイミングT41の直後に、算出された「8.0」に容量比の「4」を乗算した「32」によりDACコードを更新する。
 また、アナログクランプ値算出部350は、タイミングT41でDACコードの前回値および今回値の差分である「4」を容量比「4」により割り戻し、アナログクランプ変化量として「1」を出力する。
 図23および図24に例示したように、アナログクランプ値は、境界パルスのタイミングで更新されるが、容量比は、垂直同期信号の示すタイミングで更新される。DACコードの演算には、アナログクランプ値および容量比の両方が用いられるため、DACコードは、1フレームの期間内に、アナログクランプ値および容量比のそれぞれの更新タイミングで2回更新する必要がある。
 図25は、本技術の第2の実施の形態における1回目および2回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。同図におけるaは、固体撮像素子の撮像動作の一例を示すタイミングチャートである。同図におけるbは、DACコードの1回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。同図におけるcは、DACコードの2回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。
 同図におけるaに例示するように、境界パルスのタイミングT11でDACコードが更新され、次に垂直同期信号XVSのタイミングT2でDACコードが更新される。
 タイミングT11の前に容量比補正部380は、容量比の全てについて、アナログクランプ値に容量比を乗算した値を補正アナログクランプ値として、予め求めておく。例えば、アナログクランプ値が「8」で、容量比が「1」、「1.5」、「2.3」、「4」および「9」のいずれかに切り替えられる場合、「8」、「12」、「18.6」、「32」および「72」が演算される。
 そして、タイミングT11でコード選択部390内のセレクタ391は、容量比の「1」に対応する「8」を選択する。
 また、タイミング2において、セレクタ391は、切り替え後の容量比である「9」に対応する「72」を選択する。
 図26は、本技術の第2の実施の形態における3回目および4回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。同図におけるaは、固体撮像素子の撮像動作の一例を示すタイミングチャートである。同図におけるbは、DACコードの3回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。同図におけるcは、DACコードの4回目の更新の際の容量比補正部380およびコード選択部390の状態の一例を示す図である。
 タイミングT21の前に容量比補正部380は、容量比の全てについて、アナログクランプ値に容量比を乗算した値を補正アナログクランプ値として、予め求めておく。例えば、アナログクランプ値が「9」の場合、「9」、「13.5」、「20.7」、「36」および「81」が演算される。
 そして、タイミングT21でコード選択部390内のセレクタ391は、容量比の「9」に対応する「81」を選択する。
 また、タイミング3において、セレクタ391は、切り替え後の容量比である「4」に対応する「36」を選択する。
 図27は、本技術の第2の実施の形態における固体撮像素子のクランプ前後の信号レベルの変動一例を示すグラフである。同図におけるaは、あるダーク画像内の画素信号のアナログクランプ前後の信号レベルの変動の一例を示す。同図におけるbは、あるダーク画像内の画素信号のデジタルクランプ前後との信号レベルの変動の一例を示す。なお、同図におけるbの縦軸のスケールは、同図におけるaよりも小さいものとする。
 同図におけるaの縦軸は、画素信号の信号レベルを示し、横軸は、時間を示す。一点鎖線は、アナログクランプ前の信号レベルの軌跡を示し、実線は、アナログクランプ後の信号レベルの軌跡を示す。
 同図におけるbの縦軸は、画素信号の信号レベルを示し、横軸は、時間を示す。実線は、アナログクランプ後、かつ、デジタルクランプ前の信号レベルの軌跡を示し、一点鎖線は、デジタルクランプ後の信号レベルの軌跡を示す。
 同図におけるaに例示するように、タイミングT0で、アナログクランプ前のアナログ信号のレベルが上昇したものとする。この場合に、アナログクランプ回路310は、実線に例示するように、全画素のVOPB検波値に基づいてアナログ信号のレベルを一定の値にクランプする。
 また、同図におけるbの一点鎖線に例示するように、同じタイミングT0で、デジタルクランプ回路330は、色ごとのVOPB検波値に基づいて、デジタル信号のレベルを色毎に適切な値にクランプする。
 ここで、アナログクランプ回路310が、アナログクランプ変化量をデジタルクランプ回路330に供給しない第1の比較例に対し、容量比が可変のコンパレータ400を適用した構成を第2の比較例として想定する。
 図28は、第2の比較例におけるアナログクランプ回路およびデジタルクランプ回路の一構成例を示すブロック図である。第2の比較例では、容量比補正部380およびコード選択部390がさらに追加される。
 図29は、第2の比較例における固体撮像素子のクランプ前後の信号レベルの変動の一例を示すグラフである。同図におけるaは、あるダーク画像内の画素信号のアナログクランプ前後の信号レベルの変動の一例を示す。同図におけるbは、あるダーク画像内のデジタル信号のデジタルクランプ前後との信号レベルの変動の一例を示す。
 同図におけるaに例示するように、タイミングT0で、アナログクランプ前のアナログ信号のレベルが上昇したものとする。この場合に、第2の比較例では、タイミングT0の後の次のフレームでアナログクランプ値が反映されるため、アナログクランプ後の信号レベルは、入力値に追従せず、一定値に戻る。
 また、同図におけるbの一点鎖線に例示するように、タイミングT0で、デジタルクランプ回路330は、色ごとのVOPB検波値に基づいて、画素信号のレベルを色毎に適切な値にクランプする。
 同図に例示するように、第2の比較例では、デジタルクランプ後もT0のフレームで黒レベルが浮いているため画質が低下するおそれがある。
 このように、本技術の第2の実施の形態によれば、容量比補正部380が、容量比ごとにアナログクランプ値を補正しておき、コード選択部390が、容量比に対応する補正値を選択するため、容量比が可変の際に適切な補正を行うことができる。
 <3.移動体への応用例>
 本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
 図30は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
 車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図30に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
 駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
 ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
 車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
 撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
 車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
 マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
 音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図30の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
 図31は、撮像部12031の設置位置の例を示す図である。
 図31では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
 撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
 なお、図31には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
 撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
 撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
 以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部12031に適用され得る。具体的には、図1の撮像装置100は、撮像部12031に適用することができる。撮像部12031に本開示に係る技術を適用することにより、暗電流ノイズを低減して、より見やすい撮影画像を得ることができるため、ドライバの疲労を軽減することが可能になる。
 なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
 なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
 なお、本技術は以下のような構成もとることができる。
(1)所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、
 前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ回路と、
 前記アナログクランプ回路による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ回路と
を具備する固体撮像素子。
(2)前記アナログデジタル変換器は、前記ランプ信号と前記アナログ信号とを比較するコンパレータを含む
前記(1)記載の固体撮像素子。
(3)前記コンパレータは、
 所定の基準電圧と所定ノードの電圧との差分を増幅する差動増幅回路と、
 前記所定ノードと前記アナログ信号を伝送する垂直信号線との間に挿入された垂直信号線側容量と、
 前記所定ノードと前記アナログクランプ回路との間に挿入されたランプ側容量と、
 前記垂直信号線側容量と前記ランプ側容量との比を所定数の容量比のいずれかに変更するスイッチと
を備える前記(2)記載の固体撮像素子。
(4)前記アナログクランプ回路は、
 前記統計量から前記アナログクランプ値を算出するアナログクランプ値算出部と、
 前記容量比ごとに前記容量比に基づいて前記アナログクランプ値を補正して補正アナログクランプ値として供給する容量比補正部と、
 前記所定数の容量比のそれぞれに対応する前記補正アナログクランプ値のいずれかを選択する選択部と、
 前記選択された補正アナログクランプ値をアナログ信号に変換するデジタルアナログ変換器と、
 前記デジタルアナログ変換器からの前記アナログ信号と前記ランプ信号との差分を求める減算器と
を備える前記(3)記載の固体撮像素子。
(5)
前記アナログクランプ回路は前記統計量と前記アナログデジタル変換器のアナログゲインとから前記アナログクランプ値を算出する
前記(1)から(4)のいずれかに記載の固体撮像素子。
(6)前記デジタルクランプ回路は、
 所定のフィルタ係数に基づいて前記差分の移動平均を前記デジタルクランプ値として求める移動平均フィルタと、
 前記アナログゲインが変化したか否かと前記アナログクランプ値が変化したか否かに基づいて前記フィルタ係数を制御するフィルタ速度制御部と
を備える前記(1)から(4)のいずれかに記載の固体撮像素子。
(7)所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、
 前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ回路と、
 前記アナログクランプ回路による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ回路と、
 前記補正されたデジタル信号を処理する信号処理回路と
を具備するセンシング装置。
(8)所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換手順と、
 前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ手順と、
 前記アナログクランプ手順による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ手順と
を具備する固体撮像素子の制御方法。
 100 撮像装置
 110 光学部
 120 DSP回路
 130 表示部
 140 操作部
 150 バス
 160 フレームメモリ
 170 記憶部
 180 電源部
 200 固体撮像素子
 210 垂直走査部
 220 タイミング制御部
 230、313 DAC
 240 画素アレイ部
 241 VOPB領域
 242 遮光画素
 245 可視光領域
 246 有効画素
 250 カラム信号処理部
 260 水平走査部
 270 画像信号処理部
 300 カラム回路
 301 カラムアンプ
 302 ラッチ回路
 310 アナログクランプ回路
 311、331 VOPB検波部
 312 タイミング調整部
 314、332、357、363、373 減算器
 320 ADC
 321 カウンタ
 330 デジタルクランプ回路
 340 後段回路
 341、342、353、372 加算器
 343 トランザクション処理部
 350 アナログクランプ値算出部
 351 アナログゲイン割り戻し演算部
 352 チャタリング防止処理部
 354、356、375 遅延部
 355 アナログクランプ変化フラグ生成部
 358 割り戻し処理部
 360 アナログクランプ変化量減算部
 361 黒レベル補正量変換部
 362、391 セレクタ
 370 デジタルクランプ値算出部
 371 移動平均フィルタ
 374、376、381~385 乗算器
 377 フィルタ速度制御部
 380 容量比補正部
 386 演算結果保持部
 390 コード選択部
 400 コンパレータ
 401、402、416~421、440 容量
 410 容量比切替回路
 411~415 スイッチ
 430 差動増幅回路
 431、432 pMOSトランジスタ
 433~435 nMOSトランジスタ
 436、437 オートゼロスイッチ
 12031 撮像部

Claims (8)

  1.  所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、
     前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ回路と、
     前記アナログクランプ回路による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ回路と
    を具備する固体撮像素子。
  2.  前記アナログデジタル変換器は、前記ランプ信号と前記アナログ信号とを比較するコンパレータを含む
    請求項1記載の固体撮像素子。
  3.  前記コンパレータは、
     所定の基準電圧と所定ノードの電圧との差分を増幅する差動増幅回路と、
     前記所定ノードと前記アナログ信号を伝送する垂直信号線との間に挿入された垂直信号線側容量と、
     前記所定ノードと前記アナログクランプ回路との間に挿入されたランプ側容量と、
     前記垂直信号線側容量と前記ランプ側容量との比を所定数の容量比のいずれかに変更するスイッチと
    を備える請求項2記載の固体撮像素子。
  4.  前記アナログクランプ回路は、
     前記統計量から前記アナログクランプ値を算出するアナログクランプ値算出部と、
     前記容量比ごとに前記容量比に基づいて前記アナログクランプ値を補正して補正アナログクランプ値として供給する容量比補正部と、
     前記所定数の容量比のそれぞれに対応する前記補正アナログクランプ値のいずれかを選択する選択部と、
     前記選択された補正アナログクランプ値をアナログ信号に変換するデジタルアナログ変換器と、
     前記デジタルアナログ変換器からの前記アナログ信号と前記ランプ信号との差分を求める減算器と
    を備える請求項3記載の固体撮像素子。
  5.  前記アナログクランプ回路は前記統計量と前記アナログデジタル変換器のアナログゲインとから前記アナログクランプ値を算出する
    請求項1記載の固体撮像素子。
  6.  前記デジタルクランプ回路は、
     所定のフィルタ係数に基づいて前記差分の移動平均を前記デジタルクランプ値として求める移動平均フィルタと、
     前記アナログゲインが変化したか否かと前記アナログクランプ値が変化したか否かに基づいて前記フィルタ係数を制御するフィルタ速度制御部と
    を備える請求項1記載の固体撮像素子。
  7.  所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換器と、
     前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ回路と、
     前記アナログクランプ回路による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ回路と、
     前記補正されたデジタル信号を処理する信号処理回路と
    を具備するセンシング装置。
  8.  所定数の遮光画素と遮光されていない所定数の有効画素とのそれぞれからのアナログ信号を所定のランプ信号に基づいてデジタル信号に変換するアナログデジタル変換手順と、
     前記所定数の遮光画素の全ての前記アナログ信号の変換が完了したタイミングで前記所定数の遮光画素の前記デジタル信号の統計量に応じたアナログクランプ値に基づいて前記ランプ信号の補正を開始するアナログクランプ手順と、
     前記アナログクランプ手順による前記ランプ信号の補正量と前記所定数の遮光画素の前記デジタル信号の統計量との差分に応じたデジタルクランプ値に基づいて前記有効画素の前記デジタル信号の補正を前記タイミングで開始するデジタルクランプ手順と
    を具備する固体撮像素子の制御方法。
PCT/JP2021/039579 2020-12-23 2021-10-27 固体撮像素子、センシング装置、および、固体撮像素子の制御方法 WO2022137790A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-213176 2020-12-23
JP2020213176 2020-12-23

Publications (1)

Publication Number Publication Date
WO2022137790A1 true WO2022137790A1 (ja) 2022-06-30

Family

ID=82159011

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/039579 WO2022137790A1 (ja) 2020-12-23 2021-10-27 固体撮像素子、センシング装置、および、固体撮像素子の制御方法

Country Status (1)

Country Link
WO (1) WO2022137790A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007158626A (ja) * 2005-12-02 2007-06-21 Canon Inc 固体撮像装置
WO2016194622A1 (ja) * 2015-06-01 2016-12-08 ソニーセミコンダクタソリューションズ株式会社 撮像装置、および撮像方法、並びにプログラム
WO2019003510A1 (ja) * 2017-06-29 2019-01-03 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007158626A (ja) * 2005-12-02 2007-06-21 Canon Inc 固体撮像装置
WO2016194622A1 (ja) * 2015-06-01 2016-12-08 ソニーセミコンダクタソリューションズ株式会社 撮像装置、および撮像方法、並びにプログラム
WO2019003510A1 (ja) * 2017-06-29 2019-01-03 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Similar Documents

Publication Publication Date Title
US11394913B2 (en) Solid-state imaging element, electronic device, and method for controlling correction of luminance in the solid-state imaging element
WO2019087612A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2020235146A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
TWI809085B (zh) 信號處理電路、固體攝像元件及信號處理電路之控制方法
WO2021090538A1 (ja) センシングデバイス、電子機器およびセンシングデバイスの制御方法
US11451725B2 (en) Solid-state imaging element, imaging apparatus, and method for controlling solid-state imaging element
WO2021112058A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2021112059A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2022137790A1 (ja) 固体撮像素子、センシング装置、および、固体撮像素子の制御方法
US20240064437A1 (en) Solid-state imaging element, imaging device, and method for controlling solid-state imaging element
WO2021256073A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2020075357A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2021145033A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2019198319A1 (ja) 固体撮像素子、撮像装置および固体撮像素子の制御方法
WO2023112480A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2022244293A1 (ja) アナログデジタル変換回路、固体撮像素子、および、アナログデジタル変換回路の制御方法
WO2024095630A1 (ja) 撮像装置
WO2022113528A1 (ja) 固体撮像素子、固体撮像素子の制御方法、および、撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21909947

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21909947

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP