WO2020235146A1 - 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 - Google Patents
固体撮像素子、撮像装置、および、固体撮像素子の制御方法 Download PDFInfo
- Publication number
- WO2020235146A1 WO2020235146A1 PCT/JP2020/003958 JP2020003958W WO2020235146A1 WO 2020235146 A1 WO2020235146 A1 WO 2020235146A1 JP 2020003958 W JP2020003958 W JP 2020003958W WO 2020235146 A1 WO2020235146 A1 WO 2020235146A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- signal
- circuit
- sample hold
- gain
- analog
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
Definitions
- This technology relates to a solid-state image sensor. More specifically, the present invention relates to a solid-state image sensor that converts an analog signal into a digital signal for each column, an image pickup device, and a control method for the solid-state image sensor.
- CDS Correlated Double Sampling
- a solid-state imaging device that samples and holds an analog signal voltage and an analog reset voltage, converts the difference voltage into a current, and inputs it to an analog-to-digital converter (ADC).
- ADC analog-to-digital converter
- This technology was created in view of such a situation, and aims to improve the image quality of image data in a solid-state image sensor that performs signal processing for each column.
- the present technology has been made to solve the above-mentioned problems, and the first aspect thereof is a plurality of analogs that increase or decrease the difference between a pair of analog input signals by a predetermined gain and output them as analog output signals.
- the output unit the analog digital conversion unit that converts the analog output signal of each of the plurality of analog output units into a digital signal, and the digital signal due to the variation in the gain of each of the plurality of analog output units.
- It is a solid-state image sensor including a correction processing unit for correcting noise, and a control method thereof. This has the effect of capturing image data consisting of digital signals with reduced noise.
- a signal voltage corresponding to the amount of received light and a predetermined reset voltage are sampled and held in order, and the signal voltage and the reset voltage are used as the pair of analog input signals and a pair of output signal lines.
- a plurality of sample hold circuits that output via the above may be further provided. This has the effect that the difference between the signal voltage and the reset voltage is increased or decreased by the gain.
- a sample hold horizontal connection circuit for opening and closing a path between the pair of output signal lines of each of the plurality of sample hold circuits may be further provided. This has the effect of suppressing noise due to variations in the offset of the sample hold circuit.
- the correction processing unit is a gain correction value calculation circuit that calculates a correction value for correcting noise due to the variation in gain as a gain correction value when the path is in the closed state.
- An offset correction value calculation circuit that calculates the correction value as an offset correction value for correcting noise due to variations in the offsets of the plurality of sample hold circuits when the path is open, and the above calculation.
- a correction calculation circuit for correcting the noise by using the obtained gain correction value and the calculated offset correction value may be provided. This has the effect of capturing image data in which noise due to offset variation and noise due to gain variation are reduced.
- the analog output signal may be a current signal in which the difference between the signal voltage and the reset voltage is increased or decreased by the gain. This has the effect of converting the current signal into a digital signal.
- each of the plurality of sample hold circuits includes a pair of reset voltage sample hold circuits and a pair of signal voltage sample hold circuits, and one of the pair of reset voltage sample hold circuits is provided. The other may hold when the reset voltage is sampled, and the other may hold when one of the pair of signal voltage sample hold circuits samples the signal voltage. This brings about the effect that one of the pair of sample hold circuits samples the signal while the other holds the signal.
- a pixel array unit in which a plurality of rows are arranged is further provided, and each of the plurality of rows is composed of a plurality of pixels arranged in a predetermined direction, which is half of the plurality of sample hold circuits. Is connected to an even number of the plurality of rows, and the rest of the plurality of sample hold circuits is connected to an odd number of the plurality of rows and is connected to the even number of rows, and the odd number of the sample hold circuits.
- the sample hold circuits connected to the row may be arranged alternately along the predetermined direction. This has the effect that two lines are AD-converted at the same time.
- a pixel array unit in which a plurality of rows are arranged is further provided, half of the plurality of sample hold circuits are arranged in the upper column signal processing circuit, and the rest are arranged in the lower column signal processing circuit.
- the upper column signal processing circuit is connected to one of the odd and even rows in the plurality of rows, and the lower column signal processing circuit is connected to the other of the odd and even rows. May be done. This has the effect that two lines are AD-converted at the same time.
- a pixel array unit in which a plurality of pixels are arranged is further provided, and the pixel array unit is arranged on a predetermined light receiving chip, and the plurality of sample hold circuits and the sample hold horizontal connection circuit are provided. And at least a part of the plurality of analog output units, the analog-digital conversion unit, and the correction processing unit may be arranged on a predetermined circuit chip. This has the effect of reducing the circuit scale per chip.
- the pixel array portion in which a plurality of vertical signal lines connected to the sample hold circuits different from each other are wired, and the adjacent odd-numbered signal lines of the plurality of vertical signal lines are connected to each other.
- a vertical signal line addition circuit for connecting adjacent even-numbered signal lines among the plurality of vertical signal lines may be further provided. This has the effect of adding pixels in the horizontal direction.
- a signal voltage corresponding to the amount of light received by the pixels and a predetermined reset voltage are sampled and held in order, and the signal voltage and the reset voltage are output via the pair of output signal lines.
- the other of the pair of analog input signals may further include a selection circuit that outputs to, and may have a predetermined reference voltage. This has the effect of reducing noise in the single-slope ADC.
- the second aspect of the present technology is a plurality of analog output units that increase or decrease the difference between a pair of analog input signals by a predetermined gain and output them as analog output signals, and the plurality of analog output units, respectively.
- the analog digital conversion unit that converts the analog output signal into a digital signal
- the correction processing unit that corrects the noise of the digital signal due to the variation in the gain of each of the plurality of analog output units, and each of the digital signals.
- It is an image pickup apparatus including a digital signal processing circuit that performs predetermined image processing on the included image data. As a result, image data composed of digital signals with reduced noise is generated, and image processing is performed.
- FIG. 1 It is a block diagram which shows one structural example of the solid-state image pickup device in the 2nd Embodiment of this technique. It is a block diagram which shows one configuration example of the column signal processing circuit in the 2nd Embodiment of this technique. It is a block diagram which shows one structural example of the solid-state image sensor in the 3rd Embodiment of this technique. It is a figure which shows an example of the laminated structure of the solid-state image sensor in 4th Embodiment of this technique. It is a block diagram which shows one structural example of the solid-state image sensor in 4th Embodiment of this technique. It is a block diagram which shows one structural example of the column signal processing circuit in 5th Embodiment of this technique. FIG.
- FIG. 5 is a circuit diagram showing a configuration example of a VSL (Vertical Signal Line) adder circuit and an SH (Sample Hold) horizontal connection circuit according to a fifth embodiment of the present technology. It is a circuit diagram which shows the state of the VSL addition circuit and SH horizontal connection circuit at the time of connecting a vertical signal line in 5th Embodiment of this technique. It is a circuit diagram which shows the state of the VSL addition circuit and SH horizontal connection circuit when the vertical signal line is not connected in the 5th Embodiment of this technique. It is a block diagram which shows one configuration example of the column signal processing circuit in the 6th Embodiment of this technique. It is a block diagram which shows one structural example of the analog-digital conversion part in the 6th Embodiment of this technique. It is a block diagram which shows the schematic configuration example of a vehicle control system. It is explanatory drawing which shows an example of the installation position of the imaging unit.
- FIG. 1 is a block diagram showing a configuration example of the image pickup apparatus 100 according to the first embodiment of the present technology.
- the image pickup device 100 is a device for capturing image data, and includes an optical unit 110, a solid-state image sensor 200, and a DSP (Digital Signal Processing) circuit 120. Further, the image pickup apparatus 100 includes a display unit 130, an operation unit 140, a bus 150, a frame memory 160, a storage unit 170, and a power supply unit 180.
- a digital camera such as a digital still camera, a smartphone having an image pickup function, a personal computer, an in-vehicle camera, or the like is assumed.
- the optical unit 110 collects the light from the subject and guides it to the solid-state image sensor 200.
- the solid-state image sensor 200 generates image data by photoelectric conversion in synchronization with the vertical synchronization signal XVS.
- the vertical synchronization signal XVS is a periodic signal having a predetermined frequency indicating the timing of imaging.
- the solid-state image sensor 200 supplies the generated image data to the DSP circuit 120 via the signal line 209.
- the DSP circuit 120 executes predetermined image processing on the image data from the solid-state image sensor 200.
- the DSP circuit 120 outputs the processed image data to the frame memory 160 or the like via the bus 150.
- the DSP circuit 120 is an example of the digital signal processing circuit described in the claims.
- the display unit 130 displays image data.
- a liquid crystal panel or an organic EL (Electro Luminescence) panel is assumed.
- the operation unit 140 generates an operation signal according to the operation of the user.
- the bus 150 is a common route for the optical unit 110, the solid-state image sensor 200, the DSP circuit 120, the display unit 130, the operation unit 140, the frame memory 160, the storage unit 170, and the power supply unit 180 to exchange data with each other.
- the frame memory 160 holds image data.
- the storage unit 170 stores various data such as image data.
- the power supply unit 180 supplies power to the solid-state image sensor 200, the DSP circuit 120, the display unit 130, and the like.
- FIG. 2 is a block diagram showing a configuration example of the solid-state image sensor 200 according to the first embodiment of the present technology.
- the solid-state image sensor 200 includes a vertical scanning circuit 210, a timing control circuit 220, a pixel array unit 230, a column signal processing circuit 300, a horizontal scanning circuit 250, a test voltage generating unit 260, and a correction processing unit 270. Also, these circuits are arranged, for example, on a single semiconductor chip.
- a plurality of pixels 240 are arranged in a two-dimensional grid pattern.
- a set of pixels 240 arranged in a predetermined horizontal direction is referred to as a "row”
- a set of pixels 240 arranged in a direction perpendicular to the horizontal direction is referred to as a "column”.
- the timing control circuit 220 controls the operation timing of the vertical scanning circuit 210, the column signal processing circuit 300, the correction processing unit 270, and the like in synchronization with the vertical synchronization signal XVS.
- the vertical scanning circuit 210 selects and drives rows in order to output an analog pixel signal.
- the pixel 240 generates a pixel signal by photoelectric conversion under the control of the vertical scanning circuit 210.
- Each of the pixels 240 outputs a pixel signal to the column signal processing circuit 300.
- the test voltage generation unit 260 generates a predetermined test voltage according to the mode signal MODE from the DSP circuit 120, and supplies the signal of that voltage to the column signal processing circuit 300 as a test signal.
- the mode signal MODE is a signal instructing the solid-state image sensor 200 to use one of a plurality of modes. These modes include a calibration mode and a normal imaging mode.
- the calibration mode is a mode in which the column signal processing circuit 300 calculates a correction value for correcting noise. The cause of noise generation and the calculation method of the correction value will be described later.
- the normal imaging mode is a mode for capturing image data while correcting noise using the calculated correction value.
- test voltage generator 260 When the calibration mode is set, the test voltage generator 260 generates a test signal by DA (Digital to Analog) conversion or the like. A DAC (Digital to Analog Converter) or the like is used as the test voltage generating unit 260. Further, the timing control circuit 220 stops the vertical scanning circuit 210, and the correction processing unit 270 calculates the correction value.
- DA Digital to Analog
- a DAC Digital to Analog Converter
- the test voltage generating unit 260 does not generate a test signal, and the timing control circuit 220 drives the line to the vertical scanning circuit 210. Further, the correction processing unit 270 corrects the noise by using the correction value.
- the column signal processing circuit 300 performs signal processing such as CDS processing and AD conversion processing on the pixel signal for each column.
- the column signal processing circuit 300 supplies the digital signal after signal processing to the correction processing unit 270.
- the correction processing unit 270 calculates a correction value when the calibration mode is set, and corrects the digital signal using the correction value when the normal imaging mode is set.
- the correction processing unit 270 outputs the image data in which the corrected digital signals are arranged to the DSP circuit 120 via the signal line 209.
- FIG. 3 is a circuit diagram showing a configuration example of the pixel 240 according to the first embodiment of the present technology.
- the pixel 240 includes a photoelectric conversion element 241 and a transfer switch 242 and an amplifier circuit 243.
- the photoelectric conversion element 241 converts the incident light into an electric charge.
- the transfer switch 242 transfers the electric charge from the photoelectric conversion element 241 to the floating diffusion layer (not shown) under the control of the vertical scanning circuit 210.
- the amplifier circuit 243 amplifies the voltage according to the amount of electric charge of the floating diffusion layer.
- the amplifier circuit 243 outputs the amplified signal as a pixel signal to the column signal processing circuit 300 via the vertical signal line 249.
- the vertical signal line 249 is wired in the pixel array unit 230 in the vertical direction for each row.
- N is an integer of 2 or more
- N vertical signal lines 249 are wired.
- each of the pixels 240 in the row is commonly connected to the corresponding vertical signal line 249.
- FIG. 4 is a block diagram showing a configuration example of the column signal processing circuit 300 according to the first embodiment of the present technology.
- the column signal processing circuit 300 includes a plurality of multiplexers 310, a plurality of current sources 320, and a VSL horizontal connection circuit 330. Further, the column signal processing circuit 300 further includes a plurality of sample hold circuits 400, an SH horizontal connection circuit 350, a plurality of voltage / current conversion units 365, an analog-digital conversion unit 370, and an output unit 375.
- Each of the multiplexer 310, the current source 320, the sample hold circuit 400, and the voltage-current converter 365 is arranged in a row. When the number of columns is N, the multiplexer 310, the current source 320, the sample hold circuit 400, and the voltage-current converter 365 are arranged by N each.
- the VSL horizontal connection circuit 330 includes a plurality of switches 331.
- the SH horizontal connection circuit 350 includes a plurality of switches 351 and a plurality of switches 352.
- the analog-to-digital conversion unit 370 includes a plurality of current modes ADC 371.
- Each of the switches 331, 351 and 352 is arranged in each row except the last row. When the number of columns is N, N-1 switches 331, 351 and 352 are arranged.
- the current mode ADC 371 is arranged for each row, and when the number of rows is N, N is arranged at a time.
- the multiplexer 310 selects one of the pixel signal V vsl from the vertical signal line 249 of the corresponding row and the test signal V test from the test voltage generator 260 according to the control signal SWt from the timing control circuit 220. is there.
- the timing control circuit 220 causes the multiplexer 310 to select the test signal V test by the control signal SWt in the calibration mode.
- the timing control circuit 220 causes the multiplexer 310 to select the pixel signal V vsl by the control signal SWt.
- the multiplexer 310 feeds the selected signal through the current source 320 to the corresponding sample hold circuit 400.
- the signal line connected to the output of the multiplexer 310 is also a vertical signal line 249.
- the current source 320 supplies a constant constant current.
- a MOS (Metal Oxide Semiconductor) transistor is used as the current source 320.
- the VSL horizontal connection circuit 330 connects N vertical signal lines 249 to each other according to the control signal SWvc from the timing control circuit 220.
- the nth switch 331 (n is an integer of 1 to N-1) opens and closes the path between the nth vertical signal line 249 and the n + 1th vertical signal line 249.
- the timing control circuit 220 controls the switches 331 in all rows to the closed state by the control signal SWvc in the calibration mode.
- N vertical signal lines 249 are connected horizontally, and noise due to variations in the MOS transistors of the current source 320 can be suppressed. By suppressing this noise, the correction accuracy can be improved.
- the timing control circuit 220 controls the switches 331 in all rows to the open state by the control signal SWvc.
- the sample hold circuit 400 holds the reset voltage and the signal voltage of the pixel signal V vsl of the corresponding column in order, and outputs those voltages to the corresponding voltage-current converter 365 via the output signal lines 408 and 409. It is a thing. N lines of each of the output signal lines 408 and 409 are wired.
- the reset voltage is the voltage of the pixel signal V vsl when the floating diffusion layer in the pixel 240 is initialized.
- the signal voltage is the voltage of the pixel signal V vsl according to the amount of light received by the pixel 240.
- the SH horizontal connection circuit 350 connects N pairs of output signal lines 408 and 409 to each other according to the control signals SWs.
- the nth switch 351 opens and closes the path between the nth output signal line 408 and the n + 1th output signal line 408.
- the nth switch 352 opens and closes the path between the nth output signal line 409 and the n + 1th output signal line 409.
- the timing control circuit 220 controls the switches 351 and 352 in all rows in the closed state by the control signals SWs in the calibration mode. As a result, N pairs of output signal lines 408 and 409 are horizontally connected.
- the timing control circuit 220 controls the switches 351 and 352 in all rows to the open state by the control signals SWs.
- the voltage-current conversion unit 365 amplifies the difference between the pair of analog input signals with a predetermined gain and outputs the difference as an analog output signal.
- the reset voltage and signal voltage from the corresponding sample hold circuit 400 are input to the voltage-current conversion unit 365 as a pair of analog input signals.
- the voltage-current converter 365 converts these analog input signals (that is, voltage) into current signals whose difference is increased or decreased.
- the voltage-current converter 365 supplies the generated current signal as an analog output signal to the corresponding current mode ADC.
- the voltage-current conversion unit 365 is an example of the analog output unit described in the claims.
- the current mode ADC 371 converts the analog output signal (that is, the current signal) from the voltage-current converter 365 into the digital signal Dout.
- the current mode ADC 371 for example, a delta sigma ADC is used.
- the current mode ADC 371 supplies a digital signal to the output unit 375 under the control of the horizontal scanning circuit 250.
- the output unit 375 supplies each of the digital signal Douts to the correction processing unit 270.
- FIG. 5 is a circuit diagram showing a configuration example of the switch 351 according to the first embodiment of the present technology.
- a is a circuit diagram of a switch 351 when an nMOS (n-channel MOS) transistor and a pMOS (p-channel MOS) transistor are used.
- Reference numeral b in the figure is a circuit diagram of the switch 351 when an nMOS transistor is used.
- Reference numeral c in the figure is a circuit diagram of the switch 351 when a pMOS transistor is used.
- the inverter 361 is further arranged.
- the nMOS transistor 362 and the pMOS transistor 363 are inserted in parallel in the path to be opened and closed.
- the inverter 361 inverts the control signals SWs and supplies them to the gate of the pMOS transistor 363. Further, control signals SWs are input to the gate of the nMOS transistor 362.
- nMOS transistor 362 can be used.
- pMOS transistor 363 can be used.
- Switches other than switch 351 can also be realized by using nMOS transistors and pMOS transistors in the same manner as switch 351.
- FIG. 6 is a block diagram showing a configuration example of the sample hold circuit 400 and the voltage / current conversion unit 365 according to the first embodiment of the present technology.
- the sample hold circuit 400 includes a reset voltage sample hold circuit 410 and a signal voltage sample hold circuit 420. Further, the voltage-current conversion unit 365 includes a current source 366, a resistor 367, and nMOS transistors 368 and 369.
- the reset voltage sample hold circuit 410 samples and holds the reset voltage.
- the reset voltage sample hold circuit 410 includes switches 411, 413 and 414, a capacitor 412, and an amplifier 415.
- the switch 411 opens and closes the path between the vertical signal line 249 and the capacitor 412 according to the control signal SW11 from the timing control circuit 220.
- the capacitor 412 is inserted between the switch 411 and the inverting input terminal (-) of the amplifier 415.
- the switch 413 opens and closes the connection point of the switch 411 and the capacitor 412 and the connection point of the current source 366 and the resistor 367 according to the control signal SW12 from the timing control circuit 220.
- the switch 414 opens and closes the path between the inverting input terminal (-) of the amplifier 415 and its output terminal according to the control signal SW13 from the timing control circuit 220.
- the amplifier 415 amplifies the difference between one end of the capacitor 412 and the ground voltage.
- the output terminal of this amplifier 415 is connected to the gate of the nMOS transistor 369.
- the signal line between the switch 413 and the voltage-current conversion unit 365 corresponds to the output signal line 409, and this signal line is horizontally connected.
- the signal voltage sample hold circuit 420 samples and holds the signal voltage.
- the signal voltage sample hold circuit 420 includes switches 421, 423 and 424, a capacitor 422 and an amplifier 425.
- connection configuration of the elements in the signal voltage sample hold circuit 420 is the same as that of the reset voltage sample hold circuit 410.
- one end of the switch 423 is connected to the connection point of the resistor 367 and the nMOS transistor 368.
- the output terminal of the amplifier 425 is connected to the gate of the nMOS transistor 368.
- the signal line between the switch 423 and the voltage-current conversion unit 365 corresponds to the output signal line 408, and this signal line is horizontally connected.
- the current source 366, the resistor 367, and the nMOS transistor 368 are connected in series between the power supply and the analog-to-digital conversion unit 370. Also, the drain of the nMOS transistor 369 is connected to the connection point of the current source 366 and the resistor 367, and the source is grounded.
- the timing control circuit 220 controls the switches 414 and 424 to be in the closed state and puts the amplifiers 415 and 425 in the auto-zero state before sampling the reset voltage.
- the timing control circuit 220 closes only the switch 411 and opens the remaining switches when the pixels are initialized. This samples the reset voltage.
- the timing control circuit 220 closes only the switch 421 and opens the remaining switches at the end of the exposure. This samples the signal voltage.
- the timing control circuit 220 closes the switches 413 and 423 and opens the remaining switches within the AD period. As a result, the reset voltage and the signal voltage are maintained, and the amplifiers 415 and 425 output these voltages as a pair of analog input signals.
- the voltage-current conversion unit 365 converts a pair of analog input signals (reset voltage and signal voltage) into a current signal I out whose difference is increased or decreased, and outputs the analog output signal to the analog-digital conversion unit 370. That is, CDS processing and voltage-current conversion processing are performed.
- the current signal (that is, analog output signal) I out is expressed by the following equation.
- G is a gain proportional to the reciprocal of the resistance value of the resistor 367, and the unit is, for example, volt (A / V) per ampere.
- Ofs is the offset generated by the sample and hold of the sample hold circuit 400, and the unit is, for example, amperes (A).
- the gain G and offset Ofs for each column may vary.
- V in is the pixel signal after CDS processing unit is, for example, bolts (V).
- FIG. 7 is a block diagram showing a configuration example of the correction processing unit 270 according to the first embodiment of the present technology.
- the correction processing unit 270 includes a demultiplexer 271, a correction value calculation circuit 280, and a correction calculation circuit 290.
- the demultiplexer 271 outputs a digital signal from the column signal processing circuit 300 to either the correction value calculation circuit 280 or the correction calculation circuit 290 according to the mode signal MODE.
- the demultiplexer 271 outputs the digital signal to the correction value calculation circuit 280, and outputs the digital signal to the correction calculation circuit 290 when the normal imaging mode is set.
- the correction value calculation circuit 280 calculates a correction value for correcting noise due to variations in gain G and offset Ofs for each column.
- the correction value calculation circuit 280 includes a demultiplexer 281, an offset correction value calculation circuit 282, a gain correction value calculation circuit 283, and a correction value holding unit 284.
- the demultiplexer 281 outputs a digital signal from the demultiplexer 271 to either the offset correction value calculation circuit 282 or the gain correction value calculation circuit 283 according to the control signals SWs from the timing control circuit 220.
- the offset correction value calculation circuit 282 calculates for each of the columns using a correction value for correcting noise due to variation in offset Ofs for each column as an offset correction value when the SH horizontal connection circuit 350 is not horizontally connected. It is a thing. The noise due to the offset Ofs appears as vertical stripe-shaped random noise in the image data when AD conversion is performed for each column.
- the offset correction value calculation circuit 282 causes the correction value holding unit 284 to hold each of the calculated offset correction values.
- the gain correction value calculation circuit 283 calculates for each of the columns using a correction value for correcting noise due to variation in gain G for each column as a gain correction value when the SH horizontal connection circuit 350 is horizontally connected. Is. The noise due to this gain appears as vertical stripe-shaped random noise in the image data when AD conversion is performed for each column.
- the gain correction value calculation circuit 283 causes the correction value holding unit 284 to hold each of the calculated gain correction values.
- the correction value holding unit 284 holds the offset correction value and the gain correction value for each column. When the number of columns is N, N offset correction values and N gain correction values are held.
- the correction calculation circuit 290 uses the offset correction value and the gain correction value to correct the noise of the digital signal due to the variation in the offset and the gain.
- the correction calculation circuit 290 includes a line buffer 291 and a subtractor 292 and a multiplier 293.
- the line buffer 291 holds a digital signal for at least one line.
- the line buffer 291 supplies a plurality of held digital signals to the subtractor 292 in order.
- the subtractor 292 subtracts the offset correction value of the corresponding column from the digital signal.
- the subtractor 292 supplies the subtracted digital signal to the multiplier 293.
- the multiplier 293 multiplies the digital signal by the gain correction value of the corresponding column.
- the multiplier 293 supplies the multiplied digital signal to the DSP circuit 120.
- the timing control circuit 220 controls the column signal processing circuit 300 to horizontally connect the vertical signal line 249 and the output signal lines 408 and 409, respectively. Further, the test voltage generation unit 260 supplies the black level VL, which is the level when the light is shielded, as the test voltage. Then, the column signal processing circuit 300 performs AD conversion of the current signal I out for M (M is an integer) line in order. Further, the timing control circuit 220 controls the demultiplexer 281 to output a digital signal to the gain correction value calculation circuit 283.
- the test voltage generation unit 260 supplies the white level VH, which is a predetermined level different from the black level (for example, the level at the highest brightness), as the test voltage. Then, the column signal processing circuit 300 performs AD conversion of M rows in order.
- the gain correction value calculation circuit 283 calculates the gain correction value for each column from the digital signal at the black level VL and the digital signal at the white level VH.
- the calculation method of this gain correction value will be explained.
- the horizontal connection of the output signal lines 408 and 409 suppresses random noise caused by offset variation. Therefore, the gain correction value calculation circuit 283 can calculate the gain correction value from those digital signals.
- the black level VL When the black level VL is applied, M digital signals are acquired for each of the N rows.
- the average value of the nth column at this time is defined as the column average value bl gain -n .
- M digital signals are acquired for each of the N rows.
- the average value of the nth column at this time is defined as the column average value vh gain -n .
- the average value of the column mean values vl gain-1 to vl gain-N is defined as the line mean value vl gain-AV
- the average value of the column mean values vh gain-1 to vh gain-N is the line mean value vh gain-AV.
- c gain-n (vh gain-AV -vl gain-AV ) / (vh gain-n -vl gain-n ) ... Equation 1
- the timing control circuit 220 controls the column signal processing circuit 300 to release the horizontal connection with the output signal lines 408 and 409, respectively. Further, the test voltage generation unit 260 supplies the black level VL as a test voltage. Then, the column signal processing circuit 300 performs AD conversion of M rows in order. Further, the timing control circuit 220 controls the demultiplexer 281 to output a digital signal to the offset correction value calculation circuit 282. The offset correction value calculation circuit 282 calculates the offset correction value for each column.
- the gain correction value calculation circuit 283 can calculate the offset correction value by eliminating the influence of random noise due to the variation in gain by the gain correction value.
- the average value of the samples in the nth column be the column average value bl of s-n .
- the average value of vl of s -1 to vl of s -N is defined as the line average value vl of s -AV .
- FIG. 8 is a graph showing an example of the relationship between the test voltage and the digital signal in the first embodiment of the present technology.
- the horizontal axis in the figure is a test voltage
- the vertical axis in the figure is a digital signal obtained by AD-converting the current signal I out corresponding to the test voltage.
- the solid line in the figure is a straight line showing the relationship between the test voltage and the column average value of the nth column
- the dotted line is a straight line showing the relationship between the test voltage and the line average value.
- the straight line (solid line) in a certain column may not match the straight line (dotted line) of the average value.
- lv gain-n be the column mean value of the nth column when the black level VL is applied
- vh gain-n be the column mean value of the nth column when the white level VH is applied.
- the line average value vr gain-AV when the black level VL is applied and the line average value vh gain-AV when the white level VH is applied are used.
- the ratio of the difference between the column mean values vh gain-n and vl gain-n and the difference between the line mean values vh gain-AV and vl gain-AV is used as a gain correction value for correcting the gain variation. Calculated by Equation 1.
- the correction accuracy due to the correction value is lowered.
- the configuration in which the SH horizontal connection circuit 350 is used for horizontal connection random noise due to offset can be suppressed, so that an accurate gain correction value can be calculated.
- the horizontal connection by the SH horizontal connection circuit 350 is released and the offset correction value is also calculated, the correction accuracy by the gain correction value can be improved without lowering the correction accuracy by the offset correction value.
- FIG. 9 is a diagram showing an example of an offset correction value and a gain correction value according to the first embodiment of the present technology.
- the correction value holding unit 284 holds the offset correction value and the gain correction value of the column for each column address which is the address assigned to the column.
- the offset correction value c of s -1 and the gain correction value c gain-1 are held in association with the column address Y1.
- the offset correction value c of s -2 and the gain correction value c gain-2 are held in association with the column address Y2.
- FIG. 10 is a timing chart showing an example of the operation of the solid-state image sensor 200 according to the first embodiment of the present technology. It is assumed that the solid-state image sensor 200 shifts to the calibration mode at timing T0.
- the timing control circuit 220 controls the corresponding switches in the ON state by the control signals SWvc and SWs, and connects the vertical signal line 249 and the output signal lines 408 and 409 of the sample hold circuit 400 horizontally, respectively.
- test voltage generation unit 260 supplies the black level VL as the test voltage. Then, the column signal processing circuit 300 performs AD conversion of M rows in order in synchronization with the vertical synchronization signal XVS.
- the test voltage generation unit 260 supplies the white level VH as the test voltage.
- the column signal processing circuit 300 performs AD conversion of M rows in order in synchronization with the vertical synchronization signal XVS.
- the correction processing unit 270 calculates the gain correction value for each column from the digital signal at the black level VL and the digital signal at the white level VH by Equation 1.
- the timing control circuit 220 controls the corresponding switch to the off state by the control signals SWs, and releases the horizontal connection of the 400 output signal lines 408 and 409 of the sample hold circuit.
- the test voltage generation unit 260 supplies the black level VL as a test voltage.
- the column signal processing circuit 300 performs AD conversion of M rows in order in synchronization with the vertical synchronization signal XVS.
- the correction processing unit 270 calculates an offset correction value for each column from the digital signal and the gain correction value according to Equation 2.
- the solid-state image sensor 200 shifts to the normal image pickup mode.
- the timing control circuit 220 controls the corresponding switches to the off state by the control signals SWvc and SWs, and releases the horizontal connection between the vertical signal line 249 and the output signal lines 408 and 409 of the sample hold circuit 400, respectively.
- the correction processing unit 270 performs a digital signal correction calculation using the offset correction value and the gain correction value.
- FIG. 11 is a graph for explaining the effect of correction in the first embodiment of the present technology.
- a is a graph showing an example of the relationship between analog gain and random noise.
- b is a graph showing an example of the relationship between the dynamic range and the analog gain.
- c is a graph showing an example of the relationship between random noise and analog gain per unit dynamic range.
- the vertical axis of a in the figure is input-converted random noise.
- the horizontal axis is an analog gain, which corresponds to the gain G when converting a voltage into a current.
- the vertical axis of b is the dynamic range
- the horizontal axis is the analog gain.
- the vertical axis of c is random noise per unit dynamic range
- the horizontal axis is analog gain.
- the solid lines a and c in the figure show the locus when the gain correction value and the offset correction value are corrected, and the alternate long and short dash line shows the locus when the correction is not performed.
- the effect of reducing random noise becomes greater as the analog gain becomes larger by performing the correction. Further, as illustrated in b in the figure, generally, the larger the analog gain, the narrower the dynamic range. Therefore, as illustrated in c in the figure, the effect of reducing random noise per unit dynamic range becomes large, especially when the analog gain is large.
- FIG. 12 is a flowchart showing an example of the operation of the solid-state image sensor 200 according to the first embodiment of the present technology. This operation is started, for example, when the solid-state image sensor 200 is turned on.
- the solid-state image sensor 200 determines whether or not the calibration mode has been set (step S901).
- the timing control circuit 220 in the solid-state image sensor 200 switches the input destination of the column signal processing circuit 300 from the pixel 240 to the test voltage generation unit 260 (step S902). ). Further, the timing control circuit 220 horizontally connects the vertical signal lines 249 (step S903), and executes a gain correction value calculation process for calculating the gain correction value (step S910). Then, the timing control circuit 220 executes the offset correction value calculation process for calculating the offset correction value (step S920).
- step S901 when the calibration mode is not set (step S901: No), or after step S920, the solid-state image sensor 200 determines whether or not the normal image pickup mode is set (step S904).
- step S904 When the normal imaging mode is not set (step S904: No), the timing control circuit 220 repeats steps S904 and subsequent steps.
- step S904 when the normal imaging mode is set (step S904: Yes), the timing control circuit 220 switches the input destination of the column signal processing circuit 300 to the pixel 240 (step S905). Further, the timing control circuit 220 releases the horizontal connection of the vertical signal lines 249 (step S906), and the column signal processing circuit 300 generates image data composed of digital signals (step S907).
- the correction processing unit 270 corrects noise due to variations in gain and offset (step S908).
- step S908 the solid-state image sensor 200 repeatedly executes step S904 and subsequent steps.
- FIG. 13 is a flowchart showing an example of the gain correction value calculation process according to the first embodiment of the present technology.
- the timing control circuit 220 horizontally connects the outputs of the sample hold circuit 400 (that is, the output signal lines 408 and 409) (step S911). Further, the test voltage generation unit 260 applies a black level VL (step S912).
- the correction processing unit 270 calculates the column mean value bl gain-n for each column and the line mean value lv gain-AV (step S913).
- the test voltage generation unit 260 applies a white level VH (step S914).
- the correction processing unit 270 calculates a column mean value vh gain-n for each column and a line mean value vh gain-AV (step S915).
- the correction processing unit 270 calculates the gain correction value for each column according to the equation 1 (step S916), and holds them (step S917).
- the timing control circuit 220 releases the horizontal connection of the outputs of the sample hold circuit 400 (step S918), and ends the gain correction value calculation process.
- FIG. 14 is a flowchart showing an example of the offset correction value calculation process according to the first embodiment of the present technology.
- the test voltage generation unit 260 applies the black level VL (step S921), and the correction processing unit 270 calculates the column mean value vh of s -n for each column (step S922).
- the correction processing unit 270 calculates the offset correction value for each column according to the equation 2 (step S923), and holds them (step S924).
- step S924 the solid-state image sensor 200 ends the offset correction value calculation process.
- the correction processing unit 270 corrects the noise due to the variation in the gain of the voltage / current conversion unit 365 for each column, the image is compared with the case where the correction is not performed. The image quality of the data can be improved.
- FIG. 15 is a circuit diagram showing a configuration example of the sample hold circuit 400 in the modified example of the first embodiment of the present technology.
- the sample hold circuit 400 of the modified example of the first embodiment is different from the first embodiment in that a reset voltage sample hold circuit 430 and a signal voltage sample hold circuit 440 are further arranged.
- FIG. 16 is a circuit diagram showing a configuration example of the reset voltage sample hold circuits 410 and 430 in the modified example of the first embodiment of the present technology.
- the reset voltage sample hold circuit 410 of the modified example of the first embodiment further includes a switch 416.
- the switch 416 opens and closes the path between the output terminal of the amplifier 415 and the gate of the nMOS transistor 369 according to the control signal SW14 from the timing control circuit 220.
- the reset voltage sample hold circuit 430 includes switches 431, 433, 434 and 436, a capacitor 432, and an amplifier 435.
- the connection configuration of these elements is the same as that of the reset voltage sample hold circuit 410.
- the timing control circuit 220 opens the switch 416 and closes the switch 436 during the sample of the reset voltage sample hold circuit 410. On the other hand, the timing control circuit 220 closes the switch 416 and opens the switch 436 while the reset voltage sample hold circuit 410 is being held.
- FIG. 17 is a circuit diagram showing a configuration example of the signal voltage sample hold circuits 420 and 440 in the modified example of the first embodiment of the present technology.
- the signal voltage sample hold circuit 420 of the modified example of the first embodiment further includes a switch 426.
- the switch 426 opens and closes the path between the output terminal of the amplifier 425 and the gate of the nMOS transistor 368 according to the control signal SW24 from the timing control circuit 220.
- the signal voltage sample hold circuit 440 includes switches 441, 443, 444 and 446, a capacitor 442, and an amplifier 445.
- the connection configuration of these elements is the same as that of the signal voltage sample hold circuit 420.
- the timing control circuit 220 opens the switch 426 and closes the switch 446 during the sample of the signal voltage sample hold circuit 420. On the other hand, the timing control circuit 220 closes the switch 426 and opens the switch 446 while the signal voltage sample hold circuit 420 is being held.
- the timing control circuit 220 can hold the other in one of the samples. The same applies to the signal voltage. As a result, the sample and AD conversion are executed in parallel.
- the reset voltage sample hold circuit 410 and the signal voltage sample hold circuit 420 sample the reset voltage and the signal voltage in order.
- the reset voltage sample hold circuit 430 and the signal voltage sample hold circuit 440 hold the sampled voltage, and the current corresponding to the difference between them is AD-converted.
- the reset voltage sample hold circuit 430 and the signal voltage sample hold circuit 440 sample the reset voltage and the signal voltage in order.
- the reset voltage sample hold circuit 410 and the signal voltage sample hold circuit 420 hold the sampled voltage, and the current corresponding to the difference between them is AD-converted.
- one of the reset voltage sample hold circuits 410 and 430 can sample while the other can hold.
- the reading speed can be doubled as compared with the first embodiment.
- Second Embodiment> In the above-described first embodiment, one sample hold circuit 400 is arranged for each column, but in this configuration, AD conversion can be performed only for each row.
- the solid-state image sensor 200 of the second embodiment is different from the first embodiment in that two sample hold circuits 400 are arranged for each column and AD conversion is performed simultaneously in two rows.
- FIG. 18 is a block diagram showing a configuration example of the solid-state image sensor 200 according to the second embodiment of the present technology.
- vertical signal lines 248 and 249 are wired in the pixel array unit 230 for each row.
- the vertical signal line 248 is connected to even lines.
- the vertical signal line 249 is connected to odd lines.
- FIG. 19 is a block diagram showing a configuration example of the column signal processing circuit 300 according to the second embodiment of the present technology.
- two sample hold circuits 400 are arranged for each column.
- the number of columns is N
- 2N sample hold circuits 400 are arranged.
- two multiplexer 310s, a current source 320, a switch 331, a switch 351, a switch 352, a voltage-current converter 365, and a current mode ADC 371 are also arranged in each row.
- One of the pair of sample hold circuits 400 corresponding to the columns is connected to even rows via the vertical signal line 248, and the other is connected to odd rows via the vertical signal line 249. In other words, half of the 2N sample hold circuits 400 are connected to even rows and the rest are connected to odd rows. Further, the sample hold circuit 400 connected to the even-numbered rows and the sample hold circuit 400 connected to the odd-numbered rows are alternately arranged along the horizontal direction.
- the column signal processing circuit 300 can simultaneously hold the odd-numbered row pixel signal and the even-numbered row pixel signal and perform AD conversion. As a result, the reading speed can be doubled as compared with the first embodiment.
- the two sample hold circuits 400 are arranged for each column, the pixel signals for two rows can be held at the same time and read out.
- the solid-state image sensor 200 of the third embodiment has a first embodiment in that an upper column signal processing circuit and a lower column signal processing circuit are arranged for each column to perform AD conversion in two rows at the same time. Different from.
- FIG. 20 is a block diagram showing a configuration example of the solid-state image sensor 200 according to the third embodiment of the present technology.
- the solid-state image sensor 200 of the third embodiment is different from the first embodiment in that an upper column signal processing circuit 301 and a lower column signal processing circuit 302 are provided instead of the column signal processing circuit 300. .. Further, instead of the horizontal scanning circuit 250, an upper horizontal scanning circuit 251 and a lower horizontal scanning circuit 252 are provided.
- the upper column signal processing circuit 301 is connected to one of an odd-numbered row and an even-numbered row (odd-numbered row, etc.), and performs signal processing on those rows.
- the lower column signal processing circuit 302 is connected to the other of the odd-numbered rows and the even-numbered rows (even-numbered rows and the like), and performs signal processing on those rows.
- the configurations of the upper column signal processing circuit 301 and the lower column signal processing circuit 302 are the same as those of the column signal processing circuit 300.
- the upper column signal processing circuit 301 and the lower column signal processing circuit 302 simultaneously perform AD conversion of odd-numbered rows and even-numbered rows, so that two rows can be read out at the same time.
- the upper horizontal scanning circuit 251 controls the upper column signal processing circuit 301, and the lower horizontal scanning circuit 252 controls the lower column signal processing circuit 302.
- the upper column signal processing circuit 301 and the lower column signal processing circuit 302 are arranged, two rows can be read out at the same time.
- the circuits and elements in the solid-state image sensor 200 are arranged on a single chip, but in this configuration, the circuit scale of the light receiving chip 201 increases as the number of pixels increases. To do.
- the solid-state image sensor 200 of the fourth embodiment is different from the third embodiment in that circuits and the like are dispersedly arranged on two stacked chips.
- FIG. 21 is a diagram showing an example of a laminated structure of the solid-state image sensor 200 according to the fourth embodiment of the present technology.
- the solid-state image sensor 200 includes a circuit chip 202 and a light receiving chip 201 laminated on the circuit chip 202. These chips are electrically connected via a connection such as a via. In addition to vias, it can also be connected by Cu-Cu bonding or bumps.
- FIG. 22 is a block diagram showing a configuration example of the solid-state image sensor 200 according to the fourth embodiment of the present technology.
- a pixel array unit 230 is arranged on the light receiving chip 201. Circuits and elements other than the pixel array unit 230 are arranged on the circuit chip 202.
- the circuits and elements arranged in the light receiving chip 201 and the circuit chip 202 are not limited to the configurations illustrated at the same time.
- a part of each of the upper column signal processing circuit 301 and the lower column signal processing circuit 302 may be arranged on the light receiving chip 201, and the rest may be arranged on the circuit chip 202.
- the solid-state image pickup devices 200 of the first, second, and third embodiments may have a laminated structure.
- the solid-state image sensor 200 of the modified example of the first embodiment may have a laminated structure.
- the circuits and the like are distributed and arranged on the stacked light receiving chips 201 and the circuit chips 202, the circuit scale per chip can be reduced.
- the solid-state image sensor 200 of the fifth embodiment is different from the first embodiment in that the number of AD conversions is reduced by performing pixel addition in the horizontal direction.
- FIG. 23 is a block diagram showing a configuration example of the column signal processing circuit 300 according to the fifth embodiment of the present technology.
- the column signal processing circuit 300 of the fifth embodiment is different from the first embodiment in that the VSL adder circuit 340 is arranged between the VSL horizontal connection circuit 330 and the sample hold circuit 400.
- the VSL adder circuit 340 connects adjacent odd-numbered vertical signal lines to each other and also connects adjacent even-numbered vertical signal lines to each other.
- the VSL adder circuit 340 is an example of the vertical signal line adder circuit described in the claims.
- FIG. 24 is a circuit diagram showing a configuration example of the VSL adder circuit 340 and the SH horizontal connection circuit 350 according to the fifth embodiment of the present technology.
- an inverter 341 a plurality of switches 342, a plurality of switches 343, a plurality of switches 344, and a plurality of switches 345 are arranged.
- Each of the switches 342 to 345 is arranged in every four rows except the last four rows.
- the switches 342 to 345 are arranged by (N-4) / 4.
- the inverter 341 inverts the control signal SWadd from the timing control circuit 220 and outputs it as a control signal xSWadd to the SH horizontal connection circuit 350.
- the switch 342 opens and closes a path between the vertical signal line of the first row and the vertical signal line of the third row among the corresponding four rows according to the control signal SWadd.
- the switch 343 opens and closes the path between the vertical signal line in the second row and the vertical signal line in the fourth row according to the control signal SW vsl .
- the switch 344 opens and closes the path between the vertical signal line in the third row and the sample hold circuit 400 according to the control signal xSWadd.
- the switch 345 opens and closes the path between the vertical signal line in the fourth row and the sample hold circuit 400 according to the control signal xSWadd.
- switches 351 to 360 are arranged in every four rows except the last four rows.
- the switches 351 to 360 are arranged (N-4) / 4 each.
- the switch 351 is a path between the output signal line 408 that transmits the signal voltage of the first row of the corresponding four rows and the output signal line 408 that transmits the signal voltage of the second row according to the control signals SWs. Is to open and close.
- the switch 352 opens and closes a path between the output signal line 409 that transmits the reset voltage of the first row and the output signal line 409 that transmits the reset voltage of the second row according to the control signals SWs. ..
- the switch 353 opens and closes the path between the output signal line 408 in the second row and the output signal line 408 in the third row according to the control signal xSWadd.
- the switch 354 opens and closes the path between the output signal line 409 in the second row and the output signal line 409 in the third row according to the control signal xSWadd.
- the switch 355 opens and closes the path between the output signal line 408 in the third row and the output signal line 408 in the fourth row according to the control signals SWs.
- the switch 356 opens and closes the path between the output signal line 409 in the third row and the output signal line 409 in the fourth row according to the control signals SWs.
- the switch 357 opens and closes the path between the output signal line 408 in the fourth row and the output signal line 408 in the first row of the next four rows according to the control signal xSWadd.
- the switch 358 opens and closes the path between the output signal line 408 in the second row and the output signal line 408 in the first row of the next four rows according to the control signal SWadd.
- the switch 359 opens and closes the path between the output signal line 409 in the fourth row and the output signal line 409 in the first row of the next four rows according to the control signal xSWadd.
- the switch 360 opens and closes the path between the output signal line 409 in the second row and the output signal line 409 in the first row of the next four rows according to the control signal SWadd.
- the timing control circuit 220 closes the switches 342 to 345 by the control signal SWadd when performing pixel addition in the horizontal direction.
- the vertical signal line in the first row and the vertical signal line in the third row are connected, and the vertical signal line in the second row and the vertical signal line in the fourth row are connected.
- the adjacent odd-numbered (first and third columns) vertical signal lines are connected, and the adjacent even-numbered (second and fourth columns) vertical signal lines are connected.
- the pixel signals of the first and third columns are added, and the pixel signals of the second and fourth columns are added.
- the timing control circuit 220 opens switches 342 to 345.
- FIG. 25 is a circuit diagram showing the states of the VSL addition circuit 340 and the SH horizontal connection circuit 350 when the vertical signal lines are connected (that is, pixel addition) in the fifth embodiment of the present technology.
- the switches 351, 352, 355 and 356 are controlled in the closed state by the control signals SWs as in the first embodiment, and the output of the sample hold circuit 400 is horizontally connected.
- the switch 342, 343, 358 and 360 are controlled to the closed state by the control signal SWadd. Further, the switch 344, 345, 353, 354, 357 and 359 are controlled to be in the open state by the control signal xSWadd. As a result, vertical signal lines such as the first row and the third row are horizontally connected. The number of pixels is thinned out in half by connecting the vertical signal lines horizontally (pixel addition). As a result, the reading speed is improved and the power consumption is reduced.
- control signal SWadd When calculating the offset correction value, the control signal SWadd is left as it is, and the control signal SWs releases the horizontal connection of the output of the sample hold circuit 400.
- FIG. 26 is a circuit diagram showing the states of the VSL addition circuit 340 and the SH horizontal connection circuit 350 when the vertical signal lines are not connected (that is, pixel addition) in the fifth embodiment of the present technology.
- the switches 351, 352, 355 and 356 are controlled in the closed state by the control signals SWs as in the first embodiment, and the output of the sample hold circuit 400 is horizontally connected.
- the switches 342, 343, 358 and 360 are controlled to the open state by the control signal SWadd. Further, the switch 344, 345, 353, 354, 357 and 359 are controlled to the closed state by the control signal xSWadd. As a result, the horizontal connection of the vertical signal lines such as the first row and the third row is released. In this case, the pixels are not thinned out, and the same number of pixel signals as in the first embodiment are read out.
- control signal SWadd When calculating the offset correction value, the control signal SWadd is left as it is, and the control signal SWs releases the horizontal connection of the output of the sample hold circuit 400.
- the VSL addition circuit 340 since the VSL addition circuit 340 connects adjacent vertical signal lines, pixel addition can be performed in the horizontal direction. As a result, the number of pixels can be thinned out to improve the reading speed and reduce the power consumption.
- AD conversion is performed by the current mode ADC 371 that targets the current signal, but in this configuration, the voltage-current conversion unit 365 is required before the current mode ADC 371.
- the solid-state image sensor 200 of the sixth embodiment is different from the first embodiment in that AD conversion is performed by an ADC whose voltage is a conversion target and the voltage-current conversion unit 365 is not required.
- FIG. 27 is a block diagram showing a configuration example of the column signal processing circuit 300 according to the sixth embodiment of the present technology.
- the column signal processing circuit 300 of the sixth embodiment differs from the first embodiment in that it includes a selection circuit 380 and a signal processing block 385 instead of the voltage-current conversion unit 365 and the analog-digital conversion unit 370. ..
- the selection circuit 380 selects either the output signal line 408 or 409, and supplies the voltage of the selected signal line to the signal processing block 385 as an analog input signal Ain.
- switches 381 and 382 are arranged for each row. When the number of columns is N, N switches 381 and 382 are arranged.
- the switch 381 opens and closes the path between the output signal line 408 that transmits the signal voltage and the signal processing block 385 according to the control signal SWd from the timing control circuit 220.
- the switch 382 opens and closes the path between the output signal line 409 that transmits the reset voltage and the signal processing block 385 according to the control signal SWp from the timing control circuit 220.
- the timing control circuit 220 controls the switch 381 to the open state and the switch 382 to the closed state by the control signals SWd and SWp.
- the reset voltage is input to the signal processing block 385 as an analog input signal Ain.
- the timing control circuit 220 controls the switch 381 to the closed state and the switch 382 to the open state by the control signals SWd and SWp.
- the signal voltage is input to the signal processing block 385 as an analog input signal Ain.
- FIG. 28 is a block diagram showing a configuration example of the signal processing block 385 according to the sixth embodiment of the present technology.
- a comparator 386, a latch circuit 387, and a switch 388 are arranged in each row in the signal processing block 385.
- the comparator 386, the latch circuit 387, and the switch 388 are arranged N by N.
- the comparator 386 increases or decreases the difference between the pair of analog input signals by a predetermined gain and outputs the analog output signal VCO.
- One of these pair of analog input signals is the analog input signal Vin (ie, either the reset voltage or the signal voltage) from the selection circuit 380, and the other is the ramp signal RMP from the DAC (not shown). ..
- This lamp signal RMP is a slope-shaped signal indicating a reference voltage.
- the analog output signal VCO shows a comparison result of the analog input signal Vin and the lamp signal RMP.
- Av is the gain for the difference between the analog input signal Ain and the lamp signal RMP.
- the latch circuit 387 converts the analog output signal VCO into the digital signal Dout.
- a time code indicating a relative time within the period in which the lamp signal RMP changes and an analog output signal VCO of the corresponding column are input to the latch circuit 387.
- the latch circuit 387 holds the time code when the analog output signal VCO is inverted, and outputs the digital signal Dout to the switch 388.
- the analog input signal Ain is converted into a digital signal Dout by the comparator 386 and the latch circuit 387. That is, the comparator 386 and the latch circuit 387 function as ADCs. Further, an ADC (comparator 386, latch circuit 387, etc.) that uses a slope-shaped signal such as the lamp signal RMP is generally called a single slope type ADC.
- the circuit composed of the latch circuits 387 in each row is an example of the analog-to-digital conversion unit described in the claims.
- the switch 388 outputs the digital signal Dout of the corresponding column to the output unit 375 under the control of the horizontal scanning circuit 250.
- the timing control circuit 220 connects the outputs of the sample hold circuit 400 horizontally to calculate a gain correction value for correcting noise due to variation in gain Av. Further, the timing control circuit 220 releases the horizontal connection of the outputs of the sample hold circuit 400 to calculate the offset correction value.
- the signal processing block 385 converts either the reset voltage or the signal voltage into a digital signal
- the AD is not used in the voltage-current converter 365.
- the conversion can be done.
- the circuit scale can be reduced as compared with the case where the voltage-current conversion unit 365 is provided.
- the technology according to the present disclosure can be applied to various products.
- the technology according to the present disclosure is realized as a device mounted on a moving body of any kind such as an automobile, an electric vehicle, a hybrid electric vehicle, a motorcycle, a bicycle, a personal mobility, an airplane, a drone, a ship, and a robot. You may.
- FIG. 29 is a block diagram showing a schematic configuration example of a vehicle control system, which is an example of a mobile control system to which the technology according to the present disclosure can be applied.
- the vehicle control system 12000 includes a plurality of electronic control units connected via the communication network 12001.
- the vehicle control system 12000 includes a drive system control unit 12010, a body system control unit 12020, an outside information detection unit 12030, an in-vehicle information detection unit 12040, and an integrated control unit 12050.
- a microcomputer 12051, an audio image output unit 12052, and an in-vehicle network I / F (interface) 12053 are shown as a functional configuration of the integrated control unit 12050.
- the drive system control unit 12010 controls the operation of the device related to the drive system of the vehicle according to various programs.
- the drive system control unit 12010 provides a driving force generator for generating the driving force of the vehicle such as an internal combustion engine or a driving motor, a driving force transmission mechanism for transmitting the driving force to the wheels, and a steering angle of the vehicle. It functions as a control device such as a steering mechanism for adjusting and a braking device for generating a braking force of a vehicle.
- the body system control unit 12020 controls the operation of various devices mounted on the vehicle body according to various programs.
- the body system control unit 12020 functions as a keyless entry system, a smart key system, a power window device, or a control device for various lamps such as headlamps, back lamps, brake lamps, blinkers or fog lamps.
- the body system control unit 12020 may be input with radio waves transmitted from a portable device that substitutes for the key or signals of various switches.
- the body system control unit 12020 receives inputs of these radio waves or signals and controls a vehicle door lock device, a power window device, a lamp, and the like.
- the vehicle outside information detection unit 12030 detects information outside the vehicle equipped with the vehicle control system 12000.
- the image pickup unit 12031 is connected to the vehicle exterior information detection unit 12030.
- the vehicle outside information detection unit 12030 causes the image pickup unit 12031 to capture an image of the outside of the vehicle and receives the captured image.
- the vehicle exterior information detection unit 12030 may perform object detection processing or distance detection processing such as a person, a vehicle, an obstacle, a sign, or characters on the road surface based on the received image.
- the image pickup unit 12031 is an optical sensor that receives light and outputs an electric signal according to the amount of the light received.
- the imaging unit 12031 can output an electric signal as an image or can output it as distance measurement information. Further, the light received by the imaging unit 12031 may be visible light or invisible light such as infrared light.
- the in-vehicle information detection unit 12040 detects the in-vehicle information.
- a driver state detection unit 12041 that detects the driver's state is connected to the in-vehicle information detection unit 12040.
- the driver state detection unit 12041 includes, for example, a camera that images the driver, and the in-vehicle information detection unit 12040 determines the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 12041. It may be calculated, or it may be determined whether the driver is dozing.
- the microcomputer 12051 calculates the control target value of the driving force generator, the steering mechanism, or the braking device based on the information inside and outside the vehicle acquired by the vehicle exterior information detection unit 12030 or the vehicle interior information detection unit 12040, and the drive system control unit.
- a control command can be output to 12010.
- the microcomputer 12051 realizes ADAS (Advanced Driver Assistance System) functions including vehicle collision avoidance or impact mitigation, follow-up driving based on inter-vehicle distance, vehicle speed maintenance driving, vehicle collision warning, vehicle lane deviation warning, and the like. It is possible to perform cooperative control for the purpose of.
- ADAS Advanced Driver Assistance System
- the microcomputer 12051 controls the driving force generating device, the steering mechanism, the braking device, and the like based on the information around the vehicle acquired by the outside information detection unit 12030 or the inside information detection unit 12040, so that the driver can control the driver. It is possible to perform coordinated control for the purpose of automatic driving that runs autonomously without depending on the operation.
- the microcomputer 12051 can output a control command to the body system control unit 12020 based on the information outside the vehicle acquired by the vehicle exterior information detection unit 12030.
- the microcomputer 12051 controls the headlamps according to the position of the preceding vehicle or the oncoming vehicle detected by the external information detection unit 12030, and performs coordinated control for the purpose of antiglare such as switching the high beam to the low beam. It can be carried out.
- the audio image output unit 12052 transmits the output signal of at least one of the audio and the image to the output device capable of visually or audibly notifying the passenger or the outside of the vehicle of the information.
- an audio speaker 12061, a display unit 12062, and an instrument panel 12063 are exemplified as output devices.
- the display unit 12062 may include, for example, at least one of an onboard display and a heads-up display.
- FIG. 30 is a diagram showing an example of the installation position of the imaging unit 12031.
- the image pickup unit 12031 has image pickup units 12101, 12102, 12103, 12104, 12105.
- the imaging units 12101, 12102, 12103, 12104, 12105 are provided at positions such as the front nose, side mirrors, rear bumpers, back doors, and the upper part of the windshield in the vehicle interior of the vehicle 12100, for example.
- the imaging unit 12101 provided on the front nose and the imaging unit 12105 provided on the upper part of the windshield in the vehicle interior mainly acquire an image in front of the vehicle 12100.
- the imaging units 12102 and 12103 provided in the side mirrors mainly acquire images of the side of the vehicle 12100.
- the imaging unit 12104 provided on the rear bumper or the back door mainly acquires an image of the rear of the vehicle 12100.
- the imaging unit 12105 provided on the upper part of the windshield in the vehicle interior is mainly used for detecting a preceding vehicle, a pedestrian, an obstacle, a traffic light, a traffic sign, a lane, or the like.
- FIG. 30 shows an example of the photographing range of the imaging units 12101 to 12104.
- the imaging range 12111 indicates the imaging range of the imaging unit 12101 provided on the front nose
- the imaging ranges 12112 and 12113 indicate the imaging ranges of the imaging units 12102 and 12103 provided on the side mirrors, respectively
- the imaging range 12114 indicates the imaging range of the imaging units 12102 and 12103.
- the imaging range of the imaging unit 12104 provided on the rear bumper or the back door is shown. For example, by superimposing the image data captured by the imaging units 12101 to 12104, a bird's-eye view image of the vehicle 12100 as viewed from above can be obtained.
- At least one of the imaging units 12101 to 12104 may have a function of acquiring distance information.
- at least one of the image pickup units 12101 to 12104 may be a stereo camera composed of a plurality of image pickup elements, or may be an image pickup element having pixels for phase difference detection.
- the microcomputer 12051 has a distance to each three-dimensional object within the imaging range 12111 to 12114 based on the distance information obtained from the imaging units 12101 to 12104, and a temporal change of this distance (relative velocity with respect to the vehicle 12100).
- a predetermined speed for example, 0 km / h or more.
- the microcomputer 12051 can set an inter-vehicle distance to be secured in front of the preceding vehicle in advance, and can perform automatic braking control (including follow-up stop control), automatic acceleration control (including follow-up start control), and the like. In this way, it is possible to perform cooperative control for the purpose of automatic driving or the like in which the vehicle travels autonomously without depending on the operation of the driver.
- the microcomputer 12051 converts three-dimensional object data related to a three-dimensional object into two-wheeled vehicles, ordinary vehicles, large vehicles, pedestrians, electric poles, and other three-dimensional objects based on the distance information obtained from the imaging units 12101 to 12104. It can be classified and extracted and used for automatic avoidance of obstacles. For example, the microcomputer 12051 distinguishes obstacles around the vehicle 12100 into obstacles that can be seen by the driver of the vehicle 12100 and obstacles that are difficult to see. Then, the microcomputer 12051 determines the collision risk indicating the risk of collision with each obstacle, and when the collision risk is equal to or higher than the set value and there is a possibility of collision, the microcomputer 12051 via the audio speaker 12061 or the display unit 12062. By outputting an alarm to the driver and performing forced deceleration and avoidance steering via the drive system control unit 12010, driving support for collision avoidance can be provided.
- At least one of the imaging units 12101 to 12104 may be an infrared camera that detects infrared rays.
- the microcomputer 12051 can recognize a pedestrian by determining whether or not a pedestrian is present in the captured image of the imaging units 12101 to 12104.
- pedestrian recognition includes, for example, a procedure for extracting feature points in an image captured by an imaging unit 12101 to 12104 as an infrared camera, and pattern matching processing for a series of feature points indicating the outline of an object to determine whether or not the pedestrian is a pedestrian. It is done by the procedure to determine.
- the audio image output unit 12052 When the microcomputer 12051 determines that a pedestrian is present in the captured images of the imaging units 12101 to 12104 and recognizes the pedestrian, the audio image output unit 12052 outputs a square contour line for emphasizing the recognized pedestrian.
- the display unit 12062 is controlled so as to superimpose and display. Further, the audio image output unit 12052 may control the display unit 12062 so as to display an icon or the like indicating a pedestrian at a desired position.
- the above is an example of a vehicle control system to which the technology according to the present disclosure can be applied.
- the technique according to the present disclosure can be applied to the imaging unit 12031 among the configurations described above.
- the image pickup apparatus 100 of FIG. 1 can be applied to the image pickup unit 12031.
- the technique according to the present disclosure it is possible to reduce random noise due to gain variation and obtain a photographed image that is easier to see, so that driver fatigue can be reduced.
- the present technology can have the following configurations.
- a plurality of analog output units that increase or decrease the difference between a pair of analog input signals by a predetermined gain and output them as analog output signals.
- An analog-to-digital conversion unit that converts the analog output signal of each of the plurality of analog output units into a digital signal
- a solid-state image sensor including a correction processing unit that corrects noise of the digital signal due to a variation in the gain of each of the plurality of analog output units.
- a plurality of signal voltages corresponding to the amount of received light and a predetermined reset voltage are sampled and held in order, and the signal voltage and the reset voltage are output as the pair of analog input signals via the pair of output signal lines.
- the solid-state imaging device further comprising the sample hold circuit of.
- the solid-state imaging device further comprising a sample hold horizontal connection circuit that opens and closes a path between the pair of output signal lines of each of the plurality of sample hold circuits.
- the correction processing unit is When the path is in the closed state, a gain correction value calculation circuit that calculates a correction value for correcting noise due to the variation in gain as a gain correction value, and a gain correction value calculation circuit.
- an offset correction value calculation circuit that calculates the correction value as an offset correction value for correcting noise due to variations in the offsets of the plurality of sample hold circuits, and an offset correction value calculation circuit.
- the solid-state image sensor according to (3) further comprising a correction calculation circuit that corrects the noise by using the calculated gain correction value and the calculated offset correction value.
- the solid-state image sensor according to (3) or (4) wherein the analog output signal is a current signal in which the difference between the signal voltage and the reset voltage is increased or decreased by the gain.
- Each of the plurality of sample hold circuits A pair of reset voltage sample hold circuits and Equipped with a pair of signal voltage sample hold circuits When one of the pair of reset voltage sample hold circuits samples the reset voltage, the other holds it.
- the solid-state imaging device according to any one of (3) to (5), wherein one of the pair of signal voltage sample hold circuits holds the other when the signal voltage is sampled.
- a pixel array unit in which a plurality of rows are arranged is further provided.
- Each of the plurality of rows consists of a plurality of pixels arranged in a predetermined direction.
- Half of the plurality of sample hold circuits are connected to even rows of the plurality of rows, and the rest of the plurality of sample hold circuits are connected to odd rows of the plurality of rows.
- the sample hold circuit connected to the even-numbered rows and the sample-hold circuit connected to the odd-numbered rows are described in any one of (3) to (6), which are arranged alternately along the predetermined direction.
- Solid-state image sensor Solid-state image sensor.
- a pixel array unit in which a plurality of pixels are arranged is further provided.
- the pixel array unit is arranged on a predetermined light receiving chip, and is arranged.
- At least a part of the plurality of sample hold circuits, the sample hold horizontal connection circuit, the plurality of analog output units, the analog-digital conversion unit, and the correction processing unit is arranged on a predetermined circuit chip (3).
- the solid-state image sensor according to any one of (8) to (8).
- a pixel array unit in which a plurality of vertical signal lines connected to the sample hold circuits different from each other are wired, and The vertical signal line addition circuit for connecting the adjacent odd-numbered signal lines of the plurality of vertical signal lines and connecting the adjacent even-numbered signal lines of the plurality of vertical signal lines is further provided.
- the solid-state imaging device according to any one of (3) to (9).
- a plurality of sample hold circuits that sample and hold a signal voltage corresponding to the amount of light received by a pixel and a predetermined reset voltage in order, and output the signal voltage and the reset voltage via a pair of output signal lines.
- a selection circuit that selects one of the pair of output signal lines of each of the plurality of sample hold circuits and outputs the voltage of the selected signal line as one of the pair of analog input signals to the analog-to-digital converter. Further equipped The solid-state image sensor according to (1) above, wherein the other of the pair of analog input signals has a predetermined reference voltage.
- a plurality of analog output units that increase or decrease the difference between a pair of analog input signals by a predetermined gain and output them as analog output signals.
- An analog-to-digital conversion unit that converts the analog output signal of each of the plurality of analog output units into a digital signal
- a correction processing unit that corrects noise of the digital signal due to a variation in the gain of each of the plurality of analog output units
- a correction processing unit that corrects noise of the digital signal due to a variation in the gain of each of the plurality of analog output units
- An imaging device including a digital signal processing circuit that performs predetermined image processing on image data including each of the digital signals.
- (13) An analog output procedure in which each of the plurality of analog output units increases or decreases the difference between the pair of analog input signals by a predetermined gain and outputs the analog output signal.
- An analog-to-digital conversion procedure for converting the analog output signal of each of the plurality of analog output units into a digital signal and A method for controlling a solid-state image sensor, comprising a correction processing procedure for correcting noise of the digital signal due to a variation in the gain of each of the plurality of analog output units.
- Imaging device 110
- Optical unit 120
- DSP circuit 130 Display unit 140
- Operation unit 150
- Bus 160
- Frame memory 170
- Power supply unit 200
- Solid-state imaging element 201
- Light receiving chip 202
- Circuit chip 210
- Vertical scanning circuit 220 Timing control circuit 230
- Pixer array unit 240 pixels
- Photoelectric conversion element 242 Transfer switch 243
- Amplifier circuit 250
- Upper horizontal scanning circuit 252
- Lower horizontal scanning circuit 260
- Test voltage generator 270
- Demultiplexer 280
- Correction value calculation circuit 282
- Offset correction value calculation circuit 283
- Gain correction value calculation circuit 284
- Correction value holder 290
- Correction calculation circuit 291 Line buffer 292
- Subtractor 293 Multiplier 300
- Column signal processing circuit 301
- Lower column signal processing circuit 310 multiplexer 320, 366 Current source 330
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
カラムごとに信号処理を行う固体撮像素子において、画像データの画質を向上させる。 複数のアナログ出力部のそれぞれが、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する。アナログデジタル変換部は、複数のアナログ出力部のそれぞれのアナログ出力信号をデジタル信号に変換する。補正処理部は、複数のアナログ出力部のそれぞれのゲインのばらつきによるデジタル信号のノイズを補正する。
Description
本技術は、固体撮像素子に関する。詳しくは、カラムごとにアナログ信号をデジタル信号に変換する固体撮像素子、撮像装置、および、固体撮像素子の制御方法に関する。
従来より、固定パターンノイズを低減する目的で、受光量に応じた信号電圧と、画素を初期化した際のリセット電圧との差分を求めるCDS(Correlated Double Sampling)処理が固体撮像素子において行われている。例えば、アナログの信号電圧とアナログのリセット電圧とをサンプルホールドし、それらの差分の電圧を電流に変換してアナログデジタル変換器(ADC:Analog-to-Digital Converter)に入力する固体撮像素子が提案されている(例えば、特許文献1参照。)。この固体撮像素子では、カラムごとにADCを行うために、サンプルホールド回路と、一定のゲインで電圧を電流に信号変換する抵抗素子と、ADCとがカラムごとに配置される。
上述の従来技術では、CDS処理の実行により、固定パターンノイズの低減を図っている。しかしながら、カラムごとの抵抗素子にばらつきがあると、電圧を電流に変換する際のゲインについてカラムごとにばらつきが生じてしまう。そして、このゲインのばらつきによりAD(Analog-to-Digital)変換後のデジタル信号にノイズが発生し、画像データの画質が低下するという問題がある。
本技術はこのような状況に鑑みて生み出されたものであり、カラムごとに信号処理を行う固体撮像素子において、画像データの画質を向上させることを目的とする。
本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、上記複数のアナログ出力部のぞれぞれの上記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、上記複数のアナログ出力部のそれぞれの上記ゲインのばらつきによる上記デジタル信号のノイズを補正する補正処理部とを具備する固体撮像素子、および、その制御方法である。これにより、ノイズが低減したデジタル信号からなる画像データが撮像されるという作用をもたらす。
また、この第1の側面において、受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、上記信号電圧および上記リセット電圧を上記一対のアナログ入力信号として一対の出力信号線を介して出力する複数のサンプルホールド回路をさらに具備してもよい。これにより、信号電圧およびリセット電圧の差分がゲインにより増減されるという作用をもたらす。
また、この第1の側面において、上記複数のサンプルホールド回路のそれぞれの上記一対の出力信号線の間の経路を開閉するサンプルホールド横繋ぎ回路をさらに具備してもよい。これにより、サンプルホールド回路のオフセットのばらつきによるノイズが抑制されるという作用をもたらす。
また、この第1の側面において、上記補正処理部は、上記経路が閉状態である場合には上記ゲインのばらつきによるノイズを補正するための補正値をゲイン補正値として算出するゲイン補正値算出回路と、上記経路が開状態である場合には上記複数のサンプルホールド回路のそれぞれのオフセットのばらつきによるノイズを補正するための上記補正値をオフセット補正値として算出するオフセット補正値算出回路と、上記算出されたゲイン補正値と上記算出されたオフセット補正値とを用いて上記ノイズを補正する補正演算回路とを備えてもよい。これにより、オフセットのばらつきによるノイズとゲインのばらつきによるノイズとが低減した画像データが撮像されるという作用をもたらす。
また、この第1の側面において、上記アナログ出力信号は、上記信号電圧と上記リセット電圧との差分を上記ゲインにより増減した電流信号であってもよい。これにより、電流信号がデジタル信号に変換されるという作用をもたらす。
また、この第1の側面において、上記複数のサンプルホールド回路のそれぞれは、一対のリセット電圧サンプルホールド回路と、一対の信号電圧サンプルホールド回路とを備え、上記一対のリセット電圧サンプルホールド回路の一方が上記リセット電圧をサンプルするときに他方が保持し、上記一対の信号電圧サンプルホールド回路の一方が上記信号電圧をサンプルするときに他方が保持してもよい。これにより、一対のサンプルホールド回路の一方が信号のサンプルを行う一方で他方が信号をホールドするという作用をもたらす。
また、この第1の側面において、複数の行を配列した画素アレイ部をさらに具備し、上記複数の行のそれぞれは所定方向に配列された複数の画素からなり、上記複数のサンプルホールド回路の半分は、上記複数の行のうち偶数行に接続され、上記複数のサンプルホールド回路の残りは、上記複数の行のうち奇数行に接続され、上記偶数行に接続されたサンプルホールド回路と、上記奇数行に接続されたサンプルホールド回路とは、上記所定方向に沿って交互に配列されてもよい。これにより、2行が同時にAD変換されるという作用をもたらす。
また、この第1の側面において、複数の行を配列した画素アレイ部をさらに具備し、上記複数のサンプルホールド回路の半分は、上側カラム信号処理回路に配置され、残りは、下側カラム信号処理回路に配置され、上記上側カラム信号処理回路は、上記複数の行内の奇数行および偶数行の一方に接続され、上記下側カラム信号処理回路は、上記奇数行および上記偶数行のうち他方に接続されてもよい。これにより、2行が同時にAD変換されるという作用をもたらす。
また、この第1の側面において、複数の画素を配列した画素アレイ部をさらに具備し、上記画素アレイ部は、所定の受光チップに配置され、上記複数のサンプルホールド回路と上記サンプルホールド横繋ぎ回路と上記複数のアナログ出力部と上記アナログデジタル変換部と上記補正処理部との少なくとも一部は、所定の回路チップに配置されてもよい。これにより、チップ当たりの回路規模が削減されるという作用をもたらす。
また、この第1の側面において、互いに異なる上記サンプルホールド回路に接続された複数の垂直信号線が配線された画素アレイ部と、上記複数の垂直信号線のうち隣接する奇数本目の信号線同士を接続するとともに上記複数の垂直信号線のうち隣接する偶数本目の信号線同士を接続する垂直信号線加算回路とをさらに具備してもよい。これにより、水平方向に画素加算されるという作用をもたらす。
また、この第1の側面において、画素の受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、上記信号電圧および上記リセット電圧を一対の出力信号線を介して出力する複数のサンプルホールド回路と、上記複数のサンプルホールド回路のそれぞれの上記一対の出力信号線の一方を選択し、当該選択した信号線の電圧を上記一対のアナログ入力信号の一方として上記アナログデジタル変換部へ出力する選択回路とをさらに具備し、上記一対のアナログ入力信号の他方は、所定の参照電圧であってもよい。これにより、シングルスロープ型ADCにおいてノイズが低減するという作用をもたらす。
また、本技術の第2の側面は、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、上記複数のアナログ出力部のぞれぞれの上記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、上記複数のアナログ出力部のそれぞれの上記ゲインのばらつきによる上記デジタル信号のノイズを補正する補正処理部と、上記デジタル信号のそれぞれを含む画像データに対して所定の画像処理を行うデジタル信号処理回路とを具備する撮像装置である。これにより、ノイズが低減したデジタル信号からなる画像データが生成され、画像処理が行われるという作用をもたらす。
以下、本技術を実施するための形態(以下、実施の形態と称する)について説明する。説明は以下の順序により行う。
1.第1の実施の形態(ゲインばらつきによるノイズを補正する例)
2.第2の実施の形態(ゲインばらつきによるノイズを補正し、2行同時に読み出す例)
3.第3の実施の形態(ゲインばらつきによるノイズを補正し、上下のカラム信号処理回路より読み出す例)
4.第4の実施の形態(積層構造においてゲインばらつきによるノイズを補正する例)
5.第5の実施の形態(画素加算し、ゲインばらつきによるノイズを補正する例)
6.第6の実施の形態(シングルスロープ型ADCのゲインばらつきによるノイズを補正する例)
7.移動体への応用例
1.第1の実施の形態(ゲインばらつきによるノイズを補正する例)
2.第2の実施の形態(ゲインばらつきによるノイズを補正し、2行同時に読み出す例)
3.第3の実施の形態(ゲインばらつきによるノイズを補正し、上下のカラム信号処理回路より読み出す例)
4.第4の実施の形態(積層構造においてゲインばらつきによるノイズを補正する例)
5.第5の実施の形態(画素加算し、ゲインばらつきによるノイズを補正する例)
6.第6の実施の形態(シングルスロープ型ADCのゲインばらつきによるノイズを補正する例)
7.移動体への応用例
<1.第1の実施の形態>
[撮像装置の構成例]
図1は、本技術の第1の実施の形態における撮像装置100の一構成例を示すブロック図である。この撮像装置100は、画像データを撮像するための装置であり、光学部110、固体撮像素子200およびDSP(Digital Signal Processing)回路120を備える。さらに撮像装置100は、表示部130、操作部140、バス150、フレームメモリ160、記憶部170および電源部180を備える。撮像装置100としては、例えば、デジタルスチルカメラなどのデジタルカメラの他、撮像機能を持つスマートフォンやパーソナルコンピュータ、車載カメラ等が想定される。
[撮像装置の構成例]
図1は、本技術の第1の実施の形態における撮像装置100の一構成例を示すブロック図である。この撮像装置100は、画像データを撮像するための装置であり、光学部110、固体撮像素子200およびDSP(Digital Signal Processing)回路120を備える。さらに撮像装置100は、表示部130、操作部140、バス150、フレームメモリ160、記憶部170および電源部180を備える。撮像装置100としては、例えば、デジタルスチルカメラなどのデジタルカメラの他、撮像機能を持つスマートフォンやパーソナルコンピュータ、車載カメラ等が想定される。
光学部110は、被写体からの光を集光して固体撮像素子200に導くものである。固体撮像素子200は、垂直同期信号XVSに同期して、光電変換により画像データを生成するものである。ここで、垂直同期信号XVSは、撮像のタイミングを示す所定周波数の周期信号である。固体撮像素子200は、生成した画像データをDSP回路120に信号線209を介して供給する。
DSP回路120は、固体撮像素子200からの画像データに対して所定の画像処理を実行するものである。このDSP回路120は、処理後の画像データをバス150を介してフレームメモリ160などに出力する。なお、DSP回路120は、特許請求の範囲に記載のデジタル信号処理回路の一例である。
表示部130は、画像データを表示するものである。表示部130としては、例えば、液晶パネルや有機EL(Electro Luminescence)パネルが想定される。操作部140は、ユーザの操作に従って操作信号を生成するものである。
バス150は、光学部110、固体撮像素子200、DSP回路120、表示部130、操作部140、フレームメモリ160、記憶部170および電源部180が互いにデータをやりとりするための共通の経路である。
フレームメモリ160は、画像データを保持するものである。記憶部170は、画像データなどの様々なデータを記憶するものである。電源部180は、固体撮像素子200、DSP回路120や表示部130などに電源を供給するものである。
[固体撮像素子の構成例]
図2は、本技術の第1の実施の形態における固体撮像素子200の一構成例を示すブロック図である。この固体撮像素子200は、垂直走査回路210、タイミング制御回路220、画素アレイ部230、カラム信号処理回路300、水平走査回路250、テスト電圧発生部260および補正処理部270を備える。また、これらの回路は、例えば、単一の半導体チップに配置される。
図2は、本技術の第1の実施の形態における固体撮像素子200の一構成例を示すブロック図である。この固体撮像素子200は、垂直走査回路210、タイミング制御回路220、画素アレイ部230、カラム信号処理回路300、水平走査回路250、テスト電圧発生部260および補正処理部270を備える。また、これらの回路は、例えば、単一の半導体チップに配置される。
また、画素アレイ部230には、複数の画素240が二次元格子状に配列される。以下、所定の水平方向に配列された画素240の集合を「行」と称し、水平方向に垂直な方向に配列された画素240の集合を「列」と称する。
タイミング制御回路220は、垂直同期信号XVSに同期して垂直走査回路210、カラム信号処理回路300、補正処理部270等の動作タイミングを制御するものである。
垂直走査回路210は、行を順に選択して駆動し、アナログの画素信号を出力させるものである。画素240は、垂直走査回路210の制御に従って、光電変換により画素信号を生成するものである。画素240のそれぞれは、画素信号をカラム信号処理回路300へ出力する。
テスト電圧発生部260は、DSP回路120からのモード信号MODEに従って、所定のテスト電圧を生成し、その電圧の信号をテスト信号としてカラム信号処理回路300に供給するものである。
ここで、モード信号MODEは、固体撮像素子200に対して複数のモードのいずれかを指示する信号である。これらのモードは、キャリブレーションモードと、通常撮像モードとを含む。キャリブレーションモードは、カラム信号処理回路300が、ノイズを補正するための補正値を算出するためのモードである。ノイズの発生原因や、補正値の算出方法については後述する。一方、通常撮像モードは、算出した補正値を用いてノイズを補正しつつ、画像データを撮像するためのモードである。
キャリブレーションモードが設定されるとテスト電圧発生部260は、DA(Digital to Analog)変換などによりテスト信号を生成する。このテスト電圧発生部260として、DAC(Digital to Analog Converter)などが用いられる。また、タイミング制御回路220は、垂直走査回路210を停止させ、補正処理部270は、補正値を演算する。
一方、通常撮像モードが設定されるとテスト電圧発生部260は、テスト信号を生成せず、タイミング制御回路220は、垂直走査回路210に行を駆動させる。また、補正処理部270は、補正値を用いてノイズを補正する。
カラム信号処理回路300は、カラムごとに、画素信号に対してCDS処理やAD変換処理などの信号処理を行うものである。このカラム信号処理回路300は、信号処理後のデジタル信号を補正処理部270に供給する。
補正処理部270は、キャリブレーションモードが設定された場合には補正値を演算し、通常撮像モードが設定された場合には、その補正値を用いてデジタル信号を補正するものである。この補正処理部270は、補正後のデジタル信号を配列した画像データをDSP回路120に信号線209を介して出力する。
[画素の構成例]
図3は、本技術の第1の実施の形態における画素240の一構成例を示す回路図である。この画素240は、光電変換素子241、転送スイッチ242および増幅回路243を備える。
図3は、本技術の第1の実施の形態における画素240の一構成例を示す回路図である。この画素240は、光電変換素子241、転送スイッチ242および増幅回路243を備える。
光電変換素子241は、入射光を電荷に変換するものである。
転送スイッチ242は、垂直走査回路210の制御に従って、光電変換素子241から浮遊拡散層(不図示)へ電荷を転送するものである。
増幅回路243は、浮遊拡散層の電荷量に応じた電圧を増幅するものである。この増幅回路243は、増幅した信号を画素信号として垂直信号線249を介してカラム信号処理回路300へ出力する。
垂直信号線249は、画素アレイ部230において、列ごとに垂直方向に配線される。列数がN(Nは、2以上の整数)である場合には、N本の垂直信号線249が配線される。また、列内の画素240のそれぞれは、対応する垂直信号線249に共通に接続される。
[カラム信号処理回路の構成例]
図4は、本技術の第1の実施の形態におけるカラム信号処理回路300の一構成例を示すブロック図である。このカラム信号処理回路300は、複数のマルチプレクサ310と、複数の電流源320と、VSL横繋ぎ回路330とを備える。また、カラム信号処理回路300は、複数のサンプルホールド回路400と、SH横繋ぎ回路350と、複数の電圧電流変換部365と、アナログデジタル変換部370と、出力部375とをさらに備える。マルチプレクサ310、電流源320、サンプルホールド回路400および電圧電流変換部365のそれぞれは、列ごとに配置される。列数がNである場合には、マルチプレクサ310、電流源320、サンプルホールド回路400および電圧電流変換部365は、N個ずつ配置される。
図4は、本技術の第1の実施の形態におけるカラム信号処理回路300の一構成例を示すブロック図である。このカラム信号処理回路300は、複数のマルチプレクサ310と、複数の電流源320と、VSL横繋ぎ回路330とを備える。また、カラム信号処理回路300は、複数のサンプルホールド回路400と、SH横繋ぎ回路350と、複数の電圧電流変換部365と、アナログデジタル変換部370と、出力部375とをさらに備える。マルチプレクサ310、電流源320、サンプルホールド回路400および電圧電流変換部365のそれぞれは、列ごとに配置される。列数がNである場合には、マルチプレクサ310、電流源320、サンプルホールド回路400および電圧電流変換部365は、N個ずつ配置される。
また、VSL横繋ぎ回路330は、複数のスイッチ331を備える。SH横繋ぎ回路350は、複数のスイッチ351と、複数のスイッチ352とを備える。アナログデジタル変換部370は、複数の電流モードADC371を備える。スイッチ331、351および352のそれぞれは、最終列を除き、列ごとに配置される。列数がNである場合には、スイッチ331、351および352は、N-1個ずつ配置される。電流モードADC371とは、列ごとに配置され、列数がNである場合にN個ずつ配置される。
マルチプレクサ310は、タイミング制御回路220からの制御信号SWtに従って、対応する列の垂直信号線249からの画素信号Vvslと、テスト電圧発生部260からのテスト信号Vtestとの一方を選択するものである。タイミング制御回路220は、キャリブレーションモードである場合に、制御信号SWtにより、マルチプレクサ310にテスト信号Vtestを選択させる。一方、通常撮像モードである場合にタイミング制御回路220は、制御信号SWtにより、マルチプレクサ310に画素信号Vvslを選択させる。マルチプレクサ310は、選択した信号を電流源320を介して対応するサンプルホールド回路400に供給する。マルチプレクサ310の出力に接続される信号線も垂直信号線249とする。
電流源320は、一定の定電流を供給するものである。この電流源320として、例えば、MOS(Metal Oxide Semiconductor)トランジスタが用いられる。
VSL横繋ぎ回路330は、タイミング制御回路220からの制御信号SWvcに従ってN本の垂直信号線249を互いに接続するものである。n(nは、1乃至N-1の整数)個目のスイッチ331は、n本目の垂直信号線249と、n+1本目の垂直信号線249との間の経路を開閉する。タイミング制御回路220は、キャリブレーションモードである場合に、制御信号SWvcにより、全列のスイッチ331を閉状態に制御する。これにより、N本の垂直信号線249が横繋ぎされ、電流源320のMOSトランジスタのばらつきによるノイズを抑制することができる。このノイズの抑制により、補正精度を向上させることができる。一方、通常撮像モードである場合にタイミング制御回路220は、制御信号SWvcにより、全列のスイッチ331を開状態に制御する。
サンプルホールド回路400は、対応する列の画素信号Vvslのリセット電圧と信号電圧とを順に保持し、出力信号線408および409を介して、それらの電圧を対応する電圧電流変換部365へ出力するものである。出力信号線408および409のそれぞれは、N本ずつ配線される。ここで、リセット電圧は、画素240内の浮遊拡散層を初期化したときの画素信号Vvslの電圧である。また、信号電圧は、画素240の受光量に応じた画素信号Vvslの電圧である。
SH横繋ぎ回路350は、制御信号SWsに従ってN対の出力信号線408および409を互いに接続するものである。n個目のスイッチ351は、n本目の出力信号線408と、n+1本目の出力信号線408との間の経路を開閉する。n個目のスイッチ352は、n本目の出力信号線409と、n+1本目の出力信号線409との間の経路を開閉する。タイミング制御回路220は、キャリブレーションモードである場合に、制御信号SWsにより、全列のスイッチ351および352を閉状態に制御する。これにより、N対の出力信号線408および409が横繋ぎされる。一方、通常撮像モードである場合にタイミング制御回路220は、制御信号SWsにより、全列のスイッチ351および352を開状態に制御する。
電圧電流変換部365は、一対のアナログ入力信号の差分を所定のゲインにより増幅してアナログ出力信号として出力するものである。この電圧電流変換部365には、対応するサンプルホールド回路400からのリセット電圧および信号電圧が、一対のアナログ入力信号として入力される。電圧電流変換部365は、これらのアナログ入力信号(すなわち、電圧)を、それらの差分を増減した電流信号に変換する。電圧電流変換部365は、生成した電流信号をアナログ出力信号として対応する電流モードADCに供給する。
なお、電圧電流変換部365は、特許請求の範囲に記載のアナログ出力部の一例である。
電流モードADC371は、電圧電流変換部365からのアナログ出力信号(すなわち、電流信号)をデジタル信号Doutに変換するものである。電流モードADC371として、例えば、デルタシグマADCが用いられる。電流モードADC371は、水平走査回路250の制御に従って出力部375にデジタル信号を供給する。
出力部375は、デジタル信号Doutのそれぞれを補正処理部270に供給するものである。
図5は、本技術の第1の実施の形態におけるスイッチ351の一構成例を示す回路図である。同図におけるaは、nMOS(n-channel MOS)トランジスタおよびpMOS(p-channel MOS)トランジスタを用いる場合のスイッチ351の回路図である。同図におけるbは、nMOSトランジスタを用いる場合のスイッチ351の回路図である。同図におけるcは、pMOSトランジスタを用いる場合のスイッチ351の回路図である。
同図におけるaに例示するように、nMOSトランジスタ362およびpMOSトランジスタ363を用いる場合、さらにインバータ361が配置される。nMOSトランジスタ362およびpMOSトランジスタ363は、開閉する対象の経路に並列に挿入される。インバータ361は、制御信号SWsを反転させてpMOSトランジスタ363のゲートに供給するものである。また、nMOSトランジスタ362のゲートには、制御信号SWsが入力される。
また、同図におけるbに例示するように、nMOSトランジスタ362のみを用いることもできる。同図におけるcに例示するように、pMOSトランジスタ363のみを用いることもできる。
スイッチ351以外のスイッチ(スイッチ331や352)についても、スイッチ351と同様に、nMOSトランジスタやpMOSトランジスタを用いて実現することができる。
[サンプルホールド回路および電圧電流変換部の構成例]
図6は、本技術の第1の実施の形態におけるサンプルホールド回路400および電圧電流変換部365の一構成例を示すブロック図である。サンプルホールド回路400は、リセット電圧サンプルホールド回路410および信号電圧サンプルホールド回路420を備える。また、電圧電流変換部365は、電流源366と、抵抗367と、nMOSトランジスタ368および369とを備える。
図6は、本技術の第1の実施の形態におけるサンプルホールド回路400および電圧電流変換部365の一構成例を示すブロック図である。サンプルホールド回路400は、リセット電圧サンプルホールド回路410および信号電圧サンプルホールド回路420を備える。また、電圧電流変換部365は、電流源366と、抵抗367と、nMOSトランジスタ368および369とを備える。
リセット電圧サンプルホールド回路410は、リセット電圧をサンプルして保持するものである。このリセット電圧サンプルホールド回路410は、スイッチ411、413および414と、コンデンサ412と、アンプ415とを備える。
スイッチ411は、タイミング制御回路220からの制御信号SW11に従って垂直信号線249と、コンデンサ412との間の経路を開閉するものである。
コンデンサ412は、スイッチ411と、アンプ415の反転入力端子(-)との間に挿入される。
スイッチ413は、タイミング制御回路220からの制御信号SW12に従ってスイッチ411およびコンデンサ412の接続点と、電流源366および抵抗367の接続点とを開閉するものである。
スイッチ414は、タイミング制御回路220からの制御信号SW13に従ってアンプ415の反転入力端子(-)と、その出力端子との間の経路を開閉するものである。
アンプ415は、コンデンサ412の一端と、接地電圧との差分を増幅するものである。このアンプ415の出力端子は、nMOSトランジスタ369のゲートに接続されている。スイッチ413および電圧電流変換部365の間の信号線とが出力信号線409に該当し、この信号線が横繋ぎされる。
信号電圧サンプルホールド回路420は、信号電圧をサンプルして保持するものである。この信号電圧サンプルホールド回路420は、スイッチ421、423および424と、コンデンサ422と、アンプ425とを備える。
信号電圧サンプルホールド回路420内の素子の接続構成は、リセット電圧サンプルホールド回路410と同様である。ただし、スイッチ423の一端は、抵抗367およびnMOSトランジスタ368の接続点に接続される。また、アンプ425の出力端子は、nMOSトランジスタ368のゲートに接続される。また、スイッチ423および電圧電流変換部365の間の信号線とが出力信号線408に該当し、この信号線が横繋ぎされる。
電圧電流変換部365において、電流源366、抵抗367およびnMOSトランジスタ368は、電源とアナログデジタル変換部370との間において、直列に接続される。また、nMOSトランジスタ369のドレインは、電流源366および抵抗367の接続点に接続され、ソースは、接地される。
タイミング制御回路220は、リセット電圧のサンプル前に、スイッチ414および424を閉状態に制御してアンプ415および425をオートゼロ状態にする。
そして、タイミング制御回路220は、画素の初期化時にスイッチ411のみを閉状態に、残りのスイッチ群を開状態にする。これにより、リセット電圧がサンプルされる。
次に、タイミング制御回路220は、露光の終了時にスイッチ421のみを閉状態に、残りのスイッチ群を開状態にする。これにより、信号電圧がサンプルされる。
そして、タイミング制御回路220は、AD期間内において、スイッチ413および423を閉状態にし、残りのスイッチ群を開状態にする。これにより、リセット電圧および信号電圧が保持され、アンプ415および425は、それらの電圧を一対のアナログ入力信号として出力する。
電圧電流変換部365は、一対のアナログ入力信号(リセット電圧および信号電圧)を、それらの差分を増減した電流信号Ioutに変換し、アナログ出力信号としてアナログデジタル変換部370へ出力する。すなわち、CDS処理および電圧電流変換処理が行われる。
リセット電圧をVvslp、信号電圧をVvslsとすると、電流信号(すなわち、アナログ出力信号)Ioutは、次の式により表される。
Iout=G×(Vvslp-Vvsls)+Ofs=G×Vin+Ofs
上式において、Gは、抵抗367の抵抗値の逆数に比例するゲインであり、単位は、例えば、アンペア毎ボルト(A/V)である。Ofsは、サンプルホールド回路400のサンプルおよびホールドにより生じたオフセットであり、単位は例えば、アンペア(A)である。列ごとのゲインGとオフセットOfsには、ばらつきが生じることがある。Vinは、CDS処理後の画素信号であり、単位は、例えば、ボルト(V)である。
上式において、Gは、抵抗367の抵抗値の逆数に比例するゲインであり、単位は、例えば、アンペア毎ボルト(A/V)である。Ofsは、サンプルホールド回路400のサンプルおよびホールドにより生じたオフセットであり、単位は例えば、アンペア(A)である。列ごとのゲインGとオフセットOfsには、ばらつきが生じることがある。Vinは、CDS処理後の画素信号であり、単位は、例えば、ボルト(V)である。
[補正処理部の構成例]
図7は、本技術の第1の実施の形態における補正処理部270の一構成例を示すブロック図である。この補正処理部270は、デマルチプレクサ271、補正値算出回路280および補正演算回路290を備える。
図7は、本技術の第1の実施の形態における補正処理部270の一構成例を示すブロック図である。この補正処理部270は、デマルチプレクサ271、補正値算出回路280および補正演算回路290を備える。
デマルチプレクサ271は、モード信号MODEに従って、カラム信号処理回路300からのデジタル信号を補正値算出回路280と補正演算回路290とのいずれかへ出力するものである。キャリブレーションモードが設定された場合にデマルチプレクサ271は、デジタル信号を補正値算出回路280へ出力し、通常撮像モードが設定された場合に補正演算回路290へ出力する。
補正値算出回路280は、ゲインGやオフセットOfsの列ごとのばらつきによるノイズを補正するための補正値を算出するものである。この補正値算出回路280は、デマルチプレクサ281、オフセット補正値算出回路282、ゲイン補正値算出回路283および補正値保持部284を備える。
デマルチプレクサ281は、タイミング制御回路220からの制御信号SWsに従ってデマルチプレクサ271からのデジタル信号を、オフセット補正値算出回路282およびゲイン補正値算出回路283のいずれかへ出力するものである。
オフセット補正値算出回路282は、SH横繋ぎ回路350により横繋ぎされていない場合に、列ごとのオフセットOfsのばらつきによるノイズを補正するための補正値をオフセット補正値として、列のそれぞれについて算出するものである。このオフセットOfsによるノイズは、カラムごとにAD変換を行う場合、画像データにおいて縦筋状のランダムノイズとして現れる。オフセット補正値算出回路282は、算出したオフセット補正値のそれぞれを補正値保持部284に保持させる。
ゲイン補正値算出回路283は、SH横繋ぎ回路350により横繋ぎされた場合に、列ごとのゲインGのばらつきによるノイズを補正するための補正値をゲイン補正値として、列のそれぞれについて算出するものである。このゲインによるノイズは、カラムごとにAD変換を行う場合、画像データにおいて縦筋状のランダムノイズとして現れる。このゲイン補正値算出回路283は、算出したゲイン補正値のそれぞれを補正値保持部284に保持させる。
補正値保持部284は、列ごとのオフセット補正値およびゲイン補正値を保持するものである。列数がNである場合には、オフセット補正値およびゲイン補正値は、N個ずつ保持される。
補正演算回路290は、オフセット補正値およびゲイン補正値を用いて、オフセットおよびゲインのばらつきによるデジタル信号のノイズを補正するものである。この補正演算回路290は、ラインバッファ291、減算器292および乗算器293を備える。
ラインバッファ291は、少なくとも1行分のデジタル信号を保持するものである。このラインバッファ291は、保持した複数のデジタル信号を順に減算器292に供給する。
減算器292は、デジタル信号から、対応する列のオフセット補正値を減算するものである。この減算器292は、減算後のデジタル信号を乗算器293に供給する。乗算器293は、デジタル信号に対して、対応する列のゲイン補正値を乗算するものである。この乗算器293は、乗算後のデジタル信号をDSP回路120に供給する。
キャリブレーションモードにおける固体撮像素子200の動作について説明する。キャリブレーションモードが設定されると、タイミング制御回路220は、カラム信号処理回路300を制御して垂直信号線249と出力信号線408および409とのそれぞれを横繋ぎさせる。また、テスト電圧発生部260は、遮光された際のレベルである黒レベルVLをテスト電圧として供給する。そして、カラム信号処理回路300は、M(Mは、整数)行分の電流信号Ioutを順にAD変換する。また、タイミング制御回路220は、デマルチプレクサ281を制御してデジタル信号をゲイン補正値算出回路283へ出力させる。
黒レベルVLについて全行のAD変換が終了すると、テスト電圧発生部260は、黒レベルと異なる所定レベル(例えば、輝度が最も高いときのレベル)である白レベルVHをテスト電圧として供給する。そして、カラム信号処理回路300は、M行を順にAD変換する。ゲイン補正値算出回路283は、黒レベルVLのときのデジタル信号と、白レベルVHのときのデジタル信号とから、列ごとにゲイン補正値を算出する。
このゲイン補正値の算出方法について説明する。出力信号線408および409の横繋ぎにより、オフセットのばらつきに起因するランダムノイズが抑制される。このため、ゲイン補正値算出回路283は、それらのデジタル信号からゲイン補正値を算出することができる。
黒レベルVL印加時においてN個の列のそれぞれについて、M個のデジタル信号が取得される。このときの第n列の平均値をカラム平均値vlgain-nとする。また、白レベルVH印加時においてN個の列のそれぞれについて、M個のデジタル信号が取得される。このときの第n列の平均値をカラム平均値vhgain-nとする。また、カラム平均値vlgain-1乃至vlgain-Nの平均値をライン平均値vlgain-AVとし、カラム平均値vhgain-1乃至vhgain-Nの平均値をライン平均値vhgain-AVとする。このとき、第n列のゲイン補正値cgain-nは、次の式により算出される。
cgain-n=(vhgain-AV-vlgain-AV)/(vhgain-n-vlgain-n) …式1
cgain-n=(vhgain-AV-vlgain-AV)/(vhgain-n-vlgain-n) …式1
次にタイミング制御回路220は、カラム信号処理回路300を制御して出力信号線408および409とのそれぞれの横繋ぎを解除させる。また、テスト電圧発生部260は、黒レベルVLをテスト電圧として供給する。そして、カラム信号処理回路300は、M行を順にAD変換する。また、タイミング制御回路220は、デマルチプレクサ281を制御してデジタル信号をオフセット補正値算出回路282へ出力させる。オフセット補正値算出回路282は、列ごとにオフセット補正値を算出する。
出力信号線408および409の横繋ぎが解除されている場合、ゲインのばらつきと、オフセットのばらつきとに起因するランダムノイズが生じる。ゲイン補正値は算出済みであるため、ゲイン補正値算出回路283は、そのゲイン補正値によりゲインのばらつきによるランダムノイズの影響を無くし、オフセット補正値を算出することができる。
第n列のサンプルの平均値をカラム平均値vlofs-nとする。また、vlofs-1乃至vlofs-Nの平均値をライン平均値vlofs-AVとする。このとき、第n列のオフセット補正値cofs-nは、次の式により算出される。
cofs-n=vlofs-AV-vlofs-n×cgain-n ・・・式2
cofs-n=vlofs-AV-vlofs-n×cgain-n ・・・式2
図8は、本技術の第1の実施の形態におけるテスト電圧とデジタル信号との関係の一例を示すグラフである。同図における横軸は、テスト電圧であり、同図における縦軸は、そのテスト電圧に応じた電流信号IoutをAD変換したデジタル信号である。また、同図における実線は、テスト電圧と第n列のカラム平均値との間の関係を示す直線であり、点線はテスト電圧と、ライン平均値との間の関係を示す直線である。
同図に例示するように、ある列の直線(実線)は、平均値の直線(点線)と一致しないことがある。黒レベルVL印加時の第n列のカラム平均値をvlgain-nとし、白レベルVH印加時の第n列のカラム平均値をvhgain-nとする。また、黒レベルVL印加時のライン平均値vlgain-AVとし、白レベルVH印加時のライン平均値vhgain-AVとする。この場合、カラム平均値vhgain-nおよびvlgain-nの差分と、ライン平均値vhgain-AVおよびvlgain-AVの差分との比率が、ゲインのばらつきを補正するためのゲイン補正値として式1により算出される。
ここで、仮に補正値算出の際、SH横繋ぎ回路350による横繋ぎを行わなかった場合、ゲインによるランダムノイズと、オフセットによるランダムノイズとを分離することができず、補正値による補正精度が低下するおそれがある。これに対して、SH横繋ぎ回路350による横繋ぎを行う構成では、オフセットによるランダムノイズを抑制することができるため、正確なゲイン補正値を算出することができる。また、SH横繋ぎ回路350による横繋ぎを解除してオフセット補正値も算出するため、オフセット補正値による補正精度を低下させずに、ゲイン補正値による補正精度を向上させることができる。
図9は、本技術の第1の実施の形態におけるオフセット補正値およびゲイン補正値の一例を示す図である。同図に例示するように、補正値保持部284は、列に割り当てられたアドレスである列アドレスごとに、その列のオフセット補正値およびゲイン補正値を保持する。例えば、列アドレスY1に対応付けて、オフセット補正値cofs-1およびゲイン補正値cgain-1が保持される。また、列アドレスY2に対応付けて、オフセット補正値cofs-2およびゲイン補正値cgain-2が保持される。
図10は、本技術の第1の実施の形態における固体撮像素子200の動作の一例を示すタイミングチャートである。固体撮像素子200は、タイミングT0においてキャリブレーションモードに移行したものとする。
タイミング制御回路220は、制御信号SWvcおよびSWsにより対応するスイッチをオン状態に制御し、垂直信号線249と、サンプルホールド回路の400の出力信号線408および409とのそれぞれを横繋ぎさせる。
また、テスト電圧発生部260は、黒レベルVLをテスト電圧として供給する。そして、カラム信号処理回路300は、垂直同期信号XVSに同期してM行を順にAD変換する。
そして、タイミングT1においてテスト電圧発生部260は、白レベルVHをテスト電圧として供給する。カラム信号処理回路300は、垂直同期信号XVSに同期してM行を順にAD変換する。補正処理部270は、黒レベルVLのときのデジタル信号と、白レベルVHのときのデジタル信号とから、列ごとに式1によりゲイン補正値を算出する。
次にタイミングT2において、タイミング制御回路220は、制御信号SWsにより対応するスイッチをオフ状態に制御し、サンプルホールド回路の400の出力信号線408および409の横繋ぎを解除する。テスト電圧発生部260は、黒レベルVLをテスト電圧として供給する。カラム信号処理回路300は、垂直同期信号XVSに同期してM行を順にAD変換する。補正処理部270は、デジタル信号と、ゲイン補正値とから、式2により列ごとにオフセット補正値を算出する。
タイミングT3において固体撮像素子200は、通常撮像モードに移行する。タイミング制御回路220は、制御信号SWvcおよびSWsにより対応するスイッチをオフ状態に制御し、垂直信号線249と、サンプルホールド回路400の出力信号線408および409とのそれぞれの横繋ぎを解除する。補正処理部270は、オフセット補正値およびゲイン補正値を用いてデジタル信号の補正演算を行う。
図11は、本技術の第1の実施の形態における補正の効果を説明するためのグラフである。同図におけるaは、アナログゲインとランダムノイズとの関係の一例を示すグラフである。同図におけるbは、ダイナミックレンジとアナログゲインとの関係の一例を示すグラフである。同図におけるcは、単位ダイナミックレンジ当たりのランダムノイズとアナログゲインとの関係の一例を示すグラフである。
同図におけるaの縦軸は、入力換算のランダムノイズである。横軸は、アナログゲインであり、電圧を電流に変換する際のゲインGに該当する。同図におけるbの縦軸は、ダイナミックレンジであり、横軸はアナログゲインである。同図におけるcの縦軸は、単位ダイナミックレンジ当たりのランダムノイズであり、横軸は、アナログゲインである。また、同図におけるaおよびcの実線は、ゲイン補正値およびオフセット補正値による補正を行った場合の軌跡を示し、一点鎖線は、補正を行わない場合の軌跡を示す。
同図におけるaに例示するように、補正を行うことにより、特にアナログゲインが大きいほど、ランダムノイズの低減の効果が大きくなる。また、同図におけるbに例示するように、一般にアナログゲインが大きいほど、ダイナミックレンジは狭くなる。したがって、同図におけるcに例示するように、特にアナログゲインが大きい場合に、単位ダイナミックレンジ当たりのランダムノイズの低減効果が大きくなる。
[固体撮像素子の動作例]
図12は、本技術の第1の実施の形態における固体撮像素子200の動作の一例を示すフローチャートである。この動作は、例えば、固体撮像素子200に電源が投入されたときに開始される。
図12は、本技術の第1の実施の形態における固体撮像素子200の動作の一例を示すフローチャートである。この動作は、例えば、固体撮像素子200に電源が投入されたときに開始される。
固体撮像素子200は、キャリブレーションモードが設定されたか否かを判断する(ステップS901)。キャリブレーションモードが設定された場合に(ステップS901:Yes)、固体撮像素子200内のタイミング制御回路220は、カラム信号処理回路300の入力先を画素240からテスト電圧発生部260に切り替える(ステップS902)。また、タイミング制御回路220は、垂直信号線249の横繋ぎを行い(ステップS903)、ゲイン補正値を算出するためのゲイン補正値算出処理を実行する(ステップS910)。そして、タイミング制御回路220は、オフセット補正値を算出するためのオフセット補正値算出処理を実行する(ステップS920)。
一方、キャリブレーションモードが設定されていない場合(ステップS901:No)、または、ステップS920の後に固体撮像素子200は、通常撮像モードが設定されたか否かを判断する(ステップS904)。通常撮像モードが設定されていない場合に(ステップS904:No)、タイミング制御回路220は、ステップS904以降を繰り返す。
一方、通常撮像モードが設定された場合に(ステップS904:Yes)、タイミング制御回路220は、カラム信号処理回路300の入力先を画素240に切り替える(ステップS905)。また、タイミング制御回路220は、垂直信号線249の横繋ぎを解除し(ステップS906)、カラム信号処理回路300は、デジタル信号からなる画像データを生成する(ステップS907)。補正処理部270は、ゲインおよびオフセットのばらつきによるノイズを補正する(ステップS908)。ステップS908の後に、固体撮像素子200は、ステップS904以降を繰り返し実行する。
図13は、本技術の第1の実施の形態におけるゲイン補正値算出処理の一例を示すフローチャートである。タイミング制御回路220は、サンプルホールド回路400の出力(すなわち、出力信号線408および409)の横繋ぎを行う(ステップS911)。また、テスト電圧発生部260は、黒レベルVLを印加する(ステップS912)。補正処理部270は、列ごとのカラム平均値vlgain-nと、ライン平均値vlgain-AVとを算出する(ステップS913)。
次に、テスト電圧発生部260は、白レベルVHを印加する(ステップS914)。補正処理部270は、列ごとのカラム平均値vhgain-nと、ライン平均値vhgain-AVとを算出する(ステップS915)。補正処理部270は、式1により、ゲイン補正値を列ごとに算出し(ステップS916)、それらを保持する(ステップS917)。タイミング制御回路220は、サンプルホールド回路400の出力の横繋ぎを解除し(ステップS918)、ゲイン補正値算出処理を終了する。
図14は、本技術の第1の実施の形態におけるオフセット補正値算出処理の一例を示すフローチャートである。テスト電圧発生部260は、黒レベルVLを印加し(ステップS921)、補正処理部270は、列ごとのカラム平均値vhofs-nを算出する(ステップS922)。補正処理部270は、式2により、オフセット補正値を列ごとに算出し(ステップS923)、それらを保持する(ステップS924)。ステップS924の後に、固体撮像素子200は、オフセット補正値算出処理を終了する。
このように、本技術の第1の実施の形態によれば、補正処理部270が、列ごとの電圧電流変換部365のゲインのばらつきによるノイズを補正するため、補正しない場合と比較して画像データの画質を向上させることができる。
[変形例]
上述の第1の実施の形態では、リセット電圧サンプルホールド回路および信号電圧サンプルホールド回路を列ごとに1つずつ配置していた。しかし、この構成では、サンプル中に平行してAD変換を行うことができない。この第1の実施の形態の変形例における固体撮像素子は、リセット電圧サンプルホールド回路および信号電圧サンプルホールド回路を列ごとに2つずつ配置し、サンプルおよびAD変換を並列に行う点において第1の実施の形態と異なる。
上述の第1の実施の形態では、リセット電圧サンプルホールド回路および信号電圧サンプルホールド回路を列ごとに1つずつ配置していた。しかし、この構成では、サンプル中に平行してAD変換を行うことができない。この第1の実施の形態の変形例における固体撮像素子は、リセット電圧サンプルホールド回路および信号電圧サンプルホールド回路を列ごとに2つずつ配置し、サンプルおよびAD変換を並列に行う点において第1の実施の形態と異なる。
図15は、本技術の第1の実施の形態の変形例におけるサンプルホールド回路400の一構成例を示す回路図である。この第1の実施の形態変形例のサンプルホールド回路400には、リセット電圧サンプルホールド回路430および信号電圧サンプルホールド回路440がさらに配置される点において第1の実施の形態と異なる。
図16は、本技術の第1の実施の形態の変形例におけるリセット電圧サンプルホールド回路410および430の一構成例を示す回路図である。
第1の実施の形態の変形例のリセット電圧サンプルホールド回路410は、スイッチ416をさらに備える。スイッチ416は、タイミング制御回路220からの制御信号SW14に従って、アンプ415の出力端子と、nMOSトランジスタ369のゲートとの間の経路を開閉するものである。
リセット電圧サンプルホールド回路430は、スイッチ431、433、434および436と、コンデンサ432と、アンプ435とを備える。これらの素子の接続構成は、リセット電圧サンプルホールド回路410と同様である。
タイミング制御回路220は、リセット電圧サンプルホールド回路410のサンプル中にスイッチ416を開状態にし、スイッチ436を閉状態にする。一方、タイミング制御回路220は、リセット電圧サンプルホールド回路410のホールド中にスイッチ416を閉状態にし、スイッチ436を開状態にする。
図17は、本技術の第1の実施の形態の変形例における信号電圧サンプルホールド回路420および440の一構成例を示す回路図である。
第1の実施の形態の変形例の信号電圧サンプルホールド回路420は、スイッチ426をさらに備える。スイッチ426は、タイミング制御回路220からの制御信号SW24に従って、アンプ425の出力端子と、nMOSトランジスタ368のゲートとの間の経路を開閉するものである。
信号電圧サンプルホールド回路440は、スイッチ441、443、444および446と、コンデンサ442と、アンプ445とを備える。これらの素子の接続構成は、信号電圧サンプルホールド回路420と同様である。
タイミング制御回路220は、信号電圧サンプルホールド回路420のサンプル中にスイッチ426を開状態にし、スイッチ446を閉状態にする。一方、タイミング制御回路220は、信号電圧サンプルホールド回路420のホールド中にスイッチ426を閉状態にし、スイッチ446を開状態にする。
上述したように、リセット電圧サンプルホールド回路410および430を設けたため、タイミング制御回路220は、それらの一方のサンプル中に他方をホールドさせることができる。信号電圧についても同様である。これにより、サンプルおよびAD変換が並列に実行される。
例えば、奇数行の読出しの際に、リセット電圧サンプルホールド回路410および信号電圧サンプルホールド回路420は、順にリセット電圧および信号電圧をサンプルする。一方、リセット電圧サンプルホールド回路430および信号電圧サンプルホールド回路440は、サンプルした電圧をホールドし、それらの差分に応じた電流がAD変換される。
また、偶数行の読出しの際に、リセット電圧サンプルホールド回路430および信号電圧サンプルホールド回路440は、順にリセット電圧および信号電圧をサンプルする。一方、リセット電圧サンプルホールド回路410および信号電圧サンプルホールド回路420は、サンプルした電圧をホールドし、それらの差分に応じた電流がAD変換される。
このように、本技術の第1の実施の形態の変形例によれば、リセット電圧サンプルホールド回路410および430の一方がサンプルを行う一方で他方がホールドすることができる。信号電圧サンプルホールド回路420および440の組についても同様である。これにより、第1の実施の形態と比較して読出し速度を2倍にすることができる。
<2.第2の実施の形態>
上述の第1の実施の形態では、列ごとに、1つのサンプルホールド回路400を配置していたが、この構成では、1行ずつしかAD変換を行うことができない。この第2の実施の形態の固体撮像素子200は、列ごとに、2つのサンプルホールド回路400を配置して、2行同時にAD変換を行う点において第1の実施の形態と異なる。
上述の第1の実施の形態では、列ごとに、1つのサンプルホールド回路400を配置していたが、この構成では、1行ずつしかAD変換を行うことができない。この第2の実施の形態の固体撮像素子200は、列ごとに、2つのサンプルホールド回路400を配置して、2行同時にAD変換を行う点において第1の実施の形態と異なる。
図18は、本技術の第2の実施の形態における固体撮像素子200の一構成例を示すブロック図である。この第2の実施の形態において、画素アレイ部230には、列ごとに垂直信号線248および249が配線される。垂直信号線248は、偶数行に接続される。一方、垂直信号線249は奇数行に接続される。
図19は、本技術の第2の実施の形態におけるカラム信号処理回路300の一構成例を示すブロック図である。この第2の実施の形態のカラム信号処理回路300において、列ごとにサンプルホールド回路400が2つ配置される。列数がNである場合、2N個のサンプルホールド回路400が配置される。同様に、マルチプレクサ310、電流源320、スイッチ331、スイッチ351、スイッチ352、電圧電流変換部365および電流モードADC371も列ごとに2つ配置される。
列に対応する一対のサンプルホールド回路400の一方は、垂直信号線248を介して偶数行に接続され、他方は、垂直信号線249を介して奇数行に接続される。言い換えれば、2N個のサンプルホールド回路400の半分が偶数行に接続され、残りが奇数行に接続される。また、偶数行に接続されたサンプルホールド回路400と、奇数行に接続されたサンプルホールド回路400とは水平方向に沿って交互に配列される。
上述の構成により、カラム信号処理回路300は、奇数行の画素信号と偶数行の画素信号とを同時に保持し、AD変換することができる。これにより、第1の実施の形態と比較して読出し速度を2倍にすることができる。
なお、第2の実施の形態に、第1の実施の形態の変形例を適用することもできる。
このように、本技術の第2の実施の形態によれば、列ごとに、2つのサンプルホールド回路400を配置したため、2行分の画素信号を同時に保持し、それらを読み出すことができる。
<3.第3の実施の形態>
上述の第1の実施の形態では、カラム信号処理回路300のみを配置していたが、この構成では、1行ずつしかAD変換を行うことができない。この第3の実施の形態の固体撮像素子200は、列ごとに、上側カラム信号処理回路および下側カラム信号処理回路を配置して、2行同時にAD変換を行う点において第1の実施の形態と異なる。
上述の第1の実施の形態では、カラム信号処理回路300のみを配置していたが、この構成では、1行ずつしかAD変換を行うことができない。この第3の実施の形態の固体撮像素子200は、列ごとに、上側カラム信号処理回路および下側カラム信号処理回路を配置して、2行同時にAD変換を行う点において第1の実施の形態と異なる。
図20は、本技術の第3の実施の形態における固体撮像素子200の一構成例を示すブロック図である。この第3の実施の形態の固体撮像素子200は、カラム信号処理回路300の代わりに、上側カラム信号処理回路301および下側カラム信号処理回路302が設けられる点において第1の実施の形態と異なる。また、水平走査回路250の代わりに、上側水平走査回路251および下側水平走査回路252が設けられる。
上側カラム信号処理回路301は、奇数行および偶数行の一方(奇数行など)に接続され、それらの行に対して信号処理をおこなうものである。下側カラム信号処理回路302は、奇数行および偶数行の他方(偶数行など)に接続され、それらの行に対して信号処理をおこなうものである。上側カラム信号処理回路301および下側カラム信号処理回路302のそれぞれの構成は、カラム信号処理回路300と同様である。
上側カラム信号処理回路301および下側カラム信号処理回路302が奇数行および偶数行を同時にAD変換することにより、2行を同時に読み出すことができる。
上側水平走査回路251は、上側カラム信号処理回路301を制御し、下側水平走査回路252は、下側カラム信号処理回路302を制御する。
なお、第3の実施の形態に、第1の実施の形態の変形例を適用することもできる。
このように、本技術の第2の実施の形態によれば、上側カラム信号処理回路301および下側カラム信号処理回路302を配置したため、2行を同時に読み出すことができる。
<4.第4の実施の形態>
上述の第3の実施の形態では、単一のチップに固体撮像素子200内の回路や素子を配置していたが、この構成では、画素数が増大するほど、受光チップ201の回路規模が増大する。この第4の実施の形態の固体撮像素子200は、積層された2枚のチップに、分散して回路等を配置する点において第3の実施の形態と異なる。
上述の第3の実施の形態では、単一のチップに固体撮像素子200内の回路や素子を配置していたが、この構成では、画素数が増大するほど、受光チップ201の回路規模が増大する。この第4の実施の形態の固体撮像素子200は、積層された2枚のチップに、分散して回路等を配置する点において第3の実施の形態と異なる。
図21は、本技術の第4の実施の形態における固体撮像素子200の積層構造の一例を示す図である。この固体撮像素子200は、回路チップ202と、その回路チップ202に積層された受光チップ201とを備える。これらのチップは、ビアなどの接続部を介して電気的に接続される。なお、ビアの他、Cu-Cu接合やバンプにより接続することもできる。
図22は、本技術の第4の実施の形態における固体撮像素子200の一構成例を示すブロック図である。受光チップ201には、画素アレイ部230が配置される。画素アレイ部230以外の回路や素子は、回路チップ202に配置される。
なお、受光チップ201および回路チップ202のそれぞれに配置する回路や素子は、同時に例示した構成に限定されない。例えば、上側カラム信号処理回路301および下側カラム信号処理回路302のそれぞれの一部の回路を受光チップ201に配置し、残りを回路チップ202に配置することもできる。
また、第1、第2および第3の実施の形態のそれぞれの固体撮像素子200を積層構造にすることもできる。第1の実施の形態の変形例の固体撮像素子200を積層構造にすることもできる。
このように、本技術の第4の実施の形態によれば、積層した受光チップ201および回路チップ202に、分散して回路等を配置したため、チップ当たりの回路規模を削減することができる。
<5.第5の実施の形態>
上述の第1の実施の形態では、全ての列を読み出していたが、列数が多くなるほど、AD変換の回数が増大してしまう。この第5の実施の形態の固体撮像素子200は、水平方向において画素加算を行うことにより、AD変換の回数を削減した点において第1の実施の形態と異なる。
上述の第1の実施の形態では、全ての列を読み出していたが、列数が多くなるほど、AD変換の回数が増大してしまう。この第5の実施の形態の固体撮像素子200は、水平方向において画素加算を行うことにより、AD変換の回数を削減した点において第1の実施の形態と異なる。
図23は、本技術の第5の実施の形態におけるカラム信号処理回路300の一構成例を示すブロック図である。この第5の実施の形態のカラム信号処理回路300は、VSL横繋ぎ回路330とサンプルホールド回路400との間にVSL加算回路340が配置される点において第1の実施の形態と異なる。
VSL加算回路340は、隣接する奇数本目の垂直信号線同士を接続するとともに、隣接する偶数本目の垂直信号線同士を接続するものである。なお、VSL加算回路340は、特許請求の範囲に記載の垂直信号線加算回路の一例である。
図24は、本技術の第5の実施の形態におけるVSL加算回路340およびSH横繋ぎ回路350の一構成例を示す回路図である。VSL加算回路340には、インバータ341と、複数のスイッチ342と、複数のスイッチ343と、複数のスイッチ344と、複数のスイッチ345とが配置される。スイッチ342乃至345のそれぞれは、最後の4列を除き、4列ごとに配置される。列数がNの場合、スイッチ342乃至345は、(N-4)/4ずつ配置される。
インバータ341は、タイミング制御回路220からの制御信号SWaddを反転し、制御信号xSWaddとしてSH横繋ぎ回路350へ出力するものである。
スイッチ342は、制御信号SWaddに従って、対応する4列のうち第1列目の垂直信号線と、第3列目の垂直信号線との間の経路を開閉するものである。スイッチ343は、制御信号SWvslに従って、第2列目の垂直信号線と、第4列目の垂直信号線との間の経路を開閉するものである。スイッチ344は、制御信号xSWaddに従って、第3列の垂直信号線とサンプルホールド回路400との間の経路を開閉するものである。スイッチ345は、制御信号xSWaddに従って、第4列の垂直信号線とサンプルホールド回路400との間の経路を開閉するものである。
また、SH横繋ぎ回路350には、最後の4列を除き、4列ごとにスイッチ351乃至360が配置される。列数がNの場合、スイッチ351乃至360は、(N-4)/4個ずつ配置される。
スイッチ351は、制御信号SWsに従って、対応する4列のうち第1列目の信号電圧を伝送する出力信号線408と、第2列目の信号電圧を伝送する出力信号線408との間の経路を開閉するものである。スイッチ352は、制御信号SWsに従って、第1列目のリセット電圧を伝送する出力信号線409と、第2列目のリセット電圧を伝送する出力信号線409との間の経路を開閉するものである。
スイッチ353は、制御信号xSWaddに従って、第2列目の出力信号線408と第3列目の出力信号線408との間の経路を開閉するものである。スイッチ354は、制御信号xSWaddに従って、第2列目の出力信号線409と第3列目の出力信号線409との間の経路を開閉するものである。
スイッチ355は、制御信号SWsに従って、第3列目の出力信号線408と、第4列目の出力信号線408との間の経路を開閉するものである。スイッチ356は、制御信号SWsに従って、第3列目の出力信号線409と、第4列目の出力信号線409との間の経路を開閉するものである。
スイッチ357は、制御信号xSWaddに従って、第4列目の出力信号線408と、次の4列のうち第1列目の出力信号線408との間の経路を開閉するものである。スイッチ358は、制御信号SWaddに従って、第2列目の出力信号線408と、次の4列のうち第1列目の出力信号線408との間の経路を開閉するものである。
スイッチ359は、制御信号xSWaddに従って、第4列目の出力信号線409と、次の4列のうち第1列目の出力信号線409との間の経路を開閉するものである。スイッチ360は、制御信号SWaddに従って、第2列目の出力信号線409と、次の4列のうち第1列目の出力信号線409との間の経路を開閉するものである。
タイミング制御回路220は、水平方向の画素加算を行う場合に制御信号SWaddにより、スイッチ342乃至345を閉状態にする。これにより、第1列の垂直信号線と第3列の垂直信号線とが接続され、第2列の垂直信号線と第4列の垂直信号線とが接続される。言い換えれば、隣接する奇数本目(第1列および第3列)の垂直信号線が接続され、隣接する偶数本目(第2列および第4列)の垂直信号線が接続される。この結果、第1列および第3列の画素信号が加算され、第2列および第4列の画素信号が加算される。
一方、画素加算を行わない場合にタイミング制御回路220は、スイッチ342乃至345を開状態にする。
図25は、本技術の第5の実施の形態における垂直信号線を接続(すなわち、画素加算)する場合のVSL加算回路340およびSH横繋ぎ回路350の状態を示す回路図である。
ゲイン補正値を算出する場合、第1の実施の形態と同様に制御信号SWsにより、スイッチ351、352、355および356が閉状態に制御され、サンプルホールド回路400の出力が横繋ぎされる。
制御信号SWaddにより、スイッチ342、343、358および360は閉状態に制御される。また、制御信号xSWaddにより、スイッチ344、345、353、354、357および359は開状態に制御される。これにより、第1列および第3列などの垂直信号線が横繋ぎされる。垂直信号線の横繋ぎ(画素加算)により、画素数が半分に間引かれる。この結果、読出し速度が向上し、消費電力が低減する。
オフセット補正値を算出する場合、制御信号SWaddはそのままで、制御信号SWsにより、サンプルホールド回路400の出力の横繋ぎが解除される。
図26は、本技術の第5の実施の形態における垂直信号線を接続(すなわち、画素加算)しない場合のVSL加算回路340およびSH横繋ぎ回路350の状態を示す回路図である。
ゲイン補正値を算出する場合、第1の実施の形態と同様に制御信号SWsにより、スイッチ351、352、355および356が閉状態に制御され、サンプルホールド回路400の出力が横繋ぎされる。
制御信号SWaddにより、スイッチ342、343、358および360は開状態に制御される。また、制御信号xSWaddにより、スイッチ344、345、353、354、357および359は閉状態に制御される。これにより、第1列および第3列などの垂直信号線の横繋ぎが解除される。この場合には、画素が間引かれず、第1の実施の形態と同様の個数の画素信号が読み出される。
オフセット補正値を算出する場合、制御信号SWaddはそのままで、制御信号SWsにより、サンプルホールド回路400の出力の横繋ぎが解除される。
なお、第5の実施の形態に、第2、第3および第4の実施の形態や、第1の実施の形態の変形例を適用することもできる。
このように本技術の第5の実施の形態によれば、VSL加算回路340が、隣接する垂直信号線を接続するため、水平方向に画素加算を行うことができる。これにより、画素数を間引いて、読出し速度を向上させ、消費電力を低減することができる。
<6.第6の実施の形態>
上述の第1の実施の形態では、電流信号を変換対象とする電流モードADC371によりAD変換を行っていたが、この構成では、電流モードADC371の前段に電圧電流変換部365が必要となる。この第6の実施の形態の固体撮像素子200は、電圧を変換対象とするADCによりAD変換を行い、電圧電流変換部365を不要とした点により第1の実施の形態と異なる。
上述の第1の実施の形態では、電流信号を変換対象とする電流モードADC371によりAD変換を行っていたが、この構成では、電流モードADC371の前段に電圧電流変換部365が必要となる。この第6の実施の形態の固体撮像素子200は、電圧を変換対象とするADCによりAD変換を行い、電圧電流変換部365を不要とした点により第1の実施の形態と異なる。
図27は、本技術の第6の実施の形態におけるカラム信号処理回路300の一構成例を示すブロック図である。この第6の実施の形態のカラム信号処理回路300は、電圧電流変換部365およびアナログデジタル変換部370の代わりに、選択回路380および信号処理ブロック385を備える点において第1の実施の形態と異なる。
選択回路380は、出力信号線408および409のいずれかを選択し、その選択した信号線の電圧をアナログ入力信号Ainとして信号処理ブロック385に供給するものである。この選択回路380には、列ごとに、スイッチ381および382が配置される。列数がNである場合、スイッチ381および382は、N個ずつ配置される。
スイッチ381は、タイミング制御回路220からの制御信号SWdに従って、信号電圧を伝送する出力信号線408と、信号処理ブロック385との間の経路を開閉するものである。スイッチ382は、タイミング制御回路220からの制御信号SWpに従って、リセット電圧を伝送する出力信号線409と、信号処理ブロック385との間の経路を開閉するものである。
リセット電圧をAD変換する際に、タイミング制御回路220は、制御信号SWdおよびSWpにより、スイッチ381を開状態に、スイッチ382を閉状態に制御する。これにより、リセット電圧がアナログ入力信号Ainとして信号処理ブロック385に入力される。
一方、信号電圧をAD変換する際に、タイミング制御回路220は、制御信号SWdおよびSWpにより、スイッチ381を閉状態に、スイッチ382を開状態に制御する。これにより、信号電圧がアナログ入力信号Ainとして信号処理ブロック385に入力される。
図28は、本技術の第6の実施の形態における信号処理ブロック385の一構成例を示すブロック図である。この信号処理ブロック385には、列ごとに、比較器386、ラッチ回路387およびスイッチ388が配置される。列数がNである場合、比較器386、ラッチ回路387およびスイッチ388はN個ずつ配置される。
比較器386は、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号VCOとして出力するものである。これらの一対のアナログ入力信号の一方は、選択回路380からのアナログ入力信号Vin(すなわち、リセット電圧および信号電圧のいずれか)であり、他方は、DAC(不図示)からのランプ信号RMPである。このランプ信号RMPは、参照電圧を示すスロープ状の信号である。アナログ出力信号VCOは、アナログ入力信号Vinおよびランプ信号RMPの比較結果を示す。
ここで、アナログ出力信号VCOのレベルは、次の式により表される。
VCO=Av×(Ain-RMP)+Ofs=Av×Vin+Ofs
上式において、Avは、アナログ入力信号Ainおよびランプ信号RMPの差分に対するゲインである。
VCO=Av×(Ain-RMP)+Ofs=Av×Vin+Ofs
上式において、Avは、アナログ入力信号Ainおよびランプ信号RMPの差分に対するゲインである。
ラッチ回路387は、アナログ出力信号VCOをデジタル信号Doutに変換するものである。このラッチ回路387には、ランプ信号RMPが変化する期間内の相対時刻を示す時刻コードと、対応する列のアナログ出力信号VCOとが入力される。ラッチ回路387は、アナログ出力信号VCOが反転したときの時刻コードを保持し、スイッチ388へデジタル信号Doutとして出力する。
なお、ラッチ回路387の代わりに、アナログ出力信号VCOが反転するまでの期間に亘って計数を行うカウンタを配置することもできる。
比較器386およびラッチ回路387により、アナログ入力信号Ainがデジタル信号Doutに変換される。すなわち、比較器386およびラッチ回路387は、ADCとして機能する。また、ランプ信号RMPのようにスロープ状の信号を用いるADC(比較器386およびラッチ回路387など)は、一般にシングルスロープ型ADCと呼ばれる。なお、各列のラッチ回路387からなる回路は、特許請求の範囲に記載のアナログデジタル変換部の一例である。
スイッチ388は、水平走査回路250の制御に従って、対応する列のデジタル信号Doutを出力部375へ出力するものである。
タイミング制御回路220は、第1の実施の形態と同様に、サンプルホールド回路400の出力を横繋ぎして、ゲインAvのばらつきによるノイズを補正するためのゲイン補正値を算出させる。また、タイミング制御回路220は、サンプルホールド回路400の出力の横繋ぎを解除して、オフセット補正値を算出させる。
なお、第6の実施の形態に、第2、第3および第4の実施の形態のそれぞれを適用することもできる。
このように、本技術の第6の実施の形態によれば、信号処理ブロック385は、リセット電圧および信号電圧のいずれかをデジタル信号に変換するため、電圧電流変換部365を用いずに、AD変換を行うことができる。これにより、電圧電流変換部365を設ける場合と比較して、回路規模を削減することができる。
<7.移動体への応用例>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
図29は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図29に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図29の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
図30は、撮像部12031の設置位置の例を示す図である。
図30では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
なお、図30には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、撮像部12031に適用され得る。具体的には、図1の撮像装置100は、撮像部12031に適用することができる。撮像部12031に本開示に係る技術を適用することにより、ゲインのばらつきによるランダムノイズを低減し、より見やすい撮影画像を得ることができるため、ドライバの疲労を軽減することが可能になる。
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
なお、本技術は以下のような構成もとることができる。
(1)一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と
を具備する固体撮像素子。
(2)受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を前記一対のアナログ入力信号として一対の出力信号線を介して出力する複数のサンプルホールド回路をさらに具備する
前記(1)記載の固体撮像素子。
(3)前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の間の経路を開閉するサンプルホールド横繋ぎ回路をさらに具備する
請求項2記載の固体撮像素子。
(4)前記補正処理部は、
前記経路が閉状態である場合には前記ゲインのばらつきによるノイズを補正するための補正値をゲイン補正値として算出するゲイン補正値算出回路と、
前記経路が開状態である場合には前記複数のサンプルホールド回路のそれぞれのオフセットのばらつきによるノイズを補正するための前記補正値をオフセット補正値として算出するオフセット補正値算出回路と、
前記算出されたゲイン補正値と前記算出されたオフセット補正値とを用いて前記ノイズを補正する補正演算回路と
を備える前記(3)記載の固体撮像素子。
(5)前記アナログ出力信号は、前記信号電圧と前記リセット電圧との差分を前記ゲインにより増減した電流信号である
前記(3)または(4)に記載の固体撮像素子。
(6)前記複数のサンプルホールド回路のそれぞれは、
一対のリセット電圧サンプルホールド回路と、
一対の信号電圧サンプルホールド回路と
を備え、
前記一対のリセット電圧サンプルホールド回路の一方が前記リセット電圧をサンプルするときに他方が保持し、
前記一対の信号電圧サンプルホールド回路の一方が前記信号電圧をサンプルするときに他方が保持する
前記(3)から(5)のいずれかに記載の固体撮像素子。
(7)複数の行を配列した画素アレイ部をさらに具備し、
前記複数の行のそれぞれは所定方向に配列された複数の画素からなり、
前記複数のサンプルホールド回路の半分は、前記複数の行のうち偶数行に接続され、前記複数のサンプルホールド回路の残りは、前記複数の行のうち奇数行に接続され、
前記偶数行に接続されたサンプルホールド回路と、前記奇数行に接続されたサンプルホールド回路とは、前記所定方向に沿って交互に配列される
前記(3)から(6)のいずれかに記載の固体撮像素子。
(8)複数の行を配列した画素アレイ部をさらに具備し、
前記複数のサンプルホールド回路の半分は、上側カラム信号処理回路に配置され、残りは、下側カラム信号処理回路に配置され、
前記上側カラム信号処理回路は、前記複数の行内の奇数行および偶数行の一方に接続され、前記下側カラム信号処理回路は、前記奇数行および前記偶数行のうち他方に接続される
前記(3)から(5)のいずれかに記載の固体撮像素子。
(9)複数の画素を配列した画素アレイ部をさらに具備し、
前記画素アレイ部は、所定の受光チップに配置され、
前記複数のサンプルホールド回路と前記サンプルホールド横繋ぎ回路と前記複数のアナログ出力部と前記アナログデジタル変換部と前記補正処理部との少なくとも一部は、所定の回路チップに配置される
前記(3)から(8)のいずれかに記載の固体撮像素子。
(10)互いに異なる前記サンプルホールド回路に接続された複数の垂直信号線が配線された画素アレイ部と、
前記複数の垂直信号線のうち隣接する奇数本目の信号線同士を接続するとともに前記複数の垂直信号線のうち隣接する偶数本目の信号線同士を接続する垂直信号線加算回路と
をさらに具備する
前記(3)から(9)のいずれかに記載の固体撮像素子。
(11)画素の受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を一対の出力信号線を介して出力する複数のサンプルホールド回路と、
前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の一方を選択し、当該選択した信号線の電圧を前記一対のアナログ入力信号の一方として前記アナログデジタル変換部へ出力する選択回路と
をさらに具備し、
前記一対のアナログ入力信号の他方は、所定の参照電圧である
前記(1)に記載の固体撮像素子。
(12)一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と、
前記デジタル信号のそれぞれを含む画像データに対して所定の画像処理を行うデジタル信号処理回路と
を具備する撮像装置。
(13)複数のアナログ出力部のそれぞれが、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力するアナログ出力手順と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換手順と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理手順と
を具備する固体撮像素子の制御方法。
(1)一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と
を具備する固体撮像素子。
(2)受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を前記一対のアナログ入力信号として一対の出力信号線を介して出力する複数のサンプルホールド回路をさらに具備する
前記(1)記載の固体撮像素子。
(3)前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の間の経路を開閉するサンプルホールド横繋ぎ回路をさらに具備する
請求項2記載の固体撮像素子。
(4)前記補正処理部は、
前記経路が閉状態である場合には前記ゲインのばらつきによるノイズを補正するための補正値をゲイン補正値として算出するゲイン補正値算出回路と、
前記経路が開状態である場合には前記複数のサンプルホールド回路のそれぞれのオフセットのばらつきによるノイズを補正するための前記補正値をオフセット補正値として算出するオフセット補正値算出回路と、
前記算出されたゲイン補正値と前記算出されたオフセット補正値とを用いて前記ノイズを補正する補正演算回路と
を備える前記(3)記載の固体撮像素子。
(5)前記アナログ出力信号は、前記信号電圧と前記リセット電圧との差分を前記ゲインにより増減した電流信号である
前記(3)または(4)に記載の固体撮像素子。
(6)前記複数のサンプルホールド回路のそれぞれは、
一対のリセット電圧サンプルホールド回路と、
一対の信号電圧サンプルホールド回路と
を備え、
前記一対のリセット電圧サンプルホールド回路の一方が前記リセット電圧をサンプルするときに他方が保持し、
前記一対の信号電圧サンプルホールド回路の一方が前記信号電圧をサンプルするときに他方が保持する
前記(3)から(5)のいずれかに記載の固体撮像素子。
(7)複数の行を配列した画素アレイ部をさらに具備し、
前記複数の行のそれぞれは所定方向に配列された複数の画素からなり、
前記複数のサンプルホールド回路の半分は、前記複数の行のうち偶数行に接続され、前記複数のサンプルホールド回路の残りは、前記複数の行のうち奇数行に接続され、
前記偶数行に接続されたサンプルホールド回路と、前記奇数行に接続されたサンプルホールド回路とは、前記所定方向に沿って交互に配列される
前記(3)から(6)のいずれかに記載の固体撮像素子。
(8)複数の行を配列した画素アレイ部をさらに具備し、
前記複数のサンプルホールド回路の半分は、上側カラム信号処理回路に配置され、残りは、下側カラム信号処理回路に配置され、
前記上側カラム信号処理回路は、前記複数の行内の奇数行および偶数行の一方に接続され、前記下側カラム信号処理回路は、前記奇数行および前記偶数行のうち他方に接続される
前記(3)から(5)のいずれかに記載の固体撮像素子。
(9)複数の画素を配列した画素アレイ部をさらに具備し、
前記画素アレイ部は、所定の受光チップに配置され、
前記複数のサンプルホールド回路と前記サンプルホールド横繋ぎ回路と前記複数のアナログ出力部と前記アナログデジタル変換部と前記補正処理部との少なくとも一部は、所定の回路チップに配置される
前記(3)から(8)のいずれかに記載の固体撮像素子。
(10)互いに異なる前記サンプルホールド回路に接続された複数の垂直信号線が配線された画素アレイ部と、
前記複数の垂直信号線のうち隣接する奇数本目の信号線同士を接続するとともに前記複数の垂直信号線のうち隣接する偶数本目の信号線同士を接続する垂直信号線加算回路と
をさらに具備する
前記(3)から(9)のいずれかに記載の固体撮像素子。
(11)画素の受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を一対の出力信号線を介して出力する複数のサンプルホールド回路と、
前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の一方を選択し、当該選択した信号線の電圧を前記一対のアナログ入力信号の一方として前記アナログデジタル変換部へ出力する選択回路と
をさらに具備し、
前記一対のアナログ入力信号の他方は、所定の参照電圧である
前記(1)に記載の固体撮像素子。
(12)一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と、
前記デジタル信号のそれぞれを含む画像データに対して所定の画像処理を行うデジタル信号処理回路と
を具備する撮像装置。
(13)複数のアナログ出力部のそれぞれが、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力するアナログ出力手順と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換手順と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理手順と
を具備する固体撮像素子の制御方法。
100 撮像装置
110 光学部
120 DSP回路
130 表示部
140 操作部
150 バス
160 フレームメモリ
170 記憶部
180 電源部
200 固体撮像素子
201 受光チップ
202 回路チップ
210 垂直走査回路
220 タイミング制御回路
230 画素アレイ部
240 画素
241 光電変換素子
242 転送スイッチ
243 増幅回路
250 水平走査回路
251 上側水平走査回路
252 下側水平走査回路
260 テスト電圧発生部
270 補正処理部
271、281 デマルチプレクサ
280 補正値算出回路
282 オフセット補正値算出回路
283 ゲイン補正値算出回路
284 補正値保持部
290 補正演算回路
291 ラインバッファ
292 減算器
293 乗算器
300 カラム信号処理回路
301 上側カラム信号処理回路
302 下側カラム信号処理回路
310 マルチプレクサ
320、366 電流源
330 VSL横繋ぎ回路
331、342~345、351~360、381、382、388、411、413、414、416、421、423、424、426、431、433、434、436、441、443、444、446 スイッチ
340 VSL加算回路
341、361 インバータ
350 SH横繋ぎ回路
362、368、369 nMOSトランジスタ
363 pMOSトランジスタ
365 電圧電流変換部
367 抵抗
370 アナログデジタル変換部
371 電流モードADC
375 出力部
380 選択回路
385 信号処理ブロック
386 比較器
387 ラッチ回路
400 サンプルホールド回路
410、430 リセット電圧サンプルホールド回路
420、440 信号電圧サンプルホールド回路
412、422、432、442 コンデンサ
415、425、435、445 アンプ
12031 撮像部
110 光学部
120 DSP回路
130 表示部
140 操作部
150 バス
160 フレームメモリ
170 記憶部
180 電源部
200 固体撮像素子
201 受光チップ
202 回路チップ
210 垂直走査回路
220 タイミング制御回路
230 画素アレイ部
240 画素
241 光電変換素子
242 転送スイッチ
243 増幅回路
250 水平走査回路
251 上側水平走査回路
252 下側水平走査回路
260 テスト電圧発生部
270 補正処理部
271、281 デマルチプレクサ
280 補正値算出回路
282 オフセット補正値算出回路
283 ゲイン補正値算出回路
284 補正値保持部
290 補正演算回路
291 ラインバッファ
292 減算器
293 乗算器
300 カラム信号処理回路
301 上側カラム信号処理回路
302 下側カラム信号処理回路
310 マルチプレクサ
320、366 電流源
330 VSL横繋ぎ回路
331、342~345、351~360、381、382、388、411、413、414、416、421、423、424、426、431、433、434、436、441、443、444、446 スイッチ
340 VSL加算回路
341、361 インバータ
350 SH横繋ぎ回路
362、368、369 nMOSトランジスタ
363 pMOSトランジスタ
365 電圧電流変換部
367 抵抗
370 アナログデジタル変換部
371 電流モードADC
375 出力部
380 選択回路
385 信号処理ブロック
386 比較器
387 ラッチ回路
400 サンプルホールド回路
410、430 リセット電圧サンプルホールド回路
420、440 信号電圧サンプルホールド回路
412、422、432、442 コンデンサ
415、425、435、445 アンプ
12031 撮像部
Claims (13)
- 一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と
を具備する固体撮像素子。 - 受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を前記一対のアナログ入力信号として一対の出力信号線を介して出力する複数のサンプルホールド回路をさらに具備する
請求項1記載の固体撮像素子。 - 前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の間の経路を開閉するサンプルホールド横繋ぎ回路をさらに具備する
請求項2記載の固体撮像素子。 - 前記補正処理部は、
前記経路が閉状態である場合には前記ゲインのばらつきによるノイズを補正するための補正値をゲイン補正値として算出するゲイン補正値算出回路と、
前記経路が開状態である場合には前記複数のサンプルホールド回路のそれぞれのオフセットのばらつきによるノイズを補正するための前記補正値をオフセット補正値として算出するオフセット補正値算出回路と、
前記算出されたゲイン補正値と前記算出されたオフセット補正値とを用いて前記ノイズを補正する補正演算回路と
を備える請求項3記載の固体撮像素子。 - 前記アナログ出力信号は、前記信号電圧と前記リセット電圧との差分を前記ゲインにより増減した電流信号である
請求項3記載の固体撮像素子。 - 前記複数のサンプルホールド回路のそれぞれは、
一対のリセット電圧サンプルホールド回路と、
一対の信号電圧サンプルホールド回路と
を備え、
前記一対のリセット電圧サンプルホールド回路の一方が前記リセット電圧をサンプルするときに他方が保持し、
前記一対の信号電圧サンプルホールド回路の一方が前記信号電圧をサンプルするときに他方が保持する
請求項3記載の固体撮像素子。 - 複数の行を配列した画素アレイ部をさらに具備し、
前記複数の行のそれぞれは所定方向に配列された複数の画素からなり、
前記複数のサンプルホールド回路の半分は、前記複数の行のうち偶数行に接続され、前記複数のサンプルホールド回路の残りは、前記複数の行のうち奇数行に接続され、
前記偶数行に接続されたサンプルホールド回路と、前記奇数行に接続されたサンプルホールド回路とは、前記所定方向に沿って交互に配列される
請求項3記載の固体撮像素子。 - 複数の行を配列した画素アレイ部をさらに具備し、
前記複数のサンプルホールド回路の半分は、上側カラム信号処理回路に配置され、残りは、下側カラム信号処理回路に配置され、
前記上側カラム信号処理回路は、前記複数の行内の奇数行および偶数行の一方に接続され、前記下側カラム信号処理回路は、前記奇数行および前記偶数行のうち他方に接続される
請求項3記載の固体撮像素子。 - 複数の画素を配列した画素アレイ部をさらに具備し、
前記画素アレイ部は、所定の受光チップに配置され、
前記複数のサンプルホールド回路と前記サンプルホールド横繋ぎ回路と前記複数のアナログ出力部と前記アナログデジタル変換部と前記補正処理部との少なくとも一部は、所定の回路チップに配置される
請求項3記載の固体撮像素子。 - 互いに異なる前記サンプルホールド回路に接続された複数の垂直信号線が配線された画素アレイ部と、
前記複数の垂直信号線のうち隣接する奇数本目の信号線同士を接続するとともに前記複数の垂直信号線のうち隣接する偶数本目の信号線同士を接続する垂直信号線加算回路と
をさらに具備する
請求項3記載の固体撮像素子。 - 画素の受光量に応じた信号電圧と所定のリセット電圧とを順にサンプルして保持し、前記信号電圧および前記リセット電圧を一対の出力信号線を介して出力する複数のサンプルホールド回路と、
前記複数のサンプルホールド回路のそれぞれの前記一対の出力信号線の一方を選択し、当該選択した信号線の電圧を前記一対のアナログ入力信号の一方として前記アナログデジタル変換部へ出力する選択回路と
をさらに具備し、
前記一対のアナログ入力信号の他方は、所定の参照電圧である
請求項1記載の固体撮像素子。 - 一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力する複数のアナログ出力部と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換部と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理部と、
前記デジタル信号のそれぞれを含む画像データに対して所定の画像処理を行うデジタル信号処理回路と
を具備する撮像装置。 - 複数のアナログ出力部のそれぞれが、一対のアナログ入力信号の差分を所定のゲインにより増減してアナログ出力信号として出力するアナログ出力手順と、
前記複数のアナログ出力部のぞれぞれの前記アナログ出力信号をデジタル信号に変換するアナログデジタル変換手順と、
前記複数のアナログ出力部のそれぞれの前記ゲインのばらつきによる前記デジタル信号のノイズを補正する補正処理手順と
を具備する固体撮像素子の制御方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019095838A JP2020191543A (ja) | 2019-05-22 | 2019-05-22 | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 |
| JP2019-095838 | 2019-05-22 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2020235146A1 true WO2020235146A1 (ja) | 2020-11-26 |
Family
ID=73454808
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2020/003958 Ceased WO2020235146A1 (ja) | 2019-05-22 | 2020-02-03 | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2020191543A (ja) |
| WO (1) | WO2020235146A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024219220A1 (ja) * | 2023-04-17 | 2024-10-24 | パナソニックIpマネジメント株式会社 | 撮像装置および撮像装置の駆動方法 |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7346376B2 (ja) | 2020-12-24 | 2023-09-19 | キヤノン株式会社 | 光電変換装置、光電変換システム、移動体、半導体基板 |
| JP7649152B2 (ja) | 2021-02-04 | 2025-03-19 | キヤノン株式会社 | 光電変換装置および電子機器 |
| JP2022119632A (ja) | 2021-02-04 | 2022-08-17 | キヤノン株式会社 | 光電変換装置、光電変換システムおよび移動体 |
| JP7678676B2 (ja) | 2021-02-04 | 2025-05-16 | キヤノン株式会社 | 光電変換装置 |
| JP7791653B2 (ja) | 2021-03-18 | 2025-12-24 | キヤノン株式会社 | 光電変換装置、基板及び機器 |
| US12177594B2 (en) * | 2021-12-07 | 2024-12-24 | Canon Kabushiki Kaisha | Photoelectric conversion device |
| JP2024017295A (ja) | 2022-07-27 | 2024-02-08 | キヤノン株式会社 | 撮像装置及びその制御方法、及び電子機器 |
| JP2024035622A (ja) | 2022-09-02 | 2024-03-14 | キヤノン株式会社 | 光電変換装置、光電変換システムおよび光電変換方法 |
| JP2024035624A (ja) | 2022-09-02 | 2024-03-14 | キヤノン株式会社 | 光電変換装置、光電変換システムおよび光電変換方法 |
| JP2024035623A (ja) | 2022-09-02 | 2024-03-14 | キヤノン株式会社 | 光電変換装置、光電変換システムおよび光電変換方法 |
| KR102707556B1 (ko) * | 2022-12-21 | 2024-09-20 | 넥스트랩 주식회사 | 셀프 보정 기능을 구비한 아날로그 디지털 변환 장치 및 이의 동작 방법 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005167918A (ja) * | 2003-12-05 | 2005-06-23 | Sony Corp | 固体撮像装置、撮像方法 |
| JP2008124527A (ja) * | 2006-11-08 | 2008-05-29 | Sony Corp | 固体撮像装置及び撮像装置 |
| JP2009182383A (ja) * | 2008-01-29 | 2009-08-13 | Sony Corp | 固体撮像素子、固体撮像素子の信号読み出し方法および撮像装置 |
| JP2014140246A (ja) * | 2014-04-16 | 2014-07-31 | Canon Inc | 固体撮像装置及び固体撮像装置の駆動方法 |
| WO2019087522A1 (ja) * | 2017-10-31 | 2019-05-09 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置 |
-
2019
- 2019-05-22 JP JP2019095838A patent/JP2020191543A/ja active Pending
-
2020
- 2020-02-03 WO PCT/JP2020/003958 patent/WO2020235146A1/ja not_active Ceased
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005167918A (ja) * | 2003-12-05 | 2005-06-23 | Sony Corp | 固体撮像装置、撮像方法 |
| JP2008124527A (ja) * | 2006-11-08 | 2008-05-29 | Sony Corp | 固体撮像装置及び撮像装置 |
| JP2009182383A (ja) * | 2008-01-29 | 2009-08-13 | Sony Corp | 固体撮像素子、固体撮像素子の信号読み出し方法および撮像装置 |
| JP2014140246A (ja) * | 2014-04-16 | 2014-07-31 | Canon Inc | 固体撮像装置及び固体撮像装置の駆動方法 |
| WO2019087522A1 (ja) * | 2017-10-31 | 2019-05-09 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024219220A1 (ja) * | 2023-04-17 | 2024-10-24 | パナソニックIpマネジメント株式会社 | 撮像装置および撮像装置の駆動方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020191543A (ja) | 2020-11-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020235146A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| EP3657776B1 (en) | Analog-digital converter including miller capacitor, solid-state imaging element including said analog-digital converter, and control method for said analog-digital converter | |
| US11671728B2 (en) | Sensing device, electronic apparatus, and method for controlling sensing device | |
| EP3809694B1 (en) | Signal processing circuit, solid-state imaging element, and control method for signal processing circuit | |
| TWI840361B (zh) | 固態攝像元件、攝像裝置及固態攝像元件之控制方法 | |
| WO2020017117A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| WO2021112058A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| US20200280692A1 (en) | Solid-state image sensor, imaging device, and method of controlling solid-state image sensor | |
| WO2019159499A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| US12587765B2 (en) | Imaging device and electronic apparatus comprising imaging device | |
| WO2021256073A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| US12262134B2 (en) | Solid-state imaging element, imaging device, and method for controlling solid-state imaging element | |
| US12058458B2 (en) | Imaging device and imaging system | |
| WO2019171686A1 (ja) | 増幅回路、撮像装置、および、増幅回路の制御方法 | |
| WO2021112059A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| WO2022038903A1 (ja) | 固体撮像素子 | |
| WO2021145033A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| WO2020255496A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| US12621582B2 (en) | Solid-state image sensor, imaging apparatus, and control method for solid-state image sensor | |
| US20240406590A1 (en) | Solid-state image sensor, imaging apparatus, and control method for solid-state image sensor | |
| WO2022244293A1 (ja) | アナログデジタル変換回路、固体撮像素子、および、アナログデジタル変換回路の制御方法 | |
| WO2023089958A1 (ja) | 固体撮像素子 | |
| WO2023112480A1 (ja) | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 | |
| WO2021124628A1 (ja) | 固体撮像素子、および、撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20809525 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20809525 Country of ref document: EP Kind code of ref document: A1 |