WO2020121699A1 - 撮像装置 - Google Patents

撮像装置 Download PDF

Info

Publication number
WO2020121699A1
WO2020121699A1 PCT/JP2019/043625 JP2019043625W WO2020121699A1 WO 2020121699 A1 WO2020121699 A1 WO 2020121699A1 JP 2019043625 W JP2019043625 W JP 2019043625W WO 2020121699 A1 WO2020121699 A1 WO 2020121699A1
Authority
WO
WIPO (PCT)
Prior art keywords
transistor
terminal
pixel
pixel circuit
dummy
Prior art date
Application number
PCT/JP2019/043625
Other languages
English (en)
French (fr)
Inventor
知宏 松浦
直樹 河津
Original Assignee
ソニーセミコンダクタソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーセミコンダクタソリューションズ株式会社 filed Critical ソニーセミコンダクタソリューションズ株式会社
Priority to US17/307,593 priority Critical patent/US11381773B2/en
Priority to EP19894474.6A priority patent/EP3896958A4/en
Priority to JP2020559825A priority patent/JPWO2020121699A1/ja
Publication of WO2020121699A1 publication Critical patent/WO2020121699A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/581Control of the dynamic range involving two or more exposures acquired simultaneously
    • H04N25/585Control of the dynamic range involving two or more exposures acquired simultaneously with pixels having different sensitivities within the sensor, e.g. fast or slow pixels or pixels having different sizes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/59Control of the dynamic range by controlling the amount of charge storable in the pixel, e.g. modification of the charge conversion ratio of the floating node capacitance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H04N25/671Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/702SSIS architectures characterised by non-identical, non-equidistant or non-planar pixel layout
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/709Circuitry for control of the power supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/778Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising amplifiers shared between a plurality of pixels, i.e. at least one part of the amplifier must be on the sensor array itself

Definitions

  • the present disclosure relates to an imaging device that performs an imaging operation.
  • pixels including photodiodes are arranged in a matrix, and each pixel generates an electric signal according to the amount of received light. Then, for example, an AD conversion circuit (Analog to Digital Converter) converts the electric signal (analog signal) generated in each pixel into a digital signal.
  • an AD conversion circuit Analog to Digital Converter
  • Some of such imaging devices have a BIST (Built-in Self Test) function (for example, Patent Document 1).
  • the image pickup apparatus perform self-diagnosis by the BIST function to diagnose the presence/absence of a defect.
  • the first imaging device includes a first light receiving element and a plurality of pixel circuits.
  • the plurality of pixel circuits include an imaging pixel circuit and a first dummy pixel circuit.
  • Each of the plurality of pixel circuits has an accumulating portion capable of accumulating charges, a first terminal and a second terminal connected to the accumulating portion, and is turned on to have the first terminal and the second terminal.
  • the first terminal of the first transistor in the imaging pixel circuit is connected to the first light receiving element.
  • the first terminal of the first transistor in the first dummy pixel circuit is the second terminal of the first transistor of the first dummy pixel circuit, not via the first transistor of the first dummy pixel circuit. Connected to.
  • the “imaging device” is not limited to a so-called image sensor alone, but includes an imaging system configured by using the image sensor, and also includes an electronic device having an imaging function such as a digital camera or a smartphone.
  • the second imaging device includes a first voltage supply line, a second voltage supply line, a first light receiving element, and a plurality of pixel circuits.
  • the plurality of pixel circuits include an image pickup pixel circuit, a first dummy pixel circuit, and a second dummy pixel circuit.
  • Each of the plurality of pixel circuits has an accumulating portion capable of accumulating charges, a first terminal and a second terminal connected to the accumulating portion, and is turned on to have the first terminal and the second terminal.
  • the imaging pixel circuit the first terminal of the first transistor is connected to the first light receiving element, and the first terminal of the second transistor is connected to the first voltage supply line.
  • the first terminal of the first transistor is connected to the first voltage supply line, and the first terminal of the second transistor is connected to the second voltage supply line.
  • the first terminal of the first transistor is connected to the second voltage supply line, and the first terminal of the second transistor is connected to the first voltage supply line.
  • a third imaging device includes a first light receiving element and a plurality of pixel circuits.
  • the plurality of pixel circuits include an imaging pixel circuit and a first dummy pixel circuit.
  • Each of the plurality of pixel circuits has a storage portion capable of storing charge, a first terminal and a second terminal, and a first terminal capable of connecting the first terminal and the second terminal by being turned on.
  • the transistor and the output unit capable of outputting a voltage according to the electric charge accumulated in the accumulating unit.
  • the imaging pixel circuit the first terminal of the first transistor is connected to the first light receiving element, and the second terminal of the first transistor is connected to the storage section.
  • the first dummy pixel circuit at least one of the first terminal and the second terminal of the first transistor is not connected to any element other than the first transistor.
  • the storage unit, the first transistor, and the output unit are provided in each of the plurality of pixel circuits.
  • the plurality of pixel circuits include an imaging pixel circuit and a first dummy pixel circuit.
  • the first terminal of the first transistor in the imaging pixel circuit is connected to the first light receiving element.
  • the first terminal of the first transistor in the first dummy pixel circuit is the second terminal of the first transistor of the first dummy pixel circuit without passing through the first transistor of the first dummy pixel circuit. Connected to.
  • the storage unit, the first transistor, the second transistor, and the output unit are provided in each of the plurality of pixel circuits.
  • the plurality of pixel circuits include an image pickup pixel circuit, a first dummy pixel circuit, and a second dummy pixel circuit.
  • the first terminal of the first transistor is connected to the first light receiving element, and the first terminal of the second transistor is connected to the first voltage supply line.
  • the first dummy pixel circuit the first terminal of the first transistor is connected to the first voltage supply line, and the first terminal of the second transistor is connected to the second voltage supply line.
  • the first terminal of the first transistor is connected to the second voltage supply line, and the first terminal of the second transistor is connected to the first voltage supply line.
  • each of the plurality of pixel circuits is provided with a storage unit, a first transistor, and an output unit.
  • the plurality of pixel circuits include an imaging pixel circuit and a first dummy pixel circuit.
  • the imaging pixel circuit the first terminal of the first transistor is connected to the first light receiving element, and the second terminal of the first transistor is connected to the storage section.
  • the first dummy pixel circuit at least one of the first terminal and the second terminal of the first transistor is not connected to any element other than the first transistor.
  • FIG. 1 is a block diagram illustrating a configuration example of an image pickup apparatus according to a first embodiment of the present disclosure.
  • FIG. 3 is a circuit diagram illustrating a configuration example of an image pickup pixel illustrated in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating a configuration example of a pixel array illustrated in FIG. 1.
  • FIG. 3 is a circuit diagram showing a configuration example of a dummy pixel shown in FIG. 1.
  • 6 is another circuit diagram illustrating a configuration example of the dummy pixel illustrated in FIG. 1.
  • FIG. 5 is a table showing an arrangement example of dummy pixels shown in FIGS. 4A and 4B. 5 is another table showing an arrangement example of the dummy pixels shown in FIGS. 4A and 4B.
  • FIG. 4 is a block diagram illustrating a configuration example of an image pickup apparatus according to a first embodiment of the present disclosure.
  • FIG. 3 is a circuit diagram illustrating a configuration example of an image pickup pixel illustrated in FIG. 1.
  • FIG. 3 is a circuit diagram illustrating a configuration example of a reading unit illustrated in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating an implementation example of the imaging device illustrated in FIG. 1.
  • FIG. 9 is an explanatory diagram illustrating another implementation example of the imaging device illustrated in FIG. 1.
  • FIG. 3 is a timing diagram illustrating an operation example of the image pickup apparatus illustrated in FIG. 1.
  • FIG. 3 is a timing waveform chart showing an operation example of the image pickup apparatus shown in FIG. 1.
  • FIG. 3 is a timing waveform chart showing an operation example of the image pickup apparatus shown in FIG. 1.
  • FIG. 3 is a timing waveform chart showing an operation example of the image pickup apparatus shown in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating an operation state of the image pickup apparatus illustrated in FIG. 1.
  • FIG. 1 is a circuit diagram illustrating a configuration example of a reading unit illustrated in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating an implementation example of the imaging device illustrated in FIG. 1.
  • FIG. 9 is an explanatory diagram illustrating another operation state of the imaging device illustrated in FIG. 1.
  • FIG. 9 is an explanatory diagram illustrating another operation state of the imaging device illustrated in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating an example of image compositing processing in the image pickup apparatus illustrated in FIG. 1.
  • FIG. 3 is an explanatory diagram illustrating an operation example of a diagnosis processing unit illustrated in FIG. 1.
  • FIG. 9 is a circuit diagram illustrating a configuration example of a dummy pixel according to a comparative example. It is a block diagram showing an example of 1 composition of an imaging device concerning a modification of a 1st embodiment.
  • FIG. 18 is a circuit diagram illustrating a configuration example of the image pickup pixel illustrated in FIG. 17.
  • FIG. 18 is a circuit diagram illustrating a configuration example of the image pickup pixel illustrated in FIG. 17.
  • FIG. 18 is a circuit diagram illustrating a configuration example of the dummy pixel shown in FIG. 17.
  • FIG. 18 is another circuit diagram showing a configuration example of the dummy pixel shown in FIG. 17.
  • FIG. 11 is another circuit diagram illustrating a configuration example of a dummy pixel according to another modification of the first embodiment.
  • FIG. 11 is another circuit diagram illustrating a configuration example of a dummy pixel according to another modification of the first embodiment.
  • FIG. 11 is another circuit diagram illustrating a configuration example of a dummy pixel according to another modification of the first embodiment.
  • It is a block diagram showing an example of 1 composition of an imaging device concerning a 2nd embodiment.
  • FIG. 24 is a circuit diagram illustrating a configuration example of an image pickup pixel illustrated in FIG. 23.
  • FIG. 24 is a circuit diagram illustrating a configuration example of an image pickup pixel illustrated in FIG. 23.
  • FIG. 24 is an explanatory diagram illustrating a configuration example of the pixel array illustrated in FIG. 23.
  • FIG. 24 is a circuit diagram illustrating a configuration example of a dummy pixel illustrated in FIG. 23.
  • FIG. 24 is another circuit diagram illustrating a configuration example of the dummy pixel illustrated in FIG. 23.
  • FIG. 24 is a timing waveform chart illustrating an operation example of the image pickup apparatus illustrated in FIG. 23.
  • FIG. 16 is another circuit diagram illustrating a configuration example of dummy pixels according to another modification of the second embodiment.
  • FIG. 16 is another circuit diagram illustrating a configuration example of dummy pixels according to another modification of the second embodiment.
  • FIG. 16 is another circuit diagram illustrating a configuration example of dummy pixels according to another modification of the second embodiment.
  • FIG. 1 illustrates a configuration example of an image pickup apparatus (image pickup apparatus 1) according to an embodiment.
  • the image pickup apparatus 1 includes a pixel array 10, two scanning units 20L and 20R, a reading unit 30, and a controller 40.
  • the pixel array 10 has a plurality of imaging pixels P1 arranged in a matrix.
  • the imaging pixel P1 has a photodiode PD (described later) and is configured to generate a pixel voltage VP according to the amount of received light.
  • the plurality of imaging pixels P1 are arranged in the imaging pixel region R1.
  • the imaging pixel region R1 is a pixel region in which a subject is imaged, and is a so-called effective pixel region.
  • the pixel array 10 has a plurality of dummy pixels P2 and P3 in addition to the plurality of imaging pixels P1.
  • the dummy pixels P2 and P3 are pixels that do not have the photodiode PD.
  • the plurality of dummy pixels P2 are arranged in the dummy pixel regions R21 and R22, and the plurality of dummy pixels P3 are arranged in the dummy pixel regions R31 and R32.
  • the dummy pixel region R31, the dummy pixel region R21, the imaging pixel region R1, the dummy pixel region R22, and the dummy pixel region are arranged from left to right in the horizontal direction (horizontal direction in FIG. 1).
  • a plurality of dummy pixels P3 for one row, a plurality of dummy pixels P2, a plurality of imaging pixels P1, a plurality of dummy pixels P2, and a plurality of dummy pixels P3 arranged in parallel in the horizontal direction form a pixel line L.
  • the image pickup pixel P1 and the dummy pixels P2 and P3 will be described below in detail.
  • FIG. 2 shows a configuration example of the image pickup pixel P1.
  • the pixel array 10 includes a plurality of control lines TGLL, a plurality of control lines FDGL, a plurality of control lines RSTL, a plurality of control lines FCGL, a plurality of control lines TGSL, a plurality of control lines SELL, and a plurality of power supplies. It has a line PL and a plurality of signal lines SGL.
  • the control line TGLL is configured to extend in the horizontal direction (horizontal direction in FIG. 1 ), one end of the control line TGLL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R. That is, the control line TGLL is arranged so as to penetrate the dummy pixel region R31, the dummy pixel region R21, the imaging pixel region R1, the dummy pixel region R22, and the dummy pixel region R32.
  • the signal STGL is applied to the control line TGLL by the scanning units 20L and 20R.
  • the control line FDGL is configured to extend in the horizontal direction, one end of the control line FDGL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R.
  • the signal SFDG is applied to the control line FDGL by the scanning units 20L and 20R.
  • the control line RSTL is configured to extend in the horizontal direction, one end of the control line RSTL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R.
  • the signal SRST is applied to the control line RSTL by the scanning units 20L and 20R.
  • the control line FCGL is configured to extend in the horizontal direction, one end of the control line FCGL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R.
  • the signal SFCG is applied to the control line FCGL by the scanning units 20L and 20R.
  • the control line TGSL is configured to extend in the horizontal direction, one end of the control line TGSL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R.
  • the signal STGS is applied to the control line TGSL by the scanning units 20L and 20R.
  • the control line SELL is configured to extend in the horizontal direction, one end of the control line SELL is connected to the scanning unit 20L, and the other end is connected to the scanning unit 20R.
  • the signal SSEL is applied to the control line SELL by the scanning units 20L and 20R.
  • the power line PL is connected to the voltage generation unit 42 (described later) of the controller 40.
  • the power supply voltage VDD is applied to the power supply line PL by the voltage generation unit 42.
  • the signal line SGL is configured to extend in the vertical direction (longitudinal direction in FIG. 1), and one end thereof is connected to the reading unit 30.
  • the image pickup pixel P1 has photodiodes PD1 and PD2 and a pixel circuit CKT.
  • the pixel circuit CKT includes a transistor TGL, a transistor TGS, a capacitive element FC, transistors FCG, RST, FDG, a floating diffusion FD, and transistors AMP, SEL.
  • the transistors TGL, TGS, FCG, RST, FDG, AMP, and SEL are N-type MOS (Metal Oxide Semiconductor) transistors in this example.
  • the photodiode PD1 is a photoelectric conversion element that generates an electric charge of an amount according to the amount of received light and accumulates it inside.
  • the light receiving area where the photodiode PD1 can receive light is configured to be wider than the light receiving area where the photodiode PD2 can receive light.
  • the anode of the photodiode PD1 is grounded, and the cathode is connected to the source of the transistor TGL.
  • the gate of the transistor TGL is connected to the control line TGLL, the source is connected to the cathode of the photodiode PD1, and the drain is connected to the floating diffusion FD.
  • the photodiode PD2 is a photoelectric conversion element that generates an electric charge according to the amount of received light and accumulates it inside.
  • the light receiving area where the photodiode PD2 can receive light is configured to be narrower than the light receiving area where the photodiode PD1 can receive light.
  • the anode of the photodiode PD2 is grounded, and the cathode is connected to the source of the transistor TGS.
  • the gate of the transistor TGS is connected to the control line TGSL, the source is connected to the cathode of the photodiode PD2, and the drain is connected to the sources of the capacitive element FC and the transistor FCG.
  • One end of the capacitive element FC is connected to the drain of the transistor TGS and the source of the transistor FCG, and the other end is connected to the power supply line PL.
  • the gate of the transistor FCG is connected to the control line FCGL, the source is connected to one end of the capacitive element FC and the drain of the transistor TGS, and the drain is connected to the source of the transistor RST and the drain of the transistor FDG.
  • the gate of the transistor RST is connected to the control line RSTL, the drain is connected to the power supply line PL, and the source is connected to the drains of the transistors FCG and FDG.
  • the gate of the transistor FDG is connected to the control line FDGL, the drain is connected to the source of the transistor RST and the drain of the transistor FCG, and the source is connected to the floating diffusion FD.
  • the floating diffusion FD is configured to accumulate the charges supplied from the photodiodes PD1 and PD2, and is configured using, for example, a diffusion layer formed on the surface of the semiconductor substrate. In FIG. 2, the floating diffusion FD is shown using the symbol of the capacitive element.
  • the gate of the transistor AMP is connected to the floating diffusion FD, the drain is connected to the power supply line PL, and the source is connected to the drain of the transistor SEL.
  • the gate of the transistor SEL is connected to the control line SELL, the drain is connected to the source of the transistor AMP, and the source is connected to the signal line SGL.
  • the transistor SEL is turned on based on the signal SSEL applied to the control line SELL, so that the image pickup pixel P1 is electrically connected to the signal line SGL.
  • the transistor AMP is connected to the current source 35 (described later) of the reading section 30 and operates as a so-called source follower.
  • the imaging pixel P1 outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the imaging pixel P1 sequentially outputs eight pixel voltages VP (VP1 to VP8) in eight periods (conversion periods T1 to T8) within a so-called horizontal period H, as described later. ing.
  • FIG. 3 shows an example of the arrangement of the photodiodes PD1 and PD2 in the image pickup pixel region R1 of the pixel array 10.
  • R indicates a red color filter
  • G indicates a green color filter
  • B indicates a blue color filter.
  • a photodiode PD2 is formed on the upper right of the photodiode PD1.
  • Color filters of the same color are formed on the two photodiodes PD1 and PD2 in each imaging pixel P1.
  • the photodiode PD1 has an octagonal shape
  • the photodiode PD2 has a quadrangular shape. As shown in this figure, the light receiving region where the photodiode PD1 can receive light is wider than the light receiving region where the photodiode PD2 can receive light.
  • 4A and 4B show a configuration example of the dummy pixel P2 in the dummy pixel regions R21 and R22 and the dummy pixel P3 in the dummy pixel regions R31 and R32.
  • the dummy pixel PA or the dummy pixel PB is selectively arranged as the dummy pixel P2
  • the dummy pixel PA or the dummy pixel PB is selectively arranged as the dummy pixel P3.
  • 3A shows an example of the dummy pixel PA
  • FIG. 3B shows an example of the dummy pixel PB.
  • the pixel array 10 includes a plurality of control lines TGLL, a plurality of control lines FDGL, a plurality of control lines RSTL, a plurality of control lines FCGL, and a plurality of control lines TGSL in the dummy pixel regions R21, R22, R31, and R32. , A plurality of control lines SELL, a plurality of power supply lines PL, a plurality of voltage supply lines VL, and a plurality of signal lines SGL.
  • the voltage supply line VL is connected to the voltage generation unit 42 (described later) of the controller 40.
  • the voltage generator 42 applies a single voltage signal SVR to the plurality of voltage supply lines VL.
  • the voltage signal SVR is a signal that changes between a predetermined voltage VR and the power supply voltage VDD.
  • the voltage VR is a voltage lower than the power supply voltage VDD.
  • the voltage signal SVR is set to the voltage VR, for example, during a period in which the transistors TGL and TGS in the read drive D2, which will be described later, are on, and the power supply is set during a period in which the transistors TGL and TGS in the storage start drive D1, which will be described later, are on. It is set to the voltage VDD.
  • the drain and source of the transistor TGL are connected to each other and the drain and source of the transistor TGS are connected to each other. That is, in the dummy pixel PA, the drain and source of the transistor TGL are connected to each other without the transistor TGL, and the drain and source of the transistor TGS are connected to each other without the transistor TGS.
  • the voltage of the floating diffusion FD is set to the power supply voltage VDD in the read drive D2 as described later.
  • the dummy pixel PA outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the dummy pixel PA sequentially outputs eight pixel voltages VP (VP1 to VP8) in eight periods (conversion periods T1 to T8) within the so-called horizontal period H. It has become.
  • the source of the transistor TGL is connected to the voltage supply line VL and the source of the transistor TGS is connected to the voltage supply line VL.
  • the voltage of the floating diffusion FD is set to the voltage VR by turning on the transistors TGL and TGS in the read drive D2.
  • the dummy pixel PB outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the dummy pixel PB sequentially outputs eight pixel voltages VP (VP1 to VP8) in eight periods (conversion periods T1 to T8) within the so-called horizontal period H, similarly to the image pickup pixel P1. It has become.
  • FIG. 5 shows an array of the dummy pixels P3 and P2 in the dummy pixel regions R31 and R21.
  • FIG. 6 shows an array of the dummy pixels P2 and P3 in the dummy pixel regions R22 and R32. 5 and 6, "0" indicates the dummy pixel PA and "1" indicates the dummy pixel PB.
  • one pixel line L includes two dummy pixels P3 (dummy pixels P3[1], P3[0]) in the dummy pixel region R31 and 11 dummy pixels in the dummy pixel region R21.
  • the pixel P2 (dummy pixels P2[10] to P2[0]) is included.
  • one pixel line L includes 11 dummy pixels P2 (dummy pixels P2[10] to P2[0]) in the dummy pixel region R22 and 2 in the dummy pixel region R32.
  • the number of dummy pixels P3 (dummy pixels P3[1], P3[0]) is included.
  • the array of the dummy pixels P3 in each pixel line L is “10”.
  • the array of the two dummy pixels P3 in the dummy pixel region R31 functions as left edge identification information INFL for identifying the left edge of the pixel array 10.
  • the array of the dummy pixels P3 in each pixel line L is “01”.
  • the array of the two dummy pixels P3 in the dummy pixel region R31 functions as right edge identification information INFR for identifying the right edge of the pixel array 10.
  • the array of the dummy pixels P2 is “0000000000” in the 0th pixel line L[0]. That is, all the 11 dummy pixels P2[10] to P2[0] are dummy pixels PA.
  • the array of dummy pixels P2 is “0000000000001”. That is, the dummy pixel P2[0] is the dummy pixel PB, and the other dummy pixels P2[10] to P2[1] are the dummy pixels PA.
  • the array of the dummy pixels P2 is “00000000000010”.
  • the dummy pixel P2[1] is the dummy pixel PB, and the other dummy pixels P2[10] to P2[2] and P2[0] are the dummy pixels PA.
  • the array of the dummy pixels P2 is set to be different between the pixel lines L.
  • the array of the dummy pixels P2 corresponds to the second number of the pixel line L represented by a binary number.
  • the second number of 2048 pixel lines L can be expressed. That is, the array of 11 dummy pixels P2 functions as line identification information INF for identifying the pixel line L.
  • the dummy pixel region R21 has been described above as an example, the same applies to the dummy pixel region R22 (FIG. 6).
  • the two scanning units 20L and 20R are configured to sequentially drive the imaging pixels P1 and the dummy pixels P2 and P3 in the pixel array 10 in units of pixel lines L based on an instruction from the controller 40. ..
  • the scanning unit 20L has an address decoder 21L, a logic unit 22L, and a driver unit 23L.
  • the scanning unit 20R includes an address decoder 21R, a logic unit 22R, and a driver unit 23R.
  • the address decoder 21L is configured to select the pixel line L in the pixel array 10 according to the address indicated by the address signal ADR based on the address signal ADR supplied from the controller 40.
  • the logic unit 22L is configured to generate the signals STGL1, SFDG1, SRST1, SFCG1, STGS1, SSEL1 corresponding to the pixel lines L, respectively, based on the instruction from the address decoder 21L.
  • the driver unit 23L generates signals STGL, SFDG, SRST, SFCG, STGS, SSEL corresponding to each pixel line L based on the signals STGL1, SFDG1, SRST1, SFCG1, STGS1, SSEL1 corresponding to each pixel line L, respectively. To be configured.
  • the address signal ADR supplied to the address decoder 21R is the same as the address signal ADR supplied to the address decoder 21L. Therefore, the address decoders 21L and 21R select mutually the same pixel lines L based on the address signal ADR. As a result, the scanning units 20L and 20R sequentially drive the imaging pixels P1 and the dummy pixels P2 and P3 in the pixel array 10 from the left and right sides of the pixel array 10 in pixel line L units.
  • the reading unit 30 is configured to generate the image signal DATA0 by performing AD conversion based on the signal SIG supplied from the pixel array 10 via the signal line SGL.
  • FIG. 7 shows a configuration example of the reading unit 30. Note that FIG. 7 also illustrates the controller 40 in addition to the reading unit 30.
  • the readout unit 30 includes a readout control unit 31, a reference signal generation unit 32, and a plurality of AD (Analog to Digital) conversion units ADC (AD conversion units ADC[0], ADC[1], ADC[2], etc And a plurality of switch parts SW (switch parts SW[0], SW[1], SW[2],...) And a bus wiring 100.
  • AD Analog to Digital
  • the read control unit 31 is configured to control the read operation in the read unit 30 based on an instruction from the controller 40. Specifically, the read control unit 31 supplies a control signal to the reference signal generation unit 32 to cause the reference signal generation unit 32 to generate a reference signal REF (described later). Further, the read control unit 31 controls the AD conversion operation in the plurality of AD conversion units ADC by supplying the clock signal CLK and the control signal CC to the plurality of AD conversion units ADC.
  • the reference signal generator 32 is configured to generate the reference signal REF.
  • the reference signal REF has a so-called ramp waveform in which the voltage level gradually decreases with the passage of time during the eight AD conversion periods (conversion periods T1 to T8).
  • the reference signal generation unit 32 is configured to be able to change the slope of the ramp waveform in the reference signal REF.
  • the image pickup sensitivity can be changed by changing the slope of the ramp waveform as described above, and as a result, a bright object or a dark object can be imaged. Then, the reference signal generation unit 32 supplies the generated reference signal REF to the plurality of AD conversion units ADC.
  • the AD conversion unit ADC is configured to convert the voltage of the signal SIG into a digital code CODE by performing AD conversion based on the signal SIG supplied from the pixel array 10.
  • the plurality of AD conversion units ADC are provided corresponding to the plurality of signal lines SGL. Specifically, the 0th AD converter ADC[0] is provided corresponding to the 0th signal line SGL[0], and the 1st AD converter ADC[1] is the 1st signal line.
  • the second AD converter ADC[2] is provided corresponding to SGL[1], and the second AD converter ADC[2] is provided corresponding to the second signal line SGL[2].
  • the AD conversion unit ADC includes capacitive elements 33 and 34, a current source 35, a comparator 36, a counter 37, and a latch 38.
  • the reference signal REF is supplied to one end of the capacitive element 33, and the other end is connected to the positive input terminal of the comparator 36.
  • One end of the capacitive element 34 is connected to the signal line SGL, and the other end is connected to the negative input terminal of the comparator 36.
  • the current source 35 is configured to flow a current having a predetermined current value from the signal line SGL to the ground.
  • the comparator 36 is configured to compare the input voltage at the positive input terminal with the input voltage at the negative input terminal and output the comparison result as a signal CMP.
  • the reference signal REF is supplied to the positive input terminal of the comparator 36 via the capacitance element 33, and the signal SIG is supplied to the negative input terminal of the comparator 36 via the capacitance element 34.
  • the comparator 36 also has a function of performing zero adjustment for setting the voltages of the capacitive elements 33 and 34 in a predetermined period described later.
  • the counter 37 is configured to perform a counting operation based on the signal CMP supplied from the comparator 36, the clock signal CLK and the control signal CC supplied from the read control unit 31.
  • the latch 38 is configured to hold the count value CNT obtained by the counter 37 as a digital code CODE having a plurality of bits.
  • the switch SW is configured to supply the digital code CODE output from the AD converter ADC to the bus wiring 100 based on the control signal SSW supplied from the controller 40.
  • the plurality of switch units SW are provided corresponding to the plurality of AD conversion units ADC. Specifically, the 0th switch unit SW[0] is provided corresponding to the 0th AD conversion unit ADC[0], and the 1st switch unit SW[1] is the 1st AD conversion unit.
  • the second switch unit SW[2] is provided corresponding to the ADC [1], and the second switch unit SW[2] is provided corresponding to the second AD conversion unit ADC[2].
  • the switch unit SW is configured by using the same number of transistors as the number of bits of the digital code CODE. These transistors are on/off controlled based on each bit (control signals SSW[0], SSW[1], SSW[2],...) Of the control signal SSW supplied from the controller 40.
  • the 0th switch unit SW[0] is output from the 0th AD conversion unit ADC[0] by turning on each transistor based on the control signal SSW[0].
  • the digital code CODE is supplied to the bus wiring 100.
  • the first switch unit SW[1] turns on each transistor based on the control signal SSW[1] to turn on the digital signal output from the first AD converter ADC[1].
  • the code CODE is supplied to the bus wiring 100. The same applies to the other switch units SW.
  • the bus wiring 100 has a plurality of wirings and is configured to transmit the digital code CODE output from the AD conversion unit ADC.
  • the reading unit 30 uses the bus line 100 to sequentially transfer the plurality of digital codes CODE supplied from the AD conversion unit ADC to the controller 40 as the image signal DATA0 (data transfer operation).
  • the controller 40 (FIG. 1) is configured to control the operation of the imaging device 1 by supplying control signals to the scanning units 20L and 20R and the reading unit 30.
  • the controller 40 has an address generation unit 41, a voltage generation unit 42, a column scanning unit 43, an image processing unit 44, and a diagnosis processing unit 45.
  • the address generation unit 41 is configured to determine a pixel line L to be driven in the pixel array 10 and generate an address signal ADR indicating an address corresponding to the pixel line L. Then, the address generation unit 41 supplies the generated address signal ADR to the address decoder 21L of the scanning unit 20L and the address decoder 21R of the scanning unit 20R.
  • the voltage generator 42 is configured to generate the voltage signal SVR and the power supply voltage VDD.
  • the voltage signal SVR is a signal that changes between a predetermined voltage VR and the power supply voltage VDD.
  • the voltage VR is a voltage lower than the power supply voltage VDD.
  • the voltage signal SVR is set to the voltage VR, for example, during a period in which the transistors TGL and TGS in the read drive D2 described later are turned on, and is set to the power supply voltage VDD in the storage start drive D1 described later.
  • the voltage generation unit 42 supplies the generated voltage signal SVR to the plurality of voltage supply lines VL in the pixel array 10 and supplies the generated power supply voltage VDD to the plurality of power supply lines PL in the pixel array 10. It has become.
  • the column scanning unit 43 is configured to determine the AD conversion unit ADC that is the target of the data transfer operation in the reading unit 30, and generate the control signal SSW based on the determination result. Then, the column scanning unit 43 is configured to supply the generated control signal SSW to the plurality of switch units SW of the reading unit 30.
  • the image processing unit 44 is configured to perform predetermined image processing on the image indicated by the image signal DATA0.
  • the predetermined image processing includes, for example, image combining processing.
  • the image processing unit 44 supplies the eight digital codes CODE (digital code CODE1) for each pixel, which are supplied from the reading unit 30 and obtained in the eight AD conversion periods (conversion periods T1 to T8). ⁇ CODE8), four pixel values VAL1 to VAL4 for the pixel are generated, and the four pixel values VAL1 to VAL4 are combined to generate the pixel value VAL of the pixel.
  • the image processing unit 44 generates this pixel value VAL for all the pixels included in the pixel array 10.
  • the image processing unit 44 outputs the pixel value VAL related to the image pickup pixel P1 as the image signal DATA.
  • the image processing unit 44 is configured to generate the pixel value VAL by synthesizing the four pixel values VAL1 to VAL4, but the present invention is not limited to this.
  • VAL1 to VAL4 may be output as they are.
  • the image processing unit 44 supplies the pixel values VAL1 to VAL4 related to the dummy pixels P2 and P3 to the diagnosis processing unit 45 as the image signal DATA1.
  • the diagnostic processing unit 45 is configured to perform diagnostic processing based on the address signal ADR and the image signal DATA1. Specifically, the diagnosis processing unit 45 obtains the left edge identification information INFL and the right edge identification information INFR based on the pixel values VAL1 to VAL4 related to the dummy pixel P3 included in the image signal DATA1, and also the dummy included in the image signal DATA1. The line identification information INF is obtained based on the pixel value VAL related to the pixel P2. Then, the diagnosis processing unit 45 compares the address indicated by the address signal ADR with the line identification information INF to diagnose whether or not the imaging device 1 is performing a desired operation. Then, the diagnosis processing unit 45 outputs the result of the diagnosis processing (diagnosis result RES).
  • FIG. 8 shows an implementation example E1 of the image pickup apparatus 1.
  • the imaging device 1 is formed on one semiconductor chip 200.
  • the pixel array 10 is arranged near the center of the semiconductor chip 200.
  • the scanning unit 20L is arranged on the left side of the pixel array 10, and the scanning unit 20R is arranged on the right side of the pixel array 10.
  • the readout unit 30 and the column scanning unit 43 of the controller 40 are arranged below the pixel array 10.
  • the control unit 40A is arranged on the upper side of the pixel array 10.
  • the control unit 40A corresponds to a circuit of the controller 40 other than the column scanning unit 43.
  • the address generation unit 41 in the control unit 40A supplies the address signal ADR to the scanning units 20L and 20R.
  • the scanning units 20L and 20R supply the signals STGL, SFDG, SRST, SFCG, STGS, and SSEL to the pixel array 10.
  • the voltage generation unit 42 in the control unit 40A supplies the voltage signal SVR and the power supply voltage VDD to the pixel array 10.
  • the pixel array 10 supplies the signal SIG to the reading unit 30.
  • the reading unit 30 supplies the image signal DATA0 to the image processing unit 44 in the control unit 40A.
  • the image pickup apparatus 1 is capable of detecting, for example, an operation defect of each circuit and a connection defect such as an open or a short circuit of various wirings in the semiconductor chip 200 by performing a diagnostic process.
  • FIG. 9 illustrates another implementation example E2 of the image pickup apparatus 1.
  • the imaging device 1 is formed on two semiconductor chips 201 and 202.
  • the pixel array 10 is formed on the semiconductor chip 201. That is, the semiconductor chip 201 includes a plurality of imaging pixels P1, a plurality of dummy pixels P2 and P3, control lines TGLL, FDGL, RSTL, FCGL, TGSL, SELL, a power supply line PL, a voltage supply line VL, and a signal line SGL. It is formed. Further, the semiconductor chip 201 is provided with electrode regions 201A, 201B, 201C. The electrode region 201A is provided near the left side of the semiconductor chip 201, the electrode region 201B is provided near the right side of the semiconductor chip 201, and the electrode region 201C is provided near the lower side of the semiconductor chip 201.
  • a plurality of electrodes are formed in the electrode region 201A, and the plurality of electrodes are formed through the vias such as TCV (Through Chip Via), and the control lines TGLL, FDGL, RSTL, FCGL, TGSL, and SELL in the pixel array 10.
  • a plurality of electrodes are formed in the electrode region 201B, and the plurality of electrodes are provided via control lines TGLL, FDGL, RSTL, FCGL, TGSL, SELL, power lines PL in the pixel array 10 via vias such as TCV. It is connected to the voltage supply line VL.
  • a plurality of electrodes are formed in the electrode region 201C, and these plurality of electrodes are connected to the plurality of signal lines SGL in the pixel array 10 via vias such as TCV.
  • scanning units 20L and 20R scanning units 20L and 20R, a control unit 40A, a column scanning unit 43, and a reading unit 30 are formed.
  • the control unit 40A, the column scanning unit 43, and the reading unit 30 are arranged near the center of the semiconductor chip 202.
  • the scanning unit 20L is arranged on the left side of the control unit 40A, the column scanning unit 43, and the reading unit 30, and the scanning unit 20R is arranged on the right side of the control unit 40A, the column scanning unit 43, and the reading unit 30.
  • the semiconductor chip 202 is provided with electrode regions 202A, 202B, 202C.
  • the electrode region 202A is provided near the left side of the semiconductor chip 202 so as to be adjacent to the scanning unit 20L
  • the electrode region 202B is provided near the right side of the semiconductor chip 202 so as to be adjacent to the scanning unit 20R.
  • 202C is provided near the lower side of the semiconductor chip 202 so as to be adjacent to the reading unit 30.
  • a plurality of electrodes are formed in the electrode region 202A, and the plurality of electrodes are connected to the scanning unit 20L and the voltage generating unit 42 in the control unit 40A via vias such as TCV.
  • a plurality of electrodes are formed in the electrode region 202B, and the plurality of electrodes are connected to the scanning unit 20R and the voltage generation unit 42 in the control unit 40A via vias such as TCV.
  • a plurality of electrodes are formed in the electrode region 202C, and the plurality of electrodes are connected to the reading section 30 via vias such as TCV.
  • the semiconductor chip 201 and the semiconductor chip 202 are attached to each other.
  • the plurality of electrodes in the electrode region 201A of the semiconductor chip 201 are electrically connected to the plurality of electrodes in the electrode region 202A of the semiconductor chip 202
  • the plurality of electrodes in the electrode region 201B of the semiconductor chip 201 are connected to the semiconductor chip 202.
  • Are electrically connected to the plurality of electrodes in the electrode region 202B, and the plurality of electrodes in the electrode region 201C of the semiconductor chip 201 are electrically connected to the plurality of electrodes in the electrode region 202C of the semiconductor chip 202.
  • the address generation unit 41 in the control unit 40A of the semiconductor chip 202 supplies the address signal ADR to the scanning units 20L and 20R.
  • the scanning units 20L and 20R of the semiconductor chip 202 connect the control lines TGLL, FDGL, RSTL, FCGL, TGSL and SELL via the plurality of electrodes in the electrode regions 201A and 202A and the plurality of electrodes in the electrode regions 201B and 202B, respectively. It is supplied to the pixel array 10 of the semiconductor chip 201.
  • the voltage generation unit 42 in the control unit 40A of the semiconductor chip 202 supplies the voltage signal SVR and the power supply voltage VDD to the semiconductor chip via the plurality of electrodes in the electrode regions 201A and 202A and the plurality of electrodes in the electrode regions 201B and 202B. 201 to the pixel array 10.
  • the pixel array 10 of the semiconductor chip 201 supplies the signal SIG to the reading unit 30 of the semiconductor chip 202 via the plurality of electrodes in the electrode region 201C.
  • the reading unit 30 supplies the image signal DATA0 to the image processing unit 44 in the control unit 40A.
  • the imaging device 1 performs, for example, a malfunction of each circuit, a connection defect such as an open or a short circuit of various wirings in the semiconductor chips 201 and 202, and a connection between the semiconductor chip 201 and the semiconductor chip 202 by performing a diagnostic process.
  • the connection failure can be detected.
  • the semiconductor chip 201 can be manufactured using a semiconductor manufacturing process specialized for pixels. That is, since the semiconductor chip 201 has no transistors other than the pixel array 10, even if there is a step of annealing at 1000 degrees, for example, the circuits other than the pixel array 10 are not affected. Therefore, when manufacturing the semiconductor chip 201, for example, a high temperature process as a countermeasure against white spots can be introduced, and as a result, the characteristics of the imaging device 1 can be improved.
  • the photodiode PD1 corresponds to a specific but not limitative example of “first light-receiving element” in one embodiment of the present disclosure.
  • the photodiode PD2 corresponds to a specific but not limitative example of “second light-receiving element” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the imaging pixel P1 corresponds to a specific but not limitative example of “imaging pixel circuit” in one embodiment of the disclosure.
  • the pixel circuit CKT of the dummy pixel PA corresponds to a specific but not limitative example of “first dummy pixel circuit” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the dummy pixel PB corresponds to a specific but not limitative example of “second dummy pixel circuit” in one embodiment of the disclosure.
  • the floating diffusion FD corresponds to a specific but not limitative example of “accumulation unit” in one embodiment of the present disclosure.
  • the transistor TGL corresponds to a specific but not limitative example of “first transistor” in one embodiment of the present disclosure.
  • the transistors AMP and SEL correspond to a specific but not limitative example of “output unit” in one embodiment of the present disclosure.
  • the transistor RST corresponds to a specific but not limitative example of “second transistor” in one embodiment of the present disclosure.
  • the transistor TGS corresponds to a specific but not limitative example of “third transistor” in one embodiment of the present disclosure.
  • the transistor FCG corresponds to a specific but not limitative example of “fourth transistor” in one embodiment of the present disclosure.
  • the transistor FDG corresponds to a specific but not limitative example of “fifth transistor” in one embodiment of the present disclosure.
  • the capacitive element FC corresponds to a specific but not limitative example of “capacitive element” in one embodiment of the present disclosure.
  • the voltage supply line VL corresponds to a specific but not limitative example of “voltage supply line” in one embodiment of the disclosure.
  • the address generation unit 41 corresponds to a specific but not limitative example of “address generation unit” in one embodiment of the present disclosure.
  • the scanning units 20L and 20R correspond to a specific example of the “drive control unit” in the present disclosure
  • the reading unit 30, the image processing unit 44, and the diagnostic processing unit 45 correspond to a specific example of the “diagnosis unit” in the present disclosure.
  • the operation and action of the image pickup apparatus 1 according to the present embodiment will be described.
  • the address generation unit 41 of the controller 40 determines a pixel line L to be driven in the pixel array 10 and generates an address signal ADR indicating an address corresponding to the pixel line L. Based on an instruction from the controller 40, the two scanning units 20L and 20R sequentially drive the image pickup pixel P1 and the dummy pixels P2 and P3 in the pixel array 10 for each pixel line L.
  • the voltage generator 42 of the controller 40 generates the voltage signal SVR and the power supply voltage VDD.
  • the imaging pixel P1 and the dummy pixels P2 and P3 in the pixel array 10 sequentially output eight pixel voltages VP1 to VP8 in eight conversion periods T1 to T8.
  • the AD conversion unit ADC of the reading unit 30 performs AD conversion based on these eight pixel voltages VP1 to VP8, and outputs eight digital codes CODE (digital codes CODE1 to CODE8), respectively.
  • the image processing unit 44 of the controller 40 generates four pixel values VAL1 to VAL4 for the pixel based on the eight digital codes CODE1 to CODE8 related to each pixel included in the image signal DATA0, and the four pixel values
  • the pixel value VAL of the pixel is generated by synthesizing VAL1 to VAL4, and the pixel value VAL related to the image pickup pixel P1 is output as the image signal DATA.
  • the image processing unit 44 supplies the pixel values VAL1 to VAL4 related to the dummy pixels P2 and P3 to the diagnosis processing unit 45 as the image signal DATA1.
  • the diagnostic processing unit 45 of the controller 40 performs diagnostic processing based on the address signal ADR and the image signal DATA1 and outputs a diagnostic result RES.
  • each of the image pickup pixels P1 in the pixel array 10 accumulates electric charge according to the amount of received light and outputs the pixel voltage VP as a signal SIG. The operation will be described in detail below.
  • FIG. 10 shows an example of an operation of scanning the plurality of imaging pixels P1 and the plurality of dummy pixels P2 and P3 in the pixel array 10.
  • the image pickup apparatus 1 performs the accumulation start drive D1 in the vertical direction in order from the top to the plurality of image pickup pixels P1 and the plurality of dummy pixels P2 and P3 in the pixel array 10 in the period from timing t0 to t1.
  • the scanning units 20L and 20R turn on the transistors TGL, FDG, RST, FCG, and TGS in a predetermined period within the horizontal period H in units of pixel lines L sequentially from the top in the vertical direction. After setting, these transistors are turned off.
  • each of the plurality of imaging pixels P1 after the voltage at the floating diffusion FD, the capacitive element FC, and the photodiodes PD1 and PD2 is set to the power supply voltage VDD, the charge accumulation is started and the read driving D2 is performed. The charge is accumulated in the accumulation period T10 until the above.
  • the voltage at the floating diffusion FD and the capacitive element FC is set to the power supply voltage VDD.
  • the voltage VR of the voltage signal SVR applied to the voltage supply line VL is set to the power supply voltage VDD during the period in which the transistors TGL and TGS in the storage start drive D1 are in the ON state, so that the floating diffusion FD and the capacitive element FC. Is set to the power supply voltage VDD.
  • the imaging device 1 performs the read drive D2 in the vertical direction in order from the top to the plurality of imaging pixels P1 and the plurality of dummy pixels P2 and P3 during the period from timing t10 to t11.
  • each of the plurality of imaging pixels P1 and the plurality of dummy pixels P2, P3 sequentially outputs eight pixel voltages VP1 to VP8.
  • the readout unit 30 performs AD conversion based on these eight pixel voltages VP1 to VP8, and outputs eight digital codes CODE (digital codes CODE1 to CODE8), respectively.
  • the image processing unit 44 generates four pixel values VAL1 to VAL4 for the pixel based on the eight digital codes CODE1 to CODE8 related to each pixel supplied from the reading unit 30, and the four pixel values
  • the pixel value VAL of the pixel is generated by synthesizing VAL1 to VAL4.
  • the image pickup apparatus 1 repeats such storage start drive D1 and read drive D2. Specifically, as shown in FIG. 10, the image pickup apparatus 1 performs the accumulation start drive D1 in the period of timing t2 to t3 and the read drive D2 in the period of timing t12 to t13. Further, the image pickup apparatus 1 performs the accumulation start drive D1 during the period from timing t4 to t5, and performs the read drive D2 during the period from timing t14 to t15.
  • FIG. 11 shows an operation example of the image pickup apparatus 1.
  • (A) shows the waveform of the horizontal synchronizing signal XHS
  • (B) shows the waveform of the signal SSEL supplied to the image pickup pixel P1A
  • (C) shows the waveform of the signal SRST supplied to the image pickup pixel P1A
  • (D) shows the waveform of the signal SFDG supplied to the imaging pixel P1A
  • (E) shows the waveform of the signal STGL supplied to the imaging pixel P1A
  • (F) is supplied to the imaging pixel P1A.
  • the waveform of the signal SFCG is shown, (G) shows the waveform of the signal STGS supplied to the imaging pixel P1A, (H) shows the waveform of the reference signal REF, and (I) shows the signal SIG output from the imaging pixel P1A. And (J) shows the operation of the counter 37 in the AD conversion unit ADC connected to the imaging pixel P1A.
  • 12A shows the first half of the operations shown in FIG. 11, and FIG. 12B shows the second half of the operations shown in FIG. 11(H) and (I), FIGS. 12A(H) and (I), and FIGS. 12B(H) and (I), the waveform of each signal is shown on the same voltage axis.
  • 11H, 12A, and 12B shows the waveform at the positive input terminal of the comparator 36, and the reference signal REF in FIG. 11I, FIG. 12A, and FIG.
  • the signal SIG of (I) shows a waveform at the negative input terminal of the comparator 36.
  • the diagonal lines indicate that the counter 37 is performing a counting operation.
  • FIGS. 12A to 12C show the state of the image pickup pixel P1A.
  • the transistors TGL, RST, FDG, TGS, FCG and SEL are shown by using switches according to the operating states of the transistors.
  • the scanning units 20L and 20R first select the pixel line L including the image pickup pixel P1A by using the signal SSEL, and make the image pickup pixel P1A correspond to the image pickup pixel P1A. It is electrically connected to the signal line SGL. Then, the scanning units 20L and 20R control the operation of the imaging pixel P1A using the signals SRST, SFDG, STGL, SFCG, and STGS, and the imaging pixel P1A has eight pixel voltages VP1 in eight conversion periods T1 to T8. To VP8 are sequentially output. Then, the AD conversion unit ADC of the reading unit 30 performs AD conversion based on these eight pixel voltages VP1 to VP8, and outputs eight digital codes CODE1 to CODE8. This operation will be described in detail below.
  • the scanning units 20L and 20R change the voltage of the signal SSEL from low level to high level at timing t2 (FIG. 12A(B)).
  • the transistor SEL is turned on, and the image pickup pixel P1A is electrically connected to the signal line SGL.
  • the scanning units 20L and 20R set the signals SRST and SFDG to the high level (FIGS. 12A(C) and (D)).
  • the imaging pixel P1A both the transistors RST and FDG are turned on, the voltage of the floating diffusion FD is set to the power supply voltage VDD, and the floating diffusion FD is reset.
  • the scanning units 20L and 20R change the voltage of the signal SFDG from the high level to the low level (FIG. 12A(D)). As a result, in the image pickup pixel P1A, the transistor FDG is turned off.
  • the scanning units 20L and 20R change the voltage of the signal SRST from the high level to the low level (FIG. 12A(C)). As a result, the transistor RST is turned off in the imaging pixel P1A.
  • the scanning units 20L and 20R change the voltage of the signal SFDG from the low level to the high level (FIG. 12A(D)). As a result, in the image pickup pixel P1A, the transistor FDG is turned on. Further, the comparator 36 performs zero adjustment for setting the voltages of the capacitive elements 33 and 34 during the period from timing t13 to timing t14.
  • the comparator 36 finishes the zero adjustment. Then, at this timing t14, the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12A(H)).
  • the transistors FDG and SEL are turned on and all other transistors are turned off. Since the transistor FDG is in the on state, the floating diffusion FD and the transistor FDG form a combined capacitance.
  • This combined capacitor functions as a conversion capacitor that converts charges into a voltage in the image pickup pixel P1A.
  • the capacitance value of the conversion capacitance in the image pickup pixel P1A is large, and thus the conversion efficiency from charge to voltage is low.
  • This conversion capacitor holds the electric charge when the floating diffusion FD is reset during the period up to the timing t12.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP1) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP1. Specifically, at timing t15, the read control unit 31 starts generating the clock signal CLK, and at the same time, the reference signal generation unit 32 changes the voltage of the reference signal REF from the voltage V1 by a predetermined degree of change. It begins to lower (FIG. 12A(H)). In response to this, the counter 37 of the AD conversion unit ADC starts the counting operation (FIG. 12A(J)).
  • the voltage of the reference signal REF becomes lower than the voltage of the signal SIG (pixel voltage VP1) (FIGS. 12A (H) and (I)).
  • the comparator 36 of the AD converter ADC changes the voltage of the signal CMP, and as a result, the counter 37 stops the counting operation (FIG. 12A(J)).
  • the count value CNT of the counter 37 when the counting operation is stopped corresponds to the pixel voltage VP1.
  • the AD conversion unit ADC performs the AD conversion based on the pixel voltage VP1, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE1 (FIG. 12A (J )).
  • the read control unit 31 stops the generation of the clock signal CLK with the end of the conversion period T1
  • the reference signal generation unit 32 stops the change in the voltage of the reference signal REF (see FIG. 12A ( H))
  • the counter 37 resets the count value CNT.
  • the scanning units 20L and 20R change the voltage of the signal SFDG from the high level to the low level (FIG. 12A(D)).
  • the transistor FDG is turned off.
  • the comparator 36 performs zero adjustment for setting the voltages of the capacitive elements 33 and 34 in the period from timing t21 to timing t22.
  • the comparator 36 ends the zero adjustment. Then, at this timing t22, the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12A(H)).
  • the transistor SEL is turned on and all other transistors are turned off.
  • the capacitance value of the conversion capacitance in the image pickup pixel P1A is small, and thus the conversion efficiency from charge to voltage is high.
  • This conversion capacitor holds the electric charge when the floating diffusion FD is reset during the period up to the timing t12.
  • the imaging pixel P1A outputs a pixel voltage VP (pixel voltage VP2) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP2. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP2, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE2 (FIG. 12A(J)).
  • the scanning units 20L and 20R change the voltage of the signal STGL from low level to high level (FIG. 12A(E)).
  • the transistor TGL is turned on.
  • the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12A(H)).
  • the scanning units 20L and 20R change the voltage of the signal STGL from the high level to the low level (FIG. 12A(E)).
  • the transistor TGL is turned off in the image pickup pixel P1A.
  • the transistor FDG is in the off state, and therefore the capacitance value of the conversion capacitance in the image pickup pixel P1A is small, so that the conversion efficiency from charge to voltage is high.
  • This conversion capacitor holds the charge transferred from the photodiode PD1 at the timings t31 to t32.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP3) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP3. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP3, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as a digital code CODE3 (FIG. 12A(J)).
  • This digital code CODE3 corresponds to the digital code CODE2 obtained when the conversion efficiency is high (conversion period T2).
  • the scanning units 20L and 20R change the voltage of the signal SFDG from the low level to the high level and change the voltage of the signal STGL from the low level to the high level (FIGS. 12A(D), (E). )).
  • the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12A(H)).
  • the scanning units 20L and 20R change the voltage of the signal STGL from the high level to the low level at the timing t42 (FIG. 12A(E)).
  • the transistor TGL is turned off in the image pickup pixel P1A.
  • the transistor FDG is in the ON state, so that the floating diffusion FD and the transistor FDG form a combined capacitance (conversion capacitance). Therefore, since the capacitance value of the conversion capacitance in the imaging pixel P1A is large, the conversion efficiency from charge to voltage is low.
  • This conversion capacitor holds the charges transferred from the photodiode PD1 at the timings t31 to t32 and t41 to t42.
  • the imaging pixel P1A outputs a pixel voltage VP (pixel voltage VP4) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP4. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP4, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE4 (FIG. 12A(J)).
  • This digital code CODE4 also corresponds to the digital code CODE1 obtained when the conversion efficiency is low (conversion period T1).
  • the scanning units 20L and 20R change the voltage of the signal SRST from the low level to the high level (FIG. 12B(C)).
  • the transistor RST is turned on in the image pickup pixel P1A. Since the transistor FDG is in the ON state, the voltage of the floating diffusion FD is set to the power supply voltage VDD, and the floating diffusion FD is reset.
  • the scanning units 20L and 20R change the voltage of the signal SRST from the high level to the low level (FIG. 12B(C)). As a result, the transistor RST is turned off in the imaging pixel P1A.
  • the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12B(H)).
  • the scanning units 20L and 20R change the voltage of the signal SFCG from low level to high level (FIG. 12B(F)).
  • the transistor FCG is turned on.
  • the comparator 36 performs zero adjustment for setting the voltages of the capacitive elements 33 and 34 in the period from timing t53 to timing t54.
  • the comparator 36 ends the zero adjustment. Further, at the timing t54, the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12A(H)).
  • the transistors FDG, FCG, and SEL are turned on, and all other transistors are turned off. Since both the transistors FDG and FCG are in the ON state, the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance (conversion capacitance). This conversion capacitance holds the electric charge generated in the photodiode PD2 before the timing t53 and supplied to and accumulated in the capacitive element FC via the transistor TGS.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP5) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP5. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP5, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE5 (FIG. 12B(J)).
  • the scanning units 20L and 20R change the voltage of the signal STGS from the low level to the high level (FIG. 12B(G)).
  • the transistor TGS is turned on in the image pickup pixel P1A.
  • the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12B(H)).
  • the scanning units 20L and 20R change the voltage of the signal STGS from the high level to the low level (FIG. 12B(G)).
  • the transistor TGS is turned off.
  • the imaging pixel P1A As a result, in the imaging pixel P1A, as shown in FIG. 13C, since the transistors FDG and FCG are both in the ON state, the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance (conversion capacitance). To do.
  • This conversion capacitance is generated in the photodiode PD2 before the timing t53, and in addition to the charges supplied to and accumulated in the capacitive element FC via the transistor TGS, the charges transferred from the photodiode PD2 at the timings t61 to t62. keeping.
  • the imaging pixel P1A outputs a pixel voltage VP (pixel voltage VP6) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP6. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP6, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE6 (FIG. 12B(J)).
  • the digital code CODE6 corresponds to the digital code CODE5 obtained when the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance.
  • the comparator 36 performs zero adjustment for setting the voltages of the capacitive elements 33 and 34 in the period from timing t71 to timing t72.
  • the comparator 36 ends the zero adjustment. Further, at the timing t72, the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12B(H)).
  • the imaging pixel P1A As a result, in the imaging pixel P1A, as shown in FIG. 13C, since the transistors FDG and FCG are both in the ON state, the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance (conversion capacitance). To do.
  • This conversion capacitance is generated in the photodiode PD2 before the timing t53, and in addition to the charges supplied to and accumulated in the capacitive element FC via the transistor TGS, the charges transferred from the photodiode PD2 at the timings t61 to t62. keeping.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP7) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP7. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP7, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE7 (FIG. 12B(J)).
  • the scanning units 20L and 20R change the voltage of the signal SRST from low level to high level (FIG. 12B(C)).
  • the transistor RST is turned on in the image pickup pixel P1A. Since the transistors FDG and FCG are in the ON state, the voltage of the floating diffusion FD and the voltage of the capacitive element FC are set to the power supply voltage VDD, and the floating diffusion FD and the capacitive element FC are reset.
  • the scanning units 20L and 20R change the voltage of the signal SFCG from the high level to the low level (FIG. 12B(F)). As a result, the transistor FCG is turned off in the imaging pixel P1A.
  • the scanning units 20L and 20R change the voltage of the signal SRST from the high level to the low level (FIG. 12B(C)). As a result, the transistor RST is turned off in the imaging pixel P1A.
  • the scanning units 20L and 20R change the voltage of the signal SFCG from the low level to the high level (FIG. 12B(F)).
  • the transistor FCG is turned on.
  • the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 12B(H)).
  • the imaging pixel P1A As a result, in the imaging pixel P1A, as shown in FIG. 13C, since the transistors FDG and FCG are both in the ON state, the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance (conversion capacitance). To do. This conversion capacitor holds electric charges when the floating diffusion FD and the capacitive element FC are reset at timings t81 to t82.
  • the imaging pixel P1A outputs a pixel voltage VP (pixel voltage VP8) corresponding to the voltage in the floating diffusion FD at this time.
  • the AD conversion unit ADC performs AD conversion based on this pixel voltage VP8. This operation is similar to the operation in the conversion period T1.
  • the AD conversion unit ADC performs AD conversion based on the pixel voltage VP8, and the latch 38 of the AD conversion unit ADC outputs the count value CNT of the counter 37 as the digital code CODE8 (FIG. 12B(J)).
  • the digital code CODE8 corresponds to the digital code CODE7 obtained when the floating diffusion FD, the transistors FDG and FCG, and the capacitive element FC form a combined capacitance.
  • the scanning units 20L and 20R change the voltage of the signal SFDG from the high level to the low level, and change the voltage of the signal SFCG from the high level to the low level (FIG. 12B(D), ( F)).
  • the transistors FDG and FCG are turned off.
  • the scanning units 20L and 20R change the voltage of the signal SSEL from the high level to the low level (FIG. 12B(B)).
  • the transistor SEL is turned off, and the image pickup pixel P1A is electrically disconnected from the signal line SGL.
  • the image processing unit 44 generates four pixel values VAL1 to VAL4 for the pixel based on the eight digital codes CODE1 to CODE8 related to each pixel supplied from the reading unit 30, and the four pixel values VAL1 to The pixel value VAL of the pixel is generated by synthesizing VAL4.
  • FIG. 14 schematically shows the image synthesizing process.
  • the waveforms shown in FIGS. 14A to 14G are similar to the waveforms shown in FIGS. 11A to 11G.
  • the reading unit 30 includes the period from timing t11 to t21, the period from timing t21 to t31, the period from timing t31 to t41, the period from timing t41 to t51, and the timing from t51 to.
  • the digital codes CODE1 to CODE8 are generated based on the operations during the period t61, the period from timing t61 to t71, the period from timing t71 to t81, and the period from timing t81 to t7.
  • the image processing unit 44 generates the pixel value VAL1 based on the digital code CODE2 and the digital code CODE3. Specifically, the image processing unit 44 calculates the pixel value VAL1 by subtracting the digital code CODE2 from the digital code CODE3 (CODE3-CODE2). That is, the imaging device 1 uses the principle of so-called correlated double sampling (CDS) to convert the digital code CODE2 and the D phase (Data phase) data corresponding to the P phase (Pre-Charge phase) data. The pixel value VAL1 is calculated using the corresponding digital code CODE3. Since the image capturing apparatus 1 is configured to perform such correlated double sampling, it is possible to remove the noise component included in the pixel value VAL1, and as a result, the image quality of the captured image can be improved.
  • CDS correlated double sampling
  • the image processing unit 44 generates the pixel value VAL2 based on the digital code CODE1 and the digital code CODE4. Specifically, the image processing unit 44 calculates the pixel value VAL2 by subtracting the digital code CODE1 from the digital code CODE4 (CODE4-CODE1). That is, the image pickup apparatus 1 uses the principle of correlated double sampling to calculate the pixel value VAL2 using the digital code CODE1 corresponding to the P-phase data and the digital code CODE4 corresponding to the D-phase data.
  • the image processing unit 44 generates the pixel value VAL3 based on the digital code CODE5 and the digital code CODE6. Specifically, the image processing unit 44 calculates the pixel value VAL3 by subtracting the digital code CODE5 from the digital code CODE6 (CODE6-CODE5). That is, the image pickup apparatus 1 uses the principle of correlated double sampling to calculate the pixel value VAL3 using the digital code CODE5 corresponding to the P-phase data and the digital code CODE6 corresponding to the D-phase data.
  • the image processing unit 44 generates the pixel value VAL4 based on the digital code CODE7 and the digital code CODE8. Specifically, the image processing unit 44 calculates the pixel value VAL4 by subtracting the digital code CODE8 from the digital code CODE7 (CODE7-CODE8). That is, the image pickup apparatus 1 uses the principle of so-called double data sampling (DDS) to convert the digital code CODE7 before resetting the floating diffusion FD and the capacitive element FC, and the floating diffusion FD and the capacitive element FC. The pixel value VAL4 is calculated using the digital code CODE8 after resetting.
  • DDS double data sampling
  • the image processing unit 44 generates the pixel value VAL of the pixel by combining the four pixel values VAL1 to VAL4.
  • the image processing unit 44 generates this pixel value VAL for all the pixels in the pixel array 10.
  • the image processing unit 44 outputs the pixel value VAL related to the image pickup pixel P1 as the image signal DATA.
  • FIG. 15 schematically shows an example of the overall operation of the diagnostic processing in the imaging device 1. This diagnostic process is performed in parallel with the normal imaging operation using the imaging pixel P1 in the imaging pixel region R1.
  • the reading unit 30, the image processing unit 44, and the diagnosis processing unit 45 form a diagnosis unit 49.
  • the address generation unit 41 of the controller 40 determines a pixel line L to be driven in the pixel array 10 and generates an address signal ADR indicating an address corresponding to the pixel line L. Then, the address generation unit 41 supplies the address signal ADR to the scanning units 20L and 20R.
  • the two scanning units 20L and 20R drive the imaging pixels P1 and the dummy pixels P2 and P3 belonging to the pixel line L corresponding to the address indicated by the address signal ADR based on the instruction from the controller 40.
  • the dummy pixels P2 in the dummy pixel region R21 eleven dummy pixels P2 in the dummy pixel region R22, two dummy pixels P3 in the dummy pixel region R31, and two dummy pixels P32 in the dummy pixel region R32.
  • the dummy pixel P3 sequentially outputs the eight pixel voltages VP1 to VP8 as the signal SIG in the eight conversion periods T1 to T8.
  • the AD conversion unit ADC of the reading unit 30 performs AD conversion based on these eight pixel voltages VP1 to VP8, and outputs eight digital codes CODE (digital codes CODE1 to CODE8), respectively.
  • the image processing unit 44 of the controller 40 generates four pixel values VAL1 to VAL4 based on the eight digital codes CODE1 to CODE8 of each pixel included in the image signal DATA0. Then, the image processing unit 44 supplies the pixel values VAL1 to VAL4 related to the dummy pixels P2 and P3 to the diagnosis processing unit 45 as the image signal DATA1.
  • Each of the dummy pixels P2 and P3 is a dummy pixel PA (FIG. 4A) or a dummy pixel PB (FIG. 4B).
  • the drain and source of the transistor TGL are connected to each other and the drain and source of the transistor TGS are connected to each other. Therefore, in the read drive D2, for example, the pixel voltage VP2 and the pixel voltage VP3 output from the dummy pixel PA shown in FIG. 12A are almost the same. That is, during the period from timing t31 to t32, the transistor TGL is turned on.
  • the dummy pixel PA maintains the pixel voltage VP.
  • the pixel voltage VP1 and the pixel voltage VP4 shown in FIG. 12A are almost the same, and the pixel voltages VP5 and VP6 shown in FIG. 12B are almost the same. That is, the dummy pixel PA performs the same operation as that of the image pickup pixel P1 whose light receiving amount is 0 (zero). Therefore, the AD conversion unit ADC and the image processing unit 44 of the reading unit 30 generate pixel values VAL1 to VAL4 having small values based on the eight pixel voltages VP1 to VP8 supplied from the dummy pixels PA.
  • the source of the transistor TGL is connected to the voltage supply line VL and the source of the transistor TGS is connected to the voltage supply line VL.
  • the voltage of the floating diffusion FD is set to the voltage VR
  • the voltage of the floating diffusion FD is set to the voltage VR. That is, the dummy pixel PB performs the same operation as the image pickup pixel P1 that receives a large amount of light. Therefore, the AD conversion unit ADC and the image processing unit 44 of the reading unit 30 generate pixel values VAL1 to VAL4 having large values based on the eight pixel voltages VP1 to VP8 supplied from the dummy pixels PA.
  • the diagnosis processing unit 45 of the controller 40 obtains the left end identification information INFL and the right end identification information INFR based on the pixel values VAL1 to VAL4 related to the dummy pixel P3 supplied from the image processing unit 44. Further, the diagnosis processing unit 45 obtains the line identification information INF based on the pixel values VAL1 to VAL4 related to the dummy pixel P2 supplied from the image processing unit 44, and the address indicated by the address signal ADR and this line identification information INF It is diagnosed whether the imaging device 1 is performing a desired operation by comparing the above.
  • the diagnosis processing unit 45 performs the binarization process using the threshold value TH for each of the pixel values VAL1 to VAL4 of the 11 dummy pixels P2 in the dummy pixel region R21. Since the pixel values VAL1 to VAL4 related to the dummy pixel PA are small values, this binarization process results in “0”, while the pixel values VAL1 to VAL4 related to the dummy pixel PB are large values. By this binarization processing, it becomes "1". As a result, the diagnosis processing unit 45 obtains an 11-bit binary number. This 11-bit binary number is the line identification information INF shown in FIG.
  • the diagnostic processing unit 45 compares the address indicated by the address signal ADR with the line identification information INF to diagnose whether the imaging device 1 is performing a desired operation. That is, for example, the address indicated by the address signal ADR is “0000000000” when the address signal ADR indicates the 0th pixel line L[0], and the address signal ADR indicates the 1st pixel line L[1]. In the case shown, it is "0000000000001", and in the case where the address signal ADR shows the second pixel line L[2], it is "000000000000". Therefore, the diagnosis processing unit 45 can diagnose whether or not the image pickup apparatus 1 is performing a desired operation by comparing the address indicated by the address signal ADR with the line identification information INF.
  • the diagnosis processing unit 45 obtains the line identification information INF by performing binarization processing on each of the pixel values VAL1 to VAL4 related to the 11 dummy pixels P2 in the dummy pixel region R22. Then, the diagnostic processing unit 45 compares the address indicated by the address signal ADR with the line identification information INF to diagnose whether the imaging device 1 is performing a desired operation.
  • the diagnostic processing unit 45 causes the line identification information INF acquired from the pixel values VAL1 to VAL4 related to the dummy pixel area R21 and the address indicated by the address signal ADR to match each other, and the pixel value VAL1 related to the dummy pixel area R22. If the line identification information INF acquired from VAL4 and the address indicated by the address signal ADR match each other, it is determined that the imaging device 1 is performing the desired operation.
  • the diagnosis processing unit 45 determines that the line identification information INF acquired from the pixel values VAL1 to VAL4 related to the dummy pixel area R21 and the address indicated by the address signal ADR do not match each other, or relates to the dummy pixel area R22. If the line identification information INF acquired from the pixel values VAL1 to VAL4 and the address indicated by the address signal ADR do not match each other, it is determined that the imaging device 1 has a defect.
  • the cause of the case where the line identification information INF obtained from the pixel values VAL1 to VAL4 related to the dummy pixel region R21 and the address indicated by the address signal ADR do not match each other is, for example, between the address generation unit 41 and the scanning unit 20L. Defects in connection, defects in the scanning unit 20L, defects in connections between the scanning unit 20L and the dummy pixel P2 in the dummy pixel region R21, defects in the dummy pixel P2 in the dummy pixel region R21, and dummy pixels P2 in the dummy pixel region R21. There may be a problem of connection with the AD conversion unit ADC, a problem of the AD conversion unit ADC, and the like.
  • the cause of the case where the line identification information INF acquired from the pixel values VAL1 to VAL4 related to the dummy pixel region R22 and the address indicated by the address signal ADR do not coincide with each other is, for example, that the address generation unit 41 and the scanning unit 20R.
  • diagnosis processing unit 45 obtains the left end identification information INFL by performing binarization processing on each of the pixel values VAL1 to VAL4 related to the two dummy pixels P3 in the dummy pixel region R31. Similarly, the diagnosis processing unit 45 obtains the right end identification information INFR by performing binarization processing on each of the pixel values VAL1 to VAL4 related to the two dummy pixels P3 in the dummy pixel region R32.
  • the diagnostic processing unit 45 performs diagnostic processing in this way. Then, the diagnosis processing unit 45 outputs the result of the diagnosis processing as the diagnosis result RES.
  • the dummy pixel regions R21, R22, R31, R32 are provided, and the dummy pixel PA (FIG. 4A) or the dummy pixel PB (FIG. 4B) is provided in the dummy pixel regions R21, R22, R31, R32.
  • the arrangement of the dummy pixels P2 can be used to fix the information about each pixel line L like a so-called mask ROM (Read Only Memory).
  • the line identification information INF for identifying the pixel line L is set by using the arrangement of the dummy pixels P2, the self-diagnosis is performed to detect the failure of the address control and the pixel control. Fault detection can be performed.
  • the array of 11 dummy pixels P2 is an array showing the second number of the pixel line L represented by a binary number. It is possible to simplify the configuration of the circuit that compares the information INF with the address indicated by the address signal ADR.
  • the drain and the source of the transistor TGL are connected to each other and the drain and the source of the transistor TGS are connected to each other.
  • the pixel values VAL1 to VAL4 of the dummy pixels PA can be brought close to “0”. For example, when the inclination of the ramp waveform in the reference signal REF is changed to increase the image pickup sensitivity. In, it is possible to prevent misdiagnosis.
  • the imaging sensitivity is increased.
  • the value obtained by performing the binarization process on each of the pixel values VAL1 to VAL4 may become “1”. That is, for example, in the read drive D2, the voltage of the floating diffusion FD set by turning on the transistors RST and FDG and the voltage of the floating diffusion FD set by turning on the transistor TGL are It is desirable that they are equal to each other. However, these voltages may shift from each other due to the influence of the parasitic capacitance of the transistor.
  • the pixel value VAL1 , VAL2 becomes larger than "0".
  • the deviations of these voltages are large, the deviations of the pixel values VAL1 and VAL2 from “0” are large.
  • the result of the binarization process may be "1".
  • the imaging device may erroneously diagnose that the imaging device is out of order although it is not out of order.
  • the imaging device 1 in the dummy pixel PA, the drain and the source of the transistor TGL are connected to each other and the drain and the source of the transistor TGS are connected to each other. Therefore, in the dummy pixel PA, the voltage of the floating diffusion FD is maintained even when the transistor TGL is turned on during the period from timing t31 to t32 (FIG. 12A). The same applies to the transistor TGS. Therefore, in the image pickup apparatus 1, it is possible to reduce the deviation of each of the pixel values VAL1 to VAL4 from “0”. Therefore, for example, even when the image pickup sensitivity of the image pickup apparatus 1 is high, the result of the binarization processing can be further improved. It can be stably set to "0". As a result, the imaging device 1 can prevent erroneous diagnosis.
  • two dummy pixel regions R21 and R22 are respectively provided on the left and right sides of the image pickup pixel region R1, and the diagnostic processing is performed in parallel with the normal image pickup operation using the image pickup pixel P1 of the image pickup pixel region R1. Since this is done, for example, a failure can be detected in a timely manner. That is, for example, when performing the diagnostic process in the blanking period T20, it is difficult to perform the diagnostic process for all the pixel lines L in one blanking period T20 because the blanking period T20 is short. Therefore, in this case, the diagnostic processing for all the pixel lines L is performed using the plurality of blanking periods T20. In this case, when a failure occurs, the failure is timely detected. It may not be detected.
  • the image pickup apparatus 1 can perform the diagnostic process for all the pixel lines L while performing the normal image pickup operation, so that the diagnostic process for all the pixel lines L can be performed within one frame period. .. As a result, the imaging device 1 can detect a failure in a timely manner.
  • two dummy pixel regions are provided on the left and right sides of the normal pixel region, and the diagnostic process is performed in parallel with the normal imaging operation using the pixels in the imaging pixel region. Can be detected in a timely manner.
  • the image pickup apparatus 1B includes one scanning unit 20L, a pixel array 10B, a reading unit 30B, and a controller 40B. That is, in the image pickup apparatus 1B in the image pickup apparatus 1 (FIG. 1) according to the above-described embodiment, the scanning unit 20R is omitted, and the pixel array 10, the reading unit 30, and the controller 40 are replaced by the pixel array 10B, the reading unit 30B, And the controller 40B.
  • the pixel array 10B is obtained by omitting the dummy pixel region R21 in the pixel array 10 (FIG. 1) according to the above embodiment.
  • the readout unit 30B is configured to generate the image signal DATA0 by performing AD conversion based on the signal SIG supplied from the pixel array 10B via the signal line SGL.
  • the controller 40B is configured to control the operation of the imaging device 1B by supplying control signals to the scanning unit 20L and the reading unit 30B.
  • the controller 40B has a column scanning unit 43B, an image processing unit 44B, and a diagnosis processing unit 45B.
  • the column scanning unit 43B is configured to determine the AD conversion unit ADC that is the target of the data transfer operation in the reading unit 30B and generate the control signal SSW based on the determination result.
  • the image processing unit 44B is configured to perform predetermined image processing including image combining processing on the image indicated by the image signal DATA0.
  • the diagnostic processing unit 45B obtains the line identification information INF by performing binarization processing on each of the pixel values VAL1 to VAL4 related to the 11 dummy pixels P2 in the dummy pixel region R22, and the address signal ADR indicates By comparing the address with the line identification information INF, it is configured to diagnose whether or not the image pickup apparatus 1B is performing a desired operation.
  • the scanning unit 20L drives the imaging pixel P1 and the dummy pixels P2 and P3 belonging to the pixel line L corresponding to the address indicated by the address signal ADR based on the instruction from the controller 40B. Then, the eleven dummy pixels P2 in the dummy pixel region R22 in the pixel array 10B respectively generate the signal SIG and supply the generated signal SIG to the reading unit 30B.
  • the scanning unit 20L is arranged on the left of the pixel array 10B, and the dummy pixel region R22 is provided near the right end of the pixel array 10B.
  • the dummy pixel region R22 is provided in the pixel array 10B at a position distant from the scanning unit 20L, the drive capability of the driver unit 23L of the scanning unit 20L is diagnosed by performing the diagnostic process. be able to. Further, in the image pickup apparatus 1B, by providing the dummy pixel region R22 at a position distant from the scanning unit 20L in this way, the control lines TGLL and FDGL in the dummy pixel region R31, the image pickup pixel region R1, and the dummy pixel region R22 are provided. , RSTL, FCGL, TGSL, SELL and disconnection of the power supply line PL can be diagnosed.
  • the imaging device 1C includes a pixel array 10C and scanning units 20LC and 20RC.
  • the pixel array 10C has an imaging pixel P1 and dummy pixels P2 and P3.
  • the image pickup pixel P1 is arranged in the image pickup pixel region R1, the plurality of dummy pixels P2 are arranged in the dummy pixel regions R21 and R22, and the plurality of dummy pixels P3 are arranged in the dummy pixel regions R31 and R32.
  • the dummy pixel PA or the dummy pixel PB is selectively arranged as the dummy pixel P2 in the dummy pixel regions R21 and R22, and the dummy pixel PA or the dummy pixel PB is selectively disposed in the dummy pixel region R31 and R32. Is placed as.
  • FIG. 18 illustrates a configuration example of the imaging pixel P1 according to this modification.
  • the imaging pixel P1 is The pixel array 10B has a plurality of control lines TGLL, a plurality of control lines RSTL, a plurality of control lines TGSL, a plurality of control lines SELL, a plurality of power supply lines PL, and a plurality of signal lines SGL. ..
  • the imaging pixel P1 has photodiodes PD1 and PD2 and a pixel circuit CKT.
  • the pixel circuit CKT includes a transistor TGL, a transistor TGS, a transistor RST, a floating diffusion FD, and transistors AMP and SEL.
  • the drain of the transistor TGS is connected to the floating diffusion FD.
  • the source of the transistor RST is connected to the floating diffusion FD.
  • the pixel circuit CKT according to the present modification is obtained by omitting the transistors FCG and FDG from the pixel circuit CKT (FIG. 2)
  • FIG. 19A shows a configuration example of the dummy pixel PA according to the present modification
  • FIG. 19B shows a configuration example of the dummy pixel PB according to the present modification.
  • the drain and the source of the transistor TGL are connected to each other and the drain and the source of the transistor TGS are connected to each other.
  • the source of the transistor TGL is connected to the voltage supply line VL and the source of the transistor TGS is connected to the voltage supply line VL.
  • the scanning units 20LC and 20RC are configured to sequentially drive the imaging pixels P1 and the dummy pixels P2 and P3 in the pixel array 10B in units of pixel lines L based on an instruction from the controller 40.
  • FIG. 20 illustrates a configuration example of the dummy pixels PA arranged in the pixel array 10D of the imaging device 1D according to the present modification.
  • the source of the transistor TGL is connected to the power supply line PL
  • the source of the transistor TGS is connected to the power supply line PL
  • the drain of the transistor RST is connected to the voltage supply line VL.
  • the dummy pixel PB can use the configuration of FIG. 4B.
  • the dummy pixel PA (FIG. 20) and the dummy pixel PB (FIG. 4B) differ from each other in the connection of the sources of the transistors TGL and TGS and the connection of the drain of the transistor RST. That is, the sources of the transistors TGL and TGS are connected to the power supply line PL in the dummy pixel PA and connected to the voltage supply line VL in the dummy pixel PB.
  • the drain of the transistor RST is connected to the voltage supply line VL in the dummy pixel PA and is connected to the power supply line PL in the dummy pixel PB.
  • the power supply line PL corresponds to a specific but not limitative example of “first voltage supply line” in the present disclosure.
  • the voltage supply line VL corresponds to a specific but not limitative example of “second voltage supply line” in one embodiment of the disclosure.
  • the pixel circuit CKT of the imaging pixel P1 corresponds to a specific but not limitative example of “imaging pixel circuit” in one embodiment of the disclosure.
  • the pixel circuit CKT of the dummy pixel PA corresponds to a specific but not limitative example of “first dummy pixel circuit” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the dummy pixel PB corresponds to a specific but not limitative example of “second dummy pixel circuit” in one embodiment of the disclosure.
  • the pixel values VAL1 to VAL4 are values corresponding to the amount of light received at the image pickup pixel P1.
  • the power supply voltage VDD applied to the source of the transistor TGL in the read drive D2 is higher than the voltage VR applied to the drain of the transistor RST. Therefore, the voltage of the floating diffusion FD set by turning on the transistor TGL is higher than the voltage of the floating diffusion FD set by turning on the transistor RST. As a result, the pixel values VAL1 and VAL2 are clamped to "0". The same applies to the pixel values VAL3 and VAL4. Therefore, in the imaging device 1D according to the present modification, for example, even when the imaging sensitivity of the imaging device 1D is high, the result of the binarization processing of the pixel values VAL1 to VAL4 can be more stably set to “0”. ..
  • FIG. 21 shows a configuration example of the dummy pixels PA arranged in the pixel array 10E of another imaging device 1E according to this modification.
  • the source of the transistor TGL is connected to the power supply line PL, and the drain is opened.
  • the source of the transistor TGS is connected to the power supply line PL, and the drain is open. That is, in the above-described embodiment, the drain of the transistor TGL is connected to the floating diffusion FD, and the drain of the transistor TGS is connected to the capacitive element FC.
  • the drains of the transistors TGL and TGS are connected to other elements. Not connected.
  • the dummy pixel PB can use the configuration of FIG. 4B.
  • the voltage supply line VL corresponds to a specific example of “voltage supply line” in the present disclosure.
  • the pixel circuit CKT of the imaging pixel P1 corresponds to a specific but not limitative example of “imaging pixel circuit” in one embodiment of the disclosure.
  • the pixel circuit CKT of the dummy pixel PA corresponds to a specific but not limitative example of “first dummy pixel circuit” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the dummy pixel PB corresponds to a specific but not limitative example of “second dummy pixel circuit” in one embodiment of the disclosure.
  • the sources of the transistors TGL and TGS are connected to the power supply line PL, but the present invention is not limited to this.
  • the sources of the transistors TGL and TGS may be connected to the voltage supply line VL.
  • FIG. 22 shows a configuration example of the dummy pixels PA arranged in the pixel array 10F of another imaging device 1F according to this modification.
  • the source of the transistor TGL is opened and the drain is connected to the floating diffusion FD.
  • the source of the transistor TGS is opened and the drain is connected to the capacitive element FC. That is, the sources of the transistors TGL and TGS are not connected to other elements.
  • the dummy pixel PB can use the configuration of FIG. 4B.
  • the voltage supply line VL corresponds to a specific example of “voltage supply line” in the present disclosure.
  • the pixel circuit CKT of the imaging pixel P1 corresponds to a specific but not limitative example of “imaging pixel circuit” in one embodiment of the disclosure.
  • the pixel circuit CKT of the dummy pixel PA corresponds to a specific but not limitative example of “first dummy pixel circuit” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the dummy pixel PB corresponds to a specific but not limitative example of “second dummy pixel circuit” in one embodiment of the disclosure.
  • FIG. 23 shows a configuration example of the imaging device 2.
  • the imaging device 2 includes a pixel array 50, two scanning units 60L and 60R, a reading unit 30, and a controller 70.
  • the pixel array 50 has a plurality of image pickup pixels P1 and a plurality of dummy pixels P2 and P3.
  • the plurality of image pickup pixels P1 are arranged in the image pickup pixel region R1
  • the plurality of dummy pixels P2 are arranged in the dummy pixel regions R21 and R22
  • the plurality of dummy pixels P3 are arranged in the dummy pixel regions R31 and R32.
  • FIG. 24 shows a configuration example of the image pickup pixel P1.
  • the pixel array 50 has a plurality of control lines TGLL, a plurality of control lines RSTL, a plurality of control lines SELL, a plurality of power supply lines PL, and a plurality of signal lines SGL.
  • the control line TGLL is configured to extend in the horizontal direction (horizontal direction in FIG. 23), one end of the control line TGLL is connected to the scanning unit 60L, and the other end is connected to the scanning unit 60R.
  • a signal STG is applied to the control line TGLL by the scanning units 60L and 60R.
  • the control line RSTL is configured to extend in the horizontal direction, one end of the control line RSTL is connected to the scanning unit 60L, and the other end is connected to the scanning unit 60R.
  • the signal SRST is applied to the control line RSTL by the scanning units 60L and 60R.
  • the control line SELL is configured to extend in the horizontal direction, one end of the control line SELL is connected to the scanning unit 60L, and the other end is connected to the scanning unit 60R.
  • the signal SSEL is applied to the control line SELL by the scanning units 60L and 60R.
  • the power supply line PL is connected to the voltage generation unit 42 of the controller 70.
  • the power supply voltage VDD is applied to the power supply line PL by the voltage generation unit 42.
  • the signal line SGL is configured to extend in the vertical direction (vertical direction in FIG. 23), and one end thereof is connected to the reading unit 30.
  • the image pickup pixel P1 has a photodiode PD and a pixel circuit CKT.
  • the pixel circuit CKT has transistors TG and RST, a floating diffusion FD, and transistors AMP and SEL.
  • the anode of the photodiode PD is grounded, and the cathode is connected to the source of the transistor TG.
  • the gate of the transistor TG is connected to the control line TGLL, the source is connected to the cathode of the photodiode PD, and the drain is connected to the floating diffusion FD.
  • the gate of the transistor RST is connected to the control line RSTL, the drain is connected to the power supply line PL, and the source is connected to the floating diffusion FD.
  • the gate of the transistor AMP is connected to the floating diffusion FD, the drain is connected to the power supply line PL, and the source is connected to the drain of the transistor SEL.
  • the gate of the transistor SEL is connected to the control line SELL, the drain is connected to the source of the transistor AMP, and the source is connected to the signal line SGL.
  • the imaging pixel P1 outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the imaging pixel P1 sequentially applies two pixel voltages VP (VP11, VP12) in two conversion periods (P-phase period TP and D-phase period TD) within a so-called horizontal period H. It is designed to output.
  • FIG. 25 shows an example of an array of photodiodes PD.
  • R indicates a red color filter
  • G indicates a green color filter
  • B indicates a blue color filter.
  • the photodiodes PD are arranged in a matrix.
  • FIGS. 26A and 26B show a configuration example of the dummy pixel P2 in the dummy pixel regions R21 and R22 and the dummy pixel P3 in the dummy pixel regions R31 and R32.
  • the dummy pixel PA or the dummy pixel PB is selectively arranged as the dummy pixel P2
  • the dummy pixel PA or the dummy pixel PB is selectively arranged as the dummy pixel P3.
  • FIG. 26A shows an example of the dummy pixel PA
  • FIG. 26B shows an example of the dummy pixel PB.
  • the pixel array 50 includes a plurality of control lines TGLL, a plurality of control lines RSTL, a plurality of control lines SELL, a plurality of power supply lines PL, and a plurality of voltage supply lines in the dummy pixel regions R21, R22, R31, and R32. It has VL and a plurality of signal lines SGL.
  • the voltage supply line VL is connected to the voltage generator 42 of the controller 70.
  • the voltage generator 42 applies a single voltage signal SVR to the plurality of voltage supply lines VL.
  • the voltage signal SVR is set to, for example, the voltage VR during the period when the transistor TG in the read drive D2 is in the on state, and is set to the power supply voltage VDD during the period when the transistor TG in the storage start drive D1 is in the on state.
  • the drain and the source of the transistor TGL are connected to each other. That is, in the dummy pixel PA, the drain and the source of the transistor TGL are connected to each other without the transistor TGL.
  • the voltage of the floating diffusion FD is set to the power supply voltage VDD in the read drive D2.
  • the dummy pixel PA outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the source of the transistor TGL is connected to the voltage supply line VL and the source of the transistor TGS is connected to the voltage supply line VL.
  • the voltage of the floating diffusion FD is set to the voltage VR by turning on the transistor TG in the read drive D2 as described later. Then, the dummy pixel PB outputs the pixel voltage VP corresponding to the voltage in the floating diffusion FD to the signal line SGL as the signal SIG.
  • the arrangement of the dummy pixels P3 and P2 in the dummy pixel regions R31 and R21 is the same as that in the first embodiment (FIG. 5), and the arrangement of the dummy pixels P2 and P3 in the dummy pixel regions R22 and R32 is the same as that of the first embodiment. This is similar to the case of the first embodiment (FIG. 6).
  • the two scanning units 60L and 60R are configured to sequentially drive the imaging pixels P1 and the dummy pixels P2 and P3 in the pixel array 50 in units of pixel lines L based on an instruction from the controller 70. ..
  • the scanning unit 60L has an address decoder 21L, a logic unit 62L, and a driver unit 63L.
  • the scanning unit 60R includes an address decoder 21R, a logic unit 62R, and a driver unit 63R.
  • the address decoder 21L is configured to select the pixel line L in the pixel array 50 according to the address indicated by the address signal ADR based on the address signal ADR supplied from the controller 70.
  • the logic unit 62L is configured to generate the signals STG1, SRST1, and SSEL1 corresponding to the pixel lines L, respectively, based on the instruction from the address decoder 21L.
  • the driver unit 63L is configured to generate signals STG, SRST, SSEL corresponding to each pixel line L based on signals STG1, SRST1, SSEL1 corresponding to each pixel line L, respectively. The same applies to the address decoder 21R, the logic unit 62R, and the driver unit 63R.
  • the controller 70 (FIG. 1) is configured to control the operation of the imaging device 2 by supplying control signals to the scanning units 60L and 60R and the reading unit 30.
  • the controller 70 has an image processing unit 74 and a diagnosis processing unit 75.
  • the image processing unit 74 is configured to perform predetermined image processing on the image indicated by the image signal DATA0.
  • the diagnostic processing unit 75 is configured to perform diagnostic processing based on the address signal ADR and the image signal DATA0. Specifically, the diagnosis processing unit 75 obtains the left edge identification information INFL and the right edge identification information INFR based on the pixel value VAL related to the dummy pixel P3 included in the image signal DATA0, and the dummy pixel P2 included in the image signal DATA0. The line identification information INF is obtained based on the pixel value VAL related to. Then, the diagnosis processing unit 75 compares the address indicated by the address signal ADR with the line identification information INF to diagnose whether the imaging device 2 is performing a desired operation. Then, the diagnosis processing unit 75 outputs the result of the diagnosis processing (diagnosis result RES).
  • the photodiode PD corresponds to a specific example of “first light receiving element” in the present disclosure.
  • the pixel circuit CKT of the imaging pixel P1 corresponds to a specific but not limitative example of “imaging pixel circuit” in one embodiment of the disclosure.
  • the pixel circuit CKT of the dummy pixel PA corresponds to a specific but not limitative example of “first dummy pixel circuit” in one embodiment of the present disclosure.
  • the pixel circuit CKT of the dummy pixel PB corresponds to a specific but not limitative example of “second dummy pixel circuit” in one embodiment of the disclosure.
  • the transistor TG corresponds to a specific but not limitative example of “first transistor” in one embodiment of the present disclosure.
  • the transistor RST corresponds to a specific but not limitative example of “second transistor” in one embodiment of the present disclosure.
  • the address generation unit 41 corresponds to a specific but not limitative example of “address generation unit” in one embodiment of the present disclosure.
  • the scanning units 60L and 60R correspond to a specific example of “drive control unit” in the present disclosure, and the reading unit 30 and the diagnostic processing unit 75 correspond to specific examples of “diagnosis unit” in the present disclosure.
  • the image pickup apparatus 2 sets a plurality of image pickup pixels P1 and a plurality of dummy pixels P2 and P3 in the pixel array 50 in the period from timing t0 to t1.
  • the accumulation start drive D1 is performed sequentially from the top in the vertical direction.
  • the scanning units 60L and 60R set the transistors TG and RST in the ON state in a predetermined period within the horizontal period H for each pixel line L in order from the top in the vertical direction, and then, for example, these Turn off the transistor.
  • the voltage in the floating diffusion FD is set to the power supply voltage VDD. That is, the voltage VR of the voltage signal SVR applied to the voltage supply line VL is set to the power supply voltage VDD during the period in which the transistor TG in the accumulation start drive D1 is in the on state, so that the voltage in the floating diffusion FD is the power supply voltage VDD. Is set to.
  • the imaging device 2 performs the read drive D2 in the vertical direction in order from the top to the plurality of imaging pixels P1 and the plurality of dummy pixels P2 and P3 during the period from timing t10 to t11. Thereby, each of the plurality of imaging pixels P1 and the plurality of dummy pixels P2, P3 sequentially outputs the two pixel voltages VP (VP11, VP12).
  • the reading unit 30 performs AD conversion based on these two pixel voltages VP11 and VP12, and outputs a digital code CODE (pixel value VAL).
  • FIG. 27 shows an operation example of the read drive D2 in the focused imaging pixel P1A.
  • A shows the waveform of the horizontal synchronizing signal XHS
  • B shows the waveform of the signal SRST
  • C Shows the waveform of the signal STG
  • D shows the waveform of the signal SSEL
  • E shows the waveform of the reference signal REF
  • F shows the waveform of the signal SIG
  • G shows the AD converter ADC.
  • H shows the waveform of the clock signal CLK
  • I shows the count value CNT in the counter 37 of the AD converter ADC.
  • the reference signal REF of FIG. 27E shows a waveform at the positive input terminal of the comparator 36
  • the signal SIG of FIG. 27F shows a waveform at the negative input terminal of the comparator 36.
  • the scanning units 60L and 60R in a certain horizontal period (H), the scanning units 60L and 60R first perform a reset operation on the imaging pixel P1A, and the AD conversion unit ADC causes the imaging pixel P1A in the subsequent P-phase period TP. AD conversion is performed based on the pixel voltage VP11 output by the. Then, the scanning units 60L and 60R perform the charge transfer operation on the image pickup pixel P1A, and the AD conversion unit ADC performs the AD conversion based on the pixel voltage VP12 output from the image pickup pixel P1A in the D-phase period TD. This operation will be described in detail below.
  • the scanning units 60L and 60R change the voltage of the signal SSEL from the low level to the high level at the timing t92 (FIG. 27(D)).
  • the transistor SEL is turned on, and the image pickup pixel P1A is electrically connected to the signal line SGL.
  • the scanning units 60L and 60R change the voltage of the signal SRST from the low level to the high level (FIG. 27(B)).
  • the transistor RST is turned on, and the voltage of the floating diffusion FD is set to the power supply voltage VDD (reset operation).
  • the scanning units 60L and 60R change the voltage of the signal SRST from the high level to the low level (FIG. 27(B)).
  • the transistor RST is turned off in the imaging pixel P1A.
  • the comparator 36 performs zero adjustment for setting the voltages of the capacitive elements 33 and 34 during the period from timing t94 to timing t95.
  • the comparator 36 ends the zero adjustment. Then, at this timing t95, the reference signal generation unit 32 changes the voltage of the reference signal REF to the voltage V1 (FIG. 27(E)).
  • the transistor SEL is turned on and the transistors TG and RST are turned off.
  • the floating diffusion FD holds electric charges when the floating diffusion FD is reset during the period from timing t93 to timing t94.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP11) corresponding to the voltage in the floating diffusion FD at this time.
  • the reading unit 30 performs AD conversion based on this pixel voltage VP11. Specifically, first, at timing t96, the read control unit 31 starts generating the clock signal CLK (FIG. 27(H)), and at the same time, the reference signal generation unit 32 changes the voltage of the reference signal REF. , And starts decreasing from the voltage V1 at a predetermined degree of change (FIG. 27(E)). In response to this, the counter 37 of the AD converter ADC starts the count operation and sequentially changes the count value CNT (FIG. 27(I)).
  • the read control unit 31 stops the generation of the clock signal CLK with the end of the P-phase period TP (FIG. 27(H)).
  • the reference signal generation unit 32 stops changing the voltage of the reference signal REF and changes the voltage of the reference signal REF to the voltage V1 at the subsequent timing t99 (FIG. 27(E)).
  • the voltage of the reference signal REF exceeds the pixel voltage VP11 (FIGS. 27E and 27F), so the comparator 36 of the AD converter ADC changes the voltage of the signal CMP from the low level to the high level. (FIG. 27(G)).
  • the counter 37 of the AD converter ADC reverses the polarity of the count value CNT based on the control signal CC (FIG. 27(I)).
  • the scanning units 60L and 60R change the voltage of the signal STG from low level to high level (FIG. 27(C)).
  • the transistor TG is turned on, and as a result, the charges generated in the photodiode PD are transferred to the floating diffusion FD (charge transfer operation).
  • the voltage of the signal SIG decreases (FIG. 27(F)).
  • the scanning units 60L and 60R change the voltage of the signal STG from the high level to the low level (FIG. 27(C)).
  • the transistor TG is turned off.
  • the transistor SEL is turned on and the transistors TG and RST are turned off.
  • the floating diffusion FD holds the charges transferred from the photodiode PD during the period from timing t101 to timing t102.
  • the imaging pixel P1A outputs the pixel voltage VP (pixel voltage VP12) corresponding to the voltage in the floating diffusion FD at this time.
  • the reading unit 30 performs AD conversion based on the pixel voltage VP12. Specifically, first, at timing t103, the read control unit 31 starts generating the clock signal CLK (FIG. 27(H)), and at the same time, the reference signal generation unit 32 changes the voltage of the reference signal REF. , And starts decreasing from the voltage V1 at a predetermined degree of change (FIG. 27(E)). In response to this, the counter 37 of the AD converter ADC starts the count operation and sequentially changes the count value CNT (FIG. 27(I)).
  • the voltage of the reference signal REF becomes lower than the pixel voltage VP12 (FIGS. 27E and 27F).
  • the comparator 36 of the AD converter ADC changes the voltage of the signal CMP from the high level to the low level (FIG. 27(G)).
  • the counter 37 stops the counting operation (FIG. 27(I)).
  • the AD conversion unit ADC obtains the count value CNT corresponding to the difference between the pixel voltages VP11 and VP12.
  • the latch 38 of the AD converter ADC outputs this count value CNT as a digital code CODE.
  • the read control unit 31 stops the generation of the clock signal CLK with the end of the D-phase period TD (FIG. 27(H)).
  • the reference signal generation unit 32 stops changing the voltage of the reference signal REF and changes the voltage of the reference signal REF to the voltage V2 at the subsequent timing t106 (FIG. 27(E)).
  • the voltage of the reference signal REF exceeds the pixel voltage VP12 (FIGS. 27E and 27F), so the comparator 36 of the AD converter ADC changes the voltage of the signal CMP from the low level to the high level. (FIG. 27(G)).
  • the scanning units 60L and 60R change the voltage of the signal SSEL from the high level to the low level (FIG. 27(D)).
  • the transistor SEL is turned off, and the image pickup pixel P1A is electrically disconnected from the signal line SGL.
  • the counter 37 of the AD conversion unit ADC resets the count value CNT to “0” based on the control signal CC (FIG. 27(I)).
  • the count operation is performed based on the pixel voltage VP11 in the P-phase period TP, the polarity of the count value CNT is inverted, and then the count operation is performed based on the pixel voltage VP12 in the D-phase period TD. I decided to do it.
  • the image pickup apparatus 2 can acquire the digital code CODE corresponding to the difference voltage between the pixel voltages VP11 and VP12. Since the imaging device 2 is configured to perform such correlated double sampling, it is possible to remove noise components included in the pixel voltage VP12, and as a result, it is possible to improve the image quality of a captured image.
  • the diagnostic process in the imaging device 2 is the same as in the case of the first embodiment (FIG. 15).
  • the address generation unit 41 of the controller 70 determines the pixel line L to be driven in the pixel array 50 and generates the address signal ADR indicating the address corresponding to the pixel line L. Then, the address generation unit 41 supplies the address signal ADR to the scanning units 60L and 60R.
  • the two scanning units 60L and 60R drive the imaging pixels P1 and the dummy pixels P2 and P3 belonging to the pixel line L corresponding to the address indicated by the address signal ADR based on the instruction from the controller 70.
  • the dummy pixel P3 sequentially outputs the two pixel voltages VP (VP11, VP12) as the signal SIG in the two conversion periods (P-phase period TP and D-phase period TD).
  • the AD conversion unit ADC of the reading unit 30 performs AD conversion based on these two pixel voltages VP11 and VP12, and outputs a digital code CODE (pixel value VAL).
  • the diagnostic processing unit 75 of the controller 70 obtains the left edge identification information INFL and the right edge identification information INFR based on the pixel value VAL related to the dummy pixel P3 included in the image signal DATA0, and the dummy pixel P2 included in the image signal DATA0.
  • the line identification information INF is obtained based on the pixel value VAL related to.
  • the diagnosis processing unit 75 compares the address indicated by the address signal ADR with the line identification information INF to diagnose whether the imaging device 2 is performing a desired operation. Then, the diagnosis processing unit 75 outputs the result of the diagnosis processing (diagnosis result RES).
  • the drain and the source of the transistor TG are connected to each other.
  • the pixel value VAL of the dummy pixel PA can be brought close to “0”, as in the image pickup device 1 according to the first embodiment, so that, for example, the ramp in the reference signal REF is increased. Misdiagnosis can be prevented when the imaging sensitivity is increased by changing the slope of the waveform.
  • Modification 2 The modifications of the first embodiment may be applied to the image pickup apparatus 2 according to the above embodiment.
  • the modified example 1-3 of the first embodiment is applied to the imaging device 2 will be described.
  • FIG. 28 illustrates a configuration example of the dummy pixels PA arranged in the pixel array 50B of the imaging device 2B according to this modification.
  • the source of the transistor TG is connected to the power supply line PL
  • the drain of the transistor RST is connected to the voltage supply line VL.
  • the dummy pixel PB can use the configuration of FIG. 26B.
  • the power supply voltage VDD applied to the source of the transistor TG is higher than the voltage VR applied to the drain of the transistor RST. Therefore, the voltage of the floating diffusion FD set by turning on the transistor TG is higher than the voltage of the floating diffusion FD set by turning on the transistor RST. As a result, the pixel value VAL is clamped to "0". Therefore, in the imaging device 2B according to the present modification, for example, even when the imaging sensitivity of the imaging device 2B is high, the result of the binarization processing of the pixel value VAL can be more stably set to “0”.
  • FIG. 29 illustrates a configuration example of the dummy pixel PA arranged in the pixel array 50C of another imaging device 2C according to the present modification.
  • the source of the transistor TG is connected to the power supply line PL, and the drain is opened. That is, the drain of the transistor TG is not connected to another element.
  • the voltage of the floating diffusion FD is maintained even if the transistor TG is turned on in the period of timing t101 to t102 (FIG. 27). Therefore, in the imaging device 2C, the deviation of the pixel value VAL from “0” can be reduced, and the result of the binarization processing of the pixel value VAL can be more stably set to “0”.
  • the source of the transistor TG is connected to the power supply line PL, but the source is not limited to this.
  • the source of the transistor TG may be connected to the voltage supply line VL.
  • FIG. 30 shows a configuration example of the dummy pixels PA arranged in the pixel array 50D of another imaging device 2D according to the present modification.
  • the source of the transistor TG is opened and the drain is connected to the floating diffusion FD. That is, the source of the transistor TG is not connected to another element.
  • the voltage of the floating diffusion FD is maintained even if the transistor TG is turned on in the period of timing t101 to t102 (FIG. 27). Therefore, in the imaging device 2D, the deviation of the pixel value VAL from “0” can be reduced, and the result of the binarization processing of the pixel value VAL can be more stably set to “0”.
  • FIG. 31 shows a usage example of the imaging devices 1 and 2 according to the above-mentioned embodiment.
  • the imaging devices 1 and 2 described above can be used in various cases for sensing light such as visible light, infrared light, ultraviolet light, and X-rays as described below.
  • -A device that captures images used for viewing such as a digital camera or a portable device with a camera function-Safe driving such as automatic stop and recognition of the driver's condition
  • Gestures of devices/users used for traffic such as in-vehicle sensors that take images of the rear, surroundings, and inside the vehicle, surveillance cameras that monitor running vehicles and roads, ranging sensors that perform distance measurement between vehicles, etc.
  • Devices used for home appliances such as televisions, refrigerators, air conditioners, and endoscopes to take images and operate the devices according to the gestures, and devices that take blood vessels by receiving infrared light.
  • Such as devices used for medical care and healthcare surveillance cameras for crime prevention, cameras used for person authentication, devices used for security, skin measuring instruments for taking skin, and scalp
  • Devices used for beauty such as microscopes for shooting, action cameras and wearable cameras for sports purposes, devices used for sports, cameras for monitoring the condition of fields and crops, etc.
  • Equipment for agricultural use such as devices used for medical care and healthcare, surveillance cameras for crime prevention, cameras used for person authentication, devices used for security, skin measuring instruments for taking skin, and scalp
  • Devices used for beauty such as microscopes for shooting, action cameras and wearable cameras for sports purposes, devices used for sports, cameras for monitoring the condition of fields and crops, etc.
  • Equipment for agricultural use such as devices used for medical care and healthcare, surveillance cameras for crime prevention, cameras used for person authentication, devices used for security, skin measuring instruments for taking skin, and scalp
  • Devices used for beauty such as microscopes for shooting, action cameras and wearable cameras for sports purposes, devices used for sports, cameras for monitoring the condition of fields and crops, etc.
  • the technology according to the present disclosure (this technology) can be applied to various products.
  • the technology according to the present disclosure is realized as a device mounted on any type of moving body such as an automobile, an electric vehicle, a hybrid electric vehicle, a motorcycle, a bicycle, personal mobility, an airplane, a drone, a ship, and a robot. May be.
  • FIG. 32 is a block diagram showing a schematic configuration example of a vehicle control system which is an example of a mobile body control system to which the technology according to the present disclosure can be applied.
  • the vehicle control system 12000 includes a plurality of electronic control units connected via a communication network 12001.
  • the vehicle control system 12000 includes a drive system control unit 12010, a body system control unit 12020, a vehicle exterior information detection unit 12030, a vehicle interior information detection unit 12040, and an integrated control unit 12050.
  • a microcomputer 12051, an audio/video output unit 12052, and an in-vehicle network I/F (interface) 12053 are illustrated as a functional configuration of the integrated control unit 12050.
  • the drive system control unit 12010 controls the operation of devices related to the drive system of the vehicle according to various programs.
  • the drive system control unit 12010 includes a drive force generation device for generating a drive force of a vehicle such as an internal combustion engine or a drive motor, a drive force transmission mechanism for transmitting the drive force to wheels, and a steering angle of the vehicle. It functions as a steering mechanism for adjusting and a control device such as a braking device for generating a braking force of the vehicle.
  • the body system control unit 12020 controls the operation of various devices mounted on the vehicle body according to various programs.
  • the body system control unit 12020 functions as a keyless entry system, a smart key system, a power window device, or a control device for various lamps such as a head lamp, a back lamp, a brake lamp, a winker, or a fog lamp.
  • the body system control unit 12020 can be input with radio waves or signals of various switches transmitted from a portable device that substitutes for a key.
  • the body system control unit 12020 receives input of these radio waves or signals and controls the vehicle door lock device, power window device, lamp, and the like.
  • the vehicle exterior information detection unit 12030 detects information outside the vehicle equipped with the vehicle control system 12000.
  • the image pickup unit 12031 is connected to the vehicle exterior information detection unit 12030.
  • the vehicle exterior information detection unit 12030 causes the image capturing unit 12031 to capture an image of the vehicle exterior and receives the captured image.
  • the vehicle exterior information detection unit 12030 may perform object detection processing or distance detection processing such as people, vehicles, obstacles, signs, or characters on the road surface based on the received image.
  • the image pickup unit 12031 is an optical sensor that receives light and outputs an electric signal according to the amount of received light.
  • the image pickup unit 12031 can output the electric signal as an image or as distance measurement information.
  • the light received by the imaging unit 12031 may be visible light or invisible light such as infrared light.
  • the in-vehicle information detection unit 12040 detects in-vehicle information.
  • a driver state detection unit 12041 that detects the state of the driver is connected.
  • the driver state detection unit 12041 includes, for example, a camera that images the driver, and the in-vehicle information detection unit 12040 determines the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 12041. It may be calculated or it may be determined whether or not the driver is asleep.
  • the microcomputer 12051 calculates the control target value of the driving force generation device, the steering mechanism or the braking device based on the information on the inside and outside of the vehicle acquired by the outside information detection unit 12030 or the inside information detection unit 12040, and the drive system control unit.
  • a control command can be output to 12010.
  • the microcomputer 12051 realizes a function of ADAS (Advanced Driver Assistance System) that includes collision avoidance or impact mitigation of a vehicle, follow-up traveling based on an inter-vehicle distance, vehicle speed maintenance traveling, a vehicle collision warning, or a vehicle lane departure warning. It is possible to perform cooperative control for the purpose.
  • ADAS Advanced Driver Assistance System
  • the microcomputer 12051 controls the driving force generation device, the steering mechanism, the braking device, or the like on the basis of the information around the vehicle acquired by the vehicle exterior information detection unit 12030 or the vehicle interior information detection unit 12040, so that the driver's It is possible to perform cooperative control for the purpose of autonomous driving or the like that autonomously travels without depending on the operation.
  • the microcomputer 12051 can output a control command to the body system control unit 12020 based on the information outside the vehicle acquired by the outside information detection unit 12030.
  • the microcomputer 12051 controls the headlamp according to the position of the preceding vehicle or the oncoming vehicle detected by the vehicle exterior information detection unit 12030, and performs cooperative control for the purpose of antiglare such as switching the high beam to the low beam. It can be carried out.
  • the voice image output unit 12052 transmits an output signal of at least one of a voice and an image to an output device capable of visually or audibly notifying information to an occupant of the vehicle or the outside of the vehicle.
  • an audio speaker 12061, a display unit 12062, and an instrument panel 12063 are illustrated as output devices.
  • the display unit 12062 may include at least one of an on-board display and a head-up display, for example.
  • FIG. 33 is a diagram showing an example of the installation position of the imaging unit 12031.
  • the vehicle 12100 has image pickup units 12101, 12102, 12103, 12104, 12105 as the image pickup unit 12031.
  • the imaging units 12101, 12102, 12103, 12104, 12105 are provided at positions such as the front nose of the vehicle 12100, the side mirrors, the rear bumper, the back door, and the upper part of the windshield inside the vehicle.
  • the image capturing unit 12101 provided on the front nose and the image capturing unit 12105 provided on the upper part of the windshield in the vehicle interior mainly acquire an image in front of the vehicle 12100.
  • the imaging units 12102 and 12103 included in the side mirrors mainly acquire images of the side of the vehicle 12100.
  • the image capturing unit 12104 provided in the rear bumper or the back door mainly acquires an image behind the vehicle 12100.
  • the front images acquired by the image capturing units 12101 and 12105 are mainly used for detecting a preceding vehicle, a pedestrian, an obstacle, a traffic signal, a traffic sign, a lane, or the like.
  • FIG. 33 shows an example of the shooting range of the imaging units 12101 to 12104.
  • the imaging range 12111 indicates the imaging range of the imaging unit 12101 provided on the front nose
  • the imaging ranges 12112 and 12113 indicate the imaging ranges of the imaging units 12102 and 12103 provided on the side mirrors
  • the imaging range 12114 indicates The imaging range of the imaging part 12104 provided in a rear bumper or a back door is shown.
  • a bird's-eye view image of the vehicle 12100 viewed from above can be obtained.
  • At least one of the imaging units 12101 to 12104 may have a function of acquiring distance information.
  • at least one of the image capturing units 12101 to 12104 may be a stereo camera including a plurality of image capturing elements or may be an image capturing element having pixels for phase difference detection.
  • the microcomputer 12051 based on the distance information obtained from the imaging units 12101 to 12104, the distance to each three-dimensional object within the imaging range 12111 to 12114 and the temporal change of this distance (relative speed with respect to the vehicle 12100).
  • the closest three-dimensional object on the traveling path of the vehicle 12100 which travels in the substantially same direction as the vehicle 12100 at a predetermined speed (for example, 0 km/h or more), can be extracted as a preceding vehicle. it can.
  • the microcomputer 12051 can set an inter-vehicle distance to be secured in advance before the preceding vehicle, and can perform automatic brake control (including follow-up stop control), automatic acceleration control (including follow-up start control), and the like. In this way, it is possible to perform cooperative control for the purpose of autonomous driving, which autonomously travels without depending on the operation of the driver.
  • the microcomputer 12051 uses the distance information obtained from the image capturing units 12101 to 12104 to convert three-dimensional object data regarding a three-dimensional object to other three-dimensional objects such as two-wheeled vehicles, ordinary vehicles, large vehicles, pedestrians, telephone poles, and the like. It can be classified, extracted, and used for automatic avoidance of obstacles. For example, the microcomputer 12051 identifies an obstacle around the vehicle 12100 into an obstacle visible to the driver of the vehicle 12100 and an obstacle difficult to see. Then, the microcomputer 12051 determines the collision risk indicating the risk of collision with each obstacle, and when the collision risk is equal to or more than the set value and there is a possibility of collision, the microcomputer 12051 outputs the audio through the audio speaker 12061 and the display unit 12062. A driver can be assisted for avoiding a collision by outputting an alarm to the driver and performing forced deceleration or avoidance steering through the drive system control unit 12010.
  • At least one of the image capturing units 12101 to 12104 may be an infrared camera that detects infrared rays.
  • the microcomputer 12051 can recognize the pedestrian by determining whether or not the pedestrian is present in the images captured by the imaging units 12101 to 12104. To recognize such a pedestrian, for example, a procedure for extracting a feature point in an image captured by the image capturing units 12101 to 12104 as an infrared camera and pattern matching processing on a series of feature points indicating the contour of an object are performed to determine whether or not the pedestrian is a pedestrian.
  • the audio image output unit 12052 causes the recognized pedestrian to have a rectangular contour line for emphasis.
  • the display unit 12062 is controlled so as to superimpose. Further, the audio image output unit 12052 may control the display unit 12062 to display an icon indicating a pedestrian or the like at a desired position.
  • the technology according to the present disclosure can be applied to the imaging unit 12031 among the configurations described above.
  • the vehicle control system 12000 it is possible to diagnose whether or not the imaging unit 12031 is operating normally by performing the diagnostic process.
  • the vehicle control system 12000 can recognize that the image capturing unit 12031 has a defect by notifying the microcomputer 12051 of the diagnosis result. .. Accordingly, in the vehicle control system 12000, it is possible to perform appropriate processing, such as urging the driver to call attention, so that the reliability can be improved.
  • the function of controlling the vehicle can be limited based on the result of the diagnosis process.
  • Specific examples of the function of controlling the vehicle include a collision avoidance or collision mitigation function of the vehicle, a follow-up traveling function based on an inter-vehicle distance, a vehicle speed maintaining traveling function, a vehicle collision warning function, a vehicle lane departure warning function, and the like.
  • the function of controlling the vehicle can be restricted or prohibited. As a result, in the vehicle control system 12000, it is possible to prevent an accident due to an erroneous detection based on a defect of the imaging unit 12031.
  • the reading unit 30 outputs the digital codes CODE2 and CODE3, and the image processing unit 44 subtracts the digital code CODE2 from the digital code CODE3 (CODE3-CODE2).
  • the pixel value VAL1 is calculated by the above, the present invention is not limited to this. Instead of this, the reading unit 30 inverts the polarity of the count value CNT after the conversion period T2 in the same manner as in the case of the image pickup apparatus 2 (FIG. 27), so that the digital code corresponding to the difference between the digital codes CODE2 and CODE3 is obtained.
  • the code CODE may be output.
  • the reading unit 30 outputs the digital codes CODE1 and CODE4, and the image processing unit 44 subtracts the digital code CODE1 from the digital code CODE4 (CODE4-CODE1).
  • the pixel value VAL2 is calculated, but the invention is not limited to this.
  • the AD conversion unit ADC of the reading unit 30 temporarily stores the count value CNT at that time after the conversion period T1, and the count value CNT is counted by the counter 37 before the conversion period T4.
  • the polarity of the count value CNT may be inverted.
  • the image processing unit 44 can obtain the digital code CODE corresponding to the difference between the digital codes CODE1 and CODE4.
  • the image pickup pixel P1 according to the above embodiment is not limited to the configuration shown in FIGS.
  • the present technology can be configured as below. According to the present technology having the following configuration, it is possible to perform self-diagnosis and diagnose whether there is a defect.
  • a first light receiving element Each has a storage unit capable of storing electric charge and a first terminal and a second terminal connected to the storage unit, and connects the first terminal and the second terminal by being turned on. And a plurality of pixel circuits including an image pickup pixel circuit and a first dummy pixel circuit, and a first transistor capable of outputting the voltage, and an output unit capable of outputting a voltage corresponding to the charge accumulated in the accumulation unit.
  • the first terminal of the first transistor in the imaging pixel circuit is connected to the first light receiving element, The first terminal of the first transistor in the first dummy pixel circuit does not go through the first transistor of the first dummy pixel circuit, and the first terminal of the first dummy pixel circuit
  • a voltage supply line is further provided, The plurality of pixel circuits includes a second dummy pixel circuit, The imaging device according to (1), wherein the first terminal of the first transistor in the second dummy pixel circuit is connected to the voltage supply line.
  • each of the plurality of pixel circuits further includes a second transistor capable of applying a predetermined voltage to the storage section when being turned on.
  • Each of the plurality of pixel circuits has a first terminal and a second terminal connectable to the storage section, and has a first terminal connectable to the first terminal and the second terminal by being turned on. Further having three transistors, The first terminal of the third transistor in the imaging pixel circuit is connected to the second light receiving element, The first terminal of the third transistor of the first dummy pixel circuit does not go through the third transistor of the first dummy pixel circuit, and the third terminal of the third dummy transistor of the first dummy pixel circuit is not provided.
  • Each of the plurality of pixel circuits has a second transistor capable of applying a predetermined voltage to a connection node when turned on, and a capacitor connected to the second terminal of the third transistor.
  • the imaging pixel circuit is arranged in an effective pixel area of the imaging device, The imaging device according to any one of (1) to (5), wherein the first dummy pixel circuit is arranged outside the effective pixel area.
  • An address generator capable of generating an address signal, A drive control unit capable of controlling the operation of the first transistor based on the address signal; (1) to (6), further comprising: a diagnosis unit capable of performing a diagnosis process based on the address signal and the first signal output from the output unit of the first dummy pixel circuit.
  • the imaging device according to any one of 1.
  • a first transistor capable of connecting to the first terminal and a second terminal connectable to the storage portion, and a second terminal connectable to the first terminal and the second terminal by being turned on.
  • a plurality of pixels each including an image pickup pixel circuit, a first dummy pixel circuit, and a second dummy pixel circuit, and an output unit capable of outputting a voltage according to the charge accumulated in the accumulation unit.
  • the first terminal of the first transistor is connected to the second voltage supply line, and the first terminal of the second transistor is supplied with the first voltage supply.
  • Imager connected to the wire.
  • Each of the plurality of pixel circuits has a first terminal and a second terminal connectable to the storage section, and has a first terminal connectable to the first terminal and the second terminal by being turned on.
  • Each of the plurality of pixel circuits includes a capacitance element connected to the second terminal of the third transistor, and a fourth capacitance element capable of connecting the capacitance element and the connection node by being turned on.
  • a transistor and a fifth transistor capable of connecting the connection node and the storage section by being turned on The imaging device according to (10), wherein the second terminal of the second transistor in each of the plurality of pixel circuits is connected to the connection node of each of the plurality of pixel circuits.
  • the image pickup pixel circuit is arranged in an effective pixel region of the image pickup device, The imaging device according to any one of (8) to (11), wherein the first dummy pixel circuit and the second dummy pixel circuit are arranged outside the effective pixel area.
  • An address generator capable of generating an address signal
  • a drive control unit capable of controlling the operation of the first transistor based on the address signal
  • Diagnostic processing is performed based on the address signal, the first signal output from the output section of the first dummy pixel circuit, and the second signal output from the output section of the second dummy pixel circuit.
  • the imaging device according to any one of (8) to (12), further including: a diagnosis unit capable of performing the diagnosis.
  • a first light receiving element Each of them has a storage portion capable of storing electric charge, and a first transistor having a first terminal and a second terminal and capable of connecting the first terminal and the second terminal by being turned on.
  • a plurality of pixel circuits including an image pickup pixel circuit and a first dummy pixel circuit, and an output unit capable of outputting a voltage according to the charges accumulated in the accumulation unit,
  • the first terminal of the first transistor is connected to the first light receiving element
  • the second terminal of the first transistor is connected to the storage unit
  • the first dummy pixel circuit at least one of the first terminal and the second terminal of the first transistor is not connected to an element other than the first transistor. apparatus.
  • a voltage supply line is further provided,
  • the plurality of pixel circuits includes a second dummy pixel circuit, In the second dummy pixel circuit, the first terminal of the first transistor is connected to the voltage supply line, and the second terminal of the first transistor is connected to the storage section.
  • the imaging device according to (14).
  • each of the plurality of pixel circuits further includes a third transistor that has a first terminal and a second terminal and can connect the first terminal and the second terminal by being turned on.
  • each of the plurality of pixel circuits has a second transistor capable of applying a predetermined voltage to a connection node when turned on, a capacitor, and the capacitor and the connection when turned on.
  • the imaging pixel circuit the imaging device according to (17), wherein the capacitive element is connected to the second terminal of the third transistor.
  • the imaging pixel circuit is arranged in an effective pixel area of the imaging device, The imaging device according to any one of (14) to (18), wherein the first dummy pixel circuit is arranged outside the effective pixel area.
  • An address generator capable of generating an address signal
  • a drive control unit capable of controlling the operation of the first transistor based on the address signal
  • (14) to (19) further comprising: a diagnosis unit capable of performing a diagnosis process based on the address signal and the first signal output from the output unit of the first dummy pixel circuit.
  • the imaging device according to any one of 1.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

本開示の撮像装置は、第1の受光素子と、それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および蓄積部に接続された第2の端子を有しオン状態になることにより第1の端子および第2の端子を接続可能な第1のトランジスタと、蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路および第1のダミー画素回路を含む複数の画素回路とを備える。上記撮像画素回路における第1のトランジスタの第1の端子は、第1の受光素子に接続され、第1のダミー画素回路における第1のトランジスタの第1の端子は、第1のダミー画素回路の第1のトランジスタを介さずに第1のダミー画素回路の第1のトランジスタの第2の端子に接続されている。

Description

撮像装置
 本開示は、撮像動作を行う撮像装置に関する。
 一般に、撮像装置では、フォトダイオードを含む画素がマトリクス状に配置され、各画素が、受光量に応じた電気信号を生成する。そして、例えば、AD変換回路(Analog to Digital Converter)が、各画素において生成された電気信号(アナログ信号)をデジタル信号に変換する。このような撮像装置には、BIST(Built-in self test)機能を有するものがある(例えば、特許文献1)。
米国特許出願公開第2005/0231620号明細書
 このように、撮像装置では、BIST機能により自己診断を行い、不具合の有無を診断することが望まれている。
 自己診断を行うことができる撮像装置を提供することが望ましい。
 本開示の一実施の形態における第1の撮像装置は、第1の受光素子と、複数の画素回路とを備えている。複数の画素回路は、撮像画素回路および第1のダミー画素回路を含む。複数の画素回路のそれぞれは、電荷を蓄積可能な蓄積部と、第1の端子および蓄積部に接続された第2の端子を有しオン状態になることにより第1の端子および第2の端子を接続可能な第1のトランジスタと、蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有する。上記撮像画素回路における第1のトランジスタの第1の端子は、第1の受光素子に接続される。上記第1のダミー画素回路における第1のトランジスタの第1の端子は、第1のダミー画素回路の第1のトランジスタを介さずに第1のダミー画素回路の第1のトランジスタの第2の端子に接続される。
 ここで、「撮像装置」とは、いわゆるイメージセンサ単体に限定されず、イメージセンサを用いて構成された撮像システムを含むとともに、デジタルカメラやスマートフォンなど撮像機能を有する電子機器を含む。
 本開示の一実施の形態における第2の撮像装置は、第1の電圧供給線と、第2の電圧供給線と、第1の受光素子と、複数の画素回路とを備えている。複数の画素回路は、撮像画素回路、第1のダミー画素回路、および第2のダミー画素回路を含む。複数の画素回路のそれぞれは、電荷を蓄積可能な蓄積部と、第1の端子および蓄積部に接続された第2の端子を有しオン状態になることにより第1の端子および第2の端子を接続可能な第1のトランジスタと、第1の端子および蓄積部に接続可能な第2の端子を有しオン状態になることにより第1の端子および第2の端子を接続可能な第2のトランジスタと、蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有する。上記撮像画素回路において、第1のトランジスタの第1の端子は第1の受光素子に接続され、第2のトランジスタの第1の端子は第1の電圧供給線に接続される。上記第1のダミー画素回路において、第1のトランジスタの第1の端子は第1の電圧供給線に接続され、第2のトランジスタの第1の端子は第2の電圧供給線に接続される。上記第2のダミー画素回路において、第1のトランジスタの第1の端子は第2の電圧供給線に接続され、第2のトランジスタの第1の端子は第1の電圧供給線に接続される。
 本開示の一実施の形態における第3の撮像装置は、第1の受光素子と、複数の画素回路とを備えている。複数の画素回路は、撮像画素回路および第1のダミー画素回路を含む。複数の画素回路のそれぞれは、電荷を蓄積可能な蓄積部と、第1の端子および第2の端子を有しオン状態になることにより第1の端子および第2の端子を接続可能な第1のトランジスタと、蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有する。上記撮像画素回路において、第1のトランジスタの第1の端子は第1の受光素子に接続され、第1のトランジスタの第2の端子は蓄積部に接続される。上記第1のダミー画素回路において、第1のトランジスタの第1の端子および第2の端子のうちの少なくともいずれか1つは、第1のトランジスタ以外の素子に接続されていない。
 本開示の一実施の形態における第1の撮像装置では、複数の画素回路のそれぞれにおいて、蓄積部、第1のトランジスタ、および出力部が設けられている。複数の画素回路は、撮像画素回路および第1のダミー画素回路を含む。撮像画素回路における第1のトランジスタの第1の端子は、第1の受光素子に接続される。第1のダミー画素回路における第1のトランジスタの第1の端子は、第1のダミー画素回路の第1のトランジスタを介さずに、第1のダミー画素回路の第1のトランジスタの第2の端子に接続される。
 本開示の一実施の形態における第2の撮像装置では、複数の画素回路のそれぞれにおいて、蓄積部、第1のトランジスタ、第2のトランジスタ、および出力部が設けられている。複数の画素回路は、撮像画素回路、第1のダミー画素回路、および第2のダミー画素回路を含む。撮像画素回路において、第1のトランジスタの第1の端子は第1の受光素子に接続され、第2のトランジスタの第1の端子は第1の電圧供給線に接続される。第1のダミー画素回路において、第1のトランジスタの第1の端子は第1の電圧供給線に接続され、第2のトランジスタの第1の端子は第2の電圧供給線に接続される。第2のダミー画素回路において、第1のトランジスタの第1の端子は第2の電圧供給線に接続され、第2のトランジスタの第1の端子は第1の電圧供給線に接続される。
 本開示の一実施の形態における第3の撮像装置では、複数の画素回路のそれぞれにおいて、蓄積部、第1のトランジスタ、および出力部が設けられている。複数の画素回路は、撮像画素回路および第1のダミー画素回路を含む。撮像画素回路において、第1のトランジスタの第1の端子は第1の受光素子に接続され、第1のトランジスタの第2の端子は蓄積部に接続される。第1のダミー画素回路において、第1のトランジスタの第1の端子および第2の端子のうちの少なくともいずれか1つは、第1のトランジスタ以外の素子に接続されていない。
本開示の第1の実施の形態に係る撮像装置の一構成例を表すブロック図である。 図1に示した撮像画素の一構成例を表す回路図である。 図1に示した画素アレイの一構成例を表す説明図である。 図1に示したダミー画素の一構成例を表す回路図である。 図1に示したダミー画素の一構成例を表す他の回路図である。 図4A,4Bに示したダミー画素の配置例を表す表である。 図4A,4Bに示したダミー画素の配置例を表す他の表である。 図1に示した読出部の一構成例を表す回路図である。 図1に示した撮像装置の一実装例を表す説明図である。 図1に示した撮像装置の他の実装例を表す説明図である。 図1に示した撮像装置の一動作例を表すタイミング図である。 図1に示した撮像装置の一動作例を表すタイミング波形図である。 図1に示した撮像装置の一動作例を表すタイミング波形図である。 図1に示した撮像装置の一動作例を表すタイミング波形図である。 図1に示した撮像装置の一動作状態を表す説明図である。 図1に示した撮像装置の他の動作状態を表す説明図である。 図1に示した撮像装置の他の動作状態を表す説明図である。 図1に示した撮像装置における画像合成処理の一例を表す説明図である。 図1に示した診断処理部の一動作例を表す説明図である。 比較例に係るダミー画素の一構成例を表す回路図である。 第1の実施の形態の変形例に係る撮像装置の一構成例を表すブロック図である。 図17に示した撮像画素の一構成例を表す回路図である。 図17に示したダミー画素の一構成例を表す回路図である。 図17に示したダミー画素の一構成例を表す他の回路図である。 第1の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 第1の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 第1の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 第2の実施の形態に係る撮像装置の一構成例を表すブロック図である。 図23に示した撮像画素の一構成例を表す回路図である。 図23に示した画素アレイの一構成例を表す説明図である。 図23に示したダミー画素の一構成例を表す回路図である。 図23に示したダミー画素の一構成例を表す他の回路図である。 図23に示した撮像装置の一動作例を表すタイミング波形図である。 第2の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 第2の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 第2の実施の形態の他の変形例に係るダミー画素の一構成例を表す他の回路図である。 撮像装置の使用例を表す説明図である。 車両制御システムの概略的な構成の一例を示すブロック図である。 車外情報検出部及び撮像部の設置位置の一例を示す説明図である。
 以下、本開示の実施の形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
1.第1の実施の形態(各画素に1つの受光素子を設けた例)
2.第2の実施の形態(各画素に複数の受光素子を設けた例)
3.撮像装置の使用例
4.移動体への応用例
<1.第1の実施の形態>
[構成例]
 図1は、一実施の形態に係る撮像装置(撮像装置1)の一構成例を表すものである。撮像装置1は、画素アレイ10と、2つの走査部20L,20Rと、読出部30と、コントローラ40とを備えている。
 画素アレイ10は、マトリックス状に配置された複数の撮像画素P1を有している。撮像画素P1は、フォトダイオードPD(後述)を有し、受光量に応じた画素電圧VPを生成するように構成される。この複数の撮像画素P1は、撮像画素領域R1に配置されている。撮像画素領域R1は、被写体が撮像される画素領域であり、いわゆる有効画素領域である。
 また、画素アレイ10は、これらの複数の撮像画素P1に加え、複数のダミー画素P2,P3とを有している。ダミー画素P2,P3は、フォトダイオードPDを有しない画素である。複数のダミー画素P2は、ダミー画素領域R21,R22に配置され、複数のダミー画素P3は、ダミー画素領域R31,R32に配置される。この例では、画素アレイ10において、水平方向(図1における横方向)の左から右に向かって、ダミー画素領域R31、ダミー画素領域R21、撮像画素領域R1、ダミー画素領域R22、およびダミー画素領域R32が、この順に設けられている。水平方向に並設された1行分の複数のダミー画素P3、複数のダミー画素P2、複数の撮像画素P1、複数のダミー画素P2、および複数のダミー画素P3は、画素ラインLを構成する。
 以下に、撮像画素P1およびダミー画素P2,P3について、詳細に説明する。
 図2は、撮像画素P1の一構成例を表すものである。画素アレイ10は、複数の制御線TGLLと、複数の制御線FDGLと、複数の制御線RSTLと、複数の制御線FCGLと、複数の制御線TGSLと、複数の制御線SELLと、複数の電源線PLと、複数の信号線SGLとを有している。
 制御線TGLLは、水平方向(図1における横方向)に延伸するように構成され、制御線TGLLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。すなわち、制御線TGLLは、ダミー画素領域R31、ダミー画素領域R21、撮像画素領域R1、ダミー画素領域R22、およびダミー画素領域R32を貫くように配置される。制御線TGLLには、走査部20L,20Rにより信号STGLが印加される。
 制御線FDGLは、水平方向に延伸するように構成され、制御線FDGLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。制御線FDGLには、走査部20L,20Rにより信号SFDGが印加される。
 制御線RSTLは、水平方向に延伸するように構成され、制御線RSTLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。制御線RSTLには、走査部20L,20Rにより信号SRSTが印加される。
 制御線FCGLは、水平方向に延伸するように構成され、制御線FCGLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。制御線FCGLには、走査部20L,20Rにより信号SFCGが印加される。
 制御線TGSLは、水平方向に延伸するように構成され、制御線TGSLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。制御線TGSLには、走査部20L,20Rにより信号STGSが印加される。
 制御線SELLは、水平方向に延伸するように構成され、制御線SELLの一端は走査部20Lに接続され、他端は走査部20Rに接続されている。制御線SELLには、走査部20L,20Rにより信号SSELが印加される。
 電源線PLは、コントローラ40の電圧生成部42(後述)に接続されている。この電源線PLには、電圧生成部42により電源電圧VDDが印加される。
 信号線SGLは、垂直方向(図1における縦方向)に延伸するように構成され、一端が読出部30に接続される。
 撮像画素P1は、フォトダイオードPD1,PD2と、画素回路CKTとを有している。画素回路CKTは、トランジスタTGLと、トランジスタTGSと、容量素子FCと、トランジスタFCG,RST,FDGと、フローティングディフュージョンFDと、トランジスタAMP,SELとを有している。トランジスタTGL,TGS,FCG,RST,FDG,AMP,SELは、この例ではN型のMOS(Metal Oxide Semiconductor)トランジスタである。
 フォトダイオードPD1は、受光量に応じた量の電荷を生成して内部に蓄積する光電変換素子である。フォトダイオードPD1が光を受光可能な受光領域は、フォトダイオードPD2が光を受光可能な受光領域よりも広く構成されている。フォトダイオードPD1のアノードは接地され、カソードはトランジスタTGLのソースに接続される。
 トランジスタTGLのゲートは制御線TGLLに接続され、ソースはフォトダイオードPD1のカソードに接続され、ドレインはフローティングディフュージョンFDに接続される。
 フォトダイオードPD2は、受光量に応じた量の電荷を生成して内部に蓄積する光電変換素子である。フォトダイオードPD2が光を受光可能な受光領域は、フォトダイオードPD1が光を受光可能な受光領域よりも狭く構成されている。フォトダイオードPD2のアノードは接地され、カソードはトランジスタTGSのソースに接続される。
 トランジスタTGSのゲートは制御線TGSLに接続され、ソースはフォトダイオードPD2のカソードに接続され、ドレインは容量素子FCおよびトランジスタFCGのソースに接続される。
 容量素子FCの一端はトランジスタTGSのドレインおよびトランジスタFCGのソースに接続され、他端は電源線PLに接続される。
 トランジスタFCGのゲートは制御線FCGLに接続され、ソースは容量素子FCの一端およびトランジスタTGSのドレインに接続され、ドレインはトランジスタRSTのソースおよびトランジスタFDGのドレインに接続される。
 トランジスタRSTのゲートは制御線RSTLに接続され、ドレインは電源線PLに接続され、ソースは、トランジスタFCG,FDGのドレインに接続される。
 トランジスタFDGのゲートは制御線FDGLに接続され、ドレインはトランジスタRSTのソースおよびトランジスタFCGのドレインに接続され、ソースはフローティングディフュージョンFDに接続される。
 フローティングディフュージョンFDは、フォトダイオードPD1,PD2から供給された電荷を蓄積するように構成され、例えば、半導体基板の表面に形成された拡散層を用いて構成される。図2では、フローティングディフュージョンFDを、容量素子のシンボルを用いて示している。
 トランジスタAMPのゲートはフローティングディフュージョンFDに接続され、ドレインは電源線PLに接続され、ソースはトランジスタSELのドレインに接続される。
 トランジスタSELのゲートは制御線SELLに接続され、ドレインはトランジスタAMPのソースに接続され、ソースは信号線SGLに接続される。
 この構成により、撮像画素P1では、制御線SELLに印加された信号SSELに基づいてトランジスタSELがオン状態になることにより、撮像画素P1が信号線SGLと電気的に接続される。これにより、トランジスタAMPは、読出部30の電流源35(後述)に接続され、いわゆるソースフォロワとして動作する。そして、撮像画素P1は、フローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして、信号線SGLに出力する。具体的には、撮像画素P1は、後述するように、いわゆる水平期間H内の8つの期間(変換期間T1~T8)において、8つの画素電圧VP(VP1~VP8)を順次出力するようになっている。
 図3は、画素アレイ10の撮像画素領域R1におけるフォトダイオードPD1,PD2の配列の一例を表すものである。図3において、“R”は赤色のカラーフィルタを示し、“G”は緑色のカラーフィルタを示し、“B”は青色のカラーフィルタを示す。各撮像画素P1において、フォトダイオードPD1の右上にフォトダイオードPD2が形成されている。各撮像画素P1における2つのフォトダイオードPD1,PD2には、同じ色のカラーフィルタが形成されている。この例では、フォトダイオードPD1は8角形の形状を有し、フォトダイオードPD2は4角形の形状を有している。この図に示したように、フォトダイオードPD1が光を受光可能な受光領域は、フォトダイオードPD2が光を受光可能な受光領域よりも広く構成される。
 図4A,4Bは、ダミー画素領域R21,R22におけるダミー画素P2およびダミー画素領域R31,R32におけるダミー画素P3の一構成例を表すものである。ダミー画素領域R21,R22では、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P2として配置され、ダミー画素領域R31,R32では、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P3として配置される。図3Aはダミー画素PAの一例を示し、図3Bはダミー画素PBの一例を示す。画素アレイ10は、ダミー画素領域R21,R22,R31,R32において、複数の制御線TGLLと、複数の制御線FDGLと、複数の制御線RSTLと、複数の制御線FCGLと、複数の制御線TGSLと、複数の制御線SELLと、複数の電源線PLと、複数の電圧供給線VLと、複数の信号線SGLとを有している。電圧供給線VLは、コントローラ40の電圧生成部42(後述)に接続されている。複数の電圧供給線VLには、電圧生成部42により、単一の電圧信号SVRが印加される。この電圧信号SVRは、所定の電圧VRおよび電源電圧VDDの間で変化する信号である。電圧VRは、電源電圧VDDよりも低い電圧である。この電圧信号SVRは、例えば、後述する読出駆動D2におけるトランジスタTGL,TGSがオン状態になる期間において電圧VRに設定され、後述する蓄積開始駆動D1におけるトランジスタTGL,TGSがオン状態になる期間において電源電圧VDDに設定される。
 ダミー画素PAの画素回路CKTでは、トランジスタTGLのドレインおよびソースが互いに接続されるとともに、トランジスタTGSのドレインおよびソースが互いに接続される。すなわち、ダミー画素PAでは、トランジスタTGLのドレインおよびソースは、トランジスタTGLを介さずに互いに接続され、トランジスタTGSのドレインおよびソースは、トランジスタTGSを介さずに互いに接続される。この構成により、ダミー画素PAでは、後述するように、読出駆動D2において、フローティングディフュージョンFDの電圧が電源電圧VDDに設定される。そして、ダミー画素PAは、このフローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして信号線SGLに出力する。具体的には、ダミー画素PAは、撮像画素P1と同様に、いわゆる水平期間H内の8つの期間(変換期間T1~T8)において、8つの画素電圧VP(VP1~VP8)を順次出力するようになっている。
 また、ダミー画素PBの画素回路CKTでは、トランジスタTGLのソースが電圧供給線VLに接続されるとともに、トランジスタTGSのソースが電圧供給線VLに接続される。この構成により、ダミー画素PBでは、後述するように、読出駆動D2において、トランジスタTGL,TGSをオン状態にすることによりフローティングディフュージョンFDの電圧が電圧VRに設定される。そして、ダミー画素PBは、このフローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして信号線SGLに出力する。具体的には、ダミー画素PBは、撮像画素P1と同様に、いわゆる水平期間H内の8つの期間(変換期間T1~T8)において、8つの画素電圧VP(VP1~VP8)を順次出力するようになっている。
 図5は、ダミー画素領域R31,R21におけるダミー画素P3,P2の配列を表すものである。図6は、ダミー画素領域R22,R32におけるダミー画素P2,P3の配列を表すものである。この図5,6において、“0”はダミー画素PAを示し、“1”はダミー画素PBを示す。
 図5に示したように、1つの画素ラインLは、ダミー画素領域R31における2個のダミー画素P3(ダミー画素P3[1],P3[0])、およびダミー画素領域R21における11個のダミー画素P2(ダミー画素P2[10]~P2[0])を含んでいる。同様に、図6に示したように、1つの画素ラインLは、ダミー画素領域R22における11個のダミー画素P2(ダミー画素P2[10]~P2[0])、およびダミー画素領域R32における2個のダミー画素P3(ダミー画素P3[1],P3[0])を含んでいる。
 ダミー画素領域R31(図5)において、各画素ラインLにおけるダミー画素P3の配列は“10”である。撮像装置1では、ダミー画素領域R31におけるこの2つのダミー画素P3の配列は、画素アレイ10の左端を識別する左端識別情報INFLとして機能する。
 同様に、ダミー画素領域R32(図6)において、各画素ラインLにおけるダミー画素P3の配列は“01”である。撮像装置1では、ダミー画素領域R31におけるこの2つのダミー画素P3の配列は、画素アレイ10の右端を識別する右端識別情報INFRとして機能する。
 また、ダミー画素領域R21(図5)において、0番目の画素ラインL[0]では、ダミー画素P2の配列は“00000000000”である。すなわち、11個のダミー画素P2[10]~P2[0]の全てがダミー画素PAである。1番目の画素ラインL[1]では、ダミー画素P2の配列は“00000000001”である。すなわち、ダミー画素P2[0]がダミー画素PBであり、その他のダミー画素P2[10]~P2[1]はダミー画素PAである。2番目の画素ラインL[2]では、ダミー画素P2の配列は“00000000010”である。すなわち、ダミー画素P2[1]がダミー画素PBであり、その他のダミー画素P2[10]~P2[2],P2[0]はダミー画素PAである。このように、ダミー画素P2の配列は、画素ラインL間で互いに異なるように設定される。特に、この例ではダミー画素P2の配列は、2進数で表された、画素ラインLの番目の数に対応する。この例では、11個のダミー画素P2を設けたので、2048本の画素ラインLの番目の数を表現することができる。つまり、11個のダミー画素P2の配列は、画素ラインLを識別するライン識別情報INFとして機能する。なお、以上では、ダミー画素領域R21を例に説明したが、ダミー画素領域R22(図6)についても同様である。
 2つの走査部20L,20R(図1)は、コントローラ40からの指示に基づいて、画素ラインL単位で、画素アレイ10における撮像画素P1およびダミー画素P2,P3を順次駆動するように構成される。走査部20Lは、アドレスデコーダ21Lと、ロジック部22Lと、ドライバ部23Lとを有している。走査部20Rは、同様に、アドレスデコーダ21Rと、ロジック部22Rと、ドライバ部23Rとを有している。
 アドレスデコーダ21Lは、コントローラ40から供給されたアドレス信号ADRに基づいて、画素アレイ10における、アドレス信号ADRが示すアドレスに応じた画素ラインLを選択するように構成される。ロジック部22Lは、アドレスデコーダ21Lからの指示に基づいて、各画素ラインLに対応する信号STGL1,SFDG1,SRST1,SFCG1,STGS1,SSEL1をそれぞれ生成するように構成される。ドライバ部23Lは、各画素ラインLに対応する信号STGL1,SFDG1,SRST1,SFCG1,STGS1,SSEL1に基づいて、各画素ラインLに対応する信号STGL,SFDG,SRST,SFCG,STGS,SSELをそれぞれ生成するように構成される。アドレスデコーダ21R、ロジック部22R、およびドライバ部23Rについても同様である。アドレスデコーダ21Rに供給されるアドレス信号ADRは、アドレスデコーダ21Lに供給されるアドレス信号ADRと同じである。よって、アドレスデコーダ21L,21Rは、アドレス信号ADRに基づいて、互いに同じ画素ラインLを選択する。これにより、走査部20L,20Rは、画素アレイ10の左右両側から、画素ラインL単位で、画素アレイ10における撮像画素P1およびダミー画素P2,P3を順次駆動するようになっている。
 読出部30は、画素アレイ10から信号線SGLを介して供給された信号SIGに基づいてAD変換を行うことにより、画像信号DATA0を生成するように構成される。
 図7は、読出部30の一構成例を表すものである。なお、図7には、読出部30に加え、コントローラ40をも描いている。読出部30は、読出制御部31と、参照信号生成部32と、複数のAD(Analog to Digital)変換部ADC(AD変換部ADC[0],ADC[1],ADC[2],…)と、複数のスイッチ部SW(スイッチ部SW[0],SW[1],SW[2],…)と、バス配線100とを有している。
 読出制御部31は、コントローラ40からの指示に基づいて、読出部30における読出動作を制御するように構成される。具体的には、読出制御部31は、参照信号生成部32に制御信号を供給することにより、参照信号生成部32に参照信号REF(後述)を生成させる。また、読出制御部31は、複数のAD変換部ADCに、クロック信号CLKおよび制御信号CCを供給することにより、複数のAD変換部ADCにおけるAD変換動作を制御するようになっている。
 参照信号生成部32は、参照信号REFを生成するように構成される。参照信号REFは、AD変換を行う8つの期間(変換期間T1~T8)において、時間の経過に応じて電圧レベルが徐々に低下する、いわゆるランプ波形を有する。参照信号生成部32は、この参照信号REFにおけるランプ波形の傾きを変更可能に構成されている。撮像装置1では、このようにランプ波形の傾きを変更することにより撮像感度を変更することができ、その結果、明るい被写体や暗い被写体を撮像することができる。そして、参照信号生成部32は、生成した参照信号REFを複数のAD変換部ADCに供給するようになっている。
 AD変換部ADCは、画素アレイ10から供給された信号SIGに基づいてAD変換を行うことにより、信号SIGの電圧をデジタルコードCODEに変換するように構成される。複数のAD変換部ADCは、複数の信号線SGLに対応して設けられている。具体的には、0番目のAD変換部ADC[0]は、0番目の信号線SGL[0]に対応して設けられ、1番目のAD変換部ADC[1]は、1番目の信号線SGL[1]に対応して設けられ、2番目のAD変換部ADC[2]は、2番目の信号線SGL[2]に対応して設けられている。
 AD変換部ADCは、容量素子33,34と、電流源35と、コンパレータ36と、カウンタ37と、ラッチ38とを有している。容量素子33の一端には参照信号REFが供給され、他端はコンパレータ36の正入力端子に接続されている。容量素子34の一端は信号線SGLに接続され、他端はコンパレータ36の負入力端子に接続されている。電流源35は、信号線SGLから接地に所定の電流値の電流を流すように構成される。コンパレータ36は、正入力端子における入力電圧と負入力端子における入力電圧とを比較して、その比較結果を信号CMPとして出力するように構成される。コンパレータ36の正入力端子には、容量素子33を介して参照信号REFが供給され、負入力端子には、容量素子34を介して信号SIGが供給されるようになっている。このコンパレータ36は、後述する所定の期間において、容量素子33,34の電圧を設定するゼロ調整を行う機能をも有している。カウンタ37は、コンパレータ36から供給された信号CMP、読出制御部31から供給されたクロック信号CLKおよび制御信号CCに基づいて、カウント動作を行うように構成される。ラッチ38は、カウンタ37により得られたカウント値CNTを、複数のビットを有するデジタルコードCODEとして保持するように構成される。
 スイッチ部SWは、コントローラ40から供給された制御信号SSWに基づいて、AD変換部ADCから出力されたデジタルコードCODEをバス配線100に供給するように構成される。複数のスイッチ部SWは、複数のAD変換部ADCに対応して設けられている。具体的には、0番目のスイッチ部SW[0]は、0番目のAD変換部ADC[0]に対応して設けられ、1番目のスイッチ部SW[1]は、1番目のAD変換部ADC[1]に対応して設けられ、2番目のスイッチ部SW[2]は、2番目のAD変換部ADC[2]に対応して設けられている。
 スイッチ部SWは、この例では、デジタルコードCODEのビット数と同じ数のトランジスタを用いて構成されている。これらのトランジスタは、コントローラ40から供給された制御信号SSWの各ビット(制御信号SSW[0],SSW[1],SSW[2],…)に基づいて、オンオフ制御される。具体的には、例えば、0番目のスイッチ部SW[0]は、制御信号SSW[0]に基づいて各トランジスタがオン状態になることにより、0番目のAD変換部ADC[0]から出力されたデジタルコードCODEをバス配線100に供給する。同様に、例えば、1番目のスイッチ部SW[1]は、制御信号SSW[1]に基づいて各トランジスタがオン状態になることにより、1番目のAD変換部ADC[1]から出力されたデジタルコードCODEをバス配線100に供給する。他のスイッチ部SWについても同様である。
 バス配線100は、複数の配線を有し、AD変換部ADCから出力されたデジタルコードCODEを伝えるように構成される。読出部30は、このバス配線100を用いて、AD変換部ADCから供給された複数のデジタルコードCODEを、画像信号DATA0として、コントローラ40に順次転送するようになっている(データ転送動作)。
 コントローラ40(図1)は、走査部20L,20Rおよび読出部30に制御信号を供給することにより、撮像装置1の動作を制御するように構成される。コントローラ40は、アドレス生成部41と、電圧生成部42と、カラム走査部43と、画像処理部44と、診断処理部45とを有している。
 アドレス生成部41は、画素アレイ10における駆動対象となる画素ラインLを決定し、その画素ラインLに対応するアドレスを示すアドレス信号ADRを生成するように構成される。そして、アドレス生成部41は、生成したアドレス信号ADRを、走査部20Lのアドレスデコーダ21Lおよび走査部20Rのアドレスデコーダ21Rに供給するようになっている。
 電圧生成部42は、電圧信号SVRおよび電源電圧VDDを生成するように構成される。この電圧信号SVRは、所定の電圧VRおよび電源電圧VDDの間で変化する信号である。電圧VRは、電源電圧VDDよりも低い電圧である。この電圧信号SVRは、例えば、後述する読出駆動D2におけるトランジスタTGL,TGSがオン状態になる期間において電圧VRに設定され、後述する蓄積開始駆動D1において、電源電圧VDDに設定される。そして、電圧生成部42は、生成した電圧信号SVRを、画素アレイ10における複数の電圧供給線VLに供給するとともに、生成した電源電圧VDDを、画素アレイ10における複数の電源線PLに供給するようになっている。
 カラム走査部43は、読出部30における、データ転送動作の対象となるAD変換部ADCを決定し、その決定結果に基づいて、制御信号SSWを生成するように構成される。そして、カラム走査部43は、生成した制御信号SSWを、読出部30の複数のスイッチ部SWに供給するようになっている。
 画像処理部44は、画像信号DATA0が示す画像に対して、所定の画像処理を行うように構成される。所定の画像処理は、例えば、画像合成処理を含んでいる。画像合成処理では、画像処理部44は、読出部30から供給された、AD変換を行う8つの期間(変換期間T1~T8)において得られた各画素に係る8つのデジタルコードCODE(デジタルコードCODE1~CODE8)に基づいて、その画素についての4つの画素値VAL1~VAL4を生成し、この4つの画素値VAL1~VAL4を合成することにより、その画素の画素値VALを生成する。画像処理部44は、画素アレイ10に含まれるすべての画素について、この画素値VALを生成する。そして、画像処理部44は、撮像画素P1に係る画素値VALを、画像信号DATAとして出力する。なお、この例では、画像処理部44は、4つの画素値VAL1~VAL4を合成することにより画素値VALを生成するようにしたが、これに限定されるものではなく、例えば、4つの画素値VAL1~VAL4をそのまま出力してもよい。また、画像処理部44は、ダミー画素P2,P3に係る画素値VAL1~VAL4を、画像信号DATA1として診断処理部45に供給するようになっている。
 診断処理部45は、アドレス信号ADRおよび画像信号DATA1に基づいて、診断処理を行うように構成される。具体的には、診断処理部45は、画像信号DATA1に含まれるダミー画素P3に係る画素値VAL1~VAL4に基づいて左端識別情報INFLおよび右端識別情報INFRを求めるとともに、画像信号DATA1に含まれるダミー画素P2に係る画素値VALに基づいてライン識別情報INFを求める。そして、診断処理部45は、アドレス信号ADRが示すアドレスとこのライン識別情報INFとを比較することにより、撮像装置1が所望の動作を行っているかどうかを診断する。そして、診断処理部45は、その診断処理の結果(診断結果RES)を出力するようになっている。
 次に、撮像装置1の実装例について、いくつか例を挙げて説明する。
 図8は、撮像装置1の実装例E1を表すものである。この実装例E1では、撮像装置1は、1つの半導体チップ200に形成されている。画素アレイ10は、半導体チップ200の中央付近に配置される。走査部20Lは、画素アレイ10の左側に配置され、走査部20Rは、画素アレイ10の右側に配置される。読出部30およびコントローラ40のカラム走査部43は、画素アレイ10の下側に配置される。画素アレイ10の上側には、制御部40Aが配置される。この制御部40Aは、コントローラ40のうちのカラム走査部43以外の回路に対応している。
 この構成において、制御部40A内のアドレス生成部41は、アドレス信号ADRを走査部20L,20Rに供給する。走査部20L,20Rは、信号STGL,SFDG,SRST,SFCG,STGS,SSELを画素アレイ10に供給する。制御部40A内の電圧生成部42は、電圧信号SVRおよび電源電圧VDDを画素アレイ10に供給する。画素アレイ10は、信号SIGを読出部30に供給する。読出部30は、画像信号DATA0を制御部40A内の画像処理部44に供給する。撮像装置1は、診断処理を行うことにより、例えば、各回路の動作の不具合や、半導体チップ200における各種配線のオープンやショートなどの結線の不具合を検出することができるようになっている。
 図9は、撮像装置1の他の実装例E2を表すものである。この実装例E2では、撮像装置1は、2つの半導体チップ201,202に形成されている。
 半導体チップ201には、この例では画素アレイ10が形成されている。すなわち、半導体チップ201には、複数の撮像画素P1、複数のダミー画素P2,P3、制御線TGLL,FDGL,RSTL,FCGL,TGSL,SELL、電源線PL、電圧供給線VL、および信号線SGLが形成される。また、半導体チップ201には、電極領域201A,201B,201Cが設けられている。電極領域201Aは、半導体チップ201の左辺近傍に設けられ、電極領域201Bは、半導体チップ201の右辺近傍に設けられ、電極領域201Cは、半導体チップ201の下辺近傍に設けられている。電極領域201Aには、複数の電極が形成され、これらの複数の電極は、例えばTCV(Through Chip Via)などのビアを介して画素アレイ10における制御線TGLL,FDGL,RSTL,FCGL,TGSL,SELL、電源線PL、電圧供給線VLに接続されている。電極領域201Bには、複数の電極が形成され、これらの複数の電極は、例えばTCVなどのビアを介して画素アレイ10における制御線TGLL,FDGL,RSTL,FCGL,TGSL,SELL、電源線PL、電圧供給線VLに接続されている。電極領域201Cには、複数の電極が形成され、これらの複数の電極は、例えばTCVなどのビアを介して画素アレイ10における複数の信号線SGLに接続されている。
 半導体チップ202には、この例では、走査部20L,20R、制御部40A、カラム走査部43、および読出部30が形成されている。制御部40A、カラム走査部43、および読出部30は、半導体チップ202の中央付近に配置される。走査部20Lは、制御部40A、カラム走査部43、および読出部30の左に配置され、走査部20Rは、制御部40A、カラム走査部43、および読出部30の右側に配置される。また、半導体チップ202には、電極領域202A,202B,202Cが設けられている。電極領域202Aは、半導体チップ202の左辺近傍に、走査部20Lに隣り合うように設けられ、電極領域202Bは、半導体チップ202の右辺近傍に、走査部20Rに隣り合うように設けられ、電極領域202Cは、半導体チップ202の下辺近傍に、読出部30に隣り合うように設けられている。電極領域202Aには、複数の電極が形成され、これらの複数の電極は、例えばTCVなどのビアを介して、走査部20L、および制御部40A内の電圧生成部42に接続されている。電極領域202Bには、複数の電極が形成され、これらの複数の電極は、例えばTCVなどのビアを介して、走査部20R、および制御部40A内の電圧生成部42に接続されている。電極領域202Cには、複数の電極が形成され、これらの複数の電極は、例えばTCVなどのビアを介して読出部30に接続されている。
 この実装例E2では、半導体チップ201および半導体チップ202が、互いにはり合わされる。これにより、半導体チップ201の電極領域201Aにおける複数の電極が、半導体チップ202の電極領域202Aにおける複数の電極に電気的に接続され、半導体チップ201の電極領域201Bにおける複数の電極が、半導体チップ202の電極領域202Bにおける複数の電極に電気的に接続され、半導体チップ201の電極領域201Cにおける複数の電極が、半導体チップ202の電極領域202Cにおける複数の電極に電気的に接続される。
 この構成において、半導体チップ202の制御部40A内のアドレス生成部41は、アドレス信号ADRを走査部20L,20Rに供給する。半導体チップ202の走査部20L,20Rは、電極領域201A,202Aにおける複数の電極、および電極領域201B,202Bにおける複数の電極を介して、制御線TGLL,FDGL,RSTL,FCGL,TGSL,SELLを、半導体チップ201の画素アレイ10に供給する。半導体チップ202の制御部40A内の電圧生成部42は、電極領域201A,202Aにおける複数の電極、および電極領域201B,202Bにおける複数の電極を介して、電圧信号SVRおよび電源電圧VDDを、半導体チップ201の画素アレイ10に供給する。半導体チップ201の画素アレイ10は、電極領域201Cにおける複数の電極を介して、信号SIGを、半導体チップ202の読出部30に供給する。半導体チップ202において、読出部30は、画像信号DATA0を、制御部40A内の画像処理部44に供給する。撮像装置1は、診断処理を行うことにより、例えば、各回路の動作の不具合、半導体チップ201,202における各種配線のオープンやショートなどの結線の不具合、半導体チップ201と半導体チップ202との間の結線不良を検出することができるようになっている。
 また、このように、半導体チップ201に画素アレイ10を主に配置することにより、画素に特化した半導体製造工程を用いて半導体チップ201を製造することができる。つまり、半導体チップ201には、画素アレイ10以外にトランジスタがないので、例えば、1000度でアニールする工程がある場合でも、画素アレイ10以外の回路に影響を与えることがない。よって、半導体チップ201を製造する際、例えば白点対策の高温プロセスを導入することができ、その結果、撮像装置1における特性を改善することができる。
 ここで、フォトダイオードPD1は、本開示における「第1の受光素子」の一具体例に対応する。フォトダイオードPD2は、本開示における「第2の受光素子」の一具体例に対応する。撮像画素P1の画素回路CKTは、本開示における「撮像画素回路」の一具体例に対応する。ダミー画素PAの画素回路CKTは、本開示における「第1のダミー画素回路」の一具体例に対応する。ダミー画素PBの画素回路CKTは、本開示における「第2のダミー画素回路」の一具体例に対応する。フローティングディフュージョンFDは、本開示における「蓄積部」の一具体例に対応する。トランジスタTGLは、本開示における「第1のトランジスタ」の一具体例に対応する。トランジスタAMP,SELは、本開示における「出力部」の一具体例に対応する。トランジスタRSTは、本開示における「第2のトランジスタ」の一具体例に対応する。トランジスタTGSは、本開示における「第3のトランジスタ」の一具体例に対応する。トランジスタFCGは、本開示における「第4のトランジスタ」の一具体例に対応する。トランジスタFDGは、本開示における「第5のトランジスタ」の一具体例に対応する。容量素子FCは、本開示における「容量素子」の一具体例に対応する。電圧供給線VLは、本開示における「電圧供給線」の一具体例に対応する。アドレス生成部41は、本開示における「アドレス生成部」の一具体例に対応する。走査部20L,20Rは、本開示における「駆動制御部」の一具体例に対応する読出部30、画像処理部44、および診断処理部45は、本開示における「診断部」の一具体例に対応する。
[動作および作用]
 続いて、本実施の形態の撮像装置1の動作および作用について説明する。
(全体動作概要)
 まず、図1を参照して、撮像装置1の全体動作概要を説明する。コントローラ40のアドレス生成部41は、画素アレイ10における駆動対象となる画素ラインLを決定し、その画素ラインLに対応するアドレスを示すアドレス信号ADRを生成する。2つの走査部20L,20Rは、コントローラ40からの指示に基づいて、画素ラインL単位で、画素アレイ10における撮像画素P1およびダミー画素P2,P3を順次駆動する。コントローラ40の電圧生成部42は、電圧信号SVRおよび電源電圧VDDを生成する。画素アレイ10における撮像画素P1およびダミー画素P2,P3は、8つの変換期間T1~T8において、8つの画素電圧VP1~VP8を順次出力する。読出部30のAD変換部ADCは、これらの8つの画素電圧VP1~VP8に基づいてそれぞれAD変換を行い、8つのデジタルコードCODE(デジタルコードCODE1~CODE8)をそれぞれ出力する。コントローラ40の画像処理部44は、画像信号DATA0に含まれる各画素に係る8つのデジタルコードCODE1~CODE8に基づいて、その画素についての4つの画素値VAL1~VAL4を生成し、この4つの画素値VAL1~VAL4を合成することにより、その画素の画素値VALを生成し、撮像画素P1に係る画素値VALを、画像信号DATAとして出力する。また、画像処理部44は、ダミー画素P2,P3に係る画素値VAL1~VAL4を、画像信号DATA1として診断処理部45に供給する。コントローラ40の診断処理部45は、アドレス信号ADRおよび画像信号DATA1に基づいて診断処理を行い、診断結果RESを出力する。
(詳細動作)
 撮像装置1において、画素アレイ10における撮像画素P1のそれぞれは、受光量に応じて電荷を蓄積し、画素電圧VPを信号SIGとして出力する。以下に、この動作について詳細に説明する。
 図10は、画素アレイ10における複数の撮像画素P1および複数のダミー画素P2,P3を走査する動作の一例を表すものである。
 撮像装置1は、タイミングt0~t1の期間において、画素アレイ10における複数の撮像画素P1および複数のダミー画素P2,P3に対して、垂直方向において上から順に蓄積開始駆動D1を行う。具体的には、走査部20L,20Rは、例えば、垂直方向において上から順に、画素ラインL単位で、水平期間H内の所定の期間においてトランジスタTGL,FDG,RST,FCG,TGSをオン状態に設定した後に、これらのトランジスタをオフ状態にする。これにより、複数の撮像画素P1のそれぞれでは、フローティングディフュージョンFD、容量素子FC、およびフォトダイオードPD1,PD2における電圧が電源電圧VDDに設定された後に、電荷の蓄積が開始され、読出駆動D2が行われるまでの蓄積期間T10において、電荷が蓄積される。また、複数のダミー画素P2,P3のそれぞれでは、フローティングディフュージョンFDおよび容量素子FCにおける電圧が電源電圧VDDに設定される。すなわち、電圧供給線VLに印加される電圧信号SVRの電圧VRは、蓄積開始駆動D1におけるトランジスタTGL,TGSがオン状態になる期間において電源電圧VDDに設定されるので、フローティングディフュージョンFDおよび容量素子FCにおける電圧が電源電圧VDDに設定される。
 そして、撮像装置1は、タイミングt10~t11の期間において、複数の撮像画素P1および複数のダミー画素P2,P3に対して、垂直方向において上から順に読出駆動D2を行う。これにより、複数の撮像画素P1および複数のダミー画素P2,P3のそれぞれは、8つの画素電圧VP1~VP8を順次出力する。読出部30は、これらの8つの画素電圧VP1~VP8に基づいてそれぞれAD変換を行い、8つのデジタルコードCODE(デジタルコードCODE1~CODE8)をそれぞれ出力する。
 そして、画像処理部44は、読出部30から供給された各画素に係る8つのデジタルコードCODE1~CODE8に基づいて、その画素についての4つの画素値VAL1~VAL4を生成し、この4つの画素値VAL1~VAL4を合成することにより、その画素の画素値VALを生成する。
 撮像装置1は、このような蓄積開始駆動D1および読出駆動D2を繰り返す。具体的には、撮像装置1は、図10に示したように、タイミングt2~t3の期間において蓄積開始駆動D1を行い、タイミングt12~t13の期間において読出駆動D2を行う。また、撮像装置1は、タイミングt4~t5の期間において蓄積開始駆動D1を行い、タイミングt14~t15の期間において読出駆動D2を行う。
(読出駆動D2について)
 次に、読出駆動D2について、詳細に説明する。以下に、複数の撮像画素P1のうちのある撮像画素P1(撮像画素P1A)に着目し、この撮像画素P1Aの動作について詳細に説明する。なお、この例では、撮像画素P1の動作について説明するが、ダミー画素P2,P3の動作についても同様である。
 図11,12A,12Bは、撮像装置1の一動作例を表すものである。図11において、(A)は水平同期信号XHSの波形を示し、(B)は撮像画素P1Aに供給される信号SSELの波形を示し、(C)は撮像画素P1Aに供給される信号SRSTの波形を示し、(D)は撮像画素P1Aに供給される信号SFDGの波形を示し、(E)は撮像画素P1Aに供給される信号STGLの波形を示し、(F)は撮像画素P1Aに供給される信号SFCGの波形を示し、(G)は撮像画素P1Aに供給される信号STGSの波形を示し、(H)は参照信号REFの波形を示し、(I)は撮像画素P1Aから出力される信号SIGの波形を示し、(J)は撮像画素P1Aに接続されたAD変換部ADCにおけるカウンタ37の動作を示す。図12Aは、図11に示した動作のうちの前半の動作を示し、図12Bは、図11に示した動作のうちの後半の動作を示す。図11(H),(I)、図12A(H),(I)、および図12B(H),(I)では、各信号の波形を同じ電圧軸で示している。図11(H)、図12A(H)、および図12B(H)の参照信号REFは、コンパレータ36の正入力端子における波形を示し、図11(I)、図12A(I)、および図12B(I)の信号SIGは、コンパレータ36の負入力端子における波形を示している。また、図11(J)、図12A(J)、図12B(J)において、斜線は、カウンタ37がカウント動作を行っていることを示している。
 図12A~12Cは、撮像画素P1Aの状態を表すものである。この図12A~12Cでは、トランジスタTGL,RST,FDG,TGS,FCG,SELを、そのトランジスタの動作状態に応じたスイッチを用いてそれぞれ示している。
 撮像装置1では、ある水平期間Hにおいて、まず、走査部20L,20Rは、信号SSELを用いて、撮像画素P1Aを含む画素ラインLを選択し、撮像画素P1Aを、その撮像画素P1Aに対応する信号線SGLに電気的に接続させる。そして、走査部20L,20Rは、信号SRST,SFDG,STGL,SFCG,STGSを用いて撮像画素P1Aの動作を制御し、撮像画素P1Aは、8つの変換期間T1~T8において、8つの画素電圧VP1~VP8を順次出力する。そして、読出部30のAD変換部ADCは、これらの8つの画素電圧VP1~VP8に基づいてそれぞれAD変換を行い、8つのデジタルコードCODE1~CODE8を出力する。以下にこの動作について詳細に説明する。
 まず、タイミングt1において、水平期間Hが開始すると、走査部20L,20Rは、タイミングt2において、信号SSELの電圧を低レベルから高レベルに変化させる(図12A(B))。これにより、撮像画素P1Aでは、トランジスタSELがオン状態になり、撮像画素P1Aが信号線SGLと電気的に接続される。
 タイミングt11までの期間において、走査部20L,20Rは、信号SRST,SFDGをともに高レベルにする(図12A(C),(D))。これにより、撮像画素P1Aでは、トランジスタRST,FDGがともにオン状態になり、フローティングディフュージョンFDの電圧が電源電圧VDDに設定され、フローティングディフュージョンFDがリセットされる。
(タイミングt11~t21の動作)
 次に、タイミングt11において、走査部20L,20Rは、信号SFDGの電圧を高レベルから低レベルに変化させる(図12A(D))。これにより、撮像画素P1Aでは、トランジスタFDGがオフ状態になる。次に、タイミングt12において、走査部20L,20Rは、信号SRSTの電圧を高レベルから低レベルに変化させる(図12A(C))。これにより、撮像画素P1Aでは、トランジスタRSTがオフ状態になる。次に、タイミングt13において、走査部20L,20Rは、信号SFDGの電圧を低レベルから高レベルに変化させる(図12A(D))。これにより、撮像画素P1Aでは、トランジスタFDGがオン状態になる。また、コンパレータ36は、タイミングt13~t14までの期間において、容量素子33,34の電圧を設定するゼロ調整を行う。
 次に、タイミングt14において、コンパレータ36は、ゼロ調整を終了する。そして、このタイミングt14において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12A(H))。
 これにより、撮像画素P1Aでは、図13Aに示したように、トランジスタFDG,SELはオン状態になり、その他のトランジスタは全てオフ状態になる。トランジスタFDGがオン状態であるので、フローティングディフュージョンFDおよびトランジスタFDGが合成容量を構成する。この合成容量は、撮像画素P1Aにおいて電荷を電圧へ変換する変換容量として機能する。撮像画素P1Aでは、このように、トランジスタFDGがオン状態であるので、撮像画素P1Aにおける変換容量の容量値が大きいため、電荷から電圧への変換効率が低い。この変換容量は、タイミングt12までの期間においてフローティングディフュージョンFDがリセットされたときの電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP1)を出力する。
 次に、タイミングt15~t17の期間(変換期間T1)において、AD変換部ADCは、この画素電圧VP1に基づいてAD変換を行う。具体的には、タイミングt15において、読出制御部31は、クロック信号CLKの生成を開始し、これと同時に、参照信号生成部32は、参照信号REFの電圧を、電圧V1から所定の変化度合いで低下させ始める(図12A(H))。これに応じて、AD変換部ADCのカウンタ37は、カウント動作を開始する(図12A(J))。
 そして、タイミングt16において、参照信号REFの電圧が信号SIGの電圧(画素電圧VP1)を下回る(図12A(H),(I))。これに応じて、AD変換部ADCのコンパレータ36は、信号CMPの電圧を変化させ、その結果、カウンタ37は、カウント動作を停止する(図12A(J))。カウント動作が停止したときのカウンタ37のカウント値CNTは、画素電圧VP1に対応している。AD変換部ADCは、このようにして、画素電圧VP1に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE1として出力する(図12A(J))。
 そして、タイミングt17において、読出制御部31は、変換期間T1の終了に伴い、クロック信号CLKの生成を停止し、参照信号生成部32は、参照信号REFの電圧の変化を停止させ(図12A(H))、カウンタ37は、カウント値CNTをリセットする。
(タイミングt21~t31の動作)
 次に、タイミングt21において、走査部20L,20Rは、信号SFDGの電圧を高レベルから低レベルに変化させる(図12A(D))。これにより、撮像画素P1Aでは、トランジスタFDGがオフ状態になる。また、コンパレータ36は、タイミングt21~t22までの期間において、容量素子33,34の電圧を設定するゼロ調整を行う。
 次に、タイミングt22において、コンパレータ36は、ゼロ調整を終了する。そして、このタイミングt22において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12A(H))。
 これにより、撮像画素P1Aでは、図13Bに示したように、トランジスタSELはオン状態になり、その他のトランジスタは全てオフ状態になる。撮像画素P1Aでは、このように、トランジスタFDGがオフ状態であるので、撮像画素P1Aにおける変換容量の容量値が小さいため、電荷から電圧への変換効率が高い。この変換容量は、タイミングt12までの期間においてフローティングディフュージョンFDがリセットされたときの電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP2)を出力する。
 次に、タイミングt23~t25の期間(変換期間T2)において、AD変換部ADCは、この画素電圧VP2に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP2に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE2として出力する(図12A(J))。
(タイミングt31~t41の動作)
 次に、タイミングt31において、走査部20L,20Rは、信号STGLの電圧を低レベルから高レベルに変化させる(図12A(E))。これにより、撮像画素P1Aでは、トランジスタTGLがオン状態になる。これにより、フォトダイオードPD1で発生した電荷がフローティングディフュージョンFDに転送される。また、このタイミングt31において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12A(H))。
 次に、タイミングt32において、走査部20L,20Rは、信号STGLの電圧を高レベルから低レベルに変化させる(図12A(E))。これにより、撮像画素P1Aでは、トランジスタTGLがオフ状態になる。
 これにより、撮像画素P1Aでは、図13Bに示したように、トランジスタFDGがオフ状態であるので、撮像画素P1Aにおける変換容量の容量値が小さいので、電荷から電圧への変換効率が高い。この変換容量は、タイミングt31~t32においてフォトダイオードPD1から転送された電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP3)を出力する。
 次に、タイミングt33~t35の期間(変換期間T3)において、AD変換部ADCは、この画素電圧VP3に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP3に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE3として出力する(図12A(J))。このデジタルコードCODE3は、同じく変換効率が高い時(変換期間T2)に得られたデジタルコードCODE2に対応している。
(タイミングt41~t51の動作)
 次に、タイミングt41において、走査部20L,20Rは、信号SFDGの電圧を低レベルから高レベルに変化させるとともに信号STGLの電圧を低レベルから高レベルに変化させる(図12A(D),(E))。これにより、撮像画素P1Aでは、トランジスタFDG,TGLがともにオン状態になる。また、このタイミングt41において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12A(H))。次に、走査部20L,20Rは、タイミングt42において、信号STGLの電圧を高レベルから低レベルに変化させる(図12A(E))。これにより、撮像画素P1Aでは、トランジスタTGLがオフ状態になる。
 これにより、撮像画素P1Aでは、図13Aに示したように、トランジスタFDGがオン状態であるので、フローティングディフュージョンFDおよびトランジスタFDGが合成容量(変換容量)を構成する。よって、撮像画素P1Aにおける変換容量の容量値が大きいので、電荷から電圧への変換効率が低い。この変換容量は、タイミングt31~t32,t41~t42においてフォトダイオードPD1から転送された電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP4)を出力する。
 次に、タイミングt43~t45の期間(変換期間T4)において、AD変換部ADCは、この画素電圧VP4に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP4に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE4として出力する(図12A(J))。このデジタルコードCODE4は、同じく変換効率が低い時(変換期間T1)に得られたデジタルコードCODE1に対応している。
(タイミングt51~t61の動作)
 次に、タイミングt51において、走査部20L,20Rは、信号SRSTの電圧を低レベルから高レベルに変化させる(図12B(C))。これにより、撮像画素P1Aでは、トランジスタRSTがオン状態になる。トランジスタFDGはオン状態であるので、これにより、フローティングディフュージョンFDの電圧が電源電圧VDDに設定され、フローティングディフュージョンFDがリセットされる。次に、タイミングt52において、走査部20L,20Rは、信号SRSTの電圧を高レベルから低レベルに変化させる(図12B(C))。これにより、撮像画素P1Aでは、トランジスタRSTがオフ状態になる。また、このタイミングt52において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12B(H))。
 次に、タイミングt53において、走査部20L,20Rは、信号SFCGの電圧を低レベルから高レベルに変化させる(図12B(F))。これにより、撮像画素P1Aでは、トランジスタFCGがオン状態になる。また、コンパレータ36は、タイミングt53~t54までの期間において、容量素子33,34の電圧を設定するゼロ調整を行う。
 次に、タイミングt54において、コンパレータ36は、ゼロ調整を終了する。また、このタイミングt54において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12A(H))。
 これにより、撮像画素P1Aでは、図13Cに示したように、トランジスタFDG,FCG,SELはオン状態になり、その他のトランジスタは全てオフ状態になる。トランジスタFDG,FCGがともにオン状態であるので、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量(変換容量)を構成する。この変換容量は、タイミングt53より前にフォトダイオードPD2で発生し、トランジスタTGSを介して容量素子FCに供給され蓄積されていた電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP5)を出力する。
 次に、タイミングt55~t57の期間(変換期間T5)において、AD変換部ADCは、この画素電圧VP5に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP5に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE5として出力する(図12B(J))。
(タイミングt61~t71の動作)
 次に、タイミングt61において、走査部20L,20Rは、信号STGSの電圧を低レベルから高レベルに変化させる(図12B(G))。これにより、撮像画素P1Aでは、トランジスタTGSがオン状態になる。これにより、フォトダイオードPD2で発生した電荷がフローティングディフュージョンFDおよび容量素子FCに転送される。また、このタイミングt61において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12B(H))。
 次に、タイミングt62において、走査部20L,20Rは、信号STGSの電圧を高レベルから低レベルに変化させる(図12B(G))。これにより、撮像画素P1Aでは、トランジスタTGSがオフ状態になる。
 これにより、撮像画素P1Aでは、図13Cに示したように、トランジスタFDG,FCGがともにオン状態であるので、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量(変換容量)を構成する。この変換容量は、タイミングt53より前にフォトダイオードPD2で発生し、トランジスタTGSを介して容量素子FCに供給され蓄積されていた電荷に加え、タイミングt61~t62においてフォトダイオードPD2から転送された電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP6)を出力する。
 次に、タイミングt63~t65の期間(変換期間T6)において、AD変換部ADCは、この画素電圧VP6に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP6に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE6として出力する(図12B(J))。このデジタルコードCODE6は、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量を構成するときに得られたデジタルコードCODE5に対応している。
(タイミングt71~t81の動作)
 次に、コンパレータ36は、タイミングt71~t72までの期間において、容量素子33,34の電圧を設定するゼロ調整を行う。
 次に、タイミングt72において、コンパレータ36は、ゼロ調整を終了する。また、このタイミングt72において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12B(H))。
 これにより、撮像画素P1Aでは、図13Cに示したように、トランジスタFDG,FCGがともにオン状態であるので、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量(変換容量)を構成する。この変換容量は、タイミングt53より前にフォトダイオードPD2で発生し、トランジスタTGSを介して容量素子FCに供給され蓄積されていた電荷に加え、タイミングt61~t62においてフォトダイオードPD2から転送された電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP7)を出力する。
 次に、タイミングt73~t75の期間(変換期間T7)において、AD変換部ADCは、この画素電圧VP7に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP7に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE7として出力する(図12B(J))。
(タイミングt81~t7の動作)
 次に、タイミングt81において、走査部20L,20Rは、信号SRSTの電圧を低レベルから高レベルに変化させる(図12B(C))。これにより、撮像画素P1Aでは、トランジスタRSTがオン状態になる。トランジスタFDG,FCGはオン状態であるので、フローティングディフュージョンFDの電圧および容量素子FCの電圧が電源電圧VDDに設定され、フローティングディフュージョンFDおよび容量素子FCがリセットされる。
 次に、タイミングt82において、走査部20L,20Rは、信号SFCGの電圧を高レベルから低レベルに変化させる(図12B(F))。これにより、撮像画素P1Aでは、トランジスタFCGがオフ状態になる。
 次に、タイミングt83において、走査部20L,20Rは、信号SRSTの電圧を高レベルから低レベルに変化させる(図12B(C))。これにより、撮像画素P1Aでは、トランジスタRSTがオフ状態になる。
 次に、タイミングt84において、走査部20L,20Rは、信号SFCGの電圧を低レベルから高レベルに変化させる(図12B(F))。これにより、撮像画素P1Aでは、トランジスタFCGがオン状態になる。また、このタイミングt84において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図12B(H))。
 これにより、撮像画素P1Aでは、図13Cに示したように、トランジスタFDG,FCGがともにオン状態であるので、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量(変換容量)を構成する。この変換容量は、タイミングt81~t82においてフローティングディフュージョンFDおよび容量素子FCがリセットされたときの電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP8)を出力する。
 次に、タイミングt85~t87の期間(変換期間T8)において、AD変換部ADCは、この画素電圧VP8に基づいてAD変換を行う。この動作は、変換期間T1における動作と同様である。AD変換部ADCは、画素電圧VP8に基づいてAD変換を行い、AD変換部ADCのラッチ38は、カウンタ37のカウント値CNTを、デジタルコードCODE8として出力する(図12B(J))。このデジタルコードCODE8は、フローティングディフュージョンFD、トランジスタFDG,FCG、および容量素子FCが合成容量を構成するときに得られたデジタルコードCODE7に対応している。
 次に、タイミングt7において、走査部20L,20Rは、信号SFDGの電圧を高レベルから低レベルに変化させるとともに、信号SFCGの電圧を高レベルから低レベルに変化させる(図12B(D),(F))。これにより、撮像画素P1Aでは、トランジスタFDG,FCGがオフ状態になる。
 そして、タイミングt8において、走査部20L,20Rは、信号SSELの電圧を高レベルから低レベルに変化させる(図12B(B))。これにより、撮像画素P1Aでは、トランジスタSELがオフ状態になり、撮像画素P1Aが信号線SGLから電気的に切り離される。
 次に、画像処理部44における画像合成処理について説明する。画像処理部44は、読出部30から供給された各画素に係る8つのデジタルコードCODE1~CODE8に基づいて、その画素についての4つの画素値VAL1~VAL4を生成し、この4つの画素値VAL1~VAL4を合成することにより、その画素の画素値VALを生成する。
 図14は、画像合成処理を模式的に表すものである。図14(A)~(G)に示した波形は、図11(A)~(G)に示した波形と同様である。読出部30は、図11,12A,12Bを用いて説明したように、タイミングt11~t21の期間、タイミングt21~t31の期間、タイミングt31~t41の期間、タイミングt41~t51の期間、タイミングt51~t61の期間、タイミングt61~t71の期間、タイミングt71~t81の期間、およびタイミングt81~t7の期間における動作に基づいて、デジタルコードCODE1~CODE8をそれぞれ生成する。
 画像処理部44は、デジタルコードCODE2およびデジタルコードCODE3に基づいて、画素値VAL1を生成する。具体的には、画像処理部44は、デジタルコードCODE3からデジタルコードCODE2を減算(CODE3-CODE2)することにより、画素値VAL1を算出する。すなわち、撮像装置1は、いわゆる相関2重サンプリング(CDS;Correlated double sampling)の原理を利用し、P相(Pre-Charge相)データに対応するデジタルコードCODE2、およびD相(Data相)データに対応するデジタルコードCODE3を用いて、画素値VAL1を算出する。撮像装置1では、このような相関2重サンプリングを行うようにしたので、画素値VAL1に含まれるノイズ成分を取り除くことができ、その結果、撮像画像の画質を高めることができる。
 同様に、画像処理部44は、デジタルコードCODE1およびデジタルコードCODE4に基づいて、画素値VAL2を生成する。具体的には、画像処理部44は、デジタルコードCODE4からデジタルコードCODE1を減算(CODE4-CODE1)することにより、画素値VAL2を算出する。すなわち、撮像装置1は、相関2重サンプリングの原理を利用し、P相データに対応するデジタルコードCODE1、およびD相データに対応するデジタルコードCODE4を用いて、画素値VAL2を算出する。
 同様に、画像処理部44は、デジタルコードCODE5およびデジタルコードCODE6に基づいて、画素値VAL3を生成する。具体的には、画像処理部44は、デジタルコードCODE6からデジタルコードCODE5を減算(CODE6-CODE5)することにより、画素値VAL3を算出する。すなわち、撮像装置1は、相関2重サンプリングの原理を利用し、P相データに対応するデジタルコードCODE5、およびD相データに対応するデジタルコードCODE6を用いて、画素値VAL3を算出する。
 そして、画像処理部44は、デジタルコードCODE7およびデジタルコードCODE8に基づいて、画素値VAL4を生成する。具体的には、画像処理部44はデジタルコードCODE7からデジタルコードCODE8を減算(CODE7-CODE8)することにより、画素値VAL4を算出する。すなわち、撮像装置1は、いわゆる2重データサンプリング(DDS;Double Data Sampling)の原理を利用し、フローティングディフュージョンFDおよび容量素子FCをリセットする前のデジタルコードCODE7、およびフローティングディフュージョンFDおよび容量素子FCをリセットした後のデジタルコードCODE8を用いて、画素値VAL4を算出する。
 そして、画像処理部44は、4つの画素値VAL1~VAL4を合成することにより、その画素の画素値VALを生成する。画像処理部44は、画素アレイ10における全ての画素について、この画素値VALを生成する。そして、画像処理部44は、撮像画素P1に係る画素値VALを、画像信号DATAとして出力する。
(診断処理について)
 次に、撮像装置1における診断処理について詳細に説明する。
 図15は、撮像装置1における診断処理の全体動作例を模式的に表すものである。この診断処理は、撮像画素領域R1の撮像画素P1を用いた通常の撮像動作と並行して行われる。読出部30、画像処理部44、および診断処理部45は、診断部49を構成する。
 まず、コントローラ40のアドレス生成部41は、画素アレイ10における駆動対象となる画素ラインLを決定し、その画素ラインLに対応するアドレスを示すアドレス信号ADRを生成する。そして、アドレス生成部41は、このアドレス信号ADRを走査部20L,20Rに供給する。
 2つの走査部20L,20Rは、コントローラ40からの指示に基づいて、アドレス信号ADRが示すアドレスに対応する画素ラインLに属する撮像画素P1およびダミー画素P2,P3を駆動する。
 画素アレイ10の、ダミー画素領域R21における11個のダミー画素P2、ダミー画素領域R22における11個のダミー画素P2、ダミー画素領域R31における2個のダミー画素P3、およびダミー画素領域R32における2個のダミー画素P3は、8つの変換期間T1~T8において、8つの画素電圧VP1~VP8を順次、信号SIGとして出力する。読出部30のAD変換部ADCは、これらの8つの画素電圧VP1~VP8に基づいてそれぞれAD変換を行い、8つのデジタルコードCODE(デジタルコードCODE1~CODE8)をそれぞれ出力する。コントローラ40の画像処理部44は、画像信号DATA0に含まれる各画素の8つのデジタルコードCODE1~CODE8に基づいて4つの画素値VAL1~VAL4を生成する。そして、画像処理部44は、ダミー画素P2,P3に係る画素値VAL1~VAL4を、画像信号DATA1として診断処理部45に供給する。
 ダミー画素P2,P3のそれぞれは、ダミー画素PA(図4A)またはダミー画素PB(図4B)である。ダミー画素PAでは、図4Aに示したように、トランジスタTGLのドレインおよびソースが互いに接続されるとともに、トランジスタTGSのドレインおよびソースが互いに接続される。よって、読出駆動D2において、例えば、図12Aに示した、ダミー画素PAが出力する画素電圧VP2および画素電圧VP3は殆ど同じである。すなわち、タイミングt31~t32の期間において、トランジスタTGLをオン状態にしているが、このトランジスタTGLのドレインおよびソースは互いに接続されているので、ダミー画素PAは、画素電圧VPを維持する。同様に、図12Aに示した画素電圧VP1と画素電圧VP4とは殆ど同じであり、図12Bに示した画素電圧VP5,VP6は殆ど同じである。すなわち、ダミー画素PAは、受光量が0(ゼロ)である撮像画素P1と同様の動作を行う。よって、読出部30のAD変換部ADCおよび画像処理部44は、ダミー画素PAから供給された8つの画素電圧VP1~VP8に基づいて、小さい値を有する画素値VAL1~VAL4を生成する。
 また、ダミー画素PBでは、図4Bに示したように、トランジスタTGLのソースが電圧供給線VLに接続されるとともに、トランジスタTGSのソースが電圧供給線VLに接続される。これにより、読出駆動D2において、トランジスタTGLがオン状態になると、フローティングディフュージョンFDの電圧は電圧VRに設定され、トランジスタTGSがオン状態になると、フローティングディフュージョンFDの電圧は電圧VRに設定される。すなわち、ダミー画素PBは、受光量が多い撮像画素P1と同様の動作を行う。よって、読出部30のAD変換部ADCおよび画像処理部44は、ダミー画素PAから供給された8つの画素電圧VP1~VP8に基づいて、大きい値を有する画素値VAL1~VAL4を生成する。
 コントローラ40の診断処理部45は、画像処理部44から供給されたダミー画素P3に係る画素値VAL1~VAL4に基づいて左端識別情報INFLおよび右端識別情報INFRを求める。また、診断処理部45は、画像処理部44から供給されたダミー画素P2に係る画素値VAL1~VAL4に基づいてライン識別情報INFを求め、アドレス信号ADRが示すアドレスと、このライン識別情報INFとを比較することにより、撮像装置1が所望の動作を行っているかどうかを診断する。
 具体的には、診断処理部45は、ダミー画素領域R21における11個のダミー画素P2に係る画素値VAL1~VAL4のそれぞれに対してしきい値THを用いて2値化処理を行う。ダミー画素PAに係る画素値VAL1~VAL4は、小さい値であるので、この2値化処理により“0”になり、一方、ダミー画素PBに係る画素値VAL1~VAL4は、大きい値であるので、この2値化処理により“1”になる。これにより、診断処理部45は、11ビットの2進数を得る。この11ビットの2進数は、図5に示したライン識別情報INFである。そして、診断処理部45は、アドレス信号ADRが示すアドレスと、このライン識別情報INFとを比較することにより、撮像装置1が所望の動作を行っているかどうかを診断する。すなわち、アドレス信号ADRが示すアドレスは、例えば、アドレス信号ADRが0番目の画素ラインL[0]を示す場合には“00000000000”であり、アドレス信号ADRが1番目の画素ラインL[1]を示す場合には“00000000001”であり、アドレス信号ADRが2番目の画素ラインL[2]を示す場合には“00000000010”である。よって、診断処理部45は、アドレス信号ADRが示すアドレスと、このライン識別情報INFとを比較することにより、撮像装置1が所望の動作を行っているかどうかを診断することができる。
 ダミー画素領域R22についても同様である。すなわち、診断処理部45は、ダミー画素領域R22における11個のダミー画素P2に係る画素値VAL1~VAL4のそれぞれに対して2値化処理を行うことによりライン識別情報INFを求める。そして、診断処理部45は、アドレス信号ADRが示すアドレスと、このライン識別情報INFとを比較することにより、撮像装置1が所望の動作を行っているかどうかを診断する。
 例えば、診断処理部45は、ダミー画素領域R21に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致するとともに、ダミー画素領域R22に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致する場合には、撮像装置1が所望の動作を行っていると判断する。
 また、例えば、診断処理部45は、ダミー画素領域R21に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致しない場合や、ダミー画素領域R22に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致しない場合には、撮像装置1に不具合があると判断する。
 ダミー画素領域R21に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致しない場合の原因は、例えば、アドレス生成部41と走査部20Lとの間の結線の不具合、走査部20Lの不具合、走査部20Lとダミー画素領域R21におけるダミー画素P2との間の結線の不具合、ダミー画素領域R21におけるダミー画素P2の不具合、ダミー画素領域R21におけるダミー画素P2とAD変換部ADCとの間の結線の不具合、AD変換部ADCの不具合、などがあり得る。
 また、ダミー画素領域R22に係る画素値VAL1~VAL4から取得したライン識別情報INFと、アドレス信号ADRが示すアドレスとが互いに一致しない場合の原因は、例えば、アドレス生成部41と走査部20Rとの間の結線の不具合、走査部20Rの不具合、走査部20Rとダミー画素領域R22におけるダミー画素P2との間の結線の不具合、ダミー画素領域R22におけるダミー画素P2の不具合、ダミー画素領域R22におけるダミー画素P2とAD変換部ADCとの間の結線の不具合、AD変換部ADCの不具合、などがあり得る。
 また、診断処理部45は、ダミー画素領域R31における2個のダミー画素P3に係る画素値VAL1~VAL4のそれぞれに対して2値化処理を行うことにより左端識別情報INFLを求める。同様に、診断処理部45は、ダミー画素領域R32における2個のダミー画素P3に係る画素値VAL1~VAL4のそれぞれに対して2値化処理を行うことにより右端識別情報INFRを求める。
 診断処理部45は、このようにして診断処理を行う。そして、診断処理部45は、その診断処理の結果を、診断結果RESとして出力する。
 以上のように、撮像装置1では、ダミー画素領域R21,R22,R31,R32を設け、このダミー画素領域R21,R22,R31,R32に、ダミー画素PA(図4A)またはダミー画素PB(図4B)をダミー画素P2,P3として配置するようにした。これにより、例えば、撮像装置1では、ダミー画素P2の配置を用いて、各画素ラインLについての情報を、いわゆるマスクROM(Read Only Memory)のように固定設定することができる。この例では、ダミー画素P2の配置を用いて、画素ラインLを識別するためのライン識別情報INFを設定するようにしたので、自己診断を行うことにより、アドレス制御の故障検出、および画素制御の故障検出を行うことができる。
 特に、撮像装置1では、図5,6に示したように、11個のダミー画素P2の配列を、2進数で表された、画素ラインLの番目の数を示す配列にしたので、ライン識別情報INFと、アドレス信号ADRが示すアドレスとを比較する回路の構成をシンプルにすることができる。
 また、撮像装置1では、図4Aに示したように、ダミー画素PAにおいて、トランジスタTGLのドレインおよびソースを互いに接続するとともに、トランジスタTGSのドレインおよびソースを互いに接続した。これにより、撮像装置1では、このダミー画素PAの画素値VAL1~VAL4を“0”に近づけることができるので、例えば、参照信号REFにおけるランプ波形の傾きを変更することにより撮像感度を高くした場合において、誤診断を防ぐことができる。
 すなわち、例えば、図16に示したように、ダミー画素PAにおいて、トランジスタTGLのソースを電源線PLに接続するとともに、トランジスタTGSのソースを電源線PLに接続した場合には、撮像感度を高くした場合に、画素値VAL1~VAL4のそれぞれに対して2値化処理を行うことにより得られた値が“1”になってしまうおそれがある。すなわち、例えば、読出駆動D2において、トランジスタRST,FDGをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧と、トランジスタTGLをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧とは、互いに等しいことが望ましい。しかしながら、トランジスタの寄生容量などの影響により、これらの電圧が互いにずれるおそれがある。特に、トランジスタTGLをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧が、トランジスタRST,FDGをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧よりも低い場合には、画素値VAL1,VAL2が“0”よりも大きくなる。そして、これらの電圧のずれが大きい場合には、画素値VAL1,VAL2の“0”からのずれが大きくなる。この場合には、例えば撮像装置の撮像感度を高くすると、2値化処理の結果が“1”になってしまうおそれがある。画素値VAL3,VAL4についても同様である。その結果、撮像装置では、例えば、故障していないにもかかわらず故障していると誤診断してしまうおそれがある。
 一方、撮像装置1では、ダミー画素PAにおいて、トランジスタTGLのドレインおよびソースを互いに接続するとともに、トランジスタTGSのドレインおよびソースを互いに接続した。よって、ダミー画素PAでは、タイミングt31~t32の期間(図12A)において、トランジスタTGLをオン状態にしても、フローティングディフュージョンFDの電圧は維持される。トランジスタTGSについても同様である。よって、撮像装置1では、画素値VAL1~VAL4のそれぞれの“0”からのずれを小さくすることができるので、例えば、撮像装置1の撮像感度が高い場合でも、2値化処理の結果をより安定的に“0”にすることができる。その結果、撮像装置1では、誤診断を防ぐことができる。
 また、撮像装置1では、2つのダミー画素領域R21,R22を、撮像画素領域R1の左右にそれぞれ設け、撮像画素領域R1の撮像画素P1を用いた通常の撮像動作と並行して、診断処理を行うようにしたので、例えば、故障をタイムリーに検出することができる。すなわち、例えば、ブランキング期間T20において診断処理を行う場合には、ブランキング期間T20が短いので、1つのブランキング期間T20で全ての画素ラインLについての診断処理を行うことが難しい。よって、この場合には、複数のブランキング期間T20を用いて全ての画素ラインLについての診断処理を行うこととなるが、この場合には、故障が生じたときに、その故障をタイムリーに検出できないおそれがある。一方、撮像装置1では、通常の撮像動作を行いながら、全ての画素ラインLについての診断処理を行うことができるので、1フレーム期間内に全ての画素ラインLについての診断処理を行うことができる。その結果、撮像装置1では、故障をタイムリーに検出することができる。
[効果]
 以上のように本実施の形態では、ダミー画素領域を設け、このダミー画素領域に、ダミー画素PAまたはダミー画素PBを配置するようにしたので、自己診断を行うことにより、撮像装置の不具合を検出することができる。
 本実施の形態では、ダミー画素PAにおいて、トランジスタTGLのドレインおよびソースを互いに接続するとともに、トランジスタTGSのドレインおよびソースを互いに接続したので、誤診断を防ぐことができる。
 本実施の形態では、2つのダミー画素領域を、通常画素領域の左右にそれぞれ設け、撮像画素領域の画素を用いた通常の撮像動作と並行して診断処理を行うようにしたので、例えば、故障をタイムリーに検出することができる。
[変形例1-1]
 上記実施の形態では、2つの走査部20L,20Rを設けたが、これに限定されるものではなく、これに代えて、図17に示す撮像装置1Bのように、1つの走査部を設けてもよい。この撮像装置1Bは、1つの走査部20Lと、画素アレイ10Bと、読出部30Bと、コントローラ40Bとを備えている。すなわち、撮像装置1Bは、上記実施の形態に係る撮像装置1(図1)において、走査部20Rを省くとともに、画素アレイ10、読出部30、およびコントローラ40を、画素アレイ10B、読出部30B、およびコントローラ40Bにそれぞれ置き換えたものである。
 画素アレイ10Bは、上記実施の形態に係る画素アレイ10(図1)において、ダミー画素領域R21を省いたものである。読出部30Bは、画素アレイ10Bから信号線SGLを介して供給された信号SIGに基づいてAD変換を行うことにより、画像信号DATA0を生成するように構成される。コントローラ40Bは、走査部20Lおよび読出部30Bに制御信号を供給することにより、撮像装置1Bの動作を制御するように構成される。コントローラ40Bは、カラム走査部43Bと、画像処理部44Bと、診断処理部45Bとを有している。カラム走査部43Bは、読出部30Bにおける、データ転送動作の対象となるAD変換部ADCを決定し、その決定結果に基づいて、制御信号SSWを生成するように構成される。画像処理部44Bは、画像信号DATA0が示す画像に対して、画像合成処理を含む所定の画像処理を行うように構成される。診断処理部45Bは、ダミー画素領域R22における11個のダミー画素P2に係る画素値VAL1~VAL4のそれぞれに対して、2値化処理を行うことによりライン識別情報INFを求め、アドレス信号ADRが示すアドレスと、このライン識別情報INFとを比較することにより、撮像装置1Bが所望の動作を行っているかどうかを診断するように構成される。
 撮像装置1Bでは、走査部20Lは、コントローラ40Bからの指示に基づいて、アドレス信号ADRが示すアドレスに対応する画素ラインLに属する撮像画素P1およびダミー画素P2,P3を駆動する。そして、画素アレイ10Bにおける、ダミー画素領域R22における11個のダミー画素P2は、それぞれ信号SIGを生成し、生成した信号SIGを読出部30Bにそれぞれ供給する。走査部20Lは、画素アレイ10Bの左に配置され、ダミー画素領域R22は、画素アレイ10Bにおける右端近傍に設けられている。すなわち、撮像装置1Bでは、画素アレイ10Bにおいて、ダミー画素領域R22を、走査部20Lから離れた場所に設けたので、診断処理を行うことにより、走査部20Lのドライバ部23Lの駆動能力を診断することができる。また、撮像装置1Bでは、このように、ダミー画素領域R22を、走査部20Lから離れた場所に設けることにより、ダミー画素領域R31、撮像画素領域R1、およびダミー画素領域R22における制御線TGLL,FDGL,RSTL,FCGL,TGSL,SELLおよび電源線PLの断線をも診断することができる。
[変形例1-2]
 上記実施の形態では、7つのトランジスタを用いて画素回路CKTを構成したが、これに限定されるものではない。例えば、トランジスタFDGを省いてもよいし、トランジスタFCGを省いてもよい。以下に、本変形例に係る撮像装置1Cについて詳細に説明する。撮像装置1Cは、画素アレイ10Cと、走査部20LC,20RCを備えている。
 画素アレイ10Cは、撮像画素P1およびダミー画素P2,P3を有している。撮像画素P1は撮像画素領域R1に配置され、複数のダミー画素P2はダミー画素領域R21,R22に配置され、複数のダミー画素P3はダミー画素領域R31,R32に配置される。ダミー画素領域R21,R22には、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P2として配置され、ダミー画素領域R31,R32には、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P3として配置される。
 図18は、本変形例に係る撮像画素P1の一構成例を表すものである。撮像画素P1は、
画素アレイ10Bは、複数の制御線TGLLと、複数の制御線RSTLと複数の制御線TGSLと、複数の制御線SELLと、複数の電源線PLと、複数の信号線SGLとを有している。撮像画素P1は、フォトダイオードPD1,PD2と、画素回路CKTとを有している。画素回路CKTは、トランジスタTGLと、トランジスタTGSと、トランジスタRSTと、フローティングディフュージョンFDと、トランジスタAMP,SELとを有している。トランジスタTGSのドレインはフローティングディフュージョンFDに接続される。トランジスタRSTのソースはフローティングディフュージョンFDに接続される。本変形例に係る画素回路CKTは、上記実施の形態に係る画素回路CKT(図2)から、トランジスタFCG,FDGを省いたものである。
 図19Aは、本変形例に係るダミー画素PAの一構成例を表すものであり、図19Bは、本変形例に係るダミー画素PBの一構成例を表すものである。ダミー画素PAの画素回路CKTでは、トランジスタTGLのドレインおよびソースが互いに接続されるとともに、トランジスタTGSのドレインおよびソースが互いに接続される。ダミー画素PBの画素回路CKTでは、トランジスタTGLのソースが電圧供給線VLに接続されるとともに、トランジスタTGSのソースが電圧供給線VLに接続される。
 走査部20LC,20RCは、コントローラ40からの指示に基づいて、画素ラインL単位で、画素アレイ10Bにおける撮像画素P1およびダミー画素P2,P3を順次駆動するように構成される。
[変形例1-3]
 上記実施の形態では、ダミー画素PAの画素回路CKTにおいて、トランジスタTGLのドレインおよびソースを互いに接続するとともに、トランジスタTGSのドレインおよびソースを互いに接続したが、これに限定されるものではない。以下に、いくつか例を挙げて本変形例について詳細に説明する。
 図20は、本変形例に係る撮像装置1Dの画素アレイ10Dに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGLのソースが電源線PLに接続され、トランジスタTGSのソースが電源線PLに接続され、トランジスタRSTのドレインが電圧供給線VLに接続される。ダミー画素PBは、図4Bの構成を使用することができる。
 ダミー画素PA(図20)およびダミー画素PB(図4B)は、トランジスタTGL,TGSのソースの接続、およびトランジスタRSTのドレインの接続が互いに異なっている。すなわち、トランジスタTGL,TGSのソースは、ダミー画素PAでは電源線PLに接続され、ダミー画素PBでは電圧供給線VLに接続される。また、トランジスタRSTのドレインは、ダミー画素PAでは電圧供給線VLに接続され、ダミー画素PBでは電源線PLに接続される。
 ここで、電源線PLは、本開示における「第1の電圧供給線」の一具体例に対応する。電圧供給線VLは、本開示における「第2の電圧供給線」の一具体例に対応する。撮像画素P1の画素回路CKTは、本開示における「撮像画素回路」の一具体例に対応する。ダミー画素PAの画素回路CKTは、本開示における「第1のダミー画素回路」の一具体例に対応する。ダミー画素PBの画素回路CKTは、本開示における「第2のダミー画素回路」の一具体例に対応する。
 撮像画素P1における通常の動作では、例えば、トランジスタTGLをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧は、トランジスタRST,FDGをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧よりも低い。よって、画素値VAL1~VAL4は、その撮像画素P1における受光量に応じた値になる。
 一方、このダミー画素PAでは、読出駆動D2において、トランジスタTGLのソースに印加される電源電圧VDDは、トランジスタRSTのドレインに印加される電圧VRよりも高い。よって、トランジスタTGLをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧は、トランジスタRSTをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧よりも高い。その結果、画素値VAL1,VAL2は“0”にクランプされる。画素値VAL3,VAL4についても同様である。よって、本変形例に係る撮像装置1Dでは、例えば、撮像装置1Dの撮像感度が高い場合でも、画素値VAL1~VAL4の2値化処理の結果をより安定的に“0”にすることができる。
 図21は、本変形例に係る他の撮像装置1Eの画素アレイ10Eに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGLのソースが電源線PLに接続され、ドレインは開放(オープン)される。また、トランジスタTGSのソースが電源線PLに接続され、ドレインは開放される。すなわち、上記実施の形態では、トランジスタTGLのドレインをフローティングディフュージョンFDに接続するとともに、トランジスタTGSのドレインを容量素子FCに接続したが、本変形例では、トランジスタTGL,TGSのドレインを他の素子に接続していない。ダミー画素PBは、図4Bの構成を使用することができる。
 ここで、電圧供給線VLは、本開示における「電圧供給線」の一具体例に対応する。撮像画素P1の画素回路CKTは、本開示における「撮像画素回路」の一具体例に対応する。ダミー画素PAの画素回路CKTは、本開示における「第1のダミー画素回路」の一具体例に対応する。ダミー画素PBの画素回路CKTは、本開示における「第2のダミー画素回路」の一具体例に対応する。
 この場合でも、ダミー画素PAでは、タイミングt31~t32の期間(図12A)において、トランジスタTGLをオン状態にしても、フローティングディフュージョンFDの電圧は維持される。トランジスタTGSについても同様である。よって、撮像装置1Eでは、画素値VAL1~VAL4の“0”からのずれを小さくすることができるので、画素値VAL1~VAL4の2値化処理の結果をより安定的に“0”にすることができる。
 図21の例では、トランジスタTGL,TGSのソースを電源線PLに接続したが、これに限定されるものではなく、例えば、トランジスタTGL,TGSのソースを電圧供給線VLに接続してもよい。
 図22は、本変形例に係る他の撮像装置1Fの画素アレイ10Fに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGLのソースが開放され、ドレインがフローティングディフュージョンFDに接続される。また、トランジスタTGSのソースが開放され、ドレインが容量素子FCに接続される。すなわち、トランジスタTGL,TGSのソースを他の素子に接続していない。ダミー画素PBは、図4Bの構成を使用することができる。
 ここで、電圧供給線VLは、本開示における「電圧供給線」の一具体例に対応する。撮像画素P1の画素回路CKTは、本開示における「撮像画素回路」の一具体例に対応する。ダミー画素PAの画素回路CKTは、本開示における「第1のダミー画素回路」の一具体例に対応する。ダミー画素PBの画素回路CKTは、本開示における「第2のダミー画素回路」の一具体例に対応する。
 この場合でも、ダミー画素PAでは、タイミングt31~t32の期間(図12A)において、トランジスタTGLをオン状態にしても、フローティングディフュージョンFDの電圧は維持される。トランジスタTGSについても同様である。よって、撮像装置1Fでは、画素値VAL1~VAL4の“0”からのずれを小さくすることができるので、画素値VAL1~VAL4の2値化処理の結果をより安定的に“0”にすることができる。
[その他の変形例]
 また、これらの変形例のうちの2以上を組み合わせてもよい。
<2.第2の実施の形態>
 次に、第2の実施の形態に係る撮像装置2について説明する。本実施の形態は、1つのフォトダイオードPDを用いて撮像画素を構成している。なお、上記第1の実施の形態に係る撮像装置1と実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
 図23は、撮像装置2の一構成例を表すものである。撮像装置2は、画素アレイ50と、2つの走査部60L,60Rと、読出部30と、コントローラ70とを備えている。
 画素アレイ50は、複数の撮像画素P1と、複数のダミー画素P2,P3とを有している。複数の撮像画素P1は撮像画素領域R1に配置され、複数のダミー画素P2はダミー画素領域R21,R22に配置され、複数のダミー画素P3はダミー画素領域R31,R32に配置される。
 図24は、撮像画素P1の一構成例を表すものである。画素アレイ50は、複数の制御線TGLLと、複数の制御線RSTLと、複数の制御線SELLと、複数の電源線PLと、複数の信号線SGLとを有している。
 制御線TGLLは、水平方向(図23における横方向)に延伸するように構成され、制御線TGLLの一端は走査部60Lに接続され、他端は走査部60Rに接続されている。制御線TGLLには、走査部60L,60Rにより信号STGが印加される。制御線RSTLは、水平方向に延伸するように構成され、制御線RSTLの一端は走査部60Lに接続され、他端は走査部60Rに接続されている。制御線RSTLには、走査部60L,60Rにより信号SRSTが印加される。制御線SELLは、水平方向に延伸するように構成され、制御線SELLの一端は走査部60Lに接続され、他端は走査部60Rに接続されている。制御線SELLには、走査部60L,60Rにより信号SSELが印加される。電源線PLは、コントローラ70の電圧生成部42に接続されている。この電源線PLには、電圧生成部42により電源電圧VDDが印加される。信号線SGLは、垂直方向(図23における縦方向)に延伸するように構成され、一端が読出部30に接続される。
 撮像画素P1は、フォトダイオードPDと、画素回路CKTとを有している。画素回路CKTは、トランジスタTG,RSTと、フローティングディフュージョンFDと、トランジスタAMP,SELとを有している。フォトダイオードPDのアノードは接地され、カソードはトランジスタTGのソースに接続される。トランジスタTGのゲートは制御線TGLLに接続され、ソースはフォトダイオードPDのカソードに接続され、ドレインはフローティングディフュージョンFDに接続される。トランジスタRSTのゲートは制御線RSTLに接続され、ドレインは電源線PLに接続され、ソースはフローティングディフュージョンFDに接続される。トランジスタAMPのゲートはフローティングディフュージョンFDに接続され、ドレインは電源線PLに接続され、ソースはトランジスタSELのドレインに接続される。トランジスタSELのゲートは制御線SELLに接続され、ドレインはトランジスタAMPのソースに接続され、ソースは信号線SGLに接続される。
 この構成により、撮像画素P1では、制御線SELLに印加された信号SSELに基づいてトランジスタSELがオン状態になることにより、撮像画素P1が信号線SGLと電気的に接続される。そして、撮像画素P1は、フローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして、信号線SGLに出力する。具体的には、撮像画素P1は、後述するように、いわゆる水平期間H内の2つの変換期間(P相期間TPおよびD相期間TD)において、2つの画素電圧VP(VP11,VP12)を順次出力するようになっている。
 図25は、フォトダイオードPDの配列の一例を表すものである。図25において、“R”は赤色のカラーフィルタを示し、“G”は緑色のカラーフィルタを示し、“B”は青色のカラーフィルタを示す。フォトダイオードPDはマトリクス状に配置されている。
 図26A,26Bは、ダミー画素領域R21,R22におけるダミー画素P2およびダミー画素領域R31,R32におけるダミー画素P3の一構成例を表すものである。ダミー画素領域R21,R22では、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P2として配置され、ダミー画素領域R31,R32では、ダミー画素PAまたはダミー画素PBが選択的にダミー画素P3として配置される。図26Aはダミー画素PAの一例を示し、図26Bはダミー画素PBの一例を示す。画素アレイ50は、ダミー画素領域R21,R22,R31,R32において、複数の制御線TGLLと、複数の制御線RSTLと、複数の制御線SELLと、複数の電源線PLと、複数の電圧供給線VLと、複数の信号線SGLとを有している。電圧供給線VLは、コントローラ70の電圧生成部42に接続されている。複数の電圧供給線VLには、電圧生成部42により、単一の電圧信号SVRが印加される。この電圧信号SVRは、例えば、読出駆動D2におけるトランジスタTGがオン状態になる期間において電圧VRに設定され、蓄積開始駆動D1におけるトランジスタTGがオン状態になる期間において電源電圧VDDに設定される
 ダミー画素PAの画素回路CKTでは、トランジスタTGLのドレインおよびソースが互いに接続される。すなわち、ダミー画素PAでは、トランジスタTGLのドレインおよびソースは、トランジスタTGLを介さずに互いに接続される。この構成により、ダミー画素PAでは、読出駆動D2において、フローティングディフュージョンFDの電圧が電源電圧VDDに設定される。そして、ダミー画素PAは、このフローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして信号線SGLに出力するようになっている。
 また、ダミー画素PBの画素回路CKTでは、トランジスタTGLのソースが電圧供給線VLに接続されるとともに、トランジスタTGSのソースが電圧供給線VLに接続される。この構成により、ダミー画素PBでは、後述するように、読出駆動D2において、トランジスタTGをオン状態にすることによりフローティングディフュージョンFDの電圧が電圧VRに設定される。そして、ダミー画素PBは、このフローティングディフュージョンFDにおける電圧に応じた画素電圧VPを、信号SIGとして信号線SGLに出力するようになっている。
 ダミー画素領域R31,R21におけるダミー画素P3,P2の配列は、第1の実施の形態の場合(図5)と同様であり、ダミー画素領域R22,R32におけるダミー画素P2,P3の配列は、第1の実施の形態の場合(図6)と同様である。
 2つの走査部60L,60R(図23)は、コントローラ70からの指示に基づいて、画素ラインL単位で、画素アレイ50における撮像画素P1およびダミー画素P2,P3を順次駆動するように構成される。走査部60Lは、アドレスデコーダ21Lと、ロジック部62Lと、ドライバ部63Lとを有している。走査部60Rは、同様に、アドレスデコーダ21Rと、ロジック部62Rと、ドライバ部63Rとを有している。
 アドレスデコーダ21Lは、コントローラ70から供給されたアドレス信号ADRに基づいて、画素アレイ50における、アドレス信号ADRが示すアドレスに応じた画素ラインLを選択するように構成される。ロジック部62Lは、アドレスデコーダ21Lからの指示に基づいて、各画素ラインLに対応する信号STG1,SRST1,SSEL1をそれぞれ生成するように構成される。ドライバ部63Lは、各画素ラインLに対応する信号STG1,SRST1,SSEL1に基づいて、各画素ラインLに対応する信号STG,SRST,SSELをそれぞれ生成するように構成される。アドレスデコーダ21R、ロジック部62R、およびドライバ部63Rについても同様である。
 コントローラ70(図1)は、走査部60L,60Rおよび読出部30に制御信号を供給することにより、撮像装置2の動作を制御するように構成される。コントローラ70は、画像処理部74と、診断処理部75とを有している。
 画像処理部74は、画像信号DATA0が示す画像に対して、所定の画像処理を行うように構成される。
 診断処理部75は、アドレス信号ADRおよび画像信号DATA0に基づいて、診断処理を行うように構成される。具体的には、診断処理部75は、画像信号DATA0に含まれるダミー画素P3に係る画素値VALに基づいて左端識別情報INFLおよび右端識別情報INFRを求めるとともに、画像信号DATA0に含まれるダミー画素P2に係る画素値VALに基づいてライン識別情報INFを求める。そして、診断処理部75は、アドレス信号ADRが示すアドレスとこのライン識別情報INFとを比較することにより、撮像装置2が所望の動作を行っているかどうかを診断する。そして、診断処理部75は、その診断処理の結果(診断結果RES)を出力するようになっている。
 ここで、フォトダイオードPDは、本開示における「第1の受光素子」の一具体例に対応する。撮像画素P1の画素回路CKTは、本開示における「撮像画素回路」の一具体例に対応する。ダミー画素PAの画素回路CKTは、本開示における「第1のダミー画素回路」の一具体例に対応する。ダミー画素PBの画素回路CKTは、本開示における「第2のダミー画素回路」の一具体例に対応する。トランジスタTGは、本開示における「第1のトランジスタ」の一具体例に対応する。トランジスタRSTは、本開示における「第2のトランジスタ」の一具体例に対応する。アドレス生成部41は、本開示における「アドレス生成部」の一具体例に対応する。走査部60L,60Rは、本開示における「駆動制御部」の一具体例に対応する読出部30および診断処理部75は、本開示における「診断部」の一具体例に対応する。
 撮像装置2は、第1の実施の形態の場合(図10)と同様に、タイミングt0~t1の期間において、画素アレイ50における複数の撮像画素P1および複数のダミー画素P2,P3に対して、垂直方向において上から順に蓄積開始駆動D1を行う。具体的には、走査部60L,60Rは、例えば、垂直方向において上から順に、画素ラインL単位で、水平期間H内の所定の期間においてトランジスタTG,RSTをオン状態に設定した後に、これらのトランジスタをオフ状態にする。これにより、複数の撮像画素P1のそれぞれでは、フローティングディフュージョンFDおよびフォトダイオードPDにおける電圧が電源電圧VDDに設定された後に、電荷の蓄積が開始され、読出駆動D2が行われるまでの蓄積期間T10において、電荷が蓄積される。また、複数のダミー画素P2,P3のそれぞれでは、フローティングディフュージョンFDにおける電圧が電源電圧VDDに設定される。すなわち、電圧供給線VLに印加される電圧信号SVRの電圧VRは、蓄積開始駆動D1におけるトランジスタTGがオン状態になる期間において電源電圧VDDに設定されるので、フローティングディフュージョンFDにおける電圧が電源電圧VDDに設定される。
 そして、撮像装置2は、タイミングt10~t11の期間において、複数の撮像画素P1および複数のダミー画素P2,P3に対して、垂直方向において上から順に読出駆動D2を行う。これにより、複数の撮像画素P1および複数のダミー画素P2,P3のそれぞれは、2つの画素電圧VP(VP11,VP12)を順次出力する。読出部30は、これらの2つの画素電圧VP11,VP12に基づいてそれぞれAD変換を行い、デジタルコードCODE(画素値VAL)を出力する。
 図27は、着目した撮像画素P1Aにおける読出駆動D2の一動作例を表すものであり、(A)は水平同期信号XHSの波形を示し、(B)は信号SRSTの波形を示し、(C)は信号STGの波形を示し、(D)は信号SSELの波形を示し、(E)は参照信号REFの波形を示し、(F)は信号SIGの波形を示し、(G)はAD変換部ADCのコンパレータ36から出力される信号CMPの波形を示し、(H)はクロック信号CLKの波形を示し、(I)はAD変換部ADCのカウンタ37におけるカウント値CNTを示す。ここで、図27(E)の参照信号REFは、コンパレータ36の正入力端子における波形を示し、図27(F)の信号SIGは、コンパレータ36の負入力端子における波形を示す。
 撮像装置2では、ある水平期間(H)において、まず、走査部60L,60Rが、撮像画素P1Aに対してリセット動作を行い、AD変換部ADCが、その後のP相期間TPにおいて、撮像画素P1Aが出力した画素電圧VP11に基づいてAD変換を行う。そして、走査部60L,60Rが、撮像画素P1Aに対して電荷転送動作を行い、AD変換部ADCが、D相期間TDにおいて、撮像画素P1Aが出力した画素電圧VP12に基づいてAD変換を行う。以下にこの動作について詳細に説明する。
 まず、タイミングt91において、水平期間Hが開始すると、走査部60L,60Rは、タイミングt92において、信号SSELの電圧を低レベルから高レベルに変化させる(図27(D))。これにより、撮像画素P1Aでは、トランジスタSELがオン状態になり、撮像画素P1Aが信号線SGLと電気的に接続される。
 次に、タイミングt93において、走査部60L,60Rは、信号SRSTの電圧を低レベルから高レベルに変化させる(図27(B))。これにより、撮像画素P1Aでは、トランジスタRSTがオン状態になり、フローティングディフュージョンFDの電圧が電源電圧VDDに設定される(リセット動作)。
 次に、タイミングt94において、走査部60L,60Rは、信号SRSTの電圧を高レベルから低レベルに変化させる(図27(B))。これにより、撮像画素P1Aでは、トランジスタRSTがオフ状態になる。そして、コンパレータ36は、タイミングt94~t95の期間において、容量素子33,34の電圧を設定するゼロ調整を行う。
 次に、タイミングt95において、コンパレータ36は、ゼロ調整を終了する。そして、このタイミングt95において、参照信号生成部32は、参照信号REFの電圧を電圧V1に変化させる(図27(E))。
 これにより、撮像画素P1Aでは、トランジスタSELはオン状態になり、トランジスタTG,RSTはそれぞれオフ状態になる。フローティングディフュージョンFDは、タイミングt93~t94の期間においてフローティングディフュージョンFDがリセットされたときの電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP11)を出力する。
 次に、タイミングt96~t98の期間(P相期間TP)において、読出部30は、この画素電圧VP11に基づいてAD変換を行う。具体的には、まず、タイミングt96において、読出制御部31は、クロック信号CLKの生成を開始し(図27(H))、これと同時に、参照信号生成部32は、参照信号REFの電圧を、電圧V1から所定の変化度合いで低下させ始める(図27(E))。これに応じて、AD変換部ADCのカウンタ37は、カウント動作を開始し、カウント値CNTを順次変化させる(図27(I))。
 そして、タイミングt97において、参照信号REFの電圧が画素電圧VP11を下回る(図27(E),(F))。これに応じて、AD変換部ADCのコンパレータ36は、信号CMPの電圧を高レベルから低レベルに変化させる(図27(G))。その結果、カウンタ37は、カウント動作を停止する(図27(I))。
 次に、タイミングt98において、読出制御部31は、P相期間TPの終了に伴い、クロック信号CLKの生成を停止する(図27(H))。これと同時に、参照信号生成部32は、参照信号REFの電圧の変化を停止させ、その後のタイミングt99において、参照信号REFの電圧を電圧V1に変化させる(図27(E))。これに伴い、参照信号REFの電圧が画素電圧VP11を上回るので(図27(E),(F))、AD変換部ADCのコンパレータ36は、信号CMPの電圧を低レベルから高レベルに変化させる(図27(G))。
 次に、タイミングt100において、AD変換部ADCのカウンタ37は、制御信号CCに基づいて、カウント値CNTの極性を反転する(図27(I))。
 次に、タイミングt101において、走査部60L,60Rは、信号STGの電圧を低レベルから高レベルに変化させる(図27(C))。これにより、撮像画素P1Aでは、トランジスタTGがオン状態になり、その結果、フォトダイオードPDで発生した電荷がフローティングディフュージョンFDに転送される(電荷転送動作)。これに応じて、信号SIGの電圧は低下する(図27(F))。
 そして、タイミングt102において、走査部60L,60Rは、信号STGの電圧を高レベルから低レベルに変化させる(図27(C))。これにより、撮像画素P1Aでは、トランジスタTGがオフ状態になる。
 これにより、撮像画素P1Aでは、トランジスタSELはオン状態になり、トランジスタTG,RSTはそれぞれオフ状態になる。フローティングディフュージョンFDは、タイミングt101~t102の期間においてフォトダイオードPDから転送された電荷を保持している。撮像画素P1Aは、このときのフローティングディフュージョンFDにおける電圧に応じた画素電圧VP(画素電圧VP12)を出力する。
 次に、タイミングt103~t105の期間(D相期間TD)において、読出部30は、画素電圧VP12に基づいてAD変換を行う。具体的には、まず、タイミングt103において、読出制御部31は、クロック信号CLKの生成を開始し(図27(H))、これと同時に、参照信号生成部32は、参照信号REFの電圧を、電圧V1から所定の変化度合いで低下させ始める(図27(E))。これに応じて、AD変換部ADCのカウンタ37は、カウント動作を開始し、カウント値CNTを順次変化させる(図27(I))。
 そして、タイミングt104において、参照信号REFの電圧が画素電圧VP12を下回る(図27(E),(F))。これに応じて、AD変換部ADCのコンパレータ36は、信号CMPの電圧を高レベルから低レベルに変化させる(図27(G))。その結果、カウンタ37は、カウント動作を停止する(図27(I))。このようにして、AD変換部ADCは、画素電圧VP11,VP12の差に応じたカウント値CNTを得る。そして、AD変換部ADCのラッチ38は、このカウント値CNTを、デジタルコードCODEとして出力する。
 次に、タイミングt105において、読出制御部31は、D相期間TDの終了に伴い、クロック信号CLKの生成を停止する(図27(H))。これと同時に、参照信号生成部32は、参照信号REFの電圧の変化を停止させ、その後のタイミングt106において、参照信号REFの電圧を電圧V2に変化させる(図27(E))。これに伴い、参照信号REFの電圧が画素電圧VP12を上回るので(図27(E),(F))、AD変換部ADCのコンパレータ36は、信号CMPの電圧を低レベルから高レベルに変化させる(図27(G))。
 次に、タイミングt107において、走査部60L,60Rは、信号SSELの電圧を高レベルから低レベルに変化させる(図27(D))。これにより、撮像画素P1Aでは、トランジスタSELがオフ状態になり、撮像画素P1Aが信号線SGLから電気的に切り離される。
 そして、タイミングt108において、AD変換部ADCのカウンタ37は、制御信号CCに基づいて、カウント値CNTを“0”にリセットする(図27(I))。
 このように、撮像装置2では、P相期間TPにおいて画素電圧VP11に基づいてカウント動作を行い、カウント値CNTの極性を反転したのちに、D相期間TDにおいて画素電圧VP12に基づいてカウント動作を行うようにした。これにより、撮像装置2は、画素電圧VP11,VP12の差電圧に応じたデジタルコードCODEを取得することができる。撮像装置2では、このような相関2重サンプリングを行うようにしたので、画素電圧VP12に含まれるノイズ成分を取り除くことができ、その結果、撮像画像の画質を高めることができる。
 撮像装置2における診断処理は、第1の実施の形態の場合(図15)と同様である。
 すなわち、コントローラ70のアドレス生成部41は、画素アレイ50における駆動対象となる画素ラインLを決定し、その画素ラインLに対応するアドレスを示すアドレス信号ADRを生成する。そして、アドレス生成部41は、このアドレス信号ADRを走査部60L,60Rに供給する。
 2つの走査部60L,60Rは、コントローラ70からの指示に基づいて、アドレス信号ADRが示すアドレスに対応する画素ラインLに属する撮像画素P1およびダミー画素P2,P3を駆動する。
 画素アレイ50の、ダミー画素領域R21における11個のダミー画素P2、ダミー画素領域R22における11個のダミー画素P2、ダミー画素領域R31における2個のダミー画素P3、およびダミー画素領域R32における2個のダミー画素P3は、2つの変換期間(P相期間TPおよびD相期間TD)において、2つの画素電圧VP(VP11,VP12)を順次、信号SIGとして出力する。読出部30のAD変換部ADCは、これらの2つの画素電圧VP11,VP12に基づいてそれぞれAD変換を行い、デジタルコードCODE(画素値VAL)をそれぞれ出力する。
 そして、コントローラ70の診断処理部75は、画像信号DATA0に含まれるダミー画素P3に係る画素値VALに基づいて左端識別情報INFLおよび右端識別情報INFRを求めるとともに、画像信号DATA0に含まれるダミー画素P2に係る画素値VALに基づいてライン識別情報INFを求める。そして、診断処理部75は、アドレス信号ADRが示すアドレスとこのライン識別情報INFとを比較することにより、撮像装置2が所望の動作を行っているかどうかを診断する。そして、診断処理部75は、その診断処理の結果(診断結果RES)を出力する。
 撮像装置2では、図26Aに示したように、ダミー画素PAにおいて、トランジスタTGのドレインおよびソースを互いに接続した。これにより、撮像装置2では、上記第1の実施の形態に係る撮像装置1と同様に、このダミー画素PAの画素値VALを“0”に近づけることができるので、例えば、参照信号REFにおけるランプ波形の傾きを変更することにより撮像感度を高くした場合において、誤診断を防ぐことができる。
 本実施の形態では、ダミー画素PAにおいて、トランジスタTGLのドレインおよびソースを互いに接続したので、誤診断を防ぐことができる。その他の効果は、上記第1の実施の形態の場合と同様である。
[変形例2]
 上記実施の形態に係る撮像装置2に、上記第1の実施の形態の各変形例を適用してもよい。以下に、一例として、撮像装置2に、第1の実施の形態の変形例1-3を適用した例について説明する。
 図28は、本変形例に係る撮像装置2Bの画素アレイ50Bに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGのソースが電源線PLに接続され、トランジスタRSTのドレインが電圧供給線VLに接続される。ダミー画素PBは、図26Bの構成を使用することができる。
 このダミー画素PAでは、読出駆動D2において、トランジスタTGのソースに印加される電源電圧VDDは、トランジスタRSTのドレインに印加される電圧VRよりも高い。よって、トランジスタTGをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧は、トランジスタRSTをオン状態にすることにより設定されたフローティングディフュージョンFDの電圧よりも高い。その結果、画素値VALは“0”にクランプされる。よって、本変形例に係る撮像装置2Bでは、例えば、撮像装置2Bの撮像感度が高い場合でも、画素値VALの2値化処理の結果をより安定的に“0”にすることができる。
 図29は、本変形例に係る他の撮像装置2Cの画素アレイ50Cに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGのソースが電源線PLに接続され、ドレインは開放(オープン)される。すなわち、トランジスタTGのドレインを他の素子に接続していない。この場合でも、ダミー画素PAでは、タイミングt101~t102の期間(図27)において、トランジスタTGをオン状態にしても、フローティングディフュージョンFDの電圧は維持される。よって、撮像装置2Cでは、画素値VALの“0”からのずれを小さくすることができるので、画素値VALの2値化処理の結果をより安定的に“0”にすることができる。
 図29の例では、トランジスタTGのソースを電源線PLに接続したが、これに限定されるものではなく、例えば、トランジスタTGのソースを電圧供給線VLに接続してもよい。
 図30は、本変形例に係る他の撮像装置2Dの画素アレイ50Dに配置されたダミー画素PAの一構成例を表すものである。このダミー画素PAの画素回路CKTでは、トランジスタTGのソースが開放され、ドレインがフローティングディフュージョンFDに接続される。すなわち、トランジスタTGのソースを他の素子に接続していない。この場合でも、ダミー画素PAでは、タイミングt101~t102の期間(図27)において、トランジスタTGをオン状態にしても、フローティングディフュージョンFDの電圧は維持される。よって、撮像装置2Dでは、画素値VALの“0”からのずれを小さくすることができるので、画素値VALの2値化処理の結果をより安定的に“0”にすることができる。
<3.撮像装置の使用例>
 図31は、上記実施の形態に係る撮像装置1,2の使用例を表すものである。上述した撮像装置1,2は、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々なケースに使用することができる。
・ディジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用に供される画像を撮影する装置
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、テレビジョンや、冷蔵庫、エアーコンディショナ等の家電に供される装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
<4.移動体への応用例>
 本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
 図32は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
 車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図32に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
 駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
 ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
 車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
 撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
 車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
 マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
 音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図32の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
 図33は、撮像部12031の設置位置の例を示す図である。
 図33では、車両12100は、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
 撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。撮像部12101及び12105で取得される前方の画像は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
 なお、図33には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
 撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
 撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
 以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、撮像部12031に適用され得る。これにより、車両制御システム12000では、診断処理を行うことにより、撮像部12031が正常に動作しているかどうかを診断することができる。そして、撮像部12031に不具合が生じた場合には、例えば、その診断結果をマイクロコンピュータ12051に通知することにより、車両制御システム12000は、撮像部12031に不具合が生じたことを把握することができる。これにより、車両制御システム12000では、例えば運転者に注意喚起を促すなどの適切な処理を行うことができるため、信頼性を高めることができる。また、車両制御システム12000では、診断処理の結果に基づいて、車両を制御する機能を制限することができる。車両を制御する機能の具体例としては、車両の衝突回避あるいは衝突緩和機能、車間距離に基づく追従走行機能、車速維持走行機能、車両の衝突警告機能、車両のレーン逸脱警告機能等が挙げられる。診断処理の結果、撮像部12031に不具合が生じたと判定された場合、車両を制御する機能を制限し、あるいは禁止することができる。これにより、車両制御システム12000では、撮像部12031の不具合に基づく誤検知に起因した事故を防止することができる。
 以上、いくつかの実施の形態および変形例、ならびにそれらの具体的な応用例を挙げて本技術を説明したが、本技術はこれらの実施の形態等には限定されず、種々の変形が可能である。
 例えば、撮像装置1では、図14に示したように、読出部30がデジタルコードCODE2,CODE3を出力し、画像処理部44が、デジタルコードCODE3からデジタルコードCODE2を減算(CODE3-CODE2)することにより、画素値VAL1を算出したが、これに限定されるものではない。これに代えて、読出部30が、撮像装置2の場合(図27)と同様に、変換期間T2の後にカウント値CNTの極性を反転することにより、デジタルコードCODE2,CODE3の差に対応するデジタルコードCODEを出力してもよい。デジタルコードCODE5,CODE6についても同様であり、デジタルコードCODE7,CODE8についても同様である。
 また、例えば、撮像装置1では、図14に示したように、読出部30がデジタルコードCODE1,CODE4を出力し、画像処理部44が、デジタルコードCODE4からデジタルコードCODE1を減算(CODE4-CODE1)することにより、画素値VAL2を算出したが、これに限定されるものではない。これに代えて、読出部30のAD変換部ADCが、変換期間T1の後に、そのときのカウント値CNTを一旦内部に記憶しておき、変換期間T4の前に、そのカウント値CNTをカウンタ37にセットするとともにそのカウント値CNTの極性を反転してもよい。この場合でも、撮像装置2の場合(図27)と同様に、画像処理部44は、デジタルコードCODE1,CODE4の差に対応するデジタルコードCODEを得ることができる。
 例えば、上記の実施の形態に係る撮像画素P1は、図2,24に示した構成に限定されるものではない。
 なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。
 なお、本技術は以下のような構成とすることができる。以下の構成の本技術によれば、自己診断を行い、不具合の有無を診断することができる。
(1)第1の受光素子と、
 それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および前記蓄積部に接続された第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路および第1のダミー画素回路を含む複数の画素回路と
 を備え、
 前記撮像画素回路における前記第1のトランジスタの前記第1の端子は、前記第1の受光素子に接続され、
 前記第1のダミー画素回路における前記第1のトランジスタの前記第1の端子は、前記第1のダミー画素回路の前記第1のトランジスタを介さずに前記第1のダミー画素回路の前記第1のトランジスタの前記第2の端子に接続された
 撮像装置。
(2)電圧供給線をさらに備え、
 前記複数の画素回路は、第2のダミー画素回路を含み、
 前記第2のダミー画素回路における前記第1のトランジスタの前記第1の端子は、前記電圧供給線に接続された
 前記(1)に記載の撮像装置。
(3)前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を前記蓄積部に印加可能な第2のトランジスタをさらに有する
 前記(1)または(2)に記載の撮像装置。
(4)第2の受光素子をさらに備え、
 前記複数の画素回路のそれぞれは、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
 前記撮像画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の受光素子に接続され、
 前記第1のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第1のダミー画素回路の前記第3のトランジスタを介さずに前記第1のダミー画素回路の前記第3のトランジスタの前記第2の端子に接続された
 前記(1)または(2)に記載の撮像装置。
(5)前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を接続ノードに印加可能な第2のトランジスタと、前記第3のトランジスタの前記第2の端子に接続された容量素子と、オン状態になることにより前記容量素子および前記接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有する
 前記(4)に記載の撮像装置。
(6)前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
 前記第1のダミー画素回路は、前記有効画素領域の領域外に配置された
 前記(1)から(5)のいずれかに記載の撮像装置。
(7)アドレス信号を生成可能なアドレス生成部と、
 前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
 前記アドレス信号、および前記第1のダミー画素回路の前記出力部から出力された第1の信号に基づいて診断処理を行うことが可能な診断部と
 をさらに備えた
 前記(1)から(6)のいずれかに記載の撮像装置。
(8)第1の電圧供給線と、
 第2の電圧供給線と、
 第1の受光素子と、
 それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および前記蓄積部に接続された第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第2のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路、第1のダミー画素回路、および第2のダミー画素回路を含む複数の画素回路と
 を備え、
 前記撮像画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の受光素子に接続され、前記第2のトランジスタの前記第1の端子は前記第1の電圧供給線に接続され、
 前記第1のダミー画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の電圧供給線に接続され、前記第2のトランジスタの前記第1の端子は前記第2の電圧供給線に接続され、
 前記第2のダミー画素回路において、前記第1のトランジスタの前記第1の端子は前記第2の電圧供給線に接続され、前記第2のトランジスタの前記第1の端子は前記第1の電圧供給線に接続されている
 撮像装置。
(9)前記複数の画素回路のそれぞれにおける前記第2のトランジスタの前記第2の端子は前記蓄積部に接続された
 前記(8)に記載の撮像装置。
(10)第2の受光素子をさらに備え、
 前記複数の画素回路のそれぞれは、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
 前記撮像画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の受光素子に接続され、
 前記第1のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第1の電圧供給線に接続され、
 前記第2のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の電圧供給線に接続されている
 前記(8)に記載の撮像装置。
(11)前記複数の画素回路のそれぞれは、前記第3のトランジスタの前記第2の端子に接続された容量素子と、オン状態になることにより前記容量素子および接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有し、
 前記複数の画素回路のそれぞれにおける前記第2のトランジスタの前記第2の端子は、前記複数の画素回路のそれぞれの前記接続ノードに接続された
 前記(10)に記載の撮像装置。
(12)前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
 前記第1のダミー画素回路および前記第2のダミー画素回路は、前記有効画素領域の領域外に配置された
 前記(8)から(11)のいずれかに記載の撮像装置。
(13)アドレス信号を生成可能なアドレス生成部と、
 前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
 前記アドレス信号、前記第1のダミー画素回路の前記出力部から出力された第1の信号、および前記第2のダミー画素回路の前記出力部から出力された第2の信号に基づいて診断処理を行うことが可能な診断部と
 をさらに備えた
 前記(8)から(12)のいずれかに記載の撮像装置。
(14)第1の受光素子と、
 それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路および第1のダミー画素回路を含む複数の画素回路と
 を備え、
 前記撮像画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の受光素子に接続され、前記第1のトランジスタの前記第2の端子は前記蓄積部に接続され、
 前記第1のダミー画素回路において、前記第1のトランジスタの前記第1の端子および前記第2の端子のうちの少なくともいずれか1つは、前記第1のトランジスタ以外の素子に接続されていない
 撮像装置。
(15)電圧供給線をさらに備え、
 前記複数の画素回路は、第2のダミー画素回路を含み、
 前記第2のダミー画素回路において、前記第1のトランジスタの前記第1の端子は、前記電圧供給線に接続され、前記第1のトランジスタの前記第2の端子は前記蓄積部に接続された
 前記(14)に記載の撮像装置。
(16)前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を前記蓄積部に印加可能な第2のトランジスタをさらに有する
 前記(14)または(15)に記載の撮像装置。
(17)第2の受光素子をさらに備え、
 前記複数の画素回路のそれぞれは、第1の端子および第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
 前記撮像画素回路において、前記第3のトランジスタの前記第1の端子は前記第2の受光素子に接続され、前記第3のトランジスタの前記第2の端子は前記蓄積部に接続可能であり、
 前記第1のダミー画素回路において、前記第3のトランジスタの前記第1の端子および前記第2の端子のうちの少なくともいずれか1つは、前記第3のトランジスタ以外の素子に接続されていない
 前記(14)または(15)に記載の撮像装置。
(18)前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を接続ノードに印加可能な第2のトランジスタと、容量素子と、オン状態になることにより前記容量素子および前記接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有し、
 前記撮像画素回路において、前記容量素子は前記第3のトランジスタの前記第2の端子に接続された
 前記(17)に記載の撮像装置。
(19)前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
 前記第1のダミー画素回路は、前記有効画素領域の領域外に配置された
 前記(14)から(18)のいずれかに記載の撮像装置。
(20)アドレス信号を生成可能なアドレス生成部と、
 前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
 前記アドレス信号、および前記第1のダミー画素回路の前記出力部から出力された第1の信号に基づいて診断処理を行うことが可能な診断部と
 をさらに備えた
 前記(14)から(19)のいずれかに記載の撮像装置。
 本出願は、日本国特許庁において2018年12月11日に出願された日本特許出願番号2018-231796号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
 当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。

Claims (20)

  1.  第1の受光素子と、
     それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および前記蓄積部に接続された第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路および第1のダミー画素回路を含む複数の画素回路と
     を備え、
     前記撮像画素回路における前記第1のトランジスタの前記第1の端子は、前記第1の受光素子に接続され、
     前記第1のダミー画素回路における前記第1のトランジスタの前記第1の端子は、前記第1のダミー画素回路の前記第1のトランジスタを介さずに前記第1のダミー画素回路の前記第1のトランジスタの前記第2の端子に接続された
     撮像装置。
  2.  電圧供給線をさらに備え、
     前記複数の画素回路は、第2のダミー画素回路を含み、
     前記第2のダミー画素回路における前記第1のトランジスタの前記第1の端子は、前記電圧供給線に接続された
     請求項1に記載の撮像装置。
  3.  前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を前記蓄積部に印加可能な第2のトランジスタをさらに有する
     請求項1に記載の撮像装置。
  4.  第2の受光素子をさらに備え、
     前記複数の画素回路のそれぞれは、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
     前記撮像画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の受光素子に接続され、
     前記第1のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第1のダミー画素回路の前記第3のトランジスタを介さずに前記第1のダミー画素回路の前記第3のトランジスタの前記第2の端子に接続された
     請求項1に記載の撮像装置。
  5.  前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を接続ノードに印加可能な第2のトランジスタと、前記第3のトランジスタの前記第2の端子に接続された容量素子と、オン状態になることにより前記容量素子および前記接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有する
     請求項4に記載の撮像装置。
  6.  前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
     前記第1のダミー画素回路は、前記有効画素領域の領域外に配置された
     請求項1に記載の撮像装置。
  7.  アドレス信号を生成可能なアドレス生成部と、
     前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
     前記アドレス信号、および前記第1のダミー画素回路の前記出力部から出力された第1の信号に基づいて診断処理を行うことが可能な診断部と
     をさらに備えた
     請求項1に記載の撮像装置。
  8.  第1の電圧供給線と、
     第2の電圧供給線と、
     第1の受光素子と、
     それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および前記蓄積部に接続された第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第2のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路、第1のダミー画素回路、および第2のダミー画素回路を含む複数の画素回路と
     を備え、
     前記撮像画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の受光素子に接続され、前記第2のトランジスタの前記第1の端子は前記第1の電圧供給線に接続され、
     前記第1のダミー画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の電圧供給線に接続され、前記第2のトランジスタの前記第1の端子は前記第2の電圧供給線に接続され、
     前記第2のダミー画素回路において、前記第1のトランジスタの前記第1の端子は前記第2の電圧供給線に接続され、前記第2のトランジスタの前記第1の端子は前記第1の電圧供給線に接続されている
     撮像装置。
  9.  前記複数の画素回路のそれぞれにおける前記第2のトランジスタの前記第2の端子は前記蓄積部に接続された
     請求項8に記載の撮像装置。
  10.  第2の受光素子をさらに備え、
     前記複数の画素回路のそれぞれは、第1の端子および前記蓄積部に接続可能な第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
     前記撮像画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の受光素子に接続され、
     前記第1のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第1の電圧供給線に接続され、
     前記第2のダミー画素回路における前記第3のトランジスタの前記第1の端子は、前記第2の電圧供給線に接続されている
     請求項8に記載の撮像装置。
  11.  前記複数の画素回路のそれぞれは、前記第3のトランジスタの前記第2の端子に接続された容量素子と、オン状態になることにより前記容量素子および接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有し、
     前記複数の画素回路のそれぞれにおける前記第2のトランジスタの前記第2の端子は、前記複数の画素回路のそれぞれの前記接続ノードに接続された
     請求項10に記載の撮像装置。
  12.  前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
     前記第1のダミー画素回路および前記第2のダミー画素回路は、前記有効画素領域の領域外に配置された
     請求項8に記載の撮像装置。
  13.  アドレス信号を生成可能なアドレス生成部と、
     前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
     前記アドレス信号、前記第1のダミー画素回路の前記出力部から出力された第1の信号、および前記第2のダミー画素回路の前記出力部から出力された第2の信号に基づいて診断処理を行うことが可能な診断部と
     をさらに備えた
     請求項8に記載の撮像装置。
  14.  第1の受光素子と、
     それぞれが、電荷を蓄積可能な蓄積部と、第1の端子および第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第1のトランジスタと、前記蓄積部に蓄積された電荷に応じた電圧を出力可能な出力部とを有し、撮像画素回路および第1のダミー画素回路を含む複数の画素回路と
     を備え、
     前記撮像画素回路において、前記第1のトランジスタの前記第1の端子は前記第1の受光素子に接続され、前記第1のトランジスタの前記第2の端子は前記蓄積部に接続され、
     前記第1のダミー画素回路において、前記第1のトランジスタの前記第1の端子および前記第2の端子のうちの少なくともいずれか1つは、前記第1のトランジスタ以外の素子に接続されていない
     撮像装置。
  15.  電圧供給線をさらに備え、
     前記複数の画素回路は、第2のダミー画素回路を含み、
     前記第2のダミー画素回路において、前記第1のトランジスタの前記第1の端子は、前記電圧供給線に接続され、前記第1のトランジスタの前記第2の端子は前記蓄積部に接続された
     請求項14に記載の撮像装置。
  16.  前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を前記蓄積部に印加可能な第2のトランジスタをさらに有する
     請求項14に記載の撮像装置。
  17.  第2の受光素子をさらに備え、
     前記複数の画素回路のそれぞれは、第1の端子および第2の端子を有しオン状態になることにより前記第1の端子および前記第2の端子を接続可能な第3のトランジスタをさらに有し、
     前記撮像画素回路において、前記第3のトランジスタの前記第1の端子は前記第2の受光素子に接続され、前記第3のトランジスタの前記第2の端子は前記蓄積部に接続可能であり、
     前記第1のダミー画素回路において、前記第3のトランジスタの前記第1の端子および前記第2の端子のうちの少なくともいずれか1つは、前記第3のトランジスタ以外の素子に接続されていない
     請求項14に記載の撮像装置。
  18.  前記複数の画素回路のそれぞれは、オン状態になることにより所定の電圧を接続ノードに印加可能な第2のトランジスタと、容量素子と、オン状態になることにより前記容量素子および前記接続ノードを接続可能な第4のトランジスタと、オン状態になることにより前記接続ノードおよび前記蓄積部を接続可能な第5のトランジスタとをさらに有し、
     前記撮像画素回路において、前記容量素子は前記第3のトランジスタの前記第2の端子に接続された
     請求項17に記載の撮像装置。
  19.  前記撮像画素回路は、前記撮像装置の有効画素領域に配置され、
     前記第1のダミー画素回路は、前記有効画素領域の領域外に配置された
     請求項14に記載の撮像装置。
  20.  アドレス信号を生成可能なアドレス生成部と、
     前記アドレス信号に基づいて、前記第1のトランジスタの動作を制御可能な駆動制御部と、
     前記アドレス信号、および前記第1のダミー画素回路の前記出力部から出力された第1の信号に基づいて診断処理を行うことが可能な診断部と
     をさらに備えた
     請求項14に記載の撮像装置。
PCT/JP2019/043625 2018-12-11 2019-11-07 撮像装置 WO2020121699A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/307,593 US11381773B2 (en) 2018-12-11 2019-11-07 Imaging device
EP19894474.6A EP3896958A4 (en) 2018-12-11 2019-11-07 IMAGING DEVICE
JP2020559825A JPWO2020121699A1 (ja) 2018-12-11 2019-11-07 撮像装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-231796 2018-12-11
JP2018231796 2018-12-11

Publications (1)

Publication Number Publication Date
WO2020121699A1 true WO2020121699A1 (ja) 2020-06-18

Family

ID=71075471

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/043625 WO2020121699A1 (ja) 2018-12-11 2019-11-07 撮像装置

Country Status (4)

Country Link
US (1) US11381773B2 (ja)
EP (1) EP3896958A4 (ja)
JP (1) JPWO2020121699A1 (ja)
WO (1) WO2020121699A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023171133A1 (ja) * 2022-03-10 2023-09-14 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、および電子機器
US11889210B2 (en) 2021-01-29 2024-01-30 Stmicroelectronics (Grenoble 2) Sas Image sensors

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050231620A1 (en) 2001-05-29 2005-10-20 Miriam Fraenkel Patent application cmos imager for cellular applications and methods of using such
JP2009118427A (ja) * 2007-11-09 2009-05-28 Panasonic Corp 固体撮像装置およびその駆動方法
WO2018142707A1 (ja) * 2017-02-01 2018-08-09 ソニーセミコンダクタソリューションズ株式会社 撮像システム及び撮像装置
WO2018150778A1 (ja) * 2017-02-16 2018-08-23 ソニーセミコンダクタソリューションズ株式会社 撮像システムおよび撮像装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6150457B2 (ja) 2011-05-12 2017-06-21 キヤノン株式会社 固体撮像装置、固体撮像装置の駆動方法、固体撮像システム
US10547803B2 (en) * 2016-09-30 2020-01-28 Canon Kabushiki Kaisha Imaging apparatuses, systems, and moving imaging objects
JP6436953B2 (ja) * 2016-09-30 2018-12-12 キヤノン株式会社 固体撮像装置及びその駆動方法、並びに撮像システム
JP2019118427A (ja) 2017-12-28 2019-07-22 オルゴ株式会社 飲料用容器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050231620A1 (en) 2001-05-29 2005-10-20 Miriam Fraenkel Patent application cmos imager for cellular applications and methods of using such
JP2009118427A (ja) * 2007-11-09 2009-05-28 Panasonic Corp 固体撮像装置およびその駆動方法
WO2018142707A1 (ja) * 2017-02-01 2018-08-09 ソニーセミコンダクタソリューションズ株式会社 撮像システム及び撮像装置
WO2018150778A1 (ja) * 2017-02-16 2018-08-23 ソニーセミコンダクタソリューションズ株式会社 撮像システムおよび撮像装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3896958A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11889210B2 (en) 2021-01-29 2024-01-30 Stmicroelectronics (Grenoble 2) Sas Image sensors
WO2023171133A1 (ja) * 2022-03-10 2023-09-14 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、および電子機器

Also Published As

Publication number Publication date
TW202029730A (zh) 2020-08-01
EP3896958A1 (en) 2021-10-20
EP3896958A4 (en) 2022-04-13
US11381773B2 (en) 2022-07-05
JPWO2020121699A1 (ja) 2021-10-21
US20220046198A1 (en) 2022-02-10

Similar Documents

Publication Publication Date Title
EP3758366B1 (en) Image pickup device, image pickup system, and image pickup method
EP3747187B1 (en) Imaging device and calibration method
US20230254442A1 (en) Imaging device and imaging system
CN111684790B (zh) 成像设备、成像系统和成像方法
US11381764B2 (en) Sensor element and electronic device
WO2020121699A1 (ja) 撮像装置
EP3723361B1 (en) Imaging device
CN111201781B (zh) 摄像器件和诊断方法
TWI840454B (zh) 攝像裝置
WO2020021945A1 (ja) 撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19894474

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020559825

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019894474

Country of ref document: EP

Effective date: 20210712