WO2017086442A1 - 撮像素子、計測装置および計測方法 - Google Patents

撮像素子、計測装置および計測方法 Download PDF

Info

Publication number
WO2017086442A1
WO2017086442A1 PCT/JP2016/084277 JP2016084277W WO2017086442A1 WO 2017086442 A1 WO2017086442 A1 WO 2017086442A1 JP 2016084277 W JP2016084277 W JP 2016084277W WO 2017086442 A1 WO2017086442 A1 WO 2017086442A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
unit
photoelectric conversion
interference
signal
Prior art date
Application number
PCT/JP2016/084277
Other languages
English (en)
French (fr)
Inventor
大河内 直紀
Original Assignee
株式会社ニコン
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ニコン filed Critical 株式会社ニコン
Priority to EP16866442.3A priority Critical patent/EP3382375B1/en
Priority to JP2017551948A priority patent/JP6702335B2/ja
Publication of WO2017086442A1 publication Critical patent/WO2017086442A1/ja
Priority to US15/981,466 priority patent/US10939060B2/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0066Optical coherence imaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/616Noise processing, e.g. detecting, correcting, reducing or removing noise involving a correlated sampling function, e.g. correlated double sampling [CDS] or triple sampling
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/005Specific pre-processing for tomographic reconstruction, e.g. calibration, source positioning, rebinning, scatter correction, retrospective gating
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/617Noise processing, e.g. detecting, correcting, reducing or removing noise for reducing electromagnetic interference, e.g. clocking noise
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10101Optical tomography; Optical coherence tomography [OCT]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Definitions

  • the present invention relates to an image sensor, a measuring device, and a measuring method.
  • OCT optical coherence tomography
  • the pixel signal is frequency-separated using Fourier transform.
  • this method if the phase of the signal start point of the pixel signal obtained by a single sweep due to the temporal change in the oscillation frequency of the measurement light is different from the phase of the signal end point, a leakage error will occur and we want to separate them The frequency component cannot be extracted accurately. Therefore, there is a need for a method for performing frequency separation more accurately.
  • the imaging device is an imaging device that images light from a predetermined depth of the object, and includes light including interference light between the light from the object and the reference light.
  • a photoelectric conversion unit that performs photoelectric conversion; and a discrimination unit that locks in and detects a signal component of an interference frequency in an interference light component corresponding to the predetermined depth from a signal output from the photoelectric conversion unit.
  • the image sensor of the first aspect includes a plurality of pixels, and the photoelectric conversion unit is disposed in each of the plurality of pixels.
  • the discriminating unit is arranged for each of the pixels or for each block composed of two or more pixels, and from the signal output from the photoelectric conversion unit of the corresponding pixel or the block, the signal component of the interference frequency is It is preferable to detect by locking in.
  • the imaging device of the first or second aspect it is preferable that a part or all of the discriminating part is arranged in a layer different from the photoelectric conversion part.
  • the imaging element in the imaging element according to any one of the first to third aspects, includes a floating diffusion unit that temporarily stores the charge photoelectrically converted by the photoelectric conversion unit.
  • the discriminating section includes a transfer section that transfers the signal to the floating diffusion section, and a sampling section that samples charges accumulated in the floating diffusion section at a sampling frequency determined based on the interference frequency. It is preferable.
  • the discrimination unit multiplies the signal output from the sampling unit by a reference signal of the interference frequency, and the multiplication unit. It is preferable to include a first filtering unit that separates a low-frequency component and a direct-current component that are less than or equal to a predetermined value from the signal output from.
  • the transfer unit switches between an on state and an off state at a switching frequency based on the interference frequency, It is preferable that the signal is transferred to a floating diffusion, and the discrimination unit includes a second filtering unit that separates a low frequency component and a direct current component that are equal to or less than a predetermined value from the signal output from the sampling unit.
  • the image sensor of the fourth aspect includes light from a first depth and light from a second depth deeper than the first depth.
  • the interference light with the reference light is imaged, and the sampling unit increases the number of samplings corresponding to the second depth more than the number of samplings corresponding to the first depth.
  • the imaging element of the second aspect images interference light between light from a plurality of depths and the reference light, and the discrimination unit For each pixel or each block, the signal output from the photoelectric converter is detected by locking in the signal components of the plurality of interference frequencies in the plurality of interference light components corresponding to the plurality of depths. It is preferable to do.
  • the discrimination unit corresponds to the plurality of depths from the signal output from the photoelectric conversion unit for each of the blocks. It is preferable that signal components of a plurality of interference frequencies in the plurality of interference light components to be detected are detected by locking in, and the interference frequencies are different in the plurality of pixels included in one block.
  • the measuring device includes the imaging element according to any one of the first to ninth aspects, a wavelength variable light generation unit that generates wavelength variable light whose wavelength changes with time, A separation unit that separates the reference light and measurement light that can interfere with the reference light from the wavelength variable light generated by the wavelength variable light generation unit, and irradiates the object with the measurement light;
  • the wavelength tunable light generating unit in the measurement device according to the tenth aspect, it is preferable that the wavelength tunable light generating unit generates wavelength tunable light whose wavelength changes temporally in a near infrared range.
  • the measurement apparatus transmits the reference light to a first polarization component and a second polarization component perpendicular to the first polarization component.
  • a polarization demultiplexing unit that divides the light with the polarization component, wherein the photoelectric conversion unit photoelectrically converts the reference light of the first polarization component, and the reference light of the second polarization component.
  • a second photoelectric conversion unit that photoelectrically converts light including interference light with the reflected light from the predetermined depth of the object irradiated with the measurement light
  • the discrimination unit includes the first A noise reduction unit that reduces noise of the signal output from the second photoelectric conversion unit based on a signal output from the one photoelectric conversion unit, the interference output from the signal output from the second photoelectric conversion unit; It is preferable to detect by locking in the frequency signal component.
  • a measurement method processes a signal from a light generation unit that generates interferable light, a separation unit that separates the light, a photoelectric conversion unit, and the photoelectric conversion unit.
  • a measurement method that measures light from a predetermined depth of an object by a measurement system including a processing unit, wherein the light generation unit generates wavelength variable light whose wavelength changes with time, and the separation
  • the reference light and the measurement light capable of interfering with the reference light are separated from the wavelength tunable light by the unit, the measurement light is irradiated on the object, and the reference light is emitted from the photoelectric conversion unit.
  • the measurement apparatus acquires light information from a predetermined depth of an object using light interference, and particularly creates a tomographic image inside the object.
  • FIG. 1 is a schematic diagram illustrating a configuration of a measurement apparatus 1 according to the present embodiment.
  • the measuring device 1 is an interference measuring device using an SS (Swept Source) -OCT method that temporally changes the wavelength of oscillating light and separates light from a predetermined depth based on the period in which interference occurs.
  • the measuring device 1 includes an oscillation unit 10, a separation unit 20, a reference light reflection unit 21, a photoelectric conversion unit 30, an image processing unit 40, a control processing unit 41, a display unit 50, a spatial filter (hereinafter referred to as a spatial filter). , SF) 26 and lenses 27-1, 27-2, 27-3, 27-4.
  • SS Stept Source
  • an image sensor that performs photoelectric conversion preferably also performs processing such as frequency separation of pixel signals in the image processing unit 40.
  • the processing such as frequency separation for the signal photoelectrically converted by the photoelectric conversion unit 30 may be performed by a processing device arranged outside the imaging device.
  • the imaging optical system is configured to irradiate the surface of the object 6 with the measuring light.
  • the SF 26 and the lenses 27-1, 27-2, 27-3, 27- It is also possible to configure without arranging 4.
  • the oscillating unit 10 is composed of an oscillating device that oscillates light capable of interfering while changing the wavelength with time, such as a frequency domain mode-locked laser.
  • the oscillation unit 10 plays a role as a wavelength variable light generation unit.
  • the light emitted from the oscillating unit 10 is light in a wavelength range from visible light to millimeter waves. When light in these wavelength ranges is used, characteristics such as transparency in light of each wavelength are used. Thus, the reflected light from the inside of the object 6 can be obtained.
  • the light oscillated from the oscillating unit 10 is near-infrared light of 800 nm to 1300 nm. Thereby, the image of the deep part of the object by near-infrared light having high biological permeability can be obtained while avoiding light absorption by water.
  • the oscillation unit 10 changes the wavelength so that the wave number of the oscillating light increases at a constant rate with respect to the measurement time so that the interference period is constant. Therefore, in order to simplify the description, the following description will be made using the wave number defined not by the wavelength but by the reciprocal of the wavelength.
  • FIG. 1 a wave number-time characteristic graph 201 oscillated from the oscillation unit 10 is shown.
  • the wave number k (t) has a linear relationship with respect to the time t.
  • the oscillating unit 10 sweeps the value of the wave number for ⁇ t from t1 to t2 so as to increase by ⁇ k from k1 to k2. By repeating this sweep appropriately, information can be acquired regarding a plurality of depths of interest. Note that the relationship between the wave number and the measurement time can be arbitrarily set as long as pixel signals are processed appropriately and frequency separation can be performed quantitatively.
  • the light emitted from the oscillating unit 10 is converted into divergent light by the SF 26, collected by the lens 27-1, and incident on the separating unit 20.
  • the separation unit 20 is configured by an optical element such as a beam splitter, and separates the light emitted from the lens 27-1 into two light, reference light and measurement light, and directs the reference light toward the reference light reflection unit 21.
  • the measurement light is emitted toward the object 6.
  • the emitted reference light is collected by the objective lens 27-2 and is irradiated onto the reference light reflecting section 21.
  • the emitted measurement light is condensed by the objective lens 27-3 equivalent to the reference light, and is irradiated onto the object 6.
  • the reference light reflecting unit 21 is configured by an optical mirror or the like, reflects the reference light emitted from the separation unit 20 and incident through the objective lens 27-2, and again through the objective lens 27-2. Exit to.
  • the curved solid arrow in FIG. 1 indicates that light is reflected at that surface.
  • the Michelson interference system that is a reflection optical system is used.
  • the reference light reflection unit 21 may not be provided, and a Mach-Zehnder interference system that is a transmission optical system may be used. Thereby, the ghost by multiple reflection can be suppressed.
  • the measuring apparatus 1 images reflected light from a plurality of depths of the target 6 of the measurement light with the surface of the target 6 as the reference plane 61.
  • a measurement surface 62-1 having a depth Z1 and a measurement surface 62-2 having a depth Z2 from the reference surface 61 of the object 6 are shown.
  • the information from each depth of the target object 6 is not analyzed as a plane, but the depth information of each point along the optical axis of the measurement light inside the target object 6 using the measuring device 1 as a point sensor. May be analyzed.
  • the reference plane is not limited to the surface of the object 6 and may be set arbitrarily.
  • the light reflected inside the object 6 enters the separation unit 20 through the objective lens 27-3.
  • the separation unit 20 synthesizes the light reflected from the inside of the object 6 and the reference light incident from the reference light reflection unit 21 so as to be able to interfere with each other, and supplies the measurement light to the photoelectric conversion unit 30 via the condenser lens 27-4.
  • the condensing lens 27-4 is a lens for imaging the interference light of the reference light and the measurement light to the object 6 on the area sensor of the photoelectric conversion unit 30, and from the same depth of the object 6 The area sensor is irradiated with the interference light of the reflected light.
  • a graph 202 schematically showing the amplitude of the interference light between the light from the depth Z1 and the depth Z2 of the object 6 and the reference light with respect to the measurement time is shown.
  • each light from the different depths Z1 and Z2 of the object 6 is measured as interference light having different interference periods.
  • the reflected light from a deeper position has a smaller amplitude.
  • the photoelectric conversion unit 30 is configured by a photoelectric conversion element such as a photodiode (hereinafter referred to as PD), and photoelectrically interferes with the reference light incident from the separation unit 20 and the reflected light from the object 6 of the measurement light. The signal is converted and output to the image processing unit 40.
  • the photoelectric conversion unit 30 of the present embodiment is configured by the PD of the image sensor 100. As will be described later, the image sensor 100 includes a PD for each pixel, and a signal photoelectrically converted by the PD is output to a processing circuit arranged for each pixel.
  • the photoelectric conversion unit 30 is configured by one PD.
  • the measuring apparatus 1 is a point sensor, a configuration in which a high SN is realized by removing common noise and in-phase components of the measurement system using a balance detector may be used.
  • the image processing unit 40 includes a processing circuit of the image sensor 100, and frequency-separates an output signal from the photoelectric conversion unit 30 to extract a signal component having a predetermined depth.
  • the image processing unit 40 plays a role as a discrimination unit under the control of the control processing unit 41. Frequency separation of the output signal is realized by performing processing equivalent to multiplying the output signal by a reference signal having a frequency corresponding to a predetermined depth.
  • the processing circuit that processes the photoelectrically converted signal and the image processing unit 40 may be arranged not for each pixel but for each pixel block including a plurality of pixels. Further, the image processing unit 40 may be disposed outside the image sensor 100.
  • the interference light between the reference light and the reflected light from the object 6 of the measurement light oscillates with repeated light and dark as many times as the phase d ⁇ is an integral multiple of 2 ⁇ . That is, every time dk increases by ⁇ / Z, the interference light repeats light and dark for one period. If the oscillation unit 10 sweeps the wave number and time in a linear relationship as in this embodiment, the interference period becomes constant for each depth Z, and the interference period is inversely proportional to the depth.
  • the reciprocal of this interference period is called an interference frequency.
  • the interference frequency plays a role of a reference signal frequency in lock-in.
  • the refractive index inside the target object 6 is described as 1. However, for example, if the refractive index inside the target object 6 is uniformly n, the target object 6 may be calculated such that Z in the above formula is calculated as nZ. It is desirable to calculate from an effective optical path length as appropriate according to the internal refractive index.
  • FIG. 2 is a diagram illustrating a configuration of a current-voltage conversion circuit 300 of the image sensor 100 for converting a current signal subjected to photoelectric conversion into a current-voltage converted output.
  • the current-voltage conversion circuit 300 is a part of the processing circuit of the image processing unit 40 that plays a role as a discrimination unit.
  • the current-voltage conversion circuit 300 includes a PD 302, a transfer gate 303, a floating diffusion (hereinafter referred to as FD) 305, a reset transistor 306, a VDD 307, an amplification transistor 308, a row selection transistor 309, and a vertical signal line 310.
  • FD floating diffusion
  • the PD 302 photoelectrically converts interference light between the reference light and the reflected light from the object 6 of the measurement light.
  • the photoelectrically converted charges are transferred to the FD 305 by the transfer gate 303 that plays a role as a transfer unit.
  • the transfer gate 303 performs photoelectric conversion at a timing based on a predetermined sampling frequency in the on state while switching between the on state and the off state at a frequency twice the interference frequency by control from a transfer signal line (not shown).
  • the charged charges are transferred to the FD 305.
  • the transfer gate 303 outputs a signal equivalent to a signal obtained by multiplying the signal sampled at the sampling frequency by the rectangular wave signal having the interference frequency. That is, the transfer gate 303 also serves as a sampling unit and a multiplication unit.
  • FIG. 3 is a conceptual diagram of frequency separation by lock-in.
  • the sine wave of the same frequency ⁇ is multiplied as the reference signal and separated into the DC component and the frequency 2 ⁇ component, and then the DC component is extracted by the low-pass filter.
  • the reference signal may be a rectangular wave having a frequency ⁇ approximately.
  • the on state of the transfer gate 303 described above corresponds to a state in which the output voltage of the rectangular wave is a value A, and the off state corresponds to a state in which the output voltage of the rectangular wave is a value of 0.
  • the charge transferred to the FD 305 is output as a voltage signal by the amplification transistor 308 and read out from the vertical signal line 310 at the sampling frequency under the control of the row selection transistor 309.
  • a DC component and / or a low frequency component is extracted from the output voltage signal by the low-pass filter 400, and the signal intensity of the signal component corresponding to a predetermined depth of the object 6 is calculated based on these values. .
  • the signal strength is the amplitude of the value of the DC component.
  • FIG. 4 is a diagram for explaining a sampling frequency determination method.
  • the sampling period Ts1 (reciprocal of the sampling frequency) for extracting a signal from the depth Z1 of the object 6 is set to a value equal to or less than half of the interference period T1 corresponding to the depth Z1 by the sampling theorem.
  • the sampling period Ts2 for extracting a signal from the depth Z2 of the object 6 is set to a value equal to or less than half of the interference period T2 corresponding to the depth Z2 by the sampling theorem.
  • the amplitude of the interference light from the depth Z1 and the depth Z2 is a waveform in which a wave having a short period T2 is superimposed on a wave having a long period T1.
  • the intensities of the signal components at the depth Z1 and the depth Z2 of the object 6 corresponding to the respective interference frequencies can be calculated quantitatively.
  • the graph 204 shows a schematic diagram of a power spectrum in which the horizontal axis is the depth Z of the object 6 corresponding to the interference frequency and the signal intensity is the vertical axis.
  • FFT fast Fourier transform
  • the output value of the amplitude sampled at the frequency of the lock-in reference signal corresponds to the output value at the deep part of the object 6 corresponding to the frequency at the pixel part.
  • the huge amount of sampling data required for processing is not required. For this reason, for example, in order to obtain a cross-sectional image of the object 6 at a certain depth, the enormous sampling data is required for power spectrum analysis by FFT.
  • the configuration can be implemented in the image sensor 100.
  • the interference period needs to be shortened and the sampling frequency also needs to be increased.
  • the number of times of sampling when extracting the signal component of depth Z2 in one wave number sweep is set to be larger than the number of times of sampling when extracting the signal component of depth Z1.
  • the number of samplings N can be increased within the same sampling time, and the S / N ratio of the signal proportional to the square root of N can be increased.
  • the intensity of the reflected light attenuates as the depth of the measurement surface in the object 6 increases, which is effective in preventing signal degradation due to noise.
  • the depth of the object 6 when the depth of the object 6 is more than two, the deeper the depth of the object 6 is, the more sampling is performed when extracting the signal component from that depth in one wave number sweep. It can be configured to increase the number of times.
  • the pixel signal may first be sampled at the sampling frequency, and then the obtained voltage signal may be locked in with the reference signal of the interference frequency and frequency separated. Thereby, it can comprise efficiently efficiently according to desired measurement conditions.
  • a well-known selection circuit and multiplication circuit are arranged before the vertical signal line 310 is input to the low-pass filter 400.
  • the transfer gate 303 transfers charges at a predetermined timing (for example, the shortest interval at which the ON state and the OFF state can be switched) higher than the sampling frequency. Thereafter, the voltage signal obtained by the selection circuit sampling at the sampling frequency described above is locked in by the multiplication circuit and frequency-separated and output to the low-pass filter 400.
  • the multiplication circuit functions as a multiplication unit.
  • the control processing unit 41 appropriately adjusts the image displayed on the display unit 50 and controls the entire measuring apparatus 1.
  • the control processing unit 41 creates a three-dimensional image of the target object 6 based on the obtained images of a plurality of depths of the target object 6.
  • the control processing unit 41 performs an operation for improving the visibility such as allowing the user to observe the created three-dimensional image from a desired direction, and outputs it to the display unit 50 together with a two-dimensional image having a predetermined depth as appropriate. To do.
  • the control processing unit 41 adjusts the wavelength sweep timing of the oscillation unit 10 and the sampling timing of the image sensor 100 as necessary. In the lock-in with one phase described above, the signal intensity obtained by the phase of the signal component at the time of sampling changes, so that the amplitude can be detected with high accuracy by adjusting the phase.
  • the display unit 50 is composed of an arbitrary display device such as a liquid crystal monitor, and displays an image of a predetermined depth of the object 6 created by the control processing unit 41 or a three-dimensional image of the object 6.
  • the stacked imaging device 100 that constitutes the photoelectric conversion unit 30 and the image processing unit 40 of the measurement apparatus 1 described above will be described.
  • the multilayer image sensor 100 is described in WO13 / 164915, which was previously filed and filed by the applicant of the present application.
  • FIG. 5 is a cross-sectional view of the multilayer image sensor 100.
  • the imaging device 100 includes a backside illumination type imaging chip 113 that outputs a pixel signal corresponding to incident light, a signal processing chip 111 that processes the pixel signal, and a memory chip 112 that stores the pixel signal.
  • the imaging chip 113, the signal processing chip 111, and the memory chip 112 are stacked, and are electrically connected to each other by a conductive bump 109 such as Cu.
  • incident light is incident mainly in the direction indicated by the white arrow.
  • the surface on the side where incident light enters is referred to as a back surface (imaging surface).
  • An example of the imaging chip 113 is a backside illumination type CMOS image sensor.
  • the imaging chip 113 is physically configured as part or all of the functions of the photoelectric conversion unit 30 in the functional block of FIG.
  • the PD layer 106 is disposed on the back side of the wiring layer 108.
  • the PD layer 106 includes a plurality of PDs 104 that are two-dimensionally arranged and accumulate charges corresponding to incident light, and transistors 105 that are provided corresponding to the PDs 104.
  • the filter layer 102 is provided via the passivation film 103 on the incident light incident side of the PD layer 106.
  • a filter such as a polarizing filter is disposed on the filter layer 102 as necessary.
  • a set of the filter layer 102, the PD 104, and the transistor 105 forms one pixel.
  • a microlens 101 is provided on the incident side of incident light in the filter layer 102 corresponding to each pixel.
  • the microlens 101 condenses incident light toward the corresponding PD 104.
  • the wiring layer 108 includes a wiring 107 that transmits a pixel signal from the PD layer 106 to the signal processing chip 111.
  • the wiring 107 may be multilayer, and a passive element and an active element may be provided.
  • a plurality of bumps 109 are arranged on the surface of the wiring layer 108.
  • the plurality of bumps 109 are aligned with the plurality of bumps 109 provided on the opposing surfaces of the signal processing chip 111, and the imaging chip 113 and the signal processing chip 111 are pressed and aligned.
  • the bumps 109 are joined and electrically connected.
  • a plurality of bumps 109 are arranged on the mutually facing surfaces of the signal processing chip 111 and the memory chip 112.
  • the bumps 109 are aligned with each other, and the signal processing chip 111 and the memory chip 112 are pressurized, so that the aligned bumps 109 are joined and electrically connected.
  • the bonding between the bumps 109 is not limited to Cu bump bonding by solid phase diffusion, and micro bump bonding by solder melting may be employed. Further, for example, about one bump 109 may be provided for one block described later. Therefore, the size of the bump 109 may be larger than the pitch of the PD 104. Further, a bump larger than the bump 109 corresponding to the pixel region may be provided in a peripheral region other than the pixel region where the pixels are arranged.
  • the signal processing chip 111 has TSVs (silicon through electrodes) 110 that connect circuits provided on the front and back surfaces to each other.
  • the TSV 110 is preferably provided in the peripheral area.
  • the TSV 110 may also be provided in the peripheral area of the imaging chip 113 and the memory chip 112.
  • the signal processing unit chip 111 is physically configured as a main body of a part or all of the functions of the image processing unit 40 in the functional block of FIG. Note that a part of the image processing unit 40 may be provided in the imaging chip 113.
  • the above-described image sensor 100 has a processing circuit for signals output for each pixel of the image sensor 100, and is physically used as a part or all of the functions of the control processing unit 41 in the functional block of FIG. Composed.
  • FIG. 6 is a flowchart showing a flow in which the measurement apparatus 1 captures and displays an image of a predetermined depth of the object 6. With the method shown in this flowchart, it is possible to obtain a precise OCT image by high-precision frequency separation using lock-in.
  • step S1001 the oscillating unit 10 generates light capable of interference while changing the wave number with time. If the light which can interfere is produced
  • the separation unit 20 separates the generated interference light into reference light and measurement light, irradiates the reference light toward the reference light reflection unit 21, and directs the measurement light toward the object 6. Irradiate. If each light is irradiated, it will progress to step S1005.
  • step S1005 the photoelectric conversion unit 30 photoelectrically converts interference light between the reference light and the reflected light of the measurement light from the object 6. If the interference light is photoelectrically converted, the process proceeds to step S1007.
  • step S1007 the transfer gate 303 transfers the photoelectrically converted electric charge to the FD 305 based on the sampling frequency in the on state while repeating the on state and the off state at the frequency based on the lock-in frequency. When the charge is transferred to the FD 305, the process proceeds to step S1009.
  • step S1009 the image processing unit 40 outputs the electric charge of the FD 305 as a voltage signal at the sampling frequency under the control of the row selection transistor 309. If a voltage signal is output, it will progress to step S1011.
  • step S1011 the image processing unit 40 extracts a direct current component and / or a low frequency component from the output voltage signal using a low-pass filter.
  • the image processing unit 40 calculates the intensity of the signal component based on the obtained DC component and / or low frequency component values, and outputs the signal component to the control processing unit 41. When the intensity of the signal component is output, the process proceeds to step S1013.
  • step S1013 the control processing unit 41 creates an image and a three-dimensional image from a predetermined depth based on the output from each pixel.
  • the created image is output to the display unit 50.
  • step S1015 the display unit 50 displays the created image and the three-dimensional image from the predetermined depth. When these images are displayed, the process ends.
  • the image sensor 100 locks and detects a signal component of an interference frequency in an interference light component corresponding to a predetermined depth from a signal output from the photoelectric conversion unit 30. Is provided. As a result, leakage error that occurs when frequency separation is performed using FFT or the like is prevented, and high-Q filtering is performed by a narrow-band low-pass filter from the principle of the lock-in amplifier, thereby improving the accuracy of frequency separation. Can do.
  • the image processing unit 40 is arranged for each pixel or each block composed of two or more pixels, and a signal output from the photoelectric conversion unit 30 of the corresponding pixel or block.
  • the signal component of the interference frequency is locked in and detected.
  • an image inside the object 6 can be created at high speed by parallel processing in the image sensor 100, and the irradiation time can be extended by shortening the processing time, thereby reducing the intensity of the measurement light. be able to.
  • an effect of reducing the burden on the subject can be expected at the time of fundus examination or deep observation of a living tissue using an endoscope.
  • the image sensor 100 of the present embodiment has a processing circuit for signals for each pixel or block, and the processing circuit and the image processing unit 40 are arranged in a layer different from the photoelectric conversion unit 10. . Thereby, the area which receives light in the imaging surface of the photoelectric conversion part 10 can be increased, and a more precise image can be captured.
  • the transfer gate 303 transfers the signal to the FD 305 at the time of the on state while switching between the on state and the off state at a frequency twice the interference frequency, and performs image processing.
  • the unit 40 includes a low-pass filter 400 that separates a low-frequency component and a DC component that are equal to or less than a predetermined value from the signal output from the amplification transistor 308. Thereby, lock-in can be performed efficiently using the transfer gate 303.
  • the measuring apparatus 1 includes the image sensor 100. Thereby, OCT with high frequency separation accuracy and high depth resolution in the object 6 can be realized.
  • Modification 1 In the above-described embodiment, by switching the polarization characteristics of the measurement light, the case of measuring only the reference light and the case of measuring the interference light between the reference light and the reflected light of the measurement light by the object 6 are temporally used. You may make it the structure switched. At this time, a polarizing filter is disposed on the filter layer 102 of the photoelectric conversion unit 10.
  • FIG. 7 is a block diagram of the measuring apparatus 1 configured to switch the measurement light separated by the separation unit 20 to two polarization components orthogonal to each other by the polarization demultiplexing unit 22.
  • the polarization demultiplexing unit 22 is composed of a rotatable polarizing plate, and converts the measurement light into light having a polarization component in a predetermined direction and emits it.
  • the polarization demultiplexing unit 22 switches the light of the polarization component that is emitted between the first polarization component and the second polarization component orthogonal to the first polarization component.
  • the first polarization component is orthogonal to the polarization component extracted by the polarization filter arranged in the photoelectric conversion unit 30.
  • the polarization demultiplexing unit 22 when the polarization demultiplexing unit 22 emits light of the first polarization component, the light is blocked by the polarization filter, and only the reference light is photoelectrically converted in the photoelectric conversion unit 10.
  • the polarization demultiplexing unit 22 when the polarization demultiplexing unit 22 emits the light of the second polarization component, the interference light between the reference light and the reflected light of the measurement light from the object 6 is photoelectrically converted.
  • the image processing unit 40 removes noise or in-phase components shared by the measurement system from the signal obtained by photoelectrically converting the reference light. Thereby, the S / N ratio of the signal output from the image processing unit 40 can be increased and a more precise image can be created.
  • the polarizing filter is arranged on the pixel of the photoelectric conversion unit 30.
  • the polarizing filter may be arranged between the separation unit 20 and the photoelectric conversion unit 30 instead.
  • one transfer gate 303 exists for one PD 302 and the signal component of one depth is frequency-separated.
  • a plurality of transfer gates 303 are arranged for one PD 302, and a plurality of transfer gates 303 are arranged.
  • the signal component having a depth of may be frequency-separated. Thereby, the light from many different depths can be analyzed from the photoelectric conversion part 10 which consists of a fixed number of pixels.
  • a plurality of transfer gates 303 may frequency-separate signal components corresponding to one depth. Thereby, it is possible to cope with a case where the sampling frequency is high.
  • FIG. 8 is a diagram showing a circuit in which two transfer gates 303-1 and 303-2 are arranged for one PD 302.
  • a sample and hold circuit including a sample and hold transistor (hereinafter referred to as an SH transistor) 311-1, a capacitor 312-1, a selection transistor 304-1 and an amplification transistor 308-1; , A sample-and-hold circuit including an SH transistor 311-2, a capacitor 312-2, a selection transistor 304-2, and an amplification transistor 308-2.
  • the sample and hold circuit includes a plurality of sample and hold circuits arranged in parallel.
  • the two transfer gates 303-1 and 303-2 are switched between the on state and the off state at different periods, and transfer the photoelectrically converted charges to the FD 305 at different sampling frequencies.
  • a resetting system such as a reset transistor is not shown.
  • the voltage signal from the amplification transistor 308a is controlled by the row selection transistor 309 and the SH transistors 311-1 and 311-2, and is temporarily stored in the capacitors 312-1 and 312-2 of the sample hold circuit.
  • the charges stored in the plurality of capacitors of the sample hold circuit are distinguished from the signals transferred from the transfer gates 303-1 and 303-2 at the respective times by the selection transistors 304-1 and 304-2. Is controlled and output.
  • a PD is provided for each of the transfer gate 303-1 and the transfer gate 303-2, and a current signal photoelectrically converted in two pixels is converted into a voltage signal by one amplification transistor 308a.
  • a configuration may be adopted in which information is stored as charges in a plurality of capacitors and then read out.
  • a block composed of three or more pixels can be configured using one amplification transistor 308a. Further, each pixel may be locked in at an interference frequency corresponding to a different depth. Thereby, the process for every block can be performed efficiently.
  • the transfer gate 303-1 and the transfer gate 303-2 sample at the same sampling frequency, but the switching between the on state and the off state may be configured to be 180 degrees out of phase. it can. That is, when the transfer gate 303-1 is in the on state, the transfer gate 303-2 is in the off state, and when the transfer gate 303-1 is in the off state, the transfer gate 303-2 can be set in the on state. .
  • the image processing unit 40 can calculate the intensity of the frequency-separated signal component by calculating the sum of squares of the intensity of the signal components from the two transfer gates 303-1 and 303-2. Thus, a configuration equivalent to a two-phase lock-in is obtained, and it is not necessary to adjust the phase, and the intensity of the signal component corresponding to light from a predetermined depth can be calculated more accurately.
  • the reference light is reflected and interfered with the measurement light.
  • the reference light reflection unit 21 may be omitted.
  • FIG. 9 is a diagram illustrating an optical system 500 of the measuring apparatus 1 when the reference light reflecting section 21 is not provided.
  • the optical system 500 includes a laser 11, beam splitters 20-1 and 20-2, SFs 26-1 and 26-2, mirrors 28-1 and 28-2, a collimator lens 27, and a sensor 31. Composed.
  • the signal processing system 42 is configured by a processing device or the like, and controls the laser 11 and the sensor 31 and analyzes image information from the sensor 31.
  • BS is an abbreviation for a beam splitter
  • M is a mirror
  • CL is a collimating lens.
  • the laser light oscillated from the laser 11 is separated into reference light and measurement light by the beam splitter 20-1.
  • the measurement light emitted from the beam splitter 20-1 is converted into divergent light by the SF 26-1 and then reflected by the mirror 28-1 and the mirror 28-2 to irradiate the object 6 with a surface.
  • the reflected light from the object 6 enters the beam splitter 20-2 via the collimator lens 27.
  • the reference light emitted from the beam splitter 20-1 is converted into divergent light by the SF 26-2 and then enters the beam splitter 20-2.
  • the reference light that has entered the beam splitter 20-2 and the reflected light of the measurement light from the object 6 are combined and irradiated onto the sensor 31 that is an area sensor as interference light.
  • the measurement light optical system may have a configuration in which a collimator lens is combined in addition to the mirrors 28-1 and 28-2. Further, the collimating lens may be combined between the reference light and BS2 and the optical system from BS2 to the sensor.
  • the present invention is not limited to the contents of the above embodiment.
  • Other embodiments conceivable within the scope of the technical idea of the present invention are also included in the scope of the present invention.
  • DESCRIPTION OF SYMBOLS 1 ... Measuring apparatus, 6 ... Object, 10 ... Oscillating part, 20 ... Separating part, 21 ... Reference light reflecting part, 22 ... Polarization demultiplexing part, 26 ... SF, 30 ... Photoelectric conversion part, 40 ... Image processing part, DESCRIPTION OF SYMBOLS 41 ... Control processing part, 50 ... Display part, 22 ... Communication part, 23 ... Display part, 100 ... Imaging element, 102 ... Polarizing filter, 106 ... PD layer, 108 ... Wiring layer, 302 ... PD, 303 ... Transfer gate, 305 ... FD, 308 ... amplification transistor, 400 ... low pass filter.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • Analytical Chemistry (AREA)
  • Immunology (AREA)
  • Chemical & Material Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biochemistry (AREA)
  • Public Health (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

撮像素子は、対象物の所定の深さからの光を撮像し、対象物からの光と参照光との干渉光を含む光を光電変換する光電変換部と、光電変換部から出力された信号から、所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出する弁別部と、を備える。

Description

撮像素子、計測装置および計測方法
 本発明は、撮像素子、計測装置および計測方法に関する。
 光コヒーレンストモグラフィ(Optical Coherence Tomography:OCT)と呼ばれる、光の干渉を利用した対象物の内部からの画像計測技術が知られている。OCTでは、例えば、波長可変光源を用いて干渉可能な光を対象物に照射し、撮像により得られた画素信号から周波数分離することにより、所定の深さの信号成分を取り出すことが行われている。
 特許文献1の光断層画像生成装置では、フーリエ変換を用いて画素信号を周波数分離している。しかし、この方法だと、測定光の発振周波数の時間的変化による一回の掃引で得られる画素信号の信号開始点の位相と、信号終了点の位相が異なる場合、漏れ誤差が生じ、分離したい周波数成分を正確に取り出すことができない。従って、より正確に周波数分離を行うための方法が必要である。
日本国特開第2009-270879号
 本発明の第1の態様によると、撮像素子は、対象物の所定の深さからの光を撮像する撮像素子であって、前記対象物からの光と参照光との干渉光を含む光を光電変換する光電変換部と、前記光電変換部から出力された信号から、前記所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出する弁別部と、を備える。
 本発明の第2の態様によると、第1の態様の撮像素子において、前記撮像素子は、複数の画素を含んで構成され、前記光電変換部は、前記複数の画素のそれぞれに配置され、前記弁別部は、それぞれの前記画素ごとまたは2以上の前記画素からなるブロックごとに配置され、対応する前記画素または前記ブロックの前記光電変換部から出力された前記信号から、前記干渉周波数の信号成分をロックインして検出することが好ましい。
 本発明の第3の態様によると、第1または第2の態様の撮像素子において、前記弁別部は、その一部または全てが前記光電変換部とは異なる層に配置されていることが好ましい。
 本発明の第4の態様によると、第1から第3までのいずれかの態様の撮像素子において、前記撮像素子は、前記光電変換部が光電変換した電荷を一時的に蓄えるフローティングディフュージョン部を備え、前記弁別部は、前記信号を前記フローティングディフュージョン部に転送する転送部と、前記フローティングディフュージョン部に蓄積される電荷を、前記干渉周波数に基づいて定められるサンプリング周波数でサンプリングするサンプリング部と、を備えることが好ましい。
 本発明の第5の態様によると、第4の態様の撮像素子において、前記弁別部は、前記サンプリング部から出力された信号に、前記干渉周波数の参照信号を乗算する乗算部と、前記乗算部から出力された信号から、所定の値以下の低周波数成分および直流成分を分離する第1フィルタリング部と、を備えることが好ましい。
 本発明の第6の態様によると、第4の態様の撮像素子において、前記転送部は、前記干渉周波数に基づいた切替周波数で、オン状態とオフ状態とに切り替わりながら、前記オン状態の時に、前記信号をフローティングディフュージョンに転送し、前記弁別部は、前記サンプリング部から出力された信号から、所定の値以下の低周波数成分および直流成分を分離する第2フィルタリング部を備えることが好ましい。
 本発明の第7の態様によると、第4の態様の撮像素子において、前記撮像素子は、第1の深さからの光および第1の深さより深い第2の深さからの光を含む光と前記参照光との干渉光を撮像し、前記サンプリング部は、第2の深さに対応するサンプリング回数を、第1の深さに対応するサンプリング回数よりも多くすることが好ましい。
 本発明の第8の態様によると、第2の態様の撮像素子において、前記撮像素子は、複数の深さからの光と前記参照光との干渉光を撮像し、前記弁別部は、それぞれの前記画素ごとまたは前記ブロックごとに、前記光電変換部から出力された前記信号から、前記複数の深さに対応する複数の前記干渉光成分における複数の前記干渉周波数の信号成分をロックインして検出することが好ましい。
 本発明の第9の態様によると、第8の態様の撮像素子において、前記弁別部は、それぞれの前記ブロックごとに、前記光電変換部から出力された前記信号から、前記複数の深さに対応する複数の前記干渉光成分における複数の前記干渉周波数の信号成分をロックインして検出し、1つの前記ブロックに含まれる複数の前記画素において、前記干渉周波数はそれぞれ異なることが好ましい。
 本発明の第10の態様によると、計測装置は、第1から第9までのいずれかの態様の撮像素子と、波長が時間的に変化する波長可変光を生成する波長可変光生成部と、前記波長可変光生成部が生成した波長可変光から、前記参照光と、前記参照光と干渉可能な測定光とを分離し、前記測定光を前記対象物に照射する分離部と、を備える。
 本発明の第11の態様によると、第10の態様の計測装置において、前記波長可変光生成部は、近赤外の範囲で波長が時間的に変化する波長可変光を生成することが好ましい。
 本発明の第12の態様によると、第10または第11の態様の計測装置において、前記計測装置は、前記参照光を、第1の偏光成分と、第1の偏光成分に垂直な第2の偏光成分との光に分ける偏光分波部とを備え、前記光電変換部は、前記第1の偏光成分の参照光を光電変換する第1光電変換部と、前記第2の偏光成分の参照光と、前記測定光で照射された前記対象物の前記所定の深さからの反射光との干渉光を含む光を光電変換する第2光電変換部と、を備え、前記弁別部は、前記第1光電変換部から出力された信号に基づいて、前記第2光電変換部から出力された信号のノイズを削減するノイズ削減部を備え、前記第2光電変換部から出力された信号から、前記干渉周波数の信号成分をロックインして検出することが好ましい。
 本発明の第13の態様によると、計測方法は、干渉可能な光を生成する光生成部と、前記光を分離する分離部と、光電変換部と、前記光電変換部からの信号を処理する処理部とを備える計測システムにより、対象物の所定の深さからの光を計測する計測方法であって、前記光生成部により、波長が時間的に変化する波長可変光を生成し、前記分離部により、前記波長可変光から、参照光と、前記参照光と干渉可能な測定光とを分離し、前記測定光を前記対象物に照射し、前記光電変換部により、前記参照光と、前記測定光で照射された前記対象物の前記所定の深さからの反射光との干渉光を含む光を光電変換し、前記処理部により、前記光電変換部から出力された信号から、前記所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出することを備える。
一実施形態の計測装置の概略図である。 一実施形態の積層型撮像素子における処理回路の構成を示す概略図である。 ロックインにより特定の周波数成分の強度を取り出す方法を説明する図である。 一実施形態における周波数分離の方法を説明する概念図である。 一実施形態の積層型撮像素子の断面図である。 対象物の所定の深さからの画像を作成する流れを示すフローチャートである。 一実施形態における計測装置の概略図である。 一実施形態の積層型撮像素子における処理回路の構成を示す概略図である。 一実施形態の計測装置の光学系の概略図である。
 以下では、適宜図面を参照しながら、一実施形態の計測装置について説明する。本実施形態の計測装置は、光の干渉を用いて、対象物の所定の深さからの光の情報を取得するものであり、特に、対象物の内部の断層画像を作成するものである。
 図1は、本実施形態の計測装置1の構成を示した概略図である。計測装置1は、発振する光の波長を時間的に変化させ、干渉の起こる周期を基に所定の深さからの光を分離するSS(Swept Source)-OCTの方法による干渉計測装置である。計測装置1は、発振部10と、分離部20と、参照光反射部21と、光電変換部30と、画像処理部40と、制御処理部41と、表示部50と、スペイシャルフィルタ(以下、SFと呼ぶ)26およびレンズ27-1、27-2、27-3、27-4とを備えて構成される。本実施形態では、光電変換を行う撮像素子(後述の積層型撮像素子100)が好適に画像処理部40における画素信号の周波数分離等の処理も行う。
 なお、光電変換部30で光電変換した信号に対する周波数分離等の処理は、撮像素子の外部に配置した処理装置で行う構成にしてもよい。また、本実施形態では結像光学系において測定光を対象物6に面照射する構成としたが、ポイントセンサ等の場合は、SF26およびレンズ27-1、27-2、27-3、27-4を配置せずに構成することも可能である。
 発振部10は、周波数領域モード同期レーザー等の、波長を時間的に変化させながら、干渉可能な光を発振する発振装置で構成される。発振部10は、波長可変光生成部としての役割を担う。好ましくは、発振部10から出射する光は、可視光からミリ波の範囲の波長域の光であり、これらの波長域の光を用いると、それぞれの波長の光における透過性等の特性を利用して対象物6の内部からの反射光を得ることができる。発振部10から発振される光は、800nm~1300nmの近赤外光であることがさらに好ましい。これにより、水による光の吸収を避けながら、生体透過性の高い近赤外光による対象物深部の画像を得ることができる。 
 発振部10は、干渉周期が一定になるように、発振する光の波数が測定時間に対して一定の割合で増加するように波長を変化させる。従って、記載を簡明にするため、以降の記述では、波長ではなく、波長の逆数で定義される波数を用いて説明する。図1中には、発振部10から発振される波数-時間特性グラフ201を示した。波数-時間特性グラフ201では、時間tに対して波数k(t)が線形の関係にある。発振部10は、t1からt2までのΔtの時間、波数の値をk1からk2までΔk増加するように掃引する。この掃引を適宜繰り返すことで、関心のある複数の深さに関して、情報を取得することができる。
 なお、適宜画素信号の処理を行い、定量的に周波数分離ができるのであれば、波数と測定時間との関係は任意に設定することができる。
 発振部10から出射された光は、SF26により発散光とされ、レンズ27-1により集光されて分離部20に入射する。
 なお、SF26ではなく発散レンズを用いて発振部10から出射した光を発散してもよい。
 分離部20は、ビームスプリッター等の光学素子で構成され、レンズ27-1から出射された光を、参照光と測定光との2つに分離し、参照光を参照光反射部21に向けて出射し、測定光を対象物6に向けて出射する。出射された参照光は、対物レンズ27-2で集光され、参照光反射部21に面照射される。出射された測定光は、参照光と同等の対物レンズ27-3で集光され、対象物6に面照射される。
 参照光反射部21は、光学用ミラー等で構成され、分離部20から出射し、対物レンズ27-2を介して入射した参照光を反射し、再び対物レンズ27-2を介して分離部20へと出射する。図1中の曲がった実線矢印は、その面で光が反射されることを示す。
 なお、本実施形態では反射光学系であるマイケルソン干渉系を用いて構成したが、参照光反射部21を設けず、透過光学系であるマッハツェンダー干渉系を用いて構成してもよい。これにより、多重反射によるゴーストを抑えることができる。
 本実施形態の計測装置1は、対象物6の表面を基準面61として、測定光の対象物6の複数の深さの面からの反射光を撮像する。例えば、図1中には、対象物6の基準面61から深さZ1の測定面62-1および深さZ2の測定面62-2が示されている。
 なお、対象物6の各深さからの情報を面として解析するのではなく、計測装置1をポイントセンサとして、対象物6の内部の測定光の光軸に沿った各点の深さの情報を解析してもよい。また、基準面は対象物6の表面に限定されず、任意に設定してよい。
 対象物6の内部で反射した光は、対物レンズ27-3を介し分離部20に入射する。分離部20は、測定光が対象物6の内部で反射した光と、参照光反射部21から入射した参照光とを干渉可能に合成し、集光レンズ27-4を介し光電変換部30に出射する。集光レンズ27-4は、参照光と対象物6への測定光との干渉光を光電変換部30のエリアセンサ上へ結像させるためのレンズであり、対象物6の同一深さからの反射光の干渉光を該エリアセンサに面照射させる。破線矢印の先には、対象物6の深さZ1と深さZ2からのそれぞれの光と参照光との干渉光の振幅を計測時間に対して模式的に表したグラフ202を示した。グラフ202を参照すればわかるように、対象物6の異なる深さZ1、Z2からのそれぞれの光は、異なる干渉周期の干渉光として計測されることになる。また、通常は、より深い位置からの反射光の方が振幅が小さい。
 光電変換部30は、フォトダイオード(以下、PDと呼ぶ)等の光電変換素子により構成され、分離部20から入射した、参照光と、測定光の対象物6による反射光との干渉光を光電変換して信号を画像処理部40に出力する。本実施形態の光電変換部30は、撮像素子100のPDにより構成される。後述のように、撮像素子100は画素毎にPDを備え、PDで光電変換された信号が画素毎に配置された処理回路に出力される。また、計測装置1がポイントセンサの場合、光電変換部30は、1つのPDにより構成される。計測装置1がポイントセンサの場合、バランス検出器により測定系のコモンノイズ、及び同相成分の除去により高SNを実現した構成でもよい。
 画像処理部40は、撮像素子100の処理回路により構成され、光電変換部30からの出力信号を周波数分離して所定の深さの信号成分を取り出す。画像処理部40は、制御処理部41の制御により弁別部としての役割を担う。出力信号の周波数分離は、出力信号に、所定の深さに対応する周波数の参照信号を乗算するのと等価な処理を行うことで実現される。
 なお、光電変換された信号を処理する処理回路および画像処理部40は画素毎ではなく、複数の画素からなる画素ブロックごとに配置されていてもよい。また、画像処理部40は、撮像素子100の外部に配置してもよい。
 発振部10が発振する波数がdk変化すると、測定光の対象物6のある深さZからの反射光と、参照光との位相差はdθ=dk×2×Zだけ変化する。従って、参照光と測定光の対象物6からの反射光との干渉光は、位相dθが2πの整数倍の回数分明暗を繰り返して振動する。すなわち、dkがπ/Z増加するごとに干渉光が1周期分明暗を繰り返すことになる。本実施形態のように発振部10が波数と時間とを線形の関係で掃引すれば、干渉周期は深さZごとに一定となり、また干渉周期は深さに反比例する。以下では、この干渉周期の逆数を干渉周波数と呼ぶ。干渉光を光電変換した信号を周波数分離する際、干渉周波数はロックインにおける参照信号の周波数の役割を果たす。
 以上では、対象物6内部の屈折率を1として説明したが、例えば対象物6内部の屈折率が一様にnであれば、上述の計算式のZをnZとして計算するなど、対象物6内部の屈折率に応じて適宜実効的な光路長により計算することが望ましい。
 図2は、光電変換された電流信号を、電流電圧変換して出力するための撮像素子100の電流電圧変換回路300の構成を示す図である。電流電圧変換回路300は、弁別部としての役割を担う画像処理部40の処理回路の一部である。電流電圧変換回路300は、PD302と、転送ゲート303と、フローティングディフュージョン(以下、FDと呼ぶ)305と、リセットトランジスタ306と、VDD307と、増幅トランジスタ308と、行選択トランジスタ309と、垂直信号線310とを備える。
 PD302は、参照光と、測定光の対象物6からの反射光との干渉光を光電変換する。光電変換された電荷は、転送部としての役割を担う転送ゲート303によりFD305に転送される。転送ゲート303は、不図示の転送信号線からの制御により、干渉周波数の2倍の周波数でオン状態とオフ状態とが切り替わりながら、オン状態のときに所定のサンプリング周波数に基づいたタイミングで光電変換された電荷をFD305に転送する。これにより、転送ゲート303は、サンプリング周波数でサンプリングした信号に、干渉周波数の矩形波の信号とを乗算したものと等価な信号を出力することになる。すなわち、転送ゲート303は、サンプリング部および乗算部としての役割も担う。
 図3は、ロックインによる周波数分離の概念図である。ロックインにより測定信号から周波数ωの成分を取り出したいときは、参照信号として同じ周波数ωの正弦波を乗算し、直流成分と周波数2ωの成分とに分離した後、ローパスフィルタで直流成分を取り出す。ここで、近似的に参照信号は周波数ωの矩形波でもよい。上述の転送ゲート303のオン状態は、矩形波の出力電圧がAの値の状態に相当し、オフ状態は、矩形波の出力電圧が0の値の状態に相当する。
FD305に転送された電荷は、増幅トランジスタ308により電圧信号として出力され、行選択トランジスタ309の制御の下にサンプリング周波数で垂直信号線310から読み出される。出力された電圧信号は、ローパスフィルタ400により直流成分および/または低周波数成分が取り出され、これらの値に基づいて、対象物6の所定の深さに対応する信号成分の信号強度が計算される。好ましくは、該信号強度は、直流成分の値の振幅である。FD305の電位が読み出されると、リセットトランジスタ306とVDD307とにより、FD305の電位はリセットされる。
 図4はサンプリング周波数の決定方法を説明する図である。対象物6の深さZ1からの信号を抽出するためのサンプリング周期Ts1(サンプリング周波数の逆数)は、サンプリング定理により、深さZ1に対応する干渉周期T1の2分の1以下の値に設定される。同様に、対象物6の深さZ2からの信号を抽出するためのサンプリング周期Ts2は、サンプリング定理により、深さZ2に対応する干渉周期T2の2分の1以下の値に設定される。深さZ1および深さZ2からの干渉光の振幅は、グラフ203に示したように、長い周期T1の波に短い周期T2の波が重ねあわされた波形となる。この干渉光を光電変換し他信号を周波数分離すると、それぞれの干渉周波数に対応した対象物6の深さZ1および深さZ2の信号成分の強度をそれぞれ定量的に算出することができる。グラフ204では、干渉周波数に対応する対象物6の深さZを横軸に取り、信号強度を縦軸にとってグラフにしたパワースペクトルの模式図を示した。
 本実施形態のように、周波数弁別の手段として高速フーリエ変換(以下、FFTと呼ぶ)ではなくロックインを用いることにより、例えば生体内の深い場所から一部は散乱して減衰して返ってくる微弱な反射光と参照光による微弱な干渉光を高感度で検出可能となる。
 更に、ポイントセンサ(1つの画素に相当)と、後段処理としてFFTで構成されたSS-OCTを、2次元の画像センサーに実装するとなると、各画素にFFTを連結した構造である必要がある。各画素にFFTをかける為のサンプリングデータを蓄積し、そのデータからFFTによりパワースペクトルを算出する必要が有る為、多画素化する程サンプリングデータ蓄積用のメモリが比例して必要となり、メモリ容量が増大する。一方、本実施形態の計測装置1では、ロックインの参照信号の周波数でサンプリングした振幅の出力値がその画素部での周波数に対応した対象物6の深部での出力値に相当する為、FFT処理で必要となる膨大なサンプリングデータを必要としない。このため、例えば対象物6のある一定の深さの断面画像を取得する為には、FFTによるパワースペクトル解析の為には、上記膨大なサンプリングデータが必要となるが、本実施形態のロックイン方式では対応する深さに相当する周波数で参照信号によりサンプリングした画素の出力値より一括で画像化する事が可能であり、断面出力のメモリの負荷がFFT方式と比較して圧倒的に少ない。よって、特にエリアセンサにより高精細な2次元断面画素を取得する構成としてロックインを採用すると、撮像素子100内に実装可能な構成となる。
 以上から、深さZ1よりも、深さZ2の方が値が大きい(より深い)ため、干渉周期は短くなり、サンプリング周波数も高くなる必要がある。この場合、一回の波数掃引における、深さZ2の信号成分を抽出する際のサンプリング回数を、深さZ1の信号成分を抽出する際のサンプリング回数よりも多くする。これにより、同一サンプリング時間内でサンプリング回数Nを増やすことができ、Nの平方根に比例する信号のS/N比を上げることができる。特に、対象物6内での測定面の深さが深くなるにつれて反射光の強度が減衰するため、ノイズによる信号の劣化を防ぐ点で有効である。
 同様の理由で、対象物6の深さが2つよりも多い場合に、対象物6の深さが深いほど、一回の波数掃引における、その深さからの信号成分を抽出する際のサンプリング回数を多くするように構成することができる。
 なお、まず画素信号をサンプリング周波数でサンプリングした後、得られた電圧信号を干渉周波数の参照信号によりロックインして周波数分離してもよい。これにより、所望の計測条件に合わせて適宜効率的に構成することができる。この場合、例えば、図2に示す電流電圧変換回路300では、周知の選択回路および乗算回路が、垂直信号線310がローパスフィルタ400に入力する手前に配置される。そして、転送ゲート303は、サンプリング周波数よりも高い、予め定められたタイミング(例えば、オン状態とオフ状態を切り替えられる最も短い間隔)で電荷を転送する。その後、選択回路が上述したサンプリング周波数でサンプリングして得られた電圧信号を、乗算回路がロックインして周波数分離し、ローパスフィルタ400に出力する。この場合、乗算回路は、乗算部としての機能を担う。
 制御処理部41は、表示部50で表示される画像を適宜調整するとともに、計測装置1全体の制御を行う。制御処理部41は、得られた対象物6の複数の深さの画像を基に、対象物6の3次元画像を作成する。制御処理部41は、作成した3次元画像を、ユーザにより所望の方向から観察できるようにするなど、視認性を高める操作を加え、適宜所定の深さの2次元の画像と共に表示部50に出力する。
 制御処理部41は、必要に応じて発振部10の波長掃引のタイミングと撮像素子100のサンプリングのタイミングを調整する。上述の1位相によるロックインでは、サンプリングする時の信号成分の位相により得られる信号強度が変化するため、位相調整をすることにより振幅を高精度に検出することができる。
 表示部50は、液晶モニタ等の任意の表示装置で構成され、制御処理部41が作成した対象物6の所定の深さの画像、または対象物6の3次元画像を表示する。
<積層型撮像素子の説明>
 上述した計測装置1の光電変換部30と、画像処理部40とを構成する積層型撮像素子100について説明する。なお、この積層型撮像素子100は、本願出願人が先に出願して公開されたWO13/164915号に記載されているものである。
 図5は、積層型撮像素子100の断面図である。撮像素子100は、入射光に対応した画素信号を出力する裏面照射型撮像チップ113と、画素信号を処理する信号処理チップ111と、画素信号を記憶するメモリチップ112とを備える。これら撮像チップ113、信号処理チップ111およびメモリチップ112は積層されており、Cu等の導電性を有するバンプ109により互いに電気的に接続される。
 なお、図示するように、入射光は主に白抜き矢印で示す方向へ向かって入射する。本実施形態においては、撮像チップ113において、入射光が入射する側の面を裏面(撮像面)と称する。
 撮像チップ113の一例は、裏面照射型のCMOSイメージセンサである。撮像チップ113は、図1の機能ブロックにおける光電変換部30の機能の一部または全部として物理的に構成される。PD層106は、配線層108の裏面側に配されている。PD層106は、2次元的に配され、入射光に応じた電荷を蓄積する複数のPD104、および、PD104に対応して設けられたトランジスタ105を有する。
 PD層106における入射光の入射側にはパッシベーション膜103を介してフィルタ層102が設けられる。フィルタ層102には、必要に応じて偏光フィルタ等のフィルタが配置される。フィルタ層102、PD104およびトランジスタ105の組が、一つの画素を形成する。
 フィルタ層102における入射光の入射側には、それぞれの画素に対応して、マイクロレンズ101が設けられる。マイクロレンズ101は、対応するPD104へ向けて入射光を集光する。
 配線層108は、PD層106からの画素信号を信号処理チップ111に伝送する配線107を有する。配線107は多層であってもよく、また、受動素子および能動素子が設けられてもよい。
 配線層108の表面には複数のバンプ109が配される。当該複数のバンプ109が信号処理チップ111の対向する面に設けられた複数のバンプ109と位置合わせされて、撮像チップ113と信号処理チップ111とが加圧等されることにより、位置合わせされたバンプ109同士が接合されて、電気的に接続される。
 同様に、信号処理チップ111およびメモリチップ112の互いに対向する面には、複数のバンプ109が配される。これらのバンプ109が互いに位置合わせされて、信号処理チップ111とメモリチップ112とが加圧等されることにより、位置合わせされたバンプ109同士が接合されて、電気的に接続される。
 なお、バンプ109間の接合には、固相拡散によるCuバンプ接合に限らず、はんだ溶融によるマイクロバンプ結合を採用してもよい。また、バンプ109は、例えば後述する一つのブロックに対して一つ程度設ければよい。したがって、バンプ109の大きさは、PD104のピッチよりも大きくてもよい。また、画素が配列された画素領域以外の周辺領域において、画素領域に対応するバンプ109よりも大きなバンプを併せて設けてもよい。
 信号処理チップ111は、表裏面にそれぞれ設けられた回路を互いに接続するTSV(シリコン貫通電極)110を有する。TSV110は、周辺領域に設けられることが好ましい。また、TSV110は、撮像チップ113の周辺領域、メモリチップ112にも設けられてよい。信号処理部チップ111は、図1の機能ブロックにおける画像処理部40の機能の一部または全部の主体として物理的に構成される。なお、画像処理部40は、その一部が撮像チップ113に設けられてもよい。
 上述の撮像素子100は、撮像素子100のそれぞれの画素ごとに出力される信号に対する処理回路を有し、図1の機能ブロックにおける制御処理部41の機能の一部または全部の主体として物理的に構成される。
 図6は、計測装置1が対象物6の所定の深さの画像を撮像し、表示する流れを示すフローチャートである。このフローチャートで示された方法により、ロックインを利用した、精度の高い周波数分離による精密なOCT画像を得ることができる。
 ステップS1001において、発振部10は、波数を時間的に変化させながら干渉可能な光を生成する。干渉可能な光が生成されたら、ステップS1003に進む。ステップS1003において、分離部20は、生成された干渉可能な光を参照光と測定光とに分離し、参照光を参照光反射部21に向けて照射し、測定光を対象物6に向けて照射する。それぞれの光が照射されたら、ステップS1005に進む。
 ステップS1005において、光電変換部30は、参照光と、測定光の対象物6による反射光との干渉光を光電変換する。干渉光が光電変換されたら、ステップS1007に進む。ステップS1007において、転送ゲート303は、ロックインする周波数に基づいた周波数でオン状態とオフ状態とを繰り返しながら、オン状態の時に、光電変換された電荷をサンプリング周波数に基づいてFD305に転送する。電荷がFD305に転送されたら、ステップS1009に進む。
 ステップS1009において、画像処理部40は、行選択トランジスタ309の制御により、サンプリング周波数でFD305の電荷を電圧信号として出力する。電圧信号が出力されたら、ステップS1011に進む。ステップS1011において、画像処理部40は、出力された電圧信号から、ローパスフィルタにより直流成分および/または低周波数成分を取り出す。画像処理部40は、得られた直流成分および/または低周波数成分の値を基に信号成分の強度を算出し、制御処理部41に出力する。信号成分の強度が出力されたら、ステップS1013に進む。
 ステップS1013において、制御処理部41は、各画素からの出力に基づいて所定の深さからの画像および3次元画像を作成する。作成された画像は表示部50に出力される。画像が出力されたら、ステップS1015に進む。ステップS1015において、表示部50は、作成された所定の深さからの画像および3次元画像を表示する。これらの画像が表示されたら、処理を終了する。
 上述の実施の形態によれば、次の作用効果が得られる。
(1)本実施形態の撮像素子100は、光電変換部30から出力された信号から、所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出する画像処理部40を備える。これにより、FFT等を用いて周波数分離する場合に発生する漏れ誤差を防ぐとともに、ロックインアンプの原理から狭帯域のローパスフィルタによるQ値の高いフィルタリングを行うため、周波数分離の精度を向上させることができる。
(2)本実施形態の撮像素子100において、画像処理部40は、それぞれの画素ごとまたは2以上の画素からなるブロックごとに配置され、対応する画素またはブロックの光電変換部30から出力された信号から、干渉周波数の信号成分をロックインして検出する。これにより、撮像素子100内での並列処理により、高速に対象物6内部の画像を作成することができ、また、処理時間の短縮により照射時間を延長でき、その分、測定光の強度を減らすことができる。これにより、例えば眼底検査や、内視鏡による生体組織の深部観察等の際に、被検者への負担が軽減される効果が期待できる。
(3)本実施形態の撮像素子100は、それぞれの画素ごとまたはブロックごとに信号に対する処理回路を有し、処理回路および画像処理部40は、光電変換部10とは異なる層に配置されている。これにより、光電変換部10の撮像面における受光する面積を増加させ、より精密な画像を撮像することができる。
(4)本実施形態の撮像素子100は、転送ゲート303は、干渉周波数の2倍の周波数で、オン状態とオフ状態とに切り替わりながら、オン状態の時に、信号をFD305に転送し、画像処理部40は、増幅トランジスタ308から出力された信号から、所定の値以下の低周波数成分および直流成分を分離するローパスフィルタ400を備える。これにより、転送ゲート303を利用して効率的にロックインを行うことができる。
(5)本実施形態の計測装置1は、撮像素子100を備える。これにより、周波数分離の精度が高く、対象物6内の深さ分解能の高いOCTを実現することができる。
 次のような変形も本発明の範囲内であり、上述の実施形態と組み合わせることが可能である。
(変形例1)
 上述の実施形態において、測定光の偏光特性を切り替えることにより、参照光のみを計測する場合と、参照光と測定光の対象物6による反射光との干渉光を計測する場合とで時間的に切り替える構成にしてもよい。このとき、光電変換部10のフィルタ層102には偏光フィルタが配置される。
 図7は、分離部20で分離された測定光を偏光分波部22で互いに直交する2つの偏光成分に切り替える構成にした計測装置1のブロック図である。偏光分波部22は、回転可能な偏光板により構成され、測定光を所定の方向の偏光成分の光に偏光変換して出射する。偏光分波部22は、第1の偏光成分と、第1の偏光成分に直交する第2の偏光成分との間で出射する偏光成分の光を切り替える。第1の偏光成分は、光電変換部30に配置された偏光フィルタで取り出す偏光成分と直交する。この構成によると、偏光分波部22が第1の偏光成分の光を出射するときは、当該光は偏光フィルタに遮られ、光電変換部10では、参照光のみが光電変換される。一方、偏光分波部22が第2の偏光成分の光を出射するときは、参照光と、測定光の対象物6による反射光との干渉光が光電変換される。画像処理部40は、参照光を光電変換した信号から、測定系で共有されるノイズまたは同相成分を除去する。これにより、画像処理部40から出力される信号のS/N比を高め、より精密な画像を作成することができる。
 なお、ここでいう「直交する」とは、2つの偏光成分を持つ光が、偏光成分の違いに起因して可干渉性を失うのであれば、円偏光等も含んでよい。また、上記では光電変換部30の画素上に偏光フィルタを配置する構成にしたが、その代わりに分離部20と光電変換部30との間に偏光フィルタを配置する構成にしてもよい。
(変形例2)
 上述の実施形態では、1つのPD302に対して1つの転送ゲート303が存在し、1つの深さの信号成分を周波数分離したが、1つのPD302に対して複数の転送ゲート303を配置し、複数の深さの信号成分を周波数分離してもよい。これにより、一定の数の画素からなる光電変換部10から、より多くの異なる深さからの光を解析することができる。
 なお、複数の転送ゲート303により、1つの深さに対応する信号成分を周波数分離してもよい。これにより、サンプリング周波数が高い場合にも対応することができる。
 図8は、1つのPD302に対して2つの転送ゲート303-1、303-2が配置された回路を示す図である。また、図2の回路の構成に加え、サンプルホールドトランジスタ(以下、SHトランジスタと呼ぶ)311-1、コンデンサ312-1、選択トランジスタ304-1および増幅トランジスタ308-1により構成されるサンプルホールド回路と、SHトランジスタ311-2、コンデンサ312-2、選択トランジスタ304-2および増幅トランジスタ308-2により構成されるサンプルホールド回路とが記載されている。図8中には省略されているが、サンプルホールド回路は、図8中に示した2つのサンプルホールド回路の他、並列して複数のサンプルホールド回路が配置されている。2つの転送ゲート303-1、303-2は、それぞれ異なる周期でオン状態とオフ状態とが切り替えられ、それぞれ異なるサンプリング周波数でFD305に光電変換された電荷を転送する。
 なお、図8のサンプルホールド回路については、リセットトランジスタ等のリセットするための系は図示を省略している。
 増幅トランジスタ308aからの電圧信号は、行選択トランジスタ309およびSHトランジスタ311-1、311-2に制御され、サンプルホールド回路のコンデンサ312-1、312-2等に一時的に蓄えられる。サンプルホールド回路の複数のコンデンサにそれぞれ蓄積された電荷は、選択トランジスタ304-1、304-2等により、転送ゲート303-1、303-2からそれぞれの時刻に転送されたそれぞれの信号が区別されるように制御されて出力される。
 なお、図8の回路において、転送ゲート303-1および転送ゲート303-2のそれぞれに対してPDを設け、2つの画素において光電変換された電流信号を1つの増幅トランジスタ308aで電圧信号に変換し、適宜複数のコンデンサに電荷として情報を保存した後、読み出す構成にしてもよい。3以上の画素からなるブロックについても同様に1つの増幅トランジスタ308aを用いて構成することができる。また、それぞれの画素について、異なる深さに対応する干渉周波数でロックインしてもよい。これにより、効率的にブロックごとの処理を行うことができる。
(変形例3)
 上述の変形例2において、転送ゲート303-1と転送ゲート303-2とは、同一のサンプリング周波数でサンプリングするが、オン状態とオフ状態との切り替わりは、位相が180度ずれる構成にすることができる。つまり、転送ゲート303-1がオン状態の時は、転送ゲート303-2がオフ状態で、転送ゲート303-1がオフ状態の時は、転送ゲート303-2がオン状態に設定することができる。画像処理部40は、2つの転送ゲート303-1、303-2からの信号成分の強度の二乗和等を算出することにより、周波数分離した信号成分の強度を計算することができる。これにより、2位相のロックインと等価な構成となり、位相調整をする必要がなく、より正確に所定の深さからの光に対応する信号成分の強度を算出することができる。
(変形例4)
 上述の実施形態では、参照光を反射させ、測定光と干渉させる構成としたが、参照光反射部21を設けずに構成することもできる。
 図9は、参照光反射部21を設けない場合の計測装置1の光学系500を例示した図である。光学系500は、レーザー11と、ビームスプリッタ20-1、20-2と、SF26-1、26-2と、ミラー28-1、28-2と、コリメートレンズ27と、センサ31とを備えて構成される。信号処理系42は、処理装置等により構成され、レーザー11とセンサ31とを制御するとともに、センサ31からの画像情報の解析等を行う。図9中のBSはビームスプリッタ、Mはミラー、CLはコリメートレンズの略である。
 レーザー11から発振されたレーザー光は、ビームスプリッタ20-1において参照光と測定光に分離される。ビームスプリッタ20-1から出射した測定光は、SF26-1で発散光とされた後、ミラー28-1およびミラー28-2で反射され、対象物6に面照射される。対象物6からの反射光は、コリメートレンズ27を介しビームスプリッタ20-2に入射する。ビームスプリッタ20-1から出射した参照光は、SF26-2で発散光とされた後、ビームスプリッタ20-2に入射する。ビームスプリッタ20-2に入射した、参照光と、測定光の対象物6による反射光とは、合成されて干渉光としてエリアセンサであるセンサ31に面照射される。参照光反射部21を設けないこのような光学系の構成により、一部のノイズを抑えることができる。
 なお、図示していないが、測定光の光学系にはミラー28-1、28-2以外にコリメートレンズを組み合わせた構成でもよい。また、参照光とBS2の間、及びBS2からセンサまでの光学系についてもコリメートレンズを組み合わせた構成としてもよい。
 本発明は上記実施形態の内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。
 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。
 日本国特許出願2015年第225948号(2015年11月18日出願)
1…計測装置、6…対象物、10…発振部、20…分離部、21…参照光反射部、22…偏光分波部、26…SF、30…光電変換部、40…画像処理部、41…制御処理部、50…表示部、22…通信部、23…表示部、100…撮像素子、102…偏光フィルタ、106…PD層、108…配線層、302…PD、303…転送ゲート、305…FD、308…増幅トランジスタ、400…ローパスフィルタ。

Claims (13)

  1.  対象物の所定の深さからの光を撮像する撮像素子であって、
     前記対象物からの光と参照光との干渉光を含む光を光電変換する光電変換部と、
     前記光電変換部から出力された信号から、前記所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出する弁別部と、
    を備える撮像素子。
  2.  請求項1に記載の撮像素子において、
     前記撮像素子は、複数の画素を含んで構成され、
     前記光電変換部は、前記複数の画素のそれぞれに配置され、
     前記弁別部は、それぞれの前記画素ごとまたは2以上の前記画素からなるブロックごとに配置され、対応する前記画素または前記ブロックの前記光電変換部から出力された前記信号から、前記干渉周波数の信号成分をロックインして検出する撮像素子。
  3.  請求項1または2に記載の撮像素子において、
     前記弁別部は、その一部または全てが前記光電変換部とは異なる層に配置されている撮像素子。
  4.  請求項1~3のいずれか一項に記載の撮像素子において、
     前記撮像素子は、前記光電変換部が光電変換した電荷を一時的に蓄えるフローティングディフュージョン部を備え、
     前記弁別部は、
      前記信号を前記フローティングディフュージョン部に転送する転送部と、
      前記フローティングディフュージョン部に蓄積される電荷を、前記干渉周波数に基づいて定められるサンプリング周波数でサンプリングするサンプリング部と、
    を備える撮像素子。
  5.  請求項4に記載の撮像素子において、
     前記弁別部は、
      前記サンプリング部から出力された信号に、前記干渉周波数の参照信号を乗算する乗算部と、
      前記乗算部から出力された信号から、所定の値以下の低周波数成分および直流成分を分離する第1フィルタリング部と、
    を備える撮像素子。
  6.  請求項4に記載の撮像素子において、
     前記転送部は、前記干渉周波数に基づいた切替周波数で、オン状態とオフ状態とに切り替わりながら、前記オン状態の時に、前記信号をフローティングディフュージョンに転送し、
     前記弁別部は、前記サンプリング部から出力された信号から、所定の値以下の低周波数成分および直流成分を分離する第2フィルタリング部を備える撮像素子。
  7.  請求項4に記載の撮像素子において、
     前記撮像素子は、第1の深さからの光および第1の深さより深い第2の深さからの光を含む光と前記参照光との干渉光を撮像し、前記サンプリング部は、第2の深さに対応するサンプリング回数を、第1の深さに対応するサンプリング回数よりも多くする撮像素子。
  8.  請求項2に記載の撮像素子において、
     前記撮像素子は、複数の深さからの光と前記参照光との干渉光を撮像し、
     前記弁別部は、
     それぞれの前記画素ごとまたは前記ブロックごとに、前記光電変換部から出力された前記信号から、前記複数の深さに対応する複数の前記干渉光成分における複数の前記干渉周波数の信号成分をロックインして検出する撮像素子。
  9.  請求項8に記載の撮像素子において、
     前記弁別部は、それぞれの前記ブロックごとに、前記光電変換部から出力された前記信号から、前記複数の深さに対応する複数の前記干渉光成分における複数の前記干渉周波数の信号成分をロックインして検出し、
     1つの前記ブロックに含まれる複数の前記画素において、前記干渉周波数はそれぞれ異なる撮像素子。
  10.  請求項1~9のいずれか一項に記載の撮像素子を備える計測装置において、
     前記計測装置は、
     波長が時間的に変化する波長可変光を生成する波長可変光生成部と、
     前記波長可変光生成部が生成した波長可変光から、前記参照光と、前記参照光と干渉可能な測定光とを分離し、前記測定光を前記対象物に照射する分離部と、
    を備える計測装置。
  11.  請求項10に記載の計測装置において、
     前記波長可変光生成部は、近赤外の範囲で波長が時間的に変化する波長可変光を生成する計測装置。
  12.  請求項10または11に記載の計測装置において、
     前記計測装置は、
     前記参照光を、第1の偏光成分と、第1の偏光成分に垂直な第2の偏光成分との光に分ける偏光分波部とを備え、
     前記光電変換部は、
     前記第1の偏光成分の参照光を光電変換する第1光電変換部と、
     前記第2の偏光成分の参照光と、前記測定光で照射された前記対象物の前記所定の深さからの反射光との干渉光を含む光を光電変換する第2光電変換部と、を備え、
     前記弁別部は、
     前記第1光電変換部から出力された信号に基づいて、前記第2光電変換部から出力された信号のノイズを削減するノイズ削減部を備え、
     前記第2光電変換部から出力された信号から、前記干渉周波数の信号成分をロックインして検出する計測装置。
  13.  干渉可能な光を生成する光生成部と、前記光を分離する分離部と、光電変換部と、前記光電変換部からの信号を処理する処理部とを備える計測システムにより、対象物の所定の深さからの光を計測する計測方法であって、
     前記光生成部により、波長が時間的に変化する波長可変光を生成し、
     前記分離部により、前記波長可変光から、参照光と、前記参照光と干渉可能な測定光とを分離し、前記測定光を前記対象物に照射し、
     前記光電変換部により、前記参照光と、前記測定光で照射された前記対象物の前記所定の深さからの反射光との干渉光を含む光を光電変換し、
     前記処理部により、前記光電変換部から出力された信号から、前記所定の深さに対応する干渉光成分における干渉周波数の信号成分をロックインして検出することを備える計測方法。
     
PCT/JP2016/084277 2015-11-18 2016-11-18 撮像素子、計測装置および計測方法 WO2017086442A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP16866442.3A EP3382375B1 (en) 2015-11-18 2016-11-18 Imaging capture element, measurement device, and measurement method
JP2017551948A JP6702335B2 (ja) 2015-11-18 2016-11-18 撮像素子、計測装置および計測方法
US15/981,466 US10939060B2 (en) 2015-11-18 2018-05-16 Image sensor, measuring device, and measuring method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-225948 2015-11-18
JP2015225948 2015-11-18

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/981,466 Continuation US10939060B2 (en) 2015-11-18 2018-05-16 Image sensor, measuring device, and measuring method

Publications (1)

Publication Number Publication Date
WO2017086442A1 true WO2017086442A1 (ja) 2017-05-26

Family

ID=58718995

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/084277 WO2017086442A1 (ja) 2015-11-18 2016-11-18 撮像素子、計測装置および計測方法

Country Status (4)

Country Link
US (1) US10939060B2 (ja)
EP (1) EP3382375B1 (ja)
JP (1) JP6702335B2 (ja)
WO (1) WO2017086442A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190290117A1 (en) * 2018-03-22 2019-09-26 Kabushiki Kaisha Topcon Interferometric fundus imaging method
GB2622252A (en) * 2022-09-08 2024-03-13 Comind Tech Limited System and method

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10241611A (ja) * 1996-12-25 1998-09-11 Kagaku Gijutsu Shinko Jigyodan 2次元ロックイン画像増幅観測装置
US6020963A (en) * 1996-06-04 2000-02-01 Northeastern University Optical quadrature Interferometer
JP2008151697A (ja) * 2006-12-19 2008-07-03 Fujifilm Corp 光断層画像化装置
JP2009270879A (ja) 2008-05-02 2009-11-19 Olympus Corp 光断層画像生成装置
JP2011196771A (ja) * 2010-03-18 2011-10-06 Canon Inc 光干渉断層撮像装置
JP2012202774A (ja) * 2011-03-24 2012-10-22 Nikon Corp 観察装置及び観察方法
WO2013164915A1 (ja) 2012-05-02 2013-11-07 株式会社ニコン 撮像装置
JP2014115161A (ja) * 2012-12-07 2014-06-26 Nippon Telegr & Teleph Corp <Ntt> 動的焦点移動型光干渉断層顕微鏡
WO2015001918A1 (ja) * 2013-07-04 2015-01-08 株式会社日立ハイテクノロジーズ 干渉測定方法、及びその装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4566685B2 (ja) * 2004-10-13 2010-10-20 株式会社トプコン 光画像計測装置及び光画像計測方法
US8919957B2 (en) * 2006-01-20 2014-12-30 Clarity Medical Systems, Inc. Apparatus and method for operating a real time large diopter range sequential wavefront sensor
JP5283216B2 (ja) * 2008-07-31 2013-09-04 国立大学法人静岡大学 高速電荷転送フォトダイオード、ロックインピクセル及び固体撮像装置
US9348055B2 (en) * 2011-06-14 2016-05-24 Analogic Corporation Security scanner
EP2735861B1 (de) * 2012-11-27 2020-10-07 Siemens Healthcare Diagnostics Products GmbH Verfahren zur Ermittlung eines Transmissionswertes
US9774801B2 (en) * 2014-12-05 2017-09-26 Qualcomm Incorporated Solid state image sensor with enhanced charge capacity and dynamic range

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6020963A (en) * 1996-06-04 2000-02-01 Northeastern University Optical quadrature Interferometer
JPH10241611A (ja) * 1996-12-25 1998-09-11 Kagaku Gijutsu Shinko Jigyodan 2次元ロックイン画像増幅観測装置
JP2008151697A (ja) * 2006-12-19 2008-07-03 Fujifilm Corp 光断層画像化装置
JP2009270879A (ja) 2008-05-02 2009-11-19 Olympus Corp 光断層画像生成装置
JP2011196771A (ja) * 2010-03-18 2011-10-06 Canon Inc 光干渉断層撮像装置
JP2012202774A (ja) * 2011-03-24 2012-10-22 Nikon Corp 観察装置及び観察方法
WO2013164915A1 (ja) 2012-05-02 2013-11-07 株式会社ニコン 撮像装置
JP2014115161A (ja) * 2012-12-07 2014-06-26 Nippon Telegr & Teleph Corp <Ntt> 動的焦点移動型光干渉断層顕微鏡
WO2015001918A1 (ja) * 2013-07-04 2015-01-08 株式会社日立ハイテクノロジーズ 干渉測定方法、及びその装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3382375A4

Also Published As

Publication number Publication date
EP3382375B1 (en) 2021-05-26
US20180262702A1 (en) 2018-09-13
JPWO2017086442A1 (ja) 2018-10-04
EP3382375A1 (en) 2018-10-03
US10939060B2 (en) 2021-03-02
JP6702335B2 (ja) 2020-06-03
EP3382375A4 (en) 2019-06-19

Similar Documents

Publication Publication Date Title
JP6817387B2 (ja) Ladarシステム及び方法
US11471039B2 (en) High resolution 3-D spectral domain optical imaging apparatus and method
JP6312000B2 (ja) 分光装置
JP6764880B2 (ja) 偏光特性画像計測装置、偏光特性画像計測方法
JP6581713B2 (ja) 位相コントラスト及び/又は暗視野撮像のためのx線検出器、該x線検出器を有する干渉計、x線撮像システム、位相コントラストx線撮像及び/又は暗視野x線撮像を行う方法、コンピュータプログラム、コンピュータ読取可能な媒体
US7339170B2 (en) Optical encoding and reconstruction
JP6125981B2 (ja) 光断層画像装置用サンプルクロック発生装置、および光断層画像装置
KR101206832B1 (ko) 광간섭 단층촬영 장치 및 그를 이용한 광간섭 단층촬영 방법
JP2017208812A (ja) 撮像装置、撮像システムおよび光検出方法
JP2005516187A (ja) スペクトル帯域の並列検出による測距並びに低コヒーレンス干渉法(lci)及び光学コヒーレンス断層撮影法(oct)信号の雑音低減のための装置及び方法
US10939060B2 (en) Image sensor, measuring device, and measuring method
JP2015117978A (ja) 光干渉断層計
JP4852651B2 (ja) 多重化スペクトル干渉光コヒーレンストモグラフィー
CN105675134B (zh) 基于flc的高光谱全偏振成像装置和方法
KR101257355B1 (ko) 광간섭 단층촬영 장치
JP6539987B2 (ja) 撮像素子および撮像装置
CN107894204B (zh) 干涉仪及其成像方法
KR20080051546A (ko) 오씨티 시스템
JP2010117372A (ja) 多重化スペクトル干渉光コヒーレンストモグラフィー
WO2017168711A1 (ja) 撮像素子、撮像システムおよび撮像方法
JP2017096884A (ja) 撮像装置
JP6684569B2 (ja) 光干渉断層撮影装置
JP2005351727A (ja) 光画像計測方法及びそれを用いた光干渉断層イメージング装置
WO2022271874A1 (en) Rapid coherent synthetic wavelength interferometric absolute distance measurement
JP2007311730A (ja) クロストーク測定装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16866442

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017551948

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016866442

Country of ref document: EP