WO2021200960A1 - 観察装置 - Google Patents

観察装置 Download PDF

Info

Publication number
WO2021200960A1
WO2021200960A1 PCT/JP2021/013564 JP2021013564W WO2021200960A1 WO 2021200960 A1 WO2021200960 A1 WO 2021200960A1 JP 2021013564 W JP2021013564 W JP 2021013564W WO 2021200960 A1 WO2021200960 A1 WO 2021200960A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
observation
optical system
image
detector
Prior art date
Application number
PCT/JP2021/013564
Other languages
English (en)
French (fr)
Inventor
亨 今井
禎生 太田
Original Assignee
シンクサイト株式会社
国立大学法人東京大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シンクサイト株式会社, 国立大学法人東京大学 filed Critical シンクサイト株式会社
Priority to JP2022512546A priority Critical patent/JPWO2021200960A1/ja
Publication of WO2021200960A1 publication Critical patent/WO2021200960A1/ja
Priority to US17/935,707 priority patent/US20230012588A1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1456Optical investigation techniques, e.g. flow cytometry without spatial resolution of the texture or inner structure of the particle, e.g. processing of pulse signals
    • G01N15/1459Optical investigation techniques, e.g. flow cytometry without spatial resolution of the texture or inner structure of the particle, e.g. processing of pulse signals the analysis being performed on a sample stream
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/02Investigating particle size or size distribution
    • G01N15/0205Investigating particle size or size distribution by optical means
    • G01N15/0227Investigating particle size or size distribution by optical means using imaging; using holography
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1429Signal processing
    • G01N15/1433Signal processing using image recognition
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1434Optical arrangements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1468Optical investigation techniques, e.g. flow cytometry with spatial resolution of the texture or inner structure of the particle
    • G01N15/147Optical investigation techniques, e.g. flow cytometry with spatial resolution of the texture or inner structure of the particle the analysis being performed on a sample stream
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1484Optical investigation techniques, e.g. flow cytometry microstructural devices
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/02Investigating particle size or size distribution
    • G01N15/0205Investigating particle size or size distribution by optical means
    • G01N2015/025Methods for single or grouped particles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/02Investigating particle size or size distribution
    • G01N2015/0294Particle shape
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N2015/1006Investigating individual particles for cytology
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1434Optical arrangements
    • G01N2015/144Imaging characterised by its optical setup
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N2015/1493Particle size
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N2015/1497Particle shape

Definitions

  • the present invention relates to an observation device.
  • the present application claims priority based on Japanese Patent Application No. 2020-065941 filed in Japan on April 1, 2020, the contents of which are incorporated herein by reference.
  • a two-dimensional image of a cell is generated by irradiating an excitation light while flowing down a fluorescently labeled cell in a flow path and acquiring the fluorescence brightness emitted from each cell.
  • Imaging cytometers that perform sorting are known.
  • Rich morphological information includes, for example, information obtained from an image obtained by multi-contrast utilizing differences in optical characteristics, information obtained from an image having a higher spatial resolution than before, and the like.
  • a means for enabling high-speed measurement that directly contributes to the improvement of productivity is required.
  • a technique for directly analyzing cell morphological information without converting it into a two-dimensional image has been developed, and a ghost cytometry technique is known as an example.
  • cells can be irradiated with structured illumination, and cells can be separated directly from the time-series waveform of the obtained optical signal, resulting in high speed, high sensitivity, low cost, and compactness.
  • Flow cytometer can be provided.
  • the present invention has been made in view of the above points, and provides an observation device capable of acquiring richer morphological information at a higher speed than before in observing an observation object.
  • the present invention has been made to solve the above problems, and one aspect of the present invention includes an illumination optical system and an observation optical system, and the illumination optical system includes a light source and an aperture member.
  • the observation optical system includes an objective lens, an optical structure, and a detector, and the optical structure is arranged at a first position which is a position conjugate with the aperture member.
  • the optical structure has a blocking portion that blocks light and a transmitting portion that transmits light, and an image of the opening portion of the opening member whose shape of the blocking portion is imaged on the optical structure.
  • the detector is an observation device that detects dark-field light that has passed through the optical structure.
  • one aspect of the present invention is the opening member which has a phase changing portion for changing the phase of light and a transmitting portion for transmitting light in the above observation device and is imaged in the phase changing portion. From the second optical structure whose shape of the image of the opening substantially matches the shape of the phase changing portion, and from the optical structure in the optical path between the objective lens and the detector.
  • the second The optical structure of No. 1 is arranged at a position conjugate with the position where the opening member is arranged and at a second position which does not coincide with the first position.
  • the observation optical system is modulated by a spatial modulation unit that modulates a part of light passing through the second optical structure and the spatial modulation unit. It further includes a phase difference waveform detection system for detecting the emitted light.
  • the illumination optical system further includes an epifluorescent illumination optical system that irradiates the observation object with illumination light from below, and the observation optical system is the observation object. Further provided is an epi-fluorescence detector that detects fluorescence generated by irradiating an object with the illumination light by the epi-fluorescence-illuminated optical system and transmitted through the optical structure.
  • the detector that detects the light modulated by the space modulation unit includes a plurality of photodetectors, and the space modulation unit is the optical structure. It has a surface on which a part of the light passing through the surface is incident, and the light incident on the surface is randomly modulated for each region included in the surface, and the plurality of photodetecting elements have a longitudinal direction in the flow path.
  • the flowing image of the observation object is arranged in series in a direction substantially perpendicular to the direction of movement on the detector.
  • the spatial modulation unit has a surface on which light passing through the optical structure is incident, and the light incident on the surface is randomly modulated for each region included in the surface, and the detector is used in the longitudinal direction. Includes the plurality of photodetectors arranged in a direction in which an image of cells flowing through the flow path is substantially perpendicular to the direction in which the cells move on the detector.
  • the detector that detects the light modulated by the space modulation unit includes a plurality of photodetectors, and the space modulation unit is the optical structure.
  • the observation element has a surface on which light passing through the surface is incident, and the light incident on the surface is randomly modulated for each region included in the surface, and the plurality of photodetecting elements flow through the flow path in the longitudinal direction.
  • the image of the object is arranged in parallel in a direction substantially parallel to the direction of movement on the detector.
  • the above-mentioned observation device further includes a microfluidic device including a flow path through which an object to be observed can flow together with a fluid, and the detector determines the phase of the optical structure or light. It has a phase changing portion to be changed and a transmitting portion for transmitting light, and the shape of the image of the opening of the opening member imaged in the phase changing portion is substantially the same as the shape of the phase changing portion.
  • a part of the light passing through the second optical structure having a shape is detected by a plurality of photodetecting elements arranged in a row, and the plurality of photodetecting elements are the observation objects flowing through the flow path. Images of objects are arranged in a row at an angle of a predetermined angle with respect to the direction of movement on the detector.
  • morphological information regarding an observation object can be simultaneously acquired as phase difference information and dark field information having high spatial resolution, and can be combined with other detection methods such as fluorescence detection to form a more multifaceted form. Allows you to get information.
  • FIG. 1 is a diagram showing an example of the configuration of the observation device D1 according to the present embodiment.
  • the observation device D1 observes a dark field image.
  • the observation device D1 includes a microscope 3 and a camera 4.
  • the microscope 3 is an epi-illumination type microscope device that performs dark field observation.
  • the microscope 3 includes a light source 30, a collimator 31, a slit 32, a condenser lens 33, a stage 34, an objective lens unit 35, an objective lens 36, a shading plate 37, an imaging lens 38, and a mirror 39.
  • the slit 32 is an example of an opening member.
  • FIG. 2 is a diagram showing an example of the configuration of the light-shielding plate 37 according to the present embodiment.
  • the light-shielding plate 37 has a light-shielding portion 370 and a transmission portion 371.
  • the shape of the light-shielding portion 370 is an annular shape, and the shape of the annular opening of the slit 32 is substantially the same as or includes the shape of the image formed on the light-shielding portion 370.
  • the light-shielding unit 370 blocks the direct light from the light source that passes through the observation object.
  • the transmission unit 371 transmits the diffracted light and the scattered light emitted from the observation object.
  • the light source 30, the collimator 31, the slit 32, and the condenser lens 33 are included in the illumination optical system.
  • the objective lens unit 35, the objective lens 36, the light-shielding plate 37, the imaging lens 38, and the camera 4 are included in the observation optical system. Therefore, the observation device D1 includes an illumination optical system including a light source 30, a slit 32, an objective lens unit 35, an objective lens 36, a light-shielding plate 37, an imaging lens 38, and a camera 4. It has a system.
  • the observation device D1 In conventional dark-field observation, only an objective lens having a small numerical aperture (NA) can be used in order to prevent non-scattered light, that is, direct light from entering the objective lens.
  • NA numerical aperture
  • the numerical aperture of the objective lens 36 can be made larger than the numerical aperture of the objective lens used for conventional dark field observation. ..
  • the observation device D1 according to the present embodiment can measure scattered light having a large scattering angle, and can improve the spatial resolution as compared with the conventional dark field observation.
  • the scattered light having a large scattering angle contains information on a component having a high spatial frequency.
  • the numerical aperture of the objective lens 36 can be made larger than the numerical aperture of the objective lens used for conventional dark field observation, so that it is necessary to increase the numerical aperture of the lens included in the illumination optical system. It is possible to improve the degree of freedom in optical design.
  • the second embodiment described above will be described.
  • the phase plate as the second optical structure is provided at a second position that is conjugate to the position where the opening member is arranged and does not coincide with the first position.
  • the phase difference between the direct light that the light emitted from the observation object has passed through the phase plate and the diffracted light and / or scattered light.
  • An example of an observation device further including a phase difference detector for detection will be described.
  • the observation device according to this embodiment is referred to as an observation device D2.
  • the same configurations and operations as those of the first embodiment described above are designated by the same reference numerals, and the description thereof will be omitted.
  • the microscope 3a is different from the microscope 3 shown in FIG. 1 in that the phase plate 37a is provided instead of the light-shielding plate 37.
  • the phase plate 37a is arranged at a position conjugate with the position where the slit 32 is arranged.
  • a part of the light emitted from the observation object enters the phase plate 37a via the objective lens 36.
  • the mirror 60 reflects a part of the light emitted from the microscope 3b and guides it to the phase difference transmission image detection optical system 6, and transmits the remaining part to the dark field transmission image detection optical system 5.
  • the objective lens 36 and the phase plate 37a are included in the objective lens unit 35a.
  • the dark field transmission image detection optical system 5 includes a lens 50, a light-shielding plate 51, a lens 52, and a camera 53.
  • the light imaged on the image plane 310 of the microscope 3a enters the lens 50 from the microscope 3a and is emitted as parallel light.
  • the parallel light emitted from the lens 50 is incident on the light-shielding plate 51.
  • the light-shielding plate 51 is arranged at a position conjugate with the position where the slit 32 is arranged, and is arranged at a position different from the position where the phase plate 37a is arranged. As described above, in the present embodiment, the first position where the light-shielding plate 51 is arranged and the second position where the phase plate 37a is arranged do not match.
  • the configuration of the light-shielding plate 51 is the same as the configuration of the light-shielding plate 37 of FIG. 1, but the positions where they are arranged are different.
  • FIG. 4 is a diagram showing an example of the configuration of the light-shielding plate 51 according to the present embodiment.
  • the light-shielding plate 51 has a light-shielding portion 510 and a transmission portion 511.
  • the shape of the light-shielding portion 510 is annular, and the shape of the annular phase-changing portion of the phase plate 37a substantially matches the shape of the image formed on the light-shielding plate 51, or includes the shape thereof. The shape is.
  • the transmission unit 511 transmits the diffracted light and the scattered light emitted from the observation object.
  • the light-shielding plate 51 is an example of an optical structure.
  • the light transmitted through the light-shielding plate 51 is collected by the lens 52 and imaged on the imaging surface of the camera 53.
  • the camera 53 detects dark field light that has passed through the light-shielding plate 51, which is an optical structure. Darkfield light is diffracted light and scattered light emitted from an object to be observed.
  • the phase difference transmission image detection optical system 6 is an optical system for observing a phase difference image.
  • the phase difference transmission image detection optical system 6 includes a mirror 60, a lens 61, a lens 62, a camera 63, and a wavelength filter 64.
  • the mirror 60 reflects a part of the light emitted from the microscope 3b and guides it toward the camera 63, and transmits the remaining part and guides it to the dark field transmission image detection optical system 5.
  • the lens 61 makes the light reflected by the mirror 60 parallel light.
  • the lens 62 forms an image of the light paralleled by the lens 61 on the imaging surface of the camera 63.
  • the camera 63 is arranged closer to the objective lens 36 than the shading plate 51 in the optical path between the objective lens 36 and the camera 53.
  • the camera 63 detects the light imaged by the lens 62.
  • a wavelength filter 64 is provided on the lens 62 side of the detection surface of the camera 63.
  • the wavelength filter 64 transmits light having a wavelength included in a predetermined wavelength range for performing phase difference observation, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the camera 63 detects the light transmitted through the wavelength filter 64 among the light imaged by the lens 62.
  • the light imaged by the lens 62 is direct light, diffracted light, and scattered light in which the light emitted from the observation object has passed through the phase plate 37a.
  • the diffracted light generated when passing through an object (phase object) that causes diffraction inside the observation object has a phase difference with respect to the direct light.
  • the phase-modulated direct light interferes with the above-mentioned diffracted light and scattered light when they are imaged by the phase plate 37a, so that the image of the phase object has a contrast with respect to the surroundings.
  • the camera 63 detects the phase difference between the direct light and the diffracted light and the scattered light.
  • the camera 63 detects a phase difference image in which an image of an observation object is captured, which has contrast based on the detected phase difference. In this phase difference observation, the phase difference between the direct light and the diffracted light and the scattered light caused by the difference in the refractive index of each part of the observation object is detected with contrast.
  • the camera 63 is an example of a
  • FIG. 5 is a diagram showing an example of the configuration of the observation device D3 according to the present embodiment.
  • the observation device D3 includes a microscope 3b, a dark field transmission image detection optical system 5b, a phase difference transmission image detection optical system 6, a bright field transmission image detection optical system 7, and an epi-fluorescence image detection optical system 8.
  • the dark field transmission image detection optical system 5b, the phase difference transmission image detection optical system 6, the bright field transmission image detection optical system 7, and the epi-fluorescence image detection optical system 8 are included in the observation optical system.
  • the microscope 3b is different from the configuration of the microscope 3a shown in FIG. 3 as the second embodiment described above in that the microscope 3b has a configuration for performing epi-fluorescence observation.
  • the configuration for performing epi-fluorescence observation includes an excitation light source 311, an excitation filter 312, a dichroic mirror 313, and an absorption filter 314.
  • the excitation light source 311 is a light source for irradiating the observation object with excitation light.
  • the excitation light source 311 is, for example, a mercury lamp. Further, the excitation light source 311 may be a laser light source or an LED light source.
  • the excitation filter 312 is, for example, a bandpass filter, which transmits light having a specific wavelength among the light emitted from the excitation light source 311 and does not transmit light other than the specific wavelength.
  • the dichroic mirror 313 reflects the excitation light emitted from the excitation light source 311 and has passed through the excitation filter 312, and irradiates the observation object mounted on the stage 34.
  • the dichroic mirror 313 transmits the fluorescence emitted from the observation object toward the imaging lens 38.
  • the absorption filter 314 transmits the fluorescence emitted from the observation object and absorbs excess light that hinders the observation of the fluorescent image.
  • the fluorescence transmitted through the absorption filter 314 is reflected by the mirror 39 through the imaging lens 38 and emitted from the microscope 3b.
  • the excitation light source 311, the excitation filter 312, and the dichroic mirror 313 constitute an epi-fluorescence illumination optical system that irradiates the observation object with illumination light from below. Therefore, the illumination optical system provided in the observation device D3 includes an epifluorescent illumination optical system.
  • the first light is light (direct light, diffracted light, and scattered light) generated by irradiating the observation object with the light emitted from the light source 30.
  • the second light is fluorescence generated by irradiating the observation object with the excitation light emitted from the excitation light source 311.
  • the observation by the observation device D3 will be described in the order of phase difference observation, dark field observation, bright field observation, and epi-fluorescence observation.
  • the phase difference transmission image detection optical system 6 is an optical system for observing a phase difference image. Since the configuration of the phase difference transmission image detection optical system 6 is the same as the configuration of the phase difference transmission image detection optical system 6 shown in FIG. 3, detailed description thereof will be omitted.
  • the mirror 60 reflects a part of the light emitted from the microscope 3b and guides it to the phase difference transmission image detection optical system 6, and transmits the remaining part to the dark field transmission image detection optical system 5b.
  • the dark field transmission image detection optical system 5b includes a lens 50, a reflection member 51b, a lens 52, a camera 53, a wavelength filter 54, and a dichroic mirror 55b.
  • the dark field transmission image detection optical system 5b includes a reflection member 51b instead of the light-shielding plate 51, and a wavelength filter 54 and a dichroic mirror 55b, which is the dark field shown in FIG. It is different from the transmission image detection optical system 5.
  • the reflective member 51b is arranged at a position conjugate with the position where the slit 32 is arranged, and is arranged at a position different from the position of the phase plate 37a.
  • the light transmitted through the mirror 60 described above is incident on the reflection member 51b as parallel light by the lens 50.
  • the reflective member 51b is an example of an optical structure.
  • FIG. 6 is a diagram showing an example of the configuration of the reflective member 51b according to the present embodiment.
  • the reflection member 51b has a reflection portion 510b and a transmission portion 511b.
  • the shape of the reflecting portion 510b projected onto the plane perpendicular to the optical axis is an annular shape in which the phase changing portion of the phase plate 37a substantially matches or includes the shape of the image formed on the reflecting member 51b.
  • the reflecting unit 510b reflects the direct light (0th-order diffracted light) of the light emitted from the observation object and guides it to the bright field transmission image detection optical system 7.
  • the normal line of the reflective member 51b is inclined with respect to the optical axis.
  • the reflecting member 51b reflects the direct light in a direction not parallel to the optical axis.
  • the transmission unit 511b transmits diffracted light, scattered light, and fluorescence among the light emitted from the observation object.
  • the reflective portion 510b is, for example, a mirror having an annular shape.
  • the wavelength filter 54 is provided on the side of the lens 52 on the detection surface of the camera 53.
  • the wavelength filter 54 transmits light having a wavelength included in a predetermined wavelength range for dark field observation, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the camera 53 detects the light transmitted through the wavelength filter 54 among the light imaged by the lens 52.
  • the dichroic mirror 55b reflects light having a wavelength equal to or higher than a predetermined wavelength among the light transmitted through the reflecting member 51b, and transmits light having a wavelength lower than a predetermined wavelength.
  • the predetermined wavelength is, for example, 500 nm.
  • the dichroic mirror 55b transmits the light (diffracted light and scattered light) generated by irradiating the observation object with the light emitted from the light source 30, and guides the light toward the camera 53.
  • the dichroic mirror 55b reflects the fluorescence generated by irradiating the observation object with the excitation light emitted from the excitation light source 311 and guides it to the epi-fluorescence image detection optical system 8.
  • the light transmitted through the dichroic mirror 55b is imaged on the imaging surface of the camera 53 by the lens 52.
  • the bright field transmission image detection optical system 7 is an optical system for performing bright field observation.
  • the bright field transmission image detection optical system 7 includes a lens 70, a camera 71, and a wavelength filter 72.
  • the lens 70 forms an image of the direct light reflected by the reflection member 51b described above on the imaging surface of the camera 71.
  • the camera 71 detects a bright-field transmission image in which an image of the observation object is captured by bright-field observation.
  • a wavelength filter 72 is provided on the side of the lens 70 on the detection surface of the camera 71.
  • the wavelength filter 72 transmits light having a wavelength included in a predetermined wavelength range for bright-field observation, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the camera 71 detects the light transmitted through the wavelength filter 72 among the light imaged by the lens 70. In this bright field observation, a change in the intensity of light absorbed for each portion of the observation object is detected as the contrast of the image.
  • the epi-fluorescence image detection optical system 8 is an optical system for observing epi-fluorescence.
  • the epi-fluorescent image detection optical system 8 includes a dichroic mirror 80, a lens 81, a camera 82, a wavelength filter 83, a lens 84, a camera 85, and a wavelength filter 86.
  • the dichroic mirror 80 transmits a wavelength in a predetermined range of the light reflected by the dichroic mirror 55b, and reflects a wavelength outside the predetermined range.
  • the predetermined range is, for example, 550 nm or more and 650 nm or less.
  • the dichroic mirror 80 reflects the fluorescence emitted from the observation object by staining with fluorescein isothiocyanate (FITC) and guides it toward the camera 82.
  • FITC fluorescein isothiocyanate
  • the dichroic mirror 80 transmits the fluorescence emitted from the observation object by staining of propidium iodide (PI) and guides the fluorescence toward the camera 85.
  • PI propidium iodide
  • the lens 81 forms an image of the fluorescence reflected by the dichroic mirror 80 (fluorescence due to dyeing of FITC) on the imaging surface of the camera 82.
  • the camera 82 detects the epi-fluorescence image in which the image of the observation object is captured by the epi-fluorescence observation.
  • a wavelength filter 83 is provided on the side of the lens 81 on the detection surface of the camera 82.
  • the wavelength filter 83 transmits light having a wavelength included in a predetermined wavelength range for performing epi-fluorescence observation, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the camera 82 detects the light transmitted through the wavelength filter 83 among the light imaged by the lens 81. In this epi-fluorescence image, the image is detected based on the intensity of fluorescence emitted when the object to be observed is stained by FITC.
  • the lens 84 forms an image of the fluorescence transmitted by the dichroic mirror 80 (fluorescence due to dyeing of PI) on the imaging surface of the camera 85.
  • the camera 82 detects the epi-fluorescence image in which the image of the observation object is captured by the epi-fluorescence observation.
  • a wavelength filter 86 is provided on the side of the lens 84 on the detection surface of the camera 85.
  • the wavelength filter 86 transmits light having a wavelength included in a predetermined wavelength range for performing epi-fluorescence observation, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the camera 85 detects the light transmitted through the wavelength filter 86 among the light imaged by the lens 84. In this epi-fluorescence image, the image is detected based on the intensity of fluorescence emitted when the object to be observed is stained by PI.
  • the camera 82, the camera 85, the lens 81, and the lens 84 detect the fluorescence generated by irradiating the observation object with the illumination light by the epi-fluorescence illumination optical system and transmitted through the reflection member 51b, which is an example of the optical structure. do.
  • the camera 82 and the camera 85 are examples of an epifluorescence detector.
  • the observation optical system includes an epifluorescence detector. Note that FIG. 5 describes a case where two fluorescence detectors are arranged, but the present invention is not limited to this.
  • the number of epi-fluorescence detectors included in the epi-fluorescence illumination optical system may be one, or may be three or more.
  • the dark field transmission image detection optical system 5b detects the dark field image
  • the phase difference transmission image detection optical system 6 detects the retardation image
  • the bright field transmission image detection optical system 7 detects the retardation image.
  • a bright-field transmission image is detected, and two types of epi-fluorescence images are detected by the epi-fluorescence image detection optical system 8. Since the observation device D3 obtains a plurality of types of images at the same time, it is possible to suppress variations in measurement due to changes in the state of the observation object, etc., as compared with the case where a plurality of types of images are obtained by a plurality of measurements.
  • a plurality of detectors (camera 53, camera 63, camera 71, camera 82, and camera 85) are used, respectively, and the detectors are shared. Not done.
  • the detector is shared in the detection of a plurality of types of images, it is necessary to assign the sensor of the detector to each of the plurality of types of images. Therefore, the size of the sensor that can be used for each of the plurality of types of images is It will be smaller than the size of the sensor that the detector originally has.
  • the observation device D3 since the observation device D3 does not share a detector for detecting a plurality of types of images, the detection can be performed with the size of the sensor originally possessed by the detector. Therefore, the observation device D3 can detect a plurality of types of images having high spatial resolution without sacrificing the spatial resolution of the detector.
  • the observation device may include a microfluidic device including a flow path through which the observation object can flow together with the fluid, and observe the observation object flowing through the flow path. That is, the observation device may be used for flow cytometry.
  • the observation device may be used for flow cytometry.
  • the fourth embodiment, the fifth embodiment, and the sixth embodiment described below an example of the case where the observation device is used for flow cytometry will be described.
  • a part of the phase difference detection and the dark field detection is information indicating a time-series waveform of an optical signal without reconstructing an image. Is performed by a detection method that can directly obtain.
  • a detection optical system that acquires a time-series waveform that can directly acquire morphological information of such an observation object will be referred to as a waveform detection optical system.
  • a waveform detection optical system using ghost cytometry technology is used, and the light emitted from the observation target is structured detection in which a spatial modulator such as a structural mask pattern is installed in the optical path between the objective lens and the detector. Detected by.
  • the detector receives the structured light having a plurality of regions in which the light emitted from the observation target has different optical characteristics depending on the spatial modulator.
  • the surface on which the light of the spatial modulator is incident has a structure in which a plurality of regions are irregularly distributed within a certain region, and the light passing through the spatial modulator receives different modulation for each region and is structured. Is converted to.
  • the light is modulated by a plurality of irregularly scattered regions of the spatial modulator as described by randomly modulating the incident light for each region.
  • the optical structure of the light modulated by the spatial modulator is, for example, a structure in which two values of light and dark are randomly distributed, and the optical structure has a specific fixed structure, but the optical structure and the observation target are relative to each other.
  • the spatial information of the observation target is compressed and included in the time waveform signal of the optical signal to be detected.
  • a flow cytometer using ghost cytometry technology that directly analyzes the time-series waveform of the optical signal emitted from the observation target using machine learning without reconstructing it as an image has already been reported. By optimizing the classifier for discrimination by machine learning, quick and accurate analysis and discrimination can be performed.
  • the same configurations and operations as those of the third embodiment described above are designated by the same reference numerals, and the description thereof will be omitted.
  • FIG. 7 is a diagram showing an example of the configuration of the observation device D4 according to the present embodiment.
  • the observation device D4 includes a microfluidic device (not shown) in addition to the illumination optical system and the observation optical system.
  • the microfluidic device includes a flow path through which the object to be observed can flow with the fluid.
  • the observation device D4 includes a microscope 3c, a dark field transmission image detection optical system 5c, a phase difference transmission image detection optical system 6, a phase difference waveform detection optical system 9, and a forward scattered light (Forward Scatter: FSC) detection optical system.
  • a dark field waveform detection optical system 11, a fluorescence detection optical system 12, and a side scattered light (SSC) detection optical system 13 are provided.
  • the microfluidic device is provided in the microscope 3c.
  • the observation device D4 is an observation device provided in the flow cytometer.
  • some detection optical systems of the observation device D4 include a photomultiplier tube (PMT) as a configuration.
  • PMT photomultiplier tube
  • Those PMTs are single-channel photodetectors (single PMTs).
  • some of the detection optical systems of the observation device D4 are provided with a structural pattern mask as a configuration.
  • the structural pattern mask modulates the light emitted from the microscope 3c.
  • the light modulated by the structural pattern mask includes light that has passed through the reflective member 51b, which is an optical structure.
  • Modulating light means, for example, structuring by changing optical properties such as light intensity for each region of space.
  • the structural pattern mask is an example of a spatial modulation unit that modulates light that has passed through an optical structure.
  • the structural pattern mask (structural pattern mask 91 and structural pattern mask 112) is a spatial filter having a region for transmitting light and a region for not transmitting light.
  • the structural pattern mask is, for example, a film in which a plurality of regions having different optical characteristics are printed on the surface.
  • the optical equipment installed in the optical path from the light source included in the microscope 3c to the observation object is included in the illumination optical system.
  • the FSC detection optical system 10, the dark field waveform detection optical system 11, the fluorescence detection optical system 12, and the SSC detection optical system 13 are included in the observation optical system.
  • Some optical instruments of the microscope 3c are included in both the illumination optical system and the observation optical system.
  • the microscope 3c is different from the configuration of the microscope 3b shown in FIG. 5 as the third embodiment described above in that it includes a configuration for detecting FSC and SSC and that it includes a flow cell 34c instead of the stage 34.
  • the configuration for detecting FSC and SSC includes an FSC / SSC light source 315c and a dichroic mirror 316c. FSCs and SSCs are used to detect morphological information of observation objects such as (label-free) cells without labeling.
  • the flow cell 34c is a flow path through which an observation object such as a cell flows together with the fluid.
  • the FSC / SSC light source 315c is a light source of light irradiated to an observation object in order to acquire FSC and SSC, and an example of light for acquiring FSC / SSC is laser light.
  • the dichroic mirror 316c reflects light having a predetermined wavelength or higher and transmits light having a wavelength lower than the predetermined wavelength.
  • the predetermined wavelength is, for example, 500 nm.
  • the dichroic mirror 316c transmits the light emitted from the light source 30.
  • the laser light emitted from the FSC / SSC light source 315c is reflected and guided toward the observation target.
  • the light emitted from the FSC / SSC light source 315c to the observation object is scattered by the observation object.
  • the scattered light generated by being scattered by the observation object passes through the dichroic mirror 313 and is emitted from the microscope 3c via the imaging lens 38 and the mirror 39.
  • the third light is FSC and SSC generated by scattering the laser light by the observation object.
  • the optical system for detecting various types of light by the observation device D4 will be described in order. Since the phase difference transmission image detection optical system 6 is the same as the observation device D3 shown in FIG. 5, the description thereof will be omitted.
  • the dark field transmission image detection optical system 5c includes a lens 50, a mirror 55c, a reflection member 51b, a mirror 56c, a lens 57c, a camera 53c, and a wavelength filter 54c.
  • the dark field transmission image detection optical system 5c includes a mirror 55c, a mirror 56c, a lens 57c, a camera 53c, and a wavelength filter 54c. Different from system 5b.
  • the mirror 55c reflects a part of the parallel light emitted from the lens 50 and guides it toward the phase difference waveform detection optical system 9, and transmits the remaining part and guides it to the mirror 56c.
  • the reflecting member 51b reflects the FSC out of the diffracted light and the scattered light emitted from the observation object by the reflecting unit 510b, and guides the FSC to the FSC detection optical system 10.
  • the mirror 56c reflects a part of the light transmitted through the transmitting portion 511b of the reflecting member 51b toward the camera 53c, transmits the remaining part, and guides the light to the dark field waveform detection optical system 11.
  • the lens 57c, the camera 53c, and the wavelength filter 54c have the same functions as the lens 52, the camera 53, and the wavelength filter 54 shown in FIG. 5, and are arranged in the observation device D3 in different positions and orientations. Since the configurations other than the above are the same, the description thereof will be omitted.
  • the phase difference waveform detection optical system 9 is an optical system for detecting a time waveform based on phase difference observation between direct light emitted from an observation object, diffracted light, and scattered light.
  • the phase difference waveform detection optical system 9 includes a lens 90, a structural pattern mask 91, a lens 92, a lens 93, a PMT 94, and a wavelength filter 95.
  • the lens 90 forms an image of the parallel light reflected by the mirror 55c at the position of the structural pattern mask 91.
  • the lens 92 makes the light structured by the structural pattern mask 91 parallel light and causes it to enter the lens 93.
  • the lens 93 collects the structured light made parallel by the lens 92 onto the PMT 94.
  • the PMT94 is capable of observing the phase difference of the direct light emitted from the observation object by detecting the phase difference between the structured light and the diffracted light and the scattered light in a structured manner in time series. Detect based time waveforms.
  • a wavelength filter 95 is provided on the lens 93 side of the detection surface of the PMT 94.
  • the wavelength filter 95 transmits light having a wavelength included in a predetermined wavelength range for detecting a time waveform based on a phase difference image, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the PMT 94 detects the light that has passed through the wavelength filter 95 among the light that has been collected by the lens 93.
  • the FSC detection optical system 10 is an optical system for detecting FSC (intensity of forward scattered light) emitted from an observation object by irradiation of light from an FSC / SSC light source.
  • the FSC detection optical system 10 includes a lens 100, a PMT 101, a wavelength filter 102, and a spatial filter 103.
  • the lens 100 collects the FSC reflected by the reflecting member 51b on the PMT 101.
  • the PMT 101 detects the FSC in the light emitted from the observation object.
  • a wavelength filter 102 and a spatial filter 103 are provided on the lens 100 side of the detection surface of the PMT 101.
  • the wavelength filter 102 transmits light having a wavelength included in a predetermined wavelength range for FSC detection, and does not transmit light having a wavelength not included in this wavelength range.
  • the spatial filter 103 directly blocks the incident light and transmits the FSC propagating in the forward direction. Therefore, the PMT 101 detects the FSC in the light transmitted through the wavelength filter 102 and the spatial filter 103 in the light imaged by the lens 100.
  • the FSC is used to obtain information on the size of the object to be observed.
  • FIG. 7 shows an example in which the wavelength filter 102 and the space filter 103 are provided in the order of the wavelength filter 102 and the space filter 103 from the side closer to the lens 100 on the detection surface of the PMT 101.
  • the spatial filter 103 may be provided in the order of the spatial filter 103 and the wavelength filter 102 from the side of the detection surface of the PMT 101 closer to the lens 100.
  • the dark-field waveform detection optical system 11 is an optical system for detecting the waveform of dark-field light emitted from an observation object by dark-field observation.
  • the dark field waveform detection optical system 11 includes a dichroic mirror 110, a lens 111, a structural pattern mask 112, a lens 113, a PMT 114, and a wavelength filter 115.
  • the configuration of the dichroic mirror 110 is the same as the configuration of the dichroic mirror 55b shown in FIG. 5 above.
  • the dichroic mirror 110 transmits the light (diffracted light and scattered light) generated by irradiating the observation object with the light emitted from the light source 30 and guides the light toward the PMT 114.
  • the lens 111 forms an image of the light transmitted through the dichroic mirror 110 at the position of the structural pattern mask 112.
  • the structural pattern mask 112 causes the imaged light to enter the lens 113 as structured light.
  • the lens 113 collects the light structured by the structural pattern mask 112 onto the PMT 114.
  • the PMT 114 detects the structured light of the dark field light emitted from the observation object in chronological order.
  • a wavelength filter 115 is provided on the side of the lens 113 on the detection surface of the PMT 114.
  • the wavelength filter 115 transmits light having a wavelength included in a predetermined wavelength region for performing dark field waveform detection, and does not transmit light having a wavelength not included in this wavelength region. Therefore, the PMT 114 detects the light transmitted through the wavelength filter 115 among the light formed by the lens 113.
  • the fluorescence detection optical system 12 is an optical system for detecting fluorescence emitted from an observation object by irradiation with an excitation light source 311.
  • the fluorescence detection optical system 12 includes a dichroic mirror 120, a lens 121, a PMT 122, a wavelength filter 123, a dichroic mirror 124, a lens 125, a PMT 126, and a wavelength filter 127.
  • the configuration of the dichroic mirror 120 is the same as the configuration of the dichroic mirror 80 shown in FIG. 5 above.
  • the dichroic mirror 120 reflects the fluorescence due to the dyeing of FITC among the light reflected by the dichroic mirror 110 and guides it toward the PMT 122.
  • the dichroic mirror 120 transmits the fluorescence due to the dyeing of PI among the light reflected by the dichroic mirror 110 and guides the light toward the PMT 126.
  • the lens 121 collects the fluorescence reflected by the dichroic mirror 120 on the PMT 122.
  • the PMT 122 detects the intensity of fluorescence emitted when the object to be observed is stained by FITC in chronological order.
  • a wavelength filter 123 is provided on the side of the lens 121 on the detection surface of the PMT 122.
  • the wavelength filter 123 transmits light having a wavelength included in a predetermined wavelength range for performing fluorescence detection, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the PMT 122 detects the light transmitted through the wavelength filter 123 among the light imaged by the lens 121.
  • the dichroic mirror 124 reflects wavelengths in a predetermined range of the light transmitted by the dichroic mirror 120, and transmits wavelengths outside the predetermined range.
  • the predetermined range is, for example, a wavelength of 637 nm.
  • the dichroic mirror 124 transmits the fluorescence emitted from the observation object among the light transmitted through the dichroic mirror 120, which is the fluorescence due to the staining of PI, and guides the light toward the PMT 126.
  • the dichroic mirror 124 reflects the SSC emitted from the observation object among the light transmitted by the dichroic mirror 120 and guides it to the SSC detection optical system 13.
  • the lens 125 collects the fluorescence transmitted through the dichroic mirror 124 to the PMT 126.
  • the PMT126 detects the intensity of fluorescence emitted when the object to be observed is stained by PI in chronological order.
  • a wavelength filter 127 is provided on the side of the lens 125 on the detection surface of the PMT 126.
  • the wavelength filter 127 transmits light having a wavelength included in a predetermined wavelength range for performing fluorescence detection, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the PMT 126 detects the light transmitted through the wavelength filter 127 among the light imaged by the lens 125.
  • the SSC detection optical system 13 is an optical system for detecting SSC emitted from an observation object by irradiation with the FSC / SSC light source 315c.
  • the SSC detection optical system 13 includes a lens 130, a PMT 131, and a wavelength filter 132.
  • the lens 130 collects the SSC reflected by the dichroic mirror 124 on the PMT 131.
  • the PMT 131 detects the SSC in the light emitted from the observation object.
  • a wavelength filter 132 is provided on the side of the lens 130 on the detection surface of the PMT 131.
  • the wavelength filter 132 transmits light having a wavelength included in a predetermined wavelength range for detecting SSC, and does not transmit light having a wavelength not included in this wavelength range. Therefore, the PMT 131 detects the light transmitted through the wavelength filter 132 among the light imaged by the lens 130.
  • the SSC is used to obtain information on the internal structure of the object to be observed.
  • the lens 92, the lens 93, and the lens 113 are lenses provided between the detector and the spatial modulation unit, and are so-called relay lenses.
  • the dark field transmission image detection optical system 5c may include a wavelength filter, a spatial filter, and a detector for detecting the FSC instead of the reflection member 51b and the FSC detection optical system 10.
  • This wavelength filter has the same function as the wavelength filter 132.
  • This spatial filter blocks direct light and allows FSC to pass through.
  • the size of the area that blocks the direct light of the spatial filter is the same as or wider than the size of the area that is directly irradiated with the light.
  • This detection unit detects the FSC that has passed through the wavelength filter and the spatial filter by the photodetector element arranged in a predetermined shape.
  • the area where the photodetector is arranged is wider than the area where the direct light of the spatial filter is blocked.
  • the position where the reflecting member 51b is provided in the dark field transmission image detection optical system 5c shown in FIG. FSC is detected in.
  • the structural pattern is a spatial filter having a region for transmitting light and a region for not transmitting light as a spatial modulation unit provided in the phase difference waveform detection optical system 9 and the dark field waveform detection optical system 11.
  • the case where the masks (structural pattern mask 91 and structural pattern mask 112) are installed has been described as an example, but the present invention is not limited to this.
  • the spatial modulation unit instead of the structural pattern mask, a digital mirror device (DMD: Digital Micromirror Device) or a reflective mask having a mirror that reflects light may be provided.
  • DMD Digital Micromirror Device
  • the DMD or the reflective mask is arranged so as to reflect the light to be detected in the phase difference waveform detection optical system or the dark field waveform detection optical system in the direction of the PMT.
  • the DMD reflects the light to be detected in the direction received by the PMT, and reflects the light not to be detected in the direction other than the PMT.
  • the spatial modulation unit is an optical device that modulates light by controlling the spatial distribution of light.
  • the fluorescence detection optical system 12 may include a structural pattern mask.
  • the fluorescence detection optical system 12 is constructed between the lens 121 and the PMT 122 by a structural pattern mask and a structural pattern mask. It includes a lens that collects light on the PMT 122.
  • the fluorescence detection optical system 12 is structured between the lens 125 and the PMT 126 by a structural pattern mask and a structural pattern mask. It is provided with a lens that collects the emitted light on the PMT 126.
  • the phase difference waveform detection optical system 9 the FSC detection optical system 10
  • the dark field waveform detection optical system 11 the fluorescence detection optical system 12, and the SSC detection optical system 13
  • the observation device D4 simultaneously obtains information on the morphology of a plurality of types of observation objects from measurement data (time-series changes in light intensity detected by PMT94, PMT101, PMT114, PMT122, PMT126, and PMT131, respectively). Can be detected. Therefore, the observation device D4 can acquire richer morphological information about the observation target as compared with the case where a plurality of types of light are not detected at the same time. Acquiring rich morphological information means simultaneously detecting a plurality of different types of different lights and simultaneously acquiring various information regarding the morphology of the observation target.
  • the phase difference waveform detection optical system 9 and the dark field waveform detection optical system 11 detect the light structured by the structural pattern mask (structural pattern mask 91, structural pattern mask 112), respectively. That is, the observation device D4 is configured to detect the time-series waveform of the optical signal including the spatial information of the observation object based on the so-called ghost cytometry technique in the phase difference detection and the dark field detection, and the acquired light.
  • the morphological information of the observation object can be acquired from the time-series waveform of the signal without converting it into a two-dimensional image.
  • the observation device D4 is suitable as a device provided in the flow cytometer as in the present embodiment to acquire morphological information by using the ghost cytometry technique.
  • the ghost cytometry technique since the morphological information can be directly analyzed without converting the measurement data into a two-dimensional image, the morphological information can be acquired at a higher speed than when the morphological information is converted into a two-dimensional image.
  • One of the detection optical systems may be omitted from the configuration of the observation device D4. For example, even if the lens 61, the lens 62, and the camera 63 of the phase difference transmission image detection optical system 6 or the lens 57c and the camera 53c of the dark field transmission image detection optical system 5c are omitted from the configuration of the observation device D4. good.
  • a bright-field image detection system or a bright-field waveform detection system may be added to the observation device D4.
  • the FSC detection optical system 10 is shown in FIG.
  • a bright field image A detection system and / or a bright field waveform detection system may be provided.
  • the reflected light from the reflecting member 51b is branched by using a wavelength filter or the like, one of the branched reflected light is detected by the FSC detection system, and the other is the brightfield image detection system and / or the brightfield waveform detection. It may be detected by the system.
  • FIG. 8 is a diagram showing an example of the configuration of the observation device D5 according to the present embodiment. Comparing the observation device D5 shown in FIG. 8 with the observation device D4 shown in FIG. 7, the phase difference waveform detection optical system 9d and the dark field waveform detection optical system 11d are different.
  • the phase difference waveform detection optical system 9d differs from the phase difference waveform detection optical system 9 in that a multi-anode PMT94d is provided instead of the single PMT.
  • the darkfield waveform detection optical system 11d is different from the darkfield waveform detection optical system 11 in that it includes a multi-anode PMT114d instead of the single PMT.
  • the multi-anode PMT94d and the multi-anode PMT114d are photodetectors having a plurality of channels.
  • a channel is a photodetector that detects light.
  • the multi-anode PMT94d and the multi-anode PMT114d are examples of detectors including a plurality of photodetectors.
  • a detector including a plurality of photodetectors a detector other than the multi-anode PMT may be provided instead of the multi-anode PMT.
  • a photodiode having a multi-channel or the like may be provided.
  • Mask-modulated light by the structural pattern mask 91 is projected onto the multi-anode PMT94d.
  • the mask-modulated light is light modulated by the structural pattern mask 91.
  • the plurality of channels provided in the multi-anode PMT94d detect the light modulated by the structural pattern mask 91 as mask-modulated light.
  • Mask-modulated light by the structural pattern mask 112 is projected onto the multi-anode PMT 114d.
  • the mask-modulated light is light modulated by the structural pattern mask 112.
  • the plurality of channels provided in the multi-anode PMT 114d detect the light modulated by the structural pattern mask 112 as mask-modulated light.
  • the mask-modulated light projected on the multi-anode PMT will be described by taking the mask-modulated light M1 projected on the multi-anode PMT 114d by the structural pattern mask 112 as an example.
  • the mask-modulated light produced by the structural pattern mask 91 is the same as in FIG. 9 described below.
  • FIG. 9 is a diagram showing an example of the mask-modulated light M1 projected on the multi-anode PMT114d according to the present embodiment.
  • the image IC1 of the cell to be observed flowing through the flow cell 34c moves in the direction indicated by the arrow AR1 on the multi-anode PMT114d.
  • the arrow AR1 indicates the direction in which the cell image IC1 moves on the multi-anode PMT114d.
  • the mask-modulated light M1 shows a pattern of light transmitted through the structural pattern mask 112.
  • the structural pattern mask 112 is, for example, a mask pattern having a random light transmitting portion, and mask-modulated light M1 reflecting the mask pattern of the structural pattern mask 112 is projected onto the multi-anode PMT 114d as a random light pattern.
  • the mask-modulated light M1-i is one of a plurality of transmitted lights constituting the mask-modulated light M1.
  • the plurality of channels P1 of the multi-anode PMT114d each have a rectangular shape.
  • the length of the channel P1 in the longitudinal direction may be substantially the same as the length in the width direction of the mask-modulated light M1 projected on the multi-anode PMT114d, but may be wider than that.
  • the plurality of channels P1 are arranged in series on the detection surface DS1 in a direction substantially perpendicular to the arrow AR1 in the longitudinal direction and substantially parallel to each other in the direction of the arrow AR1.
  • Each of the plurality of channels P1 described by channels P1-1 to P1-N in FIG. 9 is a photodetector.
  • the channel P1-i is one of the plurality of channels P1 and is the i-th photodetector element.
  • FIG. 10 shows an example of time-series changes in signal intensity detected by each of the plurality of channels P1.
  • Signal SG1-1, Signal SG1-2, ..., Signal SG1-N are time-series changes in signal intensity detected by channel P1-1, channel P1-2, ..., Channel P1-N, respectively. Is shown. Since the plurality of channels P1 are arranged in series in the direction of the arrow AR1, the temporal order in which the signals SG1-1, SG1-2, ..., And signals SG1-N are detected is the plurality of channels P1. Are arranged in series in the direction of the arrow AR1.
  • the total time during which the signal is acquired is the length of the period from the time t11 when the detection of the signal SG1-1 by the channel P1-1 is started to the time t12 when the detection of the signal SG1-N by the channel P1-N ends. It becomes.
  • a single photodetector is assigned to the entire region of interest to detect the signal light. Therefore, in the single PMT, the ratio of the modulated signal due to passing through the observation object becomes smaller than the background signal detected in the state where the observation object does not undergo optical modulation.
  • a plurality of photodetecting elements included in the multi-anode PMT share and detect a signal in a portion corresponding to each of the target regions for detecting light. In the case of the multi-anode PMT, the ratio of the modulated signal to the background signal can be improved as compared with the case of the single PMT, and the detection sensitivity can be improved.
  • the structural pattern mask 112 used for dark field waveform detection is the mask-modulated light M1 projected on the multi-anode PMT114d
  • the structural pattern mask is similarly described.
  • the mask-modulated light is projected onto the multi-ahead PMT94d in the phase difference waveform detection optical system 9d that is detected using the above.
  • FIG. 8 described above an example in which a structural pattern mask (structural pattern mask 91 and structural pattern mask 112) is provided in the phase difference waveform detection optical system 9d and the dark field waveform detection optical system 11d will be described.
  • the fluorescence detection optical system 12 may be provided with a structural pattern mask.
  • FIG. 11 is a diagram showing an example of the mask-modulated light M2 projected on the multi-anode PMT114d according to the present embodiment.
  • the mask-modulated light M2 is a pattern of light projected on the multi-anode PMT114d having a random light transmitting portion similar to the mask-modulated light M1 shown in FIG.
  • the mask-modulated light M2-i is one of a plurality of transmitted lights constituting the mask-modulated light M2.
  • the plurality of channels P2 shown in FIG. 11 and the plurality of channels P1 shown in FIG. 9 have different directions with respect to the arrow AR1 in which the plurality of channels are arranged.
  • the plurality of channels P2 are arranged in parallel in the direction of the arrow AR1 so that the longitudinal direction is substantially parallel to the arrow AR1.
  • the total length of the plurality of channels P2 in the lateral direction is approximately the same as or substantially the same as the length in the width direction of the mask-modulated light M2 projected on the multi-anode PMT114d, similar to the length in the longitudinal direction of the channel P1 in FIG. It should be wider than.
  • Channel P2-i is one of a plurality of channels P2, and is the i-th photodetector described in channels P2-1 to P2-N in FIG.
  • FIG. 12 shows an example of a time series of signal intensities detected by each of the plurality of channels P2.
  • Signal SG2-i, signal SG2-i + 1, ..., Signal SG2-i + M indicate the intensity of the signal detected by channel P2-i, channel P2-i + 1, ..., Channel P2-i + M, respectively.
  • the waveforms of the signal intensities detected in each channel are different from each other, since the plurality of channels P2 are arranged in parallel in the direction of the arrow AR1 shown in FIG. 11, the signal SG2-i, the signal SG2-i + 1, ... -There is no significant difference in the time when the signals SG2-i + M are detected.
  • the length of the period up to the time t22 is the total time for which the signal is acquired.
  • channel P2-i + 1, ..., Channel P2-i + M since the image IC1 does not pass through the element surface of the channel, no cell signal is detected.
  • observation device D6 In the following, as an example of the observation device D6, a case where a plurality of PDs are arranged diagonally and linearly with respect to the direction in which the projected image IC1 of the cell C1 moves on the detector will be described.
  • the same configurations and operations as those of the fifth embodiment described above are designated by the same reference numerals, and the description thereof will be omitted.
  • FIG. 13 is a diagram showing an example of the configuration of the observation device D6 according to the present embodiment. Comparing the observation device D6 shown in FIG. 13 with the observation device D5 shown in FIG. 8, the phase difference waveform detection optical system 9e and the dark field waveform detection optical system 11e are different.
  • the phase difference waveform detection optical system 9e includes a lens 90, a 1D array PD (Photodiode) 94e, and a wavelength filter 95.
  • the dark field waveform detection optical system 11e includes a dichroic mirror 110, a lens 111, a 1D array PD114e, and a wavelength filter 115.
  • the 1D array PD is a detector in which a plurality of photodiodes are linearly arranged.
  • the 1D array PD94e and the 1D array PD114e are examples of detectors including a plurality of photodetectors.
  • FIG. 14 is a diagram showing an example of arrangement of a plurality of channels P3 included in the 1D array PD94e according to the present modification.
  • the image IC1 is an image in which an image of a cell C1, which is an example of an observation object flowing through the flow cell 34c, is formed on the detection surface of the 1D array PD94e.
  • the arrow AR2 indicates the direction in which the image IC1 of the cell C1 flowing through the flow cell 34c passes through the plurality of channels P3.
  • the plurality of channels P3 are composed of n channels from channel P3-1 to channel P3-n, and channel P3-i is the i-th channel.
  • adjacent channels are arranged at a predetermined interval.
  • the plurality of channels P3 are arranged at a predetermined angle with respect to the direction perpendicular to the direction in which the image IC1 of the cell C1 indicated by the arrow AR2 moves.
  • the distance is shorter than the interval when the plurality of channels P3 are arranged perpendicularly to the direction of the arrow AR2.
  • the region where the signal cannot be detected can be eliminated by arranging the channels P3 at an angle of a predetermined angle with respect to the arrow AR2.
  • the plurality of channels P3 simply indicate that the plurality of channels P3 are arranged at a predetermined angle with respect to the direction perpendicular to the direction in which the image IC1 of the cell C1 indicated by the arrow AR2 moves. It may be said that they are arranged diagonally.
  • the timing at which each of the plurality of channels P3 detects the light emitted from the cell C1 differs among the plurality of channels P3.
  • the difference in the timing of detecting a signal between individual channels in a plurality of channels P3 may be referred to as the measurement time per cell.
  • the measurement time per cell is determined by the size of the image IC1 and the size of the plurality of channels P3.
  • the morphological information of the cell C1 measured in each of the plurality of channels P3 is independently acquired for each portion of the cell C1. Therefore, the independence of the signals is maintained even when the signal acquisition times from the respective channels overlap in time. Furthermore, the oblique arrangement of the plurality of channels P3 suppresses the lack of partial signal from cell C1 caused by the spacing between adjacent channels P3. As a result, in the observation device D5, even when the structural mask pattern is not used, the measurement can be speeded up while suppressing the lack of morphological information acquired from the cells for the cell portion. Further, the observation device D6 can simultaneously acquire a plurality of types of signals.
  • the phase difference waveform detection optical system 9e has a signal based on phase difference observation
  • the dark field waveform detection optical system 11e has a signal based on dark field observation
  • the fluorescence detection optical system 12 has a signal based on a fluorescent image.
  • signals based on scattered light can be simultaneously detected by the same method.
  • the ratio between the image IC1 and the size of each channel forming the plurality of channels P3 can be changed.
  • the ratio between the image IC1 and the size of each channel forming the plurality of channels P3 can be changed.
  • the distance between adjacent channels of the plurality of channels P3 can be effectively made equal to or less than the spatial resolution.
  • the lack of morphological information obtained from the cell due to the presence of the channel spacing is minimized. can do.
  • the plurality of channels P3 are not arranged diagonally, but are arranged in a direction substantially perpendicular to the direction in which the cell image IC1 moves. It is possible.
  • the measurement time per cell is the time for the image IC1 to pass through each channel arranged in a direction substantially perpendicular to the direction in which the image of the cell moves.
  • the present invention is not limited to this.
  • the lens may simply focus the light onto the detection surface of the single PMT.
  • the lens 93 does not form light on the detection surface of PMT94, but the light is sufficient. It suffices if it is focused.
  • the multi-PMT shown in FIG. 8 and the 1D array PD shown in FIG. 13 although it is highly necessary that the incident light is imaged on the detection surface as compared with the single PMT, strict imaging is performed. No relationship is needed.
  • the observation device D1 includes an illumination optical system and an observation optical system.
  • the illumination optical system includes a light source 30 and an aperture member (slit 32 in the above-described embodiment).
  • the observation optical system includes an objective lens 36, an optical structure (light-shielding plate 37 in the above-described embodiment), and a detector (camera 4 in the above-described embodiment).
  • the optical structure (light-shielding plate 37 in the above-described embodiment) is arranged at a first position that is conjugate with the position where the opening member (slit 32 in the above-described embodiment) is arranged, and the optical structure (light-shielding plate 37 in the above-described embodiment) is arranged.
  • the light-shielding plate 37 has a blocking portion for blocking light and a transmitting portion for transmitting light, and the shape of the blocking portion is on an optical structure (light-shielding plate 37 in the above-described embodiment).
  • the shape includes the shape of the image of the opening of the opening member (slit 32 in the above-described embodiment) to be imaged.
  • the detector (camera 4 in the above-described embodiment) detects dark-field light via an optical structure (light-shielding plate 37 in the above-described embodiment).
  • the observation devices D2, D3, D4, D5, and D6 include an illumination optical system and an observation optical system.
  • the illumination optical system includes a light source 30 and an aperture member (slit 32 in the above-described embodiment).
  • the observation optical system includes an objective lens 36, an optical structure (a light-shielding plate 51 and a reflecting member 51b in the above-described embodiment), a second optical structure (a phase plate 37a in the above-described embodiment), and a detector. (Camera 53, 53c, 63, 71, 82, 85, PMT94, 101, 114, 122, 126, 131, multi-anode PMT94d, 114d, 1D array PD94e, 114e in the above-described embodiment).
  • the optical structure (light-shielding plate 51, reflective member 51b in the above-described embodiment) is the first position (the above-described embodiment) which is a position conjugate with the position where the opening member (slit 32 in the above-described embodiment) is arranged. Is arranged at a position conjugate with the position where the slit 32 is arranged).
  • the optical structure (the light-shielding plate 51 and the reflective member 51b in the above-described embodiment) has a blocking portion for blocking light and a transmitting portion for transmitting light, and the shape of the blocking portion is an optical structure (described above).
  • the shape includes the shape of the image of the opening of the opening member (slit 32 in the above-described embodiment) formed on the light-shielding plate 51 and the reflective member 51b).
  • the detectors (cameras 4, 53, 53c, 63, 71, 82, 85, PMT94, 101, 114, 122, 126, 131, multi-anode PMT94d, 114d, 1D array PD94e, 114e in the above embodiments) are optical.
  • the light that has passed through the target structure (light-shielding plate 51, reflective member 51b in the above-described embodiment) or the second optical structure (phase plate 37a in the above-described embodiment) is detected.
  • the spatial resolution can be improved by increasing the numerical aperture of the objective lens as compared with the conventional dark field observation.
  • the observation devices D1, D2, D3, D4, D5, and D6 according to the embodiment use label-free / fluorescence imaging detection means to provide richer morphological information about observation objects such as cells, as compared with conventional observation devices. Can be obtained.
  • observation devices D4, D5, and D6 it is possible to use a combination of detection means capable of acquiring high-resolution morphological information about the observation object without reconstructing an image from the time-series waveform information of the optical signal. ..
  • observation devices D2, D3, D4, D5, and D6 include a second optical structure (phase plate 37a in the above-described embodiment) and a phase difference detector (in the above-described embodiment).
  • the camera 63, PMT94, multi-anode PMT94d, 1D array PD94e) are further provided.
  • the second optical structure (phase plate 37a in the above-described embodiment) has an aperture that has a phase changing portion that changes the phase of light and a transmitting portion that transmits light, and is imaged in the phase changing portion.
  • the shape of the image of the opening of the member substantially matches the shape of the phase changing portion of the phase plate.
  • the second optical structure (phase plate 37a in the above-described embodiment) is installed at a second position that is conjugate to the position where the opening member is arranged and does not coincide with the first position. Will be done.
  • the phase difference detector (camera 63, PMT94, multi-anodic PMT94d, 1D array PD94e in the above-described embodiment) includes an objective lens 36 and a detector (cameras 53, 53c, 63, 71, 82, 85 in the above-described embodiment).
  • an optical structure in the optical path between PMT94, 101, 114, 122, 126, 131, multi-anodic PMT94d, 114d, 1D array PD94e, 114e.
  • the light emitted from the observation object is the direct light that has passed through the transmission portion of the second optical structure (the phase plate 37a in the above-described embodiment). Detects the phase difference between the light and the diffracted light and / or the scattered light.
  • the observation devices D2, D3, D4, D5, and D6 can simultaneously perform the measurement by the dark field observation and the measurement by the phase difference observation, so that the dark field observation and the phase difference observation can be performed. Richer morphological information can be obtained compared to the case where it is not performed at the same time.
  • the observation optical system is a spatial modulation unit that modulates a part of the light passing through the second optical structure (phase plate 37a in the above-described embodiment).
  • (Structural pattern mask 91 in the above-described embodiment) and phase difference waveform detection optical systems 9 and 9d for detecting light modulated by the spatial modulation unit structural pattern mask 91 in the above-described embodiment.
  • the measurement by the image observation in the phase difference or the dark field and the measurement by the phase difference waveform detection can be performed at the same time, so that the phase difference waveform detection can be performed by the phase difference. It is possible to acquire richer morphological information as compared with the case where the image is not observed at the same time as the image observation in the dark field. Further, in the observation devices D4 and D5 according to the embodiment, since the morphological information regarding the phase difference waveform of the observation object can be acquired by the phase difference waveform detection based on the ghost cytometry technique without converting it into a two-dimensional image, the resolution is high. It can be acquired at a higher speed than when converting high morphological information into a two-dimensional image.
  • the illumination optical system is an epi-fluorescent illumination optical system that irradiates an observation object (cell C1 in the above-described embodiment) with illumination light from below.
  • the excitation light source 311, the excitation filter 312, and the dichroic mirror 313 are further provided, and the observation optical system is an epi-fluorescent illumination optical system (cell C1 in the above-described embodiment).
  • the fluorescence generated by irradiating the illumination light with the excitation light source 311, the excitation filter 312, and the dichroic mirror 313 is an optical structure (the light-shielding plate 51 and the reflecting member 51b in the above-described embodiment).
  • a dichroic fluorescence detector (camera 82, camera 85, PMT122, PMT126 in the above-described embodiment) for detecting fluorescence transmitted through) is further provided.
  • observation devices D3, D4, D5, and D6 With this configuration, in the observation devices D3, D4, D5, and D6 according to the embodiment, measurement by other observations (for example, measurement by dark field observation such as dark field transmission image observation or dark field waveform detection) and measurement by epi-radiation fluorescence observation Since the above can be performed at the same time, richer morphological information can be obtained as compared with the case where the epi-radiation fluorescence observation is not performed at the same time.
  • other observations for example, measurement by dark field observation such as dark field transmission image observation or dark field waveform detection
  • epi-radiation fluorescence observation Since the above can be performed at the same time, richer morphological information can be obtained as compared with the case where the epi-radiation fluorescence observation is not performed at the same time.
  • observation devices D4 and D5 include a microfluidic device, a spatial modulation unit (structural pattern mask 112 in the above-described embodiment), and a dark field waveform detection optical system 11.
  • the microfluidic apparatus includes a flow path (flow cell 34c in the above-described embodiment) through which the observation object (cell C1 in the above-described embodiment) can flow together with the fluid.
  • the spatial modulation section (structural pattern mask 112 in the above-described embodiment) modulates a part of the light that has passed through the optical structure (reflection member 51b in the above-described embodiment).
  • the dark field waveform detection optical system 11 detects the light modulated by the spatial modulation unit (structural pattern mask 112 in the above-described embodiment).
  • the observation devices D4 and D5 according to the embodiment can simultaneously perform measurement by other observations (for example, measurement by fluorescence detection or SSC or FSC detection) and measurement by dark field waveform detection. Compared to the case where the observation and the dark field waveform detection are not performed at the same time, it is possible to acquire richer morphological information regarding the observation object that can flow with the fluid in the flow path. Further, in the observation devices D4 and D5 according to the embodiment, the morphological information of the observation object that can flow with the fluid in the flow path can be acquired without converting it into a two-dimensional image based on the ghost cytometry technique, so that the two-dimensional image can be obtained. It is possible to acquire morphological information with high resolution at a higher speed than in the case of conversion.
  • the observation device D5 includes a flow path (flow cell 34c in the above-described embodiment) through which the observation object (cell C1 in the above-described embodiment) can flow together with the fluid, similarly to the observation device D4.
  • a detector multi-anode PMT94d, multi-anode PMT114d in the above-described embodiment
  • a detector that includes a microfluidic device and detects light modulated by a space modulation unit (structural pattern mask 91, structural pattern mask 112 in the above-described embodiment). Includes a plurality of photodetecting elements (channel P1 in the above-described embodiment).
  • the spatial modulation unit (structural pattern mask 91 and structural pattern mask 112 in the above-described embodiment) is an optical structure (reflection member 51b in the above-described embodiment).
  • the light that has passed through the light is randomly modulated for each region and is incident on the detector (detection surface DS1 of the detector in the above-described embodiment) as mask-modulated light.
  • the plurality of photodetectors (channel P1 in the above-described embodiment) included in the detector are images of an observation object (cell C1 in the above-described embodiment) in which a flow path (flow cell 34c in the above-described embodiment) flows in the longitudinal direction.
  • the IC1 is arranged in series in a direction substantially perpendicular to the direction in which the IC1 moves on the detector (the direction of the arrow AR1 in the above-described embodiment).
  • the observation device D5 when a random pattern is used, signals are signaled by a plurality of photodetectors while suppressing the lack of morphological information acquired from the cells for the cell portion. Can be detected in series, so measurement can be speeded up.
  • the spatial modulation unit (the structural pattern mask 91 and the structural pattern mask 112 in the above-described embodiment) is an optical structure (a reflective member in the above-described embodiment).
  • the light passing through 51b) is modulated, and the mask-modulated light is incident on the detector (detection surface DS2 of the detector in the above-described embodiment).
  • the spatial modulation unit (structural pattern mask 91, structural pattern mask 112 in the above-described embodiment) randomly modulates the light passing through the optical structure (reflection member 51b in the above-described embodiment) for each region.
  • the plurality of photodetectors (channel P2 in the above-described embodiment) included in the detector are images of an observation object (cell C1 in the above-described embodiment) in which a flow path (flow cell 34c in the above-described embodiment) flows in the longitudinal direction.
  • the IC1 is arranged in a direction substantially parallel to the direction in which the IC1 moves on the detector (the direction of the arrow AR1 in the above-described embodiment).
  • the morphological information about the acquired cell portion is lacking among the plurality of photodetectors. Since signals can be detected in parallel by a plurality of photodetectors at the same time while suppressing the above, the measurement can be speeded up.
  • observation device D6 similarly to the observation device D5 according to the above-described embodiment, a flow path through which the observation object (cell C1 in the above-described embodiment) can flow together with the fluid (the above-described embodiment).
  • a microfluidic device comprising a flow cell 34c) is provided.
  • the detector (1D array PD94e and 1D array PD114e in the above-described embodiment) flows through the flow path (flow cell 34c in the above-described embodiment).
  • Image of the object to be observed (cell C1 in the above-described embodiment) A plurality of linear lines tilted by a predetermined angle with respect to the direction in which the IC1 moves on the detector (direction of the arrow AR2 in the above-described embodiment).
  • An optical detection element (channel P3 in the above-described embodiment) is arranged. A part of the light passing through the optical structure (reflecting member 51b in the above-described embodiment) or the second optical structure (phase plate 37a in the above-described embodiment) is a plurality of light arranged in a row. It is detected by a detection element (channel P3 in the above-described embodiment).
  • the observation device D6 can provide morphological information with high spatial resolution without reconstructing an image from the time-series waveform information of the optical signal when the mask-modulated light based on the structural mask pattern is not used.
  • a plurality of optical detection elements are arranged in a row on a straight line inclined by a predetermined angle with respect to the direction in which the image IC1 moves on the detector (the direction of the arrow AR2 in the above-described embodiment). By doing so, it is possible to speed up the measurement while suppressing the lack of morphological information obtained from the cell for the part of the cell.
  • D1, D2, D3, D4, D5, D6 ... Observation device 30 ... Light source, 32 ... Slit, 36 ... Objective lens, 37, 51 ... Shading plate, 51b ... Reflecting member, 4, 53, 53c, 63, 71, 82, 85 ... Camera, 94, 101, 114, 122, 126, 131 ... PMT, 94d, 114d ... Multi-anode PMT, 94e, 114e ... 1D array PD

Landscapes

  • Chemical & Material Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Analytical Chemistry (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Dispersion Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

観察装置は、照明光学系と、観察光学系とを備え、照明光学系は、光源と、開口部材とを備え、観察光学系は、対物レンズと、光学的構造物と、検出器とを備え、開口部材が配置される位置と共役な位置である第1の位置に光学的構造物が配置され、光学的構造物は、光を遮断する遮断部と光を透過させる透過部とを有し、かつ遮断部の形状が光学的構造物上に結像される開口部材の開口部の像の形状を包含する形状であり、検出器は光学的構造物を経由した暗視野光を検出する。

Description

観察装置
 本発明は、観察装置に関する。
 本願は、2020年4月1日に、日本に出願された特願2020-065941号に基づき優先権を主張し、その内容をここに援用する。
 フローサイトメータは個々の細胞を流体中に分散させ、その流体を微細に流下させて光学的に分析するフローサイトメトリー法と呼ばれる技術を用いた分析装置であり、主に細胞を個々に観察する際に用いられる細胞計測技術である。iPS細胞(induced Pluripotent Stem Cells)などの幹細胞を用いた再生医療や、CAR‐T(chimeric antigen receptor T cell)による免疫療法などの新しい治療法の実用化に向けた動きが活発化するに伴い、細胞群の中から一以上の細胞を計測し個々の細胞単位で解析を行うことに対する強い需要が生じてきている。例えば、フローサイトメトリーでは、流路中に蛍光標識された細胞を流下しながら励起光を照射し、個々の細胞から発せられる蛍光輝度を取得することによって、細胞の2次元画像を生成し細胞の分別を行うイメージングサイトメータが知られている。
 こうした新しい治療分野では、細胞の品質管理(Quality Control:QC)や治療に適した高活性細胞の選別のために、細胞内部の形態情報を、従来に比べてよりリッチな情報としてより高感度に取得するラベルフリーイメージングや蛍光イメージングの手段が求められている。リッチな形態情報には、例えば、光学的特性の違いを利用したマルチコントラストによる画像から得られる情報、従来に比べて高い空間解像度を有する画像から得られる情報などがある。
 LEDによる複数の照明パターンをサンプルに順次照射して、マルチモーダルの画像を画像処理によって得る顕微鏡を用いたイメージングシステムが知られている(非特許文献1)。また、一回の撮影で、複数のLEDパターンの照明を行うのと同等の情報を得ることができる顕微鏡を用いたイメージング技術が知られている(非特許文献2)。一方、レンズアレイやアレイ状にならんだ空間フィルターを流路に有する構造、及びマルチセンサーを用いることで、流体を流れるサンプルの透過光を順次取得し、二次元画像を取得するフローサイトメータが知られている(特許文献1)。
 さらに、上記の用途においては、生産性の向上に直接寄与する、高速測定を可能にする手段が求められている。細胞の形態情報を計測データから2次元画像に変換せずに直接解析する技術が近年開発され、その一例としてゴーストサイトメトリー技術が知られている。ゴーストサイトメトリー技術を用いたフローサイトメータでは、例えば、構造化した照明を細胞に照射し、得られた光信号の時系列波形から直接細胞の分別ができ、高速、高感度、低コストかつコンパクトなフローサイトメータが提供できる。
米国特許第8314933号明細書
Ziji Liu、Lei Tian、Sijia Liu、Laura Waller、"Real-time brightfield, darkfield, and phase contrast imaging in a light‐emitting diode array microscope"、「Journal of Biomedical Optics」、SPIE, the international society for optics and photonic、2014年10月1日、19巻、10号、106002頁 BYOUNGHYO LEE、JONG-YOUNG HONG、DONGHEON YOO、JAEBUM CHO、 YOUNGMO JEONG、 SEOKIL MOON、 BYOUNGHO LEE、"Single-shot phase retrieval via Fourier ptychographic microscopy"、「Optica」、Optical Society of America、2018年8月8日、5巻、8号、976頁
 しかしながら、非特許文献1に記載のイメージングシステムでは、LEDによる複数の照明パターンを順次照射する必要があるため同時測定はできない。非特許文献2に記載の顕微鏡を用いたイメージング技術では、同じCCDイメージセンサを共有するため、解像度の劣化を避けられない。また、非特許文献2に記載の顕微鏡を用いたイメージング技術では、マルチモーダルの画像を得るために、画像再構成を行う必要があり画像処理に時間がかかる。
 一方、特許文献1に記載のフローサイトメータでは、取得できる画像の種類は、透過画像のみに限定される。また、特許文献1に記載のフローサイトメータでは、サンプルの測定時間はレンズアレイや、空間フィルター、マルチセンサーそのもののサイズに依存するため、測定時間短縮のためには、それらのサイズを小さく設計する必要がある。
 上述したように細胞などの観察対象物の観察において従来に比べてよりリッチな形態情報を高速に取得できることが求められている。
 本発明は上記の点に鑑みてなされたものであり、観察対象物の観察において従来に比べてよりリッチな形態情報を高速に取得できる観察装置を提供する。
 本発明は上記の課題を解決するためになされたものであり、本発明の一態様は、照明光学系と、観察光学系とを備え、前記照明光学系は、光源と、開口部材とを備え、前記観察光学系は、対物レンズと、光学的構造物と、検出器とを備え、前記光学的構造物は、前記開口部材と共役な位置である第1の位置に配置される。前記光学的構造物は光を遮断する遮断部と光を透過させる透過部とを有し、かつ前記遮断部の形状が前記光学的構造物上に結像される前記開口部材の開口部の像の形状を包含する形状であり前記検出器は、前記光学的構造物を経由した暗視野光を検出する観察装置である。
 また、本発明の一態様は、上記の観察装置において、光の位相を変化させる位相変更部と光を透過させる透過部とを有し、かつ前記位相変更部に結像される前記開口部材の開口部の像の形状が前記位相変更部の形状と略一致している形状である第2の光学的構造物と、前記対物レンズと前記検出器との間の光路において前記光学的構造物よりも前記対物レンズの側において、観察対象物から発せられる光の前記透過部を通過した直接光と回折光及びまたは散乱光との位相差を検出する位相差検出器とをさらに備え、前記第2の光学的構造物は、前記開口部材が配置される位置と共役な位置であってかつ前記第1の位置とは一致していない第2の位置に配置される。
 また、本発明の一態様は、上記の観察装置において、前記観察光学系は、前記第2の光学的構造物を経由した光の一部を変調する空間変調部と、前記空間変調部によって変調された光を検出する位相差波形検出系とをさらに備える。
 また、本発明の一態様は、上記の観察装置において、前記照明光学系は、観察対象物に照明光を下方から照射する落射蛍光照明光学系をさらに備え、前記観察光学系は、前記観察対象物に前記落射蛍光照明光学系によって前記照明光が照射されて発生する蛍光が前記光学的構造物を透過した蛍光を検出する落射蛍光検出器をさらに備える。
 また、本発明の一態様は、上記の観察装置において、観察対象物が流体と共に流れ得る流路を備えるマイクロ流体装置をさらに備え、前記観察光学系は、前記光学的構造物を経由した光の一部を変調する空間変調部と前記空間変調部によって変調された光を検出する暗視野波形検出光学系とを備える。
 また、本発明の一態様は、上記の観察装置において、前記空間変調部により変調された光を検出する前記検出器が複数の光検出素子を含み、前記空間変調部は、前記光学的構造物を経由した一部の光が入射する面を有し、前記面に入射する光を前記面に含まれる領域毎にランダムに変調し、前記複数の光検出素子は、長手方向が前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向と略垂直となる方向に直列に配置されている。前記空間変調部は、前記光学的構造物を経由した光が入射する面を有し、前記面に入射する光を前記面に含まれる領域毎にランダムに変調し、前記検出器は、長手方向が前記流路を流れる細胞の像が検出器上を移動する方向と略垂直となる向きに配置された前記複数の光検出素子を備える。
 また、本発明の一態様は、上記の観察装置において、前記空間変調部により変調された光を検出する前記検出器が複数の光検出素子を含み、前記空間変調部は、前記光学的構造物を経由した光が入射する面を有し、前記面に入射する光を前記面に含まれる領域毎にランダムに変調し、前記複数の光検出素子は、長手方向が前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向と略平行となる向きに並列に配置されている。
 また、本発明の一態様では、上記の観察装置において、観察対象物が流体と共に流れ得る流路を備えるマイクロ流体装置をさらに備え、前記検出器は、前記光学的構造物、あるいは光の位相を変化させる位相変更部と光を透過させる透過部とを有し、かつ前記位相変更部に結像される前記開口部材の開口部の像の形状が前記位相変更部の形状と略一致している形状である第2の光学的構造物を経由した光の一部を、1列に配置された複数の光検出素子によって検出し、前記複数の光検出素子は、前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向に対して所定の角度だけ傾いて1列に配置されている。
 本発明によれば、観察対象物の観察において従来に比べてよりリッチな形態情報を高速に取得できる。即ち、本発明によれば、観察対象物に関する形態情報を空間解像度の高い位相差情報および暗視野情報として同時に取得することができ、蛍光検出など他の検出方法と組み合わせることでさらに多面的な形態情報を取得することを可能にする。
本発明の第1の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第1の実施形態に係る遮光板の構成の一例を示す図である。 本発明の第2の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第2の実施形態に係る遮光板の構成の一例を示す図である。 本発明の第3の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第3の実施形態に係る反射部材の構成の一例を示す図である。 本発明の第4の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第5の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第5の実施形態に係るマルチアノードPMTに投影されるマスク変調光の一例を示す図である。 本発明の第5の実施形態に係る観察装置において、設置されたマルチアノードマルチアノードPMTの複数のチャネルがそれぞれ時系列に検出するシグナル強度の一例を示す図である。 本発明の第5の実施形態の変形例に係るマルチアノードPMTに投影されるマスク変調光の一例を示す図である。 本発明の第5の実施形態の変形例に係る観察装置において、設置されたマルチアノードマルチアノードPMTの複数のチャネルがそれぞれ時系列に検出するシグナル強度の一例を示す図である。 本発明の第6の実施形態に係る観察装置の構成の一例を示す図である。 本発明の第6の実施形態に係る観察装置において、1DアレイPDが有する複数のチャンネルの配置の一例を示す図である。
(第1の実施形態)
 以下、図面を参照しながら本発明の実施形態について詳しく説明する。図1は、本実施形態に係る観察装置D1の構成の一例を示す図である。観察装置D1は、暗視野画像観察を行う。観察装置D1は、顕微鏡3と、カメラ4とを備える。
 顕微鏡3は、暗視野観察法を行う落射照明型の顕微鏡装置である。顕微鏡3は、光源30と、コリメータ31と、スリット32と、コンデンサレンズ33と、ステージ34と、対物レンズユニット35と、対物レンズ36と、遮光板37と、結像レンズ38と、ミラー39とを備える。スリット32は開口部材の一例である。
 光源30は、照明光を射出する。光源30は、一例として、LED(LIGHT EMITTING DIODE)光源である。また、光源30は、レーザー光源、半導体レーザー光源であってもよい。光源30が射出する照明光は、一例として、450nmの可視光である。
 コリメータ31は、光源30から射出された照明光を平行光にする。平行光にされた照明光はスリット32に入射する。スリット32は、一例として開口部の形状が円環状のリングスリットである。スリット32の円環状の開口部を通過した照明光は、コンデンサレンズ33を経由し、ステージ34に載置された観察対象物(不図示)に照射される。観察対象物とは、例えば、細胞である。
 顕微鏡3は、対物レンズユニット35と、対物レンズ36と、遮光板37と、検出器としてカメラ4とを備える。観察対象物から発せられる光は対物レンズ36を経由して遮光板37に入射する。遮光板37はスリット32と共役な位置に配置されている。対物レンズ36及び遮光板37は、対物レンズユニット35に含まれて備えられる。
 なお図1では、遮光板37が顕微鏡3に含まれる構成について説明しているが、遮光板37はスリット32と共役な位置に配置されていれば、顕微鏡3の外に配置することもできる。その場合、遮光板37は光を検出するカメラやレンズと共に暗視野透過画像検出光学系を構成する。
 ここで図2を参照し、遮光板37の構成について説明する。図2は、本実施形態に係る遮光板37の構成の一例を示す図である。遮光板37は、遮光部370と、透過部371とを有する。遮光部370の形状は、円環状であり、スリット32の円環状の開口部の形状が遮光部370上に結像する像の形状と略一致であるか、その形状を包含する形状である。遮光部370は、観察対象物を透過する光源からの直接光を遮光する。一方、透過部371は、観察対象物から発せられる回折光及び散乱光を透過させる。
 図1に戻って観察装置D1の説明を続ける。
 遮光板37を透過した光は、結像レンズ38によって集光された後、ミラー39によって反射されて結像面310において観察対象物の像を結像する。カメラ4は、遮光板37を透過し結像レンズ38によって結像された光を検出する。これによってカメラ4は、暗視野観察によって観察対象物の像が撮像された暗視野画像を検出する。
 このように、カメラ4は、光学的構造物を透過した光を検出する。カメラ4は、光学的構造物を経由した光を検出する検出器の一例である。遮光板37は光学構造物の一例である。
 なお本実施形態では、光源30と、コリメータ31と、スリット32と、コンデンサレンズ33とは、照明光学系に含まれる。対物レンズユニット35と、対物レンズ36と、遮光板37と、結像レンズ38と、カメラ4とは、観察光学系に含まれる。したがって、観察装置D1は、光源30と、スリット32とを備える照明光学系と、対物レンズユニット35と、対物レンズ36と、遮光板37と、結像レンズ38と、カメラ4とを備える観察光学系とを備える。
 ここで照明光学系とは、光の反射、透過、遮断、屈折などの性質を利用して光源から観察に必要な光を観察対象物に照射するために設置される光学器具や装置の集合体であって、光源、レンズ、ミラー、プリズムなどの組合せにより構成される。また、観察光学系とは、光の反射、透過、遮断、屈折などの性質を利用して観察対象物から射出された光を検出するために設置される光学器具や装置の集合体であって、ミラー、レンズ、空間フィルター、遮光板、位相板、カメラ、検出素子などの組み合わせにより構成される。
 従来の暗視野観察では、非散乱光、つまり直接光が対物レンズに入射するのを避けるため、開口数(Numerical aperture:NA)が小さい対物レンズしか使えなかった。これに対して、観察装置D1では、遮光板37が直接光を遮蔽するため、対物レンズ36の開口数を、従来の暗視野観察に用いられる対物レンズの開口数に比べて大きくすることができる。本実施形態に係る観察装置D1では、散乱角の大きい散乱光を測定することが可能になり、従来の暗視野観察に比べて空間解像度を向上することが可能になる。ここで散乱角の大きい散乱光は、空間周波数が高い成分の情報を含んでいる。
 さらに、観察装置D1では、対物レンズ36の開口数を従来の暗視野観察に用いられる対物レンズの開口数に比べて大きくすることができるため、照明光学系に含まれるレンズの開口数を上げる必要がなくなり、光学設計の自由度を向上させることができる。
(第2の実施形態)
 ここで上述した第2の実施形態について説明する。
 上記第1の実施形態では、光学的構造物として遮蔽板が第1の位置に備えられる場合について説明をした。本実施形態では、第2の光学的構造物として位相板が、開口部材が配置される位置と共役な位置であってかつ第1の位置とは一致していない第2の位置に備えられ、対物レンズと検出器との間の光路において光学的構造物よりも対物レンズの側において、観察対象物から発せられる光が位相板を通過した直接光と回折光及びまたは散乱光との位相差を検出する位相差検出器をさらに備える観察装置の例について説明をする。本実施形態に係る観察装置を観察装置D2という。
 なお、上述した第1の実施形態と同一の構成及び動作については、同一の符号を付してその説明を省略する。
 図3は、本実施形態に係る観察装置D2の構成の一例を示す図である。観察装置D2は、顕微鏡3aと、暗視野透過画像検出光学系5と、位相差透過画像検出光学系6を備える。観察装置D2は、暗視野画像観察と位相差画像観察を同時に行う観察装置である。暗視野透過画像検出光学系5と、位相差透過画像検出光学系6は、観察光学系に含まれる。
 顕微鏡3aは、遮光板37に代えて位相板37aを備える点が、図1に示した顕微鏡3と異なる。ここで位相板37aは、スリット32が配置される位置と共役な位置に配置される。観察対象物から発せられる光の一部は対物レンズ36を経由して位相板37aに入射する。ミラー60は、顕微鏡3bから出射される光の一部を反射し位相差透過画像検出光学系6へと導き、残りの一部を透過させて暗視野透過画像検出光学系5へと導く。なお、対物レンズ36及び位相板37aは、対物レンズユニット35aに含まれて備えられる。
 位相板37aは、位相膜である位相変更部と、透過部とを有する。位相変更部の形状は、スリット32の円環状の開口部の像の形状と略一致する円環状である。位相変更部は、観察対象物から発せられる光のうち直接光(0次の回折光)の位相を変化させる。透過部は、観察対象物から発せられる光のうち回折光(1次以上の回折光)および散乱光を透過させる。位相板37aは第2の光学的構造物の一例である。
 暗視野透過画像検出光学系5は、レンズ50と、遮光板51と、レンズ52と、カメラ53とを備える。顕微鏡3aの結像面310において結像された光は、顕微鏡3aからレンズ50へと入射し平行光として出射される。レンズ50から出射された平行光は、遮光板51に入射する。
 遮光板51は、スリット32が配置される位置と共役な位置であって、位相板37aが配置される位置とは異なる位置に配置される。このように本実施形態では、遮光板51が配置される第1の位置と位相板37aが配置される第2の位置とは一致していない。遮光板51の構成は、図1の遮光板37の構成と同様であるが、配置される位置が異なる。図4は、本実施形態に係る遮光板51の構成の一例を示す図である。遮光板51は、遮光部510と、透過部511とを有する。遮光部510の形状は、円環状であり、位相板37aの円環状の位相変更部の形状が遮光板51上で結像する像の形状と略一致しているか、またはその形状を包含している形状である。一方、透過部511は、観察対象物から発せられる回折光および散乱光を透過させる。遮光板51は、光学的構造物の一例である。
 遮光板51を透過した光は、レンズ52によって集光されて、カメラ53の撮像面において結像する。カメラ53は光学的構造物である遮光板51を経由した暗視野光を検出する。暗視野光は、観察対象物から発せられる回折光および散乱光である。
[位相差観察]
 位相差透過画像検出光学系6は、位相差画像観察を行うための光学系である。位相差透過画像検出光学系6は、ミラー60と、レンズ61と、レンズ62と、カメラ63と、波長フィルター64とを備える。
 ミラー60は、顕微鏡3bから出射される光の一部を反射しカメラ63の方へと導き、残りの一部を透過させて暗視野透過画像検出光学系5へと導く。レンズ61は、ミラー60によって反射された光を平行光にする。レンズ62は、レンズ61によって平行光となった光をカメラ63の撮像面において結像させる。
 カメラ63は、対物レンズ36とカメラ53との間の光路において遮光板51よりも対物レンズ36の側に配置される。カメラ63は、レンズ62によって結像された光を検出する。ここでカメラ63の検出面のレンズ62側には、波長フィルター64が備えられる。波長フィルター64は、位相差観察を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、カメラ63は、レンズ62によって結像された光のうち、波長フィルター64を透過した光を検出する。
 ここでレンズ62によって結像された光は、観察対象物から発せられる光が位相板37aを通過した直接光と回折光及び散乱光である。観察対象物内部において、回折を生じさせる物体(位相物体)を通過した際に生じる回折光は、直接光に対して位相差を持つ。位相板37aによって、位相の変調を受けた直接光が、上述した回折光及び散乱光と結像される際に干渉することによって、位相物体の像は周囲に対してコントラストを持つ。カメラ63は、それら直接光と回折光及び散乱光との位相差を検出する。カメラ63は、検出した位相差に基づいてコントラストのついた、観察対象物の像が撮像された位相差画像を検出する。この位相差観察では、観察対象物の部分毎の屈折率の差によって生じる直接光と回折光及び散乱光との間の位相差がコントラストをもって検出される。カメラ63は、位相差検出器の一例である。
(第3の実施形態)
 以下、図面を参照しながら本発明の第3の実施形態について詳しく説明する。
 上記第1の実施形態では、観察装置を用いて暗視野画像観察を行う場合について説明をした。上記第2の実施形態では、観察装置を用いて暗視野画像観察と位相差画像観察を同時に行う場合について説明をした。本実施形態では、観察装置を用いて暗視野画像観察と位相差画像観察に加え、明視野画像観察、及び落射蛍光画像観察を同時に行う場合について説明をする。本実施形態に係る観察装置を観察装置D3という。
 なお、上述した第1の実施形態と同一の構成及び動作については、同一の符号を付してその説明を省略する。
 図5は、本実施形態に係る観察装置D3の構成の一例を示す図である。観察装置D3は、顕微鏡3bと、暗視野透過画像検出光学系5bと、位相差透過画像検出光学系6と、明視野透過画像検出光学系7と、落射蛍光画像検出光学系8とを備える。暗視野透過画像検出光学系5bと、位相差透過画像検出光学系6と、明視野透過画像検出光学系7と、落射蛍光画像検出光学系8とは、観察光学系に含まれる。
 顕微鏡3bは、落射蛍光観察を行うための構成を備える点が、上述した第2の実施形態として図3に示した顕微鏡3aの構成と異なる。落射蛍光観察を行うための構成は、励起光源311と、励起フィルター312と、ダイクロイックミラー313と、吸収フィルター314とを含む。
 励起光源311は、観察対象物に励起光を照射するための光源である。励起光源311は、一例として、水銀ランプである。また、励起光源311は、レーザー光源やLED光源でもよい。励起フィルター312は、一例としてバンドパスフィルターであり、励起光源311から射出される光のうち特定の波長の光を透過させ、特定の波長以外の光を透過させない。ダイクロイックミラー313は、励起光源311から発せられ、励起フィルター312を通過した励起光を反射し、ステージ34に載置された観察対象物に照射する。一方、ダイクロイックミラー313は、観察対象物から発せられた蛍光を結像レンズ38の方へと透過させる。吸収フィルター314は、観察対象物から発せられた蛍光を透過させ、蛍光画像観察の支障となる余分な光を吸収する。
 吸収フィルター314を透過した蛍光は、結像レンズ38を介してミラー39に反射されて、顕微鏡3bから射出される。
 なお、励起光源311と、励起フィルター312と、ダイクロイックミラー313とは、観察対象物に照明光を下方から照射する落射蛍光照明光学系を構成している。したがって、観察装置D3に備えられる照明光学系は、落射蛍光照明光学系を備える。
 顕微鏡3bから出射される光には2種類の光がある。1つ目の光は、光源30から発せられた光が観察対象物に照射されて生じる光(直接光、回折光、及び散乱光)である。2つ目の光は、励起光源311から発せられた励起光が観察対象物に照射されて生じる蛍光である。
 以下では、観察装置D3による観察について、位相差観察、暗視野観察、明視野観察、及び落射蛍光観察の順に説明する。
[位相差観察]
 位相差透過画像検出光学系6は、位相差画像観察を行うための光学系である。位相差透過画像検出光学系6の構成は、図3に示した位相差透過画像検出光学系6の構成と同様であるため詳細な説明を省略する。ミラー60は、顕微鏡3bから出射される光の一部を反射し位相差透過画像検出光学系6へと導き、残りの一部を透過させて暗視野透過画像検出光学系5bへと導く。
[暗視野観察]
 暗視野透過画像検出光学系5bは、レンズ50と、反射部材51bと、レンズ52と、カメラ53と、波長フィルター54と、ダイクロイックミラー55bとを備える。暗視野透過画像検出光学系5bは、遮光板51の代わりに反射部材51bを備えている点、及び波長フィルター54とダイクロイックミラー55bとを備えている点が、上述の図3に示した暗視野透過画像検出光学系5と異なる。
 反射部材51bは、スリット32が配置される位置と共役な位置であって、位相板37aの位置とは異なる位置に配置される。反射部材51bには、上述したミラー60を透過した光がレンズ50によって平行光となって入射する。反射部材51bは、光学的構造物の一例である。
 ここで図6を参照し、反射部材51bの構成について説明する。図6は、本実施形態に係る反射部材51bの構成の一例を示す図である。反射部材51bは、反射部510bと、透過部511bとを有する。反射部510bを光軸に垂直な面に射影した形状は、位相板37aの位相変更部が反射部材51b上で結像する像の形状と略一致しているかそれを包含する円環状である。反射部510bは、観察対象物から発せられる光のうち直接光(0次の回折光)を反射させ、明視野透過画像検出光学系7へと導く。ここで反射部材51bの法線は光軸に対して傾いている。そのため、反射部材51bは、直接光を光軸と平行でない方向に反射させる。透過部511bは、観察対象物から発せられる光のうち回折光、散乱光、及び蛍光を透過させる。
 反射部510bは、一例として円環状の形状のミラーである。
 図5に戻って観察装置D3の説明を続ける。
 波長フィルター54は、カメラ53の検出面のレンズ52の側に備えられる。波長フィルター54は、暗視野観察を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、カメラ53は、レンズ52によって結像された光のうち、波長フィルター54を透過した光を検出する。
 ダイクロイックミラー55bは、反射部材51bを透過した光のうち、所定の波長以上の光を反射させ、所定の波長未満の光を透過する。所定の波長とは、一例として500nmである。ダイクロイックミラー55bは、光源30から発せられた光が観察対象物に照射されて生じる光(回折光、及び散乱光)を透過させてカメラ53の方へと導く。一方、ダイクロイックミラー55bは、励起光源311から発せられた励起光が観察対象物に照射されて生じる蛍光を反射させて落射蛍光画像検出光学系8へと導く。
 ダイクロイックミラー55bを透過した光は、レンズ52によってカメラ53の撮像面において結像する。
[明視野観察]
 明視野透過画像検出光学系7は、明視野観察を行うための光学系である。明視野透過画像検出光学系7は、レンズ70と、カメラ71と、波長フィルター72とを備える。
 レンズ70は、上述した反射部材51bによって反射された直接光をカメラ71の撮像面において結像させる。これによってカメラ71は、明視野観察によって観察対象物の像が撮像された明視野透過画像を検出する。ここでカメラ71の検出面のレンズ70の側には、波長フィルター72が備えられる。波長フィルター72は、明視野観察を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、カメラ71は、レンズ70によって結像された光のうち、波長フィルター72を透過した光を検出する。この明視野観察では、観察対象物の部分毎に吸収される光の強度の変化が画像のコントラストとして検出される。
[落射蛍光観察]
 落射蛍光画像検出光学系8は、落射蛍光観察を行うための光学系である。落射蛍光画像検出光学系8は、ダイクロイックミラー80と、レンズ81と、カメラ82と、波長フィルター83と、レンズ84と、カメラ85と、波長フィルター86とを備える。
 ダイクロイックミラー80は、ダイクロイックミラー55bによって反射された光のうち、所定の範囲の波長を透過させ、この所定の範囲外の波長を反射する。ここで所定の範囲とは、一例として550nm以上650nm以下である。この場合、ダイクロイックミラー80は、観察対象物から発せられる蛍光のうちフルオレセインイソチオシアネート(Fluorescein isothiocyanate:FITC)の染色による蛍光を反射し、カメラ82の方へと導く。一方、ダイクロイックミラー80は、観察対象物から発せられる蛍光のうちヨウ化プロピジウム(Propidium Iodide:PI)の染色による蛍光を透過させ、カメラ85の方へと導く。
 レンズ81は、ダイクロイックミラー80によって反射された蛍光(FITCの染色による蛍光)をカメラ82の撮像面において結像させる。これによってカメラ82は、落射蛍光観察によって観察対象物の像が撮像された落射蛍光画像を検出する。ここでカメラ82の検出面のレンズ81の側には、波長フィルター83が備えられる。波長フィルター83は、落射蛍光観察を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、カメラ82は、レンズ81によって結像された光のうち、波長フィルター83を透過した光を検出する。この落射蛍光画像では、観察対象物がFITCによって染色されて発する蛍光の強度に基づき画像が検出される。
 レンズ84は、ダイクロイックミラー80によって透過させられた蛍光(PIの染色による蛍光)をカメラ85の撮像面において結像させる。これによってカメラ82は、落射蛍光観察によって観察対象物の像が撮像された落射蛍光画像を検出する。ここでカメラ85の検出面のレンズ84の側には、波長フィルター86が備えられる。波長フィルター86は、落射蛍光観察を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、カメラ85は、レンズ84によって結像された光のうち、波長フィルター86を透過した光を検出する。この落射蛍光画像では、観察対象物がPIによって染色されて発する蛍光の強度に基づき画像が検出される。
 カメラ82、カメラ85、レンズ81及びレンズ84は、観察対象物に落射蛍光照明光学系によって照明光が照射されて発生する蛍光が光学的構造物の一例である反射部材51bを透過した蛍光を検出する。カメラ82、及びカメラ85は、落射蛍光検出器の一例である。観察光学系は、落射蛍光検出器を備える。なお、図5では、2つの蛍光検出器が配置される場合について説明しているが、これに限らない。落射蛍光照明光学系に含まれる落射蛍光検出器の数は1つであってもよく、また3つ以上であってもよい。
 上述したように観察装置D3では、暗視野透過画像検出光学系5bによって暗視野画像が検出され、位相差透過画像検出光学系6によって位相差画像が検出され、明視野透過画像検出光学系7によって明視野透過画像が検出され、落射蛍光画像検出光学系8によって2種類の落射蛍光画像が検出される。観察装置D3では、それらの複数種類の画像を同時に得るため、複数種類の画像を複数回の測定で得る場合と比較すると、観測対象物の状態の変化等による測定のばらつきを抑えることができる。また、観察装置D3では同時に同じ観測対象物の測定画像が得られるため、複数種類の画像の測定に複数回の測定を行う必要がなく、画像の測定に要する時間を短くすることができる。
 また、観察装置D3では、上述した複数種類の画像を検出するために、複数の検出器(カメラ53、カメラ63、カメラ71、カメラ82、及びカメラ85)をそれぞれ用いており、検出器を共有していない。ここで複数種類の画像の検出において検出器を共有する場合、検出器のセンサを複数種類の画像のそれぞれに割り当てる必要があるため、複数種類の画像のそれぞれに用いることができるセンサのサイズは、検出器が本来有するセンサのサイズに比べて小さくなってしまう。一方、観察装置D3では、複数種類の画像を検出するために検出器を共有していないため、検出器が本来有するセンサのサイズにおいて検出を行うことができる。そのため、観察装置D3では、検出器の空間解像度を犠牲にすることなく、複数種類の空間解像度が高い画像として検出することができる。
 なお、上述した第1の実施形態、第2の実施形態及び第3の実施形態では、観察装置がそれぞれ顕微鏡のステージに載置された観察対象物の画像を観察する場合の一例について説明したが、これに限らない。観察装置は、観察対象物が流体と共に流れ得る流路を備えるマイクロ流体装置を備えて、流路を流れる観察対象物を観察してもよい。つまり、観察装置は、フローサイトメトリーに用いられてもよい。以下に説明する第4の実施形態、第5の実施形態、及び第6の実施形態では、観察装置がフローサイトメトリーに用いられる場合の一例について説明する。
(第4の実施形態)
 以下、図面を参照しながら本発明の第4の実施形態について詳しく説明する。
 上記第2の実施形態と第3の実施形態では、複数の種類の観察を同時に行ってそれぞれの観察において画像を検出する場合について説明をした。本実施形態では、観察装置に備えられる検出系の一部に、観察により得られた光信号強度の時系列変化を示す時系列波形から画像を再構成することなく、観察対象物の形態の情報を直接かつ高速に取得できるゴーストサイトメトリー技術を用いた検出光学系を含む実施形態について説明をする。本実施形態に係る観察装置を観察装置D4という。観察装置D4では、一例として、位相差検出と暗視野検出の一部が、画像を再構成することなく、光信号の時系列波形を示す情報である時系列波形情報から観察対象物の形態情報を直接取得できる検出方法により行なわれる。以降の説明では、こうした観察対象物の形態情報を直接取得できる時系列波形を取得する検出光学系を波形検出光学系と記載する。
 本実施形態では、ゴーストサイトメトリー技術を用いた波形検出光学系を、観測対象から射出される光は構造マスクパターンなどの空間変調器を対物レンズと検出器の間の光路に設置する構造化検出により検出する。検出器は観測対象から射出される光が空間変調器により光特性が異なる複数の領域を有する構造化された光を受光する。空間変調器の光が入射する面は、複数の領域が一定領域内に不規則に分布する構造となっており、空間変調器を介する光は領域毎に異なった変調を受け構造化された光に変換される。本明細書では、このように空間変調器の不規則に散らばった複数の領域により光を変調することを、入射光を領域毎にランダムに変調するとも記載する。空間変調器による変調光の光構造は、例えば明暗の二値がランダムに分布した構造であり、その光構造は固定された特定の構造を有しているが、光構造と観察対象を相対的に移動させながら測定を行うことにより、検出する光信号の時間波形信号には観察対象の空間情報が圧縮され含まれる。観測対象から射出される光信号の時系列波形を、画像として再構成することなく直接機械学習を利用して分析するゴーストサイトメトリー技術を用いたフローサイトメータが既に報告されており、観測対象を判別する分類器を機械学習により最適化することで,迅速かつ精度よい分析及び判別できる。
 なお、上述した第3の実施形態と同一の構成及び動作については、同一の符号を付してその説明を省略する。
 図7は、本実施形態に係る観察装置D4の構成の一例を示す図である。観察装置D4は、照明光学系と、観察光学系とに加えて、マイクロ流体装置(不図示)を備える。マイクロ流体装置は、観察対象物が流体と共に流れ得る流路を備える。
 観察装置D4は、顕微鏡3cと、暗視野透過画像検出光学系5cと、位相差透過画像検出光学系6と、位相差波形検出光学系9と、前方散乱光(Forward Scatter:FSC)検出光学系10と、暗視野波形検出光学系11と、蛍光検出光学系12と、側方散乱光(Side Scatter:SSC)検出光学系13とを備える。マイクロ流体装置は顕微鏡3cに備えられる。観察装置D4は、フローサイトメータに備えられる観察装置である。
 以下において説明するように、観察装置D4の検出光学系には、光電子増倍管(Photomultiplier Tube:PMT)を構成として備えるものがある。それらのPMT(PMT94、PMT101、PMT114、PMT122、PMT131、及びPMT126)は、シングルチャネルの光検出器(シングルPMT)である。
 また、観察装置D4の検出光学系の一部には、構造パターンマスクを構成として備えるものがある。構造パターンマスクは、顕微鏡3cから射出される光を変調する。構造パターンマスクが変調する光には、光学的構造物である反射部材51bを経由した光が含まれる。光を変調するとは、例えば、光の強度などの光学的性質を空間の領域毎に変化させて構造化することである。構造パターンマスクは、光学的構造物を経由した光を変調する空間変調部の一例である。
 図7の例では、構造パターンマスク(構造パターンマスク91、及び構造パターンマスク112)は、光を透過させる領域と光を透過させない領域とを有する空間フィルターである。それら構造パターンマスクは、例えば、光特性が異なる複数の領域が表面に印刷されるフィルムなどである。
 なお、顕微鏡3cに含まれる光源から観測対象物までの光路に設置される光学機器は照明光学系に含まれる。顕微鏡3cの観測対象物から結像面310までの光路に設置される光学機器と、暗視野透過画像検出光学系5cと、位相差透過画像検出光学系6と、位相差波形検出光学系9と、FSC検出光学系10と、暗視野波形検出光学系11と、蛍光検出光学系12と、SSC検出光学系13とは、観察光学系に含まれる。なお、顕微鏡3cの一部の光学機器は照明光学系と観察光学系の両方に含まれる。
 顕微鏡3cは、FSC、及びSSCを検出するための構成を備える点と、ステージ34の代わりにフローセル34cを備える点とが、上述した実施形態3として図5に示した顕微鏡3bの構成と異なる。FSC及びSSCを検出するための構成は、FSC/SSC光源315cと、ダイクロイックミラー316cとを含む。
 FSC及びSSCは、ラベル付けを行うことなく(ラベルフリー)細胞などの観察対象物の形態情報を検出するために用いられている。
 フローセル34cは、細胞などの観察対象物が流体とともに流れる流路である。
 FSC/SSC光源315cは、FSC及びSSCを取得するために観察対象物に照射される光の光源であり、FSC/SSCを取得する光の例はレーザー光である。ダイクロイックミラー316cは、所定の波長以上の光を反射させ、所定の波長未満の光を透過させる。所定の波長とは、一例として500nmである。一例として光源30から発せられる光が450nmの波長の光で、FSC/SSC光源315cから発せられるレーザー光が637nmの波長の光の場合、ダイクロイックミラー316cは、光源30から発せられる光を透過させ、FSC/SSC光源315cから発せられるレーザー光を反射させ、それぞれ観察対象物の方へ導く。
 FSC/SSC光源315cから観察対象物に照射された光は、観察対象物によって散乱される。観察対象物によって散乱されて発生した散乱光は、ダイクロイックミラー313を透過し、結像レンズ38、ミラー39を経由して顕微鏡3cから射出される。
 顕微鏡3cから出射される光には3種類の光がある。3種類の光のうち2つは、上述の図5に示した顕微鏡3bから出射される2種類の光と同様である。3つ目の光は、レーザー光が観察対象物によって散乱されて発生したFSC、及びSSCである。
 以下では、観察装置D4による各種の光をそれぞれ検出する光学系について順に説明する。なお、位相差透過画像検出光学系6は、図5に示した観察装置D3と同様であるため説明を省略する。
[暗視野観察]
 暗視野透過画像検出光学系5cは、レンズ50と、ミラー55cと、反射部材51bと、ミラー56cと、レンズ57cと、カメラ53cと、波長フィルター54cとを備える。暗視野透過画像検出光学系5cは、ミラー55cと、ミラー56cと、レンズ57cと、カメラ53cと、波長フィルター54cとを備えている点が、上述の図5に示した暗視野透過画像検出光学系5bと異なる。
 ミラー55cは、レンズ50から出射される平行光の一部を反射し位相差波形検出光学系9の方へと導き、残りの一部を透過させてミラー56cへと導く。
 反射部材51bは、反射部510bによって観察対象物から発せられる回折光及び散乱光のうちFSCを反射させ、FSC検出光学系10へと導く。
 ミラー56cは、反射部材51bの透過部511bを透過した光の一部をカメラ53cの方へと反射させ、残りの一部を透過させて暗視野波形検出光学系11へと導く。
 レンズ57c、カメラ53c、及び波長フィルター54cは、図5に示したレンズ52、カメラ53、及び波長フィルター54とそれぞれ同様の機能を有し、観察装置D3において配置される位置、及び向きが異なる点以外の構成は同様であるため説明を省略する。
[位相差波形検出]
 位相差波形検出光学系9は、観察対象物から発せられる直接光と回折光及び散乱光との位相差観察に基づいた時間波形を検出するための光学系である。位相差波形検出光学系9は、レンズ90と、構造パターンマスク91と、レンズ92と、レンズ93と、PMT94と、波長フィルター95とを備える。
 レンズ90は、ミラー55cによって反射された平行光を構造パターンマスク91の位置に結像させる。レンズ92は、構造パターンマスク91によって構造化された光を平行光にしてレンズ93に入射させる。レンズ93は、レンズ92によって平行光にされた構造化された光をPMT94へと集光する。PMT94は、観察対象物から発せられる直接光が構造化された光と回折光及び散乱光が構造化された光との位相差を時系列に検出することによって、それらの光の位相差観察に基づいた時間波形を検出する。ここでPMT94の検出面のレンズ93側には、波長フィルター95が備えられる。波長フィルター95は、位相差画像に基づいた時間波形の検出を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、PMT94は、レンズ93によって集光された光のうち、波長フィルター95を透過した光を検出する。
[FSC検出]
 FSC検出光学系10は、FSC/SSC光源からの光の照射により観察対象物から発せられるFSC(前方散乱光の強度)を検出するための光学系である。FSC検出光学系10は、レンズ100と、PMT101と、波長フィルター102と、空間フィルター103とを備える。
 レンズ100は、反射部材51bによって反射されたFSCをPMT101へと集光する。PMT101は、観察対象物から発せられた光のうちFSCを検出する。ここでPMT101の検出面のレンズ100側には、波長フィルター102及び空間フィルター103が備えられる。波長フィルター102は、FSC検出を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。一方、空間フィルター103は、入射する光のうち、直接光を遮断し、前方方向に伝搬するFSCを透過させる。したがって、PMT101は、レンズ100によって結像された光のうち、波長フィルター102と空間フィルター103を透過した光のうちFSCを検出する。FSCは、観察対象物の大きさの情報を取得するのに用いられる。
 なお、図7では、波長フィルター102及び空間フィルター103は、PMT101の検出面のレンズ100に近い側から波長フィルター102、空間フィルター103の順に備えられる場合の一例について示しているが、波長フィルター102及び空間フィルター103は、PMT101の検出面のレンズ100に近い側から空間フィルター103、波長フィルター102の順に備えられてもよい。
[暗視野波形検出]
 暗視野波形検出光学系11は、暗視野観察によって観察対象物から発せられた暗視野光の波形を検出するための光学系である。暗視野波形検出光学系11は、ダイクロイックミラー110と、レンズ111と、構造パターンマスク112と、レンズ113と、PMT114と、波長フィルター115とを備える。
 ダイクロイックミラー110の構成は、上述の図5に示したダイクロイックミラー55bの構成と同様である。ダイクロイックミラー110は、光源30から発せられた光が観察対象物に照射されて生じる光(回折光、及び散乱光)を透過させてPMT114の方へ導く。一方、ダイクロイックミラー110は、励起光源311から発せられた励起光が観察対象物に照射されて生じる蛍光と、FSC/SSC光源315cから発せられたレーザー光が観察対象物に照射されて生じる散乱光とを反射させて、蛍光検出光学系12及びSSC検出光学系13へと導く。
 レンズ111は、ダイクロイックミラー110を透過した光を構造パターンマスク112の位置に結像させる。構造パターンマスク112は、結像された光を構造化された光としてレンズ113に入射させる。レンズ113は、構造パターンマスク112によって構造化された光をPMT114へと集光する。PMT114は、観察対象物から発せられる暗視野光が構造化された光を時系列に検出する。ここでPMT114の検出面のレンズ113の側には、波長フィルター115が備えられる。波長フィルター115は、暗視野波形検出を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、PMT114は、レンズ113によって結像された光のうち、波長フィルター115を透過した光を検出する。
[蛍光検出]
 蛍光検出光学系12は、励起光源311の照射により観察対象物から発せられる蛍光を検出するための光学系である。蛍光検出光学系12は、ダイクロイックミラー120と、レンズ121と、PMT122と、波長フィルター123と、ダイクロイックミラー124と、レンズ125と、PMT126と、波長フィルター127とを備える。
 ダイクロイックミラー120の構成は、上述の図5に示したダイクロイックミラー80の構成と同様である。ダイクロイックミラー120は、ダイクロイックミラー110によって反射された光のうちFITCの染色による蛍光を反射し、PMT122の方へと導く。一方、ダイクロイックミラー120は、ダイクロイックミラー110によって反射された光のうちPIの染色による蛍光を透過させ、PMT126の方へと導く。
 レンズ121は、ダイクロイックミラー120によって反射された蛍光をPMT122へと集光する。PMT122は、観察対象物がFITCによって染色されて発する蛍光の強度を時系列に検出する。ここでPMT122の検出面のレンズ121の側には、波長フィルター123が備えられる。波長フィルター123は、蛍光検出を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、PMT122は、レンズ121によって結像された光のうち、波長フィルター123を透過した光を検出する。
 ダイクロイックミラー124は、ダイクロイックミラー120によって透過させられた光のうち、所定の範囲の波長を反射させ、この所定の範囲外の波長を透過する。ここで所定の範囲とは、一例として637nmの波長である。ダイクロイックミラー124は、ダイクロイックミラー120を透過した光のうち、観察対象物から発せられる蛍光であってPIの染色による蛍光を透過させ、PMT126の方へと導く。一方、ダイクロイックミラー124は、ダイクロイックミラー120によって透過させられた光のうち、観察対象物から発せられるSSCを反射しSSC検出光学系13へと導く。
 レンズ125は、ダイクロイックミラー124を透過した蛍光をPMT126へと集光する。PMT126は、観察対象物がPIによって染色されて発する蛍光の強度を時系列に検出する。ここでPMT126の検出面のレンズ125の側には、波長フィルター127が備えられる。波長フィルター127は、蛍光検出を行うための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、PMT126は、レンズ125によって結像された光のうち、波長フィルター127を透過した光を検出する。
[SSC検出]
 SSC検出光学系13は、FSC/SSC光源315cの照射により観察対象物から発せられるSSCを検出するための光学系である。SSC検出光学系13は、レンズ130と、PMT131と、波長フィルター132とを備える。
 レンズ130は、ダイクロイックミラー124によって反射されたSSCをPMT131へと集光する。PMT131は、観察対象物から発せられた光のうちSSCを検出する。ここでPMT131の検出面のレンズ130の側には、波長フィルター132が備えられる。波長フィルター132は、SSCを検出するための所定の波長域に含まれる波長の光を透過させ、この波長域に含まれない波長の光を透過させない。したがって、PMT131は、レンズ130によって結像された光のうち、波長フィルター132を透過した光を検出する。SSCは、観察対象物の内部構造の情報を取得するのに用いられる。
 観察装置D4において、レンズ92、レンズ93、レンズ113は、検出器と空間変調部との間に備えられるレンズであり、いわゆるリレーレンズである。
 なお、本実施形態では、暗視野透過画像検出光学系5cが反射部材51bを備える場合の一例について説明したが、これに限らない。暗視野透過画像検出光学系5cは、反射部材51b及びFSC検出光学系10の代わりに、波長フィルター、空間フィルター、及びFSCを検出するための検出器を備えてもよい。
 この波長フィルターは、波長フィルター132と同様の機能を有する。この空間フィルターは、直接光を遮断し、FSCを透過させる。空間フィルターの直接光を遮断する領域の大きさは、直接光が照射される領域の大きさよりも同じか広い。この検出部は、所定の形状に配置された光検出素子によって、波長フィルター及び空間フィルターを透過したFSCを検出する。光検出素子が配置される領域は、空間フィルターの直接光を遮断する領域よりも広い。
 この場合、本実施形態のように反射部材51bによって反射されたFSCをFSC検出光学系10によって検出する代わりに、図7に示した暗視野透過画像検出光学系5cにおいて反射部材51bが備えられる位置においてFSCが検出される。
 なお、本実施形態では、位相差波形検出光学系9及び暗視野波形検出光学系11に備えられる空間変調部として、光を透過させる領域と光を透過させない領域とを有する空間フィルターである構造パターンマスク(構造パターンマスク91、及び構造パターンマスク112)が設置される場合を例に説明したが、これに限らない。空間変調部としては、構造パターンマスクの代わりに、デジタルミラーデバイス(DMD:Digital Micromirror Device)あるいは光を反射させるミラーを有する反射型マスクが備えられてもよい。DMDあるいは反射型マスクが備えられる場合、位相差波形検出光学系あるいは暗視野波形検出光学系において検出対象となる光をPMTの方向へと反射するようにDMDあるいは反射型マスクが配置される。例えば、DMDの場合、DMDは検出対象である光をPMTに受光される方向に反射させ、検出出対象でない光をPMT以外の方向に反射させる。空間変調部は、光の空間的な分布を制御して、光を変調させる光学機器である。
 なお、本実施形態では、蛍光検出光学系12は、構造パターンマスクを介さずに蛍光を検出する場合の一例について説明したが、これに限らない。蛍光検出光学系12は、構造パターンマスクを備えてもよい。
 観察対象物がFITCによって染色されて発する蛍光を構造パターンマスクを介して検出する場合、蛍光検出光学系12は、レンズ121とPMT122との間に、構造パターンマスクと、構造パターンマスクによって構造された光をPMT122に集光するレンズとを備える。
 また、観察対象物がPIによって染色されて発する蛍光を構造パターンマスクを介して検出する場合、蛍光検出光学系12は、レンズ125とPMT126との間に、構造パターンマスクと、構造パターンマスクによって構造された光をPMT126に集光するレンズとを備える。
 上述したように本実施形態に係る観察装置D4では、位相差波形検出光学系9と、FSC検出光学系10と、暗視野波形検出光学系11と、蛍光検出光学系12と、SSC検出光学系13とを備える。この構成により、観察装置D4では、計測データ(PMT94、PMT101、PMT114、PMT122、PMT126、及びPMT131がそれぞれ検出する光の強度の時系列変化)から、複数種類の観察対象物の形態に関する情報を同時に検出できる。そのため、観察装置D4では、観察対象物について、複数種類の光を同時に検出しない場合に比べてよりリッチな形態情報を取得できる。リッチな形態情報を取得するとは、複数の種類の異なる光を同時に検出し、観測対象の形態に関する種々な情報を同時に取得することである。
 また、観察装置D4では、位相差波形検出光学系9、暗視野波形検出光学系11において、構造パターンマスク(構造パターンマスク91、構造パターンマスク112)によって構造化された光をそれぞれ検出する。つまり、観察装置D4では、位相差検出と暗視野検出において、いわゆるゴーストサイトメトリー技術に基いて観察対象物の空間情報を含む光信号の時系列波形を検出する構成となっており、取得した光信号の時系列波形から観察対象物の形態情報を2次元画像に変換せずに取得できる。
 このため観察装置D4は、本実施形態のようにフローサイトメータに備えられて、ゴーストサイトメトリー技術を利用して形態情報を取得する装置として好適である。ゴーストサイトメトリー技術では、形態情報を計測データから2次元画像に変換せずに直接解析できるため、形態情報を2次元画像に変換する場合に比べて高速に取得可能である。
 なお、観察装置D4の構成から検出光学系のうちいずれかが省略されてもよい。例えば、観察装置D4の構成から、位相差透過画像検出光学系6のレンズ61、レンズ62、及びカメラ63が、あるいは暗視野透過画像検出光学系5cのレンズ57c、及びカメラ53cが省略されてもよい。
 なお、観察装置D4に、明視野画像検出系、及びまたは明視野波形検出系が追加されてもよい。例えば、FSC検出光学系10は、FSC/SSC光源315cの観察対象物への照射によって発生するFSCの検出系として図7に記載されているが、FSC検出光学系10に加えて、明視野画像検出系、及びまたは明視野波形検出系とが備えられてもよい。その場合、反射部材51bからの反射光は波長フィルターなどを用いて分岐され、分岐された反射光のうち一方はFSC検出系によって検出され、他方が明視野画像検出系、及びまたは明視野波形検出系によって検出されてもよい。
(第5の実施形態)
 以下、図面を参照しながら本発明の第5の実施形態について詳しく説明する。
 上記第4の実施形態では、シングルチャネルの光検出器(シングルPMT)を用いて検出を行う場合について説明をした。本実施形態では、マルチアノードPMTを用いて検出を行う場合について説明をする。本実施形態に係る観察装置を観察装置D5という。本実施形態では、細胞を観察対象物の例として説明する。
 なお、上述した第4の実施形態と同一の構成及び動作については、同一の符号を付してその説明を省略する。
 図8は、本実施形態に係る観察装置D5の構成の一例を示す図である。図8に示す観察装置D5と、図7に示した観察装置D4とを比較すると、位相差波形検出光学系9dと、暗視野波形検出光学系11dとが異なる。
 位相差波形検出光学系9dは、シングルPMTの代わりにマルチアノードPMT94dを備える点が位相差波形検出光学系9と異なる。暗視野波形検出光学系11dは、シングルPMTの代わりにマルチアノードPMT114dを備える点が暗視野波形検出光学系11と異なる。
 マルチアノードPMT94d、及びマルチアノードPMT114dは、複数のチャネルを有する光検出器である。チャネルとは、光を検出する光検出素子である。マルチアノードPMT94d、及びマルチアノードPMT114dは、複数の光検出素子を備える検出器の一例である。なお、複数の光検出素子を備える検出器として、マルチアノードPMTの代わりに、マルチアノードPMT以外の検出器が備えられてもよい。例えば、複数の光検出素子を備える検出器として、マルチチャネルを有するフォトダイオードなどが備えられてもよい。
 マルチアノードPMT94dには、構造パターンマスク91によるマスク変調光が投影される。マスク変調光とは、構造パターンマスク91によって変調された光である。マルチアノードPMT94dに備えられる複数のチャネルは、構造パターンマスク91によって変調された光をマスク変調光として検出する。
 マルチアノードPMT114dには、構造パターンマスク112によるマスク変調光が投影される。マスク変調光とは、構造パターンマスク112によって変調された光である。マルチアノードPMT114dに備えられる複数のチャネルは、構造パターンマスク112によって変調された光をマスク変調光として検出する。
 ここで図9を参照し、マルチアノードPMTに投影されるマスク変調光を、マルチアノードPMT114dに投影される構造パターンマスク112によるマスク変調光M1を例にとって説明する。構造パターンマスク91によるマスク変調光についても以下に説明する図9と同様である。
 図9は、本実施形態に係るマルチアノードPMT114dに投影されるマスク変調光M1の一例を示す図である。フローセル34cを流れる観察対象物である細胞の像IC1は、マルチアノードPMT114d上で矢印AR1が示す方向に移動する。矢印AR1は、マルチアノードPMT114d上を細胞の像IC1が移動する方向を示す。
 マスク変調光M1は、構造パターンマスク112を透過した光のパターンを示している。構造パターンマスク112は、一例としてランダムな光透過部分を有するマスクパターンであり、構造パターンマスク112のマスクパターンを反映したマスク変調光M1がランダムな光のパターンとしてマルチアノードPMT114dに投影される。マスク変調光M1-iはマスク変調光M1を構成する複数の透過光のうちの1つである。
 マルチアノードPMT114dが有する複数のチャネルP1はそれぞれ長方形の形状である。チャネルP1の長手方向の長さは、マルチアノードPMT114dに投影されるマスク変調光M1の幅方向の長さと略同じがそれよりも広ければよい。複数のチャネルP1は、図9に示されているように、検出面DS1において、長手方向を矢印AR1と略垂直となる向きにして矢印AR1の方向に互いに略平行に直列に配置される。図9においてチャネルP1-1からチャネルP1-Nで記載される複数のチャネルP1は、それぞれが光検出素子である。チャネルP1-iは、複数のチャネルP1のうちの1つでi番目の光検出素子である。
 図10に、複数のチャネルP1がそれぞれ検出するシグナル強度の時系列変化の一例を示す。シグナルSG1-1、シグナルSG1-2、・・・、シグナルSG1-Nは、それぞれチャネルP1-1、チャネルP1-2、・・・、チャネルP1-Nによって検出されるシグナルの強度の時系列変化を示す。複数のチャネルP1は矢印AR1の方向に直列に配置されるため、シグナルSG1-1、シグナルSG1-2、・・・、シグナルSG1-Nがそれぞれ検出される時間的な順序は、複数のチャネルP1が矢印AR1の方向に直列に配置される順となる。チャネルP1-1によるシグナルSG1-1の検出が開始される時間t11から、チャネルP1-NによるシグナルSG1-Nの検出が終了する時間t12までの期間の長さが、シグナルが取得される総時間となる。
 シングルPMTの場合、単一の光検出素子が、シグナルである光を検出する対象となる領域の全体に割り当てられる。そのため、シングルPMTでは観察対象物による光変調を受けていない状態に検出されるバックグラウンドシグナルに対して、観察対象物を通過したことによる変調シグナルの割合が小さくなる。一方本実施形態では、マルチアノードPMTが有する複数の光検出素子が、光を検出する対象となる領域のうちそれぞれに対応する部分においてシグナルを分担して検出する。マルチアノードPMTの場合、シングルPMTの場合に比べてバックグラウンドシグナルに対する変調シグナルの比を向上させることができ、検出感度を向上させることができる。
 なお、上述した図9においては、一例として暗視野波形検出に用いられる構造パターンマスク112がマルチアノードPMT114dに投影されるマスク変調光M1である場合について説明したが、図8において同様に構造パターンマスクを用いて検出を行っている位相差波形検出光学系9dにおいても同様にマスク変調光がマルチアノードPMT94dに投影されている。
 また、上述した図8においては、位相差波形検出光学系9d、及び暗視野波形検出光学系11dに、構造パターンマスク(構造パターンマスク91、及び構造パターンマスク112)が備えられる場合の一例について説明したが、これに限らない。例えば蛍光検出光学系12に構造パターンマスクが備えられてもよい。
(第5の実施形態の変形例)
 上記第5の実施形態では、図9でマルチアノードの有する複数のチャネルがマルチアノードPMT114d上を細胞の像IC1が移動する方向に直列に配置される場合について説明した。本変形例では、マルチアノードが有する複数のチャネルがマルチアノードPMT114d上を細胞の像IC1が移動する方向に並列に配置される場合について説明する。なお本変形例においても、構造パターンマスク112によるマスク変調光を例に説明するが、構造パターンマスク91についても以下に説明する図11と同様である。本変形例では、上記第5の実施形態の構成と同様な構成の説明は省略し、上記第5の実施形態と異なる部分を中心に説明する。
 図11は、本実施形態に係るマルチアノードPMT114dに投影されるマスク変調光M2の一例を示す図である。マスク変調光M2は、図9に示したマスク変調光M1と同様にランダムな光透過部分を有するマルチアノードPMT114dに投影された光のパターンである。マスク変調光M2-iは、マスク変調光M2を構成する複数の透過光のうちの1つである。
 図11に示す複数のチャネルP2と、図9に示した複数のチャネルP1とでは、複数のチャネルが配置される矢印AR1に対する向きが異なる。複数のチャネルP2は、長手方向が矢印AR1と略平行となる向きにして矢印AR1の方向に並列に配置される。複数のチャネルP2について短手方向の長さの合計は、図9におけるチャネルP1の長手方向の長さと同様に、マルチアノードPMT114dに投影されるマスク変調光M2の幅方向の長さと略同じかそれよりも広ければよい。チャネルP2-iは複数のチャネルP2のうちの1つであり、図11においてチャネルP2-1からチャネルP2-Nで記載されているi番目の光検出素子である。
 図12に、複数のチャネルP2がそれぞれ検出するシグナル強度の時系列の一例を示す。シグナルSG2-i、シグナルSG2-i+1、・・・、シグナルSG2-i+Mは、それぞれチャネルP2-i、チャネルP2-i+1、・・・、チャネルP2-i+Mによって検出されるシグナルの強度を示す。それぞれのチャンネルで検出されるシグナル強度の波形は互いに異なるが、複数のチャネルP2は図11に示した矢印AR1の方向に並列に配置されるため、シグナルSG2-i、シグナルSG2-i+1、・・・、シグナルSG2-i+Mがそれぞれ検出される時間に大きな差は生じない。シグナルSG2-i、シグナルSG2-i+1、・・・、シグナルSG2-i+Mの検出が開始される時間t21から、シグナルSG2-i、シグナルSG2-i+1、・・・、シグナルSG2-i+Mの検出が終了する時刻t22までの期間の長さが、シグナルが取得される総時間となる。
 なお、図11では、上記のチャネルP2-i、チャネルP2-i+1、・・・、チャネルP2-i+M以外のチャネルは、像IC1がチャネルの素子面を通過しないので、細胞のシグナルは検出されない。
 なお、上記第5の実施形態およびその変形例では、構造パターンマスク112によるマスク変調光と構造パターンマスク91によるマスク変調光において、マルチアノードの有する複数のチャネルが同じ方向に配置される例を説明しているが、両者においてマルチアノードの有する複数のチャネルを異なった方向に設置することもできる。
(第6の実施形態)
 上記第5の実施形態では、構造パターンマスクを用いマルチアノードPMTを用いて検出が行われる場合について説明したが、本実施形態では、構造パターンマスクを用いず、独立した複数の光検出素子(例えば直線状にPhotodiode(PD)を配置した1DアレイPD)が用いられる。本実施形態に係る観察装置を観察装置D6という。以下においては、観察装置D6の一例として、投影された細胞C1の像IC1が検出器上を移動する方向に対して複数個のPDが斜めに直線状に配置される場合について説明する。
 なお、上述した第5の実施形態と同一の構成及び動作については、同一の符号を付してその説明を省略する。
 図13は、本実施形態に係る観察装置D6の構成の一例を示す図である。図13に示す観察装置D6と、図8に示した観察装置D5とを比較すると、位相差波形検出光学系9eと、暗視野波形検出光学系11eとが異なる。
 位相差波形検出光学系9eは、レンズ90と、1DアレイPD(Photodiode)94eと、波長フィルター95とを備える。
 暗視野波形検出光学系11eは、ダイクロイックミラー110と、レンズ111と、1DアレイPD114eと、波長フィルター115とを備える。
 ここで1DアレイPDは、複数のフォトダイオードが直線状に配列された検出器である。1DアレイPD94e、及び1DアレイPD114eは、複数の光検出素子を備える検出器の一例である。
 ここで図14を参照し、1DアレイPD94eが有する複数のチャネルP3の配置について説明する。なお、1DアレイPD114eが有する複数のチャネルの配置についても1DアレイPD94eと同様である。
 図14は、本変形例に係る1DアレイPD94eが有する複数のチャネルP3の配置の一例を示す図である。像IC1は、フローセル34cを流れる観察対象物の一例である細胞C1の像が1DアレイPD94eの検出面に結像された像である。図14において矢印AR2は、フローセル34cを流れる細胞C1の像IC1が複数のチャネルP3を通過する方向を示す。
 複数のチャネルP3は、チャネルP3-1からチャネルP3-nのn個のチャネルから構成され、チャネルP3-iはi番目のチャネルである。ここで複数のチャネルP3では、隣り合うチャネル同士は所定の間隔だけ離れて配置される。
 1DアレイPD94eでは、複数のチャネルP3は、矢印AR2で示す細胞C1の像IC1が移動する方向と垂直な方向に対して所定の角度だけ傾いて配置される。そのため、1DアレイPD94eでは、複数のチャネルP3間の間隔によって、矢印AR2の方向と垂直な方向において、細胞C1から発せられる光(つまり、シグナル)を検出できない領域の矢印AR2と垂直な方向の長さは、複数のチャネルP3が矢印AR2の方向に垂直に配置される場合の間隔に比べて短い。あるいは、チャネルP3の大きさと隣接するチャネルP3同士の間隔によっては、矢印AR2に対して所定の角度だけ傾けて配置することで、シグナルを検出できない領域をなくすことができる。
 以下の説明においては、複数のチャネルP3は、矢印AR2が示す細胞C1の像IC1が移動する方向と垂直な方向に対して所定の角度だけ傾いて配置されることを、単に複数のチャネルP3が斜めに配置されているという場合がある。
 一方、1DアレイPD94eでは、複数のチャネルP3が斜めに配置されるため、複数のチャネルP3それぞれが細胞C1から発せられる光を検出する時期が、複数のチャネルP3相互間において異なる。以下の説明においては、複数のチャネルP3において個々のチャネル相互間においてシグナルを検出する時期の差を一細胞あたりの計測時間という場合がある。一細胞あたりの計測時間は、像IC1の大きさと、複数のチャネルP3の大きさとによって決まる。
 複数のチャネルP3においてそれぞれ計測される細胞C1の形態情報は、それぞれ細胞C1の部分毎に独立に取得される。そのため、それぞれのチャネルからのシグナル取得時期が時間的に重複する場合においても、シグナルの独立性は保たれる。
 さらに、複数のチャネルP3が斜めに配置されることによって、隣接するチャネルP3間の間隔によって生じる細胞C1からの部分毎のシグナルの欠如が抑制される。これによって、観察装置D5では、構造マスクパターンを使用しない場合においても、細胞から取得される形態情報が細胞の部分について欠如してしまうことを抑制しながら、測定を高速化できる。
 さらに、観察装置D6は、複数種類のシグナルを同時取得することもできる。すなわち、位相差波形検出光学系9eでは位相差観察に基づくシグナルを、暗視野波形検出光学系11eでは暗視野観察に基づくシグナルを、蛍光検出光学系12では蛍光画像に基づくシグナルを、FSC検出光学系10とSSC検出光学系13では、散乱光に基づくシグナルを、それぞれ同様の方法で同時に検出できる。
 なお、リレーレンズであるレンズ90、及びレンズ111の焦点距離をそれぞれ調整することによって、像IC1と複数のチャネルP3を形成する個々のチャネルとの大きさとの比率を変えることができる。比率を変えることによって、複数のチャネルP3の隣接するチャネル同士の間隔を、実効的に空間解像度相当以下にすることができる。隣接するチャネル同士の間隔を実効的に空間解像度相当以下にすることによって、チャネル同士の間隔が存在するために細胞から取得される形態情報が細胞の部分について欠如してしまうことを最小限に抑制することができる。
 上記のように像IC1と複数のチャネルP3それぞれの大きさとの比率を変える場合に、複数のチャネルP3を斜めに配置せずに、細胞の像IC1が移動する方向に略垂直な方向に配置することが可能である。このとき、一細胞あたりの計測時間は、細胞の像が移動する方向に略垂直な方向に配置されたそれぞれのチャネルを像IC1が通過する時間となる。
 またなお、ゴーストサイトメトリーにおいては、必ずしも完全な画像再構成は必要ではない。そのため、隣り合うチャネル同士の間隔の実効的な大きさが空間解像度以下でなくても、観察装置D6を用いて十分に高い分類精度を得られる場合もある。
 なお、上述した各実施形態において、検出器であるシングルPMTの検出面にレンズによって光が結像される場合の一例について説明したが、これに限らない。レンズはシングルPMTの検出面へと光を単に集光してもよい。例えば、ゴーストイメージングでは、2次元画像の再構成は不要であるため、図7に示した観察装置D4において、レンズ93は、PMT94の検出面に光を結像させるのではなく、光が十分に集光されていればよい。また、図8に示したマルチPMTや、図13に示した1DアレイPDには、シングルPMTと比較すると、入射する光が検出面において結像されている必要性は高いものの、厳密な結像関係までは必要とされない。
(各実施形態のまとめ)
 以上に説明したように、上述した実施形態に係る観察装置D1は、照明光学系と、観察光学系とを備える。
 照明光学系は、光源30と、開口部材(上述した実施形態においてスリット32)とを備える。観察光学系は、対物レンズ36と、光学的構造物(上述した実施形態において遮光板37)と、検出器(上述した実施形態においてカメラ4)とを備える。
 光学的構造物(上述した実施形態において遮光板37)は開口部材(上述した実施形態においてスリット32)が配置される位置と共役な位置である第1の位置に配置され、光学的構造物(上述した実施形態において遮光板37)は光を遮断する遮断部と光を透過させる透過部とを有し、かつ遮断部の形状が光学的構造物(上述した実施形態において遮光板37)上に結像される開口部材(上述した実施形態においてスリット32)の開口部の像の形状を包含する形状である。検出器(上述した実施形態においてカメラ4)は、光学的構造物(上述した実施形態において遮光板37)を経由した暗視野光を検出する。
 また、上述した実施形態に係る観察装置、D2、D3、D4、D5、D6は、照明光学系と観察光学系とを備える。
 照明光学系は、光源30と、開口部材(上述した実施形態においてスリット32)とを備える。
 観察光学系は、対物レンズ36と、光学的構造物(上述した実施形態において遮光板51、反射部材51b)と、第2の光学的構造物(上述した実施形態において位相板37a)、検出器(上述した実施形態においてカメラ53、53c、63、71、82、85、PMT94、101、114、122、126、131、マルチアノードPMT94d、114d、1DアレイPD94e、114e)とを備える。
 光学的構造物(上述した実施形態において遮光板51、反射部材51b)は、開口部材(上述した実施形態においてスリット32)が配置される位置と共役な位置である第1位置(上述した実施形態においてスリット32が配置される位置と共役な位置)に配置される。光学的構造物(上述した実施形態において遮光板51、反射部材51b)は光を遮断する遮断部と光を透過させる透過部とを有し、かつ遮断部の形状が光学的構造物(上述した実施形態において遮光板51、反射部材51b)上に結像される開口部材(上述した実施形態においてスリット32)の開口部の像の形状を包含する形状である。
 検出器(上述した実施形態においてカメラ4、53、53c、63、71、82、85、PMT94、101、114、122、126、131、マルチアノードPMT94d、114d、1DアレイPD94e、114e)は、光学的構造物(上述した実施形態において遮光板51、反射部材51b)あるいは第2の光学的構造物(上述した実施形態において位相板37a)を経由した光を検出する。
 この構成により、実施形態に係る観察装置D1、D2、D3、D4、D5、D6では、対物レンズの開口数を従来の暗視野観察に比べて高くすることで空間解像度を向上できるため、観察対象物の観察において従来に比べてより解像度の高い形態情報を取得できる。
 実施形態に係る観察装置D1、D2、D3、D4、D5、D6は、従来の観察装置に比べて、ラベルフリー/蛍光イメージングの検出手段を用いて細胞などの観察対象物についてよりリッチな形態情報を取得できる。実施形態に係る観察装置D4、D5、D6では、光信号の時系列波形情報から画像を再構成することなく、観察対象物に関する解像度の高い形態情報を取得できる検出手段を組み合わせて用いることができる。
 また、上述した実施形態に係る観察装置D2、D3、D4、D5、D6は、第2の光学的構造物(上述した実施形態において位相板37a)と、位相差検出器(上述した実施形態においてカメラ63、PMT94、マルチアノードPMT94d、1DアレイPD94e)とをさらに備える。
 第2の光学的構造物(上述した実施形態において位相板37a)は、光の位相を変化させる位相変更部と光を透過させる透過部とを有し、かつ位相変更部に結像される開口部材の開口部の像の形状が位相板の位相変更部の形状と略一致している。第2の光学的構造物(上述した実施形態において位相板37a)は、開口部材が配置される位置と共役な位置であってかつ第1の位置とは一致していない第2の位置に設置される。
 位相差検出器(上述した実施形態においてカメラ63、PMT94、マルチアノードPMT94d、1DアレイPD94e)は、対物レンズ36と検出器(上述した実施形態においてカメラ53、53c、63、71、82、85、PMT94、101、114、122、126、131、マルチアノードPMT94d、114d、1DアレイPD94e、114e)との間の光路において光学的構造物(上述した実施形態において遮光板51、反射部材51b)よりも対物レンズ36の側において、観察対象物(上述した実施形態において細胞C1)から発せられる光が第2の光学的構造物(上述した実施形態において位相板37a)が有する透過部を通過した直接光と回折光及びまたは散乱光との位相差を検出する。
 この構成により、実施形態に係る観察装置D2、D3、D4、D5、D6では、暗視野観察による測定と位相差観察による測定とを同時に行うことができるため、暗視野観察と位相差観察とを同時に行わない場合に比べてよりリッチな形態情報を取得できる。
 また、上述した実施形態に係る観察装置D4、D5では、観察光学系は、第2の光学的構造物(上述した実施形態において位相板37a)を経由した光の一部を変調する空間変調部(上述した実施形態において構造パターンマスク91)と、空間変調部(上述した実施形態において構造パターンマスク91)によって変調された光を検出する位相差波形検出光学系9、9dとを備える。
 この構成により、実施形態に係る観察装置D4、D5、D6では、位相差や暗視野での画像観察による測定と位相差波形検出による測定を同時に行うことができるため、位相差波形検出を位相差や暗視野での画像観察と同時に行わない場合に比べてよりリッチな形態情報を取得できる。また、実施形態に係る観察装置D4、D5では、位相差波形検出によってゴーストサイトメトリー技術に基づいて観察対象物の位相差波形に関する形態情報を2次元画像に変換せずに取得できるため、解像度の高い形態情報を2次元画像に変換する場合に比べてより高速に取得できる。
 また、上述した実施形態に係る観察装置D3、D4、D5、D6では、照明光学系は、観察対象物(上述した実施形態において細胞C1)に照明光を下方から照射する落射蛍光照明光学系(上述した実施形態において励起光源311と、励起フィルター312と、ダイクロイックミラー313との組)をさらに備え、観察光学系は、観察対象物(上述した実施形態において細胞C1)に落射蛍光照明光学系(上述した実施形態において励起光源311と、励起フィルター312と、ダイクロイックミラー313との組)によって照明光が照射されて発生する蛍光が光学的構造物(上述した実施形態において遮光板51、反射部材51b)を透過した蛍光を検出する落射蛍光検出器(上述した実施形態においてカメラ82、カメラ85、PMT122、PMT126)をさらに備える。
 この構成により、実施形態に係る観察装置D3、D4、D5、D6では、他の観察による測定(例えば暗視野透過画像観察あるいは暗視野波形検出といった暗視野観察による測定)と落射蛍光観察による測定とを同時に行うことができるため、落射蛍光観察が同時に行なわれない場合に比べてよりリッチな形態情報を取得できる。
 また、上述した実施形態に係る観察装置D4、D5では、マイクロ流体装置と、空間変調部(上述した実施形態において構造パターンマスク112)と、暗視野波形検出光学系11とを備える。
 マイクロ流体装置は、観察対象物(上述した実施形態において細胞C1)が流体と共に流れ得る流路(上述した実施形態においてフローセル34c)を備える。
 空間変調部(上述した実施形態において構造パターンマスク112)は、光学的構造物(上述した実施形態において反射部材51b)を経由した光の一部を変調する。
 暗視野波形検出光学系11は、空間変調部(上述した実施形態において構造パターンマスク112)によって変調された光を検出する。
 この構成により、実施形態に係る観察装置D4、D5では、他の観察による測定(例えば蛍光検出やSSCやFSC検出による測定)と暗視野波形検出による測定とを同時に行うことができるため、他の観察と暗視野波形検出とを同時に行わない場合に比べて、流路を流体と共に流れ得る観察対象物に関するよりリッチな形態情報を取得できる。また、実施形態に係る観察装置D4、D5では、ゴーストサイトメトリー技術に基いて流路を流体と共に流れ得る観察対象物の形態情報を2次元画像に変換せずに取得できるため、2次元画像に変換する場合に比べて解像度の高い形態情報をより高速に取得できる。
 また、上述した実施形態のうち、観察装置D5では、観察装置D4と同様に観察対象物(上述した実施形態において細胞C1)が流体と共に流れ得る流路(上述した実施形態においてフローセル34c)を備えるマイクロ流体装置を備えるが、空間変調部(上述した実施形態において構造パターンマスク91、構造パターンマスク112)によって変調された光を検出する検出器(上述した実施形態においてマルチアノードPMT94d、マルチアノードPMT114d)は複数の光検出素子(上述した実施形態においてチャネルP1)を備える。
 また、上述した実施形態に係る観察装置D5の一例では、空間変調部(上述した実施形態において構造パターンマスク91、構造パターンマスク112)は、光学的構造物(上述した実施形態において反射部材51b)を経由した光を領域毎にランダムに変調し、マスク変調光として検出器(上述した実施形態において検出器の検出面DS1)に入射する。
 検出器が有する複数の光検出素子(上述した実施形態においてチャネルP1)は、長手方向が流路(上述した実施形態においてフローセル34c)を流れる観察対象物(上述した実施形態において細胞C1)の像IC1が検出器上を移動する方向(上述した実施形態において矢印AR1の方向)と略垂直となる方向に直列に配置されている。
 この構成により、実施形態に係る観察装置D5では、ランダムなパターンを使用する場合において、細胞から取得される形態情報が細胞の部分について欠如してしまうことを抑制しながら複数の光検出素子によってシグナルを直列に検出できるため、測定を高速化できる。
 また、上述した実施形態に係る観察装置D5の別の一例では、空間変調部(上述した実施形態において構造パターンマスク91、構造パターンマスク112)は、光学的構造物(上述した実施形態において反射部材51b)を経由した光を変調し、マスク変調光は検出器(上述した実施形態において検出器の検出面DS2)に入射する。上記空間変調部(上述した実施形態において構造パターンマスク91、構造パターンマスク112)は光学的構造物(上述した実施形態において反射部材51b)を経由した光を領域毎にランダムに変調する。
 検出器が有する複数の光検出素子(上述した実施形態においてチャネルP2)は、長手方向が流路(上述した実施形態においてフローセル34c)を流れる観察対象物(上述した実施形態において細胞C1)の像IC1が検出器上を移動する方向(上述した実施形態において矢印AR1の方向)と略平行となる向きに配置されている。
 この構成により、実施形態に係る観察装置D5では、ランダムなパターンを有するマスク変調光を使用する場合において、取得される細胞の部分についての形態情報が複数の光検出素子間で欠如してしまうことを抑制しながら複数の光検出素子によって同時にシグナルを並列に検出できるため、測定を高速化できる。
 また、上述した実施形態に係る観察装置D6では、上述した実施形態に係る観察装置D5と同様に、観察対象物(上述した実施形態において細胞C1)が流体と共に流れ得る流路(上述した実施形態においてフローセル34c)を備えるマイクロ流体装置を備える。
 一方、上述した実施形態に係る観察装置D5とは異なり、観察装置D6では検出器(上述した実施形態において1DアレイPD94e、1DアレイPD114e)は、流路(上述した実施形態においてフローセル34c)を流れる観察対象物(上述した実施形態において細胞C1)の像IC1が検出器上を移動する方向(上述した実施形態において矢印AR2の方向)に対して所定の角度だけ傾いた直線として1列に複数の光検出素子(上述した実施形態においてチャネルP3)が配置されている。光学的構造物(上述した実施形態において反射部材51b)あるいは第2の光学的構造物(上述した実施形態において位相板37a)を経由した光の一部は、1列に配置された複数の光検出素子(上述した実施形態においてチャネルP3)によって検出される。
 この構成により、実施形態に係る観察装置D6では、構造マスクパターンによるマスク変調光を使用しない場合において、光信号の時系列波形情報からから画像を再構成することなく、空間解像度の高い形態情報を取得することを可能にし、複数の光検出素子を像IC1が検出器上を移動する方向(上述した実施形態において矢印AR2の方向)に対して所定の角度だけ傾いた直線上に1列に配置することで、細胞から取得される形態情報が細胞の部分について欠如してしまうことを抑制しながら、測定を高速化できる。
 以上、図面を参照してこの発明の一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。
D1、D2、D3、D4、D5、D6…観察装置、30…光源、32…スリット、36…対物レンズ、37、51…遮光板、51b…反射部材、4、53、53c、63、71、82、85…カメラ、94、101、114、122、126、131…PMT、94d、114d…マルチアノードPMT、94e、114e…1DアレイPD

Claims (8)

  1.  照明光学系と、
     観察光学系と
     を備え、
     前記照明光学系は、光源と、開口部材とを備え、
     前記観察光学系は、対物レンズと、光学的構造物と、検出器とを備え、
     前記光学的構造物は、前記開口部材が配置される位置と共役な第1の位置に配置され、
     前記光学的構造物は、光を遮断する遮断部と光を透過させる透過部とを有し、かつ前記遮断部の形状が前記光学的構造物上に結像される前記開口部材の開口部の像の形状を包含する形状であり、
     前記検出器は、前記光学的構造物を経由した暗視野光を検出する
     観察装置。
  2.  光の位相を変化させる位相変更部と光を透過させる透過部とを有し、かつ前記位相変更部に結像される前記開口部材の開口部の像の形状が位相変更部の形状と略一致している形状である第2の光学的構造物と、
     前記対物レンズと前記検出器との間の光路において前記光学的構造物よりも前記対物レンズの側において、観察対象物から発せられる光が前記透過部を通過した直接光と回折光及びまたは散乱光との位相差を検出する位相差検出器と
     をさらに備え、
     前記第2の光学的構造物は、前記開口部材が配置される位置と共役な位置であってかつ前記第1の位置とは一致していない第2の位置に配置される
     請求項1記載の観察装置。
  3.  前記観察光学系は、前記第2の光学的構造物を経由した光の一部を変調する空間変調部と、前記空間変調部によって変調された光を検出する位相差波形検出系とをさらに備える、
     請求項2に記載の観察装置。
  4.  前記照明光学系は、観察対象物に照明光を下方から照射する落射蛍光照明光学系をさらに備え、
     前記観察光学系は、前記観察対象物に前記落射蛍光照明光学系によって前記照明光が照射されて発生する蛍光が前記光学的構造物を透過した蛍光を検出する落射蛍光検出器をさらに備える
     請求項2または請求項3に記載の観察装置。
  5.  観察対象物が流体と共に流れ得る流路を備えるマイクロ流体装置をさらに備え、
     前記観察光学系は、前記光学的構造物を経由した光の一部を変調する空間変調部と、前記空間変調部によって変調された光を検出する暗視野波形検出光学系とを備える、
     請求項1から請求項4のいずれか一項に記載の観察装置。
  6.  前記空間変調部により変調された光を検出する前記検出器が複数の光検出素子を含み、
     前記空間変調部は、前記光学的構造物を経由した一部の光が入射する面を有し、前記面に入射する光を前記面に含まれる領域毎にランダムに変調し、
     前記複数の光検出素子は、長手方向が前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向と略垂直となる方向に直列に配置されている
     請求項5に記載の観察装置。
  7.  前記空間変調部により変調された光を検出する前記検出器が複数の光検出素子を含み、
     前記空間変調部は、前記光学的構造物を経由した光が入射する面を有し、前記面に入射する光を前記面に含まれる領域毎にランダムに変調し、
     前記複数の光検出素子は、長手方向が前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向と略平行となる向きに並列に配置されている
     請求項5に記載の観察装置。
  8.  観察対象物が流体と共に流れ得る流路を備えるマイクロ流体装置をさらに備え、
     前記検出器は、前記光学的構造物、あるいは光の位相を変化させる位相変更部と光を透過させる透過部とを有し、かつ前記位相変更部に結像される前記開口部材の開口部の像の形状が位相変更部の形状と略一致している形状である第2の光学的構造物を経由した光の一部を、1列に配置された複数の光検出素子によって検出し、
     前記複数の光検出素子は、前記流路を流れる前記観察対象物の像が前記検出器上を移動する方向に対して所定の角度だけ傾いて1列に配置されている
     請求項1から請求項4のいずれか一項に記載の観察装置。
PCT/JP2021/013564 2020-04-01 2021-03-30 観察装置 WO2021200960A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022512546A JPWO2021200960A1 (ja) 2020-04-01 2021-03-30
US17/935,707 US20230012588A1 (en) 2020-04-01 2022-09-27 Observation device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020065941 2020-04-01
JP2020-065941 2020-04-01

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/935,707 Continuation US20230012588A1 (en) 2020-04-01 2022-09-27 Observation device

Publications (1)

Publication Number Publication Date
WO2021200960A1 true WO2021200960A1 (ja) 2021-10-07

Family

ID=77927206

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/013564 WO2021200960A1 (ja) 2020-04-01 2021-03-30 観察装置

Country Status (3)

Country Link
US (1) US20230012588A1 (ja)
JP (1) JPWO2021200960A1 (ja)
WO (1) WO2021200960A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07270302A (ja) * 1994-03-30 1995-10-20 Toa Medical Electronics Co Ltd イメージングフローサイトメータ
JP2008539425A (ja) * 2005-04-25 2008-11-13 ハネウェル・インターナショナル・インコーポレーテッド カートリッジの流れ制御システム
JP2011141444A (ja) * 2010-01-07 2011-07-21 Nikon Corp 顕微鏡システム
JP2016510418A (ja) * 2013-02-18 2016-04-07 セラノス, インコーポレイテッド 多重分析のためのシステム及び方法
JP2018132501A (ja) * 2017-02-17 2018-08-23 国立大学法人大阪大学 電磁波検出装置、フローサイトメーター、電磁波検出方法及び電磁波検出プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07270302A (ja) * 1994-03-30 1995-10-20 Toa Medical Electronics Co Ltd イメージングフローサイトメータ
JP2008539425A (ja) * 2005-04-25 2008-11-13 ハネウェル・インターナショナル・インコーポレーテッド カートリッジの流れ制御システム
JP2011141444A (ja) * 2010-01-07 2011-07-21 Nikon Corp 顕微鏡システム
JP2016510418A (ja) * 2013-02-18 2016-04-07 セラノス, インコーポレイテッド 多重分析のためのシステム及び方法
JP2018132501A (ja) * 2017-02-17 2018-08-23 国立大学法人大阪大学 電磁波検出装置、フローサイトメーター、電磁波検出方法及び電磁波検出プログラム

Also Published As

Publication number Publication date
US20230012588A1 (en) 2023-01-19
JPWO2021200960A1 (ja) 2021-10-07

Similar Documents

Publication Publication Date Title
US10921234B2 (en) Image forming cytometer
US5754291A (en) Micro-imaging system
US7547874B2 (en) Single axis illumination for multi-axis imaging system
JP5884021B2 (ja) マルチスペクトル撮像装置およびマルチスペクトル撮像方法
JP2019532360A (ja) 顕微鏡の検出光のための光学グループ、顕微鏡法のための方法、及び顕微鏡
CN113624666B (zh) 一种基于点阵激光扫描的流式成像系统
CN109073875B (zh) 用于可选择角度地照明的照明模块
US8633432B2 (en) Reflective focusing and transmissive projection device
US20080204766A1 (en) Method and microscope device for observing a moving specimen
US10634890B1 (en) Miniaturized microscope for phase contrast and multicolor fluorescence imaging
RU2510959C2 (ru) Устройство для анализа люминесцирующих биологических микрочипов
US20130250088A1 (en) Multi-color confocal microscope and imaging methods
JP2012003198A (ja) 顕微鏡
JP2014048096A (ja) 二次元分光計測装置及び二次元分光計測方法
WO2021200960A1 (ja) 観察装置
US9958661B2 (en) Apparatus for structured illumination of a specimen
US20210364409A1 (en) A device for illuminating a particle, and a system and a method for particle imaging
WO2010024235A1 (ja) 共焦点顕微鏡装置
US20230090631A1 (en) Flow cytometer
US20210278650A1 (en) Image Capturing Method and Apparatus
JP5400499B2 (ja) 焦点検出装置
JP5394718B2 (ja) 顕微観察装置
CN114442298A (zh) 用于捕获图像数据的设备和方法
WO2024097398A2 (en) High throughput optical imager
US7868279B2 (en) Focus detecting apparatus for focusing on surface of transparent substance

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21780470

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022512546

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21780470

Country of ref document: EP

Kind code of ref document: A1