WO2020031668A1 - 光学顕微鏡装置及び光学顕微鏡システム - Google Patents

光学顕微鏡装置及び光学顕微鏡システム Download PDF

Info

Publication number
WO2020031668A1
WO2020031668A1 PCT/JP2019/028557 JP2019028557W WO2020031668A1 WO 2020031668 A1 WO2020031668 A1 WO 2020031668A1 JP 2019028557 W JP2019028557 W JP 2019028557W WO 2020031668 A1 WO2020031668 A1 WO 2020031668A1
Authority
WO
WIPO (PCT)
Prior art keywords
illumination
light
optical system
optical microscope
optical
Prior art date
Application number
PCT/JP2019/028557
Other languages
English (en)
French (fr)
Inventor
堂脇 優
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP19846152.7A priority Critical patent/EP3835845A4/en
Priority to JP2020536426A priority patent/JP7380569B2/ja
Priority to US17/264,270 priority patent/US11487095B2/en
Publication of WO2020031668A1 publication Critical patent/WO2020031668A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0032Optical details of illumination, e.g. light-sources, pinholes, beam splitters, slits, fibers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/6428Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • G01N21/6458Fluorescence microscopy
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0036Scanning details, e.g. scanning stages
    • G02B21/004Scanning details, e.g. scanning stages fixed arrays, e.g. switchable aperture arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0052Optical details of the image generation
    • G02B21/0068Optical details of the image generation arrangements using polarisation
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0052Optical details of the image generation
    • G02B21/0076Optical details of the image generation arrangements using fluorescence or luminescence
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/008Details of detection or image processing, including general computer control
    • G02B21/0084Details of detection or image processing, including general computer control time-scale detection, e.g. strobed, ultra-fast, heterodyne detection
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/0092Polarisation microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/16Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/48Laser speckle optics
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/6428Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
    • G01N2021/6439Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes" with indicators, stains, dyes, tags, labels, marks
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0052Optical details of the image generation
    • G02B21/0064Optical details of the image generation multi-spectral or wavelength-selective arrangements, e.g. wavelength fan-out, chromatic profiling

Definitions

  • the present disclosure relates to an optical microscope device and an optical microscope system.
  • Patent Literature 1 discloses an observation device capable of changing the position of a light stimulus in accordance with the position and shape of a cell and observing a cell immediately after the light stimulus.
  • a galvanomirror and a DMD Digital Mirror Device
  • an optical microscope apparatus and an optical microscope that can realize more uniform and more accurate illumination even for a specimen including a biological material that changes its function in response to light. Suggest a system.
  • a light source that emits illumination light for illuminating a specimen containing a biomaterial that changes its function in response to light, and an LCOS (Liquid Crystal On Silicon) space that controls a polarization state of the illumination light
  • a light modulation element a first illumination optical member for uniformly illuminating the LCOS spatial light modulation element, and the illumination light traveling from the LCOS spatial light modulation element side to the specimen side according to a polarization state of the illumination light.
  • a first illumination optical system having a polarization optical element for controlling the transmission state of the first illumination optical system, and a second illumination optical member for forming an image of a light beam from the first illumination optical system on a sample surface.
  • an optical microscope apparatus including an illumination optical system, an imaging optical member, and an imaging element, and an imaging optical system for imaging the sample surface.
  • a light source that emits illumination light for illuminating a specimen
  • an LCOS (Liquid Crystal On Silicon) spatial light modulator that controls a polarization state of the illumination light
  • the LCOS spatial light modulator A first illumination optical member for uniformly illuminating, and a polarization optical element for controlling a transmission state of the illumination light from the LCOS spatial light modulator side to the sample side in accordance with a polarization state of the illumination light
  • a second illumination optical system having a second illumination optical member for forming an image of a light beam from the first illumination optical system on a sample surface, an imaging optical member, and an imaging element And an image pickup optical system for picking up an image of the sample surface.
  • a light source that emits illumination light for illuminating a specimen including a biological material that changes its function in response to light, and an LCOS (Liquid Crystal On Silicon) that controls a polarization state of the illumination light
  • a first illumination optical system having a polarizing optical element for controlling a transmission state of the illumination light, and a second illumination optical member for forming an image of a light beam from the first illumination optical system on a sample surface.
  • An optical microscope apparatus having an illumination optical system, an imaging optical member and an imaging element, and an imaging optical system for imaging the sample surface, and an operation state of the optical microscope apparatus.
  • Gosuru controller having an image processing unit performing image processing on the captured image of the specimen produced by the imaging device, an optical microscope system is provided.
  • the first illumination optical system controls the polarization state of the illumination light emitted to the sample by the LCOS spatial light modulator, and outputs the illumination light whose polarization state is controlled to the second illumination optical system. Guide light into the system.
  • the second illumination optical system forms an image of the light beam from the first illumination optical system on the sample surface, and the imaging optical system images the sample surface irradiated with the illumination light.
  • FIG. 1 is an explanatory diagram illustrating an overall configuration of an optical microscope system according to an embodiment of the present disclosure. It is explanatory drawing which showed typically an example of the whole structure of the optical microscope apparatus concerning the embodiment.
  • FIG. 4 is an explanatory diagram for describing an LCOS spatial light modulation element in the optical microscope device according to the embodiment;
  • FIG. 3 is an explanatory diagram for describing the optical microscope device according to the embodiment; It is explanatory drawing which showed typically another example of the whole structure of the optical microscope apparatus which concerns on the embodiment. It is explanatory drawing which showed typically another example of the whole structure of the optical microscope apparatus which concerns on the embodiment. It is explanatory drawing which showed typically another example of the whole structure of the optical microscope apparatus which concerns on the embodiment. It is explanatory drawing which showed typically another example of the whole structure of the optical microscope apparatus which concerns on the embodiment.
  • FIG. 3 is an explanatory diagram for describing the optical microscope device according to the embodiment; It is explanatory drawing which showed typically another example of the whole structure of the optical microscope apparatus which concerns on the embodiment.
  • FIG. 2 is a block diagram schematically illustrating an example of a configuration of the arithmetic processing device according to the same embodiment.
  • FIG. 3 is an explanatory diagram for describing the arithmetic processing device according to the embodiment;
  • FIG. 2 is a block diagram illustrating an example of a hardware configuration of an arithmetic processing device according to the embodiment.
  • FIG. 1 is an explanatory diagram showing an example of the entire configuration of the optical microscope system according to the present embodiment.
  • the optical microscope system according to the present embodiment is used for observing a biological material whose function changes in response to light.
  • the optical microscope system 1 includes an optical microscope device 10 and an arithmetic processing device 20, as shown in FIG.
  • the optical microscope apparatus 10 operates under the control of the arithmetic processing unit 20.
  • the optical microscope apparatus 10 captures an image of a specimen including a biological material whose function changes in response to light, and outputs data of the generated captured image to the arithmetic processing device 20.
  • the detailed configuration of the optical microscope device 10 will be described again below.
  • the arithmetic processing unit 20 transmits a predetermined control signal to the optical microscope device 10 and controls the operation state of at least a part of the configuration of the optical microscope device 10 in a comprehensive manner.
  • the arithmetic processing device 20 performs image processing on the data of the captured image of the sample output from the optical microscope device 10 and provides the obtained image processing result to the user of the optical microscope system 1. Further, the arithmetic processing device 20 can also control the operation state of the optical microscope device 10 using the obtained image processing result.
  • the detailed configuration of the arithmetic processing device 20 will be described below again. Note that the arithmetic processing device 20 can also control only the operation state of a part of the configuration of the optical microscope device 10.
  • the arithmetic processing unit 20 controls at least a part of the configuration of various optical systems of the optical microscope apparatus 10 (for example, at least one of a first illumination optical system and an imaging optical system described in detail below). It is also possible to realize a mode in which other configurations (for example, a stage and an objective lens) of the optical microscope apparatus 10 are not controlled.
  • FIG. 2 is an explanatory diagram schematically showing an example of the entire configuration of the optical microscope device according to the present embodiment.
  • FIG. 3 is an explanatory diagram for describing an LCOS spatial light modulator in the optical microscope device according to the present embodiment
  • FIGS. 4 and 9 are explanatory diagrams for describing the optical microscope device according to the present embodiment.
  • It is. 5 to 8 and 10 are explanatory diagrams schematically showing another example of the entire configuration of the optical microscope apparatus according to the present embodiment.
  • the optical microscope apparatus 10 according to the present embodiment is provided with a stage 11 on which a specimen including an observation target is disposed.
  • the optical microscope apparatus 10 according to the present embodiment can perform observation while irradiating light even with a biological material that changes its function in response to light, and a biological material that changes its function in response to light.
  • a specimen S containing a material is provided on the stage 11.
  • the biomaterial that changes its function in response to light is not particularly limited, and is a material that changes its function in response to light. If so, various known biomaterials can be used as the observation target.
  • a photoresponsive biomaterial for example, various photoactivating proteins represented by channelrhodopsin-2 (Chnerrhodopsin-2, ChR2) and the like, and photoreceptor domains derived from plants (AsLOV2, CRY2 / CIB1) And various proteins, lipids, genes, and the like, such as various photoreceptor domains represented by E.g.
  • the optical microscope apparatus 10 includes a first illumination optical system 13A as schematically shown in FIG. , A second illumination optical system 13B, and an imaging optical system 13C.
  • a first illumination optical system 13A as schematically shown in FIG.
  • a second illumination optical system 13B as schematically shown in FIG.
  • an imaging optical system 13C an imaging optical system 13C.
  • these three types of optical systems will be described in detail.
  • the optical microscope apparatus 10 according to the present embodiment described in detail below even if the specimen S does not include the photoresponsive biomaterial as described above, it is possible to perform favorable observation. is there.
  • the first illumination optical system 13A is an optical system that controls a pattern of illumination light applied to the sample S by controlling the polarization state of the illumination light applied to the sample S.
  • the first illumination optical system 13A includes a light source 101 (101A, 101B, 101C), an integrator 107 as an example of a first illumination optical member, and a condenser lens 109.
  • a polarizing beam splitter 111 as an example of a polarizing optical element, and an LCOS (Liquid Crystal On Silicon) spatial light modulator 113.
  • LCOS Liquid Crystal On Silicon
  • the first illumination optical system 13A includes, in addition to the various optical elements described above, a coupling lens (directivity conversion element) 103 (103A, 103B, 103C) and a dichroic as an example of an optical path combining element. It is preferable to have the prism 105 (105A, 105B).
  • the light source 101 emits illumination light for applying a light stimulus to the photoresponsive biological material contained in the sample S.
  • the illumination light has a predetermined polarization direction.
  • a biological material that changes its function in response to light or a biological material that is labeled with a predetermined luminescent dye, or the like, further includes a luminescent protein that emits light when irradiated with illumination light of a predetermined wavelength.
  • the light source 101 may further include a light source capable of irradiating illumination light for causing light emission as described above. From such a viewpoint, FIG. 2 illustrates a case where the first illumination optical system 13A includes three types of light sources 101A, 101B, and 101C. However, in the present disclosure, the light source 101 includes at least one light source 101A. It is only necessary that at least one exists.
  • the light source 101 can emit light having a wavelength that gives a light stimulus to the photoresponsive biomaterial contained in the sample S or causes various kinds of light emission as described above. If so, any known light source can be used. As such a light source, for example, various laser light sources can be mentioned, and it is convenient to use a laser diode (Laser @ Diode: LD). This is because high output linearly polarized light can be easily used by using a laser diode. When a light source that does not have a predetermined polarization state and emits unpolarized illumination light is used, the first illumination optical system 13 ⁇ / b> A controls the light between the light source 101 and the LCOS spatial light modulator 113.
  • the first illumination optical system 13 ⁇ / b> A controls the light between the light source 101 and the LCOS spatial light modulator 113.
  • a polarizer that gives a predetermined polarization direction to unpolarized illumination light may be provided on the road, and a polarizer may be provided for the light source 101 itself.
  • a description will be given of a case where the illumination light having a predetermined deflection state is emitted from the light source 101 as an example.
  • the illumination light having a predetermined polarization emitted from the light source 101A enters the coupling lens 103A.
  • each of the illumination lights having a predetermined polarization emitted from the light sources 101B and 101C respectively enters the coupling lenses 103B and 103C corresponding to each light source.
  • the coupling lens 103 converts illumination light emitted from each light source 101 into substantially parallel light, and sets the directional angle of the illumination light emitted from each light source 101 to the directional angle of the parallel light. Or so as to approach the directivity angle of the parallel light.
  • Each coupling lens 103 is disposed at a position where light within a directional angle of the illumination light emitted from each light source 101 is incident.
  • FIG. 2 illustrates a case where the coupling lens 103 is configured by a single lens, but the coupling lens 103 may be configured by a plurality of lenses.
  • each illumination light emitted from each light source 101 is transmitted by a dichroic prism 105 as an example of an optical path combining element. Are combined into one light flux.
  • the illumination light emitted from the light source 101A and transmitted through the coupling lens 103A and the illumination light emitted from the light source 101B and transmitted through the coupling lens 103B are transmitted to the dichroic prism 105A.
  • a mirror having wavelength selectivity is provided inside the dichroic prism 105A.
  • Such a mirror has wavelength selectivity such that light incident from the light source 101A is transmitted through the mirror, and light incident from the light source 101A is reflected by the mirror.
  • the illumination light emitted from the light source 101A and the illumination light emitted from the light source 101B are combined to form one light flux.
  • the combined illumination light and the illumination light emitted from the light source 101C and transmitted through the coupling lens 103C enter the dichroic prism 105B.
  • a mirror having wavelength selectivity is also provided inside the dichroic prism 105B.
  • Such a mirror has wavelength selectivity such that light incident from the light source 101A is transmitted through the mirror, and light incident from the light source 101C is reflected by the mirror.
  • the illumination light emitted from the light source 101C is combined with the illumination light incident from the dichroic prism 105A to form one light flux.
  • the illumination light that has become one light flux sequentially enters an integrator 107 and a condenser lens 109 as an example of a first illumination optical member.
  • the integrator 107 illuminates the LCOS spatial light modulator 113 located at the subsequent stage with a uniform intensity distribution.
  • the integrator 107 has, for example, a plurality of lenses arranged in a predetermined arrangement state (for example, in a matrix).
  • a light beam emitted from the light source 101 has an uneven intensity distribution (luminance distribution) on a plane perpendicular to the traveling direction. Therefore, when these light beams are guided to the LCOS spatial light modulation element 113 as they are, the intensity distribution in the LCOS spatial light modulation element 113 becomes non-uniform.
  • the condenser lens 109 superimposes each of the light beams divided into a plurality of light beams by the integrator 107 to the LCOS spatial light modulator 113.
  • the condenser lens 109 is not particularly limited, and may have an arbitrary configuration.
  • FIG. 2 illustrates a case where the integrator 107 is configured by one fly-eye lens, but the integrator 107 may be configured by a pair of fly-eye lenses.
  • FIG. 2 illustrates a case where the condenser lens 109 is configured by a single lens, but the condenser lens 109 may be configured by a plurality of lenses.
  • the polarization beam splitter 111 controls the transmission state of the illumination light traveling from the LCOS spatial light modulator 113 side to the sample S side according to the polarization state of the illumination light. Specifically, the polarization beam splitter 111 reflects a light beam incident from the light source 101 side (that is, a light beam having the same polarization direction as the illumination light) toward the LCOS spatial light modulation element 113 side. Further, with respect to the light beam incident from the LCOS spatial light modulation element 113 side, the light beam having the same polarization direction as the illumination light is reflected to the light source 101 side and is different from the illumination light (for example, a polarization orthogonal to the illumination light).
  • the light flux (which is in a state) is transmitted to the sample S side.
  • the polarization beam splitter 111 and the LCOS spatial light modulator 113 in combination, it is possible to prevent unnecessary illumination light from being irradiated to the sample S side.
  • the LCOS spatial light modulation element 113 two-dimensionally modulates the light flux transmitted through the condenser lens 109 so that a desired illumination light irradiation state (that is, an irradiation pattern) is realized on the sample surface on the stage 11. .
  • the LCOS spatial light modulator 113 is disposed on the optical path of the first illumination optical system 13A so as to be at a position optically conjugate with the sample surface of the sample S.
  • the LCOS spatial light modulator 113 is a spatial light modulator having a structure in which liquid crystal is arranged on a silicon substrate. On the silicon substrate, an electric address circuit is constructed by a known semiconductor technology, and an uppermost layer is formed. The pixel is constructed by providing a known electrode metal such as aluminum. In such an LCOS spatial light modulator 113, by controlling the alignment of the liquid crystal for each pixel, the phase of the incident light can be controlled independently for each pixel. Since the LCOS spatial light modulator 113 having the above-described structure has a high aperture ratio, it can illuminate the sample S placed on the stage 11 without gaps.
  • Such an LCOS spatial light modulator 113 is constituted by, for example, a liquid crystal panel using TN (Twisted Nematic) type liquid crystal (liquid crystal molecules having a positive refractive index anisotropy). Specifically, a structure in which a liquid crystal layer using a TN mode liquid crystal is sandwiched between a pair of substrates to which a driving voltage based on an illumination light irradiation pattern is applied for each of a plurality of pixels arranged in a matrix. It has become.
  • TN Transmission Nematic
  • LCOS spatial light modulator 113 when the above-described TN liquid crystal is used, light modulation is performed as described below when no drive voltage is applied and when a drive voltage is applied.
  • the LCOS spatial light modulation element 113 imparts a phase difference in the plane of incidence to the light incident on the pixel by twisting and aligning the TN type liquid crystal, and rotates the polarization axis by about 90 degrees. It has the characteristic of emitting light after being emitted. That is, when no drive voltage is applied, the light enters the pixel such that the state of polarization at the time of incidence is orthogonal to the state of polarization at the time of emission (for example, so that light incident as S-polarized light is emitted as P-polarized light). Light modulation is performed while reflecting light.
  • the LCOS spatial light modulator 113 maintains the polarization axis without giving a phase difference in the plane of incidence to the light incident on the pixels by aligning the liquid crystal molecules in the thickness direction of the element.
  • it has a characteristic of emitting light incident on a pixel. That is, when the drive voltage is applied, the light is incident on the pixel such that the state of polarization at the time of incidence and the state of polarization at the time of emission are parallel (for example, light incident as S-polarized light is emitted as S-polarized light). Light modulation is performed while reflecting light.
  • the polarization of the irradiation light emitted from the LCOS spatial light modulator 113 is different between when no drive voltage is applied and when the drive voltage is applied.
  • the polarization characteristics of the LCOS spatial light modulator 113 are controlled to a desired state in each pixel of the LCOS spatial light modulator 113 as schematically shown in FIG.
  • the liquid crystal panel included in the LCOS spatial light modulator 113 is not limited to the TN liquid crystal panel described above, and a liquid crystal panel using another type of liquid crystal may be provided.
  • the LCOS spatial light modulation element 113 includes, for example, a VA (Vertical Alignment) type, an STN (Super Twisted Nematic) type, an IPS (In Plane Switching) type, an OCB (Optically Complemented Bend), and an Mult (Alternative) MatViaMatViaMatViaMatVintaMatVin.
  • a liquid crystal panel using a liquid crystal of an alignment (Alignment) type or an ASM (Axially Symmetrically aligned Micro-cell) type may be provided.
  • the LCOS spatial light modulation element 113 may be provided with a liquid crystal panel using a smectic liquid crystal (for example, a ferroelectric liquid crystal) other than the nematic liquid crystal.
  • a digital micromirror device can be used as a spatial light modulator other than the LCOS spatial light modulator.
  • the DMD is a device that modulates light by continuously changing the direction of the micromirror due to its mechanism, off-state light is scattered and easily becomes stray light.
  • the observation object of interest in the present embodiment is a photoresponsive biomaterial, whether or not such biomaterial is irradiated with illumination light should be strictly distinguished in terms of observation accuracy. is there.
  • the spatial light modulator stray light unintended by the user may be illuminated on the photoresponsive biomaterial without knowing it, and unintended reduction in observation accuracy may occur. Therefore, in the optical microscope device 10 according to the present embodiment, the above-described LCOS spatial light modulator is used as the spatial light modulator.
  • the luminous flux of the illumination light whose polarization state is controlled by the LCOS spatial light modulation element 113 and which has passed through the polarization beam splitter 111 is guided from the first illumination optical system 13A to the second illumination optical system 13B.
  • the second illumination optical system 13B is an optical system that forms an image of the luminous flux of the illumination light from the first illumination optical system 13A on the sample S (more specifically, the sample surface).
  • the second illumination optical system 13B has a condenser lens 115 and an objective lens 121 as an example of a second illumination optical member. Further, it is preferable that the second illumination optical system 13B has a bandpass filter 117 and a dichroic mirror 119 in addition to the above optical elements.
  • the condenser lens 115 couples a uniform luminous flux of the illumination light from the LCOS spatial light modulator 113 to an objective lens 121 described later.
  • the condenser lens 115 according to the present embodiment is not particularly limited, and various known condenser lenses can be used.
  • FIG. 2 illustrates a case where a single condenser lens 115 is used, but the condenser lens 115 may be composed of a plurality of lenses.
  • the luminous flux of the illumination light transmitted through the condenser lens 115 enters the dichroic mirror 119 via the band-pass filter 117.
  • the band-pass filter 117 reflects light in a specific wavelength band and transmits light in other wavelength bands. By transmitting the luminous flux of the illumination light through the band-pass filter 117, it is possible to irradiate the illumination light of a desired wavelength band to the sample surface and to prevent the light of the unintended wavelength band from being emitted to the sample surface.
  • the band-pass filter 117 is not particularly limited, and an appropriate filter may be appropriately installed according to the wavelength band of the illumination light emitted from the light source 101 provided in the optical microscope apparatus 10 according to the present embodiment. Good.
  • the dichroic mirror 119 is a mirror that transmits half of the incident light and reflects half of the light. When the light beam of the illumination light enters the dichroic mirror 119, the light beam of the illumination light is coupled to the objective lens 121.
  • the dichroic mirror 119 is not particularly limited, and various known dichroic mirrors can be used.
  • the objective lens 121 forms an image of the luminous flux of the illumination light coupled by the condenser lens 115 on the specimen surface of the specimen S.
  • the objective lens 121 according to the present embodiment is not particularly limited, and various known objective lenses can be used. Although a single objective lens 121 is illustrated in FIG. 2, the optical microscope apparatus 10 according to the present embodiment may include a plurality of objective lenses 121.
  • the illuminating light flux forms an image on the sample surface of the sample S by the second illumination optical system 13B as described above.
  • the LCOS spatial light modulation element 113 and the sample surface have an optically conjugate relationship as described above, the LCOS spatial light modulation element 113
  • the sample surface is irradiated with the illumination light while the realized illumination light irradiation pattern (the irradiation pattern shown in FIG. 3 and the like) is held.
  • the biological material that changes its function in response to light in the sample S has light in an appropriate wavelength band for changing its function in the illumination light.
  • the function is changed in response to the light in the wavelength band.
  • the state of the change in the function of such a photoresponsive biomaterial is guided to the image sensor by the imaging optical system 13C described in detail below, and is recorded as an image.
  • the photoresponsive biomaterial in the specimen S contains a luminescent protein that emits light when irradiated with illumination light of a predetermined wavelength, or when labeled with a predetermined luminescent dye
  • the illumination light Consider a case in which light of a suitable wavelength band for changing the function and light of a suitable wavelength band for reacting a luminescent protein or luminescent dye exist therein.
  • the luminescent protein at the position irradiated with the illumination light emits light to emit fluorescence or phosphorescence, or the luminescent dye used for the label is excited to emit fluorescence or phosphorescence.
  • photoresponsive biomaterials change their function.
  • the photoresponsive biomaterial of interest is, for example, as schematically shown in FIG.
  • the function is changed in response to the illumination light in the wavelength band emitted from the light source 101A. Since many light-responsive biomaterials do not emit light when their functions change, the user cannot grasp whether or not the light-responsive biomaterial of interest is reliably irradiated with illumination light. Can not.
  • a light-responsive biomaterial is prepared by using a light-emitting dye (for example, a fluorescent dye) that emits light in response to illumination light in a wavelength band emitted from the light source 101B or 101C. Label in advance.
  • the luminescent pigment emits light by the illumination light from the light source 101B or the light source 101C, so that the observer can grasp the position of the photoresponsive biomaterial of interest, and It is possible to reliably irradiate an illuminating light to a living biomaterial.
  • the imaging optical system 13C is an optical system having an imaging optical member and an imaging element for imaging the sample surface of the sample S placed on the stage 11.
  • the imaging optical system 13C includes an objective lens 121 and an imaging lens 125 as an example of an imaging optical member, and an imaging element 127. It is preferable that the imaging optical system 13C further includes a dichroic mirror 119 and a bandpass filter 123.
  • the light beam from the sample surface is condensed by the objective lens 121 which also functions as the second illumination optical system 13B, and passes through the dichroic mirror 119 which also functions as the second illumination optical system 13B. Thereafter, the light beam from the sample surface enters the bandpass filter 123.
  • the band-pass filter 123 reflects light in a specific wavelength band and transmits light in other wavelength bands. By transmitting the light beam from the sample surface through the band-pass filter 123, only the light beam in a desired wavelength band can be formed on the image sensor 127.
  • the bandpass filter 123 is not particularly limited, and includes a wavelength band of illumination light emitted from the light source 101 provided in the optical microscope device 10 according to the present embodiment, and a wavelength band of light emission that can be generated from the sample S. What is necessary is just to install an appropriate thing suitably according to.
  • the light beam from the sample surface transmitted through the bandpass filter 123 enters the imaging lens 125.
  • the imaging lens 125 focuses the light flux from the sample surface condensed by the objective lens 121 on the image sensor 127.
  • the imaging lens 125 may have an arbitrary configuration.
  • the magnification ratio is determined by the focal length of the condenser lens 115 and the focal length of the imaging lens 125.
  • the pixel size of the LCOS spatial light modulator 113 and the image sensor 127 or the device size of the LCOS spatial light modulator 113 and the image sensor 127 determined by pixel size ⁇ number of pixels is used as a reference.
  • the condenser lens 115 may be 2: 1. If the pixel size projected on the sample surface is to be set to 4: 1, the ratio of the focal length of the condenser lens 115 to the focal length of the imaging lens 125 may be 1: 2.
  • the pixel sizes of the LCOS spatial light modulator 113 and the image sensor 127 are respectively 6 ⁇ m and 3 ⁇ m, the number of pixels is respectively 2000 ⁇ 1000 and 4000 ⁇ 2000, and the device size projected on the sample surface Is desired, the ratio of the focal length of the condenser lens 115 to the focal length of the imaging lens 125 may be set to 1: 1.
  • the image sensor 127 captures an image of a light beam from the sample surface to generate a captured image.
  • the image sensor 127 is not particularly limited.
  • a known image sensor such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor) image sensor can be appropriately used.
  • an image sensor for monochrome imaging can be used, but an image sensor for color imaging having a channel configuration of three or more channels (for example, an image sensor having a three-channel configuration of Red, Green, and Blue, , Red, Green, Blue, Infrared, etc.).
  • An image of a light-responsive biomaterial containing a light-emitting protein or a light-emitting dye is captured using an image pickup device for color imaging, so that, for example, as shown schematically in FIG.
  • an image of a material can be imaged in one channel (for example, B pixels), and an image of light emitted from a luminescent dye can be imaged in one channel (for example, R pixels). That is, images in a plurality of wavelength bands can be imaged by one color image pickup device.
  • optical microscope device 10 The configuration of the optical microscope device 10 according to the present embodiment has been described above in detail with reference to FIGS.
  • FIG. 5 is a first modified example of the optical microscope device 10 according to the present embodiment.
  • the optical microscope device 10 according to the first modified example has an optical path between the polarization beam splitter 111 and the LCOS spatial light modulator 113 in addition to the configuration of the optical microscope device 10 according to the present embodiment illustrated in FIG. And a polarization compensating element 131.
  • the polarization compensation element 131 is an element that imparts a phase difference to incident light to change the polarization state of the incident light.
  • the polarization compensating element 131 first includes a first surface (a light transmitting surface on the side of the polarization beam splitter 111) and a second surface (a light transmitting surface on the side of the LCOS spatial light modulation element 113) facing each other along the optical axis. Surface).
  • the polarization compensating element 131 has polarities opposite to each other when light is incident from the polarization beam splitter 111 (first surface) side and when light is incident from the LCOS spatial light modulation element 113 (second surface) side. In the opposite direction), a phase difference having substantially the same absolute value is provided.
  • the polarization compensation element 131 has a phase difference characteristic (a phase difference symmetry) that does not depend on the light incident direction. Accordingly, the phase difference given when the light from the polarization beam splitter 111 side is incident on the polarization compensating element 131, the phase difference generated when the light is modulated in the LCOS spatial light modulating element 113, and the LCOS spatial light modulating element The sum of the phase difference given when light is incident from the 113 side makes it possible to reduce light leakage to the sample surface when illumination light is not irradiated. As a result, it is possible to irradiate the illumination light with higher accuracy, and to suppress the lifting of the background in the image sensor 127, thereby obtaining a better captured image.
  • a phase difference characteristic a phase difference symmetry
  • the polarization beam splitter 111 is provided between the LCOS spatial light modulator 113 and the sample surface, so that the sample surface when the illumination light is not irradiated is provided. It seems that no light leakage occurs.
  • the polarization component obliquely incident on the polarization beam splitter 111 is Can occur. Such obliquely incident polarized light components may cause light leakage to the sample surface when the illumination light is not irradiated.
  • FIG. 6 is a second modification of the optical microscope apparatus 10 according to the present embodiment.
  • the optical microscope device 10 according to the second modified example includes a speckle removing element 133 for the integrator 107 in addition to the configuration of the optical microscope device 10 according to the present embodiment illustrated in FIG.
  • the optical microscope device 10 since it is preferable to use a light source capable of emitting coherent light as the light source 101, there is a possibility that speckles may occur on the illumination light irradiation surface. is there.
  • speckle removing element 133 and oscillating the integrator 107 it is possible to suppress the occurrence of speckle as described above.
  • any known member can be used as long as the integrator 107 can be vibrated to the extent that the alignment of the first illumination optical system 13A is not broken.
  • various types of piezoelectric elements such as piezo elements can be used.
  • FIG. 7 is a third modification of the optical microscope apparatus 10 according to the present embodiment.
  • the optical microscope device 10 according to the third modified example includes both the polarization compensation element 131 and the speckle removing element 133 in addition to the configuration of the optical microscope device 10 according to the present embodiment illustrated in FIG. .
  • FIG. 8 is a fourth modified example of the optical microscope apparatus 10 according to the present embodiment.
  • the optical microscope apparatus 10 according to the fourth modified example is provided with a third illumination optical system 13D that functions as a transmission illumination optical system in addition to the configuration of the optical microscope apparatus 10 according to the present embodiment illustrated in FIG. ing.
  • a fluorescence image or the like is obtained when an observation target is observed.
  • a third illumination optical system 13D that functions as a transmission illumination optical system for example, It is possible to obtain a bright-field image of the observation target as shown in FIG. 9 and obtain a phase difference image of the observation target. By obtaining a bright-field image or the like of the observation target, the user can more easily select a biological material to be irradiated with illumination light.
  • FIG. 8 illustrates a case where the third illumination optical system 13D is provided for the configuration of the optical microscope apparatus 10 according to the present embodiment illustrated in FIG. 2, the configuration illustrated in FIG. It goes without saying that at least one of the polarization compensating element 131 and the speckle removing element 133 may be further provided in the configuration example.
  • the third illumination optical system 13D uniformly illuminates the sample surface of the sample S from the side opposite to the first and second illumination optical systems 13A and 13B.
  • the third illumination optical system 13D includes a second light source 141, a light source lens 143 as an example of a third illumination optical member, a field stop 145, a relay lens 147, and an aperture.
  • An aperture 149 and a condenser lens 151 are provided.
  • the second light source 141 is not particularly limited, and any known light source can be used. However, since the observation object to which the optical microscope apparatus 10 according to the present embodiment focuses is a photoresponsive biomaterial, light in a wavelength band to which the biomaterial does not react (in other words, as shown in FIG. 4). It is important to use a light source capable of irradiating light of a wavelength band that does not overlap with the absorption spectrum of a biological material having high photoresponsiveness. As such a light source, a light source having a wide wavelength band such as a halogen lamp or a white LED (Light Emitting Diode) or a light source having a narrow wavelength band such as various laser light sources may be used.
  • a light source having a wide wavelength band such as a halogen lamp or a white LED (Light Emitting Diode) or a light source having a narrow wavelength band such as various laser light sources may be used.
  • an optical filter for removing light in a wavelength band that overlaps with the absorption spectrum of a photoresponsive biomaterial is used for the second light source 141 for the above-described reason. It is important to provide on the optical path between the sample and the sample surface.
  • the second illumination light emitted from the second light source 141 enters the light source lens 143.
  • the light source lens 143 converts the light flux of the second illumination light into substantially parallel light, and the second illumination light that has become substantially parallel enters the field stop 145.
  • the light source lens 143 can be realized by appropriately using various optical lenses alone or in combination so as to be able to collimate a light beam.
  • the field stop 145 is for adjusting the illumination range of the sample surface by the light beam of the second illumination light, and is provided at a position optically conjugate with the sample surface.
  • the light flux of the second illumination light enters the relay lens 147 after the irradiation range is adjusted by the field stop 145.
  • the field stop 145 is not particularly limited, and various known stops can be appropriately used.
  • the relay lens 147 is a lens for converging the substantially parallel second illumination light
  • the aperture stop 149 is a stop for adjusting the brightness of the second illumination light reaching the sample surface. It is. After being converged by the relay lens 147, the diverging second illumination light enters the condenser lens 151 after the brightness is adjusted by the aperture stop 149.
  • the relay lens 147 and the aperture stop 149 are not particularly limited, and various known optical members can be appropriately used.
  • the condenser lens 151 is a lens that converts the luminous flux of the second illumination light, which converges after being converged by the relay lens 147, into substantially parallel light again.
  • the condenser lens 151 is not particularly limited, and various known condenser lenses can be used.
  • the second illumination light that has been converted into substantially parallel light by the condenser lens 151 is applied to a part of the sample surface to illuminate a part of the sample surface.
  • the third illumination optical system 13D shown in FIG. 8 constructs a so-called Koehler illumination optical system, and uniformly illuminates a part of the sample S to form a bright field image or a phase contrast image. And so on.
  • FIG. 10 is a fifth modified example of the optical microscope device 10 according to the present embodiment.
  • the second illumination optical system 13B is reconfigured to appropriately guide the light flux of the first illumination light to the sample surface.
  • the imaging optical system 13C is also simplified as compared with the optical microscope apparatus 10 shown in FIG. I have.
  • the first and second illumination optical systems 13A and 13B By arranging the first and second illumination optical systems 13A and 13B on the transmission illumination side, it is possible to actually image the position of the illumination light that is irradiating in a place-specific manner, and to increase the certainty of the irradiation position. It is possible to confirm. Thereby, various information including the observation image of the specimen can be presented to the user through a binocular microscope optical system or the like not shown in FIG. As a result, for example, when searching for a specific field of view by looking through the eyepiece, the user does not have to remove the eye from the eyepiece and check the information of the specimen, the state of the microscope, and the like. Can be improved.
  • the first illumination optical system 13A shown in FIG. 2 is provided on the transmitted illumination side as it is.
  • the first illumination optical system 13A may be arranged such that the LCOS spatial light modulator 113 is at a position optically conjugate with the sample surface of the sample S. is important. Since the LCOS spatial light modulator 113 and the sample surface have an optically conjugate relationship, the sample surface is irradiated with the illumination light while the illumination pattern of the illumination light realized by the LCOS spatial light modulator 113 is maintained. It is possible to do.
  • the polarization state of the illumination light is controlled by the LCOS spatial light modulator 113, and the luminous flux of the illumination light transmitted through the polarization beam splitter 111 is guided to the second illumination optical system 13B.
  • FIG. 10 illustrates the configuration of the first illumination optical system 13A in the optical microscope apparatus 10 according to the present embodiment illustrated in FIG. 2, the configuration illustrated in FIG. It goes without saying that at least one of the polarization compensating element 131 and the speckle removing element 133 may be provided.
  • light other than illumination light in a wavelength band for changing the function of the photoresponsive biomaterial for example, in the case of a photoresponsive biomaterial having an absorption spectrum as shown in FIG. 4.
  • the light of the light source 101B and / or the light of the light source 101C can be used to obtain a bright field image or a phase difference image.
  • the second illumination optical system 13 ⁇ / b> B includes a relay lens 161, an aperture stop 163, and a condenser lens 165 as an example of a second illumination optical member.
  • the relay lens 161 is a lens for converting illumination light from the first illumination optical system 13A into substantially parallel light
  • the aperture stop 163 is a stop for adjusting the brightness of the illumination light reaching the sample surface. It is.
  • the illumination light collimated by the relay lens 161 is incident on the condenser lens 165 after the brightness is adjusted by the aperture stop 163.
  • the relay lens 161 and the aperture stop 163 are not particularly limited, and various known optical members can be appropriately used.
  • the condenser lens 165 is a lens for converging the luminous flux of the illumination light, which has become substantially parallel light by the relay lens 161, to the sample surface.
  • the condenser lens 165 is not particularly limited, and various known condenser lenses can be used.
  • the illumination light converged by the condenser lens 165 is applied to a part of the sample surface to illuminate a part of the sample surface.
  • the first and second illumination optical systems 13A and 13B shown in FIG. 10 constitute a so-called critical illumination optical system, and uniformly illuminate a part of the sample S.
  • the imaging optical system 13C includes the objective lens 121, the imaging lens 125, and the imaging element 127. Since these components have substantially the same functions as those shown in FIG. 2 and have substantially the same effects, detailed description will be omitted.
  • FIG. 11 is a block diagram schematically illustrating an example of the configuration of the arithmetic processing device according to the present embodiment
  • FIG. 12 is an explanatory diagram for describing the arithmetic processing device according to the present embodiment
  • FIG. 13 is a block diagram illustrating an example of a hardware configuration of the arithmetic processing device according to the present embodiment.
  • the arithmetic processing device 20 may be directly connected to the optical microscope device 10 as described above via a predetermined connection terminal, or may be a wired or wireless network such as an intranet or the Internet. May be connected to the optical microscope apparatus 10 via the.
  • the arithmetic processing device 20 transmits a predetermined control signal to the optical microscope device 10 and controls the operation state of the optical microscope device 10 as a whole.
  • the arithmetic processing device 20 performs image processing on the data of the captured image of the sample output from the optical microscope device 10 and provides the obtained image processing result to the user of the optical microscope system 1. Further, the arithmetic processing device 20 can also control the operation state of the optical microscope device 10 using the obtained image processing result.
  • the arithmetic processing device 20 having such a function includes a microscope control unit 201, an image data acquisition unit 203, an image processing unit 205, a display control unit 207, and a storage unit 209, as schematically shown in FIG. , Mainly comprising.
  • the microscope control unit 201 is realized by, for example, a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), an input device, an output device, a communication device, and the like.
  • the microscope control unit 201 is a control unit that comprehensively controls the operation state of the optical microscope device 10.
  • the microscope control unit 201 outputs a predetermined control signal to the optical microscope device 10 based on a user operation performed by a user, an image processing result in an image processing unit 205 described later, and the like, thereby operating the optical microscope device 10. Control.
  • the microscope control unit 201 controls the ON / OFF state of the light source 101 and the illumination light from the light source 101 based on a user operation performed by the user, an image processing result in the image processing unit 205 described later, and the like. It is possible to control irradiation timing, irradiation light amount, irradiation time, and the like. Further, when a plurality of light sources 101 are present in the optical microscope apparatus 10, the on / off state of each light source 101 as described above is controlled, the switching of the irradiation timing of each light source 101 is controlled, It is possible to control the irradiation time of the illumination light from the light source 101.
  • a biomaterial that changes its function in response to light or a biomaterial that is labeled with a predetermined luminescent dye, further includes a luminescent protein that emits light when irradiated with illumination light of a predetermined wavelength.
  • irradiation time and irradiation intensity of illumination light for generating a photoresponse of the biomaterial irradiation time and irradiation intensity of illumination light for emitting a luminescent protein or luminescent dye, Can be switched with good timing.
  • an illumination light having a specific wavelength is irradiated for a short time with a reduced irradiation intensity, or a specific light is emitted to emit a luminescent protein or luminescent dye.
  • Irradiation light having a wavelength can be irradiated for a long time by increasing the irradiation intensity, and more accurate observation of a biomaterial can be performed.
  • the microscope control unit 201 controls the ON / OFF state of each pixel in the LCOS spatial light modulation element 113 based on a user operation performed by a user, an image processing result in an image processing unit 205 described below, and the like. It is possible to realize a specific illumination, and also to control the ON / OFF state of each pixel according to a time change, thereby changing a position irradiated with the illumination light, a place-specific and time-specific. It is also possible to realize a proper lighting. Thereby, the microscope control unit 201 can make the irradiation state of the illumination light on the specimen follow the biological material.
  • the microscope control unit 201 sets the imaging position (in other words, ROI (Region Of Interest)) on the imaging element 127 based on a user operation performed by the user, an image processing result in the image processing unit 205 described later, and the like. ), Imaging timing, exposure time and the like can be controlled. Further, the microscope control unit 201 may have a function of controlling the operation state of the stage 11 and the objective lens 121 of the optical microscope device 10.
  • the image data acquisition unit 203 is realized by, for example, a CPU, a ROM, a RAM, a communication device, and the like.
  • the image data acquisition unit 203 acquires image data on the specimen surface of the specimen S generated by the optical microscope device 10 from the optical microscope device 10 and outputs the acquired image data to the image processing unit 205 described below. Further, the image data acquisition unit 203 may associate the acquired image data with time data relating to the date and time when the image data was acquired, and store the acquired image data in the storage unit 209 or the like as history information.
  • the image processing unit 205 is realized by, for example, a CPU, a ROM, a RAM, and the like.
  • the image processing unit 205 performs various types of image processing on the image data of the sample surface transmitted from the image data obtaining unit 203, and obtains various types of information about the sample by analyzing the image data. can do.
  • the image processing unit 205 can perform an integration process using a plurality of acquired image data to generate brighter image data or an image with a wide dynamic range (High Dynamic Range).
  • the image processing unit 205 analyzes the acquired image data using a known image recognition process or the like to specify the position where the irradiation light is irradiated or to specify the position of the cell in the biological material. Or a specific site in a cell such as a nucleus can be specified. In addition, by using such an image analysis process, it is possible to specify or evaluate a temporal change of a specific part in a specimen.
  • the image processing unit 205 can also estimate the irradiation position of the illumination light on the image sensor 127 (and, consequently, the generated captured image) from the ON / OFF control state of each pixel in the LCOS spatial light modulator 113. It is.
  • the image processing unit 205 can output the image processing result and the image analysis result as described above to the microscope control unit 201.
  • the microscope control unit 201 can control the operation state of the optical microscope device 10 based on the image processing result and the image analysis result. This allows the operation of the optical microscope apparatus 10 to follow the time change of the target portion in the sample, and enables observation over time.
  • the image processing unit 205 can output the image processing result and the image analysis result as described above to a computer including various servers and the like provided outside the arithmetic processing device 20, It is also possible to print on such a medium, and to store data on various recording media. Further, the image processing unit 205 transmits an image processing result or an image analysis result as described above to an image display device such as a display provided in the arithmetic processing device 20 via a display control unit 207 described later, or an arithmetic processing device. The image can be displayed on an image display device such as a display provided outside the device 20.
  • the display control unit 207 is realized by, for example, a CPU, a ROM, a RAM, an output device, a communication device, and the like.
  • the display control unit 207 provides an image of the specimen image-processed by the image processing unit 205 and various kinds of information related to the image to an output device such as a display included in the arithmetic processing device 20 or to the outside of the arithmetic processing device 20. Display control for displaying on the output device or the like. Thereby, the user of the optical microscope system 1 can grasp various information regarding the biomaterial being observed on the spot.
  • the storage unit 209 is realized by, for example, a RAM or a storage device included in the arithmetic processing device 20 according to the present embodiment.
  • the storage unit 209 stores various databases and software programs used when the microscope control unit 201 and the image processing unit 205 perform various processes.
  • the storage unit 209 stores various setting information in the control processing of the optical microscope apparatus 10 performed by the microscope control unit 201 and various image processing performed by the image processing unit 205, and the arithmetic processing unit according to the present embodiment. Various parameters that need to be saved when the 20 performs some processing, the progress of the processing, and the like are appropriately recorded.
  • the microscope control unit 201, the image data acquisition unit 203, the image processing unit 205, the display control unit 207, and the like can freely perform data read / write processing.
  • a biological material that changes its function in response to light or a biological material that is labeled with a predetermined luminescent dye, and the like, further includes a luminescent protein that emits light when irradiated with illumination light of a predetermined wavelength.
  • the microscope control unit 201 controls the first illumination optical system 13A so that the illumination pattern of the illumination light is controlled by the LCOS spatial light modulator 113 according to the light emission state of the sample as described above. Of the illumination optical system 13A can be controlled.
  • the microscope control unit 201 controls the light source 101 that irradiates the illumination light in the wavelength band that causes the luminescent protein or luminescent dye to emit light, controls the state of the LCOS spatial light modulator 113, and controls the entire illumination range. Is irradiated with the above-described illumination light to cause the luminescent protein or luminescent dye to emit light, and a captured image of the luminescent state is generated. By referring to the obtained captured image, it becomes possible to irradiate the illumination light corresponding to the photoresponsive biomaterial in a location-specific manner.
  • the user himself / herself confirms information indicating a candidate place where a biomaterial may exist, by performing a predetermined user operation by taking a captured image of the light emission state itself or performing image processing by the image processing unit 205.
  • the irradiation position of the illumination light for causing the photoresponsive biomaterial to react can be designated to the microscope control unit 201.
  • the image processing unit 205 analyzes the captured image obtained by capturing the light emission state by a known image analysis process, and the microscope control unit 201 automatically determines the irradiation position of the illumination light for causing the photoresponsive biomaterial to react. It is also possible to set with.
  • the microscope control unit 201 and the image processing unit 205 cooperate to irradiate illumination light for emitting a luminescent protein or a luminescent dye and to generate a site-specific reaction for causing a photoresponsive biomaterial to react. It is also possible to continuously irradiate the illumination light while following only the specific observation target while alternately repeating the illumination of the typical illumination light.
  • the microscope control unit 201 controls the LCOS spatial light modulation element 113 so that the location-specific illumination light follows the biological material.
  • Such tracking control is particularly effective when observing a moving sample such as a nematode or a cancer cell, or a cell growth process in which a target moves or increases.
  • the microscope control unit 201 controls the first irradiation pattern of the illumination light by the LCOS spatial light modulation element 113 in accordance with the obtained bright field image or phase difference image (that is, the sample image).
  • the arithmetic processing unit 20 presents the obtained bright-field image or phase difference image as shown in FIG. 9 to the user, and for example, as shown as ROI1, ROI2, etc. in FIG.
  • the microscope control unit 201 can control the optical microscope apparatus 10 using the selection result of the user. Further, the image processing unit 205 analyzes the bright field image or the phase difference image by a known image analysis process, and the microscope control unit 201 automatically determines the irradiation position of the illumination light for causing the photoresponsive biomaterial to react. It is also possible to automatically set the illumination light sequentially.
  • the microscope control unit 201 and the image processing unit 205 cooperate to irradiate illumination light for obtaining a bright-field image or a phase-contrast image with a site-specific reaction for causing a photoresponsive biomaterial to react. It is also possible to continuously irradiate the illumination light while following only the specific observation target while alternately repeating the illumination light irradiation.
  • the microscope control unit 201 controls the LCOS spatial light modulation element 113 so that the location-specific illumination light follows the biological material.
  • Such tracking control is particularly effective when observing a moving sample such as a nematode or a cancer cell, or a cell growth process in which a target moves or increases.
  • the image processing unit 205 can also superimpose various types of information using characters, figures, and the like on the captured image of the sample in cooperation with the display control unit 207.
  • the region in the specimen to which the light stimulus was applied is emphasized and displayed, information on the specimen and the state of the optical microscope apparatus are superimposed, and specific cells It is possible to highlight and display a site corresponding to a tissue or a tissue.
  • auxiliary information from the arithmetic processing unit 20.
  • a portion considered to be a cancer cell specifically cell
  • the arithmetic processing device 20 can also support pathological diagnosis by highlighting and displaying the region corresponding to the tissue.
  • Example-3 it is also important to observe what kind of change has occurred as a result of irradiating the photoresponsive biomaterial with the illumination light in a location-specific manner. For example, observe interactions such as which muscles move when a specific nerve cell is irradiated with light, and how the pulsation rhythm changes when a specific cardiomyocyte is irradiated with light at regular intervals. There are cases such as observing or observing how the flow of ions changes when a specific cell is irradiated with light. Observation as described above is made possible by the microscope control unit 201 and the image processing unit 205 cooperating with each other to obtain a bright-field image or a phase-contrast image and perform image analysis on the obtained images. .
  • luminescence imaging using a light source wavelength that does not react with the luminescent protein is also effective for the above observation.
  • the microscope control unit 201 and the image processing unit 205 acquire the phase difference image after performing the site-specific light irradiation or while performing the light irradiation, and analyze the movement of the muscle cell, thereby performing the cell interaction. Or a change in pulsation can be quantitatively specified.
  • each of the above components may be configured using a general-purpose member or circuit, or may be configured by hardware specialized for the function of each component. Further, the functions of each component may be entirely performed by a CPU or the like. Therefore, the configuration to be used can be appropriately changed according to the technical level at the time of implementing the present embodiment.
  • a computer program for realizing each function of the arithmetic processing device according to the present embodiment as described above can be created and mounted on a personal computer or the like.
  • a computer-readable recording medium in which such a computer program is stored can be provided.
  • the recording medium is, for example, a magnetic disk, an optical disk, a magneto-optical disk, a flash memory, or the like.
  • the above-described computer program may be distributed, for example, via a network without using a recording medium.
  • FIG. 13 is a block diagram for describing a hardware configuration of the arithmetic processing device 20 according to the embodiment of the present disclosure.
  • the arithmetic processing device 20 mainly includes a CPU 901, a ROM 903, and a RAM 905.
  • the arithmetic processing unit 20 further includes a host bus 907, a bridge 909, an external bus 911, an interface 913, an input device 915, an output device 917, a storage device 919, a drive 921, and a connection port 923. And a communication device 925.
  • the CPU 901 functions as an arithmetic processing device and a control device, and controls the entire operation in the arithmetic processing device 20 or a part thereof in accordance with various programs recorded in the ROM 903, the RAM 905, the storage device 919, or the removable recording medium 927.
  • the ROM 903 stores programs used by the CPU 901 and operation parameters.
  • the RAM 905 temporarily stores a program used by the CPU 901, parameters that appropriately change in execution of the program, and the like. These are interconnected by a host bus 907 constituted by an internal bus such as a CPU bus.
  • the host bus 907 is connected via a bridge 909 to an external bus 911 such as a PCI (Peripheral Component Interconnect / Interface) bus.
  • PCI Peripheral Component Interconnect / Interface
  • the input device 915 is an operation unit operated by the user, such as a mouse, a keyboard, a touch panel, a button, a switch, and a lever. Further, the input device 915 may be, for example, a remote control unit (so-called remote controller) using infrared rays or other radio waves, or an externally connected device such as a mobile phone or a PDA corresponding to the operation of the arithmetic processing device 20. 929. Further, the input device 915 includes, for example, an input control circuit that generates an input signal based on information input by the user using the above-described operation means and outputs the input signal to the CPU 901. By operating the input device 915, the user can input various data to the arithmetic processing device 20 and instruct a processing operation.
  • a remote control unit so-called remote controller
  • the input device 915 includes, for example, an input control circuit that generates an input signal based on information input by the user using the above-described operation means and outputs the input signal to
  • the output device 917 is a device that can visually or audibly notify the user of the acquired information.
  • Such devices include CRT display devices, liquid crystal display devices, plasma display devices, display devices such as EL display devices and lamps, audio output devices such as speakers and headphones, printer devices, mobile phones, and facsimile machines.
  • the output device 917 outputs, for example, results obtained by various processes performed by the arithmetic processing device 20.
  • the display device displays results obtained by various processes performed by the arithmetic processing device 20 as text or images.
  • the audio output device converts an audio signal including reproduced audio data and acoustic data into an analog signal and outputs the analog signal.
  • the storage device 919 is a data storage device configured as an example of a storage unit of the arithmetic processing device 20.
  • the storage device 919 includes, for example, a magnetic storage device such as a hard disk drive (HDD), a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the storage device 919 stores programs executed by the CPU 901 and various data, various data acquired from the outside, and the like.
  • the drive 921 is a reader / writer for a recording medium, and is built in or external to the arithmetic processing unit 20.
  • the drive 921 reads information recorded on a mounted removable recording medium 927 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and outputs the information to the RAM 905.
  • the drive 921 can also write data on a removable recording medium 927 such as a mounted magnetic disk, optical disk, magneto-optical disk, or semiconductor memory.
  • the removable recording medium 927 is, for example, a DVD medium, an HD-DVD medium, a Blu-ray (registered trademark) medium, or the like.
  • the removable recording medium 927 may be a Compact Flash (registered trademark) (CompactFlash: CF), a flash memory, an SD memory card (Secure Digital memory card), or the like. Further, the removable recording medium 927 may be, for example, an IC card (Integrated Circuit card) on which a non-contact type IC chip is mounted, an electronic device, or the like.
  • CompactFlash registered trademark
  • SD memory card Secure Digital memory card
  • the connection port 923 is a port for directly connecting a device to the arithmetic processing device 20.
  • Examples of the connection port 923 include a USB (Universal Serial Bus) port, an IEEE1394 port, and a SCSI (Small Computer System Interface) port.
  • Other examples of the connection port 923 include an RS-232C port, an optical audio terminal, and an HDMI (registered trademark) (High-Definition Multimedia Interface) port.
  • the communication device 925 is, for example, a communication interface including a communication device for connecting to the communication network 931.
  • the communication device 925 is, for example, a communication card for a wired or wireless LAN (Local Area Network), Bluetooth (registered trademark), or WUSB (Wireless USB).
  • the communication device 925 may be a router for optical communication, a router for ADSL (Asymmetric Digital Subscriber Line), a modem for various kinds of communication, or the like.
  • the communication device 925 can transmit and receive signals and the like to and from the Internet and other communication devices in accordance with a predetermined protocol such as TCP / IP.
  • the communication network 931 connected to the communication device 925 is configured by a network or the like connected by wire or wirelessly, and may be, for example, the Internet, a home LAN, infrared communication, radio wave communication, satellite communication, or the like. .
  • each of the above components may be configured using a general-purpose member, or may be configured by hardware specialized for the function of each component. Therefore, it is possible to appropriately change the hardware configuration to be used according to the technical level at the time of implementing the present embodiment.
  • optical microscope system 1 including the optical microscope device 10 and the arithmetic processing device 20 according to the present embodiment has been described in detail with reference to FIGS.
  • the optical microscope system 1 including the optical microscope device 10 and the arithmetic processing device 20 as described above can be applied to various projectors including a surgical projector.
  • the method for observing a specimen includes the steps of: (a) emitting the illumination light from a light source that emits illumination light having a predetermined polarization direction that illuminates a specimen containing a photoresponsive biological material; The illumination light is evenly applied to the LCOS spatial light modulator through the illumination optical member, and (b) the illumination light whose polarization state is controlled by the LCOS spatial light modulator is controlled by the polarization optical element.
  • a light source that emits illumination light for illuminating a specimen containing a biological material that changes its function in response to light, a liquid crystal on silicon (LCOS) spatial light modulator that controls a polarization state of the illumination light, A first illumination optical member for uniformly illuminating the LCOS spatial light modulation element, and controlling a transmission state of the illumination light from the LCOS spatial light modulation element side to the sample side according to a polarization state of the illumination light.
  • LCOS liquid crystal on silicon
  • the first illumination optical system has a plurality of the light sources
  • the optical microscope device according to (6) wherein the illuminating light emitted from at least one of the plurality of light sources causes the luminescent protein to emit light or the luminescent dye to be excited to emit light.
  • the optical microscope apparatus according to (6) or (7) wherein in the first illumination optical system, an irradiation pattern of the illumination light is controlled by the LCOS spatial light modulator according to a light emission state of the sample.
  • the optical microscope apparatus according to any one of (1) to (5).
  • an illumination pattern of the illumination light is controlled by the LCOS spatial light modulation element according to a sample image by the first illumination optical system and the second illumination optical system.
  • the optical microscope apparatus according to (1).
  • a light source that emits illumination light for illuminating the sample, a liquid crystal on silicon (LCOS) spatial light modulator that controls a polarization state of the illumination light, and a first illumination that uniformly illuminates the LCOS spatial light modulator.
  • a first illumination optical system comprising: an optical member for use; and a polarization optical element that controls a transmission state of the illumination light from the LCOS spatial light modulation element side to the sample side according to a polarization state of the illumination light.
  • a second illumination optical system having a second illumination optical member for forming an image of a light beam from the first illumination optical system on a sample surface
  • An imaging optical system having an imaging optical member and an imaging element, for imaging the sample surface
  • An optical microscope device comprising: (17) A light source that emits illumination light for illuminating a specimen containing a biological material that changes its function in response to light, a liquid crystal on silicon (LCOS) spatial light modulator that controls a polarization state of the illumination light, A first illumination optical member for uniformly illuminating the LCOS spatial light modulation element, and controlling a transmission state of the illumination light from the LCOS spatial light modulation element side to the sample side according to a polarization state of the illumination light.
  • LCOS liquid crystal on silicon
  • a first illumination optical system having a polarizing optical element
  • a second illumination optical system having a second illumination optical member for forming an image of a light beam from the first illumination optical system on a sample surface
  • An imaging optical system having an imaging optical member and an imaging element, for imaging the sample surface
  • An optical microscope device comprising: A control unit for controlling an operation state of the optical microscope device, An image processing unit that performs image processing on a captured image of the sample generated by the imaging element;
  • An optical microscope system comprising: (18) The optical microscope system according to (17), wherein the image processing unit specifies a change in the biological material due to light irradiation by performing image processing on the captured image.
  • the control unit controls an operation state of the optical microscope apparatus in accordance with a change in the biomaterial specified by the image processing unit, so that an irradiation state of the illumination light on the specimen follows the biomaterial.

Abstract

本開示に係る光学顕微鏡装置(10)は、光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源(101)と、前記照明光の偏光状態を制御するLCOS空間光変調素子(113)と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系(13A)と、前記第1の照明光学系(13A)からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系(13B)と、撮像光学部材と撮像素子(127)とを有し、前記標本面を撮像するための撮像光学系(13C)と、を備える。

Description

光学顕微鏡装置及び光学顕微鏡システム
 本開示は、光学顕微鏡装置及び光学顕微鏡システムに関する。
 従来、細胞の位置や形状が経時的に変化する様子を観察するために、各種の観察装置が提案されている。例えば以下の特許文献1には、細胞の位置や形状に合わせて光刺激の位置を変化させるとともに、光刺激直後の細胞を観察することが可能な観察装置が開示されており、光刺激のための照明光の照射領域を変化させる機構として、ガルバノミラー及びDMD(Digital Mirror Device)が開示されている。
特開2011-257599号公報
 しかしながら、上記特許文献1のようにガルバノミラーを用いて照明光を走査する場合、観察対象物の複数個所に同時に照明光を照射することは困難である。また、DMDは、その機構上、オフ時の光が散乱して迷光になりやすく、照明光を照射したい位置にのみ照明光を照射しつつ、照射したくない位置には照明光を照射しない、という精度において改良の余地がある。
 このように、光に反応して機能を変化させる生体材料を含む標本に対してであっても、より均一かつより精度の高い照明方法を実現することが希求されている。
 そこで、本開示では、光に反応して機能を変化させる生体材料を含む標本に対してであっても、より均一かつより精度の高い照明を実現することが可能な、光学顕微鏡装置及び光学顕微鏡システムを提案する。
 本開示によれば、光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、を備える、光学顕微鏡装置が提供される。
 また、本開示によれば、標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、を備える、光学顕微鏡装置が提供される。
 また、本開示によれば、光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、を備える、光学顕微鏡装置と、前記光学顕微鏡装置の動作状態を制御する制御部と、前記撮像素子により生成された前記標本の撮像画像を画像処理する画像処理部と、を有する、光学顕微鏡システムが提供される。
 本開示によれば、第1の照明光学系は、標本に対して出射された照明光の偏光状態をLCOS空間光変調素子により制御し、偏光状態の制御された照明光を第2の照明光学系へと導光する。第2の照明光学系は、第1の照明光学系からの光束を標本面に結像させ、撮像光学系は、照明光の照射されている標本面を撮像する。
 以上説明したように本開示によれば、光に反応して機能を変化させる生体材料を含む標本に対してであっても、より均一かつより精度の高い照明を実現することが可能となる。
 なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、又は、上記の効果に代えて、本明細書に示されたいずれかの効果、又は、本明細書から把握され得る他の効果が奏されてもよい。
本開示の実施形態に係る光学顕微鏡システムの全体構成を示した説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の一例を模式的に示した説明図である。 同実施形態に係る光学顕微鏡装置におけるLCOS空間光変調素子について説明するための説明図である。 同実施形態に係る光学顕微鏡装置について説明するための説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。 同実施形態に係る光学顕微鏡装置について説明するための説明図である。 同実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。 同実施形態に係る演算処理装置の構成の一例を模式的に示したブロック図である。 同実施形態に係る演算処理装置について説明するための説明図である。 同実施形態に係る演算処理装置のハードウェア構成の一例を示したブロック図である。
 以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 なお、説明は以下の順序で行うものとする。
 1.光学顕微鏡システムの全体構成について
 2.光学顕微鏡装置について
  2.1.第1の照明光学系について
  2.2.第2の照明光学系について
  2.3.撮像光学系について
  2.4.変形例について
 3.演算処理装置について
  3.1.演算処理装置の構成について
  3.2.顕微鏡制御部201、画像処理部205が実施する処理の具体例について
  3.3.演算処理装置のハードウェア構成について
 4.標本の観察方法について
(光学顕微鏡システムの全体構成について)
 まず、図1を参照しながら、本開示の実施形態に係る光学顕微鏡システムの全体構成について、簡単に説明する。図1は、本実施形態に係る光学顕微鏡システムの全体構成の一例を示した説明図である。
 本実施形態に係る光学顕微鏡システムは、光に反応して機能を変化させる生体材料を観察するために用いられる。この光学顕微鏡システム1は、図1に示したように、光学顕微鏡装置10と、演算処理装置20と、を有している。
 光学顕微鏡装置10は、演算処理装置20による制御のもとで動作する。光学顕微鏡装置10は、光に反応して機能を変化させる生体材料を含む標本を撮像して、生成した撮像画像のデータを、演算処理装置20に出力する。かかる光学顕微鏡装置10の詳細な構成については、以下で改めて説明する。
 演算処理装置20は、光学顕微鏡装置10に対して所定の制御信号を送信して、光学顕微鏡装置10の少なくとも一部の構成の動作状態を統括的に制御する。また、演算処理装置20は、光学顕微鏡装置10から出力された標本の撮像画像のデータに対して画像処理を実施し、得られた画像処理結果を、光学顕微鏡システム1のユーザに提供する。更に、演算処理装置20は、得られた画像処理結果を用いて、光学顕微鏡装置10の動作状態を制御することも可能である。かかる演算処理装置20の詳細な構成については、以下で改めて説明する。なお、演算処理装置20は、光学顕微鏡装置10の一部の構成の動作状態のみを制御することも可能である。例えば、演算処理装置20は、光学顕微鏡装置10の各種光学系の少なくとも一部の構成(例えば、以下で詳述する第1の照明光学系又は撮像光学系の少なくとも何れか)のみを制御して、光学顕微鏡装置10のその他の構成(例えば、ステージや対物レンズなど)は制御しないという態様を実現することも可能である。
 以上、図1を参照しながら、本実施形態に係る光学顕微鏡システムの全体構成について、簡単に説明した。
(光学顕微鏡装置の構成について)
 次に、図2~図10を参照しながら、本実施形態に係る光学顕微鏡装置の構成について、詳細に説明する。
 図2は、本実施形態に係る光学顕微鏡装置の全体構成の一例を模式的に示した説明図である。図3は、本実施形態に係る光学顕微鏡装置におけるLCOS空間光変調素子について説明するための説明図であり、図4、図9は、本実施形態に係る光学顕微鏡装置について説明するための説明図である。図5~図8、図10は、本実施形態に係る光学顕微鏡装置の全体構成の他の一例を模式的に示した説明図である。
 本実施形態に係る光学顕微鏡装置10には、観察対象物を含む標本が配設されるステージ11が設けられている。本実施形態に係る光学顕微鏡装置10は、光に反応して機能を変化させる生体材料であっても光を照射しながら観察を行うことが可能であり、光に反応して機能を変化させる生体材料を含む標本Sが、ステージ11上に設けられる。
 ここで、光に反応して機能を変化させる生体材料(以下、単に「光応答性の生体材料」ともいう。)は、特に限定されるものではなく、光に反応して機能を変化させるものであれば、公知の様々な生体材料を観察対象物とすることができる。このような光応答性の生体材料として、例えば、チャネルロドプシン2(Channelrhodopsin-2、ChR2)等に代表される各種の光活性化タンパク質、及び、植物由来の光受容ドメイン(AsLOV2、CRY2/CIB1)等に代表される各種の光受容ドメインなどのような、各種のタンパク質、脂質、遺伝子等を挙げることができる。
 上記のような光応答性の生体材料を含む標本Sを観察するために、本実施形態に係る光学顕微鏡装置10は、図2に模式的に示したように、第1の照明光学系13Aと、第2の照明光学系13Bと、撮像光学系13Cと、を少なくとも有している。以下、これら3種類の光学系について、詳細に説明する。なお、以下で詳述する本実施形態に係る光学顕微鏡装置10を用いることで、上記のような光応答性の生体材料を含まない標本Sであっても、良好に観察を行うことが可能である。
<第1の照明光学系13A>
 第1の照明光学系13Aは、標本Sに対して照射される照明光の偏光状態を制御することにより、標本Sへの照明光の照射パターンを制御する光学系である。この第1の照明光学系13Aは、図2に模式的に示したように、光源101(101A、101B、101C)と、第1の照明用光学部材の一例としてのインテグレータ107及びコンデンサレンズ109と、偏光光学素子の一例としての偏光ビームスプリッタ111と、LCOS(Liquid Crystal On Silicon)空間光変調素子113と、を有している。また、第1の照明光学系13Aは、上記のような各種の光学素子に加えて、カップリングレンズ(指向角変換素子)103(103A、103B、103C)と、光路合成素子の一例としてのダイクロイックプリズム105(105A、105B)を有していることが好ましい。
 光源101は、標本S中に含まれる光応答性の生体材料に対して、光刺激を与えるための照明光を出射するものである。本実施形態に係る光学顕微鏡装置10において、かかる照明光は、所定の偏光方向を有していることが好ましい。
 また、所定波長の照明光が照射されると発光する発光性のタンパク質を更に含む、光に反応して機能を変化させる生体材料、又は、所定の発光色素で標識された生体材料等を観察対象とする場合、光源101として、上記のような発光を生じさせるための照明光を照射可能な光源を、更に有していてもよい。このような観点から、図2では、第1の照明光学系13Aが3種類の光源101A、101B、101Cを有している場合について図示しているが、本開示において、光源101は、少なくとも1つ以上存在すればよい。
 光源101は、標本S中に含まれる光応答性の生体材料に対して、光刺激を与えたり、上記のような各種の発光を生じさせたりする波長の光を出射することが可能なものであれば、任意の公知の光源を用いることができる。このような光源として、例えば、各種のレーザ光源を挙げることができるが、レーザダイオード(Laser Diode:LD)を用いることが簡便である。レーザダイオードを用いることで、高出力の直線偏光を容易に利用可能だからである。また、所定の偏光状態を有していない、無偏光の照明光を出射する光源を用いる場合には、第1の照明光学系13Aは、光源101からLCOS空間光変調素子113までの間の光路上に、無偏光の照明光に対して所定の偏光方向を付与する偏光子を設ければよく、光源101そのものに対して偏光子を設けてもよい。以下では、光源101から、所定の偏向状態を有する照明光が出射される場合を例に挙げて説明を行うものとする。
 図2に示した例において、光源101Aから出射した所定の偏光を有する照明光は、カップリングレンズ103Aに入射する。同様に、光源101B、101Cから出射した所定の偏光を有する照明光のそれぞれは、各光源に対応するカップリングレンズ103B、103Cにそれぞれ入射する。
 カップリングレンズ103は、図2に示したように、各光源101から出射した照明光を略平行光とするものであり、各光源101から出射した照明光の指向角を、平行光の指向角と等しくなるように、又は、平行光の指向角に近づくように変換する。それぞれのカップリングレンズ103は、各光源101から出射した照明光のうち指向角内の光が入射する位置に配置されている。ここで、図2では、カップリングレンズ103が単一のレンズによって構成される場合を図示しているが、カップリングレンズ103は、複数のレンズによって構成されていてもよい。
 ここで、図2に示したように、光学顕微鏡装置10が複数の光源101を有している場合、各光源101から出射したそれぞれの照明光は、光路合成素子の一例としてのダイクロイックプリズム105により、1つの光束となるように合波される。図2に示した構成例では、光源101Aから出射し、カップリングレンズ103Aを透過した照明光、及び、光源101Bから出射し、カップリングレンズ103Bを透過した照明光のそれぞれは、ダイクロイックプリズム105Aに入射する。ダイクロイックプリズム105Aの内部には、波長選択性を有するミラーが設けられている。かかるミラーは、光源101A側から入射した光はミラーを透過し、かつ、光源101A側から入射した光はミラーで反射するような波長選択性を有している。これにより、光源101Aから出射した照明光と光源101Bから出射した照明光とが合波されて、1つの光束となる。合波された照明光と、光源101Cから出射し、カップリングレンズ103Cを透過した照明光のそれぞれは、ダイクロイックプリズム105Bに入射する。ダイクロイックプリズム105Bの内部においても、波長選択性を有するミラーが設けられている。かかるミラーは、光源101A側から入射した光はミラーを透過し、かつ、光源101C側から入射した光はミラーで反射するような波長選択性を有している。これにより、光源101Cから出射した照明光はダイクロイックプリズム105Aから入射した照明光と合波されて、1つの光束となる。
 1つの光束となった照明光は、第1の照明用光学部材の一例としてのインテグレータ107及びコンデンサレンズ109に、順に入射する。インテグレータ107は、後段に位置するLCOS空間光変調素子113を均一な強度分布で照明する。かかるインテグレータ107は、例えば、所定の配列状態(例えば、マトリクス状など)に配置された複数のレンズを有している。一般に、光源101から出射された光束は、その進行方向に垂直な面において不均一な強度分布(輝度分布)を有している。そのため、これら光束をそのままLCOS空間光変調素子113に導光すると、LCOS空間光変調素子113での強度分布が不均一になってしまう。これに対して、光源101から出射された光束をインテグレータ107によって複数の光束に分割して、分割されたそれぞれの光束をLCOS空間光変調素子113に重畳的に導くようにすれば、LCOS空間光変調素子113上の強度分布を均一にする(換言すれば、照度分布の不均一性を低減する)ことが可能となる。その結果、標本S中の複数の位置に存在する光応答性の生体材料を照明する際に、着目する複数の光応答性の生体材料を同一光量で照明することが可能となる。
 また、コンデンサレンズ109は、インテグレータ107によって複数の光束に分割された光束のそれぞれを、重畳的にLCOS空間光変調素子113へと導光する。かかるコンデンサレンズ109については、特に限定されるものではなく、任意の構成のものを用いることができる。
 なお、図2では、インテグレータ107が1つのフライアイレンズで構成される場合を図示しているが、インテグレータ107は、一対のフライアイレンズで構成されていてもよい。また、図2では、コンデンサレンズ109が単一のレンズによって構成される場合を図示しているが、コンデンサレンズ109は、複数のレンズによって構成されていてもよい。
 偏光光学素子の一例としての偏光ビームスプリッタ111は、照明光の偏光状態に応じて、LCOS空間光変調素子113側から標本S側へと向かう照明光の透過状態を制御する。具体的には、偏光ビームスプリッタ111は、光源101側から入射した光束(すなわち、照明光と同じ偏光方向を有している光束)は、LCOS空間光変調素子113側へと反射させる。また、LCOS空間光変調素子113側から入射した光束について、照明光と同じ偏光方向を有している光束については光源101側へと反射させ、照明光と異なる(例えば、照明光と直交する偏光状態となっている)光束については標本S側へと透過させる。以下で詳述するように、偏光ビームスプリッタ111とLCOS空間光変調素子113とを組み合わせて用いることで、不要な照明光が標本S側に照射されないようにすることができる。
 LCOS空間光変調素子113は、ステージ11上の標本面において所望の照明光の照射状態(すなわち、照射パターン)が実現されるように、コンデンサレンズ109を透過した光束を、2次元的に変調する。本実施形態において、LCOS空間光変調素子113は、標本Sの標本面と光学的に共役な位置となるように、第1の照明光学系13Aの光路上に配置される。
 LCOS空間光変調素子113は、シリコン基板上に液晶が配置された構造を有する空間光変調素子であり、シリコン基板上には、公知の半導体技術によって電気アドレス回路が構築されており、最上層にはアルミ等の公知の電極金属が設けられることで、画素が構築されている。このようなLCOS空間光変調素子113では、液晶の配向を画素毎に制御することで、入射した光の位相を画素単位で独立して制御することが可能となる。上記のような構造を有するLCOS空間光変調素子113は、開口率が高いために、ステージ11上に載置された標本Sを隙間なく照明することができる。
 このようなLCOS空間光変調素子113は、例えば、TN(TwistedNematic)型の液晶(正の屈折率異方性を有する液晶分子)を用いた液晶パネルによって構成されている。具体的には、マトリクス状に配置された複数の画素ごとに、照明光の照射パターンに基づく駆動電圧が印加される一対の基板間に、TNモードの液晶を用いた液晶層が挟まれた構造となっている。
 かかるLCOS空間光変調素子113では、上記のようなTN型の液晶を用いた場合、駆動電圧の無印加時及び印加時で、それぞれ以下のようにして光変調が行われる。
 LCOS空間光変調素子113の画素に駆動電圧が印加されないとき(照射パターンに基づく照射が行われる時)を考える。この場合、LCOS空間光変調素子113は、TN型の液晶がツイストして配向することで、画素に入射した光に対して入射面内における位相差を付与し、偏光軸を約90度回転させたうえで出射する特性を有している。つまり、駆動電圧の無印加時には、入射時における偏光の状態と出射時における偏光の状態が直交するように(例えば、S偏光で入射した光がP偏光で出射するように)、画素に入射した光を反射しつつ、光変調を行うようになっている。
 次に、LCOS空間光変調素子113に駆動電圧が印加されたとき(照射パターンに基づく照射が行われない時)を考える。この場合、LCOS空間光変調素子113は、素子の厚み方向に液晶分子が揃って配向することで、画素に入射した光に対して入射面内における位相差を付与せず、偏光軸を保持したうえで画素に入射した光を出射する特性を有している。つまり、駆動電圧の印加時には、入射時における偏光の状態と出射時における偏光の状態が平行となるように(例えば、S偏光で入射した光がS偏光で出射するように)、画素に入射した光を反射しつつ、光変調を行うようになっている。
 このように、LCOS空間光変調素子113から出射した照射光の偏光は、駆動電圧の無印加時と印加時とで互いに異なるものとなる。このようなLCOS空間光変調素子113の偏光特性を、図3に模式的に示したようにLCOS空間光変調素子113の各画素で所望の状態に制御した上で、偏光ビームスプリッタ111における光学特性と組み合わせることで、標本Sの所望の位置に照明光が照射され、かつ、照射したくない位置には照明光が確実に到達しないようにできる。すなわち、かかるLCOS空間光変調素子113と偏光ビームスプリッタ111とを組み合わせることで、優れた精度を有する場所特異的な照明が実現される。
 なお、LCOS空間光変調素子113が備える液晶パネルは、上述したTN型の液晶パネルに限定されるものではなく、他の方式の液晶を用いた液晶パネルが設けられていてもよい。具体的には、LCOS空間光変調素子113には、例えば、VA(VerticalAlignment)型、STN(Super Twisted Nematic)型、IPS(In Plane Switching)型、OCB(Optically Compensated Bend)型、MVA(Multidomain Vertical Alignment)型、ASM(Axially Symmetric aligned Micro-cell)型などの方式の液晶を用いた液晶パネルが設けられていてもよい。また、LCOS空間光変調素子113には、ネマティック液晶以外のスメクティック液晶(例えば、強誘電性液晶など)を用いた液晶パネルが設けられていてもよい。
 ここで、LCOS空間光変調素子以外の空間光変調素子として、デジタル・マイクロミラー・デバイス(Digital Micromirror Device:DMD)を用いることが可能なようにも思われる。しかしながら、DMDは、その機構上、マイクロミラーが向いている方向を連続的に変化させることで光変調を行う素子であるため、オフ時の光が散乱して迷光になりやすい。一方で、本実施形態で着目する観察対象物は、光応答性の生体材料であるため、かかる生体材料へ照明光が照射されたか否かは、観察精度上、厳密に区別されるべきものである。この際、空間光変調素子としてDMDを用いると、ユーザの意図しない迷光が知らぬ間に光応答性の生体材料に照射されて、意図しない観察精度の低下が生じる可能性がある。そのため、本実施形態に係る光学顕微鏡装置10では、空間光変調素子として、上記のようなLCOS空間光変調素子を用いている。
 LCOS空間光変調素子113で偏光状態が制御され、かつ、偏光ビームスプリッタ111を透過した照明光の光束は、第1の照明光学系13Aから第2の照明光学系13Bへと導光される。
<第2の照明光学系13B>
 第2の照明光学系13Bは、第1の照明光学系13Aからの照明光の光束を、標本S(より詳細には、標本面)に結像させる光学系である。この第2の照明光学系13Bは、第2の照明用光学部材の一例としてのコンデンサレンズ115及び対物レンズ121を有している。また、第2の照明光学系13Bは、上記のような光学素子に加えて、バンドパスフィルタ117と、ダイクロイックミラー119と、を有していることが好ましい。
 第1の照明光学系13Aからの照明光の光束は、コンデンサレンズ115に入射する。コンデンサレンズ115は、LCOS空間光変調素子113からの照明光の均一な光束を、後述する対物レンズ121にカップリングさせる。ここで、本実施形態に係るコンデンサレンズ115は、特に限定されるものではなく、公知の各種のコンデンサレンズを用いることが可能である。また、図2では、単一のコンデンサレンズ115を用いた場合について図示しているが、コンデンサレンズ115は複数のレンズで構成されていてもよい。
 コンデンサレンズ115を透過した照明光の光束は、バンドパスフィルタ117を経てダイクロイックミラー119へと入射する。バンドパスフィルタ117は、特定の波長帯域の光を反射し、それ以外の波長帯域の光を透過させるものである。照明光の光束がバンドパスフィルタ117を透過することで、所望の波長帯域の照明光が標本面に照射され、かつ、意図しない波長帯域の光が標本面に照射されないようにすることができる。かかるバンドパスフィルタ117は、特に限定されるものではなく、本実施形態に係る光学顕微鏡装置10に設けられる光源101から出射される照明光の波長帯域に応じて、適切なものを適宜設置すればよい。
 ダイクロイックミラー119は、入射した光の半分は透過させ、半分は反射させるミラーである。照明光の光束がダイクロイックミラー119へと入射することで、照明光の光束は対物レンズ121へとカップリングされる。なお、かかるダイクロイックミラー119は特に限定されるものではなく、公知の各種のダイクロイックミラーを用いることが可能である。
 対物レンズ121は、コンデンサレンズ115によりカップリングされた照明光の光束を、標本Sの標本面に結像させる。ここで、本実施形態に係る対物レンズ121は、特に限定されるものではなく、公知の各種の対物レンズを用いることが可能である。また、図2では、単一の対物レンズ121が図示されているが、本実施形態に係る光学顕微鏡装置10は、複数の対物レンズ121を有していてもよい。
 以上説明したような第2の照明光学系13Bにより、照明光の光束は、標本Sの標本面に結像する。ここで、本実施形態に係る光学顕微鏡装置10において、先だって言及したように、LCOS空間光変調素子113と標本面とが光学的に共役の関係となっているため、LCOS空間光変調素子113で実現された照明光の照射パターン(図3等に示した照射パターン)が保持されたままで、標本面に照明光が照射されることとなる。
 これにより、標本S中に存在する、光に反応して機能を変化させる生体材料(光応答性の生体材料)は、照明光中に、機能を変化させるために適切な波長帯域の光が存在した場合、かかる波長帯域の光に反応して、機能を変化させる。このような光応答性の生体材料における機能の変化の様子が、以下で詳述する撮像光学系13Cにより撮像素子まで導光され、画像として記録される。
 また、標本S中の光応答性の生体材料が、所定波長の照明光が照射されると発光する発光性のタンパク質を含む場合、又は、所定の発光色素で標識されている場合に、照明光中に機能を変化させるために適切な波長帯域の光と、発光性のタンパク質や発光色素を反応させるために適切な波長帯域の光と、が存在する場合を考える。この場合には、照明光が照射した位置の発光性のタンパク質が発光して蛍光やリン光が放射されたり、標識に用いられた発光色素が励起されて蛍光やリン光が放射されたりするようになる他、光応答性の生体材料は、その機能を変化させる。これにより、観測者は、照明光を照射している光応答性の生体材料を、放射される蛍光やリン光により明確に特定することが可能となる。このような光応答性の生体材料における機能の変化の様子が、以下で詳述する撮像光学系13Cにより撮像素子まで導光され、画像として記録される。
 例えば図2に模式的に示したように、光学顕微鏡装置10に3種類の光源101A~101Cが存在し、着目する光応答性の生体材料が、例えば図4に模式的に示したように、光源101Aから出射される波長帯域の照明光に反応して、機能を変化させるものとする。光応答性の生体材料自体は、機能の変化に際して発光しないものが多いため、着目している光応答性の生体材料に確実に照明光が照射されているか否かを、ユーザは把握することはできない。また、例えば、光応答性を有する単一の細胞が複数存在するような標本において、各細胞に個別に照明光を照射したい場合等も生じうる。
 そこで、例えば図4に示したような、光源101B又は光源101Cから出射される波長帯域の照明光に反応して発光する発光色素(例えば、蛍光色素)を用いて、光応答性の生体材料を予め標識しておく。これにより、光源101B又は光源101Cからの照明光により発光色素が発光することで、観測者は、着目している光応答性の生体材料の位置を把握することができ、着目している光応答性の生体材料に確実に照明光を照射することが可能となる。
<撮像光学系13C>
 撮像光学系13Cは、撮像光学部材と撮像素子とを有する、ステージ11上に載置された標本Sの標本面を撮像するための光学系である。かかる撮像光学系13Cは、撮像光学部材の一例としての対物レンズ121及び結像レンズ125と、撮像素子127と、を有している。また、かかる撮像光学系13Cは、更に、ダイクロイックミラー119と、バンドパスフィルタ123とを有していることが好ましい。
 標本面からの光束は、第2の照明光学系13Bとしても機能する対物レンズ121により集光されて、第2の照明光学系13Bとしても機能するダイクロイックミラー119を透過する。その後、標本面からの光束は、バンドパスフィルタ123に入射する。
 バンドパスフィルタ123は、特定の波長帯域の光を反射し、それ以外の波長帯域の光を透過させるものである。標本面からの光束がバンドパスフィルタ123を透過することで、所望の波長帯域の光束のみが撮像素子127に結像するようにすることができる。かかるバンドパスフィルタ123は、特に限定されるものではなく、本実施形態に係る光学顕微鏡装置10に設けられる光源101から出射される照明光の波長帯域、及び、標本Sから生じうる発光の波長帯域に応じて、適切なものを適宜設置すればよい。
 バンドパスフィルタ123を透過した標本面からの光束は、結像レンズ125へと入射する。結像レンズ125は、対物レンズ121により集光された標本面からの光束を、撮像素子127に結像させるものである。本実施形態に係る光学顕微鏡装置10において、かかる結像レンズ125は、任意の構成のものを用いることが可能である。
 前述の通り、第2の照明光学系13Bと撮像光学系13Cとは、対物レンズ121を共有していることから、その倍率比は、コンデンサレンズ115の焦点距離と結像レンズ125の焦点距離との比等で決めることができる。そのためには、例えば、LCOS空間光変調素子113と撮像素子127の画素サイズ、又は、画素サイズ×画素数で決まるLCOS空間光変調素子113と撮像素子127のデバイスサイズを基準とする。
 例えば、LCOS空間光変調素子113と撮像素子127の画素サイズがそれぞれ、6μm、3μmであり、標本面上に投影される画素サイズを統一したい場合(=1:1)には、コンデンサレンズ115の焦点距離と結像レンズ125の焦点距離との比を、2:1とすればよい。また、標本面上に投影される画素サイズを4:1にしたい場合には、コンデンサレンズ115の焦点距離と結像レンズ125の焦点距離との比を1:2にすればよい。更に、LCOS空間光変調素子113と撮像素子127の画素サイズがそれぞれ、6μm、3μmであり、画素数がそれぞれ、2000×1000、4000×2000であり、かつ、標本面上に投影されるデバイスサイズを統一したい場合には、コンデンサレンズ115の焦点距離と結像レンズ125の焦点距離との比を、1:1にすればよい。
 撮像素子127は、標本面からの光束による像を撮像して、撮像画像を生成する。かかる撮像素子127としては、特に限定されるものではなく、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等といった、公知の撮像素子を適宜用いることが可能である。
 撮像素子127として、モノクロ撮像用の撮像素子を用いることも可能であるが、3チャンネル以上のチャンネル構成を有するカラー撮像用の撮像素子(例えば、Red、Green、Blueの3チャンネル構成の撮像素子や、Red、Green、Blue、Infraredの4チャンネル構成の撮像素子等)を用いることが好ましい。カラー撮像用の撮像素子を用いて、発光性のタンパク質や発光色素を含む光応答性の生体材料の像を撮像することで、例えば図4に模式的に示したように、光応答性の生体材料の像をある1つのチャンネル(例えば、B画素)で画像化し、発光色素からの発光の像をある1つのチャンネル(例えば、R画素)で画像化する等といったことが可能となる。すなわち、複数の波長帯域の像を、1つのカラー撮像用の撮像素子で画像化することが可能となる。
 以上、本実施形態に係る光学顕微鏡装置10の構成について、図2~図4を参照しながら詳細に説明した。
<変形例>
 続いて、図5~図10を参照しながら、本実施形態に係る光学顕微鏡装置10の変形例について説明する。以下では、図2に示した光学顕微鏡装置10との相違点を主に説明するものとし、図2に示した光学顕微鏡装置10と同様の構成を有するものについては、詳細な説明は省略する。
[偏光補償素子131]
 図5は、本実施形態に係る光学顕微鏡装置10の第1の変形例である。第1の変形例に係る光学顕微鏡装置10は、図2に示した本実施形態に係る光学顕微鏡装置10の構成に加えて、偏光ビームスプリッタ111とLCOS空間光変調素子113との間の光路上に、偏光補償素子131を有している。
 偏光補償素子131は、入射した光に対して位相差を付与して、入射した光の偏光状態を変化させる素子である。具体的には、偏光補償素子131は、まず、光軸に沿って互いに対向する第1面(偏光ビームスプリッタ111側の光通過面)及び第2面(LCOS空間光変調素子113側の光通過面)を有している。そして、かかる偏光補償素子131は、偏光ビームスプリッタ111(第1面)側からの光入射時と、LCOS空間光変調素子113(第2面)側からの光入射時とで、互いに逆極性(逆方向)、かつ、略同等の絶対値からなる位相差を付与するようになっている。つまり、偏光補償素子131は、光の入射方向に依存しない位相差特性(位相差の対称性)を有している。これにより、偏光補償素子131において偏光ビームスプリッタ111側からの光入射時に付与される位相差と、LCOS空間光変調素子113における光変調時に生ずる位相差と、偏光補償素子131においてLCOS空間光変調素子113側からの光入射時に付与される位相差と、の総和によって、照明光を照射していないときの標本面への漏れ光を低減させることが可能となる。その結果、より精度の高い照明光の照射が可能となるとともに、撮像素子127におけるバックグラウンドの持ち上がりが抑制されて、より優れた撮像画像を得ることができる。
 なお、本実施形態に係る光学顕微鏡装置10では、LCOS空間光変調素子113と標本面との間に偏光ビームスプリッタ111が設けられていることで、照明光を照射していないときの標本面への漏れ光は生じないようにも思われる。しかしながら、本実施形態に係る光学顕微鏡装置10では、所定の偏光方向を有している照明光を、コンデンサレンズ109により集光しているため、偏光ビームスプリッタ111に対して斜入射する偏光成分が生じうる。このような斜入射した偏光成分が原因となって、照明光を照射していないときの標本面への漏れ光が生じうる。
 上記のような偏光補償素子131を設けることで、より精度の高い場所特異的な照明を実現することが可能となる。
[スペックル除去素子133]
 図6は、本実施形態に係る光学顕微鏡装置10の第2の変形例である。第2の変形例に係る光学顕微鏡装置10は、図2に示した本実施形態に係る光学顕微鏡装置10の構成に加えて、インテグレータ107に対してスペックル除去素子133が設けられている。
 本実施形態に係る光学顕微鏡装置10では、光源101として可干渉性を有する光を出射することが可能な光源を用いることが好ましいことから、照明光の照射面においてスペックルが発生する可能性がある。そこで、スペックル除去素子133を設けてインテグレータ107を振動させることで、上記のようなスペックルの発生を抑制することが可能となる。
 上記のようなスペックル除去素子133は、第1の照明光学系13Aのアライメントを崩さない程度にインテグレータ107を振動させることが可能なものであれば、任意の公知の部材を用いることが可能であり、例えばピエゾ素子等の各種の圧電素子を用いることが可能である。
 上記のようなスペックル除去素子133を設けることで、特に微小領域を照明するような場合に、光量の均一性を更に向上させることが可能となる。
[偏光補償素子131とスペックル除去素子133の併用]
 図7は、本実施形態に係る光学顕微鏡装置10の第3の変形例である。第3の変形例に係る光学顕微鏡装置10は、図2に示した本実施形態に係る光学顕微鏡装置10の構成に加えて、偏光補償素子131とスペックル除去素子133の双方が設けられている。上記のような偏光補償素子131とスペックル除去素子133の双方を設けることで、光量の均一性が更に向上した、より精度の高い場所特異的な照明を実現することができる。
[第3の照明光学系13D]
 図8は、本実施形態に係る光学顕微鏡装置10の第4の変形例である。第4の変形例に係る光学顕微鏡装置10は、図2に示した本実施形態に係る光学顕微鏡装置10の構成に加えて、透過照明光学系として機能する第3の照明光学系13Dが設けられている。図2に示した光学顕微鏡装置10の構成では、観察対象物を観察した場合に蛍光画像等が得られるが、透過照明光学系として機能する第3の照明光学系13Dを更に設けることで、例えば図9に示したような観察対象物の明視野画像を得たり、観察対象物の位相差画像を得たりすることが可能となる。観察対象物の明視野画像等が得られることで、ユーザは、照明光を照射したい生体材料を、より容易に選別することが可能となる。
 なお、図8では、図2に示した本実施形態に係る光学顕微鏡装置10の構成に対し、第3の照明光学系13Dが設けられている場合を図示しているが、図8に示した構成例に対して、更に、偏光補償素子131又はスペックル除去素子133の少なくとも何れか一方を設けてもよいことは、言うまでもない。
 かかる第3の照明光学系13Dは、標本Sの標本面を、第1及び第2の照明光学系13A,13Bとは逆側から均一に照明するものである。第3の照明光学系13Dは、図8に模式的に示したように、第2の光源141と、第3の照明光学部材の一例としての光源レンズ143、視野絞り145、リレーレンズ147、開口絞り149及びコンデンサレンズ151と、を有している。
 第2の光源141は、特に限定されるものではなく、公知の任意の光源を用いることが可能である。ただし、本実施形態に係る光学顕微鏡装置10が着目する観察対象物は、光応答性の生体材料であるため、かかる生体材料が反応しない波長帯域の光(換言すれば、図4に示したような光応答性の生体材料の吸収スペクトルに重畳しない波長帯域の光)を照射可能な光源を用いることが重要である。このような光源として、ハロゲンランプや白色LED(Light Emitting Diode)等といった広波長帯域の光源を用いてもよいし、各種のレーザ光源等のような狭波長帯域の光源を用いてもよい。ただし、広波長帯域の光源を用いる場合には、上記のような理由から、光応答性の生体材料の吸収スペクトルと重畳する波長帯域の光を除くための光学フィルタ類を、第2の光源141と、標本面との間の光路上に設けることが重要である。
 第2の光源141から出射した第2の照明光は、光源レンズ143に入射する。光源レンズ143は、第2の照明光の光束を略平行光とするものであり、略平行光となった第2の照明光は、視野絞り145へと入射する。かかる光源レンズ143は、光束をコリメートすることが可能なように、各種の光学レンズを適宜単独又は組み合わせて用いることで、実現することが可能である。
 視野絞り145は、第2の照明光の光束による標本面の照明範囲を調整するためのものであり、標本面と光学的に共役な位置に設けられる。第2の照明光の光束は、かかる視野絞り145によって照射範囲が調整された後、リレーレンズ147へと入射する。かかる視野絞り145については、特に限定されるものではなく、公知の各種の絞りを適宜用いることが可能である。
 リレーレンズ147は、略平行光となった第2の照明光を収束させるためのレンズであり、開口絞り149は、標本面へと到達する第2の照明光の明るさを調整するための絞りである。リレーレンズ147によって収束した後、発散していく第2の照明光は、開口絞り149によって明るさが調整された後、コンデンサレンズ151へと入射する。なお、リレーレンズ147及び開口絞り149については、特に限定されるものではなく、公知の各種の光学部材を適宜用いることが可能である。
 コンデンサレンズ151は、リレーレンズ147によって収束した後発散する第2の照明光の光束を、再び略平行光とするレンズである。かかるコンデンサレンズ151は、特に限定されるものではなく、公知の各種のコンデンサレンズを用いることが可能である。コンデンサレンズ151により略平行光となった第2の照明光は、標本面の一部に照射されて、標本面の一部を照明する。
 以上説明したように、図8に示した第3の照明光学系13Dは、いわゆるケーラー照明光学系を構築するものであり、標本Sの一部を均一照明して、明視野画像や位相差画像等を実現する。
[第1及び第2の照明光学系13A,13Bを透過照明側に配置]
 図10は、本実施形態に係る光学顕微鏡装置10の第5の変形例である。第5の変形例に係る光学顕微鏡装置10は、図2に示した本実施形態に係る光学顕微鏡装置10の第1の照明光学系13Aを、透過照明側に配置し、かつ、透過照明とした第1の照明光の光束を適切に標本面に導光するために、第2の照明光学系13Bを再構成したものとなっている。また、第1及び第2の照明光学系13A、13Bを透過照明側に配置した結果、図2に示した光学顕微鏡装置10と比較して、撮像光学系13Cも簡略化されたものとなっている。
 第1及び第2の照明光学系13A、13Bを透過照明側に配置することで、場所特異的に照射している照明光の位置を実際に撮像することが可能となり、照射位置の確からしさを確認することが可能となる。これにより、標本の観察画像をはじめとする各種の情報を、図10に図示しない双眼顕微光学系等を通じてユーザに提示することができる。その結果、例えば、まず特定視野を接眼レンズを覗いて探すような場合に、ユーザは、いちいち接眼レンズから眼を離して標本の情報や顕微鏡の状態等を確認しなくともよくなり、作業性を向上させることができる。なお、標本の状態の一例として、病理スライドにおける患者情報等を挙げることが可能であり、顕微鏡の状態の一例として、対物レンズの倍率や観察位置(XY位置)等を挙げることが可能である。
 本変形例では、図10に模式的に示したように、図2に示した第1の照明光学系13Aが、そのまま透過照明側に設けられている。ただし、第1の照明光学系13Aの配置に際して、LCOS空間光変調素子113が、標本Sの標本面と光学的に共役な位置となるように、第1の照明光学系13Aを配置することが重要である。LCOS空間光変調素子113と標本面とが光学的に共役の関係となることで、LCOS空間光変調素子113で実現された照明光の照射パターンが保持されたままで、標本面に照明光を照射することが可能となる。LCOS空間光変調素子113により偏光状態を制御され、偏光ビームスプリッタ111を透過した照明光の光束は、第2の照明光学系13Bへと導光される。
 なお、図10では、図2に示した本実施形態に係る光学顕微鏡装置10における第1の照明光学系13Aの構成を図示しているが、図10に示した構成例に対して、更に、偏光補償素子131又はスペックル除去素子133の少なくとも何れか一方を設けてもよいことは、言うまでもない。
 また、本変形例では、光応答性の生体材料の機能を変化させるための波長帯域の照明光以外の光(例えば、図4に示したような吸収スペクトルを示す光応答性の生体材料の場合、光源101B及び/又は光源101Cの光)を用いて、明視野画像や位相差画像を得ることができる。
 本変形例に係る第2の照明光学系13Bは、第2の照明用光学部材の一例としてのリレーレンズ161、開口絞り163及びコンデンサレンズ165を有している。
 リレーレンズ161は、第1の照明光学系13Aからの照明光を略平行光とするためのレンズであり、開口絞り163は、標本面へと到達する照明光の明るさを調整するための絞りである。リレーレンズ161によってコリメートされた照明光は、開口絞り163によって明るさが調整された後、コンデンサレンズ165へと入射する。なお、リレーレンズ161及び開口絞り163については、特に限定されるものではなく、公知の各種の光学部材を適宜用いることが可能である。
 コンデンサレンズ165は、リレーレンズ161によって略平行光となった照明光の光束を、標本面に収束させるためのレンズである。かかるコンデンサレンズ165は、特に限定されるものではなく、公知の各種のコンデンサレンズを用いることが可能である。コンデンサレンズ165により収束された照明光は、標本面の一部に照射されて、標本面の一部を照明する。
 以上説明したように、図10に示した第1及び第2の照明光学系13A、13Bは、いわゆるクリティカル照明光学系を構築するものであり、標本Sの一部を均一照明する。
 また、本変形例に係る撮像光学系13Cは、対物レンズ121と、結像レンズ125と、撮像素子127と、を有している。これらの構成については、図2に示したものとほぼ同様の機能を有し、ほぼ同様の効果を奏するものであることから、詳細な説明は省略する。
 以上、図5~図10を参照しながら、本実施形態に係る光学顕微鏡装置10の変形例について説明した。
(演算処理装置について)
 次に、図11~図13を参照しながら、本実施形態に係る光学顕微鏡システムが有する演算処理装置について、詳細に説明する。
 図11は、本実施形態に係る演算処理装置の構成の一例を模式的に示したブロック図であり、図12は、本実施形態に係る演算処理装置について説明するための説明図である。図13は、本実施形態に係る演算処理装置のハードウェア構成の一例を示したブロック図である。
<演算処理装置20の構成について>
 本実施形態に係る演算処理装置20は、以上説明したような光学顕微鏡装置10に対して、所定の接続端子により直接接続されていてもよく、有線又は無線で、イントラネットやインターネット等の各種のネットワークを介して、光学顕微鏡装置10と接続されていてもよい。
 かかる演算処理装置20は、先だって言及したように、光学顕微鏡装置10に対して所定の制御信号を送信して、光学顕微鏡装置10の動作状態を統括的に制御する。また、演算処理装置20は、光学顕微鏡装置10から出力された標本の撮像画像のデータに対して画像処理を実施し、得られた画像処理結果を、光学顕微鏡システム1のユーザに提供する。更に、演算処理装置20は、得られた画像処理結果を用いて、光学顕微鏡装置10の動作状態を制御することも可能である。
 かかる機能を有する演算処理装置20は、図11に模式的に示したように、顕微鏡制御部201と、画像データ取得部203と、画像処理部205と、表示制御部207と、記憶部209と、を主に備える。
 顕微鏡制御部201は、例えば、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、入力装置、出力装置、通信装置等により実現される。顕微鏡制御部201は、光学顕微鏡装置10の動作状態を統括的に制御する制御部である。顕微鏡制御部201は、ユーザが実施したユーザ操作や、後述する画像処理部205における画像処理結果等に基づいて所定の制御信号を光学顕微鏡装置10に出力することで、光学顕微鏡装置10の動作状態を制御する。
 具体的には、顕微鏡制御部201は、ユーザが実施したユーザ操作や、後述する画像処理部205における画像処理結果等に基づいて、光源101のオン/オフ状態や、光源101からの照明光の照射タイミング、照射光量、照射時間等を制御することが可能である。また、光学顕微鏡装置10に複数の光源101が存在する場合に、上記のような各光源101のオン/オフ状態等を制御したり、各光源101の照射タイミングの切り替えを制御したり、各光源101からの照明光の照射時間を制御したりすることができる。
 これにより、例えば、所定波長の照明光が照射されると発光する発光性のタンパク質を更に含む、光に反応して機能を変化させる生体材料、又は、所定の発光色素で標識された生体材料等を観察対象とする場合に、生体材料の光応答を生じさせるための照明光の照射時間及び照射強度と、発光性のタンパク質や発光色素を発光させるための照明光の照射時間及び照射強度と、をタイミング良く切り替えることが可能となる。その結果、生体材料の光応答を生じさせるために、特定の波長を有する照明光を、照射強度を弱くして短い時間照射したり、発光性のタンパク質や発光色素を発光させるために、特定の波長を有する照明光を、照射強度を強くして長い時間照射したりすることができ、生体材料のより精度の良い観察が可能となる。
 また、顕微鏡制御部201は、ユーザが実施したユーザ操作や、後述する画像処理部205における画像処理結果等に基づいて、LCOS空間光変調素子113における各画素のオン/オフ状態を制御して場所特異的な照明を実現することが可能であり、また、時間変化に伴って各画素のオン/オフ状態を制御することで照明光が照射される位置を変化させる、場所特異的かつ時間特異的な照明を実現することも可能である。これにより、顕微鏡制御部201は、照明光の標本への照射状態を、生体材料に追随させることが可能となる。
 更に、顕微鏡制御部201は、ユーザが実施したユーザ操作や、後述する画像処理部205における画像処理結果等に基づいて、撮像素子127における撮像位置(換言すれば、ROI(Region Of Interest)の設定)、撮像タイミング、露光時間等を制御することも可能である。また、顕微鏡制御部201は、光学顕微鏡装置10のステージ11や対物レンズ121の動作状態を制御する機能を有していてもよい。
 画像データ取得部203は、例えば、CPU、ROM、RAM、通信装置等により実現される。画像データ取得部203は、光学顕微鏡装置10が生成した標本Sの標本面に関する画像データを光学顕微鏡装置10から取得して、後述する画像処理部205へと出力する。また、画像データ取得部203は、取得した画像データに、当該画像データを取得した日時等に関する時刻データを関連付けて、履歴情報として記憶部209等に格納してもよい。
 画像処理部205は、例えば、CPU、ROM、RAM等により実現される。画像処理部205は、画像データ取得部203から伝送された標本面の画像データに対して、各種の画像処理を施したり、かかる画像データを解析することで、標本に関する各種の情報を取得したりすることができる。
 例えば、画像処理部205は、取得した複数の画像データを用いて積算処理を行い、より明るい画像データや、ダイナミックレンジの広い(High Dynamic Range)画像を生成することが可能である。
 また、画像処理部205は、取得した画像データを公知の画像認識処理等を用いて解析することで、照射光が照射されている位置を特定したり、生体材料中の細胞の位置を特定したり、核などの細胞内の特定部位等を特定したりすることが可能である。また、このような画像解析処理を用いることで、標本中の特定の部位の時間的な変化を特定したり評価したりすることも可能となる。
 また、先だって説明したように、LCOS空間光変調素子113における画素と、撮像素子127における画素とは、特定の関係が成立している。そこで、画像処理部205は、LCOS空間光変調素子113における各画素のオン/オフ制御の状態から、撮像素子127(ひいては、生成される撮像画像)における照明光の照射位置を推定することも可能である。
 画像処理部205は、上記のような画像処理結果や画像解析結果を、顕微鏡制御部201へと出力することができる。顕微鏡制御部201は、このような画像処理結果や画像解析結果に基づいて、光学顕微鏡装置10の動作状態を制御することができる。これにより、標本中の着目する部位の時間変化に光学顕微鏡装置10の動作を追随させて、経時的な観察を可能することができる。
 また、画像処理部205は、上記のような画像処理結果や画像解析結果を、演算処理装置20の外部に設けられた各種のサーバ等を含むコンピュータに出力することも可能であるし、紙などの媒体に印刷することも可能であるし、各種の記録媒体にデータを保存することも可能である。更に、画像処理部205は、上記のような画像処理結果や画像解析結果を、後述する表示制御部207を介して、演算処理装置20に設けられたディスプレイ等の画像表示装置や、演算処理装置20の外部に設けられたディスプレイ等の画像表示装置に表示させることも可能である。
 以上説明したような、顕微鏡制御部201及び画像処理部205における具体的な動作例については、以下で改めて説明する。
 表示制御部207は、例えば、CPU、ROM、RAM、出力装置、通信装置等により実現される。表示制御部207は、画像処理部205により画像処理された標本の画像や、かかる画像に関連する各種の情報を、演算処理装置20が備えるディスプレイ等の出力装置や演算処理装置20の外部に設けられた出力装置等に表示する際の表示制御を行う。これにより、光学顕微鏡システム1のユーザは、観察している生体材料に関する様々な情報を、その場で把握することが可能となる。
 記憶部209は、例えば本実施形態に係る演算処理装置20が備えるRAMやストレージ装置等により実現される。記憶部209には、顕微鏡制御部201や画像処理部205が各種の処理を実施する際に利用する各種のデータベースやソフトウェアプログラム等が格納されている。また、記憶部209には、顕微鏡制御部201が実施する光学顕微鏡装置10の制御処理や画像処理部205が実施する各種の画像処理等における各種の設定情報や、本実施形態に係る演算処理装置20が何らかの処理を行う際に保存する必要が生じた様々なパラメータや処理の途中経過等が、適宜記録される。この記憶部209は、顕微鏡制御部201、画像データ取得部203、画像処理部205、表示制御部207等が、自由にデータのリード/ライト処理を行うことが可能である。
 以上、図11を参照しながら、本実施形態に係る演算処理装置20の全体構成について、詳細に説明した。
<顕微鏡制御部201、画像処理部205が実施する処理の具体例>
 以下では、本実施形態に係る顕微鏡制御部201や画像処理部205が実施する処理の一例について、具体的に説明する。本実施形態に係る光学顕微鏡システム1では、演算処理装置20の顕微鏡制御部201と画像処理部205とが協働することで、光学顕微鏡装置10において様々な動作状態を実現することが可能となる。
[具体例-1]
 例えば、所定波長の照明光が照射されると発光する発光性のタンパク質を更に含む、光に反応して機能を変化させる生体材料、又は、所定の発光色素で標識された生体材料等を観察対象とする場合を考える。この際、顕微鏡制御部201は、第1の照明光学系13Aにおいて、上記のような標本の発光状態に応じてLCOS空間光変調素子113により照明光の照射パターンが制御されるように、第1の照明光学系13Aを制御することができる。すなわち、顕微鏡制御部201は、発光性のタンパク質又は発光色素を発光させる波長帯域の照明光を照射する光源101を制御するとともに、LCOS空間光変調素子113の状態を制御して、照明範囲の全体に上記のような照明光を照射して、発光性のタンパク質又は発光色素を発光させ、かかる発光状態を撮像した撮像画像を生成させる。得られた撮像画像を参考にすることで、光応答性の生体材料に対応した照明光を、場所特異的に照射することが可能となる。
 例えば、発光状態を撮像した撮像画像そのもの、又は、画像処理部205が画像処理することで、生体材料が存在しうる候補地を示した情報を、ユーザ自身が確認し、所定のユーザ操作を行うことで、光応答性の生体材料を反応させるための照明光の照射位置を、顕微鏡制御部201に指定することが可能となる。また、画像処理部205が発光状態を撮像した撮像画像を公知の画像解析処理により解析して、顕微鏡制御部201が、光応答性の生体材料を反応させるための照明光の照射位置を、自動で設定することも可能である。
 更に、顕微鏡制御部201と画像処理部205とが協働することで、発光性のタンパク質又は発光色素を発光させるための照明光の照射と、光応答性の生体材料を反応させるための場所特異的な照明光の照射とを、交互に繰り返しながら、特定の観察対象のみを追随して、照明光を照射し続けることも可能である。この場合、顕微鏡制御部201は、場所特異的な照明光を生体材料に追随させるように、LCOS空間光変調素子113を制御することとなる。このような追随制御は、例えば線虫やがん細胞のような動き回る標本や、ターゲットが移動したり増加したりするような細胞増殖過程を観察する際に、特に有効な制御である。
[具体例-2]
 また、光学顕微鏡装置10が、図8又は図10に示したような、明視野画像又は位相差画像を取得可能な光学系を有している場合を考える。この際、顕微鏡制御部201は、得られた明視野画像又は位相差画像(すなわち、標本像)に応じて、LCOS空間光変調素子113により照明光の照射パターンが制御されるように、第1の照明光学系13Aを制御することができる。具体的には、演算処理装置20は、図9に示したような得られた明視野画像、又は、位相差画像をユーザに提示して、例えば図9中にROI1、ROI2等と示したように、手動で実際に照明光を照射する位置を選別させ、顕微鏡制御部201は、ユーザの選別結果を用いて、光学顕微鏡装置10の制御を行うことが可能である。また、画像処理部205が明視野画像又は位相差画像を公知の画像解析処理により解析して、顕微鏡制御部201が、光応答性の生体材料を反応させるための照明光の照射位置を、自動で設定することも可能であり、自動で順に照明光を照射させていくことも可能である。
 更に、顕微鏡制御部201と画像処理部205とが協働することで、明視野画像又は位相差画像を得るための照明光の照射と、光応答性の生体材料を反応させるための場所特異的な照明光の照射とを、交互に繰り返しながら、特定の観察対象のみを追随して、照明光を照射し続けることも可能である。この場合、顕微鏡制御部201は、場所特異的な照明光を生体材料に追随させるように、LCOS空間光変調素子113を制御することとなる。このような追随制御は、例えば線虫やがん細胞のような動き回る標本や、ターゲットが移動したり増加したりするような細胞増殖過程を観察する際に、特に有効な制御である。
 また、図10に示したような光学系が実現されている場合、場所特異的に照射している照明光の位置を実際に画像化することが可能であり、その照射位置の確からしさを確認することができる。この際、画像処理部205は、表示制御部207と連携しながら、文字や図形等を用いた各種の情報を、標本の撮像画像に重畳させることも可能である。これにより、例えば図12に模式的に示したように、標本中の光刺激を与えた領域を強調して表示したり、標本に関する情報や光学顕微鏡装置の状態を重畳させたり、特異的な細胞や組織に該当する部位を、強調して表示したりすることが可能となる。このような画像を、ユーザに対して直接提示することで、まず特定視野を接眼レンズを覗いて探すような場合に、いちいち接眼レンズから眼を離して標本の情報や光学顕微鏡装置の状態を確認しなくともよくなり、ユーザの作業性を更に向上させることが可能となったり、演算処理装置20から補助的な情報を得ることが可能となったりする。例えば、病理診断を実施する場合に、病理スライドを顕微鏡で覗きながら、撮像光学系により取り込まれた画像を、AI等を用いて補助診断を行い、がん細胞と考えられる箇所(特異的な細胞や組織に該当する部位)を強調して表示させることで、演算処理装置20は、病理診断を支援することも可能となる。
[具体例-3]
 以上説明したように、光応答性の生体材料に対して、場所特異的に照明光を照射した結果、どのような変化があったかを観察することも重要である。例えば、特定の神経細胞に光を照射した場合にどの筋肉が動作するかといったインタラクションを観察したり、特定の心筋細胞に一定間隔で光を照射した場合に拍動のリズムがどう変化するかを観察したり、特定の細胞に光を照射した際にイオンの流れがどう変化するかを観察したり、といった場合がある。上記のような観察は、顕微鏡制御部201と画像処理部205とが協働し、明視野画像又は位相差画像を取得しながら、得られたこれらの画像を画像解析することによって、可能となる。また、発光性タンパク質を反応させない光源波長を用いた発光イメージングも、上記のような観察に有効である。例えば、顕微鏡制御部201及び画像処理部205は、場所特異的な光照射をした後又は光照射を実施しながら、位相差画像を取得し、筋肉細胞の動きを解析することで、細胞のインタラクションを特定したり、拍動の変化を定量的に特定したりすることが可能となる。
 以上、本実施形態に係る顕微鏡制御部201や画像処理部205が実施する処理の一例について、具体的に説明した。
 以上、本実施形態に係る演算処理装置20の機能の一例を示した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、CPU等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。
 なお、上述のような本実施形態に係る演算処理装置の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
<演算処理装置のハードウェア構成について>
 次に、図13を参照しながら、本開示の実施形態に係る演算処理装置20のハードウェア構成について、詳細に説明する。図13は、本開示の実施形態に係る演算処理装置20のハードウェア構成を説明するためのブロック図である。
 演算処理装置20は、主に、CPU901と、ROM903と、RAM905と、を備える。また、演算処理装置20は、更に、ホストバス907と、ブリッジ909と、外部バス911と、インターフェース913と、入力装置915と、出力装置917と、ストレージ装置919と、ドライブ921と、接続ポート923と、通信装置925とを備える。
 CPU901は、演算処理装置及び制御装置として機能し、ROM903、RAM905、ストレージ装置919、又はリムーバブル記録媒体927に記録された各種プログラムに従って、演算処理装置20内の動作全般又はその一部を制御する。ROM903は、CPU901が使用するプログラムや演算パラメータ等を記憶する。RAM905は、CPU901が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはCPUバス等の内部バスにより構成されるホストバス907により相互に接続されている。
 ホストバス907は、ブリッジ909を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス911に接続されている。
 入力装置915は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ及びレバーなどユーザが操作する操作手段である。また、入力装置915は、例えば、赤外線やその他の電波を利用したリモートコントロール手段(いわゆる、リモコン)であってもよいし、演算処理装置20の操作に対応した携帯電話やPDA等の外部接続機器929であってもよい。さらに、入力装置915は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、CPU901に出力する入力制御回路などから構成されている。ユーザは、この入力装置915を操作することにより、演算処理装置20に対して各種のデータを入力したり処理動作を指示したりすることができる。
 出力装置917は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で構成される。このような装置として、CRTディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ELディスプレイ装置及びランプなどの表示装置や、スピーカ及びヘッドホンなどの音声出力装置や、プリンタ装置、携帯電話、ファクシミリなどがある。出力装置917は、例えば、演算処理装置20が行った各種処理により得られた結果を出力する。具体的には、表示装置は、演算処理装置20が行った各種処理により得られた結果を、テキスト又はイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。
 ストレージ装置919は、演算処理装置20の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置919は、例えば、HDD(Hard Disk Drive)等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等により構成される。このストレージ装置919は、CPU901が実行するプログラムや各種データ、及び外部から取得した各種データなどを格納する。
 ドライブ921は、記録媒体用リーダライタであり、演算処理装置20に内蔵、あるいは外付けされる。ドライブ921は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体927に記録されている情報を読み出して、RAM905に出力する。また、ドライブ921は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体927に記録を書き込むことも可能である。リムーバブル記録媒体927は、例えば、DVDメディア、HD-DVDメディア、Blu-ray(登録商標)メディア等である。また、リムーバブル記録媒体927は、コンパクトフラッシュ(登録商標)(CompactFlash:CF)、フラッシュメモリ、又は、SDメモリカード(Secure Digital memory card)等であってもよい。また、リムーバブル記録媒体927は、例えば、非接触型ICチップを搭載したICカード(Integrated Circuit card)又は電子機器等であってもよい。
 接続ポート923は、機器を演算処理装置20に直接接続するためのポートである。接続ポート923の一例として、USB(Universal Serial Bus)ポート、IEEE1394ポート、SCSI(Small Computer System Interface)ポート等がある。接続ポート923の別の例として、RS-232Cポート、光オーディオ端子、HDMI(登録商標)(High-Definition Multimedia Interface)ポート等がある。この接続ポート923に外部接続機器929を接続することで、演算処理装置20は、外部接続機器929から直接各種データを取得したり、外部接続機器929に各種データを提供したりする。
 通信装置925は、例えば、通信網931に接続するための通信デバイス等で構成された通信インターフェースである。通信装置925は、例えば、有線又は無線LAN(Local Area Network)、Bluetooth(登録商標)、又はWUSB(Wireless USB)用の通信カード等である。また、通信装置925は、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ、又は、各種通信用のモデム等であってもよい。この通信装置925は、例えば、インターネットや他の通信機器との間で、例えばTCP/IP等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置925に接続される通信網931は、有線又は無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内LAN、赤外線通信、ラジオ波通信又は衛星通信等であってもよい。
 以上、本開示の実施形態に係る演算処理装置20の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。
 以上、本実施形態に係る光学顕微鏡装置10と演算処理装置20とを有する光学顕微鏡システム1について、図1~図13を参照しながら詳細に説明した。
 なお、以上説明したような光学顕微鏡装置10と演算処理装置20とを有する光学顕微鏡システム1は、手術用のプロジェクタを含む各種のプロジェクタに対しても適用することが可能である。
(標本の観察方法について)
 以下では、以上説明したような、本実施形態に係る光学顕微鏡装置10を用いた標本の観察方法の流れの一例について、簡単に説明する。
 本実施形態に係る標本の観察方法は、(a)光応答性の生体材料を含む標本を照明する所定の偏光方向を有する照明光を出射する光源から当該照明光を出射させて、第1の照明用光学部材を介して、照明光をLCOS空間光変調素子に均一に照射させることと、(b)LCOS空間光変調素子により偏光状態が制御された照明光について、偏光光学素子により、照明光の偏光状態に応じてLCOS空間光変調素子側から標本側へと向かう照明光の透過状態を制御することと、(c)第2の照明用光学部材により、偏光光学素子からの照明光の光束を標本面に結像させることと、(d)撮像光学部材及び撮像素子を有する撮像光学系により、標本面を撮像することと、を含む。
 このような流れで標本を観察することで、光応答性の生体材料を含む標本であっても、より精度の高い照明を用いて観察することが可能となる。
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、又は、上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 なお、以下のような構成も本開示の技術的範囲に属する。
(1)
 光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
 前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
 撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
を備える、光学顕微鏡装置。
(2)
 前記第1の照明光学系は、偏光補償素子を更に備える、(1)に記載の光学顕微鏡装置。
(3)
 前記第1の照明光学系は、スペックル除去素子を更に備える、(1)又は(2)に記載の光学顕微鏡装置。
(4)
 前記第1の照明光学系及び前記第2の照明光学系は、前記標本面に対し、前記照明光を場所特異的に照射する、(1)~(3)の何れか1つに記載の光学顕微鏡装置。
(5)
 前記第1の照明光学系及び前記第2の照明光学系は、前記標本面に対し、前記照明光を時間特異的に照射する、(1)~(4)の何れか1つに記載の光学顕微鏡装置。
(6)
 前記標本は、所定波長の照明光が照射されると発光する発光性のタンパク質を含む前記生体材料、又は、所定の発光色素で標識された前記生体材料を含む、(1)~(5)の何れか1つに記載の光学顕微鏡装置。
(7)
 前記第1の照明光学系は、複数の前記光源を有しており、
 前記複数の光源の少なくとも何れかから照射された前記照明光により、前記発光性のタンパク質が発光するか、又は、前記発光色素が励起されることで発光する、(6)に記載の光学顕微鏡装置。
(8)
 前記第1の照明光学系では、前記標本の発光状態に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、(6)又は(7)に記載の光学顕微鏡装置。
(9)
 前記標本面に対して第2の照明光を照射する第2の光源と、前記標本面を均一に照射する第3の照明光学部材と、を有する第2の照明光学系を更に備える、(1)~(5)の何れか1つに記載の光学顕微鏡装置。
(10)
 前記第1の照明光学系では、前記第3の照明光学系による標本像に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、(9)に記載の光学顕微鏡装置。
(11)
 前記第1の照明光学系、及び、前記第2の照明光学系は、前記撮像光学系に対して透過照明として配置される、(1)~(5)の何れか1つに記載の光学顕微鏡装置。
(12)
 前記第1の照明光学系では、前記第1の照明光学系及び前記第2の照明光学系による標本像に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、(11)に記載の光学顕微鏡装置。
(13)
 前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、(8)に記載の光学顕微鏡装置。
(14)
 前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、(10)に記載の光学顕微鏡装置。
(15)
 前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、(12)に記載の光学顕微鏡装置。
(16)
 標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
 前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
 撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
を備える、光学顕微鏡装置。
(17)
 光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
 前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
 撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
を備える、光学顕微鏡装置と、
 前記光学顕微鏡装置の動作状態を制御する制御部と、
 前記撮像素子により生成された前記標本の撮像画像を画像処理する画像処理部と、
を有する、光学顕微鏡システム。
(18)
 前記画像処理部は、前記撮像画像を画像処理することで光照射による前記生体材料の変化を特定する、(17)に記載の光学顕微鏡システム。
(19)
 前記制御部は、前記画像処理部により特定された前記生体材料の変化に応じて、前記光学顕微鏡装置の動作状態を制御して、前記照明光の前記標本への照射状態を前記生体材料に追随させる、(18)に記載の光学顕微鏡システム。
(20)前記画像処理部は、前記標本の撮像画像に対して、前記標本に関する情報、又は、前記光学顕微鏡装置の状態に関する情報の少なくとも何れかを重畳して表示するよう制御する、(17)~(19)の何れか1つに記載の光学顕微鏡システム。
   1  光学顕微鏡システム
  10  光学顕微鏡装置
  13A 第1の照明光学系
  13B 第2の照明光学系
  13C 撮像光学系
  13D 第3の照明光学系
  20  演算処理装置
 101  光源
 103  カップリングレンズ
 105  ダイクロイックプリズム
 107  インテグレータ
 109,115,151,165  コンデンサレンズ
 111  偏光ビームスプリッタ
 113  LCOS空間光変調素子
 117,123  バンドパスフィルタ
 119  ダイクロイックミラー
 121  対物レンズ
 125  結像レンズ
 127  撮像素子
 131  偏光補償素子
 133  スペックル除去素子
 141  第2の光源
 143  光源レンズ
 145  視野絞り
 147,161  リレーレンズ
 149,163  開口絞り
 201  顕微鏡制御部
 203  画像データ取得部
 205  画像処理部
 207  表示制御部
 209  記憶部

Claims (20)

  1.  光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
     前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
     撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
    を備える、光学顕微鏡装置。
  2.  前記第1の照明光学系は、偏光補償素子を更に備える、請求項1に記載の光学顕微鏡装置。
  3.  前記第1の照明光学系は、スペックル除去素子を更に備える、請求項1に記載の光学顕微鏡装置。
  4.  前記第1の照明光学系及び前記第2の照明光学系は、前記標本面に対し、前記照明光を場所特異的に照射する、請求項1に記載の光学顕微鏡装置。
  5.  前記第1の照明光学系及び前記第2の照明光学系は、前記標本面に対し、前記照明光を時間特異的に照射する、請求項4に記載の光学顕微鏡装置。
  6.  前記標本は、所定波長の照明光が照射されると発光する発光性のタンパク質を含む前記生体材料、又は、所定の発光色素で標識された前記生体材料を含む、請求項1に記載の光学顕微鏡装置。
  7.  前記第1の照明光学系は、複数の前記光源を有しており、
     前記複数の光源の少なくとも何れかから照射された前記照明光により、前記発光性のタンパク質が発光するか、又は、前記発光色素が励起されることで発光する、請求項6に記載の光学顕微鏡装置。
  8.  前記第1の照明光学系では、前記標本の発光状態に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、請求項7に記載の光学顕微鏡装置。
  9.  前記標本面に対して第2の照明光を照射する第2の光源と、前記標本面を均一に照射する第3の照明光学部材と、を有する第2の照明光学系を更に備える、請求項1に記載の光学顕微鏡装置。
  10.  前記第1の照明光学系では、前記第3の照明光学系による標本像に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、請求項9に記載の光学顕微鏡装置。
  11.  前記第1の照明光学系、及び、前記第2の照明光学系は、前記撮像光学系に対して透過照明として配置される、請求項1に記載の光学顕微鏡装置。
  12.  前記第1の照明光学系では、前記第1の照明光学系及び前記第2の照明光学系による標本像に応じて前記LCOS空間光変調素子により前記照明光の照射パターンが制御される、請求項11に記載の光学顕微鏡装置。
  13.  前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、請求項8に記載の光学顕微鏡装置。
  14.  前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、請求項10に記載の光学顕微鏡装置。
  15.  前記第1の照明光学系では、場所特異的な前記照明光を前記生体材料に追随させるように、前記LCOS空間光変調素子が制御される、請求項12に記載の光学顕微鏡装置。
  16.  標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
     前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
     撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
    を備える、光学顕微鏡装置。
  17.  光に反応して機能を変化させる生体材料を含む標本を照明するための照明光を出射する光源と、前記照明光の偏光状態を制御するLCOS(Liquid Crystal On Silicon)空間光変調素子と、前記LCOS空間光変調素子を均一照明する第1の照明用光学部材と、前記照明光の偏光状態に応じて前記LCOS空間光変調素子側から前記標本側へと向かう前記照明光の透過状態を制御する偏光光学素子と、を有する第1の照明光学系と、
     前記第1の照明光学系からの光束を標本面に結像させる第2の照明用光学部材を有する第2の照明光学系と、
     撮像光学部材と撮像素子とを有し、前記標本面を撮像するための撮像光学系と、
    を備える、光学顕微鏡装置と、
     前記光学顕微鏡装置の動作状態を制御する制御部と、
     前記撮像素子により生成された前記標本の撮像画像を画像処理する画像処理部と、
    を有する、光学顕微鏡システム。
  18.  前記画像処理部は、前記撮像画像を画像処理することで光照射による前記生体材料の変化を特定する、請求項17に記載の光学顕微鏡システム。
  19.  前記制御部は、前記画像処理部により特定された前記生体材料の変化に応じて、前記光学顕微鏡装置の動作状態を制御して、前記照明光の前記標本への照射状態を前記生体材料に追随させる、請求項18に記載の光学顕微鏡システム。
  20.  前記画像処理部は、前記標本の撮像画像に対して、前記標本に関する情報、又は、前記光学顕微鏡装置の状態に関する情報の少なくとも何れかを重畳して表示するよう制御する、請求項17に記載の光学顕微鏡システム。
PCT/JP2019/028557 2018-08-09 2019-07-19 光学顕微鏡装置及び光学顕微鏡システム WO2020031668A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP19846152.7A EP3835845A4 (en) 2018-08-09 2019-07-19 OPTICAL MICROSCOPE DEVICE AND OPTICAL MICROSCOPE SYSTEM
JP2020536426A JP7380569B2 (ja) 2018-08-09 2019-07-19 光学顕微鏡装置及び光学顕微鏡システム
US17/264,270 US11487095B2 (en) 2018-08-09 2019-07-19 Optical microscope and system including illumination to change function of biomaterial

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-150261 2018-08-09
JP2018150261 2018-08-09

Publications (1)

Publication Number Publication Date
WO2020031668A1 true WO2020031668A1 (ja) 2020-02-13

Family

ID=69414819

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/028557 WO2020031668A1 (ja) 2018-08-09 2019-07-19 光学顕微鏡装置及び光学顕微鏡システム

Country Status (4)

Country Link
US (1) US11487095B2 (ja)
EP (1) EP3835845A4 (ja)
JP (1) JP7380569B2 (ja)
WO (1) WO2020031668A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022209262A1 (ja) * 2021-03-31 2022-10-06 ソニーグループ株式会社 生体試料観察装置用照明装置、生体試料観察装置、観察装置用照明装置及び観察システム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019066706A (ja) 2017-10-02 2019-04-25 ソニー株式会社 蛍光顕微鏡装置及び蛍光顕微鏡システム
DE102018110806A1 (de) * 2018-02-16 2019-08-22 Carl Zeiss Meditec Ag Operationsmikroskop mit einer Beleuchtungsvorrichtung

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003130866A (ja) * 2001-10-26 2003-05-08 Hitachi High-Technologies Corp 標本中の微小領域測定装置及び方法
JP2009282112A (ja) * 2008-05-20 2009-12-03 Mitsutoyo Corp 共焦点顕微鏡
JP2011257599A (ja) 2010-06-09 2011-12-22 Olympus Corp 観察装置および観察方法
JP2013190760A (ja) * 2012-03-15 2013-09-26 Olympus Corp 顕微鏡用照明装置
JP2014112122A (ja) * 2012-12-05 2014-06-19 Olympus Corp 光学装置
WO2014112212A1 (ja) * 2013-01-15 2014-07-24 ソニー株式会社 投影型表示装置および直視型表示装置
JP2014146542A (ja) * 2013-01-30 2014-08-14 Sony Corp 照明装置および表示装置
JP2015200693A (ja) * 2014-04-04 2015-11-12 浜松ホトニクス株式会社 誘導放射抑制顕微鏡装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0911667B1 (en) 1997-10-22 2003-04-02 Max-Planck-Gesellschaft zur Förderung der Wissenschaften e.V. Programmable spatially light modulated microscope and microscopy method
DE10027167B4 (de) * 1999-05-31 2007-03-22 Pentax Corp. Mikroskop mit einem Beleuchtungssystem
JP2017129658A (ja) * 2016-01-19 2017-07-27 セイコーエプソン株式会社 プロジェクター及びプロジェクターの制御方法
US7133543B2 (en) * 2001-06-12 2006-11-07 Applied Imaging Corporation Automated scanning method for pathology samples
US7439478B2 (en) * 2001-07-06 2008-10-21 Palantyr Research, Llc Imaging system, methodology, and applications employing reciprocal space optical design having at least one pixel being scaled to about a size of a diffraction-limited spot defined by a microscopic optical system
JP5048899B2 (ja) 2001-09-28 2012-10-17 オリンパス株式会社 顕微鏡
CN1991335A (zh) 2002-09-30 2007-07-04 独立行政法人科学技术振兴机构 共焦点显微镜及采用它的荧光测量方法和偏振光测量方法
EP1796400A1 (en) 2005-12-06 2007-06-13 JDS Uniphase Corporation Thin-film optical retarders
US7460248B2 (en) 2006-05-15 2008-12-02 Carestream Health, Inc. Tissue imaging system
EP2023127B1 (en) * 2006-05-31 2017-12-20 Olympus Corporation Biological specimen imaging method and biological specimen imaging apparatus
CN101836152B (zh) 2007-10-31 2014-04-16 株式会社尼康 激光激发荧光显微镜
JP2009109933A (ja) 2007-11-01 2009-05-21 Nikon Corp レーザ励起蛍光顕微鏡
DE102008049878A1 (de) 2008-09-30 2010-04-01 Carl Zeiss Microlmaging Gmbh Verbesserte Verfahren und Vorrichtungen für die Mikroskopie mit strukturierter Beleuchtung
DE102009060793A1 (de) 2009-12-22 2011-07-28 Carl Zeiss Microlmaging GmbH, 07745 Hochauflösendes Mikroskop und Verfahren zur zwei- oder dreidimensionalen Positionsbestimmung von Objekten
JP4979777B2 (ja) 2010-01-18 2012-07-18 オリンパス株式会社 顕微鏡画像処理装置
CA2806621C (en) 2010-08-05 2018-09-11 Cambridge Research & Instrumentation, Inc. Enhancing visual assessment of samples
US9185357B2 (en) 2010-09-17 2015-11-10 Lltech Management Optical tissue sectioning using full field optical coherence tomography
DE102010041794A1 (de) 2010-09-30 2012-04-05 Carl Zeiss Microlmaging Gmbh Mikroskopsystem, Mikroskopieverfahren und Computerprogrammprodukt
JP2012098366A (ja) 2010-10-29 2012-05-24 Samsung Yokohama Research Institute Co Ltd 光学ユニット及び画像投影装置
JP5985883B2 (ja) 2012-05-17 2016-09-06 オリンパス株式会社 顕微鏡
JP6370626B2 (ja) 2014-07-24 2018-08-08 オリンパス株式会社 照明光学系、照明装置、及び照明光学素子
EP3394579B1 (en) 2015-12-21 2023-09-20 Verily Life Sciences LLC Systems and methods for determining an identity of a probe in a target based on colors and locations of two or more fluorophores in the probe and in the target
JP2017156619A (ja) 2016-03-03 2017-09-07 カシオ計算機株式会社 光源装置及び投影装置
EP3625610A4 (en) 2017-05-15 2021-03-24 The Regents of The University of California SYSTEMS AND METHODS FOR CONFIGURABLE MINIATURE MICROSCOPY
JP2019066706A (ja) 2017-10-02 2019-04-25 ソニー株式会社 蛍光顕微鏡装置及び蛍光顕微鏡システム
EP3832369A1 (en) 2019-12-05 2021-06-09 Leica Microsystems CMS GmbH Light sheet fluorescence microscope

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003130866A (ja) * 2001-10-26 2003-05-08 Hitachi High-Technologies Corp 標本中の微小領域測定装置及び方法
JP2009282112A (ja) * 2008-05-20 2009-12-03 Mitsutoyo Corp 共焦点顕微鏡
JP2011257599A (ja) 2010-06-09 2011-12-22 Olympus Corp 観察装置および観察方法
JP2013190760A (ja) * 2012-03-15 2013-09-26 Olympus Corp 顕微鏡用照明装置
JP2014112122A (ja) * 2012-12-05 2014-06-19 Olympus Corp 光学装置
WO2014112212A1 (ja) * 2013-01-15 2014-07-24 ソニー株式会社 投影型表示装置および直視型表示装置
JP2014146542A (ja) * 2013-01-30 2014-08-14 Sony Corp 照明装置および表示装置
JP2015200693A (ja) * 2014-04-04 2015-11-12 浜松ホトニクス株式会社 誘導放射抑制顕微鏡装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022209262A1 (ja) * 2021-03-31 2022-10-06 ソニーグループ株式会社 生体試料観察装置用照明装置、生体試料観察装置、観察装置用照明装置及び観察システム

Also Published As

Publication number Publication date
US20210294085A1 (en) 2021-09-23
EP3835845A1 (en) 2021-06-16
US11487095B2 (en) 2022-11-01
EP3835845A4 (en) 2021-09-08
JP7380569B2 (ja) 2023-11-15
JPWO2020031668A1 (ja) 2021-08-26

Similar Documents

Publication Publication Date Title
WO2020031668A1 (ja) 光学顕微鏡装置及び光学顕微鏡システム
US11513330B2 (en) Fluorescence microscope apparatus and fluorescence microscope system
AU2014265382B2 (en) Microscopy of a tissue sample using structured illumination
JP4020714B2 (ja) 顕微鏡
JP6587004B2 (ja) 装置、システム、方法、及びプログラム
WO2011155628A1 (ja) 顕微鏡装置、観察方法
JP2018097382A (ja) 高分解能ルミネッセンス顕微鏡法
JPWO2004036284A1 (ja) 共焦点顕微鏡、共焦点顕微鏡を用いた蛍光測定方法及び偏光測定方法
US10895733B2 (en) Microscope system
US8982454B2 (en) Microscope and filter inserting method
US10753871B2 (en) Information processing device, image acquisition system, information processing method, and image information acquisition method
EP3855734B1 (en) Projection system and projection display method
US11906724B2 (en) Apparatuses, systems and methods for generating color video with a monochrome sensor
WO2017159046A1 (ja) 内視鏡用光源、内視鏡用光源の制御方法及び内視鏡装置
US7589330B2 (en) Ultraviolet microscope apparatus
JP4869502B2 (ja) 微分干渉顕微鏡
WO2020135298A1 (zh) 投影系统及投影方法
JP2003121748A (ja) カラーレーザー走査型顕微鏡
CN115475335A (zh) 光遗传控制系统及其控制方法
JP2004271946A (ja) 共焦点レーザ走査型顕微鏡装置及び試料情報記録方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19846152

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020536426

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019846152

Country of ref document: EP

Effective date: 20210309