WO2019244275A1 - 観察装置 - Google Patents

観察装置 Download PDF

Info

Publication number
WO2019244275A1
WO2019244275A1 PCT/JP2018/023455 JP2018023455W WO2019244275A1 WO 2019244275 A1 WO2019244275 A1 WO 2019244275A1 JP 2018023455 W JP2018023455 W JP 2018023455W WO 2019244275 A1 WO2019244275 A1 WO 2019244275A1
Authority
WO
WIPO (PCT)
Prior art keywords
objective lens
reflected light
focus
light intensity
observation device
Prior art date
Application number
PCT/JP2018/023455
Other languages
English (en)
French (fr)
Inventor
豪 桝屋
忠雄 藪原
浩子 藤田
Original Assignee
株式会社日立ハイテクノロジーズ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立ハイテクノロジーズ filed Critical 株式会社日立ハイテクノロジーズ
Priority to EP18923067.5A priority Critical patent/EP3812823A4/en
Priority to PCT/JP2018/023455 priority patent/WO2019244275A1/ja
Priority to US16/972,751 priority patent/US11892706B2/en
Priority to JP2020525148A priority patent/JP7034280B2/ja
Publication of WO2019244275A1 publication Critical patent/WO2019244275A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/34Systems for automatic generation of focusing signals using different areas in a pupil plane
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/55Specular reflectivity
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/0016Technical microscopes, e.g. for inspection or measuring in industrial production processes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/0088Inverse microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/24Base structure
    • G02B21/241Devices for focusing
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/02Mechanical
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/06Illumination; Optics
    • G01N2201/063Illuminating optical parts
    • G01N2201/0638Refractive parts

Definitions

  • the present invention relates to an observation device.
  • Image imaging is known as a method for observing cells and the like in a sample solution with high sensitivity.
  • the observation by the image imaging method is performed using, for example, an optical microscope, a fluorescence microscope, a coherent anti-Stokes Raman scattering (CARS) microscope, and a three-dimensional optical coherence tomography (OCT).
  • an optical microscope a fluorescence microscope, a coherent anti-Stokes Raman scattering (CARS) microscope, and a three-dimensional optical coherence tomography (OCT).
  • CARS coherent anti-Stokes Raman scattering
  • OCT three-dimensional optical coherence tomography
  • the autofocus method is roughly classified into two methods. One is an image method for calculating a focus position from the contrast of a microscope image, and the other is an optical method for irradiating a sample container with light such as a laser and calculating the focus position from reflected light.
  • image-based autofocus a plurality of microscope images are acquired, the position where the contrast is maximized is calculated, and autofocus is performed.
  • This method requires a program or device for calculating the contrast of a plurality of microscope images at high speed in order to perform autofocus at high speed, and it was difficult in principle to improve the autofocus speed.
  • this method requires an observation target capable of obtaining contrast, and when observing extremely dilute cells, autofocus cannot be performed.
  • the interface between the sample container and the sample solution is irradiated with light such as a laser, and the autofocus is performed based on information of one or several scalar amounts such as the position and phase of light reflected from the interface. I do. Therefore, for example, when acquiring an image of several hundred thousand pixels, the amount of calculation is several hundred thousand times smaller than that of the image method, and high-speed autofocus can be performed.
  • the reflected light of the light applied to the bottom surface of the sample container is reflected light from the boundary between the inner bottom surface of the sample container and the sample liquid, or the outer bottom surface of the sample container.
  • the detection range of the autofocus position needs to be wide, and the reflected light from the boundary between the outside bottom surface of the sample container and air must be completely excluded.
  • Patent Literature 1 discloses a method in which an anti-reflection film is provided on an outer bottom surface of a sample container and light reflected from a boundary surface between the outer bottom surface of the sample container and air is excluded. Have been.
  • Patent Document 2 discloses that reflected light from the boundary between the inner bottom surface of the sample container and the sample liquid and reflected light from the boundary surface between the outer bottom surface of the sample container and air are detected, and respective peak positions are detected.
  • a method for calculating the position of the boundary between the inner bottom surface of the sample container and the sample liquid based on the above and performing autofocusing is disclosed.
  • the present invention provides an observation device that uniquely performs high-precision autofocus on a focus position.
  • a first aspect of the observation device is a holding device that holds the sample container in an observation device that captures an image of a focus position in a sample container containing a sample liquid.
  • An optical system that captures an image of the focus position, and an arithmetic unit that controls the optical system, wherein the optical system is configured to control an objective lens disposed below the sample container,
  • An objective lens actuator that is driven in the axial direction, an irradiation unit that irradiates light to the bottom surface of the sample container, a detection unit that detects the intensity of reflected light of the reflected light of the light, and a reflection surface where the intensity of the reflected light has a peak
  • a focus control unit that focuses the objective lens; and a count unit that counts the reflection surface, wherein the focus control unit controls the peak of the reflected light intensity.
  • the objective lens actuator is driven to focus the reflection surface, and the counting unit counts the reflection surface when the focus control unit focuses the reflection surface.
  • the computing device determines whether or not the focus is at the focus position based on the count value, and when the focus is at the focus position, captures an image with the optical system.
  • the objective lens actuator is driven when the focus is not at the focus position.
  • a second aspect of the observation device is an observation device that captures an image of a focus position in a sample container in which a sample liquid is stored, wherein a holding unit that holds the sample container, An optical system that captures an image, and an arithmetic device that controls the optical system, the optical system includes an objective lens disposed below the sample container, and an objective that scans the objective lens in an optical axis direction.
  • a lens actuator an irradiating unit that irradiates the bottom surface of the sample container with light, a detecting unit that detects a reflected light intensity of the reflected light of the light, and a focus of the objective lens on a reflecting surface that indicates the peak of the reflected light intensity And a reflected light intensity determination unit that determines the position of the focal point based on the intensity distribution of the reflected light, wherein the focus control unit
  • the objective lens actuator is driven to focus the focus on the reflection surface, and the reflected light intensity determination unit determines that the focus is based on the intensity distribution of the reflected light. It is determined whether or not the focus position is correct, the arithmetic device causes the optical system to perform imaging when the focus is correct to the focus position, and when the focus is not correct to the focus position. And driving the objective lens actuator.
  • autofocus can be uniquely performed with high accuracy at the focus position.
  • FIG. 1 is a schematic perspective view illustrating a configuration of an observation device 1 according to a first embodiment.
  • FIG. 2 is a schematic diagram showing the operation of the observation device 1 according to the first embodiment.
  • FIG. 2 is a schematic diagram showing the operation of the observation device 1 according to the first embodiment.
  • FIG. 2 is a schematic diagram showing the operation of the observation device 1 according to the first embodiment.
  • FIG. 2 is a schematic diagram showing the operation of the observation device 1 according to the first embodiment.
  • FIG. 2 is a schematic diagram showing the operation of the observation device 1 according to the first embodiment.
  • 5 is a flowchart illustrating an observation method according to the first embodiment.
  • FIG. 4 is a graph showing an example of a reflected light intensity distribution when a focal point 201 of an objective lens 202 is scanned from below a sample holding unit 101 to above.
  • FIG. 9 is a schematic diagram showing the operation of the observation device 1 according to the second embodiment.
  • FIG. 9 is a schematic diagram showing the operation of the observation device 1 according to the second embodiment.
  • FIG. 9 is a schematic diagram showing the operation of the observation device 1 according to the second embodiment.
  • 9 is a schematic diagram showing the operation of the observation device 1 according to the second embodiment.
  • 9 is a flowchart illustrating an observation method according to the second embodiment.
  • 5 is a graph showing an example of a reflected light intensity distribution when the focal point 201 of the objective lens 202 is continuously scanned downward from within the sample liquid 102.
  • the embodiment of the present invention relates to an observation apparatus and an observation method for automatically capturing a microscope image of a focus position in a sample container containing a sample solution containing cells and fine particles by autofocus.
  • the “focus position” is a position where observation is performed in the sample container, and refers to a region from the inner bottom surface of the sample container to an upper portion of 20 ⁇ m.
  • autofocus refers to a process of automatically adjusting the focus of the objective lens to the focus position.
  • the “connection” of each component does not necessarily need to be physically connected by a wiring or the like, and includes a wireless connection.
  • an XYZ rectangular coordinate system is set.
  • a predetermined direction in the horizontal plane is defined as an X direction
  • a direction orthogonal to the X direction in the horizontal plane is defined as a Y direction
  • a direction orthogonal to each of the X and Y directions is defined as a Z direction.
  • the Z direction is parallel to the optical axis direction of the objective lens.
  • FIG. 1 is a schematic perspective view showing the configuration of the observation device 1 according to the first embodiment.
  • the observation device 1 includes an imaging unit 200 (optical system), an XY stage 300 (holding unit), and a control PC 400 (arithmetic device).
  • the XY stage 300 holds the sample container 100.
  • the sample container 100 is a container having a plurality of sample holding units 101 in which a sample liquid 102 containing an observation target such as cells or fine particles is stored.
  • a sample container 100 as shown in FIG. 1, a 96-well microtiter plate having 96 sample holding portions 101, a 384-well plate, a 1536-well plate, or the like can be used.
  • the XY stage 300 is configured to be able to drive the sample container 100 on a plane (XY plane) perpendicular to the optical axis direction (Z direction) of the objective lens 202 of the imaging unit 200. Note that, instead of driving the sample container 100 by the XY stage 300, the imaging unit 200 may be driven in the XY plane. That is, the sample container 100 and the imaging unit 200 are configured to relatively move in the XY plane.
  • the imaging unit 200 is an optical system of an inverted microscope, and includes an objective lens 202, an objective lens actuator 203, a camera 204, an imaging lens 205, an autofocus unit 206, a focus control unit 207, and a count disposed below the sample container 100.
  • the objective lens actuator 203 drives the objective lens 202 in the optical axis direction according to an instruction from the focus control unit 207 or the control PC 400.
  • the position of the sample container 100 may be fixed and the objective lens actuator 203 may be driven in three axial directions (XYZ directions).
  • the imaging lens 205 forms an image incident through the objective lens 202 on the camera 204.
  • the camera 204 converts an image formed on the sensor unit of the camera 204 by the imaging lens 205 into an electric signal, and captures the converted signal as a microscope image.
  • the imaging unit 200 includes an adjustment mechanism for driving the imaging lens 205 or the camera 204 in order to finely adjust the surface on which the image is formed on the camera 204 to an arbitrary position within the focus position.
  • the adjustment mechanism may be, for example, an actuator connected to the control PC 400 or the focus control unit 207.
  • the adjusting mechanism drives the imaging lens 205 or the camera 204 such that, for example, after the focal point 201 of the objective lens 202 is adjusted to the inner bottom surface 103, an image above the inner bottom surface 103 is formed on the camera 204.
  • the autofocus unit 206 includes an irradiation unit that irradiates the bottom surface of the sample holding unit 101 with light such as a laser, and a photodetector that detects reflected light from the sample holding unit 101, Obtain a signal for performing autofocus.
  • the irradiation unit irradiates the bottom surface of the sample holding unit 101 with light through the objective lens 202 in parallel with the optical axis direction of the objective lens 202. Note that the bottom surface of the sample holding unit 101 may be irradiated with light obliquely to the optical axis direction without passing through the objective lens 202.
  • the photodetector keeps detecting the reflected light while the objective lens actuator 203 is being driven.
  • the light detector is a sensor such as a photodiode, for example.
  • the photodetector may include an amplifier that amplifies the detection signal of the reflected light.
  • the light detection unit transmits the detection signal to the focus control unit 207 and the reflected light intensity determination unit 209 as a reflected light intensity distribution.
  • FIG. 4 is a graph illustrating an example of the reflected light intensity distribution when the focal point 201 of the objective lens 202 is scanned from below the sample holding unit 101 to above.
  • the reflected light intensity is determined when the focal point 201 of the objective lens 202 is aligned with the reflection surface of the sample holding unit 101, that is, the boundary surface between the inner bottom surface 103 of the sample holding unit 101 and the sample liquid 102, Alternatively, a peak is shown when the focus 201 is focused on the boundary surface between the outer bottom surface 104 of the sample holding unit 101 and the air.
  • the focus control unit 207 receives the reflected light intensity distribution from the autofocus unit 206, determines whether the focus 201 is focused on the reflection surface where the peak of the reflected light intensity is the peak, and accurately focuses the focus 201 on the reflection surface. Thus, the objective lens actuator 203 is driven. When the peak of the reflected light intensity is detected, the focus control unit 207 switches the driving direction of the objective lens actuator 203, and accurately focuses the focal point 201 of the objective lens 202 on the reflection surface at low speed.
  • the autofocus method can be adopted as the autofocus method by the autofocus unit 206 and the focus control unit 207, and examples thereof include a laser interference method (phase difference method), an astigmatism method, and a pattern projection method.
  • the laser interference method is a method of performing autofocus based on a phase difference between incident light irradiated by an irradiation unit and reflected light.
  • the pattern projection method is a method of irradiating a pattern instead of a laser beam and performing auto-focusing based on a phase difference from the pattern from a reflection surface.
  • the counting unit 208 counts the reflection surface, and transmits the count value to the control PC 400.
  • the reflected light intensity determination unit 209 determines the presence or absence of the sample liquid 102 in the sample holding unit 101 based on the reflected light intensity at the peak of the reflected light intensity distribution.
  • the reflected light intensity is determined by the difference between the refractive indices of the two substances forming the interface. Since the reflectance increases as the difference in the refractive index increases, the intensity of the reflected light at the boundary surface (outer bottom surface 104) between the resin forming the sample container 100 and the air is higher than that of the resin forming the sample container 100 and the sample liquid. It becomes larger than the boundary surface with 102 (the inner bottom surface 103).
  • the reflected light intensity at the inner bottom surface 103 is equal to or higher than the reflected light intensity at the outer bottom surface 104 as shown by a dotted line in FIG.
  • the reflected light intensity at the inner bottom surface 103 is about half the reflected light intensity when the sample liquid 102 is not present.
  • the reflected light intensity determination unit 209 stores a threshold value of the reflected light intensity for determining that the sample liquid 102 does not exist in the sample holding unit 101 in advance, and stores the threshold value and the reflected light intensity at the inner bottom surface 103. The presence or absence of the sample liquid 102 may be determined by comparing. Since the refractive index changes when the material of the sample container 100 changes, the threshold value of the reflected light intensity when the sample liquid 102 does not exist may be changed depending on the material of the sample container 100.
  • the reflected light intensity determination unit 209 determines whether the position of the focal point 201 of the objective lens 202 is in the sample liquid 102 or in the resin on the bottom surface of the sample holding unit 101 based on the height of the baseline of the reflected light intensity distribution. And whether it is in the air. As shown in FIG. 4, the reflected light intensity varies depending on the position of the focal point 201. When the focal point 201 is in the air, the baseline of the reflected light intensity is the lowest, and when the focal point 201 is in the sample liquid 102, the baseline of the reflected light intensity is the highest.
  • the reflected light intensity determination unit 209 stores the range of the reflected light intensity for each position of the focal point 201 in advance, and can determine the position of the focal point 201 by referring to the range of the reflected light intensity.
  • the first range is the reflected light intensity when the focal point 201 is located in the sample liquid 102
  • the second range is the reflected light intensity when the focal point 201 is located in the resin on the bottom surface of the sample holding unit 101.
  • the reflected light intensity determination unit 209 determines the reflection surface indicating the reflected light intensity peak based on the height of the baseline immediately before the peak of the reflected light intensity distribution is detected and the driving direction of the objective lens actuator 203. It is determined whether it is a boundary between the inner bottom surface 103 of the sample holding unit 101 and the sample liquid 102 or a boundary between the outer bottom surface 104 of the sample holding unit 101 and the air.
  • the control PC 400 is connected to the autofocus unit 206, the focus control unit 207, the count unit 208, the reflected light intensity determination unit 209, the camera 204, and the XY stage 300, and controls these units.
  • a PLC control device or a control board may be used as the control PC 400.
  • the control PC 400 receives the count value from the count unit 208 and determines whether the reflection surface is the boundary surface (focus position) between the inner bottom surface 103 of the sample holding unit 101 and the sample liquid 102 based on the count value, It is determined whether it is a boundary surface between the outer bottom surface 104 of the portion 101 and the air.
  • the control PC 400 determines that the reflection surface is a boundary surface between the inner bottom surface 103 of the sample holding unit 101 and the sample liquid 102
  • the control PC 400 transmits an instruction for imaging the focus position to the camera 204.
  • the control PC 400 determines that the reflection surface is the boundary surface between the outer bottom surface 104 of the sample holding unit 101 and the air
  • the control PC 400 transmits an instruction to the objective lens actuator 203 to drive the objective lens 202.
  • the control PC 400 may include a display unit that displays an image formed on the camera 204, a GUI screen for inputting a user's instruction, a state of each component of the observation device 1, a result of various determinations, and the like. .
  • FIGS. 2A to 2E and FIG. 2A to 2E are schematic diagrams showing the operation of the observation device 1 according to the present embodiment.
  • FIG. 3 is a flowchart illustrating the observation method according to the present embodiment. 2A to 2E, the control PC 400 is not shown.
  • a method of continuously capturing the focus positions of the plurality of sample holding units 101 will be described.
  • the user places the sample container 100 on the XY stage 300 in advance, inputs an operation start instruction to the control PC 400, and starts the autofocus operation of the observation device 1.
  • the irradiation unit of the autofocus unit 206 starts irradiating light to the bottom surface of the first sample holding unit 101
  • the light detection unit of the autofocus unit 206 starts detection of reflected light.
  • the light detection unit transmits the detection signal to the focus control unit 207 as a reflected light intensity distribution.
  • FIG. 2A shows a state where the focal point 201 of the objective lens 202 is located below the outer bottom surface 104 of the sample holding unit 101.
  • the control PC 400 drives the objective lens actuator 203 downward to return the objective lens 202 to the lower end origin.
  • the user previously adjusts the position of the lower end origin such that the focal point 201 of the objective lens 202 is located below the outer bottom surface 104.
  • the count of the counting unit 208 is 0.
  • step S2 the control PC 400 drives the objective lens actuator 203 upward to scan the focal point 201 of the objective lens 202.
  • step S3 while driving the objective lens actuator 203, the control PC 400 determines whether it is within the drive range of the objective lens actuator 203 or has reached the upper limit of the drive range. When it is within the drive range of the objective lens actuator 203, the control PC 400 continues to drive the objective lens actuator 203. If the upper limit of the drive range of the objective lens actuator 203 has been reached, the process returns to step S1, and the control PC 400 drives the objective lens actuator 203 downward to return to the lower end origin.
  • step S4 while driving the objective lens actuator 203 upward, the focus control unit 207 determines the presence or absence of a reflected light intensity peak based on the reflected light intensity distribution received from the photodetector. If no peak of the reflected light intensity is detected, the process returns to step S2.
  • FIG. 2B shows a state where the focal point 201 of the objective lens 202 is aligned with the outer bottom surface 104 of the sample holding unit 101.
  • the focal point 201 of the objective lens 202 is aligned with the outer bottom surface 104 of the sample holder 101
  • the reflected light intensity shows a peak as shown in FIG.
  • the focus control unit 207 drives the objective lens actuator 203 to accurately focus on the outer bottom surface 104 in step S5. This is because the objective lens actuator 203 is driven even when it is detected that the reflected light intensity has peaked, so that the focal point 201 of the objective lens 202 has moved upward from the outer bottom surface 104. It is.
  • the counting unit 208 adds 1 to the count and transmits the count value to the control PC 400.
  • the outer bottom surface 104 is a reflection surface on which the focus 201 is focused only for the first time after the start of the autofocus operation, and thus the count becomes 1.
  • step S6 the control PC 400 determines from the count value whether the reflecting surface in focus 201 is the outer bottom surface 104 or the inner bottom surface 103. As shown in FIG. 2B, when the count is 1, the outer bottom surface 104 is in focus 201. In this case, the control PC 400 returns to step S2, drives the objective lens actuator 203 upward again, and scans the focal point 201 upward.
  • FIG. 2C shows a state where the focal point 201 of the objective lens 202 has been moved above the outer bottom surface 104 of the sample holding unit 101. After that, steps S3 and S4 are performed.
  • FIG. 2D shows a state where the focal point 201 of the objective lens 202 is aligned with the inner bottom surface 103 of the sample holding unit 101.
  • the focal point 201 of the objective lens 202 is aligned with the inner bottom surface 103 of the sample holding unit 101
  • the reflected light intensity shows a peak as shown in FIG.
  • the focus control unit 207 drives the objective lens actuator 203 to accurately focus on the inner bottom surface 103. This is because the focus 201 of the objective lens 202 has moved upward from the inner bottom surface 103 because the objective lens actuator 203 is driven even when it is detected that the reflected light intensity has peaked. It is.
  • the counting unit 208 After setting the focal point 201 to the inner bottom surface 103, the counting unit 208 adds 1 to the count and transmits the count value to the control PC 400.
  • the inner bottom surface 103 is a reflection surface on which the focus 201 is focused for the second time after the start of the autofocus operation, and thus the count is 2.
  • step S6 the control PC 400 determines whether the reflection surface in focus 201 is the outer bottom surface 104 or the inner bottom surface 103 based on the count value.
  • the control PC 400 transmits an instruction to the reflected light intensity determination unit 209, and the reflected light intensity determination unit 209 determines the presence or absence of the sample liquid 102 in the sample holding unit 101 from the reflected light intensity on the inner bottom surface 103. .
  • the reflected light intensity determination unit 209 stores a threshold value of the reflected light intensity for determining that the sample liquid 102 does not exist in the sample holding unit 101 in advance, and stores the threshold value and the reflected light intensity at the inner bottom surface 103. Are compared, the presence or absence of the sample liquid 102 is determined.
  • the control PC 400 transmits an instruction to the camera 204, and the camera 204 captures a microscope image at the focus position.
  • the control PC 400 transmits an instruction to the adjusting mechanism, and finely adjusts the position of the camera 204 or the imaging lens 205 so that an image above the focal point 201 of the objective lens 202 is formed on the camera 204.
  • the reflected light intensity determination unit 209 transmits the result to the control PC 400 in step S9. At this time, the control PC 400 may display on the display unit that there is no sample liquid 102 as a warning.
  • step S10 the control PC 400 determines whether or not the sample holding unit 101 that has observed is the last sample holding unit 101. By storing the number of sample holding units 101 in the control PC 400 in advance, it may be determined whether the sample holding unit 101 is the last sample holding unit 101 or not. When the sample holding unit 101 that has performed the observation is the last sample holding unit 101 (Yes), the control PC 400 ends the observation.
  • step S11 the control PC 400 drives the XY stage 300 to move the next sample holding unit 101 to above the objective lens 202. Move.
  • step S12 the control PC 400 drives the objective lens actuator 203 downward to move the focal point 201 downward by a predetermined distance.
  • the distance for moving the focal point 201 is smaller than the thickness of the bottom surface of the sample holding unit 101.
  • the thickness of the bottom surface of the sample holding unit 101 and the distance for driving the objective lens actuator 203 downward in step S12 are stored in the control PC 400 in advance.
  • step S4 when the peak of the reflected light intensity is detected, in step S5, the focus control unit 207 drives the objective lens actuator 203 to accurately focus on the reflecting surface.
  • step S12 since the focal point 201 was moved downward by a distance smaller than the thickness of the bottom surface of the sample holding unit 101, as shown in FIG. is there. Therefore, in observation of the second and subsequent sample holding units 101, the counting unit 208 does not perform counting. Therefore, the count value remains at 2.
  • the control PC 400 determines in step S6 that the focus 201 is on the inner bottom surface 103 because the count is 2, and performs the steps from step S7 onward in the same manner as described above. As described above, steps S2 to S12 (FIGS. 2C and 2D) are repeated for all the second and subsequent sample holding units 101, and the observation is completed.
  • FIG. 2E shows a state where the focal point 201 of the objective lens 202 is located above the inner bottom surface 103 of the sample holding unit 101.
  • the position of the focal point 201 may be below the outer bottom surface 104 of the sample holding unit 101. Therefore, after step S11 and step S12, the reflected light intensity determination unit 209 preferably determines the position of the focal point 201 based on the height of the baseline of the reflected light intensity distribution.
  • control PC 400 When the position of the focal point 201 is below the outer bottom surface 104 of the sample holding unit 101, the control PC 400 resets the count of the counting unit 208 and performs steps S2 to S10 in the same manner as the first sample holding unit 101. Perform and observe.
  • the control PC 400 drives the objective lens actuator 203 to the upper end of the driving range, and from the reflected light intensity distribution, determines that there is no reflecting surface. Confirm. Thereafter, the control PC 400 resets the count of the counting unit 208, returns to step S1, returns the objective lens actuator 203 to the lower end origin, and performs steps S2 to S10 in the same manner as the first sample holding unit 101. , Make observations.
  • the reflection surface is counted by the counting unit 208 only in the first sample holding unit 101 has been described, but every time the observation of one sample holding unit 101 ends.
  • a method of resetting the count and counting the reflection surface in observation of all the sample holding units 101 can be adopted.
  • the states shown in FIGS. 2C and 2D are repeated, and when the count is 1, the control PC 400 determines that the focus 201 is on the inner bottom surface 103. judge.
  • the focal point 201 of the objective lens 202 is scanned upward from below the outer bottom surface 104 of the sample holding unit 101, but a configuration in which scanning is performed from above the inner bottom surface 103 is adopted.
  • the autofocus operation can be started from the state shown in FIG. 2E.
  • the reflection surface on which the peak of the reflected light intensity is first detected after the start of the autofocus operation is the inner bottom surface 103 as shown in FIG. 2C. Therefore, when the count by the counting unit 208 is 1, the control PC 400 determines that the focal point 201 is in focus on the inner bottom surface 103, and causes the camera 204 to image the focus position.
  • the reflection surface on which the peak of the reflected light intensity is detected is counted, and the focal point 201 of the objective lens 202 is shifted to the inner bottom surface 103 (focus position) by the count value. Is adopted to determine whether or not it is suitable. As a result, autofocus to the focus position can be uniquely performed with high accuracy.
  • the present embodiment has a configuration in which the presence or absence of the sample liquid 102 in the sample holding unit 101 is determined, so that an erroneous test result output due to a human error can be prevented.
  • FIGS. 5A to 5D are schematic views showing the operation of the observation device 1 according to the second embodiment. 5A to 5D, illustration of the control PC 400 is omitted.
  • FIG. 6 is a flowchart illustrating the observation method according to the present embodiment.
  • FIG. 7 is a graph showing an example of the reflected light intensity distribution when the focal point 201 of the objective lens 202 is continuously scanned downward from within the sample liquid 102.
  • the counting by the counting unit 208 is not performed, the reflected light intensity determination unit 209 determines the position of the focal point 201 to perform autofocus, and the focal point 201 of the objective lens 202 is sampled.
  • the second embodiment is different from the first embodiment in that scanning is performed from above the inside bottom surface 103 of the holding unit 101 to below.
  • the user places the sample container 100 on the XY stage 300 in advance, inputs an operation start instruction to the control PC 400, and starts the autofocus operation of the observation device 1.
  • the irradiation unit of the autofocus unit 206 starts irradiating light to the bottom surface of the first sample holding unit 101
  • the light detection unit of the autofocus unit 206 starts detection of reflected light.
  • the light detection unit transmits the detected reflected light to the focus control unit 207 and the reflected light intensity determination unit 209 as a reflected light intensity distribution.
  • FIG. 5A shows a state where the focal point 201 of the objective lens 202 is located above the inner bottom surface 103 of the sample holding unit 101.
  • the control PC 400 drives the objective lens actuator 203 upward to return the objective lens 202 to the upper end origin.
  • the user previously adjusts the position of the upper end origin such that the focal point 201 of the objective lens 202 is located above the inner bottom surface 103.
  • step S22 the control PC 400 drives the objective lens actuator 203 downward to scan the focal point 201 of the objective lens 202.
  • step S23 based on the reflected light intensity distribution received from the light detection unit of the autofocus unit 206, the reflected light intensity determination unit 209 sets the focal point 201 of the objective lens 202 in the sample liquid 102, on the bottom surface of the sample holding unit 101, It is determined whether the resin is located in the resin or in the air. As shown in FIG. 7, the reflected light intensity varies depending on the position of the focal point 201. When the focal point 201 is in the air, the baseline of the reflected light intensity is the lowest, and when the focal point 201 is in the sample liquid 102, the baseline of the reflected light intensity is the highest.
  • the reflected light intensity determination unit 209 stores the range of the reflected light intensity for each position of the focal point 201 in advance, and determines the position of the focal point 201 by referring to the range of the reflected light intensity. As shown in FIG. 7, immediately after the start of the autofocus operation, the focal point 201 is located in the sample liquid 102, and therefore, the baseline of the reflected light intensity is the highest.
  • the reflected light intensity determination unit 209 transmits the determined position of the focal point 201 to the control PC 400.
  • the position of the focal point 201 of the objective lens 202 may be determined by the control PC 400 from an image acquired by the camera 204.
  • step S24 the control PC 400 determines the driving direction of the objective lens actuator 203 based on the position of the focal point 201 determined by the reflected light intensity determination unit 209 or the image obtained by the camera 204.
  • the control PC 400 continues to drive the objective lens actuator 203 downward.
  • the control PC 400 switches the driving direction of the objective lens actuator 203 and drives it upward.
  • step S25 while driving the objective lens actuator 203, the control PC 400 determines whether it is within the drive range of the objective lens actuator 203 or has reached the lower limit of the drive range. When it is within the drive range of the objective lens actuator 203, the control PC 400 continues to drive the objective lens actuator 203. When the lower limit of the drive range of the objective lens actuator 203 has been reached, the process returns to step S22, and the control PC 400 drives the objective lens actuator 203 upward to return to the upper end origin, and then drives downward.
  • step S26 the focus control unit 207 determines the presence or absence of a reflected light intensity peak while driving the objective lens actuator 203, based on the reflected light intensity distribution received from the photodetector. If no peak of the reflected light intensity is detected, the process returns to step S23.
  • the reflected light intensity determination unit 209 determines the position of the focal point 201 from the height of the baseline immediately before the peak is detected, based on the reflected light intensity distribution, It is determined whether the detected peak is due to the inner bottom surface 103 or the outer bottom surface 104. When it is determined from the height of the baseline immediately before the peak that the focal point 201 is located in the sample liquid 102, the detected peak is determined to be due to the inner bottom surface 103 because the objective lens actuator 203 is driven downward. I do.
  • the detected peak is shifted to the inner bottom surface because the objective lens actuator 203 is driven upward. 103 is determined.
  • the detected peak is determined to be due to the outer bottom surface 104 because the objective lens actuator 203 is driving upward. If it is determined that the detected peak is due to the outer bottom surface 104, the process returns to step S23.
  • the focus control unit 207 drives the objective lens actuator 203 to accurately focus on the inner bottom surface 103 in step S27. This is because the objective lens actuator 203 is driven even when it is detected that the reflected light intensity has peaked, so that the focal point 201 of the objective lens 202 has moved below the inner bottom surface 103. It is.
  • FIG. 5B shows a state where the focus 201 of the objective lens 202 is focused on the inner bottom surface 103 of the sample holding unit 101.
  • the focus control unit 207 transmits an instruction to the reflected light intensity determination unit 209.
  • the reflected light intensity determination unit 209 determines the presence or absence of the sample liquid 102 in the sample holding unit 101 from the reflected light intensity on the inner bottom surface 103.
  • the reflected light intensity determination unit 209 stores a threshold value of the reflected light intensity for determining that the sample liquid 102 does not exist in the sample holding unit 101 in advance, and stores the threshold value and the reflected light intensity at the inner bottom surface 103. Are compared, the presence or absence of the sample liquid 102 is determined.
  • the reflected light intensity determination unit 209 transmits the result to the control PC 400.
  • the control PC 400 transmits an instruction to the camera 204, and the camera 204 captures a microscope image at the focus position.
  • the control PC 400 transmits an instruction to the adjusting mechanism, and finely adjusts the position of the camera 204 or the imaging lens 205 so that an image above the focal point 201 of the objective lens 202 is formed on the camera 204.
  • the reflected light intensity determination unit 209 transmits the result to the control PC 400 in step S30.
  • the control PC 400 may display a warning that there is no sample liquid 102 on the display unit.
  • step S31 the control PC 400 determines whether or not the observed sample holding unit 101 is the last sample holding unit 101. By storing the number of sample holding units 101 in the control PC 400 in advance, it may be determined whether or not the sample holding unit 101 is the last sample holding unit 101. When the sample holding unit 101 that has performed the observation is the last sample holding unit 101 (Yes), the control PC 400 ends the observation.
  • step S32 the control PC 400 drives the XY stage 300 to move the next sample holding unit 101 above the objective lens 202. Moving.
  • step S33 the control PC 400 drives the objective lens actuator 203 upward to move the focal point 201 upward by a predetermined distance.
  • the distance for moving the focal point 201 is smaller than the height of the sample liquid 102.
  • the height of the sample liquid 102 and the distance for driving the objective lens actuator 203 upward in step S33 are stored in the control PC 400 in advance. Thereby, as shown in FIG. 5A, when starting the autofocus of the second and subsequent sample holding units 101, the focal point 201 is located in the sample liquid 102.
  • the second and subsequent sample holding units 101 also perform steps S23 to S33 in the same manner as described above.
  • FIG. 5C shows a state where the focal point 201 of the objective lens 202 is located in the resin on the bottom surface of the sample holding unit 101.
  • FIG. 5D shows a state where the focal point 201 of the objective lens 202 is located below the outer bottom surface 104 of the sample holding unit 101.
  • step S32 and step S33 even when the focal point 201 is not located in the sample liquid 102, the process returns to step S23.
  • observation method in the present embodiment can be implemented in combination with the first embodiment.
  • steps S23 and S24 of the present embodiment may be performed between steps S3 and S4 of the first embodiment.
  • the drive direction of the objective lens actuator 203 is determined by determining the position of the focal point 201 of the objective lens 202 from the reflected light intensity distribution, and the inner bottom surface 103 (focus The focus 201 is adjusted to the position (position).
  • the present embodiment has a configuration in which the presence or absence of the sample liquid 102 in the sample holding unit 101 is determined, so that an erroneous test result output due to a human error can be prevented.
  • REFERENCE SIGNS LIST 100 sample container 101 sample holding unit 102 sample liquid 103 inner bottom surface 104 outer bottom surface 200 imaging unit 201 focal point 202 objective lens 203 objective lens actuator 204 camera 205 imaging lens 206 autofocus unit 207 focus control unit 208 counting unit 209 reflected light intensity determination unit 300 XY stage 400 control PC

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Optics & Photonics (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Microscoopes, Condenser (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

サンプル容器内のフォーカス位置の画像を撮像する観察装置において、サンプル容器を保持する保持部と、フォーカス位置の画像を撮像する光学系と、光学系を制御する演算装置とを備える。光学系は、サンプル容器の下方に配置される対物レンズと、対物レンズアクチュエータと、サンプル容器の底面に光を照射する照射部と、反射光強度を検出する検出部と、反射光強度のピークを示す反射面に対物レンズの焦点を合わせるフォーカス制御部と、反射面のカウントを行うカウント部とを有する。フォーカス制御部は、反射光強度のピークが検出された場合、対物レンズアクチュエータを駆動して、反射面に焦点を合わせ、カウント部は、フォーカス制御部により反射面に焦点を合わせた場合、反射面のカウントを行い、演算装置は、カウントの値に基づいて、焦点がフォーカス位置に合っているか否かを判定し、焦点がフォーカス位置に合っている場合に光学系に撮像を行わせる。

Description

観察装置
 本発明は、観察装置に関する。
 細胞などの顕微鏡画像を取得する場合、一般に細胞はサンプル液に懸濁され、サンプル液は透明なサンプル容器に収容される。このため、対物レンズがサンプル容器の下方に配置される倒立顕微鏡が一般に用いられている。
 サンプル液中の細胞などを高感度に観察する方法として、画像イメージング法が知られている。画像イメージング法による観察は、例えば、光学顕微鏡、蛍光顕微鏡、コヒーレントアンチストークスラマン散乱(CARS)顕微鏡、3次元光干渉断層計(OCT)を用いて行われる。
 従来、画像イメージング法を採用した観察装置において、高速かつ高精度なオートフォーカスを行うことが要求されている。オートフォーカス方式には、大きく分けて2つの方式がある。一つは、顕微鏡画像のコントラストからフォーカス位置を算出する画像方式であり、もう一つは、レーザーなどの光をサンプル容器に照射し、反射光からフォーカス位置を算出する光学方式である。
 画像方式のオートフォーカスにおいては、複数枚の顕微鏡画像を取得してコントラストが最大となる位置を算出し、オートフォーカスを行う。本方式は、高速にオートフォーカスを行うには、複数枚の顕微鏡画像のコントラストを高速に計算するプログラムやデバイスが必要となり、原理的にオートフォーカス速度を向上させることが困難であった。また、本方式は、コントラストが得られる観察対象が必要であり、極端に希薄な細胞を観察する場合、オートフォーカスを行うことができなかった。
 一方、光学方式のオートフォーカスにおいては、サンプル容器とサンプル液との境界面にレーザーなどの光を照射し、境界面からの反射光の位置や位相など、1又は数スカラー量の情報からオートフォーカスを行う。従って、例えば数十万ピクセルの画像を取得する場合は、画像方式と比較して数十万分の一の計算量となり、高速なオートフォーカスを実施できる。
 倒立顕微鏡に搭載される光学方式のオートフォーカスにおいて、サンプル容器底面に照射される光の反射光は、サンプル容器の内側底面とサンプル液との境界面からの反射光、あるいはサンプル容器の外側底面と空気との境界面からの反射光の2つが存在する。そのため、オートフォーカス位置の検出範囲を限定し、サンプル容器の内側底面とサンプル液との境界面からの反射光のみを検出する方法が採用されていた。しかし、サンプル容器が樹脂形成品の場合、形成誤差が大きく、オートフォーカス位置の検出範囲を広く取る必要があり、サンプル容器の外側底面と空気との境界面からの反射光を完全に除外することはできなかった。
 このような課題を解決する方法として、例えば特許文献1には、サンプル容器の外側底面に反射防止膜を付け、サンプル容器の外側底面と空気との境界面からの反射光を除外する方法が開示されている。
 また、特許文献2には、サンプル容器の内側底面とサンプル液との境界面からの反射光と、サンプル容器の外側底面と空気との境界面からの反射光とを検出し、それぞれのピーク位置に基づいて、サンプル容器の内側底面とサンプル液との境界面の位置を算出し、オートフォーカスを行う方法が開示されている。
特開2008-267842号公報 特表2017-187436号公報
 しかしながら、特許文献1のように反射防止膜をサンプル容器に取り付けるには、取り付ける面が平滑であることが重要であるものの、樹脂形成品であるサンプル容器の底面は、湾曲していたり、傷が存在したりすることがある。これにより、反射防止膜を設けたとしてもオートフォーカス精度が十分に得られないという課題がある。
 また、特許文献2の方式においては、サンプル容器の底面の厚さ及び形成誤差をも含むように、オートフォーカス位置の検出範囲を広く設定する必要があり、オートフォーカスの精度が十分に得られないという課題がある。
 そこで、本発明は、フォーカス位置へ一意的に高精度のオートフォーカスを実施する観察装置を提供する。
 上記の課題を解決するため、本発明に係る観察装置の第1の態様は、サンプル液が収容されるサンプル容器内のフォーカス位置の画像を撮像する観察装置において、前記サンプル容器を保持する保持部と、前記フォーカス位置の画像を撮像する光学系と、前記光学系を制御する演算装置と、を備え、前記光学系は、前記サンプル容器の下方に配置される対物レンズと、前記対物レンズを光軸方向に駆動させる対物レンズアクチュエータと、前記サンプル容器の底面に光を照射する照射部と、前記光の反射光の反射光強度を検出する検出部と、前記反射光強度がピークを示す反射面に前記対物レンズの焦点を合わせるフォーカス制御部と、前記反射面のカウントを行うカウント部と、を有し、前記フォーカス制御部は、前記反射光強度のピークが検出された場合、前記対物レンズアクチュエータを駆動して、前記反射面に前記焦点を合わせ、前記カウント部は、前記フォーカス制御部により前記反射面に前記焦点を合わせた場合、前記反射面のカウントを行い、前記演算装置は、前記カウントの値に基づいて、前記焦点が前記フォーカス位置に合っているか否かを判定し、前記焦点が前記フォーカス位置に合っている場合に前記光学系に撮像を行わせ、前記焦点が前記フォーカス位置に合っていない場合に、前記対物レンズアクチュエータを駆動することを特徴とする。
 また、本発明に係る観察装置の第2の態様は、サンプル液が収容されるサンプル容器内のフォーカス位置の画像を撮像する観察装置において、前記サンプル容器を保持する保持部と、前記フォーカス位置の画像を撮像する光学系と、前記光学系を制御する演算装置と、を備え、前記光学系は、前記サンプル容器の下方に配置される対物レンズと、前記対物レンズを光軸方向に走査させる対物レンズアクチュエータと、前記サンプル容器の底面に光を照射する照射部と、前記光の反射光の反射光強度を検出する検出部と、前記反射光強度のピークを示す反射面に前記対物レンズの焦点を合わせるフォーカス制御部と、前記反射光の強度分布に基づいて、前記焦点の位置を判定する反射光強度判定部と、を有し、前記フォーカス制御部は、前記反射光強度のピークが検出された場合、前記対物レンズアクチュエータを駆動して、前記反射面に前記焦点を合わせ、前記反射光強度判定部は、前記反射光の強度分布に基づいて、前記焦点が前記フォーカス位置に合っているか否かを判定し、前記演算装置は、前記焦点が前記フォーカス位置に合っている場合に前記光学系に撮像を行わせ、前記焦点が前記フォーカス位置に合っていない場合に、前記対物レンズアクチュエータを駆動することを特徴とする。
 本発明によれば、フォーカス位置へ一意的に高精度のオートフォーカスを実施できる。
 本発明に関連する更なる特徴は、本明細書の記述、添付図面から明らかになるものである。また、上記した以外の課題、構成及び効果は、以下の実施例の説明により明らかにされる。
第1の実施形態に係る観察装置1の構成を示す概略斜視図。 第1の実施形態に係る観察装置1の動作を示す概略図。 第1の実施形態に係る観察装置1の動作を示す概略図。 第1の実施形態に係る観察装置1の動作を示す概略図。 第1の実施形態に係る観察装置1の動作を示す概略図。 第1の実施形態に係る観察装置1の動作を示す概略図。 第1の実施形態に係る観察方法を示すフローチャート。 対物レンズ202の焦点201をサンプル保持部101の下方から上方へ走査した場合の反射光強度分布の一例を示すグラフ。 第2の実施形態に係る観察装置1の動作を示す概略図。 第2の実施形態に係る観察装置1の動作を示す概略図。 第2の実施形態に係る観察装置1の動作を示す概略図。 第2の実施形態に係る観察装置1の動作を示す概略図。 第2の実施形態に係る観察方法を示すフローチャート。 対物レンズ202の焦点201をサンプル液102中から下方へ走査し続けた場合の反射光強度分布の一例を示すグラフ。
 以下、図面を参照して本発明の実施形態について説明する。なお、図面は本発明の原理に則った具体的な実施形態を示しているが、これらは本発明の理解のためのものであり、決して本発明を限定的に解釈するために用いられるものではない。
 本発明の実施形態は、細胞や微粒子を含むサンプル液を収容するサンプル容器内のフォーカス位置の顕微鏡画像をオートフォーカスによって自動的に撮像する観察装置及び観察方法に関する。本明細書において「フォーカス位置」とは、サンプル容器内において観察がなされる位置であり、サンプル容器の内側底面からその上部20μmまでの領域をいう。また、「オートフォーカス」とは、対物レンズの焦点を自動的にフォーカス位置に合わせる処理をいう。
 本明細書において、各構成要素の「接続」とは、必ずしも物理的に配線等で接続されている必要はなく、無線による接続も含まれる。
 以下の説明においては、XYZ直交座標系を設定する。水平面内の所定方向をX方向、水平面内においてX方向と直交する方向をY方向、X方向及びY方向のそれぞれに直交する方向(すなわち鉛直方向)をZ方向とする。Z方向は、対物レンズの光軸方向と平行である。
 [第1の実施形態]
 (1)観察装置
 第1の実施形態に係る観察装置を図1に沿って説明する。図1は、第1の実施形態に係る観察装置1の構成を示す概略斜視図である。図1に示すように、観察装置1は、撮像ユニット200(光学系)、XYステージ300(保持部)、制御PC400(演算装置)を備える。
 XYステージ300は、サンプル容器100を保持する。サンプル容器100は、細胞や微粒子などの観察対象を含むサンプル液102が収容されるサンプル保持部101を複数有する容器である。サンプル容器100として、図1に示すように、サンプル保持部101を96個有する96ウェルマイクロタイタープレートや、384ウェルプレート、1536ウェルプレートなどを用いることができる。
 XYステージ300は、撮像ユニット200の対物レンズ202の光軸方向(Z方向)と直角となる平面(XY平面)においてサンプル容器100を駆動可能に構成される。なお、XYステージ300によりサンプル容器100を駆動させる代わりに、撮像ユニット200をXY平面に駆動させる構成とすることもできる。すなわち、サンプル容器100及び撮像ユニット200は、XY平面において相対的に移動するよう構成される。
 撮像ユニット200は、倒立顕微鏡の光学系であり、サンプル容器100の下方に配置される対物レンズ202、対物レンズアクチュエータ203、カメラ204、結像レンズ205、オートフォーカスユニット206、フォーカス制御部207、カウント部208、反射光強度判定部209を備える。
 対物レンズアクチュエータ203は、フォーカス制御部207又は制御PC400からの指示に従い、対物レンズ202を光軸方向に駆動する。なお、観察装置1において、XYステージ300を設ける代わりに、サンプル容器100の位置を固定して、対物レンズアクチュエータ203が三軸方向(XYZ方向)に駆動する構成とすることもできる。
 結像レンズ205は、対物レンズ202を介して入射した像をカメラ204に結像する。
 カメラ204は、結像レンズ205によりカメラ204のセンサ部に結像された像を電気信号に変換し、顕微鏡画像として撮像する。
 図示は省略しているが、撮像ユニット200は、カメラ204に結像する面をフォーカス位置内の任意の位置に微調節するため、結像レンズ205又はカメラ204を駆動する調節機構を備える。調節機構は、例えば制御PC400又はフォーカス制御部207に接続されるアクチュエータとすることができる。調節機構は、例えば、対物レンズ202の焦点201を内側底面103に合わせた後、内側底面103より上方をカメラ204に結像するように、結像レンズ205又はカメラ204を駆動する。
 オートフォーカスユニット206は、図示は省略しているが、レーザー等の光をサンプル保持部101の底面に照射する照射部と、サンプル保持部101からの反射光を検出する光検出器とを備え、オートフォーカスを行なうための信号を取得する。
 照射部は、対物レンズ202の光軸方向に平行に、対物レンズ202を通してサンプル保持部101の底面に光を照射する。なお、対物レンズ202を通さずに、サンプル保持部101の底面に対し、光軸方向に対し斜め方向から光を照射する構成としてもよい。
 光検出器は、対物レンズアクチュエータ203の駆動中に反射光を検出し続ける。光検出器は、例えばフォトダイオード等のセンサである。光検出器は、反射光の検出信号を増幅する増幅器を備えていてもよい。光検出部は、検出信号を反射光強度分布としてフォーカス制御部207及び反射光強度判定部209へ送信する。
 光検出器により検出される反射光の強度分布は、図4に例示される。図4は、対物レンズ202の焦点201をサンプル保持部101の下方から上方へ走査した場合の反射光強度分布の一例を示すグラフである。図4に示すように、反射光強度は、対物レンズ202の焦点201がサンプル保持部101の反射面に合った場合、すなわち、サンプル保持部101の内側底面103とサンプル液102との境界面、あるいはサンプル保持部101の外側底面104と空気との境界面に焦点201が合った場合に、ピークを示す。
 フォーカス制御部207は、オートフォーカスユニット206から反射光強度分布を受信し、反射光強度のピークが頂点となる反射面に焦点201が合っているかを判定し、反射面に正確に焦点201を合わせるように、対物レンズアクチュエータ203を駆動させる。フォーカス制御部207は、反射光強度のピークが検出されたら、対物レンズアクチュエータ203の駆動方向を切り替え、低速で対物レンズ202の焦点201を反射面に正確に合わせる。
 なお、オートフォーカスユニット206及びフォーカス制御部207によるオートフォーカス方式として、他の方式を採用することもでき、例えば、レーザー干渉法(位相差法)、非点収差法、パターン投影法などが挙げられる。レーザー干渉法は、照射部が照射した入射光と、その反射光との位相差に基づいてオートフォーカスを行う方式である。パターン投影法は、レーザー光の代わりにパターンを照射し、反射面からのパターンとの位相差に基づいてオートフォーカスを行う方式である。
 カウント部208は、フォーカス制御部207により対物レンズ202の焦点201を反射面に合わせたら、反射面のカウントを行い、カウントの値を制御PC400へ送信する。
 反射光強度判定部209は、反射光強度分布のピークにおける反射光強度に基づいて、サンプル保持部101内のサンプル液102の有無を判定する。反射光強度は、境界面を形成する2つの物質の屈折率の差によって決定される。屈折率の差が大きいほど反射率は大きくなるため、サンプル容器100を形成する樹脂と空気との境界面(外側底面104)における反射光強度の方が、サンプル容器100を形成する樹脂とサンプル液102との境界面(内側底面103)よりも大きくなる。従って、サンプル液102が存在しない場合、図4において点線で示すように、内側底面103における反射光強度は、外側底面104における反射光強度と同程度あるいはそれ以上となる。サンプル液102が存在する場合、図4において実線で示すように、内側底面103における反射光強度は、サンプル液102が存在しない場合の反射光強度の半分程度となる。反射光強度判定部209は、予め、サンプル保持部101内にサンプル液102が存在しないと判定するための反射光強度の閾値を記憶しておき、該閾値と、内側底面103における反射光強度とを比較することにより、サンプル液102の有無を判定してもよい。なお、サンプル容器100の材質が変わると、屈折率が変わるため、サンプル容器100の材質によって、サンプル液102が存在しない場合の反射光強度の閾値を変更してもよい。
 また、反射光強度判定部209は、反射光強度分布のベースラインの高さから、対物レンズ202の焦点201の位置が、サンプル液102中であるか、サンプル保持部101の底面の樹脂中であるか、空気中のいずれであるかを判定する。図4に示すように、焦点201の位置によって、反射光強度が異なる。焦点201が空気中にある場合、反射光強度のベースラインは最も低く、焦点201がサンプル液102中にある場合、反射光強度のベースラインは最も高くなる。反射光強度判定部209は、予め焦点201の位置ごとの反射光強度の範囲を記憶しておき、反射光強度の範囲を参照することにより、焦点201の位置を判定することができる。例えば、焦点201がサンプル液102中に位置する場合の反射光強度を第1の範囲とし、焦点201がサンプル保持部101の底面の樹脂中に位置する場合の反射光強度を第2の範囲とし、焦点201が空気中に位置する場合の反射光強度を第3の範囲と設定しておき、検出された反射光の強度が第1の範囲にある場合、焦点201はサンプル液102中に位置すると判断する。
 さらに、反射光強度判定部209は、反射光強度分布のピークが検出される直前のベースラインの高さと、対物レンズアクチュエータ203の駆動方向とに基づいて、反射光強度のピークを示す反射面がサンプル保持部101の内側底面103とサンプル液102との境界面であるか、サンプル保持部101の外側底面104と空気との境界面であるかを判定する。
 制御PC400は、オートフォーカスユニット206、フォーカス制御部207、カウント部208、反射光強度判定部209、カメラ204、XYステージ300に接続され、これらを制御する。制御PC400として、PLC制御装置や制御基板などを用いても良い。
 制御PC400は、カウント部208からカウントの値を受信して、カウントの値から、反射面がサンプル保持部101の内側底面103とサンプル液102との境界面(フォーカス位置)であるか、サンプル保持部101の外側底面104と空気との境界面であるかを判定する。制御PC400は、反射面がサンプル保持部101の内側底面103とサンプル液102との境界面であると判定した場合は、フォーカス位置の撮像を行うための指示をカメラ204に送信する。制御PC400は、反射面がサンプル保持部101の外側底面104と空気との境界面であると判定した場合は、対物レンズアクチュエータ203に指示を送信して、対物レンズ202を駆動する。
 制御PC400は、カメラ204に結像された像や、ユーザーによる指示を入力するためのGUI画面、観察装置1の各構成の状態、各種判定の結果等を表示する表示部を備えていてもよい。
 (2)観察方法
 次に、第1の実施形態に係る観察方法について、図2A~2E及び図3に沿って説明する。図2A~2Eは、本実施形態に係る観察装置1の動作を示す概略図である。図3は、本実施形態に係る観察方法を示すフローチャートである。なお、図2A~2Eにおいて、制御PC400の図示を省略している。以下において、複数のサンプル保持部101のフォーカス位置を連続で撮像する方法を説明する。
 予め、ユーザーは、サンプル容器100をXYステージ300に設置し、制御PC400へ動作開始の指示を入力して、観察装置1のオートフォーカス動作をスタートさせる。ここで、オートフォーカスユニット206の照射部は、1つ目のサンプル保持部101の底面へ光の照射を開始し、オートフォーカスユニット206の光検出部は、反射光の検出を開始する。光検出部は、検出信号を反射光強度分布としてフォーカス制御部207へ送信する。
 図2Aは、サンプル保持部101の外側底面104の下方に対物レンズ202の焦点201が位置する状態を示している。まず、ステップS1において、制御PC400は、対物レンズアクチュエータ203を下方へ駆動させ、対物レンズ202を下端原点へ復帰させる。図2Aに示すように、ユーザーは、予め、対物レンズ202の焦点201が外側底面104よりも下に位置するように下端原点の位置を調整しておく。なお、このとき、カウント部208のカウントは0である。
 ステップS2において、制御PC400は、対物レンズアクチュエータ203を上方へ駆動して、対物レンズ202の焦点201を走査する。
 ステップS3において、制御PC400は、対物レンズアクチュエータ203を駆動している間、対物レンズアクチュエータ203の駆動範囲内であるか、駆動範囲の上限に達したかを判定する。対物レンズアクチュエータ203の駆動範囲内である場合には、制御PC400は、対物レンズアクチュエータ203の駆動を続行する。対物レンズアクチュエータ203の駆動範囲の上限に達した場合は、ステップS1に戻り、制御PC400は、対物レンズアクチュエータ203を下方へ駆動して下端原点へ復帰させる。
 ステップS4において、フォーカス制御部207は、対物レンズアクチュエータ203を上方へ駆動している間、光検出器から受信した反射光強度分布に基づいて、反射光強度のピークの有無を判定する。反射光強度のピークが検出されない場合、ステップS2へ戻る。
 図2Bは、対物レンズ202の焦点201がサンプル保持部101の外側底面104に合った状態を示している。対物レンズ202の焦点201が、サンプル保持部101の外側底面104に合った場合、図4に示すように、反射光強度がピークを示す。ステップS4において、反射光強度のピークが検出された場合、ステップS5において、フォーカス制御部207は、対物レンズアクチュエータ203を駆動して、外側底面104に正確に焦点201を合わせる。これは、反射光強度がピークとなったことを検出した際にも対物レンズアクチュエータ203は駆動しているため、対物レンズ202の焦点201は、外側底面104より上方へ移動してしまっているためである。
 フォーカス制御部207により焦点201を外側底面104に正確に合わせた後、カウント部208は、カウントに1を加算し、カウントの値を制御PC400へ送信する。図2Bに示すように、外側底面104は、オートフォーカス動作を開始してから初めて焦点201が合う反射面であるため、カウントは1となる。
 ステップS6において、制御PC400は、カウントの値から、焦点201が合っている反射面が外側底面104か内側底面103かを判定する。図2Bに示すように、カウントが1の場合、外側底面104に焦点201が合っている。この場合、制御PC400は、ステップS2に戻り、再び対物レンズアクチュエータ203を上方に駆動させ、焦点201を上方へ走査する。図2Cは、対物レンズ202の焦点201をサンプル保持部101の外側底面104の上方へ移動させた状態を示している。その後、ステップS3及びS4を行う。
 図2Dは、対物レンズ202の焦点201がサンプル保持部101の内側底面103に合った状態を示している。対物レンズ202の焦点201が、サンプル保持部101の内側底面103に合った場合、図4に示すように、反射光強度がピークを示す。このとき、ステップS5において、フォーカス制御部207は、対物レンズアクチュエータ203を駆動して、内側底面103に正確に焦点201を合わせる。これは、反射光強度がピークとなったことを検出した際にも対物レンズアクチュエータ203は駆動しているため、対物レンズ202の焦点201は、内側底面103より上方へ移動してしまっているためである。
 焦点201を内側底面103に合わせた後、カウント部208は、カウントに1を加算し、カウントの値を制御PC400へ送信する。図2Dに示すように、内側底面103は、オートフォーカス動作を開始してから2回目に焦点201が合う反射面であるため、カウントは2となる。
 ステップS6において、制御PC400は、カウントの値に基づいて、焦点201が合っている反射面が外側底面104か内側底面103かを判定する。
 カウントが2の場合、図2Dに示すように、内側底面103に焦点201が合っている。この場合、制御PC400は、反射光強度判定部209に指示を送信し、反射光強度判定部209は、内側底面103における反射光強度から、サンプル保持部101内のサンプル液102の有無を判定する。反射光強度判定部209は、予め、サンプル保持部101内にサンプル液102が存在しないと判定するための反射光強度の閾値を記憶しておき、該閾値と、内側底面103における反射光強度とを比較することにより、サンプル液102の有無を判定する。
 サンプル液102が存在する場合、反射光強度判定部209は、制御PC400に結果を送信する。その後、ステップS8において、制御PC400は、カメラ204に指示を送信し、カメラ204は、フォーカス位置の顕微鏡画像を撮像する。ここで、サンプル液102中の細胞に厚みがある場合、顕微鏡画像のピントが合わない可能性がある。従って、制御PC400は、調節機構に指示を送信し、対物レンズ202の焦点201より上方がカメラ204に結像されるように、カメラ204又は結像レンズ205の位置を微調整する。
 サンプル液102が存在しない場合、反射光強度判定部209は、ステップS9において、制御PC400に結果を送信する。このとき制御PC400は、サンプル液102が無いことを警告として表示部に表示してもよい。
 ステップS8又はS9の後、ステップS10において、制御PC400は、観察を行ったサンプル保持部101が最後のサンプル保持部101であるか否かを判定する。予め制御PC400にサンプル保持部101の数を記憶させておくことで、最後のサンプル保持部101であるか否かを判定するようにしてもよい。観察を行ったサンプル保持部101が最後のサンプル保持部101である場合(Yes)、制御PC400は、観察を終了する。
 観察を行ったサンプル保持部101が最後のサンプル保持部101でない場合(No)、ステップS11において、制御PC400は、XYステージ300を駆動して、次のサンプル保持部101を対物レンズ202の上方へ移動させる。
 ステップS12において、制御PC400は、対物レンズアクチュエータ203を下方に駆動して、焦点201を所定の距離だけ下方に移動させる。このとき焦点201を移動させる距離は、サンプル保持部101の底面の厚みより小さいことが好ましい。サンプル保持部101の底面の厚みや、ステップS12において対物レンズアクチュエータ203を下方へ駆動させる距離は、予め制御PC400に記憶させておく。これにより、図2Cに示すように、2つ目以降のサンプル保持部101のオートフォーカスを開始する際は、焦点201がサンプル保持部101の底面の樹脂中に位置する。
 その後、ステップS2に戻り、上記と同様にステップS2及びステップS3を行う。ステップS4において、フォーカス制御部207は、反射光強度のピークが検出された場合、ステップS5において、対物レンズアクチュエータ203を駆動して、反射面に正確に焦点201を合わせる。上述のステップS12において、サンプル保持部101の底面の厚みより小さい距離だけ焦点201を下方に移動させたため、図2Dに示すように、反射光強度のピークを示した反射面は、内側底面103である。従って、2つ目以降のサンプル保持部101の観察においては、カウント部208はカウントを行わない。よって、カウントの値は2のままである。
 制御PC400は、ステップS6において、カウントが2であるため、焦点201が内側底面103に合っていると判定し、ステップS7以降のステップを上記と同様に行う。以上のように、2つ目以降のサンプル保持部101すべてについて、ステップS2~S12(図2C及び2D)を繰り返し、観察を終了する。
 なお、サンプル保持部101の底面の厚さのばらつきが大きい場合、上述のステップS11及びステップS12において次のサンプル保持部101に移動し、焦点201を所定の距離だけ下方に移動させた際に、焦点201がサンプル保持部101の底面の樹脂中に位置しない場合がある。図2Eは、対物レンズ202の焦点201がサンプル保持部101の内側底面103の上方に位置する状態を示している。また、図2Aに示すように、焦点201の位置がサンプル保持部101の外側底面104の下方となる場合もある。従って、ステップS11及びステップS12の後に、反射光強度判定部209は、反射光強度分布のベースラインの高さに基づいて焦点201の位置を判定することが好ましい。
 焦点201の位置がサンプル保持部101の外側底面104の下方となった場合は、制御PC400は、カウント部208のカウントをリセットし、1つ目のサンプル保持部101と同様にステップS2~S10を実施して、観察を行う。
 焦点201の位置がサンプル保持部101の内側底面103の上方となった場合は、制御PC400は、対物レンズアクチュエータ203を駆動範囲の上端まで駆動し、反射光強度分布から、反射面が無いことを確認する。その後、制御PC400は、カウント部208のカウントをリセットしてステップS1に戻り、対物レンズアクチュエータ203を下端原点へ復帰させ、1つ目のサンプル保持部101と同様にステップS2~S10を実施して、観察を行う。
 以上のように、本実施形態における観察方法において、1つ目のサンプル保持部101のみにおいてカウント部208による反射面のカウントを行う例を説明したが、1つのサンプル保持部101の観察が終わるたびにカウントをリセットし、すべてのサンプル保持部101の観察において反射面をカウントする方法を採用することもできる。この場合、2つ目以降のサンプル保持部101においては、図2C及び図2Dに示す状態が繰り返されることとなり、制御PC400は、カウントが1の場合に焦点201が内側底面103に合っていると判定する。
 また、本実施形態における観察方法において、対物レンズ202の焦点201をサンプル保持部101の外側底面104の下方から上方へ走査させる例を説明したが、内側底面103の上方から走査する構成を採用することもできる。すなわち、図2Eに示す状態からオートフォーカス動作を開始することもできる。この場合、オートフォーカス動作を開始して最初に反射光強度のピークが検出される反射面は、図2Cに示すように、内側底面103となる。従って、制御PC400は、カウント部208によるカウントが1の場合に、焦点201が内側底面103に合っていると判定し、カメラ204にフォーカス位置の撮像を行わせる。
 (3)技術的効果
 以上のように、本実施形態は、反射光強度のピークが検出される反射面をカウントし、カウントの値により、対物レンズ202の焦点201が内側底面103(フォーカス位置)に合っているかを判定する構成を採用している。これにより、フォーカス位置へのオートフォーカスを一意的に高精度に行うことができる。また、本実施形態は、サンプル保持部101内のサンプル液102の有無を判定する構成を有することにより、人為的エラーによる誤った検査結果の出力を防止することができる。
 [第2の実施形態]
 (1)観察装置
 第2の実施形態に係る観察装置として、第1の実施形態に係る観察装置1と同様のものを使用することができるため、説明を省略する。
 (2)観察方法
 第2の実施形態に係る観察方法について、図5A~5D、図6及び図7に沿って説明する。図5A~5Dは、第2の実施形態に係る観察装置1の動作を示す概略図である。なお、図5A~5Dにおいて、制御PC400の図示を省略している。図6は、本実施形態に係る観察方法を示すフローチャートである。図7は、対物レンズ202の焦点201をサンプル液102中から下方へ走査し続けた場合の反射光強度分布の一例を示すグラフである。第2の実施形態に係る観察方法は、カウント部208によるカウントを行わず、反射光強度判定部209により焦点201の位置を判定してオートフォーカスを行う点、及び対物レンズ202の焦点201をサンプル保持部101の内側底面103の上方から下方へ走査する点で、第1の実施形態と異なる。
 予め、ユーザーは、サンプル容器100をXYステージ300に設置し、制御PC400へ動作開始の指示を入力して、観察装置1のオートフォーカス動作をスタートさせる。ここで、オートフォーカスユニット206の照射部は、1つ目のサンプル保持部101の底面へ光の照射を開始し、オートフォーカスユニット206の光検出部は、反射光の検出を開始する。光検出部は、検出した反射光を反射光強度分布としてフォーカス制御部207及び反射光強度判定部209へ送信する。
 図5Aは、サンプル保持部101の内側底面103の上方に対物レンズ202の焦点201が位置する状態を示している。まず、ステップS21において、制御PC400は、対物レンズアクチュエータ203を上方へ駆動させ、対物レンズ202を上端原点へ復帰させる。図5Aに示すように、ユーザーは、予め、対物レンズ202の焦点201が内側底面103よりも上に位置するように上端原点の位置を調整しておく。
 ステップS22において、制御PC400は、対物レンズアクチュエータ203を下方へ駆動して、対物レンズ202の焦点201を走査する。
 ステップS23において、反射光強度判定部209は、オートフォーカスユニット206の光検出部から受信した反射光強度分布に基づいて、対物レンズ202の焦点201がサンプル液102中、サンプル保持部101の底面の樹脂中、空気中のいずれに位置しているかを判定する。図7に示すように、焦点201の位置によって、反射光強度が異なる。焦点201が空気中にある場合、反射光強度のベースラインは最も低く、焦点201がサンプル液102中にある場合、反射光強度のベースラインは最も高くなる。反射光強度判定部209は、予め焦点201の位置ごとの反射光強度の範囲を記憶しておき、反射光強度の範囲を参照することにより、焦点201の位置を判定する。図7に示すように、オートフォーカス動作を開始した直後は、焦点201がサンプル液102中に位置するため、反射光強度のベースラインは最も高い。反射光強度判定部209は、判定した焦点201の位置を制御PC400へ送信する。なお、対物レンズ202の焦点201の位置は、カメラ204が取得する画像から、制御PC400が判定してもよい。
 ステップS24において、制御PC400は、反射光強度判定部209により、又はカメラ204により取得される画像により判定された焦点201の位置に基づいて、対物レンズアクチュエータ203の駆動方向を決定する。焦点201がサンプル液102中に位置する場合、制御PC400は、対物レンズアクチュエータ203を下方へ駆動させ続ける。焦点201がサンプル保持部101の底面の樹脂中又は空気中に位置する場合、制御PC400は、対物レンズアクチュエータ203の駆動方向を切り替え、上方へ駆動させる。
 ステップS25において、制御PC400は、対物レンズアクチュエータ203を駆動している間、対物レンズアクチュエータ203の駆動範囲内であるか、駆動範囲の下限に達したかを判定する。対物レンズアクチュエータ203の駆動範囲内である場合には、制御PC400は、対物レンズアクチュエータ203の駆動を続行する。対物レンズアクチュエータ203の駆動範囲の下限に達した場合は、ステップS22に戻り、制御PC400は、対物レンズアクチュエータ203を上方へ駆動して上端原点へ復帰させた後、下方へ駆動する。
 ステップS26において、フォーカス制御部207は、光検出器から受信した反射光強度分布に基づいて、対物レンズアクチュエータ203を駆動している間、反射光強度のピークの有無を判定する。反射光強度のピークが検出されない場合、ステップS23に戻る。
 反射光強度のピークが検出された場合、反射光強度判定部209は、反射光強度分布に基づいて、ピークが検出される直前のベースラインの高さから、焦点201の位置を判定して、検出されたピークが内側底面103によるものか、外側底面104によるものかを判定する。ピーク直前のベースラインの高さから、焦点201がサンプル液102中に位置すると判定される場合、対物レンズアクチュエータ203は下方へ駆動しているため、検出されたピークは内側底面103によるものと判定する。ピーク直前のベースラインの高さから、焦点201がサンプル保持部101の底面の樹脂中に位置すると判定される場合、対物レンズアクチュエータ203は上方へ駆動しているため、検出されたピークは内側底面103によるものと判定する。ピーク直前のベースラインの高さから、焦点201が空気中に位置すると判定される場合、対物レンズアクチュエータ203は上方へ駆動しているため、検出されたピークは外側底面104によるものと判定する。検出されたピークが外側底面104によるものであると判定した場合、ステップS23に戻る。
 内側底面103による反射光強度のピークが検出された場合、ステップS27において、フォーカス制御部207は、対物レンズアクチュエータ203を駆動して、内側底面103に正確に焦点201を合わせる。これは、反射光強度がピークとなったことを検出した際にも対物レンズアクチュエータ203は駆動しているため、対物レンズ202の焦点201は、内側底面103より下方へ移動してしまっているためである。図5Bは、サンプル保持部101の内側底面103の上方に対物レンズ202の焦点201が合った状態を示している。
 焦点201を内側底面103に合わせた後、ステップS28において、フォーカス制御部207は、反射光強度判定部209に指示を送信する。このとき、反射光強度判定部209は、内側底面103における反射光強度から、サンプル保持部101内のサンプル液102の有無を判定する。反射光強度判定部209は、予め、サンプル保持部101内にサンプル液102が存在しないと判定するための反射光強度の閾値を記憶しておき、該閾値と、内側底面103における反射光強度とを比較することにより、サンプル液102の有無を判定する。
 サンプル液102が存在する場合、反射光強度判定部209は、制御PC400に結果を送信する。ステップS29において、制御PC400は、カメラ204に指示を送信し、カメラ204は、フォーカス位置の顕微鏡画像を撮像する。ここで、サンプル液102中の細胞に厚みがある場合、顕微鏡画像のピントが合わない可能性がある。従って、制御PC400は、調節機構に指示を送信し、対物レンズ202の焦点201より上方がカメラ204に結像されるように、カメラ204又は結像レンズ205の位置を微調整する。
 サンプル液102が存在しない場合、反射光強度判定部209は、ステップS30において、制御PC400に結果を送信する。制御PC400は、サンプル液102が無いことを警告として表示部に表示してもよい。
 ステップS29又はS30の後、ステップS31において、制御PC400は、観察を行ったサンプル保持部101が最後のサンプル保持部101であるか否かを判定する。予め、制御PC400に、サンプル保持部101の数を記憶させておくことで、最後のサンプル保持部101であるか否かを判定するようにしてもよい。観察を行ったサンプル保持部101が最後のサンプル保持部101である場合(Yes)、制御PC400は、観察を終了する。
 観察を行ったサンプル保持部101が最後のサンプル保持部101でない場合(No)、ステップS32において、制御PC400は、XYステージ300を駆動して、次のサンプル保持部101を対物レンズ202の上方へ移動する。
 ステップS33において、制御PC400は、対物レンズアクチュエータ203を上方に駆動して、焦点201を所定の距離だけ上方に移動させる。このとき焦点201を移動させる距離は、サンプル液102の高さより小さいことが好ましい。サンプル液102の高さや、ステップS33において対物レンズアクチュエータ203を上方へ駆動させる距離は、予め制御PC400に記憶させておく。これにより、図5Aに示すように、2つ目以降のサンプル保持部101のオートフォーカスを開始する際は、焦点201がサンプル液102中に位置する。
 その後、ステップS23に戻り、2つ目以降のサンプル保持部101においても上記と同様に、ステップS23~S33を行う。
 なお、サンプル容器100の底面の厚さのばらつきが大きい場合、上述のステップS32及びステップS33において次のサンプル保持部101に移動し、焦点201を所定の距離だけ上方に移動させた際に、焦点201の位置がサンプル保持部101の底面の樹脂内、あるいは外側底面104の下方となる場合がある。図5Cは、対物レンズ202の焦点201がサンプル保持部101の底面の樹脂内に位置する状態を示している。図5Dは、対物レンズ202の焦点201がサンプル保持部101の外側底面104の下方に位置する状態を示している。
 このように、ステップS32及びステップS33の後に、焦点201がサンプル液102中に位置しない場合においても、ステップS23に戻る。
 以上のように、本実施形態における観察方法において、対物レンズ202の焦点201をサンプル保持部101のサンプル液102中から下方へ走査させる例を説明したが、外側底面104の下方から焦点201を走査する構成を採用することもできる。
 また、本実施形態における観察方法は、第1の実施形態と組み合わせて実施することもできる。例えば、第1の実施形態のステップS3とステップS4の間に、本実施形態のステップS23及びステップS24を行ってもよい。
 (3)技術的効果
 以上のように、本実施形態は、反射光強度分布から、対物レンズ202の焦点201の位置を判定して対物レンズアクチュエータ203の駆動方向を決定し、内側底面103(フォーカス位置)に焦点201を合わせる構成を採用している。これにより、フォーカス位置へのオートフォーカスを一意的に高精度に行うことができる。また、本実施形態は、サンプル保持部101内のサンプル液102の有無を判定する構成を有することにより、人為的エラーによる誤った検査結果の出力を防止することができる。
100…サンプル容器
101…サンプル保持部
102…サンプル液
103…内側底面
104…外側底面
200…撮像ユニット
201…焦点
202…対物レンズ
203…対物レンズアクチュエータ
204…カメラ
205…結像レンズ
206…オートフォーカスユニット
207…フォーカス制御部
208…カウント部
209…反射光強度判定部
300…XYステージ
400…制御PC

Claims (18)

  1.  サンプル液が収容されるサンプル容器内のフォーカス位置の画像を撮像する観察装置において、
     前記サンプル容器を保持する保持部と、
     前記フォーカス位置の画像を撮像する光学系と、
     前記光学系を制御する演算装置と、を備え、
     前記光学系は、
     前記サンプル容器の下方に配置される対物レンズと、
     前記対物レンズを光軸方向に駆動させる対物レンズアクチュエータと、
     前記サンプル容器の底面に光を照射する照射部と、
     前記光の反射光の反射光強度を検出する検出部と、
     前記反射光強度がピークを示す反射面に前記対物レンズの焦点を合わせるフォーカス制御部と、
     前記反射面のカウントを行うカウント部と、を有し、
     前記フォーカス制御部は、前記反射光強度のピークが検出された場合、前記対物レンズアクチュエータを駆動して、前記反射面に前記焦点を合わせ、
     前記カウント部は、前記フォーカス制御部により前記反射面に前記焦点を合わせた場合、前記反射面のカウントを行い、
     前記演算装置は、前記カウントの値に基づいて、前記焦点が前記フォーカス位置に合っているか否かを判定し、
     前記焦点が前記フォーカス位置に合っている場合に前記光学系に撮像を行わせ、前記焦点が前記フォーカス位置に合っていない場合に、前記対物レンズアクチュエータを駆動することを特徴とする観察装置。
  2.  請求項1に記載の観察装置において、
     前記反射光の強度分布に基づいて、前記焦点の位置を判定する反射光強度判定部をさらに備えることを特徴とする観察装置。
  3.  請求項2に記載の観察装置において、
     前記反射光強度判定部は、前記演算装置により、前記焦点が前記フォーカス位置に合っていると判定された場合に、前記ピークにおける前記反射光強度に基づいて、前記サンプル容器内に前記サンプル液が存在するか否かを判定することを特徴とする観察装置。
  4.  請求項2に記載の観察装置において、
     前記演算装置は、前記反射光強度判定部により判定される前記対物レンズの前記焦点の位置に基づいて、前記対物レンズアクチュエータの駆動方向を決定することを特徴とする観察装置。
  5.  請求項1に記載の観察装置において、
     前記光学系は、前記フォーカス位置の像を撮像するカメラと、前記カメラに前記フォーカス位置の像を結像させる結像レンズと、をさらに備え、
     前記演算装置は、前記カメラの画像から、前記対物レンズの前記焦点の位置を判定することを特徴とする観察装置。
  6.  請求項5に記載の観察装置において、
     前記演算装置は、前記カメラの画像から判定される前記対物レンズの前記焦点の位置に基づいて、前記対物レンズアクチュエータの駆動方向を決定することを特徴とする観察装置。
  7.  請求項5に記載の観察装置において、
     前記カメラ又は前記結像レンズを駆動して、前記カメラに結像される前記フォーカス位置の像を調節する調節機構をさらに備えることを特徴とする観察装置。
  8.  請求項1に記載の観察装置において、
     前記対物レンズアクチュエータは、前記対物レンズの前記焦点が前記サンプル容器の底面の下方に位置する状態から駆動を開始して上方へ駆動し、
     前記演算装置は、前記カウントが2の場合に前記焦点が前記フォーカス位置に合っていると判定することを特徴とする観察装置。
  9.  請求項1に記載の観察装置において、
     前記対物レンズアクチュエータは、前記対物レンズの前記焦点が前記サンプル液内に位置する状態から駆動を開始して下方へ駆動し、
     前記演算装置は、前記カウントが1の場合に前記焦点が前記フォーカス位置に合っていると判定することを特徴とする観察装置。
  10.  サンプル液が収容されるサンプル容器内のフォーカス位置の画像を撮像する観察装置において、
     前記サンプル容器を保持する保持部と、
     前記フォーカス位置の画像を撮像する光学系と、
     前記光学系を制御する演算装置と、を備え、
     前記光学系は、
     前記サンプル容器の下方に配置される対物レンズと、
     前記対物レンズを光軸方向に走査させる対物レンズアクチュエータと、
     前記サンプル容器の底面に光を照射する照射部と、
     前記光の反射光の反射光強度を検出する検出部と、
     前記反射光強度のピークを示す反射面に前記対物レンズの焦点を合わせるフォーカス制御部と、
     前記反射光の強度分布に基づいて、前記焦点の位置を判定する反射光強度判定部と、を有し、
     前記フォーカス制御部は、前記反射光強度のピークが検出された場合、前記対物レンズアクチュエータを駆動して、前記反射面に前記焦点を合わせ、
     前記反射光強度判定部は、前記反射光の強度分布に基づいて、前記焦点が前記フォーカス位置に合っているか否かを判定し、
     前記演算装置は、前記焦点が前記フォーカス位置に合っている場合に前記光学系に撮像を行わせ、前記焦点が前記フォーカス位置に合っていない場合に、前記対物レンズアクチュエータを駆動することを特徴とする観察装置。
  11.  請求項10に記載の観察装置において、
     前記演算装置は、前記反射光強度判定部により判定される前記対物レンズの前記焦点の位置に基づいて、前記対物レンズアクチュエータの駆動方向を決定することを特徴とする観察装置。
  12.  請求項10に記載の観察装置において、
     前記反射光強度判定部は、前記反射光強度のピークが検出される直前の前記焦点の位置が前記サンプル液中であり、且つ前記対物レンズアクチュエータが下方へ駆動している場合、又は前記反射光強度のピークが検出される直前の前記焦点の位置が前記サンプル容器の底面内であり、前記対物レンズアクチュエータが上方へ駆動している場合に、前記ピークにおいて前記焦点が前記フォーカス位置に合っていると判定することを特徴とする観察装置。
  13.  請求項10に記載の観察装置において、
     前記反射光強度判定部は、前記焦点が前記フォーカス位置に合っている場合に、前記ピークにおける前記反射光強度に基づいて、前記サンプル容器内に前記サンプル液が存在するか否かを判定することを特徴とする観察装置。
  14.  請求項10に記載の観察装置において、
     前記光学系は、前記フォーカス位置の像を撮像するカメラと、前記カメラに前記フォーカス位置の像を結像させる結像レンズと、をさらに備え、
     前記演算装置は、前記カメラの画像から、前記対物レンズの前記焦点の位置を判定することを特徴とする観察装置。
  15.  請求項14に記載の観察装置において、
     前記演算装置は、前記カメラの画像から判定される前記対物レンズの前記焦点の位置に基づいて、前記対物レンズアクチュエータの駆動方向を決定することを特徴とする観察装置。
  16.  請求項14に記載の観察装置において、
     前記カメラ又は前記結像レンズを駆動して、前記カメラに結像される前記フォーカス位置の像を調節する調節機構をさらに備えることを特徴とする観察装置。
  17.  請求項10に記載の観察装置において、
     前記対物レンズアクチュエータは、前記対物レンズの前記焦点が前記サンプル容器の底面の下方に位置する状態から駆動を開始し、上方へ駆動することを特徴とする観察装置。
  18.  請求項10に記載の観察装置において、
     前記対物レンズアクチュエータは、前記対物レンズの前記焦点が前記サンプル液内に位置する状態から駆動を開始し、下方へ駆動することを特徴とする観察装置。
PCT/JP2018/023455 2018-06-20 2018-06-20 観察装置 WO2019244275A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP18923067.5A EP3812823A4 (en) 2018-06-20 2018-06-20 OBSERVATION DEVICE
PCT/JP2018/023455 WO2019244275A1 (ja) 2018-06-20 2018-06-20 観察装置
US16/972,751 US11892706B2 (en) 2018-06-20 2018-06-20 Observation device
JP2020525148A JP7034280B2 (ja) 2018-06-20 2018-06-20 観察装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/023455 WO2019244275A1 (ja) 2018-06-20 2018-06-20 観察装置

Publications (1)

Publication Number Publication Date
WO2019244275A1 true WO2019244275A1 (ja) 2019-12-26

Family

ID=68982791

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/023455 WO2019244275A1 (ja) 2018-06-20 2018-06-20 観察装置

Country Status (4)

Country Link
US (1) US11892706B2 (ja)
EP (1) EP3812823A4 (ja)
JP (1) JP7034280B2 (ja)
WO (1) WO2019244275A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024101416A1 (ja) * 2022-11-10 2024-05-16 キヤノン株式会社 走査方法、走査システム及び位置情報取得方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001091821A (ja) * 1999-09-21 2001-04-06 Olympus Optical Co Ltd 顕微鏡用オートフォーカスシステム
JP2007271979A (ja) * 2006-03-31 2007-10-18 Yokogawa Electric Corp 生物顕微鏡
JP2008122629A (ja) * 2006-11-13 2008-05-29 Yokogawa Electric Corp 3次元顕微鏡システム
JP2008267842A (ja) 2007-04-17 2008-11-06 Yokogawa Electric Corp 生物観察容器並びにこれを用いる生物顕微鏡及び生物観察装置
WO2014020967A1 (ja) * 2012-08-02 2014-02-06 オリンパス株式会社 共焦点顕微鏡又は多光子顕微鏡の光学系を用いた光分析装置、光分析方法及び光分析用コンピュータプログラム
WO2015181951A1 (ja) * 2014-05-30 2015-12-03 株式会社ニコン 焦点調節装置、顕微鏡装置、焦点調節方法、及び制御プログラム
JP2017187436A (ja) 2016-04-08 2017-10-12 株式会社Screenホールディングス 底面位置検出装置、画像取得装置、底面位置検出方法および画像取得方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09281384A (ja) * 1996-04-17 1997-10-31 Citizen Watch Co Ltd オートフォーカス制御装置
US6130745A (en) * 1999-01-07 2000-10-10 Biometric Imaging, Inc. Optical autofocus for use with microtiter plates
IL148664A0 (en) * 2002-03-13 2002-09-12 Yeda Res & Dev Auto-focusing method and device
JP2005227098A (ja) * 2004-02-12 2005-08-25 Olympus Corp 分析装置及びそのプログラム
EP1840623B1 (en) 2006-03-31 2013-05-08 Yokogawa Electric Corporation Microscope comprising a focus error detecting optical system
JP2008276070A (ja) * 2007-05-02 2008-11-13 Olympus Corp 拡大撮像装置
US7646482B2 (en) * 2007-05-31 2010-01-12 Genetix Limited Methods and apparatus for optical analysis of samples in biological sample containers
JP5287566B2 (ja) * 2009-07-15 2013-09-11 横河電機株式会社 共焦点顕微鏡装置
US9134522B2 (en) * 2009-10-16 2015-09-15 Thorlabs, Inc. Autofocus apparatus
US9360659B2 (en) * 2011-08-10 2016-06-07 Molecular Devices, Llc Method for presenting and evaluation of images of micro-titer plate properties
EP3036577B1 (en) * 2013-08-22 2017-12-06 Thorlabs, Inc. Autofocus apparatus

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001091821A (ja) * 1999-09-21 2001-04-06 Olympus Optical Co Ltd 顕微鏡用オートフォーカスシステム
JP2007271979A (ja) * 2006-03-31 2007-10-18 Yokogawa Electric Corp 生物顕微鏡
JP2008122629A (ja) * 2006-11-13 2008-05-29 Yokogawa Electric Corp 3次元顕微鏡システム
JP2008267842A (ja) 2007-04-17 2008-11-06 Yokogawa Electric Corp 生物観察容器並びにこれを用いる生物顕微鏡及び生物観察装置
WO2014020967A1 (ja) * 2012-08-02 2014-02-06 オリンパス株式会社 共焦点顕微鏡又は多光子顕微鏡の光学系を用いた光分析装置、光分析方法及び光分析用コンピュータプログラム
WO2015181951A1 (ja) * 2014-05-30 2015-12-03 株式会社ニコン 焦点調節装置、顕微鏡装置、焦点調節方法、及び制御プログラム
JP2017187436A (ja) 2016-04-08 2017-10-12 株式会社Screenホールディングス 底面位置検出装置、画像取得装置、底面位置検出方法および画像取得方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3812823A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024101416A1 (ja) * 2022-11-10 2024-05-16 キヤノン株式会社 走査方法、走査システム及び位置情報取得方法

Also Published As

Publication number Publication date
EP3812823A4 (en) 2022-02-16
EP3812823A1 (en) 2021-04-28
JP7034280B2 (ja) 2022-03-11
JPWO2019244275A1 (ja) 2021-06-24
US20210263262A1 (en) 2021-08-26
US11892706B2 (en) 2024-02-06

Similar Documents

Publication Publication Date Title
JP7055793B2 (ja) 選択的平面照明を伴う明視野顕微鏡
CN101303269B (zh) 光学系统评价装置及光学系统评价方法
US10042148B2 (en) Light sheet microscope and sheet illumination method
JP2012527651A (ja) 試料の空間位置の動的決定および動的再配置の装置および方法
JP6662529B2 (ja) 光学機器の連続非同期オートフォーカスのためのシステムおよび方法
US20170017071A1 (en) Microscopy system, refractive-index calculating method, and recording medium
JP7023677B2 (ja) 実質的に水平な側方視で、走査型プローブ顕微鏡の試料とプローブとの間のギャップを撮像する走査型プローブ顕微鏡及び方法
JP2010101959A (ja) 顕微鏡装置
JP2006266823A (ja) 微小高さ測定方法及びそれに用いる微小高さ測定装置並びに変位ユニット
JP4725967B2 (ja) 微小高さ測定装置及び変位計ユニット
JP6363477B2 (ja) 3次元形状測定装置
WO2019244275A1 (ja) 観察装置
KR20170063537A (ko) 고침 렌즈 홀더 및 화상 취득 장치
JP2009109315A (ja) 光計測装置及び走査光学系
CN106255911B (zh) 自动聚焦系统
JP2009198525A (ja) 創薬スクリーニング装置
US11971530B2 (en) Observation apparatus, method of operating observation apparatus, and observation control program
JP2008267842A (ja) 生物観察容器並びにこれを用いる生物顕微鏡及び生物観察装置
WO2017175303A1 (ja) 標本形状測定方法及び標本形状測定装置
JP2007304058A (ja) 微小高さ測定装置
JP2004102032A (ja) 走査型共焦点顕微鏡装置
JP2018017970A (ja) 光シート顕微鏡、及び、光シート顕微鏡の制御方法
JP2008261829A (ja) 表面測定装置
JP2007286147A (ja) 赤外顕微鏡
JP2016080494A (ja) 近接場測定方法および近接場光学顕微鏡

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18923067

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020525148

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018923067

Country of ref document: EP

Effective date: 20210120