WO2019088030A1 - 撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム - Google Patents

撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム Download PDF

Info

Publication number
WO2019088030A1
WO2019088030A1 PCT/JP2018/040146 JP2018040146W WO2019088030A1 WO 2019088030 A1 WO2019088030 A1 WO 2019088030A1 JP 2018040146 W JP2018040146 W JP 2018040146W WO 2019088030 A1 WO2019088030 A1 WO 2019088030A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
container
unit
shape information
observation target
Prior art date
Application number
PCT/JP2018/040146
Other languages
English (en)
French (fr)
Inventor
室岡 孝
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2019550376A priority Critical patent/JP6993423B2/ja
Publication of WO2019088030A1 publication Critical patent/WO2019088030A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/24Base structure
    • G02B21/26Stages; Adjusting means therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems

Definitions

  • the present invention relates to an imaging control apparatus that causes an imaging unit to capture an observation target contained in a container, an operation method of the imaging control apparatus, and an imaging control program.
  • Pluripotent stem cells such as ES (Embryonic Stem) cells and iPS (Induced Pluripotent Stem) cells have the ability to differentiate into cells of various tissues, and they can be used in regenerative medicine, drug development, disease elucidation, etc. It is noted that it can be applied in
  • pluripotent stem cells such as ES cells and iPS cells or cells induced to differentiate are imaged with a microscope device or the like, and the characteristics of the image are captured to evaluate the differentiation state of cells etc. There is.
  • photographing conditions are set in advance, and photographing is performed under the set photographing conditions.
  • clouding of the container that is, droplets attached to the container, changes in the amount and concentration of the culture fluid due to evaporation, etc., errors in the type of container, human error, etc. Due to various factors, the set shooting conditions may not necessarily be optimum conditions at the time of shooting.
  • Patent Document 1 the prior photographing is performed to acquire the prior captured image, and the light amount distribution of the irradiation light is set so that the incident light amount increases as the luminance decreases in the prior captured image, and the photographing is performed again (main photographing).
  • pluripotent stem cells such as ES cells and iPS cells are housed in a culture vessel such as a well plate, and are cultured in an incubator under control of environmental temperature and humidity. Then, when imaging the cultured pluripotent stem cells, the culture vessel is moved from the incubator to the microscope apparatus.
  • the surface treatment of the inner surface of the culture vessel, the material of the vessel, and the like may differ depending on the type of culture vessel, for example, the difference in the manufacturer.
  • the surface treatment and the material of the container are different, the culture state of the observation object stored in the culture container and the shape of the meniscus formed on the surface of the liquid differ, and the optical conditions, imaging conditions, etc. May change.
  • many of the above-mentioned culture vessels are disposable types, and the manufacturing accuracy is not very good.
  • the deflection (concave and convex) formed on the bottom of the culture vessel may also differ depending on the type of culture vessel, such as the difference between manufacturers, and the range of manufacturing errors may also differ.
  • each observation position in the culture vessel is scanned by moving the stage on which the culture vessel is installed relative to the imaging optical system, and an image for each observation position is taken, A method has been proposed for combining the images at each observation position.
  • the drive section moves the objective lens in the direction of the optical axis for each observation position based on the deflection information of the bottom of the culture vessel to perform autofocus control and focus It needs to be aligned.
  • the deflection formed on the bottom of the culture vessel differs depending on the type of culture vessel, for example, the difference between manufacturers.
  • the photographing condition of the microscope apparatus is set in a culture container of a predetermined type installed in the microscope apparatus, that is, the culture container intended by the user
  • the culture container other than the culture container intended by the user is the microscope apparatus
  • the deflection of the bottom of the culture vessel ie, the height of the bottom of the culture vessel
  • the drivable range by the drive the movable range in which the drive moves the objective lens in the optical axis direction
  • the present invention has been made in view of the above circumstances, and it is an object of the present invention to provide a photographing control device capable of suppressing deterioration in the image quality of a photographed image caused by a container mistake, a method of operating the photographing control device, and a photographing control program. .
  • the imaging control apparatus causes the notification unit to notify that the shape information of the bottom surface of the container in which the observation target is stored is different from the shape information of the bottom surface of the predetermined container.
  • the control unit is configured to change the imaging condition based on the predetermined shape information of the bottom surface of the container to the imaging condition based on the shape information of the bottom surface of the container in which the observation target is accommodated and cause the imaging unit to perform imaging.
  • the “bottom of the container” is the bottom in the container that holds the observation target, and means the installation surface of the observation target.
  • the “notification unit” is a display for visually displaying a message or the like, an audio reproduction device for making an audible display by outputting a voice, a printer for recording permanently on a recording medium such as paper, etc. It means communication means such as telephones and indicator lights, etc., and at least two or more of the display, the audio reproduction device, the printer, the communication means, and the display light may be combined.
  • shape information of the bottom of the container includes at least one of the height of the bottom of the container, the thickness of the bottom of the container, and the curvature of the bottom of the container.
  • the height of the bottom of the container means the distance from a predetermined reference plane to the bottom of the container.
  • the reference surface may be a lower surface of the bottom of the container, or may be a surface including an irradiation port of the light of the measurement unit and orthogonal to the vertical direction of the container, or may be appropriately determined.
  • the reference surface is the lower surface of the bottom of the container, the "height of the bottom of the container” corresponds to the "thickness of the bottom of the container”.
  • the "container” is generically referred to as a container including a lid when the lid is covered.
  • control unit causes the measurement unit to perform pre-measurement for measuring the shape of the bottom surface of the container in which the observation target is stored before the main imaging by the imaging unit. Shape information of the bottom of the container in which the object is stored may be acquired.
  • main photographing means photographing which is performed when acquiring a photographed image desired by the user
  • pre-measurement means prior measurement which is performed before the main photographing is performed.
  • control unit causes the measurement unit to irradiate light to the bottom surface of the container in which the observation target is accommodated, and the bottom surface of the container is shape information as the shape information based on the reflected light. You may get the height.
  • the measurement unit may be a laser displacement sensor.
  • the measuring unit has an imaging unit
  • the control unit may acquire the curvature of the bottom surface of the container as shape information based on the captured image acquired by causing the imaging unit to image the observation target contained in the container.
  • the imaging control apparatus moves the container containing the observation target relative to the optical axis direction of the imaging optical system with respect to the imaging optical system for forming the image of the observation target in the container. If the height difference of the bottom of the container in which the object to be observed is accommodated is larger than the size of the movable range in which the optical axis direction drive unit for moving the imaging optical system or the container relatively moves in the optical axis direction The position of the above range may be changed with respect to the optical axis direction driving unit according to the height of the bottom surface of the image pickup unit so as to be photographed.
  • a movable range in which the optical axis direction drive unit relatively moves the imaging optical system or the container in the optical axis direction means a range in which the optical axis direction drive unit can drive in the optical axis direction.
  • the height difference between the bottom of the container means the difference between the lowest position and the highest position on the entire bottom surface of the container.
  • the photographing control device of the present invention includes a shape information storage unit that stores shape information of a container
  • the shape information storage unit may store a table in which identification information of the container in which the observation target is stored is associated with shape information of the bottom surface of the container.
  • the container may be a dish, a well plate or a flask.
  • the operation method of the imaging control apparatus is an operation method of the imaging control apparatus including the control unit, If the shape information of the bottom surface of the container in which the observation target is stored is different from the shape information of the bottom surface of the container, the control unit causes the notification unit to notify that it is different, or it is determined in advance
  • the imaging condition is changed based on the imaging condition based on the shape information of the bottom surface of the container to the imaging condition based on the shape information of the bottom surface of the container in which the observation target is accommodated.
  • the method of operating the imaging control apparatus according to the present invention may be provided as a program that causes a computer to execute the method.
  • Another imaging control apparatus is a memory for storing instructions to be executed by a computer.
  • a processor configured to execute the stored instructions, the processor
  • the notification unit is notified of the difference or the bottom surface of the predetermined container
  • the notification unit when the shape information of the bottom surface of the container in which the observation target is accommodated is different from the shape information of the bottom surface of the container determined in advance, the notification unit is notified of a difference or Since the imaging unit changes the imaging condition based on the shape information of the bottom surface of the container to the imaging condition based on the shape information of the bottom surface of the container in which the observation target is stored, the notification unit In the case of notifying the user, the user can know that the container in which the observation target to be photographed is accommodated is desired by the user, that is, the container is not a predetermined container. It is possible to take measures such as replacing with the observation target stored in the above or reculturing the observation target in a predetermined container.
  • control unit can prevent the imaging unit from capturing a captured image with a lowered image quality, it is possible to suppress a decrease in the image quality of the captured image caused by a container mistake.
  • the imaging unit when changing the imaging condition to the imaging condition based on the shape information of the bottom surface of the container in which the observation target is stored, the imaging unit performs imaging suitable for the shape of the bottom surface of the container in which the observation target is stored. Photographing can be performed under the conditions, and deterioration in the image quality of the photographed image due to a mistake in the container can be suppressed.
  • FIG. 1 shows schematic structure of the microscope apparatus of 1st Embodiment in the microscope observation system of this embodiment Schematic diagram showing the configuration of the imaging optical system
  • Flow chart of a series of processes performed in the microscopy system of the first embodiment Flow chart of imaging condition change processing performed in the microscope observation system of the first embodiment
  • Flowchart of a series of processes performed in the microscopy system of the fourth embodiment Flowchart of a series of processes performed in the microscopy system of the fifth embodiment Flowchart of a series
  • FIG. 1 is a view showing a schematic configuration of a microscope apparatus 10 in the microscope observation system 1 of the first embodiment.
  • the microscope observation system 1 is configured of a microscope apparatus 10 and a microscope control apparatus 20 described later, and the microscope control apparatus 20 is an example of the imaging control apparatus of the present invention.
  • the microscope device 10 captures a phase difference image of cultured cells to be observed.
  • the microscope device 10 includes a white light source 11 that emits white light, a condenser lens 12, a slit plate 13, an imaging optical system 14, an imaging optical system drive unit 15, and an imaging unit 16, a detection unit 18 and a stage 51.
  • the slit plate 13 is provided with a ring-shaped slit for transmitting white light to a light shielding plate for shielding white light emitted from the white light source 11, and the white light passes through the slit to form a ring shape.
  • Illumination light L is formed.
  • FIG. 2 is a diagram showing a detailed configuration of the imaging optical system 14.
  • the imaging optical system 14 includes a phase difference lens 14 a and an imaging lens 14 d.
  • the phase difference lens 14a includes an objective lens 14b and a phase plate 14c.
  • the phase plate 14 c has a phase ring formed on a transparent plate transparent to the wavelength of the illumination light L.
  • the size of the slit of the slit plate 13 described above is in a conjugate relationship with the phase ring of the phase plate 14 c.
  • phase film for shifting the phase of the incident light by 1 ⁇ 4 wavelength and a light reducing filter for reducing the incident light are formed in a ring shape.
  • the direct light incident on the phase ring is shifted in phase by 1 ⁇ 4 wavelength and is weakened in brightness by passing through the phase ring.
  • most of the diffracted light diffracted by the object of observation passes through the transparent plate of the phase plate 14c, and its phase and brightness do not change.
  • the objective lens 14 b is moved in the optical axis direction of the objective lens 14 b by an imaging optical system drive unit 15 described later.
  • the optical axis direction of the objective lens 14b and the Z direction are the same direction.
  • the autofocus control is performed by the movement of the objective lens 14 b in the Z direction, and the contrast of the phase difference image captured by the imaging unit 16 is adjusted.
  • the magnification of the phase difference lens 14a may be changed.
  • the phase difference lens 14a or the imaging optical system 14 having different magnifications may be configured to be exchangeable.
  • the replacement of the phase difference lens 14a or the imaging optical system 14 may be performed automatically or may be performed manually by the user.
  • FIG. 3 is a schematic view showing the configuration of the imaging optical system drive unit 15.
  • the imaging optical system drive unit 15 generates a light from the imaging optical system 14 of the culture container 50 in which the observation target S is accommodated with respect to the imaging optical system 14 that forms an image of the observation target S in the culture container 50. It is made to move relatively to an axial direction, and is an example of the optical axis direction drive part of this invention.
  • the imaging optical system drive unit 15 of the present embodiment includes an actuator 15B and a piezoelectric element 15A disposed on the upper side in the vertical direction of the actuator 15B.
  • the actuator 15B includes a moving member moving in the vertical direction (Z direction) and a pulse motor transmitting power to the moving member, and drives based on a control signal output from the control unit 22 described later.
  • the actuator 15B moves the piezoelectric element 15A in the vertical direction by the movement of the moving member.
  • the piezoelectric element 15A is driven based on a control signal output from the control unit 22 described later, and moves the objective lens 14b in the vertical direction.
  • the imaging optical system drive unit 15 is configured to pass the phase difference image that has passed through the phase difference lens 14a as it is.
  • the piezoelectric element 15A can move the imaging optical system 14 in the Z direction at a higher speed than the actuator 15B.
  • the piezoelectric element 15A has a smaller drivable range in the vertical direction than the actuator 15B.
  • the drivable range of the piezoelectric element 15A is, for example, 640 ⁇ m
  • the drivable range of the actuator B is, for example, 5 mm.
  • the value of the drivable range of the piezoelectric element 15A is stored in advance in the secondary storage unit 25 described later. When the value of the drivable range of the piezoelectric element 15A is not stored in the secondary storage unit 25, the user can input the value of the range by the input device 40.
  • the piezoelectric element 15A is used for moving the objective lens 14b in the Z direction when performing autofocus control, and the piezoelectric element is used for moving the objective lens 14b in the Z direction.
  • the piezoelectric element 15A is moved in the Z direction by the actuator 15B when it deviates from the drivable range of 15A, the position of the drivable range of the piezoelectric element 15A is changed, and the Z of the objective lens 14b is changed by the piezoelectric element 15A. Allows movement in the direction.
  • the method of driving the piezoelectric element 15A and the actuator 15B will be described in detail later.
  • the imaging optical system drive unit 15 of the present embodiment is configured of the piezoelectric element 15A and the actuator 15B
  • the present invention is not limited to this, and the objective lens 14b can be moved in the Z direction Any other known configuration can be used as long as it is as long as
  • the actuator 15B of this embodiment has a pulse motor
  • the present invention is not limited to this, as long as the piezoelectric element 15A can move in the Z direction, other known configurations can be used. It can be used.
  • the imaging optical system drive unit 15 of this embodiment moves only the objective lens 14b in the Z direction
  • the present invention is not limited to this, and the phase difference lens 14a is moved in the Z direction. It may be configured to
  • the imaging lens 14 d receives the phase difference image that has passed through the phase difference lens 14 a and the imaging optical system drive unit 15, and forms an image on the imaging unit 16.
  • the imaging unit 16 includes an imaging element that receives an image of the observation target S formed by the imaging lens 14d, captures an image of the observation target S, and outputs a phase difference image as an observation image.
  • an imaging element a CCD (charge-coupled device) image sensor, a CMOS (Complementary Metal-Oxide Semiconductor) image sensor, or the like can be used.
  • an imaging device an imaging device provided with a RGB (Red Green Blue) color filter may be used, or a monochrome imaging device may be used.
  • the detection unit 18 detects the position in the Z direction (vertical direction) of the bottom surface 50 a of the culture container 50 installed on the stage 51.
  • the detection unit 18 includes a first displacement sensor 18a and a second displacement sensor 18b.
  • the first displacement sensor 18a and the second displacement sensor 18b are provided side by side in the X direction shown in FIG. 1 with the phase difference lens 14a interposed therebetween.
  • the first displacement sensor 18a and the second displacement sensor 18b in the present embodiment are laser displacement gauges (laser displacement sensors), and the culture vessel 50 is irradiated with laser light and the reflected light is detected to detect the culture vessel.
  • the position of the bottom surface 50a of 50 in the Z direction is detected.
  • the bottom surface 50 a of the culture container 50 is the bottom surface 50 a in the culture container 50 that accommodates the observation target S, and is the installation surface of the observation target S.
  • the installation surface is a boundary between the bottom of the culture vessel 50 and the cell to be observed. Further, the lower surface of the bottom of the culture vessel 50 is referred to as a lower surface 50b.
  • the detection unit 18 is an example of the measurement unit of the present invention that performs pre-measurement.
  • the detection unit 18 performs pre-measurement based on a control signal output from the control unit 22 described later.
  • the bottom surface 50 a of the culture container 50 is irradiated with laser light, and the reflected light reflected by the bottom surface 50 a of the culture container 50 is detected to obtain the shape information of the culture container 50 as shape information of the bottom surface 50 a of the culture container 50.
  • the height of the bottom surface 50a is detected.
  • the height of the bottom surface 50 a of the culture container 50 is a value representing the height of the bottom surface 50 a of the culture container 50 with the detection unit 18 as a reference surface and the value of the reflected light signal detected by the detection unit 18. .
  • the detection unit 18 measures the height of the entire bottom surface 50a with a spatial resolution of 10 ⁇ m ⁇ 10 ⁇ m in the XY direction as the height of the bottom surface 50a of the culture container 50.
  • the spatial resolution it is preferable to use the spatial resolution used at the time of measuring the shape information 29 stored in the secondary storage unit 25 described later.
  • the value of the height of the bottom surface 50a of the culture vessel 50 is the value of the signal of the reflected light detected by the detection unit 18, but the present invention is not limited thereto.
  • a value obtained by converting the value of the signal into a distance, that is, the distance from the detection unit 18 to the bottom surface 50a of the culture container 50 may be the height of the bottom surface 50a of the culture container 50.
  • the detection unit 18 further detects the reflected light reflected by the lower surface 50b (see FIG.
  • a value representing the thickness of the bottom of the culture vessel 50 may be calculated by subtracting the value of the reflected light reflected by the lower surface 50b of the bottom, and this value may be a value representing the height of the bottom 50a of the culture vessel 50. Also, a value representing this height may be used by converting it into an actual distance value.
  • the measurement part of this embodiment used the detection part 18, this invention is not limited to this,
  • the laser displacement sensor can use a specular reflection optical system measuring instrument.
  • the present invention is not limited to the laser displacement sensor.
  • a confocal sensor can be used.
  • the position information indicating the position in the Z direction of the bottom surface 50a of the culture container 50 detected by the detection unit 18 is output to the control unit 22, and the control unit 22 drives the imaging optical system based on the input position information.
  • the unit 15 is controlled to perform autofocus control.
  • a stage 51 is provided between the slit plate 13 and the phase difference lens 14 a and the detection unit 18. On the stage 51, a culture container 50 containing cells to be observed is installed.
  • a petri dish, a dish, a well plate in which a plurality of wells are arranged, or the like can be used as the culture container 50.
  • a well plate in which a plurality of wells are arranged is used as a culture vessel.
  • the culture container 50 described above in the present embodiment is an example of one well in the well plate, hereinafter, the well plate will be generally described as the culture container 50.
  • pluripotent stem cells such as iPS cells and ES cells, nerves induced to differentiate from stem cells, cells of skin, myocardium and liver, skins removed from human body, retina, There are myocardium, blood cells, nerves and cells of organs.
  • the stage 51 is moved in the X direction and the Y direction orthogonal to each other by a horizontal direction drive unit 17 (see FIG. 5) described later.
  • the X direction and the Y direction are directions orthogonal to each other on a plane parallel to the observation target installation surface P1, and the Z direction is a direction orthogonal to the X direction and the Y direction.
  • FIG. 4 shows an example of the stage 51. As shown in FIG. At the center of the stage 51, a rectangular opening 5 1a is formed. The culture vessel 50 is placed on a member forming the opening 51a, and a phase difference image of cells in the culture vessel 50 is configured to pass through the opening 51a.
  • FIG. 5 is a block diagram showing the configuration of the microscope control device 20 according to the first embodiment.
  • the block diagram of the one part structure controlled by each part of the microscope control apparatus 20 is shown.
  • the microscope control device 20 includes a CPU (Central Processing Unit) 21, a primary storage unit 24, It is comprised from the computer provided with the secondary storage part 25 and external I / F (Interface) 27 grade
  • the CPU 21 includes a control unit 22 and a processing unit 23, and controls the entire microscope observation system 1.
  • the primary storage unit 24 is a volatile memory used as a work area or the like when executing various programs.
  • An example of the primary storage unit 24 is a RAM (Random Access Memory).
  • the secondary storage unit 25 is a non-volatile memory in which various programs, various parameters, and the like are stored in advance, and one embodiment of the photographing control program 26 of the present invention is installed. When the photographing control program 26 is executed by the CPU 21, the control unit 22 and the processing unit 23 function.
  • the secondary storage unit 25 also stores shape information 29 described later. Examples of the secondary storage unit 25 include an EEPROM (Electrically Erasable Programmable Read-Only Memory), a flash memory, and the like.
  • the external I / F 27 controls transmission and reception of various information between the microscope apparatus 10 and the microscope control apparatus 20.
  • the CPU 21, the primary storage unit 24, and the secondary storage unit 25 are connected to the bus line 28.
  • the external I / F 27 is also connected to the bus line 28.
  • the photographing control program 26 is recorded in a recording medium such as a digital versatile disc (DVD) and a compact disc read only memory (CD-ROM), distributed, and installed from the recording medium into a computer.
  • a recording medium such as a digital versatile disc (DVD) and a compact disc read only memory (CD-ROM)
  • the photographing control program 26 is stored in a state accessible to the outside from the storage device or network storage of the server computer connected to the network, and installed after being downloaded to the computer in response to an external request. It may be done.
  • the shape information 29 is shape information of the bottom surface of the culture container 50S, ie, the installation surface, which is predetermined by the user.
  • the shape information on the bottom surface of the culture vessel 50S is measured in advance, for example, using a laser displacement meter.
  • FIG. 7 is a diagram for explaining the shape information of the bottom of the culture vessel 50S.
  • the shape information of this embodiment is information obtained by measuring the bottom surface 50a of the culture container 50S in the XY direction with a spatial resolution of 10 ⁇ m ⁇ 10 ⁇ m as shown in FIG.
  • the spatial resolution of the shape information is not limited to this.
  • a measuring method of the shape information of the bottom surface 50a of the culture container 50S if it is a method which can measure not only by a laser displacement meter but in the order of 10 ⁇ m, other methods such as confocal method and spectral interference method are used. It may be made to measure.
  • the shape information of the bottom surface 50a of the culture container 50S may be measured by the detection unit 18 provided in the microscope apparatus 10 by installing the culture container 50S predetermined by the user on the stage 51.
  • a table in which the identification information of the culture container 50S is associated with the shape information measured in advance may be stored in the secondary storage unit 25. Then, the user sets and inputs the identification information of the culture container 50S predetermined by the user using the input device 40, and reads out the shape information of the culture container 50S having the identification information from the secondary storage unit 25. It is also good.
  • the identification information of the culture container 50S a bar code or a QR (Quick Response) code (registered trademark) or the like is given to the culture container 50S instead of setting input by the user, and the barcode or QR code (registration The identification information may be acquired by reading the trademark.
  • the identification information of the culture vessel 50S may be, for example, a model number of a manufacturer or a serial number.
  • the CPU 21 may derive shape information measured in advance from the identification information of the culture container 50S.
  • the dedicated computer may be firmware that executes a program stored in a non-volatile memory, such as a built-in ROM (Read Only Memory) or a flash memory.
  • a dedicated circuit such as an application specific integrated circuit (ASIC) or field programmable gate arrays (FPGA) that permanently stores a program for executing at least a part of functions of the microscope controller 20. May be provided.
  • the program instruction stored in the dedicated circuit may be combined with the program instruction executed by the general-purpose CPU programmed to use the program of the dedicated circuit.
  • the computer hardware configuration may be combined to execute program instructions.
  • the control unit 22 controls the imaging optical system drive unit 15 based on the Z-direction position information of the bottom surface of the culture container 50 detected by the detection unit 18 as described above. Then, the objective lens 14 b of the imaging optical system 14 is moved in the optical axis direction by the drive of the imaging optical system drive unit 15, and autofocus control is performed. Further, the control unit 22 drives and controls the horizontal direction drive unit 17 to move the stage 51 in the X direction and the Y direction.
  • the horizontal drive unit 17 is configured of an actuator having a piezoelectric element or the like.
  • the stage 51 is moved in the X and Y directions under the control of the control unit 22, and the imaging optical system 14 is two-dimensionally scanned in the culture vessel 50, and each observation by the imaging optical system 14 is performed. Take a phase difference image of the position. That is, phase difference images for each of a plurality of imaging regions (fields of view) divided in one well are captured.
  • the control unit 22 also functions as a display control unit that causes the display device 30 to display one composite phase difference image generated by combining the phase difference images of the respective observation positions captured by the microscope device 10. .
  • the surface treatment of the inner surface of the culture container 50, the material of the container, and the like may differ depending on the type of the culture container 50, for example, the difference in manufacturing manufacturer.
  • the culture state of the observation object stored in the culture container 50 and the shape of the meniscus formed on the surface of the liquid differ, so that optical conditions, etc. Conditions may change.
  • the culture container 50 is often of the disposable type, and the manufacturing accuracy is not very good.
  • the deflection (concave and convex) formed on the bottom surface 50a of the culture container 50 may differ depending on the type of the culture container 50, such as the difference between manufacturers, and the range of manufacturing errors may also differ.
  • the imaging optical system drive unit 15 moves the objective lens 14b in the optical axis direction at each observation position based on the shape information of the bottom surface 50a of the culture container 50. Therefore, it is necessary to perform autofocus control to adjust the focus position.
  • the deflection formed on the bottom surface 50 a of the culture container 50 differs depending on the type of the culture container 50, for example, the difference between manufacturers.
  • the photographing condition of the microscope apparatus 10 is set in the culture container 50S of the type to be installed in the predetermined microscope apparatus 10, that is, the culture container 50S intended by the user, other than the culture container 50S intended by the user
  • the set imaging conditions may not be suitable for the culture container 50 installed in the microscope apparatus 10.
  • the deflection of the bottom surface 50a of the culture vessel 50 ie, the height difference of the bottom surface 50a of the culture vessel 50
  • the movable position is exceeded, and the focus position may not match and the captured image captured by the imaging unit 16 may be a blurred image.
  • the photographed image becomes blurred, it is necessary to change the culture vessel 50 to the culture vessel 50S intended by the user and start again from the observation target, ie, the cell culture.
  • the height difference of the bottom surface 50a of the culture vessel 50S intended by the user does not exceed the movable range when performing focus control by the piezoelectric element 15A. That is, when the height difference of the bottom surface 50a of the culture vessel 50S does not exceed the movable range, the actuator is previously driven so that the movement of the objective lens 14b in the Z direction does not deviate from the drivable range of the piezoelectric element 15A.
  • the position of the drivable range of the piezoelectric element 15A is adjusted by moving the piezoelectric element 15A in the Z direction by 15B.
  • the control unit 22 of the present embodiment determines the culture container 50S defined in advance.
  • the imaging condition is changed to the imaging condition based on the shape information of the bottom surface 50a of the culture container 50 containing the observation target from the imaging condition based on the shape information of the bottom surface of the imaging unit 16 to cause imaging.
  • the control unit 22 causes the detection unit 18 to perform pre-measurement to measure the shape of the bottom surface 50 a of the culture container 50 in which the observation target is stored, before the main imaging by the imaging unit 16.
  • the height of the bottom surface 50 a of the culture container 50 is acquired as the shape information of the bottom surface 50 a of the culture container 50 in which the observation target is accommodated.
  • the pre-measurement by the detection unit 18 is as described above.
  • control unit 22 acquires the height difference of the bottom surface 50a of the culture container 50 from the acquired value of the height of the bottom surface 50a of the culture container 50, and this height difference is determined by the piezoelectric element 15A in the optical axis direction of the objective lens 14b.
  • the position in the Z direction of the drivable range of the piezoelectric element 15A is changed to cause the imaging unit 16 to perform the main photographing.
  • the actuator 15B is driven.
  • focus control can be automatically performed in accordance with the shape of the height of the bottom surface 50a of the culture container 50, so that it takes time and effort to change the culture container 50 to a predetermined culture container 50S intended by the user, It is possible to reduce the time required to reincubate the cells, and to suppress the deterioration of the image quality of the photographed image due to the mistake of the container.
  • the processing unit 23 performs various processing such as gamma correction, luminance / color difference conversion, and compression processing on the image signal acquired by the imaging unit 16. Further, the processing unit 23 outputs an image signal obtained by performing various processes to the control unit 22 for each frame at a specific frame rate. In addition, the processing unit 23 combines the phase difference images of the respective observation positions R captured by the microscope device 10 to generate one combined phase difference image.
  • an input device 40 and a display device 30 are connected to the microscope control device 20 by a bus line 28.
  • the display device 30 displays the composite phase difference image generated by the control unit 22 as described above, and includes, for example, a liquid crystal display or the like.
  • the display device 30 may be configured by a touch panel and used as the input device 40.
  • the input device 40 includes a mouse, a keyboard, and the like, and receives various setting inputs by the user.
  • the input device 40 receives setting inputs such as, for example, an instruction to change the magnification of the phase difference lens 14 a and an instruction to change the moving speed of the stage. Further, the setting input of the identification information of the culture vessel 50S predetermined by the user is received.
  • FIG. 8 is a flowchart of processing performed in the microscope observation system 1 of the present embodiment.
  • the control unit 22 causes the detection unit 18 to emit light to the bottom surface 50 a of the culture container 50 containing the observation target S (step ST 1).
  • the reflected light reflected by the bottom surface 50a is detected (step ST2).
  • the control unit 22 acquires the height of the bottom surface 50a of the culture container 50 based on the reflected light detected by the detection unit 18 (step ST3).
  • step ST5 if the height acquired by the control unit 22 is different from the height of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the height of the bottom surface of the culture container 50S determined in advance.
  • the control unit 22 causes the CPU 21 to perform the change processing of the imaging condition (step ST5).
  • FIG. 9 shows a flowchart of imaging condition change processing performed in the microscope observation system 1 of the present embodiment.
  • control unit 22 first drives the CPU 21 to acquire the height difference of the bottom surface 50a from the height of the bottom surface 50a of the culture container 50 acquired in the process of step ST3 of FIG. ST11).
  • the control unit 22 acquires the size of the movable range of the piezoelectric element 15A stored in the secondary storage unit 25 (step ST12).
  • the control unit 22 determines that the height difference is larger than the size of the movable range (step ST13; YES)
  • the control unit 22 sets the height of the bottom surface 50a of the culture container 50 to the actuator 15B.
  • the position of the movable range of the piezoelectric element 15A is changed (step ST14). Specifically, when the focus position of the objective lens 14b based on the height of the bottom surface 50a of the culture vessel 50 is out of the movable range of the piezoelectric element 15A, the objective lens 14b is driven by driving the actuator 15B.
  • the control unit 22 changes the position of the movable range of the piezoelectric element 15A so as to move to the focus position, thereby changing the imaging condition.
  • step ST6 the CPU 21 shifts the process to step ST6, and the control unit 22 causes the imaging unit 16 to perform main shooting using the changed shooting conditions (step ST6).
  • step ST4 when it is determined in step ST4 that the height acquired by the control unit 22 is not different from the height of the bottom surface of the culture container 50S determined in advance (step ST4; NO), the CPU 21 shifts the processing to step ST6. After shifting, the control unit 22 causes the imaging unit 16 to perform the main imaging using the imaging conditions set in advance (step ST6).
  • Photographing by the microscope observation system 1 is performed as described above.
  • the phase difference images at each observation position R of the photographed observation target S are combined by the processing unit 23 to generate a single combined phase difference image, and the generated combined phase difference image is displayed by the control unit 22 using the display device 30. Is displayed on.
  • the control unit 22 determines that the shape information of the bottom surface 50a of the culture container 50 containing the observation target S is different from the shape information of the bottom surface 50a of the culture container 50 determined in advance.
  • the imaging unit 16 is changed to the imaging condition based on the shape information of the bottom surface 50a of the culture container 50 containing the observation target S from the imaging condition based on the shape information of the bottom surface 50a of the culture container 50 determined in advance. Therefore, the imaging unit 16 can perform imaging under imaging conditions suitable for the shape of the bottom surface 50a of the culture container 50 in which the observation target S is accommodated. It is possible to suppress the decline.
  • the microscope observation system 1-2 of the present embodiment is different only in the configuration of the microscope observation system 1 of the first embodiment described above with reference to FIGS. 1 to 5 and the configuration corresponding to the measurement unit of the present invention. Therefore, only the measurement unit will be described below, and the description of the other components will be omitted.
  • the detection unit 18 is an example of the measurement unit of the present invention for performing pre-measurement
  • the measurement unit of the present invention for performing pre-measurement is The imaging unit 16 is provided as an example.
  • the measurement unit of the present embodiment performs pre-measurement in which the observation target S accommodated in the culture container 50 in the imaging unit 16 is photographed in advance before the main imaging by the imaging unit 16.
  • the control unit 22 causes the imaging unit 16 to perform pre-measurement to acquire a photographed image, and based on the acquired photographed image, the curvature of the bottom surface 50 a of the culture container 50 as shape information of the bottom surface 50 a of the culture container 50 To get Specifically, the pixel value of the acquired captured image is acquired, and the curvature is calculated based on the acquired pixel value.
  • the default focus Z-direction position value for example, the user manually observes in advance.
  • Pre-scan is performed at intervals of 10 ⁇ m in the range of ⁇ 150 ⁇ m to +150 ⁇ m in the Z direction with the value of the position in the Z direction as 0 as 0, and measurement data of a total of 31 prescans are acquired.
  • measurement data of 31 times in order to speed up the processing speed, only 48 fields of view, which are odd rows of the well plate, are photographed in one measurement, and the contrast in the image of each of the acquired visual fields Find the average value of In each of the 48 fields of view, one well is imaged.
  • the value of the position in the Z direction having the largest value of the average value of the contrast is determined, and the coordinate position of the 48 fields of view in the XY direction, ie, the measurement position
  • the curvature is determined from the position value of the direction.
  • FIG. 10 is a flowchart of processing performed in the microscope observation system 1-2 of the present embodiment.
  • control unit 22 causes the imaging unit 16 to image the observation target S accommodated in the culture container 50 (step ST21), and acquires a photographed image (step ST22).
  • control unit 22 acquires the curvature of the bottom surface 50a of the culture container 50 based on the acquired captured image (step ST33).
  • step ST24 if the curvature acquired by the control unit 22 is different from the curvature of the bottom surface of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the curvature of the bottom surface of the culture container 50S determined in advance. If the determination is made (step ST24; YES), the control unit 22 causes the CPU 21 to perform change processing of the imaging conditions (step ST25).
  • FIG. 11 shows a flowchart of imaging condition change processing performed in the microscope observation system 1-2 of the present embodiment.
  • control unit 22 causes the detection unit 18 to emit light to the bottom surface 50a of the culture container 50 containing the observation target S (step ST31).
  • the reflected light reflected by the bottom surface 50a is detected (step ST32).
  • control unit 22 acquires the height of the bottom surface 50a of the culture container 50 based on the reflected light detected by the detection unit 18 (step ST33).
  • control unit 22 drives the CPU 21 to acquire the height difference of the bottom surface 50a from the height of the bottom surface 50a of the culture container 50 acquired in the process of step ST33 of FIG. 11 (step ST34).
  • the control unit 22 acquires the size of the movable range of the piezoelectric element 15A stored in the secondary storage unit 25 (step ST35).
  • the control unit 22 determines that the height difference is larger than the size of the movable range (step ST36; YES)
  • the control unit 22 sets the height of the bottom surface 50a of the culture container 50 to the actuator 15B.
  • the position of the movable range of the piezoelectric element 15A is changed (step ST37). Specifically, when the focus position of the objective lens 14b based on the height of the bottom surface 50a of the culture vessel 50 is out of the movable range of the piezoelectric element 15A, the objective lens 14b is driven by driving the actuator 15B.
  • the control unit 22 changes the position of the movable range of the piezoelectric element 15A so as to move to the focus position, thereby changing the imaging condition.
  • step ST26 the CPU 21 shifts the processing to step ST26, and the control unit 22 causes the imaging unit 16 to perform main shooting using the changed shooting conditions (step ST26).
  • step ST24 when it is determined in step ST24 that the curvature acquired by the control unit 22 is not different from the curvature of the bottom surface of the culture vessel 50S determined in advance (step ST24; NO), the CPU 21 shifts the processing to step ST26. Then, the control unit 22 causes the imaging unit 16 to perform the main imaging using the imaging conditions set in advance (step ST26).
  • phase difference images at each observation position R of the photographed observation target S are combined by the processing unit 23 to generate a single combined phase difference image, and the generated combined phase difference image is displayed by the control unit 22 using the display device 30. Is displayed on.
  • the control unit 22 controls the shape information of the bottom surface 50a of the culture container 50 containing the observation target S to be the shape information of the bottom surface 50a of the culture container 50 predetermined.
  • imaging conditions are changed from imaging conditions based on shape information of the bottom surface 50a of the culture container 50 determined in advance to imaging conditions based on the shape information of the bottom surface 50a of the culture container 50 containing the observation target S Since the imaging is performed by the unit 16, the imaging unit 16 can perform imaging under imaging conditions suitable for the shape of the bottom surface 50 a of the culture container 50 in which the observation target S is accommodated. It is possible to suppress the deterioration of the image quality.
  • the microscope observation system 1-3 of the present embodiment includes the notification unit of the present invention in addition to the configuration of the microscope observation system 1 of the first embodiment described above with reference to FIGS. Therefore, only the notification unit will be described below, and the description of the other components will be omitted.
  • the notification unit of the present invention receives a command from the control unit 22 when the shape information of the bottom surface 50a of the culture container 50 containing the observation target S is different from the shape information of the bottom surface 50a of the culture container 50 determined in advance. Report that it is different.
  • the notification unit of the present invention is configured of the display device 30 as an example.
  • the display device 30 as a notification unit is configured by a display, and displays, for example, “The culture container is different” on the screen according to a command from the control unit 22.
  • the control unit 22 warns the user that the culture containers are different by visually displaying a message or the like indicating that the culture containers are different on the display.
  • the technology of the present invention is not limited thereto.
  • it may be an audible display by which a sound is output by the sound reproducing apparatus, or a permanent visible display recorded on a recording medium such as a sheet using a printer.
  • it is a display by a combination of at least two or more of a visible display by a display, an audible display by audio being output by an audio reproduction device, and a permanent visible display recorded on a recording medium such as paper using a printer.
  • the culture containers may be communicated that the culture containers are different by communication means such as mail or telephone, or may be notified that the culture containers are different by turning on or blinking the indicator light. At least two or more of the above notification methods may be combined to notify that the culture vessels are different.
  • FIG. 12 is a flowchart of processing performed in the microscope observation system 1-3 of the present embodiment.
  • the processing of steps ST41 to ST44 performed in the microscope observation system 1-3 of the present embodiment is the processing of steps ST1 to ST4 in the flowchart shown in FIG. 8 of the processing performed in the microscope observation system 1 of the first embodiment. Since the process is the same as the process, the description here is omitted, and only different portions will be described.
  • the height acquired by the control unit 22 is the height of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the height of the bottom surface of the culture container 50S determined in advance. If it is determined that they are different (step ST44; YES), the control unit 22 notifies (displays) the different facts to the display device 30 as described above (step ST45), Processing ends.
  • the control unit 22 controls the shape information of the bottom surface 50 a of the culture container 50 containing the observation target S to be the shape information of the bottom surface 50 a of the culture container 50.
  • the display 30 is made to display that it is different, so that the culture container 50 containing the observation target S to be photographed is not the user's desired culture container 50S. Since the user can know, for example, the photographing object is replaced with the observation object stored in the predetermined culture container 50S, or the observation object is cultured again in the predetermined culture container 50S, or the like. be able to. Therefore, since the control unit 22 can prevent the imaging unit 16 from capturing a captured image with a lowered image quality, it is possible to suppress a decrease in the image quality of the captured image caused by a mistake in the culture container 50.
  • the imaging optical system drive unit 15 includes the piezoelectric element 15A and the actuator 15B, but the present invention is not limited to this, and only the piezoelectric element 15A May be provided.
  • the microscope observation system 1-4 of the present embodiment includes the notification unit of the present invention in addition to the configuration of the microscope observation system 1 of the first embodiment described above with reference to FIGS. 1 to 5.
  • description here is abbreviate
  • FIG. 13 is a flowchart of processing performed in the microscope observation system 1-4 of the present embodiment.
  • the processes of steps ST51 to ST54 performed in the microscope observation system 1-4 of the present embodiment are the steps ST21 to ST21 of the flowchart shown in FIG. 10 of the process performed in the microscope observation system 1-2 of the second embodiment. Since the process is the same as the process of ST24, the description here is omitted, and only different parts will be described.
  • the curvature obtained by the control unit 22 is different from the curvature of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the curvature of the bottom of the culture container 50S determined in advance. If it is determined that there is (step ST54; YES), the control unit 22 notifies (displays) the difference to the display device 30 (step ST55), and the series of processing ends.
  • the control unit 22 controls the shape information of the bottom surface 50a of the culture container 50 containing the observation target S to be the shape information of the bottom surface 50a of the culture container 50 predetermined.
  • the display 30 is made to display that it is different, so that the culture container 50 containing the observation target S to be photographed is not the user's desired culture container 50S. Since the user can know, for example, the photographing object is replaced with the observation object stored in the predetermined culture container 50S, or the observation object is cultured again in the predetermined culture container 50S, or the like. be able to. Therefore, since the control unit 22 can prevent the imaging unit 16 from capturing a captured image with a lowered image quality, it is possible to suppress a decrease in the image quality of the captured image caused by a mistake in the culture container 50.
  • the imaging optical system drive unit 15 includes the piezoelectric element 15A and the actuator 15B, but the present invention is not limited to this, and only the piezoelectric element 15A May be provided.
  • the microscope observation system 1-5 of this embodiment can use the same configuration as that of the microscope observation system 1 of the first embodiment described above with reference to FIGS. I omit it.
  • identification information of the culture container 50S predetermined by the user as shape information 29 is stored in the secondary storage unit 25.
  • a barcode or QR code (registered trademark) associated with the identification information of the culture container 50 is given in advance to the culture container 50 in which the observation target S is stored, and the barcode or QR code (registered trademark) )
  • the identification information of the culture container 50 may be, for example, a model number of a manufacturer or a serial number.
  • FIG. 14 is a flowchart of processing performed in the microscope observation system 1-5 of the present embodiment.
  • the control unit 22 receives the identification information of the culture container 50 containing the observation target S input by the user using the input device 40 (step S61), and the observation target S is stored.
  • the identification information of the culture container 50 is acquired (step ST62).
  • the control unit 22 determines that the acquired identification information is different from the identification information of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the identification information of the culture container 50S determined in advance. If it has (step ST63; YES), the control unit 22 causes the CPU 21 to perform change processing of the imaging conditions (step ST64).
  • the changing process of the imaging conditions is the same as the imaging condition changing process of FIG. 11 performed in the microscope observation system 1-2 of the second embodiment described above, and thus the description thereof will be omitted.
  • the CPU 21 shifts the process to step ST65, and the control unit 22 causes the imaging unit 16 to perform main shooting using the changed shooting conditions (step ST65).
  • step ST63 when it is determined in step ST63 that the identification information acquired by control unit 22 is not different from the identification information of culture container 50S set in advance (step ST63; NO), CPU 21 shifts the process to step ST65. Then, the control unit 22 causes the imaging unit 16 to perform the main imaging using the imaging conditions set in advance (step ST65).
  • phase difference images at each observation position R of the photographed observation target S are combined by the processing unit 23 to generate a single combined phase difference image, and the generated combined phase difference image is displayed by the control unit 22 using the display device 30. Is displayed on.
  • the control unit 22 controls the shape information of the bottom surface 50a of the culture container 50 containing the observation target S to be the shape information of the bottom surface 50a of the culture container 50 previously determined.
  • imaging conditions are changed from imaging conditions based on shape information of the bottom surface 50a of the culture container 50 determined in advance to imaging conditions based on the shape information of the bottom surface 50a of the culture container 50 containing the observation target S Since the imaging is performed by the unit 16, the imaging unit 16 can perform imaging under imaging conditions suitable for the shape of the bottom surface 50 a of the culture container 50 in which the observation target S is accommodated. It is possible to suppress the deterioration of the image quality.
  • the microscope observation system 1-6 of the present embodiment includes the notification unit of the present invention in addition to the configuration of the microscope observation system 1 of the first embodiment described above with reference to FIGS.
  • description here is abbreviate
  • FIG. 15 is a flowchart of processing performed in the microscope observation system 1-6 of the present embodiment.
  • the processing of step ST71 to step ST73 performed in the microscope observation system 1-6 of the present embodiment is the step ST61 to step of the flowchart shown in FIG. 14 of the processing performed in the microscope observation system 1-5 of the fifth embodiment. Since the process is the same as the process of ST63, the description here is omitted, and only different parts will be described.
  • the identification information obtained by the control unit 22 is different from the identification information of the culture container 50S stored as the shape information 29 in the secondary storage unit 25, that is, the identification information of the culture container 50S determined in advance. If it is determined (step ST73; YES), the control unit 22 notifies (displays) the display device 30 that the difference is made (step ST74), and the series of processing ends.
  • the control unit 22 controls the shape information of the bottom surface 50a of the culture container 50 containing the observation target S to be the shape information of the bottom surface 50a of the culture container 50 predetermined.
  • the display 30 is made to display that it is different, so that the culture container 50 containing the observation target S to be photographed is not the user's desired culture container 50S. Since the user can know, for example, the photographing object is replaced with the observation object stored in the predetermined culture container 50S, or the observation object is cultured again in the predetermined culture container 50S, or the like. be able to. Therefore, since the control unit 22 can prevent the imaging unit 16 from capturing a captured image with a lowered image quality, it is possible to suppress a decrease in the image quality of the captured image caused by a mistake in the culture container 50.
  • the imaging optical system drive unit 15 includes the piezoelectric element 15A and the actuator 15B, but the present invention is not limited to this, and only the piezoelectric element 15A May be provided.
  • FIG. 16 is a block diagram showing the configuration of the microscope observation system 1-7 of the present embodiment.
  • the microscope observation system 1-7 of the present embodiment includes the vertical direction drive unit 19 in the configuration of the microscope observation system 1 of the first embodiment described above with reference to FIG. 5.
  • the imaging optical system drive unit 15 may not include the actuator 15B.
  • the vertical direction drive unit 19 is configured of an actuator having a pulse motor or the like.
  • the vertical direction drive unit 19 is drive-controlled by the control unit 22 and moves the stage 51 in the Z direction, that is, the optical axis direction.
  • the vertical direction drive unit 19 is an example of the optical axis direction drive unit of the present invention.
  • the control unit is configured to move the culture container 50 containing the observation target S relative to the imaging optical system 14.
  • 22 drives the actuator 15B to move the objective lens 14b, that is, the imaging optical system 14 in the Z direction.
  • the control unit 22 moves in the vertical direction in order to move the culture vessel 50 containing the observation target S relative to the imaging optical system 14. By driving the drive unit 19, the stage 51 is moved in the Z direction.
  • the imaging optical system drive unit 15 may include an actuator 15B.
  • the control unit 22 drives at least one of the actuator 15B and the vertical direction drive unit 19 to move the culture vessel 50 containing the observation target S relative to the imaging optical system 14.
  • the stage 51 is moved in the Z direction.
  • the present invention is applied to a phase contrast microscope, but the present invention is not limited to a phase contrast microscope, and can be applied to other microscopes such as a differential interference microscope and a bright field microscope. .
  • the shooting control program 26 is read from the secondary storage unit 25.
  • the shooting control program 26 may first be stored in any portable storage medium 250 such as versatile disc-read only memory.
  • the imaging control program 26 of the storage medium 250 is installed in the microscope observation system 1, and the installed imaging control program 26 is executed by the CPU 21.
  • the photographing control program 26 is stored in a storage unit such as another computer or a server device connected to the microscope apparatus 10 via a communication network (not shown), and the photographing control program 26 receives a request from the microscope apparatus 10. It may be downloaded accordingly. In this case, the downloaded shooting control program 26 is executed by the CPU 21.
  • the imaging control process is realized by the software configuration using a computer, but the technology of the present disclosure is not limited to this.
  • an FPGA Field-Programmable Gate Array
  • ASIC Application
  • the imaging control process may be executed only by the hardware configuration such as a specific integrated circuit).
  • the photographing control process may be executed by a combination of a software configuration and a hardware configuration.
  • the notification unit is notified of the difference or the bottom surface of the predetermined container Since the imaging unit changes the imaging condition based on the shape information to the imaging condition based on the shape information of the bottom surface of the container in which the observation target is accommodated, the degradation of the image quality of the captured image due to the container error is suppressed it can.
  • microscope observation system 10 microscope apparatus 11 white light source 12 condenser lens 13 slit plate 14 imaging optical system 14a phase difference lens 14b objective lens 14c phase plate 14d imaging lens 15 imaging optical system drive unit 16 imaging unit 17 horizontal direction drive unit 18 detection unit 19 vertical direction drive unit 20 microscope control device 21 CPU 22 control unit 23 processing unit 24 primary storage unit 25 secondary storage unit 26 imaging control program 27 external I / F 28 bus line 29 shape information 30 display device 40 input device 50 culture vessel 50S predetermined culture vessel 50a bottom surface 50b lower surface 51 stage 51a opening L illumination light C culture medium S observation object

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Microscoopes, Condenser (AREA)
  • Apparatus Associated With Microorganisms And Enzymes (AREA)

Abstract

撮像制御装置、撮影制御装置の作動方法、及び撮影制御プログラムにおいて、容器の間違いに起因する撮影画像の画質の低下を抑制する。観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部(一例として表示装置30)に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から前記観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部16に撮影させる。

Description

撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム
 本発明は、撮像部に容器内に収容された観察対象を撮像させる撮像制御装置及び撮像制御装置の作動方法並びに撮影制御プログラムに関するものである。
 ES(Embryonic Stem)細胞及びiPS(Induced Pluripotent Stem)細胞等の多能性幹細胞は、種々の組織の細胞に分化する能力を備えたものであり、再生医療、薬の開発、及び病気の解明等において応用が可能なものとして注目されている。
 そして、ES細胞及びiPS細胞等の多能性幹細胞、又は分化誘導された細胞等を顕微鏡装置等で撮像し、その画像の特徴を捉えることで細胞の分化状態等を評価する方法が提案されている。
 一般的に、顕微鏡装置を用いて上記細胞を撮影する場合には、予め撮影条件を設定しておき、設定された撮影条件で撮影を行う。しかしながら培養された多能性幹細胞が収容された容器において、容器の曇りすなわち容器に付着した液滴、蒸発等に起因する培養液の量や濃度の変化、容器の種類の間違い、人為的ミス等の様々な要因により上記設定された撮影条件が撮影時において必ずしも最適な条件ではない場合がある。
 そこで特許文献1には、事前撮影を行って事前撮像画像を取得し、事前撮像画像において輝度が低かった部分ほど入射光量が多くなるように照射光の光量分布を設定して再度撮影(本撮影)を行うことにより、照射光に起因する画像の濃度ムラを軽減する技術が開示されている。
特開2013-228361号公報
 通常、ES細胞及びiPS細胞などの多能性幹細胞は、ウェルプレートなどの培養容器内に収容され、インキュベータ内において、環境温度及び環境湿度が管理された状態で培養される。そして、培養された多能性幹細胞を撮像する際に、培養容器がインキュベータから顕微鏡装置に移動される。
 しかしながら、顕微鏡観察において用いられる培養容器においては、培養容器の種類、例えば製造メーカの違い等によって培養容器内面の表面処理や容器の材質等が異なることがある。この表面処理や容器の材質等が異なると、培養容器内に収容された観察対象の培養状態や、液体の表面に形成されるメニスカス等の形状が異なってしまい、光学的な条件等、撮影条件が変わってしまう場合がある。また、一般的に、上記培養容器は使い捨てタイプのものが多く、製造精度があまり良くない。培養容器の底面に形成されるたわみ(凹凸)についても、例えば製造メーカの違い等、培養容器の種類によって異なり、製造誤差の範囲も異なる場合がある。
 一方、上述したように細胞を顕微鏡装置で撮影する際、高倍率な広視野画像を取得するため、いわゆるタイリング撮影を行うことが提案されている。具体的には、上記培養容器が設置されたステージを、結像光学系に対して相対的に移動させることによって培養容器内の各観察位置を走査し、観察位置毎の画像を撮像した後、その観察位置毎の画像を結合する方法が提案されている。
 ここで、培養容器の底面にはたわみがあるため、培養容器の底面のたわみ情報に基づいて、駆動部が観察位置毎に対物レンズを光軸方向に移動させることによりオートフォーカス制御を行って焦点位置を合わせる必要がある。しかしながら、培養容器の底面に形成されるたわみは、例えば製造メーカの違い等、培養容器の種類によって異なっている。従って顕微鏡装置に設置する予め定められた種類の培養容器、すなわちユーザが意図する培養容器で顕微鏡装置の撮影条件が設定されている場合に、ユーザが意図する培養容器以外の培養容器が顕微鏡装置に設置された場合には、駆動部が対物レンズを光軸方向に移動させる移動可能な範囲(以下、駆動部による駆動可能レンジという)よりも培養容器の底面のたわみ、すなわち培養容器の底面の高低差が大きくなってしまう場合があり、これにより、駆動部による駆動可能レンジを超えてしまうことによって焦点位置が合わずに撮影画像がボケた画像になってしまう場合がある。撮影画像がボケた画像になってしまった場合には、培養容器をユーザが意図する培養容器に変えて、観察対象すなわち細胞の培養からやり直す必要がある。
 本発明は上記事情に鑑みなされたものであり、容器の間違いに起因する撮影画像の画質の低下を抑制できる撮影制御装置及び撮影制御装置の作動方法並びに撮影制御プログラムを提供することを目的とする。
 本発明の撮影制御装置は、観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる制御部を備える。
 なお、本発明において、「容器の底面」は観察対象を収容する容器内の底面であり、観察対象の設置面を意味する。
 また、本発明において、「報知部」はメッセージ等を可視表示させるディスプレイ、音声が出力されることにより可聴表示させる音声再生装置、用紙等の記録媒体に記録して永久可視表示させるプリンタ、メールや電話等の通信手段及び表示灯等を意味し、上記ディスプレイ、上記音声再生装置、上記プリンタ、上記通信手段及び上記表示光のうちの少なくとも2つ以上を組み合わせてもよい。
 また、本発明において「容器の底面の形状情報」は、容器の底面の高さ、容器の底部の厚さ及び容器の底面の曲率のうちの少なくとも1つ以上を含むものとする。
 なお、本発明において「容器の底面の高さ」は、予め定められた基準面から容器の底面までの距離を意味する。ここで上記基準面は、容器の底部の下面としてもよいし、測定部の光の照射口を含み、かつ容器の鉛直方向に直交する面としてもよいし適宜定めることができる。基準面を容器の底部の下面とする場合には、「容器の底面の高さ」は「容器の底部の厚さ」と一致する。
 また、本発明において「容器」は、蓋が被せられている場合には、蓋も含めて容器と総称する。
 また、本発明の撮影制御装置は、制御部が、撮像部による本撮影の前に、観察対象が収容された容器の底面の形状を測定するプレ測定を測定部に対して行わせることにより観察対象が収容された容器の底面の形状情報を取得してもよい。
 なお、本発明において「本撮影」は、ユーザが所望する撮影画像を取得する際に行われる撮影を意味し、「プレ測定」は上記本撮影が行われる前に行われる事前測定を意味する。
 また、本発明の撮影制御装置は、制御部が、観察対象が収容された容器の底面に対して測定部に光を照射させ、底面で反射した反射光に基づいて形状情報として容器の底面の高さを取得してもよい。
 この場合、測定部が、レーザ変位センサであってもよい。
 また、本発明の撮影制御装置は、測定部が、撮像部を有し、
 制御部が、撮像部に容器に収容された観察対象を撮像させて取得した撮影画像に基づいて形状情報として容器の底面の曲率を取得してもよい。
 また、本発明の撮影制御装置は、容器内の観察対象の像を結像させる結像光学系に対して、観察対象が収容された容器を結像光学系の光軸方向に相対的に移動させる光軸方向駆動部が結像光学系又は容器を光軸方向に相対移動させる移動可能な範囲の大きさよりも観察対象が収容された容器の底面の高低差が大きい場合に、制御部が容器の底面の高さに応じて光軸方向駆動部に対して上記範囲の位置を変えさせて、撮像部に撮影させてもよい。
 なお、本発明において、「光軸方向駆動部が結像光学系又は容器を光軸方向に相対移動させる移動可能な範囲」は、光軸方向駆動部による光軸方向において駆動可能な範囲を意味する。また「容器の底面の高低差」は、容器の底面全体において最も低いところと最も高いところの差を意味する。
 また、本発明の撮影制御装置は、容器の形状情報を記憶する形状情報記憶部を備え、
 形状情報記憶部が、観察対象が収容された容器の識別情報と、容器の底面の形状情報とを対応付けたテーブルを記憶していてもよい。
 また、本発明の撮影制御装置は、容器が、ディッシュ、ウェルプレートまたはフラスコであってもよい。
 本発明の撮影制御装置の作動方法は、制御部を備える撮影制御装置の作動方法であって、
 制御部が、観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる。
 なお、本発明による撮影制御装置の作動方法をコンピュータに実行させるプログラムとして提供してもよい。
 本発明による他の撮影制御装置は、コンピュータに実行させるための命令を記憶するメモリと、
 記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
 観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から前記観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる処理を実行する。
 本発明によれば、観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させるので、異なっていることを報知部に報知させる場合には、撮影しようとしている観察対象が収容された容器がユーザの所望する、つまり予め定められた容器ではないことをユーザが知ることができるので、撮影対象を例えば予め定められた容器に収容された観察対象に取り換えたり、予め定められた容器で観察対象を培養し直したり等、対策を講じることができる。従って、制御部が撮像部に画質の低下した撮影画像を撮影させるのを防止することができるので、容器の間違いに起因する撮影画像の画質の低下を抑制できる。また、観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる場合には、撮像部は観察対象が収容された容器の底面の形状に適した撮影条件で撮影を行うことができ、容器の間違いに起因する撮影画像の画質の低下を抑制できる。
本実施形態の顕微鏡観察システムにおける第1の実施形態の顕微鏡装置の概略構成を示す図 結像光学系の構成を示す模式図 結像光学系駆動部の構成を示す模式図 ステージの構成を示す斜視図 本実施形態の顕微鏡観察システムの構成を示すブロック図 観察対象が収容された培養容器を示す模式図 培養容器の底面の形状情報を説明するための図 第1の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第1の実施形態の顕微鏡観察システムにおいて行われる撮影条件変更処理のフローチャート 第2の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第2の実施形態の顕微鏡観察システムにおいて行われる撮影条件変更処理のフローチャート 第3の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第4の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第5の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第6の実施形態の顕微鏡観察システムにおいて行われる一連の処理のフローチャート 第7の実施形態の顕微鏡観察システムの構成を示すブロック図 第1~第3実施形態に係る撮影制御プログラムが記憶された記憶媒体から撮影制御プログラムが顕微鏡制御装置にインストールされる態様の一例を示す概念図
 以下、本発明の撮影制御装置の第1の実施形態を用いた顕微鏡観察システム1について、図面を参照しながら詳細に説明する。図1は、第1の実施形態の顕微鏡観察システム1における顕微鏡装置10の概略構成を示す図である。なお本実施形態では、顕微鏡観察システム1は顕微鏡装置10と後述する顕微鏡制御装置20とから構成されており、顕微鏡制御装置20が本発明の撮影制御装置の一例である。
 顕微鏡装置10は、観察対象である培養された細胞の位相差画像を撮像するものである。具体的には、顕微鏡装置10は、図1に示すように、白色光を出射する白色光源11、コンデンサレンズ12、スリット板13、結像光学系14、結像光学系駆動部15、撮像部16、検出部18及びステージ51を備える。
 スリット板13は、白色光源11から出射された白色光を遮光する遮光板に対して白色光を透過するリング形状のスリットが設けられたものであり、白色光がスリットを通過することによってリング状の照明光Lが形成される。
 図2は、結像光学系14の詳細な構成を示す図である。結像光学系14は、図2に示すように、位相差レンズ14a及び結像レンズ14dを備える。位相差レンズ14aは、対物レンズ14b及び位相板14cを備える。位相板14cは、照明光Lの波長に対して透明な透明板に対して位相リングを形成したものである。なお、上述したスリット板13のスリットの大きさは、位相板14cの位相リングと共役な関係にある。
 位相リングは、入射された光の位相を1/4波長ずらす位相膜と、入射された光を減光する減光フィルタとがリング状に形成されたものである。位相リングに入射された直接光は、位相リングを通過することによって位相が1/4波長ずれ、かつ明るさが弱められる。一方、観察対象によって回折された回折光は大部分が位相板14cの透明板を通過し、その位相及び明るさは変化しない。
 対物レンズ14bは、後述する結像光学系駆動部15によって対物レンズ14bの光軸方向に移動する。なお、本実施形態においては、対物レンズ14bの光軸方向とZ方向(鉛直方向)とは同じ方向である。対物レンズ14bのZ方向への移動によってオートフォーカス制御が行われ、撮像部16によって撮像される位相差画像のコントラストが調整される。
 また、位相差レンズ14aの倍率を変更可能な構成としてもよい。具体的には、異なる倍率を有する位相差レンズ14a又は結像光学系14を交換可能に構成するようにしてもよい。位相差レンズ14a又は結像光学系14の交換は、自動的に行うようにしてもよいし、ユーザが手動で行うようにしてもよい。
 ここで図3に結像光学系駆動部15の構成を示す模式図を示す。結像光学系駆動部15は、培養容器50内の観察対象Sの像を結像させる結像光学系14に対して、観察対象Sが収容された培養容器50を結像光学系14の光軸方向に相対的に移動させるものであり、本発明の光軸方向駆動部の一例である。
 本実施形態の結像光学系駆動部15は、図3に示すように、アクチュエータ15Bとアクチュエータ15Bの鉛直方向の上側に配置された圧電素子15Aを備える。アクチュエータ15Bは、鉛直方向(Z方向)に移動する移動部材とこの移動部材へ動力を伝達するパルスモータとを備え、後述する制御部22から出力された制御信号に基づいて駆動する。アクチュエータ15Bは、移動部材の移動によって圧電素子15Aを鉛直方向に移動させる。
 圧電素子15Aは、後述する制御部22から出力された制御信号に基づいて駆動するものであり、対物レンズ14bを鉛直方向に移動させる。なお、結像光学系駆動部15は、位相差レンズ14aを通過した位相差画像をそのまま通過させる構成となっている。
 本実施形態において、圧電素子15Aは、アクチュエータ15Bに比べて高速で結像光学系14をZ方向に移動させることが可能である。一方で、圧電素子15Aは、アクチュエータ15Bに比べて鉛直方向における駆動可能な範囲が小さい。具体的には圧電素子15Aの駆動可能な範囲が例えば640μmであるのに対してアクチュエータBの駆動可能な範囲は例えば5mmである。ここで圧電素子15Aの駆動可能な範囲の値は、予め後述する二次記憶部25に記憶しておく。なお圧電素子15Aの駆動可能な範囲の値が二次記憶部25に記憶されていない場合には、ユーザが入力装置40によって上記範囲の値を入力することができる。
 本実施形態の結像光学系駆動部15においては、オートフォーカス制御を行う場合の対物レンズ14bのZ方向への移動は圧電素子15Aを使用し、対物レンズ14bのZ方向への移動が圧電素子15Aの駆動可能な範囲から外れた場合に、アクチュエータ15Bによって圧電素子15AをZ方向へ移動させることにより、圧電素子15Aの駆動可能な範囲の位置を変えて、圧電素子15Aによって対物レンズ14bのZ方向への移動を可能にする。なお圧電素子15A及びアクチュエータ15Bの駆動方法については後で詳細に説明する。
 なお、本実施形態の結像光学系駆動部15は、圧電素子15A及びアクチュエータ15Bで構成されるものとしたが、本発明はこれに限られるものではなく、対物レンズ14bをZ方向に移動可能なものであればよく、その他の公知な構成を用いることができる。また本実施形態のアクチュエータ15Bはパルスモータを有するものとしたが、本発明はこれに限られるものではなく、圧電素子15AをZ方向に移動可能なものであればよく、その他の公知な構成を用いることができる。
 また、本実施形態の結像光学系駆動部15は、対物レンズ14bのみをZ方向に移動させるものとしたが、本発明はこれに限られるものではなく、位相差レンズ14aをZ方向に移動させる構成としてもよい。
 結像レンズ14dは、位相差レンズ14a及び結像光学系駆動部15を通過した位相差画像が入射され、これを撮像部16に結像する。
 撮像部16は、結像レンズ14dによって結像された観察対象Sの像を受光し、観察対象Sを撮像して位相差画像を観察画像として出力する撮像素子を備える。撮像素子としては、CCD(charge-coupled device)イメージセンサ、及びCMOS(Complementary Metal-Oxide Semiconductor)イメージセンサ等を用いることができる。撮像素子としては、RGB(Red Green Blue)のカラーフィルタが設けられた撮像素子を用いてもよいし、モノクロの撮像素子を用いてもよい。
 検出部18は、ステージ51に設置された培養容器50の底面50aのZ方向(鉛直方向)の位置を検出する。検出部18は、具体的には、第1の変位センサ18a及び第2の変位センサ18bを備える。第1の変位センサ18a及び第2の変位センサ18bは、位相差レンズ14aを挟んで、図1に示すX方向に並べて設けられている。本実施形態における第1の変位センサ18a及び第2の変位センサ18bはレーザ変位計(レーザ変位センサ)であり、培養容器50にレーザ光を照射し、その反射光を検出することによって、培養容器50の底面50aのZ方向の位置を検出する。ここで、図6に観察対象が収容された培養容器50を示す模式図を示す。培養容器50の底面50aは、観察対象Sを収容する培養容器50内の底面50aであり、観察対象Sの設置面である。なおこの設置面は、培養容器50の底部と観察対象である細胞との境界面である。また培養容器50の底部の下面を下面50bとする。
 本実施形態においては検出部18がプレ測定を行う本発明の測定部の一例である。検出部18は後述する制御部22から出力された制御信号に基づいてプレ測定を行う。具体的には培養容器50の底面50aに対してレーザ光を照射し、培養容器50の底面50aで反射した反射光を検出することによって、培養容器50の底面50aの形状情報として培養容器50の底面50aの高さを検出する。本実施形態において培養容器50の底面50aの高さは、検出部18を基準面とし、検出部18が検出した反射光の信号の値を培養容器50の底面50aの高さを表す値とする。なお検出部18は、培養容器50の底面50aの高さとして、X-Y方向に10μm×10μmの空間分解能で底面50a全体の高さを測定する。なお空間分解能については、後述する二次記憶部25に記憶された形状情報29の計測時に使用された空間分解能を使用することが好ましい。
 なお、本実施形態において培養容器50の底面50aの高さの値は、検出部18が検出した反射光の信号の値としたが、本発明はこれに限られるものではなく、上記反射光の信号の値を距離に換算した値すなわち検出部18から培養容器50の底面50aまでの距離を培養容器50の底面50aの高さとしてもよい。また検出部18が培養容器50の底部の下面50b(図6参照)で反射した反射光をさらに検出することによって、培養容器50の底面50aで反射した反射光の信号の値から培養容器50の底部の下面50bで反射した反射光の値を減算して培養容器50の底部の厚さを表す値を算出し、この値を培養容器50の底面50aの高さを表す値としてもよい。またこの高さを表す値を実際の距離の値に換算して使用してもよい。
 なお、本実施形態の測定部は検出部18を使用したが、本発明はこれに限られるものではなく、例えば検出部18とは別にレーザ変位センサを顕微鏡装置10に設けても良い。レーザ変位センサは、正反射光学系計測器を使用することができる。なお本発明はレーザ変位センサに限られず、例えば共焦点式センサを使用することもできる。
 検出部18によって検出された培養容器50の底面50aのZ方向の位置を表す位置情報は、制御部22に出力され、制御部22は、入力された位置情報に基づいて、結像光学系駆動部15を制御し、オートフォーカス制御を行う。
 スリット板13と位相差レンズ14a及び検出部18との間には、ステージ51が設けられている。ステージ51上には、観察対象である細胞が収容された培養容器50が設置される。
 培養容器50としては、シャーレ、ディッシュ又は複数のウェルが配列されたウェルプレート等を用いることができる。なお、本実施形態においては、複数のウェルが配列されたウェルプレートを培養容器として用いる。ただし本実施形態において上述した培養容器50はウェルプレートにおける1つのウェルの一例であるが、以下、ウェルプレートを培養容器50と総称して説明する。また、培養容器50に収容される細胞としては、iPS細胞及びES細胞といった多能性幹細胞、幹細胞から分化誘導された神経、皮膚、心筋及び肝臓の細胞、並びに人体から取り出された皮膚、網膜、心筋、血球、神経及び臓器の細胞等がある。
 ステージ51は、後述する水平方向駆動部17(図5参照)によって互いに直交するX方向及びY方向に移動する。X方向及びY方向は、観察対象設置面P1に平行な面上において互いに直交する方向であり、Z方向は、X方向及びY方向に直交する方向である。
 図4は、ステージ51の一例を示す図である。ステージ51の中央には、矩形の開口5
1aが形成されている。開口51aを形成する部材の上に培養容器50が設置され、培養容器50内の細胞の位相差画像が開口51aを通過するように構成されている。
 次に、顕微鏡装置10を制御する顕微鏡制御装置20の構成について説明する。図5は、第1の実施形態の顕微鏡制御装置20の構成を示すブロック図である。なお、顕微鏡装置10については、顕微鏡制御装置20の各部により制御される一部の構成のブロック図を示している。
 顕微鏡制御装置20は、CPU(Central Processing Unit)21、一次記憶部24、
二次記憶部25及び外部I/F(Interface)27等を備えたコンピュータから構成される。CPU21は、制御部22及び処理部23を備え、顕微鏡観察システム1の全体を制御する。一次記憶部24は、各種プログラムの実行時のワークエリア等として用いられる揮発性のメモリである。一次記憶部24の一例としては、RAM(Random Access Memory)が挙げられる。二次記憶部25は、各種プログラム及び各種パラメータ等を予め記憶した不揮発性のメモリであり、本発明の撮影制御プログラム26の一実施形態がインストールされている。この撮影制御プログラム26がCPU21によって実行されることによって制御部22及び処理部23が機能する。また二次記憶部25は、後述する形状情報29が記憶されている。二次記憶部25の一例としては、EEPROM(Electrically Erasable Programmable Read-Only Memory)又はフラッシュメモリ等が挙げられる。外部I/F27は顕微鏡装置10と顕微鏡制御装置20との間の各種情報の送受信を司る。CPU21、一次記憶部24、及び二次記憶部25は、バスライン28に接続されている。また、外部I/F27も、バスライン28に接続されている。
 撮影制御プログラム26は、DVD(Digital Versatile Disc)及びCD-ROM(Compact Disc Read Only Memory)などの記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。又は、撮影制御プログラム26は、ネットワークに接続されたサーバコンピュータの記憶装置もしくはネットワークストレージに対して、外部からアクセス可能な状態で記憶され、外部からの要求に応じてコンピュータにダウンロードされた後に、インストールされるようにしてもよい。
 形状情報29は、ユーザによって予め定められた培養容器50Sの底面すなわち設置面の形状情報である。培養容器50Sの底面の形状情報は、たとえばレーザ変位計などを用いて予め計測される。図7は培養容器50Sの底面の形状情報を説明するための図である。本実施形態の形状情報は、図7に示すように培養容器50Sの底面50aをX-Y方向に10μm×10μmの空間分解能で計測された情報とする。なお、形状情報の空間分解能はこれに限られるものではない。また、培養容器50Sの底面50aの形状情報の計測方法としては、レーザ変位計による計測に限らず、10μmオーダーで計測できる方式であれば、共焦点方式および分光干渉方式などその他の方式を用いて計測するようにしてもよい。
 また、培養容器50Sの底面50aの形状情報は、ステージ51上にユーザによって予め定められた培養容器50Sを設置して、顕微鏡装置10に設けられた検出部18によって計測するようにしてもよいし、培養容器50Sの識別情報と予め計測された形状情報とを対応づけたテーブルを二次記憶部25に記憶しておいてもよい。そして、ユーザが、入力装置40を用いてユーザによって予め定められた培養容器50Sの識別情報を設定入力し、その識別情報を有する培養容器50Sの形状情報を二次記憶部25から読み出すようにしてもよい。また、培養容器50Sの識別情報については、ユーザが設定入力するのではなく、培養容器50SにバーコードやQR(Quick Response)コード(登録商標)などを付与し、そのバーコードやQRコード(登録商標)を読み取ることによって識別情報を取得するようにしてもよい。なお培養容器50Sの識別情報は、例えば製造メーカの型式番号であってもよいし、製造番号であってもよい。なお必ずしも上記テーブルを二次記憶部25に記憶しておかなくても、CPU21によって培養容器50Sの識別情報から予め計測された形状情報を導出させてもよい。
 また、上記では、汎用コンピュータが顕微鏡制御装置20として機能する場合について説明したが、専用コンピュータによって実施されてもよい。専用コンピュータは、内蔵されたROM(Read Only Memory)やフラッシュメモリなど、不揮発メモリに記録されたプログラムを実行するファームウェアであってもよい。さらに、この顕微鏡制御装置20の少なくとも一部の機能を実行するためのプログラムを永久的に記憶するASIC(Application Specific Integrated Circuit :特定用途向け集積回路)やFPGA(field programmable gate arrays)などの専用回路を設けるようにしてもよい。あるいは、専用回路に記憶されたプログラム命令と、専用回路のプログラムを利用するようにプログラムされた汎用のCPUによって実行されるプログラム命令と組み合わせるようにしてもよい。以上のように、コンピュータのハードウェア構成をどのように組み合わせてプログラム命令を実行してもよい。
 制御部22は、上述したように検出部18によって検出された培養容器50の底面のZ方向の位置情報に基づいて、結像光学系駆動部15を制御する。そして、結像光学系駆動部15の駆動によって結像光学系14の対物レンズ14bが光軸方向に移動し、オートフォーカス制御が行われる。また制御部22は、水平方向駆動部17を駆動制御し、これによりステージ51をX方向及びY方向に移動させる。水平方向駆動部17は、圧電素子等を有するアクチュエータから構成される。
 本実施形態においては、制御部22による制御によってステージ51をX方向及びY方向に移動させ、結像光学系14を培養容器50内において2次元状に走査し、結像光学系14による各観察位置の位相差画像を撮像する。すなわち1つのウェル内で分割された複数の撮像領域(視野)毎の位相差画像が撮像される。
 また、制御部22は、顕微鏡装置10によって撮影された各観察位置の位相差画像を結合することによって生成された1枚の合成位相差画像を表示装置30に表示させる表示制御部としても機能する。
 ここで、顕微鏡観察において用いられる培養容器50においては、培養容器50の種類、例えば製造メーカの違い等によって培養容器50内面の表面処理や容器の材質等が異なることがある。この表面処理や容器の材質等が異なると、培養容器50内に収容された観察対象の培養状態や、液体の表面に形成されるメニスカス等の形状が異なってしまい、光学的な条件等、撮影条件が変わってしまう場合がある。また、一般的に、培養容器50は使い捨てタイプのものが多く、製造精度があまり良くない。培養容器50の底面50aに形成されるたわみ(凹凸)についても、例えば製造メーカの違い等、培養容器50の種類によって異なり、製造誤差の範囲も異なる場合がある。
 一方、培養容器50の底面50aにはたわみがあるため、培養容器50の底面50aの形状情報に基づいて、結像光学系駆動部15が観察位置毎に対物レンズ14bを光軸方向に移動させることによりオートフォーカス制御を行って焦点位置を合わせる必要がある。しかしながら、培養容器50の底面50aに形成されるたわみは、例えば製造メーカの違い等、培養容器50の種類によって異なっている。従って、予め定められた顕微鏡装置10に設置すべき種類の培養容器50S、すなわちユーザが意図する培養容器50Sで顕微鏡装置10の撮影条件が設定されている場合に、ユーザが意図する培養容器50S以外の培養容器50が顕微鏡装置10に設置された場合には、設定されている撮影条件が顕微鏡装置10に設置された培養容器50に対して好適なものではない可能性がある。
 例えば、圧電素子15Aが対物レンズ14bをZ方向に移動させる移動可能な範囲よりも培養容器50の底面50aのたわみ、すなわち培養容器50の底面50aの高低差が大きい場合には、圧電素子15Aによりフォーカス制御を行う際に上記移動可能な範囲を超えてしまうことによって焦点位置が合わずに撮像部16により撮影された撮影画像がボケた画像になってしまう場合がある。撮影画像がボケた画像になってしまった場合には、培養容器50をユーザが意図する培養容器50Sに変えて、観察対象すなわち細胞の培養からやり直す必要がある。なお上記ユーザが意図する培養容器50Sの底面50aの高低差は、圧電素子15Aによりフォーカス制御を行う際に上記移動可能な範囲を超えないものとなっている。すなわち、培養容器50Sの底面50aの高低差が上記移動可能な範囲を超えないものについては、対物レンズ14bのZ方向への移動が圧電素子15Aの駆動可能な範囲から外れないように、予めアクチュエータ15Bによって圧電素子15AをZ方向へ移動させることにより、圧電素子15Aの駆動可能な範囲の位置が調整されている。
 本実施形態の制御部22は、観察対象が収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50Sの底面の形状情報と異なる場合に、予め定められた培養容器50Sの底面の形状情報に基づいた撮影条件から観察対象が収容された培養容器50の底面50aの形状情報に基づいた撮影条件に変更して撮像部16に撮影させる。
 本実施形態の一例としての制御部22は、撮像部16による本撮影の前に、観察対象が収容された培養容器50の底面50aの形状を測定するプレ測定を検出部18に対して行わせることにより観察対象が収容された培養容器50の底面50aの形状情報として、培養容器50の底面50aの高さを取得する。なお検出部18によるプレ測定については上記に説明した通りである。
 また、制御部22は取得した培養容器50の底面50aの高さの値から、培養容器50の底面50aの高低差を取得し、この高低差が、圧電素子15Aが対物レンズ14bを光軸方向に移動させる移動可能な範囲の大きさよりも大きい場合に、制御部22が培養容器50の底面50aの高さに応じてアクチュエータ15Bを駆動させることで圧電素子15AをZ方向へ移動させることにより、圧電素子15Aの駆動可能な範囲のZ方向での位置を変えさせて、撮像部16に本撮影を行わせる。具体的には、培養容器50の底面50aの高さに基づく対物レンズ14bのフォーカス位置が、圧電素子15Aの上記移動可能な範囲から外れている場合に、アクチュエータ15Bを駆動させる。これにより培養容器50の底面50aの高さの形状に合わせたフォーカス制御を自動的に行うことができるので、培養容器50を予め定められたすなわちユーザが意図する培養容器50Sに変える手間や、再度細胞の培養をやり直すために要する時間を削減することができ、かつ容器の間違いに起因する撮影画像の画質の低下を抑制できる。
 次に、図5に戻り、処理部23は、撮像部16によって取得された画像信号に対して、ガンマ補正、輝度・色差変換、及び圧縮処理等の各種処理を行う。また、処理部23は、各種処理を行って得た画像信号を特定のフレームレートで1フレーム毎に制御部22に出力する。また、処理部23は、顕微鏡装置10によって撮影された各観察位置Rの位相差画像を結合することによって、1枚の合成位相差画像を生成する。
 また顕微鏡制御装置20には、入力装置40と表示装置30とがバスライン28によって接続されている。
 表示装置30は、上述したように制御部22によって生成された合成位相差画像を表示するものであり、例えば液晶ディスプレイ等を備える。また、表示装置30をタッチパネルによって構成し、入力装置40と兼用してもよい。
 入力装置40は、マウス及びキーボード等を備えたものであり、ユーザによる種々の設定入力を受け付ける。本実施形態の入力装置40は、例えば位相差レンズ14aの倍率の変更指示及びステージの移動速度の変更指示等の設定入力を受け付ける。またユーザによって予め定められた培養容器50Sの識別情報の設定入力を受け付ける。
 次に、本実施形態の顕微鏡観察システム1が行う処理について説明する。図8は、本実施形態の顕微鏡観察システム1において行われる処理のフローチャートである。
 まず制御部22が、図8に示すように、観察対象Sが収容された培養容器50の底面50aに対して検出部18に光を照射させ(ステップST1)、検出部18が培養容器50の底面50aで反射した反射光を検出する(ステップST2)。次に制御部22が、検出部18が検出した反射光に基づいて、培養容器50の底面50aの高さを取得する(ステップST3)。
 次に、制御部22が取得した高さが、二次記憶部25に形状情報29として記憶された培養容器50Sの高さ、すなわち予め定められた培養容器50Sの底面の高さと異なっていると判定した場合に(ステップST4;YES)、制御部22がCPU21に撮影条件の変更処理を行わせる(ステップST5)。
 ここで、図9に本実施形態の顕微鏡観察システム1において行われる撮影条件変更処理のフローチャートを示す。
 図9に示すように、まず制御部22がCPU21を駆動させることにより、図8のステップST3の処理で取得した培養容器50の底面50aの高さからこの底面50aの高低差を取得する(ステップST11)。
 次に制御部22が二次記憶部25に記憶された圧電素子15Aの移動可能な範囲の大きさを取得する(ステップST12)。制御部22が上記移動可能な範囲の大きさよりも上記高低差の方が大きいと判定した場合(ステップST13;YES)、制御部22はアクチュエータ15Bに対して培養容器50の底面50aの高さに応じて圧電素子15Aの移動可能な範囲の位置を変えさせる(ステップST14)。具体的には培養容器50の底面50aの高さに基づく対物レンズ14bのフォーカス位置が、圧電素子15Aの上記移動可能な範囲から外れている場合に、アクチュエータ15Bを駆動させることにより対物レンズ14bが上記フォーカス位置に移動できるように制御部22が圧電素子15Aの上記移動可能な範囲の位置を変えさせることで撮影条件を変更する。
 次に図8に戻って、CPU21が処理をステップST6へ移行して、制御部22は変更後の撮影条件を使用して撮像部16に本撮影を行わせる(ステップST6)。
 一方、ステップST4にて制御部22が取得した高さが、予め定められた培養容器50Sの底面の高さと異なっていないと判定した場合に(ステップST4;NO)、CPU21が処理をステップST6へ移行して、制御部22が予め設定された撮影条件を使用して撮像部16に本撮影を行わせる(ステップST6)。
 以上のようにして顕微鏡観察システム1による撮影が行われる。撮影された観察対象Sの各観察位置Rの位相差画像は、処理部23によって結合されて1枚の合成位相差画像が生成され、生成された合成位相差画像は制御部22によって表示装置30に表示される。
 上記実施形態の顕微鏡観察システム1によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、予め定められた培養容器50の底面50aの形状情報に基づいた撮影条件から観察対象Sが収容された培養容器50の底面50aの形状情報に基づいた撮影条件に変更して撮像部16に撮影させるので、撮像部16は観察対象Sが収容された培養容器50の底面50aの形状に適した撮影条件で撮影を行うことができ、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 次に本発明の撮影制御装置の第2の実施形態を用いた顕微鏡観察システム1-2について説明する。なお本実施形態の顕微鏡観察システム1-2は、図1~図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成と本発明の測定部に対応する構成のみが異なる。このため測定部についてのみ以下説明して、その他の構成についての説明は省略する。
 上記実施形態においては検出部18がプレ測定を行う本発明の測定部の一例であったのに対して、本実施形態の顕微鏡観察システム1-2において、プレ測定を行う本発明の測定部は、一例として撮像部16を有している。本実施形態の測定部は、撮像部16による本撮影の前に、撮像部16に培養容器50に収容された観察対象Sを事前撮影する、プレ測定を行う。
 制御部22は、撮像部16にプレ測定を行わせることにより、撮影画像を取得し、取得した撮影画像に基づいて、培養容器50の底面50aの形状情報として、培養容器50の底面50aの曲率を取得する。具体的には、取得した撮影画像の画素値を取得し、取得した画素値に基づいて曲率を算出する。
 具体的には、培養容器50として細胞が培養されている96個のウェルを有するウェルプレートを使用する場合には、デフォルトのフォーカスのZ方向の位置の値、例えばユーザが予め手動で観察して合わせたZ方向の位置の値を0として、Z方向の-150μm~+150μmの範囲において10μmの間隔でプレスキャンを行い、合計31回分のプレスキャンの測定データを取得する。31回分の測定データについては、処理速度を早くするために、それぞれ1回の測定でウェルプレートの奇数行である48個の視野のみを撮影し、撮影して取得した各視野の画像内のコントラストの平均値をそれぞれ求める。なお48個の視野においては、それぞれ1個のウェルが撮像される。そして48個の視野の各々において、最もコントラストの平均値の値が大きいZ方向の位置の値を求め、この48個の視野のX-Y方向の座標位置すなわち計測位置とこの計測位置における上記Z方向の位置の値とから曲率を求める。
 次に、本実施形態の顕微鏡観察システム1-2が行う処理について説明する。図10は、本実施形態の顕微鏡観察システム1-2において行われる処理のフローチャートである。
 まず制御部22が、図10に示すように、培養容器50に収容された観察対象Sを撮像部16に撮影させて(ステップST21)、撮影画像を取得する(ステップST22)。次に制御部22が、取得した撮影画像に基づいて、培養容器50の底面50aの曲率を取得する(ステップST33)。
 次に、制御部22が取得した曲率が、二次記憶部25に形状情報29として記憶された培養容器50Sの底面の曲率、すなわち予め定められた培養容器50Sの底面の曲率と異なっていると判定した場合に(ステップST24;YES)、制御部22がCPU21に撮影条件の変更処理を行わせる(ステップST25)。
 ここで、図11に本実施形態の顕微鏡観察システム1-2において行われる撮影条件変更処理のフローチャートを示す。
 まず制御部22が、図11に示すように、観察対象Sが収容された培養容器50の底面50aに対して検出部18に光を照射させ(ステップST31)、検出部18が培養容器50の底面50aで反射した反射光を検出する(ステップST32)。次に制御部22が、検出部18が検出した反射光に基づいて、培養容器50の底面50aの高さを取得する(ステップST33)。
 次に、制御部22がCPU21を駆動させることにより、図11のステップST33の処理で取得した培養容器50の底面50aの高さからこの底面50aの高低差を取得する(ステップST34)。
 次に制御部22が二次記憶部25に記憶された圧電素子15Aの移動可能な範囲の大きさを取得する(ステップST35)。制御部22が上記移動可能な範囲の大きさよりも上記高低差の方が大きいと判定した場合(ステップST36;YES)、制御部22はアクチュエータ15Bに対して培養容器50の底面50aの高さに応じて圧電素子15Aの移動可能な範囲の位置を変えさせる(ステップST37)。具体的には培養容器50の底面50aの高さに基づく対物レンズ14bのフォーカス位置が、圧電素子15Aの上記移動可能な範囲から外れている場合に、アクチュエータ15Bを駆動させることにより対物レンズ14bが上記フォーカス位置に移動できるように制御部22が圧電素子15Aの上記移動可能な範囲の位置を変えさせることで撮影条件を変更する。
 次に図10に戻って、CPU21が処理をステップST26へ移行して、制御部22は変更後の撮影条件を使用して撮像部16に本撮影を行わせる(ステップST26)。
 一方、ステップST24にて制御部22が取得した曲率が、予め定められた培養容器50Sの底面の曲率と異なっていないと判定した場合に(ステップST24;NO)、CPU21が処理をステップST26へ移行して、制御部22が予め設定された撮影条件を使用して撮像部16に本撮影を行わせる(ステップST26)。
 以上のようにして顕微鏡観察システム1-2による撮影が行われる。撮影された観察対象Sの各観察位置Rの位相差画像は、処理部23によって結合されて1枚の合成位相差画像が生成され、生成された合成位相差画像は制御部22によって表示装置30に表示される。
 上記実施形態の顕微鏡観察システム1-2によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、予め定められた培養容器50の底面50aの形状情報に基づいた撮影条件から観察対象Sが収容された培養容器50の底面50aの形状情報に基づいた撮影条件に変更して撮像部16に撮影させるので、撮像部16は観察対象Sが収容された培養容器50の底面50aの形状に適した撮影条件で撮影を行うことができ、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 次に本発明の撮影制御装置の第3の実施形態を用いた顕微鏡観察システム1-3について説明する。なお本実施形態の顕微鏡観察システム1-3は、図1~図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成に本発明の報知部を備えている。このため報知部についてのみ以下説明して、その他の構成についての説明は省略する。
 本発明の報知部は、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、制御部22からの指令によって異なっていることを報知する。本実施形態の顕微鏡観察システム1-3において、本発明の報知部は、一例として表示装置30で構成されている。報知部としての表示装置30は、ディスプレイで構成されており、制御部22からの指令によって、画面上に例えば「培養容器が異なっています」と表示する。
 なお上記実施形態の表示装置30では、制御部22が、ディスプレイに対して、培養容器が異なっていることを示すメッセージ等を可視表示させることで、培養容器が異なっていることをユーザに警告する場合を例示したが、本発明の技術はこれに限定されるものではない。例えば、音声再生装置により音声が出力されることによる可聴表示、又は、プリンタを用いて用紙等の記録媒体に記録する永久可視表示であってもよい。また、ディスプレイによる可視表示、音声再生装置により音声が出力されることによる可聴表示、及びプリンタを用いて用紙等の記録媒体に記録する永久可視表示のうちの少なくとも2つ以上の組み合わせによる表示であってもよい。また、メールや電話等の通信手段によって培養容器が異なっていることを連絡してもよいし、表示灯を点灯や点滅させることにより培養容器が異なっていることを報知してもよい。上記の報知方法を少なくとも2つ以上組み合わせて培養容器が異なっていることを報知してもよい。
 次に、本実施形態の顕微鏡観察システム1-3が行う処理について説明する。図12は、本実施形態の顕微鏡観察システム1-3において行われる処理のフローチャートである。なお本実施形態の顕微鏡観察システム1-3において行われるステップST41からステップST44の処理は、第1の実施形態の顕微鏡観察システム1において行われる処理の図8に示すフローチャートのステップST1からステップST4の処理と同じであるため、ここでの説明は省略し、異なる箇所についてのみ説明する。
 図12に示すように、制御部22が取得した高さが、二次記憶部25に形状情報29として記憶された培養容器50Sの高さ、すなわち予め定められた培養容器50Sの底面の高さと異なっていると判定した場合に(ステップST44;YES)、制御部22は表示装置30に対して、上述のようにして、異なっていることを報知(表示)させて(ステップST45)、一連の処理が終了する。
 上記実施形態の顕微鏡観察システム1-3によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、異なっていることを表示装置30に表示させるので、撮影しようとしている観察対象Sが収容された培養容器50がユーザの所望する、つまり予め定められた培養容器50Sではないことをユーザが知ることができるので、撮影対象を例えば上記予め定められた培養容器50Sに収容された観察対象に取り換えたり、予め定められた培養容器50Sで観察対象を培養し直したり等、対策を講じることができる。従って、制御部22が撮像部16に画質の低下した撮影画像を撮影させるのを防止することができるので、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 なお上記実施形態の顕微鏡観察システム1-3において、結像光学系駆動部15は圧電素子15Aとアクチュエータ15Bを備えたものとしたが、本発明はこれに限られるものではなく、圧電素子15Aのみを備えたものであってもよい。
 次に本発明の撮影制御装置の第4の実施形態を用いた顕微鏡観察システム1-4について説明する。なお本実施形態の顕微鏡観察システム1-4は、図1~図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成に本発明の報知部を備えている。なお報知部は上記第3の実施形態の顕微鏡観察システム1-3が備える報知部と同様のものを使用できるため、ここでの説明は省略する。
 次に、本実施形態の顕微鏡観察システム1-4が行う処理について説明する。図13は、本実施形態の顕微鏡観察システム1-4において行われる処理のフローチャートである。なお本実施形態の顕微鏡観察システム1-4において行われるステップST51からステップST54の処理は、第2の実施形態の顕微鏡観察システム1-2において行われる処理の図10に示すフローチャートのステップST21からステップST24の処理と同じであるため、ここでの説明は省略し、異なる箇所についてのみ説明する。
 図13に示すように、制御部22が取得した曲率が、二次記憶部25に形状情報29として記憶された培養容器50Sの曲率、すなわち予め定められた培養容器50Sの底面の曲率と異なっていると判定した場合に(ステップST54;YES)、制御部22は表示装置30に対して、異なっていることを報知(表示)させて(ステップST55)、一連の処理が終了する。
 上記実施形態の顕微鏡観察システム1-4によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、異なっていることを表示装置30に表示させるので、撮影しようとしている観察対象Sが収容された培養容器50がユーザの所望する、つまり予め定められた培養容器50Sではないことをユーザが知ることができるので、撮影対象を例えば上記予め定められた培養容器50Sに収容された観察対象に取り換えたり、予め定められた培養容器50Sで観察対象を培養し直したり等、対策を講じることができる。従って、制御部22が撮像部16に画質の低下した撮影画像を撮影させるのを防止することができるので、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 なお上記実施形態の顕微鏡観察システム1-4において、結像光学系駆動部15は圧電素子15Aとアクチュエータ15Bを備えたものとしたが、本発明はこれに限られるものではなく、圧電素子15Aのみを備えたものであってもよい。
 次に本発明の撮影制御装置の第5の実施形態を用いた顕微鏡観察システム1-5について説明する。なお本実施形態の顕微鏡観察システム1-5は、図1~図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成と同様のものを使用できるため、ここでの説明は省略する。
 本実施形態の顕微鏡観察システム1-5は、二次記憶部25に形状情報29としてユーザによって予め定められた培養容器50Sの識別情報が記憶されている。また観察対象Sが収容された培養容器50には予めこの培養容器50の識別情報に関連付いたバーコードやQRコード(登録商標)などを付与しておき、そのバーコードやQRコード(登録商標)を入力装置40を使用して読み取ることによって識別情報を取得する。なお培養容器50の識別情報は、例えば製造メーカの型式番号であってもよいし、製造番号であってもよい。
 次に、本実施形態の顕微鏡観察システム1-5が行う処理について説明する。図14は、本実施形態の顕微鏡観察システム1-5において行われる処理のフローチャートである。
 図5に示すように、まず制御部22は、ユーザにより入力装置40を用いて入力された観察対象Sが収容された培養容器50の識別情報を受け付け(ステップS61)、観察対象Sが収容された培養容器50の識別情報を取得する(ステップST62)。次に制御部22が、取得した識別情報が、二次記憶部25に形状情報29として記憶された培養容器50Sの識別情報、すなわち予め定められた培養容器50Sの識別情報と異なっていると判定した場合に(ステップST63;YES)、制御部22がCPU21に撮影条件の変更処理を行わせる(ステップST64)。なお撮影条件の変更処理は、上述した第2の実施形態の顕微鏡観察システム1-2において行われる図11の撮影条件変更処理と同じであるため、ここでの説明は省略する。
 次に、CPU21が処理をステップST65へ移行して、制御部22は変更後の撮影条件を使用して撮像部16に本撮影を行わせる(ステップST65)。
 一方、ステップST63にて制御部22が取得した識別情報が、予め定められた培養容器50Sの識別情報と異なっていないと判定した場合に(ステップST63;NO)、CPU21が処理をステップST65へ移行して、制御部22が予め設定された撮影条件を使用して撮像部16に本撮影を行わせる(ステップST65)。
 以上のようにして顕微鏡観察システム1-5による撮影が行われる。撮影された観察対象Sの各観察位置Rの位相差画像は、処理部23によって結合されて1枚の合成位相差画像が生成され、生成された合成位相差画像は制御部22によって表示装置30に表示される。
 上記実施形態の顕微鏡観察システム1-5によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、予め定められた培養容器50の底面50aの形状情報に基づいた撮影条件から観察対象Sが収容された培養容器50の底面50aの形状情報に基づいた撮影条件に変更して撮像部16に撮影させるので、撮像部16は観察対象Sが収容された培養容器50の底面50aの形状に適した撮影条件で撮影を行うことができ、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 次に本発明の撮影制御装置の第6の実施形態を用いた顕微鏡観察システム1-6について説明する。なお本実施形態の顕微鏡観察システム1-6は、図1~図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成に本発明の報知部を備えている。なお報知部は上記第3の実施形態の顕微鏡観察システム1-3が備える報知部と同様のものを使用できるため、ここでの説明は省略する。
 次に、本実施形態の顕微鏡観察システム1-6が行う処理について説明する。図15は、本実施形態の顕微鏡観察システム1-6において行われる処理のフローチャートである。なお本実施形態の顕微鏡観察システム1-6において行われるステップST71からステップST73の処理は、第5の実施形態の顕微鏡観察システム1-5において行われる処理の図14に示すフローチャートのステップST61からステップST63の処理と同じであるため、ここでの説明は省略し、異なる箇所についてのみ説明する。
 図15に示すように、制御部22が取得した識別情報が、二次記憶部25に形状情報29として記憶された培養容器50Sの識別情報、すなわち予め定められた培養容器50Sの識別情報と異なっていると判定した場合に(ステップST73;YES)、制御部22は表示装置30に対して、異なっていることを報知(表示)させて(ステップST74)、一連の処理が終了する。
 上記実施形態の顕微鏡観察システム1-6によれば、制御部22が、観察対象Sが収容された培養容器50の底面50aの形状情報が、予め定められた培養容器50の底面50aの形状情報と異なる場合に、異なっていることを表示装置30に表示させるので、撮影しようとしている観察対象Sが収容された培養容器50がユーザの所望する、つまり予め定められた培養容器50Sではないことをユーザが知ることができるので、撮影対象を例えば上記予め定められた培養容器50Sに収容された観察対象に取り換えたり、予め定められた培養容器50Sで観察対象を培養し直したり等、対策を講じることができる。従って、制御部22が撮像部16に画質の低下した撮影画像を撮影させるのを防止することができるので、培養容器50の間違いに起因する撮影画像の画質の低下を抑制できる。
 なお上記実施形態の顕微鏡観察システム1-6において、結像光学系駆動部15は圧電素子15Aとアクチュエータ15Bを備えたものとしたが、本発明はこれに限られるものではなく、圧電素子15Aのみを備えたものであってもよい。
 次に本発明の撮影制御装置の第7の実施形態を用いた顕微鏡観察システム1-7について説明する。図16に本実施形態の顕微鏡観察システム1-7の構成を示すブロック図を示す。なお図16に示すように、本実施形態の顕微鏡観察システム1-7は、図5に示して説明した上記第1の実施形態の顕微鏡観察システム1の構成に鉛直方向駆動部19を備えている。また本実施形態において、結像光学系駆動部15はアクチュエータ15Bを備えていなくてもよい。
 鉛直方向駆動部19は、パルスモータ等を有するアクチュエータから構成される。鉛直方向駆動部19は、制御部22によって駆動制御され、ステージ51をZ方向すなわち光軸方向に移動させる。なお鉛直方向駆動部19は、本発明の光軸方向駆動部の一例である。
 上述した第1~6の実施形態の顕微鏡観察システム1~1-6においては、結像光学系14に対して観察対象Sが収容された培養容器50を相対的に移動させるために、制御部22がアクチュエータ15Bを駆動させることにより対物レンズ14bつまり結像光学系14をZ方向に移動させる。これに対して本実施形態の顕微鏡観察システム1-7においては、結像光学系14に対して観察対象Sが収容された培養容器50を相対的に移動させるために、制御部22が鉛直方向駆動部19を駆動させることによりステージ51をZ方向に移動させる。
 なお、本実施形態の顕微鏡観察システム1-7の構成において、結像光学系駆動部15はアクチュエータ15Bを備えていてもよい。この場合には、結像光学系14に対して観察対象Sが収容された培養容器50を相対的に移動させるために、制御部22がアクチュエータ15Bと鉛直方向駆動部19の少なくとも一方を駆動させることによりステージ51をZ方向に移動させる。
 なお、上記実施形態は、本発明を位相差顕微鏡に適用したものであるが、本発明は、位相差顕微鏡に限らず、微分干渉顕微鏡及び明視野顕微鏡等のその他の顕微鏡に適用することができる。
 また、上記各実施形態では、撮影制御プログラム26を二次記憶部25から読み出す場合を例示したが、必ずしも最初から二次記憶部25に記憶させておく必要はない。例えば、図17に示すように、SSD(Solid State Drive)、USB(Universal Serial Bus)メモリ、又はDVD-ROM(Digital
 versatile disc-Read Only Memory)等の任意の可搬型の記憶媒体250に先ずは撮影制御プログラム26を記憶させておいてもよい。この場合、記憶媒体250の撮影制御プログラム26が顕微鏡観察システム1にインストールされ、インストールされた撮影制御プログラム26がCPU21によって実行される。
 また、通信網(図示省略)を介して顕微鏡装置10に接続される他のコンピュータ又はサーバ装置等の記憶部に撮影制御プログラム26を記憶させておき、撮影制御プログラム
26が顕微鏡装置10の要求に応じてダウンロードされるようにしてもよい。この場合、ダウンロードされた撮影制御プログラム26はCPU21によって実行される。
 また、上記各実施形態で説明した撮影制御処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。
 また、上記各実施形態では、コンピュータを利用したソフトウェア構成により撮影制御処理が実現される場合を例示したが、本開示の技術はこれに限定されるものではない。例えば、コンピュータを利用したソフトウェア構成に代えて、FPGA(Field-Programmable Gate Array)又はASIC(Application
 Specific Integrated Circuit)等のハードウェア構成のみによって、撮影制御処理が実行されるようにしてもよい。撮影制御処理がソフトウェア構成とハードウェア構成との組み合わせた構成によって実行されるようにしてもよい。
 本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。
 以下、本実施形態の作用効果について説明する。
 観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させるので、容器の間違いに起因する撮影画像の画質の低下を抑制できる。
   1   顕微鏡観察システム
   10  顕微鏡装置
   11  白色光源
   12  コンデンサレンズ
   13  スリット板
   14  結像光学系
   14a 位相差レンズ
   14b 対物レンズ
   14c 位相板
   14d 結像レンズ
   15  結像光学系駆動部
   16  撮像部
   17  水平方向駆動部
   18  検出部
   19  鉛直方向駆動部
   20  顕微鏡制御装置
   21  CPU
   22  制御部
   23  処理部
   24  一次記憶部
   25  二次記憶部
   26  撮影制御プログラム
   27  外部I/F
   28  バスライン
   29  形状情報
   30  表示装置
   40  入力装置
   50  培養容器
   50S 予め定められた培養容器
   50a 底面
   50b 下面
   51  ステージ
   51a 開口
   L   照明光
   C   培養液
   S   観察対象

Claims (10)

  1.  観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から前記観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる制御部を備える撮影制御装置。
  2.  前記制御部は、前記撮像部による本撮影の前に、観察対象が収容された容器の底面の形状を測定するプレ測定を測定部に対して行わせることにより前記観察対象が収容された容器の底面の形状情報を取得する請求項1記載の撮影制御装置。
  3.  前記制御部は、前記観察対象が収容された容器の底面に対して前記測定部に光を照射させ、前記底面で反射した反射光に基づいて前記形状情報として前記容器の底面の高さを取得する請求項2記載の撮影制御装置。
  4.  前記測定部は、前記撮像部を有し、
     前記制御部は、前記容器に収容された前記観察対象を前記撮像部に撮像させて取得した撮影画像に基づいて前記形状情報として前記容器の底面の曲率を取得する請求項2記載の撮影制御装置。
  5.  前記測定部は、レーザ変位センサである請求項3記載の撮影制御装置。
  6.  容器内の前記観察対象の像を結像させる結像光学系に対して、前記観察対象が収容された容器を前記結像光学系の光軸方向に相対的に移動させる光軸方向駆動部が前記結像光学系又は前記容器を前記光軸方向に相対移動させる移動可能な範囲の大きさよりも前記観察対象が収容された容器の底面の高低差が大きい場合に、前記制御部が前記容器の底面の高さに応じて前記光軸方向駆動部に対して前記範囲の位置を変えさせて、前記撮像部に撮影させる請求項1~5いずれか1項記載の撮影制御装置。
  7.  前記容器の形状情報を記憶する形状情報記憶部を備え、
     該形状情報記憶部が、前記観察対象が収容された容器の識別情報と、該容器の底面の形状情報とを対応付けたテーブルを記憶している請求項1記載の撮影制御装置。
  8.  前記容器が、ディッシュ、ウェルプレートまたはフラスコである請求項1~7いずれか1項記載の撮影制御装置。
  9.  制御部を備える撮影制御装置の作動方法であって、
     前記制御部が、観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から前記観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる撮影制御装置の作動方法。
  10.  コンピュータを、
     観察対象が収容された容器の底面の形状情報が、予め定められた容器の底面の形状情報と異なる場合に、異なっていることを報知部に報知させるか、又は予め定められた容器の底面の形状情報に基づいた撮影条件から前記観察対象が収容された容器の底面の形状情報に基づいた撮影条件に変更して撮像部に撮影させる制御部として機能させるための撮影制御プログラム。
PCT/JP2018/040146 2017-11-02 2018-10-29 撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム WO2019088030A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019550376A JP6993423B2 (ja) 2017-11-02 2018-10-29 撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-213188 2017-11-02
JP2017213188 2017-11-02

Publications (1)

Publication Number Publication Date
WO2019088030A1 true WO2019088030A1 (ja) 2019-05-09

Family

ID=66332534

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/040146 WO2019088030A1 (ja) 2017-11-02 2018-10-29 撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム

Country Status (2)

Country Link
JP (1) JP6993423B2 (ja)
WO (1) WO2019088030A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020203700A1 (ja) * 2019-04-02 2020-10-08 富士フイルム株式会社 観察制御装置、方法およびプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010097061A (ja) * 2008-10-17 2010-04-30 Olympus Corp 粗微動装置および自動合焦装置
WO2014175220A1 (ja) * 2013-04-26 2014-10-30 浜松ホトニクス株式会社 画像取得装置、試料のフォーカスマップを作成する方法及びシステム
JP2015082098A (ja) * 2013-10-24 2015-04-27 株式会社キーエンス 顕微鏡を制御する制御装置、容器ホルダー、顕微鏡システム、制御方法およびプログラム
US20160041380A1 (en) * 2014-08-06 2016-02-11 Cellomics, Inc. Image-based laser autofocus system
WO2017175783A1 (ja) * 2016-04-08 2017-10-12 株式会社Screenホールディングス 底面位置検出装置、画像取得装置、底面位置検出方法および画像取得方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010097061A (ja) * 2008-10-17 2010-04-30 Olympus Corp 粗微動装置および自動合焦装置
WO2014175220A1 (ja) * 2013-04-26 2014-10-30 浜松ホトニクス株式会社 画像取得装置、試料のフォーカスマップを作成する方法及びシステム
JP2015082098A (ja) * 2013-10-24 2015-04-27 株式会社キーエンス 顕微鏡を制御する制御装置、容器ホルダー、顕微鏡システム、制御方法およびプログラム
US20160041380A1 (en) * 2014-08-06 2016-02-11 Cellomics, Inc. Image-based laser autofocus system
WO2017175783A1 (ja) * 2016-04-08 2017-10-12 株式会社Screenホールディングス 底面位置検出装置、画像取得装置、底面位置検出方法および画像取得方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020203700A1 (ja) * 2019-04-02 2020-10-08 富士フイルム株式会社 観察制御装置、方法およびプログラム

Also Published As

Publication number Publication date
JP6993423B2 (ja) 2022-01-13
JPWO2019088030A1 (ja) 2020-11-19

Similar Documents

Publication Publication Date Title
JP6675279B2 (ja) 撮影装置および方法並びに撮影制御プログラム
JP5633753B2 (ja) フォーカス制御方法および培養観察装置
US11243386B2 (en) Microscope apparatus, observation method, and microscope apparatus-control program
WO2019039035A1 (ja) 判別器の学習装置、方法およびプログラム、並びに判別器
JP5177138B2 (ja) 観察装置
JP6619315B2 (ja) 観察装置および方法並びに観察装置制御プログラム
US11209637B2 (en) Observation device, observation control method, and observation control program that control acceleration of a moveable stage having an installed subject vessel
WO2019088030A1 (ja) 撮影制御装置、撮影制御装置の作動方法、及び撮影制御プログラム
WO2019044424A1 (ja) 撮影制御装置、方法およびプログラム
WO2017195442A1 (ja) 撮影装置および方法並びに撮影装置制御プログラム
US11061214B2 (en) Cell observation apparatus and method
WO2019225325A1 (ja) 観察装置、観察装置の作動方法、及び観察制御プログラム
WO2018061635A1 (ja) 観察装置および方法並びに観察装置制御プログラム
WO2017199537A1 (ja) 観察装置および方法並びに観察装置制御プログラム
JPWO2019098150A1 (ja) 観察装置および方法並びに観察装置制御プログラム
US20200217781A1 (en) Imaging device, and operation method and imaging control program of imaging device
WO2019088034A1 (ja) 観察領域設定装置、撮像制御装置、観察領域設定装置の作動方法、及び観察領域設定プログラム
JP2016161610A (ja) 撮像装置および方法
JP2008299245A (ja) 被検体容器、位相差顕微鏡の調整方法およびプログラム
JP2016212337A (ja) 撮像装置および方法並びに撮像制御プログラム
JP2019045877A (ja) 撮像装置および方法並びに撮像制御プログラム
JPWO2019065050A1 (ja) 観察装置、観察方法および観察プログラム
JP2022001889A (ja) フォーカス位置評価装置、方法及びプログラム、並びに判別器

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18874317

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019550376

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18874317

Country of ref document: EP

Kind code of ref document: A1