WO2014087713A1 - 撮像装置及び顕微鏡システム - Google Patents

撮像装置及び顕微鏡システム Download PDF

Info

Publication number
WO2014087713A1
WO2014087713A1 PCT/JP2013/075169 JP2013075169W WO2014087713A1 WO 2014087713 A1 WO2014087713 A1 WO 2014087713A1 JP 2013075169 W JP2013075169 W JP 2013075169W WO 2014087713 A1 WO2014087713 A1 WO 2014087713A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
unit
resolution
optical system
imaging unit
Prior art date
Application number
PCT/JP2013/075169
Other languages
English (en)
French (fr)
Inventor
渡辺　伸之
福田　弘之
洋子 阿部
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Publication of WO2014087713A1 publication Critical patent/WO2014087713A1/ja
Priority to US14/725,313 priority Critical patent/US9906729B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/06—Means for illuminating specimens
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/24—Base structure
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10056—Microscopic image

Definitions

  • the present invention relates to an imaging apparatus and a microscope system that capture an image of an object and acquire an image, and more particularly to an imaging apparatus and a microscope system that can image a sliced specimen.
  • Patent Document 1 discloses a technique for connecting an image acquired by dividing an observation region of a living tissue into small sections and imaging each small section in pathological diagnosis support.
  • Patent Document 2 discloses that while the focal plane on the object side is inclined with respect to the moving direction of the stage (for example, the X direction), the surface position of the object is changed in the Z-axis direction by moving the stage.
  • a technique for performing imaging is disclosed. According to this technique, an object included in the thickness corresponding to the inclination can be detected, so that it is not necessary to perform scanning in the Z direction.
  • JP 2008-191427 A Japanese Patent Laid-Open No. 11-211439
  • image information for 10 ⁇ m can be acquired in the thickness direction by one imaging (in other words, the focal plane in the object OB can be searched in the range of 10 ⁇ m), whereas FIG. In this case, only 4 ⁇ m image information can be acquired in the thickness direction.
  • imaging is performed while shifting the stage by about 20 ⁇ m in the case of FIG. 17, whereas imaging is performed by shifting the stage by 50 ⁇ m in the case of FIG. 18. it can. Therefore, the latter can image the entire object OB with a smaller number of imaging operations, that is, in a short time.
  • the amount of inclination of the object is small.
  • the observation target needs to be within the range in the thickness direction in which the focusing surface is inclined. Therefore, in order to acquire image information regarding an object having a thickness within a desired imaging time, it is necessary to appropriately set at least the inclination angle of the object and appropriately move the stage according to the inclination angle.
  • the present invention has been made in view of the above, and moves at least one of the imaging unit and the observation target with respect to the other and tilts the focusing surface of the imaging unit with respect to the direction of the movement.
  • An object of the present invention is to provide an imaging apparatus and a microscope system that can appropriately set the tilt angle of a focal plane when performing imaging.
  • an imaging apparatus includes a stage on which an object is placed, an imaging unit having an imaging element that images the object, and a placement surface of the object
  • a moving mechanism that moves at least one of the stage and the imaging unit relative to the other in at least one direction, and at least one of the imaging surface of the imaging element and the stage, Based on a tilt mechanism that tilts relative to the moving direction of the moving mechanism, at least a magnification of the imaging unit, and a size of an effective area that is an area for capturing observation light from the object on the imaging surface
  • an inclination angle setting section for setting an inclination angle of the inclination mechanism.
  • the imaging apparatus further includes a movement amount calculation unit that calculates a movement amount by the movement mechanism, the imaging unit images the object at a predetermined imaging cycle, and the movement amount calculation unit includes the mounting surface described above.
  • the amount of relative movement by the moving mechanism per imaging period of the imaging unit is calculated according to the resolution of the imaging unit in the second direction orthogonal to the inclination angle and the tilt angle. .
  • the imaging apparatus further includes a movement speed calculation unit that calculates a movement speed by the movement mechanism, and a frame rate information acquisition unit that acquires frame rate information of a moving image captured by the imaging unit, and the movement amount calculation
  • the unit calculates the speed of relative movement by the moving mechanism using the resolution of the imaging unit in the second direction orthogonal to the placement surface, the tilt angle, and the information of the frame rate. It is characterized by doing.
  • the resolution of the imaging unit in the second direction is determined by the numerical aperture of the optical system included in the imaging unit, the wavelength of observation light from the object, and between the optical system and the object. It is given based on the refractive index of the existing medium.
  • the resolution is Rz
  • an arbitrary constant is ka
  • a depth of field of the optical system is DOF
  • the refractive index is n
  • the wavelength of the observation light is ⁇
  • the resolution may be a size of an allowable circle of confusion on the imaging surface, a numerical aperture of an optical system included in the imaging unit, a focal length of the optical system, and between the optical system and the object. It is given based on the object distance which is a distance.
  • the resolution is Rz
  • an arbitrary constant is k b
  • the depth of field of the optical system is D fn
  • the object distance is s
  • the hyperfocal distance of the optical system is H
  • the focal length is f
  • the numerical aperture NA
  • the size of the allowable circle of confusion is c
  • the imaging apparatus includes a diameter of an allowable circle of confusion on the imaging surface, a numerical aperture of an optical system included in the imaging unit, a focal length of the optical system, a distance between the object and the optical system, and an arbitrary first
  • the first resolution of the imaging unit in the second direction given based on a constant, the numerical aperture of the optical system, the wavelength of observation light from the object, and the presence between the object and the optical system
  • the resolution of the imaging unit in the second direction based on the magnitude relationship with the second resolution of the imaging unit in the second direction given based on the refractive index of the medium and an arbitrary second constant
  • the apparatus further includes means for switching a method for obtaining the value.
  • the imaging apparatus further includes constant input means for inputting the first and second constants.
  • the tilt mechanism tilts the optical axis of the imaging unit with respect to an axis orthogonal to the placement surface.
  • the tilt mechanism tilts a surface from which the imaging unit takes in observation light from the object with respect to an optical axis of the imaging unit.
  • a microscope system includes the above-described imaging device and illumination means for illuminating the object.
  • the object is a book-cut specimen obtained by slicing a pathological tissue.
  • the tilt angle of the focusing surface can be appropriately set. it can. Accordingly, it is possible to acquire image information of the entire object to be observed including information on the thickness direction at a higher speed and with higher accuracy than in the past.
  • FIG. 1 is a diagram illustrating a schematic configuration of an imaging apparatus according to Embodiment 1 of the present invention.
  • FIG. 2 is a schematic diagram illustrating a configuration of the imaging unit illustrated in FIG. 1.
  • FIG. 3 is a schematic diagram illustrating an example in which the imaging apparatus illustrated in FIG. 1 is applied to a microscope system.
  • FIG. 4 is a flowchart showing the operation of the imaging apparatus shown in FIG.
  • FIG. 5 is a schematic diagram for explaining the relationship between the size of the effective area on the imaging surface and the size of the effective area on the focusing surface.
  • FIG. 6 is a schematic diagram showing the relationship between the size in the X direction and the observation range in the Z direction of the effective area on the sample and the focal plane.
  • FIG. 1 is a diagram illustrating a schematic configuration of an imaging apparatus according to Embodiment 1 of the present invention.
  • FIG. 2 is a schematic diagram illustrating a configuration of the imaging unit illustrated in FIG. 1.
  • FIG. 3 is a schematic diagram illustrating an
  • FIG. 7 is a schematic diagram illustrating a schematic configuration of the microscope system according to the first modification of the first embodiment.
  • FIG. 8 is a diagram showing a schematic configuration of an imaging apparatus according to Embodiment 2 of the present invention.
  • FIG. 9 is a conceptual diagram for explaining the imaging operation of the imaging apparatus shown in FIG.
  • FIG. 10 is a flowchart showing the operation of the imaging apparatus shown in FIG.
  • FIG. 11 is a flowchart showing the Z-direction resolution calculation processing executed by the resolution setting unit.
  • FIG. 12 is a diagram showing a schematic configuration of an imaging apparatus according to Embodiment 3 of the present invention.
  • FIG. 13 is a flowchart showing the operation of the imaging apparatus shown in FIG. FIG.
  • FIG. 14 is a flowchart illustrating the depth-of-field calculation process executed by the resolution setting unit.
  • FIG. 15 is a schematic diagram illustrating pixel addition processing in an image sensor having a Bayer array.
  • FIG. 16 is a schematic diagram for explaining thinning-out reading processing in an image sensor having a Bayer array.
  • FIG. 17 is a schematic diagram for explaining the imaging operation when the focusing surface is tilted so that the range in the Z direction is 10 ⁇ m.
  • FIG. 18 is a schematic diagram illustrating an imaging operation when the focusing surface is inclined so that the range in the Z direction is 4 ⁇ m.
  • FIG. 1 is a diagram illustrating a schematic configuration of an imaging apparatus according to Embodiment 1 of the present invention.
  • the imaging apparatus 1 according to Embodiment 1 includes a stage 100 on which a sample SP that is an observation target is placed, and an imaging unit 110 that takes an image of the sample SP placed on the stage 100.
  • the sample placement surface of the stage 100 hereinafter, referred to as the sample plane P SP
  • the XY plane the direction perpendicular to the sample surface P SP and Z direction.
  • the imaging apparatus 1 includes an XY drive unit 120 for moving the stage 100 in the XY plane, the tilting mechanism 130 for tilting the focal plane P FC of the imaging unit 110 with respect to the moving direction of the stage 100, the stage 100 an inclination angle setting unit 140 that sets the inclination angle of the focusing plane P FC with respect to the moving direction of the tilting mechanism 130, an XY drive control unit 150 for controlling the movement operation of the stage 100 by the XY drive unit 120, the sample in the Z-direction SP A Z-direction observation range acquisition unit 160 that sets the observation range, an optical system related information storage unit 170 that stores information about an optical system included in the imaging unit 110, and an imaging element related information storage unit 180.
  • an XY drive unit 120 for moving the stage 100 in the XY plane
  • the tilting mechanism 130 for tilting the focal plane P FC of the imaging unit 110 with respect to the moving direction of the stage 100
  • the stage 100 an inclination angle setting unit 140 that sets the inclination angle of the focusing plane P FC with respect
  • FIG. 2 is a schematic diagram illustrating a configuration of the imaging unit 110 illustrated in FIG.
  • the imaging unit 110 includes a solid-state imaging device such as a CCD, and includes an imaging device 111 that receives observation light from the sample SP and generates electronic image information, and an observation lens 112a. And an optical system 112.
  • the observation optical system 112 images observation light (transmitted light or reflected light of the sample SP) L from the sample SP on the light receiving surface (imaging surface) 111a of the image sensor 111.
  • the imaging surface 111a is provided to be orthogonal to the optical axis L1 of the observation optical system 112.
  • Tilting mechanism 130 shown in FIG. 1 during the imaging operation of the imaging unit 110, as shown in FIG. 2, focusing plane P FC is at an angle ⁇ with respect to the moving direction of the stage 100, the imaging unit 110 Hold in an inclined state.
  • the tilt mechanism 130 is configured by a rotation mechanism that can rotate around an axis in the Y direction orthogonal to the X axis.
  • the XY drive control unit 150 controls the XY drive unit 120 so that the stage 100 is moved in a predetermined direction (for example, the X direction) during the imaging operation of the imaging unit 110.
  • Tilt angle setting section 140 sets the tilt mechanism 130 calculates the inclination angle ⁇ of the focusing plane P FC. More specifically, the tilt angle setting unit 140 includes an observation magnification acquisition unit 141 that acquires an observation magnification (image magnification) of the imaging unit 110, and an area on the imaging surface 111a from which the imaging unit 110 captures observation light from the sample SP. The effective area acquisition unit 142 that acquires the size of the effective area is calculated, and the tilt angle ⁇ of the imaging unit 110 is calculated based on the acquired observation magnification and the size of the effective area.
  • Z-direction observation range acquiring unit 160 acquires the Z direction in a range capable of acquiring image information when performing once captured while inclining the focusing plane P FC.
  • the optical system related information storage unit 170 stores information related to the observation optical system 112 such as observation magnification and numerical aperture.
  • the image sensor related information storage unit 180 stores information related to the specifications of the image sensor 111 such as the size of the imaging surface 111a and the number of pixels.
  • FIG. 3 is a schematic diagram showing an example in which the imaging apparatus 1 shown in FIG. 1 is applied to a microscope system.
  • the microscope system shown in FIG. 3 includes a microscope 10 and a control device 20.
  • the microscope 10 includes a base 11 and a stage base 12 and a support column 13 set on the base 11.
  • a stage 100 is provided on the stage base 12 via an XY driving unit 120.
  • the stage base 12 is provided with an adjustment knob 14 for moving the stage 100 in the Z direction.
  • a transmission illumination optical system 15 that irradiates the sample SP with illumination light is provided inside the stage base 12.
  • an epi-illumination optical system may be provided instead of the transmission illumination optical system 15.
  • the support unit 13 is provided with an imaging unit 110 via an inclination mechanism 130.
  • the imaging unit 110 may further include a revolver 113 that holds a plurality of objective lenses having different magnifications in a replaceable manner.
  • the control device 20 includes, for example, a general-purpose personal computer, and includes a storage unit 21, an input unit 22, and a control unit 23.
  • the storage unit 21 is realized by a semiconductor memory such as a flash memory, a RAM, and a ROM, a recording medium such as an HDD, an MO, a CD-R, and a DVD-R, and a drive device that drives the recording medium.
  • a program for executing various operations, various information used during execution of the program, image information output from the imaging unit 110, and the like are stored.
  • the optical system related information storage unit 170 and the image sensor related information storage unit 180 are provided in the storage unit 21.
  • the input unit 22 includes input devices such as a keyboard, a touch panel, and a mouse, and is used when the user inputs various information used in the control device 20.
  • the control unit 23 is configured by hardware such as a CPU, and by reading a program stored in the storage unit 21, the control unit 23 is based on various data stored in the storage unit 21 and various information input from the input unit 22. Control for causing the microscope system to execute an imaging operation is performed.
  • the tilt angle setting unit 140, the XY drive control unit 150, and the Z direction observation range acquisition unit 160 are configured by the control unit 23.
  • FIG. 4 is a flowchart showing the operation of the imaging apparatus 1. In the following, it is assumed that the stage 100 is moved in the X direction.
  • the tilt angle setting unit 140 acquires the observation magnification ⁇ and the size S of the effective area on the imaging surface 111a. More specifically, the observation magnification acquisition unit 141 reads the observation magnification ⁇ stored in advance in the optical system related information storage unit 170. Alternatively, the observation magnification acquisition unit 141 may acquire the observation magnification ⁇ desired by the user based on information input from the input unit 22 (see FIG. 3) by the user.
  • the observation magnification acquisition unit 141 may acquire the magnification of the objective lens. In this case, the observation magnification acquisition unit 141 calculates the observation magnification ⁇ of the imaging unit 110 based on the acquired magnification of the objective lens.
  • the effective area acquisition unit 142 reads the size S of the effective area on the imaging surface 111a stored in advance in the imaging element related information storage unit 180.
  • the effective area on the imaging surface 111a is an area on the imaging surface 111a in which the imaging element 111 can capture image information (image data) by one imaging, and depends on the specifications of the imaging element 111. Determined.
  • the size S the length of one side corresponding to the X direction that is the moving direction of the stage 100 is used.
  • the size of the effective area when the imaging unit 110 performs trimming and partially captures the observation image, the trimmed size is used.
  • the definition of the size of the effective area may be the size of the imaging area of the imaging surface 111a or the size of the imaging element 111 itself.
  • the tilt angle setting section 140 uses size S of the observation magnification ⁇ and the effective area, and calculates the size Lx of the effective region on the focal plane P FC.
  • the effective region on the focusing plane P FC is that the area on capable focusing plane P FC acquisition of the image information by one imaging by the imaging unit 110, as shown in FIG. 5
  • the effective area size S on the imaging surface 111a and the observation magnification ⁇ are determined.
  • the inclination angle setting unit 140 calculates the size Lx using the following equation (1).
  • FIG. 6 is a schematic diagram showing the sample SP, the size Lx in the X direction of the effective region on the focal plane P FC, the relationship between the Z-direction of observation range L Z.
  • the thickness of the sliced specimen is generally a constant value (for example, 3 to 5 ⁇ m) from the setting of the microtome.
  • the observation range Lz is set to a value commensurate with the thickness of a general sliced specimen, and is stored in advance in the Z direction observation range acquisition unit 160.
  • the Z direction observation range acquisition unit 160 inputs the value of the observation range Lz input by the user to the tilt angle setting unit 140.
  • the imaging apparatus 1 may be configured such that information on the microtome that produced the sliced specimen (for example, thickness information between slices) is automatically input to the Z direction observation range acquisition unit 160.
  • step S13 the tilt angle setting section 140, the size Lx of the effective area on the calculated focusing plane P FC at step S11, the observation range Lz input from the Z direction observation range acquiring unit 160 in step S12 To calculate the inclination angle ⁇ .
  • the relationship between the size Lx and the observation range Lz is given by the following equation (2).
  • step S ⁇ b> 14 the tilt angle setting unit 140 sets the tilt angle ⁇ that tilts the imaging unit 110 with respect to the tilt mechanism 130. Than this, a state where focusing plane P FC of the imaging unit 110 is inclined by an angle ⁇ with respect to the X direction. Thereafter, the imaging unit 110, the focusing plane P FC while being inclined with respect to the X direction to perform the imaging of the sample SP.
  • the inclination angle ⁇ is appropriately determined from the observation magnification ⁇ of the observation optical system 112, the size S of the effective area of the imaging surface 111a, and the observation range Lz based on the thickness of the sample SP.
  • FIG. 7 is a schematic diagram illustrating a schematic configuration of an imaging apparatus according to the first modification.
  • the stage 100 is horizontally disposed and the optical axis L1 of the observation optical system 112 and the transmission illumination optical system 15 is inclined with respect to the stage 100 (see FIG. 3).
  • the observation optical system 112 and the transmission illumination optical system 15 may be arranged so that the optical axis L1 is in the vertical direction, and the stage 100 may be inclined with respect to the horizontal direction. In this case, while moving the stage 100 along the inclination direction of the sample surface P SP (X 'direction), perform imaging by the imaging section 110.
  • the imaging device 111 is installed such that the imaging surface 111a of the imaging device 111 is inclined by an angle ⁇ with respect to the plane orthogonal to the optical axis L1 with the Y axis as a rotation axis.
  • an image substantially focusing plane P FC is inclined with respect to the moving direction of the stage 100 (X-direction).
  • FIG. 8 is a diagram showing a schematic configuration of an imaging apparatus according to Embodiment 2 of the present invention.
  • the imaging apparatus 2 according to the second embodiment includes a resolution constant input unit 210, a resolution setting unit 220, and an X-direction movement amount calculation unit 230 with respect to the imaging apparatus 1 illustrated in FIG. Further prepare.
  • FIG. 9 is a conceptual diagram for explaining the imaging operation of the imaging apparatus 2.
  • the imaging apparatus 2 while the focal plane P FC is inclined with respect to the moving direction of the stage 100, while moving the stage 100, and are continuously captured at a predetermined imaging cycle.
  • the imaging area C1 indicates an area in the sample SP that is an imaging target at the first imaging
  • the imaging area C2 indicates an area in the sample SP that is an imaging target at the subsequent second imaging.
  • an appropriate movement amount Mx is calculated based on the inclination angle ⁇ set by the inclination angle setting unit 140 and the resolution Rz desired by the user, and the stage is calculated based on the movement amount Mx.
  • the sample SP is imaged while moving 100.
  • the 8 is composed of input devices such as a keyboard, a mouse, and a touch panel, and is used for the user to input constants used when setting the resolution Rz.
  • the resolution setting unit 220 includes a resolution switching determination unit 221 that performs switching determination of the calculation method of the resolution Rz, and the resolution Rz based on the determination result of the resolution switching determination unit 221 and the constant input by the resolution constant input unit 210. Is set for the X-direction movement amount calculation unit 230.
  • the X-direction movement amount calculation unit 230 moves the stage 100 each time imaging is performed based on the tilt angle ⁇ set by the tilt angle setting unit 140 and the resolution Rz set by the resolution setting unit 220.
  • the amount of movement Mx in the direction is calculated and set for the XY drive control unit 150.
  • each part of the imaging apparatus 2 other than the resolution constant input unit 210, the resolution setting unit 220, and the X-direction movement amount calculation unit 230 are the same as those in the first embodiment.
  • FIG. 10 is a flowchart showing the operation of the imaging apparatus 2. Note that steps S10 to S13 in FIG. 10 are the same as those in the first embodiment (see FIG. 4).
  • step S21 following step S13 the resolution setting unit 220 calculates the resolution Rz in the Z direction.
  • a method for calculating the resolution Rz will be described later.
  • the X-direction movement amount calculation unit 230 moves the stage 100 in the X direction every time imaging is performed based on the tilt angle ⁇ calculated in step S13 and the resolution Rz calculated in step S21. A movement amount Mx to be moved is calculated.
  • the imaging regions C1 and C2 move relative to the sample SP by moving the stage 100 by the movement amount Mx.
  • the distance that is, the movement amount Mx
  • the resolution Rz have the relationship shown in the following equation (4).
  • the following equation (4) is derived from a similarity relationship between a triangle having two sides with the movement amount Mx and the resolution Rz and a triangle having two sides with the size Lx and the observation range Lz.
  • the X-direction movement amount calculation unit 230 calculates the movement amount Mx using Expression (5).
  • step S23 the tilt angle setting unit 140 sets the tilt angle ⁇ of the imaging unit 110 (focusing surface P FC ) in the tilt mechanism 130, and the X-direction moving amount calculating unit 230 sets the moving amount Mx of the stage 100. Is set in the XY drive control unit 150. Thereafter, the imaging unit 110, the focusing plane P FC while being inclined with respect to the X direction, moving the stage 100 every time performing once captured, continuously captured sample SP.
  • FIG. 11 is a flowchart showing the Z-direction resolution calculation process executed by the resolution setting unit 220.
  • step S211 the resolution setting unit 220 calculates a depth of field DOF based on the design (performance) of the observation optical system 112 included in the imaging unit 110.
  • the numerical aperture of the observation optical system 112 NA the refractive index of the medium existing between the objective lens 112a and the sample SP n, the wavelength of observation light from the sample SP lambda, and an arbitrary constant k a
  • the resolution Ra based on the depth of field DOF is given by the following equations (6-1) and (6-2).
  • the refractive index n of the medium is n> 1 when an immersion microscope in which the space between the objective lens 112a and the sample SP is filled with a liquid or when the objective lens 112a is in direct contact with the sample SP.
  • step S212 the resolution setting unit 220 calculates the depth of field D fn based on the resolution of the image sensor 111. Note that the processing order of step S211 and step S212 may be either first or simultaneous.
  • the resolution can be set according to how many times the user desires the resolution with respect to the depth of field D fn based on the resolution capability of the image sensor 111.
  • the resolution between two points on the imaging surface 111a of the imaging element 111 is represented by the diameter c of the allowable circle of confusion.
  • the distance H at which infinity is focused within the depth of field is called a hyperfocal distance.
  • the hyperfocal length H is given by the following equation (8), where NA is the numerical aperture of the observation optical system 112 and f is the focal length.
  • Information regarding each characteristic value of the optical system and information regarding the specifications of the image sensor 111 are stored in advance in the optical system related information storage unit 170 and the image sensor related information storage unit 180, respectively, and the resolution setting unit 220 is necessary. Get it accordingly.
  • the depth of field D fn is calculated by the equation (9-3). Is done.
  • symbol s represents the distance (object distance) between the sample SP and the observation optical system 112.
  • the resolution switching determination unit 221 determines which of the depth of field DOF calculated in step S211 and the depth of field D fn calculated in step S212 is greater.
  • the focal length f 25 mm
  • the numerical aperture NA 0.5
  • the pixel size in the image sensor 111 is 2 ⁇ m
  • the diameter of the allowable circle of confusion c 4 ⁇ m
  • the depth of field DOF is expressed by the equation (6-2). ) To be about 1 ⁇ m.
  • step S213 when D fn > DOF is satisfied (step S213: Yes), it is not necessary to set the resolution Rz finer than the resolution Rb that can be resolved by the image sensor 111. Therefore, in this case, the resolution setting unit 220, and setting the resolvable resolution Rb as resolution Rz in the imaging device 111, via the resolution constant input unit 210 obtains the constant k b in the formula (7) (Step S214).
  • the resolution setting unit 220 gives the numerical aperture NA, the focal length f, and the pixel size based on the specifications of the object distance s and the image sensor 111, by the constant k b which is input by the user
  • the resolution Rb to be obtained is calculated as the resolution Rz.
  • step S213 when the refractive index of the medium is n> 1 with an immersion microscope or the like, or when high-magnification observation is performed, D fn ⁇ DOF tends to be satisfied (step S213: No).
  • the resolution setting unit 220, and setting the resolution Ra obtained by multiplying the desired magnification k a depth of field DOF by performance of the observation optical system 112 as a resolution Rz, via the resolution constant input unit 210 acquires constants k a in the formula (6-1) (step S215).
  • the resolution setting unit 220 a numerical aperture NA, the wavelength ⁇ of the refractive index n and the observation light of the medium, the resolution Ra given by the constant k a, which is input by the user, the resolution Rz Calculate as Normally, the constant k a is set to k a> 0.5. Thereafter, the process returns to the main routine.
  • the movement amount Mx calculated based on the resolution Rz desired by the user is set in addition to the inclination angle ⁇ , and the stage 100 is set relative to the imaging unit 110. Since the imaging is performed a plurality of times while being moved, the image information at a plurality of focal points of the sample or the three-dimensional image information based on the plurality of focusing information can be acquired at high speed and with high accuracy.
  • the imaging unit 110 is fixed and the relative movement is realized by moving the stage 100.
  • the sample SP side may be fixed and the imaging unit 110 side may be moved.
  • FIG. 12 is a diagram showing a schematic configuration of an imaging apparatus according to Embodiment 3 of the present invention.
  • the imaging apparatus 3 according to Embodiment 3 includes a resolution setting unit 310 instead of the resolution setting unit 220 shown in FIG. 8, and includes an X-direction moving speed calculation unit 320 and a frame rate information acquisition unit 330. Is further provided.
  • the resolution setting unit 310 further includes a pixel addition determination unit 311 that determines whether or not the imaging unit 110 performs pixel addition, and based on the determination result by the pixel addition determination unit 311.
  • the resolution Rz set for the X-direction movement amount calculation unit 230 is calculated.
  • the X direction movement speed calculation unit 320 is a stage when the imaging unit 110 captures the moving image of the sample SP based on the movement amount Mx of the stage 100 calculated by the X direction movement amount calculation unit 230 and the frame rate of the imaging unit 110. A moving speed of 100 is calculated.
  • the frame rate information acquisition unit 330 acquires and holds the frame rate when the imaging unit 110 performs moving image imaging.
  • each part of the imaging apparatus 3 other than the resolution setting unit 310, the X-direction moving speed calculation unit 320, and the frame rate information acquisition unit 330 are the same as those in the second embodiment.
  • FIG. 13 is a flowchart showing the operation of the imaging apparatus 3. Note that steps S10 to S22 in FIG. 13 correspond to the second embodiment (see FIG. 10), and as will be described later, detailed operations when calculating the depth of field D fn in step S212 in FIG. However, this is different from the second embodiment.
  • step S31 following step S22 the X-direction moving speed calculation unit 320 acquires the frame rate FR of the imaging unit 110 from the frame rate information acquisition unit 330.
  • the X-direction movement speed calculation unit 320 uses the movement amount Mx (m) and the frame rate FR (fps) per imaging calculated by the X-direction movement amount calculation unit 230 using the following formula (10 ) To calculate the moving speed Vx of the stage 100.
  • Vx FR ⁇ Mx (10)
  • step S33 the tilt angle setting unit 140 sets the tilt angle ⁇ of the imaging unit 110 (focusing plane P FC ) in the tilt mechanism 130, and the X-direction moving speed calculating unit 320 sets the moving speed Vx of the stage 100. Is set in the XY drive control unit 150. Thereafter, the imaging unit 110, the focusing plane P FC while being inclined with respect to the X direction, to perform the moving image of the sample SP while moving the stage 100.
  • FIG. 14 is a flowchart showing the calculation process of the depth of field D fn executed by the resolution setting unit 310.
  • the interval between frames is often defined by the resolution because of the processing capability of the system.
  • the frame rate and the resolution are in a trade-off relationship due to the processing capacity of the system. Therefore, when priority is given to the frame rate, that is, the shooting speed, it is conceivable that the image pickup unit 110 performs pixel addition or thinning readout processing.
  • the pixel value Is 9 times faster than the case of reading out the pixel values of all the pixels.
  • the pixel value reading speed is 3 compared with the case of reading out the pixel values of all pixels. Double.
  • the pixels to be read are hatched. In these cases, the resolution decreases according to the number of pixels to be added or thinned out. That is, the diameter c of the permissible circle of confusion representing the resolution capability between two points on the imaging surface 111a of the imaging element 111 is increased.
  • step S301 the pixel addition determination unit 311 determines whether the imaging unit 110 is performing pixel addition or thinning readout.
  • the symbol Q represents the pixel size per pixel of the image sensor 111, and the diameter c of the permissible circle of confusion is set to twice the minimum pixel resolution size.
  • Step S301 Yes
  • the resolution setting unit 310 sets the addition number in the pixel addition (or decimation number in decimation readout) as the variable m in equation (11).
  • the resolution setting unit 310 calculates the hyperfocal distance H given by equation (8) using the diameter c of the allowable circle of confusion calculated in step S304.
  • step S306 resolution setting section 310 calculates depth of field D fn given by equation (9-3) using hyperfocal distance H calculated in step S305. Thereafter, the process returns to the main routine.
  • the multi-focus image information regarding the sample SP or the three-dimensional image information based on the plurality of focus information is obtained. It becomes possible to acquire at high speed. Further, since it is determined whether the imaging unit 110 is performing pixel addition or thinning readout, and the resolution Rz in the Z direction is calculated based on the determination result, the moving speed of the sample SP can be set appropriately. . Therefore, it is possible to acquire necessary and sufficient three-dimensional image information regarding the sample SP.
  • the imaging unit 110 can generate an in-focus image in the entire observation range Lz without performing autofocus each time imaging is performed.
  • Embodiments 1 to 3 and the modifications described above are not limited as they are, and various inventions are formed by appropriately combining a plurality of constituent elements disclosed in the embodiments and modifications. be able to. For example, some components may be excluded from all the components shown in the embodiment. Or you may form combining the component shown in different embodiment suitably.
  • Imaging unit 111 Imaging element 111a Light receiving surface (imaging surface) ) DESCRIPTION OF SYMBOLS 112 Observation optical system 112a Objective lens 113 Revolver 120 XY drive part 130 Inclination mechanism 140 Inclination angle setting part 141 Observation magnification acquisition part 142 Effective area
  • Optical system related information storage part 180 Image sensor-related information storage unit 210 Resolution constant input unit 220, 310 Resolution setting unit 221 Resolution switching determination unit 230 X direction movement amount calculation unit 311 Pixel addition determination unit 320 X direction movement speed calculation unit 330 Frame rate information acquisition unit

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

　撮像部と観察対象との少なくとも一方を他方に対して移動させると共に、該移動の方向に対して撮像部の合焦面を傾斜させて撮像を行う場合において、合焦面の傾斜角度を適切に設定することができる撮像装置及び顕微鏡システムを提供する。撮像装置１は、サンプルＳＰが載置されるステージ１００と、サンプルＳＰを撮像する撮像素子を有する撮像部１１０と、サンプルＳＰの載置面内の１つの方向において、撮像部１１０に対してステージ１００を移動させるＸＹ駆動部１２０と、ステージ１００に対して撮像素子の撮像面を、ステージ１００の移動方向に対し相対的に傾斜させる傾斜機構１３０と、少なくとも撮像部１１０の倍率と、撮像面上においてサンプルＳＰからの観察光を取り込む領域である有効領域のサイズと、に基づいて、上記傾斜機構１３０の傾斜角度を設定する傾斜角度設定部１４０とを備える。

Description

撮像装置及び顕微鏡システム
　本発明は、物体を撮像して画像を取得する撮像装置及び顕微鏡システムに関し、特に、薄切標本を撮像可能な撮像装置及び顕微鏡システムに関する。
　近年、顕微鏡観察の技術分野においては、電子撮像の技術が進歩し、観察対象である物体内の複数の領域をそれぞれ撮像して得られた複数の画像を貼り合わせることにより、広範囲且つ高精細な一枚の画像を表示するシステムが提案されている。このようなシステムは、バーチャルスライドシステムとも呼ばれている。例えば、下記特許文献１には、病理診断支援において、生体組織の観察領域を小区画に分割し、各小区画を撮像することにより取得した画像を繋ぎ合わせる技術が開示されている。
　このような撮像技術においては、小区画の数に対応して撮像回数が増えるので、撮像動作を高速化することが求められている。その中でも、各小区画を撮像する際のオートフォーカスを如何に高速化するかという課題がある。
　一方、顕微鏡により物体を観察する際、複数枚の画像から共焦点を抽出することにより、物体を三次元的に表示する技術も開発されている。しかしながら、共焦点顕微鏡においては、共焦点面を変化させるために、対物レンズ等の光学系を光軸方向（Ｚ方向）に操作するため、データの取得時間が長くなるという問題があった。
　このような問題に対し、下記特許文献２には、ステージの移動方向（例えばＸ方向）に対して物体側の焦点面を傾け、ステージの移動により物体の表面位置をＺ軸方向に変化させながら撮像を行う技術が開示されている。この技術によれば、傾斜に応じた厚みに含まれる物体を検出することができるので、Ｚ方向の走査を行う必要がなくなる。
特開２００８－１９１４２７号公報 特開平１１－２１１４３９号公報
　バーチャルスライドシステムにおける撮像動作を高速化するためには、特許文献１に開示されたシステムに対し、特許文献２に開示された共焦点撮像の技術を適用することが考えられる。それにより、各小区画に対するオートフォーカスが不要となり、観察領域全体に対する撮像を高速化できる可能性がある。
　しかしながら、物体面を移動させる速度と、傾斜角度によって決まる検出可能な厚みの範囲とは、トレードオフの関係にある。例えば、１回で幅２００μｍの領域を撮像可能な撮像装置において、図１７に示すように、合焦面ＰFCを厚み方向に１０μｍだけ傾斜させる場合と、図１８に示すように、合焦面ＰFCを厚み方向に４μｍだけ傾斜させる場合とを比較する。なお、図１７及び図１８に示す各撮像領域Ｃ１、Ｃ２、…は、１回の撮像により画像情報を取得可能な物体ＯＢ上の領域を示す。なお、図１７及び図１８においては、図の横方向に対して縦方向の縮尺を大きくしている。
　図１７の場合、１回の撮像により、厚み方向に１０μｍ分の画像情報を取得できる（言い換えると、１０μｍの範囲で物体ＯＢにおける合焦面を探索することができる）のに対し、図１８の場合には、厚み方向に４μｍ分の画像情報しか取得することができない。しかしながら、例えば約１μｍごとに傾斜結像を行う際、図１７の場合にはステージを約２０μｍずつずらしながら撮像を行うのに対し、図１８の場合、ステージを５０μｍずつずらしながら撮像を行うことができる。従って、後者の方が少ない撮像回数で、即ち短時間で物体ＯＢ全体を撮像することができる。
　このように、観察対象全体の撮像に要する時間を短縮するためには、物体の傾斜量は少ない方が好ましい。しかしながら、そのためには、観察対象が、合焦面を傾斜させる厚み方向の範囲に収まっている必要がある。従って、厚みを有する物体に関する画像情報を所望の撮像時間内に取得するためには、少なくとも物体の傾斜角度を適切に設定し、この傾斜角度に応じてステージを適切に移動させる必要がある。
　本発明は、上記に鑑みてなされたものであって、撮像部と観察対象との少なくとも一方を他方に対して移動させると共に、該移動の方向に対して撮像部の合焦面を傾斜させて撮像を行う場合において、合焦面の傾斜角度を適切に設定することができる撮像装置及び顕微鏡システムを提供することを目的とする。
　上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、物体が載置されるステージと、前記物体を撮像する撮像素子を有する撮像部と、前記物体の載置面内の少なくとも１つの方向に、前記ステージと前記撮像部とのうちの少なくとも一方を他方に対し相対的に移動させる移動機構と、前記撮像素子の撮像面と前記ステージとのうち少なくとも一方を、前記移動機構の移動方向に対して相対的に傾斜させる傾斜機構と、少なくとも前記撮像部の倍率と、前記撮像面上において前記物体からの観察光を取り込む領域である有効領域のサイズと、に基づいて、前記傾斜機構の傾斜角度を設定する傾斜角度設定部と、を備えることを特徴とする。
　上記撮像装置は、前記移動機構による移動量を算出する移動量算出部をさらに備え、前記撮像部は、前記物体を所定の撮像周期で撮像し、前記移動量算出部は、前記載置面と直交する第２の方向における前記撮像部の分解能と、前記傾斜角度と、に応じて、前記撮像部の１撮像周期あたりの前記移動機構による相対的な移動の量を算出することを特徴とする。
　上記撮像装置は、前記移動機構による移動速度を算出する移動速度算出部と、前記撮像部が撮像する動画のフレームレートの情報を取得するフレームレート情報取得手段と、をさらに備え、前記移動量算出部は、前記載置面と直交する第２の方向における前記撮像部の分解能と、前記傾斜角度と、前記フレームレートの情報と、を用いて、前記移動機構による相対的な移動の速度を算出することを特徴とする。
　上記撮像装置において、前記第２の方向における前記撮像部の分解能は、前記撮像部が備える光学系の開口数と、前記物体からの観察光の波長と、前記光学系と前記物体との間に存在する媒質の屈折率とに基づいて与えられることを特徴とする。
　上記撮像装置において、前記分解能は、前記分解能をＲｚ、任意の定数をｋa、前記光学系の被写界深度をＤＯＦ、前記屈折率をｎ、前記観察光の波長をλ、前記開口数をＮＡとするとき、Ｒｚ＝ｋa×ＤＯＦによって与えられ、ここで、ＤＯＦ＝（ｎλ）／（２×ＮＡ2）であることを特徴とする。
　上記撮像装置において、前記分解能は、前記撮像面における許容錯乱円の大きさと、前記撮像部が備える光学系の開口数と、前記光学系の焦点距離と、前記光学系と前記物体との間の距離である物体距離とに基づいて与えられることを特徴とする。
　上記撮像装置において、前記分解能は、前記分解能をＲｚ、任意の定数をｋb、前記光学系の被写界深度をＤfn、前記物体距離をｓ、前記光学系の過焦点距離をＨ、前記焦点距離をｆ、前記開口数をＮＡ、前記許容錯乱円の大きさをｃとするとき、Ｒｚ＝ｋb×Ｄfnによって与えられ、ここで、Ｄfn＝｛２ｓ（Ｈ－ｆ）（ｓ－ｆ）｝／｛（Ｈ＋ｓ＋２ｆ）（Ｈ－ｓ）｝、Ｈ＝（２ｆ2×ＮＡ）／ｃであることを特徴とする。
　上記撮像装置は、前記撮像面における許容錯乱円の直径、前記撮像部が備える光学系の開口数、前記光学系の焦点距離、前記物体と前記光学系との間の距離及び任意の第１の定数に基づいて与えられる前記第２の方向における前記撮像部の第１の分解能と、前記光学系の開口数、前記物体からの観察光の波長、前記物体と前記光学系との間に存在する媒質の屈折率及び任意の第２の定数に基づいて与えられる前記第２の方向における前記撮像部の第２の分解能と、の大小関係に基づいて、前記第２の方向における前記撮像部の分解能を求める方式を切り替える手段をさらに備えることを特徴とする。
　上記撮像装置は、前記第１及び第２の定数を入力する定数入力手段をさらに備えることを特徴とする。
　上記撮像装置において、前記傾斜機構は、前記載置面と直交する軸に対して前記撮像部の光軸を傾斜させることを特徴とする。
　上記撮像装置において、前記傾斜機構は、前記撮像部の光軸に対して前記撮像部が前記物体からの観察光を取り込む面を傾斜させることを特徴とする。
　本発明に係る顕微鏡システムは、上記撮像装置と、前記物体を照明する照明手段と、を備えることを特徴とする。
　上記顕微鏡システムにおいて、前記物体は、病理組織を薄切した簿切標本であることを特徴とする。
　本発明によれば、少なくとも撮像部の倍率と、物体からの観察光を取り込む撮像面上の領域である有効領域のサイズとを用いることにより、合焦面の傾斜角度を適切に設定することができる。従って、観察対象である物体全体の画像情報を、厚み方向の情報も含めて従来よりも高速且つ高精度に取得することが可能となる。
図１は、本発明の実施の形態１に係る撮像装置の概略構成を示す図である。 図２は、図１に示す撮像部の構成を示す模式図である。 図３は、図１に示す撮像装置を顕微鏡システムに適用した一例を示す模式図である。 図４は、図１に示す撮像装置の動作を示すフローチャートである。 図５は、撮像面上の有効領域のサイズと合焦面上の有効領域のサイズとの関係を説明する模式図である。 図６は、サンプルと合焦面上の有効領域のＸ方向におけるサイズとＺ方向の観察範囲との関係を示す模式図である。 図７は、実施の形態１の変形例１に係る顕微鏡システムの概略構成を示す模式図である。 図８は、本発明の実施の形態２に係る撮像装置の概略構成を示す図である。 図９は、図８に示す撮像装置の撮像動作を説明するための概念図である。 図１０は、図８に示す撮像装置の動作を示すフローチャートである。 図１１は、分解能設定部が実行するＺ方向の分解能の算出処理を示すフローチャートである。 図１２は、本発明の実施の形態３に係る撮像装置の概略構成を示す図である。 図１３は、図１２に示す撮像装置の動作を示すフローチャートである。 図１４は、分解能設定部が実行する被写界深度の算出処理を示すフローチャートである。 図１５は、ベイヤー配列を有する撮像素子における画素加算処理を説明する模式図である。 図１６は、ベイヤー配列を有する撮像素子における間引き読み出し処理を説明する模式図である。 図１７は、Ｚ方向の範囲が１０μｍとなるように合焦面を傾斜させた場合における撮像動作を説明する模式図である。 図１８は、Ｚ方向の範囲が４μｍとなるように合焦面を傾斜させた場合における撮像動作を説明する模式図である。
　以下、本発明に係る撮像装置及び顕微鏡システムの実施の形態について、図面を参照しながら詳細に説明する。なお、これらの実施の形態により本発明が限定されるものではない。また、各図面の記載において、同一部分には同一の符号を付して示している。
（実施の形態１）
　図１は、本発明の実施の形態１に係る撮像装置の概略構成を示す図である。図１に示すように、実施の形態１に係る撮像装置１は、観察対象であるサンプルＳＰを載置するステージ１００と、ステージ１００に載置されたサンプルＳＰを撮像する撮像部１１０とを備える。以下において、ステージ１００のサンプル載置面（以下、サンプル面ＰSPと記す）をＸＹ面とし、サンプル面ＰSPと直交する方向をＺ方向とする。
　また、撮像装置１は、ステージ１００をＸＹ面内において移動させるＸＹ駆動部１２０と、撮像部１１０の合焦面ＰFCをステージ１００の移動方向に対して傾斜させる傾斜機構１３０と、ステージ１００の移動方向に対する合焦面ＰFCの傾斜角度を傾斜機構１３０に設定する傾斜角度設定部１４０と、ＸＹ駆動部１２０によるステージ１００の移動動作を制御するＸＹ駆動制御部１５０と、Ｚ方向におけるサンプルＳＰの観察範囲を設定するＺ方向観察範囲取得部１６０と、撮像部１１０が備える光学系に関する情報を記憶する光学系関連情報記憶部１７０と、撮像素子関連情報記憶部１８０とを備える。
　図２は、図１に示す撮像部１１０の構成を示す模式図である。図２に示すように、撮像部１１０は、ＣＣＤ等の固体撮像素子からなり、サンプルＳＰからの観察光を受光して電子的な画像情報を生成する撮像素子１１１と、対物レンズ１１２ａを含む観察光学系１１２とを備える。観察光学系１１２は、サンプルＳＰからの観察光（サンプルＳＰの透過光又は反射光）Ｌを撮像素子１１１の受光面（撮像面）１１１ａに結像させる。実施の形態１において、撮像面１１１ａは、観察光学系１１２の光軸Ｌ１と直交するように設けられている。
　図１に示した傾斜機構１３０は、撮像部１１０の撮像動作中、図２に示すように、合焦面ＰFCがステージ１００の移動方向に対して角度θをなすように、撮像部１１０を傾斜させた状態で保持する。具体的には、ステージ１００をＸ方向に移動させる場合、傾斜機構１３０は、Ｘ軸と直交するＹ方向の軸を中心に回転可能な回転機構によって構成される。
　再び図１を参照すると、ＸＹ駆動制御部１５０は、撮像部１１０の撮像動作中、ステージ１００を所定の方向（例えばＸ方向）に移動させるように、ＸＹ駆動部１２０を制御する。
　傾斜角度設定部１４０は、合焦面ＰFCの傾斜角度θを算出して傾斜機構１３０に設定する。より詳細には、傾斜角度設定部１４０は、撮像部１１０の観察倍率（像倍率）を取得する観察倍率取得部１４１と、撮像部１１０がサンプルＳＰからの観察光を取り込む撮像面１１１ａ上の領域である有効領域のサイズを取得する有効領域取得部１４２とを備え、取得した観察倍率及び有効領域のサイズに基づいて、撮像部１１０の傾斜角度θを算出する。
　Ｚ方向観察範囲取得部１６０は、合焦面ＰFCを傾斜させた状態で撮像を１回行った際に画像情報を取得可能なＺ方向の範囲を取得する。
　光学系関連情報記憶部１７０は、観察倍率、開口数といった観察光学系１１２に関する情報を記憶する。
　撮像素子関連情報記憶部１８０は、撮像面１１１ａのサイズ、画素数といった撮像素子１１１のスペックに関する情報を記憶する。
　図３は、図１に示す撮像装置１を顕微鏡システムに適用した一例を示す模式図である。図３に示す顕微鏡システムは、顕微鏡１０及び制御装置２０を備える。
　顕微鏡１０は、ベース１１と、該ベース１１上に設定されたステージ台１２及び支柱１３とを備える。ステージ台１２には、ＸＹ駆動部１２０を介してステージ１００が設けられている。また、ステージ台１２には、ステージ１００をＺ方向に移動させる調節ツマミ１４が設けられている。
　ステージ台１２の内部には、照明光をサンプルＳＰに照射する透過照明光学系１５が設けられている。なお、サンプルＳＰを照明する機構としては、透過照明光学系１５の代わりに、落射照明光学系を設けても良い。
　一方、支柱１３には、傾斜機構１３０を介して撮像部１１０が設けられている。なお、撮像部１１０は、倍率が互いに異なる複数の対物レンズを交換可能に保持するレボルバ１１３をさらに備えても良い。
　制御装置２０は、例えば汎用のパーソナルコンピュータ等からなり、記憶部２１と、入力部２２と、制御部２３とを備える。
　記憶部２１は、フラッシュメモリ、ＲＡＭ、ＲＯＭ等の半導体メモリや、ＨＤＤ、ＭＯ、ＣＤ－Ｒ、ＤＶＤ－Ｒ等の記録媒体及び該記録媒体を駆動する駆動装置等によって実現され、制御装置２０に各種動作を実行させるプログラム、プログラムの実行中に用いられる各種情報、及び撮像部１１０から出力された画像情報等を記憶する。実施の形態１において、光学系関連情報記憶部１７０及び撮像素子関連情報記憶部１８０は、記憶部２１に設けられる。
　入力部２２は、キーボード、タッチパネル、マウス等の入力デバイスからなり、制御装置２０において用いられる各種情報をユーザが入力する際に使用される。
　制御部２３は、ＣＰＵ等のハードウェアによって構成され、記憶部２１に記憶されたプログラムを読み込むことにより、記憶部２１に記憶された各種データや入力部２２から入力される各種情報に基づき、当該顕微鏡システムに撮像動作を実行させるための制御を行う。実施の形態１において、傾斜角度設定部１４０、ＸＹ駆動制御部１５０、及びＺ方向観察範囲取得部１６０は、制御部２３によって構成される。
　次に、図１に示す撮像装置１の動作について説明する。図４は、撮像装置１の動作を示すフローチャートである。なお、以下においては、ステージ１００をＸ方向に移動させるものとする。
　まず、ステップＳ１０において、傾斜角度設定部１４０は、観察倍率β及び撮像面１１１ａ上の有効領域のサイズＳを取得する。より詳細には、観察倍率取得部１４１は、光学系関連情報記憶部１７０に予め記憶されている観察倍率βを読み出す。或いは、観察倍率取得部１４１は、ユーザにより入力部２２（図３参照）から入力された情報に基づき、ユーザ所望の観察倍率βを取得しても良い。
　さらには、図３に示すように、撮像部１１０にレボルバ１１３を設けて対物レンズ１１２ａを交換可能とする場合には、レボルバ１１３にエンコーダを設け、該エンコーダの出力値に基づき、サンプルＳＰと対向する対物レンズの倍率を観察倍率取得部１４１が取得できるようにしても良い。この場合、観察倍率取得部１４１は、取得した対物レンズの倍率に基づいて、撮像部１１０の観察倍率βを算出する。
　一方、有効領域取得部１４２は、撮像素子関連情報記憶部１８０に予め記憶されている撮像面１１１ａ上の有効領域のサイズＳを読み出す。ここで、撮像面１１１ａ上の有効領域とは、１回の撮像により撮像素子１１１が画像情報（画像データ）を取り込むことができる撮像面１１１ａ上の領域のことであり、撮像素子１１１のスペックにより決まる。ここでは、サイズＳとして、ステージ１００の移動方向であるＸ方向に対応する１辺の長さを用いる。なお、有効領域のサイズとしては、撮像部１１０がトリミングを行い、観察像を部分的に取り込む場合には、トリミング後のサイズが用いられる。この他、有効領域のサイズの定義としては、撮像面１１１ａの結像領域のサイズ又は撮像素子１１１そのもののサイズとしても良い。
　続くステップＳ１１において、傾斜角度設定部１４０は、観察倍率β及び有効領域のサイズＳを用いて、合焦面ＰFC上の有効領域のサイズＬｘを算出する。ここで、合焦面ＰFC上の有効領域とは、撮像部１１０による１回の撮像により画像情報の取得が可能な合焦面ＰFC上の領域のことであり、図５に示すように、撮像面１１１ａ上の有効領域のサイズＳと観察倍率βとによって決定される。
　具体的には、傾斜角度設定部１４０は、次式（１）を用いてサイズＬｘを算出する。
Figure JPOXMLDOC01-appb-M000001
　続くステップＳ１２において、Ｚ方向観察範囲取得部１６０は、Ｚ方向の観察範囲Ｌｚの値を取得し、傾斜角度設定部１４０に入力する。ここで、図６は、サンプルＳＰと、合焦面ＰFC上の有効領域のＸ方向におけるサイズＬｘと、Ｚ方向の観察範囲ＬZとの関係を示す模式図である。
　ここで、サンプルＳＰが病理標本をスライスした薄切標本である場合、一般的には、ミクロトームの設定から、薄切標本の厚さは概ね一定の値（例えば３～５μｍ）になっている。このため、観察範囲Ｌｚは、一般的な薄切標本の厚さに見合った値に設定され、Ｚ方向観察範囲取得部１６０に予め格納されている。または、入力部２２（図３参照）を用いてユーザが所望の観察範囲Ｌｚの値を入力できるようにしても良い。この場合、Ｚ方向観察範囲取得部１６０は、ユーザが入力した観察範囲Ｌｚの値を傾斜角度設定部１４０に入力する。或いは、当該薄切標本を作製したミクロトームの情報（例えば、スライス間の厚み情報等）がＺ方向観察範囲取得部１６０に自動入力されるように、当該撮像装置１を構成しても良い。
　続くステップＳ１３において、傾斜角度設定部１４０は、ステップＳ１１において算出した合焦面ＰFC上の有効領域のサイズＬｘと、ステップＳ１２においてＺ方向観察範囲取得部１６０から入力された観察範囲Ｌｚとを用いて、傾斜角度θを算出する。ここで、図６に示すように、サイズＬｘと観察範囲Ｌｚとの関係は、次式（２）によって与えられる。
Figure JPOXMLDOC01-appb-M000002
　従って、傾斜角度θは、次式（３）によって与えられる。
Figure JPOXMLDOC01-appb-M000003
　さらに、ステップＳ１４において、傾斜角度設定部１４０は、傾斜機構１３０に対し、撮像部１１０を傾斜させる傾斜角度θを設定する。これより、撮像部１１０の合焦面ＰFCがＸ方向に対して角度θだけ傾斜した状態となる。その後、撮像部１１０は、合焦面ＰFCをＸ方向に対して傾斜させた状態で、サンプルＳＰの撮像を行う。
　以上説明したように、実施の形態１によれば、観察光学系１１２の観察倍率β、撮像面１１１ａの有効領域のサイズＳ、及びサンプルＳＰの厚みに基づく観察範囲Ｌｚから、傾斜角度θを適切に設定することができる。従って、サンプルＳＰの厚み方向の情報を十分に取得しつつ、ステージ１００を移動させて、サンプルＳＰの３次元的な画像情報を取得することが可能となる。
（変形例１）
　次に、実施の形態１の変形例１について説明する。
　図７は、変形例１に係る撮像装置の概略構成を示す模式図である。ここで、実施の形態１においては、ステージ１００を水平に配置し、観察光学系１１２及び透過照明光学系１５の光軸Ｌ１をステージ１００に対して傾斜させた例を示したが（図３参照）、図７に示すように、光軸Ｌ１が鉛直方向となるように観察光学系１１２及び透過照明光学系１５を配置し、ステージ１００を水平方向に対して傾斜させても良い。この場合、サンプル面ＰSPの傾斜方向（Ｘ’方向）に沿ってステージ１００を移動させながら、撮像部１１０により撮像を行う。
（変形例２）
　次に、実施の形態１の変形例２について説明する。
　実施の形態１においては、観察光学系１１２及び透過照明光学系１５全体を傾けることにより、ステージ１００の移動方向に対して合焦面ＰFCを傾斜させたが、光軸Ｌ１がサンプル面ＰSPと直交するように観察光学系１１２及び透過照明光学系１５とステージ１００とを設置し、撮像素子１１１の撮像面１１１ａを光軸Ｌ１に対して傾斜させることとしても良い。
　一例として、撮像部１１０において、撮像素子１１１の撮像面１１１ａが光軸Ｌ１の直交面に対し、Ｙ軸を回転軸として角度θだけ傾斜するように撮像素子１１１を設置する。これにより、ステージ１００の移動方向（Ｘ方向）に対して実質的に合焦面ＰFCが傾斜した画像を取得することができる。
（実施の形態２）
　次に、本発明の実施の形態２について説明する。
　図８は、本発明の実施の形態２に係る撮像装置の概略構成を示す図である。図８に示すように、実施の形態２に係る撮像装置２は、図１に示す撮像装置１に対し、分解能定数入力部２１０と、分解能設定部２２０と、Ｘ方向移動量算出部２３０とをさらに備える。
　図９は、撮像装置２の撮像動作を説明するための概念図である。図９に示すように、撮像装置２においては、合焦面ＰFCをステージ１００の移動方向に対して傾斜させつつ、ステージ１００を移動させながら、所定の撮像周期で連続して撮像を行う。ここで、撮像領域Ｃ１は、１回目の撮像時に撮像対象となるサンプルＳＰ内の領域を示し、撮像領域Ｃ２は、続く２回目の撮像時に撮像対象となるサンプルＳＰ内の領域を示す。
　サンプルＳＰの厚み方向（Ｚ方向）においてユーザ所望の分解能Ｒｚを得るためには、撮像を１回行うごとにステージ１００を移動させる移動量Ｍｘを適切に設定する必要がある。そこで、実施の形態２においては、傾斜角度設定部１４０により設定された傾斜角度θと、ユーザ所望の分解能Ｒｚとに基づいて、適切な移動量Ｍｘを算出し、この移動量Ｍｘに基づいてステージ１００を移動させながらサンプルＳＰを撮像する。
　図８に示す分解能定数入力部２１０は、例えばキーボード、マウス、タッチパネル等の入力デバイスによって構成され、分解能Ｒｚを設定する際に用いられる定数をユーザが入力するために使用される。
　分解能設定部２２０は、分解能Ｒｚの算出方式の切り替え判定を行う分解能切り替え判定部２２１を備え、該分解能切り替え判定部２２１の判定結果と、分解能定数入力部２１０によって入力された定数とに基づき分解能Ｒｚを算出し、Ｘ方向移動量算出部２３０に対して設定する。
　Ｘ方向移動量算出部２３０は、傾斜角度設定部１４０により設定された傾斜角度θと、分解能設定部２２０により設定された分解能Ｒｚとに基づき、撮像を１回行うごとにステージ１００を移動させるＸ方向の移動量Ｍｘを算出し、ＸＹ駆動制御部１５０に対して設定する。
　なお、分解能定数入力部２１０、分解能設定部２２０及びＸ方向移動量算出部２３０以外の撮像装置２の各部の構成及び動作については、実施の形態１と同様である。
　次に、撮像装置２の動作について説明する。図１０は、撮像装置２の動作を示すフローチャートである。なお、図１０のステップＳ１０～Ｓ１３は、実施の形態１と同様である（図４参照）。
　ステップＳ１３に続くステップＳ２１において、分解能設定部２２０は、Ｚ方向の分解能Ｒｚを算出する。分解能Ｒｚの算出方法については後述する。
　続くステップＳ２２において、Ｘ方向移動量算出部２３０は、ステップＳ１３において算出された傾斜角度θと、ステップＳ２１において算出された分解能Ｒｚとに基づき、撮像を１回行うごとにステージ１００をＸ方向に移動させる移動量Ｍｘを算出する。
　ここで、図９に示すように、ステージ１００を移動量Ｍｘだけ移動させることにより、サンプルＳＰに対して撮像領域Ｃ１、Ｃ２が相対的に移動する。このときの撮像領域Ｃ１の一端と撮像領域Ｃ２の一端との間隔（即ち、移動量Ｍｘ）と、撮像部１１０の倍率によって決まる各撮像領域Ｃ１、Ｃ２のサイズＬｘと、Ｚ方向における観察範囲Ｌｚと、分解能Ｒｚとの間には、次式（４）に示す関係がある。なお、次式（４）は、移動量Ｍｘ及び分解能Ｒｚを２辺とする三角形と、サイズＬｘ及び観察範囲Ｌｚを２辺とする三角形との相似関係より導かれる。
Figure JPOXMLDOC01-appb-M000004
　傾斜角度θが小さいと仮定すると、式（４）を次式（５）のように簡略化することができる。
Figure JPOXMLDOC01-appb-M000005
 　Ｘ方向移動量算出部２３０は、式（５）を用いて移動量Ｍｘを算出する。
　さらに、ステップＳ２３において、傾斜角度設定部１４０は、撮像部１１０（合焦面ＰFC）の傾斜角度θを傾斜機構１３０に設定し、Ｘ方向移動量算出部２３０は、ステージ１００の移動量ＭｘをＸＹ駆動制御部１５０に設定する。その後、撮像部１１０は、合焦面ＰFCをＸ方向に対して傾斜させた状態で、撮像を１回行うごとにステージ１００を移動させ、サンプルＳＰを連続的に撮像する。
　次に、ステップＳ２１における分解能設定部２２０の動作について説明する。図１１は、分解能設定部２２０が実行するＺ方向の分解能の算出処理を示すフローチャートである。
　ステップＳ２１１において、分解能設定部２２０は、撮像部１１０が備える観察光学系１１２の設計（性能）に基づく被写界深度ＤＯＦを算出する。
　ここで、観察光学系１１２の開口数をＮＡ、対物レンズ１１２ａとサンプルＳＰとの間に存在する媒質の屈折率をｎ、サンプルＳＰからの観察光の波長をλ、任意の定数をｋaとすると、被写界深度ＤＯＦに基づく分解能Ｒａは、次式（６－１）、（６－２）によって与えられる。
Figure JPOXMLDOC01-appb-M000006
　なお、開口数ＮＡ、媒質の屈折率ｎ、波長λ等の各特性値に関する情報は光学系関連情報記憶部１７０に予め記憶されており、分解能設定部２２０が必要に応じて光学系関連情報記憶部１７０から取得する。また、媒質の屈折率ｎは、対物レンズ１１２ａとサンプルＳＰとの間を液体で満たした液浸式の顕微鏡や、対物レンズ１１２ａをサンプルＳＰに直接接触させている場合、ｎ＞１となる。
　続くステップＳ２１２において、分解能設定部２２０は、撮像素子１１１の分解能に基づく被写界深度Ｄfnを算出する。なお、ステップＳ２１１及びステップＳ２１２の処理順は、いずれかが先であっても良いし、同時であっても良い。
　ここで、分解能は、撮像素子１１１の分解能力に基づく被写界深度Ｄfnに対し、ユーザが何倍の分解能を所望しているかにより設定することも可能である。この場合、次式（７）においてユーザが定数ｋbを設定すれば、分解能Ｒｂが決まる。
　　Ｒｂ＝ｋb×Ｄfn　　…（７）
　撮像素子１１１の撮像面１１１ａ上の２点間における分解能は、許容錯乱円の直径ｃによって表される。また、無限遠を被写界深度内に合焦する距離Ｈは過焦点距離と呼ばれる。過焦点距離Ｈは、観察光学系１１２の開口数をＮＡ、焦点距離をｆとすると、次式（８）によって与えられる。
Figure JPOXMLDOC01-appb-M000007
　なお、光学系の各特性値に関する情報及び撮像素子１１１のスペックに関する情報は光学系関連情報記憶部１７０及び撮像素子関連情報記憶部１８０にそれぞれ、予め記憶されており、分解能設定部２２０が必要に応じて取得する。
　被写界深度の前点Ｄn及び後点Ｄfは、式（９－１）及び（９－２）によってそれぞれ与えられるため、被写界深度Ｄfnは、式（９－３）によって算出される。
Figure JPOXMLDOC01-appb-M000008
 式（９－１）～（９－３）において、符号ｓはサンプルＳＰと観察光学系１１２との間の距離（物体距離）を示す。
　続くステップＳ２１３において、分解能切り替え判定部２２１は、ステップＳ２１１において算出した被写界深度ＤＯＦと、ステップＳ２１２において算出した被写界深度Ｄfnとのいずれが大きいかを判定する。
　ここで、例えば倍率２０倍程度で観察を行うことを想定し、焦点距離ｆ＝２５ｍｍ、開口数ＮＡ＝０．５、撮像素子１１１における画素サイズを２μｍ、許容錯乱円の直径ｃ＝４μｍ、物体距離ｓ＝２０ｍｍとしたとき、式（９－３）より、被写界深度Ｄfnは約２μｍとなる。一方、観察光学系１１２とサンプルＳＰとの間に存在する媒質の屈折率をｎ＝１、観察光の波長をλ＝０．５μｍとしたとき、被写界深度ＤＯＦは、式（６－２）より、約１μｍとなる。
　このように、Ｄfn＞ＤＯＦとなる場合（ステップＳ２１３：Ｙｅｓ）、分解能Ｒｚを、撮像素子１１１において解像可能な分解能Ｒｂよりも細かく設定する必要はない。従って、この場合、分解能設定部２２０は、撮像素子１１１において解像可能な分解能Ｒｂを分解能Ｒｚとして設定することとし、分解能定数入力部２１０を介して、式（７）における定数ｋbを取得する（ステップＳ２１４）。
　この場合には、続くステップＳ２１６において、分解能設定部２２０は、開口数ＮＡ、焦点距離ｆ、物体距離ｓ及び撮像素子１１１のスペックに基づく画素サイズと、ユーザにより入力された定数ｋbとによって与えられる分解能Ｒｂを、分解能Ｒｚとして算出する。
　反対に、液浸式の顕微鏡等で媒質の屈折率がｎ＞１となる場合や、高倍率の観察を行う場合、Ｄfn＜ＤＯＦとなる傾向がある（ステップＳ２１３：Ｎｏ）。この場合、分解能設定部２２０は、観察光学系１１２の性能による被写界深度ＤＯＦに所望の倍率ｋaを掛け合わせた分解能Ｒａを分解能Ｒｚとして設定することとし、分解能定数入力部２１０を介して、式（６－１）における定数ｋaを取得する（ステップＳ２１５）。
　この場合、続くステップＳ２１６において、分解能設定部２２０は、開口数ＮＡと、媒質の屈折率ｎ及び観察光の波長λと、ユーザにより入力された定数ｋaとによって与えられる分解能Ｒａを、分解能Ｒｚとして算出する。なお、通常、定数ｋaは、ｋa＞０．５に設定される。
　その後、処理はメインルーチンに戻る。
　以上説明したように、実施の形態２によれば、傾斜角度θに加えて、ユーザ所望の分解能Ｒｚに基づいて算出された移動量Ｍｘを設定し、ステージ１００を撮像部１１０に対して相対的に移動させながら複数回の撮像を行うので、サンプルの複数焦点での画像情報、又は複数の合焦情報に基づく３次元的な画像情報を高速且つ高精度に取得することが可能となる。
　なお、実施の形態２においては、撮像部１１０を固定し、ステージ１００を移動させることにより相対的な移動を実現したが、サンプルＳＰ側を固定し、撮像部１１０側を移動させても良い。
（実施の形態３）
　次に、本発明の実施の形態３について説明する。
　図１２は、本発明の実施の形態３に係る撮像装置の概略構成を示す図である。図１２に示すように実施の形態３に係る撮像装置３は、図８に示す分解能設定部２２０の代わりに分解能設定部３１０を備えると共に、Ｘ方向移動速度算出部３２０及びフレームレート情報取得部３３０をさらに備える。
　分解能設定部３１０は、分解能切り替え判定部２２１に加えて、撮像部１１０が画素加算を行っているか否かを判定する画素加算判定部３１１をさらに備え、画素加算判定部３１１による判定結果に基づいて、Ｘ方向移動量算出部２３０に対して設定する分解能Ｒｚを算出する。
　Ｘ方向移動速度算出部３２０は、Ｘ方向移動量算出部２３０が算出したステージ１００の移動量Ｍｘ及び撮像部１１０のフレームレートに基づいて、撮像部１１０がサンプルＳＰの動画を撮像する際のステージ１００の移動速度を算出する。
　フレームレート情報取得部３３０は、撮像部１１０が動画撮像を行う際のフレームレートを取得し、保持している。
　なお、分解能設定部３１０、Ｘ方向移動速度算出部３２０及びフレームレート情報取得部３３０以外の撮像装置３の各部の構成及び動作は、実施の形態２と同様である。
　次に、撮像装置３の動作について説明する。図１３は、撮像装置３の動作を示すフローチャートである。なお、図１３のステップＳ１０～Ｓ２２は実施の形態２（図１０参照）に対応しており、後述するように、図１１のステップＳ２１２において被写界深度Ｄfnを算出する際の詳細な動作が実施の形態２とは異なる。
　ステップＳ２２に続くステップＳ３１において、Ｘ方向移動速度算出部３２０は、フレームレート情報取得部３３０から撮像部１１０のフレームレートＦＲを取得する。
　続くステップＳ３２において、Ｘ方向移動速度算出部３２０は、Ｘ方向移動量算出部２３０が算出した撮像１回あたりの移動量Ｍｘ（ｍ）及びフレームレートＦＲ（ｆｐｓ）を用いて、次式（１０）によって与えられるステージ１００の移動速度Ｖｘを算出する。
　　Ｖｘ＝ＦＲ・Ｍｘ　　…（１０）
　さらに、ステップＳ３３において、傾斜角度設定部１４０は、撮像部１１０（合焦面ＰFC）の傾斜角度θを傾斜機構１３０に設定し、Ｘ方向移動速度算出部３２０は、ステージ１００の移動速度ＶｘをＸＹ駆動制御部１５０に設定する。その後、撮像部１１０は、合焦面ＰFCをＸ方向に対して傾斜させた状態で、ステージ１００を移動させながらサンプルＳＰの動画撮像を実行する。
　次に、ステップＳ２１において分解能Ｒｚを算出する際に用いられる被写界深度Ｄfnの算出処理（図１１のステップＳ２１２参照）について説明する。図１４は、分解能設定部３１０が実行する被写界深度Ｄfnの算出処理を示すフローチャートである。
　撮像部１１０が動画撮像を行う場合、システムの処理能力の関係から、フレーム間の間隔は解像度によって規定される場合が多い。一方、システムの処理能力の関係から、フレームレートと解像度はトレードオフの関係になる。そのため、フレームレート、即ち、撮影スピードを優先する場合、撮像部１１０において画素加算又は間引き読み出し処理を行っていることが考えられる。
　例えば、図１５に示すように、ベイヤー配列を有する撮像素子に対し、９画素加算（ある画素及びその周囲の画素を含む９画素の画素値を加算平均する処理）を行っている場合、画素値の読み出し速度は、全画素の画素値を読み出す場合と比較して９倍になる。一方、図１６に示すように、ベイヤー配列を有する撮像素子に対し、３画素につき１回の間引き読み出しを行う場合、画素値の読み出し速度は、全画素の画素値を読み出す場合と比較して３倍になる。なお、図１６においては、読み出しを行う画素にハッチングを施している。これらの場合、加算又は間引きする画素数に応じて、解像度が低下することになる。即ち、撮像素子１１１の撮像面１１１ａ上における２点間の分解能力を表す許容錯乱円の直径ｃが大きくなる。
　そこで、まず、ステップＳ３０１において、画素加算判定部３１１は、撮像部１１０は画素加算又は間引き読み出しを行っているか否かを判定する。
　画素加算又は間引き読み出しを行っていない場合（ステップＳ３０１：Ｎｏ）、分解能設定部３１０は、式（１１）における変数ｍをｍ＝１に設定し（ステップＳ３０２）、許容錯乱円の直径ｃを近似的に算出する（ステップＳ３０４）。
Figure JPOXMLDOC01-appb-M000009
 　式（１１）において、符号Ｑは撮像素子１１１の１画素あたりの画素サイズを表し、許容錯乱円の直径ｃを最小画素解像サイズの２倍としている。
　一方、画素加算又は間引き読み出しを行っている場合（ステップＳ３０１：Ｙｅｓ）、分解能設定部３１０は式（１１）における変数ｍとして、当該画素加算における加算数（又は間引き読み出しにおける間引き数）に設定し（ステップＳ３０３）、許容錯乱円の直径ｃを算出する（ステップＳ３０４）。例えば、図１５に示す９画素加算の場合、ｍ＝９に設定される。また、図１６に示す間引き読み出しの場合、ｍ＝３に設定される。
　続くステップＳ３０５において、分解能設定部３１０は、ステップＳ３０４において算出された許容錯乱円の直径ｃを用いて、式（８）によって与えられる過焦点距離Ｈを算出する。
　さらに、ステップＳ３０６において、分解能設定部３１０は、ステップＳ３０５において算出された過焦点距離Ｈを用いて、式（９－３）によって与えられる被写界深度Ｄfnを算出する。その後、処理はメインルーチンに戻る。
　以上説明したように、実施の形態３によれば、ステージ１００を移動させながら動画撮像を行うので、サンプルＳＰに関する複数焦点の画像情報、又は複数の合焦情報に基づく３次元的な画像情報を高速に取得することが可能となる。また、撮像部１１０が画素加算又は間引き読み出しを行っているか否かを判定し、この判定結果に基づいてＺ方向の分解能Ｒｚを算出するので、サンプルＳＰの移動速度を適切に設定することができる。従って、サンプルＳＰに関する３次元的な画像情報を必要十分に取得することが可能となる。
　以上説明した実施の形態１～３によれば、サンプルＳＰの複数焦点の画像情報を従来よりも高速且つ高精度に取得することができる。従って、撮像部１１０は、撮像を１回行うごとにオートフォーカスを実行することなく、観察範囲Ｌｚ内の全域において合焦された画像を生成することができる。
　また、複数の合焦情報に基づくサンプルＳＰの３次元的な画像情報を用いることにより、サンプルＳＰの３次元画像を構築することも可能となる。さらに、図９に示すように、撮像領域Ｃ１、Ｃ２の一部をＸＹ平面において重複させて撮像を行うので、同一のＸＹ座標に関して、合焦された画像と合焦されていない画像との両方を得ることができ、ボケ情報を取得することが可能となる。そのようなボケ情報を用いて、例えばボケ除去処理(Decomvolution)や、焦点推定処理等を行うことが出来る。
　以上説明した実施の形態１～３及び変形例はそのままに限定されるものではなく、各実施の形態及び変形例に開示されている複数の構成要素を適宜組み合わせることによって、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素からいくつかの構成要素を除外して形成してもよい。あるいは、異なる実施の形態に示した構成要素を適宜組み合わせて形成してもよい。
　１、２、３　撮像装置
　１０　顕微鏡
　１１　ベース
　１２　ステージ台
　１３　支柱
　１４　調節ツマミ
　１５　透過照明光学系
　２０　制御装置
　２１　記憶部
　２２　入力部
　２３　制御部
　１００　ステージ
　１１０　撮像部
　１１１　撮像素子
　１１１ａ　受光面（撮像面）
　１１２　観察光学系
　１１２ａ　対物レンズ
　１１３　レボルバ
　１２０　ＸＹ駆動部
　１３０　傾斜機構
　１４０　傾斜角度設定部
　１４１　観察倍率取得部
　１４２　有効領域取得部
　１５０　ＸＹ駆動制御部
　１６０　Ｚ方向観察範囲取得部
　１７０　光学系関連情報記憶部
　１８０　撮像素子関連情報記憶部
　２１０　分解能定数入力部
　２２０、３１０　分解能設定部
　２２１　分解能切り替え判定部
　２３０　Ｘ方向移動量算出部
　３１１　画素加算判定部
　３２０　Ｘ方向移動速度算出部
　３３０　フレームレート情報取得部

Claims (13)

  1. 　物体が載置されるステージと、
    　前記物体を撮像する撮像素子を有する撮像部と、
    　前記物体の載置面内の少なくとも１つの方向に、前記ステージと前記撮像部とのうちの少なくとも一方を他方に対し相対的に移動させる移動機構と、
    　前記撮像素子の撮像面と前記ステージとのうち少なくとも一方を、前記移動機構の移動方向に対して相対的に傾斜させる傾斜機構と、
    　少なくとも前記撮像部の倍率と、前記撮像面上において前記物体からの観察光を取り込む領域である有効領域のサイズと、に基づいて、前記傾斜機構の傾斜角度を設定する傾斜角度設定部と、
    を備えることを特徴とする撮像装置。
  2. 　前記移動機構による移動量を算出する移動量算出部をさらに備え、
    　前記撮像部は、前記物体を所定の撮像周期で撮像し、
    　前記移動量算出部は、前記載置面と直交する第２の方向における前記撮像部の分解能と、前記傾斜角度と、に応じて、前記撮像部の１撮像周期あたりの前記移動機構による相対的な移動の量を算出する
    ことを特徴とする請求項１に記載の撮像装置。
  3. 　前記移動機構による移動速度を算出する移動速度算出部と、
    　前記撮像部が撮像する動画のフレームレートの情報を取得するフレームレート情報取得手段と、
    をさらに備え、
    　前記移動量算出部は、前記載置面と直交する第２の方向における前記撮像部の分解能と、前記傾斜角度と、前記フレームレートの情報と、を用いて、前記移動機構による相対的な移動の速度を算出する
    ことを特徴とする請求項１に記載の撮像装置。
  4. 　前記第２の方向における前記撮像部の分解能は、前記撮像部が備える光学系の開口数と、前記物体からの観察光の波長と、前記光学系と前記物体との間に存在する媒質の屈折率とに基づいて与えられる
    ことを特徴とする請求項２又は３に記載の撮像装置。
  5. 　前記分解能は、前記分解能をＲｚ、任意の定数をｋa、前記光学系の被写界深度をＤＯＦ、前記屈折率をｎ、前記観察光の波長をλ、前記開口数をＮＡとするとき、
    　Ｒｚ＝ｋa×ＤＯＦ
    によって与えられ、ここで、
    　ＤＯＦ＝（ｎλ）／（２×ＮＡ2）
    であることを特徴とする請求項４に記載の撮像装置。
  6. 　前記分解能は、前記撮像面における許容錯乱円の大きさと、前記撮像部が備える光学系の開口数と、前記光学系の焦点距離と、前記光学系と前記物体との間の距離である物体距離とに基づいて与えられる
    ことを特徴とする請求項２又は３に記載の撮像装置。
  7. 　前記分解能は、前記分解能をＲｚ、任意の定数をｋb、前記光学系の被写界深度をＤfn、前記物体距離をｓ、前記光学系の過焦点距離をＨ、前記焦点距離をｆ、前記開口数をＮＡ、前記許容錯乱円の大きさをｃとするとき、
    　Ｒｚ＝ｋb×Ｄfn
    によって与えられ、ここで、
    　Ｄfn＝｛２ｓ（Ｈ－ｆ）（ｓ－ｆ）｝／｛（Ｈ＋ｓ＋２ｆ）（Ｈ－ｓ）｝、
    　Ｈ＝（２ｆ2×ＮＡ）／ｃ
    であることを特徴とする請求項６に記載の撮像装置。
  8. 　前記撮像面における許容錯乱円の直径、前記撮像部が備える光学系の開口数、前記光学系の焦点距離、前記物体と前記光学系との間の距離及び任意の第１の定数に基づいて与えられる前記第２の方向における前記撮像部の第１の分解能と、
    　前記光学系の開口数、前記物体からの観察光の波長、前記物体と前記光学系との間に存在する媒質の屈折率及び任意の第２の定数に基づいて与えられる前記第２の方向における前記撮像部の第２の分解能と、
    の大小関係に基づいて、前記第２の方向における前記撮像部の分解能を求める方式を切り替える手段
    をさらに備えることを特徴とする請求項２又は３に記載の撮像装置。
  9. 　前記第１及び第２の定数を入力する定数入力手段をさらに備えることを特徴とする請求項８に記載の撮像装置。
  10. 　前記傾斜機構は、前記載置面と直交する軸に対して前記撮像部の光軸を傾斜させることを特徴とする請求項１～９のいずれか１項に記載の撮像装置。
  11. 　前記傾斜機構は、前記撮像部の光軸に対して前記撮像部が前記物体からの観察光を取り込む面を傾斜させることを特徴とする請求項１～９のいずれか１項に記載の撮像装置。
  12. 　請求項１～１１のいずれか１項に記載の撮像装置と、
    　前記物体を照明する照明手段と、
    を備えることを特徴とする顕微鏡システム。
  13. 　前記物体は、病理組織を薄切した簿切標本であることを特徴とする請求項１２に記載の顕微鏡システム。
PCT/JP2013/075169 2012-12-07 2013-09-18 撮像装置及び顕微鏡システム WO2014087713A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/725,313 US9906729B2 (en) 2012-12-07 2015-05-29 Imaging apparatus and microscope system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012268787A JP6027875B2 (ja) 2012-12-07 2012-12-07 撮像装置及び顕微鏡システム
JP2012-268787 2012-12-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/725,313 Continuation US9906729B2 (en) 2012-12-07 2015-05-29 Imaging apparatus and microscope system

Publications (1)

Publication Number Publication Date
WO2014087713A1 true WO2014087713A1 (ja) 2014-06-12

Family

ID=50883143

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/075169 WO2014087713A1 (ja) 2012-12-07 2013-09-18 撮像装置及び顕微鏡システム

Country Status (3)

Country Link
US (1) US9906729B2 (ja)
JP (1) JP6027875B2 (ja)
WO (1) WO2014087713A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017037486A3 (en) * 2015-08-31 2017-09-14 3Dhistech Kft. Confocal slide-digitizing apparatus

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6562626B2 (ja) * 2014-12-10 2019-08-21 キヤノン株式会社 顕微鏡システム
JP6609174B2 (ja) * 2015-12-10 2019-11-20 キヤノン株式会社 顕微鏡システムおよびその制御方法
US11367266B2 (en) * 2017-02-14 2022-06-21 Nec Corporation Image recognition system, image recognition method, and storage medium
US10341551B1 (en) * 2018-05-21 2019-07-02 Grundium Oy Method, an apparatus and a computer program product for focusing
DE102018132227A1 (de) * 2018-12-14 2020-06-18 Leica Mikrosysteme Gmbh Verfahren zur Erzeugung einer Schnittserie, Verfahren zur dreidimensionalen Rekonstruktion einer mikroskopischen Probe und Mikrotomsystem

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11211439A (ja) * 1998-01-22 1999-08-06 Takaoka Electric Mfg Co Ltd 表面形状計測装置
WO2006098443A1 (ja) * 2005-03-17 2006-09-21 Hamamatsu Photonics K.K. 顕微鏡画像撮像装置
WO2008137746A1 (en) * 2007-05-04 2008-11-13 Aperio Technologies, Inc. Rapid microscope scanner for volume image acquisition
WO2011080670A1 (en) * 2009-12-30 2011-07-07 Koninklijke Philips Electronics N.V. Sensor for microscopy.
WO2012159205A1 (en) * 2011-05-25 2012-11-29 Huron Technologies International Inc. 3d pathology slide scanner

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5880844A (en) * 1997-04-09 1999-03-09 Hewlett-Packard Company Hybrid confocal microscopy
US7932020B2 (en) * 2003-07-10 2011-04-26 Takumi Technology Corporation Contact or proximity printing using a magnified mask image
JP5006062B2 (ja) 2007-02-05 2012-08-22 オリンパス株式会社 バーチャルスライド作成装置、バーチャルスライド作成方法およびバーチャルスライド作成プログラム
WO2013040686A1 (en) * 2011-09-21 2013-03-28 Huron Technologies International Inc. Slide scanner with a tilted image plane

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11211439A (ja) * 1998-01-22 1999-08-06 Takaoka Electric Mfg Co Ltd 表面形状計測装置
WO2006098443A1 (ja) * 2005-03-17 2006-09-21 Hamamatsu Photonics K.K. 顕微鏡画像撮像装置
WO2008137746A1 (en) * 2007-05-04 2008-11-13 Aperio Technologies, Inc. Rapid microscope scanner for volume image acquisition
WO2011080670A1 (en) * 2009-12-30 2011-07-07 Koninklijke Philips Electronics N.V. Sensor for microscopy.
WO2012159205A1 (en) * 2011-05-25 2012-11-29 Huron Technologies International Inc. 3d pathology slide scanner

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017037486A3 (en) * 2015-08-31 2017-09-14 3Dhistech Kft. Confocal slide-digitizing apparatus
US10649195B2 (en) 2015-08-31 2020-05-12 3Dhistech Kft. Confocal slide-digitizing apparatus

Also Published As

Publication number Publication date
JP2014115423A (ja) 2014-06-26
US20150264270A1 (en) 2015-09-17
JP6027875B2 (ja) 2016-11-16
US9906729B2 (en) 2018-02-27

Similar Documents

Publication Publication Date Title
US9906729B2 (en) Imaging apparatus and microscope system
JP4871264B2 (ja) 顕微鏡画像撮像装置
JP5497386B2 (ja) 画像取得装置
JP5589619B2 (ja) 情報処理装置、ステージうねり補正方法、プログラム
US11156823B2 (en) Digital microscope apparatus, method of searching for in-focus position thereof, and program
CN109417602B (zh) 图像处理方法、图像处理装置、摄像装置及摄像方法
JP3863993B2 (ja) 顕微鏡
JPWO2005114287A1 (ja) 顕微鏡装置
JP6147006B2 (ja) 撮像装置、顕微鏡システム及び撮像方法
JP5263886B2 (ja) トラッキング装置およびこのトラッキング装置を備えたトラッキング顕微鏡並びにトラッキング方法
JP6799924B2 (ja) 細胞観察装置および細胞観察方法
CN111788508B (zh) 数码显微镜和用于改变数码显微镜的放大率的方法
JP2014178357A (ja) デジタル顕微鏡装置、その撮像方法およびプログラム
JP2013142769A (ja) 顕微鏡システム、オートフォーカスプログラムおよびオートフォーカス方法
WO2018042786A1 (ja) 画像処理方法、画像処理装置、および撮像装置
JP6563486B2 (ja) 顕微鏡観察システム、顕微鏡観察方法、及び顕微鏡観察プログラム
JP4812325B2 (ja) 走査型共焦点顕微鏡および試料情報測定方法
US10429632B2 (en) Microscopy system, microscopy method, and computer-readable recording medium
US20180278826A1 (en) Microscopy system, microscopy method, and computer readable recording medium
JP6802636B2 (ja) 顕微鏡システムおよび標本観察方法
JP2015072303A (ja) 顕微鏡
JP2006153636A (ja) ３次元計測方法および３次元計測方法をコンピュータに実行させるプログラム
WO2024014079A1 (ja) 細胞観察装置および細胞観察装置で用いられる撮像方法
JP5281763B2 (ja) 制御装置、拡大観察システム、及び拡大観察装置の制御方法
JP5875834B2 (ja) バーチャルスライド作成装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13861139

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13861139

Country of ref document: EP

Kind code of ref document: A1