WO2022270015A1 - 生体標本観察装置及び生体標本観察システム - Google Patents

生体標本観察装置及び生体標本観察システム Download PDF

Info

Publication number
WO2022270015A1
WO2022270015A1 PCT/JP2022/009034 JP2022009034W WO2022270015A1 WO 2022270015 A1 WO2022270015 A1 WO 2022270015A1 JP 2022009034 W JP2022009034 W JP 2022009034W WO 2022270015 A1 WO2022270015 A1 WO 2022270015A1
Authority
WO
WIPO (PCT)
Prior art keywords
illumination
light
image
slide
dark field
Prior art date
Application number
PCT/JP2022/009034
Other languages
English (en)
French (fr)
Inventor
智之 大木
哲晃 岩根
元重 伊東
信裕 林
Original Assignee
ソニーグループ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーグループ株式会社 filed Critical ソニーグループ株式会社
Publication of WO2022270015A1 publication Critical patent/WO2022270015A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/27Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands using photo-electric detection ; circuits for computing concentration
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements

Definitions

  • the present disclosure relates to a biological specimen observation device and a biological specimen observation system.
  • a virtual slide obtained by digitizing an image of a biological specimen in the form of a slide glass can be used not only as information exchanged between pathologists but also as teaching materials.
  • the virtual slide can be automatically created by a virtual slide device (biological specimen observation device/biological specimen observation system), and work efficiency can be improved.
  • the virtual slide device illuminates, for example, the entire slide glass on which the biological specimen is placed, with a backlight installed on the opposite side of the imaging element. Then, the virtual slide device captures an image of the entire slide glass using an imaging device to generate a digital image (virtual slide).
  • the slide glass is provided with a label on which information such as the name of the biological specimen on the slide glass is written, a cover glass that covers the biological specimen, and the like.
  • the created digital image of the entire slide glass is stored in a hard disk drive or the like. A user can observe these accumulated images using a personal computer or the like.
  • the virtual slide device When creating a virtual slide, the virtual slide device first captures a thumbnail image (weakly magnified image) and determines an imaging area for acquiring a high-magnification image (highly magnified image). Then, the virtual slide device acquires a high-magnification image for the determined imaging region. In this way, if the imaging area can be determined appropriately, high-magnification images can be obtained only in the necessary area, so the time required to obtain high-magnification images can be shortened, and the work can be made more efficient. can do.
  • the present disclosure proposes a biological specimen observation device and a biological specimen observation system capable of appropriately determining an area for acquiring a high-magnification image from a thumbnail image.
  • a biological specimen observation device having a complementary color to the is provided.
  • a biological sample observation device is provided in which the light exit surface of the illumination has a black color.
  • a living specimen viewing system is provided that has a complementary color to the color of .
  • FIG. 2 is an explanatory diagram showing an example of a slide according to an embodiment of the present disclosure
  • FIG. 1 is an explanatory diagram showing a configuration example of a slide scanner according to an embodiment of the present disclosure
  • FIG. FIG. 2 is a cross-sectional view showing a configuration example of dark field illumination according to an embodiment of the present disclosure
  • FIG. 3 is a top view showing a configuration example of dark field illumination according to an embodiment of the present disclosure
  • 4 is a functional block diagram showing a configuration example of a control unit according to the embodiment of the present disclosure
  • FIG. 4 is a flowchart showing virtual slide creation processing by a slide scanner according to an embodiment of the present disclosure
  • FIG. 1 is an explanatory diagram showing a configuration example of a slide scanner according to an embodiment of the present disclosure
  • FIG. 3 is a top view showing a configuration example of dark field illumination according to an embodiment of the present disclosure
  • 4 is a functional block diagram showing a configuration example of a control unit according to the embodiment of the present disclosure
  • FIG. 4 is an explanatory diagram showing an example of an enlarged image by the slide scanner according to the embodiment of the present disclosure
  • 6 is a flowchart showing thumbnail image generation processing by the slide scanner according to the embodiment of the present disclosure
  • FIG. 4 is an explanatory diagram showing an overview of edge detection of a cover glass by a slide scanner according to an embodiment of the present disclosure
  • FIG. 2 is an explanatory diagram (part 1) showing an example of a thumbnail image obtained by a slide scanner according to an embodiment of the present disclosure
  • FIG. 2 is an explanatory diagram (part 2) showing an example of a thumbnail image obtained by a slide scanner according to an embodiment of the present disclosure
  • 1 is a cross-sectional view showing a configuration example of bright field illumination according to an embodiment of the present disclosure
  • FIG. 4 is a cross-sectional view showing an example of the size of bright field illumination according to an embodiment of the present disclosure
  • FIG. 5 is an explanatory diagram illustrating results of luminance distribution of bright-field illumination according to an embodiment of the present disclosure
  • FIG. 10 is a cross-sectional view showing a configuration example of bright field illumination according to a modified example of the embodiment of the present disclosure
  • It is a figure which shows roughly the whole structure of a microscope system.
  • a tissue section or cell that is part of a tissue obtained from a living body (eg, human body, plant, etc.) is referred to as a biological specimen.
  • the biological specimen described below may be subjected to various staining as necessary.
  • the biological specimen may not be dyed in various ways.
  • staining includes not only general staining represented by HE (hematoxylin-eosin) staining, Giemsa staining or Papanicolaou staining, but also periodic acid-Schiff (PAS) staining used when focusing on a specific tissue. and fluorescent staining such as FISH (Fluorescence In-Situ Hybridization) and enzyme antibody method.
  • FIG. 1 is an explanatory diagram showing an example of a slide 159 according to an embodiment of the present disclosure.
  • the slide 159 is a tissue section of connective tissue such as blood, epithelial tissue, or both of these tissues, or a biological specimen 900 consisting of smear cells or the like, which is slid by a predetermined fixing method. It is fixed on the glass 160 .
  • tissue sections or smeared cells may be subjected to various stainings, as described above.
  • This staining includes not only general staining represented by HE staining, Giemsa staining or Papanicolaou staining, but also fluorescent staining such as FISH and enzyme antibody method.
  • slide 159 includes slide glass 160 on which biological specimen 900 is placed, and cover glass 161 that covers biological specimen 900 .
  • slide glass 160 constituting the slide 159
  • additional information for example, the name of the person who collected the sample, the date and time of collection, the type of staining, etc.
  • a label 162 on which a one-dimensional code/two-dimensional code or the like corresponding to additional information is printed is attached.
  • the slide 159 is not limited to the form shown in FIG. not something.
  • FIG. 2 is an explanatory diagram showing a configuration example of the slide scanner 100 according to the embodiment of the present disclosure.
  • a slide scanner 100 according to the present embodiment is a scanner system for digitally photographing a slide 159 on which a biological sample (for example, cell tissue, etc.) 900 is mounted.
  • the slide scanner 100 captures a thumbnail image of an entire image of the slide 159 on which the biological specimen 900 is arranged (this image will also be referred to as a thumbnail image hereinafter). It has an imaging unit 110 . Further, the slide scanner 100 can capture an image of the biological specimen 900 magnified at a predetermined magnification (hereinafter, this image is also referred to as an enlarged image) or an enlarged part image obtained by enlarging a part of the biological specimen 900. It has an imaging unit 120 . Details of the thumbnail image capturing unit 110 and the enlarged image capturing unit 120 will be described later.
  • the slide scanner 100 is provided with a stage 130 on which the slide 159 as described above is placed.
  • the stage 130 can be freely moved in a direction parallel to the stage surface on which the preparation 159 is placed (X-axis-Y-axis direction) and in a direction perpendicular to it (Z-axis direction) by a stage drive mechanism (not shown). can move. Therefore, by moving the stage 130 , the slide 159 placed on the stage 130 can move between the thumbnail image capturing section 110 and the enlarged image capturing section 120 .
  • the slide scanner 100 is provided with a control section 150 for controlling various parts of the slide scanner 100, as shown in FIG.
  • the control unit 150 controls the lighting 111 and 112 of the thumbnail image capturing unit 110, the lighting 121 of the enlarged image capturing unit 120, the imager 114 of the thumbnail image capturing unit, and the enlarged image capturing unit 120. It is connected to the imager 124 and the stage driving mechanism (not shown) described above via various data communication paths, and can be controlled and data can be obtained therefrom.
  • control unit 150 is implemented by a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), a storage device, a communication device, an arithmetic circuit, and the like. A detailed configuration of the control unit 150 will be described later.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the slide scanner 100 is not limited to the form shown in FIG. 2, and may have other functional units (for example, a display, etc.).
  • the thumbnail image capturing unit 110 mainly includes lighting 111 , lighting 112 , and an imager (image capturing unit) 114 .
  • Each functional unit of the thumbnail image capturing unit 110 will be sequentially described below.
  • the illumination 111 (hereinafter also referred to as bright-field illumination) is provided on the side of the stage 130 opposite to the side of the slide on which the imager 114 is arranged.
  • the illumination 111 is backlight type illumination that illuminates the preparation 159 on which the biological specimen 900 is mounted with light (hereinafter also referred to as bright field illumination light) from below.
  • Transmitted light emitted from the illumination 111 and transmitted through the preparation 159 arranged on the stage 130 forms an image on the imager 114 directly or via an objective lens (not shown). A detailed configuration of the lighting 111 will be described later.
  • Illumination 112 (hereinafter also referred to as dark-field illumination) is provided on the side of stage 130 where the preparation is arranged, which is the imager 114 side, and is provided between stage 130 and imager 114 .
  • the illumination 112 is epi-illumination that illuminates the slide 159 from above.
  • the imager 114 which will be described later, acquires the light illuminated by the illumination 112 and scattered by the slide 159, and forms an image. Specifically, light scattering occurs at the edge of the cover glass 161, for example. 161 edges appear white. Also, when the mounting medium protrudes from the cover glass 161, the protruding region appears white in the above image.
  • the illumination 112 illuminates the slide 159 from above, when illuminated by the illumination 112, the imager 114 can detect the image of the label 162 of the slide 159 (characters, symbols, numbers, codes, etc. written on the label 162). ) can also be obtained. A detailed configuration of the illumination 112 will be described later.
  • the imager 114 is provided on the side of the illumination 112 with respect to the stage 130 , captures the entire preparation 159 illuminated by the illumination 112 to obtain a dark field image, and captures the entire preparation 159 illuminated by the illumination 111 .
  • Brightfield images can be acquired.
  • thumbnail images can be generated based on the dark field image and the bright field image.
  • the imager 114 is composed of a plurality of imaging elements that detect red (R), green (G), and blue (B) light, and the imaging elements are CCD (Charge Coupled Device) or CMOS, for example. (Complementary Metal Oxide Semiconductor) or the like.
  • thumbnail image capturing unit 110 is not limited to the form shown in FIG. ) may be provided.
  • the magnified image capturing section 120 mainly includes an illumination 121 , a transmission illumination lens 122 , an objective/imaging lens 123 and an imager 124 .
  • Each functional unit of the magnified image capturing unit 120 will be sequentially described below.
  • the illumination 121 is provided on the side of the stage 130 opposite to the side of the slide on which the imager 124 is arranged.
  • the illumination 211 is a backlight type illumination that illuminates the slide 159 on which the biological specimen 900 is mounted with light from below. Transmitted light emitted from the illumination 121 and passed through the slide 159 arranged on the stage 130 via the transmitted illumination lens 122 forms an image on the imager 124 via the objective/imaging lens 123 .
  • the transmission illumination lens 122 is a lens that collects the light emitted from the illumination 121 and guides it to the preparation 159 on the stage 130 .
  • the transmitted illumination lens 122 is arranged between the illumination 121 and the stage 130 .
  • the objective/imaging lens 123 is arranged on the side of the stage 130 on which the preparation is arranged.
  • the biological specimen 900 can be magnified to various magnifications and captured by appropriately exchanging the objective lens.
  • the transmitted light transmitted through the slide 159 arranged on the stage 130 is condensed by the imaging lens and forms an image on the imager 124 provided behind the objective/imaging lens 123 .
  • the imager 124 is provided on the side opposite to the illumination 121 with respect to the stage 130, and according to the pixel size of the imaging element of the imager 124 and the magnification of the objective lens, a predetermined An image of an imaging range having a horizontal width and a vertical width of is formed. Since a part of the biological sample 900 is magnified by the objective lens, the imaging range described above is sufficiently narrower than the imaging range of the imager 114 of the thumbnail image imaging section 110 . Further, the imager 124 is composed of a plurality of imaging elements that detect red (R), green (G), and blue (B) light, and the imaging elements are realized by imaging elements such as CCD or CMOS, for example. be able to.
  • the magnified image capturing section 120 is not limited to the form shown in FIG. 2, and may have other functional sections.
  • FIGS. 3A and 3B are cross-sectional views showing a configuration example of dark field illumination according to an embodiment of the present disclosure
  • FIG. 3B is a top view showing a configuration example of dark field illumination according to an embodiment of the present disclosure.
  • the illumination 112 includes a plurality of light emitting elements 142 mounted on a substrate 140 and a plurality of light guide tubes 144 that guide the light from the plurality of light emitting elements 142 to a slide glass 160 (preparation 159).
  • the light emitted from the light emitting element 142 directly downward is bent by the reflecting surface of the light guide tube 144 and guided to the edge of the cover glass 161 on the slide glass 160 and the label 162 .
  • the imager 114 can capture the edge of the cover glass 161 and the image of the label 162 (characters, symbols, numbers, codes, etc. written on the label 162).
  • the plurality of light emitting elements 142 are mounted on the substrate 140 having a shape surrounding the slide glass 160 (the slide 159) in plan view from the imager 114 side. Since the substrate 140 has such a shape as to surround the slide glass 160 (the slide 159) in this way, it is possible to irradiate light onto a necessary portion on the slide 159 without interfering with the imaging of the slide 159 by the imager 114. can be done.
  • light has the characteristic that light with short wavelengths is easily scattered (that is, the scattering rate is high) and light with long wavelengths is difficult to scatter (that is, the scattering rate is low).
  • Scattering with different scattering rates depending on the wavelength is called Rayleigh scattering.
  • the scattering rate due to Rayleigh scattering is inversely proportional to the fourth power of the wavelength.
  • FIG. 3A when the light from the illumination 112 is incident on the edge of the cover glass 161, the incident light is scattered at the edge. As the light scatters more, the difference in the change in the scattering rate can be imaged as the light and shade difference, so the edge can be clearly detected.
  • short-wavelength light for example, blue, purple thread, white, etc.
  • LED Light Emitting Diode
  • laser or the like
  • the illumination 112 is not limited to the form of the substrate 140 having a rectangular perimeter as shown in FIGS. may be in the form
  • FIG. 4 is a functional block diagram showing a configuration example of the control unit 150 according to the embodiment of the present disclosure.
  • the control unit 150 includes a stage drive control unit 151, a thumbnail image imaging control unit 152, an enlarged image imaging control unit 153, a position control unit 154, and an image processing unit (enlarged region image acquisition area). 155 , a thumbnail image acquisition unit 156 , an enlarged image acquisition unit 157 , and an illumination control unit 158 .
  • each functional unit of the control unit 150 will be described in order.
  • the stage drive control section 151 can control a stage drive mechanism (not shown) that drives the stage 130 .
  • a stage drive mechanism (not shown) that drives the stage 130 .
  • the stage drive control unit 151 moves the stage 130 in the direction of the stage mounting surface (XY axis direction) so that the entire preparation 159 is within the imaging range of the imager 114.
  • the stage drive control unit 151 moves the stage 130 in a direction (Z-axis direction) orthogonal to the stage mounting surface so that the imager 114 is focused on the entire slide 159 .
  • the stage drive control unit 151 drives and controls a stage drive mechanism (not shown) so that the biological specimen is placed between the transmission illumination lens 122 and the objective/imaging lens 123 .
  • the stage 130 is moved in the direction of the stage mounting surface so that the 900 is positioned.
  • the stage drive control unit 151 moves the stage 130 in the stage surface direction (XY axis direction) so that a predetermined portion of the biological specimen 900 is positioned within the imaging range imaged by the imager 124 .
  • the stage drive control unit 151 drives and controls the stage drive mechanism so that the part of the biological specimen 900 located within a predetermined imaging range is orthogonal to the stage surface so that the objective/imaging lens 123 is focused.
  • the stage 130 is moved in the direction (Z-axis direction).
  • the thumbnail image capturing control section 152 can control the imager 114 provided in the thumbnail image capturing section 110 . Specifically, the thumbnail image capturing control unit 152 operates in a bright field mode (a mode for acquiring a bright field image using the illumination 111) or a dark field mode (a mode for acquiring a dark field image using the illumination 112). mode) are set in the imager 114 . Note that the parameters set by the thumbnail image capturing control unit 152 include, for example, the start timing and end timing of exposure.
  • the thumbnail image capturing control unit 152 when acquiring an output signal corresponding to the image output from the imager 114, the thumbnail image capturing control unit 152 outputs the acquired output signal as an output signal corresponding to the thumbnail image to the enlarged image acquiring unit 157, which will be described later. .
  • the enlarged image capturing control section 153 can control the imager 124 provided in the enlarged image capturing section 120 . Specifically, the enlarged image capturing control unit 153 sets parameters in the imager 124 . Note that the parameters set by the enlarged image capturing control unit 153 include, for example, the start timing and end timing of exposure. Further, when acquiring an output signal corresponding to an image output from the imager 124, the enlarged image capturing control unit 153 outputs the acquired output signal as an output signal corresponding to the enlarged image to the enlarged image acquiring unit 157 described later. .
  • the position control unit 154 executes position control processing and can determine a target position of the stage 130 (hereinafter also referred to as a “target position”). Based on the position, stage 130 is moved.
  • the image processing unit 155 determines an enlarged region image acquisition region for acquiring an enlarged image from the image captured by the imager 114 and input from the thumbnail image capturing control unit 152, and generates a thumbnail image. Specifically, the edge of the cover glass 161 that covers the biological specimen 900 is also captured in the dark field image captured by the imager 114 . Therefore, in this embodiment, the image processing unit 155 detects the edge of the cover glass 161 from the dark field image captured by the imager 114, and based on the position of the detected edge, the image captured by the imager 114 is detected. A region in which the biological specimen 900 is captured in the bright-field image can be determined as an enlarged region image acquisition region.
  • the image processing unit 155 can detect the label 162 included in the dark field image captured by the imager 114 . Furthermore, the image processing unit 155 generates a thumbnail image including images of the biological specimen 900 and the label 162 (characters, symbols, numbers, codes, etc. written on the label 162) based on the dark field image and the bright field image. , can be output to a thumbnail image acquisition unit 156, which will be described later.
  • thumbnail image acquisition unit 156 For example, when a predetermined user operation is performed, or when a slide 159 is placed on the stage 130, the thumbnail image acquisition unit 156 sends the thumbnail image along with various setting conditions to the thumbnail image capturing control unit 152. Request to be photographed. Further, the thumbnail image acquisition unit 156 outputs data corresponding to the thumbnail image (hereinafter also referred to as thumbnail image data), which is output from the thumbnail image capturing control unit 152 to the image processing unit 155 and processed, to the image processing unit 155 . Get from The thumbnail image acquisition unit 156 may store the acquired thumbnail image data in a storage unit (not shown). Further, the thumbnail image acquisition unit 156 may output the acquired thumbnail image data to an externally provided image data storage server or the like via a communication unit (not shown). That is, the thumbnail image acquisition unit 156 can also function as a thumbnail image output unit.
  • Endlarged image acquisition unit 157 For example, when a predetermined user operation is performed, or when a thumbnail image of a slide 159 has been captured, the enlarged image acquisition unit 157 provides the enlarged image capturing control unit 153 with various setting conditions and an enlarged image. to be photographed.
  • the magnified image acquisition unit 157 also acquires data corresponding to the magnified image (hereinafter also referred to as magnified image data) output from the magnified image capturing control unit 153 .
  • the enlarged image acquisition unit 157 may store the acquired enlarged image data in a storage unit (not shown). Further, the magnified image acquisition unit 157 may output the acquired magnified image data to an external image data storage server or the like via a communication unit (omitted). It can also function as an enlarged image output unit.
  • the illumination control unit 158 can control various illuminations 111, 112, and 121 of the slide scanner 100 according to this embodiment. First, for example, a case where the illumination control unit 158 controls the illumination 111 provided in the thumbnail image capturing unit 110 will be described.
  • the illumination control unit 158 refers to the information indicating the illumination method, sets parameters corresponding to the bright field mode for the illumination 111, and causes the illumination 111 to illuminate. As a result, the bright-field illumination light emitted from the illumination 111 illuminates the entire biological specimen 900 .
  • the parameters set by the illumination control unit 158 include, for example, the intensity of illumination light and the selection of the type of light source.
  • the illumination control unit 158 controls the illumination 112 provided in the thumbnail image capturing unit 110 .
  • the illumination control unit 158 refers to the information indicating the illumination method, sets parameters corresponding to the dark field mode for the illumination 112, and causes the illumination 112 to illuminate. As a result, the edge of the cover glass 161 or the like is irradiated with the dark field illumination light emitted from the illumination 112 .
  • the lighting control unit 158 refers to the information indicating the lighting method, sets parameters for the lighting 121, and causes the lighting 121 to emit illumination light. As a result, the illumination light emitted from the illumination 121 illuminates at least part of the biological specimen 900 .
  • control unit 150 is not limited to having a functional unit as shown in FIG. 4, and may further have a storage unit and a communication unit, for example. .
  • the image processing unit 155 determines an enlarged region image acquisition area for acquiring an enlarged image of the biological specimen 900 based on the thumbnail image. As a result, it is possible to acquire an enlarged image only for the necessary area where the biological specimen 900 is displayed, and it is possible to reduce the time required to acquire the enlarged image and the capacity of the storage unit for storing the virtual slides. .
  • Virtual slide creation processing by the slide scanner 100 according to the embodiment of the present disclosure will be described in detail below.
  • FIG. 5 is a flowchart showing virtual slide creation processing by the slide scanner 100 according to the embodiment of the present disclosure
  • FIG. 6 is an explanation showing an example of an enlarged image V200 by the slide scanner 100 according to the embodiment of the present disclosure. It is a diagram. Specifically, as shown in FIG. 5, the virtual slide creation process by the slide scanner 100 according to the embodiment of the present disclosure includes multiple steps from step S100 to step S160. Details of each of these steps are described below.
  • control unit 150 performs position control processing to move the slide 159 to the thumbnail image capturing unit 110 in order to acquire the thumbnail image V130 (step S100).
  • the thumbnail image is acquired by the thumbnail image capturing unit 110 (step S110).
  • the image processing unit 155 detects the edge of the cover glass 161 from the dark field image captured by the imager 114, and based on the detection result, the enlarged region image acquisition region to decide.
  • the thumbnail image acquisition unit 156 generates an image generated from the bright-field image enlarged region image acquisition region and the image of the label 162 of the dark-field image (characters, symbols, numbers, codes, etc. written on the label 162) as a thumbnail. be an image. The details of the thumbnail image acquisition process will be described later.
  • control unit 150 After acquiring the thumbnail image in step S110, the control unit 150 allocates divided regions to the biological specimen 900 based on the thumbnail image (step S120). Specifically, control unit 150 detects the position of biological specimen 900 on stage 130 based on the thumbnail image, and allocates biological specimen 900 to each of the plurality of divided regions.
  • the divided area means an imaging unit area in which the imager 124 acquires an enlarged region image, which is a portion of the biological specimen 900 .
  • control unit 150 performs position control processing to move the slide 159 to the enlarged image capturing unit 120 (step S130). Then, an enlarged region image of each divided region imaged by the imager 124 via the enlarged image imaging control unit 153 is obtained at predetermined timing intervals (step S140).
  • control unit 150 determines whether enlarged partial images of all divided regions within the enlarged partial image acquisition region have been acquired (step S150). Then, if all the enlarged region images have not been acquired yet (step S150: No), the control unit 150 repeats the processing from step S130 to step S150. On the other hand, if it is determined in step S150 that the magnified region images for all the divided regions have been acquired (step S150: Yes), control unit 150 forms these magnified region images to form magnified image V200. is generated (step S160), and the process ends.
  • control unit 150 generates an enlarged image V200 of the biological specimen 900 as shown in FIG.
  • the enlarged image V200 is an image obtained by forming a plurality of enlarged region images V202.
  • FIG. 7 is a flowchart showing processing for generating a thumbnail image V130 by the slide scanner 100 according to the embodiment of the present disclosure.
  • FIG. 8 is an explanatory diagram showing an overview of edge detection of the cover glass 161 by the slide scanner 100 according to the embodiment of the present disclosure
  • FIG. 9 is a thumbnail image by the slide scanner 100 according to the embodiment of the present disclosure.
  • FIG. 4 is an explanatory diagram showing an example of V130;
  • the image processing unit 155 of the present embodiment uses the bright field image V100 and the dark field image V110 acquired by the thumbnail image capturing unit 110 shown in FIG. 8 to generate the thumbnail image V130 shown in FIG. Specifically, as shown in FIG. 7, the process of acquiring the thumbnail image V130 by the slide scanner 100 according to the embodiment of the present disclosure includes multiple steps from sub-step S111 to sub-step S116. Details of each of these steps are described below.
  • a dark field image V110 (see lower left in FIG. 8) is acquired using dark field illumination (illumination 112) (substep S111). Specifically, when the slide 159 placed on the stage 130 is moved to the imaging position of the thumbnail image imaging unit 110 by the stage drive control unit 151, the illumination control unit 158 instructs to turn on the illumination 112. . When illumination 112 is turned on, imager 114 acquires dark field image V110. After that, the illumination control unit 141 turns off the illumination 112 . The thumbnail image capturing control section 143 outputs the dark field image V110 output from the imager 114 to the image processing section 155 of the control section 150 .
  • the image processing unit 155 detects the edge of the cover glass 161 from the dark field image V110 input from the thumbnail image capturing control unit 152 (substep S112). Specifically, when the preparation 159 is illuminated by the illumination 112 in sub-step S111, the light is scattered by the edge of the cover glass 161. FIG. Therefore, as shown in the lower left part of FIG. 8, the edge of the cover glass 161 appears shiny in the dark field image V110. Therefore, the image processing unit 155 detects the portion that appears shining in the dark field image V ⁇ b>110 as the edge of the cover glass 161 .
  • the image processing unit 155 can also acquire an image of the label 162 attached to the preparation 159 (characters, symbols, numbers, codes, etc. written on the label 162) from the dark field image V110 (substep S113). ).
  • the image processing unit 155 acquires the image of the label 162 from the dark field image V110 shown in the lower left part of FIG.
  • the controller 150 instructs the lighting controller 158 to turn on the lighting 111 .
  • the imager 114 acquires a bright field image V100.
  • the illumination control unit 158 turns off the illumination 111 .
  • the thumbnail image capturing control section 152 outputs the bright field image V100 output from the imager 114 to the image processing section 155 of the control section 150 .
  • an object on the slide glass 160 such as the biological specimen 900
  • the image processing unit 155 uses the bright-field image V100 and the dark-field image V110 to perform processing for determining an enlarged region image acquisition region for acquiring an enlarged image (substep S115).
  • the image processing unit 155 calculates the cover in the bright-field image V100 as shown in the calculation result V120 on the right side of FIG. The position of the edge of the glass 161 is calculated. Then, the image processing unit 155 performs area determination on the internal area of the edge of the cover glass 161 in the bright-field image V100, and determines it as an enlarged region image acquisition area. If the region determination does not work well or if it is desired to image the entire inside of the cover glass 161, the entire internal region of the edge of the cover glass 161 in the bright-field image V100 may be determined as the enlarged region image acquisition region.
  • the image processing unit 155 After that, the image processing unit 155 generates a thumbnail image V130 (see FIG. 9) (substep S116). Specifically, the image processing unit 155 extracts an image (that is, an image including the biological specimen 900) within the enlarged region image acquisition region in the bright-field image V100 and an image of the label 162 of the dark-field image V110 (label 162 is written on the label 162).
  • the thumbnail image V130 is generated based on the characters, symbols, numerals, codes, etc.).
  • the generated thumbnail image V130 may be stored in a storage unit (not shown). In this way, in step S110 shown in FIG. 5, the control unit 150 obtains the thumbnail image V130 via the thumbnail image capturing control unit 152 and the imager 114 while the stage 130 is moved to the target position. , the process proceeds to the next step S120 (see FIG. 5).
  • the thumbnail image capturing unit 110 has illuminations 111 and 112 as bright field illumination and dark field illumination, as described above.
  • the information obtained from the bright-field image V100 and the dark-field image V110 photographed using each illumination has differences as shown on the left side of FIG.
  • the slide 159 is irradiated with light from below the slide 159 (the side opposite to the imager 114 with respect to the slide 159). Therefore, it is possible to obtain an image of an object (for example, the biological specimen 900 or the like) on the slide 159, which is a portion through which light is transmitted.
  • the portion that does not transmit light for example, the label 162 appears black, the image of the label 162 (characters, symbols, numbers, codes, etc. written on the label 162) cannot be obtained.
  • the preparation 159 is illuminated from above.
  • the dark field image V110 captured by the imager 114 it is possible to obtain information on the portion of the slide 159 where the light is scattered. Scattering of light occurs, for example, at the edge of the cover glass 161. Therefore, in the dark-field image V110, for example, as shown in the lower left part of FIG. The edge of the cover glass 161 appears white.
  • the illumination 112 illuminates the slide 159 from above, an image of the label 162 (characters, symbols, numbers, codes, etc. written on the label 162) can also be obtained.
  • the image processing unit 155 uses the bright-field image V100 and the dark-field image V110 to generate a thumbnail image V130 (see FIG. 9) from which noise such as the edge of the cover glass 161 is removed. Obtainable. Therefore, according to the slide scanner 100 according to the present embodiment, it is possible to obtain the thumbnail image V130 of the biological specimen 900 that has been cleared of noise and has become clear.
  • FIG. 10 is an explanatory diagram showing an example of a thumbnail image V130 obtained by a microscope according to the embodiment of the present disclosure.
  • the thumbnail image capturing unit 110 of the slide scanner 100 includes the illumination 111, which is backlight illumination as bright field illumination, and the dark field illumination.
  • Illumination 112 of epi-illumination is provided as an illumination.
  • the slide scanner 100 detects the edge of the cover glass 161 on the slide glass 160 when acquiring the thumbnail image V130.
  • the edge reflects light appropriately. Therefore, in order to do so, the illumination 112 of epi-illumination as dark field illumination is provided so as to be as close to the slide 159 as possible.
  • the epi-illumination illumination 112 is brought closer to the preparation 159, the light-emitting element 142 of the epi-illumination illumination 112 is detected by the panel (diffusion plate) on the upper surface of the backlight illumination 111 located directly below the preparation 159. light is strongly reflected. Therefore, as shown in FIG. 10, a thumbnail image V130 in which the light emitting point V131 of the light emitting element 142 is reflected is obtained. In such a case, there is a high probability that the edge of the cover glass 161 cannot be detected accurately, or that the enlarged region image acquisition region for acquiring the enlarged image of the biological specimen 900 cannot be accurately determined. It will happen.
  • the upper panel In general backlight type lighting, the upper panel (diffusion plate) is often white in order to ensure a predetermined light transmittance, and further has red, blue, or green color. Sometimes.
  • the panel with backlight illumination serves as the background of the slide 159, so the contrast between the background and the edge of the cover glass 161 depends on the color of the panel. ratio may fall. As the contrast ratio drops, the edge detection accuracy of the cover glass 161 deteriorates.
  • the present inventor focused on the color relationship between the panel (diffusion plate) of the illumination 111 of the backlight type illumination and the illumination light of the illumination 112 of the epi-illumination type. That is, the edge of the cover glass 161 can be detected with high accuracy, and the magnified region image acquisition region (region for acquiring the high-magnification image) for acquiring the magnified image of the biological specimen 900 can be improved.
  • the magnified region image acquisition region region for acquiring the high-magnification image
  • FIG. 11 is a cross-sectional view showing a configuration example of the bright field illumination 111 according to the embodiment of the present disclosure
  • FIG. 12 is an explanatory diagram for explaining a chromaticity diagram 400.
  • FIG. 13 is a cross-sectional view showing an example of the size of the bright field illumination 111 according to the embodiment of the present disclosure
  • FIG. 14 is a result of the brightness distribution of the bright field illumination 111 according to the embodiment of the present disclosure. It is an explanatory view explaining.
  • the illumination (bright field illumination) 111 is a direct type backlight, and has a housing 200 and a plurality of light emitting elements 242 mounted on a substrate 202 corresponding to the bottom surface of the housing 200. Furthermore, the lighting 111 is provided above the plurality of light emitting elements 242, and emits the light from each light emitting element 242 to the outside of the housing 200.
  • a diffusion plate (light diffusion plate) 250 that serves as a light emission surface of the lighting 111.
  • a reflective film (light reflecting material) 260 that covers at least part of the inside of the side surface of the housing 200 .
  • the light-emitting element 242 is a light-emitting diode or laser diode that emits light when a voltage is applied. By mounting the plurality of light emitting elements 242 in an array on the substrate 202, the in-plane luminance distribution on the light exit surface (diffusion plate surface) of the illumination (bright field illumination) 111 can be made uniform.
  • the light emitting element 242 may be a lamp light source (halogen lamp or xenon lamp).
  • the diffusion plate 250 is, for example, an acrylic light transmission panel capable of diffusing the light emitted from the light emitting elements 242 while transmitting the light, and serves as a light exit surface of the illumination 111 .
  • a diffusion plate 250 By using such a diffusion plate 250, the in-plane luminance distribution on the light exit surface of the illumination 111 can be made uniform.
  • a light blocking plate that blocks light in a predetermined wavelength band or a neutral density filter that reduces the amount of transmitted light may be used as the diffusion plate 250.
  • the color of the diffuser plate 250 (that is, the color of the light exit surface) is set to a color that is complementary to the color of the dark field illumination light from the illumination (dark field illumination) 112 .
  • the light emitting point V131 of the light emitting element 142 can be prevented from being reflected in the thumbnail image V130 because the two lights produce an achromatic color (white).
  • the color of the diffuser plate 250 is a color that is complementary to the color of the dark field illumination light of the illumination (dark field illumination) 112 as described above.
  • the color of the diffuser plate 250, on the chromaticity diagram 400 is The color is not limited to the color at the coordinates of the geometrically point-symmetrical position, and each of the x and y coordinates is about ⁇ 10% with respect to the coordinates of the geometrically point-symmetrical position. Any color included in the range with coordinates within.
  • the dark field illumination light of the illumination (dark field illumination) 112 is white light
  • the color of the diffusion plate 250 (light exit surface) is black
  • the color of the diffusion plate 250 is set to a color that is complementary to the color of the dark field illumination light of the illumination (dark field illumination) 112, so that the thumbnail image V130 emits light. It is possible to prevent the light emitting point V131 of the element 142 from being reflected. Furthermore, in this embodiment, the color of the dark field illumination light of the illumination (dark field illumination) 112 that illuminates the edge of the cover glass 161 and the color of the diffusion plate 250 of the illumination (bright field illumination) 111 that serves as the background of the preparation 159 are complementary colors, the contrast ratio is improved. As a result, according to the present embodiment, it is possible to accurately detect all edges of the cover glass 161 and accurately determine an enlarged region image acquisition region for acquiring an enlarged image of the biological specimen 900 .
  • the reflective film 260 is a reflective material capable of reflecting light from the light emitting element 242 .
  • the reflective film 260 may be a reflective coat or an optical mirror.
  • the size of the diffusion plate 250 surface (light emission surface) of the illumination (bright field illumination) 111 is set so that the entire surface of the background of the preparation 159 is the diffusion plate 250 surface. It preferably has an area defined by the angle of view of the major 114 . That is, in the present embodiment, the surface of the diffusion plate 250 (light exit surface) preferably has an area equal to or wider than the angle of view of the imager 114 . By doing so, the contrast ratio between the entire image of the slide 159 (more specifically, the biological specimen 900 and the edge of the cover glass 161) and the background can be made appropriate. As a result, it is possible to accurately detect all edges of the cover glass 161 and to accurately determine an enlarged region image acquisition region for acquiring an enlarged image of the biological specimen 900 .
  • the length W is preferably determined so as to have the relationship of Equation (1) below.
  • the entire surface of the background of the slide 159 can be the diffusion plate 250 surface.
  • the form of the lighting 111 shown in FIGS. 11 and 13 is an example, and is not limited to the forms shown in these figures.
  • the illumination 111 in the illumination 111 according to the present embodiment, the light from each light emitting element 242 is reflected several times by the reflective film 260 inside the housing 200, diffused by the diffusion plate 250, and emitted to the outside of the housing 200. be. Therefore, in the present embodiment, as shown on the left side of FIG. 14, the in-plane luminance distribution on the light exit surface (diffusion plate 250 surface) of the illumination 111 is made uniform.
  • the illumination according to the prior art shown on the right side of FIG. 14 does not include an element for more uniformity, so that the in-plane luminance distribution on the light exit surface of the illumination is uniformized particularly in the vicinity of the outer periphery. not
  • the color of the diffusion plate 250 is set to a color that is complementary to the color of the dark field illumination light of the illumination (dark field illumination) 112, so that the thumbnail image V130 It is possible to prevent the light emitting point V131 of the light emitting element 142 from being reflected. Furthermore, in this embodiment, the color of the dark field illumination light of the illumination (dark field illumination) 112 that illuminates the edge of the cover glass 161 and the color of the diffusion plate 250 of the illumination (bright field illumination) 111 that serves as the background of the preparation 159 are complementary colors, the contrast ratio is improved. As a result, according to the present embodiment, it is possible to accurately detect all edges of the cover glass 161 and accurately determine an enlarged region image acquisition region for acquiring an enlarged image of the biological specimen 900 .
  • FIG. 15 is a cross-sectional view showing a configuration example of a bright field illumination 111a according to a modified example of the embodiment of the present disclosure.
  • illumination (bright-field illumination) 111a is an edge-type backlight that includes a housing 200 and a light-emitting element 242 mounted on a substrate 202 on the side of the housing 200. , and a light guide plate 270 which is provided inside the housing 200 and guides the light from the light emitting element 242 provided at the end of the illumination 111 a to the inside of the housing 200 . Furthermore, the illumination 111a includes a diffusion plate (light diffusion plate) 250 which is provided above the light guide plate 270 and serves as a light emission surface of the illumination 111a, and a reflective film ( light reflector) 260. Each element constituting the illumination 111a will be sequentially described below, but the description of the parts common to the already described embodiment will be omitted.
  • Light emitting element 242 Also in this modified example, a light emitting diode, a laser diode, or a lamp light source (halogen lamp or xenon lamp) can be used as the light emitting element 242 . However, in this modification, one or a plurality of light emitting elements 242 are provided on one or more side surfaces of housing 200 instead of on the bottom surface of housing 200 . In this modified example, unlike the direct backlight according to the present embodiment, the number of light emitting elements 242 can be reduced, so an increase in power consumption by the illumination 111a can be suppressed.
  • the diffuser plate 250 is a light emitting surface of the illumination 111a. Also in this modified example, the diffuser plate 250 is a light transmission panel, which is a light shielding plate that shields light in a predetermined wavelength band, or a light shielding plate that reduces the amount of transmitted light. A reducing neutral density filter can be used. Furthermore, also in this modified example, the color of the diffusion plate 250 (that is, the color of the light exit surface) is set to a color that is complementary to the color of the dark field illumination light from the illumination (dark field illumination) 112 .
  • the reflective film 260 is a reflective material that can reflect the light from the light emitting element 242 and the light from the light guide plate 270 . Also in this modification, the reflective film 260 may be a reflective coat or an optical mirror.
  • the light guide plate 270 is provided inside the housing 200 and can guide the light from the light emitting element 242 provided at the end of the illumination 111 a into the housing 200 . Specifically, the light guide plate 270 repeats reflection of light from the light emitting elements 242 on its top surface, side surfaces, and bottom surface, and can guide the light to the entire light guide plate 270 . Some of the light is emitted to the outside of the light guide plate 270 without being reflected by its top, side, or bottom surface. 250 to be emitted to the outside of the housing 200 .
  • the size of the diffusion plate 250 surface (light emission surface) of the illumination (bright field illumination) 111a is set so that the entire surface of the background of the preparation 159 is the diffusion plate 250 surface. It preferably has an area defined by the angle of view of the major 114 .
  • the form of the illumination 111a shown in FIG. 15 is just an example, and is not limited to the form shown in FIG.
  • the thumbnail image V130 is illuminated by the light emitting element 142. It is possible to prevent the point V131 from being reflected. Furthermore, in this modification, the color of the dark field illumination light of the illumination (dark field illumination) 112 that illuminates the edge of the cover glass 161 and the color of the diffusion plate 250 of the illumination (bright field illumination) 111 that serves as the background of the preparation 159 are complementary colors, the contrast ratio is improved. As a result, according to this modified example, it is possible to accurately detect all edges of the cover glass 161 and to accurately determine an enlarged region image acquisition region for acquiring an enlarged image of the biological specimen 900 .
  • the thumbnail image It is possible to prevent the light emitting point V131 of the light emitting element 142 from being reflected in V130. Furthermore, in this embodiment, the color of the dark field illumination light of the illumination (dark field illumination) 112 that illuminates the edge of the cover glass 161 and the color of the diffusion plate 250 of the illumination (bright field illumination) 111 that serves as the background of the preparation 159 are complementary colors, the contrast ratio is improved. As a result, according to the present embodiment, it is possible to accurately detect all edges of the cover glass 161 and accurately determine an enlarged region image acquisition region for acquiring an enlarged image of the biological specimen 900 .
  • the illumination 111 according to the present embodiment is not limited to being applied to the slide scanner 100 as described above. It may be used as an illumination device for an optical microscope (not shown). For example, such an optical microscope has a good contrast ratio between the object to be observed and the background. industrial microscopes).
  • the observation target is not limited to the biological specimen 900.
  • the above-described embodiments of the present disclosure are not limited to application to medical or research applications, and industrial microscopes and the like that require high-precision analysis using images. may be used, and is not particularly limited.
  • FIG. 16 shows a configuration example of the microscope system (biological specimen observation system).
  • a microscope system 5000 shown in FIG. 16 includes a microscope device 5100 , a control section 5110 and an information processing section 5120 .
  • a microscope device 5100 includes a light irradiation section 5101 , an optical section 5102 , and a signal acquisition section 5103 .
  • the microscope device 5100 may further include a sample placement section 5104 on which the biological sample S is placed.
  • the configuration of the microscope apparatus is not limited to that shown in FIG. 16.
  • the light irradiation unit 5101 may exist outside the microscope apparatus 5100.
  • the unit 5101 may be used as the unit 5101 .
  • the light irradiation section 5101 may be arranged such that the sample mounting section 5104 is sandwiched between the light irradiation section 5101 and the optical section 5102, and may be arranged on the side where the optical section 5102 exists, for example.
  • the microscope apparatus 5100 may be configured to be able to perform one or more of bright field observation, phase contrast observation, differential interference contrast observation, polarization observation, fluorescence observation, and dark field observation.
  • the microscope system 5000 may be configured as a so-called WSI (Whole Slide Imaging) system or a digital pathology imaging system, and can be used for pathological diagnosis.
  • Microscope system 5000 may also be configured as a fluorescence imaging system, in particular a multiplex fluorescence imaging system.
  • the microscope system 5000 may be used to perform intraoperative pathological diagnosis or remote pathological diagnosis.
  • the microscope device 5100 acquires data of the biological sample S obtained from the subject of the surgery, and transfers the data to the information processing unit 5120. can send.
  • the microscope device 5100 can transmit the acquired data of the biological sample S to the information processing unit 5120 located in a place (another room, building, or the like) away from the microscope device 5100 .
  • the information processing section 5120 receives and outputs the data.
  • a user of the information processing unit 5120 can make a pathological diagnosis based on the output data.
  • the biological sample S may be a sample containing a biological component.
  • the biological components may be tissues, cells, liquid components of a living body (blood, urine, etc.), cultures, or living cells (cardiomyocytes, nerve cells, fertilized eggs, etc.).
  • the biological sample may be a solid, a specimen fixed with a fixative such as paraffin, or a solid formed by freezing.
  • the biological sample can be a section of the solid.
  • a specific example of the biological sample is a section of a biopsy sample.
  • the biological sample may be one that has undergone processing such as staining or labeling.
  • the treatment may be staining for indicating the morphology of biological components or for indicating substances (surface antigens, etc.) possessed by biological components, examples of which include HE (Hematoxylin-Eosin) staining and immunohistochemistry staining. be able to.
  • the biological sample may be treated with one or more reagents, and the reagents may be fluorescent dyes, chromogenic reagents, fluorescent proteins, or fluorescently labeled antibodies.
  • the specimen may be one prepared from a tissue sample for the purpose of pathological diagnosis or clinical examination. Moreover, the specimen is not limited to the human body, and may be derived from animals, plants, or other materials.
  • the specimen may be the type of tissue used (such as an organ or cell), the type of target disease, the subject's attributes (such as age, sex, blood type, or race), or the subject's lifestyle. The properties differ depending on habits (for example, eating habits, exercise habits, smoking habits, etc.).
  • the specimens may be managed with identification information (bar code, QR code (registered trademark), etc.) that allows each specimen to be identified.
  • the light irradiation unit 5101 is a light source for illuminating the biological sample S and an optical unit for guiding the light irradiated from the light source to the specimen.
  • the light source may irradiate the biological sample with visible light, ultraviolet light, or infrared light, or a combination thereof.
  • the light source may be one or more of a halogen light source, a laser light source, an LED light source, a mercury light source, and a xenon light source.
  • a plurality of light source types and/or wavelengths may be used in fluorescence observation, and may be appropriately selected by those skilled in the art.
  • the light irradiator may have a transmissive, reflective, or episcopic (coaxial or lateral) configuration.
  • the optical section 5102 is configured to guide the light from the biological sample S to the signal acquisition section 5103 .
  • the optical section can be configured to allow the microscope device 5100 to observe or image the biological sample S.
  • Optical section 5102 may include an objective lens.
  • the type of objective lens may be appropriately selected by those skilled in the art according to the observation method.
  • the optical section may include a relay lens for relaying the image magnified by the objective lens to the signal acquisition section.
  • the optical unit may further include optical components other than the objective lens and the relay lens, an eyepiece lens, a phase plate, a condenser lens, and the like.
  • the optical section 5102 may further include a wavelength separation section configured to separate light having a predetermined wavelength from the light from the biological sample S.
  • the wavelength separation section can be configured to selectively allow light of a predetermined wavelength or wavelength range to reach the signal acquisition section.
  • the wavelength separator may include, for example, one or more of a filter that selectively transmits light, a polarizing plate, a prism (Wollaston prism), and a diffraction grating.
  • the optical components included in the wavelength separation section may be arranged, for example, on the optical path from the objective lens to the signal acquisition section.
  • the wavelength separation unit is provided in the microscope apparatus when fluorescence observation is performed, particularly when an excitation light irradiation unit is included.
  • the wavelength separator may be configured to separate fluorescent light from each other or white light and fluorescent light.
  • the signal acquisition unit 5103 can be configured to receive light from the biological sample S and convert the light into an electrical signal, particularly a digital electrical signal.
  • the signal acquisition unit may be configured to acquire data on the biological sample S based on the electrical signal.
  • the signal acquisition unit may be configured to acquire data of an image (image, particularly a still image, a time-lapse image, or a moving image) of the biological sample S, particularly an image magnified by the optical unit. It can be configured to acquire data.
  • the signal acquisition unit includes one or more imaging elements, such as CMOS or CCD, having a plurality of pixels arranged one-dimensionally or two-dimensionally.
  • the signal acquisition unit may include an image sensor for acquiring a low-resolution image and an image sensor for acquiring a high-resolution image, or an image sensor for sensing such as AF and an image sensor for image output for observation. and may include
  • the image pickup device includes a signal processing unit (including one or more of CPU, DSP, and memory) that performs signal processing using pixel signals from each pixel, and pixel signals and an output control unit for controlling the output of the image data generated from and the processed data generated by the signal processing unit.
  • An imaging device including the plurality of pixels, the signal processing section, and the output control section may preferably be configured as a one-chip semiconductor device.
  • the microscope system 5000 may further include an event detection sensor.
  • the event detection sensor includes a pixel that photoelectrically converts incident light, and can be configured to detect, as an event, a change in luminance of the pixel exceeding a predetermined threshold.
  • the event detection sensor can in particular be asynchronous.
  • the control unit 5110 controls imaging by the microscope device 5100 .
  • the control unit can drive the movement of the optical unit 5102 and/or the sample placement unit 5104 to adjust the positional relationship between the optical unit and the sample placement unit.
  • the control unit 5110 can move the optical unit and/or the sample placement unit in a direction toward or away from each other (for example, the optical axis direction of the objective lens).
  • the control section may move the optical section and/or the sample mounting section in any direction on a plane perpendicular to the optical axis direction.
  • the control unit may control the light irradiation unit 5101 and/or the signal acquisition unit 5103 for imaging control.
  • the sample mounting section 5104 may be configured such that the position of the biological sample on the sample mounting section can be fixed, and may be a so-called stage.
  • the sample mounting section 5104 can be configured to move the position of the biological sample in the direction of the optical axis of the objective lens and/or in the direction perpendicular to the direction of the optical axis.
  • the information processing section 5120 can acquire data (such as imaging data) acquired by the microscope device 5100 from the microscope device 5100 .
  • the information processing section can perform image processing on the imaging data.
  • the image processing may include an unmixing process, in particular a spectral unmixing process.
  • the unmixing process is a process of extracting data of light components of a predetermined wavelength or wavelength range from the imaging data to generate image data, or removing data of light components of a predetermined wavelength or wavelength range from the imaging data. It can include processing and the like.
  • the image processing may include autofluorescence separation processing for separating the autofluorescence component and dye component of the tissue section, and fluorescence separation processing for separating the wavelengths between dyes having different fluorescence wavelengths.
  • autofluorescence signals extracted from one may be used to remove autofluorescence components from image information of the other specimen.
  • the information processing section 5120 may transmit data for imaging control to the control section 5110, and the control section 5110 receiving the data may control imaging by the microscope apparatus 5100 according to the data.
  • the information processing section 5120 may be configured as an information processing device such as a general-purpose computer, and may include a CPU, RAM, and ROM.
  • the information processing section may be included in the housing of the microscope device 5100 or may be outside the housing. Also, various processes or functions by the information processing unit may be realized by a server computer or cloud connected via a network.
  • a method of imaging the biological sample S by the microscope device 5100 may be appropriately selected by a person skilled in the art according to the type of the biological sample and the purpose of imaging. An example of the imaging method will be described below.
  • the microscope device can first identify an imaging target region.
  • the imaging target region may be specified so as to cover the entire region where the biological sample exists, or a target portion (target tissue section, target cell, or target lesion portion) of the biological sample. ) may be specified to cover
  • the microscope device divides the imaging target region into a plurality of divided regions of a predetermined size, and the microscope device sequentially images each divided region. As a result, an image of each divided area is acquired.
  • the microscope device specifies an imaging target region R that covers the entire biological sample S.
  • the microscope device divides the imaging target region R into 16 divided regions.
  • the microscope device can then image the segmented region R1, and then image any region included in the imaging target region R, such as a region adjacent to the segmented region R1. Then, image capturing of the divided areas is performed until there are no unimaged divided areas. Areas other than the imaging target area R may also be imaged based on the captured image information of the divided areas. After imaging a certain divided area, the positional relationship between the microscope device and the sample mounting section is adjusted in order to image the next divided area. The adjustment may be performed by moving the microscope device, moving the sample placement unit, or moving both of them.
  • the imaging device that captures each divided area may be a two-dimensional imaging device (area sensor) or a one-dimensional imaging device (line sensor).
  • the signal acquisition section may capture an image of each divided area via the optical section.
  • the imaging of each divided region may be performed continuously while moving the microscope device and/or the sample placement unit, or when imaging each divided region, the microscope device and/or the sample placement unit may be moved. Movement of the part may be stopped.
  • the imaging target area may be divided so that the divided areas partially overlap each other, or the imaging target area may be divided so that the divided areas do not overlap.
  • Each divided area may be imaged multiple times while changing imaging conditions such as focal length and/or exposure time.
  • the information processing apparatus can stitch a plurality of adjacent divided areas to generate image data of a wider area. By performing the stitching process over the entire imaging target area, it is possible to obtain an image of a wider area of the imaging target area. Also, image data with lower resolution can be generated from the image of the divided area or the image subjected to the stitching process.
  • the microscope device can first identify an imaging target region.
  • the imaging target region may be specified so as to cover the entire region where the biological sample exists, or the target portion (target tissue section or target cell-containing portion) of the biological sample. may be specified.
  • the microscope device scans a part of the imaging target area (also referred to as a "divided scan area") in one direction (also referred to as a "scanning direction”) in a plane perpendicular to the optical axis to capture an image. do.
  • the scanning of the divided scan area is completed, the next divided scan area next to the scan area is scanned. These scanning operations are repeated until the entire imaging target area is imaged. As shown in FIG.
  • the microscope device identifies a region (gray portion) in which the tissue section exists in the biological sample S as an imaging target region Sa. Then, the microscope device scans the divided scan area Rs in the imaging target area Sa in the Y-axis direction. After completing the scanning of the divided scan region Rs, the microscope device scans the next divided scan region in the X-axis direction. This operation is repeated until scanning is completed for the entire imaging target area Sa.
  • the positional relationship between the microscope device and the sample placement section is adjusted for scanning each divided scan area and for imaging the next divided scan area after imaging a certain divided scan area. The adjustment may be performed by moving the microscope device, moving the sample placement unit, or moving both of them.
  • the imaging device that captures each divided scan area may be a one-dimensional imaging device (line sensor) or a two-dimensional imaging device (area sensor).
  • the signal acquisition section may capture an image of each divided area via an enlarging optical system.
  • the imaging of each divided scan area may be performed continuously while moving the microscope device and/or the sample placement unit.
  • the imaging target area may be divided so that the divided scan areas partially overlap each other, or the imaging target area may be divided so that the divided scan areas do not overlap.
  • Each divided scan area may be imaged multiple times by changing imaging conditions such as focal length and/or exposure time.
  • the information processing apparatus can stitch a plurality of adjacent divided scan areas to generate image data of a wider area. By performing the stitching process over the entire imaging target area, it is possible to obtain an image of a wider area of the imaging target area.
  • image data with lower resolution can be generated from images of divided scan regions or images subjected to stitching processing.
  • each component of each illustrated device is functionally conceptual, and does not necessarily need to be physically configured as illustrated.
  • the specific form of distribution and integration of each device is not limited to the one shown in the figure, and all or part of them can be functionally or physically distributed and integrated in arbitrary units according to various loads and usage conditions. Can be integrated and configured.
  • the present technology can also take the following configuration. (1) a stage on which a preparation made of a biological specimen placed on a slide glass and covered with a cover glass is placed; dark field illumination for epi-illuminating the slide from above; bright field illumination for illuminating the slide from below; The slide provided on the dark field illumination side with respect to the stage and illuminated by the dark field illumination is imaged to acquire a dark field image, and the slide illuminated by the bright field illumination is imaged.
  • an imaging unit that acquires a bright field image by with The light exit surface of the brightfield illumination has a color that is complementary to the color of the darkfield illumination light from the darkfield illumination.
  • Biological sample observation device is a stage on which a preparation made of a biological specimen placed on a slide glass and covered with a cover glass is placed; dark field illumination for epi-illuminating the slide from above; bright field illumination for illuminating the slide from below; The slide provided on the dark field illumination side with respect to the stage and illuminated by the dark field illumination is imaged to acquire
  • the light exit surface of the bright field illumination has a color that is point symmetric with respect to the color of the dark field illumination light from the dark field illumination with a white point as the center of symmetry in a chromaticity diagram.
  • the biological sample observation device according to (1) (3)
  • the darkfield illumination light is red light,
  • the light exit surface has a green color,
  • the slide provided on the dark field illumination side with respect to the stage and illuminated by the dark field illumination is imaged to acquire a dark field image, and the slide illuminated by the bright field illumination is imaged.
  • an imaging unit that acquires a bright field image by with The darkfield illumination light from the darkfield illumination is white light, The light exit surface of the brightfield illumination has a black color, Biological sample observation device.
  • the brightfield illumination is a housing; a light emitting element provided in the housing; a light diffusion plate as the light emission surface for emitting light from the light emitting element to the outside of the housing; having The biological sample observation device according to any one of (1) to (4) above.
  • the light emitting element is a light emitting diode, a laser diode, or a lamp light source.
  • Biological sample observation device is composed of a light transmission panel that transmits light, a light shielding plate that blocks light in a predetermined wavelength band, or a neutral density filter that reduces the amount of transmitted light.
  • the biological sample observation apparatus according to any one of (5) to (7) above, wherein at least part of the inside of the side wall of the housing is covered with a light reflecting material.
  • the light reflecting material is a reflecting film, a reflecting coat, or an optical mirror.
  • the brightfield illumination is Having a plurality of the light emitting elements mounted on the bottom surface of the housing, The light diffusion plate is provided above the plurality of light emitting elements, The biological sample observation device according to any one of (5) to (9) above.
  • the brightfield illumination is a light guide plate for guiding light from the light emitting element in the housing;
  • the light diffusion plate is provided above the light guide plate,
  • (12) The biological specimen observation device according to any one of (1) to (11) above, wherein the light exit surface has an area equal to or larger than the angle of view of the imaging unit.
  • (123) The length W of one side of the light exit surface is expressed by the following formula (1), where ⁇ is the angle of view of the imaging unit and L is the distance between the imaging unit and the bright field illumination.
  • the dark field illumination is provided between the stage and the imaging unit, a substrate surrounding the slide in plan view from the imaging unit side; a plurality of light emitting elements mounted on the substrate; a plurality of light guide tubes that guide light from the plurality of light emitting elements to the slide; having The biological sample observation device according to any one of (1) to (4) above.
  • the slide glass has a label with information associated with the biological specimen, The above ( 14) The biological sample observation device described above. (16) The above ( 15) The biological sample observation device described above. (17) The biological sample observation apparatus according to (16) above, wherein the image processing unit generates a thumbnail image based on the dark field image and the bright field image.
  • the biological specimen observation apparatus according to (16) or (17) above, further comprising an enlarged image capturing unit that captures an enlarged partial image of the biological specimen based on the determined enlarged partial image acquisition area.
  • the biological sample observation device according to any one of (1) to (18) above, which is a slide scanner or a microscope. (20) a stage on which a preparation made of a biological specimen placed on a slide glass and covered with a cover glass is placed; dark field illumination for epi-illuminating the slide from above; bright field illumination for illuminating the slide from below; The slide provided on the dark field illumination side with respect to the stage and illuminated by the dark field illumination is imaged to acquire a dark field image, and the slide illuminated by the bright field illumination is imaged.
  • an imaging unit that acquires a bright field image by with The light exit surface of the brightfield illumination has a color that is complementary to the color of the darkfield illumination light from the darkfield illumination.
  • REFERENCE SIGNS LIST 100 slide scanner 110 thumbnail image capturing unit 111, 111a, 112, 121 illumination 114, 124 imager 120 enlarged image capturing unit 122 transmission illumination lens 123 objective/imaging lens 130 stage 140, 202 substrate 142, 242 light emitting element 144 light guide Tube 150 Control Unit 151 Stage Drive Control Unit 152 Thumbnail Image Capturing Control Unit 153 Enlarged Image Capturing Control Unit 154 Position Control Unit 155 Image Processing Unit 156 Thumbnail Image Acquisition Unit 157 Enlarged Image Acquisition Unit 158 Illumination Control Unit 159 Slide 160 Slide Glass 161 Cover Glass 162 Label 200 Case 250 Diffusion plate 260 Reflective film 270 Light guide plate 400 Chromaticity diagram 402 White point 410 Red point 420 Green point 900 Biological sample V100 Bright field image V110 Dark field image V120 Calculation result V130 Thumbnail image V131 Light emitting point V200 Enlargement Image V202 Magnified site image

Landscapes

  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Biochemistry (AREA)
  • Pathology (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Hematology (AREA)
  • Molecular Biology (AREA)
  • Urology & Nephrology (AREA)
  • Food Science & Technology (AREA)
  • Medicinal Chemistry (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラート(159)を載置するステージ(130)と、前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明(112)と、前記プレパラートを当該プレパラートの下方から照明する明視野照明(111)と、前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部(114)とを備え、前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、生体標本観察装置を提供する。

Description

生体標本観察装置及び生体標本観察システム
 本開示は、生体標本観察装置及び生体標本観察システムに関する。
 近年、大容量ストレージの実現により、スライドガラス上の生体標本全体の画像をデジタルデータ化して、当該画像情報を管理したり解釈したりする技術が開発され、このような技術により、病理診断業務の品質や効率が改善することが期待されている。例えば、スライドガラス状の生体標本の画像をデジタルデータ化したバーチャルスライドは、病理医師間で交換される情報としてのみならず、教材等としても利用することができる。また、上記バーチャルスライドは、バーチャルスライド装置(生体標本観察装置/生体標本観察システム)によって自動的に作成することができ、作業の効率化を図ることもできる。
 上記バーチャルスライド装置は、例えば、生体標本が載置されているスライドガラス全体を、撮像素子と反対側に設置されたバックライトで照明する。そして、バーチャルスライド装置は、撮像素子によりスライドガラス全体を撮影して、デジタル画像(バーチャルスライド)とする。なお、スライドガラスには、当該スライドガラス上の生体標本の名称等といった情報が記載されたラベルや、生体標本を覆うカバーガラス等が設けられている。作成されたスライドガラス全体のデジタル画像は、ハードディスクドライブ等に蓄積される。ユーザは、パーソナルコンピュータ等を用いてこれらの蓄積画像を観察することができる。生体標本をデジタル画像として管理することで、莫大な生体サンプルから所望の生体標本を容易に見つけて観察することができる。
 バーチャルスライドを作成する際、バーチャルスライド装置は、まず、サムネイル画像(弱拡大像)を撮影して、高倍率画像(強拡大像)を取得する撮像領域を決定する。そして、バーチャルスライド装置は、決定された撮像領域に対して高倍率画像の取得を行う。このように、適切に撮像領域を決定することができれば、必要な領域だけ高倍率画像を得ればよいことから、高倍率画像を得るための時間を短くすることができ、作業をより効率化することができる。
特開2012-14078号公報
 しかしながら、従来のバーチャルスライド装置では、生体標本以外のものが映り込み、良好なサムネイル画像を取得できないことに起因して、生体標本を含む撮像領域を適切に決定することができない場合があった。このような場合、生体標本以外の画像も取得してしまうのでスライドのスキャン時間が増大し、さらにはバーチャルスライドを蓄積するために大容量のストレージが必要となる。このため、スライド内の生体標本の領域のみを正確に認識して、撮像領域を適切に決定する手段が強く求められていた。
 そこで、本開示では、サムネイル画像から高倍率画像を取得する領域を適切に決定することが可能な、生体標本観察装置及び生体標本観察システムを提案する。
 本開示によれば、スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、前記プレパラートを当該プレパラートの下方から照明する明視野照明と、前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部とを備え、前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、生体標本観察装置が提供される。
 また、本開示によれば、スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、前記プレパラートを当該プレパラートの下方から照明する明視野照明と、前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部とを備え、前記暗視野照明からの暗視野照明光は、白色光であり、前記明視野照明の光出射面は、黒色を持つ、生体標本観察装置が提供される。
 さらに、本開示によれば、スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、前記プレパラートを当該プレパラートの下方から照明する明視野照明と、前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部とを備え、前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、生体標本観察システムが提供される。
本開示の実施形態に係るプレパラートの一例を示した説明図である。 本開示の実施形態に係るスライドスキャナの構成例を示した説明図である。 本開示の実施形態に係る暗視野照明の構成例を示した断面図である。 本開示の実施形態に係る暗視野照明の構成例を示した上面図である。 本開示の実施形態に係る制御部の構成例を示した機能ブロック図である。 本開示の実施形態に係るスライドスキャナによるバーチャルスライド作成処理を示したフローチャートである。 本開示の実施形態に係るスライドスキャナによる拡大像の一例を示した説明図である。 本開示の実施形態に係るスライドスキャナによるサムネイル像の生成処理を示したフローチャートである。 本開示の実施形態に係るスライドスキャナによるカバーガラスのエッジ検出の概要を示す説明図である。 本開示の実施形態に係るスライドスキャナによるサムネイル像の一例を示した説明図(その1)である。 本開示の実施形態に係るスライドスキャナによるサムネイル像の一例を示した説明図(その2)である。 本開示の実施形態に係る明視野照明の構成例を示した断面図である。 色度図を説明するための説明図である。 本開示の実施形態に係る明視野照明の大きさの例を示した断面図である。 本開示の実施形態に係る明視野照明の輝度分布の結果を説明する説明図である。 本開示の実施形態の変形例に係る明視野照明の構成例を示した断面図である。 顕微鏡システムの全体構成を概略的に示す図である。 撮像方式の例を示す図である。 撮像方式の例を示す図である。
 以下に、添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。また、本明細書及び図面において、実質的に同一又は類似の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合がある。ただし、実質的に同一又は類似の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
 なお、以下の説明においては、生体(例えば、人体、植物等)から取得された、組織(例えば、臓器や上皮組織)の一部である組織切片や細胞のことを生体標本と呼ぶ。なお、以下に説明する生体標本は、必要に応じて各種の染色が施されていてもよい。言い換えると、以下に説明する本開示の実施形態においては、特に断りがない限りは、生体標本に各種の染色が施されていなくてもよい。さらに、例えば、染色には、HE(ヘマトキシリン・エオシン)染色、ギムザ染色又はパパニコロウ染色等に代表される一般染色のみならず、特定の組織に着目する場合に用いる過ヨウ素酸シッフ(PAS)染色等や、FISH(Fluorescence In-Situ Hybridization)や酵素抗体法等の蛍光染色が含まれる。
 なお、説明は以下の順序で行うものとする。
1. 本開示の実施形態を創作するに至る背景
   1.1 プレパラート
   1.2 スライドスキャナの全体構成の概要
   1.3 サムネイル像撮像部の構成
   1.4 拡大像撮像部の構成
   1.5 暗視野照明の構成
   1.6 制御部の構成
   1.7 バーチャルスライド作成処理
   1.8 創作するに至る背景
2. 実施形態
   2.1 詳細構成
   2.2 変形例
3. まとめ
4. 応用例
5. 補足
 <<1. 本開示の実施形態を創作するに至る背景>>
 <1.1 プレパラート>
 まずは、本開示の実施形態を説明する前に、本発明者が本開示の実施形態を創作するに至った背景を説明する。最初に、図1を参照して、本開示の実施形態に係るスライドスキャナの観察対象となるプレパラート159の一例を説明する。図1は、本開示の実施形態に係るプレパラート159の一例を示した説明図である。
 図1に示すように、プレパラート159は、血液等の結合組織、上皮組織、又は、それらの双方の組織等の組織切片、又は、塗抹細胞等からなる生体標本900を、所定の固定手法によりスライドガラス160上に固定したものである。これらの組織切片、又は、塗抹細胞には、先に説明したように、必要に応じて各種の染色が施さてもよい。この染色には、HE染色、ギムザ染色又はパパニコロウ染色等に代表される一般染色のみならず、FISHや酵素抗体法等の蛍光染色が含まれる。さらに、プレパラート159は、生体標本900が載置されたスライドガラス160と、当該生体標本900を覆うカバーガラス161とを含む。
 さらに、プレパラート159を構成するスライドガラス160には、対応する生体標本900に紐づけられた付帯情報(例えば、サンプルを採取した人の氏名、採取日時、染色の種類等)が表記されたり、当該付帯情報に対応する1次元コード/2次元コード等が印刷されたりしたラベル162が貼付されている。なお、本開示においては、プレパラート159は、図1に示されるような形態に限定されるものではなく、生体標本900と、スライドガラス160と、カバーガラス161とを含んでいれば、特に限定されるものではない。
 <1.2 スライドスキャナの全体構成の概要>
 次に、図2を参照して、本開示の実施形態に係るスライドスキャナ(生体標本観察装置)100の全体構成の概要を説明する。図2は、本開示の実施形態に係るスライドスキャナ100の構成例を示した説明図である。本実施形態に係るスライドスキャナ100は、生体標本(例えば、細胞組織等)900を搭載するプレパラート159に対して、デジタル撮影を行うスキャナシステムである。
 まずは、図2に示すように、本実施形態に係るスライドスキャナ100は、生体標本900が配設されるプレパラート159の全体の像(以下、この像をサムネイル像とも称する。)を撮像するサムネイル像撮像部110を有する。さらに、当該スライドスキャナ100は、生体標本900が所定倍率で拡大された像(以下、この像を拡大像とも称する。)もしくは、生体標本900の一部を拡大した拡大部位像を撮像する拡大像撮像部120を有する。なお、サムネイル像撮像部110及び拡大像撮像部120の詳細については、後述する。
 また、本実施形態に係るスライドスキャナ100には、上述のようなプレパラート159が載置されるステージ130が設けられている。ステージ130は、ステージ駆動機構(図示省略)により、プレパラート159が載置されるステージ面に対して平行となる方向(X軸-Y軸方向)と、直交する方向(Z軸方向)に自由に移動することができる。従って、ステージ130が移動することにより、ステージ130に載置されたプレパラート159が、サムネイル像撮像部110と拡大像撮像部120との間を移動することができる。
 さらに、本実施形態に係るスライドスキャナ100には、図2に示すように、スライドスキャナ100の様々な部位を制御するための制御部150が設けられている。具体的には、本実施形態に係る制御部150は、サムネイル像撮像部110の照明111、112、拡大像撮像部120の照明121、サムネイル像撮像部のイメージャー114、拡大像撮像部120のイメージャー124、及び、上述したステージ駆動機構(図示省略)と、各種のデータ通信路を介して接続されており、これらを制御したり、これらからデータを取得したりすることができる。また、制御部150は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、ストレージ装置、通信装置及び演算回路等により実現される。なお、制御部150の詳細構成については後述する。
 なお、本開示の実施形態においては、スライドスキャナ100は、図2に示されるような形態に限定されるものではなく、さらなる他の機能部(例えば、ディスプレイ等)を有していてもよい。
 <1.3 サムネイル像撮像部の構成>
 次に、図2を参照して、サムネイル像撮像部110の詳細構成を説明する。図2に示すように、サムネイル像撮像部110は、照明111と、照明112と、イメージャー(撮像部)114とを主に有する。以下、サムネイル像撮像部110の各機能部を順次説明する。
 (照明111)
 照明111(以下、明視野照明とも称する。)は、ステージ130の、イメージャー114側であるプレパラート配置面とは逆の面側に設けられる。照明111は、生体標本900が搭載されたプレパラート159に対して光(以下、明視野照明光とも称する。)をその下方から照明するバックライト型の照明である。照明111から照射され、ステージ130上に配設されたプレパラート159を透過した透過光は、直接、又は、対物レンズ(図示省略)を介して、イメージャー114に結像する。なお、照明111の詳細構成については後述する。
 (照明112)
 照明112(以下、暗視野照明とも称する。)は、ステージ130の、イメージャー114側であるプレパラート配置面側に設けられ、且つ、ステージ130とイメージャー114との間に設けられる。そして、照明112は、上方からプレパラート159を落射照明する落射型照明である。後述するイメージャー114は、照明112で照明され、プレパラート159において散乱された光を取得し、結像する。詳細には、光の散乱は、例えば、カバーガラス161のエッジ等で生ずるため、照明112で照明された際にイメージャー114によって取得された画像(以下、暗視野画像とも称する)では、カバーガラス161のエッジが白く現れる。また、封入剤がカバーガラス161からはみ出している場合は、上記画像では、当該はみ出し領域は白く現れる。さらに、照明112は、プレパラート159の上方から照明するため、照明112で照明した際には、イメージャー114はプレパラート159のラベル162の像(ラベル162に表記された文字、記号、数字、コード等)も取得することができる。なお、照明112の詳細構成については後述する。
 (イメージャー114)
 イメージャー114は、ステージ130に対して照明112側に設けられ、照明112により照射されたプレパラート159全体を撮像して暗視野画像を取得し、照明111により照射されたプレパラート159全体を撮像して明視野画像を取得することができる。本開示の実施形態においては、暗視野画像と明視野画像とに基づいて、サムネイル像を生成することができる。詳細には、イメージャー114は、赤色(R)、緑色(G)、青色(B)の光を検出する複数の撮像素子からなり、上記撮像素子は、例えば、CCD(Charge Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子により実現することができる。
 なお、本開示の実施形態においては、サムネイル像撮像部110は、図2に示されるような形態に限定されるものではなく、例えば、ステージ130とイメージャー114との間に対物レンズ(図示省略)が設けられていてもよい。
 <1.4 拡大像撮像部の構成>
 次に、図2を参照して、拡大像撮像部120の詳細構成を説明する。図2に示すように、拡大像撮像部120は、照明121と、透過照明レンズ122と、対物/結像レンズ123と、イメージャー124とを主に有する。以下、拡大像撮像部120の各機能部を順次説明する。
 (照明121)
 照明121は、ステージ130の、イメージャー124側であるプレパラート配置面とは逆の面側に設けられる。照明211は、生体標本900が搭載されたプレパラート159に対して光をその下方から照明するバックライト型の照明である。照明121から照射され、透過照明レンズ122を介してステージ130上に配設されたプレパラート159を透過した透過光は、対物/結像レンズ123を介してイメージャー124に結像する。
 (透過照明レンズ122)
 透過照明レンズ122は、照明121から照射された光を集光して、ステージ130上のプレパラート159に導くレンズである。当該透過照明レンズ122は、照明121とステージ130との間に配設される。
 (対物/結像レンズ123)
 対物/結像レンズ123は、ステージ130のプレパラート配置面側に配設される。拡大像撮像部120では、上記対物レンズを適宜交換することで、生体標本900を様々な倍率に拡大して撮像することができる。さらに、ステージ130上に配設されたプレパラート159を透過した透過光は、上記結像レンズによって集光されて、対物/結像レンズ123の後方に設けられたイメージャー124に結像する。
 (イメージャー124)
 イメージャー124は、ステージ130に対して照明121とは反対側に設けられ、当該イメージャー124の有する撮像素子の画素サイズ及び上記対物レンズの倍率に応じて、ステージ130のプレパラート配置面上における所定の横幅及び縦幅からなる撮像範囲の像が結像される。なお、上記対物レンズにより生体標本900の一部が拡大されるため、上述の撮像範囲は、サムネイル像撮像部110のイメージャー114の撮像範囲に比べて十分に狭い範囲となる。さらに、イメージャー124は、赤色(R)、緑色(G)、青色(B)の光を検出する複数の撮像素子からなり、上記撮像素子は、例えば、CCD又はCMOS等の撮像素子により実現することができる。
 なお、本開示の実施形態においては、拡大像撮像部120は、図2に示されるような形態に限定されるものではなく、さらなる他の機能部を有していてもよい。
 <1.5 暗視野照明の構成>
 次に、図3A及び図3Bを参照して、照明112(暗視野照明)の詳細構成を説明する。図3Aは、本開示の実施形態に係る暗視野照明の構成例を示した断面図であり、図3Bは、本開示の実施形態に係る暗視野照明の構成例を示した上面図である。
 図3Aに示すように、照明112は、基板140上にマウントされた複数の発光素子142と、複数の発光素子142からの光をスライドガラス160(プレパラート159)に導く複数の導光管144とを有する。詳細には、発光素子142から直下に出射された光は、導光管144の反射面によって曲げられ、スライドガラス160上のカバーガラス161のエッジやラベル162に導かれる。このような照明112を用いることにより、イメージャー114は、カバーガラス161のエッジ、さらにはラベル162の像(ラベル162に表記された文字、記号、数字、コード等)を撮像することができる。
 さらに、図3Bに示すように、複数の発光素子142は、イメージャー114側からの平面視においてスライドガラス160(プレパラート159)を取り囲むような形状を有する基板140の上にマウントされる。このように基板140が、スライドガラス160(プレパラート159)を取り囲むような形状を有することから、イメージャー114によるプレパラート159の撮像を妨げることなく、プレパラート159上の必要な個所に光を照射することができる。
 ここで、光には、短波長の光は散乱されやすく(すなわち散乱率が高く)、長波長の光は散乱されにくい(すなわち散乱率が低い)という特性がある。波長によって散乱率の異なる散乱をレーリー散乱という。レーリー散乱による散乱率は、波長の4乗に反比例する。図3Aに示すように、カバーガラス161のエッジに照明112からの光が入射すると、当該エッジにおいて入射光は散乱する。光が大きく散乱するほど散乱率の変化の差分を光の濃淡差として撮像することができるため、エッジを明確に検出することが可能となる。このように、散乱率の違いによってエッジを検出できる程度が変化するため、照明112の光としては、短波長の光(例えば、青色、紫糸、白色等)を用いることは好ましい。より具体的には、発光素子142としては、LED(Light Emitting Diode)やレーザ等を用いることが好ましい。
 なお、本開示の実施形態においては、照明112は、図3A及び図3Bに示されるような、矩形状の外周を持つ基板140の形態に限定されるものではなく、例えば、リング状の基板の形態であってもよい。
 <1.6 制御部の構成>
 次に、図4を参照して、制御部150の詳細構成を説明する。図4は、本開示の実施形態に係る制御部150の構成例を示した機能ブロック図である。図4に示すように、制御部150は、ステージ駆動制御部151と、サムネイル像撮像制御部152と、拡大像撮像制御部153と、位置制御部154と、画像処理部(拡大部位像取得領域決定部)155と、サムネイル像取得部156と、拡大像取得部157と、照明制御部158とを主に有する。以下、以下、制御部150の各機能部を順次説明する。
 (ステージ駆動制御部151)
 ステージ駆動制御部151は、ステージ130を駆動するステージ駆動機構(図示省略)を制御することができる。例えば、サムネイル像を撮像する際には、ステージ駆動制御部151は、プレパラート159全体がイメージャー114の撮像範囲に入るように、ステージ載置面方向(X―Y軸方向)にステージ130を移動させる。また、ステージ駆動制御部151は、プレパラート159全体にイメージャー114の焦点が合うように、ステージ130をステージ載置面に直交する方向(Z軸方向)に移動させる。
 また、例えば、拡大像を撮像する際には、ステージ駆動制御部151は、ステージ駆動機構(図示省略)を駆動制御し、透過照明レンズ122と、対物/結像レンズ123との間に生体標本900が位置するよう、ステージ載置面方向にステージ130を移動させる。さらに、ステージ駆動制御部151は、イメージャー124に撮像される撮像範囲に生体標本900の所定の部位が位置するように、ステージ面方向(X-Y軸方向)にステージ130を移動させる。そして、ステージ駆動制御部151は、ステージ駆動機構を駆動制御して、所定の撮影範囲内に位置する生体標本900の部位が対物/結像レンズ123の焦点に合うように、ステージ面に直交する方向(Z軸方向)にステージ130を移動させる。
 (サムネイル像撮像制御部152)
 サムネイル像撮像制御部152は、サムネイル像撮像部110に設けられたイメージャー114の制御を行うことができる。詳細には、サムネイル像撮像制御部152は、明視野モード(照明111を使用して明視野画像を取得する際のモード)又は暗視野モード(照明112を使用して暗視野画像を取得する際のモード)に応じたパラメータを、イメージャー114に設定する。なお、サムネイル像撮像制御部152が設定するパラメータとして、例えば、露光の開始タイミング及び終了タイミング等を挙げることができる。また、サムネイル像撮像制御部152は、イメージャー114から出力される像に対応する出力信号を取得すると、取得した出力信号をサムネイル像に対応する出力信号として後述する拡大像取得部157に出力する。
 (拡大像撮像制御部153)
 拡大像撮像制御部153は、拡大像撮像部120に設けられたイメージャー124の制御を行うことができる。詳細には、拡大像撮像制御部153は、パラメータを、イメージャー124に設定する。なお、拡大像撮像制御部153が設定するパラメータとして、例えば、露光の開始タイミング及び終了タイミング等を挙げることができる。また、拡大像撮像制御部153は、イメージャー124から出力される像に対応する出力信号を取得すると、取得した出力信号を拡大像に対応する出力信号として後述する拡大像取得部157に出力する。
 (位置制御部154)
 位置制御部154は、位置制御処理を実行し、ステージ130を目標とする位置(以下、「目標位置」ともいう。)を決定することができ、上述したステージ駆動制御部151は、決定した目標位置に基づき、ステージ130を移動させる。
 (画像処理部155)
 画像処理部155は、サムネイル像撮像制御部152から入力された、イメージャー114により撮影された画像から、拡大像を取得する拡大部位像取得領域を決定し、サムネイル像を生成する。詳細には、イメージャー114により撮影された暗視野画像には、生体標本900を覆うカバーガラス161のエッジも写っている。そこで、本実施形態では、画像処理部155により、イメージャー114により撮影された暗視野画像から、カバーガラス161のエッジを検出し、検出したエッジの位置に基づいて、イメージャー114により撮影された明視野画像における、生体標本900が写る領域を拡大部位像取得領域として決定することができる。また、画像処理部155は、イメージャー114により撮影された暗視野画像に含まれるラベル162を検出することができる。さらに、画像処理部155は、上記暗視野画像及び明視野画像に基づき、生体標本900やラベル162の像(ラベル162に表記された文字、記号、数字、コード等)を含むサムネイル像を生成し、後述するサムネイル像取得部156に出力することができる。
 (サムネイル像取得部156)
 サムネイル像取得部156は、例えば、所定のユーザ操作がなされた場合や、ステージ130にプレパラート159が載置された場合等に、サムネイル像撮像制御部152に対して、各種設定条件とともにサムネイル像を撮像するように要請する。また、サムネイル像取得部156は、サムネイル像撮像制御部152から画像処理部155に出力されて加工された、サムネイル像に対応するデータ(以下、サムネイル像データとも称する。)を、画像処理部155から取得する。サムネイル像取得部156は、取得したサムネイル像データを、記憶部(図示省略)に格納してもよい。また、サムネイル像取得部156は、取得したサムネイル像データを、通信部(図示省略)を介して、外部に設けられた画像データ格納サーバ等に出力してもよい。すなわち、サムネイル像取得部156は、サムネイル像出力部としても機能することができる。
 (拡大像取得部157)
 拡大像取得部157は、例えば、所定のユーザ操作がなされた場合や、あるプレパラート159のサムネイル像の撮像が終了した場合等に、拡大像撮像制御部153に対して、各種設定条件とともに拡大像を撮像するように要請する。また、拡大像取得部157は、拡大像撮像制御部153から出力される、拡大像に対応するデータ(以下、拡大像データとも称する。)を取得する。拡大像取得部157は、取得した拡大像データを、記憶部(図示省略)に格納してもよい。また、拡大像取得部157は、取得した拡大像データを、通信部(省略)を介して、外部に設けられた画像データ格納サーバ等に出力してもよいすなわち、拡大像取得部157は、拡大像出力部としても機能することができる。
 (照明制御部158)
 照明制御部158は、本実施形態に係るスライドスキャナ100が有する各種の照明111、112、121を制御することができる。まず、例えば、照明制御部158が、サムネイル像撮像部110に設けられた照明111の制御を行う場合について説明する。照明制御部158は、照明方法を示す情報を参照して、明視野モードに応じたパラメータを照明111に対して設定し、照明111を照射させる。これにより、照明111から照射された明視野照明光が、生体標本900全体に照射されることとなる。なお、照明制御部158が設定するパラメータとしては、例えば、照明光の強度や光源種類の選択等を挙げることができる。
 また、例えば、照明制御部158が、サムネイル像撮像部110に設けられた照明112の制御を行う場合について説明する。照明制御部158は、照明方法を示す情報を参照して、暗視野モードに応じたパラメータを照明112に対して設定し、照明112を照射させる。これにより、照明112から照射された暗視野照明光が、カバーガラス161のエッジ等に照射されることとなる。
 さらに、例えば、照明制御部158が、拡大像撮像部120に設けられた照明121の制御を行う場合について説明する。照明制御部158は、照明方法を示す情報を参照して、パラメータを照明121に対して設定し、照明121から照明光を照射させる。これにより、照明121から照射された照明光が、生体標本900の少なくとも一部に照射されることとなる。
 なお、本開示の実施形態においては、制御部150は、図4に示されるような機能部を持つことに限定されるものではなく、例えば、記憶部や通信部をさらに有していてもよい。
 以上、本実施形態に係るスライドスキャナ100の概略構成について説明した。本実施形態に係るスライドスキャナ100では、サムネイル像に基づき、生体標本900の拡大像を取得する拡大部位像取得領域を画像処理部155によって決定する。これにより、生体標本900が表示されている必要な領域に対してのみ拡大像を取得することができ、拡大像の取得に要する時間やバーチャルスライドを記憶する記憶部の容量を低減することができる。以下、本開示の実施形態に係るスライドスキャナ100によるバーチャルスライド作成処理について詳細に説明していく。
 <1.7 バーチャルスライド作成処理>
 図5及び図6を参照して、スライドスキャナ100によるバーチャルスライド作成処理について説明する。図5は、本開示の実施形態に係るスライドスキャナ100によるバーチャルスライド作成処理を示したフローチャートであり、図6は、本開示の実施形態に係るスライドスキャナ100による拡大像V200の一例を示した説明図である。詳細には、図5に示すように、本開示の実施形態に係るスライドスキャナ100によるバーチャルスライド作成処理は、ステップS100からステップS160までの複数のステップを含む。以下に、これら各ステップの詳細について説明する。
 まず、制御部150は、サムネイル像V130を取得するために、プレパラート159をサムネイル像撮像部110へ移動させる位置制御処理を行う(ステップS100)。
 次に、ステップS100にてプレパラート159がサムネイル像撮像部110へ移動されると、サムネイル像撮像部110によりサムネイル像の取得が行われる(ステップS110)。本実施形態におけるサムネイル像の取得では、画像処理部155により、イメージャー114により撮影して取得された暗視野画像から、カバーガラス161のエッジを検出し、検出結果に基づき、拡大部位像取得領域を決定する。そして、サムネイル像取得部156は、明視野画像の拡大部位像取得領域と暗視野画像のラベル162の像(ラベル162に表記された文字、記号、数字、コード等)とにより生成した画像をサムネイル像とする。なお、サムネイル像の取得処理の詳細については後述する。
 そして、制御部150は、ステップS110にてサムネイル像を取得すると、サムネイル像に基づいて、生体標本900に分割領域を割り当てる(ステップS120)。詳細には、制御部150は、サムネイル像に基づいてステージ130における生体標本900の位置を検出し、当該生体標本900を複数の分割領域のそれぞれに割り当てる。ここで、分割領域は、生体標本900の部分である拡大部位像をイメージャー124により取得する撮像単位領域のことをいう。
 さらに、拡大部位像を取得するために、制御部150は、プレパラート159を拡大像撮像部120へ移動させる位置制御処理を行う(ステップS130)。そして、拡大像撮像制御部153を介してイメージャー124により撮像される各分割領域の拡大部位像を所定のタイミング間隔で取得する(ステップS140)。
 次に、1つの分割領域の拡大部位像を取得すると、制御部150は、拡大部位像取得領域内の全ての分割領域に対する拡大部位像を取得したか否かを判定する(ステップS150)。そして、制御部150は、全ての拡大部位像がまだ取得されていない場合(ステップS150:No)には、ステップS130からステップS150までの処理を繰り返す。一方、ステップS150にて全ての各分割領域に対する拡大部位像を取得されたと判定された場合(ステップS150:Yes)には、制御部150は、これらの拡大部位像を結像して拡大像V200を生成し(ステップS160)、処理を終了する。
 このようにして、制御部150は、図6に示されるような生体標本900の拡大像V200を生成する。なお、図6に示されるように、拡大像V200は、複数の拡大部位像V202が結像した像である。
 さらに、図7から図9を参照して、サムネイル像V130の取得処理をより具体的に説明する。図7は、本開示の実施形態に係るスライドスキャナ100によるサムネイル像V130の生成処理を示したフローチャートである。さらに、図8は、本開示の実施形態に係るスライドスキャナ100によるカバーガラス161のエッジの検出の概要を示す説明図であり、図9は、本開示の実施形態に係るスライドスキャナ100によるサムネイル像V130の一例を示した説明図である。
 本実施形態の画像処理部155では、図8に示されるサムネイル像撮像部110によって取得された明視野画像V100と暗視野画像V110とを用いて、図9に示されるサムネイル像V130を生成する。詳細には、図7に示すように、本開示の実施形態に係るスライドスキャナ100によるサムネイル像V130の取得処理は、サブステップS111からサブステップS116までの複数のステップを含む。以下に、これら各ステップの詳細について説明する。
 まず、暗視野照明(照明112)を用いて、暗視野画像V110(図8の左下段参照)を取得する(サブステップS111)。詳細には、ステージ駆動制御部151によりステージ130上に載置されたプレパラート159がサムネイル像撮像部110の撮像位置へ移動されると、照明制御部158は、照明112をオンにする指示を行う。照明112がオンになると、イメージャー114により暗視野画像V110が取得される。その後、照明制御部141は、上記照明112をオフにする。サムネイル像撮像制御部143は、イメージャー114から出力された暗視野画像V110を、制御部150の画像処理部155へ出力する。
 次に、画像処理部155は、サムネイル像撮像制御部152から入力された暗視野画像V110から、カバーガラス161のエッジを検出する(サブステップS112)。詳細には、サブステップS111にて照明112によりプレパラート159を照明すると、カバーガラス161のエッジで光が散乱される。このため、図8の左下段に示されるように、暗視野画像V110では、カバーガラス161のエッジが光って見える。そこで、画像処理部155は、暗視野画像V110に光って現れる部分をカバーガラス161のエッジとして検出する。
 また、画像処理部155は、暗視野画像V110から、プレパラート159に付されたラベル162の像(ラベル162に表記された文字、記号、数字、コード等)を取得することもできる(サブステップS113)。サブステップS111にて照明112によりプレパラート159を照明すると、ラベル162に対して上方から照射された光の散乱によって、ラベル162の像が暗視野画像V110に現れる。そこで、画像処理部155は、図8の左下段に示される暗視野画像V110からラベル162の像を取得する。
 次に、暗視野画像V110よりカバーガラス161のエッジ及びラベル162の像(ラベル162に表記された文字、記号、数字、コード等)が取得されると、次に、明視野照明(照明111)を用いて、明視野画像V100(図8の左上段参照)が取得される(サブステップS114)。詳細には、制御部150は、照明制御部158に対して照明111をオンにする指示を行う。上記照明111がオンになると、イメージャー114により明視野画像V100が取得される。その後、照明制御部158は、上記照明111をオフにする。サムネイル像撮像制御部152は、イメージャー114から出力された明視野画像V100を、制御部150の画像処理部155へ出力する。
 明視野画像V100からは、例えば図8の左上段に示すように、生体標本900等の、スライドガラス160上にある物体を検出することができる。検出される物体のうち、拡大像として画像を取得しなければならない物体は、生体標本900のみである。また、カバーガラス161のエッジなどの他の物体はノイズであり、拡大像を取得して、バーチャルスライドとして保管する物体ではない。そこで、画像処理部155は、明視野画像V100と暗視野画像V110とを用いて、拡大像を取得する拡大部位像取得領域を決定する処理を行う(サブステップS115)。
 具体的には、画像処理部155は、暗視野画像V110から検出されたカバーガラス161のエッジの位置に基づいて、図8の右側の算出結果V120に示すように、明視野画像V100内におけるカバーガラス161のエッジの位置を算出する。そして、画像処理部155は、明視野画像V100内におけるカバーガラス161のエッジの内部領域で領域判定を行い、拡大部位像取得領域に決定する。また、領域判定がうまく働かない場合やカバーガラス161内部の全面を撮像したい場合は、明視野画像V100中におけるカバーガラス161のエッジの内部領域全体を拡大部位像取得領域に決定してもよい。
 その後、画像処理部155は、サムネイル像V130(図9参照)を生成する(サブステップS116)。詳細には、画像処理部155は、明視野画像V100のうち拡大部位像取得領域内の画像(すなわち、生体標本900を含む画像)と、暗視野画像V110のラベル162の像(ラベル162に表記された文字、記号、数字、コード等)とに基づいて、サムネイル像V130を生成する。生成されたサムネイル像V130は、記憶部(図示省略)に記憶させておいてもよい。このようにして、図5に示されるステップS110において、制御部150は、ステージ130が目標位置に移動された状態で、サムネイル像撮像制御部152及びイメージャー114を介してサムネイル像V130を取得し、次のステップS120(図5参照)に移る。
 サムネイル像撮像部110は、上述したように、明視野照明と暗視野照明として照明111、112を有している。それぞれの照明を用いて撮影した明視野画像V100、暗視野画像V110から得られる情報には、図8の左側に示すような差異がある。明視野照明(照明111)を用いる場合、プレパラート159の下方(プレパラート159に対してイメージャー114と反対側)からプレパラート159に光が照射される。従って、光を透過する部分であるプレパラート159上にある物体(例えば、生体標本900等)の像を取得することができる。しかし、光を透過しない部分(例えば、ラベル162)については黒く現れるので、ラベル162の像(ラベル162に表記された文字、記号、数字、コード等)を取得することができない。
 一方、暗視野照明(照明112)を用いる場合、プレパラート159は、プレパラート159の上方から照明される。このとき、イメージャー114により撮影された暗視野画像V110からは、プレパラート159において光が散乱された部分の情報を取得することができる。光の散乱は、例えばカバーガラス161のエッジ等で生ずるので、暗視野画像V110には、例えば、図8の左下段に示すように、スライドガラス160上の生体標本900を覆うように載置されたカバーガラス161のエッジが白く現れる。なお、封入剤がカバーガラス161からはみ出している場合は、暗視野画像V110にはおいては、はみ出し領域が白く現れる。また、照明112は、プレパラート159の上方から照明するので、ラベル162の像(ラベル162に表記された文字、記号、数字、コード等)も取得することができる。
 なお、カバーガラス161のエッジは、ノイズであって、サムネイル像V130を作成する上で除去した方がよい情報である。そこで、本実施形態に係る画像処理部155は、明視野画像V100と暗視野画像V110とを用いることにより、カバーガラス161のエッジのようなノイズが取り除かれたサムネイル像V130(図9参照)を得ることができる。従って、本実施形態に係るスライドスキャナ100によれば、ノイズが取り除かれ明瞭になった生体標本900のサムネイル像V130を得ることができる。
 <1.8 創作するに至る背景>
 次に、図10を参照して、本発明者が本開示の実施形態を創作するに至る背景について説明する。図10は、本開示の実施形態に係る顕微鏡によるサムネイル像V130の一例を示した説明図である。
 先に説明したように、本開示の実施形態に係るスライドスキャナ100においては、スライドスキャナ100のサムネイル像撮像部110には、明視野照明としてのバックライト型照明である照明111と、暗視野照明としての落射型照明の照明112とが設けられている。そして、当該スライドスキャナ100は、サムネイル像V130の取得の際には、スライドガラス160上のカバーガラス161のエッジを検出する。この際、カバーガラス161のエッジを精度よく検出するために、エッジで光が好適に反射するようにすることが好ましい。そこで、そのようにするためには、暗視野照明としての落射型照明の照明112をプレパラート159になるべく近くなるように設けることとなる。
 しかしながら、落射型照明の照明112をプレパラート159に近づけていくと、プレパラート159の直下に位置するバックライト型の照明111の上面のパネル(拡散板)で、落射型照明の照明112の発光素子142による光が強く反射することとなる。そのため、図10に示すような、発光素子142の発光点V131が映り込んだサムネイル像V130が得られることとなる。このような場合、カバーガラス161のエッジの検出を精度よく行うことができなかったり、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することができなかったりする蓋然性が高まることとなる。
 上述のような問題を解消するためには、コントロール画像を用いた画像演算処理等を行うことが考えられるが、コントロール画像の事前準備や、処理負荷が高くなり、カバーガラス161のエッジの検出や、サムネイル像V130の取得に多くの時間を要することとなる。また、上記問題の解消のため、発光素子142の発光点V131の映り込みを防ぐために、バックライト型照明である照明111に吸収フィルタを設けることも考えられる。しかしながら、このような解決手段を選択した場合、部品点数の増加による製造コストの上昇や、吸収フィルタ(減光フィルタ)を設けることによる照明111の照射光の光量の減少といった問題が生じてしまう。
 また、一般的なバックライト型照明においては、上面のパネル(拡散板)は、所定の光透過率を確保するために、白色であることが多く、さらに、赤色、青色、又は、緑色を持つこともある。このような照明を用いたスライドスキャナ100によって暗視野画像V110を取得する場合、バックライト型照明のパネルがプレパラート159の背景となるため、パネルの色によって、背景とカバーガラス161のエッジとのコントラスト比が落ちてしまうことがある。そして、コントラスト比が落ちることにより、カバーガラス161のエッジの検出の精度が悪くなることとなる。
 このように、従来のスライドスキャナ100では、カバーガラス161のエッジの検出の精度の向上に限界があることから、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することができなかったりするといった問題があった。そして、このような場合、生体標本900以外の画像も取得してしまうのでプレパラート159のスキャン時間が増大し、さらには画像を蓄積するために大容量のストレージが必要となる。
 そこで、本発明者は、このような状況を鑑みて、バックライト型照明の照明111のパネル(拡散板)と、落射型照明の照明112の照明光との間の色彩関係に着眼し、上述のような状況を改善することが可能な、すなわち、カバーガラス161のエッジを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域(高倍率画像を取得する領域)を精度よく決定することが可能な、本開示の実施形態を独自に創作するに至った。以下、本発明者が創作した本開示の実施形態の詳細を順次説明する。
 <<2. 実施形態>>
 <2.1 詳細構成>
 まずは、図11から図14を参照して、本開示の実施形態に係る照明(明視野照明)111の詳細構成について説明する。図11は、本開示の実施形態に係る明視野照明111の構成例を示した断面図であり、図12は、色度図400を説明するための説明図である。また、図13は、本開示の実施形態に係る明視野照明111の大きさの例を示した断面図であり、図14は、本開示の実施形態に係る明視野照明111の輝度分布の結果を説明する説明図である。
 図11に示すように、照明(明視野照明)111は、直下型バックライトであり、筐体200と、筐体200の底面にあたる基板202上にマウントされた複数の発光素子242とを有する。さらに、照明111は、複数の発光素子242の上方に設けられ、各発光素子242からの光を筐体200の外部へ出射する、照明111の光出射面となる拡散板(光拡散板)250と、筐体200の側面の内側の少なくとも一部を覆う反射フィルム(光反射材)260とを有する。以下、照明111を構成する各要素について順次説明する。
 (発光素子242)
 発光素子242は、電圧を印加することにより発光する発光ダイオード、又は、レーザダイオードである。複数の発光素子242が、基板202上にアレイ状にマウントされることにより、照明(明視野照明)111の光出射面(拡散板面)での面内輝度分布を均一化することができる。なお、本実施形態においては、発光素子242は、ランプ光源(ハロゲンランプやキセノンランプ)であってもよい。
 (拡散板250)
 拡散板250は、発光素子242からの光を透過しつつ、拡散することができる、例えばアクリル系光透過パネルであり、照明111の光出射面となる。このような拡散板250を用いることにより、照明111の光出射面での面内輝度分布を均一化することができる。なお、本実施形態においては、拡散板250として、所定の波長帯域の光を遮光する遮光板、又は、透過する光量を減らす減光フィルタを用いてもよい。
 さらに、本実施形態においては、拡散板250の色(すなわち、光出射面の色)を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にする。このようにすることにより、2つの光により無彩色(白色)となることから、サムネイル像V130に発光素子142の発光点V131が映り込むことを防ぐことができる。
 図12には、国際照明委員会(CIE)で定めたCIE標準表色系であるXYZ表色系(CIE1931)に基づく、(x、y)座標空間で色を表現した色度図400が示されている。また、当該色度図400においては、図12中の中央に位置する点402は、白色(無彩色)に対応する白点と呼ばれ、座標(x=0.33、y=0.33)で示される。
 このような色度図400を用いて、上述の補色の関係を説明すると、色度図400において、白色点402を対称中心として、互いに点対称の位置にある色の関係を補色の関係という。従って、本実施形態においては、拡散板250の色を、照明(暗視野照明)112の暗視野照明光の色に対して上述のような補色の関係にある色とする。
 具体的には、例えば、図12の星印410は、赤色に対応する赤色点410であり、色度図400上の座標(x=0.65、y=0.3)で示される。そして、赤色点410に対して点対称となる星印420は、緑色に対応する緑色点420となり、色度図400上の座標(x=0.05、y=0.35)で示される。従って、本実施形態においては、例えば、照明(暗視野照明)112の暗視野照明光を色度図400上の座標(x=0.65、y=0.3)に対応する赤色光とした場合には、拡散板250(光出射面)の色を、色度図400上の座標(x=0.05、y=0.35)に対応する緑色とする。なお、本実施形態においては、スライドスキャナ100の使用及び製造の観点から、拡散板250の色は、色度図400上、照明(暗視野照明)112の暗視野照明光の色に対して、幾何学的に点対称となる位置の座標にある色であることに限定されるものではなく、幾何学的に点対称となる位置の座標に対して、x、y座標それぞれが±10%程度以内となる座標を持つ範囲に含まれる色であればよい。
 ただし、本実施形態においては、照明(暗視野照明)112の暗視野照明光を白色光とした場合には、拡散板250(光出射面)の色は黒色とする。
 このように、本実施形態においては、拡散板250の色を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にすることにより、サムネイル像V130に発光素子142の発光点V131が映り込むことを防ぐことができる。さらに、本実施形態においては、カバーガラス161のエッジを光らせる照明(暗視野照明)112の暗視野照明光の色と、プレパラート159の背景となる照明(明視野照明)111の拡散板250の色とが、補色の関係になることにより、コントラスト比が向上する。その結果、本実施形態によれば、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 (反射フィルム260)
 反射フィルム260は、発光素子242からの光を反射することができる反射材である。本実施形態においては、このような反射フィルム260で筐体200の側面の内部の一部を覆うことにより、発光素子242からの光を筐体200内部で複数回反射させて筐体200の外部へ出射することができる。従って、本実施形態によれば、照明(明視野照明)111の光出射面(拡散板面)での面内輝度分布を均一化することができる。なお、本実施形態においては、反射フィルム260は、反射コート、又は、光学ミラーであってもよい。
 さらに、本実施形態においては、照明(明視野照明)111の拡散板250面(光出射面)の大きさは、プレパラート159の背景の全面が、当該の拡散板250面となるように、イメージャー114の画角で定義される面積を持つことが好ましい。すなわち、本実施形態においては、拡散板250面(光出射面)は、イメージャー114の画角と同じ、又は、当該画角よりも広い面積を有することが好ましい。このようにすることで、プレパラート159(詳細には、生体標本900やカバーガラス161のエッジ)の全体の像と背景とのコントラスト比を適切なものとすることができる。その結果、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 詳細には、図13に示されるように、イメージャー114と照明(明視野照明)111との間の距離をLとし、イメージャー114の画角をαとした場合、拡散板250の一辺の長さWは、以下の数式(1)の関係を持つように決定されることが好ましい。
Figure JPOXMLDOC01-appb-M000002
 このようにすることで、プレパラート159の背景の全面が、当該の拡散板250面とすることができる。このようにすることで、本実施形態によれば、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 なお、本開示の実施形態においては、照明111の形態は、図11及び図13に示される例はその一例であり、これらの図に示される形態に限定されるものではない。
 また、本実施形態に係る照明111では、各発光素子242からの光が筐体200内部で反射フィルム260によって数回反射されて、拡散板250で拡散されて、筐体200の外部へ出射される。従って、本実施形態では、図14の左側に示すように、照明111の光出射面(拡散板250面)での面内輝度分布が均一化されている。一方、図14の右側に示される従来技術に係る照明では、より均一化するための要素を含まないことから、照明の光出射面での面内輝度分布が、特に外周部近傍において均一化されていない。
 以上のように、本実施形態においては、拡散板250の色を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にすることにより、サムネイル像V130に発光素子142の発光点V131が映り込むことを防ぐことができる。さらに、本実施形態においては、カバーガラス161のエッジを光らせる照明(暗視野照明)112の暗視野照明光の色と、プレパラート159の背景となる照明(明視野照明)111の拡散板250の色とが、補色の関係になることにより、コントラスト比が向上する。その結果、本実施形態によれば、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 <2.2 変形例>
 本開示の実施形態に係る照明(明視野照明)111は、上述したような直下型バックライトであることに限定されるものではなく、エッジ型バックライトであってもよい。そこで、このようなエッジ型バックライトに関する本開示の実施形態の変形例を、図15を参照して説明する。図15は、本開示の実施形態の変形例に係る明視野照明111aの構成例を示した断面図である。
 図15に示すように、本変形例に係る照明(明視野照明)111aは、エッジ型バックライトであり、筐体200と、筐体200の側面にあたる基板202上にマウントされた発光素子242と、筐体200内部に設けられ、照明111aの端部に設けられた発光素子242からの光を筐体200内部へ導く導光板270とを有する。さらに、照明111aは、当該導光板270の上方に設けられ、照明111aの光出射面となる拡散板(光拡散板)250と、筐体200の側面の内側の少なくとも一部を覆う反射フィルム(光反射材)260とを有する。以下、照明111aを構成する各要素について順次説明するが、既に説明した本実施形態と共通する部分については、その説明を省略する。
 (発光素子242)
 本変形例においても、発光素子242として、発光ダイオード、レーザダイオード、又は、ランプ光源(ハロゲンランプやキセノンランプ)を用いることができる。ただし、本変形例においては、発光素子242は、筐体200の底面ではなく、筐体200の1つ又は複数の側面に、1つ又は複数個設けられる。本変形例においては、本実施形態に係る直下型バックライトと異なり、発光素子242の数を減らすことができることから、照明111aによる消費電力の増加を抑えることができる。
 (拡散板250)
 拡散板250は、照明111aの光出射面であり、本変形例においても、拡散板250としては、光透過パネルであり、所定の波長帯域の光を遮光する遮光板、又は、透過する光量を減らす減光フィルタを用いることができる。さらに、本変形例においても、拡散板250の色(すなわち、光出射面の色)を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にする。
 (反射フィルム260)
 反射フィルム260は、発光素子242からの光、さらには、導光板270からの光を反射することができる反射材である。本変形例においても、反射フィルム260は、反射コート、又は、光学ミラーであってもよい。
 (導光板270)
 導光板270筐体200内部に設けられ、照明111aの端部に設けられた発光素子242からの光を筐体200内部へ導くことができる。詳細には、導光板270は、その上面、側面や底面で発光素子242からの光の反射を繰り返し、導光板270の全体に光を導くことができる。また、一部の光は、その上面、側面や底面で反射されることなく、導光板270の外部へ出射するが、これら光は、上述の反射フィルム260で反射されたりすることで、拡散板250を介して、筐体200の外部へ出射されることとなる。
 本変形例においては、このような導光板270を用いることにより、少ない発光素子242であっても、筐体200全体に光を導くことができる。従って、本変形例においても、照明(明視野照明)111aの光出射面(拡散板面)での面内輝度分布を均一化することができる。
 さらに、本変形例においても、照明(明視野照明)111aの拡散板250面(光出射面)の大きさは、プレパラート159の背景の全面が、当該の拡散板250面となるように、イメージャー114の画角で定義される面積を持つことが好ましい。
 なお、本変形例においては、照明111aの形態は、図15に示される例はその一例であり、図15に示される形態に限定されるものではない。
 本変形例においても、拡散板250の色を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にすることにより、サムネイル像V130に発光素子142の発光点V131が映り込むことを防ぐことができる。さらに、本変形例においては、カバーガラス161のエッジを光らせる照明(暗視野照明)112の暗視野照明光の色と、プレパラート159の背景となる照明(明視野照明)111の拡散板250の色とが、補色の関係になることにより、コントラスト比が向上する。その結果、本変形例によれば、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 <<3. まとめ>>
 以上のように、本開示の実施形態においては、拡散板250の色を、照明(暗視野照明)112の暗視野照明光の色に対して補色の関係にある色にすることにより、サムネイル像V130に発光素子142の発光点V131が映り込むことを防ぐことができる。さらに、本実施形態においては、カバーガラス161のエッジを光らせる照明(暗視野照明)112の暗視野照明光の色と、プレパラート159の背景となる照明(明視野照明)111の拡散板250の色とが、補色の関係になることにより、コントラスト比が向上する。その結果、本実施形態によれば、カバーガラス161のエッジの全てを精度よく検出し、生体標本900の拡大像を取得する拡大部位像取得領域を精度よく決定することが可能となる。
 なお、本実施形態に係る照明111は、上述のようなスライドスキャナ100に適用されることに限定されるものではなく、例えば、対物レンズ(図示省略)や接眼レンズ(図示省略)と組み合わされて光学顕微鏡(図示省略)の照明装置として用いられてもよい。例えば、このような光学顕微鏡は、観察対象と背景とコントラスト比が良好であるため、生体標本900の観察のほかにも、生体標本900等から発せられる蛍光を観察したり、製品の検査等(工業用顕微鏡)に用いられたりすることができる。
 また、上述した本開示の実施形態においては、観察対象は、生体標本900に限定されるものではない。また、上述した本開示の実施形態は、医療又は研究等の用途へ適用することに限定されるものではなく、画像を用いて高精度の解析等を行うことが求められるような工業用顕微鏡等の用途であってもよく、特に限定されるものではない。
 <<4. 応用例>>
 本開示の実施形態に係るスライドスキャナ100を適用可能な顕微鏡システム(生体標本観察システム)の詳細構成を説明する。当該顕微鏡システム(生体標本観察システム)の構成例を図16に示す。図16に示される顕微鏡システム5000は、顕微鏡装置5100、制御部5110、及び情報処理部5120を含む。顕微鏡装置5100は、光照射部5101、光学部5102、及び信号取得部5103を備えている。顕微鏡装置5100はさらに、生体由来試料Sが配置される試料載置部5104を備えていてよい。なお、顕微鏡装置の構成は図16に示されるものに限定されず、例えば、光照射部5101は、顕微鏡装置5100の外部に存在してもよく、例えば顕微鏡装置5100に含まれない光源が光照射部5101として利用されてもよい。また、光照射部5101は、光照射部5101と光学部5102とによって試料載置部5104が挟まれるように配置されていてよく、例えば、光学部5102が存在する側に配置されてもよい。顕微鏡装置5100は、明視野観察、位相差観察、微分干渉観察、偏光観察、蛍光観察、及び暗視野観察のうちの1又は2以上を実行することができるように構成されてよい。
 顕微鏡システム5000は、いわゆるWSI(Whole Slide Imaging)システム又はデジタルパソロジーイメージングシステムとして構成されてよく、病理診断のために用いられうる。また、顕微鏡システム5000は、蛍光イメージングシステム、特には多重蛍光イメージングシステムとして構成されてもよい。
 例えば、顕微鏡システム5000は、術中病理診断又は遠隔病理診断を行うために用いられてよい。当該術中病理診断では、手術が行われている間に、顕微鏡装置5100が、当該手術の対象者から取得された生体由来試料Sのデータを取得し、そして、当該データを情報処理部5120へと送信しうる。当該遠隔病理診断では、顕微鏡装置5100は、取得した生体由来試料Sのデータを、顕微鏡装置5100とは離れた場所(別の部屋又は建物など)に存在する情報処理部5120へと送信しうる。そして、これらの診断において、情報処理部5120は、当該データを受信し、出力する。出力されたデータに基づき、情報処理部5120のユーザが、病理診断を行いうる。
 (生体由来試料)
 生体由来試料Sは、生体成分を含む試料であってよい。前記生体成分は、生体の組織、細胞、生体の液状成分(血液や尿等)、培養物、又は生細胞(心筋細胞、神経細胞、及び受精卵など)であってよい。前記生体由来試料は、固形物であってよく、パラフィンなどの固定試薬によって固定された標本又は凍結により形成された固形物であってよい。前記生体由来試料は、当該固形物の切片でありうる。前記生体由来試料の具体的な例として、生検試料の切片を挙げることができる。
 前記生体由来試料は、染色又は標識などの処理が施されたものであってよい。当該処理は、生体成分の形態を示すための又は生体成分が有する物質(表面抗原など)を示すための染色であってよく、HE(Hematoxylin-Eosin)染色、免疫組織化学(Immunohistochemistry)染色を挙げることができる。前記生体由来試料は、1又は2以上の試薬により前記処理が施されたものであってよく、当該試薬は、蛍光色素、発色試薬、蛍光タンパク質、又は蛍光標識抗体でありうる。
 前記標本は、組織サンプルから病理診断または臨床検査などを目的に作製されたものであってよい。また、前記標本は、人体に限らず、動物、植物、又は他の材料に由来するものであってもよい。前記標本は、使用される組織(例えば臓器または細胞など)の種類、対象となる疾病の種類、対象者の属性(例えば、年齢、性別、血液型、または人種など)、または対象者の生活習慣(例えば、食生活、運動習慣、または喫煙習慣など)などにより性質が異なる。前記標本は、各標本それぞれ識別可能な識別情報(バーコード又はQRコード(登録商標)等)を付されて管理されてよい。
 (光照射部)
 光照射部5101は、生体由来試料Sを照明するための光源、および光源から照射された光を標本に導く光学部である。光源は、可視光、紫外光、若しくは赤外光、又はこれらの組合せを生体由来試料に照射しうる。光源は、ハロゲン光源、レーザ光源、LED光源、水銀光源、及びキセノン光源のうちの1又は2以上であってよい。蛍光観察における光源の種類、及び/又は、波長は、複数でもよく、当業者により適宜選択されてよい。光照射部は、透過型、反射型又は落射型(同軸落射型若しくは側射型)の構成を有しうる。
 (光学部)
 光学部5102は、生体由来試料Sからの光を信号取得部5103へと導くように構成される。光学部は、顕微鏡装置5100が生体由来試料Sを観察又は撮像することを可能とするように構成されうる。光学部5102は、対物レンズを含みうる。対物レンズの種類は、観察方式に応じて当業者により適宜選択されてよい。また、光学部は、対物レンズによって拡大された像を信号取得部に中継するためのリレーレンズを含んでもよい。光学部は、前記対物レンズ及び前記リレーレンズ以外の光学部品、接眼レンズ、位相板、及びコンデンサレンズなど、をさらに含みうる。また、光学部5102は、生体由来試料Sからの光のうちから所定の波長を有する光を分離するように構成された波長分離部をさらに含んでよい。波長分離部は、所定の波長又は波長範囲の光を選択的に信号取得部に到達させるように構成されうる。波長分離部は、例えば、光を選択的に透過させるフィルタ、偏光板、プリズム(ウォラストンプリズム)、及び回折格子のうちの1又は2以上を含んでよい。波長分離部に含まれる光学部品は、例えば対物レンズから信号取得部までの光路上に配置されてよい。波長分離部は、蛍光観察が行われる場合、特に励起光照射部を含む場合に、顕微鏡装置内に備えられる。波長分離部は、蛍光同士を互いに分離し又は白色光と蛍光とを分離するように構成されうる。
 (信号取得部)
 信号取得部5103は、生体由来試料Sからの光を受光し、当該光を電気信号、特にはデジタル電気信号へと変換することができるように構成されうる。信号取得部は、当該電気信号に基づき、生体由来試料Sに関するデータを取得することができるように構成されてよい。信号取得部は、生体由来試料Sの像(画像、特には静止画像、タイムラプス画像、又は動画像)のデータを取得することができるように構成されてよく、特に光学部によって拡大された画像のデータを取得するように構成されうる。信号取得部は、1次元又は2次元に並んで配列された複数の画素を備えている1つ又は複数の撮像素子、CMOS又はCCDなど、を含む。信号取得部は、低解像度画像取得用の撮像素子と高解像度画像取得用の撮像素子とを含んでよく、又は、AFなどのためのセンシング用撮像素子と観察などのための画像出力用撮像素子とを含んでもよい。撮像素子は、前記複数の画素に加え、各画素からの画素信号を用いた信号処理を行う信号処理部(CPU、DSP、及びメモリのうちの1つ、2以上を含む)、及び、画素信号から生成された画像データ及び信号処理部により生成された処理データの出力の制御を行う出力制御部を含みうる。前記複数の画素、前記信号処理部、及び前記出力制御部を含む撮像素子は、好ましくは1チップの半導体装置として構成されうる。なお、顕微鏡システム5000は、イベント検出センサをさらに具備してもよい。当該イベント検出センサは、入射光を光電変換する画素を含み、当該画素の輝度変化が所定の閾値を超えたことをイベントとして検出するように構成されうる。当該イベント検出センサは、特には非同期型でありうる。
 (制御部)
 制御部5110は、顕微鏡装置5100による撮像を制御する。制御部は、撮像制御のために、光学部5102、及び/又は、試料載置部5104の移動を駆動して、光学部と試料載置部との間の位置関係を調節しうる。制御部5110は、光学部、及び/又は、試料載置部を、互いに近づく又は離れる方向(例えば対物レンズの光軸方向)に移動させうる。また、制御部は、光学部、及び/又は、試料載置部を、前記光軸方向と垂直な面におけるいずれかの方向に移動させてもよい。制御部は、撮像制御のために、光照射部5101、及び/又は、信号取得部5103を制御してもよい。
 (試料載置部)
 試料載置部5104は、生体由来試料の試料載置部上における位置が固定できるように構成されてよく、いわゆるステージであってよい。試料載置部5104は、生体由来試料の位置を、対物レンズの光軸方向、及び/又は、当該光軸方向と垂直な方向に移動させることができるように構成されうる。
 (情報処理部)
 情報処理部5120は、顕微鏡装置5100が取得したデータ(撮像データなど)を、顕微鏡装置5100から取得しうる。情報処理部は、撮像データに対する画像処理を実行しうる。当該画像処理は、アンミキシング処理、特にはスペクトラルアンミキシング処理を含んでよい。当該アンミキシング処理は、撮像データから所定の波長又は波長範囲の光成分のデータを抽出して画像データを生成する処理、又は、撮像データから所定の波長又は波長範囲の光成分のデータを除去する処理などを含みうる。また、当該画像処理は、組織切片の自家蛍光成分と色素成分を分離する自家蛍光分離処理や互いに蛍光波長が異なる色素間の波長を分離する蛍光分離処理を含みうる。前記自家蛍光分離処理では、同一ないし性質が類似する前記複数の標本のうち、一方から抽出された自家蛍光シグナルを用いて他方の標本の画像情報から自家蛍光成分を除去する処理を行ってもよい。情報処理部5120は、制御部5110に撮像制御のためのデータを送信してよく、当該データを受信した制御部5110が、当該データに従い顕微鏡装置5100による撮像を制御してもよい。
 情報処理部5120は、汎用のコンピュータなどの情報処理装置として構成されてよく、CPU、RAM、及びROMを備えていてよい。情報処理部は、顕微鏡装置5100の筐体内に含まれていてよく、又は、当該筐体の外にあってもよい。また、情報処理部による各種処理又は機能は、ネットワークを介して接続されたサーバコンピュータ又はクラウドにより実現されてもよい。
 顕微鏡装置5100による生体由来試料Sの撮像の方式は、生体由来試料の種類及び撮像の目的などに応じて、当業者により適宜選択されてよい。当該撮像方式の例を以下に説明する。
 撮像方式の一つの例は以下のとおりである。顕微鏡装置は、まず、撮像対象領域を特定しうる。当該撮像対象領域は、生体由来試料が存在する領域全体をカバーするように特定されてよく、又は、生体由来試料のうちの目的部分(目的組織切片、目的細胞、又は目的病変部が存在する部分)をカバーするように特定されてもよい。次に、顕微鏡装置は、当該撮像対象領域を、所定サイズの複数の分割領域へと分割し、顕微鏡装置は各分割領域を順次撮像する。これにより、各分割領域の画像が取得される。図17に示されるように、顕微鏡装置は、生体由来試料S全体をカバーする撮像対象領域Rを特定する。そして、顕微鏡装置は、撮像対象領域Rを16の分割領域へと分割する。そして、顕微鏡装置は分割領域R1の撮像を行い、そして次に、その分割領域R1に隣接する領域など、撮像対象領域Rに含まれる領域の内いずれか領域を撮像しうる。そして、未撮像の分割領域がなくなるまで、分割領域の撮像が行われる。なお、撮像対象領域R以外の領域についても、分割領域の撮像画像情報に基づき、撮像しても良い。或る分割領域を撮像した後に次の分割領域を撮像するために、顕微鏡装置と試料載置部との位置関係が調整される。当該調整は、顕微鏡装置の移動、試料載置部の移動、又は、これらの両方の移動により行われてよい。この例において、各分割領域の撮像を行う撮像装置は、2次元撮像素子(エリアセンサ)、又は、1次元撮像素子(ラインセンサ)であってよい。信号取得部は、光学部を介して各分割領域を撮像してよい。また、各分割領域の撮像は、顕微鏡装置、及び/又は、試料載置部を移動させながら連続的に行われてよく、又は、各分割領域の撮像に際して顕微鏡装置、及び/又は、試料載置部の移動が停止されてもよい。各分割領域の一部が重なり合うように、前記撮像対象領域の分割が行われてよく、又は、重なり合わないように前記撮像対象領域の分割が行われてもよい。各分割領域は、焦点距離、及び/又は、露光時間などの撮像条件を変えて複数回撮像されてもよい。また、情報処理装置は、隣り合う複数の分割領域をスティッチングして、より広い領域の画像データを生成しうる。当該スティッチング処理を、撮像対象領域全体にわたって行うことで、撮像対象領域について、より広い領域の画像を取得することができる。また、分割領域の画像、またはスティッチング処理を行った画像から、より解像度の低い画像データを生成しうる。
 撮像方式の他の例は以下のとおりである。顕微鏡装置は、まず、撮像対象領域を特定しうる。当該撮像対象領域は、生体由来試料が存在する領域全体をカバーするように特定されてよく、又は、生体由来試料のうちの目的部分(目的組織切片又は目的細胞が存在する部分)をカバーするように特定されてもよい。次に、顕微鏡装置は、撮像対象領域の一部の領域(「分割スキャン領域」ともいう)を、光軸と垂直な面内における一つの方向(「スキャン方向」ともいう)へスキャンして撮像する。当該分割スキャン領域のスキャンが完了したら、次に、前記スキャン領域の隣の分割スキャン領域を、スキャンする。これらのスキャン動作が、撮像対象領域全体が撮像されるまで繰り返される。図18に示されるように、顕微鏡装置は、生体由来試料Sのうち、組織切片が存在する領域(グレーの部分)を撮像対象領域Saとして特定する。そして、顕微鏡装置は、撮像対象領域Saのうち、分割スキャン領域Rsを、Y軸方向へスキャンする。顕微鏡装置は、分割スキャン領域Rsのスキャンが完了したら、次に、X軸方向における隣の分割スキャン領域をスキャンする。撮像対象領域Saの全てについてスキャンが完了するまで、この動作が繰り返しされる。各分割スキャン領域のスキャンのために、及び、或る分割スキャン領域を撮像した後に次の分割スキャン領域を撮像するために、顕微鏡装置と試料載置部との位置関係が調整される。当該調整は、顕微鏡装置の移動、試料載置部の移動、又は、これらの両方の移動により行われてよい。この例において、各分割スキャン領域の撮像を行う撮像装置は、1次元撮像素子(ラインセンサ)又は2次元撮像素子(エリアセンサ)であってよい。信号取得部は、拡大光学系を介して各分割領域を撮像してよい。また、各分割スキャン領域の撮像は、顕微鏡装置、及び/又は、試料載置部を移動させながら連続的に行われてよい。各分割スキャン領域の一部が重なり合うように、前記撮像対象領域の分割が行われてよく、又は、重なり合わないように前記撮像対象領域の分割が行われてもよい。各分割スキャン領域は、焦点距離、及び/又、は露光時間などの撮像条件を変えて複数回撮像されてもよい。また、情報処理装置は、隣り合う複数の分割スキャン領域をスティッチングして、より広い領域の画像データを生成しうる。当該スティッチング処理を、撮像対象領域全体にわたって行うことで、撮像対象領域について、より広い領域の画像を取得することができる。また、分割スキャン領域の画像、またはスティッチング処理を行った画像から、より解像度の低い画像データを生成しうる。
 <<5. 補足>>
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 なお、先に説明した本開示の実施形態においては、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 なお、本技術は以下のような構成も取ることができる。
(1)
 スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
 前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
 前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
 前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
 を備え、
 前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、
 生体標本観察装置。
(2)
 前記明視野照明の前記光出射面は、色度図において、白色点を対称中心として、前記暗視野照明からの前記暗視野照明光の色に対して点対称の位置にある色を持つ、上記(1)に記載の生体標本観察装置。
(3)
 前記暗視野照明光は、赤色光であり、
 前記光出射面は、緑色を持つ、
 上記(2)に記載の生体標本観察装置。
(4)
 スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
 前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
 前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
 前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
 を備え、
 前記暗視野照明からの暗視野照明光は、白色光であり、
 前記明視野照明の光出射面は、黒色を持つ、
 生体標本観察装置。
(5)
 前記明視野照明は、
 筐体と、
 前記筐体内に設けられた発光素子と、
 前記発光素子からの光を前記筐体の外部へ出射する前記光出射面としての光拡散板と、
 を有する、
 上記(1)~(4)のいずれか1つに記載の生体標本観察装置。
(6)
 前記発光素子は、発光ダイオード、レーザダイオード、又は、ランプ光源からなる、上記(5)に記載の生体標本観察装置。
(7)
 前記光拡散板は、光を透過する光透過パネル、所定の波長帯域の光を遮光する遮光板、又は、透過する光量を減らす減光フィルタからなる、上記(5)又は(6)に記載の生体標本観察装置。
(8)
 前記筐体の側壁の内側の少なくとも一部は、光反射材に覆われている、上記(5)~(7)のいずれか1つに記載の生体標本観察装置。
(9)
 前記光反射材は、反射フィルム、反射コート、又は、光学ミラーからなる、上記(8)に記載の生体標本観察装置。
(10)
 前記明視野照明は、
 前記筐体の底面にマウントされた複数の前記発光素子を有し、
 前記光拡散板は、前記複数の発光素子の上方に設けられる、
 上記(5)~(9)のいずれか1つに記載の生体標本観察装置。
(11)
 前記明視野照明は、
 前記筐体内に、前記発光素子の光を導く導光板を有し、
 前記光拡散板は、前記導光板の上方に設けられる、
 上記(5)~(9)のいずれか1つに記載の生体標本観察装置。
(12)
 前記光出射面は、前記撮像部の画角と同じ、又は、当該画角よりも広い面積を有する、上記(1)~(11)のいずれか1つに記載の生体標本観察装置。
(13)
 前記光出射面の1辺の長さWは、前記撮像部の画角をαとし、前記撮像部と前記明視野照明との間の距離をLとした場合、以下の数式(1)で示される、上記(12)に記載の生体標本観察装置。
Figure JPOXMLDOC01-appb-M000003
(14)
 前記暗視野照明は、
 前記ステージと前記撮像部との間に設けられ、
 前記撮像部側からの平面視において、前記プレパラートを取り囲む基板と、
 前記基板にマウントされた複数の発光素子と、
 前記複数の発光素子からの光を前記プレパラートに導く複数の導光管と、
 を有する、
 上記(1)~(4)のいずれか1つに記載の生体標本観察装置。
(15)
 前記スライドガラスは、前記生体標本に紐づけられた情報が表記されたラベルを有し、
 前記撮像部により取得された、前記暗視野照明により照射された前記プレパラートの暗視野画像に基づいて、前記カバーガラスのエッジと前記ラベルの表記情報とを検出する画像処理部をさらに備える、上記(14)に記載の生体標本観察装置。
(16)
 前記画像処理部は、検出された前記カバーガラスのエッジの位置に基づいて、前記明視野照明により照射された前記プレパラートの明視野画像における前記生体標本の拡大部位像取得領域を決定する、上記(15)に記載の生体標本観察装置。
(17)
 前記画像処理部は、前記暗視野画像及び前記明視野画像に基づき、サムネイル像を生成する、上記(16)に記載の生体標本観察装置。
(18)
 決定された前記拡大部位像取得領域に基づいて、前記生体標本の拡大部位像を撮像する拡大像撮像部をさらに備える、上記(16)又は(17)に記載の生体標本観察装置。
(19)
 スライドスキャナ、又は、顕微鏡である、上記(1)~(18)のいずれか1つに記載の生体標本観察装置。
(20)
 スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
 前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
 前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
 前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
 を備え、
 前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、
 生体標本観察システム。
  100  スライドスキャナ
  110  サムネイル像撮像部
  111、111a、112、121  照明
  114、124  イメージャー
  120  拡大像撮像部
  122  透過照明レンズ
  123  対物/結像レンズ
  130  ステージ
  140、202  基板
  142、242  発光素子
  144  導光管
  150  制御部
  151  ステージ駆動制御部
  152  サムネイル像撮像制御部
  153  拡大像撮像制御部
  154  位置制御部
  155  画像処理部
  156  サムネイル像取得部
  157  拡大像取得部
  158  照明制御部
  159  プレパラート
  160  スライドガラス
  161  カバーガラス
  162  ラベル
  200  筐体
  250  拡散板
  260  反射フィルム
  270  導光板
  400  色度図
  402  白色点
  410  赤色点
  420  緑色点
  900  生体標本
  V100  明視野画像
  V110  暗視野画像
  V120  算出結果
  V130  サムネイル像
  V131  発光点
  V200  拡大像
  V202  拡大部位像

Claims (20)

  1.  スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
     前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
     前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
     前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
     を備え、
     前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、
     生体標本観察装置。
  2.  前記明視野照明の前記光出射面は、色度図において、白色点を対称中心として、前記暗視野照明からの前記暗視野照明光の色に対して点対称の位置にある色を持つ、請求項1に記載の生体標本観察装置。
  3.  前記暗視野照明光は、赤色光であり、
     前記光出射面は、緑色を持つ、
     請求項2に記載の生体標本観察装置。
  4.  スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
     前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
     前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
     前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
     を備え、
     前記暗視野照明からの暗視野照明光は、白色光であり、
     前記明視野照明の光出射面は、黒色を持つ、
     生体標本観察装置。
  5.  前記明視野照明は、
     筐体と、
     前記筐体内に設けられた発光素子と、
     前記発光素子からの光を前記筐体の外部へ出射する前記光出射面としての光拡散板と、
     を有する、
     請求項1に記載の生体標本観察装置。
  6.  前記発光素子は、発光ダイオード、レーザダイオード、又は、ランプ光源からなる、請求項5に記載の生体標本観察装置。
  7.  前記光拡散板は、光を透過する光透過パネル、所定の波長帯域の光を遮光する遮光板、又は、透過する光量を減らす減光フィルタからなる、請求項5に記載の生体標本観察装置。
  8.  前記筐体の側壁の内側の少なくとも一部は、光反射材に覆われている、請求項5に記載の生体標本観察装置。
  9.  前記光反射材は、反射フィルム、反射コート、又は、光学ミラーからなる、請求項8に記載の生体標本観察装置。
  10.  前記明視野照明は、
     前記筐体の底面にマウントされた複数の前記発光素子を有し、
     前記光拡散板は、前記複数の発光素子の上方に設けられる、
     請求項5に記載の生体標本観察装置。
  11.  前記明視野照明は、
     前記筐体内に、前記発光素子の光を導く導光板を有し、
     前記光拡散板は、前記導光板の上方に設けられる、
     請求項5に記載の生体標本観察装置。
  12.  前記光出射面は、前記撮像部の画角と同じ、又は、当該画角よりも広い面積を有する、請求項1に記載の生体標本観察装置。
  13.  前記光出射面の1辺の長さWは、前記撮像部の画角をαとし、前記撮像部と前記明視野照明との間の距離をLとした場合、以下の数式(1)で示される、請求項12に記載の生体標本観察装置。
    Figure JPOXMLDOC01-appb-M000001
  14.  前記暗視野照明は、
     前記ステージと前記撮像部との間に設けられ、
     前記撮像部側からの平面視において、前記プレパラートを取り囲む基板と、
     前記基板にマウントされた複数の発光素子と、
     前記複数の発光素子からの光を前記プレパラートに導く複数の導光管と、
     を有する、
     請求項1に記載の生体標本観察装置。
  15.  前記スライドガラスは、前記生体標本に紐づけられた情報が表記されたラベルを有し、
     前記撮像部により取得された、前記暗視野照明により照射された前記プレパラートの暗視野画像に基づいて、前記カバーガラスのエッジと前記ラベルの表記情報とを検出する画像処理部をさらに備える、請求項14に記載の生体標本観察装置。
  16.  前記画像処理部は、検出された前記カバーガラスのエッジの位置に基づいて、前記明視野照明により照射された前記プレパラートの明視野画像における前記生体標本の拡大部位像取得領域を決定する、請求項15に記載の生体標本観察装置。
  17.  前記画像処理部は、前記暗視野画像及び前記明視野画像に基づき、サムネイル像を生成する、請求項16に記載の生体標本観察装置。
  18.  決定された前記拡大部位像取得領域に基づいて、前記生体標本の拡大部位像を撮像する拡大像撮像部をさらに備える、請求項16に記載の生体標本観察装置。
  19.  スライドスキャナ、又は、顕微鏡である、請求項1に記載の生体標本観察装置。
  20.  スライドガラス上に載置され、且つ、カバーガラスに覆われた生体標本からなるプレパラートを載置するステージと、
     前記プレパラートを当該プレパラートの上方から落射照明する暗視野照明と、
     前記プレパラートを当該プレパラートの下方から照明する明視野照明と、
     前記ステージに対して前記暗視野照明側に設けられ、且つ、前記暗視野照明により照射された前記プレパラートを撮像して暗視野画像を取得し、前記明視野照明により照射された前記プレパラートを撮像して明視野画像を取得する撮像部と、
     を備え、
     前記明視野照明の光出射面は、前記暗視野照明からの暗視野照明光の色に対して補色の関係にある色を持つ、
     生体標本観察システム。
PCT/JP2022/009034 2021-06-21 2022-03-03 生体標本観察装置及び生体標本観察システム WO2022270015A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021102288 2021-06-21
JP2021-102288 2021-06-21

Publications (1)

Publication Number Publication Date
WO2022270015A1 true WO2022270015A1 (ja) 2022-12-29

Family

ID=84544848

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/009034 WO2022270015A1 (ja) 2021-06-21 2022-03-03 生体標本観察装置及び生体標本観察システム

Country Status (1)

Country Link
WO (1) WO2022270015A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5767844A (en) * 1980-10-15 1982-04-24 Nippon Kogaku Kk <Nikon> Surface inspecting device
JP2003075725A (ja) * 2001-09-04 2003-03-12 Olympus Optical Co Ltd 透過照明装置
JP2007310231A (ja) * 2006-05-19 2007-11-29 Hamamatsu Photonics Kk 画像取得装置、画像取得方法、及び画像取得プログラム
JP2011070140A (ja) * 2009-08-31 2011-04-07 Sony Corp 蛍光像取得装置、蛍光像取得方法及び蛍光像取得プログラム
JP2016048394A (ja) * 2015-12-04 2016-04-07 株式会社ニコン 顕微鏡用照明装置および顕微鏡

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5767844A (en) * 1980-10-15 1982-04-24 Nippon Kogaku Kk <Nikon> Surface inspecting device
JP2003075725A (ja) * 2001-09-04 2003-03-12 Olympus Optical Co Ltd 透過照明装置
JP2007310231A (ja) * 2006-05-19 2007-11-29 Hamamatsu Photonics Kk 画像取得装置、画像取得方法、及び画像取得プログラム
JP2011070140A (ja) * 2009-08-31 2011-04-07 Sony Corp 蛍光像取得装置、蛍光像取得方法及び蛍光像取得プログラム
JP2016048394A (ja) * 2015-12-04 2016-04-07 株式会社ニコン 顕微鏡用照明装置および顕微鏡

Similar Documents

Publication Publication Date Title
US11294160B2 (en) Microscopy imaging
CN105103190B (zh) 全视野载玻片多光谱成像系统和方法
JP6416887B2 (ja) 構造化照明を用いた組織試料の顕微鏡観察
JP7167276B2 (ja) 二重光学経路および単一撮像センサを使用した低解像度スライド撮像、スライドラベル撮像および高解像度スライド撮像
US8598541B2 (en) Fluorescent image obtaining device, fluorescent image obtaining method and fluorescent image obtaining program
KR20120003376A (ko) 현미경 및 영역 판정 방법
WO2012159205A1 (en) 3d pathology slide scanner
CN102156976A (zh) 运算装置、运算方法、运算程序、以及显微镜
US20130128024A1 (en) Image obtaining apparatus, image obtaining method, and image obtaining program
CN111164484A (zh) 双程微距图像
US20240169534A1 (en) Medical image analysis device, medical image analysis method, and medical image analysis system
CN108780216B (zh) 利用散射以降低源自发荧光并改善均匀性的成像系统和方法
WO2021177446A1 (en) Signal acquisition apparatus, signal acquisition system, and signal acquisition method
WO2022270015A1 (ja) 生体標本観察装置及び生体標本観察システム
WO2022209349A1 (ja) 観察装置用照明装置、観察装置及び観察システム
WO2022209262A1 (ja) 生体試料観察装置用照明装置、生体試料観察装置、観察装置用照明装置及び観察システム
US11335454B2 (en) Biopsy device for digital pathology and artificial intelligent analytics
US20230085045A1 (en) Microscope for high-resolution and specific analysis of biological substances, and method of analysis
US20240152692A1 (en) Information processing device, information processing method, information processing system, and conversion model
WO2022181263A1 (ja) 医療用画像処理装置、医療用画像処理方法、及びプログラム
WO2023157756A1 (ja) 情報処理装置、生体試料解析システム及び生体試料解析方法
WO2023189393A1 (ja) 生体試料観察システム、情報処理装置及び画像生成方法
WO2022201992A1 (ja) 医療用画像解析装置、医療用画像解析方法及び医療用画像解析システム
WO2023276219A1 (ja) 情報処理装置、生体試料観察システム及び画像生成方法
Tran et al. Mobile Fluorescence Imaging and Protein Crystal Recognition

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22827936

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22827936

Country of ref document: EP

Kind code of ref document: A1