CN102004305A - 组织切片图像获取和显示设备、方法和程序 - Google Patents
组织切片图像获取和显示设备、方法和程序 Download PDFInfo
- Publication number
- CN102004305A CN102004305A CN2010102627442A CN201010262744A CN102004305A CN 102004305 A CN102004305 A CN 102004305A CN 2010102627442 A CN2010102627442 A CN 2010102627442A CN 201010262744 A CN201010262744 A CN 201010262744A CN 102004305 A CN102004305 A CN 102004305A
- Authority
- CN
- China
- Prior art keywords
- histotomy
- image
- dark field
- field image
- bright field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title abstract description 32
- 238000012937 correction Methods 0.000 claims description 31
- 238000012856 packing Methods 0.000 claims description 6
- 239000003607 modifier Substances 0.000 abstract 1
- 238000006073 displacement reaction Methods 0.000 description 31
- 239000007850 fluorescent dye Substances 0.000 description 26
- 230000008569 process Effects 0.000 description 23
- 238000000605 extraction Methods 0.000 description 22
- 238000004043 dyeing Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 19
- 210000001519 tissue Anatomy 0.000 description 18
- 238000003384 imaging method Methods 0.000 description 15
- 230000003287 optical effect Effects 0.000 description 14
- 239000000523 sample Substances 0.000 description 14
- 238000003860 storage Methods 0.000 description 14
- 239000000284 extract Substances 0.000 description 9
- 230000008878 coupling Effects 0.000 description 8
- 238000010168 coupling process Methods 0.000 description 8
- 238000005859 coupling reaction Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 230000005284 excitation Effects 0.000 description 8
- FWBHETKCLVMNFS-UHFFFAOYSA-N 4',6-Diamino-2-phenylindol Chemical compound C1=CC(C(=N)N)=CC=C1C1=CC2=CC=C(C(N)=N)C=C2N1 FWBHETKCLVMNFS-UHFFFAOYSA-N 0.000 description 7
- 230000005484 gravity Effects 0.000 description 7
- 101150029707 ERBB2 gene Proteins 0.000 description 6
- 238000003745 diagnosis Methods 0.000 description 6
- 108020004487 Satellite DNA Proteins 0.000 description 5
- 239000003153 chemical reaction reagent Substances 0.000 description 5
- 238000010827 pathological analysis Methods 0.000 description 5
- 201000011510 cancer Diseases 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 4
- KPHWPUGNDIVLNH-UHFFFAOYSA-M diclofenac sodium Chemical compound [Na+].[O-]C(=O)CC1=CC=CC=C1NC1=C(Cl)C=CC=C1Cl KPHWPUGNDIVLNH-UHFFFAOYSA-M 0.000 description 4
- 239000000975 dye Substances 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000004040 coloring Methods 0.000 description 2
- 239000000428 dust Substances 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000003364 immunohistochemistry Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 210000004940 nucleus Anatomy 0.000 description 2
- 230000000505 pernicious effect Effects 0.000 description 2
- 238000004321 preservation Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 102000004190 Enzymes Human genes 0.000 description 1
- 108090000790 Enzymes Proteins 0.000 description 1
- 101500025419 Homo sapiens Epidermal growth factor Proteins 0.000 description 1
- 101001012157 Homo sapiens Receptor tyrosine-protein kinase erbB-2 Proteins 0.000 description 1
- 102100030086 Receptor tyrosine-protein kinase erbB-2 Human genes 0.000 description 1
- 230000009102 absorption Effects 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 230000002759 chromosomal effect Effects 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 239000006059 cover glass Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 229940116978 human epidermal growth factor Drugs 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007901 in situ hybridization Methods 0.000 description 1
- 210000002415 kinetochore Anatomy 0.000 description 1
- 238000002386 leaching Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- GVUGOAYIVIDWIO-UFWWTJHBSA-N nepidermin Chemical compound C([C@@H](C(=O)N[C@@H]([C@@H](C)CC)C(=O)NCC(=O)N[C@@H](CCC(O)=O)C(=O)N[C@@H](CCCNC(N)=N)C(=O)N[C@@H](CS)C(=O)N[C@@H](CCC(N)=O)C(=O)N[C@@H](CC=1C=CC(O)=CC=1)C(=O)N[C@@H](CCCNC(N)=N)C(=O)N[C@@H](CC(O)=O)C(=O)N[C@@H](CC(C)C)C(=O)N[C@@H](CCCCN)C(=O)N[C@@H](CC=1C2=CC=CC=C2NC=1)C(=O)N[C@@H](CC=1C2=CC=CC=C2NC=1)C(=O)N[C@@H](CCC(O)=O)C(=O)N[C@@H](CC(C)C)C(=O)N[C@@H](CCCNC(N)=N)C(O)=O)NC(=O)CNC(=O)[C@@H](NC(=O)[C@@H](NC(=O)[C@H](CS)NC(=O)[C@H](CC(N)=O)NC(=O)[C@H](CS)NC(=O)[C@H](C)NC(=O)[C@H](CC=1C=CC(O)=CC=1)NC(=O)[C@H](CCCCN)NC(=O)[C@H](CC(O)=O)NC(=O)[C@H](CC(C)C)NC(=O)[C@H](C)NC(=O)[C@H](CCC(O)=O)NC(=O)[C@@H](NC(=O)[C@H](CC=1C=CC(O)=CC=1)NC(=O)[C@H](CCSC)NC(=O)[C@H](CS)NC(=O)[C@@H](NC(=O)CNC(=O)[C@H](CC(O)=O)NC(=O)[C@H](CC=1NC=NC=1)NC(=O)[C@H](CC(C)C)NC(=O)[C@H](CS)NC(=O)[C@H](CC=1C=CC(O)=CC=1)NC(=O)CNC(=O)[C@H](CC(O)=O)NC(=O)[C@H](CC=1NC=NC=1)NC(=O)[C@H](CO)NC(=O)[C@H](CC(C)C)NC(=O)[C@H]1N(CCC1)C(=O)[C@H](CS)NC(=O)[C@H](CCC(O)=O)NC(=O)[C@H](CO)NC(=O)[C@H](CC(O)=O)NC(=O)[C@H](CO)NC(=O)[C@@H](N)CC(N)=O)C(C)C)[C@@H](C)CC)C(C)C)C(C)C)C1=CC=C(O)C=C1 GVUGOAYIVIDWIO-UFWWTJHBSA-N 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 102000004169 proteins and genes Human genes 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010186 staining Methods 0.000 description 1
- 230000004304 visual acuity Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/174—Segmentation; Edge detection involving the use of two or more images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/245—Aligning, centring, orientation detection or correction of the image by locating a pattern; Special marks for positioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/693—Acquisition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N1/00—Sampling; Preparing specimens for investigation
- G01N1/28—Preparing specimens for investigation including physical details of (bio-)chemical methods covered elsewhere, e.g. G01N33/50, C12Q
- G01N1/30—Staining; Impregnating ; Fixation; Dehydration; Multistep processes for preparing samples of tissue, cell or nucleic acid material and the like for analysis
- G01N1/31—Apparatus therefor
- G01N1/312—Apparatus therefor for samples mounted on planar substrates
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/34—Microscope slides, e.g. mounting specimens on microscope slides
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
Abstract
本发明提供了组织切片图像获取和显示设备、方法和程序。组织切片图像获取和显示设备包括:整体图像获取部,获取组织的第一切片的整体的明视场图像和组织的第二切片的整体的暗视场图像;修正部,基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状;放大图像获取部,基于所修正的切片部分的外形形状,确定包围第二切片的范围,并且在暗视场中在所确定的范围内获取第二切片的放大图像;以及显示控制部,显示明视场图像并显示放大图像的一部分,该部分对应于在明视场图像中选择的位置相应。
Description
相关申请的交叉引用
本申请包含于2009年8月31日向日本专利局提交的日本优先权专利申请JP 2009-200892中所公开的主题,其全部内容结合于此作为参考。
技术领域
本发明涉及一种组织切片图像获取和显示设备、组织切片图像获取和显示方法以及组织切片图像获取和显示程序,优选地,其应用于例如,组织切片观察领域。
背景技术
将病理学领域中使用的组织切片固定至载玻片,并对其进行预定染色。通常,当长时间保存组织切片时,会出现组织切片的劣化、对组织切片施加的染色褪色等,从而组织切片在显微镜下的可见度降低。可能在除了制备组织切片的医院等的其他机构诊断组织切片,通常通过邮政和快递服务来运送组织切片,这会花费一定的时间。
考虑到这种情况,已经提出了一种将组织切片存储为图像数据的设备(例如,参考日本未审查专利申请公开第2003-222801号)。
发明内容
在病理学诊断中,从形态学的观点,使用受到HE(苏木紫-伊红)染色的组织切片来进行存在/不存在恶性肿瘤的初步判断。当发现恶性肿瘤或疑似恶性的部分时,通过使用从与进行HE染色的组织切片相同的组织块取样的并且受到荧光染色的组织切片,从分子生物学的观点进行对恶性肿瘤的存在/不存在、其类型以及发展程度等的二次判断。
在病理诊断中,使用通过以一定放大倍率放大的组织切片而获得的高清晰度图像。例如,用于获得高清晰度放大图像的设备获取放置有组织切片的载玻片的整体的图像,并且基于整体图像中所示的组织切片部分的外形形状,确定放置有组织切片的区域。然后,该设备将特定区域分配给多个子区域,随后,在子区域中获得组织切片部分的图像,并组合所获得的图像以获取高分辨率放大图像。
然而,由于荧光染色组织切片在未激励状时是无色且透明的,所以很难定位载玻片上未被激励的荧光染色组织切片。
因此,一种可能的方法是,通过激励载玻片上的荧光染色组织切片来获取载玻片的整体的图像,并基于整体图像定位组织切片的区域。
然而,借助于该方法,难以获取具有足够亮度的组织切片的图像,因为荧光染料发出的光量小,并且,由于诸如电和光噪声的干扰的影响,难以从整体图像精确地提取组织切片部分的外形形状。
在这种情况下,难以精确地定位放置有组织切片的区域,因此,存在如下问题,即,难以精确地获得组织切片的放大图像。
通常,在二次病理诊断中,医生、技师等在荧光染色组织切片中人工搜索与HE染色组织切片中的恶性肿瘤或疑似恶性的部分相对应的部分。这种工作对于医生等来说不仅麻烦,而且花费大量时间。
鉴于上述,期望提供可以在提高方便性的同时精确获得放大图像的组织切片图像获取和显示设备、组织切片图像获取和显示方法、以及组织切片图像获取和显示程序。
因此,根据本发明的一个实施方式,提供了一种组织切片图像获取和显示设备。组织切片图像获取和显示设备包括:整体图像获取部,获取组织的第一切片的整体的明视场图像和组织的第二切片的整体的暗视场图像;修正部,基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状;放大图像获取部,基于修正部所修正的暗视场图像切片部分的外形形状,确定包围第二切片的范围,并且在暗视场中在所确定的范围中获取第二切片的放大图像;以及显示控制部,显示明视场图像并显示放大图像的一部分,该部分对应于在明视场图像中所选择的位置。
根据本发明的另一实施方式,提供了一种组织切片图像获取和显示方法。组织切片图像获取和显示方法包括以下步骤:获取组织的第一切片的整体的明视场图像和组织的第二切片的整体的暗视场图像;基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状;基于修正部所修正的暗视场图像切片部分的外形形状,确定包围第二切片的范围,并在暗视场中在所确定的范围内获取第二切片的放大图像;以及,显示明视场图像并显示放大图像的一部分,该部分对应于在明视场图像中所选择的位置。
根据本发明的又一实施方式,提供了一种组织切片图像获取和显示程序。组织切片图像获取和显示程序使计算机执行以下步骤:获取第一组织切片的整体的明视场图像和第二组织切片的整体的暗视场图像;基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状;基于修正部所修正的暗视场图像切片部分的外形形状,确定包围第二切片的范围,并在暗视场中在所确定的范围中获取第二切片的放大图像;以及,显示明视场图像并显示放大图像的一部分,该部分对应于在明视场图像中所选择的位置。
通过这种配置,基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状,并且,所修正的外形形状用于获取放大图像。因此,可以精确地提取暗视场图像中的切片部分的外形形状和放大图像。另外,由于显示了明视场图像和对应于在明视场图像中所选择的位置的放大图像部分,所以可以提高可见度。
根据本发明,基于明视场图像中的切片部分的外形形状,修正暗视场图像中的切片部分的外形形状,并且,所修正的外形形状用于获取放大图像。因此,可以精确地提取暗视场图像中的切片部分的外形形状和放大图像。另外,由于显示了明视场图像和对应于在明视场图像中所选择的位置的放大图像部分,所以可以提高可见度。因此,可以提供能够在提高方便性的同时以高精度获取放大图像的组织切片图像获取和显示设备、组织切片图像获取显示方法以及组织切片图像获取和显示程序。
附图说明
图1是示出了组织切片图像获取和显示设备的构造的示意图;
图2是明视场缩略图的图形表示;
图3是暗视场缩略图的图形表示;
图4是示出了数据处理单元的构造的框图;
图5是示出了用于执行组织切片图像获取和显示处理的CPU的功能构造的框图;
图6是示出了为组织切片分配图像捕捉范围的示意图;
图7是示出了修正部的构造的框图;
图8是明视场组织切片区域的图形表示;
图9是暗视场组织切片区域的图形表示;
图10示出了暗视场放大图像显示画面;
图11是组织切片获取和显示处理过程的流程图;以及
图12是示出了另一实施方式中的修正部的构造的框图。
具体实施方式
下面将按以下顺序描述用于执行本发明的实施方式:
1.第一实施方式,以及
2.其它实施方式。
<1.实施方式>
[1-1.组织切片图像获取和显示设备的构造]
图1示出了根据本发明的一个实施方式的组织切片图像获取和显示设备1。组织切片图像获取和显示设备1包括显微镜2和数据处理单元3。
显微镜2具有缩略图获取单元10和放大图像获取单元20。缩略图获取单元10获取放置有组织切片TS的载玻片GS的整体的图像。放大图像获取单元20获取组织切片TS的放大图像。壳体(未示出)完全覆盖显微镜2,以防止外部光进入其中。
显微镜2具有可以在平行和垂直于放置有载玻片GS的平面的方向上(即,在xyz轴的方向上)移动的可移动平台31。
例如,组织切片TS是从石蜡包埋组织块薄切的切片,并通过预定的固定方法固定至载玻片GS。对组织切片TS进行适当的染色。染色的实例不仅包括以HE(苏木紫-伊红)染色、MTC(梅森三色)染色、IHC(免疫组织化学)染色、吉姆萨(Giemsa)染色、巴氏染色等为代表的一般染色,而且包括诸如FISH(荧光原位杂交)以及酶标抗体法的荧光染色。
将记录相关信息的条形码(未示出)贴在固定有组织切片TS的载玻片GS的一端。相关信息的实例包括组织切片TS的标本编号、染色方法、组织切片采自人的姓名、性别及年龄、以及采样日期和时间。
在显微镜2中,当将载玻片GS安装至载玻片支架32上或从载玻片支架32被拆除时,可移动平台31将载玻片支架32移动至位于安装/拆除端口(未示出)附近的载玻片装载位置SLP,以允许将载玻片GS安装至载玻片支架32上或从载玻片支架32被拆除。
缩略图获取单元10包括明视场光源系统11、暗视场光源系统12以及缩略图照相机13。
在随着可移动平台31的运动将载玻片GS移动至缩略图获取位置SGP之后,缩略图获取单元10获取整个载玻片GS的图像。
更具体地,在明视场模式下,在缩略图获取单元10中,从明视场光源系统11中的白色LED(发光二极管)11A发出光,聚光透镜11B将该光转化成基本平行的光,并且基本平行的光被照射在包括组织切片TS的整个载玻片GS上。
当通过一般染色对组织切片TS进行染色时,缩略图获取单元10在缩略图照相机13的成像平面上形成包括组织切片TS的整个载玻片GS的图像,该图像由光产生。
在明视场模式下,数据处理单元3驱动明视场光源系统11。然后,数据处理单元3使用缩略图照相机13获得处于明视场状态下的整个载玻片GS的图像作为明视场缩略图,并以预定的数据格式保存明视场缩略图的数据(该数据在下文中称为“明视场缩略图数据”)。
图2示出了当通过HE染色(是一般染色)对组织切片TS进行染色时的明视场缩略图的一个实例。如图所示,缩略图获取单元10可以获取明视场缩略图,通过该图像可以清楚地识别HE染色的组织切片TS的外形形状。
将缩略图获取单元10配置为,从白色LED 11A发出的光的光轴以预定角度偏离缩略图照相机13的光轴。通过这种配置,由于从白色LED 11A发出的光以及由载玻片GS的表面发出的光的反射产生的反射光未照射在缩略图照相机13的成像表面上,所以缩略图获取单元10可以防止明视场缩略图的劣化。
荧光染色组织切片TS在未激励状态下基本上是透明的,因此,当在明视场模式下获取图像时,图像中不示出组织切片TS。
该试剂包括对编码蛋白质HER2的HER2/neu基因进行杂化的探针以及对17号染色体的着丝点区域的α随体DNA序列进行杂化的探针。
当以用来激励探针的激励光照射组织切片TS时,探针被激励而发出荧光。在这种情况下,用于对HER2/neu基因进行杂化的探针和用于对α随体DNA序列进行杂化的探针发出波长彼此不同的荧光。
在分子诊断中,基于细胞核中的HER2/neu基因的数量与α随体DNA序列的数量的比率,判断HER2/neu基因的数量是否扩增。
因此,为了确定细胞核中的HER2/neu基因的数量和α随体DNA序列的数量,向PathVysion试剂添加(作为对细胞核进行染色的试剂的)DAPI(4′,6-diamidino-2-pheylindole,4’,6-二脒基-2-苯基吲哚),以对组织切片TS染色。
DAPI试剂比用于对HER2/neu基因和α随体DNA序列进行杂化的探针更不容易褪色,并由波长约为365nm(与探针的波长不同)的光激励。
在暗视场模式下,缩略图获取单元10使暗视场光源系统12中的紫外线LED 12A发出波长为365nm的光(该光在下文中称为“激励光”)。聚光透镜12B将从紫外线LED 12A发出的激励光转化成基本上平行的光,激励滤光片12C对基本平行的光进行滤光,所得的光照射在放置有组织切片TS的区域上。
例如,放置有组织切片TS的区域是盖玻片(未示出)与载玻片GS一起夹紧载玻片GS上的组织切片TS的区域。
当用包括DAPI的荧光染料对组织切片TS进行染色时,从紫外线LED 12A(用作激励光源)发出的激励光激励组织切片TS部分中的DAPI,从而发出荧光。在该状态下,缩略图照相机13在成像平面上形成连同荧光组织切片TS部分的整个载玻片GS的图像。
在暗视场模式下,数据处理单元3驱动暗视场光源系统12。然后,数据处理单元3使用缩略图照相机13获得处于暗视场状态下的整个载玻片GS的图像作为暗视场缩略图,并以预定的数据格式保存暗视场缩略图的数据(该数据在下文中还可以称为“暗视场缩略图数据”)。
图3示出了当用DAPI染色对组织切片TS进行染色时的暗视场缩略图的一个实例。如图所示,缩略图获取单元10可以获取暗视场缩略图,通过该图像可以大致识别DAPI染色的组织切片TS的外形形状。
将缩略图获取单元10配置为,从紫外线LED 12A发出的光的光轴以预定角度偏离缩略图照相机13的光轴。通过该配置,由于从紫外线LED 12A发出的光以及由载玻片GS的表面发出的激励光的反射产生的反射光未照射在缩略图照相机13的成像表面上,所以缩略图获取单元10可以防止暗视场缩略图的劣化。
在可移动平台31将载玻片GS移动至位于明视场滤光片23和物镜24之间的放大图像获取位置EGP之后,放大图像获取单元20获取组织切片TS的放大图像。
更具体地,在放大图像获取单元20中,在明视场模式的情况下,在反射镜22反射从白光光源21发出的光之后,产生的光通过明视场滤光片23从载玻片GS的一侧照射在组织切片TS上。
通过使用设置在载玻片GS的另一侧的物镜24和成像透镜(image formation lens)25,放大图像获取单元20将组织切片TS部分的图像(由光产生的图像)放大至预定比例。放大图像获取单元20使物镜24和成像透镜25放大的图像聚焦在图像获取装置26的成像平面上。
使放大图像获取单元20适合于,在明视场模式的情况下,可以从物镜24和成像透镜25之间的光路中去除分色镜29和发射滤光片30。
在明视场模式下,数据处理单元3驱动白光光源21,使用图像获取装置26来得到处于明视场状态下的组织切片TS的放大图像作为明视场放大图像,并以预定的数据格式保存明视场放大图像的数据(该数据在下文中还可以称为“明视场放大图像数据”)。
另一方面,在暗视场模式的情况下,放大图像获取单元20使激励光源27发光,并且使激励滤光片28仅透过所发出的光中用于荧光染色的具有激励波长的光。激励光源27包括,例如,水银灯。
透过激励滤光片28的光(该光在下文中可以称为“激励光”)由设置在物镜24和成像透镜25之间的分色镜29反射,然后到达物镜24。然后,在放大图像获取单元20中,物镜24使激励光聚焦在放置在载玻片GS上的组织切片TS上。
当组织切片TS由荧光染色被染色时,激励光使荧光染料的发射,并且由该发射产生的光(下文中也称为“发射光”)经由物镜24透过分色镜29。发射光到达设置在分色镜29和成像透镜25之间的发射滤光片30,然后到达成像透镜25。
放大图像获取单元20通过使用物镜24和成像透镜25来放大发射光产生的图像,并且,用发射滤光片30吸收除了发射光以外的光(下文中也称为“非发射光”)。使放大图像获取单元20适合于,在图像获取装置26的成像平面上形成发射光(从其中消除了非发射光)的图像。
在暗视场模式下,数据处理单元3驱动激励光源27,使用图像获取装置26来的到处于暗视场状态下的组织切片TS的放大图像作为暗视场放大图像,并以预定的数据格式保存暗视场放大图像的数据(该数据在下文中还可以称为“暗视场放大图像数据”)。
[1-2.数据处理单元的构造]
接下来将描述数据处理单元3的构造。如图4所示,数据处理单元3具有如下构造,即,将各种类型的硬件连接至CPU(中央处理部)41,以执行控制。
更具体地,通过总线48连接ROM(只读存储器)42、用作CPU41的工作存储器的RAM(随机存取存储器)43、用于输入对应于用户操作的指令的操作输入单元44、接口单元45、显示单元46以及存储单元47。
ROM 42存储用于执行各种类型的处理的程序。显微镜2(图1)连接至接口单元45。
可以用液晶显示器、EL(电致发光)显示器、等离子体显示器等来实现显示单元46。可以用以HD(硬盘)、半导体存储器、光盘等为代表的磁盘来实现存储单元47。还可以用诸如USB(通用串行总线)存储器、CF(缩略图闪速)存储器等的便携式存储器来实现存储单元47。
CPU 41将保存在ROM 42中的程序的对应于来自操作输入单元44的指令的程序加载到RAM 43中。根据加载到RAM 43中的程序,CPU 41适当地控制显示单元46和存储单元47。
根据所加载的程序,CPU 41还适于经由接口单元45适当地控制显微镜2的各单元。
[1-3.组织切片图像获取和显示处理的具体内容]
在从操作输入单元44接收到组织切片TS的图像的获取和显示的指令之后,CPU 41将与获取和显示指令相关的程序加载到RAM43中。
如图5所示,CPU 41用作明视场缩略图获取部51、明视场放大图像获取部52、数据记录部53、显示控制部54、暗视场缩略图获取部55、修正部56以及暗视场放大图像获取部57。
当明视场缩略图获取部51要获取通过HE染色进行染色的组织切片TS的图像(用于在病理诊断中进行初步判断)时,响应于例如操作输入单元44的操作,选择明视场模式。
明视场缩略图获取部51使可移动平台31移动,以便将载玻片GS设置在缩略图获取位置SGP,并驱动明视场光源系统11中的白色LED 11A。
明视场缩略图获取部51使用缩略图照相机13,获取包括组织切片TS的整个载玻片GS的图像,并将该图像获得为明视场缩略图。
明视场放大图像获取部52使可移动平台31移动,以便将载玻片GS设置在放大图像获取位置EGP。
明视场放大图像获取部52执行用来从明视场缩略图(由缩略图获取部51获取)中提取组织切片部分的外形形状的外形形状提取处理。外形形状提取处理包括,例如,用于执行数字化处理以在组织切片部分和其它区域之间进行区分、然后提取数字化的组织切片部分的外形形状的处理。
明视场放大图像获取部52检测具有包含通过外形提取处理提取的组织切片部分外形形状的最小面积的矩形区域。
通过使用明视场缩略图中的矩形区域的像素位置和可移动平台31的坐标位置之间的关系,明视场放大图像获取部52设定具有包围组织切片TS的最小面积的矩形图像获取范围PR,以对应于上述矩形区域,如图6所示。
明视场放大图像获取部52根据放大图像获取单元20中的物镜24和成像透镜25的放大倍率以及图像获取装置26的图像获取尺寸,将图像获取范围PR划分成多个图像获取区域AR。虽然在图6的实例中图像获取区域AR彼此不重叠,但是相邻的区域可以部分地彼此重叠。
明视场放大图像获取部52驱动放大图像获取单元20中的白光光源21,并顺次移动可移动平台31,以便其图像由图像获取装置26获取的部分对应于每个图像获取区域AR。
明视场放大图像获取部52使图像获取装置26顺次获取图像获取区域AR中的组织切片TS的各部分的图像,并组合各部分的获取的图像,以产生明视场放大图像。
数据记录部53将明视场缩略图获取部51获取的明视场缩略图和由明视场放大图像获取部52产生的明视场放大图像,分别记录在存储单元47中,作为彼此相关的明视场缩略图数据和明视场放大图像数据。
数据记录部53从明视场缩略图获取部51获取的明视场缩略图中示出的条形码读取相关信息,并将相关信息记录在存储单元47中。
在这种情况下,数据记录部53将彼此相关的明视场缩略图数据、明视场放大图像数据以及相关信息记录为单个的数据文件。
当产生数据文件后未获得相关信息时,使数据记录部53适合于在预定时间通知并警告应输入相关信息。
当经由操作输入单元44选择预定的数据文件时,显示控制部54从存储单元47读取所选择的数据文件。
显示控制部54使显示单元46的右上部显示所读取的数据文件中的明视场缩略图,并使显示单元46的剩余部分显示与光标(用于选择明视场缩略图的一部分)所在区域相对应的明视场放大图像部分。
当医生等通过使用光标从明视场缩略图中选择待诊断区域时,使显示控制部54适合于,在显示单元46上显示对应于所选择区域的明视场放大图像部分,以进行初步诊断。
当暗视场缩略图获取部55获取通过荧光染色进行染色的组织切片TS的图像(其用于病理诊断中的二次判断)时,例如,响应于操作输入单元44的操作,选择暗视场模式。
贴在(固定有荧光染色组织切片TS的)载玻片GS上的条形码的相关信息还包括从相同的组织块薄切的HE染色的组织切片的标本编号。
暗视场缩略图获取部55移动可移动平台31,以便将载玻片GS设置在缩略图获取位置SGP,并驱动暗视场光源系统12中的紫外线LED 12A。
暗视场缩略图获取部55使用缩略图照相机13,获取包括组织切片TS的整个载玻片GS的图像,并将所获取的图像获得为暗视场缩略图。暗视场缩略图获取部55从贴在载玻片GS上的条形码中读取相关信息。
修正部56修正暗视场缩略图中的组织切片部分的外形形状。更具体地,如图7所示,修正部56用作明视场外形形状提取部61、暗视场外形形状提取部62、匹配计算部63以及外形形状修正部64。
基于暗视场缩略图获取部55读取的相关信息,明视场外形形状提取部61读取示出了从(对于暗视场缩略图中示出的组织切片TS来说)相同的组织块薄切的组织切片TS的图像的明视场缩略图。
例如,明视场外形形状提取部61通过将明视场缩略图的像素的亮度值与(设定为应由组织切片部分表现的值的)预定阈值进行比较,对所读取的明视场缩略图进行数字化,以提取组织切片部分的区域(该区域还可以称为“明视场组织切片区域”)。
图8示出了明视场组织切片区域的一个实例。如图8中清楚地示出的,组织切片图像获取和显示设备1可以获取处于在明视场模式下充分地曝光的状态下的组织切片TS的图像,因此,可以提取明视场组织切片区域,通过该区域可以精确地识别组织切片TS的外形形状。
暗视场外形形状提取部62通过将暗视场缩略图的像素的亮度值与(设定为应由组织切片部分表现的值的)预定阈值进行比较,对暗视场缩略图获取部55获取的暗视场缩略图进行数字化,以提取组织切片部分的区域(该区域在下文中还可以称为“暗视场组织切片区域”)。
图9示出了暗视场组织切片区域的一个实例。图8所示的明视场组织切片区域和图9所示的暗视场组织切片区域是从(通过获取从相同的组织块薄切的不同组织切片TS的图像而获得的)明视场缩略图和暗视场缩略图中提取出来的。
组织切片图像获取和显示设备1在暗视场模式下可能无法获得具有足够亮度的组织切片TS的图像,并且,干扰(例如,电和光噪声)的影响可能使暗视场缩略图劣化。在这种情况下,暗视场缩略图中的组织切片TS的外形(轮廓)模糊不清。
因此,由暗视场外形形状提取部62提取的暗视场组织切片区域根据阈值的设定而变化。清洗用于荧光染色的荧光染料之后留下的残留物、附着在载玻片GS上的灰尘等,也被提取至暗视场组织切片区域中。
因此,通过组织切片图像获取和显示设备1,难以提取可以精确地识别组织切片TS的外形形状的暗视场组织切片区域。
由于HE染色组织切片TS和荧光染色组织切片TS是从相同的组织块薄切的并且被分别固定至载玻片GS,所以载玻片GS上的位置可以互相替换,并且其正侧和反侧可以互相颠倒。
匹配计算部63确定明视场外形形状提取部61提取的明视场组织切片区域与暗视场外形形状提取部62提取的暗视场组织切片区域之间的位移量。
具体地,例如,匹配计算部63确定明视场组织切片区域的重心位置和暗视场组织切片区域的重心位置,并确定重心位置之间的差作为位置位移量。
匹配计算部63以对应于位置位移量的量移动明视场组织切片区域,以便明视场组织切片区域的重心和暗视场组织切片区域的重心彼此匹配。匹配计算部63通过获得明视场组织切片区域和暗视场组织切片区域之间的差来确定均方差,同时以预定角度围绕其重心偏移所移动的明视场组织切片区域。
匹配计算部63获得均方差最小的角度(即,在该角度处相关性最高)作为角位移量。因此,匹配计算部63获得角位移量和上述位置位移量。
由于明视场缩略图和暗视场缩略图中示出了从相同的组织块薄切的组织切片TS,所以其具有基本相同的外形形状。
因此,外形形状修正部64以对应于匹配计算部63确定的位移量的量(即,位置位移量和角位移量)移动明视场缩略图中的明视场组织切片区域。
以对应于位移量的量移动的明视场组织切片区域的位置和外形形状代表暗视场缩略图中的组织切片部分的位置和外形形状。外形形状修正部64产生表示以对应于位移量的量移动的明视场组织切片区域的位置和外形形状的外形信息。
外形形状修正部64通过用所产生的外形信息表示的明视场组织切片区域的外形形状代替暗视场缩略图中的组织切片部分的外形形状,来修正暗视场缩略图中的组织切片部分的外形形状。
暗视场放大图像获取部57移动可移动平台31,以便将载玻片GS设置在放大图像获取位置EGP。
暗视场放大图像获取部57使用外形形状修正部64产生的外形信息,以便将包括组织切片TS的矩形形状设定为图像获取范围PR。
暗视场放大图像获取部57根据放大图像获取单元20中的物镜24和成像透镜25的放大倍率以及图像获取装置26的图像获取尺寸,将图像获取范围PR划分成多个图像获取区域AR。
暗视场放大图像获取部57驱动放大图像获取单元20中的激励光源27,并顺次移动可移动平台31,以便其图像将由图像获取装置26获取的部分对应于每个图像获取区域AR。暗视场放大图像获取部57使图像获取装置26顺次获取图像获取区域AR中的组织切片TS的各部分的图像,并组合各部分的所获取的图像,以产生暗视场放大图像。
数据记录部53在存储单元47中记录暗视场缩略图获取部55获取的暗视场缩略图作为暗视场缩略图数据。数据记录部53还在存储单元47中分别记录修正部56确定的位移量和暗视场放大图像获取部57获取的暗视场放大图像,作为位移量信息和暗视场放大图像数据。
在这种情况下,数据记录部53将暗视场缩略图数据、位移量信息以及暗视场放大图像数据与明视场缩略图数据、明视场放大图像数据以及相关信息一起记录在相应的数据文件中。
当经由操作输入单元44选择预定的数据文件并执行用于显示暗视场放大图像的指令时,显示控制部54从存储单元47读取所选择的数据文件。基于位移量信息,显示控制部54确定对应于明视场缩略图的像素的暗视场放大图像的像素。
如图10所示,显示控制部54在显示单元46上显示暗视场放大图像画面G1,在其右上部示出了明视场缩略图,并示出了(用于选择明视场缩略图的一部分的)光标CS选择的部分的暗视场放大图像。
因此,当医生等通过使用光标CS在初步诊断中使用的明视场缩略图中选择待诊断区域时,使显示控制部54适合于,在显示单元46上显示对应于所选择部分的暗视场放大图像的部分,以进行二次诊断。
[1-4.组织切片获取和显示处理过程]
现在将参照图11所示的流程图描述组织切片获取和显示处理的过程。
实际上,在程序RT1中,CPU 41在进入“开始”步骤之后进入步骤SP1。在步骤SP1中,CPU 41使用缩略图照相机13获取包括组织切片TS的整个载玻片GS的图像,并将所获取的图像获得为明视场缩略图。然后,该过程进入步骤SP2。
在步骤SP2中,CPU 41将对应于包括明视场缩略图中的组织切片部分的范围的图像获取范围PR划分成多个图像获取区域AR。CPU 41使图像获取装置26顺次获取对应于图像获取区域AR的组织切片TS的各部分的图像,并组合所获取的图像,以产生明视场放大图像。然后,该过程进入步骤SP3。
在步骤SP3中,CPU 41将彼此相关的明视场缩略图数据、明视场放大图像数据以及相关信息记录为单个的数据文件。然后,该过程进入步骤SP4。
在步骤SP4中,CPU 41使显示单元46的右上部显示明视场缩略图,并使显示单元46的剩余部分显示明视场放大图像的对应于光标CS(用于选择明视场缩略图的一部分)的部分。然后,该过程进入步骤SP5。
在步骤SP5中,CPU 41使用缩略图照相机13获取包括荧光染色组织切片TS的整个载玻片GS的图像,并将所获取的图像获得为暗视场缩略图。然后,该过程进入步骤SP6。
在步骤SP6中,基于贴在(固定有组织切片TS的)载玻片GS上的条形码的相关信息,CPU 41判断是否存在对应于在步骤SP5中获得的暗视场缩略图的数据文件。
当在步骤SP6中得到否定结果(即,否)时,这表明从(与用于在暗视场缩略图中示出的荧光染色的组织切片TS的)相同的组织块薄切的并受到HE染色的组织切片TS的明视场缩略图不存在。在这种情况下,CPU 41进入下一个步骤,以结束处理。
另一方面,当在步骤SP6中得到肯定结果(即,是)时,这表明从(与用于在暗视场缩略图中示出的荧光染色的组织切片TS的)相同的组织块薄切的并受到HE染色的组织切片TS的明视场缩略图存在。在这种情况下,CPU 41进入步骤SP7。
在步骤SP7中,CPU 41从数据文件读取明视场缩略图数据,并基于分别为明视场缩略图和暗视场缩略图设定的阈值,提取明视场组织切片区域和暗视场组织切片区域。然后,该过程进入步骤SP8。
在步骤SP8中,CPU 41确定明视场组织切片区域和暗视场组织切片区域之间的角位移量和位置位移量。然后,该过程进入步骤SP9。
在步骤SP9中,CPU 41以对应于位移量(即,位置位移量和角位移量)的量移动明视场缩略图中的明视场组织切片区域。然后,该过程进入步骤SP10。
在步骤SP10中,基于所移动的明视场组织切片区域的外形形状,CPU 41将具有包围组织切片TS(其图像将在暗视场模式中获取)的最小面积的矩形范围设定为图像获取范围PR。
CPU 41将图像获取范围PR划分成多个图像获取区域AR,使图像获取装置26顺次获取对应于图像获取区域AR的组织切片TS的各部分的图像,并组合所获取的图像,以产生暗视场放大图像。然后,该过程进入步骤SP11。
在步骤SP11中,CPU 41将暗视场缩略图数据、暗视场放大图像数据以及位移数据记录在相应的数据文件中。然后,该过程进入步骤SP12。
在步骤SP12中,CPU 41从存储单元47读取数据文件,并在显示单元46上显示暗视场放大图像画面G1。然后,该过程进入下一个步骤,从而结束处理。
[1-5.操作和优点]
在上述构造中,组织切片图像获取和显示设备1获得受到染色(该染色用在明视场状态下图像获取)的整个组织切片TS的图像,作为明视场缩略图,还获得受到荧光染色的整个组织切片TS的图像作为暗视场缩略图,两个组织切片TS都是从相同的组织块薄切的。
组织切片图像获取和显示设备1将明视场缩略图的各像素和暗视场缩略图的各像素与相应的预定阈值进行比较,以提取组织切片部分作为明视场组织切片区域和暗视场组织切片区域。
组织切片图像获取和显示设备1确定明视场组织切片区域和暗视场组织切片区域之间的位置位移量和角位移量作为位移量,然后,基于位移量移动明视场缩略图中的明视场组织切片区域。
通过使用所移动的明视场组织切片区域的外形形状作为暗视场缩略图中的组织切片部分的外形形状,组织切片图像获取和显示设备1在对应于包含组织切片部分的外形形状的范围的图像获取范围PR中获得暗视场放大图像。
组织切片图像获取和显示设备1在显示单元46上显示暗视场放大图像画面G1,在其右上部示出了明视场缩略图,并示出了(用于选择明视场缩略图的一部分的)光标CS选择的部分的暗视场放大图像。
通过这种配置,当用光标CS选择在初步诊断中观察到的明视场缩略图的一部分时,组织切片图像获取和显示设备1在显示单元46上显示对应于所选择的部分的暗视场放大图像。因此,通过组织切片图像获取和显示设备1,用户不必在暗视场缩略图中检索对应于初步诊断中被诊断为可疑的部分的区域。因此,可以提高用户的方便性。
当在暗视场模式下未获取具有足够亮度的暗视场缩略图时,在暗视场组织切片区域的提取过程中,可能出现如下情况,即,提取了比实际的组织切片部分小的组织切片部分。在这种情况下,当基于暗视场组织切片区域的外形形状获取暗视场放大图像时,暗视场放大图像中的组织切片TS的一部分缺失。
还可以想到的是,从暗视场缩略图中检测到比实际的组织切片部分大的组织切片部分作为暗视场组织切片区域。然而,在这种情况下,由于获得多余部分的放大图像,所以数据量增大。
相反,根据组织切片图像获取和显示设备1,即使当提取比实际的组织切片部分小的组织切片部分作为暗视场组织切片部分时,也可以基于明视场缩略图中的明视场组织切片区域的外形形状,获得暗视场放大图像。
因此,由于组织切片图像获取和显示设备1通过使用(将明视场缩略图中的组织切片TS的外形形状精确地提取到其中的)明视场组织切片区域的外形形状来获取暗视场放大图像,所以可以防止暗视场放大图像中的组织切片TS的部分缺失。因此,组织切片图像获取和显示设备1可以精确地获取暗视场放大图像,并且,在既不过多也不过少的情况下将整个组织切片TS包括在其图像获取范围中。
根据上述构造,基于明视场缩略图,修正暗视场缩略图中的组织切片部分的外形形状,所修正的外形形状用于获得暗视场放大图像,并且显示明视场缩略图和暗视场放大图像。
通过这种配置,组织切片图像获取和显示设备1可以精确地获得明视场缩略图中的组织切片部分的外形形状,还可以在提高方便性的同时精确地获得暗视场放大图像。
<2.其它实施方式>
在上述实施方式中,确定明视场组织切片区域和暗视场组织切片区域之间的位移量,并且以对应于位移量的量移动明视场缩略图中的明视场组织切片区域。然后,用所移动的明视场组织切片区域的外形形状代替暗视场缩略图中的组织切片部分的外形形状,从而修正暗视场缩略图中的组织切片部分的外形形状。
然而,本发明不限于该配置。例如,可以从暗视场缩略图中提取暗视场组织切片区域,使得暗视场组织切片区域的面积变得与明视场组织切片区域的面积相等,从而修正暗视场缩略图中的组织切片部分的外形形状。
更具体地,组织切片图像获取和显示设备1中的CPU 41设置修正部100(在图5中)代替上述实施方式中的修正部56。如图12所示,修正部100用作明视场外形形状提取部101、面积计算部102以及暗视场外形形状提取部103。
基于暗视场缩略图获取部55读取的相关信息,明视场外形形状提取部101读取示出了从与用于暗视场缩略图中示出的组织切片TS相同的组织块薄切的组织切片TS的图像的明视场缩略图。
明视场外形形状提取部101将所读取的明视场缩略图的像素的亮度值与(被设定为应由组织切片表现的值的)预定阈值进行比较,以提取明视场组织切片区域。
面积计算部102计算由明视场外形形状提取部101提取的明视场组织切片区域的面积。面积计算部102可以确定明视场组织切片区域中的像素的数量作为其面积,或者可以基于缩略图照相机13的图像获取放大倍率来确定实际面积。
暗视场外形形状提取部103通过将暗视场缩略图的像素的亮度值与预定阈值进行比较来提取暗视场组织切片区域,并确定暗视场组织切片区域的面积。
当暗视场组织切片区域的所确定的面积不在可以被认为与面积计算部102确定的明视场组织切片区域的面积相等的范围中时,暗视场外形形状提取部103改变阈值。
然后,暗视场外形形状提取部103使用改变的阈值再次提取暗视场组织切片区域,确定其面积,并将该面积与明视场组织切片区域的面积进行比较。暗视场外形形状提取部103改变阈值,直到暗视场组织切片区域的面积在可以被认为与明视场组织切片区域的面积相等的范围内为止,以提取暗视场组织切片区域。
当暗视场组织切片区域的面积在可以被认为与明视场组织切片区域的面积相等的范围内时,暗视场外形形状提取部103获得暗视场组织切片区域的外形形状作为外形信息。
如上所述,修正部100改变阈值,使得暗视场组织切片区域的面积变得与明视场组织切片区域的面积相等,以提取暗视场组织切片区域。因此,即使当组织切片TS的外形(轮廓)由于暗视场模式下的光量较少而模糊不清时,修正部100仍可以提取暗视场组织切片区域,使得暗视场组织切片区域的面积变得与明视场模式下获取的组织切片TS的面积相等。这使得可以提取更精确地表示组织切片TS的外形形状的暗视场组织切片区域。
甚至在暗视场组织切片区域的面积变得与明视场组织切片区域的面积相等时,暗视场组织切片区域的外形在某些情况下仍可能具有凹陷部分。在这种情况下,可能无法获得对应于凹陷部分的组织切片TS部分作为暗视场放大图像。
因此,暗视场外形形状提取部103可以改变阈值,以便暗视场组织切片区域的面积和明视场组织切片区域的面积变得彼此相等,并且具有包围暗视场组织切片区域的最小面积的多边形的面积与具有包围明视场组织切片区域的最小面积的多边形的面积变得彼此相等,以提取暗视场组织切片区域。
通过这种配置,甚至在暗视场组织切片区域的外形具有凹陷部分时,修正部100通过使包围暗视场组织切片区域的多边形的面积变得与包围明视场组织切片区域的多边形的面积相等,仍可以防止将对应于凹陷部分的组织切片TS部分不能被获得为暗视场放大图像。
在上述实施方式中,分别基于明视场缩略图和暗视场缩略图的亮度值来提取明视场组织切片区域和暗视场组织切片区域。本发明不限于这种配置。例如,可以分别基于明视场缩略图和暗视场缩略图的颜色信息来提取明视场组织切片区域和暗视场组织切片区域。
虽然以如下情况给出上述实施方式中的描述,即,通过将暗视场缩略图的像素的亮度值与(设定为应由组织切片部分表现的值的)阈值进行比较来执行数字化,并提取暗视场组织切片区域,但是本发明不限于此。例如,该配置还可以是这样的,通过将暗视场缩略图的像素的亮度值与(设定为应由组织切片部分表现的值的)阈值进行比较来执行数字化,并将所提取的区域的单个最大区域提取为暗视场组织切片区域。
在这种情况下,可以从暗视场组织切片区域中去除清洗用于荧光染色的荧光染料之后留下的残留物、附着在载玻片GS上的灰尘等,如图9所示。
在上述实施方式中,在通过确定明视场组织切片区域和暗视场组织切片区域的重心位置来确定位置位移量之后,组织切片图像获取和显示设备1通过在以预定角度移动明视场组织切片区域的角度时获得像素之间的差来确定均方差,以确定角位移量。本发明不限于该配置。例如,组织切片图像获取和显示设备1可以通过在移动明视场组织切片区域和暗视场组织切片区域中的一个的位置和角度时获得像素之间的差来确定均方差,以确定位置位移量和角位移量。
虽然在以上实施方式中已经描述了DAPI用作荧光染料的情况,但是本发明不限于此。即,可以使用任何允许识别组织切片TS的外形形状的荧光染料。
另外,虽然在以上实施方式中已经描述了CPU 41根据保存在ROM 42中的程序来执行上述生物测量样本图像获取处理的情况,但是本发明不限于此。例如,可以根据从存储介质安装的或在因特网上下载的程序来执行上述生物测量样本图像获取处理。可以根据通过任何其它渠道安装的程序来执行上述生物测量样本图像获取处理。
以如下情况给出上述实施方式中的描述,即,设置用作整体图像获取部的明视场缩略图获取部51和暗视场缩略图获取部55、修正部56、用作放大图像获取部的缩略图照相机13以及显示控制部54。然而,根据本发明,还可以设置具有任何其它构造的光源和图像获取单元。
本领域的技术人员应该理解,根据设计需要和其它因素可以进行各种修改、组合、再组合以及改进,只要其在所附权利要求及其等同替换的范围内。
Claims (6)
1.一种组织切片图像获取和显示设备,包括:
整体图像获取部,获取组织的第一切片的整体的明视场图像和所述组织的第二切片的整体的暗视场图像;
修正部,基于所述明视场图像中的切片部分的外形形状,修正所述暗视场图像中的切片部分的外形形状;
放大图像获取部,基于由所述修正部所修正的暗视场图像切片部分的外形形状,确定包围所述第二切片的范围,并且在暗视场中在所确定的范围内获取所述第二切片的放大图像;以及
显示控制部,显示所述明视场图像并显示所述放大图像的一部分,所述部分对应于在所述明视场图像中选择的位置。
2.根据权利要求1所述的设备,其中,所述修正部通过用所述明视场图像中的所述切片部分的所述外形形状代替所述暗视场图像中的所述切片部分的所述外形形状,来修正所述暗视场图像中的所述切片部分的所述外形形状。
3.根据权利要求1所述的设备,其中,所述修正部修正所述暗视场图像中的所述切片部分,使得所述暗视场图像的所述切片部分的面积变得与所述明视场图像中的所述切片部分的面积相等。
4.根据权利要求1所述的设备,其中,所述修正部修正所述暗视场图像中的所述切片部分,使得所述明视场图像中的所述切片部分的面积与所述暗视场图像中的所述切片部分的面积变得彼此相等,并且具有包围所述明视场图像中的所述切片部分的最小面积的多边形的面积与具有包围所述暗视场图像中的所述切片部分的最小面积的多边形的面积变得彼此相等。
5.一种组织切片图像获取和显示方法,包括以下步骤:
获取组织的第一切片的整体的明视场图像和所述组织的第二切片的整体的暗视场图像;
基于所述明视场图像中的切片部分的外形形状,修正所述暗视场图像中的切片部分的外形形状;
基于由所述修正部所修正的暗视场图像切片部分的外形形状,确定包围所述第二切片的范围,并在暗视场中在所确定的范围内获取所述第二切片的放大图像;以及
显示所述明视场图像并显示所述放大图像的一部分,所述部分对应于在所述明视场图像中选择的位置。
6.一种组织切片图像获取和显示程序,使计算机执行以下步骤:
获取组织的第一切片的整体的明视场图像和所述组织的第二切片的整体的暗视场图像;
基于所述明视场图像中的切片部分的外形形状,修正所述暗视场图像中的切片部分的外形形状;
基于由所述修正部所修正的暗视场图像切片部分的外形形状,确定包围所述第二切片的范围,并在暗视场中在所确定的范围中获取所述第二切片的放大图像;以及
显示所述明视场图像并显示所述放大图像的一部分,所述部分对应于在所述明视场图像中选择的位置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009-200892 | 2009-08-31 | ||
JP2009200892A JP5278252B2 (ja) | 2009-08-31 | 2009-08-31 | 組織切片像取得表示装置、組織切片像取得表示方法及び組織切片像取得表示プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102004305A true CN102004305A (zh) | 2011-04-06 |
CN102004305B CN102004305B (zh) | 2013-04-10 |
Family
ID=43037216
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010102627442A Expired - Fee Related CN102004305B (zh) | 2009-08-31 | 2010-08-24 | 组织切片图像获取和显示设备、方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9110306B2 (zh) |
EP (1) | EP2293132A1 (zh) |
JP (1) | JP5278252B2 (zh) |
CN (1) | CN102004305B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106530311A (zh) * | 2016-10-25 | 2017-03-22 | 帝麦克斯(苏州)医疗科技有限公司 | 切片图像处理方法及装置 |
CN111275717A (zh) * | 2020-01-17 | 2020-06-12 | 杭州迪英加科技有限公司 | 不同染色切片的对比展示方法、电子设备及可读介质 |
CN112326304A (zh) * | 2020-10-20 | 2021-02-05 | 杨春花 | 一种生物技术用样品存储装置及其标本制作方法 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013178742A (ja) * | 2012-01-30 | 2013-09-09 | Canon Inc | 画像処理装置、画像処理システム、画像処理方法およびプログラム |
JP6053327B2 (ja) * | 2012-05-23 | 2016-12-27 | オリンパス株式会社 | 顕微鏡システム、標本画像生成方法及びプログラム |
JP5979982B2 (ja) * | 2012-05-28 | 2016-08-31 | キヤノン株式会社 | 撮像方法、プログラム、および撮像装置 |
US10955655B2 (en) * | 2012-07-04 | 2021-03-23 | Sony Corporation | Stitching images based on presence of foreign matter |
JP6130650B2 (ja) * | 2012-11-19 | 2017-05-17 | 一般社団法人白亜会 | 診断用データ管理装置及び診断用データ管理システム |
JP2014178474A (ja) * | 2013-03-14 | 2014-09-25 | Sony Corp | デジタル顕微鏡装置、その合焦位置探索方法およびプログラム |
US10324041B2 (en) | 2016-12-21 | 2019-06-18 | Abbott Japan Co., Ltd. | Optical imaging system using lateral illumination for digital assays |
JP2020507106A (ja) * | 2016-12-30 | 2020-03-05 | ライカ バイオシステムズ イメージング インコーポレイテッドLeica Biosystems Imaging, Inc. | 二重光学経路および単一撮像センサを使用した低解像度スライド撮像、スライドラベル撮像および高解像度スライド撮像 |
US11047854B2 (en) | 2017-02-06 | 2021-06-29 | Abbott Japan Llc | Methods for reducing noise in signal-generating digital assays |
CN106979878B (zh) * | 2017-05-09 | 2023-12-15 | 贵阳德漫多医疗科技有限公司 | 一种组织病理标本处理系统 |
US11763553B2 (en) * | 2019-04-17 | 2023-09-19 | The Regents Of The University Of California | Artificial intelligence advance imaging—processing conditioned light photography and videography to reveal features detectable by other advanced imaging and functional testing technologies |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010017938A1 (en) * | 1999-05-13 | 2001-08-30 | Kerschmann Russell L. | Transformation of digital images |
CN101246548A (zh) * | 2008-03-03 | 2008-08-20 | 成都方程式电子有限公司 | 一种生物信息的存储方法及系统 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6711283B1 (en) * | 2000-05-03 | 2004-03-23 | Aperio Technologies, Inc. | Fully automatic rapid microscope slide scanner |
JP2003222801A (ja) | 2002-01-29 | 2003-08-08 | Olympus Optical Co Ltd | 顕微鏡画像撮影装置 |
US7272252B2 (en) * | 2002-06-12 | 2007-09-18 | Clarient, Inc. | Automated system for combining bright field and fluorescent microscopy |
JP4235459B2 (ja) * | 2003-01-22 | 2009-03-11 | キヤノン株式会社 | アライメント方法及び装置並びに露光装置 |
JP2007108223A (ja) * | 2005-10-11 | 2007-04-26 | Olympus Corp | 顕微鏡システム |
JP4890096B2 (ja) * | 2006-05-19 | 2012-03-07 | 浜松ホトニクス株式会社 | 画像取得装置、画像取得方法、及び画像取得プログラム |
JP2008224312A (ja) * | 2007-03-09 | 2008-09-25 | Olympus Corp | 蛍光観察装置 |
JP2009008739A (ja) * | 2007-06-26 | 2009-01-15 | Olympus Corp | 生体観察装置 |
JP4937850B2 (ja) * | 2007-07-03 | 2012-05-23 | オリンパス株式会社 | 顕微鏡システム、そのvs画像生成方法、プログラム |
JP4936068B2 (ja) * | 2007-10-25 | 2012-05-23 | ソニー株式会社 | 光ディスク装置、制御方法、及びプログラム |
-
2009
- 2009-08-31 JP JP2009200892A patent/JP5278252B2/ja active Active
-
2010
- 2010-08-05 EP EP20100008197 patent/EP2293132A1/en not_active Ceased
- 2010-08-24 US US12/862,220 patent/US9110306B2/en active Active
- 2010-08-24 CN CN2010102627442A patent/CN102004305B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010017938A1 (en) * | 1999-05-13 | 2001-08-30 | Kerschmann Russell L. | Transformation of digital images |
CN101246548A (zh) * | 2008-03-03 | 2008-08-20 | 成都方程式电子有限公司 | 一种生物信息的存储方法及系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106530311A (zh) * | 2016-10-25 | 2017-03-22 | 帝麦克斯(苏州)医疗科技有限公司 | 切片图像处理方法及装置 |
CN106530311B (zh) * | 2016-10-25 | 2019-03-08 | 帝麦克斯(苏州)医疗科技有限公司 | 切片图像处理方法及装置 |
CN111275717A (zh) * | 2020-01-17 | 2020-06-12 | 杭州迪英加科技有限公司 | 不同染色切片的对比展示方法、电子设备及可读介质 |
CN111275717B (zh) * | 2020-01-17 | 2023-04-11 | 杭州迪英加科技有限公司 | 不同染色切片的对比展示方法、电子设备及可读介质 |
CN112326304A (zh) * | 2020-10-20 | 2021-02-05 | 杨春花 | 一种生物技术用样品存储装置及其标本制作方法 |
CN112326304B (zh) * | 2020-10-20 | 2021-08-20 | 乐清市路航电气有限公司 | 一种生物技术用样品存储装置及其标本制作方法 |
Also Published As
Publication number | Publication date |
---|---|
US20110052038A1 (en) | 2011-03-03 |
CN102004305B (zh) | 2013-04-10 |
JP2011053362A (ja) | 2011-03-17 |
US9110306B2 (en) | 2015-08-18 |
JP5278252B2 (ja) | 2013-09-04 |
EP2293132A1 (en) | 2011-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102004305B (zh) | 组织切片图像获取和显示设备、方法 | |
CN103471993B (zh) | 生物图像的分析装置、分析方法和分析系统 | |
US7226788B2 (en) | Automated slide staining apparatus | |
CN102004091B (zh) | 荧光图像产生方法和设备 | |
US9110305B2 (en) | Microscope cell staining observation system, method, and computer program product | |
US11971333B2 (en) | Automated tissue dissection instrument and methods of using the same | |
US8598541B2 (en) | Fluorescent image obtaining device, fluorescent image obtaining method and fluorescent image obtaining program | |
JP6120675B2 (ja) | 顕微鏡システム、画像生成方法及びプログラム | |
JP6053327B2 (ja) | 顕微鏡システム、標本画像生成方法及びプログラム | |
US8582924B2 (en) | Data structure of an image storage and retrieval system | |
US9322782B2 (en) | Image obtaining unit and image obtaining method | |
EP2024772B1 (en) | Method and system for digitizing a specimen with fluorescent target points | |
AU2004271106C1 (en) | System for organizing multiple objects of interest in field of interest | |
US7881509B2 (en) | Method of, and apparatus and computer software for, imaging biological objects | |
JP5836269B2 (ja) | 紫外線走査計画のための方法及び装置 | |
US20130119272A1 (en) | Image obtaining apparatus, image obtaining method, and image obtaining program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130410 Termination date: 20150824 |
|
EXPY | Termination of patent right or utility model |