CN102385153A - 显微镜和滤波片插入方法 - Google Patents

显微镜和滤波片插入方法 Download PDF

Info

Publication number
CN102385153A
CN102385153A CN2011102405988A CN201110240598A CN102385153A CN 102385153 A CN102385153 A CN 102385153A CN 2011102405988 A CN2011102405988 A CN 2011102405988A CN 201110240598 A CN201110240598 A CN 201110240598A CN 102385153 A CN102385153 A CN 102385153A
Authority
CN
China
Prior art keywords
image
cell tissue
microscope
tissue sample
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011102405988A
Other languages
English (en)
Inventor
山本隆司
田部典宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102385153A publication Critical patent/CN102385153A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/18Arrangements with more than one light path, e.g. for comparing two specimens

Landscapes

  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

本发明公开了一种显微镜和滤波片插入方法,该显微镜包括:第一成像光学系统,对来自细胞组织样本的光束进行成像;第二成像光学系统,具有:光束分离元件,将来自细胞组织样本的光束的一部分从第一成像光学系统分离;成像元件,摄取已被分离的来自细胞组织样本的光束的一部分的相差图像;以及一个或多个光学元件,在成像元件上形成相差图像;以及滤波片插入单元,将吸收预定波长的光的光学滤波片插入第二成像光学系统的光路中,其中,滤波片插入单元根据细胞组织样本中观察对象的颜色,插入吸收与观察对象的颜色的互补色相对应的波长的光的光学滤波片。

Description

显微镜和滤波片插入方法
技术领域
本发明涉及显微镜和滤波片插入方法。
背景技术
已经提出了一种技术,其中,使用用于观察诸如细胞组织载玻片的样本的显微镜,将由显微镜观察的样本的图像保存为数字图像,并且从设置在互联网或内部互联网上的其他装置来观察所保存的数字图像(例如,参考下面的日本尚未审查的专利申请公开第2003-222801号)。通过使用该技术,能够促进在远程位置的医生使用网络来进行病理诊断的所谓的远程会诊的进步。
发明内容
这里,在上述显微镜中,在产生大量样本的显微镜观察图像的数字图像的情况下,尤其,在自动调焦时需要关注观察对象的精度。
同时,诸如细胞组织的样本不仅在其从各种生物部位采集的状态下被观察,而且存在通过使用各种染色方法以特定颜色中对作为观察对象的结构进行染色的情况。此时,由于球面像差的影响而导致的样本的颜色彼此不同,导致对于观察(即,成像)来说最佳的焦点位置改变了约1μm。这种散焦可能为妨碍图像在具有低视场深度的显微镜中清晰的因素。
期望提供一种显微镜和一种滤波片插入方法,该显微镜能够根据样本中的色差而以高精度进行调焦。
根据本发明的实施方式,提供了一种显微镜,其包括:第一成像光学系统,对来自放置在镜台上的细胞组织样本的光束进行成像;第二成像光学系统,具有:光束分离元件,将来自细胞组织样本的光束的一部分从第一成像光学系统分离;成像元件,摄取已被分离的来自细胞组织样本的光束的一部分的相差图像;以及一个或多个光学元件,在成像元件上形成相差图像;以及滤波片插入单元,将吸收预定波长的光的光学滤波片插入第二成像光学系统的光路中,其中,滤波片插入单元根据细胞组织样本中观察对象的颜色,插入吸收与观察对象的颜色的互补色相对应的波长的光的光学滤波片。
第二成像光学系统可以至少包括:聚光透镜,聚集由光束分离元件分离的、来自细胞组织样本的光束的一部分;以及分离透镜,产生由聚光透镜聚集的来自细胞组织样本的光束的一部分的相差图像,其中,滤波片插入单元将光学滤波片插入在光束分离元件与聚光透镜之间。
第二成像光学系统可以至少包括:聚光透镜,聚集由光束分离元件分离的、来自细胞组织样本的光束的一部分;以及分离透镜,产生由聚光透镜聚集的来自细胞组织样本的光束的一部分的相差图像,其中,滤波片插入单元将光学滤波片插入于聚光透镜的后侧。
细胞组织样本可以包括关于细胞组织的染色方法和细胞组织的至少一个部位的样本信息,这里,滤波片插入单元可以基于样本信息自动选择要插入的光学滤波片。
样本信息可以被描述为细胞组织样本的标签。
样本信息在细胞组织样本中可以被描述为条形码。
样本信息可以记录在嵌入细胞组织样本的RF标签中。
根据本发明的另一实施方式,提供了一种滤波片插入方法,包括使光束分离元件将来自放置在镜台上的细胞组织样本的光束的一部分从第一成像光学系统分离,第一成像光学系统对来自细胞组织样本的光束进行成像;将吸收预定波长的光的光学滤波片插入到已被分离的来自细胞组织样本的光束的一部分的光路中;以及摄取透过光学滤波片的、来自细胞组织样本的光束的一部分的相差图像,其中,光学滤波片的插入包括根据细胞组织样本中的观察对象的颜色而插入吸收与观察对象的颜色的互补色相对应的波长的光的光学滤波片。
如上所述,根据本发明,可根据样本中的色差更精确地执行调焦。
附图说明
图1是示出了根据本发明第一实施方式的显微镜图像管理系统的构造的示图。
图2是示出了根据同一实施方式的显微镜和显微镜控制装置的整体构造的示图。
图3是示出了样本的放大图像和相位对比图像的实施例的示图。
图4是示出了基于相位对比图像所产生的相位对比信息的实施例的示图。
图5是示出了包括在根据同一实施方式的显微镜控制装置中的总控制单元的构造的框图。
图6是示出了包括在根据同一实施方式的显微镜中的散焦量检测单元的示图。
图7是示出了包括在根据同一实施方式的显微镜中的散焦量检测单元的示图。
图8是示出了包括在根据同一实施方式的显微镜中的散焦量检测单元的示图。
图9是示出了散焦量的检测结果的实施例的示图。
图10是示出了散焦量的检测结果的实施例的示图。
图11A至图11C是示出了根据同一实施方式的样本信息的示图。
图12是示出了根据同一实施方式的滤波片插入方法的实施例的流程图。
图13是示出了根据本发明实施方式的显微镜控制装置的硬件构造的框图。
具体实施方式
下文中,将参考附图详细地描述本发明的优选实施方式。另外,在说明书和附图中,基于基本相同的功能和构造的组成元件由相同的参考标号给出,并且将省略重复的描述。
将按下列顺序进行描述。
1第一实施方式
1-1显微镜图像管理系统的构造
1-2显微镜的整体构造
1-3显微镜控制装置的整体构造
1-4总控制单元的构造
1-5细胞组织样本的自动调焦
1-6散焦量检测单元的详细构造
1-7滤波片插入方法的流程
2根据本发明实施方式的显微镜控制装置的硬件构造
3总结
下文中,尽管作为由显微镜成像的样本,将描述包括诸如连接组织(诸如,血液、上皮组织或两种类型的组织、或涂片细胞)的组织的切片的生物样本作为实例,但本发明不限于此。
第一实施方式
显微镜图像管理系统的构造
首先,将参考图1描述根据本发明第一实施方式的显微镜图像管理系统1的构造。图1是示出了根据该实施方式的显微镜图像管理系统1的构造的示图。
如图1所示,根据该实施方式的显微镜图像管理系统能够1包括显微镜10、显微镜控制装置20、图像管理服务器30以及图像显示装置40。显微镜控制装置20、图像管理服务器30以及图像显示装置40经由网络3而相互连接。
网络3为可以将根据该实施方式的显微镜控制装置20、图像管理服务器30和图像显示装置40相互连接以双向地通信的通信网络。网络3例如包括公共网络(诸如互联网、电话网络、卫星通信网络或广播线)或者专用网络(诸如WAN(Wide Area Network,广域网络)、LAN(Local AreaNetwork,局域网络)、IP-VPN(Internet Protocol-Virtual Private Network,网际协议-虚拟个人网路)、以太网(注册商标)或无线LAN),并包括有线或无线网络。另外,网络3可以为专用于根据该实施方式的显微镜图像管理系统1的通信网络。
显微镜10利用预定的照明光照亮放置在相应显微镜10镜台上的样本(例如,生物样本),使透过样本的光或从样本发射的光成像。下文将再次详细地描述根据该实施方式的显微镜10的整体构造。
显微镜10被控制为由显微镜控制装置20驱动,通过显微镜10摄取的样本图像经由显微镜控制装置20而被存储在图像管理服务器30中。
显微镜控制装置20控制对样本成像的显微镜10的驱动。显微镜控制装置20控制显微镜10以摄取样本的数字图像并对所获得的样本的数字图像数据执行预定的数字处理。另外,显微镜控制装置20将所获得的样本的数字图像数据上传至图像管理服务器30。
图像管理服务器30存储已由显微镜10成像的样本的数字图像数据,并管理该数字图像数据。当从显微镜控制装置20输出样本的数字图像数据时,图像管理服务器30将所获得的样本的数字图像数据存储在预定的存储区域中,使得观察者可以使用它。此外,当观察者请求从观察者所操作的图像显示装置40(即,对应于观看者的装置)观察样本的数字图像数据时,图像管理服务器30将相应样本的数字图像数据提供给图像显示装置40。
图像显示装置40是由希望观察样本的数字图像数据的观察者操作的终端(即,对应于观看者的装置)。希望观察数字图像数据的观察者参考存储在图像管理服务器30中的数字图像数据的列表等,指定期望观察的数字图像数据,并且请求图像管理服务器30提供所指定的数字图像数据。当数字图像数据由图像管理服务器30提供时,通过将对应于数字图像数据的图像显示在图像显示装置40的显示器等上,观察者可以观察数字图像数据。
下文将再次描述根据该实施方式的显微镜控制装置20和图像管理服务器30的详细构造。
在图1中,尽管示出了包括在系统1中的显微镜10、显微镜控制装置20和图像管理服务器30分别单独存在的实例,但包括在显微镜图像管理系统1中的显微镜10、显微镜控制装置20和图像管理服务器30的数目不限于图1中所示的实施例,而可以分别为多个。
显微镜的整体构造
接下来,参考图2,将描述根据该实施方式的显微镜10的整体构造。图2是示出了根据该实施方式的显微镜10和显微镜控制装置20的整体构造的示图。
整体构造
如图2所示例出的,根据该实施方式的显微镜10包括:缩略图像摄取单元110,摄取其上放置有生物样本SPL的制片PRT的整体图像(下文中,该图像也被称作缩略图像);以及放大图像摄取单元120,其摄取以预定的放大倍率放大生物样本SPL的图像(下文中,该图像也被称作放大图像)。另外,放大图像摄取单元120包括散焦量检测单元130,该散焦量检测单元用于检测设置在放大图像摄取单元120中的照明视场光阑(illumination field stop)的散焦量。
制片PRT通过预定的固定方法将包括诸如连接组织(诸如血液、上皮组织或以上两种类型的组织)的组织切片或者涂片细胞固定至载玻片上。该组织切片或涂片细胞根据需要进行各种染色。该染色不仅包括一般的染色,诸如HE(苏木精-曙红)染色、吉姆萨染色或帕氏染色、齐尼二氏染色、或革兰氏染色,还包括诸如FISH(荧光原位杂交)或酶抗体方法的荧光染色。
根据该实施方式的显微镜10设置有镜台140,上述制片PRT放置在镜台140上;以及镜台驱动机构141,用于在各个方向上移动镜台140。镜台140通过镜台驱动机构141可以在平行于镜台面的方向(X轴方向和Y轴方向)上和垂直于该方向的方向(Z轴方向)上自由地移动。
另外,放大图像摄取单元120设置有作为照明视场光阑焦点调整单元的实例的聚光透镜驱动机构142。
根据该实施方式的显微镜10可以设置有将包括样本SPL的制片PRT传输至镜台140的样本传输装置150。传输装置150可以在镜台上自动地布置预定成像的样本,以及自动地改变样本SPL。
缩略图像摄取单元
如图2所示,缩略图像摄取单元110主要包括光源111、物镜112和成像元件113。
光源111设置在布置制片的镜台140的表面侧的相对侧。针对照明,光源111可以在施加至执行一般染色的生物样本SPL的光(下文中,也称作亮场照明光或简单照明光)与施加至执行特殊染色的生物样本SPL的光(下文中,也被称作暗场照明光)之间改变。另外,光源111可以施加亮场照明光或暗场照明光。在这种情况下,作为光源111,设置了两个光源,即,用于施加亮场照明光的光源和用于施加暗场照明光的光源。
在缩略图像摄取单元110中,可以单独设置标签光源(未示出),其施加用于对在贴附至制片PRT的标签中描述的附加信息成像的光。
具有预定放大倍率的物镜112具有在布置制片的表面中的、缩略图像摄取单元110的基准位置的法线,该发线作为光学轴SRA,该物镜安装在布置制片的镜台140的表面侧。穿过安装在镜台140上的制片PRT的光在物镜112处聚集,能够使图像形成在设置于物镜112后侧(即,照明光的传播方向)的成像元件113上。
成像元件113形成对应于成像范围中的光(换而言之,穿过整个制片PRT的光)的图像,该成像范围包括放置在布置制片的镜台140的表面上的整个制片PRT。形成在成像元件113上的图像是包含整个制片PRT的显微镜图像的缩略图像。
放大图像摄取单元
如图2所示,放大图像摄取单元120主要包括光源121、聚光透镜122、物镜123和成像元件124。此外,放大图像摄取单元120还设置有照明视场光阑(未示出)。
光源121施加亮场照明光,其设置在布置制片的镜台140的表面侧的相对侧。另外,施加暗场照明光的光源(未示出)设置在与光源121的位置不同的位置(例如,布置制片的表面侧)。
聚光透镜122聚集由光源121提供的亮场照明光或由暗场照明光源提供的暗场照明光,并将其引导至镜台140上的制片PRT。聚光透镜122具有在布置制片的表面中的、放大图像摄取单元120的基准位置的法线,该法线作为光学轴ERA,该聚光透镜被安装在光源121和镜台140之间。另外,聚光透镜驱动机构142可以沿着光学轴ERA的方向驱动聚光透镜122。聚光透镜122可以通过聚光透镜驱动机构142来改变其在光学轴ERA上的位置。
具有预定放大倍率的物镜123具有在布置制片的表面中的、放大图像摄取单元120的基准位置的法线,该法线作为光学轴ERA,该物镜被安装在布置制片的镜台140的表面侧中。放大图像摄取单元120可以通过适当地改变物镜123而通过以各种放大倍率的放大来对生物样本SPL成像。穿过放置在镜台140上的制片PRT的光由物镜123聚集,能够使图像形成在设置于物镜的后方(即,照明光的传播方向)的成像元件124上。
此外,分束器131可以设置在物镜123和成像元件124之间的光学轴ERA上。在设置分束器131的情况下,通过物镜123传输的一部分传输光束被引导至下文所述的散焦量检测单元130。
根据成像元件124的像素尺寸和物镜123的放大倍率,在成像元件124上形成有在成像范围中的图像,该成像范围包括在布置制片的镜台140的表面上预定的纵向宽度和横向宽度。此外,由于生物样本SPL的一部分被物镜123放大,所以上述成像范围比成像元件113的成像范围足够小。
这里,如图2所示,缩略图像摄取单元110和放大图像摄取单元120被布置为关于分别为基准位置的法线的光学轴SRA和ERA在Y轴方向上彼此间隔距离D。该距离D被设定为使得保持放大图像摄取单元120的物镜123的显微镜管(未示出)不包括在成像元件113的成像范围中,并且将该尺寸进一步最小化。
散焦量检测单元
如图2所示,散焦量检测单元130主要包括分束器131、场镜(fieldlens)132、分离透镜133以及成像元件134。另外,散焦量检测单元130还设置有下文所描述的滤波片插入机构(图2中未示出),该散焦量检测单元将吸收预定波长的光的光学滤波片插入散焦量检测单元130的光路中。
如上所述,分束器131设置在放大图像摄取单元120的物镜123和成像元件124之间的光学轴ERA上,反射穿过物镜123而传输的传输光束的一部分。换而言之,穿过物镜123而传输的传输光束通过分束器131被分成朝成像元件124传播的传输光束和朝下文所述的散焦量检测单元130内的场镜132传播的反射光束。
场镜132设置在由分束器131分开的反射光束的传播方向侧。场镜132聚集由分束器131分开的反射光束,并将它们引导至设置在场镜132后侧(反射光束的传播方向侧)的分离透镜133。
分离透镜133将由场镜132引导的光束分为两个光束。所分离的光束在布置于分离透镜133后侧(反射光束的传播方向侧)的成像元件134的图像形成表面上形成一组目标图像。
穿过分离透镜133而传输的光束在成像元件134上分别形成图像,结果,一组目标图像形成在成像元件134的成像表面上。由于从场镜132发射的在各个方向上的光束入射至分离透镜133,所以在一组目标图像之间产生相差(phase contrast)。下文中,一组目标图像被称作相差图像。
接下来,将简要地描述由放大图像摄取单元120摄取的放大图像和由散焦量检测单元130摄取的相差图像的实施例。图3是示出了样本的放大图像和相差图像的示图。
在根据该实施方式的显微镜10中,分束器131被布置在物镜123的后侧,穿过物镜123传输的光束在设置于放大图像摄取单元120中的成像元件124上和设置于散焦量检测单元130中的成像元件134上形成图像。这里,如图3所示,形成在成像元件134上的相差图像例如为对应于由左眼观看到的图像和由右眼观看到的图像的一组图像,并且在这两个图像之间产生相差。为此,如果相差降低,则相差图像的两个图像被向彼此远离的方向移动,如果相差增大,则相差图像的两个图像被向彼此靠近的方向移动。
这里,在下面的描述中,构成相差图像的一组图像的一个被称作基准图像,另一图像被称作比较图像。基准图像为当指定相差图像的相差时被用作基准的图像,比较图像为当指定相差图像的相差时与基准图像相比较的图像。
如图4所示,针对构成相差图像的每一像素指定这种相差,由此产生表示整个相差图像中的相差的分配的相差信息。这里,由于两个图像之间的相差为可以被转换为样本凹凸的物理特性值,所以可以通过获得相差信息来获得关于样本凹凸的信息。
如上所述,已经简要描述了根据该实施方式的散焦量检测单元130。下文将再次详细地描述根据该实施方式的散焦量检测单元130。
另外,在以上的描述中,尽管已经描述了在物镜123和成像元件124之间设置分束器131的情况,但用于分离光束的分束单元不限于分束器,而可以使用可移动反射镜等。
另外,在以上描述中,尽管已经描述了设置有场镜、分离透镜和成像元件的构造作为散焦量检测单元130内的相差AF光学系统,但本发明不限于该实施例。相差AF光学系统例如可以使用聚光透镜和双透镜来代替场镜和分离透镜,或者使用其他的光学系统,只要它们可以实现等效的功能。
如上所述,参考图2已经详细描述了根据该实施方式的显微镜10的整体构造。
另外,设置在缩略图像摄取单元110、放大图像摄取单元120以及散焦量检测单元130的每一个中的成像元件可以为一维成像元件或二维成像元件。
此外,在上述实施例中,尽管已经描述了在由分束器131反射的光束的传播方向上设置散焦量检测单元130的情况,但也可以在穿过分束器131的光束的传播方向上设置散焦量检测单元130。
显微镜控制装置的整体构造
根据该实施方式的显微镜10连接至用于控制如图2所示的显微镜的各个部件的显微镜控制装置20。如图2所示,显微镜控制装置20主要包括总控制单元201、照明控制单元203、镜台驱动控制单元205、聚光透镜驱动控制单元207、相差图像摄取控制单元209、缩略图像摄取控制单元211、放大图像摄取控制单元213、滤波片驱动控制单元215以及存储单元217。
这里,照明控制单元203为控制包括设置在显微镜10中的光源111和光源121的各种光源的处理单元,镜台驱动控制单元205为控制镜台驱动机构141的处理单元。聚光透镜驱动控制单元207为控制聚光透镜驱动机构142的处理单元,相差图像摄取控制单元209为控制用于摄取相差图像的成像元件134的处理单元。另外,缩略图像摄取控制单元211为控制用于摄取缩略图像的成像元件113的处理单元,放大图像摄取控制单元213为控制用于摄取生物样本SPL的放大图像的成像元件124的处理单元。另外,如下文所描述的,滤波片驱动控制单元215为滤波片插入机构(图2中未示出)的控制单元,该滤波片插入机构将吸收预定波长的光的滤波片插入散焦量检测单元130的光路中。这些控制单元经由多种数据通信路径连接至受控部件。
在根据该实施方式的显微镜控制装置20中,控制整个显微镜的控制单元(总控制单元201)独立地设置,并经由多种数据通信路径连接至上述的控制单元。
控制单元由CPU(Central Processing Unit,中央处理单元)、ROM(ReadOnly Memory,只读存储器)、RAM(Random Access Memory,随机存取存储器)、存储装置、通信装置、操作电路等来实现。
存储单元217为设置在根据该实施方式的显微镜控制装置20中的存储装置的实施例。存储单元217存储用于控制根据该实施方式的显微镜10的各种设定信息、各种数据库、查找表等。此外,存储单元217可以存储各种历史信息,例如,样本在显微镜10中的成像历史。另外,当根据该实施方式的显微镜控制装置20执行某一处理、或该处理的中间过程或者各种数据库或程序时,存储单元217适当地记录需要保存的各个参数。
设置在显微镜控制装置20中的每一处理单元可以自由地从存储单元217读取以及写入存储单元217。
下文中,将简要描述上述控制单元的功能。
照明控制单元
照明控制单元203为控制设置在根据该实施方式的显微镜10中的各光源的处理单元。当表示生物样本SPL的照明方法的信息从总控制单元201输出时,照明控制单元203基于所获得的表示照明方法的信息来控制相应光源的照明。
例如,可以注意通过照明控制单元203来控制包括在缩略图像摄取单元110中的光源111的情况。在这种情况下,照明控制单元203通过参考表示照明方法的信息来确定是执行用于获得亮场图像的模式(下文中,也被称作“亮场模式”),还是执行用于获得暗场图像的模式(下文中,也被称作“暗场模式”)。此后,照明控制单元203根据光源111的每一模式来设定参数,并能够使光源111施加适于每一模式的照明光。因此,由光源111提供的照明光经由镜台140的开口部而被施加至整个生物样本SPL。另外,作为由照明控制单元203设定的参数,例如,可以选择照明光的强度、光源的种类等。
另外,可以注意通过照明控制单元203来控制包括在放大图像摄取单元120中的光源121的情况。在这种情况下,照明控制单元203通过参考表示照明方法的信息来确定是执行亮场模式还是暗场模式。此后,照明控制单元203根据光源121中的每一模式来设定参数,使光源121能够施加适于每一模式的照明光。因此,由光源121提供的照明光经由镜台140的开口部被施加至整个生物样本SPL。另外,作为由照明控制单元203设定的参数,例如,可以选择照明光的强度、光源的种类等。
亮场模式中的照明光优选地为可见光。另外,暗场模式中的照明光优选地为包括可以激励用于特殊染色的荧光标记的波长的光。在暗场模式中,切除了荧光标记的背景部分。
镜台驱动控制单元
镜台驱动控制单元205为控制用于驱动设置在根据该实施方式的显微镜10中的镜台驱动机构141的处理单元。当表示生物样本SPL的成像方法的信息从总控制单元201输出时,镜台驱动控制单元205基于所获得的表示成像方法的信息来控制镜台驱动机构141。
例如,可以注意根据该实施方式的显微镜10摄取缩略图像的情况。当表示所摄取的生物样本SPL的缩略图像的信息从总控制单元201输出时,镜台驱动控制单元205在镜台表面方向(X-Y轴方向)上移动镜台140,使得整个制片PRT包括在成像元件113的成像范围中。此外,镜台驱动控制单元205在Z轴方向上移动镜台140,使得物镜112在整个制片PRT上调焦。
另外,可以注意根据该实施方式的显微镜10摄取放大图像的情况。当表示所摄取的生物样本SPL的放大图像的信息从总控制单元201输出时,镜台驱动控制单元205控制镜台驱动机构141的驱动,并在镜台表面方向上移动镜台140,使得生物样本SPL位于从光源111和物镜112之间到聚光透镜122和物镜123之间。
镜台驱动控制单元205在镜台表面方向上(X-Y轴方向)移动镜台140,使得生物样本的预定位置位于成像元件124的成像范围中。
另外,镜台驱动控制单元205控制镜台驱动机构141的驱动,并在垂直于镜台表面的方向(Z轴方向,组织切片的深度方向)上移动镜台140,使得物镜123在位于预定成像范围中的生物样本SPL的位置调焦。
聚光透镜驱动控制单元
聚光透镜驱动控制单元207为控制用于驱动设置在根据该实施方式的显微镜10的放大图像摄取单元120中的聚光透镜122的聚光透镜驱动机构142的处理单元。当关于照明视场光阑的散焦量的信息从总控制单元201输出时,聚光透镜驱动控制单元207基于所获得的关于散焦量的信息来控制聚光透镜驱动机构142。
如果设置在放大图像摄取单元120中的照明视场光阑没有适当地调焦,则所产生的放大图像的对比度(contrast)降低。为了防止对比度降低,总控制单元201可以基于由散焦量检测单元130产生的相差图像来指定照明视场光阑的散焦量。总控制单元201将表示所指定的照明视场光阑的散焦量的信息输出至聚光透镜驱动控制单元207,并改变聚光透镜122的位置,使得照明视场光阑聚焦(focus)。
聚光透镜驱动控制单元207控制聚光透镜驱动机构142的驱动,校正聚光透镜122的位置(在光学轴ERA上的位置),使得照明视场光阑聚焦。相差图像摄取控制单元
相差图像摄取控制单元209为控制设置在散焦量检测单元130中的成像元件134的处理单元。相差图像摄取控制单元209根据成像元件134中的亮场模式和暗场模式来设定参数。另外,当获得从成像元件134输出并对应于形成在成像元件134的图像形成表面上的图像的输出信号时,相差图像摄取控制单元209将所获得输出信号识别为对应于相差图像的输出信号。当获得对应于相差图像的输出信号时,相差图像摄取控制单元209将对应于所获得的信号的数据输出至总控制单元201。另外,由相差图像摄取控制单元209设定的参数的实例包括曝光的开始定时和结束定时(即曝光时间)等。
缩略图像摄取控制单元
缩略图像摄取控制单元211为控制设置在缩略图像摄取单元110中的成像元件113的处理单元。缩略图像摄取控制单元211根据成像元件113中的亮场模式和暗场模式来设定参数。另外,当获得从成像元件113输出并与形成在成像元件113的图像形成表面上的图像对应的输出信号时,缩略图像摄取控制单元211将所获得的输出信号识别为对应于缩略图像的输出信号。当获得与缩略图像对应的输出信号时,缩略图像摄取控制单元211将与所获得的信号对应的数据的输出至总控制单元201。由缩略图像摄取控制单元211设定的参数的实例包括曝光的开始定时和结束定时等。
放大图像摄取控制单元
放大图像摄取控制单元213为控制设置在放大图像摄取单元120中的成像元件124的处理单元。放大图像摄取控制单元213根据成像元件124中的亮场模式和暗场模式来设定参数。另外,当获得从成像元件124输出并与形成在成像元件124的图像形成表面上的图像对应的输出信号时,放大图像摄取控制单元213将所获得的输出信号识别为与放大图像对应的输出信号。当获得与放大图像对应的输出信号时,放大图像摄取控制单元213将与所获得的信号对应的数据输出至总控制单元201。由放大图像摄取控制单元213设定的参数包括曝光的开始定时和结束定时等。
滤波片驱动控制单元
滤波片驱动控制单元215为控制滤波片插入机构(图2中未示出)的处理单元,滤波片插入机构用于将吸收预定波长的光的光学滤波片插入散焦量检测单元130的光路中。滤波片驱动控制单元215设置将要插入滤波片插入机构中的一类光学滤波片。另外,滤波片驱动控制单元215可以控制滤波片插入机构移除或改变插入的光学滤波片等。
总控制单元
总控制单元201为控制包括上述各个控制单元的整个透镜的处理单元。总控制单元201获得关于由显微镜10摄取的相差图像的数据,可以基于相差图像数据计算照明视场光阑的散焦量或载玻片的厚度变化量。通过使用散焦量或载玻片的厚度变化量,总控制单元201可以调整包括在显微镜10的放大图像摄取单元120中的光学系统的焦点,并可以进一步提高所获得的放大图像的焦点精度。
另外,总控制单元201可以基于关于由显微镜10摄取的相差图像的数据来计算样本的散焦量或散焦位置。总控制单元201可以基于所计算的样本的散焦量或散焦位置,通过控制显微镜10的镜台位置来实现显微镜10的自动调焦功能。
下面将再次详细地描述由总控制单元201执行的样本的散焦量等的计算过程。
总控制单元201从显微镜10获得关于由显微镜10摄取的缩略图像和放大图像的显微镜图像数据,并加工处理这些数据或对这些数据执行预定的数字处理。此后,总控制单元201将关于缩略图像和放大图像的显微镜图像数据经由网络3上传至图像管理服务器30。因此,可以从连接至网络3的客户端装置的图像显示装置40观察由显微镜10摄取的样本的显微镜图像。
如上所述,参考图2已经描述了根据该实施方式的显微镜控制装置20的整体构造。
总控制单元的构造
将参考图5详细地描述设置在根据该实施方式的显微镜控制装置20中的总控制单元201的构造。图5是示出了根据该实施方式的总控制单元的构造的框图。
如图5所示,根据该实施方式的总控制单元201例如主要包括总驱动控制单元221、显微镜图像获取单元223、图像处理单元225、特征量计算单元227、显微镜图像输出单元229以及通信控制单元231。
总驱动控制单元221例如由CPU、ROM、RAM等来实现。总驱动控制单元221为统一控制用于控制显微镜10各个部件的控制单元(照明控制单元203、镜台驱动控制单元205、聚光透镜驱动控制单元207、相差图像摄取控制单元209、缩略图像摄取控制单元211、放大图像摄取控制单元213以及滤波片驱动控制单元215)的驱动控制单元。总驱动控制单元221设定显微镜10的各个部件中的各种信息(例如,各种设定参数)或从显微镜10的各个部件中获得各种信息。总驱动控制单元221可以将从显微镜10的各个部件获得的各种信息输出至下文所述的特征量计算单元227等。
另外,在条形码被描绘或所谓的RF标签被安装在被摄取显微镜图像的样本中的情况下,总驱动控制单元221可以获得在条形码或RF标签中描述的各种信息。总驱动控制单元221可以使用获得的信息来控制用于控制显微镜10的各个部件的控制单元,或将所获得的信息输出至诸如下文所描述的特征量计算单元227的处理单元。
显微镜图像获取单元223例如由CPU、ROM、RAM、通信装置等来实现。显微镜图像获取单元223经由各个成像控制单元来获得对应于由缩略图像摄取单元110摄取的缩略图像的数据、对应于由放大图像摄取单元120摄取的放大图像的数据以及对应于由散焦量检测单元130摄取的相差图像的数据。
当经由各个成像控制单元获取图像数据时,显微镜图像获取单元223将获得的图像数据输出至下文所描述的图像处理单元225。
另外,显微镜图像获取单元223可以在与关于所获得的数据等的信息相关联之后将获得的图像数据(显微镜图像数据)存储在存储单元217中。
图像处理单元225例如由CPU、GPU、ROM、RAM等来实现。图像处理单元225对从显微镜图像获取单元223输出的显微镜图像执行图像处理。
具体地,当获得从显微镜图像获取单元223输出的相差图像数据、缩略图像数据和放大图像数据(更具体地,图像的原始数据)时,图像处理单元225对原始数据执行加工处理。另外,图像处理单元225与图像数据的加工处理一起将形成图像的多个图像彼此相连接(缝合处理)。
图像处理单元225可以根据需要执行所获得的数字图像数据(译码)的转换处理。数字图像的转换处理可以包括用于通过数字图像的压缩产生JPEG图像等的处理、用于将压缩为JPEG图像等的数据转换为具有不同格式(例如,GIF格式等)的压缩图像。另外,数字图像的转换处理包括在压缩图像被解压缩一次然后进行诸如边缘增强的处理、用于改变压缩图像的压缩比的处理等之后执行第二压缩的处理。
在图像处理单元225已经对相差图像数据执行了上述图像处理的情况下,图像处理后的相差图像数据被输出至特征量计算单元227。另外,在图像处理单元225已经执行了缩略图像数据和放大图像数据的上述图像处理的情况下,由这些图像形成的显微镜图像和对应于显微镜图像的元数据被输出至下文所描述的显微镜图像输出单元229。
此外,描述用于指定相应样本的信息的标签可以贴附至用于产生显微镜图像的样本。在该情况下,图像处理单元225例如可以对对应于缩略图像中标签的部分执行的字符识别处理,从而得到所描述的内容。当指定标签中所描述的内容时,图像处理单元225可以将指定的信息输出至总驱动控制单元221等。
特征量计算单元227例如由CPU、GPU、ROM、RAM等来实现。特征量计算单元227获得关于由显微镜10摄取的相差特性的数据,基于相差图像数据计算放置在显微镜10镜台上的样本的散焦量。另外,特征量计算单元227可以基于相差图像数据来计算照明视场光阑的散焦量或载玻片的厚度变化量。通过使用散焦量或载玻片的厚度变化量,总控制单元201可以调整包括在显微镜10的放大图像摄取单元120中的光学系统的焦点,并进一步提高所获得的放大图像的焦点精度。
由特征量计算单元227计算的上述各种特征量被输出至总驱动控制单元221。
显微镜图像输出单元229例如由CPU、ROM、RAM等来实现。显微镜图像输出单元229经由下文所描述的通信控制单元231,将从图像处理单元225输出的显微镜图像和诸如由相应的显微镜图像伴随产生的元数据的各种信息输出至图像管理服务器30。因此,由显微镜10摄取的样本的显微镜图像(数字显微镜图像)通过图像管理服务器30来管理。
通信控制单元231例如由CPU、ROM、RAM、通信装置等来实现。通信控制单元231控制经由诸如互联网或专用线的网路3所执行的、总控制单元201与设置在显微镜控制装置20外部的图像管理服务器30之间的通信。
另外,已经描述了根据该实施方式的显微镜控制装置20的功能的实施例。每一上述的组成元件可以通过使用一般的组件或电路来组成,或者可以由专用于每一组成元件功能的硬件来组成。各个组成元件的所有功能可以由CPU等来执行。因此,当实践该实施方式时,可以根据此时的技术水平来适当地修改所用的构造。
此外,用于实现如上所述的根据该实施方式的显微镜控制装置的各个功能的计算机程序可以创建并安装在个人计算机等中。此外,还能够提供在其中存储计算机程序并且通过计算机可读取的记录介质。记录介质例如包括磁盘、光盘、磁光盘、闪存等。计算机程序例如可以经由网络来传递,而不使用记录介质。
细胞组织样本上的自动调焦处理
接下来,在描述设置在根据该实施方式的显微镜10中的散焦量检测单元130的详细构造之前,将简要地描述细胞组织样本上的自动调焦处理。
如上所述,在利用显微镜观察细胞组织样本的情况下,存在在所采集的细胞组织的状态下观察细胞组织的情况,然而,也存在所采集的细胞组织进行各种染色处理并由此所观察的细胞组织中的对象被染色为预定颜色的许多情况。例如,在对细胞组织执行HE(苏木精-曙红)染色的情况下,细胞组织中的细胞核被染色为蓝色,诸如细胞膜或红血球的结构被染色为粉红色至红色。
当染色的细胞组织样本通过显微镜进行成像时,尽管物理位置关系与成像元件中相同,但是作为观察的最佳位置的焦点位置偏离了1μm。这种散焦导致了球面像差。
假定为了对经染色的细胞组织样本(其中,细胞核为观察对象)执行调焦,应用了使用观察图像的所谓的爬山法的自动调焦方法。在该情况下,假定自动调焦处理中的检测框被设置在不包括作为观察对象的细胞核的位置。此时,在爬山法的自动调焦方法中,仅摄取了作为对象的细胞核的散焦图像。因此,在使用爬山法的自动调焦方法的情况下,使用反映检测框中的结构的颜色、尺寸等的调焦度的估计值。
然而,如上所述的爬山法具有很难以高速执行调焦的问题。另外,在上述爬山法中通过使用部分扫描(从条纹形状的成像元件中读取图像)实现高速的情况下,具有用于估计焦点的检测框在摄取和保存的图像平面中变窄由此焦点位置精度受到破坏的问题。
因此,根据该实施方式的显微镜10采用使用不同于主拍摄光学系统(即,根据该实施方式的放大图像摄取单元120)的相差光学系统(即,散焦量检测单元130)的焦点调整方法(下文中,也被称作相差方法)。如图4所示,在相差方法中,通过相差光学系统获得的一组相差图像分别被用作基准图像和比较图像。此外,针对基准图像的每一像素,考虑使用显著像素(noted pixel)和该像素周围的外围像素的微图像,在比较图像中搜寻与相应的微图像具有高关联性的图像区域。此后,通过使用根据搜寻的结果所获得的两个图像区域之间的距离来计算散焦量。
由于执行了上述处理,相差方法用作高通滤波片,该高通滤波片使进行相关联处理且具有大于每一像素周围的微图像的尺寸的结构(即,低频率部件)难于检测。由于显微镜通常被用于观察非常微细的结构,所以可以看出,具有高通滤波片特性的相差方法与作为光学装置的显微镜兼容。
在相差方法中,用于相关联处理的微区域的尺寸优选地为专门(intend)用于调焦的结构的尺寸的两倍。另外,如果相关联处理中的微区域的尺寸非常小,则在相关联处理中的检测误差增大,因此这是不优选的。
此外,为了根据具有相同尺寸的结构的颜色来选择性地权衡调焦处理,可以采用一种方法,其中,将相差光学系统的成像元件用作颜色传感器,并且通过使用其颜色来权衡焦点位置的估计值。然而,尽管具有高像素密度的成像元件适于保持相差检测中的精度,但从高速读取或图像处理的观点来看,具有较小数量的像素的成像元件是合适的。为此,通过使用通常使用的贝叶排列图像传感器用于相差检测是非常不利的,因为关于照明的像素密度低且读取慢。
由此,基于这些发现,本发明的发明人致力于研究能够根据样本中的色差而在相差方法中更精确地执行调焦的方法,并且已经实现了一种如下文所述的将滤波片插入相差光学系统的光路中的方法。
散焦量检测单元的详细构造
接下来,参考图6至图11C,将描述设置在根据实施方式的显微镜10中的散焦量检测单元130的详细构造。
图6是示出了根据该实施方式的放大图像摄取单元120和散焦量检测单元130的光学系统的示意图。如图6所示,包括在根据该实施方式的散焦量检测单元130中的相差光学系统被从位于放大图像摄取单元120后侧(镜台140和成像元件124之间的部分)的成像光学分开。
如图6所示,通过放置在镜台140上的制片PRT中的样本而传输的样本传输光束穿过诸如设置在成像光学系统中的聚光透镜的光学元件,并在成像元件124的成像表面上形成图像。
此外,如图6所示,分束器131被设置在成像光学系统的光路上,并且样本传输光束的一部分被分束器131分离,被分离的样本传输光束被引导至相差光学系统。
如此,在根据该实施方式的显微镜10中,其中设置摄取样本的相差图像的相差光学系统的相差显微镜管被从其中设置有摄取样本的放大图像的成像光学系统的主显微镜管分离。从而,在根据该实施方式的显微镜10中,当连续地执行用于检测焦点的相差图像的摄取和放大图像的摄取时,不需要光学系统的机械变化。
此外,由于用于摄取相差图像的相差光学系统被从用于摄取样本的放大图像的成像光学系统分离,则可自由地将光阑或滤波片插入被分离之后的相差光学系统的光路中。结果,在根据该实施方式的显微镜10中,可自由地改变相差光学系统中的视场的深度或波长特性,而对通过成像光学系统摄取的放大图像没有影响。
本发明的发明人关注根据该实施方式的相差光学系统的上述特性,并通过将吸收预定波长的光的光学滤波片插入相差光学系统的光路中来实现考虑由于样本中的颜色差所导致的散焦量的调焦方法。
更具体地,在根据该实施方式的相差光学系统中,吸收与在为细胞组织样本所执行的染色方法中对观察对象所染颜色的互补色对应的波长频带的光学滤波片,通过滤波片插入机构135被插入相差光学系统的光路中。通过将这种光学滤波片插入光路中,可以降低相差图像中绘制的除观察对象以外的其他类型的染色组织的图像的强度,从而相对增大了相差图像中绘制的作为观察对象的染色组织的图像的强度。结果,通过使用相差图像而在散焦量检测处理中优选地选择作为观察对象的染色组织的焦点位置。
例如,考虑经HE(苏木精-曙红)染色的细胞组织切片。在HE染色细胞组织中,细胞核、骨组织、软骨组织的一部分、浆液成分等被苏木精颜料染为蓝色,细胞质、软组织的连接组织、红血球、内分泌颗粒等被曙红颜料染为红色。所染的颜色差引起球面像差,由此,导致焦点位置的差,在焦点位置,以各个颜色染色的结构清晰地形成图像。具体地,染为红色的结构的焦点位置与染为蓝色的结构的焦点位置被定位为间隔约1μm,它们位于同一位置。为此,例如,在细胞核为观察对象的细胞组织切片中,如果主要针对细胞质组织执行调焦,则存在最佳焦点位置不能提供给细胞核的问题。
因此,在细胞核为观察对象(或观察的主要目的)的情况下,则滤波片插入机构135将与蓝色的互补色对应的红色光学滤波片插入相差光学系统的光路中,从而降低了相差图像中绘制的、被染为红色的细胞质组织的图像的强度。结果,优先选择被染为蓝色的细胞核组织的焦点位置。
相比之下,在被染为红色的结构(诸如细胞质或红血球)为观察的主要目的的情况下,滤波片插入机构135将蓝色光学滤波片插入相差光学系统的光路中,从而降低了相差图像中绘制的、被染为蓝色的细胞核组织的图像的强度。结果,优先选择被染为红色的细胞质组织或红血球的焦点位置。
另外,尽管在上述实施例中描述了HE染色作为实例,但以相同的方式可以在其他方法中优先选择观察对象的焦点位置。
例如,革兰氏染色为用于确定细菌为革兰氏阳性还是阴性的染色方法。革兰氏阳性细菌被染为蓝色至蓝紫色,并且革兰氏阴性细菌被染为粉红色至红色。因此,如果革兰氏阳性细胞为观察对象,则可以通过插入红色光学滤波片来优先选择革兰氏阳性细菌的焦点位置。相反,如果革兰氏阴性细胞为观察对象,则可以通过插入蓝色光学滤波片来优先选择革兰氏阴性细菌的焦点位置。
此外,齐尼二氏染色为用于观察诸如肺结核细菌的细菌体的染色方法。细菌体被染为红色,除细菌体之外的其他部分被染为蓝色至绿色。因此,通过将蓝色至绿色光学滤波片插入相差光学系统,可以优先选择细菌体的焦点位置。
上述染色方法仅为实例,即使在不同于上述方法的染色方法中,也可以通过插入与观察对象的颜色为互补关系的颜色的光学滤波片优先选择观察对象的颜色。
这里,作为滤波片插入机构135的实例,可以使用如图7所示的旋转器。图7是示出了根据该实施方式的滤波片插入机构的实施例的示图。
作为滤波片插入机构135的实施例的旋转器例如是通过在具有圆板形状的基板上设置一个或多个通孔来形成的,并且吸收预定波长的光的光学滤波片被安装在所设置的通孔中。旋转轴设置在旋转器的中央附近,并且滤波片驱动控制单元215控制旋转轴的旋转,从而选择性地将具有不同频率特性(即,吸收波长频带)的光学滤波片插入相差光学系统的光路中。另外,没有安装光学滤波片的通孔被布置在设置于旋转器上的通孔之间,从而能够选择没有将光学滤波片插入相差光学系统的状态。
例如,在如图7所示的实例中,安装了红色滤波片、蓝色滤波片以及绿色滤波片的三种光学滤波片作为具有不同频率特性的光学滤波片,并且安装了没有光学滤波片的通孔。滤波片驱动控制单元215可以通过控制旋转器的旋转轴的旋转来选择包括没有插入光学滤波片的状态的四种滤波片插入状态。
这里,设置在旋转器上的通孔的尺寸可以被确定为使得光学滤波片整体上包括光束的直径,以便对应于插有光学滤波片的相差光学系统的部位处的光束的直径。
另外,在相差光学系统中插入光学滤波片的位置可以在如图6所示的场镜132的前侧(分束器131侧),或者可以在如图8所示的场镜132的后侧(成像元件134侧)。此外,在将光学滤波片插入场镜132的前侧的情况下,为了不影响由成像光学系统摄取的放大图像,将光学滤波片插入对通过成像光学系统进行传播的光束没有影响的部位中。另外,在将光学滤波片插入场镜132后侧的情况下,如图8所示,可以将光学滤波片插在场镜132和分离透镜133之间,或者将光学滤波片插在分离透镜133和成像元件134之间。
在将光学滤波片插入场镜132前侧的情况下,降低了主光轴(CRA)对光学滤波片的不均匀性。因此,产生相差图像的一部分图像几乎对由光学滤波片选择的波长没有影响。同时,需要光学滤波片具有非常大的孔径,由此增大了光学滤波片的成本,或者增大了滤波片插入机构135的尺寸。
另一方面,在将光学滤波片插入场镜132后侧的情况下,可以使用具有较小孔径的光学滤波片。然而,在该情况下,存在主光轴(CRA)在成像元件134的各部位明显改变,以及在形成于成像元件134的各部位上的图像的波长特性不致的可能。
图9示出了通过使用上述光学滤波片而对HE染色的细胞组织样本成像所获得的显微镜图像。在图9中所示的显微镜图像中,从由放大图像摄取单元120摄取的样本的放大图像中,可以看出,在细胞组织样本中存在细胞核非常小的区域和红血球非常大的区域。由于对样本执行了HE染色,所以细胞核被染为蓝色,细胞质或红血球被染为红色。
获得了细胞组织样本的三种相差图像,即,无需插入滤色片所摄取的相差图像、通过插入红色滤波片所摄取的相差图像以及通过插入蓝色滤波片所摄取的相差图像,并且对相差图像执行了散焦量检测处理。图9分别示出了所获得的相差图像中的一个和相应的散焦检测平面。
另外,图10是示出了使用图9中所示的三种相差图像所检测到的散焦量的曲线图。图10中的曲线图示出了通过使用当插入红色滤波片时(即,当成像被执行为使得细胞核被加强)的散焦量作为基准而表示的相对散焦量。如从图10中清晰可见,可以看出,在没有插入光学滤波片所摄取的相差图像的散焦量为0.3μm,细胞核在焦距(focus)之外。此外,可以看出,通过插入蓝色滤波片(以便适合于细胞质量或红血球)所摄取的相差图像的散焦量为1.7μm,并且细胞核完全在焦距以外。
如此,通过将预定的光学滤波片插入相差光学系统中,当通过使用摄取的相差图像和图像处理来立即获得整个观察平面的形状和散焦量时,可以集中关注染色的细胞组织的结构。从而,在根据该实施方式的显微镜10和显微镜控制装置20中,能够摄取适于观察对象的清晰图像(放大图像)。
另外,总驱动控制单元221可以基于关于由总驱动控制单元221获得的用户输入的信息来确定旋转,并且总驱动控制单元221可以经由滤波片驱动控制单元215来控制滤波片插入机构135。另外,显微镜10的用户可以直接手工控制诸如旋转器的滤波片插入机构135。
显微镜10的用户可以在观察载玻片之前或在观察载玻片期间根据观察目的来手工选择光学滤波片,或者可以通过显微镜控制装置20(更具体地,总驱动控制单元221)来自动选择光学滤波片。在总驱动控制单元221自动选择要插入的光学滤波片的情况下,总驱动控制单元221可以使用细胞组织样本所附有的样本信息。
对单个细胞组织样本唯一的样本信息包括提供样本的个人的姓名、提供日期、提供地点以及染色种类等。
样本信息可以在细胞组织样本的制片PRT中描述为如图11A所示的标签(即,字符信息),或者可以描述为如图11B所示的条形码。另外,样本信息可以被存储在如图11C所示的嵌入制片PRT的RF标签中。
如图11A或11B所示,在制片PRT上附有的样本信息作为字符信息或条形码的情况下,图像处理单元225例如可以通过为细胞组织样本的缩略图像执行图像处理来获得所描述的信息。另外,如图11C所示,在将样本信息存储在RF标签中的情况下,总控制单元201或总驱动控制单元221可以通过使用预定方法读取信息来获得存储在RF标签中的信息。
总驱动控制单元221从获得的样本信息中得到染色方法的种类或观察对象,并且可以通过使用描述存储在存储单元217等中的染色方法和观察对象之间的对应关系的数据库来选择要插入的光学滤波片。
滤波片插入方法的流程
接下来,参考图12,将简要地描述根据该实施方式的滤波片插入方法的流程的实施例。图12是示出了根据该实施方式的滤波片插入方法的流程的实施例的流程图。
首先,显微镜控制装置20的总驱动控制单元221获取贴附至细胞组织样本的、包括关于染色类型等信息的样本信息(步骤S101)。该样本信息是通过使用关于样本信息贴附至细胞组织样本的每一情况的合适方法来获得的。此后,总驱动控制单元221基于所获得的样本信息来选择要插入的光学滤波片(步骤S103)。
当确定了要插入的光学滤波片时,总驱动控制单元221将关于所确定的光学滤波片的信息传输至滤波片驱动控制单元215。滤波片驱动控制单元215基于从总驱动控制单元221传输的关于光学滤波片的信息,产生用于将指定的光学滤波片插入相差光学系统的光路中的控制信号,并控制滤波片插入机构135。
滤波片插入机构135在滤波片驱动控制单元215的控制下将所选择的光学滤波片插入相差光学系统的光路中(步骤S105)。
当将所选择的光学滤波片插入相差光学系统的光路中时,总驱动控制单元221请求相差图像摄取单元209摄取相差图像。接下来,相差图像摄取单元209控制散焦量检测单元130(具体地,成像元件134)摄取相差图像(步骤S107)。
显微镜控制装置20的总控制单元201通过分析所摄取的相差图像而适当并准确地计算置于镜台140上的细胞组织样本的焦点位置。因此,在根据该实施方式的显微镜10和显微镜控制装置20中,可关注于染色的细胞组织的结构的聚焦。
硬件构造
将参考图13详细地说明根据本发明实施方式的显微镜控制装置20的硬件构造。图13是示出了根据本发明实施方式的显微镜控制装置20的硬件构造的框图。
显微镜控制装置20主要包括CPU 901、ROM 903、RAM 905以及GPU(图形处理单元)906。另外,显微镜控制装置20还包括主机总线907、电桥909、外部总线911、接口913、输入装置915、输出装置917、存储装置919、驱动器921、连接端口923以及通信装置925。
CPU 901用作算术处理单元和控制装置,根据记录在ROM 903、RAM905、存储装置919后可移除记录介质927中的各种程序控制显微镜控制装置20全部操作或其一部分。ROM 903存储通过CPU 901使用的程序或操作参数。RAM 905主要存储CPU 901使用的程序、在执行程序中适当改变的参数等。另外,GPU 906用作算术处理单元和控制装置,其执行关于在显微镜控制装置20中执行的各种图像处理的算术处理。GPU 906根据记录在ROM 903、RAM 905、存储装置919或可移除记录介质927中的各种程序控制显微镜控制装置20中图像处理的所有操作或其一部分。它们经由通过诸如CPU总线的内部总线而形成的主机总线907而彼此相连接。
主机总线907经由电桥909连接至诸如PCI(Peripheral ComponentInterconnect/Interface,周边元件连接/接口)的外部总线911。
输入装置915为由用户操作的操作装置,诸如,如鼠标、键盘、触摸面板、按钮、开关以及控制杆。另外,输入装置915例如可以为使用红外线或其他电波的远程控制装置(所谓的远程控制器),或者可以为支持显微镜控制装置20的操作的外部连接装置929,例如移动电话或PDA。此外,输入装置915例如由输入控制电路等组成,其基于用户使用操纵装置输入的信息来产生输入信号,并将该输入信号输出至CPU 901。显微镜控制装置20的用户可以将各种数据输入至显微镜控制装置20,或者通过操作输入装置915命令显微镜控制装置20执行处理。
输出装置917包括可以以可见或可听形式通知用户所获得的信息的装置。这些装置包括诸如CRT显示装置、液晶显示器、等离子体显示面板、EL显示器的显示装置、灯、诸如扬声器和耳机的音频输出装置、打印机装置、移动电话、传真机等。输出装置917例如输出通过显微镜控制装置20执行各种处理所获得的结果。具体地,显示装置将通过显微镜控制装置20执行各种处理所获得的结果显示为文本或图像。另一方面,音频输出装置将包括再生音频数据、声音数据等的音频信号转换为模拟信号以便输出。
存储装置919为用于存储数据的装置,其形成为显微镜控制装置20的存储单元的实施例。存储装置919例如包括诸如HDD(硬盘驱动)的磁性存储装置、半导体存储装置、光学存储装置、磁光学存储装置等。存储装置919存储由CPU 901执行的程序或各种数据、从外部存储装置获得的各种数据等。
驱动器921为用于记录介质的读写器,被嵌入在显微镜控制装置20中或安装在显微镜控制装置20的外部。驱动器921读取记录在所安装的诸如磁盘、光盘、磁光盘或半导体存储器的可移除记录介质927中的信息,并将所读取的信息输出到RAM 905。另外,驱动器921将信息写入所安装的诸如磁盘、光盘、磁光盘或半导体存储器的可移除记录介质927中。例如可移除记录介质927包括DVD介质、HD-DVD介质、蓝光介质等。另外,可移除记录介质927可以为紧凑式闪存(CF,注册商标)、闪存存储器、SD(安全数字)存储卡等,此外,可移除记录介质927例如可以为IC(集成电路)卡或其上安装非接触IC芯片的电子设备。
连接端口923用于直接将装置连接至显微镜控制装置20。连接端口923的实施例包括USB(Universal Serial Bus,通用串行总线)接口、IEEE394端口、SCSI(Small Computer System Interface,小计算机系统接口)端口等。连接端口923的其他实施例包括RS-232C端口、光学音频端子、HDMI(High-Definition Multimedia Interface,高分辨率多媒体接口)端口等。外部连接装置929连接至连接端口923,从而显微镜控制装置20从外部连接装置929直接获得各种数据,或将各种数据提供给外部连接装置929。
通信装置925例如为连接至通信网络931的、由通信装置等组成的通信接口。通信装置925例如可以为用于有线或无线LAN(Local AreaNetwork,局域网络)、蓝牙(注册商标)或WUSB(Wireless USB,无线USB)的通信卡等。另外,通信装置925可以为用于光学通信的路由器、用于ADSL(Asymmetric Digital Subscriber Line,非对称数字用户线)、用于各种通信的调制解调器等。通信装置925可以基于预定的诸如TCP/IP的协议而将信号传输至例如因特网或其他通信装置或从因特网或其他通信装置接收信号。另外,连接至通信装置925的通信网络931由以有线或无线方式连接的网络等形成,例如可以为互联网、家庭LAN、红外通信、无线电波通信、各种专用通信、卫星通信等。
如此,已经描述了根据本发明实施方式的能够实现显微镜控制装置20的功能的硬件构造的实施例。上述每一个组成元件均可以通过使用通用组件来构成,或者可以由对每一组成元件的功能特定的硬件构成。因此,可以根据实践该实施方式时的技术水平来适当地修改要使用的硬件构造。
总结
如上所述,根据本发明实施方式的显微镜和显微镜控制装置可通过根据观察对象的染色状态将预定的光学滤波片插入相差光学系统的光路中来执行对关注的观察对象的调焦。因此,在根据本发明实施方式的显微镜和显微镜控制装置中,可以摄取适于观察对象的清晰放大图像。
另外,在一般的单透镜反射式照相机或用于电视广播的照相机中,存在一种技术,其中,将IR切断滤波片可移除地设置在AF成像元件的前面,并且在保证成像所需要的光量的同时检测焦点。然而,在根据不同于该技术的本发明实施方式的显微镜和显微镜控制装置中,为了在显微镜具有低视场深度的情况下适当且精确地聚焦在观察对象上,插入了光学滤波片,因此,这完全不同于用于上述照相机的技术。
本发明包含于2010年8月27日向日本专利局提交的日本优先专利申请JP 2010-190926所涉及的主题,其全部内容结合于此作为参考。
本领域的技术人员应当理解,可以根据需求和其他因素进行各种修改、组合、子组合以及改变,只要它们在所附权利要求或其等价物范围内。

Claims (8)

1.一种显微镜,包括:
第一成像光学系统,对来自放置在镜台上的细胞组织样本的光束进行成像;
第二成像光学系统,具有:光束分离元件,所述光束分离元件将来自所述细胞组织样本的光束的一部分从所述第一成像光学系统分离;成像元件,摄取已被分离的来自所述细胞组织样本的所述光束的一部分的相差图像;以及一个或多个光学元件,在所述成像元件上形成所述相差图像;以及
滤波片插入单元,将吸收预定波长的光的光学滤波片插入所述第二成像光学系统的光路中,
其中,所述滤波片插入单元根据所述细胞组织样本中观察对象的颜色,插入吸收与所述观察对象的颜色的互补色相对应的波长的光的所述光学滤波片。
2.根据权利要求1所述的显微镜,其中,所述第二成像光学系统至少包括:
聚光透镜,聚集由所述光束分离元件分离的、来自所述细胞组织样本的所述光束的一部分;以及
分离透镜,产生由所述聚光透镜聚集的来自所述细胞组织样本的所述光束的一部分的相差图像,
其中,所述滤波片插入单元将所述光学滤波片插入在所述光束分离元件与所述聚光透镜之间。
3.根据权利要求1所述的显微镜,其中,所述第二成像光学系统至少包括:
聚光透镜,聚集由所述光束分离元件分离的、来自所述细胞组织样本的所述光束的一部分;以及
分离透镜,产生由所述聚光透镜聚集的来自所述细胞组织样本的所述光束的一部分的相差图像,
其中,所述滤波片插入单元将所述光学滤波片插入到所述聚光透镜的后侧。
4.根据权利要求1所述的显微镜,其中,所述细胞组织样本包括关于细胞组织的染色方法和所述细胞组织的至少一个部位的样本信息,以及
其中,所述滤波片插入单元基于所述样本信息自动选择要插入的所述光学滤波片。
5.根据权利要求4所述的显微镜,其中,所述样本信息被描述为所述细胞组织样本的标签。
6.根据权利要求4所述的显微镜,其中,所述样本信息在所述细胞组织样本中被描述为条形码。
7.根据权利要求4所述的显微镜,其中,所述样本信息记录在嵌入所述细胞组织样本的RF标签中。
8.一种滤波片插入方法,包括:
使光束分离元件将来自放置在镜台上的细胞组织样本的光束的一部分从第一成像光学系统分离,所述第一成像光学系统对来自所述细胞组织样本的所述光束进行成像;
将吸收预定波长的光的光学滤波片插入到已被分离的来自所述细胞组织样本的所述光束的一部分的光路中;以及
摄取透过所述光学滤波片的、来自所述细胞组织样本的光束的一部分的相差图像,
其中,所述光学滤波片的插入包括根据所述细胞组织样本中的观察对象的颜色而插入吸收与所述观察对象的颜色的互补色相对应的波长的光的所述光学滤波片。
CN2011102405988A 2010-08-27 2011-08-19 显微镜和滤波片插入方法 Pending CN102385153A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-190926 2010-08-27
JP2010190926A JP2012048026A (ja) 2010-08-27 2010-08-27 顕微鏡及びフィルタ挿入方法

Publications (1)

Publication Number Publication Date
CN102385153A true CN102385153A (zh) 2012-03-21

Family

ID=45696927

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011102405988A Pending CN102385153A (zh) 2010-08-27 2011-08-19 显微镜和滤波片插入方法

Country Status (3)

Country Link
US (1) US8982454B2 (zh)
JP (1) JP2012048026A (zh)
CN (1) CN102385153A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103852879A (zh) * 2012-12-03 2014-06-11 宁波舜宇仪器有限公司 一种显微视频图像物镜补偿法
CN107405466A (zh) * 2015-01-28 2017-11-28 因诺科普有限公司 用于模拟认知损伤的系统和方法

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5863357B2 (ja) * 2011-09-21 2016-02-16 オリンパス株式会社 拡大観察装置、並びに、拡大観察装置の画像表示方法及び検鏡法切換方法
JP6019798B2 (ja) * 2012-06-22 2016-11-02 ソニー株式会社 情報処理装置、情報処理システム及び情報処理方法
JP6150586B2 (ja) * 2013-03-29 2017-06-21 オリンパス株式会社 顕微鏡
DE102013227107A1 (de) * 2013-09-03 2015-03-05 Leica Microsystems Cms Gmbh Mikroskop mit einem Element zum Verändern der Form des Beleuchtungslichtfokus
JP6394960B2 (ja) * 2014-04-25 2018-09-26 パナソニックIpマネジメント株式会社 画像形成装置および画像形成方法
IL243166B2 (en) * 2014-12-18 2023-10-01 Camtek Imaging Tech Suzhou Co Ltd Modification of the optical properties of line-scan illumination depending on the light angle along the line axis
KR20180016391A (ko) 2015-05-08 2018-02-14 플로우조, 엘엘시 데이터 발견 노드

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4845352A (en) * 1986-12-08 1989-07-04 U.S. Philips Corporation Scanning differential phase contrast microscope
US5932872A (en) * 1994-07-01 1999-08-03 Jeffrey H. Price Autofocus system for scanning microscopy having a volume image formation
CN1229927A (zh) * 1998-03-23 1999-09-29 南京理工大学 激光共焦扫描显微镜
US20050041308A1 (en) * 2003-08-21 2005-02-24 Gerhard Gaida Optical imaging system having an expand depth of field
CN1614457A (zh) * 2004-11-30 2005-05-11 哈尔滨工业大学 具有高空间分辨成像能力的共焦干涉显微镜
EP1615062A2 (de) * 2004-07-08 2006-01-11 Carl Zeiss SMS GmbH Mikroskopisches Abbildungssystem und Verfahren zur Emulation eines hochaperturigen Abbildungssystems, insbesondere zur Maskeninspektion
US20060280352A1 (en) * 2005-06-10 2006-12-14 The Cleveland Clinic Foundation Image analysis of biological objects
US20070279735A1 (en) * 2004-06-12 2007-12-06 Leica Microsystems Cms Gmbh Specimen slide unit for holding a specimen that is to be examined under a microscope or analyzed with a laboratory analysis system

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3999662B2 (ja) * 2000-12-14 2007-10-31 オリンパス株式会社 蛍光分析装置および蛍光分析方法
JP3932915B2 (ja) 2002-01-30 2007-06-20 日本電気硝子株式会社 光スイッチ
DE10309138A1 (de) * 2003-02-28 2004-09-16 Till I.D. Gmbh Mikroskopvorrichtung
US7057806B2 (en) * 2003-05-09 2006-06-06 3M Innovative Properties Company Scanning laser microscope with wavefront sensor
US20080176332A1 (en) * 2006-09-29 2008-07-24 The Regents Of The University Of California Systems and methods for identifying and disrupting cellular organelles
US7586674B2 (en) * 2006-10-17 2009-09-08 Hnu-Photonics Compuscope
JP5132480B2 (ja) * 2008-08-26 2013-01-30 オリンパス株式会社 顕微鏡
JP2011085759A (ja) * 2009-10-15 2011-04-28 Yokogawa Electric Corp 共焦点光スキャナ

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4845352A (en) * 1986-12-08 1989-07-04 U.S. Philips Corporation Scanning differential phase contrast microscope
US5932872A (en) * 1994-07-01 1999-08-03 Jeffrey H. Price Autofocus system for scanning microscopy having a volume image formation
CN1229927A (zh) * 1998-03-23 1999-09-29 南京理工大学 激光共焦扫描显微镜
US20050041308A1 (en) * 2003-08-21 2005-02-24 Gerhard Gaida Optical imaging system having an expand depth of field
US20070279735A1 (en) * 2004-06-12 2007-12-06 Leica Microsystems Cms Gmbh Specimen slide unit for holding a specimen that is to be examined under a microscope or analyzed with a laboratory analysis system
EP1615062A2 (de) * 2004-07-08 2006-01-11 Carl Zeiss SMS GmbH Mikroskopisches Abbildungssystem und Verfahren zur Emulation eines hochaperturigen Abbildungssystems, insbesondere zur Maskeninspektion
CN1614457A (zh) * 2004-11-30 2005-05-11 哈尔滨工业大学 具有高空间分辨成像能力的共焦干涉显微镜
US20060280352A1 (en) * 2005-06-10 2006-12-14 The Cleveland Clinic Foundation Image analysis of biological objects

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103852879A (zh) * 2012-12-03 2014-06-11 宁波舜宇仪器有限公司 一种显微视频图像物镜补偿法
CN103852879B (zh) * 2012-12-03 2016-03-30 宁波舜宇仪器有限公司 一种显微视频图像物镜补偿法
CN107405466A (zh) * 2015-01-28 2017-11-28 因诺科普有限公司 用于模拟认知损伤的系统和方法
CN107405466B (zh) * 2015-01-28 2020-06-23 因诺科普有限公司 用于模拟认知损伤的系统和方法

Also Published As

Publication number Publication date
US20120050850A1 (en) 2012-03-01
JP2012048026A (ja) 2012-03-08
US8982454B2 (en) 2015-03-17

Similar Documents

Publication Publication Date Title
CN102385153A (zh) 显微镜和滤波片插入方法
Wu et al. ZEISS airyscan: optimizing usage for fast, gentle, super-resolution imaging
Cox Optical imaging techniques in cell biology
Patel et al. Contemporary whole slide imaging devices and their applications within the modern pathology department: a selected hardware review
Axelrod Selective imaging of surface fluorescence with very high aperture microscope objectives
CN102375228A (zh) 显微镜控制装置及光学失真校正方法
CN102331622A (zh) 信息处理系统、显微镜控制装置及其操作方法
CN102298206A (zh) 显微镜及聚焦方法
Zeder et al. Multispot live‐image autofocusing for high‐throughput microscopy of fluorescently stained bacteria
CN103197413B (zh) 可产生三维立体图像的光学显微成像方法
Liao et al. Deep learning-based single-shot autofocus method for digital microscopy
Goodwin A primer on the fundamental principles of light microscopy: Optimizing magnification, resolution, and contrast
Liao et al. Dual light‐emitting diode‐based multichannel microscopy for whole‐slide multiplane, multispectral and phase imaging
CN205193097U (zh) 一种原子力/荧光共定位显微成像系统
CN102375227B (zh) 显微镜和重影消除方法
CN103168265A (zh) 成像系统和其关联的方法
US20210311294A1 (en) Microscope apparatus
Li et al. High throughput slanted scanning whole slide imaging system for digital pathology
Valli et al. Super‐Resolution Fluorescence Microscopy Methods for Assessing Mouse Biology
JP2012058665A (ja) 顕微鏡制御装置及び処理範囲決定方法
Elgass et al. Breakthrough instruments and products: lattice lightsheet 7—non-invasive imaging of the subcellular dynamics of life
CN104049352A (zh) 数字显微镜装置、信息处理方法以及信息处理程序
US20050088735A1 (en) Multi-axis imaging system with single-axis relay
CN203385649U (zh) 大尺度生物组织连续切片的自动化成像系统
Piper A review of high-grade imaging of diatoms and radiolarians in light microscopy optical-and software-based techniques

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C05 Deemed withdrawal (patent law before 1993)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120321