CN101782524B - 细胞图像处理装置、细胞图像处理方法以及计算机系统 - Google Patents

细胞图像处理装置、细胞图像处理方法以及计算机系统 Download PDF

Info

Publication number
CN101782524B
CN101782524B CN2009102637051A CN200910263705A CN101782524B CN 101782524 B CN101782524 B CN 101782524B CN 2009102637051 A CN2009102637051 A CN 2009102637051A CN 200910263705 A CN200910263705 A CN 200910263705A CN 101782524 B CN101782524 B CN 101782524B
Authority
CN
China
Prior art keywords
mentioned
cell image
cell
image
blood cell
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2009102637051A
Other languages
English (en)
Other versions
CN101782524A (zh
Inventor
山田和宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sysmex Corp
Original Assignee
Sysmex Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sysmex Corp filed Critical Sysmex Corp
Publication of CN101782524A publication Critical patent/CN101782524A/zh
Application granted granted Critical
Publication of CN101782524B publication Critical patent/CN101782524B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G01N15/1433—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/987—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns with the intervention of an operator
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/693—Acquisition
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N1/00—Sampling; Preparing specimens for investigation
    • G01N1/28—Preparing specimens for investigation including physical details of (bio-)chemical methods covered elsewhere, e.g. G01N33/50, C12Q
    • G01N1/2813—Producing thin layers of samples on a substrate, e.g. smearing, spinning-on
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N1/00—Sampling; Preparing specimens for investigation
    • G01N1/28—Preparing specimens for investigation including physical details of (bio-)chemical methods covered elsewhere, e.g. G01N33/50, C12Q
    • G01N1/30—Staining; Impregnating ; Fixation; Dehydration; Multistep processes for preparing samples of tissue, cell or nucleic acid material and the like for analysis
    • G01N1/31—Apparatus therefor
    • G01N1/312—Apparatus therefor for samples mounted on planar substrates
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume, or surface-area of porous materials
    • G01N15/10—Investigating individual particles
    • G01N15/14—Electro-optical investigation, e.g. flow cytometers
    • G01N15/1468—Electro-optical investigation, e.g. flow cytometers with spatial resolution of the texture or inner structure of the particle
    • G01N2015/1472—Electro-optical investigation, e.g. flow cytometers with spatial resolution of the texture or inner structure of the particle with colour
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/00584—Control arrangements for automatic analysers
    • G01N35/00722—Communications; Identification
    • G01N2035/00891—Displaying information to the operator
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/00584—Control arrangements for automatic analysers
    • G01N2035/0097—Control arrangements for automatic analysers monitoring reactions as a function of time
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/00584—Control arrangements for automatic analysers
    • G01N35/00594—Quality control, including calibration or testing of components of the analyser
    • G01N35/00613—Quality control
    • G01N35/00623—Quality control of instruments
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/00584—Control arrangements for automatic analysers
    • G01N35/00594—Quality control, including calibration or testing of components of the analyser
    • G01N35/00693—Calibration

Abstract

本发明提供一种细胞图像处理装置，其特征在于，包括：摄像部，对通过将包含细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像，取得与上述载玻片上涂抹的上述检体中包含的上述细胞相关的细胞图像；显示部；以及处理部，该处理部构成为进行以下处理，即根据由上述摄像部取得的上述细胞图像，取得反映了上述细胞图像的规定的特征的特征值，并且控制上述显示部，以显示示出所取得的上述特征值的变动的画面。

Description

细胞图像处理装置、细胞图像处理方法以及计算机系统
技术领域
本发明涉及处理通过对包括细胞的涂抹标本进行摄像而得到的细胞图像的细胞图像处理装置、细胞图像处理方法以及计算机系统。
背景技术
以往，例如在US4761075中，公开了通过显微镜对染色后的血液涂抹标本进行放大摄像，对由此得到的摄像图像进行解析而进行血球的分类以及计数的细胞图像分类装置。
在上述US4761075中，公开了一种细胞分类装置，其中针对同一检体，根据对实施了普通染色(May-Giemsa染色)的标本进行摄像而得到的图像，进行白血球、红血球的分类，根据对实施了超活体染色(super vital stain)的标本进行摄像而得到的图像，进行网状红血球计数，根据对实施了过氧化物酶(peroxidase)染色的标本进行摄像而得到的图像，进行异常白血球检测。在上述细胞分类装置中，如果所有染色标本的数据处于正常范围内，则将该检体分类到正常检体组，如果同一检体的各种染色数据未处于正常范围内，则通过是否检测到异常血球、或是否存在某值以上的不明球等来判断是否进行精密分析。另外，该细胞分类装置针对处于既不能判断为正常也不能判断为异常的混合存在区域那样的假阳性区域，进而实施用于提高分析精度的精密的自动再检查。
在上述那样的细胞图像分类装置中，如果无法正常地进行血液涂抹标本的染色、或在光源以及包括照相机的摄像部中产生异常等时，难以或无法高精度地进行血球的分类以及计数等。因此，为了总是正常地进行血球分类/计数，需要正常地保持血液涂抹标本的染色状态以及摄像部的状态。但是，在上述US4761075公开的细胞分类装置中，没有设置用于用户确认血液涂抹标本的染色状态或摄像部的状态的功能。因此，用户例如针对同一血液涂抹标本，对由细胞分类装置得到的血球的分类/计数结果、与用户通过显微镜进行目视检查而得到的血球的分类/计数结果进行比较，从而确认血液涂抹标本的染色状态以及摄像部的状态。这样的确认工作存在如下问题：对用户造成较大的负担，并且因进行目视检查的用户的技能以及经验而在结果上产生偏差。
发明内容
鉴于这样的情况，本发明的目的在于提供一种细胞图像处理装置、细胞图像处理方法以及计算机系统，可以容易地确认涂抹标本的染色状态或摄像部的状态。
本发明的保护范围仅由权利要求书限定，并且不受任何发明内容中的内容的影响。
本发明包括以下技术方案。
(1)一种细胞图像处理装置，其特征在于，包括：
摄像部，对通过将包含细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像，取得与在上述载玻片上涂抹的上述检体中包含的上述细胞相关的细胞图像；
显示部；以及
处理部，该处理部构成为进行以下处理，即根据由上述摄像部取得的上述细胞图像，取得反映了上述细胞图像的规定的特征的特征值，并且控制上述显示部，以显示示出所取得的上述特征值的变动的画面。
(2)根据(1)的细胞图像处理装置，其特征在于，
上述处理部控制上述显示部，以显示能够比较地示出上述特征值和与上述特征值的异常相关的指标的上述画面。
(3)根据(1)的细胞图像处理装置，其特征在于，
上述处理部控制上述显示部，以显示时序列地示出上述特征值的每日的变动的上述画面。
(4)根据(1)的细胞图像处理装置，其特征在于，
上述摄像部构成为取得包括规定的颜色分量的亮度的细胞图像，
上述处理部取得与上述细胞图像的上述规定的颜色分量的亮度相关的信息而作为上述特征值。
(5)根据(1)的细胞图像处理装置，其特征在于，
还包括制作上述涂抹标本的涂抹标本制作部。
(6)根据(5)的细胞图像处理装置，其特征在于，
上述涂抹标本制作部具备染色部，该染色部对在上述载玻片上涂抹的上述检体中包含的上述细胞进行染色，
上述处理部根据上述细胞图像中的细胞部分的图像，取得反映了上述染色部的状态的第一特征值，根据上述细胞图像中的上述细胞部分以外的图像，取得反映了上述摄像部的状态的第二特征值。
(7)根据(6)的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
对由上述摄像部取得的上述细胞图像的亮度进行校正；以及
根据校正后的上述细胞图像中的细胞部分的图像，取得反映了上述染色部的状态的上述第一特征值。
(8)根据(6)的细胞图像处理装置，其特征在于，
上述摄像部具备光源，
上述处理部取得反映了上述光源的光量的上述第二特征值。
(9)根据(1)的细胞图像处理装置，其特征在于，
上述处理部根据在规定期间内由上述摄像部取得的多个细胞图像中的每一个，取得分别反映了各细胞图像的上述规定的特征的多个数值，根据取得的上述多个数值，取得上述特征值。
(10)根据(9)的细胞图像处理装置，其特征在于，
上述处理部通过对上述多个数值进行平均，而取得上述特征值。
(11)根据(9)的细胞图像处理装置，其特征在于，
上述处理部根据从在上述规定期间内被上述摄像部摄像的多个涂抹标本中的与规定的条件匹配的涂抹标本中取得的多个细胞图像中的每一个，取得上述多个数值。
(12)根据(1)的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
受理关机的指示；以及
根据受理的上述关机的指示，控制上述显示部，以显示上述画面。
(13)根据(1)的细胞图像处理装置，其特征在于，
上述摄像部构成为对通过将规定的标准试样在载玻片上涂抹而制作的标准涂抹标本进行摄像，取得与包含在上述标准涂抹标本中的细胞相关的标准细胞图像，
上述处理部构成为进行以下处理：
根据上述标准细胞图像，取得反映了上述标准细胞图像的规定的特征的特征值；以及
控制上述显示部，以显示示出根据上述标准细胞图像取得的上述特征值的变动的画面。
(14)根据(1)的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
针对每个涂抹标本，对上述特征值与规定的基准值进行比较，从而检测上述特征值的异常；以及
控制上述显示部，以在检测到上述特征值的异常时，显示与上述特征值的异常相关的信息。
(15)根据(5)的细胞图像处理装置，其特征在于，还包括：
检体分析部，分析上述检体；以及
检体搬送部，将由上述检体分析部分析的上述检体搬送到上述涂抹标本制作部，
其中，上述涂抹标本制作部构成为从由上述检体搬送部搬送的上述检体制作上述涂抹标本。
(16)根据(1)～(15)中的任意一个的细胞图像处理装置，其特征在于，
上述处理部根据上述细胞图像，进行上述细胞的分类。
(17)一种细胞图像处理方法，其特征在于，包括以下步骤：
对通过将包含细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像，取得与在上述载玻片上涂抹的上述检体中包含的上述细胞相关的细胞图像；
根据上述细胞图像，取得反映了上述细胞图像的规定的特征的特征值；以及
在显示部中显示示出所取得的上述特征值的变动的画面。
(18)一种计算机系统，其特征在于，包括：
细胞图像取得单元，取得与细胞相关的细胞图像，该细胞图像是对通过将包含上述细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像而取得的；
特征值取得部件，根据由上述细胞图像取得部件取得的上述细胞图像，取得反映了上述细胞图像的规定的特征的特征值；以及
显示控制部件，控制显示部，以显示示出由上述特征值取得部件取得的上述特征值的变动的画面。
通过上述(1)的结构，可以容易地确认涂抹标本的染色状态或摄像部的状态。
另外，通过上述(2)的结构，可以在涂抹标本的染色状态或摄像部的染色状态成为异常之前，进行涂抹标本制作部或摄像部的维护。
另外，通过上述(6)的结构，可以根据一个细胞图像，取得反映了染色部的状态的第一特征值以及反映了摄像部的状态的第二特征值，所以可以实现处理部的处理的迅速化。
另外，通过上述(12)的结构，在对装置进行关机时可靠地显示上述画面。因此，可以抑制用户忘记检查涂抹标本的染色状态以及摄像部的状态。
另外，通过上述(14)的结构，可以针对每个涂抹标本，检测涂抹标本的染色状态的异常以及摄像部的状态的异常。
附图说明
图1A是示出实施方式的检体处理系统的整体结构的俯视图。
图1B是示出实施方式的检体处理系统的结构的一部分的立体图。
图2是示出载玻片的一部分的图。
图3是示出实施方式的涂抹标本制作装置的结构的框图。
图4是示出实施方式的标本摄像装置的结构的框图。
图5是示出实施方式的显微镜单元的结构的一部分的立体图。
图6是示出实施方式的图像处理单元的结构的框图。
图7A是示出实施方式的检体数据库的结构的示意图。
图7B是示出实施方式的血球数据库的结构的示意图。
图7C是示出实施方式的特征值履历数据库的结构的示意图。
图8是示出实施方式的血球图像显示单元的结构的框图。
图9是示出实施方式的血球分析装置的测定单元的概略结构的框图。
图10是示出实施方式的血球分析装置的信息处理单元的结构的框图。
图11是示出实施方式的血球分析装置的信息处理单元的动作流程的流程图。
图12是示出血球图像的登记动作中的显微镜单元的动作步骤的流程图。
图13A是示出血球图像的登记动作中的图像处理单元的动作步骤的流程图(前半部分)。
图13B是示出血球图像的登记动作中的图像处理单元的动作步骤的流程图(后半部分)。
图14是说明白血球检测中的载玻片上的检体的扫描的图案的图。
图15A是说明白血球检测用的线传感器的视场的图。
图15B是示出白血球检测用的线传感器的信号波形的图。
图16A是示出进行了正常的染色时的校正后的血球图像的例子的图。
图16B是发生了染色异常时的校正后的血球图像的例子的图。
图17A是示出通过正常的灯光量下的摄像而得到的校正前的血球图像的例子的图。
图17B是示出通过产生了灯光量的降低时的摄像而得到的校正前的血球图像的例子的图。
图18A是示出用于通知灯光量异常的发生的错误画面的图。
图18B是示出用于通知染色异常的发生的错误画面的图。
图19A是示出血球图像的显示动作中的血球图像显示单元的初始动作的步骤的流程图。
图19B是示出血球图像的显示动作中的图像处理单元的检体信息发送动作的步骤的流程图。
图20A是示出血球图像的显示动作中的血球图像显示单元的图像显示动作的步骤的流程图。
图20B是示出血球图像的显示动作中的图像处理单元的血球图像发送动作的步骤的流程图。
图21是示出血球图像回顾(review)画面的一个例子的图。
图22是示出图像处理单元的关机动作的流程的流程图。
图23是示出精度管理画面的一个例子的图。
图24A是示出第一曲线、第二曲线以及第三曲线的一个例子的图。
图24B是示出第一曲线、第二曲线以及第三曲线的另一例子的图。
具体实施方式
以下，参照附图，对本发明的优选的实施方式进行说明。
本实施方式的检体处理系统从血液检体制作血液涂抹标本，通过显微镜对染色后的血液涂抹标本进行放大摄像，对由此得到的血球图像进行处理，从而计算表示血球图像的特征的特征值，将该特征值的变动显示在画面中。
(检体处理系统的结构)
图1A是示出本实施方式的检体处理系统的整体结构的俯视图，图1B是示出其一部分的立体图。如图1A所示，检体处理系统1具备涂抹标本制作装置2、标本摄像装置3、以及血球分析装置4。涂抹标本制作装置2、标本摄像装置3、以及血球分析装置4经由通信网路可进行通信地与用于登记测定命令并且提供测定命令的主机计算机7连接。另外，血球分析装置4与涂抹标本制作装置2通过搬送收容在试管中的血液检体的检体搬送装置5连接，将由血球分析装置4分析的检体搬送到涂抹标本制作装置2，涂抹标本制作装置3使用该检体制作涂抹标本。通过标本摄像装置3对制作的涂抹标本进行摄像，通过图像处理进行血球的分类。
(涂抹标本制作装置的结构)
涂抹标本制作装置2(例如Sysmex公司制的涂抹标本制作装置SP-1000i)吸引血液检体，在载玻片100上滴下，并将该血液检体在载玻片100上薄薄地延伸，并使其干燥后，向该载玻片100供给染色液而对载玻片100上的血液进行染色，从而制作涂抹标本。另外，涂抹标本制作装置2具有每小时制作120个涂抹标本的处理能力。图2是示出载玻片100的一部分的图。如图2所示，在涂抹标本制作装置2中制作的载玻片100的正面部(信息显示区域)100a中，通过内置于涂抹标本制作装置2的热转印打印机(未图示)，对以下内容进行打印：包括检体序号(ID)、日期、受理序号以及姓名等标本信息的二维条形码100b；包含在标本信息中的作为属性信息的日期100c(在图2中07/06/04)；患者姓名100d(在图2中ooxx)；以及检体序号(ID)的一部分100e(在图2中BA15617)。
另外，如图1B所示，涂抹标本制作装置2包括由触摸面板构成的显示操作部2a、起动开关2b、电源开关2c、以及罩2d。另外，在涂抹标本制作装置2中，设置有用于将收容有血液的试管151从检体搬送装置5侧搬送到涂抹标本制作装置2侧的把手部件2e。在收容有血液的试管151上，安装了橡皮塞151a。另外，检体搬送装置5如图1B所示，用于将收纳收容有血液的试管151的检体架子150自动地搬送到涂抹标本制作装置2。
图3是示出涂抹标本制作装置2的结构的框图。如图3所示，涂抹标本制作装置2具备检体分注部21、涂抹部22、载玻片搬送部23、染色部24、以及控制部25。
检体分注部21具备吸引管(未图示)，将该吸引管刺入通过检体搬送装置5搬送的检体架子150的试管151的橡皮塞151a，从该试管151中吸引血液检体。另外，检体分注部21构成为将吸引的血液检体在载玻片100上滴下。涂抹部22构成为将在载玻片100上滴下的血液检体涂抹并使其干燥，进而在载玻片100上进行打印。
设置有载玻片搬送部23，用于将通过涂抹部22涂抹了血液检体的载玻片100收容在未图示的盒中，进而搬送该盒。染色部24对通过载玻片搬送部23搬送至染色位置的盒内的载玻片100供给染色液。控制部25对检体分注部21、涂抹部22、载玻片搬送部23、以及染色部24进行控制，执行上述涂抹标本制作动作。将这样制作的涂抹标本送出到标本搬送装置6。
(标本搬送装置的结构)
如图1B所示，在涂抹标本制作装置2与标本摄像装置3之间设置有标本搬送装置6。标本搬送装置6用于将从涂抹标本制作装置2接收的盒中收容的载玻片100搬送到标本摄像装置3。另外，标本搬送装置6如图1B所示包括显示部6a、电源开关6b、以及罩6c。如图3所示，该标本搬送装置6构成为经由交接口6d，向标本摄像装置3授受摄像对象的载玻片100。
(标本摄像装置的结构)
图4是示出本实施方式的标本摄像装置的结构的框图。另外，图4是示意地示出装置的结构的图，为便于理解，传感器以及载玻盒等的配置与实际稍微不同。例如，在图4中，上下配置了WBC检测用的传感器与自动聚焦用的传感器，但实际上如后述图5所示，在大致同一平面内配置了两个传感器。
标本摄像装置3具备：对通过自动聚焦对焦的血液涂抹标本的放大图像进行摄像的显微镜单元3a；处理所摄像的图像而进行血液中的白血球的分类，对该白血球的每个种类进行计数的图像处理单元3b；以及与该图像处理单元3b连接，显示所摄像的图像以及分析结果等的血球图像显示单元3c。另外，上述图像处理单元3b和血球图像显示单元3c也可以相互不独立，而可以将两者一体化。另外，在标本摄像装置3的附近，配置有上述标本搬送装置6，构成为通过标本搬送装置6向显微镜单元3a自动地供给由涂抹标本制作装置2制作的血液涂抹标本。
(显微镜单元3a的结构)
图5是示出显微镜单元3a的结构的一部分的立体图。显微镜单元3a具备物镜32，该物镜32构成对在XY台31上配置的载玻片100上薄薄地延伸涂敷的血液的像进行放大的显微镜的透镜系统的一部分。通过由XY台驱动电路33(参照图4)驱动控制的驱动部(未图示)，保持标本(在上面涂敷了血液的载玻片100)的上述XY台31在前后左右(X方向以及Y方向)上自由移动。另外，上述物镜32通过由物镜驱动电路34驱动控制的驱动部(未图示)在上下方向(Z方向)上自由移动。
载玻片100以层叠了多个的状态收容在载玻盒35内，通过由盒搬送驱动电路36驱动控制的搬送部(未图示)搬送该载玻盒35。在上述XY台31上，相对停止在规定位置的上述载玻盒35内收容的载玻片100进退自如地设置了可以夹持载玻片100的长度方向的两端附近两个部位的夹盘部37(参照图5)。并且，使上述夹盘部37相对载玻盒35进出，通过形成在该夹盘部37前端部的开闭自如的爪部37a的开闭操作来夹持载玻片100，接下来使夹盘部37后退，从而可以从载玻盒35中引出载玻片100，从而配置在XY台31的规定位置。
在载玻片100的下方设置有作为光源的灯38，来自该灯38的光通过载玻片100上的血液，进而经由配置在光路上的半透半反镜39以及干涉滤波器310，入射到多个像素排列成一列的自动聚焦用的线传感器311、多个像素排列成一列的白血球(WBC)检测用的传感器312、以及CCD照相机313。在白血球检测用的传感器312上，连接了由FPGA或ASIC等构成的白血球检测部314，向白血球检测部314提供传感器312的输出信号。另外，在自动聚焦用的传感器311上，连接了由FPGA或ASIC等构成的聚焦估算部315，向聚焦估算部315提供传感器311的输出信号。根据与传感器312的入射光对应的输出信号，由白血球检测部314进行白血球的检测，并且根据与传感器311的入射光对应的输出信号，由聚焦估算部315估算出自动聚焦的动作中使用的信息，根据上述信息进行自动聚焦的动作。
另外，显微镜单元3a具备控制部316以及通信接口317、318。控制部316具备CPU以及存储器，与XY台驱动电路33、物镜驱动电路34、盒搬送驱动电路36、白血球检测部314、聚焦估算部315、通信接口317以及318分别可进行通信地连接，通过上述控制部316执行存储在存储器中的控制程序，控制上述各机构。
通信接口317是Ethernet(注册商标)接口。上述通信接口317经由通信电缆与图像处理单元3b可进行数据通信地连接。另外，通信接口318经由A/D变换器313a与CCD照相机313连接，并且经由通信电缆与图像处理单元3b连接。通过A/D变换器313a对从CCD照相机313中输出的图像信号(模拟信号)进行A/D变换，向通信接口318提供从A/D变换器313a中输出的图像数据(数字数据)并发送给图像处理单元3b。
另外，显微镜单元3a具备二维条形码读出器319。如上所述，在载玻片100的正面部100a，打印了表示检体ID的二维条形码，由二维条形码读出器319读取导入到显微镜单元3a中的载玻片100的二维条形码。向控制部316提供这样读取的检体ID。
(图像处理单元3b的结构)
接下来，对图像处理单元3b的结构进行说明。图6是示出图像处理单元3b的结构的框图。图像处理单元3b由计算机320实现。如图6所示，计算机320具备主体321、图像显示部322、以及输入部323。主体321具备CPU 321a、ROM 321b、RAM 321c、硬盘321d、读出装置321e、输入输出接口321f、通信接口321g、321h、321i、以及图像输出接口321j，CPU 321a、ROM 321b、RAM 321c、硬盘321d、读出装置321e、输入输出接口321f、通信接口321g、通信接口321h、通信接口321i、以及图像输出接口321j通过总线321k连接。
CPU 321a可以执行载入到RAM 321c中的计算机程序。并且，通过该CPU 321a执行后述那样的图像处理程序324a，计算机320作为图像处理单元3b发挥功能。
ROM 321b由掩模ROM、PROM、EPROM、或EEPROM等构成，记录了在CPU 321a中执行的计算机程序以及其中使用的数据等。
RAM 321c由SRAM或DRAM等构成。RAM 321c用于读出记录在硬盘321d中的图像处理程序324a。另外，在CPU 321a执行计算机程序时，用作CPU 321a的工作区域。
硬盘321d安装有操作系统以及应用程序等用于在CPU 321a中执行的各种计算机程序以及该计算机程序的执行中使用的数据。后述的图像处理程序324a也安装在该硬盘321d中。
进而，在硬盘321d中，设置有用于保存血球图像的血球图像文件夹325。在上述血球图像文件夹325中，针对每个检体设置有文件夹，进而在该文件夹内存储有如后所述那样得到的血球图像。对针对每个检体设置的各文件夹，附加了包括检体ID的文件夹名，可以使用该检体ID来识别与期望的检体ID对应的文件夹。另外，对该血球图像文件夹325进行了与血球图像显示单元3c的共有设定，可以从血球图像显示单元3c访问存储在该血球图像文件夹325中的文件。
另外，在硬盘321d中，设置有：用于存储与检体相关的信息的检体数据库DB1；用于存储通过图像处理对白血球进行分类而得到的结果的血球数据库DB2；以及用于存储与染色相关的特征值即平均核G值以及与显微镜3a相关的特征值即平均背景G值的特征值履历数据库DB3。
图7A是示出检体数据库DB1的结构的示意图。在检体数据库DB1中，包括：检体字段F11，存储检体ID；字段F12、F13、F14、...，用于存储表示是否由血球分析装置4判定为白血球散布图异常的信息(白血球散布图异常标志)、表示是否由血球分析装置4判定为NRBC(有核红血球)散布图异常的信息(NRBC散布图异常标志)、表示是否由血球分析装置4判定为嗜中性白细胞减少异常的信息(嗜中性白细胞减少异常标志)等判定为各种异常的信息；字段F15，用于存储通过标本摄像装置3摄像的测定日；染色异常字段F16，存储表示是否为染色异常的信息(染色异常标志)；光量异常字段F17，存储表示是否为灯光量异常的信息(灯光量异常标志)；第一平均核G值字段F18，存储后述的第一平均核G值；以及第一平均背景G值字段F19，存储后述的第一平均背景G值。在白血球散布图异常字段F12、NRBC散布图异常字段F13、嗜中性白细胞减少异常字段F14、染色异常字段F16、光量异常字段F17等存储表示异常的信息的字段中，在没有发生异常的情况下存储“0”，在发生了异常的情况下存储“1”。另外，虽然为简化图而进行了省略，但在检体数据库DB1中，还设置有用于存储由血球分析装置4得到的分析结果(白血球数、红血球数)的数值数据的字段。另外，在检体数据库DB1中，还设置有：存储患者姓名的字段；存储识别住院楼的信息的字段；存储年龄的字段；以及存储白血球计数数N的字段等。
图7B是示出血球数据库DB2的结构的示意图。血球数据库DB2是针对每个检体设置的，在各血球数据库DB2中，包括表示检体ID的数据。由此，可以根据检体ID来识别对应的血球数据库DB2。在上述血球数据库DB2中，设置有：存储识别白血球的白血球ID的白血球ID字段F21；存储白血球的分类结果的种类字段F22；以及存储用于识别无法分类的白血球的信息的再确认对象字段F23。在再确认对象字段F23中，在正常地进行了白血球分类的情况下存储“0”，在无法分类而成为再确认的对象的情况下存储“1”。
图7C是示出特征值履历数据库DB3的结构的示意图。在特征值履历数据库DB3中，设置有：日期字段F31，存储日期信息；第一特征值字段F32，存储第二平均核G值；第二特征值字段F33，存储第二平均背景G值；以及分类失败率字段F34，存储分类失败率。另外，对于第二平均核G值、第二平均背景G值、以及分类失败率，将在后面叙述。
读出装置321e由软盘驱动器、CD-ROM驱动器、或DVD-ROM驱动器等构成，可以读出移动式记录介质324中记录的计算机程序或数据。另外，在移动式记录介质324中，存储有用于使计算机作为图像处理单元3b而发挥功能的图像处理程序324a，计算机320从该移动式记录介质324中读出图像处理程序324a，可以将该图像处理程序324a安装在硬盘321d中。
另外，上述图像处理程序324a不仅可以通过移动式记录介质324提供，而且还可以从利用电气通信线路(有线、无线)与计算机320可通信地连接的外部的设备通过上述电气通信线路来提供。例如，还可以设为上述图像处理程序324a存储在因特网上的服务器计算机的硬盘内，计算机320访问该服务器计算机，下载该计算机程序，将其安装在硬盘321d中。
另外，在硬盘321d中，安装有例如美国微软公司制造销售的Windows(注册商标)等多任务操作系统。在以下的说明中，本实施方式的图像处理程序324a在该操作系统上动作。
输入输出接口321f例如由USB、IEEE 1394、或RS-232C等串行接口、SCSI、IDE、或IEEE 1284等并行接口、以及包括D/A变换器、A/D变换器等的模拟接口等构成。在输入输出接口321f上，连接了由键盘以及鼠标构成的输入部323，通过用户使用该输入部323，可以向计算机320输入数据。另外，在输入输出接口321f上，连接了设置在显微镜单元320中的CCD照相机313，可以取入通过CCD照相机313的摄像得到的图像。
通信接口321g、321h分别是Ethernet(注册商标)接口。通信接口321g经由LAN与血球图像显示单元3c连接。计算机320可以通过通信接口321g在与使用规定的通信协议和该LAN连接的血球图像显示单元3c以及主机计算机7之间进行数据的发送接收。另外，通信接口321h经由通信电缆与显微镜单元3a的通信接口317可进行数据通信地连接。
通信接口321i经由通信电缆与显微镜单元3a的通信接口318可进行数据通信地连接。由此，通过通信接口321i接收由CCD照相机313摄像的摄像图像。
图像输出接口321j与由LCD或CRT等构成的图像显示部322连接，向图像显示部322输出与从CPU 321a中提供的图像数据对应的影像信号。图像显示部322按照输入的影像信号，显示图像(画面)。
(血球图像显示单元3c的结构)
血球图像显示单元3c由计算机构成。另外，上述血球图像显示单元3c经由LAN与图像处理单元3b连接，可以读出并显示图像处理单元3b的硬盘321d中设置的血球图像文件夹325内的血球图像。
图8是示出血球图像显示单元3c的结构的框图。血球图像显示单元3c由计算机330实现。如图8所示，计算机330具备主体331、图像显示部332、以及输入部333。主体331具备CPU 331a、ROM331b、RAM 331c、硬盘331d、读出装置331e、输入输出接口331f、通信接口331g、以及图像输出接口321h，CPU 331a、ROM 331b、RAM 331c、硬盘331d、读出装置331e、输入输出接口331f、通信接口331g、以及图像输出接口321h通过总线331i连接。
硬盘331d安装有操作系统以及应用程序等用于在CPU 331a中执行的各种计算机程序以及该计算机程序的执行中使用的数据。后述的血球图像显示程序334a也安装在该硬盘331d中。
读出装置331e由软盘驱动器、CD-ROM驱动器、或DVD-ROM驱动器等构成，可以读出移动式记录介质334中记录的计算机程序或数据。另外，在移动式记录介质334中，存储有用于使计算机作为血球图像显示单元3c而发挥功能的血球图像显示程序334a，计算机330从该移动式记录介质334中读出血球图像显示程序334a，可以将该血球图像显示程序334a安装在硬盘331d中。
输入输出接口331f例如由USB、IEEE 1394、SAS、SATA、或RS-232C等串行接口、SCSI、IDE、或IEEE 1284等并行接口、以及包括D/A变换器、A/D变换器等的模拟接口等构成。在输入输出接口331f上，连接了由键盘以及鼠标构成的输入部333，通过用户使用该输入部333，可以向计算机330输入数据。
通信接口331g是Ethernet(注册商标)接口。通信接口331g经由LAN与图像处理单元3b连接。计算机330可以通过通信接口331g在与使用规定的通信协议和该LAN连接的图像处理单元3b之间进行数据的发送接收。
另外，血球图像显示单元3c的其他结构与上述图像处理单元3b的结构相同，所以省略其说明。
(血球分析装置的结构)
血球分析装置4是光学式流式细胞术(Flow cytometry)方式的多项目血球分析装置，关于包含在血液检体中的血球取得侧方散射光强度、荧光强度等，据此对包含在检体中的血球进行分类，并且针对每个种类计数血球数，制作针对每个种类对如上分类的血球进行了分色的散布图，并显示该散布图。上述血球分析装置4具备：测定血液检体的测定单元41；以及处理从测定单元41输出的测定数据，并显示血液检体的分析结果的信息处理单元42。
图9是测定单元41的概略结构的框图。测定单元41具备检体分注部411、测定试样调制部412、光学检测部413、信号处理电路414、以及控制部415。
检体分注部411具备吸引管(未图示)，将该吸引管刺入在检体搬送装置5的测定线上搬送的检体架子150中收容的试管151的盖部151a，从该试管151中吸引血液检体。测定试样调制部412具备混合容器(未图示)，将通过检体分注部411分注的血液检体、试剂以及稀释液混合搅拌，而调制测定试样。
光学检测部413具备流动池(flow cell)(未图示)，通过对该流动池供给测定试样来形成测定试样的细的流动，对该测定试样照射光，通过光学传感器取得侧方散射光信号、前方散射光信号、以及荧光信号。将这些信号输出给信号处理电路414。信号处理电路414是对从光学检测部413中输出的电信号进行处理的电路。上述信号处理电路414取得侧方散射光信号、前方散射光信号、荧光信号的峰值以及脉冲宽度等参数。
控制部415具备CPU以及存储器，与检体搬送装置5可进行数据通信地连接。上述控制部415按照从检体搬送装置5提供的分析项目，对检体分注部411、测定试样调制部412、光学检测部413、以及信号处理电路414进行控制，执行与上述分析项目对应的测定动作。另外，构成为将包括由信号处理电路414得到的上述参数的测定数据发送给信息处理单元42。
接下来，对信息处理单元42的结构进行说明。信息处理单元42由计算机构成。图10是示出信息处理单元42的结构的框图。信息处理单元42由计算机42a实现。如图10所示，计算机42a具备主体421、图像显示部422、以及输入部423。主体421具备CPU421a、ROM 421b、RAM 421c、硬盘421d、读出装置421e、输入输出接口421f、通信接口421g、以及图像输出接口421h，CPU 421a、ROM 421b、RAM 421c、硬盘421d、读出装置421e、输入输出接口421f、通信接口421g、以及图像输出接口421h通过总线421j连接。
硬盘421d安装有操作系统以及应用程序等用于在CPU 421a中执行的各种计算机程序以及该计算机程序的执行中使用的数据。另外，用于对从测定单元41中输出的测定数据进行分析，而得到检体的分析结果的分析程序424a也安装在该硬盘421d中。
通信接口421g是Ethernet(注册商标)接口。通信接口421g经由LAN与测定单元41连接。计算机42a可以通过通信接口421g在与使用规定的通信协议和该LAN连接的测定单元41之间进行数据的发送接收。另外，上述通信接口421g经由上述LAN与主机计算机7可进行通信地连接。
另外，信息处理单元42的其他结构与上述图像处理单元3b的结构相同，所以省略其说明。
(检体处理系统1的动作)
接下来，对本实施方式的检体处理系统1的动作进行说明。
(血球分析装置4的动作)
首先，对血球分析装置4的动作进行说明。图11是示出血球分析装置4的信息处理单元42的动作流程的流程图。通过检体搬送装置5将收容有血球分析装置4的分析对象的检体的检体架子150搬送至血球分析装置4的前方。此时，检体搬送装置5向血球分析装置4发送表示分析对象的检体的吸引指示的吸引指示数据。经由测定单元41的控制部415由信息处理单元42的通信接口421g接收从检体搬送装置5发送的吸引指示数据(步骤S101)。由信息处理单元42的CPU421a执行的分析程序424a是事件触发型的程序，在CPU 421a中，在发生了接收吸引指示数据的事件时，调出步骤S102的处理。
在步骤S102中，CPU 421a经由通信接口421g向主机计算机7发送包括包含在吸引指示数据中的检体ID的命令要求数据(步骤S102)，向主机计算机7询问测定命令。之后，CPU 421a等待测定命令的接收(在步骤S103中“否”)，在通过信息处理单元42的通信接口421g接收到从主机计算机7中发送的测定命令时(在步骤S103中“是”)，将接收到的测定命令存储在硬盘421d中(步骤S104)。
接下来，CPU 421a将包括包含在存储的测定命令中的分析项目的测定开始要求数据发送给测定单元41(步骤S105)，测定单元41的控制部415接收该测定开始要求数据，从而针对包含在该测定开始要求数据中的分析项目进行血液检体的测定。测定单元41的控制部415在测定完成之后，将反映了通过测定得到的侧方散射光强度以及荧光强度等的测定数据(原始数据)发送给信息处理单元42。CPU 421a等待测定数据的接收(在步骤S106中“否”)，在通过通信接口421g接收到测定数据时(在步骤S106中“是”)，执行测定数据的解析处理(步骤S107)，对包含在检体中的血球进行分类，并且针对每个种类对血球数进行计数，制作针对每个种类对这样分类的血球进行分色的散布图。在上述测定数据的解析处理中，检测白血球散布图(用于针对每个种类对白血球进行分类的散布图)的异常、NRBC散布图(用于检测有核红血球的散布图)的异常、嗜中性白细胞小于规定的正常范围的嗜中性白细胞减少异常、嗜中性白细胞大于上述正常范围的嗜中性白细胞增加异常、单球大于规定的正常范围的单球增加异常、嗜酸球大于规定的正常范围的嗜酸球增加异常、嗜碱球大于规定的正常范围的嗜碱球增加异常、白血球的总数小于规定的正常范围的白血球减少异常、白血球的总数大于规定的正常范围的白血球增加异常、以及红芽球大于规定的正常范围的红芽球增加异常等异常，对通过解析处理生成的分析结果数据，附加表示检测到异常的异常标志。将通过测定数据的解析处理生成的分析结果数据与包含在测定命令中的患者信息等一起存储在硬盘421d中(步骤S108)，并且发送给主机计算机7(步骤S109)。主机计算机7将分析结果数据与上述测定命令集成地存储到硬盘中。在完成了步骤S109的处理之后，CPU421a结束处理。
(血球图像的登记动作)
接下来，说明涂抹标本制作装置2制作血液涂抹标本，标本摄像装置3对血液涂抹标本中的血球进行摄像，并存储血球图像的血球图像的登记动作。通过检体搬送装置5，将如上所述收容有向通过血球分析装置4实现的分析供给的检体的检体架子150搬送至涂抹标本制作装置2。涂抹标本制作装置2吸引这样搬送的试管151中收容的检体，将该检体在载玻片100上滴下并延伸，将该载玻片100浸渍到染色液中，从而制作血液涂抹标本。另外，在通过涂抹标本制作装置2对标本实施的染色中，设为迈格吉(May Grunwald Giemsa)染色(梅-吉(May Giemsa)染色)、Wright Giemsa染色、或Wright单染色。通过检体搬送装置5向下游侧搬送收容由涂抹标本制作装置2吸引了检体的试管151的检体架子150，由用户将上述试管151在保冷库等中保管。
通过标本搬送装置6从涂抹标本制作装置2向显微镜单元3a自动供给如上所述制作的血液涂抹标本(载玻片100)。
图12是示出血球图像的登记动作中的显微镜单元3a的动作步骤的流程图，图13A以及图13B是示出血球图像的登记动作中的图像处理单元3b的动作步骤的流程图。显微镜单元3a在从标本搬送装置6中受理了载玻片100时，通过未图示的传感器对其进行检测(步骤S201)。由控制部316执行的控制程序是事件触发型的程序，在显微镜单元3a的控制部316中，在发生了从标本搬送装置6中受理载玻片100的事件时，调出步骤S202的处理。
在步骤S202中，控制部316将收容所受理的载玻片100的载玻盒35搬送至规定的条形码读取位置，使二维条形码读出器319读取检体条形码(步骤S202)。接下来，控制部316经由通信接口317向图像处理单元3b发送在步骤S202中取得的检体ID(步骤S203)。
通过图像处理单元3b的通信接口321h接收从显微镜单元3a中发送的检体ID(图13A的步骤S221)。由图像处理单元3b的CPU 321a执行的图像处理程序324a是事件触发型的程序，在CPU 321a中，在发生了接收检体ID的事件时，调出步骤S222的处理。
在步骤S222中，CPU 321a经由通信接口321g，向主机计算机发送包括所接收的检体ID的命令要求数据(步骤S222)。在从主机计算机发送的命令中，包括检体ID、患者姓名、患者性别、住院楼信息、注释、血球分析装置4的分析结果(白血球数、红血球数等数值数据)、由血球分析装置4检测的各种异常信息(白血球散布图异常标志、NRBC散布图异常标志、嗜中性白细胞减少异常标志、嗜中性白细胞增加异常标志、单球增加异常标志、嗜酸球增加异常标志、嗜碱球增加异常标志、白血球减少异常标志、白血球增加异常标志、以及红芽球增加异常标志等)、以及白血球的计数数N的数据。CPU 321a等待命令接收(在步骤223中“否”)，在接收到命令后(在步骤S223中“是”)，通过通信接口321h，向显微镜单元3a发送包括上述命令中包含的白血球的计数数N的测定开始指示数据(步骤S224)，对表示所解析的血球图像的数量的变量i设置1(步骤S225)。
此处，显微镜单元3a等待测定开始指示数据(在图12的步骤S204中“否”)。在通过显微镜单元3a的通信接口317接收到从图像处理单元3b中发送的测定开始指示数据的情况下(在步骤S204中“是”)，控制部316将载玻盒35搬送至规定位置，使夹盘部37夹持停止在规定位置的载玻片100，接下来使夹盘部37后退，从而从载玻盒35中引出载玻片，设置在XY台31的规定位置(摄像位置)(步骤S205)。另外，控制部316对表示摄像次数的变量j设置1(步骤S206)。
接下来，对涂敷在载玻片100上的血液中的白血球进行检测(步骤S207)。使用上述传感器312来进行该检测。传感器312是线传感器，其视场是400μm左右。图14是说明白血球检测中的载玻片上的检体的扫描的图案的图。控制部316使上述XY台31在X方向以及Y方向上移动，以使传感器312大致锯齿地从长度方向的一端朝向另一端对载玻片100进行扫描(参照图14)。根据防止漏检并且提高扫描效率这样的观点，上述大致锯齿的扫描的载玻片100长度方向的间隔D通常是300～500μm左右，并且根据载玻片100的宽度一般是26mm左右，上述扫描的载玻片100宽度方向的尺寸H通常是14～18mm左右。
虽然红血球几乎不吸收光的红色分量，但白血球的核大量吸收光的红色分量，所以通过对该红色分量进行检测，可以容易地区分白血球和红血球。图15A是说明线传感器312的视场的图，图15B是示出线传感器312的信号波形的图。在图15A中，示出了在线传感器312的视场V内存在白血球WBC的情况，在该情况下，由线传感器312检测的信号的红色分量如图15B所示，在存在白血球WBC的部位成为基准值S以下。可以利用该现象，来检测血液中的白血球。另外，通过对信号的红色分量成为基准值S以下的宽度W进行检测，来检查发生该信号的部分是否为白血球的核。
接下来，控制部316执行自动聚焦动作(步骤S208)。如图5所示，通过了载玻片100以及物镜32的光的方向被棱镜反射镜39a改变，进而通过半透半反镜39分成朝向CCD照相机313的光和朝向传感器311、312的光。自动聚焦用的线传感器311由两个线传感器311a以及311b构成。
两个自动聚焦用的线传感器311a、311b中的一个线传感器311a配置在对焦位置(对焦的位置)的前侧(在光路上靠近物镜的一侧)，另一个线传感器311b配置在对焦位置的后侧(在光路上远离物镜的一侧)。并且，根据上述两个线传感器的输出信号的差分积分值，调节物镜的位置，以使物镜的焦点对准载玻片上的检体。
接下来，控制部316向通信接口318指示CCD照相机313的图像的取入以及发送，由此，取入在步骤S207中检测的白血球的图像(步骤S209)，向图像处理单元3b发送上述血球图像(步骤S210)。之后，控制部316判定是否达到所要求的白血球的计数数、即是否为j≥N(步骤S211)，在j＜N的情况下(在步骤S211中“否”)，使j递增1(步骤S212)，将处理返回到步骤S207，再次进行白血球的检测。另一方面，在步骤S211中j≥N的情况下(在步骤S211中“是”)，控制部316结束处理。
在上述步骤S225之后，CPU 321a等待血球图像的接收(在图13A的步骤S226中“否”)。在通过图像处理单元3b的通信接口321h接收到从显微镜单元3a中发送的血球图像的情况下(在步骤S226中“是”)，CPU 321a将接收的血球图像存储在硬盘321d中(步骤S227)。在步骤S227的处理中，生成与接收的血球图像对应的白血球ID，作为包括该白血球ID的文件夹名的图像数据，存储上述血球图像。接下来，CPU 321a进行血球图像的校正处理(步骤S228)。在上述校正处理中，对血球图像的所有像素的RGB分量的亮度值进行线性校正，以使血球图像的背景部分(血球像以外的部分)的亮度的平均值成为规定值(例如225)。将这样的校正后的血球图像与校正前的血球图像分开地存储在硬盘321d中(步骤S229)。对该校正后的血球图像也附加包括白血球ID的文件名(与校正前的血球图像不同的文件名)。
接下来，CPU 321a决定校正后的血球图像中的细胞质以及核的区域(步骤S230)。图16A是示出校正后的血球图像的一个例子的图。如图16A所示，在校正后的血球图像160A中，包括白血球像161。在染色后的白血球中，核以及细胞质呈现不同的颜色。另外，白血球的核以及细胞质的颜色与红血球以及背景的颜色都分别不同。因此，在步骤S230的处理中，利用白血球像161的RGB值，来决定包含在白血球像161中的核的区域161a以及细胞质的区域161b。
接下来，CPU 321a根据校正后的血球图像来计算白血球的各种特征参数(步骤S231)。作为该特征参数，可以举出可以根据图像的颜色信号(R、G、B)求出的白血球的核的面积、核数、凹凸、色调、以及浓度(不均)、白血球的细胞质的面积、色调、以及浓度(不均)、和上述核与细胞质的面积比以及浓度比等。
接下来，CPU 321a使用所取得的特征参数，来分类白血球的种类(步骤S232)。具体而言，通过例如针对白血球的几个特征参数，依次与对各参数预定的判定基准值进行比较，可以逐渐地对白血球的种类进行缩小范围。这样，对于所摄像的白血球，进行淋巴球、单球、嗜酸球、嗜碱球、及嗜中性白细胞(杆状、分叶状)这样的成熟白血球的分类；芽球、幼稚粒细胞、及异型淋巴球这样的未成熟白血球的分类；以及红芽球的分类。
如上所述，由本实施方式的标本摄像装置3利用血球图像的颜色信息来进行白血球的分类。此处，在涂抹标本制作装置2的染色液劣化等血液涂抹标本的染色状态变化时，白血球像的颜色变化。另外，在显微镜单元3a的灯的光量降低等摄像状态变化时，校正前的血球图像的颜色整体变化。因此，在血液涂抹标本的染色状态以及显微镜单元3a的摄像部的状态变化时，难以高精度地进行血球的分类，通过标本摄像装置3得到的分类结果的可靠性降低。
使用附图对该现象进行说明。图16A是示出进行了正常的染色时的校正后的血球图像的例子，图16B是示出染色液劣化时的校正后的血球图像的例子的图。在实施了May Giemsa染色、Wright Giemsa染色、以及Wright单染色时，在进行了正常的染色时的血球图像160A、和发生了染色液的劣化时的血球图像160B中，特别是核区域的颜色不同，染色液劣化时的血球图像160B的核区域162a的颜色比进行了正常的染色时的血球图像160A的核区域161a的颜色淡。另外，虽然在图16A以及图16B中未示出，但有时由于被过度地染色，核区域的颜色比正常染色时的核区域还浓，由此无法进行正常的分类。这样，核区域161a的规定的颜色分量(在本实施方式中绿分量)的亮度值表示血球图像的核区域161a的特征，并且表示血球的染色状态的特征。
图17A是示出通过正常的灯光量下的摄像而得到的校正前的血球图像的例子的图，图17B是示出通过产生了灯光量的降低时的摄像而得到的校正前的血球图像的例子的图。在正常的灯光量下的校正前的血球图像160C、和发生了灯光量降低时的校正前的血球图像160D中，特别是背景区域的亮度不同。该背景区域是虽然不受到染色的影响，但受到灯光量的影响的区域。发生了灯光量降低时的血球图像160D的背景区域163的亮度比灯光量是正常时的血球图像160C的背景区域164低。这样，校正前血球图像的背景区域的规定的颜色分量(在本实施方式中绿分量)的亮度值表示血球图像的背景区域的特征，并且表示显微镜单元3a的灯38以及包括CCD照相机313的摄像部的状态的特征。
为了向用户提供用于支援上述那样的染色状态以及摄像部的状态的确认的信息，在本实施方式中图像处理单元3b执行以下处理。首先，CPU 321a取得校正前的血球图像中的背景区域、即校正前的血球图像中的血球区域以外的区域的各像素的G值(绿分量的亮度值)，计算所取得的G值的平均值，将得到的值(以下称为“背景G值”)存储在RAM 321c中(步骤S233)。
接下来，CPU 321a根据步骤S232的分类结果，判定与该血球图像相关的白血球是否被分类为嗜中性白细胞(步骤S234)。在该白血球被分类为嗜中性白细胞的情况下(在步骤S234中“是”)，取得校正后的血球图像中的白血球的核的区域的核像素的G值，计算所取得的G值的平均值，将得到的值(以下称为“核G值”)存储在RAM321c中(步骤S235)。CPU 321a之后使处理进入到步骤S236。
另一方面，在步骤S234中，与该血球图像相关的白血球没有被分类为嗜中性白细胞的情况下(在步骤S234中“否”)，CPU 321a将处理转移到步骤S236。
在步骤S236中，CPU 321a判定是否达到所要求的白血球的计数数、即是否为i≥N(步骤S236)，在i＜N的情况下(在步骤S236中“否”)，使i递增1(步骤S237)，将处理返回到步骤S226，再次等待血球图像的接收。
另一方面，在步骤S236中i≥N的情况下(在步骤S236中“是”)，CPU 321a计算存储在RAM 321c中的背景G值的平均值即第一平均背景G值BA(步骤S238)，并且，计算存储在RAM 321c中的核G值的平均值即第一平均核G值NA(步骤S239)。
接下来，CPU 321a判定第一平均背景G值BA是否大于规定的基准值TB(步骤S240)，在第一平均背景G值BA是基准值TB以下的情况下(在步骤S240中“否”)，对设置在RAM 321c中的灯光量异常的标志设置1(步骤S241)，在图像显示部322中显示用于通知灯光量异常的发生的错误画面(步骤S242)，将处理转移到步骤S244。
图18A是示出用于通知灯光量异常的发生的错误画面的图。在发生了灯光量异常的情况下，显示图18A所示那样的错误画面E1。在错误画面E1中，包括：显示错误信息的错误列表显示区域81；显示用于处理该错误的详细信息的详细信息显示区域82；以及用于关闭画面的OK按钮83。在灯光量异常时的错误画面E1中，在错误列表显示区域81中显示为“灯光量异常”，在详细信息显示区域82中显示出“1)到了灯的更换时期。请联系服务人员。”这样的消息。
另一方面，在第一平均背景G值BA大于基准值TB的情况下(在步骤S240中“是”)，CPU 321a对灯光量异常的标志设置0(步骤S243)，将处理转移到步骤S244。
在步骤S244中，CPU 321a判定第一平均核G值NA是否大于规定的下限基准值TN1、并且小于规定的上限基准值TN2(步骤S244)，在第一平均核G值NA是下限基准值TN1以下、或第一平均核G值NA是上限基准值TN2以上的情况下(在步骤S244中“否”)，对设置在RAM 321c中的染色异常的标志设置1(步骤S245)，在图像显示部322中显示用于通知染色异常的发生的错误画面(步骤S246)，将处理转移到步骤S248。
图18B是示出用于通知染色异常的发生的错误画面的图。在发生了染色异常的情况下，显示图18B所示那样的错误画面E2。与错误画面E1同样地，在错误画面E2中，包括：显示错误信息的错误列表显示区域81；显示用于处理该错误的详细信息的详细信息显示区域82；以及用于关闭画面的OK按钮83。在染色异常的情况下，在错误列表显示区域81中显示为“染色异常”，在详细信息显示区域82中显示出“1)请确认载片的涂抹标本是否正常”、“2)在再次测定的情况下，请向盒中插入载片，并插入到联合单元”这样的消息。
在用户通过输入部333的操作选择了OK按钮83的情况下，结束上述那样的错误画面E1、E2的显示。
另一方面，在第一平均核G值NA大于下限基准值TN1、并且小于上限基准值TN2的情况下(在步骤S244中“是”)，CPU 321a对染色异常的标志设置0(步骤S247)，将处理转移到步骤S248。
在步骤S248中，CPU 321a将如上所述得到的与检体相关的信息以及分类结果登记到硬盘321d的检体数据库DB1以及血球数据库DB2中(步骤S248)，结束处理。在该处理中，将在步骤S239中计算的第一平均核G值存储在检体数据库DB1的第一平均核G值字段F18中，将在步骤S238中计算的第一平均背景G值存储在检体数据库DB1的第一平均背景G值字段F19中。
(血球图像的显示动作)
图19A是示出血球图像的显示动作中的血球图像显示单元3c的初始动作的步骤的流程图，图19B是示出血球图像的显示动作中的图像处理单元3b的检体信息发送动作的步骤的流程图。用户通过操作计算机330的输入部333，指示血球图像显示程序334a的执行。计算机330的CPU 331a受理该指示，执行血球图像显示程序334a。由此，计算机330作为血球图像显示单元3c发挥功能。
在血球图像显示程序334a刚刚起动之后，显示促使输入用户名以及口令的登录输入画面(图19A中的步骤S301)。在该登记输入画面中用户输入用户名以及口令(步骤S302)。由血球图像显示单元3c的CPU 331a执行的血球图像显示程序334a是事件触发型的程序，在CPU 331a中，发生了受理用户名以及口令的输入的事件时，调出步骤S303的处理。
在步骤S303中，CPU 331a执行用户认证处理。在上述用户认证失败的情况下(在步骤S304中“否”)，CPU 331a结束处理。在上述登录处理的用户认证成功的情况下(在步骤S304中“是”)，CPU 331a使通信接口331g向图像处理单元3b发送该日成为测定日的检体信息的要求数据(步骤S305)。
通过图像处理单元3b的通信接口321h接收从血球图像显示照元3c中发送的要求数据(图19B的步骤S401)。在CPU 321a中，发生了接收上述要求数据的事件时，调出步骤S402的处理。
在步骤S402中，CPU 321a从检体数据库DB1中取得测定日是该日的检体信息(步骤S402)。接下来，CPU 321a经由通信接口321g，向血球图像显示单元3c发送所取得的检体信息(步骤S403)，结束处理。
血球图像显示单元3c的CPU 331a在发送了检体信息的要求数据之后，等待检体信息的接收(在图19A的步骤S306中“否”)。在通过血球图像显示单元3c的通信接口331g接收到从图像处理单元3b中发送的检体信息的情况下(在步骤S306中“是”)，显示测定进展画面(未图示)(步骤S307)，结束处理。在上述测定进展画面中，列表显示了与多个检体相关的检体信息。在上述检体信息的列表中，设置有“染色异常”以及“灯光量异常”的区域，在检测到染色异常的检体的染色异常的区域中，显示表示染色异常发生的标记，在检测到灯光量异常的检体的灯光量异常的区域中，显示表示灯光量异常的标记。另外，在该测定进展画面中，用户可以选择列表显示的检体信息之一，通过在选择了一个检体信息之后进行规定的操作(例如鼠标的左键的双击)，可以提供与该检体相关的血球图像的显示指示。
图20A是示出血球图像的显示动作中的血球图像显示单元3c的图像显示动作的步骤的流程图，图20B是示出血球图像的显示动作中的图像处理单元3b的血球图像发送动作的步骤的流程图。在血球图像显示单元3c中，在发生了在显示测定进展画面的状态下如上所述受理与一个检体相关的血球图像的显示指示的事件时(步骤S501)，调出步骤S502的处理。
在步骤S502中，CPU 331a经由通信接口331g，向图像处理单元3b发送包括受理了指示的检体的检体ID的血球图像发送要求数据(步骤S502)。
通过图像处理单元3b的通信接口321h接收从血球图像显示单元3c中发送的要求数据(图20B的步骤S601)。在CPU 321a中，在发生了接收上述要求数据的事件时，调出步骤S602的处理。
在步骤S602中，CPU 321a从与上述检体ID对应的血球数据库DB2中，取得分类结果信息(步骤S602)。在该分类结果信息中，包括：识别白血球的白血球ID；白血球的分类结果的种类(单球、嗜中性白细胞、嗜碱球、嗜酸球、以及淋巴球等)；以及表示是否为无法分类的信息。另外，在分类结果信息中，对白血球的种类信息或无法分类信息对应地关联了白血球ID。即，分类结果信息是可以根据白血球ID来识别该白血球的种类是什么种类、或者该白血球是否为无法分类的信息。
接下来，CPU 321a经由通信接口321g，向血球图像显示单元3c发送所取得的分类结果信息(步骤S603)。
血球图像显示单元3c的CPU 331a在发送了分类结果信息的要求数据之后，等待分类结果信息的接收(在图20A的步骤S503中“否”)。在通过血球图像显示单元3c的通信接口331g接收到从图像处理单元3b中发送的分类结果信息的情况下(在步骤S503中“是”)，例如，按照仅显示规定种类的白血球的图像等显示条件，从包含在该分类结果信息中的白血球ID中识别与应显示的血球图像对应的白血球ID(步骤S504)，经由通信接口331g，向图像处理单元3b发送包括所识别的白血球ID的图像发送要求数据(步骤S505)。另外，在步骤S504中，识别出一个或多个白血球ID，在上述图像发送要求数据中，包括所识别的所有白血球ID。
图像处理单元3b的CPU 321a在发送了分类结果信息之后，等待图像发送要求数据的接收(在图20B的步骤S604中“否”)。在通过图像处理单元3b的通信接口321h接收到从血球图像显示单元3c中发送的要求数据的情况下(在步骤S604中“是”)，CPU 321a从硬盘321d的血球图像文件夹325中的与上述检体ID对应的文件夹中，读出与包含在图像发送要求数据中的白血球ID对应的血球图像(校正后的血球图像)(步骤S605)，经由通信接口321g，向血球图像显示单元3c发送所读出的血球图像(步骤S606)，结束处理。
血球图像显示单元3c的CPU 331a在发送了图像发送要求数据之后，等待血球图像的接收(在图20A的步骤S506中“否”)。在通过血球图像显示单元3c的通信接口331g接收到从图像处理单元3b中发送的血球图像的情况下(在步骤S506中“是”)，显示血球图像回顾画面(步骤S507)，结束处理。
图21是示出血球图像回顾画面的一个例子的图。在血球图像回顾画面170中，包括：显示一个或多个血球图像的血球图像显示区域171；显示患者信息的患者信息显示区域172；针对每个分类的血球的种类，显示计数结果的计数值显示区域173；以及显示由多项目自动血球分析装置得到的分析结果的分析结果显示区域174。在血球图像显示区域中，一览显示将接收的血球图像缩小而得到的图像。在各缩小图像中，用字符串(单球是“MONO”、嗜中性白细胞是“SEG”或“BAND”、嗜酸球是“EO”、嗜碱球是“BASO”、淋巴球是“LYMP”等)表示了血球种类。
(图像处理单元3b的关机动作)
接下来，对标本摄像装置3的图像处理单元3b的关机动作进行说明。
图22是示出图像处理单元3b的关机动作的流程的流程图。在执行图像处理程序324a的期间，在图像处理单元3b的图像显示部322中显示图像处理程序324a的操作画面。在上述操作画面中，设置有可以向图像处理单元3b提供关机指示的菜单。在由用户进行了选择该菜单的输入部323的操作时，向图像处理单元3b提供关机的指示(步骤S701)。在CPU 321a中，在发生了受理上述关机的指示的事件时，调出步骤S702的处理。
在步骤S702中，CPU 321a在图像显示部322中显示合计对话(dialogue)(未图示)(步骤S702)。在该合计对话中，设置有：合计按钮，用于对图像处理单元3b指示计算第二平均核G值以及第二平均背景G值，其中该第二平均核G值以及第二平均背景G值是对该日的第一平均核G值以及第一平均背景G值分别进行平均而得到的；以及取消按钮，不计算第二平均核G值以及第二平均背景G值而执行关机处理。可以通过输入部323的操作来分别选择合计按钮以及取消按钮。CPU 321a在合计对话中，在选择了合计按钮的情况下(在步骤S703中“是”)，将处理转移到步骤S704，在选择了取消按钮的情况下(在步骤S703中“否”)，将处理转移到步骤S713。
在步骤S704中，CPU 321a参照检体数据库DB1以及血球数据库DB2，在该日测定的检体中，选择在血球种类中包括嗜中性白细胞、并且由血球分析装置4得到的分析结果是正常的检体(步骤S704)。在步骤S704的处理中，具体而言，选择了检体数据库DB1的测定日字段F15中存储的日期是当前的日期，且用于存储由血球分析装置4检测的各种异常信息的字段F12、F13、F14、...的值是“0(正常)”，并且在血球数据库DB2的字段F22中包含嗜中性白细胞(“SEG”或“BAND”)的检体。
接下来，CPU 321a从检体数据库DB1中，读出所选择的所有检体的第一平均核G值以及第一平均背景G值(步骤S705)，对读出的所有第一平均核G值进行平均而计算出第二平均核G值，并且对读出的所有第一平均背景G值进行平均而计算出第二平均背景G值(步骤S706)。
另外，CPU 321a参照检体数据库DB1以及血球数据库DB2，求出在该日测定的检体中的无法分类的检体数相对在该日测定的所有检体数的比例即分类失败率(步骤S707)。即，在该处理中，对检体数据库DB1的测定日字段F15中存储的日期是当前的日期的所有检体数SN、和在这些检体中血球数据库DB2的再确认对象字段F23的值是“1”的检体数UN进行计数，计算出检体数UN相对所有检体数SN的百分比(分类失败率)。
CPU 321a将该日的日期、计算出的第二平均核G值以及第二平均背景G值以及分类失败率登记在特征履历数据库DB3中(步骤S708)。
另外，CPU 321a从特征值履历数据库DB3中读出当月的过去的日期、第二平均核G值、第二平均背景G值、以及分类失败率(步骤S709)，制作精度管理画面(步骤S710)，将精度管理画面显示在图像显示部322中(步骤S711)。图23是示出精度管理画面的一个例子的图。在精度管理画面CW中，包括：示出分类失败率的经时变动的第一曲线GR1；示出第二平均核G值、即第一特征值的经时变动的第二曲线GR2；以及示出第二平均背景G值、即第二特征值的经时变动的第三曲线GR3。另外，在精度管理画面CW中，设置有用于指示后述的关机处理的执行的关机继续按钮BT。
图24A是示出第一曲线GR1、第二曲线GR2、以及第三曲线GR3的一个例子的图，图24B是示出第一曲线GR1、第二曲线GR2、以及第三曲线GR3的另一例子的图。在图24A中，示出了显微镜单元3a的灯38的光量逐渐降低，而在12月10日实施了灯的更换时的例子，在图24B中，示出了由于季节性的外部环境(气温)的变化而涂抹标本制作装置2的染色性稳定地降低，而在12月10日变更了染色时间的设定时的例子。如图24A以及图24B所示，在第一曲线GR1中描绘了与当月的各日期对应的分类失败率，并且显示了表示分类失败率的警告等级的虚线WL1、和表示分类失败率的异常等级的虚线AL1。另外，在第二曲线GR2中描绘了与当月的各日期对应的第一特征值，并且显示了表示第一特征值的警告等级的虚线WL2、和表示第一特征值的异常等级的虚线AL2。在第三曲线GR3中描绘了与当月的各日期对应的第二特征值，并且显示了表示第二特征值的警告等级的虚线WL3、和表示第二特征值的异常等级的虚线AL3。
在图24A的例子中，作为第二特征值的第二平均背景G值在12月1日～12月5日的期间维持大致恒定的正常等级，但在12月6日以后逐渐降低，在12月7日以后低于警告等级。由此，可知灯38的光量降低，在12月7日以后需要更换灯。另一方面，作为第一特征值的第二平均核G值在整个期间维持大致恒定的正常等级。在该例子的第一曲线GR1中，分类失败率在从12月1日到12月8日的期间维持大致恒定的正常等级，但在12月9日高于作为警告等级的15％由于在该时期仅第二特征值降低，而第一特征值不降低，所以可知该分类失败率的上升起因于灯光量的降低。这样，通过显示第二特征值的经时变动，在光量不足成为原因而分类失败率达到异常等级之前，用户可知达到了更换灯的时期。因此，用户在12月10日实施灯更换，由此同日的第二特征值以及分类失败率恢复。这样，通过显示表示显微镜单元3a的摄像部的光量的特征的第二特征值的经时变动，用户可以容易地进行显微镜单元3a的摄像部的精度管理。
在图24B的例子中，作为第一特征值的第二平均核G值在12月1日～12月7日的期间维持大致恒定的正常等级。可知由于涂抹标本制作装置2的染色性受到季节性的环境的影响，而该期间的第一特征值虽然正常，但成为接近警告等级的等级。另外，第一特征值在12月8日以后进一步降低，在12月8日以后低于警告等级。由此，可知在12月8日以后，涂抹标本制作装置2的染色状态进一步恶化，而需要维护涂抹标本制作装置2。另一方面，作为第二特征值的第二平均背景G值在整个期间维持大致恒定的正常等级。在该例子的第一曲线GR1中，在从12月1日到12月9日的期间，虽然分类失败率是正常范围内但维持接近警告等级的大致恒定的等级。在该时期仅第一特征值的等级降低，而第二特征值维持高等级，所以可知分类失败率向警告等级附近的推移起因于染色状态的恶化。这样，通过显示第一特征值的经时变动，在染色状态恶化成为原因而分类失败率达到异常等级之前，用户可知达到了重新评估与涂抹标本制作装置2的染色相关的设定的时期。因此，用户在12月10日变更染色时间的设定，由此同日的第一特征值上升，分类失败率降低。这样，通过显示表示血液涂抹标本的染色状态的特征的第一特征值的经时变动，用户可以容易地进行涂抹标本制作装置2的精度管理。
用户通过在显示出这样的精度管理画面CW的状态下，进行选择关机继续按钮BT的操作，可以向图像处理单元3b提供关机处理的执行指示。CPU 321a等待这样的关机处理的执行指示的接收(在步骤S712中“否”)，在接收到关机处理的执行指示的情况下(在步骤S712中“是”)，执行关机处理(步骤S713)。在该关机处理中，执行精度管理画面CW的显示结束、图像处理程序324a的结束处理等。在上述关机处理结束后，CPU 321a结束处理。
通过设为以上那样的结构，在1日的检体处理的工作的结束时等图像处理单元3b被关机时，可靠地显示精度管理画面CW。由此，防止用户忘记检查涂抹标本制作装置2的染色状态以及显微镜单元3a的摄像部的状态，检体处理系统1的维护工作变得容易。
另外，在精度管理画面CW中，包括：示出第一特征值的经时变动的第二曲线GR2；以及示出第二特征值的经时变动的第三曲线GR3，所以用户可以仅通过确认精度管理画面CW，来进行显微镜单元3a以及涂抹标本制作装置2的精度管理。
(其他实施方式)
另外，在上述实施方式中，叙述了具备对血液涂抹标本进行摄像而取得血球图像的标本摄像装置的检体处理系统，但不限于此。也可以是具备如下标本摄像装置的检体处理系统：对将从人体中提取的组织薄薄地切片而粘贴在载玻片上、并利用染色液来染色而得到的标本进行摄像，而取得包括细胞像的细胞图像。
另外，在上述实施方式中，叙述了显示如下精度管理画面CW的结构，该精度管理画面CW包括示出与标本的染色状态相关的第一特征值的经时变动的第二曲线GR2、和示出与摄像中使用的灯的状态相关的第二特征值的经时变动的第三曲线GR3，但不限于此。也可以设为在不同的画面中显示第二曲线GR2、和第三曲线GR3的结构。另外，也可以设为虽然可以计算第一特征值来显示第二曲线GR2，但不计算第二特征值，并不显示第三曲线GR3的结构，相反也可以设为虽然可以计算第二特征值来显示第三曲线GR3，但不计算第一特征值，并不显示第二曲线GR2的结构。
另外，在上述实施方式中，叙述了针对每个涂抹标本，可以分别检测标本的染色异常、和摄像中使用的灯的光量异常的结构，但不限于此。也可以设为不检测标本的染色异常以及灯的光量异常的结构。另外，也可以设为虽然可以检测标本的染色异常，但无法检测灯光量异常的结构，也可以设为虽然可以检测灯光量异常，但无法检测标本的染色异常的结构。
另外，在上述实施方式中，叙述了将与血球图像的核的区域的G值相关的第二平均核G值用作表示血球图像的核区域的特征的第一特征值，来显示示出该第一特征值的变动的第二曲线GR2的结构，但不限于此。也可以设为如下结构：不将第二平均核G值用作第一特征值，而求出针对每个检体对血球图像的核的区域的B值或R值进行平均而得到的值(第一平均核B值或第一平均核R值)，计算对关于在1日期间处理的多个检体的第一平均核B值或第一平均核R值进行平均而得到的值(第二平均核B值或第二平均核R值)，将第二平均核B值或第二平均核R值用作第一特征值，来显示示出第一特征值的变动的曲线。
另外，在上述实施方式中，叙述了将与血球图像的背景的区域的G值相关第二平均背景G值用作表示血球图像的背景区域的特征的第二特征值，来显示示出该第二特征值的变动的第三曲线GR3的结构，但不限于此。也可以设为如下结构：不将第二平均背景G值用作第二特征值，而求出针对每个检体对血球图像的背景的区域的B值或R值进行平均而得到的值(第一平均背景B值或第一平均背景R值)，计算对关于在1日期间处理的多个检体的第一平均背景B值或第一平均背景R值进行平均而得到的值(第二平均背景B值或第二平均背景R值)，将第二平均背景B值或第二平均背景R值用作第二特征值，来显示示出第二特征值的变动的曲线。
另外，在上述实施方式中，叙述了使用由血球分析装置4判定为正常的检体的血球图像，来求出第一特征值以及第二特征值的结构，但不限于此。在异常检体和正常检体中，有时血球的核的状态不同，所以也可以设为对于使用血球图像的核的区域来求出的第一特征值，使用血球分析装置4的分析结果是正常的检体的血球图像来计算，对于使用考虑成在异常检体与正常检体中不产生差的血球图像的背景区域求出的第二特征值，使用制作了血液涂抹标本的所有检体的血球图像来计算。另外，也可以设为如下结构：在由血球分析装置4检测的所有异常内，使用检测出在血球的核的颜色中表现出影响的异常的检体以外的检体的血球图像，来计算第一特征值、或第一特征值以及第二特征值这两方。
另外，在上述实施方式中，叙述了使用嗜中性白细胞的血球图像，来求出第一特征值以及第二特征值的结构，但不限于此。也可以设为如下结构：不使用嗜中性白细胞，而使用单球、嗜酸球、嗜碱球、以及淋巴球等其他种类的白血球的血球图像，来求出第一特征值以及第二特征值。但是，由于在健康者的血液中包含的白血球中嗜中性白细胞的数量最多，所以通过使用嗜中性白细胞的血球图像，可以得到正确地分别反映了染色状态以及摄像部的状态的第一特征值以及第二特征值。另外，由于利用染色液对白血球整体进行染色，所以还可以使用血球图像的白血球区域，来计算表示白血球的染色状态的特征的第一特征值。另外，也可以不使用与规定的血球种类相关的血球图像，而使用所有血球种类的血球图像来计算第一特征值以及第二特征值的结构。
另外，在上述实施方式中，叙述了使用多个通常检体(从被验者提取的检体)的涂抹标本，来计算第一特征值以及第二特征值的结构，但不限于此。也可以设为如下结构：在实施了规定的染色时根据表示规定的核G值以及背景G值的标准检体来制作检体标本，对该涂抹标本进行摄像而得到多个血球图像，对多个血球图像的核G值以及背景G值分别进行平均而求出第一核G值以及第一背景G值，将第一核G值设为第一特征值，将第一背景G值设为第二特征值。
另外，在上述实施方式中，叙述了如下结构：通过计算机执行图像处理程序，而作为图像处理单元3b发挥功能，计算与涂抹标本的染色状态相关的第一特征值以及与灯的状态相关的第二特征值，显示第一特征值的经时变动以及第二特征值的经时变动，但不限于此。也可以设为如下结构：通过可以执行与图像处理程序同样的处理的FPGA或ASIC等专用硬件，执行计算第一特征值以及第二特征值，并显示第一特征值的经时变动以及第二特征值的经时变动的处理。
另外，在上述实施方式中，叙述了通过图像处理单元3b来显示第一特征值的变动以及第二特征值的变动的结构，但不限于此。也可以设为如下结构：通过与图像处理单元3b独立设置的血球图像显示单元3c，来显示第一特征值的变动以及第二特征值的变动。另外，也可以设为如下结构：通过一并具备图像处理单元3b的功能和血球图像显示单元3c的功能的一个装置，来显示第一特征值的变动以及第二特征值的变动。
另外，在上述实施方式中，叙述了在图像处理单元3b的关机时，显示第一特征值的变动以及第二特征值的变动的结构，但不限于此。也可以设为在图像处理单元3b的起动时显示第一特征值的变动以及第二特征值的变动的结构。由此，用户可以在起动图像处理单元3b时，确认精度管理画面，防止用户忘记检查涂抹标本制作装置2的染色状态以及显微镜单元3a的摄像部的状态，检体处理系统1的维护工作变得容易。另外，也可以是如下结构：将图像处理单元3b构成为可以受理来自用户的精度管理画面的显示指示，在从用户提供了精度管理画面的显示指示时，计算第一特征值以及第二特征值，而显示精度管理画面。
另外，至少在执行图像处理单元3b的关机之前，显示第一特征值的变动以及第二特征值的变动即可。即，也可以设为如下结构：并非图像处理单元3b单独的关机，而是在提供了标本摄像装置3整体的关机的指示时显示第一特征值的变动以及第二特征值的变动，也可以设为如下结构：在提供了检体处理系统1整体的关机的指示时，显示第一特征值的变动以及第二特征值的变动。
另外，在上述实施方式中，叙述了如下结构：在向图像处理单元3b提供了关机指示之后，CPU 321a对当日的第一平均核G值以及第一平均背景G值分别进行平均而计算第二平均核G值以及第二平均背景G值，将精度管理画面CW显示在图像显示部322中，但不限于此。也可以设为如下结构：在向图像处理单元3b提供关机指示之前，CPU 321a对在该时刻得到的当日的第一平均核G值以及第一平均背景G值分别进行平均而逐次计算出第二平均核G值以及第二平均背景G值，在提供了关机指示的情况下，将使用最后计算的第二平均核G值以及第二平均背景G值制作的精度管理画面CW显示在图像显示部322中。
另外，在上述实施方式中，叙述了通过单一的计算机320执行图像处理程序324a的所有处理的结构，但不限于此，还可以设为通过多个装置(计算机)分散地执行与上述图像处理程序324a同样的处理的分布式系统。
另外，在上述实施方式中，叙述了通过单一的计算机330执行血球图像显示程序334a的所有处理的结构，但不限于此，还可以设为通过多个装置(计算机)分散地执行与上述血球图像显示程序334a同样的处理的分布式系统。
另外，在上述实施方式中，独立地构成了涂抹标本制作装置2和标本摄像装置3，但不限于此，也可以由一个装置一并具有涂抹标本制作装置2的功能和标本摄像装置3的功能。
另外，在上述实施方式中，在第一平均背景G值BA表示异常值的情况下，在图像显示部322中显示用于通知灯光量异常的发生的错误画面，在第一平均值G值NA表示异常值的情况下，在图像显示部322中显示用于通知染色异常的发生的错误画面，但不限于此。也可以发出用于通知灯光量异常的发生的警告音以及用于通知染色异常的发生的警告音。

Claims (18)

1.一种细胞图像处理装置，其特征在于，包括：
摄像部，对通过将包含细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像，取得与在上述载玻片上涂抹的上述检体中包含的上述细胞相关的细胞图像；
显示部；以及
处理部，该处理部构成为进行以下处理，即根据由上述摄像部取得的上述细胞图像，取得上述细胞图像中的血球的核区域的规定的颜色分量的亮度值和上述细胞图像中的血球之外的背景区域的规定的颜色分量的亮度值以作为反映了上述细胞图像的规定的特征的特征值，并且控制上述显示部，以显示示出所取得的上述特征值即上述核区域的规定的颜色分量的亮度值和上述背景区域的规定的颜色分量的亮度值的历时性的变动的画面。
2.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述处理部控制上述显示部，以显示能够比较地示出上述特征值和与上述特征值的异常相关的指标的上述画面。
3.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述处理部控制上述显示部，以显示时序列地示出上述特征值的每日的变动的上述画面。
4.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述摄像部构成为取得包括规定的颜色分量的亮度的细胞图像，
上述处理部取得上述细胞图像的上述规定的颜色分量的亮度值而作为上述特征值。
5.根据权利要求1所述的细胞图像处理装置，其特征在于，
还包括制作上述涂抹标本的涂抹标本制作部。
6.根据权利要求5所述的细胞图像处理装置，其特征在于，
上述涂抹标本制作部具备染色部，该染色部对在上述载玻片上涂抹的上述检体中包含的上述细胞进行染色，
上述处理部根据上述细胞图像中的细胞部分的图像，取得反映了上述染色部的状态的第一特征值，根据上述细胞图像中的上述细胞部分以外的图像，取得反映了上述摄像部的状态的第二特征值。
7.根据权利要求6所述的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
对由上述摄像部取得的上述细胞图像的亮度进行校正；以及
根据校正后的上述细胞图像中的细胞部分的图像，取得反映了上述染色部的状态的上述第一特征值。
8.根据权利要求6所述的细胞图像处理装置，其特征在于，
上述摄像部具备光源，
上述处理部取得反映了上述光源的光量的上述第二特征值。
9.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述处理部根据在规定期间内由上述摄像部取得的多个细胞图像中的每一个，取得分别反映了各细胞图像的上述规定的特征的多个数值，根据取得的上述多个数值，取得上述特征值。
10.根据权利要求9所述的细胞图像处理装置，其特征在于，
上述处理部通过对上述多个数值进行平均，而取得上述特征值。
11.根据权利要求9所述的细胞图像处理装置，其特征在于，
上述处理部根据从在上述规定期间内被上述摄像部摄像的多个涂抹标本中的与规定的条件匹配的涂抹标本中取得的多个细胞图像中的每一个，取得上述多个数值。
12.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
受理关机的指示；以及
根据受理的上述关机的指示，控制上述显示部，以显示上述画面。
13.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述摄像部构成为对通过将规定的标准试样在载玻片上涂抹而制作的标准涂抹标本进行摄像，取得与包含在上述标准涂抹标本中的细胞相关的标准细胞图像，
上述处理部构成为进行以下处理：
根据上述标准细胞图像，取得反映了上述标准细胞图像的规定的特征的特征值；以及
控制上述显示部，以显示示出根据上述标准细胞图像取得的上述特征值的变动的画面。
14.根据权利要求1所述的细胞图像处理装置，其特征在于，
上述处理部构成为进行以下处理：
针对每个涂抹标本，对上述特征值与规定的基准值进行比较，从而检测上述特征值的异常；以及
控制上述显示部，以在检测到上述特征值的异常时，显示与上述特征值的异常相关的信息。
15.根据权利要求5所述的细胞图像处理装置，其特征在于，还包括：
检体分析部，分析上述检体；以及
检体搬送部，将由上述检体分析部分析的上述检体搬送到上述涂抹标本制作部，
其中，上述涂抹标本制作部构成为从由上述检体搬送部搬送的上述检体制作上述涂抹标本。
16.根据权利要求1～15中的任意一项所述的细胞图像处理装置，其特征在于，
上述处理部根据上述细胞图像，进行上述细胞的分类。
17.一种细胞图像处理方法，其特征在于，包括以下步骤：
对通过将包含细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像，取得与在上述载玻片上涂抹的上述检体中包含的上述细胞相关的细胞图像；
根据上述细胞图像，取得上述细胞图像中的血球的核区域的规定的颜色分量的亮度值和上述细胞图像中的血球之外的背景区域的规定的颜色分量的亮度值以作为反映了上述细胞图像的规定的特征的特征值；以及
在显示部中显示示出所取得的上述特征值即上述核区域的规定的颜色分量的亮度值和上述背景区域的规定的颜色分量的亮度值的历时性的变动的画面。
18.一种细胞图像处理系统，其特征在于，包括：
细胞图像取得单元，取得与细胞相关的细胞图像，该细胞图像是对通过将包含上述细胞的检体在载玻片上涂抹而制作的涂抹标本进行摄像而取得的；
特征值取得部件，根据由上述细胞图像取得部件取得的上述细胞图像，取得上述细胞图像中的血球的核区域的规定的颜色分量的亮度值和上述细胞图像中的血球之外的背景区域的规定的颜色分量的亮度值以作为反映了上述细胞图像的规定的特征的特征值；以及
显示控制部件，控制显示部，以显示示出由上述特征值取得部件取得的上述特征值即上述核区域的规定的颜色分量的亮度值和上述背景区域的规定的颜色分量的亮度值的历时性的变动的画面。
CN2009102637051A 2009-01-21 2009-12-30 细胞图像处理装置、细胞图像处理方法以及计算机系统 Active CN101782524B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009011303A JP5426181B2 (ja) 2009-01-21 2009-01-21 検体処理システム、細胞画像分類装置、及び検体処理方法
JP2009-011303 2009-01-21

Publications (2)

Publication Number Publication Date
CN101782524A CN101782524A (zh) 2010-07-21
CN101782524B true CN101782524B (zh) 2013-09-18

Family

ID=42109966

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009102637051A Active CN101782524B (zh) 2009-01-21 2009-12-30 细胞图像处理装置、细胞图像处理方法以及计算机系统

Country Status (4)

Country Link
US (1) US20100183216A1 (zh)
EP (1) EP2211165B1 (zh)
JP (1) JP5426181B2 (zh)
CN (1) CN101782524B (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8781201B2 (en) * 2009-03-04 2014-07-15 Robert E. Sandstrom Method of operating a pathology laboratory
US9522396B2 (en) 2010-12-29 2016-12-20 S.D. Sight Diagnostics Ltd. Apparatus and method for automatic detection of pathogens
CN102735609A (zh) * 2011-03-31 2012-10-17 西门子公司 一种体液成像系统、方法及景深扩展成像装置
WO2012174542A2 (en) 2011-06-17 2012-12-20 Constitution Medical, Inc. Systems and methods for sample display and review
CN103620390B (zh) * 2011-06-21 2016-08-31 浜松光子学株式会社 光测定装置、光测定方法以及光测定程序
JP5869239B2 (ja) 2011-06-21 2016-02-24 浜松ホトニクス株式会社 光測定装置、光測定方法、及び光測定プログラム
US9459196B2 (en) 2011-07-22 2016-10-04 Roche Diagnostics Hematology, Inc. Blood analyzer calibration and assessment
CN106840812B (zh) 2011-12-29 2019-12-17 思迪赛特诊断有限公司 用于检测生物样品中病原体的方法和系统
US9164015B2 (en) * 2012-06-29 2015-10-20 General Electric Company Systems and methods for processing and imaging of biological samples
US9817221B2 (en) 2012-06-29 2017-11-14 General Electric Company Systems and methods for processing and imaging of biological samples
US9389229B2 (en) 2012-07-18 2016-07-12 Theranos, Inc. Methods for detecting and measuring aggregation
JP5376024B1 (ja) 2012-08-23 2013-12-25 富士ゼロックス株式会社 画像処理装置、プログラム及び画像処理システム
JP5333635B1 (ja) * 2012-08-23 2013-11-06 富士ゼロックス株式会社 画像処理装置、プログラム及び画像処理システム
EP2999988A4 (en) 2013-05-23 2017-01-11 S.D. Sight Diagnostics Ltd. Method and system for imaging a cell sample
IL227276A0 (en) 2013-07-01 2014-03-06 Parasight Ltd A method and system for obtaining a monolayer of cells, for use specifically for diagnosis
CN103364242B (zh) * 2013-07-11 2015-05-13 四川美生科技有限公司 全自动医学检验血液推片染色机
WO2015013605A1 (en) * 2013-07-26 2015-01-29 Abbott Point Of Care, Inc. Method and apparatus for producing an image of undiluted whole blood sample having wright stain coloration
EP3039477B1 (en) 2013-08-26 2021-10-20 S.D. Sight Diagnostics Ltd. Digital microscopy systems, methods and computer program products
CN111175240A (zh) * 2014-05-30 2020-05-19 株式会社日立高新技术 自动分析装置
WO2016030897A1 (en) 2014-08-27 2016-03-03 S.D. Sight Diagnostics Ltd System and method for calculating focus variation for a digital microscope
US9298968B1 (en) * 2014-09-12 2016-03-29 Flagship Biosciences, Inc. Digital image analysis of inflammatory cells and mediators of inflammation
JP6342285B2 (ja) * 2014-09-30 2018-06-13 シスメックス株式会社 粒子分析装置における異常判定方法、分析装置における精度管理方法、および粒子分析装置
CN104459172B (zh) * 2014-11-28 2016-08-17 武汉兰丁医学高科技有限公司 一种自动化骨髓样本处理装置及其自动化分析、阅片方法
JP6134348B2 (ja) 2015-03-31 2017-05-24 シスメックス株式会社 細胞撮像装置及び細胞撮像方法
JP2017009314A (ja) * 2015-06-17 2017-01-12 株式会社Ｓｃｒｅｅｎホールディングス 教示データの作成支援方法、作成支援装置、プログラムおよびプログラム記録媒体
US11416983B2 (en) 2015-08-24 2022-08-16 Koninklijke Philips N.V. Server-client architecture in digital pathology
JP6653705B2 (ja) * 2015-08-26 2020-02-26 株式会社日立ハイテクノロジーズ 自動分析装置
CA2998829A1 (en) 2015-09-17 2017-03-23 S.D. Sight Diagnostics Ltd Methods and apparatus for detecting an entity in a bodily sample
US11733150B2 (en) 2016-03-30 2023-08-22 S.D. Sight Diagnostics Ltd. Distinguishing between blood sample components
US11307196B2 (en) 2016-05-11 2022-04-19 S.D. Sight Diagnostics Ltd. Sample carrier for optical measurements
CA3022770A1 (en) 2016-05-11 2017-11-16 S.D. Sight Diagnostics Ltd Performing optical measurements on a sample
EP3321851A3 (en) * 2016-11-09 2018-08-01 AmCad BioMed Corporation Cytological image processing device, and method for quantifying characteristics of cytological image
CN108537092B (zh) * 2017-03-02 2020-11-10 爱威科技股份有限公司 变异红细胞识别方法及装置
JP7214729B2 (ja) 2017-11-14 2023-01-30 エス．ディー．サイト ダイアグノスティクス リミテッド 光学測定用試料収容器
US20210356481A1 (en) * 2017-11-22 2021-11-18 Grifols Diagnostic Solutions Inc. Systems and methods for biological sample laboratory screening
KR102122068B1 (ko) * 2018-11-19 2020-06-12 노을 주식회사 이미지 분석 시스템 및 분석 방법
JP7403965B2 (ja) * 2019-03-29 2023-12-25 シスメックス株式会社 蛍光画像分析装置及び蛍光画像分析方法
JP7376245B2 (ja) * 2019-03-29 2023-11-08 シスメックス株式会社 蛍光画像分析装置及び蛍光画像分析方法
JP2021040590A (ja) 2019-09-13 2021-03-18 シスメックス株式会社 細胞画像解析方法、細胞画像解析装置、プログラム、及び細胞画像解析システム
CN112881737A (zh) * 2021-01-27 2021-06-01 湖南索莱智能科技有限公司 一种全自动生物样品分析一体化设备及控制方法
CN113515077A (zh) * 2021-04-23 2021-10-19 重庆德方信息技术有限公司 人体细胞染色过程监控系统及方法
EP4242629A1 (en) 2022-03-09 2023-09-13 Sysmex Corporation Method of quality control and quality control apparatus

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4761075A (en) * 1985-12-10 1988-08-02 Hitachi, Ltd. Cellular analysis system
CN1399131A (zh) * 2002-08-28 2003-02-26 彭黎明 无创性血细胞参数定量测定方法
EP0725268B1 (en) * 1995-02-01 2005-04-20 Hitachi, Ltd. Flow type particle image analyzing method
CN101137046A (zh) * 2006-08-31 2008-03-05 索尼株式会社 图像处理装置、图像处理方法和图像处理程序

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4097845A (en) * 1976-11-01 1978-06-27 Rush-Presbyterian-St. Luke's Medical Center Method of and an apparatus for automatic classification of red blood cells
JPS5379599A (en) * 1976-12-23 1978-07-14 Toa Medical Electronics Automatic blood analyzer
JPS60162955A (ja) * 1984-02-03 1985-08-24 Hitachi Ltd 血球自動分析装置
EP0280849B1 (de) * 1987-02-05 1991-09-04 Oerlikon-Contraves AG Verfahren und Vorrichtung zum Bestimmen von Schwellenwerten bei der Teilchenanalyse einer Flüssigkeit
JP3169598B2 (ja) * 1990-07-06 2001-05-28 株式会社日立製作所 自動分析方法および自動分析装置
JPH055733A (ja) * 1991-06-28 1993-01-14 Sanyo Electric Co Ltd 血液像検査装置
US5768412A (en) * 1994-09-19 1998-06-16 Hitachi, Ltd. Region segmentation method for particle images and apparatus thereof
JPH09257689A (ja) * 1996-03-27 1997-10-03 Hitachi Ltd 粒子解析装置
JPH10275150A (ja) * 1997-03-28 1998-10-13 Toa Medical Electronics Co Ltd 画像ファイリングシステム
JP2002140692A (ja) * 2000-10-30 2002-05-17 Sysmex Corp 画像解析装置
WO2005009126A1 (en) * 2003-07-23 2005-02-03 Essen Instruments, Inc. Examination systems for biological samples
JP4649828B2 (ja) * 2003-10-17 2011-03-16 Ｊｆｅスチール株式会社 画像処理装置の異常の判定方法
JP4528529B2 (ja) * 2004-01-20 2010-08-18 株式会社東芝 超音波診断装置及び超音波画像データ処理方法
JP4542386B2 (ja) * 2004-07-30 2010-09-15 シスメックス株式会社 画像表示システム、画像提供装置、画像表示装置、およびコンピュータプログラム
JP4964446B2 (ja) * 2005-09-14 2012-06-27 シスメックス株式会社 分析装置及び検体情報処理プログラム
JP5063999B2 (ja) * 2006-11-30 2012-10-31 シスメックス株式会社 血液像分析装置
JP2008212017A (ja) * 2007-03-01 2008-09-18 Nikon Corp 細胞状態判定装置、および細胞状態判定方法
WO2009009779A2 (en) * 2007-07-11 2009-01-15 Cualing Hernani D Automated bone marrow cellularity determination

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4761075A (en) * 1985-12-10 1988-08-02 Hitachi, Ltd. Cellular analysis system
EP0725268B1 (en) * 1995-02-01 2005-04-20 Hitachi, Ltd. Flow type particle image analyzing method
CN1399131A (zh) * 2002-08-28 2003-02-26 彭黎明 无创性血细胞参数定量测定方法
CN101137046A (zh) * 2006-08-31 2008-03-05 索尼株式会社 图像处理装置、图像处理方法和图像处理程序

Also Published As

Publication number Publication date
JP5426181B2 (ja) 2014-02-26
EP2211165B1 (en) 2017-07-26
JP2010169484A (ja) 2010-08-05
US20100183216A1 (en) 2010-07-22
EP2211165A2 (en) 2010-07-28
CN101782524A (zh) 2010-07-21
EP2211165A3 (en) 2015-07-08

Similar Documents

Publication Publication Date Title
CN101782524B (zh) 细胞图像处理装置、细胞图像处理方法以及计算机系统
CN101685060B (zh) 标本摄像装置
US8977030B2 (en) Blood cell image display apparatus, specimen analyzing system, blood cell image display method and computer program product
US7873483B2 (en) Analyzer and computer program product
US8842900B2 (en) Specimen processing system and blood cell image classifying apparatus
EP3450957B1 (en) Cell image display apparatus, cell image display method, and computer program product
JP5132050B2 (ja) 標本撮像装置及び標本撮像方法とその装置を制御するプログラム、並びに、標本分析装置
US6181811B1 (en) Method and apparatus for optimizing biological and cytological specimen screening and diagnosis
US20110090247A1 (en) Particle image analysis method and apparatus
CN103827657A (zh) 血液分析仪校准和评估
CN101726611A (zh) 检体分析装置以及检体分析装置的校正方法
US8349256B2 (en) Blood cell analyzer, blood cell analyzing method, and computer program product
US8504301B2 (en) Sample analyzer, method for displaying analysis result information of a sample and computer program product
Shapiro “Cellular astronomy”—A foreseeable future in cytometry
JP3355192B2 (ja) 血液検査解析装置、血液検査用印刷装置および試薬カセット撮影装置
JP4690165B2 (ja) 血液撮像装置、血液撮像方法、処理装置、及び撮像本体装置
JP5557994B2 (ja) 検体処理システムおよび血球画像分類装置
CN111684279A (zh) 一种细胞分析方法、细胞分析装置及存储介质
JPH10104229A (ja) 有形成分分析装置
Lerner et al. GELFISH–Graphical environment for labelling fluorescence in‐situ hybridization images
Medovyĭ et al. Development and testing of an automated microscopy complex

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant