CN115280158A - 生物体检体解析装置 - Google Patents

生物体检体解析装置 Download PDF

Info

Publication number
CN115280158A
CN115280158A CN202180019979.5A CN202180019979A CN115280158A CN 115280158 A CN115280158 A CN 115280158A CN 202180019979 A CN202180019979 A CN 202180019979A CN 115280158 A CN115280158 A CN 115280158A
Authority
CN
China
Prior art keywords
biological sample
label
image
region
sample tube
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180019979.5A
Other languages
English (en)
Inventor
佐尾真侑
猪股宏文
佐藤文恭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi High Tech Corp
Original Assignee
Hitachi High Technologies Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi High Technologies Corp filed Critical Hitachi High Technologies Corp
Publication of CN115280158A publication Critical patent/CN115280158A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01—Arrangements or apparatus for facilitating the optical investigation
    • G01N21/03—Cuvette constructions
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/27—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands using photo-electric detection ; circuits for computing concentration
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/00584—Control arrangements for automatic analysers
    • G01N35/00722—Communications; Identification
    • G01N35/00732—Identification of carriers, materials or components in automatic analysers
    • G06T5/80—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/759—Region-based matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20076—Probabilistic image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Analytical Chemistry (AREA)
  • Pathology (AREA)
  • Immunology (AREA)
  • Biochemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • Automatic Analysis And Handling Materials Therefor (AREA)
  • Geometry (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

本公开目的在于提出如下技术：能不引起带颜色标签的颜色的误提取所导致的分析对象区域的提取精度的降低而取得分析对象的区域和颜色信息，进行判别检体的液量的测定和检体类别的判别。本公开所涉及的生物体检体解析装置从生物体样品管的彩色图像裁出部分区域，通过将所述部分区域沿着所述生物体样品管的周向进行连结，来作成展开图，从所述展开图提取检测对象区域(参考图6B)。

Description

生物体检体解析装置
技术领域
本公开涉及对收容于贴附了多标签的生物体样品管的生物体检体进行分析的生物体检体解析装置。
背景技术
以血液检查等临床检查的效率化为目的，提出将过去通过目视确认来进行的生物体检体的确认作业自动化的技术。这当中，在生化学分析前的检体确认作业中，谋求存放于采血管等容器的样品的液量测定、判别血液检体中的血清类别(正常、溶血、黄疸、乳糜等)等检体状态的解析技术。
作为这样的检体状态的判别技术，例如专利文献1公开了一种检测装置，检测贴附了标签的生物体样品管内的生物体样品的信息。更详细地，该检测装置具备：摄像部，其对生物体样品管摄像；检测对象区域提取部，其从由摄像部摄像的图像提取检测对象区域；标签提取部，其从由摄像部摄像的图像提取位于摄像部的摄像面侧的标签；和解析部，其基于由标签提取部提取的标签的边界位置来确定由检测对象区域提取部提取的检测对象区域内的所述标签的边界位置，进行液量的测定，并根据从检体的图像提取的检测对象区域的颜色信息来取得检体类别的信息。
此外，例如，专利文献2公开了一种液体检测装置，对采血管照射红外光来检测透过光，基于其一次微分值来求取标签的边界，推定采血管的血清量。
现有技术文献
专利文献
专利文献1：JP特开2015-040696号公报
专利文献2：JP特开2004-037322号公报
发明内容
发明要解决的课题
专利文献1记载的技术涉及通过基于所提取的标签的边界位置确定所提取的检测对象区域内的标签的边界位置来提取检测区域的颜色信息的方式。但在专利文献1中，关于贴附有与检测对象的颜色类似的带颜色标签的检体，识别带颜色标签的颜色和检测对象区域的颜色，未考虑将带颜色标签区域和检测对象区域分离，存在由于误提取带颜色标签的颜色而颜色提取精度降低的课题。
专利文献2求取标签的边界来测定血清量，但不能取得分析对象的颜色信息，判别检体类别。
本公开鉴于这样的状况而做出，提出如下那样的技术：不引起带颜色标签的颜色的误提取所导致的分析对象区域的提取精度的降低地取得分析对象的区域和颜色信息，能进行检体的液量的测定和检体类别的判别。
用于解决课题的手段
本公开所涉及的生物体检体解析装置从生物体样品管的彩色图像裁出部分区域，通过将所述部分区域沿着所述生物体样品管的周向进行连结来作成展开图，从所述展开图提取检测对象区域。
发明的效果
根据本公开所涉及的生物体检体解析装置，能在贴附有带颜色标签的检体中高精度地检测由多种成分构成的样品的颜色、量。与本公开关联的进一步的特征根据本说明书的描述、附图而得以明确。本公开的方式由要素以及多样的要素的组合以及以后的详细的描述和所添附的权利要求书的方式来达成并实现。需要理解的是，本说明书的描述只是典型的例示，并不在任何意义上限定本公开的权利要求书或运用例。
附图说明
图1是表示实施方式1所涉及的生物体检体解析装置100的概略结构例的图。
图2是表示将存放于存储器107或存储装置108的程序在控制器(处理器)106内展开而实现的概略功能的图。
图3是表示图像处理部201的内部结构例的图。
图4是用于说明生物体检体解析装置100所执行的生物体检体分析处理的概要的流程图。
图5是用于说明图4的S402(展开图合成处理)的详细内容的流程图。
图6A是表示在S501将图像中心作为给定区域的设定例的图。
图6B是在S502以后的处理中作成的展开图的示例。
图7是表示用固定摄像机101摄像的检测对象区域117的明度分布的示例的图。
图8是表示在生物体样品管116的中心出现2条线状的反射区域的示例的图。
图9是用于说明S403(检体信息解析处理)的详细内容的流程图。
图10是用于说明标签校准的详细内容的流程图。
图11是表示实施方式2中的展开图合成处理的流程图。
图12是表示生物体样品管116的旋转轴的示例的图。
图13是表示生物体样品管116的旋转轴检测处理(S1101)的示例的流程图。
图14是表示实施方式3中的展开图合成处理的流程图。
图15是起因于生物体样品管116的曲率而裁出图像发生变形的示例。
图16是表示实施方式4中的S403的详细处理的流程图。
具体实施方式
以下参考附图来说明本公开的实施方式。在附图中，有时功能上相同的要素以相同编号显示。另外，附图示出依照本公开的原理的具体的实施方式和安装例，但这些是用于理解本公开的，绝不是为了限定地解释本公开而使用的。
在本实施方式中，为了本领域技术人员实施本公开而充分详细地进行其说明，但其他安装/形态也是可能的，需要理解的是，能不脱离本公开的技术的思想的范围和精神地进行结构/构造的变更、多样的要素的置换。因此，不得将以后的描述限定于此来解释。
在本实施方式中，为了方便，在有需要时，分割成多个分断或实施方式来进行说明，但除了特别明示的情况以外，它们并非相互没有关系，处于一方为另一方的一部分或全部变形例、细节、补充说明等关系。在提及了要素的数量等(包含个数、数值、量、范围等)的情况下，除了特别明示的情况以及原理上明显限定于特定的数量的情况等以外，都不限定于该确定的数量，可以是特定的数量以上，也可以是特定的数量以下。
在以下的实施方式中，其构成要素(还包含要素步骤等)除了特别明的情况以及被认为原理上明确必须的情况等以外，都不一定是必须的，这点不言自明。
同样地，在以下的实施方式中，在提及构成要素等的形状、位置关系等时，除了特别明示的情况以及被认为原理上明确不是这样的情况等以外，包含实质与其该形状等近似或类似的情形等。这对于上述数值以及范围也是同样的。
在用于说明实施方式的全图中，对相同构件原则上标注相同附图标记，有时省略其重复的说明。
<实施方式1>
<生物体检体解析装置的装置结构>
图1是表示本公开的实施方式1所涉及的生物体检体解析装置100的概略结构例的图。生物体检体解析装置100具备固定摄像机101、背景板102、光源103a以及103b、光源用驱动器104a以及104b、生物体样品管支架105、控制器106、存储器107、存储装置108、输入输出接口109、数据总线110、握持机构111、移动机构112、上下控制驱动器113、生物体样品管旋转机构114、旋转控制驱动器115。
控制器106例如由处理器(Central Processing Unit(中央处理器)：CPU等)构成，将存放于存储器107或存储装置108的各种程序读入，将其在内部存储器(未图示)展开，来生成后述的图像处理部，在给定的定时执行。
输入输出接口109由键盘、触控面板、麦克风、开关以及显示装置、打印机、扬声器等构成，用在检测到的生物体检体的解析结果(生物体检体的类别、量等)的显示、解析前的生物体检体的状态检查等中。此外，输入输出接口109接受后述的给定区域裁出条件的设定、用在数据的传输、生物体样品类别以及/或生物体样品量等的解析中的参数的输入。
握持机构111握持设置于生物体样品管支架105的生物体样品管116。上下控制驱动器113通过控制移动机构112来使握持机构111在上下方向上移动。
设置于生物体样品管支架105的生物体样品管116通过运送线运送，通过停止机构(不图示)等停止。移动机构112使由握持机构111握持的生物体样品管116移动至使得生物体样品管116整体被固定摄像机101摄像的位置。
通过由握持机构111使生物体样品管116向上方移动，来对生物体样品管116整体照射光源103a以及光源103b的光。更具体地，设定于生物体样品管支架105的生物体样品管116被握持机构111握持，通过移动机构112而移动到固定摄像机101的视野内。这时，通过上下控制驱动器113控制移动机构112的移动量，来调整生物体样品管116的上下位置。固定摄像机101需要取得生物体样品管116的至少检测对象区域117的二维彩色图像。因此，通过由上下控制驱动器113对应于生物体样品管116的长度决定移动机构112的移动量，能不依赖于生物体样品管116的长度，使检测对象区域117移动到固定摄像机101的视野内，在将检测对象区域117用光源103a以及光源103b进行了照明的状态下进行摄像。
旋转控制驱动器115通过控制生物体样品管旋转机构114，来使握持机构111所握持的生物体样品管116旋转。固定摄像机101通过在使生物体样品管116旋转的同时进行摄像，能对生物体样品管116的整个周围摄像。关于旋转控制驱动器115所进行的生物体样品管旋转机构114的旋转的控制、和固定摄像机101的摄像的同步方法，之后叙述。
固定摄像机101例如是CCD(Charge Coupled Device，电荷耦合器件)图像传感器、CMOS(Complementary Metal-Oxide Semiconductor，互补金属氧化物半导体)图像传感器等摄像器件。固定摄像机101以背景板102为背景取得通过光源103a以及光源103b照明的生物体样品管116的二维彩色图像，将该图像输入到控制器106。通过不是利用自然光而是利用光源103a以及光源103b等的照明，且利用背景板102，例如即使在血清那样检测对象区域117为透明色的情况下，也能减少提取而用于解析的检测对象区域117的颜色的测定间的偏差、外部光的影响所导致的偏差，提高解析精度。
光源103a以及光源103b例如由白色LED构成，被光源用驱动器104a以及光源用驱动器104b控制。光源103a和光源103b的亮度给固定摄像机101所取得的生物体样品管116的彩色图像的颜色(像素值)带来影响。由于光源的亮度的偏差给解析结果带来影响，因此，例如实施没有颜色的褪色的校正用夹具的摄像评价、生物体样品管116的背景图像的颜色的解析，并在测定前实施调整光源103a以及103b的亮度的校准，由此能减少照明带来的解析结果的偏差。
通过以上的结构取得的彩色图像被控制器106利用在后述的图像处理和解析处理中，控制器106算出(探测)检测对象区域117的颜色和量。存储器107或存储装置108存储解析检测对象区域117的颜色所需的例如血清的颜色特征量等，检测对象区域117的颜色的信息、解析结果等信息经过数据总线110移交到控制器106，从输入输出接口109输出(例如显示于显示装置的显示画面上)。
<在控制器106内实现的功能>
图2是表示将存放于存储器107或存储装置108的程序在控制器(处理器)106内展开而实现的概略功能的图。如图2所示那样，控制器106具备图像处理部201、区域设定部202和生物体样品管信息取得部203，作为软件上实现的功能。
图像处理部201根据由固定摄像机101取得的多个二维彩色图像，通过后述的处理来生成展开图，从展开图提取检测对象区域(例如血清区域)117，执行检测对象的颜色以及检体类别的确定、溶液量的算出等处理。
区域设定部202是实现用户(操作人员)能在用于生成后述的展开图的二维彩色图像的裁出处理中设定/变更给定区域(裁出区域)的功能的处理部。
例如，若用户使用作为输入输出接口109的触控面板指定了给定区域的摄像图像内的基准坐标值、宽度、高度等，区域设定部202就对对象的二维彩色图像设定给定区域。或者，能在存储器107或存储装置108中存放描述了给定区域的摄像图像内的基准坐标值、宽度、高度等的设定文件，通过从程序读入设定文件的信息，来设定/变更给定区域。
生物体样品管信息取得部203是实现如下功能的处理部：能取得通过后述的检测对象区域117提取处理提取的带颜色标签118的颜色信息(标签颜色分布的范围)及/或尺寸的信息及/或解析对象的生物体样品管116的尺寸(直径以及长轴方向的长度)信息，并进行设定/变更。
例如，若用户使用作为输入输出接口109的触控面板输入了带颜色标签118的颜色信息(标签颜色分布的范围)及/或尺寸的信息和生物体样品管116的尺寸信息，生物体样品管信息取得部203就对在后述的检测对象区域117提取处理中提取的带颜色标签118的颜色或/尺寸的信息、和生物体样品管116的尺寸信息进行设定/变更。或者，能在存储器107或存储装置108中存放描述了标签色的信息的设定文件，通过从程序读入设定文件的信息，来对带颜色标签118的颜色或尺寸的信息、和生物体样品管116的尺寸信息进行设定/变更。
<图像处理部的内部结构>
图3是表示图像处理部201的内部结构例的图。如图3所示那样，图像处理部201包含区域裁出部301、展开图合成部302、检测对象区域提取部303、解析部304。关于各处理部的动作的细节，之后叙述，若简单说明，则分别执行以下那样的处理。
区域裁出部301执行从各二维彩色图像裁出区域设定部202所设定的区域的处理。
展开图合成部302执行通过将区域裁出部301所裁出的多个图像沿着生物体样品管116的周向连结来生成1张展开图的处理。
检测对象区域提取部303执行根据事前取得的检测对象(例如血清区域)的颜色信息、或生物体样品管信息取得部203中取得的贴附于生物体样品管的标签的颜色信息来提取检测对象区域(例如血清区域)117的处理。
解析部304实施以下处理：确定检测对象区域提取部303所提取的检测对象区域117的颜色并根据其颜色信息来判定生物体检体的类别的处理；从检测对象区域提取部303所提取的检测对象区域117计算生物体检体的液量的处理。
<生物体样品分析处理概要>
图4是用于说明本实施方式的生物体检体解析装置100所执行的生物体检体分析处理的概要的流程图。在以下的说明中，将各步骤的动作主体设为对应的各处理部，但由于各处理部通过存放于存储器107或存储装置108的程序来实现，因此，也可以将设为该程序的执行主体的控制器106作为各步骤的动作主体，将说明改换说法。
根据本实施方式的生物体检体解析处理，在对生物体样品管116贴附有带颜色标签118的生物体样品管116中，避免将与检测对象区域117类似的颜色的带颜色标签118作为检测对象区域117的一部分而误提取，有提升检测对象区域117的颜色和量的解析精度的效果。
(图4：步骤S401：取得多个二维彩色图像)
图像处理部201取得由固定摄像机101摄像的生物体样品管116的多个二维彩色图像。
(图4：步骤S401：关于摄像方法)
对生物体样品管116的摄像方法进行说明。为了从二维的彩色图像解析检测对象区域117的颜色和量，需要贴附有标签的生物体样品管116当中的露出检测对象区域117的区域的二维彩色图像。为了实施后述的展开图合成部302的展开图生成处理，需要在使生物体样品管116旋转的同时取得的多张二维彩色图像。因此，通过生物体样品管旋转机构114以及旋转控制驱动器115基于控制器106的指令控制生物体样品管116的旋转，来在使生物体样品管116旋转的同时对多张二维彩色图像摄像。例如，生物体样品管旋转机构114使生物体样品管116旋转，由旋转控制驱动器115控制旋转的速度或加速度、旋转角度、转速以及旋转开始的定时。通过以上，能取得具有生物体样品管116的整个周围的信息的多张图像。
(图4：步骤S401：关于摄像方法：补充其一)
在用户(操作人员)将生物体样品管116向生物体检体解析装置100投入以使得由握持机构111握持的生物体样品管116的朝向对齐的情况下，不需要对生物体样品管116的整个周围摄像，能取得多张在使生物体样品管116旋转的同时对检测对象区域117的区域摄像的二维彩色图像即可。
(图4：步骤S401：关于摄像方法：补充其二)
另一方面，在用户(操作人员)不将由握持机构111握持的生物体样品管116的朝向对齐地将生物体样品管116投入生物体检体解析装置的情况下，通过在使生物体样品管116旋转的同时取得多张二维彩色图像，以使得能取得生物体样品管116的整个周围的信息，由此能可靠地取得检测对象区域117的摄像图像。例如，若重复进行每当使其旋转10度就用固定摄像机101取得图像的操作，来取得36张(36帧)图像，就能取得生物体样品管116的整个周围的信息。
(图4：步骤S401：关于摄像方法：补充其三)
旋转角度以及旋转的速度或加速度可以并不固定，例如，也可以在1帧与2帧之间使得从低速度起加速，在31帧与32帧之间使其减速等，从而用共32张帧对生物体样品管116的全周摄像。此外，也可以基于旋转控制信号来改变摄像机的快门速度、摄像定时。
(图4：步骤S402：展开图合成处理)
图像处理部201执行区域裁出部301和展开图合成部302中的各图像处理，根据S401中取得的二维彩色图像来作成1张展开图。关于本步骤的细节，在后述的图5进行说明。
(图4：步骤S403：检体信息解析)
图像处理部201执行检测对象区域提取部303和解析部304的处理，从S402中取得的展开图提取检测对象区域117(关于细节之后叙述)，取得(通过运算求取)检测对象区域117中取得的检测对象的颜色和量等信息。例如，在存储器107或存储装置108中事前存放与生物体检体的类别对应的颜色信息，解析部304通过将所取得的颜色信息和预先存放于存储器107等中的颜色信息进行比对，能从检测对象区域117的颜色信息判别生物体样品的类别。例如，在检测对象区域117为血清的情况下，根据血清状态(正常、溶血、黄疸、乳糜)而在血清色中具有特征。因此，通过在存储器107中存放颜色特征量、分类中使用的颜色空间的范围和阈值，比对解析部304中取得的颜色信息，由此能判别检体的血清状态。此外，能根据检测对象区域117的高度方向(二维彩色图像的铅垂方向)的像素数的信息和生物体样品管116的直径的信息，来算出检测对象的溶液量。例如，通过用户利用作为输入输出接口109的触控面板将所使用的生物体样品管116的型号或生物体样品管116的直径等信息直接输入等，来取得生物体样品管116的直径。
(图4：步骤S403：检体信息解析：补充其一)
例如通过在生化学分析前实施这样的检体类别的判别，能对于异常血清(溶血、黄疸、乳糜)等那样给生化学分析的精度带来影响的检体事前建立标记(flag)。此外，通过在解析部304中算出检测对象区域117的溶液量，能事前确认能否确保足以进行分析的溶液量。由此，在溶液量不足的情况下，例如能进行再采血等应对，有提升生化学分析的效率的效果。
(图4：步骤S403：检体信息解析：补充其二)
例如，关于贴附有血清色的黄色、红色那样与检测对象区域117的颜色类似的带颜色标签118的生物体样品管116，存在将带颜色标签118的颜色误提取为检测对象、从而做出检体类别的误判别的可能性。此外，由于将带颜色标签118的区域误提取为检测对象区域117，存在误算出溶液量的可能性。因此，在检测对象区域提取部303中通过后述的处理来识别标签色和检测对象的颜色，除去带颜色标签118并仅提取检测对象区域117，由此能避免带颜色标签118导致的误判别和溶液量的误算出，能提升检体类别的判别精度和溶液量的测定精度。
(图4：步骤S403：检体信息解析：补充其三)
在本步骤，带颜色标签118和检测对象区域117例如能通过以下那样的过程区别。通过生物体样品管信息取得部203所执行的后述的标签校准处理来预先取得所使用的标签色的信息(色调、彩度、明度值的分布及/或阈值)，在存储器107或存储装置108中存放所使用的标签色的信息。通过生成从S402中取得的展开图根据预先存放的标签色的信息来仅提取带颜色标签118的区域的蒙片(mask)，来从展开图仅除去带颜色标签118的区域。
<展开图合成处理的详细内容>
图5是用于说明图4的S402(展开图合成处理)的详细内容的流程图。在以下的说明中，将各步骤的动作主体设为对应的各处理部，但各处理部由于是通过存放于存储器107或存储装置108的程序执行的，因此，也可以将作为该程序的执行主体的控制器(处理器)106作为各步骤的动作主体，将说明改换说法。
为了根据二维彩色图像取得一张展开图，区域设定部202设定二维彩色图像的给定区域，区域裁出部301从二维彩色图像裁出区域设定部202所设定的区域。展开图合成部302将区域裁出部301所裁出的多个二维彩色图像的裁出图像连结，来合成1张展开图。
(图5：步骤S501：给定区域设定)
区域设定部202对用户所进行的给定区域(二维彩色图像的裁出区域)的设定输入或存放于存储器107或存储装置108的设定文件做出响应，来对S401中取得的多个二维彩色图像分别设定给定区域。用户所进行的设定输入或设定文件的描述内容例如是给定区域的宽度、高度、摄像图像内的基准坐标值。关于本步骤的细节，使用图6A～图7之后叙述。
(图5：步骤S502：二维彩色图像裁出)
区域裁出部301从S401中取得的多个二维彩色图像分别裁出S501中设定的给定区域(裁出区域)。
(图5：步骤S503：裁出图像连结处理)
展开图合成部302通过将S502中输出的多个二维彩色图像的裁出图像连结，来合成1张展开图。展开图能通过运用高斯滤波器等平滑化滤波器来使连结部平滑。
图6A是表示在S501中将图像中心作为给定区域的设定例的图。若在使生物体样品管116旋转的同时用固定摄像机101进行摄像，就如图6A那样取得朝向不同的生物体样品管116的多个二维彩色图像。区域设定部202对各个图像设定给定区域。图6A表示以所取得的各摄像图像的中心为基准坐标来设定给定区域以使得成为左右对称的示例，但裁出区域并不限定于此。此外，也可以根据生物体样品管旋转机构114的旋转速度或旋转加速度等信息来按每个图像改变给定区域的坐标、宽度。
图6B是在S502以后的处理中作成的展开图的示例。在S502，从图像裁出从S501中设定的给定区域，在S503，将裁出的图像连结，来合成为一张展开图。
对给定区域(裁出区域)的设定方法进行说明。根据给定区域的设定内容，S503以后的处理中取得的展开图的合成精度、由检测对象区域提取部303取得的检测对象区域117的颜色分布的偏差发生改变。首先说明给定区域的坐标和宽度的设定给展开图的合成精度带来的影响。
在对采血管那样圆筒状的生物体样品管116摄像并合成展开图时，通过考虑生物体样品管116的曲率地设定给定区域的坐标和宽度，有减少合成后的展开图的变形且提升检测对象区域117的提取精度的效果。例如，将摄像图像的水平方向的中心坐标设定为给定区域的基准坐标，将从基准坐标成为左右对称的区域设定为给定区域，以使得生物体样品管116的宽度的8％程度(生物体样品管116的区域为128像素的情况下是10像素)成为给定区域的宽度。由此，能减少生物体样品管116的曲率的影响。虽然越缩窄给定区域的宽度，曲率的影响越小，但为了取得包含生物体样品管116全周的信息的展开图，需要将生物体样品管116的摄像张数增加缩窄给定区域的宽度的量。
图7是表示用固定摄像机101摄像的检测对象区域117的明度分布的示例的图。使用图7来说明给定区域的坐标和宽度的设定给检测对象区域117的颜色分布带来的影响。若在将生物体样品管116用光源103a以及光源103b进行了照明的状态下取得图像，则即使是检测对象区域为均匀的溶液的情况，也会检测对象区域117的中心明度变高、在端部明度变低。因此，例如，通过将沿着周向的明度值的变动幅度落在容许范围内(例如固定)的中心区域设定为给定区域，来从各图像分别仅裁出明度值均匀的区域，并合成展开图。由此，有减少合成后的检测对象区域117的明度值的偏差、提升检测对象区域117的颜色的解析精度的效果。即，区域设定部202基于二维彩色图像的明度分布来决定给定区域，以使得合成后的明度值的方差变小。
通过抑制裁出区域的明度偏差，针对带颜色标签118的颜色，也能同样减少展开图合成后的带颜色标签118区域的明度值偏差。即，能在所合成的展开图中减少检测对象区域117与带颜色标签118的颜色分布的重叠，能在检测对象区域提取部303中执行的处理中提升将检测对象区域117和带颜色标签118的颜色分离的解析精度。若带颜色标签118的分离/除去精度提升，就能避免带颜色标签118的误提取，能提升检测对象的颜色和量的解析精度。
图8是表示在生物体样品管116的中心出现2条线状的反射区域的示例的图。若在用给定区域中的光源103a以及光源103b进行了照明的状态下进行摄像，则存在以下情况：在生物体样品管116的表面映入来自光源103a以及光源103b的光的反射分量。反射分量的区域由于通常明度值高且多成为白色，因此，在检测对象区域117中有反射分量的情况下，在检体信息的解析处理成为噪声。因此，区域设定部202通过将给定区域的设定坐标设定在没有反射光噪声的映入的区域，能从展开图合成后的检测对象区域117除去反射分量的区域，能提升检测对象区域117的颜色的解析精度。
此外，通过除去反射分量的区域，能避免将白色的反射分量辨识为白色的标签与检测对象区域117之间的边界的误检测，有提升检测对象区域117的提取精度、提升检测对象的量的解析精度的效果。例如，在出现图8那样的2条线状的反射区域的情况下，通过将反射区域之间(生物体样品管116的中心)设为给定区域，或者，通过将反射区域的外侧设为给定区域，能避免反射分量的映入。
说明考虑了固定摄像机101的生物体样品管116的摄像张数和生物体样品管旋转机构114的旋转速度的给定区域的宽度的设定方法。如上述那样，通过给定区域的坐标和宽度的设定，能得到展开图的合成精度的提升和检测对象区域117的颜色分布的偏差减少的效果，但为了取得包含生物体样品管116全周的信息的展开图，需要考虑生物体样品管旋转机构114的旋转速度和固定摄像机101的摄像间距来设定给定区域的宽度，以使得在展开图合成后没有欠缺的区域。
例如，若在生物体样品管旋转机构114的旋转速度固定的状态下使生物体样品管116(采血管)旋转一周并摄像间隔固定地取得36张图像，生物体样品管116就在帧间旋转10°，但在从36张摄像图像取得生物体样品管116整个周围的展开图的情况下，将生物体样品管116的半径设为r[mm]，给定区域的宽度最低也需要(2πr/36)[mm]程度。
此外，生物体样品管旋转机构114的旋转速度并不固定，在旋转控制驱动器115中进行控制，以使得在旋转之初加速并在成为固定速度后进行减速从而成为旋转结束的情况下，通过每当摄像就设定与生物体样品管旋转机构114的加速度相应的给定区域的宽度，能没有欠缺、区域的重叠且效率良好地取得生物体样品管116的全周的展开图。
此外，也可以基于旋转控制驱动器115的控制信号来控制固定摄像机101的摄像定时，设定与生物体样品管旋转机构114的旋转速度和固定摄像机101的摄像定时相应的给定区域的宽度。
除了上述的效果以外，通过给定区域的铅垂方向的坐标和宽度的设定取得仅所关注的区域(例如检测对象区域117)的展开图，由此，有缩小在以后的处理中输出的展开图的图像尺寸、能减少运算处理的效果。此外，通过给定区域的设定来将摄像图像当中的例如仅对背景板进行摄像的区域等解析所不需要的区域，有除去检体信息解析处理中的噪声且提升解析精度的效果。
<检体信息解析处理的详细内容>
图9是用于说明S403(检体信息解析处理)的详细内容的流程图。在以下的说明中，将各步骤的动作主体设为对应的各处理部，但由于各处理部是通过存放于存储器107或存储装置108的程序实现的，因此，也可以将作为该程序的执行主体的控制器(处理器)106作为各步骤的动作主体，将说明改换说法。
关于本实施方式的检体信息解析处理，在检测对象区域提取部303和解析部304中，根据由展开图合成部302生成的展开图来提取检测对象区域117，根据提取的区域的颜色和区域的尺寸来执行检测对象的状态的判别和液量的测量处理。
(图9：步骤S901：标签区域确定/除去)
检测对象区域提取部303执行从S402中输出的展开图确定检体信息的解析所不需要的标签区域的处理。关于本步骤的具体的处理，之后叙述。
(图9：步骤S902：水平方向位置确定)
检测对象区域提取部303从S402中的展开图合成处理中输出的展开图将S901中确定的标签区域作为检体信息的解析所不需要的区域来除去。检测对象区域提取部303进一步生成确定S903以后的处理中进行解析的水平方向的区域的蒙片。或者，执行生成从展开图仅裁出解析所需要的水平方向的区域的图像的处理。水平方向的区域例如以S901中确定的标签区域的两端的坐标为基准来进行设定。
(图9：步骤S903：铅垂方向位置确定)
检测对象区域提取部303对确定S902中输出的水平方向的区域的蒙片或仅裁出水平方向的区域的图像执行边缘检测处理等。例如，通过识别检体的各区域的边缘，来将检测对象区域117和分离剂等区域分离，提取检测对象区域117。
(图9：步骤S904：检体信息解析处理)
解析部304根据S903的处理中确定的检测对象区域117的颜色信息和区域(坐标以及像素数)的信息，来实施检体状态的判别和液量的算出处理。例如，在检测对象是血清的情况下，由于存在对应于血清状态(正常、溶血、黄疸、乳糜)而血清色发生改变的特征，因此，通过在存储器107中存放颜色特征量、分类所使用的颜色空间的范围和阈值，比对检测对象区域117中取得的颜色信息，能判别检体的血清状态。此外，根据检测对象区域117的区域(坐标以及像素数)的信息和生物体样品管信息取得部203中取得的生物体样品管116的直径信息来算出检测对象的溶液量。
(图9：步骤S904：检体信息解析处理：补充)
在S904的检体信息解析处理中，作为不是提取生物体样品管116的一张摄像图像而是从展开图提取检测对象区域117的优点，举出以下：(a)通过S402中的给定区域的设定方法，减少了检测对象区域117的颜色的偏差，能提升状态的判别精度。(b)在贴附有带颜色标签118的生物体样品管116中，提升了带颜色标签118的除去精度，能避免带颜色标签118所导致的检测对象区域117的误提取。此外，通过给定区域的设定方法，由于能在将生物体样品管116的摄像图像当中的反射分量等不需要的区域从展开图除去的基础上执行检测对象区域117的提取处理，因此，能避免噪声所导致的检测对象区域117的误提取、检测对象的颜色的误解析和误判别。
说明在S901中确定没有带颜色部的标签(例如，白色的标签和仅条形码以及印字的黑色的标签)区域的方法的示例。没有带颜色部的标签区域的确定通过条形码区域的检测及/或白色的检测处理等图像处理来确定。条形码区域的检测例如有基于黑色的颜色阈值的提取方法、边缘提取等基于图像处理的提取方法。在基于边缘提取的检测的情况下，还能通过组合形态学处理来检测条形码的细的线条。白色区域的检测设定颜色(例如色调、彩度、明度)的阈值，并提取符合阈值的范围内的区域作为标签区域。此外，也可以最初确定条形码区域，以检测到的条形码区域为基准坐标，根据生物体样品管信息取得部203中取得的标签的尺寸等信息，来确定并除去标签的范围。
说明在S901中的与检测对象的颜色类似的带颜色标签118的区域确定方法的示例。作为符合的检测对象与带颜色标签118的组合，例如有黄色的血清和黄色的带颜色标签118、红色的血清和红色的带颜色标签118等。此外，在检测对象的颜色为红色、黄色等并按每个测定(检体)不同的情况下，黄色的血清与红色的带颜色标签118、红色的血清与黄色的带颜色标签118的组合也符合。
带颜色标签118如图6的展开图所示那样，存在以下标签等：在白色标签的端的一部分有带颜色部的标签、在条形码区域的上下位置有带颜色部的标签。在与检测对象区域117的颜色接近的带颜色部的情况下，存在将带颜色部作为检测对象区域117而误提取从而使检体信息的解析精度降低的可能性。通过在检测对象区域117的提取前从展开图确定并除去带颜色标签118的区域，有避免了以带颜色部为检测对象的误提取并使解析精度提升的效果。
在后述的标签校准中，作为确定与检测对象区域的颜色类似的带颜色标签118的区域的方法，有如下方法：(方法1)根据生物体样品管信息取得部203中取得的带颜色标签118的颜色信息来确定带颜色部的方法；(方法2)根据生物体样品管信息取得部203中取得的带颜色部的尺寸及/或标签中的带颜色部的位置(标签中的右端、左端、上下等位置)的信息来进行确定的方法。
说明(方法1)根据颜色信息来确定带颜色部的方法。生物体样品管信息取得部203例如通过执行后述的标签校准处理，来事前取得所使用的标签色的信息(色调、彩度、明度值的分布及/或阈值)，在存储器107或存储装置108中存放所使用的标签色的信息。在S901，取得存放于存储器107或存储装置108的带颜色标签118的颜色信息，设定带颜色标签118的颜色阈值(色调、彩度、明度等)，作成用于从展开图仅提取带颜色标签118的带颜色部的蒙片，并确定带颜色部的区域。
(方法1：补充)所使用的带颜色标签118的颜色信息可以由用户使用例如作为输入输出接口109的触控面板等进行输入，并存放到存储器107或存储装置108。生物体样品管信息取得部203通过以用户所指定的颜色为基准在颜色空间内进行搜索，来确定带颜色标签118的区域。由此，能快速发现与带颜色标签118相吻合的颜色。
说明(方法2)根据由生物体样品管信息取得部203取得的带颜色部的尺寸及/或标签中的带颜色部的位置(标签中的右端、左端、上下等位置)的信息来确定带颜色部的方法。生物体样品管信息取得部203例如通过执行后述的标签校准处理来取得带颜色标签118的尺寸及/或标签中的带颜色部的位置，并存放在存储器107或存储装置108。或者，用户也可以使用例如作为输入输出接口109的触控面板等进行输入并存放在存储器107等中。
(方法2：具体的过程)生物体样品管信息取得部203通过上述的没有带颜色部的标签区域的确定方法的示例等，来确定条形码区域和白色标签区域。以所确定的条形码的区域或白色的区域的坐标为基准，根据带颜色标签118的尺寸及/或标签中的带颜色部的配置信息来确定带颜色部的区域。例如，在图6的展开图那样在标签的端有带颜色部的标签中，在检测到白色的标签区域或条形码区域的边缘坐标后，将边缘的坐标起带颜色部的尺寸的相应量外侧的区域(图6中是条形码区域的左侧)确定为带颜色标签118的区域。
<标签校准处理的详细内容>
图10是用于说明标签校准的详细内容的流程图。在以下的说明中，将各步骤的动作主体设为对应的各处理部，但各处理部由于是通过存放于存储器107或存储装置108的程序实现的，因此，也可以将作为该程序的执行主体的控制器(处理器)106设为各步骤的动作主体，将说明改换说法。
生物体样品管信息取得部203所执行的标签校准处理用于在检体解析处理之前从贴附了所使用的带颜色标签118的空的生物体样品管116(以下称作校准器)的摄像图像取得带颜色标签118的颜色信息以及尺寸等信息。本流程图能作为S901的一部分实施。
作为带颜色标签118的颜色的分离方法，考虑从生物体样品管116的摄像图像或展开图取得色调、彩度、明度等的颜色分布并设定能将两者分离的阈值的方法，但即使在均匀的溶液的情况下，检测对象区域117的颜色也会根据背面的标签有无、生物体样品管116表面的反射分量而产生色差，会产生将检测对象区域117的色差检测为带颜色标签118所引起的色差的误检测。因此，通过本流程图的标签校准处理、通过用户输入预先输入所使用的标签的信息，有避免将检测对象区域117的色差误提取为带颜色标签118，提升带颜色标签118的除去精度的效果。
(图10：步骤S1001：校准器二维图像取得)
生物体样品管信息取得部203取得由固定摄像机101摄像的校准器的多个二维彩色图像。图像的取得方法与S401同样。
(图10：步骤S1002：展开图合成处理)
生物体样品管信息取得部203执行与图4的展开图合成处理相同处理，根据S1001中取得的校准器的二维彩色图像来作成一张展开图。
(图10：步骤S1003：带颜色标签提取)
生物体样品管信息取得部203根据S1002中输出的展开图的颜色分布来确定带颜色标签118的区域。
(图10：步骤S1003：带颜色标签提取：具体例其一)
作为带颜色标签118区域的确定方法，存在如下方法：比较从未贴附带颜色标签118的空的生物体样品管116的摄像图像作成的展开图(参考图像)和校准器的展开图的颜色分布，将两者的色差作为带颜色标签118的颜色进行提取，从展开图确定符合的颜色的区域作为带颜色标签区域。
(图10：步骤S1003：带颜色标签提取：具体例其二)
还有如下方法：通过输入输出接口109等，用户在触控面板等输入带颜色标签118的颜色信息，从校准器的展开图提取符合的颜色。例如，在触控面板等的画面显示多色的调色板，用户选择带颜色标签118的颜色。生物体样品管信息取得部203取得事前存放于存储器107或存储装置108等中的与调色板对应的颜色阈值的信息，根据用户选择的调色板来设定带颜色标签118的颜色阈值。从展开图提取符合所取得的颜色阈值的颜色，将其确定为带颜色标签区域。或者，也可以在触控面板等的画面显示校准器的展开图，用户直接或使用画面上的光标等来选择带颜色标签118的区域。
(图10：步骤S1004：带颜色标签颜色信息取得)
生物体样品管信息取得部203取得步骤902中确定的带颜色标签118的区域的颜色分布，根据所取得的颜色信息来设定定义带颜色标签118的标签色的颜色阈值，并存放到存储器107或存储装置108等。
(图10：步骤S1004：带颜色标签颜色信息取得：具体例)
作为本步骤中的阈值的设定方法，能举出以下那样的过程。例如生物体样品管信息取得部203能取得步骤902中确定的带颜色标签118的区域的颜色分布中的色调、彩度、明度等的直方图，将以各自的众数、平均值等为中心例如±5％的范围设定为阈值。
<实施方式1：汇总>
本实施方式1的生物体检体解析装置100执行如下处理：在通过生物体样品管旋转机构使生物体样品管旋转的同时取得生物体样品管的二维彩色图像、并从多个二维彩色图像合成一张展开图的处理；和检体信息解析处理。在合成展开图的处理中，执行给定区域设定处理、二维彩色图像裁出处理、二维彩色图像裁出处理和裁出图像连结处理，在检体信息解析处理中，执行标签区域确定处理、水平方向检测位置确定处理和铅垂方向检测位置确定处理。如此地，通过根据从多个二维彩色图像合成的展开图将标签区域除去，并提取检测对象区域(例如血清区域)，能将带颜色标签和检测对象区域高精度地分离，并解析检测对象区域中所含的液体。
本实施方式1所涉及的生物体检体解析装置100为了将在摄像图像中映入的反射分量等噪声除去，裁出给定区域并进行合成(参考图8)。进而，将沿着生物体样品管116的周向的明度值的变动落在容许范围内的部分裁出，通过将该裁出图像连结来作成展开图(参考图7)。由此，能期待检体信息的解析精度的提升。
本实施方式1所涉及的生物体检体解析装置100通过比较无标签生物体样品管和带标签生物体样品管来实施标签校准。通过标签校准预先取得标签的信息，根据所取得的信息来确定并除去带颜色标签的区域。由于通过预先实施标签校准，不再将带颜色标签和检测对象区域混同，因此能避免将带颜色标签的颜色误提取为检测对象的颜色的误解析，能期待得到更正确的解析结果。
<实施方式2>
图11是表示本公开的实施方式2中的展开图合成处理的流程图。在本实施方式2中，不是根据预先确定的给定区域来裁出摄像图像，而是按每个摄像图像检测摄像图像内的生物体样品管116的倾斜度、距图像中心的偏离，将检测到的偏离设为生物体样品管116的旋转轴(S1101)。以检测到的旋转轴为基准来按每个图像设定给定区域(S1102～S1104)。展开图合成处理以外的结构与实施方式1同样。
图12是表示生物体样品管116的旋转轴的示例的图。由握持机构111握持并通过生物体样品管旋转机构114而旋转的生物体样品管116虽然也有图12左那样旋转轴与图像中心一致的情况，但有时也会如图12中央那样横向偏离、如图12右那样旋转轴保持倾斜地进行摄像。在旋转轴的特征在测定间、装置间无法固定的情况下，通过不是根据固定值来预先设定给定区域，而是基于生物体样品管116的旋转轴动态地设定给定区域，有提升展开图的合成精度的效果。
图13是表示生物体样品管116的旋转轴检测处理(S1101)的示例的流程图。区域设定部202按照本流程图来执行生物体样品管116的旋转轴(回归直线)检测处理。本流程图利用生物体样品管116的左右对称性，根据摄像图像与摄像图像的翻转图像的RGB空间中的距离来检测生物体样品管116的倾斜度和距中心轴的位置偏离。
(图13：步骤S1301：二维彩色图像取得)
区域设定部202取得由固定摄像机101摄像的生物体样品管116的二维彩色图像。图像的取得方法与S401同样。
(图13：步骤S1302：解析区域提取处理)
区域设定部202从步骤1301中取得的二维彩色图像提取解析区域。由于以生物体样品管116的左右对称性为前提进行解析，因此，将生物体样品管116的摄像图像当中的未贴附标签的区域提取为解析区域。例如，若是离心分离后的血液检体，则选择生物体样品管116的底附近的拍摄到血块的区域。解析区域尺寸例如将水平方向宽度设定为生物体样品管116的直径程度，将铅垂方向的宽度设定为50像素等。若是相同检体的摄像，则解析区域的设定值不需要按每个摄像图像改变，可以是固定值，但在测定不同长度的生物体样品管116的情况下，需要对应于生物体样品管116的长度来设定解析区域。这时，在存储器107或存储装置108等中存放多个设定值，根据生物体样品管信息取得部203中取得的生物体样品管116的长度信息等来变更设定值。
(图13：步骤S1303：解析区域翻转图像取得)
区域设定部202取得或生成对二维彩色图像设定的解析区域的左右翻转图像。
(图13：步骤S1304：RGB空间距离取得)
区域设定部202按解析区域的每个像素取得解析区域的图像与翻转图像之间的RGB颜色空间的距离。
(图13：步骤S1305：RGB颜色空间距离最小坐标提取处理)
区域设定部202按解析区域的每个铅垂方向坐标来比较S1304中取得的RGB颜色空间的距离，取得每个铅垂方向坐标的最小值和得到该最小值的坐标。
(图13：步骤S1306：回归直线取得处理)
区域设定部202通过将S1305中检测到的最小值的坐标在铅垂方向上连结，来提取为解析区域的中心坐标，根据所提取的坐标来设定一次回归直线。
区域设定部202根据通过本流程图检测到的旋转轴来设定给定区域，由此即使是测定时生物体样品管116的旋转轴倾斜的情况、横向偏离的情况，也能将所期望的区域设定为给定区域，因此展开图合成精度提升。
<实施方式2：汇总>
本实施方式2所涉及的生物体检体解析装置100在展开图合成处理中，将根据生物体样品管旋转机构的旋转速度信息、生物体样品管的倾斜度、横向偏离的信息设定的给定区域裁出，并进行合成。由此，能期待检体信息的解析中使用的展开图的合成精度的提升。
<实施方式3>
图14是表示本公开的实施方式3中的展开图合成处理的流程图。本实施方式3在展开图合成处理中对裁出的二维彩色图像执行曲率修正处理后将图像连结，输出展开图。通过执行曲率修正处理，例如在图8那样使给定区域的基准坐标从生物体样品管116的中心错开的情况下等，也有减少合成后的展开图的变形的效果。此外，在图8的示例那样在生物体样品管116的中心区域有反射区域等的噪声的情况下，也能错开给定区域来取得没有变形的展开图，由此有提升检测对象区域117的解析精度的效果。展开图合成处理以外的结构与实施方式1同样。
S1401相当于S501，S1402相当于S502，S1404相当于S504。在S1403，区域设定部202根据生物体样品管信息取得部203所取得的生物体样品管116的直径的信息和S1401中设定的给定区域的信息，来考虑生物体样品管116的曲率地计算修正用的系数，例如通过仿射变换等来修正裁出图像。
图15是起因于生物体样品管116的曲率而裁出图像变形的示例。例如，若在图8中在从生物体样品管116的中心错开的区域设定给定区域并合成展开图，带颜色标签118存在如图15左那样变形的情况。具体地，若不考虑生物体样品管116的曲率地将长方形(长条型)的区域作为给定区域裁出，就会如图15左那样在合成后的图像中产生变形。图15右表示按照图14的流程图在裁出的给定区域的图像的变形修正后进行了合成处理的情况的带颜色标签118。通过考虑生物体样品管116的尺寸和形状(曲率)，按每个裁出的图像修正变形，有减少合成后的展开图的变形的效果。
<实施方式4>
图16是表示本公开的实施方式4中的S403的详细处理的流程图。在实施方式1的S403中，说明了根据检测对象区域117的颜色和区域的尺寸的信息来进行检测对象的状态判别和液量测定。在本实施方式4中，从检测到的标签、带颜色标签118的信息取得被试验者、检体等的检查信息。其他结构与实施方式1同样。
作为从标签、带颜色标签118取得的信息，有条形码以及带颜色部的颜色信息。关于条形码的信息，通过访问将读取内容(例如ID编号等)和存放于外部的主服务器等的被试验者的信息建立关联的数据库，能在本实施方式的生物体检体解析装置取得被试验者的信息等。
此外，例如通过在外部服务器或存储器107或者存储装置108中存放将生化学分析的种类、检体的种类(血清、全血、尿等)的信息等和带颜色标签118的颜色建立关联的数据库，能从所取得的带颜色标签118的颜色信息取得分析内容、检体的种类。
本实施方式的生物体检体解析装置100在存储器107或存储装置108中事前存放与生物体样品的类别对应的颜色信息，由解析部304比对所取得的检测对象区域117的颜色信息和预先存放于存储器705等的颜色信息，由此来判别生物体样品的类别。这时，通过按每个检体种类存放进行比对的数据，从根据带颜色标签118的颜色信息取得的检体的种类选择进行比对的数据，由此能进行多种类的生物体样品的解析。
<关于本公开的变形例>
本公开并不限定于前述的实施方式，而包含各种变形例。例如，上述的实施方式为了易于理解地说明本发明而详细进行了说明，但不一定限定于具备说明的全部结构。此外，能将某实施方式的结构的一部分置换为其他实施方式的结构，此外，还能在某实施方式的结构中加进其他实施方式的结构。此外，能对各实施方式的结构的一部分进行其他结构的追加、删除、置换。
在以上的实施方式中，也可以在通过S501决定了裁出区域的后，通过用户指定来变更裁出区域的坐标、尺寸。具体地，用户经由用户接口指定裁出区域的坐标、尺寸，控制器106按照该指定来设定裁出区域。
本公开的实施方式的功能还能通过软件的程序代码实现。在该情况下，将记录了程序代码的存储介质提供给系统或装置，该系统或装置的计算机(或CPU、MPU)将存放于存储介质的程序代码读出。在该情况下，从存储介质读出的程序代码自身实现前述的实施方式的功能，该程序代码自身以及存储其的存储介质构成本公开。作为用于供给这样的程序代码的存储介质，例如使用软盘、CD-ROM、DVD-ROM、硬盘、光盘、光磁盘、CD-R、磁带、非易失性的存储卡、ROM等。
此外，也可以基于程序代码的指示，由在计算机上工作的OS(操作系统)等进行实际的处理的一部分或全部，通过该处理实现前述的实施方式的功能。进而，也可以在将从存储介质读出的程序代码写入到计算机上的存储器后，计算机的CPU等基于该程序代码的指示来进行实际的处理的一部分或全部，通过该处理来实现前述的实施方式的功能。
进而，也可以通过将实现实施方式的功能的软件的程序代码经由网络发布，来将其存放到系统或装置的硬盘、存储器等存储单元或CD-RW、CD-R等存储介质，在使用时，该系统或装置的计算机(或CPU、MPU)将存储于该存储单元、该存储介质的程序代码读出并执行。
在上述的实施方式中，示出了认为说明上需要的控制线、信息线，但产品上不一定限于示出全部控制线、信息线。可以全部结构相互连接。
附图标记的说明
100 生物体检体解析装置
101 固定摄像机
102 背景板
103a以及103b 光源
104a以及104b 光源用驱动器
105 生物体样品管支架
106 控制器
107 存储器
108 存储装置
109 输入输出接口
110 数据总线
111 握持机构
112 移动机构
113 上下控制驱动器
114 生物体样品管旋转机构
115 旋转控制驱动器
116 生物体样品管
117 检测对象区域
118 带颜色标签
201 图像处理部
202 区域设定部
203 生物体样品管信息取得部
301 区域裁出部
302 展开图合成部
303 检测对象区域提取部
304 解析部。

Claims (15)

1.一种生物体检体解析装置，对收容于贴附有标签的生物体样品管的生物体检体进行分析，
所述生物体检体解析装置的特征在于具备：
旋转机构，其握持所述生物体样品管，并使其旋转；
摄像机，其通过对所述生物体样品管摄像来取得二维彩色图像；和
处理器，其对所述二维彩色图像进行处理，
所述处理器裁出所述二维彩色图像中的部分区域，
所述处理器通过将裁出的所述部分区域的图像沿着所述生物体样品管的周向进行连结，来合成所述生物体样品管的展开图，
所述处理器从所述展开图提取所述二维彩色图像当中的设为检测对象的检测对象区域。
2.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器基于表征所述标签的图像的特征的信息来识别所述二维彩色图像中所含的所述标签的图像，
所述处理器从所述二维彩色图像当中的除了所识别的所述标签的图像以外的部分提取所述检测对象区域。
3.根据权利要求2所述的生物体检体解析装置，其特征在于，
所述处理器使用通过比较贴附了所述标签的所述生物体样品管的所述二维彩色图像和未贴附所述标签的所述生物体样品管的所述二维彩色图像而得到的信息，作为表征所述标签的图像的特征的信息。
4.根据权利要求2所述的生物体检体解析装置，其特征在于，
所述生物体检体解析装置还具备：接口，其接受指定所述标签的颜色、所述标签的位置、所述标签的形状或所述标签的尺寸当中的至少任一者的指示输入，
所述处理器按照所述接口所接受到的所述指示输入来决定表征所述标签的图像的特征的信息。
5.根据权利要求2所述的生物体检体解析装置，其特征在于，
所述生物体检体解析装置还具备：存储装置，其存放描述了所述标签的颜色、所述标签的位置、所述标签的形状或所述标签的尺寸当中的至少任一者的数据，
所述处理器使用所述存储装置所存放的所述数据所描述的信息，作为表征所述标签的图像的特征的信息。
6.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器通过将所述二维彩色图像当中的沿着所述生物体样品管的周向的明度值的变动落在给定范围内的部位作为所述部分区域裁出，从而使所述展开图中的明度值的方差落在容许范围内。
7.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述生物体检体解析装置还具备：光源，其对所述生物体样品管照射光，
所述处理器将所述光源所照射的光在所述生物体样品管的表面反射而产生的反射光噪声的噪声量为容许阈值以下的部位作为所述部分区域裁出。
8.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器控制所述旋转机构的旋转速度、所述二维彩色图像的摄像定时以及所述二维彩色图像的摄像张数。
9.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器从所述展开图取得所述检测对象区域的颜色，
所述处理器通过将所取得的所述检测对象区域的颜色和描述了所述生物体检体的颜色的数据进行比较，来确定所述检测对象区域中所含的所述生物体检体的类别，输出该确定的类别。
10.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器使用描述了所述检测对象区域的坐标、所述检测对象区域的像素数以及所述生物体样品管的尺寸的信息，来算出所述检测对象区域中所含的所述生物体检体的量。
11.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器在所述二维彩色图像中检测所述旋转机构使所述生物体样品管旋转时的旋转轴的位置，
所述处理器通过将与所检测的旋转轴正交的方向用作所述生物体样品管的周向，来确定作为所述部分区域而裁出的区域。
12.根据权利要求11所述的生物体检体解析装置，其特征在于，
所述处理器生成使所述二维彩色图像左右翻转的翻转图像，
所述处理器算出所述二维彩色图像与所述翻转图像之间的颜色空间中的距离，
所述处理器通过将所述距离最小的坐标沿着铅垂方向进行连结，来确定所述旋转轴。
13.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器使用所述生物体样品管的曲率来修正所述二维彩色图像的变形，
所述处理器使用修正了所述变形的所述二维彩色图像来合成所述展开图。
14.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述生物体检体解析装置还具备：接口，其接受指定所述部分区域的位置和尺寸的指示输入，
所述处理器按照所述接口所接受到的所述指示输入来决定所述部分区域的位置和尺寸。
15.根据权利要求1所述的生物体检体解析装置，其特征在于，
所述处理器识别所述二维彩色图像中所含的所述标签的图像，
所述处理器通过从所识别的所述标签的图像提取描述了所述生物体检体的属性的信息，来确定所述生物体检体的属性，按照该确定的属性来解析所述生物体检体。
CN202180019979.5A 2020-04-09 2021-02-08 生物体检体解析装置 Pending CN115280158A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020070213A JP7436270B2 (ja) 2020-04-09 2020-04-09 生体検体解析装置
JP2020-070213 2020-04-09
PCT/JP2021/004491 WO2021205737A1 (ja) 2020-04-09 2021-02-08 生体検体解析装置

Publications (1)

Publication Number Publication Date
CN115280158A true CN115280158A (zh) 2022-11-01

Family

ID=78023638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180019979.5A Pending CN115280158A (zh) 2020-04-09 2021-02-08 生物体检体解析装置

Country Status (5)

Country Link
US (1) US20230097384A1 (zh)
EP (1) EP4134677A4 (zh)
JP (1) JP7436270B2 (zh)
CN (1) CN115280158A (zh)
WO (1) WO2021205737A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113933294B (zh) * 2021-11-08 2023-07-18 中国联合网络通信集团有限公司 浓度检测方法及装置
JP2024002211A (ja) * 2022-06-23 2024-01-11 株式会社日立ハイテク 試料状態判定装置、試料状態判定方法及び試料検査装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3733087B2 (ja) * 2002-07-04 2006-01-11 アロカ株式会社 検体分析装置
US7982201B2 (en) * 2009-09-08 2011-07-19 Jadak, Llc System and method for detection of liquid level in a vessel
US8319823B2 (en) 2009-11-03 2012-11-27 Jadak, Llc System and method for panoramic image stitching
JP5330313B2 (ja) * 2010-05-24 2013-10-30 株式会社日立ハイテクノロジーズ 生体試料の分析装置
JP5474903B2 (ja) * 2011-09-28 2014-04-16 あおい精機株式会社 検査前処理装置、検査前処理方法、及び検体処理装置
JP6143584B2 (ja) * 2013-07-04 2017-06-07 株式会社日立ハイテクノロジーズ 検出装置および生体試料分析装置
JP6453564B2 (ja) * 2014-06-25 2019-01-16 株式会社日立ハイテクノロジーズ 検出装置
WO2017205778A1 (en) * 2016-05-27 2017-11-30 Biomerieux, Inc. Method and apparatus for detection of foam in specimen containers
EP3399463A1 (en) * 2017-05-05 2018-11-07 Ares Trading S.A. Method and apparatus for determining information about a drug-containing vessel

Also Published As

Publication number Publication date
WO2021205737A1 (ja) 2021-10-14
EP4134677A1 (en) 2023-02-15
EP4134677A4 (en) 2024-03-20
US20230097384A1 (en) 2023-03-30
JP2021167733A (ja) 2021-10-21
JP7436270B2 (ja) 2024-02-21

Similar Documents

Publication Publication Date Title
US7454053B2 (en) System and method for automatically recovering video tools in a vision system
JP6691165B2 (ja) 情報処理装置、表示制御システム、およびプログラム
CN115280158A (zh) 生物体检体解析装置
WO2012169088A1 (ja) 画像処理装置、画像処理方法及び画像処理システム
WO1998018117A2 (en) Machine vision calibration targets and methods of determining their location and orientation in an image
JP2000508095A (ja) 境界マッピングのシステムおよび方法
CN111985292A (zh) 用于图像处理结果的显微镜方法、显微镜和具有验证算法的计算机程序
JP6733983B2 (ja) 画像解析装置
JP2012159318A (ja) 分析装置
KR20200082746A (ko) 골수 판독을 위한 셀존 레이블링 장치 및 이를 포함하는 셀존 검출 시스템
EP2898449B1 (en) Method and system for detecting 2d barcode in a circular label
JP2010133744A (ja) 欠陥検出方法およびその方法を用いた視覚検査装置
WO2022174239A1 (en) Methods and apparatus adapted to identify 3d center location of a specimen container using a single image capture device
JP4479999B2 (ja) パターンマッチング用の図形選択支援装置、図形選択支援方法およびプログラム
JP2005227097A (ja) 細胞画像解析装置
CN115984593B (zh) 烟支滤棒缺陷检测方法、装置、设备及存储介质
JP4038210B2 (ja) 自動流動顕微鏡のための粒子抽出
JP4500138B2 (ja) 細胞画像解析方法
CN113302472B (zh) 生物体试样检测装置
JP2002140713A (ja) 画像処理方法およびその装置
JP6422824B2 (ja) 検体前処理方法及び検体前処理装置
WO2023248789A1 (ja) 試料状態判定装置、試料状態判定方法及び試料検査装置
WO2023276853A1 (ja) 画像処理装置、方法及び画像処理システム
US11763445B2 (en) Inspection of a target object using a comparison with a master image and a strictness of a quality evaluation threshold value
JP7407282B2 (ja) 管アセンブリタイプを識別する装置および方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination