CN111031995A - 药剂检查辅助装置、图像处理装置、图像处理方法以及程序 - Google Patents

药剂检查辅助装置、图像处理装置、图像处理方法以及程序 Download PDF

Info

Publication number
CN111031995A
CN111031995A CN201880051890.5A CN201880051890A CN111031995A CN 111031995 A CN111031995 A CN 111031995A CN 201880051890 A CN201880051890 A CN 201880051890A CN 111031995 A CN111031995 A CN 111031995A
Authority
CN
China
Prior art keywords
image
medicine
unit
emphasized
main
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880051890.5A
Other languages
English (en)
Inventor
横内康治
高岛正伸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyama Chemical Co Ltd
Fujifilm Corp
Original Assignee
Toyama Chemical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyama Chemical Co Ltd filed Critical Toyama Chemical Co Ltd
Publication of CN111031995A publication Critical patent/CN111031995A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61J—CONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J3/00—Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/26—Measuring arrangements characterised by the use of optical techniques for measuring angles or tapers; for testing the alignment of axes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/85—Investigating moving fluids or granular solids
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/586—Depth or shape recovery from multiple images from multiple light sources, e.g. photometric stereo
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/66—Trinkets, e.g. shirt buttons or jewellery items
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00—ICT specially adapted for the handling or processing of medical references
    • G16H70/40—ICT specially adapted for the handling or processing of medical references relating to drugs, e.g. their side effects or intended usage
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06—Recognition of objects for industrial automation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/12—Acquisition of 3D measurements of objects
    • G06V2201/121—Acquisition of 3D measurements of objects using special illumination

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Public Health (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Medicinal Chemistry (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Toxicology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Signal Processing (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Medical Preparation Storing Or Oral Administration Devices (AREA)
  • Image Analysis (AREA)

Abstract

提供药剂检查辅助装置、图像处理装置、图像处理方法以及程序，不管识别信息是刻印还是印字，都可适当地辨识识别信息。通过图像处理装置解决上述课题，在该图像处理装置中，取得光向第2药剂的表面的照明方向分别不同的第2药剂的多个拍摄图像，进行强调第2药剂的刻印部分的处理来生成第1强调图像，进行强调第2药剂的印字部分的处理来生成第2强调图像，对由指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同。

Description

药剂检查辅助装置、图像处理装置、图像处理方法以及程序
技术领域
本发明涉及药剂检查辅助装置、图像处理装置、图像处理方法以及程序，特别涉及从拍摄到药剂的图像确定药剂的种类的药剂检查辅助装置、图像处理装置、图像处理方法以及程序。
背景技术
对药剂赋予用于识别药剂的信息。通过读取该识别信息，能识别药剂的种类。作为识别信息的赋予的方法，有作为刻印进行雕刻的药剂和进行印字的药剂。
在专利文献1中记载了如下技术：使用照度差立体法作成以图像的浓淡(亮度)来表现高度的轮廓提取图像，对伤痕、印字进行检查。根据专利文献1的技术，能实现难以受到工件、照明的倾斜的影响的、对环境健壮的图像检查。
现有技术文献
专利文献
专利文献1：JP特开2015-232483号公报
发明内容
发明要解决的课题
通过在药剂的表面印字而得到的字符等在表面不存在凹凸。因此，若如专利文献1记载的装置那样生成轮廓提取图像，就会无法辨识出通过印字得到的信息。另外，并不明确对照对象的药剂的识别信息是通过刻印赋予的还是通过印字赋予的。
因此，存在并不明确最好对拍摄的图像进行怎样的图像处理的问题点。
本发明鉴于这样的事情而完成，其目的在于，提供药剂检查辅助装置、图像处理装置、图像处理方法以及程序，不管识别信息是刻印还是印字，都能适当地辨识识别信息。
用于解决课题的手段
为了达成上述目的，图像处理装置的一个方案具备：主图像取得部，取得第1药剂的主图像；拍摄图像取得部，取得光向第2药剂的表面的照明方向分别不同的第2药剂的多个拍摄图像；第1图像处理部，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的刻印部分的处理，生成第1强调图像；第2图像处理部，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的印字部分的处理，生成第2强调图像；指定信息取得部，取得对将第1强调图像以及第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和判定部，对由指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同。
根据本方案，取得第1药剂的主图像，并取得光向第2药剂的表面的照明方向分别不同的药剂的多个拍摄图像，进行强调第2药剂的刻印部分的处理来生成第1强调图像，进行强调第2药剂的印字部分的处理来生成第2强调图像，对由指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同，因此，不管识别信息是刻印还是印字，都能适当地辨识识别信息。
优选地，将主图像和指定信息建立关联地进行存储。由此，能适当地取得指定信息。
优选地，具备：药剂检测部，从多个拍摄图像检测拍到第2药剂的区域，第1图像处理部以及第2图像处理部对检测到的区域进行处理。由此，能限定进行处理的区域，能缩短处理所涉及的时间。
优选地，拍摄图像取得部取得3张以上的拍摄图像，第1图像处理部基于3张以上的拍摄图像来生成第1强调图像。由此，能适当地强调药剂的刻印部分。
优选地，第1图像处理部通过照度差立体法取得第2药剂的表面的三维信息，来生成第1强调图像。由此，能适当地强调药剂的刻印部分。
优选地，第2图像处理部实施平滑化处理、清晰化处理以及边缘检测处理的至少一者来生成第2强调图像。由此，能适当地强调药剂的印字部分。
优选地，具备：类似度算出部，算出表示由指定信息指定的图像和主图像相类似的程度的类似度，判定部基于类似度来判定第1药剂和第2药剂是否相同。由此，能适当地判定第1药剂和第2药剂是否相同。
优选地，类似度算出部算出由多个指定信息指定的图像与多个主图像的类似度，判定部针对由类似度最高的指定信息指定的图像与主图像的组合判定为第1药剂和第2药剂相同。由此，能适当地判定第1药剂和第2药剂是否相同。
优选地，主图像取得部基于处方数据来取得第1药剂的主图像。由此，能适当地取得第1药剂的主图像。作为处方数据，包含记载于处方笺的信息、基于记载于处方笺的信息而进行设定或变更等的信息、由用户输入的信息等。
为了达成上述目的，药剂检查辅助装置的一个方案具备：主图像取得部，取得第1药剂的主图像；照明部，具有对第2药剂的表面分别从不同的多个照明方向照射光的多个光源；拍摄部，拍摄第2药剂；拍摄控制部，控制照明部以及拍摄部来取得光向第2药剂的照明方向分别不同的第2药剂的多个拍摄图像；第1图像处理部，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的刻印部分的处理，生成第1强调图像；第2图像处理部，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的印字部分的处理，生成第2强调图像；指定信息取得部，取得对将第1强调图像以及第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和判定部，对由所述指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同。
根据本方案，取得第1药剂的主图像，取得光向第2药剂的表面的照明方向分别不同的第2药剂的多个拍摄图像，进行强调第2药剂的刻印部分的处理来生成第1强调图像，进行强调第2药剂的印字部分的处理来生成第2强调图像，对由指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息指定的图像和主图像进行对照来判定第1药剂和第2药剂是否相同，因此不管识别信息是刻印还是印字，都能适当地辨识识别信息。
优选地，具备：主图像存储部，存储第1药剂的主图像，将指定信息与主图像建立关联地存储在主图像存储部。由此，能适当地取得指定信息。
优选地，拍摄控制部取得通过照明部的多个光源当中的2个以上的光源对第2药剂照射光的第2药剂的拍摄图像。由此，能适当地强调药剂的印字部分。
优选地，照明部对第2药剂的表侧以及背侧照射光，拍摄部拍摄第2药剂的表侧以及背侧。由此，能不依赖于药剂的朝向地取得适当的拍摄图像。
优选地，照明部具备：第1光源，在第1方向上照射光；第2光源，在第2方向上照射光；第3光源，在第3方向上照射光；和第4光源，在第4方向上照射光，第2方向是在俯视表面的情况下与第1方向对置的方向，第3方向是在俯视表面的情况下与第1方向正交的方向，第4方向是在俯视表面的情况下与第3方向对置的方向。由此，能适当地取得光向药剂的照明方向分别不同的药剂的多个拍摄图像。
为了达成上述目的，图像处理方法的一个方案具备：主图像取得步骤，取得第1药剂的主图像；拍摄图像取得步骤，取得光向第2药剂的表面的照明方向分别不同的药剂的多个拍摄图像；第1图像处理步骤，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的刻印部分的处理，生成第1强调图像；第2图像处理步骤，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的印字部分的处理，生成第2强调图像；指定信息取得步骤，取得对将第1强调图像以及第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和判定步骤，对由指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同。
根据本方案，取得第1药剂的主图像，取得光向第2药剂的表面的照明方向分别不同的药剂的多个拍摄图像，进行强调第2药剂的刻印部分的处理来生成第1强调图像，进行强调第2药剂的印字部分的处理来生成第2强调图像，对由指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息指定的图像和主图像进行对照来判定第1药剂和第2药剂是否相同，因此不管识别信息是刻印还是印字，都能适当地辨识识别信息。
为了达成上述目的，程序的一个方案使计算机执行：主图像取得功能，取得第1药剂的主图像；拍摄图像取得功能，取得光向第2药剂的表面的照明方向分别不同的第2药剂的多个拍摄图像；第1图像处理功能，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的刻印部分的处理，生成第1强调图像；第2图像处理功能，基于多个拍摄图像当中的至少1张拍摄图像进行强调第2药剂的印字部分的处理，生成第2强调图像；指定信息取得功能，取得对将第1强调图像以及第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和判定功能，对由指定信息指定的图像和主图像进行对照，来判定第1药剂和第2药剂是否相同。
根据本方案，取得第1药剂的主图像，取得光向第2药剂的表面的照明方向分别不同的第2药剂的多个拍摄图像，进行强调第2药剂的刻印部分的处理来生成第1强调图像，进行强调第2药剂的印字部分的处理来生成第2强调图像，对由指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息指定的图像和主图像进行对照来判定第1药剂和第2药剂是否相同，因此不管识别信息是刻印还是印字，都能适当地辨识识别信息。
为了达成上述目的，药剂检查辅助装置的一个方案对药剂进行检查，该药剂检查辅助装置具备：药剂判别部，对来自包含药剂的药剂主图像的药剂数据库的药剂主图像和拍摄到要进行检查的药剂的拍摄图像进行对照，来判别存在于拍摄图像的药剂与哪个药剂相符；和一览作成部，作成要进行检查的药剂的一览表，该一览表将药剂主图像和拍摄图像中判别为各药剂的药剂区域图像对齐位置且强调刻印部分或印字部分地进行显示。
根据本方案，将药剂的药剂主图像和拍摄图像中的药剂区域图像对齐位置且强调刻印部分或印字部分地进行显示，因此不管识别信息是刻印还是印字，都能使用户适当地辨识识别信息。
发明效果
根据本发明，不管识别信息是刻印还是印字，都能适当地辨识识别信息。
附图说明
图1是表示药剂检查辅助装置的结构的图。
图2是表示取得分包袋的图像的情形的侧视图。
图3是表示取得分包袋的图像的情形的顶视图。
图4是表示处理部的内部结构的图。
图5是表示药剂检查辅助方法的处理的流程图。
图6是表示图像处理的结果的一例的图。
图7是表示图像处理的结果的一例的图。
图8是表示图像处理的结果的一例的图。
图9是表示图像处理的结果的一例的图。
图10是表示药剂检查辅助装置的结构的图。
图11是表示处理部的内部结构的图。
图12是表示药剂检查辅助方法的处理的流程图。
图13是表示药剂检查辅助方法的处理的流程图。
图14是表示药剂检查辅助装置的结构的图。
图15是表示取得分包袋的图像的情形的侧视图。
图16是表示取得分包袋的图像的情形的顶视图。
图17是表示药剂检查辅助方法的处理的流程图。
图18是表示药剂检查辅助装置的结构的图。
图19是表示药剂检查辅助方法的处理的流程图。
图20是表示药剂检查辅助方法的处理的流程图。
图21是表示药剂检查辅助装置的结构的图。
图22是表示处理部的内部结构的图。
图23是表示药剂检查辅助方法的处理的流程图。
图24是表示一览表的图。
图25是表示比较例的一览表的图。
具体实施方式
以下，按照附图来对本发明的优选的实施方式进行详细说明。
<第1实施方式>
第1实施方式所涉及的药剂检查辅助装置是将主图像和拍摄图像进行对照来辅助药剂的监查的装置，不管附加在药剂的识别信息是通过刻印而附加的情况，还是通过印字而附加的情况，都可进行正确的对照。
另外，所谓通过刻印而附加，是指通过在药剂的表面形成凹陷区域即槽来形成识别信息。槽并不限定于挖掘表面而形成，也可以是通过按压表面而形成。另外，刻印也可以包含分割线等没有识别功能的刻印。
此外，所谓通过印字而附加，是指通过以接触或非接触的方式对药片的表面赋予可食性墨水等来形成识别信息。在此，所谓通过印字而附加，与通过印刷而附加同义。
图1是表示第1实施方式所涉及的药剂检查辅助装置1的结构的图。药剂检查辅助装置1具备处理部10、存储部40、显示部50、操作部60以及运送机构70。另外，在处理部10连接有照明部32、摄像机36A、摄像机36B以及处方笺读取器38。
图2是表示在药剂检查辅助装置1中取得分包袋(分包到其中的药剂)的图像的情形的侧视图，图3是顶视图。
照明部32具备对分包袋TP连续而构成的药包带PB照射光的多个光源34。在分包袋TP中分别分包有配过药的药剂。关于多个光源34，在药包带PB的上侧(图2的+z方向侧)以及下侧(图2的-z方向侧)分别配置4个光源34N、34S、34E以及34W。另外，分别在图2中省略药包带PB的上侧以及下侧的光源34N以及34S的图示，在图3中省略药包带PB的下侧的4个光源34N、34S、34E以及34W的图示。
药包带PB的上侧的光源34N(第1光源的一例)、34S(第2光源的一例)、34E(第3光源的一例)以及34W(第4光源的一例)在俯视xy面的情况下分别在图3的-y方向(第1方向的一例)、+y方向(第2方向的一例)、-x方向(第3方向的一例)以及+x方向(第4方向的一例)上照射光。即，光源34S的照明方向是在俯视xy面的情况下与光源34N的照明方向对置的方向，光源34E的照明方向是在俯视xy面的情况下与光源34N的照明方向正交的方向，光源34W的照明方向是在俯视xy面的情况下与光源34E的照明方向对置的方向。
针对药包带PB的下侧的光源34N、34S、34E以及34W，也同样配置。由此，照明部32对分包袋TP(分包到其中的药剂)的表侧以及背侧照射光。
摄像机36A以及摄像机36B(拍摄部的一例)由数字摄像机构成。如图2所示那样，摄像机36A配置于药包带PB的上侧，摄像机36B配置于药包带PB的下侧。摄像机36A以及摄像机36B对分包袋TP(分包到其中的药剂)的表侧以及背侧进行拍摄。
分包袋TP(药包带PB)通过运送机构70而在图3的+x方向(药包带PB的长边方向)上被运送。在拍摄时，由分包袋TP的上侧的光源34N、34S、34E以及34W分别从4个方向对分包袋TP的上侧进行照明，由分包袋TP的下侧的光源34N、34S、34E以及34W分别从4个方向对分包袋TP的下侧进行照明。另外，优选，在拍摄时，不对分包袋TP照射从多个光源34照射的光以外的光。
如图3所示那样，分包袋TP的上侧的光源34N、34S、34E以及34W各自与摄像机36A的拍摄光轴PA的间隔(d1、d2、d3、d4)相同。即，多个光源34和拍摄光轴PA是等间隔的(d1＝d2＝d3＝d4)。针对分包袋TP的下侧的光源34N、34S、34E以及34W这各个光源和摄像机36B，也同样地配置。
可以在药剂检查辅助装置1设置载置分包袋TP的载台。在该情况下，载台由使从分包袋TP的下侧的光源34N、34S、34E以及34W照射的光透过的原材料构成即可。
图1所示的处方笺读取器38(处方笺信息取得部的一例)通过读取处方笺来取得处方笺信息。例如通过OCR(Optical Character Recognition，光学字符识别)从记载于纸的处方笺读取患者姓名、处方所开的药剂以及其数量等信息。在处方笺中记录有表示与处方所开的药剂相关的信息的条形码等的情况下，可以从条形码读取处方所开的药剂以及其数量等信息。另外，也可以由用户读取处方笺，通过操作部60所具有的键盘等输入设备来输入处方笺信息。由处方笺读取器38取得的处方笺信息存储在存储部40中。
这里说明了读取处方笺来取得处方笺信息的示例，但处方笺读取器38能取代处方笺信息来取得各种处方数据。作为处方数据，可以是记载于处方笺的信息本身，也可以是基于记载于处方笺的信息由医师以及/或者药剂师进行了设定以及/或者变更等的信息。例如，处方数据中还能包含进行下述操作等而得到的信息：在处方笺中记载了原研药的名称的情况下变更为仿制药(generic drug)；或者在仅记载了药剂的一般名称的情况下选择原研药或仿制药。
存储部40是由CD(Compact Disk，光盘)、DVD(Digital Versatile Disk，数字多功能盘)、硬盘(Hard Disk)、各种半导体存储器等非临时性的记录介质构成的药剂数据库。在存储部40中除了存储处方笺信息、主图像以外，还将由摄像机36A以及摄像机36B取得的拍摄图像、或对拍摄图像实施了图像处理的处理完毕拍摄图像(基于拍摄图像的图像)相互建立关联进行存储。
显示部50具备监视器52，能显示从处方笺读取器38取得的处方笺信息、分包后的药剂的拍摄图像、存储于存储部40的主图像等。操作部60包含鼠标等指向设备以及键盘等输入设备，用户能通过操作部60操作显示于监视器52的图像、按钮等。
运送机构70将分包袋TP(药包带PB)在图3的+x方向上运送。
〔处理部的结构〕
图4是表示处理部10(图像处理装置的一例)的内部结构的图。如图4所示那样，处理部10具备主图像取得部12、拍摄图像取得部14、第1图像处理部18、第2图像处理部20、图像综合部22以及判定部24。
主图像取得部12基于从处方笺读取器38取得的处方笺信息从存储部40(主图像存储部的一例)读出并取得处方所开的药剂的主图像。主图像是药剂的基准图像或对基准图像实施了图像处理的处理完毕图像。在主图像中，识别信息的亮度值相对于其他部分相对表现得大。针对1个药剂，主图像有一个面侧(例如表侧)的主图像和另一个面侧(例如背侧)的主图像这一对主图像，将它们建立关联预先存储在存储部40中。
拍摄图像取得部14(拍摄控制部的一例)控制照明部32、摄像机36A以及摄像机36B，取得光向分包到分包袋TP中的药剂的表面的照明方向分别不同的药剂的多个拍摄图像。另外，拍摄图像取得部14具备药剂检测部16。药剂检测部16从取得的多个拍摄图像分别检测拍到药剂的区域。
第1图像处理部18基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的刻印部分的处理，生成第1强调图像。在基于多张拍摄图像来生成第1强调图像的情况下，对各拍摄图像进行强调药剂的刻印部分的处理，将处理后的图像相加或相乘来进行合成即可。
第2图像处理部20基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的印字部分的处理，生成第2强调图像。在基于多张拍摄图像生成第2强调图像的情况下，对各拍摄图像进行强调药剂的印字部分的处理，将处理后的图像相加或相乘来进行合成即可。
图像综合部22将第1图像处理部18生成的第1强调图像和第2图像处理部20生成的第2强调图像综合来生成作为对照对象图像的综合图像。
判定部24对图像综合部22生成的综合图像和主图像取得部12取得的主图像进行对照，来判定应根据处方笺配药的药剂和分包到分包袋TP中的药剂是否相同。
判定部24具备类似度算出部26。类似度算出部26算出表示图像综合部22生成的综合图像与主图像取得部12取得的主图像相类似的程度的类似度。判定部24基于类似度来对综合图像和主图像进行对照。
基于这些功能的药剂检查辅助方法的详细处理之后叙述。
〔药剂检查辅助方法的处理〕
对药剂检查辅助装置1的药剂检查辅助方法(图像处理方法的一例)进行说明。图5是表示药剂检查辅助方法的处理的流程图。
在步骤S1，在处方笺读取器38中读取处方笺，取得处方笺信息。也可以使用预先存储在存储部40中的处方笺信息。
在步骤S2(拍摄图像取得步骤的一例、拍摄图像取得功能的一例)，在拍摄图像取得部14中控制照明部32、摄像机36A以及摄像机36B来拍摄分包到药包带PB的分包袋TP中的药剂(第2药剂的一例)，取得多个拍摄图像。
在此，拍摄图像取得部14通过使分包袋TP的上侧的光源34N、34S、34E以及34W一个一个地依次点亮，且使其他光源熄灭，来依次切换照射分包袋TP的照明方向，并且，每当切换照明方向时，就通过摄像机36A重复进行分包袋TP的拍摄。由此，拍摄图像取得部14取得分包袋TP的上侧的拍摄图像，该拍摄图像是照明方向分别不同的4个方向的拍摄图像(第2药剂的多个拍摄图像)。
另外，拍摄图像取得部14通过将分包袋TP的下侧的光源34N、34S、34E以及34W一个一个地依次点亮，且使其他光源熄灭，来依次切换照射分包袋TP的照明方向，并且，每当切换照明方向时，就通过摄像机36B重复进行分包袋TP的拍摄。由此，拍摄图像取得部14取得分包袋TP的下侧的拍摄图像，该拍摄图像是照明方向分别不同的4个方向的拍摄图像。
进而，也可以在将分包袋TP的上侧的光源34N、34S、34E以及34W全都(2个以上的光源的一例)点亮的状态下通过摄像机36A进行分包袋TP的拍摄，来取得拍摄图像(全点亮图像)，还可以在将分包袋TP的下侧的光源34N、34S、34E以及34W全都点亮的状态下通过摄像机36B进行分包袋TP的拍摄，来取得拍摄图像。
在步骤S3，在药剂检测部16中从拍摄图像取得部14取得的多个拍摄图像分别检测拍到药剂的区域(药剂区域)。由于在分包袋TP中分包有多个药剂，因此从1张拍摄图像检测多个药剂区域。通过检测药剂区域，能限定进行处理的区域，能缩短处理所花费的时间。另外，将作为针对相同药剂的药剂区域的、从摄像机36A的拍摄图像检测到的药剂区域和从摄像机36B的拍摄图像检测到的药剂区域作为相同药剂的一对药剂区域建立关联进行检测。
在步骤S4(第1图像处理步骤的一例、第1图像处理功能的一例)，在第1图像处理部18中基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的刻印部分的处理。在此，针对步骤S3中检测到的多个药剂区域当中的相同药剂的一对药剂区域分别生成一对第1强调图像。将生成的多对第1强调图像输入到图像综合部22。
作为强调药剂的刻印部分的处理，例如通过照度差立体法等取得药剂的表面的三维信息来生成第1强调图像。作为第1强调图像，例如能运用专利文献1记载的以图像的浓淡(亮度)表现高度的轮廓提取图像。在此，在第1强调图像中，药剂的刻印的槽的部分的像素的亮度值表现得大。
在步骤S5(第2图像处理步骤的一例、第2图像处理功能的一例)，在第2图像处理部20中基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的印字部分的处理。在此，针对步骤S3中检测到的多个药剂区域当中的相同药剂的一对药剂区域分别生成一对第2强调图像。将生成的多对第2强调图像输入到图像综合部22。
作为强调药剂的印字部分的处理，例如实施用于减少噪声分量的平滑化处理、用于强调边缘的清晰化处理、以及用于除去印字部分以外的部分的边缘检测处理中的至少一者，进行2值化处理。另外，能使用将与像素值的平均值之间的差分的绝对值作为像素值的处理、将与像素值的平均值之间的除法运算结果作为像素值的处理、除以模糊的图像的处理、运用局部的像素值的差分的处理等公知的方法。在此，在第2强调图像中，药剂的印字部分的像素的亮度值表现得大。
在步骤S6(图像综合步骤的一例、图像综合功能的一例)，在图像综合部22中针对从相同拍摄图像生成的第1强调图像以及第2强调图像来比较分别对应的位置的像素的亮度值，采用亮度相对大的一方的像素的亮度值来生成综合图像。在此，从由相同药剂区域生成的一对第1强调图像以及一对第2强调图像生成一对综合图像。将生成的多对综合图像输入到判定部24。
在步骤S7(主图像取得步骤的一例、主图像取得功能的一例)，取得在步骤S1中取得的处方笺信息中所含的多个药剂(第1药剂的一例)当中的1个药剂的一对主图像。可以原样不变地取得存储于存储部40的基准图像并将其作为主图像，也可以对基准图像实施放大或缩小、明亮度调整等图像处理来作为主图像。如前述那样，对于1个药剂，存在一对主图像。
在步骤S8，在判定部24中选择步骤S6中生成的多对综合图像当中的一对综合图像。
在步骤S9，在类似度算出部26中算出步骤S7中取得的一对主图像与步骤S8中选择的一对综合图像的类似度。类似性越高，则这里的类似度就算出为越大的值。
在步骤S10(判定步骤的一例、判定功能的一例)，在判定部24中基于步骤S9中算出的类似度来判定处方笺中记载的药剂(第1药剂)和拍摄到的药剂(第2药剂)是否相同。在此，在类似度大于预先确定的阈值的情况下判定为相同。
另外，也可以对步骤S7中取得的一对主图像算出与全部综合图像之间的类似度，针对类似度最高的综合图像判定为主图像的药剂和综合图像的药剂是相同药剂。
在步骤S11，在处理部10中判定是否结束了针对全部综合图像的对照。在存在对照未结束的综合图像的情况下，返回步骤S8，选择新的综合图像，重复同样的处理。在对照结束的情况下，移转到步骤S12。
在步骤S12，判定是否存在与步骤S7中选择的主图像的药剂相同的药剂、即是否存在与处方笺中记载的药剂相同的药剂。在判定为不存在处方笺中记载的药剂的情况下，移转到步骤S13。另外，在判定为存在处方笺中记载的药剂的情况下，移转到步骤S14。
在步骤S13，在显示部50中，在监视器52中显示不存在处方笺中记载的药剂的意思(错误显示)，结束本流程图的处理。
在步骤S14，在处理部10中判定是否结束了针对处方笺中记载的全部药剂(在步骤S1中读取的处方笺信息中所含的全部药剂)的对照。在存在对照未结束的药剂的情况下，返回步骤S7，取得新的一对主图像，重复同样的处理。在对照结束的情况下，移转到步骤S15。
在步骤S15，在处理部10中判定是否完成了针对药包带PB中所含的全部分包袋TP的对照。在存在对照未结束的分包袋TP的情况下，返回步骤S2，运送药包带PB并取得新的分包袋TP的拍摄图像，重复同样的处理。在对照结束的情况下，移转到步骤S16。
在步骤S16，在显示部50中，在监视器52中显示监查结果正常的意思(正常显示)，结束本流程图的处理。
图6～图9是表示各图像处理的结果的一例的图。图6所示的药剂区域A1～A11是从在表面附加有刻印的药剂的拍摄图像检测到的药剂区域的一例。同样地，图7所示的药剂区域A12～A22是从在表面附加有刻印的药剂的拍摄图像检测到的药剂区域的一例。
另外，图8所示的药剂区域A23～A33是从在表面附加有印字的药剂的拍摄图像检测到的药剂区域的一例。同样地，图9所示的药剂区域A34～A44是从在表面附加有印字的药剂的拍摄图像检测到的药剂区域的一例。
另外，检测到图6～图9所示的药剂区域A1～A44的拍摄图像是在光源34N、34S、34E以及34W全都点亮的状态下取得的全点亮图像。另外，在药剂区域A1～A44中，同时存在从药剂的一个面侧的拍摄图像取得的药剂区域和从另一个面侧的拍摄图像取得的药剂区域。
图6～图9所示的第1强调图像B1～B44分别是从与药剂区域A11～A44相同的区域生成的第1强调图像的一例。在此，示出基于在将光源34N、34S、34E以及34W个别点亮的状态下拍摄的4张(3张以上的一例)拍摄图像的各药剂区域而生成的第1强调图像。
另外，图6～图9所示的第2强调图像C1～C44分别是从药剂区域A11～A44生成的第2强调图像的一例。
图6～图9所示的综合图像D1～D44分别是从第1强调图像B1～B44以及第2强调图像C1～C44生成的综合图像的一例。在图6以及图7所示的药剂中，第1强调图像B1～B22与第2强调图像C1～C22相比，识别信息的亮度值相对表现得大(表现成白色)。因此，作为综合图像，主要采用第1强调图像B1～B22的像素。
另一方面，在图8以及图9所示的药剂中，第2强调图像C23～C44与第1强调图像B23～B44相比，识别信息的亮度值相对表现得大。因此，作为综合图像，主要采用第2强调图像C23～C44的像素。
在本实施方式中，在第1图像处理部18中进行药剂的刻印部分的像素的亮度值变大的处理，在第2图像处理部20中进行药剂的印字部分的像素的亮度值变大的处理，在图像综合部22中比较第1强调图像以及第2强调图像的分别对应的位置的像素的亮度值，采用亮度大的一方的像素的亮度值，但在主图像的识别信息的亮度值相对于其他部分相对表现得小的情况下，在第1图像处理部18中进行药剂的刻印部分的像素的亮度值变小的处理，在第2图像处理部20中进行药剂的印字部分的像素的亮度值变小的处理，在图像综合部22中比较第1强调图像以及第2强调图像的分别对应的位置的像素的亮度值，采用亮度小的一方的像素的亮度值即可。
另外，在本实施方式中，针对由药剂检测部16检测到的区域生成第1强调图像以及第2强调图像，但也可以在生成拍摄图像的第1强调图像以及第2强调图像后检测药剂的区域。
如以上那样，进行强调配过药的第2药剂的刻印部分的处理来生成第1强调图像，并且进行强调第2药剂的印字部分的处理来生成第2强调图像，将第1强调图像和第2强调图像综合来生成综合图像，使用该综合图像来进行与应配药的第1药剂的主图像之间的对照，因此不管附加在第2药剂的识别信息是刻印还是印字，都能适当地辨识识别信息，能进行正确的对照。
<第2实施方式＞
图10是表示第2实施方式所涉及的药剂检查辅助装置2的结构的图。另外，对与图1所示的药剂检查辅助装置1共同的部分标注相同的附图标记，省略其详细的说明。药剂检查辅助装置2具备处理部11。在处理部11连接有照明部32、摄像机36A、摄像机36B以及处方笺读取器38。
照明部32具备多个光源34。多个光源34、摄像机36A以及摄像机36B的配置与图2以及图3所示的药剂检查辅助装置1同样。
〔处理部的结构〕
图11是表示处理部11(图像处理装置的一例)的内部结构的图。另外，对与图4所示的处理部10共同的部分标注相同的附图标记，省略其详细的说明。如图11所示那样，处理部11具备指定信息取得部28。
指定信息是按每个药剂来指定将第1图像处理部18生成的第1强调图像和第2图像处理部20生成的第2强调图像当中的哪个图像用在对照中的信息。
对于识别信息是通过刻印而附加的药剂来说，若使用进行过强调药剂的刻印部分的处理的第1强调图像，则识别信息就会变得易于判别。因此，与刻印的药剂的主图像建立关联的指定信息将第1强调图像指定为对照中所用的对照对象图像。另外，对于识别信息是通过印字而附加的药剂来说，若使用进行过强调药剂的印字部分的处理的第2强调图像，则识别信息就会变得易于判别。因此，与印字的药剂的主图像建立关联的指定信息将第2强调图像指定为对照中所用的对照对象图像。
指定信息与主图像等药剂的信息建立关联地存储在存储部40中。指定信息取得部28基于从处方笺读取器38取得的处方笺信息从存储部40读出并取得处方所开的药剂的指定信息。
将第1图像处理部18生成的第1强调图像以及第2图像处理部20生成的第2强调图像输入到判定部24。判定部24基于指定信息取得部28取得的指定信息来选择第1强调图像以及第2强调图像当中的任一个图像来作为对照对象图像。另外，判定部24对选择的对照对象图像和主图像取得部12取得的主图像进行对照，来判定应根据处方笺配药的药剂和分包到分包袋TP中的药剂是否相同。
〔药剂检查辅助方法的处理〕
对药剂检查辅助装置2的药剂检查辅助方法(图像处理方法的一例)进行说明。图12是表示药剂检查辅助方法的处理的流程图。另外，对与图5所示的流程图共同的部分标注相同的附图标记，省略其详细的说明。
在步骤S1，取得处方笺信息。
在步骤S2(拍摄图像取得步骤的一例、拍摄图像取得功能的一例)，针对分包袋TP的上侧以及下侧，取得照明方向分别不同的4个方向的拍摄图像和从4个方向全都进行照射的全点亮图像。
在步骤S3，从多个拍摄图像分别检测药剂区域。另外，将作为针对相同药剂的药剂区域的、从摄像机36A的拍摄图像检测到的药剂区域和从摄像机36B的拍摄图像检测到的药剂区域作为相同药剂的一对药剂区域建立关联进行检测。
在步骤S4(第1图像处理步骤的一例、第1图像处理功能的一例)，进行强调药剂的刻印部分的处理来生成每个药剂区域的第1强调图像。第1图像处理部18针对相同药剂的一对药剂区域生成一对第1强调图像。在此，在第1强调图像中，药剂的刻印的槽的部分的像素的亮度值表现得大。将生成的多对第1强调图像输入到判定部24。
在步骤S5(第2图像处理步骤的一例、第2图像处理功能的一例)，进行强调药剂的印字部分的处理来生成每个药剂区域的第2强调图像。第2图像处理部20针对相同药剂的一对药剂区域生成一对第2强调图像。在此，在第2强调图像中，药剂的印字部分的像素的亮度值表现得大。将生成的多对第2强调图像输入到判定部24。
在步骤S7(主图像取得步骤的一例、主图像取得功能的一例)，取得在步骤S1中取得的处方笺信息中所含的多个药剂当中的1个药剂的一对主图像。在主图像中，识别信息的亮度值相对于其他部分相对表现得大。
在步骤S21(指定信息取得步骤的一例、指定信息取得功能的一例)，在指定信息取得部28中从存储部40取得与步骤S7中取得的主图像建立关联的指定信息。该指定信息指定第1强调图像和第2强调图像当中的哪一方图像。
在步骤S22，在判定部24中选择要进行对照的药剂的第1强调图像以及第2强调图像当中由从指定信息取得部28输入的指定信息指定的图像。即，若指定信息是第1强调图像，则选择一对第1强调图像作为一对对照对象图像，若指定信息是第2强调图像，则选择一对第2强调图像作为一对对照对象图像。另外，在药剂的一个面侧附加有刻印且在另一个面侧附加有印字的情况下，指定信息也可以是第1强调图像以及第2强调图像。在该情况下，从一对第1强调图像以及一对第2强调图像适当选择需要的第1强调图像以及第2强调图像即可。
在步骤S23，在类似度算出部26中算出表示步骤S7中取得的一对主图像和步骤S22中选择的一对对照对象图像相类似的程度的类似度。类似性越高，则这里的类似度就算出为越大的值。
在步骤S24(判定步骤的一例、判定功能的一例)，在判定部24中基于步骤S23中算出的类似度来判定处方笺中记载的药剂和拍摄到的药剂是否相同。在此，在类似度大于预先确定的阈值的情况下判定为相同。
在步骤S25，在处理部10中判定是否结束了针对全部对照对象图像的对照。在存在对照未结束的综合图像的情况下，返回步骤S22，选择新的对照对象图像，重复同样的处理。在对照结束的情况下，移转到步骤S12。
在步骤S12，判定是否存在与步骤S7中选择的主图像的药剂相同的药剂、即是否存在与处方笺中记载的药剂相同的药剂。在判定为不存在处方笺中记载的药剂的情况下，移转到步骤S13。另外，在判定为存在处方笺中记载的药剂的情况下，移转到步骤S14。
在步骤S13，在显示部50中，在监视器52中显示不存在处方笺中记载的药剂的意思(错误显示)，结束本流程图的处理。
在步骤S14，在处理部10中判定是否结束了针对处方笺中记载的全部药剂(在步骤S1中读取的处方笺信息中所含的全部药剂)的对照。在存在对照未结束的药剂的情况下，返回步骤S7，取得新的主图像，重复同样的处理。在对照结束的情况下，移转到步骤S15。
在步骤S15，在处理部10中判定是否完成了针对药包带PB中所含的全部分包袋TP的对照。在存在对照未结束的分包袋TP的情况下，返回步骤S2，运送药包带PB并取得新的分包袋TP的拍摄图像，重复同样的处理。在对照结束的情况下，移转到步骤S16。
在步骤S16，在显示部50中，在监视器52中显示监查结果正常的意思(正常显示)，结束本流程图的处理。
图6以及图7所示的药剂被附加刻印。与该药剂的主图像建立关联的指定信息是第1强调图像。因此，在与药剂区域A1～A22所涉及的主图像之间的对照中分别选择第1强调图像B1～B22。
另一方面，图8以及图9所示的药剂被附加印字。与该药剂的主图像建立关联的指定信息是第2强调图像。因此，在与药剂区域A23～A44所涉及的主图像之间的对照中分别选择第2强调图像C23～C44。
在本实施方式中，在第1图像处理部18中进行药剂的刻印部分的像素的亮度值变大的处理，在第2图像处理部20中进行药剂的印字部分的像素的亮度值变大的处理，但在主图像的识别信息的亮度值相对于其他部分相对表现得小的情况下，在第1图像处理部18中进行药剂的刻印部分的像素的亮度值变小的处理，在第2图像处理部20中进行药剂的印字部分的像素的亮度值变小的处理即可。
如以上那样，进行强调药剂的刻印部分的处理来生成第1强调图像，并且进行强调药剂的印字部分的处理来生成第2强调图像，取得指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中的指定信息，进行由指定信息指定的图像与主图像的对照，因此不管附加在药剂的识别信息是刻印还是印字，都能适当地辨识识别信息，能进行正确的对照。
在此，由指定信息来指定将第1强调图像以及第2强调图像当中的哪个图像用在对照中，但也可以通过解析拍摄图像，或解析第1强调图像以及第2强调图像，来判定识别信息是通过刻印而附加的，还是通过印字而附加的，并对应于判定结果来指定对照中所用的图像。
例如，比较第1强调图像和第2强调图像，在第1强调图像的各像素的亮度值高的情况下，判定为识别信息是通过刻印而附加的，在第2强调图像的各像素的亮度值高的情况下，判定为识别信息通过印字而附加的。
另外，也可以针对照明方向分别不同的4个方向的拍摄图像来解析各图像间的相关，在图像间的相关低的情况下，判定为识别信息是通过刻印而附加的，在图像间的相关高的情况下，判定为识别信息是通过印字而附加的。
<第3实施方式＞
〔药剂检查辅助方法的处理〕
图13是表示第3实施方式所涉及的药剂检查辅助装置2的药剂检查辅助方法的处理的流程图。另外，对与图12所示的流程图共同的部分标注相同的附图标记，省略其详细的说明。
步骤S1～步骤S5与第2实施方式同样。即，取得处方笺信息，拍摄分包到药包带PB的分包袋TP中的药剂并取得多个拍摄图像，从多个拍摄图像分别检测拍到药剂的药剂区域，生成强调了药剂的刻印部分的第1强调图像以及强调了药剂的印字部分的第2强调图像。
另外，在步骤S7，取得一对主图像，在步骤S21，取得与主图像建立关联的指定信息。进而，在步骤S22，选择要进行对照的药剂的第1强调图像以及第2强调图像当中由指定信息指定的图像。
然后，在步骤S23，算出步骤S7中取得的一对主图像与步骤S22中选择的一对对照对象图像的类似度。类似性越高，则这里的类似度就算出为越大的值。
接下来，在步骤S31，在处理部10中判定是否对步骤S7中取得的主图像，针对与全部对照对象图像的组合结束了类似度的算出。在存在未结束类似度的算出的对照对象图像的情况下，返回步骤S22，选择新的一对对照对象图像，重复同样的处理。由此，能对步骤S7中取得的主图像，针对与全部对照对象图像的组合算出类似度。在针对与全部对照对象图像的组合结束了类似度的算出的情况下，移转到步骤S32。
接着，在步骤S32，在处理部10中判定是否结束了针对处方笺中记载的全部药剂(在步骤S1中读取的处方笺信息中所含的全部药剂)的类似度的算出。在存在未结束类似度的算出的药剂的情况下，返回步骤S7，取得新的一对主图像，重复同样的处理。由此，能对全部主图像，针对与步骤S22中取得的全部对照对象图像的组合算出类似度。在结束了针对全部主图像的类似度的算出的情况下，移转到步骤S33。
在步骤S33(判定步骤的一例、判定功能的一例)，在判定部24中，基于步骤S23中算出的多个主图像以及多个对照对象图像的全部组合的类似度来判定处方笺中记载的药剂和拍摄到的药剂是否相同。
作为一例，针对4张对照对象图像(1)、对照对象图像(2)、对照对象图像(3)以及对照对象图像(4)和4张主图像(A)、主图像(B)、主图像(C)以及主图像(D)，算出各组合的类似度(1A)、类似度(1B)、类似度(1C)、类似度(1D)、类似度(2A)、类似度(2B)、…、类似度(4C)以及类似度(4D)。
在此，若关于对照对象图像(1)的类似度(1A、1B、1C、1D)当中最高的类似度是类似度(1B)，关于主图像(B)的类似度(1B、2B、3B、4B)当中最高的类似度是类似度(1B)，则判定部24判定为对照对象图像(1)所示的药剂是主图像(B)所示的药剂。
接着，判定部24将对照对象图像(1)和主图像(B)从对照对象排除，同样地选择类似度高的组合，不断对处方笺中记载的药剂与拍摄到的药剂的组合进行判定。
在步骤S34，根据步骤S33中的判定结果来判定分包到分包袋TP中的药剂是否如处方笺的记载那样。在判定为并非如处方笺那样的情况下，移转到步骤S13。另外，在判定为如处方笺那样的情况下，移转到步骤S35。
在步骤S13，在显示部50中，在监视器52中进行错误显示，结束本流程图的处理。
在步骤S35，在处理部10中判定是否完成了针对药包带PB中所含的全部分包袋TP的对照。在存在对照未结束的分包袋TP的情况下，返回步骤S2，运送药包带PB并取得新的分包袋TP的拍摄图像，重复同样的处理。在对照结束的情况下，移转到步骤S16。
在步骤S16，在显示部50中，在监视器52中进行正常显示，结束本流程图的处理。
如此地，通过使用类似度的相对关系不断对应配药的药剂与配过药的药剂的组合进行判定，能针对拍摄到的全部药剂判定应配药的药剂和配过药的药剂是否相同。
同样地，在第1实施方式中，也能基于多个主图像以及多个综合图像的全部组合的类似度的相对关系来判定处方笺中记载的药剂和拍摄到的药剂是否相同。
<第4实施方式＞
到此为止说明了药剂的监查的辅助，但还能运用在药剂的鉴别的辅助中。
图14是表示第4实施方式所涉及的药剂检查辅助装置3的结构的图。另外，对与图1所示的药剂检查辅助装置1共同的部分标注相同的附图标记，省略其详细的说明。另外，图15是表示在药剂检查辅助装置3中取得药剂的图像的情形的侧视图，图16是顶视图。
在药剂检查辅助装置3中，将药剂载置在器皿SC的内部，将器皿SC载置在未图示的载台。另外，也可以将药剂直接载置在载台，还可以将药剂在分包到分包袋中的状态下载置在器皿SC或载台。器皿SC以及载台由使从器皿SC的下侧的光源34N、34S、34E以及34W照射的光透过的原材料构成。
照明部32与药剂检查辅助装置1同样地配置有多个光源34。多个光源34对载置于器皿SC的药剂的表侧以及背侧照射光。另外，摄像机36A以及摄像机36B拍摄载置于器皿SC的药剂的表侧以及背侧。
图14所示的关联信息取得部80取得与载置于器皿SC的药剂相关的信息。例如，对应于用户的操作取得以目视等辨识出的药剂的特征(例如是药片还是胶囊等药剂种类、形状、颜色等)、或者记载于所谓的“药品笔记”等笔记的药剂名称、数量、服用方法等信息，来作为关联信息。关联信息可以是处方数据。由关联信息取得部80取得的关联信息存储在存储部40中。
药剂检查辅助装置3的其他结构与药剂检查辅助装置1的结构同样。
〔药剂检查辅助方法的处理〕
对药剂检查辅助装置3的药剂检查辅助方法进行说明。图17是表示药剂检查辅助方法的处理的流程图。另外，对与图5所示的流程图共同的部分标注相同的附图标记，省略其详细的说明。
在步骤S41，关联信息取得部80通过用户的操作取得载置于器皿SC的全部药剂的关联信息。
在接下来的步骤S2，在拍摄图像取得部14中控制照明部32、摄像机36A以及摄像机36B来拍摄载置于器皿SC的药剂，取得多个拍摄图像。在此，针对器皿SC的上侧以及下侧，取得照明方向分别不同的4个方向的拍摄图像和从4个方向全都进行照射的全点亮图像。
在步骤S3，在药剂检测部16中，从拍摄图像取得部14取得的多个拍摄图像分别检测拍到药剂的区域。另外，将作为针对相同药剂的药剂区域的、从摄像机36A的拍摄图像检测到的药剂区域和从摄像机36B的拍摄图像检测到的药剂区域作为相同药剂的一对药剂区域建立关联进行检测。
在步骤S4，在第1图像处理部18中基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的刻印部分的处理。另外，在步骤S5，在第2图像处理部20中基于拍摄图像取得部14取得的多个拍摄图像当中的至少1张拍摄图像来进行强调药剂的印字部分的处理。
在步骤S6，在图像综合部22中针对从相同拍摄图像生成的第1强调图像以及第2强调图像，比较分别对应的位置的像素的亮度值，采用亮度相对大的一方的像素的亮度值来生成一对综合图像。
在步骤S7，处理部10的主图像取得部12基于由关联信息取得部80取得的关联信息从存储部40读出并取得药剂的主图像。
在步骤S8，在判定部24中选择步骤S6中生成的多对综合图像当中的一对综合图像。
在步骤S9，在类似度算出部26中算出步骤S7中取得的一对主图像与步骤S8中选择的一对综合图像的类似度。类似性越高，则这里的类似度就算出为越大的值。
在步骤S10，在判定部24中基于步骤S9中算出的类似度来判定取得了关联信息的药剂和拍摄到的药剂是否相同。
在步骤S11，在处理部10中判定是否结束了针对全部综合图像的对照。在存在对照未结束的综合图像的情况下，返回步骤S8，选择新的综合图像，重复同样的处理。在对照结束的情况下，移转到步骤S12。
在步骤S12，判定是否存在与步骤S7中选择的主图像的药剂相同的药剂、即是否存在与取得了关联信息的药剂相同的药剂。在判定为不存在取得了关联信息的药剂的情况下，移转到步骤S13。另外，在判定为存在取得了关联信息的药剂的情况下，移转到步骤S16。
在步骤S13，在显示部50中，将不存在取得了关联信息的药剂的意思显示在监视器52(错误显示)，结束本流程图的处理。
在步骤S14，在处理部10中判定是否结束了针对取得了关联信息的全部药剂的对照。在存在对照未结束的药剂的情况下，返回步骤S7，取得新的一对主图像，重复同样的处理。在对照结束的情况下，移转到步骤S16。
在步骤S16，在显示部50中，将鉴别结果正常的意思显示在监视器52(正常显示)，结束本流程图的处理。
如以上那样，在运用在取得药剂的关联信息来进行药剂的鉴别的装置中的情况下，也能适当地辨识识别信息，能进行正确的对照。
<第5实施方式＞
图18是表示第5实施方式所涉及的药剂检查辅助装置4的结构的图。另外，对与图14所示的药剂检查辅助装置3共同的部分标注相同的附图标记，省略其详细的说明。
药剂检查辅助装置4取代药剂检查辅助装置3的处理部10而具备处理部11。处理部11的内部结构与图11所示的结构同样。
〔药剂检查辅助方法的处理〕
对药剂检查辅助装置4的药剂检查辅助方法进行说明。图19是表示药剂检查辅助方法的处理的流程图。另外，对与图12所示的流程图共同的部分标注相同的附图标记，省略其详细的说明。
在步骤S41，关联信息取得部80通过用户的操作取得关联信息。
在步骤S2，针对器皿SC的上侧以及下侧，取得照明方向分别不同的4个方向的拍摄图像和从4个方向全都进行照射的全点亮图像。
在步骤S3，从多个拍摄图像分别检测药剂区域。
在步骤S4，进行强调药剂的刻印部分的处理来生成每个药剂区域的第1强调图像。另外，在步骤S5，进行强调药剂的印字部分的处理来生成每个药剂区域的第2强调图像。
在步骤S7，取得步骤S1中取得的关联信息中所含的多个药剂当中的1个药剂的一对主图像。在主图像中，识别信息的亮度值相对于其他部分相对表现得大。
在步骤S21，在指定信息取得部28中从存储部40取得与步骤S7中取得的主图像建立关联的指定信息。该指定信息指定第1强调图像和第2强调图像当中的哪一方图像。
在步骤S22，在判定部24中选择要进行对照的药剂的第1强调图像以及第2强调图像当中由从指定信息取得部28输入的指定信息指定的图像。即，若指定信息是第1强调图像，则选择一对第1强调图像作为一对对照对象图像，若指定信息是第2强调图像，则选择一对第2强调图像作为一对对照对象图像。
在步骤S23，在类似度算出部26中算出表示步骤S7中取得的一对主图像和步骤S22中选择的一对对照对象图像相类似的程度的类似度。
在步骤S24，在判定部24中基于步骤S23中算出的类似度来判定取得了关联信息的药剂和拍摄到的药剂是否相同。
在步骤S25，在处理部10中判定是否结束了针对全部对照对象图像的对照。在存在对照未结束的综合图像的情况下，返回步骤S22，选择新的对照对象图像，重复同样的处理。在对照结束的情况下，移转到步骤S12。
在步骤S12，判定是否存在与步骤S7中选择的主图像的药剂相同的药剂、即是否存在与取得了关联信息的药剂相同的药剂。在判定为不存在取得了关联信息的药剂的情况下，移转到步骤S13。另外，在判定为存在取得了关联信息的药剂的情况下，移转到步骤S14。
在步骤S13，在显示部50中，将不存在取得了关联信息的药剂的意思显示在监视器52(错误显示)，结束本流程图的处理。
在步骤S14，在处理部10中判定是否结束了针对取得了关联信息的全部药剂的对照。在存在对照未结束的药剂的情况下，返回步骤S7，取得新的主图像，重复同样的处理。在对照结束的情况下，移转到步骤S16。
在步骤S16，在显示部50中，将鉴别结果正常的意思显示在监视器52(正常显示)，结束本流程图的处理。
如以上那样，在运用在取得药剂的关联信息来进行药剂的鉴别的装置中的情况下，也能通过取得指定信息并进行由指定信息指定的图像与主图像的对照来进行正确的对照。
<第6实施方式＞
〔药剂检查辅助方法的处理〕
图20是表示第6实施方式所涉及的药剂检查辅助装置4的药剂检查辅助方法的处理的流程图。另外，对与图19所示的流程图共同的部分标注相同的附图标记，省略其详细的说明。
步骤S41～步骤S5与第5实施方式同样。即，取得关联信息，拍摄载置于器皿SC的药剂并取得多个拍摄图像。从多个拍摄图像分别检测拍到药剂的药剂区域，生成强调了药剂的刻印部分的第1强调图像以及强调了药剂的印字部分的第2强调图像。
另外，在步骤S7，取得一对主图像，在步骤S21，取得与主图像建立关联的指定信息。进而，在步骤S22，选择要进行对照的药剂的第1强调图像以及第2强调图像当中由指定信息指定的图像。
然后，在步骤S23，算出步骤S7中取得的一对主图像与步骤S22中选择的一对对照对象图像的类似度。类似性越高，则这里的类似度就算出为越大的值。
接下来，在步骤S31，在处理部10中判定是否对步骤S7中取得的主图像，针对与全部对照对象图像的组合结束了类似度的算出。在存在未结束类似度的算出的对照对象图像的情况下，返回步骤S22，选择新的一对对照对象图像，重复同样的处理。由此，能对步骤S7中取得的主图像，针对与全部对照对象图像的组合算出类似度。在针对与全部对照对象图像的组合结束了类似度的算出的情况下，移转到步骤S32。
接着，在步骤S32，在处理部10中判定是否结束了针对取得了关联信息的全部药剂的类似度的算出。在存在未结束类似度的算出的药剂的情况下，返回步骤S7，取得新的一对主图像，重复同样的处理。由此，能对全部主图像，针对与步骤S22中取得的全部对照对象图像的组合算出类似度。在结束了针对全部主图像的类似度的算出的情况下，移转到步骤S33。
在步骤S33，在判定部24中基于步骤S23中算出的多个主图像以及多个对照对象图像的全部组合的类似度，来判定取得了关联信息的药剂和拍摄的药剂是否相同。
在步骤S42，根据步骤S33中的判定结果来判定载置于器皿SC的药剂是否与取得的关联信息一致。在判定为与关联信息不同的情况下，移转到步骤S13。另外，在判定为如关联信息那样的情况下，移转到步骤S16。另外，在步骤S13，在显示部50中，在监视器52中进行错误显示，结束本流程图的处理。
在步骤S16，在显示部50中，在监视器52中进行正常显示，结束本流程图的处理。
如以上那样，在运用在取得药剂的关联信息来进行药剂的鉴别的装置中的情况下，也能通过使用类似度的相对关系不断对应配药的药剂与配过药的药剂的组合进行判定来进行正确的对照。
<第7实施方式＞
第7实施方式所涉及的药剂检查辅助装置检查基于处方数据而配药并分包到药包带的各分包袋中的药剂，显示药剂的一览表。
图21是表示第7实施方式所涉及的药剂检查辅助装置5的结构的图。另外，对与图1所示的药剂检查辅助装置1共同的部分标注相同的附图标记，省略其详细的说明。药剂检查辅助装置5具备处理部90。
〔处理部的结构〕
图22是表示处理部90的内部结构的图。另外，对与图4所示的处理部10共同的部分标注相同的附图标记，省略其详细的说明。
判定部24相当于药剂判别部。判定部24对来自主图像取得部12的药剂主图像和来自拍摄图像取得部14的拍摄图像进行对照，来判别存在于拍摄图像的药剂与哪个药剂相符。
处理部90具备一览作成部92。一览作成部92作成分包到分包袋中的药剂(要进行检查的药剂的一例)的一览表。一览作成部92从拍摄图像取得部14取得分包到分包袋中的药剂的图像。在此，取得拍到在药剂检测部16中检测到的药剂的区域即药剂区域图像。另外，一览作成部92从图像综合部22取得分包到分包袋中的药剂的综合图像。进而，一览作成部92从主图像取得部12取得能基于处方数据进行配药的药剂的主图像。
一览作成部92具备显示图像生成部94以及旋转部96。
显示图像生成部94生成从综合图像中减去与该综合图像对应的药剂区域图像后得到的差分图像。该差分图像成为强调了药剂的刻印部分或印字部分的显示图像。
旋转部96通过使显示图像旋转来将显示图像和与该显示图像对应的主图像的刻印部分或印字部分以相同朝向对齐。
〔药剂检查辅助方法的处理〕
对药剂检查辅助装置5的药剂检查辅助方法进行说明。图23是表示药剂检查辅助方法的处理的流程图。步骤S1～S16的处理与图5所示的流程图同样。
在进行步骤S13中的错误显示或步骤S16中的正常显示后，移转到步骤S17。在步骤S17，在一览作成部92中作成一览表，在显示部50中，在监视器52中显示作成的一览表。
图24是表示显示于监视器52的一览表L1的图。在此示出将药剂A、药剂B以及药剂C分别一个一个地分包到13袋分包袋中的示例。一览表L1具有显示应配药的药剂的主图像的显示图像的列E0以及显示分包到各分包袋中的药剂的显示图像的列E1～E13。
各列E0～E13被分割成显示药剂A的表侧的显示图像的行F1、显示药剂A的背侧的显示图像的行F2、显示药剂B的表侧的显示图像的行F3、显示药剂B的背侧的显示图像的行F4、显示药剂C的表侧的显示图像的行F5以及显示药剂C的背侧的显示图像的行F6。
在各列E0～E13的各行F1～F6显示与各个位置对应的显示图像。这里显示的药剂的显示图像和主图像的显示图像通过旋转部96来将刻印部分或印字部分以相同朝向对齐。
如图24所示那样，由于针对应配药的药剂的主图像和各药剂的药剂区域图像显示对齐位置且强调了刻印部分以及印字部分的一览表，因此能进行用户易于辨识的显示。另外，在此强调了刻印部分以及印字部分，但也可以显示强调了刻印部分以及印字部分当中的一方的一览表。不管是哪种情况，都包含在强调了刻印部分或印字部分的一览表的概念中。
图25是表示比较例的一览表L2的图。图25所示的一览表L2不进行刻印部分以及印字部分的强调地显示主图像和药剂区域图像。药剂区域图像依赖于光源与刻印部分的位置关系而视觉表现不同。因此，一览表L2视觉辨识性差。
在本实施方式中，作为强调了药剂的刻印部分或印字部分的显示图像，采用从综合图像中减去药剂区域图像后得到的差分图像，但只要是可提高用户的视觉辨识性的方法，显示于一览表的显示图像就并不限定于差分图像。
在本实施方式中说明了检查分包到分包袋中的药剂的示例，但药剂检查辅助装置5还能检查载置于器皿的药剂、或直接载置于载台的药剂。但是，分包到分包袋中的药剂的检查在操作性这一点上便利且优选。
另外，在药剂的检查中有监查和鉴别。在本实施方式中说明了基于处方数据来辅助配过药的药剂的监查的示例，但药剂检查辅助装置5还能运用在药剂的鉴别的辅助中。所谓药剂的鉴别，是指从药剂的外观确定该药剂。能通过药剂的鉴别来判别例如入院患者的自备药。
<其他＞
上述的图像处理方法还能构成为用于使计算机实现主图像取得功能、拍摄图像取得功能、第1图像处理功能、第2图像处理功能、图像综合功能、指定信息取得功能以及判定功能的程序，并构成存储该程序的CD-ROM(Compact Disk-Read Only Memory，光盘只读存储器)等非临时性的记录介质。
在到此为止说明的实施方式中，例如处理部10以及处理部11等执行各种处理的处理部(processing unit)的硬件结构是如下所示那样的各种处理器(processor)。在各种处理器中包括：执行软件(程序)来作为各种处理部发挥功能的通用的处理器即CPU(CentralProcessing Unit，中央处理器)；专门化成图像处理的处理器即GPU(Graphics ProcessingUnit，图形处理器)；FPGA(Field Programmable Gate Array，现场可编程门阵列)等能在制造后变更电路结构的处理器即可编程逻辑器件(Programmable Logic Device：PLD)；ASIC(Application Specific Integrated Circuit，特定用途集成电路)等具有为了执行特定的处理而专用设计的电路结构的处理器即专用电气电路等。
1个处理部可以由这些各种处理器当中的1个构成，也可以由同种或异种的2个以上的处理器(例如多个FPGA、或CPU与FPGA的组合、或CPU与GPU的组合)构成。另外，也可以由1个处理器构成多个处理部。作为由1个处理器构成多个处理部的示例，第1，如服务器以及客户端等计算机所代表的那样，有如下形态：由1个以上的CPU与软件的组合构成1个处理器，该处理器作为多个处理部发挥功能。第2，如系统级芯片(System On Chip：SoC)等所代表的那样，有如下形态：使用在1个IC(Integrated Circuit，集成电路)芯片实现包含多个处理部的系统整体的功能的处理器。如此地，各种处理部作为硬件结构而使用1个以上的各种处理器来构成。
进而，这些各种处理器的硬件结构更具体而言是组合了半导体元件等电路元件的电气电路(circuitry)。
本发明的技术范围并不限定于上述的实施方式所记载的范围。各实施方式中的结构等能在不脱离本发明的主旨的范围内在各实施方式间适当组合。
附图标记的说明
1药剂检查辅助装置
2药剂检查辅助装置
3药剂检查辅助装置
4药剂检查辅助装置
5药剂检查辅助装置
10处理部
11处理部
12主图像取得部
14拍摄图像取得部
16药剂检测部
18第1图像处理部
20第2图像处理部
22图像综合部
24判定部
26类似度算出部
28指定信息取得部
32照明部
34光源
34E光源
34N光源
34S光源
34W光源
36A摄像机
36B摄像机
38处方笺读取器
40存储部
50显示部
52监视器
60操作部
70运送机构
80关联信息取得部
90处理部
92一览作成部
94显示图像生成部
96旋转部
A1～A44药剂区域
B1～B44第1强调图像
C1～C44第2强调图像
D1～D44综合图像
E0～E13列
F1～F6行
L1一览表
L2一览表
PA拍摄光轴
PB药包带
SC器皿
TP分包袋
S1～S35药剂检查辅助装置中的药剂检查辅助方法的步骤

Claims (18)

1.一种图像处理装置，其特征在于，具备：
主图像取得部，取得第1药剂的主图像；
拍摄图像取得部，取得光向第2药剂的表面的照明方向分别不同的所述第2药剂的多个拍摄图像；
第1图像处理部，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的刻印部分的处理，生成第1强调图像；
第2图像处理部，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的印字部分的处理，生成第2强调图像；
指定信息取得部，取得对将所述第1强调图像以及所述第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和
判定部，对由所述指定信息指定的图像和所述主图像进行对照，来判定所述第1药剂和所述第2药剂是否相同。
2.根据权利要求1所述的图像处理装置，其特征在于，
将所述主图像和所述指定信息建立关联地进行存储。
3.根据权利要求1或2所述的图像处理装置，其特征在于，
所述图像处理装置具备：
药剂检测部，从所述多个拍摄图像检测拍到所述第2药剂的区域，
所述第1图像处理部以及所述第2图像处理部对所述检测到的区域进行所述处理。
4.根据权利要求1～3中任一项所述的图像处理装置，其特征在于，
所述拍摄图像取得部取得3张以上的拍摄图像，
所述第1图像处理部基于所述3张以上的拍摄图像来生成所述第1强调图像。
5.根据权利要求4所述的图像处理装置，其特征在于，
所述第1图像处理部通过照度差立体法取得所述第2药剂的表面的三维信息，来生成所述第1强调图像。
6.根据权利要求1～5中任一项所述的图像处理装置，其特征在于，
所述第2图像处理部实施平滑化处理、清晰化处理以及边缘检测处理中的至少一者来生成所述第2强调图像。
7.根据权利要求1～6中任一项所述的图像处理装置，其特征在于，
所述图像处理装置具备：
类似度算出部，算出表示由所述指定信息指定的图像和所述主图像相类似的程度的类似度，
所述判定部基于所述类似度来判定所述第1药剂和所述第2药剂是否相同。
8.根据权利要求7所述的图像处理装置，其特征在于，
所述类似度算出部算出由多个所述指定信息指定的图像与多个所述主图像的类似度，
所述判定部针对由类似度最高的所述指定信息指定的图像与所述主图像的组合判定为所述第1药剂和所述第2药剂相同。
9.根据权利要求1～8中任一项所述的图像处理装置，其特征在于，
主图像取得部基于处方数据来取得所述第1药剂的主图像。
10.一种药剂检查辅助装置，其特征在于，具备：
主图像取得部，取得第1药剂的主图像；
照明部，具有对第2药剂的表面分别从不同的多个照明方向照射光的多个光源；
拍摄部，拍摄所述第2药剂；
拍摄控制部，控制所述照明部以及所述拍摄部来取得光向所述第2药剂的照明方向分别不同的所述第2药剂的多个拍摄图像；
第1图像处理部，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的刻印部分的处理，生成第1强调图像；
第2图像处理部，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的印字部分的处理，生成第2强调图像；
指定信息取得部，取得对将所述第1强调图像以及所述第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和
判定部，对由所述指定信息指定的图像和所述主图像进行对照，来判定所述第1药剂和所述第2药剂是否相同。
11.根据权利要求10所述的药剂检查辅助装置，其特征在于，
所述药剂检查辅助装置具备：
主图像存储部，存储所述第1药剂的主图像，
将所述指定信息与所述主图像建立关联地存储在所述主图像存储部。
12.根据权利要求10或11所述的药剂检查辅助装置，其特征在于，
所述拍摄控制部取得通过所述照明部的所述多个光源当中的2个以上的光源对所述第2药剂照射光的所述第2药剂的拍摄图像。
13.根据权利要求10～12中任一项所述的药剂检查辅助装置，其特征在于，
所述照明部对所述第2药剂的表侧以及背侧照射光，
所述拍摄部拍摄所述第2药剂的表侧以及背侧。
14.根据权利要求10～13中任一项所述的药剂检查辅助装置，其特征在于，
所述照明部具备：
第1光源，在第1方向上照射光；
第2光源，在第2方向上照射光；
第3光源，在第3方向上照射光；和
第4光源，在第4方向上照射光，
所述第2方向是在俯视所述表面的情况下与所述第1方向对置的方向，所述第3方向是在俯视所述表面的情况下与所述第1方向正交的方向，所述第4方向是在俯视所述表面的情况下与所述第3方向对置的方向。
15.一种图像处理方法，其特征在于，具备：
主图像取得步骤，取得第1药剂的主图像；
拍摄图像取得步骤，取得光向第2药剂的表面的照明方向分别不同的所述第2药剂的多个拍摄图像；
第1图像处理步骤，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的刻印部分的处理，生成第1强调图像；
第2图像处理步骤，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的印字部分的处理，生成第2强调图像；
指定信息取得步骤，取得对将所述第1强调图像以及所述第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和
判定步骤，对由所述指定信息指定的图像和所述主图像进行对照，来判定所述第1药剂和所述第2药剂是否相同。
16.一种程序，其特征在于，使计算机执行：
主图像取得功能，取得第1药剂的主图像；
拍摄图像取得功能，取得光向第2药剂的表面的照明方向分别不同的所述第2药剂的多个拍摄图像；
第1图像处理功能，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的刻印部分的处理，生成第1强调图像；
第2图像处理功能，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的印字部分的处理，生成第2强调图像；
指定信息取得功能，取得对将所述第1强调图像以及所述第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和
判定功能，对由所述指定信息指定的图像和所述主图像进行对照，来判定所述第1药剂和所述第2药剂是否相同。
17.一种记录介质，是非临时性且计算机能读取的记录介质，其特征在于，在由计算机读取存放于所述记录介质的指令的情况下，使计算机执行：
主图像取得功能，取得第1药剂的主图像；
拍摄图像取得功能，取得光向第2药剂的表面的照明方向分别不同的所述第2药剂的多个拍摄图像；
第1图像处理功能，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的刻印部分的处理，生成第1强调图像；
第2图像处理功能，基于所述多个拍摄图像当中的至少1张拍摄图像进行强调所述第2药剂的印字部分的处理，生成第2强调图像；
指定信息取得功能，取得对将所述第1强调图像以及所述第2强调图像当中的哪个图像用在对照中进行指定的指定信息；和
判定功能，对由所述指定信息指定的图像和所述主图像进行对照，来判定所述第1药剂和所述第2药剂是否相同。
18.一种药剂检查辅助装置，对药剂进行检查，其特征在于，
所述药剂检查辅助装置具备：
药剂判别部，对来自包含药剂的药剂主图像的药剂数据库的药剂主图像和拍摄到要进行检查的药剂的拍摄图像进行对照，来判别存在于所述拍摄图像的药剂与哪个药剂相符；和
一览作成部，作成要进行所述检查的药剂的一览表，该一览表将所述药剂主图像和所述拍摄图像中判别为各药剂的药剂区域图像对齐位置且强调刻印部分或印字部分地进行显示。
CN201880051890.5A 2017-08-25 2018-08-09 药剂检查辅助装置、图像处理装置、图像处理方法以及程序 Pending CN111031995A (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP2017-162545 2017-08-25
JP2017162545 2017-08-25
JP2018002006 2018-01-10
JP2018-002006 2018-01-10
PCT/JP2018/019857 WO2019039016A1 (ja) 2017-08-25 2018-05-23 薬剤検査支援装置、画像処理装置、画像処理方法及びプログラム
JPPCT/JP2018/019857 2018-05-23
PCT/JP2018/029928 WO2019039302A1 (ja) 2017-08-25 2018-08-09 薬剤検査支援装置、画像処理装置、画像処理方法及びプログラム

Publications (1)

Publication Number Publication Date
CN111031995A true CN111031995A (zh) 2020-04-17

Family

ID=65438602

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880051890.5A Pending CN111031995A (zh) 2017-08-25 2018-08-09 药剂检查辅助装置、图像处理装置、图像处理方法以及程序

Country Status (5)

Country Link
US (1) US20200175318A1 (zh)
EP (1) EP3673891A4 (zh)
JP (1) JPWO2019039302A1 (zh)
CN (1) CN111031995A (zh)
WO (2) WO2019039016A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019044439A1 (ja) * 2017-08-31 2019-03-07 富士フイルム株式会社 薬剤監査装置、画像処理装置、画像処理方法及びプログラム
JP7280361B2 (ja) * 2019-07-16 2023-05-23 富士フイルム富山化学株式会社 薬剤識別装置、薬剤識別方法及びプログラム
JP7343585B2 (ja) * 2019-07-17 2023-09-12 富士フイルム富山化学株式会社 識別支援システム、識別支援クライアント、識別支援サーバ、及び識別支援方法
JP7225416B2 (ja) * 2019-08-27 2023-02-20 富士フイルム富山化学株式会社 画像処理装置、携帯端末、画像処理方法及びプログラム
WO2021065658A1 (ja) * 2019-10-01 2021-04-08 富士フイルム富山化学株式会社 薬剤照合装置、薬剤照合システム、薬剤管理方法及びプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100085428A1 (en) * 2008-10-08 2010-04-08 Jvm Co., Ltd. Medicine packet inspecting apparatus
WO2014050485A1 (ja) * 2012-09-27 2014-04-03 富士フイルム株式会社 薬剤検査装置及び方法
CN104582670A (zh) * 2012-09-27 2015-04-29 富士胶片株式会社 药剂检查支援装置及方法
JP2017090194A (ja) * 2015-11-09 2017-05-25 大日本印刷株式会社 検査システムおよび検査方法
CN107072881A (zh) * 2014-09-25 2017-08-18 株式会社汤山制作所 检查辅助系统、片剂分包装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5163985B2 (ja) * 2008-11-14 2013-03-13 学校法人早稲田大学 粒状物品種検査装置
ES2587236T3 (es) * 2010-10-29 2016-10-21 Mint Solutions Holding Bv Identificación y verificación de medicación
JP2013066533A (ja) * 2011-09-21 2013-04-18 Twin Life Kk 薬剤照合装置
US8712163B1 (en) * 2012-12-14 2014-04-29 EyeNode, LLC Pill identification and counterfeit detection method
JP5997120B2 (ja) * 2013-09-26 2016-09-28 富士フイルム株式会社 薬剤照合装置、薬剤照合システム、及び薬剤照合方法
JP6100136B2 (ja) * 2013-09-30 2017-03-22 富士フイルム株式会社 薬剤認識装置及び方法
US10969218B2 (en) * 2014-03-31 2021-04-06 Yuyama Mfg. Co., Ltd. Medicine photographing device
JP6424020B2 (ja) 2014-06-09 2018-11-14 株式会社キーエンス 画像検査装置、画像検査方法、画像検査プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6885342B2 (ja) * 2016-01-06 2021-06-16 株式会社湯山製作所 鑑査支援システム、錠剤分包装置、分包制御プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100085428A1 (en) * 2008-10-08 2010-04-08 Jvm Co., Ltd. Medicine packet inspecting apparatus
WO2014050485A1 (ja) * 2012-09-27 2014-04-03 富士フイルム株式会社 薬剤検査装置及び方法
CN104582670A (zh) * 2012-09-27 2015-04-29 富士胶片株式会社 药剂检查支援装置及方法
CN107072881A (zh) * 2014-09-25 2017-08-18 株式会社汤山制作所 检查辅助系统、片剂分包装置
JP2017090194A (ja) * 2015-11-09 2017-05-25 大日本印刷株式会社 検査システムおよび検査方法

Also Published As

Publication number Publication date
EP3673891A4 (en) 2020-09-09
WO2019039016A1 (ja) 2019-02-28
JPWO2019039302A1 (ja) 2020-08-27
WO2019039302A1 (ja) 2019-02-28
EP3673891A1 (en) 2020-07-01
US20200175318A1 (en) 2020-06-04

Similar Documents

Publication Publication Date Title
CN111031995A (zh) 药剂检查辅助装置、图像处理装置、图像处理方法以及程序
CN111052145B (zh) 药剂检查辅助装置、图像处理装置、图像处理方法
JP5163985B2 (ja) 粒状物品種検査装置
CN110892445B (zh) 药剂检查辅助装置、药剂识别装置、图像处理装置、图像处理方法以及程序
CN109073564B (zh) 药剂监查装置及方法以及记录介质
WO2015046044A1 (ja) 薬剤認識装置及び方法
JP4256434B2 (ja) 分包薬剤の検薬方法と検薬装置
JPWO2018173649A1 (ja) 薬剤認識装置、薬剤認識方法、及び薬剤認識プログラム
WO2015046043A1 (ja) 薬剤照合装置、薬剤照合システム、及び薬剤照合方法
US11341357B2 (en) Medicine inspection device, image processing device, image processing method, and program
WO2014080966A1 (ja) 薬剤鑑査装置
WO2020162263A1 (ja) 薬剤照合装置、薬剤照合方法及び薬剤照合システム
JP7375049B2 (ja) 画像処理装置及び方法
JP6861825B2 (ja) 薬剤識別装置、画像処理装置、画像処理方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200417

WD01 Invention patent application deemed withdrawn after publication