CN109073564A - 药剂监查装置及方法以及程序 - Google Patents

药剂监查装置及方法以及程序 Download PDF

Info

Publication number
CN109073564A
CN109073564A CN201780022810.9A CN201780022810A CN109073564A CN 109073564 A CN109073564 A CN 109073564A CN 201780022810 A CN201780022810 A CN 201780022810A CN 109073564 A CN109073564 A CN 109073564A
Authority
CN
China
Prior art keywords
medicament
identification
photographs
quantitative values
alarm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780022810.9A
Other languages
English (en)
Other versions
CN109073564B (zh
Inventor
岩见央
岩见一央
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fuji Film Fushan Chemical Co., Ltd.
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN109073564A publication Critical patent/CN109073564A/zh
Application granted granted Critical
Publication of CN109073564B publication Critical patent/CN109073564B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/66Trinkets, e.g. shirt buttons or jewellery items
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J3/00Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J7/00Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
    • A61J7/02Pill counting devices
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/85Investigating moving fluids or granular solids
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9508Capsules; Tablets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G16H20/13ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered from dispensers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J7/00Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
    • A61J7/04Arrangements for time indication or reminder for taking medicine, e.g. programmed dispensers
    • A61J7/0409Arrangements for time indication or reminder for taking medicine, e.g. programmed dispensers with timers
    • A61J7/0454Arrangements for time indication or reminder for taking medicine, e.g. programmed dispensers with timers for dispensing of multiple drugs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20056Discrete and fast Fourier transform, [DFT, FFT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06Recognition of objects for industrial automation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Public Health (AREA)
  • Multimedia (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Quality & Reliability (AREA)
  • Pathology (AREA)
  • Immunology (AREA)
  • Medical Informatics (AREA)
  • Medicinal Chemistry (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Signal Processing (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Medical Preparation Storing Or Oral Administration Devices (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

本发明提供一种能够检测无法从拍摄药剂而得到的摄影图像中辨识药剂的状态并唤起用户注意的药剂监查装置及方法以及程序。药剂监查装置(10)具备:药剂辨识部(54),从拍摄药剂而得到的摄影图像中辨识药剂并确定药剂的种类;定量值计算部(50),计算将与通过药剂辨识部(54)进行的药剂辨识的成功与否有关的摄影图像的品质定量化而得到的定量值;比较判定部(51),对通过定量值计算部(50)计算出的定量值与阈值进行比较来判定能否进行药剂的辨识;及警报输出部(58),当通过比较判定部(51)判定为无法进行药剂辨识时发出警报。

Description

药剂监查装置及方法以及程序
技术领域
本发明涉及一种药剂监查装置及方法以及程序,尤其涉及一种从拍摄药剂而得到的图像中判别药剂的种类的药剂监查支援技术。
背景技术
近年来,在医院等例如对患者处方服用时期不同的多种药剂时,进行将一次服用量的多种药剂分包于1个分包袋的单剂量包装配药的情况较多。服用时期例如有早餐后、午餐后、晚餐后等。单剂量包装配药通过如下来进行:将由药剂师按照处方笺拣选的各药剂按一次服用量放置于分包机的托盘上之后,利用该分包机将托盘内的药剂自动地分包于各分包袋中。分包机的托盘也被称为药盒(tablet case)。
在这种单剂量包装配药中,有时由药剂师通过手工操作拣选药剂和放置于分包托盘上,因此有可能与处方笺的指示不同的种类或个数的药剂被误分包。因此,为了判定分包的药剂是否与处方笺一致,在分包于分包袋之前或分包之后进行药剂的种类或个数的自动辨识。
专利文献1中所记载的药剂辨识装置具备:照明部,能够从包围药剂的周围的多个照亮方向对附加有刻印文字的药剂照射照明;照明控制部,按顺序切换照明部照亮药剂的照亮方向;拍摄部,拍摄被照明部照亮的药剂,每切换照亮方向时反复进行药剂的拍摄;特征图像抽取部,从通过拍摄部获取的每个照亮方向的摄影图像中分别抽取与刻印文字的影子对应的特征图像;特征图像统合部,将特征图像抽取部所抽取的每个照亮方向的特征图像进行统合而生成统合图像;及辨识部,辨识特征图像统合部所生成的统合图像中所包含的刻印文字,并基于刻印文字的辨识结果辨识药剂的种类。术语“药剂辨识装置”被理解为是与本说明书的“药剂监查装置”对应的术语。
以往技术文献
专利文献
专利文献1:日本特开2015-068765号公报
发明内容
发明要解决的技术课题
专利文献1中所记载的药剂辨识装置构成为,当无法辨识刻印文字时,判定为药剂的辨识失败,并将该判定结果输出到显示部(专利文献1的0053段)。但是,在专利文献1中,关于如何检测无法辨识刻印文字的情况的其检测方法并没有具体地公开。
为了使药剂监查的工作进一步效率化,期望检测出药剂的辨识失败时的问题并将该问题告知用户。该课题并不限于辨识刻印文字的情况,对于辨识在药剂表面上印刷的印刷文字的情况,也是共同的课题。并且,该课题并不限于单剂量包装配药时的药剂监查,对于利用从拍摄药剂而得到的图像中辨识药剂的种类的处理的药剂监查是共同的课题。
本发明是鉴于这种情况而完成的,其目的在于提供一种用于检测无法从拍摄药剂而得到的图像中辨识药剂的状态的新检测技术,并提供一种无法进行药剂辨识的状态时能够对用户唤起注意的药剂监查装置及方法以及程序。
用于解决技术课题的手段
本发明的第1方式所涉及的药剂监查装置具备:图像获取部,获取拍摄药剂而得到的摄影图像;药剂辨识部,从摄影图像中辨识药剂并确定药剂的种类;定量值计算部,计算将与通过药剂辨识部进行的药剂辨识的成功与否有关的摄影图像的品质定量化而得到的定量值;存储部,存储成为能否通过药剂辨识部进行药剂辨识的判定基准的定量值的阈值;比较判定部,对通过定量值计算部计算出的定量值与阈值进行比较来判定能否通过药剂辨识部进行药剂的辨识;及警告输出部,当通过比较判定部判定为无法进行药剂辨识部的药剂辨识时发出警报。
作为无法从摄影图像中辨识药剂的原因之一,有摄影图像的品质问题。在第1方式的药剂监查装置中,预先得知定量地评价摄影图像的品质的定量值与药剂辨识的成功与否的关系,并规定无法进行药剂辨识的定量值的阈值。根据第1方式,通过对根据摄影图像计算的定量值与阈值进行比较,能够检测出无法进行药剂辨识的品质的状态。并且,当判定为无法进行药剂辨识时产生警告,由此能够唤起用户注意。
作为第2方式,能够设为如下结构:在第1方式的药剂监查装置中,与通过药剂辨识部进行的药剂辨识的成功与否有关的摄影图像的品质包括摄影图像的清晰度。
作为第3方式,能够设为如下结构:在第1方式或第2方式的药剂监查装置中,药剂辨识部包括:边缘检测部,从摄影图像中检测药剂的边缘;及刻印辨识部,辨识在根据通过边缘检测部从摄影图像中检测出的边缘的信息抽取的药剂上的刻印。
作为第4方式,能够设为如下结构:在第3方式的药剂监查装置中,定量值为将与由边缘检测部进行的边缘检测的成功与否有关的摄影图像的品质定量化而得到的定量值,阈值为成为能否通过边缘检测部进行边缘检测的判定基准的定量值的阈值,比较判定部所进行的能否通过药剂辨识部进行药剂的辨识的判定为能否通过边缘检测部进行边缘检测的判定,当通过比较判定部判定为无法进行边缘检测部的边缘检测时,警报输出部发出警报。
作为第5方式,能够如下构成:在第1方式至第4方式中的任一方式的药剂监查装置中,定量值计算部计算在对摄影图像适用二维傅里叶变换处理而得到的矢径方向的空间频谱中使用比1周期/毫米高频的空间频谱的绝对值的总和与比1周期/毫米低频的空间频谱的绝对值的总和之比定义的定量值。
作为第6方式,能够设为如下结构:在第1方式至第5方式中的任一方式的药剂监查装置中,当通过定量值计算部计算出的定量值低于阈值时,警报输出部输出警报。
作为第7方式,能够设为如下结构:在第1方式至第6方式中的任一方式的药剂监查装置中,警报输出部包括显示警报的信息的显示部。
作为第8方式,能够设为如下结构:在第1方式至第7方式中的任一方式的药剂监查装置中,该药剂监查装置具备拍摄药剂的摄像机,图像获取部获取利用摄像机拍摄的摄影图像。
作为第9方式,能够设为如下结构:在第1方式至第8方式中的任一方式的药剂监查装置中,摄影图像为拍摄多种药剂容纳于分包袋的1分包量的单剂量包装药剂而得到的图像。
第10方式所涉及的药剂监查方法包括:图像获取工序,获取拍摄药剂而得到的摄影图像;药剂辨识工序,从摄影图像中辨识药剂并确定药剂的种类;定量值计算工序,计算将与通过药剂辨识工序进行的药剂辨识的成功与否有关的摄影图像的品质定量化而得到的定量值;比较判定工序,存储成为能否通过药剂辨识工序进行药剂辨识的判定基准的定量值的阈值,并对通过定量值计算工序计算出的定量值与阈值进行比较来判定能否通过药剂辨识工序进行药剂的辨识;及警报输出工序,当通过比较判定工序判定为无法进行药剂辨识工序的药剂辨识时发出警报。
在第10方式中,能够适当组合与在第2方式至第9方式中确定的事项相同的事项。在该情况下,在药剂监查装置中确定的机构或功能的要件能够掌握为与其对应的处理或动作的工序(步骤)的要件。
第11方式所涉及的程序用于使计算机执行以下工序:图像获取工序,获取拍摄药剂而得到的摄影图像;药剂辨识工序,从摄影图像中辨识药剂并确定药剂的种类;定量值计算工序,计算将与通过药剂辨识工序进行的药剂辨识的成功与否有关的摄影图像的品质定量化而得到的定量值;比较判定工序,存储成为能否通过药剂辨识工序进行药剂辨识的判定基准的定量值的阈值,并对通过定量值计算工序计算出的定量值与阈值进行比较来判定能否通过药剂辨识工序进行药剂的辨识;及警报输出工序,当通过比较判定工序判定为无法进行药剂辨识工序的药剂辨识时发出警报。
第11方式中,能够适当组合与在第2方式至第9方式中确定的事项相同的事项。在该情况下,在药剂监查装置中确定的机构或功能的要件能够掌握为实现与其对应的处理或动作的工序(步骤)的功能的程序要件。
发明效果
根据本发明,能够检测出无法从拍摄药剂而得到的图像中辨识药剂的状态。根据本发明,当检测出是无法进行药剂辨识的状态时,能够对用户唤起注意。
附图说明
图1是实施方式所涉及的药剂监查装置的立体图。
图2是投光器的顶视图。
图3是实施方式所涉及的药剂监查装置的功能框图。
图4是示出由实施方式所涉及的药剂监查装置进行的监查处理的流程的流程图。
图5是拍摄药剂而得到的摄影图像的一例。
图6是拍摄药剂而得到的摄影图像的其他例子。
图7是对图5所示的摄影图像实施边缘检测处理而抽取的边缘抽取图像的例子。
图8是对图6所示的摄影图像实施边缘检测处理而抽取的边缘抽取图像的例子。
图9是总结了模拟中所使用的任意的参数C的值、能否抽取药剂轮廓的结果及在各个条件下计算出的定量值T的值的图表。
图10是表示实施方式所涉及的药剂监查装置中的信息处理装置的处理的流程的流程图。
具体实施方式
以下,按照附图对本发明的实施方式进行详细说明。
[实施方式所涉及的药剂监查装置的结构]
图1是实施方式所涉及的药剂监查装置10的立体图。药剂监查装置10辨识分包于分包袋11的药剂12的种类来监查分包袋11内的药剂12是否与未图示的处方笺一致。分包袋11为透明或半透明的药剂容纳袋。在此所述的药剂12为固形剂,例如为片剂或胶囊剂。在药剂12的表面附加有未图示的刻印文字或印刷文字。在本说明书中,将基于附加在药剂表面的刻印文字或印刷于药剂表面的印刷文字的识别信息称为“刻印”。分包袋11中容纳多个药剂12。容纳于1个分包袋11的多个药剂12可以包含不同种类的药剂,也可以包含相同种类的药剂。将分包于分包袋11的药剂12称为单剂量包装药剂。
药剂监查装置10具备托盘17、输送机构18、投光器19、背光20、摄像机21及信息处理装置22。托盘17上载置有利用未图示的分包装置分别分包了1分包量的药剂12的一连的分包袋11。托盘17由透明或半透明的材料形成,从背光20照射的照明光透射托盘17。透明或半透明的材料的含义与具有透光性的材料相同。
输送机构18沿着连结成带状的一连的分包袋11的长度方向间歇地输送托盘17。输送机构18中包括未图示的电动机等动力源。以下,将一连的分包袋11的长度方向简称为“长度方向”。投光器19、背光20及摄像机21分别设置于固定的位置上,通过利用输送机构18输送托盘17,一连的分包袋11相对于投光器19、背光20及摄像机21沿长度方向相对移动。另外,也可以沿分包袋11的长度方向输送投光器19、背光20及摄像机21来代替输送托盘17。
投光器19配置于托盘17的上表面侧,按每1分包量依次照亮利用输送机构18间歇地输送的分包袋11。托盘17的上表面是指托盘17中与分包袋11接触的载置面侧的面。在图1的记载中,朝向图面的上方向的面为托盘17的上表面。并且,将托盘17的与背光20对置的一侧的面称为托盘17的下表面。另外,在本实施方式的说明中,在托盘17的上表面侧远离托盘17的方向为上方向,在托盘17的下表面侧远离托盘17的方向为下方向。
投光器19包括光源保持部24和多个点光源25而构成。光源保持部24为保持多个点光源25的保持部件。光源保持部24由具有透光性的材料形成。光源保持部24形成为覆盖1分包量的分包袋11的大致圆顶(dome)形状。在光源保持部24的顶棚部分形成有用于使光源保持部24的内部露出的开口窗24a。由此,能够从光源保持部24的上侧透过开口窗24a确认光源保持部24内的药剂12。光源保持部24内的药剂12是指分包于位于光源保持部24内的分包袋11内的药剂12。图2是投光器19的顶视图。
点光源25例如使用(LED:Light Emitting Diode(发光二极管))光源等。点光源25沿着光源保持部24的外侧面的下段部及上段部各自的周向以等间隔安装有8个。这16个点光源25朝向光源保持部24内的药剂12照射照明光。
投光器19能够利用各点光源25从多个照亮方向照亮光源保持部24内的药剂12。并且,投光器19能够通过控制16个点光源的个别的开关来切换照亮光源保持部24内的药剂12的照亮方向。
如图1所示,背光20配置于托盘17的下表面侧的隔着托盘17而与投光器19对置的位置上。背光20透过托盘17将光源保持部24内的药剂12从其背后照亮。
摄像机21为搭载有以CCD(charge-coupled device(电荷耦合器件))传感器或CMOS(complementary metal-oxide semiconductor device(互补型金属氧化物半导体器件))传感器为代表的摄像设备(未图示)的摄影装置。摄像设备中优选使用具备滤色器的彩色摄像设备。摄像机21包括未图示的摄影透镜等光学系统。并且,摄像机21可以具备对从摄像设备输出的图像信号进行处理的模拟前端电路等信号处理电路。摄像机21将被摄体的图像变换成电信号并生成与被摄体对应的图像信号。图像信号可以为模拟信号,也可以为数字信号。在本例中,设为从摄像机21输出数字形式的图像信号的情况而进行说明。将数字形式的图像信号称为图像数据。
摄像机21配置于开口窗24a的上方。摄像机21透过开口窗24a拍摄光源保持部24内的药剂12,由此生成图像数据28。摄像机21将通过拍摄而生成的图像数据28输出到信息处理装置22。图像数据28相当于摄影图像的一方式。
另外,在图1所示的第1实施方式中,构成为利用摄像机21拍摄载置于托盘17上的分包袋11的上表面侧即单侧的面,获取从上表面侧拍摄的摄影图像,但除了可以采用该结构以外,还可以采用在托盘17的下表面侧也配置未图示的投光器及摄像机的结构,优选设为获取从分包袋11的下表面侧拍摄的摄影图像的方式。
图3是药剂监查装置10的功能框图。作为信息处理装置22,例如能够使用个人计算机。信息处理装置22与输送机构18、照明装置30及摄像机21分别连接。照明装置30是指在图1中说明的投光器19及背光20。“连接”并不限于有线连接,也可以为无线连接。能够进行信号的传递的状态包含于“连接”的概念中。本例的信息处理装置22作为药剂监查装置10的控制装置发挥功能,且作为进行图像处理或其他的各种运算处理的运算装置发挥功能。
信息处理装置22具备输送控制部32、照明控制部33及摄影控制部34,控制输送机构18、照明装置30及摄像机21的动作。并且,信息处理装置22具备图像获取部40、存储器41、图像处理部42、显示控制部44及显示部46。图像处理部42包括定量值计算部50、比较判定部51、阈值存储部52及药剂辨识部54。药剂辨识部54包括边缘检测部55和刻印辨识部56而构成。信息处理装置22还具备操作部60、集中控制部62、药剂数据库存储部63、配药信息获取部64及监查部65。
信息处理装置22的各部的功能能够通过计算机的硬件与软件的组合来实现。“软件”的含义与“程序”相同。并且,信息处理装置22中的处理功能的一部分或全部能够通过集成电路等来实现。
输送控制部32基于来自集中控制部62的指令来控制输送机构18的驱动。照明控制部33基于来自集中控制部62的指令来控制由照明装置30出射照明光。照明控制部33能够控制在图1中说明的投光器19的点光源25及背光20的发光并改变照亮光源保持部24内的药剂12的照明条件。
图3所示的摄影控制部34基于来自集中控制部62的指令来控制由摄像机21进行的拍摄动作。每停止由输送机构18进行的间歇输送,即,按每1包量的分包袋11,摄影控制部34使摄像机21执行拍摄。并且,当对相同的分包袋11改变照明条件而进行多次拍摄时,每执行照明条件的切换,摄影控制部34使摄像机21执行拍摄。
图像获取部40为获取利用摄像机21拍摄的摄影图像的接口部。图像获取部40能够由取入从摄像机21输出的图像数据的数据输入端子构成。并且,作为图像获取部40,也可以采用有线或无线通信接口部。经由图像获取部40获取的摄影图像存储于存储器41。
存储器41作为存储经由图像获取部40获取的摄影图像的存储部发挥功能。并且,存储器41能够作为存储集中控制部62所执行的各种控制用程序及控制所需的各种数据的存储部发挥功能,且能够作为进行图像处理部42的各种运算时的工作存储器发挥功能。
图像处理部42通过分析经由图像获取部40获取的摄影图像来辨识药剂12的种类。并且,图像处理部42通过分析摄影图像来进行检测无法通过药剂辨识部54进行药剂辨识的状态的处理。并且,图像处理部42可以包括进行干扰去除处理、颜色变换处理、图像旋转处理、裁剪处理或合成处理中的1个或多个处理的处理部(未图示)。
定量值计算部50计算将与通过药剂辨识部54进行的药剂辨识的成功与否有关的摄影图像的品质定量化而得到的定量值。本实施方式的定量值计算部50计算将与由边缘检测部55进行的边缘检测的成功与否有关的摄影图像的清晰度定量化而得到的定量值。摄影图像的清晰度为与通过药剂辨识部54进行的药剂辨识的成功与否有关的摄影图像的品质的一例。
定量值计算部50计算在对摄影图像实施二维快速傅立叶变换处理而得到的二维快速傅立叶变换图像的矢径方向的空间频谱中使用比1周期/毫米[cycle/mm]高频的空间频谱的绝对值的总和与比1周期/毫米[cycle/mm]低频的空间频谱的绝对值的总和之比定义的定量值。
阈值存储部52为存储成为能否通过药剂辨识部54进行药剂辨识的判定基准的定量值的阈值的存储部。阈值的规定方法例如如下:基于模拟等调查定量值与药剂辨识的成功与否的关系,将无法进行药剂辨识的定量值的条件规定为阈值。
比较判定部51从阈值存储部52获取阈值的信息。比较判定部51对通过定量值计算部50计算出的定量值与阈值进行比较来判定能否通过药剂辨识部54进行药剂的辨识。关于包括阈值的规定方法的具体例在内的在图像处理部42中检测出无法进行药剂辨识的状态的处理的方法,其详细内容将后述。
药剂监查装置10具备警报输出部58,当通过比较判定部51判定为无法进行药剂辨识部54的药剂辨识时,警报输出部58发出警报。警报输出部58包括显示部46。当通过比较判定部51判定为无法进行药剂辨识的状态时,告知是无法进行药剂辨识的状态的警报信息经由显示控制部44显示于显示部46。警报输出部58除了包括显示部46以外,还包括警告灯、产生警告音的装置或产生语音的装置、或它们的适当组合而构成。
药剂辨识部54从摄影图像中辨识药剂并确定药剂的种类。边缘检测部55对摄影图像进行公知的边缘检测处理,并抽取摄影图像内的药剂的轮廓。边缘检测部55中的边缘检测处理的方法例如能够使用卡尼(Canny)边缘检测的方法。
刻印辨识部56从基于通过边缘检测部55检测出的边缘的信息抽取的药剂区域中检测附加在各个药剂12上的刻印的轮廓,并辨识刻印所表示的文字信息。
在药剂数据库存储部63中存储有包含药剂的外观图像及刻印的信息的药剂信息按药剂的种类建立了对应关联的药剂数据的集合体即药剂数据库。药剂辨识部54能够通过参考药剂数据库,从刻印辨识部56所辨识的刻印中确定药剂的种类。
配药信息获取部64从收据计算机70中获取配药信息72。收据计算机70中保持有基于处方笺的记载的配药信息72。在进行配药时,药剂师基于记载于处方笺上的配药信息进行向收据计算机70输入配药信息72的工作。配药信息72中包括患者的姓名及年龄、以及药剂名、分量、用法及用量等。另外,输入到收据计算机70的药剂名并不限定于记载于处方笺上的药剂名,也可以为与其相同成分且具有相同药效的后发医药品的药剂名。
在分包装置中,按照输入到收据计算机70的配药信息72将药剂12分别分包于一连的分包袋11中。监查部65能够基于从配药信息获取部64获取的配药信息72判别应分包于各分包袋11的药剂12的种类或个数。
并且,刻印辨识部56能够通过基于配药信息72参考药剂数据库来获取附加在记载于配药信息72中的各个药剂上的刻印的信息。刻印辨识部56对通过参考药剂数据库从配药信息72中得到的刻印的信息与从摄影图像中抽取的刻印的轮廓进行比较,由此辨识附加在摄影图像内所包含的药剂12上的刻印。并且,药剂辨识部54基于刻印的辨识结果,参考药剂数据库来确定与各刻印分别对应的药剂12的种类。由此,辨识1分包量的药剂12的种类。药剂辨识部54将1分包量的药剂12的种类的辨识结果输出到监查部65。
监查部65对从药剂辨识部54输入的1分包量的药剂12的种类的辨识结果与记录于配药信息72中的1分包量的药剂的种类进行核对。监查部65的核对结果的信息经由显示控制部44显示于显示部46。
显示控制部44进行用于在显示部46显示各种信息的控制。显示控制部44进行生成对显示部46的显示用信号的处理。
显示部46例如能够使用液晶显示器、有机EL(Organic Electro-Luminescence(有机电致发光))显示器等各种显示方式的显示设备。用户对信息处理装置22的指示的输入及设定等工作能够利用操作部60和显示部46来进行。显示部46与操作部60的组合作为药剂监查装置10的用户界面发挥功能。
操作部60为用于由药剂师等用户进行输入各种信息的操作的机构。操作部60能够采用键盘、鼠标、触摸面板、追踪球或操作按钮等各种输入装置,也可以是它们的适当组合。
[由药剂监查装置10进行的监查处理的说明]
图4是示出由实施方式所涉及的药剂监查装置10进行的监查处理的流程的流程图。
按照预先输入到收据计算机70的配药信息72,药剂师将药剂12放置于分包装置,在该分包装置中将药剂12分包于多个分包袋11中。将在分包装置中分包了药剂12的一连的分包袋11放置于药剂监查装置10的托盘17上(步骤S11)。若在操作部60中进行监查开始操作,则集中控制部62使药剂监查装置10的各部作动而开始分包于一连的分包袋11的药剂12的种类的辨识及监查。
在步骤S12中,集中控制部62对表示成为处理对象的分包袋11的序号的参数N设定N=1。
在步骤S13中,输送控制部32使输送机构18作动而将第N个分包袋11输送到摄影位置。摄影位置是指能够由摄像机21进行拍摄的光源保持部24的内侧的位置。通过利用输送机构18输送托盘17,将第N个分包袋放置于光源保持部24内。
在步骤S14中,摄影控制部34使用摄像机21执行拍摄来拍摄药剂12。在步骤S14的拍摄工序中,包括照明装置30的照明条件的设定及按照该设定的照明装置30的发光动作。在利用照明装置30照射了照明光的状态下使用摄像机21进行拍摄。
在步骤S15中,信息处理装置22经由图像获取部40从摄像机21获取摄影图像。从摄像机21得到的摄影图像存储于存储器41。
在步骤S16中,信息处理装置22进行通过边缘检测部55从摄影图像中抽取药剂区域的处理。
图5是摄影图像80的一例。摄影图像80为拍摄多种药剂12容纳于分包袋11的1分包量的单剂量包装药剂而得到的图像。在药剂12的表面附加有刻印82。关于摄影图像80所包含的多个药剂12,分别抽取相当于药剂12的图像部分的药剂区域84。在图5中,为了强调药剂区域84而显示了圆。
接着,在图4的步骤S17中,信息处理装置22的刻印辨识部56进行确定通过步骤S16抽取的各药剂区域的药剂的种类的药剂辨识处理。刻印辨识部56基于配药信息72,参考药剂数据库来得到附加在记录于配药信息72中的各个药剂12上的刻印的信息。并且,刻印辨识部56判别附加在基于通过边缘检测部55检测出的边缘的信息抽取的药剂区域的药剂上的刻印。并且,刻印辨识部56通过对基于配药信息72获取的刻印的信息与从摄影图像判别的刻印进行比较来辨识摄影图像内包含的刻印。如此,通过与配药信息72进行比较,当摄影图像所包含的刻印的形状不完整时,例如即使在刻印的一部分产生了变形或空缺等的情况下,也能够降低刻印的误辨识。
如此,刻印辨识部56基于从摄影图像中分别辨识的刻印,参考药剂数据库来确定第N个分包袋11内的各药剂12的种类,并将该药剂辨识结果输出到监查部65。
接着,在步骤S18中,信息处理装置22的监查部65将通过步骤S17确定的药剂的种类与配药信息72进行核对。
在步骤S19中,监查部65将核对结果输出到显示部46。在显示部46显示由监查部65得到的核对结果。此时,当核对结果不一致时,显示部46通过显示该药剂12的种类名而对进行配药监查的药剂师等进行警告。并且,当从药剂辨识部54输入了药剂12的辨识失败的判定结果时,显示部46通过显示该判定结果而对进行配药监查的药剂师等进行警告。
以上,完成分包于第N个分包袋11的药剂12的种类的辨识及监查。
接着,在步骤S20中,判定是否留有其他分包袋。当一连的分包袋11中留有监查未处理的分包袋11时,进入步骤S21,增加参数N的值,将“N+1”的值重新设为分包袋序号的参数N的值并回到步骤S13。
并且,反复执行前述步骤S13至步骤S20的各步骤的处理。若对一连的分包袋11全部完成药剂12的种类的辨识及监查,则在步骤S20中的判定中成为“否”判定,并结束图4的流程图。
图4中的步骤S15相当于图像获取工序的一方式。步骤S16与步骤S17的组合相当于药剂辨识工序的一方式。
[药剂辨识的课题]
为了执行通过图4的流程图说明的监查处理,需要从摄影图像中抽取各药剂12的药剂区域84的处理(步骤S16)成功,且从所抽取的药剂区域84辨识刻印82的处理(步骤S17)成功并确定药剂12的种类。
但是,有可能存在摄影图像模糊的情况等药剂区域的抽取及刻印辨识的处理失败的情况。摄影图像模糊是指摄影图像的清晰度低。在这种情况下,即使实施图4的流程图,也无法进行药剂12的辨识。因此,本实施方式的药剂监查装置10中搭载检测出具有无法通过药剂辨识部54进行药剂辨识处理的问题的状态并告知用户的功能。
[关于摄影图像的清晰度低而无法进行药剂辨识的情况]
图6是与图5作对比的摄影图像90的例子。与图5相比,图6中清晰度降低而成为模糊的图像。
图6是摄影图像90模糊而无法通过药剂辨识部54良好地进行药剂区域的抽取即边缘检测的图像的例子。
图7是对图5所示的摄影图像80实施边缘检测处理而抽取的边缘抽取图像。在图7中,正常进行边缘检测而得到了正常的边缘检测图像。
图8是对图6所示的摄影图像90实施边缘检测处理而抽取的边缘抽取图像。在图8中,由于摄影图像90模糊,因此无法充分抽取药剂的轮廓。例如,位于图8的中央部的胶囊剂的轮廓的抽取不充分。
如图6那样,认为摄影图像的清晰度降低的原因有多个。例如,由片剂的粉尘引起的散射、由包装材料引起的散射等。在这种情况下,需要告知用户无法检测药剂12。
在本实施方式中,利用二维快速傅立叶变换处理将与边缘对应的高频分量和边缘以外的低频分量的比例作为阈值而预先存储于装置内,由此,根据摄影图像是否超过其阈值来检测摄像图像处于模糊至无法进行药剂辨识的水准的状态。二维快速傅立叶变换处理相当于二维傅里叶变换处理的一方式。
另外,在本实施方式的情况下,基于帕斯瓦尔定理对二维快速傅立叶变换图像进行标准化,并使用所得到的光谱的绝对值规定了阈值。具体而言,取摄影图像的二维快速傅立叶变换图像的矢径方向的比1周期/毫米[cycle/mm]大的空间频谱的绝对值的合计值与1周期/毫米[cycle/mm]以下的空间频谱的绝对值的合计值之比。这是因为,摄影图像的高频分量依赖于分包药剂的药剂数,因此可得到与利用药剂数进行标准化的情况相同的效果。
[定量值的具体例]
以下,举例说明利用卡尼边缘检测方法的情况。
作为定量地表示摄影图像的品质的值,能够使用以下定义的定量值T。
T=SE/SNE
SE为摄影图像的二维快速傅立叶变换图像中的矢径方向的比1周期/毫米[cycle/mm]大的空间频谱的绝对值的总和。SNE为摄影图像的二维快速傅立叶变换图像中的矢径方向的1周期/毫米[cycle/mm]以下的空间频谱的绝对值的总和。
将关于定量值T的阈值预先保持于装置内。
另外,1周期/毫米[cycle/mm]为形成药剂的轮廓的最低空间频率。SE为反应药剂的轮廓部的值,SNE为反应药剂的非轮廓部的值。
在定义定量值T的式中,取光谱总和之比是为了利用进入视场范围内的药剂的数量对定量值进行标准化。另外,光谱总和中不使用图像的平均值。
[阈值的计算例]
定量值T为表示摄影图像的模糊程度的指标之一,能够理解为模糊定量值或清晰度定量值。为了规定在上述中定义的定量值T的阈值,通过模拟对在能够进行药剂辨识的适当的摄影条件下拍摄的摄影图像赋予模糊,制作出清晰度降低的图像。利用Exp(-0.020×π×C×f)的式来定义通过模拟而附加的模糊。
Exp(x)的函数表示自然对数的底数“e”的x次幂。C为任意的参数。f为空间频率[cycle/mm]。
一边替换任意的参数C的值一边通过基于卡尼边缘检测方法的边缘检测处理来确认片剂及胶囊剂的轮廓是否出现,并计算出在各个条件下的定量值T。
图9所示的图表为总结了任意的参数C的值、能否抽取药剂轮廓的结果及在各个条件下计算出的定量值T的值的图表。关于表中的能否抽取药剂轮廓的评价,“A”表示药剂的轮廓抽取成功。“D”表示药剂的轮廓抽取失败。
当利用卡尼边缘检测时,从图9的图表可知将阈值设定为“1.19”即可。如此规定的阈值存储于图3的阈值存储部52。
并且,不限于卡尼法,只要对使用索贝尔(sobel)滤波器的方法或使用拉普拉斯滤波器的方法等各自使用的边缘检测法设置阈值即可。
对于如此规定的阈值,按每个摄影图像通过定量值计算部50计算定量值T,当按每个摄影图像计算的定量值T低于阈值时,判定为无法进行药剂辨识,并输出告知用户无法进行药剂辨识的状态的警报。由警报输出部58进行的警报的输出方法能够设为警告或显示部46的画面显示或它们的组合。警报中优选包含告知用户无法进行药剂辨识的原因的信息。例如,本例的显示于显示部46的警报信息中包含告知用户因摄影图像的清晰度低而无法进行药剂辨识的内容的信息。
定量值T为将与由边缘检测部55进行的边缘检测的成功与否有关的摄影图像的品质定量化而得到的定量值的一例。并且,根据图9所示的模拟的结果规定的阈值为成为能否通过边缘检测部55进行边缘检测的判定基准的定量值的阈值的一例。
基于定量值T由比较判定部51进行的能否通过药剂辨识部54进行药剂辨识的判定相当于能否通过边缘检测部55进行边缘检测的判定,当通过比较判定部51判定为无法进行边缘检测部55的边缘检测时,警报输出部58发出表示其内容的警报。
[实施方式所涉及的药剂监查方法]
图10是表示实施方式所涉及的药剂监查装置10中的信息处理装置22的处理的流程的流程图。使用图10对实施方式所涉及的药剂监查方法进行说明。
在步骤S31中,信息处理装置22经由图像获取部40获取摄影图像。步骤S31相当于图4的流程图中的步骤S15。
接着,在图10的步骤S32中,定量值计算部50计算将摄影图像的品质定量化而得到的定量值。定量值计算部50例如计算将摄影图像的清晰度定量化而得到的定量值T。
在步骤S33中,比较判定部51对在步骤S32中求出的定量值与预先存储于阈值存储部52的阈值进行比较来判定能否进行药剂的辨识。
在步骤S34中,当比较判定部51判定为能够进行药剂辨识时,进入步骤S35。
在步骤S35中,边缘检测部55进行摄影图像的边缘检测处理。基于边缘检测处理的处理结果进行药剂区域的抽取。步骤S35的边缘检测工序为对应于作为图4的步骤S16而说明的药剂区域抽取工序的工序。
在图10的步骤S35之后,在步骤S36中,刻印辨识部56辨识各药剂区域内的刻印来进行确定药剂的种类的处理。步骤S36的刻印辨识工序为对应于作为图4的步骤S17而说明的药剂辨识工序的工序。
若通过图10的步骤S36确定药剂的种类,则在步骤S37中,药剂辨识部54输出所确定的药剂的信息即检测信息。步骤S37可以理解为从药剂辨识部54向监查部65提供信息的工序,也可以理解为将药剂辨识部54所辨识的药剂的信息输出到显示部46的工序。或者,步骤S37可以理解为将由监查部65得到的监查结果输出到显示部46的工序。
在步骤S34中,当比较判定部51判定为无法进行药剂辨识时,进入步骤S38。在步骤S38中,警报输出部58输出告知是无法进行药剂辨识的状态的警报。
按所输入的每个摄影图像实施图10所示的流程图。
图10中的步骤S31相当于图像获取工序的一方式。步骤S32相当于定量值计算工序的一方式。步骤S33相当于比较判定工序的一方式。步骤S35与步骤S36的组合相当于药剂辨识工序的一方式。步骤S38相当于警报输出工序的一方式。
根据本实施方式,能够从拍摄药剂而得到的摄影图像计算定量值T来评价摄影图像的品质,并通过对定量值T与阈值进行比较来判定摄影图像是否为无法进行药剂辨识的状态。并且,当检测出是无法进行药剂辨识的状态时,能够对用户唤起注意。由此,能够进行有效率的药剂监查。
[关于使计算机作为药剂监查装置发挥功能的程序]
将用于使计算机实现在上述实施方式中说明的信息处理装置22的药剂监查功能的程序记录于CD-ROM(Compact Disc Read-only Memory(只读光盘))或磁盘、其他的计算机可读介质的作为有形物的非暂时性信息存储介质,通过信息存储介质能够提供程序。也能够利用因特网等通信网络将程序信号作为下载服务而提供,来代替将程序存储于这种信息存储介质而提供的方式。
并且,也能够通过应用服务器或云计算来实现在上述实施方式中说明的信息处理装置22的药剂监查功能的一部分或全部,并通过网络进行提供处理功能的服务。
[变形例1]
上述实施方式说明了具备托盘17的输送机构18、照明装置30、摄像机21及信息处理装置22的药剂监查装置10的系统方式,但无论有无具备输送机构18、照明装置30及摄像机21,均能够将信息处理装置22中的图像获取部40、图像处理部42及警报输出部58的功能部分掌握为“药剂监查装置”的一方式。并且,信息处理装置22的处理功能并不限于由一台计算机实现的方式,也能够采用由多台计算机分担处理的功能并通过多台计算机的组合来实现信息处理装置22的处理功能的方式。
例如,能够由独立的计算机构成担负输送控制部32、照明控制部33及摄影控制部34的功能的计算机和担负图像获取部40、存储器41、图像处理部42、显示控制部、警报输出部58、操作部60、集中控制部62、药剂数据库存储部63、配药信息获取部64及监查部65的功能的计算机。并且,例如也可以将信息处理装置22的功能的一部分或全部搭载于收据计算机70中。
[变形例2]
药剂数据库存储部63可以连接于信息处理装置22的外部存储装置。例如,药剂数据库能够存储于配药药房所持有的计算机的存储装置中。药剂数据库也可以保持于收据计算机70中。并且,药剂数据库可以保持于未图示的其他计算机中,也可以为信息处理装置22经由网络从药剂数据库获取信息的方式。网络能够设为局域网或广域网或它们的组合。
[变形例3]
成为定量值计算部50计算定量值的对象的摄影图像并不限于从摄像机21输出的图像数据28,也可以为基于从摄像机21输出的图像数据28生成的图像数据。例如,对从摄像机21输出的图像数据28实施干扰去除处理、颜色变换处理或灰度变换处理、或它们的组合等处理而得到的图像包含于摄影图像的概念中。并且,对从摄像机21输出的图像数据28进行加工而得到的图像也包含于摄影图像的概念中,对实施多次拍摄而得到的多张摄影图像进行合成而得到的合成图像也包含于摄影图像的概念中。
[变形例4]
除了具备从载置于托盘17上的分包袋11的上表面侧即第1面侧拍摄药剂的作为第1摄像机的摄像机21以外,还具备从分包袋11的下表面侧即第2面侧拍摄药剂的第2摄像机的方式时,对于从第1摄像机得到的摄影图像和从第2摄像机得到的摄影图像的各个摄影图像,能够适用在图10中说明的流程图的处理。
并且,监查部65可以综合基于从第1摄像机得到的摄影图像的药剂辨识处理的辨识结果与基于从第2摄像机得到的摄影图像的药剂辨识处理的辨识结果来与配药信息72进行核对。
[变形例5]
作为将摄影图像的品质定量化而得到的定量值的一例,说明了定义定量值T的例子,但定量值的规定方法并不限于该例子,能够定义各种指标。
[变形例6]
在上述实施方式中,说明了拍摄容纳于单剂量包装配药所涉及的分包袋11的多个药剂的例子,但对于辨识容纳于分包袋11之前的药剂的系统方式也能够采用与上述实施方式的信息处理装置22相同的结构。例如,可以设为如下方式:在分包装置中,在通向将1分包量的药剂投入到分包袋11内的料斗的药剂通路的中途设置用于拍摄药剂的检查料斗,并在该检查料斗中配置照明装置及摄像机。
并且,在上述实施方式中,示出了单剂量包装配药所涉及的药剂监查的例子,但信息处理装置22的药剂监查功能并不限于单剂量包装配药所涉及的药剂监查,能够广泛适用于进行药剂辨识处理的药剂监查。例如,对于从在作为配药包装单位的PTP(press throughpack(泡罩包装))药板的状态下利用摄像机拍摄药剂而得到的摄影图像中识别药剂的种类的系统方式也能够采用与信息处理装置22相同的结构。
以上,对本发明的实施方式及变形例进行了说明,但本发明并不限定于这些实施方式及变形例,在不脱离本发明的宗旨的范围内能够进行各种变形。
符号说明
10-药剂监查装置,11-分包袋,12-药剂,17-托盘,18-输送机构,19投光器,20-背光,21-摄像机,22-信息处理装置,24-光源保持部,24a-开口窗,25-点光源,28-图像数据,30-照明装置,32-输送控制部,33-照明控制部,34-摄影控制部,40-图像获取部,41-存储器,42-图像处理部,44-显示控制部,46-显示部,50-定量值计算部,51-比较判定部,52-阈值存储部,54-药剂辨识部,55-边缘检测部,56-刻印辨识部,58-警报输出部,60-操作部,62-集中控制部,63-药剂数据库存储部,64-配药信息获取部,65-监查部,70-收据计算机,72-配药信息,80-摄影图像,82-刻印,84-药剂区域,90-摄影图像,S11~S21-药剂监查处理的工序,S31~S38-实施方式所涉及的药剂监查方法的工序。

Claims (12)

1.一种药剂监查装置,其具备:
图像获取部,获取拍摄药剂而得到的摄影图像;
药剂辨识部,从所述摄影图像中辨识所述药剂并确定所述药剂的种类;
定量值计算部,计算将与通过所述药剂辨识部进行的药剂辨识的成功与否有关的所述摄影图像的品质定量化而得到的定量值;
存储部,存储成为能否通过所述药剂辨识部进行药剂辨识的判定基准的定量值的阈值;
比较判定部,对通过所述定量值计算部计算出的定量值与所述阈值进行比较来判定能否通过所述药剂辨识部进行所述药剂的辨识;及
警报输出部,当通过所述比较判定部判定为无法进行所述药剂辨识部的药剂辨识时发出警报。
2.根据权利要求1所述的药剂监查装置,其中,
与通过所述药剂辨识部进行的药剂辨识的成功与否有关的所述摄影图像的品质包括所述摄影图像的清晰度。
3.根据权利要求1或2所述的药剂监查装置,其中,
所述药剂辨识部包括:
边缘检测部,从所述摄影图像中检测所述药剂的边缘;及
刻印辨识部,辨识在根据通过所述边缘检测部从所述摄影图像中检测出的边缘的信息抽取的所述药剂上附加的刻印。
4.根据权利要求3所述的药剂监查装置,其中,
所述定量值为将与由所述边缘检测部进行的边缘检测的成功与否有关的所述摄影图像的品质定量化而得到的定量值,
所述阈值为成为能否通过所述边缘检测部进行边缘检测的判定基准的定量值的阈值,
所述比较判定部所进行的能否通过所述药剂辨识部进行所述药剂的辨识的判定为能否通过所述边缘检测部进行边缘检测的判定,
当通过所述比较判定部判定为无法进行所述边缘检测部的边缘检测时,所述警报输出部发出所述警报。
5.根据权利要求1至4中任一项所述的药剂监查装置,其中,
所述定量值计算部计算在对所述摄影图像适用二维傅里叶变换处理而得到的矢径方向的空间频谱中使用比1周期/毫米高频的空间频谱的绝对值的总和与比1周期/毫米低频的空间频谱的绝对值的总和之比定义的所述定量值。
6.根据权利要求1至5中任一项所述的药剂监查装置,其中,
当通过所述定量值计算部计算出的定量值低于所述阈值时,所述警报输出部输出所述警报。
7.根据权利要求1至6中任一项所述的药剂监查装置,其中,
所述警报输出部包括显示所述警报的信息的显示部。
8.根据权利要求1至7中任一项所述的药剂监查装置,其中,
所述药剂监查装置具备拍摄所述药剂的摄像机,
所述图像获取部获取利用所述摄像机拍摄的摄影图像。
9.根据权利要求1至8中任一项所述的药剂监查装置,其中,
所述摄影图像为拍摄多种药剂容纳于分包袋的1分包量的单剂量包装药剂而得到的图像。
10.一种药剂监查方法,其包括:
图像获取工序,获取拍摄药剂而得到的摄影图像;
药剂辨识工序,从所述摄影图像中辨识所述药剂并确定所述药剂的种类;
定量值计算工序,计算将与通过所述药剂辨识工序进行的药剂辨识的成功与否有关的所述摄影图像的品质定量化而得到的定量值;
比较判定工序,存储成为能否通过所述药剂辨识工序进行药剂辨识的判定基准的定量值的阈值,并对通过所述定量值计算工序计算出的定量值与所述阈值进行比较来判定能否通过所述药剂辨识工序进行所述药剂的辨识;及
警报输出工序,当通过所述比较判定工序判定为无法进行所述药剂辨识工序的药剂辨识时发出警报。
11.一种程序,其用于使计算机执行以下工序:
图像获取工序,获取拍摄药剂而得到的摄影图像;
药剂辨识工序,从所述摄影图像中辨识所述药剂并确定所述药剂的种类;
定量值计算工序,计算将与通过所述药剂辨识工序进行的药剂辨识的成功与否有关的所述摄影图像的品质定量化而得到的定量值;
比较判定工序,存储成为能否通过所述药剂辨识工序进行药剂辨识的判定基准的定量值的阈值,并对通过所述定量值计算工序计算出的定量值与所述阈值进行比较来判定能否通过所述药剂辨识工序进行所述药剂的辨识;及
警报输出工序,当通过所述比较判定工序判定为无法进行所述药剂辨识工序的药剂辨识时发出警报。
12.一种记录介质,其为非暂时性且计算机可读取的记录介质,当利用计算机读取存储于所述记录介质中的程序时,所述记录介质用于使计算机执行以下工序:
图像获取工序,获取拍摄药剂而得到的摄影图像;
药剂辨识工序,从所述摄影图像中辨识所述药剂并确定所述药剂的种类;
定量值计算工序,计算将与通过所述药剂辨识工序进行的药剂辨识的成功与否有关的所述摄影图像的品质定量化而得到的定量值;
比较判定工序,存储成为能否通过所述药剂辨识工序进行药剂辨识的判定基准的定量值的阈值,并对通过所述定量值计算工序计算出的定量值与所述阈值进行比较来判定能否通过所述药剂辨识工序进行所述药剂的辨识;及
警报输出工序,当通过所述比较判定工序判定为无法进行所述药剂辨识工序的药剂辨识时发出警报。
CN201780022810.9A 2016-04-22 2017-04-05 药剂监查装置及方法以及记录介质 Active CN109073564B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016086032A JP6674834B2 (ja) 2016-04-22 2016-04-22 薬剤監査装置及び方法並びにプログラム
JP2016-086032 2016-04-22
PCT/JP2017/014261 WO2017183458A1 (ja) 2016-04-22 2017-04-05 薬剤監査装置及び方法並びにプログラム

Publications (2)

Publication Number Publication Date
CN109073564A true CN109073564A (zh) 2018-12-21
CN109073564B CN109073564B (zh) 2020-12-08

Family

ID=60115841

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780022810.9A Active CN109073564B (zh) 2016-04-22 2017-04-05 药剂监查装置及方法以及记录介质

Country Status (5)

Country Link
US (1) US10726285B2 (zh)
EP (1) EP3447478B1 (zh)
JP (1) JP6674834B2 (zh)
CN (1) CN109073564B (zh)
WO (1) WO2017183458A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113301883A (zh) * 2019-02-08 2021-08-24 富士胶片富山化学株式会社 药剂识别系统、药剂识别装置、药剂识别方法以及程序
CN116312938A (zh) * 2023-05-16 2023-06-23 西安交通大学医学院第一附属医院 基于大数据分析的配药信息处理方法、系统及存储介质

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200152308A1 (en) * 2017-06-28 2020-05-14 Nec Corporation Medication-taking management system, medication-taking management method, management device, and program storage medium
CN111095262A (zh) * 2017-08-31 2020-05-01 富士胶片富山化学株式会社 药剂监查装置、图像处理装置、图像处理方法以及程序
JP6998048B2 (ja) * 2018-03-09 2022-01-18 エイチエスティ・ビジョン株式会社 画像処理システム
JP6974594B2 (ja) * 2018-04-03 2021-12-01 富士フイルム富山化学株式会社 薬剤判定装置及び薬剤判定方法
JP6974595B2 (ja) * 2018-04-03 2021-12-01 富士フイルム富山化学株式会社 薬剤判定装置及び薬剤判定方法
JP6491776B1 (ja) * 2018-04-12 2019-03-27 株式会社Windy 錠剤認識又は識別システム及び方法
US10872688B2 (en) * 2018-07-30 2020-12-22 Arxium, Inc. Visual analysis pill dispenser
CN117352153B (zh) * 2023-12-04 2024-02-20 青岛量谷无线科技有限公司 用于医疗冷柜的药品质量监测与实时报告方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997006730A1 (en) * 1995-08-15 1997-02-27 Jefferson Jacob Katims Digital automated current perception threshold (cpt) determination device
WO2006090671A1 (ja) * 2005-02-23 2006-08-31 Matsushita Electric Works, Ltd. 粒状物体の検査方法及びその方法を実施する検査装置
CN101419215A (zh) * 2007-10-22 2009-04-29 互动纪元营销有限公司 药物自动检测的方法及其互动装置
CN102159134A (zh) * 2008-07-08 2011-08-17 普罗秋斯生物医学公司 可摄取事件标记数据框架
CN103221071A (zh) * 2010-06-24 2013-07-24 梅德拉公司 药物传输的建模和注射方案的参数产生
CN103649722A (zh) * 2011-06-28 2014-03-19 大塚制药株式会社 药剂检查装置和药剂检查方法
US8755854B2 (en) * 2009-07-31 2014-06-17 Nellcor Puritan Bennett Ireland Methods and apparatus for producing and using lightly filtered photoplethysmograph signals
CN104271044A (zh) * 2012-05-02 2015-01-07 皇家飞利浦有限公司 可成像药物洗脱珠的光谱ct可视化
WO2015046044A1 (ja) * 2013-09-30 2015-04-02 富士フイルム株式会社 薬剤認識装置及び方法
CN104582670A (zh) * 2012-09-27 2015-04-29 富士胶片株式会社 药剂检查支援装置及方法
CN104717952A (zh) * 2012-09-27 2015-06-17 富士胶片株式会社 药剂检查装置及方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0575910A (ja) * 1991-09-17 1993-03-26 Olympus Optical Co Ltd 合焦点検出装置
US5475429A (en) 1991-07-25 1995-12-12 Olympus Optical Co., Ltd. In-focus sensing device for sensing an in-focus condition using a ratio of frequency components at different positions
JP2000018920A (ja) * 1998-07-06 2000-01-21 Tani Denki Kogyo Kk 画像認識による計測方法および計測装置および記録媒体
JP3506933B2 (ja) * 1998-12-11 2004-03-15 シーケーディ株式会社 外観検査装置およびptpシートの外観検査装置ならびにptp包装機
JP2004297751A (ja) * 2003-02-07 2004-10-21 Sharp Corp 合焦状態表示装置及び合焦状態表示方法
JP5413283B2 (ja) * 2010-04-09 2014-02-12 新日鐵住金株式会社 焦点ズレ検出装置、焦点ズレ検出方法およびプログラム
US8948508B2 (en) * 2012-10-31 2015-02-03 Medsnap, Llc System and method of adaptive color correction for pill recognition in digital images
JP5846172B2 (ja) * 2013-08-28 2016-01-20 株式会社リコー 画像処理装置、画像処理方法、プログラムおよび撮像システム
US9445713B2 (en) * 2013-09-05 2016-09-20 Cellscope, Inc. Apparatuses and methods for mobile imaging and analysis

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997006730A1 (en) * 1995-08-15 1997-02-27 Jefferson Jacob Katims Digital automated current perception threshold (cpt) determination device
WO2006090671A1 (ja) * 2005-02-23 2006-08-31 Matsushita Electric Works, Ltd. 粒状物体の検査方法及びその方法を実施する検査装置
CN101419215A (zh) * 2007-10-22 2009-04-29 互动纪元营销有限公司 药物自动检测的方法及其互动装置
CN102159134A (zh) * 2008-07-08 2011-08-17 普罗秋斯生物医学公司 可摄取事件标记数据框架
US8755854B2 (en) * 2009-07-31 2014-06-17 Nellcor Puritan Bennett Ireland Methods and apparatus for producing and using lightly filtered photoplethysmograph signals
CN103221071A (zh) * 2010-06-24 2013-07-24 梅德拉公司 药物传输的建模和注射方案的参数产生
CN103649722A (zh) * 2011-06-28 2014-03-19 大塚制药株式会社 药剂检查装置和药剂检查方法
CN104271044A (zh) * 2012-05-02 2015-01-07 皇家飞利浦有限公司 可成像药物洗脱珠的光谱ct可视化
CN104582670A (zh) * 2012-09-27 2015-04-29 富士胶片株式会社 药剂检查支援装置及方法
CN104717952A (zh) * 2012-09-27 2015-06-17 富士胶片株式会社 药剂检查装置及方法
WO2015046044A1 (ja) * 2013-09-30 2015-04-02 富士フイルム株式会社 薬剤認識装置及び方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113301883A (zh) * 2019-02-08 2021-08-24 富士胶片富山化学株式会社 药剂识别系统、药剂识别装置、药剂识别方法以及程序
CN116312938A (zh) * 2023-05-16 2023-06-23 西安交通大学医学院第一附属医院 基于大数据分析的配药信息处理方法、系统及存储介质

Also Published As

Publication number Publication date
EP3447478B1 (en) 2021-01-06
JP6674834B2 (ja) 2020-04-01
EP3447478A1 (en) 2019-02-27
CN109073564B (zh) 2020-12-08
EP3447478A4 (en) 2019-04-17
US10726285B2 (en) 2020-07-28
US20190050660A1 (en) 2019-02-14
WO2017183458A1 (ja) 2017-10-26
JP2017194413A (ja) 2017-10-26

Similar Documents

Publication Publication Date Title
CN109073564A (zh) 药剂监查装置及方法以及程序
US10217012B2 (en) Drug recognition device and method
CN104173190B (zh) 药剂检查装置和药剂分包装置
US9904992B2 (en) Packeted drug inspection device and method
CN104582670B (zh) 药剂检查支援装置及方法
US10892048B2 (en) Machine learning pill identification
KR101224384B1 (ko) 조제 약품 자동 검사 장치 및 그 방법
CN111031995A (zh) 药剂检查辅助装置、图像处理装置、图像处理方法以及程序
JP7134331B2 (ja) 計数システム、計数装置、機械学習装置、計数方法、部品配置方法、および、プログラム
CN111095262A (zh) 药剂监查装置、图像处理装置、图像处理方法以及程序
CA3130866C (en) Identification and verification of medication
KR20200062533A (ko) 알약 포장 설비 자동화 기계의 검사 장치
CN108921072A (zh) 一种基于视觉传感器的人流量统计方法、装置及系统
KR101459272B1 (ko) 영상 기반 조제 검사 장치
JP6825572B2 (ja) 鑑査装置、鑑査方法、および、コンピュータプログラム製品
JP2018205999A (ja) 医療用器材のデータ登録装置及び医療用器材の自動識別システム
JP7092128B2 (ja) 服薬管理システム、服薬管理方法、管理装置およびプログラム
IT201700020724A1 (it) Sistema modulabile per l’identificazione e certificazione di capi.
JP7375049B2 (ja) 画像処理装置及び方法
Lokhande et al. Study of Computer Vision Applications in Healthcare Industry 4.0
TWI571364B (zh) 藥錠辨識裝置
JPH03280168A (ja) 製品検査装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190531

Address after: Tokyo, Japan

Applicant after: Fuji Film Fushan Chemical Co., Ltd.

Address before: Tokyo, Japan

Applicant before: Fuji Film Corp.

GR01 Patent grant
GR01 Patent grant