CN107729826A - 药品包装图像识别方法及其装置 - Google Patents

药品包装图像识别方法及其装置 Download PDF

Info

Publication number
CN107729826A
CN107729826A CN201710904909.3A CN201710904909A CN107729826A CN 107729826 A CN107729826 A CN 107729826A CN 201710904909 A CN201710904909 A CN 201710904909A CN 107729826 A CN107729826 A CN 107729826A
Authority
CN
China
Prior art keywords
image
drug packing
key works
works drug
medicine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710904909.3A
Other languages
English (en)
Inventor
沙杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Enster Ling Technology Co Ltd
Original Assignee
Suzhou Enster Ling Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Enster Ling Technology Co Ltd filed Critical Suzhou Enster Ling Technology Co Ltd
Priority to CN201710904909.3A priority Critical patent/CN107729826A/zh
Publication of CN107729826A publication Critical patent/CN107729826A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/243Aligning, centring, orientation detection or correction of the image by compensating for image skew or non-uniform image deformations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Medical Preparation Storing Or Oral Administration Devices (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种药品包装图像识别方法及装置,通过先建立数据库,然后通过图像采集机构对待核对药品包装的图像采集,并将作为样品的药品包装与待核对药品包装进行图像比对分析,反馈相应结果。本发明的有益效果体现在:可以方便的进行药品包装上图像的采集,避免了人工对药品盒上内容进行核实产生的误差错误,改变了现有的人工审核方式,降低了医务人员工作量的同时,大大提高了审核效率。

Description

药品包装图像识别方法及其装置
技术领域
本发明属于图像处理及自动化装置技术领域,具体涉及一种药品包装盒图像识别方法及其装置。
背景技术
随着生活节奏的加快,人们对自己健康的关注程度相应降低,导致很多人都处于亚健康状态。医院常常也是人满为患,一般医生在给患者会诊后,会给患者开具药方,患者通过药方去取药,现有的配药工作都是通过人工在药房内进行拿取再经过和药方的核实,然后将药品发放给患者。药品包装盒形状不仅包括盒装还有圆筒状,尤其是圆筒状包装的药品核对,由于圆筒状的包装盒字体相对较小,这种核对方式有时会由于数量庞大而造成失误,且效率也会降低。
发明内容
为了解决现有技术的不足,本发明提供了一种药品包装盒图像识别方法及其装置。
本发明的目的通过以下技术方案来实现:
药品包装图像识别方法,包括如下步骤:
S1、建立数据库,采集作为样品的药品包装的特征图像作为标准,并将其作为数学模型,建立作为匹配识别的标准的数据库;
S2、待核对药品包装的图像采集,通过图像采集机构对待核对药品进行图像采集,并将采集的图像转换成矩阵;
S3、作为样品的药品包装与待核对药品包装进行图像比对分析,将S2中的图像转换成矩阵信息与S1数据库中的信息进行比对分析及匹配,并反馈相应结果。
优选地,所述S1中特征图像包括包装盒形状特征图像、颜色特征图像、药品名字特征图像、规格特征图像、条形码特征图像、有效期特征图像和生产批号特征图像。
优选地,所述药品包装形状包括盒状、圆筒状及袋装。
优选地,当所述药品包装为盒状时,所述S2包括如下步骤,
S21、图像采集机构获得的待核对药品的图像进行转换矩阵;
S22、通过S1数据库中的样品标准矩阵将S21中转换的矩阵进行校正。
优选地,所述药品包装为圆筒状时,所述S2包括如下步骤,
S21、图像采集机构对圆筒状包装盒进行不同角度的多次图像的采集;
S22、对不同角度采集到的多次图像进行转换矩阵;
S23、通过S1数据库中的样品标准矩阵将S22中转换的矩阵进行校正;
S24、对S23中校正后的图像进行选取,用于获得药瓶的外形轮廓的数序模型;
S25、通过采集的不同图片利用标定得到的矩阵拼接得到药瓶上标签的展开平面图。
优选地,所述S3包括如下步骤,
S31、然后进行药品图像与对应的数字模型的匹配,通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式对待核对药品的外形、形状纹理、颜色、条码信息等模型与数据库中标准模型进行匹配识别。
优选地,所述S3还包括如下步骤,
S32、对校正后的图像通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式进行药品图像与对应的数字模型的匹配,并得到相对于标准模型坐标系的坐标系;
S33、根据标准模型数据得到当前药品的效期批号区域,并通过矩阵变换算法、阈值分割算法、形态学算法进行预处理;
S34、根据标准数据模型内预设的字符识别类型进行待核对药品效期批号识别。
优选地,所述方法还包括,
S4、将分析的结果在显示机构上进行显示以供参阅。
优选地,以上任意一种所述的药品包装图像识别方法的识别装置,包括,
采集平台,用于放置药品包装台面;
图像采集机构,用于对药品包装进行图像采集;
图像处理机构,用于对图像采集机构采集到的图像进行处理分析,所述图像处理机构与图像采集机构通信连接;
信息显示机构,用于对图像处理结果进行显示。
优选地,所述采集平台包括固定式台面及可旋转式台面。
本发明的有益效果体现在:可以方便的进行药品包装盒上图像的采集,避免了人工对药品盒上内容进行核实产生的误差错误,改变了现有的人工审核方式,降低了医务人员工作量的同时,大大提高了审核效率。
具体实施方式
以下结合实施例具体阐述本发明的技术方案,本发明揭示了一种药品包装图像识别方法的识别装置,包括,
采集平台,用于放置药品包装台面;所述采集平台包括固定式台面及可旋转式台面。
图像采集机构,用于对药品包装进行图像采集;
图像处理机构,用于对图像采集机构采集到的图像进行处理分析,所述图像处理机构与图像采集机构通信连接。
信息显示机构,用于对图像处理结果进行显示,所述信息显示机构与所述图像处理机构通信连接,所述图像显示机构为显示屏。
基于以上药品包装识别装置,本发明还揭示了一种药品包装图像识别方法,包括如下步骤:
S1、建立数据库,采集作为样品的药品包装的特征图像作为标准,并将其作为数学模型,建立作为匹配识别的标准的数据库;所述特征图像包括包装盒形状特征图像、颜色特征图像、药品名字特征图像、规格特征图像、条形码特征图像、有效期特征图像和生产批号特征图像。
S2、待核对药品包装的图像采集,通过图像采集机构对待核对药品进行图像采集,并将采集的图像转换成矩阵;通过该矩阵转换可以消除图像采集单元本身带来的畸变、以及在安装过程中导致的倾斜之类的影响。同时还能获得像素坐标和物理坐标之间的转换关系。本发明中所述药品包装形状包括盒状、圆筒状及袋装。
当所述药品包装为盒状时,所述S2具体包括如下步骤,
S21、图像采集机构获得的待核对药品的图像进行转换矩阵;
S22、通过S1数据库中的样品标准矩阵将S21中转换的矩阵进行校正。
当所述药品包装为圆筒状时,所述S2包括如下步骤,
S21、图像采集机构对圆筒状包装盒进行不同角度的多次图像的采集;为了保证准确性及完整性,一般所需的图像采集从三个角度进行三次采集。
S22、对不同角度采集到的多次图像进行转换矩阵;
S23、通过S1数据库中的样品标准矩阵将S22中转换的矩阵进行校正;
S24、对S23中校正后的图像进行选取,用于获得药瓶的外形轮廓的数序模型;
S25、通过采集的不同图片利用标定得到的矩阵拼接得到药瓶上标签的展开平面图。
S3、作为样品的药品包装与待核对药品包装进行图像比对分析,将S2中的图像转换成矩阵信息与S1数据库中的信息进行比对分析及匹配,并反馈相应结果。
具体的,所述S3包括如下步骤,
S31、然后进行药品图像与对应的数字模型的匹配,通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式对待核对药品的外形、形状纹理、颜色、条码信息等模型与数据库中标准模型进行匹配识别。
本发明除了对药品进行药名等图像的识别外,还可以针对药品包装上的生产批号等进行识别,以更好的对药品进行监督核实。
其识别包括如下步骤,
S32、对校正后的图像通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式进行药品图像与对应的数字模型的匹配,并得到相对于标准模型坐标系的坐标系;
S33、根据标准模型数据得到当前药品的效期批号区域,并通过矩阵变换算法、阈值分割算法、形态学算法进行预处理;
S34、根据标准数据模型内预设的字符识别类型进行待核对药品效期批号识别。
S4、将分析的结果在显示机构上进行显示以供参阅。
当然本发明尚有多种具体的实施方式,在此就不一一列举。凡采用等同替换或者等效变换而形成的所有技术方案,均落在本发明要求保护的范围之内。

Claims (10)

1.药品包装图像识别方法,其特征在于:包括如下步骤:
S1、建立数据库,采集作为样品的药品包装的特征图像作为标准,并将其作为数学模型,建立作为匹配识别的标准的数据库;
S2、待核对药品包装的图像采集,通过图像采集机构对待核对药品进行图像采集,并将采集的图像转换成矩阵;
S3、作为样品的药品包装与待核对药品包装进行图像比对分析,将S2中的图像转换成矩阵信息与S1数据库中的信息进行比对分析及匹配,并反馈相应结果。
2.如权利要求1所述的药品包装图像识别方法,其特征在于:所述S1中特征图像包括包装盒形状特征图像、颜色特征图像、药品名字特征图像、规格特征图像、条形码特征图像、有效期特征图像和生产批号特征图像。
3.如权利要求2所述的药品包装图像识别方法,其特征在于:所述药品包装形状包括盒状、圆筒状。
4.如权利要求3所述的药品包装图像识别方法,其特征在于:当所述药品包装为盒状时,所述S2包括如下步骤,
S21、图像采集机构获得的待核对药品的图像进行转换矩阵;
S22、通过S1数据库中的样品标准矩阵将S21中转换的矩阵进行校正。
5.如权利要求3所述的药品包装图像识别方法,其特征在于:所述药品包装为圆筒状时,所述S2包括如下步骤,
S21、图像采集机构对圆筒状包装盒进行不同角度的多次图像的采集;
S22、对不同角度采集到的多次图像进行转换矩阵;
S23、通过S1数据库中的样品标准矩阵将S22中转换的矩阵进行校正;
S24、对S23中校正后的图像进行选取,用于获得药瓶的外形轮廓的数序模型;
S25、通过采集的不同图片利用标定得到的矩阵拼接得到药瓶上标签的展开平面图。
6.如权利要求2所述的药品包装图像识别方法,其特征在于:所述S3包括如下步骤,
S31、然后进行药品图像与对应的数字模型的匹配,通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式对待核对药品的外形、形状纹理、颜色、条码信息等模型与数据库中标准模型进行匹配识别。
7.如权利要求2所述的药品包装图像识别方法,其特征在于:所述S3还包括如下步骤,
S32、对校正后的图像通过遍历算法、迭代算法、图像金字塔、Hu矩等多种算法及数学程式进行药品图像与对应的数字模型的匹配,并得到相对于标准模型坐标系的坐标系;
S33、根据标准模型数据得到当前药品的效期批号区域,并通过矩阵变换算法、阈值分割算法、形态学算法进行预处理;
S34、根据标准数据模型内预设的字符识别类型进行待核对药品效期批号识别。
8.如权利要求2所述的药品包装图像识别方法,其特征在于:所述方法还包括,
S4、将分析的结果在显示机构上进行显示以供参阅。
9.如权利要求1-8中任意一种所述的药品包装图像识别方法的识别装置,其特征在于:包括,
采集平台,用于放置药品包装台面;
图像采集机构,用于对药品包装进行图像采集;
图像处理机构,用于对图像采集机构采集到的图像进行处理分析,所述图像处理机构与图像采集机构通信连接;
信息显示机构,用于对图像处理结果进行显示,所述信息显示机构与所述图像处理机构通信连接。
10.如权利要求9所述的药品包装图像识别方法的识别装置,其特征在于:所述采集平台包括固定式台面及可旋转式台面。
CN201710904909.3A 2017-09-29 2017-09-29 药品包装图像识别方法及其装置 Pending CN107729826A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710904909.3A CN107729826A (zh) 2017-09-29 2017-09-29 药品包装图像识别方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710904909.3A CN107729826A (zh) 2017-09-29 2017-09-29 药品包装图像识别方法及其装置

Publications (1)

Publication Number Publication Date
CN107729826A true CN107729826A (zh) 2018-02-23

Family

ID=61209126

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710904909.3A Pending CN107729826A (zh) 2017-09-29 2017-09-29 药品包装图像识别方法及其装置

Country Status (1)

Country Link
CN (1) CN107729826A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109543687A (zh) * 2018-11-13 2019-03-29 南京赤狐智能科技有限公司 一种流水线快餐盒自动识别方法
CN110866917A (zh) * 2019-12-03 2020-03-06 西安交通大学 一种基于机器视觉的药片类型及排列方式识别方法
CN111222503A (zh) * 2020-04-16 2020-06-02 湖南师范大学 一种古琴减字谱指法的手写谱字识别方法
CN111695578A (zh) * 2019-03-12 2020-09-22 优控智能技术有限公司 一种多特征融合的人工智能药品包装图像识别系统
CN111814793A (zh) * 2020-09-09 2020-10-23 耀方信息技术(上海)有限公司 药品图文信息违规检测方法及系统
CN112381512A (zh) * 2020-11-15 2021-02-19 周岳 一种核验系统及核验方法
CN113035343A (zh) * 2021-05-24 2021-06-25 深圳市瑞意博科技股份有限公司 药物包装图形模板快速提取方法、装置、存储介质和设备
CN113159973A (zh) * 2021-02-25 2021-07-23 华夏方圆信用评估有限公司 智慧医保基金动态监管方法及系统
CN113517050A (zh) * 2021-04-23 2021-10-19 联仁健康医疗大数据科技股份有限公司 确定药方单的方法、装置、电子设备及存储介质
CN114943847A (zh) * 2022-04-21 2022-08-26 江苏人先医疗科技有限公司 一种药瓶的识别方法及相关装置、设备
CN117911668A (zh) * 2024-03-15 2024-04-19 深圳市力生视觉智能科技有限公司 药品信息识别方法及装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101449149A (zh) * 2006-05-23 2009-06-03 麒麟工程技术系统公司 表面检查装置
CN101596147A (zh) * 2009-06-15 2009-12-09 无锡骏聿科技有限公司 一种药品发放的自动警示方法
CN103158987A (zh) * 2011-12-13 2013-06-19 苏州艾隆科技有限公司 快速发药系统中药品识别及处理方法
CN105095446A (zh) * 2015-07-24 2015-11-25 百度在线网络技术(北京)有限公司 药品的搜索处理方法、服务器及终端设备
CN105488507A (zh) * 2016-01-22 2016-04-13 吉林大学 圆柱表面文字识别系统及方法
CN205486182U (zh) * 2016-01-22 2016-08-17 吉林大学 圆柱表面文字识别系统
CN106290382A (zh) * 2016-07-01 2017-01-04 广东技术师范学院 泡罩药片包装缺陷视觉检测装置及方法
CN106295165A (zh) * 2016-08-05 2017-01-04 四川大学华西第二医院 一种基于图像识别的防发药差错系统及方法
CN106919941A (zh) * 2017-04-26 2017-07-04 华南理工大学 一种三维手指静脉识别方法及系统
CN106981064A (zh) * 2017-03-16 2017-07-25 亿信标准认证集团有限公司 基于机器视觉技术的药品瓶包装标准认证在线检测系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101449149A (zh) * 2006-05-23 2009-06-03 麒麟工程技术系统公司 表面检查装置
CN101596147A (zh) * 2009-06-15 2009-12-09 无锡骏聿科技有限公司 一种药品发放的自动警示方法
CN103158987A (zh) * 2011-12-13 2013-06-19 苏州艾隆科技有限公司 快速发药系统中药品识别及处理方法
CN105095446A (zh) * 2015-07-24 2015-11-25 百度在线网络技术(北京)有限公司 药品的搜索处理方法、服务器及终端设备
CN105488507A (zh) * 2016-01-22 2016-04-13 吉林大学 圆柱表面文字识别系统及方法
CN205486182U (zh) * 2016-01-22 2016-08-17 吉林大学 圆柱表面文字识别系统
CN106290382A (zh) * 2016-07-01 2017-01-04 广东技术师范学院 泡罩药片包装缺陷视觉检测装置及方法
CN106295165A (zh) * 2016-08-05 2017-01-04 四川大学华西第二医院 一种基于图像识别的防发药差错系统及方法
CN106981064A (zh) * 2017-03-16 2017-07-25 亿信标准认证集团有限公司 基于机器视觉技术的药品瓶包装标准认证在线检测系统
CN106919941A (zh) * 2017-04-26 2017-07-04 华南理工大学 一种三维手指静脉识别方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
张显明: ""基于机器视觉的药品标签识别及分拣系统研究"", 《中国硕士优秀学位论文全文数据库 医药卫生科技辑》 *
曹厚德等: "《现代医学影响技术学》", 30 September 2016, 上海科学技术出版社 *
赵相伟等: "《MATLAB与测量数据处理》", 31 March 2014, 中国矿业大学出版社 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109543687A (zh) * 2018-11-13 2019-03-29 南京赤狐智能科技有限公司 一种流水线快餐盒自动识别方法
CN111695578A (zh) * 2019-03-12 2020-09-22 优控智能技术有限公司 一种多特征融合的人工智能药品包装图像识别系统
CN110866917A (zh) * 2019-12-03 2020-03-06 西安交通大学 一种基于机器视觉的药片类型及排列方式识别方法
CN111222503A (zh) * 2020-04-16 2020-06-02 湖南师范大学 一种古琴减字谱指法的手写谱字识别方法
CN111814793A (zh) * 2020-09-09 2020-10-23 耀方信息技术(上海)有限公司 药品图文信息违规检测方法及系统
CN112381512A (zh) * 2020-11-15 2021-02-19 周岳 一种核验系统及核验方法
CN113159973A (zh) * 2021-02-25 2021-07-23 华夏方圆信用评估有限公司 智慧医保基金动态监管方法及系统
CN113517050A (zh) * 2021-04-23 2021-10-19 联仁健康医疗大数据科技股份有限公司 确定药方单的方法、装置、电子设备及存储介质
CN113035343A (zh) * 2021-05-24 2021-06-25 深圳市瑞意博科技股份有限公司 药物包装图形模板快速提取方法、装置、存储介质和设备
CN114943847A (zh) * 2022-04-21 2022-08-26 江苏人先医疗科技有限公司 一种药瓶的识别方法及相关装置、设备
CN117911668A (zh) * 2024-03-15 2024-04-19 深圳市力生视觉智能科技有限公司 药品信息识别方法及装置

Similar Documents

Publication Publication Date Title
CN107729826A (zh) 药品包装图像识别方法及其装置
US20190180492A1 (en) System and Method to Capture and Process Body Measurements
CN107731272A (zh) 一种门诊药品安全发放流程优化方法
Waber et al. Commercial features of placebo and therapeutic
US20140340479A1 (en) System and method to capture and process body measurements
CN110613480B (zh) 基于深度学习的胎儿超声动态影像检测方法及系统
CN107680644B (zh) 智能中药饮片调配控制管理系统及方法
US20050240084A1 (en) System
CN110956633A (zh) 一种基于虚拟立体定位像的快速ct扫描方法及系统
CN106709249A (zh) 一种智慧医疗服务平台
CN103810568A (zh) 基于物联网技术的中药饮片质量管理系统
US20170177796A1 (en) Method and system for intelligent completion of medical record based on big data analytics
CN107213019A (zh) 药品分发装置及方法
CN110269624A (zh) 一种基于rgbd相机的呼吸监测装置及其呼吸监测方法
CN111292823A (zh) 用于零售药店购药引导的采纳方法及系统
CN107564591A (zh) 一种数字医疗系统
CN107103199A (zh) 一种指导用药的方法及装置
CN104306071B (zh) 手术机器人操作监测系统和方法
WO2006130659A3 (en) Methods, program product and system for enhanced image guided stereotactic radiotherapy
CN107038467A (zh) 一种中药饮片溯源生产管理系统及方法
CN108742548A (zh) 一种可视化中医脉图系统及装置
CN111599436A (zh) 临床用药分发方法及其分发设备
CN103932708B (zh) 一种心脏多平面的重构方法
CN111128400B (zh) 医学护理资料的处理方法及装置、存储介质、电子设备
CN202795378U (zh) 药品复核装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Sha Jie

Inventor after: Sun Xizhuo

Inventor before: Sha Jie

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180223