KR102627025B1 - Pill counter using image processing - Google Patents

Pill counter using image processing Download PDF

Info

Publication number
KR102627025B1
KR102627025B1 KR1020210148899A KR20210148899A KR102627025B1 KR 102627025 B1 KR102627025 B1 KR 102627025B1 KR 1020210148899 A KR1020210148899 A KR 1020210148899A KR 20210148899 A KR20210148899 A KR 20210148899A KR 102627025 B1 KR102627025 B1 KR 102627025B1
Authority
KR
South Korea
Prior art keywords
pills
image
pill
processor
camera
Prior art date
Application number
KR1020210148899A
Other languages
Korean (ko)
Other versions
KR20230063635A (en
Inventor
김영민
김용광
곽승준
전용운
Original Assignee
주식회사 이에스피
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 이에스피 filed Critical 주식회사 이에스피
Priority to KR1020210148899A priority Critical patent/KR102627025B1/en
Publication of KR20230063635A publication Critical patent/KR20230063635A/en
Application granted granted Critical
Publication of KR102627025B1 publication Critical patent/KR102627025B1/en

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J7/00Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
    • A61J7/02Pill counting devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J3/00Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms
    • A61J3/10Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms into the form of compressed tablets
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61JCONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J7/00Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
    • A61J7/0069Trays for holding or distributing medicines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30242Counting objects in image

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Medicinal Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 알약 계수기에 관한 것으로, 트레이에 담긴 알약들을 촬영하는 카메라와, 상기 카메라에서 촬영된 이미지를 저장하는 저장부와, 상기 저장부에 저장된 이미지를 처리하여, 알약의 형태와 크기를 확인할 수 있는 이미지로 변환하는 이미지 프로세서와, 상기 이미지 프로세서에서 변환된 이미지를 확인하여 알약의 종류에 따른 수를 계수하는 프로세서를 포함할 수 있다.The present invention relates to a pill counter, which includes a camera for photographing pills contained in a tray, a storage unit for storing images captured by the camera, and processing of the images stored in the storage unit to check the shape and size of the pills. It may include an image processor that converts the image into an existing image, and a processor that checks the image converted by the image processor and counts the number of pills according to the type.

Description

이미지 프로세싱을 이용한 알약 계수기{Pill counter using image processing}Pill counter using image processing}

본 발명은 이미지 프로세싱을 이용한 알약 계수기에 관한 것으로, 더 상세하게는 계수작업시간을 단축할 수 있는 알약 계수기에 관한 것이다.The present invention relates to a pill counter using image processing, and more specifically, to a pill counter that can shorten counting time.

일반적으로 알약 계수기는 당뇨 또는 고혈압 치료를 목적으로 하는 알약과 같이 장기간 복용하는 알약을 계수하거나, 알약의 생산 시설에서 제조된 알약을 계수하는 장치이다.In general, a pill counter is a device that counts pills taken for a long period of time, such as pills intended to treat diabetes or high blood pressure, or pills manufactured in a pill production facility.

알약은 보통 그 형상이 원형 또는 타원형이며, 처방에 따라서는 한 알이 아닌 절반을 처방하기 때문에 반원형의 형상을 가지기도 한다. 또한 크기도 약에 따라 차이가 있다.Pills are usually circular or oval in shape, and depending on the prescription, they may have a semicircular shape because half a pill is prescribed instead of one. Also, the size varies depending on the drug.

이처럼 다양한 형상 및 크기를 가지는 알약을 계수하기 위해서, 최근에는 카메라를 이용하여 계수하는 계수기가 제안되었다.In order to count pills of various shapes and sizes, a counter that uses a camera has recently been proposed.

등록특허 10-2245716호(알약 계수기, 2021년 4월 22일 등록)에는 카메라로 촬영한 영상을 이용하여 계수를 수행하는 알약 계수기에 대하여 기재되어 있다.Registered Patent No. 10-2245716 (pill counter, registered on April 22, 2021) describes a pill counter that performs counting using images captured by a camera.

위의 등록특허에는 트레이에 올려진 알약의 영상을 카메라로 촬영하고, 이미지를 흑백 이미지로 반전 처리하여, 광학적으로 알약 수를 검출하는 구성에 대하여 기재하고 있다.The above registered patent describes a configuration that captures an image of pills placed on a tray with a camera, inverts the image into a black and white image, and optically detects the number of pills.

그러나 알약이 겹쳐 있거나, 반으로 자른 반원형 알약 한 쌍이 원형으로 배치되거나 하는 등의 비정상 배치 상태를 구분하기는 매우 어려우며, 이러한 비정상 배치 상태의 구분을 위해서는 카메라의 성능을 높일 수밖에 없었다.However, it is very difficult to distinguish abnormal arrangements, such as pills overlapping or a pair of semi-circular pills cut in half arranged in a circle, and in order to distinguish such abnormal arrangements, camera performance had to be improved.

카메라의 성능을 높이는 경우 계수기의 가격이 증가하게 되는 문제점이 발생한다.When increasing camera performance, a problem arises in that the price of the counter increases.

또한, 종래에는 동일 크기 및 동일 형상의 약을 계수하기 위하여, 각 형상 및 크기에 부합하는 트레이를 준비해야 한다. 이는 앞서 언급한 알약의 비정상 배치 상태를 줄이기 위한 노력이지만, 다양한 트레이의 구비에 따른 공간적 제한과 계수할 약의 종류가 변경될 때마다 트레이를 교체해야 하는 시간적 부담이 있었다.Additionally, conventionally, in order to count drugs of the same size and shape, trays corresponding to each shape and size must be prepared. This was an effort to reduce the abnormal arrangement of pills mentioned above, but there were space limitations due to the provision of various trays and the time burden of having to replace trays every time the type of medicine to be counted changed.

상기와 같은 문제점을 감안한 본 발명의 목적은, 상대적으로 저사양 카메라를 사용하여, 알약을 계수할 수 있는 알약 계수기를 제공함에 있다.The purpose of the present invention in consideration of the above problems is to provide a pill counter that can count pills using a relatively low-end camera.

또한, 본 발명은 트레이의 교체 없이도 다양한 크기 및 형상의 알약을 계수할 수 있는 알약 계수기를 제공함에 다른 목적이 있다.Another object of the present invention is to provide a pill counter that can count pills of various sizes and shapes without replacing the tray.

그리고 본 발명의 또 다른 목적은 알약의 계수와 함께 알약의 불량 여부를 확인할 수 있는 알약 계수기를 제공함에 있다.Another object of the present invention is to provide a pill counter that can count pills and check whether the pills are defective.

상기와 같은 기술적 과제를 해결하기 위한 본 발명의 일측면에 따른 알약 계수기는, 트레이에 담긴 알약들을 촬영하는 카메라와, 상기 카메라에서 촬영된 이미지를 저장하는 저장부와, 상기 저장부에 저장된 이미지를 처리하여, 알약의 형태와 크기를 확인할 수 있는 이미지로 변환하는 이미지 프로세서와, 상기 이미지 프로세서에서 변환된 이미지를 확인하여 알약의 종류에 따른 수를 계수하는 프로세서를 포함할 수 있다.A pill counter according to one aspect of the present invention for solving the above technical problem includes a camera for photographing pills contained in a tray, a storage unit for storing images captured by the camera, and images stored in the storage unit. It may include an image processor that processes and converts the image into an image that can confirm the shape and size of the pill, and a processor that checks the image converted by the image processor and counts the number of pills according to the type.

본 발명의 실시예에서, 상기 이미지 프로세서는, 거리변환 알고리즘을 이용하여, 알약의 경계를 분리할 수 있다.In an embodiment of the present invention, the image processor can separate the boundaries of the pills using a distance transformation algorithm.

본 발명의 실시예에서, 상기 프로세서에서 계수된 알약의 종류에 따른 수를 표시하는 표시부를 더 포함할 수 있다.In an embodiment of the present invention, the processor may further include a display unit that displays the number of pills counted by the type.

본 발명의 실시예에서, 상기 프로세서는, 알약의 경계를 확인하여, 경계가 불명확하거나 다른 경계 부분과는 다른 형상인 경우, 불량인 알약으로 판단하여, 상기 표시부에 불량인 알약의 수를 표시할 수 있다.In an embodiment of the present invention, the processor checks the boundary of the pill, and if the boundary is unclear or has a different shape from other boundary portions, it is judged to be a defective pill, and the number of defective pills is displayed on the display. You can.

본 발명의 실시예에서, 상기 표시부는, 상기 불량인 알약의 위치를 상기 이미지 프로세서에서 변환된 이미지에 표시할 수 있다.In an embodiment of the present invention, the display unit may display the location of the defective pill on the image converted by the image processor.

본 발명은, 이미지 프로세싱 기술을 이용하여 카메라 성능에 무관하게 알약의 계수를 수행할 수 있도록 함으로써, 계수기의 가격을 낮출 수 있는 효과가 있다.The present invention has the effect of lowering the price of the counter by enabling counting of pills regardless of camera performance using image processing technology.

또한, 본 발명은 정확한 형상 및 크기 정보를 획득할 수 있어, 다양한 트레이의 사용이 요구되지 않으며, 따라서 장치의 크기를 줄임과 아울러 트레이 교체에 대한 시간적 부담을 줄일 수 있는 효과가 있다.In addition, the present invention can obtain accurate shape and size information, so the use of various trays is not required, and thus has the effect of reducing the size of the device and reducing the time burden for tray replacement.

그리고 알약의 정확한 형상 및 크기 정보를 획득하여, 알약의 불량 여부를 확인할 수 있는 효과가 있다.In addition, by obtaining accurate shape and size information of the pill, it is possible to check whether the pill is defective.

도 1은 본 발명의 바람직한 실시예에 따른 알약 계수기의 블록 구성도이다.
도 2는 본 발명에 적용되는 이미지 프로세서의 이미지 처리 흐름도이다.
도 3 내지 도 5는 이미지 처리 과정을 설명하기 위한 예시도이다.
도 6은 이미지 프로세서에서 처리된 이미지의 예시도이다.
1 is a block diagram of a pill counter according to a preferred embodiment of the present invention.
Figure 2 is an image processing flowchart of an image processor applied to the present invention.
3 to 5 are exemplary diagrams for explaining the image processing process.
Figure 6 is an example diagram of an image processed in an image processor.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야한다.Since the present invention can make various changes and have various embodiments, specific embodiments will be illustrated in the drawings and described in detail. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all changes, equivalents, and substitutes included in the spirit and technical scope of the present invention.

각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.While describing each drawing, similar reference numerals are used for similar components. In describing the present invention, if it is determined that a detailed description of related known technologies may obscure the gist of the present invention, the detailed description will be omitted.

제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms such as first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.

예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.For example, a first component may be named a second component, and similarly, the second component may also be named a first component without departing from the scope of the present invention.

및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The term and/or includes any of a plurality of related stated items or a combination of a plurality of related stated items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When a component is said to be "connected" or "connected" to another component, it is understood that it may be directly connected to or connected to the other component, but that other components may exist in between. It should be.

반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.On the other hand, when it is mentioned that a component is “directly connected” or “directly connected” to another component, it should be understood that there are no other components in between.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다.The terms used in this application are only used to describe specific embodiments and are not intended to limit the invention.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, terms such as “comprise” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in the specification, but are not intended to indicate the presence of one or more other features. It should be understood that this does not exclude in advance the possibility of the existence or addition of elements, numbers, steps, operations, components, parts, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person of ordinary skill in the technical field to which the present invention pertains.

일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Terms defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and unless clearly defined in the present application, should not be interpreted in an ideal or excessively formal sense. No.

도 1은 본 발명의 바람직한 실시예에 따른 알약 계수기의 블록 구성도이다.1 is a block diagram of a pill counter according to a preferred embodiment of the present invention.

도 1을 참조하면 본 발명은, 계수 대상 알약이 놓이는 트레이(30)와, 상기 트레이(30)의 영상을 촬영하여 이미지를 획득하는 카메라(20)와, 상기 카메라(20)에서 획득된 이미지를 저장하는 저장부(40)와, 저장부(40)에 저장된 이미지를 처리하여 알약 영역을 구분하는 이미지 프로세서(10)와, 이미지 프로세서(10)에서 검출된 이미지에서 알약의 형태, 크기를 이용하여 알약의 종류를 구분하고 계수하는 프로세서(50)와, 계수 결과를 표시하는 표시부(60), 상기 프로세서(50)에 사용자의 동작 명령을 입력하는 입력부(70)를 포함할 수 있다.Referring to Figure 1, the present invention includes a tray 30 on which pills to be counted are placed, a camera 20 for acquiring an image by taking an image of the tray 30, and an image obtained from the camera 20. A storage unit 40 that stores the image, an image processor 10 that processes the image stored in the storage unit 40 to classify the pill area, and the shape and size of the pill in the image detected by the image processor 10. It may include a processor 50 that classifies and counts the types of pills, a display unit 60 that displays the counting results, and an input unit 70 that inputs a user's operation command to the processor 50.

이하, 상기와 같이 구성되는 본 발명의 바람직한 실시예에 따른 알약 계수기의 구성과 작용에 대하여 보다 상세히 설명한다.Hereinafter, the configuration and operation of the pill counter according to a preferred embodiment of the present invention configured as described above will be described in more detail.

먼저, 사용자는 계수할 알약을 트레이(30)에 담아 정위치시킨 후, 입력부(70)를 통해 알약 계수의 실행을 명령한다. 이때 트레이에 담긴 알약은 단일한 종류의 것일 수 있으나, 그 크기나 형태가 다른 것이어도 본 발명에서는 계수가 가능한 것으로 한다.First, the user places the pills to be counted in the tray 30 and places them in the correct position, and then commands the execution of pill counting through the input unit 70. At this time, the pills contained in the tray may be of a single type, but in the present invention, counting is possible even if the pills are of different sizes or shapes.

사용자 입력에 따라 프로세서(50)는 카메라(20)를 이용하여 트레이(30)에 담긴 알약을 촬영한 영상을 획득하고, 이때 촬영된 이미지는 저장부(40)에 저장될 수 있다. 카메라(20)를 통해 촬영되는 이미지는 트레이(30)의 상면의 이미지이며, 카메라(20)의 렌즈는 트레이(30)의 중앙 상부로부터 소정 거리 이격되는 것으로 할 수 있다.According to the user input, the processor 50 uses the camera 20 to obtain an image of the pill contained in the tray 30, and the captured image may be stored in the storage unit 40. The image captured through the camera 20 is an image of the upper surface of the tray 30, and the lens of the camera 20 may be spaced a predetermined distance from the upper center of the tray 30.

상기 카메라(20)는 상대적으로 고성능의 카메라를 사용하지 않으며, 본 발명에서는 상대적으로 저화질의 이미지를 처리하여, 알약의 수를 계수할 수 있다.The camera 20 does not use a relatively high-performance camera, and in the present invention, the number of pills can be counted by processing relatively low-quality images.

저장부(40)에는 카메라(20)를 통해 촬영된 이미지가 저장될 뿐만 아니라 알약의 크기, 형태에 대한 정보도 함께 저장되는 것으로 할 수 있다.The storage unit 40 not only stores images captured through the camera 20, but also stores information about the size and shape of the pill.

그 다음, 이미지 프로세서(10)는 저장부(40)에 저장된 이미지를 처리하여, 알약의 경계를 판별하고, 알약의 경계에서 겹쳐진 부분이 있으면, 층을 분할하여 분할 이미지를 생성한다.Next, the image processor 10 processes the image stored in the storage unit 40 to determine the boundary of the pill, and if there is an overlapping portion at the boundary of the pill, divides the layers to generate a split image.

도 2는 이미지 프로세서(10)의 이미지 처리 순서도이다.Figure 2 is an image processing flowchart of the image processor 10.

도 2를 참조하면 이미지 프로세서(10)는 먼저 S21단계와 같이 알약의 이미지를 포함하는 상기 카메라(20)의 이미지 데이터를 이진화하고, 각 픽셀의 이웃한 픽셀들과의 관계를 이용하여 알약의 경계부분을 검출한다.Referring to FIG. 2, the image processor 10 first binarizes the image data of the camera 20 including the image of the pill as in step S21, and uses the relationship between each pixel with neighboring pixels to determine the boundary of the pill. Detect part.

이러한 처리는 거리변환 알고리즘을 이용하는 것으로, 유클리드 거리를 이용하여 알약의 경계부분을 검출한다.This process uses a distance transformation algorithm, and the boundary portion of the pill is detected using the Euclidean distance.

알약의 경계 부분을 검출한 S21단계에서 처리된 이미지의 예를 도 3에 도시하였다.An example of the image processed in step S21, which detects the border of the pill, is shown in Figure 3.

그 다음, 이미지 프로세서(10)는 S22단계와 같이 경계의 겹침이 있는 알약들을 그룹화한다.Next, the image processor 10 groups pills with overlapping boundaries as in step S22.

도 3에서 알약들이 겹쳐 위치하는 경우는 알약이 완전히 일치되게 겹쳐지는 것은 확률적으로 거의 불가능하며, 또한 알약들이 3개의 층으로 겹쳐지는 것도 거의 불가능하기 때문에 본 발명에서는 이러한 가정하에 알약들의 겹침 상태를 판단한다. 통상 알약들이 상하 2층이 되도록 일부 겹쳐지는 것이 일반적이다.In the case where the pills are overlapped in Figure 3, it is almost impossible for the pills to overlap perfectly, and it is also almost impossible for the pills to overlap in three layers. Therefore, in the present invention, under this assumption, the overlapping state of the pills is judge. It is common for the pills to partially overlap so that there are two layers, top and bottom.

다만 하층 알약과 상층 알약의 겹침 정도에 따라 상층 알약의 경사도에 차이가 있을 수 있으며, 완전한 이미지를 얻을 수 없는 하층의 알약은 상층 알약의 경사도를 이용하여 그 형태를 추정할 수 있다.However, there may be a difference in the slope of the upper-layer pill depending on the degree of overlap between the lower-layer pill and the upper-layer pill, and the shape of the lower-layer pill for which a complete image cannot be obtained can be estimated using the slope of the upper-layer pill.

이러한 처리를 위하여 먼저 알약들의 경계를 확인하고, 경계의 겹침이 발생한 영역을 제1그룹(G1), 제2그룹(G2), 제3그룹(G3)과 같이 그룹화한다.For this processing, the boundaries of the pills are first checked, and the areas where the boundaries overlap are grouped into the first group (G1), second group (G2), and third group (G3).

그 다음, S23단계에서는 그룹들 중 상층의 알약의 형태를 분석한다.Next, in step S23, the shape of the top pill among the groups is analyzed.

그룹들의 상층에 위치하는 알약은 정원형, 삼각형, 타원형 등의 형태일 수 있으며, 이미지 프로세서(10)는 상층 알약의 경사도를 고려하여 원래 알약의 형태를 추정할 수 있다. The pill located on the upper layer of the groups may have a garden, triangular, or oval shape, and the image processor 10 may estimate the original shape of the pill by considering the slope of the upper layer pill.

특히 경사진 알약의 경우에는 측면의 일부가 이미지에 포함되며, 이를 고려하여 원래의 알약 형태를 추정한다.In particular, in the case of an inclined pill, part of the side is included in the image, and the original pill shape is estimated by taking this into account.

도 4는 제1그룹(G1)의 상층 알약(1)의 이미지이며, 이미지상 경계의 형태는 타원이지만 측면의 추정을 통해 상층 알약(1)의 경사방향을 추정하고, 평면으로 복원하면 평면이 원형인 알약이 된다.Figure 4 is an image of the upper pill 1 of the first group (G1). The shape of the boundary in the image is an ellipse, but if the inclination direction of the upper pill 1 is estimated through estimation of the side and restored to a plane, the plane becomes It becomes a circular pill.

또한, 도 5와 같이 제2그룹(G2)의 상층 알약(1)은 평면으로 복원을 하더라도 평면상 타원형의 알약임을 알 수 있다.In addition, as shown in Figure 5, it can be seen that the upper layer pills 1 of the second group (G2) are oval-shaped pills in plan even when they are restored to a flat surface.

그 다음, 이미지 프로세서(10)는 S24단계와 같이 상층 알약(1)과 하층 알약(2)이 동일한 것으로 추정하고, 동일 크기 및 형태의 상층 알약과 하층 알약이 겹쳐진 이미지를 구현하여 각 그룹의 이미지와 비교한다.Next, the image processor 10 estimates that the upper layer pill 1 and the lower layer pill 2 are the same as in step S24, and implements an image in which the upper layer pill and the lower layer pill of the same size and shape overlap, so that the images of each group are Compare with

S25단계에서는 상층 알약과 하층 알약이 겹친 상태를 추정하고 획득된 그룹의 이미지와 비교하여 결과가 동일하면 상층 알약과 하층 알약이 동일한 것으로 결정한다.In step S25, the overlapping state of the upper layer pill and the lower layer pill is estimated and compared with the obtained group images. If the results are the same, it is determined that the upper layer pill and the lower layer pill are the same.

만약 동일한 상층 알약과 하층 알약의 겹친 상태 추정결과와 그룹의 이미지가 서로 다른 경우, S26단계와 같이 이미지 프로세서(10)는 하층 알약(2)의 일부 이미지의 경계 형상정보를 이용하여 하층 알약(2)의 형태 및 크기를 추정한다.If the overlapping state estimation results of the same upper layer pill and lower layer pill and the group images are different, the image processor 10 uses the boundary shape information of some images of the lower layer pill (2) as in step S26 to ) to estimate the shape and size.

이때, 하층 알약의 형태는 원형, 타원형, 삼각형 등 알려진 형태이며, 크기는 상층 알약(1)의 경계부분에서 돌출된 하층 알약(2)의 곡률을 이용할 수 있다.At this time, the shape of the lower layer pill is known as a circle, oval, or triangle, and the size can be determined by using the curvature of the lower layer pill (2) protruding from the boundary of the upper layer pill (1).

하층 알약(1)의 형태와 크기는 실질적으로 상층 알약(1)의 경사도를 결정하기 때문에 상층 알약(1)의 경사도(측면의 노출정도)를 이용하여 하층 알약(2)이 상층 알약(1)의 하부에 어디까지 위치하는지 추정이 가능하다.Since the shape and size of the lower layer pill (1) substantially determine the slope of the upper layer pill (1), the lower layer pill (2) is adjusted to the upper layer pill (1) by using the slope (degree of exposure of the side) of the upper layer pill (1). It is possible to estimate how far below it is located.

그 다음, S27 단계에서, 상기 이미지 프로세서(10)는 상층 알약의 형태를 평면화한 상층 이미지와 다른 알약과 겹쳐지지 않은 알약들과 하층 알약들의 추정된 이미지를 포함하는 하층 이미지를 출력한다.Next, in step S27, the image processor 10 outputs an upper layer image that flattens the shape of the upper layer pills and a lower layer image that includes pills that do not overlap with other pills and an estimated image of the lower layer pills.

도 6은 도 3에 도시한 이미지를 처리한 상층 이미지 및 하층 이미지의 예시도이다.FIG. 6 is an example diagram of an upper layer image and a lower layer image obtained by processing the image shown in FIG. 3.

이와 같이 이미지 프로세서(10)는 트레이(30) 상의 알약 이미지에서 상층과 하층에 겹쳐지게 배치된 알약들을 분할하고, 경사진 상층 알약의 이미지를 평면화하고, 상층 알약에 의해 일부가 가려진 하층 알약들의 이미지를 추정하여, 각각 서로 다른 이미지로 구현하여 출력한다.In this way, the image processor 10 divides the pills arranged to overlap in the upper and lower layers in the pill image on the tray 30, flattens the image of the inclined upper layer pills, and divides the images of the lower layer pills that are partially obscured by the upper layer pills. is estimated and implemented and output as different images.

그 다음, 프로세서(50)는 이미지 프로세서(10)의 상층 이미지와 하층 이미지를 확인하여, 동일한 형태 및 크기의 알약의 수를 각각 계수할 수 있다.Next, the processor 50 can check the upper layer image and the lower layer image of the image processor 10 and count the number of pills of the same shape and size.

이와 같이 계수된 알약의 수 정보는 표시부(60)에 표시된다.Information on the number of pills counted in this way is displayed on the display unit 60.

이때, 프로세서(50)는 알약의 크기와 형태를 이용하여 저장부(40)에 저장된 정보를 이용하여 검출된 알약의 이름 등의 정보를 함께 표시할 수 있다.At this time, the processor 50 may display information such as the name of the detected pill using information stored in the storage unit 40 using the size and shape of the pill.

또한, 프로세서(50)는 각 알약의 경계를 확인하여 알약의 불량 여부도 확인할 수 있다. 예를 들어 경계 일부가 사라지고 없거나, 다른 경계 부분과 차이가 있는 경우에는 알약의 일부 깨짐으로 판단할 수 있으며, 표시부(60)에 불량인 알약의 수를 함께 표시할 수 있다.Additionally, the processor 50 can check whether the pill is defective by checking the boundary of each pill. For example, if part of the border disappears or is different from other border parts, it can be determined that part of the pill is broken, and the number of defective pills can be displayed on the display unit 60.

또한, 프로세서(50)는 알약의 경계를 확인하여, 불량으로 판단된 알약의 위치를 표시부(60)에 표시할 수 있다.Additionally, the processor 50 may check the boundary of the pill and display the location of the pill determined to be defective on the display unit 60.

이때 표시부(60)에 표시되는 알약의 위치는 상층 이미지와 하층 이미지 각각에서 불량인 알약을 다른 색상으로 표시하는 것으로 할 수 있다.At this time, the positions of the pills displayed on the display unit 60 can be such that defective pills are displayed in different colors in each of the upper and lower images.

이상에서 본 발명에 따른 실시예들이 설명되었으나, 이는 예시적인 것에 불과하며, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 범위의 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 다음의 청구범위에 의해서 정해져야 할 것이다.Although embodiments according to the present invention have been described above, they are merely illustrative, and those skilled in the art will understand that various modifications and equivalent scope of embodiments are possible therefrom. Therefore, the true technical protection scope of the present invention should be determined by the following claims.

10:이미지 프로세서 20:카메라
30:트레이 40:저장부
50:프로세서 60:표시부
70:입력부
10: Image processor 20: Camera
30: Tray 40: Storage unit
50: Processor 60: Display unit
70: input unit

Claims (5)

트레이에 담긴 알약들을 촬영하는 카메라;
상기 카메라에서 촬영된 이미지를 저장하는 저장부;
상기 저장부에 저장된 이미지를 처리하여, 알약의 형태와 크기를 확인할 수 있는 이미지로 변환하는 이미지 프로세서;
상기 이미지 프로세서에서 변환된 이미지를 확인하여 알약의 종류에 따른 수를 계수하는 프로세서; 및
상기 프로세서에서 계수된 알약의 종류에 따른 수를 표시하는 표시부를 포함하되,
상기 이미지 프로세서는, 거리변환 알고리즘을 이용하여, 알약의 경계를 분리하고, 트레이 상의 알약 이미지에서 상층과 하층에 겹쳐지게 배치된 알약들을 분할하고, 경사진 상층 알약의 이미지를 평면화하고, 상층 알약에 의해 일부가 가려진 하층 알약들의 이미지를 추정하여, 각각 서로 다른 이미지로 구현하여 출력하고,
상기 프로세서는, 알약의 경계를 확인하여, 경계가 불명확하거나 다른 경계 부분과는 다른 형상인 경우, 불량인 알약으로 판단하여, 상기 표시부에 불량인 알약의 수를 표시하며, 상기 이미지 프로세서의 상층 이미지와 하층 이미지를 확인하여, 동일한 형태 및 크기의 알약의 수를 각각 계수하여 상기 표시부에 표시하며,
상기 표시부는 불량인 알약의 위치를 상기 이미지 프로세서에서 변환된 이미지에 표시하는 것을 특징으로 하는 알약 계수기.
A camera that takes pictures of pills in a tray;
a storage unit that stores images captured by the camera;
an image processor that processes the image stored in the storage unit and converts it into an image that can confirm the shape and size of the pill;
a processor that checks the image converted by the image processor and counts the number of pills according to type; and
Includes a display unit that displays the number according to the type of pills counted by the processor,
The image processor uses a distance transformation algorithm to separate the boundaries of the pills, segment pills arranged to overlap the upper and lower layers in the pill image on the tray, flatten the image of the inclined upper layer pills, and divide the pills into the upper layer pills. By estimating the images of the lower layer pills that are partially obscured by the
The processor checks the boundary of the pill, and if the boundary is unclear or has a different shape from other boundary portions, it is judged to be a defective pill, and the processor displays the number of defective pills on the display, and displays the upper layer image of the image processor. By checking the and lower layer images, the number of pills of the same shape and size is counted and displayed on the display,
A pill counter, wherein the display unit displays the location of the defective pill on the image converted by the image processor.
삭제delete 삭제delete 삭제delete 삭제delete
KR1020210148899A 2021-11-02 2021-11-02 Pill counter using image processing KR102627025B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210148899A KR102627025B1 (en) 2021-11-02 2021-11-02 Pill counter using image processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210148899A KR102627025B1 (en) 2021-11-02 2021-11-02 Pill counter using image processing

Publications (2)

Publication Number Publication Date
KR20230063635A KR20230063635A (en) 2023-05-09
KR102627025B1 true KR102627025B1 (en) 2024-01-19

Family

ID=86408713

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210148899A KR102627025B1 (en) 2021-11-02 2021-11-02 Pill counter using image processing

Country Status (1)

Country Link
KR (1) KR102627025B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102245716B1 (en) 2020-09-01 2021-04-28 송광 Pill counter

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101222678B1 (en) * 2010-12-23 2013-01-16 경기대학교 산학협력단 Medication image retrieval method and apparatus
KR101330567B1 (en) * 2012-02-08 2013-11-18 (주)제이브이엠 pill-detection method for pill box
KR101459272B1 (en) * 2013-02-18 2014-11-07 주식회사 인포피아 Medicine checking apparatus based on image processing
KR102433327B1 (en) * 2015-07-24 2022-08-18 (주)제이브이엠 Apparatus for inspecting drugs and methods thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102245716B1 (en) 2020-09-01 2021-04-28 송광 Pill counter

Also Published As

Publication number Publication date
KR20230063635A (en) 2023-05-09

Similar Documents

Publication Publication Date Title
US10955970B2 (en) Pointing direction determination system and method thereof
CN111212594B (en) Electronic device and method for determining conjunctival congestion degree by using electronic device
JP7501725B2 (en) Image processing device, image processing method, and program
US9111357B2 (en) System and method of pill identification
EP3384430B1 (en) Method for identification of characteristic points of a calibration pattern within a set of candidate points in an image of the calibration pattern
US20150227789A1 (en) Information processing apparatus, information processing method, and program
JP2015535108A (en) Adaptive color correction system and method for tablet recognition in digital images
US11270100B2 (en) Face image detection method and terminal device
JP4817184B2 (en) Image photographing apparatus and image analysis program
JP2016523405A (en) System and method using mark analysis in tablet identification
US20220206571A1 (en) Personalized calibration-independent regional fixation prediction for simultaneous users of a digital display
TW201624352A (en) Optical fingerprint recognition apparatus
US11759401B2 (en) Method of monitoring medication regimen with portable apparatus
KR102627025B1 (en) Pill counter using image processing
KR102182185B1 (en) System and method for evaluating ocular motility disturbance and computer readable storage medium
JP6244960B2 (en) Object recognition apparatus, object recognition method, and object recognition program
JP5414879B1 (en) Drug recognition device, drug recognition method, and drug recognition program
US20130004019A1 (en) Image recognition device, image recognition method and recording medium for image recognition program
JP6989025B2 (en) Biometric device, counterfeit discrimination program and counterfeit discrimination method
JP6255819B2 (en) COMPUTER PROGRAM FOR MEASUREMENT, MEASUREMENT DEVICE AND MEASUREMENT METHOD
JP6047475B2 (en) Image recognition apparatus, image recognition method, and image recognition program
WO2018221066A1 (en) Dispensing inspection assistance device and dispensing inspection assistance method
JP5786539B2 (en) Visual object determination device, visual object determination method, and visual object determination program
JP2021022155A (en) Digital display reader and program
JP2016112268A (en) Ophthalmologic apparatus, photoreceptor cell detection method, and program

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant