WO2018221066A1 - 調剤監査支援装置及び調剤監査支援方法 - Google Patents

調剤監査支援装置及び調剤監査支援方法 Download PDF

Info

Publication number
WO2018221066A1
WO2018221066A1 PCT/JP2018/016282 JP2018016282W WO2018221066A1 WO 2018221066 A1 WO2018221066 A1 WO 2018221066A1 JP 2018016282 W JP2018016282 W JP 2018016282W WO 2018221066 A1 WO2018221066 A1 WO 2018221066A1
Authority
WO
WIPO (PCT)
Prior art keywords
region
interest
medicine
template
image
Prior art date
Application number
PCT/JP2018/016282
Other languages
English (en)
French (fr)
Inventor
一央 岩見
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to EP18809549.1A priority Critical patent/EP3633609A1/en
Priority to CN201880029204.4A priority patent/CN110603567B/zh
Priority to JP2019522022A priority patent/JP6757851B2/ja
Publication of WO2018221066A1 publication Critical patent/WO2018221066A1/ja
Priority to US16/662,233 priority patent/US11594322B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61J—CONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J3/00—Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/85—Investigating moving fluids or granular solids
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G16H20/13—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered from dispensers
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination

Definitions

  • the present invention relates to a dispensing audit support device and a dispensing audit support method, and in particular, a dispensing that supports an audit of whether or not a photographed medicine is a medicine as prescribed by comparing a photographed image with a master image.
  • the present invention relates to an audit support apparatus and a dispensing audit support method.
  • Patent Document 1 describes an apparatus for selecting a test object by converting the orthogonal coordinates to cylindrical coordinates and extracting the outline to reduce the influence of the rotation component and perform the selection with high accuracy.
  • the collation between the captured image and the master image can be performed by, for example, setting a region of interest for the captured image, setting a template for the master image, and collating the region of interest with the template.
  • a collation since the distortion of the drug shape, blur, reflection of the edge, etc. occur depending on the collation conditions such as the position of the collation target drug in the image, in order to perform collation with high accuracy, It is necessary to set an appropriate region of interest and template according to the matching conditions.
  • Patent Document 1 described above the medicine master image and the captured image are collated, but setting the region of interest and the template according to the collation conditions is not considered.
  • Patent Document 2 what is to be checked in the dispensing inspection of a medicine (tablet) is not a contour but a stamped portion. Even if the stamped portion is converted into a cylindrical coordinate system, the stamp changes depending on the positional relationship with the light source. Therefore, the collation accuracy is not improved. As described above, in the conventional technique, the collation accuracy greatly depends on the collation conditions, and the robustness of the collation accuracy is low.
  • the present invention has been made in view of such circumstances, and an object thereof is to provide a dispensing audit support device and a dispensing audit support method with high robustness of collation accuracy.
  • the dispensing inspection support apparatus includes a master image storage unit that stores a master image indicating a medicine, and imaging that captures the audited medicine and acquires a captured image.
  • a region of interest, a region of a region of interest for setting a region of interest in the image of the agent to be audited, and detecting the position, shape, and size of the region of interest A region-of-interest setting unit that is set based on the position of the medicine, and a template generation unit that reads a master image indicating the medicine described in the prescription from the master image storage unit and generates a template based on the read master image.
  • the template generation unit that sets the position, shape, and size of the template corresponding to the set region of interest is compared with the template and the region of interest to supervise Comprising a matching unit that is a drug indicated subject agents and master image and outputs the information indicating whether or not the same, the.
  • the position, the shape, and the size of the region of interest are set according to the position of the inspection target medicine (check target medicine) in the captured image, and the position of the master image corresponding to the set region of interest. Since the shape and size are set, it is possible to avoid or reduce drug shape distortion, blur, and edge reflection due to the position of the audited drug. Therefore, the influence on the collation accuracy by the collation conditions is small, and the robustness of the collation accuracy can be increased.
  • the dispensing inspection support apparatus is the first aspect, in which the region-of-interest setting unit sets the region of interest as the distance between the detected position of the medicine to be audited and the center of the captured image increases, and generates a template.
  • the part generates a smaller template as the set region of interest is smaller. If the distance between the audited drug and the center of the captured image is too long, the audited drug may appear to be distorted, blurred, or the side of the drug may be reflected. If the region of interest and the template are set in the same size as the case, the region of interest and the template include a region where such a problem occurs, and the matching cannot be performed with high accuracy.
  • the second aspect by setting a region of interest small and further setting a template corresponding to such a region of interest, it is possible to avoid a region where the above-described problem occurs and The collation can be performed with high accuracy even when the medicine is far from the center of the captured image.
  • the region-of-interest setting unit increases the distance between the detected position of the auditable drug and the center of the photographed image, and the image of the auditable drug
  • the region of interest is set by moving the region of interest in the direction of the center of the captured image, and the template generation unit generates a template that is largely moved with respect to the master image as the amount of movement of the region of interest increases. If the distance between the audited drug and the center of the captured image is long, the image of the auditable drug may be greatly blurred from the side far from the center, as in the case where the distance is short in this situation If a region of interest and a template are set, collation cannot be performed with high accuracy.
  • the dispensing inspection support apparatus is any one of the first to third aspects, wherein the region-of-interest setting unit moves the position of the region of interest in the photographed image based on the direction of illumination with respect to the audited drug.
  • the template generation unit moves the position of the template with respect to the master image in correspondence with the movement of the region of interest. Even if it is difficult to grasp the characteristics of the drug due to the relationship with the illumination at the time of collation and the collation accuracy is lowered, the position of the region of interest is moved as in the fourth aspect to correspond to the movement of the region of interest. Therefore, it is possible to avoid such a problem by moving the position of the template, and collation can be performed with high accuracy.
  • the dispensing inspection support apparatus is any one of the first to fourth aspects, wherein the region-of-interest setting unit and the template generation unit determine the distance between the position of the medicine to be audited and the center of the captured image. If the threshold is less than the threshold, set the region of interest and template to be similar to the audited drug, and if the distance between the position of the audited drug and the center of the captured image exceeds the threshold, set the region of interest and template respectively. Set to rectangle.
  • the region of interest and the template may be similar to the auditable drug because the shape of the drug in the captured image is close to the true shape of the drug
  • the medicine to be inspected is far from the center of the photographed image (when the distance exceeds the threshold)
  • there may be a problem that the shape of the medicine is distorted in the photographed image or the end (side surface) is reflected.
  • such a problem can be avoided by setting a region of interest as in the fifth aspect and setting a template corresponding to the region of interest, and collation can be performed with high accuracy. it can.
  • the dispensing inspection support apparatus is the orientation of the region of interest and the template by rotating at least one of the region of interest and the template. Are matched. According to the sixth aspect, accurate matching can be performed by matching the direction of the region of interest and the template.
  • the dispensing audit support apparatus is configured such that the collating unit expands or contracts at least one of the region of interest and the template to reduce the region of interest and the template. Match by matching the size of. According to the seventh aspect, accurate matching can be performed by matching the size of the region of interest and the template.
  • the template and the region of interest include a marking area indicating a marking applied to the medicine.
  • the inscription applied to the medicine is effective as a key for collation
  • the region of interest and the template include the inscription region as in the eighth aspect, so that accurate collation can be performed.
  • the dispensing audit support apparatus is based on an image photographed under illumination used when collating the medicine to be audited by the photographing unit. It is an image.
  • the illumination during the master image photographing and the illumination during the collation are performed. It is possible to match, and an appropriate master image can be acquired to improve collation accuracy.
  • a dispensing inspection support method includes a master image storage unit that stores a master image indicating a medicine, and a photographing that photographs the audited medicine and obtains a photographed image.
  • a dispensing audit support method using a dispensing audit support device wherein the dispensing audit support device detects a position of a drug to be audited in a captured image, and the dispensing audit support device displays an image of the audited drug.
  • a region-of-interest setting step for setting a region of interest for setting the position, shape, and size of the region of interest based on the position of the detected drug, and a dispensing inspection support device described in the prescription
  • Agent audit support apparatus by matching the template region of interest, having a matching step of the drug indicating drug and the master image represented by the captured image to output the information indicating whether it is the same.
  • the influence on the collation accuracy due to the position of the collation target medicine is small, and the robustness of the collation accuracy can be increased.
  • a program for causing a dispensing audit support apparatus (computer) to execute the dispensing audit support method according to the tenth aspect and a non-temporary recording medium on which a computer-readable code of the program is recorded are also cited as aspects of the present invention. be able to.
  • the robustness of the collation accuracy can be increased.
  • FIG. 1 is a block diagram showing the configuration of a dispensing inspection support apparatus according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a state in which an image of a sachet is acquired under illumination.
  • FIG. 3 is another diagram illustrating a state in which an image of a packaging bag is acquired under illumination.
  • FIG. 4 is a diagram illustrating a functional configuration of the processing unit.
  • FIG. 5 is a diagram illustrating information stored in the storage unit.
  • FIG. 6 is a flowchart showing processing of the dispensing audit support method.
  • FIG. 7 is a diagram showing a medicine master image and attribute information.
  • FIG. 8 is a flowchart showing a region of interest and template setting process.
  • FIG. 1 is a block diagram showing the configuration of a dispensing inspection support apparatus according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a state in which an image of a sachet is acquired under illumination.
  • FIG. 3 is
  • FIG. 10A is a diagram illustrating setting of a region of interest according to the position of a medicine.
  • FIG. 10B is a diagram illustrating setting of a region of interest according to the position of a medicine.
  • FIG. 11A is another diagram illustrating setting of a region of interest according to the position of a medicine.
  • FIG. 11B is another diagram showing the setting of the region of interest according to the position of the medicine.
  • FIG. 12A is still another diagram showing the setting of the region of interest according to the position of the medicine.
  • FIG. 12B is still another diagram showing the setting of the region of interest according to the position of the medicine.
  • FIG. 13 is a diagram illustrating a display example of the matching result.
  • FIG. 1 is a diagram showing a configuration of a dispensing audit support device 1 (dispensing audit support device) according to an embodiment of the present invention.
  • the dispensing inspection support apparatus 1 includes a processing unit 10 (imaging unit, drug detection unit, region of interest setting unit, template generation unit, collation unit), storage unit 20 (master image storage unit), display unit 30, and operation unit 40.
  • the processing unit 10 is connected to the illumination unit 12, the camera 15A (imaging unit), the camera 15B (imaging unit), and the prescription reader 16.
  • the camera 15A and the camera 15B are constituted by digital cameras. As shown in FIG. 2, the camera 15A is arranged on the upper side (+ Z side in FIG. 2) of the medicine bandage PB in which the sachets TP (medicine bags) are continuously formed, and the lower side (FIG. 2). The camera 15B is disposed on the ⁇ Z side) and photographs the medicine packaged in the packaging bag TP from above and below (a plurality of different directions).
  • the packaging bag TP (medicine bandage PB) is conveyed by the conveyance mechanism 50 in the + X direction in FIG. 2 (the X axis is an axis along the longitudinal direction of the medicinal bandage PB).
  • the light source 13 illuminates the packaging bag TP from four directions ( ⁇ X direction and ⁇ Y direction).
  • the prescription reader 16 reads prescription information. For example, by OCR (Optical Character Recognition), information such as a patient name, a prescribed medicine and its quantity is read from a prescription written on paper. When a barcode or the like indicating information related to the prescribed medicine is recorded in the prescription, information such as the prescribed medicine and its quantity may be read from the barcode. Alternatively, the user may read the prescription and input prescription information using an input device such as a keyboard of the operation unit 40.
  • OCR Optical Character Recognition
  • FIG. 4 is a diagram illustrating a functional configuration of the processing unit 10.
  • the processing unit 10 includes a prescription information input unit 10A, an imaging unit 10B (imaging unit), a drug detection unit 10C (drug detection unit), a region of interest setting unit 10D (region of interest setting unit), and a template generation unit 10E ( A template generation unit), a collation unit 10F (collation unit), a display control unit 10G, and a communication unit 10H.
  • EEPROM Electrically Erasable and Programmable Read Only Memory
  • CPU Central Processing Unit
  • ROM Read Only Memory: non-temporary recording medium
  • RAM Random Access Memory
  • the prescription information input unit 10A controls the prescription reader 16 to input information (for example, patient name, drug identification information and quantity, usage, etc.) described in the prescription.
  • the photographing unit 10B controls the camera 15A and the camera 15B to photograph the medicine to be audited packaged in the packaging bag TP, and obtains a photographed image.
  • the drug detection unit 10C detects the position of the audit target drug in the captured image acquired by the imaging unit 10B. The orientation may be detected in addition to the position of the medicine to be audited.
  • the region-of-interest setting unit 10D sets the position, shape, and size of the region of interest with respect to the image of the audited drug based on the position detected by the drug detection unit 10C.
  • the template generation unit 10E reads a master image indicating the medicine described in the prescription, and generates a template based on the read master image.
  • the collation unit 10F collates the template with the region of interest, and outputs information indicating whether or not the medicine to be audited and the medicine indicated by the master image are the same.
  • the display control unit 10G performs display control such as a collation result.
  • the communication unit 10H communicates with a server, a database, and the like (not shown) via a network, and acquires information such as a medicine master image and attribute information. Detailed processing of the dispensing audit support method by these functions will be described later.
  • the functions of the processing unit 10 described above can be realized by using various processors.
  • the various processors include, for example, a CPU (Central Processing Unit) that is a general-purpose processor that executes various types of functions by executing software (programs).
  • the various processors described above also include a programmable logic device (PLD), which is a processor whose circuit configuration can be changed after manufacturing, such as an FPGA (Field Programmable Gate Array).
  • PLD programmable logic device
  • FPGA Field Programmable Gate Array
  • the above-mentioned various processors include dedicated electric circuits, which are processors having a circuit configuration designed exclusively for executing specific processing such as ASIC (Application Specific Specific Integrated Circuit).
  • each unit may be realized by a single processor, or may be realized by combining a plurality of processors.
  • a plurality of functions may be realized by one processor.
  • a processor As an example of configuring a plurality of functions by one processor, first, as represented by a computer such as a client and a server, one processor is configured by a combination of one or more CPUs and software. Is realized as a plurality of functions.
  • SoC system-on-chip
  • the function of each unit is configured using one or more of the various processors described above as a hardware structure.
  • a computer-readable code of a program for causing the dispensing audit support apparatus (computer) to execute the dispensing audit support method according to the present invention is a non-illustrated ROM (Read Only Memory) or the like. It is recorded on a temporary recording medium.
  • the storage unit 20 includes a non-temporary recording medium such as a CD (Compact Disk), a DVD (Digital Versatile Disk), a hard disk (Hard Disk), and various semiconductor memories and a control unit thereof. Store it in association.
  • the prescription information 20A is information read through the prescription reader 16, and includes, for example, the patient name, drug identification information and quantity, usage, and the like.
  • the master image 20B is a medicine master image or a processed master image obtained by performing image processing on the master image. Examples of the attribute information 20C include, but are not limited to, the drug type, shape, size, color, and stamp of the drug.
  • the medicine image 20D is a captured image and / or an image of an inspection target medicine extracted from the captured image.
  • the collation result 20E is information indicating the collation result created by the processing unit 10.
  • the storage unit 20 may store information on a region of interest and / or a template. During processing by the processing unit 10, these images and information are read and written between the processing unit 10 and the storage unit 20.
  • the display unit 30 includes a monitor 32, and can display prescription information read via the prescription reader 16, images of packaged medicines, information and images stored in the storage unit 20, verification results, and the like.
  • the operation unit 40 includes a pointing device such as a mouse and an input device such as a keyboard. The user can operate an image, a button, and the like displayed on the monitor 32 with the operation unit 40.
  • FIG. 6 is a flowchart showing the processing of the dispensing audit support method.
  • step S100 prescription information is input by the prescription reader 16 and the processing unit 10 (prescription information input unit 10A).
  • the prescription information 20 ⁇ / b> A already stored in the storage unit 20 may be read.
  • the photographing unit 10B controls the cameras 15A and 15B to photograph the medicine packaged in the packaging bag TP of the medicine bandage PB from a plurality of directions (up and down directions) and acquire images.
  • step S120 based on the prescription information read in step S100, a master image of the medicine described in the prescription is acquired.
  • the master image to be acquired may be the master image 20B stored in the storage unit 20, or may be an image acquired from an external drug database or the like via the processing unit 10 (communication unit 10H).
  • the image acquired as the master image is an image (taken based on an image obtained by photographing the medicine to be inspected under the light source 13 (light source of illumination used for collation) by the cameras 15A and 15B and the processing unit 10 (imaging unit 10B).
  • an image based on an image taken in the vicinity of the center of the field of view of the cameras 15A and 15B is preferably used as the master image.
  • FIG. 7 is an example of a master image, and includes a plurality of images (master images iM1, iM2) acquired by photographing the medicine T1 from different directions (up and down directions of the medicine).
  • the master image iM1 is an image about the front surface of the medicine T1
  • the master image iM2 is an image about the back surface of the medicine.
  • attribute information (attribute information 20C: see FIG. 5) indicating the attribute of the medicine T1 is associated with the master images iM1 and iM2, and the processing unit 10 (display control unit 10G)
  • the master image and the attribute information are displayed on the monitor 32 in accordance with the user's operation via.
  • the processing unit 10 extracts a drug region of each drug from the captured image, performs image processing such as enlargement or reduction, brightness adjustment, and the like as necessary to acquire images of individual drugs.
  • Step S130 drug detection step. If the image of each medicine is acquired, processing part 10 (medicine detection part 10C) will detect the position of the medicine for inspection in a photography picture (Step S140: medicine detection process). In step S140, for example, the edge of the medicine is detected and its center is obtained, and the position of the obtained center can be detected as the position of the medicine to be audited.
  • step S150 region of interest setting step, template setting step.
  • step S151 the processing unit 10 (region of interest setting unit 10D) calculates the distance between the drug and the center of the captured image based on the position of the drug detected in step S150, and the calculated distance is equal to or less than the threshold value. Whether or not (step S152). If the determination is affirmed (YES in step S152), the processing unit 10 (region-of-interest setting unit 10D) sets the region of interest to be similar to the auditable drug (step S153: region-of-interest setting step). Further, the processing unit 10 (template generation unit 10E) sets the template for the master image to be similar to the audit target drug in correspondence with the shape of the region of interest (step S154: template generation step).
  • Similar shape to drug to be audited means, for example, if the drug is circular, the region of interest (or template) has a different size, and if the drug is oval, the region of interest (or template) also has a different size. It means that there is.
  • step S152 determines whether the processing unit 10 (region of interest setting unit 10D) is negative (when the calculated distance exceeds the threshold value).
  • step S155 region of interest setting step.
  • a template for the master image is set to a rectangle corresponding to the rectangular region of interest (step S156: template generation step).
  • the processing unit 10 determines the position of the region of interest as the center of the captured image as the distance between the drug and the center of the captured image increases. And the region of interest is set smaller (step S157: region of interest setting step).
  • the size of the region of interest can be, for example, r ⁇ sin ⁇ , 0.5 ⁇ r ⁇ sin ⁇ , etc., where r is the radius of the drug and ⁇ is the angle between the drug and the imaging optical axis PA. .
  • the processing unit 10 (template generation unit 10E) generates a template having a position, size, and shape corresponding to the position, size, and shape of the region of interest (step S158: template generation step).
  • steps S151 to S158 will be further described. If the medicine T1 has a three-dimensional structure (having a thickness and a curved surface) as shown in the sectional view of FIG. 9, the medicine T1 is located far from the center of the field of view (imaging optical axis PA) (FIG. 9). Then, in the ⁇ X direction), the influence of the light L from the light source in the ⁇ X direction of the light source 13 (see FIG. 3) becomes strong. Considering the light L, in FIG. 9, the light L is obliquely incident on the marks F2 and F3, so that a shadow is formed.
  • the position of the region of interest based on the position of the drug,
  • the size and shape are set, and the position, size and shape of the template are set corresponding to the region of interest.
  • a setting example of a region of interest and a template will be specifically described.
  • FIG. 10A and 10B are diagrams illustrating an example of setting a region of interest based on the position of a medicine.
  • FIG. 10A shows the interest when the medicine T1 is present at the center, the middle, and the end of the photographed image iT1 (capturing bag TP photographed from the + Z direction) (respectively denoted by T1A, T1B, and T1C).
  • T1A, T1B, and T1C An example of setting the area is shown.
  • the processing unit 10 sets the region of interest RA to a circle that is similar to the medicine T1A (circular). To do.
  • the region of interest RA includes a marking area indicating the marking “133”.
  • the processing unit 10 region of interest setting unit 10D
  • a rectangular region of interest RB (smaller than the region of interest RA) is set.
  • the region of interest RB also includes a marking area indicating the marking “133”.
  • one third of the distance from the center to the end of the captured image iT1 with respect to the ⁇ X direction and the ⁇ Y direction is set as a threshold value (this value is an example), and the drug It is assumed that the position of T1B exceeds the threshold value in the X-axis direction and the Y-axis direction.
  • the processing unit 10 sets a rectangular region of interest RC (smaller than RB) while avoiding the side region EC and the “1” portion of the marking.
  • the region of interest RC includes a portion indicating “33” in the marking region indicating the marking “133”.
  • FIG. 10B is a diagram showing the positions of the centers CA, CB, and CC of the regions of interest RA, RB, and RC.
  • the center CA is the center of the medicine T1A, that is, the center of the captured image iT1, and the centers CB and CC are moved to the center side (+ X side) of the captured image iT1 (the movement amount of the center CC> the movement amount of the center CB). .
  • the marking is not shown.
  • the processing unit 10 sets the position, shape, and size of the template in correspondence with the region of interest set in this way (step S158 in FIG. 8: template generation step). Specifically, the smaller the region of interest is, the smaller the template is generated. The larger the amount of movement of the region of interest is, the larger the template is moved relative to the master image, and the template is moved in the same direction as the direction of movement of the region of interest relative to the light source. Note that the processing unit 10 (template generation unit 10E) generates a template including a marking region indicating marking (or a part thereof).
  • FIG. 11A and FIG. 11B are diagrams showing the setting of the region of interest when the medicine T1 is present at the center and the end in the + Y-axis direction (reference symbols are T1A and T1D, respectively).
  • the processing unit 10 region-of-interest setting unit 10D sets a region of interest RA that is circular (similar to the drug T1) for the drug T1A in the same manner as in FIGS. 10A and 10B.
  • the processing unit 10 (region of interest setting unit 10D) is strongly influenced by the + Y side region (the + Y side light source) with respect to the drug T1D (the drug T1 is present at the end in the + Y direction in the captured image iT2).
  • the region of interest RD is set so as not to include the region) and the side region ED (the region of interest RD is smaller than the region of interest RA).
  • FIG. 11B is a diagram showing the positions of the centers CA and CD of the regions of interest RA and RD.
  • the center CA is the center of the medicine T1A (that is, the center of the photographed image) as in FIG. 10B, and the center CD is moved to the center side ( ⁇ Y side; arrow direction) of the photographed image.
  • 12A and 12B are diagrams illustrating setting of a region of interest when a medicine is in a portrait orientation in the situation of FIGS. 10A and 10B.
  • the processing unit 10 determines that the drug T1E (drug T1 is present at the center of the captured image iT3) is circular (similar to the drug T1) as in FIGS. 10A and 10B.
  • the region of interest RE is set.
  • the processing unit 10 performs the ⁇ X side region (the ⁇ X side light source 13) of the medicine T1F.
  • the region of interest RF is set so as not to include the side region EF (region of interest RF is smaller than the region of interest RE).
  • the rectangular region of interest RG is set so as not to include the ⁇ X side and the side region EG of the drug T1G (region of interest RG Is smaller than the region of interest RF).
  • FIG. 12B is a diagram showing the positions of the centers CE, CF, and CG of the regions of interest RE, RF, and RG as in FIGS. 10B and 11B.
  • the center CE is the center of the medicine T1E, that is, the center of the photographed image iT3, and the centers CF and CG are moved to the center side (+ X side) of the photographed image iT3 (the amount of movement of the center CG> the amount of movement of the center CF). .
  • the marking is not shown.
  • the processing unit 10 template generation unit 10E sets the position, shape, and size of the template corresponding to the region of interest thus set (FIG. 8).
  • Step S158 template generation step).
  • the processing unit 10 (medicine detection unit 10C) in, for example, step S140 (medicine detection step).
  • the processing unit 10 collates the template with the region of interest. Then, it is determined whether the medicine to be audited and the medicine indicated by the master image are the same medicine (step S160: collation process). At the time of collation, the orientation may be adjusted by rotating at least one of the region of interest and the template. The size may be adjusted by enlarging or reducing at least one of the region of interest and the template.
  • the processing unit 10 outputs information indicating whether or not the medicine to be audited and the medicine indicated by the master image are the same (described later).
  • step S170 collation process. Determine whether or not. If the determination is affirmative (YES in step S170), the process proceeds to step S180. If the determination is negative (NO in step S170), the process returns to step S130 and an image of the next medicine to be audited is acquired and collated (step S140: collation). Step).
  • step S180 it is determined whether or not the collation has been completed for all the drugs described in the prescription (all the drugs to be packaged in the packaging bag TP), and the determination is positive for the other drugs described in the prescription.
  • Steps S120 to S170 are repeated until it is determined, and if the determination is affirmative (YES in step S180), the process proceeds to step S190.
  • the processing unit 10 (collation unit 10F) determines whether or not the processing for all the packaging bags TP included in the medicine bandage PB has been completed, and performs the processing of steps S110 to S180 until the determination is affirmed. (Drug detection process, region of interest setting process, template setting process, collation process) are repeated.
  • the processing unit 10 (the collation unit 10F and the display control unit 10G) displays the collation result (information indicating whether or not the medicine to be audited and the medicine indicated by the master image are the same). ) Is output (step S200: collation step). For example, as shown in FIG. 13, a list of images of audited medicines determined as “medicine T1 (see FIGS. 7 and 9)” is displayed on the monitor 32. In addition, the fact that “the drug to be audited and the drug indicated by the master image are the same, similar, or dissimilar” may be displayed for each audited drug and / or for each master image. May be displayed.
  • the processing unit 10 (collation unit 10F) may store the collation result (collation result 20E) in the storage unit 20 (step S200: collation process).
  • the first embodiment it is possible to avoid or reduce drug shape distortion, blurring, reflection of edges, and the like caused by the position of a drug to be audited.
  • the influence is small, and the robustness of collation accuracy can be increased.
  • Dispensing Audit Support Device 10 Processing Unit 10A Prescription Information Input Unit 10B Imaging Unit 10C Drug Detection Unit 10D Region of Interest Setting Unit 10E Template Generation Unit 10F Verification Unit 10G Display Control Unit 10H Communication Unit 12 Illumination Unit 13 Light Source 15A Camera 15B Camera 16 Prescription Reader 20 Storage unit 20A Prescription information 20B Master image 20C Attribute information 20D Drug image 20E Verification result 30 Display unit 32 Monitor 40 Operation unit 50 Transport mechanism CA Center CB Center CC Center CD Center CE Center CF Center CG Center EB Side area EC Side area ED side region EF side region EG side region F1 stamp F2 stamp F3 stamp L light PA imaging optical axis PB medicine bandage RA region of interest RB region of interest RC region of interest RD region of interest RF region of interest RG region of interest S100-S 00 Dispensing audit support method steps T1 agent T1A drug T1B drug T1C drug T1D drug T1E drug T1F drug T1G drug TP packing bag iM

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • Chemical & Material Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Medicinal Chemistry (AREA)
  • Quality & Reliability (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Medical Preparation Storing Or Oral Administration Devices (AREA)
  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

本発明は、照合精度のロバスト性が高い調剤監査支援装置及び調剤監査支援方法を提供することを目的とする。本発明の一の態様に係る調剤監査支援装置によれば、撮影画像における照合対象薬剤の位置に応じて関心領域の位置、形状、及び大きさが設定され、設定した関心領域に対応させてマスタ画像の位置、形状、及び大きさが設定されるので、照合対象薬剤の位置及び向きに起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できる。したがって照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。

Description

調剤監査支援装置及び調剤監査支援方法
　本発明は調剤監査支援装置及び調剤監査支援方法に係り、特に薬剤を撮影した画像をマスタ画像と照合することにより、撮影された薬剤が処方箋通りの薬剤であるか否かの監査を支援する調剤監査支援装置及び調剤監査支援方法に関する。
　医療現場では、医師が作成した処方箋を患者が調剤薬局に持参し、調剤薬局において処方箋にしたがって薬剤を調剤することが一般的であり、調剤の際には、処方される薬剤を一回に服用する分ごとに分包する、いわゆる「一包化」が行われることも多い。一方、薬剤師は調剤あるいは薬剤の提供を行う場合、処方箋の記載事項、患者情報等に基づいて処方内容を確認することが求められており、薬剤師の監査負担が大きくなっている。
　そこで、薬剤師の監査負担を軽減するため、薬剤の種類、数量等について処方箋に記載された内容と分包された薬剤の内容とを照合するための監査支援方法及び監査支援装置が開発されている。例えば特許文献１では、薬剤マスタ画像と撮影画像とを照合して撮影画像中の薬剤がどの薬剤であるか判別し、薬剤マスタ画像と、撮影画像における各薬剤と判別された薬剤領域画像とを表示する一覧表を作成することが記載されている。特許文献１によれば、この一覧表により撮影画像とマスタ画像との照合を容易にして薬剤師の目視監査作業を効率化できる。また、特許文献２では被験物を選別する装置に関し、直交座標を円柱座標に変換して輪郭を抽出することで回転成分の影響を小さくして精度良く選別を行うことが記載されている。
特開２０１４－６７３４２号公報 特開平９－８１７４８号公報
　撮影画像とマスタ画像との照合は、例えば撮影画像に対して関心領域を設定し、マスタ画像に対してテンプレートを設定して、関心領域とテンプレートとを照合することにより行うことができる。このような照合の際には、画像における照合対象薬剤の位置等の照合条件に依存して薬剤形状の歪み、ボケ、端部の映り込み等が生じるため、高精度に照合を行うには、照合条件に応じて適切な関心領域及びテンプレートを設定する必要がある。この点に関し、上述した特許文献１では薬剤マスタ画像と撮影画像とを照合しているが、照合条件に応じて関心領域、テンプレートを設定することは考慮されていない。また特許文献２に関しては、薬剤（錠剤）の調剤監査において照合すべきは輪郭ではなく刻印部であり、また仮に刻印部を円柱座標系に変換しても、刻印は光源との位置関係によって変化するため照合精度は改善しない。このように、従来の技術では照合精度が照合条件に大きく依存し、照合精度のロバスト性が低かった。
　本発明はこのような事情に鑑みてなされたもので、照合精度のロバスト性が高い調剤監査支援装置及び調剤監査支援方法を提供することを目的とする。
　上述した目的を達成するため、本発明の第１の態様に係る調剤監査支援装置は、薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、撮影画像における監査対象薬剤の位置を検出する薬剤検出部と、監査対象薬剤の画像に関心領域を設定する関心領域設定部であって、関心領域の位置、形状、及び大きさを検出した薬剤の位置に基づいて設定する関心領域設定部と、マスタ画像記憶部から処方箋に記載された薬剤を示すマスタ画像を読み出し、読み出したマスタ画像に基づいてテンプレートを生成するテンプレート生成部であって、設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定するテンプレート生成部と、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合部と、を備える。
　第１の態様によれば、撮影画像における監査対象薬剤（照合対象薬剤）の位置に応じて関心領域の位置、形状、及び大きさが設定され、設定した関心領域に対応させてマスタ画像の位置、形状、及び大きさが設定されるので、監査対象薬剤の位置に起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できる。したがって照合条件による照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。
　第２の態様に係る調剤監査支援装置は第１の態様において、関心領域設定部は、検出した監査対象薬剤の位置と撮影画像の中心との距離が遠いほど関心領域を小さく設定し、テンプレート生成部は、設定した関心領域が小さいほどテンプレートを小さく生成する。監査対象薬剤と撮影画像の中心との距離が遠いと、監査対象薬剤が歪んで写る、ボケて写る、薬剤の側面が映り込む等の問題が生じる場合があり、このような状況で距離が近い場合と同様の大きさで関心領域及びテンプレートを設定すると、関心領域及びテンプレートにそのような問題が生じる領域が含まれてしまい、照合を高精度に行うことができない。これに対し第２の態様によれば、関心領域を小さく設定し、さらにそのような関心領域に対応してテンプレートを小さく設定することで上述した問題が発生する領域を避けることができ、監査対象薬剤が撮影画像の中心から遠い場合でも照合を高精度に行うことができる。
　第３の態様に係る調剤監査支援装置は第１または第２の態様において、関心領域設定部は、検出した監査対象薬剤の位置と撮影画像の中心との距離が遠いほど、監査対象薬剤の画像における関心領域を撮影画像の中心の方向に大きく移動させて設定し、テンプレート生成部は、関心領域の移動量が大きいほど、マスタ画像に対して大きく移動させたテンプレートを生成する。監査対象薬剤と撮影画像の中心との距離が遠いと、監査対象薬剤の画像は中心から遠い側が近い側に対して大きくボケて写る場合があり、このような状況で距離が近い場合と同様に関心領域及びテンプレートを設定すると、照合を高精度に行うことができない。これに対し第３の態様のように関心領域を移動させ、さらに関心領域の移動量に対応して移動させたテンプレートを生成することでボケが大きく生じるのを避けることができ、監査対象薬剤と撮影画像の中心との距離が遠い場合でも照合を高精度に行うことができる。
　第４の態様に係る調剤監査支援装置は第１から第３の態様のいずれか１つにおいて、関心領域設定部は撮影画像における関心領域の位置を監査対象薬剤に対する照明の方向に基づいて移動させ、テンプレート生成部は関心領域を移動させるのに対応させてマスタ画像に対するテンプレートの位置を移動させる。照合時の照明との関係に起因して薬剤の特徴の把握が困難になり照合精度が低下する場合でも、第４の態様のように関心領域の位置を移動させ、関心領域の移動に対応させてテンプレートの位置を移動させることでそのような問題が生じるのを避けることができ、照合を高精度に行うことができる。
　第５の態様に係る調剤監査支援装置は第１から第４の態様のいずれか１つにおいて、関心領域設定部及びテンプレート生成部は、監査対象薬剤の位置と撮影画像の中心との距離がしきい値以下である場合は関心領域及びテンプレートをそれぞれ監査対象薬剤と相似形に設定し、監査対象薬剤の位置と撮影画像の中心との距離がしきい値を超える場合は関心領域及びテンプレートをそれぞれ矩形に設定する。監査対象薬剤が撮影画像の中心から近い場合（距離がしきい値以下の場合）、撮影画像における薬剤の形状は薬剤の真の形状に近いため関心領域及びテンプレートは監査対象薬剤と相似形でよいが、監査対象薬剤が撮影画像の中心から遠い場合（距離がしきい値を超える場合）は撮影画像において薬剤の形状が歪む、あるいは端部（側面）が写り込むといった問題が生じる場合がある。これに対し、第５の態様のように関心領域を設定し、関心領域に対応させてテンプレートを設定することでそのような問題が生じるのを避けることができ、照合を高精度に行うことができる。
　第６の態様に係る調剤監査支援装置は第１から第５の態様のいずれか１つにおいて、照合部は、関心領域とテンプレートとのうち少なくとも一方を回転させることにより関心領域とテンプレートとの向きを合わせて照合を行う。第６の態様によれば、関心領域とテンプレートとの向きを合わせることで正確な照合を行うことができる。
　第７の態様に係る調剤監査支援装置は第１から第６の態様のいずれか１つにおいて、照合部は、関心領域とテンプレートとのうち少なくとも一方を拡大または縮小することにより関心領域とテンプレートとの大きさを合わせて照合を行う。第７の態様によれば、関心領域とテンプレートとの大きさを合わせることで正確な照合を行うことができる。
　第８の態様に係る調剤監査支援装置は第１から第７の態様のいずれか１つにおいて、テンプレート及び関心領域は、薬剤に施された刻印を示す刻印領域を含む。薬剤に施された刻印は照合の手がかりとして有効であり、第８の態様のように関心領域及びテンプレートが刻印領域を含むことで正確な照合を行うことができる。
　第９の態様に係る調剤監査支援装置は第１から第８の態様のいずれか１つにおいて、マスタ画像は、撮影部により監査対象薬剤を照合の際に用いる照明の下で撮影した画像に基づく画像である。第９の態様では、撮影部により監査対象薬剤を照合の際に用いる照明の下で撮影した画像に基づく画像をマスタ画像とするので、マスタ画像撮影の際の照明と照合の際の照明とを一致させることができ、適切なマスタ画像を取得して照合精度を向上させることができる。
　上述した目的を達成するため、本発明の第１０の態様に係る調剤監査支援方法は、薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、を備える調剤監査支援装置による調剤監査支援方法であって、調剤監査支援装置が撮影画像における監査対象薬剤の位置を検出する薬剤検出工程と、調剤監査支援装置が監査対象薬剤の画像に関心領域を設定する関心領域設定工程であって、関心領域の位置、形状、及び大きさを検出した薬剤の位置に基づいて設定する関心領域設定工程と、調剤監査支援装置が処方箋に記載された薬剤を示すマスタ画像をマスタ画像記憶部から読み出し、読み出したマスタ画像に基づいて関心領域に対応させてテンプレートを生成するテンプレート生成工程と、調剤監査支援装置が、テンプレートと関心領域とを照合して、撮影画像が示す薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合工程と、を有する。第１０の態様によれば、第１の態様と同様に照合対象薬剤の位置に起因する照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。なお、第１０の態様に係る調剤監査支援方法を調剤監査支援装置（コンピュータ）に実行させるプログラム、及びそのプログラムのコンピュータ読み取り可能なコードが記録された非一時的記録媒体も本発明の態様として挙げることができる。
　以上説明したように、本発明の調剤監査支援装置及び調剤監査支援方法によれば、照合精度のロバスト性を高くすることができる。
図１は、本発明の一実施形態に係る調剤監査支援装置の構成を示すブロック図である。 図２は、照明下で分包袋の画像を取得する様子を示す図である。 図３は、照明下で分包袋の画像を取得する様子を示す他の図である。 図４は、処理部の機能構成を示す図である。 図５は、記憶部に記憶される情報を示す図である。 図６は、調剤監査支援方法の処理を示すフローチャートである。 図７は、薬剤のマスタ画像及び属性情報を示す図である。 図８は、関心領域及びテンプレート設定の処理を示すフローチャートである。 図９は、薬剤の形状に起因する刻印のボケを示す図である。 図１０Ａは、薬剤の位置に応じた関心領域の設定を示す図である。 図１０Ｂは、薬剤の位置に応じた関心領域の設定を示す図である。 図１１Ａは、薬剤の位置に応じた関心領域の設定を示す他の図である。 図１１Ｂは、薬剤の位置に応じた関心領域の設定を示す他の図である。 図１２Ａは、薬剤の位置に応じた関心領域の設定を示すさらに他の図である。 図１２Ｂは、薬剤の位置に応じた関心領域の設定を示すさらに他の図である。 図１３は、照合結果の表示例を示す図である。
　以下、添付図面を参照しつつ、本発明に係る調剤監査支援装置及び調剤監査支援方法の実施形態について、詳細に説明する。
　＜第１の実施形態＞
　図１は、本発明の一実施形態に係る調剤監査支援装置１（調剤監査支援装置）の構成を示す図である。調剤監査支援装置１は処理部１０（撮影部、薬剤検出部、関心領域設定部、テンプレート生成部、照合部）と、記憶部２０（マスタ画像記憶部）と、表示部３０と、操作部４０と、搬送機構５０と、を備え、処理部１０には照明部１２，カメラ１５Ａ（撮影部），カメラ１５Ｂ（撮影部），及び処方箋リーダ１６が接続されている。
　カメラ１５Ａ及びカメラ１５Ｂはデジタルカメラにより構成される。図２に示すように、分包袋ＴＰ（薬包）が連続して構成される薬包帯ＰＢの上側（図２の＋Ｚ側）にカメラ１５Ａが配置され、薬包帯ＰＢの下側（図２の－Ｚ側）にカメラ１５Ｂが配置されて、分包袋ＴＰに分包された薬剤を上下（複数の異なる方向）から撮影する。分包袋ＴＰ（薬包帯ＰＢ）は搬送機構５０により図２の＋Ｘ方向（Ｘ軸は薬包帯ＰＢの長手方向に沿った軸）に搬送され、撮影の際には照明部１２が有する複数の光源１３が上下それぞれ４方向（±Ｘ方向、±Ｙ方向）から分包袋ＴＰを照明する。図３において、複数の光源１３のそれぞれとカメラ１５Ａ、１５Ｂの撮影光軸ＰＡとの間隔（ｄ１、ｄ２、ｄ３、ｄ４）は同じである。つまり、複数の光源１３は撮影光軸ＰＡと等間隔（ｄ１＝ｄ２＝ｄ３＝ｄ４）である。
　処方箋リーダ１６は、処方箋情報を読み取る。例えばＯＣＲ（Optical Character Recognition）により、紙に記載された処方箋から患者氏名、処方された薬剤及びその数量等の情報を読み取る。処方された薬剤に関する情報を示すバーコード等が処方箋に記録されている場合は、処方された薬剤及びその数量等の情報をバーコードから読み取ってもよい。また、ユーザが処方箋を読み取り、操作部４０が有するキーボード等の入力デバイスにより処方箋情報を入力してもよい。
　＜処理部の構成＞
　図４は処理部１０の機能構成を示す図である。処理部１０は、処方箋情報入力部１０Ａと、撮影部１０Ｂ（撮影部）と、薬剤検出部１０Ｃ（薬剤検出部）と、関心領域設定部１０Ｄ（関心領域設定部）と、テンプレート生成部１０Ｅ（テンプレート生成部）と、照合部１０Ｆ（照合部）と、表示制御部１０Ｇと、通信部１０Ｈと、を備える。これらの機能は、ＣＰＵ（Central Processing Unit）、各種電子回路等のデバイスが、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory：非一時的記録媒体）等に記憶されたデータを参照して実現される。また、これらの機能はＲＯＭ（Read Only Memory：非一時的記録媒体）等に記憶された薬剤検査支援プログラムを実行することにより行われる。処理の際には、ＲＡＭ（Random Access Memory）等が一時記憶領域、作業領域として用いられる。なお図４ではＣＰＵ等のデバイスの図示は省略する。
　処方箋情報入力部１０Ａは、処方箋リーダ１６を制御して処方箋に記載された情報（例えば患者氏名、薬剤の識別情報及び数量、用法等）を入力する。撮影部１０Ｂは、カメラ１５Ａ及びカメラ１５Ｂを制御して分包袋ＴＰに分包された監査対象薬剤を撮影し、撮影画像を取得する。薬剤検出部１０Ｃは、撮影部１０Ｂが取得した撮影画像における監査対象薬剤の位置を検出する。監査対象薬剤の位置に加えて向きを検出してもよい。関心領域設定部１０Ｄは、薬剤検出部１０Ｃが検出した位置に基づいて、監査対象薬剤の画像に対する関心領域の位置、形状、及び大きさを設定する。テンプレート生成部１０Ｅは、処方箋情報入力部１０Ａが読み取った情報に基づいて、処方箋に記載された薬剤を示すマスタ画像を読み出し、読み出したマスタ画像に基づいてテンプレートを生成する。照合部１０Ｆは、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する。表示制御部１０Ｇは、照合結果等の表示制御を行う。通信部１０Ｈはネットワークを介して図示せぬサーバ、データベース等と通信し、薬剤のマスタ画像、属性情報等の情報を取得する。これらの機能による調剤監査支援方法の詳細な処理は後述する。
　上述した処理部１０の機能は、各種のプロセッサ（processor）を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）が含まれる。また、上述した各種のプロセッサには、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
　各部の機能は１つのプロセッサにより実現されてもよいし、複数のプロセッサを組み合わせて実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、クライアント、サーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各部の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。また、これらのプロセッサを動作させるため、本発明に係る調剤監査支援方法を調剤監査支援装置（コンピュータ）に実行させるプログラムのコンピュータ読み取り可能なコードが、不図示のＲＯＭ（Read Only Memory）等の非一時的記録媒体に記録される。
　＜記憶部の構成＞
　記憶部２０はＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ハードディスク（Hard Disk）、各種半導体メモリ等の非一時的記録媒体及びその制御部により構成され、図５に示す画像及び情報を互いに関連づけて記憶する。処方箋情報２０Ａは処方箋リーダ１６を介して読み取った情報であり、例えば患者氏名、薬剤の識別情報及び数量、用法等が含まれる。マスタ画像２０Ｂは薬剤のマスタ画像、またはマスタ画像に画像処理を施した処理済みマスタ画像である。属性情報２０Ｃとしては薬剤の薬剤タイプ、形状、寸法、色、及び刻印等を挙げることができるが、これらに限定されるものではない。薬剤画像２０Ｄは、撮影画像及び／または撮影画像から抽出した監査対象薬剤の画像である。照合結果２０Ｅは処理部１０が作成した照合結果を示す情報である。記憶部２０には、これらの画像及び情報の他に、関心領域及び／またはテンプレートの情報等を記憶してもよい。処理部１０による処理の際には、処理部１０と記憶部２０との間で、これらの画像及び情報の読み込み、書き込みが行われる。
　＜表示部及び操作部の構成＞
　表示部３０はモニタ３２を備えており、処方箋リーダ１６を介して読み取った処方箋情報、分包された薬剤の画像、記憶部２０に記憶された情報及び画像、照合結果等を表示することができる。操作部４０はマウス等のポインティングデバイス及びキーボード等の入力デバイスを含んでおり、ユーザはモニタ３２に表示された画像、ボタン等を操作部４０により操作することができる。
　＜調剤監査支援方法の処理＞
　上述した構成の調剤監査支援装置１による調剤監査支援方法の処理について説明する。図６は調剤監査支援方法の処理を示すフローチャートである。
　ステップＳ１００では、処方箋リーダ１６及び処理部１０（処方箋情報入力部１０Ａ）により処方箋情報を入力する。または、記憶部２０に既に記憶されている処方箋情報２０Ａを読み出してもよい。ステップＳ１１０では、撮影部１０Ｂがカメラ１５Ａ，１５Ｂを制御して薬包帯ＰＢの分包袋ＴＰに分包された薬剤を複数の方向（上下方向）から撮影して画像を取得する。
　ステップＳ１２０では、ステップＳ１００で読み取った処方箋情報に基づいて、処方箋に記載された薬剤のマスタ画像を取得する。取得するマスタ画像は記憶部２０に記憶されたマスタ画像２０Ｂでもよいし、処理部１０（通信部１０Ｈ）を介して外部の薬剤データベース等から取得した画像でもよい。
　マスタ画像として取得する画像は、監査対象薬剤をカメラ１５Ａ，１５Ｂ及び処理部１０（撮影部１０Ｂ）により光源１３（照合の際に用いる照明の光源）の下で撮影した画像に基づく画像（撮影した画像に画像処理を施した画像）でもよい。この場合、カメラ１５Ａ，１５Ｂの視野中心の近傍で撮影した画像に基づく画像をマスタ画像とすることが好ましい。
　図７はマスタ画像の例であり、薬剤Ｔ１を異なる方向（薬剤の上下方向）から撮影して取得した複数の画像（マスタ画像ｉＭ１，ｉＭ２）を含んでいる。マスタ画像ｉＭ１は薬剤Ｔ１の表面についての画像であり、マスタ画像ｉＭ２は薬剤の裏面についての画像である。また、図７の例では薬剤Ｔ１の属性を示す属性情報（属性情報２０Ｃ：図５参照）がマスタ画像ｉＭ１，ｉＭ２に関連づけられており、処理部１０（表示制御部１０Ｇ）は、操作部４０を介したユーザの操作に応じて、このようなマスタ画像及び属性情報をモニタ３２に表示する。
　処理部１０（薬剤検出部１０Ｃ）は、撮影画像から各薬剤の薬剤領域を抽出し、必要に応じて拡大または縮小、明るさ調整等の画像処理を施して、個々の薬剤の画像を取得する（ステップＳ１３０：薬剤検出工程）。個々の薬剤の画像を取得したら、処理部１０（薬剤検出部１０Ｃ）は、撮影画像における監査対象薬剤の位置を検出する（ステップＳ１４０：薬剤検出工程）。ステップＳ１４０では、例えば薬剤のエッジを検出してその中心を求め、求めた中心の位置を監査対象薬剤の位置として検出することができる。
　＜関心領域及びテンプレートの設定＞
　処理部１０（関心領域設定部１０Ｄ、テンプレート生成部１０Ｅ）は、ステップＳ１４０で検出した位置に基づいて関心領域及びテンプレートを設定する（ステップＳ１５０：関心領域設定工程、テンプレート設定工程）。以下、ステップＳ１５０における関心領域及びテンプレートの設定について、図８のフローチャートを参照して説明する。
　ステップＳ１５１では、処理部１０（関心領域設定部１０Ｄ）は、ステップＳ１５０で検出した薬剤の位置に基づいて薬剤と撮影画像の中心との距離を算出し、算出した距離がしきい値以下であるか否かを判断する（ステップＳ１５２）。判断が肯定されたら（ステップＳ１５２でＹＥＳ）、処理部１０（関心領域設定部１０Ｄ）は関心領域を監査対象薬剤と相似形に設定する（ステップＳ１５３：関心領域設定工程）。また、処理部１０（テンプレート生成部１０Ｅ）は、関心領域の形状に対応させて、マスタ画像に対するテンプレートを監査対象薬剤と相似形に設定する（ステップＳ１５４：テンプレート生成工程）。「監査対象薬剤と相似形」とは、例えば薬剤が円形なら関心領域（あるいはテンプレート）も大きさが異なる円形であり、薬剤が楕円形なら関心領域（あるいはテンプレート）も大きさが異なる楕円形であることを意味する。
　一方、ステップＳ１５２の判断が否定された場合（算出した距離がしきい値を超える場合）、処理部１０（関心領域設定部１０Ｄ）は関心領域を矩形に設定し（ステップＳ１５５：関心領域設定工程）、また、矩形の関心領域に対応させて、マスタ画像に対するテンプレートを矩形に設定する（ステップＳ１５６：テンプレート生成工程）。
　ステップＳ１５６までの処理で関心領域及びテンプレートの形状が設定されたら、処理部１０（関心領域設定部１０Ｄ）は、薬剤と撮影画像中心との距離が遠いほど、関心領域の位置を撮影画像の中心の方向に大きく移動させ、また関心領域を小さく設定する（ステップＳ１５７：関心領域設定工程）。関心領域の大きさは、例えば、薬剤の半径をｒとし、薬剤と撮影光軸ＰＡとの成す角をθとしたときに、ｒ×ｓｉｎθ、０．５×ｒ×ｓｉｎθ等にすることができる。処理部１０（テンプレート生成部１０Ｅ）は、関心領域の位置、大きさ、及び形状に対応した位置、大きさ、及び形状のテンプレートを生成する（ステップＳ１５８：テンプレート生成工程）。
　＜薬剤の位置及び光源との関係に起因する照合への影響＞
　ステップＳ１５１～Ｓ１５８の処理についてさらに説明する。薬剤Ｔ１が図９の断面図に示すような３次元構造（厚みを持ち、曲面により構成される）を有するものとすると、薬剤Ｔ１が視野の中心（撮影光軸ＰＡ）から遠い位置（図９では－Ｘ方向）に存在する場合、光源１３（図３参照）のうち－Ｘ方向の光源からの光Ｌの影響が強くなる。この光Ｌについて考えると、図９において刻印Ｆ２，Ｆ３に対しては光Ｌが斜めに入射するので影が形成されるが、刻印Ｆ１に対しては光Ｌがほぼ真上から入射するので影がほとんど形成されない。このため、撮影光軸ＰＡ（図３参照）を中心として薬剤Ｔ１を上方から撮影した場合、刻印Ｆ２，Ｆ３は鮮明であるのに対し刻印Ｆ１はボケてしまう。したがって、薬剤の位置によらずに関心領域の位置、大きさ、形状を固定しているとボケた刻印Ｆ１を含んだ状態で照合を行うこととなり、視野の中心付近で撮影されたマスタ画像に基づくテンプレート（刻印がボケていない）との間で刻印の不一致による誤照合が生じる場合がある。
　また、薬剤Ｔ１の位置が撮影画像の中心から遠くなると、撮影画像において薬剤Ｔ１の形状が歪み、さらに薬剤Ｔ１の側面（撮影画像の中心に近い側；図９では右側）が写り込む。このため、薬剤の位置によらずに関心領域の位置、大きさ、形状を固定していると、歪んだ領域及び不要な領域を含んだ状態で照合を行うこととなり、視野の中心付近で撮影されたマスタ画像に基づくテンプレート（歪みがなく、側面が含まれていない）との間で誤照合が生じる場合がある。
　このため第１の実施形態では、ボケた領域（図９の場合、刻印Ｆ１の部分）及び薬剤の側面が関心領域に含まれないようにするため、薬剤の位置に基づいて関心領域の位置、大きさ、及び形状を設定し、この関心領域に対応させてテンプレートの位置、大きさ、及び形状を設定している。以下、関心領域及びテンプレートの設定例を具体的に説明する。
　＜関心領域の設定例＞
　図１０Ａ及び図１０Ｂは、薬剤の位置に基づいた関心領域の設定例を示す図である。図１０Ａは、薬剤Ｔ１が撮影画像ｉＴ１（分包袋ＴＰを＋Ｚ方向から撮影）の中央部、中間部、及び端部に存在する場合（それぞれ参照符号をＴ１Ａ，Ｔ１Ｂ，Ｔ１Ｃとする）の関心領域の設定例を示す。具体的には、薬剤Ｔ１Ａ（薬剤Ｔ１が撮影画像ｉＴ１の中央に存在）の場合、処理部１０（関心領域設定部１０Ｄ）は関心領域ＲＡを薬剤Ｔ１Ａ（円形）と相似形である円形に設定する。関心領域ＲＡは、刻印“１３３”を示す刻印領域を含む。また、薬剤Ｔ１Ｂ（薬剤Ｔ１が、撮影画像ｉＴ１において－Ｘ方向の中間部に存在）の場合、処理部１０（関心領域設定部１０Ｄ）は、－Ｘ側及び側面領域ＥＢを含まないように、矩形の関心領域ＲＢ（関心領域ＲＡよりも小さい）を設定する。関心領域ＲＢも、刻印“１３３”を示す刻印領域を含む。なお、図１０Ａ及び図１０Ｂでは、±Ｘ方向及び±Ｙ方向に対して撮影画像ｉＴ１の中心から端部までの距離の３分の１をしきい値（この値は例示である）とし、薬剤Ｔ１Ｂの位置がＸ軸方向及びＹ軸方向についてしきい値を越えているものとする。
　薬剤Ｔ１Ｃ（薬剤Ｔ１が、撮影画像ｉＴ１において－Ｘ方向の端部に存在）の場合、側面領域ＥＣが撮影画像に大きく写りこみ、また刻印“１３３”のうち－Ｘ側の光源に近くなる“１”の部分が大きくボケる。そこで処理部１０（関心領域設定部１０Ｄ）は、側面領域ＥＣ及び刻印の“１”の部分を避けて矩形の関心領域ＲＣ（ＲＢよりも小さい）を設定する。関心領域ＲＣは、刻印“１３３”を示す刻印領域のうち“３３”を示す部分を含む。
　図１０Ｂは、関心領域ＲＡ，ＲＢ，ＲＣの中心ＣＡ，ＣＢ，ＣＣの位置を示す図である。中心ＣＡは薬剤Ｔ１Ａの中心、即ち撮影画像ｉＴ１の中心であり、中心ＣＢ，ＣＣは撮影画像ｉＴ１の中心側（＋Ｘ側）に移動させている（中心ＣＣの移動量＞中心ＣＢの移動量）。なお、図１０Ｂでは刻印の図示は省略している。
　処理部１０（テンプレート生成部１０Ｅ）は、このように設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定する（図８のステップＳ１５８：テンプレート生成工程）。具体的には、関心領域が小さいほどテンプレートを小さく生成し、関心領域の移動量が大きいほどマスタ画像に対するテンプレートを大きく移動させ、光源に対する関心領域の移動方向と同じ方向にテンプレートを移動させる。なお、処理部１０（テンプレート生成部１０Ｅ）は刻印（またはその一部分）を示す刻印領域を含むテンプレートを生成する。
　図１１Ａ及び図１１Ｂは、薬剤Ｔ１が＋Ｙ軸方向の中央部、端部に存在する場合（参照符号をそれぞれＴ１Ａ、Ｔ１Ｄとする）の関心領域の設定を示す図である。図１１Ａにおいて、処理部１０（関心領域設定部１０Ｄ）は薬剤Ｔ１Ａについては図１０Ａ及び図１０Ｂと同様に円形（薬剤Ｔ１と相似形）の関心領域ＲＡを設定する。また、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｄ（薬剤Ｔ１が、撮影画像ｉＴ２において＋Ｙ方向の端部に存在）については、＋Ｙ側の領域（＋Ｙ側の光源の影響を強く受ける領域）及び側面領域ＥＤを含まないように矩形の関心領域ＲＤを設定する（関心領域ＲＤは関心領域ＲＡよりも小さい）。
　図１１Ｂは関心領域ＲＡ，ＲＤの中心ＣＡ，ＣＤの位置を示す図である。中心ＣＡは図１０Ｂと同様に薬剤Ｔ１Ａの中心（すなわち、撮影画像の中心）であり、中心ＣＤは撮影画像の中心側（－Ｙ側；矢印方向）に移動させている。
　上述した図１０Ａから図１１Ｂでは薬剤が横向き（刻印がＸ軸方向となる向き）の場合について説明しているが、薬剤が縦向き（刻印がＹ軸方向となる向き）の場合について説明する。図１２Ａ及び図１２Ｂは、図１０Ａ及び図１０Ｂの状況において薬剤が縦向きの場合の関心領域の設定を示す図である。図１２Ａにおいて、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｅ（薬剤Ｔ１が、撮影画像ｉＴ３の中央部に存在）については図１０Ａ及び図１０Ｂと同様に円形（薬剤Ｔ１と相似形）の関心領域ＲＥを設定する。薬剤Ｔ１Ｆ（薬剤Ｔ１が、撮影画像ｉＴ３において－Ｘ方向の中間部に存在）については、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｆの－Ｘ側の領域（－Ｘ側の光源１３の影響を強く受ける領域）及び側面領域ＥＦを含まないように矩形の関心領域ＲＦを設定する（関心領域ＲＦは関心領域ＲＥよりも小さい）。薬剤Ｔ１Ｇ（薬剤Ｔ１が、撮影画像ｉＴ３において－Ｘ方向の端部に存在）については、薬剤Ｔ１Ｇの－Ｘ側及び側面領域ＥＧを含まないように矩形の関心領域ＲＧを設定する（関心領域ＲＧは関心領域ＲＦよりも小さい）。
　図１２Ｂは、図１０Ｂ及び図１１Ｂと同様に関心領域ＲＥ，ＲＦ，ＲＧの中心ＣＥ，ＣＦ，ＣＧの位置を示す図である。中心ＣＥは薬剤Ｔ１Ｅの中心、即ち撮影画像ｉＴ３の中心であり、中心ＣＦ，ＣＧは撮影画像ｉＴ３の中心側（＋Ｘ側）に移動させている（中心ＣＧの移動量＞中心ＣＦの移動量）。なお図１２Ｂでは刻印の図示は省略している。図１０Ａから図１１Ｂについて上述したのと同様に、処理部１０（テンプレート生成部１０Ｅ）は、このように設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定する（図８のステップＳ１５８：テンプレート生成工程）。
　このように、薬剤の位置に加えて向きに基づいて関心領域を設定し、この関心領域に対応させてテンプレートを設定することが好ましい。薬剤の向きは、処理部１０（薬剤検出部１０Ｃ）が例えばステップＳ１４０（薬剤検出工程）で検出することができる。
　図８のフローチャートで関心領域の設定（ステップＳ１５７）及びテンプレートの生成（ステップＳ１５８）が終了すると図６のフローチャートに戻り、処理部１０（照合部１０Ｆ）は、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一の薬剤であるか否かを判断する（ステップＳ１６０：照合工程）。照合の際に、関心領域とテンプレートとのうち少なくとも一方を回転させて向きを合わせてもよい。また、関心領域とテンプレートとのうち少なくとも一方を拡大または縮小することにより大きさを合わせてもよい。処理部１０（照合部１０Ｆ）は、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する（後述）。
　１つの監査対象薬剤について照合が終了したら、処理部１０（照合部１０Ｆ）は、ステップＳ１７０（照合工程）において、処方箋に記載された１つの薬剤と全ての監査対象薬剤の画像についての照合が終了したか否かを判断する。判断が肯定された場合（ステップＳ１７０でＹＥＳ）はステップＳ１８０に進み、否定された場合（ステップＳ１７０でＮＯ）はステップＳ１３０へ戻り次の監査対象薬剤の画像を取得して照合（ステップＳ１４０：照合工程）を行う。
　ステップＳ１８０では処方箋に記載された全ての薬剤（分包袋ＴＰに分包されるべき全ての薬剤）について照合が終了したか否かを判断し、処方箋に記載された他の薬剤について判断が肯定されるまでステップＳ１２０～Ｓ１７０の処理を繰り返して、判断が肯定されたら（ステップＳ１８０でＹＥＳ）、ステップＳ１９０へ進む。ステップＳ１９０では、処理部１０（照合部１０Ｆ）は薬包帯ＰＢに含まれる全ての分包袋ＴＰについての処理が完了したか否かを判断し、判断が肯定されるまでステップＳ１１０～Ｓ１８０の処理（薬剤検出工程、関心領域設定工程、テンプレート設定工程、照合工程）を繰り返す。
　全ての分包袋ＴＰについての処理が完了したら、処理部１０（照合部１０Ｆ、表示制御部１０Ｇ）は照合結果（監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報）を出力する（ステップＳ２００：照合工程）。例えば、図１３に示すように、「薬剤Ｔ１（図７，９参照）である」と判断された監査対象薬剤の画像をモニタ３２に一覧表示する。この他、「監査対象薬剤とマスタ画像が示す薬剤とが同一、類似、非類似である」旨を監査対象薬剤ごとに、及び／またはマスタ画像ごとに表示してもよいし、類似度の値を表示してもよい。また、処理部１０（照合部１０Ｆ）は、照合結果（照合結果２０Ｅ）を記憶部２０に記憶させてもよい（ステップＳ２００：照合工程）。
　以上説明したように、第１の実施形態によれば、監査対象薬剤の位置に起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できるので、照合条件による照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。
　以上で本発明の実施形態及び例に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。
１　　　調剤監査支援装置
１０　　処理部
１０Ａ　処方箋情報入力部
１０Ｂ　撮影部
１０Ｃ　薬剤検出部
１０Ｄ　関心領域設定部
１０Ｅ　テンプレート生成部
１０Ｆ　照合部
１０Ｇ　表示制御部
１０Ｈ　通信部
１２　　照明部
１３　　光源
１５Ａ　カメラ
１５Ｂ　カメラ
１６　　処方箋リーダ
２０　　記憶部
２０Ａ　処方箋情報
２０Ｂ　マスタ画像
２０Ｃ　属性情報
２０Ｄ　薬剤画像
２０Ｅ　照合結果
３０　　表示部
３２　　モニタ
４０　　操作部
５０　　搬送機構
ＣＡ　　中心
ＣＢ　　中心
ＣＣ　　中心
ＣＤ　　中心
ＣＥ　　中心
ＣＦ　　中心
ＣＧ　　中心
ＥＢ　　側面領域
ＥＣ　　側面領域
ＥＤ　　側面領域
ＥＦ　　側面領域
ＥＧ　　側面領域
Ｆ１　　刻印
Ｆ２　　刻印
Ｆ３　　刻印
Ｌ　　　光
ＰＡ　　撮影光軸
ＰＢ　　薬包帯
ＲＡ　　関心領域
ＲＢ　　関心領域
ＲＣ　　関心領域
ＲＤ　　関心領域
ＲＥ　　関心領域
ＲＦ　　関心領域
ＲＧ　　関心領域
Ｓ１００～Ｓ２００　調剤監査支援方法のステップ
Ｔ１　　薬剤
Ｔ１Ａ　薬剤
Ｔ１Ｂ　薬剤
Ｔ１Ｃ　薬剤
Ｔ１Ｄ　薬剤
Ｔ１Ｅ　薬剤
Ｔ１Ｆ　薬剤
Ｔ１Ｇ　薬剤
ＴＰ　　分包袋
ｉＭ１　マスタ画像
ｉＭ２　マスタ画像
ｉＴ１　撮影画像
ｉＴ２　撮影画像
ｉＴ３　撮影画像

Claims (10)

  1. 　薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、
    　監査対象薬剤を撮影して撮影画像を取得する撮影部と、
    　前記撮影画像における前記監査対象薬剤の位置を検出する薬剤検出部と、
    　前記監査対象薬剤の画像に関心領域を設定する関心領域設定部であって、前記関心領域の位置、形状、及び大きさを前記検出した薬剤の位置に基づいて設定する関心領域設定部と、
    　前記マスタ画像記憶部から処方箋に記載された薬剤を示す前記マスタ画像を読み出し、前記読み出したマスタ画像に基づいてテンプレートを生成するテンプレート生成部であって、前記設定した関心領域に対応させて前記テンプレートの位置、形状、及び大きさを設定するテンプレート生成部と、
    　前記テンプレートと前記関心領域とを照合して、前記監査対象薬剤と前記マスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合部と、
    　を備える調剤監査支援装置。
  2. 　前記関心領域設定部は、前記検出した前記監査対象薬剤の位置と前記撮影画像の中心との距離が遠いほど前記関心領域を小さく設定し、
    　前記テンプレート生成部は、前記設定した関心領域が小さいほど前記テンプレートを小さく生成する請求項１に記載の調剤監査支援装置。
  3. 　前記関心領域設定部は、前記検出した前記監査対象薬剤の位置と前記撮影画像の中心との距離が遠いほど、前記監査対象薬剤の画像における前記関心領域を前記撮影画像の中心の方向に大きく移動させて設定し、
    　前記テンプレート生成部は、前記関心領域の移動量が大きいほど、前記マスタ画像に対して大きく移動させた前記テンプレートを生成する請求項１または２に記載の調剤監査支援装置。
  4. 　前記関心領域設定部は前記撮影画像における前記関心領域の位置を前記監査対象薬剤に対する照明の方向に基づいて移動させ、
    　前記テンプレート生成部は前記関心領域を移動させるのに対応させて前記マスタ画像に対する前記テンプレートの位置を移動させる請求項１から３のいずれか１項に記載の調剤監査支援装置。
  5. 　前記関心領域設定部及び前記テンプレート生成部は、前記監査対象薬剤の位置と前記撮影画像の中心との距離がしきい値以下である場合は前記関心領域及び前記テンプレートをそれぞれ前記監査対象薬剤と相似形に設定し、前記監査対象薬剤の位置と前記撮影画像の中心との距離がしきい値を超える場合は前記関心領域及び前記テンプレートをそれぞれ矩形に設定する請求項１から４のいずれか１項に記載の調剤監査支援装置。
  6. 　前記照合部は、前記関心領域と前記テンプレートとのうち少なくとも一方を回転させることにより前記関心領域と前記テンプレートとの向きを合わせて前記照合を行う請求項１から５のいずれか１項に記載の調剤監査支援装置。
  7. 　前記照合部は、前記関心領域と前記テンプレートとのうち少なくとも一方を拡大または縮小することにより前記関心領域と前記テンプレートとの大きさを合わせて前記照合を行う請求項１から６のいずれか１項に記載の調剤監査支援装置。
  8. 　前記テンプレート及び前記関心領域は、前記薬剤に施された刻印を示す刻印領域を含む請求項１から７のいずれか１項に記載の調剤監査支援装置。
  9. 　前記マスタ画像は、前記撮影部により前記監査対象薬剤を前記照合の際に用いる照明の下で撮影した画像に基づく画像である請求項１から８のいずれか１項に記載の調剤監査支援装置。
  10. 　薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、を備える調剤監査支援装置による調剤監査支援方法であって、
    　前記調剤監査支援装置が前記撮影画像における前記監査対象薬剤の位置を検出する薬剤検出工程と、
    　前記調剤監査支援装置が前記監査対象薬剤の画像に関心領域を設定する関心領域設定工程であって、前記関心領域の位置、形状、及び大きさを前記検出した薬剤の位置に基づいて設定する関心領域設定工程と、
    　前記調剤監査支援装置が処方箋に記載された薬剤を示す前記マスタ画像を前記マスタ画像記憶部から読み出し、前記読み出したマスタ画像に基づいて前記関心領域に対応させてテンプレートを生成するテンプレート生成工程と、
    　前記調剤監査支援装置が、前記テンプレートと前記関心領域とを照合して、前記撮影画像が示す薬剤と前記マスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合工程と、
    　を有する調剤監査支援方法。
PCT/JP2018/016282 2017-05-30 2018-04-20 調剤監査支援装置及び調剤監査支援方法 WO2018221066A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP18809549.1A EP3633609A1 (en) 2017-05-30 2018-04-20 Dispensing inspection assistance device and dispensing inspection assistance method
CN201880029204.4A CN110603567B (zh) 2017-05-30 2018-04-20 配药监查辅助装置以及配药监查辅助方法
JP2019522022A JP6757851B2 (ja) 2017-05-30 2018-04-20 調剤監査支援装置及び調剤監査支援方法
US16/662,233 US11594322B2 (en) 2017-05-30 2019-10-24 Dispensing audit support apparatus and dispensing audit support method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-106815 2017-05-30
JP2017106815 2017-05-30

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/662,233 Continuation US11594322B2 (en) 2017-05-30 2019-10-24 Dispensing audit support apparatus and dispensing audit support method

Publications (1)

Publication Number Publication Date
WO2018221066A1 true WO2018221066A1 (ja) 2018-12-06

Family

ID=64454718

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/016282 WO2018221066A1 (ja) 2017-05-30 2018-04-20 調剤監査支援装置及び調剤監査支援方法

Country Status (5)

Country Link
US (1) US11594322B2 (ja)
EP (1) EP3633609A1 (ja)
JP (1) JP6757851B2 (ja)
CN (1) CN110603567B (ja)
WO (1) WO2018221066A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116312938B (zh) * 2023-05-16 2023-08-04 西安交通大学医学院第一附属医院 基于大数据分析的配药信息处理方法、系统及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981748A (ja) 1995-09-11 1997-03-28 Sumitomo Electric Ind Ltd 輪郭形状の識別方法および自動選別装置
JP2006189354A (ja) * 2005-01-07 2006-07-20 Ckd Corp 外観検査装置及びｐｔｐ包装機
JP2010190786A (ja) * 2009-02-19 2010-09-02 Takeda Chem Ind Ltd 固形製剤の印字検査方法及び装置
JP2014067342A (ja) 2012-09-27 2014-04-17 Fujifilm Corp 薬剤検査支援装置及び方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7046842B2 (en) * 1999-08-17 2006-05-16 National Instruments Corporation System and method for color characterization using fuzzy pixel classification with application in color matching and color match location
US6944331B2 (en) * 2001-10-26 2005-09-13 National Instruments Corporation Locating regions in a target image using color matching, luminance pattern matching and hue plane pattern matching
JP2006280916A (ja) * 2005-03-11 2006-10-19 Yuyama Manufacturing Co Ltd 薬品秤量装置
US7883669B2 (en) * 2005-04-20 2011-02-08 Fluidigm Corporation Analysis engine and database for manipulating parameters for fluidic systems on a chip
CN100484474C (zh) * 2007-07-13 2009-05-06 华中科技大学 基于乳腺x线摄片的乳腺癌计算机辅助诊断系统
KR101899269B1 (ko) * 2011-04-28 2018-10-29 가부시키가이샤 유야마 세이사쿠쇼 약제 감사 장치 및 약제 분포 장치
JP6369456B2 (ja) * 2013-02-20 2018-08-08 株式会社湯山製作所 薬剤鑑査装置、及び薬剤分包システム
EP3000458B1 (en) * 2013-05-22 2020-02-19 PHC Holdings Corporation Pill inspection device and pill inspection method
JP6100136B2 (ja) * 2013-09-30 2017-03-22 富士フイルム株式会社 薬剤認識装置及び方法
TWI660725B (zh) 2014-09-25 2019-06-01 日商湯山製作所股份有限公司 鑑定檢查支援系統、藥片分包裝置
EP3674696B1 (en) 2017-08-25 2024-04-24 FUJIFILM Toyama Chemical Co., Ltd. Medicine inspection assistance device, image processing device, image processing method, and non-transitory computer-readable recording medium
CN112834518A (zh) * 2021-01-06 2021-05-25 优刻得科技股份有限公司 颗粒缺陷检测方法、系统、设备和介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981748A (ja) 1995-09-11 1997-03-28 Sumitomo Electric Ind Ltd 輪郭形状の識別方法および自動選別装置
JP2006189354A (ja) * 2005-01-07 2006-07-20 Ckd Corp 外観検査装置及びｐｔｐ包装機
JP2010190786A (ja) * 2009-02-19 2010-09-02 Takeda Chem Ind Ltd 固形製剤の印字検査方法及び装置
JP2014067342A (ja) 2012-09-27 2014-04-17 Fujifilm Corp 薬剤検査支援装置及び方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3633609A4

Also Published As

Publication number Publication date
CN110603567B (zh) 2023-07-28
CN110603567A (zh) 2019-12-20
US11594322B2 (en) 2023-02-28
EP3633609A4 (en) 2020-04-08
US20200058392A1 (en) 2020-02-20
JP6757851B2 (ja) 2020-09-23
EP3633609A1 (en) 2020-04-08
JPWO2018221066A1 (ja) 2020-03-19

Similar Documents

Publication Publication Date Title
JP7268879B2 (ja) 重複撮像を予測した手術アイテムの追跡
JP5997120B2 (ja) 薬剤照合装置、薬剤照合システム、及び薬剤照合方法
TW201104508A (en) Stereoscopic form reader
US11404153B2 (en) Drug inspection assisting apparatus and drug inspection assisting method
US10937152B2 (en) Inspection support method and inspection support device
US20200098133A1 (en) Image Processing Method and Apparatus
EP3005295A1 (en) System and method of using imprint analysis in pill identification
US11341357B2 (en) Medicine inspection device, image processing device, image processing method, and program
JP7427684B2 (ja) 薬剤照合システム、薬剤管理方法及びプログラム
WO2019039015A1 (ja) 薬剤検査支援装置、画像処理装置、画像処理方法及びプログラム
WO2019039016A1 (ja) 薬剤検査支援装置、画像処理装置、画像処理方法及びプログラム
WO2020044933A1 (ja) 対象物照合装置及び対象物照合方法
WO2018221066A1 (ja) 調剤監査支援装置及び調剤監査支援方法
CN112614231A (zh) 信息显示方法与信息显示系统
CN113206987A (zh) 投影显示的方法、装置、终端及非暂时性存储介质
JP6047475B2 (ja) 画像認識装置、画像認識方法及び画像認識プログラム
JP5414879B1 (ja) 薬剤認識装置、薬剤認識方法及び薬剤認識プログラム
JP6454249B2 (ja) 薬剤監査装置及び方法
JP7280361B2 (ja) 薬剤識別装置、薬剤識別方法及びプログラム
JP7375049B2 (ja) 画像処理装置及び方法
JP2020184144A (ja) 物品認識システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18809549

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019522022

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2018809549

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2018809549

Country of ref document: EP

Effective date: 20200102