KR20230159933A - Surgical tool history management system using image processing technique - Google Patents
Surgical tool history management system using image processing technique Download PDFInfo
- Publication number
- KR20230159933A KR20230159933A KR1020220059331A KR20220059331A KR20230159933A KR 20230159933 A KR20230159933 A KR 20230159933A KR 1020220059331 A KR1020220059331 A KR 1020220059331A KR 20220059331 A KR20220059331 A KR 20220059331A KR 20230159933 A KR20230159933 A KR 20230159933A
- Authority
- KR
- South Korea
- Prior art keywords
- surgical tool
- information
- surgical
- identification information
- name
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims abstract description 58
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000001356 surgical procedure Methods 0.000 claims abstract description 37
- 238000007726 management method Methods 0.000 claims description 34
- 230000010365 information processing Effects 0.000 claims description 4
- 238000012217 deletion Methods 0.000 claims description 2
- 230000037430 deletion Effects 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000001154 acute effect Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000399 orthopedic effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/40—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/90—Identification means for patients or instruments, e.g. tags
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Business, Economics & Management (AREA)
- Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Pathology (AREA)
- Surgery (AREA)
- Life Sciences & Earth Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Radiology & Medical Imaging (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Databases & Information Systems (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
본 발명은 트레이에 올려진 복수의 수술도구 각각에 새겨진 식별정보를 촬영하여 생성된 이미지 정보 내의 식별정보를 정확하게 인식하도록 구현됨으로써, 수술도구가 보관소에 입고되고 출고되고 수술에 사용된 모든 이력을 자동으로 관리할 수 있고, 나아가 수술에 사용된 수술도구에 대한 이미지 정보를 EMR 시스템에 전달하도록 구현됨으로써, 수술에 사용된 수술도구에 대한 증빙자료로 활용할 수 있어 고가의 수술도구에 대한 수가반영의 투명성을 확보할 수 있도록 한 영상처리 기법을 활용한 수술도구 이력관리시스템에 관한 것이다.The present invention is implemented to accurately recognize identification information in image information generated by photographing the identification information engraved on each of a plurality of surgical tools placed on a tray, so that all history of surgical tools being received and shipped from the storage and used in surgery is automatically recorded. It can be managed and furthermore, by being implemented to transmit image information about the surgical tools used in surgery to the EMR system, it can be used as evidence for the surgical tools used in surgery, thereby providing transparency in the reflection of fees for expensive surgical tools. This is about a surgical tool history management system that utilizes image processing techniques to secure .
Description
본 발명은 트레이에 올려진 복수의 수술도구 각각에 새겨진 식별정보를 촬영하여 생성된 이미지에서 수술도구 식별정보를 정확하게 인식하도록 구현됨으로써, 수술도구가 보관소에 입고되고 출고되고 수술에 사용된 모든 이력을 자동으로 관리할 수 있고, 나아가 수술에 사용된 수술도구에 대한 이미지 정보를 EMR 시스템에 전달하도록 구현됨으로써, 수술에 사용된 수술도구에 대한 증빙자료로 활용할 수 있어 고가의 수술도구에 대한 수가반영의 투명성을 확보할 수 있도록 한 영상처리 기법을 활용한 수술도구 이력관리시스템에 관한 것이다.The present invention is implemented to accurately recognize surgical tool identification information in an image generated by photographing the identification information engraved on each of a plurality of surgical tools placed on a tray, so that all records of surgical tools being received and shipped from the storage and used in surgery are recorded. It can be managed automatically, and furthermore, it is implemented to transmit image information about the surgical tools used in surgery to the EMR system, so it can be used as evidence for the surgical tools used in surgery, thereby reducing the cost of expensive surgical tools. This is about a surgical tool history management system that utilizes image processing techniques to ensure transparency.
수술은 수술도구를 사용하여 인체 조직을 절개, 절단 및 봉합하는 행위이다. 통상적으로 의료 시스템에서는 의사가 수술 전에 수술에 사용되는 도구들을 수기로 처방하고 있으며, 수기로 처방된 수술도구들은 수술 전에 간호사에 의해 준비된다. 그러나 수술도구가 수기로 처방되는 의료 시스템에서는 의료인들이 수술도구를 준비하는 과정에서 실수나 누락의 문제가 발생하기 쉬운 문제가 있다. 수술도구 세트를 잘못 준비하게 되면 수술이 지연되거나 수술 과정에서 수술도구의 누락에 의한 다양한 문제가 발생하는 경우가 있다.Surgery is the act of cutting, cutting, and suturing human tissue using surgical tools. Typically, in the medical system, a doctor manually prescribes the tools used in surgery before surgery, and the manually prescribed surgical tools are prepared by a nurse before surgery. However, in the medical system where surgical tools are prescribed by hand, there is a problem that errors or omissions easily occur in the process of medical professionals preparing surgical tools. If the surgical tool set is incorrectly prepared, the surgery may be delayed or various problems may occur due to missing surgical tools during the surgical process.
이에 현재 종합병원 및 대학병원을 중심으로 기존 종이 문서에 기록되던 의무기록을 전산 매체에 저장하여 통합적으로 관리하기 위한 EMR 시스템이 구축되고 있으며, 수술이 완료된 후 수술에 사용된 기구를 컴퓨터 입력을 통해 EMR 시스템에 기록하고 있다. 이와 관련하여 대한민국 공개특허공보 제10-2014-0127534호에는 전자의무기록 시스템 기반의 수술 정보 관리 장치 및 그 관리 방법이 게시되어 있으며, 공개특허공보 제10-2014-0127534호는 등록된 수술 일정 정보를 검색 조건에 따라 조회된 결과를 제공함으로써, 전자의무기록 시스템 상에서 수술 일정을 포함한 수술 정보를 조회하거나 신규 수술 일정을 등록하는 작업이 간편해질 수 있다.Accordingly, an EMR system is currently being built at general hospitals and university hospitals to comprehensively manage medical records previously recorded in paper documents by storing them in computerized media. After the surgery is completed, the instruments used in the surgery are entered through a computer. It is being recorded in the EMR system. In relation to this, Republic of Korea Patent Publication No. 10-2014-0127534 discloses a surgical information management device and management method based on an electronic medical record system, and Korean Patent Publication No. 10-2014-0127534 discloses registered surgery schedule information. By providing search results according to search conditions, it can be easy to search for surgery information, including the surgery schedule, or register a new surgery schedule on the electronic medical record system.
공개특허공보 제10-2014-0127534호를 포함하는 종래의 EMR 시스템에는 의무기록을 기록 하는 창에 수술도구를 선택하는 선택창 또는 체크박스가 형성되어 있으며, 의료인은 수술 종료 후 선택창 또는 체크박스에서 수술에 사용된 기구를 컴퓨터의 마우스 또는 키보드를 사용하여 선택함으로써 EMR 시스템에 저장하게 된다. 그러나 수술 및 시술 종류에 따라 수술에 사용되는 기구의 종류가 광범위함에 따라, 선택창 또는 체크박스에서 수술에 사용된 기구를 선택하는 과정에 긴 시간이 소요되며, 오기나 누락이 발생하기 쉬운 문제가 있다.In the conventional EMR system, including Patent Publication No. 10-2014-0127534, a selection window or check box for selecting surgical tools is formed in the window for recording medical records, and medical personnel use the selection window or check box after completing the surgery. The instruments used in the surgery are saved in the EMR system by selecting them using the computer's mouse or keyboard. However, as there are a wide range of instruments used in surgery depending on the type of surgery and procedure, the process of selecting the instruments used in surgery from the selection window or check box takes a long time and is prone to errors or omissions. there is.
특히 외과적인 수술에는 수술도구의 메인 세트와 병변의 위치에 따라 추가되는 서로 다른 수술도구 세트가 모두 준비되어야 하는데, 외과적인 수술 후 실제 수술에 사용된 수술도구는 1차적으로 수기로 정리하여 기록한 후 2차적으로 EMR 시스템에 저장하게 되며, 외과적인 수술은 사용되는 수술도구의 종류가 다양하여 오기나 누락의 문제가 더욱 크게 발생하게 된다. 현재 종합병원 및 대학병원을 중심으로 구축된 EMR 시스템은 상술한 바와 같이 수술도구의 오기나 누락 문제를 안고 있으며, 수술도구의 오기나 누락 문제가 발생하는 경우 고가의 수술도구가 사용되더라도 수가 반영이 제대로 반영되지 않아, 종합병원과 대학병원은 이에 따른 손실을 떠안을 수밖에 없는 실정이다.In particular, for surgical operations, both the main set of surgical tools and a different set of additional surgical tools depending on the location of the lesion must be prepared. After the surgical operation, the surgical tools used in the actual surgery are first organized and recorded by hand. It is stored secondarily in the EMR system, and the types of surgical tools used in surgical operations are diverse, making errors or omissions more problematic. Currently, the EMR system built around general hospitals and university hospitals has the problem of incorrect or missing surgical tools, as described above, and when the problem of incorrect or missing surgical tools occurs, the number is not reflected even if expensive surgical tools are used. Because it is not properly reflected, general hospitals and university hospitals have no choice but to bear the resulting losses.
한편, 등록특허공보 제10-1703779호는 전자태그를 통해 수술도구의 정보를 자동으로 인식하여 EMR 시스템으로 전달하는 인식기가 수술실에 구비됨에 따라, 의사가 수술실에서 수술 전에 준비된 수술도구를 일일이 확인하지 않더라도 화면을 통해 준비된 수술도구의 리스트를 한눈에 확인할 수 있어 수술 지연 및 의료 사고가 예방되며, 수술실에서 사용된 수술도구가 실시간으로 EMR 시스템에 정확하게 입력되어 사용된 기구에 의한 의료 수가 반영에 실수나 누락을 방지하는 수술도구 자동 인식 기술을 제공하는 것이다.Meanwhile, Registered Patent Publication No. 10-1703779 states that since the operating room is equipped with a recognition device that automatically recognizes the information of surgical tools through electronic tags and transmits it to the EMR system, the doctor does not have to manually check the surgical tools prepared before surgery in the operating room. Delays in surgery and medical accidents can be prevented by being able to check the list of prepared surgical tools at a glance on the screen. Surgical tools used in the operating room are accurately entered into the EMR system in real time, preventing mistakes or errors in reflecting the number of medical treatments due to the instruments used. It provides automatic recognition technology for surgical tools to prevent omission.
상술한 선행문헌에 따르면, 수술실 내로 반입되는 수술도구 각각에 부여된 RFID 전자태그를 의료진이 일일이 스캔해야 하기 때문에 번거롭고, 응급실과 같이 급박한 상황이 발생하는 경우에는 수술 전에 수술도구에 부여된 전자태그를 일일이 스캔하는 것은 거의 불가능한 문제점이 있다.According to the above-mentioned prior literature, it is cumbersome because the medical staff must individually scan the RFID electronic tags assigned to each surgical tool brought into the operating room, and in urgent situations such as an emergency room, the electronic tags assigned to the surgical tools before surgery are used. There is a problem that it is almost impossible to scan them one by one.
본 발명은 이러한 문제점을 해결하기 위해서 제안된 것으로 트레이에 올려진 복수의 수술도구 각각에 새겨진 식별정보를 정확하게 인식하여 복수의 수술도구가 보관소에 입고되고 출고되고 수술에 사용된 모든 이력을 자동으로 관리할 수 있도록 한 영상처리 기법을 활용한 수술도구 이력관리시스템을 제공하는 것이다.The present invention was proposed to solve this problem, and it accurately recognizes the identification information engraved on each of the plurality of surgical tools placed on the tray, and automatically manages all the history of the plurality of surgical tools being received and shipped from the storage and used in surgery. The goal is to provide a surgical tool history management system that utilizes image processing techniques to enable surgery.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템은, 병원 부서 단말 및 수술실 단말과 네트워크를 통해 연결되며, 카메라와 사용자 조작부와 표시부를 포함하는 관리자 단말에 탑재되는 영상처리 기법을 활용한 수술도구 이력관리시스템으로,The surgical tool history management system using the image processing technique according to the present invention is connected to the hospital department terminal and the operating room terminal through a network, and utilizes the image processing technique mounted on the administrator terminal including the camera, user operation unit, and display unit. With a surgical tool history management system,
카메라에서 촬영된 복수의 수술도구가 올려진 트레이 전체 영역 이미지에서 수술도구 식별정보만으로 구성된 이미지를 추출하고, 추출된 수술도구 식별정보만으로 구성된 이미지에서 각 수술도구의 식별정보를 판별하고, 각 수술도구의 식별정보에 해당하는 수술도구의 명칭을 수술도구DB로부터 검출한 후 판별된 수술도구 식별정보의 개수를 이용하여 트레이에 올려진 수술도구의 수량을 산출하는 수술도구인식처리부와;An image consisting only of surgical tool identification information is extracted from the image of the entire area of the tray on which multiple surgical tools are placed, captured by a camera. The identification information of each surgical tool is determined from the image consisting of only the extracted surgical tool identification information, and each surgical tool is identified. A surgical tool recognition processor that detects the name of the surgical tool corresponding to the identification information from the surgical tool DB and then calculates the quantity of the surgical tool placed on the tray using the number of determined surgical tool identification information;
상기 수술도구인식처리부로부터 병원 창고에 입고되는 수술도구의 식별정보와 명칭과 수량이 입력되면 상기 수술도구의 식별정보와 명칭과 수량과 입력 날짜와 시간을 포함하는 수술도구 입고정보를 생성하여 이를 수술도구DB에 저장하는 입고처리부와;When the identification information, name, and quantity of surgical tools to be delivered to the hospital warehouse are input from the surgical tool recognition processing unit, surgical tool stocking information including the identification information, name, quantity, and input date and time of the surgical tools is generated and used for surgery. A warehousing processing unit stored in the tool DB;
병원 부서 단말기 또는 수술실 단말기로부터 수술도구의 명칭과 수량과 수술도구를 요청한 의료진정보를 포함하는 수술도구 요청정보를 입력받아 수술도구DB에 저장하고, 상기 수술도구인식처리부로부터 출고를 위해 트레이에 올려진 수술도구의 명칭과 수량이 입력되면 상기 수술도구 요청정보와 비교한 후 그 결과 출고를 위한 수술도구의 명칭과 수량이 상기 수술도구 요청정보와 일치하면 수술도구의 명칭과 수량과 출고 날짜와 시간과 수술도구를 요청한 의료진정보를 포함하는 수술도구 출고정보를 생성하여 이를 수술도구DB에 저장하는 출고처리부와;Surgical tool request information, including the name and quantity of the surgical tool and information on the medical staff who requested the surgical tool, is input from the hospital department terminal or operating room terminal, stored in the surgical tool DB, and placed on a tray for shipment from the surgical tool recognition processing unit. When the name and quantity of the surgical tool are entered, they are compared with the surgical tool request information, and if the name and quantity of the surgical tool for shipment match the surgical tool request information, the name and quantity of the surgical tool and the date and time of shipment are provided. a delivery processing unit that generates surgical tool delivery information including medical staff information requesting surgical tools and stores it in a surgical tool DB;
수술도구DB에 저장된 수술도구 입고정보와 수술도구 출고정보를 이용하여 현재 남아있는 수술도구의 종류와 수량을 계산하여 재고정보를 생성한 후 이를 수술도구DB에 저장하는 재고정보처리부를 포함한다.It includes an inventory information processing unit that calculates the type and quantity of surgical tools currently remaining using the surgical tool receipt information and surgical tool shipment information stored in the surgical tool DB, generates inventory information, and then stores this in the surgical tool DB.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템의 수술도구인식처리부는, 수술도구의 식별정보만으로 구성된 이미지에서 식별정보에 포함된 문자 또는 숫자를 각각 객체로 분류한 후 각 객체에 대한 캐릭터 박스 영역(Character Boxes)을 산출하고,The surgical tool recognition processing unit of the surgical tool history management system utilizing the image processing technique according to the present invention classifies each letter or number included in the identification information into an object in an image consisting of only the identification information of the surgical tool, and then classifies each object as an object. Calculate Character Boxes,
서로 이웃하는 캐릭터 박스 영역(Character Boxes)을 이용하여 유연 박스 영역(Affinity Boxes)을 산출한 후, 서로 이웃하는 캐릭터 박스 영역과 유연 박스 영역을 연결하는 관계점수를 산출하고,After calculating affinity boxes using neighboring character box areas, a relationship score is calculated connecting neighboring character box areas and flexible box areas,
상기 캐릭터 박스 영역과 유연 박스 영역의 관계 점수가 미리 설정된 범위를 벗어나는 캐릭터 박스 영역을 삭제하고, 삭제 후 남은 캐릭터 박스 영역들의 식별정보를 추출하여 남은 캐릭터 박스 영역들의 식별정보와 일치하는 수술도구의 식별정보를 수술정보DB에서 검출하는 것을 특징으로 한다.The character box area whose relationship score between the character box area and the flexible box area is outside a preset range is deleted, and the identification information of the remaining character box areas after deletion is extracted to identify a surgical tool that matches the identification information of the remaining character box areas. It is characterized by detecting information from the surgery information DB.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템은, 수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 수술도구 명칭과 수량과 출고 날짜 및 시간을 포함하는 수술도구 출고정보를 라벨스티커 출력형식으로 변환하여 프린터로 출력하는 인쇄처리부를 더 포함하는 것을 특징으로 한다.The surgical tool history management system utilizing the image processing technique according to the present invention provides surgical tool shipment information, including hospital department information or operating room information that requested surgical tools, surgical tool name and quantity, and shipping date and time, in a label sticker output format. It is characterized in that it further includes a print processing unit that converts it into a printer and outputs it to a printer.
본 발명에 따르면, 트레이에 올려진 복수의 수술도구 각각에 새겨진 식별정보를 촬영하여 생성된 이미지에서 수술도구 식별정보를 정확하게 인식하도록 구현됨으로써, 수술도구가 보관소에 입고되고 출고되고 수술에 사용된 모든 이력을 자동으로 관리할 수 있다.According to the present invention, the surgical tool identification information is accurately recognized in the image generated by photographing the identification information engraved on each of the plurality of surgical tools placed on the tray, so that the surgical tools are received and shipped from the storage and all of the surgical tools used in the surgery are implemented. History can be managed automatically.
또한, 본 발명에 따르면, 수술에 사용된 수술도구에 대한 이미지 정보를 EMR 시스템에 전달하도록 구현됨으로써, 수술에 사용된 수술도구에 대한 증빙자료로 활용할 수 있어 고가의 수술도구에 대한 수가반영의 투명성을 확보할 수 있다.In addition, according to the present invention, by delivering image information about the surgical tools used in surgery to the EMR system, it can be used as evidence for the surgical tools used in surgery, thereby providing transparency in the reflection of fees for expensive surgical tools. can be secured.
도 1 은 본 발명에 따른 전체 시스템을 설명하기 위한 예시도이다.
도 2 는 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템의 구성을 설명하기 위한 예시도이다.
도 3 은 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법의 흐름도이다.
도 4 는 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템에서 수술도구를 촬영한 이미지를 분석하여 수술도구를 판별하는 과정을 설명하기 위한 예시도이다.Figure 1 is an exemplary diagram for explaining the entire system according to the present invention.
Figure 2 is an example diagram for explaining the configuration of a surgical tool history management system using the image processing technique according to the present invention.
Figure 3 is a flowchart of a surgical tool history management method using the image processing technique according to the present invention.
Figure 4 is an example diagram for explaining the process of identifying a surgical tool by analyzing images taken of the surgical tool in a surgical tool history management system using the image processing technique according to the present invention.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 도면부호는 동일 구성 요소를 지칭한다.The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail below along with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below and may be implemented in various different forms. The present embodiments are merely provided to ensure that the disclosure of the present invention is complete and to provide common knowledge in the technical field to which the present invention pertains. It is provided to fully inform those who have the scope of the invention, and the present invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout the specification.
본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로서, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 본 명세서에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in this specification are merely used to describe specific embodiments and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this specification, terms such as “comprise” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in this specification, but are not intended to indicate the presence of one or more other features. It should be understood that this does not exclude in advance the possibility of the existence or addition of elements, numbers, steps, operations, components, parts, or combinations thereof.
도 1 은 본 발명에 따른 전체 시스템을 설명하기 위한 예시도이고, 도 2 는 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템의 구성을 설명하기 위한 예시도이다.Figure 1 is an exemplary diagram for explaining the entire system according to the present invention, and Figure 2 is an exemplary diagram for explaining the configuration of a surgical tool history management system using the image processing technique according to the present invention.
본 발명에 따른 전체 시스템은 도 1에 도시한 바와 같이, 부서 단말(110)과 수술실 단말(120)과 네트워크를 통해 연결되는 관리자 단말(130)과 수술도구 DB(140)를 포함하여 구현될 수 있다.As shown in FIG. 1, the entire system according to the present invention can be implemented including a manager terminal 130 and a surgical tool DB 140 connected to the department terminal 110 and the operating room terminal 120 through a network. there is.
부서 단말(110)은 병원 의료진이 사용하는 단말로서, 병원 내 부서 예를 들어, 내과, 외과, 이비인후과, 정형외과 등에서 진료 기록을 저장하기 위해 사용하는 단말이다. 부서 단말(110)은 태블릿 PC, 노트북, 데스크탑 PC로 구현될 수 있다. 부서 단말(110)은 EMR 시스템, 즉 전자의무기록 시스템을 탑재한다. 부서 단말(110)은 수술도구의 종류와 수량을 포함하는 수술도구 요청정보를 생성해서 이를 관리자 단말(130)로 전송할 수 있다.The department terminal 110 is a terminal used by hospital medical staff to store medical records in departments within the hospital, such as internal medicine, surgery, otolaryngology, orthopedics. The department terminal 110 may be implemented as a tablet PC, laptop, or desktop PC. The department terminal 110 is equipped with an EMR system, that is, an electronic medical record system. The department terminal 110 may generate surgical tool request information including the type and quantity of surgical tools and transmit it to the manager terminal 130.
수술실 단말(120)은 병원 의료진이 수수실에서 사용하는 단말로서, 예컨대 태블릿 PC, 노트북, 데스크탑 PC로 구현될 수 있다. 수술실 단말(120)은 EMR 시스템, 즉 전자의무기록 시스템을 탑재한다. 수술실 단말(120)은 수술도구의 종류와 수량을 포함하는 수술도구 요청정보를 생성해서 이를 관리자 단말(130)로 전송할 수 있다.The operating room terminal 120 is a terminal used by hospital medical staff in the operating room, and can be implemented as, for example, a tablet PC, laptop, or desktop PC. The operating room terminal 120 is equipped with an EMR system, that is, an electronic medical record system. The operating room terminal 120 may generate surgical tool request information including the type and quantity of surgical tools and transmit it to the manager terminal 130.
관리자 단말(130)은 병원 내에 입고 및 출고되는 수술도구를 포함하는 의료물품을 관리하는 부서에서 사용하는 단말로서, 예컨대 태블릿 PC, 노트북, 데스크탑 PC로 구현될 수 있다. 관리자 단말(130)은 특히 수술도구의 입고, 출고 및 수술실에서 사용이력을 관리한다. 관리자 단말(130)은 수술도구 이력관리시스템(200)을 포함하여 구현된다. The administrator terminal 130 is a terminal used in a department that manages medical supplies, including surgical tools, received and shipped within the hospital, and may be implemented as, for example, a tablet PC, laptop, or desktop PC. The administrator terminal 130 specifically manages the receipt, release, and usage history of surgical tools in the operating room. The administrator terminal 130 is implemented including a surgical tool history management system 200.
수술도구 DB(140)는 수술도구의 이미지와 식별정보와 수량과 입고 날짜와 시간을 포함하는 입고정보와 수술도구 요청정보에 따른 수술도구의 이미지와 식별정보와 수술도구 명칭과 수량과 수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 출고날짜를 포함하는 수술도구 출고정보와 수술도구의 재고량과 수술에 사용된 수술도구의 이미지와 식별정보와 수술을 한 의료진 정보를 포함하는 수술도구 사용이력정보를 저장한다. 수술도구 DB(140)는 네트워크 서버 또는 데이터센터 내의 서버로 구현될 수 있다.The surgical tool DB 140 stores the image and identification information of the surgical tool, the name and quantity of the surgical tool, and the image and identification information of the surgical tool, the name and quantity of the surgical tool, and storage information including the quantity and receipt date and time of the surgical tool. Stores requested hospital department information or operating room information, surgical tool shipment information including shipping date, inventory of surgical tools, images and identification information of surgical tools used in surgery, and surgical tool usage history information including information on the medical staff who performed the surgery. do. The surgical tool DB 140 may be implemented as a network server or a server within a data center.
이하, 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템(200)을 설명하기로 한다.Hereinafter, the surgical tool history management system 200 utilizing the image processing technique according to the present invention will be described.
도 2를 참조하면 본 발명에 따른 수술도구 이력관리시스템(200)은 크게 통신부(210)와 사용자 조작부(220)와 카메라(230)와 표시부(240)와 프린터(250)와 제어부(260)를 포함하여 구현될 수 있다.Referring to Figure 2, the surgical tool history management system 200 according to the present invention largely includes a communication unit 210, a user operation unit 220, a camera 230, a display unit 240, a printer 250, and a control unit 260. It can be implemented including:
통신부(210)는 회선망(CSN: Circuit Switched Network)과 패킷망(PSN: Packet Switched Network)을 통해 데이터 패킷을 송신하거나 수신할 수 있는 단말 또는 서버로서, CDMA, TDMA, WCDMA, GSM, LTE 등의 통신모뎀, 와이파이(Wi-Fi), 불루투스(Bluetooth) 등의 근거리 무선통신과 유선 인터넷이 가능한 형태의 통신모듈로 구현될 수 있다.The communication unit 210 is a terminal or server that can transmit or receive data packets through a circuit switched network (CSN: Circuit Switched Network) and a packet network (PSN: Packet Switched Network), and supports communications such as CDMA, TDMA, WCDMA, GSM, LTE, etc. It can be implemented as a communication module capable of short-distance wireless communication such as modem, Wi-Fi, and Bluetooth, as well as wired Internet.
사용자 조작부(220)는 사용자 조작명령에 따라 입력 데이터를 발생시킨다. 사용자 조작부(220)는 음성 인식, 터치, 마우스, 키보드 등과 같은 주변장치가 될 수 있다. The user operation unit 220 generates input data according to user operation commands. The user operation unit 220 may be a peripheral device such as voice recognition, touch, mouse, keyboard, etc.
카메라(230)는 렌즈모듈과 이미지신호를 처리하는 이미지센서를 포함하여 구현될 수 있다. 카메라(230)는 수술도구가 올려진 트레이 전체 영역을 촬영할 수 있는 광각을 갖는 렌즈를 사용한다.The camera 230 may be implemented including a lens module and an image sensor that processes image signals. The camera 230 uses a lens with a wide angle that can capture the entire area of the tray on which the surgical tool is placed.
표시부(240)는 LCD, LED와 같은 디스플레이로 구현된다. 표시부(240)는 통상적인 컴퓨터 모니터뿐만 아니라 TV 모니터 또는 스마트보드와 같은 표시장치로 구현될 수 있다.The display unit 240 is implemented as a display such as LCD or LED. The display unit 240 may be implemented as a display device such as a TV monitor or smart board as well as a typical computer monitor.
프린터(250)는 라벨스티커를 용지로 사용하며, 제어부(260)에서 생성된 출력정보 예를 들어, 수술도구 명칭과 출고날짜와 수량과 배송지를 포함하는 수술도구 출고정보를 라벨스티커에 인쇄한다.The printer 250 uses a label sticker as paper, and prints the output information generated by the control unit 260, for example, surgical tool shipment information, including the surgical tool name, shipping date, quantity, and delivery address, on the label sticker.
제어부(260)는 물리적인 하드웨어 조합 예컨대, 실행프로그램이 저장되는 롬과 데이터가 저장되는 램과 직렬통신과 병렬통신과 I2C 신호를 처리하는 인터페이스모듈과 이미지 처리프로세서를 일체로 포함하여 구현될 수 있다. 제어부(260)는 도 2에 도시한 바와 같이, 크게 수술도구인식처리부(261)와 입고처리부(262)와 출고처리부(263)와 재고정보처리부(264)와 인쇄처리부(265)를 포함하여 구현될 수 있다.The control unit 260 may be implemented by including a combination of physical hardware, such as a ROM in which an executable program is stored, a RAM in which data is stored, an interface module that processes serial communication, parallel communication, and I2C signals, and an image processing processor. . As shown in FIG. 2, the control unit 260 is largely implemented to include a surgical tool recognition processing unit 261, a stocking processing unit 262, a shipping processing unit 263, an inventory information processing unit 264, and a printing processing unit 265. It can be.
수술도구인식처리부(261)는 사용자 조작부(220)로부터 입력되는 조작신호에 따라 구동되는 카메라(230)로부터, 복수의 수술도구가 올려진 트레이 전체 영역을 촬영하여 획득된 이미지를 수신하여, 이미지 내에 존재하는 복수의 수술도구의 식별정보만으로 구성된 이미지를 추출한다. 수술도구인식처리부(261)는 복수의 수술도구의 식별정보만으로 구성된 이미지에서 식별정보를 구성하는 숫자 또는 문자들을 객체로 인식한 후, 객체들 각각의 캐릭터 박스 영역과 유연 박스 영역을 산출하고, 캐릭터 박스 영역과 유연 박스 영역 간의 관계를 인식하여 하나의 세트에 해당하는 캐릭터 박스 영역들을 검출한다. 수술도구인식처리부(261)는 검출된 캐릭터 박스들 각각의 식별정보를 이용해서 수술도구를 판별한다.The surgical tool recognition processing unit 261 receives an image obtained by photographing the entire area of the tray on which a plurality of surgical tools are placed from the camera 230 driven according to an operation signal input from the user operation unit 220, and receives the image within the image. An image consisting of only the identification information of multiple existing surgical tools is extracted. The surgical tool recognition processing unit 261 recognizes the numbers or letters constituting the identification information as objects in an image consisting of only the identification information of a plurality of surgical tools, then calculates the character box area and flexible box area for each of the objects, and calculates the character box area and flexible box area. By recognizing the relationship between the box area and the flexible box area, character box areas corresponding to one set are detected. The surgical tool recognition processing unit 261 determines the surgical tool using the identification information of each detected character box.
입고처리부(262)는 의료진이 구매요청한 수술도구들의 입고정보를 생성하여 수술도구DB에 저장한다. 수술도구 입고정보는 일례로, 수술도구 명칭과 수술도구 식별정보와 입고 날짜 및 시간을 포함할 수 있다. 입고처리부(262)는 수술도구를 판매하는 판매처 단말기로부터 수술도구의 명칭과 식별정보를 포함하는 수술도구 리스트를 입력받아 수술도구DB에 저장할 수 있다.The warehousing processing unit 262 generates warehousing information for surgical tools requested by medical staff to purchase and stores it in the surgical tool DB. For example, surgical tool warehousing information may include the surgical tool name, surgical tool identification information, and warehousing date and time. The warehousing processing unit 262 may receive a surgical tool list including the name and identification information of the surgical tool from a sales terminal that sells the surgical tool and store it in the surgical tool DB.
출고처리부(263)는 병원 부서 단말기 또는 수술실 단말기로부터 수술도구의 명칭과 수량을 포함하는 수술도구 요청정보를 입력받아 저장한다. 관리자는 수술도구 요청정보를 확인한 후, 해당 수술도구를 수량에 맞게 준비한 후 트레이에 올려 놓고 카메라(230)를 구동하여 복수의 수술도구가 올려진 트레이 전체 영역을 촬영한다. 출고처리부(263)는 수술도구인식처리부(261)로부터 입력되는 복수의 수술도구 식별정보에 대응하는 수술도구 명칭을 수술도구DB에서 검출하고, 사용자 조작부(220)로부터 수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 수술도구 명칭과 수량과 출고날짜를 포함하는 수술도구 출고정보를 입력받아 수술도구DB에 저장한다.The delivery processing unit 263 receives surgical tool request information including the name and quantity of the surgical tool from a hospital department terminal or an operating room terminal and stores it. After checking the surgical tool request information, the manager prepares the surgical tools according to the quantity, places them on the tray, and operates the camera 230 to photograph the entire area of the tray on which the plurality of surgical tools are placed. The shipping processing unit 263 detects the surgical tool name corresponding to the plurality of surgical tool identification information input from the surgical tool recognition processing unit 261 from the surgical tool DB, and receives hospital department information or hospital department information that requested the surgical tool from the user operation unit 220. Surgical tool delivery information, including operating room information, surgical tool name, quantity, and delivery date, is entered and stored in the surgical tool DB.
재고정보처리부(264)는 수술도구DB에 저장된 수술도구 입고정보와 수술도구 출고정보를 이용하여 현재 남아있는 수술도구의 종류와 수량을 계산하여 재고정보를 생성한 후 이를 수술도구DB에 저장한다.The inventory information processing unit 264 uses the surgical tool stocking information and surgical tool shipping information stored in the surgical tool DB to calculate the type and quantity of the currently remaining surgical tools, generates inventory information, and stores it in the surgical tool DB.
인쇄처리부(265)는 수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 수술도구 명칭과 수량과 출고 날짜 및 시간을 포함하는 수술도구 출고정보를 사용자 조작부(220)로부터 인쇄명령이 입력되면 프린터(250)로 출력한다.When a print command is input from the user operation unit 220, the print processing unit 265 displays surgical tool delivery information including hospital department information or operating room information that requested surgical tools, surgical tool name and quantity, and delivery date and time. Output as
도 3 은 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법의 흐름도이고, 도 4 는 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리시스템에서 수술도구를 촬영한 이미지를 분석하여 수술도구를 판별하는 과정을 설명하기 위한 예시도이다.Figure 3 is a flowchart of a surgical tool history management method using the image processing technique according to the present invention, and Figure 4 is a flow chart of a surgical tool history management system using the image processing technique according to the present invention, by analyzing images taken of surgical tools. This is an example diagram to explain the process of identifying surgical tools.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 병원 부서 단말기 또는 수술실 단말기로부터 수술도구 요청정보를 입력받아 저장한다(S311). 수술도구 요청정보는 수술도구의 명칭과 수량과 요청한 부서의 의료진 정보와 요청날짜를 포함할 수 있다. 수술도구 요청정보에는 응급 또는 일반과 같이 수술도구가 얼마나 빨리 필요한지에 대한 긴급정도를 나타내는 정보를 포함할 수 있다. 관리자는 수술도구 요청정보를 확인한 후, 해당 수술도구를 수량에 맞게 준비하여 트레이에 올려 놓는다.The surgical tool history management method using the image processing technique according to the present invention receives surgical tool request information from a hospital department terminal or an operating room terminal and stores it (S311). Surgical tool request information may include the name and quantity of the surgical tool, medical staff information of the requesting department, and the request date. Surgical tool request information may include information indicating the degree of urgency of how quickly the surgical tool is needed, such as emergency or general. After checking the surgical tool request information, the manager prepares the surgical tools according to the quantity and places them on the tray.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 관리자 조작에 따라 구동되는 카메라로부터, 복수의 수술도구가 올려진 트레이 전체 영역 이미지를 획득한 후(S312), 획득된 이미지 내에 존재하는 복수의 수술도구, 예를 들어, 핀셋, 가위, 겸자, 메스핸들, 유봉침, 의료용 칼, 설압자에 새겨진 식별정보만으로 구성된 이미지를 추출한다.The surgical tool history management method using the image processing technique according to the present invention acquires an image of the entire area of the tray on which a plurality of surgical tools are placed from a camera driven according to the administrator's operation (S312), and then exists in the acquired image. An image consisting only of identification information engraved on a plurality of surgical tools, such as tweezers, scissors, forceps, scalpel handle, pestle needle, medical knife, and tongue depressor, is extracted.
본 명세서에서 수술도구의 식별정보는 문자 또는 일련의 숫자들로 구현되며, 수술도구의 특정 위치에 새겨져 수술도구를 판별하기 위해 사용되는 정보이다. 수술도구의 식별정보는 특정 위치뿐 아니라 특정한 모양 예컨대 반원형, 타원형 등과 같은 독특한 형태로 구현될 수 있다.In this specification, the identification information of a surgical tool is implemented as letters or a series of numbers, and is information that is engraved at a specific location on the surgical tool and used to identify the surgical tool. The identification information of the surgical tool may be implemented not only in a specific location but also in a unique shape such as a semicircle, oval, etc.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 복수의 수술도구의 식별정보만으로 구성된 이미지에서 식별정보에 포함된 문자 또는 일련의 숫자들 각각을 객체로 인식한 후, 수술도구 식별정보를 판별한다(S313). 이하 도 4를 참조하여 수술도구 식별정보를 판별하는 단계 S313을 설명하기로 한다.The surgical tool history management method using the image processing technique according to the present invention recognizes each letter or series of numbers included in the identification information as an object in an image consisting of only the identification information of a plurality of surgical tools, and then identifies the surgical tool. Determine information (S313). Hereinafter, step S313 of determining surgical tool identification information will be described with reference to FIG. 4.
① 캐릭터 박스 영역(Character Boxes) 산출① Calculate Character Boxes
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 수술도구의 식별정보가 peace인 경우, p, e, a, c, e를 객체로 인식한다. 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, p, e, a, c, e 객체들 각각의 캐릭터 박스 영역(Character Boxes)을 산출한다.The surgical tool history management method using the image processing technique according to the present invention recognizes p, e, a, c, and e as objects when the identification information of the surgical tool is peace. The surgical tool history management method using the image processing technique according to the present invention calculates character box areas (Character Boxes) for each of the p, e, a, c, and e objects.
② 유연 박스 영역(Affinity Boxes) 산출② Calculate Affinity Boxes
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 서로 이웃하는 캐릭터 박스 영역(Character Boxes)을 이용하여 유연 박스 영역(Affinity Boxes)을 산출한다. 유연 박스 영역(Affinity Boxes)을 산출하는 과정은 일례로, 도 4에 도시한 바와 같이, 캐릭터 박스의 2개의 꼭지점을 대각으로 연결한 2개의 대각선이 만드는 2개의 예각삼각형을 생성하고, 각 예각삼각형의 외심을 산출하고 2개의 외심을 연결한 직선을 산출한 후, 서로 이웃하는 두 개의 캐릭터에서 생성된 직선들을 서로 연결하여 유연 박스 영역(Affinity Boxes)을 산출한다.The surgical tool history management method using the image processing technique according to the present invention calculates affinity boxes using neighboring character box areas. As an example, the process of calculating affinity boxes generates two acute triangles made by two diagonal lines connecting two vertices of a character box diagonally, as shown in Figure 4, and each acute triangle is After calculating the circumcenter and calculating a straight line connecting the two circumcenters, the straight lines created from two neighboring characters are connected to calculate affinity boxes.
③ 서로 이웃하는 유연 박스 영역들을 연결한 관계정보 산출③ Calculate relationship information connecting neighboring flexible box areas
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, ①에서 산출한 객체들 각각의 캐릭터 박스 영역(Character Boxes)을 이용하여, 서로 이웃하는 두 개의 캐릭터 박스 영역으로부터 산출된 서로 이웃하는 유연 박스 영역들을 연결한 관계정보를 산출한다.The surgical tool history management method using the image processing technique according to the present invention uses the character box areas (Character Boxes) of each object calculated in ①, and uses the neighboring character box areas calculated from two neighboring character box areas. Calculate relationship information connecting flexible box areas.
④ 캐릭터 박스 영역과 유연 박스 영역의 관계 점수 산출④ Calculate the relationship score between the character box area and the flexible box area
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, ③ 입력 이미지인 캐릭터 박스 영역 및 유연 박스 영역의 네 개의 꼭지점 좌표를 산출하고, 캐릭터 박스 영역 및 유연 박스 영역 각각의 네 개의 꼭지점 좌표와 미리 설정된 2D 가우시안 박스 정보의 네 개의 꼭지점 좌표와 원근 변환 함수를 통해 캐릭터 박스 영역 및 유연 박스 영역 각각의 변환행렬(transformMatrix)을 산출한다. 본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 캐릭터 박스 영역 및 유연 박스 영역 각각의 변환행렬(transformMatrix)을 통해 객체들 각각의 캐릭터 박스 영역과 유연 박스 영역의 관계 점수를 산출한다.The surgical tool history management method using the image processing technique according to the present invention is: ③ Calculate the coordinates of four vertices of the character box area and flexible box area, which are input images, and calculate the coordinates of four vertices of each of the character box area and flexible box area. and the four vertex coordinates of the preset 2D Gaussian box information and the perspective transformation function to calculate the transformation matrix of each character box area and flexible box area. The surgical tool history management method utilizing the image processing technique according to the present invention calculates the relationship score between the character box area and the flexible box area of each object through the transformMatrix of each character box area and flexible box area. .
⑤ 수술도구 식별정보 추출⑤ Extraction of surgical tool identification information
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 각각의 캐릭터 박스 영역과 유연 박스 영역의 관계 점수가 미리 설정된 범위를 벗어나는 캐릭터 박스 영역을 삭제하고 남은 캐릭터 박스 영역들의 식별정보를 추출한다.The surgical tool history management method using the image processing technique according to the present invention deletes character box areas whose relationship scores between each character box area and flexible box area are outside a preset range and extracts identification information of the remaining character box areas. do.
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 수술도구 식별정보에 대응하는 수술도구 명칭을 수술도구DB에서 검출하고, 수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 수술도구 명칭과 수량과 출고날짜를 포함하는 수술도구 출고정보를 생성하여 이를 수술도구DB에 저장한다(S314).The surgical tool history management method using the image processing technique according to the present invention detects the surgical tool name corresponding to the surgical tool identification information from the surgical tool DB, and combines the hospital department information or operating room information that requested the surgical tool with the surgical tool name and Surgical tool delivery information including quantity and delivery date is created and stored in the surgical tool DB (S314).
본 발명에 따른 영상처리 기법을 활용한 수술도구 이력관리방법은, 수술도구DB에 저장된 수술도구 출고정보를 이용하여 현재 남아있는 수술도구의 종류와 수량을 계산하여 재고정보를 산출한 후 이를 수술도구DB에 저장한다(S315).The surgical tool history management method using the image processing technique according to the present invention calculates the type and quantity of surgical tools currently remaining using the surgical tool shipment information stored in the surgical tool DB, calculates inventory information, and then calculates inventory information. Save it in DB (S315).
이상 본 발명을 여러 실시예에 기초하여 설명하였는데, 이는 본 발명을 예증하기 위한 것이다. 통상의 기술자라면, 위 실시예를 기술사상을 유지한 채 다른 형태로 변형하거나 수정할 수 있을 것이다. 그러나, 본 출원의 권리범위는 아래의 특허 청구범위에 의해 정해지므로, 그러한 변형이나 수정이 아래의 특허 청구범위의 권리범위에 포함되는 것으로 해석될 수 있다.The present invention has been described above based on several examples, which are intended to illustrate the present invention. A person skilled in the art would be able to transform or modify the above embodiment into another form while maintaining the technical idea. However, since the scope of rights of this application is determined by the scope of the patent claims below, such variations or modifications may be interpreted as being included in the scope of the rights of the patent claims below.
Claims (3)
카메라에서 촬영된 복수의 수술도구가 올려진 트레이 전체 영역 이미지에서 수술도구 식별정보만으로 구성된 이미지를 추출하고, 추출된 수술도구 식별정보만으로 구성된 이미지에서 각 수술도구의 식별정보를 판별하고, 각 수술도구의 식별정보에 해당하는 수술도구의 명칭을 수술도구DB로부터 검출한 후 판별된 수술도구 식별정보의 개수를 이용하여 트레이에 올려진 수술도구의 수량을 산출하는 수술도구인식처리부와;
상기 수술도구인식처리부로부터 병원 창고에 입고되는 수술도구의 식별정보와 명칭과 수량이 입력되면 상기 수술도구의 식별정보와 명칭과 수량과 입력 날짜와 시간을 포함하는 수술도구 입고정보를 생성하여 이를 수술도구DB에 저장하는 입고처리부와;
병원 부서 단말기 또는 수술실 단말기로부터 수술도구의 명칭과 수량과 수술도구를 요청한 의료진정보를 포함하는 수술도구 요청정보를 입력받아 수술도구DB에 저장하고, 상기 수술도구인식처리부로부터 출고를 위해 트레이에 올려진 수술도구의 명칭과 수량이 입력되면 상기 수술도구 요청정보와 비교한 후 그 결과 출고를 위한 수술도구의 명칭과 수량이 상기 수술도구 요청정보와 일치하면 수술도구의 명칭과 수량과 출고 날짜와 시간과 수술도구를 요청한 의료진정보를 포함하는 수술도구 출고정보를 생성하여 이를 수술도구DB에 저장하는 출고처리부와;
수술도구DB에 저장된 수술도구 입고정보와 수술도구 출고정보를 이용하여 현재 남아있는 수술도구의 종류와 수량을 계산하여 재고정보를 생성한 후 이를 수술도구DB에 저장하는 재고정보처리부;
를 포함하는 영상처리 기법을 활용한 수술도구 이력관리시스템.It is a surgical tool history management system that utilizes image processing techniques that are connected to hospital department terminals and operating room terminals through a network, and are mounted on an administrator terminal that includes a camera, user operation unit, and display unit.
An image consisting only of surgical tool identification information is extracted from the image of the entire area of the tray on which multiple surgical tools are placed, captured by a camera. The identification information of each surgical tool is determined from the image consisting of only the extracted surgical tool identification information, and each surgical tool is identified. A surgical tool recognition processor that detects the name of the surgical tool corresponding to the identification information from the surgical tool DB and then calculates the quantity of the surgical tool placed on the tray using the number of determined surgical tool identification information;
When the identification information, name, and quantity of surgical tools to be delivered to the hospital warehouse are input from the surgical tool recognition processing unit, surgical tool stocking information including the identification information, name, quantity, and input date and time of the surgical tools is generated and used for surgery. A warehousing processing unit stored in the tool DB;
Surgical tool request information, including the name and quantity of the surgical tool and information on the medical staff who requested the surgical tool, is input from the hospital department terminal or operating room terminal, stored in the surgical tool DB, and placed on a tray for shipment from the surgical tool recognition processing unit. When the name and quantity of the surgical tool are entered, they are compared with the surgical tool request information, and if the name and quantity of the surgical tool for shipment match the surgical tool request information, the name and quantity of the surgical tool and the date and time of shipment are provided. a delivery processing unit that generates surgical tool delivery information including medical staff information requesting surgical tools and stores it in a surgical tool DB;
An inventory information processing unit that calculates the type and quantity of surgical tools currently remaining using the surgical tool receipt information and surgical tool shipment information stored in the surgical tool DB, generates inventory information, and stores this in the surgical tool DB;
Surgical tool history management system using image processing techniques including.
상기 수술도구인식처리부는,
상기 수술도구의 식별정보만으로 구성된 이미지에서 식별정보에 포함된 문자 또는 숫자를 각각 객체로 분류한 후 각 객체에 대한 캐릭터 박스 영역(Character Boxes)을 산출하고,
서로 이웃하는 캐릭터 박스 영역(Character Boxes)을 이용하여 유연 박스 영역(Affinity Boxes)을 산출한 후, 서로 이웃하는 캐릭터 박스 영역과 유연 박스 영역을 연결하는 관계점수를 산출하고,
상기 캐릭터 박스 영역과 유연 박스 영역의 관계 점수가 미리 설정된 범위를 벗어나는 캐릭터 박스 영역을 삭제하고, 삭제 후 남은 캐릭터 박스 영역들의 식별정보를 추출하여 남은 캐릭터 박스 영역들의 식별정보와 일치하는 수술도구의 식별정보를 수술정보DB에서 검출하는 것,
을 특징으로 하는 영상처리 기법을 활용한 수술도구 이력관리시스템.In claim 1,
The surgical tool recognition processing unit,
In the image consisting of only the identification information of the surgical tool, each letter or number included in the identification information is classified as an object, and then character box areas for each object are calculated,
After calculating affinity boxes using neighboring character box areas, a relationship score is calculated connecting neighboring character box areas and flexible box areas,
The character box area whose relationship score between the character box area and the flexible box area is outside a preset range is deleted, and the identification information of the remaining character box areas after deletion is extracted to identify a surgical tool that matches the identification information of the remaining character box areas. Detecting information from the surgical information database,
A surgical tool history management system using image processing techniques characterized by .
상기 영상처리 기법을 활용한 수술도구 이력관리시스템은,
수술도구를 요청한 병원 부서 정보 또는 수술실 정보와 수술도구 명칭과 수량과 출고 날짜 및 시간을 포함하는 수술도구 출고정보를 라벨스티커 출력형식으로 변환하여 프린터로 출력하는 인쇄처리부;를 더 포함하는 것,
을 특징으로 하는 영상처리 기법을 활용한 수술도구 이력관리시스템.In claim 1,
The surgical tool history management system using the above image processing technique is,
A print processing unit that converts the surgical tool shipment information, including hospital department information or operating room information that requested the surgical tool, surgical tool name and quantity, and shipping date and time, into a label sticker output format and outputs it to the printer,
A surgical tool history management system using image processing techniques characterized by .
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220059331A KR20230159933A (en) | 2022-05-16 | 2022-05-16 | Surgical tool history management system using image processing technique |
| PCT/KR2023/006639 WO2023224367A1 (en) | 2022-05-16 | 2023-05-16 | Surgical tool history management system using image processing technique and method therefor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220059331A KR20230159933A (en) | 2022-05-16 | 2022-05-16 | Surgical tool history management system using image processing technique |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230159933A true KR20230159933A (en) | 2023-11-23 |
Family
ID=88835728
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220059331A KR20230159933A (en) | 2022-05-16 | 2022-05-16 | Surgical tool history management system using image processing technique |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR20230159933A (en) |
| WO (1) | WO2023224367A1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140127534A (en) | 2013-04-25 | 2014-11-04 | 서울대학교병원 (분사무소) | Surgery information management apparatus and the method based EMR system |
| KR101703779B1 (en) | 2015-03-31 | 2017-02-07 | 연세대학교 산학협력단 | Auto identification system for surgical instrument and information processing method of the same |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3199614U (en) * | 2015-06-19 | 2015-09-03 | 一般財団法人竹田健康財団 | Surgical instrument management system |
| JP7266370B2 (en) * | 2018-06-27 | 2023-04-28 | Ｄｇｓｈａｐｅ株式会社 | Surgical set and instrument management system |
| JP7309171B2 (en) * | 2019-04-09 | 2023-07-18 | ビーコア株式会社 | Optical recognition code reader, method and program |
| KR102270015B1 (en) * | 2020-12-02 | 2021-06-28 | 쿠팡 주식회사 | Electronic apparatus for managing carrying out on fulfillment center and controlling method thereof |
-
2022
- 2022-05-16 KR KR1020220059331A patent/KR20230159933A/en not_active Application Discontinuation
-
2023
- 2023-05-16 WO PCT/KR2023/006639 patent/WO2023224367A1/en unknown
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140127534A (en) | 2013-04-25 | 2014-11-04 | 서울대학교병원 (분사무소) | Surgery information management apparatus and the method based EMR system |
| KR101703779B1 (en) | 2015-03-31 | 2017-02-07 | 연세대학교 산학협력단 | Auto identification system for surgical instrument and information processing method of the same |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023224367A1 (en) | 2023-11-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10614569B2 (en) | Mobile processing device system for patient monitoring data acquisition | |
| US9305218B2 (en) | Methods and systems for identifying, marking, and inventorying large quantities of unique surgical instruments | |
| JP3199614U (en) | Surgical instrument management system | |
| US6603464B1 (en) | Apparatus and method for record keeping and information distribution | |
| JP5886516B2 (en) | Medical product tracking method and system | |
| US20110029320A1 (en) | System and method for managing a medical procedure site with a tracking device | |
| WO2015100173A1 (en) | Tracking medical devices | |
| CN115103648A (en) | Instrument tracking machine | |
| KR20230159933A (en) | Surgical tool history management system using image processing technique | |
| CN111755089A (en) | Safety checking system for ophthalmic surgery | |
| US20200043605A1 (en) | Surgical instrument management system | |
| JP2007279842A (en) | Electronic medical chart system, data processor, and processing method | |
| JP2017120586A (en) | Information processing method, system, equipment, and program | |
| US11508470B2 (en) | Electronic medical data tracking system | |
| KR20230155371A (en) | Management System For Surgical Device And Management Method Therefore | |
| CN114626950A (en) | Insurance claim settlement information input method and device, computer equipment and storage medium | |
| US11335459B2 (en) | Surgical instrument set and instrument management system | |
| US20140019153A1 (en) | Drug mixing preparation managing apparatus, control method and control program | |
| US10978186B2 (en) | Personalized wearable patient identifiers that include clinical notifications | |
| WO2019180981A1 (en) | Medical material recognition system | |
| KR20040106633A (en) | An Apparatus and Method for inputting a Medical Prescription Sheet by Image Recognition | |
| US20210391066A1 (en) | Procedural and surgical information alert system | |
| US11998359B2 (en) | Automated allergy office | |
| US12002577B2 (en) | Apparatus, system and methods for management of medical supplies | |
| JP2019017913A (en) | Information processing system, control method for information processing system, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E601 | Decision to refuse application |