KR102481236B1 - 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법 - Google Patents

진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법 Download PDF

Info

Publication number
KR102481236B1
KR102481236B1 KR1020200082548A KR20200082548A KR102481236B1 KR 102481236 B1 KR102481236 B1 KR 102481236B1 KR 1020200082548 A KR1020200082548 A KR 1020200082548A KR 20200082548 A KR20200082548 A KR 20200082548A KR 102481236 B1 KR102481236 B1 KR 102481236B1
Authority
KR
South Korea
Prior art keywords
model
medical
picture
disease
editing
Prior art date
Application number
KR1020200082548A
Other languages
English (en)
Other versions
KR20220005123A (ko
Inventor
최병관
Original Assignee
부산대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 부산대학교 산학협력단 filed Critical 부산대학교 산학협력단
Priority to KR1020200082548A priority Critical patent/KR102481236B1/ko
Priority to PCT/KR2021/006173 priority patent/WO2022010091A1/ko
Publication of KR20220005123A publication Critical patent/KR20220005123A/ko
Application granted granted Critical
Publication of KR102481236B1 publication Critical patent/KR102481236B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Abstract

본 발명은 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법에 관한 것으로, 의료인이 환자의 증상, 환부, 또는 질병의 이름 등을 텍스트 또는 음성으로 입력하면 시스템이 자동으로 텍스트에 해당하는 진료용그림(230)을 불러오는 방식으로 구동되며, 사용자가 그림 내 질병모형(220)의 크기와 위치 등을 수정할 수 있도록 마련된다.
본 발명에 따른 진료용그림(230) 편집 방법은 증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 사용자가 입력하면 기본모형과 질병모형 중 하나 이상을 호출하는 모형호출단계(S10); 상기 추출된 의료코드에 따라 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 생성하는 모형표시단계(S20); 상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210) 및 질병모형(220)을 편집하여 진료용그림(230)을 수정하는 그림수정단계(S30); 수정이 완료된 진료용그림(230)에서 의료정보를 추출하는 의료정보추출단계(S40); 완성된 진료용그림(230)과 의료정보를 저장하는 그림저장단계(S50);를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 진료용그림(230) 편집 시스템은 증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 사용자가 입력하면 기본모형과 질병모형 중 하나 이상을 호출하는 모형호출부(100); 상기 추출된 의료코드에 따라 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 생성하는 모형표시부(200); 상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210) 및 질병모형(220)의 요소를 조작하여 진료용그림(230)을 수정하는 그림수정부(300); 수정된 진료용그림(230)에서 의료정보를 추출하는 의료정보추출부(400); 편집이 완료된 상기 진료용그림(230)을 저장하는 저장부(500);를 포함하는 것을 특징으로 한다.

Description

진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법{MEDICAL DRAWING EDITING SYSTEM AND METHOD FOR EDITING MEDICAL DRAWING THEREOF}
본 발명은 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법에 관한 것으로, 의료인이 환자의 증상, 환부, 또는 질병의 이름 등을 텍스트 또는 음성으로 입력하면 시스템이 자동으로 텍스트에 해당하는 진료용그림(230)을 불러오는 방식으로 구동되며, 사용자가 그림 내 질병모형(220)의 크기와 위치 등을 수정할 수 있도록 마련된다. 그림에서 환부나 증상 등을 구체적으로 편집할 수 있기 때문에 기존의 텍스트나 추상적인 의료 그림과 같은 단순한 진료 기록들보다 더욱 상세하고 구체적으로 환자의 문제점을 파악할 수 있다. 또한, 진료용그림(230)은 2차원뿐만 아니라 3차원으로도 제공되므로 환자는 육안으로 관찰하기 힘든 질병에 대하여서도 더 쉽고 깊게 이해할 수 있다. 완성된 진료용그림(230)에서는 의료정보가 추출될 수 있다.
진료용 그림은 의사가 의료 활동을 위해 간단한 메모를 남기거나, 환자를 진단할 때 환자에게 증상 및 병변의 위치를 설명하기 위한 하나의 수단이다. 특히 의료용어가 낯선 일반 환자에게는 천 마디 말보다 하나의 이미지가 본인의 증상을 이해하는 것에 더 많은 도움이 된다. 따라서 진료를 하는데 있어서 환자의 원활한 협조와 이해를 구할 수 있다.
종래의 진료용 그림은 간단한 신체 그림이 그려져 있는 부위 위에 의사가 펜으로 표시하는 방법으로 그려졌다. 그리고 이러한 진료용 그림이 현대에는 전자 차트 시스템에 그려진 기본 인체 그림을 배경으로 의료진이 직접 마우스로 표시를 하고, 색깔을 입히는 형태로 발전하였다.
그러나 종이와 펜이 아닌 마우스로 모니터에 그림을 그리는 것은 많은 시간이 필요했다. 의료진이 환자를 상담함과 동시에 한정된 시간 안에 그려내야 했기 때문에 진료용 그림은 자세한 정보를 표시하기 힘들었으며 부정확한 진료용 그림이 만들어질 가능성이 높았다.
3차원 데이터로 만들어진 진료용 그림의 경우, 질병의 종류나 신체 부위를 표현하는 방법을 구체화 · 정량화 할 수 있다. 또한, 가상현실이나 증강현실에도 사용될 수 있으며, 환자에게 병변의 위치나 크기를 설명할 때 의료인이 전달하고자 하는 정보의 정확성을 높일 수 있다는 장점이 있다.
그러나 인체를 3차원으로 표현하는(3d design) 훈련을 받지 않은 의료인에게 진료용 그림을 3차원으로 그리는 것은 힘들 수 있으며 그림을 디자인하는 시간 또한 오래 걸릴 수 있으므로 쉽고 간단하게 진료용 그림을 만들 수 있는 기술이 필요하게 되었다.
뿐만 아니라 그림을 만드는 과정에서 표준화된 의료정보를 생성할 수 있는 기능까지 갖추게 된다면 의료 데이터 작성에 필요한 의료진의 시간을 줄여 주면서도 품질이 높은 의료 데이터를 생성할 수 있을 것이다.
진료용 그림을 생성하기 위해서는 먼저 어떠한 의료정보가 입력이 되어야 한다. 의료인이 “진료용 그림 편집도구”에 문장이나 단어 등을 입력하면 시스템이 질병의 대략적인 정보를 전자 진료용 그림 위에 표시한다. 표시된 그림을 바탕으로 사용자는 더 정확한 의미가 표시되도록 그림을 수정한다. 이때 시스템은 수정된 그림을 바탕으로 표준화된 질병 정보를 불러내고 완성된 진료용 그림과 의료정보가 저장된다. 이렇게 저장된 의료정보와 진료용 그림은 다음 진료 때 다시 사용할 수 있으며, 다른 의료기관이나 의료진과 공유할 수 있다. 이처럼 본 발명에서는 증상과 병변을 구체적이고 정량화하여 표현할 수 있는 진료용 그림을 생산할 수 있는 기술을 제공하며, 또한 그림을 편집할 때 자동으로 의료정보를 생산하는 방법을 제시 하고자 한다.
한국 공개특허 제2018-0098869호
본 발명은 상기의 문제점을 해결하기 위해서 안출된 것으로서, 본 발명의 목적은 이전까지 문자로 표현되거나 부정확하게 표현되던 그림 의료 정보를 정량화되고 구체화된 이미지(IMAGE) 혹은 그림(DRAWING)으로 바꿀 수 있는 진료용 그림 편집 시스템을 제공하는 것이다.
또한, 본 발명의 목적은 의료진이 2차원 혹은 3차원의 진료용 그림을 작성할 때 작업을 간소화하고 짧은 시간 내에 효율적으로 의료정보를 생성하기 위한 진료용 그림 편집 시스템을 제공하는 것이다.
또한, 본 발명의 목적은 기존의 진료 기록 텍스트나 단순한 진료용 그림이 가지고 있던 단점을 피하고, 상세하고도 정확한 정보를 전달할 수 있는 진료용 그림 편집 시스템을 제공하는 것이다.
또한, 본 발명의 편집 시스템이 완성된 진료용 그림에서 의료정보를 추출함으로써 그림뿐만 아닌 다양한 정보를 저장, 공유할 수 있게 제공하는 것이다.
발명이 해결하고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자들에게 명확하게 이해될 수 있을 것이다.
본 발명에 따른 진료용 그림 편집 방법은,
증상이나 병명에 대한 문장, 단어 및 의료용어를 의미하는 텍스트를 입력하여 저장된 그림 목록 중 하나 이상에서 사용자가 모형을 선택하거나 모형 데이터베이스 등에서 입력된 텍스트에 상응하는 모형을 불러오거나 음성을 통해 상기 모형을 호출 혹은 생성하는 모형호출단계(S10);
상기 모형호출단계(S10)에 의해 호출, 혹은 생성되어 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 표시하는 모형표시단계(S20);
상기 표시된 기본모형(210) 및 질병모형(220)을 확인하고, 상기 기본모형(210) 및 질병모형(220)의 점, 선, 면, 및 이들의 집합인 요소 등을 편집하여 진료용그림(230)을 완성하는 그림수정단계(S30);
요소(element)의 변화를 인자로 하는 함수 등을 통해 상기 수정이 완료된 진료용그림(230)에서 의료코드나 질병의 정보 등과 같은 의료정보를 추출하거나, 수정이 완료된 모형의 크기, 위치 및 방향 등과 같은 정보를 시스템이 인식하여 의료정보가 추출될 수 있는 의료정보추출단계(S40);
상기 모형호출단계(S10)에서 입력된 사용자의 요청, 상기 진료용그림(230) 또는 상기 추출된 의료정보 중 하나 이상을 저장하는 그림저장단계(S50);를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 진료용 그림 편집 시스템은,
증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 사용자가 입력하면 그에 알맞은 모형을 불러내는 모형호출부(100);
상기 추출된 의료코드에 따라 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 생성하는 모형표시부(200);
상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210) 및 질병모형(220)의 점, 선, 면, 및 이들의 집합인 요소 등을 편집하여 진료용그림(230)을 수정하는 그림수정부(300);
요소의 데이터를 인자로 하는 함수 등에 의해 상기 수정이 완료된 진료용그림(230)에서 의료코드 혹은 의료정보를 추출하거나, 수정이 완료된 모형의 크기, 위치 및 방향 등과 같은 정보를 시스템이 인식하여 의료정보가 추출될 수도 있는 의료정보추출부(400);
상기 편집이 완료된 진료용그림(230)을 저장하는 저장부(500);를 포함하는 것을 특징으로 한다
상기 의료정보는 증상이나 병명의 이름, 카테고리, 원인, 위치, 좌우 편측성 또는 추가정보 중 선택된 하나 이상의 정보를 문자 및 숫자로 표현하는 것을 특징으로 한다.
상기 기본모형(210)은 신체의 일부 또는 전체를 나타낸 모형이고,
상기 질병모형(220)은 질병을 확인할 수 있는 장기, 시술 또는 수술부위, 간호 부위 및 환자가 아픈 위치, 간호 관찰 부위, 간호 중재부위, 재활 치료를 받은 부위, 조직 검사를 시행 받은 부위, 영상 검사를 받은 장기 및 환자가 증상이 있는 부위를 나타낸 모형이다.
상기 기본모형(210) 및 질병모형(220)의 편집은 상기 기본모형(210) 및 질병모형(220)을 구성하는 점, 선, 면 및 이들의 집합인 요소를 조작하여 하나 이상 옮기거나 상기 요소의 크기, 모양, 위치 등을 조정하는 것을 특징으로 한다.
상기 요소의 수정은 GUI 컨트롤의 조작에 의해 상기 기본모형(210) 및 질병모형(220)의 크기 또는 방향이 전환되는 것을 특징으로 한다.
또한 상기 기본모형(210)에 상기 질병모형(220)이 삽입되었을 때 삽입된 상기 질병모형(220)에 의해 해당하는 질병모형(220)만 수정되는 것이 아닌, 상기 사용자가 조작하지 않은 다른 질병모형(220)의 요소까지 자동으로 변화 할 수 있는 것을 특징으로 한다.
또한 수정이 완료된 모형의 조합을 진료용그림(230)이라고 하며,
본 발명 시스템은 상기 수정이 완료된 진료용그림(230)에서 위치, 형태, 방향 등이 변화된 요소나 완성된 진료용그림(230)의 형체를 인식하여 의료정보를 추출할 수 있음을 특징으로 한다.
상기 의료모형은 2D 형식과 3D 형식으로 모두 디스플레이 될 수 있음을 특징으로 한다.
상기 과제의 해결 수단에 의해, 본 발명은 자동으로 진료용 그림을 생성할 수 있어 의료진이 그림을 그리는 시간을 절약할 수 있고 빠른 시간 내에 질병을 상태를 표현 가능하다.
또한, 본 발명은 시스템이 GUI인터페이스 사용을 인식하여 진료용 그림이 자동으로 수정될 수 있다.
또한, 본 발명은 의사를 포함한 의료진이 더 빠르고 간편하게 환자의 상태를 알아볼 수 있다.
또한, 본 발명으로 만들어진 진료용 그림을 다른 사용자와 공유할 수 있도록하여 보다 원활한 정보의 공유를 돕도록 한다.
또한, 본 발명으로 생성된 진료용 그림을 통해 환자가 질병에 대한 이해도를 더 가질 수 있게 되며 치료에 적극적으로 협조할 수 있게 한다.
또한, 본 발명은 코드와 같은 표준화된 데이터를 짧은 시간에 입력할 수 있어 의료진의 업무 효율성을 높이고 데이터의 정확도를 높이는데 도움이 된다.
또한, 본 발명은 2차원 뿐만 아닌 3차원의 진료용 그림 또한 그릴 수 있게 하여 다양한 형태의 진료그림을 작성할 수 있게 해준다.
또한, 본 발명은 하나의 GUI인터페이스가 여러 모형을 동시에 움직일 수 있도록 마련되어 사용자의 입력에 따라 아주 세밀하게 질병 상태를 표현 가능하다.
도 1은 본 발명인 진료용 그림 편집 방법을 나타낸 순서도이다.
도 2는 본 발명인 진료용 그림 편집 시스템의 구성을 나타낸 구성도이다.
도 3은 본 발명에 따라 텍스트 입력에 의해 기본모형(210) 및 질병모형(220)을 불러오는 실시예를 나타내는 도면이다.
도 4는 본 발명에 따라 데이터베이스에 저장된 기본모형(210) 및 질병모형(220)을 불러오는 실시예를 나타내는 도면이다.
도 5는 본 발명에 따라 사용자의 음성에 의해 기본모형(210) 및 질병모형(220)을 호출하는 실시예를 나타내는 도면이다.
도 6은 하나의 장치에서 입력된 텍스트가 다른 장치에서 모형을 호출할 수 있음을 보여주는 도면이다.
도 7은 본 발명에 따른 기본모형(210) 및 질병모형(220)의 요소를 편집하는 일실시예를 나타낸 도면이다.
도 8은 본 발명에 따라 사용자가 요소를 움직여 뇌혈관 안쪽의 압력으로 혈관 일부가 팽창된 상태를 나타낸 일실시예를 나타내는 도면이다.
도 9는 본 발명에 따라 기본모형(210)에 질병모형(220)이 삽입되었을 때 질병모형(220)에 의해 기본모형(210)의 요소들이 자동으로 변화하는 일실시예를 나타낸 도면으로, 뇌종양이나 뇌혈종에 의해 발생된 압력에 의해서 압박을 받고 축소된 뇌실의 형태를 반영한 실시예이다.
도 10은 본 발명에 따라 기본모형(210)에 질병모형(220)이 삽입되었을 때 질병모형(220)에 의해 기본모형(210)의 요소들이 자동으로 변화하는 일실시예를 나타낸 도면으로, 사용자가 처음에 작았던 질병모형(220)의 크기를 크게 수정을 하면서 기본모형(210) 안의 뇌실모형의 모양이나 위치가 달라지는 형태를 반영한 실시예이다.
도 11은 본 발명에 따라 GUI인터페이스를 통해 척추측만증 질병모형을 만드는 일실시예로, GUI인터페이스의 움직임을 따라 척추 기본모형(210)의 요소가 이동하는 것을 나타내는 도면이다.
도 12는 질병모형(220)에서 GUI 컨트롤의 조작 또는 키보드를 이용해 질병모형(220)의 요소들을 바꾸는 일실시예를 나타내는 도면이다.
도 13은 사용자에 의해 질병모형(220)의 색을 달리하여 편집하는 일실시예를 나타낸 도면이다.
도 14는 사용자에 의해 질병모형(220)의 크기가 조작되는 일실시예를 나타낸 도면이다.
도 15는 여러 장기 기본모형(210)을 하나의 전신 기본모형(210)에 모아 관찰할 수 있음을 보여주는 도면이다.
도 16은 사용자의 필요에 따라 질병모형(220)의 위치를 변경할 수 있음을 보여주는 도면으로, 사용자가 질병모형(220)의 위치를 폐의 하엽(lower lobe)으로 옮긴 경우 폐의 하엽에 발생한 종양을 뜻하는 C34.3이 추출되는 일실시예이다.
도 17은 사용자의 필요에 따라 질병모형(220)의 위치를 변경할 수 있음을 보여주는 도면으로, 사용자가 질병모형(220)의 위치를 간(Liver)으로 옮긴 경우간의 악성종양을 뜻하는 C22.0이 추출되는 일실시예이다.
도 18은 GUI 인터페이스(스크롤바 등)를 통해 척추 측만의 정도를 조절할 수 있음을 보여주는 도면으로, 수직 스크롤바에 의해 척추 측만의 정도를 조절하는 일실시예이다.
도 19는 GUI 인터페이스(스크롤바 등)를 통해 척추 측만의 정도를 조절할 수 있음을 보여주는 도면으로, 수평 스크롤바에 의해 척추 측만의 정도를 조절하는 일실시예이다.
도 20은 수정이 완료된 진료용그림(230)에서 의료정보를 추출할 수 있음을 보여주는 도면이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 해당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 이 문서에서 설명하는 실시예에 한정되지 않고 여러 가지 상이한 형태로 구현될 수 있다.
본 발명에 대한 해결하고자 하는 과제, 과제의 해결 수단, 발명의 효과를 포함한 구체적인 사항들은 다음에 기재할 실시 예 및 도면들에 포함되어 있다. 본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.
이하, 첨부된 도면을 참조하여 본 발명을 보다 상세히 설명하기로 한다.
[도 1]은 본 발명인 진료용그림(230) 편집 방법을 나타낸 순서도로, 아래 단계에 의해 실시된다.
먼저, 모형호출단계(S10)는 증상이나 병명에 대한 문장, 단어 및 의료용어를 의미하는 텍스트를 입력하여 저장된 그림 목록 중 하나 이상에서 사용자가 모형을 선택하거나 모형 데이터베이스 등에서 입력된 텍스트에 상응하는 모형을 불러오거나 음성을 통해 상기 모형을 호출 혹은 생성한다.
상기 입력된 텍스트는 병명과 병변의 위치 등을 포함한 텍스트가 될 수 있고, 각국의 언어로 입력한 증상의 명칭이 될 수도 있다. 뿐만 아니라 네트워크 등에 저장된 의료 텍스트 카테고리에서 사용자가 원하는 텍스트를 선택할 수도 있으며, 시스템에서 사용자의 음성을 인식하여 추출된 텍스트가 될 수도 있다. 이처럼 사용자에 의해 여러 방식으로 입력된 텍스트에 알맞게 데이터베이스에 저장된 모형이 호출될 수 있다. 또한 서버와 장치(DEVICE)는 네트워크를 통해 유기적으로 연결되어있어서 하나의 장치에서 텍스트를 입력하면 떨어져있는 다른 장치에서 모형이 호출될 수도 있다.
[도 3]은 사용자가 원하는 의료 코드 또는 진료용그림(230)을 여러 방법으로 불러내는 실시예를 나타내는 도면이다. [도 3]에서 볼 수 있듯이 사용자가 문자형 데이터를 입력하여 기본모형(210)과 질병모형(220)을 호출할 수 있으며, [도 4]에서 볼 수 있듯이 카테고리화 된 메뉴에서 원하는 신체 부위, 내장 기관과 같은 해부학적 장기, 종양, 농양, 기형과 같은 질병모형 등을 고를 수 있다. 또한 [도 5]에서 볼 수 있는 바와 같이 시스템이 사용자의 음성을 인식하여 모형을 호출할 수도 있다.
이처럼 상기 모형호출단계(S10)에서 호출된 사용자의 요청과 아래에서 설명할 그림수정단계(S30)에서 생성되는 진료용그림(230)은 유무선 네트워크를 통해 송수신되어 연동 가능하다. [도 6]은 네트워크를 통해 연결되어있는 서버와 장치를 나타내는 도면이다. device A에서 입력된 텍스트가 device B에서 모형을 호출할 수 있음을 보여준다. 서로 다른 장치라도 서버와 연결되어 있으므로 장치끼리 떨어져 있어도 시스템의 구동이 가능하다.
다음으로, 모형표시단계(S20)는 상기 모형호출단계(S10)에 의해 호출, 혹은 생성되어 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 표시하는 단계이다.
상기 모형표시단계(S20)는 사용자가 상기 텍스트를 입력하거나 제시된 목록에서 그림을 선택하거나 음성을 통해 상기 모형을 호출 혹은 생성함으로써 시스템이 기본모형(210) 및 질병모형(220)을 사용자에게 보여 주는 단계이다. 앞서 기술한 바와 같이, 상기 모형호출단계(S10)에서 요청된 의료코드, 텍스트에 맞는 장기 모양, 혹은 질병을 나타내는 아이콘, 이미지, 질병모형(220) 등을 생성하거나 시스템의 데이터베이스에서 찾아낸다.
이때 질병이 있는 신체 부위를 나타내는 상기 기본모형(210)과, 종양이나 혈종과 같은 질병을 나타내는 상기 질병모형(220)이 함께 제시된다.
또한, 상기 모형표시단계(S20)에서는 사용자가 진료용그림(230) 데이터베이스에 있는 모형을 불러오는 것뿐만 아니라, 사용자가 입력한 텍스트에 따라 인공지능이 그림을 생성할 수도 있다. 그림 하나만 자동 생성될 수도 있으며, 여러 그림이 불러내어져 사용자가 그 중 하나 이상을 선택할 수도 있다. 이때 기본모형(210) 및 질병모형(220) 둘 다 자동 생성될 수 있다.
다음으로, 그림수정단계(S30)는 상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210), 질병모형(220) 및 진료용그림(230)을 수정하는 단계이다.
상기 그림수정단계(S30)는 상기 모형표시단계(S20)에서 표시된 상기 기본모형(210) 및 질병모형(220)을 사용자가 확인하고 수정하는 단계이다. 시스템에 의해서 상기 기본모형(210) 및 질병모형(220)이 정확하게 생성되거나 찾아졌다면 사용자는 이를 그대로 사용할 수 있다. 반면 사용자가 확인하였을 때 알맞은 기본모형(210) 및 질병모형(220)이 표시되지 않은 경우 이를 수정할 수 있다. 또한, 다양한 기본모형(210) 및 질병모형(220)이 동일한 텍스트에 의해 호출되었다면 그 중 사용자가 원하는 기본모형(210) 및 질병모형(220)을 선택하여 사용할 수 있다.
한편, 그림수정단계(S30)에서 불러낸 기본모형(210) 및 질병모형(220)은 사용자는 원하는 형태로 수정하거나 보완할 수 있다. 질병의 위치나 크기를 바꿀 수도 있으며 골절의 심각도(severity)를 조정하거나 혈관 팽창의 정도(scale) 또한 바꿀 수 있다. 수정할 수 있는 것은 이 범위에 그치지 않으며 신체 부위 특징에 알맞게 변화시킬 수 있다. 이러한 수정은 기본모형(210) 및 질병모형(220)의 그림 점, 선, 면, 및 이들의 집합인 요소(element)의 변화에 따라 이루어진다.
본 발명에서 사용자는 추출된 모형을 수정하거나 보완할 수 있고 그에 따라 적절한 의료정보를 추출할 수 있다. 본 발명에서는 [도 7 및 도 8]과 같이 상기 진료용그림(230)을 구성하는 점, 선, 면과 이들의 집합을 “요소(element)”라고 칭하기로 한다. [도 7 및 도 8]에서 상기 요소는 마우스, 터치, 손동작 등과 같이 상기 진료용그림(230)의 요소들 중 하나 이상을 움직일 수 있는 GUI 컨트롤로 조작할 수 있다. GUI 컨트롤을 통해 시스템이나 사용자가 요소의 점, 선, 면의 길이, 부피, 위치 중 하나 이상을 조절할 수 있다. 이를 통해 질병, 또는 병변의 크기나 위치를 표현할 수 있다. [도 7 및 도 8]은 또한 진료용 그림 편집의 기본 원리를 보여주는 예시이다. 즉, 상기 진료용그림(230)은 마우스 등을 이용하여 상기 진료용그림(230)의 요소들 중 하나 이상을 조작할 수 있는 GUI 인터페이스를 통해서 조작이 가능하고, 이를 통해 요소들의 위치를 옮기거나, 요소의 크기, 모양 등을 조정하거나 전체 모형의 위치, 크기 등을 변화시켜 그림을 수정할 수 있다. 이러한 모양의 변형은 좌표의 GUI의 움직임이나 요소들의 데이터를 인자로 하는 함수에 의해 결정될 수 있다.
[도 7]에 나타난 바와 같이, 선에 나타난 GUI 인터페이스를 조정하여 곡선형으로 변형할 수 있고, [도 8]에 나타난 바와 같이, 혈관을 표현한 선에 있는 GUI 인터페이스를 이용해서 모형의 변화를 통해 혈관의 동맥류를 표현할 수 있다.
또한, 상기 의료모형의 수정은 단지 2D 평면 그림에만 국한되는 것이 아니라 3D 입체 그림을 대상으로도 수정할 수 있다.
[도 8]은 상기 질병모형(220)의 모양을 변경하는 일실시예를 나타낸 것으로, 본 발명 시스템을 사용하여 뇌혈관을 형상화한 그림을 수정하는 과정을 보여주는 실시예이다. 혈관 안쪽의 압력으로 혈관의 일부가 팽창된 상태를 표시한 것인데, “GUI 컨트롤”을 통해 왼쪽의 기본 혈관 모형의 요소들을 움직이거나 변형시켜 표시하고 있다.
이렇게 요소들을 움직여 수정이 완료된 혈관의 이상 상태 진료용그림(230)은 시스템에 저장된다. 상기 저장된 진료용그림(230)에서 요소들의 좌표 변화량을 인지하거나, 최종으로 수정된 진료용그림(230)의 형태를 인지하여 “뇌혈관 동맥류”라는 개념(CONCEPT), 혹은 “뇌혈관이 팽창해 있음” 과 같은 문장, 또는 국제 표준 질병 분류체계 ICD(international classification of disease) 10의 표준 코드 “I67.1” 등의 의료정보를 추출할 수 있다.
이와 같이 하나 이상의 “GUI 컨트롤”을 통해 진료용그림(230)을 수정할 수도 있으며, 다른 질병모형(220)을 삽입하여 자동으로 진료용그림(230)이 수정되거나, 기본모형(210) 자체가 변화하여 질병을 표현할 수도 있다.
[도 9]는 본 발명 시스템에서 사용자가 편집하는 질병모형(220)을 인식하여 또 다른 모형인 뇌실모형(ventricle model)의 크기 변화에 영향을 미치는 정보 수정 실시예를 나타낸 것으로, 사용자가 입력한 모형에 따른 연쇄적인 그림의 변화를 나타내었다. [도 9]에서 보이는 바와 같이 기본모형(210)에 사용자가 질병모형(220)을 삽입했을 시, 실제로 뇌종양이나 뇌혈종에 의해 발생된 압력에 의해서 압박을 받고 축소된 뇌실의 형태를 반영한다. 즉, 편집된 질병모형(220)에서 보이는 바와 같이 편측(ipsilateral) 뇌실의 크기가 감소된 형태로 이미지가 자동으로 수정된다. 이러한 뇌실에 발생되는 변화는 본 발명 시스템에 의해 자동으로 수행될 수도 있다.
한편 [도 10]에서는 사용자가 질병모형(220)의 크기를 크게 편집을 하면서 기본모형(210) 안의 뇌실모형의 모양이나 위치가 달라지는 기능을 제공할 수 있다. 따라서 편집된 질병모형(220)을 인식하여 진료용그림(230)은 “압박된 뇌실(compressed ventricle)”이라는 의료정보도 자동으로 추출될 수 있다.
[도 11]은 사용자가 수정하는 질병모형(220)에 따른 연쇄적인 모형의 변화를 나타낸 일실시예이다. 기존의 텍스트나 단순한 진료용그림은 골절이나 측만을 표시하기 힘들었으며 이를 환자에게 설명하기도 쉽지 않았다. 예를 들어 척추의 만곡(CURVATURE)이 존재하는 위치나 만곡의 심각성 등을 다양한 각도로 표시하기 불편했다. 그러나 본 발명인 진료용 그림 편집 시스템을 이용하면 좀 더 구체적이고 정확하게 모형의 입력 및 표시가 가능하다.
예를 들어 [도 11]에 나타난 일실시례는 척추 측만증에 대한 모형을 사용하는 경우이다. 모형호출단계에서 “척추측만증”, “scoliosis”, "M41"등과 같은 텍스트를 시스템에 입력하면 본 발명 시스템에서 왼쪽의 기본모형(210)을 호출한다. 그 후 중앙의 그림처럼 사용자가 마우스 포인터 등과 같은 GUI인터페이스를 화면에서 좌우로 이동하거나, 클릭 등의 적절한 사용을 통해 제 4요추의 모형에 존재하는 GUI 컨트롤을 움직이면 척추가 휘어지도록 진료그림을 다양한 만곡(curvature)으로 표현할 수 있다.
또한 [도 18 및 도 19]에서 볼 수 있듯 스크롤바와 같은 GUI 인터페이스를 이용하여 스크롤바를 움직여서 척추가 휘는 각도 등을 설정할 수 있다. 이는 사전에 약속된 여러 모형의 변화를 함수로 지정해 두고 GUI 컨트롤을 통해 입력된 인자를 통해 하나 이상의 모형을 한꺼번에 수정할 수 있다. 또한 이렇게 사용자가 수정한 정보를 바탕으로 하기 의료정보추출단계(S40)에서 ”심각한“과 같은 질병의 경중을 의미하는 개념이나, “척추측만” 이라는 의료정보와 척추가 휜 각도(angle)정보, 요추4라는 신체 부위정보 중 하나 이상이 추출될 수도 있다.
[도 12]는 확인된 상기 기본모형(210) 및 질병모형(220)을 바탕으로 정보를 생성하고, 상기 질병모형(220)의 모양, 크기, 위치 중 하나 이상을 변형할 수 있도록 마련된 일실시예이다. 예를 들어 종양의 위치를 표시하고 싶을 경우, 종양이 있는 신체부위의 기본모형(210) 위에서 마우스나 컴퓨터 자판의 방향키 등을 이용해 종양의 위치나 방향을 바꿀 수 있는 것이다.
[도 13]에 나타난 바와 같이, 질병의 중증도 또는 발생 빈도에 따라 질병모형(220)의 색을 다르게 할 수도 있다. 예를 들어 발생 빈도가 낮거나 증상의 정도가 경증이라면 노란색, 치료가 필요한 수준이라면 파란색, 발생 빈도가 잦거나 심각한 수준이라면 빨간색으로 표시가 되도록 사용자가 수정할 수 있다.
표시할 수 있는 색은 위에 제시된 세 가지 색에 국한되지 않고 이외의 여러 가지 색으로 표시할 수 있으며 색의 연함과 진함 또한 설정할 수 있다. 사용자가 상기 질병모형(220)의 색을 수정함으로써 “경증”, “중증”등의 의료정보를 추출할 수 있다.
치료가 된 질병이나 증상이라면 사용자가 상기 질병모형(220)의 색을 연하게 하여 “치료완료”혹은 “후유증”이라는 의료정보가 추출되게 하거나 상기 질병모형(220)을 제거할 수 있다.
또한, 본 발명인 진료용 그림 편집 시스템에서는 상기 질병모형(220)의 색을 표현할 수 있을 뿐만 아니라 상기 질병모형(220)의 크기 또한 사용자가 수정할 수 있다. 종양의 크기가 커진다거나, 혈관의 크기가 팽창하는 경우 등의 상황에서 사용자는 요소를 조작하여 모형의 크기를 조절하고 그에 따른 의료정보가 추출될 수 있다.
또한, 상기 질병모형(220)의 크기를 변화시키는 경우에 이 크기를 본 발명인 진료용 그림 편집 시스템이 인지하여 자동적으로 주위모형에 변화가 생기게 할 수 있다. 예를 들어 [도 9 및 도 10]에 제시한 바와 비슷하게 종양의 크기가 커지면 뇌실에 변화가 생김을 표시할 수 있고, 내장에 큰 종양이 생긴다면 주위 다른 내장들이 종양에 눌리는 모습 등을 표시할 수도 있다
여기서, 상기 요소의 변화는 상기 GUI 컨트롤의 조작에 의해 상기 기본모형(210) 및 질병모형(220)의 크기 또는 방향을 전환할 수 있다. 예를 들어 마우스, 중력, 진동, 터치 센서, 마이크, 카메라 중의 하나 이상의 조합으로 입력시켜서 조작할 수 있게 구성될 수 있다. 추가적으로 상기 기본모형(210) 및 질병모형(220)을 편집하는 단계는 상기 GUI 컨트롤이 지시하는 시간의 흐름이나 시점을 화면 내에 그래프의 형태로 길이, 각도, 부피, 숫자 혹은 텍스트를 이용해 표현하여 사용자에게 알려 줄 수 있다. 따라서 상기 GUI 컨트롤의 조작에 따라 [도 7 내지 도 14]의 수정이 가능할 수 있다.
다음으로, 의료정보추출단계(S40)는 수정이 완료된 그림에서 의료 정보를 추출하는 단계이다. 앞 실시예들에서 볼 수 있는 바와 같이 질병이 “중함(severe)”, “측만증”, “50도(degrees)”와 “폐에 종양이 있다”와 같은 텍스트 정보이거나 의료코드 등과 같은 의료정보를 호출하는 단계일 수 있다. 상기 의료정보는 표준화된 의료 용어 코드일 수 있는데, 이는 의료개념을 SNOMED-CT, ICD-9, ICD-10, ICD-11, LOINC, CPT, ATC, RxNorm, ICNP, NMDS 등에서 제시하는 데이터를 말한다. 또한, 혈색소 수치 gram/deciliter와 같은 검사결과와 같이, 숫자로 표현되는 데이터일 수 있다. 예를 들어 척추협착증 등의 진료용그림(230)의 수정이 완료되었다면 시스템에서 M48.0(척추협착증) 등과 같은 의료정보를 추출할 수 있다.
보다 구체적으로, 상기 의료정보는 증상이나 병명의 카테고리, 원인, 위치, 좌우 편측성 또는 추가정보 중 선택된 어느 하나 이상의 정보를 표현할 수 있는 문자 및 숫자로 표현되는 것이 바람직하다.
[도 16]에는 우측 폐 중엽(middle lobe)에 발생된 종양을 표시하고 있다. [도 16]과 같이 사용자가 종양의 위치를 폐의 하엽(lower lobe)으로 옮기게 되면 본 발명 시스템은 질병모형의 좌표를 인지하여 폐의 하엽에 발생한 종양을 뜻하는 C34.3이 추출될 수 있다.
또는 [도 17]에서와 같이 사용자가 질병모형을 더 내려서 간(Liver)으로 옮기게 되면 좌표 변화를 인지하여 간의 악성종양을 뜻하는 C22.0이 추출될 수 있다.
이와 같이 의료정보추출단계(S40)는 질병모형의 모양, 위치좌표를 참조하거나 좌표의 변화을 감지하여 의료정보를 추출할 수 있다. 또한 사용자가 수정한 점, 선, 면, 모양 중 하나 이상의 정보를 인자로 하는 함수에 의해 의료정보를 추출할 수 있다. 또한 수정된 진료용그림(230) 속 모형들의 크기, 위치 및 방향 등의 정보를 시스템이 인식하여 의료정보가 추출될 수도 있다.
예를 들어 [도 20]에서 나타난 바와 같이 어깨(좌측)통풍이 있는 경우, 완성된 진료용그림(230)에 따라 ICD10의 코드가 추출될 수 있다. 질병 카테고리, 증상의 위치와 원인 등이 표현될 수 있다.
다음으로, 그림저장단계(S50)는 상기 모형호출단계(S10)에서 입력된 사용자의 요청, 상기 진료용그림(230) 또는 상기 추출된 의료정보 중 하나 이상을 저장하는 단계이다.
입력된 텍스트에 따라 상기 기본모형(210) 및 질병모형(220)이 호출되고, 사용자가 상기 질병모형(220)을 수정하고, 이에 따른 의료정보가 추출되었다면, 상기 기본모형(210) 및 질병모형(220)은 처음 입력된 텍스트, 추출된 의료정보 중 하나 이상을 그림과 함께 본 발명인 진료용 그림 편집 시스템에 저장 할 수 있다. 상기 저장된 자료는 데이터베이스화 되어 추후 같은 텍스트를 입력하였을 때 재추출이 가능하다. 또한 그림과 함께 정확한 의료정보가 추출되었으므로 나라 간, 의료진 간의 언어가 다르더라도 함께 공유하는 정보가 될 수 있는 등, 의료정보의 공유에 많은 도움이 될 수 있다.
아래는 본 발명인 진료용 그림 편집 시스템(1)의 구성을 나타낸 구성도로, 본 발명인 진료용 그림 편집 시스템은 모형호출부(100), 모형표시부(200), 그림수정부(300), 의료정보추출부(400) 및 저장부(500)로 구성된다. 본 발명인 진료용 그림 편집 시스템은, 도 2에 나타난 바와 같이 전자의무기록(EMR, 2) 및 의료기관서버(3)로부터 자료를 수신 받는다.
먼저, 상기 모형호출부(100)는 증상이나 병명에 대한 문장, 단어 및 의료용어를 의미하는 텍스트를 입력하여 저장된 그림 목록 중 하나 이상에서 사용자가 모형을 선택하거나 모형 데이터베이스 등에서 입력된 텍스트에 상응하는 모형을 불러오거나 음성을 통해 상기 모형을 호출 혹은 생성할 수 있다. 사용자가 상기 진료용그림(230)를 저장한 데이터베이스에 있는 모형을 불러오는 것뿐만 아니라, 사용자가 입력한 텍스트에 따라 인공지능이 그림을 생성할 수도 있다. 기본모형(210) 및 질병모형(220) 모두 생성될 수 있다.
다음으로, 상기 모형표시부(200)는 상기 추출된 의료코드에 따라 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 표시한다.
상기 모형표시부(200)는 사용자가 상기 텍스트를 입력함으로써 본 발명 시스템이 기본모형(210) 및 질병모형(220)을 시각화할 수 있도록 제공한다. 입력된 텍스트에 알맞은 기본모형(210), 질병모형(220) 등을 생성하거나 호출할 수 있다.
이때 질병이 있는 신체 부위를 나타내는 상기 기본모형(210)과, 종양이나 혈종과 같은 질병을 나타내는 상기 질병모형(220)이 함께 제시될 수 있다. 상기 제시되는 기본모형(210) 및 질병모형(220)은 본 발명인 진료용 그림 편집 시스템에 기설정되어 데이터베이스로부터 불러올 수 있도록 마련된다.
다음으로, 상기 그림수정부(300)는 상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210) 및 질병모형(220)을 편집하여 진료용그림(230)을 생성한다.
상기 그림수정부(300)는 상기 모형표시부(200)에서 추출된 상기 기본모형(210) 및 질병모형(220)을 사용자가 확인한다. 시스템에 의해서 모형이 정확하게 생성되거나 찾아졌다면 사용자는 이를 그대로 사용할 수 있다.
한편, 상기 그림수정부(300)에서는 사용자가 추출된 상기 기본모형(210) 및 질병모형(220)을 수정하거나 보완할 수 있다. 질병의 위치나 크기를 바꿀 수도 있으며 골절의 정도나 혈관 팽창의 정도 또한 바꿀 수 있다. 수정할 수 있는 것은 이 범위에 그치지 않으며 신체 부위 특징에 알맞게 변화시킬 수 있다. 이러한 수정은 기본모형(210)의 요소의 변화에 따라 이루어지는데, 진료용 그림 편집 시스템이 요소들의 정보를 인지하는 함수에 의해 의료정보가 호출되는 것이다.
또한, 상기 기본모형(210) 및 질병모형(220)의 수정은 단지 2D 평면 그림에만 국한되는 것이 아니라 3D 입체 그림으로도 표현할 수 있어 내장 기관을 표시하거나 육안으로 보이지 않는 질병을 표현할 때 효과적이다.
상기 질병모형(220)의 위치를 바꾸면 주위의 장기들 또한 영향을 받아 사용자가 질병의 중증도 또는 발생 빈도에 따라 질병모형(220)의 색을 다르게 할 수도 있다. 예를 들어 발생 빈도가 낮거나 증상의 정도가 심하지 않은 수준이라면 노란색, 치료가 필요한 수준이라면 파란색, 발생 빈도가 잦거나 심각한 수준이라면 빨간색으로 표시가 되는 것이다.
또한, 본 발명인 진료용 그림 편집 시스템에서는 상기 질병모형(220)의 색을 표현할 수 있을 뿐만 아니라 상기 질병모형(220)의 크기 또한 바꿀 수 있다. 종양의 크기가 커진다거나, 혈관의 크기가 팽창하는 경우 등의 상황에서 사용자는 요소를 조작하여 크기를 조절하는 것이다.
여기서, 상기 요소의 변화는 상기 GUI 컨트롤의 조작에 의해 상기 기본모형(210) 및 질병모형(220)의 크기 또는 방향을 전환할 수 있다. 예를 들어 마우스, 중력, 진동, 터치 센서, 마이크, 카메라 중의 하나 이상의 조합으로 입력시켜서 조작할 수 있게 구성될 수 있다. 추가적으로 상기 기본모형(210) 및 질병모형(220)을 편집하는 단계는 상기 GUI 컨트롤이 지시하는 시간의 흐름이나 시점을 화면 내에 그래프의 형태로 길이, 각도, 부피, 숫자 혹은 텍스트를 이용해 표현하여 사용자에게 알려 줄 수 있다. 따라서 상기 GUI 컨트롤의 조작에 따라 [도 7 내지 도 14]의 수정이 가능할 수 있다.
다음으로, 상기 의료정보추출부(400)에서는 상기 텍스트에 맞게 상기 기본모형(210) 및 질병모형(220)들이 생성되고 사용자가 상기 기본모형(210) 및 질병모형(220)들을 알맞게 수정하였다면 상기 수정이 완료된 진료용그림(230)에서 요소의 변화를 인자로 하는 함수에 의해서 의료정보가 추출될 수 있다. 또한 크기, 위치 및 방향 등의 정보를 시스템이 인식하여 의료정보가 추출될 수도 있다.
예를 들어 사용자가 대퇴골의 내고정술(mid diaphysis open reduction internal fixation)을 나타내려할 때, 사용자는 “내고정술” 이라는 텍스트를 입력하거나 또는 내고정술 카테고리에서 “대퇴골 내고정술”을 선택할 수 있다. 이에 따라 시스템에서는 대퇴골 기본모형(210)을 호출하게 되고 사용자가 내고정술이 필요한 기본모형(210)의 위치에 질병모형(220)을 삽입할 수 있다. 이렇게 기본모형(210) 위에 질병모형(220)을 삽입하거나 조정하면 진료용그림(230)의 수정이 완료되고, 완성된 진료용그림(230)에 알맞게 “내고정술이 완료된 대퇴골”의 의료코드를 포함한 의료정보가 추출될 수 있다.
추출된 의료정보를 통해 정보의 정확성을 더할 수 있으며, 타 의료기관, 타 의료진 등과 정보를 공유할 수 있는 토대를 마련할 수 있다.
상기 의료정보는 증상이나 병명뿐만 아니라, 해당 질병의 카테고리, 원인, 위치, 좌우 편측성 또는 추가정보 중 선택된 어느 하나 이상의 정보를 표현할 수 있는 문자 및 숫자로 표현할 수 있다.
다음으로, 상기 저장부(500)는 상기 모형호출부(100)에서 입력된 사용자의 요청, 상기 진료용그림(230) 또는 상기 추출된 의료정보 중 하나 이상을 저장한다.
수정이 완료된 상기 진료용그림(230)과 상기 의료정보추출부(400)에서 추출된 의료코드 등의 의료정보는 데이터화 되어 본 발명 시스템에 저장되며, 상기 저장된 진료용그림(230)은 다음번 같은 텍스트를 입력했을 시 재추출 될 수 있다. 또한, 다양한 기본모형(210) 및 질병모형(220)이 동일한 텍스트에 저장되었다면 상기 다양한 의료모형 중 사용자가 원하는 의료모형을 선택하여 사용할 수 있다. 이러한 정보들은 다른 사용자와 공유할 수 있으며 언어가 다르더라도 함께 공유하는 정보가 될 수 있도록 한다.
상기 과제의 해결 수단에 의해, 본 발명은 자동으로 진료용 그림을 생성할 수 있어 의료진이 그림을 그리는 시간을 절약할 수 있고 빠른 시간 내에 질병의 상태를 표현할 수 있다.
또한, 본 발명은 시스템이 GUI인터페이스 사용을 인식하여 진료용 그림이 자동으로 수정될 수 있다.
또한, 본 발명은 의사를 포함한 의료진이 더 빠르고 간편하게 환자의 상태를 알아볼 수 있다.
또한, 찾아진 그림에서 코드나 질병에 대한 설명 등의 구체적이고 상세한 정보를 추가할 수 있도록 마련되고, 이를 다른 사용자와 공유할 수 있도록 마련되어 있어 상세하고 표준화된 진료용 그림의 생성이 가능해진다.
또한, 본 발명으로 생성된 진료용 그림을 통해 환자가 질병에 대한 이해도를 더 가질 수 있게 되며 치료에 적극적으로 협조할 수 있게 한다.
또한, 본 발명은 진료용 그림을 짧은 시간 안에 만들 수 있어 의료진의 업무 효율성을 높이고 데이터의 정확도를 높이는데 도움이 된다.
또한, 본 발명은 2차원뿐만 아닌 3차원의 진료용 그림 또한 그릴 수 있게 하여 신체 내부 장기의 질병까지 수월하게 표시할 수 있다.
또한, 본 발명은 하나의 GUI인터페이스가 여러 모형과 요소를 동시에 움직일 수 있도록 마련되어 사용자의 입력에 따라 아주 세밀하게 질병 상태를 표현 가능하다.
이와 같이, 상술한 본 발명의 기술적 구성은 본 발명이 속하는 기술분야의 당업자가 본 발명의 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다.
그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해되어야 하고, 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타나며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
S10. 증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 사용자가 입력하여 기본모형과 질병모형 중 하나 이상을 호출하는 모형호출단계
S20. 상기 추출된 의료코드에 따라 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 생성하는 모형표시단계
S30. 상기 생성된 기본모형(210) 및 질병모형(220)을 확인하고 상기 기본모형(210) 및 질병모형(220)을 편집하여 진료용그림(230)을 수정하는 그림수정단계
S40. 상기 수정이 완료된 진료용그림(230)에서 의료정보를 추출하는 의료정보추출단계
S50. 상기 설명정보가 입력된 의료모형을 저장하고 디스플레이하는 그림저장단계
1. 진료용 그림 편집 시스템
100. 모형호출부
200. 모형표시부
210. 기본모형
220. 질병모형
230. 진료용그림
300. 그림수정부
400. 의료정보추출부
500. 저장부
2. 전자의무기록(EMR)
3. 의료기관서버

Claims (20)

  1. 사용자의 요청에 의해 모형을 호출, 혹은 생성하는 모형호출단계(S10);
    상기 모형호출단계(S10)에 의해 호출, 혹은 생성되어 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 표시하는 모형표시단계(S20);
    상기 표시된 기본모형(210) 및 질병모형(220)을 확인하고, 상기 기본모형(210) 및 질병모형(220)을 구성하는 점, 선, 면 및 이들의 집합인 요소의 위치를 옮기거나, 상기 요소의 크기, 위치 및 모양을 조정하여 수정하는 과정을 거쳐 상기 기본모형(210) 및 질병모형(220)을 편집하여 진료용그림(230)을 생성하는 그림수정단계(S30);
    상기 생성된 진료용그림(230)에서 수정 및 편집된 모형을 기준으로 의료정보를 추출하는 의료정보추출단계(S40); 및
    상기 모형호출단계(S10)에서 입력된 사용자의 요청, 상기 진료용그림(230) 또는 상기 추출된 의료정보 중 하나 이상을 저장하는 그림저장단계(S50);를 포함하는 것을 특징으로 하는 진료용 그림 편집 방법.
  2. 제 1항에 있어서,
    상기 모형호출단계(S10)는,
    증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 입력하여 상기 모형을 호출 혹은 생성하는 것을 특징으로 하는 진료용 그림 편집 방법.
  3. 제 1항에 있어서,
    상기 모형호출단계(S10)는,
    음성을 통해 상기 모형을 호출 혹은 생성하는 것을 특징으로 하는 진료용 그림 편집 방법.
  4. 제 1항에 있어서,
    상기 의료정보는,
    증상이나 병명의 카테고리, 원인, 위치, 좌우 편측성 또는 추가정보 중 선택된 어느 하나 이상의 정보를 문자 및 숫자로 표현하는 것을 특징으로 하는 진료용 그림 편집 방법.
  5. 제 1항에 있어서,
    상기 의료정보추출단계(S40)는,
    상기 요소의 변화를 통해 의료정보를 추출하거나, 상기 진료용그림(230)의 크기, 위치 및 방향을 포함하는 모형정보를 인식하여 상기 의료정보를 추출하는 것을 특징으로 하는 진료용 그림 편집 방법.
  6. 제 5항에 있어서,
    상기 요소의 수정은,
    GUI 컨트롤의 조작에 의해 상기 기본모형(210) 및 질병모형(220)의 모양, 크기 또는 방향 중 하나 이상을 변경 가능한 것을 특징으로 하는 진료용 그림 편집 방법.
  7. 제 5항에 있어서,
    상기 요소의 수정은,
    GUI 컨트롤에 의해 하나 이상의 질병모형(220)을 동시에 수정할 수 있는 진료용 그림 편집 방법.
  8. 제 1항에 있어서,
    상기 그림수정단계(S30)는,
    상기 질병모형(220)의 편집에 의해 상기 기본모형(210)의 모양, 크기나 위치중 하나 이상이 자동으로 변화되는 것을 특징으로 하는 진료용 그림 편집 방법.
  9. 제 1항에 있어서,
    상기 모형호출단계(S10)에서 호출된 사용자의 요청과 상기 그림수정단계(S30)에서 생성되는 진료용 그림은 유무선 네트워크를 통해 송수신되어 연동 가능한 것을 특징으로 하는 진료용 그림 편집 방법.
  10. 제 1항 또는 제 9항 중 어느 한 항에 있어서,
    상기 진료용그림(230)은 2D 또는 3D 디스플레이 되는 것을 특징으로 하는 진료용 그림 편집 방법.
  11. 사용자의 요청에 의해 모형을 호출, 혹은 생성하는 모형호출부(100);
    상기 모형호출부(100)에 의해 호출, 혹은 생성되어 신체 부위를 나타내는 기본모형(210) 및 질병을 나타내는 질병모형(220)을 표시하는 모형표시부(200);
    상기 표시된 기본모형(210) 및 질병모형(220)을 확인하고, 상기 기본모형(210) 및 질병모형(220)을 구성하는 점, 선, 면 및 이들의 집합인 요소의 위치를 옮기거나, 상기 요소의 크기, 위치 및 모양을 조정하여 수정하는 과정을 거쳐 상기 기본모형(210) 및 질병모형(220)을 편집하여 진료용그림(230)을 생성하는 그림수정부(300);
    상기 그림수정부(300)에서 수정 및 편집된 모형을 기준으로 의료정보를 추출하는 의료정보추출부(400);
    상기 모형호출부(100)에서 입력된 사용자의 요청, 상기 진료용그림(230) 또는 상기 추출된 의료정보 중 하나 이상을 저장하는 저장부(500);를 포함하는 것을 특징으로 하는 진료용 그림 편집 시스템.
  12. 제 11항에 있어서,
    상기 모형호출부(100)는,
    증상이나 병명에 대한 문장, 단어 및 의료용어를 포함하는 텍스트를 입력하여 상기 모형을 호출 혹은 생성하는 것을 특징으로 하는 진료용 그림 편집 시스템.
  13. 제 11항에 있어서,
    상기 모형호출부(100)는,
    음성을 통해 상기 모형을 호출 혹은 생성하는 것을 특징으로 하는 진료용 그림 편집 시스템.
  14. 제 11항에 있어서,
    상기 의료정보는,
    증상이나 병명의 카테고리, 원인, 위치, 좌우 편측성 또는 추가정보 중 선택된 어느 하나 이상의 정보를 문자 및 숫자로 표현하는 것을 특징으로 하는 진료용 그림 편집 시스템.
  15. 제 11항에 있어서,
    상기 의료정보추출부(400)는,
    상기 요소의 변화를 통해 의료정보를 추출하거나, 상기 진료용그림(230)의 크기, 위치 및 방향을 포함하는 모형정보를 인식하여 상기 의료정보를 추출하는 것을 특징으로 하는 진료용 그림 편집 시스템.
  16. 제 15항에 있어서,
    상기 요소의 수정은,
    GUI 컨트롤의 조작에 의해 상기 기본모형(210) 및 질병모형(220)의 모양, 크기 또는 방향 중 하나 이상을 변경 가능한 것을 특징으로 하는 진료용 그림 편집 시스템.
  17. 제 15항에 있어서,
    상기 요소의 수정은,
    GUI 컨트롤에 의해 하나 이상의 질병모형(220)을 동시에 수정할 수 있는 진료용 그림 편집 시스템.
  18. 제 11항에 있어서,
    상기 그림수정부(300)는,
    상기 질병모형(220)의 편집에 의해 상기 기본모형(210)의 모양, 크기나 위치중 하나 이상이 자동으로 변화되는 것을 특징으로 하는 진료용 그림 편집 시스템.
  19. 제 11항에 있어서,
    상기 모형호출부(100)에서 호출된 사용자의 요청과 상기 그림수정부(300)에서 생성되는 진료용그림(230)은 유무선 네트워크를 통해 송수신되어 연동 가능한 것을 특징으로 하는 진료용 그림 편집 시스템.
  20. 제 11항 또는 제 19항 중 어느 한 항에 있어서,
    상기 진료용그림(230)은 2D 또는 3D 디스플레이 되는 것을 특징으로 하는 진료용 그림 편집 시스템.
KR1020200082548A 2020-07-06 2020-07-06 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법 KR102481236B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200082548A KR102481236B1 (ko) 2020-07-06 2020-07-06 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법
PCT/KR2021/006173 WO2022010091A1 (ko) 2020-07-06 2021-05-18 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200082548A KR102481236B1 (ko) 2020-07-06 2020-07-06 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법

Publications (2)

Publication Number Publication Date
KR20220005123A KR20220005123A (ko) 2022-01-13
KR102481236B1 true KR102481236B1 (ko) 2022-12-23

Family

ID=79341968

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200082548A KR102481236B1 (ko) 2020-07-06 2020-07-06 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법

Country Status (2)

Country Link
KR (1) KR102481236B1 (ko)
WO (1) WO2022010091A1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101837952B1 (ko) * 2016-12-16 2018-03-13 (주)칼리스토 환자 맞춤형 수술치료 애니메이션 디스플레이 방법 및 시스템

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6335176B2 (ja) * 2012-08-31 2018-05-30 釜山大学校産学協力団Ｐｕｓａｎ Ｎａｔｉｏｎａｌ Ｕｎｉｖｅｒｓｉｔｙ Ｉｎｄｕｓｔｒｙ−Ｕｎｉｖｅｒｓｉｔｙ Ｃｏｏｐｅｒａｔｉｏｎ Ｆｏｕｎｄａｔｉｏｎ 医療情報処理システム
KR101903996B1 (ko) * 2012-09-03 2018-12-03 삼성전자주식회사 의료 영상 시뮬레이션 방법 및 그 방법을 이용한 장치
KR20160115269A (ko) * 2015-03-26 2016-10-06 주식회사 한화 건강검진 정보 제공 애플리케이션 및 시스템
KR101810289B1 (ko) * 2015-05-12 2017-12-18 부산대학교 산학협력단 의료 영상 판독 장치 및 의료 영상 판독 장치 동작 방법
KR101981583B1 (ko) 2017-02-27 2019-05-23 재단법인 아산사회복지재단 의료영상 내 정보처리방법
KR102105563B1 (ko) * 2018-05-16 2020-04-28 (주)비주얼터미놀로지 환자 상태 조회 화면 제공 방법 및 환자 상태 조회 화면 제공 시스템
KR20200057426A (ko) * 2018-11-16 2020-05-26 삼성전자주식회사 음성 인식 기반 이미지를 표시하는 전자 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101837952B1 (ko) * 2016-12-16 2018-03-13 (주)칼리스토 환자 맞춤형 수술치료 애니메이션 디스플레이 방법 및 시스템

Also Published As

Publication number Publication date
KR20220005123A (ko) 2022-01-13
WO2022010091A1 (ko) 2022-01-13

Similar Documents

Publication Publication Date Title
US11481987B2 (en) Augmenting real-time views of a patient with three-dimensional data
US20210057080A1 (en) Aligning image data of a patient with actual views of the patient using an optical code affixed to the patient
CN102395320B (zh) 医疗设备以及医疗设备的控制方法
JP5222082B2 (ja) 情報処理装置およびその制御方法、データ処理システム
US20210015583A1 (en) Augmented reality system and method for tele-proctoring a surgical procedure
JP6490985B2 (ja) 医用画像処理装置および医用画像処理システム
Birlo et al. Utility of optical see-through head mounted displays in augmented reality-assisted surgery: A systematic review
Gsaxner et al. The HoloLens in medicine: A systematic review and taxonomy
US20140071072A1 (en) Medical image display apparatus, method and program
JP4492645B2 (ja) 医用画像表示装置及びプログラム
US11395701B1 (en) Method of selecting a specific surgical device for preoperative planning
CN110547869B (zh) 一种基于虚拟现实的术前辅助规划装置
Scharver et al. Designing cranial implants in a haptic augmented reality environment
CN111770735B (zh) 手术仿真信息生成方法及程序
JP6258084B2 (ja) 医用画像表示装置、医用画像表示システムおよび医用画像表示プログラム
KR102481236B1 (ko) 진료용 그림 편집 시스템 및 이를 이용한 진료용 그림 편집 방법
JP2005185767A (ja) 人工関節部材選定支援装置および人工関節部材選定支援プログラム
US11763934B1 (en) Method and apparatus for a simulated physiologic change for CT and MRI examinations
US11090873B1 (en) Optimizing analysis of a 3D printed object through integration of geo-registered virtual objects
CN115188232A (zh) 一种基于mr-3d打印技术的医学教学综合训练系统及方法
KR102457585B1 (ko) 수술 중 혈관 네비게이션 방법 및 시스템
KR20180066588A (ko) 다이콤 영상에서 추출한 복합 3차원 모델을 포함하는 의료 영상을 저장하고 관리하는 시스템 및 방법
WO2018030015A1 (ja) 切離プロセス推定装置及び切離プロセスナビゲーションシステム
KR102500378B1 (ko) 자동 의료그림 생성시스템, 이를 이용한 자동 의료그림 생성 방법 및 머신 러닝 기반의 자동 의료그림 생성 시스템
Preim et al. Clinical Impact of the Tumor Therapy Manager

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant