KR102550465B1 - Artificial intelligence-based virtual patient management system - Google Patents

Artificial intelligence-based virtual patient management system Download PDF

Info

Publication number
KR102550465B1
KR102550465B1 KR1020230026890A KR20230026890A KR102550465B1 KR 102550465 B1 KR102550465 B1 KR 102550465B1 KR 1020230026890 A KR1020230026890 A KR 1020230026890A KR 20230026890 A KR20230026890 A KR 20230026890A KR 102550465 B1 KR102550465 B1 KR 102550465B1
Authority
KR
South Korea
Prior art keywords
lesion
image
patient
virtual
lesion image
Prior art date
Application number
KR1020230026890A
Other languages
Korean (ko)
Inventor
김형민
Original Assignee
주식회사 인포인
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 인포인 filed Critical 주식회사 인포인
Priority to KR1020230026890A priority Critical patent/KR102550465B1/en
Application granted granted Critical
Publication of KR102550465B1 publication Critical patent/KR102550465B1/en

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명에 따른 인공지능 기반의 가상 환자 관리 시스템은, 진단 레이블이 부여된 병변 영상을 저장한 영상 라이브러리; 인공지능을 기반으로 상기 저장된 병변 영상을 질병별로 분류하여 저장한 빅데이터를 구축하는 AI 학습 모듈; 가상 환자의 기본정보 및 병변정보에 대한 가상 조건을 설정하는 조건 설정부와, 상기 가상 조건을 기반으로 상기 빅데이터를 검색하여 병변 영상을 추출하는 영상 추출부를 포함하는 가상 환자 매칭 모듈; 및 상기 추출된 병변 영상을 디스플레이하는 출력 모듈;을 포함하는 것을 특징으로 한다.
본 발명의 인공지능 기반의 가상 환자 관리 시스템에 따르면, 빅데이터를 기반으로 하여 가상 환자의 가상 조건과 일치하는 병변 영상을 추출하여 제공할 수 있도록 함으로써 병원에서 가상의 병변 사례를 이용한 직원 교육을 수행할 수 있고, 의료계열 학생들에게도 가상의 병변 사례를 활용하여 다양한 교육을 제공할 수 있도록 한 효과가 있다.
An artificial intelligence-based virtual patient management system according to the present invention includes an image library storing lesion images to which diagnostic labels are assigned; An AI learning module for classifying the stored lesion images by disease based on artificial intelligence and constructing stored big data; a virtual patient matching module including a condition setting unit for setting virtual conditions for basic information and lesion information of a virtual patient, and an image extraction unit for extracting a lesion image by searching the big data based on the virtual conditions; and an output module displaying the extracted lesion image.
According to the artificial intelligence-based virtual patient management system of the present invention, based on big data, lesion images matching the virtual conditions of virtual patients can be extracted and provided, so that hospitals can perform staff training using virtual lesion cases It can be done, and it is effective to provide various education to medical students by using virtual lesion cases.

Description

인공지능 기반의 가상 환자 관리 시스템{Artificial intelligence-based virtual patient management system} Artificial intelligence-based virtual patient management system}

본 발명은 인공지능 기반의 가상 환자 관리 시스템에 관한 것으로서, 보다 상세히 설명하면 빅데이터에 저장된 병변 영상을 기반으로 가상으로 조건이 설정된 가상 환자에 대한 병변 영상을 추출하여 제공할 수 있는, 신규하고 진보한 가상 환자 관리 시스템에 관한 것이다.The present invention relates to an artificial intelligence-based virtual patient management system, and more specifically, is novel and progressive, capable of extracting and providing a lesion image for a virtual patient whose conditions are virtually set based on a lesion image stored in big data. It is about a virtual patient management system.

빌헬름 뢴트겐이 X-Ray를 발견하면서 시작된 영상의학은 현재 의료 진단 및 치료에서 매우 중요한 역할을 담당하고 있다. 영상의학의 목표는 최소한의 방사선량으로 최대한의 진단 정보를 알아내는 것으로 X-Ray, 초음파. CT, MRI 등이 사용된다. 그러므로 방사선 노출을 최소화하면서 정확한 데이터를 얻을 수 있는 영상의학 방법에 대한 필요성이 주목을 받고 있다. Radiology, which began with the discovery of X-Ray by Wilhelm Roentgen, is currently playing a very important role in medical diagnosis and treatment. The goal of radiology is to find out the maximum diagnostic information with the minimum amount of radiation, such as X-Ray and ultrasound. CT and MRI are used. Therefore, the need for a radiology method capable of obtaining accurate data while minimizing radiation exposure is attracting attention.

한편, 최근 세계적으로 스마트 의료산업이 폭발적인 성장세를 보이는 가운데, 보건 의료 서비스와 정보 통신 기술을 접목해 의료 빅데이터를 기반으로 인공지능(AI)를 활용해 개인의 질병을 예방하고 진단, 예측 및 치료하는 ‘데이터 중심’의 디지털헬스가 주목을 받으며 의료의 패러다임이 변화하고 있다. On the other hand, with the recent explosive growth of the smart medical industry worldwide, health care services and information and communication technology are combined to prevent, diagnose, predict and treat individual diseases by using artificial intelligence (AI) based on medical big data. The paradigm of medical care is changing as 'data-centered' digital health is attracting attention.

이렇듯, 4차 산업의 핵심인 스마트 의료시장에서 ‘가상 환자’가 최근 들어 다양하게 활용되고 있다. 가상 환자란 사람 대상 치료 전 가상 환자를 만들어 인공지능 시뮬레이션을 통해 질병 진단, 예측, 치료 방향 등을 도모하는 최첨단 정밀 의료 예측 기술이다. 머신 러닝 기법을 활용하여 생체 정보와 의료 이미지를 결합해 가상 환자의 데이터를 만들 수 있다. 가상 환자에 대한 충분한 빅데이터를 형성하게 된다면 다양한 만성질환자들 및 응급 환자들에게도 많은 도움이 될 것으로 예측되며, 현재 이러한 가상 환자에 대한 데이터의 품질이 빠르게 발전하고 있다.As such, in the smart medical market, which is the core of the 4th industry, 'virtual patients' have recently been used in various ways. Virtual patient is a state-of-the-art precision medical prediction technology that promotes disease diagnosis, prediction, and treatment direction through artificial intelligence simulation by creating a virtual patient before human treatment. Using machine learning techniques, biometric information and medical images can be combined to create virtual patient data. If enough big data is formed on virtual patients, it is expected to be of great help to patients with various chronic diseases and emergency patients, and the quality of data on these virtual patients is rapidly developing.

이에 대한 선행기술로서, 한국 공개특허 제 10-2022-0111212호에 ‘ 머신 러닝을 이용한 가상 환자 정보 생성 시스템 및 방법’가 개시되어 있다.As a prior art for this, Korean Patent Publication No. 10-2022-0111212 discloses a 'system and method for generating virtual patient information using machine learning'.

상기 선행기술은 머신 러닝을 이용한 가상 환자 정보 시스템 및 방법에 관한 것이다. 공개되어 있고, 사용 가능한 질병 관련 정보 또는 환자의 생체 정보를 수집하는 정보 수집부에 의해 수집된 정보를 바탕으로 머신 러닝을 활용해 각각의 질병에 대해 각각 대응하는 그룹을 형성하고, 형성된 각 그룹에 속하는 환자의 정보(데이터)를 생성하는 정보 생성부, 각 그룹의 환자의 정보(데이터)를 바탕으로 머신 러닝을 활용해 복합 질환을 앓고 있는 새로운 가상 환자군을 각각 생성하는 가상 환자군 생성부, 가상 환자 정보 생성부 등을 활용해 상태 체크 및 동작을 제어하여 명령을 송출하는 머신 러닝을 이용한 가상 환자 정보 생성 시스템이다. The prior art relates to a virtual patient information system and method using machine learning. Based on the information collected by the information collection unit that collects open and available disease-related information or patient biometric information, a group corresponding to each disease is formed using machine learning, and a group corresponding to each disease is formed. An information generation unit that generates information (data) of patients belonging to each group, a virtual patient group generation unit that creates a new virtual patient group suffering from complex diseases by using machine learning based on patient information (data) of each group, and a virtual patient It is a virtual patient information generation system using machine learning that uses information generators to check conditions and control operations to transmit commands.

이렇듯, 머신 러닝 AI 모델을 이용하여 환자의 생체 정보와 의료 영상 등을 결합해 실제 환자와 비슷한 수준의 가상 환자의 정보를 생성해 제공함으로써 의료 현장에서 일반 환자는 물론 응급 환자들의 진료 및 치료에 많은 도움을 줄 수 있다는 장점이 있다고 개시되어 있다. In this way, by combining a patient's biometric information and medical images using a machine learning AI model to generate and provide information on a virtual patient at a level similar to that of a real patient, it can be used in the treatment and treatment of general patients as well as emergency patients in the medical field. It is disclosed that there is an advantage that it can help.

여기에서 더 나아가, 가상 환자의 정보와 가상 조건에 대해 인공지능을 기반으로 진단 레이블이 부여된 실질적인 병변 영상이 저장된 빅데이터를 활용하여 가상 환자에 대한 병변 영상을 예측하여 제공할 수 있는, 신규하고 진보한 가상 환자 관리 시스템을 제공할 필요성이 대두되는 실정이다. Further from this, a new and innovative technology that can predict and provide a lesion image for a virtual patient by utilizing big data storing virtual patient information and actual lesion images to which diagnostic labels have been assigned based on artificial intelligence for virtual conditions. There is a need to provide an advanced virtual patient management system.

한국 공개특허 제 10-2022-0111212호Korean Patent Publication No. 10-2022-0111212

본 발명은 인공지능을 기반으로 병변 영상에 대한 빅데이터를 구축하고 이를 기반으로 가상으로 조건이 설정된 환자에 대한 병변 영상을 추출하여 제공하는 것을 주요 목적으로 한다.The main object of the present invention is to construct big data on lesion images based on artificial intelligence, and based on this, to extract and provide lesion images for patients whose conditions are virtually set.

본 발명의 다른 목적은, 병변 영상의 추출 및 제공을 가상 환자에서 나아가 실제 환자의 예후 예측에 적용하는 것이다.Another object of the present invention is to apply the extraction and provision of lesion images to prediction of the prognosis of real patients beyond virtual patients.

본 발명의 또 다른 목적은, 실제 환자의 예후 예측에 혈액검사 결과 데이터를 더 반영하는 것이다.Another object of the present invention is to further reflect blood test result data in predicting the actual patient's prognosis.

상기 목적을 달성하기 위하여, 본 발명에 따른 인공지능 기반의 가상 환자 관리 시스템은, 진단 레이블이 부여된 병변 영상을 저장한 영상 라이브러리; 인공지능을 기반으로 상기 저장된 병변 영상을 질병별로 분류하여 저장한 빅데이터를 구축하는 AI 학습 모듈; 가상 환자의 기본정보 및 병변정보에 대한 가상 조건을 설정하는 조건 설정부와, 상기 가상 조건을 기반으로 상기 빅데이터를 검색하여 병변 영상을 추출하는 영상 추출부를 포함하는 가상 환자 매칭 모듈; 및 상기 추출된 병변 영상을 디스플레이하는 출력 모듈;을 포함하는 것을 특징으로 한다.In order to achieve the above object, an artificial intelligence-based virtual patient management system according to the present invention includes an image library storing lesion images to which diagnostic labels are assigned; An AI learning module for classifying the stored lesion images by disease based on artificial intelligence and constructing stored big data; a virtual patient matching module including a condition setting unit for setting virtual conditions for basic information and lesion information of a virtual patient, and an image extraction unit for extracting a lesion image by searching the big data based on the virtual conditions; and an output module displaying the extracted lesion image.

나아가, 상기 시스템은, 관리 단말로부터 환자에 대한 진단 레이블이 부여된 병변 영상을 입력받는 병변 영상 입력부와, 상기 관리 단말로부터 상기 환자의 기본정보 및 병변정보에 대한 현재 조건을 입력받는 조건 입력부를 포함하는 환자정보 입력 모듈; 및, 상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 현재 조건을 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 병변 영상을 추출하는 AI 예측 모듈;을 포함하며, 상기 출력 모듈은, 상기 추출된 미래 시점에 대한 병변 영상을 디스플레이하는 기능을 포함하는 것을 특징으로 한다.Furthermore, the system includes a lesion image input unit that receives a lesion image to which a diagnosis label for the patient is assigned from a management terminal, and a condition input unit that receives basic information of the patient and current conditions for the lesion information from the management terminal. a patient information input module to; And, an AI prediction module for extracting a lesion image for a future time point by searching the big data based on the diagnosis label assigned to the lesion image of the patient and the current condition, wherein the output module includes the extracted It is characterized in that it includes a function of displaying a lesion image for a future time point.

더하여, 상기 시스템은, 진단 레이블이 부여된 혈액검사의 각 항목별 결과 데이터를 저장한 검사 라이브러리;를 포함하고, 상기 AI 학습 모듈은, 상기 저장된 병변 영상 및 상기 결과 데이터를 질병별로 분류하여 저장한 빅데이터를 구축하며, 상기 환자정보 입력 모듈은, 관리 단말로부터 상기 환자의 결과 데이터를 입력받는 결과 데이터 입력부를 더 포함하고, 상기 AI 예측 모듈은, 상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 현재 조건과 상기 결과 데이터를 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 병변 영상을 추출하는 것을 특징으로 한다.In addition, the system includes a test library storing result data for each item of a blood test to which a diagnostic label is assigned, wherein the AI learning module classifies and stores the stored lesion images and result data by disease Big data is constructed, and the patient information input module further includes a result data input unit for receiving result data of the patient from a management terminal, and the AI prediction module includes a diagnosis label assigned to the lesion image of the patient and the patient information input module. It is characterized in that a lesion image for a future time point is extracted by searching the big data based on the current condition and the result data.

본 발명의 인공지능 기반의 가상 환자 관리 시스템에 따르면,According to the artificial intelligence-based virtual patient management system of the present invention,

1) 빅데이터를 기반으로 하여 가상 환자의 가상 조건과 일치하는 병변 영상을 추출하여 제공할 수 있도록 함으로써 병원에서 가상의 병변 사례를 이용한 직원 교육을 수행할 수 있고, 의료계열 학생들에게도 가상의 병변 사례를 활용하여 다양한 교육을 제공할 수 있도록 하고,1) Based on big data, by extracting and providing lesion images that match the virtual conditions of virtual patients, hospitals can conduct staff training using virtual lesion cases, and medical students can also use virtual lesion cases. to provide a variety of education,

2) 환자의 병변 영상을 기반으로 미래의 병변의 예후를 실제 사례를 통해 예측하고 판단할 수 있음은 물론이거니와, 이때 빅데이터를 기반으로 검색을 수행하여 환자와 일치도가 가장 높은 병변 영상에 대한 추적 예후 관찰을 가능케 하며,2) Based on the patient's lesion image, it is possible to predict and determine the prognosis of future lesions through actual cases, and at this time, a search is performed based on big data to track the lesion image that has the highest match with the patient. It makes it possible to observe the prognosis,

3) 환자의 미래 시점에 대한 병변 예후 예측에 있어 병변 영상 뿐 아니라 혈액검사의 결과 데이터를 더 반영하는 것이 가능하여 예측의 정확도를 보다 높일 수 있다.3) In predicting the lesion prognosis for the patient's future time point, it is possible to further reflect not only the lesion image but also the blood test result data, thereby increasing the prediction accuracy.

도 1은 본 발명의 가상 환자 관리 시스템의 개략적인 구성도.
도 2는 본 발명의 가상 환자 관리 시스템의 세부 구성을 도시한 블록도.
도 3은 본 발명의 병변 영상의 예시를 나타낸 개념도.
1 is a schematic configuration diagram of a virtual patient management system of the present invention.
Figure 2 is a block diagram showing the detailed configuration of the virtual patient management system of the present invention.
3 is a conceptual diagram showing an example of a lesion image according to the present invention;

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하도록 한다. 첨부된 도면은 축척에 의하여 도시되지 않았으며, 각 도면의 동일한 참조 번호는 동일한 구성 요소를 지칭한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The accompanying drawings are not drawn to scale, and like reference numbers in each drawing indicate like elements.

도 1은 본 발명의 가상 환자 관리 시스템의 개략적인 구성도이다.1 is a schematic configuration diagram of a virtual patient management system of the present invention.

도 1을 참조하여 설명하면, 본 발명의 인공지능 기반의 가상 환자 관리 시스템은 관리 단말(20) 및 메인 서버(10)를 포함하는 것을 특징으로 한다.Referring to FIG. 1 , the artificial intelligence-based virtual patient management system of the present invention is characterized by including a management terminal 20 and a main server 10.

관리 단말(20)은 병변 영상의 입력이나 가상 조건의 설정 등의 기능을 수행하는 단말로서, 이러한 관리 단말(20)은 일반적으로 병원에 설치된 PC일 수도 있고, 병원에 설치된 PC의 그룹이 이루는 병원 서버가 될 수도 있다. 나아가 이러한 관리 단말(20)은 디스플레이를 구비하여 후술할 구성을 통해 추출된 병변 영상이 관리 단말(20)에 설치된 디스플레이를 통해 출력될 수 있음은 물론이다.The management terminal 20 is a terminal that performs functions such as inputting lesion images or setting virtual conditions. Such management terminal 20 may be a PC installed in a hospital in general, or a hospital formed by a group of PCs installed in a hospital. Could be a server. Furthermore, it goes without saying that the management terminal 20 is provided with a display, so that the lesion image extracted through a configuration to be described later can be output through the display installed in the management terminal 20 .

메인 서버(10)는 본 발명의 가상 환자 관리 시스템에 있어 인공지능을 기반으로 병변 영상에 대한 학습 및 추출 기능을 제공하는 주체로서, 본 발명의 시스템의 주체가 곧 메인 서버(10)가 된다고 할 수 있다.The main server 10 is a subject that provides learning and extraction functions for lesion images based on artificial intelligence in the virtual patient management system of the present invention, and the subject of the present invention is the main server 10. can

이러한 메인 서버(10)는 중앙처리장치(CPU) 및 메모리와 하드디스크와 같은 저장수단을 구비한 하드웨어 기반에서 중앙처리장치에서 수행될 수 있는 프로그램, 즉 소프트웨어가 설치되어 이 소프트웨어를 실행할 수 있는데 이러한 소프트웨어에 대한 일련의 구체적 구성을 '모듈' 및 '부', '파트' 등의 구성단위로써 후술할 예정이다.The main server 10 has a central processing unit (CPU) and a hardware-based memory and storage means such as a hard disk, and a program that can be executed in the central processing unit, that is, software is installed and the software can be executed. A series of detailed configurations of the software will be described later as units such as 'modules', 'parts', and 'parts'.

이러한 '모듈' 또는 '부' 또는 '인터페이스' 또는 ‘파트’ 등 의 구성은 메인 서버(10)의 저장수단에 설치 및 저장된 상태에서 CPU 및 메모리를 매개로 실행되는 소프트웨어 또는 FPGA 내지 ASIC과 같은 하드웨어의 일 구성을 의미한다.Configurations such as 'modules' or 'units' or 'interfaces' or 'parts' are software or hardware such as FPGAs or ASICs executed via CPU and memory in a state installed and stored in the storage means of the main server 10 means the work composition of

이때, '모듈' 또는 '부', '인터페이스'라는 구성은 하드웨어에 한정되는 의미는 아니고, 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다.At this time, the configuration of 'module' or 'unit' or 'interface' is not limited to hardware, and may be configured to be in an addressable storage medium or configured to reproduce one or more processors.

일 예로서 '모듈' 또는 '부' 또는 '인터페이스'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다.As an example, 'module' or 'part' or 'interface' refers to components such as software components, object-oriented software components, class components, and task components, processes, functions, and attributes. fields, procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables.

이러한 '모듈' 또는 '부' 또는 '인터페이스'에서 제공되는 기능은 더 작은 수의 구성요소들 및 '부' 또는 '모듈'들로 결합되거나 추가적인 구성요소들과 '부' 또는 '모듈'들로 더 분리될 수 있다.Functions provided by these 'modules' or 'units' or 'interfaces' may be combined into a smaller number of components and 'units' or 'modules', or may be combined into additional components and 'units' or 'modules'. can be further separated.

더불어, 메인 서버(10)는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시예에 따라 해당 하드웨어 장치에서 동작하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다.In addition, the main server 10 means all types of hardware devices including at least one processor, and may be understood as encompassing software configurations operating in the corresponding hardware devices according to embodiments.

예를 들어, 서버의 일 예로서의 컴퓨팅 장치는 스마트폰, 태블릿 PC, 데스크탑, 노트북 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.For example, a computing device as an example of a server may be understood as including all of smart phones, tablet PCs, desktops, laptops, and user clients and applications running on each device, but is not limited thereto.

따라서 인공지능 기반의 가상 환자 관리 시스템을 구성하는 각 구성요소를 기반으로 본 발명의 시스템에 대해 보다 상세히 설명하면 다음과 같다.Therefore, the system of the present invention will be described in more detail based on each component constituting the artificial intelligence-based virtual patient management system.

도 2는 본 발명의 가상 환자 관리 시스템의 세부 구성을 도시한 블록도이고, 도 3은 본 발명의 병변 영상의 예시를 나타낸 개념도이다.2 is a block diagram showing the detailed configuration of the virtual patient management system of the present invention, and FIG. 3 is a conceptual diagram showing an example of a lesion image of the present invention.

도 2,3을 참조하여 설명하면, 본 발명의 인공지능 기반의 가상 환자 관리 시스템은 영상 라이브러리(100), AI 학습 모듈(200), 가상 환자 매칭 모듈(300) 및 출력 모듈(400)을 포함하는 것을 특징으로 한다.2 and 3, the artificial intelligence-based virtual patient management system of the present invention includes an image library 100, an AI learning module 200, a virtual patient matching module 300, and an output module 400. It is characterized by doing.

영상 라이브러리(100)는 진단 레이블이 부여된 병변 영상을 저장한 것으로, 여기서 부여되는 진단 레이블이라 함은 해당 병변 영상을 제공한 환자에 대한 정보, 예를 들어 해당 병변 영상을 제공한 환자의 나이, 성별, 키, 체중 등을 포함함과 동시에 해당 병변 영상에 포함된 질병 및 병변에 대한 정보를 포함할 수 있다.The image library 100 stores lesion images to which diagnostic labels have been assigned. Here, the assigned diagnostic labels refer to information about the patient who provided the corresponding lesion image, for example, the age of the patient who provided the corresponding lesion image, In addition to gender, height, weight, etc., information on diseases and lesions included in the corresponding lesion image may be included.

따라서 질병명, 병변이 발생한 위치, 병변의 크기, 진행 과정이나 기타 참고사항 등이 포함될 수 있으며, 이러한 진단 레이블은 기본적으로 해당 병변 영상을 제공한 환자에 대한 진단서나 조직검사 결과지, 기타 의료 검사나 진단 기록지를 병변 정보로써 포함한 상태에서 환자의 기본정보(나이, 성별, 키, 체중 등)를 포함하며 나아가 진단 일자를 포함하는 것이라 할 수 있다. Therefore, the name of the disease, the location of the lesion, the size of the lesion, the progress, or other references may be included, and such a diagnosis label is basically a diagnosis or biopsy report of the patient who provided the image of the lesion, other medical tests or In the state of including the diagnosis record as lesion information, it can be said that it includes basic information (age, sex, height, weight, etc.) of the patient and further includes the date of diagnosis.

AI 학습 모듈(200)은 인공지능을 기반으로 저장된 병변 영상을 질병별로 분류하여 저장한 빅데이터를 구축하는 기능을 수행한다. 이때는 저장된 병변 영상, 그리고 병변 영상에 부여된 레이블을 기반으로 인공지능, 그 중에서도 바람직하게는 머신 러닝 모델을 이용하여 병변 영상을 각각의 질병별로 분류하여 저장한 빅데이터를 구축하는 기능을 제공한다.The AI learning module 200 performs a function of classifying stored lesion images by disease based on artificial intelligence and constructing stored big data. In this case, based on the stored lesion image and the label assigned to the lesion image, artificial intelligence, preferably a machine learning model, is used to classify the lesion image according to each disease and provide a function of constructing stored big data.

이때 병변 영상, 그리고 병변 영상에 부여된 진단 레이블에 따라 병변 영상을 질병별로 분류함에 있어 진단 레이블에 대한 분석이 철저하게 이루어져야 함은 물론이며, 이때 진단 레이블을 기본으로 병변 영상을 질병별로 분류함은 물론이거니와, 병변의 크기나 위치, 질병의 진행 정도, 환자의 나이, 성별에 따라 보다 세부적인 분류가 이루어지는 것이 보다 바람직하다 할 수 있다.At this time, in classifying the lesion image by disease according to the lesion image and the diagnostic label assigned to the lesion image, the analysis of the diagnostic label must be thoroughly performed. In this case, classifying the lesion image by disease based on the diagnostic label Of course, it is more desirable to make a more detailed classification according to the size or location of the lesion, the degree of progression of the disease, and the age and gender of the patient.

따라서 진단 레이블에 포함된 정보들을 분석하여 병변 영상을 질병별로 분류한다는 것은 병변 영상을 각각의 질병과 대응하는 그룹으로 형성하는 것이라 할 수 있는데, 이때 진단 레이블에 포함된 각각의 정보가 상호 간에 상관관계가 있는지를 파악하여 상관관계가 있을 경우 같은 그룹으로 묶고, 상관관계가 없는 경우에는 다른 그룹으로 그룹화 처리할 수 있다.Therefore, classifying lesion images by disease by analyzing the information included in the diagnostic label can be said to form lesion images into groups corresponding to each disease. At this time, each information included in the diagnostic label correlates with each other. If there is a correlation, it can be grouped into the same group, and if there is no correlation, it can be grouped into another group.

더 나아가 AI 학습 모듈(200)을 통한 학습 및 빅데이터 구축에 있어 학습 효율을 높이기 위해 앙상블(ensemble) 기법을 포함한 머신 러닝을 이용하여 병변 영상 및 병변 영상에 포함된 진단 레이블을 학습하고 이를 기반으로 병변 영상을 질병별로 분류하여 빅데이터를 구축할 수 있다.Furthermore, in order to increase learning efficiency in learning and building big data through the AI learning module 200, machine learning including ensemble techniques are used to learn lesion images and diagnostic labels included in lesion images, and based on this, It is possible to build big data by classifying lesion images by disease.

여기서 앙상블 기법이라 함은 여러 개의 모델을 조합하여 앙상블 학습(Ensemble Learning)은 여러 개의 분류기를 생성하고, 주어진 학습 데이터 집합에 대해서 여러 개의 서로 다른 분류기를 만들고 이들 분류기의 판정 결과를 투표방식이나 가중치 투표방식으로 결합하여 분류를 수행하는 것으로서 학습 성능을 높이기 위한 것이라 할 수 있다.Here, the ensemble technique refers to combining multiple models to generate multiple classifiers in Ensemble Learning, creating multiple different classifiers for a given training data set, and determining the results of these classifiers using a voting method or a weighted vote. It can be said that it is to improve the learning performance as it performs classification by combining in a different way.

가상 환자 매칭 모듈(300)은 가상 환자의 가상 조건을 설정하고, 설정된 가상 조건을 기반으로 상술한 AI 학습 모듈(200)을 통해 구축된 빅데이터를 검색하여 가상 환자의 가상 조건에 맞는 병변 영상을 추출하는 기능을 제공하는 것으로서 이를 위해 조건 설정부(310) 및 영상 추출부(320)를 포함한다.The virtual patient matching module 300 sets virtual conditions of the virtual patient, searches big data built through the above-described AI learning module 200 based on the set virtual conditions, and generates a lesion image that meets the virtual conditions of the virtual patient. It provides a function of extracting, and includes a condition setting unit 310 and an image extraction unit 320 for this purpose.

조건 설정부(310)는 가상 환자의 기본정보 및 병변정보에 대한 가상 조건을 설정하는 것으로, 여기서 가상 환자라 함은 실존하는 환자가 아닌 가상으로 설정된 조건을 가진 환자라는 의미이다. 여기서 기본정보는 성별, 나이, 키, 체중을 포함할 수 있으며 병변정보는 질병의 이름, 병변이 발생한 위치, 병변의 크기 등을 포함할 수 있다.The condition setting unit 310 sets virtual conditions for the basic information and lesion information of the virtual patient, and here, the virtual patient means a patient with conditions set virtually, not an actual patient. Here, the basic information may include gender, age, height, and weight, and the lesion information may include the name of the disease, the location of the lesion, and the size of the lesion.

예를 들어 가상 환자는 가상 조건으로서 기본정보가 여성, 만 34세, 신장 163cm, 몸무게 52kg로 설정될 수 있으며, 병변정보는 진행성 위암, 위치는 하부 1/3(중음부 중심, 후벽), 중분화형 관상선암, 2.8cm*2.6cm 장형, 근육층(pT2) 침윤, 림프혈관 침윤, pT2/pN1 stage로 설정될 수 있다.For example, a virtual patient is a virtual condition, and the basic information can be set as female, age 34, height 163 cm, weight 52 kg, lesion information is advanced gastric cancer, location is lower 1/3 (center of mid vulva, posterior wall), mesodifferentiated type It can be set to tubular adenocarcinoma, 2.8cm*2.6cm long shape, muscle layer (pT2) invasion, lymphovascular invasion, and pT2/pN1 stage.

따라서 이와 같이 기본정보와 병변정보를 포함하는 가상 조건이 설정되는 경우 해당 병변정보에 해당하는 질병을 가진 기본정보의 가상 환자가 생성되는 것이라 할 수 있다.Therefore, when a virtual condition including basic information and lesion information is set, it can be said that a virtual patient with basic information having a disease corresponding to the corresponding lesion information is created.

영상 추출부(320)는 설정된 가상 조건을 기반으로 빅데이터를 검색하여 가상 환자의 가상 조건과 부합하는 병변 영상을 추출하는 기능을 수행한다. 다시 말해 가상 조건을 기반으로 빅데이터를 검색하여 가상 조건과 일치율이 가장 높은 진단 레이블을 가진 병변 영상을 추출하는 기능을 제공한다.The image extraction unit 320 performs a function of extracting a lesion image matching the virtual condition of a virtual patient by searching big data based on set virtual conditions. In other words, it provides a function to search big data based on the virtual condition and extract the lesion image with the diagnostic label that has the highest match rate with the virtual condition.

따라서 영상 라이브러리(100)에 저장된 병변 영상 중 가상 조건과 일치율이 가장 높은 진단 레이블을 가진 병변 영상이 추출될 수 있으며, 이를 통해 가상 환자와 가상 유사한 조건을 가진 병변 영상이 추출된다.Accordingly, among the lesion images stored in the image library 100, a lesion image having a diagnosis label having the highest concordance rate with the virtual condition may be extracted, and a lesion image having a condition virtually similar to that of the virtual patient is extracted through this.

출력 모듈(400)은 추출된 병변 영상을 디스플레이하는 기능을 제공하는 것으로서, 상술한 바와 같이 관리 단말(20)에 구비된 디스플레이를 통해 추출된 병변 영상을 출력할 수 있고, 또는 병원에 설치된 별도의 디스플레이를 통해 추출된 병변 영상을 출력하는 것 역시 가능하다.The output module 400 provides a function of displaying the extracted lesion image. As described above, the output module 400 can output the extracted lesion image through the display provided in the management terminal 20, or a separate image installed in the hospital. It is also possible to output the extracted lesion image through the display.

이와 같은 본 발명의 가상 환자 관리 시스템에 따르면, 빅데이터를 기반으로 하여 가상 환자의 가상 조건과 일치하는 병변 영상을 추출하여 제공할 수 있도록 함으로써 병원에서 가상의 병변 사례를 이용한 직원 교육을 수행할 수 있고, 의료계열 학생들에게도 가상의 병변 사례를 활용하여 다양한 교육을 제공할 수 있음은 물론이다.According to the virtual patient management system of the present invention, by extracting and providing a lesion image matching the virtual patient's virtual condition based on big data, the hospital can perform staff training using virtual lesion cases. Of course, it is possible to provide various education to medical students by using virtual cases of lesions.

더하여 병변 영상을 추출함에 있어 가상 조건의 기준 시점을 설정하고, 기준 시점의 이후의 특정 시점(미래 시점)까지 병변 영상에 포함된 병변이 어떻게 변화할 수 있는지에 대해서도 예측할 수 있는데, 이를 위해 본 발명의 가상 환자 관리 시스템은 추가적인 구성을 더 포함하는 것이 가능하다.In addition, when extracting a lesion image, a reference time point of a virtual condition can be set, and how the lesion included in the lesion image can change until a specific time point (future time point) after the reference point can be predicted. To this end, the present invention The virtual patient management system of may further include additional components.

이를 위해 먼저 조건 설정부(310)에서 설정되는 가상 조건은 가상 환자의 기본정보 및 병변정보에 대한 기준 시점의 가상 조건일 수 있다. 여기서 기준 시점은 현재 시점일 수도 있으며, 관리 단말(20)을 통해 가상으로 설정된 시점일 수도 있다. 가장 간단하게 기준 시점은 현재 시점일 수 있다.To this end, the virtual condition first set by the condition setting unit 310 may be a virtual condition at a reference point in time for the basic information and lesion information of the virtual patient. Here, the reference point of view may be a current point of view or a point of view virtually set through the management terminal 20 . Most simply, the reference point in time may be the current point in time.

이 경우 영상 추출부(320)는 해당 기준 시점을 기준으로 병변 영상을 1차 추출하고, 기준 시점의 미래 시점을 예측하여 가상 환자의 미래 예후에 대한 병변 영상을 2차 추출하는 것이 가능한데, 이를 위해 영상 추출부(320)는 현재 영상 추출파트(321)와 미래 영상 추출파트(322)를 포함할 수 있다.In this case, the image extraction unit 320 can firstly extract a lesion image based on a corresponding reference time point, predict a future time point of the reference time point, and secondly extract a lesion image for a future prognosis of a virtual patient. The image extraction unit 320 may include a current image extraction part 321 and a future image extraction part 322 .

현재 영상 추출파트(321)는 상기 기준 시점의 가상 조건을 기반으로 상기 빅데이터를 검색하여 상기 병변 영상을 1차 추출하는 기능을 수행하는 것으로, 여기서 영상 추출파트를 통해 병변 영상을 1차 추출하는 것은 상술한 영상 추출부(320)의 기본 구성 및 기능과 같으므로 보다 상세한 설명은 생략토록 한다.The current image extraction part 321 performs a function of first extracting the lesion image by searching the big data based on the virtual condition of the reference point in time, wherein the lesion image is first extracted through the image extraction part Since it is the same as the basic configuration and function of the above-described image extraction unit 320, a detailed description thereof will be omitted.

미래 영상 추출파트(322)는 1차 추출된 병변 영상의 진단 레이블을 기반으로 상기 빅데이터를 검색하여 상기 기준 시점 이후의 특정 시점인 미래 시점에 대한 병변 영상을 2차 추출하는 기능을 수행하는 것으로서, 1차 추출된 병변 영상의 진단 레이블을 파악하여 해당 병변 영상의 촬영 일자 및 병변 영상에 포함된 병변 정보 및 해당 병변 영상을 제공한 환자에 대한 정보를 기반으로, 기준 시점 이후의 특정 시점인 미래 시점에 대한 병변 영상을 2차 추출하는 기능을 수행한다.The future image extraction part 322 searches the big data based on the diagnostic label of the primary extracted lesion image, and performs a function of secondary extraction of a lesion image for a specific future point in time after the reference point in time. , The diagnostic label of the primary extracted lesion image is identified, and based on the date the lesion image was taken, the lesion information included in the lesion image, and the information on the patient who provided the lesion image, a specific time point after the reference point, the future Performs the function of secondary extraction of the lesion image for the viewpoint.

이는 일반적으로 병변이 발생했을 시 특정 시점에만 일시적으로 병변 영상을 촬영하는 것이 아니라 주기적으로 병변을 추적 관찰하기 위해 반복적으로 병변 영상을 촬영한다는 것에서 착안한 것으로, 1차 추출된 병변 영상의 진단 레이블을 참조하여 해당 병변 영상을 제공한 환자가 미래 시점에 반복적으로 촬영한 병변 영상을 2차 추출하는 것이라 할 수 있다. 여기서 2차 추출된 병변 영상은 따라서 이러한 미래 시점의 병변 영상은 기준 시점 대비 3개월 이후 병변 영상, 6개월 이후 병변 영상, 12개월 이후 병변 영상 등일 수 있다.This is based on the fact that lesion images are taken repeatedly to monitor the lesion periodically, rather than temporarily taking a lesion image only at a specific point in time when a lesion occurs in general. Referring to this, it can be said that the patient who provided the corresponding lesion image performs secondary extraction of the lesion image repeatedly taken at a future point in time. Here, the secondaryly extracted lesion image may be a lesion image after 3 months, a lesion image after 6 months, a lesion image after 12 months, and the like, compared to the reference time point.

따라서 이와 같은 현재 영상 추출파트(321) 및 미래 영상 추출파트(322)에 의하면 가상 조건을 기반으로 1차 추출된 병변 영상, 그리고 해당 병변 영상의 진단 레이블을 기반으로 병변 영상이 1차 추출된 시점보다 미래 시점에서 병변 영상을 2차 추출한다.Therefore, according to the current image extraction part 321 and the future image extraction part 322, the first extracted lesion image based on the virtual condition and the first extracted lesion image based on the diagnosis label of the corresponding lesion image Secondary extraction of lesion images at a future time point.

다시 말해 기준 시점의 가상 조건을 기준으로 1차 추출된 병변 영상 / 그리고 기준 시점보다 이후 시점인 미래 시점의 2차 추출된 병변 영상을 함께 추출하는 것이다.In other words, the primary extracted lesion image based on the virtual conditions of the reference point in time and the secondary extracted lesion image of a future point in time after the reference point are extracted together.

이를 통해 1차 추출된 병변 영상에 포함된 병변이 미래 시점에 어떻게 변화할 것인지를 2차 추출될 병변 영상을 통해 예측할 수 있으며, 이 경우 출력 모듈(400)은 1차 추출된 병변 영상 및 2차 추출된 병변 영상을 디스플레이하여 1차 추출된 병변 영상에 포함된 병변이 미래 시점에 어떻게 변화할 수 있는지를 예측하는 것이 가능하다.Through this, it is possible to predict how the lesion included in the primary extracted lesion image will change in the future through the secondary extracted lesion image. In this case, the output module 400 outputs the primary extracted lesion image and the secondary extracted lesion image. By displaying the extracted lesion image, it is possible to predict how the lesion included in the primary extracted lesion image may change in the future.

더 나아가 본 발명의 가상 환자 관리 시스템은 빅데이터로부터 가상 환자의 가상 조건에 부합하는 병변 영상을 추출하는 것에서 더 나아가 실제 환자의 병변 영상을 기반으로 해당 환자의 미래 시점의 병변 영상을 예측하여 제공하는 것이 가능한데, 이를 위해 본 발명의 시스템은 환자정보 입력 모듈(500) 및 AI 예측 모듈(600)을 더 포함할 수 있다.Furthermore, the virtual patient management system of the present invention goes beyond extracting a lesion image that meets the virtual condition of a virtual patient from big data to predict and provide a lesion image of the patient at a future point in time based on a lesion image of an actual patient. It is possible, for this purpose, the system of the present invention may further include a patient information input module 500 and an AI prediction module 600.

환자정보 입력 모듈(500)은 관리 단말(20)로부터 환자에 대한 병변 영상 및 환자의 현재 조건을 입력받는 기능을 수행하는 것으로, 이를 위해 병변 영상 입력부(510) 및 조건 입력부(520)를 포함한다.The patient information input module 500 performs a function of receiving a lesion image of the patient and the current condition of the patient from the management terminal 20, and includes a lesion image input unit 510 and a condition input unit 520 for this purpose. .

병변 영상 입력부(510)는 관리 단말(20)로부터 특정 환자에 대한 병변 영상을 입력받는 것으로, 해당 병변 영상 역시 진단 레이블이 부여되어 있어야 함은 물론이다.The lesion image input unit 510 receives a lesion image for a specific patient from the management terminal 20, and the corresponding lesion image must also be assigned a diagnostic label.

조건 입력부(520)는 관리 단말(20)로부터 상기 환자의 기본정보 및 병변정보에 대한 현재 조건을 입력받는 기능을 수행하는 것으로, 진단 레이블뿐 아니라 해당 환자의 자세한 병변정보, 기본정보를 더 입력받을 수 있도록 한 것이다. 만약 병변정보에 포함된 사항이 진단 레이블에 모두 포함되어 있는 경우 병변정보는 진단 레이블에 포함된 내용으로 대체가 가능할 수도 있음은 물론이다.The condition input unit 520 performs a function of receiving input of the patient's basic information and current conditions for the lesion information from the management terminal 20, and receives detailed lesion information and basic information of the patient as well as the diagnosis label. that made it possible If all items included in the lesion information are included in the diagnosis label, the lesion information may be replaced with the contents included in the diagnosis label, of course.

즉, 진단 레이블에 포함된 내용 중 병변정보에 대응되는 내용이 병변정보로써 입력될 수도 있고, 만약 진단 레이블에 환자의 기본정보 역시 포함되어 있는 경우 진단 레이블에 포함된 내용 중 기본정보에 해당하는 내용이 기본정보로써 입력될 수 있다.That is, among the contents included in the diagnosis label, contents corresponding to the lesion information may be input as lesion information, and if the basic information of the patient is also included in the diagnosis label, contents corresponding to the basic information among the contents included in the diagnosis label It can be input as this basic information.

AI 예측 모듈(600)은 상기 환자의 병변 영상에 부여된 진단 레이블 및 설정된 현재 조건을 기반으로 상기 빅데이터를 검색하여 미래의 특정 시점에 대한 병변 영상을 추출하는 기능을 수행한다.The AI prediction module 600 performs a function of extracting a lesion image for a specific time point in the future by searching the big data based on the diagnosis label assigned to the patient's lesion image and the set current condition.

여기서 미래의 특정 시점에 대한 병변 영상을 추출한다 함은 상술한 미래 영상 추출파트(322)에서와 같이 환자의 병변 영상에 부여된 진단 레이블 및 현재 조건을 기반으로 상기 빅데이터를 검색하여, 현재 시점보다 이후 시점인 미래 시점에 대한 병변 영상을 추출하는 것이다.Here, extracting a lesion image for a specific time point in the future means, as in the above-described future image extraction part 322, by searching the big data based on the diagnosis label assigned to the patient's lesion image and the current condition, It is to extract a lesion image for a future time point, which is a later time point.

보다 상세히 설명하면, 즉 환자의 진단 레이블 및 현재 조건과 가장 유사한 진단 레이블을 가진 병변 영상을 일차 추출한 다음, 일차 추출된 병변 영상의 진단 레이블을 참조하여 일차 추출된 병변 영상을 제공한 환자가 미래 시점에 촬영한 병변 영상을 추출해내는 것이다.More specifically, after primary extraction of a lesion image having a diagnostic label most similar to the patient's diagnostic label and current condition, and then referring to the diagnostic label of the primary extracted lesion image, the patient who provides the primary extracted lesion image is a future viewpoint. It is to extract the image of the lesion photographed on .

여기서 미래 시점이라 함은 일차 추출된 병변 영상을 촬영한 시점 이후의 시점을 일컫는 것이라고도 할 수 있다. 예를 들어 일차 추출된 병변 영상 촬영 시점부터 3개월 후, 6개월 후, 12개월 후가 될 수 있다. Here, the future point of view may refer to a point of time after the point of time when the primary extracted lesion image was taken. For example, it may be 3 months, 6 months, or 12 months after the primary extracted lesion image is taken.

이때 1차 추출된 병변 영상이 여러 개인 경우 미래 시점에 대한 병변 영상도 여러 개일 수 있으며, 따라서 환자의 진단 레이블과 유사한 진단 레이블을 가진 병변 영상(1차 추출된 병변 영상)을 먼저 추출하고, 나아가 1차 추출된 병변 영상의 진단 레이블을 기반으로 하여 해당 환자가 촬영 시점으로부터 이후 시점인 미래 시점에 촬영한 병변 영상이 추출될 수 있는 것이다.In this case, if there are multiple primary extracted lesion images, there may be multiple lesion images for future time points. Therefore, a lesion image (primarily extracted lesion image) having a diagnostic label similar to that of the patient is first extracted, and further Based on the diagnosis label of the primary extracted lesion image, a lesion image taken at a future time point, i.e., a later time point from the time of the imaging, can be extracted.

따라서 이러한 미래 시점의 병변 영상은 현재 시점 대비 3개월 이후 병변 영상, 6개월 이후 병변 영상, 12개월 이후 병변 영상일 수 있으며, 1차 추출된 병변 영상의 개수와 같거나 더 많을 수 있음은 물론이다.Therefore, the lesion image at the future time point may be a lesion image after 3 months, a lesion image after 6 months, and a lesion image after 12 months compared to the current time point, and the number of lesion images extracted first may be equal to or more than that of course. .

따라서 이와 같이 미래 시점에 대한 병변 영상이 출력되는 경우, 출력 모듈(400)을 통해 추출된 미래 시점에 대한 병변 영상을 디스플레이할 수 있다.Accordingly, when a lesion image for a future viewpoint is output in this way, the lesion image for a future viewpoint extracted through the output module 400 can be displayed.

그러므로 결과적으로 관리 단말(20)로부터 환자의 병변 영상을 입력하고 현재 조건을 입력하면, 병변 영상에 포함된 진단 레이블 및 현재 조건을 분석하여 빅데이터에 저장된 병변 영상 중 환자의 병변 영상과 가장 일치도가 높은, 유사한 병변 영상을 일차적으로 추출하고, 일차 추출된 병변 영상의 진단 레이블을 기반으로, 일차 추출된 병변 영상을 제공한 환자가 그 이후 시점(미래 시점)에 제공한 병변 영상을 찾아 이를 이차 추출하여 제공하게 된다.Therefore, as a result, when the patient's lesion image is input from the management terminal 20 and the current condition is entered, the diagnosis label included in the lesion image and the current condition are analyzed to obtain the most consistent match with the patient's lesion image among the lesion images stored in the big data. High, similar lesion images are primarily extracted, and based on the diagnostic label of the primary extracted lesion image, the lesion image provided by the patient who provided the primary extracted lesion image at a later time point (future time point) is searched for and secondary extraction is performed. will be provided.

다시 말해 관리 단말(20)로부터 입력된 환자를 관리 대상 환자라고 한다면, 관리 대상 환자의 병변 영상을 기반으로 하여 빅데이터에 저장된 병변 영상 중 관리 대상 환자와 가장 유사한 병변 영상을 추출하고, 추출된 병변 영상에 대응되는 환자의 미래 시점의 병변 영상을 제공할 수 있어 관리 대상 환자의 미래의 병변 영상을 예측할 수 있도록 한 것이다.In other words, if the patient input from the management terminal 20 is a patient to be managed, the lesion image most similar to the patient to be managed is extracted from among the lesion images stored in the big data based on the lesion image of the patient to be managed, and the extracted lesion It is possible to provide a lesion image of a patient corresponding to the image at a future point of view, so that the future lesion image of the patient to be managed can be predicted.

이를 통해 환자의 미래 시점의 병변 영상의 예후를 예측하여 제공할 수 있게 되어, 환자의 병변 영상을 기반으로 미래의 병변의 예후를 실제 사례를 통해 예측하고 판단할 수 있음은 물론이거니와, 이때 빅데이터를 기반으로 검색을 수행하여 환자와 일치도가 가장 높은 병변 영상에 대한 추적 예후 관찰을 가능케 할 수 있다.Through this, it is possible to predict and provide the prognosis of the patient's lesion image at the future point of view, and based on the patient's lesion image, the prognosis of the future lesion can be predicted and judged through actual cases, as well as big data at this time. By performing a search based on , it is possible to observe the follow-up prognosis for the lesion image that has the highest concordance with the patient.

나아가 이때 미래 시점의 병변 영상을 추출함에 있어 미래 시점의 병변 영상은 적어도 하나 이상 추출될 수 있는데, 이는 상술한 설명에서 일차적으로 추출된 병변 영상이 하나일 경우에도 현재 시점 대비 3개월 이후 병변 영상, 6개월 이후 병변 영상, 12개월 이후 병변 영상과 같이 여러 개가 산출될 수 있고, 일차적으로 추출된 병변 영상이 여러 개인 경우에는 미래 시점의 병변 영상 역시 복수 개일 수밖에 없다. 따라서 미래 시점의 병변 영상을 일반적으로 복수 개가 추출된다 할 수 있다.Furthermore, at this time, in extracting the lesion image of the future viewpoint, at least one lesion image of the future viewpoint may be extracted. Several lesion images can be produced, such as a lesion image after 6 months and a lesion image after 12 months. Therefore, it can be said that a plurality of lesion images of a future viewpoint are generally extracted.

이때 특정 시점을 기준으로 그 이후 시점인 미래 시점에 있어, 특정 시점보다 병변은 악화될 수도, 완화될 수도 있기 마련이다. 따라서 미래 시점의 병변 영상은 병변의 악화/완화에 따라 천차만별로 달라질 수 있다.In this case, at a future point in time, which is a later point in time based on a specific point in time, the lesion may be worse or alleviated than at a specific point in time. Therefore, the image of the lesion at a future point of view may vary greatly depending on the deterioration/remission of the lesion.

이를 반영하여 미래 시점의 병변 영상을 제공할 수 있도록, 본 발명의 AI 예측 모듈(600)은 기본 추출부(610), 악화 영상 지정부(620) 및 완화 영상 지정부(630)를 포함할 수 있다.In order to reflect this and provide a lesion image at a future viewpoint, the AI prediction module 600 of the present invention may include a basic extraction unit 610, an aggravated image designation unit 620, and a relief image designation unit 630. there is.

기본 추출부(610)는 AI 예측 모듈(600)의 기본 구성이라고도 할 수 있으며, 환자의 병변 영상에 부여된 진단 레이블 및 현재 조건을 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 복수의 병변 영상을 추출하는 기능을 제공한다. 이러한 기본 추출부(610)의 구성 및 기능은 상술한 AI 예측 모듈(600)을 참조하면 되므로 보다 상세한 설명은 생략하도록 한다.The basic extractor 610 can also be referred to as the basic component of the AI prediction module 600, and searches the big data based on the diagnosis label given to the patient's lesion image and the current condition to search for a plurality of lesion images for a future viewpoint. Provides a function to extract . Since the configuration and functions of the basic extractor 610 can be referred to the AI prediction module 600 described above, a detailed description thereof will be omitted.

악화 영상 지정부(620)는 추출된 복수의 병변 영상 중 상기 환자의 현재 조건보다 악화된 진단 레이블을 갖는 병변 영상을 악화 영상으로 지정하는 기능을 수행한다. 여기서 악화라 함은 병변의 크기가 커졌거나, 병변의 침윤이 심해졌거나, 병변이 전이되거나 병변이 기존 위치와 다른 위치에 추가적으로 생성되는 등 병원의 진단 상 병변이 악화된 것이라고 판단될 수 있는 모든 경우를 포함한다. 이는 일반적으로 병변 영상에 포함된 진단 레이블에 포함된 정보를 기준으로 판단이 가능하다.The deteriorating image designation unit 620 performs a function of designating a lesion image having a diagnosis label worse than the patient's current condition among the extracted lesion images as the deteriorating image. Deterioration here refers to all cases in which the lesion can be judged to have deteriorated based on the diagnosis of the hospital, such as an increase in the size of the lesion, increased infiltration of the lesion, metastasis of the lesion, or additional formation of a lesion in a different location from the original location. includes This can be determined based on the information included in the diagnostic label included in the lesion image.

즉 추출된 병변 영상의 진단 레이블을 환자의 현재 조건과 비교하여 환자의 현재 조건보다 악화된 상태의 병변 영상만을 재추출하여 이를 악화 영상으로 지정하는 것이라 할 수 있다.In other words, it can be said that the diagnosis label of the extracted lesion image is compared with the patient's current condition, and only the lesion image in a state worse than the patient's current condition is re-extracted and designated as an aggravated image.

완화 영상 지정부(630)는 추출된 복수의 병변 영상 중 상기 환자의 현재 조건보다 완화된 진단 레이블을 갖는 병변 영상을 완화 영상으로 지정하는 기능을 수행하는 것으로, 여기서 악화라 함은 병변의 크기가 작아졌거나, 병변의 침윤이 얕아졌거나, 병변이 소멸되는 등 병원의 진단 상 병변이 완화된 것이라고 판단될 수 있는 모든 경우를 포함한다. 이 역시 일반적으로 병변 영상에 포함된 진단 레이블에 포함된 정보를 기준으로 판단이 가능하다.The palliative image designation unit 630 performs a function of designating, as a palliative image, a lesion image having a diagnosis label more palliative than that of the patient's current condition among a plurality of extracted lesion images. All cases that can be judged to be alleviated by hospital diagnosis, such as small size, shallow invasion, or disappearance of the lesion, are included. This can also be determined based on the information included in the diagnostic label included in the lesion image.

즉 추출된 병변 영상의 진단 레이블을 환자의 현재 조건과 비교하여 환자의 현재 조건보다 완화된 상태의 병변 영상만을 재추출하여 이를 완화 영상으로 지정하는 것이라 할 수 있다.In other words, it can be said that the diagnosis label of the extracted lesion image is compared with the patient's current condition, and only the lesion image in a more relaxed state than the patient's current condition is re-extracted and designated as the alleviated image.

따라서 이와 같이 악화 영상 및 완화 영상이 지정되는 경우, 출력 모듈(400)을 통해 악화 영상 및 완화 영상을 디스플레이할 수 있어 환자의 병변 영상이 악화된 모습을 예상한 미래의 병변 영상(악화 영상), 환자의 병변 영상이 완화된 모습을 예상한 미래의 병변 영상(완화 영상)을 기반으로 직원 교육이나 환자 진료에 이용할 수 있음은 물론이다.Therefore, when the aggravated image and the ameliorated image are designated in this way, the aggravated image and the ameliorated image can be displayed through the output module 400, so that the patient's lesion image is expected to deteriorate in the future lesion image (aggravated image), Of course, it can be used for staff training or patient treatment based on future lesion images (relief images) in which the image of the patient's lesion is expected to be alleviated.

또 다른 구성으로서 환자의 병변 영상에 포함된 진단 레이블 및 현재 조건 기반으로 빅데이터를 검색하여 미래 시점의 병변 영상을 예측하고 추출해냄에 있어 예측 정확성을 높이기 위해 환자의 혈액검사 데이터를 더 이용할 수 있다.As another configuration, the patient's blood test data can be further used to improve prediction accuracy in predicting and extracting a lesion image at a future point in time by searching big data based on the diagnosis label included in the patient's lesion image and the current condition. .

먼저 본 발명의 시스템은 검사 라이브러리(700)를 포함하여 혈액검사의 각 항목별 결과 데이터를 저장하는 것이 가능하다. 이때 혈액검사에 포함될 수 있는 항목에는 제한을 두지 않으나, 일반적으로 혈액검사에 포함될 수 있는 항목은 백혈구수, 적혈구수, 헤모글로빈수, 헤마토크릿, 혈소판, 평균적혈구용적, 혈당수치, 혈청 크레아티닌수치, 지질수치 등이 있을 수 있으며 언급하지 않은 항목일지라도 혈액검사를 통해 파악이 가능한 것이라면 그 제한을 두지 않는다.First, the system of the present invention includes the test library 700 and can store result data for each item of a blood test. At this time, there are no restrictions on the items that can be included in the blood test, but in general, the items that can be included in the blood test are white blood cell count, red blood cell count, hemoglobin count, hematocrit, platelets, mean red blood cell volume, blood sugar level, serum creatinine level, lipid level Even if there are items not mentioned, if they can be identified through a blood test, they are not limited.

따라서 혈액검사를 수행하여 얻은 각 항목별 결과 데이터가 검사 라이브러리(700)에 저장되는 것이며, 바람직하게는 해당 혈액검사의 결과 데이터에 대해서도 진단 레이블이 부여되어 있을 수 있다. 이때 진단 레이블은 상술한 설명을 참조하면 되며, 해당 혈액검사 결과를 통해 의심되는 병명 등이 진단 레이블로서 결과 데이터에 부여될 수 있다.Therefore, result data for each item obtained by performing a blood test is stored in the test library 700, and preferably, a diagnostic label may be assigned to the result data of the corresponding blood test. In this case, the diagnosis label may refer to the above description, and the name of a disease suspected through the corresponding blood test result may be assigned to the result data as a diagnosis label.

나아가 이와 같이 검사 라이브러리(700)에 혈액검사의 결과 데이터가 저장되는 경우, AI 학습 모듈(200)은 빅데이터 구축 시 저장된 병변 영상 및 결과 데이터를 질병별로 분류하여 저장하는 방식으로 빅데이터를 구축할 수 있다. 이는 상술한 바와 같이 진단 레이블을 기반으로 병변 영상 및 결과 데이터를 질병별로 분류하여 저장하는 것이라 할 수 있다.Furthermore, when blood test result data is stored in the test library 700 in this way, the AI learning module 200 constructs big data by classifying and storing the stored lesion images and result data by disease when constructing big data. can As described above, it can be said that lesion images and result data are classified and stored by disease based on the diagnosis label.

보다 자세하게는 이때 병변 영상 및 결과 데이터를 질병별로 분류함에 있어 진단 레이블에 대한 분석이 철저하게 이루어져야 함은 물론이며, 이때 진단 레이블을 기본으로 병변 영상 및 결과 데이터를 질병별로 분류함은 물론이거니와, 동일한 질병으로 분류된 병변 영상 및 결과 데이터를 분석하여 병변 영상과 결과 데이터 사이의 인과관계를 분석하는 것도 가능함은 물론이다.More specifically, at this time, in classifying the lesion image and result data by disease, the analysis of the diagnosis label must be thoroughly performed. Of course, it is also possible to analyze the causal relationship between the lesion image and the result data by analyzing the lesion image classified as a disease and the result data.

따라서 진단 레이블에 포함된 정보들을 분석하여 병변 영상 및 결과 데이터를 질병별로 분류한다는 것은 병변 영상과 결과 데이터를 각각의 질병과 대응하는 그룹으로 형성하는 것이라 할 수 있는데, 이때 진단 레이블에 포함된 각각의 정보가 상호 간에 상관관계가 있는지를 파악하여 상관관계가 있을 경우 같은 그룹으로 묶고, 상관관계가 없는 경우에는 다른 그룹으로 그룹화 처리할 수 있다.Therefore, classifying the lesion image and result data by disease by analyzing the information included in the diagnostic label can be said to form the lesion image and result data into a group corresponding to each disease. It is possible to determine whether information is correlated with each other, group it into the same group if there is a correlation, and group it into another group if there is no correlation.

이와 같이 빅데이터 구축이 이루어지면, 환자의 병변 영상 입력을 기반으로 미래의 병변 영상을 예측하는 상술한 구성을 결과 데이터를 통해 더 정교화하는 것이 가능한데, 이를 위해 환자정보 입력 모듈(500)은 결과 데이터 입력부(530)를 포함하여 관리 단말(20)로부터 환자의 혈액검사에 대한 결과 데이터를 입력받을 수 있고, AI 예측 모듈(600)은 상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 현재 조건과 상기 결과 데이터를 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 병변 영상을 추출하는 것이 가능하다.If big data is constructed in this way, it is possible to further refine the above-described configuration of predicting a future lesion image based on a patient's lesion image input through result data. To this end, the patient information input module 500 uses the result data The patient's blood test result data may be received from the management terminal 20 including the input unit 530, and the AI prediction module 600 may use the diagnostic label assigned to the patient's lesion image and the current condition and the patient's lesion image. Based on the resulting data, it is possible to search the big data and extract a lesion image for a future time point.

여기서 미래의 특정 시점에 대한 병변 영상을 추출한다 함은 상술한 미래 영상 추출파트(322)에서와 같이 환자의 병변 영상에 부여된 진단 레이블 및 현재 조건, 그리고 환자의 결과 데이터를 기반으로 상기 빅데이터를 검색하여, 현재 시점보다 이후 시점인 미래 시점에 대한 병변 영상을 추출하는 것이다.Here, extracting a lesion image for a specific time point in the future means, as in the future image extraction part 322 described above, based on the diagnosis label assigned to the patient's lesion image, the current condition, and the patient's result data, the big data is searched for, and a lesion image for a future time point, which is later than the current time point, is extracted.

보다 상세히 설명하면, 즉 빅데이터 상에서 환자의 진단 레이블. 현재 조건 및 결과 데이터와의 유사도가 가장 높은 그룹의 병변 영상을 일차 추출한 다음, 일차 추출된 병변 영상의 진단 레이블을 참조하여 일차 추출된 병변 영상을 제공한 환자가 미래 시점에 촬영한 병변 영상을 추출해내는 것이다.More specifically, the patient's diagnostic label on big data. After primary extraction of the lesion image of the group with the highest similarity with the current condition and result data, a lesion image taken at a future time point by the patient who provided the primary extracted lesion image is extracted by referring to the diagnosis label of the primary extracted lesion image. is to pay

여기서 미래 시점이라 함은 일차 추출된 병변 영상을 촬영한 시점 이후의 시점을 일컫는 것이라고도 할 수 있다. 예를 들어 일차 추출된 병변 영상 촬영 시점부터 3개월 후, 6개월 후, 12개월 후가 될 수 있다. Here, the future point of view may refer to a point of time after the point of time when the primary extracted lesion image was taken. For example, it may be 3 months, 6 months, or 12 months after the primary extracted lesion image is taken.

이때 1차 추출된 병변 영상이 여러 개인 경우 미래 시점에 대한 병변 영상도 여러 개일 수 있으며, 따라서 환자의 진단 레이블과 유사한 진단 레이블을 가진 병변 영상(1차 추출된 병변 영상)을 먼저 추출하고, 나아가 1차 추출된 병변 영상의 진단 레이블을 기반으로 하여 해당 환자가 촬영 시점으로부터 이후 시점인 미래 시점에 촬영한 병변 영상이 추출될 수 있는 것이다.In this case, if there are multiple primary extracted lesion images, there may be multiple lesion images for future time points. Therefore, a lesion image (primarily extracted lesion image) having a diagnostic label similar to that of the patient is first extracted, and further Based on the diagnosis label of the primary extracted lesion image, a lesion image taken at a future time point, i.e., a later time point from the time of the imaging, can be extracted.

따라서 이러한 미래 시점의 병변 영상은 현재 시점 대비 3개월 이후 병변 영상, 6개월 이후 병변 영상, 12개월 이후 병변 영상일 수 있으며, 1차 추출된 병변 영상의 개수와 같거나 더 많을 수 있음은 물론이다.Therefore, the lesion image at the future time point may be a lesion image after 3 months, a lesion image after 6 months, and a lesion image after 12 months compared to the current time point, and the number of lesion images extracted first may be equal to or more than that of course. .

따라서 이와 같이 미래 시점에 대한 병변 영상이 출력되는 경우, 출력 모듈(400)을 통해 추출된 미래 시점에 대한 병변 영상을 디스플레이할 수 있다.Accordingly, when a lesion image for a future viewpoint is output in this way, the lesion image for a future viewpoint extracted through the output module 400 can be displayed.

이러한 AI 예측 모듈(600)의 세부 구성에 따르면, 환자의 미래 시점에 대한 병변 예후 예측에 있어 병변 영상 뿐 아니라 혈액검사의 결과 데이터를 더 반영하는 것이 가능하여 예측의 정확도를 보다 높이는 것이 가능하다.According to the detailed configuration of the AI prediction module 600, it is possible to further reflect not only the lesion image but also the result data of the blood test in predicting the lesion prognosis for the future time point of the patient, thereby increasing the prediction accuracy.

더불어 환자의 예후를 예측함에 있어 혈액검사에 대한 결과 데이터를 반영하는 것에서 더 나아가 환자의 생활습관을 반영하여 결과 데이터를 보정하고, 그에 따라 미래의 예후를 예측하는 것도 가능한데, 이를 위해 먼저 환자정보 입력 모듈(500)은 생활패턴 입력부(540)를 더 포함할 수 있다.In addition, in predicting a patient's prognosis, it is possible to go beyond reflecting the blood test result data to reflect the patient's lifestyle, correct the result data, and predict the future prognosis accordingly. To this end, patient information is input first. The module 500 may further include a life pattern input unit 540 .

생활패턴 입력부(540)는 관리 단말(20)로부터 상기 환자의 약물 컴플라이언스, 수면습관, 음주습관, 식습관, 운동량 및 스트레스에 대한 생활패턴 데이터를 입력받는 기능을 수행한다.The life pattern input unit 540 performs a function of receiving life pattern data about drug compliance, sleep habits, drinking habits, eating habits, exercise amount, and stress of the patient from the management terminal 20 .

이때 약물 컴플라이언스라 함은 복용하는 약물의 이름 및 복용량, 복용 주기를 포함할 수 있고, 수면습관은 평균 취침 시간 및 평균적으로 잠드는 시간과 일어나는 시간을 포함할 수 있으며, 음주습관은 음주 주기, 음주량을 포함할 수 있으며, 식습관은 식사 시간 및 식사량, 섭취하는 음식의 종류를 포함하고, 운동량은 운동 주기, 운동량, 수행하는 운동의 종류를 포함할 수 있고, 스트레스는 환자와의 상담 등을 통해 수집된 환자가 느끼는 스트레스 정도나 혹은 의사가 환자와의 상담을 통해 파악한 환자의 현재 스트레스 정도를 수치화한 값을 포함할 수 있다.At this time, drug compliance may include the name, dosage, and dosage cycle of the drug to be taken, sleep habits may include average bedtime and average sleep time and wake up time, and drinking habits may include drinking cycle and amount of alcohol. Eating habits include meal time, meal amount, and type of food consumed, exercise amount may include exercise cycle, exercise amount, and type of exercise performed, and stress is collected through consultation with patients. It may include a numerical value of the level of stress felt by the patient or the current level of stress of the patient as determined by the doctor through consultation with the patient.

나아가 생활패턴 데이터는 약물 컴플라이언스, 수면습관, 음주습관, 식습관, 운동량 및 스트레스 이외에도 생활패턴에 포함될 수 있는 다양한 추가 요소를 더 포함할 수 있음은 물론이다.Furthermore, the lifestyle pattern data may further include various additional factors that may be included in the lifestyle pattern in addition to drug compliance, sleep habits, drinking habits, eating habits, exercise amount, and stress.

이러한 생활패턴 데이터는 관리 단말(20)을 통해 입력되는 것을 기본으로 하나, 관리 단말(20)을 통해 생활패턴 데이터가 입력되기 위해서는 의사가 환자에게 상담이나 진료를 수행하고, 생활패턴 데이터를 묻는 질문지나 질의응답지를 환자에게 제공하여 환자가 해당 질문지나 질의응답지에 대해 답변하게 한 뒤, 답변이 완료된 질문지나 질의응답지를 생활패턴 데이터로서 입력하게 된다.Such life pattern data is basically input through the management terminal 20, but in order for the lifestyle pattern data to be input through the management terminal 20, a doctor consults or treats the patient and asks questions about the lifestyle pattern data. After the patient is provided with a question and answer sheet, the patient answers the question and answer sheet, and then the completed questionnaire or question and answer sheet is input as life pattern data.

따라서 이러한 생활패턴 데이터에 따라 환자의 생활패턴을 파악하면, AI 예측 모듈(600)은 데이터 보정부(640)를 통해 생활패턴 데이터를 기반으로 상기 결과 데이터를 보정하는 것이 가능하다. 이는 현재의 생활패턴 데이터를 통해 미래의 결과 데이터를 예측하는 것이라고도 할 수 있는데, 예를 들어 운동량이 적은 경우 지질수치나 콜레스테롤수치, 혈당수치를 높일 수 있고, 음주 주기가 짧고 음주량이 높은 경우 간수치, 콜레스테롤수치를 높일 수 있으며, 운동량이 적은 경우에도 지질수치, 콜레스테롤수치, 혈당수치를 높이는 것이 가능하고, 식습관이 불규칙하고 좋지 않은 영양성분이 계속되는 경우 혈당수치를 높이는 것이 가능하다.Therefore, if the patient's life pattern is grasped according to the life pattern data, the AI prediction module 600 can correct the resulting data based on the life pattern data through the data correction unit 640. This can also be said to predict future result data through current life pattern data. For example, if exercise is low, lipid levels, cholesterol levels, and blood sugar levels can be increased, and if the drinking cycle is short and the amount of alcohol is high, liver levels , It can increase cholesterol levels, and it is possible to increase lipid levels, cholesterol levels, and blood sugar levels even when exercise is low, and it is possible to increase blood sugar levels when eating habits are irregular and undesirable nutrients continue.

이를 통해 생활패턴 데이터를 기반으로 예상되는 결과 데이터의 변화를 기반으로 입력된 환자의 결과 데이터를 보정하여 미래에 대한 예측을 수행할 수 있고, 이 경우 AI 예측 모듈(600)은 환자의 병변 영상에 부여된 진단 레이블 및 상기 보정된 결과 데이터를 기반으로 상기 빅데이터를 검색하여 미래의 특정 시점에 대한 병변 영상을 추출하는 것이 가능하다.Through this, it is possible to perform prediction for the future by correcting the input patient result data based on the change in result data expected based on the life pattern data. In this case, the AI prediction module 600 is applied to the patient's lesion image. It is possible to extract a lesion image for a specific time point in the future by searching the big data based on the assigned diagnostic label and the corrected result data.

다시 말해 상술한 AI 예측 모듈(600)을 통한 특정 병변 영상 검색, 그리고 해당 병변 영상을 입력한 환자의 미래 시점의 병변 영상 추출에 있어 입력된 결과 데이터가 아닌 보정된 결과 데이터를 이용하도록 함으로써 환자의 미래의 병변 영상 예측에 있어 환자의 생활습관을 더 반영할 수 있도록 하는 것이다.In other words, in searching for a specific lesion image through the above-described AI prediction module 600 and extracting a lesion image at a future time point of a patient who inputs the corresponding lesion image, corrected result data rather than the input result data is used, so that the patient's It is to further reflect the patient's lifestyle in predicting future lesion images.

이러한 구성에 따르면 환자의 병변 영상 및 혈액검사 결과 데이터 뿐 아니라 환자의 생활습관을 반영한 미래의 예후 예측을 수행함으로써, 병변의 예후에 있어 중요한 변수 중 하나인 생활습관을 기반으로 미래 시점의 병변 영상 예측에 대한 정확도를 높일 수 있다는 효과를 제공한다.
지금까지 설명한 바와 같이, 본 발명에 따른 인공지능 기반의 가상 환자 관리 시스템의 구성 및 작용을 상기 설명 및 도면에 표현하였지만 이는 예를 들어 설명한 것에 불과하여 본 발명의 사상이 상기 설명 및 도면에 한정되지 않으며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능함은 물론이다.
According to this configuration, future prognosis is predicted by reflecting the patient's lifestyle as well as the patient's lesion image and blood test result data, thereby predicting the lesion image at a future point in time based on lifestyle, one of the important variables in the prognosis of lesions. It provides the effect of increasing the accuracy for .
As described above, the configuration and operation of the artificial intelligence-based virtual patient management system according to the present invention are expressed in the above description and drawings, but this is only an example and the spirit of the present invention is not limited to the above description and drawings. And, of course, various changes and modifications are possible within a range that does not deviate from the technical spirit of the present invention.

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

10 : 메인 서버 20 : 관리 단말
100 : 영상 라이브러리 200 : AI 학습 모듈
300 : 가상 환자 매칭 모듈 310 : 조건 설정부
320 : 영상 추출부 321 : 현재 영상 추출파트
322 : 미래 영상 추출파트 400 : 출력 모듈
500 : 환자정보 입력 모듈 510 : 병변 영상 입력부
520 : 조건 입력부 530 : 결과 데이터 입력부
540 : 생활패턴 입력부 600 : AI 예측 모듈
610 : 기본 추출부 620 : 악화 영상 지정부
630 : 완화 영상 지정부 640 : 데이터 보정부
700 : 검사 라이브러리
10: main server 20: management terminal
100: image library 200: AI learning module
300: virtual patient matching module 310: condition setting unit
320: image extraction unit 321: current image extraction part
322: future image extraction part 400: output module
500: patient information input module 510: lesion image input unit
520: condition input unit 530: result data input unit
540: life pattern input unit 600: AI prediction module
610: basic extraction unit 620: deterioration image designation unit
630: alleviation image designation unit 640: data correction unit
700: inspection library

Claims (8)

인공지능 기반의 가상 환자 관리 시스템으로서,
진단 레이블이 부여된 병변 영상을 저장한 영상 라이브러리;
인공지능을 기반으로 상기 저장된 병변 영상을 질병별로 분류하여 저장한 빅데이터를 구축하는 AI 학습 모듈;
가상 환자의 기본정보 및 병변정보에 대한 기준 시점의 가상 조건을 설정하는 조건 설정부와, 상기 기준 시점의 가상 조건을 기반으로 상기 빅데이터를 검색하여 병변 영상을 1차 추출하는 현재 영상 추출파트와 상기 1차 추출된 병변 영상의 진단 레이블을 기반으로 상기 빅데이터를 검색하여 상기 기준 시점 이후의 특정 시점인 미래 시점에 대한 병변 영상을 2차 추출하는 미래 영상 추출파트를 포함한 영상 추출부를 포함하는 가상 환자 매칭 모듈;
상기 1차 추출된 병변 영상 및 2차 추출된 병변 영상을 디스플레이하는 출력 모듈;을 포함하는 것을 특징으로 하는, 가상 환자 관리 시스템.
As an AI-based virtual patient management system,
an image library storing lesion images with diagnostic labels;
An AI learning module for classifying the stored lesion images by disease based on artificial intelligence and constructing stored big data;
A condition setting unit for setting virtual conditions of a reference point in time for basic information and lesion information of a virtual patient, and a current image extraction part for first extracting a lesion image by searching the big data based on the virtual condition of the reference point in time A virtual image extraction unit including a future image extraction part that searches the big data based on the diagnosis label of the primary extracted lesion image and secondaryly extracts a lesion image for a future time point, which is a specific time point after the reference point in time. patient matching module;
Characterized in that, the virtual patient management system comprising a; output module for displaying the firstly extracted lesion image and the secondly extracted lesion image.
삭제delete 제 1항에 있어서,
상기 시스템은,
관리 단말로부터 환자에 대한 진단 레이블이 부여된 병변 영상을 입력받는 병변 영상 입력부와, 상기 관리 단말로부터 상기 환자의 기본정보 및 병변정보에 대한 현재 조건을 입력받는 조건 입력부를 포함하는 환자정보 입력 모듈; 및,
상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 현재 조건을 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 병변 영상을 추출하는 AI 예측 모듈;을 포함하며,
상기 출력 모듈은,
상기 추출된 미래 시점에 대한 병변 영상을 디스플레이하는 기능을 포함하는 것을 특징으로 하는, 가상 환자 관리 시스템.
According to claim 1,
The system,
a patient information input module including a lesion image input unit that receives a lesion image to which a diagnosis label for the patient is assigned from a management terminal, and a condition input unit that receives basic information of the patient and current conditions for lesion information from the management terminal; and,
An AI prediction module for extracting a lesion image for a future time point by searching the big data based on the diagnosis label assigned to the lesion image of the patient and the current condition,
The output module,
Characterized in that it comprises a function of displaying the lesion image for the extracted future time point, the virtual patient management system.
제 3항에 있어서,
상기 AI 예측 모듈은,
상기 환자의 병변 영상에 부여된 진단 레이블 및 현재 조건을 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 복수의 병변 영상을 추출하는 기본 추출부,
상기 추출된 복수의 병변 영상 중 상기 환자의 현재 조건보다 악화된 진단 레이블을 갖는 병변 영상을 악화 영상으로 지정하는 악화 영상 지정부 및
상기 추출된 복수의 병변 영상 중 상기 환자의 현재 조건보다 완화된 진단 레이블을 갖는 병변 영상을 완화 영상으로 지정하는 완화 영상 지정부를 포함하며,
상기 출력 모듈은,
상기 악화 영상 및 완화 영상을 디스플레이하는 기능을 포함하는 것을 특징으로 하는, 가상 환자 관리 시스템.
According to claim 3,
The AI prediction module,
A basic extraction unit for extracting a plurality of lesion images for a future time point by searching the big data based on the diagnosis label assigned to the lesion image of the patient and the current condition;
A deteriorating image designation unit designating a lesion image having a diagnosis label worse than the current condition of the patient among the extracted plurality of lesion images as an aggravated image; and
A relief image designation unit for designating a lesion image having a diagnosis label more alleviated than the patient's current condition among the extracted plurality of lesion images as a relief image;
The output module,
Characterized in that it comprises a function of displaying the deterioration image and alleviation image, virtual patient management system.
제 3항에 있어서,
상기 시스템은,
진단 레이블이 부여된 혈액검사의 각 항목별 결과 데이터를 저장한 검사 라이브러리;를 포함하고,
상기 AI 학습 모듈은,
상기 저장된 병변 영상 및 상기 결과 데이터를 질병별로 분류하여 저장한 빅데이터를 구축하며,
상기 환자정보 입력 모듈은,
관리 단말로부터 상기 환자의 결과 데이터를 입력받는 결과 데이터 입력부를 더 포함하고,
상기 AI 예측 모듈은,
상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 현재 조건과 상기 결과 데이터를 기반으로 상기 빅데이터를 검색하여 미래 시점에 대한 병변 영상을 추출하는 것을 특징으로 하는, 가상 환자 관리 시스템.
According to claim 3,
The system,
A test library that stores result data for each item of a blood test to which a diagnostic label is assigned;
The AI learning module,
Constructing big data in which the stored lesion image and the resultant data are classified by disease and stored,
The patient information input module,
Further comprising a result data input unit for receiving result data of the patient from a management terminal,
The AI prediction module,
The virtual patient management system, characterized by extracting a lesion image for a future time point by searching the big data based on the diagnosis label assigned to the lesion image of the patient, the current condition, and the result data.
제 5항에 있어서,
상기 환자정보 입력 모듈은,
상기 관리 단말로부터 상기 환자의 약물 컴플라이언스, 수면습관, 음주습관, 식습관, 운동량 및 스트레스에 대한 생활패턴 데이터를 입력받는 생활패턴 입력부를 포함하며,
상기 AI 예측 모듈은,
상기 생활패턴 데이터를 기반으로 상기 결과 데이터를 보정하는 데이터 보정부를 포함하며,
상기 AI 예측 모듈은,
상기 환자의 병변 영상에 부여된 진단 레이블 및 상기 보정된 결과 데이터를 기반으로 상기 빅데이터를 검색하여 미래의 특정 시점에 대한 병변 영상을 추출하는 것을 특징으로 하는, 가상 환자 관리 시스템.
According to claim 5,
The patient information input module,
A life pattern input unit for receiving lifestyle pattern data on drug compliance, sleep habits, drinking habits, eating habits, exercise amount, and stress of the patient from the management terminal;
The AI prediction module,
A data correction unit for correcting the resultant data based on the life pattern data;
The AI prediction module,
The virtual patient management system, characterized by extracting a lesion image for a specific time point in the future by searching the big data based on the diagnostic label assigned to the lesion image of the patient and the corrected result data.
삭제delete 삭제delete
KR1020230026890A 2023-02-28 2023-02-28 Artificial intelligence-based virtual patient management system KR102550465B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020230026890A KR102550465B1 (en) 2023-02-28 2023-02-28 Artificial intelligence-based virtual patient management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020230026890A KR102550465B1 (en) 2023-02-28 2023-02-28 Artificial intelligence-based virtual patient management system

Publications (1)

Publication Number Publication Date
KR102550465B1 true KR102550465B1 (en) 2023-07-03

Family

ID=87157842

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230026890A KR102550465B1 (en) 2023-02-28 2023-02-28 Artificial intelligence-based virtual patient management system

Country Status (1)

Country Link
KR (1) KR102550465B1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102057277B1 (en) * 2019-05-14 2019-12-18 주식회사 코어라인소프트 Server and server-based medical image analysis method for building bid-data database based on quantification and analysis of medical images
KR102097740B1 (en) * 2019-07-25 2020-04-06 주식회사 딥노이드 System for Classifying and standardizing of Medical images automatically using Artificial intelligence
KR102097742B1 (en) * 2019-07-31 2020-04-06 주식회사 딥노이드 System for Searching medical image using artificial intelligence and Driving method thereof
KR20210085791A (en) * 2019-12-31 2021-07-08 주식회사 코어라인소프트 Medical image analysis system and similar case retrieval system using quantified parameters, and method for the same
KR20210104383A (en) * 2020-02-17 2021-08-25 연세대학교 산학협력단 System and method for storing and executing deep learning of medical information
KR20220084903A (en) * 2020-12-14 2022-06-21 계명대학교 산학협력단 Ai-based patient education video providing method and system
KR20220111212A (en) 2021-02-01 2022-08-09 주식회사 코스모스메딕 Virtual patient information generating system and method using machine learning

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102057277B1 (en) * 2019-05-14 2019-12-18 주식회사 코어라인소프트 Server and server-based medical image analysis method for building bid-data database based on quantification and analysis of medical images
KR102097740B1 (en) * 2019-07-25 2020-04-06 주식회사 딥노이드 System for Classifying and standardizing of Medical images automatically using Artificial intelligence
KR102097742B1 (en) * 2019-07-31 2020-04-06 주식회사 딥노이드 System for Searching medical image using artificial intelligence and Driving method thereof
KR20210085791A (en) * 2019-12-31 2021-07-08 주식회사 코어라인소프트 Medical image analysis system and similar case retrieval system using quantified parameters, and method for the same
KR20210104383A (en) * 2020-02-17 2021-08-25 연세대학교 산학협력단 System and method for storing and executing deep learning of medical information
KR20220084903A (en) * 2020-12-14 2022-06-21 계명대학교 산학협력단 Ai-based patient education video providing method and system
KR20220111212A (en) 2021-02-01 2022-08-09 주식회사 코스모스메딕 Virtual patient information generating system and method using machine learning

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
"eViP Electronic Virtual Patents", [online], 인터넷: <URL: https://web.archive.org/web/20201230084257/https://virtualpatients.eu/> (2020.12.30. 공개, 2023.05.22. 추출)* *
J. Chen 외, "Generative Invertible Networks (GIN): Pathophysiology-Interpretable Feature Mapping and Virtual Patient Generation", arXiv, 1808.04495v1. (2018.08.14.) *
R. Shamsuddin 외, "Virtual Patient Model: An Approach for Generating Synthetic Healthcare Time Series Data", IEEE, 2018 IEEE ICHI. (2018.07.26.) *

Similar Documents

Publication Publication Date Title
US11133111B2 (en) Methods and systems for an artificial intelligence support network for vibrant constitutional guidance
RU2703679C2 (en) Method and system for supporting medical decision making using mathematical models of presenting patients
US11037070B2 (en) Diagnostic test planning using machine learning techniques
US20080033894A1 (en) Prognosis Modeling From One or More Sources of Information
Periasamy et al. A proactive model to predict osteoporosis: An artificial immune system approach
US20220172841A1 (en) Methods of identifying individuals at risk of developing a specific chronic disease
US20210005317A1 (en) Methods and systems for achieving vibrant constitution based on user inputs
US11449792B2 (en) Methods and systems for generating a supplement instruction set using artificial intelligence
Parimbelli et al. A review of AI and Data Science support for cancer management
Kaswan et al. AI-based natural language processing for the generation of meaningful information electronic health record (EHR) data
Wu et al. A deep learning classification of metacarpophalangeal joints synovial proliferation in rheumatoid arthritis by ultrasound images
US20200321113A1 (en) Systems and methods for generating alimentary instruction sets based on vibrant constitutional guidance
Hachuel et al. Augmenting gastrointestinal health: a deep learning approach to human stool recognition and characterization in macroscopic images
Katsuura et al. A primer on the use of artificial intelligence in spine surgery
CN117409919A (en) Data processing method, device, electronic equipment and storage medium
Ningrum et al. A deep learning model to predict knee osteoarthritis based on nonimage longitudinal medical record
Chou et al. Extracting drug utilization knowledge using self-organizing map and rough set theory
Grant et al. Machine learning versus traditional methods for the development of risk stratification scores: a case study using original Canadian Syncope Risk Score data
O’Brien et al. Random survival forests analysis of intraoperative complications as predictors of descemet stripping automated endothelial keratoplasty graft failure in the cornea preservation time study
Avramidis et al. Rheumatoid arthritis diagnosis: Deep learning vs. humane
Manimala et al. Advancements in deep learning techniques for analyzing electronic medical records
KR102550465B1 (en) Artificial intelligence-based virtual patient management system
US20210271924A1 (en) Analyzer, analysis method, and analysis program
Yi et al. A review of the application of deep learning in obesity: From early prediction aid to advanced management assistance
Meng et al. Utilizing narrative text from electronic health records for early warning model of chronic disease

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant