KR20220136226A - Method and apparatus for providing medical expectations using artificial intelligence model - Google Patents

Method and apparatus for providing medical expectations using artificial intelligence model Download PDF

Info

Publication number
KR20220136226A
KR20220136226A KR1020220038925A KR20220038925A KR20220136226A KR 20220136226 A KR20220136226 A KR 20220136226A KR 1020220038925 A KR1020220038925 A KR 1020220038925A KR 20220038925 A KR20220038925 A KR 20220038925A KR 20220136226 A KR20220136226 A KR 20220136226A
Authority
KR
South Korea
Prior art keywords
prediction
risk
medical
disease
inferred
Prior art date
Application number
KR1020220038925A
Other languages
Korean (ko)
Inventor
이현수
김기환
남현섭
Original Assignee
주식회사 루닛
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 루닛 filed Critical 주식회사 루닛
Priority to PCT/KR2022/004546 priority Critical patent/WO2022211506A1/en
Priority to EP22781625.3A priority patent/EP4318496A1/en
Priority to US18/273,316 priority patent/US20240233948A9/en
Publication of KR20220136226A publication Critical patent/KR20220136226A/en

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment

Landscapes

  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • Data Mining & Analysis (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

Provided is a prediction device operated by at least one processor, which includes: a risk factor inference model receiving medical images and outputting at least one inferred risk factor, as an artificial intelligence model trained to infer disease risk factors from input images; and a medical prediction model receiving patient information including the inferred at least one risk factor and outputting a medical prediction including a disease risk.

Description

인공지능 모델을 이용한 의학적 예측 제공 방법 및 장치{METHOD AND APPARATUS FOR PROVIDING MEDICAL EXPECTATIONS USING ARTIFICIAL INTELLIGENCE MODEL}Method and apparatus for providing medical prediction using artificial intelligence model

본 개시는 인공지능 기반 예측 기술에 관한 것이다.The present disclosure relates to artificial intelligence-based prediction technology.

질병 발병에 영향을 미치는 위험 인자들(risk factors)은 대부분의 밝혀져 있다. 예를 들어, 유방암은 나이, 인종, 유방 치밀도(mammographic density), 가족력, 초경 나이, 출산력, 호르몬 치료 여부 등의 인자들의 영향을 받는다고 알려져 있다. 따라서, 위험 인자들을 이용한 유방암 위험도 평가(Breast Cancer Risk Assessment)를 위한 연구가 있고, 위험도 평가는 유방암 이외에도 폐암 등의 다른 암종에도 존재한다. Most of the risk factors influencing disease development have been identified. For example, it is known that breast cancer is affected by factors such as age, race, mammographic density, family history, age at menarche, fertility, and whether hormone therapy is used. Therefore, there is a study for breast cancer risk assessment using risk factors, and risk assessment exists not only for breast cancer but also for other carcinomas such as lung cancer.

의료진은 질병 위험도 평가를 통해, 환자를 고위험군으로 지정하고, 조기 발견을 위한 적극적 검사를 유도할 수 있다. 예를 들어, 대부분의 가이드라인에서, 유방암 위험도가 20% 이상인 고위험군에게는 매년 MRI 검사를 권고하고, 유방암 위험도가 15%에서 20%인 중위험군에게는 위험 인자들에 따라 적절한 검사를 권고한다. Through disease risk assessment, medical staff can designate patients as high-risk groups and induce active testing for early detection. For example, in most guidelines, annual MRI scans are recommended for high-risk groups with a breast cancer risk of 20% or more, and appropriate tests are recommended for moderate-risk groups with a breast cancer risk of 15% to 20% depending on risk factors.

하지만, 종래의 질병 위험도 평가 프로그램은 위험도 평가에 사용되는 다양한 변수들을 사용자로부터 입력받고, 연산식이나 로지스틱 회귀 분석 기반의 확률 모델에 따라 위험도를 계산한다. 종래의 유방암 위험도 평가 프로그램을 예로 들면, 나이, 유방 치밀도, 출산력 등의 환자 정보뿐만 아니라, 엄마, 자매 등의 가족력 정보까지 화면에서 입력해야 한다. 따라서, 종래의 질병 위험도 평가 프로그램은 사용성이 떨어지고, 알지 못하는 위험 인자 또는 부정확한 위험 인자가 존재하는 경우, 예측 성능이 떨어지는 단점이 있다. However, the conventional disease risk assessment program receives various variables used for risk assessment from the user and calculates the risk according to a probabilistic model based on an arithmetic expression or logistic regression analysis. Taking the conventional breast cancer risk assessment program as an example, not only patient information such as age, breast density, and fertility history, but also family history information such as mother and sister must be input on the screen. Therefore, the conventional disease risk assessment program has disadvantages in that usability is poor and predictive performance is deteriorated when unknown risk factors or inaccurate risk factors exist.

본 개시는 인공지능 모델을 이용하여, 입력으로부터 질병의 위험도 인자들을 추론하고, 추론된 위험도 인자들을 포함하는 환자 정보를 이용하여 질병 위험도를 포함하는 다양한 의학적 예측을 제공하는 방법 및 장치를 제공한다.The present disclosure provides a method and apparatus for inferring risk factors of a disease from an input using an artificial intelligence model, and providing various medical predictions including disease risk using patient information including the inferred risk factors.

한 실시예에 따라 적어도 하나의 프로세서에 의해 동작하는 예측 장치로서, 입력 영상으로부터 질병의 위험 인자를 추론하도록 훈련된 인공지능 모델로서, 의료 영상을 입력받고, 추론된 적어도 하나의 위험 인자를 출력하는 위험 인자 추론 모델, 그리고 상기 추론된 적어도 하나의 위험 인자를 포함하는 환자 정보를 입력받고, 질병 위험도를 포함하는 의학적 예측을 출력하는 의학적 예측 모델을 포함한다.An artificial intelligence model trained to infer a risk factor of a disease from an input image as a prediction device operated by at least one processor according to an embodiment, receiving a medical image and outputting the inferred at least one risk factor a risk factor inference model, and a medical prediction model that receives patient information including the inferred at least one risk factor and outputs a medical prediction including a disease risk.

상기 의학적 예측 모델은 입력으로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로 구현될 수 있다.The medical prediction model may be implemented as an artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input.

상기 환자 정보는 사용자 단말에 제공한 인터페이스 화면에서 입력되거나, 데이터베이스에서 가져온 위험 인자들을 더 포함할 수 있다.The patient information may further include risk factors input from an interface screen provided to the user terminal or obtained from a database.

상기 환자 정보는 상기 의료 영상으로부터 추론된 질병 정보를 더 포함할 수 있다.The patient information may further include disease information inferred from the medical image.

상기 추론된 적어도 하나의 위험 인자는 사용자 단말에서 확인 및/또는 수정된 후, 상기 의학적 예측 모델로 입력될 수 있다.The at least one inferred risk factor may be input into the medical prediction model after being confirmed and/or corrected in the user terminal.

상기 의학적 예측은 상기 질병 위험도 및 상기 환자 정보를 기초로 개인화된 추천 검사, 그리고 추천 검사 수행 시기 중 적어도 하나를 더 포함할 수 있다.The medical prediction may further include at least one of a recommended test personalized based on the disease risk and the patient information, and a recommended test execution time.

한 실시예에 따라 적어도 하나의 프로세서에 의해 동작하는 예측 장치의 동작 방법으로서, 환자의 의료 영상을 입력받는 단계, 입력 영상으로부터 위험 인자를 추론하도록 훈련된 제1 인공지능 모델을 이용하여, 상기 의료 영상으로부터 추론된 적어도 하나의 위험 인자를 획득하는 단계, 그리고 상기 추론된 적어도 하나의 위험 인자를 포함하는 환자 정보를 이용하여, 질병 위험도를 포함하는 의학적 예측을 수행하는 단계를 포함한다.According to an embodiment, a method of operating a prediction device operated by at least one processor, receiving a medical image of a patient, using a first artificial intelligence model trained to infer risk factors from the input image, Acquiring at least one risk factor inferred from the image, and performing a medical prediction including disease risk using patient information including the inferred at least one risk factor.

상기 의학적 예측을 수행하는 단계는 입력으로부터 의학적 예측을 출력하도록 훈련된 제2 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델을 이용하여, 상기 질병 위험도를 포함하는 의학적 예측을 획득할 수 있다.In the performing the medical prediction, a second artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input is used to obtain a medical prediction including the disease risk can do.

상기 동작 방법은 사용자 단말에 제공한 인터페이스 화면을 통해 적어도 하나의 위험 인자를 입력받고, 입력받은 위험 인자를 상기 환자 정보에 추가하는 단계를 더 포함할 수 있다.The method may further include receiving at least one risk factor through an interface screen provided to the user terminal, and adding the received risk factor to the patient information.

상기 동작 방법은 데이터베이스에서 가져온 적어도 하나의 위험 인자를 상기 환자 정보에 추가하는 단계를 더 포함할 수 있다.The operating method may further include adding at least one risk factor retrieved from a database to the patient information.

상기 동작 방법은 상기 의료 영상으로부터 추론된 질병 정보를 상기 환자 정보에 추가하는 단계를 더 포함할 수 있다.The operating method may further include adding disease information deduced from the medical image to the patient information.

상기 의학적 예측을 수행하는 단계는 상기 추론된 적어도 하나의 위험 인자를 사용자 단말에 제공하고, 상기 사용자 단말에서 확인 및/또는 수정된 위험 인자를 이용하여, 상기 의학적 예측을 수행할 수 있다.In the performing the medical prediction, the medical prediction may be performed by providing the inferred at least one risk factor to the user terminal, and using the confirmed and/or modified risk factor in the user terminal.

상기 동작 방법은 상기 의학적 예측을 기초로 작성된 환자 보고서를 제공하는 단계를 더 포함할 수 있다.The method of operation may further include providing a patient report prepared based on the medical prediction.

상기 환자 보고서는 상기 질병 위험도 및 상기 환자 정보를 기초로 개인화된 추천 검사, 그리고 추천 검사 수행 시기 중 적어도 하나를 더 포함할 수 있다.The patient report may further include at least one of a recommended test personalized based on the disease risk and the patient information, and a recommended test execution time.

상기 환자 보고서는 상기 질병 위험도를 기초로 분류된 위험군을 더 포함할 수 있다.The patient report may further include risk groups classified based on the disease risk.

한 실시예에 따른 컴퓨팅 장치로서, 의료 영상을 입력받으면, 입력 영상으로부터 질병의 위험 인자를 추론하도록 훈련된 제1 인공지능 모델을 이용하여 상기 의료 영상으로부터 적어도 하나의 위험 인자를 추론하고, 추론된 적어도 하나의 위험 인자를 이용하여 질병 발병 가능성을 나타내는 질병 위험도를 예측하는 프로세서를 포함할 수 있다.As a computing device according to an embodiment, when a medical image is received, at least one risk factor is inferred from the medical image using a first artificial intelligence model trained to infer a risk factor of a disease from the input image, and the inferred The processor may include a processor for predicting a disease risk indicating a likelihood of developing a disease by using at least one risk factor.

상기 프로세서는 입력으로부터 의학적 예측을 출력하도록 훈련된 제2 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로, 상기 추론된 적어도 하나의 위험 인자를 입력하여, 예측된 상기 질병 위험도를 획득할 수 있다.The processor is a second artificial intelligence model trained to output a medical prediction from an input, or a statistical model that outputs a medical prediction calculated from an input, and inputs the inferred at least one risk factor to predict the disease risk can be obtained.

상기 프로세서는 상기 추론된 적어도 하나의 위험 인자와 함께, 사용자 단말에 제공한 인터페이스 화면에서 입력된 적어도 하나의 위험 인자, 데이터베이스에서 가져온 적어도 하나의 위험 인자, 그리고 상기 의료 영상으로부터 추론된 질병 정보 중 적어도 하나를 이용하여 상기 질병 위험도를 예측할 수 있다.The processor is configured to include at least one of at least one risk factor input from an interface screen provided to the user terminal, at least one risk factor fetched from a database, and disease information inferred from the medical image together with the inferred at least one risk factor. The disease risk can be predicted using one.

상기 프로세서는 상기 질병 위험도 및 획득한 환자 정보를 기초로, 개인화된 추천 검사, 추천 검사 수행 시기 중 적어도 하나를 제공할 수 있다.The processor may provide at least one of a personalized recommended test and a recommended test execution time based on the disease risk and the acquired patient information.

상기 프로세서는 상기 추론된 적어도 하나의 위험 인자 및/또는 상기 질병 위험도를 사용자 단말에 제공할 수 있다.The processor may provide the inferred at least one risk factor and/or the disease risk to the user terminal.

실시예에 따르면, 의학적 예측에 필요한 위험 인자들을 사용자가 직접 입력할 필요 없이, 인공지능 모델을 통해 추론된 위험 인자들을 이용하여 의학적 예측을 하므로, 사용자 편의성을 높일 수 있다. According to the embodiment, since a medical prediction is made using risk factors inferred through an artificial intelligence model without the user having to directly input risk factors necessary for medical prediction, user convenience can be improved.

실시예에 따르면, 사용자가 알지 못하는 위험 인자들까지 인공지능 모델을 통해 추론할 수 있고, 이를 이용하여 의학적 예측을 하므로, 예측 정확성을 높일 수 있다. According to the embodiment, even risk factors that the user is not aware of can be inferred through the artificial intelligence model, and medical prediction is made using the artificial intelligence model, so that prediction accuracy can be increased.

실시예에 따르면, 부정확한 위험 인자 또는 잘못 입력된 위험 인자를 인공지능 모델을 통해 교정할 수 있고, 이를 이용하여 의학적 예측을 하므로 예측 정확성을 높일 수 있다.According to an embodiment, an inaccurate risk factor or an erroneously input risk factor can be corrected through an artificial intelligence model, and a medical prediction is made using the artificial intelligence model, so that prediction accuracy can be improved.

실시예에 따르면, 인공지능 기반의 의학적 예측 모델을 통해, 추론된 위험 인자들로부터 의학적 예측을 하므로, 기존 통계학적 모델보다 정확성이 높고 다양한 의학적 예측을 제공할 수 있다. According to an embodiment, since a medical prediction is made from inferred risk factors through an artificial intelligence-based medical prediction model, it is possible to provide a variety of medical predictions with higher accuracy than existing statistical models.

실시예에 따르면, 질병 발병 가능성을 나타내는 질병 위험도뿐만 아니라, 추가 검사 추천 여부, 추가 검사의 수행 시기 등을 포함하는 의학적 예측을 할 수 있고, 추가 검사 수행에 대한 잠재적 이득 또한 예측을 할 수 있다. According to the embodiment, it is possible to make a medical prediction including not only the disease risk indicating the possibility of developing a disease, but also whether to recommend additional tests, when to perform the additional tests, and the like, and a potential benefit for performing the additional tests can also be predicted.

도 1은 한 실시예에 따른 예측 장치를 설명하는 도면이다.
도 2는 한 실시예에 따른 예측 장치의 연동 환경을 설명하는 도면이다.
도 3부터 도 6 각각은 한 실시예에 따른 인공지능 모델의 구성을 설명하는 도면이다.
도 7은 한 실시예에 따른 인공지능 모델을 이용한 의학적 예측 제공 방법의 흐름도이다.
도 8은 한 실시예에 따른 사용자 단말에서 제공되는 인터페이스 화면의 예시이다.
도 9는 한 실시예에 따른 예측 장치의 하드웨어 구성도이다.
1 is a diagram for explaining a prediction apparatus according to an embodiment.
2 is a diagram illustrating an interworking environment of a prediction apparatus according to an exemplary embodiment.
3 to 6 are diagrams for explaining the configuration of an artificial intelligence model according to an embodiment.
7 is a flowchart of a method for providing a medical prediction using an artificial intelligence model according to an embodiment.
8 is an example of an interface screen provided by a user terminal according to an embodiment.
9 is a hardware configuration diagram of a prediction apparatus according to an embodiment.

아래에서는 첨부한 도면을 참고로 하여 본 개시의 실시예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, with reference to the accompanying drawings, embodiments of the present disclosure will be described in detail so that those of ordinary skill in the art to which the present disclosure pertains can easily implement them. However, the present disclosure may be implemented in several different forms and is not limited to the embodiments described herein. And in order to clearly explain the present disclosure in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

설명에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.In the description, when a part "includes" a certain component, this means that other components may be further included, rather than excluding other components, unless otherwise stated. In addition, terms such as “…unit”, “…group”, and “module” described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software or a combination of hardware and software. have.

본 개시의 장치는 적어도 하나의 프로세서가 명령어들(instructions)을 실행함으로써, 본 개시의 동작을 수행할 수 있도록 구성 및 연결된 컴퓨팅 장치이다. 컴퓨터 프로그램은 프로세서가 본 개시의 동작을 실행하도록 기술된 명령어들(instructions)을 포함하고, 비일시적-컴퓨터 판독가능 저장매체(non-transitory computer readable storage medium)에 저장될 수 있다. 컴퓨터 프로그램은 네트워크를 통해 다운로드되거나, 제품 형태로 판매될 수 있다.The apparatus of the present disclosure is a computing device configured and connected to enable at least one processor to perform the operations of the present disclosure by executing instructions. The computer program includes instructions that are described for a processor to execute the operations of the present disclosure, and may be stored in a non-transitory computer readable storage medium. The computer program may be downloaded over a network or sold as a product.

본 개시의 의료 영상은 다양한 모달리티(modality)로 촬영된 다양한 부위의 영상일 수 있고, 예를 들면, 의료 영상의 모달리티는 엑스레이(X-ray), MRI(magnetic resonance imaging), 초음파(ultrasound), CT(computed tomography), MMG(Mammography), DBT(Digital breast tomosynthesis) 등일 수 있다. The medical image of the present disclosure may be an image of various regions photographed with various modality, for example, the modality of the medical image may be X-ray, magnetic resonance imaging (MRI), ultrasound, It may be computed tomography (CT), mammography (MMG), digital breast tomosynthesis (DBT), or the like.

본 개시의 사용자란, 의료 전문가로서 의사, 간호사, 임상병리사, 소노그래퍼, 또는 의료 영상 전문가 등이 되거나, 환자, 또는 보호자와 같은 일반인이 될 수 있으나, 이에 한정되지 않는다.A user of the present disclosure may be a medical professional, such as a doctor, a nurse, a clinical pathologist, a sonographer, or a medical imaging expert, or a general public such as a patient or a guardian, but is not limited thereto.

본 개시의 인공지능 모델(Artificial Intelligence model, AI model)은 적어도 하나의 태스크(task)를 학습하는 기계학습모델로서, 프로세서에 의해 실행되는 컴퓨터 프로그램으로 구현될 수 있다. 인공지능 모델이 학습하는 태스크란, 기계 학습을 통해 해결하고자 하는 과제 또는 기계 학습을 통해 수행하고자 하는 작업을 지칭할 수 있다. 인공지능 모델은 컴퓨팅 장치에서 실행되는 컴퓨터 프로그램으로 구현될 수 있고, 네트워크를 통해 다운로드되거나, 제품 형태로 판매될 수 있다. 또는 인공지능 모델은 네트워크를 통해 다양한 장치들과 연동할 수 있다.An artificial intelligence model (AI model) of the present disclosure is a machine learning model for learning at least one task, and may be implemented as a computer program executed by a processor. The task that the AI model learns may refer to a task to be solved through machine learning or a task to be performed through machine learning. The AI model may be implemented as a computer program running on a computing device, downloaded over a network, or sold in the form of a product. Alternatively, the AI model can be linked with various devices through a network.

도 1은 한 실시예에 따른 예측 장치를 설명하는 도면이고, 도 2는 한 실시예에 따른 예측 장치의 연동 환경을 설명하는 도면이다.1 is a diagram illustrating a prediction apparatus according to an embodiment, and FIG. 2 is a diagram illustrating an interworking environment of the prediction apparatus according to an embodiment.

도 1을 참고하면, 예측 장치(Prediction device)(10)는 적어도 하나의 프로세서에 의해 동작하는 컴퓨팅 장치이다. 예측 장치(10)는 인공지능(Artificial Intelligence, AI) 모델을 이용하여, 입력 영상으로부터 질병의 위험도 인자들을 추론할 수 있다. 그리고, 예측 장치(10)는 추론된 위험도 인자들을 포함하는 환자 정보를 이용하여 질병 위험도(Disease risk)를 포함하는 의학적 예측을 제공할 수 있다. 질병 위험도는 질병의 발병 가능성을 나타낼 수 있다. 질병 위험도는 평생 발병 위험도일 수 있고, 또는, 5년 내 발병 위험도, 10년 내 발병 위험도 등과 같이 예측될 수 있다.Referring to FIG. 1 , a prediction device 10 is a computing device operated by at least one processor. The prediction apparatus 10 may infer risk factors of a disease from an input image by using an artificial intelligence (AI) model. In addition, the prediction device 10 may provide a medical prediction including a disease risk using patient information including the inferred risk factors. Disease risk may indicate the likelihood of developing a disease. The disease risk may be a lifetime risk, or may be predicted, such as a risk of developing within 5 years, a risk of developing within 10 years, and the like.

따라서, 의학적 예측을 위해, 사용자가 직접 입력해야 하는 위험 인자들을 줄일 수 있고, 사용자가 알지 못하는 위험 인자들까지 의학적 예측에 사용되므로, 예측 정확성을 높일 수 있다. Therefore, risk factors that the user must directly input for medical prediction can be reduced, and even risk factors that the user is not aware of are used for medical prediction, so prediction accuracy can be increased.

예측 장치(10)는 적어도 하나의 위험 인자 추론 모델(Risk Factor Inference Model)(100)과 적어도 하나의 의학적 예측 모델(Medical Prediction Model)(200)을 포함할 수 있다. The prediction apparatus 10 may include at least one risk factor inference model 100 and at least one medical prediction model 200 .

위험 인자 추론 모델(100)은 입력 영상으로부터 적어도 하나의 위험 인자를 추론하도록 훈련된 인공지능 모델이다. 입력 영상은 적어도 하나의 의료 영상(Medical Image)일 수 있다. 위험 인자 추론 모델(100)은 훈련 과정에서 입력과 출력 사이의 관계를 학습하고, 새로운 입력으로부터 추론된 결과를 출력할 수 있다. 추론된 위험 인자들은 의료 영상의 종류, 훈련 데이터, 훈련 방법에 따라 다양할 수 있다. 훈련 데이터는 암종에 따라 구분될 수 있다. 위험 인자 추론 모델(100)의 훈련을 위해, 의료 영상으로부터 추론하고자 하는 적어도 일부의 위험 인자들이 레이블링된 훈련 데이터가 사용될 수 있다. The risk factor inference model 100 is an artificial intelligence model trained to infer at least one risk factor from an input image. The input image may be at least one medical image. The risk factor inference model 100 may learn a relationship between an input and an output during a training process, and may output a result inferred from a new input. The inferred risk factors may vary depending on the type of medical image, training data, and training method. The training data may be classified according to carcinoma. For training of the risk factor inference model 100 , training data in which at least some risk factors to be inferred from a medical image are labeled may be used.

훈련 과정에서, 위험 인자 추론 모델(100)은 의료 영상과 위험 인자들의 관계를 학습할 수 있다. 예를 들어, 위험 인자 추론 모델(100)은 훈련 데이터를 이용하여, 유방 촬영 영상과 유방 치밀도의 관계를 학습할 수 있다. 또는 훈련 과정에서, 위험 인자 추론 모델(100)은 의료 영상과 함께 환자/질병 정보를 더 이용하여, 의료 영상, 환자/질병 정보, 그리고 위험 인자의 관계를 학습함으로써, 환자/질병 정보를 네트워크 파라미터들로 지식화할 수 있다. 이렇게 훈련된 위험 인자 추론 모델(100)은 환자/질병 정보가 지식화된 네트워크 파라미터들을 이용하여 의료 영상으로부터 위험 인자들을 추론할 수 있다. During the training process, the risk factor inference model 100 may learn the relationship between the medical image and the risk factors. For example, the risk factor inference model 100 may learn a relationship between a mammography image and a breast density by using training data. Alternatively, in the training process, the risk factor inference model 100 further uses the patient/disease information together with the medical image to learn the relationship between the medical image, the patient/disease information, and the risk factor, thereby converting the patient/disease information into a network parameter. can be made into knowledge. The trained risk factor inference model 100 may infer risk factors from a medical image using network parameters in which patient/disease information is knowledgeable.

위험 인자 추론 모델(100)은 훈련에 따라 다양한 위험 인자들을 추론할 수 있다. 예를 들면, 위험 인자 추론 모델(100)은 유방 촬영 영상으로부터, 나이 등의 신체 정보, 유방 치밀도 등의 의학적 정보를 추론할 수 있다. The risk factor inference model 100 may infer various risk factors according to training. For example, the risk factor inference model 100 may infer body information such as age and medical information such as breast density from a mammogram image.

한편, 위험 인자들로 보고된 인자들 이외에도, 위험 인자 추론 모델(100)은 질병 위험 예측에 기여할 것으로 기대되는 임의의 후보 인자들을 추론할 수 있다. 이후, 추후 예측 결과의 신뢰도에 따라 후보 인자들은 위험 인자로 간주될 수 있어서, 위험 인자 추론 모델(100)이 질병의 위험 인자 탐색에 활용될 수 있다. Meanwhile, in addition to the factors reported as risk factors, the risk factor inference model 100 may infer any candidate factors expected to contribute to disease risk prediction. Thereafter, the candidate factors may be regarded as risk factors according to the reliability of the future prediction result, so that the risk factor inference model 100 may be utilized to search for risk factors for diseases.

복수의 위험 인자들을 추론하기 위해, 복수의 위험 인자 추론 모델들이 사용될 수 있고, 또는 하나의 위험 인자 추론 모델이 사용될 수 있다. 설명에서는, 위험 인자 추론 모델(100)이 의료 영상으로부터 복수의 위험 인자들을 추론한다고 가정한다.To infer a plurality of risk factors, a plurality of risk factor inference models may be used, or a single risk factor inference model may be used. In the description, it is assumed that the risk factor inference model 100 infers a plurality of risk factors from a medical image.

의학적 예측 모델(200)은 위험 인자 추론 모델(100)에서 추론된 위험 인자들을 입력받도록 배치된다. 의학적 예측 모델(200)은 추론된 위험 인자들을 포함하는 각종 환자 정보를 입력받고, 질병 위험도를 포함하는 의학적 예측을 제공한다. 의학적 예측은 질병 위험도를 포함하는 환자 정보를 기초로 개인화된 추천 검사(recommended scan) 및 추천 검사 수행 시기 등을 포함할 수 있다. 또한, 의학적 예측은 추천 검사 수행 여부에 따른 암진단 가능성에 대한 예측을 더 포함할 수 있다. 환자에 대한 의학적 예측은 환자별 보고서 형태로 제공될 수 있다. The medical prediction model 200 is arranged to receive risk factors inferred from the risk factor inference model 100 . The medical prediction model 200 receives various patient information including inferred risk factors, and provides a medical prediction including disease risk. The medical prediction may include a personalized recommended scan based on patient information including disease risk and a recommended test execution time. In addition, the medical prediction may further include a prediction of the cancer diagnosis possibility according to whether a recommended test is performed. A medical prediction for a patient may be provided in the form of a patient-specific report.

의학적 예측 모델(200)은 위험 인자 추론 모델(100)에서 추론된 위험 인자들 이외에도, 추가 정보(Additional information)를 더 입력받을 수 있다. 한 실시예에 따른 추가 정보는 예측 장치(10)에서 제공하는 인터페이스 화면에서 입력되거나, 예측 장치(10)가 데이터베이스에서 가져온 정보로서, 환자 관련 알고 있는 위험 인자들일 수 있다. 예를 들어, 알고 있는 유방암 관련 위험 인자들은 환자의 나이, 가족력, 초경 나이, 출산력, 호르몬 치료 여부 등일 수 있다. 다른 실시예에 따른 추가 정보는 입력 영상으로부터 추론된 질병 정보(예를 들면, 질병 위험도)일 수 있다. 또한, 의학적 예측 모델(200)은 위험 인자 추론에 사용된 입력 영상을 추가 정보로 입력받을 수 있다. The medical prediction model 200 may receive additional information in addition to the risk factors inferred from the risk factor inference model 100 . The additional information according to an embodiment is input from an interface screen provided by the prediction device 10 or information obtained from a database by the prediction device 10 and may be known risk factors related to the patient. For example, known risk factors for breast cancer may be the patient's age, family history, age at menarche, fertility, and whether or not hormone therapy is used. According to another embodiment, the additional information may be disease information (eg, disease risk) inferred from the input image. Also, the medical prediction model 200 may receive an input image used for inferring risk factors as additional information.

한편, 의학적 예측 모델(200)은 추가 정보로 입력된 위험 인자를 그대로 이용할 수 있다. 하지만, 추가 정보로 입력된 위험 인자가 부정확한 위험 인자이거나 잘못 입력된 위험 인자일 수 있다. 따라서, 의학적 예측 모델(200)은 위험 인자 추론 모델(100)에서 추론된 위험 인자를 기초로, 추가 정보로 입력된 위험 인자의 부정확도나 오류 여부를 판단하고, 부정확한 위험 인자이거나 잘못 입력된 위험 인자를 입력에 사용하지 않을 수 있다. 또는, 의학적 예측 모델(200)은 위험 인자 추론 모델(100)에서 추론된 위험 인자를 기초로, 부정확한 위험 인자이거나 잘못 입력된 위험 인자를 교정하고, 교정된 위험 인자를 이용하여 의학적 예측을 할 수 있다.Meanwhile, the medical prediction model 200 may use the risk factor input as additional information as it is. However, the risk factor entered as additional information may be an incorrect risk factor or an incorrectly entered risk factor. Therefore, the medical prediction model 200 determines the inaccuracy or error of the risk factor input as additional information based on the risk factor inferred from the risk factor inference model 100, and determines whether the risk factor is inaccurate or incorrectly entered. Arguments may not be used for input. Alternatively, the medical prediction model 200 is based on the risk factor inferred from the risk factor inference model 100, corrects an inaccurate risk factor or an erroneously entered risk factor, and makes a medical prediction using the corrected risk factor. can

의학적 예측 모델(200)은 인공지능 모델로 구현될 수 있다. 의학적 예측 모델(200)은 훈련 과정에서 입력과 출력 사이의 관계를 학습하고, 새로운 입력으로부터 예측된 결과를 출력할 수 있다. 예측 결과는 입력의 종류, 훈련 데이터, 훈련 방법에 따라 다양할 수 있다. 한편, 의학적 예측 모델(200)은 위험 인자들을 포함하는 환자 정보로부터 질병 위험도를 예측하도록 훈련되는데, 현재 환자 정보로부터 미래의 질병 발병 가능성을 예측하는 것이 쉽지 않을 수 있다. 따라서, 의학적 예측 모델(200)은 훈련 데이터에서 환자 정보를 고위험군(High), 중위험군(Mid), 저위험군(Low)으로 구분하고, 구분된 그룹별 훈련 데이터를 기초로 해당 그룹의 환자 특징을 심도 있게 학습할 수 있다.The medical prediction model 200 may be implemented as an artificial intelligence model. The medical prediction model 200 may learn a relationship between an input and an output during a training process, and may output a predicted result from a new input. The prediction result may vary depending on the type of input, training data, and training method. Meanwhile, the medical prediction model 200 is trained to predict the disease risk from patient information including risk factors. Therefore, the medical prediction model 200 classifies the patient information in the training data into a high-risk group (High), a medium-risk group (Mid), and a low-risk group (Low), and based on the divided training data for each group, the patient characteristics of the group You can study in depth.

다른 실시예에 따르면, 위험 인자 추론 모델(100)은 기존 위험도 평가 모델과 같은 통계학적 모델, 예를 들면, 로지스틱 회귀 분석 기반의 확률 모델과 연동하도록 구현될 수 있다. 기존 위험도 평가 모델은, 정해진 위험 인자들이 사용자로부터 입력되지 않으면 예측 정확도가 낮아지는 문제가 있다. 하지만, 위험 인자 추론 모델(100)와 연동하는 기존 위험도 평가 모델은 일부 위험 인자들이 사용자로부터 입력되지 않더라도, 위험 인자 추론 모델(100)에서 추론된 위험 인자들을 이용할 수 있으므로, 기존 위험도 평가 모델의 사용성을 높이고, 또한 예측 정확도를 높일 수 있다. According to another embodiment, the risk factor inference model 100 may be implemented to work in conjunction with a statistical model such as an existing risk assessment model, for example, a logistic regression-based probabilistic model. The existing risk assessment model has a problem in that prediction accuracy is lowered when predetermined risk factors are not input from the user. However, since the existing risk assessment model interworking with the risk factor inference model 100 can use risk factors inferred from the risk factor inference model 100 even if some risk factors are not input from the user, the usability of the existing risk assessment model , and the prediction accuracy can be improved.

이처럼, 예측 장치(10)는 위험 인자 추론 모델(100)이 의료 영상으로부터 추론한 적어도 하나의 위험 인자, 그리고 의학적 예측 모델(200)이 위험 인자로부터 추론한 질병 위험도 등의 의학적 예측을 제공할 수 있다. 이외에도, 예측 장치(10)는 의학적 예측 모델(200)의 예측 결과에 영향을 미친 입력 위험 인자를 역방향으로 분석하고, 예측 결과에 기여한 위험 인자들을 찾을 수 있다. 예측 장치(10)는 예측 결과에 영향을 준 위험 인자들을 기여도 순서로 추출하고, 이를 환자 보고서에 제공할 수 있다. 이를 통해, 환자 또는 의사는 질병 위험도에 큰 영향을 준 위험 인자가 나이인지, 가족력인지, 유방 치밀도인지, 또는 영상에서 검출된 병변 정보인지를 이해할 수 있고, 이에 대한 적절한 치료 계획을 수립할 수 있다. 또한, 예측 장치(10)는 역방향 분석을 통해 획득한 정보를 기초로, 다양한 위험 인자 후보들 중 해당 질병의 발병 가능성에 영향을 주는 위험 인자를 찾아낼 수 있다.As such, the prediction device 10 may provide a medical prediction, such as at least one risk factor inferred from the medical image by the risk factor inference model 100, and the disease risk inferred from the risk factor by the medical prediction model 200. have. In addition, the prediction device 10 may reversely analyze the input risk factors affecting the prediction result of the medical prediction model 200 and find risk factors contributing to the prediction result. The prediction device 10 may extract risk factors affecting the prediction result in the order of contribution, and provide it to the patient report. Through this, a patient or doctor can understand whether the risk factor that has a significant influence on the disease risk is age, family history, breast density, or lesion information detected in the image, and can establish an appropriate treatment plan. have. Also, the prediction apparatus 10 may find a risk factor that affects the likelihood of the disease from among various risk factor candidates based on information obtained through the backward analysis.

도 2를 참고하면, 예측 장치(10)는 단독형으로 구축될 수 있고, 다른 장치들과의 연동형으로 구축될 수 있다. 예를 들어, 예측 장치(10)는 복수의 사용자 단말들(20)과 연동하도록 구현될 수 있다. 또한, 예측 장치(10)는 의료 기관의 각종 데이터베이스(30), 예를 들면, 의료영상저장전송시스템(Picture Archiving and Communication System, PACS), 전자의무기록(Electronic Medical Record, EMR), 전자건강기록(Electronic Health Record, EHR) 등과 연동해서 환자의 다양한 임상 정보를 획득할 수 있다. 사용자 단말(20)은 예측 장치(10) 및 데이터베이스(30)와 연동하여 필요한 정보를 화면에 표시하는 사용자 인터페이스 화면을 제공할 수 있다. 사용자 단말(20)은 전용 뷰어를 통해 예측 장치(10)에서 제공된 정보를 표시할 수 있다.Referring to FIG. 2 , the prediction device 10 may be built as a standalone type or may be constructed as a linkage type with other devices. For example, the prediction apparatus 10 may be implemented to interwork with a plurality of user terminals 20 . In addition, the prediction device 10 includes various databases 30 of medical institutions, for example, a picture archiving and communication system (PACS), an electronic medical record (EMR), an electronic health record. (Electronic Health Record, EHR), etc., it is possible to acquire various clinical information of the patient. The user terminal 20 may provide a user interface screen that displays necessary information on the screen in conjunction with the prediction device 10 and the database 30 . The user terminal 20 may display information provided by the prediction device 10 through a dedicated viewer.

예측 장치(10)는 서버 장치일 수 있고, 사용자 단말(20)은 의료 기관에 설치된 클라이언트 단말일 수 있으며, 이들은 네트워크를 통해 연동할 수 있다. 예측 장치(10)는 특정 의료 기관 내 네트워크에 연결된 로컬 서버일 수 있다. 예측 장치(10)는 클라우드 서버일 수 있고, 접근 권한을 가진 다수의 의료 기관들의 단말(의료진 단말)과 연동할 수 있다. 예측 장치(10)는 클라우드 서버일 수 있고, 접근 권한을 가진 환자 개인 단말과 연동할 수 있다.The prediction device 10 may be a server device, and the user terminal 20 may be a client terminal installed in a medical institution, and they may work together through a network. The prediction device 10 may be a local server connected to a network within a specific medical institution. The prediction device 10 may be a cloud server, and may work with terminals (medical staff terminals) of a plurality of medical institutions having access rights. The prediction device 10 may be a cloud server, and may interwork with a patient personal terminal having an access right.

예측 장치(10)는 사용자 단말(20)로부터 의료 영상에 대한 의학적 예측을 요청받고, 사용자 단말(20)로 요청된 의학적 예측에 응답할 수 있다. 예측 장치(10)는 의료 영상으로부터 추론된 위험 인자들을 사용자 단말(20)에게 제공할 수 있고, 추론된 위험 인자들에 대한 확인 및/또는 수정을 사용자 단말(20)에게 요청할 수 있다. 예측 장치(10)는 구현된 인공지능 모델에 따라, 사용자 단말(20) 또는 데이터베이스(30)로부터 추가 정보를 입력받거나 가져올 수 있다. 의료 영상이 데이터베이스(30)에 저장된 경우, 사용자 단말(20)이 데이터베이스(30)에서 가져온 의료 영상을 예측 장치(10)로 전송할 수 있고, 예측 장치(10)가 사용자 단말(20)에서 요청한 의료 영상을 데이터베이스(30)에서 가져올 수 있다. The prediction apparatus 10 may receive a medical prediction request for a medical image from the user terminal 20 , and may respond to the medical prediction requested by the user terminal 20 . The prediction apparatus 10 may provide the risk factors inferred from the medical image to the user terminal 20 , and may request the user terminal 20 to confirm and/or correct the inferred risk factors. The prediction apparatus 10 may receive or bring additional information from the user terminal 20 or the database 30 according to the implemented artificial intelligence model. When the medical image is stored in the database 30 , the user terminal 20 may transmit the medical image obtained from the database 30 to the prediction device 10 , and the prediction device 10 may request medical treatment from the user terminal 20 . The image may be retrieved from the database 30 .

도 3부터 도 6 각각은 한 실시예에 따른 인공지능 모델의 구성을 설명하는 도면이다.3 to 6 are diagrams for explaining the configuration of an artificial intelligence model according to an embodiment.

도 3을 참고하면, 예측 장치(10)에 구현된 인공지능 모델은 위험 인자 추론 모델(100)과 의학적 예측 모델(200A)로 구성될 수 있다. Referring to FIG. 3 , the artificial intelligence model implemented in the prediction device 10 may include a risk factor inference model 100 and a medical prediction model 200A.

위험 인자 추론 모델(100)은 의료 영상으로부터 위험 인자들을 추론하도록 훈련된 인공지능 모델로서, 의료 영상을 입력받고, 추론된 위험 인자들을 출력할 수 있다. 추론된 위험 인자들은 의료 영상의 종류, 훈련 데이터, 훈련 방법에 따라 다양할 수 있다. 예를 들면, 위험 인자 추론 모델(100)은 유방 촬영 영상으로부터, 유방암의 위험 인자로 알려진 유방 치밀도 등의 의학적 정보를 추론할 수 있고, 나이 등의 신체 정보, 다른 위험 인자들을 더 추론할 수 있다. The risk factor inference model 100 is an artificial intelligence model trained to infer risk factors from a medical image, and may receive a medical image and output the inferred risk factors. The inferred risk factors may vary depending on the type of medical image, training data, and training method. For example, the risk factor inference model 100 may infer medical information such as breast density, which is known as a risk factor for breast cancer, from a mammogram image, and may further infer physical information such as age and other risk factors. have.

의학적 예측 모델(200A)은 입력된 위험 인자들로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델로서, 추론된 위험 인자들을 입력받고, 의학적 예측을 출력할 수 있다. 의학적 예측 모델(200A)에서 출력되는 의학적 예측은 질병 위험도, 추천 검사, 추천 검사 수행 시기 등을 포함할 수 있다. 또한, 의학적 예측들은 추천 검사 수행 여부에 따른 암진단 가능성에 대한 예측을 더 포함할 수 있다. The medical prediction model 200A is an artificial intelligence model trained to output a medical prediction from the input risk factors, and may receive inferred risk factors and output a medical prediction. The medical prediction output from the medical prediction model 200A may include disease risk, a recommended test, a recommended test execution time, and the like. In addition, the medical predictions may further include a prediction of the possibility of cancer diagnosis according to whether a recommended test is performed.

한편, 의학적 예측 모델(200A)은 인공지능 모델로 구현될 수 있고, 또는 입력된 위험 인자들로부터 질병 위험도를 계산하는 통계학적 모델로 구현될 수 있다.Meanwhile, the medical prediction model 200A may be implemented as an artificial intelligence model, or as a statistical model for calculating disease risk from input risk factors.

도 4를 참고하면, 예측 장치(10)에 구현된 인공지능 모델은 위험 인자 추론 모델(100)과 의학적 예측 모델(200B)로 구성될 수 있다. Referring to FIG. 4 , the artificial intelligence model implemented in the prediction device 10 may include a risk factor inference model 100 and a medical prediction model 200B.

위험 인자 추론 모델(100)은 도 3에서 설명한 바와 같이, 의료 영상을 입력받고, 추론된 위험 인자들을 출력할 수 있다.As described with reference to FIG. 3 , the risk factor inference model 100 may receive a medical image and output inferred risk factors.

의학적 예측 모델(200B)은 추론된 위험 인자들과 함께, 아는 위험 인자들을 추가 정보로 입력받고, 입력된 위험 인자들로부터 지정된 항목의 의학적 예측을 출력할 수 있다. 예를 들면, 의학적 예측 모델(200B)은 의료 영상으로부터 추론된 유방 치밀도와 함께, 나이, 가족력, 초경 나이, 출산력, 호르몬 치료 여부 등의 아는 위험 인자들을 입력받을 수 있다. 의학적 예측 모델(200B)로 입력되는 아는 위험 인자들은, 예측 장치(10)에서 제공하는 인터페이스 화면을 통해 사용자 단말(20)에서 입력되거나, 예측 장치(10)가 데이터베이스에서 가져올 수 있다. 이외에도, 의학적 예측 모델(200B)은 위험 인자 추론에 사용된 입력 영상을 추가 정보로 입력받을 수 있다. The medical prediction model 200B may receive known risk factors as additional information along with the inferred risk factors, and may output a medical prediction of a designated item from the input risk factors. For example, the medical prediction model 200B may receive known risk factors such as age, family history, menarche age, fertility history, and whether hormone treatment is performed along with breast density inferred from the medical image. The known risk factors input to the medical prediction model 200B may be input from the user terminal 20 through an interface screen provided by the prediction device 10 or may be obtained from the database by the prediction device 10 . In addition, the medical prediction model 200B may receive an input image used for risk factor inference as additional information.

의학적 예측 모델(200B)은 입력으로부터 지정된 항목의 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로 구현될 수 있다.The medical prediction model 200B may be implemented as an artificial intelligence model trained to output a medical prediction of a specified item from an input, or a statistical model that outputs a medical prediction calculated from the input.

도 5를 참고하면, 예측 장치(10)에 구현된 인공지능 모델은 위험 인자 추론 모델(100), 의학적 예측 모델(200C), 그리고 질병 예측 모델(Disease Inference Model)(300)로 구성될 수 있다. 여기서, 질병 추론 모델(300)은 예측 장치(10)에 구현될 수 있지만, 별도 장치에 구현된 후, 예측 장치(10)와 연동할 수 있다.Referring to FIG. 5 , the artificial intelligence model implemented in the prediction device 10 may include a risk factor inference model 100 , a medical prediction model 200C, and a disease prediction model 300 . . Here, the disease inference model 300 may be implemented in the prediction device 10 , but may be implemented in a separate device and then interwork with the prediction device 10 .

위험 인자 추론 모델(100)은 도 3에서 설명한 바와 같이, 의료 영상을 입력받고, 추론된 위험 인자들을 출력할 수 있다.As described with reference to FIG. 3 , the risk factor inference model 100 may receive a medical image and output inferred risk factors.

의학적 예측 모델(200C)은 의료 영상으로부터 추론된 위험 인자들과 함께, 의료 영상으로부터 추론된 질병 정보(Disease information)를 추가 정보로 입력받을 수 있다. 질병 정보는 예를 들면, 의료 영상으로부터 추론된 질병 위험도일 수 있다. 이외에도, 의학적 예측 모델(200C)은 위험 인자 추론에 사용된 입력 영상을 추가 정보로 입력받을 수 있다.The medical prediction model 200C may receive disease information inferred from the medical image as additional information together with risk factors inferred from the medical image. The disease information may be, for example, a disease risk inferred from a medical image. In addition, the medical prediction model 200C may receive an input image used for inferring risk factors as additional information.

의학적 예측 모델(200C)은 추론된 위험 인자들과 추론된 질병 정보로부터 지정된 항목의 의학적 예측을 출력할 수 있다. 의학적 예측 모델(200C)은 입력으로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로 구현될 수 있다.The medical prediction model 200C may output a medical prediction of a designated item from the inferred risk factors and the inferred disease information. The medical prediction model 200C may be implemented as an artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input.

의학적 예측 모델(200C)로 입력되는 추가 정보는 별도의 질병 추론 모델로부터 입력될 수 있다. 질병 추론 모델(300)은 의료 영상으로부터 질병 정보를 추론하도록 훈련된 인공지능 모델로서, 의료 영상을 입력받고, 의료 영상으로부터 추론된 질병 정보를 출력할 수 있다.Additional information input to the medical prediction model 200C may be input from a separate disease inference model. The disease inference model 300 is an artificial intelligence model trained to infer disease information from a medical image, and may receive a medical image and output disease information inferred from the medical image.

도 6을 참고하면, 예측 장치(10)에 구현된 인공지능 모델은 위험 인자 추론 모델(100), 의학적 예측 모델(200D), 그리고 질병 예측 모델(300)로 구성될 수 있다. 여기서, 질병 추론 모델(300)은 예측 장치(10)에 구현될 수 있지만, 별도 장치에 구현된 후, 예측 장치(10)와 연동할 수 있다.Referring to FIG. 6 , the artificial intelligence model implemented in the prediction device 10 may include a risk factor inference model 100 , a medical prediction model 200D, and a disease prediction model 300 . Here, the disease inference model 300 may be implemented in the prediction device 10 , but may be implemented in a separate device and then interwork with the prediction device 10 .

위험 인자 추론 모델(100)은 도 3에서 설명한 바와 같이, 의료 영상을 입력받고, 추론된 위험 인자들을 출력할 수 있다.As described with reference to FIG. 3 , the risk factor inference model 100 may receive a medical image and output inferred risk factors.

의학적 예측 모델(200D)은 의료 영상으로부터 추론된 위험 인자들과 함께, 아는 위험 인자들 및 의료 영상으로부터 추론된 질병 정보를 추가 정보로 입력받을 수 있다. 질병 정보는 예를 들면, 의료 영상으로부터 추론된 질병 위험도일 수 있다. 아는 위험 인자들은, 예측 장치(10)에서 제공하는 인터페이스 화면을 통해 사용자 단말(20)에서 입력되거나, 예측 장치(10)가 데이터베이스에서 가져올 수 있다. 의료 영상으로부터 추론된 질병 정보는 도 5에서 설명한 질병 예측 모델(300)로부터 제공될 수 있다. 이외에도, 의학적 예측 모델(200D)은 위험 인자 추론에 사용된 입력 영상을 추가 정보로 입력받을 수 있다.The medical prediction model 200D may receive, as additional information, known risk factors and disease information inferred from the medical image along with the risk factors inferred from the medical image. The disease information may be, for example, a disease risk inferred from a medical image. The known risk factors may be input from the user terminal 20 through an interface screen provided by the prediction device 10 , or may be obtained from the database by the prediction device 10 . Disease information inferred from the medical image may be provided from the disease prediction model 300 described with reference to FIG. 5 . In addition, the medical prediction model 200D may receive an input image used for inferring risk factors as additional information.

의학적 예측 모델(200D)은 입력된 위험 인자들로부터 지정된 항목의 의학적 예측을 출력할 수 있다. 의학적 예측 모델(200D)은 입력으로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로 구현될 수 있다.The medical prediction model 200D may output a medical prediction of a designated item from the input risk factors. The medical prediction model 200D may be implemented as an artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input.

도 7은 한 실시예에 따른 인공지능 모델을 이용한 의학적 예측 제공 방법의 흐름도이다.7 is a flowchart of a method for providing a medical prediction using an artificial intelligence model according to an embodiment.

도 7을 참고하면, 예측 장치(10)는 환자의 의료 영상을 입력받는다(S110).Referring to FIG. 7 , the prediction apparatus 10 receives a medical image of a patient ( S110 ).

예측 장치(10)는 입력 영상으로부터 위험 인자를 추론하도록 훈련된 인공지능 모델을 이용하여, 입력 의료 영상으로부터 추론된 적어도 하나의 위험 인자를 획득한다(S120). 예측 장치(10)는 의료 영상으로부터 추론된 위험 인자들을 사용자 단말(20)에게 제공할 수 있고, 추론된 위험 인자들에 대한 확인 및/또는 수정을 사용자 단말(20)에게 요청할 수 있다.The prediction apparatus 10 acquires at least one risk factor inferred from the input medical image by using an artificial intelligence model trained to infer risk factors from the input image ( S120 ). The prediction apparatus 10 may provide the risk factors inferred from the medical image to the user terminal 20 , and may request the user terminal 20 to confirm and/or correct the inferred risk factors.

예측 장치(10)는 추론된 위험 인자를 포함하는 환자 정보를 이용하여, 질병 위험도를 포함하는 의학적 예측을 수행한다(S130). 예측 장치(10)는 입력으로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델을 이용하여, 환자 정보로부터 예측된 의학적 예측을 획득할 수 있다. 예측 장치(10)는 사용자 단말(20)로부터 수신한 위험 인자들, 또는 데이터베이스에서 가져온 위험 인자들을 알고 있는 위험 인자들로 관리하고, 이를 환자 정보에 추가할 수 있다. 예측 장치(10)는 의료 영상으로부터 추론된 질병 정보, 예를 들면, 의료 영상으로부터 추론된 질병 위험도를 환자 정보에 추가할 수 있다. The prediction device 10 uses the patient information including the inferred risk factor to perform a medical prediction including the disease risk ( S130 ). The prediction device 10 may obtain a predicted medical prediction from patient information using an artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input. The prediction device 10 may manage risk factors received from the user terminal 20 or risk factors retrieved from a database as known risk factors, and may add them to patient information. The prediction apparatus 10 may add disease information inferred from the medical image, for example, the disease risk inferred from the medical image, to the patient information.

예측 장치(10)는 의학적 예측을 기초로 작성된 환자 보고서를 제공한다(S140). 의학적 예측은 질병 발병 위험도/질병 발병 가능성을 포함하는 질병 위험도를 포함할 수 있다. 의학적 예측은 질병 위험도를 포함하는 환자 정보를 기초로 개인화된 추천 검사, 추천 검사 수행 시기 등을 포함할 수 있다. 또한, 의학적 예측은 추천 검사 수행 여부에 따른 암진단 가능성에 대한 예측을 더 포함할 수 있다. The prediction device 10 provides a patient report prepared based on the medical prediction (S140). The medical prediction may include disease risk, including disease risk/probability of developing disease. The medical prediction may include a personalized recommended test based on patient information including disease risk, a recommended test execution time, and the like. In addition, the medical prediction may further include a prediction of the cancer diagnosis possibility according to whether a recommended test is performed.

도 8은 한 실시예에 따른 사용자 단말에서 제공되는 인터페이스 화면의 예시이다.8 is an example of an interface screen provided by a user terminal according to an embodiment.

도 8을 참고하면, 예측 장치(10)는 사용자 단말(20)로 의학적 예측 소스(source)인 의료 영상을 입력하는 화면(21)을 제공할 수 있다. 사용자 단말(20)은 의료 영상 입력 화면(21)을 표시하고, 사용자로부터 선택된 의료 영상을 예측 장치(10)로 전송할 수 있다. 사용자 단말(20)은 환자의 유방 촬영 영상을 선택받을 수 있다.Referring to FIG. 8 , the prediction apparatus 10 may provide a screen 21 for inputting a medical image, which is a medical prediction source, to the user terminal 20 . The user terminal 20 may display the medical image input screen 21 and transmit the medical image selected by the user to the prediction apparatus 10 . The user terminal 20 may receive a selection of a mammography image of a patient.

예측 장치(10)는 환자의 의료 영상을 입력받고, 입력 영상으로부터 위험 인자를 추론하도록 훈련된 인공지능 모델을 이용하여, 의료 영상으로부터 추론된 적어도 하나의 위험 인자를 획득한다. 예측 장치(10)는 사용자 단말(20)로 의료 영상으로부터 추론된 위험 인자들을 사용자 단말(20)에게 제공할 수 있다. 예를 들면, 예측 장치(10)는 의료 영상으로부터, 환자의 나이, 그리고 치밀도를 포함하는 위험 인자를 추론할 수 있다.The prediction apparatus 10 receives a medical image of a patient and acquires at least one risk factor inferred from the medical image by using an artificial intelligence model trained to infer risk factors from the input image. The prediction apparatus 10 may provide the user terminal 20 with risk factors inferred from the medical image to the user terminal 20 . For example, the prediction apparatus 10 may infer risk factors including the patient's age and density from the medical image.

사용자 단말(20)은 추론된 위험 인자들을 화면(22)에 표시하고, 추론된 위험 인자들에 대한 확인을 요청할 수 있다. 화면(22)에서 사용자는 위험 인자들이 맞는 경우, 확인 버튼을 누를 수 있고, 위험 인자들을 수정한 후, 확인 버튼을 누를 수 있다.The user terminal 20 may display the inferred risk factors on the screen 22 and request confirmation of the inferred risk factors. On the screen 22 , if the risk factors are correct, the user may press the OK button, and after correcting the risk factors, press the OK button.

예측 장치(10)는 사용자 단말(20)로부터 추론된 위험 인자들에 대한 확인 정보를 수신하고, 확인된 위험 인자들을 포함하는 환자 정보를 이용하여, 환자를 위한 의학적 예측을 수행한다. The prediction device 10 receives confirmation information about the risk factors inferred from the user terminal 20 , and uses the patient information including the identified risk factors to perform a medical prediction for the patient.

사용자 단말(20)은 예측 장치(10)에서의 의학적 예측을 기초로 작성된 환자 보고서를 화면(23)에 제공할 수 있다. 환자 보고서는 입력 영상으로부터 예측 가능한 질병 위험도(예를 들면, 유방암 위험도)를 포함할 수 있다. 질병 위험도는 위험 점수로 표현될 수 있다. 환자 보고서는 예측된 질병 위험 점수에 따라 분류된 고위험군(High), 중위험군(Mid), 저위험군(Low) 정보를 기재할 수 있다. 사용자가 질병 위험 점수만으로는 질병 위험도가 높은 지 판단하기가 어렵기 때문에, 환자 보고서에 분류된 위험군을 제공하여 사용자가 직관적으로 질병의 발병 위험도를 알 수 있도록 할 수 있다. 또한, 환자 보고서는 개인화된 추천 검사, 추천 검사 수행 시기 등을 포함할 수 있다. 또한, 환자 보고서는 추천 검사 수행 여부에 따른 암진단 가능성에 대한 예측을 더 포함할 수 있다. The user terminal 20 may provide the patient report prepared based on the medical prediction in the prediction device 10 to the screen 23 . The patient report may include predictable disease risk (eg, breast cancer risk) from the input image. Disease risk can be expressed as a risk score. The patient report may include information about high-risk, mid-risk, and low-risk groups classified according to the predicted disease risk score. Since it is difficult for the user to determine whether the disease risk is high based on the disease risk score alone, the risk group classified in the patient report may be provided so that the user can intuitively know the disease risk. In addition, the patient report may include a personalized recommended examination, when the recommended examination is performed, and the like. In addition, the patient report may further include a prediction of the possibility of cancer diagnosis according to whether a recommended test is performed.

한편, 환자 보고서는 예측 장치(10)에서 추론된 위험 인자들, 질병 위험도를 포함하는 의학적 예측을 기초로 문서 형태로 가공될 수 있다. 환자 보고서는 예측 장치(10)가 작성할 수 있고, 별도의 장치가 예측 장치(10)로부터 수신한 정보를 기초로 작성한 후, 사용자 단말(20)로 제공할 수 있으며, 또는 사용자 단말(20)의 뷰어(viewer)가 예측 장치(10)로부터 수신한 정보를 기초로 문서 형태로 표시할 수 있다. Meanwhile, the patient report may be processed in a document form based on a medical prediction including risk factors and disease risk inferred by the prediction device 10 . The patient report may be prepared by the prediction device 10 , and may be provided to the user terminal 20 after a separate device prepares it based on information received from the prediction device 10 , or A viewer may display the information in the form of a document based on the information received from the prediction device 10 .

환자 보고서는 위험군에 따른 검사 주기에 대한 추천 정보를 제공할 수 있다. 예를 들어, 환자 보고서는 고위험군 환자에게는 기준 이상의 주기로 빈번한 검사를 추천하고, 저위험군 환자에게는 기준 이하의 주기로 검사를 받도록 추천하는 정보를 제공할 수 있다. 이를 통해, 저위험군 환자는 불필요한 검사에 소요되는 비용을 줄일 수 있다.Patient reports can provide recommendations for testing intervals according to risk groups. For example, the patient report may provide information that recommends frequent tests at a frequency higher than a standard for high-risk patients and recommends frequent tests for low-risk patients with a frequency lower than the standard. Through this, low-risk patients can reduce the cost of unnecessary tests.

환자 보고서는 개인화된 치료 계획, 추천 검사, 추천 치료 등을 포함할 수 있다. 예를 들어, 난소암 위험 점수가 기준보다 높게 예측된 환자의 환자 보고서는 “난소암 발병 가능성을 나타내는 위험 점수가 0.9로 고위험군에 해당합니다. 난소암 검사를 추가로 받으세요”라는 문구를 통해 난소암 검사를 추천할 수 있다. Patient reports may include personalized treatment plans, recommended tests, recommended treatments, and the like. For example, a patient report of a patient with a predicted higher than baseline ovarian cancer risk score would be “high risk with a risk score of 0.9, indicating the likelihood of developing ovarian cancer. You can recommend an ovarian cancer test through the phrase “Get an additional ovarian cancer test.”

이외에도, 도 5 및 도 6에서 설명한 바와 같이, 예측 장치(10)가 영상으로부터 추론된 질병 위험도를 사용하여 의학적 예측을 수행하는 경우, 환자 보고서는, 질병 위험도 예측에 사용된 정보를 구체적으로 명시할 수 있다. 예를 들어, 환자 보고서는, "영상 분석에 따른 암 위험 확률은 50%로 예측되나, 다른 위험 요소들을 종합적으로 고려하였을 때 암 위험 확률은 80%로 높게 예측되므로, 주의를 요합니다", "영상 분석, 가족력 및 유방 치밀도를 고려하였을 때, 유방암 위험 점수는 0.2로 저위험군에 해당합니다." 등의 문구를 통해 의학적 예측에 기여한 정보 및 이에 따른 예측 결과를 알려줄 수 있다.In addition, as described in FIGS. 5 and 6 , when the prediction device 10 performs a medical prediction using the disease risk inferred from the image, the patient report specifically specifies the information used for the disease risk prediction. can For example, a patient report states, "The probability of cancer risk according to image analysis is predicted to be 50%, but when other risk factors are taken into account, the cancer risk probability is predicted to be as high as 80%, so caution is required", " Taking into account image analysis, family history, and breast density, the breast cancer risk score was 0.2, which is low-risk." It is possible to inform the information that contributed to the medical prediction and the prediction result according to the phrase.

환자 보고서는 환자의 질병 위험도에 영향을 준 주요 위험 인자를 포함할 수 있다. 주요 위험 인자는 의학적 예측 모델(200)의 입력 위험 인자들 중에서 예측 결과에 큰 영향을 미친 위험 인자로서, 역방향 분석을 통해 추출될 수 있다. 환자 또는 의사는 질병 위험도에 큰 영향을 준 위험 인자가 나이인지, 가족력인지, 유방 치밀도인지, 또는 영상에서 검출된 병변 정보인지를 이해할 수 있고, 이에 대한 적절한 치료 계획을 수립할 수 있다.Patient reports may include key risk factors that affected the patient's disease risk. The main risk factor is a risk factor that has a great influence on the prediction result among the input risk factors of the medical prediction model 200 , and may be extracted through reverse analysis. A patient or a doctor can understand whether a risk factor that has a significant influence on the disease risk is age, family history, breast density, or lesion information detected in an image, and can establish an appropriate treatment plan.

도 9는 한 실시예에 따른 예측 장치의 하드웨어 구성도이다.9 is a hardware configuration diagram of a prediction apparatus according to an embodiment.

도 9를 참고하면, 예측 장치(10)는 하나 이상의 프로세서(11)에 의해 동작하는 컴퓨팅 장치로서, 프로세서(11), 프로세서(11)에 의하여 수행되는 컴퓨터 프로그램을 로드하는 메모리(13), 컴퓨터 프로그램 및 각종 데이터를 저장하는 스토리지(15), 통신 인터페이스(17), 그리고 이들을 연결하는 버스(19)를 포함할 수 있다. 이외에도, 예측 장치(10)에는 다양한 구성 요소가 더 포함될 수 있다. 컴퓨터 프로그램은 메모리(13)에 로드될 때 프로세서(11)로 하여금 본 개시의 다양한 실시예에 따른 방법/동작을 수행하도록 하는 명령어들(instruction)을 포함할 수 있다. 즉, 프로세서(11)는 명령어들을 실행함으로써, 본 개시의 다양한 실시예에 따른 방법/동작들을 수행할 수 있다. 컴퓨터 프로그램은 기능을 기준으로 묶인 일련의 컴퓨터 판독가능 명령어들로 구성되고, 프로세서에 의해 실행되는 것을 가리킨다. 컴퓨터 프로그램은 입력 영상으로부터 질병의 위험 인자를 추론하도록 훈련된 위험 인자 추론 모델, 그리고 입력 위험 인자를 포함하는 환자 정보로부터 질병 위험도를 포함하는 의학적 예측을 출력하는 의학적 예측 모델을 포함할 수 있다.Referring to FIG. 9 , the prediction device 10 is a computing device operated by one or more processors 11 , and includes a processor 11 , a memory 13 for loading a computer program executed by the processor 11 , and a computer It may include a storage 15 for storing programs and various data, a communication interface 17 , and a bus 19 connecting them. In addition, the prediction apparatus 10 may further include various components. The computer program may include instructions that, when loaded into the memory 13 , cause the processor 11 to perform methods/operations according to various embodiments of the present disclosure. That is, the processor 11 may perform methods/operations according to various embodiments of the present disclosure by executing instructions. A computer program consists of a series of computer readable instructions grouped by function, and refers to being executed by a processor. The computer program may include a risk factor inference model trained to infer a risk factor of a disease from an input image, and a medical prediction model that outputs a medical prediction including a disease risk from patient information including the input risk factor.

프로세서(11)는 예측 장치(10)의 각 구성의 전반적인 동작을 제어한다. 프로세서(11)는 CPU(Central Processing Unit), MPU(Micro Processor Unit), MCU(Micro Controller Unit), GPU(Graphic Processing Unit) 또는 본 개시의 기술 분야에 잘 알려진 임의의 형태의 프로세서 중 적어도 하나를 포함하여 구성될 수 있다. 또한, 프로세서(11)는 본 개시의 다양한 실시예들에 따른 방법/동작을 실행하기 위한 적어도 하나의 애플리케이션 또는 컴퓨터 프로그램에 대한 연산을 수행할 수 있다. The processor 11 controls the overall operation of each component of the prediction device 10 . The processor 11 includes at least one of a central processing unit (CPU), a micro processor unit (MPU), a micro controller unit (MCU), a graphic processing unit (GPU), or any type of processor well known in the art of the present disclosure. may be included. In addition, the processor 11 may perform an operation on at least one application or computer program for executing the method/operation according to various embodiments of the present disclosure.

메모리(13)는 각종 데이터, 명령 및/또는 정보를 저장한다. 메모리(13)는 본 개시의 다양한 실시예들에 따른 방법/동작을 실행하기 위하여 스토리지(15)로부터 하나 이상의 컴퓨터 프로그램을 로드할 수 있다. 메모리(13)는 RAM과 같은 휘발성 메모리로 구현될 수 있을 것이나, 본 개시의 기술적 범위는 이에 한정되지 않는다.The memory 13 stores various data, commands and/or information. The memory 13 may load one or more computer programs from the storage 15 to execute methods/operations according to various embodiments of the present disclosure. The memory 13 may be implemented as a volatile memory such as RAM, but the technical scope of the present disclosure is not limited thereto.

스토리지(15)는 컴퓨터 프로그램을 비임시적으로 저장할 수 있다. 스토리지(15)는 ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리 등과 같은 비휘발성 메모리, 하드 디스크, 착탈형 디스크, 또는 본 개시가 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터로 읽을 수 있는 기록 매체를 포함하여 구성될 수 있다.The storage 15 may non-temporarily store a computer program. The storage 15 is a non-volatile memory such as a read only memory (ROM), an erasable programmable ROM (EPROM), an electrically erasable programmable ROM (EEPROM), a flash memory, a hard disk, a removable disk, or well in the art to which the present disclosure pertains. It may be configured to include any known computer-readable recording medium.

통신 인터페이스(17)는 예측 장치(10)의 유무선 인터넷 통신을 지원한다. 또한, 통신 인터페이스(17)는 인터넷 통신 외의 다양한 통신 방식을 지원할 수도 있다. 이를 위해, 통신 인터페이스(17)는 본 개시의 기술 분야에 잘 알려진 통신 모듈을 포함하여 구성될 수 있다. The communication interface 17 supports wired/wireless Internet communication of the prediction device 10 . In addition, the communication interface 17 may support various communication methods other than Internet communication. To this end, the communication interface 17 may be configured to include a communication module well known in the art of the present disclosure.

버스(19)는 예측 장치(10)의 구성 요소 간 통신 기능을 제공한다. 버스(19)는 주소 버스(Address Bus), 데이터 버스(Data Bus) 및 제어 버스(Control Bus) 등 다양한 형태의 버스로 구현될 수 있다.The bus 19 provides communication functions between the components of the prediction device 10 . The bus 19 may be implemented as various types of buses, such as an address bus, a data bus, and a control bus.

이상에서 설명한 본 개시의 실시예는 장치 및 방법을 통해서만 구현이 되는 것은 아니며, 본 개시의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있다.The embodiments of the present disclosure described above are not implemented only through the apparatus and method, and may be implemented through a program for realizing a function corresponding to the configuration of the embodiment of the present disclosure or a recording medium in which the program is recorded.

이상에서 본 개시의 실시예에 대하여 상세하게 설명하였지만 본 개시의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 개시의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 개시의 권리범위에 속하는 것이다.Although the embodiments of the present disclosure have been described in detail above, the scope of the present disclosure is not limited thereto, and various modifications and improved forms of the present disclosure are also provided by those skilled in the art using the basic concept of the present disclosure as defined in the following claims. is within the scope of the right.

Claims (20)

적어도 하나의 프로세서에 의해 동작하는 예측 장치로서,
입력 영상으로부터 질병의 위험 인자를 추론하도록 훈련된 인공지능 모델로서, 의료 영상을 입력받고, 추론된 적어도 하나의 위험 인자를 출력하는 위험 인자 추론 모델, 그리고
상기 추론된 적어도 하나의 위험 인자를 포함하는 환자 정보를 입력받고, 질병 위험도를 포함하는 의학적 예측을 출력하는 의학적 예측 모델
을 포함하는 예측 장치.
A prediction device operated by at least one processor, comprising:
An artificial intelligence model trained to infer risk factors of a disease from an input image, a risk factor inference model that receives a medical image and outputs at least one inferred risk factor, and
A medical prediction model that receives patient information including the inferred at least one risk factor and outputs a medical prediction including the disease risk
Prediction device comprising.
제1항에서,
상기 의학적 예측 모델은
입력으로부터 의학적 예측을 출력하도록 훈련된 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로 구현되는, 예측 장치.
In claim 1,
The medical prediction model is
A prediction device, implemented as an artificial intelligence model trained to output a medical prediction from an input, or a statistical model that outputs a medical prediction calculated from the input.
제1항에서,
상기 환자 정보는
사용자 단말에 제공한 인터페이스 화면에서 입력되거나, 데이터베이스에서 가져온 위험 인자들을 더 포함하는, 예측 장치.
In claim 1,
The patient information is
Input from the interface screen provided to the user terminal, or further comprising risk factors fetched from the database, prediction device.
제1항에서,
상기 환자 정보는
상기 의료 영상으로부터 추론된 질병 정보를 더 포함하는 예측 장치.
In claim 1,
The patient information is
Prediction apparatus further comprising disease information inferred from the medical image.
제1항에서,
상기 추론된 적어도 하나의 위험 인자는 사용자 단말에서 확인 및/또는 수정된 후, 상기 의학적 예측 모델로 입력되는, 예측 장치.
In claim 1,
The at least one inferred risk factor is confirmed and/or corrected in the user terminal, and then is input to the medical prediction model.
제1항에서,
상기 의학적 예측은
상기 질병 위험도 및 상기 환자 정보를 기초로 개인화된 추천 검사, 그리고 추천 검사 수행 시기 중 적어도 하나를 더 포함하는, 예측 장치.
In claim 1,
The medical prediction is
The prediction device further comprising at least one of a recommended test personalized based on the disease risk and the patient information, and a recommended test execution time.
적어도 하나의 프로세서에 의해 동작하는 예측 장치의 동작 방법으로서,
환자의 의료 영상을 입력받는 단계,
입력 영상으로부터 위험 인자를 추론하도록 훈련된 제1 인공지능 모델을 이용하여, 상기 의료 영상으로부터 추론된 적어도 하나의 위험 인자를 획득하는 단계, 그리고
상기 추론된 적어도 하나의 위험 인자를 포함하는 환자 정보를 이용하여, 질병 위험도를 포함하는 의학적 예측을 수행하는 단계
를 포함하는 동작 방법.
A method of operating a prediction device operated by at least one processor, the method comprising:
receiving a patient's medical image;
obtaining at least one risk factor inferred from the medical image by using a first artificial intelligence model trained to infer risk factors from the input image; and
performing a medical prediction including disease risk by using the patient information including the inferred at least one risk factor
A method of operation comprising a.
제7항에서,
상기 의학적 예측을 수행하는 단계는
입력으로부터 의학적 예측을 출력하도록 훈련된 제2 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델을 이용하여, 상기 질병 위험도를 포함하는 의학적 예측을 획득하는, 동작 방법.
In claim 7,
The step of performing the medical prediction is
An operating method of acquiring a medical prediction including the disease risk by using a second artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input.
제7항에서,
사용자 단말에 제공한 인터페이스 화면을 통해 적어도 하나의 위험 인자를 입력받고, 입력받은 위험 인자를 상기 환자 정보에 추가하는 단계
를 더 포함하는, 동작 방법.
In claim 7,
receiving at least one risk factor through an interface screen provided to the user terminal, and adding the received risk factor to the patient information
Further comprising, the method of operation.
제7항에서,
데이터베이스에서 가져온 적어도 하나의 위험 인자를 상기 환자 정보에 추가하는 단계
를 더 포함하는, 동작 방법.
In claim 7,
adding at least one risk factor retrieved from a database to the patient information;
Further comprising, the method of operation.
제7항에서,
상기 의료 영상으로부터 추론된 질병 정보를 상기 환자 정보에 추가하는 단계
를 더 포함하는, 동작 방법.
In claim 7,
adding disease information inferred from the medical image to the patient information
Further comprising, the method of operation.
제7항에서,
상기 의학적 예측을 수행하는 단계는
상기 추론된 적어도 하나의 위험 인자를 사용자 단말에 제공하고, 상기 사용자 단말에서 확인 및/또는 수정된 위험 인자를 이용하여, 상기 의학적 예측을 수행하는, 동작 방법.
In claim 7,
The step of performing the medical prediction is
An operating method of providing the inferred at least one risk factor to a user terminal, and performing the medical prediction by using the checked and/or modified risk factor in the user terminal.
제7항에서,
상기 의학적 예측을 기초로 작성된 환자 보고서를 제공하는 단계
를 더 포함하는 동작 방법.
In claim 7,
providing a patient report prepared based on the medical prediction;
An operation method further comprising a.
제13항에서,
상기 환자 보고서는
상기 질병 위험도 및 상기 환자 정보를 기초로 개인화된 추천 검사, 그리고 추천 검사 수행 시기 중 적어도 하나를 더 포함하는, 동작 방법.
In claim 13,
The patient report
The method of claim 1, further comprising: a recommended test personalized based on the disease risk and the patient information, and at least one of a recommended test execution time.
제13항에서,
상기 환자 보고서는
상기 질병 위험도를 기초로 분류된 위험군을 더 포함하는, 동작 방법.
In claim 13,
The patient report
Further comprising a risk group classified based on the disease risk, the operating method.
의료 영상을 입력받으면, 입력 영상으로부터 질병의 위험 인자를 추론하도록 훈련된 제1 인공지능 모델을 이용하여 상기 의료 영상으로부터 적어도 하나의 위험 인자를 추론하고, 추론된 적어도 하나의 위험 인자를 이용하여 질병 발병 가능성을 나타내는 질병 위험도를 예측하는 프로세서를 포함하는, 컴퓨팅 장치.When a medical image is input, at least one risk factor is inferred from the medical image using a first artificial intelligence model trained to infer a risk factor of a disease from the input image, and a disease using the inferred at least one risk factor A computing device, comprising: a processor for predicting a disease risk indicative of a likelihood of developing an illness. 제16항에서,
상기 프로세서는
입력으로부터 의학적 예측을 출력하도록 훈련된 제2 인공지능 모델이나, 입력으로부터 계산된 의학적 예측을 출력하는 통계학적 모델로, 상기 추론된 적어도 하나의 위험 인자를 입력하여, 예측된 상기 질병 위험도를 획득하는, 컴퓨팅 장치.
17. In claim 16,
the processor
A second artificial intelligence model trained to output a medical prediction from an input or a statistical model that outputs a medical prediction calculated from the input, inputting the inferred at least one risk factor to obtain the predicted disease risk , computing devices.
제16항에서,
상기 프로세서는
상기 추론된 적어도 하나의 위험 인자와 함께, 사용자 단말에 제공한 인터페이스 화면에서 입력된 적어도 하나의 위험 인자, 데이터베이스에서 가져온 적어도 하나의 위험 인자, 그리고 상기 의료 영상으로부터 추론된 질병 정보 중 적어도 하나를 이용하여 상기 질병 위험도를 예측하는, 컴퓨팅 장치.
17. In claim 16,
the processor
At least one of at least one risk factor input from an interface screen provided to a user terminal, at least one risk factor retrieved from a database, and disease information inferred from the medical image together with the inferred at least one risk factor is used to predict the disease risk, computing device.
제16항에서,
상기 프로세서는
상기 질병 위험도 및 획득한 환자 정보를 기초로, 개인화된 추천 검사, 추천 검사 수행 시기 중 적어도 하나를 제공하는, 컴퓨팅 장치.
17. In claim 16,
the processor
A computing device that provides at least one of a personalized recommended test and a recommended test execution time based on the disease risk and acquired patient information.
제16항에서,
상기 프로세서는
상기 추론된 적어도 하나의 위험 인자 및/또는 상기 질병 위험도를 사용자 단말에 제공하는, 컴퓨팅 장치.
17. In claim 16,
the processor
and providing the inferred at least one risk factor and/or the disease risk to a user terminal.
KR1020220038925A 2021-03-31 2022-03-29 Method and apparatus for providing medical expectations using artificial intelligence model KR20220136226A (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/KR2022/004546 WO2022211506A1 (en) 2021-03-31 2022-03-30 Method and device for providing medical prediction by using artificial intelligence model
EP22781625.3A EP4318496A1 (en) 2021-03-31 2022-03-30 Method and device for providing medical prediction by using artificial intelligence model
US18/273,316 US20240233948A9 (en) 2021-03-31 2022-03-30 Method and device for providing medical prediction by using artificial intelligence model

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20210042303 2021-03-31
KR1020210042303 2021-03-31

Publications (1)

Publication Number Publication Date
KR20220136226A true KR20220136226A (en) 2022-10-07

Family

ID=83595598

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220038925A KR20220136226A (en) 2021-03-31 2022-03-29 Method and apparatus for providing medical expectations using artificial intelligence model

Country Status (1)

Country Link
KR (1) KR20220136226A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024080764A1 (en) * 2022-10-13 2024-04-18 서울대학교산학협력단 Device and method for prediction of risk for breast cancer occurrence

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024080764A1 (en) * 2022-10-13 2024-04-18 서울대학교산학협력단 Device and method for prediction of risk for breast cancer occurrence

Similar Documents

Publication Publication Date Title
US10984905B2 (en) Artificial intelligence for physiological quantification in medical imaging
KR101818074B1 (en) Artificial intelligence based medical auto diagnosis auxiliary method and system therefor
US20190156947A1 (en) Automated information collection and evaluation of clinical data
US11037070B2 (en) Diagnostic test planning using machine learning techniques
US20180204325A1 (en) Medical evaluation machine learning workflows and processes
US20230012685A1 (en) Healthcare network
US12027267B2 (en) Information processing apparatus, information processing system, information processing method, and non-transitory computer-readable storage medium for computer-aided diagnosis
JP2007524461A (en) Mammography automatic diagnosis and decision support system and method
JP2018532209A (en) Long-term healthy patient profile of incidental findings
US20220051805A1 (en) Clinical decision support
US20220366151A1 (en) Document creation support apparatus, method, and program
EP4141886A1 (en) Method and system and apparatus for quantifying uncertainty for medical image assessment
KR20220136226A (en) Method and apparatus for providing medical expectations using artificial intelligence model
JP7013145B2 (en) Information processing equipment, information processing system, operation method and program of information processing equipment
US20230005580A1 (en) Document creation support apparatus, method, and program
EP4318496A1 (en) Method and device for providing medical prediction by using artificial intelligence model
US20240233948A9 (en) Method and device for providing medical prediction by using artificial intelligence model
JP7485512B2 (en) Medical information processing device, medical information processing method, and medical information processing program
US12014823B2 (en) Methods and systems for computer-aided diagnosis with deep learning models
CN112447287A (en) Automated clinical workflow
US20220319650A1 (en) Method and System for Providing Information About a State of Health of a Patient
JP2024505213A (en) Method and device for providing reliable information on results of artificial intelligence models
US20220391599A1 (en) Information saving apparatus, method, and program and analysis record generation apparatus, method, and program
US20220277134A1 (en) Document creation support apparatus, method, and program
US20220076796A1 (en) Medical document creation apparatus, method and program, learning device, method and program, and trained model