KR20210110183A - 의료 영상 장치 및 의료 영상 처리 방법 - Google Patents
의료 영상 장치 및 의료 영상 처리 방법 Download PDFInfo
- Publication number
- KR20210110183A KR20210110183A KR1020210014945A KR20210014945A KR20210110183A KR 20210110183 A KR20210110183 A KR 20210110183A KR 1020210014945 A KR1020210014945 A KR 1020210014945A KR 20210014945 A KR20210014945 A KR 20210014945A KR 20210110183 A KR20210110183 A KR 20210110183A
- Authority
- KR
- South Korea
- Prior art keywords
- lesion
- contour
- arrow
- imaging apparatus
- medical imaging
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000012545 processing Methods 0.000 title description 3
- 230000003902 lesion Effects 0.000 claims abstract description 503
- 238000002059 diagnostic imaging Methods 0.000 claims description 308
- 238000010586 diagram Methods 0.000 description 25
- 238000010801 machine learning Methods 0.000 description 14
- 230000014509 gene expression Effects 0.000 description 10
- 238000004458 analytical method Methods 0.000 description 9
- 238000010191 image analysis Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 238000011017 operating method Methods 0.000 description 3
- 230000001575 pathological effect Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 210000004185 liver Anatomy 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 208000006029 Cardiomegaly Diseases 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000009607 mammography Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5217—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
- A61B6/468—Arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
- A61B8/468—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/203—Drawing of straight lines or curves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/761—Proximity, similarity or dissimilarity measures
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/502—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of breast, i.e. mammography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- General Physics & Mathematics (AREA)
- Primary Health Care (AREA)
- High Energy & Nuclear Physics (AREA)
- Epidemiology (AREA)
- Multimedia (AREA)
- Physiology (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
본 개시는 병변 정보를 의료 영상에 표시하는 장치 및 방법에 관한 것으로써, 의료 영상에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계, 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 적어도 하나의 컨투어를 생성하는 단계 및 의료 영상에 생성된 적어도 하나의 컨투어를 출력하는 단계를 포함한다.
Description
본 개시는 의료 영상으로부터 병변 정보를 획득하고, 병변 정보를 의료 영상에 표시하는 장치 및 방법에 관한 것이다.
빅 데이터 또는 인공지능 등의 기술이 발전함에 따라, 의료 영상으로부터 자동으로 병변을 검출내는 기술의 신뢰도는 점점 높아지고 있다. 이에 따라 의료 장치는 의료 영상으로부터 복수의 병변을 검출할 수 있게 되었다. 하지만 검출된 복수의 병변에 대한 정보를 하나의 의료 영상에 모두 표시한다면, 의료 영상에 나타난 정보가 너무 많아질 수 있다. 의료 영상에 정보를 너무 많이 표시하면, 원본 영상이 가려질 뿐 아니라 의료인이 표시된 복수의 병변 정보를 이용하여 진단하는데 오히려 오랜 시간이 걸릴 수 있다. 또한 의료인이 표시된 복수의 병변 정보 중 일부를 누락할 수도 있다.
따라서 병변을 영상에 효과적으로 표시하기 위한 기술이 필요하다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법은, 의료 영상에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계, 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 적어도 하나의 컨투어를 생성하는 단계, 및 의료 영상에 생성된 적어도 하나의 컨투어를 출력하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어를 생성하는 단계는, 획득된 병변 정보에 기초하여, 의료 영상에 포함되는 복수의 병변 간에 중복되는 병변 영역과 관련된 정보 또는 복수의 병변 간의 관련성과 관련된 정보 중 적어도 하나에 기초하여 컨투어를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어를 생성하는 단계는, 복수의 병변에 포함되는 제 1 병변 정보 및 제 2 병변 정보에 기초하여, 제 1 병변의 영역과 제 2 병변의 영역이 중복되는 영역의 크기를 결정하는 단계, 제 2 병변 정보에 기초하여 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보를 결정하는 단계, 및 중복되는 영역의 크기가 제 1 임계값보다 크고, 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보가 제 2 임계값보다 작은 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어를 생성하는 단계는, 제 1 병변 및 제 2 병변 사이에 질병학적으로 유사성이 있는지 여부를 결정하는 단계, 제 1 병변 및 제 2 병변이 동일 영역에 공존성이 있는지 여부를 결정하는 단계, 유사성이 있는지 여부가 제 1 병변 및 제 2 병변이 유사함을 나타내거나, 공존성이 있는지 여부가 제 1 병변 및 제 2 병변이 서로 공존할 수 없음을 나타내는 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하고, 제 2 병변을 둘러싸는 적어도 하나의 컨투어를 생성하지 않는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법은, 복수의 병변 정보에 기초하여, 의료 영상에서 존재할 확률이 높은 순으로 복수의 병변 정보를 정렬하는 단계를 더 포함하고, 제 1 병변은 제 2 병변보다 의료 영상에서 존재할 확률이 높은 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어를 출력하는 단계는, 적어도 하나의 컨투어 중 제 1 컨투어를 가리키는 복수의 제 1 후보 화살표에 대한 제 1 후보 화살표 정보를 결정하는 단계, 제 1 컨투어의 외곽에 화살표-텍스트 영역을 결정하는 단계, 화살표-텍스트 영역에서, 복수의 제 1 후보 화살표에 대응되고 제 1 컨투어에 대한 병변 정보를 표시하는 텍스트 박스의 일 사이드(side)와 제 1 후보 화살표 정보에 포함되는 복수의 제 1 후보 화살표의 일단이 만나는 접점 영역을 결정하는 단계, 결정된 접점 영역에 기초하여 제 1 컨투어에 대한 텍스트 박스 및 화살표의 표시 가능한 위치에 대한 적어도 하나의 화살표 세트를 생성하는 단계, 적어도 하나의 화살표 세트 각각에 대하여 스코어를 획득하는 단계 및 획득된 스코어에 기초하여, 적어도 하나의 화살표 세트 중 하나의 화살표 세트를 선택하는 단계, 선택된 하나의 화살표 세트에 기초하여, 적어도 하나의 컨투어와 함께, 화살표 및 텍스트 박스 내의 텍스트를 출력하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 제 1 후보 화살표 정보를 결정하는 단계는, 제 1 컨투어에 대한 제 1 텍스트 박스가 제 2 컨투어에 대한 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되는 경우, 제 1 텍스트 박스가 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되지 않도록, 제 1 후보 화살표 정보에 포함된 후보 화살표의 시작점 또는 끝점을 이동시켜서 수정된 제 1 후보 화살표 정보를 획득하는 단계를 포함하고, 적어도 하나의 화살표 세트를 생성하는 단계는, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법은, 적어도 하나의 컨투어 중 제 2 컨투어를 가리키는 복수의 제 2 후보 화살표에 대한 제 2 후보 화살표 정보를 결정하는 단계를 더 포함하고, 제 1 후보 화살표 정보를 결정하는 단계는, 복수의 제 1 후보 화살표 중 하나와 복수의 제 2 후보 화살표 중 하나가 교차되지 않도록, 복수의 제 1 후보 화살표 중 하나의 시작점 또는 끝점을 이동시켜서, 수정된 제 1 후보 화살표 정보를 획득하는 단계를 포함하고, 적어도 하나의 화살표 세트를 생성하는 단계는, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 제 1 후보 화살표 정보를 결정하는 단계는, 제 1 컨투어 및 적어도 하나의 컨투어 중 제 2 컨투어의 교점을 획득하는 단계, 복수의 제 1 후보 화살표 중 하나 및 제 1 컨투어가 만나는 제 1 접점을 획득하는 단계, 제 1 접점이 교점으로부터 임계값 이상 떨어지도록, 복수의 제 1 후보 화살표 중 하나의 시작점 또는 끝점의 위치를 수정하여, 수정된 제 1 후보 화살표 정보를 획득하는 단계를 포함하고, 적어도 하나의 화살표 세트를 생성하는 단계는, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 화살표-텍스트 영역은 제 1 컨투어와 접하지 않고, 제 1 컨투어를 둘러싸는 링형인 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 스코어는, 적어도 하나의 컨투어에 대응되는 적어도 하나의 텍스트 박스 간의 거리가 멀수록 높고, 적어도 하나의 컨투어에 대응되는 적어도 하나의 화살표의 길이가 짧을 수록 높고, 적어도 하나의 컨투어에 포함된 두 개의 컨투어의 교점 및 적어도 하나의 컨투어와 적어도 하나의 화살표의 접점 사이의 거리가 멀수록 높은 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어를 생성하는 단계는, 획득된 병변 정보에 기초하여 적어도 하나의 컨투어의 위치 및 형태를 결정하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 적어도 하나의 컨투어의 위치 및 형태를 결정하는 단계는, 병변 정보에 기초하여 의료 영상 내의 각 픽셀이 적어도 하나의 병변의 영역에 포함될 확률을 획득하는 단계 및 적어도 하나의 병변의 영역에 포함될 확률에 기초하여 적어도 하나의 컨투어의 두께를 결정하는 단계를 포함하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치는 프로세서 및 메모리를 포함하며, 프로세서는 메모리에 포함된 명령어에 따라, 의료 영상에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하고, 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 적어도 하나의 컨투어를 생성하고, 의료 영상에 생성된 적어도 하나의 컨투어를 출력하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 획득된 병변 정보에 기초하여, 의료 영상에 포함되는 복수의 병변 간에 중복되는 병변 영역과 관련된 정보 또는 복수의 병변 간의 관련성과 관련된 정보 중 적어도 하나에 기초하여 컨투어를 생성하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 복수의 병변에 포함되는 제 1 병변 정보 및 제 2 병변 정보에 기초하여, 제 1 병변의 영역과 제 2 병변의 영역이 중복되는 영역의 크기를 결정하고, 제 2 병변 정보에 기초하여 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보를 결정하고, 중복되는 영역의 크기가 제 1 임계값보다 크고, 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보가 제 2 임계값보다 작은 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 제 1 병변 및 제 2 병변 사이에 질병학적으로 유사성이 있는지 여부를 결정하고, 제 1 병변 및 제 2 병변이 동일 영역에 공존성이 있는지 여부를 결정하고, 유사성이 있는지 여부가 제 1 병변 및 제 2 병변이 유사함을 나타내거나, 공존성이 있는지 여부가 제 1 병변 및 제 2 병변이 서로 공존할 수 없음을 나타내는 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하고, 제 2 병변을 둘러싸는 적어도 하나의 컨투어를 생성하지 않는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 복수의 병변 정보에 기초하여, 의료 영상에서 존재할 확률이 높은 순으로 복수의 병변 정보를 정렬하고, 제 1 병변은 제 2 병변보다 의료 영상에서 존재할 확률이 높은 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 적어도 하나의 컨투어 중 제 1 컨투어를 가리키는 복수의 제 1 후보 화살표에 대한 제 1 후보 화살표 정보를 결정하고, 제 1 컨투어의 외곽에 화살표-텍스트 영역을 결정하고, 화살표-텍스트 영역에서, 복수의 제 1 후보 화살표에 대응되고 제 1 컨투어에 대한 병변 정보를 표시하는 텍스트 박스의 일 사이드(side)와 제 1 후보 화살표 정보에 포함되는 복수의 제 1 후보 화살표의 일단이 만나는 접점 영역을 결정하고, 결정된 접점 영역에 기초하여 제 1 컨투어에 대한 텍스트 박스 및 화살표의 표시 가능한 위치에 대한 적어도 하나의 화살표 세트를 생성하고, 적어도 하나의 화살표 세트 각각에 대하여 스코어를 획득하고, 획득된 스코어에 기초하여, 적어도 하나의 화살표 세트 중 하나의 화살표 세트를 선택하고, 선택된 하나의 화살표 세트에 기초하여, 적어도 하나의 컨투어와 함께, 화살표 및 텍스트 박스 내의 텍스트를 출력하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 제 1 컨투어에 대한 제 1 텍스트 박스가 제 2 컨투어에 대한 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되는 경우, 제 1 텍스트 박스가 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되지 않도록, 제 1 후보 화살표 정보에 포함된 후보 화살표의 시작점 또는 끝점을 이동시켜서 수정된 제 1 후보 화살표 정보를 획득하고, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 적어도 하나의 컨투어 중 제 2 컨투어를 가리키는 복수의 제 2 후보 화살표에 대한 제 2 후보 화살표 정보를 결정하는 하고, 복수의 제 1 후보 화살표 중 하나와 복수의 제 2 후보 화살표 중 하나가 교차되지 않도록, 복수의 제 1 후보 화살표 중 하나의 시작점 또는 끝점을 이동시켜서, 수정된 제 1 후보 화살표 정보를 획득하고, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 제 1 컨투어 및 적어도 하나의 컨투어 중 제 2 컨투어의 교점을 획득하고, 복수의 제 1 후보 화살표 중 하나 및 제 1 컨투어가 만나는 제 1 접점을 획득하고, 제 1 접점이 교점으로부터 임계값 이상 떨어지도록, 복수의 제 1 후보 화살표 중 하나의 시작점 또는 끝점의 위치를 수정하여, 수정된 제 1 후보 화살표 정보를 획득하고, 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 화살표-텍스트 영역은 제 1 컨투어와 접하지 않고, 제 1 컨투어를 둘러싸는 링형인 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 스코어는, 적어도 하나의 컨투어에 대응되는 적어도 하나의 텍스트 박스 간의 거리가 멀수록 높고, 적어도 하나의 컨투어에 대응되는 적어도 하나의 화살표의 길이가 짧을 수록 높고, 적어도 하나의 컨투어에 포함된 두 개의 컨투어의 교점 및 적어도 하나의 컨투어와 적어도 하나의 화살표의 접점 사이의 거리가 멀수록 높은 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 획득된 병변 정보에 기초하여 적어도 하나의 컨투어의 위치 및 형태를 결정하는 것을 특징으로 한다.
본 개시의 일 실시예에 따른 의료 영상 장치의 프로세서는 메모리에 포함된 명령어에 따라, 병변 정보에 기초하여 의료 영상 내의 각 픽셀이 적어도 하나의 병변의 영역에 포함될 확률을 획득하고, 적어도 하나의 병변의 영역에 포함될 확률에 기초하여 적어도 하나의 컨투어의 두께를 결정하는 것을 특징으로 한다.
또한, 상술한 바와 같은 의료 영상 장치의 동작 방법을 구현하기 위한 프로그램은 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다.
도 1은 본 개시의 일 실시예에 따른 의료 영상 장치를 나타낸 도면이다.
도 2는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타내는 흐름도이다.
도 3은 본 개시의 일 실시예에 따른 의료 영상을 나타낸 도면이다.
도 4는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 수도 코드를 나타낸다.
도 5는 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 6은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 7은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 8은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 9는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타낸 흐름도이다.
도 10은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 11은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 12은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 13은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 14는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 15는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 16은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 17은 본 개시의 일 실시예에 따라 스코어를 획득하는 방법을 설명하기 위한 도면이다.
도 18은 본 개시의 일 실시예에 따라 스코어를 획득하는 방법을 설명하기 위한 도면이다.
도 19는 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
도 20은 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
도 2는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타내는 흐름도이다.
도 3은 본 개시의 일 실시예에 따른 의료 영상을 나타낸 도면이다.
도 4는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 수도 코드를 나타낸다.
도 5는 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 6은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 7은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 8은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
도 9는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타낸 흐름도이다.
도 10은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 11은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 12은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 13은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 14는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 15는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 16은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
도 17은 본 개시의 일 실시예에 따라 스코어를 획득하는 방법을 설명하기 위한 도면이다.
도 18은 본 개시의 일 실시예에 따라 스코어를 획득하는 방법을 설명하기 위한 도면이다.
도 19는 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
도 20은 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
개시된 실시예의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 개시는 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 개시가 완전하도록 하고, 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것일 뿐이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 개시된 실시예에 대해 구체적으로 설명하기로 한다.
본 명세서에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 관련 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 명세서에서의 단수의 표현은 문맥상 명백하게 단수인 것으로 특정하지 않는 한, 복수의 표현을 포함한다. 또한 복수의 표현은 문맥상 명백하게 복수인 것으로 특정하지 않는 한, 단수의 표현을 포함한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다.
또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어 또는 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.
본 개시의 일 실시예에 따르면 "부"는 프로세서 및 메모리로 구현될 수 있다. 용어 "프로세서" 는 범용 프로세서, 중앙 처리 장치 (CPU), 마이크로프로세서, 디지털 신호 프로세서 (DSP), 제어기, 마이크로제어기, 상태 머신 등을 포함하도록 넓게 해석되어야 한다. 몇몇 환경에서는, "프로세서" 는 주문형 반도체 (ASIC), 프로그램가능 로직 디바이스 (PLD), 필드 프로그램가능 게이트 어레이 (FPGA) 등을 지칭할 수도 있다. 용어 "프로세서" 는, 예를 들어, DSP 와 마이크로프로세서의 조합, 복수의 마이크로프로세서들의 조합, DSP 코어와 결합한 하나 이상의 마이크로프로세서들의 조합, 또는 임의의 다른 그러한 구성들의 조합과 같은 처리 디바이스들의 조합을 지칭할 수도 있다.
용어 "메모리" 는 전자 정보를 저장 가능한 임의의 전자 컴포넌트를 포함하도록 넓게 해석되어야 한다. 용어 메모리는 임의 액세스 메모리 (RAM), 판독-전용 메모리 (ROM), 비-휘발성 임의 액세스 메모리 (NVRAM), 프로그램가능 판독-전용 메모리 (PROM), 소거-프로그램가능 판독 전용 메모리 (EPROM), 전기적으로 소거가능 PROM (EEPROM), 플래쉬 메모리, 자기 또는 광학 데이터 저장장치, 레지스터들 등과 같은 프로세서-판독가능 매체의 다양한 유형들을 지칭할 수도 있다. 프로세서가 메모리로부터 정보를 판독하고/하거나 메모리에 정보를 기록할 수 있다면 메모리는 프로세서와 전자 통신 상태에 있다고 불린다. 프로세서에 집적된 메모리는 프로세서와 전자 통신 상태에 있다.
아래에서는 첨부한 도면을 참고하여 실시예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략한다.
도 1은 본 개시의 일 실시예에 따른 의료 영상 장치를 나타낸 도면이다.
의료 영상 장치(100)는 제어부(110), 데이터베이스(120) 및 출력부(130)를 포함할 수 있다. 제어부(110)는 프로세서 및 메모리를 포함할 수 있다. 프로세서는 메모리에 저장된 명령어들을 수행할 수 있다.
데이터베이스(120)는 다양한 데이터를 저장하고 있을 수 있다. 예를 들어, 데이터베이스(120)는 의료 영상 또는 의료인의 분석 결과 및 의료 분석 장치의 분석 결과 중 적어도 하나를 저장할 수 있다. 또한, 데이터베이스(120)는 의료 영상을 분석하는 의료 영상 분석 모델을 포함할 수도 있다. 의료 영상 분석 모델은 룰베이스 모델 또는 기기계학습모델일 수 있다.
출력부(130)는 영상 출력부 및 소리 출력부 중 적어도 하나를 포함할 수 있다. 출력부(130)는 제어부(110)에 의하여 제어될 수 있다. 출력부(130)는 의료 영상 및 분석결과 중 적어도 하나를 출력할 수 있다.
이하, 의료 영상 장치(100)의 동작에 대하여 이하에서 보다 자세히 설명한다.
도 2는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타내는 흐름도이다.
의료 영상 장치(100)는 의료 영상에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계(210)를 수행할 수 있다. 의료 영상은 환자의 신체의 일부가 찍힌 영상일 수 있다. 의료 영상은 다양한 의료 영상 촬영 장치로 촬영된 영상일 수 있다. 예를 들면, 의료 영상은 CT, MRI, X-RAY, Mammography 또는 초음파 영상 중 하나일 수 있다. 의료 영상은 데이터베이스(120)로부터 수신될 수 있다. 또한 의료 영상은 외부 장치로부터 수신될 수 있다. 예를 들어 의료 영상은 의료 영상 장치(100)가 아닌 다른 장치인 외부의 의료 영상 촬영 장치로부터 수신될 수 있다.
병변 정보는 의료 영상에 포함된 병변에 대한 정보일 수 있다. 병변 정보는 의료 영상 분석 장치가 자동으로 분석하여 검출한 병변에 대한 정보일 수 있다. 하지만 이에 한정되는 것은 아니며, 병변 정보는 의료인에 의한 분석결과일 수 있다.
의료 영상 장치(100)는 병변 정보를 외부의 장치로부터 수신하거나, 의료 영상 장치(100)의 데이터베이스(120)로부터 수신할 수 있다. 또한 의료 영상 장치(100)는 자체적인 분석툴을 이용하여 의료 영상을 분석하여 병변 정보를 획득할 수 있다. 자체적인 분석툴은 병변을 검출하기 위한 룰베이스모델 또는 기계학습모델일 수 있다. 예를 들면, 자체적인 분석툴은 기계학습을 기초로 학습된 의료 영상 분석 모델을 포함할 수 있다.
병변 정보는 병변의 종류에 대한 정보, 병변의 위치 정보, 병변이 의료 영상에서 존재할 확률 정보, 병변의 형태 정보, 병변의 크기 및 병변의 영역 정보 중 적어도 하나를 포함할 수 있다.
병변의 종류에 대한 정보는 병변의 이름 또는 병변의 분류 정보 중 적어도 하나를 포함할 수 있다. 병변의 종류에 대한 정보는 의료인이 진단을 내린 정보일 수 있고, 자체적인 분석툴을 기초로 진단을 내린 정보일 수도 있다. 의료 영상 분석 장치는 상술한 바와 같이, 룰베이스 또는 기계학습모델에 기초하여 의료 영상으로부터 병변의 종류에 대한 정보를 획득할 수 있다.
병변의 위치 정보는 의료 영상에서 병변이 존재할 확률이 가장 높은 적어도 하나의 지점을 나타낼 수 있다. 병변의 위치 정보는 적어도 하나의 좌표값으로 표현될 수 있다. 병변의 위치 정보는 의료 영상 내에서 병변이 위치한 픽셀의 좌표값일 수 있다. 병변이 의료 영상의 일부 영역을 차지하는 경우, 병변의 위치 정보는 복수의 좌표값으로 표현될 수 있다. 또한 병변의 위치 정보는 하나의 병변 지점의 좌표값 및 병변 지점으로부터의 반경 정보를 포함할 수 있다. 하지만 이에 한정되는 것은 아니며 다양한 방식으로 병변의 위치 정보가 표현될 수 있다.
병변이 의료 영상에서 존재할 확률 정보는 의료 영상을 기초로, 의료 영상에 대응하는 환자의 신체 일부에서 병변이 존재할 확률을 나타낸다. 의료 영상 분석 장치는 룰베이스 또는 기계학습모델을 이용하여 의료 영상에 존재하는 병변을 검출할 수 있다. 또한 의료 영상 분석 장치는 룰베이스 또는 기계학습모델에 기초하여 의료 영상에 해당 병변이 존재할 확률 역시 예측할 수 있다. 병변이 의료 영상에서 존재할 확률 정보는 의료 영상에 포함된 각 픽셀에 대응하는 확률값을 포함할 수 있다. 병변이 의료 영상에서 존재할 확률 정보는 의료 영상의 특정 영역에 대응하는 확률값을 포함할 수 있다. 여기서 특정 영역은 의료 영상에 포함되는 영역으로써 의료 영상보다 작거나 같은 영상일 수 있다. 의료 영상의 특정 영역에 대응하는 확률값은 의료 영상 분석 장치에 의하여 획득되거나, 의료인에 의하여 수신될 수 있다.
또한 의료 영상 장치(100)는 특정 영역에 포함되는 픽셀에 대응되는 확률값에 기초하여 특정영역에 대응하는 확률값을 결정할 수 있다. 예를 들어 의료 영상 장치(100)는 특정 영역에 포함되는 픽셀들의 확률값의 최대값, 평균값, 중앙값 또는 최소값을 이용하여 특정 영역에 대응되는 대표 확률값을 획득할 수 있다. 의료인은 확률 정보에 기초하여 진단함으로써, 오진의 확률을 낮출 수 있다.
병변의 형태 정보는 병변의 형태에 관련된 정보를 나타낼 수 있다. 병변의 형태 정보는 병변의 윤곽선의 형태와 관련된 정보일 수 있다. 병변의 형태 정보는 원형, 타원형 또는 비정형의 형태를 가질 수 있다. 병변의 형태 정보는 의료인의 진단에 의하여 결정될 수 있다. 또한 의료 영상 분석 장치는 룰베이스 또는 기계학습모델에 기초하여 병변 형태 정보를 획득할 수 있다.
병변의 크기 정보는 병변의 크기에 대한 정보로써, 의료 영상에서 병변 영역에 포함된 픽셀의 개수일 수 있다. 또한 병변의 크기 정보는 의료 영상에서 병변의 가로 길이 또는 세로 길이일 수 있다. 또한 병변의 크기 정보는 의료 영상에서 병변 영역의 넓이일 수 있다. 병변의 크기 정보는 병변 영역에 포함된 픽셀의 개수를 나타낼 수 있다. 또한 병변의 크기 정보는 반지름을 나타낼 수 있다. 즉, 병변의 중심지점과 반지름에 기초한 원의 내부 영역이 병변 영역을 나타낼 수 있다.
병변의 영역 정보는 의료 영상에서 병변이 존재할 확률이 높은 영역은 나타낼 수 있다. 의료 영상 장치(100)는 의료인으로부터 병변의 영역 정보를 수신할 수 있다. 또한 의료 영상 장치(100)는 룰베이스 또는 기계학습모델에 기초하여 병변의 영역 정보를 자동으로 획득할 수 있다. 의료 영상 장치(100)는 의료 영상의 각 픽셀에 대하여 병변이 존재할 확률을 계산할 수 있다. 또는 의료 영상 장치(100)는 픽셀 그룹에 대하여 병변이 존재할 확률을 계산할 수 있다. 예를 들어 픽셀 그룹은 복수의 픽셀이 포함될 수 있다. 픽셀 그룹은 의료 영상 내의 일정 영역을 나타낼 수 있다. 의료 영상 장치(100)는 픽셀 그룹에 대하여 병변이 존재할 확률을 계산할 수도 있다. 의료 영상 장치(100)는 픽셀에 병변이 존재할 확률이 임계값 이상인 경우, 해당 픽셀을 병변의 영역에 포함된 것으로 결정할 수 있다. 즉 병변 영역에 포함된 픽셀들에 병변이 존재할 확률은 임계값 이상일 수 있다. 임계값은 미리 결정된 정보일 수 있다.
의료 영상 장치(100)는 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 적어도 하나의 컨투어를 생성하는 단계(220)를 수행할 수 있다.
컨투어는 병변의 위치 또는 형태 중 하나를 나타낼 수 있다. 의료 영상 장치(100)는 하나의 의료 영상에 대하여 적어도 하나의 병변을 표시할 수 있다. 복수의 병변은 서로 다른 위치 및 형태를 가질 수 있다. 의료 영상 장치(100)는 적어도 하나의 병변의 위치 및 형태를 병변 정보에 기초하여 획득할 수 있다. 의료 영상 장치(100)는 병변마다의 위치 및 형태를 반영하여 컨투어를 생성할 수 있다. 즉, 의료 영상 장치(100)는 획득된 병변 정보에 기초하여 적어도 하나의 컨투어의 위치 및 형태를 결정할 수 있다. 즉, 의료 영상 장치(100)의 병변 정보에 포함된 병변의 위치에 기초하여 컨투어의 위치를 결정할 수 있다. 또한 의료 영상 장치(100)는 병변 정보에 포함된 병변의 형태에 기초하여 컨투어의 형태를 결정할 수 있다.
컨투어의 위치는 병변 정보에 포함된 병변 위치 정보에 대응될 수 있다. 의료 영상 장치(100)는 병변 정보에 기초하여 컨투어의 형태를 결정할 수 있다. 의료 영상 장치(100)는 다음과 같은 과정에 의하여 컨투어를 결정할 수 있다.
보다 구체적으로, 의료 영상 장치(100)는 병변 정보에 포함된 병변 영역의 윤곽선에 기초하여 컨투어를 결정할 수 있다. 이미 설명한 바와 같이 의료 영상 장치(100)는 픽셀에 병변이 존재할 확률이 임계값 이상인 경우, 해당 픽셀을 병변의 영역에 포함된 것으로 결정할 수 있다. 즉 병변 영역 안의 픽셀들에 병변이 존재할 확률은 임계값 이상일 수 있다. 의료 영상 장치(100)는 병변 정보에 포함된 병변 영역의 윤곽선을 컨투어로 결정할 수 있다. 컨투어는 병변 영역을 둘러쌀 수 있다.
또한, 의료 영상 장치(100)는 병변 영역의 윤곽선을 A배 확장하여 병변을 포함하는 컨투어를 획득할 수 있다. A는 1보다 큰 실수 일 수 있다. 즉, 컨투어는 병변 영역보다 크거나 같을 수 있다. 병변 영역의 윤곽선을 A배 확장한다는 것은 병변 영역의 가로 길이가 A배되고 세로 길이가 A배됨을 의미할 수 있다. 따라서 컨투어 내부의 넓이는 병변 영역의 넓이의 A^2배로 될 수 있다.
또한 의료 영상 장치(100)는 병변 정보에 포함된 병변 영역을 포함하는 다각형, 타원형 또는 원형을 컨투어로 결정할 수 있다. 본 개시에 따르면 의료인은 의료 영상 중 일부인 컨투어 주위를 집중적으로 관찰할 수 있고 최종적으로 컨투어의 내부에 병변이 존재하는 여부를 쉽게 결정할 수 있다.
컨투어의 형태는 컨투어의 선의 두께를 더 포함할 수 있다. 의료 영상 장치(100)는 컨투어의 선의 두께를 병변 정보에 기초하여 획득할 수 있다. 예를 들어, 의료 영상 장치(100)는 병변 정보에 기초하여 의료 영상 내의 각 픽셀이 적어도 하나의 병변의 영역에 포함될 확률을 획득할 수 있다. 또한 의료 영상 장치(100)는 컨투어 내부에 포함된 픽셀이 적어도 하나의 병변의 영역에 포함될 확률에 기초하여 상기 적어도 하나의 컨투어의 두께를 결정할 수 있다. 예를 들어 컨투어의 두께는 확률이 클수록 두꺼워질 수 있다.
의료 영상 장치(100)는 의료 영상에 포함된 각 픽셀이 병변에 포함될 확률을 획득할 수 있다. 또한 의료 영상 장치(100)는 병변에 포함될 확률이 임계값과 동일한 픽셀들의 모임을 컨투어로 결정할 수 있다. 병변에 포함될 확률은 불연속적이므로 임계값과 동일한 값이 없을 수 있다. 이 때, 인접한 두 픽셀 중 하나에 대응되는 확률이 임계값보다 크고, 다른 하나에 대응되는 확률이 임계값보다 작은 경우, 인접한 두 픽셀 중 하나를 컨투어에 포함시킬 수 있다. 컨투어 내부의 픽셀이 병변 영역에 포함될 확률은 임계값보다 클 수 있다. 여기서 임계값은 미리 정해진 값일 수 있다.
또한 의료 영상 장치(100)는 병변에 포함될 확률이 임계범위에 포함된 픽셀들의 모임을 컨투어로 결정할 수 있다. 임계범위는 매우 좁아서 픽셀들의 모임은 라인과 같이 보일 수 있다. 컨투어 내부의 픽셀이 병변 영역에 포함될 확률은 임계범위의 최소값보다 클 수 있다. 여기서 임계범위는 미리 정해진 범위일 수 있다.
이제까지 의료 영상 장치(100)가 하나의 병변에 하나의 컨투어를 생성하는 구성에 대하여 설명하였다. 의료 영상 장치(100)는 의료 영상에 복수의 병변들이 존재하는 경우, 복수의 병변에 대응하는 복수의 컨투어를 생성할 수 있다. 이에 대해서는 도 3 과 함께 설명한다.
도 3은 본 개시의 일 실시예에 따른 의료 영상을 나타낸 도면이다.
또한 의료 영상 장치(100)는 의료 영상에 포함된 하나의 병변에 대하여 적어도 하나의 컨투어를 생성할 수 있다. 의료 영상 장치(100)는 하나의 병변에 대하여 등고선과 같은 적어도 하나의 컨투어를 생성할 수 있다. 등고선에 포함된 복수의 라인들 중 하나의 라인의 내부의 픽셀이 병변 영역에 포함될 확률은 임계값보다 클 수 있다.
도 3을 참조하면 의료영상은 하나의 병변에 대한 제 1 등고선(311) 및 제 2 등고선(312)을 포함할 수 있다. 제 1 등고선(311)의 안쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 제 1 임계값 이상일 수 있다. 제 2 등고선(312)의 안쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 제 2 임계값 이상일 수 있다. 제 2 등고선(312)의 안쪽 영역 및 제 1 등고선(311)의 바깥쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 제 1 임계값보다는 낮고 제 2 임계값보다는 크거나 같을 수 있다. 여기서 제 1 임계값 및 제 2 임계값은 미리 결정된 값일 수 있다. 제 1 임계값은 제 2 임계값보다 클 수 있다.
의료 영상 장치(100)는 등고선 내부의 픽셀이 병변 영역에 포함될 확률이 높을수록, 등고선을 두껍게 생성할 수 있다. 예를 들어, 제 1 등고선(311)의 안쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 높을 수 있다. 하지만 제 1 등고선(311) 내지 제 2 등고선(312) 사이에 포함된 픽셀이 병변 영역에 포함될 확률은 상대적으로 낮을 수 있다. 따라서 의료 영상 장치(100)는 제 1 등고선(311)을 제 2 등고선(312)보다 두껍게 표시할 수 있다.
의료 영상 장치(100)는 등고선 내부의 픽셀이 병변 영역에 포함될 확률에 따라 등고선의 색을 다르게 생성할 수 있다. 예를 들어, 제 1 등고선(311)의 안쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 높을 수 있다. 하지만 제 1 등고선(311) 내지 제 2 등고선(312) 사이에 포함된 픽셀이 병변 영역에 포함될 확률은 상대적으로 낮을 수 있다. 따라서 의료 영상 장치(100)는 제 1 등고선(311)을 빨간색으로 제 2 등고선(312)을 주황색으로 표시할 수 있다.
의료 영상 장치(100)는 등고선 내부의 픽셀이 병변 영역에 포함될 확률에 기초하여 등고선 사이의 영역을 다른 색으로 표시할 수 있다. 예를 들어, 제 1 등고선(311)의 안쪽 영역에 포함된 픽셀이 병변 영역에 포함될 확률은 높을 수 있다. 하지만 제 1 등고선(311) 내지 제 2 등고선(312) 사이에 포함된 픽셀이 병변 영역에 포함될 확률은 상대적으로 낮을 수 있다. 따라서 의료 영상 장치(100)는 제 1 등고선(311)의 내부를 빨간색으로 채우고 제 2 등고선(312)과 제 1 등고선(311) 사이의 영역을 주황색으로 표시할 수 있다. 의료 영상 장치(100)는 투명도를 조절하여, 원본 의료 영상이 칠해진 색에 의하여 가려지지 않도록 할 수 있다.
등고선에 포함된 복수의 라인들 중 하나의 라인에 포함된 픽셀이 병변 영역에 포함될 확률은 특정 임계범위에 포함될 수 있다. 특정 임계범위는 미리 결정된 범위일 수 있다. 도 3을 참조하면 제 1 등고선(311)에 포함된 픽셀이 병변 영역에 포함될 확률은 제 1 임계범위에 포함될 수 있다. 또한 제 2 등고선(312)에 포함된 픽셀이 병변 영역에 포함될 확률은 제 2 임계범위에 포함될 수 있다. 제 1 임계범위의 최소값은 제 2 임계범위의 최대값보다 클 수 있다.
또한, 의료 영상 장치(100)는 병변 정보에 포함된 병변 영역의 윤곽선을 확장하여 복수의 컨투어를 생성할 수 있다. 예를 들어 제 1 등고선(311)은 병변 영역의 윤곽선일 수 있다. 의료 영상 장치(100)는 제 1 등고선(311)을 확장하여 제 2 등고선(312)을 획득할 수 있다. 제 2 등고선(312)의 두께는 제 1 등고선(311)보다 얇을 수 있다.
의료 영상 장치(100)는 의료 영상에 생성된 적어도 하나의 컨투어를 출력하는 단계(230)를 수행할 수 있다. 출력부(130)는 의료 영상 및 적어도 하나의 컨투어를 출력할 수 있다.
의료 영상 장치(100)는 적어도 하나의 컨투어를 생성하기 위하여 아래와 같은 단계를 수행할 수 있다.
의료 영상 장치(100)는 획득된 병변 정보에 기초하여, 의료 영상에 포함되는 복수의 병변 간에 중복되는 병변 영역과 관련된 정보 또는 복수의 병변 간의 관련성과 관련된 정보 중 적어도 하나에 기초하여 컨투어를 생성하는 단계를 수행할 수 있다.
의료 영상에는 복수의 병변이 검출될 수 있다. 병변 정보는 복수의 병변마다 획득될 수 있다. 이미 설명한 바와 같이 병변 정보는 병변 영역 정보를 포함할 수 있다.
의료 영상 장치(100)는 병변 정보에 기초하여 복수의 병변 간에 중복되는 병변 영역과 관련된 정보를 획득할 수 있다. 또한 의료 영상 장치(100)는 복수의 병변 간의 관련성과 관련된 정보를 획득할 수 있다.
복수의 병변 간의 관련성과 관련된 정보는 의학적으로 복수의 병변 간에 관련성이 있는지 여부를 나타내는 정보이다. 예를 들어 관련성과 관련된 정보는 복수의 병변이 동일 환자에게 동일 시점에 발현될 수 있는지를 나타내는 공존성 여부에 대한 정보를 포함할 수 있다. 예를 들어 제 1 병변은 제 2 병변과 동시에 나타날 수 없는 경우 공존성이 없는 것이고, 제 1 병변이 제 2 병변과 동시에 나타날 수 있는 경우 공존성이 있는 것이다.
또한 관련성과 관련된 정보는 복수의 병변이 동시에 발현될 가능성이 높은 지 여부를 나타내는 유사성 여부에 대한 정보를 포함할 수 있다. 복수의 병변은 구분되는 이름을 가지고 있으나 실질적으로 유사한 경우가 있다. 예를 들어 의학적으로 제 1 병변이 발현된 경우 제 2 병변 역시 발현되는 경우, 유사성이 있는 것이다. 제 1 병변이 발현된 경우 제 2 병변 역시 발현됨은, 제 2 병변이 발현된 경우 제 1 병변이 발현됨을 의미하는 것은 아닐 수 있다. 하지만 이에 한정되는 것은 아니며, 제 1 병변이 발현된 경우 제 2 병변 역시 발현됨은, 제 2 병변이 발현된 경우 제 1 병변이 발현됨을 의미할 수 있다.
또한 제 1 병변의 발현과 제 2 병변은 독립적이서 제 1 병변의 발현이 제 2 병변의 발현에 아무런 영향을 미치지 않는 경우, 제 1 병변과 제 2 병변은 유사성이 없는 것이다. 또한 제 2 병변의 발현이 제 1 병변의 발현에 아무런 영향을 미치지 않는 경우, 제 1 병변과 제 2 병변은 유사성이 없는 것이다.
의료 영상 장치(100)는 룰베이스 또는 기계학습모델에 기초하여 관련성과 관련된 정보를 획득할 수 있다. 의료 영상 장치(100)는 데이터베이스(120)에 기초하여 관련성과 관련된 정보를 획득할 수 있다. 의료 영상 장치(100)는 제 1 병변에 대한 제 1 병변 정보를 획득할 수 있다. 또한 의료 영상 장치(100)는 제 2 병변에 대한 제 2 병변 정보를 획득할 수 있다. 의료 영상 장치(100)는 제 1 병변의 코드, 명칭, 종류 중 적어도 하나를 포함하는 제 1 병변 식별자를 제 1 병변 정보로부터 획득할 수 있다. 또한 의료 영상 장치(100)는 제 2 병변 코드, 명칭, 종류 중 적어도 하나를 포함하는 제 2 병변 식별자를 제 2 병변 정보로부터 획득할 수 있다. 의료 영상 장치(100)는 제 1 병변 식별자 및 제 2 병변 식별자에 기초하여 데이터베이스로부터 제 1 병변 및 제 2 병변의 관련성과 관련된 정보를 획득할 수 있다. 예를 들어, 데이터베이스는 제 1 식별자 및 제 2 병변 식별자에 따른 관련성과 관련된 정보가 미리 저장되어 있을 수 있다. 의료 영상 장치(100)는 제 1 식별자 및 제 2 식별자에 대응되는 관련성과 관련된 정보를 데이터베이스로부터 도출할 수 있다.
의료 영상 장치(100)는 데이터베이스(120)가 아닌 곳에서 관련성과 관련된 정보를 획득할 수 있다. 의료 영상 장치(100)는 제 1 병변 정보 및 제 2 병변 정보를 기계학습모델에 적용하여 관련성과 관련된 정보를 획득할 수 있다. 기계학습모델은 제 1 병변 및 제 2 병변 사이의 관련성을 기계학습한 모델일 수 있다. 의료 영상 장치(100)는 의료인으로부터 관련성과 관련된 정보를 획득할 수 있다. 또한, 의료 영상 장치(100)는 병변 정보로부터 관련성과 관련된 정보를 획득할 수 있다.
제 1 병변과 관련된 제 1 병변 정보에는 제 1 병변과 유사성이 있는 병변들에 대한 정보 및 제 1 병변과 공존성이 있는 병변들에 대한 정보를 포함하고 있을 수 있다. 의료 영상 장치(100)는 제 1 병변 정보에 기초하여 제 2 병변이 제 1 병변과 유사성이 있는지 여부 및 공존성이 있는지 여부를 결정할 수 있다.
의료 영상 장치(100)는 의료인으로부터의 입력신호에 기초하여 관련성과 관련된 정보를 획득할 수 있다. 또한 의료 영상 장치(100)는 외부의 장치로부터 관련성과 관련된 정보를 획득할 수 있다.
의료 영상 장치(100)는, 적어도 하나의 컨투어를 생성하기 위하여, 복수의 병변에 포함되는 제 1 병변 정보 및 제 2 병변 정보에 기초하여, 제 1 병변의 영역과 제 2 병변의 영역이 중복되는 영역의 크기를 결정하는 단계를 수행할 수 있다.
상술한 바와 같이 의료 영상 장치(100)는 제 1 병변에 대한 제 1 병변 정보 및 제 2 병변에 대한 제 2 병변 정보를 획득할 수 있다. 의료 영상 장치(100)는 제 1 병변 정보로부터 의료 영상 내에서 제 1 병변의 영역 정보 및 제 2 병변 정보로부터 의료 영상 내에서 제 2 병변의 영역 정보를 획득할 수 있다. 또한 의료 영상 장치(100)는 제 1 병변 영역 및 제 2 병변 영역이 중복되는 영역의 크기를 결정할 수 있다. 중복되는 영역의 크기는 중복되는 영역의 픽셀의 개수, 중복되는 영역의 넓이, 중복되는 영역의 가로길이 또는 중복되는 영역의 세로길이 중 적어도 하나로 나타낼 수 있다.
여기서 제 1 병변의 영역 및 제 2 병변의 영역은 단순히 제 1 병변의 영역 및 제 2 병변의 영역을 의미할 수도 있지만 이에 한정되는 것은 아니다. 제 1 병변의 영역은 제 1 병변에 대응하는 제 1 컨투어의 내부 영역을 의미할 수도 있다. 또한 제 2 병변의 영역은 제 2 병변에 대응하는 제 2 컨투어의 내부 영역을 의미할 수도 있다.
의료 영상 장치(100)는 제 2 병변 정보에 기초하여 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보를 결정하는 단계를 수행할 수 있다. 이미 설명한 바와 같이 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보는 의료 영상에 포함된 각 픽셀값에 대응하는 확률값 또는 의료 영상에 포함된 특정 영역에 대응하는 확률값일 수 있다. 여기서 특정 영역은 생성된 컨투어에 대응될 수 있다.
또한 의료 영상 장치(100)는 중복되는 영역의 크기가 제 1 임계값보다 크고, 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보가 제 2 임계값보다 작은 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하는 단계를 수행할 수 있다. 제 1 임계값 및 제 2 임계값은 미리 정해진 값일 수 있다. 제 2 임계값은 제 1 병변이 의료 영상에서 존재할 확률에 관련된 정보일 수 있으나 이에 한정되는 것은 아니다.
컨투어는 제 1 병변 영역보다 크거나 같을 수 있다. 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하는 방법은 이미 설명한 바 있으므로 중복되는 설명은 생략한다.
의료 영상 장치(100)는 중복되는 영역의 크기가 제 1 임계값보다 크고, 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보가 제 2 임계값보다 작은 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성할 뿐, 제 2 병변을 둘러싸는 적어도 하나의 컨투어는 생성하지 않을 수 있다. 왜냐하면 중복되는 영역의 크기가 제 1 임계값보다 크므로 제 1 병변 및 제 2 병변이 상당 부분 중복되고, 제 2 병변이 의료 영상에서 존재할 확률에 관련된 정보가 제 2 임계값보다 작으므로 의료 영상에서 제 2 병변의 중요도가 상대적으로 낮을 수 있기 때문이다.
의료 영상 장치(100)는, 적어도 하나의 컨투어를 생성하기 위하여, 제 1 병변 및 제 2 병변 사이에 질병학적으로 유사성이 있는지 여부를 결정하는 단계를 수행할 수 있다. 유사성이 있는지 여부는 관련성과 관련된 정보에 포함될 수 있다. 유사성 여부에 대한 정보는 이미 설명한 바 있으므로 중복되는 설명은 생략한다. 또한, 의료 영상 장치(100)는 유사성이 있는지 여부를 데이터베이스에 기초하여 룰베이스로 결정하거나, 기계학습모델로부터 획득하거나, 의료인으로부터 수신하거나, 병변 정보로부터 획득할 수 있다. 관련성과 관련된 정보를 획득하는 과정에 대해서는 이미 상술하였으므로 중복되는 설명은 생략한다.
의료 영상 장치(100)는 제 1 병변 및 제 2 병변이 동일 영역에 공존성이 있는지 여부를 결정하는 단계를 수행할 수 있다. 공존성 여부에 대한 정보에 대해서는 이미 설명하였으므로 중복되는 설명은 생략한다. 또한 의료 영상 장치(100)는 공존성이 있는지 여부를 데이터베이스에 기초하여 룰베이스로 결정하거나, 기계학습모델로부터 획득하거나, 의료인으로부터 수신하거나, 병변 정보로부터 획득할 수 있다. 관련성과 관련된 정보를 획득하는 과정에 대해서는 이미 상술하였으므로 중복되는 설명은 생략한다.
의료 영상 장치(100)는 유사성이 있는지 여부가 제 1 병변 및 제 2 병변이 유사함을 나타내거나, 공존성이 있는지 여부가 제 1 병변 및 제 2 병변이 서로 공존할 수 없음을 나타내는 경우, 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하고, 제 2 병변을 둘러싸는 적어도 하나의 컨투어를 생성하지 않는 단계를 수행할 수 있다.
의료 영상 장치(100)는 유사성이 있는지 여부가 제 1 병변 및 제 2 병변이 유사함을 나타내는 경우, 제 1 병변만을 둘러싸는 적어도 하나의 컨투어를 생성할 수 있다. 유사성이 있다는 것은 제 1 병변이 발현된 경우, 제 2 병변이 발현될 수 있음을 의미하기 때문이다. 의료 영상 장치(100)는 유사성이 있는지 여부가 제 1 병변 및 제 2 병변이 유사하지 않음을 나타내는 경우, 제 1 병변에 대응하는 적어도 하나의 컨투어 및 제 2 병변에 대응하는 적어도 하나의 컨투어를 모두 생성할 수 있다.
또한 의료 영상 장치(100)는 공존성이 있는지 여부가 제 1 병변 및 제 2 병변이 서로 공존할 수 없음을 나타내는 경우, 제 1 병변 또는 제 2 병변 중 하나만을 둘러싸는 적어도 하나의 컨투어를 생성할 수 있다. 제 1 병변 또는 제 2 병변 중 어느 병변에 대한 컨투어를 생성할 것인지 결정하기 위하여, 의료 영상 장치(100)는 제 1 병변 및 제 2 병변이 의료 영상에 존재할 확률을 비교할 수 있다. 또한 제 1 병변이 의료 영상에 존재할 확률이 제 2 병변보다 높은 경우, 의료 영상 장치(100)는 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성할 수 있다. 의료 영상 장치(100)는 제 2 병변을 둘러싸는 적어도 하나의 컨투어를 생성하지 않을 수 있다. 반대로 제 1 병변이 의료 영상에 존재할 확률이 제 2 병변보다 낮은 경우, 의료 영상 장치(100)는 제 2 병변을 둘러싸는 적어도 하나의 컨투어를 생성할 수 있다. 의료 영상 장치(100)는 제 1 병변을 둘러싸는 적어도 하나의 컨투어를 생성하지 않을 수 있다.
의료 영상 장치(100)는 복수의 병변 정보에 기초하여, 의료 영상에서 존재할 확률이 높은 순으로 복수의 병변 정보를 정렬하는 단계를 더 수행할 수 있다. 의료 영상 장치(100)는 하나의 의료 영상 내에 존재할 확률이 높은 순으로 복수의 병변 정보를 정렬해 둠으로써, 두 개의 병변 간에 공존성이 없는 경우, 존재할 확률이 낮은 병변에 대응하는 컨투어를 출력하지 않을 수 있다.
또한 의료 영상 장치(100)는 공존성이 있는지 여부가 제 1 병변 및 제 2 병변이 서로 공존할 수 있음을 나타내는 경우, 제 1 병변에 대응하는 적어도 하나의 컨투어 및 제 2 병변에 대응하는 적어도 하나의 컨투어를 모두 생성할 수 있다.
도 4는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작 방법의 수도 코드를 나타낸다.
라인(410)에서 C는 검출된 복수의 병변에 대응하는 컨투어들의 집합을 나타낼 수 있다. C는 총 M개의 원소를 포함할 수 있다. 즉, C= {c1, c2, ... ,cM} 일 수 있다.
의료 영상 장치(100)는 인덱스(i)가 1 부터 M-1까지 증가하면서 for문을 수행할 수 있다. 라인(420)에서, R(i)는 집합 C에 있는 컨투어 원소들을 의료 영상에 존재할 확률이 높은 순으로 배열하는 함수이다. 즉, R(1)은 의료 영상에 존재할 가장 높은 확률의 병변에 대한 적어도 하나의 컨투어를 출력할 수 있다. 또한 R(M-1)은 의료 영상에 존재할 가장 낮은 확률의 병변에 대한 적어도 하나의 컨투어를 출력할 수 있다. 의료 영상 장치(100)는 R(i)에 의하여 i번째로 높은 확률의 병변에 대응하는 컨투어를 cp에 할당할 수 있다. 의료 영상 장치(100)는 R(i)에 의하여 i가 증가함에 따라 의료 영상에서 낮은 확률로 존재하는 병변에 대한 컨투어를 cp에 할당할 수 있다.
라인(430)에서, D(cp)는 컨투어인 cp에 대응되는 병변 정보를 출력하는 함수이다. 의료 영상 장치(100)는 D(cp)에 의하여 cp에 대응되는 병변 정보를 dp에 할당할 수 있다.
의료 영상 장치(100)는 인덱스(j)가 2 부터 M까지 증가하면서 for문을 수행할 수 있다. 도 4에서 인덱스(j)는 2부터 증가하지만 이에 한정되는 것은 아니다. 인덱스(j)는 i+1로부터 M까지 증가될 수 있다.
라인(440)에서, R(j)는 집합 C에 있는 컨투어 원소들을 의료 영상에 존재할 확률이 높은 순으로 배열하는 함수이다. 의료 영상 장치(100)는 R(j)에 의하여 j번째로 높은 확률의 병변에 대응하는 컨투어를 cq에 할당할 수 있다.
라인(450)에서, D(cq)는 컨투어인 cq에 대응되는 병변 정보를 출력하는 함수이다. 의료 영상 장치(100)는 D(cq)에 의하여 cq에 대응되는 병변 정보를 dq에 할당할 수 있다.
라인(460)에서, IoU(cp, cq)는 컨투어 cp와 컨투어 cq의 영역이 중복되는 영역의 크기를 나타낼 수 있다. 또한 S(cq)는 컨투어인 cq 내부의 픽셀이 병변 영역에 포함될 확률을 나타낼 수 있다.
라인(460)에서 의료 영상 장치(100)는 컨투어 cp와 컨투어 cq의 영역이 중복되는 영역의 크기가 임계값(MTdq)보다 크고, 컨투어 cq 내부의 픽셀이 병변 영역에 포함될 확률이 임계값(STdq)보다 작은 경우, 라인(470)을 수행할 수 있다.
라인(470)에서 Sim(dp, dq)는 병변 정보 dp 및 병변 정보 dq의 유사성 여부에 대한 정보를 출력할 수 있다. Sim(dp, dq)이 1인 경우 병변 정보 dp 및 병변 정보 dq 사이에 유사성이 있음을 나타낼 수 있다. 또한 Sim(dp, dq)이 0인 경우 병변 정보 dp 및 병변 정보 dq 사이에 유사성이 없음을 나타낼 수 있다.
CoOcc(dp, dq)는 병변 정보 dp 및 병변 정보 dq의 공존성 여부에 대한 정보를 출력할 수 있다. CoOcc(dp, dq)이 1인 경우 병변 정보 dp 및 병변 정보 dq 사이에 공존성이 있음을 나타낼 수 있다. 또한 CoOcc(dp, dq)이 0인 경우 병변 정보 dp 및 병변 정보 dq 사이에 공존성이 없음을 나타낼 수 있다.
라인(470)에서 의료 영상 장치(100)는 병변 정보 dp와 병변 정보 dq사이에 유사성이 있으며, 병변 정보 dp 및 병변 정보 dq 사이에 공존성이 없는 경우, 라인(480)을 수행할 수 있다.
의료 영상 장치(100)는 위의 조건을 만족하는 경우, 집합 C로부터 컨투어 cq를 제거할 수 있다. 즉, 의료 영상 장치(100)는 컨투어 cp와 컨투어 cq의 영역이 중복되는 영역의 크기가 임계값(MTdq)보다 크고, 컨투어 cq 내부의 픽셀이 병변 영역에 포함될 확률이 임계값(STdq)보다 작으며, 병변 정보 dp와 병변 정보 dq사이에 유사성이 있으며, 병변 정보 dp 및 병변 정보 dq 사이에 공존성이 없는 경우, 집합 C로부터 컨투어 cq를 제거할 수 있다. 의료 영상 장치(100)는 집합 C에 포함되어 있는 컨투어를 출력부(130)에 출력할 수 있다. 즉, 의료 영상 장치(100)는 컨투어 cq를 출력하지 않을 수 있다.
도 5 내지 도 8은 본 개시의 일 실시예에 따라 의료 영상 장치가 표시하는 의료 영상을 나타내는 도면이다.
의료 영상 장치(100)는 컨투어 근처에 화살표 또는 텍스트를 표시할 수 있다. 텍스트는 컨투어와 관련된 내용을 포함 수 있다. 도 5 내지 도 8은 컨투어 근처에 위치하는 화살표 또는 텍스트의 배치의 예시이다. 도 5 내지 도 8를 참조하면, 의료 영상 장치(100)는 사용자가 컨투어가 나타내는 의미를 명확하게 파악할 수 있도록 화살표 및 텍스트를 배치할 수 있다.
도 5를 참조하면 의료 영상 장치(100)는 의료 영상과 함께 컨투어를 출력할 수 있다. 또한 의료 영상 장치(100)는 컨투어 근처에 화살표 및 텍스트를 표시할 수 있다. 화살표는 컨투어와 텍스트 사이를 이을 수 있다. 또한 텍스트는 컨투어에 포함되는 병변에 대해 설명할 수 있다. 의료 영상 장치(100)는 병변 정보에 기초하여 텍스트를 획득할 수 있다.
의료 영상(510)은 화살표 및 텍스트가 잘못 표시된 예를 도시한다. 박스(511)를 참조하면 복수의 텍스트가 중복되어 표시되어 있다. 또한 박스(511)를 참조하면 복수의 화살표의 적어도 일부가 교차될 수 있다. 따라서 의료인은 텍스트의 내용을 확인하지 못할 수 있다.
의료 영상(520)은 본 개시에 따른 의료 영상 장치(100)가 정상적으로 표시한 의료 영상을 나타낸다. 박스(521)를 참조하면 의료 영상(520)에 포함된 화살표는 서로 교차되지 않는다. 또한 텍스트도 중복되지 않는다. 따라서 의료인은 컨투어가 나타내는 의미를 명확하게 파악할 수 있다.
도 6을 참조하면, 의료 영상(610)은 화살표 및 텍스트가 잘못 표시된 예를 도시한다. 박스(611)를 참조하면 화살표가 컨투어를 가로지르고 있다. 화살표가 컨투어를 가로지르는 경우, 화살표의 길이가 길고, 화살표가 가리키는 컨투어와 텍스트 사이의 거리가 멀 수 있다. 따라서 의료인은 텍스트가 어떤 컨투어에 대한 설명인지 확인이 어려울 수 있다.
의료 영상(620)은 본 개시에 따른 의료 영상 장치(100)가 정상적으로 표시한 의료 영상을 나타낸다. 박스(621)를 참조하면 의료 영상(620)에 포함된 화살표는 컨투어를 가로지르지 않는다. 따라서 의료인은 컨투어가 나타내는 의미를 명확하게 파악할 수 있다.
도 7을 참조하면, 의료 영상(710)은 화살표 및 텍스트가 잘못 표시된 예를 도시한다. 박스(711)를 참조하면 화살표 및 텍스트가 컨투어 위에 표시되어 있다. 화살표 및 텍스트가 컨투어 위에 표시되는 경우, 텍스트의 가독성이 낮을 수 있다. 따라서 의료인은 텍스트의 내용을 확인하지 못할 수 있다.
의료 영상(720)은 본 개시에 따른 의료 영상 장치(100)가 정상적으로 표시한 의료 영상을 나타낸다. 박스(721)를 참조하면 의료 영상(720)에 포함된 화살표 및 텍스트는 컨투어 위에 표시되지 않는다. 따라서 의료인은 컨투어가 나타내는 의미를 명확하게 파악할 수 있다.
도 8을 참조하면, 의료 영상(810)은 화살표 및 텍스트가 잘못 표시된 예를 도시한다. 박스(811)를 참조하면 화살표가 두 개의 컨투어의 교차점 위에 표시되어 있다. 화살표가 두 개의 컨투어의 교차점에 표시되는 경우, 화살표가 어떤 컨투어를 가리키는지 파악하기 힘들 수 있다. 따라서 의료인은 컨투어에 대응되는 텍스트를 확인하지 못할 수 있다.
의료 영상(820)은 본 개시에 따른 의료 영상 장치(100)가 정상적으로 표시한 의료 영상을 나타낸다. 박스(821)를 참조하면 의료 영상(820)에 포함된 화살표는 두 개의 컨투어의 교차점에 표시되지 않는다. 따라서 의료인은 컨투어에 대응되는 텍스트를 명확하게 파악할 수 있다.
도 9는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 나타낸 흐름도이다. 또한 도 10 내지 13은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
의료 영상 장치(100)는, 적어도 하나의 컨투어를 출력하기 위하여, 적어도 하나의 컨투어 중 제 1 컨투어를 가리키는 복수의 제 1 후보 화살표에 대한 제 1 후보 화살표 정보를 결정하는 단계(910)를 수행할 수 있다.
후보 화살표 정보는 화살표의 시작점에 대한 위치 정보, 화살표의 끝점에 대한 위치 정보, 화살표의 방향에 대한 정보 및 화살표의 길이에 대한 정보 중 적어도 하나를 포함할 수 있다.
도 10의 좌상단 그림을 참조하면, 의료 영상 장치(100)는 적어도 하나의 컨투어 중 제 1 컨투어(1010)를 가리키는 복수의 제 1 후보 화살표(1021, 1022, 1023)를 획득할 수 있다. 복수의 제 1 후보 화살표(1021, 1022, 1023)는 제 1 컨투어(1010)에 대하여 거의 수직일 수 있다. 복수의 제 1 후보 화살표(1021, 1022, 1023)는 시작점 및 끝점을 포함할 수 있다. 본 개시에서 화살표의 시작점은 화살표 상에서 컨투어와 가장 근접한 점을 의미할 수 있다. 본 개시에서 끝점은 화살표 상에서 시작점의 반대편을 의미할 수 있다. 화살표의 시작점은 화살표의 머리 부분일 수 있으나 이에 한정되는 것은 아니며 화살표의 끝점이 화살표의 머리 부분일 수 있다.
복수의 제 1 후보 화살표(1021, 1022, 1023)의 시작점의 위치는 컨투어(1010) 상에 랜덤하게 결정될 수 있다. 또한, 복수의 제 1 후보 화살표(1021, 1022, 1023)의 개수는 미리 정해진 개수 일 수 있다. 도 10에서 복수의 제 1 후보 화살표 모두에 도면 부호를 부여하지는 않았으나, 복수의 제 1 후보 화살표(1021, 1022, 1023)의 개수는 10개일 수 있다. 복수의 제 1 후보 화살표(1021, 1022, 1023)의 길이는 미리 정해질 수 있다. 또한 복수의 제 1 후보 화살표(1021, 1022, 1023)의 길이는 미리 정해진 범위 내에서 랜덤하게 결정될 수 있다.
도 11을 참조하면, 의료 영상 장치(100)는 적어도 하나의 컨투어 중 제 1 컨투어(1110)를 가리키는 복수의 제 1 후보 화살표(1121, 1122, 1123)를 획득할 수 있다. 복수의 제 1 후보 화살표(1121, 1122, 1123)의 끝점에는 텍스트 박스(1131, 1132, 1133)가 위치할 수 있다. 텍스트 박스(1131, 1132, 1133)에는 텍스트가 표시될 수 있다. 복수의 제 1 후보 화살표(1121, 1122, 1123)와 텍스트 박스(1131, 1132, 1133)는 일대일 대응될 수 있다.
복수의 제 1 후보 화살표(1121, 1122, 1123)와 텍스트 박스(1131, 1132, 1133) 간의 위치는 미리 결정된 방식에 의할 수 있다. 텍스트 박스(1131, 1132, 1133)의 위치는 복수의 제 1 후보 화살표(1121, 1122, 1123)의 방향에 기초하여 설정될 수 있다. 또한, 의료 영상 장치(100)는 텍스트 박스의 모서리 또는 변에 복수의 제 1 후보 화살표(1121, 1122, 1123) 중 하나가 위치하도록 텍스트 박스의 위치를 설정할 수 있다. 예를 들어 제 1 후보 화살표(1121)의 시작점이 끝점의 왼쪽 위에 있을 경우, 텍스트 박스(1131)의 좌상 꼭지점이 제 1 후보 화살표(1121)의 끝점과 근접할 수 있다. 또한 제 1 후보 화살표(1122)의 시작점이 끝점의 왼쪽에 있을 경우, 텍스트 박스(1132)의 좌변이 제 1 후보 화살표(1122)의 끝점과 근접할 수 있다. 도 11은 화살표와 텍스트의 관계를 설명하고 있으므로 추가적인 설명은 생략한다.
도 11에 나타난 후보 화살표와 텍스트 박스의 위치 관계는 하나의 실시예로써, 이외에도 다양한 후보 화살표와 텍스트 박스의 위치 관계가 있을 수 있다.
후보 화살표(1160)의 머리는 끝점에 위치할 수 있다. 즉 후보 화살표(1160)의 시작점은 컨투어(1150)에 근접하거나 접하고, 후보 화살표(1160)의 끝점은 텍스트 박스(1170)의 모서리 또는 변에 근접하거나 접할 수 있다.
도 9를 다시 참조하면, 의료 영상 장치(100)는 제 1 컨투어(1010)의 외곽에 화살표-텍스트 영역(1030)을 결정하는 단계(920)를 수행할 수 있다.
도 10의 우상단 그림을 참조하면, 화살표-텍스트 영역(1030)은 화살표의 끝점 및 텍스트 박스의 일부가 포함되는 영역일 수 있다. 화살표-텍스트 영역(1030)에서 화살표의 끝점 및 텍스트 박스가 인접할 수 있다.
도 12를 참조하면, 의료 영상 장치(100)는 컨투어(1210)를 생성할 수 있다. 의료 영상 장치(100)는 컨투어(1210)를 확장하여 제 1 확장 컨투어(1221)를 생성할 수 있다. 또한 의료 영상 장치(100)는 컨투어(1210)를 확장하여 제 2 확장 컨투어(1222)를 생성할 수 있다. 제 2 확장 컨투어(1222)는 제 1 확장 컨투어(1221)를 포함할 수 있다. 의료 영상 장치(100)가 제 1 확장 컨투어(1221) 및 제 2 확장 컨투어(1222)를 획득하기 위하여 미리 정해진 배수로 컨투어(1210)를 이용할 수 있다. 의료 영상 장치(100)는 제 1 확장 컨투어(1221)에서 제 2 확장 컨투어(1222) 사이를 화살표-텍스트 영역(1230)으로 결정할 수 있다. 화살표-텍스트 영역(1230)은 제 1 컨투어(1210)와 접하지 않고, 제 1 컨투어(1210)를 둘러싸는 링형일 수 있다.
의료 영상 장치(100)는 단계(910)에서 생성된 복수의 제 1 후보 화살표의 끝점이 화살표-텍스트 영역(1030)에 포함되지 않는 경우, 복수의 제 1 후보 화살표의 끝점을 화살표-텍스트 영역(1030)에 포함되도록 복수의 제 1 후보 화살표의 시작점 또는 끝점을 조절할 수 있다.
도 9를 다시 참조하면, 의료 영상 장치(100)는 화살표-텍스트 영역에서, 복수의 제 1 후보 화살표에 대응되고 제 1 컨투어에 대한 병변 정보를 표시하는 텍스트 박스의 일 사이드(side)와 제 1 후보 화살표 정보에 포함되는 복수의 제 1 후보 화살표의 일단이 만나는 접점 영역을 결정하는 단계(930)를 수행할 수 있다. 여기서 일 사이드(side)는 텍스트 박스의 모서리 또는 변을 나타낼 수 있다. 또한 일단은 후보 화살표의 시작점 또는 끝점일 수 있다.
도 10의 좌하단 그림을 참조하면, 의료 영상 장치(100)는 텍스트 박스에 들어갈 텍스트를 병변 정보에 기초하여 결정할 수 있다. 또한 의료 영상 장치(100)는 텍스트의 폰트 및 내용에 기초하여 텍스트 박스의 크기를 결정할 수 있다. 의료 영상 장치(100)는 복수의 제 1 후보 화살표(1041, 1042, 1043)의 끝점에 텍스트 박스를 배치할 수 있다.
텍스트의 내용은 병변의 종류에 대한 정보, 병변이 의료 영상에서 존재할 확률 정보, 병변의 형태 정보, 병변의 크기 및 의료 영상의 단위 영역에 병변이 존재할 확률 중 적어도 하나를 포함할 수 있다.
의료 영상 장치(100)는 텍스트 박스에 대한 정보를 결정할 수 있다. 텍스트 박스에 대한 정보는 텍스트 박스의 크기, 텍스트 박스의 높이, 텍스트 박스의 폭 또는 텍스트 박스의 위치 정보 등을 포함할 수 있다.
의료 영상 장치(100) 화살표에 대한 정보에 기초하여 텍스트 박스의 위치를 결정할 수 있다. 예를 들어, 의료 영상 장치(100)는 화살표의 끝점으로부터 소정의 거리 내에 텍스트 박스의 하나의 모서리 또는 하나의 변이 위치하도록 할 수 있다.
의료 영상 장치(100)는 복수의 제 1 후보 화살표(1041, 1042, 1043)에 대응되는 텍스트 박스가 의료 영상 내에 위치할 수 있는지 결정할 수 있다. 또한, 의료 영상 장치(100)는 화살표-텍스트 영역(1070) 중 텍스트 박스가 의료 영상 내에 위치할 수 있도록 하는 영역을 접점 영역으로써 결정할 수 있다. 예를 들어 제 1 후보 화살표(1041)에 대응되는 텍스트 박스의 일부 영역은 의료 영상(1050) 바깥에 위치할 수 있다. 의료 영상 장치(100)는 화살표-텍스트 영역(1070)에서, 제 1 후보 화살표(1041)가 존재하는 영역을 제거하여 접점 영역을 결정할 수 있다.
또한, 의료 영상 장치(100)는 복수의 제 1 후보 화살표(1041, 1042, 1043)에 대응되는 텍스트 박스가 오브젝트와 중복되는지 여부를 결정할 수 있다. 또한, 의료 영상 장치(100)는 텍스트 박스가 오브젝트와 중복되지 않도록 하는 영역을 접점 영역으로써 결정할 수 있다. 여기서 오브젝트는 컨투어, 다른 텍스트 박스 또는 다른 화살표 중 적어도 하나를 포함할 수 있다. 예를 들어 제 1 후보 화살표(1042)에 대응되는 텍스트 박스의 일부 영역은 다른 컨투어(1060)와 중복될 수 있다. 의료 영상 장치(100)는 화살표-텍스트 영역(1070)에서, 제 1 후보 화살표(1042)가 존재하는 영역을 제거하여 접점 영역을 결정할 수 있다.
의료 영상 장치(100)는 제 1 후보 화살표(1043)에 대응되는 텍스트 박스가 의료 영상 내에 위치하고, 오브젝트와 중복되지 않는 경우, 제 1 후보 화살표(1040)의 끝점이 포함되는 영역을 이용하여 접점 영역을 획득할 수 있다.
도 10의 우하단 그림을 참조하면, 위와 같은 과정을 통하여 의료 영상 장치(100)는 화살표-텍스트 영역(1070) 중 일부를 접점 영역(1080)으로 획득할 수 있다. 의료 영상 장치(100)는 접점 영역에 끝점이 포함되는 복수의 후보 화살표를 선택할 수 있다. 또한 선택된 후보 화살표를 이용하여 적어도 하나의 화살표 세트를 생성할 수 있다.
다시 도 9를 참조하면 의료 영상 장치(100)는 결정된 접점 영역에 기초하여 제 1 컨투어에 대한 텍스트 박스 및 화살표의 표시 가능한 위치에 대한 적어도 하나의 화살표 세트를 생성하는 단계(940)를 수행할 수 있다.
도 13을 참조하면, 의료 영상 내에는 복수의 컨투어(1310, 1320, 1330)를 포함할 수 있다. 의료 영상 장치(100)는 단계(910) 내지 단계(930)에 기초하여 복수의 컨투어(1310, 1320, 1330) 각각에 대하여 접점 영역을 결정할 수 있다. 또한 의료 영상 장치(100)는 복수의 컨투어(1310, 1320, 1330) 각각에 대하여 복수의 후보 화살표를 결정할 수 있다. 의료 영상 장치(100)는 접점 영역에 끝점이 포함되는 복수의 후보 화살표를 선택할 수 있다. 또한, 의료 영상 장치(100)는 접점 영역에 끝점이 포함되지 않는 후보 화살표를 제거할 수 있다.
의료 영상 장치(100)는 접점 영역에 적어도 일부가 포함된 복수의 후보 화살표 중에서 컨투어 당 하나의 후보 화살표를 선택하여 화살표 세트를 생성할 수 있다. 즉, 의료 영상 장치(100)는 하나의 컨투어에 대응하는 복수의 후보 화살표 중에서 하나를 선택하여 화살표 세트를 생성할 수 있다.
예를 들어 도 13의 SET 1을 참조하면, 의료 영상 장치(100)는 제 1 컨투어(1310)에 대한 복수의 후보 화살표 중에서 제 1-1 화살표(1311)를 선택할 수 있다. 또한 SET 1을 참조하면, 의료 영상 장치(100)는 제 2 컨투어(1320)에 대한 복수의 후보 화살표 중에서 제 2-1 화살표(1321)를 선택할 수 있다. 또한 SET 1을 참조하면, 의료 영상 장치(100)는 제 3 컨투어(1330)에 대한 복수의 후보 화살표 중에서 제 3-1 화살표(1331)를 선택할 수 있다. 제 1-1 화살표(1311), 제 2-1 화살표(1321) 및 제 3-1 화살표(1331)는 SET 1에 포함될 수 있다.
도 13의 SET 2를 참조하면, 의료 영상 장치(100)는 제 1 컨투어(1310)에 대한 복수의 후보 화살표 중에서 제 1-2 화살표(1312)를 선택할 수 있다. 또한 SET 2를 참조하면, 의료 영상 장치(100)는 제 2 컨투어(1320)에 대한 복수의 후보 화살표 중에서 제 2-2 화살표(1322)를 선택할 수 있다. 또한 SET 2를 참조하면 의료 영상 장치(100)는 제 3 컨투어(1330)에 대한 복수의 후보 화살표 중에서 제 3-2 화살표(1332)를 선택할 수 있다. 제 1-2 화살표(1312), 제 2-2 화살표(1322) 및 제 3-2 화살표(1332)는 SET 2에 포함될 수 있다.
의료 영상 장치(100)는 미리 정해진 개수만큼 세트를 생성할 수 있다. 의료 영상 장치(100)는 복수의 후보 화살표 중 세트에 포함될 화살표를 랜덤하게 선택할 수 있다. 의료 영상 장치(100)는 미리 정해진 방식에 의하여 화살표의 끝점에 텍스트 박스를 위치시킬 수 있다. 의료 영상 장치(100)는 화살표 정보를 화살표 세트에 포함시킬 수 있다. 즉 의료 영상 장치(100)는 복수의 컨투어 각각에 대응되는 화살표 정보를 화살표 세트에 포함하여 저장하고 있을 수 있다.
적어도 하나의 화살표 세트는 화살표 정보 또는 텍스트 박스에 대한 정보 중 적어도 하나를 포함할 수 있다. 이미 설명한 바와 같이 텍스트 박스에 대한 정보는 텍스트 박스의 크기, 텍스트 박스의 높이, 텍스트 박스의 폭 또는 텍스트 박스의 위치 정보 등을 포함할 수 있다.
도 9를 다시 참조하면 의료 영상 장치(100)는 적어도 하나의 화살표 세트 각각에 대하여 스코어를 획득하는 단계(950)를 수행할 수 있다. 스코어는 의료인이 의료 영상, 컨투어, 화살표 및 텍스트 중 적어도 하나를 편안하게 검토할 수 있는 정도를 나타낸다. 스코어가 높을 수록 의료인이 의료 영상, 컨투어, 화살표 및 텍스트 중 적어도 하나를 편안하게 검토할 수 있음을 나타낸다. 스코어를 획득하는 단계에 대해서는 도 17 및 18과 함께 보다 자세히 설명한다.
의료 영상 장치(100)는 획득된 스코어에 기초하여, 적어도 하나의 화살표 세트 중 하나의 화살표 세트를 선택하는 단계(960)를 수행할 수 있다. 의료 영상 장치(100)는 스코어가 가장 높은 화살표 세트를 선택할 수 있다. 예를 들어 도 13에서 SET 1 및 SET 2 중 SET 1의 스코어가 가장 높은 경우, 의료 영상 장치(100)는 SET 1를 선택할 수 있다. 또한, 의료 영상 장치(100)는 스코어가 가장 높은 화살표 세트일지라도 화살표 세트 내의 화살표가 서로 교차하는 경우 해상 화살표 세트를 선택하지 않을 수 있다.
의료 영상 장치(100)는 화살표 세트 중 제 1 컨투어에 대응하는 제 1 화살표 및 제 2 컨투어에 대응하는 제 2 화살표가 교차하는 경우, 해당 화살표 세트를 선택하지 않을 수 있다. 또는, 의료 영상 장치(100)는 화살표 세트 중 제 1 컨투어에 대응하는 제 1 화살표 및 제 2 컨투어에 대응하는 제 2 화살표가 교차하는 경우 적어도 하나의 화살표 세트에서 제거할 수 있다.
도 9를 다시 참조하면 의료 영상 장치(100)는 선택된 하나의 화살표 세트에 기초하여, 적어도 하나의 컨투어와 함께, 화살표 및 텍스트 박스 내의 텍스트를 출력하는 단계(950)를 수행할 수 있다. 의료 영상 장치(100)는 선택된 화살표 세트에 포함된 복수의 화살표 정보에 기초하여 화살표를 출력할 수 있다. 또한 의료 영상 장치(100)는 병변 정보에 기초하여 텍스트의 내용을 결정할 수 있다. 또한 의료 영상 장치(100)는 미리 정해진 방법에 기초하여 화살표에 인접하게 텍스트 박스를 배치할 수 있다. 또한 의료 영상 장치(100)는 텍스트 박스에 텍스트를 표시할 수 있다. 텍스트 박스는 표시되지 않을 수 있다.
예를 들어 도 13에서 의료 영상 장치(100)가 SET 1을 선택한 경우, 의료 영상 장치(100)는 SET 1과 같이 의료 영상(1300), 복수의 컨투어(1310, 1320, 1330), 복수의 화살표(1311, 1321, 1331) 및 텍스트를 출력할 수 있다.
도 14는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
의료 영상 장치(100)는 제 1 후보 화살표 정보를 결정하기 위하여 아래와 같은 과정을 수행할 수 있다. 아래의 단계들은 도 9의 단계(910) 내지 단계(940) 중 하나의 단계와 함께 수행될 수 있다.
의료 영상 장치(100)는 제 1 컨투어에 대한 제 1 텍스트 박스가 제 2 컨투어에 대한 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되는 경우, 제 1 텍스트 박스가 제 2 텍스트 박스 또는 제 2 컨투어와 중첩되지 않도록, 제 1 후보 화살표 정보에 포함된 후보 화살표의 시작점 또는 끝점을 이동시켜서 수정된 제 1 후보 화살표 정보를 획득하는 단계를 수행할 수 있다.
의료 영상(1410)을 참조하면, 의료 영상 장치(100)는 제 1 컨투어에 대한 제 1 텍스트 박스(1411)가 제 2 컨투어에 대한 제 2 텍스트 박스(1412)와 중첩됨을 결정할 수 있다. 의료 영상 장치(100)는 제 1 텍스트 박스(1411)가 제 2 텍스트 박스(1412)와 중첩되지 않도록 제 1 후보 화살표 정보에 포함된 후보 화살표(1413)의 시작점 또는 끝점을 이동시켜서 수정된 제 1 후보 화살표 정보를 획득할 수 있다. 예를 들어 의료 영상 장치(100)는 제 1 텍스트 박스(1411) 및 제 2 텍스트 박스(1412)가 중첩되는 만큼 후보 화살표(1413)를 이동시킬 수 있다.
의료 영상(1420)은 수정된 제 1 후보 화살표 정보에 기초한 후보 화살표(1423)를 나타낸다. 의료 영상 장치(100)는 후보 화살표(1423)에 기초하여 수정된 제 1 텍스트 박스(1421)를 획득할 수 있다. 수정된 제 1 텍스트 박스(1421)는 제 2 텍스트 박스(1422)와 중첩되지 않을 수 있다.
의료 영상(1430)을 참조하면, 의료 영상 장치(100)는 제 1 컨투어에 대한 제 1 텍스트 박스(1431)가 제 2 컨투어(1432)와 중첩됨을 결정할 수 있다. 의료 영상 장치(100)는 제 1 텍스트 박스(1431)가 제 2 컨투어(1432)와 중첩되지 않도록 제 1 후보 화살표 정보에 포함된 후보 화살표(1433)의 시작점 또는 끝점을 이동시켜서 수정된 제 1 후보 화살표 정보를 획득할 수 있다.
의료 영상(1440)은 수정된 제 1 후보 화살표 정보에 기초한 후보 화살표(1443)를 나타낸다. 의료 영상 장치(100)는 후보 화살표(1443)에 기초하여 수정된 제 1 텍스트 박스(1441)를 획득할 수 있다. 수정된 제 1 텍스트 박스(1441)는 제 2 컨투어(1442)와 중첩되지 않을 수 있다.
의료 영상 장치(100)는 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 수행할 수 있다. 이 단계는 도 9의 단계(940)와 함께 수행될 수 있다.
도 15는 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
의료 영상 장치(100)는 제 1 후보 화살표 정보를 결정하기 위하여 아래와 같은 과정을 수행할 수 있다. 아래의 단계들은 도 9의 단계(910) 내지 단계(940) 중 하나의 단계와 함께 수행될 수 있다.
의료 영상 장치(100)는 적어도 하나의 컨투어 중 제 1 컨투어(1521)를 가리키는 복수의 제 1 후보 화살표에 대한 제 1 후보 화살표 정보를 결정하는 단계를 수행할 수 있다. 복수의 제 1 후보 화살표는 제 1 후보 화살표(1522)를 포함할 수 있다. 또한, 의료 영상 장치(100)는 적어도 하나의 컨투어 중 제 2 컨투어(1531)를 가리키는 복수의 제 2 후보 화살표에 대한 제 2 후보 화살표 정보를 결정하는 단계를 수행할 수 있다. 복수의 제 2 후보 화살표는 제 2 후보 화살표(1532)를 포함할 수 있다.
의료 영상 장치(100)는 복수의 제 1 후보 화살표 중 제 1 후보 화살표(1522)와 복수의 제 2 후보 화살표 중 제 2 후보 화살표(1532)가 교차되는지 여부를 결정할 수 있다. 또한, 의료 영상(1510)과 같이 제 1 후보 화살표(1522)와 제 2 후보 화살표(1532)가 교차되는 경우, 의료 영상 장치(100)는 복수의 제 1 후보 화살표 중 제 1 후보 화살표(1522)와 복수의 제 2 후보 화살표 중 제 2 후보 화살표(1532)가 교차되지 않도록, 제 1 후보 화살표(1522)의 시작점 또는 끝점을 이동시켜서, 수정된 제 1 후보 화살표 정보를 획득하는 단계를 수행할 수 있다.
의료 영상(1550)과 같이 의료 영상 장치(100)는 제 1 컨투어(1561)에 대응하는 제 1 후보 화살표(1522)의 시작점 및 끝점을 이동시켜서 수정된 제 1 후보 화살표(1562)를 획득할 수 있다. 의료 영상 장치(100)는 수정된 제 1 후보 화살표(1562)에 기초하여 수정된 제 1 후보 화살표 정보를 획득할 수 있다.
의료 영상 장치(100)는 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 수행할 수 있다. 이 단계는 도 9의 단계(940)와 함께 수행될 수 있다.
도 16은 본 개시의 일 실시예에 따른 의료 영상 장치의 동작을 설명하기 위한 도면이다.
의료 영상 장치(100)는 제 1 후보 화살표 정보를 결정하기 위하여 아래와 같은 과정을 수행할 수 있다. 아래의 단계들은 도 9의 단계(910) 내지 단계(940) 중 하나의 단계와 함께 수행될 수 있다.
의료 영상(1610)을 참조하면 의료 영상 장치(100)는 제 1 컨투어(1621) 및 적어도 하나의 컨투어 중 제 2 컨투어(1631)의 교점(1640)을 획득하는 단계를 수행할 수 있다. 의료 영상 장치(100)는 복수의 제 1 후보 화살표 중 하나인 제 1 후보 화살표(1622) 및 제 1 컨투어(1621)가 만나는 제 1 접점(1623)을 획득하는 단계를 수행할 수 있다.
의료 영상 장치(100)는 제 1 접점(1623)이 교점(1640)으로부터 임계값 이상 떨어져 있는지 여부를 결정할 수 있다. 여기서 임계값은 미리 결정된 값일 수 있다. 제 1 접점(1623) 및 교점(1640)의 거리가 임계값보다 작은 경우, 의료 영상 장치(100)는 제 1 접점(1623)이 교점(1640)으로부터 임계값 이상 떨어지도록, 복수의 제 1 후보 화살표 중 하나인 제 1 후보 화살표(1622)의 시작점 또는 끝점의 위치를 수정할 수 있다. 의료 영상 장치(100)는 제 1 후보 화살표(1622)의 시작점 또는 끝점의 위치를 수정하여 수정된 제 1 후보 화살표 정보를 획득하는 단계를 수행할 수 있다. 의료 영상 장치(100)는 제 1 후보 화살표(1622)의 시작점을 제 1 컨투어를 따라 이동시키면서, 제 1 접점(1623)이 교점(1640)으로부터 임계값 이상 떨어지도록 만들 수 있다. 또한 의료 영상 장치(100)는 제 1 후보 화살표(1622)의 끝점을 이동시켜서 화살표가 컨투어에 수직이도록 만들 수 있다.
의료 영상(1650)은 수정된 제 1 후보 화살표(1662)를 나타낸다. 제 2 접점은 수정된 제 1 후보 화살표(1662) 및 제 1 컨투어(1661)의 접점일 수 있다. 또한 교점(1680)은 제 1 컨투어(1661) 및 제 2 컨투어(1671)가 교차하는 점일 수 있다. 제 2 접점(1663)은 교점(1680)과 임계값 이상 떨어질 수 있다.
의료 영상 장치(100)는 수정된 제 1 후보 화살표 정보에 기초하여 적어도 하나의 화살표 세트를 생성하는 단계를 수행할 수 있다. 이 단계는 도 9의 단계(940)와 함께 수행될 수 있다.
도 17 및 18은 본 개시의 일 실시예에 따라 스코어를 획득하는 방법을 설명하기 위한 도면이다.
도 9에서 설명한 바와 같이 의료 영상 장치(100)는 스코어를 획득하는 단계(950)를 수행할 수 있다. 의료 영상 장치(100)는 미리 결정된 방법에 의하여 스코어를 계산할 수 있다. 의료 영상 장치(100)는 텍스트 박스 간의 거리에 기초하여 스코어를 계산할 수 있다.
도 17을 참조하면, 의료 영상 장치(100)는 적어도 하나의 컨투어(1710, 1720, 1730)에 대응되는 적어도 하나의 텍스트 박스(1711, 1721, 1731) 간의 거리가 멀수록 스코어를 높게 결정할 수 있다.
예를 들어, 의료 영상 장치(100)는 텍스트 박스 간의 가장 가까운 거리를 결정할 수 있다. 의료 영상 장치(100)는 제 1 텍스트 박스(1711) 및 제 2 텍스트 박스(1721)의 제 1 거리(1741)를 결정할 수 있다. 의료 영상 장치(100)는 제 2 텍스트 박스(1721) 및 제 3 텍스트 박스(1731)의 제 2 거리(1742)를 결정할 수 있다. 의료 영상 장치(100)는 제 1 텍스트 박스(1711) 및 제 3 텍스트 박스(1731)의 제 3 거리(1743)를 결정할 수 있다. 의료 영상 장치(100)는 제 1 거리(1741), 제 2 거리(1742) 및 제 3 거리(1743)에 기초하여 스코어를 결정할 수 있다. 의료 영상 장치(100)는 제 1 거리(1741), 제 2 거리(1742) 및 제 3 거리(1743)의 합이 클수록 스코어를 높게 결정할 수 있다.
또한, 의료 영상 장치(100)는 적어도 하나의 컨투어(1710, 1720, 1730)에 대응되는 적어도 하나의 화살표(1712, 1722, 1732)의 길이가 짧을 수록 스코어를 높게 결정할 수 있다. 의료 영상 장치(100)는 적어도 하나의 컨투어에 각각 대응되는 적어도 하나의 후보 화살표 정보에 기초하여 적어도 하나의 화살표의 길이를 결정할 수 있다. 이미 설명한 바와 같이 후보 화살표 정보는 시작점의 위치, 끝점의 위치 또는 화살표의 길이를 포함할 수 있다. 의료 영상 장치(100)는 후보 화살표 정보로부터 화살표의 길이를 획득할 수 있다.
보다 구체적으로, 의료 영상 장치(100)는 제 1 컨투어(1710)에 대응되는 제 1 후보 화살표 정보, 제 2 컨투어(1720)에 대응되는 제 2 후보 화살표 정보 및 제 3 컨투어(1730)에 대응되는 제 3 화살표 정보에 기초하여 제 1 화살표(1712)의 길이, 제 2 화살표(1722)의 길이, 제 3 화살표(1732)의 길이를 획득할 수 있다. 의료 영상 장치(100)는 제 1 화살표(1712)의 길이, 제 2 화살표(1722)의 길이, 제 3 화살표(1732)의 길이의 합이 작을 수록 스코어를 높게 결정할 수 있다.
도 18을 참조하면, 의료 영상 장치(100)는 적어도 하나의 컨투어(1810, 1820)에 포함된 두 개의 컨투어(1810, 1820)의 교점(1851, 1852) 및 적어도 하나의 컨투어(1810, 1820)와 적어도 하나의 화살표(1811, 1821)의 접점(1812, 1822) 사이의 거리에 기초하여 스코어를 결정할 수 있다. 보다 구체적으로 의료 영상 장치(100)는 적어도 하나의 컨투어(1810, 1820)에 포함된 두 개의 컨투어(1810, 1820)의 교점(1851, 1852) 및 적어도 하나의 컨투어(1810, 1820)와 적어도 하나의 화살표(1811, 1821)의 접점(1812, 1822) 사이의 거리가 멀수록 스코어를 높게 결정할 수 있다.
의료 영상 장치(100)는, 화살표 정보에 기초하여, 적어도 하나의 컨투어에 포함된 제 1 컨투어(1810)에 대응되는 제 1 화살표(1811)를 획득할 수 있다. 또한 의료 영상 장치(100)는, 화살표 정보에 기초하여, 적어도 하나의 컨투어에 포함된 제 2 컨투어(1820)에 대응되는 제 2 화살표(1821)를 획득할 수 있다.
의료 영상 장치(100)는 제 1 컨투어(1810)와 제 2 컨투어(1820)의 제 1 교점(1851) 및 제 2 교점(1852)을 획득할 수 있다.
또한 의료 영상 장치(100)는 제 1 컨투어(1810)와 제 1 화살표(1811)가 가장 근접하는 지점을 제 1 접점(1812)으로써 결정할 수 있다. 제 1 접점(1812)은 제 1 화살표(1811)의 시작점일 수 있다. 또한 제 1 접점(1812)은 제 1 컨투어(1810) 중 제 1 화살표(1811)와 가장 근접한 지점일 수 있다.
또한 의료 영상 장치(100)는 제 2 컨투어(1820)와 제 1 화살표(1821)가 가장 근접하는 지점을 제 2 접점(1822)으로써 결정할 수 있다. 제 2 접점(1822)은 제 2 화살표(1821)의 시작점일 수 있다. 또한 제 2 접점(1822)은 제 2 컨투어(1820) 중 제 2 화살표(1821)와 가장 근접한 지점일 수 있다.
의료 영상 장치(100)는 제 1 교점(1851)과 제 1 접점(1812)의 거리(1831), 제 1 교점(1851)과 제 2 접점(1822)의 거리(1841), 제 2 교점(1852)과 제 1 접점(1812)의 거리(1832) 및 제 2 교점(1852)과 제 2 접점(1822)의 거리(1842)에 기초하여 스코어를 결정할 수 있다. 의료 영상 장치(100)는 제 1 교점(1851)과 제 1 접점(1812)의 거리(1831), 제 1 교점(1851)과 제 2 접점(1822)의 거리(1841), 제 2 교점(1852)과 제 1 접점(1812)의 거리(1832) 및 제 2 교점(1852)과 제 2 접점(1822)의 거리(1842)의 합이 클수록 스코어를 높게 결정할 수 있다.
도 19는 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
도 2와 유사하게 의료 영상 장치(100)는 의료 영상(1900)에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계(210)를 수행할 수 있다. 또한, 의료 영상 장치(100)는 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 히트맵(1920)을 생성하는 단계를 수행할 수 있다.
히트맵(1920)은 병변 정보에 포함된 병변 영역 상에 표시될 수 있다. 또한 히트맵(1920)은 병변 정보에 포함된 병변 영역보다 크게 표시될 수 있다.
의료 영상 장치(100)는 의료 영상(1900)의 픽셀이 병변 영역에 포함될 확률에 기초하여 색 및 투명도를 달리하여 히트맵(1920)을 생성할 수 있다. 예를 들어 픽셀이 병변 영역에 포함될 확률이 높을 수록 빨간색 계통으로 표현되고, 픽셀이 병변 영역에 포함될 확률이 낮을 수록 파란색 계통으로 표현될 수 있다. 또한 픽셀이 병변 영역에 포함될 확률이 높을 수록 불투명하게 표현되고, 픽셀이 병변 영역에 포함될 확률이 낮을 수록 투명하게 표현될 수 있다.
의료 영상 장치(100)는 의료 영상(1900) 상의 픽셀이 병변 영역에 포함될 확률의 최대값을 획득할 수 있다. 또한 의료 영상 장치(100)는 의료 영상(1900) 상의 픽셀이 병변 영역에 포함될 확률의 최대값을 획득할 수 있다. 또한 의료 영상 장치(100)는 확률의 최대값이 임계값보다 낮은 지 여부를 결정할 수 있다. 여기서 임계값은 미리 결정된 값일 수 있다. 픽셀이 병변 영역에 포함될 확률이 낮을 경우, 히트맵(1920)은 투명도가 높거나, 눈에 띄지 않는 색으로 표현되어 의료인이 확인하기 어려울 수 있다. 예를 들어 도 19와 같이 픽셀이 병변 영역에 포함될 확률이 27%로 낮은 경우, 의료인이 히트맵을 확인하기 어려울 수 있다. 의료 영상 장치(100)는 확률의 최대값이 임계값보다 낮은 지 여부를 결정함으로써, 의료인이 히트맵(1920)을 보기에 편한지 여부를 결정할 수 있다.
의료 영상 장치(100)는 확률의 최대값이 임계값보다 낮은 경우, 히트맵(1920)의 적어도 일부를 둘러싸는 컨투어(1910)를 생성하는 단계를 수행할 수 있다. 컨투어(1910)는 히트맵(1920)보다 작거나 같을 수 있다. 하지만 ㅣㅇ에 한정되는 것은 아니며 컨투어(1910)는 히트맵(1920)보다 클 수 있다. 의료 영상 장치(100)는 의료인이 히트맵(1920)을 보기 어려운 경우에 컨투어를 생성할 수 있다. 의료 영상 장치(100)는 의료인이 히트맵(1920)을 보기 어려운 경우에 컨투어만 표시하거나, 컨투어 및 히트맵을 동시에 표시함으로써, 의료인은 디스플레이에 표시된 병변 정보를 쉽게 확인할 수 있다.
이상에서는 의료 영상(1900) 상의 픽셀별로 병변 영역에 포함될 확률을 획득하는 구성을 설명하였다. 하지만 이에 한정되는 것은 아니다. 의료 영상 장치(100)는 적어도 하나의 픽셀을 포함하는 단위 영역 별로 병변 영역에 포함될 확률을 획득할 수 있다. 의료 영상 장치(100)가 단위 영역을 이용하는 경우에도 위와 동일하게 설명될 수 있으므로 중복되는 설명은 생략한다.
도 20은 본 개시의 일 실시예에 따른 의료 영상을 나타낸다.
도 2와 유사하게 의료 영상 장치(100)는 의료 영상(2000)에 포함되는 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계(210)를 수행할 수 있다. 또한, 의료 영상 장치(100)는 획득된 병변 정보에 기초하여, 의료 영상에서 적어도 하나의 병변에 대응하는 적어도 하나의 컨투어를 생성하는 단계(220)를 수행할 수 있다. 또한 도 9와 유사하게 의료 영상 장치(100)는 화살표 및 텍스트를 생성할 수 있다. 다만 특정 경우 의료 영상 장치(100)는 화살표를 생성하지 않을 수 있다.
의료 영상 장치(100)는 병변 영역 또는 컨투어의 내부 영역이 임계값보다 큰지 여부를 결정할 수 있다. 의료 영상 장치(100)는 병변 영역 또는 컨투어의 내부 영역이 임계값보다 큰 경우 해당 컨투어에 대한 화살표를 생성하지 않을 수 있다.
또는 의료 영상 장치(100)는 의료 영상에 대한 병변 영역 또는 컨투어의 내부 영역의 비율이 임계값보다 큰지 여부를 결정할 수 있다. 의료 영상 장치(100)는 의료 영상(2000)에 대한 병변 영역 또는 컨투어의 내부 영역의 비율이 임계값보다 큰 경우, 해당 컨투어에 대한 화살표를 생성하지 않을 수 있다.
또한 의료 영상 장치(100)는 병변 정보에 포함된 병변 종류가 의료 영상 상에 크게 표시될 수밖에 없는 경우, 화살표를 생성하지 않을 수 있다. 이러한 병변의 예로는 Mediastinal Widening(MW) 또는 cardiomegaly(Cm)가 있을 수 있다.
의료 영상 장치(100)는 화살표가 생성되지 않은 경우, 의료 영상(2000)의 일부에 병변 정보와 관련된 텍스트를 표시할 수 있다. 예를 들어 의료 영상(2000)의 하단 또는 모퉁이에 병변 정보와 관련된 텍스트를 표시할 수 있다.
도 20을 참조하면, 컨투어(2020)는 상대적으로 작은 영역이므로 화살표 및 텍스트를 표시할 수 있다. 하지만 컨투어(2010)는 상대적으로 큰 영역이므로 화살표를 표시하지 않고, 텍스트(2011)를 표시할 수 있다. 의료 영상 장치(100)는 컨투어(2010)에 대한 텍스트(2011)를 의료 영상(2000)의 일부 영역 또는 일부 위치에 표시할 수 있다. 예를 들면, 의료 영상 장치(100)는 컨투어(2010)에 대한 텍스트(2011)를 의료 영상(2000)의 모퉁이 또는 하단에 표시할 수 있다.
컨투어(2010)와 텍스트(2011) 사이에 연관성이 있음을 나타내기 위하여, 의료 영상 장치(100)는 컨투어(2010)의 선의 모양을 텍스트(2011) 앞에 표시할 수 있다. 또한 의료 영상 장치(100)는 컨투어(2010)의 색과 텍스트(2011)의 색을 동일하게 설정할 수 있다.
이제까지 다양한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.
Claims (16)
- 의료 영상에서 검출된 적어도 하나의 병변에 대한 병변 정보를 획득하는 단계;
상기 획득된 병변 정보를 기초로, 상기 적어도 하나의 병변을 표시하는 컨투어 라인(contour line) 및 상기 컨투어 라인에 대응하는 병변에 대한 병변 정보를 포함하는 텍스트의 위치 중 적어도 하나를 결정하는 단계; 및
상기 결정된 컨투어 라인 및 상기 텍스트의 위치 중 적어도 하나를 기초로, 상기 적어도 하나의 병변에 대한 상기 컨투어 라인 및 상기 텍스트를 상기 의료 영상에 표시하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제1항에 있어서,
상기 결정하는 단계는
상기 컨투어 라인과 상기 텍스트 간의 거리, 상기 컨투어 라인과 상기 텍스트 간의 중첩 중 적어도 하나를 기초로, 상기 컨투어 라인 및 상기 텍스트의 위치 중 적어도 하나를 결정하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제1항에 있어서,
상기 결정하는 단계는
상기 의료 영상에서 검출된 복수의 병변 중 병변 영역이 중복되는 병변들을 확인하는 단계와,
상기 중복되는 병변들 사이의 중복된 영역의 크기, 상기 중복되는 병변들 각각의 병변 확률 및 상기 중복되는 병변들 사이의 관련성 중 적어도 하나를 기초로, 상기 복수의 병변 중 적어도 일부를 표시 대상에서 제외하는 단계와,
상기 복수의 병변 중 상기 제외된 적어도 일부 이외의 병변에 대한 컨투어 라인 및 텍스트의 위치 중 적어도 하나를 결정하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제3항에 있어서,
상기 복수의 병변 중 적어도 일부를 표시 대상에서 제외하는 단계는
상기 중복되는 병변들 중 일부가 하나의 의료 영상에서 존재할 확률을 기초로, 상기 복수의 병변 중 적어도 일부를 표시 대상에서 제외하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제1항에 있어서,
상기 컨투어 라인을 가리키는 화살표를 생성하는 단계를 더 포함하고,
상기 표시하는 단계는
상기 생성된 화살표를 상기 의료 영상에 표시하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제5항에 있어서,
상기 화살표를 생성하는 단계는
상기 의료 영상에서 검출된 복수의 병변 각각에 대한 화살표를 생성하는 단계를 포함하고,
상기 표시하는 단계는
상기 생성된 복수의 병변 각각에 대한 화살표가 서로 교차되지 않도록 상기 의료 영상에 표시하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제5항에 있어서,
상기 화살표를 생성하는 단계는
상기 의료 영상에서 검출된 복수의 병변 각각에 대한 화살표를 생성하는 단계를 포함하고,
상기 표시하는 단계는
상기 생성된 복수의 병변 각각에 대한 화살표가, 상기 복수의 병변 각각에 대응하는 컨투어 라인과 서로 교차되지 않도록 상기 의료 영상에 표시하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 제5항에 있어서,
상기 생성된 화살표를 상기 의료 영상에 표시하는 단계는
상기 생성된 화살표가, 상기 컨투어 라인에 접하는 접점 영역을 결정하는 단계와,
상기 생성된 화살표를 상기 접점 영역에 연결되도록 표시하는 단계를 포함하는
의료 영상 장치의 동작 방법.
- 적어도 하나의 프로세서; 및
상기 프로세서에 의해 실행되는 명령어들을 저장하는 메모리를 포함하고,
상기 프로세서는 실행 시에,
의료 영상에서 검출된 적어도 하나의 병변에 대한 병변 정보를 획득하고,
상기 획득된 병변 정보를 기초로, 상기 적어도 하나의 병변을 표시하는 컨투어 라인(contour line) 및 상기 컨투어 라인에 대응하는 병변에 대한 병변 정보를 포함하는 텍스트의 위치 중 적어도 하나를 결정하고,
상기 결정된 컨투어 라인 및 상기 텍스트 영역의 위치 중 적어도 하나를 기초로, 상기 적어도 하나의 병변에 대한 상기 컨투어 라인 및 상기 텍스트를 상기 의료 영상에 표시하는
전자 장치.
- 제9항에 있어서,
상기 프로세서는 실행 시에,
상기 컨투어 라인과 상기 텍스트 간의 거리, 상기 컨투어 라인과 상기 텍스트 간의 중첩 중 적어도 하나를 기초로, 상기 컨투어 라인 및 상기 텍스트의 위치 중 적어도 하나의 위치를 결정하는
전자 장치.
- 제9항에 있어서,
상기 프로세서는 실행 시에,
상기 의료 영상에서 검출된 복수의 병변 중 병변 영역이 중복되는 병변들을 확인하고,
상기 중복되는 병변들 사이의 중복된 영역의 크기, 상기 중복되는 병변들 각각의 병변 확률 및 상기 중복되는 병변들 사이의 관련성 중 적어도 하나를 기초로, 상기 복수의 병변 중 적어도 일부를 표시 대상에서 제외하고,
상기 복수의 병변 중 상기 제외된 적어도 일부 이외의 병변에 대한 컨투어 라인 및 텍스트의 위치 중 적어도 하나를 결정하는
전자 장치.
- 제11항에 있어서,
상기 프로세서는 실행 시에,
상기 중복되는 병변들 중 일부가 하나의 의료 영상에서 존재할 확률을 기초로, 상기 복수의 병변 중 적어도 일부를 표시 대상에서 제외하는
전자 장치.
- 제9항에 있어서,
상기 프로세서는 실행 시에,
상기 컨투어 라인을 가리키는 화살표를 생성하고,
상기 생성된 화살표를 상기 의료 영상에 표시하는
전자 장치.
- 제13항에 있어서,
상기 프로세서는 실행 시에,
상기 의료 영상에서 검출된 복수의 병변 각각에 대한 화살표를 생성하고,
상기 생성된 복수의 병변 각각에 대한 화살표가 서로 교차되지 않도록 상기 의료 영상에 표시하는
전자 장치.
- 제13항에 있어서,
상기 프로세서는 실행 시에,
상기 의료 영상에서 검출된 복수의 병변 각각에 대한 화살표를 생성하고,
상기 생성된 복수의 병변 각각에 대한 화살표가, 상기 복수의 병변 각각에 대응하는 컨투어 라인과 서로 교차되지 않도록 상기 의료 영상에 표시하는
전자 장치.
- 제13항에 있어서,
상기 프로세서는 실행 시에,
상기 생성된 화살표가, 상기 컨투어 라인에 접하는 접점 영역을 결정하고,
상기 생성된 화살표를 상기 접점 영역에 연결되도록 표시하는
전자 장치.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210014945A KR20210110183A (ko) | 2020-02-28 | 2021-02-02 | 의료 영상 장치 및 의료 영상 처리 방법 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200025445A KR102216697B1 (ko) | 2020-02-28 | 2020-02-28 | 의료 영상 장치 및 의료 영상 처리 방법 |
| KR1020210014945A KR20210110183A (ko) | 2020-02-28 | 2021-02-02 | 의료 영상 장치 및 의료 영상 처리 방법 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200025445A Division KR102216697B1 (ko) | 2020-02-28 | 2020-02-28 | 의료 영상 장치 및 의료 영상 처리 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20210110183A true KR20210110183A (ko) | 2021-09-07 |
Family
ID=74731405
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200025445A KR102216697B1 (ko) | 2020-02-28 | 2020-02-28 | 의료 영상 장치 및 의료 영상 처리 방법 |
| KR1020210014945A KR20210110183A (ko) | 2020-02-28 | 2021-02-02 | 의료 영상 장치 및 의료 영상 처리 방법 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200025445A KR102216697B1 (ko) | 2020-02-28 | 2020-02-28 | 의료 영상 장치 및 의료 영상 처리 방법 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20220415013A1 (ko) |
| EP (1) | EP4095866A4 (ko) |
| JP (1) | JP2023515609A (ko) |
| KR (2) | KR102216697B1 (ko) |
| CN (1) | CN115176317A (ko) |
| WO (1) | WO2021172921A1 (ko) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102216697B1 (ko) * | 2020-02-28 | 2021-02-17 | 주식회사 루닛 | 의료 영상 장치 및 의료 영상 처리 방법 |
| WO2024121886A1 (ja) * | 2022-12-05 | 2024-06-13 | 日本電気株式会社 | 内視鏡検査支援装置、内視鏡検査支援方法、及び、記録媒体 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5426105B2 (ja) * | 2008-03-27 | 2014-02-26 | 富士フイルム株式会社 | 医用レポートシステム、医用レポート閲覧装置、医用レポートプログラム、及び医用レポートシステムの作動方法 |
| US20100158332A1 (en) * | 2008-12-22 | 2010-06-24 | Dan Rico | Method and system of automated detection of lesions in medical images |
| JP5707148B2 (ja) * | 2010-01-27 | 2015-04-22 | 株式会社東芝 | 医用画像診断装置及び医用画像処理装置 |
| KR102049336B1 (ko) * | 2012-11-30 | 2019-11-27 | 삼성전자주식회사 | 컴퓨터 보조 진단 장치 및 방법 |
| JP6334927B2 (ja) * | 2014-01-23 | 2018-05-30 | 三菱電機株式会社 | 付加情報表示装置および付加情報表示プログラム |
| WO2015121776A1 (en) * | 2014-02-12 | 2015-08-20 | Koninklijke Philips N.V. | Systems for monitoring lesion size trends and methods of operation thereof |
| JP6827706B2 (ja) * | 2015-09-09 | 2021-02-10 | キヤノン株式会社 | 情報処理装置及びその方法、情報処理システム、コンピュータプログラム |
| JP6646395B2 (ja) * | 2015-09-28 | 2020-02-14 | キヤノン株式会社 | 情報処理装置及びその方法、情報処理システム、コンピュータプログラム |
| KR102216697B1 (ko) * | 2020-02-28 | 2021-02-17 | 주식회사 루닛 | 의료 영상 장치 및 의료 영상 처리 방법 |
-
2020
- 2020-02-28 KR KR1020200025445A patent/KR102216697B1/ko active IP Right Grant
-
2021
- 2021-02-02 KR KR1020210014945A patent/KR20210110183A/ko not_active Application Discontinuation
- 2021-02-25 CN CN202180017059.XA patent/CN115176317A/zh active Pending
- 2021-02-25 EP EP21759916.6A patent/EP4095866A4/en active Pending
- 2021-02-25 WO PCT/KR2021/002426 patent/WO2021172921A1/ko unknown
- 2021-02-25 JP JP2022552179A patent/JP2023515609A/ja active Pending
-
2022
- 2022-08-25 US US17/895,315 patent/US20220415013A1/en active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023515609A (ja) | 2023-04-13 |
| CN115176317A (zh) | 2022-10-11 |
| EP4095866A4 (en) | 2024-03-06 |
| US20220415013A1 (en) | 2022-12-29 |
| KR102216697B1 (ko) | 2021-02-17 |
| EP4095866A1 (en) | 2022-11-30 |
| WO2021172921A1 (ko) | 2021-09-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220415013A1 (en) | Medical imaging device and medical image processing method | |
| US7978897B2 (en) | Computer-aided image diagnostic processing device and computer-aided image diagnostic processing program product | |
| CN109003269B (zh) | 一种能提高医生效率的医学影像病灶的标注提取方法 | |
| US10394416B2 (en) | User interface system and method for enabling mark-based interaction for images | |
| CN111124233B (zh) | 医学影像的显示方法、交互方法及存储介质 | |
| US11200443B2 (en) | Image processing apparatus, image processing method, and image processing system | |
| US11024417B2 (en) | Integrated medical image visualization and exploration | |
| JP5935849B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| US11705239B2 (en) | Method and apparatus for generating image reports | |
| US11600000B2 (en) | Image processing method and system for selectively deleting label on medical image | |
| US11409999B2 (en) | Method of labelling features for image recognition and apparatus thereof | |
| US10575723B2 (en) | Mapping of internal features on en face imagery | |
| JP2021526261A (ja) | デュアルクラスに対応できる疾病診断システム及び該方法 | |
| CN111145877A (zh) | 交互方法、信息处理方法、显示方法及存储介质 | |
| JP5745947B2 (ja) | 医用画像処理装置、医用画像処理方法 | |
| CN113689355B (zh) | 图像处理方法、装置、存储介质及计算机设备 | |
| US20220409324A1 (en) | Systems and methods for telestration with spatial memory | |
| JP7130107B2 (ja) | 領域特定装置、方法およびプログラム、学習装置、方法およびプログラム、並びに識別器 | |
| CN113506313A (zh) | 图像处理方法及相关装置和电子设备、存储介质 | |
| JP5414879B1 (ja) | 薬剤認識装置、薬剤認識方法及び薬剤認識プログラム | |
| CN112862786A (zh) | Cta影像数据处理方法、装置及存储介质 | |
| TWI836394B (zh) | 醫療影像處理之方法、裝置及電腦程式 | |
| JP7151464B2 (ja) | 肺画像処理プログラム、肺画像処理方法および肺画像処理システム | |
| US20230154061A1 (en) | Medical image display apparatus and medical image display system | |
| US20240127570A1 (en) | Image analysis apparatus, image analysis method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal |