KR20200110532A - 기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 - Google Patents
기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 Download PDFInfo
- Publication number
- KR20200110532A KR20200110532A KR1020190029056A KR20190029056A KR20200110532A KR 20200110532 A KR20200110532 A KR 20200110532A KR 1020190029056 A KR1020190029056 A KR 1020190029056A KR 20190029056 A KR20190029056 A KR 20190029056A KR 20200110532 A KR20200110532 A KR 20200110532A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- spine
- ribs
- thoracic
- machine learning
- Prior art date
Links
- 210000000115 thoracic cavity Anatomy 0.000 title claims abstract description 72
- 238000010801 machine learning Methods 0.000 title claims abstract description 41
- 238000001514 detection method Methods 0.000 title claims abstract description 10
- 238000000034 method Methods 0.000 claims abstract description 46
- 238000003384 imaging method Methods 0.000 claims description 2
- 238000002595 magnetic resonance imaging Methods 0.000 abstract description 43
- 238000013170 computed tomography imaging Methods 0.000 abstract description 40
- 238000013527 convolutional neural network Methods 0.000 abstract description 6
- 239000002699 waste material Substances 0.000 abstract description 2
- 230000003902 lesion Effects 0.000 description 10
- 210000004705 lumbosacral region Anatomy 0.000 description 8
- 210000000038 chest Anatomy 0.000 description 3
- 210000001015 abdomen Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 208000027790 Rib fracture Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000004197 pelvis Anatomy 0.000 description 1
- 238000012831 peritoneal equilibrium test Methods 0.000 description 1
- 238000012636 positron electron tomography Methods 0.000 description 1
- 238000012877 positron emission topography Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000002603 single-photon emission computed tomography Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000008733 trauma Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/505—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of bone
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Radiology & Medical Imaging (AREA)
- Theoretical Computer Science (AREA)
- High Energy & Nuclear Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Optics & Photonics (AREA)
- General Physics & Mathematics (AREA)
- Orthopedic Medicine & Surgery (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Pulmonology (AREA)
- Mathematical Physics (AREA)
- Evolutionary Computation (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physiology (AREA)
- Psychiatry (AREA)
- Signal Processing (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Abstract
본 발명은 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법에 관한 것으로, 구체적으로는 영상의학 전문의의 불편함과 불필요한 시간 낭비를 줄이기 위해 기계학습을 이용하여 자동으로 경추/흉추/요추를 구별해주고, 갈비뼈 순번을 자동으로 지정하여 병변이 있는 갈비뼈가 몇 번째 갈비뼈인지 바로 알 수 있게 도움을 줄 수 있는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법에 관한 것이다.
본 발명은 CT / MRI 이미지를 수신하는 제1단계와, 제1단계의 CT / MRI 이미지에서 R-CNN 모델을 이용하여 척추 부위 객체 검출(object detection)을 하는 제2단계와, 제2단계에서 획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 ROI(region of interest)를 특정하고 3등급으로 등급화하는 제3단계와, 제3단계에서 척추의 3단계 등급화를 통하여 경추/흉추/요추를 구별하는 제4단계와, 제4단계에서 구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하는 제5단계와, CT/MRI 이미지 내 척추 및 갈비뼈 순번을 표시하는 제6단계를 포함하는 것을 특징으로 하는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 제공한다.
본 발명은 CT / MRI 이미지를 수신하는 제1단계와, 제1단계의 CT / MRI 이미지에서 R-CNN 모델을 이용하여 척추 부위 객체 검출(object detection)을 하는 제2단계와, 제2단계에서 획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 ROI(region of interest)를 특정하고 3등급으로 등급화하는 제3단계와, 제3단계에서 척추의 3단계 등급화를 통하여 경추/흉추/요추를 구별하는 제4단계와, 제4단계에서 구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하는 제5단계와, CT/MRI 이미지 내 척추 및 갈비뼈 순번을 표시하는 제6단계를 포함하는 것을 특징으로 하는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 제공한다.
Description
본 발명은 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법에 관한 것으로, 구체적으로는 영상의학 전문의의 불편함과 불필요한 시간 낭비를 줄이기 위해 기계학습을 이용하여 자동으로 경추/흉추/요추를 구별해주고, 갈비뼈 순번을 자동으로 지정하여 병변이 있는 갈비뼈가 몇 번째 갈비뼈인지 바로 알 수 있게 도움을 줄 수 있는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법에 관한 것이다.
영상의학과 영역에서 CT/MRI와 같은 의료 영상의 판독 시에 흉부 및 복부의 병변을 확인하였을 때는 판독문 작성을 위해 위치 확인이 필요하며, 위치 확인의 기준으로 몇 번째 갈비뼈 수준에 병변이 있는지 기술을 하게 된다.
외상 환자에서 다발성 갈비뼈 골절이 있는 경우에, 그 병변이 어느 갈비뼈인지 알려면 영상 이미지를 맨 위로 올려서 첫 번째 갈비뼈부터 세어 내려와야 하므로 시간이 꽤 걸리게 된다.
흉부 및 복부의 여러 군데에 병변이 있다면 판독문을 작성하기까지 몇 번째 갈비뼈 수준에 병변이 있는지 각각의 병변에 대해서 외우고 있어야 하며, 이러한 과정에서 순번이 헷갈릴 수 있어 정확한 확인을 위해 다시 처음부터 갈비뼈 순번을 세는 과정을 여러 번 반복하게 되어 불필요한 시간이 소요되고, 영상의학 전문의가 불편함을 느낄 수 있는 문제점이 있다.
본 발명은 전술한 바와 같은 종래의 문제점들을 해결하기 위한 것으로서, 영상의학 전문의의 불편함과 불필요한 시간 낭비를 줄이기 위해 CT/MRI 영상과 같은 영상의학 이미지로부터 기계적인 학습 과정을 이용하여 자동으로 척추를 구성하는 경추/흉추/요추를 구별해주고, 갈비뼈 순번을 자동으로 지정하여 병변이 있는 갈비뼈가 몇 번째 갈비뼈인지 바로 알 수 있게 도움을 줄 수 있는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 제공하는데 그 목적이 있다.
상기와 같은 목적들을 달성하기 위하여, 본 발명은 CT/MRI 영상과 같은 영상의학 이미지를 수신하는 제1단계와, 제1단계의 CT / MRI 이미지에서 R-CNN 모델을 이용하여 척추 부위 객체 검출(object detection)을 하는 제2단계와, 제2단계에서 획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 ROI(region of interest)를 특정하고 3등급으로 등급화하는 제3단계와, 제3단계에서 척추의 3단계 등급화를 통하여 경추/흉추/요추를 구별하는 제4단계와, 제4단계에서 구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하는 제5단계와, CT/MRI 이미지 내 척추 및 갈비뼈 순번을 표시하는 제6단계를 포함하는 것을 특징으로 하는 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 제공한다.
이때, 상기 제3단계에서 척추 이미지의 등급화는, 흉추지만 갈비뼈의 시작이 없음[0], 흉추이면서 갈비뼈의 시작이 있음[1] 및 흉추가 아님[2]을 포함하는 등급으로 이루어지는 것을 특징으로 한다.
한편, 척추 이미지의 등급화를 통한 갈비뼈의 순번을 수신된 영상의학 이미지 상에 색인으로 삽입하여 데이터베이스가 가능할 수 있다.
한편, 확인된 갈비뼈의 순번을 영상을 이용하여 표기하는 것이 가능할 수 있다.
전술한 과제의 해결수단에 의하면 본 발명은 다음과 같은 효과를 가진다.
본 발명은 CT/MRI와 같은 의료 영상의 이미지 상에서 특정 개체만을 획득 (object detection)하고, 획득된 개체 이미지의 특징을 기계적으로 학습시켜 개체를 구별해 낼 수 있는 R-CNN(Region proposals + Convolution Neural Nerwork [CNN])을 포함하는 이미지 분류 기계학습 알고리즘을 CT, MRI 단면 이미지에 적용하여 각각의 척추 이미지를 획득하고, 획득된 척추 이미지에서 경추/흉추/요추를 구별하고 구별된 흉추의 순번을 지정함으로써, 영상의학 전문의의 CT/MRI 영상 판독 시에 기계적인 학습을 통해 자동으로 제시되는 경추/흉추/요추 구별 및 갈비뼈 순번을 참고할 수 있어 병변의 위치 파악과 주변 조직과의 관계를 이해하는데 도움이 되며, 영상 판독 시간의 단축을 통한 의사, 환자의 편의 증대를 기대할 수 있는 효과가 있다.
도 1은 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 각 단계별로 나타낸 순서도이다.
도 2는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제2단계로서, R-CNN 모델을 이용하여 CT/MRI 단면 이미지에서 척추 부분 영상을 획득하는 상태를 나타낸 도면이다.
도 3은 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제3단계 및 제4단계로서, 이미지 분류 기계학습 알고리즘을 통한 경추/흉추/요추를 구별하는 과정을 개략적으로 나타낸 도면이다.
도 4는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제5단계로서, 갈비뼈 순번을 지정하는 과정을 나타낸 도면이다.
도 2는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제2단계로서, R-CNN 모델을 이용하여 CT/MRI 단면 이미지에서 척추 부분 영상을 획득하는 상태를 나타낸 도면이다.
도 3은 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제3단계 및 제4단계로서, 이미지 분류 기계학습 알고리즘을 통한 경추/흉추/요추를 구별하는 과정을 개략적으로 나타낸 도면이다.
도 4는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제5단계로서, 갈비뼈 순번을 지정하는 과정을 나타낸 도면이다.
이하, 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 바람직한 실시예를 첨부한 도면들에 의거하여 상세히 설명한다. 참고로, 본 명세서 및 청구범위에 사용된 용어와 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석해야만 한다.
또한, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
도 1은 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 각 단계별로 나타낸 순서도이다.
본 발명은 전산화 단층촬영(Computed Tomograph, CT)과 자기 공명 영상(Magnetic Resonance Imaging,MRI)을 포함한 영상의학 이미지를 이용한 흉추 탐지 및 갈비뼈 순번 지정 방법을 제안하는 것이다.
본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법은, 도 1에 도시된 바와 같이 CT / MRI 이미지를 수신하는 제1단계(S1)와, 제1단계(S1)의 CT / MRI 이미지에서 R-CNN 모델을 이용하여 척추 부위 객체 검출(object detection)을 하는 제2단계(S2)와, 제2단계(S2)에서 획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 ROI(region of interest)를 특정하고 3등급으로 등급화하는 제3단계(S3)와, 제3단계(S3)에서 척추의 등급화를 통하여 경추/흉추/요추를 구별하는 제4단계(S4)와, 제4단계(S4)에서 구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하는 제5단계(S5)와, CT/MRI 이미지 내 척추 및 갈비뼈 순번을 표시하는 제6단계(S6)를 포함하여 이루어진다.
흉추의 최상위 이미지는 경추/흉추/요추로 이루어지는 척추의 구조 상에서 경추와 직접적으로 연결되는 제1 순번의 갈비뼈를 지칭하는 것일 수 있다.
한편, R-CNN(region proposals + convolution neural network)이란, 객체 검출(object detection)을 수행하는 네트워크 구조를 말한다.
종래의 객체 검출 알고리즘들은 슬라이딩 윈도우(Sliding Window) 방식 즉, 일정한 크기를 가지는 윈도우를 가지고 이미지의 모든 영역을 탐색하면서 물체를 검출해내는 방식이었다. 슬라이딩 윈도우 방식은 탐색해야 하는 영역의 수가 너무 많기 때문에 분류기(classifier)가 충분히 빠르지 않다면 연산시간이 오래 걸리는 비효율적일 수 있다.
상기 슬라이딩 윈도우 방식이 비효율적인바, Region Proposal 알고리즘이 제안된다. Region Proposal은 입력 영상에서 물체가 있을 법한 영역을 빠른 속도로 찾아내는 알고리즘을 말한다.
R-CNN의 기본적인 구조는 다음과 같다.
먼저, 입력 이미지에서 Selective Search라는 Region Proposal 생성 알고리즘을 이용해, 물체가 존재할 것으로 추정되는 Region Proposal들을 추출한다.
각각의 Region Proposal들은 사각형 모양의 Bounding Box 안의 이미지 형태인데, 모든 Region Proposal들에 대해서 크기를 동일하게 만든 후 CNN을 거쳐 분류하는 작업을 시행한다.
도 2는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제2단계로서, R-CNN 모델을 이용하여 CT/MRI 단면 이미지에서 척추 부분 영상을 획득하는 상태를 나타낸 도면이다.
CT/MRI의 단면 이미지에서 R-CNN 모델을 이용하여 척추에 해당하는 영상만을 획득한다.
CT/MRI 단면 이미지에서 척추의 종류 및 갈비뼈의 순번은 병변의 위치 파악과 주변 조직과의 관계를 이해하는 기준으로 사용되고 있다.
CNN 모델을 적용하여 CT/MRI 단면 이미지에서 척추의 종류 및 갈비뼈의 순번을 분류하기 위해서는 전체 CT/MRI 단면 이미지 뿐만 아니라 척추 부근의 이미지를 집중적으로 학습할 필요가 있다.
척추는 목을 지탱하는 경추(목뼈, cervical spine) 7개, 갈비뼈와 연결된 흉추(등뼈, thoracic spine) 12개, 허리를 지탱하는 요추(허리뼈, lumbar spine) 5개, 천추(골반뼈, sacrum) 5개, 그리고 미추(꼬리뼈, coccyx) 4개로 구성되어 있다. 한편, 천추와 미추는 각각 하나로 합쳐져 있기 때문에 경추와 흉추, 그리고 요추의 합인 24개에 하나로 합쳐진 천추와 미추를 포함하여 모두 26개라고 하는 경우도 있다.
R-CNN 등의 방법과 같은 Object Detection을 위한 깊은 컨볼루셔널 뉴럴 네트워크 모델을 CT/MRI 단면 이미지의 척추부위 분할(Segmentation)에 적용하고, 추출된 척추 부위 이미지와 기존 원본 이미지를 함께 학습하여 모델을 앙상블(Ensemble)하여 우수한 분류 성능을 얻는다.
기계적인 학습으로 도 2에 도시된 영상인 [0],[1],[2]를 분류하는 모델을 학습하고, 실제의 CT 이미지가 연속적으로 Serial하게 Input으로 들어오면 영상 [1]을 분류하는 기점으로 흉추의 순번(Numbering)이 가능하다.
도 2 상에서 전체 이미지 외에 부분 이미지를 포함시킨 이유는 CT 이미지에서 흉추/요추/경추에 해당되는 부분을 먼저 감지(Detection)하고, 해당 이미지를 [0],[1],[2] Class로 구분지어 학습하는 것이 더 높은 정확도를 얻을 수 있다.
즉, 전체 이미지의 하단 상에 위치한 부분 이미지를 각각 [0],[1],[2] Class로 구분하여 표시한 상태에서 기계적인 학습을 실시한다. 이후에 임의의 영상 이미지를 확인하는 과정에서 학습된 [0],[1],[2] Class 중 어느 하나인 [1] class에 부합하는 경우에는 갈비뼈의 시작 지점이라는 것을 확인 가능하게 된다.
한편, 상기에서 도출된 갈비뼈 순번을 이용하여 색인화함으로써 검색을 용이하게 할 수 있다.
도 3은 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제3단계 및 제4단계로서, 이미지 분류 기계학습 알고리즘을 통한 경추/흉추/요추를 구별하는 과정을 개략적으로 나타낸 도면이다.
획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 관심 영역(Region of Interest, ROI)를 특정하고 3단계로 등급화 ([0]: 흉추지만 갈비뼈의 시작이 없음, [1]: 흉추면서 갈비뼈의 시작이 있음, [2]: 흉추가 아님) 하여 경추/흉추/요추를 구별한다.
본 발명 상에서 CT / MRI 이미지의 학습은 전체 이미지 또는 부분 이미지를 포함하여 입력(Input)으로 하는 CT / MRI 단면 이미지에 대해 CNN을 포함하여 이미지 분류에 사용될 수 있는 기계학습 알고리즘을 사용한다.
상기의 기준을 바탕으로 일반적인 사람의 흉부 CT 영상은 도 3의 하단과 같은 레이블(label) 구성을 갖게 된다.
구체적으로 경추에서부터 시작되는 척추 부위를 분류하면 다음과 같다.
머리에 인접한 척추 부위는 [2]번 영상이 연속적으로 이루어진다. 한편, 흉추가 시작되는 부위는 [1]번 영상을 필두로 하여 [0]번 영상이 2번씩 연속적으로 배열되는 특징을 갖는다. 즉, 흉추면서 갈비뼈의 시작이 있다는 것을 [1]번 영상을 통해 확인하는 것과 동시에 연속적인 [0]번 영상을 통해 동일한 갈비뼈 부분이 계속 이어진다는 것을 확인할 수 있다. 한편, 다시 [1]번 영상을 확인하는 경우에는 다른 갈비뼈의 시작이 개시된다는 점을 알 수 있다. 상기의 갈비뼈 부분에 대한 연속적인 확인이 끝난 후에 [2] 번 영상이 나타나는 경우엔 척추 중 갈비뼈에 대한 확인이 종료되고 골반에 연결된 요추 부분이 개시된다는 것을 확인할 수 있다.
즉, 경추에서부터 [2]로 분류되다가 [1]이 처음 분류되는 시점부터 그 다음 [1]이 나타나는 시점까지 흉추 Numbering을 하고, 이후에 [2]가 처음 분류되면 그때부터는 흉추가 등장하지 않으므로 Numbering을 하지 않는 방식으로 한다.
본 발명 상에서 CT / MRI 이미지의 학습에 사용되는 레이블은 흉추의 시작점을 구분하는 Labeling 방법을 포함하여 CT / MRI 이미지 상에서 흉추, 요추, 경추를 구분할 수 있는 방법을 포함한다.
도 4는 본 발명에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법의 제5단계로서, 갈비뼈 순번을 지정하는 과정을 나타낸 도면이다.
관심 영역 특정에 의한 척추의 3단계 등급화를 통하여 경추/흉추/요추를 구별하고, 경추와 직접적으로 연결되는 제1 순번의 갈비뼈에 해당할 수 있는 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정한다.
기계학습을 통하여 첫 번째 갈비뼈를 인지하고, 순차적으로 갈비뼈 순번을 지정하여 병변이 있는 부위가 몇 번째 갈비뼈인지 자동으로 알 수 있다.
PACS에서 인공지능으로 양측 첫번째 갈비뼈를 인지한다. 인공지능이 갈비뼈를 인식하여 세어나가면서 몇번째 갈비뼈인지 번호를 카운팅한다. 상기와 같은 방식을 통해서 병변이 있는 부위가 몇번째 갈비뼈인지 갈비뼈의 상단 부위에서부터 굳이 카운팅하는 불편함을 감수하지 않은 상태에서 쉽게 카운팅할 수 있게 된다. 이를 통해, 예시적으로 T-spine이 몇번째 spine 인지 척추 순번을 확인할 수 있게 된다.
도 4에서 PACS는 Picture Archiving and Communication System의 약어로서, 의학영상정보시스템이다.
이러한 PACS는 의학용 영상정보의 저장, 판독 및 검색 기능 등의 수행을 통합적으로 처리하는 시스템이다.
즉, PACS는 X선, CT, MRI, PET, SPECT 등에 의해 촬영된 모든 방사선 검사 결과를 디지털 이미지로 변환, 촬영과 동시에 대용량 기억장치에 저장시켜 영상의학과 전문가가 모니터를 통해 판독할 수 있도록 해주는 시스템이다.
PACS는 DICOM(의료용 디지털 영상 및 통신 표준, Digital Imaging and Communications in Medicine)에 따라 이미지 데이터를 저장, 관리하고 있으며 의료영상획득기기들, 진단방사선과 각 임상의사들을 하나로 연결하고 있다.
PACS는 관계형 데이터베이스를 이용하여 의료영상을 저장하거나 요청에 따라 검색하여 전송해주는 일을 한다.
도 1 내지 도 4를 참조하여 상술한 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법은 PACS 시스템과 연동하여 영상의 프로세싱, 특히 기계학습 알고리즘에 따른 영상 프로세싱을 수행할 수 있는 컴퓨팅 장치에 의해 수행될 수 있다.
한편, 본 발명의 다른 실시예에 따르면, 도 1 내지 도 4를 참조하여 상술한 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 실행하기 위한 프로세서에 의해 실행 가능한 명령들이 기록된 컴퓨터 판독 가능한 저장 매체를 제공할 수 있다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면들에 의해 한정되는 것은 아니며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형, 및 변경이 가능함은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.
Claims (7)
- CT / MRI 이미지를 포함하는 영상 의학 이미지에서 척추 부위 객체 검출(object detection)을 통해 획득된 척추 이미지를 이미지 분류 기계학습 알고리즘에 입력하여 등급화함으로써 상기 척추 이미지에서 경추/흉추/요추를 구별하는 단계; 및
구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하여 표시하는 단계;를 포함하는 것을 특징으로 하는,
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- 제 1 항에 있어서,
상기 갈비뼈 순번을 이용하여 색인화함으로써 검색을 용이하게 하는,
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- 제 1 항에 있어서,
상기의 획득된 척추 이미지에서 흉추/요추/경추에 해당되는 부분을 먼저 1차 감지하여 전체 이미지를 추출한 후, 상기 전체 이미지 상에서 기설정된 복수의 부분 이미지 중 어느 하나에 해당하는지를 판변함으로써 갈비뼈 유무를 확인하는,
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- 제 1 항에 있어서,
상기 기설정된 복수의 부분 이미지는 하기의 3단계로 등급화로 설정하는,
([0]: 흉추지만 갈비뼈의 시작이 없음, [1]: 흉추면서 갈비뼈의 시작이 있음, [2]: 흉추가 아님)
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- CT / MRI 이미지를 포함하는 의료 영상을 수신하는 제1단계;
상기 제1단계의 CT / MRI 이미지에서 R-CNN 모델을 이용하여 척추 부위 객체 검출(object detection)을 하는 제2단계;
상기 제2단계에서 획득한 척추 이미지를 연속적으로 이미지 분류 기계학습 알고리즘에 입력하여 척추 이미지의 ROI(region of interest)를 특정하고 3등급으로 등급화하는 제3단계;
상기 제3단계에서 이루어진 척추의 3단계 등급화를 통하여 경추/흉추/요추를 구별하는 제4단계;
상기 제4단계에서 구별된 흉추의 최상위 이미지부터 등급화를 고려하여 갈비뼈 순번을 지정하는 제5단계; 및
상기 CT/MRI 이미지 내 척추 및 갈비뼈 순번을 표시하는 제6단계;를 포함하는 것을 특징으로 하는,
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- 제 5 항에 있어서,
상기 제3단계에서 척추 이미지의 등급화는,
흉추지만 갈비뼈의 시작이 없음[0], 흉추이면서 갈비뼈의 시작이 있음[1] 및 흉추가 아님[2]을 포함하는 등급으로 이루어지는 것을 특징으로 하는,
기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법.
- 제 1 항 내지 제 6 항 중 어느 한 항에 따른 기계학습을 이용한 CT/MRI 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법을 실행하기 위한 프로세서에 의해 실행 가능한 명령들이 기록된 컴퓨터 판독 가능한 저장 매체.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190029056A KR102256210B1 (ko) | 2019-03-14 | 2019-03-14 | 기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190029056A KR102256210B1 (ko) | 2019-03-14 | 2019-03-14 | 기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200110532A true KR20200110532A (ko) | 2020-09-24 |
KR102256210B1 KR102256210B1 (ko) | 2021-05-28 |
Family
ID=72706429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190029056A KR102256210B1 (ko) | 2019-03-14 | 2019-03-14 | 기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102256210B1 (ko) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112381762A (zh) * | 2020-10-19 | 2021-02-19 | 深圳视见医疗科技有限公司 | 一种基于深度学习算法的ct肋骨骨折辅助诊断系统 |
CN114049358A (zh) * | 2021-11-17 | 2022-02-15 | 苏州体素信息科技有限公司 | 肋骨实例分割、计数与定位的方法及系统 |
KR20230008279A (ko) | 2021-07-06 | 2023-01-16 | 주식회사 크레스콤 | 척추염 분석 방법, 장치 및 컴퓨터 프로그램 |
KR20230041578A (ko) * | 2021-09-17 | 2023-03-24 | 주식회사 웨이센 | 흉부 ct 영상을 이용한 늑골 골절과 혈흉 예측 방법 및 시스템 |
KR102523555B1 (ko) * | 2022-05-26 | 2023-04-20 | 가천대학교 산학협력단 | 갈비뼈 분할 및 순서 결정 방법 및 이를 이용한 장치 |
KR20240003866A (ko) | 2022-07-04 | 2024-01-11 | 강태신 | 기계학습 기반 물체 탐지 방법을 이용한 이미지 재구성 및 이를 이용한 이미지 분류 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060062425A1 (en) * | 2004-09-02 | 2006-03-23 | Hong Shen | Interactive atlas extracted from volume data |
JP2007111534A (ja) * | 2005-10-17 | 2007-05-10 | Siemens Medical Solutions Usa Inc | 肋骨転位を強調して観察するためのシステムおよび方法 |
JP2009240617A (ja) * | 2008-03-31 | 2009-10-22 | Fujifilm Corp | 骨番号認識装置およびそのプログラム |
KR101673800B1 (ko) | 2015-08-19 | 2016-11-09 | 인하대학교 산학협력단 | 3d 프린팅을 위한 척추뼈 부분 모델링 장치 및 방법 |
-
2019
- 2019-03-14 KR KR1020190029056A patent/KR102256210B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060062425A1 (en) * | 2004-09-02 | 2006-03-23 | Hong Shen | Interactive atlas extracted from volume data |
JP2007111534A (ja) * | 2005-10-17 | 2007-05-10 | Siemens Medical Solutions Usa Inc | 肋骨転位を強調して観察するためのシステムおよび方法 |
JP2009240617A (ja) * | 2008-03-31 | 2009-10-22 | Fujifilm Corp | 骨番号認識装置およびそのプログラム |
KR101673800B1 (ko) | 2015-08-19 | 2016-11-09 | 인하대학교 산학협력단 | 3d 프린팅을 위한 척추뼈 부분 모델링 장치 및 방법 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112381762A (zh) * | 2020-10-19 | 2021-02-19 | 深圳视见医疗科技有限公司 | 一种基于深度学习算法的ct肋骨骨折辅助诊断系统 |
KR20230008279A (ko) | 2021-07-06 | 2023-01-16 | 주식회사 크레스콤 | 척추염 분석 방법, 장치 및 컴퓨터 프로그램 |
KR20230041578A (ko) * | 2021-09-17 | 2023-03-24 | 주식회사 웨이센 | 흉부 ct 영상을 이용한 늑골 골절과 혈흉 예측 방법 및 시스템 |
CN114049358A (zh) * | 2021-11-17 | 2022-02-15 | 苏州体素信息科技有限公司 | 肋骨实例分割、计数与定位的方法及系统 |
KR102523555B1 (ko) * | 2022-05-26 | 2023-04-20 | 가천대학교 산학협력단 | 갈비뼈 분할 및 순서 결정 방법 및 이를 이용한 장치 |
KR20240003866A (ko) | 2022-07-04 | 2024-01-11 | 강태신 | 기계학습 기반 물체 탐지 방법을 이용한 이미지 재구성 및 이를 이용한 이미지 분류 방법 |
Also Published As
Publication number | Publication date |
---|---|
KR102256210B1 (ko) | 2021-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102256210B1 (ko) | 기계학습을 이용한 ct/mri 영상의 흉추 탐지 및 갈비뼈 순번 지정 방법 | |
JP4799251B2 (ja) | 類似症例検索装置、類似症例検索方法およびそのプログラム | |
CN107004043B (zh) | 优化检测和标记感兴趣解剖结构的系统和方法 | |
US8194960B2 (en) | Method and apparatus for correcting results of region recognition, and recording medium having a program for correcting results of region recognition recorded therein | |
US11275976B2 (en) | Medical image assessment with classification uncertainty | |
US8799013B2 (en) | Mammography information system | |
US20230252626A1 (en) | Method for discriminating suspicious lesion in medical image, method for interpreting medical image, and computing device implementing the methods | |
US20170076451A1 (en) | Diagnostic system and diagnostic method | |
EP3375376B1 (en) | Source of abdominal pain identification in medical imaging | |
US20050111757A1 (en) | Auto-image alignment system and method based on identified anomalies | |
US20070019853A1 (en) | Method for indentifying markers in radiographic images | |
US20080069416A1 (en) | Determining mammographic image view and laterality | |
CN106796621B (zh) | 图像报告注释识别 | |
US20210217166A1 (en) | Automated screening of medical data | |
Sjogren et al. | Image segmentation and machine learning for detection of abdominal free fluid in focused assessment with sonography for trauma examinations: a pilot study | |
JP2023021231A (ja) | 情報処理装置、医用画像表示装置及びプログラム | |
Ghantasala et al. | Identification of Normal and Abnormal Mammographic Images Using Deep Neural Network | |
US20040024292A1 (en) | System and method for assigning a computer aided detection application to a digital image | |
EP3467770B1 (en) | Method for analysing a medical imaging data set, system for analysing a medical imaging data set, computer program product and a computer-readable medium | |
JP2006181025A (ja) | 異常陰影検出方法および装置並びにプログラム | |
Lee et al. | Learning radiologist’s step-by-step skill for cervical spinal injury examination: Line drawing, prevertebral soft tissue thickness measurement, and swelling detection | |
CN114694780A (zh) | 用于数据处理的方法、设备和介质 | |
CN113972000A (zh) | 用于数据处理的方法、设备和介质 | |
CN116741350B (zh) | 一种用于医院x射线影像的档案管理系统 | |
KR102132564B1 (ko) | 진단 장치 및 진단 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |