KR20220069655A - Tooth segmentation system and method - Google Patents
Tooth segmentation system and method Download PDFInfo
- Publication number
- KR20220069655A KR20220069655A KR1020200156994A KR20200156994A KR20220069655A KR 20220069655 A KR20220069655 A KR 20220069655A KR 1020200156994 A KR1020200156994 A KR 1020200156994A KR 20200156994 A KR20200156994 A KR 20200156994A KR 20220069655 A KR20220069655 A KR 20220069655A
- Authority
- KR
- South Korea
- Prior art keywords
- tooth
- mesh data
- individual teeth
- data
- segmentation
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 85
- 230000011218 segmentation Effects 0.000 title claims abstract description 70
- 238000000605 extraction Methods 0.000 claims description 28
- 238000004422 calculation algorithm Methods 0.000 claims description 13
- 239000000284 extract Substances 0.000 claims description 4
- 238000000638 solvent extraction Methods 0.000 claims 1
- 230000001131 transforming effect Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 10
- 210000000214 mouth Anatomy 0.000 description 5
- 238000003325 tomography Methods 0.000 description 3
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 229910052698 phosphorus Inorganic materials 0.000 description 2
- 239000011574 phosphorus Substances 0.000 description 2
- 210000000332 tooth crown Anatomy 0.000 description 2
- 238000009795 derivation Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 210000004373 mandible Anatomy 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5217—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A61B6/14—
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/51—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for dentistry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30036—Dental; Teeth
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Surgery (AREA)
- Veterinary Medicine (AREA)
- High Energy & Nuclear Physics (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physiology (AREA)
- Pulmonology (AREA)
- Quality & Reliability (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Description
본 개시(Disclosure)는 전체적으로 치아 분할 시스템 및 방법에 관한 것으로, 더욱 상세하게는 치과용 CT 영상으로부터 치아를 분할하는 치아 분할 시스템 및 방법에 관한 것이다.The present disclosure (Disclosure) relates to a tooth division system and method as a whole, and more particularly, to a tooth division system and method for dividing a tooth from a dental CT image.
여기서는, 본 개시에 관한 배경기술이 제공되며, 이들이 반드시 공지기술을 의미하는 것은 아니다(This section provides background information related to the present disclosure which is not necessarily prior art).Herein, background information related to the present disclosure is provided, and they do not necessarily mean prior art (This section provides background information related to the present disclosure which is not necessarily prior art).
도 1은 종래기술(대한민국 등록특허 제10-1862378호, 2018.05.23)의 개별 단계 순서도를 나타낸 도면으로, 종래기술은 CT촬영된 구강 이미지상의 치아를 자동으로 개별 인식하는 시스템에 관한 것으로, CT촬영된 구강 이미지를 입력받는 입력부(100)와, 구강 이미지를 이진화(thresholding)시키는 전처리부(200)와, 이진화된 구강 이미지 상에 치아 배열을 따라 연장되는 포물선을 설정하고, 구강 이미지 상의 치아 부위를 미분하여 포물선과 수직되는 포인트를 치아를 구분하는 경계로 판단하여 각 치아를 개별적으로 인식하는 치아 스캔부(300)를 포함하는 시스템을 제안하였다. 구체적으로 종래기술은 CT 촬영된 구강 이미지의 치아를 자동으로 개별 인식하는 시스템에 관한 것으로, CT 이미지를 이진화하여 치아 부분을 추출하고, 치아 영역을 다항식 피팅(polynomial fitting)하여 치아를 따라 연장되는 포물선을 추출하여, 그 포물선에 수직이 되도록 인접 치아를 분할하는 방법을 제안하였다.1 is a view showing a flowchart of individual steps of the prior art (Republic of Korea Patent No. 10-1862378, 2018.05.23), the prior art relates to a system for automatically recognizing teeth on a CT-photographed oral image, CT An input unit 100 for receiving a photographed oral image, a preprocessing unit 200 for binarizing the oral image, and a parabola extending along the tooth arrangement on the binarized oral image, and tooth portion on the oral image A system including a tooth scan unit 300 for recognizing each tooth individually by differentiating and judging a point perpendicular to the parabola as a boundary dividing the teeth is proposed. Specifically, the prior art relates to a system for automatically recognizing teeth in an oral image taken by CT, extracting a tooth part by binarizing the CT image, and polynomial fitting the tooth area to extend the parabola along the tooth. was extracted and a method of segmenting adjacent teeth to be perpendicular to the parabola was proposed.
그러나 종래기술의 경우 CT에서 치아 세그멘테이션을 구강 이미지에서 이진화(thresholding)시키는 전처리부를 포함하고 있으나 치아 크라운 부분은 CT 영상에서 턱뼈보다 큰 값으로 나타나지만 치아 뿌리 부분은 인접한 턱뼈와 같거나 작은 값으로 나타나므로 종래기술에 제시된 방법으로는 치아 뿌리 부분까지 세그멘테이션이 가능하지 않은 문제점이 있다. 또한 종래기술에서는 치아 스캔부(300)가 설정한 포물선은 이진화된 구강 이미지 중 치아 부위를 다항식 피팅(polynomial fitting)하여 형성된다고 개시되어 있으나, 악궁 모양은 인종에 따라 둥근 모양이 아닌 사각형이나 뾰족한 모양의 악궁도 존재하므로 종래기술의 방법은 범용성이 떨어지는 문제점이 있다. 또한 종래기술에 따르는 방법에서는 개별 치아의 수치정보를 제공하지는 않는 문제점이 있다.However, in the case of the prior art, CT includes a preprocessor for thresholding tooth segmentation in the oral image, but the tooth crown portion appears as a larger value than the jawbone in the CT image, but the tooth root portion appears as the same or smaller value than the adjacent jawbone. The method presented in the prior art has a problem in that segmentation is not possible up to the root portion of the tooth. In addition, in the prior art, it is disclosed that the parabola set by the tooth scan unit 300 is formed by polynomial fitting of a tooth part in a binarized oral image, but the shape of the arch is a square or pointed shape, not a round shape depending on race. Since there is also the arch of the prior art, there is a problem that the versatility is poor. In addition, there is a problem in that the method according to the prior art does not provide numerical information of individual teeth.
본 발명은 하나의 양상에서 치아의 크라운뿐만 아니라 치근 영역까지 추출 가능한 치아 분할 시스템 및 방법을 제공하는 것을 목적으로 한다.In one aspect, an object of the present invention is to provide a tooth segmentation system and method capable of extracting not only the crown of the tooth but also the root region.
본 발명은 하나의 양상에서, CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력부; 입력부에 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출부; 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할부; 및 개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력부;를 포함하는, 치아 분할 시스템을 제공할 수 있다.The present invention in one aspect, an input unit for receiving a CT-photographed oral image as first volume data; a tooth region extractor for extracting a tooth region from the first volume data input to the input unit using a semantic segmentation method, and generating first mesh data for the extracted tooth region; an adjacent tooth dividing unit generating second mesh data for individual teeth from the first mesh data to divide the individual teeth; and an output unit for outputting second mesh data for individual teeth.
본 발명의 하나의 양상에 따르는 치아 분할 시스템 및 방법은 치아의 크라운뿐만 아니라 치근 영역까지 추출하여 치아를 분할할 수 있다.A tooth segmentation system and method according to an aspect of the present invention can segment a tooth by extracting not only the crown of the tooth but also the root region.
도 1은 종래 기술의 개별 단계 순서도를 나타낸 도면이다.
도 2는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 구성도를 개략적으로 나타낸 도면이다.
도 3은 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부에서 수행되는 과정을 나타낸 순서도이다.
도 4는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부에서 추출된 치아 영역을 개략적으로 나타낸 도면이다.
도 5는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부에서 생성된 제1 메쉬 데이터에 의해 표현된 치아 영역을 개략적으로 나타낸 도면이다.
도 6은 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 인접 치아 분할부에서 수행되는 과정을 나타낸 순서도이다.
도 7은 본 발명의 하나의 구체예에 따르는 인접 치아 분할부에 의해 제2 메쉬 데이터로써 분리된 개별 치아를 개략적으로 나타내는 도면이다.
도 8은 본 발명의 하나의 구체예에 따르는 인접 치아 분할부에 의해 제2 볼륨 데이터로써 분리된 개별 치아를 개략적으로 나타내는 도면이다.1 is a diagram showing a flowchart of individual steps in the prior art.
2 is a diagram schematically showing the configuration of a tooth division system according to an embodiment of the present invention.
3 is a flowchart illustrating a process performed in the tooth region extraction unit of the tooth division system according to an embodiment of the present invention.
4 is a diagram schematically illustrating a tooth area extracted by a tooth area extraction unit of a tooth division system according to an embodiment of the present invention.
5 is a diagram schematically illustrating a tooth area represented by first mesh data generated by a tooth area extraction unit of a tooth division system according to an embodiment of the present invention.
6 is a flowchart illustrating a process performed in an adjacent tooth division of a tooth division system according to an embodiment of the present invention.
7 is a diagram schematically illustrating individual teeth separated as second mesh data by adjacent tooth divisions according to an embodiment of the present invention.
8 is a diagram schematically illustrating an individual tooth separated as second volume data by an adjacent tooth segment according to an embodiment of the present invention;
본 발명의 하나의 양상에 따른 치아 분할 시스템 및 방법은 컴퓨터 장치에 설치되고 실행되는 응용프로그램 또는 의료 영상 분석 장비에 그 기능이 포함되는 것으로 실시가 가능하다.The tooth segmentation system and method according to an aspect of the present invention can be implemented by including the function in an application program installed and executed in a computer device or medical image analysis equipment.
의미론적 분할(Semantic Segmentation)은 이미지의 각 픽셀을 분류하는 기술로서, 이미지에 특정 사물이 어느 위치에 포함되어 있는지 픽셀 단위로 분할하는 것을 목표로 한다. 의미론적 분할 (Semantic Segmentation)은 특정 사물의 이미지 상 존재 여부를 알고자 하는 검출(detection)이나, 특정 사물이 이미지에서 위치하는 좌표를 알아내고자 하는 로컬라이제이션(Localization) 보다 이미지를 더 세밀하게 분할할 수 있다. 의미론적 분할(Semantic Segmentation) 방법으로는, 마르코프 랜덤필드(Markov Random Fields)와 같은 전통적인 기계학습을 사용하는 방법과 FCN(Fully Convolution network), U-net 등의 뉴럴 네트워크를 사용한 방법 모두 존재하며, Google에서 발표한 Deeplab V3+가 가장 성능이 좋다고 발표된 방법이다. 본 발병에서는 치아영역 추출부의 3차원 CT 데이터에서 치아 영역을 추출하는 단계에서 의미론적 분할(Semantic Segmentation)을 사용한다.Semantic segmentation is a technique for classifying each pixel of an image, and aims to segment the position of a specific object in the image by pixel unit. Semantic segmentation can segment an image more precisely than detection, which seeks to know whether a specific object exists in the image, or localization, which seeks to find out the coordinates of a specific object's location in the image. have. As the method of semantic segmentation, there are both methods using traditional machine learning such as Markov Random Fields and methods using neural networks such as Fully Convolution Network (FCN) and U-net. Deeplab V3+ announced by Google is the announced method with the best performance. In the present disease, semantic segmentation is used in the step of extracting the tooth area from the 3D CT data of the tooth area extraction unit.
3차원 메쉬 프로세싱은 3차원 형상의 표면을 메쉬 형태로 나타내어 각종 연산을 수행하는 기술로서, 3차원 형상을 볼륨으로 표현하는 것보다 데이터 크기와 연산량을 획기적으로 줄일 수 있다. 메쉬 처리 기술은 메쉬 부울대수, 평면 슬라이스, 메쉬 평탄화 등의 연산을 포함하며, 게임이나 CAD 를 비롯한 컴퓨터 그래픽 전반에 응용된다. 본 발명에서는 뉴럴 네트워크로 추출된 메쉬에서 인접 치아를 분할하는데 메쉬 절단 및 평탄화 기술이 적용된다.3D mesh processing is a technology that performs various calculations by representing the surface of a 3D shape in a mesh form, and can dramatically reduce the data size and amount of calculations compared to expressing the 3D shape as a volume. Mesh processing technology includes operations such as mesh boolean algebra, plane slice, and mesh flattening, and is applied to computer graphics including games and CAD. In the present invention, mesh cutting and flattening techniques are applied to segment adjacent teeth in the mesh extracted by the neural network.
도 2는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 구성도를 개략적으로 나타낸 도면이다.2 is a diagram schematically showing the configuration of a tooth division system according to an embodiment of the present invention.
본 발명은 하나의 양상의 하나의 구체예에서, CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력부(1000), 입력부(1000)에 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출부(2000), 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할부(3000), 및 개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력부(4000)를 포함하는, 치아 분할 시스템을 제공할 수 있다.In one embodiment of one aspect, the present invention is an
구체적으로, 도 2를 참조하면, 본 발명의 하나의 양상의 하나의 구체예에 따른 치아 분할 시스템은 CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력부(1000)를 포함할 수 있다.Specifically, referring to FIG. 2 , the tooth segmentation system according to an embodiment of an aspect of the present invention may include an
입력부(1000)는 환자의 치아를 중심으로 CT 촬영된 구강 이미지를 입력받는데, 이러한 구강 이미지는 제1 볼륨 데이터 형태로 입력부(1000)에 입력될 수 있다.The
입력부(1000)는 구강 CT 촬영 이미지 전체를 대상으로 할 수도 있고, 구강 CT 촬영 이미지 중에서 관심 영역(Region of Interest, ROI)을 설정하여 일부만 대상으로 할 수도 있다.The
또한 본 발명의 하나의 양상의 하나의 구체예에 따른 치아 분할 시스템은 치아 영역 추출부(2000)를 포함할 수 있다.Also, the tooth segmentation system according to one embodiment of one aspect of the present invention may include a tooth
치아 영역 추출부(2000)는 입력부(1000)에 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성할 수 있다.The tooth
도 3은 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부(2000)에서 수행되는 과정을 나타낸 순서도이다.3 is a flowchart illustrating a process performed by the tooth
도 3을 참조하여 구체적으로 설명하면, 치아 영역 추출부(2000)는 CT 촬영된 구강 이미지의 제1 볼륨 데이터를 입력으로 하고 치아 영역에 대한 제1 메쉬 데이터를 출력으로 할 수 있다. Referring to FIG. 3 , the
더욱 구체적으로 설명하면, 먼저 치아 영역 추출부(2000)는 CT 촬영된 구강 이미지의 제1 볼륨 데이터를 입력으로 하여 의미론적 분할(Semantic Segmentation) 방법을 사용하여 CT 영상의 모든 단층에서 치아 영역을 추출할 수 있다. 의미론적 분할(Semantic Segmentation) 방법을 사용하여 추출된 결과는 입력한 CT 촬영된 구강 이미지와 크기(즉, 가로, 세로, 높이)가 동일한 영상으로서, 영상의 픽셀이나 복셀을 치아 영역과 치아가 아닌 영역으로 구별할 수 있다.More specifically, first, the
치아 영역 추출부(2000)에서 사용되는 의미론적 분할(Semantic Segmentation)은 예를 들어 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나일 수 있다.The semantic segmentation used in the tooth
도 4는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부(2000)에서 추출된 치아 영역을 개략적으로 나타낸 도면이다. 4 is a view schematically showing a tooth area extracted by the tooth
구체적으로 도 4는 입력부(1000)의 CT 촬영된 구강 이미지 중 두 개의 단층과 이것에 대응하는 치아 영역을 겹쳐서 나타낸 사진으로, 추출된 치아 영역 중 (a) 치아 뿌리 부분과 (b) 치아 크라운 부분을 나타낸다. 붉은 영역이 추출된 치아 영역이다. 도 4에 의하면 치아의 뿌리 부분과 치아의 크라운 부분 모두 치아 영역 추출이 잘 이루어졌음을 확인할 수 있다.Specifically, FIG. 4 is a photograph showing two tomographic layers and a tooth area corresponding to the two tomographic layers in the CT taken oral image of the
한편, 만약 도 4와 같은 출력에서 부정확한 부분이 발견되는 경우, 수동으로 이를 수정할 수 있다. 치아 영역 수정은 제1 볼륨 데이터의 단층에서 이루어지는데, XY YZ XZ 평면과 평행한 단층 이미지가 활용될 수 있다. 각 단층별로 세그멘테이션 맵(Segmentation map)에 불연속성이 있을 수 있으므로, 제1 메쉬 데이터를 생성하기 이전에 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 할 수 있다.Meanwhile, if an inaccurate part is found in the output as shown in FIG. 4 , it can be manually corrected. The tooth region correction is performed on a tomography of the first volume data, and a tomographic image parallel to the XY YZ XZ plane may be utilized. Since there may be discontinuities in the segmentation map for each tomography, the 3D Gaussian filter may be applied to the tooth region extracted from the first volume data before generating the first mesh data to make the surface smooth.
이후 치아 영역 추출부(2000)는 의미론적 분할(Semantic Segmentation) 방법을 사용하여 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성할 수 있다. 제1 메쉬 데이터 생성 알고리즘은 예컨대 마칭 큐브(marching cubes) 알고리즘을 사용할 수 있으며, 필요한 경우 제1 메쉬 데이터를 재정의(refining)할 수도 있다.Thereafter, the
도 5는 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 치아 영역 추출부(2000)에서 생성된 제1 메쉬 데이터에 의해 표현된 치아 영역을 개략적으로 나타낸 도면이다. 도 5에는 하악만 제시되어 있으나 상악과 하악 메쉬 데이터가 모두 생성된다. 이와 같은 제1 메쉬 데이터가 본 발명에 따른 치아 분할 시스템에서 치아 영역 추출부(2000)의 결과이다.5 is a diagram schematically illustrating a tooth area represented by the first mesh data generated by the tooth
또한 본 발명의 하나의 양상의 하나의 구체예에 따른 치아 분할 시스템은 인접 치아 분할부(3000)를 포함할 수 있다.Also, a tooth division system according to one embodiment of an aspect of the present invention may include an
도 6은 본 발명의 하나의 구체예에 따르는 치아 분할 시스템의 인접 치아 분할부(3000)에서 수행되는 과정을 나타낸 순서도이다.6 is a flowchart illustrating a process performed in the adjacent
본 발명의 하나의 구체예에서 인접 치아 분할부(3000)는 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할할 수 있다.In one embodiment of the present invention, the adjacent tooth dividing
도 6을 참조하여 구체적으로 설명하면, 인접 치아 분할부(3000)는 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써, 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성할 수 있다. 이때 측지선이 정확히 그려지지 않았다면 사용자는 측지선 위의 점을 수동으로 이동함으로써 절단 측지선을 수정할 수 있다. 또한 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받는 과정은 사용자가 제1 메쉬 데이터에서 분할하고자 하는 각각의 치아 위에 한 점을 클릭함으로써 이루어질 수 있다.6, the adjacent
도 7은 본 발명의 하나의 구체예에 따르는 인접 치아 분할부(3000)에 의해 제2 메쉬 데이터로써 분리된 개별 치아를 개략적으로 나타내는 도면이다. 색상은 치아의 구분을 위해 지정한 것이다7 is a diagram schematically showing individual teeth separated as second mesh data by the adjacent
한편 인접 치아 분할부(3000)는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할할 수 있다.Meanwhile, the adjacent
도 6을 참조하여 구체적으로 설명하면, 인접 치아 분할부(3000)가 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행될 수 있다.Referring specifically to FIG. 6 , when the adjacent
즉 인접 치아 분할부(3000)는 제2 메쉬 데이터를 제2 메쉬 데이터 내에 포함된 점들로 구성된 3차원 제2 볼륨 데이터로 변환할 수 있다. 치아의 축과 바운딩 박스 도출은 임상적 방법을 근거로 하며, 이때 치아 크기에 관한 정보는 바운딩 박스의 '가로 x 세로 x 높이'로부터 계산할 수 있다.That is, the adjacent
도 8은 본 발명의 하나의 구체예에 따르는 인접 치아 분할부(3000)에 의해 제2 볼륨 데이터로써 분리된 개별 치아를 개략적으로 나타내는 도면이다. 색상은 치아의 구분을 위해 지정한 것이다8 is a diagram schematically illustrating individual teeth separated as second volume data by an adjacent
또한 본 발명의 하나의 양상의 하나의 구체예에 따른 치아 분할 시스템은 출력부(4000)를 포함할 수 있다.Also, the tooth segmentation system according to one embodiment of one aspect of the present invention may include an
출력부(4000)는, 인접 치아 분할부(3000)가 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 경우, 개별 치아에 대한 제2 메쉬 데이터를 출력할 수 있다.The
또한 출력부(4000)는, 인접 치아 분할부(3000)가 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하는 경우, 개별 치아에 대한 제2 볼륨 데이터를 출력할 수 있다.In addition, when the
본 발명은 또 다른 양상의 하나의 구체예에서, CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력단계; 입력단계에서 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출 단계; 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할 단계; 및 개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력 단계;를 포함하는, 치아 분할 방법을 제공할 수 있다.In one embodiment of another aspect, the present invention, an input step of receiving a CT-photographed oral image as first volume data; a tooth region extraction step of extracting a tooth region using a semantic segmentation method from the first volume data input in the input step, and generating first mesh data for the extracted tooth region; an adjacent tooth segmentation step of dividing the individual teeth by generating second mesh data for the individual teeth from the first mesh data; and an output step of outputting second mesh data for individual teeth.
본 발명은 또 다른 양상의 또 다른 구체예에서, 인접 치아 분할 단계는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하고, 출력 단계는 인접 치아 분할 단계에서 변환된 제2 볼륨 데이터를 출력하는 치아 분할 방법을 제공할 수 있다.In another embodiment of another aspect, the step of segmenting adjacent teeth comprises dividing the individual teeth by converting the second mesh data generated for the individual teeth from the first mesh data into second volume data for the individual teeth, and , the output step may provide a tooth segmentation method of outputting the second volume data converted in the adjacent tooth segmentation step.
본 발명은 또 다른 양상의 또 다른 구체예에서, 치아 영역 추출 단계에서 사용되는 의미론적 분할(Semantic Segmentation)은 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나인, 치아 분할 방법을 제공할 수 있다.In another embodiment of another aspect, the semantic segmentation used in the tooth region extraction step is a Markov Random Fields method, a Fully Convolution network (FCN) method, a U-net method , and Deeplab V3+ method, which is any one selected from the method, may provide a tooth segmentation method.
본 발명은 또 다른 양상의 또 다른 구체예에서, 치아 영역 추출 단계는 마칭 큐브(marching cubes) 알고리즘을 사용하여 제1 메쉬 데이터를 생성하는, 치아 분할 방법을 제공할 수 있다.In yet another embodiment of another aspect, the present invention may provide a tooth segmentation method, wherein the tooth region extraction step generates first mesh data using a marching cubes algorithm.
본 발명은 또 다른 양상의 또 다른 구체예에서, 치아 영역 추출 단계는 제1 메쉬 데이터를 생성하기 이전에, 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 하는, 치아 분할 방법을 제공할 수 있다.In another embodiment of the present invention, in another embodiment of another aspect, the step of extracting the tooth area is to smooth the surface by applying a three-dimensional Gaussian filter to the tooth area extracted from the first volume data before generating the first mesh data. , a tooth segmentation method may be provided.
본 발명은 또 다른 양상의 또 다른 구체예에서, 인접 치아 분할 단계에서 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하는 것은, 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써 수행되는, 치아 분할 방법을 제공할 수 있다.In another embodiment of another aspect of the present invention, generating second mesh data for individual teeth from the first mesh data in the step of dividing adjacent teeth includes each individual tooth to be divided in the tooth region of the first mesh data. It is possible to provide a tooth segmentation method, which is performed by receiving an arbitrary point on a tooth, designating this point as a source or a terminal, and applying a graph segmentation algorithm to derive a geodesic line dividing each tooth.
본 발명은 또 다른 양상의 또 다른 구체예에서, 인접 치아 분할 단계에서 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행되는, 치아 분할 방법을 제공할 수 있다.In another embodiment of another aspect of the present invention, in the step of dividing adjacent teeth, converting the second mesh data to the second volume data for the individual teeth is the tooth axis for the individual teeth with respect to the second mesh data, the tooth bounding It is possible to provide a tooth segmentation method, which is performed by deriving numerical information about a box and a size.
이하 본 발명의 다양한 실시예를 설명한다.Hereinafter, various embodiments of the present invention will be described.
(1) CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력부; 입력부에 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출부; 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할부; 및 개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력부;를 포함하는, 치아 분할 시스템.(1) an input unit for receiving a CT image of the oral cavity as first volume data; a tooth region extractor for extracting a tooth region from the first volume data input to the input unit using a semantic segmentation method, and generating first mesh data for the extracted tooth region; an adjacent tooth dividing unit generating second mesh data for individual teeth from the first mesh data and dividing the individual teeth; and an output unit for outputting second mesh data for individual teeth.
(2) 인접 치아 분할부는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하고, 출력부는 인접 치아 분할부에서 변환된 제2 볼륨 데이터를 출력하는, 치아 분할 시스템.(2) the adjacent tooth division unit converts the second mesh data generated for the individual teeth from the first mesh data into the second volume data for the individual teeth to segment the individual teeth, and the output unit converts the second mesh data generated for the individual teeth from the first mesh data into the second volume data for the individual teeth 2 Outputting volume data, tooth segmentation system.
(3) 치아 영역 추출부에서 사용되는 의미론적 분할(Semantic Segmentation)은 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나인, 치아 분할 시스템.(3) The semantic segmentation used in the tooth region extraction unit is any one selected from the Markov Random Fields method, the Fully Convolution network (FCN) method, the U-net method, and the Deeplab V3+ method. Phosphorus, tooth segmentation system.
(4) 치아 영역 추출부는 마칭 큐브(marching cubes) 알고리즘을 사용하여 제1 메쉬 데이터를 생성하는, 치아 분할 시스템.(4) the tooth segmentation system, wherein the tooth region extraction unit generates the first mesh data using a marching cubes algorithm.
(5) 치아 영역 추출부는 제1 메쉬 데이터를 생성하기 이전에, 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 하는, 치아 분할 시스템.(5) The tooth region extraction unit applies a three-dimensional Gaussian filter to the tooth region extracted from the first volume data before generating the first mesh data to smooth the surface.
(6) 인접 치아 분할부가 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하는 것은, 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써 수행되는, 치아 분할 시스템.(6) When the adjacent tooth division unit generates the second mesh data for the individual teeth from the first mesh data, an arbitrary point is input on each individual tooth to be divided in the tooth region of the first mesh data, and the A tooth segmentation system performed by specifying a point as a source or terminal, and applying a graph segmentation algorithm to derive geodesic lines segmenting each tooth.
(7) 인접 치아 분할부가 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행되는, 치아 분할 시스템.(7) The adjacent tooth division unit converts the second mesh data to the second volume data for the individual teeth by deriving numerical information about the tooth axis, the tooth bounding box, and the size of the individual teeth with respect to the second mesh data. Performed, tooth segmentation system.
(8) CT 촬영된 구강 이미지를 제1 볼륨 데이터로 입력받는 입력단계; 입력단계에서 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출 단계; 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할 단계; 및 개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력 단계;를 포함하는, 치아 분할 방법.(8) an input step of receiving a CT image of the oral cavity as first volume data; a tooth region extraction step of extracting a tooth region using a semantic segmentation method from the first volume data input in the input step, and generating first mesh data for the extracted tooth region; an adjacent tooth segmentation step of dividing the individual teeth by generating second mesh data for the individual teeth from the first mesh data; and an output step of outputting second mesh data for individual teeth.
(9) 인접 치아 분할 단계는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하고, 출력 단계는 인접 치아 분할 단계에서 변환된 제2 볼륨 데이터를 출력하는, 치아 분할 방법.(9) The adjacent tooth segmentation step converts the second mesh data generated for the individual teeth from the first mesh data into the second volume data for the individual teeth to segment the individual teeth, and the output step is converted in the adjacent tooth segmentation step A tooth segmentation method of outputting the second volume data.
(10) 치아 영역 추출 단계에서 사용되는 의미론적 분할(Semantic Segmentation)은 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나인, 치아 분할 방법.(10) The semantic segmentation used in the tooth region extraction step is any one selected from the Markov Random Fields method, the Fully Convolution network (FCN) method, the U-net method, and the Deeplab V3+ method. Phosphorus, how to split teeth.
(11) 치아 영역 추출 단계는 마칭 큐브(marching cubes) 알고리즘을 사용하여 제1 메쉬 데이터를 생성하는, 치아 분할 방법.(11) The tooth segmentation method, wherein the tooth region extraction step generates first mesh data using a marching cubes algorithm.
(12) 치아 영역 추출 단계는 제1 메쉬 데이터를 생성하기 이전에, 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 하는, 치아 분할 방법.(12) In the tooth region extraction step, before generating the first mesh data, a three-dimensional Gaussian filter is applied to the tooth region extracted from the first volume data to smooth the surface.
(13) 인접 치아 분할 단계에서 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하는 것은, 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써 수행되는, 치아 분할 방법.(13) In the step of dividing adjacent teeth, generating second mesh data for individual teeth from the first mesh data receives an arbitrary point on each individual tooth to be divided in the tooth area of the first mesh data, A tooth segmentation method performed by designating these points as a source or a terminal, and applying a graph segmentation algorithm to derive geodesic lines segmenting each tooth.
(14) 인접 치아 분할 단계에서 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행되는, 치아 분할 방법.(14) In the step of dividing adjacent teeth, converting the second mesh data to the second volume data for individual teeth derives numerical information about the tooth axis, the tooth bounding box, and the size of the individual teeth with respect to the second mesh data A tooth segmentation method performed by
입력부(1000), 치아 영역 추출부(2000), 인접 치아 분할부(3000), 출력부(4000)
Claims (14)
입력부에 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출부;
제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할부; 및
개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력부;
를 포함하는, 치아 분할 시스템.an input unit receiving a CT-photographed oral image as first volume data;
a tooth region extractor that extracts a tooth region from the first volume data input to the input unit using a semantic segmentation method, and generates first mesh data with respect to the extracted tooth region;
an adjacent tooth dividing unit generating second mesh data for individual teeth from the first mesh data and dividing the individual teeth; and
an output unit for outputting second mesh data for individual teeth;
Including, tooth segmentation system.
인접 치아 분할부는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하고,
출력부는 인접 치아 분할부에서 변환된 제2 볼륨 데이터를 출력하는, 치아 분할 시스템.The method according to claim 1,
The adjacent tooth division unit divides the individual teeth by converting the second mesh data generated for the individual teeth from the first mesh data into the second volume data for the individual teeth,
The output unit outputs the second volume data converted by the adjacent tooth division unit, the tooth division system.
치아 영역 추출부에서 사용되는 의미론적 분할(Semantic Segmentation)은 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나인, 치아 분할 시스템.The method according to claim 1 or 2,
The semantic segmentation used in the tooth region extraction unit is any one selected from the Markov Random Fields method, the Fully Convolution network (FCN) method, the U-net method, and the Deeplab V3+ method. split system.
치아 영역 추출부는 마칭 큐브(marching cubes) 알고리즘을 사용하여 제1 메쉬 데이터를 생성하는, 치아 분할 시스템.The method according to claim 1 or 2,
The tooth segmentation system, wherein the tooth region extractor generates the first mesh data using a marching cubes algorithm.
치아 영역 추출부는 제1 메쉬 데이터를 생성하기 이전에, 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 하는, 치아 분할 시스템.The method according to claim 1 or 2,
The tooth region extractor applies a three-dimensional Gaussian filter to the tooth region extracted from the first volume data before generating the first mesh data to smooth the surface.
인접 치아 분할부가 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하는 것은, 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써 수행되는, 치아 분할 시스템.The method according to claim 1 or 2,
When the adjacent tooth division unit generates the second mesh data for the individual teeth from the first mesh data, an arbitrary point is input on each individual tooth to be divided in the tooth region of the first mesh data, and this point is used as a source or by designating as a terminal, and applying a graph segmentation algorithm to derive geodesic lines segmenting each tooth, a tooth segmentation system.
인접 치아 분할부가 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행되는, 치아 분할 시스템.3. The method according to claim 2,
The adjacent tooth division unit converts the second mesh data to the second volume data for the individual teeth by deriving numerical information about the tooth axis, the tooth bounding box, and the size of the individual teeth with respect to the second mesh data. tooth division system.
입력단계에서 입력된 제1 볼륨 데이터로부터 의미론적 분할(Semantic Segmentation) 방법을 사용하여 치아 영역을 추출하고, 추출된 치아 영역에 대하여 제1 메쉬 데이터를 생성하는 치아 영역 추출 단계;
제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하여 개별 치아를 분할하는 인접 치아 분할 단계; 및
개별 치아에 대한 제2 메쉬 데이터를 출력하는 출력 단계;
를 포함하는, 치아 분할 방법.An input step of receiving a CT-photographed oral image as first volume data;
a tooth region extraction step of extracting a tooth region using a semantic segmentation method from the first volume data input in the input step, and generating first mesh data for the extracted tooth region;
an adjacent tooth segmentation step of dividing the individual teeth by generating second mesh data for the individual teeth from the first mesh data; and
an output step of outputting second mesh data for individual teeth;
Including, tooth segmentation method.
인접 치아 분할 단계는 제1 메쉬 데이터로부터 개별 치아에 대하여 생성된 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하여 개별 치아를 분할하고,
출력 단계는 인접 치아 분할 단계에서 변환된 제2 볼륨 데이터를 출력하는, 치아 분할 방법.9. The method of claim 8,
The adjacent tooth segmentation step divides the individual teeth by converting the second mesh data generated for the individual teeth from the first mesh data into the second volume data for the individual teeth,
The output step outputs the second volume data converted in the adjacent tooth partitioning step.
치아 영역 추출 단계에서 사용되는 의미론적 분할(Semantic Segmentation)은 마르코프 랜덤필드(Markov Random Fields) 방법, FCN(Fully Convolution network) 방법, U-net 방법, 및 Deeplab V3+ 방법 중에서 선택되는 어느 하나인, 치아 분할 방법.10. The method according to claim 8 or 9,
The semantic segmentation used in the tooth region extraction step is any one selected from the Markov Random Fields method, the Fully Convolution network (FCN) method, the U-net method, and the Deeplab V3+ method. split method.
치아 영역 추출 단계는 마칭 큐브(marching cubes) 알고리즘을 사용하여 제1 메쉬 데이터를 생성하는, 치아 분할 방법.10. The method according to claim 8 or 9,
wherein the tooth region extraction step generates first mesh data using a marching cubes algorithm.
치아 영역 추출 단계는 제1 메쉬 데이터를 생성하기 이전에, 제1 볼륨 데이터로부터 추출된 치아 영역에 대하여 3차원 가우시안 필터를 적용하여 표면을 매끄럽게 하는, 치아 분할 방법.10. The method according to claim 8 or 9,
The tooth region extraction step applies a three-dimensional Gaussian filter to the tooth region extracted from the first volume data before generating the first mesh data to smooth the surface.
인접 치아 분할 단계에서 제1 메쉬 데이터로부터 개별 치아에 대한 제2 메쉬 데이터를 생성하는 것은, 제1 메쉬 데이터의 치아 영역에서 분할하고자 하는 각각의 개별 치아 위에 임의의 한 점을 입력받고, 이러한 점을 소스 또는 터미널로 지정하고, 그래프 분할 알고리즘을 적용하여 각 치아를 분할하는 측지선을 도출함으로써 수행되는, 치아 분할 방법.10. The method according to claim 8 or 9,
In the step of dividing adjacent teeth, generating second mesh data for individual teeth from the first mesh data receives an arbitrary point on each individual tooth to be divided in the tooth area of the first mesh data, and A tooth segmentation method performed by specifying as a source or terminal, and applying a graph segmentation algorithm to derive geodesic lines segmenting each tooth.
인접 치아 분할 단계에서 제2 메쉬 데이터를 개별 치아에 대한 제2 볼륨 데이터로 변환하는 것은 제2 메쉬 데이터에 대하여 개별 치아에 대한 치아축, 치아 바운딩박스, 및 크기에 대한 수치정보를 도출함으로써 수행되는, 치아 분할 방법.10. The method of claim 9,
Transforming the second mesh data into the second volume data for individual teeth in the adjacent tooth segmentation step is performed by deriving numerical information about the tooth axis, the tooth bounding box, and the size of the individual teeth with respect to the second mesh data. , how to split teeth.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200156994A KR20220069655A (en) | 2020-11-20 | 2020-11-20 | Tooth segmentation system and method |
PCT/KR2021/012952 WO2022108082A1 (en) | 2020-11-20 | 2021-09-23 | System and method for segmenting teeth in ct image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200156994A KR20220069655A (en) | 2020-11-20 | 2020-11-20 | Tooth segmentation system and method |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20220069655A true KR20220069655A (en) | 2022-05-27 |
Family
ID=81709104
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200156994A KR20220069655A (en) | 2020-11-20 | 2020-11-20 | Tooth segmentation system and method |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR20220069655A (en) |
WO (1) | WO2022108082A1 (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102496189B1 (en) * | 2022-08-23 | 2023-02-08 | 주식회사 큐브세븐틴 | Shell type temporary crown automatic manufacturing apparatus, method, and program |
WO2024071571A1 (en) * | 2022-09-27 | 2024-04-04 | 오스템임플란트 주식회사 | Method for segmenting three-dimensional oral model and system therefor |
KR20240086447A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for segmenting upper and lower jaws in computed tomography images using deep learning |
KR20240086448A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for segmenting teeth in computed tomography images using deep learning |
KR20240086449A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for self-supervised learning of a tooth segmentation model in computed tomography images and method therefor |
KR20240105114A (en) | 2022-12-28 | 2024-07-05 | 주식회사 덴티움 | Apparatus for arranging dental crown for missing teeth in three-dimensionally scanned teeth data and method therefor |
KR20240105113A (en) | 2022-12-28 | 2024-07-05 | 주식회사 덴티움 | Apparatus for segmenting teeth from three-dimensionally scanned teeth data using deep learning and method therefor |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101862378B1 (en) | 2016-05-13 | 2018-05-29 | 연세대학교 산학협력단 | Fully automatic dental segmentation system and method for computerized tomography |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019158442A1 (en) * | 2018-02-16 | 2019-08-22 | 3Shape A/S | Intraoral scanning with surface differentiation |
US11645746B2 (en) * | 2018-11-28 | 2023-05-09 | Orca Dental AI Ltd. | Dental image segmentation and registration with machine learning |
EP3671531A1 (en) * | 2018-12-17 | 2020-06-24 | Promaton Holding B.V. | Semantic segmentation of non-euclidean 3d data sets using deep learning |
-
2020
- 2020-11-20 KR KR1020200156994A patent/KR20220069655A/en not_active Application Discontinuation
-
2021
- 2021-09-23 WO PCT/KR2021/012952 patent/WO2022108082A1/en active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101862378B1 (en) | 2016-05-13 | 2018-05-29 | 연세대학교 산학협력단 | Fully automatic dental segmentation system and method for computerized tomography |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102496189B1 (en) * | 2022-08-23 | 2023-02-08 | 주식회사 큐브세븐틴 | Shell type temporary crown automatic manufacturing apparatus, method, and program |
WO2024071571A1 (en) * | 2022-09-27 | 2024-04-04 | 오스템임플란트 주식회사 | Method for segmenting three-dimensional oral model and system therefor |
KR20240086447A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for segmenting upper and lower jaws in computed tomography images using deep learning |
KR20240086448A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for segmenting teeth in computed tomography images using deep learning |
KR20240086449A (en) | 2022-12-09 | 2024-06-18 | 주식회사 덴티움 | Apparatus and method for self-supervised learning of a tooth segmentation model in computed tomography images and method therefor |
KR20240105114A (en) | 2022-12-28 | 2024-07-05 | 주식회사 덴티움 | Apparatus for arranging dental crown for missing teeth in three-dimensionally scanned teeth data and method therefor |
KR20240105113A (en) | 2022-12-28 | 2024-07-05 | 주식회사 덴티움 | Apparatus for segmenting teeth from three-dimensionally scanned teeth data using deep learning and method therefor |
Also Published As
Publication number | Publication date |
---|---|
WO2022108082A1 (en) | 2022-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20220069655A (en) | Tooth segmentation system and method | |
US11645746B2 (en) | Dental image segmentation and registration with machine learning | |
CN104217418B (en) | The segmentation of calcification blood vessel | |
US8483462B2 (en) | Object centric data reformation with application to rib visualization | |
CN110796670B (en) | Dissection method and device for dissecting interbed artery | |
KR101099732B1 (en) | The tooth segmentation system for 3d modeling of individual tooth from ct or mri image | |
Cui et al. | Hierarchical morphology-guided tooth instance segmentation from CBCT images | |
CN114757960B (en) | Tooth segmentation and reconstruction method based on CBCT image and storage medium | |
JP5301197B2 (en) | Sectional image display apparatus and method, and program | |
CN107895364B (en) | A kind of three-dimensional reconstruction system for the preoperative planning of virtual operation | |
JP6385318B2 (en) | Transform 3D objects to segment objects in 3D medical images | |
CN112515787B (en) | Three-dimensional dental data analysis method | |
CN112785609B (en) | CBCT tooth segmentation method based on deep learning | |
CN113344950A (en) | CBCT image tooth segmentation method combining deep learning with point cloud semantics | |
US20220358740A1 (en) | System and Method for Alignment of Volumetric and Surface Scan Images | |
Moris et al. | Automated tracking of the mandibular canal in CBCT images using matching and multiple hypotheses methods | |
Gao et al. | Automatic tooth region separation for dental CT images | |
CN106373138A (en) | Image processing method and device for extracting dental arch curve | |
KR102255592B1 (en) | method of processing dental CT images for improving precision of margin line extracted therefrom | |
KR20230164633A (en) | Apparatus and method for displaying three dimensional tooth image data and method for training same | |
KR101727670B1 (en) | Device and method for medical image segmentation based on user interactive input | |
CN116188513A (en) | CBCT (Cone-based computed tomography) tooth example segmentation method combining global attention and scale perception | |
US20220122261A1 (en) | Probabilistic Segmentation of Volumetric Images | |
KR102558791B1 (en) | Method and apparatus for separating areas representing a condyle and a fossa of a joint from each other in a 3-dimensional X-ray image | |
KR20240068667A (en) | Automated dental care in your restorative workflow |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |