KR20200120055A - Apparatus For Separating Gum Area From Oral Scan Image - Google Patents

Apparatus For Separating Gum Area From Oral Scan Image Download PDF

Info

Publication number
KR20200120055A
KR20200120055A KR1020190042437A KR20190042437A KR20200120055A KR 20200120055 A KR20200120055 A KR 20200120055A KR 1020190042437 A KR1020190042437 A KR 1020190042437A KR 20190042437 A KR20190042437 A KR 20190042437A KR 20200120055 A KR20200120055 A KR 20200120055A
Authority
KR
South Korea
Prior art keywords
scan image
oral scan
curvature
gum
boundary
Prior art date
Application number
KR1020190042437A
Other languages
Korean (ko)
Other versions
KR102224064B1 (en
Inventor
김진철
김진백
Original Assignee
주식회사 디오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디오 filed Critical 주식회사 디오
Priority to KR1020190042437A priority Critical patent/KR102224064B1/en
Priority to EP20786737.5A priority patent/EP3954293A4/en
Priority to CN202080027597.2A priority patent/CN113692250B/en
Priority to US17/602,617 priority patent/US12062193B2/en
Priority to PCT/KR2020/002755 priority patent/WO2020209495A1/en
Priority to TW109112222A priority patent/TWI782269B/en
Publication of KR20200120055A publication Critical patent/KR20200120055A/en
Application granted granted Critical
Publication of KR102224064B1 publication Critical patent/KR102224064B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A61B6/14—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/51—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for dentistry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30036—Dental; Teeth

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Pulmonology (AREA)
  • General Physics & Mathematics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)

Abstract

The present invention provides a device for separating a gum area from an oral scan image. The device comprises: a preprocessing unit lowering the mesh resolution of an oral scan image to the reference resolution; a start line detection unit detecting a start line corresponding to the bottom of the gum area in the preprocessed oral scan image; a boundary line detection unit detecting a boundary line between a tooth area and a gum area in the preprocessed oral scan image; and an area separation unit separating the gum area from the oral scan image using the start line and the boundary line.

Description

오랄 스캔 영상에서 잇몸 영역을 분리하는 장치{Apparatus For Separating Gum Area From Oral Scan Image}Apparatus For Separating Gum Area From Oral Scan Image}

본 발명은 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치에 관한 것으로서, 더욱 상세하게는 오랄 스캔 영상과 치아 CT 영상 정합 시 방해 요소인 잇몸 영역을 영상 정합 전에 오랄 스캔 영상에서 분리 및 제거하는 장치에 관한 것이다.The present invention relates to an apparatus for separating a gum region from an oral scan image, and more particularly, to an apparatus for separating and removing a gum region, which is an obstructive factor when matching an oral scan image and a dental CT image, from an oral scan image before image registration. will be.

컴퓨터 비전 분야에서 동일 대상을 다른 시간, 측정 방식 또는 관점 등에서 촬영할 경우, 서로 다른 좌표계를 가지는 영상이 획득되는데, 영상 정합은 이러한 서로 다른 영상을 하나의 좌표계에 나타내기 위한 처리를 지칭한다. In the field of computer vision, when the same object is photographed at different times, measurement methods, or viewpoints, images having different coordinate systems are obtained, and image registration refers to processing for displaying these different images in one coordinate system.

특히, 치과 분야에서는 임플란트 등의 시술 전에 치아 CT 영상과 오랄 스캔 영상 간의 영상 정합을 수행하게 된다. 이때, 정합된 영상은 골조직과 신경관 위치 등을 파악할 수 있게 하여, 최적의 임플란트 시술 위치를 결정하는데 중요한 자료로 사용될 수 있다.In particular, in the dental field, image registration between a dental CT image and an oral scan image is performed before an implant or the like is performed. At this time, the matched image can be used as important data to determine the optimal implant location by allowing the location of bone tissue and neural tube to be identified.

하지만, 오랄 스캔 영상은 CT 영상과 영상 정합 시에 불필요한 영역을 포함하고 있다. 특히, 잇몸 영역 등과 같은 불필요 영역은 영상 정합 시 방해 요소가 되어, 영상 정합의 시간, 정확성 및 효율성 등을 저하시킬 수 있는 문제점이 있다.However, the oral scan image includes an unnecessary area when the CT image and the image are matched. In particular, unnecessary areas such as the gum area become a disturbing factor during image registration, and thus, there is a problem in that the time, accuracy, and efficiency of image registration may be deteriorated.

상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 본 발명은 오랄 스캔 영상과 치아 CT 영상의 영상 정합 시 방해 요소인 잇몸 영역을 영상 정합 전에 오랄 스캔 영상에서 분리 및 제거하는 장치를 제공하는데 그 목적이 있다.In order to solve the problems of the prior art as described above, the present invention provides an apparatus for separating and removing a gum region, which is an obstructive factor during image registration between an oral scan image and a tooth CT image, from an oral scan image before image registration. There is this.

다만, 본 발명이 해결하고자 하는 과제는 이상에서 언급한 과제에 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.However, the problem to be solved by the present invention is not limited to the problems mentioned above, and other problems that are not mentioned will be clearly understood by those skilled in the art from the following description.

상기와 같은 과제를 해결하기 위해, 본 발명은, 오랄 스캔 영상의 메쉬 해상도를 기준 해상도로 낮추는 전처리부와, 전처리된 오랄 스캔 영상에서 잇몸 영역의 바닥에 해당하는 시작 라인을 검출하는 시작 라인 검출부와, 전처리된 오랄 스캔 영상에서 치아 영역 및 잇몸 영역의 경계 라인을 검출하는 경계 라인 검출부와, 시작 라인 및 경계 라인을 이용해 오랄 스캔 영상에서 잇몸 영역을 분리하는 영역 분리부를 포함하는 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치를 제공한다.In order to solve the above problems, the present invention includes a preprocessing unit for lowering the mesh resolution of an oral scan image to a reference resolution, a start line detection unit for detecting a start line corresponding to the bottom of the gum region in the preprocessed oral scan image, , Gum region in an oral scan image including a boundary line detection unit for detecting the boundary line of the tooth region and the gum region in the preprocessed oral scan image, and a region separation unit for separating the gingival region from the oral scan image using the start line and the boundary line. Provides a device for separating.

여기서, 시작 라인 검출부는, 오랄 스캔 영상의 각 메쉬에 대해 인접한 버텍스 수를 산출하고, 산출된 버텍스 수가 기준 수 이하인 버텍스들을 선택하고, 선택된 버텍스들을 연결하여 상기 시작 라인을 검출한다.Here, the start line detector calculates the number of vertices adjacent to each mesh of the oral scan image, selects vertices with the calculated number of vertices less than a reference number, and connects the selected vertices to detect the start line.

또한, 시작 라인 검출부는, 오랄 스캔 영상의 각 메쉬의 곡률을 산출하고, 산출된 곡률이 기준 곡률 이하인 메쉬들을 선택하고, 선택된 메쉬들에 포함된 버텍스들을 연결하여 시작 라인을 검출한다.In addition, the start line detector calculates a curvature of each mesh of the oral scan image, selects meshes having a calculated curvature equal to or less than a reference curvature, and detects a start line by connecting vertices included in the selected meshes.

또한, 경계 라인 검출부는, 오랄 스캔 영상의 인접 메쉬들 간 곡률을 산출하고, 산출된 곡률이 기준 곡률 이상인 메쉬들을 선택하고, 선택된 메쉬들이 공유하는 버텍스를 경계 포인트로 결정한다.In addition, the boundary line detector calculates a curvature between adjacent meshes of an oral scan image, selects meshes having a calculated curvature equal to or greater than a reference curvature, and determines vertices shared by the selected meshes as boundary points.

또한, 경계 라인 검출부는, 오랄 스캔 영상의 인접 메쉬들 간 최대 곡률 및 최소 곡률을 산출하고, 산출된 최대 곡률 및 최소 곡률을 이용해 가우시안 곡률 및 평균 곡률 중 적어도 하나를 산출한다.In addition, the boundary line detector calculates a maximum curvature and a minimum curvature between adjacent meshes of an oral scan image, and calculates at least one of a Gaussian curvature and an average curvature using the calculated maximum and minimum curvatures.

또한, 경계 라인 검출부는, 산출된 가우시안 곡률 및 평균 곡률 중 적어도 어느 하나가 기준 곡률 이상인 메쉬들을 선택하고, 선택된 메쉬들이 공유하는 버텍스를 경계 포인트로 결정한다.In addition, the boundary line detector selects meshes having at least one of the calculated Gaussian curvature and the average curvature equal to or greater than the reference curvature, and determines a vertex shared by the selected meshes as a boundary point.

또한, 경계 라인 검출부는, 경계 포인트들을 순차적으로 확장 및 축소하여 인접한 경계 포인트들을 연결한다.In addition, the boundary line detector connects adjacent boundary points by sequentially expanding and reducing boundary points.

또한, 경계 라인 검출부는, 연결된 경계 포인트들 마다 동일한 라벨로 각각 라벨링한다.In addition, the boundary line detection unit labels each connected boundary point with the same label.

또한, 경계 라인 검출부는, 라벨링된 각 라벨에 대해 적어도 1회 확장하고, 인접한 라벨들을 통합한다.In addition, the boundary line detection unit extends at least once for each labeled label and integrates adjacent labels.

또한, 본 발명의 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치는, 시작 라인에서 경계 라인까지 연결된 버텍스들을 통합하여 분리 대상 영역으로 설정하는 영역 설정부를 더 포함할 수 있다.In addition, the apparatus for separating the gum region from the oral scan image of the present invention may further include a region setting unit configured to set as a separation target region by integrating vertices connected from the start line to the boundary line.

또한, 본 발명의 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치는, 분리 대상 영역의 최외각 라인을 오랄 스캔 영상에서 잇몸 영역을 분리하기 위한 분리 기준 라인으로 결정하는 기준 라인 결정부를 더 포함할 수 있다.In addition, the apparatus for separating the gum region from the oral scan image of the present invention may further include a reference line determination unit that determines the outermost line of the region to be separated as a separation reference line for separating the gum region from the oral scan image. .

또한, 영역 분리부는, 분리 기준 라인을 이용해 오랄 스캔 영상에서 잇몸 영역을 분리한다.In addition, the region separation unit separates the gum region from the oral scan image using the separation reference line.

상기와 같이 구성되는 본 발명은 오랄 스캔 영상과 치아 CT 영상의 영상 정합 시 방해 요소인 잇몸 영역을 영상 정합 전에 간편하게 분리 및 제거할 수 있어, 이후 영상 정합의 시간, 정확성 및 효율성 등을 향상시킬 수 있는 이점이 있다.The present invention configured as described above can easily separate and remove the gum region, which is an obstruction factor during image registration between the oral scan image and the dental CT image, before image registration, thereby improving the time, accuracy, and efficiency of image registration afterwards. There is an advantage.

도 1은 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 전자 장치의 주요 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 전자 장치의 제어부의 구체적인 블록도이다.
도 3은 본 발명의 실시예에 따른 오랄 스캔 영상의 전처리 전 및 후를 도시한 도면이다.
도 4는 본 발명의 실시예에 따른 오랄 스캔 영상에서 검출된 시작 라인을 도시한 도면이다.
도 5는 본 발명의 실시예에 따른 오랄 스캔 영상의 인접 메쉬들 간 곡률을 산출하는 방법을 설명하기 위한 도면이다.
도 6은 경계 포인트들을 오랄 스캔 영상에 도시한 도면이다.
도 7은 본 발명의 실시예에 따른 오랄 스캔 영상에서 경계 포인트를 연결하는 방법을 설명하기 위한 도면이다.
도 8은 연결된 경계 포인트들 마다 동일한 라벨로 라벨링된 오랄 스캔 영상을 도시한 도면이다.
도 9는 각 라벨에 대해 영역 확장된 오랄 스캔 영상을 도시한 도면이다.
도 10은 영역 확장된 라벨이 통합된 오랄 스캔 영상을 도시한 도면이다.
도 11은 본 발명의 실시에에 따른 오랄 스캔 영상에서 분리 대상 영역을 설정하는 방법을 설명하기 위한 도면이다.
도 12는 분리 기준 라인이 표시된 오랄 스캔 영상을 도시한 도면이다.
도 13은 분리 기준 라인을 기초로 치아 및 잇몸 영역이 분리된 오랄 스캔 영상을 도시한 도면이다.1 is a block diagram showing a main configuration of an electronic device for separating a gum region from an oral scan image according to an embodiment of the present invention.
2 is a detailed block diagram of a controller of an electronic device for separating a gum region from an oral scan image according to an embodiment of the present invention.
3 is a diagram illustrating before and after pre-processing of an oral scan image according to an embodiment of the present invention.
4 is a diagram illustrating a start line detected in an oral scan image according to an embodiment of the present invention.
5 is a diagram illustrating a method of calculating a curvature between adjacent meshes of an oral scan image according to an exemplary embodiment of the present invention.
6 is a diagram illustrating boundary points on an oral scan image.
7 is a diagram illustrating a method of connecting boundary points in an oral scan image according to an embodiment of the present invention.
8 is a diagram illustrating an oral scan image labeled with the same label for each connected boundary point.
9 is a diagram illustrating an oral scan image in which the region is expanded for each label.
10 is a diagram illustrating an oral scan image in which a region-extended label is integrated.
11 is a diagram for describing a method of setting a separation target region in an oral scan image according to an exemplary embodiment of the present invention.
12 is a diagram illustrating an oral scan image in which a separation reference line is displayed.
13 is a diagram illustrating an oral scan image in which teeth and gum regions are separated based on a separation reference line.

본 발명의 상기 목적과 수단 및 그에 따른 효과는 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다.The above objects and means of the present invention, and effects thereof, will become more apparent through the following detailed description in connection with the accompanying drawings, and accordingly, a person having ordinary knowledge in the technical field to which the present invention belongs can facilitate the technical idea of the present invention. It will be possible to do it. In addition, in describing the present invention, when it is determined that a detailed description of known technologies related to the present invention may unnecessarily obscure the subject matter of the present invention, a detailed description thereof will be omitted.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며, 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 경우에 따라 복수형도 포함한다. 본 명세서에서, "포함하다", “구비하다”, “마련하다” 또는 “가지다” 등의 용어는 언급된 구성요소 외의 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.The terms used in this specification are for describing exemplary embodiments, and are not intended to limit the present invention. In the present specification, the singular form also includes the plural form in some cases, unless specifically stated in the phrase. In the present specification, terms such as "include", "include", "provision" or "have" do not exclude the presence or addition of one or more other elements other than the mentioned elements.

본 명세서에서, “또는”, “적어도 하나” 등의 용어는 함께 나열된 단어들 중 하나를 나타내거나, 또는 둘 이상의 조합을 나타낼 수 있다. 예를 들어, “A 또는 B”, “A 및 B 중 적어도 하나”는 A 또는 B 중 하나만을 포함할 수 있고, A와 B를 모두 포함할 수도 있다.In the present specification, terms such as “or” and “at least one” may represent one of words listed together, or a combination of two or more. For example, “A or B” and “at least one of A and B” may include only one of A or B, and may include both A and B.

본 명세서에서, “예를 들어” 등에 따르는 설명은 인용된 특성, 변수, 또는 값과 같이 제시한 정보들이 정확하게 일치하지 않을 수 있고, 허용 오차, 측정 오차, 측정 정확도의 한계와 통상적으로 알려진 기타 요인을 비롯한 변형과 같은 효과로 본 발명의 다양한 실시 예에 따른 발명의 실시 형태를 한정하지 않아야 할 것이다.In this specification, the description following “for example” may not exactly match the information presented, such as the recited characteristics, variables, or values, and tolerances, measurement errors, limitations of measurement accuracy, and other commonly known factors. It should not be limited to the embodiments of the invention according to the various embodiments of the present invention to effects such as modifications including.

본 명세서에서, 어떤 구성요소가 다른 구성요소에 ‘연결되어’ 있다거나 ‘접속되어’ 있다고 기재된 경우, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성 요소에 ‘직접 연결되어’ 있다거나 ‘직접 접속되어’ 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.In the present specification, when a component is described as being'connected' or'connected' to another component, it may be directly connected or connected to the other component, but other components exist in the middle. It should be understood that it may be possible. On the other hand, when a component is referred to as being'directly connected' or'directly connected' to another component, it should be understood that there is no other component in the middle.

본 명세서에서, 어떤 구성요소가 다른 구성요소의 '상에' 있다거나 '접하여' 있다고 기재된 경우, 다른 구성요소에 상에 직접 맞닿아 있거나 또는 연결되어 있을 수 있지만, 중간에 또 다른 구성요소가 존재할 수 있다고 이해되어야 할 것이다. 반면, 어떤 구성요소가 다른 구성요소의 '바로 위에' 있다거나 '직접 접하여' 있다고 기재된 경우에는, 중간에 또 다른 구성요소가 존재하지 않은 것으로 이해될 수 있다. 구성요소간의 관계를 설명하는 다른 표현들, 예를 들면, '～사이에'와 '직접 ～사이에' 등도 마찬가지로 해석될 수 있다.In the present specification, when a component is described as being'on' or'adjacent' of another component, it may be directly in contact with or connected to another component, but another component exists in the middle. It should be understood that it is possible. On the other hand, when a component is described as being'directly above' or'directly' of another component, it may be understood that there is no other component in the middle. Other expressions describing the relationship between components, for example,'between' and'directly,' can be interpreted as well.

본 명세서에서, '제1', '제2' 등의 용어는 다양한 구성요소를 설명하는데 사용될 수 있지만, 해당 구성요소는 위 용어에 의해 한정되어서는 안 된다. 또한, 위 용어는 각 구성요소의 순서를 한정하기 위한 것으로 해석되어서는 안되며, 하나의 구성요소와 다른 구성요소를 구별하는 목적으로 사용될 수 있다. 예를 들어, '제1구성요소'는 '제2구성요소'로 명명될 수 있고, 유사하게 '제2구성요소'도 '제1구성요소'로 명명될 수 있다.In this specification, terms such as'first' and'second' may be used to describe various elements, but the corresponding elements should not be limited by the above terms. In addition, the terms above should not be interpreted as limiting the order of each component, and may be used for the purpose of distinguishing one component from another component. For example, the'first element' may be named'second element', and similarly, the'second element' may also be named'first element'.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다. Unless otherwise defined, all terms used in the present specification may be used as meanings that can be commonly understood by those of ordinary skill in the art to which the present invention belongs. In addition, terms defined in a commonly used dictionary are not interpreted ideally or excessively unless explicitly defined specifically.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하도록 한다.Hereinafter, a preferred embodiment according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 전자 장치의 주요 구성을 나타낸 블록도이고, 도 2는 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 전자 장치의 제어부의 구체적인 블록도이다. 1 is a block diagram showing a main configuration of an electronic device for separating a gum region from an oral scan image according to an embodiment of the present invention, and FIG. 2 is an electronic device for separating a gum region from an oral scan image according to an embodiment of the present invention. It is a detailed block diagram of the controller of the device.

도 1을 참조하면, 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 전자 장치(100)는, 오랄 스캔 영상과 치아 CT 영상 정합 시 정합에 방해가 되는 잇몸 영역을 오랄 스캔 영상에서 분리 제거하기 위하여, 통신부(110), 입력부(120), 표시부(130), 메모리(140) 및 제어부(150)를 포함하여 구성될 수 있다. Referring to FIG. 1, an electronic device 100 for separating a gum region from an oral scan image according to an exemplary embodiment of the present invention includes an oral scan image and a tooth CT image. In order to separate and remove, the communication unit 110, the input unit 120, the display unit 130, the memory 140, and the control unit 150 may be included.

통신부(110)는 영상 촬영 장치(미도시) 및 서버(미도시) 등의 외부 장치와의 통신을 수행한다. 이를 위해, 통신부(110)는 5G(5th generation communication), LTE-A(long term evolution-advanced), LTE(long term evolution), 블루투스, BLE(bluetooth low energe), NFC(near field communication) 등의 무선 통신을 수행할 수 있고, 케이블 통신 등의 유선 통신을 수행할 수 있다. The communication unit 110 communicates with external devices such as an image capturing device (not shown) and a server (not shown). To this end, the communication unit 110 5G (5 th generation communication), LTE-A (long term evolution-advanced), LTE (long term evolution), Bluetooth, BLE (bluetooth low energe), NFC (near field communication), etc. Wireless communication can be performed, and wired communication such as cable communication can be performed.

입력부(120)는 전자 장치(100)의 사용자의 입력에 대응하여, 입력 데이터를 발생시킨다. 입력부(120)는 적어도 하나의 입력 수단을 포함한다. 입력부(120)는 키보드(key board), 키패드(key pad), 돔 스위치(dome switch), 터치패널(touch panel), 터치 키(touch key), 마우스(mouse), 메뉴 버튼(menu button) 등을 포함할 수 있다. The input unit 120 generates input data in response to a user input of the electronic device 100. The input unit 120 includes at least one input means. Input unit 120 is a keyboard (key board), keypad (key pad), dome switch (dome switch), touch panel (touch panel), touch key (touch key), mouse (mouse), menu button (menu button), etc. It may include.

표시부(130)는 전자 장치(100)의 동작에 따른 표시 데이터를 표시한다. 표시부(130)는 액정 디스플레이(LCD; liquid crystal display), 발광 다이오드(LED; light emitting diode) 디스플레이, 유기 발광 다이오드(OLED; organic LED) 디스플레이, 마이크로 전자기계 시스템(MEMS; micro electro mechanical systems) 디스플레이 및 전자 종이(electronic paper) 디스플레이를 포함한다. 표시부(130)는 입력부(120)와 결합되어 터치 스크린(touch screen)으로 구현될 수 있다.The display unit 130 displays display data according to an operation of the electronic device 100. The display unit 130 includes a liquid crystal display (LCD), a light emitting diode (LED) display, an organic light emitting diode (OLED) display, and a micro electro mechanical systems (MEMS) display. And electronic paper displays. The display unit 130 may be combined with the input unit 120 to be implemented as a touch screen.

메모리(140)는 전자 장치 (100)의 동작 프로그램들을 저장한다. 메모리(140)는 Decimation 알고리즘, Floor Detection 알고리즘, 모폴로지 연산 알고리즘, 그룹핑 알고리즘 등 오랄 스캔(Oral Scan) 영상에서 잇몸 영역을 분리하기 위해 필요한 알고리즘을 저장할 수 있다. 또한, 메모리(140)는 영상 촬영 장치 등으로부터 수신된 복수의 영상 데이터를 저장할 수 있다.The memory 140 stores operation programs of the electronic device 100. The memory 140 may store algorithms necessary for separating a gum region from an Oral Scan image such as a Decimation algorithm, a Floor Detection algorithm, a morphology calculation algorithm, and a grouping algorithm. Further, the memory 140 may store a plurality of image data received from an image capturing device or the like.

제어부(150)는 영상 촬영 장치 및 서버 등의 외부 장치로부터 오랄 스캔 영상을 입력 받아 이 오랄 스캔 영상에서 잇몸 영역을 분리 제거한다.The controller 150 receives an oral scan image from an external device such as an image capturing device and a server, and separates and removes the gum region from the oral scan image.

이와 같이, 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치는 오랄 스캔 영상에서 잇몸 영역을 정확히 분리 제거하여 치아 CT 영상과 정합함으로써, 정합 속도 및 정확성을 향상시킬 수 있다.As described above, the apparatus for separating the gum region from the oral scan image according to an embodiment of the present invention accurately separates and removes the gum region from the oral scan image and matches it with the tooth CT image, thereby improving registration speed and accuracy.

이를 위해, 제어부(150)는, 도 2에 도시한 바와 같이, 전처리부(151), 시작 라인 검출부(152), 경계 라인 검출부(153), 영역 설정부(154), 기준 라인 결정부(155) 및 영역 분리부(156)를 포함하여 구성될 수 있다.To this end, the control unit 150, as shown in FIG. 2, the preprocessing unit 151, the start line detection unit 152, the boundary line detection unit 153, the area setting unit 154, the reference line determination unit 155 ) And a region separation unit 156 may be included.

도 3은 본 발명의 실시예에 따른 오랄 스캔 영상의 전처리 전 및 후를 도시한 도면이다.3 is a diagram illustrating before and after pre-processing of an oral scan image according to an embodiment of the present invention.

전처리부(151)는 오랄 스캔 영상의 메쉬(Mesh) 해상도를 기준 해상도(예컨대, 매쉬 개수 4만개)로 낮추는 역할을 수행한다. 예를 들어, 전처리부(151)는 데이터 차원수를 줄이는 Decimation 알고리즘을 이용하여 메쉬 개수를 줄일 수 있다. The preprocessor 151 serves to lower the mesh resolution of the oral scan image to a reference resolution (eg, 40,000 meshes). For example, the preprocessor 151 may reduce the number of meshes by using a Decimation algorithm that reduces the number of data dimensions.

도 3 (a)에 도시한 바와 같이, 영상 촬영 장치에 의해 촬영된 오랄 스캔 영상은 일반적으로 메쉬 정보의 분포가 불균일하고, 메쉬 개수가 4만 내지 80만개로 비교적 많아 메쉬 정보를 처리하기 위해 오랜 시간이 걸리는 문제점이 있다.As shown in Fig. 3 (a), the oral scan image captured by the imaging device generally has a non-uniform distribution of mesh information, and the number of meshes is relatively high, 40,000 to 800,000, There is a problem that takes time.

그러나, 도 3 (b)에 도시한 바와 같이, 본 발명의 실시예에 따른 전처리부(151)가 Decimation 알고리즘을 이용하여 메쉬 개수를 4만개로 줄이게 되면, 메쉬 정보의 분포가 균일하게 되며, 메쉬 정보의 처리 속도가 향상될 수 있다. 다만, 메쉬 개수를 과도하게 줄일 경우 특징들이 대부분 사라지기 때문에 적절한 수로 줄이는 것이 바람직하다.However, as shown in FIG. 3(b), when the preprocessor 151 according to an embodiment of the present invention reduces the number of meshes to 40,000 by using the Decimation algorithm, the distribution of mesh information becomes uniform, and the mesh The processing speed of information can be improved. However, if the number of meshes is excessively reduced, most of the features disappear, so it is desirable to reduce the number to an appropriate number.

도 4는 본 발명의 실시예에 따른 오랄 스캔 영상에서 검출된 시작 라인을 도시한 도면이다.4 is a diagram illustrating a start line detected in an oral scan image according to an embodiment of the present invention.

시작 라인 검출부(152)는 전처리부(151)에서 전처리된 오랄 스캔 영상에서 잇몸 영역의 바닥에 해당하는 버텍스들의 집합인 시작 라인을 검출한다. 예를 들어, 시작 라인 검출부(152)는 Floor Detection 알고리즘을 이용하여 시작 라인을 검출할 수 있다. The start line detection unit 152 detects a start line, which is a set of vertices corresponding to the bottom of the gum region, from the oral scan image preprocessed by the preprocessor 151. For example, the start line detection unit 152 may detect a start line using a Floor Detection algorithm.

이하에서는, 시작 라인 검출부(152)가 시작 라인을 검출하는 방법에 대해 설명하지만, 이를 확장하여 시작 면을 검출할 수 있음은 당연하다.Hereinafter, a method for the start line detection unit 152 to detect the start line will be described, but it is natural that the start line can be detected by expanding this.

한편, 오랄 스캔 영상은 영상을 촬영한 영상 촬영 장치에 따라 Hand 타입과 Desk 타입으로 구분된다. 여기서, Hand 타입은, 도 4 (a)에 도시한 바와 같이, 오랄 스캔 영상의 바닥이 뚫려 있는 형태인 반면, Desk 타입은, 도 4 (b)에 도시한 바와 같이, 오랄 스캔 영상의 바닥이 막혀 있으며 바닥면이 평평한 형태이다. 따라서, 오랄 스캔 영상의 종류에 따라 시작 라인을 검출하는 방법이 상이하다.Meanwhile, the oral scan image is divided into a hand type and a desk type according to the image capturing device in which the image is captured. Here, in the Hand type, as shown in Fig. 4(a), the bottom of the oral scan image is open, whereas in the Desk type, as shown in Fig. 4(b), the bottom of the oral scan image is It is blocked and the bottom is flat. Therefore, the method of detecting the start line is different according to the type of the oral scan image.

구체적으로, Hand 타입의 오랄 스캔 영상의 경우, 바닥이 뚫려 있는 형태이기 때문에 바닥에 해당하는 메쉬들은 이와 인접한 버텍스 수가 상대적으로 적다. 이를 토대로 시작 라인 검출부(152)는 먼저, 오랄 스캔 영상의 각 메쉬에 대해 인접한 버텍스 수를 산출하고, 산출된 버텍스 수가 기준 수(예컨대, 3개) 이하인 버텍스들을 선택한다. 다음, 선택된 버텍스들을 연결하여 시작 라인을 검출한다.Specifically, in the case of a hand type oral scan image, since the bottom is open, the meshes corresponding to the bottom have relatively few vertices adjacent to the bottom. Based on this, the start line detection unit 152 first calculates the number of vertices adjacent to each mesh of the oral scan image, and selects vertices having the calculated number of vertices less than the reference number (eg, 3). Next, a start line is detected by connecting the selected vertices.

이와 달리, Desk 타입의 오랄 스캔 영상의 경우, 바닥면이 평평하기 때문에 곡률이 비교적 작은 메쉬들이 바닥에 해당될 가능성이 높다. 이를 토대로 시작 라인 검출부(152)는 먼저, 오랄 스캔 영상의 각 메쉬의 곡률을 산출하고, 산출된 곡률이 기준 곡률 이하인 메쉬들을 선택한다. 다음, 선택된 메쉬들에 포함된 버텍스들을 연결하여 시작 라인을 검출한다.In contrast, in the case of a desk-type oral scan image, since the bottom surface is flat, meshes with relatively small curvature are likely to correspond to the floor. Based on this, the start line detection unit 152 first calculates the curvature of each mesh of the oral scan image, and selects meshes whose calculated curvature is less than or equal to the reference curvature. Next, a start line is detected by connecting vertices included in the selected meshes.

경계 라인 검출부(153)는 전처리부(151)에 의해 전처리된 오랄 스캔 영상에서 치아 영역 및 잇몸 영역의 경계 라인을 검출한다.The boundary line detection unit 153 detects boundary lines between the tooth region and the gum region from the oral scan image preprocessed by the preprocessor 151.

도 5는 본 발명의 실시예에 따른 오랄 스캔 영상의 인접 메쉬들 간 곡률을 산출하는 방법을 설명하기 위한 도면이고, 도 6은 경계 포인트들을 오랄 스캔 영상에 도시한 도면이다.FIG. 5 is a diagram for explaining a method of calculating a curvature between adjacent meshes of an oral scan image according to an embodiment of the present invention, and FIG. 6 is a diagram illustrating boundary points in an oral scan image.

경계 라인 검출부(153)는 오랄 스캔 영상의 인접 메쉬들 간 곡률을 산출하고, 산출된 곡률이 기준 곡률 이상인 메쉬들을 선택하고, 선택된 상기 메쉬들이 공유하는 버텍스를 경계 포인트로 결정한다.The boundary line detector 153 calculates a curvature between adjacent meshes of an oral scan image, selects meshes having a calculated curvature equal to or greater than a reference curvature, and determines a vertex shared by the selected meshes as a boundary point.

구체적으로, 도 5 및 도 6을 참조하면, 경계 라인 검출부(153)는 오랄 스캔 영상의 인접 메쉬들 간 최대 곡률 및 최소 곡률을 산출하고, 산출된 최대 곡률 및 최소 곡률을 이용해 가우시안 곡률 및 평균 곡률 중 적어도 하나를 산출한다. 그리고, 산출된 가우시안 곡률 및 평균 곡률 중 적어도 어느 하나가 기준 곡률 이상인 메쉬들을 선택하고, 선택된 메쉬들이 공유하는 버텍스를 경계 포인트로 결정한다. Specifically, referring to FIGS. 5 and 6, the boundary line detection unit 153 calculates the maximum and minimum curvatures between adjacent meshes of the oral scan image, and uses the calculated maximum and minimum curvatures to calculate the Gaussian curvature and the average curvature. At least one of them is calculated. In addition, meshes having at least one of the calculated Gaussian curvature and average curvature equal to or greater than the reference curvature are selected, and vertices shared by the selected meshes are determined as boundary points.

여기서, 가우시안 곡률을 이용하여 추출된 경계 포인트(도 6 (a) 참조) 보다 가우시안 곡률 및 평균 곡률을 이용하여 추출된 경계 포인트(도 6(b) 참조)가 더 뚜렷한 것을 확인할 수 있으며, 상호 보완적 측면에서 가우시안 곡률 및 평균 곡률을 모두 이용하여 경계 포인트를 결정하는 것이 바람직하다.Here, it can be seen that the boundary points extracted using the Gaussian curvature and the average curvature (see Fig. 6 (b)) are more distinct than the boundary points extracted using the Gaussian curvature (see Fig. 6 (a)), and complement each other. In terms of the product, it is preferable to determine the boundary point using both the Gaussian curvature and the average curvature.

이하, 도 5를 참조하여 오랄 스캔 영상에서 경계 포인트를 추출하는 방법을 설명하겠다.Hereinafter, a method of extracting a boundary point from an oral scan image will be described with reference to FIG. 5.

경계 라인 검출부(153)는, 인접 메쉬들이 공유하는 버텍스에서 그 법선(normal vector)을 포함하며 메쉬 곡면과 교차하는 평면을 그린 뒤 그 평면을 법선을 기준으로 돌려가며 메쉬 곡면과 계속하여 교차시킨다. 이 경우 메쉬 곡면 위에서 그 버텍스를 중심으로 하는 수많은 곡선을 얻을 수 있고 이 곡선들과 버텍스의 접평면(tangent plane) 사이의 각을 이용해 곡률을 각각 산출할 수 있다. 그리고, 이들 곡률 중 가장 큰 값을 최대 곡률로 정의하고 가장 작은 값을 최소 곡률로 정의할 수 있다. 한편, 산출된 곡률들 중 그 버텍스에서 가장 큰 최대 곡률과 가장 작은 최소 곡률을 가진 두 곡선을 포함하는 평면을 주곡률 평면(plane of principal curvatures)으로 정의할 수 있다.The boundary line detection unit 153 draws a plane that includes a normal vector in vertices shared by adjacent meshes and intersects the mesh surface, and then rotates the plane based on the normal to continuously intersect the mesh surface. In this case, a number of curves centered on the vertex can be obtained on the mesh surface, and the curvature can be calculated using the angle between these curves and the tangent plane of the vertex. In addition, the largest value among these curvatures may be defined as the maximum curvature and the smallest value may be defined as the minimum curvature. Meanwhile, among the calculated curvatures, a plane including two curves having the largest maximum curvature and the smallest minimum curvature at the vertex may be defined as a plane of principal curvatures.

여기서, 가우시안 곡률은 최대 곡률 및 최소 곡률의 곱으로 정의되고, 평균 곡률은 최대 곡률 및 최소 곡률의 평균으로 정의된다.Here, the Gaussian curvature is defined as the product of the maximum curvature and the minimum curvature, and the average curvature is defined as the average of the maximum and minimum curvatures.

이와 같은 방식으로 산출된 가우시안 곡률 및 평균 곡률 중 적어도 어느 하나가 기준 곡률 이상인 메쉬들을 선택하고, 선택된 메쉬들이 공유하는 버텍스를 경계 포인트로 결정한다. Meshes in which at least one of the Gaussian curvature and the average curvature calculated in this way are equal to or greater than the reference curvature are selected, and vertices shared by the selected meshes are determined as boundary points.

도 7은 본 발명의 실시예에 따른 오랄 스캔 영상에서 경계 포인트를 연결하는 방법을 설명하기 위한 도면이다.7 is a diagram illustrating a method of connecting boundary points in an oral scan image according to an embodiment of the present invention.

도 7에 도시한 바와 같이, 경계 라인 검출부(153)는, 모폴로지 연산 알고리즘을 이용해 경계 포인트들을 순차적으로 확장(Dilation) 및 축소(Erosion)하여 인접한 경계 포인트들을 연결한다.As shown in FIG. 7, the boundary line detection unit 153 connects adjacent boundary points by sequentially dilation and erosion of boundary points using a morphology calculation algorithm.

여기서, 모폴로지 연산 알고리즘은 영역을 확장 및 축소하기 위한 알고리즘으로 일반적으로 근접한 점들을 연결시키거나 끊기 위한 용도로 사용된다.Here, the morphology operation algorithm is an algorithm for expanding and reducing a region, and is generally used for connecting or disconnecting adjacent points.

이와 같이, 경계 포인트들에 대해 확장하고 난 이후 축소 과정을 거치게 되면 기존 경계 포인트 성분의 두께는 유지하면서 인접 경계 포인트들 간 연결만 시켜주기 때문에 치아 및 잇몸 영역 간 경계성을 더욱더 향상시킬 수 있다.In this way, when the boundary points are expanded and then reduced, the boundary between the tooth and the gum region can be further improved because the thickness of the existing boundary point component is maintained while only connecting adjacent boundary points.

도 8은 연결된 경계 포인트들 마다 동일한 라벨로 라벨링된 오랄 스캔 영상을 도시한 도면이고, 도 9는 각 라벨에 대해 영역 확장된 오랄 스캔 영상을 도시한 도면이고, 도 10은 영역 확장된 라벨이 통합된 오랄 스캔 영상을 도시한 도면이다.FIG. 8 is a diagram showing an oral scan image labeled with the same label for each connected boundary point, FIG. 9 is a diagram showing an extended oral scan image for each label, and FIG. 10 is a combination of an extended area label It is a diagram showing an oral scan image.

도 8를 참조하면, 경계 라인 검출부(153)는 연결된 경계 포인트들 마다 동일한 라벨로 각각 라벨링한다. 도 8에는 라벨 별로 색상을 달리하여 표시하였다.Referring to FIG. 8, the boundary line detection unit 153 labels each connected boundary point with the same label. In Fig. 8, different colors are displayed for each label.

도 9 및 도 10을 참조하면, 경계 라인 검출부(153)는 라벨링된 각 라벨에 대해 적어도 1회 확장하고, 인접한 라벨들을 통합한다. 여기서, 모든 라벨이 통합될 때까지 확장을 반복할 수 있다. 이에 따라, 경계 라인은 하나의 통합 라벨로 라벨링될 수 있다.9 and 10, the boundary line detection unit 153 expands at least once for each labeled label and integrates adjacent labels. Here, the expansion can be repeated until all the labels are integrated. Accordingly, the boundary line can be labeled with one unified label.

도 11은 본 발명의 실시에에 따른 오랄 스캔 영상에서 분리 대상 영역을 설정하는 방법을 설명하기 위한 도면이고, 도 12는 분리 기준 라인이 표시된 오랄 스캔 영상을 도시한 도면이고, 도 13은 분리 기준 라인을 기초로 치아 및 잇몸 영역이 분리된 오랄 스캔 영상을 도시한 도면이다.11 is a diagram for explaining a method of setting a separation target region in an oral scan image according to an embodiment of the present invention, FIG. 12 is a diagram showing an oral scan image in which a separation reference line is displayed, and FIG. 13 is a separation criterion A view showing an oral scan image in which teeth and gum regions are separated based on a line.

도 11을 참조하면, 영역 설정부(154)는 앞서 검출된 시작 라인 및 경계 라인을 기초로 분리 대상 영역인 잇몸 영역을 설정한다. 즉, 영역 설정부(154)는 시작 라인에서 경계 라인까지 연결된 버텍스들을 순차적으로 통합하여 분리 대상 영역으로 설정한다.Referring to FIG. 11, the region setting unit 154 sets a gum region, which is an area to be separated, based on the previously detected start line and boundary line. That is, the region setting unit 154 sequentially integrates vertices connected from the start line to the boundary line and sets it as a separation target region.

도 12를 참조하면, 기준 라인 결정부(155)는 분리 대상 영역의 최외각 라인을 오랄 스캔 영상에서 잇몸 영역을 분리하기 위한 분리 기준 라인으로 결정한다.Referring to FIG. 12, the reference line determination unit 155 determines the outermost line of the separation target area as a separation reference line for separating the gum area from the oral scan image.

도 13을 참조하면, 영역 분리부(156)는 분리 기준 라인을 이용해 오랄 스캔 영상에서 잇몸 영역을 분리한다.Referring to FIG. 13, the region separating unit 156 separates a gum region from an oral scan image using a separation reference line.

이와 같이, 본 발명의 실시예에 따른 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치는 오랄 스캔 영상에서 잇몸 영역을 비교적 신속하고 정확하게 분리 제거하여 치아 CT 영상과 정합함으로써, 정합 속도 및 정확성을 향상시킬 수 있다.As described above, the apparatus for separating the gum region from the oral scan image according to an embodiment of the present invention can improve the registration speed and accuracy by relatively quickly and accurately separating and removing the gum region from the oral scan image and matching it with the tooth CT image. have.

본 발명의 상세한 설명에서는 구체적인 실시 예에 관하여 설명하였으나 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되지 않으며, 후술되는 청구범위 및 이 청구범위와 균등한 것들에 의해 정해져야 한다.In the detailed description of the present invention, specific embodiments have been described, but various modifications may be made without departing from the scope of the present invention. Therefore, the scope of the present invention is not limited to the described embodiments, and should be defined by the claims to be described later and equivalents to the claims.

100: 전자 장치 110: 통신부
120: 입력부 130: 출력부
140: 저장부 150: 제어부
151: 전처리부 152: 시작 라인 검출부
153: 경계 라인 검출부 154: 영역 설정부
155: 기준 라인 결정부 156: 영역 분리부100: electronic device 110: communication unit
120: input unit 130: output unit
140: storage unit 150: control unit
151: preprocessor 152: start line detection unit
153: boundary line detection unit 154: area setting unit
155: reference line determination unit 156: region separation unit

Claims (12)

오랄 스캔 영상의 메쉬 해상도를 기준 해상도로 낮추는 전처리부;
전처리된 상기 오랄 스캔 영상에서 잇몸 영역의 바닥에 해당하는 시작 라인을 검출하는 시작 라인 검출부;
전처리된 상기 오랄 스캔 영상에서 치아 영역 및 잇몸 영역의 경계 라인을 검출하는 경계 라인 검출부; 및
상기 시작 라인 및 경계 라인을 이용해 상기 오랄 스캔 영상에서 잇몸 영역을 분리하는 영역 분리부
를 포함하는 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
A preprocessor for lowering the mesh resolution of the oral scan image to a reference resolution;
A start line detector configured to detect a start line corresponding to the bottom of the gum region from the preprocessed oral scan image;
A boundary line detection unit detecting boundary lines between a tooth region and a gum region from the preprocessed oral scan image; And
Region separation unit for separating a gum region from the oral scan image using the start line and boundary line
Device for separating the gum region from the oral scan image comprising a.
 제 1 항에 있어서,
상기 시작 라인 검출부는
상기 오랄 스캔 영상의 각 메쉬에 대해 인접한 버텍스 수를 산출하고, 산출된 상기 버텍스 수가 기준 수 이하인 버텍스들을 선택하고, 선택된 상기 버텍스들을 연결하여 상기 시작 라인을 검출하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 1,
The start line detection unit
Calculating the number of vertices adjacent to each mesh of the oral scan image, selecting vertices with the calculated number of vertices less than a reference number, and connecting the selected vertices to detect the start line
A device that separates the gum area from the oral scan image.
 제 1 항에 있어서,
상기 시작 라인 검출부는
상기 오랄 스캔 영상의 각 메쉬의 곡률을 산출하고, 산출된 상기 곡률이 기준 곡률 이하인 메쉬들을 선택하고, 선택된 상기 메쉬들에 포함된 버텍스들을 연결하여 상기 시작 라인을 검출하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 1,
The start line detection unit
Calculating the curvature of each mesh of the oral scan image, selecting meshes whose curvature is less than or equal to a reference curvature, and detecting the start line by connecting vertices included in the selected meshes
A device that separates the gum area from the oral scan image.
 제 1 항에 있어서,
상기 경계 라인 검출부는
상기 오랄 스캔 영상의 인접 메쉬들 간 곡률을 산출하고, 산출된 상기 곡률이 기준 곡률 이상인 메쉬들을 선택하고, 선택된 상기 메쉬들이 공유하는 버텍스를 경계 포인트로 결정하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 1,
The boundary line detection unit
Calculating a curvature between adjacent meshes of the oral scan image, selecting meshes having the calculated curvature equal to or greater than a reference curvature, and determining a vertex shared by the selected meshes as a boundary point
A device that separates the gum area from the oral scan image.
 제 1 항에 있어서,
상기 경계 라인 검출부는
상기 오랄 스캔 영상의 인접 메쉬들 간 최대 곡률 및 최소 곡률을 산출하고, 산출된 상기 최대 곡률 및 최소 곡률을 이용해 가우시안 곡률 및 평균 곡률 중 적어도 하나를 산출하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 1,
The boundary line detection unit
Calculating a maximum curvature and a minimum curvature between adjacent meshes of the Oral scan image, and calculating at least one of a Gaussian curvature and an average curvature using the calculated maximum and minimum curvature
A device that separates the gum area from the oral scan image.
 제 5 항에 있어서,
상기 경계 라인 검출부는
산출된 상기 가우시안 곡률 및 평균 곡률 중 적어도 어느 하나가 기준 곡률 이상인 메쉬들을 선택하고, 선택된 상기 메쉬들이 공유하는 버텍스를 경계 포인트로 결정하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 5,
The boundary line detection unit
Selecting meshes in which at least one of the calculated Gaussian curvature and average curvature is greater than or equal to a reference curvature, and determining a vertex shared by the selected meshes as a boundary point
A device that separates the gum area from the oral scan image.
 제 4 항 또는 제 6 항에 있어서,
상기 경계 라인 검출부는
상기 경계 포인트들을 순차적으로 확장 및 축소하여 인접한 상기 경계 포인트들을 연결하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method according to claim 4 or 6,
The boundary line detection unit
Connecting the adjacent boundary points by sequentially expanding and reducing the boundary points
A device that separates the gum area from the oral scan image.
 제 7 항에 있어서,
상기 경계 라인 검출부는
연결된 상기 경계 포인트들 마다 동일한 라벨로 각각 라벨링하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 7,
The boundary line detection unit
Labeling each of the connected boundary points with the same label
A device that separates the gum area from the oral scan image.
 제 8 항에 있어서,
상기 경계 라인 검출부는
라벨링된 각 라벨에 대해 적어도 1회 확장하고, 인접한 라벨들을 통합하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 8,
The boundary line detection unit
Expanding at least once for each labeled label, and incorporating adjacent labels
A device that separates the gum area from the oral scan image.
 제 1 항에 있어서,
상기 시작 라인에서 상기 경계 라인까지 연결된 버텍스들을 통합하여 분리 대상 영역으로 설정하는 영역 설정부
를 더 포함하는 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 1,
An area setting unit that integrates vertices connected from the start line to the boundary line and sets it as a separation target area
The device for separating the gum region from the oral scan image further comprising.
 제 10 항에 있어서,
상기 분리 대상 영역의 최외각 라인을 상기 오랄 스캔 영상에서 잇몸 영역을 분리하기 위한 분리 기준 라인으로 결정하는 기준 라인 결정부를 더 포함하는 오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.
The method of claim 10,
A device for separating the gum region from the oral scan image, further comprising a reference line determination unit determining an outermost line of the separation target region as a separation reference line for separating the gum region from the oral scan image.
 제 11 항에 있어서,
상기 영역 분리부는
상기 분리 기준 라인을 이용해 상기 오랄 스캔 영상에서 잇몸 영역을 분리하는
오랄 스캔 영상에서 잇몸 영역을 분리하는 장치.The method of claim 11,
The region separation unit
Separating the gum region from the oral scan image using the separation reference line
A device that separates the gum area from the oral scan image.
KR1020190042437A 2019-04-11 2019-04-11 Apparatus For Separating Gum Area From Oral Scan Image KR102224064B1 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020190042437A KR102224064B1 (en) 2019-04-11 2019-04-11 Apparatus For Separating Gum Area From Oral Scan Image
EP20786737.5A EP3954293A4 (en) 2019-04-11 2020-02-26 Apparatus for preprocessing image data
CN202080027597.2A CN113692250B (en) 2019-04-11 2020-02-26 Pretreatment device for image data
US17/602,617 US12062193B2 (en) 2019-04-11 2020-02-26 Apparatus for preprocessing image data
PCT/KR2020/002755 WO2020209495A1 (en) 2019-04-11 2020-02-26 Apparatus for preprocessing image data
TW109112222A TWI782269B (en) 2019-04-11 2020-04-10 Apparatus for preprocessing image data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190042437A KR102224064B1 (en) 2019-04-11 2019-04-11 Apparatus For Separating Gum Area From Oral Scan Image

Publications (2)

Publication Number Publication Date
KR20200120055A true KR20200120055A (en) 2020-10-21
KR102224064B1 KR102224064B1 (en) 2021-03-08

Family

ID=73034979

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190042437A KR102224064B1 (en) 2019-04-11 2019-04-11 Apparatus For Separating Gum Area From Oral Scan Image

Country Status (1)

Country Link
KR (1) KR102224064B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230000912A (en) * 2021-06-25 2023-01-03 주식회사 메디트 An intraoral image processing apparatus, and an intraoral image processing method
KR20230032595A (en) * 2021-08-31 2023-03-07 주식회사 스타인펠드 Method for creating crown 3d mesh using deep learning and device using the same
KR102670837B1 (en) * 2022-12-05 2024-05-30 주식회사 스타인펠드 Method for creating crown occlusal 3d mesh using deep learning and device using the same
KR102670827B1 (en) * 2022-12-05 2024-05-30 주식회사 스타인펠드 Method for creating crown side 3d mesh using deep learning and device using the same

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060083422A1 (en) * 2004-01-27 2006-04-20 Ernst Maurice M Three-dimensional modeling of the oral cavity
KR20140015239A (en) * 2010-06-29 2014-02-06 쓰리세이프 에이/에스 2d image arrangement
KR101613159B1 (en) * 2014-12-31 2016-04-20 오스템임플란트 주식회사 Automatic dental image registration method, apparatus, and recording medium thereof
KR101655910B1 (en) * 2015-05-06 2016-09-09 재단법인 아산사회복지재단 Method and program for angiograph image registration
KR20170127950A (en) * 2016-05-13 2017-11-22 연세대학교 산학협력단 Fully automatic dental segmentation system and method for computerized tomography

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060083422A1 (en) * 2004-01-27 2006-04-20 Ernst Maurice M Three-dimensional modeling of the oral cavity
KR20140015239A (en) * 2010-06-29 2014-02-06 쓰리세이프 에이/에스 2d image arrangement
KR101613159B1 (en) * 2014-12-31 2016-04-20 오스템임플란트 주식회사 Automatic dental image registration method, apparatus, and recording medium thereof
KR101655910B1 (en) * 2015-05-06 2016-09-09 재단법인 아산사회복지재단 Method and program for angiograph image registration
KR20170127950A (en) * 2016-05-13 2017-11-22 연세대학교 산학협력단 Fully automatic dental segmentation system and method for computerized tomography

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230000912A (en) * 2021-06-25 2023-01-03 주식회사 메디트 An intraoral image processing apparatus, and an intraoral image processing method
KR20230032595A (en) * 2021-08-31 2023-03-07 주식회사 스타인펠드 Method for creating crown 3d mesh using deep learning and device using the same
WO2023033385A1 (en) * 2021-08-31 2023-03-09 주식회사 스타인펠드 Crown 3d mesh generation method using deep learning and device using same
KR102670837B1 (en) * 2022-12-05 2024-05-30 주식회사 스타인펠드 Method for creating crown occlusal 3d mesh using deep learning and device using the same
KR102670827B1 (en) * 2022-12-05 2024-05-30 주식회사 스타인펠드 Method for creating crown side 3d mesh using deep learning and device using the same
WO2024122874A1 (en) * 2022-12-05 2024-06-13 주식회사 스타인펠드 Crown side surface 3d mesh generation method using deep learning and apparatus using same
WO2024122875A1 (en) * 2022-12-05 2024-06-13 주식회사 스타인펠드 Crown occlusal surface 3d mesh generation method using deep learning and device using same

Also Published As

Publication number Publication date
KR102224064B1 (en) 2021-03-08

Similar Documents

Publication Publication Date Title
KR102224064B1 (en) Apparatus For Separating Gum Area From Oral Scan Image
US10674907B2 (en) Opthalmoscope device
US8913789B1 (en) Input methods and systems for eye positioning using plural glints
WO2016129156A1 (en) Information processing device, information processing method, and program
CN110099209A (en) Image processing apparatus, image processing method and storage medium
US20200402278A1 (en) Flow line display system, flow line display method, and program recording medium
JP5277805B2 (en) Object extraction device, object extraction method, and object extraction program
US20200334801A1 (en) Learning device, inspection system, learning method, inspection method, and program
EP3709170A1 (en) Abnormal state detection device, abnormal state detection method, and abnormal state detection program
CN110140166A (en) For providing the system for exempting to manually enter to computer
JP2017033256A (en) Image processing device, communication system, image processing method, and program
KR102284623B1 (en) Method and apparatus for detecting tooth object in oral scan image
US10757337B2 (en) Information processing apparatus and information processing method to control exposure for imaging the eye
JP7067743B2 (en) Oral Cancer Diagnostic System and Oral Cancer Diagnostic Program
KR20200120036A (en) Method and apparatus for matching of images using tooth object
CN112288697A (en) Method and device for quantifying degree of abnormality, electronic equipment and readable storage medium
CN113692250B (en) Pretreatment device for image data
JP2015046111A (en) Viewpoint detection device and viewpoint detection method
KR20200129550A (en) Method and Apparatus for detecting of Alveolar Bone in Image Data
US10942607B2 (en) Manipulation detection device and video display system that are capable detecting an object on a video display surface
JP4340760B2 (en) Hands free pointing system
US20240180395A1 (en) Endoscopic examination support apparatus, endoscopic examination support method, and recording medium
KR20190070238A (en) System and method for recognizing measurement value in analogue testers
KR102177886B1 (en) Method and apparatus for preprocessing computerized tomography image data
KR102215392B1 (en) Apparatus and Method for Detecting Malposition of Implanted leads of Pacemaker

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant