KR20170128046A - Method and Apparatus for Obtaining Information of Radiographic Images - Google Patents
Method and Apparatus for Obtaining Information of Radiographic Images Download PDFInfo
- Publication number
- KR20170128046A KR20170128046A KR1020160084205A KR20160084205A KR20170128046A KR 20170128046 A KR20170128046 A KR 20170128046A KR 1020160084205 A KR1020160084205 A KR 1020160084205A KR 20160084205 A KR20160084205 A KR 20160084205A KR 20170128046 A KR20170128046 A KR 20170128046A
- Authority
- KR
- South Korea
- Prior art keywords
- dimensional
- image
- target
- reference axis
- spatial information
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 94
- 230000005855 radiation Effects 0.000 claims description 25
- 230000000873 masking effect Effects 0.000 claims description 9
- 210000004373 mandible Anatomy 0.000 description 5
- 210000003625 skull Anatomy 0.000 description 5
- 230000037182 bone density Effects 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 210000003484 anatomy Anatomy 0.000 description 3
- 230000010339 dilation Effects 0.000 description 3
- 210000001847 jaw Anatomy 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000002316 cosmetic surgery Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 210000002050 maxilla Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A61B6/14—
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/51—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for dentistry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/003—Reconstruction from projections, e.g. tomography
- G06T11/005—Specific pre-processing for tomographic reconstruction, e.g. calibration, source positioning, rebinning, scatter correction, retrospective gating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/003—Reconstruction from projections, e.g. tomography
- G06T11/008—Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30036—Dental; Teeth
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- High Energy & Nuclear Physics (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pulmonology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Description
본 발명은 3차원 영상으로부터 필요한 정보의 획득을 용이하게 하기 위한 방법 및 장치에 관한 것이다. 보다 상세하게는, 3차원 의료용 방사선 영상으로부터 영상처리를 통하여 필요한 정보를 효율적으로 획득할 수 있게 하는 방사선 영상의 정보 획득 방법 및 장치를 제공한다.The present invention relates to a method and apparatus for facilitating acquisition of necessary information from a three-dimensional image. More particularly, the present invention provides a method and apparatus for acquiring information of a radiological image, which enables efficient acquisition of necessary information through image processing from a three-dimensional medical radiological image.
일반적으로, 의료 분야에서는 진료 목적을 위하여 CT 등의 X선 촬영 영상을 사용하게 된다. 이는 피사체에 투과성이 높은 X선 등의 방사선을 조사하면, 피사체의 물리적 성질과 거리에 따라 X선의 세기가 감쇠되는 특성을 이용하여 조사된 방사선을 수광하는 이미지 센서에서 피사체의 투영(Projection)을 영상을 획득함으로써 얻어진다. 특히 치과의 경우 진단을 위하여 전체 턱 및 머리 특히 환자의 악궁에 대한 엑스레이 영상을 생성하여 활용한다. 그런데, X선 촬영 영상은 인체 내부 조직에 대한 영상으로서 전문가가 아닌 일반인에게는 익숙하지 아니하며, 전문 인력의 경우에도 진료에 필요한 정보를 획득하기 위하여 별도의 과정을 거쳐야 한다.Generally, in the medical field, X-ray images such as CT are used for medical purposes. This is because when an image is irradiated with X-rays or the like having a high transmittance to the object, the projection of the object is detected by the image sensor that receives the irradiated radiation using the characteristic that the intensity of the X- ≪ / RTI > In particular, in the case of dentistry, x-ray images of the entire jaw and head, especially the patient's arch, are generated and used for diagnosis. However, X-ray images are images of internal tissues of the human body, and are not familiar to the general public, not experts, and specialist personnel must undergo a separate process in order to acquire information necessary for medical treatment.
특히, 치과나 성형외과 분야 등에서는 진료 기타 목적으로 구강 내부 구조를 다양한 방향에서 재구성한 이미지가 계속적으로 활용되는데, 이때 영상처리 과정에서 별도의 인력이 필요하고 계속적인 작업이 요구되어 경제적 시간적으로 상당한 부담이 발생하게 된다. 따라서, 보다 효율적으로 영상으로부터 원하는 정보를 획득하도록 하는 방안이 요구되고 있다.Particularly, in the field of dentistry or plastic surgery, images reconstructed from various directions are continuously used for the purpose of medical treatment or other purposes. In this case, a separate workforce is required in the image processing process and continuous work is required, A burden is generated. Therefore, there is a demand for a scheme for acquiring desired information from a video image more efficiently.
한편, 치과에서 환자의 턱 및 머리 영역을 촬영하기 위하여 사용되는 치과용 콘빔시티(CBCT: cone beam computered tomography)의 경우, 시티 영상을 촬영한 후 축상면(axial) 이미지 상에서 악궁의 적당한 위치에 수동으로 점을 찍은 후 재구성된 파노라마 및 단면 이미지를 얻도록 함이 종래 보편적으로 활용되었는데, 이 과정에서 방사선사 내지 위생사와 같은 전문 인력이 투입되고 작업자의 숙련도에 따라 오차 발생의 여지가 있으며 진단 및 치료가 지연된다는 점에서 보다 빠르고 정확하게 표준화된 재구성 이미지를 획득할 수 있도록 하는 방안이 요구된다. On the other hand, in the case of a dental cone beam computerized tomography (CBCT) used to photograph the patient's jaw and head area in a dental clinic, And a reconstructed panoramic image and a cross-sectional image are taken after the point is taken. In this process, specialist personnel such as radiologists and hygienists are input, there is a possibility of error according to the skill of the operator, It is necessary to provide a method for acquiring a standardized reconstructed image more quickly and accurately.
기존에 소개된 방법들은 재구성된 이미지를 생성하기 위하여, 치아의 치관(crown) 부분만을 분리하고 교합면의 높이를 산출하여 아치를 그리는 기준으로 이용하였으나, 이는 치아 전체가 결실된 무치악 또는 일부가 결실된 부분무치악 환자의 경우에는 적용이 어렵다는 문제가 있었다. 또한, 기존의 방법들은 악궁의 전체가 촬영된 풀 아치(full arch)를 처리하는 경우만을 가정하여 치아 일부가 촬영된 단면의 경우 이미지를 재구성하기 어렵다는 문제가 있다.In order to generate a reconstructed image, the existing methods have used only the crown of the tooth and calculated the height of the occlusal surface to draw the arch. However, And it is difficult to apply it to partial edentulous patients. In addition, existing methods have a problem in that it is difficult to reconstruct an image in the case of a section in which a part of the tooth is photographed, assuming only the case where the full arch of the arch is photographed.
본 발명은 3차원 방사선 영상에 대하여, 효율적인 공간 정보 획득 방법을 제안하는 것을 목적으로 한다.An object of the present invention is to propose an efficient spatial information acquisition method for a three-dimensional radiation image.
본 발명의 다른 목적은 3차원 방사선 영상에 대하여, 3차원 방사선 영상에 포함된 타겟의 영역 및 좌표 정보를 획득하는 방법 및 장치를 제공하는 것을 목적으로 한다.It is another object of the present invention to provide a method and apparatus for acquiring a target region and coordinate information included in a three-dimensional radiographic image with respect to a three-dimensional radiographic image.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치는 입력된 3차원 방사선 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성하는 2차원 영상 생성부, 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득하는 타겟 영상 획득부 및 상기 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득하는 공간 정보 획득부를 포함한다.According to an aspect of the present invention, there is provided an apparatus for acquiring a spatial information of a target included in a three-dimensional radiographic image, comprising: a projection unit for projecting an input three-dimensional radiation image onto a predetermined first reference plane to generate a two- A target image acquiring unit that acquires a two-dimensional target image of a target included in the generated two-dimensional image, and a target-image acquiring unit that projects the two-dimensional target image onto a predetermined reference axis, And a spatial information obtaining unit for obtaining the spatial information.
공간 정보 획득부는 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 상기 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정하는 제1 경계값 결정부 및 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 상기 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하는 제2의 2차원 영상 생성부를 포함수 있다.The spatial information obtaining unit determines a boundary value for defining a boundary on which the target is distributed based on at least one reference axis included in the first reference plane in a projected image obtained by projecting a two-dimensional target image on a predetermined reference axis And determining a second reference plane in consideration of the determined boundary value and integrating the tomographic images parallel to the determined second reference plane and reconstructed from the three dimensional radiographic image according to the boundary value, And a second two-dimensional image generating unit for generating a two-dimensional image of the second image.
이때, 결정된 제2 이진화 기준값에 대하여 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정하는 제3 경계값 결정부;를 더 포함할 수 있다.And a third boundary value determiner for determining a third boundary value for defining a boundary in which the target is distributed based on a reference axis perpendicular to the first reference plane with respect to the determined second binarization reference value .
제2의 2차원 영상 생성부는 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하는 제2의 2차원의 예비 타겟 영상 획득부 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 상기 타겟을 포함하는 영역을 결정하는 영역 결정부, 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시키는 대비 증가부 및 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하는 제2 이진화부를 포함하여 구현될 수 있다.The second two-dimensional image generating unit may include a second two-dimensional pre-target image acquiring unit for acquiring a second two-dimensional target image by binarizing the generated second two-dimensional image with respect to a predetermined first binarization reference value A binarized binary image with respect to a binarization reference value, comprising: a region determining unit for determining an area including the target; a contrast increasing unit for increasing the contrast of the determined area in the second two-dimensional image; And a second binarization unit for binarizing the first binarization reference value with respect to a predetermined second binarization reference value.
공간 정보 획득부는 획득된 2차원의 타겟 영상을 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산하는 제1좌표 계산부 및 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산하는 제2좌표 계산부를 포함할 수 있다.The spatial information obtaining unit may calculate the first coordinate in the first reference axis direction for at least one feature point included in the target image by projecting the obtained two-dimensional target image on the first reference axis included in the first reference plane, Masking a target image obtained by masking at least a part of a region including a region corresponding to the first coordinate in the obtained two-dimensional target image, and outputting the masked target image to the first reference axis, And a second coordinate calculation unit for calculating a second coordinate in the second reference axis direction in consideration of a distribution interval of the target image projected and masked in the second reference axis direction can do.
이때, 입력된 3차원 방사선 영상에서 제1 기준축 방향으로 제1 좌표값을 가지고 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 특징점의 제3 좌표를 계산하는 제3좌표 계산부;를 더 포함할 수 있다.At this time, in the inputted three-dimensional radiographic image, a two-dimensional image at a reference plane parallel to a third reference plane having a first coordinate value in the first reference axis direction and perpendicular to the first reference axis is binarized, And a third coordinate calculator for calculating a third coordinate of the feature point by projecting the third reference coordinate in the direction of the third reference axis perpendicular to the axis.
목적을 달성하기 위한 본 발명의 또 다른 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 입력된 3차원 방사선 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성하는 단계, 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득하는 단계 및 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 타겟의 공간 정보를 획득하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method for acquiring spatial information of a target included in a 3D radiographic image, comprising: projecting an input 3D radiographic image onto a predetermined first reference plane to generate a 2D image; Acquiring a two-dimensional target image for the target included in the generated two-dimensional image, and projecting the two-dimensional target image on a predetermined reference axis to acquire the spatial information of the target.
제1 기준면에 대하여 투영하는 것은, 입력된 3차원 영상에 대하여 제1 기준면과 평행한 기준면들 사이의 구간에 포함되는 단층 영상들의 밝기 정보를 적분하는 것으로 구현될 수 있다.The projection on the first reference plane may be implemented by integrating the brightness information of the tomographic images included in the interval between reference planes parallel to the first reference plane with respect to the input three-dimensional image.
본 발명에서 미리 결정된 기준축은 제1기준축 및 상기 제1 기준축과 수직인 제2 기준축을 포함하고, 미리 결정된 기준축에 투영하는 것은, 2차원의 타겟 영상을 상기 제1 기준축의 방향으로 투영하고, 2차원의 타겟 영상을 상기 제2 기준축의 방향으로 투영하는 것을 포함할 수 있다.The predetermined reference axis in the present invention includes a first reference axis and a second reference axis perpendicular to the first reference axis, and projecting on a predetermined reference axis includes projecting a two-dimensional target image in the direction of the first reference axis And projecting the two-dimensional target image in the direction of the second reference axis.
특히, 미리 결정된 제1 기준축에 투영하는 것은, 2차원 타겟 영상을 상기 제1 기준면에 포함되는 수직 방향의 제1 축 및 수평 방향의 제2축 중 적어도 하나의 방향으로 투영할 수 있다.In particular, projecting on the predetermined first reference axis can project the two-dimensional target image in at least one of a first axis in the vertical direction and a second axis in the horizontal direction included in the first reference plane.
이때 공간 정보는 상기 제1 기준면의 2차원의 타겟 영상에서 타겟이 분포하는 경계 영역을 정의하기 위한 복수개의 경계면들에 대한 공간정보 또는 획득된 2차원의 타겟 영상에 포함되는 적어도 하나의 특징점의 3차원 위치 좌표를 포함할 수 있고, 제1 기준면은 제1 기준면은 축상면, 시상면 및 관상면 중 어느 하나인 것으로 구현될 수 있다.At this time, the spatial information includes spatial information on a plurality of boundary surfaces for defining a boundary region in which the target is distributed in the two-dimensional target image of the first reference plane, or spatial information on a plurality of boundary surfaces Dimensional position coordinates, and the first reference surface may be implemented by the first reference surface being any one of an axial surface, a sagittal surface, and a coronal surface.
본 발명의 일 실시예에 따르면, 타겟의 공간 정보를 획득하는 단계는, 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 상기 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정하는 단계, 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 상기 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하고, 상기 생성된 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계를 포함할 수 있다.According to an embodiment of the present invention, acquiring the spatial information of the target includes a step of acquiring spatial information of a target, based on at least one reference axis included in the first reference plane in a projected image obtained by projecting a two- Determining a boundary value for defining a boundary in which the target is distributed, determining a second reference plane in consideration of the determined boundary value, and determining tomographic images parallel to the determined second reference plane and reconstructed from the three- And generating a second two-dimensional image by performing section integration on the basis of the boundary value, and acquiring a second two-dimensional target image using the generated second two-dimensional image.
여기서, 제2의 2차원의 타겟 영상을 획득하는 단계는, 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상을 획득하는 단계, 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 타겟을 포함하는 영역을 결정하는 단계, 제2의 2차원 영상에서 결정된 영역의 대비를 증가시키는 단계 및 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하는 단계를 더 포함할 수 있다.Here, the step of acquiring the second two-dimensional target image may include a step of acquiring a second two-dimensional preliminary target image by binarizing the generated second two-dimensional image with respect to a predetermined first binarization reference value, Dimensional binarization with respect to a binarization reference value, comprising: determining a region including a target; increasing a contrast of the region determined in the second two-dimensional image; and comparing the contrast-increased region with a predetermined second binarization And obtaining a second two-dimensional target image by binarizing the reference value.
또한, 미리 결정된 제2 이진화 기준값에 대하여 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정하는 단계를 더 포함할 수 있으며, 제1 이진화 기준값은 상기 제2의 2차원 영상의 화소값의 분포를 고려하여 결정되고, 제2 이진화 기준값은 상기 제1 이진화 기준값과, 상기 제1 이진화 기준값에 따라 이진화된 2차원 영상에서 상기 타겟이 존재하는 영역을 고려하여 결정되고, 제2 이진화 기준값은 상기 제1 이진화 기준값보다 크지 않은 값으로 결정되도록 할 수 있다.The method may further include the step of determining a third boundary value for defining a boundary in which the target is distributed on the basis of a reference axis perpendicular to the first reference plane with respect to a predetermined second binarization reference value, 1 binarization reference value is determined in consideration of the distribution of the pixel values of the second two-dimensional image, and the second binarization reference value is determined in a two-dimensional image binarized according to the first binarization reference value and the first binarization reference value, And the second binarization reference value may be determined to be a value not larger than the first binarization reference value.
본 발명의 또 다른 실시예에 따른 타겟의 공간 정보를 획득하는 단계는, 획득된 2차원의 타겟 영상을 상기 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산하는 단계, 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산하는 단계를 포함한다.The step of acquiring the spatial information of the target according to another embodiment of the present invention includes the steps of projecting the obtained two-dimensional target image onto a first reference axis included in the first reference plane, Calculating a first coordinate in a first reference axis direction with respect to a minutiae point, masking a remaining area of the obtained two-dimensional target image excluding at least a partial area including a region corresponding to the first coordinate, The masked target image is projected in a second reference axis direction perpendicular to the first reference axis and the masked reference image is projected in the second reference axis direction, And calculating a second coordinate.
이때, 입력된 3차원 방사선 영상에서, 상기 제1 기준축 방향으로 상기 제1 좌표값을 가지고 상기 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 상기 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 상기 특징점의 제3 좌표를 계산하는 단계를 더 포함하여 구현될 수 있다.Dimensional image at a reference plane parallel to a third reference plane perpendicular to the first reference axis with the first coordinate value in the first reference axis direction in the input three-dimensional radiation image, 1 and a third reference axis perpendicular to the second reference axis to calculate a third coordinate of the feature point.
본 발명에서 특징점은 아래턱점(Menton), 하악점(Gnathion), 코뿌리점(Nasion) 및 안와 최하방점(Orbitale) 중 적어도 어느 하나 일 수 있으며, 타겟은 치아의 일부로서 잇몸에 덮이지 아니하고 노출된 부분인 치관 또는 하악골로 구현될 수 있다.The feature of the present invention may be at least one of the following: Menton, Gnathion, Nasion, or Orbitale, and the target may not be covered with the gum as part of the teeth, Which is a part of the crown or mandible.
도 1은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치를 나타낸다.
도 2는 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치에 있어서 제2의 2차원의 타겟 영상 획득부를 상세히 도시한 것이다.
도 3은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법을 도시한 것이다.
도 4은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 타겟의 공간 정보를 획득하는 단계를 상세히 도시한 것이다.
도 5은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 타겟의 공간 정보를 획득하는 단계를 상세히 도시한 것이다.
도 6은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 제2의 2차원 영상을 생성하는 단계를 상세히 도시한 것이다.
도 7은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서, 타겟의 공간 정보를 획득하는 단계의 일예를 상세히 도시한 것이다.
도 8은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 9은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 10은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 11은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 12는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 13은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 14는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 15는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 16은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 17은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.
도 18은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다.FIG. 1 shows an apparatus for acquiring spatial information of a target included in a three-dimensional radiographic image according to an embodiment of the present invention.
FIG. 2 is a detailed block diagram of a second two-dimensional target image acquisition unit in a target spatial information acquisition apparatus included in a three-dimensional radiation image according to an embodiment of the present invention.
FIG. 3 illustrates a method of acquiring spatial information of a target included in a three-dimensional radiographic image according to an embodiment of the present invention.
FIG. 4 illustrates details of acquiring spatial information of a target in a method of acquiring spatial information of a target included in a 3D radiological image according to an exemplary embodiment of the present invention.
FIG. 5 illustrates a step of acquiring spatial information of a target in a spatial information acquisition method of a target included in a three-dimensional radiographic image according to an exemplary embodiment of the present invention.
FIG. 6 illustrates a step of generating a second two-dimensional image in a method of acquiring spatial information of a target included in a three-dimensional radiological image according to an exemplary embodiment of the present invention.
FIG. 7 illustrates an example of a step of acquiring spatial information of a target in a spatial information acquisition method of a target included in a three-dimensional radiation image according to an exemplary embodiment of the present invention.
FIG. 8 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 9 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiation image according to the present invention.
FIG. 10 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 11 shows an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 12 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiation image according to the present invention.
FIG. 13 shows an embodiment of a method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 14 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiation image according to the present invention.
FIG. 15 shows an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 16 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 17 illustrates an embodiment of a method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention.
FIG. 18 shows an embodiment of a method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention.
발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다. In order to fully understand the invention and the operational advantages of the present invention and the objects achieved by the practice of the present invention, reference should be made to the accompanying drawings and the accompanying drawings which illustrate preferred embodiments of the present invention.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다.BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, the present invention will be described in detail with reference to the preferred embodiments of the present invention with reference to the accompanying drawings. However, the present invention can be implemented in various different forms, and is not limited to the embodiments described. In order to clearly describe the present invention, parts that are not related to the description are omitted, and the same reference numerals in the drawings denote the same members.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “...부”, “...기”, “모듈”, “블록” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다. Throughout the specification, when an element is referred to as " including " an element, it does not exclude other elements unless specifically stated to the contrary. The terms "part", "unit", "module", "block", and the like described in the specification mean units for processing at least one function or operation, And a combination of software.
도 1은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치(10)를 나타낸다. 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치(10)는 미리 생성된 3차원 영상을 불러오거나, 새로 촬영된 3차원 영상을 입력으로 하여 영상의 공간 정보를 출력할 수 있다. 이때, 출력되는 공간 정보는 타겟의 영역 정보 또는 특징점의 좌표 정보를 포함할 수 있다.1 shows an
3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치(10)는 2차원 영상 생성부(100), 타겟 영상 획득부(200) 및 공간 정보 획득부(300)을 포함할 수 있다.The target spatial
2차원 영상 생성부(100)는 입력된 3차원 방사선 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성할 수 있다. 이때 3차원 방사선 영상은 별도의 장치를 통하여 입력 받거나 미리 저장된 영상을 이용할 수 있다. 영상의 촬영 대상은 바람직하게는 환자의 상, 하악을 포함하는 머리 영역이나, 이에 한정되지 아니하고 기타 진료 및 치료 목적상 필요한 대상에 적용될 수 있다. 이때, 영상 생성부(100)는 입력받은 3차원 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성하여 타겟 영상 획득부(200)로 전송할 수 있으며, 제1 기준면에 투영하는 것은 제1 기준면과 평행한 기준면들 사이의 구간에 포함되는 단층 영상들의 밝기 정보를 적분하여 이루어질 수 있다. 밝기 정보를 적분하는 것은, 밝기의 최대값만을 남기고 적분하는 방법, 밝기의 최소값만을 남기고 적분하는 방법 및 밝기의 평균값으로 적분하는 방법 중 어느 하나에 의하여 이루어질 수 있다.The two-dimensional image generating unit 100 may generate a two-dimensional image by projecting the input three-dimensional radiation image on a predetermined first reference plane. In this case, the 3D radiation image may be input through a separate device or may use a previously stored image. The object to be imaged can be preferably applied to a head area including the upper and lower parts of the patient, but not limited thereto, and other objects required for medical treatment and therapeutic purposes. At this time, the image generating unit 100 may generate a two-dimensional image by projecting the input three-dimensional image on a predetermined first reference plane, and transmit the generated two-dimensional image to the target
이때, 제1 기준면은 시상면, 축상면 및 관상면 중 어느 하나일 수 있으며, 타겟이 치아인 경우에 시상면을 제1 기준면으로 하여 투영하여 2차원 영상을 생성할 수 있다.In this case, the first reference plane may be any one of a sagittal plane, an axial plane, and a coronal plane, and when the target is a tooth, a sagittal plane may be projected as a first reference plane to generate a two-dimensional image.
타겟 영상 획득부(200)는 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득할 수 있다. 획득된 2차원의 타겟 영상은 타겟의 영역에 대한 경계가 나타나는 2진화 영상으로 구현 될 수 있으며, 이때 타겟은 영상에 포함되는 치아, 두개골 전체 등 공간 정보를 필요로 하는 영역에 대하여 미리 결정될 수 있다. 2차원의 타겟 영상은, 입력 받은 2차원 영상으로부터 영상 처리 과정을 통하여 얻을 수 있으며, 영상 처리 과정은 타겟의 해부학적 구조를 고려하고 위치관계, 크기 등의 정보를 이용하여 이진화, 구멍채우기, 팽창(dilation), 세선화(thinning)등의 영상처리기법을 조합하여 구현될 수 있다.The target
공간 정보 획득부(300)는 영역 계산부(310) 및 좌표 계산부(320)을 포함하여 구현될 수 있다. 공간 정보 획득부(300)는 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득한다. 이때, 타겟 영상을 입력으로 하여, 대상 타겟의 영역 정보 내지 특징점 좌표 정보를 포함하는 공간 정보를 얻을 수 있다. 본 발명의 일 실시예로서, 타겟은 치아일 수 있으며, 특징점은 환자의 아래턱점(Gnathion)으로 미리 정해질 수 있다.The spatial information obtaining unit 300 may be implemented by including an
영역 계산부(310)는 제1 경계값 결정부(312) 및 제2의 2차원의 타겟 영상 획득부(314)을 포함할 수 있으며, 선택적으로 제3 경계값 결정부(316)를 포함하여 구현될 수 있다. 영역 계산부(310)에서는 획득한 타겟 영상을 투영하여 타겟의 각 기준축에서의 분포를 정의하기 위한 경계값들을 구할 수 있다.The
제1 경계값 결정부(312)는, 차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 상기 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정할 수 있으며, 특히 치아를 타겟으로 하는 경우에 기준축은 제1 기준면에 포함되고, 타겟이 위치하는 공간의 높이에 해당하는 수직방향의 기준축으로 정해질 수 있다. 또한, 타겟 공간의 깊이에 해당하는 수평방향의 기준축을 포함하여 제1 경계값을 결정할 수 있다.The first boundary value determiner 312 defines a boundary on which the target is distributed based on at least one reference axis included in the first reference plane in a projected image obtained by projecting a target image of a dimension on a predetermined reference axis The reference axis may be included in the first reference plane and may be defined as a reference axis in the vertical direction corresponding to the height of the space where the target is located. In addition, the first boundary value can be determined including the horizontal reference axis corresponding to the depth of the target space.
제2의 2차원의 타겟 영상 획득부(314)는, 결정된 제1 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 제1 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성할 수 있다. 이때, 제2 기준면을 결정함에 있어서, 제2 기준면은 시상면, 축상면 및 관상면 중 어느 하나일 수 있으며 타겟이 치아이고 제1 기준면이 시상면인 경우에는 축상면을 제2 기준면으로 결정할 수 있다.The second two-dimensional target image obtaining unit 314 determines the second reference plane in consideration of the determined first boundary value, and outputs the tomographic images that are parallel to the determined second reference plane and reconstructed from the three- The second two-dimensional image can be generated by performing the section integration according to the boundary value. In this case, in determining the second reference plane, the second reference plane may be any one of a sagittal plane, an axial plane, and a coronal plane. If the target is a tooth and the first reference plane is a sagittal plane, have.
제2의 2차원의 타겟 영상 획득부(314)는, 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상을 획득하고, 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서 타겟을 포함하는 영역을 결정하고, 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시키고, 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 2차원의 타겟 영상을 획득할 수 있다.The second two-dimensional target image obtaining unit 314 obtains a second two-dimensional preliminary target image by binarizing the generated second two-dimensional image with respect to a predetermined first binarization reference value, Determining a region including the target in the binarized two-dimensional image with respect to the reference value, increasing the contrast of the determined region in the second two-dimensional image, binarizing the region with the increased contrast to a predetermined second binarization reference value A two-dimensional target image can be obtained.
제3 경계값 결정부(316)는 미리 결정된 제2 이진화 기준값에 대하여 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정할 수 있다. 이때, 제1 기준면과 수직하는 기준축을 제3 기준축으로 정의할 수 있으며, 제3 경계값을 타겟 공간의 너비에 대응하도록 정의 할 수 있다.The third threshold
좌표 계산부(320)는 제1 좌표 계산부(321) 및 제2 좌표 계산부(323)를 포함할 수 있으며, 제3 좌표 계산부(325)를 추가적으로 구비할 수 있다. 좌표 계산부(320)는 획득된 타겟 영상을 입력으로 하여 타겟의 일부로서 공간 정보를 필요로 하는 적어도 하나의 특징점의 3차원 위치 좌표를 구할 수 있다. 예컨대, 환자의 아래턱점(Menton)에 대한 위치좌표를 구할 수 있다. 본 발명에서의 특징점은 시상면 정중선에서 아래턱 가장 앞에 위치하는 하악점(Gnathion), 아래턱 전면 정중선의 최저점인 아래턱점(Menton), 코뿌리점(Nasion), 안과점(Orbitale), 전비극과 상악치조정점 사이 곡선의 최후방점인 A점(A point), 인프라덴탈레 하방과 포고니온 상방에 있는 하악골 커브상의 최후방점인 B점(B point), 및 하악각점(Gonion)등을 포함할 수 있다. 이때, 전비극(ANS, anterior nasal spine)은 상악골의 최전방점이고, 상악치조정점(SPr, superior prosthioin)은 상악치조골기의 최전하방점이며, 인프라덴탈레(Id, infradentale)은 하악 치조돌기의 최전상방점, 포고니온(Pog, pogonion)은 턱끝의 외형선에서 최전방점을 각각 의미한다.The coordinate
제1 좌표 계산부(321)는, 획득된 2차원의 타겟 영상을 상기 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산할 수 있으며, 특히 구하고자 하는 특징점이 환자의 아래턱점(Menton)인 경우에 시상면에 대하여 생성된 2차원 영상으로부터 타겟 영상을 획득하고, 이를 높이 방향에 해당하는 제1 기준축으로 투영하여 얻어진 1차원 정보로부터 타겟으로서 머리가 존재하는 위치를 파악할 수 있고, 따라서 특징점의 제1 경계값을 얻을 수 있으며 이로부터 특징점의 높이 즉 시상면에서 수직 방향 위치 정보를 얻을 수 있다.The first coordinate calculator 321 projects the obtained two-dimensional target image on a first reference axis included in the first reference plane, and calculates a first reference axis for at least one feature point included in the target image The first coordinate may be calculated. In particular, when the feature point to be obtained is the lower limit of the patient, a target image is acquired from the two-dimensional image generated with respect to the sagittal plane, The position of the head as the target can be grasped from the one-dimensional information obtained by the projection. Thus, the first boundary value of the minutiae point can be obtained, and the height information of the minutiae point, that is, the sagittal plane, can be obtained.
제2 좌표 계산부(323)는, 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산할 수 있다. 이때, 아래턱점(Menton)을 특징점으로 하는 경우에는 특징점의 제 2 기준축에서의 공간 정보 파악을 위하여, 기준축과 수직하는 제2 기준축 방향으로 투영하고 타겟의 분포 구간을 고려하여 제2 경계값을 구할 수 있다. 이로부터 타겟이 투영되는 구간의 중점에 해당하는 제2 좌표값을 얻을 수 있다.The second coordinate calculation unit 323 performs masking processing on the obtained two-dimensional target image excluding the at least part of the region including the region corresponding to the first coordinate, The second coordinate axis in the second reference axis direction can be calculated in consideration of the distribution period of the target image projected and masked in the second reference axis direction, in the second reference axis direction perpendicular to the first reference axis . In this case, when the minutia is a minutiae, in order to grasp the spatial information on the second reference axis of the minutiae, a projection is made in the direction of a second reference axis perpendicular to the reference axis, and a second boundary Value can be obtained. From this, a second coordinate value corresponding to the midpoint of the section in which the target is projected can be obtained.
제3 좌표 계산부(325)는 입력된 3차원 방사선 영상에서, 상기 제1 기준축 방향으로 상기 제1 좌표값을 가지고 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 상기 특징점의 제3 좌표를 계산할 수 있다. 특히 특징점이 아래턱점(Menton)인 경우에, 머리를 정면에서 바라본 경우의 좌우 방향에 해당하는 제3 기준축에 대하여 해당 타겟이 분포 구간을 고려하여 제3 경계값을 얻을 수 있다. 이로부터 타겟이 투영되는 구간의 중심을 계산하여 제3 좌표값을 얻을 수 있다.The third coordinate
도 2는 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치(10)에 있어서 제2의 2차원의 타겟 영상 획득부(314)를 상세히 도시한 것이다. 도 1을 참조하여 도 2를 설명하면 다음과 같다.FIG. 2 illustrates details of a second two-dimensional target image acquiring unit 314 in an
제2의 2차원의 타겟 영상 획득부(314)는 제2의 2차원의 예비 타겟 영상 획득부(314a), 제1 이진화부(314b), 영역 결정부(314c), 대비 증가부(314d) 및 제2 이진화부(314e)를 포함할 수 있다. 제2의 2차원의 타겟 영상 획득부(314)는 경계값 결정부(312)로부터 적어도 하나의 경계값을 입력받아 타겟 등이 위치하는 제2의 2차원 영상을 생성할 수 있다.The second two-dimensional target image acquiring unit 314 includes a second two-dimensional preliminary target
제2의 2차원의 타겟 영상 획득부(314a)는 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상을 획득할 수 있다. 이때, 미리 정해진 제1 이진화 기준값은 제2의 2차원 영상의 화소값의 분포를 고려하여 결정될 수 있다. 특히 치아의 강도 내지 골밀도를 고려하여 결정될 수 있다.The second two-dimensional target
영역 결정부(314b)는 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 타겟을 포함하는 영역을 결정할 수 있으며, 이 때 영역에 대한 경계는 전술한 본 발명에 따른 경계값 결정과 같이 미리 결정된 기준축에 투영하는 방법에 의하여 구할 수 있다.The region determining unit 314b can determine a region including a target in the binarized two-dimensional image with respect to the first binarization reference value, and the boundary for the region at this time can be determined in advance as a boundary value determination according to the above- And projecting on the determined reference axis.
대비 증가부(314c)는 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시킬 수 있다. 영역 결정부(314b)로부터 타겟을 포함하는 영역을 입력받아 제2의 2차원 영상으로부터 해당 영역을 추출하고, 추출된 영역에 대하여 화소의 밝기값의 대비를 증가시킬 수 있다. The contrast enhancement unit 314c may increase the contrast of the determined region in the second two-dimensional image. The region including the target is input from the region determining unit 314b, the region is extracted from the second two-dimensional image, and the contrast of the brightness of the pixel with respect to the extracted region is increased.
제2 이진화부(314d)는 대비 증가부(314c)로부터 대비가 증가된 영역을 입력받아 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득할 수 있다. 이때, 제2 이진화 기준값은 제1 이진화 기준값과, 제1 이진화 기준값에 따라 이진화된 2차원 영상에서 타겟이 존재하는 영역을 고려하여 정해질 수 있다. 바람직하게는, 제1 이진화 기준값보다 약간 낮은 값으로 정해질 수 있으며, 이때 제1 이진화 기준값 및 제2 이진화 기준값의 차이는 대비 증가부(314c)에 의하여 증가된 대비를 고려하여 정할 수 있다.The second binarization unit 314d may acquire a second two-dimensional target image by binarizing a predetermined second binarization reference value by receiving the contrast increased region from the contrast increasing unit 314c. At this time, the second binarization reference value can be determined in consideration of the region in which the target exists in the two-dimensional image binarized according to the first binarization reference value and the first binarization reference value. The difference between the first binarization reference value and the second binarization reference value may be determined in consideration of the contrast increased by the contrast increasing unit 314c.
도 3은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법을 도시한 것이다. 도 1을 참조하여 도 3을 설명하면 다음과 같다.FIG. 3 illustrates a method of acquiring spatial information of a target included in a three-dimensional radiographic image according to an embodiment of the present invention. Referring to FIG. 1, FIG. 3 will be described as follows.
본 발명에 따른 타겟의 공간 정보 획득 방법은 2차원의 영상을 생성하는 단계(S100), 2차원의 타겟 영상을 획득하는 단계(S200) 및 타겟의 공간 정보를 획득하는 단계(S300)을 포함할 수 있다. 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 따라, 3차원 영상을 입력으로 하여 타겟의 영역 정보 또는 특징점의 좌표 정보를 포함하는 공간 정보를 구할 수 있다.The method of acquiring spatial information of a target according to the present invention includes a step of generating a two-dimensional image (S100), a step of obtaining a two-dimensional target image (S200), and a step of acquiring spatial information of a target (S300) . According to the method of acquiring the spatial information of the target included in the 3D radiation image according to the present invention, spatial information including coordinate information of the target area information or minutiae can be obtained by inputting the 3D image.
2차원의 영상을 생성하는 단계(S100)는 입력된 3차원 방사선 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성할 수 있다. 이때 미리 생성된 3차원 영상을 불러오거나, 새로 촬영된 3차원 영상을 입력으로 할 수 있으며, 영상의 촬영 대상은 바람직하게는 환자의 상, 하악을 포함하는 머리 영역이나, 이에 한정되지 아니하고 기타 진료 및 치료 목적상 필요한 대상에 적용될 수 있다. 이때, 2차원의 영상을 생성하는 단계(S100)는 입력받은 3차원 영상을 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성할 수 있으며, 제1 기준면에 투영하는 것은 제1 기준면과 평행한 기준면들 사이의 구간에 포함되는 단층 영상들의 밝기 정보를 적분하여 이루어질 수 있다.The step of generating a two-dimensional image (S100) may generate a two-dimensional image by projecting the input three-dimensional radiation image on a predetermined first reference plane. In this case, a pre-generated three-dimensional image can be retrieved or a newly captured three-dimensional image can be input. The object to be imaged is preferably a head region including a patient's upper and lower parts, And to subjects in need of treatment. At this time, the step of generating a two-dimensional image (S100) may generate a two-dimensional image by projecting the input three-dimensional image on a predetermined first reference plane, and projecting the first three- The brightness information of the tomographic images included in the interval between the reference planes can be integrated.
이때, 제1 기준면은 시상면, 축상면 및 관상면 중 어느 하나일 수 있으며, 타겟이 치아인 경우에 시상면을 제1 기준면으로 하여 투영하여 2차원 영상을 생성할 수 있다.In this case, the first reference plane may be any one of a sagittal plane, an axial plane, and a coronal plane, and when the target is a tooth, a sagittal plane may be projected as a first reference plane to generate a two-dimensional image.
2차원의 타겟 영상을 획득하는 단계(S200)는 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득할 수 있다. 이때 획득된 2차원의 타겟 영상을 타겟의 영역에 대한 경계가 나타나는 2진화 영상으로 나타낼 수 있고, 타겟은 영상에 포함되는 치아, 두개골 전체 등 공간 정보를 필요로 하는 영역에 대하여 미리 결정될 수 있다. 2차원의 타겟 영상은, 입력 받은 2차원 영상으로부터 영상 처리 과정을 통하여 얻을 수 있으며, 영상 처리 과정은 타겟의 해부학적 구조를 고려하고 위치관계, 크기 등의 정보를 이용하여 이진화, 구멍채우기, 팽창(dilation), 세선화(thinning)등의 영상처리기법을 조합하여 구현될 수 있다.A step S200 of acquiring a two-dimensional target image can acquire a two-dimensional target image of the target included in the generated two-dimensional image. At this time, the obtained two-dimensional target image can be represented by a binarized image in which the boundary for the target region appears, and the target can be determined in advance for the region requiring spatial information such as teeth, the entire skull, etc. included in the image. The 2D target image can be obtained from the input 2D image through the image processing process. The image processing process takes into account the anatomical structure of the target and uses binomial, hole filling, expansion and image processing techniques such as dilation, thinning, and the like.
타겟의 공간 정보를 획득하는 단계(S300)는 차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득할 수 있다. 이때 획득하고자 하는 공간 정보는, 제1 기준면의 상기 2차원의 타겟 영상에서 상기 타겟이 분포하는 경계 영역을 정의하기 위한 복수개의 경계면들에 대한 공간정보 또는 획득된 2차원의 타겟 영상에 포함되는 적어도 하나의 특징점의 3차원 위치 좌표를 포함할 수 있다.The step of acquiring the spatial information of the target (S300) may acquire the spatial information of the target by projecting the target image of the dimension on the predetermined reference axis. The spatial information to be acquired may include at least spatial information on a plurality of boundary surfaces for defining a boundary region in which the target is distributed in the two-dimensional target image of the first reference plane, And may include three-dimensional position coordinates of one feature point.
이때, 미리 결정된 기준축에 투영하는 것은 2차원 타겟 영상을 상기 제1 기준면에 포함되는 수직 방향의 제1 축 및 수평 방향의 제2축 중 적어도 하나의 방향으로 투영할 수 있으며, 특히 미리 결정된 기준축은 제1 기준축 및 제1 기준축과 수직인 제2 기준축을 포함하고 미리 결정된 기준축에 투영하는 것은 2차원의 타겟 영상을 제1 기준축의 방향으로 투영하고, 2차원의 타겟 영상을 제2 기준축의 방향으로 투영하는 것으로 구현될 수 있다.At this time, projecting on the predetermined reference axis can project the two-dimensional target image in at least one of the first axis in the vertical direction and the second axis in the horizontal direction included in the first reference plane, The axis includes a first reference axis and a second reference axis perpendicular to the first reference axis, and projecting on a predetermined reference axis projects the two-dimensional target image in the direction of the first reference axis, It can be implemented by projecting in the direction of the reference axis.
도 4은 본 발명의 일 실시예에 따른 차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 타겟의 공간 정보를 획득하는 단계(S300)를 상세히 도시한 것이다.FIG. 4 illustrates details of a step S300 of acquiring spatial information of a target in a spatial information acquisition method of a target included in a 3D radiographic image according to an exemplary embodiment of the present invention.
본 발명에 따른 타겟의 공간 정보를 획득하는 단계(S300)는 타겟이 분포하는 경계를 결정하기 위한 제1 경계값을 결정하는 단계(S310) 및 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득는 단계(S330)를 포함할 수 있다.The step S300 of acquiring the spatial information of the target according to the present invention includes a step S310 of determining a first boundary value for determining a boundary on which a target is distributed and a step S210 of using a second two- Dimensional target image (S330).
제1 경계값을 결정하는 단계(S310)는 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정할 수 있다. 특히 대상 타겟이 치아인 경우에, 치아에 대한 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 치아가 분포하는 영역의 경계로서 바운딩 박스(bounding box)를 정의하기 위한 경계값을 구할 수 있다.The step S310 of determining the first boundary value defines a boundary in which the target is distributed based on at least one reference axis included in the first reference plane in the projected image obtained by projecting the two-dimensional target image on the predetermined reference axis. Can be determined. In particular, when the target is a tooth, a two-dimensional target image of the tooth may be projected on a predetermined reference axis to obtain a boundary value for defining a bounding box as a boundary of a region where teeth are distributed.
제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계(S330)에서는 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 상기 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하고, 상기 생성된 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득할 수 있다. 이때, 제2의 2차원의 타겟 영상을 획득하는 것과 관련하여, 상세한 내용은 도6에서 후술한다.In step S330 of acquiring a second two-dimensional target image using the second two-dimensional image, a second reference plane is determined in consideration of the determined boundary value, and the second reference plane parallel to the determined second reference plane, A second two-dimensional image is generated by integrating the tomographic images reconstructed from the image according to the boundary value, and a second two-dimensional target image can be acquired using the generated second two-dimensional image . At this time, with regard to acquiring the second two-dimensional target image, the details will be described later in Fig.
도 5는 본 발명의 일 실시예에 따른 2차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 타겟의 공간 정보를 획득하는 단계(S300)를 상세히 도시한 것으로서, 특히 공간정보 중 특징점의 3차원 위치좌표를 획득하는 경우에 관한 것이다.FIG. 5 illustrates in detail a step S300 of acquiring spatial information of a target in a spatial information acquisition method of a target included in a two-dimensional radiological image according to an exemplary embodiment of the present invention. Specifically, Dimensional position coordinate is obtained.
본 발명에 따른 타겟의 공간 정보를 획득하는 단계(S300)는 제1 좌표를 계산하는 단계(S320), 제2 좌표를 계산하는 단계(S340) 및 제3 좌표를 계산하는 단계(S360)를 포함하여 구현될 수 있다.The step S300 of obtaining the spatial information of the target according to the present invention includes a step S320 of calculating a first coordinate, a step S340 of calculating a second coordinate, and a step S360 of calculating a third coordinate .
제1 좌표를 계산하는 단계(S320)는 획득된 2차원의 타겟 영상을 상기 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산할 수 있으므로 특징점의 3차원 위치좌표 중 1 성분을 구할 수 있다. 예를 들어, 특징점이 환자의 아래턱점(Menton)인 경우에는 시상면에 대하여 생성된 2차원 영상으로부터 타겟 영상을 획득하고, 이를 높이 방향에 해당하는 제1 기준축으로 투영하여 얻어진 1차원 정보로부터 제1 좌표값을 구할 수 있고, 제1 좌표를 통하여 특징점의 높이 즉 시상면상 수직 방향에 해당하는 정보를 얻을 수 있다. The step of calculating the first coordinate (S320) may include projecting the obtained two-dimensional target image on a first reference axis included in the first reference plane to determine a first reference axis direction It is possible to obtain one component of the three-dimensional position coordinates of the feature point. For example, when the minutiae are the patient's lower jaw, a target image is obtained from the generated two-dimensional image with respect to the sagittal plane, and from the one-dimensional information obtained by projecting the target image onto the first reference axis corresponding to the height direction The first coordinate value can be obtained and the information corresponding to the height of the feature point, that is, the vertical direction on the sagittal plane, can be obtained through the first coordinate.
제2 좌표를 계산하는 단계(S340)에서는 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산할 수 있다. 이때, 위치 좌표를 구하고자 하는 특징점이 아래턱점인 경우에는, 기준축과 수직하는 제2 기준축 방향으로 투영하고 타겟의 분포 구간을 고려하여 제2 경계값을 구할 수 있다. 이로부터 타겟이 투영되는 구간의 중점에 해당하는 제2 좌표값을 얻을 수 있고, 제2 좌표는 시상면 상에서 수평 방향의 좌표로 정의되어 아래턱점의 수평방향 좌표값을 구할 수 있다.In the step of calculating the second coordinate (S340), masking processing is performed on the obtained region of the two-dimensional target image except for at least a region including the region corresponding to the first coordinate, and the masked- The second coordinate axis in the second reference axis direction can be calculated in consideration of the distribution period of the target image projected and masked in the second reference axis direction have. In this case, if the feature point for which the position coordinate is to be obtained is the lower jaw, the second boundary value can be obtained by projecting in the direction of the second reference axis perpendicular to the reference axis, and considering the distribution range of the target. A second coordinate value corresponding to the middle point of the section in which the target is projected can be obtained therefrom, and the second coordinate can be defined as the coordinate in the horizontal direction on the sagittal plane to obtain the horizontal coordinate value of the lower limit point.
제3 좌표를 계산하는 단계(S360)에서는 입력된 3차원 방사선 영상에서, 상기 제1 기준축 방향으로 상기 제1 좌표값을 가지고 상기 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 상기 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 상기 특징점의 제3 좌표를 계산할 수 있다. 특징점이 아래턱점(Menton)인 경우에, 머리를 정면에서 바라본 경우의 좌우 방향에 해당하는 제3 기준축에 대하여 해당 타겟이 분포 구간을 고려하여 제3 경계값을 얻을 수 있다. 이로부터 타겟이 투영되는 구간의 중심을 계산하여 제3 좌표값을 얻을 수 있다.In the step S360 of calculating the third coordinate, in the input three-dimensional radiographic image, the reference coordinate value is calculated in the reference plane parallel to the third reference plane, which has the first coordinate value in the first reference axis direction and is perpendicular to the first reference axis The two-dimensional image may be binarized and the third coordinate of the feature point may be calculated by projecting the two-dimensional image in a direction of a third reference axis perpendicular to the first and second reference axes. In the case where the minutiae are the lower ments, the third boundary value can be obtained in consideration of the distribution interval of the target with respect to the third reference axis corresponding to the left and right direction when the head is viewed from the front. From this, the third coordinate value can be obtained by calculating the center of the section where the target is projected.
도 6은 본 발명의 일 실시예에 따른 차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서 제2의 2차원 영상을 생성하는 단계(S330)를 상세히 도시한 것이다. 제2의 2차원 영상을 생성하는 단계(S330)은 획득한 2차원의 타겟 영상으로부터 결정된 제1 경계값을 이용하여 제2의 2차원 영상을 생성하고, 생성된 제2의 2차원 영상으로부터 제2의 2차원 타겟 영상을 획득할 수 있다.FIG. 6 is a detailed view illustrating a step (S330) of generating a second two-dimensional image in a method of acquiring spatial information of a target included in a dimensional radiographic image according to an embodiment of the present invention. The step of generating a second two-dimensional image (S330) generates a second two-dimensional image using the first boundary value determined from the obtained two-dimensional target image, and generates a second two- 2 < / RTI >
본 발명에 따른 제2의 2차원 영상을 생성하는 단계(S330)는 제2의 2차원의 타겟 영상을 획득하는 단계(S331), 제1 이진화 기준값에 대하여 이진화하는 단계(s333), 대비를 증가시키는 단계(S335) 및 제2 이진화 기준값에 대하여 이진화하는 단계(S337)를 포함할 수 있다.The step of generating a second two-dimensional image according to the present invention (S330) includes a step (S331) of acquiring a second two-dimensional target image, a step (S333) of binarizing the first binarization reference value, (S335) and binarizing the second binarization reference value (S337).
제2의 2차원의 예비 타겟 영상을 획득하는 단계(S331)에서는 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상을 획득할 수 있다. 이때, 미리 정해진 제1 이진화 기준값은 제2의 2차원 영상의 화소값의 분포를 고려하여 결정될 수 있다. 특히 타겟의 강도 내지 골밀도를 고려하여 결정될 수 있다.In the step S331 of acquiring the second two-dimensional preliminary target image, the generated second two-dimensional image may be binarized to a predetermined first binarization reference value to obtain a second two-dimensional preliminary target image . At this time, the predetermined first binarization reference value may be determined in consideration of the distribution of pixel values of the second two-dimensional image. Especially the strength of the target or the bone density.
타겟을 포함하는 영역을 결정하는 단계(S333)에서는 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 상기 타겟을 포함하는 영역을 결정할 수 있다. 이때 영역에 대한 경계는 전술한 본 발명에 따른 경계값 결정과 같이 미리 결정된 기준축에 투영하는 방법에 의하여 구할 수 있다.In the step S333 of determining the region including the target, the region including the target in the binarized binary image with respect to the first binarization reference value may be determined. At this time, the boundaries for the regions can be obtained by a method of projecting on a predetermined reference axis such as the boundary value determination according to the present invention described above.
대비를 증가시키는 단계(S335)는 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시킬 수 있다. 이때, 타겟을 포함하는 영역을 입력 받아 제2의 2차원 영상으로부터 해당 영역을 추출하고, 추출된 영역에 대하여 화소의 밝기값의 대비를 증가시킬 수 있다.The step of increasing contrast (S335) may increase the contrast of the determined region in the second two-dimensional image. At this time, the region including the target may be input, the corresponding region may be extracted from the second two-dimensional image, and the contrast of the brightness of the pixel may be increased with respect to the extracted region.
제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하는 단계(S337)에서는 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득할 수 있다. 이때, 제2 이진화 기준값은 제1 이진화 기준값과, 제1 이진화 기준값에 따라 이진화된 2차원 영상에서 타겟이 존재하는 영역을 고려하여 정해질 수 있다. 바람직하게는, 제1 이진화 기준값보다 약간 낮은 값으로 정해질 수 있으며, 이때 제1 이진화 기준값 및 제2 이진화 기준값의 차이는 대비를 증가시키는 단계(S335)에 따라 증가된 대비를 고려하여 정할 수 있다.In step S337 of binarizing the second binarization reference value to acquire a second two-dimensional target image, the second binarized target image is obtained by binarizing the region of increased contrast to a predetermined second binarization reference value can do. At this time, the second binarization reference value can be determined in consideration of the region in which the target exists in the two-dimensional image binarized according to the first binarization reference value and the first binarization reference value. The difference between the first binarization reference value and the second binarization reference value may be determined by considering the increased contrast according to step S335 of increasing the contrast .
도 7은 본 발명의 일 실시예에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법에 있어서, 타겟의 공간 정보를 획득하는 단계(S300)의 일예를 상세히 도시한 것이다. 도 1 및 도 4를 참조하여 설명하면 다음과 같다.FIG. 7 illustrates in detail a step S300 of acquiring spatial information of a target in a spatial information acquisition method of a target included in a three-dimensional radiation image according to an embodiment of the present invention. Referring to FIGS. 1 and 4, the following will be described.
본 발명의 일 실시예에 따르면, 타겟의 공간 정보를 획득하는 단계(S300)는 제1 경계값을 결정하는 단계(S310) 및 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계(S330)에 있어서 제3 경계값을 결정하는 단계(S350)를 추가적으로 구비할 수 있다. 제1 경계값을 결정하는 단계(S310) 및 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계(S330)에 대하여는 도 4에서 상술하였으므로 이하에서는 제3 경계값을 결정하는 단계(S350)에 대하여 설명한다.According to an embodiment of the present invention, the step of acquiring the spatial information of the target (S300) includes a step S310 of determining a first boundary value and a step of acquiring a second two- (S350) of determining a third boundary value in step S330 of acquiring the third boundary value. Since the step of determining the first boundary value (S310) and the step of obtaining the second two-dimensional target image using the second two-dimensional image (S330) have been described with reference to FIG. 4, The determination step S350 will be described.
제3 경계값을 결정하는 단계(S350)에서는, 미리 결정된 제2 이진화 기준값에 대하여 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정할 수 있다. . 이때, 제1 기준면과 수직하는 기준축을 제3 기준축으로 정의할 수 있으며, 제3 기준축상에서 타겟의 분포로 정의되는 제3 경계값을 타겟 공간의 너비에 대응하도록 정의 할 수 있다. 특히, 타겟이 치아인 경우에 환자의 머리를 정면에서 바라보았을 때 좌우방향에 해당하는 기준축을 제3 기준축으로 정의하고, In the step S350 of determining the third boundary value, a binarized region for a predetermined second binarization reference value is defined as a third boundary value for defining a boundary in which the target is distributed based on a reference axis perpendicular to the first reference plane Can be determined. . In this case, the reference axis perpendicular to the first reference plane can be defined as a third reference axis, and the third boundary value defined as the distribution of the target on the third reference axis can be defined to correspond to the width of the target space. In particular, when the target is a tooth, when the head of the patient is viewed from the front, a reference axis corresponding to the left and right direction is defined as a third reference axis,
구해지는 제3 경계값을 치아가 위치하는 공간의 너비에 대응할 수 있다.The calculated third boundary value may correspond to the width of the space in which the tooth is located.
도 8은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 1내지 도7을 참조하여 설명하면 다음과 같다.FIG. 8 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention. 1 to 7, the following will be described.
본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 미리 결정된 제1 기준면에 대하여 투영하여 2차원 영상을 생성하는 단계를 포함할 수 있으며, 이때 제1 기준면은 시상면(sagittal), 축상면(axial), 관상면(coronal)중 어느 하나인 것으로 구현 될 수 있다. 본 실시예에서는 제1 기준면이 머리를 측면에서 바라본 상태에서 수직으로 자른 단면인 시상면인 경우(a)에 입력된 3차원 영상을 시상면에 대하여 투영하는 경우를 상정한다. 이때, 입력된 3차원 영상을 제1 기준면으로서 시상면과 평행한 기준면들 사이의 구간에 포함되는 단층 영상들의 밝기 정보를 적분하여 투영된 2차원 영상(b)을 획득할 수 있다.A method of acquiring spatial information of a target included in a 3D radiographic image according to the present invention may include generating a 2D image by projecting a predetermined first reference plane, wherein the first reference plane is a sagittal plane, , An axial surface, and a coronal surface. In the present embodiment, it is assumed that the first reference plane is a sagittal plane, which is a vertically cut section in a state where the head is viewed from the side, and the three-dimensional image input in (a) is projected on the sagittal plane. At this time, it is possible to obtain the projected two-dimensional image (b) by integrating the brightness information of the tomographic images included in the interval between the reference planes parallel to the sagittal plane as the first reference plane.
도 9는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 1내지 도7을 참조하여 설명하면 다음과 같다.FIG. 9 illustrates an embodiment of a method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention. 1 to 7, the following will be described.
본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 생성된 2차원의 영상에 포함된 타겟(A)에 대한 2차원의 타겟 영상을 획득(a)하고, 획득한 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득(b)하는 단계를 포함하여 구현될 수 있다. 이때, 2차원의 타겟 영상(a)는 도 8의 (b)와 같이 얻어진 2차원의 영상으로부터 영상 처리를 거쳐 얻어질 수 있다. 여기서 영상 처리는 타겟 등의 해부학적 구조, 위치관계, 크기 등의 정보를 이용하고 이진화, 필터링(filtering), 구멍채우기(hole filling), 선 그리기, 더하기, 빼기, 팽창(dilation), 세선화(thinning) 등과 같은 영상 처리 방법을 조합하여 이루어질 수 있다.A method of acquiring a spatial information of a target included in a 3D radiological image according to the present invention includes the steps of (a) acquiring a two-dimensional target image of a target A included in the generated two-dimensional image, And projecting the target image onto a predetermined reference axis to obtain (b) the spatial information of the target. At this time, the two-dimensional target image (a) can be obtained through image processing from the two-dimensional image obtained as shown in FIG. 8 (b). Image processing uses information such as anatomical structure, positional relationship, and size of the target and performs image processing such as binarization, filtering, hole filling, line drawing, addition, subtraction, dilation, thinning), and the like.
본 실시예의 경우 타겟(A)는 환자의 치아이며, 획득하고자 하는 공간 정보는 치아가 분포하는 3차원 공간에서의 깊이 및 높이 정보인 경우를 가정한다. 이때, 미리 결정된 기준축에 투영하는 것은, 2차원의 치아 영상(A)을 (b)와 같이 제1 기준축의 방향으로 투영하고, 상기 2차원의 타겟 영상을 상기 제2 기준축의 방향으로 투영하고, 그로부터 얻어진 제1 경계값 및 제2 경계값으로 정의되는 영역(B)를 통하여 타겟(치아)의 제1 기준면에서의 분포 영역 정보로서 깊이(제2 경계값) 및 높이(제1 경계값) 정보를 얻을 수 있다.In this embodiment, it is assumed that the target A is a patient's tooth, and the spatial information to be acquired is depth and height information in a three-dimensional space in which teeth are distributed. At this time, projection on the predetermined reference axis projects the two-dimensional tooth image A in the direction of the first reference axis as shown in (b), projects the two-dimensional target image in the direction of the second reference axis (Second boundary value) and height (first boundary value) as distribution area information on the first reference plane of the target (tooth) through the area B defined by the first boundary value and the second boundary value obtained therefrom, Information can be obtained.
도 10은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 1내지 9를 참조하여 설명하면 다음과 같다.FIG. 10 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention. 1 to 9, the following will be described.
본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득(a)하고, 획득한 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 타겟의 공간 정보를 획득(b)하는 단계를 포함하여 구현될 수 있다. A method of acquiring a spatial information of a target included in a 3D radiological image according to the present invention includes the steps of (a) obtaining a two-dimensional target image of a target included in the generated two-dimensional image, (B) projecting on a predetermined reference axis to obtain spatial information of the target.
본 실시예의 경우 타겟은 환자의 두개골이며, 획득하고자 하는 공간 정보는 타겟의 일부로서 환자의 아래턱 전면 정중선의 최저점에 위치하는 특징점인 아래턱점(Menton)의 3차원 위치 좌표를 구하고자 하는 경우를 가정한다. 이때, 미리 결정된 기준축에 투영하는 것은, 2진화된 영상인 2차원의 타겟 영상(a)을 (b)와 같이 제1 기준축의 방향으로 투영하고, 그로부터 얻어진 제1 경계값을 통하여 특징점(아래턱점)의 제1 기준면에서의 위치 좌표 정보로서 높이(제1 경계값) 정보를 얻을 수 있다.In this embodiment, the target is the skull of the patient, and the spatial information to be acquired is a part of the target, assuming that the three-dimensional position coordinate of the lower Menton, which is a minutiae located at the lowest point of the lower front midline of the patient, do. At this time, projecting on a predetermined reference axis projects the two-dimensional target image (a), which is a binarized image, in the direction of the first reference axis as shown in (b) Height (first boundary value) information can be obtained as position coordinate information on the first reference plane of the point.
도 11은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도1 내지 9를 참조하여 설명하면 다음과 같다.FIG. 11 shows an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention. 1 to 9, the following will be described.
본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 획득한 공간 정보를 입력된 3차원 영상으로부터 2차원 영상을 생성하는 과정에서 이용하여, 한정된 구간에서의 단층 영상들을 적분하여 원하는 구간에서의 2차원 영상을 획득하도록 할 수 있다. 이는, 획득한 2차원 영상을 소정의 기준축에 투영하여 1차원 경계값 정보를 획득함에 있어서도 영역을 한정하여 투영하도록 이용할 수 있다.The method of acquiring the spatial information of the target included in the 3D radiation image according to the present invention uses the obtained spatial information in the process of generating the 2D image from the inputted 3D image to integrate the tomographic images in the limited region It is possible to acquire a two-dimensional image in a section. This can be used to project the acquired two-dimensional image on a predetermined reference axis so as to confine the region in acquiring the one-dimensional boundary value information.
본 발명의 일 실시예로서, 타겟은 환자의 치아이며, 획득하고자 하는 공간 정보는 치아가 분포하는 3차원 공간에서의 너비 정보인 경우에 도 9의 (b)에서와 같이 획득한 치아의 높이 정보를 이용하여, 입력된 3차원 영상의 한정된 높이 구간에서 축상면에 투영하여 치아의 축상면에서의 2차원 영상을 획득할 수 있는데, 이때 치아 공간의 높이를 한정하기 위하여 도 9에서 얻어진 제1 경계값 정보를 통해 적분하여 투영할 공간의 구간을 A, B와 같이 한정할 수 있다. 또한 도 9에서 획득한 제2 경계값(깊이) 정보를 선택적으로 반영하여 보다 한정된 영역에서의 치아의 2차원 영상을 획득할 수 있다.In one embodiment of the present invention, when the target is a tooth of a patient and the spatial information to be acquired is width information in a three-dimensional space in which teeth are distributed, the height information of the obtained tooth as shown in FIG. Dimensional image is projected on the upper surface of the axis in a limited height section of the input three-dimensional image to obtain a two-dimensional image on the upper surface of the tooth. In order to limit the height of the tooth space, The interval of the space to be projected by integration through the value information can be limited to A and B. Also, the second boundary value (depth) information obtained in FIG. 9 may be selectively reflected to acquire a two-dimensional image of a tooth in a more limited region.
도 12는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 1내지 11을 참조하여 설명하면 다음과 같다.FIG. 12 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiation image according to the present invention. 1 to 11, the following will be described.
본 발명에 따른 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하고, 상기 생성된 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계를 포함 할 수 있다.A method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention includes the steps of: determining a second reference plane in consideration of a determined boundary value; determining a tomographic image that is parallel to the determined second reference plane and reconstructed from the three- And a step of obtaining a second two-dimensional target image by using the generated second two-dimensional image.
본 실시예의 경우, 타겟(A)은 환자의 치아이며, 획득하고자 하는 공간 정보는 치아가 분포하는 3차원 공간에서의 너비 정보이고 적분의 기준이 되는 제2 기준면은 축상면인 경우를 가정한다. 입력된 3차원 영상을, 도 9의 (b)에서와 같이 획득한 타겟(A)의 제1 기준축에서의 분포 정보(제1 경계값)을 이용하여 얻어진 타겟(A)의 분포 구간(도 11)에 따라 구간 적분하여 제2의 2차원 영상(a)을 생성할 수 있다. 생성된 제2의 2차원 영상(a)로부터, 영상 처리를 거쳐 제2의 2차원의 타겟 영상(b)를 획득할 수 있다. In the case of this embodiment, it is assumed that the target A is a patient's tooth, the spatial information to be acquired is width information in a three-dimensional space in which teeth are distributed, and the second reference surface serving as a reference of integration is an axial surface. The input three-dimensional image is divided into a distribution section of the target (A) obtained by using the distribution information (first boundary value) on the first reference axis of the target (A) obtained as shown in FIG. 9 11) to generate a second two-dimensional image (a). From the generated second two-dimensional image (a), the second two-dimensional target image (b) can be acquired through image processing.
도 13은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 12와 연결되는 것으로서, 도 1내지 12를 참조하여 설명하면 다음과 같다.FIG. 13 shows an embodiment of a method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention. 12, which will be described with reference to FIGS. 1 to 12. FIG.
본 발명에 따른 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정하는 단계를 포함할 수 있다. 본 실시예에서는 타겟이 환자의 치아인 경우를 가정한다. 이때, (a)와 같이 획득되고 2진화된 치아의 축상면 2차원 영상을 도 9에서 투영의 기준이 되었던 제1 기준축 및 제2 기준축과 수직하는 제3 기준축에 대하여 투영하여, 제3 경계값을 얻을 수 있다. 제 3 기준축은 환자의 머리를 정면에서 바라보았을 때, 좌우방향에 해당하는 것으로서 제3 경계값은 치아의 너비에 대응한다.A method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention determines a third boundary value for defining a boundary in which the target is distributed with reference to a reference axis perpendicular to the first reference plane . In this embodiment, it is assumed that the target is a patient's tooth. At this time, an axial top two-dimensional image of the tooth obtained and binarized as shown in (a) is projected with respect to a first reference axis which became a reference of projection in FIG. 9 and a third reference axis which is perpendicular to the second reference axis, 3 boundary value can be obtained. The third reference axis corresponds to the left and right direction when the patient's head is viewed from the front, and the third boundary value corresponds to the width of the teeth.
도 14는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 10와 연결될 수 있으며, 도1 내지 13을 참조하여 설명하면 다음과 같다.FIG. 14 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiation image according to the present invention. 10, and will be described with reference to FIGS. 1 to 13. FIG.
본 발명에 따른 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 획득된 2차원의 타겟 영상에서 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 마스킹 처리된 타겟 영상을 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 제2 기준축 방향의 제2 좌표를 계산하는 단계를 포함하여 구현될 수 있다.A method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention includes masking a remaining region excluding at least a region including a region corresponding to a first coordinate in a two- The masked target image is projected in the second reference axis direction perpendicular to the first reference axis and the second coordinate axis in the second reference axis direction in consideration of the distribution interval of the masked target image projected in the second reference axis direction And the step of calculating the number of times of the operation.
본 실시예에서는 도 10과 같이 타겟(A)은 환자의 두개골이며, 획득하고자 하는 공간 정보는 아래턱점의 위치좌표인 경우를 가정한다. 도 10의 (b)에서와 같이 얻어지는 아래턱점의 높이 정보를 이용하여, 획득된 2차원의 타겟 영상에서 아래턱점의 높이에 대응되는 일부의 영역(C)을 제외한 나머지 영역을 마스킹 처리하고, 마스킹 처리된 타겟 영상을 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여, 분포 구간의 중점(B)을 제2 기준축 방향의 제2 좌표로 구할 수 있다.In this embodiment, it is assumed that the target A is the skull of the patient and the spatial information to be acquired is the position coordinate of the lower jaw as shown in FIG. Masking processing is performed on the remaining area excluding the part of the area C corresponding to the height of the lower jaw in the obtained two-dimensional target image using the height information of the lower jaw obtained as shown in FIG. 10 (b) The processed target image is projected in the second reference axis direction perpendicular to the first reference axis and the center point B of the distribution interval is calculated in consideration of the distribution interval of the target image projected in the second reference axis direction and masked 2 < / RTI > reference axis direction.
도 15는 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 14와 연결될 수 있으며, 도 1내지 14를 참조하여 설명하면 다음과 같다.FIG. 15 shows an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention. 14, which will be described with reference to FIGS. 1 to 14. FIG.
본 발명에 따른 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은, 입력된 3차원 방사선 영상에서 제1 기준축 방향으로 제1 좌표값을 가지고 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 특징점의 제3 좌표를 계산하는 단계를 포함할 수 있다. 본 실시예에서는 10과 같이 타겟(A)은 환자의 두개골이며, 획득하고자 하는 공간 정보는 아래턱점의 위치좌표이고, 제3 기준면은 축상면인 경우를 가정한다. 이때, 입력된 3차원 영상으로부터 아래턱점의 높이에 대응되고 축상면과 평행한 기준면에서의 2차원 영상을 이진화하고, 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 아래턱점의 제3 좌표를 구할 수 있다. 제3 기준축은 머리를 정면에서 보았을 때 좌우 방향의 기준축으로서, 제3 좌표는 아래턱점의 좌우 방향 위치 정보를 의미한다. A method of acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention is a method of acquiring spatial information of a target in a three-dimensional radiation image having a first coordinate value in a first reference axis direction and a third reference plane perpendicular to a first reference axis And a step of binarizing the two-dimensional image on the parallel reference plane and projecting the two-dimensional image in the third reference axis direction perpendicular to the first and second reference axes to calculate the third coordinates of the feature point. In this embodiment, it is assumed that the target A is the skull of the patient, the spatial information to be acquired is the position coordinate of the lower jaw, and the third reference plane is the axially upper surface. At this time, a two-dimensional image corresponding to the height of the lower jaw and parallel to the upper surface of the axis is binarized from the input three-dimensional image, and is projected in the direction of a third reference axis perpendicular to the first and second reference axes, Can be obtained. The third reference axis is the reference axis in the left and right direction when the head is viewed from the front, and the third coordinate is the position information in the left and right direction of the lower point.
도 16은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 12의 내용을 상세히 도시한 것으로서, 도 1내지 12를 참조하여 설명하면 다음과 같다.FIG. 16 illustrates an embodiment of a spatial information acquisition method of a target included in a three-dimensional radiographic image according to the present invention. The details of FIG. 12 will be described in detail with reference to FIGS. 1 to 12. FIG.
본 발명에 따른 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은, 생성된 제2의 2차원 영상(a)을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상(b)을 획득하는 단계를 포함할 수 있다. 본 실시예에서는, 타겟(A, B)은 환자의 치아이고, 획득하고자 하는 공간 정보는 치아의 너비 정보인 경우를 가정한다. 이때, 제1 이진화 기준값은 제2의 2차원 영상(a)의 화소 분포를 고려하여 결정하되, 타겟(치아)의 강도 내지 골밀도를 고려하여 정해질 수 있다. 미리 정해진 제1 이진화 기준값에 대하여 이진화된 제2의 2차원의 예비 타겟 영상(b)은 타겟의 영역 분포(B)를 대략적으로 도시한다. 도 17은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 16의 내용과 연결될 수 있으며, 도1 내지 16을 참조하여 설명하면 다음과 같다.A method of acquiring spatial information of a target included in a 3D radiographic image according to the present invention includes binarizing a generated second 2D image (a) with respect to a predetermined first binarization reference value to generate a second 2D preliminary target And acquiring the image (b). In this embodiment, it is assumed that the target (A, B) is the patient's tooth, and the spatial information to be acquired is the tooth width information. At this time, the first binarization reference value is determined in consideration of the pixel distribution of the second two-dimensional image (a), and may be determined in consideration of the intensity of the target (tooth) or the bone density. The second two-dimensional preliminary target image (b) binarized with respect to the predetermined first binarization reference value roughly shows the region distribution (B) of the target. FIG. 17 illustrates an embodiment of a method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention. 16, and will be described with reference to FIGS. 1 to 16. FIG.
본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법은 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 타겟을 포함하는 영역을 결정하고, 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시키고, 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하도록 할 수 있다. 본 실시예에서 타겟은 환자의 치아이며, 제2 이진화 기준값은 제1 이진화 기준값과 이진화된 2차원 영역에서 타겟이 존재하는 영역을 고려하여 결정될 수 있으며, 바람직하게는 제1 이진화 기준값과 동일하거나 약간 낮은 값으로 결정될 수 있다. 특히, 대비가 증가되는 정도를 고려하여 정해질 수 있다.A method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention includes the steps of: determining a region including a target in a binarized two-dimensional image with respect to a first binarization reference value; It is possible to increase the contrast of the region and to binarize the region with the increased contrast to a predetermined second binarization reference value to obtain a second two-dimensional target image. In this embodiment, the target is the patient's tooth, and the second binarization reference value may be determined in consideration of the first binarization reference value and the region in which the target exists in the binarized two-dimensional region, It can be determined to be a low value. In particular, it can be determined in consideration of the degree of increase in contrast.
본 실시예에서는 (a)와 생성된 같이 제2의 2차원의 예비 타겟 영상으로부터, 타겟(A)가 분포하는 영역 정보를 도 9에서와 같이 획득하고, 획득된 영역 정보를 이용하여 제2의 2차원 영상으로부터 치아가 해당 영역만을 추출하여(b), 추출된 영역의 2차원 영상의 밝기 대비를 증가시킨다. 대비가 증가된 영상을 제2 이진화 기준값에 대하여 이진화하여(c) 제2의 2차원의 타겟 영상을 획득하여 타겟(B)의 분포 정보를 획득할 수 있다.In this embodiment, region information in which the target A is distributed is obtained from the second two-dimensional preliminary target image as generated in (a) and FIG. 9, and the second (B) extracts only the corresponding region of the tooth from the two-dimensional image, and increases the contrast of the two-dimensional image of the extracted region. (C) acquiring the second two-dimensional target image to obtain distribution information of the target (B) by binarizing the image with increased contrast with respect to the second binarization reference value.
도 18은 본 발명에 따른 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법의 일 실시예를 도시한 것이다. 도 1 내지 17에 따르면, 입력된 3차원 영상에 있어서 투영된 이미지를 생성하여 영상처리를 통해 공간 정보를 획득하고, 획득한 공간 정보를 이용하여 3차원 영상으로부터 선택적 구간에 따라 2차원 영상을 생성하여 활용할 수 있다. 본 실시예에서 타겟은 환자의 하악골이며, 한정된 높이에 대하여 생성된 축상면의 2차원 영상(a)으로부터 하악골의 골밀도를 고려하여 이진화하여 타겟 영상(b)을 획득하고, 획득한 영상으로부터 최대 오브젝트만 남긴 후(c), 하악골의 좌표를 도 10과 같이 구할 수 있다. 구해진 하악골의 좌표정보를 이용하여, 후방의 목뼈(B)가 제거된 2차원 영상(d)를 얻을 수 있다.FIG. 18 shows an embodiment of a method for acquiring spatial information of a target included in a three-dimensional radiographic image according to the present invention. 1 to 17, a projected image is generated on an input three-dimensional image, spatial information is acquired through image processing, and a two-dimensional image is generated from the three-dimensional image by using the acquired spatial information . In this embodiment, the target is the mandible of the patient, and the target image b is binarized in consideration of the bone density of the mandible from the two-dimensional image (a) of the axial top surface generated with respect to the limited height, (C), the coordinates of the mandible can be obtained as shown in Fig. Using the obtained coordinate information of the mandible, a two-dimensional image (d) in which the posterior neck B is removed can be obtained.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 청구범위의 기술적 사상에 의해 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is evident that many alternatives, modifications and variations will be apparent to those skilled in the art. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.
Claims (23)
상기 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득하는 단계; 및
상기 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득하는 단계;를 포함하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.Generating a two-dimensional image by projecting the input three-dimensional radiation image on a predetermined first reference plane;
Acquiring a two-dimensional target image of the target included in the generated two-dimensional image; And
And projecting the two-dimensional target image on a predetermined reference axis to obtain spatial information of the target.
상기 입력된 3차원 영상에 대하여 상기 제1 기준면과 평행한 기준면들 사이의 구간에 포함되는 단층 영상들의 밝기 정보를 적분하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.2. The method of claim 1, wherein projecting onto the first reference plane comprises:
Wherein the brightness information of the tomographic images included in the interval between the reference planes parallel to the first reference plane is integrated with respect to the input three-dimensional image.
상기 미리 결정된 기준축에 투영하는 것은,
상기 2차원의 타겟 영상을 상기 제1 기준축의 방향으로 투영하고, 상기 2차원의 타겟 영상을 상기 제2 기준축의 방향으로 투영하는 것을 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.2. The apparatus of claim 1, wherein the predetermined reference axis includes a first reference axis and a second reference axis perpendicular to the first reference axis,
Projecting on the predetermined reference axis means,
And projecting the two-dimensional target image in the direction of the first reference axis and projecting the two-dimensional target image in the direction of the second reference axis. Information acquisition method.
상기 2차원 타겟 영상을 상기 제1 기준면에 포함되는 수직 방향의 제1 축 및 수평 방향의 제2축 중 적어도 하나의 방향으로 투영하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.The method of claim 1, wherein projecting onto a predetermined reference axis comprises:
Dimensional target image is projected in at least one of a first axis in a vertical direction and a second axis in a horizontal direction included in the first reference plane, and acquiring spatial information of the target included in the three- Way.
상기 공간 정보는 상기 제1 기준면의 상기 2차원의 타겟 영상에서 상기 타겟이 분포하는 경계 영역을 정의하기 위한 복수개의 경계면들에 대한 공간정보를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.The method according to claim 1,
Wherein the spatial information includes spatial information about a plurality of interfaces for defining a boundary region in which the target is distributed in the two-dimensional target image of the first reference plane. Of acquiring spatial information.
상기 제1 기준면은 축상면, 시상면 및 관상면 중 어느 하나인 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.The method according to claim 1,
Wherein the first reference surface is one of an axial surface, a sagittal surface, and a tubular surface.
상기 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 상기 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정하는 단계;
상기 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 상기 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하고, 상기 생성된 제2의 2차원 영상을 이용하여 제2의 2차원의 타겟 영상을 획득하는 단계; 를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.2. The method of claim 1, wherein obtaining spatial information of the target comprises:
Determining a boundary value for defining a boundary on which the target is distributed based on at least one reference axis included in the first reference plane in a projected image obtained by projecting the two-dimensional target image on a predetermined reference axis;
Determining a second reference plane in consideration of the determined boundary value, generating a second two-dimensional image by integrating tomographic images parallel to the determined second reference plane and reconstructed from the three-dimensional radiographic image, according to the boundary value Acquiring a second two-dimensional target image using the generated second two-dimensional image; And generating a three-dimensional radiographic image of the target.
상기 공간 정보는 상기 획득된 2차원의 타겟 영상에 포함되는 적어도 하나의 특징점의 3차원 위치 좌표를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.The method according to claim 1,
Wherein the spatial information includes three-dimensional position coordinates of at least one feature point included in the obtained two-dimensional target image.
상기 획득된 2차원의 타겟 영상을 상기 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산하는 단계;
상기 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산하는 단계를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.2. The method of claim 1, wherein obtaining spatial information of the target comprises:
Calculating a first coordinate in a first reference axis direction for at least one feature point included in the target image by projecting the obtained two-dimensional target image on a first reference axis included in the first reference plane;
And masking the remaining region excluding at least a region including the region corresponding to the first coordinate in the obtained two-dimensional target image, and outputting the masked target image to a second And calculating a second coordinate in the second reference axis direction by considering the distribution period of the target image projected in the reference axis direction and projected and masked in the second reference axis direction. A method for acquiring spatial information of a target included in a radiological image.
상기 입력된 3차원 방사선 영상에서, 상기 제1 기준축 방향으로 상기 제1 좌표값을 가지고 상기 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 상기 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 상기 특징점의 제3 좌표를 계산하는 단계;를 더 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.10. The method of claim 9,
Dimensional image on a reference plane parallel to a third reference plane perpendicular to the first reference axis with the first coordinate value in the first reference axis direction in the input three dimensional radiographic image, And calculating a third coordinate of the feature point by projecting the feature point in a third reference axis direction perpendicular to the second reference axis.
상기 특징점은 아래턱점(Menton), 하악점(Gnathion), 코뿌리점(Nasion), 안와 최하방점(Orbitale), A점(A point), B점(B point) 및 하악각점(Gonion) 중 적어도 어느 하나 인 것을 특징으로 하는 영상 재구성 방법. The method according to claim 1,
The feature point may be at least one of Menton, Gnathion, Nasion, Orbitale, A point, B point, and Gonion Wherein the image reconstructing method comprises:
상기 타겟은 치아의 일부로서 치관인 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.The method according to claim 1,
Wherein the target is a crown of a portion of a tooth.
상기 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 예비 타겟 영상을 획득하는 단계;
상기 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 상기 타겟을 포함하는 영역을 결정하는 단계;
상기 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시키는 단계;
상기 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하는 단계;
를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.8. The method of claim 7, wherein acquiring the second two-
Acquiring a second two-dimensional preliminary target image by binarizing the generated second two-dimensional image with respect to a predetermined first binarization reference value;
Determining a region including the target in the binarized two-dimensional image with respect to the first binarization reference value;
Increasing a contrast of the determined region in the second two-dimensional image;
Acquiring a second two-dimensional target image by binarizing the contrast-increased region with respect to a predetermined second binarization reference value;
And generating a three-dimensional radiographic image of the target.
상기 미리 결정된 제2 이진화 기준값에 대하여 이진화된 영역을 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정하는 단계;를 더 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.8. The method of claim 7,
And determining a third boundary value for defining a boundary in which the target is distributed based on a reference axis perpendicular to the first reference plane with respect to the predetermined second reference value for binarization, And acquiring the spatial information of the target included in the three-dimensional radiographic image.
상기 제1 이진화 기준값은 상기 제2의 2차원 영상의 화소값의 분포를 고려하여 결정되고,
상기 제2 이진화 기준값은 상기 제1 이진화 기준값과, 상기 제1 이진화 기준값에 따라 이진화된 2차원 영상에서 상기 타겟이 존재하는 영역을 고려하여 결정되는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 방법.14. The method of claim 13,
Wherein the first binarization reference value is determined in consideration of a distribution of pixel values of the second two-dimensional image,
Wherein the second binarization reference value is determined in consideration of the region in which the target exists in the two-dimensional image binarized according to the first binarization reference value and the first binarization reference value. Method of acquiring spatial information.
상기 제2 이진화 기준값은 상기 제1 이진화 기준값보다 크지 않은 값으로 결정되는 것을 특징으로 하는 영상 재구성 방법.14. The method of claim 13,
Wherein the second binarization reference value is determined to be not greater than the first binarization reference value.
상기 생성된 2차원의 영상에 포함된 타겟에 대한 2차원의 타겟 영상을 획득하는 타겟 영상 획득부; 및
상기 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 상기 타겟의 공간 정보를 획득하는 공간 정보 획득부;를 포함하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.A two-dimensional image generation unit for generating a two-dimensional image by projecting the input three-dimensional radiation image on a predetermined first reference plane;
A target image acquiring unit for acquiring a two-dimensional target image of a target included in the generated two-dimensional image; And
And a spatial information obtaining unit for obtaining the spatial information of the target by projecting the two-dimensional target image on a predetermined reference axis.
상기 2차원의 타겟 영상을 미리 결정된 기준축에 투영하여 얻어지는 투영된 영상에서 상기 제1 기준면에 포함되는 적어도 하나의 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 경계값을 결정하는 제1 경계값 결정부;
상기 결정된 경계값을 고려하여 제2 기준면을 결정하고, 상기 결정된 제2 기준면에 평행하며 상기 3차원 방사선 영상으로부터 재구성되는 단층 영상들을 상기 경계값에 따라 구간 적분하여 제2의 2차원 영상을 생성하는 제2의 2차원 영상 생성부; 를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.18. The apparatus of claim 17,
Dimensional target image is projected on a predetermined reference axis to determine a boundary value for defining a boundary on which the target is distributed with reference to at least one reference axis included in the first reference plane, A boundary value determination unit;
Determining a second reference plane in consideration of the determined boundary value, and generating a second two-dimensional image by integrating tomographic images parallel to the determined second reference plane and reconstructed from the three-dimensional radiographic image, according to the boundary value A second two-dimensional image generating unit; Wherein the spatial information acquiring unit acquires the spatial information of the target included in the 3D radiation image.
상기 생성된 제2의 2차원 영상을 미리 정해진 제1 이진화 기준값에 대하여 이진화하여 제2의 2차원의 타겟 영상을 획득하는 제2의 2차원의 예비 타겟 영상 획득부;
상기 제1 이진화 기준값에 대하여 이진화된 2차원 영상에 있어서, 상기 타겟을 포함하는 영역을 결정하는 영역 결정부;
상기 제2의 2차원 영상에서 상기 결정된 영역의 대비를 증가시키는 대비 증가부;
상기 대비가 증가된 영역을 미리 정해진 제2 이진화 기준값에 대하여 이진화하는 제2 이진화부;를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.19. The apparatus of claim 18, wherein the second two-
A second two-dimensional pre-target image acquiring unit for acquiring a second two-dimensional target image by binarizing the generated second two-dimensional image with respect to a predetermined first binarization reference value;
An area determination unit for determining an area including the target in the binarized two-dimensional image with respect to the first binarization reference value;
A contrast increasing unit for increasing the contrast of the determined area in the second two-dimensional image;
And a second binarization unit for binarizing the region having the increased contrast to a predetermined second binarization reference value.
상기 제2의 2차원의 타겟 영상에 대하여 상기 제1 기준면과 수직하는 기준축을 기준으로 상기 타겟이 분포하는 경계를 정의하기 위한 제3 경계값을 결정하는 제3 경계값 결정부;를 더 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.19. The method of claim 18,
And a third boundary value determiner for determining a third boundary value for defining a boundary on which the target is distributed based on a reference axis perpendicular to the first reference plane with respect to the second two- Wherein the spatial information acquiring unit acquires the spatial information of the target included in the 3D radiation image.
상기 획득된 2차원의 타겟 영상을 상기 제1 기준면에 포함되는 제1 기준축에 투영하여 상기 타겟 영상에 포함되는 적어도 하나의 특징점에 대한 제1 기준축 방향의 제1 좌표를 계산하는 제1좌표 계산부;
상기 획득된 2차원의 타겟 영상에서 상기 제1 좌표에 대응되는 영역을 포함하는 적어도 일부의 영역을 제외한 나머지 영역을 마스킹 처리하고, 상기 마스킹 처리된 타겟 영상을 상기 제1 기준축과 수직인 제2 기준축 방향으로 투영하고, 상기 제2 기준축 방향으로 투영되고 마스킹 처리된 타겟 영상의 분포 구간을 고려하여 상기 제2 기준축 방향의 제2 좌표를 계산하는 제2좌표 계산부;를 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.18. The apparatus of claim 17,
Dimensional target image on a first reference axis included in the first reference plane to calculate a first coordinate in a first reference axis direction with respect to at least one minutiae included in the target image, Calculating section;
And masking the remaining region excluding at least a region including the region corresponding to the first coordinate in the obtained two-dimensional target image, and outputting the masked target image to a second And a second coordinate calculator for calculating a second coordinate in the second reference axis direction in consideration of the distribution interval of the target image projected in the reference axis direction and projected in the second reference axis direction and masked Wherein the target spatial information acquisition device is included in the 3D radiation image.
상기 입력된 3차원 방사선 영상에서, 상기 제1 기준축 방향으로 상기 제1 좌표값을 가지고 상기 제1 기준축과 수직하는 제3 기준면에 평행하는 기준면에서의 2차원 영상을 이진화하고, 상기 제1 및 제2 기준축과 수직하는 제3 기준축 방향으로 투영하여 상기 특징점의 제3 좌표를 계산하는 제3좌표 계산부;를 더 포함하는 것을 특징으로 하는 3차원 방사선 영상에 포함된 타겟의 공간 정보 획득 장치.22. The method of claim 21,
Dimensional image on a reference plane parallel to a third reference plane perpendicular to the first reference axis with the first coordinate value in the first reference axis direction in the input three dimensional radiographic image, And a third coordinate calculation unit for calculating a third coordinate of the minutiae by projecting the third spatial information in a third reference axis direction perpendicular to the second reference axis, Acquisition device.
청구항 1 내지 16중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.A computer-readable recording medium,
A computer-readable recording medium recording a program for causing a computer to execute the method according to any one of claims 1 to 16.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160058061 | 2016-05-12 | ||
KR20160058061 | 2016-05-12 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20170128046A true KR20170128046A (en) | 2017-11-22 |
KR101811644B1 KR101811644B1 (en) | 2017-12-26 |
Family
ID=60809741
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160084205A KR101811644B1 (en) | 2016-05-12 | 2016-07-04 | Method and Apparatus for Obtaining Information of Radiographic Images |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101811644B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019189958A1 (en) * | 2018-03-28 | 2019-10-03 | 주식회사 제노레이 | Method and apparatus for controlling collimator during acquisition of x-ray image |
CN110907456A (en) * | 2019-12-09 | 2020-03-24 | 湖南科技大学 | Method for measuring fluctuation characteristic parameters of gas-liquid interface wave of annular flow of pipeline |
KR20210055847A (en) * | 2019-11-07 | 2021-05-18 | 부산대학교 산학협력단 | Fully Automatic 3D Cephalometry System and Method using Image Processing and Convolutional Neural Network |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR3113155B1 (en) * | 2020-07-28 | 2022-11-25 | Adventive | A method of identifying a dental implant visible in an input image using at least one convolutional neural network. |
-
2016
- 2016-07-04 KR KR1020160084205A patent/KR101811644B1/en active IP Right Grant
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019189958A1 (en) * | 2018-03-28 | 2019-10-03 | 주식회사 제노레이 | Method and apparatus for controlling collimator during acquisition of x-ray image |
KR20190113248A (en) * | 2018-03-28 | 2019-10-08 | (주)제노레이 | Method and Apparatus for Controlling of Collimator When Acquiring an X-ray Image |
KR20210055847A (en) * | 2019-11-07 | 2021-05-18 | 부산대학교 산학협력단 | Fully Automatic 3D Cephalometry System and Method using Image Processing and Convolutional Neural Network |
CN110907456A (en) * | 2019-12-09 | 2020-03-24 | 湖南科技大学 | Method for measuring fluctuation characteristic parameters of gas-liquid interface wave of annular flow of pipeline |
Also Published As
Publication number | Publication date |
---|---|
KR101811644B1 (en) | 2017-12-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Rangel et al. | Integration of digital dental casts in 3-dimensional facial photographs | |
Fourie et al. | Segmentation process significantly influences the accuracy of 3D surface models derived from cone beam computed tomography | |
Kook et al. | A comparison study of different facial soft tissue analysis methods | |
JP2017006658A (en) | Generating design for dental restorative product from dental images | |
CN111388125B (en) | Method and device for calculating tooth movement amount before and after orthodontic treatment | |
JP5696146B2 (en) | Method for determining at least one segmentation parameter or optimal threshold of volumetric image data of a maxillofacial object, and method for digitizing a maxillofacial object using the same | |
KR101811644B1 (en) | Method and Apparatus for Obtaining Information of Radiographic Images | |
Ye et al. | Integration accuracy of laser-scanned dental models into maxillofacial cone beam computed tomography images of different voxel sizes with different segmentation threshold settings | |
Nabha et al. | Assessment of metal artifacts in three-dimensional dental surface models derived by cone-beam computed tomography | |
EP4074259A1 (en) | Method and apparatus for automatically detecting feature points of three-dimensional medical image data by using deep learning | |
Heinz et al. | Evaluation of two-dimensional lateral cephalogram and three-dimensional cone beam computed tomography superimpositions: a comparative study | |
KR102372962B1 (en) | Method Of Determinating Cephalometric Prameters For Orthodontic Diagnosis From Three Dimensional CBCT Images Taken In Natural Head Position Based On Machine Learning | |
Jang et al. | Fully automatic integration of dental CBCT images and full-arch intraoral impressions with stitching error correction via individual tooth segmentation and identification | |
JP7269587B2 (en) | segmentation device | |
KR20200100448A (en) | Apparatus and Method for Registrating Implant Diagnosis Image | |
JP2013236750A (en) | Image processing apparatus, imaging system and program | |
KR102267264B1 (en) | Dental panoramic x-ray photographing apparatus and method | |
Kim et al. | Principles and Applications of Various 3D Scanning Methods for Image Acquisition for 3D Printing Applications in Oral Health Science | |
Perrotti et al. | A radiation free alternative to CBCT volumetric rendering for soft tissue evaluation | |
CN111553941A (en) | Method and device for synthesizing panoramic view of oral cavity of user and electronic equipment | |
CN201324247Y (en) | Dental X-ray three-dimensional image system | |
Rino Neto et al. | Hausdorff Distance evaluation of orthodontic accessories' streaking artifacts in 3D model superimposition | |
KR101822908B1 (en) | Method and Apparatus for Obtaining Information of Radiographic Images | |
KR101836817B1 (en) | Method and Apparatus for Processing 3-Dimensional Radiographic Images | |
Silva et al. | Panoramic Radiograph as a Clue for Human Identification: A Forensic |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |