KR20200100907A - 의료영상 정합 방법 및 그 장치 - Google Patents

의료영상 정합 방법 및 그 장치 Download PDF

Info

Publication number
KR20200100907A
KR20200100907A KR1020190018711A KR20190018711A KR20200100907A KR 20200100907 A KR20200100907 A KR 20200100907A KR 1020190018711 A KR1020190018711 A KR 1020190018711A KR 20190018711 A KR20190018711 A KR 20190018711A KR 20200100907 A KR20200100907 A KR 20200100907A
Authority
KR
South Korea
Prior art keywords
image data
feature point
image
data
input
Prior art date
Application number
KR1020190018711A
Other languages
English (en)
Other versions
KR102234425B1 (ko
Inventor
조상형
김효정
Original Assignee
오스템임플란트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 오스템임플란트 주식회사 filed Critical 오스템임플란트 주식회사
Priority to KR1020190018711A priority Critical patent/KR102234425B1/ko
Publication of KR20200100907A publication Critical patent/KR20200100907A/ko
Application granted granted Critical
Publication of KR102234425B1 publication Critical patent/KR102234425B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5235Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
    • A61B6/5241Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT combining overlapping images of the same imaging modality, e.g. by stitching
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/467Arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/469Arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/54Control of apparatus or devices for radiation diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/60Rotation of whole images or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Public Health (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

의료영상 정합 방법 및 그 장치가 개시된다. 일 실시 예에 따른 의료영상 정합 방법은, 정합 대상이 되는 제1 영상 데이터 및 제2 영상 데이터를 획득하여 표시하는 단계와, 표시되는 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는 단계와, 소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향을 자동으로 전환하여 표시하는 단계를 포함한다.

Description

의료영상 정합 방법 및 그 장치 {Method and apparatus for matching medical images}
본 발명은 치과 임플란트 수술용 가이드 디자인 기술을 포함한 3D 의료영상 처리 기술에 관한 것이다.
컴퓨터 비전에서 하나의 장면이나 대상을 다른 시간이나 관점에서 촬영할 경우, 서로 다른 좌표계에 따른 영상이 얻어지게 된다. 영상 정합은 이와 같은 서로 다른 두 개 이상의 영상을 동일한 좌표계에 표시하기 위한 과정을 의미한다. 영상 정합을 통하여 서로 다른 방식으로 획득한 영상의 대응 관계를 확인할 수 있다.
치과 임플란트 수술용 가이드 디자인의 경우, 일반적으로 환자의 CT(또는 CBCT) 데이터와 구강 모델 데이터를 이용하여 임플란트 구조물의 식립 계획을 수립하고, 수립된 계획에 맞추어 가이드 형상 및 드릴링 홀의 위치를 결정한다. 환자의 CT 데이터는 해부학적 구조물을 고려하여 임플란트 구조물의 위치를 결정하는 용도로 활용된다. 또한, 구강 모델 데이터 상에 픽스쳐를 포함한 임플란트 구조물의 위치를 기준으로 드릴링 홀이 포함된 가이드 형상을 결정하여 최종 임플란트 수술용 가이드를 디자인한다.
픽스쳐를 포함한 임플란트 구조물의 위치에 맞추어 드릴링 홀을 생성하기 위해서 CT 데이터와 구강 모델 데이터의 좌표 축과 위치를 일치시키는 정합 과정이 요구된다. 이때, 사용자가 두 영상 데이터에서 정합을 위한 특징점을 선택하면, 선택된 특징점을 기준으로 두 영상 데이터의 위치를 일치시킨다. 가이드 디자인 프로그램에서는 특징점을 선택하기 위해 사용자가 수동으로 각 데이터 영상을 회전하여 소정의 방향으로 두 영상 데이터를 정렬한 후, 사용자가 정합 특징점을 선택하는 방식으로 정합 과정을 진행하고 있다.
이와 같은 프로세스에 의하면, 사용자가 원하는 방향으로 영상 데이터를 회전시키기까지 다수의 드래그(Drag) 동작이나 클릭 동작이 필요하기 때문에 시간이 많이 소요되고, 조작수단을 핸들링하는 것에 서투른 사용자는 의도치 않은 방향으로 영상 데이터가 회전이 되어 많은 시행착오를 거쳐야 하는 문제점이 존재하였다. 뿐만 아니라, 정합 수행시마다 사용자가 영상 데이터를 돌려가며 적절한 포인트를 찾는 조작 동작이 반복되어야 하기 때문에 매우 비효율적이다. 전술된 바와 같은 종래 기술의 문제점으로 인하여 영상 정합에 많은 시간이 소요되고 번거로움이 수반되었으며, 이는 곧 전반적인 디지털 설계 프로세스를 지연시키고 효율성을 저하시키는 요인으로 작용하였다.
일 실시 예에 따라, 사용자가 특징점 입력을 위해 영상 데이터를 직접 회전하지 않아도 되어 사용자의 영상 회전에 대한 수동 조작을 최소화할 수 있어 정합 작업의 효율성을 높일 수 있는 의료영상 정합 방법 및 그 장치를 제안한다.
일 실시 예에 따른 의료영상 정합 방법은, 정합 대상이 되는 제1 영상 데이터 및 제2 영상 데이터를 획득하여 표시하는 단계와, 표시되는 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는 단계와, 소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향을 자동으로 전환하여 표시하는 단계를 포함한다.
방향을 자동으로 전환하여 표시하는 단계에서, 방향 정보를 알고 있는 제1 영상 데이터의 방향 정보를 이용하여 제1 영상 데이터의 방향을 회전시키고, 회전된 제1 영상 데이터와 동일한 방향으로 제2 영상 데이터를 회전시킴으로써, 두 개의 영상 데이터를 동일한 방향으로 회전시킬 수 있다.
의료영상 정합 방법은, 최초 표시되는 두 영상 데이터의 방향이 상이한 경우, 사용자에 의해 수동으로 제2 영상 데이터의 방향을 제1 영상 데이터의 방향과 동일한 방향으로 회전시켜 방향을 정렬하는 단계를 더 포함할 수 있다.
의료영상 정합 방법은, 영상 자동 회전에 따른 특징점 입력이 완료된 후, 각 방향에서 입력된 특징점들을 기준으로 두 영상 데이터의 위치를 일치시켜 정합하고 정합 결과를 표시하는 단계를 더 포함할 수 있다. 정합 결과를 표시하는 단계는, 영상 자동 회전에 따른 특징점 입력이 완료된 후, 사용자 조작 없이 두 영상 데이터를 초기 방향으로 자동 회전시키는 단계와, 정합 결과를 초기 방향으로 자동 회전된 두 영상 데이터에 표시하는 단계를 포함할 수 있다.
다수의 방향은 좌측, 정면 및 우측 방향을 의미하며, 자동 방향 전환 순서는 미리 설정될 수 있다. 각 영상 데이터 별로 다수의 방향에서 특징점을 입력하게 되면, 총 3개의 특징점이 삼각형 형태를 형성하게 된다.
방향을 자동으로 전환하여 표시하는 단계에서, 두 영상 데이터에 특징점 선택 입력 이후, 영상 회전 그룹핑 모드가 활성화되면 두 영상 데이터를 동일한 방향으로 함께 회전시킬 수 있고, 영상 회전 그룹핑 모드가 비활성화되면 두 영상 데이터를 개별 회전시킬 수 있다.
의료영상 정합 방법은, 자동 회전된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전하는 단계와, 수동으로 추가 회전된 이후 사용자에 의한 특징점 선택 입력이 완료되면 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터의 방향을 자동으로 회전시켜 두 영상 데이터의 방향을 일치시키는 단계를 더 포함할 수 있다.
의료영상 정합 방법은, 두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 제공하는 단계와, 정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 선택 입력받는 단계와, 표식자를 선택 입력받은 후 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동 및 영상 데이터를 표시하는 단계를 더 포함할 수 있다. 의료영상 정합 방법은, 특징점 수정이 완료되고 재정합 모드가 활성화되면 초기 방향으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시하는 단계를 더 포함할 수 있다.
다른 실시 예에 따른 의료영상 처리장치는, 정합 대상이 되는 제1 영상 데이터 및 제2 영상 데이터를 획득하는 데이터 획득부와, 두 영상 데이터 별로 서로 다른 방향에 각각 대응하는 뷰 영상을 분할된 화면에 표시하는 출력부와, 사용자 조작신호를 입력받되, 화면에 표시되는 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는 입력부와, 선택 입력받은 특징점을 출력부에 표시하도록 제어하는 특징점 선택부와, 소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향이 자동으로 전환되도록 출력부를 제어하는 자동 방향 제어부를 포함한다.
자동 방향 제어부는 방향 정보를 알고 있는 제1 영상 데이터의 방향 정보를 이용하여 제1 영상 데이터의 방향을 회전시키고, 회전된 제1 영상 데이터와 동일한 방향으로 제2 영상 데이터를 회전시킴으로써, 두 개의 영상 데이터를 동일한 방향으로 회전시킬 수 있다.
의료영상 처리장치는, 최초 표시되는 두 영상 데이터의 방향이 상이한 경우, 사용자에 의해 수동으로 제2 영상 데이터의 방향을 제1 영상 데이터의 방향과 동일한 방향으로 회전시켜 방향을 정렬하고, 자동 회전된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전하는 수동 방향 제어부를 더 포함할 수 있다.
자동 방향 제어부는, 수동 방향 제어부에 의해 수동 방향 전환된 이후 사용자에 의한 특징점 선택 입력이 완료되면 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터가 자동으로 회전된다.
의료영상 처리장치는, 영상 자동 회전에 따른 특징점 입력이 완료된 후, 각 방향에서 입력된 특징점들을 기준으로 두 영상 데이터의 위치를 일치시켜 정합하고 정합 결과를 두 영상 데이터에 표시하도록 출력부를 제어하는 영상 정합부를 더 포함할 수 있다.
자동 방향 제어부는, 영상 자동 회전에 따른 특징점 입력이 완료된 후, 사용자 조작 없이 두 영상 데이터를 초기 방향으로 자동 회전시키고, 영상 정합부는 정합 결과를 초기 방향으로 자동 회전된 두 영상 데이터에 표시하도록 제어할 수 있다.
다수의 방향은 좌측, 정면 및 우측 방향을 의미하며, 자동 방향 전환 순서는 미리 설정될 수 있다. 각 영상 데이터 별로 다수의 방향에서 특징점을 입력하게 되면, 총 3개의 특징점이 삼각형 형태를 형성하게 된다.
의료영상 처리장치는, 사용자 조작에 따라 영상 회전 그룹핑 모드를 활성화 또는 비활성화하는 그룹핑 모드 설정부를 더 포함하며, 자동 방향 제어부는 그룹핑 모드가 활성화되면 두 영상 데이터를 동일한 방향으로 함께 회전시킬 수 있고, 영상 회전 그룹핑 모드가 비활성화되면 두 영상 데이터를 개별 회전시킬 수 있다.
의료영상 처리장치는, 두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 생성하여 출력부에 제공하는 표식자 제어부를 더 포함하며, 자동 방향 제어부는 정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 입력부를 통해 선택 입력받은 후, 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동 및 영상 데이터를 표시하도록 제어할 수 있다. 의료영상 처리장치는, 특징점 수정이 완료된 두 영상 데이터를 재정합하되, 초기 방향으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시하도록 출력부를 제어하는 영상 재정합부를 더 포함할 수 있다.
일 실시 예에 따른 의료영상 정합 방법 및 그 장치에 따르면, 영상 정합 시에 사용자에 의한 영상 데이터 수동 조작을 최소화함으로써 사용자의 편의성을 증대시킬 수 있다. 치과 임플란트 수술용 가이드 디자인의 경우, 임플란트 계획의 효율성을 높일 수 있다.
도 1은 본 발명의 일 실시 예에 따른 의료영상 처리장치의 구성을 도시한 도면,
도 2는 본 발명의 일 실시 예에 따른 도 1의 제어부의 세부 구성을 도시한 도면,
도 3은 본 발명의 일 실시 예에 따른 최초 획득된 영상 데이터 화면을 도시한 도면,
도 4는 본 발명의 일 실시 예에 따른 영상 회전 그룹핑 모드 활성화에 의해 CT 데이터 및 구강 모델 데이터가 동시에 회전하는 모습을 보여주는 도면,
도 5는 본 발명의 일 실시 예에 따른 획득된 CT 데이터 및 구강 모델 데이터의 방향이 상이한 경우 방향을 정렬시킨 영상 데이터 화면을 보여주는 도면,
도 6은 본 발명의 일 실시 예에 따른 첫 번째 특징점 선택 및 이에 따른 표식자 정보를 통해 특징점 선택 완료가 표시하는 영상 데이터 화면을 도시한 도면,
도 7은 본 발명의 일 실시 예에 따른 두 번째 특징점 선택을 위해 방향이 회전되는 영상 데이터 화면을 도시한 도면,
도 8은 본 발명의 일 실시 예에 따른 세 번째 특징점 선택을 위해 방향이 회전되는 영상 데이터 화면을 도시한 도면,
도 9는 본 발명의 일 실시 예에 따른 정합 완료 후 초기 방향으로 전환된 영상 데이터 화면을 도시한 도면,
도 10은 본 발명의 일 실시 예에 따른 특징점 수정을 위해 표식자 선택을 통해 화면을 이동하는 모습을 도시한 도면,
도 11은 본 발명의 일 실시 예에 따른 영상 정합 방법을 도시한 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이며, 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램인스트럭션들(실행 엔진)에 의해 수행될 수도 있으며, 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다.
이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치를 지향할 수 있는 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다.
그리고 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장치를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명되는 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록 또는 각 단계는 특정된 논리적 기능들을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있으며, 몇 가지 대체 실시 예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하며, 또한 그 블록들 또는 단계들이 필요에 따라 해당하는 기능의 역순으로 수행되는 것도 가능하다.
이하, 첨부 도면을 참조하여 본 발명의 실시 예를 상세하게 설명한다. 그러나 다음에 예시하는 본 발명의 실시 예는 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 다음에 상술하는 실시 예에 한정되는 것은 아니다. 본 발명의 실시 예는 이 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위하여 제공된다.
도 1은 본 발명의 일 실시 예에 따른 의료영상 처리장치의 구성을 도시한 도면이다.
의료영상 처리장치(1)는 치과 임플란트 수술용 가이드 디자인 프로그램과 같은 의료영상 처리 프로그램을 실행 가능한 전자장치이다. 전자장치는 컴퓨터, 노트북 컴퓨터, 랩탑 컴퓨터, 태블릿(Tablet) PC, 스마트폰, 휴대폰, PMP(Personal Media Player), PDA(Personal Digital Assistants) 등이 있다. 의료영상 처리 프로그램은 가이드 디자인 프로그램 이외에, 스캔 프로그램, CAD 프로그램 등이 있다. 또한, 치과 임플란트 수술용 이외에 다른 일반적인 의료 영상 처리를 위한 프로그램에 적용될 수 있다.
가이드 디자인 프로그램을 포함한 의료영상 처리 프로그램을 이용한 영상처리 과정은 수술 환자 등록, 등록된 환자의 CT 데이터 및 구강 모델 데이터 획득, CT 데이터 및 구강 모델 데이터의 정합, 정합된 영상 데이터에서 악궁 라인 생성 및 악궁 라인을 이용한 파노라믹 영상(panoramic image) 생성, 파노라믹 영상에서 크라운 모델 위치 및 크기 결정, 픽스쳐를 포함한 임플란트 구조물 위치 결정, 가이드 형상 디자인, 최종 가이드 출력을 포함한 과정으로 구성된다. 본 발명은 위 과정 중에서 CT 데이터와 구강 모델 데이터 정합 과정에 관한 기술에 관한 것으로, 정합하고자 하는 영상 데이터의 방향을 사용자에게 자동으로 제공하도록 구성된다. 본 발명에서는 CT 데이터와 구강 모델 데이터의 정합 과정을 예로 들어 설명하고 있으나, 두 영상 데이터를 정합하는 기술에 동일하게 적용 가능하다. 예를 들어, 모델 데이터 - 모델 데이터, 자기공명영상(MRI) 데이터 - CT 데이터 등과 같이 2차원-2차원 영상, 2차원-3차원 영상, 3차원-3차원 영상의 다양한 조합에 대해서도 본 발명에 따른 영상 정합 방법에 의해서 정합이 이루어질 수 있음은 물론이다.
도 1을 참조하면, 일 실시 예에 따른 의료영상 처리장치(1)는 데이터 획득부(10), 저장부(12), 제어부(14), 입력부(16) 및 출력부(18)를 포함한다.
데이터 획득부(10)는 정합 대상이 되는 영상 데이터를 획득한다. 예를 들어, 환자의 손상된 대상 치아를 포함하는 치아들로부터 CT 데이터와 구강 모델 데이터를 획득한다. 영상 데이터는 3차원 형태일 수 있다. 데이터 획득부(10)는 임플란트 구조물의 위치를 결정하기 위한 준비 단계 중에서 촬영된 환자의 CT 데이터와 구강 모델 데이터를 정합하기 위해, CT 데이터와 구강 모델 데이터를 프로그램에서 실행하거나 웹 페이지 및 서버에 저장된 데이터를 로딩한다.
구강 모델 데이터는 손상된 치아를 포함한 실제 치아들의 정보를 가진 데이터이다. 구강 모델 데이터는 환자의 구강을 본떠 생성한 석고 모형을 3D 스캐너(3D Scanner)로 스캐닝하여 획득될 수 있다. 다른 예로서, 구강 내 3D 스캐너(3D Intra-oral scanner)를 이용하여 환자의 구강 내부를 스캐닝하여 획득될 수 있다. 획득된 구강 모델 데이터는 저장부(12)에 저장될 수 있다.
CT 데이터는 CT(computed tomography, 컴퓨터 단층 촬영)를 사용하여 환자의 두부 단층 이미지들을 생성하고, 각각의 단층 이미지에서 치아 부분의 경계를 구분(Segmentation)한 후 하나로 취합함에 따라 획득될 수 있다. 이러한 구강 모델 데이터와 CT 데이터는 환자가 입을 벌린 상태에서 상악 치아 아래에서 상악 치아를 촬영하여 얻은 영상, 입을 벌린 상태에서 하악 치아 위에서 하악 치아를 촬영하여 얻은 영상, 입을 다문 상태에서 국소부위를 촬영하여 얻은 영상, 구강 방사선 사진 등을 포함한다. 획득된 CT 데이터는 저장부(12)에 저장될 수 있다.
저장부(12)에는 치과용 임플란트 시술 계획 장치(3)의 동작 수행을 위해 필요한 정보와 동작 수행에 따라 생성되는 정보 등의 각종 데이터가 저장된다. 일 실시 예에 따른 저장부(12)에는 개별 환자의 구강 모델 데이터와 CT 데이터가 저장되고, 치과 치료 시뮬레이션 시 전체 구강 모델 데이터들 및 CT 데이터들 중에서 특정 환자의 구강 모델 데이터 및 CT 데이터를 사용자 요청에 따라 제어부(14)에 제공할 수 있다. 이때, 저장부(12)에는 개별 환자의 상측 치열의 영상 및 하측 치열의 영상이 저장되어 있고, 특정 환자의 구강 모델 데이터 및 CT 데이터에 매칭되는 상측 치열의 영상 및 하측 치열의 영상을 사용자 요청에 따라 제어부(14)에 제공할 수 있다.
제어부(14)는 컴퓨터 프로그램에 의한 제어를 통하여 임플란트 식립 계획을 수립하면서 각 구성요소를 제어한다. 제어부(14)는 출력부(18)를 통해 화면에 보이는 화면정보를 관리하고, 치과 영상에 가상의 픽스쳐 객체를 식립하는 시뮬레이션을 수행한다. 가상의 픽스쳐 객체가 식립되는 치과 영상은 임플란트 시술 계획 수립을 위해 생성된 환자의 치아 배열이 나타난 2차원, 3차원 등의 다차원 영상을 의미한다. 임플란트 시술 계획에는 X-ray, CT, MRI, 파노라믹 영상, 구강 스캔 영상, 재구성을 통해 생성된 영상, 복수의 영상을 정합한 영상 등 다양한 종류의 영상이 활용될 수 있다.
일 실시 예에 따른 제어부(14)는 임플란트 식립 계획 수립을 위해 환자의 CT 데이터 및 구강 모델 데이터를 정합한다. 이때, 소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향이 자동으로 전환되도록 출력부(18)를 제어한다.
입력부(16)는 사용자 조작신호를 입력받는다. 예를 들어, 출력부(18)를 통해 화면에 표시되는 두 영상 데이터(CT 데이터 및 구강 모델 데이터)를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는다. 다수의 방향은 정면, 좌측, 우측 방향일 수 있다.
출력부(18)는 화면을 표시한다. 출력부(18)는 두 영상 데이터(CT 데이터 및 구강 모델 데이터) 별로 서로 다른 방향에 각각 대응하는 뷰 영상을 분할된 화면에 표시한다. 뷰 영상은 방향을 기준으로 정면 뷰 영상, 좌측 영상 및 우측 영상을 포함한다. 정면 뷰 영상, 좌측 영상 및 우측 영상에서 사용자로부터 각각 특징점을 입력받으면 각 영상 데이터 별로 총 3개의 삼각형 형태로 특징점이 형성된다. 뷰 영상은 데이터 정합을 위해 제어부(14)에 의해 자동으로 회전하여 방향 전환되어 표시된다. 또한, 출력부(18)는 데이터 정합 결과를 화면에 표시한다.
도 2는 본 발명의 일 실시 예에 따른 도 1의 제어부의 세부 구성을 도시한 도면이다.
도 1 및 도 2를 참조하면, 제어부(14)는 특징점 선택부(140), 자동 방향 제어부(141), 수동 방향 제어부(142), 그룹핑 모드 설정부(143), 표식자 제어부(144), 영상 정합부(145) 및 영상 재정합부(146)를 포함한다.
특징점 선택부(140)는 입력부(16)를 통해 사용자로부터 선택 입력받은 특징점을 출력부(18)에 표시하도록 제어한다. 특징점이 CT 데이터의 정면 방향 뷰, CT 데이터의 좌측 방향 뷰, CT 데이터의 우측 방향 뷰, 구강 모델 데이터의 정면 방향 뷰, 구강 모델 데이터의 좌측 방향 뷰, 구강 모델 데이터의 우측 방향 뷰 각각에 형성되면, 총 6개가 된다. 이때, 각 영상 데이터 별로 3개의 특징점의 위치가 삼각형 형태를 가진다.
자동 방향 제어부(141)는 출력부(18)를 통해 표시되는 영상 데이터의 방향을 자동으로 회전시킨다. 소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면, 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향이 자동으로 전환되도록 출력부(18)를 제어한다. 이때, 자동 방향 제어부(141)는 CT 데이터의 방향 정보를 이용하여 두 영상 데이터의 방향을 전환할 수 있다. 예를 들어, CT 데이터의 방향 정보를 이용하여 CT 데이터의 방향을 회전하고 CT 데이터의 방향 정보를 기준으로 구강 모델 데이터의 방향을 CT 데이터의 방향과 동일한 방향으로 회전시켜 방향을 맞춘다. CT 데이터의 방향 정보는 좌표정보를 포함한다. CT 데이터는 촬영 과정에서 데이터의 기준 좌표 축이 결정되어 방향 정보를 포함하고 있다. 그러나 구강 모델 데이터는 스캔 장비에 따라 기준 좌표 축이 아닐 수 있다. 따라서, CT 데이터의 방향 정보를 이용하여 두 영상 데이터의 방향을 자동 전환시킨다.
일 실시 예에 따른 자동 방향 제어부(141)는 초기 방향에서 두 영상 데이터를 대상으로 사용자에 의해 각각 동일한 위치에 선택 입력된 특징점을 표시하고, 특징점 입력이 완료되면 다음 순서의 특징점을 바로 입력할 수 있도록 사용자 조작 없이 두 영상 데이터를 다음 순서의 방향으로 자동 회전시킨다.
수동 방향 제어부(142)는 수동으로 영상 데이터의 방향을 전환한다. 최초 표시되는 두 영상 데이터의 방향은 상이할 수 있는데, 이 경우 사용자에 의해 수동으로 구강 모델 데이터의 방향을 CT 데이터의 방향과 동일한 방향으로 회전시켜 초기 방향을 맞춘다. 환자의 CT 데이터는 촬영 과정에서 데이터의 기준 좌표축이 결정되어 방향 정보를 포함하고 있지만, 구강 모델 데이터는 스캔 장비에 따라 기준 좌표축 결정에 차이가 있어 도 3에 도시된 바와 같이 CT 데이터와 동일한 방향의 좌표축이 아닐 수 있다. 이런 경우 사용자가 수동으로 영상을 회전하여 CT 데이터와 동일한 영상 방향으로 맞추는 과정이 요구된다.
일 실시 예에 따른 수동 방향 제어부(142)는 자동 회전된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전한다. 자동 방향 제어부(141)에 의해 자동 회전한 영상 데이터에서 CT 영상의 아티팩트(artifact) 발생 등과 같은 이유로 정합 특징점을 선택하기 어려운 경우가 발생한다. 이 경우, 사용자는 영상 데이터를 자유 회전하여 특징점을 선택할 수 있다. 이때, 자동 방향 제어부(141)는 수동 방향 제어부(142)에 의해 수동 방향 전환된 이후, 사용자에 의한 특징점 선택 입력이 완료되면 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터의 방향을 자동으로 회전시켜 두 영상 데이터의 방향을 일치시킨다.
그룹핑 모드 설정부(143)는 사용자 조작에 따라 영상 회전 그룹핑 모드를 활성화 또는 비활성화한다. 영상 회전 그룹핑 모드 활성화를 위해 별도의 버튼과 같은 그래픽 인터페이스를 제공할 수 있다. 자동 방향 제어부(141)는 그룹핑 모드가 활성화되면 두 영상 데이터를 동일한 방향으로 함께 회전시킬 수 있고, 영상 회전 그룹핑 모드가 비활성화되면 두 영상 데이터를 개별 회전시킬 수 있다.
표식자 제어부(144)는 두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 생성하여 출력부(18)에 제공한다. 표식자 정보는 도 6에 도시된 바와 같이, 각 영상 데이터 별로 순서에 따른 특징점 입력 완료 여부가 하나의 화면에 표시될 수 있다. 예를 들어, 자동 방향 제어부(141)에 의해 방향이 맞춰진 각 영상 데이터 상에 사용자가 동일한 위치에 첫 번째 정합 특징점을 선택하고 각 영상 데이터에서 특징점이 선택되면 첫 번째 특징점 선택이 완료되었다는 표식을 한다. 도 6에서는 색깔이 변경되는 것으로 표식자 정보를 구분하고 있으나, 색깔 이외에 모양, 지시선 등의 다른 그래픽 인터페이스로 시각적으로 구분할 수 있다.
표식자 정보는 정합 완료 및 정합 과정에서 사용자가 특징점의 위치를 수정하고자 하는 경우, 수정을 원하는 특징점으로 이동하는 용도로도 사용할 수 있다. 예를 들어, 자동 방향 제어부(141)는 정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 입력부(16)를 통해 선택 입력받은 후, 특징점 위치 수정을 위해 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동하도록 제어한다.
영상 정합부(145)는 미리 설정된 순서에 따른 특징점 입력 및 자동 회전이 완료되면, 각 방향에서 입력된 특징점들을 기준으로 두 영상 데이터의 위치를 일치시켜 정합하고 정합 결과를 두 영상 데이터에 표시하도록 출력부(18)를 제어한다. 정합 결과는 CT 데이터에 맞추어 구강 모델 데이터의 좌표가 정합 특징점을 기준으로 이동한 것일 수 있다. CT 데이터에 정합 컬러맵 정보가 함께 표시될 수 있다. 영상 자동 회전에 따른 특징점 입력이 완료된 후, 영상 정합부(145)는 정합 결과를 초기 방향으로 자동 회전된 두 영상 데이터에 표시하도록 제어할 수 있다.
영상 재정합부(146)는 특징점 선택부(140)에 의해 특징점 수정이 완료된 두 영상 데이터를 재정합한다. 이때, 초기 방향(예를 들어, 정면 방향)으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시하도록 출력부(18)를 제어한다.
도 3은 본 발명의 일 실시 예에 따른 최초 획득된 영상 데이터 화면을 도시한 도면이다.
도 3을 참조하면, 임플란트 구조물의 위치를 결정하기 위한 준비 단계 중에서 촬영된 환자의 CT 데이터(300)와 구강 모델 데이터(302)를 정합하기 전에, 환자의 CT 데이터(300)와 구강 모델 데이터(302)를 프로그램에서 실행하거나 웹 페이지 및 서버에 저장된 데이터를 로딩하여 화면에 표시한다. 환자의 CT 데이터(300)는 촬영 과정에서 데이터의 기준 좌표축이 결정되어 방향 정보를 포함하고 있다. 그러나 구강 모델 데이터(302)는 스캔 장비에 따라 기준 좌표축 결정에 차이가 있어, 도 3에 도시된 바와 같이 CT 데이터(300)와 동일한 방향의 좌표축이 아닐 수 있다. 이 경우, 사용자가 수동으로 구강 모델 데이터(302)를 회전하여 CT 데이터(300)와 동일한 방향으로 영상 데이터를 맞추는 과정을 추가할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 영상 회전 그룹핑 모드 활성화에 의해 CT 데이터 및 구강 모델 데이터가 동시에 회전하는 모습을 보여주는 도면이다.
도 4를 참조하면, 영상 데이터의 회전 시에, CT 데이터와 구강 모델 데이터를 개별적으로 회전할 수 있다. 또는 회전 그룹핑 기능을 이용하여 도 4에 도시된 바와 같이 두 개의 영상 데이터를 동시에 회전할 수도 있다(400→410). 그룹핑 기능에서는, 그룹핑을 활성화하기 직전의 영상 데이터에서 그룹핑이 활성화된 시점부터 동시 회전되어 두 영상 데이터가 다른 방향으로 배치되어 있어도 사용자의 조작으로 인해 영상 데이터의 회전이 가능하다.
도 5는 본 발명의 일 실시 예에 따른 획득된 CT 데이터 및 구강 모델 데이터의 방향이 상이한 경우 방향을 정렬시킨 영상 데이터 화면을 보여주는 도면이다.
CT 데이터(300)와 구강 모델 데이터(302)가 획득했을 때, 두 영상 데이터(300, 302)의 방향이 상이하면, 도 5에 도시된 바와 같이 사용자가 CT 데이터(300)와 구강 모델 데이터(302)의 영상 방향을 일치시킨다. 영상 처리장치는 정합 특징점을 선택하기 위한 방향 제공을 CT 데이터(300)의 방향 정보를 기준으로 하기 때문에, CT 데이터(300)와 동일한 방향으로 구강 모델 데이터(302)를 회전하여 위치를 정렬한다.
도 6 내지 도 8은 본 발명의 일 실시 예에 따른 영상 데이터의 방향 전환 및 특징점 선택 시나리오를 도시한 도면이다. 본 발명의 이해를 돕기 위해, 첫 번째 특징점을 정면 방향, 두 번째 특징점을 우측 방향, 세 번째 특징점을 좌측 방향으로 설정하여 영상 데이터가 자동 회전하는 예시를 보이고 있다. 방향에 대한 순서는 사용자 설정 및 데이터에 따라 변경될 수 있다.
도 6은 본 발명의 일 실시 예에 따른 첫 번째 특징점 선택 및 이에 따른 표식자 정보를 통해 특징점 선택 완료가 표시하는 영상 데이터 화면을 도시한 도면이다.
도 6을 참조하면, 방향이 맞춰진 각 영상 데이터(300, 302) 상에 사용자가 동일한 위치에 정합 특징점(310, 312)을 선택하면, 첫 번째 특징점 선택이 완료되었다는 표식을 표식자(320, 322)에 표시한다. 이 표식자는 정합 완료 및 정합 과정에서 특징점의 위치를 수정할 경우, 수정을 원하는 특징점으로 이동하는 용도로도 사용할 수 있다.
도 7은 본 발명의 일 실시 예에 따른 두 번째 특징점 선택을 위해 방향이 회전되는 영상 데이터 화면을 도시한 도면이다.
도 7을 참조하면, CT 데이터(300)와 구강 모델 데이터(302) 상에 첫 번째 특징점이 선택이 완료되면, 도 7에 도시된 바와 같이 CT 데이터의 방향정보를 기준으로 두 번째 특징점을 선택하기 위한 위치의 방향으로 두 영상 데이터(300, 302)를 자동 회전시킨다. 도 7에서는 우측 방향으로 두 영상 데이터(300, 302)를 회전하였다. 특징점 선택 순서는 CT 데이터(300)나 구강 모델 데이터(302)에 순서가 제한되지 않는다.
도 8은 본 발명의 일 실시 예에 따른 세 번째 특징점 선택을 위해 방향이 회전되는 영상 데이터 화면을 도시한 도면이다.
도 8을 참조하면, 도 7을 참조로 하여 설명한 바와 같이 각 영상 데이터(300, 302)에 동일 순서의 특징점이 모두 선택되면, 해당 순서의 특징점 선택이 완료되었다고 판단하여 영상 데이터를 다음 순서를 실행하기 위해 자동 회전한다. 도 8에서는 좌측 방향으로 두 영상 데이터(300, 302)를 회전하였다.
첫 번째 특징점과 동일한 방식으로 두 번째 정합 특징점을 CT 데이터(300)와 구강 모델 데이터(302) 상에 선택하면, 두 번째 특징점 선택이 완료되었다는 표식과 함께 도 8에 도시된 바와 같이 세 번째 특징점을 선택하는 초기 방향으로 두 영상이 자동 회전하며, 동일한 방법으로 사용자가 각 영상 데이터(300, 302) 상에 세 번째 특징점을 선택한다.
도 9는 본 발명의 일 실시 예에 따른 정합 완료 후 초기 방향으로 전환된 영상 데이터 화면을 도시한 도면이다.
특징점 선택 및 영상 데이터 자동 회전 프로세스가 종료되면, 영상 정합을 수행한다. 예를 들어, 도 9에 도시된 바와 같이 CT 데이터(300)와 구강 모델 데이터(302)는 초기 방향과 동일한 정면 방향으로 자동 회전하여 사용자가 정합 결과를 확인할 수 있도록 제공한다.
정합 화면에는 두 영상 데이터(300, 302)의 특징점들(310, 312, 330, 332, 340, 342)이 표시되고, 표식자 정보(320)를 통해 각 순서에 따른 특징점 선택이 완료되었음을 알려준다. 정합의 예로는, CT 데이터(300)를 따라 구강 모델 데이터(302)의 좌표가 정합 특징점을 기준으로 이동하여 표시한다. 이때, 도 9에 도시된 바와 같이, CT 데이터(300)에 정합 컬러맵 정보(900)가 함께 표현될 수 있다.
도 10은 본 발명의 일 실시 예에 따른 특징점 수정을 위해 표식자 선택을 통해 화면을 이동하는 모습을 도시한 도면이다.
자동 회전한 영상에서 특징점을 선택할 때, CT 데이터의 아티팩트 등과 같은 이유로 정합 특징점을 선택하기 어려운 경우가 발생한다. 이 경우, 사용자는 영상 데이터를 수동으로 자유 회전하여 특징점을 선택할 수 있다. 사용자가 정합 특징점을 선택하기 위해 영상 데이터를 자유회전 하여도 다음 순서의 특징점을 선택하기 위해 영상 처리장치는 다음 순서의 방향 위치로 자동 회전시킨다. 각 영상 데이터의 방향은 CT 데이터의 방향정보를 기준으로 하여 CT 데이터의 정면, 우측, 좌측(또는 미리 설정된 순서의 방향)을 유지한다.
만약 사용자가 정합 결과에 대하여 만족하지 못하고 개별 정합 특징점의 위치를 수정하고자 하는 경우, 정합 특징점 선택이 완료되었음을 표식하는 표식자 정보(320 또는 322)에서 수정을 원하는 특징점을 가진 영상 데이터의 표식자(350 또는 352)를 선택하면, 도 10에 도시된 같이 영상 데이터가 방향 전환되어 해당 특징점을 가진 영상 데이터 화면으로 이동한다(1000→1010). 이때, 사용자가 이동된 영상 데이터 화면에서 특징점을 수정하면, 새로운 정합 결과를 화면에 제공한다. 이때 정합 결과는 각 영상 데이터의 영상이 초기 방향(예를 들어, 정면 방향)으로 자동 회전하여 표시되도록 할 수 있다. 재정합 기능은 자동으로 수행될 수 있고, 버튼 등의 재정합 기능 활성화 인터페이스를 클릭 동작과 같이 선택하는 방법을 통해 이루어질 수 있다.
도 11은 본 발명의 일 실시 예에 따른 영상 정합 방법을 도시한 도면이다.
도 1 및 도 11을 참조하면, 의료영상 처리장치(1)는 영상 데이터 정합을 위해 환자의 CT 데이터 및 구강 모델 데이터를 포함하는 영상 데이터를 획득하여 표시한다(S1100). 최초 표시되는 두 영상 데이터의 방향이 상이한 경우, 자동으로 방향 전환하기 이전에 사용자에 의해 수동으로 구강 모델 데이터의 방향을 CT 데이터의 방향과 동일한 제1 방향(예를 들어, 정면 방향)으로 회전시켜 두 영상 데이터의 방향을 정렬한다(S1110).
이어서, 제1 방향(예를 들어, 정면 방향)으로 정렬된 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 각각 정합의 기준이 되는 특징점을 선택 입력받는다(S1120). 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향을 다음 순서의 제2 방향(예를 들어, 우측 방향)으로 자동 전환하여 표시한다(S1130). 그리고 제2 방향(예를 들어, 우측 방향)의 두 영상 데이터에 대하여 각각 정합의 기준이 되는 특징점을 선택 입력받는다(S1140). 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향을 다음 순서의 제3 방향(예를 들어, 좌측 방향)으로 자동 전환하여 표시한다(S1150). 그리고 제3 방향(예를 들어, 좌측 방향)의 두 영상 데이터에 대하여 각각 정합의 기준이 되는 특징점을 선택 입력받는다(S1160). 미리 설정된 순서(예를 들어, 정면 방향→우측 방향→좌측 방향)에 따른 방향 전환 및 특징점 입력 프로세스가 완료되었는지를 판단하여, 완료되지 않은 경우, 방향 전환 및 특징점 입력 프로세스를 반복 수행한다. 완료된 경우 특징점을 기준으로 영상을 정합하여 표시한다(S1170). 영상을 정합하여 표시하는 단계(S1170)에서는 최초의 제1 방향(예를 들어, 정면 방향)의 두 영상 데이터에 영상 정합 결과를 표시할 수 있다.
방향 자동 전환 시에, 두 영상 데이터를 동일한 방향으로 함께 회전시킬 수 있고, 두 영상 데이터를 개별 회전시킬 수도 있다. 방향 자동 전환된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전할 수 있다. 이 경우에도 수동으로 추가 회전된 이후 사용자에 의한 특징점 선택 입력이 완료되면, 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터의 방향을 자동으로 회전시켜 두 영상 데이터의 방향을 일치시킨다.
영상 정합 방법은 두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 제공하는 단계를 더 포함할 수 있다. 이 경우, 정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 선택 입력받으면, 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동하여 영상 데이터를 표시할 수 있다. 특징점 수정이 완료되고 재정합 모드가 활성화되면 초기 방향으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시할 수 있다.
이제까지 본 발명에 대하여 그 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (20)

  1. 정합 대상이 되는 제1 영상 데이터 및 제2 영상 데이터를 획득하여 표시하는 단계;
    표시되는 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는 단계; 및
    소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향을 자동으로 전환하여 표시하는 단계;
    를 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  2. 제 1 항에 있어서, 방향을 자동으로 전환하여 표시하는 단계는
    방향 정보를 알고 있는 제1 영상 데이터의 방향 정보를 이용하여 제1 영상 데이터의 방향을 회전시키고,
    회전된 제1 영상 데이터와 동일한 방향으로 제2 영상 데이터를 회전시킴으로써, 두 개의 영상 데이터를 동일한 방향으로 회전시키는 것을 특징으로 하는 의료영상 정합 방법.
  3. 제 1 항에 있어서, 의료영상 정합 방법은
    최초 표시되는 두 영상 데이터의 방향이 상이한 경우, 사용자에 의해 수동으로 제2 영상 데이터의 방향을 제1 영상 데이터의 방향과 동일한 방향으로 회전시켜 방향을 정렬하는 단계;
    를 더 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  4. 제 1 항에 있어서, 의료영상 정합 방법은
    영상 자동 회전에 따른 특징점 입력이 완료된 후, 각 방향에서 입력된 특징점들을 기준으로 두 영상 데이터의 위치를 일치시켜 정합하고 정합 결과를 표시하는 단계;
    를 더 포함하는 것인 특징으로 하는 의료영상 정합 방법.
  5. 제 4 항에 있어서, 정합 결과를 표시하는 단계는
    영상 자동 회전에 따른 특징점 입력이 완료된 후, 사용자 조작 없이 두 영상 데이터를 초기 방향으로 자동 회전시키는 단계; 및
    정합 결과를 초기 방향으로 자동 회전된 두 영상 데이터에 표시하는 단계;
    를 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  6. 제 1 항에 있어서,
    다수의 방향은 좌측, 정면 및 우측 방향을 의미하며,
    자동 방향 전환 순서는 미리 설정될 수 있고,
    각 영상 데이터 별로 다수의 방향에서 특징점을 입력하게 되면, 총 3개의 특징점이 삼각형 형태를 형성하게 되는 것을 특징으로 하는 의료영상 정합 방법.
  7. 제 1 항에 있어서, 방향을 자동으로 전환하여 표시하는 단계는
    두 영상 데이터에 특징점 선택 입력 이후, 영상 회전 그룹핑 모드가 활성화되면 두 영상 데이터를 동일한 방향으로 함께 회전시키고, 영상 회전 그룹핑 모드가 비활성화되면 두 영상 데이터를 개별 회전시키는 것을 특징으로 하는 의료영상 정합 방법.
  8. 제 1 항에 있어서, 의료영상 정합 방법은
    자동 회전된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전하는 단계; 및
    수동으로 추가 회전된 이후 사용자에 의한 특징점 선택 입력이 완료되면 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터의 방향을 자동으로 회전시켜 두 영상 데이터의 방향을 일치시키는 단계;
    를 더 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  9. 제 1 항에 있어서, 의료영상 정합 방법은
    두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 제공하는 단계;
    정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 선택 입력받는 단계; 및
    표식자를 선택 입력받은 후, 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동 및 영상 데이터를 표시하는 단계;
    를 더 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  10. 제 9 항에 있어서, 의료영상 정합 방법은
    특징점 수정이 완료되고 재정합 모드가 활성화되면 초기 방향으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시하는 단계;
    를 더 포함하는 것을 특징으로 하는 의료영상 정합 방법.
  11. 정합 대상이 되는 제1 영상 데이터 및 제2 영상 데이터를 획득하는 데이터 획득부;
    두 영상 데이터 별로 서로 다른 방향에 각각 대응하는 뷰 영상을 분할된 화면에 표시하는 출력부;
    사용자 조작신호를 입력받되, 화면에 표시되는 두 영상 데이터를 정합하기 위해 두 영상 데이터에 대하여 다수의 방향에서 각각 정합의 기준이 되는 특징점을 선택 입력받는 입력부;
    선택 입력받은 특징점을 출력부에 표시하도록 제어하는 특징점 선택부; 및
    소정의 방향에서 두 영상 데이터의 특징점 입력이 완료되면 다음 특징점 입력을 위한 사용자 조작 없이 두 영상 데이터의 방향이 자동으로 전환되도록 출력부를 제어하는 자동 방향 제어부;
    를 포함하는 것을 특징으로 하는 의료영상 처리장치.
  12. 제 11 항에 있어서, 자동 방향 제어부는
    방향 정보를 알고 있는 제1 영상 데이터의 방향 정보를 이용하여 제1 영상 데이터의 방향을 회전시키고,
    회전된 제1 영상 데이터와 동일한 방향으로 제2 영상 데이터의 방향을 회전시킴으로써, 두 개의 영상 데이터를 동일한 방향으로 회전시키는 것을 특징으로 하는 의료영상 처리장치.
  13. 제 11 항에 있어서, 의료영상 처리장치는
    최초 표시되는 두 영상 데이터의 방향이 상이한 경우, 사용자에 의해 수동으로 제2 영상 데이터의 방향을 제1 영상 데이터의 방향과 동일한 방향으로 회전시켜 방향을 정렬하고, 자동 회전된 두 영상 데이터 중 임의의 영상 데이터를 대상으로 특징점 입력을 위해 사용자에 의해 방향을 수동으로 추가 회전하는 수동 방향 제어부;
    를 더 포함하는 것을 특징으로 하는 의료영상 처리장치.
  14. 제 13 항에 있어서, 자동 방향 제어부는
    수동 방향 제어부에 의해 수동 방향 전환된 이후 사용자에 의한 특징점 선택 입력이 완료되면 다음 순서의 특징점 선택 입력을 위해 다음 순서의 방향으로 두 영상 데이터가 자동으로 회전되는 것을 특징으로 하는 의료영상 처리장치.
  15. 제 11 항에 있어서, 의료영상 처리장치는
    영상 자동 회전에 따른 특징점 입력이 완료된 후, 각 방향에서 입력된 특징점들을 기준으로 두 영상 데이터의 위치를 일치시켜 정합하고 정합 결과를 두 영상 데이터에 표시하도록 출력부를 제어하는 영상 정합부;
    를 더 포함하는 것을 특징으로 하는 의료영상 처리장치.
  16. 제 11 항에 있어서, 자동 방향 제어부는
    영상 자동 회전에 따른 특징점 입력이 완료된 후, 사용자 조작 없이 두 영상 데이터를 초기 방향으로 자동 회전시키고,
    영상 정합부는
    정합 결과를 초기 방향으로 자동 회전된 두 영상 데이터에 표시하도록 제어하는 것을 특징으로 하는 의료영상 처리장치.
  17. 제 11 항에 있어서,
    다수의 방향은 좌측, 정면 및 우측 방향을 의미하며,
    자동 방향 전환 순서는 미리 설정될 수 있고,
    각 영상 데이터 별로 다수의 방향에서 특징점을 입력하게 되면, 총 3개의 특징점이 삼각형 형태를 형성하게 되는 것을 특징으로 하는 의료영상 처리장치.
  18. 제 11 항에 있어서, 의료영상 처리장치는
    사용자 조작에 따라 영상 회전 그룹핑 모드를 활성화 또는 비활성화하는 그룹핑 모드 설정부; 를 더 포함하며,
    자동 방향 제어부는 그룹핑 모드가 활성화되면 두 영상 데이터를 동일한 방향으로 함께 회전시키고, 영상 회전 그룹핑 모드가 비활성화되면 두 영상 데이터를 개별 회전시키는 것을 특징으로 하는 의료영상 처리장치.
  19. 제 11 항에 있어서, 의료영상 처리장치는
    두 영상 데이터의 각 방향에서의 특징점 입력 완료 여부를 하나의 화면을 통해 시각적으로 구분할 수 있는 표식자 정보를 생성하여 출력부에 제공하는 표식자 제어부; 를 더 포함하며,
    자동 방향 제어부는
    정합 완료 또는 정합 과정에서 사용자가 수정하고자 하는 표식자를 입력부를 통해 선택 입력받은 후, 수정하고자 하는 특징점을 가진 영상 데이터 화면으로 이동 및 영상 데이터를 표시하도록 제어하는 것을 특징으로 하는 의료영상 처리장치.
  20. 제 19 항에 있어서, 의료영상 처리장치는
    특징점 수정이 완료된 두 영상 데이터를 재정합하되, 초기 방향으로 두 영상 데이터의 방향을 자동 회전시켜 새로운 정합 결과를 표시하도록 출력부를 제어하는 영상 재정합부;
    를 더 포함하는 것을 특징으로 하는 의료영상 처리장치.
KR1020190018711A 2019-02-18 2019-02-18 의료영상 정합 방법 및 그 장치 KR102234425B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190018711A KR102234425B1 (ko) 2019-02-18 2019-02-18 의료영상 정합 방법 및 그 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190018711A KR102234425B1 (ko) 2019-02-18 2019-02-18 의료영상 정합 방법 및 그 장치

Publications (2)

Publication Number Publication Date
KR20200100907A true KR20200100907A (ko) 2020-08-27
KR102234425B1 KR102234425B1 (ko) 2021-04-01

Family

ID=72237581

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190018711A KR102234425B1 (ko) 2019-02-18 2019-02-18 의료영상 정합 방법 및 그 장치

Country Status (1)

Country Link
KR (1) KR102234425B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102273438B1 (ko) * 2021-01-27 2021-07-07 주식회사 에이치디엑스윌 구강 스캔 데이터의 크라운 분할을 이용한 구강 스캔 데이터와 컴퓨터 단층촬영 이미지 자동 정합 장치 및 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100124367A1 (en) * 2007-01-11 2010-05-20 Sicat Gmbh & Co. Kg Image registration
KR20140032810A (ko) * 2012-09-07 2014-03-17 삼성전자주식회사 의료 영상들의 정합 방법 및 장치
KR20180088061A (ko) * 2017-01-26 2018-08-03 주식회사 이우소프트 Ct 영상과 표면 스캔 모델의 정합 방법 및 장치
KR101913586B1 (ko) * 2017-05-24 2018-11-01 오스템임플란트 주식회사 치아 영상 정합 방법, 이를 위한 장치, 및 이를 기록한 기록매체
KR20180125793A (ko) * 2017-05-16 2018-11-26 주식회사 디오 인공 치아 시술용 영상 정합을 위한 서비스 장치 및 이를 위한 이미지 정합 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100124367A1 (en) * 2007-01-11 2010-05-20 Sicat Gmbh & Co. Kg Image registration
KR20140032810A (ko) * 2012-09-07 2014-03-17 삼성전자주식회사 의료 영상들의 정합 방법 및 장치
KR20180088061A (ko) * 2017-01-26 2018-08-03 주식회사 이우소프트 Ct 영상과 표면 스캔 모델의 정합 방법 및 장치
KR20180125793A (ko) * 2017-05-16 2018-11-26 주식회사 디오 인공 치아 시술용 영상 정합을 위한 서비스 장치 및 이를 위한 이미지 정합 방법
KR101913586B1 (ko) * 2017-05-24 2018-11-01 오스템임플란트 주식회사 치아 영상 정합 방법, 이를 위한 장치, 및 이를 기록한 기록매체

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102273438B1 (ko) * 2021-01-27 2021-07-07 주식회사 에이치디엑스윌 구강 스캔 데이터의 크라운 분할을 이용한 구강 스캔 데이터와 컴퓨터 단층촬영 이미지 자동 정합 장치 및 방법

Also Published As

Publication number Publication date
KR102234425B1 (ko) 2021-04-01

Similar Documents

Publication Publication Date Title
KR101834435B1 (ko) 치과용 임플란트 플래닝 방법, 이를 위한 장치 및 이를 기록한 기록매체
KR101666982B1 (ko) 치과용 임플란트 플래닝 방법, 이를 위한 장치 및 이를 기록한 기록매체
KR102236359B1 (ko) 파노라믹 영상을 이용한 치아번호 선택방법 및 이를 위한 의료영상 처리장치
KR102314890B1 (ko) 의료영상 정합 방법 및 그 장치
KR102314891B1 (ko) 임플란트 수술용 가이드 디자인 장치 및 이를 이용한 화면 제공 방법
KR102232294B1 (ko) 임플란트 시술 계획 수립을 위한 다중 골밀도 표시방법 및 그 영상 처리장치
KR102267488B1 (ko) 치아 영상 정합 장치 및 방법
KR20200109419A (ko) 최적화된 어버트먼트 및 보철물 수복 유형 설계를 위한 임플란트 식립 설계장치 및 그 방법
EP3998037A1 (en) Implant surgery planning method using automatic placement of implant structure, user interface providing method therefor, and teeth image processing device therefor
KR102239358B1 (ko) 임플란트 중심선을 이용한 임플란트 식립 계획 수립 방법 및 이를 위한 치과영상 처리장치
KR102138919B1 (ko) 보철물 파라미터 조정방법 및 이를 수행하는 보철 캐드 장치
KR102234425B1 (ko) 의료영상 정합 방법 및 그 장치
KR102422534B1 (ko) 임플란트 시뮬레이션 방법 및 그 장치
KR102269029B1 (ko) 임플란트 시뮬레이션 방법 및 그 장치
JP6868255B2 (ja) 支台歯形成支援装置
KR102197309B1 (ko) 상악동 리프팅을 위한 픽스쳐 침범영역 분할이 가능한 의료영상 처리방법 및 그 장치
KR102210341B1 (ko) 영상처리 및 시뮬레이션을 이용한 신경관 자동 검출방법 및 그 장치
KR102292874B1 (ko) 임플란트 수술용 가이드 영역 미세조정 방법 및 그 가이드 디자인 장치
KR102237711B1 (ko) 신경관 라인 생성 방법 및 이를 위한 의료영상 처리장치
KR20210114223A (ko) 치과 임플란트 수술계획 수립방법 및 그 장치
KR102474298B1 (ko) 보철물 모델 설계 방법 및 그 장치
KR20220087874A (ko) 의료영상 정합 방법 및 그 장치
KR102416168B1 (ko) 상악동 거상술 시뮬레이션 방법 및 그 장치
KR102573907B1 (ko) 아치라인 수정방법 및 그 치아 배열 디자인 장치
KR20230097408A (ko) 임플란트 수술용 가이드 디자인 방법 및 그 장치

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant