KR101654824B1 - Method and apparatus for controlling key point matching of medical images - Google Patents

Method and apparatus for controlling key point matching of medical images Download PDF

Info

Publication number
KR101654824B1
KR101654824B1 KR1020140094496A KR20140094496A KR101654824B1 KR 101654824 B1 KR101654824 B1 KR 101654824B1 KR 1020140094496 A KR1020140094496 A KR 1020140094496A KR 20140094496 A KR20140094496 A KR 20140094496A KR 101654824 B1 KR101654824 B1 KR 101654824B1
Authority
KR
South Korea
Prior art keywords
medical image
key points
key
matching
points
Prior art date
Application number
KR1020140094496A
Other languages
Korean (ko)
Other versions
KR20160012644A (en
Inventor
김한영
Original Assignee
주식회사 인피니트헬스케어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 인피니트헬스케어 filed Critical 주식회사 인피니트헬스케어
Priority to KR1020140094496A priority Critical patent/KR101654824B1/en
Publication of KR20160012644A publication Critical patent/KR20160012644A/en
Application granted granted Critical
Publication of KR101654824B1 publication Critical patent/KR101654824B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Quality & Reliability (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

의료 영상의 위치 매칭 제어 방법 및 그 장치가 개시된다. 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 방법은 피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭시키는 단계; 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계; 사용자 인터페이스를 이용한 사용자 입력에 의해, 상기 제1 의료 영상에 디스플레이된 키 포인트들 중 제1 키 포인트에 대한 위치 이동이 결정되면 상기 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭시키는 단계; 및 키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계를 포함한다.A position matching control method and apparatus for a medical image are disclosed. A method for controlling position matching of a medical image according to an embodiment of the present invention includes: comparing key points of the first medical image extracted from a first medical image photographed in a first posture of the subject, Matching the key points of the second medical image extracted from the image; Displaying the key points of the first medical image matching the key points on the first medical image and displaying the key points of the second medical image on the second medical image; When a positional shift with respect to a first key point among the key points displayed on the first medical image is determined by user input using a user interface, key points of the first medical image including the first key point, Matching the key points of the second medical image; And displaying the key points of the first medical image on which the key points are mismatched on the first medical image and displaying the key points of the second medical image on the second medical image.

Description

의료 영상의 위치 매칭 제어 방법 및 그 장치 {Method and apparatus for controlling key point matching of medical images}BACKGROUND OF THE INVENTION 1. Field of the Invention [0002]

본 발명은 의료 영상의 위치 매칭(key point matching)에 대한 것으로, 상세하게는 의료 영상 간 매칭 정확성을 향상시킬 수 있는 의료 영상의 위치 매칭 제어 방법 및 그 장치에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to key point matching of a medical image, and more particularly, to a method and an apparatus for controlling matching of a medical image to improve matching accuracy between medical images.

본 발명은 산업통상자원부 및 한국산업기술평가관리원의 핵심의료기기제품화 기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제번호: 10043072, 과제명: 3D 의료영상 SW인 Xelis 솔루션 제품의 신뢰성 및 국제 경쟁력 향상을 위한 임상평가 및 제품 개선].The present invention is derived from research conducted by the Ministry of Industry, Commerce, and Industry and the Korea Industrial Technology Evaluation and Management Center as part of the development of core medical device commercialization technology. [Task No. 10043072, Title: Reliability of Xelis Solution Product Clinical evaluation and product improvement for improving international competitiveness].

우리나라는 물론 미국, 일본, 유럽 등의 선진국은 이미 출산율 감소로 인한 고령화 시대를 맞이 하였으며, 노인인구가 많아지는 만큼 의료산업에 대한 수요 또한 급격히 늘어나고 있는 추세다. 고령인구에 많이 나타나는 뇌 질환이나 심장 혈관계 질환 및 암 질환의 증가에 따라 이를 초기에 정확히 진단하기 위한 자기공명영상(MRI: Magnetic Resonance Imaging), 컴퓨터단층촬영(CT: Computed Tomography), 양전자단층촬영(PET: Positron Emission Tomography), 단일광자단층촬영(SPECT: Single Photon Emission Computed Tomography) 등의 기술 역시 중요시되고 있으며, 그 성능 또한 발전하고 있다.Developed countries such as the United States, Japan, and Europe, as well as Korea, have already reached the age of aging due to the declining fertility rate. As the elderly population increases, the demand for the medical industry is also rapidly increasing. Magnetic Resonance Imaging (MRI), Computed Tomography (CT), and Positron Emission Tomography (CT) for accurate diagnosis of early onset of brain diseases, cardiovascular diseases, and cancer PET: Positron Emission Tomography), and Single Photon Emission Computed Tomography (SPECT) are becoming important, and their performance is also developing.

전통적으로 우리나라에서는 위암의 비율이 높았으나, 최근에는 육류 소비가 증가하는 등 식생활 습관의 변화로 인하여 과거에는 선진국형 질환으로 여겨지던 대장암의 비율이 높아지는 등의 변화가 일어나고 있다. 대장(colon)의 진단을 위해서는 컴퓨터단층촬영 영상의 재구성을 통한 3D 볼륨 렌더링이나 가상 내시경(virtual colonoscopy) 영상이 주로 이용된다. 이때 환자의 자세 예를 들어, 누운 자세(supine)와 엎드린 자세(prone)에 따라 촬영되는 영상이 다르기 때문에, 서로 다른 자세에서 촬영된 의료 영상들을 서로 대응하는 키 포인트들을 매칭하여 비교하는 기술이 임상적으로 의미가 있다. 이 때 서로 다른 자세에서 촬영된 의료 영상들은 매칭 알고리즘을 이용하여 키 포인트들을 추출하며 추출된 키 포인트들의 위치를 이용하여 영상을 매칭할 수 있다.Traditionally, the proportion of gastric cancer in Korea has been high. Recently, however, changes in dietary habits such as an increase in meat consumption have caused changes such as an increase in the proportion of colorectal cancer, which is considered to be an advanced disease in the past. For the diagnosis of the colon, 3D volume rendering or virtual colonoscopy images are used mainly through reconstruction of CT images. In this case, since the images taken in accordance with the patient's posture such as supine and prone are different, a technique for matching and comparing key points corresponding to each other with medical images photographed in different postures is called clinical It has meaning in the enemy. At this time, the medical images photographed in different attitudes can extract the key points using the matching algorithm and match the images using the positions of the extracted key points.

하지만, 종래 위치 매칭 방법은 매칭된 두 의료 영상들 각각의 키 포인트들을 변경할 수 없었으며, 의료 영상의 키 포인트들 위치를 보정하는 방법이 직관적이지 못하여 사용자에게 불편함을 주고 그 보정 방법이 비효율적이었다.However, the conventional position matching method can not change the key points of each of the matched medical images, and the method of correcting the position of the key points of the medical image is not intuitive and inconvenient to the user, and the correction method is inefficient .

이런 문제점을 해결할 수 있도록 활용할 수 있는 수단의 일 예시로서, 선행기술인 한국공개특허 제10- 2014-0032810호는 의료 영상들의 정합 방법 및 장치에 대한 것으로, 의료 시술 전에 사전 촬영된 영상으로서 장기와 병변이 나타나는 제1 의료 영상과 의료 시술 중 실시간으로 촬영된 영상으로서 상대적으로 에지 콘트라스트가 낮은 제2 의료 영상의 특징점들을 이용하여 제1 의료 영상과 제2 의료 영상을 신속하고 정확하게 정합할 수 있는 기술이다.As an example of a means that can be utilized to solve such a problem, Korean Patent Laid-Open No. 10-2014-0032810 discloses a method and apparatus for matching medical images, The first medical image and the second medical image can be quickly and precisely matched using the feature points of the second medical image having a relatively low edge contrast as the first medical image and the medical image, .

상기 선행기술은 특징점을 이용하여 의료 영상 간의 정합을 수행하는데, 환자의 다른 자세가 아닌 동일 자세에서 촬영된 의료 영상들을 정합하는 기술이기 때문에, 환자의 서로 다른 자세에서 촬영되어 특징점들 간의 위치가 상당한 차이를 나타내는 의료 영상들 간의 매칭 방법으로 적용하기 힘든 문제점이 있다.Since the prior art is a technique of matching medical images using feature points, it is a technique of matching medical images photographed in the same posture rather than in different postures of a patient. Therefore, There is a problem that it is difficult to apply it as a matching method between medical images representing differences.

따라서, 환자에 대해 다른 자세에서 촬영된 의료 영상들 간의 위치 또는 특징점을 매칭시키기 위한 방법이 필요한 실정이다.Accordingly, there is a need for a method for matching a position or a minutiae point between medical images captured in different attitudes to a patient.

한국공개특허공보 제10-2014-0032810호 "의료 영상들의 정합 방법 및 장치" (공개일: 2014.03.17)Korean Patent Laid-Open Publication No. 10-2014-0032810 "Method and apparatus for matching medical images" (Publication date: 2014.03.17)

본 발명은 상기와 같은 종래 기술의 문제점을 해결하고자 도출된 것으로서, 의료 영상들의 키 포인트들을 디스플레이하고 조정할 수 있는 사용자 인터페이스를 제공함으로써, 의료 영상 간 매칭 정확성을 향상시킬 수 있는 의료 영상의 위치 매칭 제어 방법 및 그 장치를 제공하는 것을 목적으로 한다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a user interface capable of displaying and adjusting key points of medical images, And to provide a method and apparatus therefor.

또한, 본 발명은 키 포인트와 해당 키 포인트에 대한 의료 영상을 동기화시켜 디스플레이함으로써, 키 포인트들간의 매칭 정확성을 향상시킬 수 있는 의료 영상의 위치 매칭 제어 방법 및 그 장치를 제공하는 것을 목적으로 한다.Another object of the present invention is to provide a medical image position matching control method and apparatus which can improve the matching accuracy between key points by displaying a medical image of a key point and a corresponding key point in a synchronized manner.

본 발명은 의료 영상들 간의 키 포인트들을 자동으로 추출하여 비교할 수 있도록 사용자에게 제공하고, 누운 자세(supine position)와 엎드린 자세(prone position) 간의 의료 영상들 간에 위치의 차이가 상대적으로 큰 키 포인트들 간에도 효과적으로 매칭 정확성을 향상시킬 수 있는 사용자 인터페이스를 제공하는 것을 또 다른 목적으로 한다.The present invention provides a method of automatically extracting and comparing key points between medical images and providing the same to a user. The medical image between medical images between a supine position and a prone position has relatively large key points Another object of the present invention is to provide a user interface capable of effectively improving the matching accuracy even in the middle.

상기와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 방법은 피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭시키는 단계; 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계; 사용자 인터페이스를 이용한 사용자 입력에 의해, 상기 제1 의료 영상에 디스플레이된 키 포인트들 중 제1 키 포인트에 대한 위치 이동이 결정되면 상기 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭시키는 단계; 및 키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method for controlling position matching of a medical image, the method comprising: Matching the key points of the second medical image extracted from the second medical image photographed in the second posture; Displaying the key points of the first medical image matching the key points on the first medical image and displaying the key points of the second medical image on the second medical image; When a positional shift with respect to a first key point among the key points displayed on the first medical image is determined by user input using a user interface, key points of the first medical image including the first key point, Matching the key points of the second medical image; And displaying the key points of the first medical image on which the key points are mismatched on the first medical image and displaying the key points of the second medical image on the second medical image.

본 발명에 따른 방법은 사용자가 상기 사용자 인터페이스를 통하여 키 포인트를 이동시킬 수 있도록 사용자 메뉴를 제공하는 단계를 더 포함할 수 있다.The method according to the present invention may further include providing a user menu so that a user can move a key point through the user interface.

본 발명에 따른 방법은 상기 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들에 대한 위치를 나타내는 제1 내비게이션 바와 상기 제2 의료 영상의 키 포인트들에 대한 위치를 나타내는 제2 내비게이션 바를 제공하는 단계를 더 포함할 수 있다.The method according to the present invention provides a first navigation bar indicating the position of the key point of the first medical image matched with the key point and a second navigation bar indicating the position of the key points of the second medical image Step < / RTI >

본 발명에 따른 방법은 상기 제1 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상과 상기 제2 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상을 화면 상에 디스플레이하는 단계를 더 포함할 수 있다.The method according to the present invention is characterized in that the medical image corresponding to any one of the key points of the first medical image and the key point of the second medical image is displayed on the screen To the display device.

상기 어느 하나의 키 포인트에 대응하는 의료 영상은 가상 내시경(endoscope) 영상, 밴드 뷰(band view) 영상, 단면 영상 중 어느 하나일 수 있다.The medical image corresponding to any one of the key points may be a virtual endoscope image, a band view image, or a sectional image.

상기 매칭시키는 단계는 상기 제1 의료 영상의 곡률 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 곡률 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출할 수 있다.The matching step may include extracting key points of the first medical image using the curvature information of the first medical image and extracting key points of the second medical image using the curvature information of the second medical image .

상기 매칭시키는 단계는 상기 제1 의료 영상의 해부학적 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 해부학적 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출할 수 있다.Wherein the matching step includes extracting key points of the first medical image using the anatomical information of the first medical image and extracting key points of the second medical image using the anatomical information of the second medical image, Can be extracted.

본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 장치는 피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭하고, 상기 제1 의료 영상의 키 포인트들 중 사용자 인터페이스를 이용한 사용자 입력에 의해 위치 이동된 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭하는 매칭부; 및 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고, 키 포인트가 매칭된 상기 제2 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 디스플레이 제어부를 포함한다.The apparatus for matching the position of the medical image according to the embodiment of the present invention may be arranged such that the key points of the first medical image extracted from the first medical image photographed in the first posture of the examinee, The first medical image including a first key point positioned by a user input using a user interface among key points of the first medical image, A matching unit for re-matching the key points with the key points of the second medical image; And displaying the key points of the first medical image where the key points or the key points of the first medical image matched with the key point are mismatched on the first medical image, And a display controller for displaying the key points of the second medical image on which the key points or the key points are mismatched on the second medical image.

본 발명에 따르면, 의료 영상들의 키 포인트들을 디스플레이하고 조정할 수 있는 사용자 인터페이스를 제공하고, 키 포인트와 해당 키 포인트에 대한 의료 영상을 동기화시켜 디스플레이함으로써, 키 포인트들간의 매칭 정확성을 향상시키고 따라서 의료 영상 간 매칭 정확성을 향상시킬 수 있다.According to the present invention, a user interface capable of displaying and adjusting key points of medical images is provided, and a medical image for a key point and a corresponding key point are displayed in synchronization to improve matching accuracy between key points, It is possible to improve the accuracy of cross-matching.

구체적으로, 본 발명은 매칭 시 의료 영상들 각각에 대한 키 포인트들의 위치를 나타내는 직선 바(bar) 예를 들어, 내비게이션(navigation) 바를 제공하고, 의료 영상 또는 직선 바 상에서 조정하고자 하는 키 포인트를 선택하여 키 포인트의 위치를 조정함으로써, 의료 영상들 간의 키 포인트 매칭에 대한 정확성을 향상시킬 수 있다.Specifically, the present invention provides a linear bar, e.g., a navigation bar, that indicates the location of key points for each of the medical images during matching and selects a key point to be adjusted on the medical image or straight line bar The accuracy of key point matching between medical images can be improved by adjusting the position of the key point.

이런 본 발명은 환자의 제1 자세 예를 들어, 누운 자세(supine position)에서 촬영된 의료 영상과 환자의 제2 자세 예를 들어, 엎드린 자세(prone position)에서 촬영된 의료 영상 각각에서 추출된 키 포인트들 간의 매칭 정확성을 향상시키기 위한 사용자 인터페이스를 제공함으로써, 의료 영상들 간의 매칭을 수행하기 위한 키 포인트들에 대한 위치를 용이하게 조정할 수 있다.The present invention can be applied to a medical image captured in a first position, for example, a supine position and a second position in a patient, for example, a key extracted from each medical image photographed in a prone position, By providing a user interface to improve matching accuracy between points, the location of key points for performing matching between medical images can be easily adjusted.

또한, 본 발명에 따르면 키 포인트들 간의 매칭 정확성을 향상시키기 위한 사용자 인터페이스를 제공함으로써, 매칭이 잘못된 특정 키 포인트만을 조정할 수 있고, 조정된 특정 키 포인트에 대한 매칭을 수행할 수 있다. 따라서, 두 의료 영상 간의 매칭 정확성을 향상시키면서 매칭을 수행하는데 걸리는 시간을 줄일 수 있다.Also, according to the present invention, by providing a user interface for improving the matching accuracy between the key points, it is possible to adjust only the specific key point with the wrong matching, and perform matching with respect to the specific key point adjusted. Accordingly, it is possible to reduce the time taken to perform the matching while improving the matching accuracy between the two medical images.

도 1은 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 방법에 대한 동작 흐름도를 나타낸 것이다.
도 2는 본 발명에 따른 방법에 대한 추가 동작 흐름도를 나타낸 것이다.
도 3과 도 4는 본 발명의 위치 매칭 제어 방법을 적용할 수 있는 2D 의료 영상과 3D 의료 영상에 대한 일 예시도를 나타낸 것이다.
도 5는 추출된 키 포인트들에 대한 일 예시도를 나타낸 것이다.
도 6은 추출된 키 포인트들이 디스플레이된 화면 상의 구성을 나타낸 것이다.
도 7 내지 도 10은 본 발명에 따른 방법을 설명하기 위한 예시도들을 나타낸 것이다.
도 11은 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 장치에 대한 구성을 나타낸 것이다.
FIG. 1 is a flowchart illustrating a method of controlling a position matching of a medical image according to an exemplary embodiment of the present invention.
Figure 2 shows a further operational flow diagram for the method according to the invention.
FIG. 3 and FIG. 4 illustrate an example of a 2D medical image and a 3D medical image to which the position matching control method of the present invention can be applied.
Figure 5 shows an example of extracted key points.
FIG. 6 shows a screen configuration on which extracted key points are displayed.
Figures 7 to 10 show illustrative figures for illustrating the method according to the present invention.
FIG. 11 shows a configuration of a medical image position matching controller according to an embodiment of the present invention.

상기 목적 외에 본 발명의 다른 목적 및 특징들은 첨부 도면을 참조한 실시 예에 대한 설명을 통하여 명백히 드러나게 될 것이다.Other objects and features of the present invention will become apparent from the following description of embodiments with reference to the accompanying drawings.

본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

이하에서는, 본 발명의 일 실시 예에 따른 의료 영상의 위치 매칭 제어 방법 및 그 장치를 첨부된 도 1 내지 도 11을 참조하여 상세히 설명한다.Hereinafter, a method and an apparatus for controlling the position matching of a medical image according to an embodiment of the present invention will be described in detail with reference to FIGS. 1 to 11. FIG.

본 발명은 환자 또는 피검자에 대해 다른 자세에서 촬영된 의료 영상들 간의 위치 매칭을 제어하기 위한 방법으로, 환자의 제1 자세 예를 들어, 누운 자세(supine)에서 촬영된 의료 영상과 환자의 제2 자세 예를 들어, 엎드린 자세(prone)에서 촬영된 의료 영상의 키 포인트들을 디스플레이하고 조정할 수 있는 사용자 인터페이스를 제공하고, 키 포인트와 해당 키 포인트에 대한 의료 영상을 동기화하여 디스플레이함으로써, 키 포인트들간의 매칭 정확성을 향상시키고 이를 통해 의료 영상 간 매칭 정확성을 향상시키고자 하는 것을 그 요지로 한다.The present invention relates to a method for controlling position matching between medical images captured in different attitudes with respect to a patient or an examinee, and is a method for controlling position matching between a medical image photographed in a supine position and a second For example, a user interface capable of displaying and adjusting key points of a medical image photographed in a prone position (prone) is provided, and a medical image for a key point and a corresponding key point are displayed in synchronization with each other, It is important to improve the matching accuracy and to improve the accuracy of matching between medical images.

또한 본 발명은 키 포인트들 간의 매칭을 조정하기 위한 사용자 인터페이스를 제공함으로써, 사용자에게 키 포인트의 위치를 용이하게 조정할 수 있고, 이를 통해 의료 영상들의 위치를 매칭시키는 방법에 대한 효율성을 향상시킬 수 있다.In addition, the present invention provides a user interface for adjusting matching between key points, so that it is possible to easily adjust the position of a key point to a user, thereby improving the efficiency of a method of matching positions of medical images .

도 1은 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 방법에 대한 동작 흐름도를 나타낸 것이다. 도 1의 의료 영상의 위치 매칭 제어 방법은 그래픽 사용자 인터페이스를 제어할 수 있는 컴퓨팅 시스템의 프로세서(processor)를 통하여 실행될 수 있으며, 프로세서와 연결되는 메모리에 로드(load)되는 인스트럭션의 형태로 저장될 수 있다.FIG. 1 is a flowchart illustrating a method of controlling a position matching of a medical image according to an exemplary embodiment of the present invention. 1 may be executed through a processor of a computing system capable of controlling a graphical user interface and may be stored in the form of an instruction loaded into a memory connected to the processor. have.

도 1을 참조하면, 본 발명에 따른 방법은 환자 또는 피검자에 대해 제1 자세 예를 들어, 누운 자세 누운 자세(supine position)에서 촬영된 의료 영상(이하, "제1 의료 영상"이라 칭함)과 제2 자세 예를 들어, 엎드린 자세(prone position)에서 촬영된 의료 영상(이하, "제2 의료 영상"이라 칭함)을 수신하고, 수신된 제1 의료 영상에 대한 키 포인트들(이하, "제1 키 포인트들"이라 칭함)과 제2 의료 영상에 대한 키 포인트들(이하, "제2 키 포인트들"이라 칭함)을 추출한다(S110, S120).1, the method according to the present invention includes a medical image (hereinafter, referred to as a "first medical image") photographed in a first posture, for example, a supine position in a lying posture, (Hereinafter referred to as " second medical image ") photographed in a prone position, and receives key points (hereinafter referred to as" second medical image " 1 key points ") and key points (hereinafter referred to as "second key points") for the second medical image are extracted (S110, S120).

이 때, 단계 S110에서 수신되는 제1 의료 영상과 제2 의료 영상은 도 3에 도시된 일 예와 같이, 2차원(2D) 의료 영상(310, 320)일 수도 있고, 도 4에 도시된 일 예와 같이, 3차원(3D) 의료 영상(410, 420)일 수도 있다. 물론, 2D 의료 영상은 액시얼(axial) 영상, 코로날(coronal) 영상, 새지털(sagittal) 영상일 수 있고, 이에 한정되지 않는다. 도 3과 도 4에서 좌측에 디스플레이되는 의료 영상(a)은 제1 자세에서 촬영된 의료 영상일 수 있고, 우측에 디스플레이되는 의료 영상(b)은 제2 자세에서 촬영된 의료 영상일 수 있다. 물론, 좌측과 우측에 디스플레이되는 영상이 서로 바뀔 수도 있다.At this time, the first medical image and the second medical image received in step S110 may be two-dimensional (2D) medical images 310 and 320 as shown in FIG. 3, (3D) medical images 410, 420, as in the example. Of course, the 2D medical image may be an axial image, a coronal image, or a sagittal image, but is not limited thereto. 3 and 4, the medical image a displayed on the left side may be a medical image photographed in the first posture, and the medical image b displayed on the right side may be a medical image photographed in the second posture. Of course, the images displayed on the left and right sides may be interchanged.

그리고, 단계 S110에서 수신되는 의료 영상들은 의료 영상을 저장하고 있는 서버나 시스템 예를 들어 의료 영상 저장 전송 시스템(PACS)으로부터 수신될 수도 있고, 의료 영상을 촬영하는 의료 영상 촬영 장치 예를 들어, CT 장치(CT modality)로부터 직접 수신될 수도 있다.The medical images received in step S110 may be received from a server or a system storing a medical image, for example, from a medical image storage transmission system (PACS), or may be received by a medical image capturing device, for example, CT May be received directly from the device (CT modality).

도 3과 도 4는 화면 상에 로딩되는 2D 의료 영상과 3D 의료 영상에 대한 예시도를 나타낸 것으로, 도 4와 같이 3D 의료 영상이 화면에 로딩되는 경우 3D 의료 영상, 3D 의료 영상에 나타나는 패스(path)에 대한 위치를 나타내는 내비게이션 바 그리고 패스 상에서 사용자에 의해 선택된 위치에 대응하는 영상이 별도의 영역에 디스플레이되도록 구성할 수 있다. 물론, 로딩되는 의료 영상이 2D 의료 영상인 경우에도 도 4와 같은 화면 구성으로 디스플레이될 수도 있다.FIG. 3 and FIG. 4 illustrate examples of a 2D medical image and a 3D medical image loaded on a screen. When a 3D medical image is loaded on a screen, a 3D medical image and a path path, and an image corresponding to the position selected by the user on the path may be displayed in a separate area. Of course, even if the medical image to be loaded is a 2D medical image, it may be displayed in a screen configuration as shown in FIG.

이 때, 단계 S120에서 추출되는 의료 영상에서의 제1 키 포인트들과 제2 키 포인트들은 제1 의료 영상과 제2 의료 영상에서의 곡률 정보를 이용하여 주요 변곡점들을 검출하고, 검출된 주요 변곡점들을 반영하여 추출될 수도 있고, 제1 의료 영상과 제2 의료 영상의 해부학적 정보 예를 들어, 의료 영상의 관심 영역(ROI)에 대한 정보, 장기 정보, 해당 장기에서의 주요 포인트에 대한 정보 등을 이용하여 추출될 수도 있다.At this time, the first key points and the second key points in the medical image extracted in step S120 are used to detect the main inflection points using the curvature information in the first medical image and the second medical image, For example, anatomical information of the first medical image and the second medical image, information on the ROI of the medical image, long-term information, information on the major points in the organ, and the like .

즉, 단계 S120은 의료 영상의 곡률 정보를 이용하여 전체 패스 모양을 잘 나타낼 수 있는 특징점들을 키 포인트들로 추출할 수도 있고, 해부학적 정보를 기반으로 전체 패스 모양을 잘 나타낼 수 있는 특징점들을 키 포인트들로 추출할 수도 있다.That is, in step S120, feature points capable of representing the entire path shape can be extracted using key points by using the curvature information of the medical image, and feature points capable of representing the entire path shape based on the anatomical information . ≪ / RTI >

예컨대, 도 5에 도시된 일 예와 같이, 제1 자세(예를 들어, supine)에서 촬영된 대장에 대한 의료 영상(a)에서 대장에 대한 패스로부터 키 포인트들(510)을 추출하고, 제2 자세(예를 들어, prone)에서 촬영된 대장에 대한 의료 영상(b)에서 대장에 대한 패스로부터 키 포인트들(520)을 추출할 수 있다. 물론, 두 의료 영상에서 추출되는 키 포인트들에 대한 개수는 동일한 것이 바람직하다.5, the key points 510 are extracted from the path for the large intestine in the medical image (a) for the large intestine photographed in the first posture (for example, supine) Key points 520 can be extracted from the path to the large intestine in the medical image (b) for the large intestine photographed in two positions (e.g., prone). Of course, the number of key points extracted from two medical images is preferably the same.

물론, 본 발명에서 키 포인트들을 추출하는 방법이 이에 한정되지 않으며, 의료 영상에서 키 포인트들을 추출할 수 있는 다양한 방법들이 적용될 수 있다.Of course, the method of extracting key points in the present invention is not limited thereto, and various methods of extracting key points from a medical image can be applied.

단계 S120에 의해 제1 키 포인트들과 제2 키 포인트들이 추출되면 추출된 제1 키 포인트들과 제2 키 포인트들을 매칭시키고, 매칭된 제1 키 포인트들과 제2 키 포인트들을 제1 의료 영상과 제2 의료 영상에 디스플레이한다(S130, S140). 이때 도 5 및 도 6에 도시된 것처럼, 매칭된 제1 키 포인트들(510)은 제1 자세에서 촬영된 대장에 대한 의료 영상(a)에서 대장에 대한 패스(path)와 함께 제1 의료 영상에 디스플레이되고, 매칭된 제2 키 포인트들(520)은 제2 자세에서 촬영된 대장에 대한 의료 영상(b)에서 대장에 대한 패스(path)와 함께 제2 의료 영상에 디스플레이된다. If the first key points and the second key points are extracted in step S120, the extracted first key points and the second key points are matched, and the matched first key points and the second key points are matched with the first medical image And the second medical image (S130, S140). As shown in FIGS. 5 and 6, the matched first key points 510 include a path for the colon in the medical image (a) for the large intestine photographed in the first posture, And the matched second key points 520 are displayed on the second medical image together with the path to the large intestine in the medical image b for the large intestine photographed in the second posture.

단계 S130에서의 키 포인트들의 매칭은 키 포인트들 간의 간격을 이용하여 매칭할 수도 있고, 해당 의료 영상에서의 위치 등을 이용하여 매칭할 수도 있다.The matching of the key points in step S130 may be performed using the interval between the key points, or may be matched using the position in the medical image.

이 때, 의료 영상에 디스플레이되는 키 포인트들(510, 520)은 도 6에 도시된 일 예와 같이, 제1 자세에서 촬영된 의료 영상이 디스플레이되는 영역(610)과 제2 자세에서 촬영된 의료 영상이 디스플레이되는 영역(620)에서 제1 의료 영상과 제2 의료 영상에 오버레이(overlay)되어 디스플레이될 수 있다. 각 의료 영상에 오버레이되는 키 포인트들은 서로 매칭된 상태이기 때문에 대응하는 키 포인트들끼리 동기화된 상태일 수 있다.In this case, the key points 510 and 520 displayed on the medical image are divided into a region 610 in which the medical image photographed in the first posture is displayed and a region 610 in which the medical image photographed in the second posture May be overlaid and displayed on the first medical image and the second medical image in an area 620 where the image is displayed. Since the key points overlaid on each medical image are matched to each other, the corresponding key points may be in a synchronized state.

물론, 본 발명에 따른 방법에서 화면 상에 디스플레이되는 구성이 각 자세에서 촬영된 의료 영상과 키 포인트들 뿐만 아니라 키 포인트들에 대한 위치와 해당하는 영상을 화면 상에 제공할 수 있으며 이에 대해 도 2를 참조하여 설명한다.Of course, in the method according to the present invention, the configuration displayed on the screen can provide on the screen images corresponding to the positions of the medical images and key points as well as the key points captured in each position, .

도 2는 본 발명에 따른 방법에 대한 추가 동작 흐름도를 나타낸 것으로, 도 2에 도시된 바와 같이 본 발명에 따른 방법은 제1 의료 영상과 제2 의료 영상에 대해 매칭된 제1 키 포인트들에 대한 위치를 나타내는 제1 내비게이션 바와 제2 키 포인트들에 대한 위치를 나타내는 제2 내비게이션 바를 제공하고 제1 의료 영상의 매칭된 제1 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상과 제1 키 포인트들 중 어느 하나의 위치와 동기화된 제2 키 포인트들 중 어느 하나에 대응하는 의료 영상을 화면 상의 별도 영역에 디스플레이한다(S210, S220). 즉, 단계 S220은 제1 의료 영상과 제2 의료 영상에서 위치가 동기화된 키 포인트에 대응하는 의료 영상 각각을 화면 상의 별도 영역에 디스플레이한다2 illustrates a flowchart of a further operation of the method according to the present invention. As shown in FIG. 2, a method according to the present invention includes steps of generating a first medical image and a second medical image, And a second navigation bar indicating a position for the first key point and a second navigation bar indicating a position for the first key point and a second navigation bar indicating a position for the first key point, A medical image corresponding to any one of the second key points synchronized with any one of the points is displayed in a separate area on the screen (S210, S220). That is, in step S220, each of the medical images corresponding to the key points whose positions are synchronized in the first medical image and the second medical image is displayed in a separate area on the screen

여기서, 단계 S210은 도6에 도시된 바와 같이, 제1 의료 영상의 패스에서 제1 키 포인트들(510) 각각에 대응하는 위치를 나타내는 제1 내비게이션 바(630)와 제2 의료 영상의 패스에서 제1 키 포인트들과 매칭된 제2 키 포인트들(520) 각각에 대응하는 위치를 나타내는 제2 내비게이션 바(660)를 제공하고, 제1 키 포인트들 중 어느 하나의 키 포인트 위치에 대응하는 의료 영상을 별도의 디스플레이 영역(620)에 디스플레이하며 제1 키 포인트들 중 어느 하나의 키 포인트 위치와 동기화된 제2 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상을 별도의 디스플레이 영역(650)에 디스플레이한다. 내비게이션 바 영역과 키 포인트들 중 어느 하나의 키 포인트에 대한 위치에 대응하는 의료 영상이 디스플레이되는 영역은 상황에 따라 달라질 수 있다.6, in step S210, a first navigation bar 630 indicating a position corresponding to each of the first key points 510 in the path of the first medical image and a second navigation bar 630 indicating a position corresponding to each of the first key points 510 in the path of the second medical image Providing a second navigation bar (660) indicative of a position corresponding to each of the first key points and the second key points (520) matched to the first key points, The medical image corresponding to any one of the second key points synchronized with any one of the first key points is displayed in a separate display area 650 ). The area in which the medical image corresponding to the position of the key point of either the navigation bar area or the key points is displayed may vary depending on the situation.

또한, 도 6에 도시된 일 예와 같이, 키 포인트 위치에 대응되는 의료 영상은 가상 내시경(endoscope) 영상, 밴드 뷰(band view) 영상, 단면 영상 중 어느 하나일 수 있다.6, the medical image corresponding to the key point position may be any one of a virtual endoscope image, a band view image, and a cross-sectional image.

다시 도 1을 참조하면, 단계 S140에 의해 매칭된 키 포인트들이 의료 영상들 각각에 디스플레이 되면 사용자 인터페이스를 통해 키 포인트를 이동시킬 수 있도록 사용자 메뉴를 제공한다(S150).Referring again to FIG. 1, when the key points matched in step S140 are displayed in each of the medical images, a user menu is provided to move the key point through the user interface (S150).

이 때, 사용자 메뉴는 사용자 인터페이스를 통해 어느 하나의 키 포인트를 이동 시키고 이동된 위치를 해당 키 포인트의 새로운 위치로 조정할 수 있는 것과 같은 기능의 사용자 메뉴일 수 있으며, 이 뿐만 아니라 본 발명에 따른 방법을 수행할 수 있는 모든 사용자 메뉴를 포함할 수 있다.In this case, the user menu may be a user menu having the function of moving a key point through the user interface and adjusting the moved position to a new position of the corresponding key point. In addition, ≪ RTI ID = 0.0 > and / or < / RTI >

또한, 단계 S150에서 제공되는 사용자 메뉴는 도 2에서 설명한 내비게이션 바 등을 포함할 수도 있다.In addition, the user menu provided in step S150 may include a navigation bar or the like described with reference to FIG.

본 발명에서 제공되는 사용자 메뉴를 이용한 사용자 입력에 의해 키 포인트의 위치 이동이 결정되었는지 판단한다(S160).It is determined whether the movement of the key point is determined by user input using the user menu provided in the present invention (S160).

이 때, 단계 S160은 사용자 인터페이스를 이용한 사용자 입력을 통해 제1 키 포인트들 또는 제2 키 포인트들 중 어느 하나의 키 포인트 위치가 이동되고 사용자에 의해 새로운 위치가 해당 키 포인트의 위치로 결정되었는지 판단할 수 있다.At this time, in step S160, it is determined whether any one of the first key points or the second key points is moved through the user input using the user interface and whether the new position is determined as the position of the corresponding key point can do.

단계 S160 판단 결과, 제1 키 포인트들 또는 제2 키 포인트들 중 어느 하나의 키 포인트 위치가 사용자에 의해 이동된 위치로 결정되면 위치 이동된 키 포인트를 포함하는 제1 키 포인트들과 제2 키 포인트들을 재매칭한다(S170).If it is determined in step S160 that the position of one of the first key points or the second key points is shifted by the user, the first key points including the position-shifted key point and the second key point The points are remapped (S170).

이 때, 단계 S170은 제1 키 포인트들과 제2 키 포인트들 모두에 대해 재매칭을 수행할 수도 있지만, 위치 이동이 결정된 특정 키 포인트에 대해서만 재매칭을 수행할 수도 있다.At this time, step S170 may perform re-matching for both the first key points and the second key points, but may perform re-matching only for the specific key point for which the movement is determined.

단계 S170에 의해 두 의료 영상의 키 포인트들이 재매칭되면 재매칭된 제1 키 포인트들과 제2 키 포인트들을 제1 의료 영상과 제2 의료 영상에 디스플레이한다(S180).If the key points of the two medical images are remapped at step S170, the remapped first key points and the second key points are displayed on the first medical image and the second medical image (S180).

상황에 따라, 본 발명은 키 포인트들 매칭에 대한 결과를 화면에 디스플레이한 상태에서 매칭된 결과에 대한 리포트를 작성할 수 있는 메뉴 또한 제공할 수도 있다.Depending on the situation, the present invention may also provide a menu that allows a user to create a report of matched results while displaying results for keypoint matching on the screen.

이런 본 발명에 따른 방법에 대해 도 7 내지 도 10을 참조하여 조금 더 설명하면 다음과 같다.The method according to the present invention will now be described in more detail with reference to FIGS. 7 to 10. FIG.

도 7 내지 도 10은 본 발명에 따른 방법을 설명하기 위한 예시도들을 나타낸 것으로, 도 7에 도시된 바와 같이, 제1 의료 영상의 제1 키 포인트들 중 어느 하나의 키 포인트가 사용자에 의해 선택되면 선택된 키 포인트에 대한 위치를 사용자가 직관적으로 알 수 있도록 디스플레이한다.7 to 10 illustrate exemplary methods for explaining the method according to the present invention. As shown in FIG. 7, when one of the first key points of the first medical image is selected by the user The user can intuitively know the position of the selected key point.

이 때, 사용자는 제1 내비게이션 바에 디스플레이된 어느 하나의 키 포인트 위치(730)를 선택할 수도 있고, 제1 의료 영상에 오버레이된 키 포인트들 중 어느 하나의 키 포인트(710)를 선택할 수도 있다. 물론, 사용자에 의해 제1 의료 영상의 키 포인트(710, 730)가 선택되면 선택된 해당 키 포인트에 대응하는 제2 의료 영상의 키 포인트 또한 사용자가 직관적으로 알 수 있도록 화면 상에 그 위치를 다른 키 포인트들과 차별적으로 디스플레이할 수 있다. 즉, 해당 키 포인트 위치(720, 740)는 제2 의료 영상 상에서 뿐만 아니라 제2 내비게이션 바 상에서도 차별적으로 디스플레이될 수 있다.At this time, the user may select any one of the key point positions 730 displayed on the first navigation bar and select any one of the key points 710 overlaid on the first medical image. Of course, if the key point 710, 730 of the first medical image is selected by the user, the key point of the second medical image corresponding to the selected key point is also changed to another key You can display differently from points. That is, the key point positions 720 and 740 may be differentially displayed on the second medical image as well as on the second medical image.

그리고, 사용자에 의해 선택된 제1 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상(750)이 화면 상에 동기화되어 디스플레이되고, 마찬가지로 제2 키 포인트들 중 선택된 키 포인트에 대응하는 키 포인트에 대한 의료 영상이(760)이 화면 상에 동기화되어 디스플레이된다.Then, the medical image 750 corresponding to any one of the first key points selected by the user is displayed on the screen synchronously, and similarly, the key point corresponding to the selected key point among the second key points The medical image 760 is displayed on the screen synchronously.

사용자에 의해 선택된 키 포인트(710)의 위치가 잘못된 위치로 판단되면 사용자 인터페이스를 통한 사용자 입력에 의해 키 포인트(710)의 위치가 다른 위치(810)로 이동될 수 있다.If the position of the key point 710 selected by the user is determined to be a wrong position, the position of the key point 710 may be moved to another position 810 by user input through the user interface.

이 때, 도 8에 도시된 바와 같이, 제1 의료 영상에서 사용자에 의해 선택된 키 포인트의 위치는 새로운 위치(810)로 이동되지만 제2 의료 영상에서의 해당 키 포인트는 이동되지 않고 고정된 상태로 유지된다.At this time, as shown in FIG. 8, the position of the key point selected by the user in the first medical image is moved to the new position 810, but the corresponding key point in the second medical image is not moved and is fixed maintain.

그리고, 사용자에 의해 키 포인트(710)의 위치가 새로운 위치(810)로 이동되면 새로운 위치(810)에 대응하는 의료 영상(820)을 화면 상에 디스플레이함으로써, 두 의료 영상의 해당 키 포인트에 대한 의료 영상의 비교를 통해 사용자가 해당 키 포인트의 위치를 조정할 수 있도록 한다.When the position of the key point 710 is shifted to the new position 810 by the user, the medical image 820 corresponding to the new position 810 is displayed on the screen, So that the user can adjust the position of the corresponding key point by comparing the medical images.

사용자는 도 9에 도시된 바와 같이 새로운 위치(810)를 해당 키 포인트의 위치로 결정하기 위해, 사용자에게 제공되는 메뉴 예를 들어, confirm 항목(910)을 선택함으로써, 새로운 위치(810)를 해당 키 포인트의 위치로 결정한다.The user may select a new location 810 by selecting a menu item, e.g., a confirm item 910 provided to the user, to determine the new location 810 as the location of the corresponding key point, The position of the key point is determined.

새로운 위치(810)가 사용자에 의해 해당 키 포인트의 위치로 결정되면 위치 이동된 키 포인트들 또는 키 포인트에 대해 재매칭을 수행하고, 재매칭이 수행된 키 포인트들을 해당 의료 영상의 키 포인트들로 설정한다. 물론, 재설정된 제1 키 포인트들에 대한 위치는 제1 내비게이션 바에 반영되고, 제1 내비게이션 바에서 새로운 위치(1020)가 조정되어 디스플레이된다.If the new location 810 is determined to be the location of the corresponding key point by the user, re-matching is performed on the moved key points or key point, and the re-matched key points are moved to the key points of the medical image Setting. Of course, the position for the reset first key points is reflected in the first navigation bar, and the new position 1020 is adjusted and displayed in the first navigation bar.

이와 같이, 본 발명에 따른 의료 영상의 위치 매칭 제어 방법은 환자의 제1 자세와 제2 자세에서 촬영된 영상 예를 들어, supine, prone 영상의 각 패스에서 매칭되는 키 포인트들을 설정한 후 이에 대한 위치를 직선 바 형태인 내비게이션 바 형태로 디스플레이하고, 해당 의료 영상의 키 포인트 위치를 조정할 수 있는 사용자 인터페이스를 제공함으로써, 의료 영상 간의 키 포인트들 매칭 정확성을 향상시킬 수 있고, 이를 통해 의료 영상들 간 매칭 정확성 또한 향상시킬 수 있다.As described above, the method for controlling the position matching of the medical image according to the present invention sets the key points that are matched in each pass of the supine and prone images captured in the first and second postures of the patient, It is possible to improve the accuracy of key point matching between medical images by displaying a position in the form of a bar in the shape of a straight line bar and providing a user interface for adjusting the position of a key point of the medical image, Matching accuracy can also be improved.

또한, 본 발명은 키 포인트들 간의 매칭 정확성을 향상시키기 위한 사용자 인터페이스를 제공하기 때문에 의료 영상들 간의 매칭을 수행하기 위한 키 포인트들에 대한 위치를 용이하게 조정할 수 있고, 매칭이 잘못된 특정 키 포인트만을 조정할 수 있기 때문에 키 포인트 매칭에 대한 효율성을 향상시킬 수 있으며, 조정된 키 포인트에 대한 매칭을 수행할 수도 있기에 의료 영상 간 매칭을 수행하는데 소비되는 시간을 줄일 수도 있다.In addition, since the present invention provides a user interface for improving the matching accuracy between key points, it is possible to easily adjust a position of key points for performing matching between medical images, The efficiency of the key point matching can be improved and matching with the adjusted key point can be performed, thereby reducing the time consumed in performing matching between medical images.

나아가, 본 발명에 따른 방법은 사용자에 의해 선택된 키 포인트에 대응하는 의료 영상 예를 들어, 가상 내시경 영상, 밴드 뷰 영상, 단면 영상 등을 별도의 디스플레이 영역이 동기화시켜 디스플레이함으로써, 해당 키 포인트의 매칭 정확성 여부를 용이하게 판단할 수 있다.Furthermore, the method according to the present invention synchronously displays a medical image corresponding to a key point selected by a user, for example, a virtual endoscopic image, a band view image, a sectional image, etc., It can be easily judged whether or not it is accurate.

그리고, 본 발명에서 제1 의료 영상과 제2 의료 영상은 하나의 디스플레이 수단을 이용하여 모두 디스플레이할 수도 있지만, 서로 다른 디스플레이 수단에서 각각 디스플레이될 수도 있다.In the present invention, the first medical image and the second medical image may all be displayed using one display means, but may be displayed by different display means.

도 11은 본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 장치에 대한 구성을 나타낸 것이다.FIG. 11 shows a configuration of a medical image position matching controller according to an embodiment of the present invention.

도 11을 참조하면, 본 발명에 따른 장치(1100)는 수신부(1110), 추출부(1120), 디스플레이부(1130), 사용자 메뉴 제공부(1140), 매칭부(1150) 및 디스플레이 제어부(1160)를 포함한다. 본 발명에 따른 장치를 구성하는 수신부(1110), 추출부(1120), 사용자 메뉴 제공부(1140), 매칭부(1150) 및 디스플레이 제어부(1160)는 의료 영상의 위치 매칭을 제어할 수 있는 컴퓨팅 시스템의 프로세서(processor)에 의해 구성될 수 있으며, 디스플레이부(1130)는 별도의 모니터와 같은 디스플레이 수단에 의해 구성될 수 있다.11, an apparatus 1100 according to the present invention includes a receiving unit 1110, an extracting unit 1120, a display unit 1130, a user menu providing unit 1140, a matching unit 1150, and a display control unit 1160 ). The receiving unit 1110, the extracting unit 1120, the user menu providing unit 1140, the matching unit 1150, and the display control unit 1160 constituting the apparatus according to the present invention can be used for computing The display unit 1130 may be constituted by a processor of the system, and the display unit 1130 may be constituted by a display means such as a separate monitor.

수신부(1110)는 환자 또는 피검자에 대해 제1 자세 예를 들어, 누운 자세 누운 자세(supine position)에서 촬영된 의료 영상과 제2 자세 예를 들어, 엎드린 자세(prone position)에서 촬영된 의료 영상을 수신한다.The receiving unit 1110 receives a medical image photographed in a first posture, for example, a supine position, and a medical image photographed in a second posture, for example, in a prone position, .

이 때, 수신부(1110)는 액시얼(axial) 영상, 코로날(coronal) 영상, 새지털(sagittal) 영상 중 적어도 하나를 포함하는 2D 의료 영상을 수신할 수도 있고, 3D 의료 영상을 수신할 수도 있으며, 의료 영상을 저장하고 있는 서버나 시스템 예를 들어 의료 영상 저장 전송 시스템(PACS)으로부터 의료 영상을 수신할 수도 있고, 의료 영상을 촬영하는 의료 영상 촬영 장치 예를 들어, CT 장치(CT modality)로부터 직접 의료 영상을 수신할 수도 있다.At this time, the receiving unit 1110 may receive a 2D medical image including at least one of an axial image, a coronal image, and a sagittal image, or may receive a 3D medical image For example, a CT imaging apparatus that receives a medical image from a server or a system that stores medical images, for example, a medical image storage transmission system (PACS) The medical image may be received directly from the medical image capturing apparatus.

추출부(1120)는 제1 의료 영상에 대한 제1 키 포인트들과 제2 의료 영상에 대한 제2 키 포인트들을 추출한다.The extracting unit 1120 extracts first key points for the first medical image and second key points for the second medical image.

이 때, 추출부(1120)는 제1 의료 영상과 제2 의료 영상에서의 곡률 정보를 이용하여 주요 변곡점들을 검출하고, 검출된 주요 변곡점들을 반영하여 제1 키 포인트들과 제2 키 포인트들을 추출할 수도 있고, 제1 의료 영상과 제2 의료 영상의 해부학적 정보 예를 들어, 의료 영상의 관심 영역(ROI)에 대한 정보, 장기 정보, 해당 장기에서의 주요 포인트에 대한 정보 등을 이용하여 제1 키 포인트들과 제2 키 포인트들을 추출할 수도 있다.At this time, the extracting unit 1120 detects the main inflection points using the curvature information in the first medical image and the second medical image, extracts the first key points and the second key points by reflecting the detected main inflection points Or by using the anatomical information of the first medical image and the second medical image, for example, the information about the ROI of the medical image, the long-term information, One key points and second key points may be extracted.

이런 추출부(1120)는 상황에 따라 매칭부(1150)에 포함되어 구성될 수도 있다. The extracting unit 1120 may be included in the matching unit 1150 according to circumstances.

디스플레이부(1130)는 본 발명에 따른 장치에서 수행되는 데이터를 디스플레이하는 수단으로, 제1 의료 영상, 제2 의료 영상을 화면 상에 디스플레이하고, 사용자 메뉴 등을 화면 상에 디스플레이하며, 내비게이션 바와 같이 본 발명과 관련된 정보와 데이터를 디스플레이한다.The display unit 1130 displays the first medical image and the second medical image on the screen, displays a user menu or the like on the screen, and displays the first medical image and the second medical image on the screen. And displays information and data related to the present invention.

물론, 디스플레이부(1130)는 디스플레이 제어부(1160)에 의한 제어에 의해 관련 데이터를 화면 상에 디스플레이할 수 있다.Of course, the display unit 1130 can display related data on the screen under the control of the display control unit 1160.

사용자 메뉴 제공부(1140)는 사용자가 사용자 인터페이스를 통하여 키 포인트를 이동시킬 수 있도록 사용자 메뉴를 제공한다.The user menu providing unit 1140 provides a user menu so that the user can move the key point through the user interface.

이 때, 사용자 메뉴 제공부(1140)는 상술한 내비게이션 바를 포함할 수도 있고, 사용자에 의해 이동된 키 포인트의 새로운 위치를 결정하기 위한 메뉴 등을 제공할 수 있다.At this time, the user menu providing unit 1140 may include the above-described navigation bar, and may provide a menu or the like for determining a new position of the key point moved by the user.

매칭부(1150)는 제1 의료 영상으로부터 추출된 제1 키 포인트들과 제2 의료 영상으로부터 추출된 제2 키 포인트들을 매칭하고, 어느 하나의 키 포인트가 사용자 인터페이스를 이용한 사용자 입력에 의해 위치 이동된 후 사용자에 의해 위치 이동된 새로운 위치가 해당 키 포인트의 위치로 결정되면 위치 이동된 키 포인트를 포함하는 제1 키 포인트들과 제2 키 포인트들을 재매칭한다.The matching unit 1150 matches the first key points extracted from the first medical image with the second key points extracted from the second medical image, and when any one of the key points is moved by the user input using the user interface And when a new position moved by the user is determined as the position of the corresponding key point, the first key points and the second key points including the moved key point are re-matched.

이 때, 매칭부(1150)는 위치가 이동된 키 포인트에 대해서만 재매칭을 수행할 수도 있다. At this time, the matching unit 1150 may perform re-matching only on the key point whose position has been shifted.

디스플레이 제어부(1160)는 매칭된 제1 키 포인트들과 제2 키 포인트들을 제1 의료 영상과 제2 의료 영상에 디스플레이하고, 나아가 재매칭된 제1 키 포인트들과 제2 키 포인트들을 제1 의료 영상과 제2 의료 영상에 디스플레이한다.The display controller 1160 displays the matched first key points and the second key points on the first medical image and the second medical image, and further displays the re-matched first key points and the second key points on the first medical And displays it on the second medical image.

이 때, 디스플레이 제어부(1160)는 제1 내비게이션 바와 제2 내비게이션 바가 화면 상에 디스플레이되도록 제공할 수 있고, 제1 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상과 제2 키 포인트들 중 어느 하나의 키 포인트에 대응하는 의료 영상을 화면 상에 디스플레이할 수도 있다.At this time, the display control unit 1160 may provide the first navigation bar and the second navigation bar to be displayed on the screen, and may display the medical image corresponding to any one of the first key points and the second key point The medical image corresponding to any one of the key points may be displayed on the screen.

물론, 디스플레이 제어부(1160)는 제1 키 포인트들 중 어느 하나의 키 포인트가 선택되면 선택된 키 포인트와 동기화되거나 매칭되는 제2 키 포인트들 중 어느 하나의 키 포인트에 대한 의료 영상을 화면 상에 디스플레이할 수 있다.Of course, if one of the first key points is selected, the display controller 1160 displays a medical image for any one of the second key points synchronized with or matched with the selected key point on the screen can do.

이 때, 디스플레이 제어부(1160)는 키 포인트에 대응하는 가상 내시경(endoscope) 영상, 밴드 뷰(band view) 영상, 단면 영상 중 어느 하나를 화면 상에 디스플레이할 수 있다. At this time, the display controller 1160 can display any one of a virtual endoscope image, a band view image, and a cross-sectional image corresponding to the key point on the screen.

본 발명의 일 실시예에 따른 의료 영상의 위치 매칭 제어 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method for controlling the position matching of a medical image according to an embodiment of the present invention may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. As described above, the present invention has been described with reference to particular embodiments, such as specific elements, and specific embodiments and drawings. However, it should be understood that the present invention is not limited to the above- And various modifications and changes may be made thereto by those skilled in the art to which the present invention pertains.

따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be construed as being limited to the embodiments described, and all of the equivalents or equivalents of the claims, as well as the following claims, belong to the scope of the present invention .

Claims (14)

피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭시키는 단계;
상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들이 매칭된 이후, 상기 제1 의료 영상의 해부학적 특징 정보에 기반하여 도출되는 상기 제1 의료 영상의 키 포인트들이 이동할 수 있는 제1 범위와 함께 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고, 상기 제2 의료 영상의 해부학적 특징 정보에 기반하여 도출되는 상기 제2 의료 영상의 키 포인트들이 이동할 수 있는 제2 범위와 함께 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계;
사용자 인터페이스를 이용한 사용자 입력에 의해, 상기 제1 의료 영상에 디스플레이된 키 포인트들 중 제1 키 포인트에 대한 상기 제1 범위 내에서의 위치 이동이 결정되면 상기 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭시키는 단계;
키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 키 포인트가 재매칭된 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계; 및
상기 사용자 입력에 의하여 선택된 상기 제1 키 포인트에 대응하는, 상기 키 포인트가 재매칭된 상기 제2 의료 영상의 키 포인트를 상기 제2 의료 영상의 다른 키 포인트들과 차별적으로 디스플레이하는 단계;
를 포함하는 의료 영상의 위치 매칭 제어 방법.
Matching the key points of the first medical image extracted from the first medical image photographed in the first posture of the examinee with the key points of the second medical image extracted from the second medical image photographed in the second posture; ;
The key points of the first medical image derived based on the anatomical characteristic information of the first medical image can be moved after the key points of the first medical image and the key points of the second medical image are matched The key points of the first medical image are displayed on the first medical image together with the first range and the key points of the second medical image derived on the basis of the anatomical characteristic information of the second medical image can be moved Displaying key points of the second medical image on the second medical image together with a second range;
When a movement of the first key point in the first range among the key points displayed in the first medical image is determined by user input using the user interface, Matching the key points of the medical image with the key points of the second medical image;
Displaying the key points of the first medical image that has been re-matched with the key point on the first medical image and displaying the key points of the second medical image on which the key point has been mismatched on the second medical image; And
Differentially displaying a key point of the second medical image, which corresponds to the first key point selected by the user input, in which the key point has been mismatched, differently from other key points of the second medical image;
Wherein the position matching method comprises:
제1항에 있어서,
사용자가 상기 사용자 인터페이스를 통하여 키 포인트를 이동시킬 수 있도록 사용자 메뉴를 제공하는 단계
를 더 포함하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
The method according to claim 1,
Providing a user menu so that the user can move the key point through the user interface
Further comprising the steps of: detecting a position of the medical image;
제1항에 있어서,
상기 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들에 대한 위치를 나타내는 제1 내비게이션 바와 상기 제2 의료 영상의 키 포인트들에 대한 위치를 나타내는 제2 내비게이션 바를 제공하는 단계; 및
상기 사용자 입력에 의하여 선택된 상기 제1 키 포인트에 대응하는, 상기 키 포인트가 재매칭된 상기 제2 의료 영상의 키 포인트를 상기 제2 내비게이션 바 상에서도 상기 제2 의료 영상의 다른 키 포인트들과 차별적으로 디스플레이하는 단계;
를 더 포함하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
The method according to claim 1,
Providing a first navigation bar representing a position of key points of the first medical image matched with the key point and a second navigation bar representing a position of key points of the second medical image; And
The key point of the second medical image corresponding to the first key point selected by the user input is re-matched to the key point of the second medical image on the second navigation bar differently from the other key points of the second medical image Displaying;
Further comprising the steps of: detecting a position of the medical image;
제1항에 있어서,
상기 제1 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 제3 의료 영상과 상기 제2 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 제4 의료 영상을 화면 상에 디스플레이하는 단계
를 더 포함하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
The method according to claim 1,
A fourth medical image corresponding to one of the key points of the third medical image and the key points of the second medical image corresponding to any one of the key points of the first medical image is displayed on the screen Step
Further comprising the steps of: detecting a position of the medical image;
제4항에 있어서,
상기 제3 의료 영상과 상기 제4 의료 영상은
가상 내시경(endoscope) 영상, 밴드 뷰(band view) 영상, 단면 영상 중 어느 하나인 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
5. The method of claim 4,
The third medical image and the fourth medical image
A virtual viewpoint image, a virtual endoscope image, a band view image, and a cross-sectional image.
피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭시키는 단계;
키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계;
사용자 인터페이스를 이용한 사용자 입력에 의해, 상기 제1 의료 영상에 디스플레이된 키 포인트들 중 제1 키 포인트에 대한 위치 이동이 결정되면 상기 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭시키는 단계; 및
키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 단계
를 포함하고,
상기 매칭시키는 단계는
상기 제1 의료 영상의 곡률 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 곡률 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
Matching the key points of the first medical image extracted from the first medical image photographed in the first posture of the examinee with the key points of the second medical image extracted from the second medical image photographed in the second posture; ;
Displaying the key points of the first medical image matching the key points on the first medical image and displaying the key points of the second medical image on the second medical image;
When a positional shift with respect to a first key point among the key points displayed on the first medical image is determined by user input using a user interface, key points of the first medical image including the first key point, Matching the key points of the second medical image; And
Displaying the key points of the first medical image that has been re-matched with the key point on the first medical image and displaying the key points of the second medical image on the second medical image
Lt; / RTI >
The matching step
Extracting key points of the first medical image using curvature information of the first medical image and extracting key points of the second medical image using curvature information of the second medical image, A method for controlling position matching of an image.
제1항에 있어서,
상기 매칭시키는 단계는
상기 제1 의료 영상의 해부학적 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 해부학적 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 방법.
The method according to claim 1,
The matching step
Extracting key points of the first medical image using the anatomical information of the first medical image and extracting key points of the second medical image using the anatomical information of the second medical image, A method for controlling the position matching of medical images.
피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭하고, 상기 제1 의료 영상의 키 포인트들 중 사용자 인터페이스를 이용한 사용자 입력에 의해 위치 이동된 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭하는 매칭부; 및
상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들이 매칭된 이후, 상기 제1 의료 영상의 해부학적 특징 정보에 기반하여 도출되는 상기 제1 의료 영상의 키 포인트들이 이동할 수 있는 제1 범위와 함께 상기 제1 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 이후에 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고, 상기 제2 의료 영상의 해부학적 특징 정보에 기반하여 도출되는 상기 제2 의료 영상의 키 포인트들이 이동할 수 있는 제2 범위와 함께 상기 제2 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 이후에 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 디스플레이 제어부
를 포함하고,
상기 제1 키 포인트는 상기 사용자 입력에 의하여 선택되어 상기 제1 범위 내에서 이동하고, 상기 디스플레이 제어부는 상기 제1 키 포인트에 대응하는 상기 제2 의료 영상의 키 포인트를 상기 제2 의료 영상의 다른 키 포인트들과 차별적으로 디스플레이하는 의료 영상의 위치 매칭 제어 장치.
Matching the key points of the first medical image extracted from the first medical image photographed in the first posture of the examinee with the key points of the second medical image extracted from the second medical image photographed in the second posture, Matching the key points of the first medical image and the key points of the second medical image including the first key point shifted by the user input using the user interface among the key points of the first medical image A matching unit; And
The key points of the first medical image derived based on the anatomical characteristic information of the first medical image can be moved after the key points of the first medical image and the key points of the second medical image are matched Displaying the key points of the first medical image on the first medical image after the first points of the first medical image or the key points of the first medical image are mismatched with the first range and displaying the anatomical characteristics The key points of the second medical image are re-matched together with the second range in which the key points of the second medical image derived based on the information are movable, And a display control unit
Lt; / RTI >
Wherein the first key point is selected by the user input and moves within the first range and the display control unit transmits the key point of the second medical image corresponding to the first key point to another A position matching controller for a medical image displaying differentially from key points.
제8항에 있어서,
사용자가 상기 사용자 인터페이스를 통하여 키 포인트를 이동시킬 수 있도록 사용자 메뉴를 제공하는 사용자 메뉴 제공부
를 더 포함하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
9. The method of claim 8,
A user menu providing unit for providing a user menu so that the user can move the key point through the user interface;
Further comprising: a position detector for detecting a position of the medical image;
제8항에 있어서,
상기 디스플레이 제어부는
상기 키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들에 대한 위치를 나타내는 제1 내비게이션 바와 상기 제2 의료 영상의 키 포인트들에 대한 위치를 나타내는 제2 내비게이션 바를 제공하고, 상기 제1 키 포인트에 대응하는 상기 제2 의료 영상의 키 포인트를 상기 제2 내비게이션 바 상에서도 상기 제2 의료 영상의 다른 키 포인트들과 차별적으로 디스플레이하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
9. The method of claim 8,
The display control unit
A first navigation bar indicating a position of key points of the first medical image matched with the key point and a second navigation bar indicating a position of key points of the second medical image, Wherein the key point of the second medical image corresponding to the first medical image is differentiated from the other key points of the second medical image on the second navigation bar.
제8항에 있어서,
상기 디스플레이 제어부는
상기 제1 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 제3 의료 영상과 상기 제2 의료 영상의 키 포인트들 중 어느 하나의 키 포인트에 대응하는 제4 의료 영상을 화면 상에 디스플레이하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
9. The method of claim 8,
The display control unit
A fourth medical image corresponding to one of the key points of the third medical image and the key points of the second medical image corresponding to any one of the key points of the first medical image is displayed on the screen The position of the medical image is detected.
제11항에 있어서,
상기 제3 의료 영상과 상기 제4 의료 영상은
가상 내시경(endoscope) 영상, 밴드 뷰(band view) 영상, 단면 영상 중 어느 하나인 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
12. The method of claim 11,
The third medical image and the fourth medical image
A virtual viewpoint image, a virtual endoscope image, a band view image, and a cross-sectional image.
피검자의 제1 자세에서 촬영된 제1 의료 영상으로부터 추출된 상기 제1 의료 영상의 키 포인트들과 제2 자세에서 촬영된 제2 의료 영상으로부터 추출된 상기 제2 의료 영상의 키 포인트들을 매칭하고, 상기 제1 의료 영상의 키 포인트들 중 사용자 인터페이스를 이용한 사용자 입력에 의해 위치 이동된 제1 키 포인트를 포함하는 상기 제1 의료 영상의 키 포인트들과 상기 제2 의료 영상의 키 포인트들을 재매칭하는 매칭부; 및
키 포인트가 매칭된 상기 제1 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 상기 제1 의료 영상의 키 포인트들을 상기 제1 의료 영상에 디스플레이하고, 키 포인트가 매칭된 상기 제2 의료 영상의 키 포인트들 또는 키 포인트가 재매칭된 상기 제2 의료 영상의 키 포인트들을 상기 제2 의료 영상에 디스플레이하는 디스플레이 제어부
를 포함하고,
상기 매칭부는
상기 제1 의료 영상의 곡률 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 곡률 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
Matching the key points of the first medical image extracted from the first medical image photographed in the first posture of the examinee with the key points of the second medical image extracted from the second medical image photographed in the second posture, Matching the key points of the first medical image and the key points of the second medical image including the first key point shifted by the user input using the user interface among the key points of the first medical image A matching unit; And
Displaying the first medical image key points of the first medical image that are matched with the key points or key points of the first medical image matched with the key point on the first medical image, A display control unit for displaying the key points of the second medical image in which the key points or the key point are mismatched on the second medical image,
Lt; / RTI >
The matching unit
Extracting key points of the first medical image using curvature information of the first medical image and extracting key points of the second medical image using curvature information of the second medical image, Position matching controller.
제8항에 있어서,
상기 매칭부는
상기 제1 의료 영상의 해부학적 정보를 이용하여 상기 제1 의료 영상의 키 포인트들을 추출하고, 상기 제2 의료 영상의 해부학적 정보를 이용하여 상기 제2 의료 영상의 키 포인트들을 추출하는 것을 특징으로 하는 의료 영상의 위치 매칭 제어 장치.
9. The method of claim 8,
The matching unit
Extracting key points of the first medical image using the anatomical information of the first medical image and extracting key points of the second medical image using the anatomical information of the second medical image, A position matching control device for a medical image.
KR1020140094496A 2014-07-25 2014-07-25 Method and apparatus for controlling key point matching of medical images KR101654824B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140094496A KR101654824B1 (en) 2014-07-25 2014-07-25 Method and apparatus for controlling key point matching of medical images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140094496A KR101654824B1 (en) 2014-07-25 2014-07-25 Method and apparatus for controlling key point matching of medical images

Publications (2)

Publication Number Publication Date
KR20160012644A KR20160012644A (en) 2016-02-03
KR101654824B1 true KR101654824B1 (en) 2016-09-06

Family

ID=55355643

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140094496A KR101654824B1 (en) 2014-07-25 2014-07-25 Method and apparatus for controlling key point matching of medical images

Country Status (1)

Country Link
KR (1) KR101654824B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101963651B1 (en) * 2016-10-28 2019-04-01 오스템임플란트 주식회사 Method for calibrating ct images, apparatus, and recording medium thereof
KR102335173B1 (en) * 2019-11-13 2021-12-07 울산대학교 산학협력단 System and method for analyzing pathological image

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008043759A (en) 2006-08-15 2008-02-28 General Electric Co <Ge> System and measure of image alignment of interaction form
JP2009160045A (en) * 2007-12-28 2009-07-23 Toshiba Corp Medical image display device and image display method
JP2014511714A (en) 2011-03-15 2014-05-19 コーニンクレッカ フィリップス エヌ ヴェ Correlated image mapping pointer

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3878259B2 (en) * 1996-11-13 2007-02-07 東芝医用システムエンジニアリング株式会社 Medical image processing device
KR101932721B1 (en) 2012-09-07 2018-12-26 삼성전자주식회사 Method and Appartus of maching medical images

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008043759A (en) 2006-08-15 2008-02-28 General Electric Co <Ge> System and measure of image alignment of interaction form
JP2009160045A (en) * 2007-12-28 2009-07-23 Toshiba Corp Medical image display device and image display method
JP2014511714A (en) 2011-03-15 2014-05-19 コーニンクレッカ フィリップス エヌ ヴェ Correlated image mapping pointer

Also Published As

Publication number Publication date
KR20160012644A (en) 2016-02-03

Similar Documents

Publication Publication Date Title
US10242490B2 (en) Displaying system for displaying digital breast tomosynthesis data
JP6530371B2 (en) Interactive follow-up visualization
EP2420188B1 (en) Diagnosis support apparatus, diagnosis support method, and storage medium storing diagnosis support program
US11538572B2 (en) Case display apparatus, case displaying method, and storage medium background to seamlessly present diagnostic images captured at different times for comparative reading
KR102154733B1 (en) Apparatus and method for estimating whether malignant tumor is in object by using medical image
US8682054B2 (en) Method and system for propagation of myocardial infarction from delayed enhanced cardiac imaging to cine magnetic resonance imaging using hybrid image registration
US8994720B2 (en) Diagnosis assisting apparatus, diagnosis assisting program, and diagnosis assisting method
WO2011074207A1 (en) Image registration
US20130195339A1 (en) Image processing apparatus, imaging system, and image processing method
US9449247B2 (en) Contour correction device, method, and program
CN105451657A (en) System and method for navigating tomosynthesis stack including automatic focusing
JP5399407B2 (en) Image processing apparatus and image processing method
US20140228687A1 (en) Diagnosis aiding apparatus and method to provide diagnosis information and diagnosis system thereof
JP5492024B2 (en) Region division result correction apparatus, method, and program
JP5388614B2 (en) Medical image processing apparatus, image diagnostic apparatus, and medical image processing program
CN104780845A (en) Ultrasonic probe
JP6430500B2 (en) Methods for supporting measurement of tumor response
KR101274530B1 (en) Chest image diagnosis system based on image warping, and method thereof
KR101654824B1 (en) Method and apparatus for controlling key point matching of medical images
KR101185728B1 (en) A segmentatin method of medical image and apparatus thereof
KR101028798B1 (en) Method for detection of hepatic tumors using registration of multi-phase liver CT images
KR101850385B1 (en) System and method for displaying medical images providing user interface for adjusting proceeding interval of medical images representing tubular structure
JP6671747B2 (en) Medical image processing apparatus, control method thereof, and program
JP7153261B2 (en) IMAGE PROCESSING DEVICE, OPERATING METHOD OF IMAGE PROCESSING DEVICE, AND IMAGE PROCESSING PROGRAM
JP2017099721A (en) Image processing device and image processing method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)