KR20190007693A - Navigation apparatus and method for fracture correction - Google Patents

Navigation apparatus and method for fracture correction Download PDF

Info

Publication number
KR20190007693A
KR20190007693A KR1020170089006A KR20170089006A KR20190007693A KR 20190007693 A KR20190007693 A KR 20190007693A KR 1020170089006 A KR1020170089006 A KR 1020170089006A KR 20170089006 A KR20170089006 A KR 20170089006A KR 20190007693 A KR20190007693 A KR 20190007693A
Authority
KR
South Korea
Prior art keywords
image
coordinate system
bone
reference coordinate
modified
Prior art date
Application number
KR1020170089006A
Other languages
Korean (ko)
Other versions
KR101961682B1 (en
Inventor
하호건
홍재성
박일형
박철우
오창욱
이성풍
정상현
진종호
Original Assignee
재단법인대구경북과학기술원
경북대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 재단법인대구경북과학기술원, 경북대학교 산학협력단 filed Critical 재단법인대구경북과학기술원
Priority to KR1020170089006A priority Critical patent/KR101961682B1/en
Publication of KR20190007693A publication Critical patent/KR20190007693A/en
Application granted granted Critical
Publication of KR101961682B1 publication Critical patent/KR101961682B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30008Bone

Abstract

The present invention relates to a navigation device for fracture correction and a method therefor. According to an embodiment of the present invention, a navigation device for fracture correction and a method therefor are to reduce the amount of radiation exposed to a patient. According to an embodiment of the present invention, a navigation method includes: a step of generating a first transformation 3D image on a patient′s bone which is not fractured, from a reference 3D image on the predetermined bone; a step of generating a second transformation 3D image by comparing the bone included in the first transformation 3D image with a 2D image photographed about the fractured bone of the patient after dividing the bone included in the first transformation 3D image into two parts; a step of extracting a change relation (C) between a first reference coordinate system which is set about a first bone part included in the second transformation 3D image and a second reference coordinate system which is set about a second bone part; a step of setting a third reference coordinate system about the first bone part included in the second transformation 3D image and setting a fourth reference coordinate system about the second bone part based on the extracted change relation (C); and a step of calculating a targeted correction rate of the fractured bone based on the position relation between the third and fourth reference coordinate systems.

Description

골절 교정을 위한 내비게이션 장치 및 방법{NAVIGATION APPARATUS AND METHOD FOR FRACTURE CORRECTION} [0001] NAVIGATION APPARATUS AND METHOD FOR FRACTURE CORRECTION [0002]

본 발명은 의료 시술을 위한 내비게이션 분야에 관한 것이다. 보다 구체적으로, 본 발명은 골절 교정 시술을 위한 내비게이션 장치 및 방법에 관한 것이다.The present invention relates to the field of navigation for medical procedures. More particularly, the present invention relates to a navigation apparatus and method for fracture correction.

기존의 골절 교정 및 골절 변형에 있어서 수술 내비게이션 장치는 수술 전(preoperative) 영상과 수술 중(intraoperative) 영상을 이용하여 수술 계획상의 목표점 또는 수술 경로 등의 수술 정보를 전달하는 역할을 수행한다. 이때 일반적으로 수술 전 영상은 CT 영상과 같은 3D 이미지가 사용되고, 수술 중 영상은 X-ray 영상과 같은 2D 이미지가 사용된다. 수술 내비게이션 장치는 수술 전 영상에 수술 도구의 위치와 더불어 수술 계획 정보를 포함한 실시간의 수술 중 정보를 중첩하여 통합된 정보를 사용자에게 전달해 준다.In the existing orthodontic treatment and fracture modification, the surgical navigation device transmits preoperative and intraoperative images to deliver surgical information such as target points or surgical routes in the surgical planning. In this case, a 3D image such as a CT image is used before the operation, and a 2D image such as an X-ray image is used during operation. Surgical navigation system delivers the integrated information to the user by superimposing real-time intraoperative information including the position of the surgical tool on the preoperative image and the operation plan information.

그러나, 기존의 수술 내비게이션 장치를 사용하기 위해서는 수술 전 영상을 위해 환자에게 CT 촬영을 요구하기 때문에 많은 방사선 노출과 비용 문제를 발생시킬 수 있다.However, in order to use the existing surgical navigation device, the CT imaging is required for the preoperative image, which may cause a lot of radiation exposure and cost problems.

본 발명의 일 실시예에 따른 골절 교정을 위한 내비게이션 장치 및 방법은 환자에 대한 방사선 피폭량을 감소시키는 것을 목적으로 한다.A navigation apparatus and method for fracture correction according to an embodiment of the present invention aims at reducing a radiation dose to a patient.

또한, 본 발명의 일 실시예에 따른 골절 교정을 위한 내비게이션 장치 및 방법은 골절 교정 시술의 정확성을 향상시키는 것을 목적으로 한다.Further, a navigation apparatus and method for fracture correction according to an embodiment of the present invention aims to improve the accuracy of a fracture correction procedure.

본 발명의 일 실시예에 따른 내비게이션 방법은,According to an embodiment of the present invention,

소정의 뼈에 대한 표준 3D 이미지로부터 환자의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성하는 단계; 상기 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성하는 단계; 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 추출하는 단계; 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정하는 단계; 및 상기 제 3 기준 좌표계와 상기 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출하는 단계를 포함할 수 있다.Generating a first modified 3D image for a non-fractured bone of a patient from a standard 3D image for a given bone; Dividing a bone included in the first modified 3D image into two parts and then creating a second modified 3D image by comparing the extracted bone with a 2D image photographed against a fractured bone of a patient; Extracting a transformation relationship (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone; Setting a third reference coordinate system for the first partial bone included in the second modified 3D image and setting a fourth reference coordinate system for the second partial bone based on the extracted transformation relation (C); And calculating a correction target value of the fractured bone based on a positional relationship between the third reference coordinate system and the fourth reference coordinate system.

상기 제 1 변형 3D 이미지를 생성하는 단계는, 환자의 골절되지 않은 뼈에 대한 복수의 2D 이미지 각각을 상기 표준 3D 이미지에 정합하는 단계; 상기 표준 3D 이미지로부터 생성되는 가상의 2D 이미지가 상기 복수의 2D 이미지 각각에 대응하도록 상기 표준 3D 이미지를 변형하는 단계; 및 상기 변형된 표준 3D 이미지의 각 복셀 값들을 보외법을 통해 보정하여 상기 제 1 변형 3D 이미지를 생성하는 단계를 포함할 수 있다.Wherein generating the first modified 3D image comprises: matching each of the plurality of 2D images for the non-fractured bone of the patient to the standard 3D image; Transforming the standard 3D image so that a virtual 2D image generated from the standard 3D image corresponds to each of the plurality of 2D images; And generating the first modified 3D image by correcting each of the voxel values of the modified standard 3D image through an extrapolation method.

상기 제 2 변형 3D 이미지를 생성하는 단계는, 상기 제 1 변형 3D 이미지의 제 1 부분 뼈를 기준으로 제 2 부분 뼈의 위치 및 회전 정도 중 적어도 하나를 변형시키면서 상기 환자의 골절된 뼈에 대해 촬영된 2D 이미지에 정합시키는 단계를 포함할 수 있다.Wherein the step of generating the second deformed 3D image comprises the step of deforming at least one of the position and degree of rotation of the second partial bone relative to the first partial bone of the first deformed 3D image, And matching the resulting 2D image.

상기 변환 관계(C)를 추출하는 단계는, 상기 제 1 변형 3D 이미지에 포함된 뼈에서 제 1 특징점들을 추출하는 단계; 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈 및 제 2 부분 뼈에서 제 2 특징점들을 추출하는 단계; 상기 제 1 특징점들과 상기 제 2 특징점들을 매핑시켜 상기 제 1 변형 3D 이미지에 포함된 뼈에 대해 설정된 기준 좌표계와 상기 제 1 기준 좌표계 사이의 변환 관계(A) 및 상기 제 1 변형 3D 이미지에 포함된 뼈에 대해 설정된 기준 좌표계와 상기 제 2 기준 좌표계 사이의 변환 관계(B)를 산출하는 단계; 및 상기 변환 관계(A) 및 상기 변환 관계(B)를 이용하여 상기 변환 관계(C)를 산출하는 단계를 포함할 수 있다.The step of extracting the transformation relation (C) comprises the steps of: extracting first feature points from bones included in the first modified 3D image; Extracting second feature points from the first partial bone and the second partial bone included in the second modified 3D image; (A) between the reference coordinate system set for the bones included in the first deformed 3D image and the first reference coordinate system by mapping the first feature points and the second feature points to the first deformed 3D image, Calculating a transformation relation (B) between the reference coordinate system set for the bone and the second reference coordinate system; And calculating the conversion relation (C) using the conversion relation (A) and the conversion relation (B).

상기 제 3 기준 좌표계를 설정하는 단계는, 소정의 기준 축이 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈의 중심 축과 평행하는 제 3 기준 좌표계를 설정하는 단계를 포함할 수 있다.The setting of the third reference coordinate system may include setting a third reference coordinate system in which a predetermined reference axis is parallel to the central axis of the first partial bone included in the second deformed 3D image.

상기 교정 목표치를 산출하는 단계는, 상기 제 3 기준 좌표계의 소정의 기준축과 상기 제 4 기준 좌표계의 소정의 기준축이 서로 동일한 방향으로 정렬하도록 상기 제 2 부분 뼈를 이동시킬 때의 앵귤레이션(angulation) 각을 산출하는 단계를 포함할 수 있다.The calculating of the calibration target value may include calculating an angulation when the second partial bone is moved so that a predetermined reference axis of the third reference coordinate system and a predetermined reference axis of the fourth reference coordinate system align with each other in the same direction, ) ≪ / RTI >

상기 교정 목표치를 산출하는 단계는, 상기 제 3 기준 좌표계와 제 4 기준 좌표계에서 상기 소정의 기준축 이외의 축들이 서로 일치하도록 상기 제 2 부분 뼈를 회전시킬 때의 로테이션(rotation) 각을 산출하는 단계를 포함할 수 있다.The calculating of the calibration target value may include calculating a rotation angle when the second partial bone is rotated such that axes other than the predetermined reference axis coincide with each other in the third reference coordinate system and the fourth reference coordinate system Step < / RTI >

상기 교정 목표치를 산출하는 단계는, 상기 제 3 기준 좌표계에서의 기준점과 제 4 기준 좌표계에서 기준점 사이의 상기 소정 기준축 상의 거리(length)를 산출하는 단계를 포함할 수 있다.The step of calculating the calibration target value may include calculating a length on the predetermined reference axis between the reference point in the third reference coordinate system and the reference point in the fourth reference coordinate system.

상기 내비게이션 방법은, 상기 앵귤레이션 각, 상기 로테이션 각 및 상기 거리 중 적어도 하나를 디스플레이에 표시하는 단계를 더 포함할 수 있다.The navigation method may further include displaying at least one of the angle of the angle, the rotation angle and the distance on the display.

본 발명의 다른 실시예에 따른 내비게이션 장치는,According to another aspect of the present invention, there is provided a navigation device comprising:

소정의 뼈에 대한 표준 3D 이미지로부터 환자의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성하고, 상기 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성하는 이미지 처리부; 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 추출하는 변환 관계 산출부; 및 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정하고, 상기 제 3 기준 좌표계와 상기 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출하는 교정 목표치 산출부를 포함할 수 있다.Generating a first deformed 3D image for a non-fractured bone of a patient from a standard 3D image for a given bone, dividing the bone contained in the first deformed 3D image into two portions, An image processing unit for generating a second modified 3D image in comparison with the 2D image photographed for the second modified 3D image; A transformation relation calculation unit for extracting a transformation relation (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone; And setting a third reference coordinate system for the first partial bone included in the second modified 3D image, setting a fourth reference coordinate system for the second partial bone based on the extracted conversion relation (C) And a correction target value calculation unit for calculating a correction target value of the fractured bone based on a positional relationship between the third reference coordinate system and the fourth reference coordinate system.

본 발명의 일 실시예에 따른 골절 교정을 위한 내비게이션 장치 및 방법은 환자에 대한 방사선 피폭량을 감소시킬 수 있다.A navigation device and method for fracture correction according to one embodiment of the present invention can reduce radiation exposure to a patient.

또한, 본 발명의 일 실시예에 따른 골절 교정을 위한 내비게이션 장치 및 방법은 골절 교정 시술의 정확성을 향상시킬 수 있다.Further, the navigation apparatus and method for fracture correction according to an embodiment of the present invention can improve the accuracy of the fracture correction procedure.

다만, 본 발명의 일 실시예에 따른 골절 교정을 위한 내비게이션 장치 및 방법이 달성할 수 있는 효과는 이상에서 언급한 것들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.However, effects that can be achieved by the navigation apparatus and method for correcting fractures according to an embodiment of the present invention are not limited to those mentioned above, and other effects not mentioned can be obtained from the following description. And will be apparent to one of ordinary skill in the art.

도 1은 본 발명의 일 실시예에 따른 내비게이션 장치가 사용되는 환경을 도시하는 예시적인 도면이다.
도 2는 본 발명의 일 실시예에 따른 내비게이션 방법을 설명하기 위한 순서도이다.
도 3은 표준 3D 이미지로부터 제 1 변형 3D 이미지를 생성하는 방법을 설명하기 위한 도면이다.
도 4는 제 1 변형 3D 이미지로부터 제 2 변형 3D 이미지를 생성하는 방법을 설명하기 위한 도면이다.
도 5는 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈의 제 1 기준 좌표계와 제 2 부분 뼈의 제 2 기준 좌표계 사이의 변환 관계(C)를 산출하는 방법을 설명하기 위한 도면이다.
도 6은 제 1 변형 3D 이미지에 기준 좌표계를 설정하는 방법을 설명하기 위한 도면이다.
도 7은 제 2 변형 3D 이미지에서 골절된 뼈의 교정 목표치를 산출하는 과정을 설명하기 위한 도면이다.
도 8은 디스플레이에 표시된 교정 목표치를 도시하는 예시적인 도면이다.
도 9는 본 발명의 일 실시예에 따른 내비게이션 장치의 구성을 나타내는 블록도이다.
1 is an exemplary diagram illustrating an environment in which a navigation device according to an embodiment of the present invention is used.
2 is a flowchart illustrating a navigation method according to an embodiment of the present invention.
3 is a diagram for explaining a method of generating a first modified 3D image from a standard 3D image.
4 is a diagram for explaining a method of generating a second modified 3D image from the first modified 3D image.
5 is a diagram for explaining a method of calculating a transformation relation C between the first reference coordinate system of the first partial bone and the second reference coordinate system of the second partial bone included in the second modified 3D image.
6 is a diagram for explaining a method of setting a reference coordinate system on the first modified 3D image.
FIG. 7 is a diagram for explaining a process of calculating a corrected target value of a bone fractured in the second modified 3D image. FIG.
8 is an exemplary diagram showing the calibration target values displayed on the display.
9 is a block diagram showing a configuration of a navigation device according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고, 이를 상세한 설명을 통해 상세히 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명은 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. It is to be understood, however, that the intention is not to limit the invention to the specific embodiments, but on the contrary, the intention is to cover all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제 1, 제 2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, the present invention will be described in detail with reference to the accompanying drawings. In addition, numerals (e.g., first, second, etc.) used in the description of the present invention are merely an identifier for distinguishing one component from another.

또한, 본 명세서에서, 일 구성요소가 다른 구성요소와 "연결된다" 거나 "접속된다" 등으로 언급된 때에는, 상기 일 구성요소가 상기 다른 구성요소와 직접 연결되거나 또는 직접 접속될 수도 있지만, 특별히 반대되는 기재가 존재하지 않는 이상, 중간에 또 다른 구성요소를 매개하여 연결되거나 또는 접속될 수도 있다고 이해되어야 할 것이다.Also, in this specification, when an element is referred to as being "connected" or "connected" with another element, the element may be directly connected or directly connected to the other element, It should be understood that, unless an opposite description is present, it may be connected or connected via another element in the middle.

또한, 본 명세서에서 '~부(유닛)', '모듈' 등으로 표현되는 구성요소는 2개 이상의 구성요소가 하나의 구성요소로 합쳐지거나 또는 하나의 구성요소가 보다 세분화된 기능별로 2개 이상으로 분화될 수도 있다. 또한, 이하에서 설명할 구성요소 각각은 자신이 담당하는 주기능 이외에도 다른 구성요소가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성요소 각각이 담당하는 주기능 중 일부 기능이 다른 구성요소에 의해 전담되어 수행될 수도 있음은 물론이다.In the present specification, a component represented by 'unit', 'module', or the like refers to a case where two or more components are combined into one component, or one component is divided into two or more ≪ / RTI > In addition, each of the components to be described below may additionally perform some or all of the functions of the other components in addition to the main functions of the component itself, and some of the main functions And may be performed entirely by components.

이하에서는, 도면을 참조하여 본 발명의 기술적 사상에 따른 예시적인 실시예들에 대해 설명한다.Hereinafter, exemplary embodiments according to the technical idea of the present invention will be described with reference to the drawings.

도 1은 본 발명의 일 실시예에 따른 내비게이션 장치(100)가 사용되는 환경을 도시하는 예시적인 도면이다.1 is an exemplary diagram illustrating an environment in which a navigation device 100 according to an embodiment of the present invention is used.

본 발명의 일 실시예에 따른 내비게이션 장치(100)는 범용의 컴퓨터로 구현될 수 있으며, 통신 기능, 이미지 처리 기능 및 디스플레이 기능을 포함할 수 있다. 또한, 내비게이션 장치(100)는 메모리, 디스플레이 및 제어부를 포함할 수 있으며, 메모리와 제어부는 적어도 하나의 프로세서로 구현되어 메모리에 저장된 프로그램에 따라 동작할 수 있다.The navigation device 100 according to an embodiment of the present invention may be implemented by a general-purpose computer and may include a communication function, an image processing function, and a display function. In addition, the navigation device 100 may include a memory, a display, and a control unit, and the memory and the control unit may be implemented with at least one processor and may operate according to a program stored in the memory.

내비게이션 장치(100)는 2D 이미징 장치(200)에 의해 촬영되는 환자(10)의 2D 이미지를 2D 이미징 장치(200)로부터 수신하거나, 기타, 별도의 서버로부터 수신할 수 있다. 상기 2D 이미징 장치(200)는 엑스선 장치를 포함할 수 있으나, 이에 한정되는 것은 아니며, 환자(10)의 2차원의 영상을 얻을 수 있다면 다른 장치가 적용될 수 있다.Navigation device 100 may receive a 2D image of patient 10 taken by 2D imaging device 200 from 2D imaging device 200 or otherwise from a separate server. The 2D imaging device 200 may include an x-ray device, but is not limited thereto, and other devices can be applied as long as a two-dimensional image of the patient 10 can be obtained.

환자(10)는 2D 이미징 장치(200), 예를 들어, C 암(c-arm) 타입의 엑스선 장치의 이미징 영역, 즉, 엑스선 소스(210)와 디텍터(250) 사이에서 엑스선 촬영을 할 수 있다. The patient 10 is capable of imaging X-rays between the imaging area of the 2D imaging device 200, e.g., a c-arm type of x-ray device, i. E., Between the x-ray source 210 and the detector 250 have.

앞서 설명한 바와 같이, 종래의 내비게이션 장치는 시술이 진행되기 전에 환자(10)에 대한 3D 촬영을 요구하기 때문에 치료비의 증가와 환자(10)에게 가해지는 피폭량이 현저하다는 문제점이 있었는데, 본 발명의 일 실시예에서는 표준 3D 이미지를 이용하여 환자 맞춤형 3D 이미지를 생성하므로, 환자(10)에 대한 피폭량을 대폭 감소시킬 수 있다.As described above, since the conventional navigation apparatus requires 3D photographing of the patient 10 before the procedure proceeds, there has been a problem that the increase of the treatment cost and the amount of the dose applied to the patient 10 are remarkable. In the embodiment, the standard 3D image is used to generate the patient-customized 3D image, so that the amount of exposure to the patient 10 can be greatly reduced.

도 2는 본 발명의 일 실시예에 따른 내비게이션 방법을 설명하기 위한 순서도이다.2 is a flowchart illustrating a navigation method according to an embodiment of the present invention.

S210 단계에서, 내비게이션 장치(100)는 소정의 뼈에 대한 표준 3D 이미지로부터 환자(10)의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성한다.In step S210, the navigation device 100 generates a first deformed 3D image for a non-fractured bone of the patient 10 from a standard 3D image for a predetermined bone.

표준 3D 이미지는 여러 사람들의 뼈에 대한 2D 이미지, 3D 이미지 등으로부터 생성된 것으로서, 예를 들어, 표준 3D 이미지는 여러 사람의 뼈의 평균 3D 모델 (SSM: Statistical Shape Model)을 포함할 수 있다. 상기 제 1 변형 3D 이미지는 환자(10)의 골절되지 않은 뼈에 대한 환자 맞춤형 3D 이미지로서, 예를 들어, 환자(10)의 우측 다리의 뼈에 골절이 발생한 경우, 골절이 되지 않은 좌측 다리의 뼈에 대한 환자 맞춤형 3D 이미지를 나타낸다.A standard 3D image is generated from a 2D image, a 3D image, etc., of bones of several people. For example, a standard 3D image may include a statistical shape model (SSM) of several bones. The first modified 3D image is a patient-customized 3D image of the unbroken bone of the patient 10, for example, when a fracture occurs in the bone of the right leg of the patient 10, Represents a patient-customized 3D image of bone.

도 3은 표준 3D 이미지(310)로부터 제 1 변형 3D 이미지를 생성하는 방법을 설명하기 위한 도면으로서, 도 3을 참조하면, 내비게이션 장치(100)는 환자(10)의 골절되지 않은 뼈의 2D 이미지(330)들과 표준 뼈의 표준 3D 이미지(310)를 정합하여 표준 3D 이미지(310)를 변형할 수 있다. 구체적으로, 내비게이션 장치(100)는 환자(10)의 복수의 2D 이미지(330)들 각각을 표준 3D 이미지(310)에 정합시키고, 정합된 상태에서 표준 3D 이미지(310)를 투영하여 생성된 가상의 2D 이미지가 환자(10)의 2D 이미지(330)에 대응되도록 표준 3D 이미지(310)의 뼈의 형상을 변형할 수 있다. 예를 들어, 환자(10)의 어느 하나의 2D 이미지(330)를 특정 방향에서 바라본 표준 3D 이미지(310)에 정합시키고, 상기 특정 방향으로부터 투영된 가상의 2D 이미지의 뼈가 상기 환자(10)의 어느 하나의 2D 이미지(330)의 뼈와 동일해지도록 표준 3D 이미지(310)의 각 복셀 값을 변경할 수 있는 것이다.3 is a view for explaining a method of generating a first modified 3D image from a standard 3D image 310. Referring to FIG. 3, a navigation device 100 includes a navigation device 100 for displaying a 2D image of an unfractured bone of a patient 10 The standard 3D image 310 can be modified by matching the standard 3D image 310 of the standard bone with the standard 3D image 310 of the standard bone. Specifically, the navigation device 100 matches each of the plurality of 2D images 330 of the patient 10 to a standard 3D image 310, projects the standard 3D image 310 in a matched state, The shape of the bone of the standard 3D image 310 may be modified such that the 2D image of the patient 10 corresponds to the 2D image 330 of the patient 10. For example, a 2D image 330 of any one of the patients 10 may be matched to a standard 3D image 310 viewed from a specific direction, and a bone of a virtual 2D image projected from the particular direction may be registered with the patient 10, Such that the voxel values of the standard 3D image 310 are the same as the bones of any one of the 2D images 330 of the 3D image.

이와 같이, 내비게이션 장치(100)는 복수의 2D 이미지(330) 각각을 표준 3D 이미지(310)에 정합시켜가면서 표준 3D 이미지(310)를 변형한 후, 변형된 표준 3D 이미지의 각 복셀 값들을 보외법을 통해 보정하여 상기 제 1 변형 3D 이미지를 생성할 수 있다.In this way, the navigation device 100 transforms the standard 3D image 310 while matching each of the plurality of 2D images 330 with the standard 3D image 310, and then transforms the respective voxel values of the modified standard 3D image So that the first modified 3D image can be generated.

다음으로, S220 단계에서, 내비게이션 장치(100)는 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자(10)의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성한다.Next, in step S220, the navigation device 100 divides the bone included in the first deformed 3D image into two parts, and then compares it with the 2D image photographed against the fractured bone of the patient 10, Creates a transformed 3D image.

제 1 변형 3D 이미지는 환자(10)의 골절되지 않은 뼈에 대한 환자 맞춤형 3D 이미지이므로, 이를 변형하여 환자(10)의 골절된 뼈에 대한 환자 맞춤형 3D 이미지인 제 2 변형 3D 이미지를 생성하는 것이다.The first variant 3D image is a patient customized 3D image of the unbroken bone of the patient 10 and is therefore modified to produce a second variant 3D image which is a patient customized 3D image of the fractured bone of the patient 10 .

도 4는 제 1 변형 3D 이미지(410)로부터 제 2 변형 3D 이미지를 생성하는 방법을 설명하기 위한 도면으로서, 내비게이션 장치(100)는 우선 제 1 변형 3D 이미지(410)에 포함된 뼈를 제 1 부분 뼈(412)와 제 2 부분 뼈(414)로 분할한다. 다음으로, 제 1 부분 뼈(412)를 기준으로 제 2 부분 뼈(414)의 위치 및/또는 회전 정도를 변형하면서, 환자(10)의 골절된 뼈에 대하여 촬영된 2D 이미지(420)에 정합한다. 내비게이션 장치(100)는 제 2 부분 뼈(414)의 위치 및/또는 회전 정도를 변형하는 동안 소정 기준을 만족하는 정합 값이 도출된 경우, 해당 상태의 제 1 변형 3D 이미지를 제 2 변형 3D 이미지로 획득할 수 있다.4 is a diagram for explaining a method of generating a second modified 3D image from the first modified 3D image 410. The navigation device 100 firstly divides the bones included in the first modified 3D image 410 into first The partial bone 412 and the second partial bone 414 are divided. Next, the 2D image 420 imaged with respect to the fractured bone of the patient 10 is corrected (corrected) by changing the position and / or degree of rotation of the second partial bone 414 with respect to the first partial bone 412 do. When a matching value satisfying a predetermined criterion is derived while the position and / or degree of rotation of the second partial bone 414 is derived, the navigation device 100 converts the first deformed 3D image of the corresponding state into the second deformed 3D image .

S230 단계에서, 내비게이션 장치(100)는 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 추출한다. 제 1 기준 좌표계 및 제 2 기준 좌표계 각각은 제 1 부분 뼈 및 제 2 부분 뼈에 대해 임의로 설정될 수 있다. 내비게이션 장치(100)는 제 1 변형 3D 이미지에서 추출되는 제 1 특징점들과 제 2 변형 3D 이미지에서 추출되는 제 2 특징점들을 이용하여 변환 관계(C)를 추출할 수 있다.In step S230, the navigation device 100 extracts a conversion relationship (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone do. Each of the first reference coordinate system and the second reference coordinate system may be arbitrarily set for the first partial bone and the second partial bone. The navigation apparatus 100 can extract the transformation relation C using the first feature points extracted from the first transformed 3D image and the second feature points extracted from the second transformed 3D image.

구체적으로, 도 5를 참조하면, 제 1 변형 3D 이미지(410)에 포함된 뼈에 대해 기준 좌표계(a)가 설정되고, 제 2 변형 3D 이미지(510)에 포함된 제 1 부분 뼈(512)에 대해 제 1 기준 좌표계(b)가 설정되고, 제 2 변형 3D 이미지(510)에 포함된 제 2 부분 뼈(514)에 대해 제 2 기준 좌표계(c)가 설정된다. 내비게이션 장치(100)는 제 1 변형 3D 이미지(410)의 뼈에서 제 1 특징점(412)들을 추출하고, 제 2 변형 3D 이미지(510)에 포함된 제 1 부분 뼈(512) 및 제 2 부분 뼈(514)에 대해 제 2 특징점(515)들을 추출한다. 제 1 변형 3D 이미지(410)와 제 2 변형 3D 이미지(510)는 모두 환자 맞춤형 이미지이므로, 제 1 특징점(412)들과 제 2 특징점(515)들은 서로 매핑된 관계에 해당할 수 있다. 다시 말하면, 제 1 변형 3D 이미지(410)의 뼈에서 추출된 제 1 특징점(412)의 일부는 제 1 부분 뼈(512)에서 추출된 제 2 특징점(515)과 대응하므로, 기준 좌표계(a)를 기준으로 한 제 1 특징점(412)의 좌표와 제 1 기준 좌표계(b)를 기준으로 한 제 2 특징점(515)의 좌표를 이용하여 기준 좌표계(a)와 제 1 기준 좌표계(b) 사이의 변환 관계(A)를 산출할 수 있다. 서로 다른 기준 좌표계를 갖는 두 개의 영상에서 서로 대응하는 지점의 좌표 정보를 이용하여, 두 기준 좌표계 사이의 변환 관계(또는 변환 매트릭스)를 산출하는 것은 당업계에 자명한 사항인바 상세한 설명은 생략한다.5, a reference coordinate system (a) is set for the bones included in the first modified 3D image 410, a first partial bone 512 included in the second modified 3D image 510, And a second reference coordinate system c is set for the second partial bone 514 included in the second modified 3D image 510. In this case, The navigation device 100 extracts the first feature points 412 from the bones of the first modified 3D image 410 and extracts the first partial bone 512 and the second partial bone 512 included in the second transformed 3D image 510, And extracts the second feature points 515 with respect to the second feature point 514. Since the first modified 3D image 410 and the second modified 3D image 510 are both patient-customized images, the first feature points 412 and the second feature points 515 may correspond to each other. In other words, a part of the first feature point 412 extracted from the bone of the first modified 3D image 410 corresponds to the second feature point 515 extracted from the first partial bone 512, Between the reference coordinate system a and the first reference coordinate system b using the coordinates of the first feature point 412 based on the first reference coordinate system b and the coordinates of the second feature point 515 based on the first reference coordinate system b, The conversion relation (A) can be calculated. It is obvious to those skilled in the art to calculate the transformation relation (or transformation matrix) between two reference coordinate systems by using coordinate information of points corresponding to each other in two images having different reference coordinate systems, and a detailed description thereof will be omitted.

마찬가지로, 제 1 변형 3D 이미지(410)의 뼈에서 추출된 제 1 특징점(412)의 일부는 제 2 부분 뼈(514)에서 추출된 제 2 특징점(515)과 대응하므로, 기준 좌표계(a)를 기준으로 한 제 1 특징점(412)의 좌표와 제 2 기준 좌표계(c)를 기준으로 한 제 2 특징점(515)의 좌표를 이용하여 기준 좌표계(a)와 제 2 기준 좌표계(c) 사이의 변환 관계(B)를 산출할 수 있다. 이후, 내비게이션 장치(100)는 변환 관계(A)와 변환 관계(B)를 통해 제 1 기준 좌표계(b)와 제 2 기준 좌표계(c) 사이의 변환 관계(C)를 산출할 수 있다.Likewise, since a part of the first feature point 412 extracted from the bone of the first modified 3D image 410 corresponds to the second feature point 515 extracted from the second partial bone 514, the reference coordinate system (a) (A) and the second reference coordinate system (c) by using the coordinates of the first feature point 412 as a reference and the coordinates of the second feature point 515 based on the second reference coordinate system c as the reference, The relationship (B) can be calculated. Thereafter, the navigation device 100 can calculate the conversion relationship C between the first reference coordinate system b and the second reference coordinate system c through the conversion relationship A and the conversion relation B.

다시 도 2를 보면, S240 단계에서, 내비게이션 장치(100)는 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정한다.Referring again to FIG. 2, in step S240, the navigation device 100 sets a third reference coordinate system for the first partial bone included in the second transformed 3D image, and based on the extracted transformation relation C, Set a fourth reference coordinate system for the two partial bones.

도 6을 참조하면, 기준 축(예를 들어, z축)이 제 1 변형 3D 이미지(410)의 뼈의 중심축(415)에 평행하는 기준 좌표계를 임의로 설정할 수 있는데, 내비게이션 장치(100)는 제 1 변형 3D 이미지(410)의 뼈에 대해 설정된 기준 좌표계를 제 2 변형 3D 이미지의 제 1 부분 뼈에 대한 제 3 기준 좌표계로 설정할 수 있다. 구현예에 따라서는, 제 2 변형 3D 이미지의 제 1 부분 뼈의 중심축에 평행하는 기준 축을 갖는 제 3 기준 좌표계를 제 1 부분 뼈에 대해 설정할 수도 있다. 상기 뼈에 대한 중심축은 당업계에 자명한 범위 내에서 다양한 방법으로 식별될 수 있다.6, it is possible to arbitrarily set a reference coordinate system in which the reference axis (for example, the z-axis) is parallel to the central axis 415 of the bone of the first deformed 3D image 410. The navigation apparatus 100 The reference coordinate system set for the bones of the first modified 3D image 410 may be set to a third reference coordinate system for the first partial bone of the second modified 3D image. According to an embodiment, a third reference coordinate system having a reference axis parallel to the central axis of the first partial bone of the second modified 3D image may be set for the first partial bone. The central axis for the bone can be identified in a variety of ways within the scope of what is known in the art.

내비게이션 장치(100)는 제 1 기준 좌표계와 제 2 기준 좌표계 사이의 변환 관계(C)를 알고 있으므로, 제 3 기준 좌표계에 변환 관계(C)를 적용하여 제 2 부분 뼈에 대한 제 4 기준 좌표계를 설정할 수 있다.Since the navigation apparatus 100 knows the transformation relation C between the first reference coordinate system and the second reference coordinate system, the navigation apparatus 100 applies the transformation relation C to the third reference coordinate system to obtain the fourth reference coordinate system for the second partial bone Can be set.

S250 단계에서, 내비게이션 장치(100)는 제 3 기준 좌표계와 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출한다.In step S250, the navigation device 100 calculates the corrected target value of the fractured bone based on the positional relationship between the third reference coordinate system and the fourth reference coordinate system.

교정 목표치는 예를 들어, 제 2 변형 3D 이미지의 제 1 부분 뼈와 제 2 부분 뼈 사이의 앵귤레이션(angulation) 각, 로테이션(rotation) 각 및 거리(length) 중 적어도 하나를 포함할 수 있는데, 이들을 산출하는 방법에 대해서는 도 7을 참조하여 설명한다.The calibration target value may include, for example, at least one of an angulation angle, a rotation angle and a length between the first partial bone and the second partial bone of the second modified 3D image, The calculation method will be described with reference to FIG.

도 7은 최초 제 1 변형 3D 이미지(410)의 뼈에 대해 기준 좌표계(d)가 설정되는 과정을 도시하고 있다(①). 앞서 설명한 바와 같이, 제 1 변형 3D 이미지(410)의 뼈의 중심축에 평행하는 기준축을 갖는 기준 좌표계(d)가 설정될 수 있다.FIG. 7 shows a process of setting a reference coordinate system d with respect to bones of the first deformed 3D image 410 (1). As described above, a reference coordinate system d having a reference axis parallel to the central axis of the bone of the first modified 3D image 410 may be set.

다음으로, 제 1 변형 3D 이미지(410)의 뼈에 대해 설정된 기준 좌표계(d)와 동일한 기준 좌표계가 제 2 변형 3D 이미지의 제 1 부분 뼈(512)의 제 3 기준 좌표계(e)로 설정되고, 변환 관계(C)에 기초하여 제 2 부분 뼈(514)의 제 4 기준 좌표계(f)가 설정된다(②). 제 3 기준 좌표계(e)의 기준 축은 제 1 부분 뼈(512)의 중심 축에 평행할 수 있다.Next, a reference coordinate system identical to the reference coordinate system d set for the bone of the first modified 3D image 410 is set to the third reference coordinate system e of the first partial bone 512 of the second modified 3D image 410 , The fourth reference coordinate system f of the second partial bone 514 is set based on the transformation relation C (2). The reference axis of the third reference frame (e) may be parallel to the central axis of the first partial bone 512.

다음으로, 제 3 기준 좌표계(e)의 기준 축(예를 들어, z축)과 제 4 기준 좌표계(f)의 기준 축(예를 들어, z축)이 서로 동일한 방향으로 정렬하도록 (기준축의 방향 벡터가 동일하도록) 제 2 부분 뼈(514)를 이동시킨다(③, ④). 제 3 기준 좌표계(e)의 기준 축과 제 4 기준 좌표계(f)의 기준 축이 정렬해질 동안 제 2 부분 뼈(514)가 회전한 각은 앵귤레이션 각이 될 수 있다.Next, the reference axis (e.g., z axis) of the third reference coordinate system e and the reference axis (e.g., the z axis) of the fourth reference coordinate system f are aligned in the same direction The second partial bones 514 are moved (i.e., ④ and ④) so that the direction vectors are the same. The angle at which the second partial bones 514 rotate while the reference axis of the third reference coordinate system e and the reference axis of the fourth reference coordinate system f are aligned may be an angle of incidence.

다음으로, 제 3 기준 좌표계(e)의 기준 축 이외의 축들과 제 4 기준 좌표계(f)의 기준 축 이외의 축들이 각각 서로 일치하도록 제 2 부분 뼈(514)를 회전 시킨다(⑤). 예를 들어, 제 3 기준 좌표계(e)의 기준 축 이외의 축들과 제 4 기준 좌표계(f)의 기준 축 이외의 축들이 각각 서로 일치하도록 기준 축을 중심으로 제 2 부분 뼈(514)를 회전 시킬 수 있다. 제 3 기준 좌표계(e)의 기준 축 이외의 축들과 제 4 기준 좌표계(f)의 기준 축 이외의 축들 각각이 일치해질 동안 제 2 부분 뼈(514)가 회전한 각은 로테이션 각이 될 수 있다.Next, the second partial bones 514 are rotated (5) so that the axes other than the reference axes of the third reference coordinate system (e) and the reference axes of the fourth reference coordinate system (f) coincide with each other. For example, the second partial bones 514 may be rotated about the reference axis such that the axes other than the reference axes of the third reference coordinate system (e) and the axes other than the reference axes of the fourth reference coordinate system (f) . The angle at which the second partial bones 514 are rotated while the axes other than the reference axes of the third reference coordinate system e and the reference axes of the fourth reference coordinate system f coincide may be rotation angles .

다음으로, 제 3 기준 좌표계(e)에서의 기준점(예를 들어, 제 1 부분 뼈(512)에 포함된 임의의 특징점)과 제 4 기준 좌표계(f)에서 기준점(예를 들어, 제 2 부분 뼈(514)에 포함된 임의의 특징점) 사이의 상기 소정 기준축 상의 거리(length)를 산출한다. 예를 들어, 제 3 기준 좌표계(e)에서의 기준점이 원점이고, 제 4 기준 좌표계(f)에서의 기준점이 원점인 경우, 제 3 기준 좌표계(e)의 원점과 제 4 기준 좌표계(f)의 원점 사이의 소정 기준축 상의 거리가 산출될 수 있는 것이다.Next, a reference point in the third reference coordinate system e (for example, any feature point included in the first partial bone 512) and a reference point in the fourth reference coordinate system f (for example, (Any feature point included in the bone 514) on the predetermined reference axis. For example, when the reference point in the third reference coordinate system e is the origin and the reference point in the fourth reference coordinate system f is the origin, the origin of the third reference coordinate system e and the origin of the fourth reference coordinate system f, The distance on the predetermined reference axis between the origin points of the reference points can be calculated.

다음으로, 내비게이션 장치(100)는 도 8에 도시된 바와 같이, 산출된 교정 목표치 중 적어도 하나를 디스플레이(800)에 표시하여 의료진으로 하여금 골절 시술을 위해 부분 뼈를 어떻게 교정하여야 할지를 쉽게 알 수 있다.Next, the navigation device 100 can display at least one of the calculated calibration target values on the display 800, as shown in FIG. 8, so that the medical staff can easily know how to calibrate the partial bone for the fracture procedure .

도 9는 본 발명의 일 실시예에 따른 내비게이션 장치(100)의 구성을 나타내는 블록도이다.9 is a block diagram showing a configuration of a navigation device 100 according to an embodiment of the present invention.

도 9를 참조하면, 본 발명의 일 실시예에 따른 내비게이션 장치(100)는 메모리(910), 이미지 처리부(930), 변환 관계 산출부(950) 및 교정 목표치 산출부(970)를 포함할 수 있다. 메모리(910), 이미지 처리부(930), 변환 관계 산출부(950) 및 교정 목표치 산출부(970)는 적어도 하나의 프로세서로 구현될 수 있으며, 메모리(910)에 저장된 프로그램에 따라 동작할 수 있다.9, the navigation device 100 according to an embodiment of the present invention may include a memory 910, an image processing unit 930, a conversion relation calculation unit 950, and a calibration target value calculation unit 970 have. The memory 910, the image processing unit 930, the conversion relation calculating unit 950 and the calibration target value calculating unit 970 may be implemented with at least one processor and may operate according to a program stored in the memory 910 .

메모리(910)는 여러 사람들의 뼈의 이미지 등으로부터 생성된 표준 3D 이미지를 저장할 수 있다. 또한, 메모리(910)는 환자(10)의 골절된 뼈 및 골절되지 않은 뼈에 대해 촬영된 2D 이미지를 저장할 수 있다.The memory 910 may store standard 3D images generated from images of bones of various people and the like. In addition, the memory 910 may store 2D images taken of the fractured and unfractured bones of the patient 10.

이미지 처리부(930)는 소정의 뼈에 대한 표준 3D 이미지로부터 환자(10)의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성하고, 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자(10)의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성한다.The image processing unit 930 generates a first deformed 3D image for a non-fractured bone of the patient 10 from a standard 3D image for a predetermined bone, and divides the bone included in the first deformed 3D image into two parts And then compares it with the 2D image taken against the fractured bone of the patient 10 to produce a second modified 3D image.

변환 관계 산출부(950)는 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 산출한다.The conversion relation calculating unit 950 calculates a conversion relationship (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone.

교정 목표치 산출부(970)는 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정하고, 제 3 기준 좌표계와 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출한다.The calibration target value calculation unit 970 sets a third reference coordinate system for the first partial bone included in the second modified 3D image and calculates a fourth reference coordinate system for the second partial bone based on the extracted conversion relation (C) And a correction target value of the fractured bone is calculated based on the positional relationship between the third reference coordinate system and the fourth reference coordinate system.

교정 목표치 산출부(970)는 상기 산출된 교정 목표치를 디스플레이를 통해 표시할 수 있다.The calibration target value calculator 970 can display the calculated calibration target value through display.

한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 작성된 프로그램은 매체에 저장될 수 있다.Meanwhile, the embodiments of the present invention described above can be written in a program that can be executed in a computer, and the created program can be stored in a medium.

상기 매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함할 수 있으나, 이에 한정되는 것은 아니다.The medium may include, but is not limited to, storage media such as magnetic storage media (e.g., ROM, floppy disks, hard disks, etc.), optical reading media (e.g., CD ROMs,

첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the present invention as defined by the following claims. You will understand. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive.

100: 내비게이션 장치
200: 2D 이미징 장치
910: 메모리
930: 이미지 처리부
950: 변환 관계 산출부
970: 교정 목표치 산출부
100: Navigation device
200: 2D imaging device
910: Memory
930:
950: conversion relation calculating unit
970: Calibration target value calculation unit

Claims (10)

소정의 뼈에 대한 표준 3D 이미지로부터 환자의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성하는 단계;
상기 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성하는 단계;
상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 추출하는 단계;
상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정하는 단계; 및
상기 제 3 기준 좌표계와 상기 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출하는 단계를 포함하는 것을 특징으로 하는, 골절 교정 내비게이션 장치에 의한 내비게이션 방법.
Generating a first modified 3D image for a non-fractured bone of a patient from a standard 3D image for a given bone;
Dividing a bone included in the first modified 3D image into two parts and then creating a second modified 3D image by comparing the extracted bone with a 2D image photographed against a fractured bone of a patient;
Extracting a transformation relationship (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone;
Setting a third reference coordinate system for the first partial bone included in the second modified 3D image and setting a fourth reference coordinate system for the second partial bone based on the extracted transformation relation (C); And
And calculating a correction target value of the fractured bone based on a positional relationship between the third reference coordinate system and the fourth reference coordinate system.
제1항에 있어서,
상기 제 1 변형 3D 이미지를 생성하는 단계는,
환자의 골절되지 않은 뼈에 대한 복수의 2D 이미지 각각을 상기 표준 3D 이미지에 정합하는 단계;
상기 표준 3D 이미지로부터 생성되는 가상의 2D 이미지가 상기 복수의 2D 이미지 각각에 대응하도록 상기 표준 3D 이미지를 변형하는 단계; 및
상기 변형된 표준 3D 이미지의 각 복셀 값들을 보외법을 통해 보정하여 상기 제 1 변형 3D 이미지를 생성하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 1,
Wherein the generating the first variant 3D image comprises:
Matching each of the plurality of 2D images of the patient's unbroken bone to the standard 3D image;
Transforming the standard 3D image so that a virtual 2D image generated from the standard 3D image corresponds to each of the plurality of 2D images; And
And generating the first modified 3D image by correcting each of the voxel values of the modified standard 3D image through an extrapolation method.
제1항에 있어서,
상기 제 2 변형 3D 이미지를 생성하는 단계는,
상기 제 1 변형 3D 이미지의 제 1 부분 뼈를 기준으로 제 2 부분 뼈의 위치 및 회전 정도 중 적어도 하나를 변형시키면서 상기 환자의 골절된 뼈에 대해 촬영된 2D 이미지에 정합시키는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 1,
Wherein the step of generating the second modified 3D image comprises:
And matching the 2D image photographed with respect to the fractured bone of the patient while deforming at least one of the position and degree of rotation of the second partial bone with respect to the first partial bone of the first deformed 3D image .
제1항에 있어서,
상기 변환 관계(C)를 추출하는 단계는,
상기 제 1 변형 3D 이미지에 포함된 뼈에서 제 1 특징점들을 추출하는 단계;
상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈 및 제 2 부분 뼈에서 제 2 특징점들을 추출하는 단계;
상기 제 1 특징점들과 상기 제 2 특징점들을 매핑시켜 상기 제 1 변형 3D 이미지에 포함된 뼈에 대해 설정된 기준 좌표계와 상기 제 1 기준 좌표계 사이의 변환 관계(A) 및 상기 제 1 변형 3D 이미지에 포함된 뼈에 대해 설정된 기준 좌표계와 상기 제 2 기준 좌표계 사이의 변환 관계(B)를 산출하는 단계; 및
상기 변환 관계(A) 및 상기 변환 관계(B)를 이용하여 상기 변환 관계(C)를 산출하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 1,
The step of extracting the transformation relation (C)
Extracting first feature points from bones included in the first modified 3D image;
Extracting second feature points from the first partial bone and the second partial bone included in the second modified 3D image;
(A) between the reference coordinate system set for the bones included in the first deformed 3D image and the first reference coordinate system by mapping the first feature points and the second feature points to the first deformed 3D image, Calculating a transformation relation (B) between the reference coordinate system set for the bone and the second reference coordinate system; And
(C) using the conversion relation (A) and the conversion relation (B).
제1항에 있어서,
상기 제 3 기준 좌표계를 설정하는 단계는,
소정의 기준 축이 상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈의 중심 축과 평행하는 제 3 기준 좌표계를 설정하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 1,
Wherein the step of setting the third reference coordinate system comprises:
And setting a third reference coordinate system in which a predetermined reference axis is parallel to the central axis of the first partial bone included in the second modified 3D image.
제1항에 있어서,
상기 교정 목표치를 산출하는 단계는,
상기 제 3 기준 좌표계의 소정의 기준축과 상기 제 4 기준 좌표계의 소정의 기준축이 서로 동일한 방향으로 정렬하도록 상기 제 2 부분 뼈를 이동시킬 때의 앵귤레이션(angulation) 각을 산출하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 1,
The step of calculating the calibration target value includes:
Calculating an angulation angle when the second partial bone is moved so that a predetermined reference axis of the third reference coordinate system and a predetermined reference axis of the fourth reference coordinate system align in the same direction . ≪ / RTI >
제6항에 있어서,
상기 교정 목표치를 산출하는 단계는,
상기 제 3 기준 좌표계와 제 4 기준 좌표계에서 상기 소정의 기준축 이외의 축들이 서로 일치하도록 상기 제 2 부분 뼈를 회전시킬 때의 로테이션(rotation) 각을 산출하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
The method according to claim 6,
The step of calculating the calibration target value includes:
And calculating a rotation angle when the second partial bone is rotated such that axes other than the predetermined reference axis coincide with each other in the third reference coordinate system and the fourth reference coordinate system, Way.
제7항에 있어서,
상기 교정 목표치를 산출하는 단계는,
상기 제 3 기준 좌표계에서의 기준점과 제 4 기준 좌표계에서 기준점 사이의 상기 소정 기준축 상의 거리(length)를 산출하는 단계를 포함하는 것을 특징으로 하는 내비게이션 방법.
8. The method of claim 7,
The step of calculating the calibration target value includes:
And calculating a length on the predetermined reference axis between the reference point in the third reference coordinate system and the reference point in the fourth reference coordinate system.
제8항에 있어서,
상기 내비게이션 방법은,
상기 앵귤레이션 각, 상기 로테이션 각 및 상기 거리 중 적어도 하나를 디스플레이에 표시하는 단계를 더 포함하는 것을 특징으로 하는 내비게이션 방법.
9. The method of claim 8,
The navigation method includes:
And displaying at least one of the angle of angulation, the rotation angle and the distance on the display.
소정의 뼈에 대한 표준 3D 이미지로부터 환자의 골절되지 않은 뼈에 대한 제 1 변형 3D 이미지를 생성하고, 상기 제 1 변형 3D 이미지에 포함된 뼈를 2개의 부분으로 나눈 후, 이를 환자의 골절된 뼈에 대해 촬영된 2D 이미지와 대비시켜 제 2 변형 3D 이미지를 생성하는 이미지 처리부;
상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 설정된 제 1 기준 좌표계와 제 2 부분 뼈에 대해 설정된 제 2 기준 좌표계 사이의 변환 관계(C)를 추출하는 변환 관계 산출부; 및
상기 제 2 변형 3D 이미지에 포함된 제 1 부분 뼈에 대해 제 3 기준 좌표계를 설정하고, 상기 추출된 변환 관계(C)에 기초하여 제 2 부분 뼈에 대해 제 4 기준 좌표계를 설정하고, 상기 제 3 기준 좌표계와 상기 제 4 기준 좌표계 사이의 위치 관계에 기초하여 상기 골절된 뼈의 교정 목표치를 산출하는 교정 목표치 산출부를 포함하는 것을 특징으로 하는 골절 교정 내비게이션 장치.
Generating a first deformed 3D image for a non-fractured bone of a patient from a standard 3D image for a given bone, dividing the bone contained in the first deformed 3D image into two portions, An image processing unit for generating a second modified 3D image in comparison with the 2D image photographed for the second modified 3D image;
A transformation relation calculation unit for extracting a transformation relation (C) between a first reference coordinate system set for the first partial bone included in the second modified 3D image and a second reference coordinate system set for the second partial bone; And
Setting a third reference coordinate system for the first partial bone included in the second modified 3D image, setting a fourth reference coordinate system for the second partial bone based on the extracted conversion relation (C) And a correction target value calculation unit for calculating a correction target value of the fractured bone based on a positional relationship between the reference coordinate system and the fourth reference coordinate system.
KR1020170089006A 2017-07-13 2017-07-13 Navigation apparatus and method for fracture correction KR101961682B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170089006A KR101961682B1 (en) 2017-07-13 2017-07-13 Navigation apparatus and method for fracture correction

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170089006A KR101961682B1 (en) 2017-07-13 2017-07-13 Navigation apparatus and method for fracture correction

Publications (2)

Publication Number Publication Date
KR20190007693A true KR20190007693A (en) 2019-01-23
KR101961682B1 KR101961682B1 (en) 2019-07-17

Family

ID=65280192

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170089006A KR101961682B1 (en) 2017-07-13 2017-07-13 Navigation apparatus and method for fracture correction

Country Status (1)

Country Link
KR (1) KR101961682B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114617636A (en) * 2022-05-11 2022-06-14 杭州键嘉机器人有限公司 Method for determining conversion relation between oral cavity U-shaped groove clamp and medical image coordinate system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102460864B1 (en) 2021-04-27 2022-10-28 재단법인대구경북과학기술원 Bone surgical apparatus and method based on registration between coordinates of a surgical robot and coordinates of a patient

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003339725A (en) * 2002-05-22 2003-12-02 Mitsubishi Heavy Ind Ltd Fracture reintegration induction apparatus and method
KR20130121753A (en) * 2012-04-27 2013-11-06 재단법인대구경북과학기술원 Image adjustment apparatus and method using skin marker and body target point
KR101433242B1 (en) * 2012-11-16 2014-08-25 경북대학교 산학협력단 Reduction surgical robot and method for driving control thereof
KR101491922B1 (en) * 2013-08-07 2015-02-24 재단법인대구경북과학기술원 Hybrid navigation system and method to track position thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003339725A (en) * 2002-05-22 2003-12-02 Mitsubishi Heavy Ind Ltd Fracture reintegration induction apparatus and method
KR20130121753A (en) * 2012-04-27 2013-11-06 재단법인대구경북과학기술원 Image adjustment apparatus and method using skin marker and body target point
KR101433242B1 (en) * 2012-11-16 2014-08-25 경북대학교 산학협력단 Reduction surgical robot and method for driving control thereof
KR101491922B1 (en) * 2013-08-07 2015-02-24 재단법인대구경북과학기술원 Hybrid navigation system and method to track position thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114617636A (en) * 2022-05-11 2022-06-14 杭州键嘉机器人有限公司 Method for determining conversion relation between oral cavity U-shaped groove clamp and medical image coordinate system

Also Published As

Publication number Publication date
KR101961682B1 (en) 2019-07-17

Similar Documents

Publication Publication Date Title
US11957419B2 (en) External fixator deformity correction systems and methods
US11089975B2 (en) Systems, devices and methods for enhancing operative accuracy using inertial measurement units
US6415171B1 (en) System and method for fusing three-dimensional shape data on distorted images without correcting for distortion
EP3903724B1 (en) Calibration method and device for dental implantology navigation surgeries
US8886286B2 (en) Determining and verifying the coordinate transformation between an X-ray system and a surgery navigation system
US9715739B2 (en) Bone fragment tracking
Gsaxner et al. Markerless image-to-face registration for untethered augmented reality in head and neck surgery
US20060050988A1 (en) Fluoroscopy image verification
US20080056433A1 (en) Method and device for determining the location of pelvic planes
KR20190078853A (en) Laser projection apparatus and control method thereof, laser guidance system including the apparatus
JP2015519985A (en) Multi-camera device tracking
CN204655073U (en) A kind of orthopaedics operation navigation system
KR20190058190A (en) Spine surgical navigation system and method using augmented reality technology
KR101961682B1 (en) Navigation apparatus and method for fracture correction
Pietruski et al. Replacing cutting guides with an augmented reality‐based navigation system: A feasibility study in the maxillofacial region
Reaungamornrat et al. Tracker-on-C: a novel tracker configuration for image-guided therapy using a mobile C-arm
TWI836491B (en) Method and navigation system for registering two-dimensional image data set with three-dimensional image data set of body of interest
TWI836493B (en) Method and navigation system for registering two-dimensional image data set with three-dimensional image data set of body of interest
US20230050636A1 (en) Augmented reality system and methods for stereoscopic projection and cross-referencing of live x-ray fluoroscopic and computed tomographic c-arm imaging during surgery
US20230154018A1 (en) Method and navigation system for registering two-dimensional image data set with three-dimensional image data set of body of interest
US20240041558A1 (en) Video-guided placement of surgical instrumentation
US20220398755A1 (en) Technique Of Generating Surgical Information From Intra-Operatively And Pre-Operatively Acquired Image Data
US20210378749A1 (en) Method and device for monitoring images by means of an x-ray device during a surgical procedure
Kim et al. Application of augmented reality using automatic markerless registration for facial plastic and reconstructive surgery
WO2023156608A1 (en) Method, computing device, system, and computer program product for assisting positioning of a tool with respect to a specific body part of a patient

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant