KR100877114B1 - Medical image providing system and method of providing medical image using the same - Google Patents

Medical image providing system and method of providing medical image using the same Download PDF

Info

Publication number
KR100877114B1
KR100877114B1 KR1020070038951A KR20070038951A KR100877114B1 KR 100877114 B1 KR100877114 B1 KR 100877114B1 KR 1020070038951 A KR1020070038951 A KR 1020070038951A KR 20070038951 A KR20070038951 A KR 20070038951A KR 100877114 B1 KR100877114 B1 KR 100877114B1
Authority
KR
South Korea
Prior art keywords
probe
augmented reality
information
mode
patient
Prior art date
Application number
KR1020070038951A
Other languages
Korean (ko)
Other versions
KR20080113138A (en
Inventor
박종일
박한훈
이문현
서병국
김영수
Original Assignee
한양대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to KR1020070038951A priority Critical patent/KR100877114B1/en
Publication of KR20080113138A publication Critical patent/KR20080113138A/en
Application granted granted Critical
Publication of KR100877114B1 publication Critical patent/KR100877114B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Databases & Information Systems (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Primary Health Care (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Epidemiology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

의료 영상 제공 시스템 및 이를 이용한 의료 영상 제공 방법이 개시된다. 본 발명에 따른 의료 영상 제공 시스템은 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득하는 위치 정보 획득부 및 상기 프로브의 위치 정보를 이용하여 환자의 환부를 포함하는 제1 증강현실 영역에 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사하는 증강현실 영상 제공부를 포함하는 것을 특징으로 한다. 따라서 본 발명에 따르면 효율적으로 의료 영상을 제공할 수 있다.Disclosed are a medical image providing system and a medical image providing method using the same. The medical image providing system according to the present invention tracks the position of the probe and acquires the position information of the probe and obtains the position information of the probe using the position information of the probe and the first augmented reality region including the affected part of the patient And an augmented reality image providing unit for projecting image information corresponding to a moving path of the. Therefore, according to the present invention, it is possible to efficiently provide a medical image.

증강현실, 영상, 프로브 Augmented Reality, Imaging, Probes

Description

의료 영상 제공 시스템 및 의료 영상 제공 방법{MEDICAL IMAGE PROVIDING SYSTEM AND METHOD OF PROVIDING MEDICAL IMAGE USING THE SAME }MEDICAL IMAGE PROVIDING SYSTEM AND METHOD OF PROVIDING MEDICAL IMAGE USING THE SAME}

도 1은 본 발명의 일실시예에 따른 의료 영상 제공 시스템을 나타낸 블록도이다. 1 is a block diagram illustrating a medical image providing system according to an exemplary embodiment of the present invention.

도 2는 본 발명에 따른 제1 증강현실 영역의 일예를 나타낸 도면이다.2 is a view showing an example of a first augmented reality region according to the present invention.

도 3은 본 발명에 따른 의료 영상 제공 시스템이 적용된 일 예를 나타낸 도면이다.3 is a diagram illustrating an example in which a medical image providing system according to the present invention is applied.

도 4는 본 발명의 일실시예에 따른 의료 영상 제공 방법을 나타낸 동작 흐름도이다. 4 is a flowchart illustrating a medical image providing method according to an exemplary embodiment of the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for main parts of the drawings>

110: 위치 정보 획득부110: location information acquisition unit

120: 증강현실 영상 제공부120: augmented reality image providing unit

S410: 위치 정보 획득 단계S410: obtaining location information

S420: 영상 정보 투사 단계 S420: Image information projection step

본 발명은 영상 기술을 이용한 의료 장비 및 그 시스템에 관한 것으로, 특히 증강현실 기술을 이용하여 보다 효과적으로 의료 영상을 제공하기 위한 의료 영상 제공 시스템 및 그 방법에 관한 것이다. The present invention relates to a medical equipment and a system using imaging technology, and more particularly to a medical image providing system and method for providing a medical image more effectively using augmented reality technology.

컴퓨터 및 영상 기술이 급속도로 발전함에 따라 의료 장비에도 다양한 어플리케이션들이 출현하고 있다. 예를 들어, 컴퓨터 단층 촬영(computer tomography, CT), 자기 공명 영상법(magnetic resonance imaging, MRI) 등이 의료 장비로서 유용하게 제공되고 있다. 컴퓨터 및 영상 기술이 높은 정확도를 갖고 폭넓게 의료 기술에 적용되고 있다고 하더라도, 실제 의료 환경에 있어서는 현실 세계와 영상 정보가 독립적으로 존재하는 한계가 있었다. With the rapid development of computer and imaging technology, various applications are appearing in medical devices. For example, computer tomography (CT), magnetic resonance imaging (MRI), and the like are usefully provided as medical equipment. Although computer and imaging technologies are widely applied to medical technologies with high accuracy, there is a limit that the real world and image information exist independently in a real medical environment.

예를 들어, 의사가 환자를 수술하는 경우에 있어서 의사는 우선 환자의 환부의 위치 또는 환자의 상태 등을 CT, MRI 촬영 결과 등을 육안으로 확인한 후, 잉크펜을 가지고 환자의 환부 위치를 직접 표시하여 수술하는 방식을 취하고 있었다. 즉, 종래에는 영상으로 제공되는 정보가 현실 세계와는 완전히 분리되어 있어 영상으로 제공되는 정보를 의사가 파악하고, 의사가 파악된 영상 정보를 이용하여 별도로 존재하는 현실 세계의 환자에게 적용하는 형태를 띄고 있었다.For example, when a doctor operates on a patient, the doctor first checks the location of the patient's lesion or the patient's condition with the naked eye, and checks the CT and MRI results, and then directly displays the patient's location with the ink pen. Was taking the way of surgery. That is, in the related art, the information provided in the image is completely separated from the real world, so that the doctor grasps the information provided in the image and applies the information to the patient in the real world that exists separately using the captured image information. It was floating.

따라서, 실제 수술 환경과 영상 정보는 완전히 독립적이어서 종래에는 예를 들어, 의사가 잉크펜으로 환자의 환부를 표시한 경우 이를 잘못 표시하여 수정하기 위해서는 잉크를 지워야 하는 등 불편한 점이 많았으며, 잉크펜의 성분 등이 환자의 환부 등을 통해 유입될 수도 있어 위생적인 문제가 생기는 등 불편한 점이 많았다. Therefore, since the actual surgical environment and the image information are completely independent, conventionally, for example, when a doctor marks a patient's affected area with an ink pen, it is inconvenient to delete the ink in order to correct it by incorrectly displaying it. Ingredients may also be introduced through the affected part of the patient, causing a number of inconveniences such as hygiene problems.

또한, 의사가 수술을 하는 경우 의사는 수시로 컴퓨터 모니터 등을 통해 제공되는 CT, MRI 이미지를 확인해야 되어 의사의 피로감이 높아지고 의사의 집중력이 떨어지는 문제점도 있었다.In addition, when the doctor is operating, the doctor should check the CT, MRI image provided through a computer monitor from time to time, there is a problem that the doctor's fatigue increases and the doctor's concentration falls.

또한, 컴퓨터 모니터 등을 통해 제공되는 이미지는 2차원 영상이어서, 이를 실제로 환자 등 현실 세계에 적용하는 경우 의사의 개인적 경험에 크게 의존하게 되어서 높은 정확성을 요하는 의료 환경에는 큰 문제가 되고 있었다.In addition, since the image provided through a computer monitor is a two-dimensional image, when it is actually applied to the real world, such as a patient, it is highly dependent on the personal experience of the doctor, which has become a big problem in the medical environment requiring high accuracy.

최근에는 육안으로 확인되는 현실 세계와 영상으로 제공되는 가상 세계를 하나의 영상으로 합쳐 보여주는 증강현실(augmented reality) 기술에 대한 관심이 높아지고 있다. 증강현실 기술은 세계의 영상 정보에 부가 정보를 추가하여 하나의 영상으로 가상 세계에 대한 영상을 제공하지만 가상 세계에서 이루어지고 것들은 현실 세계에 그대로 적용되게 하여 현실감을 높이게 한다. 즉, 현실 환경에 가상의 객체를 혼합하는 것이다. 이 때, 컴퓨터 시스템은 현실 세계와 거의 동일한 영상을 현실 세계와 중첩되게 하여 가상 영상을 제공하고, 현실 세계에 필요한 정보를 추가하여 제공하는 역할을 하게 된다. Recently, the interest in augmented reality (augmented reality) technology that combines the real world that is confirmed with the naked eye and the virtual world provided by the image into one image is increasing. Augmented reality technology adds additional information to the image information of the world to provide the image of the virtual world as a single image, but it is made in the virtual world and things are applied to the real world to enhance the realism. That is, mixing virtual objects in the real environment. At this time, the computer system serves to provide a virtual image by superimposing an image almost identical to the real world with the real world, and to add and provide information necessary for the real world.

다만, 증강현실 기술이 의료 환경에 실제로 적용되기 위해서는 높은 정확도 및 엄격한 위생 관리를 요하는 의료 환경의 특성 등 고려해야 하는 점이 매우 많아 증강현실 기술을 의료 환경에 적용하려는 시도가 존재하지 않는 실정이었다.However, in order to actually apply augmented reality technology to the medical environment, there are many points to consider such as the characteristics of the medical environment requiring high accuracy and strict hygiene management, so there is no attempt to apply the augmented reality technology to the medical environment.

본 발명은 상술한 바와 같은 종래기술의 문제점을 해결하기 위해 안출된 것으로서, 진료 및 시술에 관련된 정보를 증강현실 영상을 이용하여 제공함으로써, 효율적으로 진료 및 시술에 관련된 정보를 제공하는 것을 목적으로 한다.The present invention has been made to solve the problems of the prior art as described above, and aims to provide information related to the treatment and treatment efficiently by providing information related to the treatment and the procedure using an augmented reality image. .

또한, 본 발명은 수술 혹은 진료 시에 환자의 환부를 표시함에 있어서 증강현실 영상을 환자의 환부에 직접 투사하여 제공함으로써 청결한 진료 및 수술 환경을 제공하고 보다 정확하게 환부를 표시할 수 있게 하는 것으로 목적으로 한다. In addition, an object of the present invention is to provide a clean treatment and surgical environment by providing augmented reality image by directly projecting to the affected part of the patient in displaying the affected part of the patient during surgery or treatment to display the affected area more accurately do.

또한, 본 발명은 환자의 환부 표시를 증강현실 영상으로 제공함으로써 삭제 및 수정이 용이하며 청결하고 편리한 진료 및 수술 환경을 제공하는 것을 목적으로 한다.In addition, an object of the present invention is to provide a clean and convenient medical treatment and surgical environment by easy to delete and modify by providing a lesion display of the patient as an augmented reality image.

또한, 본 발명은 프로브의 위치 정보를 이용하여 영상 정보를 투사함으로써 효과적으로 의료 영상을 제공하는 것을 목적으로 한다.In addition, an object of the present invention is to provide a medical image effectively by projecting the image information by using the position information of the probe.

또한, 본 발명은 환자의 진료 정보 또는 진료 장비 제어 정보를 증강현실 영상으로 제공함으로써 효율적인 의료 서비스를 제공하고, 의사 등으로 하여금 집중력을 떨어뜨리지 않고 진료 및 수술을 수행하게 하는 것을 목적으로 한다.In addition, an object of the present invention is to provide an efficient medical service by providing a patient's medical information or medical equipment control information as an augmented reality image, and to allow doctors and the like to perform medical treatment and surgery without losing concentration.

상기의 목적을 달성하고 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 의료 영상 제공 시스템은 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득하는 위치 정보 획득부 및 상기 프로브의 위치 정보를 이용하여 환자의 환부를 포함하는 제1 증강현실 영역에 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사하는 증강현실 영상 제공부를 포함하는 것을 특징으로 한다. In order to achieve the above object and solve the problems of the prior art, the medical image providing system according to an embodiment of the present invention is a position information acquisition unit for obtaining the position information of the probe by tracking the position of the probe and the And an augmented reality image providing unit projecting image information corresponding to a movement path of the probe to a first augmented reality region including the affected part of the patient using the location information.

이 때, 상기 증강현실 영상 제공부는 기 설정된 수행 모드에 따라 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사할 수 있다. In this case, the augmented reality image providing unit may project image information corresponding to the movement path of the probe according to a preset performance mode.

이 때, 상기 수행 모드는 쓰기 모드, 수정 모드, 삭제 모드 중 어느 하나일 수 있다. In this case, the execution mode may be any one of a write mode, a modify mode, and a delete mode.

이 때, 상기 의료 영상 제공 시스템은 상기 제1 증강현실 영역과 인접한 제2 증강현실 영역에 상기 수행 모드를 설정하기 위한 메뉴를 투사하는 보조 영상 제공부를 더 포함할 수 있다. The medical image providing system may further include an auxiliary image providing unit configured to project a menu for setting the execution mode to a second augmented reality region adjacent to the first augmented reality region.

이 때, 상기 증강현실 영상 제공부는 상기 제2 증강현실 영역에 투사된 상기 메뉴를 통해 상기 프로브의 위치 정보를 이용하여 상기 수행 모드를 설정할 수 있다. At this time, the augmented reality image providing unit may set the execution mode by using the position information of the probe through the menu projected on the second augmented reality region.

이 때, 상기 보조 영상 제공부는 상기 제2 증강현실 영역에 상기 환자의 진료 정보 또는 진료 장비 제어 정보 중 어느 하나 이상을 더 투사할 수 있다.In this case, the auxiliary image providing unit may further project any one or more of the patient's medical information or medical equipment control information to the second augmented reality region.

이 때, 상기 프로브는 빛을 방사하고, 상기 위치 정보 획득부는 상기 프로브에 의해 방사된 빛을 이용하여 상기 프로브의 위치 정보를 획득할 수 있다. 이 때, 프로브는 빛을 방사하는 센서를 부착하는 것일 수 있다.In this case, the probe may emit light, and the location information acquisition unit may acquire location information of the probe by using light emitted by the probe. At this time, the probe may be to attach a sensor that emits light.

또한, 본 발명의 일실시예에 따른 의료 영상 제공 방법은 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득하는 단계 및 상기 프로브의 위치 정보를 이용하여 환자의 환부를 포함하는 제1 증강현실 영역에 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사하는 단계를 포함하는 것을 특징으로 한다.In addition, the method for providing a medical image according to an embodiment of the present invention includes tracking a position of a probe to obtain position information of the probe and a first augmented reality region including a affected part of the patient using the position information of the probe. Projecting image information corresponding to the movement path of the probe.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 의료 영상 제공 시스템을 나타낸 블록도 이다. 1 is a block diagram illustrating a medical image providing system according to an exemplary embodiment of the present invention.

도 1을 참조하면, 본 발명의 일실시예에 따른 의료 영상 제공 시스템은 위치 정보 획득부(110), 증강현실 영상 제공부(120) 및 보조 영상 제공부(130)를 포함한다. Referring to FIG. 1, a medical image providing system according to an exemplary embodiment includes a location information acquisition unit 110, an augmented reality image providing unit 120, and an auxiliary image providing unit 130.

상기 위치 정보 획득부(110)는 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득한다. 이 때, 상기 프로브는 상기 위치 정보 획득부(110)와 유선으로 연결될 수 있고, 무선 방식으로 상기 프로브의 위치 정보가 상기 위치 정보 획득부(110)에 의해 획득될 수 있다. 프로브는 막대, 펜 또는 핀셋 모양 등 다양한 형태로 구현될 수 있다. 또한, 상기 위치 정보 획득부(110)는 빛 또는 전자기파 등을 이용하여 프로브의 위치를 추적하고, 상기 프로브의 위치 정보를 획득할 수 있다. The location information acquisition unit 110 obtains location information of the probe by tracking the location of the probe. In this case, the probe may be connected to the location information acquisition unit 110 by wire, and the location information of the probe may be acquired by the location information acquisition unit 110 in a wireless manner. The probe may be implemented in various forms such as a rod, pen, or tweezers. In addition, the location information acquisition unit 110 may track the location of the probe using light or electromagnetic waves, and may obtain location information of the probe.

이 때, 상기 프로브는 빛을 방사하고, 상기 위치 정보 획득부(110)는 상기 프로브에 의해 방사된 빛을 이용하여 상기 프로브의 위치 정보를 획득할 수 있다. 예를 들어, 상기 프로브에는 빛을 방사하는 센서가 부착될 수 있으며, 상기 위치 정보 획득부(110)는 상기 프로브에 포함된 센서로부터 방사된 빛을 수신하여 상기 프로브의 위치 정보를 획득할 수 있다. In this case, the probe emits light, and the position information acquisition unit 110 may acquire position information of the probe by using light emitted by the probe. For example, a sensor that emits light may be attached to the probe, and the location information acquisition unit 110 may receive location information of the probe by receiving light emitted from a sensor included in the probe. .

이 때, 상기 위치 정보 획득부(110)는 프로브가 직접 방사하는 빛뿐만 아니라 반사된 빛을 이용하여 위치 정보를 획득할 수도 있다. 예를 들어, 프로브는 빛을 반사하는 반사 센서를 포함하고 상기 위치 정보 획득부(110)는 빛을 방사할 수 있다. 이 때, 상기 의사가 프로브를 환자의 신체에 근접시키는 경우에 상기 위치 정보 획득부(110)에서 방사된 빛은 상기 프로브에 포함된 반사 센서에 의해 반사되고, 상기 위치 정보 획득부(110)는 상기 센서에서 반사된 빛을 통해 상기 프로브의 위치 정보를 획득할 수 있게 된다. In this case, the location information acquisition unit 110 may obtain location information using the reflected light as well as the light directly emitted by the probe. For example, the probe may include a reflection sensor that reflects light, and the location information acquisition unit 110 may emit light. At this time, when the doctor approaches the probe to the body of the patient, the light emitted from the location information acquisition unit 110 is reflected by a reflection sensor included in the probe, the location information acquisition unit 110 The position information of the probe may be obtained through the light reflected from the sensor.

상기 증강현실 영상 제공부(120)는 상기 프로브의 위치 정보를 이용하여 환자의 환부를 포함하는 제1 증강현실 영역에 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사한다. 위치 정보 획득부(110)를 통하여 획득된 상기 프로브의 위치 정보는 상기 증강현실 영상 제공부(120)에서 이용된다. The augmented reality image providing unit 120 projects the image information corresponding to the movement path of the probe to the first augmented reality region including the affected part of the patient by using the position information of the probe. The location information of the probe acquired through the location information acquisition unit 110 is used by the augmented reality image providing unit 120.

이 때, 상기 제1 증강현실 영역은 환자의 환부를 포함한다. 상기 환자의 환부는 의사 또는 간호사 등이 진료 또는 수술 등을 하고자 하는 환자의 신체 부위일 수 있다. 예를 들어, 뇌종양에 걸린 환자를 수술하고자 하는 경우 의사는 환자의 머리 부분을 수술 또는 관찰하고자 할 것이다. 이 때, 환자는 자신의 머리 부분이 제1 증강현실 영역에 포함되도록 침대에 눕게 될 것이다. 또한, 상기 증강현실 영상 제공부(120)는 상기 제1 증강현실 영역에 영상 정보를 투사할 것이다. In this case, the first augmented reality region includes the affected part of the patient. The affected part of the patient may be a body part of a patient that a doctor or a nurse wants to perform a treatment or surgery. For example, if a patient wants to operate on a patient with a brain tumor, the doctor will want to operate or observe the head of the patient. At this time, the patient will lie in bed so that his head is included in the first AR region. The augmented reality image providing unit 120 may project image information onto the first augmented reality region.

이 때, 의사가 프로브의 위치를 이동시키는 경우 상기 증강현실 영상 제공부(120)는 상기 프로브의 이동 경로에 상응하는 영상 정보를 제1 증강현실 영역에 투사할 수 있다. 예를 들어, 뇌종양에 걸린 환자가 수술을 받기 위해 환부인 머리를 제1 증강현실 영역에 포함되도록 하여 누워있다고 가정한다. 이 때, 의사는 환자의 머리에 수술을 하기 위해 절개해야 할 부분을 표시해야 한다. 의사는 환자의 절개해야 할 부분과 근접하거나 상기 절개할 부분을 따라서 프로브를 이동시킬 것이다. 즉, 제1 증강현실 영역에서 프로브를 이용하여 절개해야 할 부분을 표시 하는 것이다. In this case, when the doctor moves the position of the probe, the augmented reality image providing unit 120 may project image information corresponding to the movement path of the probe to the first augmented reality region. For example, suppose a patient with a brain tumor is lying down so that the affected head is included in the first AR region for surgery. At this point, the doctor should mark the part of the patient's head that needs to be incised to perform the operation. The surgeon will move the probe close to or along the portion of the patient's incision. That is, the portion to be cut using the probe is displayed in the first augmented reality region.

이 때, 상기 증강현실 영상 제공부(120)는 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사한다. 예를 들어, 상기 증강현실 영상 제공부(120)는 빛을 이용하여 환자의 절개해야 할 부분을 영상 정보로 투사할 수 있다. 이를 통해, 종래 잉크펜 등을 이용하여 환부를 표시하는 데에서 오는 불편함, 비위생성 등을 해소할 수 있게 된다. At this time, the augmented reality image providing unit 120 projects the image information corresponding to the movement path of the probe. For example, the augmented reality image providing unit 120 may project a portion to be cut out of the patient as image information using light. Through this, it is possible to solve the inconvenience, unsanitary hygiene, etc. that come from displaying the affected area using a conventional ink pen or the like.

이 때, 상기 증강현실 영상 제공부(120)는 기 설정된 수행 모드에 따라 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사할 수 있다. 이 때, 상기 수행 모드에는 쓰기 모드, 수정 모드 또는 삭제 모드가 있을 수 있다. In this case, the augmented reality image providing unit 120 may project image information corresponding to the movement path of the probe according to a preset execution mode. At this time, the execution mode may include a write mode, a modify mode, or a delete mode.

예를 들어, 수행 모드가 쓰기 모드로 설정되어 있는 경우에 의사가 프로브를 환자의 환부 주변을 이동시키는 경우, 제1 증강현실 영역에는 상기 프로브의 이동 경로에 상응하도록 환부를 표시하는 영상 정보가 투사될 것이다. 또한, 수행 모드가 수정 모드로 되어 있고, 의사가 프로브를 환자의 환부 주변을 이동시키는 경우에는 이미 투사되어 있는 영상 정보가 현재 프로브의 이동 경로에 상응하도록 수정되어 투사될 것이다. 마찬가지로, 수정 모드가 삭제 모드로 되어 있는 경우에는 이미 투사되어 있는 영상 정보가 프로브의 이동 경로에 상응하도록 삭제될 것이다. For example, when the doctor moves the probe around the affected part of the patient when the performance mode is set to the write mode, image information indicating the affected part is projected on the first augmented reality area to correspond to the movement path of the probe. Will be. In addition, when the performance mode is a correction mode and the doctor moves the probe around the affected part of the patient, the image information that is already projected will be modified and projected to correspond to the movement path of the current probe. Similarly, when the correction mode is set to the delete mode, image information already projected will be deleted to correspond to the movement path of the probe.

이 때, 본 발명의 일실시예에 따른 의료 영상 제공 시스템은 상기 제1 증강현실 영역과 인접한 제2 증강현실 영역에 상기 수행 모드를 설정하기 위한 메뉴를 투사하는 보조 영상 제공부(130)를 더 포함할 수 있다. 상기 보조 영상 제공 부(130)는 상기 증강현실 영상 제공부(120)와 별도로 구비될 수도 있고, 상기 증강현실 영상 제공부(120)에 포함되어 구비될 수도 있다. At this time, the medical image providing system according to an embodiment of the present invention further comprises an auxiliary image providing unit 130 for projecting a menu for setting the execution mode in the second augmented reality region adjacent to the first augmented reality region. It may include. The auxiliary image providing unit 130 may be provided separately from the augmented reality image providing unit 120 or may be included in the augmented reality image providing unit 120.

상기 제2 증강현실 영역은 상기 제1 증강현실 영역과 인접한 영역이다. 상기 보조 영상 제공부(130)은 상기 수행 모드를 설정하기 위한 메뉴를 상기 제2 증강현실 영역에 투사할 것이다. 의사는 환부의 위치를 포함하는 상기 제1 증강현실 영역과 인접한 상기 제2 증강현실 영역에서 상기 수행 모드를 설정할 수 있게 된다. 따라서, 환자를 진료하고 수술하는 등 고도의 집중력을 요하는 행위를 하는 경우 의사는 집중력을 떨어뜨리지 않고 수행 모드를 설정할 수 있게 되며, 간단하게 프로브를 이동시킴으로써 그에 상응하는 영상 정보를 확인할 수 있게 된다. 또한, 프로브의 이동 경로에 상응하는 영상 정보를 수행 모드에 따라 다르게 설정함으로써, 더욱 효과적으로 영상 정보를 활용할 수 있다.The second augmented reality region is an area adjacent to the first augmented reality region. The auxiliary image providing unit 130 projects the menu for setting the execution mode to the second augmented reality area. The surgeon may set the performance mode in the second augmented reality region adjacent to the first augmented reality region including the location of the affected part. Therefore, when conducting a high concentration of attention such as treating a patient and operating a surgeon, the doctor can set a performance mode without losing concentration, and by simply moving a probe, corresponding image information can be confirmed. . In addition, by setting the image information corresponding to the movement path of the probe differently according to the execution mode, it is possible to utilize the image information more effectively.

이 때, 상기 증강현실 영상 제공부(120)는 상기 제2 증강현실 영역에 투사된 메뉴를 통해 상기 프로브의 위치 정보를 이용하여 상기 수행 모드를 설정할 수 있다. 예를 들어, 제2 증강현실 영역에는 상기 수행 모드를 설정하기 위한 메뉴가 투사되고, 상기 메뉴에는 쓰기 모드, 수정 모드, 삭제 모드 중 어느 하나를 수행 모드로 설정할 수 있도록 영상 정보가 투사될 수 있다. 이 때, 의사가 상기 프로브를 상기 메뉴로 제공된 모드 중 어느 하나에 근접시키는 경우 상기 프로브의 위치 정보를 이용하여 상기 수행 모드가 설정되게 된다. At this time, the augmented reality image providing unit 120 may set the execution mode by using the position information of the probe through a menu projected on the second augmented reality region. For example, a menu for setting the execution mode may be projected on the second augmented reality area, and image information may be projected on the menu to set any one of the write mode, the correction mode, and the delete mode as the execution mode. . At this time, when the doctor approaches the probe to any one of the modes provided by the menu, the execution mode is set using the position information of the probe.

이 때, 상기 보조 영상 제공부(130)는 상기 제2 증강현실 영역에 상기 환자의 진료 정보 또는 진료 장비 제어 정보 중 어느 하나 이상을 더 투사할 수 있다. In this case, the auxiliary image providing unit 130 may further project any one or more of the treatment information or the treatment equipment control information of the patient to the second augmented reality region.

상기 환자의 진료 정보는 환자의 개인 정보, 진료기록 정보, 건강 상태 정보, 각종 검사 정보, CT 및 MRI 정보 등을 포함할 수 있다. 또한, 상기 진료 장비 제어 정보는 수술 장비의 제어에 관한 정보, 검사 장비, 진단 장비 등의 조작에 관한 정보를 포함할 수 있다. The patient's care information may include personal information, care record information, health status information, various examination information, CT and MRI information, etc. of the patient. In addition, the treatment equipment control information may include information on the control of the surgical equipment, information on the operation of the examination equipment, diagnostic equipment and the like.

제2 증강현실 영역에 상기 환자의 진료 정보가 투사되는 경우에 의사는 진료 및 수술 도중에 환부의 위치와 근접한 영역에 제공되는 상기 환자의 진료 정보를 용이하게 참고할 수 있으므로 의사는 진료 및 수술을 용이하게 할 수 있고, 집중력을 유지하는 데 큰 도움이 된다. 또한, 예를 들어, 수술 조명, 산소호흡기 등 의료 장비의 제어에 관한 정보를 제2 증강현실 영역에 제공하여 편리한 진료 및 수술을 할 수 있도록 한다. When the medical information of the patient is projected to the second augmented reality region, the doctor can easily refer to the medical information of the patient provided in an area close to the location of the affected part during the medical treatment and surgery, so that the medical doctor can facilitate the medical treatment and surgery. You can do it, and it helps you stay focused. In addition, for example, by providing information on the control of the medical equipment, such as surgical lighting, oxygen respirator to the second augmented reality region to be convenient medical treatment and surgery.

도 2는 본 발명에 따른 제1 증강현실 영역의 일예를 나타낸 도면이다. 2 is a view showing an example of a first augmented reality region according to the present invention.

도 2를 참조하면, 제1 증강현실 영역(220)은 환자의 환부(220)을 포함한다. Referring to FIG. 2, the first augmented reality region 220 includes the affected part 220 of the patient.

위치 정보 획득부는 프로브(250)의 위치를 추적하여 상기 프로브의 위치 정보를 획득하고, 증강현실 영상 제공부는 상기 프로브의 위치 정보를 이용하여 제1 증강현실 영역(210)에 영상 정보를 투사하게 된다. The location information acquisition unit obtains location information of the probe by tracking the location of the probe 250, and the augmented reality image providing unit projects image information onto the first augmented reality area 210 using the location information of the probe. .

예를 들어, 뇌종양에 걸린 환자를 수술하고자 하는 경우라고 가정한다. 환자의 환부(220)는 환자의 머리 부분이 될 것이고, 상기 환자의 머리 부분은 제1 증강현실 영역(210)에 포함되어 있게 된다. 환자의 환부(220)인 머리 중에서도 종양(240)을 도려하고자 하는 경우에 의사는 프로브(250)를 이용하여 절개하고자 하는 영역(230)을 표시해야 한다. 이 때, 의사는 프로브(250)를 영역(230)의 경계선 을 따라 이동시킬 수 있다. For example, suppose that a patient with a brain tumor wants to operate. The affected part 220 of the patient will be the head of the patient, and the head of the patient is included in the first augmented reality region 210. In the case where the tumor 240 is to be cut out of the head, which is the affected part 220 of the patient, the doctor should mark the area 230 to be cut using the probe 250. At this time, the surgeon may move the probe 250 along the boundary line of the region 230.

의사가 영역(230)의 경계선을 따라 프로브(250)를 이동시키는 경우 위치 정보 획득부는 상기 프로브(250)의 위치를 추적하여 상기 프로브(250)의 위치 정보를 획득한다. When the doctor moves the probe 250 along the boundary line of the area 230, the location information acquisition unit tracks the location of the probe 250 to obtain location information of the probe 250.

증강현실 영상 제공부는 상기 프로브(250)의 위치 정보를 이용하여 프로브(250)의 이동 경로에 상응하는 영상 정보를 제1 증강현실 영역(210)에 투사하게 된다. 결국, 프로브(250)의 이동 경로에 상응하는 영상 정보가 영역(230)에 따라 투사된다. The augmented reality image providing unit projects the image information corresponding to the movement path of the probe 250 to the first augmented reality region 210 by using the position information of the probe 250. As a result, image information corresponding to the movement path of the probe 250 is projected along the region 230.

따라서, 종래에는 의사가 잉크펜 등을 이용하여 종양(240) 부근에 영역을 표시해야 했지만, 본 발명에 따르는 경우 효율적으로 프로브(250)를 이용하여 환자의 절개하고자 하는 부분을 표시할 수 있다. 따라서, 그 표시가 매우 용이하며 훨씬 위생적으로 환자의 환부를 표시할 수 있게 된다. Therefore, in the related art, the doctor had to mark an area near the tumor 240 using an ink pen or the like, but according to the present invention, the probe 250 may be used to efficiently mark the patient's incision. Therefore, the marking is very easy and much more hygienic to mark the affected part of the patient.

도 3은 본 발명에 따른 의료 영상 시스템이 적용된 일 예를 나타낸 도면이다. 3 is a diagram illustrating an example in which a medical imaging system according to the present invention is applied.

도 3을 참조하면, 뇌종양 환자의 종양(340) 및 환부(330)가 포함된 제1 증강현실 영역(320)과 상기 제1 증강현실 영역(320)과 인접하여 제2 증강현실 영역(310)이 도시되어 있다. Referring to FIG. 3, a first augmented reality region 320 including a tumor 340 and a lesion 330 of a brain tumor patient and a second augmented reality region 310 adjacent to the first augmented reality region 320 are included. Is shown.

이 때, 제1 증강현실 영역(320)에 투사되는 영상은 프로브(390)의 이동 경로에 상응하는 영상 정보 일 수 있다. 이 때, 상기 프로브(390)의 이동 경로에 상응하는 영상 정보는 기 설정된 수행 모드에 따라 투사될 수 있다. 이 때, 상기 수 행 모드는 쓰기, 수정, 삭제 모드 중 어느 하나일 수 있고, 상기 제2 증강 현실 영역(310)에 상기 수행 모드를 설정하기 위한 메뉴(350, 360)가 투사될 수 있다. In this case, the image projected on the first augmented reality region 320 may be image information corresponding to the movement path of the probe 390. In this case, image information corresponding to the movement path of the probe 390 may be projected according to a preset execution mode. In this case, the performance mode may be any one of a write mode, a modification mode, and a deletion mode, and menus 350 and 360 for setting the performance mode may be projected on the second augmented reality area 310.

이 때, 상기 제2 증강현실 영역(310)에 투사된 메뉴(350, 360)를 통해 상기 프로브(390)의 위치 정보를 이용하여 상기 수행 모드를 설정할 수 있다. 예를 들어, 메뉴(350)가 '수정 모드'라고 가정하면, 의사가 프로브(390)를 상기 메뉴(350)에 근접시키는 경우 상기 프로브(390)의 위치 정보를 이용함으로써 수행 모드는 '수정 모드'로 설정되게 된다. '수정 모드'로 수행 모드가 설정되면, 제1 증강현실 영역(320)에 투사되었던 영상 정보는 수정될 수 있다. 즉, 수행 모드를 '수정 모드'로 설정하고, 프로브(390)을 다시 종양(340) 주변에서 이동시키는 경우, 종전에 투사되었던 영상 정보는 현재 프로브(390)의 이동 경로에 상응하는 영상 정보로 수정될 수 있다. In this case, the execution mode may be set by using the location information of the probe 390 through the menus 350 and 360 projected on the second augmented reality area 310. For example, assuming that the menu 350 is the 'modification mode', when the doctor moves the probe 390 to the menu 350, the performing mode is used as the 'modification mode' by using the position information of the probe 390. Will be set to '. When the execution mode is set to the 'correction mode', the image information projected on the first augmented reality region 320 may be corrected. That is, when the execution mode is set to 'correction mode' and the probe 390 is moved again around the tumor 340, previously projected image information is converted into image information corresponding to the movement path of the current probe 390. Can be modified.

이 때, 제2 증강현실 영역(310)은 환자의 진료 정보가 투사되는 영역(370) 또는 진료 장비 제어 정보가 투사되는 영역(380)을 포함할 수 있다. 즉, 본 발명의 증강현실 영상 제공부는 제2 증강현실 영역(310)에 환자의 진료 정보 또는 진료 장비 제어 정보 중 어느 하나 이상을 더 투사할 수 있는 것이다. In this case, the second augmented reality region 310 may include an area 370 in which the patient's medical information is projected or an area 380 in which the medical equipment control information is projected. That is, the augmented reality image providing unit of the present invention may further project any one or more of the patient's treatment information or the treatment equipment control information to the second augmented reality region (310).

예를 들어, 의사가 수술을 하는 도중에 제2 증강현실 영역(310)은 제2 증강현실 영역(320) 및 환자의 환부(330)과 인접하여 있으므로 용이하게 제2 증강현실 영역에 투사되는 정보를 확인할 수 있게 된다. 즉, 의사는 수술을 하는 도중에라도 환자의 MRI 이미지를 영역(370)에 제공된 환자의 진료 정보를 통하여 확인함으로써 집중력을 떨어뜨리지 않고 필요한 정보를 얻을 수 있게 된다. 또한, 영 역(380)에 제공되는 진료 장비 제어 정보를 이용하여 진료 장비의 온/오프 및 기타 장비 조작에 관한 정보를 이용함으로써 보다 편리하게 진료 및 수술을 행할 수 있게 되는 것이다. For example, since the second augmented reality region 310 is adjacent to the second augmented reality region 320 and the affected part 330 of the patient while the doctor is performing the surgery, the second augmented reality region 310 may easily display information projected on the second augmented reality region. You can check it. That is, the doctor can check the MRI image of the patient through the medical information of the patient provided in the region 370 even during the operation, thereby obtaining necessary information without losing concentration. In addition, by using the information on the medical equipment control information provided to the area 380 to use the information on / off and other equipment operation of the medical equipment it is possible to perform the treatment and surgery more conveniently.

도 4는 본 발명의 일실시예에 따른 의료 영상 제공 방법을 나타낸 동작 흐름도이다. 4 is a flowchart illustrating a medical image providing method according to an exemplary embodiment of the present invention.

도 4를 참조하면, 본 발명의 일실시예에 따른 의료 영상 제공 방법은 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득한다(S410).Referring to FIG. 4, in the medical image providing method according to an exemplary embodiment, the position information of the probe is obtained by tracking the position of the probe (S410).

또한, 본 발명의 일실시예에 따른 의료 영상 제공 방법은 상기 프로브의 위치 정보를 이용하여 환자의 환부를 포함하는 제1 증강현실 영역에 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사한다(S420).In addition, the medical image providing method according to an embodiment of the present invention projects the image information corresponding to the movement path of the probe to the first augmented reality region including the affected part of the patient by using the position information of the probe (S420). ).

이 때, 상기 영상 정보를 투사하는 단계(S420)는 기 설정된 수행 모드에 따라 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사할 수 있다. In this case, in the projecting of the image information (S420), the image information corresponding to the movement path of the probe may be projected according to a preset execution mode.

이 때, 상기 수행 모드는 쓰기 모드, 수정 모드, 삭제 모드 중 어느 하나일 수 있다. In this case, the execution mode may be any one of a write mode, a modify mode, and a delete mode.

이 때, 본 발명의 일실시예에 따른 의료 영상 제공 방법은 상기 제1 증강현실 영역과 인접한 제2 증강현실 영역에 상기 수행 모드를 설정하기 위한 메뉴를 투사하는 단계(S430)를 더 포함할 수 있다. In this case, the method for providing a medical image according to an embodiment of the present invention may further include projecting a menu for setting the execution mode to a second augmented reality region adjacent to the first augmented reality region (S430). have.

이 때, 상기 영상 정보를 투사하는 단계(S420)는 상기 제2 증강현실 영역에 투사된 상기 메뉴를 통해 상기 프로브의 위치 정보를 이용하여 상기 수행 모드를 설정할 수 있다. In this case, in the projecting of the image information (S420), the execution mode may be set using position information of the probe through the menu projected on the second augmented reality area.

이 때, 상기 영상 정보를 투사하는 단계(S420)는 기 설정된 수행 모드에 따라 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사할 수 있다. In this case, in the projecting of the image information (S420), the image information corresponding to the movement path of the probe may be projected according to a preset execution mode.

이 때, 상기 수행 모드를 설정하기 위한 메뉴를 투사하는 단계(S430)는 상기 제2 증강현실 영역에 상기 환자의 진료 정보 또는 진료 장비 제어 정보 중 어느 하나 이상을 더 투사할 수 있다. In this case, in the projecting of the menu for setting the execution mode (S430), one or more of the patient's medical information or the medical equipment control information may be further projected onto the second augmented reality region.

도 4에 도시된 각 단계는 도 4에 도시된 순서, 그 역순 또는 동시에 수행될 수 있다. Each step shown in FIG. 4 may be performed in the order shown in FIG. 4, in the reverse order, or simultaneously.

도 4에 도시된 단계에 관하여 설명되지 아니한 내용은 도 1 내지 도 3을 통하여 이미 설명한 바와 같으므로 이하 생략한다.Content not described with respect to the steps illustrated in FIG. 4 is the same as described above with reference to FIGS.

본 발명에 따른 의료 영상 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The medical image providing method according to the present invention may be implemented in the form of program instructions that may be executed by various computer means and may be recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. The medium may be a transmission medium such as an optical or metal wire, a waveguide, or the like including a carrier wave for transmitting a signal specifying a program command, a data structure, or the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, although the present invention has been described with reference to limited embodiments and drawings, the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.

본 발명은 진료 및 시술에 관련된 정보를 증강현실 영상을 이용하여 제공함으로써, 효율적으로 진료 및 시술에 관련된 정보를 제공할 수 있다.The present invention can provide information related to the treatment and the procedure efficiently by providing information related to the treatment and the procedure using the augmented reality image.

또한, 본 발명은 수술 혹은 진료 시에 환자의 환부를 표시함에 있어서 증강현실 영상을 환자의 환부에 직접 투사하여 제공함으로써 청결한 진료 및 수술 환경을 제공하고 보다 정확하게 환부를 표시할 수 있다. In addition, the present invention provides a clean medical treatment and surgical environment by providing augmented reality image by directly projecting to the affected part of the patient in displaying the affected part of the patient during surgery or medical treatment and can display the affected area more accurately.

또한, 본 발명은 환자의 환부 표시를 증강현실 영상으로 제공함으로써 삭제 및 수정이 용이하며 청결하고 편리한 진료 및 수술 환경을 제공할 수 있다.In addition, the present invention can provide a lesion display of the patient as an augmented reality image can be easily deleted and modified, and can provide a clean and convenient medical and surgical environment.

또한, 본 발명은 프로브의 위치 정보를 이용하여 영상 정보를 투사함으로써 효과적으로 의료 영상을 제공할 수 있다.In addition, the present invention can effectively provide a medical image by projecting the image information using the position information of the probe.

또한, 본 발명은 제2 증강현실 영역에서 환자의 진료 정보 또는 진료 장비 제어 정보를 제공함으로써 효율적인 의료 서비스를 제공하게 할 수 있고, 의사 등으로 하여금 집중력을 분산시키지 않고 진료 및 수술을 수행하게 할 수 있다.In addition, the present invention can provide an efficient medical service by providing the medical information or medical equipment control information of the patient in the second augmented reality region, it is possible to allow doctors and the like to perform medical treatment and surgery without dispersing concentration have.

Claims (14)

프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득하는 위치 정보 획득부;A location information acquisition unit tracking location of the probe and obtaining location information of the probe; 상기 프로브의 위치 정보를 이용하여 미리 설정된 수행 모드에 따라 환자의 환부를 포함하는 제1 증강현실 영역에 직접적으로 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사하는 증강현실 영상 제공부; 및An augmented reality image providing unit configured to project image information corresponding to a movement path of the probe directly to a first augmented reality region including an affected part of a patient according to a preset performance mode using the position information of the probe; And 상기 제1 증강현실 영역과 인접한 제2 증강현실 영역에 상기 수행 모드를 설정하기 위한 메뉴를 투사하고, 상기 환자의 진료 정보 또는 진료 장비의 제어 정보 중 적어도 하나를 더 투사하는 보조 영상 제공부An auxiliary image providing unit for projecting a menu for setting the performance mode to a second augmented reality region adjacent to the first augmented reality region and further projecting at least one of medical information of the patient or control information of the medical equipment. 를 포함하고,Including, 상기 수행 모드는 쓰기 모드, 수정 모드 또는 삭제 모드 중 적어도 하나를 포함하는 것을 특징으로 하는 의료 영상 제공 시스템.The performing mode includes at least one of a write mode, a modification mode, and a deletion mode. 삭제delete 삭제delete 삭제delete 제1항에 있어서,The method of claim 1, 상기 수행 모드는 상기 제2 증강현실 영역에 투사된 상기 메뉴를 통해 상기 프로브의 위치 정보를 기초로 설정되는 것을 특징으로 하는 의료 영상 제공 시스템.The performing mode is set on the basis of the position information of the probe through the menu projected on the second augmented reality region, medical image providing system. 삭제delete 제1항에 있어서,The method of claim 1, 상기 프로브는 빛을 방사하고, 상기 위치 정보 획득부는 상기 프로브에 의해 방사된 빛을 이용하여 상기 프로브의 위치 정보를 획득하는 것을 특징으로 하는 의료 영상 제공 시스템.The probe emits light, and the location information acquisition unit obtains the location information of the probe by using the light emitted by the probe. 프로브의 위치를 추적하여 상기 프로브의 위치 정보를 획득하는 단계;Tracking position of the probe to obtain position information of the probe; 상기 프로브의 위치 정보를 이용하여 미리 설정된 수행 모드에 따라 환자의 환부를 포함하는 제1 증강현실 영역에 직접적으로 상기 프로브의 이동 경로에 상응하는 영상 정보를 투사하는 단계;Projecting image information corresponding to a movement path of the probe directly to the first augmented reality region including the affected part of the patient according to a preset performance mode using the position information of the probe; 상기 제1 증강현실 영역과 인접한 제2 증강현실 영역에 상기 수행 모드를 설정하기 위한 메뉴를 투사하는 단계; 및Projecting a menu for setting the execution mode to a second augmented reality region adjacent to the first augmented reality region; And 상기 제2 증강 현실 영역에 상기 환자의 진료 정보 또는 진료 장비의 제어 정보 중 적어도 하나를 더 투사하는 단계Projecting at least one of medical information of the patient or control information of medical equipment to the second augmented reality area; 를 포함하고,Including, 상기 수행 모드는 쓰기 모드, 수정 모드 또는 삭제 모드 중 적어도 하나를 포함하는 것을 특징으로 하는 의료 영상 제공 방법.The performing mode includes at least one of a writing mode, a modifying mode, and a deleting mode. 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 제8항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.A computer-readable recording medium in which a program for executing the method of claim 8 is recorded.
KR1020070038951A 2007-04-20 2007-04-20 Medical image providing system and method of providing medical image using the same KR100877114B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070038951A KR100877114B1 (en) 2007-04-20 2007-04-20 Medical image providing system and method of providing medical image using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070038951A KR100877114B1 (en) 2007-04-20 2007-04-20 Medical image providing system and method of providing medical image using the same

Publications (2)

Publication Number Publication Date
KR20080113138A KR20080113138A (en) 2008-12-29
KR100877114B1 true KR100877114B1 (en) 2009-01-09

Family

ID=40370594

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070038951A KR100877114B1 (en) 2007-04-20 2007-04-20 Medical image providing system and method of providing medical image using the same

Country Status (1)

Country Link
KR (1) KR100877114B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101302120B1 (en) * 2011-11-18 2013-09-12 동국대학교 경주캠퍼스 산학협력단 The apparatus and method of augmented reality in bodily tissue with social network service moudule

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101108492B1 (en) * 2010-04-19 2012-01-31 서울대학교병원 Probe attached projector

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020082498A1 (en) 2000-10-05 2002-06-27 Siemens Corporate Research, Inc. Intra-operative image-guided neurosurgery with augmented reality visualization
US6919867B2 (en) 2001-03-29 2005-07-19 Siemens Corporate Research, Inc. Method and apparatus for augmented reality visualization
US20060176242A1 (en) * 2005-02-08 2006-08-10 Blue Belt Technologies, Inc. Augmented reality device and method
US20060293557A1 (en) * 2005-03-11 2006-12-28 Bracco Imaging, S.P.A. Methods and apparati for surgical navigation and visualization with microscope ("Micro Dex-Ray")

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020082498A1 (en) 2000-10-05 2002-06-27 Siemens Corporate Research, Inc. Intra-operative image-guided neurosurgery with augmented reality visualization
US6919867B2 (en) 2001-03-29 2005-07-19 Siemens Corporate Research, Inc. Method and apparatus for augmented reality visualization
US20060176242A1 (en) * 2005-02-08 2006-08-10 Blue Belt Technologies, Inc. Augmented reality device and method
US20060293557A1 (en) * 2005-03-11 2006-12-28 Bracco Imaging, S.P.A. Methods and apparati for surgical navigation and visualization with microscope ("Micro Dex-Ray")

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101302120B1 (en) * 2011-11-18 2013-09-12 동국대학교 경주캠퍼스 산학협력단 The apparatus and method of augmented reality in bodily tissue with social network service moudule

Also Published As

Publication number Publication date
KR20080113138A (en) 2008-12-29

Similar Documents

Publication Publication Date Title
US20220192611A1 (en) Medical device approaches
JP7341660B2 (en) Using augmented reality to aid navigation in medical procedures
KR102014355B1 (en) Method and apparatus for calculating location information of surgical device
US9918798B2 (en) Accurate three-dimensional instrument positioning
KR101759534B1 (en) Visual tracking and annotation of clinically important anatomical landmarks for surgical interventions
WO2019100212A1 (en) Ultrasonic system and method for planning ablation
RU2445007C2 (en) Superposition of coordinate systems
US10055848B2 (en) Three-dimensional image segmentation based on a two-dimensional image information
US20170128139A1 (en) Systems, methods, apparatuses, and computer-readable media for image guided surgery
JP6905535B2 (en) Guidance, tracking and guidance system for positioning surgical instruments within the patient&#39;s body
US20070238981A1 (en) Methods and apparatuses for recording and reviewing surgical navigation processes
Salcudean et al. Robot-assisted medical imaging: A review
Rassweiler et al. Surgical navigation in urology: European perspective
JP2012528649A (en) System and method for integrated biopsy and treatment
JP4717683B2 (en) Medical image display device
EP3824475B1 (en) Automatic setting of imaging parameters
US20080303818A1 (en) Medical image display apparatus and program, and recording medium therefor
US20170340297A1 (en) Method for Optimising the Position of a Patient&#39;s Body Part Relative to an Irradiation Source
KR100877114B1 (en) Medical image providing system and method of providing medical image using the same
EP3920804B1 (en) Method and system for projecting an incision marker onto a patient
US20230263577A1 (en) Automatic ablation antenna segmentation from ct image
Palmer et al. Historical perspective on image-guided sinus surgery
US11869216B2 (en) Registration of an anatomical body part by detecting a finger pose
WO2021146313A1 (en) Systems and methods for providing surgical assistance based on operational context
US20230190377A1 (en) Technique Of Determining A Scan Region To Be Imaged By A Medical Image Acquisition Device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121011

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20131002

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20141008

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20151012

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20161004

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee