KR20150113940A - 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법 - Google Patents

의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법 Download PDF

Info

Publication number
KR20150113940A
KR20150113940A KR1020150129768A KR20150129768A KR20150113940A KR 20150113940 A KR20150113940 A KR 20150113940A KR 1020150129768 A KR1020150129768 A KR 1020150129768A KR 20150129768 A KR20150129768 A KR 20150129768A KR 20150113940 A KR20150113940 A KR 20150113940A
Authority
KR
South Korea
Prior art keywords
virtual
jog shuttle
reading
input
medical image
Prior art date
Application number
KR1020150129768A
Other languages
English (en)
Inventor
민대규
장대근
Original Assignee
주식회사 인피니트헬스케어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 인피니트헬스케어 filed Critical 주식회사 인피니트헬스케어
Priority to KR1020150129768A priority Critical patent/KR20150113940A/ko
Publication of KR20150113940A publication Critical patent/KR20150113940A/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

의료 영상 판독용 가상 사용자 인터페이스 제공 방법 및 의료 영상 판독을 위한 가상 사용자 인터페이스 장치가 개시된다. 본 발명의 일 실시예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법은 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 단계; 상기 가상 조그셔틀의 움직임을 유발하는 사용자의 제1 입력을 수신하는 단계; 상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는 단계; 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 상기 확인된 상기 판독용 의료 영상의 종류에 대응하는 상기 생성된 상기 입력 신호의 기능을 확인하는 단계; 및 상기 확인된 상기 입력 신호의 기능과 상기 입력 신호를 이용하여 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리하는 단계를 포함한다.

Description

의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법 {Virtual user interface apparatus for assisting reading medical images and method of providing virtual user interface}
본 발명은 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스에 대한 것으로, 상세하게는 가상 조그셔틀을 이용한 간편한 조작을 통해 의료 영상의 판독을 용이하게 할 수 있는 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법에 관한 것이다.
컴퓨터 단층촬영(CT: Computer Tomography), 자기공명영상(MRI: Magnetic Resonance Imaging) 등의 의료 영상 장비들은 현대의학에서는 필수적인 장비가 되었으며, 의료 기술의 발전으로 인하여 환자의 생명을 다루는 의료 행위에 있어서 의료 영상 장비를 이용한 임상 진단의 역할은 더욱 비중이 높아질 전망이다.
임상 진단의 편의를 위하여 의료 영상(예를 들어 X-선 촬영 영상, CT 영상, MRI 영상 또는 초음파 영상)을 디지털 데이터로 변환하여 데이터베이스화한 다음, 서버와 연결된 대형 저장매체에 저장하여 두고, 필요 시에 각 진료실에서 컴퓨터 모니터를 통해 원하는 환자의 의료 영상을 조회할 수 있도록 하는 의료 영상 저장 전송 시스템(PACS: Picture Archiving and Communication System)이 도입되었다.
PACS는 의료 영상, 특히 방사선학적 진단 영상들을 디지털 형태로 획득(Acquisition)한 후, 고속의 통신망(Network)을 통하여 전송하고, 의료 영상은 과거의 X-ray 필름 대신에 디지털 데이터로 보관되기 때문에 판독의(radiologist)들과 임상의(clinician)들이 기존의 필름 뷰박스(Film view box) 대신에 영상 조회장치(예를 들어, PACS 뷰어)를 이용하여 환자를 진료하는 포괄적인 디지털 영상 관리 시스템 및 전송 시스템을 말한다.
의료 영상을 판독(reading)하는 이를 판독의(radiologist)라 하고, 판독의의 의견을 청취한 뒤 임상 진단을 내리는 이를 임상의(clinician)라 부르기도 한다. 판독의는 의료 영상의 판독 전문가이며, 의료 영상 장비와 의료 영상 처리 기술에 대한 전문 지식을 가지고 있지만 환자를 직접 대면하거나 상담하지 않기 때문에, 최종적인 임상 진단은 환자와 직접 대면하고 검진을 수행한 임상의의 몫이다.
현재의 병/의원에서 수행되는 영상 진단 절차는, 임상의가 환자와 상담 또는 환자를 진찰한 후 의료 영상의 촬영을 의뢰하고, 촬영된 의료 영상을 판독의에게 판독하도록 의뢰한다.
종래 의료 영상 판독 방법은 반복된 단방향의 마우스 왼쪽 버튼 드래깅(dragging)을 통한 방법으로, 사용자는 판독하고자 하는 영상에 단방향 마우스 왼쪽 버튼 드래깅 작업을 상하 방향으로 끊임없이 반복해야 한다. 예를 들어, MPR(Multi-Planar Reformation) 또는 CPR(Curved Planar Reformation) 영상의 경우 단방향 마우스 왼쪽 버튼 드래깅 작업으로 영상을 슬라이싱(slicing) 해 가며 판독하고, 심혈관이나 대장 영상을 가상 내시경(Endoscope) 또는 밴드(Band) 영상으로 판독할 경우 단방향 마우스 왼쪽 버튼 드래깅 작업으로 영상을 네비게이션(Navigation) 해 가며 판독한다. 최근 CT(Computed Tomography) 영상 기술의 발달로 해상도가 정밀해지면서 보다 많은 수의 의료 영상이 획득되어 MPR 영상이 많아지는 추세이고, 심혈관 또는 대장이 긴 영상으로 획득된 경우 가상 내시경 / 밴드 뷰에서 영상을 판독할 시에 보다 많은 단방향 마우스 조작을 통한 판독 작업이 요구되므로 이는 사용자의 신체 피로를 가중시키게 되며 판독 효율을 저하시키게 된다.
의료 영상 판독과는 관련성이 떨어지지만, 의료 영상과 관련된 시스템에서 사용자에게 조작의 편의를 제공하기 위한 선행기술인 한국공개특허 제10-2013-0058635호는 디지털 방사선 촬영 시스템의 제어 인터페이스에 관한 것으로, 환자의 촬영 자세에 따른 시스템의 동작 메커니즘을 튜브의 오퍼레이터 콘솔에 무한 회전 가능하게 설치된 조그셔틀에 의해 선택 및 미세 조정할 수 있고, 사용자에게 더욱 손쉽고 간단한 사용자 인터페이스를 제공할 수 있으며, 미세 제어 시에도 조그셔틀 하나로 모든 포지션에 대한 원하는 수치만큼 빠르게 제어가 가능한 기술이다.
조그셔틀 인터페이스는 흔히 회전의 방향(시계 방향, 반시계 방향)을 전진, 후진 등 상반되는 방향의 오퍼레이션과 대응시키거나, 또는 고정된 명령에 대응하는 복수 개의 섹션과 결합되어 메뉴를 선택할 수 있도록 설계된다. 상기 선행기술은 디지털 방사선 촬영 시스템에서 물리적인 조그셔틀을 이용하는 것으로, 고정된 명령에 대응하는 복수 개의 섹션과 결합된 물리적인 조그셔틀을 이용하여 방사선 촬영 시스템의 제어 메뉴를 선택할 수 있도록 구현되었다.
그러나 의료 영상을 판독하는 데에는 보다 복잡한 영상 조작(operation)이 요구된다. 의료 영상의 종류마다 요구되는 영상 조작이 상이하며, 요구되는 영상 조작의 해상도 또한 상이하다. 따라서, 의료 영상을 판독하는데 있어서 간편한 조작을 통해 판독 효율을 향상시킬 수 있는 사용자 인터페이스에 대한 필요성이 대두된다.
한국공개특허 제10-2013-0058635호 "디지털 방사선 촬영 시스템의 제어 인터페이스" (공개일: 2013. 06. 04)
본 발명은 상기와 같은 종래 기술의 문제점을 해결하고자 도출된 것으로서, 간편한 조작을 통해 의료 영상의 판독 효율을 향상시킬 수 있는 가상 사용자 인터페이스를 제공하는 것을 목적으로 한다.
또한, 본 발명은 판독하고자 하는 의료 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션을 의료 영상의 종류별로 적응적(adaptive)으로 처리함으로써, 다양한 종류의 판독용 의료 영상을 간편한 조작을 통해 용이하게 판독할 수 있도록 지원하는 가상 사용자 인터페이스 장치를 제공하는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법은 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 단계; 상기 가상 조그셔틀의 움직임을 유발하는 사용자의 제1 입력을 수신하는 단계; 상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는 단계; 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 상기 확인된 상기 판독용 의료 영상의 종류에 대응하는 상기 생성된 상기 입력 신호의 기능을 확인하는 단계; 및 상기 확인된 상기 입력 신호의 기능과 상기 입력 신호를 이용하여 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리하는 단계를 포함한다.
상기 제1 입력을 수신하는 단계는 상기 가상 조그셔틀 상에서의 커서의 드래깅에 의해 상기 제1 입력을 수신할 수도 있고, 상기 가상 조그셔틀 상에 설정된 기능 버튼을 이용하여 상기 가상 조그셔틀 영역 외부에서의 커서의 드래깅에 의해 상기 제1 입력을 수신할 수도 있다.
본 발명의 일 실시예에 따른 방법은 상기 가상 조그셔틀 상에서 마우스의 휠을 이용한 상기 사용자의 제2 입력을 통해 상기 가상 조그셔틀의 움직임에 대한 민감도를 설정하는 단계를 더 포함하고, 상기 입력 신호를 생성하는 단계는 상기 설정된 민감도와 상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 상기 입력 신호를 생성할 수 있다.
상기 가상 조그셔틀을 오버레이시켜 디스플레이하는 단계는 상기 제1 입력을 수신하기 위한 제1 영역과 상기 제1 영역에 의해 둘러 싸인 원형의 제2 영역을 포함하는 상기 가상 조그셔틀을 디스플레이하고, 상기 가상 조그셔틀의 상기 제2 영역에 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 추가 기능을 설정하는 단계를 더 포함할 수 있다.
상기 설정하는 단계는 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰(view) 영상인 경우 가상 카메라의 각도를 조절하는 기능을 상기 추가 기능으로 설정하고, 상기 처리하는 단계는 상기 제2 영역을 통한 상기 사용자의 제3 입력에 대응하는 입력 신호가 수신되면 상기 제3 입력에 대응하는 입력 신호의 각도만큼 상기 가상 카메라의 각도가 조절된 가상 내시경 뷰 영상을 상기 디스플레이 영역에 디스플레이할 수 있다.
상기 처리하는 단계는 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 MPR(Multi-Planar Reformation) 뷰 영상인 경우 상기 입력 신호에 대응하는 슬라이스 영상을 상기 디스플레이 영역에 디스플레이하고, 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 CPR(Curved Planar Reformation) 뷰 영상인 경우 상기 디스플레이된 판독용 의료 영상을 상기 입력 신호에 대응되게 회전시키며, 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰 영상, 밴드 뷰 영상, 3차원 에어웨이(airway) 뷰 영상인 경우 상기 입력 신호에 대응하는 위치만큼 네비게이션(navigation)된 영상을 상기 디스플레이 영역에 디스플레이할 수 있다.
본 발명의 일 실시예에 따른 의료 영상 판독을 위한 가상 사용자 인터페이스 장치는 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 디스플레이부; 상기 가상 조그셔틀의 움직임을 유발하는 사용자의 제1 입력을 수신하는 수신부; 상기 제1 입력에 의해 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는 생성부; 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 상기 확인된 상기 판독용 의료 영상의 종류에 대응하는 상기 생성된 상기 입력 신호의 기능을 확인하는 기능 확인부; 및 상기 확인된 상기 입력 신호의 기능과 상기 입력 신호를 이용하여 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리하는 영상 처리부를 포함한다.
본 발명에 따르면, 판독 의료 영상에 오버레이된 가상 조그셔틀의 드래깅에 의한 반복 모션을 통해 연속적인 MPR 영상의 슬라이싱, CPR 영상의 회전 또는 로테이션, 가상 내시경 및 밴드 영상의 네비게이션 조작이 가능하고, 따라서 마우스 왼쪽 버튼을 이용한 반복된 단방향 드래깅 작업보다 신체 피로도를 줄여 의료 영상 판독 효율을 향상시킬 수 있다.
또한, 본 발명에 따르면, 가상 조그셔틀의 움직임에 의해 생성되는 입력 신호에 대한 동작을 판독하고자 하는 의료 영상의 종류에 따라 적응적으로 처리하기 때문에 다양한 종류의 의료 영상에 대한 판독 효율을 향상시킬 수 있으며, 따라서 모든 종류의 판독 의료 영상에 적용할 수 있다.
즉, 본 발명에 따르면 판독 의료 영상의 종류에 기초하여 입력 신호를 해석(translate)함으로써 입력 신호의 기능(function)을 확인 또는 식별(identify)하고, 식별된 입력 신호의 기능에 대한 동작 예를 들어, 슬라이스 영상의 이동, 영상 회전, 특정 위치로의 네비게이션 등 판독 의료 영상에 따라 적절한 기능을 수행하여 판독 효율을 향상시킬 수 있다.
또한, 본 발명에 따른 가상 조그셔틀에 가상 내시경 영상과 같은 특정 의료 영상에 대해, 가상 카메라의 각도를 조절할 수 있는 추가 기능을 제공함으로써, 특정 의료 영상에서의 판독 효율을 더욱 더 향상시킬 수 있다.
이와 같이, 본 발명에 따르면, 다양한 의료 영상에 대한 판독 효율을 향상시킴으로써, 의료 영상 판독에 대한 신뢰성을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법에 대한 동작 흐름도를 나타낸 것이다.
도 2는 도 1에 도시된 가상 사용자 인터페이스 제공 방법에 대한 일 실시예의 추가 동작 흐름도를 나타낸 것이다.
도 3은 화면에 디스플레이되는 판독용 의료 영상과 가상 조그셔틀에 대한 예시도를 나타낸 것이다.
도 4는 가상 조그셔틀의 움직임을 유발하는 사용자의 입력에 대한 예시도를 나타낸 것이다.
도 5는 가상 조그셔틀의 움직임에 대한 민감도를 설정하는 과정을 설명하기 위한 예시도를 나타낸 것이다.
도 6은 심장 가상 내시경 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 7은 대장 가상 내시경 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 8은 심장 CPR 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 9는 MPR 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 10은 대장 밴드 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 11은 대장 3D 에어웨이 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것이다.
도 12는 본 발명의 일 실시예에 따른 의료 영상 판독을 위한 가상 사용자 인터페이스 장치에 대한 구성을 나타낸 것이다.
상기 목적 외에 본 발명의 다른 목적 및 특징들은 첨부 도면을 참조한 실시 예에 대한 설명을 통하여 명백히 드러나게 될 것이다.
본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
이하에서는, 본 발명의 일 실시 예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법 및 의료 영상 판독을 위한 가상 사용자 인터페이스 장치를 첨부된 도 1 내지 도 12를 참조하여 상세히 설명한다.
본 발명은 의료 영상 판독 시 기존의 마우스 왼쪽 버튼을 이용한 반복된 단방향 드래깅 작업에 의한 문제점을 개선하기 위한 것으로, 가상 조그셔틀을 이용하여 다양한 의료 영상을 판독함으로써, 간편한 조작으로 판독 효율을 향상시키고자 하는 것이다.
도 1은 본 발명의 일 실시예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법에 대한 동작 흐름도를 나타낸 것이다.
도 1을 참조하면, 본 발명에 따른 의료 영상 판독 방법은 판독용 의료 영상에 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이한다(S110).
여기서, 판독용 의료 영상은 MPR(Multi-Planar Reformation) 뷰 영상, CPR(Curved Planar Reformation) 뷰 영상, 가상 내시경(endoscope) 뷰 영상, 밴드 뷰 영상, 3차원 에어웨이(airway) 뷰 영상 등 다양한 영상을 포함할 수 있으며, MPR 뷰 영상은 액시얼(Axial) 영상, 코로날(Coronal) 영상, 새지탈(Sagittal) 영상 뿐만 아니라 오블리크(Oblique) 영상을 포함할 수 있다.
단계 S110은 도 3에 도시된 일 예와 같이, 화면에 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 조그셔틀(300)을 오버레이시켜 디스플레이할 수 있으며, 도 3에서의 가상 조그셔틀 크기는 설명의 편의를 위해 확대하여 도시한 것이다.
도 3에 도시된 바와 같이, 가상 조그셔틀(300)은 커서를 이용한 사용자의 입력에 의해 가상 조그셔틀이 드래깅되는 제1 영역(310), 제1 영역에 의해 둘러 싸인 원형의 제2 영역(320)을 포함하고, 제1 영역에는 가상 조그셔틀의 움직임에 대한 민감도를 시각적으로 나타내는 눈금(322)과 가상 조그셔틀 외부 영역에서 가상 조그셔틀을 드래깅할 수 있는 기능 버튼(321)을 포함한다. 그리고, 제2 영역(320)은 의료 영상을 판독하는데 있어서 필요한 추가적인 기능을 제공할 수 있으며, 제2 영역에서의 추가 기능은 사용자 인터페이스를 이용하여 사용자에 의해 설정될 수도 있고, 본 발명을 제공하는 기술자 또는 사업자에 의해 미리 설정될 수도 있다.
이 때, 제2 영역에 설정된 추가 기능은 가상 내시경 뷰 영상에서 화면에 디스플레이되는 가상 내시경 영상을 촬영한 가상 카메라의 각도를 조절하는 기능일 수 있다. 즉, 판독 의료 영상이 심장 또는 대장 가상 내시경 뷰 영상인 경우 제2 영역에서의 사용자 입력을 통해 가상 카메라의 각도를 상하좌우로 조절함으로써, 각도가 조절된 가상 내시경 뷰 영상을 제공할 수 있다.
이런 가상 조그셔틀에 대한 기능에 대해서는 도 2 내지 도 11를 이용하여 상세히 설명한다.
단계 S110에 의해 판독용 의료 영상에 가상 조그셔틀이 오버레이되어 디스플레이되면, 가상 조그셔틀을 이용하여 가상 조그셔틀의 움직임을 유발하는 사용자의 입력을 수신한다(S120).
여기서, 가상 조그셔틀의 움직임을 유발하는 사용자의 입력은 키보드, 마우스, 터치 스크린, 터치 패드, 트랙볼 등을 이용한 입력일 수 있으며, 이 뿐만 아니라 가상 조그셔틀을 드래깅할 수 있는 모든 입력 장치를 이용한 사용자의 입력일 수 있다.
가상 조그셔틀의 움직임을 유발하는 사용자의 입력은 도 4a에 도시된 일 예와 같이, 가상 조그셔틀 상에서의 드래깅을 통해 수신할 수도 있고, 도 4b에 도시된 일 예와 같이 가상 조그셔틀의 외부 영역에서의 드래깅을 통해 수신할 수도 있다.
도 4a와 도 4b는 가상 조그셔틀의 제1 영역에 구비된 기능 버튼의 선택 또는 눌림 여부에 따른 것으로, 도 4a는 가상 조그셔틀의 기능 버튼(321)을 누르지 않은 상태에서 사용자가 가상 조그셔틀의 제1 영역 상에서 커서(410)를 이용하여 시계 방향(go forward)으로 드래깅하거나 반시계 방향(go backward)으로 드래깅함으로써, 사용자의 입력을 수신하는 것이다.
도 4b는 가상 조그셔틀의 기능 버튼(321)을 누른 상태에서 가상 조그셔틀의 외부 영역에서 커서(410)를 이용하여 시계 방향(go forward)으로 드래깅하거나 반시계 방향(go backward)으로 드래깅함으로써, 사용자의 입력을 수신하는 것으로, 도시된 바와 같이 커서가 가상 조그셔틀 영역을 벗어나더라도 가상 조그셔틀의 중심에서 방사형으로 그은 선과 커서가 만나는 선분이 가상 조그셔틀의 움직임 정도를 결정한다. 즉, 커서가 가상 조그셔틀의 외부 영역의 제1 점(420)에 위치하면 제1 점(420)은 가상 조그셔틀의 중심과 제1 점을 연결한 선과 가상 조그셔틀의 제1 영역에서 만나는 제2 점(430)에 대응한다. 물론, 도 4b의 방식에 의한 가상 조그셔틀의 드래깅에서 도 4a의 방식에 의한 가상 조그셔틀의 드래깅으로 변경하기 위해서는 기능 버튼을 해지하면 된다. 본 발명의 보다 구체화된 실시예에 따르면, 기능 버튼(321)이 사용자 입력에 의하여 눌러진 것으로 인식된 상태에서 커서(410)가 가상 조그셔틀의 외부 영역으로 벗어나는 실시예도 가능하고, 또 다른 실시예에 따르면 기능 버튼(321)이 사용자 입력에 의하여 클릭된 것으로 인식되면 기능 버튼(321), 즉 외부 드래깅 기능이 활성화되고 다시 한번 사용자 입력에 의하여 클릭된 것으로 인식되면 기능 버튼(321), 즉 외부 드래깅 기능이 해제되는, 이른바 토글(toggle) 타입의 인터페이스로도 구현 가능하다.
도 4b를 이용하여 본 발명의 또 다른 구체화된 실시예를 설명하면, 기능 버튼(321)이 활성화된 것으로 인식된 상태에서는, 커서(410)가 가상 조그셔틀의 외부 영역으로 벗어나 움직일 때, 즉, 클릭된 채로 움직이는 이른바 드래깅(dragging) 상태 뿐만 아니라 클릭되지 않은 상태에서 단순히 커서(410)가 가상 조그셔틀의 외부 영역으로 벗어나 움직이는 경우에도 가상 조그셔틀의 외부 영역에서 이루어지는 커서(410)의 움직임이 가상 조그셔틀 내의 움직임으로 변환/환산하여 추적된다.
도 4a와 도 4b에서 도시한 가상 조그셔틀의 시계 방향으로의 드래깅(go forward)는 판독용 의료 영상에 따라 포워드 네비게이션 이동(forward navigation move)을 의미할 수도 있고 포워드 슬라이싱 이동(forward slicing move)를 의미할 수도 있으며 포워드 로테이션(forward rotation)을 의미할 수도 있다. 마찬가지로 가상 조그셔틀의 반시계 방향으로의 드래깅(go backward)는 판독용 의료 영상에 따라 백워드 네비게이션 이동(backward navigation move)을 의미할 수도 있고 백워드 슬라이싱 이동(backward slicing move)를 의미할 수도 있으며 백워드 로테이션(backward rotation)을 의미할 수도 있다. 본 발명에서 사용하는 포워드와 백워드는 네비게이션 이동의 경우 앞으로의 네비게이션과 뒤로의 네비게이션일 수 있고, 슬라이싱 이동의 경우 제1 방향과 제1 방향과 반대되는 제2 방향으로의 슬라이스 영상 이동일 수 있으며, 로테이션인 경우 우측 방향으로의 회전과 좌측 방향으로의 회전 또는 위쪽 방향으로의 회전 또는 아래쪽 방향으로의 회전일 수 있다. 물론, 포워드와 백워드에 대한 정의는 이에 한정되지 않으며, 상황에 따라 포워드와 백워드의 개념이 반대로 적용될 수도 있다.
다시 도 1을 참조하면, 단계 S120에 의해 사용자의 입력이 수신되면, 사용자의 입력에 의해 가상 조그셔틀의 움직임이 발생되고(또는 유발되고), 이렇게 발생된 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성한다(S130).
여기서, 단계 S130에서 생성되는 가상 조그셔틀의 움직임에 대응하는 입력 신호는 미리 설정된 가상 조그셔틀의 움직임에 대한 민감도에 대응하는 복수의 입력 신호들 또는 입력 신호들의 스트림의 길이일 수도 있고, 입력 신호들의 개수에 대한 정보를 포함하는 입력 신호일 수도 있다. 가상 조그셔틀의 움직임에 대한 민감도에 대응하는 복수의 입력 신호들 각각은 미리 결정된 크기만큼의 슬라이싱 이동, 네비게이션 이동, 로테이션에 대한 정보를 포함하거나 이를 의미하는 신호일 수 있다.
앞서 도 4b에서 설명된 복수의 실시예에 따르면 기능 버튼(321)이 활성화된 경우 (한번 클릭되었거나 계속 누른 상태를 유지하는 경우 모두) 커서(410)가 가상 조그셔틀의 외부 영역에서 움직이면 (누른 상태를 유지하는 경우이거나, 누르지 않은 상태에서 움직이는 경우 모두) 본 발명의 가상 인터페이스 장치는 가상 조그셔틀의 외부 영역에서 이루어지는 커서(410)의 움직임을 가상 조그셔틀의 외곽선에 투영하여 가상 조그셔틀 내에서의 움직임으로 변환/환산할 수 있다.
이 때 변환/환산된 커서(410)의 움직임에 대한 신호가 단계 S130에서 입력 신호로 생성될 수 있다.
단계 S130에 의해 입력 신호가 생성되면, 화면에 디스플레이된 판독용 의료 영상의 종류를 확인하고 확인된 판독용 의료 영상의 종류에 대한 입력 신호의 기능을 확인한다(S140, S150).
예컨대, 생성된 입력 신호가 MPR 뷰 영상에 대한 입력 신호인지, CPR 뷰 영상에 대한 입력 신호인지, 가상 내시경 뷰 영상에 대한 입력 신호인지, 밴드 뷰 영상에 대한 입력 신호인지 등을 확인한 후 확인된 판독용 의료 영상의 종류에 기초하여 입력 신호를 해석(translate)함으로써 입력 신호의 기능(function)을 확인/식별(identify)한다. 이와 같은 과정을 수행하는 것은 의료 영상의 종류에 따라 디스플레이 영역에 디스플레이된 판독용 의료 영상을 처리하는 오퍼레이션이 달라지기 때문이다.
단계 S150에 의해 확인된 입력 신호의 기능을 이용하여 가상 조그셔틀의 움직임에 의해 생성된 입력 신호에 대한 판독용 의료 영상의 오퍼레이션(operation)을 처리한다(S160).
단계 S160에 대해 도 6 내지 도 11을 참조하여 판독용 의료 영상의 종류에 따른 오퍼레이션 처리를 설명하면 다음과 같다.
도 6과 도 7은 심장 가상 내시경(Cardiac Endoscope) 뷰 영상과 대장 가상 내시경(Colonoscopy Endoscope) 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것으로, 도 6과 도 7에 도시된 바와 같이, 가상 조그셔틀(300)이 시계 방향으로 이동하면 현재 디스플레이 영역에 디스플레이된 가상 내시경 뷰 영상을 가상 조그셔틀의 움직임 정도에 대응하는 위치만큼 네비게이션된 심장 가상 내시경 뷰 영상과 대장 가상 내시경 뷰 영상으로 변경하여 디스플레이한다.
또한, 화면에 디스플레이된 가상 내시경 뷰 영상을 가상 조그셔틀의 제2 영역에 설정된 추가 기능을 이용함으로써, 현재 디스플레이된 가상 내시경 뷰 영상을 가상 카메라의 각도 예를 들어, 상하좌우의 각도가 조절된 가상 내시경 뷰 영상으로 변경하여 디스플레이할 수도 있다.
이 때, 가상 조그셔틀의 움직임 정도에 대응하는 위치는 가상 조그셔틀에 대해 설정된 민감도에 따라 상이할 수 있으며, 이에 대해서는 도 2와 도 5를 이용하여 설명할 것이다.
물론, 본 발명은 현재 디스플레이된 판독용 의료 영상을 가상 조그셔틀의 움직임 정도에 대응하는 위치만큼에 네비게이션된 판독용 의료 영상으로 바로 변경할 수도 있지만, 가상 조그셔틀의 드래깅에 따라 복수의 입력 신호들이 생성되는 경우 생성된 입력 신호들 각각에 해당하는 만큼의 위치로 네비게이션된 판독용 의료 영상을 연속적으로 디스플레이할 수도 있다. 이와 같은 기능은 당연히 가상 내시경 영상에 한정되지 않으며, 본 발명이 적용될 수 있는 모든 의료 영상에 적용되는 것이 자명하다.
도 8은 심장 CPR 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것으로, 도 8에 도시된 바와 같이, 가상 조그셔틀(300)이 시계 방향으로 이동하면 현재 디스플레이 영역에 디스플레이된 심장 CPR 뷰 영상을 가상 조그셔틀의 움직임 정도에 대응하는 각도만큼 시계 방향으로 회전된 심장 CPR 뷰 영상으로 변경하여 디스플레이한다.
이 때, 가상 조그셔틀의 움직임 정도에 대응하는 각도 또한 미리 설정된 가상 조그셔틀의 민감도에 따라 달라질 수 있으며, 이런 가상 조그셔틀의 민감도는 사용자에 의해 재설정될 수 있다.
도 9는 MPR 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것으로, 도 9에 도시된 바와 같이, 가상 조그셔틀(300)이 시계 방향으로 이동하면 현재 디스플레이 영역에 디스플레이된 MPR 뷰 영상 예를 들어, 제1 슬라이스 영상을 가상 조그셔틀의 움직임 정도에 대응하는 MPR 뷰 영상 예를 들어, 제2 슬라이스 영상으로 변경하여 디스플레이한다.
도 10은 대장 밴드 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것으로, 도 10에 도시된 바와 같이, 가상 조그셔틀(300)이 시계 방향으로 이동하면 현재 디스플레이 영역에 디스플레이된 밴드 뷰 영상을 가상 조그셔틀의 움직임 정도에 대응하는 위치만큼 네비게이션된 밴드 뷰 영상으로 변경하여 디스플레이한다.
마찬가지로, 도 11은 대장 3D 에어웨이 뷰 영상에서 가상 조그셔틀의 움직임에 대한 오퍼레이션의 일 예를 나타낸 것으로, 도 11에 도시된 바와 같이, 가상 조그셔틀(300)이 시계 방향으로 이동하면 현재 디스플레이 영역에 디스플레이된 대장 3D 에어웨이 뷰 영상을 가상 조그셔틀의 움직임 정도에 대응하는 위치만큼 네비게이션된 대장 3D 에어웨이 뷰 영상으로 변경하여 디스플레이한다.
이와 같이, 본 발명에 따른 의료 영상 판독 방법은 판독하고자 하는 의료 영상의 종류에 따라 가상 조그셔틀의 움직임에 의해 생성되는 입력 신호의 기능을 적응적으로 적용함으로써, 간편한 조작을 통해 다양한 의료 영상을 판독하기에 용이하게, 사용자의 피로도를 줄여 판독 효율을 향상시킬 수 있다.
이런 본 발명에 따른 방법은 가상 조그셔틀의 움직임에 대한 민감도를 조절할 수 있으며, 이에 대해 도 2와 도 5를 참조하여 설명한다.
도 2는 도 1에 도시된 가상 사용자 인터페이스 제공 방법에 대한 일 실시예의 추가 동작 흐름도를 나타낸 것으로, 가상 조그셔틀의 민감도를 설정하는 과정에 대한 동작 흐름도이다.
도 2를 참조하면, 단계 S110에 의해 판독용 의료 영상에 가상 조그셔틀이 오버레이되어 디스플레이된 상태에서, 민감도 조절을 위한 가상 조그셔틀 영역에서 사용자의 입력을 수신한다(S210).
여기서, 민감도 조절을 위한 가상 조그셔틀 영역은 도 5에 도시된 바와 같이, 가상 조그셔틀의 제1 영역일 수 있으며, 민감도 조절을 위한 사용자의 입력은 커서(510)를 가상 조그셔틀의 제1 영역에 위치시킨 상태에서 사용자에 의한 휠 입력 또는 민감도 값의 입력 등을 포함할 수 있다.
그리고 단계 S210은 판독용 의료 영상이 가상 조그셔틀과 오버레이된 시점에 수행될 수도 있지만, 이에 한정 하지 않으며 본 발명을 수행하는 어느 과정에서도 수행될 수 있고 이는 이 기술 분야의 사상을 가지는 당업자에게 있어서 자명하다.
단계 S210에 의한 사용자의 입력 즉, 휠의 입력에 대응하는 민감도의 변화를 가상 조그셔틀 상에서 시각적으로 디스플레이한다(S220).
예컨대, 도 5에 도시된 바와 같이, 눈금(322)과 눈금 사이의 간격으로 민감도를 시각적으로 디스플레이하고, 눈금과 눈금 사이의 간격이 좁을수록 민감도가 높은 것으로, 도 5a의 민감도(민감도1)보다 도 5b의 민감도(민감도2)가 높은 것이다.
여기서, 눈금(322) 간의 간격은 커서(510)를 움직이는 사용자의 움직임 민감도를 의미하는 것으로, 눈금 간의 간격이 좁을수록 가상 조그셔틀의 움직임이 조금만 이루어져도 입력 신호들의 스트림 또는 입력 신호들의 개수가 많아지고 눈금 간의 간격이 넓을수록 가상 조그셔틀의 움직임이 많이 이루어져도 입력 신호들의 스트림 또는 입력 신호들의 개수가 작아지는 것을 의미한다. 즉, 가상 조그셔틀의 민감도를 높이기 위해서는 눈금 간의 간격을 좁게 만들고 가상 조그셔틀의 민감도를 낮추기 위해서는 눈금 간의 간격을 넓게 만들면 된다. 물론 상황에 따라 민감도와 눈금 간의 간격이 상술한 설명과 반대의 관계를 가질 수도 있다.
시각적으로 디스플레이된 눈금 간의 간격을 통해 민감도가 결정되면 사용자에 의해 결정된 민감도를 가상 조그셔틀의 움직임에 대한 민감도로 설정한다(S230).
도 12는 본 발명의 일 실시예에 따른 의료 영상 판독을 위한 가상 사용자 인터페이스 장치에 대한 구성을 나타낸 것이다.
도 12를 참조하면, 본 발명에 따른 장치(1200)는 디스플레이부(1210), 수신부(1220), 생성부(1230), 기능 확인부(1240), 영상 처리부(1250), 민감도 설정부(1260) 및 기능 설정부(1270)를 포함한다.
디스플레이부(1210)는 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 한다.
이 때, 디스플레이부(1210)는 판독용 의료 영상이 디스플레이되는 화면 뿐만 아니라 화면의 디스플레이를 제어하는 프로세서의 일부 또는 프로세서를 포함할 수 있다.
가상 조그셔틀은 도 3에서 설명한 바와 같이, 커서를 이용한 사용자의 입력에 의해 가상 조그셔틀이 드래깅되는 제1 영역, 제1 영역에 의해 둘러 싸인 원형의 제2 영역을 포함하고, 제1 영역에는 가상 조그셔틀의 움직임에 대한 민감도를 시각적으로 나타내는 눈금과 가상 조그셔틀 외부 영역에서 가상 조그셔틀을 드래깅할 수 있는 기능 버튼을 포함한다. 그리고, 제2 영역은 의료 영상을 판독하는데 있어서 필요한 추가적인 기능을 제공할 수 있으며, 일 예로 가상 내시경 뷰 영상에서 화면에 디스플레이되는 가상 내시경 영상을 촬영한 가상 카메라의 각도를 조절하는 기능일 수 있다. 즉, 판독 의료 영상이 심장 또는 대장 가상 내시경 뷰 영상인 경우 제2 영역에서의 사용자 입력을 통해 가상 카메라의 각도를 상하좌우로 조절함으로써, 각도가 조절된 가상 내시경 뷰 영상을 제공할 수 있다.
수신부(1220)는 디스플레이부(1210)에 디스플레이된 가상 조그셔틀의 움직임을 유발하는 사용자의 입력을 수신한다.
여기서, 사용자의 입력은 키보드, 마우스, 터치 스크린, 터치 패드, 트랙볼 등을 이용한 입력일 수 있으며, 가상 조그셔틀 상에서 커서의 드래깅에 의해 사용자의 입력이 수신될 수 있다.
이 때, 수신부(1220)는 가상 조그셔틀 상에서의 커서의 드래깅에 의한 사용자의 입력을 수신할 수도 있으며, 가상 조그셔틀 영역 외부에서의 커서의 드래깅에 의한 사용자의 입력을 수신할 수도 있는데, 가상 조그셔틀 영역 외부에서의 사용자 입력은 가상 조그셔틀의 제1 영역에 구비된 기능 버튼이 선택된 경우에 이루어질 수 있다.
생성부(1230)는 수신부(1220)로 수신되는 사용자의 입력에 의해 유발되는 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성한다.
여기서, 생성부(1230)에 의해 생성되는 입력 신호는 미리 설정된 가상 조그셔틀의 움직임에 대한 민감도에 대응하는 복수의 입력 신호들 또는 입력 신호들의 스트림의 길이일 수도 있고, 입력 신호들의 개수에 대한 정보를 포함하는 입력 신호일 수도 있다.
기능 확인부(1240)는 생성부(1230)에 의해 생성된 입력 신호의 기능을 확인하는 구성으로, 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 확인된 판독용 의료 영상의 종류를 이용하여 생성부에 의해 생성된 입력 신호의 기능을 확인한다.
즉, 기능 확인부(1240)는 생성된 입력 신호가 MPR 뷰 영상에 대한 입력 신호인지, CPR 뷰 영상에 대한 입력 신호인지, 가상 내시경 뷰 영상에 대한 입력 신호인지, 밴드 뷰 영상에 대한 입력 신호인지 등을 확인한 후 확인된 판독용 의료 영상의 종류에 기초하여 입력 신호를 해석(translate)함으로써 입력 신호의 기능(function)을 확인/식별(identify)한다.
영상 처리부(1250)는 기능 확인부(1240)에 의해 확인된 입력 신호의 기능과 입력 신호를 이용하여 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리한다.
예컨대, 영상 처리부(1250)는 디스플레이 영역에 디스플레이된 판독용 의료 영상이 MPR 뷰 영상인 경우 현재 디스플레이된 슬라이스 영상을 입력 신호에 대응하는 슬라이스 영상으로 변경하여 디스플레이하고, 디스플레이 영역에 디스플레이된 판독용 의료 영상이 CPR 뷰 영상인 경우 CPR 뷰 영상을 입력 신호에 대응되게 일정 방향으로 예를 들어, 시계 방향 또는 반시계 방향으로 회전시키며, 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰 영상, 밴드 뷰 영상, 3차원 에어웨이(airway) 뷰 영상인 경우 디스플레이된 판독용 의료 영상을 입력 신호에 대응하는 위치만큼 네비게이션된 의료 영상으로 변경하여 디스플레이한다. 즉, 영상 처리부(1250)는 이와 같은 오퍼레이션 처리를 통한 판독용 의료 영상이 디스플레이부(1210)에 디스플레이되도록 처리할 수 있다.
민감도 설정부(1260)는 가상 조그셔틀의 민감도를 설정하는 구성으로, 가상 조그셔틀의 제1 영역 상에서 마우스의 휠 또는 다른 입력 장치를 이용한 사용자의 입력을 통해 민감도를 설정할 수 있다.
민감도 설정부(1260)에 의해 설정된 민감도는 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는데 영향을 줄 수 있다. 즉, 생성부(1230)는 민감도 설정부(1260)에 의해 설정된 민감도와 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성한다.
여기서, 가상 조그셔틀의 민감도는 커서를 움직이는 사용자의 움직임 민감도를 의미하는 것으로, 민감도가 높을수록 가상 조그셔틀의 움직임이 조금만 이루어져도 입력 신호들의 스트림 또는 입력 신호들의 개수가 많아지고 민감도가 낮을수록 가상 조그셔틀의 움직임이 많이 이루어져도 입력 신호들의 스트림 또는 입력 신호들의 개수가 작아지는 것을 의미한다.
기능 설정부(1270)는 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 추가 기능을 설정하는 구성으로, 가상 조그셔틀의 제2 영역에 대한 기능을 설정한다.
이 때, 기능 설정부(1270)는 가상 조그셔틀의 제2 영역에서 사용자 인터페이스를 직접 제공함으로써, 추가 기능을 설정할 수도 있다.
예를 들어, 기능 설정부(1270)는 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경 뷰 영상인 경우 가상 카메라의 각도를 조절하는 기능을 추가 기능으로 설정할 수 있다.
물론, 영상 처리부(1250)는 가상 내시경 뷰 영상이 디스플레이되고 기능 설정부(1270)에 의해 설정된 추가 기능에 의한 입력 신호가 생성되면 생성된 입력 신호에 대응하는 각도만큼 가상 카메라의 각도가 조절된 가상 내시경 뷰 영상이 디스플레이 영역에 디스플레이되도록 판독용 의료 영상을 처리한다.
본 발명의 일 실시예에 따른 의료 영상 판독용 가상 사용자 인터페이스 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.

Claims (13)

  1. 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 단계;
    상기 가상 조그셔틀의 움직임을 유발하는 사용자의 제1 입력을 수신하는 단계;
    상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는 단계;
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 상기 확인된 상기 판독용 의료 영상의 종류에 기초하여 상기 입력 신호를 해석함으로써 상기 확인된 상기 판독용 의료 영상의 종류에 대응하는 상기 생성된 상기 입력 신호의 기능을 식별하는 단계; 및
    상기 판독용 의료 영상의 종류에 대응하여 식별된 상기 입력 신호의 기능과 상기 입력 신호를 이용하여 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리하는 단계;
    를 포함하고,
    상기 처리하는 단계는
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 MPR(Multi-Planar Reformation) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 제1 슬라이스 영상을 상기 입력 신호에 대응하는 제2 슬라이스 영상으로 변경시켜 디스플레이하고,
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 CPR(Curved Planar Reformation) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 상기 CPR 뷰 영상을 상기 입력 신호에 대응되는 각도만큼 회전시켜 디스플레이하며,
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰 영상, 밴드 뷰 영상, 3차원 에어웨이(airway) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상을 상기 입력 신호에 대응하는 위치만큼 네비게이션(navigation)된 판독용 의료 영상으로 변경시켜 상기 디스플레이 영역에 디스플레이하는
    의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  2. 제1항에 있어서,
    상기 제1 입력을 수신하는 단계는
    상기 가상 조그셔틀 상에서의 커서의 드래깅에 의해 상기 제1 입력을 수신하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  3. 제1항에 있어서,
    상기 제1 입력을 수신하는 단계는
    상기 가상 조그셔틀 상에 설정된 기능 버튼을 이용하여 상기 가상 조그셔틀 영역 외부에서의 커서의 드래깅에 의해 상기 제1 입력을 수신하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  4. 제1항에 있어서,
    상기 제1 입력을 수신하는 단계는
    상기 가상 조그셔틀 상에 설정된 기능 버튼을 이용하여 상기 가상 조그셔틀 영역 외부에서의 커서의 움직임을 상기 제1 입력으로 수신하고,
    상기 입력 신호를 생성하는 단계는
    상기 제1 입력으로 수신된 상기 가상 조그셔틀 영역 외부에서의 커서의 움직임을 상기 가상 조그셔틀 내에서의 움직임에 대응하도록 변환하는 단계; 및
    상기 가상 조그셔틀 내에서의 움직임에 대응하도록 변환된 상기 커서의 움직임을 상기 입력 신호로서 생성하는 단계
    를 포함하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  5. 제1항에 있어서,
    상기 가상 조그셔틀 상에서 마우스의 휠을 이용한 상기 사용자의 제2 입력을 통해 상기 가상 조그셔틀의 움직임에 대한 민감도를 설정하는 단계
    를 더 포함하고,
    상기 입력 신호를 생성하는 단계는
    상기 설정된 민감도와 상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 상기 입력 신호를 생성하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  6. 제1항에 있어서,
    상기 가상 조그셔틀을 오버레이시켜 디스플레이하는 단계는
    상기 제1 입력을 수신하기 위한 제1 영역과 상기 제1 영역에 의해 둘러 싸인 원형의 제2 영역을 포함하는 상기 가상 조그셔틀을 디스플레이하고,
    상기 가상 조그셔틀의 상기 제2 영역에 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 추가 기능을 설정하는 단계
    를 더 포함하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  7. 제6항에 있어서,
    상기 설정하는 단계는
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰(view) 영상인 경우 가상 카메라의 각도를 조절하는 기능을 상기 추가 기능으로 설정하고,
    상기 처리하는 단계는
    상기 제2 영역을 통한 상기 사용자의 제3 입력에 대응하는 입력 신호가 수신되면 상기 제3 입력에 대응하는 입력 신호의 각도만큼 상기 가상 카메라의 각도가 조절된 가상 내시경 뷰 영상을 상기 디스플레이 영역에 디스플레이하는 것을 특징으로 하는 의료 영상 판독용 가상 사용자 인터페이스 제공 방법.
  8. 판독용 의료 영상이 디스플레이되는 디스플레이 영역 중 일부 영역에 가상 사용자 인터페이스인 가상 조그셔틀을 오버레이(overlay)시켜 디스플레이하는 디스플레이부;
    상기 가상 조그셔틀의 움직임을 유발하는 사용자의 제1 입력을 수신하는 수신부;
    상기 제1 입력에 의해 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 입력 신호를 생성하는 생성부;
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상의 종류를 확인하고, 상기 확인된 상기 판독용 의료 영상의 종류에 기초하여 상기 입력된 신호를 해석함으로써 상기 확인된 상기 판독용 의료 영상의 종류에 대응하는 상기 생성된 상기 입력 신호의 기능을 식별하는 기능 확인부; 및
    상기 판독용 의료 영상의 종류에 대응하여 식별된 상기 입력 신호의 기능과 상기 입력 신호를 이용하여 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 오퍼레이션을 처리하는 영상 처리부
    를 포함하고,
    상기 영상 처리부는
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 MPR(Multi-Planar Reformation) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 제1 슬라이스 영상을 상기 입력 신호에 대응하는 제2 슬라이스 영상으로 변경시켜 디스플레이하고,
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 CPR(Curved Planar Reformation) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 상기 CPR 뷰 영상을 상기 입력 신호에 대응되는 각도만큼 회전시켜 디스플레이하며,
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰 영상, 밴드 뷰 영상, 3차원 에어웨이(airway) 뷰 영상인 경우 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상을 상기 입력 신호에 대응하는 위치만큼 네비게이션(navigation)된 판독용 의료 영상으로 변경시켜 상기 디스플레이 영역에 디스플레이하는
    의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
  9. 제8항에 있어서,
    상기 수신부는
    상기 가상 조그셔틀 상에서의 커서의 드래깅에 의해 상기 제1 입력을 수신하는 것을 특징으로 하는 의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
  10. 제8항에 있어서,
    상기 수신부는
    상기 가상 조그셔틀 상에 설정된 기능 버튼을 이용하여 상기 가상 조그셔틀 영역 외부에서의 커서의 드래깅에 의해 상기 제1 입력을 수신하는 것을 특징으로 하는 의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
  11. 제8항에 있어서,
    상기 가상 조그셔틀 상에서 마우스의 휠을 이용한 상기 사용자의 제2 입력을 통해 상기 가상 조그셔틀의 움직임에 대한 민감도를 설정하는 민감도 설정부
    를 더 포함하고,
    상기 생성부는
    상기 설정된 민감도와 상기 제1 입력에 의하여 유발되는 상기 가상 조그셔틀의 움직임에 대응하는 상기 입력 신호를 생성하는 것을 특징으로 하는 의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
  12. 제8항에 있어서,
    상기 디스플레이부는
    상기 제1 입력을 수신하기 위한 제1 영역과 상기 제1 영역에 의해 둘러 싸인 원형의 제2 영역을 포함하는 상기 가상 조그셔틀을 디스플레이하고,
    상기 가상 조그셔틀의 상기 제2 영역에 상기 디스플레이 영역에 디스플레이된 판독용 의료 영상에 대한 추가 기능을 설정하는 기능 설정부
    를 더 포함하는 것을 특징으로 하는 의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
  13. 제12항에 있어서,
    상기 기능 설정부는
    상기 디스플레이 영역에 디스플레이된 판독용 의료 영상이 가상 내시경(endoscope) 뷰(view) 영상인 경우 가상 카메라의 각도를 조절하는 기능을 상기 추가 기능으로 설정하고,
    상기 영상 처리부는
    상기 제2 영역을 통한 상기 사용자의 제3 입력에 대응하는 입력 신호가 수신되면 상기 제3 입력에 대응하는 입력 신호의 각도만큼 상기 가상 카메라의 각도가 조절된 가상 내시경 뷰 영상을 상기 디스플레이 영역에 디스플레이하는 것을 특징으로 하는 의료 영상 판독을 위한 가상 사용자 인터페이스 장치.
KR1020150129768A 2015-09-14 2015-09-14 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법 KR20150113940A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150129768A KR20150113940A (ko) 2015-09-14 2015-09-14 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150129768A KR20150113940A (ko) 2015-09-14 2015-09-14 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020140037477A Division KR20150113490A (ko) 2014-03-31 2014-03-31 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법

Publications (1)

Publication Number Publication Date
KR20150113940A true KR20150113940A (ko) 2015-10-08

Family

ID=54346686

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150129768A KR20150113940A (ko) 2015-09-14 2015-09-14 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법

Country Status (1)

Country Link
KR (1) KR20150113940A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220005851A (ko) * 2020-07-07 2022-01-14 한국과학기술원 터치 스크린 기반의 가상 위젯을 통한 볼륨 데이터 시각화 인터페이스 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220005851A (ko) * 2020-07-07 2022-01-14 한국과학기술원 터치 스크린 기반의 가상 위젯을 통한 볼륨 데이터 시각화 인터페이스 방법 및 장치

Similar Documents

Publication Publication Date Title
US20230086592A1 (en) Augmented reality interventional system providing contextual overylays
US10929508B2 (en) Database systems and interactive user interfaces for dynamic interaction with, and indications of, digital medical image data
CN106204433B (zh) 用于显示医学图像的方法和设备
US20220202384A1 (en) Medical image diagnosis apparatus and medical information display controlling device
US20050070783A1 (en) Medical image processing apparatus
JP2009086765A (ja) 医用レポートシステム、医用レポート作成装置、及び医用レポート作成方法
CN112740285A (zh) 在虚拟环境中对医学图像的叠加和操纵
JP6021468B2 (ja) 医用画像表示装置
WO2016035312A1 (en) Assistance apparatus for assisting interpretation report creation and method for controlling the same
JP2008062034A (ja) ルールベースのボリューム描画および探査のシステムおよび方法
JP6841894B1 (ja) 医用装置およびプログラム
JP7408361B2 (ja) 医用画像診断支援システム及び医用画像処理装置、医用画像処理方法
KR20150113940A (ko) 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법
US10548570B2 (en) Medical image navigation system
US20220000442A1 (en) Image orientation setting apparatus, image orientation setting method, and image orientation setting program
KR20150113490A (ko) 의료 영상 판독을 지원하기 위한 가상 사용자 인터페이스 장치 및 가상 사용자 인터페이스 제공 방법
US20090276392A1 (en) Dynamic sequencing display protocols for medical imaging data
EP4210068A1 (en) Medical information processing system, medical information processing method, and program
JP2018102752A (ja) 制御装置、制御方法、制御システム及びプログラム
US20240020860A1 (en) Method and apparatus of fusion of multimodal images to fluoroscopic images
JP7130449B2 (ja) 診断支援装置及び診断支援システム
JP2010244224A (ja) 画像表示装置および方法並びにプログラム
JP7086621B2 (ja) 加工情報供給装置、加工情報供給方法、及び加工情報供給システム
JP2017086561A (ja) 医用画像処理装置及び医用画像処理プログラム
JP2009153750A (ja) 医療用画像表示装置及び医療用画像表示方法

Legal Events

Date Code Title Description
A107 Divisional application of patent
WITN Withdrawal due to no request for examination