KR20160072614A - 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체 - Google Patents

초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체 Download PDF

Info

Publication number
KR20160072614A
KR20160072614A KR1020140180493A KR20140180493A KR20160072614A KR 20160072614 A KR20160072614 A KR 20160072614A KR 1020140180493 A KR1020140180493 A KR 1020140180493A KR 20140180493 A KR20140180493 A KR 20140180493A KR 20160072614 A KR20160072614 A KR 20160072614A
Authority
KR
South Korea
Prior art keywords
nodes
ultrasound
viewpoint
node
image
Prior art date
Application number
KR1020140180493A
Other languages
English (en)
Other versions
KR102364490B1 (ko
Inventor
오동훈
현동규
Original Assignee
삼성메디슨 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성메디슨 주식회사 filed Critical 삼성메디슨 주식회사
Priority to KR1020140180493A priority Critical patent/KR102364490B1/ko
Priority to US14/933,082 priority patent/US10456112B2/en
Priority to EP15198247.7A priority patent/EP3034007B1/en
Publication of KR20160072614A publication Critical patent/KR20160072614A/ko
Application granted granted Critical
Publication of KR102364490B1 publication Critical patent/KR102364490B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/085Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating body or organic structures, e.g. tumours, calculi, blood vessels, nodules
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0891Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/40Positioning of patients, e.g. means for holding or immobilising parts of the patient's body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/465Displaying means of special interest adapted to display user selection data, e.g. icons or menus
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/466Displaying means of special interest adapted to display 3D data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/483Diagnostic techniques involving the acquisition of a 3D volume of data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/523Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5246Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from the same or different imaging techniques, e.g. color Doppler and B-mode
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/488Diagnostic techniques involving Doppler signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Vascular Medicine (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Optics & Photonics (AREA)
  • Physiology (AREA)
  • Remote Sensing (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

본 개시는 사용자가 시점을 보다 용이하게 이동할 수 있는 인터페이스를 제공할 수 있는 초음파진단장치를 개시한다.
초음파진단장치는 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 영상 생성부, 및 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 제 1 정보에 기초하여 제 2 초음파 영상들을 획득하도록 제어하는 제어부를 포함한다.

Description

초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체{UNTRASOUND DIANOGNOSIS APPARATUS, METHOD AND COMPUTER-READABLE STORAGE MEDIUM}
본원 발명은 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체에 관한 것이다.
구체적으로, 본원 발명은 초음파 진단 시 여러 부위를 관찰 할 수 있도록 하는 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체에 관한 것이다.
초음파진단장치는 프로브(probe)의 트랜스듀서(transducer)로부터 생성되는 초음파 신호를 대상체로 조사하고, 대상체로부터 반사된 초음파 에코 신호의 정보를 수신하여 대상체 내부의 부위에 대한 영상을 얻는다. 특히, 초음파진단장치는 대상체 내부의 관찰, 이물질 검출, 및 상해 측정 등 의학적 목적으로 사용된다. 이러한 초음파진단장치는 X선을 이용하는 진단 장치에 비하여 안정성이 높고, 실시간으로 영상의 디스플레이가 가능하며, 방사능 피폭이 없어 안전하다는 장점이 있어서 다른 화상 진단 장치와 함께 널리 이용된다.
이와 관련하여, 의사 등의 사용자가 초음파 영상 상에서 트랙볼 등과 같은 입력 장치를 이용하여 초음파 영상의 시점을 이동하는데 있어서, 트랙볼의 이용이 익숙하지 않으면 초음파 영상 상에서 시점 이동이 쉽지 않은 문제가 있었다. 또한 트랙볼로 초음파 영상 상에서 시점 이동이 있은 후 시점이 어떠한 경로를 이용했는지 사용자가 아는데 있어서 어려움이 있었다. 따라서, 초음파 영상의 시점을 보다 용이하게 이동시킬 수 있는 초음파진단장치가 사용자에게 제공될 필요가 있다.
사용자가 혈관 및 소화기와 같은 관형조직의 대상체의 초음파 진단 시에 대상체의 복수의 말단에 차례로 시점을 이동하는 과정이 필요할 수 있다. 현재의 초음파진단 장치는 트랙볼(Trackball)을 이용해서 시점을 이동시킨다. 하지만 사용자가 트랙볼로 시점을 일일이 이동시키는 데에 불편함이 있었다. 또한 사용자가 시점을 이동한 후에 지나온 경로를 알 수 없는 불편함이 있었다.
본원에서는 시점 이동을 보다 용이하게 하기 위한 장치, 방법 및 컴퓨터판독 가능한 저장매체의 제공을 목적으로 한다.
상술한 바와 같은 목적을 달성하기 위하여 본 개시의 일 실시예에 따른 초음파진단장치는 대상체를 스캔(scan)하여 획득된 초음파 데이터에 기초하여 제 1 초음파 영상을 획득하는 영상 생성부; 및 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 제어부를 포함할 수 있다.
또한, 제어부는 제 1 정보에 근거하여 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득하고, 제 1 정보 및 제 2 정보 중 적어도 하나를 제 1 초음파 영상 상에 표시한 영상을 디스플레이하는 디스플레이부를 더 포함할 수 있다.
또한, 제어부는 노드들과 노드들을 연결하는 간선을 획득하고, 복수개의 노드 및 간선에 근거하여, 제 1 초음파 영상에 포함되는 구조물을 획득하도록 제어하고, 제 1 정보는 간선 및 구조물 중 적어도 하나를 포함할 수 있다.
또한, 제어부는 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하고, 영상 생성부가 획득된 노드들의 순서로 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다.
또한, 사용자로부터 제 1 초음파 영상 상에 제 1 정보와 관련한 입력을 수신하는 입력부를 더 포함할 수 있다.
또한, 제어부는 수신된 입력에 기초하여 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제 중 적어도 하나를 할 수 있다.
또한, 입력부는 사용자로부터 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하고, 제어부는 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어할 수 있다.
또한, 입력부는 사용자로부터 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하고, 제어부는 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어할 수 있다.
또한, 입력부는 사용자로부터 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하고, 제어부는 상기 수신된 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득할 수 있다.
또한, 입력부는 사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하고, 제어부는 이동속도에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다.
또한, 이동속도에 관련된 입력은 노드와 노드 사이의 이동 시간을 포함할 수 있다.
또한, 제어부는 중심선 추출 알고리즘을 포함하는 영상처리를 이용하여 초음파 영상으로부터 노드들 및 간선을 포함하는 제 1 정보를 추출할 수 있다.
또한, 제어부는 추출된 제 1 정보에 기초하여 시점을 이동하며 자동으로 제 2 초음파 영상들을 획득할 수 있다.
또한, 제어부는 노드 및 노드 사이의 간선을 따라 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다.
또한, 제어부는 시점이 지나간 노드들 및 간선 중 적어도 하나를 디스플레이하도록 제어할 수 있다.
또한, 제어부는 시점이 지나간 노드들 및 간선 중 적어도 하나를 시점이 지나가지 않은 노드들 및 간선과 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이하도록 제어할 수 있다.
또한, 제 2 초음파 영상들은 초음파 데이터에 기초한 가상내시경 영상을 포함할 수 있다.
또한, 제 2 초음파 영상들은 2 차원 영상 및 3 차원 영상 중 적어도 하나를 포함할 수 있다.
또한, 구조물은 트리구조의 그래프일 수 있다.
또한, 상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파진단장치는 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 초음파 데이터 획득부; 사용자로부터 입력을 수신하는 입력부; 및 상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 제 1 정보 및 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하도록 제어하는 제어부를 포함할 수 있다.
또한, 상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파진단장치는 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 초음파 데이터 획득부; 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하고, 제 1 정보에 기초하여 시점을 이동하도록 제어하는 제어부; 및 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이하는 디스플레이부를 포함할 수 있다.
또한, 상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파진단장치는 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 영상 생성부; 사용자로부터 입력을 수신하는 입력부; 및 상기 수신된 입력에 기초하여, 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 수신된 입력에 기초하여 노드들의 순서를 획득하고, 노드들의 순서 및 상기 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 제어부를 포함할 수 있다.
상술한 바와 같은 목적을 달성하기 위하여 본 개시의 일 실시예에 따른 초음파 진단 방법은 대상체를 스캔(scan)하여 획득된 초음파 데이터에 기초하여 제 1 초음파 영상을 획득하는 단계; 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계; 및 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
또한, 제 1 정보에 근거하여 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득하는 단계; 및 제 1 정보 및 제 2 정보 중 적어도 하나를 제 1 초음파 영상 상에 표시한 영상을 디스플레이하는 단계를 더 포함할 수 있다.
또한, 노드들과 노드들을 연결하는 간선을 획득하는 단계; 및 복수개의 노드 및 간선에 근거하여, 제 1 초음파 영상에 포함되는 구조물을 획득하는 단계를 더 포함하고 제 1 정보는 간선 및 구조물 중 적어도 하나를 포함할 수 있다.
또한, 제 2 초음파 영상들을 획득하는 단계는, 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하는 단계; 및 획득된 노드들의 순서로 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
또한, 사용자로부터 제 1 초음파 영상 상에 제 1 정보와 관련한 입력을 수신하는 단계를 더 포함할 수 있다.
또한, 수신된 입력에 기초하여 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제 중 적어도 하나를 수행하는 단계를 더 포함할 수 있다.
또한, 제 2 초음파 영상들을 획득하는 단계는, 사용자로부터 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하는 단계; 및 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함할 수 있다.
또한, 제 2 초음파 영상들을 획득하는 단계는, 사용자로부터 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하는 단계; 및 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함할 수 있다.
또한, 사용자로부터 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하는 단계; 및 상기 수신된 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 더 포함할 수 있다.
또한, 사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하는 단계; 및 이동속도에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 더 포함할 수 있다.
또한, 이동속도에 관련된 입력은 노드와 노드 사이의 이동 시간을 포함할 수 있다.
또한, 제 1 정보를 획득하는 단계는, 중심선 추출 알고리즘을 포함하는 영상처리를 이용하여 초음파 영상으로부터 노드들 및 간선을 포함하는 제 1 정보를 추출하는 단계를 포함할 수 있다.
또한, 제 2 초음파 영상들을 획득하는 단계는, 추출된 제 1 정보에 기초하여 시점을 이동하며 자동으로 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
또한, 제 2 초음파 영상들을 획득하는 단계는, 노드 및 노드 사이의 간선을 따라 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
또한, 시점이 지나간 노드들 및 간선 중 적어도 하나를 디스플레이하는 단계를 더 포함할 수 있다.
또한, 시점이 지나간 노드들 및 간선 중 적어도 하나를 시점이 지나가지 않은 노드들 및 간선과 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이하는 단계를 포함할 수 있다.
상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파 진단 방법은 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계; 사용자로부터 입력을 수신하는 단계; 상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계; 및 제 1 정보 및 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하는 단계를 포함할 수 있다.
또한, 상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파 진단 방법은 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계; 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하는 단계; 제 1 정보에 기초하여 시점을 이동하도록 제어하는 단계; 및 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이하는 단계를 포함할 수 있다.
또한, 상술한 바와 같은 목적을 달성하기 위하여 본 개시의 다른 실시예에 따른 초음파 진단 방법은 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 단계; 사용자로부터 입력을 수신하는 단계; 상기 수신된 입력에 기초하여, 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계; 수신된 입력에 기초하여 노드들의 순서를 획득하는 단계; 및 노드들의 순서 및 상기 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
상술한 바와 같은 목적을 달성하기 위하여 본 개시의 일 실시예에 따라 상술한 바와 같은 초음파 진단 방법을 수행하기 위한 프로그램이 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다.
본 발명은, 다음의 자세한 설명과 그에 수반되는 도면들의 결합으로 쉽게 이해될 수 있으며, 참조 번호(reference numerals)들은 구조적 구성요소(structural elements)를 의미한다.
도 1은 본 발명에서 이용되는 초음파 영상장치를 나타내는 도면이다.
도 2는 본 발명의 일 실시 예와 관련된 무선 프로브(200)의 구성을 도시한 블록도이다.
도 3 은 본 발명의 일 실시예에 따른 초음파진단장치를 나타낸 도면이다.
도 4 은 본 발명의 일 실시예에 따른 초음파진단장치를 나타낸 도면이다.
도 5 는 본 발명의 일 실시예에 따른 초음파진단방법을 나타낸 도면이다.
도 6 은 기존 초음파진단장치의 초음파 영상 상에서 시점 이동을 설명하기 위한 도면이다.
도 7 은 본원 발명의 일 실시예에 따른 초음파 영상 상에서 시점 이동을 나타낸 도면이다.
도 8 은 본원 발명의 일 실시예에 따른 초음파 영상 상에서 시점 이동을 나타낸 도면이다.
도 9 는 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면이다.
도 10 은 본원 발명의 일 실시예에 따른 사용자의 입력에 기초하여 노드를 획득하는 과정을 나타낸 도면이다.
도 11a 내지 도 11c 는 본원 발명의 일 실시예에 따라 제어부가 노드 및 간선을 자동으로 획득하는 과정을 나타낸 도면이다.
도 12 는 본원 발명의 일 실시예에 따라 노드를 편집하는 과정을 나타낸 도면이다.
도 13a 는 본원 발명의 일 실시예에 따라 노드 사이를 이동하는 과정을 나타낸 도면이다.
도 13b 는 본원 발명의 일 실시예에 따른 노드 리스트를 나타낸 도면이다.
도 14 는 본원 발명의 일 실시예에 따른 초음파 영상들을 나타낸 도면이다.
도 15a 및 도 15b 는 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면이다.
도 16 은 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면으로서 도 15 에서 이어지는 도면이다.
도 17 은 본원 발명의 일 실시예에 따른 초음파 영상을 나타내 도면이다.
도 18 은 본원 발명의 일 실시예에 따라 좌표계 상에 초음파 데이터를 나타낸 도면이다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 “…부”, “…모듈” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
명세서 전체에서 "초음파 영상"이란 초음파를 이용하여 획득된 대상체(object)에 대한 영상을 의미한다. 또한, 대상체는 사람 또는 동물, 또는 사람 또는 동물의 일부를 포함할 수 있다. 예를 들어, 대상체는 간, 심장, 자궁, 뇌, 유방, 복부 등의 장기, 또는 혈관을 포함할 수 있다. 또한, 대상체는 팬텀(phantom)을 포함할 수도 있으며, 팬텀은 생물의 밀도와 실효 원자 번호에 아주 근사한 부피를 갖는 물질을 의미할 수 있다.
또한, 명세서 전체에서 "사용자"는 의료 전문가로서 의사, 간호사, 임상 병리사, 의료 영상 전문가 등이 될 수 있으며, 의료 장치를 수리하는 기술자가 될 수 있으나, 이에 한정되지는 않는다.
이하에서는 도면을 참조하여 본 발명의 실시 예 들을 상세히 설명한다.
도 1은 본 발명에서 이용되는 초음파 영상장치를 나타내는 도면이다.
도 1을 참조하면, 본 발명에서 이용되는 초음파진단장치의 전체적인 구성이 도시된다.
도 1을 참조하면, 초음파진단장치(100)는 프로브(2), 초음파 송수신부(10), 영상 처리부(20), 통신부(30), 메모리(40), 입력 디바이스(50), 및 제어부(60)를 포함할 수 있으며, 상술한 여러 구성들은 버스(70)를 통해 서로 연결될 수 있다.
초음파진단장치(100)는 카트형뿐만 아니라 휴대형으로도 구현될 수 있다. 휴대형 초음파진단장치의 예로는 팩스 시야어(PACS viewer), 스마트 폰(smart phone), 랩탑 컴퓨터, PDA, 태블릿 PC 등이 있을 수 있으나, 이에 제한되지 않는다.
프로브(2)는, 초음파 송수신부(10)로부터 인가된 구동 신호(driving signal)에 따라 대상체(1)로 초음파 신호를 송출하고, 대상체(1)로부터 반사된 에코 신호를 수신한다. 프로브(2)는 복수의 트랜스듀서를 포함하며, 복수의 트랜스듀서는 전달되는 전기적 신호에 따라 진동하며 음향 에너지인 초음파를 발생시킨다. 또한, 프로브(2)는 초음파진단장치(100)의 본체와 유선 또는 무선으로 연결될 수 있으며, 초음파진단장치(100)는 구현 형태에 따라 복수 개의 프로브(2)를 구비할 수 있다.
송신부(11)는 프로브(2)에 구동 신호를 공급하며, 펄스 생성부(17), 송신 지연부(18), 및 펄서(19)를 포함한다. 펄스 생성부(17)는 소정의 펄스 반복 주파수(PRF, Pulse Repetition Frequency)에 따른 송신 초음파를 형성하기 위한 펄스(pulse)를 생성하며, 송신 지연부(18)는 송신 지향성(transmission directionality)을 결정하기 위한 지연 시간(delay time)을 펄스에 적용한다. 지연 시간이 적용된 각각의 펄스는, 프로브(2)에 포함된 복수의 압전 진동자(piezoelectric vibrators)에 각각 대응된다. 펄서(19)는, 지연 시간이 적용된 각각의 펄스에 대응하는 타이밍(timing)으로, 프로브(2)에 구동 신호(또는, 구동 펄스(driving pulse))를 인가한다.
수신부(12)는 프로브(2)로부터 수신되는 에코 신호를 처리하여 초음파 데이터를 생성하며, 증폭기(13), ADC(아날로그 디지털 컨버터, Analog Digital converter)(14), 수신 지연부(15), 및 합산부(16)를 포함할 수 있다. 증폭기(13)는 에코 신호를 각 채널(channel) 마다 증폭하며, ADC(14)는 증폭된 에코 신호를 아날로그-디지털 변환한다. 수신 지연부(15)는 수신 지향성(reception directionality)을 결정하기 위한 지연 시간을 디지털 변환된 에코 신호에 적용하고, 합산부(16)는 수신 지연부(15)에 의해 처리된 에코 신호를 합산함으로써 초음파 데이터를 생성한다. 한편, 수신부(12)는 그 구현 형태에 따라 증폭기(13)를 포함하지 않을 수도 있다. 즉, 프로브(2)의 감도가 향상되거나 ADC(14)의 처리 비트(bit) 수가 향상되는 경우, 증폭기(13)는 생략될 수도 있다.
영상 처리부(20)는 초음파 송수신부(10)에서 생성된 초음파 데이터에 대한 주사 변환(scan conversion) 과정을 통해 초음파 영상을 생성하고 디스플레이한다. 한편, 초음파 영상은 A 모드(amplitude mode), B 모드(brightness mode) 및 M 모드(motion mode)에서 대상체를 스캔하여 획득된 그레이 스케일(gray scale)의 영상뿐만 아니라, 도플러 효과(doppler effect)를 이용하여 움직이는 대상체를 표현하는 도플러 영상을 포함할 수도 있다. 도플러 영상은, 혈액의 흐름을 나타내는 혈류 도플러 영상 (또는, 컬러 도플러 영상으로도 불림), 조직의 움직임을 나타내는 티슈 도플러 영상, 및 대상체의 이동 속도를 파형으로 표시하는 스펙트럴 도플러 영상을 포함할 수 있다.
B 모드 처리부(22)는, 초음파 데이터로부터 B 모드 성분을 추출하여 처리한다. 영상 생성부(24)는, B 모드 처리부(22)에 의해 추출된 B 모드 성분에 기초하여 신호의 강도가 휘도(brightness)로 표현되는 초음파 영상을 생성할 수 있다.
마찬가지로, 도플러 처리부(23)는, 초음파 데이터로부터 도플러 성분을 추출하고, 영상 생성부(24)는 추출된 도플러 성분에 기초하여 대상체의 움직임을 컬러 또는 파형으로 표현하는 도플러 영상을 생성할 수 있다.
일 실시 예에 의한 영상 생성부(24)는, 볼륨 데이터에 대한 볼륨 렌더링 과정을 거쳐 3차원 초음파 영상을 생성할 수 있으며, 압력에 따른 대상체(1)의 변형 정도를 영상화한 탄성 영상을 생성할 수도 있다. 나아가, 영상 생성부(24)는 초음파 영상 상에 여러 가지 부가 정보를 텍스트, 그래픽으로 표현할 수도 있다. 한편, 생성된 초음파 영상은 메모리(40)에 저장될 수 있다.
디스플레이부(25)는 생성된 초음파 영상을 표시 출력한다. 디스플레이부(25)는, 초음파 영상뿐 아니라 초음파진단장치(100)에서 처리되는 다양한 정보를 GUI(Graphic User Interface)를 통해 화면 상에 표시 출력할 수 있다. 한편, 초음파진단장치(100)는 구현 형태에 따라 둘 이상의 디스플레이부(25)를 포함할 수 있다.
통신부(30)는, 유선 또는 무선으로 네트워크(3)와 연결되어 외부 디바이스나 서버와 통신한다. 통신부(30)는 의료 영상 정보 시스템(PACS, Picture Archiving and Communication System)을 통해 연결된 병원 서버나 병원 내의 다른 의료 장치와 데이터를 주고 받을 수 있다. 또한, 통신부(30)는 의료용 디지털 영상 및 통신(DICOM, Digital Imaging and Communications in Medicine) 표준에 따라 데이터 통신할 수 있다.
통신부(30)는 네트워크(3)를 통해 대상체(1)의 초음파 영상, 초음파 데이터, 도플러 데이터 등 대상체의 진단과 관련된 데이터를 송수신할 수 있으며, CT, MRI, X-ray 등 다른 의료 장치에서 촬영한 의료 영상 또한 송수신할 수 있다. 나아가, 통신부(30)는 서버로부터 환자의 진단 이력이나 치료 일정 등에 관한 정보를 수신하여 대상체(1)의 진단에 활용할 수도 있다. 나아가, 통신부(30)는 병원 내의 서버나 의료 장치뿐만 아니라, 의사나 환자의 휴대용 단말과 데이터 통신을 수행할 수도 있다.
통신부(30)는 유선 또는 무선으로 네트워크(3)와 연결되어 서버(35), 의료 장치(34), 또는 휴대용 단말(36)과 데이터를 주고 받을 수 있다. 통신부(30)는 외부 디바이스와 통신을 가능하게 하는 하나 이상의 구성 요소를 포함할 수 있으며, 예를 들어 근거리 통신 모듈(31), 유선 통신 모듈(32), 및 이동 통신 모듈(33)을 포함할 수 있다.
근거리 통신 모듈(31)은 소정 거리 이내의 근거리 통신을 위한 모듈을 의미한다. 본 발명의 일 실시 예에 따른 근거리 통신 기술에는 무선 랜(Wireless LAN), 와이파이(Wi-Fi), 블루투스, 지그비(zigbee), WFD(Wi-Fi Direct), UWB(ultra wideband), 적외선 통신(IrDA, infrared Data Association), BLE (Bluetooth Low Energy), NFC(Near Field Communication) 등이 있을 수 있으나, 이에 한정되는 것은 아니다.
유선 통신 모듈(32)은 전기적 신호 또는 광 신호를 이용한 통신을 위한 모듈을 의미하며, 일 실시 예에 의한 유선 통신 기술에는 페어 케이블(pair cable), 동축 케이블, 광섬유 케이블, 이더넷(ethernet) 케이블 등이 포함될 수 있다.
이동 통신 모듈(33)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
메모리(40)는 초음파진단장치(100)에서 처리되는 여러 가지 정보를 저장한다. 예를 들어, 메모리(40)는 입/출력되는 초음파 데이터, 초음파 영상 등 대상체의 진단에 관련된 의료 데이터를 저장할 수 있고, 초음파진단장치(100) 내에서 수행되는 알고리즘이나 프로그램을 저장할 수도 있다.
메모리(40)는 플래시 메모리, 하드디스크, EEPROM 등 여러 가지 종류의 저장매체로 구현될 수 있다. 또한, 초음파진단장치(100)는 웹 상에서 메모리(40)의 저장 기능을 수행하는 웹 스토리지(web storage) 또는 클라우드 서버를 운영할 수도 있다.
입력 디바이스(50)는, 사용자로부터 초음파진단장치(100)를 제어하기 위한 데이터를 입력받는 수단을 의미한다. 입력 디바이스(50)는 키 패드, 마우스, 터치 패널, 터치 스크린, 트랙볼, 조그 스위치 등 하드웨어 구성을 포함할 수 있으나 이에 한정되는 것은 아니며, 심전도 측정 모듈, 호흡 측정 모듈, 음성 인식 센서, 제스쳐 인식 센서, 지문 인식 센서, 홍채 인식 센서, 깊이 센서, 거리 센서 등 다양한 입력 수단을 더 포함할 수 있다.
제어부(60)는 초음파진단장치(100)의 동작을 전반적으로 제어한다. 즉, 제어부(60)는 도 1에 도시된 프로브(2), 초음파 송수신부(10), 영상 처리부(20), 통신부(30), 메모리(40), 및 입력 디바이스(50) 간의 동작을 제어할 수 있다.
프로브(2), 초음파 송수신부(10), 영상 처리부(20), 통신부(30), 메모리(40), 입력 디바이스(50) 및 제어부(60) 중 일부 또는 전부는 소프트웨어 모듈에 의해 동작할 수 있으나 이에 제한되지 않으며, 상술한 구성 중 일부가 하드웨어에 의해 동작할 수도 있다. 또한, 초음파 송수신부(10), 영상 처리부(20), 및 통신부(30) 중 적어도 일부는 제어부(60)에 포함될 수 있으나, 이러한 구현 형태에 제한되지는 않는다.
초음파 영상을 이용한 질병의 진단을 위하여, 대상체를 포함하는 초음파 영상 내에 진단 부위를 설정 또는 소정 위치를 표시하기 위한 마커(marker)가 설정될 수 있다.
구체적으로, 마커는 사용자가 질병 진단 또는 환자의 건강 이상 유무를 확인하기 위하여 상세히 관찰할 필요가 있는 부분에 설정될 수 있다. 본원에서는 전술한 마커가 설정된 대상체 부위를 보다 정확하게 진단할 수 있도록, 초음파 영상을 변경하여 출력하는 초음파진단장치 및 그에 따른 초음파 영상의 디스플레이 방법을 개시한다.
도 2 는 본 발명의 일 실시 예와 관련된 무선 프로브(200)의 구성을 도시한 블록도이다.
무선 프로브(200)는, 도 1에서 설명한 바와 같이 복수의 트랜스듀서를 포함하며, 구현 형태에 따라 도 1의 초음파 송수신부(10)의 구성을 일부 또는 전부 포함할 수 있다.
도 2 에 도시된 실시 예에 의한 무선 프로브(200)는, 송신부(210), 트랜스듀서(220), 및 수신부(230)를 포함하며, 각각의 구성에 대해서는 1에서 설명한 바 있으므로 자세한 설명은 생략한다. 한편, 무선 프로브(200)는 그 구현 형태에 따라 수신 지연부(233)와 합산부(234)를 선택적으로 포함할 수도 있다.
무선 프로브(200)는, 대상체(1)로 초음파 신호를 송신하고 에코 신호를 수신하며, 초음파 데이터를 생성하여 도 1의 초음파진단장치(100)로 무선 전송할 수 있다.
사용자가 상술한 바와 같은 초음파진단장치로 혈관 및 소화기와 같은 관형조직의 대상체의 초음파 진단 시에 대상체의 복수의 말단에 차례로 시점을 이동하는 과정이 필요할 수 있다. 여기서 시점(view point)은 초음파 영상을 획득하기 위한 소정의 위치에 대응된다. 현재의 초음파진단 장치는 트랙볼(Trackball)을 이용해서 시점을 이동시킨다. 하지만 사용자가 트랙볼로 시점을 일일이 이동시키는 데에 불편함이 있었다. 또한 사용자가 시점을 이동한 후에 지나온 경로를 알 수 없는 불편함이 있었다.
이하에서, 도 3 내지 도 17 을 참조하여, 본원 발명의 일 실시예에 따른 초음파 영상에서 시점 이동을 보다 용이하게 하기 위한 장치, 방법 및 컴퓨터판독 가능한 저장매체를 상세히 설명한다.
초음파진단장치는 프로브(Probe)로부터 신호를 획득하여 초음파 영상을 구성한 후, 이미지 상의 특정 장기, 구조물 등의 길이, 각도, 면적, 부피 등을 측정할 수 있다. 이러한 측정을 통해 신체 내 이상 부위의 정보를 획득하거나, 태아 주수(Gestational age) 등에 관한 정보를 획득하기도 한다. 초음파진단장치는 의료적 진단을 보조하는 중요한 수단이기에 의료 현장에서 수시로 사용되며, 사용의 편이성과 더불어 정확성이 요구된다.
이와 관련하여, 의료 진단의 효율성을 높이기 위하여 의사 등의 사용자가 초음파 영상 상에서 입력 디바이스를 통하여 시점을 보다 용이하게 이동시킬 수 있는 방법이 사용자에게 제공될 필요가 있다.
도 3 은 본 발명의 일 실시예에 따른 초음파진단장치를 나타낸 도면이다.
도 3 을 참조하면, 본원 발명의 일 실시예에 따른 초음파진단장치(300)는, 영상 생성부(310) 및 제어부(320)를 포함한다.
초음파진단장치(300)는 초음파 영상을 생성 및 처리할 수 있는 모든 전자기기로, 도 1에 도시된 초음파진단장치(100)에 동일 대응될 수 있다. 또한, 초음파진단장치(300)는 도 1에 도시된 초음파진단장치(100)와 네트워크(3)를 통하여 연결 가능한 서버(35), 의료 장치(34) 또는 휴대용 단말(36)이 될 수도 있다. 또한, 도 3 의 영상 생성부(310) 및 제어부(320)는 각각 도 1 의 영상 생성부(24) 및 제어부(60)에 동일 대응되므로, 도 1 에서 중복되는 설명은 생략한다.
영상 생성부(310)는 대상체를 스캔(scan)하여 획득된 초음파 데이터에 기초하여 제 1 초음파 영상을 획득한다. 또한, 제어부(320)는 상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어한다.
초음파 데이터는 초음파 데이터 획득부에 의하여 획득될 수 있다. 또한, 초음파 데이터 획득부는 초음파 신호 등을 이용하여 대상체를 스캔함으로써 초음파 데이터를 획득할 수 있으나, 이에 제한되는 것은 아니다. 일 예로, 초음파 데이터 획득부는 도 1 에서 도시한 초음파 송수신부(10)에 동일 대응될 수 있으며, 프로브(2)에서 전송되는 초음파 에코 신호를 수신하고, 수신된 초음파 에코 신호를 이용하여 자체적으로 초음파 데이터를 획득할 수 있다. 또한 초음파 데이터 획득부는 도 2 의 무선 프로브(200)에 동일 대응될 수 있다. 초음파 데이터 획득부는 무선 프로브(200)에서 전송되는 초음파 에코 신호를 수신하고, 수신된 초음파 에코 신호를 이용하여 자체적으로 초음파 데이터를 획득할 수 있다.
다른 예로, 초음파 데이터 획득부는 외부 장치로부터 초음파 데이터를 수신할 수도 있다. 예를 들어 초음파 데이터 획득부는 도 1의 네트워크(3)로부터 초음파 데이터를 수신할 수 있다. 다만, 이에 한정되는 것은 아니고, 초음파진단장치(300)는 다양한 방법으로 초음파 영상 데이터를 획득할 수 있다.
또한, 제어부(320)는 노드들과 노드들을 연결하는 간선을 획득하고 복수개의 노드 및 간선에 근거하여, 제 1 초음파 영상에 포함되는 구조물을 획득하도록 제어할 수 있다. 또한, 제 1 정보는 간선 및 구조물 중 적어도 하나를 포함할 수 있다. 또한, 초음파진단장치(300)는 노드들의 순서를 시점 이동 순서로 획득할 수 있으며, 노드들의 순서 및 제 1 정보에 기초하여 시점을 이동하면 초음파 영상을 획득하도록 제어할 수 있다.
노드는 특정 지점에 위치한 마디점이며, 노드와 노드 사이는 간선으로 연결될 수 있다. 노드에는 분기점 노드(Branch), 말단노드(Leaf) 및 경로 노드(Path Node)가 있다. 말단 노드는 1 개의 다른 노드와 간선으로 연결되는 노드이다. 경로 노드는 2 개의 다른 노드와 간선으로 연결되는 노드이다. 또한, 분기점 노드는 3 개 이상의 다른 노드와 간선으로 연결되는 노드이다. 구조물은 노드들과 간선을 포함하는 그래프가 될 수 있다. 그래프는 노드와 노드 간의 관계를 표시하는 간선으로 구성된 그림을 나타낸다. 또한, 구조물은 노드들과 간선에 의해 형성되는 대상체에 대응되는 형태를 가질 수 있다. 예를 들어, 대상체가 혈관을 포함하는 심장인 경우, 구조물은 혈관의 분포를 사용자가 쉽게 파악할 수 있도록 실제 혈관과 동일 또는 유사한 형태를 갖는 혈관 구조물이 될 수 있다. 또한 노드는 대상체의 영상에 포함될 수 있으며, 디스플레이부가 초음파 영상과 함께 표시할 수 있다.
본원 발명의 다른 실시예에 따르면 노드는 초음파 데이터에 기초하여 획득될 수 있다. 예를 들어 초음파진단장치(300)는 중심선 추출 알고리즘을 이용하여 초음파 데이터로부터 노드들 및 간선 중 적어도 하나를 추출할 수 있다. 초음파진단장치(300)는 노드들 및 간선 중 적어도 하나에 기초하여 초음파 영상을 획득할 수 있다. 예를 들어 초음파진단장치(300)는 노드들 및 간선 중 적어도 하나를 시점으로 획득하고, 시점에서 바라본 초음파 영상을 획득할 수 있다.
또한 본원 발명의 다른 실시예에 따르면 도 18 (a) 를 참조하면, 초음파 데이터(1820)는 좌표계(1810)상의 데이터일 수 있다. 좌표계(1810)는 직교 좌표계, 원통형 좌표계 및 원좌표계 중 적어도 하나를 포함할 수 있다. 도 18 (a) 에는 좌표계(1810)가 직교 좌표계인 경우를 예시하였다. 제어부(320)는 초음파 데이터(1820)에서 소정의 거리만큼 떨어진 곳에 노드(1830)를 위치 시킬 수 있다. 예를 들어 제어부(320)는 노드를 좌표(x1, y1, z1)에 위치시킬 수 있다. 또한, 초음파진단장치(300)는 노드에 기초하여 초음파 영상을 획득할 수 있다. 예를 들어 초음파진단장치(300)는 노드를 시점으로 획득하고, 초음파 데이터(1820)에 기초하여 시점에서 바라본 초음파 영상을 획득할 수 있다. 이 경우 노드는 초음파 영상에 포함되지 않을 수 있다.
또한 위에서는 노드를 중심으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 초음파 데이터(1850)는 좌표계(1840) 상의 데이터 일 수 있다. 초음파진단장치(300)는 초음파 데이터(1850)에서 소정의 거리만큼 떨어진 곳에 궤도(1860)를 위치 시킬 수 있다. 또한, 초음파진단장치(300)는 궤도에 기초하여 초음파 영상을 획득할 수 있다. 예를 들어 초음파진단장치(300)는 초음파 데이터(1850)에 기초하여 궤도에서 바라본 초음파 영상을 획득할 수 있다.
초음파 영상은 제 1 초음파 영상과 제 2 초음파 영상을 포함할 수 있다. 제 1 초음파 영상은 대상체를 초음파 스캔하여 획득된 초음파 데이터에 기초하여 획득되는 영상이다. 구체적으로, 제 1 초음파 영상은 사용자가 관찰할 부분을 결정하기 위하여 이용되는, 대상체의 초음파 영상이다. 제 1 초음파 영상은 2D 단면 초음파 영상 및 3D 렌더링된 내시경 영상 중 적어도 하나가 될 수 있다. 또한 제 2 초음파 영상은 사용자가 대상체의 초음파 영상을 관찰하기 위해 초음파진단장치가 획득하는 초음파 영상이다. 구체적으로, 제 2 초음파 영상은 제 1 초음파 영상에 포함되는 소정 영역에 대응되는 초음파 영상이 될 수 있다. 예를 들어, 제 2 초음파 영상은 제 1 초음파 영상의 소정의 부분을 확대하여 나타낸 초음파 영상일 수 있다.
또 다른 예로, 제 2 초음파 영상은 제 1 초음파 영상의 소정의 부분의 단면을 나타내는 초음파 영상일 수 있다. 사용자는 대상체의 초음파 영상인 제 1 초음파 영상을 관찰하고, 관찰한 제 1 초음파 영상 상에서 앞으로 관찰할 부분을 결정한 후, 이러한 결정에 대응되는 제 2 초음파 영상을 관찰 할 수 있으므로, 실질적으로 제 1 초음파 영상과 제 2 초음파 영상은 하나의 화면 상에 디스플레이될 수 있다. 하지만, 이에 한정되는 것은 아니며, 사용자의 편의를 위해 제 1 초음파 영상과 제 2 초음파 영상은 서로 다른 화면을 통하여 디스플레이 될 수 있다. 예를 들어 제 1 초음파 영상은 제 2 초음파 영상의 소정의 부위에 미니 초음파 영상으로서 표시될 수도 있다. 제 1 초음파 영상은 대상체에 대한 초음파 영상의 전체를 표시한 영상일 수 있다. 제 2 초음파 영상은 제 1 초음파 영상의 소정의 영역을 확대한 화면일 수 있다. 제 1 초음파 영상은 제 2 초음파 영상의 소정의 부분에 표시되어, 사용자는 제 1 초음파 영상에 나타난 전체 그림을 보고 제 2 초음파 영상이 어느 부위의 확대 화면인지 확인할 수 있다.
또한 제 2 초음파 영상은 제 1 초음파 영상을 영상 처리하여 2D 및 3D 중 적어도 하나로 표현한 영상일 수 있다. 또한 제 2 초음파 영상은 초음파 데이터에 기초한 가상 내시경 영상을 포함할 수 있다. 따라서 사용자는 실제로 내시경을 하지 않고도 초음파진단장치를 이용하여 간편하게 대략적인 피검사자의 내시경 진단을 할 수 있다. 본 개시에서는 제 1 초음파 영상 및 제 2 초음파 영상의 구분이 필요한 곳에서는 구분하여 기재하였으나, 구분이 필요 없는 부분은 제 1 초음파 영상 및 제 2 초음파 영상을 포함하는 초음파 영상으로 기재하였다.
제어부(320)는 제 1 초음파 영상에 노드들 및 간선을 획득하고, 초음파 영상 상의 노드들 및 간선에서의 시점을 획득하여 사용자에게 제 2 초음파 영상을 제공할 수 있다. 본 발명에 따르면 시점은 노드들 및 간선을 따라 자동으로 이동될 수 있다. 구체적으로, 제어부(320)는 초음파 영상의 시점을 이동시키는데 있어서 일정 방향 또는 미리 설정된 규칙에 따라서 초음파 영상의 시점이 이동되도록 제어할 수 있다. 따라서, 사용자는 트랙볼로 시점을 이동해야 하는 수고를 덜 수 있다.
도 4 은 본 발명의 다른 실시예에 따른 초음파진단장치를 나타낸 도면이다.
도 4 를 참조하면, 본원 발명의 다른 실시예에 따른 초음파진단장치(400)는, 영상 생성부(310), 제어부(320), 입력부(430) 및 디스플레이부(440)를 포함한다. 초음파진단장치(400)에 포함되는 영상 생성부(410) 및 제어부(420)는 도 3 에서 설명한 영상 생성부(310) 및 제어부(320)와 동일하므로 도 3에서와 중복되는 설명을 생략하고, 이하에서는 입력부(430) 및 디스플레이부(440)에 대하여 설명을 한다.
입력부(430)는 도 1 의 입력 디바이스(50)에 대응될 수 있으므로 중복되는 설명은 생략한다. 입력부(430)는 사용자로부터 제 1 초음파 영상을 포함하는 사용자 인터페이스 화면을 통하여 사용자 입력을 수신할 수 있다. 입력부(430)는 입력 디바이스(50)에 대응될 수 있다. 예를 들어, 입력부(430)는 터치스크린으로 형성될 수 있으며, 터치스크린 상으로 디스플레이되는 제1 초음파 영상을 포함하는 사용자 인터페이스 화면을 통하여 사용자 입력을 수신할 수 있다. 입력부(430)가 수신한 입력에 기초하여, 제어부(320)는 제 1 초음파 영상에 노드들 및 간선을 획득하고, 초음파 영상 상의 노드들 및 간선에서의 시점을 획득하여 사용자에게 제 2 초음파 영상을 제공할 수 있다. 입력부(430)는 사용자로부터 시점 이동 입력을 수신할 수 있다. 예를 들어, 입력부(430)가 마우스를 포함하는 경우, 사용자는 입력부(430)인 마우스로 노드를 클릭하여 노드와 노드 사이를 시점 이동할 수 있다.
또한, 입력부(430)가 수신한 입력에 기초하여, 제어부(320)는 노드들의 순서를 획득할 수 있다. 제어부(320)는 노드들의 순서에 기초하여 시점을 이동하면서 초음파 영상을 획득할 수 있다.
디스플레이부(440)는 도 1 의 디스플레이부(25)에 대응될 수 있으므로 도 1에서와 중복되는 설명은 생략한다. 디스플레이부(440)는 제어부(340)의 제어에 따라서 소정 화면을 디스플레이한다. 구체적으로, 디스플레이부(440)는 디스플레이 패널(display panel)(미도시)을 포함하며, 디스플레이 패널 상으로 사용자 인터페이스 화면, 초음파 영상 등을 포함하는 의료 영상 화면 등을 디스플레이 할 수 있다. 디스플레이부(440)는 제 1 초음파 영상 및 제 2 초음파 영상을 디스플레이 할 수 있다. 또한 제어부(320)는 제 1 정보에 근거하여 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득할 수 있다. 디스플레이부(440)는 제 1 정보 및 제 2 정보 중 적어도 하나를 제 1 초음파 영상 상에 표시한 영상을 디스플레이할 수 있다. 여기서 시점의 방향(direction of viewpoint; 시선)은 초음파 영상을 획득하기 위한 소정의 위치에서의 방향을 의미한다.
또한, 본 발명의 다른 실시예에 따르면 초음파진단장치(400)는 영상 생성부(410), 제어부(420) 및 입력부(430)를 포함할 수 있다. 영상 생성부(410)는 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득할 수 있다. 또한, 입력부(430)는 사용자로부터 입력을 수신할 수 있다. 또한, 제어부(420)는 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 제 1 정보 및 수신된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다.
또한, 본 발명의 다른 실시예에 따르면 초음파진단장치(400)는 영상 생성부(410), 제어부(420) 및 디스플레이부(440)를 포함할 수 있다. 영상 생성부(410)는 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득할 수 있다. 제어부(420)는 제 1 초음파 영상에 포함되는 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하고, 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다. 또한 디스플레이부(440)는 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이할 수 있다. 디스플레이부(440)는 시점이 지나간 제 1 정보와 시점이 지나가지 않은 제 1 정보가 서로 구별되도록, 서로 다른 모양, 색, 투명도, 애니메이션 효과, 텍스트 등을 이용할 수 있다.
또한, 본 발명의 다른 실시예에 따르면 초음파진단장치(400)는 영상 생성부(410), 제어부(420) 및 입력부(430)를 포함할 수 있다. 영상 생성부(410)는 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득할 수 있다. 입력부(430)는 사용자로부터 입력을 수신할 수 있다. 제어부(420)는 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 수신된 입력에 기초하여 노드들의 순서를 획득하고, 노드들의 순서에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다.
도 5 는 본 발명의 일 실시예에 따른 초음파진단방법을 나타낸 도면이다.
도 5 를 참조하면, 본원 발명의 일 실시예에 따른 초음파진단방법은 제 1 초음파 영상을 획득하는 단계(510), 제 1 정보를 획득하는 단계(520), 제 2 초음파 영상들을 획득하는 단계(540)를 포함할 수 있다. 본 발명의 실시예에 따른 초음파진단방법은 도 3 및 도 4에서 설명한 본 발명의 실시예에 따른 초음파진단장치(300, 400)을 통하여 수행될 수 있다. 이하에서는 초음파진단장치(400)를 참조하여 본 발명의 실시예에 따른 초음파 진단 방법을 설명한다. 또한, 본 발명의 실시예에 따른 초음파 진단 방법의 상세한 설명에 있어서, 도 3 및 도 4를 참조하여 설명한 본 발명의 실시예에 따른 초음파진단장치(300, 400)에서와 중복되는 설명은 생략한다.
제 1 초음파 영상을 획득하는 단계(510)는 대상체를 스캔(scan)하여 초음파 데이터를 획득하고 초음파 데이터에 기초하여 영상 생성부(410)가 제 1 초음파 영상을 획득하는 단계이다. 510 단계의 동작은 프로브(2)를 통하여 전송되는 초음파 데이터에 근거하여 획득되는 제1 초음파 영상을 초음파진단장치(400)가 외부적으로 수신하거나 자체적으로 생성함으로써 수행될 수 있다. 제 1 정보를 획득하는 단계(520)는 제어부(420)가 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계이다. 520 단계의 동작은 제어부(420)에서 수행될 수 있다. 또한 제어부(420)는 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 수행할 수 있다.
제어부(420)는 제 1 정보에 근거하여 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득하는 단계를 수행할 수 있다. 또한 제어부(420)의 제어에 따라서 디스플레이부(440)는 제 1 정보 및 제 2 정보 중 적어도 하나를 제 1 초음파 영상 상에 표시한 영상을 디스플레이하는 단계를 수행할 수 있다.
제어부(320)는 노드들과 노드들을 연결하는 간선을 획득하는 단계 및 복수개의 노드 및 간선에 근거하여, 제 1 초음파 영상에 포함되는 구조물을 획득하는 단계를 수행할 수 있다. 제 1 정보는 간선 및 구조물 중 적어도 하나를 포함할 수 있다.
제 2 초음파 영상들을 획득하는 단계(540)는, 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하는 단계(단계 미도시); 및 영상 생성부가 획득된 노드들의 순서로 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계(단계 미도시)를 포함할 수 있다.
입력부(430)는 사용자로부터 제 1 초음파 영상 상에 제 1 정보와 관련한 입력을 수신하는 단계를 수행할 수 있다.
제어부(320)는 수신된 입력에 기초하여 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제 중 적어도 하나를 수행하는 단계를 수행할 수 있다.
제 2 초음파 영상들을 획득하는 단계(540)는, 사용자로부터 노드들 중 적어도 하나의 노드들을 선택하는 입력을 수신하는 단계, 및 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함할 수 있다.
제 2 초음파 영상들을 획득하는 단계는, 사용자로부터 노드들 중 적어도 하나의 노드들을 선택하는 입력을 수신하는 단계, 및 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함할 수 있다.
입력부(430)는 사용자로부터 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하는 단계를 수행할 수 있다. 제어부(320)는 수신된 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 수행할 수 있다.
입력부(430)는 사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하는 단계를 수행할 수 있다. 제어부(320)는 이동속도에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 수행할 수 있다. 또한, 상기 이동속도에 관련된 입력은 노드들 사이의 이동 시간을 포함할 수 있다. 따라서 사용자는 노드들 사이의 이동속도를 설정하여 자세히 관찰해야 하는 곳은 천천히 시점을 이동시킬 수 있다.
제 1 정보를 획득하는 단계는 중심선 추출 알고리즘을 포함하는 영상처리를 이용하여 초음파 영상으로부터 노드들 및 간선을 포함하는 제 1 정보를 추출하는 단계를 포함할 수 있다.
제 2 초음파 영상들을 획득하는 단계는, 추출된 제 1 정보에 기초하여 시점을 이동하며 자동으로 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
제 2 초음파 영상들을 획득하는 단계는, 노드 및 노드 사이의 간선을 따라 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함할 수 있다.
디스플레이부(440)는 시점이 지나간 영상들을 획득한 노드들 및 간선 중 적어도 하나를 디스플레이하는 단계를 수행할 수 있다.
또한 디스플레이부(440)는 시점이 지나간 노드들 및 간선 중 적어도 하나를 시점이 지나가지 않은 노드들 및 간선과 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이하는 단계를 수행할 수 있다. 예를 들어, 시점이 지나가지 않은 노드들 및 간선이 시점이 지나간 노드들 및 간선보다 투명하게 표시될 수 있다. 또한 시점이 지나가지 않은 노드들 및 간선이 시점이 지나간 노드들 및 간선과 다른 색으로 표시될 수 있다. 또한, 시점이 지나가지 않은 노드들은 세모로 시점이 지나간 노드들은 동그라미로 표시될 수 있다. 또한, 시점이 지나가지 않은 노드들 및 간선이 시점이 지나간 노드들 및 간선과 다른 애니메이션 효과를 이용하여 표시될 수 있다.
본 발명의 다른 실시예에 따른 초음파진단방법은 초음파 데이터 획득부(미도시)가 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계를 수행할 수 있다. 또한 입력부(430)가 사용자로부터 입력을 수신하는 단계를 수행할 수 있다. 또한, 제어부(420)가 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계 및 제 1 정보 및 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하는 단계를 수행할 수 있다.
본 발명의 다른 실시예에 따른 초음파진단방법은 초음파 데이터 획득부가 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계를 수행할 수 있다. 또한 제어부(420)가 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하는 단계 및 제 1 정보에 기초하여 시점을 이동하도록 제어하는 단계를 수행할 수 있다. 또한, 디스플레이부(440)는 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이하는 단계를 수행할 수 있다. 디스플레이부(440)는 시점이 지나간 제 1 정보와 시점이 지나가지 않은 제 1 정보가 서로 구별되도록, 서로 다른 모양, 색, 투명도, 애니메이션 효과, 텍스트 등을 이용할 수 있다.
본 발명의 다른 실시예에 따른 초음파진단방법은 영상 생성부(410)가 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 단계를 수행할 수 있다. 또한 입력부(430)가 사용자로부터 입력을 수신하는 단계를 수행할 수 있다. 또한 제어부(420)가 수신된 입력에 기초하여 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계, 수신된 입력에 기초하여 노드들의 순서를 획득하는 단계를 수행할 수 있다. 또한 제 1 정보 및 노드들의 순서에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 수행할 수 있다.
또한, 도 5 에 따른 초음파진단방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체가 있을 수 있다.
도 6 은 기존 초음파진단장치의 초음파 영상 상에서 시점 이동을 설명하기 위한 도면이다.
도 6 을 참조하면, 일반적인 초음파 진단장치는 사용자가 관심영역을 관찰하기 위한 시점 이동에 어려움이 있었다. 일반적인 초음파진단장치의 경우, 트랙볼을 통하여 입력되는 사용자 입력에 대응하여 초음파 영상의 시점을 조절한다. 사용자는 대상체의 진단을 위하여 초음파 영상의 시점을 이동시켜가면서 대상체를 관찰하여야 한다. 이하에서는 사용자가 트랙볼을 통하여 시점을 이동시키는 경우를 예로 들어 설명한다. 예를 들어 사용자가 도 6 의 초음파 영상(650) 상의 지점(653) 및 지점(654)을 차례대로 보기 위한 과정을 살펴보면 이하와 같다. 도 6(a)를 참조하면, 초음파 영상(610) 상에 초기 시점(611)이 지점(612)에 위치해 있다. 초음파 영상(610)상에 시점은 실제로 표시되지 않을 수 있으나 본 개시에서는 설명의 편의상 카메라 모양으로 시점을 표시하였다.
도 6(b)를 참조하면, 사용자는 초음파 영상(620)을 보면서 트랙볼을 이용하여 지점(622)로부터 지점(622) 및 지점(623)의 갈림길까지 시점(621)을 이동해야 한다. 다음으로 도 6(c)를 참조하면, 사용자는 초음파 영상(630)을 보면서 트랙볼을 이용하여 지점(633)까지 시점(631)을 이동해야 한다. 계속하여, 도 6(d)를 참조하면, 사용자는 초음파 영상(640) 상의 지점(644)로 이동하기 위하여 시점(641)을 다시 지점(643)과 지점(644)의 분기점까지 이동해야 한다. 다음으로 도 6(e)를 참조하면, 초음파 영상(650) 상의 최종 목적지 지점(654)까지 시점(651)을 이동해야 한다. 이러한 종래 기술은 사용자가 시점을 트랙볼을 이용하여 수동으로 이동해야 하므로, 초음파진단의 시점 이동에 불편함이 있었다.
또한, 도 6 은 갈림길이 2개인 경우이나 갈림길이 여러 갈래인 경우, 사용자가 이미 관찰한 영역과 관찰하지 않은 영역을 쉽게 파악하기 힘든 문제점이 있었다. 예를 들어, 초음파 영상(640) 상에서 사용자는 지점(643)으로부터 분기점까지 시점(641)을 이동하였다. 지점(642)에 대응되는 영역은 초음파 영상(610) 상에서 이미 관찰한 지점이므로 사용자는 지점(644)에 대응되는 영역을 관찰하길 원할 수 있다. 하지만, 종래 초음파진단장치(300)는 이동 경로 또는 관찰한 지점이 초음파 영상(640) 상에 표시되지 않았으므로, 사용자는 관찰하지 않은 지점이 지점(642)인지 아니면 지점(644)인지 헷갈릴 수 있다. 게다가 초음파 영상(640)이 실시간 영상인 경우, 초음파 영상이 계속적으로 변할 수 있으므로 문제는 더 심각해질 수 있다. 본원 발명은 이러한 종래 기술의 문제점을 해소할 수 있다.
본 발명의 실시예에 따른 초음파진단장치의 구체적인 동작은 이하에서 도 7 내지 도 17 을 참조하여 상세히 설명한다. 또한, 이하에서는 본 발명의 일 실시예에 따른 초음파진단장치로, 도 4 에 도시된 초음파진단장치(300)를 예로 들어 설명한다.
도 7 은 본원 발명의 일 실시예에 따른 초음파 영상 상에서 시점 이동을 나타낸 도면이다.
제 1 초음파 영상(710) 또는 초음파 데이터 중 적어도 하나에 기초하여 제어부(320)는 노드들(717, 712, 713 및 714)을 획득할 수 있다. 또한 노드와 노드 사이에 간선들(715, 716 및 718)을 획득할 수 있다. 노드들(717, 712, 713 및 714) 및 간선들(715, 716 및 718)은 트리 구조로 형성될 수 있다. 노드들은 제 1 정보에 포함될 수 있다. 노드들 각각은 디스플레이부(440) 상의 복수의 픽셀들 각각에 대응될 수 있다.
제어부(320)는 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하고, 영상 생성부(310)가 획득된 노드들의 순서로 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다. 예를 들어, 제어부(320)는 노드들(717, 712, 713 및 714) 및 간선들(715, 716 및 718) 중 적어도 하나의 이동 순서를 결정할 수 있다. 모든 노드를 통과하기 위하여 제어부(320)는 노드들의 순서(717 -> 712 -> 713 -> 712 -> 714)를 자동으로 획득할 수 있다. 또한, 제어부(320)는 간선을 따라 화면을 이동하도록 제어하여 제 2 초음파 영상들을 획득하도록 제어할 수 있다. 예를 들어 사용자로부터 소정의 입력을 수신한 초음파진단장치(300)는 초음파 영상(720) 상에서 시점을 이동시키면서 제 2 초음파 영상을 획득할 수 있다. 즉, 제어부(320)는 초음파 영상(720) 상에서 시점(721)을 최초 노드(727)에서 간선(728)을 따라 노드(722)까지 이동하도록 제어할 수 있다. 그 후 제어부(320)는 시점(721)을 획득된 노드들의 순서에 기초하여 간선(725)을 따라 노드(723)까지 이동하도록 제어할 수 있다.
또한, 제어부(320)는 제 1 정보 및 수신된 사용자의 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 예를 들어 초음파 영상(710)을 참조하면, 시점이 노드(712)에 위치해 있는 경우 입력부(430)는 사용자로부터 노드(713)으로 시점을 이동하라는 입력을 수신할 수 있다. 더 구체적으로 사용자는 마우스를 이용하여 노드(713)를 클릭할 수 있다. 초음파진단장치(300)는 수신한 입력에 기초하여 시점을 노드(712)에서 노드(713)으로 이동할 수 있다. 또한 초음파진단장치(300)는 시점을 노드(713)으로 이동 후 초음파 영상을 획득할 수 있다.
디스플레이부(440)는 초음파 영상(720) 상에 시점(721)이 이미 지나간 제 1 정보(예를 들어, 노드들 및 간선들)를 지나가지 않은 제 1 정보(예를 들어, 노드들 및 간선들)와 구별되도록 표시할 수 있다. 즉, 디스플레이부(440)는 시점(721)이 이동하며 초음파 영상을 획득한 노드들 및 간선을, 초음파 영상을 획득하지 못한 노드들 및 간선과 구별되도록 표시할 수 있다. 구체적으로, 디스플레이부(440)는 초음파 영상(720) 상에 시점(721)이 이미 지나간 노드들 및 간선과 지나가지 않은 노드들 및 간선을 다른 모양, 다른 색상, 및 다른 투명도 중 적어도 하나를 이용하여 구별되도록 표시할 수 있다.
제어부(320)는 시점이 지나가지 않은 노드들 및 간선을 시점이 지나간 노드들 및 간선보다 투명하게 표시하도록 제어할 수 있다. 또한 제어부(320)는 시점이 지나가지 않은 노드들 및 간선을 시점이 지나간 노드들 및 간선과 다른 색으로 표시하도록 제어할 수 있다. 또한, 제어부(320)는 시점이 지나가지 않은 노드들을 세모로 시점이 지나간 노드들을 동그라미로 표시하도록 제어할 수 있다. 또한, 제어부(320)는 시점이 지나가지 않은 노드들 및 간선이 시점이 지나간 노드들 및 간선과 다른 애니메이션 효과를 이용하여 표시하도록 제어할 수 있다.
또한, 제어부(320)는 노드들과 간선을 리스트로 표시하도록 제어할 수 있다. 제어부(320)는 리스트에서 시점이 지나가지 않은 노드들 및 간선을 시점이 지나간 노드들 및 간선과 구별되도록 표시하도록 제어할 수 있다. 예를 들어 초음파진단장치(300)는 리스트에서 제 2 초음파 영상을 획득한 노드들 및 간선의 글자를 두껍게 표시하거나, 글씨체를 달리할 수 있다. 또한, 초음파진단장치(300)는 리스트에서 제 2 초음파 영상을 획득한 노드들 및 간선의 글자 옆에 소정의 아이콘을 표시할 수 있다.
예를 들어 시점(721)이 지나간 노드들(727, 722 및 723)은 흰색 원으로 표시될 수 있으며, 지나가지 않은 노드(724)는 검은색 원으로 표시될 수 있다. 또한 시점(721)이 지나간 간선들(728 및 725)는 점선으로 표시될 수 있다. 사용자는 이미 관찰한 노드 및 간선을 용이하게 파악할 수 있다. 도 7 에서는 시점이 지나간 노드들 및 간선들을 초음파 영상(720) 상에 점과 선으로 표시하는 실시예를 도시하였으나 이에 한정되는 것은 아니다. 예를 들어, 시점이 지나간 노드들의 명칭 및 간선의 명칭을 리스트 형식으로 보여줄 수 있다.
다음으로 시점(731)은 노드(733)에서 간선(735)을 지나 노드(732)에 도달할 수 있다. 그 후 시점(731)은 획득된 노드들의 순서에 따라 간선(736)을 따라 노드(734)에 도달할 수 있다. 시점(731)이 모든 노드들 및 간선들을 지나갔으므로, 초음파진단장치(300)는 초음파 영상(730) 상에 시점(731)이 이미 지나간 노드들 및 간선들은 지나가지 않은 노드들 및 간선들과 서로 다른 모양, 다른 색상, 및 다른 투명도 중 적어도 하나를 이용하여 구별되도록 표시할 수 있다. 서로 다른 모양, 다른 색상 및 다은 투명도 중 적어도 하나를 이용하여 구별되도록 표시하는 것은 이미 상술하였으므로 설명은 생략한다. 입력부(430)는 사용자로부터 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하고, 제어부(320)는 수신된 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득할 수 있다.
예를 들어 도 7 을 참조하여 설명하면, 본원 입력부(430)는 사용자로부터 노드(713) 및 노드(714)를 차례로 선택하는 입력을 수신할 수 있다. 예를 들어 사용자는 시점(711)이 노드(717)에 있은 것을 보고, 노드(713) 및 노드(714)를 차례로 클릭할 수 있다. 제어부(320)는 시점(711)의 위치 및 수신된 사용자의 입력에 기초하여 노드들의 순서(717 -> 712 -> 713 -> 712 -> 714)를 자동으로 획득할 수 있다. 노드(712)는 사용자에 의하여 직접적으로 선택된 적은 없지만, 시점(711)이 노드(717)에서 간선들을 따라 노드(713)으로 이동하기 위해서, 노드(712)가 노드들의 순서에 포함될 수 있다. 제어부(320)는 획득된 노드들의 순서대로 시점을 이동하여 초음파 영상을 획득하도록 제어할 수 있다. 시점의 이동 과정은 상술한 바 있으므로 여기에서 따로 설명하지는 않는다.
도 7 에서는 간선을 따라 시점이 이동하는 과정을 설명하였으나 이에 한정되는 것은 아니다. 예를 들어, 본원 입력부(430)는 사용자로부터 노드(713) 및 노드(714)를 차례로 선택하는 입력을 수신할 수 있다. 예를 들어 사용자는 시점(711)이 노드(717)에 있는 것을 보고, 노드(713) 및 노드 (714)를 차례로 클릭할 수 있다. 제어부(320)는 수신된 사용자의 입력에 기초하여 시점이 노드(717)에서 노드(713)로 건너뛰고, 또한 노드(713)에서 노드(714)로 건너뛰도록 제어할 수 있다.
도 8 은 본원 발명의 일 실시예에 따른 초음파 영상 상에서 시점 이동을 나타낸 도면이다.
도 8 을 참조하면, 대상체는 혈관이나 소화관, 유관 등과 같은 관형 조직을 포함하는 신체 부위일 수 있다. 영상 생성부(310)는 초음파 데이터에 기초하여 대상체의 제 1 초음파 영상(800)을 획득할 수 있다. 제어부(320)는 초음파 영상(800) 또는 초음파 데이터 중 적어도 하나에 기초하여 노드들(810, 820, 830, 840, 850, 860 및 870) 및 간선들(811, 812, 813, 821, 841 및 842)을 획득할 수 있다. 입력부(430)는 사용자로부터 입력을 수신하고, 제어부(320)는 수신된 입력에 기초하여 노드들 및 간선들을 획득할 수 있다. 또는 제어부(320)가 초음파 영상(800)을 영상처리하여 노드들 및 간선들을 추출할 수 있다. 영상처리는 중심선 추출 알고리즘이 포함될 수 있다. 노드들 중 노드(850), 노드(830), 노드(860) 및 노드(870)는 말단 노드 이다. 또한 노드(820)는 경로 노드이며, 노드(810), 노드(840)는 분기 노드이다.
도 7 에서 설명한 바와 같이 제어부(320)는 자동으로 모든 노드들 및 간선들을 통과하도록 시점 이동을 수행할 수 있다. 하지만 사용자는 모든 노드들이 아닌 일부 노드들에서 초음파 영상을 획득하고자 하는 경우가 있을 수 있다. 입력부(430)는 사용자로부터 노드들 중 적어도 하나의 노드들을 선택하는 입력을 수신하고 제어부(320)는 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어할 수 있다. 또한, 입력부(430)는 사용자로부터 노드들 중 적어도 하나의 노드들을 선택하는 입력을 수신하고 제어부(320)는 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어할 수 있다.
본원 발명의 일 실시예에 따른 초음파진단장치는 입력부(430)가 사용자로부터 통과할 노드들을 수신할 수 있다. 예를 들어, 입력부(430)가 사용자로부터 노드(810), 노드(850) 및 노드(860)를 차례로 선택하는 입력을 수신할 수 있다. 이 경우, 제어부(320)는 노드(810), 노드(850) 및 노드(860)를 차례로 통과하도록 시점 이동의 순서를 획득할 수 있다. 또한 초음파진단장치(300)는 시점 이동의 순서를 제 1 정보에 포함할 수 있다.
예를 들어 시점 이동의 순서는 노드(810), 노드(820), 노드(850) 노드(820), 노드(810), 노드(840) 및 노드(860)일 수 있다. 노드(820) 및 노드(840)는 입력부(430)가 사용자로부터 수신한 노드들은 아니지만, 사용자로부터 수신한 노드들을 통과하는 경로 상에 있는 노드로서 제어부(320)가 시점 이동 순서에 추가할 수 있다. 제어부(320)는 상술한 바와 같은 노드들의 순서에 기초하여 간선들을 따라 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 즉, 제어부(320)는 간선(811), 간선(821), 간선(821), 간선(811), 간선(813) 및 간선(841)을 따라 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 위에서는 입력부(430)가 사용자로부터 노드들의 선택을 수신하는 예를 설명하였으나 이에 한정되는 것은 아니며 간선을 선택할 수도 있다. 입력부(430)가 사용자로부터 간선들의 선택을 수신하여 제어부(320)가 시점 이동을 하도록 제어하는 것은 상술한 바와 유사하게 이루어 질 수 있다.
본원 발명의 다른 실시예에 따른 초음파진단장치는 시점 이동이 간선을 따르지 않을 수도 있다. 예를 들어, 입력부(430)가 사용자로부터 노드(810), 노드(850) 및 노드(860)를 차례로 선택하는 입력을 수신할 수 있다. 이 경우, 제어부(320)는 노드(810), 노드(850) 및 노드(860)를 차례로 통과하도록 시점 이동의 순서를 획득할 수 있다. 예를 들어 시점 이동의 순서는 노드(810), 노드(850) 및 노드(860)일 수 있다. 제어부(320)는 상술한 바와 같은 노드들의 순서에 기초하여 노드(810)에서의 초음파 영상을 획득하고, 다음으로 바로 노드(850)에서의 초음파 영상을 획득하고, 마지막으로 노드(860)에서의 초음파 영상을 차례로 획득하도록 제어할 수 있다. 또한 사용자는 노드들이 아닌 간선을 선택할 수 있으며, 이 경우 제어부(320)는 선택된 간선에서의 초음파 영상을 획득하도록 제어할 수 있다.
본원 발명의 다른 실시예에 따른 초음파진단장치는 입력부(430)가 사용자로부터 방문하지 않을 노드들을 수신할 수 있다. 예를 들어, 입력부(430)가 사용자로부터 노드(820), 노드(850) 및 노드(860)를 차례로 선택하는 입력을 수신할 수 있다. 이 경우, 제어부(320)는 노드(820), 노드(850) 및 노드(860)를 제외한 노드(810), 노드(830), 노드(840) 및 노드(870)를 차례로 방문하도록 시점 이동의 순서를 획득할 수 있다. 예를 들어 시점 이동의 순서는 노드(810), 노드(830), 노드(810) 노드(840) 및 노드(870)일 수 있다. 노드(820) 및 노드(840)는 입력부(430)가 사용자로부터 수신한 노드들은 아니지만, 제어부(320)는 상술한 바와 같은 노드들의 순서에 기초하여 간선들을 따라 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 즉, 제어부(320)는 노드(830), 노드(810), 노드(840) 및 노드(870)로 연결되는 영역을 관찰하기 위해서, 시점을 이동시켜가며 대상체를 관찰하기 위해서, 간선(812)의 위에서 아래 방향 및 간선(812)의 아래 방향에서 윗방향, 간선(813)의 위에서 아래 방향 및 간선(813)의 아래 방향에서 윗방향, 및 간선(842)의 위에서 아래 방향 및 간선(842)의 아래 방향에서 윗방향을 따라 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 위에서는 입력부(430)가 사용자로부터 방문하지 않을 노드들의 선택을 수신하는 예를 설명하였으나 이에 한정되는 것은 아니며 간선을 선택할 수도 있다. 입력부(430)가 사용자로부터 간선들의 선택을 수신하여 제어부(320)가 시점 이동을 하도록 제어하는 것은 상술한 바와 유사하게 이루어 질 수 있다. 본원 발명의 다른 실시예에 따른 초음파진단장치는 시점 이동이 간선에 기초하지 않을 수도 있다.
도 9 는 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면이다.
초음파 영상(910)은 대상체의 2차원(2-dimension) 평면도일 수 있다. 또는 초음파 영상(910)은 대상체의 3차원(3D: 3-dimensional) 초음파 영상일 수 있다. 초음파 영상(920)은 대상체의 2차원 측면도 또는 2차원 단면도일 수 있다. 초음파 영상(930)은 대상체의 2D 정면도일 수 있다. 예를 들어, 초음파 영상(940)은 초음파 데이터에 기초하여 정면에서 대상체를 관찰한 3차원 영상일 수 있다. 초음파진단장치(300)는 대상체의 평면도, 측면도, 정면도 및 3차원 초음파 영상 중 적어도 하나를 획득할 수 있다.
초음파 영상(900)은 사용자가 관찰할 부분을 정하기 위해 획득되는 제 1 초음파 영상 및 사용자가 관찰할 부분의 영상인 제 2 초음파 영상이 함께 표시되어 있을 수 있다. 예를 들어 초음파 영상(910)상에 노드들 및 간선들이 표시되어 있다. 사용자는 초음파 영상(910) 상의 노드들 및 간선들을 선택하여 관찰할 부분을 정할 수 있으므로 초음파 영상(910)은 제 1 초음파 영상이 될 수 있다. 또한 사용자가 초음파 영상(910) 상의 노드들 및 간선들을 선택한 경우 초음파 영상(910)이 해당 노드들 및 간산들을 중심으로 확대될 수 있고, 확대된 초음파 영상(910)이 제 2 초음파 영상이 될 수 있다. 또는 해당 노드들 및 간선에서의 대상체의 3D 초음파 영상(940)이 제 2 초음파 영상이 될 수 있다. 초음파 영상(910)에 대상체의 갈래 구조가 가장 잘 나타나 있어 초음파 영상(910)을 기준으로 설명하였으나 이에 한정되는 것은 아니며, 초음파 영상(920), 초음파 영상(930) 및 초음파 영상(940) 중 적어도 하나에 대해서도 제 1 초음파 영상 및 제 2 초음파 영상이 표시될 수 있다.
초음파 영상(910) 상에 노드들(911, 912, 913, 914, 915 및 916)은 입력부(430)가 수신한 사용자로부터의 입력에 의하여 획득될 수 있다. 또한 노드들(911, 912, 913, 914, 915 및 916)은 제어부(320)에 의하여 자동으로 획득될 수 있다. 노드와 노드 사이에는 간선이 있을 수 있다. 노드(912)는 초음파 영상(940) 상의 지점(941)에 대응될 수 있다. 또한, 노드(914)는 초음파 영상(940) 상의 지점(942)에 대응될 수 있다. 도 9 에는 화살표로 대응 관계를 표시하였으나 실제 초음파 영상(900)에는 화살표가 표시되지 않을 수 있다. 또한 노드(915) 및 노드(916)는 초음파 영상(940) 상의 지점(943) 및 지점(944)에 각각 대응될 수 있다.
도 10 은 본원 발명의 일 실시예에 따른 사용자의 입력에 기초하여 노드를 획득하는 과정을 나타낸 도면이다.
입력부(430)는 사용자로부터 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제하는 입력 중 적어도 하나를 수신하고, 제어부(320)는 수신된 입력에 기초하여 노드들 및 간선을 편집할 수 있다.
예를 들어, 초음파 영상(1010)은 대상체의 평면도 일 수 있다. 입력부(430)는 사용자로부터 입력을 수신하고, 제어부(320)는 수신된 입력에 기초하여 노드를 획득할 수 있다. 예를 들어 사용자는 마우스를 이용하여 초음파 영상(1010) 상에서 노드를 생성하고자 하는 곳에 지시자(1012)를 위치시킬 수 있다. 입력부(430)는 사용자로부터 노드(1011)의 위치에 입력을 수신할 수 있다. 제어부(320)는 수신된 입력에 기초하여 노드(1011)를 획득할 수 있다. 또한 사용자는 초음파 영상(1020) 상에서 지시자(1022)를 이동시킬 수 있다. 입력부(430)는 사용자로부터 노드(1021)의 위치에 입력을 수신할 수 있다. 제어부(320)는 수신된 입력에 기초하여 노드(1021)를 획득할 수 있다. 또한 제어부(320)는 노드(1024) 및 노드(1021)에 기초하여 간선(1023)을 자동으로 획득할 수 있다.
또한, 상술한 바와 같이, 제어부(320)는 수신된 입력에 기초하여 노드(1021)를 획득하면서, 노드(1024)와 노드(1021)의 시점 이동의 순서를 결정할 수 있다. 예를 들어 기존의 노드(1024)에 더하여 노드(1021)가 추가되었으므로, 제어부(320)는 노드(1024) 및 노드(1021)를 차례로 통과하도록 노드들의 시점 이동 순서를 획득할 수 있다. 제어부(320)는 노드들의 순서 및 제 1 정보에 기초하여 시점을 이동하며 초음파 영상들을 획득하도록 제어할 수 있다.
도 11a 내지 도 11c 는 본원 발명의 일 실시예에 따라 제어부가 노드 및 간선을 자동으로 획득하는 과정을 나타낸 도면이다.
제어부(320)는 중심선 추출 알고리즘을 이용하여 초음파 데이터 및 초음파 영상 중 적어도 하나로부터 노드들 및 간선을 추출할 수 있다. 초음파 영상(1100)은 대상체인 혈관의 초음파 영상을 나타낸 도면이다. 혈관은 3D 구조를 가지고 있고 복잡하게 얽혀 있다. 초음파진단장치(300)는 3D 구조의 영상을 영상 처리하여 노드들 및 간선을 획득할 수 있다. 다만 이하에서는 설명의 편의를 위하여 대상체가 2D의 나뭇잎 모양인 경우를 가정하여 노드들 및 간선을 획득하는 과정을 설명하겠다.
제어부(320)는 초음파 영상(1100)에서 추출된 구조물(예를 들어, 혈관)과 추출되지 않은 구조물이 명확히 구별되도록 영상 처리할 수 있다. 예를 들어, 도 11a 를 참조하면, 초음파 영상(1100)에서 배경(1102)은 흰색으로 대상체(1101)는 검은색으로 표시될 수 있다. 초음파진단장치(300)는 초음파 영상(1100)을 영상 처리하여 대상체(1111)의 중심선을 획득할 수 있다. 예를 들어, 제어부(320)는 대상체(1101)의 검은색에 포함된 각각의 픽셀에 대하여 배경(1102)의 흰색 영역과의 거리를 계산할 수 있다. 예를 들어, 초음파 영상(1100)을 확대한 영상(1105)을 참조하면, 제어부(320)는 대상체(1101)에 포함된 검은색 픽셀(1104)에 대하여 가장 가까운 배경(1102)의 흰색 픽셀(1103)을 결정할 수 있다. 또한, 제어부(320)는 검은색 픽셀(1104)과 결정된 흰색 픽셀(1103)과의 거리를 '2'로 계산할 수 있다. 또한, 제어부(320)는 대상체(1101)에 포함된 검은색 픽셀(1107)에 대하여 가장 가까운 배경(1102)의 흰색 픽셀(1106)을 결정할 수 있다. 또한, 제어부(320)는 검은색 픽셀(1107)과 결정된 흰색 픽셀(1106)과의 거리를 '1'로 계산할 수 있다. 또한 제어부(420)는 계산된 거리를 픽셀값으로 한 영상(1110)을 획득할 수 있다.
영상(1110)을 참조하면, 계산된 픽셀값이 적용된 대상체(1111)가 표시되어 있다. 즉 대상체(1111)는 중심으로 갈수록 밝은 색이 배경쪽으로 갈수록 어두운 색이 표시될 수 있다.
제어부(320)는 영상(1110)에 적절한 커널(kernel)을 적용할 수 있다. 예를 들어 적절한 커널은 반경 2 를 갖는 라플라스-가우시안 커널일 수 있다. 제어부(320)는 영상처리한 영상(1120)을 획득할 수 있다. 영상(1120)은 영상(1110)에 기초하여 중심선(1121)을 획득할 수 있다.
제어부(320)는 영상(1120)을 영상처리하여 중심선(1131)만을 획득할 수 있다. 영상(1130)은 흰색 바탕에 검은색 중심선(1131)을 포함할 수 있다.
또한, 도 11b 를 참조하면, 제어부(320)는 영상(1130)을 파티셔닝 할 수 있다. 파티셔닝은 영상(1130)을 조각내어 조각 별로 분석하는 것을 의미한다. 영상(1140)을 참조하면 영상(1130)이 16 X 22 의 조각으로 나누어져 있다. 조각(1141)을 확대한 영상(1150)을 참조하면 4 X 4 픽셀로 이루어져 있음을 알 수 있다. 영상(1150)에는 검은색 픽셀(1151)과 흰색 픽셀(1152)을 포함할 수 있다. 제어부(320)는 조각(1141) 별로 검은색 픽셀의 중심 픽셀을 결정할 수 있다. 예를 들어 영상(1150)에서 검은색 픽셀들의 좌표는 각각 (2, 1),(2, 2), (3, 2), (3, 3) 및 (3, 4) 일 수 있다. 중심 픽셀의 좌표는 아래 <식 1> 에 의하여 계산될 수 있다.
<식 1>
XCM = (Σi∈검은색 픽셀들 Xi)/검은색 픽셀들의 개수
YCM = (Σi∈검은색 픽셀들 Yi)/검은색 픽셀들의 개수
즉, XCM = (2+2+3+3+3)/5=2.6, YCM = (1+2+2+3+4)/5=2.4 일 수 있으며 각각의 값을 반올림하여 (XCM, YCM) = (3, 2) 일 수 있다. 계산된 중심 픽셀들은 노드들이 될 수 있다. 또한 노드 및 노드를 잇는 선은 간산이 될 수 있다.
도 11c 를 참조하면, 상술한 바와 같은 과정을 통하여 제어부(320)는 중심 픽셀들 및 중심 픽셀들을 잇는 선으로 이루어진 영상(1160)을 획득할 수 있다. 다만 영상(1160)의 영역(1161)에는 작은 사이클들(cycles)(1170)이 있을 수 있다. 제어부(320)는 이러한 사이클을 제거한 영상(1180)을 획득할 수 있다. 영역(1181)을 참조하면 영역(1161)과 차이가 있음을 알 수 있다. 제어부(320)는 도 11 에서 설명된 과정으로 획득된 노드들 및 간선들에 기초하여 제 2 초음파 영상들을 획득할 수 있다.
도 12 는 본원 발명의 일 실시예에 따라 노드를 편집하는 과정을 나타낸 도면이다.
초음파 영상(1210)에는 노드들을 포함할 수 있다. 사용자는 노드를 삭제하기 위하여 표시자(1213)를 이동하여 노드(1211)를 선택할 수 있다. 입력부(430)는 사용자로부터 입력을 수신할 수 있다. 제어부(320)는 수신된 입력에 기초하여 노드(1211)를 삭제할 수 있다. 초음파 영상(1220)을 참조하면 노드(1211)가 삭제되어 있다. 또한 노드(1211) 및 노드(1212)를 연결하는 간선 또한 삭제될 수 있다. 도 12 에서는 노드를 삭제하는 실시예를 도시하였으나, 이와 유사한 과정에 의하여 노드의 위치의 수정 및 추가가 가능할 수 있다.
도 13a 는 본원 발명의 일 실시예에 따라 노드 사이를 이동하는 과정을 나타낸 도면이다.
초음파 영상(1310)은 대상체의 2D 평면도일 수 있다. 초음파 영상(1320)은 대상체의 2D 측면도일 수 있다. 초음파 영상(1330)은 대상체의 2D 정면도일 수 있다. 초음파 영상(1340)은 초음파 데이터에 기초한 대상체의 3D 영상일 수 있다. 초음파진단장치(300)는 대상체의 평면도, 측면도, 정면도 및 3차원 초음파 영상 중 적어도 하나를 획득할 수 있다.
초음파 영상(1300)은 사용자가 관찰할 부분을 정하기 위해 이용되는 제 1 초음파 영상 및 사용자가 대상체의 초음파 영상을 관찰하기 위해 이용되는 관찰할 부분의 영상인 제 2 초음파 영상이 함께 표시되어 있을 수 있다. 예를 들어 초음파 영상(1310)은 사용자가 대상체를 관찰할 수 있도록 초음파 진단장치가 획득하는 초음파 영상이면서, 사용자가 관찰할 부분을 결정하기 위하여 이용되는 초음파 영상일 수 있다.
구체적으로 초음파 영상(1310) 상에 간선이 없이 노드들이 표시되어 있을 수 있다. 초음파진단장치(300)는 사용자의 입력에 기초하여 간선을 획득하여 표시할 수 있다. 사용자는 초음파 영상(1310) 상의 노드들을 선택하여 관찰할 부분을 정할 수 있으므로 초음파 영상(1310)은 제 1 초음파 영상이 될 수 있다. 또한 사용자가 초음파 영상(1310) 상의 노드들을 선택한 경우 초음파 영상(1310)이 선택된 노드들을 중심으로 확대될 수 있고, 확대된 초음파 영상(1310)이 제 2 초음파 영상이 될 수 있다. 또한, 선택된 노드를 시점으로하여 관찰한 대상체의 3D 초음파 영상(1340)이 제 2 초음파 영상이 될 수 있다. 위에서는 초음파 영상(1310)에 대상체의 갈래 구조가 가장 잘 나타나 있어 초음파 영상(1310)을 기준으로 설명하였으나 이에 한정되는 것은 아니며, 초음파 영상(1320), 초음파 영상(1330) 및 초음파 영상(1340) 중 적어도 하나에 대해서도 제 1 초음파 영상 및 제 2 초음파 영상이 표시될 수 있다.
제어부(320)는 제 1 정보에 근거하여 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득할 수 있다. 또한, 디스플레이부(440)는 제 1 정보 및 제 2 정보 중 적어도 하나를 제 1 초음파 영상 상에 표시한 영상을 디스플레이할 수 있다. 여기서 시점의 방향(direction of viewpoint; 시선)은 초음파 영상을 획득하기 위한 소정의 위치에서의 방향을 의미한다. 예를 들어 초음파 영상(1310)에는 제 2 정보인 시점의 위치 및 시선(1311)이 디스플레이될 수 있다. 시점의 위치는 노드(1312)가 될 수 있다. 시점의 위치 및 시선(1311)에 기초하여 대상체의 3D 영상이 초음파 영상(1340)에 디스플레이될 수 있다. 초음파진단장치(300)는 사용자로부터 시선을 수정하는 입력을 수신할 수 있으며, 수정된 시선에 기초하여 초음파 영상들(1310 내지 1340) 중 적어도 하나가 수정될 수 있다.
현재 시점은 노드(1312)에 위치해 있을 수 있다. 초음파 영상(1340)에는 각 노드에 이름이 할당될 수 있다. 예를 들어 노드(1312), 노드(1313), 노드(1314), 노드(1315) 및 노드(1316)는 각각 A노드(1341), B노드(1342), C노드(1343), D노드(1344) 및 E노드(1345)로 이름이 할당될 수 있다. 또한 이름이 할당된 노드들이 표시된 초음파 영상(1340)이 디스플레이부(440)에 디스플레이될 수 있다.
또한, 초음파 영상(1340)에는 시점 이동을 위한 아이콘들(1346 및 1347)을 디스플레이 할 수 있다. 초음파진단장치(300)는 사용자의 입력에 기초하여 로 아이콘을 선택하여 시점을 이동할 수 있다. 예를 들어, 사용자는 입력부(430)를 이용하여 표시자(1350)를 움직여서 아이콘(1347)을 선택할 수 있다. 제어부(320)는 사용자로부터 수신한 선택에 기초하여, 간선(1349)을 따라 A노드(1341)에서 C노드(1343)까지 시점을 이동할 수 있다. 또한, 사용자는 입력부(430)를 이용하여 표시자(1350)를 움직여서 아이콘(1346)을 선택할 수 있다. 제어부(320)는 사용자로부터 수신한 선택에 기초하여, 간선(1348)을 따라 A노드(1341)에서 B노드(1342)까지 시점을 이동할 수 있다.
도 13b는 본원 발명의 일 실시예에 따른 노드 리스트를 나타낸 도면이다.
본원 발명의 일 실시예에 따르면, 노드 리스트(1360)가 초음파 영상(1300)과 함께 디스플레이부(440)의 소정의 부위에 표시될 수 있다. 노드 리스트(1360)에는 제어부(320)가 획득한 노드들(1361 내지 1365)이 나타날 수 있다. 또한 사용자는 표시자(1350)로 노드들 중 하나를 선택하여 시점을 이동할 수 있다. 예를 들어, 사용자는 입력부(430)를 이용하여 표시자(1350)를 움직여서 B노드(1362)를 선택할 수 있다. 제어부(320)는 사용자로부터 수신한 선택에 기초하여, A노드(1341)에서 B노드(1342)까지 시점을 이동할 수 있다.
또한, 노드 리스트(1360)에서 제 2 초음파 영상을 획득한 노드(즉, 시점이 지나간 노드)는 제 2 초음파 영상을 획득하지 않은 노드(즉, 시점이 지나가지 않은 노드)와 다르게 표시될 수 있다. 노드 리스트(1360)에서 제 2 초음파 영상을 획득한 노드들을 제 2 초음파 영상을 획득하지 않은 노드들과 서로 다른 텍스트 서식으로 표시할 수 있다. 예를 들어 초음파진단장치(300)는 제 2 초음파 영상을 획득한 노드의 글자를 두껍게 표시하거나, 글씨체를 달리할 수 있다. 또한, 제 2 초음파 영상을 획득한 노드들의 글자 옆에 소정의 아이콘을 표시할 수 있다.
도 13b 에서는 노드들에 대해서만 예시하였으나, 간선들에 대한 간선 리스트도 표시될 수 있다. 또한 간선 리스트에서 제 2 초음파 영상을 획득한 간선(즉, 시점이 지나간 간선)은 제 2 초음파 영상을 획득하지 않은 간선(즉, 시점이 지나가지 않은 간선)과 다르게 표시될 수 있다.
도 14 내지 도 17 은 본원 발명의 일 실시예에 따라 노드 사이를 이동하는 과정을 나타낸 도면이다.
도 14 는 본원 발명의 일 실시예에 따른 초음파 영상들을 나타낸 도면이다.
초음파 영상(1410)은 대상체의 2D 평면도일 수 있다. 초음파 영상(1420)은 대상체의 2D 측면도일 수 있다. 초음파 영상(1430)은 대상체의 2D 정면도일 수 있다. 초음파 영상(1440)은 초음파 데이터에 기초한 대상체의 3D 영상일 수 있다. 초음파진단장치(300)는 대상체의 평면도, 측면도, 정면도 및 3차원 초음파 영상 중 적어도 하나를 획득할 수 있다.
도 14 를 참조하면, 초음파 영상(1410)은 노드들(1411, 1413, 1414, 1415 및 1416)이 표시될 수 있다. 또한, 노드와 노드 사이를 잇는 간선이 표시될 수 있다. 또한 초음파 영상(1410)에 대응되는 3D 초음파 영상(1440)에는 노드들(1441, 1442, 1443, 1444 및 1445)이 표시될 수 있다. 초음파 영상(1410)은 시선(1412)이 표시될 수 있다. 시선(1412)에 기초하여 대상체의 2D 측면도 초음파 영상(1420), 2D 정면도 초음파 영상(1430) 및 3D 영상(1440)이 표시될 수 있다. 초음파진단장치(300)는 사용자로부터 시선을 수정하는 입력을 수신할 수 있으며, 수정된 시선에 기초하여 초음파 영상들(1410 내지 1440)이 수정될 수 있다.
사용자는 초음파 영상(1410) 또는 초음파 영상(1440)에서 노드를 표시자(1450)로 선택하여 해당 노드로 시점을 이동할 수 있다. 또한 도 8 에서 설명한 바와 같이 방문할 여러 노드를 선택하거나, 방문하지 않을 여러 노드를 선택할 수도 있다. 예를 들어 사용자가 입력부(430)를 통하여 표시자(1450)로 노드C(1414 또는 1443)를 선택할 수 있다. 제어부(320)는 시점의 위치 및 사용자의 선택에 기초하여 노드A(1411)로부터 노드C(1414)까지 시점을 이동하면서 제 2 초음파 영상을 획득하도록 초음파진단장치(300)를 제어할 수 있다.
도 15 는 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면으로서, 도 14 에서 이어지는 도면이다.
도 15a 를 참조하면, 도 14 에서 사용자가 노드C를 선택하여 시점이 노드C(1512 또는 1541)로 이동하였음을 알 수 있다. 초음파 영상들(1510, 1520, 1530 및 1540)은 시점이 노드C 에 있는 경우의 초음파 영상들이다. 초음파 영상(1510)은 대상체의 2D 평면도일 수 있다. 초음파 영상(1520)은 대상체의 2D 측면도일 수 있다. 초음파 영상(1530)은 대상체의 2D 정면도일 수 있다. 초음파 영상(1540)은 초음파 데이터에 기초한 대상체의 3D 영상일 수 있다. 초음파 영상(1510)은 도 14의 초음파 영상(1410)의 확대화면일 수 있다. 초음파 영상(1520), 초음파 영상(1530) 및 초음파 영상(1540)은 시선(1511)에 기초하여 획득된 초음파 영상일 수 있다.
도 15a 를 참조하면, 초음파 영상들의 소정의 부위에는 미니 초음파 영상(1570)이 표시될 수 있다. 예를 들어 초음파 영상(1510)의 소정의 영역(1560)에 미니 초음파 영상(1570)이 표시될 수 있다. 미니 초음파 영상은 사용자가 관찰할 부분을 정하기 위해 이용하는 제 1 초음파 영상일 수 있다.
미니 초음파 영상(1570)에는 초음파 영상(1510)과 다르게 노드A 내지 노드E 가 모두 표시될 수 있다. 초음파진단장치(300)가 제 2 초음파 영상을 획득한 노드들 및 간선은 제 2 초음파 영상을 획득하지 않은 노드들 및 간선과 다르게 미니 초음파 영상(1570) 상에 표시될 수 있다. 따라서 사용자는 제 2 초음파 영상이 획득된 노드들 및 간선을 용이하게 알 수 있다. 예를 들어 노드A(1571) 및 노드C(1573)는 사용자가 관찰한 노드들이므로 노드의 이름인 A 및 C에 네모난 테두리가 표시될 수 있다. 또는 노드의 이름인 A 및 C 가 볼드체(bold)로 표시될 수 있다. 또한 간선(1572)은 이미 관찰한 간선이므로 다른 간선과 다르게 점선으로 표시될 수 있다. 사용자는 미니 초음파 영상(1570) 상에 노드를 클릭하여 해당 노드로 시점을 이동할 수 있다. 도 8 에서 설명한 바와 같이 방문할 여러 노드를 선택하거나, 방문하지 않을 여러 노드를 선택할 수도 있다.
또한, 초음파 영상(1510)은 노드들(1512, 1513, 및 1514)을 포함할 수 있다. 또한, 노드와 노드사이를 잇는 간선이 있을 수 있다. 초음파 영상(1510)에는 시선 아이콘(1511)이 표시될 수 있다. 사용자는 입력부(430)를 통하여 시선 아이콘(1511)을 수정할 수 있다. 또한 초음파 영상(1510)에 대응되는 3D 초음파 영상(1540)에는 노드들(1541, 1542 및 1543)이 있을 수 있다. 초음파 영상(1540)에는 시선 아이콘(미도시)이 표시될 수 있다. 사용자는 입력부(430)를 통하여 시선 아이콘을 수정하여 시선을 수정할 수 있다. 수정된 시선에 기초하여 초음파 영상들(1510 내지 1540)이 수정될 수 있다.
사용자는 초음파 영상(1510) 또는 초음파 영상(1540)에서 노드들 중 하나를 표시자(1550)로 선택하여 해당 노드로 시점을 이동할 수 있다. 또한 도 8 에서 설명한 바와 같이 방문할 여러 노드를 선택하거나, 방문하지 않을 여러 노드를 선택할 수도 있다. 예를들어 사용자가 입력부(430)를 통하여 표시자(1550)로 노드D(1513 또는 1542)를 선택할 수 있다. 제어부(320)는 사용자의 선택에 기초하여 노드C(1512)로부터 노드D(1513)까지 시점을 이동하면서 초음파 영상을 획득하도록 초음파진단장치를 제어할 수 있다.
또한, 도 15b 를 참조하면 디스플레이부(440)는 3차원 초음파 영상(1580)을 단독으로 디스플레이할 수 있다. 3차원 초음파 영상(1580)에는 노드A(1581), 노드C(1582), 노드D(1583) 및 노드E(1584)가 표시될 수 있다. 디스플레이부(440)는 현재 시점이 위치한 노드를 표시하기 위하여 노드C(1582)를 다른 노드들(1581, 1583, 1584)과 다른 도형, 기호, 영상, 텍스트 중 적어도 하나로 디스플레이할 수 있다. 예를 들어 노드C(1582)에 원형 테두리를 표시할 수 있다. 또한 노드C(1582)를 굵은 글씨로 표시할 수 있다.
초음파진단장치(300)는 입력부(430)를 이용하여 사용자로부터 입력을 수신할 수 있다. 또한 초음파진단장치(300)는 사용자로부터 노드들(1581, 1583, 1584) 중 적어도 하나를 선택하는 입력을 수신할 수 있다. 초음파진단장치(300)는 사용자의 선택에 기초하여 시점을 이동하면서 초음파 영상을 획득할 수 있다. 예를 들어 사용자는 마우스를 사용하여 표시자(1550)를 이동할 수 있다. 또한 사용자는 표시자(1550)를 이동하여 노드D(1583)를 선택할 수 있다. 초음파진단장치(300)는 노드C(1582)로부터 노드D(1583)로 시점을 이동하면서 초음파 영상을 획득할 수 있다. 획득된 초음파 영상은 2차원 또는 3차원 초음파 영상일 수 있다. 사용자는 큰 화면에서 3차원 초음파 영상(1580)을 관찰할 수 있고, 피검사자의 내시경 진단을 할 수 있다.도 16 은 본원 발명의 일 실시예에 따른 초음파 영상을 나타낸 도면으로서 도 15 에서 이어지는 도면이다.
도 16 을 참조하면, 시점(1614)은 노드C(1611)에서 노드D(1615)로 가는 간선 상의 한 지점에 있다. 초음파진단장치는 노드에서 뿐 아니라 간선 상에서의 초음파 영상들(1610, 1620, 1630 및 1640)을 획득할 수 있다. 간선 상에서 시선(1613)은 노드D(1615)를 향할 수 있으나 이에 한정되는 것은 아니다. 초음파 영상(1610)에는 노드들(1611, 1615 및 1616)이 표시될 수 있다. 초음파 영상(1610)에는 시점(1614)이 표시될 수 있다. 또한, 초음파 영상(1640)에는 시점(1641) 및 시선 아이콘(미도시)이 표시될 수 있다. 초음파 영상(1640) 의 시점(16410)은 초음파 영상(1610)의 시점(1614)에 대응될 수 있다. 또한 초음파 영상(1640)에는 노드D(1643)가 디스플레이될 수 있다. 도 14 및 도 15 에서 설명한 바와 같이 사용자는 입력부(430)를 통하여 표시자(1550)로 초음파 영상상의 노드를 선택할 수 있고, 제어부(320)는 사용자의 선택에 기초하여 해당 노드로 시점을 이동할 수 있다.
또한, 초음파 영상들의 소정의 부위에는 미니 초음파 영상(1660)이 표시될 수 있다. 예를 들어 초음파 영상(1610)의 소정의 영역에 미니 초음파 영상(1660)이 표시될 수 있다. 미니 초음파 영상(1660)은 사용자가 관찰할 부분을 정하기 위해 이용하는 제 1 초음파 영상일 수 있다.
입력부(430)는 사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하고, 제어부(320)는 이동속도에 기초하여 화면을 이동하며 초음파 영상들을 획득하도록 제어할 수 있다. 또한, 상기 이동속도에 관련된 입력은 노드들 사이의 이동 시간을 포함할 수 있다.
즉, 사용자는 노드와 노드 사이에서의 시점의 이동 속도를 선택할 수 있다. 예를 들어 제어부(320)는 사용자가 선택한 속도에 따라서 노드C(1611)에서 노드D(1615)로 이동할 수 있다. 따라서, 사용자는 노드C(1611)와 노드D(1615) 사이에서도 초음파 영상들(1610, 1620, 1630 및 1640)을 보다 용이하게 관찰할 수 있다. 예를 들어, 사용자는 노드들 사이의 이동속도를 설정하여 자세히 관찰해야 하는 곳은 천천히 시점을 이동시킬 수 있다.
도 17 은 본원 발명의 일 실시예에 따른 초음파 영상을 나타내 도면이다.
초음파 영상(1710)은 시점 이동 경로를 포함하고 있다. 도 14 내지 도 16에서 설명한 바와 같이 시점은 노드A(1711), 간선(1761), 노드C(1713), 간선(1762) 및 노드D(1714)를 순서대로 지나왔다. 제어부(320)는 시점이 지나면서 제 2 초음파 영상을 획득한 노드들을 제 2 초음파 영상을 획득하지 않은 노드들과 다르게 디스플레이 하도록 제어할 수 있다. 또한 제어부(320)는 시점이 지나면서 제 2 초음파 영상을 획득한 간선을 제 2 초음파 영상을 획득하지 않은 간선과 다르게 디스플레이하도록 제어할 수 있다. 예를 들어 노드A(1711), 노드C(1713) 및 노드D(1714)는 시선(1717 및 1718)과 함께 디스플레이될 수 있다. 또한, 간선(1761) 및 간선(1762)은 점선으로 디스플레이될 수 있다. 따라서 사용자는 이미 관찰한 지점을 용이하게 확인할 수 있다. 도 17 에서는 초음파 영상(1710)은 디스플레이부의 소정에 영역에 미니 초음파 영상으로 항상 표시될 수 있고, 사용자는 관찰한 지점을 용이하게 확인할 수 있다. 미니 초음파 영상은 도 15a에서 설명하였으므로 자세한 설명은 생략한다..
초음파 영상(1740)을 참조하면 노드A(1741), 노드C(1743) 및 노드D(1744)는 이미 관찰한 지점이므로 다른 노드들과 다르게 표시될 수 있다. 예를 들어 노드A(1741), 노드C(1743) 및 노드D(1744)는 굵은 글자로 표시될 수 있으나 이에 한정되는 것은 아니다. 시점은 다시 노드A(1741)에 도착하였고 노드A(1741), 노드C(1743) 및 노드D(1744)는 이미 관찰한 지점임을 사용자가 쉽게 알 수 있다.
본 개시의 일 실시예에 따른 초음파진단장치(300)는, 초음파 데이터 획득부, 입력부(430), 제어부(320)를 포함할 수 있다. 초음파 데이터 획득부는 대상체를 스캔하여 초음파 데이터를 획득할 수 있다. 또한, 입력부(430)는 사용자로부터 입력을 수신할 수 있다. 또한 제어부(320)는 초음파 데이터에 기초하여 복수개의 노드들을 포함하는 제 1 정보를 획득하고, 제 1 정보 및 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하도록 제어할 수 있다. 예를 들어 사용자는 마우스 또는 키보드를 포함하는 입력부(430)를 이용하여 노드를 선택할 수 있다. 제어부(320)는 사용자가 선택한 노드에서 바라본 초음파 영상을 초음파 데이터에 기초하여 획득하도록 제어할 수 있다.
본 개시의 일 실시예에 따른 초음파진단장치(300)는, 초음파 데이터 획득부, 제어부(320) 및 디스플레이부(440)를 포함할 수 있다. 초음파 데이터 획득부는 대상체를 스캔하여 초음파 데이터를 획득할 수 있다. 또한, 제어부는 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득할 수 있다. 또한 제어부(320)는 제 1 정보에 기초하여 시점을 이동하도록 제어할 수 있다. 또한 디스플레이부(440)는 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이할 수 있다. 예를 들어 상술한 바와 같이 제어부(320)는 사용자의 선택에 기초하여 시점을 이동할 수 있다. 디스플레이부(440)는 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이할 수 있다. 즉, 시점이 지나간 제 1 정보를 시점이 지나가지 않은 제 1 정보와 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이할 수 있다.
본 개시의 일 실시예에 따른 초음파진단장치(300)는, 영상 생성부(310), 입력부(430) 및 제어부(320)를 포함할 수 있다. 영상 생성부(310)는 대상체를 스캔하여 제 1 초음파 영상을 획득할 수 있다. 입력부(430)는 사용자로부터 입력을 수신할 수 있다. 또한 제어부(320)는 수신된 입력에 기초하여, 제 1 초음파 영상에 포함되는 복수개의 노드들을 포함하는 제 1 정보를 획득할 수 있다. 또한 제어부(320)는 수신된 입력에 기초하여 노드들의 순서를 획득할 수 있다. 또한, 제어부(320)는 노드들의 순서 및 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어할 수 있다. 예를 들어, 초음파진단장치(300)는 제 1 초음파 영상에서 사용자 입력에 기초하여 제 1 정보 및 시점 이동 순서를 동시에 획득할 수 있다. 또한 초음파진단장치(300)는 시점이동 순서에 기초하여 시점을 순차적으로 이동하면서 제 2 초음파 영상들을 획득할 수 있다.
본 개시에 따른 초음파진단장치는 사용자가 시점을 보다 용이하게 이동할 수 있는 인터페이스를 제공할 수 있다.
본원 발명의 실시 예 들과 관련된 기술 분야에서 통상의 지식을 가진 자는 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로, 개시된 방법들은 한정적인 관점이 아닌 설명적 관점에서 고려되어야 한다. 본 발명의 범위는 발명의 상세한 설명이 아닌 특허청구 범위에 나타나며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (42)

  1. 대상체를 스캔(scan)하여 획득된 초음파 데이터에 기초하여 제 1 초음파 영상을 획득하는 영상 생성부; 및
    상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 상기 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 제어부를 포함하는 초음파진단장치.
  2. 제 1 항에 있어서,
    상기 제어부는,
    상기 제 1 정보에 근거하여 상기 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득하고,
    상기 제 1 정보 및 제 2 정보 중 적어도 하나를 상기 제 1 초음파 영상 상에 표시한 영상을 디스플레이하는 디스플레이부를 더 포함하는 초음파진단장치.
  3. 제 1 항에 있어서,
    상기 제어부는,
    상기 노드들과 노드들을 연결하는 간선을 획득하고,
    상기 복수개의 노드 및 간선에 근거하여, 상기 제 1 초음파 영상에 포함되는 구조물을 획득하도록 제어하고,
    상기 제 1 정보는 상기 간선 및 상기 구조물 중 적어도 하나를 포함하는 초음파진단장치.
  4. 제 1 항에 있어서,
    상기 제어부는,
    상기 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하고, 상기 영상 생성부가 상기 획득된 노드들의 순서로 시점을 이동하며 상기 제 2 초음파 영상들을 획득하도록 제어하는 초음파진단장치.
  5. 제 1 항에 있어서,
    사용자로부터 상기 제 1 초음파 영상 상에 제 1 정보와 관련한 입력을 수신하는 입력부를 더 포함하는 초음파진단장치.
  6. 제 5 항에 있어서,
    상기 제어부는 상기 수신된 입력에 기초하여 상기 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제 중 적어도 하나를 하는 초음파진단장치.
  7. 제 5 항에 있어서
    상기 입력부는,
    사용자로부터 상기 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하고,
    상기 제어부는,
    상기 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어하는 초음파진단장치.
  8. 제 5 항에 있어서
    상기 입력부는,
    사용자로부터 상기 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하고,
    상기 제어부는,
    상기 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하도록 제어하는 초음파진단장치.
  9. 제 5 항에 있어서,
    상기 입력부는, 사용자로부터 상기 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하고,
    상기 제어부는,
    상기 수신된 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 초음파진단장치.
  10. 제 5 항에 있어서,
    상기 입력부는 사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하고,
    상기 제어부는 상기 이동속도에 기초하여 시점을 이동하며 상기 제 2 초음파 영상들을 획득하도록 제어하는 초음파진단장치.
  11. 제 10 항에 있어서,
    상기 이동속도에 관련된 입력은 노드와 노드 사이의 이동 시간을 포함하는 초음파진단장치.
  12. 제 1 항에 있어서,
    상기 제어부는,
    중심선 추출 알고리즘을 포함하는 영상처리를 이용하여 상기 초음파 영상으로부터 상기 노드들 및 간선을 포함하는 제 1 정보를 추출하는 초음파진단장치.
  13. 제 12 항에 있어서,
    상기 제어부는,
    상기 추출된 제 1 정보에 기초하여 시점을 이동하며 자동으로 상기 제 2 초음파 영상들을 획득하는 초음파진단장치.
  14. 제 1 항에 있어서,
    상기 제어부는,
    상기 노드 및 노드 사이의 간선을 따라 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 초음파진단장치.
  15. 제 1 항에 있어서,
    상기 제어부는,
    상기 시점이 지나간 노드들 및 간선 중 적어도 하나를 디스플레이하도록 제어하는 초음파진단장치.
  16. 제 15 항에 있어서,
    상기 제어부는,
    상기 시점이 지나간 노드들 및 간선 중 적어도 하나를 상기 시점이 지나가지 않은 노드들 및 간선과 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이하도록 제어하는 초음파진단장치.
  17. 제 1 항에 있어서,
    상기 제 2 초음파 영상들은 초음파 데이터에 기초한 가상내시경 영상을 포함하는 초음파진단장치.
  18. 제 1 항에 있어서,
    상기 제 2 초음파 영상들은 2 차원 영상 및 3 차원 영상 중 적어도 하나를 포함하는 초음파진단장치.
  19. 제 3 항에 있어서,
    상기 구조물은 트리구조의 그래프인 초음파진단장치.
  20. 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 초음파 데이터 획득부;
    사용자로부터 입력을 수신하는 입력부; 및
    상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 상기 제 1 정보 및 상기 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하도록 제어하는 제어부를 포함하는 초음파진단장치.
  21. 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 초음파 데이터 획득부;
    상기 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하고, 상기 제 1 정보에 기초하여 시점을 이동하도록 제어하는 제어부; 및
    상기 시점이 지나간 제 1 정보를 상기 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이하는 디스플레이부를 포함하는 초음파진단장치.
  22. 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 영상 생성부;
    사용자로부터 입력을 수신하는 입력부; 및
    상기 수신된 입력에 기초하여, 상기 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하고, 상기 수신된 입력에 기초하여 상기 노드들의 순서를 획득하고, 상기 노드들의 순서 및 상기 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하도록 제어하는 제어부를 포함하는 초음파진단장치.
  23. 대상체를 스캔(scan)하여 획득된 초음파 데이터에 기초하여 제 1 초음파 영상을 획득하는 단계;
    상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계; 및
    제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함하는 초음파진단방법.
  24. 제 23 항에 있어서,
    상기 제 1 정보에 근거하여 상기 시점의 위치 및 방향 중 적어도 하나를 나타내는 제 2 정보를 획득하는 단계; 및
    상기 제 1 정보 및 제 2 정보 중 적어도 하나를 상기 제 1 초음파 영상 상에 표시한 영상을 디스플레이하는 단계를 더 포함하는 초음파진단방법.
  25. 제 23 항에 있어서,
    상기 노드들과 노드들을 연결하는 간선을 획득하는 단계; 및
    상기 복수개의 노드 및 간선에 근거하여, 상기 제 1 초음파 영상에 포함되는 구조물을 획득하는 단계를 더 포함하고
    상기 제 1 정보는 상기 간선 및 상기 구조물 중 적어도 하나를 포함하는 초음파진단방법.
  26. 제 23 항에 있어서,
    상기 제 2 초음파 영상들을 획득하는 단계는,
    상기 노드들 중 적어도 두 개의 노드들의 순서를 자동으로 획득하는 단계; 및
    상기 획득된 노드들의 순서로 시점을 이동하며 상기 제 2 초음파 영상들을 획득하는 단계를 포함하는 초음파진단방법.
  27. 제 23 항에 있어서,
    사용자로부터 상기 제 1 초음파 영상 상에 제 1 정보와 관련한 입력을 수신하는 단계를 더 포함하는 초음파진단방법.
  28. 제 27 항에 있어서,
    상기 수신된 입력에 기초하여 상기 노드들 및 간선 중 적어도 하나를 추가, 이동 및 삭제 중 적어도 하나를 수행하는 단계를 더 포함하는 초음파진단방법.
  29. 제 27 항에 있어서
    상기 제 2 초음파 영상들을 획득하는 단계는,
    사용자로부터 상기 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하는 단계; 및
    상기 선택된 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함하는 초음파진단방법.
  30. 제 27 항에 있어서
    상기 제 2 초음파 영상들을 획득하는 단계는,
    사용자로부터 상기 노드들 중 적어도 하나의 노드를 선택하는 입력을 수신하는 단계; 및
    상기 선택된 노드들을 제외한 노드들에 기초하여 제 2 초음파 영상들을 자동으로 획득하는 단계를 포함하는 초음파진단방법.
  31. 제 27 항에 있어서,
    사용자로부터 상기 노드들 중 적어도 두 개의 노드들의 순서에 관련된 입력을 수신하는 단계; 및
    상기 노드들의 순서에 관련된 입력에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 더 포함하는 초음파진단방법.
  32. 제 27 항에 있어서,
    사용자로부터 노드와 노드 사이의 이동속도에 관련된 입력을 수신하는 단계; 및
    상기 이동속도에 기초하여 시점을 이동하며 상기 제 2 초음파 영상들을 획득하는 단계를 더 포함하는 초음파진단방법.
  33. 제 32 항에 있어서,
    상기 이동속도에 관련된 입력은 노드와 노드 사이의 이동 시간을 포함하는 초음파진단방법.
  34. 제 23 항에 있어서,
    상기 제 1 정보를 획득하는 단계는,
    중심선 추출 알고리즘을 포함하는 영상처리를 이용하여 상기 초음파 영상으로부터 상기 노드들 및 간선을 포함하는 제 1 정보를 추출하는 단계를 포함하는 초음파진단방법.
  35. 제 34 항에 있어서,
    상기 제 2 초음파 영상들을 획득하는 단계는,
    상기 추출된 제 1 정보에 기초하여 시점을 이동하며 자동으로 상기 제 2 초음파 영상들을 획득하는 단계를 포함하는 초음파진단방법.
  36. 제 23 항에 있어서,
    상기 제 2 초음파 영상들을 획득하는 단계는,
    상기 노드 및 노드 사이의 간선을 따라 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함하는 초음파진단방법.
  37. 제 23 항에 있어서,
    상기 시점이 지나간 노드들 및 간선 중 적어도 하나를 디스플레이하는 단계를 더 포함하는 초음파진단방법.
  38. 제 37 항에 있어서,
    상기 시점이 지나간 노드들 및 간선 중 적어도 하나를 디스플레이하는 단계는,
    상기 시점이 지나간 노드들 및 간선 중 적어도 하나를 상기 시점이 지나가지 않은 노드들 및 간선과 서로 다른 투명도, 색 및 모양 중 적어도 하나로 디스플레이하는 단계를 포함하는 초음파진단방법.
  39. 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계;
    사용자로부터 입력을 수신하는 단계;
    상기 초음파 데이터에 기초하여 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계; 및
    상기 제 1 정보 및 상기 수신된 입력에 기초하여 시점을 이동하며 초음파 영상을 획득하는 단계를 포함하는 초음파진단방법.
  40. 대상체를 스캔(scan)하여 초음파 데이터를 획득하는 단계;
    상기 초음파 데이터에 기초하여 복수개의 노드들 및 간선 중 적어도 하나를 포함하는 제 1 정보를 획득하는 단계;
    상기 제 1 정보에 기초하여 시점을 이동하도록 제어하는 단계; 및
    상기 시점이 지나간 제 1 정보를 상기 시점이 지나가지 않은 제 1 정보와 서로 구별되도록 디스플레이하는 단계를 포함하는 초음파진단방법.
  41. 대상체를 스캔(scan)하여 제 1 초음파 영상을 획득하는 단계;
    사용자로부터 입력을 수신하는 단계;
    상기 수신된 입력에 기초하여, 상기 제 1 초음파 영상에 포함되는 복수개의 노드들(nodes)을 포함하는 제 1 정보를 획득하는 단계;
    상기 수신된 입력에 기초하여 상기 노드들의 순서를 획득하는 단계; 및
    상기 노드들의 순서 및 상기 제 1 정보에 기초하여 시점을 이동하며 제 2 초음파 영상들을 획득하는 단계를 포함하는 초음파진단방법.
  42. 제 23 항 내지 제 41 항 중 어느 한 항에 의한 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
KR1020140180493A 2014-12-15 2014-12-15 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체 KR102364490B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140180493A KR102364490B1 (ko) 2014-12-15 2014-12-15 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체
US14/933,082 US10456112B2 (en) 2014-12-15 2015-11-05 Ultrasound diagnosis apparatus, ultrasound diagnosis method and computer-readable storage medium
EP15198247.7A EP3034007B1 (en) 2014-12-15 2015-12-07 Ultrasound diagnosis apparatus, ultrasound diagnosis method and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140180493A KR102364490B1 (ko) 2014-12-15 2014-12-15 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체

Publications (2)

Publication Number Publication Date
KR20160072614A true KR20160072614A (ko) 2016-06-23
KR102364490B1 KR102364490B1 (ko) 2022-02-18

Family

ID=54783520

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140180493A KR102364490B1 (ko) 2014-12-15 2014-12-15 초음파 진단장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체

Country Status (3)

Country Link
US (1) US10456112B2 (ko)
EP (1) EP3034007B1 (ko)
KR (1) KR102364490B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10912536B2 (en) 2016-08-23 2021-02-09 Carestream Health, Inc. Ultrasound system and method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050245803A1 (en) * 2002-03-14 2005-11-03 Glenn Jr William V System and method for analyzing and displaying computed tomography data
KR20060119813A (ko) * 2005-05-17 2006-11-24 지이 메디컬 시스템즈 글로발 테크놀러지 캄파니 엘엘씨 초음파 진단 장치 및 초음파 화상 생성 방법
JP2011098195A (ja) * 2009-10-08 2011-05-19 Fujifilm Corp 構造物検出装置および方法ならびにプログラム
JP2014003991A (ja) * 2012-06-21 2014-01-16 Toshiba Corp 超音波診断装置及び画像生成プログラム
WO2014024995A1 (ja) * 2012-08-08 2014-02-13 株式会社東芝 医用画像診断装置、画像処理装置及び画像処理方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7194117B2 (en) * 1999-06-29 2007-03-20 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination of objects, such as internal organs
US6369812B1 (en) * 1997-11-26 2002-04-09 Philips Medical Systems, (Cleveland), Inc. Inter-active viewing system for generating virtual endoscopy studies of medical diagnostic data with a continuous sequence of spherical panoramic views and viewing the studies over networks
US8821376B2 (en) 2007-03-12 2014-09-02 David Tolkowsky Devices and methods for performing medical procedures in tree-like luminal structures
US10362962B2 (en) 2008-11-18 2019-07-30 Synx-Rx, Ltd. Accounting for skipped imaging locations during movement of an endoluminal imaging probe
EP2389113A4 (en) 2009-09-10 2014-04-30 Infinitt Healthcare Co Ltd VIRTUAL ENDOSCOPY DEVICE, DRIVE PROCESS THEREFOR, AND MEDICAL EXAMINATION DEVICE
KR101198608B1 (ko) 2009-09-10 2012-11-07 주식회사 인피니트헬스케어 가상 내시경 장치, 그의 구동방법 및 검진 장치
US9295449B2 (en) 2012-01-23 2016-03-29 Ultrasonix Medical Corporation Landmarks for ultrasound imaging

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050245803A1 (en) * 2002-03-14 2005-11-03 Glenn Jr William V System and method for analyzing and displaying computed tomography data
KR20060119813A (ko) * 2005-05-17 2006-11-24 지이 메디컬 시스템즈 글로발 테크놀러지 캄파니 엘엘씨 초음파 진단 장치 및 초음파 화상 생성 방법
JP2011098195A (ja) * 2009-10-08 2011-05-19 Fujifilm Corp 構造物検出装置および方法ならびにプログラム
JP2014003991A (ja) * 2012-06-21 2014-01-16 Toshiba Corp 超音波診断装置及び画像生成プログラム
WO2014024995A1 (ja) * 2012-08-08 2014-02-13 株式会社東芝 医用画像診断装置、画像処理装置及び画像処理方法

Also Published As

Publication number Publication date
US20160166238A1 (en) 2016-06-16
KR102364490B1 (ko) 2022-02-18
EP3034007A1 (en) 2016-06-22
US10456112B2 (en) 2019-10-29
EP3034007B1 (en) 2021-02-03

Similar Documents

Publication Publication Date Title
KR102452998B1 (ko) 초음파 진단 장치
KR101705120B1 (ko) 자가 진단 및 원격 진단을 위한 초음파 진단 장치 및 초음파 진단 장치의 동작 방법
KR102388130B1 (ko) 의료 영상 표시 방법 및 장치
KR102618500B1 (ko) 초음파 진단장치 및 그에 따른 초음파 진단 방법
KR102310976B1 (ko) 초음파 진단 장치, 그에 따른 초음파 진단 방법 및 그에 따른 컴퓨터 판독 가능한 저장매체
KR101599891B1 (ko) 초음파 진단장치, 방법 및 컴퓨터 판독 가능한 저장매체
KR102366316B1 (ko) 초음파 영상 장치 및 그에 따른 초음파 영상 처리 방법
KR102273831B1 (ko) 의료 영상을 디스플레이 하는 방법 및 그 의료 영상 장치
KR102388132B1 (ko) 대상체를 나타내는 바디 마커를 생성하는 방법, 장치 및 시스템.
KR20170068944A (ko) 초음파 영상을 디스플레이하는 방법 및 이를 위한 초음파 장치
CN106551707B (zh) 显示超声图像的设备和方法
KR101630763B1 (ko) 초음파 영상 표시 장치 및 초음파 영상의 표시 방법
KR20160051161A (ko) 의료 영상 장치 및 그에 따른 의료 영상을 디스플레이 하는 방법
KR20150089835A (ko) 초음파 영상 표시 방법 및 이를 위한 초음파 장치
KR20170006946A (ko) 초음파 진단 장치 및 초음파 진단 장치의 동작 방법
KR20160049385A (ko) 초음파 장치 및 초음파 장치의 정보 입력 방법
KR102367446B1 (ko) 초음파 진단 장치 및 그 동작 방법
KR20150004490A (ko) 초음파 진단 장치 및 그 동작방법
KR20160148441A (ko) 초음파 장치 및 그 동작 방법
KR20160022100A (ko) 초음파 진단 장치 및 초음파 진단 방법
EP3040031B1 (en) Ultrasound diagnosis apparatus and method of operating the same
KR20160064895A (ko) 볼륨 렌더링 장치 및 볼륨 렌더링 방법
KR20160096442A (ko) 초음파 진단장치 및 그에 따른 초음파 진단 장치의 동작 방법
KR20160056163A (ko) 초음파 진단 방법 및 초음파 진단 장치
KR101868019B1 (ko) 초음파 영상 장치 및 그에 따른 초음파 영상 처리 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant