KR20200056927A - 의료 사용자 인터페이스 - Google Patents

의료 사용자 인터페이스 Download PDF

Info

Publication number
KR20200056927A
KR20200056927A KR1020190142545A KR20190142545A KR20200056927A KR 20200056927 A KR20200056927 A KR 20200056927A KR 1020190142545 A KR1020190142545 A KR 1020190142545A KR 20190142545 A KR20190142545 A KR 20190142545A KR 20200056927 A KR20200056927 A KR 20200056927A
Authority
KR
South Korea
Prior art keywords
view
user interface
anatomical structure
graphical representation
display
Prior art date
Application number
KR1020190142545A
Other languages
English (en)
Inventor
일리야 슈티어버그
아사프 코헨
길 지겔만
막심 갈킨
이도 일란
Original Assignee
바이오센스 웹스터 (이스라엘) 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 바이오센스 웹스터 (이스라엘) 리미티드 filed Critical 바이오센스 웹스터 (이스라엘) 리미티드
Publication of KR20200056927A publication Critical patent/KR20200056927A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/14—Probes or electrodes therefor
    • A61B18/1492—Probes or electrodes therefor having a flexible, catheter-like structure, e.g. for heart ablation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/25—Bioelectric electrodes therefor
    • A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
    • A61B5/28—Bioelectric electrodes therefor specially adapted for particular uses for electrocardiography [ECG]
    • A61B5/283—Invasive
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/00234—Surgical instruments, devices or methods, e.g. tourniquets for minimally invasive surgery
    • A61B2017/00238—Type of minimally invasive operation
    • A61B2017/00243—Type of minimally invasive operation cardiac
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00315—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body for treatment of particular body parts
    • A61B2018/00345—Vascular system
    • A61B2018/00351—Heart
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00571—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body for achieving a particular surgical effect
    • A61B2018/00577—Ablation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00636—Sensing and controlling the application of energy
    • A61B2018/00773—Sensed parameters
    • A61B2018/00839—Bioelectrical parameters, e.g. ECG, EEG
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101—Computer-aided simulation of surgical operations
    • A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107—Visualisation of planned trajectories or target regions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A61B2034/2053—Tracking an applied voltage gradient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2072—Reference field transducer attached to an instrument or patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/252—User interfaces for surgical systems indicating steps of a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/254—User interfaces for surgical systems being adapted depending on the stage of the surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367—Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/368—Correlation of different images or relation of image positions in respect to the body changing the image on a display according to the operator's position
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0295—Operational features adapted for recording user messages or annotations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/065—Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M25/00—Catheters; Hollow probes
    • A61M25/01—Introducing, guiding, advancing, emplacing or holding catheters
    • A61M25/0105—Steering means as part of the catheter or advancing means; Markers for positioning
    • A61M2025/0166—Sensors, electrodes or the like for guiding the catheter to a target zone, e.g. image guided or magnetically guided
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10081—Computed x-ray tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10088—Magnetic resonance imaging [MRI]
    • G06T2207/10096—Dynamic contrast-enhanced magnetic resonance imaging [DCE-MRI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30048—Heart; Cardiac
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/004—Annotating, labelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G06V2201/032—Recognition of patterns in medical or anatomical images of protuberances, polyps nodules, etc.

Abstract

살아 있는 대상의 신체 내의 해부학적 구조의 3D 이미지를 형성하기 위한 의료 장치, 디스플레이 및 입력 장치를 포함하는 사용자 인터페이스, 및 프로세서를 포함하며, 프로세서는 3D 이미지에 기초한 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고, 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고, 그래픽 표현의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하고, 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하고, 해부학적 구조의 그래픽 표현이 제1 뷰로부터 그래픽 표현 상의 각자의 위치에 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하는 시스템.

Description

의료 사용자 인터페이스{MEDICAL USER INTERFACE}
본 발명은 의료 사용자 인터페이스에 관한 것으로, 특히 의료 사용자 인터페이스 내의 3D 해부학적 구조의 이미지의 디스플레이에 관한 것이다.
다양한 신체 부위들의 의료용 이미지는 예를 들어, X-선 방사선 촬영, 자기 공명 영상(MRI), 의료용 초음파 촬영 또는 초음파, 내시경, 탄성영상, 촉각 이미징, 서모그래피, 의료 사진 및 핵 의학 기능 이미징 기법, 그러나 이에 제한되지 않는 다수의 방식으로 형성될 수 있다.
컴퓨터 단층촬영(CT), MRI 및 초음파 스캐닝 소프트웨어가 의사를 위한 3차원(3D) 이미지를 생성할 수 있게 하기 위한 볼륨 렌더링(volume rendering) 기술이 개발되었다. 전통적으로, CT 및 MRI 스캔은 필름 상의 2차원(2D) 정적 출력을 생성하였다. 3D 이미지를 생성하기 위해, 많은 스캔이 이루어지고, 이어서 컴퓨터에 의해 조합되어 3D 모델을 생성하며, 이어서 이는 의사에 의해 조작될 수 있다. 다소 유사한 기술을 사용하여 3D 초음파를 생성한다.
리앙(Liang) 등의 미국 특허 공개 제2010/0316268호는 의료 이미지로부터 생성되고 렌더링된 3D 공간 내에 제공된 하나 이상의 해부학적 구조의 평가를 사전-작동시키기 위한 절차, 및 그 절차에 따라 작동하는 이미징 시스템, 장치, 및 컴퓨터 프로그램을 기술한다. 절차는 렌더링된 3D 공간 내에 하나 이상의 안전 마진 표시기를 제공하는 단계를 포함하며, 각각의 안전 마진 표시기는 기관 내의 해부학적 구조 중 각자의 해부학적 구조의 형상에 대응하는 형상을 갖고, 해부학적 구조 중 각자의 해부학적 구조로부터의 사전결정된 크기를 갖는 안전 마진을 갖는다. 절차는 또한 렌더링된 3D 공간 내의 안전 마진 표시기 중 적어도 하나의 안전 마진 표시기의 형상 및 미리 결정된 크기 중 적어도 하나를 조작하는 단계, 및 적어도 하나의 안전 마진 표시기의 조작된 버전의 3D 공간 내에 즉시 렌더링을 제공하는 단계를 포함한다. 이미징 시스템을 사용하여 하나 이상의 의료 해부학적 구조를 절제하기 위한 적어도 하나의 절단 표면을 한정하는 절차가 또한 제공된다.
바-아비브(Bar -Aviv) 등의 미국 특허 공개 제2009/0028403호는 신체 기관의 소스 의료 이미지를 분석하기 위한 시스템을 기술한다. 시스템은 3차원 또는 그 이상의 차원을 갖는 소스 의료 이미지를 획득하기 위한 입력 유닛, 소스 의료 이미지로부터 신체 기관의 다수의 특징을 얻도록 설계된 특징 추출 유닛, 및 특징에 따라 우선순위 레벨을 추정하도록 설계된 분류 유닛을 포함한다.
가이거(Geiger)의 미국 특허 공개 제2003/0152897호는 구조의 루멘 내의 가상 내시경의 시점을 탐색하기 위한 방법을 기술한다. 방법은, 가상 내시경의, 제1 중심점 및 제1 방향을 갖는 초기 시점을 결정하는 단계, 초기 시점으로부터 루멘까지의, 제1 최장 광선 방향을 갖는 최장 광선을 결정하는 단계, 초기 시점의 제1 방향과 제1 최장 광선 방향 사이의 제2 방향을 결정하는 단계, 제2 방향으로 시점을 전환(turn)하고 초기 시점을 초기 시점의 제1 방향으로 제1 사전결정된 거리만큼 이동시키는 단계, 시점의 제2 중심점을 계산하는 단계, 및 시점을 제2 중심점으로 이동시키는 단계를 포함한다.
본 발명의 일 실시예에 따르면, 시스템이 제공되며, 시스템은, 살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지를 형성하도록 구성되는 의료 장치, 디스플레이 및 입력 장치를 포함하는 사용자 인터페이스, 및 프로세서를 포함하며, 프로세서는 3D 이미지에 기초한 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고, 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고, 해부학적 구조의 그래픽 표현의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하고, 제1 뷰를 보여주는 동안, 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하고, 해부학적 구조의 그래픽 표현이 제1 뷰로부터 그래픽 표현 상의 각자의 위치에 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 선택된 특징을 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
추가적으로, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전되고 제2 뷰에서 자동 줌-인되어 선택된 특징을 확대하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
더욱이, 본 발명의 일 실시예에 따르면, 프로세서는 복수의 특징들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독들로부터 특징 리스트의 적어도 일부를 생성하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 의료 판독들은 카테터의 위치, 카테터의 적어도 하나의 전극의 적어도 하나의 위치, 심전도(ECG)가 수행된 위치, 절제가 수행된 위치, 또는 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함한다.
또한, 본 발명의 일 실시예에 따르면, 시스템은, 복수의 전극들을 포함하고 절제를 수행하도록 구성되는 프로브를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 각자의 위치에서 그래픽 표현에 대한 주석의 추가를 나타내는 사용자 인터페이스로부터의 입력을 수신하도록 구성되고, 프로세서는 특징 리스트에 주석을 추가하도록 구성된다.
더욱이, 본 발명의 일 실시예에 따르면, 주석은 소정 형상의 주연부를 형성한다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 주석을 주석의 형상의 도심에 기초하여 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
본 발명의 또 다른 실시예에 따르면, 방법이 또한 제공되며, 방법은 살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지를 수신하는 단계, 3D 이미지에 기초한 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하는 단계, 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하는 단계, 해부학적 구조의 그래픽 표현의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하는 단계, 제1 뷰를 보여주는 동안, 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하는 단계, 및 해부학적 구조의 그래픽 표현이 제1 뷰로부터 그래픽 표현 상의 각자의 위치에 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하는 단계를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 방법은 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하는 단계를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 방법은 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 선택된 특징을 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하는 단계를 포함한다.
더욱이, 본 발명의 일 실시예에 따르면, 방법은 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전되고 제2 뷰에서 자동 줌-인되어 선택된 특징을 확대하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하는 단계를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 생성하는 단계는 복수의 특징들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독들로부터 특징 리스트의 적어도 일부를 생성하는 단계를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 의료 판독들은 카테터의 위치, 카테터의 적어도 하나의 전극의 적어도 하나의 위치, 심전도(ECG)가 수행된 위치, 절제가 수행된 위치, 또는 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함한다.
추가적으로, 본 발명의 일 실시예에 따르면, 방법은 절제를 수행하는 단계를 포함한다.
더욱이, 본 발명의 일 실시예에 따르면, 방법은 각자의 위치에서 그래픽 표현에 대한 주석의 추가를 나타내는 사용자 인터페이스로부터의 입력을 수신하는 단계, 및 특징 리스트에 주석을 추가하는 단계를 포함한다.
또한, 본 발명의 일 실시예에 따르면, 주석은 소정 형상의 주연부를 형성한다.
또한, 본 발명의 일 실시예에 따르면, 방법은 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 주석을 주석의 형상의 도심에 기초하여 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하는 단계를 포함한다.
본 발명의 또 다른 실시예에 따르면, 시스템이 또한 제공되며, 시스템은 디스플레이 및 입력 장치를 포함하는 사용자 인터페이스, 및 프로세서를 포함하고, 프로세서는 살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지에 기초한 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고, 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고, 해부학적 구조의 그래픽 표현의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하고, 제1 뷰를 보여주는 동안, 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하고, 해부학적 구조의 그래픽 표현이 제1 뷰로부터 그래픽 표현 상의 각자의 위치에 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하도록 구성된다.
추가적으로, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
더욱이, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 선택된 특징을 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전되고 제2 뷰에서 자동 줌-인되어 선택된 특징을 확대하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 복수의 특징들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독들로부터 특징 리스트의 적어도 일부를 생성하도록 구성된다.
추가적으로, 본 발명의 일 실시예에 따르면, 의료 판독들은 카테터의 위치, 카테터의 적어도 하나의 전극의 적어도 하나의 위치, 심전도(ECG)가 수행된 위치, 절제가 수행된 위치, 또는 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함한다.
더욱이, 본 발명의 일 실시예에 따르면, 프로세서는 각자의 위치에서 그래픽 표현에 대한 주석의 추가를 나타내는 사용자 인터페이스로부터의 입력을 수신하도록 구성되고, 프로세서는 특징 리스트에 주석을 추가하도록 구성된다.
또한, 본 발명의 일 실시예에 따르면, 주석은 소정 형상의 주연부를 형성한다.
또한, 본 발명의 일 실시예에 따르면, 프로세서는 해부학적 구조의 그래픽 표현이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 주석을 주석의 형상의 도심에 기초하여 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이 상에 렌더링하도록 구성된다.
본 발명의 또 다른 실시예에 따르면, 소프트웨어 제품이 또한 제공되며, 소프트웨어 제품은 프로그램 명령어들이 저장된 비일시적인 컴퓨터 판독가능 매체를 포함하는 소프트웨어 제품으로서, 명령어들은 중앙 처리 유닛(CPU)에 의해 판독될 때, CPU로 하여금, 살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지에 기초한 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고, 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고, 해부학적 구조의 그래픽 표현의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하고, 제1 뷰를 보여주는 동안, 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하고, 해부학적 구조의 그래픽 표현이 제1 뷰로부터 그래픽 표현 상의 각자의 위치에 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하게 한다.
본 발명은 다음의 도면과 관련하여 취해진 하기의 상세한 설명으로부터 이해될 것이다.
도 1은 본 발명의 일 실시예에 따라 구성되고 작동하는 의료 이미징 시스템의 부분적 회화도이자 부분적 블록도이다.
도 2는 도 1의 의료 이미징 시스템과 함께 사용하기 위한 사용자 인터페이스 스크린 표시의 개략도이다.
도 3 내지 도 9는 선택된 특징으로의 회전, 병진, 및 줌을 예시하는 도 2의 사용자 인터페이스 스크린 표시의 개략도이다.
도 10은 주석의 추가를 예시하는, 도 2의 사용자 인터페이스 스크린 표시의 개략도이다.
도 11은 도 1의 의료 이미징 시스템의 작동 방법에서의 예시적인 단계들을 포함하는 흐름도이다.
개요
심실과 같은 신체-부위의 3차원(3D) 이미지를 2차원(2D) 스크린 상에 표현하려고 시도함에 있어서, 사용자 인터페이스에 의한 수동 회전 및 사용자에 의한 이미지의 시각적 검사 없이 3D 이미지의 특정 아이템을 위치시키는 것은 종종 어렵다. 이는 시간 소모적일 수 있고, 부정확한 아이템을 식별하거나 정확한 아이템을 너무 늦게 식별하는 결과를 가져올 수 있다. 일부 경우에, 의료 실수가 이루어질 수 있으며, 의료 시술 도중에 이러한 실수는 시기적절하게 그리고 정확한 결정을 행하는 것이 의료 시술의 성공에 필수적일 수 있으므로 심각할 수 있다.
본 발명의 실시예는, 선택된 특징이 현재 뷰에 있지 않을 수 있더라도, 사용자가 특징들의 리스트(또는 특징 리스트)로부터 해부학적 구조의 특징들을 선택하게 하는 사용자 인터페이스 스크린 표시를 포함하는 시스템을 제공한다. 선택된 특징이 스크린 상에 사용자에게 보여질 때까지 해부학적 구조의 그래픽 표현이 시스템에 의해 자동 회전된다. 사용자가 해부학적 구조의 다른 특징에 대한 선택된 특징의 위치의 맥락을 보게 하기 위해, 시스템은 선택된 특징이 보여질 때까지 해부학적 구조가 회전되는 것을 보여준다. 위의 방식으로, 뷰로부터 숨겨진 특징들조차도 신속하고도 정확하게 발견되어 인간 오차 인자를 감소시킬 수 있다.
해부학적 구조는 일반적으로 구형이 아니기 때문에, 단순히 그래픽 표현을 회전시키는 것은 선택된 특징이 최적의 방식에 못 미치게 디스플레이되게 할 수 있다. 따라서, 일부 실시예에서, 시스템은 또한, 예를 들어, 제한하는 것은 아니나, 선택된 특징을 스크린 상의 디스플레이 패널의 중심에 보다 최적으로 방식으로 디스플레이하기 위해 그래픽 표현을 자동 병진(이동)시킨다. 사용자가 선택된 특징의 위치의 맥락을 보게 하기 위해, 시스템은 스크린 상에서 병진(이동)되는 해부학적 구조를 보여준다.
일부 실시예에서, 시스템은 또한 선택된 특징으로 줌-인(zoom-in)하여, 선택된 특징이 더 쉽게 뷰잉될 수 있도록, 그리고 사용자가 선택된 특징의 위치의 문맥을 보게 할 수 있다. 따라서, 시스템은 스크린 상에 확대된 해부학적 구조를 보여줄 수 있다.
해부학적 구조의 그래픽 표현은 일반적으로 의료 장치에 의해 형성되는, 해부학적 구조의 3D 이미지로부터 도출된다. 의료 장치는 하기에 더 상세히 기술되는 의료 판독을 취할 수 있다. 그러한 의료 장치는 예를 들어 CT 또는 MRI 스캐너와 같은 비-침습성 장치, 또는 해부학적 구조 내로 삽입되고 해부학적 구조를 맵핑하는 카테터와 같은 침습성 장치를 포함할 수 있다. 본 명세서 및 특허청구범위의 맥락에서 사용되는 바와 같이, 용어 "3D 이미지"는, 3D 해부학적 구조의 3D 스캔 및 3D 맵을 포함하지만 이에 제한되지 않는 모든 그러한 타입의 3D 데이터를 포함한다.
특징 리스트는 해부학적 구조와 연관된 특징들을 포함하며, 각각의 특징은 해부학적 구조의 그래픽 표현에 대한 각자의 위치를 갖는다. 특징들은 자동 및/또는 수동 생성될 수 있다.
특징 리스트의 자동 생성은, 예를 들어 카테터의 위치, 카테터의 전극(들)의 위치(들), 심전도(ECG)가 수행된 위치, 절제가 수행된 위치, 또는 절제가 수행될 것으로 계획된 위치, 그러나 이에 제한되지 않는 의료 장치의 의료 판독에 기초하여 시스템에 의해 수행될 수 있다. 특징 리스트는 특징의 일반적인 설명, 예를 들어 카테터 위치 X, 절제 지점 Y, 또는 계획된 절제 Z를 포함할 수 있다. 특징 리스트는 또한 보다 상세한 정보로서, 예를 들어, 제한하는 것은 아니나 상세한 위치 좌표, 전기적 판독, 절제 타이밍 또는 온도를 포함할 수 있다.
추가적으로 또는 대안적으로, 특징 리스트는 사용자가 해부학적 구조의 그래픽 표현 상의 다양한 각자의 위치에 그래픽 표현에 주석을 추가함으로써 생성될 수 있다. 주석은 아이콘, 형상 또는 심지어 자유 형태 주석을 포함할 수 있다. 사용자는 추가된 주석의 용이한 사용자 선택을 가능하게 하기 위해 특징 리스트에 추가되는, 각각의 주석에 적합한 설명 텍스트를 추가할 수 있다.
시스템 설명
본 명세서에 참고로 포함되는 문헌은, 임의의 용어가 이들 포함된 문헌에서 본 명세서에 명시적으로 또는 암시적으로 이루어진 정의와 상충되는 방식으로 정의되어 있는 경우에 본 명세서 내의 정의만이 고려되어야 한다는 점을 제외하면, 본 출원의 필수적인 부분으로 고려되어야 한다.
이제 도면을 참조하면, 본 발명의 실시예에 따라 구성되고 작동하는 의료 이미징 시스템(10)의 부분적 회화도이자 부분적 블록도인 도 1을 먼저 참조한다. 의료 이미징 시스템(10)은 살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지를 형성하기 위한 의료 장치를 포함한다. 해부학적 구조는 임의의 적합한 해부학적 구조, 예를 들어 수족 또는 그의 일부, 내부 기관 또는 임의의 다른 적합한 신체 부위일 수 있지만, 이에 제한되지 않는다. 도 1 내지 도 10의 예에서, 본 발명의 일부 실시예를 예시하는 데 사용되는 해부학적 구조로서 심장(12)이 도시되어 있다. 해부학적 구조의 3D 이미지는 사용자 인터페이스 스크린 표시에 대한 입력으로서 사용되며, 이는 도 2 내지 도 11을 참조하여 보다 상세히 기술된다. 3D 이미지는 도 1을 참조하여 본 명세서에서 후술되는 시스템 및 방법을 사용하여 형성될 수 있으며, 여기서 해부학적 구조(예를 들어, 심장(12))의 3D 이미지는 프로브(14)의 위치에 기초한 맵핑 기술을 사용하여 형성될 수 있다. 추가적으로 또는 대안적으로, 단지 예로서, 3D 스캔은 초음파, 자기 공명 영상(MRI), 또는 컴퓨터 단층촬영(CT) 스캔을 포함하는 임의의 적합한 의료 이미징 방법을 사용하여 형성될 수 있다.
시스템(10)은 조작자(16)에 의해 환자의 혈관계를 통해 심장(12)의 심실 또는 혈관 구조 내로 경피 삽입되는 카테터와 같은 프로브(14)를 포함한다. 전형적으로 의사인 조작자(16)는, 예를 들어 절제를 수행하거나, 심장(12)의 하나 이상의 심실의 표면 위의 다수의 샘플 위치에서 시간 경과에 따라 전위를 포착하거나, 심장의 3D 이미지를 생성하기 위하여 심장(12)의 표면의 위치를 포착하기 위해, 프로브(14)의 원위 팁(18)을 심장벽과 접촉되게 한다. 그 개시 내용이 본 명세서에 참고로 포함되는 미국 특허 제6,226,542호 및 제6,301,496호에 그리고 공히 양도된 미국 특허 제6,892,091호에 개시된 방법에 따라, 전기 활성화 맵(electrical activation map)이 준비될 수 있다. 시스템(10)의 요소를 구현하는 하나의 상용 제품이 미국 캘리포니아주 92618 어바인 33 테크놀로지 드라이브 소재의 바이오센스 웹스터, 인크.(Biosense Webster, Inc.)로부터 입수가능한 카르토(등록상표) 3 시스템(CARTO® 3 System)으로서 입수가능하다. 이러한 시스템은 당업자에 의해 본 명세서에 기술된 본 발명의 원리를 구현하도록 수정될 수 있다.
예를 들어 전기 활성화 맵의 평가에 의해 비정상인 것으로 결정된 영역은 열 에너지의 인가에 의해, 예를 들어 고주파 전류를 프로브(14) 내의 와이어를 통해, 고주파 에너지를 심근(myocardium)에 인가하는, 원위 팁(18)에 있는 하나 이상의 전극으로 통과시킴으로써 절제될 수 있다. 에너지는 조직 내에 흡수되어, 조직이 그의 전기적 흥분성(electrical excitability)을 영구적으로 상실하는 온도(전형적으로 약 50OC)로 조직을 가열한다. 성공적일 때, 이러한 시술은 심장 조직 내에 비-전도성 병변을 생성하며, 이는 부정맥을 유발하는 비정상적인 전기 경로를 파괴한다. 본 발명의 원리는 많은 상이한 심장 부정맥을 진단하고 치료하기 위해 상이한 심실에 적용될 수 있다.
프로브(14)는 전형적으로 손잡이(20)를 포함하며, 손잡이는 조작자(16)가 절제에 요구되는 대로 프로브(14)의 원위 단부(18)를 조종, 위치결정 및 배향할 수 있게 하기 위해 손잡이 상에 적합한 제어부를 갖는다. 조작자(16)를 돕기 위해, 프로브(14)의 원위 부분은 콘솔(24) 내에 위치되는 프로세서(22)에 신호를 제공하는 위치 센서(도시되지 않음)를 포함한다. 프로세서(22)는 후술되는 바와 같은 여러 처리 기능을 수행할 수 있다.
절제 에너지 및 전기 신호가 심장(12)으로 그리고 심장으로부터 프로브(14)의 원위 팁(18)에 또는 그 부근에 위치되는 하나 이상의 절제 전극(32)을 통하여 케이블(34)을 통해 콘솔(24)에 전달될 수 있다. 그러한 방식으로, 프로브(14)의 절제 전극(32)은 심장(12)의 하나 이상의 심실의 표면 위의 다수의 샘플 위치에서 시간 경과에 따라 전위를 포착하도록 구성된다. 추가적으로 또는 대안적으로, 다른 전극들이 심장(12)의 하나 이상의 심실의 표면 위의 다수의 샘플 위치에서 시간 경과에 따라 전위를 포착하도록 구성될 수 있다. 페이싱 신호(pacing signal) 및 다른 제어 신호가 콘솔(24)로부터 케이블(34) 및 전극(32)을 통해 심장(12)에 전달될 수 있다. 콘솔(24)에 또한 연결된 감지 전극(33)이 절제 전극(32) 사이에 배치되고, 케이블(34)에 대한 연결부를 갖는다. 프로브(14)는 심장(12)의 하나 이상의 심실의 표면 위의 다수의 샘플 위치에서 시간 경과에 따라 전위를 포착하도록 구성되는 전극을 갖는 탐구 장치로서, 절제 전극(32) 없이 구현될 수 있다.
와이어 연결부(35)는 콘솔(24)을 신체 표면 전극(30) 및 프로브(14)의 위치 및 배향 좌표를 측정하기 위한 위치결정 서브시스템(positioning sub-system)의 다른 구성요소와 연결한다. 프로세서(22) 또는 다른 프로세서(도시되지 않음)는 위치결정 서브시스템의 요소일 수 있다. 전극(32) 및 신체 표면 전극(30)은 본 명세서에 참고로 포함되는, 고바리(Govari) 등에게 허여된 미국 특허 제7,536,218호에 교시된 바와 같이 절제 부위에서 조직 임피던스(tissue impedance)를 측정하기 위해 사용될 수 있다. 생체전기 정보를 위한 센서, 예를 들어 전형적으로 열전대(thermocouple) 또는 서미스터(thermistor)인 온도 센서(도시되지 않음)가 각각의 전극(32) 상에 또는 그 부근에 장착될 수 있다.
콘솔(24)은 전형적으로 하나 이상의 절제 발전기(ablation power generator)(25)를 포함한다. 프로브(14)는 임의의 알려진 절제 기술, 예를 들어 고주파 에너지, 초음파 에너지, 및 레이저-생성 광 에너지를 사용하여 절제 에너지를 심장에 전도하도록 구성될 수 있다. 그러한 방법은 본 명세서에 참고로 포함되는, 공히 양도된 미국 특허 제6,814,733호, 제6,997,924호, 및 제7,156,816호에 개시된다.
일 실시예에서, 위치결정 서브시스템은 자기장 생성 코일(field generating coil)(28)을 사용하여, 사전한정된 작업 볼륨(working volume) 내에 자기장을 생성시키고 프로브(14)에서 이들 자기장을 감지함으로써 프로브(14)의 위치 및 배향을 결정하는 자기 위치 추적 배열을 포함한다. 위치결정 서브시스템이 본 명세서에 참고로 포함되는 미국 특허 제7,756,576호 및 위에 언급된 미국 특허 제7,536,218호에 기술된다.
위에 언급된 바와 같이, 프로브(14)는 조작자(16)가 프로브(14)의 기능을 관찰하고 조절할 수 있게 하는 콘솔(24)에 결합된다. 프로세서(22)는 적절한 신호 처리 회로를 갖는 컴퓨터로 구현될 수 있다. 프로세서(22)는 디스플레이(37)를 포함하는 모니터(29)를 구동시키도록 결합된다. 신호 처리 회로는 전형적으로 프로브(14) 내에 원위에 위치되는 복수의 위치 감지 전극(도시되지 않음), 및 전기, 온도 및 접촉력 센서와 같은 센서에 의해 발생되는 신호를 포함하는, 프로브(14)로부터의 신호를 수신, 증폭, 필터링 및 디지털화한다. 디지털화된 신호는 콘솔(24) 및 위치결정 시스템에 의해 수신되고 사용되어 프로브(14)의 위치 및 배향을 계산하고 전극으로부터의 전기 신호를 분석한다.
전기해부학적 맵을 생성하기 위해, 프로세서(22)는 전형적으로 전기해부학적 맵 생성기, 이미지 등록 프로그램, 이미지 또는 데이터 분석 프로그램, 및 모니터(29) 상에 그래픽 정보를 표시하도록 구성되는 그래픽 사용자 인터페이스를 포함한다.
실제로, 프로세서(22)의 이러한 기능들 중 일부 또는 전부는 단일 물리적 컴포넌트에서 조합될 수 있거나, 또는 대안적으로, 다수의 물리적 컴포넌트들을 사용하여 구현될 수 있다. 이들 물리적 구성요소는 하드-와이어드(hard-wired) 또는 프로그램가능 장치, 또는 이 둘의 조합을 포함할 수 있다. 일부 실시예에서, 프로세서의 기능들 중 적어도 일부는 적합한 소프트웨어의 제어 하에서 프로그램가능 프로세서에 의해 수행될 수 있다. 이러한 소프트웨어는 예를 들어 네트워크를 통해 전자 형태로 장치에 다운로드될 수 있다. 대안적으로 또는 추가적으로, 소프트웨어는 광학, 자기, 또는 전자 메모리와 같은 유형의(tangible) 비-일시적 컴퓨터 판독가능 저장 매체에 저장될 수 있다.
콘솔(24)은 또한 디스플레이(37), 및 임의의 적합한 사용자 입력 장치, 예를 들어, 제한하는 것은 아니나, 포인팅 장치(예컨대, 스타일러스의 마우스), 키보드, 및/또는 디스플레이(37)에서 구현되는 터치 감응형 스크린을 통해 조작자(16)(또는 다른 사용자)로부터 입력 커맨드를 수신하기 위한 입력 장치(39)를 포함하는 사용자 인터페이스를 포함할 수 있다.
전형적으로, 시스템(10)은 간단함을 위해 도면에 도시되지 않는 다른 요소를 포함한다. 예를 들어, 시스템(10)은 심전도(ECG) 동기화 신호를 콘솔(24)에 제공하기 위해 신체 표면 전극(30)으로부터 신호를 수신하도록 결합되는 ECG 모니터를 포함할 수 있다. 위에 언급된 바와 같이, 시스템(10)은 전형적으로 또한 대상의 신체의 외부에 부착되는 외부 적용 기준 패치(reference patch) 상에, 또는 심장(12) 내로 삽입되고 심장(12)에 대해 고정된 위치로 유지되는 내부 배치 프로브 상에 기준 위치 센서를 포함한다. 절제 부위를 냉각시키기 위해 프로브(14)를 통해 액체를 순환시키기 위한 종래의 펌프 및 라인이 제공된다. 시스템(10)은 MRI 유닛 등과 같은 외부 이미징 기법으로부터 이미지 데이터를 수신할 수 있고, 이미지를 생성하고 표시하기 위해 프로세서(22) 내에 통합되거나 프로세서에 의해 호출될 수 있는 이미지 프로세서를 포함한다.
이제 도 1의 의료 이미징 시스템(10)과 함께 사용하기 위한 사용자 인터페이스 스크린 표시(100)의 개략도인 도 2를 참조한다. 사용자 인터페이스 스크린 표시(100)는 이미지 패널(102) 및 특징 리스트 패널(104)을 포함한다. 이미지 패널(102)은 해부학적 구조(예를 들어, 심장(12)(도 1) 또는 임의의 다른 적합한 신체 부위)의 그래픽 표현(106)의 하나의 뷰를 포함한다. 그래픽 표현(106)은 의료 이미징 시스템(10) 또는 임의의 적합한 이미징 장치에 의해 형성된 해부학적 구조의 3차원(3D) 이미지로부터 도출된다. 그래픽 표현(106)은 이전의 카테터 위치, 현재의 카테터 위치, ECG 위치, 절제 지점, 계획된 절제 지점 또는 임의의 다른 적합한 특징과 같은, 해부학적 구조와 관련된 다양한 특징을 나타낼 수 있는 복수의 특징(112)을 포함한다. 도 2에 도시된 특징(112)들은 환상(annuli)(2D 도넛 형상)으로 도시되어 있다. 특징(112)은 임의의 적합한 형상 및/또는 포맷(예를 들어, 색상 및/또는 음영)으로 나타낼 수 있다. 상이한 형상 및/또는 상이한 포맷을 사용하여 상이한 타입의 특징(112)이 도시될 수 있다. 간략함을 위해, 모든 특징(112)은 동일한 심볼을 포함한다. 도면에서, 특징(112)들 중 단지 일부만이 단순화를 위해 라벨링되어 있다.
특징 리스트 패널(104)은 해부학적 구조의 다양한 특징(112)을 나열하는 특징 리스트(108)를 포함한다. 각각의 특징(112)은 3D 이미지로부터 도출될 수 있거나 특징(112)이 추가된 그래픽 표현(106) 상의 위치에 기초한, 그래픽 표현(106) 상의 각자의 위치를 갖는다. 특징(112) 중 일부는 도 2에 도시된 바와 같이 그래픽 표현(106)의 현재 뷰 상에 도시된 반면, 다른 특징(112)은 특징(112)이 도 2에 도시되지 않은 그래픽 표현(106)의 측면 상에 배치됨에 따라 현재 뷰로부터 숨겨질 수 있다. 사용자 인터페이스 스크린 표시(100)가 그래픽 표현(106)의 현재 뷰를 여전히 보여주는 동안, 사용자는 특징(112)들 중 하나를 특징 리스트(108)로부터 선택할 수 있다. 도 2는 사용자에 의해 조작되는 커서(110)가 특징 리스트(108) 내의 항목 5의 호버링(hovering)을 하는 것을 예시한다. 이어서, 사용자는 선택 동작을 수행하여, 항목 5의 디스플레이를 특징 리스트(108)로부터 선택한다. 프로세서(22)(도 1)는 특징 리스트(108)로부터 특징(예를 들어, 아이템 5)을 선택하는, 사용자 인터페이스의 입력 장치(39)로부터의 입력을 수신하도록 구성된다. 항목 5는 그래픽 표현(106)의 현재 뷰에 포함되지 않으므로, 그래픽 표현(106)은 도 3 내지 도 6을 참조하여 아래에서 기술되는 바와 같이 항목 5를 나타내도록 회전된다.
이제 도 2의 사용자 인터페이스 스크린 표시(100)의 개략도들로서, 선택된 특징으로의 회전, 병진, 및 줌을 예시하는 도 3 내지 도 9를 참조한다. 도 3 내지 도 6은 그래픽 표현(106)이 도 2에 도시된 뷰로부터, 선택된 항목 5, 특징(112-5)을 포함하는 도 6에 도시된 새로운 뷰로 점진적으로 자동 회전되는 것을 도시한다. 특징(112-5)이 먼저 도 5에 도시되어 있다.
특징(112-5)은 특징(112-5)이 선택된 특징(112)임을 나타내기 위해 링에 의해 둘러싸인 환상부(annulus)를 포함한다. 도 6은 또한 환상부로부터 외향으로 연장되는 라인 상에 일반적으로 배치된 정사각형들(라벨링되지 않음)을 도시한다. 정사각형들은 카테터가 위치 5에 있을 때 카테터의 전극 위치를 나타낸다.
선택된 특징(112-5)은 여전히 이미지 패널(102)에 중심이 맞춰지지 않고 있다. 따라서, 일부 실시예에서, 도 7에 도시된 바와 같이, 프로세서(22)는 선택된 특징(112-5)이 이미지 패널(102)의 중심에 보이도록 그래픽 표현(106)을 (예를 들어, 상부, 하부, 좌측 및/또는 우측 또는 이들의 임의의 적합한 조합으로) 자동 병진(이동)시킨다. 특징(112-5)의 중심은 특징(112-5)의 환상부의 중심에 의해, 또는 환상부와 전극 위치를 나타내는 정사각형들을 둘러싸는 형상의 도심(centroid)에 의해 한정될 수 있다.
일부 실시예에서, 그래픽 표현(106)은 비구형이기 때문에, 그래픽 표현(106)이 하나의 뷰로부터 다른 뷰로 자동 회전되는 동안, 그래픽 표현(106)은 또한, 그래픽 표현(106)의 어떤 측면이라도 뷰 내에 보여지게 하고 일반적으로 이미지 패널(102) 내에 중심에 위치되게 유지하도록, 임의의 횟수로 (예를 들어, 상부, 하부, 좌측 및/또는 우측, 또는 이들의 임의의 적합한 조합으로) 자동 병진(이동)될 수 있다. 일부 실시예에서, 사용자는 이미지 패널(102) 내에서 그래픽 표현(106)을 수동 회전 및 병진시키는 능력을 갖는다.
일부 실시예에서, 선택된 특징(112-5)의 더 나은 뷰를 제공하기 위해, 그래픽 표현(106)은 특징(112-5)의 평면이 이미지 패널(102)의 평면과 평행하도록 자동 회전 및/또는 병진된다. 특징(112-5)의 평면은, 예를 들어, 특징(112-5)의 포인트들의 적어도 정사각형 맞춤을 사용하여, 다양한 포인트들의 평균 위치들을 한정하는 평면으로서 한정될 수 있다.
도 8 및 도 9는 그래픽 표현(106)이 확대(줌-인)됨으로써 특징(112-5)의 뷰를 확대시키는 것을 도시한다. 다른 특징(112)이 특징 리스트(108)로부터 선택되는 경우, 프로세서(22)는 그래픽 표현(106)을 그래픽 표현(106)의 새로운 뷰로 회전시키기 전에 그래픽 표현(106)의 뷰를 줌-아웃(zoom-out)하도록 구성된다. 일부 실시예에서, 그래픽 표현(106)은 스케일링 축소 또는 확대되지 않을 수 있다.
그래픽 표현(106)의 회전, 병진, 및 스케일링은 적합한 기능, 예를 들어, 이에 제한되지 않지만, 아핀 변환(affine transformation)을 이용하여 수행될 수 있다.
이제 도 2의 사용자 인터페이스 스크린 표시(100)의 개략도인, 주석(112-15)의 추가를 예시하는 도 10을 참조한다. 프로세서(22)(도 1)는 각자의 위치에서의 그래픽 표현(106)에 대한 주석(112-15)의 추가를 나타내는, 사용자 인터페이스의 입력 장치(39)로부터의 입력을 수신하도록 구성된다. 주석(112-15)은 소정 형상의 주연부를 형성한다. 도 10에 도시된 형상은 마우스 또는 스타일러스와 같은 적합한 포인팅 장치를 사용하여 그래픽 표현(106) 상에 라인을 그리는 사용자에 의해 형성된 불규칙한 형상이다. 형상은, 단지 예로서, 직사각형, 정사각형, 타원형, 원형 또는 삼각형과 같은 규칙적인 형상을 포함하는 임의의 적합한 형상일 수 있다. 일부 실시예에서, 주석은 심볼, 그래픽, 및/또는 그림을 포함할 수 있다. 프로세서(22)는 주석(112-15)을 특징 리스트(108)에 추가하도록 구성된다. 도 10의 예에서, 주석(112-5)은 항목 15으로서 특징 리스트(108)에 추가된다.
새롭게 추가된 특징(112-15)이 특징 리스트(108)로부터 사용자에 의해 선택되는 경우, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 현재 뷰로부터 그래픽 표현(106)의 다른 뷰로 자동 회전(및 임의로, 자동 병진 및/또는 줌)되어, 주석(112-15)을 주석(112-15)의 형상의 도심(114)에 기초하여 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 렌더링하도록 구성된다.
이제 도 1의 의료 이미징 시스템(10)의 작동 방법에서의 예시적인 단계들을 포함하는 흐름도(200)인 도 11을 참조한다. 의료 장치(예컨대, 의료 이미징 시스템(10) 내에 포함된 것)는 (예를 들어, 데이터를 스캐닝 또는 매핑함에 의해) 살아 있는 대상의 신체 내의 해부학적 구조의 3D 이미지를 형성하도록 구성된다(블록(202)). 일부 실시예에서, 의료 장치는 적합한 장치를 사용하여, 예를 들어, 제한하는 것은 아니나 프로브(14)(도 1)를 사용하여 의료 판독을 수행하도록 구성된다(블록(204)). 의료 판독은, 단지 예로서, 카테터의 (현재 또는 이전) 위치, 카테터의 적어도 하나의 전극의 적어도 하나의 위치, ECG가 수행된 위치, 절제가 수행된 위치, 또는 절제가 수행될 것으로 계획되는 위치 중 임의의 하나 이상을 포함할 수 있다.
프로세서(22)는 해부학적 구조와 연관된 특징(112)의 특징 리스트(108)(도 2 내지 도 10)를 생성하도록 구성된다(블록(206)). 각각의 특징(112)은 해부학적 구조 및/또는 3D 스캔의 그래픽 표현(106)에 대한 각자의 위치를 갖는다. 일부 실시예에서, 프로세서(22)는 특징(112)들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독으로부터 특징 리스트(108)의 적어도 일부를 생성하도록 구성된다. 일부 실시예에서, 특징 리스트(108)는 아래의 블록들(218 내지 220)의 단계들을 참조하여 기술된 사용자 생성 주석들에 기초하여 생성된다.
프로세서(22)는 3D 이미지에 기초하여 해부학적 구조의 그래픽 표현(106)(도 2 내지 도 10)을 포함하는 사용자 인터페이스 스크린 표시(100)(도 2 내지 도 10)를 준비하도록 구성된다(블록(208)). 프로세서(22)는 해부학적 구조의 그래픽 표현(106)의 제1 뷰를 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37)(도 1)에 렌더링하도록 구성된다(블록(210)). 제1 뷰를 보여주는 동안, 프로세서(22)는 특징(112)들 중 하나를 특징 리스트(108)로부터 선택하는, 사용자 인터페이스의 입력 장치(39)로부터의 입력을 수신하도록 구성된다(블록(212)).
프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 제1 뷰로부터 그래픽 표현(106) 상의 각자의 위치에 선택된 특징(112)을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37)에 렌더링하도록 구성된다(블록(214)). 일부 실시예에서, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37) 상에 렌더링하도록 구성된다. 일부 실시예에서, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 제1 뷰로부터 제2 뷰로 자동 회전 및 자동 병진되어 선택된 특징(112)을 (수평적으로 및/또는 수직적으로) 사용자 인터페이스 스크린 표시(100)의 이미지 패널(102)(도 2 내지 도 10) 내에 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37) 상에 렌더링하도록 구성된다. 일부 실시예에서, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 제1 뷰로부터 제2 뷰로 자동 회전(및 병진)되고, 제2 뷰에서 자동 줌-인되어 선택된 특징(112)을 확대하는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37) 상에 렌더링하도록 구성된다. 블록들(212, 214)의 단계들은 사용자에 의해 선택된 새롭게 선택된 특징(112)들에 기초하여 반복될 수 있다(화살표(216)).
일부 실시예에서, 프로세서(22)는 각자의 위치에서의 그래픽 표현(106)에 대한 주석의 추가를 나타내는, 사용자 인터페이스의 입력 장치(39)로부터의 입력을 수신하도록 구성된다(블록(218)). 주석은 소정 형상의 주연부를 형성한다. 형상은, 예를 들어 마우스 또는 스타일러스와 같은 적합한 포인팅 장치를 사용하여 그래픽 표현(106) 상에 라인을 그리는 사용자에 의해 형성된 불규칙한 형상일 수 있다. 형상은, 단지 예로서, 직사각형, 정사각형, 타원형, 원형 또는 삼각형과 같은 규칙적인 형상을 포함하는 임의의 적합한 형상일 수 있다. 추가적으로 또는 대안적으로, 주석은 심볼, 그래픽, 및/또는 그림을 포함할 수 있다. 프로세서(22)는 주석을 특징 리스트(108)에 추가하도록 구성된다(블록(220)). 블록들(218 내지 220)의 단계들을 반복함으로써(화살표(222)) 리스트에 더 많은 주석들이 추가될 수 있다.
추가의 특징(112)이 특징 리스트(108)로부터 사용자에 의해 선택될 수 있고, 이는 블록(212 내지 214)의 단계들을 반복함으로써(화살표(224)), 그래픽 표현(106)이 이미지 패널(102) 내에서 선택된 특징(112)으로 자동 회전(및 선택적으로 병진 및/또는 줌)하는 것으로 이어진다. 선택된 특징(112)들 중 하나는 사용자 추가 주석을 포함할 수 있다. 그러한 경우에, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 현재 뷰로부터 선택된 주석을 포함하는 다른 뷰로 자동 회전(및 임의로, 자동 병진 및/또는 자동 줌)되는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37) 상에 렌더링하도록 구성된다. 일부 실시예에서, 프로세서(22)는 해부학적 구조의 그래픽 표현(106)이 현재 뷰로부터 다른 뷰로 자동 회전 및 자동 병진(및 임의로, 자동 줌)되어, 선택된 주석을 주석의 형상의 도심(114)에 기초하여 중심설정하는 것을 보여주는 사용자 인터페이스 스크린 표시(100)를 디스플레이(37) 상에 렌더링하도록 구성된다.
명확성을 위해서 개별 실시예와 관련하여 설명된 본 발명의 다양한 특징은 또한 단일 실시예와 조합하여 제공될 수 있다. 역으로, 간략함을 위해 단일 실시예로 기재된 본 발명의 다양한 특징은 별개로 또는 임의의 적합한 하위 조합으로 또한 제공될 수 있다.
전술된 실시예는 예로서 인용되며, 본 발명은 특히 본 명세서에서 전술되고 도시된 것에 의해 제한되는 것은 아니다. 오히려, 본 발명의 범주는 본 명세서에서 전술된 다양한 특징의 조합 및 하위 조합 둘 모두 뿐만 아니라, 전술한 설명을 읽을 때 당업자에게 떠오를 것이고 종래 기술에서 개시되지 않은 본 발명의 변형 및 수정을 포함한다.

Claims (30)

  1. 시스템으로서,
    살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지를 형성하도록 구성되는 의료 장치;
    디스플레이 및 입력 장치를 포함하는 사용자 인터페이스; 및
    프로세서를 포함하고,
    상기 프로세서는,
    상기 3D 이미지에 기초한 상기 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고,
    상기 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고,
    상기 해부학적 구조의 상기 그래픽 표현의 제1 뷰를 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하고,
    상기 제1 뷰를 보여주는 동안, 상기 리스트로부터 특징을 선택하는 상기 사용자 인터페이스로부터의 입력을 수신하고,
    상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 그래픽 표현 상의 상기 각자의 위치에 상기 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하도록 구성되는, 시스템.
  2. 제1항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  3. 제1항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 선택된 특징을 상기 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  4. 제1항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전되고 상기 제2 뷰에서 자동 줌-인되어(zoomed in) 상기 선택된 특징을 확대하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  5. 제1항에 있어서, 상기 프로세서는 상기 복수의 특징들 중 적어도 일부에 대해 상기 의료 장치에 의해 수행되는 의료 판독들로부터 상기 특징 리스트의 적어도 일부를 생성하도록 구성되는, 시스템.
  6. 제5항에 있어서, 상기 의료 판독들은 카테터의 위치; 상기 카테터의 적어도 하나의 전극의 적어도 하나의 위치; 심전도(ECG)가 수행된 위치; 절제가 수행된 위치; 또는 상기 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함하는, 시스템.
  7. 제6항에 있어서, 상기 복수의 전극들을 포함하고 상기 절제를 수행하도록 구성되는 프로브를 추가로 포함하는, 시스템.
  8. 제1항에 있어서, 상기 프로세서는 각자의 위치에서 상기 그래픽 표현에 대한 주석의 추가를 나타내는 상기 사용자 인터페이스로부터의 입력을 수신하도록 구성되고, 상기 프로세서는 상기 특징 리스트에 상기 주석을 추가하도록 구성되는, 시스템.
  9. 제8항에 있어서, 상기 주석은 소정 형상의 주연부를 형성하는, 시스템.
  10. 제9항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 주석을 상기 주석의 상기 형상의 도심(centroid)에 기초하여 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  11. 방법으로서,
    살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지를 수신하는 단계;
    상기 3D 이미지에 기초한 상기 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하는 단계;
    상기 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하는 단계;
    상기 해부학적 구조의 상기 그래픽 표현의 제1 뷰를 보여주는 상기 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하는 단계;
    상기 제1 뷰를 보여주는 동안, 상기 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하는 단계; 및
    상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 그래픽 표현 상의 상기 각자의 위치에 상기 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하는 단계를 포함하는, 방법.
  12. 제11항에 있어서, 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하는 단계를 추가로 포함하는, 방법.
  13. 제11항에 있어서, 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 선택된 특징을 상기 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하는 단계를 추가로 포함하는, 방법.
  14. 제11항에 있어서, 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전되고 상기 제2 뷰에서 자동 줌-인되어 상기 선택된 특징을 확대하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하는 단계를 추가로 포함하는, 방법.
  15. 제11항에 있어서, 상기 생성하는 단계는 상기 복수의 특징들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독들로부터 상기 특징 리스트의 적어도 일부를 생성하는 단계를 포함하는, 방법.
  16. 제15항에 있어서, 상기 의료 판독들은 카테터의 위치; 상기 카테터의 적어도 하나의 전극의 적어도 하나의 위치; 심전도(ECG)가 수행된 위치; 절제가 수행된 위치; 또는 상기 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함하는, 방법.
  17. 제16항에 있어서, 상기 절제를 수행하는 단계를 추가로 포함하는, 방법.
  18. 제11항에 있어서, 각자의 위치에서 상기 그래픽 표현에 대한 주석의 추가를 나타내는 상기 사용자 인터페이스로부터의 입력을 수신하는 단계; 및 상기 특징 리스트에 상기 주석을 추가하는 단계를 추가로 포함하는, 방법.
  19. 제18항에 있어서, 상기 주석은 소정 형상의 주연부를 형성하는, 방법.
  20. 제19항에 있어서, 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 주석을 상기 주석의 상기 형상의 도심에 기초하여 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하는 단계를 추가로 포함하는, 방법.
  21. 시스템으로서,
    디스플레이 및 입력 장치를 포함하는 사용자 인터페이스; 및
    프로세서를 포함하고,
    상기 프로세서는,
    살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지에 기초한 상기 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고,
    상기 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고,
    상기 해부학적 구조의 상기 그래픽 표현의 제1 뷰를 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하고,
    상기 제1 뷰를 보여주는 동안, 상기 리스트로부터 특징을 선택하는 상기 사용자 인터페이스로부터의 입력을 수신하고,
    상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 그래픽 표현 상의 상기 각자의 위치에 상기 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하도록 구성되는, 시스템.
  22. 제21항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  23. 제21항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 선택된 특징을 상기 사용자 인터페이스 스크린 표시의 패널 내에 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  24. 제21항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전되고 상기 제2 뷰에서 자동 줌-인되어 상기 선택된 특징을 확대하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  25. 제21항에 있어서, 상기 프로세서는 상기 복수의 특징들 중 적어도 일부에 대해 의료 장치에 의해 수행되는 의료 판독들로부터 상기 특징 리스트의 적어도 일부를 생성하도록 구성되는, 시스템.
  26. 제25항에 있어서, 상기 의료 판독들은 카테터의 위치; 상기 카테터의 적어도 하나의 전극의 적어도 하나의 위치; 심전도(ECG)가 수행된 위치; 절제가 수행된 위치; 또는 상기 절제가 수행될 것으로 계획된 위치 중 임의의 하나 이상을 포함하는, 시스템.
  27. 제21항에 있어서, 상기 프로세서는 각자의 위치에서 상기 그래픽 표현에 대한 주석의 추가를 나타내는 상기 사용자 인터페이스로부터의 입력을 수신하도록 구성되고, 상기 프로세서는 상기 특징 리스트에 상기 주석을 추가하도록 구성되는, 시스템.
  28. 제27항에 있어서, 상기 주석은 소정 형상의 주연부를 형성하는, 시스템.
  29. 제28항에 있어서, 상기 프로세서는 상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 제2 뷰로 자동 회전 및 자동 병진되어 상기 주석을 상기 주석의 상기 형상의 도심에 기초하여 중심설정하는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이 상에 렌더링하도록 구성되는, 시스템.
  30. 프로그램 명령어들이 저장된 비일시적인 컴퓨터 판독가능 매체를 포함하는 소프트웨어 제품으로서, 상기 명령어들은 중앙 처리 유닛(CPU)에 의해 판독될 때, 상기 CPU로 하여금,
    살아 있는 대상의 신체 내의 해부학적 구조의 3차원(3D) 이미지에 기초한 상기 해부학적 구조의 그래픽 표현을 포함하는 사용자 인터페이스 스크린 표시를 준비하고,
    상기 해부학적 구조와 연관되고 각각 각자의 위치를 갖는 복수의 특징들의 특징 리스트를 생성하고,
    상기 해부학적 구조의 상기 그래픽 표현의 제1 뷰를 보여주는 상기 사용자 인터페이스 스크린 표시를 디스플레이에 렌더링하고,
    상기 제1 뷰를 보여주는 동안, 상기 리스트로부터 특징을 선택하는 사용자 인터페이스로부터의 입력을 수신하고,
    상기 해부학적 구조의 상기 그래픽 표현이 상기 제1 뷰로부터 상기 그래픽 표현 상의 상기 각자의 위치에 상기 선택된 특징을 보여주는 제2 뷰로 자동 회전되는 것을 보여주는 상기 사용자 인터페이스 스크린 표시를 상기 디스플레이에 렌더링하게 하는, 소프트웨어 제품.
KR1020190142545A 2018-11-13 2019-11-08 의료 사용자 인터페이스 KR20200056927A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/188,482 2018-11-13
US16/188,482 US10672510B1 (en) 2018-11-13 2018-11-13 Medical user interface

Publications (1)

Publication Number Publication Date
KR20200056927A true KR20200056927A (ko) 2020-05-25

Family

ID=68583061

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190142545A KR20200056927A (ko) 2018-11-13 2019-11-08 의료 사용자 인터페이스

Country Status (10)

Country Link
US (1) US10672510B1 (ko)
EP (1) EP3660792A3 (ko)
JP (1) JP7460355B2 (ko)
KR (1) KR20200056927A (ko)
CN (1) CN111179410A (ko)
AU (1) AU2019232883A1 (ko)
BR (1) BR102019023073A2 (ko)
CA (1) CA3057515A1 (ko)
IL (1) IL269646B (ko)
RU (1) RU2019136074A (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109857318A (zh) * 2018-12-26 2019-06-07 深圳开立生物医疗科技股份有限公司 基于超声诊断系统的超声图像处理方法、设备及存储介质
WO2022002713A1 (en) * 2020-06-29 2022-01-06 Koninklijke Philips N.V. Generating and displaying a rendering of a left atrial appendage
TWI760938B (zh) * 2020-11-25 2022-04-11 客制化科技股份有限公司 直覺訂製系統

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6301496B1 (en) 1998-07-24 2001-10-09 Biosense, Inc. Vector mapping of three-dimensionally reconstructed intrabody organs and method of display
US6226542B1 (en) 1998-07-24 2001-05-01 Biosense, Inc. Three-dimensional reconstruction of intrabody organs
US6892091B1 (en) 2000-02-18 2005-05-10 Biosense, Inc. Catheter, method and apparatus for generating an electrical map of a chamber of the heart
US6762755B2 (en) 2000-10-16 2004-07-13 Pixel Science, Inc. Method and apparatus for creating and displaying interactive three dimensional computer images
US20030152897A1 (en) 2001-12-20 2003-08-14 Bernhard Geiger Automatic navigation for virtual endoscopy
US6814733B2 (en) 2002-01-31 2004-11-09 Biosense, Inc. Radio frequency pulmonary vein isolation
US6997924B2 (en) 2002-09-17 2006-02-14 Biosense Inc. Laser pulmonary vein isolation
US7156816B2 (en) 2002-11-26 2007-01-02 Biosense, Inc. Ultrasound pulmonary vein isolation
AU2003303086A1 (en) * 2002-11-29 2004-07-29 Bracco Imaging, S.P.A. System and method for displaying and comparing 3d models
KR20080021723A (ko) * 2005-06-02 2008-03-07 더 메디패턴 코포레이션 컴퓨터­보조 검진을 위한 시스템 및 방법
US7536218B2 (en) 2005-07-15 2009-05-19 Biosense Webster, Inc. Hybrid magnetic-based and impedance-based position sensing
US7756576B2 (en) 2005-08-26 2010-07-13 Biosense Webster, Inc. Position sensing and detection of skin impedance
US9373181B2 (en) * 2005-10-17 2016-06-21 Siemens Medical Soultions Usa, Inc. System and method for enhanced viewing of rib metastasis
WO2007099525A2 (en) 2006-03-03 2007-09-07 Medic Vision - Brain Technologies Ltd. System and method of automatic prioritization and analysis of medical images
US20080117225A1 (en) * 2006-11-21 2008-05-22 Rainer Wegenkittl System and Method for Geometric Image Annotation
GB0708358D0 (en) * 2007-05-01 2007-06-06 Cambridge Entpr Ltd Strain image display systems
WO2009015455A1 (en) * 2007-07-27 2009-02-05 Vorum Research Corporation Method, apparatus, media and signals for producing a representation of a mold
EP3872794A1 (en) 2009-05-12 2021-09-01 Edda Technology, Inc. System, method, apparatus, and computer program for interactive pre-operative assessment
US20100299155A1 (en) * 2009-05-19 2010-11-25 Myca Health, Inc. System and method for providing a multi-dimensional contextual platform for managing a medical practice
WO2010144402A2 (en) 2009-06-08 2010-12-16 Surgivision, Inc. Mri-guided surgical systems with preset scan planes
US8665268B2 (en) * 2009-09-22 2014-03-04 Siemens Aktiengesellschaft Image data and annotation processing system
US20110160569A1 (en) * 2009-12-31 2011-06-30 Amit Cohen system and method for real-time surface and volume mapping of anatomical structures
JP5662082B2 (ja) * 2010-08-23 2015-01-28 富士フイルム株式会社 画像表示装置および方法、並びに、プログラム
US8867802B2 (en) * 2011-04-19 2014-10-21 Microsoft Corporation Automatic organ localization
US10037820B2 (en) * 2012-05-29 2018-07-31 Medical Avatar Llc System and method for managing past, present, and future states of health using personalized 3-D anatomical models
US9373087B2 (en) * 2012-10-25 2016-06-21 Microsoft Technology Licensing, Llc Decision tree training in machine learning
RU2692206C2 (ru) 2013-05-09 2019-06-21 Конинклейке Филипс Н.В. Роботизированное управление эндоскопом на основе анатомических признаков
EP3451343B1 (en) 2013-09-25 2021-02-24 Heartflow, Inc. Systems and methods for validating and correcting automated medical image annotations
CN107106143B (zh) * 2015-05-07 2020-10-20 深圳迈瑞生物医疗电子股份有限公司 三维超声成像方法和装置
CN105662466A (zh) * 2016-01-11 2016-06-15 深圳开立生物医疗科技股份有限公司 一种体位图、添加方法、控制装置及其超声设备
US10788791B2 (en) * 2016-02-22 2020-09-29 Real View Imaging Ltd. Method and system for displaying holographic images within a real object
US11612429B2 (en) * 2017-05-31 2023-03-28 Covidien Lp Systems and methods for thermal ablation distortion detection

Also Published As

Publication number Publication date
JP2020078551A (ja) 2020-05-28
US10672510B1 (en) 2020-06-02
JP7460355B2 (ja) 2024-04-02
EP3660792A2 (en) 2020-06-03
RU2019136074A3 (ko) 2021-11-01
BR102019023073A2 (pt) 2020-06-02
RU2019136074A (ru) 2021-05-11
AU2019232883A1 (en) 2020-05-28
IL269646B (en) 2022-02-01
IL269646A (en) 2020-05-31
US20200152315A1 (en) 2020-05-14
CN111179410A (zh) 2020-05-19
CA3057515A1 (en) 2020-05-13
EP3660792A3 (en) 2020-09-09

Similar Documents

Publication Publication Date Title
KR101061670B1 (ko) 심장에 카테터의 전기생리학적 적용을 시각적 지원을 위한 방법 및 장치
JP6719885B2 (ja) 心内信号を利用した位置合わせマップ
EP3422297B1 (en) System and method for glass state view in real-time three-dimensional (3d) cardiac imaging
US9147289B2 (en) Method for visualizing the quality of an ablation process
JP5710100B2 (ja) 有形のコンピュータ可読媒体、解剖学的構造を画像化するための器械、及び、解剖学的構造を画像化するための器械の作動方法
EP3878354A1 (en) Electrophysiological user interface
EP1787594A2 (en) System and method for improved ablation of tumors
PT1086649E (pt) Aparelho destinado a avaliar, de modo intracardíaco, um estado de uma câmara de um coração
JP7460355B2 (ja) 医療ユーザインターフェース
EP3639740B1 (en) Mapping of activation wavefronts
RU2735068C1 (ru) Система и способ для визуализации на дисплее изображения частично уплощенной поверхности внутренней поверхности полости, а также постоянный машиночитаемый носитель
CN111317562A (zh) 身体部位的合成可视化

Legal Events

Date Code Title Description
A201 Request for examination