DE10333543A1 - Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung - Google Patents
Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung Download PDFInfo
- Publication number
- DE10333543A1 DE10333543A1 DE10333543A DE10333543A DE10333543A1 DE 10333543 A1 DE10333543 A1 DE 10333543A1 DE 10333543 A DE10333543 A DE 10333543A DE 10333543 A DE10333543 A DE 10333543A DE 10333543 A1 DE10333543 A1 DE 10333543A1
- Authority
- DE
- Germany
- Prior art keywords
- image
- preoperative
- intraoperative
- registration
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000002059 diagnostic imaging Methods 0.000 title claims abstract description 4
- 230000002452 interceptive effect Effects 0.000 title description 3
- 239000003550 marker Substances 0.000 claims description 19
- 238000002604 ultrasonography Methods 0.000 claims description 18
- 238000012937 correction Methods 0.000 claims description 14
- 238000002595 magnetic resonance imaging Methods 0.000 claims description 9
- 238000002591 computed tomography Methods 0.000 claims description 5
- 238000009206 nuclear medicine Methods 0.000 claims description 5
- 230000029058 respiratory gaseous exchange Effects 0.000 claims description 5
- 230000000737 periodic effect Effects 0.000 claims description 4
- 238000002600 positron emission tomography Methods 0.000 claims description 4
- 230000036772 blood pressure Effects 0.000 claims description 3
- 238000003325 tomography Methods 0.000 claims 1
- 210000000056 organ Anatomy 0.000 description 39
- 238000006073 displacement reaction Methods 0.000 description 11
- 210000004185 liver Anatomy 0.000 description 11
- 238000003384 imaging method Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 238000013519 translation Methods 0.000 description 5
- 210000004556 brain Anatomy 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- CURLTUGMZLYLDI-UHFFFAOYSA-N Carbon dioxide Chemical compound O=C=O CURLTUGMZLYLDI-UHFFFAOYSA-N 0.000 description 2
- 230000003187 abdominal effect Effects 0.000 description 2
- 210000003484 anatomy Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000002792 vascular Effects 0.000 description 2
- 206010002329 Aneurysm Diseases 0.000 description 1
- 241000226585 Antennaria plantaginifolia Species 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000002308 calcification Effects 0.000 description 1
- 229910002092 carbon dioxide Inorganic materials 0.000 description 1
- 239000001569 carbon dioxide Substances 0.000 description 1
- 210000001175 cerebrospinal fluid Anatomy 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 210000004351 coronary vessel Anatomy 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000003238 esophagus Anatomy 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 210000000936 intestine Anatomy 0.000 description 1
- 238000002357 laparoscopic surgery Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000002324 minimally invasive surgery Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000003049 pelvic bone Anatomy 0.000 description 1
- 210000004303 peritoneum Anatomy 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000000275 quality assurance Methods 0.000 description 1
- 230000000241 respiratory effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 210000003625 skull Anatomy 0.000 description 1
- 210000004872 soft tissue Anatomy 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000011477 surgical intervention Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5235—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7285—Specific aspects of physiological measurement analysis for synchronising or triggering a physiological measurement or image acquisition with a physiological event or waveform, e.g. an ECG signal
- A61B5/7289—Retrospective gating, i.e. associating measured signals or images with a physiological event after the actual measurement or image acquisition, e.g. by simultaneously recording an additional physiological signal during the measurement or image acquisition
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- High Energy & Nuclear Physics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
Die vorliegende Erfindung bezieht sich auf ein Verfahren zur gekoppelten Darstellung intraoperativer sowie präoperativer Bilder in der medizinischen Bildgebung, gekennzeichnet durch folgende Schritte: DOLLAR A - Aufnehmen eines präoperativen Bildes (S2) eines interessierenden Bereiches eines Patienten, DOLLAR A - Aufnehmen eines intraoperativen Bildes (S3) oder einer Bildfolge des interessierenden Bereiches, DOLLAR A - Durchführen einer Registrierung des präoperativen Bildes mit dem intraoperativen Bild (S5), DOLLAR A - gekoppeltes Darstellen des präoperativen und des intraoperativen Bildes (S6), DOLLAR A - Re-Registrieren des präoperativen Bildes, falls das präoperative und das intraoperative Bild nicht übereinstimmen (S8), DOLLAR A - Wiederholung der Schritte gekoppeltes Darstellen (S6) und Re-Registrieren (S8) bis eine akzeptierbare Übereinstimmung vorliegt.
Description
- Die vorliegende Erfindung betrifft ein Verfahren zur gekoppelten Darstellung eines mit beliebiger Bildgebungsmodalität präoperativ aufgenommenen 2D- oder 3D-Bildes mit einem intraoperativen 2D- oder 3D-Bild, gewonnen beispielsweise mit einer Videokamera oder einem Ultraschallgerät. Die Erfindung betrifft insbesondere eine interaktive und möglicherweise iterative Angleichung des präoperativen Bildes an das intraoperative Bild.
- In zunehmendem Maß erfolgen Untersuchungen und Behandlungen eines erkrankten Patienten minimal-invasiv, d.h. mit möglichst geringer Traumatisierung des Patienten. Beispielsweise wird die Diagnostik mit Endoskopen oder Laparoskopen durchgeführt. Endoskope werden durch natürliche Zugangswege (z.B. Speiseröhre, Darm) in den Untersuchungsbereich des Patienten eingeführt und liefern dem Arzt vor Ort aus dem Zugangskanal Bilder, die, wie z.B. im Falle des Ultraschalls, auch Objekte bzw. Organe außerhalb des Kanals beinhalten können.
- Aus chirurgischer Sicht ist es dringend gewünscht, im Rahmen einer Voruntersuchung gewonnene, so genannte präoperative 2D- oder 3D-Bilder mit den während eines Eingriffs aufgenommenen, so genannten intraoperativen Bildern eines Endoskops oder Laparoskops oder Ultraschallgeräts gekoppelt darzustellen. Gekoppelt bedeutet in diesem Zusammenhang, dass die Bilder in irgendeiner Weise zueinander in Relation gebracht, beispielsweise nebeneinander dargestellt oder überblendet werden, etc. Bei den präoperativen Bildern kann es sich um Bilder beliebiger Bildgebungsmodalitäten handeln, beispielsweise um Computertomogramme (CT-Bilder), nuklearmedizinische Aufnahmen, Positronen-Emissions-Tomogramme (PET), Magnetresonanztomogramme (MRT) oder 2D-3D-Röntgenaufnahmen (C-Bogenbilder). Derartige präoperative Aufnahmen können auch Kombinationen aus 2D-3D-Bildern sein. Darunter fällt auch die Fusion von Bildern der eben erwähnten Bildgebungsmodalitäten (2D-2D-Fusion, 2D-3D-Fusion, 3D-3D-Fusion beispielsweise in Form von kombinierten CT- und PET-Bildern). Derartige im allgemeinen hochaufgelöste präoperative Bilder sollen intraoperativen Bildern zugeordnet bzw. direkt überlagert werden.
- Ein erstes explizites Beispiel ist die Überlagerung von Ultraschall-Bildern mit MPR-Schichten (MPR Multi-Planare-Reformatierung), welche durch Computertomographie gewonnen wurden. Die MPR-Schichten sind dabei parallel zum Abtastfächer des Ultraschallgerätes orientiert.
- Ein zweites explizites Beispiel sind Endoskopie-/Laparoskopie-Aufnahmen (Videobilder), die mit 3D-Volume-Rendering-Ansichten (3D-Darstellung eines Körperbereiches) im gleichen Sichtkegel bzw. auf Bildschirmränder bezogen in der gleichen rechteckigen Sichtpyramide überlagert werden. Die direkte Überlagerung derartiger Videobilder erfordert allerdings eine Vorverarbeitung zur Kompensation der Kameraverzerrung dieser Bilder, da die Linsenabbildung der Kamera gewöhnlich zu einer "Nadelkissen-Verzeichnung" führt.
- Um eine ortsgetreue Simultandarstellung bzw. eine korrekte (lagerichtige) Überlagerung intraoperativer Bilder mit präoperativen Bildern realisieren zu können, ist es notwendig, das intraoperative Bild (welches zumindest ein interessierendes Objekt enthält) und das präoperative Bild bzw. beide Bilder bezüglich einander bzw. jeweils bezüglich des Koordinatensystems eines intraoperativ eingesetzten Navigationssystems zu registrieren. Registrieren zweier Bilddatensätze (dreidimensionaler und/oder zweidimensionaler Natur) heißt, eine Abbildungsvorschrift zu ermitteln, welche die Koordinaten des einen Systems in die Koordinaten des anderen Systems überführt. Im allgemeinen ist eine solche Abbildungsvor schrift bzw. Registrierung durch eine Registrier- oder Transformations-Matrix gegeben.
- Zur Registrierung zweier Bilder sind unterschiedliche Möglichkeiten denkbar:
- 1. Es besteht die Möglichkeit im präoperativen Bild ein oder mehrere Bildelemente zu identifizieren und das bzw. die gleichen Elemente im intraoperativen Bild oder Objekt zu identifizieren und dann eines der beiden – vorzugsweise das präoperative Bild – durch Translation und/oder Rotation und/oder Projektion bzw. Skalierung bezüglich des anderen Objektes/Bildes – vorzugsweise des intraoperativen Objektes/Bildes – auszurichten. Derartig identifizierte Bildelemente werden als "Marker" bezeichnet und können anatomischen Ursprungs oder aber künstlich angebracht worden sein. Marker anatomischen Ursprungs – wie beispielsweise Gefäßverzweigungspunkte, kleine Abschnitte koronarer Arterien aber auch Mundwinkel oder Nasenspitze – werden als "anatomische Marker" bezeichnet. Künstlich ein- bzw. angebrachte Markierungspunkte werden als "künstliche Marker" bezeichnet. Künstliche Marker sind beispielsweise Objekte, die auf der Körperoberfläche befestigt (beispielsweise aufgeklebt) werden, und zwar vorzugsweise an nicht verschieblichen Punkten wie z.B. am Beckenknochen. Anatomische und künstliche Marker können vom Benutzer interaktiv im präoperativen Bild festgelegt werden (z.B. durch Anklicken am Bildschirm) und sind im intraoperativen Objekt/Bild erneut zu identifizieren. Statt der interaktiven Zuordnung ist auch eine automatische Ermittlung in beiden Bildern durch geeignete Algorithmen möglich. Eine derartige Registrierung wird als "markerbasierte Registrierung" bezeichnet.
- 2. Eine weitere Möglichkeit ist die so genannte "Bildbasierte Registrierung". Hierbei wird das präoperative Bild bzw. ein Teil davon mit dem intraoperativen Bild bzw. einem Teil davon hinsichtlich seiner Übereinstimmungen verglichen , wobei zur Optimierung der Übereinstimmung z.B. das präoperative (Teil-)Bild solange durch Translation und/oder Rotation und/oder Streckung bezüglich des intraoperativen Bildes verändert wird, bis die Übereinstimmungen beider Bilder ein vorgegebenes Mindestmaß erreichen. Als Maß wird hier z.B. die 2D- oder 3D-Korrelation verwendet oder z.B. der hinsichtlich der Rechenzeit schnellere Venot-Algorithmus. Zweckmäßigerweise wird hierbei die interoperativ verwendete Kamera benutzergeführt zunächst in eine Position gebracht, in der das intraoperative Bild dem präoperativen Bild ähnlich ist und dann erst der Optimierungszyklus initiiert, um die Rechenzeit für die Registrierung zu verkürzen. Dies bedeutet keinen besonderen Zusatzaufwand sondern passt in den Arbeitsablauf, weil damit das Instrument mit Kamera bereits "vor Ort" ist.
- Eine ortsgetreue gekoppelte Darstellung präoperativer sowie intraoperativer Bilder in Form von Simultan-Darstellungen und/oder Überlagerungen ist vor allem eine Angelegenheit der exakten Registrierung. Für die Koppelung von Aufnahmen ausschließlich starrer Objekte ist die Registrieraufgabe gelöst. Das aus medizinisch-technischer Sicht bisher noch nicht gelöste Problem bei einer Registrier-Prozedur stellen bewegliche, verschiebbare Objekte dar, wie sie beispielsweise durch deformierbare Organ-Strukturen gegeben sind.
- Ein Beispiel hierfür ist die sogenannte "Hirn-Verschiebung" (engl.: brain-shift): Während sich der Schädel eines Patienten nahezu perfekt registrieren und auch fixieren lässt, verschieben sich während einer Punktion (durch Verlust von Hirnflüssigkeit/Liquor) das Gehirn oder Teile davon. Es kommt auch vor, dass während einer Untersuchung bzw. Operation ein Umlagern des Patienten nötig ist und sich dabei Gehirnteile verschieben, zusätzlich komprimiert werden oder expandieren.
- Noch deutlicher sind beispielsweise Organverschiebungen im Bauchbereich, wo sich während einer Operation mechanische Effekte ergeben. Insbesondere bei minimalinvasiven Eingriffen ergeben sich auch Verschiebungen und Volumenänderungen gasgefüllter Strukturen durch Aufblasen des Vorderbauches (Peritoneum) mit Kohlendioxid angesichts der hier vorhandenen Organe welche verhältnismäßig wenig Stützgewebe aufweisen. Hier ist es gemäß dem Stand der Technik nicht möglich, im Körperinneren bei beschränkter Sicht zuverlässig künstliche oder anatomische Marker bzw. Oberflächenstrukturen (automatisch) gemäß einer marker- oder bildbasierten Registrierung zu identifizieren.
- Derartige Organ-Verschiebungen bzw. Organ-Deformierungen zwischen präoperativen und intraoperativen Aufnahmen bewirken eine deutliche Ungleichheit bzw. Verschiedenartigkeit beider Bilder, durch die eine übersichtliche vergleichende Bilddarstellung, insbesondere eine Fusion beider Bilder, nicht mehr möglich ist.
- Aufgabe der vorliegenden Erfindung ist es daher, ein Verfahren bereitzustellen, durch das auf Organ-Verschiebungen bzw. Organ-Deformierungen zwischen präoperativ und intraoperativ gewonnenen Aufnahmen reagiert werden und eine Übereinstimmung derart hergestellt werden kann, dass eine aus diagnostischer Sicht sinnvolle gekoppelte Darstellung beider Bilder möglich ist.
- Diese Aufgabe wird gemäß der Erfindung durch die Merkmale der unabhängigen Ansprüche gelöst. Die abhängigen Ansprüche bilden den zentralen Gedanken der Erfindung in besonders vorteilhafter Weise weiter.
- Es wird also ein Verfahren zur gekoppelten Darstellung intraoperativer sowie präoperativer Bilder in der medizinischen Bildgebung beansprucht,
gekennzeichnet durch folgende Schritte: - – Aufnehmen eines präoperativen Bildes eines interessierenden Bereiches eines Patienten,
- – Aufnehmen eines intraoperativen Bildes oder einer Bildfolge des interessierenden Bereiches,
- – Durchführen einer Registrierung des präoperativen Bildes mit dem intraoperativen Bild,
- – gekoppeltes Darstellen des präoperativen und des intraoperativen Bildes,
- – Re-Registrieren des präoperativen Bildes falls das präoperative und das intraoperative Bild nicht übereinstimmen, vorteilhafterweise in einer Dimension,
- – Wiederholung der Schritte gekoppeltes Darstellen und Re-Registrieren bis eine akzeptierbare Übereinstimmung vorliegt, möglicherweise in weiteren Dimensionen.
- Die Registrierung kann erfindungsgemäß bildbasiert oder markerbasiert erfolgen.
- Im Falle einer bildbasierten Registrierung werden die Marker des zu untersuchenden Bereiches des Patienten vorteilhafterweise vor dem Aufnehmen des präoperativen Bildes angebracht.
- Vorteilhaft erfolgt das Überprüfen der Übereinstimmung des präoperativen und des intraoperativen Bildes rechnerisch und automatisch mittels einem Algorithmus auf einem Rechner.
- Ebenfalls vorteilhaft beinhaltet der Schritt der Re-Registrierung eine 3D-Drehkorrektur und/oder eine Verschiebe-Korrektur und/oder eine Reskalier-Korrektur.
- In einer möglichen Ausführungsform der Erfindung bezieht sich die Re-Registrierung mit Reskalier-Korrektur nur auf einen Bereich innerhalb des Bildes, wobei gleichzeitig die Bereiche außerhalb dieses Bereiches original skaliert und evtl. original positioniert bleiben.
- In einer weiteren Ausführungsform der Erfindung bezieht sich die Re-Registrierung des präoperativen Bildes und die gekoppelte Darstellung auf mehrere intraoperative Bilder, welche während eines periodischen physiologischen Bewegungs-Zyklusses zu definierten Zeitpunkten und/oder Ortspunkten aufgenommen worden sind.
- Erfindungsgemäß wird aus den re-registrierten präoperativen Bildern eine Videosequenz dadurch erhalten, dass auf Basis des physiologischen Signals zwischen den re-registrierten Bildern interpoliert wird.
- Der zugrundeliegende Zyklus wird dabei vorteilhaft durch ein EKG, eine Blutdruckkurve oder eine Atemkurve als zugehöriges physiologisches Signal definiert.
- Das gekoppelte Darstellen erfolgt entweder durch benachbartes nebengeordnetes Darstellen beider Bilder oder aber durch Überlagerung bzw. Überblendung beider Bilder.
- Vorteilhafterweise stellen präoperatives Bild sowie intraoperatives Bild ein 3D-Bild dar.
- Dabei wird das präoperative Bild vorteilhaft mit Magnetresonanztomographie-, Computertomographie-, Ultraschall-, Positronenemissionstomographie- oder nuklearmedizinischen Verfahren aufgenommen.
- Das intraoperative Bild wird üblicherweise mit Endoskop, Laparoskop, Ultraschallgerät, C-Bogen-Gerät, Magnetresonanztomographie-, Computertomographie-, Positronenemissionstomographie- oder nuklearmedizinischen Verfahren aufgenommen.
- Ferner wird eine Vorrichtung beansprucht welche zur Durchführung eines Verfahrens gemäß den eben genannten Verfahrensschritten geeignet ist.
- Weitere Vorteile, Merkmale und Eigenschaften der vorliegenden Erfindung werden nun anhand von Ausführungsbeispielen bezugnehmend auf die begleitenden Zeichnungen näher erläutert.
-
1 zeigt schematisch eine Prinzipskizze bezüglich der Aufnahme eines präoperativen sowie intraoperativen Bildes mit einer nachfolgenden gekoppelten Darstellung beider Bilder, in der das präoperative Bild re-registriert ist, -
2 zeigt eine Übersicht eines konventionellen Verfahrens zur gekoppelten Darstellung präoperativer und intraoperativer Bilder im Flussdiagramm mit einem letzten erfinderischen iterativen Schritt der Re-Registrierung, -
3 zeigt schematisch den erfindungsgemäßen Schritt der in dem iterativen Schritt S8 des konventionellen Ablaufs von2 implementiert ist. -
1 zeigt schematisch eine Prinzipskizze bezüglich der Aufnahme präoperativer sowie intraoperativer Bilder mit einer nachfolgenden gekoppelten Darstellung9 beider Bilder im unteren Bereich der Skizze. Auf der linken Seite von1 ist ein Patient1 angedeutet, der sich auf einer Patientenliege3 befindet. Der interessierende und aufzunehmende Bereich ist der Brust- und Bauchraum, insbesondere ein bewegliches schematisch dargestelltes Organ2 (beispielsweise die Leber). Für die präoperative Bildgewinnung wurden drei künstliche Marker4 gesetzt, die mit dem interessierenden anatomischen Bereich – speziell mit dem Organ2 – mittels einer beliebigen Bildgebungsmodalität5 (z.B. CT, MRT, PET, C-Bogen usw.) auf einem Monitor7 in einem 3D-Bild oder in einer ausgewählten Schicht eines 3D-Bildes dargestellt werden können. In der Darstellung auf dem Monitor7 befindet sich das Organ am rechten Bildrand unmittelbar unter dem rechts oben gelege nen Marker. Die Darstellung auf dem Monitor7 zeigt das präoperative Bild. - Auf der rechten Seite der
1 ist schematisch gezeigt wie derselbe anatomische Bereich mit einem Aufnahmegerät, beispielsweise einem Ultraschallgerät oder einem Laparoskop6 intraoperativ – also zu einem späteren Zeitpunkt während eines Eingriffs – dargestellt wird. Das Aufnahmegerät wurde dafür zu Beginn der Operation bezüglich der am Körper vorhandenen Marken registriert und wird in seiner Position und Orientierung kontinuierlich verfolgt. Damit wird kontinuierlich das Bild auf dem Monitor7 in derselben Position und Orientierung angezeigt, so dass zumindest die Marken auf dem intraoperativen Display8 in derselben Position erscheinen wie auf dem Display7 mit dem präoperativen Bild. Auch eine Überlagerung der beiden Darstellungen auf einem Monitor ist möglich. - Das Organ
2 kann sich jedoch, z.B. wie auf dem Display8 nach links in Richtung Kopf des Patienten verschoben haben, z.B. aufgrund der Verschieblichkeit von Weichgewebe, und erscheint daher in der Darstellung auf Display8 verschoben gegenüber der Darstellung auf Display7 . - Die markerbasierte "Basis-Registrierung" ist trotzdem nützlich, da sie zumindest eine grobe grundsätzliche Ausrichtung und Positionierung beider Bilder (im Zentimeter-Bereich) vorab ermöglicht.
- Im allgemeinsten Fall kann ein betrachtetes Organ verschoben, gedreht und komprimiert oder expandiert sein. Um eine in bereits beschriebener Weise gekoppelte Darstellung zu realisieren, besteht der wesentliche Schritt des erfindungsgemäßen Verfahrens darin, die erwähnte Basis-Registrierung interaktiv durch eine sogenannte "Nach-" oder "Re-Registrierung" zu ergänzen, indem das betrachtete Organ im präoperativen Bild durch Drehung und/oder Verschiebung und/oder Skalierung so verändert wird, dass das präoperativ gewonnene Organ-Bild mit dem (intraoperativ-gewonnenen) realen Bild übereinstimmt und gegebenenfalls mit diesem fusioniert werden kann. Die Überprüfung der Übereinstimmung des präoperativen und des intraoperativen Bildes erfolgt entweder visuell durch den Benutzer (im allgemeinen der Arzt) oder vorteilhaft rechnerisch und automatisch mittels einem Algorithmus auf einem Rechner.
- Im unteren Teil der
1 ist eine gekoppelte Darstellung9 der beiden Bilder (präoperatives Bild 10 links, intraoperatives Bild 11 rechts) gegeben. Das präoperative Bild 10 wurde re-registriert, d.h. das Bild wurde so verändert, dass die Position und Ausrichtung des interessierenden Organs2 mit der Darstellung des Organs im intraoperativen Bild 11 auf der rechten Seite identisch ist. Im Falle der1 bestand die Re-Registrierung aus einer einfachen Verschiebung die durch den Pfeil sowie durch die gestrichelte Darstellung des Organs symbolisiert ist. Im allgemeinsten Fall der Re-Registrierung muss das Organ verschoben, gedreht und skaliert werden. Gewöhnlich wird bei einer solchen Re-Registrierung auch die Abbildung der Organ-Umgebung entsprechend verändert wie beispielsweise die Verschiebung des unmittelbar benachbarten Markers zeigt. - Bei einer Re-Registrierung, die z.B. durch die Identifikation zweier neuer Positionen (z.B. oberer und unterer Rand der Leber) eine Skalierung einschließt, kann die Re-Skalierung auf einfache Weise nur auf den Bereich zwischen den Positionen (also z.B. eben die Leber) beschränkt werden.
- Die genaue Schrittfolge des erfindungsgemäßen Verfahrens insbesondere des Schrittes der Re-Registrierung wird anhand der Verfahrens-Flussdiagramme in den
2 und3 veranschaulicht. - Gemäß
2 werden in einem ersten präoperativen Schritt S1 des erfindungsgemäßen Verfahrens in dem interessierenden Bereich des zu untersuchenden bzw. zu behandelnden Patienten z.B. künstliche Marker angebracht bzw. anatomische Marker identifiziert. Das interessierende bewegliche Organ (es können auch mehrere sein) befindet sich in dem markierten, in der Regel quaderförmigen Volumen von z.B. ca. 50 × 50 × 50cm. In einem zweiten Schritt S2 wird präoperativ – also im Rahmen einer Voruntersuchung – mit beliebiger Bildgebungs-Modalität ein Bild aufgenommen, vorzugsweise ein 3D-Bild des markierten Bereiches. Nach Aufnehmen dieses präoperativen Bildes kommt es (in einem als Schritt S3 bezeichnetem Vorgang) gelegentlich zu einer Verschiebung, Drehung und/oder zu einer Deformierung des besagten Organes. Beispiele dafür wurden bereits genannt (Hirn, Leber etc.). In einer Zweituntersuchung S4, zumeist der Hauptuntersuchung bzw. Operation, die unter Umständen mehrere Tage nach der Voruntersuchung S2 erfolgt, wird intraoperativ – also im Rahmen eines Eingriffs – ein Bild desselben markierten Körperbereiches aufgenommen. Intraoperative Bildgebungsmodalitäten sind üblicherweise Endoskop, Laparoskop sowie Ultraschallgerät, möglicherweise auch ein Röntgen-C-Bogen, ein CT- oder MR-Scanner etc. Um das präoperative Bild aus Schritt S2 gemäß dem intraoperativen Bild aus Schritt S4 auszurichten, erfolgt in einem fünften Schritt S5 eine z.B. markerbasierte Registrierung beider Bilder. In einem weiteren Schritt S6 werden präoperatives und intraoperatives Bild mit Hilfe eines Navigationssystems gekoppelt dargestellt, beispielweise im selben Monitorfenster überblendet, nebeneinander, übereinander usw. In dem nächsten Schritt S7 wird auf Basis der gekoppelten Darstellung überprüft, ob und inwieweit eine Übereinstimmung des präoperativen Bildes mit dem intraoperativen Bild vorliegt. Die Überprüfung erfolgt durch den Anwender, im Allgemeinen durch den Arzt. Bei völliger bzw. in einem möglichem Toleranzbereich zu akzeptierender Übereinstimmung beider Bilder kann entweder ein neues intraoperatives Bild aufgenommen (automatische Fortsetzung z.B. einer Videosequenz in der "gekoppelten" Darstellung) und das Verfahren in der Schleife fortgesetzt oder aber das Verfahren modifiziert werden: Bei Divergenz beider Bilder aufgrund einer Positions- und/oder Lageveränderung des zu untersuchenden Organs kann der Anwender in einem weiteren Schritt S8 eine sogenannte Re-Registrierung vornehmen. Dazu wird das präoperative Bild durch den Anwender interaktiv (beispielsweise über ein Interface per Maus) und iterativ solange verändert bis in Schritt S7 eine tolerierbare Übereinstimmung mit dem intraoperativen Bild erreicht ist. - Schritt S8 der Re-Registrierung ist in
3 ausführlicher dargestellt: Zunächst wird z.B. in einem Schritt S8.1 überprüft, ob sich das betrachtete Organ in dem Zeitraum zwischen präoperativer und intraoperativer Bildaufnahme gedreht hat. Liegt eine Rotation vor, so wird in einem Schritt S8.2 in dem präoperativen Bild eine 3D-Dreh- oder Rotations-Korrektur vorgenommen. Prinzipiell kann eine derartige Rotations-Korrektur S8.2 in die drei rotatorischen Freiheitsgrade aufgeteilt werden. Einfacher ist es die komplette Rotations-Korrektur mit nur einer Handhabung zu realisieren. Dies erfolgt beispielsweise mit einem speziellen Eingabegerät wie einer Rollkugel oder mit einer konventionellen Computermaus. Im Falle einer Computermaus erfolgt die Drehung jeweils aktuell um die momentane senkrechte Bildschirmachse, gekoppelt an eine Maus-Bewegung in x-Richtung (horizontal), sowie um die Bildschirm-Querachse, gekoppelt an eine Maus-Bewegung in y-Richtung (vertikal). Ist der Schritt der 3D-Dreh-Korrektur 58.2 beendet, indem das präoperative Bild bzw. das Organ im präoperativen Bild so gedreht wurde, dass in der gekoppelten Darstellung in beiden Bildern die gleiche Raum-Orientierung des Organs erreicht worden ist, so wird in einem weiteren Schritt S8.3 überprüft, ob das Organ des präoperativen Bildes im Vergleich zum intraoperativen Bild verschoben ist. Liegt eine Verschiebung vor, so wird diese in einem nächsten Schritt S8.4 korrigiert. Liegt zudem auch noch eine Größenveränderung zwischen den Organdarstellungen in beiden Bildern vor – was in einem weiteren Schritt S8.5 geprüft wird – so erfolgt im Schritt S8.6 eine Anpassung der Größenverhältnisse die eine Reskalierung miteinschließt. Die Schritte der Verschiebung und Reskalierung können in den drei Raumrichtungen x, y und z erfolgen. In schwierigen Fällen werden die Schritte S8.1 sowie S8.6 solange wiederholt, bis keine Korrektur mehr notwendig ist und in einem Schritt S8.7 die Re-Registrierung als erfolgreich beendet angesehen werden kann. In diesem Fall ist das präoperative Bild durch den Verfahrensschritt S8 soweit modifiziert worden, dass in einer gekoppelten Darstellung beider Bilder eine Kongruenz des entsprechenden Organs vorliegt und somit insbesondere eine Überlagerung beider Bilder zu einem diagnostisch sinnvollen Ergebnis führt. - Die gekoppelte Darstellung kann des Weiteren dynamisch gestaltet werden, indem die Re-Registrierung für mehrere zeitliche und örtliche Punkte einer periodischen Verschiebung erfolgt und dazwischen analytisch (z.B. linear) interpoliert wird. Die Festlegung der als "Stützpunkte" dienenden intraoperativen Bilder erfolgt gekoppelt an ein weiteres, die Bewegung charakterisierendes Signal wie z.B. ein EKG, eine Blutdruckkurve oder eine Atemkurve. Dieses Signal steuert die Wiedergabe der "dynamisch re-registrierten" und durch Interpolation ergänzten präoperativen Bilder als Videosequenz.
- Folgende Ausführungsbeispiele sollen das erfindungsgemäße Verfahren erläutern:
Bei Verwendung eines Endoskops oder Laparoskops erfolgt die Aufnahme des intraoperativen Bildes durch eine Videokamera mit einer Objektiv-Frontlinse an der Instrumentenspitze. Die Objektiv-Brennweite kann möglicherweise über ein Bedienelement kontinuierlich verändert werden. Im Falle einer gekoppelten MPR-Darstellung schließt sich der markerbasierten Registrierung sowie den Schritten der Re-Registrierung eine Einstellung der intraoperativ dargestellten MPR-Schichttiefe (ab Spitze des Instrumentes) im präoperativen Bild – einschließlich der zur Objektiv-Brennweite passenden Vergrößerung – an. Dazu ist auch für das präoperative Bild eine auto matische oder manuelle Einstellmöglichkeit, z.B. ein Schieberegler, vorgesehen. Der Schieberegler wird demnach soweit verschoben, bis beispielsweise visuell eine optimale Korrelation/Kongruenz zwischen präoperativem und intraoperativem Bild hergestellt ist. Die Überlagerung erfolgt beispielsweise bei dem (intraoperativen) Video-Bild in Farbe und bei dem präoperativen MPR-Bild (CT, MRT, PET, C-Bogen) in Schwarz-Weiß. Durch einen Zumischgrad von beispielsweise je 50% sind beide Bildanteile sehr gut zu differenzieren. Alternativ ist auch eine bild-basierte Registrierung (Ermittlung der optimalen Korrelation) zwischen intraoperativem Bild (Videobild) und präoperativem Bild (optimale MPR-Schicht) möglich. - Zur Unterstützung minimalinvasiver Eingriffe in der Chirurgie sowie in der Gastro-Enterologie wird des öfteren auch ein Ultraschallgerät verwendet, transkutan und/oder laparoskopisch bzw. endoskopisch. Der Patient wird zunächst auf Basis zumindest dreier Marker registriert als ob sich keine Verschiebung seit der Voruntersuchung – beispielsweise der Leber aufgrund der Atmung – ergeben hätte. Durch die Registrierung wird die Transformationsmatrix gewonnen, wobei im Folgenden die Navigation (bei Vorhandensein eines Navigationssystems) an den eingesetzten bildgebenden Ultraschallkopf gekoppelt wird. Falls die Position des Navigationssensors nicht mit dem Ultraschallkopf bzw. der Instrumentenspitze identisch ist, ist die sogenannte Tip-Transformation – engl.: tip = Spitze – zu berücksichtigen. Durch die Navigationskontrolle des Ultraschallkopfes erhält man zu jedem intraoperativen Ultraschallbild einen entsprechenden Schnitt durch das vorab aufgenommene präoperative (3D-)Bild, das üblicherweise mit entsprechend hochauflösender Bildgebungsmodalität akquiriert worden ist (beispielsweise CT, MRT usw.). Dieser entsprechende Schnitt ist beispielsweise ein beliebig schräger Schnitt in Form einer sogenannten freien Multi-Planaren-Reformatierung (MPR), oder eine perspektivische 3D-Darstellung gemäß einer Maximum Intensity Projection (MIP), eines Surface Shaded Displays (SSD) oder eines Volume Renderings(VR).
- Bei vielen Fragestellungen im Rahmen medizinischer Untersuchungen bzw. chirurgischer Eingriffe ist nur die Verschiebung bzw. die Größenveränderung des betreffenden Organs in einer Richtung bedeutsam (beispielsweise die Atemverschiebung der Leber aufgrund der Zwerchfellbewegung entlang der Körperlängs- bzw. z-Achse). Daher wird z.B. bei einer im Folgenden betrachteten Leberuntersuchung der Ultraschallsensor parallel zu den axialen präoperativ gewonnenen Schichten (CT-Schichten, MRT-Schichten, etc.) orientiert und – wenn eine reine Verschiebung vorliegt – die gut darzustellende Oberkante der Leber angefahren. Genauso gut könnte auch ein anatomischer Marker in Form eines Knotens, eines Aneurysmas, einer Verkalkung, einer Gefäßverzweigung, etc. angefahren werden. Wenn sich das Organ – in diesem Falle die Leber – gegenüber der Voruntersuchung verschoben hat erscheint diese auf dem Monitor in der präoperativen (CT-, MRT-, etc.) Aufnahme an einem anderen Ort. Das präoperative Bild bzw. der Organ-Ausschnitt in dem präoperativen Bild wird nun auf dem Monitor virtuell so verschoben, dass das präoperative Bild zumindest in dem Organ-Bereich mit dem intraoperativen Bild optimal zusammenpasst. Auf Knopfdruck bzw. Mausklick oder per Interaktion auf einer Touch-Screen erfolgt eine Erfassung der z-Differenz zwischen aktueller Patientenlage im intraoperativen Bild und der Patientenlage im präoperativen Bild die in die Registriermatrix eingebracht wird. Die Modifizierung der Registriermatrix bewirkt eine Re-Registrierung in z-Richtung. Dies ist ausreichend wenn sich das Organ hinsichtlich seiner Größe nicht verändert hat. Zur Kontrolle der Größenkonstanz oder wenn eine veränderte Längenausdehnung bekannt ist, kann optional auch der untere Leberrand mit Ultraschall als axiale Schicht abgebildet werden. Wiederum wird die im präoperativen Bild eventuelle Organverschiebung durch eine virtuelle Verschiebung am Monitor rückgängig gemacht, bis auch hier die z-Positionen des unteren Randes in präoperativem und intraoperativem Bild übereinstimmen. Dies wird mit Knopfdruck, Maus etc. quittiert und rechnerisch zusammen mit der Registrierung der Leber-Oberkante als Skalierung und Translation in die Registriermatrix eingebracht. Auf diese Weise wird in linearer Näherung sowohl die Organverschiebung als auch die Größenveränderung berücksichtigt, was durch Modelltests bestätigt werden konnte.
- Im Falle einer periodischen Veränderung wird die Re-Registrierung zu bestimmten zeitlichen und/örtlichen Punkten durchgeführt (z.B. in Umkehrpunkten oder zu bestimmten Punkten eines Signals wie des EKGs) und die Nachführung des präoperativen Bildes in einer analytischen Näherung (z.B. linear interpolierend) dynamisch durchgeführt, z.B. von der Atemkurve gesteuert.
- Zusammengefasst erweitert die vorliegende Erfindung die konventionelle Gesamtregistrierung vorteilhaft durch eine als Re-Registrierung bezeichnete Nachregistrierung, da die gewöhnliche Registrierung eine eventuelle Rotation, Verschiebung und Kompression bzw. Expansion von Organen nicht berücksichtigt. Die vorgeschlagene Re-Registrierung bewirkt eine um vieles exaktere Korrelation präoperativer und intraoperativer Bilder. Die bekannte Basis-Registrierung ist trotzdem wichtig, da durch sie eine grundsätzliche relativ genaue Positionierung und Ausrichtung beider Bilder bewirkt werden kann.
- Für die Re-Registrierung werden 4 Modi unterschieden:
- 1. Verschiebung/Skalierung in x-Richtung
- 2. Verschiebung/Skalierung in y-Richtung
- 3. Verschiebung/Skalierung in z-Richtung
- 4. Rotation in drei Freiheitsgraden.
- In einer Bedienabfolge sollte jeweils nur in einem Modus korrigiert werden. Das Verfahren funktioniert iterativ und kann wiederholt angewendet werden. Dadurch wird entweder die Qualität der Feinregistrierung gesichert oder eine erneute auf dem vorigen Stand aufbauende Registrierung durchgeführt. Je nach betrachtetem Objektzusammenhang muss entschieden werden, in welcher Vorzugsrichtung (x, y oder z) Verschiebungen vorliegen und ob gleichzeitig auch eine Rotation zu berücksichtigen ist. In den meisten Fällen können alle vier Einflüsse nacheinander zumindest soweit virtuell nachvollzogen werden, dass eine aus vier Schritten bestehende Re-Registrierung eine wesentlich verbesserte Übereinstimmung präoperativer und intraoperativer Bilder ergibt. In der Regel ist bereits die Korrektur in x- und y-Richtung – z.B. zur Berücksichtigung der Querausdehnung in Folge einer z-Kompression – ausreichend.
- Gegenüber einer möglichen marker-basierten deformierbaren Registrierung mit künstlichen Markern hat das Verfahren die Vorteile, dass es nichtinvasiv ist und dass auch an Stellen justiert werden kann, wo mangels Zugang bzw. aufgrund der Organbeschaffenheit keine Marker angebracht werden können.
- Bei einer marker-basierten deformierbaren Registrierung mit anatomischen Markern bzw. einer bild-basierten deformierbaren Registrierung besteht oft das Problem, dass das betrachtete Organ keine solchen Marken bzw. Strukturen aufweist oder zumindest in einer der beiden Darstellungen nicht sichtbar sind. Die vorliegende Erfindung löst diese Problem dadurch, dass einfach z.B. nach Objektgrenzen re-registriert werden kann. Die zwischenliegende (lineare) Neuskalierung bietet in der Praxis genügend Genauigkeit.
- Mit nur einem (Maus-)Klick lässt sich eine deutlich verbesserte Repositionierung des präoperativen Bildes erreichen. Darauf aufsetzend kann optional auch eine kombinierte Repositionierung und Größenanpassung präoperativer und intraoperativer Bilder erfolgen. Gegenüber derzeit gebräuchlichen Verfahren wird auf alle Fälle die Genauigkeit erhöht und zusätzlich eine Qualitätssicherung insofern gewährleistet, als dass das Verfahren regelmäßige Überprüfungen der Organ-Lokalisierung enthält.
Claims (18)
- Verfahren zur gekoppelten Darstellung intraoperativer sowie präoperativer Bilder in der medizinischen Bildgebung gekennzeichnet durch folgende Schritte: – Aufnehmen eines präoperativen Bildes (S2) eines interessierenden Bereiches eines Patienten, – Aufnehmen eines intraoperativen Bildes (S3) oder einer Bildfolge des interessierenden Bereiches, – Durchführen einer Registrierung des präoperativen Bildes mit dem intraoperativen Bild (S5), – gekoppeltes Darstellen des präoperativen und des intraoperativen Bildes (S6), – Re-Registrieren des präoperativen Bildes, falls das präoperative und das intraoperative Bild nicht übereinstimmen (S8), – Wiederholung der Schritte gekoppeltes Darstellen (S6) und Re-Registrieren (S8) bis eine akzeptierbare Übereinstimmung vorliegt.
- Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Registrierung bildbasiert erfolgt.
- Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Registrierung markerbasiert erfolgt, wobei in dem interessierenden Bereich vor dem Aufnehmen des präoperativen Bildes (S2) Marker angebracht werden.
- Verfahren nach Anspruch 1 bis 3, dadurch gekennzeichnet, dass das Überprüfen der Übereinstimmung des präoperativen und des intraoperativen Bildes (S7) rechnerisch und automatisch mittels eines Algorithmus auf einem Rechner erfolgt.
- Verfahren nach Anspruch 1 bis 4, dadurch gekennzeichnet, dass der Schritt der Re-Registrierung eine 3D-Drehkorrektur (S8.2) beinhaltet.
- Verfahren nach Anspruch 1 bis 5, dadurch gekennzeichnet, dass der Schritt der Re-Registrierung eine Verschiebe-Korrektur (S8.4) beinhaltet.
- Verfahren nach Anspruch 1 bis 6, dadurch gekennzeichnet, dass der Schritt der Re-Registrierung eine Reskalier-Korrektur (S8.6) beinhaltet.
- Verfahren nach Anspruch 1 bis 7, dadurch gekennzeichnet, dass sich die Re-Registrierung mit Reskalier-Korrektur (S8.6) nur auf einen Bereich innerhalb des Bildes bezieht und die Bereiche außerhalb original skaliert und evtl. original positioniert bleiben.
- Verfahren nach Anspruch 1 bis 8, dadurch gekennzeichnet, dass die Re-Registrierung des präoperativen Bildes und die gekoppelte Darstellung sich auf mehrere intraoperative Bilder beziehen, welche während eines periodischen physiologischen Bewegungs-Zyklusses zu definierten Zeitpunkten und/oder Ortspunkten aufgenommen worden sind.
- Verfahren nach Anspruch 1 bis 9, dadurch gekennzeichnet, dass aus den re-registrierten präoperativen Bildern eine Videosequenz dadurch erhalten wird, dass auf Basis des physiologischen Signals zwischen den re-registrierten Bildern interpoliert wird.
- Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass der Zyklus durch ein EKG, eine Blutdruckkurve oder eine Atemkurve als zugehöriges physiologisches Signal definiert ist.
- Verfahren nach Anspruch 10 bis 11, dadurch gekennzeichnet, dass das gekoppelte Darstellen durch benachbartes nebengeordnetes Darstellen beider Bilder erfolgt.
- Verfahren nach Anspruch 1 bis 12, dadurch gekennzeichnet, dass das gekoppelte Darstellen durch Überlagerung bzw. Überblendung beider Bilder erfolgt.
- Verfahren nach Anspruch 1 bis 13, dadurch gekennzeichnet, dass das präoperative Bild ein 3D-Bild ist.
- Verfahren nach Anspruch 1 bis 14, dadurch gekennzeichnet, dass das intraoperative Bild ein 3D-Bild ist.
- Verfahren nach Anspruch 1 bis 15, dadurch gekennzeichnet, dass das präoperative Bild mit Magnetresonanztomographie-, Computertomographie-, Ultraschall-, Positronenemissionstomographie- oder nuklearmedizinischen Verfahren aufgenommen wird.
- Verfahren nach Anspruch 1 bis 16, dadurch gekennzeichnet, dass das intraoperative Bild mit Endoskop, Laparoskop, Ultraschallgerät, C-Bogen-Gerät, Magnetresonanztomographie-, Computertomographie-, Positronenemissionstomographie- oder nuklearmedizinischen Verfahren aufgenommen wird.
- Vorrichtung zur Durchführung eines Verfahrens gemäß einem der Ansprüche 1 bis 17.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE10333543A DE10333543A1 (de) | 2003-07-23 | 2003-07-23 | Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung |
US10/897,673 US20050027187A1 (en) | 2003-07-23 | 2004-07-23 | Process for the coupled display of intra-operative and interactively and iteratively re-registered pre-operative images in medical imaging |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE10333543A DE10333543A1 (de) | 2003-07-23 | 2003-07-23 | Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung |
Publications (1)
Publication Number | Publication Date |
---|---|
DE10333543A1 true DE10333543A1 (de) | 2005-02-24 |
Family
ID=34088762
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE10333543A Withdrawn DE10333543A1 (de) | 2003-07-23 | 2003-07-23 | Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung |
Country Status (2)
Country | Link |
---|---|
US (1) | US20050027187A1 (de) |
DE (1) | DE10333543A1 (de) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005000714A1 (de) * | 2005-01-03 | 2006-07-20 | Siemens Ag | Verfahren zur Bildgebung eines periodisch bewegten Objektbereichs eines Objekts |
DE102005022541A1 (de) * | 2005-05-17 | 2006-12-07 | Siemens Ag | Verfahren und Gerät zur Darstellung von Strukturen auf einem 2D-Durchleuchtungsbild |
DE102005031123A1 (de) * | 2005-07-04 | 2007-01-11 | Siemens Ag | Verfahren und Einrichtung zur Röntgenbildgebung |
DE102005031118A1 (de) * | 2005-07-04 | 2007-01-11 | Siemens Ag | Verfahren und Einrichtung zur Ausrichtung eines Fokuspunktes einer Ultraschallstoßwelle auf ein Ziel in einem Patienten |
DE102006029718A1 (de) * | 2006-06-28 | 2008-01-10 | Siemens Ag | Verfahren zur Auswertung zweier Abbilder sowie medizinisches Abbildungssystem |
DE102007013535A1 (de) | 2007-03-18 | 2008-09-25 | Friebe, Michael, Dipl.-Ing. Dr. | Patientengrid mit dedizierten Markern zur Bestimmung der Ortskoordinaten von diagnostischen Bilddaten, insbesondere MRT Daten und Verfahren zur Bestimmung von Ortskoordinaten für die Steuerung externer Systeme |
EP2044884A1 (de) | 2007-10-02 | 2009-04-08 | BrainLAB AG | Bestimmung und Erkennung von Lageänderungen von Körperstrukturteilen |
US7592600B2 (en) | 2005-11-10 | 2009-09-22 | Siemens Aktiengesellschaft | Diagnosis device for radiographic and nuclear medical examinations |
DE102011087357A1 (de) | 2011-11-29 | 2013-05-29 | Karl Storz Gmbh & Co. Kg | Aktualisierung von präoperativ aufgenommenen 3D-Bilddaten eines Körpers |
DE102014212089A1 (de) * | 2014-06-24 | 2015-07-23 | Siemens Aktiengesellschaft | Verfahren zur Bildüberwachung eines minimalinvasiven Eingriffs, Bildverarbeitungseinrichtung und Ultraschallbildaufnahmeeinrichtung |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8795195B2 (en) * | 2004-11-29 | 2014-08-05 | Senorx, Inc. | Graphical user interface for tissue biopsy system |
US20060239577A1 (en) * | 2005-03-10 | 2006-10-26 | Piatt Joseph H | Process of using computer modeling, reconstructive modeling and simulation modeling for image guided reconstructive surgery |
US7756563B2 (en) * | 2005-05-23 | 2010-07-13 | The Penn State Research Foundation | Guidance method based on 3D-2D pose estimation and 3D-CT registration with application to live bronchoscopy |
US7352370B2 (en) * | 2005-06-02 | 2008-04-01 | Accuray Incorporated | Four-dimensional volume of interest |
DE102005035430A1 (de) * | 2005-07-28 | 2007-02-01 | Siemens Ag | Verfahren zur verbesserten Darstellung co-registrierter 2D-3D-Bilder in der medizinischen Bildgebung |
WO2007100262A1 (en) * | 2006-03-03 | 2007-09-07 | Sinvent As | Method for integration of additional data for increasing the available information during medical imaging |
DE102006026490B4 (de) * | 2006-06-07 | 2010-03-18 | Siemens Ag | Radiotherapievorrichtung mit Angiographie-CT-Vorrichtung |
WO2008002275A1 (en) * | 2006-06-28 | 2008-01-03 | Agency For Science, Technology And Research | Registering brain images by aligning reference ellipses |
US8331634B2 (en) | 2006-09-26 | 2012-12-11 | Siemens Aktiengesellschaft | Method for virtual adaptation of an implant to a body part of a patient |
US8374673B2 (en) * | 2007-01-25 | 2013-02-12 | Warsaw Orthopedic, Inc. | Integrated surgical navigational and neuromonitoring system having automated surgical assistance and control |
WO2008141293A2 (en) * | 2007-05-11 | 2008-11-20 | The Board Of Regents Of The University Of Oklahoma One Partner's Place | Image segmentation system and method |
EP2044975B1 (de) * | 2007-10-01 | 2012-02-22 | BrainLAB AG | Verfahren zum Registrieren von 2D-Bilddaten, Computerprogrammprodukt, Navigationsverfahren zum Navigieren eines Behandlungsgerätes im Bereich der Medizin und Recheneinrichtung zum Registrieren von 2D-Bilddaten |
US8267853B2 (en) * | 2008-06-23 | 2012-09-18 | Southwest Research Institute | System and method for overlaying ultrasound imagery on a laparoscopic camera display |
EP2368168B1 (de) * | 2008-11-21 | 2018-07-11 | London Health Sciences Centre Research Inc. | Freihändiges zeigersystem |
US8934684B2 (en) * | 2009-07-31 | 2015-01-13 | Siemens Aktiengesellschaft | Method and system for facilitating an image guided medical procedure |
JP5612371B2 (ja) * | 2010-06-11 | 2014-10-22 | 富士フイルム株式会社 | 画像位置合わせ装置および方法並びにプログラム |
US8675939B2 (en) | 2010-07-13 | 2014-03-18 | Stryker Leibinger Gmbh & Co. Kg | Registration of anatomical data sets |
US20140003696A1 (en) * | 2010-12-29 | 2014-01-02 | The Ohio State University | Automated trajectory planning for stereotactic procedures |
US9053563B2 (en) | 2011-02-11 | 2015-06-09 | E4 Endeavors, Inc. | System and method for modeling a biopsy specimen |
WO2013035005A1 (en) * | 2011-09-06 | 2013-03-14 | Koninklijke Philips Electronics N.V. | Vascular treatment outcome visualization |
US9069996B2 (en) | 2011-09-16 | 2015-06-30 | The Invention Science Fund I, Llc | Registering regions of interest of a body part to a coordinate system |
DE102011120937B4 (de) * | 2011-12-14 | 2019-03-14 | Carl Zeiss Meditec Ag | Anordnung und Verfahren zur Registrierung von Gewebeverschiebungen |
WO2013130086A1 (en) * | 2012-03-01 | 2013-09-06 | Empire Technology Development Llc | Integrated image registration and motion estimation for medical imaging applications |
JP2015523133A (ja) * | 2012-06-15 | 2015-08-13 | コーニンクレッカ フィリップス エヌ ヴェ | 内視鏡低侵襲手術のための誘導切開計画 |
US20130345514A1 (en) * | 2012-06-22 | 2013-12-26 | Empire Technology Development Llc | Proprioceptive endoscope and virtual dynamic tomography |
KR101993384B1 (ko) * | 2012-10-24 | 2019-06-26 | 삼성전자주식회사 | 환자의 자세 변화에 따른 의료 영상을 보정하는 방법, 장치 및 시스템 |
CN103892831A (zh) * | 2012-12-26 | 2014-07-02 | 上海联影医疗科技有限公司 | 一种磁共振成像方法及磁共振系统 |
CN105874507B (zh) * | 2013-11-27 | 2019-09-27 | 模拟技术公司 | 多成像模态导航系统 |
CN105078514A (zh) * | 2014-04-22 | 2015-11-25 | 重庆海扶医疗科技股份有限公司 | 三维模型的构建方法及装置、图像监控方法及装置 |
US20150366628A1 (en) * | 2014-06-18 | 2015-12-24 | Covidien Lp | Augmented surgical reality environment system |
CA2959232C (en) | 2015-01-07 | 2018-08-14 | Synaptive Medical (Barbados) Inc. | Method, system and apparatus for adaptive image acquisition |
US10595941B2 (en) * | 2015-10-30 | 2020-03-24 | Orthosensor Inc. | Spine measurement system and method therefor |
US10314658B2 (en) * | 2017-04-21 | 2019-06-11 | Biosense Webster (Israel) Ltd. | Registration of an anatomical image with a position-tracking coordinate system based on visual proximity to bone tissue |
EP3449830B1 (de) * | 2017-08-31 | 2020-01-29 | Siemens Healthcare GmbH | Steuerung eines medizintechnischen bildgebenden systems |
US11915446B2 (en) | 2018-10-24 | 2024-02-27 | Siemens Healthineers Ag | Generating a medical result image |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19705600A1 (de) * | 1997-02-14 | 1998-08-20 | Philips Patentverwaltung | Verfahren zur Ermittlung der Transformation zwischen einem Objekt und seiner dreidimensionalen Darstellung und Anordnung zur Durchführung des Verfahrens |
DE10001709A1 (de) * | 2000-01-18 | 2001-07-19 | Philips Corp Intellectual Pty | Verfahren und Anordnung zur Erstellung von Röntgenbildern |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US330428A (en) * | 1885-11-17 | Makee and eobeet h | ||
FI68916C (fi) * | 1983-12-30 | 1985-11-11 | Kone Oy | Foerfarande foer att ladda ett instrument med kyvetter samt enyvettfoerpackning |
GB8728639D0 (en) * | 1987-12-08 | 1988-01-13 | Scient Generics Ltd | Device for analytical determinations |
DE59107344D1 (de) * | 1990-11-26 | 1996-03-14 | Truppe Michael | Verfahren zur Darstellung beweglicher Körper |
US5279309A (en) * | 1991-06-13 | 1994-01-18 | International Business Machines Corporation | Signaling device and method for monitoring positions in a surgical operation |
US5575978A (en) * | 1992-03-27 | 1996-11-19 | Abbott Laboratories | Sample container segment assembly |
US5391352A (en) * | 1993-09-07 | 1995-02-21 | Hendrix; Billy E. | Blood analysis apparatus |
US5485842A (en) * | 1994-11-30 | 1996-01-23 | Advanced Technology Laboratories, Inc. | Ultrasonic diagnostic scan conversion for three dimensional display processing |
US5951475A (en) * | 1997-09-25 | 1999-09-14 | International Business Machines Corporation | Methods and apparatus for registering CT-scan data to multiple fluoroscopic images |
US6674449B1 (en) * | 1998-11-25 | 2004-01-06 | Ge Medical Systems Global Technology Company, Llc | Multiple modality interface for imaging systems |
US6301495B1 (en) * | 1999-04-27 | 2001-10-09 | International Business Machines Corporation | System and method for intra-operative, image-based, interactive verification of a pre-operative surgical plan |
US7041059B2 (en) * | 2002-08-02 | 2006-05-09 | Diagnostic Ultrasound Corporation | 3D ultrasound-based instrument for non-invasive measurement of amniotic fluid volume |
US7065393B2 (en) * | 2002-07-11 | 2006-06-20 | Cedara Software Corp. | Apparatus, system and method of calibrating medical imaging systems |
US6984208B2 (en) * | 2002-08-01 | 2006-01-10 | The Hong Kong Polytechnic University | Method and apparatus for sensing body gesture, posture and movement |
US7096057B2 (en) * | 2002-08-02 | 2006-08-22 | Barnes Jewish Hospital | Method and apparatus for intracorporeal medical imaging using a self-tuned coil |
US20040044282A1 (en) * | 2002-08-28 | 2004-03-04 | Mixon Lonnie Mark | Medical imaging systems and methods |
WO2004096018A2 (en) * | 2003-04-28 | 2004-11-11 | Vanderbilt University | Apparatus and methods of optimal placement of deep brain stimulator |
US7711405B2 (en) * | 2004-04-28 | 2010-05-04 | Siemens Corporation | Method of registering pre-operative high field closed magnetic resonance images with intra-operative low field open interventional magnetic resonance images |
CA2618101A1 (en) * | 2005-08-19 | 2007-02-22 | Visualsonics Inc. | Systems and methods for capture and display of blood pressure and ultrasound data |
-
2003
- 2003-07-23 DE DE10333543A patent/DE10333543A1/de not_active Withdrawn
-
2004
- 2004-07-23 US US10/897,673 patent/US20050027187A1/en not_active Abandoned
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19705600A1 (de) * | 1997-02-14 | 1998-08-20 | Philips Patentverwaltung | Verfahren zur Ermittlung der Transformation zwischen einem Objekt und seiner dreidimensionalen Darstellung und Anordnung zur Durchführung des Verfahrens |
DE10001709A1 (de) * | 2000-01-18 | 2001-07-19 | Philips Corp Intellectual Pty | Verfahren und Anordnung zur Erstellung von Röntgenbildern |
Non-Patent Citations (4)
Title |
---|
BEIER, J. et al : Advanced Sub- traction Angiography: Mask Selection and Image Registration. IEEE Computers in Cardiology 1994, S. 105-108 * |
BEIER, J.; OSWALD, H.; FLECK, E.: Advanced Sub- traction Angiography: Mask Selection and Image Registration. IEEE Computers in Cardiology 1994, S. 105-108 |
HSU, L. et al: Automated Registra-tion of Brain Images Using Edge and Surface Features. IEEE Eng. in Medicine and Biology, November 1999, S. 40-47 * |
HSU, L.; LOEW, M.; OSTUNI, J.: Automated Registra- tion of Brain Images Using Edge and Surface Features. IEEE Eng. in Medicine and Biology, November 1999, S. 40-47 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005000714A1 (de) * | 2005-01-03 | 2006-07-20 | Siemens Ag | Verfahren zur Bildgebung eines periodisch bewegten Objektbereichs eines Objekts |
DE102005022541A1 (de) * | 2005-05-17 | 2006-12-07 | Siemens Ag | Verfahren und Gerät zur Darstellung von Strukturen auf einem 2D-Durchleuchtungsbild |
DE102005031123A1 (de) * | 2005-07-04 | 2007-01-11 | Siemens Ag | Verfahren und Einrichtung zur Röntgenbildgebung |
DE102005031118A1 (de) * | 2005-07-04 | 2007-01-11 | Siemens Ag | Verfahren und Einrichtung zur Ausrichtung eines Fokuspunktes einer Ultraschallstoßwelle auf ein Ziel in einem Patienten |
DE102005031123B4 (de) * | 2005-07-04 | 2010-12-30 | Siemens Ag | Verfahren zur Röntgenbildgebung |
US7592600B2 (en) | 2005-11-10 | 2009-09-22 | Siemens Aktiengesellschaft | Diagnosis device for radiographic and nuclear medical examinations |
DE102006029718A1 (de) * | 2006-06-28 | 2008-01-10 | Siemens Ag | Verfahren zur Auswertung zweier Abbilder sowie medizinisches Abbildungssystem |
DE102007013535A1 (de) | 2007-03-18 | 2008-09-25 | Friebe, Michael, Dipl.-Ing. Dr. | Patientengrid mit dedizierten Markern zur Bestimmung der Ortskoordinaten von diagnostischen Bilddaten, insbesondere MRT Daten und Verfahren zur Bestimmung von Ortskoordinaten für die Steuerung externer Systeme |
EP2044884A1 (de) | 2007-10-02 | 2009-04-08 | BrainLAB AG | Bestimmung und Erkennung von Lageänderungen von Körperstrukturteilen |
DE102011087357A1 (de) | 2011-11-29 | 2013-05-29 | Karl Storz Gmbh & Co. Kg | Aktualisierung von präoperativ aufgenommenen 3D-Bilddaten eines Körpers |
DE102011087357B4 (de) | 2011-11-29 | 2021-09-16 | Karl Storz Se & Co. Kg | Aktualisierung von präoperativ aufgenommenen 3D-Bilddaten eines Körpers |
DE102014212089A1 (de) * | 2014-06-24 | 2015-07-23 | Siemens Aktiengesellschaft | Verfahren zur Bildüberwachung eines minimalinvasiven Eingriffs, Bildverarbeitungseinrichtung und Ultraschallbildaufnahmeeinrichtung |
Also Published As
Publication number | Publication date |
---|---|
US20050027187A1 (en) | 2005-02-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE10333543A1 (de) | Verfahren zur gekoppelten Darstellung intraoperativer sowie interaktiv und iteraktiv re-registrierter präoperativer Bilder in der medizinischen Bildgebung | |
DE102005030646B4 (de) | Verfahren zur Kontur-Visualisierung von zumindest einer interessierenden Region in 2D-Durchleuchtungsbildern | |
DE102009040430B4 (de) | Vorrichtung, Verfahren und Computerprogramm zur Überlagerung eines intraoperativen Livebildes eines Operationsgebiets oder des Operationsgebiets mit einem präoperativen Bild des Operationsgebiets | |
DE19963440C2 (de) | Verfahren und System zur Visualisierung eines Gegenstandes | |
DE10322739B4 (de) | Verfahren zur markerlosen Navigation in präoperativen 3D-Bildern unter Verwendung eines intraoperativ gewonnenen 3D-C-Bogen-Bildes | |
DE10210645B4 (de) | Verfahren zur Erfassung und Darstellung eines in einen Untersuchungsbereich eines Patienten eingeführten medizinischen Katheters | |
DE102005059209B4 (de) | Verfahren und Vorrichtung zur Visualisierung einer Folge von tomographischen Bilddatensätzen | |
DE112016005720T5 (de) | 3D-Visualisierung während Chirurgie mit verringerter Strahlenbelastung | |
DE10136709B4 (de) | Vorrichtung zum Durchführen von operativen Eingriffen sowie Verfahren zum Darstellen von Bildinformationen während eines solchen Eingriffs an einem Patienten | |
DE10015826A1 (de) | System und Verfahren zur Erzeugung eines Bildes | |
DE10210650A1 (de) | Verfahren zur dreidimensionalen Darstellung eines Untersuchungsbereichs eines Patienten in Form eines 3D-Rekonstruktionsbilds | |
DE102005023194A1 (de) | Verfahren zur Erweiterung des Darstellungsbereiches von 2D-Bildaufnahmen eines Objektbereiches | |
DE102007013807A1 (de) | Bildakquisitions-, Bildverarbeitungs- und Bildvisualisierungssystem zur Unterstützung der Navigation interventioneller Werkzeuge bei Durchführung von CT- bzw. MRT-gesteuerten Interventionen | |
DE102008037424A1 (de) | Verbessertes System und Verfahren für auf Volumen basierende Registrierung | |
DE10323008A1 (de) | Verfahren zur automatischen Fusion von 2D-Fluoro-C-Bogen-Bildern mit präoperativen 3D-Bildern unter einmaliger Verwendung von Navigationsmarken | |
DE10210646A1 (de) | Verfahren zur Bilddarstellung eines in einen Untersuchungsbereich eines Patienten eingebrachten medizinischen Instruments | |
DE102008044529A1 (de) | System und Verfahren zur Verwendung von Fluoroskop- und Computertomographie-Registrierung für Sinuplastie-Navigation | |
DE102008002864A1 (de) | Dynamisches Referenzverfahren und System für die Verwendung mit chirurgischen Verfahren | |
DE10325003A1 (de) | Visualisierung von 2D/ 3D-fusionierten Bilddaten für die Katheterangiografie | |
DE102005036322A1 (de) | Registrieren intraoperativer Bilddatensätze mit präoperativen 3D-Bilddatensätzen auf Basis optischer Oberflächenextraktion | |
DE102004004620A1 (de) | Verfahren zur Registrierung und Überlagerung von Bilddaten bei Serienaufnahmen in der medizinischen Bildgebung | |
DE102005035430A1 (de) | Verfahren zur verbesserten Darstellung co-registrierter 2D-3D-Bilder in der medizinischen Bildgebung | |
DE102006003126A1 (de) | Verfahren und Vorrichtung zum Visualisieren von 3D-Objekten | |
DE102005027678A1 (de) | Verfahren und Vorrichtung zur Markierung von dreidimensionalen Strukturen auf zweidimensionalen Projektionsbildern | |
DE102008045276B4 (de) | Verfahren zur Ansteuerung einer medizintechnischen Anlage, medizintechnische Anlage und Computerprogramm |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OP8 | Request for examination as to paragraph 44 patent law | ||
8120 | Willingness to grant licences paragraph 23 | ||
R002 | Refusal decision in examination/registration proceedings | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |
Effective date: 20130201 |