DE112004000128T5 - Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie - Google Patents

Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie Download PDF

Info

Publication number
DE112004000128T5
DE112004000128T5 DE112004000128T DE112004000128T DE112004000128T5 DE 112004000128 T5 DE112004000128 T5 DE 112004000128T5 DE 112004000128 T DE112004000128 T DE 112004000128T DE 112004000128 T DE112004000128 T DE 112004000128T DE 112004000128 T5 DE112004000128 T5 DE 112004000128T5
Authority
DE
Germany
Prior art keywords
current
endoscope
path
cluster
centerline
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE112004000128T
Other languages
English (en)
Other versions
DE112004000128B4 (de
Inventor
Bernhard Geiger
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Medical Solutions USA Inc
Original Assignee
Siemens Corporate Research Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Corporate Research Inc filed Critical Siemens Corporate Research Inc
Publication of DE112004000128T5 publication Critical patent/DE112004000128T5/de
Application granted granted Critical
Publication of DE112004000128B4 publication Critical patent/DE112004000128B4/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/457Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16ZINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS, NOT OTHERWISE PROVIDED FOR
    • G16Z99/00Subject matter not provided for in other main groups of this subclass
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30028Colon; Small intestine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Processing Or Creating Images (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Endoscopes (AREA)
  • Image Processing (AREA)

Abstract

Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist:
Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten;
Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum;
Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position;
Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt;
Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde;
Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg;
Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und
Auswählen eines Mittellinienweges basierend auf dem Ergebnis.

Description

  • Querverweis auf verwandte Anmeldungen
  • Priorität
  • Es wird hiermit besonderer Bezug genommen auf die parallele vorläufige US-Patentanmeldung Nr. 60/443,743, beim US-amerikanischen Patent- und Markenamt am 30. Januar 2003 im Namen des Erfinders Bernhard Geiger eingereicht, und mit dem Titel AUTOMATIC LOCAL PATH PLANNING FOR VIRTUAL COLONOSCOPY, deren Offenbarung hiermit unter Bezugnahme darauf hierin mit einbezogen und deren Priorität beansprucht wird.
  • Es wird ebenfalls hiermit besonderer Bezug genommen auf die parallele vorläufige US-Patentanmeldung Nr. 60/470,579, beim US-amerikanischen Patent- und Markenamt am 14. Mai 2003 im Namen der Erfinder Bernhard Geiger und Jean-Daniel Boissonnat eingereicht, und mit dem Titel FAST CENTERLINE EXTRACTION, deren Offenbarung hiermit unter Bezugnahme hierin mit einbezogen und deren Priorität beansprucht wird.
  • Die vorliegende Anmeldung betrifft im Allgemeinen Computervideo- und -bildgebungssysteme und im Besonderen ein System und Verfahren zur automatischen lokalen Wegplanung, wie sie für die virtuelle Endoskopie und virtuelle Kolonoskopie verwendet werden kann.
  • Hintergrund der Erfindung
  • Virtuelle Kolonoskopie (Kolonoskopie = Darmspiegelung; hierin mit VC abgekürzt) betrifft ein Diagnoseverfahren, das auf einer Computersimulation von standardmäßigen, minimal-invasiven Endoskopieverfahren unter Verwendung von patientenbezogenen dreidimensionalen (3D-) anatomischen Datensätzen basiert. Beispiele von derzeitigen endoskopischen Verfahren umfassen die Bronchoskopie, die Sinuskopie, die Endoskopie des oberen Magen-Darm-Bereichs, die Kolonoskopie (Darmspiegelung), die Zytoskopie (Blasenspiegelung), die Kardioskopie und die Urethroskopie (Harnröhren-Endoskopie). Die VC-Visualisierung von nicht-invasiven ermittelten patientenbezogenen anatomischen Strukturen vermeidet Risiken wie z.B. Gewebeschädigung (Perforation), Infektion, Blutung usw., die mit einer realen Endoskopie verbunden sind, und stellt dem, der die Endoskopie durchführt, wichtige Daten bereit, bevor er eine tatsächliche endoskopische Untersuchung durchführt. Ein derartiges Verständnis kann prozedurale Schwierigkeiten minimieren, die Patientensterblichkeit senken, das Training verbessern und für ein besseres Verständnis der therapeutischen Ergebnisse sorgen.
  • Bei der virtuellen Kolonoskopie werden 3D-Bilder aus zweidimensionalen (2D-) Computertomografiedaten (CT) oder Kern-spintomografiedaten (MR) zum Beispiel durch Volumenrendering erzeugt.
  • Diese 3D-Bilder werden erzeugt, um von einem tatsächlichen Endoskop wie zum Beispiel einem Glasfaseroptik-Endoskop kommende Bilder zu simulieren. Dies bedeutet, dass ein Blickpunkt des virtuellen Endoskops innerhalb eines Lumens eines Organs oder eines anderen menschlichen Gewebes und mit einem weiten Blickwinkel, typischerweise ungefähr 100° im Bogenmaß, ausgewählt werden muss. Dieser Blickpunkt muss sich entlang des inneren des Lumens bewegen, was bedeutet, dass eine 3D-Translation und eine 3D-Rotation angewendet werden müssen. Diese Parameter interaktiv zu steuern stellt eine Herausforderung dar.
  • Eine üblicherweise verwendete Technik zum Navigieren eines Blickpunktes eines virtuellen Endoskops ist es, eine "Flugbahn" zuvor zu berechnen und den Blickpunkt des virtuellen Kolonoskops entlang dieser Bahn automatisch zu bewegen. Diese Technik erfordert jedoch einen Segmentierungs- und Bahnberechnungsschritt, der zeitaufwändig ist und fehlschlagen kann.
  • Die frühere Patentanmeldung des Anmelders mit der Nummer 10/322,326, eingereicht am 18. Dezember 2002 mit dem Titel AUTOMATIC NAVIGATION FOR VIRTUAL ENDOSCOPY, und deren Offenbarung hiermit unter Bezugnahme hierin in dem Maß mit einbezogen ist, dass sie nicht inkompatibel mit der vorliegenden Erfindung ist, offenbart ein System und Verfahren zur Navigation innerhalb eines Darmdatensatzes, das den längsten Sichtstrahl zum Fortschreiten verwendet. Die vorgenannte frühere Patentanmeldung zeigt ein System und Verfahren zur automatischen Navigation eines Blickpunktes eines Endoskops bei der virtuellen Kolonoskopie, das bereitgestellt wird. Das System bestimmt automatisch eine Richtung und Orientierung eines virtuellen Endoskops. Dadurch braucht ein Benutzer nur einen Parameter zu steuern – Vorwärts- oder Rückwärtsgeschwindigkeit, und das Verfahren ermöglicht die unmittelbare interaktive Navigation innerhalb eines Organs ohne Vorverarbeitung, d.h. Segmentierung und Kurvenerzeugung. Das in der genannten Anmeldung gezeigte Verfahren umfasst die Schritte (a) Bestimmen eines Anfangsblickpunkts eines virtuellen Endoskops, wobei der Anfangsblickpunkt einen ersten Mittelpunkt und eine erste Richtung aufweist; (b) Bestimmen eines längsten Strahls vom Anfangsblickpunkt zum Lumen, wobei der längste Strahl eine erste Richtung des längsten Strahls aufweist; (c) Bestimmen einer zweiten Richtung zwischen der ersten Richtung des Anfangsblickpunkts und der ersten Richtung des längsten Strahls; (d) Drehen des Blickpunkts in die zweite Richtung und Bewegen des Anfangsblickpunkts um einen ersten vorbestimmten Abstand in einer ersten Richtung des Anfangsblickpunkts; (e) Berechnen eines zweiten Mittelpunkts des Blickpunkts; (f) Bewegen des Blickpunkts zum zweiten Mittelpunkt; und Wiederholen der Schritte (b) bis (f), bis der Blickpunkt ein beabsichtigtes Ziel erreicht.
  • Kurze Zusammenfassung der Erfindung
  • Es wird hierin gewürdigt, dass es nichtsdestotrotz unter gewissen Umständen möglich ist, beim Betrieb des Systems, das in der zuvor erwähnten früheren Patentanmeldung (Anwaltsaktenzeichen Nr. 2001P24461US) offenbart wurde, in einer scharfen Krümmung oder einer tiefen haustrenartigen Falte steckenzubleiben, wie es in der virtuellen Kolonoskopie vorkommen kann.
  • Gemäß eines Aspektes der vorliegenden Erfindung wird ein Verfahren zum Navigieren eines Blickpunktes eines virtuellen Kolonoskops in einem Lumen eines Gewebes bereitgestellt. Gemäß eines Aspektes der vorliegenden Erfindung weist ein Verfahren zur automatischen Wegplanung die folgenden Schritte auf: Definieren eines Untervolumens um die aktuelle Endoskop-Position herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des gewachsenen Bereiches mit sechs Flächen eines Würfels, der den fraglichen Bereich umgrenzt; Berechnen von angenäherten Mittellinien von der Endoskop-Position zum Mittelpunkt jedes der Cluster; Vergleichen jedes Wegs mit dem aktuellen Weg des Endoskops; und Auffinden des besten Ergebnisses.
  • Gemäß eines weiteren Aspektes der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop folgende Schritte auf: Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnen von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorangehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  • Gemäß eines weiteren Aspektes der Erfindung umfasst der Schritt des Ableitens eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, das Ableiten des Datensatzes mittels Computertomografie (CT).
  • Gemäß eines weiteren Aspektes der Erfindung umfasst der Schritt des Ableitens eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, das Ableiten des Datensatzes mittels Kernspintomografie (MR).
  • Gemäß eines weiteren Aspektes der Erfindung beinhaltet ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop einen Schritt des Definierens des Würfels, der aus einer gegebenen Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
  • Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Berechnens von angenäherten Mittellinienwegen: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
  • Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Zentrierens und Glättens des Anfangsweges die Verwendung einer Gauss'schen Glättung.
  • Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Zentrierens und Glättens des Anfangsweges: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Kugelgröße, bis sie wiederum ein weiteres Mal mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
  • Gemäß eines weiteren Aspekts der vorliegenden Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung bei den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position bis zum Mittelpunkt jedes Clusters, das in den vorhergehenden Schritten gebildet wurde, mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines Ergebnisses basierend auf dem Vergleich zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  • Gemäß eines weiteren Aspekts der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
  • Gemäß eines weiteren Aspektes der Erfindung weist ein System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop auf: Vorrichtung zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Vorrichtung zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Vorrichtung zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Vorrichtung zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vorrichtung zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Vorrichtung zum Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
  • Gemäß eines weiteren Aspekts der Erfindung weist ein System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop auf: eine Vorrichtung zum Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Vorrichtung zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Vorrichtung zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Vorrichtung zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Vorrichtung zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vorrichtung zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Vorrichtung zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Vorrichtung zum Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  • Gemäß eines weiteren Aspekts der Erfindung weist eine Vorrichtung zum Zentrieren und Glätten des Anfangswegs Vorrichtungen auf zum: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel, bis sie wiederum erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
  • Gemäß eines weiteren Aspekts der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorherigen Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienwegs basierend auf dem Vergleich.
  • Kurze Beschreibung verschiedener Ansichten der Figuren
  • Diese und andere Aspekte der vorliegenden Erfindung werden leichter aus der nachfolgenden detaillierten Beschreibung in Verbindung mit den Figuren verständlich, in denen
  • 1 bildlich eine typische Situation zeigt, die hilfreich für ein leichteres Verständnis der vorliegenden Erfindung ist, wobei die Fortbewegung eines Endoskops in einer scharfen Kurve stecken geblieben ist;
  • 2 u. 3 Voxelwege zeigen, die sich auf Mittellinienextraktion beziehen, wie sie in Ausführungsformen der vorliegenden Erfindung verwendet werden kann; und
  • 4 einen Zentrierschritt zeigt, wie er in Ausführungsformen der vorliegenden Erfindung verwendet werden kann.
  • Detaillierte Beschreibung der Erfindung
  • Es versteht sich, dass das Verfahren und System der vorliegenden Erfindung unter Verwendung eines programmierbaren digitalen Computers implementiert ist, und dass die hierin beschriebenen Abläufe sich auf solch eine Implementierung beziehen. Im Zusammenhang mit Bildverarbeitung sollen Begriffe wie "Luft", "Lumen", usw. in typischer Weise die entsprechende Bildverarbeitung bzw. – gebung diese Merkmale bezeichnen.
  • Wie hierin zuvor erwähnt ist es unter gewissen Umständen möglich, beim Betrieb von Systemen des Standes der Technik zur virtuellen Kolonoskopie in einer scharfen Biegung oder einer tiefen haustrenartigen Falte, wie sie in der virtuellen Kolonoskopie vorkommen kann, stecken zu bleiben. 1 zeigt eine typische Situation, wo das Endoskop in einer scharfen Biegung stecken geblieben ist.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung schneidet ein von der Endoskop-Position gewachsener Bereich den Würfel in drei Cluster, c0, c1 und c2. Das System berechnet neue Mittellinien vom Endoskop in Richtung des Mittelpunkts jedes Clusters und vergleicht jeden Weg mit dem Weg des Endoskops. Ein Ergebnis wird berechnet, das die Abweichung des Wegs mit dem Eingangweg widerspiegelt. Der Weg mit dem höchsten Ergebnis ist am Wahrscheinlichsten der, der sich in Richtung des Darms fortsetzt. Wenn lediglich ein Cluster existiert, entscheidet das System, dass eine Sperre existiert und dass es eine Sackgasse erreicht hat.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung umfasst ein Verfahren zur automatischen Wegplanung einen Schritt des Definierens eines Untervolumens um die aktuelle Endoskop-Position herum. Als nächstes wird ein Schritt des Durchführens eines Bereichwachstums innerhalb des Lumens durchgeführt, beginnend von der Endoskop-Position. Darauf folgen die Schritte des Berechnens und des Clusterns der Schnittfläche des gewachsenen Bereichs mit sechs Flächen des Würfels, der den fraglichen Bereich umgrenzt. Angenäherte Mittellinien von der Endoskop-Position zum Mittelpunkt jedes der Cluster werden anschließend berechnet. Jeder Weg wird mit dem aktuellen Weg des Endoskops verglichen und ein bestes Ergebnis wird ermittelt.
  • Der Schritt des Berechnens von angenäherten Mittellinien kann auf verschiedene Art und Weise durchgeführt werden. Eine Vielzahl von Mittellinienalgorithmen verwenden Ausdünnung, morphologische Operatoren, Distanztransformationen, Wege minimaler Kosten (minimum cost paths), Dijkstras Algorithmus usw. Hintergrundmaterial kann in der Literatur gefunden werden, z.B.:
    Zhou et al., "Three-Dimensional Skeleton and Centerline Generation Based on an Approximate Minimum Distance Field," The Visual Computer, 14:303-314 (1998); R. Truyen, T. Deschamps, L.D. Cohen, "Clinical evaluation of an automatic path tracker for virtual colonoscopy, Medical Image Computing and Computer-Assisted Intervention (MICCAI), Utrecht, Netherlands, Oktober 2001, Chen et al., "A Fast Algorithm to Generate Centerline for Virtual Colonoscopy," SPIE Conference, 12.–18. Feb. 2000; Richard Robb, "Virtual (Computed) Endoscopy: Development and Evaluation Using the Visible Human Datasets," 7.–8. Okt. 1996, www.mayo.edu; U.S.-Patent 6,514,082 mit dem Titel "System and method for performing a three-dimensional examination with collapse correction."
  • Ein weiterer Durchführungsweg der Darmsegmentierung umfasst die Durchführung einer Start- und Endpunktberechnung, und die Durchführung einer Anfangswegberechnung wie in der zuvor erwähnten vorläufigen Patentanmeldung Nr. 60/470,579 von Geiger et al. beschrieben. Darauf folgt das Zentrieren und Glätten des Wegs. Dies beginnt typischerweise mit einem Darmdatensatz, der unter Verwendung eines Kolonoskopie-Protokolls ermittelt wurde, das typischerweise eine Darmvorbereitung und Luftinsufflation (Einblasen von Luft) umfasst. Der Datensatz ist durch Anwenden eines Grenzwerts auf Luft und durch Durchführen einer verbundenen Komponentenanalyse segmentiert, wobei verbundene Komponenten, die nicht zum Darm gehören, verworfen werden, entweder automatisch oder durch manuelle Selektion. Beginnend von einem ersten Voxel, das zum Darm gehört, wird eine Abstandskennzeichnung der Voxel durchgeführt, typischerweise mit einer aufeinander folgenden Nummerierung, wobei das erste Voxel die Bezeichnung 0, sein Nachbar die Bezeichnung 1, dessen Nachbar die Bezeichnung 2 usw. erhält. Es wird eine Suche nach der höchsten Bezeichnung durchgeführt, wobei diese der Startpunkt p0 wird. Von p0 wird eine neue Abstandskennzeichnungsabbildung erzeugt durch Wiederholen des vorherigen Schritts des Abstands Kennzeichnen und Ermitteln eines weiteren Voxels mit der höchsten Zahl. Dies ist der Endpunkt p1.
  • Von p1 werden Abstandskennzeichen verwendet, um einen Weg von verbundenen Voxeln zu erhalten, der bei p0 endet. Dies wird durchgeführt durch Suchen unter den Nachbarn von p2 nach einem Voxel mit einem kleineren Kennzeichen usw. bis p0 erreicht ist. Siehe 2a und 3a, die den anfänglichen Voxelweg darstellen. Der sich ergebende Weg ist im Allgemeinen gezackt und wird unter Verwendung bekannter Techniken, z.B. durch Gauss'sches Glätten, geglättet. Ein Scheitelpunkt wird durch den gewichteten Durchschnitt seiner n Nachbarn ersetzt, und dieser Prozess wird in einer Anzahl von Iterationen wiederholt. Eine neue Scheitelpunktposition wird auf die Kollision mit der Darmwand durch Verifizieren getestet, ob die neue Koordinate noch innerhalb des segmentierten Darms liegt. Im Falle einer Kollision wird der Scheitel bei der letzten kollisionsfreien Position belassen. In gewissem Sinne kann dieser Prozess mit dem Weg einer dehnbaren flexiblen gewichtslosen Schnur verglichen werden, die durch den Darm geführt wird. Siehe 2b und 3b, die den ersten Glättungsschritt zeigen. Die 2c und 3c zeigen die finale Zentrierung.
  • Gemäß einer beschriebenen Ausführungsform wird dieser glatte Weg unter Verwendung von Kugeln mit wachsender Größe zentriert. Siehe 4. Eine kleine Kugel wird an einem Scheitelpunkt entlang des Wegs zentriert. Die Scheitelpunkte auf dieser Kugel werden auf Kollisionen mit der Darmwand überprüft. Wenn die Scheitelpunkte kollidieren, wird eine auf den Kugellotrechten basierende Kraft definiert. Diese Kraft wird verwendet, um die Kugel von der Wand wegzubewegen. Die Kugel ist darauf eingeschränkt, sich in einer Ebene senkrecht zum Weg zu bewegen. Wenn die Kugel nicht mehr kollidiert, wird die Größe der Kugel erhöht und die Kollisionsberechnung und -verschiebung wird wiederholt, wobei der Prozess stoppt, wenn die Kugel nicht weiter verschoben und/oder vergrößert werden kann, ohne eine Kollision zu erzeugen. Der Mittelpunkt der Kugel wird nun als neue Position für den Scheitelpunkt genommen. Der Prozess wird für den nächsten Scheitelpunkt der Kurve oder des Wegs wiederholt. Siehe 1c. Eine Beschreibung der Kollisionsdetektionstechnik und der Berechnung der Translationskraft ist in einer Veröffentlichung von Geiger, B. "Real-Time Collision Detetion and Response for Complex Environments", Computer Graphics International 2000, 19.–23. Juni 2000; Genf, Schweiz, angegeben. Die Kollisionserfassung und Kraftberechnung wird hierin jedoch direkt auf dem Voxel durchgeführt im Vergleich zu vielflächigen Rekonstruktionen, obwohl sie im Allgemeinen den in der zuvor erwähnten Veröffentlichung von Geiger erläuterten Prinzipien folgt. Danach, und nach dem Zentrieren, wird der Weg einer weiteren Gauss-schen Glättung mit Kollisionskontrolle unterzogen, dieses Mal unter Verwendung von weniger Internationen und einer kleineren Umgebung.
  • 4 zeigt das zusammengefasste Verfahren für den Zentrierungsschritt: eine Kugel wird am Scheitelpunktort eingesetzt (a); die Kugelgröße wird erhöht, bis sie mit der Wand kollidiert. Aus dieser Kollision wird eine Translationskraft berechnet (b). Die Translation wird angewandt, bis die Kugel nicht mehr kollidiert (c). Die Größe der Kugel wird wiederum erhöht und kollidiert nun mit der Wand. Eine Translation wird berechnet (d). Nach der Translation erreicht die Kugel eine Position, wo sie nicht weiter wachsen kann. Dies stellt die finale Scheitelpunktposition dar (e).
  • Ein bevorzugter Weg, der im Einklang mit den Prinzipien der vorliegenden Erfindung ist und der solche morphologischen Operationen nicht verwendet, ist in manchen Situationen schneller.
  • Gemäß einer Ausführungsform der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für die virtuelle Kolonoskopie folgende Schritte auf.
  • Eine automatische Segmentierung wird durchgeführt, wobei die automatische Segmentierung einen Block von ausgewählter Würfelgröße (z.B. 128 × 128 × 128) ausschneidet, wobei die Voxel an der Endoskop-Position zentriert sind. Beginnend mit dem Voxel, das das Endoskop als Ausgangspunkt (seed) beinhaltet, wird ein Bereichswachstum innerhalb der Luft durchgeführt. Alle Voxel, die Luft enthalten und zum selben Lumen gehören, werden gekennzeichnet. Diese Luftsäule schneidet den Würfel an verschiedenen Orten. Diese Orte werden geclustert, wobei Voxels, die gemeinsame Flächen teilen, zum selben Cluster addiert werden, und wobei der Mittelpunkt jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten jedes Voxels in jedem Cluster berechnet wird. Die Mittellinien vom Mittelpunkt jedes Clusters zur Endoskop-Position werden berechnet. Jede Mittellinie wird mit dem Weg des Endoskops verglichen. Beginnend von der Endoskop-Position wird der absolute Wert der Differenz von Punkten auf einer Mittellinie zu dem entsprechenden Punkt auf dem Endoskopweg hinzuaddiert. Die Summe wird durch die Länge dividiert, um einen Ergebniswert zu bilden. Je höher dieser Ergebniswert, desto ferner ist die Mittellinie vom Eingangsweg. Der Weg mit dem höchsten Ergebniswert ist der Kandidat, dem man am besten folgt. Wenn lediglich ein Weg existiert, ist es am Wahrscheinlichsten der, auf dem das Endoskop hineinbewegt wurde, und das System weiß, dass es eine Sackgasse ist.
  • Es versteht sich, dass die Erfindung, die in erster Linie im Zusammenhang mit der virtuellen Kolonoskopie beschrieben wurde, für die sie äußerst nützlich ist, nichtsdestotrotz auch auf verschiedene andere Untersuchungen von der Art der virtuellen Endoskopie anwendbar ist. Während die Erfindung mittels beispielhafter Ausführungsformen beschrieben wurde, versteht es sich ebenfalls für den betreffenden Fachmann, dass verschiedene Änderungen und Modifikationen durchgeführt werden können, ohne vom Wesen der Erfindung abzuweichen, das durch die nachfolgenden Ansprüche definiert ist.
  • Zusammenfassung der Offenbarung
  • Ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop umfasst die Schritte: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.

Claims (36)

  1. Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  2. Verfahren nach Anspruch 1, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes mittels Computertomografie (CT) umfasst.
  3. Verfahren nach Anspruch 1, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes durch Kernspintomografie (MR) umfasst.
  4. Verfahren nach Anspruch 1, das einen Schritt des Definierens des Würfels umfasst, der aus einer gegebenen Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
  5. Verfahren nach Anspruch 1, das die folgenden Schritte umfasst: Bereichswachstum innerhalb der "Luft" innerhalb des Lumens; und Kennzeichnen aller Voxel in der Luft innerhalb des Lumens.
  6. Verfahren nach Anspruch 1, das die folgenden Schritte aufweist: Bilden eines Clusters an jedem Ort, wobei die Luft innerhalb des Lumens eine entsprechende Fläche des Würfels schneidet; Aufnehmen von Voxeln in jedem Cluster, die eine dem Cluster entsprechende Fläche gemeinsam haben.
  7. Verfahren nach Anspruch 1, das folgenden Schritt aufweist: Berechnen des Mittelpunkts jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten von Voxeln jedes der Cluster.
  8. Verfahren nach Anspruch 7, das den folgenden Schritt aufweist: Berechnen von entsprechenden Mittellinienwegen von dem Mittelpunkt jedes Clusters zur aktuellen Endoskop-Position.
  9. Verfahren nach Anspruch 1, wobei der Schritt des Zuordnens eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege umfasst: Bilden der Summe, beginnend von der aktuellen Endoskop-Position, von absoluten Werten der Differenz von Punkten auf einem entsprechenden Mittellinienweg zu einem entsprechenden Punkt auf dem aktuellen Weg, der durch das Endoskop dargestellt wird; Teilen der Summe durch die Länge des entsprechenden Mittellinienwegs, um einen Quotientenwert zu bilden; und Auswählen eines Wegs, der den höchsten Quotientenwert aufweist.
  10. 0. Verfahren nach Anspruch 9, das den Schritt des Erfassens aufweist, wenn lediglich ein Mittellinienweg existiert, und des Kennzeichnens eines solchen Ergebnisses als Sackgasse.
  11. Verfahren nach Anspruch 1, wobei der Schritt des Berechnens von angenäherten Mittellinienwegen umfasst: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
  12. Verfahren nach Anspruch 11, wobei der Schritt des Berechnens eines Anfangsweges umfasst: Speichern von Voxeln sukzessiv vom Endpunkt mit abnehmenden Kennzeichnungszahlen, bis zum Erreichen des Anfangspunktes.
  13. Verfahren nach Anspruch 11, wobei der Schritt des Zentrierens und Glättens des Anfangswegs die Verwendung einer Gauss'schen Glättung umfasst.
  14. Verfahren nach Anspruch 13, wobei der Schritt des Zentrierens und Glättens des Anfangspfads umfasst: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel, bis sie erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
  15. Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses auf jeden der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  16. Verfahren nach Anspruch 15, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes durch Computertomografie (CT) umfasst.
  17. Verfahren nach Anspruch 15, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes mittels Kernspintomografie (MR) umfasst.
  18. Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
  19. System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleich jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
  20. System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Mitteln zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Mitteln zum Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
  21. System nach Anspruch 20, wobei die Mittel zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, Mittel zum Ableiten des Datensatzes durch Computertomografie (CT) umfasst.
  22. System nach Anspruch 20, wobei die Mittel zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, Mittel zum Ableiten des Datensatzes durch Kernspintomografie (MR) umfasst.
  23. System nach Anspruch 20, das Mittel zum Definieren des Würfels umfasst, der durch eine gegebene Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
  24. System nach Anspruch 20, das Mittel umfasst zum: Bereichswachstum innerhalb von "Luft" innerhalb des Lumens; und Kennzeichnen aller Voxel in der Luft innerhalb des Lumens.
  25. System nach Anspruch 20, das Mittel umfasst zum: Bilden eines Clusters an jedem Ort, wobei die Luft innerhalb des Lumens eine entsprechende Fläche des Würfels schneidet; Aufnehmen von Voxeln in jedem Cluster, die eine dem Cluster entsprechende Fläche gemeinsam haben.
  26. System nach Anspruch 25, das Mittel umfasst zum: Berechnen des Mittelpunkts jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten der Voxel jedes der Cluster.
  27. System nach Anspruch 26, das Mittel umfasst zum: Berechnen der entsprechenden Mittellinienwege von dem Mittelpunkt jedes Clusters zur aktuellen Endoskop-Position.
  28. System nach Anspruch 20, wobei die Mittel zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege Mittel umfasst zum: Bilden der Summe, beginnend von der aktuellen Endoskop-Position, der absoluten Werte der Differenz von Punkten auf einem entsprechenden Mittellinienweg zu einem entsprechenden Punkt auf dem aktuellen Weg, der durch das Endoskop dargestellt wird; Teilen der Summe durch die Länge des entsprechenden Mittellinienwegs, um einen Quotientenwert zu bilden; und Auswählen eines Wegs mit dem höchsten Quotientenwert.
  29. System nach Anspruch 28, das Mittel zum Erfassen umfasst, wenn lediglich ein Mittellinienweg existiert, und zum Anzeigen eines derartigen Ergebnisses als Sackgasse.
  30. System nach Anspruch 20, wobei die Mittel zum Berechnen der angenäherten Mittellinienwege Mittel umfassen zum: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
  31. System nach Anspruch 30, wobei die Mittel zum Berechnen eines Anfangswegs Mittel umfassen zum: Speichern von Voxeln sukzessiv vom Endpunkt mit abnehmenden Kennzeichnungsnummern bis zum Erreichen des Anfangspunkts.
  32. System nach Anspruch 30, wobei die Mittel zum Zentrieren und Glätten des Anfangspfads Mittel zur Verwendung von Gauss'scher Glättung umfassen.
  33. System nach Anspruch 30, wobei die Mittel zum Zentrieren und Glätten des Anfangswegs Mittel umfassen zum: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel bis sie erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr wachsen kann ohne zu kollidieren; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
  34. System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das Mittel aufweist zum: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Zentrum jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde, mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienwegs basierend auf dem Weg.
  35. System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eines optimalen Mittellinienwegs basierend auf dem Vergleich.
  36. System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eine optimalen Mittellinienwegs basierend auf dem Vergleich.
DE112004000128T 2003-01-30 2004-01-09 Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie Expired - Fee Related DE112004000128B4 (de)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US44373403P 2003-01-30 2003-01-30
US60/443,734 2003-01-30
US10/753,703 US7081088B2 (en) 2003-01-30 2004-01-08 Method and apparatus for automatic local path planning for virtual colonoscopy
US10/753,703 2004-01-08
PCT/US2004/000595 WO2004070656A2 (en) 2003-01-30 2004-01-09 Method and apparatus for automatic local path planning for virtual colonoscopy

Publications (2)

Publication Number Publication Date
DE112004000128T5 true DE112004000128T5 (de) 2006-03-30
DE112004000128B4 DE112004000128B4 (de) 2007-10-04

Family

ID=32853341

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112004000128T Expired - Fee Related DE112004000128B4 (de) 2003-01-30 2004-01-09 Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie

Country Status (4)

Country Link
US (1) US7081088B2 (de)
JP (1) JP2007509649A (de)
DE (1) DE112004000128B4 (de)
WO (1) WO2004070656A2 (de)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7457444B2 (en) * 2003-05-14 2008-11-25 Siemens Medical Solutions Usa, Inc. Method and apparatus for fast automatic centerline extraction for virtual endoscopy
US6996205B2 (en) * 2003-06-24 2006-02-07 Ge Medical Ssytems Global Technology Company, Llc Methods and apparatus to facilitate review of CT colonography exams
DE102004027709B4 (de) * 2004-06-07 2006-08-10 Siemens Ag Verfahren der virtuellen Endoskopie zur medizinischen 3D-Bilddarstellung und -verarbeitung, Computertomografiegerät, Arbeitsstation und Computerprogrammprodukt
ATE484811T1 (de) * 2004-06-23 2010-10-15 Koninkl Philips Electronics Nv Virtuelle endoskopie
EP1856642A2 (de) * 2005-02-23 2007-11-21 Koninklijke Philips Electronics N.V. Verfahren zur vorhersage des verlaufs eines katheters
US7889905B2 (en) 2005-05-23 2011-02-15 The Penn State Research Foundation Fast 3D-2D image registration method with application to continuously guided endoscopy
US7756563B2 (en) * 2005-05-23 2010-07-13 The Penn State Research Foundation Guidance method based on 3D-2D pose estimation and 3D-CT registration with application to live bronchoscopy
US7379062B2 (en) * 2005-08-01 2008-05-27 Barco Nv Method for determining a path along a biological object with a lumen
EP1913554A2 (de) * 2005-08-01 2008-04-23 Koninklijke Philips Electronics N.V. Verfahren und vorrichtung zum anpassen erster und zweiter bilddaten eines objekts
EP1924197B1 (de) * 2005-08-24 2017-10-11 Philips Electronics LTD System für flexible navigierte endoskopie
US20070046661A1 (en) * 2005-08-31 2007-03-01 Siemens Medical Solutions Usa, Inc. Three or four-dimensional medical imaging navigation methods and systems
US8112292B2 (en) 2006-04-21 2012-02-07 Medtronic Navigation, Inc. Method and apparatus for optimizing a therapy
US8041141B2 (en) * 2006-06-30 2011-10-18 The University Of Louisville Research Foundation, Inc. Method and software for shape representation with curve skeletons
US8014561B2 (en) * 2006-09-07 2011-09-06 University Of Louisville Research Foundation, Inc. Virtual fly over of complex tubular anatomical structures
US8660635B2 (en) 2006-09-29 2014-02-25 Medtronic, Inc. Method and apparatus for optimizing a computer assisted surgical procedure
US7853058B2 (en) * 2006-11-22 2010-12-14 Toshiba Medical Visualization Systems Europe, Limited Determining a viewpoint for navigating a virtual camera through a biological object with a lumen
US20090156895A1 (en) * 2007-01-31 2009-06-18 The Penn State Research Foundation Precise endoscopic planning and visualization
US9037215B2 (en) 2007-01-31 2015-05-19 The Penn State Research Foundation Methods and apparatus for 3D route planning through hollow organs
US8672836B2 (en) * 2007-01-31 2014-03-18 The Penn State Research Foundation Method and apparatus for continuous guidance of endoscopy
US8514218B2 (en) 2007-08-14 2013-08-20 Siemens Aktiengesellschaft Image-based path planning for automated virtual colonoscopy navigation
US20100260393A1 (en) * 2007-12-07 2010-10-14 Koninklijke Philips Electronics N.V. Navigation guide
US9002076B2 (en) * 2008-04-15 2015-04-07 Medtronic, Inc. Method and apparatus for optimal trajectory planning
US8335552B2 (en) * 2009-03-20 2012-12-18 Medtronic, Inc. Method and apparatus for instrument placement
US8817014B2 (en) * 2009-11-23 2014-08-26 Siemens Medical Solutions Usa, Inc. Image display of a tubular structure
DE102010047278A1 (de) 2010-10-01 2012-04-05 Thermosensorik Gmbh Verfahren zur automatischen Ermittlung der Mittellinie eines freiförmigen Objektes
US8983232B2 (en) 2012-03-29 2015-03-17 Dcg Systems, Inc. Method for evaluating the centerline of an arbitrarily shaped object
US9786097B2 (en) * 2012-06-22 2017-10-10 Matterport, Inc. Multi-modal method for interacting with 3D models
US10163261B2 (en) 2014-03-19 2018-12-25 Matterport, Inc. Selecting two-dimensional imagery data for display within a three-dimensional model
US10139985B2 (en) 2012-06-22 2018-11-27 Matterport, Inc. Defining, displaying and interacting with tags in a three-dimensional model
US10373719B2 (en) * 2014-09-10 2019-08-06 Intuitive Surgical Operations, Inc. Systems and methods for pre-operative modeling
US9536309B2 (en) * 2014-11-27 2017-01-03 Synaptive Medical (Barbados) Inc. Method, system and apparatus for displaying surgical engagement paths
US10426424B2 (en) 2017-11-21 2019-10-01 General Electric Company System and method for generating and performing imaging protocol simulations
US11413097B2 (en) * 2019-12-31 2022-08-16 Biosense Webster (Israel) Ltd. Three dimensional mapping system for cranial surgical pathways with semi-targets and method
US11771505B2 (en) 2019-12-31 2023-10-03 Biosense Webster (Israel) Ltd. Three dimensional mapping system for cranial surgical pathways and method
US20230277245A1 (en) * 2020-08-06 2023-09-07 Canon U.S.A., Inc. Methods for operating a medical continuum robot

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5611025A (en) * 1994-11-23 1997-03-11 General Electric Company Virtual internal cavity inspection system
US7194117B2 (en) * 1999-06-29 2007-03-20 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination of objects, such as internal organs
US6928314B1 (en) * 1998-01-23 2005-08-09 Mayo Foundation For Medical Education And Research System for two-dimensional and three-dimensional imaging of tubular structures in the human body
US6690816B2 (en) * 2000-04-07 2004-02-10 The University Of North Carolina At Chapel Hill Systems and methods for tubular object processing
US7457444B2 (en) * 2003-05-14 2008-11-25 Siemens Medical Solutions Usa, Inc. Method and apparatus for fast automatic centerline extraction for virtual endoscopy
US7822461B2 (en) * 2003-07-11 2010-10-26 Siemens Medical Solutions Usa, Inc. System and method for endoscopic path planning

Also Published As

Publication number Publication date
US20040209234A1 (en) 2004-10-21
WO2004070656A2 (en) 2004-08-19
WO2004070656A3 (en) 2005-06-02
JP2007509649A (ja) 2007-04-19
DE112004000128B4 (de) 2007-10-04
US7081088B2 (en) 2006-07-25

Similar Documents

Publication Publication Date Title
DE112004000128B4 (de) Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie
DE112004000722T5 (de) Verfahren und Vorrichtung zur schnellen automatischen Mittellinien-Extraktion für die virtuelle Endoskopie
DE19543410B4 (de) Verfahren zum Simulieren von Endoskopie und virtuelles Untersuchungssystem zum Betrachten innerer Hohlräume
DE112004000352B4 (de) System und Verfahren zum Durchführen einer virtuellen Endoskopie
DE102006055173B4 (de) Verfahren, medizinisches diagnostisches bildgebendes System sowie computerlesbares Speichermedium für die halbautomatische Segmentierungstechnik für röhrenförmige Objekte mit niedrigem Kontrast
DE112004001177T5 (de) System und Verfahren zur Planung eines endoskopischen Pfades
DE69927001T2 (de) Verfahren, system und vorrichtung zur verarbeitung eines eine röhrenartige struktur darstellenden bildes und zur bestimmung eines pfades durch die genannte struktur
EP2115702B1 (de) Verfahren und vorrichtung zur 3d-routenplannung durch hohlorgane
DE102007045835B4 (de) Verfahren und Vorrichtung zum Darstellen eines virtuellen Objekts in einer realen Umgebung
DE102006043910B4 (de) Ergebnisfilter und Verfahren zur Selektion der Ergebnisdaten einer Applikation zur automatischen Mustererkennung
US7773786B2 (en) Method and apparatus for three-dimensional interactive tools for semi-automatic segmentation and editing of image objects
DE60319288T2 (de) Verfahren und vorrichtung zum identifizieren von pathologien in gehirnbildern
DE102004043676B4 (de) Verfahren zur Visualisierung von Plaqueablagerungen aus 3D-Bilddatensätzen von Gefäßstrukturen
JP2007509649A6 (ja) 仮想結腸鏡検査法のためのローカルパス自動プランニング方法及び装置
DE10048029A1 (de) Verfahren zur Berechnung einer zwei Abbildungen verbindenden Transformation
DE112004000381T5 (de) System und Verfahren zur Bereitstellung einer automatischen 3D-Läsionssegmentierung und von Läsionsmessungen
JP2000182078A (ja) 三次元(3d)イメ―ジングシステム及び三次元(3d)イメ―ジにおける境界を決定する方法
DE102005009271A1 (de) System und Verfahren zur Durchführung einer virtuellen Endoskopie in einer Verzweigungsstruktur
JP2005514086A (ja) 仮想内視鏡検査のための自動ナビゲーション
DE60306511T2 (de) Medizinisches darstellungssystem und bildverarbeitungsverfahren zur visualisierung von gefalteten anatomischen bereichen von objektoberflächen
DE102006039921A1 (de) System und Verfahren zum automatischen Atemwegevaluieren für Multi-Schnitt Computertomographie (MSCT) Bilddaten unter Verwendung eines Atemweglumendurchmessers, einer Atemwegwanddicke und eines Bronchien-Arterien-Verhältnisses
Nagy et al. On classical and fuzzy Hough transform in colonoscopy image processing
KR101540402B1 (ko) 의료용 바늘의 삽입 경로의 생성 방법
Neubauer Virtual Endoscopy for preoperative planning and training of endonasal transsphenoidal pituitary surgery
DE102011085860B4 (de) Verfahren zur medizinischen Bildgebung eines Körperteils, insbesondere der Hand

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law

Ref document number: 112004000128

Country of ref document: DE

Date of ref document: 20060330

Kind code of ref document: P

8127 New person/name/address of the applicant

Owner name: SIEMENS MEDICAL SOLUTIONS USA, INC., MALVERN, PA.,

8120 Willingness to grant licences paragraph 23
8364 No opposition during term of opposition
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee