DE112004000128T5 - Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie - Google Patents
Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie Download PDFInfo
- Publication number
- DE112004000128T5 DE112004000128T5 DE112004000128T DE112004000128T DE112004000128T5 DE 112004000128 T5 DE112004000128 T5 DE 112004000128T5 DE 112004000128 T DE112004000128 T DE 112004000128T DE 112004000128 T DE112004000128 T DE 112004000128T DE 112004000128 T5 DE112004000128 T5 DE 112004000128T5
- Authority
- DE
- Germany
- Prior art keywords
- current
- endoscope
- path
- cluster
- centerline
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/457—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Z—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS, NOT OTHERWISE PROVIDED FOR
- G16Z99/00—Subject matter not provided for in other main groups of this subclass
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Processing Or Creating Images (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Endoscopes (AREA)
- Image Processing (AREA)
Abstract
Verfahren
zur automatischen lokalen Wegplanung für ein virtuelles Endoskop,
das die folgenden Schritte aufweist:
Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten;
Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum;
Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position;
Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt;
Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde;
Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg;
Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und
Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten;
Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum;
Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position;
Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt;
Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde;
Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg;
Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und
Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
Description
- Querverweis auf verwandte Anmeldungen
- Priorität
- Es wird hiermit besonderer Bezug genommen auf die parallele vorläufige US-Patentanmeldung Nr. 60/443,743, beim US-amerikanischen Patent- und Markenamt am 30. Januar 2003 im Namen des Erfinders Bernhard Geiger eingereicht, und mit dem Titel AUTOMATIC LOCAL PATH PLANNING FOR VIRTUAL COLONOSCOPY, deren Offenbarung hiermit unter Bezugnahme darauf hierin mit einbezogen und deren Priorität beansprucht wird.
- Es wird ebenfalls hiermit besonderer Bezug genommen auf die parallele vorläufige US-Patentanmeldung Nr. 60/470,579, beim US-amerikanischen Patent- und Markenamt am 14. Mai 2003 im Namen der Erfinder Bernhard Geiger und Jean-Daniel Boissonnat eingereicht, und mit dem Titel FAST CENTERLINE EXTRACTION, deren Offenbarung hiermit unter Bezugnahme hierin mit einbezogen und deren Priorität beansprucht wird.
- Die vorliegende Anmeldung betrifft im Allgemeinen Computervideo- und -bildgebungssysteme und im Besonderen ein System und Verfahren zur automatischen lokalen Wegplanung, wie sie für die virtuelle Endoskopie und virtuelle Kolonoskopie verwendet werden kann.
- Hintergrund der Erfindung
- Virtuelle Kolonoskopie (Kolonoskopie = Darmspiegelung; hierin mit VC abgekürzt) betrifft ein Diagnoseverfahren, das auf einer Computersimulation von standardmäßigen, minimal-invasiven Endoskopieverfahren unter Verwendung von patientenbezogenen dreidimensionalen (3D-) anatomischen Datensätzen basiert. Beispiele von derzeitigen endoskopischen Verfahren umfassen die Bronchoskopie, die Sinuskopie, die Endoskopie des oberen Magen-Darm-Bereichs, die Kolonoskopie (Darmspiegelung), die Zytoskopie (Blasenspiegelung), die Kardioskopie und die Urethroskopie (Harnröhren-Endoskopie). Die VC-Visualisierung von nicht-invasiven ermittelten patientenbezogenen anatomischen Strukturen vermeidet Risiken wie z.B. Gewebeschädigung (Perforation), Infektion, Blutung usw., die mit einer realen Endoskopie verbunden sind, und stellt dem, der die Endoskopie durchführt, wichtige Daten bereit, bevor er eine tatsächliche endoskopische Untersuchung durchführt. Ein derartiges Verständnis kann prozedurale Schwierigkeiten minimieren, die Patientensterblichkeit senken, das Training verbessern und für ein besseres Verständnis der therapeutischen Ergebnisse sorgen.
- Bei der virtuellen Kolonoskopie werden 3D-Bilder aus zweidimensionalen (2D-) Computertomografiedaten (CT) oder Kern-spintomografiedaten (MR) zum Beispiel durch Volumenrendering erzeugt.
- Diese 3D-Bilder werden erzeugt, um von einem tatsächlichen Endoskop wie zum Beispiel einem Glasfaseroptik-Endoskop kommende Bilder zu simulieren. Dies bedeutet, dass ein Blickpunkt des virtuellen Endoskops innerhalb eines Lumens eines Organs oder eines anderen menschlichen Gewebes und mit einem weiten Blickwinkel, typischerweise ungefähr 100° im Bogenmaß, ausgewählt werden muss. Dieser Blickpunkt muss sich entlang des inneren des Lumens bewegen, was bedeutet, dass eine 3D-Translation und eine 3D-Rotation angewendet werden müssen. Diese Parameter interaktiv zu steuern stellt eine Herausforderung dar.
- Eine üblicherweise verwendete Technik zum Navigieren eines Blickpunktes eines virtuellen Endoskops ist es, eine "Flugbahn" zuvor zu berechnen und den Blickpunkt des virtuellen Kolonoskops entlang dieser Bahn automatisch zu bewegen. Diese Technik erfordert jedoch einen Segmentierungs- und Bahnberechnungsschritt, der zeitaufwändig ist und fehlschlagen kann.
- Die frühere Patentanmeldung des Anmelders mit der Nummer 10/322,326, eingereicht am 18. Dezember 2002 mit dem Titel AUTOMATIC NAVIGATION FOR VIRTUAL ENDOSCOPY, und deren Offenbarung hiermit unter Bezugnahme hierin in dem Maß mit einbezogen ist, dass sie nicht inkompatibel mit der vorliegenden Erfindung ist, offenbart ein System und Verfahren zur Navigation innerhalb eines Darmdatensatzes, das den längsten Sichtstrahl zum Fortschreiten verwendet. Die vorgenannte frühere Patentanmeldung zeigt ein System und Verfahren zur automatischen Navigation eines Blickpunktes eines Endoskops bei der virtuellen Kolonoskopie, das bereitgestellt wird. Das System bestimmt automatisch eine Richtung und Orientierung eines virtuellen Endoskops. Dadurch braucht ein Benutzer nur einen Parameter zu steuern – Vorwärts- oder Rückwärtsgeschwindigkeit, und das Verfahren ermöglicht die unmittelbare interaktive Navigation innerhalb eines Organs ohne Vorverarbeitung, d.h. Segmentierung und Kurvenerzeugung. Das in der genannten Anmeldung gezeigte Verfahren umfasst die Schritte (a) Bestimmen eines Anfangsblickpunkts eines virtuellen Endoskops, wobei der Anfangsblickpunkt einen ersten Mittelpunkt und eine erste Richtung aufweist; (b) Bestimmen eines längsten Strahls vom Anfangsblickpunkt zum Lumen, wobei der längste Strahl eine erste Richtung des längsten Strahls aufweist; (c) Bestimmen einer zweiten Richtung zwischen der ersten Richtung des Anfangsblickpunkts und der ersten Richtung des längsten Strahls; (d) Drehen des Blickpunkts in die zweite Richtung und Bewegen des Anfangsblickpunkts um einen ersten vorbestimmten Abstand in einer ersten Richtung des Anfangsblickpunkts; (e) Berechnen eines zweiten Mittelpunkts des Blickpunkts; (f) Bewegen des Blickpunkts zum zweiten Mittelpunkt; und Wiederholen der Schritte (b) bis (f), bis der Blickpunkt ein beabsichtigtes Ziel erreicht.
- Kurze Zusammenfassung der Erfindung
- Es wird hierin gewürdigt, dass es nichtsdestotrotz unter gewissen Umständen möglich ist, beim Betrieb des Systems, das in der zuvor erwähnten früheren Patentanmeldung (Anwaltsaktenzeichen Nr. 2001P24461US) offenbart wurde, in einer scharfen Krümmung oder einer tiefen haustrenartigen Falte steckenzubleiben, wie es in der virtuellen Kolonoskopie vorkommen kann.
- Gemäß eines Aspektes der vorliegenden Erfindung wird ein Verfahren zum Navigieren eines Blickpunktes eines virtuellen Kolonoskops in einem Lumen eines Gewebes bereitgestellt. Gemäß eines Aspektes der vorliegenden Erfindung weist ein Verfahren zur automatischen Wegplanung die folgenden Schritte auf: Definieren eines Untervolumens um die aktuelle Endoskop-Position herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des gewachsenen Bereiches mit sechs Flächen eines Würfels, der den fraglichen Bereich umgrenzt; Berechnen von angenäherten Mittellinien von der Endoskop-Position zum Mittelpunkt jedes der Cluster; Vergleichen jedes Wegs mit dem aktuellen Weg des Endoskops; und Auffinden des besten Ergebnisses.
- Gemäß eines weiteren Aspektes der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop folgende Schritte auf: Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnen von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorangehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- Gemäß eines weiteren Aspektes der Erfindung umfasst der Schritt des Ableitens eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, das Ableiten des Datensatzes mittels Computertomografie (CT).
- Gemäß eines weiteren Aspektes der Erfindung umfasst der Schritt des Ableitens eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, das Ableiten des Datensatzes mittels Kernspintomografie (MR).
- Gemäß eines weiteren Aspektes der Erfindung beinhaltet ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop einen Schritt des Definierens des Würfels, der aus einer gegebenen Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
- Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Berechnens von angenäherten Mittellinienwegen: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
- Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Zentrierens und Glättens des Anfangsweges die Verwendung einer Gauss'schen Glättung.
- Gemäß eines weiteren Aspekts der Erfindung umfasst ein Schritt des Zentrierens und Glättens des Anfangsweges: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Kugelgröße, bis sie wiederum ein weiteres Mal mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
- Gemäß eines weiteren Aspekts der vorliegenden Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung bei den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position bis zum Mittelpunkt jedes Clusters, das in den vorhergehenden Schritten gebildet wurde, mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines Ergebnisses basierend auf dem Vergleich zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- Gemäß eines weiteren Aspekts der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
- Gemäß eines weiteren Aspektes der Erfindung weist ein System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop auf: Vorrichtung zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Vorrichtung zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Vorrichtung zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Vorrichtung zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vorrichtung zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Vorrichtung zum Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
- Gemäß eines weiteren Aspekts der Erfindung weist ein System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop auf: eine Vorrichtung zum Ableiten eines Darmdatensatzes, der durch ein Kolonoskopie-Protokoll ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Vorrichtung zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Vorrichtung zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Vorrichtung zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Vorrichtung zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vorrichtung zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Vorrichtung zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Vorrichtung zum Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- Gemäß eines weiteren Aspekts der Erfindung weist eine Vorrichtung zum Zentrieren und Glätten des Anfangswegs Vorrichtungen auf zum: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel, bis sie wiederum erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
- Gemäß eines weiteren Aspekts der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop die folgenden Schritte auf: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorherigen Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienwegs basierend auf dem Vergleich.
- Kurze Beschreibung verschiedener Ansichten der Figuren
- Diese und andere Aspekte der vorliegenden Erfindung werden leichter aus der nachfolgenden detaillierten Beschreibung in Verbindung mit den Figuren verständlich, in denen
-
1 bildlich eine typische Situation zeigt, die hilfreich für ein leichteres Verständnis der vorliegenden Erfindung ist, wobei die Fortbewegung eines Endoskops in einer scharfen Kurve stecken geblieben ist; -
2 u.3 Voxelwege zeigen, die sich auf Mittellinienextraktion beziehen, wie sie in Ausführungsformen der vorliegenden Erfindung verwendet werden kann; und -
4 einen Zentrierschritt zeigt, wie er in Ausführungsformen der vorliegenden Erfindung verwendet werden kann. - Detaillierte Beschreibung der Erfindung
- Es versteht sich, dass das Verfahren und System der vorliegenden Erfindung unter Verwendung eines programmierbaren digitalen Computers implementiert ist, und dass die hierin beschriebenen Abläufe sich auf solch eine Implementierung beziehen. Im Zusammenhang mit Bildverarbeitung sollen Begriffe wie "Luft", "Lumen", usw. in typischer Weise die entsprechende Bildverarbeitung bzw. – gebung diese Merkmale bezeichnen.
- Wie hierin zuvor erwähnt ist es unter gewissen Umständen möglich, beim Betrieb von Systemen des Standes der Technik zur virtuellen Kolonoskopie in einer scharfen Biegung oder einer tiefen haustrenartigen Falte, wie sie in der virtuellen Kolonoskopie vorkommen kann, stecken zu bleiben.
1 zeigt eine typische Situation, wo das Endoskop in einer scharfen Biegung stecken geblieben ist. - Gemäß einer Ausführungsform der vorliegenden Erfindung schneidet ein von der Endoskop-Position gewachsener Bereich den Würfel in drei Cluster, c0, c1 und c2. Das System berechnet neue Mittellinien vom Endoskop in Richtung des Mittelpunkts jedes Clusters und vergleicht jeden Weg mit dem Weg des Endoskops. Ein Ergebnis wird berechnet, das die Abweichung des Wegs mit dem Eingangweg widerspiegelt. Der Weg mit dem höchsten Ergebnis ist am Wahrscheinlichsten der, der sich in Richtung des Darms fortsetzt. Wenn lediglich ein Cluster existiert, entscheidet das System, dass eine Sperre existiert und dass es eine Sackgasse erreicht hat.
- Gemäß einer Ausführungsform der vorliegenden Erfindung umfasst ein Verfahren zur automatischen Wegplanung einen Schritt des Definierens eines Untervolumens um die aktuelle Endoskop-Position herum. Als nächstes wird ein Schritt des Durchführens eines Bereichwachstums innerhalb des Lumens durchgeführt, beginnend von der Endoskop-Position. Darauf folgen die Schritte des Berechnens und des Clusterns der Schnittfläche des gewachsenen Bereichs mit sechs Flächen des Würfels, der den fraglichen Bereich umgrenzt. Angenäherte Mittellinien von der Endoskop-Position zum Mittelpunkt jedes der Cluster werden anschließend berechnet. Jeder Weg wird mit dem aktuellen Weg des Endoskops verglichen und ein bestes Ergebnis wird ermittelt.
- Der Schritt des Berechnens von angenäherten Mittellinien kann auf verschiedene Art und Weise durchgeführt werden. Eine Vielzahl von Mittellinienalgorithmen verwenden Ausdünnung, morphologische Operatoren, Distanztransformationen, Wege minimaler Kosten (minimum cost paths), Dijkstras Algorithmus usw. Hintergrundmaterial kann in der Literatur gefunden werden, z.B.:
Zhou et al., "Three-Dimensional Skeleton and Centerline Generation Based on an Approximate Minimum Distance Field," The Visual Computer, 14:303-314 (1998); R. Truyen, T. Deschamps, L.D. Cohen, "Clinical evaluation of an automatic path tracker for virtual colonoscopy, Medical Image Computing and Computer-Assisted Intervention (MICCAI), Utrecht, Netherlands, Oktober 2001, Chen et al., "A Fast Algorithm to Generate Centerline for Virtual Colonoscopy," SPIE Conference, 12.–18. Feb. 2000; Richard Robb, "Virtual (Computed) Endoscopy: Development and Evaluation Using the Visible Human Datasets," 7.–8. Okt. 1996, www.mayo.edu; U.S.-Patent 6,514,082 mit dem Titel "System and method for performing a three-dimensional examination with collapse correction." - Ein weiterer Durchführungsweg der Darmsegmentierung umfasst die Durchführung einer Start- und Endpunktberechnung, und die Durchführung einer Anfangswegberechnung wie in der zuvor erwähnten vorläufigen Patentanmeldung Nr. 60/470,579 von Geiger et al. beschrieben. Darauf folgt das Zentrieren und Glätten des Wegs. Dies beginnt typischerweise mit einem Darmdatensatz, der unter Verwendung eines Kolonoskopie-Protokolls ermittelt wurde, das typischerweise eine Darmvorbereitung und Luftinsufflation (Einblasen von Luft) umfasst. Der Datensatz ist durch Anwenden eines Grenzwerts auf Luft und durch Durchführen einer verbundenen Komponentenanalyse segmentiert, wobei verbundene Komponenten, die nicht zum Darm gehören, verworfen werden, entweder automatisch oder durch manuelle Selektion. Beginnend von einem ersten Voxel, das zum Darm gehört, wird eine Abstandskennzeichnung der Voxel durchgeführt, typischerweise mit einer aufeinander folgenden Nummerierung, wobei das erste Voxel die Bezeichnung 0, sein Nachbar die Bezeichnung 1, dessen Nachbar die Bezeichnung 2 usw. erhält. Es wird eine Suche nach der höchsten Bezeichnung durchgeführt, wobei diese der Startpunkt p0 wird. Von p0 wird eine neue Abstandskennzeichnungsabbildung erzeugt durch Wiederholen des vorherigen Schritts des Abstands Kennzeichnen und Ermitteln eines weiteren Voxels mit der höchsten Zahl. Dies ist der Endpunkt p1.
- Von p1 werden Abstandskennzeichen verwendet, um einen Weg von verbundenen Voxeln zu erhalten, der bei p0 endet. Dies wird durchgeführt durch Suchen unter den Nachbarn von p2 nach einem Voxel mit einem kleineren Kennzeichen usw. bis p0 erreicht ist. Siehe
2a und3a , die den anfänglichen Voxelweg darstellen. Der sich ergebende Weg ist im Allgemeinen gezackt und wird unter Verwendung bekannter Techniken, z.B. durch Gauss'sches Glätten, geglättet. Ein Scheitelpunkt wird durch den gewichteten Durchschnitt seiner n Nachbarn ersetzt, und dieser Prozess wird in einer Anzahl von Iterationen wiederholt. Eine neue Scheitelpunktposition wird auf die Kollision mit der Darmwand durch Verifizieren getestet, ob die neue Koordinate noch innerhalb des segmentierten Darms liegt. Im Falle einer Kollision wird der Scheitel bei der letzten kollisionsfreien Position belassen. In gewissem Sinne kann dieser Prozess mit dem Weg einer dehnbaren flexiblen gewichtslosen Schnur verglichen werden, die durch den Darm geführt wird. Siehe2b und3b , die den ersten Glättungsschritt zeigen. Die2c und3c zeigen die finale Zentrierung. - Gemäß einer beschriebenen Ausführungsform wird dieser glatte Weg unter Verwendung von Kugeln mit wachsender Größe zentriert. Siehe
4 . Eine kleine Kugel wird an einem Scheitelpunkt entlang des Wegs zentriert. Die Scheitelpunkte auf dieser Kugel werden auf Kollisionen mit der Darmwand überprüft. Wenn die Scheitelpunkte kollidieren, wird eine auf den Kugellotrechten basierende Kraft definiert. Diese Kraft wird verwendet, um die Kugel von der Wand wegzubewegen. Die Kugel ist darauf eingeschränkt, sich in einer Ebene senkrecht zum Weg zu bewegen. Wenn die Kugel nicht mehr kollidiert, wird die Größe der Kugel erhöht und die Kollisionsberechnung und -verschiebung wird wiederholt, wobei der Prozess stoppt, wenn die Kugel nicht weiter verschoben und/oder vergrößert werden kann, ohne eine Kollision zu erzeugen. Der Mittelpunkt der Kugel wird nun als neue Position für den Scheitelpunkt genommen. Der Prozess wird für den nächsten Scheitelpunkt der Kurve oder des Wegs wiederholt. Siehe1c . Eine Beschreibung der Kollisionsdetektionstechnik und der Berechnung der Translationskraft ist in einer Veröffentlichung von Geiger, B. "Real-Time Collision Detetion and Response for Complex Environments", Computer Graphics International 2000, 19.–23. Juni 2000; Genf, Schweiz, angegeben. Die Kollisionserfassung und Kraftberechnung wird hierin jedoch direkt auf dem Voxel durchgeführt im Vergleich zu vielflächigen Rekonstruktionen, obwohl sie im Allgemeinen den in der zuvor erwähnten Veröffentlichung von Geiger erläuterten Prinzipien folgt. Danach, und nach dem Zentrieren, wird der Weg einer weiteren Gauss-schen Glättung mit Kollisionskontrolle unterzogen, dieses Mal unter Verwendung von weniger Internationen und einer kleineren Umgebung. -
4 zeigt das zusammengefasste Verfahren für den Zentrierungsschritt: eine Kugel wird am Scheitelpunktort eingesetzt (a); die Kugelgröße wird erhöht, bis sie mit der Wand kollidiert. Aus dieser Kollision wird eine Translationskraft berechnet (b). Die Translation wird angewandt, bis die Kugel nicht mehr kollidiert (c). Die Größe der Kugel wird wiederum erhöht und kollidiert nun mit der Wand. Eine Translation wird berechnet (d). Nach der Translation erreicht die Kugel eine Position, wo sie nicht weiter wachsen kann. Dies stellt die finale Scheitelpunktposition dar (e). - Ein bevorzugter Weg, der im Einklang mit den Prinzipien der vorliegenden Erfindung ist und der solche morphologischen Operationen nicht verwendet, ist in manchen Situationen schneller.
- Gemäß einer Ausführungsform der Erfindung weist ein Verfahren zur automatischen lokalen Wegplanung für die virtuelle Kolonoskopie folgende Schritte auf.
- Eine automatische Segmentierung wird durchgeführt, wobei die automatische Segmentierung einen Block von ausgewählter Würfelgröße (z.B. 128 × 128 × 128) ausschneidet, wobei die Voxel an der Endoskop-Position zentriert sind. Beginnend mit dem Voxel, das das Endoskop als Ausgangspunkt (seed) beinhaltet, wird ein Bereichswachstum innerhalb der Luft durchgeführt. Alle Voxel, die Luft enthalten und zum selben Lumen gehören, werden gekennzeichnet. Diese Luftsäule schneidet den Würfel an verschiedenen Orten. Diese Orte werden geclustert, wobei Voxels, die gemeinsame Flächen teilen, zum selben Cluster addiert werden, und wobei der Mittelpunkt jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten jedes Voxels in jedem Cluster berechnet wird. Die Mittellinien vom Mittelpunkt jedes Clusters zur Endoskop-Position werden berechnet. Jede Mittellinie wird mit dem Weg des Endoskops verglichen. Beginnend von der Endoskop-Position wird der absolute Wert der Differenz von Punkten auf einer Mittellinie zu dem entsprechenden Punkt auf dem Endoskopweg hinzuaddiert. Die Summe wird durch die Länge dividiert, um einen Ergebniswert zu bilden. Je höher dieser Ergebniswert, desto ferner ist die Mittellinie vom Eingangsweg. Der Weg mit dem höchsten Ergebniswert ist der Kandidat, dem man am besten folgt. Wenn lediglich ein Weg existiert, ist es am Wahrscheinlichsten der, auf dem das Endoskop hineinbewegt wurde, und das System weiß, dass es eine Sackgasse ist.
- Es versteht sich, dass die Erfindung, die in erster Linie im Zusammenhang mit der virtuellen Kolonoskopie beschrieben wurde, für die sie äußerst nützlich ist, nichtsdestotrotz auch auf verschiedene andere Untersuchungen von der Art der virtuellen Endoskopie anwendbar ist. Während die Erfindung mittels beispielhafter Ausführungsformen beschrieben wurde, versteht es sich ebenfalls für den betreffenden Fachmann, dass verschiedene Änderungen und Modifikationen durchgeführt werden können, ohne vom Wesen der Erfindung abzuweichen, das durch die nachfolgenden Ansprüche definiert ist.
- Zusammenfassung der Offenbarung
- Ein Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop umfasst die Schritte: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
Claims (36)
- Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- Verfahren nach Anspruch 1, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes mittels Computertomografie (CT) umfasst.
- Verfahren nach Anspruch 1, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes durch Kernspintomografie (MR) umfasst.
- Verfahren nach Anspruch 1, das einen Schritt des Definierens des Würfels umfasst, der aus einer gegebenen Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
- Verfahren nach Anspruch 1, das die folgenden Schritte umfasst: Bereichswachstum innerhalb der "Luft" innerhalb des Lumens; und Kennzeichnen aller Voxel in der Luft innerhalb des Lumens.
- Verfahren nach Anspruch 1, das die folgenden Schritte aufweist: Bilden eines Clusters an jedem Ort, wobei die Luft innerhalb des Lumens eine entsprechende Fläche des Würfels schneidet; Aufnehmen von Voxeln in jedem Cluster, die eine dem Cluster entsprechende Fläche gemeinsam haben.
- Verfahren nach Anspruch 1, das folgenden Schritt aufweist: Berechnen des Mittelpunkts jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten von Voxeln jedes der Cluster.
- Verfahren nach Anspruch 7, das den folgenden Schritt aufweist: Berechnen von entsprechenden Mittellinienwegen von dem Mittelpunkt jedes Clusters zur aktuellen Endoskop-Position.
- Verfahren nach Anspruch 1, wobei der Schritt des Zuordnens eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege umfasst: Bilden der Summe, beginnend von der aktuellen Endoskop-Position, von absoluten Werten der Differenz von Punkten auf einem entsprechenden Mittellinienweg zu einem entsprechenden Punkt auf dem aktuellen Weg, der durch das Endoskop dargestellt wird; Teilen der Summe durch die Länge des entsprechenden Mittellinienwegs, um einen Quotientenwert zu bilden; und Auswählen eines Wegs, der den höchsten Quotientenwert aufweist.
- 0. Verfahren nach Anspruch 9, das den Schritt des Erfassens aufweist, wenn lediglich ein Mittellinienweg existiert, und des Kennzeichnens eines solchen Ergebnisses als Sackgasse.
- Verfahren nach Anspruch 1, wobei der Schritt des Berechnens von angenäherten Mittellinienwegen umfasst: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
- Verfahren nach Anspruch 11, wobei der Schritt des Berechnens eines Anfangsweges umfasst: Speichern von Voxeln sukzessiv vom Endpunkt mit abnehmenden Kennzeichnungszahlen, bis zum Erreichen des Anfangspunktes.
- Verfahren nach Anspruch 11, wobei der Schritt des Zentrierens und Glättens des Anfangswegs die Verwendung einer Gauss'schen Glättung umfasst.
- Verfahren nach Anspruch 13, wobei der Schritt des Zentrierens und Glättens des Anfangspfads umfasst: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel, bis sie erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr ohne Kollision wachsen kann; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
- Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses auf jeden der Mittellinienwege; und Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- Verfahren nach Anspruch 15, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes durch Computertomografie (CT) umfasst.
- Verfahren nach Anspruch 15, wobei der Schritt des Ableitens eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, das Ableiten des Datensatzes mittels Kernspintomografie (MR) umfasst.
- Verfahren zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das die folgenden Schritte aufweist: Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
- System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleich jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eines optimalen Mittellinienweges basierend auf dem Vergleich.
- System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Mitteln zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Mitteln zum Auswählen eines Mittellinienweges basierend auf dem Ergebnis.
- System nach Anspruch 20, wobei die Mittel zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, Mittel zum Ableiten des Datensatzes durch Computertomografie (CT) umfasst.
- System nach Anspruch 20, wobei die Mittel zum Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, Mittel zum Ableiten des Datensatzes durch Kernspintomografie (MR) umfasst.
- System nach Anspruch 20, das Mittel zum Definieren des Würfels umfasst, der durch eine gegebene Anzahl von Voxeln besteht, die um das aktuelle Endoskop herum zentriert sind.
- System nach Anspruch 20, das Mittel umfasst zum: Bereichswachstum innerhalb von "Luft" innerhalb des Lumens; und Kennzeichnen aller Voxel in der Luft innerhalb des Lumens.
- System nach Anspruch 20, das Mittel umfasst zum: Bilden eines Clusters an jedem Ort, wobei die Luft innerhalb des Lumens eine entsprechende Fläche des Würfels schneidet; Aufnehmen von Voxeln in jedem Cluster, die eine dem Cluster entsprechende Fläche gemeinsam haben.
- System nach Anspruch 25, das Mittel umfasst zum: Berechnen des Mittelpunkts jedes Clusters mittels Durchschnittsbildung der Voxelkoordinaten der Voxel jedes der Cluster.
- System nach Anspruch 26, das Mittel umfasst zum: Berechnen der entsprechenden Mittellinienwege von dem Mittelpunkt jedes Clusters zur aktuellen Endoskop-Position.
- System nach Anspruch 20, wobei die Mittel zum Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege Mittel umfasst zum: Bilden der Summe, beginnend von der aktuellen Endoskop-Position, der absoluten Werte der Differenz von Punkten auf einem entsprechenden Mittellinienweg zu einem entsprechenden Punkt auf dem aktuellen Weg, der durch das Endoskop dargestellt wird; Teilen der Summe durch die Länge des entsprechenden Mittellinienwegs, um einen Quotientenwert zu bilden; und Auswählen eines Wegs mit dem höchsten Quotientenwert.
- System nach Anspruch 28, das Mittel zum Erfassen umfasst, wenn lediglich ein Mittellinienweg existiert, und zum Anzeigen eines derartigen Ergebnisses als Sackgasse.
- System nach Anspruch 20, wobei die Mittel zum Berechnen der angenäherten Mittellinienwege Mittel umfassen zum: Berechnen eines Anfangsweges; und Zentrieren und Glätten des Anfangsweges.
- System nach Anspruch 30, wobei die Mittel zum Berechnen eines Anfangswegs Mittel umfassen zum: Speichern von Voxeln sukzessiv vom Endpunkt mit abnehmenden Kennzeichnungsnummern bis zum Erreichen des Anfangspunkts.
- System nach Anspruch 30, wobei die Mittel zum Zentrieren und Glätten des Anfangspfads Mittel zur Verwendung von Gauss'scher Glättung umfassen.
- System nach Anspruch 30, wobei die Mittel zum Zentrieren und Glätten des Anfangswegs Mittel umfassen zum: Einsetzen einer Kugel an einem Scheitelpunktort; Erhöhen der Größe der Kugelgröße, bis sie mit einer Wand des Lumens kollidiert; Berechnen einer Translationskraft aus der Kollision; Anwenden der Translationskraft, bis die Kugel nicht mehr kollidiert; Erhöhen der Größe der Kugel bis sie erneut mit der Wand kollidiert; Berechnen einer weiteren Translationskraft; Anwenden der weiteren Translationskraft, bis die Kugel nicht mehr kollidiert; Wiederholen der vorangehenden drei Schritte, bis die Kugel eine finale Position erreicht, wo sie nicht mehr wachsen kann ohne zu kollidieren; Kennzeichnen der finalen Position als finale Scheitelpunktposition.
- System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop, das Mittel aufweist zum: Ableiten eines Darmdatensatzes, der mittels eines Kolonoskopie-Protokolls ermittelt wurde, zur Verwendung in den nachfolgenden Schritten; Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Zentrum jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde, mittels: Berechnen eines Anfangsweges; Zentrieren und Glätten des Anfangsweges; Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; Zuordnen eines auf dem Vergleich basierenden Ergebnisses zu jedem der Mittellinienwege; und Auswählen eines Mittellinienwegs basierend auf dem Weg.
- System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das im vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eines optimalen Mittellinienwegs basierend auf dem Vergleich.
- System zur automatischen lokalen Wegplanung für ein virtuelles Endoskop mit: Mitteln zum Definieren eines Untervolumens um eine aktuelle Endoskop-Position in einem Lumen herum; Mitteln zum Durchführen eines Bereichswachstums innerhalb des Lumens, beginnend von der aktuellen Endoskop-Position; Mitteln zum Berechnen und Anhäufen zu einem Cluster der Schnittfläche des Bereichs mit den Flächen eines Würfels, der das Untervolumen umgrenzt; Mitteln zum Berechnen von angenäherten Mittellinienwegen von der aktuellen Endoskop-Position zum Mittelpunkt jedes Clusters, das in dem vorhergehenden Schritt gebildet wurde; Mitteln zum Vergleichen jedes der Mittellinienwege mit einem aktuellen, durch das Endoskop dargestellten Weg; und Mitteln zum Auswählen eine optimalen Mittellinienwegs basierend auf dem Vergleich.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US44373403P | 2003-01-30 | 2003-01-30 | |
US60/443,734 | 2003-01-30 | ||
US10/753,703 US7081088B2 (en) | 2003-01-30 | 2004-01-08 | Method and apparatus for automatic local path planning for virtual colonoscopy |
US10/753,703 | 2004-01-08 | ||
PCT/US2004/000595 WO2004070656A2 (en) | 2003-01-30 | 2004-01-09 | Method and apparatus for automatic local path planning for virtual colonoscopy |
Publications (2)
Publication Number | Publication Date |
---|---|
DE112004000128T5 true DE112004000128T5 (de) | 2006-03-30 |
DE112004000128B4 DE112004000128B4 (de) | 2007-10-04 |
Family
ID=32853341
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE112004000128T Expired - Fee Related DE112004000128B4 (de) | 2003-01-30 | 2004-01-09 | Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie |
Country Status (4)
Country | Link |
---|---|
US (1) | US7081088B2 (de) |
JP (1) | JP2007509649A (de) |
DE (1) | DE112004000128B4 (de) |
WO (1) | WO2004070656A2 (de) |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7457444B2 (en) * | 2003-05-14 | 2008-11-25 | Siemens Medical Solutions Usa, Inc. | Method and apparatus for fast automatic centerline extraction for virtual endoscopy |
US6996205B2 (en) * | 2003-06-24 | 2006-02-07 | Ge Medical Ssytems Global Technology Company, Llc | Methods and apparatus to facilitate review of CT colonography exams |
DE102004027709B4 (de) * | 2004-06-07 | 2006-08-10 | Siemens Ag | Verfahren der virtuellen Endoskopie zur medizinischen 3D-Bilddarstellung und -verarbeitung, Computertomografiegerät, Arbeitsstation und Computerprogrammprodukt |
ATE484811T1 (de) * | 2004-06-23 | 2010-10-15 | Koninkl Philips Electronics Nv | Virtuelle endoskopie |
EP1856642A2 (de) * | 2005-02-23 | 2007-11-21 | Koninklijke Philips Electronics N.V. | Verfahren zur vorhersage des verlaufs eines katheters |
US7889905B2 (en) | 2005-05-23 | 2011-02-15 | The Penn State Research Foundation | Fast 3D-2D image registration method with application to continuously guided endoscopy |
US7756563B2 (en) * | 2005-05-23 | 2010-07-13 | The Penn State Research Foundation | Guidance method based on 3D-2D pose estimation and 3D-CT registration with application to live bronchoscopy |
US7379062B2 (en) * | 2005-08-01 | 2008-05-27 | Barco Nv | Method for determining a path along a biological object with a lumen |
EP1913554A2 (de) * | 2005-08-01 | 2008-04-23 | Koninklijke Philips Electronics N.V. | Verfahren und vorrichtung zum anpassen erster und zweiter bilddaten eines objekts |
EP1924197B1 (de) * | 2005-08-24 | 2017-10-11 | Philips Electronics LTD | System für flexible navigierte endoskopie |
US20070046661A1 (en) * | 2005-08-31 | 2007-03-01 | Siemens Medical Solutions Usa, Inc. | Three or four-dimensional medical imaging navigation methods and systems |
US8112292B2 (en) | 2006-04-21 | 2012-02-07 | Medtronic Navigation, Inc. | Method and apparatus for optimizing a therapy |
US8041141B2 (en) * | 2006-06-30 | 2011-10-18 | The University Of Louisville Research Foundation, Inc. | Method and software for shape representation with curve skeletons |
US8014561B2 (en) * | 2006-09-07 | 2011-09-06 | University Of Louisville Research Foundation, Inc. | Virtual fly over of complex tubular anatomical structures |
US8660635B2 (en) | 2006-09-29 | 2014-02-25 | Medtronic, Inc. | Method and apparatus for optimizing a computer assisted surgical procedure |
US7853058B2 (en) * | 2006-11-22 | 2010-12-14 | Toshiba Medical Visualization Systems Europe, Limited | Determining a viewpoint for navigating a virtual camera through a biological object with a lumen |
US20090156895A1 (en) * | 2007-01-31 | 2009-06-18 | The Penn State Research Foundation | Precise endoscopic planning and visualization |
US9037215B2 (en) | 2007-01-31 | 2015-05-19 | The Penn State Research Foundation | Methods and apparatus for 3D route planning through hollow organs |
US8672836B2 (en) * | 2007-01-31 | 2014-03-18 | The Penn State Research Foundation | Method and apparatus for continuous guidance of endoscopy |
US8514218B2 (en) | 2007-08-14 | 2013-08-20 | Siemens Aktiengesellschaft | Image-based path planning for automated virtual colonoscopy navigation |
US20100260393A1 (en) * | 2007-12-07 | 2010-10-14 | Koninklijke Philips Electronics N.V. | Navigation guide |
US9002076B2 (en) * | 2008-04-15 | 2015-04-07 | Medtronic, Inc. | Method and apparatus for optimal trajectory planning |
US8335552B2 (en) * | 2009-03-20 | 2012-12-18 | Medtronic, Inc. | Method and apparatus for instrument placement |
US8817014B2 (en) * | 2009-11-23 | 2014-08-26 | Siemens Medical Solutions Usa, Inc. | Image display of a tubular structure |
DE102010047278A1 (de) | 2010-10-01 | 2012-04-05 | Thermosensorik Gmbh | Verfahren zur automatischen Ermittlung der Mittellinie eines freiförmigen Objektes |
US8983232B2 (en) | 2012-03-29 | 2015-03-17 | Dcg Systems, Inc. | Method for evaluating the centerline of an arbitrarily shaped object |
US9786097B2 (en) * | 2012-06-22 | 2017-10-10 | Matterport, Inc. | Multi-modal method for interacting with 3D models |
US10163261B2 (en) | 2014-03-19 | 2018-12-25 | Matterport, Inc. | Selecting two-dimensional imagery data for display within a three-dimensional model |
US10139985B2 (en) | 2012-06-22 | 2018-11-27 | Matterport, Inc. | Defining, displaying and interacting with tags in a three-dimensional model |
US10373719B2 (en) * | 2014-09-10 | 2019-08-06 | Intuitive Surgical Operations, Inc. | Systems and methods for pre-operative modeling |
US9536309B2 (en) * | 2014-11-27 | 2017-01-03 | Synaptive Medical (Barbados) Inc. | Method, system and apparatus for displaying surgical engagement paths |
US10426424B2 (en) | 2017-11-21 | 2019-10-01 | General Electric Company | System and method for generating and performing imaging protocol simulations |
US11413097B2 (en) * | 2019-12-31 | 2022-08-16 | Biosense Webster (Israel) Ltd. | Three dimensional mapping system for cranial surgical pathways with semi-targets and method |
US11771505B2 (en) | 2019-12-31 | 2023-10-03 | Biosense Webster (Israel) Ltd. | Three dimensional mapping system for cranial surgical pathways and method |
US20230277245A1 (en) * | 2020-08-06 | 2023-09-07 | Canon U.S.A., Inc. | Methods for operating a medical continuum robot |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5611025A (en) * | 1994-11-23 | 1997-03-11 | General Electric Company | Virtual internal cavity inspection system |
US7194117B2 (en) * | 1999-06-29 | 2007-03-20 | The Research Foundation Of State University Of New York | System and method for performing a three-dimensional virtual examination of objects, such as internal organs |
US6928314B1 (en) * | 1998-01-23 | 2005-08-09 | Mayo Foundation For Medical Education And Research | System for two-dimensional and three-dimensional imaging of tubular structures in the human body |
US6690816B2 (en) * | 2000-04-07 | 2004-02-10 | The University Of North Carolina At Chapel Hill | Systems and methods for tubular object processing |
US7457444B2 (en) * | 2003-05-14 | 2008-11-25 | Siemens Medical Solutions Usa, Inc. | Method and apparatus for fast automatic centerline extraction for virtual endoscopy |
US7822461B2 (en) * | 2003-07-11 | 2010-10-26 | Siemens Medical Solutions Usa, Inc. | System and method for endoscopic path planning |
-
2004
- 2004-01-08 US US10/753,703 patent/US7081088B2/en not_active Expired - Fee Related
- 2004-01-09 JP JP2006536525A patent/JP2007509649A/ja not_active Withdrawn
- 2004-01-09 WO PCT/US2004/000595 patent/WO2004070656A2/en active Application Filing
- 2004-01-09 DE DE112004000128T patent/DE112004000128B4/de not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20040209234A1 (en) | 2004-10-21 |
WO2004070656A2 (en) | 2004-08-19 |
WO2004070656A3 (en) | 2005-06-02 |
JP2007509649A (ja) | 2007-04-19 |
DE112004000128B4 (de) | 2007-10-04 |
US7081088B2 (en) | 2006-07-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE112004000128B4 (de) | Verfahren und Vorrichtung für die automatische lokale Wegplanung bei der virtuellen Kolonoskopie | |
DE112004000722T5 (de) | Verfahren und Vorrichtung zur schnellen automatischen Mittellinien-Extraktion für die virtuelle Endoskopie | |
DE19543410B4 (de) | Verfahren zum Simulieren von Endoskopie und virtuelles Untersuchungssystem zum Betrachten innerer Hohlräume | |
DE112004000352B4 (de) | System und Verfahren zum Durchführen einer virtuellen Endoskopie | |
DE102006055173B4 (de) | Verfahren, medizinisches diagnostisches bildgebendes System sowie computerlesbares Speichermedium für die halbautomatische Segmentierungstechnik für röhrenförmige Objekte mit niedrigem Kontrast | |
DE112004001177T5 (de) | System und Verfahren zur Planung eines endoskopischen Pfades | |
DE69927001T2 (de) | Verfahren, system und vorrichtung zur verarbeitung eines eine röhrenartige struktur darstellenden bildes und zur bestimmung eines pfades durch die genannte struktur | |
EP2115702B1 (de) | Verfahren und vorrichtung zur 3d-routenplannung durch hohlorgane | |
DE102007045835B4 (de) | Verfahren und Vorrichtung zum Darstellen eines virtuellen Objekts in einer realen Umgebung | |
DE102006043910B4 (de) | Ergebnisfilter und Verfahren zur Selektion der Ergebnisdaten einer Applikation zur automatischen Mustererkennung | |
US7773786B2 (en) | Method and apparatus for three-dimensional interactive tools for semi-automatic segmentation and editing of image objects | |
DE60319288T2 (de) | Verfahren und vorrichtung zum identifizieren von pathologien in gehirnbildern | |
DE102004043676B4 (de) | Verfahren zur Visualisierung von Plaqueablagerungen aus 3D-Bilddatensätzen von Gefäßstrukturen | |
JP2007509649A6 (ja) | 仮想結腸鏡検査法のためのローカルパス自動プランニング方法及び装置 | |
DE10048029A1 (de) | Verfahren zur Berechnung einer zwei Abbildungen verbindenden Transformation | |
DE112004000381T5 (de) | System und Verfahren zur Bereitstellung einer automatischen 3D-Läsionssegmentierung und von Läsionsmessungen | |
JP2000182078A (ja) | 三次元(3d)イメ―ジングシステム及び三次元(3d)イメ―ジにおける境界を決定する方法 | |
DE102005009271A1 (de) | System und Verfahren zur Durchführung einer virtuellen Endoskopie in einer Verzweigungsstruktur | |
JP2005514086A (ja) | 仮想内視鏡検査のための自動ナビゲーション | |
DE60306511T2 (de) | Medizinisches darstellungssystem und bildverarbeitungsverfahren zur visualisierung von gefalteten anatomischen bereichen von objektoberflächen | |
DE102006039921A1 (de) | System und Verfahren zum automatischen Atemwegevaluieren für Multi-Schnitt Computertomographie (MSCT) Bilddaten unter Verwendung eines Atemweglumendurchmessers, einer Atemwegwanddicke und eines Bronchien-Arterien-Verhältnisses | |
Nagy et al. | On classical and fuzzy Hough transform in colonoscopy image processing | |
KR101540402B1 (ko) | 의료용 바늘의 삽입 경로의 생성 방법 | |
Neubauer | Virtual Endoscopy for preoperative planning and training of endonasal transsphenoidal pituitary surgery | |
DE102011085860B4 (de) | Verfahren zur medizinischen Bildgebung eines Körperteils, insbesondere der Hand |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OP8 | Request for examination as to paragraph 44 patent law |
Ref document number: 112004000128 Country of ref document: DE Date of ref document: 20060330 Kind code of ref document: P |
|
8127 | New person/name/address of the applicant |
Owner name: SIEMENS MEDICAL SOLUTIONS USA, INC., MALVERN, PA., |
|
8120 | Willingness to grant licences paragraph 23 | ||
8364 | No opposition during term of opposition | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |