DE102005007629A1

DE102005007629A1 - A method of automatically navigating a video capsule along a hollow duct of a patient forming a tubular channel

Info

Publication number: DE102005007629A1
Application number: DE102005007629A
Authority: DE
Inventors: Johannes Dr. Reinschke
Original assignee: Siemens AG
Current assignee: Siemens AG
Priority date: 2005-02-18
Filing date: 2005-02-18
Publication date: 2006-08-31
Also published as: WO2006087341A2

Abstract

Bei einem Verfahren zur automatischen Navigation einer Videokapsel (4) entlang eines einen schlauchförmigen Kanal (30) bildenden Hohlorgans (2) eines Patienten, insbesondere des Gastrointestinaltraktes, wobei die Videokapsel (4) eine Kamera (32) und eine Lichtquelle (20) aufweist, wird die Videokapsel (4) in das Hohlorgan (2) eingebracht. Mit der Kamera (32) wird ein Bild (40, 62) des Inneren des Hohlorgans (2) aufgenommen, wobei im Bild (40, 62) ein dunkler oder unscharfer Zielbildbereich (46) von einem hellen oder scharfen Randbildbereich (42) ringförmig umgrenzt ist. Der Zielbildbereich (46) wird im Bild (40, 62) ermittelt und die Videokapsel (4) in Richtung des Zielbildbereichs (46) bewegt.In a method for automatically navigating a video capsule (4) along a hollow organ (2) of a patient, in particular the gastrointestinal tract, forming a tubular channel (30), the video capsule (4) having a camera (32) and a light source (20), the video capsule (4) is introduced into the hollow organ (2). With the camera (32) an image (40, 62) of the interior of the hollow organ (2) is recorded, wherein in the image (40, 62) a dark or blurred target image area (46) of a bright or sharp edge image area (42) annularly bounded is. The target image area (46) is detected in the image (40, 62) and the video capsule (4) is moved in the direction of the target image area (46).

Description

Die Erfindung betrifft ein Verfahren zur automatischen Navigation einer Videokapsel entlang eines einen schlauchförmigen Kanal bildenden Hohlorgans eines Patienten, insbesondere des Gastrointestinaltraktes.The The invention relates to a method for automatic navigation of a Video capsule along a hollow duct forming a tubular channel a patient, especially the gastrointestinal tract.

Zur nichtinvasiven bzw. minimalinvasiven Untersuchung oder Behandlung von Hohlorganen in Menschen oder Tieren als Patienten sind verschiedene Verfahren bekannt. Unter anderem werden hierzu Endoskope benutzt, welche in den Patienten durch eine Körperöffnung oder einen kleinen Einschnitt eingebracht werden. Die Eindringtiefe eines Endoskops in den Patientenkörper ist jedoch auf Grund der Drahtgebundenheit bzw. dessen mechanischer Eigenschaften begrenzt. So ist die den Endoskopiekopf tragende mechanische Lanze nur bedingt biegbar und weist nur eine begrenzte Länge auf. Insbesondere der menschliche Dünndarm weist eine Gesamtlänge von 4–6 m auf und ist vielfach verschlungen. Einzelne Darmschlingen sind lediglich wenige Zentimeter lang. Deshalb gelingt es bisher z.B. nicht, mit einem herkömmlichen Endoskop den Dünndarm eines Menschen in seiner gesamten Länge nichtinvasiv zu durchfahren.to non-invasive or minimally invasive examination or treatment of hollow organs in humans or animals as patients are different Known method. Among other things, endoscopes are used for this, which enters the patient through a body orifice or a small incision be introduced. The penetration depth of an endoscope into the patient's body is However, due to the wirebound or its mechanical Properties limited. So is the endoscopy head bearing mechanical Lance only partially bendable and has only a limited length. In particular, the human small intestine has an overall length from 4-6 m and is devoured many times. Single intestinal loops are only a few inches long. Therefore, it has been possible to date e.g. not, with a conventional one Endoscope the small intestine to pass non-invasively through a person's entire length.

Aus "Fujinon Medical Newsletter, Fujinon GmbH, Willich (Deutschland), November 2003" ist eine Vorrichtung und ein Verfahren zur sogenannten Doppel-Ballon-Endoskopie bekannt, mit dem auch der Dünndarm vollständig endoskopisch erreichbar ist. Nachteilig ist hierbei die weiterhin drahtgebundene Vorgehensweise, d.h. die Benutzung eines relativ langen, mehrmals im Darmkanal umzulenkenden Endoskops. Trotz des neuen Verfahrens ist der Dünndarm nur etwa bis zur Hälfte, d.h. ca. 2–3 m jeweils von der oralen als auch rektalen Seite aus er reichbar. Ein vollständiges Durchfahren des Dünndarms in einer einzigen Richtung ist weiterhin unmöglich. Aufgrund der langen Behandlungsdauer von ca. 90 Minuten und des hohen Risikos von Komplikationen ist das Verfahren nicht besonders patientenschonend.From "Fujinon Medical Newsletter, Fujinon GmbH, Willich (Germany), November 2003 "is a device and a method for so-called double-balloon endoscopy known with that too the small intestine Completely can be reached endoscopically. The disadvantage here is the continue Wired procedure, i. the use of a relatively long, several times in the intestine to be deflected endoscope. Despite the new procedure is the small intestine only about half way, i.e. about 2-3 in each case from the oral as well as the rectal side reachable from it. One complete Passing through the small intestine in a single direction is still impossible. Because of the long Treatment duration of about 90 minutes and the high risk of complications the procedure is not particularly patient friendly.

In der DE 101 42 253 C1 wird ein Endoroboter vorgeschlagen, der in Form einer kleinen Videokapsel ausgeführt ist, welche mit Hilfe magnetischer Felder drahtlos durch den Körper, insbesondere ein Hohlorgan eines Patienten navigiert werden kann. Die Navigation bzw. Steuerung der Videokapsel erfolgt manuell mittels eines Krafteingabegerätes, z.B. einer sogenannten 6D-Maus. Eine derartige Videokapsel weist in der Regel einen runden Querschnitt auf, also z.B. eine elliptische, kreisförmige oder rotationssymmetrische Außenform.In the DE 101 42 253 C1 an endo robot is proposed, which is designed in the form of a small video capsule, which can be navigated by means of magnetic fields wirelessly through the body, in particular a hollow organ of a patient. The navigation or control of the video capsule is done manually by means of a force input device, such as a so-called 6D mouse. Such a video capsule usually has a round cross-section, that is, for example, an elliptical, circular or rotationally symmetrical outer shape.

Verschiedene Hohlorgane bilden einen schlauchförmigen Kanal, in dem die Kapsel im Wesentlichen lediglich in oder entgegen der Mittellinie des Hohlorgans bewegt werden kann. Lediglich zu Inspektions- oder Behandlungszwecken (Biopsie, Videoaufnahme) wird die Kapsel dann z.B. zur Innenwand des Hohlorgans hin gedreht. Entsprechende Einbauten, wie eine Biopsiezange, ein Clip, ein Medikamentenreservoir oder ein physiologischer Sensor, sind in der Videokapsel je nach Bedarf vorgesehen oder befinden sich in einer separaten Kapsel, die der Videokapsel folgt oder ihr vorangeht.Various Hollow organs form a tubular channel in which the capsule essentially only in or against the midline of the hollow organ can be moved. Only for inspection or treatment purposes (Biopsy, video recording) then the capsule is e.g. to the inner wall of the hollow organ turned back. Corresponding installations, such as a biopsy forceps, a clip, a drug reservoir or a physiological sensor provided in the video capsule as needed or are located in a separate capsule that follows or precedes the video capsule.

Wünschenswert wäre, dass eine Untersuchung oder Therapie eines Dünndarms mit Hilfe des Endoroboters nicht länger als 20 min dauert und ein gesamter Dünndarm von 6 m Länge in einer Richtung in höchstens 10 min durchfahrbar ist. Die erforderliche Kapselgeschwindigkeit betrüge dann etwa 10 mm/s. Ein Bediener navigiert hierbei die Videokapsel im Patienten „auf Sicht", d.h. er nutzt das von der Videokapsel gelieferte (Echtzeit-) Bildsignal, welches die in der Kapsel befindliche Kamera aufnimmt und zu einem Monitor außerhalb des Patienten überträgt. Der Bediener müsste dann aufgrund der Darmver schlingung etwa einmal pro Sekunde lenkend eingreifen, um die Kapsel durch den Dünndarm zu navigieren.Desirable that would be an examination or therapy of a small intestine with the help of the Endoroboters no longer lasts 20 min and a whole small intestine of 6 m in length Direction in at most 10 minutes is durchfahrbar. The required capsule speed cheating then about 10 mm / s. An operator navigates the video capsule in Patients " View ", i.e. he uses the (real-time) image signal provided by the video capsule, which picks up the camera in the capsule and to a Monitor outside of the patient transfers. Of the Operator would have then steering it about once a second due to the bowing intervene to navigate the capsule through the small intestine.

Nachteilig bei einer derartigen Vorgehensweise ist, dass die Steuerung der Kapsel über die gesamte Untersuchungsdauer die volle Konzentration und Aufmerksamkeit des Bedieners erfordert. Ist der Bediener gleichzeitig der untersuchende Arzt, kann er sich nicht ausreichend auf die medizinische Auswertung der Bilder konzentrieren, da er mit der Navigation beschäftigt ist. Abhilfe könnte schaffen, dass der Arzt alleine die Befundung der Bilder ausführt und für die Navigation eine zweite Person als Bediener eingesetzt wird. Dies bedeutet aber erhöhten Personal- und damit Kostenaufwand sowie Kommunikationsaufwand. Dieser bedingt wiederum die Gefahr von Missverständnissen zwischen Arzt und Bediener. Generell erfordert die Navigation hohen Zeit- und Konzentrationsaufwand.adversely In such an approach is that the control of Capsule over the entire duration of the examination the full concentration and attention required by the operator. Is the operator at the same time the examiner Doctor, he can not adequately on the medical evaluation focus on the images because he is busy with navigation. Remedy could be to make sure that the doctor alone carries out the diagnosis of the images and for the navigation a second person is used as an operator. But that means increased Personnel and thus costs and communication costs. This in turn, the risk of misunderstandings between doctor and Operator. Generally, the navigation requires a lot of time and concentration.

Aufgabe der vorliegenden Erfindung ist es, ein verbessertes Verfahren zur Navigation einer Videokapsel in einem einen schlauchförmigen Kanal bildenden Hohlorgan eines Patienten anzugeben.task The present invention is an improved method for Navigation of a video capsule forming a tubular channel Indicate the hollow organ of a patient.

Die Aufgabe wird gelöst durch ein Verfahren zur automatischen Navigation einer Videokapsel entlang eines, einen schlauchförmigen Kanal bildenden Hohlorgans eines Patienten, insbesondere des Gastrointestinaltraktes, wobei die Videokapsel eine Kamera und eine Lichtquelle aufweist, bei dem:

a) die Videokapsel in das Hohlorgan eingebracht wird,
b) mit der Kamera ein Bild des Inneren des Hohlorgans aufgenommen wird, wobei im Bild ein dunkler oder unscharfer Zielbildbereich von einem hellen oder scharfen Randbildbereich ringförmig umgrenzt ist,
c) der Zielbildbereich im Bild ermittelt und die Videokapsel in Richtung des Zielbildbereichs bewegt wird.

The object is achieved by a method for automatic navigation of a video capsule along a tubular duct forming a hollow organ of a patient, in particular of the gastrointestinal tract, wherein the video capsule comprises a camera and a light source, in which:

a) the video capsule is introduced into the hollow organ,
b) a picture of the interior of the hollow organ is taken with the camera, a dark or blurred target image area being annularly delimited in the image by a bright or sharp edge image area,
c) determines the target image area in the image and the video capsule is moved in the direction of the target image area.

Da das Hohlorgan einen schlauchförmigen Kanal bildet, existieren für die Bewegung der Videokapsel nur zwei Hauptbewe gungsrichtungen, nämlich entlang des schlauchförmigen Kanals, d.h. dessen Mittellängslinie folgend, sowohl in die eine als auch in die entgegengesetzte Richtung. Andere Bewegungen, z.B. in Radialrichtung zum schlauchförmigen Kanal sind entweder von untergeordneter Bedeutung, da sie nur z.B. an Stellen eines auffälligen Befundes durchzuführen sind, oder wegen fehlenden Raumes unmöglich. Derartige Bewegungen der Kapsel sollen am besten unter Kontrolle des Arztes weiterhin von Hand ausgeführt werden. Sie dienen z.B. der Ausrichtung der Videokapsel bzw. der Kamera, einer Biopsieeinrichtung oder einer Einrichtung zur gezielten Medikamentenabgabe z.B. auf eine bestimmte Stelle der Innenwandung des Hohlorgans.There the hollow organ a tubular channel forms exist for the movement of the video capsule only two main movement directions, namely along the tubular Channels, i. its middle longitudinal line following, both in one direction and in the opposite direction. Other movements, e.g. in the radial direction to the tubular channel are either of minor importance since they are only e.g. at Make a conspicuous finding perform are impossible, or impossible due to lack of space. Such movements The capsule should best continue under the control of the doctor executed by hand become. They serve e.g. the orientation of the video capsule or the Camera, a biopsy device or a device for targeted Drug delivery e.g. to a certain point of the inner wall of the hollow organ.

Die Erfindung geht von der Annahme aus, dass eine entsprechende Kapsel eine Vorzugsrichtung besitzt, d.h. im Allgemeinen länglich, also z.B. zylinderförmig mit halbkugelförmigen Kappen, ausgeführt ist. Ohne äußere Krafteinwirkung richtet sich die Kapsel deshalb im Darmkanal aufgrund der Eigenspannung des schlauchförmigen Hohlorgans immer in dessen Längserstreckungsrichtung aus. Eine an einer derartigen Kapsel vorgesehene Videokamera wird in ihrer Blickrichtung etwa in die Vorzugsrichtung der Kapsel blicken. Somit ist auch die Videokamera etwa bzw. teilweise in Kanalrichtung ausgerichtet.The Invention is based on the assumption that a corresponding capsule has a preferred direction, i. generally oblong, ie e.g. cylindrically with hemispherical Caps, executed is. Without external force Therefore, the capsule is aimed in the intestinal tract due to the residual stress of the tubular Hollow organ always in its longitudinal direction out. A provided on such a capsule video camera is look in their line of sight about in the preferred direction of the capsule. Thus, the video camera is about or partially in the channel direction aligned.

Zu Beginn des Verfahrens wird deshalb die Videokapsel in das Hohlorgan eingebracht, wobei sich die Kapsel und hiermit die Videokamera im Wesentlichen in Kanalrichtung, also entlang der Mittellinie des schlauchförmigen Kanals ausrichtet. Die Kamera blickt somit in Sollbewegungsrichtung der Videokapsel.To The beginning of the process is therefore the video capsule in the hollow organ introduced, with the capsule and hereby the video camera in the Essentially in channel direction, so along the center line of the tubular Aligns channel. The camera thus looks in the direction of target movement the video capsule.

Vom Inneren des Hohlorgans wird dann mit der Kamera ein Bild aufgenommen, wobei die an der Videokapsel angebrachte Lichtquelle das Innere des Hohlorgans ausleuchtet. Die Erfindung macht sich hierbei folgende Erkenntnis zu Nutze: Aufgrund der geringen Dimensionen einer derartigen Videokapsel (z.B. 2–3 cm Länge, ca. 1 cm Durchmesser) können lediglich verhält nismäßig einfache Kameras, schwache Lichtquellen und einfache Kameraoptiken zum Einsatz kommen. Aufgrund der nicht allzu starken Lichtquelle wird das Innere des Hohlorgans nur in unmittelbarer Umgebung der Videokapsel, nämlich einige Millimeter, ausgeleuchtet. Aufgrund der einfachen Kameraoptik, welche naturgemäß eine sehr kurze Brennweite von wenigen mm aufweist, erscheint außerdem nur der unmittelbare Umgebungsbereich von einigen Millimetern der Kapsel im Kamerabild scharf.from Inside of the hollow organ is then taken with the camera an image, wherein the light source attached to the video capsule is the interior of the hollow organ illuminates. The invention hereby follows Use of knowledge: Due to the small dimensions of such Video capsule (e.g., 2-3 cm length, about 1 cm in diameter) can only behaves moderately simple Cameras, weak light sources and simple camera optics are used come. Due to the not too strong light source, the interior the hollow organ only in the immediate vicinity of the video capsule, namely some Millimeters, illuminated. Due to the simple camera optics, which naturally a very short focal length of a few mm, also appears only the immediate surrounding area of a few millimeters of the capsule in the camera picture sharp.

Da die Wand des Hohlorgans durch die einliegende Videokapsel aufgeweitet ist und sich die Wand vor allem im Bereich vor und hinter der Kapsel bzw. Videokamera in Kanallängsrichtung nicht formschlüssig an die Kapsel anlegt, entsteht insbesondere vor der Videokamera ein gewisser begrenzter Hohl- bzw. Luftraum. Dieser wird ausgeleuchtet und die Innenwandung des Hohlraums von der Videokamera abgebildet. Der von der Videokamera abgebildete Abschnitt des Kanals erscheint im aufgenommenen Bild also zwangsläufig als ein heller oder scharfer Randbildbereich, welcher ringförmig einen dunklen oder unscharfen Zielbildbereich umgrenzt.There the wall of the hollow organ widened by the enclosed video capsule is and the wall especially in the area in front of and behind the capsule or Video camera in channel longitudinal direction not form-fitting attached to the capsule, arises in particular in front of the video camera a certain limited hollow or air space. This is illuminated and the inner wall of the cavity imaged by the video camera. The portion of the channel displayed by the video camera appears in the recorded image, therefore, inevitably as a bright or sharp Edge image area, which is annular a dark or blurred destination image area bounded.

Die zumindest annähernd runde ringförmige Umgrenzung des Zielbildbereiches durch den Randbildbereich entsteht durch die Elastizität der Wand des Hohlorgans, deren meist rundliche Grundform und die meist runde Querschnittsform der Videokapsel.The at least approximately round annular border of the target image area through the edge image area is created by the elasticity the wall of the hollow organ, its usually round basic form and the mostly round cross-sectional shape of the video capsule.

Der helle oder scharfe Randbildbereich ist hierbei ein Abbild der sich in unmittelbarer Nähe der Videokapsel befindlichen, scharf abgebildeten und gut ausgeleuchteten Wand des Hohlorgans, wobei der Zielbildbereich den weiter entfernten, also im Dunklen bzw. ins Unscharfe entschwindenden, Verlauf des schlauchförmigen Kanals in etwas größerer Entfernung zur Videokapsel darstellt.Of the bright or sharp edge image area here is an image of itself close the video capsule located, sharply and well-lit Wall of the hollow organ, with the target image area the farther away, ie in the dark or fuzzy disappearing course of the tubular Canal at a slightly greater distance represents the video capsule.

Dieser dunkle oder unscharfe Zielbildbereich ist jedoch der Ort im Hohlorgan, zu welchem sich die Videokapsel bewegen muss, wenn sie im schlauchförmigen Kanal entlang dessen Längsrichtung bewegt werden soll. Im Verfahren wird deshalb der Zielbildbereich im Bild ermittelt und die Videokapsel in Richtung des Zielbildbereichs bewegt.This dark or blurred target image area is however the place in the hollow organ, to which the video capsule has to move when in the tubular channel along its longitudinal direction to be moved. In the method, therefore, the target image area becomes in the image and the video capsule towards the target image area emotional.

Die Schritte b) und c) des Verfahrens, also das Aufnehmen eines Bildes mit der Kamera, die Ermittlung des Zielbildbereiches im Bild und die Bewegung der Videokapsel werden z.B. so oft wiederholt, bis die Videokapsel einen Ort im Hohlorgan erreicht hat, an dem der Arzt ein auffälliges Videobild entdeckt, dass er näher inspizieren möchte, oder die Videokapsel ihre Aufgabe im Hohlorgan erfüllt hat oder das Ende des Hohlorgans erreicht hat.The Steps b) and c) of the method, ie taking a picture with the camera, the determination of the target image area in the image and the movement of the video capsule is e.g. repeated many times until the video capsule has reached a place in the hollow organ at which the Doctor a flashy Video image discovers that he is closer would like to inspect or the video capsule has fulfilled its task in the hollow organ or has reached the end of the hollow organ.

Im Handel ist derzeit eine Videokapsel der Firma „Given Imaging" erhältlich, welche zwei Bilder pro Sekunde aus dem Inneren des Patientenkörpers liefert. Diese Kapsel ist nicht aktiv lenkbar bzw. bewegbar, sondern wird durch die natürliche Magen- und Darmtätigkeit in ca. acht Stunden durch den Gastrointestinaltrakt von der Speiseröhre bis zum Dickdarm eines Patienten befördert. Begrenzend für die Zahl der Bilder ist hierbei die in der Kapsel speicherbare Energie zur Erzeugung von Lichtblitzen für die Bildaufnahme.A video capsule from the company Given Imaging is currently available on the market, delivering two images per second from within the patient's body. This capsule is not actively steerable or movable, but is transmitted through the natural gastric system. and intestinal activity in about eight hours through the gastrointestinal tract from the esophagus to the colon of a patient. The limiting factor for the number of images is the energy which can be stored in the capsule for generating flashes of light for image acquisition.

Bei einer geplanten Betriebsdauer einer der vorliegenden Erfindung zugrunde liegenden navigierbaren Kapsel von ca. einer Stunden können daher bei der gleichen gespeicherten Energiemenge ca. sechzehn Lichtblitze und damit Bilder pro Sekunde von der Kapsel geliefert werden.at a planned period of operation of one of the present invention lying navigable capsule of about one hour can therefore at the same amount of stored energy about sixteen flashes of light and deliver images per second from the capsule.

Bei sechzehn Bildern pro Sekunde könnte die Kapselrichtung auf Grund der quasi filmisch ablaufenden Bildfolge zum Zielbildbereich hin praktisch ständig korrigiert werden. Durch das erfindungsgemäße Verfahren wird also die Richtung, in welche sich das schlauchförmige Hohlorgan fortsetzt und in welche Richtung demzufolge der Endoroboter bzw. die Videokapsel zu lenken bzw. zu bewegen ist, praktisch ständig automatisch erkannt.at sixteen frames per second could be the Capsule direction due to the quasi cinematic sequence of images be corrected to the target image area almost constantly. By the inventive method So is the direction in which the tubular hollow organ continues in which direction and therefore the Endoroboter or the To steer or move the video capsule is practically always automatic recognized.

Durch die automatische Detektion des unscharfen bzw. dunklen Zielbildbereichs lässt sich also die Sollbewegungsrichtung der Videokapsel im kapselfesten Koordinatensystem, d.h. von der Kapsel aus gesehen, bestimmen. Erfolgt die Kapselsteuerung relativ zur Kapsel, also in deren Koordinatensystem, sind keine weiteren Schritte notwendig, und die Kapsel kann in Sollbewegungsrichtung verfahren werden.By the automatic detection of the blurred or dark target image area let yourself ie the desired direction of movement of the video capsule in the capsule-fixed coordinate system, i.e. from the capsule. Is the capsule control relative to the capsule, so in their coordinate system, are none further steps necessary, and the capsule can in Sollbewegungsrichtung be moved.

Erfolgt die Steuerung der Kapsel jedoch in einem ortsfesten Koordinatensystem, so muss noch die aktuelle Lage und Orientierung der Kapsel in diesem Koordinatensystem ermittelt werden. Dies trifft zu, wenn die Kapsel drahtlos durch von außen angelegte Magnetfelder und magnetische Gradientenfelder bewegt wird, die durch ein Spulensystem erzeugt werden, das relativ zum Patienten weitgehend starr angeordnet ist. Einzig kann nämlich z.B. der Patient hierbei auf einer Liege liegend entlang seiner Längsachse relativ zum Spulensystem verschoben werden.He follows however, the control of the capsule in a fixed coordinate system, so still has the current position and orientation of the capsule in this Coordinate system can be determined. This is true when the capsule wireless through from the outside applied magnetic fields and magnetic gradient fields is moved, which are generated by a coil system relative to the patient is arranged largely rigid. For one thing alone, e.g. the patient here lying on a couch along its longitudinal axis relative to the coil system be moved.

Die Lage- und Orientierungsbestimmung der Kapsel erfolgt durch direkte Messung der 3D-Koordinaten eines ausgewählten Kapselpunktes, z.B. deren Schwerpunktes oder geometrischen Mittelpunktes, sowie durch direkte Messung einer Kapselvorzugsrichtung, z.B. der Richtung der Kapsellängsachse. Die Messung muss nicht zeitlich kontinuierlich, sondern kann zeitlich diskret erfolgen. Ein regelungstechnischer Beobachter wird vorzugsweise eingesetzt zur Messwertfilterung, zur Bestimmung der vollständigen Kapselorientierung sowie zur Generierung von Lage- und Orientierungsinformationen zu Zeitpunkten, an denen nicht gemessen wird.The Position and orientation of the capsule is determined by direct Measurement of the 3D coordinates of a selected capsule point, e.g. their focus or geometric center, as well as by direct measurement of a Capsule preferred direction, e.g. the direction of the capsule longitudinal axis. The Measurement does not have to be continuous in time but can be timed done discreetly. A control-technical observer is preferred used for measured value filtering, to determine the complete capsule orientation and for the generation of position and orientation information Times at which measurements are not taken.

Mit den so ermittelten Koordinaten bzw. Koordinatentransformationen können dann entsprechende Magnetfelder erzeugt und so Kräfte und Drehmomente auf die Kapsel derart ausgeübt werden, um sie in Richtung des weiteren Verlaufs des schlauchförmigen Kanals vorwärts zu bewegen oder auch in diese Richtung auszurichten.With the coordinates or coordinate transformations thus determined can then generates corresponding magnetic fields and so forces and torques on the capsule so exercised be in the direction of the further course of the tubular channel forward to move or to align in this direction.

Durch das Verfahren ist die Kapsel mit ihrer Längsachse bzw. mit ihrer Kamera stets in Mittellängsrichtung des schlauchförmigen Kanals, im Falle des Darms also in Darmkanalrichtung, ausrichtbar. Da dies an jedem Ort des Hohlorgans sichergestellt ist, kann die Kapsel das Hohlorgan vollautomatisch durchfahren. Ein Bediener der Kapsel muss in die Navigation lediglich händisch eingreifen, wenn er Abweichungen von dieser Bewegungsform wünscht. Dies kann z.B. an einer auffälligen Stelle im Hohlorgan sein, um die Kapsel anzuhalten, oder wenn der Bediener die Kapsel schräg zum Hohlorgan stellen will, um für die Kamera einen anderen Betrachtungswinkel zu erhalten.By the procedure is the capsule with its longitudinal axis or with her camera always in the middle longitudinal direction of the tubular Channel, in the case of the intestine so in Darmkanalrichtung, alignable. There This is ensured at each location of the hollow organ, the capsule drive through the hollow organ fully automatically. An operator of the capsule need only manually intervene in the navigation, if he Deviations from this form of movement wishes. This can e.g. at a eye-catching Place in the hollow organ to stop the capsule, or if the operator the capsule at an angle to the hollow organ wants to ask for the camera to get a different viewing angle.

Der Arzt bzw. Bediener ist entlastet, der Arzt kann sich auf die Befundung des von der Kapsel gewonnen Bild- oder sonstigen Datenmaterials konzentrieren. Übernimmt der Arzt die verbleibende Navigationsarbeit, ist ein zusätzlicher Bediener für die Kapselbewegung nicht erforderlich. Automatische Kapselbewegungen wie „fahre zurück zum Magen" oder „durchfahre den gesamten Dünndarm" sind durch das erfindungsgemäße Verfahren realisierbar.Of the Doctor or operator is relieved, the doctor can look at the findings the image or other data material obtained from the capsule focus. Takes over the doctor the remaining navigation work, is an additional Operator for the capsule movement is not required. Automatic capsule movements like "drive back to the stomach "or" go through the whole small intestine "are by the method according to the invention realizable.

Da der Zielbildbereich im Bild oft ein größerer Bereich ist, der noch keine genaue Richtung vorgibt, in die die Kapsel zu navigieren ist, ist es nötig, innerhalb des Zielbildbereichs einen Punkt als exakten Zielpunkt für die Kapselsollbewegungsrichtung auszumachen. Es werden dazu drei Verfahrensvarianten vorgeschlagen.There The target image area in the image is often a larger area that still does not specify the exact direction in which the capsule is to navigate, it is necessary, within the target image area, a point as the exact destination for the Make out capsule movement direction. There are proposed three variants of this process.

Die Videokapsel kann in Schritt c) des erfindungsgemäßen Verfahrens in Richtung des Zentrums des Zielbildbereichs bewegt werden. Dies ist vor allem dann sinnvoll, wenn die Grenze zwischen Zielbildbereich und Randbildbereich klar erkennbar bzw. ermittelbar ist und so leicht ein z.B. geometrisches Zentrum des Zielbildbereichs bestimmbar ist. Hierbei geht die Erfindung von der Erkenntnis aus, dass das Innere des Hohlorgans eine im Querschnitt rundliche Gestalt hat.The Video capsule in step c) of the method according to the invention in the direction of the center of the target image area. This is above all makes sense if the border between the target image area and the border area is clearly recognizable and so easily a e.g. geometric Center of the target image area is determined. This is the invention from the knowledge that the interior of the hollow organ is a roundish in cross-section Has shape.

In Schritt c) kann die Videokapsel in Richtung der dunkelsten Stelle des Zielbildbereichs bewegt werden. Die Ermittlung der dunkelsten Stelle des Zielbildbereichs ist technisch sehr einfach durch Helligkeitsmessung im Bild möglich. Hierbei nutzt die Erfindung die Erkenntnis, dass der am weitesten von der Kamera entfernte, aber von dieser noch sichtbare Ort, wegen der mit zunehmender Entfernung schnell abnehmenden Ausleuchtung des Hohlorgans die dunkelste Stelle im Bild bzw. Zielbildbereich bildet. Dies ist jedoch auch die Erstreckungsrichtung des Hohlorgans und zeigt daher dessen sich von der Kapsel weg erstreckenden weiteren Verlauf an, was wiederum der Kapselsollbewegungsrichtung entspricht.In step c), the video capsule can be moved in the direction of the darkest point of the target image area. The determination of the darkest point of the target image area is technically very simple by brightness measurement in the image possible. In this case, the invention uses the knowledge that the furthest away from the camera, but still visible from this place, because of the distance with increasing distance decreasing illumination of the hollow organ forms the darkest point in the image or target image area. However, this is also the direction of extension of the hollow organ and therefore indicates its further course extending away from the capsule, which in turn corresponds to the direction of the capsule rolling movement.

Können z.B. wegen undeutlicher Helligkeitsunterschiede oder nur unklar erkennbarer Grenze zwischen Ziel- und Randbildbereich diese schwer getrennt bzw. bestimmt werden, kann in Schritt c) die Videokapsel in Richtung der unschärfsten Stelle im Zielbildbereich bewegt werden. Dazu können z.B. Methoden der Bildverarbeitung, wie Kantendetektion, Mittelwertfensterung o.ä. eingesetzt werden, um die unschärfste Stelle im Bild zu ermitteln. Die Erfindung geht hier von der Erkenntnis aus, dass, entsprechend der o.g. dunkelsten Stelle, der im Hohlorgan am weitesten von der Kamera entfernt liegende sichtbare Bereich wegen der geringen Brennweite der Kameraoptik am unschärfsten im Bild abgebildet ist und somit die Kapselsollbewegungsrichtung bzw. den weiteren Verlauf des schlauchförmigen Kanals angibt.Can e.g. because of indistinct differences in brightness or only vaguely recognizable Boundary between target and marginal image area these severely separated can be determined in step c), the video capsule in the direction the most blurred Position in the target image area to be moved. For this, e.g. Methods of image processing, like edge detection, mean windowing or similar Be used to the blurry spot to determine in the picture. The invention is based on the knowledge from that, according to the o.g. darkest spot in the hollow organ furthest away from the camera visible area because of the small focal length of the camera optics blur in the Image is shown and thus the Kapselsollbewegungsrichtung or indicates the further course of the tubular channel.

Die drei eben genannten Verfahrensvarianten können alternativ oder auch in Kombination miteinander benutzt werden, um einen exakten Zielort für die Kapselbewegung im Hohlorgan zu bestimmen.The three aforementioned process variants can alternatively or in Combination used together to be an exact destination for the capsule movement to determine in the hollow organ.

Die in einem oder mehreren Verfahrensschritten b) aufgenommenen Bilder können gespeichert werden, und in Schritt c) zur Ermittlung des Zielbildbereichs im zuletzt aufgenommenen Bild auch gespeicherte Bilder ausgewertet werden. Hierbei nutzt die Erfindung die Erkenntnis, dass sowohl die Lage der Videokapsel im Hohlorgan als auch die Lage des Zielbildbereichs im Bild von einem zum nächsten aufgenommenen Bild nicht springen kann. Voraussetzung hierfür ist eine ausreichend hohe Bildfrequenz. Durch die Auswertung einer Bildfolge anstelle eines einzelnen Bildes kann die Sollbewegung der Kapsel stetig ermittelt werden, selbst wenn in einem einzelnen Bild die Bestimmung einer Kapselsollbewegungsrichtung unmöglich oder unsicher ist. Der gesamte Bewegungsverlauf der Videokapsel wird hierdurch gleichmäßiger und die Bildauswertung bzw. die Ermittlung des Zielbildbereichs im Bild einfacher und genauer. Entsprechende Filterungsmethoden, sogenannte 3D-Bildfilter, sind hinreichend bekannt.The in one or more steps b) taken pictures can and in step c) for determining the target image area in the last recorded image also saved images evaluated become. Here, the invention uses the knowledge that both the location of the video capsule in the hollow organ as well as the location of the target image area in the picture from one to the next recorded image can not jump. Prerequisite for this is a sufficiently high frame rate. By evaluating an image sequence instead a single image, the desired movement of the capsule can be determined steadily even if in a single image the determination of a Capsule rolling direction impossible or uncertain. The entire motion of the video capsule becomes thus more even and the image analysis or determination of the target image area in the image easier and more accurate. Corresponding filtering methods, so-called 3D image filters are well known.

Die Videokapsel ist wie bereits erwähnt, im Allgemeinen länglich ausgebildet und Kamera und Lichtquelle an deren vorderem Ende angeordnet. In Schritt c) kann die Videokapsel mit ihrem vorderen Ende zum Zielbereich hin ausgerichtet und bewegt werden. Hiermit folgt nicht nur der Schwerpunkt der Kapsel der Mittellinie des Hohlorgans, sondern die Kapsel ist auch stets tangential zur aktuellen Längserstreckungsrichtung des Hohlorgans ausgerichtet. Hierdurch sind die geringsten Reibungswiderstände zwischen Kapsel und Hohlorgan und somit die geringsten Bewegungskräfte an der Kapsel nötig. Damit lässt sich die Energieaufnahme des die Kapsel antreibenden externen Spulensystems so gering wie möglich halten.The Video capsule is, as already mentioned, generally oblong formed and arranged camera and light source at the front end. In step c), the video capsule can with its front end to the target area be aligned and moved. This not only follows the Focus of the capsule of the midline of the hollow organ, but the capsule is always tangential to the current direction of longitudinal extension of the Hollow organ aligned. As a result, the lowest frictional resistance between Capsule and hollow organ and thus the lowest movement forces at the Capsule needed. Leave it the energy consumption of the capsule driving external coil system as low as possible hold.

Wird die Videokapsel stets mit ihrem vorderen, Kamera und Lichtquelle tragenden Ende voraus bewegt, entsteht quasi eine Folge von „Fahrtbildern" in Vorwärtsrichtung durch den schlauchförmigen Kanal des Hohlorgans. Ein Bediener, welcher die – weitestgehend automatische – Kapselbewegung überwacht, erhält stets ein Bild in Fahrtrichtung der Kapsel und sieht somit, „wohin" die Kapsel fährt.Becomes the video capsule always with its front, camera and light source Moving end bearing front, almost creates a sequence of "driving images" in the forward direction through the tubular Canal of the hollow organ. An operator who monitors the largely automatic capsule movement, receives always a picture in the direction of travel of the capsule and thus sees "where" the capsule drives.

Beim erstmaligen Durchfahren eines Hohlorgans muss die Videokamera nach vorn, also in Vorwärtsbewegungsrichtung der Kapsel ausgerichtet sein, sonst kann sie nicht „auf Sicht" navigiert werden. Während einer Kapselfahrt in einer Vorwärtsrichtung durch das Hohlorgan kann die Trajektorie der Kapselfahrt gespeichert werden. Die mittels automatischer Sichterkennung oder händisch gefahrene Trajektorie wird also abgespeichert. Die Videokapsel kann dann in Rückwärtsrichtung entlang der gespeicherten Trajektorie zurückgefahren werden. Dies kann automatisch erfolgen, also ohne weiteres Zutun eines Benutzers. Zum Zurückfahren muss die Kapsel also im Hohlorgan nicht gewendet werden, denn bei bekannter Trajektorie ist eine Sicht nach vorne nicht mehr nötig.At the first time driving through a hollow organ, the video camera after in the front, ie in the direction of forward movement otherwise it can not be navigated "on sight". While a capsule ride in a forward direction through the hollow organ, the trajectory of the capsule ride can be stored become. The by means of automatic visual recognition or manually driven trajectory will be saved. The video capsule can then be in the reverse direction be moved back along the stored trajectory. This can done automatically, so without further action by a user. To return So the capsule must not be turned in the hollow organ, because with known Trajectory is a view forward no longer necessary.

Natürlich kann die Kapsel vor einer Rückfahrt auch gewendet und dann ohne weiteren händischen Eingriff entlang der Trajektorie der Hinfahrt zurückgefahren werden. Die Kapsel durchfährt dann mit ihrem vorderen Ende voraus in Gegenrichtung das Hohlorgan. So entsteht ein neues Bild der, von der Kapsel bereits durchfahrenen Wegstrecke, aber in entgegengesetzter Richtung, also mit einem anderen Blickwinkel. Bei der Erstdurchfahrt nicht entdeckte Befunde können so z.B. bei der Rückfahrt der Kapsel erkannt werden.Of course you can the capsule before a return trip too turned and then without further manual intervention along the Trajectory of the trip back become. The capsule passes through then with its front end ahead in the opposite direction the hollow organ. This creates a new image of the, already passed by the capsule Distance, but in the opposite direction, so with a different angle. Findings not discovered at the time of first passage may e.g. on the way back the capsule can be recognized.

Typischerweise hat die Kamera einen sehr großen Öffnungswinkel von z.B. 140°. Die Mittenachse der Kapsel muss nicht mit der zentralen Blickrichtung der Kamera zusammenfallen, d.h. die zentrale Blickrichtung der Kamera kann zur Längsachse der Kapsel verkippt sein. So ist bei schräg zur Längsachse und damit auch zur Mittelachse des Hohlorgans blickender Kamera ein Rundumblick der Kamera durch Kapselrotation um deren Längsachse möglich. Hierzu werden mehrere Bilder der Kamera in verschiedenen Rotationspositionen der Kapsel aufgenommen. So entsteht quasi ein Panoramabild bzw. ein „Rundum-Scan" der Kapselumgebung durch Aneinanderfügen der Einzelbilder.Typically, the camera has a very large opening angle of eg 140 °. The central axis of the capsule need not coincide with the central viewing direction of the camera, ie the central viewing direction of the camera can be tilted to the longitudinal axis of the capsule. Thus, a panoramic view of the camera by capsule rotation about its longitudinal axis is possible at oblique to the longitudinal axis and thus also to the central axis of the hollow organ looking camera. For this purpose, several images of the camera are recorded in different rotational positions of the capsule. This creates a kind of panoramic picture or an "all-round scan" of the capsule environment through Merging the frames.

Für eine weitere Beschreibung der Erfindung wird auf die Ausführungsbeispiele der Zeichnungen verwiesen.For another Description of the invention is directed to the embodiments of the drawings.

Es zeigen, jeweils in einer Prinzipskizze,It show, each in a schematic diagram,

1 eine in einem geraden Stück eines Dünndarms einliegende Kapsel in einer Schnittdarstellung, 1 a capsule inserted in a straight piece of a small intestine in a sectional view,

2 das von der Kapselkamera in 1 aufgenommene Bild des Dünndarminneren, 2 that from the capsule camera in 1 recorded image of the small intestine interior,

3 die Kapsel aus 1 vor einer Darmschlinge des Dünndarms in einer Darstellung gemäß 1, 3 the capsule off 1 in front of a bowel loop of the small intestine in a representation according to 1 .

4 das von der Kapselkamera in 3 aufgenommene Bild des Dünndarminneren. 4 that from the capsule camera in 3 taken picture of the small intestine interior.

Stellvertretend für den gesamten Gastrointestinaltrakt zeigt 1 einen Ausschnitt aus einem Dünndarm 2 eines nicht dargestellten Patienten. Der Dünndarm 2 ist zu untersuchen und aus ihm gegebenenfalls eine Gewebeprobe zu entnehmen. Zu diesem Zweck ist in den Dünndarm 2 eine Kapsel 4 eingebracht. Die Kapsel 4 besitzt bezüglich ihrer Kapsellängsachse 6 eine im Querschnitt runde Außenform. Die Kapsel 4 ist z.B. aus der DE 101 42 253 C1 bekannt. Dort ist auch beschrieben, wie die Kapsel 4 mit Hilfe eines Magnetsystems bzw. Spulensystems berührungslos im Inneren des Patienten bewegbar und rotierbar ist. Ein derartiges Spulensystem aus vierzehn elektrischen Einzelspulen ist aus der JP 2004-255258 bekannt. In der vorliegenden Anmeldung soll hierauf nicht näher eingegangen werden.Representing the entire gastrointestinal tract shows 1 a section of a small intestine 2 a patient, not shown. The small intestine 2 should be examined and, if necessary, a tissue sample taken from it. For this purpose is in the small intestine 2 a capsule 4 brought in. The capsule 4 possesses with respect to its capsule longitudinal axis 6 a cross-sectionally round outer shape. The capsule 4 is for example from the DE 101 42 253 C1 known. There is also described how the capsule 4 is movable and rotatable without contact inside the patient with the aid of a magnet system or coil system. Such a coil system of fourteen individual electrical coils is known from JP 2004-255258. In the present application will not be discussed in detail.

Die Kapsel 4 enthält in ihrem Innenraum verschiedene Einbauten: Ein Permanentmagnet 8 mit einem senkrecht zur Kapsellängsachse 6 gerichteten Dipolmoment 9 steht in Wechselwirkung mit dem nicht dargestellten, außerhalb des Patienten erzeugten Magnetfeld. Anstelle des Permanentmagneten könnte hier auch ein anderes magnetisches oder magnetisierbares Element vorgesehen sein. Über das Magnetfeld können Kräfte und Drehmomente am Permanentmagneten 8 verursacht werden und so mit diesem die gesamte Kapsel 4 im Dünndarm 2 gedreht bzw. verschoben werden. Hierzu ist das magnetische Dipolmoment der Permanentmagneten 8 quer zur Kapsellängsachse 6 ausgerichtet.The capsule 4 contains in its interior various installations: A permanent magnet 8th with a perpendicular to the capsule longitudinal axis 6 directed dipole moment 9 interacts with the unillustrated magnetic field generated outside the patient. Instead of the permanent magnet, another magnetic or magnetizable element could also be provided here. The magnetic field allows forces and torques on the permanent magnet 8th be caused and so with this the entire capsule 4 in the small intestine 2 be rotated or moved. This is the magnetic dipole moment of the permanent magnet 8th transverse to the capsule longitudinal axis 6 aligned.

Am bezüglich der Kapsellängsachse 6 vorderen Ende 10 der Kapsel 4 sind eine Linse 12 und ein Bildaufnahmesensor 14, z.B. in Form eines CCD-Chips, angeordnet. Diese bilden zusammen eine einfache Kamera 32 mit fest eingestellter Brennweite und Belichtungseinstellung. Zur Ausleuchtung der Kapselumgebung sind am vorderen Ende 10 vier die Linse 12 kranzförmig umringende, weiße Leuchtdioden 20 angeordnet, von denen stellvertretend in 1 nur eine dargestellt ist. Es können auch alternativ oder zusätzlich andere Lichtquellen, z.B. für sichtbares Licht oder Infrarot vorgesehen sein. Die Leuchtdioden 20 leuchten in Richtung des Pfeils 28 den vor der Kapsel 4 liegenden Bereich 24 des Dünndarms 2 in dessen Umfangsrichtung möglichst gleichmäßig aus.Am with respect to the capsule longitudinal axis 6 front end 10 the capsule 4 are a lens 12 and an image pickup sensor 14 , eg in the form of a CCD chip. These together form a simple camera 32 with fixed focal length and exposure setting. To illuminate the capsule environment are at the front end 10 four the lens 12 ring-shaped, white LEDs 20 arranged, of which representative in 1 only one is shown. It may also be alternatively or additionally provided other light sources, eg for visible light or infrared. The light-emitting diodes 20 shine in the direction of the arrow 28 the front of the capsule 4 lying area 24 of the small intestine 2 in the circumferential direction as evenly as possible.

Aufgrund der eher geringen Leuchtkraft der Leuchtdioden 20 nimmt die Lichtintensität, mit der die Innenwand 26 des Dünndarms 2 beleuchtet wird, in Richtung des Pfeils 28 schnell ab.Due to the rather low luminosity of the LEDs 20 takes the light intensity with which the inner wall 26 of the small intestine 2 is illuminated, in the direction of the arrow 28 fast.

Der zur Aufnahme eines digitalen Bildes dienende Bildaufnahmesensor 14 ist an einen HF-Transceiver 16 mit Antenne 18 angeschlossen. Hiermit werden die Bilddaten der aufgenommenen Bilder zu einer nicht dargestellten Empfangsstation außerhalb des nicht dargestellten Patienten übertragen und von einem nicht dargestellten Arzt betrachtet und befundet.The image pickup sensor used to capture a digital image 14 is to an RF transceiver 16 with antenna 18 connected. Hereby, the image data of the recorded images are transmitted to a receiving station, not shown outside of the patient, not shown, and viewed and diagnosed by a doctor, not shown.

Die aus Linse 12 und Bildaufnahmesensor 14 gebildete elektronische Kamera 32 blickt in Richtung des Pfeils 28 und liefert somit in dieser Richtung ein Bild der Innenwand 26 des Dünndarms 2 und des weiteren Verlaufs des Darmkanals 30. Der Blickwinkel 34 von 140° der Kamera 32 entspricht dem eines extremen Weitwinkelobjektives.The lens 12 and image sensor 14 formed electronic camera 32 looks in the direction of the arrow 28 and thus provides an image of the inner wall in this direction 26 of the small intestine 2 and the further course of the intestinal canal 30 , The viewpoint 34 from 140 ° of the camera 32 corresponds to that of an extreme wide-angle lens.

In der Kapsel 4 ist außerdem eine vor das vordere Ende 10 schwenkbare Biopsiezange 22 vorgesehen, welche ferngesteuert, nämlich über den als Empfänger betriebenen HF-Transceiver 16, eine Gewebeprobe aus dem Dünndarm 2 entnehmen kann. Dadurch, dass die Biopsiezange 22 vor die Kamera 32 am vorderen Ende 10 schwenkbar ist, arbeitet sie in deren Sichtfeld. Sämtliche elektrischen Verbraucher im Inneren der Kapsel 4 werden über eine nicht dargestellte Batterie mit elektrischer Energie versorgt.In the capsule 4 is also one in front of the front end 10 swiveling biopsy forceps 22 provided, which are remotely controlled, namely via the operated as a receiver RF transceiver 16 , a tissue sample from the small intestine 2 can take. By doing that, the biopsy forceps 22 in front of the camera 32 at the front end 10 is pivotable, she works in their field of vision. All electrical consumers inside the capsule 4 are powered by a battery, not shown, with electrical energy.

In der in 1 dargestellten Position liefert die Kamera 32 das in 2 dargestellte Bild 40. Der Bereich 24 der Innenwand 26 erscheint im Bild 40 als etwa ringförmiger Randbildbereich 42, wobei wegen der zunehmenden Entfernung von der Leuchtdiode 20 die Helligkeit in Richtung der Pfeile 44, also von außen nach innen, im Bild 40 abnimmt. Der sich in Richtung des Pfeils 28 an den Bereich 24 anschließende Bereich 29 der Innenwand 26 und der weitere Fortgang des Darmkanals 30 erscheinen in Bild 40 als Zielbildbereich 46. Die Helligkeit des Bildes 40 nimmt in Richtung der Pfeile 44 auch im Zielbildbereich 46 weiterhin ab, der weitere Verlauf des Darmkanals 30 erscheint am dunkelsten, da dieser außerhalb der Leuchtkraft der Leuchtdiode 20 und daher jenseits des noch von der Kamera abbildbaren Entfernungsbereichs liegt.In the in 1 The camera delivers the position shown 32 this in 2 illustrated picture 40 , The area 24 the inner wall 26 appears in the picture 40 as an approximately annular edge image area 42 , because of the increasing distance from the light emitting diode 20 the brightness in the direction of the arrows 44 that is, from outside to inside, in the picture 40 decreases. Which is in the direction of the arrow 28 to the area 24 subsequent area 29 the inner wall 26 and further progress of the intestine 30 appear in picture 40 as a target image area 46 , The brightness of the picture 40 takes in the direction of the arrows 44 also in the target image area 46 continues from, the further course of the intestine channel 30 appears darkest, as this outside the luminosity of the LED 20 and therefore lies beyond the range of distances still to be mapped by the camera.

Aufgrund der geringen Brennweite der Kamera 32 erscheint außerdem lediglich der Bereich 48 der Darmwand im Bild 40 scharf, wohingegen die restlichen Bildbereiche des Bildes 40 vom Bereich 48 zur Bildmitte hin unschärfer werden. Wegen der ausgeprägten Helligkeitsunterschiede und des dunkelsten, bezüglich seiner Bildschärfe nicht beurteilbaren Bereiches 30 im Bild 40 erfolgt in 2 die Ermittlung des Randbildbereichs 42 und Zielbereiches 46 bzw. der Grenze 50 zwischen diesen beiden Bereichen anhand eines Helligkeitsschwellwer tes. Die Grenze 50 ist in 2 dieser Schwellwert erreicht und zur Verdeutlichung stärker geschwärzt als im realen Bild hervorgehoben.Due to the small focal length of the camera 32 In addition, only the area appears 48 the intestinal wall in the picture 40 sharp, whereas the remaining image areas of the image 40 from the area 48 become blurred towards the center of the picture. Because of the pronounced brightness differences and the darkest, with respect to its sharpness not assessable area 30 in the picture 40 takes place in 2 the determination of the edge image area 42 and target area 46 or the border 50 between these two areas using a brightness threshold. The border 50 is in 2 reached this threshold and blackened for clarity more than highlighted in the real picture.

In 2 ist also die dunkelste Stelle im von der Grenze 50 umrandeten Zielbildbereichs 46, also das Abbild des Darmkanals 30, die Zielrichtung, in welche die Kapsel 4 zu bewegen ist. Der Zielbildbereich 46 ist allerdings relativ groß im Bild 40, weshalb durch Bildverarbeitungsalgorithmen in einer nicht dargestellten Auswerteeinheit die dunkelste Stelle des Bildes 40 bzw. alternativ das Zentrum des Zielbildbereichs 46 als Zielpunkt 47 bestimmt wird. Hierdurch wird die Richtung, in welche die Kapsel 4 zu bewegen ist, im kapselfesten Koordinatensystem genau ermittelt.In 2 So it's the darkest part of the border 50 rimmed destination image area 46 , ie the image of the intestine 30 , the target direction in which the capsule 4 to move. The destination image area 46 is however relatively large in the picture 40 Therefore, by image processing algorithms in an evaluation unit, not shown, the darkest point of the image 40 or alternatively the center of the target image area 46 as a destination 47 is determined. This will change the direction in which the capsule 4 is to be moved, accurately determined in the capsule-fixed coordinate system.

Der im Bild 40 ermittelte Zielpunkt 47 entspricht in 1 dem weiteren Verlauf des Darmkanals, d.h. dessen Projektion auf das Kamerabild der Mittelachse 72 des gezeigten Abschnittes des Darmkanals. Bei einer nicht dargestellten, alternativen Anordnung der Kamera 32 mit z.B. einem Blickwinkel, der schräg zur Mittelachse 72 verläuft, läge der Zielpunkt im Bild 40 außermittig, was jedoch in der Berechnung der Kapselsollbewegungsrichtung im kapselfesten Koordinatensystem durch den bekannten Neigungswinkel der Kamera 32 berücksichtigt wird.The picture 40 determined target point 47 corresponds to 1 the further course of the intestinal canal, ie its projection onto the camera image of the central axis 72 of the shown section of intestines. In an alternative, not shown, arrangement of the camera 32 with, for example, a viewing angle that is oblique to the central axis 72 runs, the target point would be in the picture 40 Off-centered, however, in the calculation of the capsule setpoint movement direction in the capsule-fixed coordinate system by the known inclination angle of the camera 32 is taken into account.

Für die Messung von Lage und Orientierung der Kapsel 4 im raumfesten Koordinatensystem, in welchem der nicht dargestellte Patient ruht, sind prinzipiell alle Methoden zur Positions- und Orientierungsmessung von Katheterspitzen im menschlichen Körper geeignet, die hier nicht näher erläutert werden. Im raumfesten Koordinatensystem werden Magnetfelder bzw. deren Gradienten derart erzeugt, dass sie mit dem Dauermagneten 8 bzw. dessen Dipolmoment wechselwirken und die Kapsel 4 in Richtung des Pfeils 28 entlang des Darmkanals 30 bzw. der Darmmittellinie 72 bewegen.For measuring the position and orientation of the capsule 4 in the spatially fixed coordinate system in which rests the patient, not shown, in principle, all methods for position and orientation measurement of catheter tips in the human body are suitable, which are not discussed here. In the spatially fixed coordinate system, magnetic fields or their gradients are generated in such a way that they interact with the permanent magnet 8th or whose dipole moment interact and the capsule 4 in the direction of the arrow 28 along the intestinal canal 30 or the intestine centerline 72 move.

3 zeigt die Kapsel 4 aus 1 an einer anderen Stelle des Dünndarms 2, nämlich kurz vor einer Darmschlinge 60. In einer derartigen Situation wird der gesamte durch die Kamera 32 erfassbare Bildbereich 24 des Darmkanals 30 durch die Leuchtdiode 20 gut ausgeleuchtet. 3 shows the capsule 4 out 1 in another part of the small intestine 2 , shortly before a bowel loop 60 , In such a situation, the whole of the camera 32 detectable image area 24 of the intestine 30 through the LED 20 well lit.

Das von der Kamera 32 aufgenommene Bild 62 ist in 4 dargestellt. Im Unterschied zu Bild 40 in 2 weisen sämtliche Bereiche des Bildes 62 kaum voneinander abweichende Helligkeit auf, obschon diese in der Richtung der Pfeile 64 geringfügig abnimmt. Der Bereich 48 des Dünndarms 2 liegt im Schärfebereich der Kamera 32 und ist deshalb im Bild 62 scharf dargestellt. Die restlichen Bildbereiche, welche sich vom ringförmigen Bereich 48 in Richtung der Pfeile 64 hin erstrecken, nehmen in ihrer Schärfe wegen der zunehmenden Entfernung von der Kamera 32 deutlich ab. Im Bild 62 ist der Bereich 66, also die Innenwand 26 im Bereich der Darmschlinge 60 zu sehen, aber nicht, wie im Bild 40 der weitere Verlauf des Darmkanals 30 in größerer Entfernung.That from the camera 32 taken picture 62 is in 4 shown. Unlike picture 40 in 2 show all areas of the picture 62 barely diverging in brightness, though in the direction of the arrows 64 slightly decreases. The area 48 of the small intestine 2 is in the focus range of the camera 32 and is therefore in the picture 62 sharp. The remaining image areas extending from the annular area 48 in the direction of the arrows 64 extend in their sharpness because of the increasing distance from the camera 32 clearly off. In the picture 62 is the area 66 So the inner wall 26 in the area of the intestinal loop 60 to see, but not, as in the picture 40 the further course of the intestine 30 at a greater distance.

Die im Bild 62 dargestellte Darminnenwand besitzt aufgrund ihrer Struktur an sich Helligkeitsunterschiede. Da im Bild 62 nicht genügend Helligkeitsunterschiede existieren, um eine dunkelste Stelle zu ermitteln, die dem weiteren Fortgang des Darmkanals entspricht, bewertet die oben genannte Recheneinrichtung mit Hilfe von Bildverarbeitungsalgorithmen die Schärfeunterschiede im Bild 62. Hierbei wird der unschärfste Bereich 68 als Zielbildbereich 46 ermittelt, der wiederum von der Grenze 50 (überdeutlich in 4 dargestellt) umgeben ist. Das restliche Bild 62 stellt wieder den Randbildbereich 42 dar.The picture 62 Due to its structure, the inner wall of the intestine shown has brightness differences per se. As in the picture 62 If there are not enough brightness differences to determine a darkest spot that corresponds to the further progress of the intestinal canal, the above-mentioned computing device evaluates the sharpness differences in the image with the aid of image processing algorithms 62 , This will be the blurry area 68 as a target image area 46 determined, in turn, from the limit 50 (clearly in 4 shown) is surrounded. The rest of the picture 62 again sets the border area 42 represents.

Da wie in 2 auch in 4 der Zielbildbereich 46 noch relativ groß ist, wird dort als unschärfste Stelle der Zielpunkt 47 als Ziel der Kapselbewegung ermittelt. Da der Zielpunkt 47 diesmal außerhalb der Bildmitte liegt, wird die Kapsel 4 mit ihrer Kapsellängsachse 6 in 3 in Richtung des Pfeils 70, also der Biegung des Dünndarms 2 folgend geschwenkt und dabei in Richtung der Kapsellängsachse 6 vorwärts bewegt.Because like in 2 also in 4 the destination image area 46 is still relatively large, is there as the blurred point of the target point 47 determined as the target of the capsule movement. Because the destination point 47 This time outside the center of the picture is the capsule 4 with its capsule longitudinal axis 6 in 3 in the direction of the arrow 70 ie the bend of the small intestine 2 following swung while in the direction of the capsule longitudinal axis 6 moved forward.

Bereits nach einer kleinen Verschiebung der Spitze der Kapsel 4 um eine Strecke 76 wird ein erneutes, nicht dargestelltes Bild aufgenommen, das dem Bild 62 sehr ähnlich ist. Aufgrund der Bildauswertung wird die Kapsel weiter in Richtung des Pfeils 70 gekippt und verschoben. So durchfährt die Kapsel 4 die Darmschlinge 60, wobei die Kapsellängsachse 6 und die Richtung der an der Kapsel wirkenden magnetisch erzeugten Kraft zu jedem Zeitpunkt annähernd mit der Darmkanalrichtung 72 fluchten. Der Mittelpunkt 74 verbleibt hierbei wegen der Elastizität der Darmwand immer auf der Mittelachse 72, unabhängig davon, ob oder wie die Kapsel navigiert wird. Die Kapsel 4 verlässt die Darmschlinge 60 schließlich entlang der Darmmittellinie 72, um ihren Weg im Dünndarm 2 fortzusetzen.Already after a small shift of the tip of the capsule 4 by a distance 76 a new picture, not shown, is taken of the picture 62 is very similar. Due to the image analysis, the capsule continues in the direction of the arrow 70 tilted and moved. So goes through the capsule 4 the intestinal loop 60 , wherein the capsule longitudinal axis 6 and the direction of the magnetically generated force acting on the capsule at each time point approximately to the intestinal canal direction 72 aligned. The middle-point 74 Because of the elasticity of the intestinal wall, it always stays on the central axis 72 regardless of whether or how the capsule is navigated. The capsule 4 leaves the intestinal loop 60 finally along the intestinal midline 72 to make their way in the small intestine 2 continue.

Die Kapsel folgt somit mit ihrem Mittelpunkt 74, wie auch in 1, stets der Darmmittellinie 72, wobei die Kapsellängsachse 6 stets zumindest nahezu tangential zur Darmmittellinie 72 ausgerichtet ist. So wird der Dünndarm 2 am wenigstens ausgelenkt und verformt, die Andruckkräfte der Kapsel 4 an die Darmwand 26 sind gleichmäßig am Kapselumfang, was eine möglichst kraftsparende Bewegung der Kapsel 4 ermöglicht und daher möglichst wenig Energieaufwand im felderzeugenden Spulensystem erfordert.The capsule thus follows with its center 74 as well as in 1 , always the intestinal midline 72 , wherein the capsule longitudinal axis 6 always at least almost tangential to the intestine centerline 72 is aligned. This is how the small intestine becomes 2 at least deflected and deformed, the pressure forces the capsule 4 to the intestinal wall 26 are even at the capsule circumference, which is a power-saving movement of the capsule as possible 4 allows and therefore requires as little energy as possible in the field-generating coil system.

Entdeckt der Arzt in einem der vielen, während der Kapselbewegung durch den Dünndarm 2 aufgenommenen Bilder 40, 62 eine ungewöhnliche Stelle, wird er in der Regel die Steuerung der Kapsel an dieser Stelle manuell weiterführen. Die Kapsel wird z.B. in 3 in der dort gezeigten Position angehalten, und um ihren Mittelpunkt 74 in Richtung entgegen des Pfeils 70 geschwenkt, so dass sie zur Darmwand hin ausgerichtet ist. Die Kamera 32 liefert dann ein genaueres Bild der entsprechenden Stelle der Darmwand. Auch kann dann die Biopsiezange 22 ausgelöst und an der Stelle 78 eine Gewebeprobe des Dünndarms 2 entnommen werden. Generell sind hier sämtliche medizinische Maßnahmen, z.B. eine lokale Medikamentengabe, möglich, für welche die Kapsel ausgerüstet ist. Dies ist in den Figuren stellvertretend durch die Biopsiezange dargestellt. Nach der Probeentnahme oder genaueren Betrachtung der interessierenden Stelle der Darminnenwand wird die Kapsel 4 in die in 3 gezeigte Position zurückgeschwenkt und die Kapselfahrt automatisch, wie oben beschrieben, fortgesetzt.Discover the doctor in one of the many, during the capsule movement through the small intestine 2 taken pictures 40 . 62 an unusual place, he will usually manually continue the control of the capsule at this point. The capsule is eg in 3 stopped in the position shown there, and around its center 74 in the direction of the arrow 70 pivoted so that it is aligned to the intestinal wall. The camera 32 then provides a more accurate picture of the corresponding site of the intestinal wall. Also, then the biopsy forceps 22 triggered and in the place 78 a tissue sample of the small intestine 2 be removed. In general, here are all medical measures, such as a local medication, possible for which the capsule is equipped. This is represented in the figures representatively by the biopsy forceps. After sampling or closer inspection of the site of interest of the intestinal inner wall becomes the capsule 4 in the in 3 pivoted back position shown and the capsule drive automatically, as described above, continued.

Claims

Method for automatically navigating a video capsule ( 4 ) along a tubular channel ( 30 ) forming hollow organ ( 2 ) of a patient, in particular of the gastrointestinal tract, wherein the video capsule ( 4 ) a camera ( 32 ) and a light source ( 20 ), in which: a) the video capsule ( 4 ) in the hollow organ ( 2 ), b) with the camera ( 32 ) a picture ( 40 . 62 ) of the interior of the hollow organ ( 2 ), where in the image ( 40 . 62 ) a dark or fuzzy target image area ( 46 ) from a bright or sharp border area ( 42 ) is bounded annularly, c) the target image area ( 46 ) in the picture ( 40 . 62 ) and the video capsule ( 4 ) towards the target image area ( 46 ) is moved.

The method of claim 1, wherein: - in step c) the video capsule ( 4 ) in the direction of the center ( 47 ) of the target image area ( 46 ) is moved.

The method of claim 1, wherein: - in step c) the video capsule ( 4 ) in the direction of the darkest point ( 47 ) of the target image area ( 46 ) is moved.

The method of claim 1, wherein: - in step c) the video capsule ( 4 ) in the direction of the blurriest point ( 47 ) of the target image area ( 46 ) is moved.

Method according to one of the preceding claims, in which: - the images recorded in steps b) ( 40 . 62 ) in step c) for determining the target image area ( 46 ) in the last recorded image ( 40 . 62 ) also stored images ( 40 . 62 ) be evaluated.

Method according to one of the preceding claims, wherein the video capsule ( 4 ) is elongated and camera ( 32 ) and light source ( 20 ) at the front end ( 10 ), in which: - in step c) the video capsule ( 4 ) with its front end ( 10 ) to the target image area ( 46 ) is aligned and moved.

Method according to one of the preceding claims, in which: during a capsule travel in a forward direction through the hollow organ ( 2 ) the trajectory of the capsule drive is stored, - the capsule is moved back in the reverse direction along the stored trajectory.

Method according to one of the preceding claims, wherein the central viewing direction of the camera ( 32 ) to the longitudinal axis ( 6 ), in which: - the video capsule ( 4 ) about the longitudinal axis ( 6 ) is rotated, - several images during the rotation ( 40 . 62 ).