-
Die Erfindung betrifft ein Verfahren zum Kalibrieren einer medizinischen Bildgebungsvorrichtung, insbesondere eines Endoskop-Systems oder eines Exoskop-Systems, wobei die Bildgebungsvorrichtung ein optisches System mit einer Optik und einem Bildsensor zum Aufnehmen eines Bildes eines Betrachtungsbereichs aufweist und eine Bildinformation des Bildes durch einen inneren und/oder äußeren Einfluss, insbesondere das optische System, eine Beleuchtung und/oder eine Umgebungsbedingung, einer Spektralabweichung unterliegt, mit mehreren Schritten. Weiterhin betrifft die Erfindung eine medizinische Bildgebungsvorrichtung, insbesondere ein medizinisches Endoskop oder ein medizinisches Exoskop.
-
Bekannte medizinische Bildgebungsvorrichtungen, wie beispielsweise Endoskope oder Exoskope, werden sowohl zum Aufnehmen von Bildern unter beschränkten geometrischen Gegebenheiten als auch zum Analysieren bestimmter Parameter in einem Betrachtungsbereich verwendet. Dazu sind unter anderem sogenannte hyperspektrale oder auch multispektrale Imaging-Systeme (HSI/MSI) für Endoskope oder für Exoskope bekannt.
-
Weiterhin sind diverse Endoskope bekannt, bei welchen eine entsprechende Optik an der Spitze des jeweiligen Endoskopes drehbar ausgestaltet ist. Diese können auch mit HSI und/oder MSI-Systemen kombiniert sein.
-
Zudem ist es üblich, auf Endoskope oder Exoskope mit einem einfachen Okular für das Betrachten mit dem menschlichen Auge eine Kamera auf das Okular am Kopf des jeweiligen Gerätes aufzusetzen, sodass ein externes Anzeigen des Bildes eines Betrachtungsbereiches ermöglicht ist.
-
Die
US 2017/0135555 A1 betrifft ein Endoskopsystem, eine Bildverarbeitungseinrichtung und ein entsprechendes Verfahren. Es ist offenbart, dass eine Spektralverteilung einer Bildinformation anhand einer Referenzspektralverteilung korrigiert wird.
-
Die
US 2020/0296352 A1 offenbart ein dreidimensionales Bildgebungssystem mit einem Farbsensor. Es ist dabei offenbart, dass eine Spektralverteilung, nämlich eine Farbverteilung, mittels einer vorigen Messung gegenüber einer Referenzspektralverteilung angepasst und korrigiert wird.
-
Bekannten Endoskopen oder auch Exoskopen ist gemein, dass bei einem Verändern eines Abstandes zu einem Betrachtungsbereich oder zu einem betrachteten Gegenstand, wie beispielsweise einem Organ und/oder auch durch das Drehen eines optischen Systems oder einer Optik oder beispielsweise einer aufgesetzten Kamera eine für ein hyperspektrales oder multispektrales Imaging-System notwendige Kalibrierung nur für eine Grundstellung vorliegt, und daher bei einem Durchführen der beschriebenen Veränderungen eine Veränderung der Bildqualität in Bezug auf die ermittelten Ergebnisse erzeugt ist, da die Kalibrierung verloren geht.
-
Aufgabe der Erfindung ist es, den Stand der Technik zu verbessern.
-
Gelöst wird die Aufgabe durch ein Verfahren zum Kalibrieren einer medizinischen Bildgebungsvorrichtung, insbesondere eines Endoskop-Systems oder eines Exoskop-Systems, wobei die medizinische Bildgebungsvorrichtung ein optisches System mit einer Optik und einem Bildsensor zum Aufnehmen eines Bildes eines Betrachtungsbereiches aufweist und eine Bildinformation des Bildes durch einen inneren und/oder äußeren Einfluss, insbesondere durch das optische System, durch eine Beleuchtung und/oder durch eine Umgebungsbedingung, einer Spektralabweichung unterliegt, mit folgenden Schritten:
- - Aufnehmen einer Bildinformation eines Bildbereiches, sodass eine erste Aufnahme vorliegt,
- - Bestimmen einer Spektralverteilung der ersten Aufnahme, sodass eine Spektralverteilung der ersten Aufnahme vorliegt,
- - Ermitteln einer Spektralabweichung anhand der Spektralverteilung der ersten Aufnahme und einer Referenzspektralverteilung, sodass eine Abweichung von der Referenzspektralverteilung vorliegt,
- - Korrigieren der Bildinformation auf Basis der Abweichung von der Referenzspektralverteilung, sodass eine korrigierte Bildinformation vorliegt, wobei das Korrigieren der Bildinformation anhand einer ermittelten rotatorischen Position des Bildsensors in Bezug zum optischen System und/oder in Bezug zur Optik durchgeführt wird,
sodass die Bildinformation derart aufbereitet ist, dass die korrigierte Bildinformation mit einer reduzierten oder eliminierten Spektralabweichung vorliegt.
-
Durch das Bestimmen einer Spektralverteilung der in einer realen Einsatzumgebung bestimmten ersten Aufnahme kann eine entsprechende Spektralabweichung von einer Referenzspektralverteilung ermittelt werden. So liegt für jede erste Aufnahme eine Information darüber vor, inwieweit eine solche Spektralverteilung der ersten Aufnahme von einer Referenzspektralverteilung abweicht. Durch diese bestimmte Spektralabweichung kann dann ein Korrigieren der Bildinformation auf Basis dieser Abweichung von der Referenzspektralverteilung erfolgen, sodass eine korrigierte Bildinformation vorliegt. Die korrigierte Bildinformation ist somit um die Spektralabweichung kompensiert oder auf die jeweilige Einsatzsituation mit veränderten Parametern neu kalibriert, sodass eine reduzierte oder eliminierte Spektralabweichung vorliegt. Damit kann in einer jeweiligen Einsatzumgebung ein genaues Bestimmen von beispielsweise Gewebeparametern mittels beispielsweise eines MSI erfolgen, da das Bestimmen dieser Gewebeparameter von einer entsprechend genauen Ermittlung entsprechender Spektralverteilungen abhängt.
-
Folgende Begriffe seien an dieser Stelle erläutert:
-
Ein „Kalibrieren“ beschreibt in der Messtechnik oder für einen Messprozess eine Feststellung und/oder Dokumentation einer Abweichung des jeweiligen Messgerätes gegenüber einem anderen Messgerät oder einem Referenzmaß. Das Referenzmaß wird in diesem Fall auch als „Normal“ bezeichnet. Ein solches Kalibrieren oder eine solche Kalibrierung umfasst weiterhin einen zweiten Schritt, nämlich ein Berücksichtigen der ermittelten Abweichung bei einem anschließenden Benutzen des jeweiligen Messgerätes zum Korrigieren der abgelesenen Werte. Eine sogenannte kalibrierte Messung liefert damit genauere Ergebnisse oder sogar exakte Ergebnisse innerhalb einer angestrebten minimalen Abweichung von der Realität gegenüber einer nicht kalibrierten Messung.
-
Eine „medizinische Bildgebungsvorrichtung“ ist beispielsweise ein Endoskop, ein Endoskop-System oder auch ein Exoskop oder Exoskop-System. Weiterhin kann eine solche medizinische Bildgebungsvorrichtung jede Einrichtung sein, welche geeignet ist, mit einem Bildgebungsverfahren in einem medizinischen Umfeld eingesetzt zu werden, beispielsweise zum Ermitteln eines entsprechenden Bildes oder auch zum Bestimmen von Parametern eines betrachteten Bereichs. Ein Endoskop ist dabei ein Gerät, mit dem beispielsweise ein Innenbereich eines Menschen, beispielsweise ein Bauchraum, untersucht und Teile darin manipuliert werden können. Ein solches Endoskop umfasst dabei beispielsweise sowohl optische Komponenten als auch mechanische Komponenten zum Manipulieren eines entsprechend betrachteten Bereichs oder Teilen in diesem Bereich. Hierzu wird korrekt von einem Endoskop-System gesprochen, wobei das „Endoskop“ die eigentlichen Teile zur Bildaufnahme bezeichnet. Häufig werden diese Begriffe jedoch auch synonym verwendet. Ein Exoskop oder auch ein Exoskop-System ist dabei ein vergleichbares Instrument zum Betrachten und/oder Manipulieren von offenliegenden Bereichen eines Organismus, beispielsweise eines Menschen während eines offenen Eingriffs. Ein Bestimmen von Gewebeparametern oder anderen Parametern erfolgt dabei beispielsweise mittels einer Spektralanalyse, häufig unter Berücksichtigung von entsprechend gezielt eingesetzten Beleuchtungseinrichtungen spezieller Spektren. So kann beispielsweise mittels einer solchen medizinischen Bildgebungsvorrichtung eine Analyse per Hyperspektral-Imaging (HSI) oder Multispektral-Imaging (MSI) erfolgen.
-
Ein „optisches System“ kann dabei jede Einrichtung der medizinischen Bildgebungsvorrichtung sein, welche dazu geeignet oder dazu eingerichtet ist, Bildinformationen oder andere optische Informationen aufzunehmen, weiterzuleiten und/oder abzugeben. Ein solches optisches System führt dabei beispielsweise Licht aus dem Betrachtungsbereich bis zu einem Bildsensor oder Bildaufnahmechip.
-
Eine „Optik“ beschreibt dabei die Gesamtheit von optisch leitenden Komponenten. Beispielsweise gehören zu einer solchen Optik Linsen, Lichtleiter oder entsprechende Filter, aber auch auf eine Endoskop-System zusätzlich aufgesetzte optische Komponenten.
-
Ein „Bildsensor“ ist beispielsweise eine Vorrichtung oder auch Einrichtung zum Aufnehmen von lichtbasierten Informationen auf elektrischem Wege. Beispielsweise ist ein solcher Bildsensor ein halbleiterbasiertes Bauteil, welches sichtbares sowie auch nicht sichtbares Licht aufnehmen kann. Allgemein kann ein solcher Bildsensor jede Art von elektromagnetischer Strahlung aufnehmen, wenn dieser für einen entsprechenden Wellenlängenbereich eingerichtet ist. Ein solcher Bildsensor ist dabei beispielsweise an der Spitze, in einem Griff oder einem Kopf eines Endoskops oder eines Exoskops oder auch in einer externen, auf das Endoskop-System oder Exoskop-System aufgesetzten Kamera angeordnet sein.
-
Ein „Bild“ bezeichnet ein Abbild oder eine Darstellung eines entsprechenden Betrachtungsbereiches, beispielsweise als Farbpixel oder Gesamtheit von Farbpixeln oder eine dazu jeweils äquivalente elektronische Funktion. Ein solches Bild muss dabei nicht physisch oder für einen Menschen sichtbar vorliegen, sondern kann während eines Verarbeitens oder eines Speicherns oder eines Vorbereitens für eine Darstellung für einen Menschen auch in elektronischer Form vorliegen und die Informationen eines entsprechenden Bildes eines Betrachtungsbereiches umfassen.
-
Ein „Betrachtungsbereich“ ist insbesondere der Bereich, welcher mit der medizinischen Bildgebungsvorrichtung betrachtet wird, beispielsweise ist ein solcher Betrachtungsbereich ein Bauchraum, ein Organ oder ein anderer Bestandteil eines Organismus.
-
Eine „Bildinformation“ ist dabei der Aussagegehalt des beschriebenen Bildes, beispielsweise also eine entsprechende Anzahl von Pixeln in entsprechender Färbung, eine Information über eine entsprechende Spektralverteilung des jeweiligen Bildes je Pixel oder auch eine andere, beispielsweise Meta-Information, des jeweiligen Bildes.
-
Ein „innerer und/oder äußerer Einfluss“ beschreibt jeden Einfluss auf die Bildinformation, welcher die Qualität der Bildinformation oder einen Aussagegehalt der Bildinformation verändert oder verschlechtert und welcher insbesondere durch das optische System, durch eine Beleuchtung und/oder durch eine Umgebungsbedingung entsteht oder verursacht wird. Ein solcher Einfluss durch das optische System kann beispielsweise eine Asymmetrie einer entsprechenden Linse, eine über eine Gesamtfläche ungleiche Filterwirkung eines Filters oder eines optischen Bestandteils oder auch im einfachsten Falle eine Verschmutzung im optischen System sein. Ein entsprechender Einfluss durch eine Beleuchtung entsteht beispielsweise durch eine ungleiche Spektralverteilung einer entsprechenden Lichtquelle, welche zur Beleuchtung dient. Eine Umgebungsbedingung kann dabei beispielsweise ein entsprechender Hintergrund um den Betrachtungsbereich sein, welcher reflektiertes oder gestreutes Licht entsprechend verfälscht, beispielsweise mit einem anderen Farbspektrum überlagert, oder reflektiert oder absorbiert, sodass eine Beleuchtungsintensität verändert wird.
-
Eine „Beleuchtung“ ist in diesem Zusammenhang insbesondere eine gezielte, multispektrale und/oder mit definiertem Lichtspektrum durchgeführte Beleuchtung des Betrachtungsbereiches, welche dann beispielsweise für ein MSI- oder HSI-imaging verwendet wird. Dabei kann auch eine Spektralabweichung durch diese entsprechende Beleuchtung verursacht sein, da auch in den entsprechend von der Beleuchtung ausgesandten Lichtspektren Abweichungen zum angestrebten Spektrum vorkommen können.
-
Eine „Spektralabweichung“ kann gewollt oder ungewollt entstehen und ist beispielsweise ein ungewolltes Filtern eines entsprechenden Lichtspektrums, ein Abschatten bestimmter Spektralbereiche oder ein Beeinflussen einer entsprechenden Spektralverteilung in ihrer Intensität in entsprechenden Spektralbereichen. So kann eine gewollte Spektralabweichung beispielsweise auch dadurch erzeugt sein, dass mit einer entsprechenden Beleuchtung beleuchtet wird, um anhand eines dann der Bildinformation zugeführten Lichtspektrums eine Analyse von Gewebeparametern vorzusehen. Eine solche Spektralabweichung kann dabei insbesondere inhomogen über mehrere Pixel oder über alle Pixel des Bildes oder auch über das ganze Bild inhomogen verteilt sein.
-
Ein „Aufnehmen“ einer Bildinformation beschreibt beispielsweise das optische Zuführen der entsprechenden Bildinformation oder eines dazu korrespondierenden Bildes in Richtung des Bildsensors sowie das Umwandeln der Bildinformation auf dem Bildsensor in beispielsweise ein elektronisches Signal.
-
Eine „Aufnahme“ beschreibt dabei ein konkretes, identifizierbares und zuzuordnendes Bild des entsprechenden Bildbereiches im Betrachtungsbereich.
-
„Bestimmen“ einer Spektralverteilung beschreibt beispielsweise das Erzeugen einer Information derart, dass eine entsprechende Intensität des in der Aufnahme vorliegenden jeweiligen Lichtes bestimmten Spektren zugeordnet oder zu bestimmten Frequenzen des Lichts zugeordnet werden, sodass eine nachvollziehbare Information über eine entsprechende Spektralverteilung vorliegt.
-
Ein „Ermitteln“ einer Spektralabweichung beschreibt ein Vergleichen der Spektralverteilung mit einer jeweiligen Aufnahme mit einer Referenzspektralverteilung, sodass beispielsweise mittels einer Differenzbildung zu entsprechenden Frequenzen eine jeweilige Information über eine Abweichung in der Intensität des jeweils zu der Frequenz eintreffenden Lichtes vorliegt.
-
Eine „Referenzspektralverteilung“ beschreibt dabei beispielsweise eine während der Herstellung oder einer Qualitätssicherung für eine entsprechende medizinische Bildgebungsvorrichtung festgestellte, der jeweiligen medizinischen Bildgebungsvorrichtung zugeordneten Spektralverteilung, welche eine möglichst reale Abbildung einer Bildinformation des Betrachtungsbereiches ermöglicht. Eine solche Referenzspektralverteilung dient damit beispielsweise als „Normal“ im Sinne einer angestrebten Kalibrierung. Eine solche Referenzspektralverteilung ist dabei insbesondere inhomogen und/oder definiert inhomogen über das Bild verteilt und ermöglicht eine Kalibrierung entsprechen der daraus entstehenden Inhomogenität. Damit kann, beispielsweise im Unterschied zu einem Weißabgleich, eine pixelgenaue Kalibrierung erfolgen.
-
Ein „Korrigieren“ der Bildinformation beschreibt ein rechnerisches Beeinflussen der Bildinformation derart, dass mittels der Spektralabweichung die Bildinformation derart korrigiert wird, dass die Bildinformation korrespondierend zur Referenzspektralverteilung der medizinischen Bildgebungsvorrichtung vorliegt. Ein Ergebnis eines solchen Korrigierens ist dann beispielsweise die „korrigierte Bildinformation“.
-
Um das Verfahren vorteilhaft in hochauflösenden Bildgebungsverfahren und für übliche Bildinformationen durchführen zu können, wird das Aufnehmen einer Bildinformation, das bestimmen einer Spektralverteilung, das Ermitteln einer Spektralabweichung und/oder das Korrigieren der Bildinformation für ein Pixel oder für ein jeweiliges Pixel des Bildes und/oder der Bildinformation durchgeführt.
-
Im Ergebnis kann für ein jeweiliges Pixel oder beispielsweise auch für alle Pixel eines entsprechenden Bildes oder einer entsprechenden Bildinformation eine kalibrierte Spektralverteilung erzeugt werden, sodass auch in hochauflösenden Bildern mit einer Vielzahl von Pixeln ein sehr genaues Bestimmen beispielsweise einer Gewebeeigenschaft mittels einer Multispektralanalyse möglich ist.
-
Ein „Pixel“, welches auch Bildpunkt, Bildzelle oder Bildsegment bezeichnet wird, bezeichnet einzelne Farbwerte oder auch Helligkeitswerte einer digitalen Rastergraphik, wie sie üblicherweise in elektronischen Bildgebungsverfahren genutzt werden. Ein solches Pixel bezeichnet dabei auch ein entsprechendes Flächenelement, beispielsweise eines Bildsensors, oder auch eines Bildschirms, wobei eine Vielzahl von Pixeln dann ein vollständiges Bild ergibt.
-
In einer Ausführungsform erfolgt das Aufnehmen einer Bildinformation, das Bestimmen einer Spektralverteilung, das Ermitteln einer Spektralabweichung und/oder das Korrigieren der Bildinformation für einen Spektralbereich oder mehrere Spektralbereiche.
-
Mit diesem Vorgehen wird es ermöglicht, ein Kalibrieren möglichst exakt für den jeweiligen Spektralbereich vorzunehmen, sodass beispielsweise ein Kalibrieren abgestimmt auf ein multispektrales Analyseverfahren zum Bestimmen einer Gewebeeigenschaft erfolgen kann.
-
Ein „Spektralbereich“ beschreibt dabei beispielsweise einen Ausschnitt aus einem Gesamtspektrum einer entsprechenden Spektralverteilung.
-
Dazu erfolgt dann in einer Ausführungsform ein Korrigieren der Bildinformation auf Basis der Abweichung von der Referenzspektralverteilung für einen Spektralbereich oder mehrere Spektralbereiche, sodass die Bildinformation derart aufbereitet ist, dass die korrigierte Bildinformation mit einer reduzierten oder eliminierten Spektralabweichung für einen jeweiligen Spektralbereich oder mehrere jeweilige Spektralbereiche vorliegt.
-
In einer weiteren Ausführungsform wird ein Abstand vom Betrachtungsbereich ermittelt und die Referenzspektralverteilung abhängig von diesem Abstand des Betrachtungsbereichs bestimmt, wobei das Korrigieren der Bildinformation anhand des ermittelten Abstands vom Betrachtungsbereich durchgeführt wird.
-
Mittels dieses Abstands kann damit ein Kalibrieren bezüglich abstandsabhängiger Spektralabweichungen erfolgen. So führt ein Abstand zum Betrachtungsbereich beispielsweise dazu, dass Reflexionen von einem Hintergrund des Betrachtungsbereiches zu einer Spektralabweichung führen.
-
Um diesen Abstand vom Betrachtungsbereich zuverlässig zu ermitteln, wird der Abstand mittels eines Lasers, eines Ultraschallsystems und/oder mittels einer Bildauswertung bestimmt.
-
So kann beispielsweise ein Laser-Interferometer, ein Laserentfernungsmesser oder eine Einrichtung zum Messen einer Laufzeit eines Lasers, auch „Time-of-Flight“-Analyse genannt, dazu genutzt werden, den Abstand zuverlässig und präzise zu ermitteln. Ein Ultraschallsystem kann beispielsweise über eine Echolaufzeit einen entsprechenden Abstand ermitteln. Weiterhin ist es möglich, dem Abstand mittels einer Bildauswertung zu bestimmen. Dazu erfolgt eine Korrelation oder auch eine Triangulation entsprechender Bildinformationen, beispielsweise in einem Stereo-Endoskop, sodass im Ergebnis auf den Abstand geschlossen werden kann.
-
Erfindungsgemäß wird das Korrigieren der Bildinformation anhand einer ermittelten rotatorischen Position des Bildsensors in Bezug zum optischen System und/oder in Bezug zur Optik durchgeführt.
-
Somit kann beispielsweise bei einem Endoskop oder auch Exoskop mit drehbarer Spitze oder mit einer drehbaren, auf einem Okular aufgesetzten Kamera ein entsprechendes Korrigieren der Bildinformation abhängig von der rotatorischen Position erfolgen. Folglich kann zu jeder rotatorischen Position auch eine entsprechende Kalibrierung vorgenommen werden, welche beispielsweise auch laufend und/oder pixelgenau erfolgt. Dazu wird zu jeder inkrementellen rotatorischen Position ein Korrigieren gegenüber einer Referenzspektralverteilung durchgeführt.
-
Eine „rotatorische Position“ beschreibt dabei beispielsweise eine entsprechende Winkelangabe gegenüber einem Null-Winkel oder gegenüber einer Ausgangsstellung des optischen Systems und/oder der Optik. So kann beispielsweise die rotatorische Position als Winkelangabe in „°“ angegeben sein. Zu jeder entsprechenden rotatorischen Position oder zu entsprechenden Inkrementen rotatorischer Positionen im Bezug zu einem Vollkreis kann dann eine entsprechende Korrekturinformation in Form einer Referenzspektralverteilung vorliegen. Erfindungsgemäß ist damit eine rotatorische Position des Bildsensors in Bezug zum optischen System und/oder in Bezug zum Betrachtungsbereich bezeichnet.
-
Um die rotatorische Position zuverlässig ohne weitere Bauteile ermitteln zu können, wird die rotatorische Position anhand eines dem optischen System und/oder der Optik zugeordneten optischen Indikators für die rotatorische Position ermittelt.
-
So kann beispielsweise eine Bildauswertung derart erfolgen, dass eine einer Winkelposition zuzuordnende Anomalie oder geometrische Abweichung eines entsprechenden Bildes dazu genutzt wird, die rotatorische Position festzustellen.
-
Ein „optischer Indikator“ kann dabei beispielsweise ein Ausschnitt einer ansonsten kreisförmigen Bildfläche, eine Markierung, ein Punkt oder ein anderes geometrisches Gebilde im optischen System und/oder in der Optik sein, welches vom Bildsensor und/oder der daran angeschlossenen Komponenten wie beispielsweise eines Anzeigeinstrumentes mit Auswertetechnik, erkannt werden kann. Weiterhin kann als optischer Indikator auch eine in einer Fertigung einer entsprechenden medizinischen Bildgebungsvorrichtung erzeugte Abweichung oder Qualitätsabweichung genutzt werden. Alternativ oder ergänzend kann ein optischer Indikator auch durch Referenzbildpunkte einer Bildauswertung erzeugt werden, sofern diese im Bild Abhängig von der Rotation vorliegen.
-
Alternativ oder auch zum Erzeugen einer Redundanz wird die rotatorische Position anhand eines Sensors ermittelt.
-
Ein „Sensor“, welcher auch „Messfühler“ genannt wird, ist ein technisches Bauteil, welches physikalische oder chemische Eigenschaften und/oder auch stoffliche Eigenschaften oder Beschaffenheiten in seiner jeweiligen Umgebung qualitativ und/oder quantitativ erfassen kann. Beispielsweise wird dann ein entsprechendes elektronisches Signal erzeugt, welches weitergeleitet und/oder verarbeitet werden kann.
-
Die rotatorische Position kann dabei anhand eines Magnet-Sensors, eines Hall-Sensors, eines Laser-Sensors, eines Licht-Sensors und/oder eines Inkrementgebers ermittelt werden.
-
Ein „Magnet-Sensor“ kann dabei jeder Sensor sein, welcher magnetische Eigenschaften zum Detektieren der rotatorischen Position nutzt. Beispielsweise umfasst ein solcher Magnet-Sensor einen magnetisierten Ring, welcher von einem Magnet-Aufnehmer abgetastet wird und damit eine rotatorische Position ermittelt.
-
Ein solcher Magnet-Sensor kann auch als „Hall-Sensor“ ausgeführt sein, welcher mittels des sogenannten Hall-Effekts Magnetfelder bestimmen kann. So kann ein entsprechender magnetischer Bestandteil des optischen Systems und/oder der Optik gegenüber einem entsprechenden Hall-Sensor positioniert sein und ein Verändern der rotatorischen Position des optischen Systems und/oder der Optik zu einer Signalveränderung am Hall-Sensor führen.
-
Ein „Laser-Sensor“ kann jeder Sensor sein, welcher mittels Laserstrahl oder der Nutzung eines Laserstrahls ein Messsignal erzeugt. Beispielsweise kann ein solcher Laser-Sensor eine umlaufende optische Markierung am optischen System und/oder an der Optik abtasten, sodass ein Signal bezüglich der rotatorischen Position erzeugt wird.
-
Entsprechend eine rotatorische Position auch mittels eines Lichtsensors abgetastet werden, wobei beispielsweise ein Bild eines Inkrement-Ringes oder eines Inkrementgebers ausgelesen und entsprechend ausgewertet wird.
-
Um mittels der medizinischen Bildgebungsvorrichtung Gewebeeigenschaften zuverlässig und präzise bestimmen und/oder auswerten zu können, wird die korrigierte Bildinformation gemäß einem weiteren Aspekt der Erfindung für ein HSI oder ein MSI ausgewertet. Dies erfolgt insbesondere zum Bestimmen von Eigenschaften des Betrachtungsbereichs, insbesondere eines Hämoglobingehalts, eines Wassergehalts und/oder einer Sauerstoffsättigung, welche beispielsweise im entsprechenden Gewebe festgestellt werden.
-
In einer Ausführungsform wird der Betrachtungsbereich dazu mit einer Lichtquelle beleuchtet, wobei die Lichtquelle insbesondere zum Beleuchten des Betrachtungsbereichs mit einem zu einer spektralen Auswertung, insbesondere mittels einer HSI oder MSI, korrespondierenden Lichtspektrum eingerichtet ist.
-
Um auch bei fehlendem Vorliegen einer entsprechenden Referenzspektralverteilung zu einer speziellen rotatorischen Position und/odereinem speziellen Abstand einen zuverlässigen Betrieb der medizinischen Bildgebungsvorrichtung sicherzustellen, und/oder lediglich eine ökonomische Anzahl von Referenzspektralverteilungen im Fertigungsprozess ermitteln zu müssen, wird die Referenzspektralverteilung mittels einer Interpolation aus Referenzspektralverteilungen, insbesondere gespeicherten Referenzspektralverteilungen eines bekannten Abstands oder bekannter Abstände und/oder einer bekannten rotatorischen Position oder bekannter rotatorischer Positionen ermittelt.
-
So kann beispielsweise bei Vorliegen einer Referenzspektralverteilung linksseitig der aktuell vorliegenden rotatorischen Position und Vorliegen einer weiteren Referenzspektralverteilung rechtsseitig der aktuell vorliegenden rotatorischen Position mittels der Interpolation ein entsprechender Zwischenbereich die aktuell vorliegende rotatorische Position abgedeckt werden und ein Kalibrieren trotz fehlender Referenzspektralverteilung für diese aktuell vorliegende rotatorische Position durchgeführt werden.
-
Eine „Interpolation“ beschreibt dabei ein mathematisches Vorgehen, bei welchem zu vorliegenden diskreten Daten, beispielsweise Messwerten, eine stetige Funktion gefunden wird, welche auch Zwischenbereiche der vorliegenden diskreten Daten abbilden. Die zwischen den diskreten Daten vorliegenden Werte werden daher im Sinne einer Approximation ermittelt und ergänzt, sodass entsprechend unbekannte Zwischenwerte möglichst präzise ermittelt werden.
-
In einem weiteren Aspekt wird die Aufgabe gelöst durch eine medizinische Bildgebungsvorrichtung, insbesondere ein medizinisches Endoskop-System oder ein medizinisches Exoskop-System, welches zum Durchführen eines Verfahrens gemäß einer oder mehrerer der vorig beschriebenen Ausführungsformen eingerichtet ist.
-
Eine solche medizinische Bildgebungsvorrichtung kann zuverlässig und genau Bilder und/oder Bildinformationen des Betrachtungsbereiches ermitteln, auch wenn beispielsweise ein optisches System und/oder eine Optik der medizinischen Bildgebungsvorrichtung einer Rotation unterliegt und/oder ein Abstand des jeweiligen optischen Systems und/oder der jeweiligen Optik zum Betrachtungsbereich verändert wird.
-
Beispielsweise ist ein solches Endoskop-System ein optisches Endoskop mit einem Okular sowie einer auf das Okular aufgesetzten Kamera mit beispielsweise einem Drehwinkelsensor zum Bestimmen einer rotatorischen Position der Kamera in Bezug zum optischen System des optischen Endoskops.
-
Im Weiteren wird die Erfindung anhand von Ausführungsbeispielen näher erläutert. Es zeigen
- 1 eine Untersuchungssituation mit einem Endoskop in schematischer Seitenansicht,
- 2 a) bis c) eine schematische Darstellung der Drehung eines Bildes mit mathematischer Winkeldarstellung,
- 3 einen Sichtausschnitt mit einem entsprechenden Bild des Endoskopes der 1,
- 4 eine Vergrößerung der Spitze des Endoskopes der 1 in einer schematischen Seitenansicht, sowie
- 5 ein Verfahren zum Kalibrieren entsprechender Bilder.
-
Eine Untersuchungssituation 101 zeigt ein Endoskop 103. Das Endoskop 103 weist eine Griff 105 zum Fassen und Bedienen des Endoskops 103 durch einen Bediener sowie ein Okular 107 zum Einblick für den Bediener auf. Auf das Endoskop 103 ist am Okular 107 eine Kamera 108 aufgesetzt, sodass ein eigentlich im Okular 107 für den Bediener sichtbar aufbereitete Bild mittels der Kamera 108 aufgenommen wird. Weiterhin weist das Endoskop 103 einen Schaft 109 mit einer Spitze 111 auf. Mittels des Endoskops 103 wird innerhalb einer Bauchdecke 121 ein Organ 123 betrachtet und ein Bild des Organs 123 erzeugt und von der Kamera 108 aus dem Okular 107 aufgenommen. Die Spitze 111 des Endoskops 103 ist dabei in einem Abstand 131 vom Organ 123 angeordnet. Ein Drehsensor 106, welcher ein optischer Inkrementgeber ist, ermittelt eine Verdrehung der Kamera 108 gegenüber dem Okular 107.
-
Das Endoskop 103 weist weiterhin Einrichtungen zum Beleuchten des Organs 123 auf, sodass das Organ sichtbar ist und als Nebeneffekt innerhalb der Bauchdecke 121 auch Reflexionen 141 entstehen. Diese Reflexionen 141 verfälschen das vom Endoskop 103 aufgenommene und dem Betrachter zugeführte Bild.
-
Weiterhin weist das Endoskop 103 eine Auswerteeinheit 161 auf, auf welcher sowohl das mit der Kamera 108 aufgenommene Bild des Organs 123 sowie zusätzliche Informationen angezeigt werden. So kann mittels der Auswerteeinheit 161 neben dem Bild des Organs 123 ein überlagertes Bild einer Multispektral-Imaging-(MSI)-Aufnahme dargestellt werden, entsprechend können Durchblutungs- oder auch Sauerstoffsättigungswerte des Organs 123 angezeigt werden.
-
Ein Bild 201 stellt eine entsprechende Aufnahme des Organs 123 dar. Das Bild 201 weist einen kreisförmigen Rand 203 sowie einem Nullradius 251 zugeordnet einen Indikator 205 auf. Das Bild 201 weist weiterhin eine Drehachse 211 auf. Beispielhaft sind hier eine Bildfläche 207 sowie eine Bildfläche 209 gezeigt, welche spektrale Verfälschungen durch die Reflexionen 141 aufweisen.
-
Wird das Bild 201 von der Ausrichtung auf den Nullradius 251 auf den Drehradius 252 um einen Drehwinkel 253 verdreht, so wandern auch die beispielhaft gezeigte Bildflächen 207 und 209 rotatorisch mit dem Bild 201. Weiterhin kann es zu einer Verschiebung der Drehachse 211 im Bild 201 durch eine Präzession kommen. Die Ursache hierfür ist beispielsweise ein nicht mittiges Anordnen einer entsprechenden Drehachse der Kamera 108 gegenüber dem Okular 107.
-
Wird das Bild 201 von der Ausrichtung auf den Nullradius 251 auf eine Ausrichtung zum Drehradius 252 um den Drehwinkel 253 verdreht, so wandern auch entsprechend beispielhaft dargestellte Referenzpunkte 254 im Bild 201 mit (vergleiche 2c)). Anhand dieser Referenzpunkte, welche beispielsweise signifikante Farbunterschiede oder Kontrastunterschiede abbilden, wird mittels einer Bildauswertung der Drehwinkel 253 bestimmt.
-
In einer Alternativen kann anhand einer Bildauswertung des Indikators 205 der Drehwinkel 253 bestimmt werden, dies kann auch redundant zum Bestimmen des Drehwinkels 253 mittels der Referenzpunkte 254 erfolgen. In einer weiteren Alternativen, welche auch redundant mit der Bildauswertung und/oder der Bildauswertung des Indikators 205 eingesetzt werden kann, wird der Drehwinkel 253 mittels des Drehsensors 106 ermittelt.
-
Ein Sichtausschnitt 301 mit einem Hintergrund 303 zeigt eine mögliche Darstellung auf der Auswerteeinheit 161. Beispielhaft ist hier ein Bild 304 gezeigt, welches sowohl ein optisches Bild sowie auch überlagerte farbliche Informationen bezüglich eines Multispektral-Imaging enthalten. Eine Ecke 305 des Bildes 304 dient dabei als Indikator für eine rotatorische Position, womit analog zum Drehwinkel 253 ein Drehwinkel des Bildes 304 bestimmbar ist.
-
Eine Vergrößerung 401 des Endoskops 103 zeigt neben einem Teil des Schaftes 109 sowie der Spitze 111 einen Bildleiter 403. Mittels des Bildleiters 403 wird das Bild des Organs 123 weitergeleitet und im Endoskop 103 in ein sichtbares Bild umgewandelt. Dieses sichtbare Bild kann dann mittels des Okulars 107 und der Kamera 108 auf der Auswerteeinheit 161 angezeigt werden. Weiterhin ist an einem Endbereich 404 der Spitze 111 eine Beleuchtung 405 angeordnet. Die Beleuchtung 405 ist dabei eine multispektrale Beleuchtung, sodass einzelne Spektralbereiche gezielt zum Beleuchten de Organs 123 erzeugt werden können. Damit ist das Feststellen von Gewebeeigenschaften mittels einer Spektralauswertung möglich.
-
Weiterhin weist die Spitze 111 einen Lasersensor 407 zum Bestimmen des Abstandes 131 auf.
-
In einer Alternativen kann auch die Spitze eines jeweiligen Endoskopes 103 oder Exoskopes drehbar sein, beispielsweise wenn statt der Kamera 108 ein integrierter Bildaufnehmer im Endoskop verwendet wird. Ein Drehsensor 409 tastet dabei einen Inkrementring (nicht gezeigt) am Schaft 109 des Endoskopes 103 ab. Mittels des Drehsensors 409 kann alternativ oder redundant zur beschriebenen Bildauswertung der Drehwinkel 253 bestimmt werden.
-
Folglich ist in der Untersuchungssituation 101 sowohl der Abstand 131 zum Organ 123 als auch der Drehwinkel 253, abhängig von der Kamera 108 oder alternativ oder zusätzlich von der Spitze 111, am Endoskop 103 zuverlässig und genau ermittelbar.
-
Ein entsprechendes Verfahren 501 zum Kalibrieren des Endoskops 103 sei detailliert wie folgt beschrieben:
-
Es erfolgt ein Aufnehmen 503 eines Bildes des Organes 123 in dem Abstand 131 mit dem Drehwinkel 253. Damit liegt ein verfälschtes Bild des Organes 123 vor. Es erfolgt dann ein Bestimmen 505 der Spektralverteilung dieser aufgenommenen Bildinformation, sodass die Spektralverteilung für die weitere Auswertung vorliegt. Diese Spektralverteilung wird einem Ermitteln 507 einer Spektralabweichung zugeführt. Das Ermitteln 507 greift dabei auf eine Referenzspektralverteilung 509 zurück, sodass mittels einer Differenzbildung eine Abweichung von dieser Referenzspektralverteilung ermittelt ist. Die Abweichung ist dabei die Abweichung der bestimmten Spektralverteilung von der Referenzspektralverteilung.
-
Sodann erfolgt mittels eines Überlagerns der Abweichung von der Referenzspektralverteilung mit der ursprünglich aufgenommenen Bildinformation derart, dass eine korrigierte Bildinformation 513 erzeugt wird. Die korrigierte Bildinformation 513 enthält dabei die aufgenommene Bildinformation, wobei die Spektralverteilung derart angepasst ist, dass diese der realen Spektralverteilung der Bildinformation des Organs 123 entspricht. Somit kann anhand dieser kalibrierten Messung mit der korrigierten Bildinformation eine exakte Auswertung der Bildinformation und Darstellung auf der Auswerteeinheit 161 erfolgen.
-
Bezugszeichenliste
-
- 101
- Untersuchungssituation
- 103
- Endoskop
- 105
- Griff
- 107
- Okular
- 108
- Kamera
- 109
- Schaft
- 111
- Spitze
- 121
- Bauchdecke
- 123
- Organ
- 131
- Abstand
- 141
- Reflexion
- 161
- Auswerteeinheit
- 201
- Bild
- 203
- Rand
- 205
- Indikator
- 207
- Bildfläche
- 209
- Bildfläche
- 211
- Drehachse
- 251
- Nullradius
- 252
- Drehradius
- 253
- Drehwinkel
- 254
- Referenzpunkte
- 301
- Sichtausschnitt
- 303
- Hintergrund
- 304
- Bild
- 305
- Ecke
- 401
- Vergrößerung
- 403
- Bildleiter
- 404
- Endbereich
- 405
- Beleuchtung
- 407
- Lasersensor
- 409
- Drehsensor
- 501
- Verfahren zum Kalibrieren
- 503
- Aufnehmen
- 505
- Bestimmen
- 507
- Ermitteln
- 509
- Referenzspektralverteilung
- 511
- Korrigieren
- 513
- korrigierte Bildinformation
