EP2996548A1 - Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten - Google Patents

Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten

Info

Publication number
EP2996548A1
EP2996548A1 EP14731152.6A EP14731152A EP2996548A1 EP 2996548 A1 EP2996548 A1 EP 2996548A1 EP 14731152 A EP14731152 A EP 14731152A EP 2996548 A1 EP2996548 A1 EP 2996548A1
Authority
EP
European Patent Office
Prior art keywords
skin
confocal
sensor
image
measurement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP14731152.6A
Other languages
English (en)
French (fr)
Inventor
Mark Weber
Jürgen VALENTIN
Marcus Grigat
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NanoFocus AG
Original Assignee
Mikroskin GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mikroskin GmbH filed Critical Mikroskin GmbH
Publication of EP2996548A1 publication Critical patent/EP2996548A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062—Arrangements for scanning
    • A61B5/0068—Confocal scanning
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/0004—Microscopes specially adapted for specific applications
    • G02B21/002—Scanning microscopes
    • G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0028—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders specially adapted for specific applications, e.g. for endoscopes, ophthalmoscopes, attachments to conventional microscopes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/0004—Microscopes specially adapted for specific applications
    • G02B21/002—Scanning microscopes
    • G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0036—Scanning details, e.g. scanning stages
    • G02B21/004—Scanning details, e.g. scanning stages fixed arrays, e.g. switchable aperture arrays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/0004—Microscopes specially adapted for specific applications
    • G02B21/002—Scanning microscopes
    • G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0052—Optical details of the image generation
    • G02B21/006—Optical details of the image generation focusing arrangements; selection of the plane to be imaged
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal

Definitions

  • the invention relates to a method for the 3D measurement of the skin surface and skin layers near the surface by means of a confocal sensor with integrated color camera arranged in a handheld device.
  • confocal technique is used to measure the topography of the surface of materials in the industrial sector. From the biological field, confocal microscopy is also known, namely for the acquisition of sectional images of certain surfaces due to the high
  • Deep discrimination of applied technology usually with fluorescent markers, is performed.
  • fluorescent markers In addition, it is known that infrared light can be illuminated in the skin structure and observed microscopically within it.
  • Skin surface or skin layers close to the surface are scanned one after the other point by point to generate an image composed of these points.
  • Dotting method known to be able to perform investigations in the deeper area of the skin Dotting method known to be able to perform investigations in the deeper area of the skin.
  • Dotting method for example for the diagnosis of skin cancer has the disadvantage that carcinomas must be opened and thus an increased risk of further spread by scattering arises.
  • the invention has for its object to be able to carry out a process with a single device, with the help of both the skin surface in vivo
  • the structure of the skin can be determined a few millimeters deep, with the absorption rate and the
  • the invention solves this problem by a method for 3D measurement of the skin surface and near-surface skin layers by means of a in a
  • Handset arranged confocal sensor with integrated color camera the handset is approached with a sensor head by the operator to the examined body of the skin and a color image of the skin surface is recorded, after which the sensor is automatically switched to confocal mode, in which one of a variety of simultaneous capture of all for one
  • a device for carrying out the method consisting of a arranged in a portable housing confocal sensor with a stationary microlens array, the confocal sensor having a monochromatic radiation source, further comprising a color overview camera with a white light radiation source, said the camera can be switched into the measuring path by means of a beam splitter, and both the camera and the confocal sensor are connected to a signal evaluation unit. This can be connected to an external monitor.
  • Monitor is first visited by a several millimeters wide field of view, the skin site in question. This is simplified by the very compact dimensions of the sensor head, whose dimension does not significantly exceed the measuring field size. This is done first with the help of visual
  • the sensor head Observation of the sensor head brought to the desired location and then approached by means of the life color monitor image of the area to be examined. Since the image from the sensor head is sharp to a distance of a few millimeters (about 5 mm), it can be placed on the skin or moved a short distance above it. If the area in question is found, the sensor will be within less
  • Milliseconds switched to the confocal operation, which absorbs within a few seconds consisting of many hundreds of confocal images stack (typically 200 to 1000 images).
  • an image for this stack is generated in each case in real time by the simultaneous use of a number of pixels required for the image by the use of a stationarily arranged microlens array.
  • a scanner located in the sensor ensures that the entire axial measuring range (Z direction) is traversed.
  • recorded image stack consists of equidistant frames.
  • microlens array also has the advantage that it contributes to the compactness of the device in that it is also part of the optical system itself.
  • the previously recorded color image is displayed as an overlay of the 3 D topography.
  • striking pigmentations can be superimposed microscopically with the present 3 D topography.
  • the measuring field can be automatically extended (see claim 2). After completion of the pile recording then follows a z. B.
  • High-speed real-time image are generated, for. B. to measure the perfusion of special areas.
  • the confocal sensor has a matrix sensor in CMOS or CCD technology, as well as the color overview camera.
  • the confocal transmitter has a "look" inside the skin
  • monochromatic radiation source in this case an infrared radiation source, which radiates in the range between 800 and 950 nm, wherein selected according to claim 8 as the measurement wavelength 850 nm or 940 nm.
  • the device according to the invention can be used in cancer diagnostics for the early detection, observation and diagnosis of changes.
  • cosmetic effects can be observed, e.g. the penetration depth of cosmetic preparations as well as the depth effect of the treatment. It is also possible to determine the thickness and structure in the case of burn injuries or skin grafts, the results of the investigation being obtained within a few seconds thanks to the technique according to the invention by means of a single device.
  • FIGS. 1 and 2 The invention is illustrated and explained below with reference to FIGS. 1 and 2:
  • FIG. 1 shows schematically the optical structure of the device according to the invention
  • 2 shows a more detailed illustration of the structure of the confocal sensor.
  • FIG. 3 Flowchart of the measurement
  • the optical structure of the device according to the invention is shown schematically. It consists essentially of the groups A and B, wherein in group A the confocal measurement setup and in group B a digital color camera is shown.
  • the reference numeral 1 denotes the object plane (in this case, the skin surface).
  • a focusing lens which emitted by the collimated radiation source 13 monochromatic light (infrared) and that of the also collimated
  • White light source 12 originating light focused on the object plane 1.
  • the light reflected from the object plane is imaged via a further focusing lens 4 and the microlens array 5 arranged in the intermediate image plane through the imaging optics 7, which consists of the elements 21, 22, 23 from FIG. 2, on a CCD matrix sensor 8 the beam splitter 3 and the imaging optics 10 on the
  • Matrix sensor 11 (camera).
  • the lens 4 is the only moving part of the assembly, since it is for the
  • Focusing is responsible for the layered image acquisition.
  • FIG. 1 depicts the foci of the microlenses on the object 19.
  • the light reflected by the object 19 is focused on the previously described elements 16, 5 and 6 via the focusing optics 23 on the aperture 21 and directed via the lens 22 to the CCD sensor.
  • the aperture diameter of the aperture 21 is chosen so that it corresponds to the emission surface of the light source 13.
  • the group B is between the color camera 1 and a beam splitter 9 the
  • Focusing optics 10 arranged. About the beam splitter 9, the light of the white light radiation source 12 is deflected into the optical path of the confocal sensor A, where it is directed by means of the semitransparent mirror 3 (beam splitter) on the object plane 1 of the object 19.
  • FIG. 3 shows the time sequence of a measurement.
  • the mode 100 indicates that a recording of a life color image stream of the measurement object 19 takes place by means of the color camera (group B), the duration of this recording being user-controlled (overview image).
  • the camera mode switches to confocal mode.
  • the focal plane 1 is pushed through the entire volume of the measurement object 19.
  • Measurement can be seen inside the skin, wherein as indicated above, respectively by axial scanning a stack of images is generated.
  • the measured data in slice images of the skin are calculated and displayed on an (external) monitor, also not shown.
  • mode 100 a life color image can again be displayed, while in mode 300 confocal is finally focused to a specific depth and a stream of images is recorded.
  • mode 300 z. B. in a certain depth, the blood circulation can be displayed in real time and / or evaluated.

Landscapes

  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Chemical & Material Sciences (AREA)
  • Optics & Photonics (AREA)
  • Analytical Chemistry (AREA)
  • Theoretical Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Dermatology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Ophthalmology & Optometry (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der Messdatenaufnahme eine Auswertung derart erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.

Description

Verfahren und Vorrichtung zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten
Die Erfindung betrifft ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera.
Bekannt ist es, dass die Konfokaltechnik eingesetzt wird, um im industriellen Bereich die Topographie der Oberfläche von Materialien zu messen. Aus dem biologischen Bereich ist die Konfokalmikroskopie ebenfalls bekannt, nämlich für die Aufnahme von Schnittbildern von bestimmten Oberflächen, die aufgrund der hohen
Tiefendiskriminierung der angewandten Technik, meistens mit Fluoreszenzmarkern, durchgeführt wird. Darüber hinaus ist bekannt, dass mit infrarotem Licht in die Hautstruktur hineingeleuchtet werden kann und innerhalb dieser mikroskopisch beobachtet werden kann.
In der US 2010/0214562 A1 ist ein Gerät beschrieben, mit dessen Hilfe die
Hautoberfläche oder oberflächennahe Hautschichten Punkt für Punkt nacheinander abgescannt wird/werden und so ein aus diesen Punkten zusammengesetztes Bild generiert wird.
Ein ähnliches Gerät ist aus der US 2007/0263 226 A1 bekannt. Hier werden pinhole- ähnliche Modulatorarrays eingesetzt, wobei bei jeder Messung beispielsweise fünf Punkte auf der Haut gleichzeitig gescannt werden können. Danach wird das Array lateral verschoben und weitere fünf Punkte werden gescannt. Beide Geräte und die mit Ihnen geführten Verfahren haben somit den Nachteil, dass eine schnelle Messung nicht möglich ist, was zum einen dem erforderlichen Lateral- Scann und zum anderen der schwachen Lichtausbeute geschuldet ist. Somit erscheinen beide bekannte Geräte in der Handhabung unbefriedigend, da durch die Langsamkeit der Messung und durch die Lichtschwäche Verwackelungen zu erwarten sind.
Darüber hinaus sind in der Medizin tomographische Verfahren sowie
Punktierungsverfahren bekannt, um im tieferen Bereich der Haut Untersuchungen durchführen zu können.
Tomographische Verfahren sind aufwendig und kostspielig. Die
Punktierungsmethode, beispielsweise zur Diagnose von Hautkrebs hat den Nachteil, dass Karzinome geöffnet werden müssen und somit ein erhöhtes Risiko der weiteren Ausbreitung durch Streuung entsteht.
Der Erfindung liegt die Aufgabe zugrunde, mit einem einzigen Gerät ein Verfahren ausführen zu können, mit dessen Hilfe sowohl die Hautoberfläche in vivo
dreidimensional vermessen als auch in vivo die Struktur der Haut einige Millimeter tief bestimmt werden kann, wobei die Aufnahmegeschwindigkeit und die
Lichtausbeute unter größtmöglicher Vermeidung beweglicher Elemente gegenüber dem Stand der Technik deutlich erhöht ist.
Die Erfindung löst diese Aufgabe durch ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem
Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein
komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der Messdatenaufnahme eine Auswertung derart erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.
Die Aufgabe wird ferner durch eine Vorrichtung zur Durchführung des Verfahrens gelöst, bestehend aus einem in einem tragbaren Gehäuse angeordneten konfokalen Sensor mit einem stationär angeordneten Mikrolinsenarray , wobei der konfokale Sensor eine monochromatische Strahlungsquelle aufweist, bestehend weiter aus einer Farbübersichtskamera mit einer Weißlicht-Strahlungsquelle, wobei die Kamera mittels eines Strahlteilers in den Messweg zuschaltbar ist und sowohl Kamera als auch Konfokalsensor mit einer Signalauswerteeinheit verbunden ist. Diese kann mit einem externen Monitor verbunden sein.
Es handelt sich somit um einen in der Hand zu haltenden Messkopf, der auf die Hautoberfläche aufgesetzt wird und dort innerhalb weniger Sekunden eine
vollständige Charakterisierung durchführen kann, nämlich:
- Aufnahme eines Farbbildes
- Messung der 3 D-Struktur der Hautoberfläche
- 3 D-Aufnahme (Kontrastbild) der inneren Hautstruktur.
Mittels der im Sensor integrierten Farbübersichtskamera und eines
angeschlossenen Monitors wird zunächst durch ein mehrere Millimeter großes Messfeld die betreffende Hautstelle aufgesucht. Vereinfacht wird dies durch die sehr kompakten Abmessungen des Sensorkopfs, dessen Dimension die Messfeldgröße nicht wesentlich übersteigt. Hierdurch wird zunächst mit Hilfe der visuellen
Beobachtung der Sensorkopf an die gewünschte Stelle herangeführt und dann mittels dem Life-Farb-Monitorbild der zu untersuchende Bereich angefahren. Da das Bild vom Sensorkopf aus bis einige Millimeter (etwa 5 mm) Entfernung scharf ist, kann auf die Haut aufgesetzt oder in geringem Abstand darüber hinweg bewegt werden. Ist der betreffende Bereich gefunden, so wird der Sensor innerhalb weniger
Millisekunden auf den konfokalen Betrieb umgeschaltet, der innerhalb weniger Sekunden einen aus vielen hundert Konfokalbildern bestehenden Bildstapel aufnimmt (typisch sind 200 bis 1000 Bilder). Dabei wird durch den Einsatz eines stationär angeordneten Mikrolinsenarrays in Echtzeit durch simultane Aufnahme der für das Bild erforderlichen Anzahl von Bildpunkten jeweils ein Bild für diesen Stapel erzeugt. Während der Bildaufnahme sorgt ein im Sensor befindlicher Scanner dafür, dass der gesamte axiale Messbereich (Z-Richtung) durchfahren wird. Der
aufgenommene Bildstapel besteht aus äquidistanten Einzelbildern.
Der Einsatz eines Mikrolinsenarrays hat darüber hinaus den Vorteil, dass es dadurch, dass es auch Teil des optischen Systems an sich ist, zur Kompaktheit des Gerätes beiträgt.
Nach der Messdatenaufnahme erfolgt dreierlei Auswertung:
1. Die Position des obersten (dem Sensorkopf am nächsten liegenden)
Reflexes wird ausgewertet. Hieraus ergibt sich die 3 D-Topographie.
2. Es werden wie bei der Computertomographie Schnittbilder durch die
Hautstruktur gelegt. Diese können hinsichtlich Struktur und Konstrast analysiert werden.
3. Das zuvor aufgenommene Farbbild wird als Overlay der 3 D-Topographie dargestellt. So können auffällige Pigmentierungen mit der vorliegenden 3 D- Topographie mikroskopisch überlagert werden.
Durch mehrmalige Aufnahme kann das Messfeld automatisch erweitert werden (siehe Anspruch 2). Nach Abschluss der Stapelaufnahme folgt dann ein z. B.
akustisches Signal, welches der Bedienperson signalisiert, dass eine neue seitlich versetzte Stapelaufnahme gefahren werden kann. Die verschiedenen Aufnahmen können dann -ähnlich wie beim Stitching- zu einem Gesamtbild zusammengesetzt werden. Gemäß Anspruch 4 ist vorgesehen, dass zusätzlich nach der oben beschriebenen Auswertung durch Fokussierung auf einen interessanten Tiefenschnitt ein
Highspeed-EchtzeitBild erzeugt werden, z. B. zur Messung der Durchblutung spezieller Bereiche.
Gemäß Anspruch 6 ist vorgesehen, dass der Konfokalsensor einen Matrixsensor in CMOS- oder CCD-Technik aufweist, ebenso die Farbübersichtskamera.
Zum„Blick" ins Innere der Haut verfügt der Konfokalsender über eine
monochromatische Strahlungsquelle, in diesem Fall eine Infrarot-Strahlungsquelle, die im Bereich zwischen 800 und 950 nm strahlt, wobei gemäß Anspruch 8 als Messwellenlänge 850 nm oder 940 nm gewählt wird.
Angewendet werden kann das erfindungsgemäße Gerät in der Krebsdiagnostik zur Früherkennung, Beobachtung und zur Diagnose von Veränderungen. Darüber hinaus können kosmetische Effekte beobachtet werden, wie z.B. die Eindringtiefe kosmetischer Präparate sowie der Tiefeneffekt der Behandlung. Auch Dicke und Struktur bei Brandverletzungen oder bei Hauttransplantationen können ermittelt werden, wobei die Untersuchtungsergebnisse dank der erfindungsgemäßen Technik mittels eines einzigen Gerätes innerhalb von wenigen Sekunden erhalten werden.
Die Erfindung wird im folgenden anhand der Figuren 1 und 2 dargestellt und erläutert:
Es zeigen:
Fig. 1 schematisch den optischen Aufbau des erfindungsgemäßen Gerätes; Fig. 2 ausführlichere Darstellung des Aufbaus des Konfokalsensors Fig. 3 Ablaufdiagramm der Messung In der Figur 1 ist schematisch der optische Aufbau des erfindungsgemäßen Gerätes dargestellt. Es besteht im Wesentlichen aus den Gruppen A und B, wobei in der Gruppe A der konfokale Messaufbau und in der Gruppe B eine digitale Farbkamera dargestellt ist.
Mit dem Bezugszeichen 1 ist die Objektebene (in diesem Fall die Hautoberfläche) bezeichnet. Im Gerät selber ist mit dem Bezugszeichen 2 eine Fokussierlinse bezeichnet, die das von der kollimierten Strahlungsquelle 13 ausgesendete monochromatische Licht (infrarot) sowie das von der ebenfalls kollimierten
Weißlichtquelle 12 stammende Licht auf die Objektebene 1 fokussiert. Das von der Objektebene reflektierte Licht wird über eine weitere Fokussierlinse 4 und dem in der Zwischenbildebene angeordneten Mikrolinsenarray 5 durch die Abbildungsoptik 7, die aus den Elementen 21 , 22, 23 aus Figur 2 besteht, auf einem CCD-Matrixsensor 8 abgebildet, bzw. über den Strahlteiler 3 und die Abbildungsoptik 10 auf den
Matrixsensor 11 (Kamera).
Die Linse 4 ist das einzige bewegliche Teil der Anordnung, da sie für die
Fokussierung bei der schichtweisen Bildaufnahme verantwortlich ist.
Wie aus Figur 2 hervorgeht, handelt es sich bei 5 um ein rechteckiges oder ein quadratisches Mikrolinsenarray, das stationär im Strahlengang angeordnet ist und es erlaubt, dass simultan in Echtzeit ein komplettes„Schichtbild" aufgenommen werden kann. Derartige Mikrolinsenarrays haben sehr kleine Linsenabstände (z. B. 30 μητι), wobei die Linsen typischerweise rund und in einer quadratischen oder hexagonalen Packung angeordnet sind. In der in Figur 2 dargestellten Anordnung, die eine zentrale Komponente des konfokalen Messsystems darstellt, wird das Licht der Lichtquelle 13 von einer Kollektorlinse 14 über einen Strahlteiler 6 als paralleles Licht auf das Mikrolinsenarray 5 projiziert. Die Mikrolinsen 5 erzeugen viele verkleinerte Abbilder der Lichtquelle. Die Fokussiereinheit 16 (Bezugszeichen 2 und 4 aus
Figur 1) bildet die Foki der Mikrolinsen auf das Objekt 19 ab. Das vom Objekt 19 reflektierte Licht wird über die zuvor beschriebenen Elemente 16, 5 und 6 über die Fokussieroptik 23 auf die Blendenöffnung 21 fokussiert und über die Linse 22 auf den CCD-Sensor gerichtet. Der Öffnungsdurchmesser der Blende 21 ist so gewählt, dass er der Emissionsfläche der Lichtquelle 13 entspricht.
In der Gruppe B ist zwischen der Farbkamera 1 und einem Strahlteiler 9 die
Fokussieroptik 10 angeordnet. Über den Strahlteiler 9 wird das Licht der Weißlicht- Strahlungsquelle 12 in den optischen Weg des Konfokalsensors A eingelenkt, wo es mittels des halbdurchlässigen Spiegels 3 (Strahlteiler) auf die Objektebene 1 des Objektes 19 gerichtet wird.
In der Figur 3 ist der zeitliche Ablauf einer Messung dargestellt. Wobei hier mit der Mode 100 angedeutet wird, dass eine Aufnahme eines Life-Farbbildstreams des Messobjektes 19 mittels der Farbkamera (Gruppe B) erfolgt, wobei die Dauer dieser Aufnahme anwendergesteuert ist (Übersichtsbild).
Im Modus 200 wird vom Kameramodus auf den Konfokalmodus umgeschaltet. Es erfolgt eine schnelle Konfokalmessung mit Tiefenscan (angedeutet durch den schrägen Verlauf). Dabei wird die Fokusebene 1 durch das gesamte Volumen des Messobjektes 19 geschoben.
Hieraus ergibt sich während der Messung zunächst ein Übersichtsbild der
Hautoberfläche, wonach dann durch die konfokale Messung die 3 D-Topographie der Hautoberfläche bis in mehrere Millimeter Tiefe erfolgt.
Durch die Verwendung einer Infrarotlichtquelle kann während der konfokalen
Messung ins Innere der Haut geschaut werden, wobei wie oben angegeben jeweils durch axiales Scannen ein Stapel Bilder erzeugt wird. In der nicht dargestellten Auswerteeinheit werden die gemessenen Daten in Schichtbildern der Haut (auch volumenmäßig) berechnet und auf einem ebenfalls nicht dargestellten (externen) Monitor angezeigt.
Im weiteren Verlauf (Mode 100) kann erneut ein Life- Farbbild dargestellt werden, während in der Mode 300 schließlich konfokal auf eine bestimmte Tiefe fokussiert wird und ein Stream von Bildern aufgenommen wird. Mit der Messung in Mode 300 kann z. B. in bestimmter Tiefe die Blutzirkulation in Echtzeit dargestellt und/ oder ausgewertet werden.

Claims

Patentansprüche
1. Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem
Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der
Messdatenaufnahme eine Auswertung derart erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.
2. Verfahren nach Anspruch 1 ,
dadurch gekennzeichnet, dass durch wiederholte Aufnahme das Messfeld erweitert und die einzelnen Aufnahmestapel zu einem Gesamtbild zusammengesetzt werden (Stitching).
Verfahren nach Anspruch 2,
dadurch gekennzeichnet,
dass nach Abschluss einer Stapelaufnahme ein Signal für die Bedienperson zur Aufnahme des nächsten Bildstapels erfolgt.
Verfahren nach einem der Ansprüche 1 bis 3,
dadurch gekennzeichnet,
dass zur Generierung eines Schnittbilds in Echtzeit gezielt konfokal auf eine bestimmte Hauttiefe fokussiert und eine kontinuierliche Reihe (Stream) von Bildern aufgenommen wird.
Vorrichtung zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 4, bestehend aus einem in einem tragbaren Gehäuse angeordneten
konfokalen Sensor (A) mit einem stationär angeordneten Mikrolinsenarray (5), wobei der konfokale Sensor (A) eine monochromatische Strahlungsquelle (13) aufweist, bestehend weiter aus einer Farbübersichtskamera (B) mit einer Weißlicht-Strahlungsquelle (12), wobei die Kamera mittels eines Strahlteilers (3) in den Messweg zuschaltbar ist und sowohl Kamera (B) als auch
Konfokalsensor (A) mit einer Signalauswerteeinheit verbunden ist.
Vorrichtung nach Anspruch 5,
dadurch gekennzeichnet,
dass der Konfokalsensor (A) einen CCD- oder CMOS-Matrixsensor (8) und auch die Farbübersichtskamera (B) einen Matrix-Sensor (11) aufweist.
Vorrichtung nach einem der vorhergehenden Ansprüche,
dadurch gekennzeichnet,
dass die Strahlungsquelle (13) des Konfokalsensors (A) eine im Bereich zwischen 800 und 950 nm emittierende Infrarotquelle ist.
Vorrichtung nach Anspruch 7, dadurch gekennzeichnet,
dass die Wellenlänge 850 nm oder 940 nm beträgt.
EP14731152.6A 2013-05-15 2014-05-12 Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten Withdrawn EP2996548A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102013008278.1A DE102013008278B4 (de) 2013-05-15 2013-05-15 Verfahren und Vorrichtung zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten
PCT/EP2014/001274 WO2014183860A1 (de) 2013-05-15 2014-05-12 Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten

Publications (1)

Publication Number Publication Date
EP2996548A1 true EP2996548A1 (de) 2016-03-23

Family

ID=50976577

Family Applications (1)

Application Number Title Priority Date Filing Date
EP14731152.6A Withdrawn EP2996548A1 (de) 2013-05-15 2014-05-12 Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten

Country Status (4)

Country Link
US (1) US9687154B2 (de)
EP (1) EP2996548A1 (de)
DE (1) DE102013008278B4 (de)
WO (1) WO2014183860A1 (de)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105411532A (zh) * 2015-12-30 2016-03-23 广东欧珀移动通信有限公司 皮肤状况检测方法和装置
EP3414612A4 (de) 2016-02-11 2020-03-04 Montana State University Mikroskopobjektiv mit integrierter breitfeldkamera und strahlabtastvorrichtung
US11122206B2 (en) 2016-11-08 2021-09-14 Preh Holding, Llc Personal care device with camera
US10511777B2 (en) 2016-11-08 2019-12-17 Thomas Nichols Personal care device with camera
CN108267083A (zh) * 2017-12-28 2018-07-10 顺丰科技有限公司 一种3d相机体积测量方法及系统
CN108399596B (zh) * 2018-02-07 2020-12-18 深圳奥比中光科技有限公司 深度图像引擎及深度图像计算方法
CN108449529B (zh) 2018-02-07 2020-12-18 深圳奥比中光科技有限公司 深度计算处理器及移动终端
CN109543563B (zh) * 2018-11-01 2021-08-24 Oppo广东移动通信有限公司 安全提示方法、装置、存储介质及电子设备
USD1000624S1 (en) 2019-12-27 2023-10-03 Thomas Nichols Personal care device with camera
US20210353213A1 (en) * 2020-05-15 2021-11-18 MyWoundDoctor, LLC System and method of wound assessment and treatment
CN115605124A (zh) * 2020-05-26 2023-01-13 登士柏西诺德公司（Us） 用于多模态软组织诊断的方法和装置
CN112229338B (zh) * 2020-11-27 2022-05-17 中国计量科学研究院 一种无标准片对零的双光谱共焦测量厚度方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070003114A1 (en) * 2003-08-29 2007-01-04 Hendriks Robert Frans M Biometrical identification device
DE602005009432D1 (de) * 2004-06-17 2008-10-16 Cadent Ltd Verfahren und Gerät zur Farbbildformung einer dreidimensionalen Struktur
US7460248B2 (en) * 2006-05-15 2008-12-02 Carestream Health, Inc. Tissue imaging system
DE102008039643A1 (de) * 2008-08-25 2010-03-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und Vorrichtung zur interferometrischen Messung dreidimensionaler biometrischer Merkmale in Haut
US8300220B2 (en) * 2009-02-25 2012-10-30 Vanderbilt University Device and method for non-invasively evaluating a target of interest of a living subject
DE102011082759A1 (de) * 2011-09-15 2012-07-26 Henkel Ag & Co. Kgaa Verfahren zur individualisierten Hautbehandlung
BR112015003464B1 (pt) * 2012-08-15 2022-01-18 Lucid, Inc Sistemas e processos para formação de imagens de tecido

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None *
See also references of WO2014183860A1 *

Also Published As

Publication number Publication date
US9687154B2 (en) 2017-06-27
WO2014183860A1 (de) 2014-11-20
DE102013008278A1 (de) 2014-11-20
DE102013008278B4 (de) 2020-11-05
US20160081553A1 (en) 2016-03-24

Similar Documents

Publication Publication Date Title
EP2996548A1 (de) Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten
EP3467432B1 (de) Verfahren zum betreiben einer vorrichtung zum erfassen der dreidimensionalen geometrie von objekten
EP2443503A2 (de) Vorrichtung und verfahren für die mehr-photonen-fluoreszenzmikroskopie zur gewinnung von informationen aus biologischem gewebe
DE10043162A1 (de) Lichtleitfaserbündel und Endoskopeinrichtung
DE3422144A1 (de) Geraet zur darstellung flaechenhafter bereiche des menschlichen auges
EP3568667B1 (de) Messsystem und verfahren zur kombinierten erfassung der oberflächentopografie und hyperspektralen bildgebung
DE102004002918B4 (de) Vorrichtung zur Untersuchung der Haut
EP2993464B1 (de) Vorrichtung und verfahren zur qualitätskontrolle transparenter objekte
DE112006003666T5 (de) Vorrichtung zur optischen Kohärenztomographie und Messkopf
DE102007047461A1 (de) Verfahren und optische Anordnung zur Untersuchung einer Probe
DE102010036447A1 (de) Verfahren zur Ermittlung von Materialcharakteristika
EP2508841B1 (de) Verfahren und System zur optischen Kohärenztomographie
DE10039182A1 (de) Endoskopsystem,optisches Abtastsystem und Polygonspiegel
EP2508843B1 (de) Verfahren und System zur optischen Kohärenztomographie
EP3768153B1 (de) Multimodales bildgebungssystem und verfahren zur nicht-invasiven untersuchung eines untersuchungsobjekts
DE4341063A1 (de) Vorrichtung und Verfahren zur optischen, ortsauflösenden Bestimmung von Dichteverteilungen in biologischem Gewebe
EP2508842B1 (de) Verfahren und System zur optischen Kohärenztomographie
EP3741290B1 (de) Vorrichtung zur abbildungserzeugung von hautläsionen
EP2208460A1 (de) Erkennung und Lokalisierung von Gewebe durch Lichtanalyse
EP2327043B1 (de) Vorrichtung zur aufnahme von biometrischen daten
EP4010145A1 (de) Verfahren zum analysieren einer werkstückoberfläche für einen laserbearbeitungsprozess und eine analysevorrichtung zum analysieren einer werkstückoberfläche
DE102017118304A1 (de) Vorrichtung und Verfahren zum Schneiden einer Probe
DE102015106806B4 (de) Vorrichtung zum optischen Inspizieren von Objekten
DE102013222349B3 (de) Vorrichtung und verfahren zur erfassung eines materials
DE102010028913A1 (de) Mikroskop und Verfahren zur Hautuntersuchung

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20151215

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAX Request for extension of the european patent (deleted)
RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: MIKROSKIN GMBH

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20190520

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: NANOFOCUS AG

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20201201