WO2014183860A1 - Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten - Google Patents
Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten Download PDFInfo
- Publication number
- WO2014183860A1 WO2014183860A1 PCT/EP2014/001274 EP2014001274W WO2014183860A1 WO 2014183860 A1 WO2014183860 A1 WO 2014183860A1 EP 2014001274 W EP2014001274 W EP 2014001274W WO 2014183860 A1 WO2014183860 A1 WO 2014183860A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- skin
- confocal
- sensor
- image
- measurement
- Prior art date
Links
- 238000005259 measurement Methods 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 title claims abstract description 19
- 238000012876 topography Methods 0.000 claims abstract description 8
- 230000005855 radiation Effects 0.000 claims description 9
- 238000011156 evaluation Methods 0.000 claims description 7
- 239000011159 matrix material Substances 0.000 claims description 5
- 238000001514 detection method Methods 0.000 abstract description 2
- 230000003287 optical effect Effects 0.000 description 4
- 239000002537 cosmetic Substances 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000001727 in vivo Methods 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 201000009030 Carcinoma Diseases 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 208000012641 Pigmentation disease Diseases 0.000 description 1
- 208000000453 Skin Neoplasms Diseases 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 238000004624 confocal microscopy Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 230000010412 perfusion Effects 0.000 description 1
- 230000019612 pigmentation Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 201000000849 skin cancer Diseases 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0068—Confocal scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0028—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders specially adapted for specific applications, e.g. for endoscopes, ophthalmoscopes, attachments to conventional microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0036—Scanning details, e.g. scanning stages
- G02B21/004—Scanning details, e.g. scanning stages fixed arrays, e.g. switchable aperture arrays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0052—Optical details of the image generation
- G02B21/006—Optical details of the image generation focusing arrangements; selection of the plane to be imaged
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
Definitions
- the invention relates to a method for the 3D measurement of the skin surface and skin layers near the surface by means of a confocal sensor with integrated color camera arranged in a handheld device.
- confocal technique is used to measure the topography of the surface of materials in the industrial sector. From the biological field, confocal microscopy is also known, namely for the acquisition of sectional images of certain surfaces due to the high
- Deep discrimination of applied technology usually with fluorescent markers, is performed.
- fluorescent markers In addition, it is known that infrared light can be illuminated in the skin structure and observed microscopically within it.
- Skin surface or skin layers close to the surface are scanned one after the other point by point to generate an image composed of these points.
- Dotting method known to be able to perform investigations in the deeper area of the skin Dotting method known to be able to perform investigations in the deeper area of the skin.
- Dotting method for example for the diagnosis of skin cancer has the disadvantage that carcinomas must be opened and thus an increased risk of further spread by scattering arises.
- the invention has for its object to be able to carry out a process with a single device, with the help of both the skin surface in vivo
- the structure of the skin can be determined a few millimeters deep, with the absorption rate and the
- the invention solves this problem by a method for 3D measurement of the skin surface and near-surface skin layers by means of a in a
- Handset arranged confocal sensor with integrated color camera the handset is approached with a sensor head by the operator to the examined body of the skin and a color image of the skin surface is recorded, after which the sensor is automatically switched to confocal mode, in which one of a variety of simultaneous capture of all for one
- a device for carrying out the method consisting of a arranged in a portable housing confocal sensor with a stationary microlens array, the confocal sensor having a monochromatic radiation source, further comprising a color overview camera with a white light radiation source, said the camera can be switched into the measuring path by means of a beam splitter, and both the camera and the confocal sensor are connected to a signal evaluation unit. This can be connected to an external monitor.
- Monitor is first visited by a several millimeters wide field of view, the skin site in question. This is simplified by the very compact dimensions of the sensor head, whose dimension does not significantly exceed the measuring field size. This is done first with the help of visual
- the sensor head Observation of the sensor head brought to the desired location and then approached by means of the life color monitor image of the area to be examined. Since the image from the sensor head is sharp to a distance of a few millimeters (about 5 mm), it can be placed on the skin or moved a short distance above it. If the area in question is found, the sensor will be within less
- Milliseconds switched to the confocal operation, which absorbs within a few seconds consisting of many hundreds of confocal images stack (typically 200 to 1000 images).
- an image for this stack is generated in each case in real time by the simultaneous use of a number of pixels required for the image by the use of a stationarily arranged microlens array.
- a scanner located in the sensor ensures that the entire axial measuring range (Z direction) is traversed.
- recorded image stack consists of equidistant frames.
- microlens array also has the advantage that it contributes to the compactness of the device in that it is also part of the optical system itself.
- the previously recorded color image is displayed as an overlay of the 3 D topography.
- striking pigmentations can be superimposed microscopically with the present 3 D topography.
- the measuring field can be automatically extended (see claim 2). After completion of the pile recording then follows a z. B.
- High-speed real-time image are generated, for. B. to measure the perfusion of special areas.
- the confocal sensor has a matrix sensor in CMOS or CCD technology, as well as the color overview camera.
- the confocal transmitter has a "look" inside the skin
- monochromatic radiation source in this case an infrared radiation source, which radiates in the range between 800 and 950 nm, wherein selected according to claim 8 as the measurement wavelength 850 nm or 940 nm.
- the device according to the invention can be used in cancer diagnostics for the early detection, observation and diagnosis of changes.
- cosmetic effects can be observed, e.g. the penetration depth of cosmetic preparations as well as the depth effect of the treatment. It is also possible to determine the thickness and structure in the case of burn injuries or skin grafts, the results of the investigation being obtained within a few seconds thanks to the technique according to the invention by means of a single device.
- FIGS. 1 and 2 The invention is illustrated and explained below with reference to FIGS. 1 and 2:
- FIG. 1 shows schematically the optical structure of the device according to the invention
- 2 shows a more detailed illustration of the structure of the confocal sensor.
- FIG. 3 Flowchart of the measurement
- the optical structure of the device according to the invention is shown schematically. It consists essentially of the groups A and B, wherein in group A the confocal measurement setup and in group B a digital color camera is shown.
- the reference numeral 1 denotes the object plane (in this case, the skin surface).
- a focusing lens which emitted by the collimated radiation source 13 monochromatic light (infrared) and that of the also collimated
- White light source 12 originating light focused on the object plane 1.
- the light reflected from the object plane is imaged via a further focusing lens 4 and the microlens array 5 arranged in the intermediate image plane through the imaging optics 7, which consists of the elements 21, 22, 23 from FIG. 2, on a CCD matrix sensor 8 the beam splitter 3 and the imaging optics 10 on the
- Matrix sensor 11 (camera).
- the lens 4 is the only moving part of the assembly, since it is for the
- Focusing is responsible for the layered image acquisition.
- FIG. 1 depicts the foci of the microlenses on the object 19.
- the light reflected by the object 19 is focused on the previously described elements 16, 5 and 6 via the focusing optics 23 on the aperture 21 and directed via the lens 22 to the CCD sensor.
- the aperture diameter of the aperture 21 is chosen so that it corresponds to the emission surface of the light source 13.
- the group B is between the color camera 1 and a beam splitter 9 the
- Focusing optics 10 arranged. About the beam splitter 9, the light of the white light radiation source 12 is deflected into the optical path of the confocal sensor A, where it is directed by means of the semitransparent mirror 3 (beam splitter) on the object plane 1 of the object 19.
- FIG. 3 shows the time sequence of a measurement.
- the mode 100 indicates that a recording of a life color image stream of the measurement object 19 takes place by means of the color camera (group B), the duration of this recording being user-controlled (overview image).
- the camera mode switches to confocal mode.
- the focal plane 1 is pushed through the entire volume of the measurement object 19.
- Measurement can be seen inside the skin, wherein as indicated above, respectively by axial scanning a stack of images is generated.
- the measured data in slice images of the skin are calculated and displayed on an (external) monitor, also not shown.
- mode 100 a life color image can again be displayed, while in mode 300 confocal is finally focused to a specific depth and a stream of images is recorded.
- mode 300 z. B. in a certain depth, the blood circulation can be displayed in real time and / or evaluated.
Landscapes
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Animal Behavior & Ethology (AREA)
- Molecular Biology (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Chemical & Material Sciences (AREA)
- Optics & Photonics (AREA)
- Analytical Chemistry (AREA)
- Theoretical Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- Dermatology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Ophthalmology & Optometry (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
Die Erfindung betrifft ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der Messdatenaufnahme eine Auswertung derart erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.
Description
Verfahren und Vorrichtung zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten
Die Erfindung betrifft ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera.
Bekannt ist es, dass die Konfokaltechnik eingesetzt wird, um im industriellen Bereich die Topographie der Oberfläche von Materialien zu messen. Aus dem biologischen Bereich ist die Konfokalmikroskopie ebenfalls bekannt, nämlich für die Aufnahme von Schnittbildern von bestimmten Oberflächen, die aufgrund der hohen
Tiefendiskriminierung der angewandten Technik, meistens mit Fluoreszenzmarkern, durchgeführt wird. Darüber hinaus ist bekannt, dass mit infrarotem Licht in die Hautstruktur hineingeleuchtet werden kann und innerhalb dieser mikroskopisch beobachtet werden kann.
In der US 2010/0214562 A1 ist ein Gerät beschrieben, mit dessen Hilfe die
Hautoberfläche oder oberflächennahe Hautschichten Punkt für Punkt nacheinander abgescannt wird/werden und so ein aus diesen Punkten zusammengesetztes Bild generiert wird.
Ein ähnliches Gerät ist aus der US 2007/0263 226 A1 bekannt. Hier werden pinhole- ähnliche Modulatorarrays eingesetzt, wobei bei jeder Messung beispielsweise fünf Punkte auf der Haut gleichzeitig gescannt werden können. Danach wird das Array lateral verschoben und weitere fünf Punkte werden gescannt.
Beide Geräte und die mit Ihnen geführten Verfahren haben somit den Nachteil, dass eine schnelle Messung nicht möglich ist, was zum einen dem erforderlichen Lateral- Scann und zum anderen der schwachen Lichtausbeute geschuldet ist. Somit erscheinen beide bekannte Geräte in der Handhabung unbefriedigend, da durch die Langsamkeit der Messung und durch die Lichtschwäche Verwackelungen zu erwarten sind.
Darüber hinaus sind in der Medizin tomographische Verfahren sowie
Punktierungsverfahren bekannt, um im tieferen Bereich der Haut Untersuchungen durchführen zu können.
Tomographische Verfahren sind aufwendig und kostspielig. Die
Punktierungsmethode, beispielsweise zur Diagnose von Hautkrebs hat den Nachteil, dass Karzinome geöffnet werden müssen und somit ein erhöhtes Risiko der weiteren Ausbreitung durch Streuung entsteht.
Der Erfindung liegt die Aufgabe zugrunde, mit einem einzigen Gerät ein Verfahren ausführen zu können, mit dessen Hilfe sowohl die Hautoberfläche in vivo
dreidimensional vermessen als auch in vivo die Struktur der Haut einige Millimeter tief bestimmt werden kann, wobei die Aufnahmegeschwindigkeit und die
Lichtausbeute unter größtmöglicher Vermeidung beweglicher Elemente gegenüber dem Stand der Technik deutlich erhöht ist.
Die Erfindung löst diese Aufgabe durch ein Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem
Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein
komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der Messdatenaufnahme eine Auswertung derart
erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.
Die Aufgabe wird ferner durch eine Vorrichtung zur Durchführung des Verfahrens gelöst, bestehend aus einem in einem tragbaren Gehäuse angeordneten konfokalen Sensor mit einem stationär angeordneten Mikrolinsenarray , wobei der konfokale Sensor eine monochromatische Strahlungsquelle aufweist, bestehend weiter aus einer Farbübersichtskamera mit einer Weißlicht-Strahlungsquelle, wobei die Kamera mittels eines Strahlteilers in den Messweg zuschaltbar ist und sowohl Kamera als auch Konfokalsensor mit einer Signalauswerteeinheit verbunden ist. Diese kann mit einem externen Monitor verbunden sein.
Es handelt sich somit um einen in der Hand zu haltenden Messkopf, der auf die Hautoberfläche aufgesetzt wird und dort innerhalb weniger Sekunden eine
vollständige Charakterisierung durchführen kann, nämlich:
- Aufnahme eines Farbbildes
- Messung der 3 D-Struktur der Hautoberfläche
- 3 D-Aufnahme (Kontrastbild) der inneren Hautstruktur.
Mittels der im Sensor integrierten Farbübersichtskamera und eines
angeschlossenen Monitors wird zunächst durch ein mehrere Millimeter großes Messfeld die betreffende Hautstelle aufgesucht. Vereinfacht wird dies durch die sehr kompakten Abmessungen des Sensorkopfs, dessen Dimension die Messfeldgröße nicht wesentlich übersteigt. Hierdurch wird zunächst mit Hilfe der visuellen
Beobachtung der Sensorkopf an die gewünschte Stelle herangeführt und dann mittels dem Life-Farb-Monitorbild der zu untersuchende Bereich angefahren. Da das Bild vom Sensorkopf aus bis einige Millimeter (etwa 5 mm) Entfernung scharf ist, kann auf die Haut aufgesetzt oder in geringem Abstand darüber hinweg bewegt werden.
Ist der betreffende Bereich gefunden, so wird der Sensor innerhalb weniger
Millisekunden auf den konfokalen Betrieb umgeschaltet, der innerhalb weniger Sekunden einen aus vielen hundert Konfokalbildern bestehenden Bildstapel aufnimmt (typisch sind 200 bis 1000 Bilder). Dabei wird durch den Einsatz eines stationär angeordneten Mikrolinsenarrays in Echtzeit durch simultane Aufnahme der für das Bild erforderlichen Anzahl von Bildpunkten jeweils ein Bild für diesen Stapel erzeugt. Während der Bildaufnahme sorgt ein im Sensor befindlicher Scanner dafür, dass der gesamte axiale Messbereich (Z-Richtung) durchfahren wird. Der
aufgenommene Bildstapel besteht aus äquidistanten Einzelbildern.
Der Einsatz eines Mikrolinsenarrays hat darüber hinaus den Vorteil, dass es dadurch, dass es auch Teil des optischen Systems an sich ist, zur Kompaktheit des Gerätes beiträgt.
Nach der Messdatenaufnahme erfolgt dreierlei Auswertung:
1. Die Position des obersten (dem Sensorkopf am nächsten liegenden)
Reflexes wird ausgewertet. Hieraus ergibt sich die 3 D-Topographie.
2. Es werden wie bei der Computertomographie Schnittbilder durch die
Hautstruktur gelegt. Diese können hinsichtlich Struktur und Konstrast analysiert werden.
3. Das zuvor aufgenommene Farbbild wird als Overlay der 3 D-Topographie dargestellt. So können auffällige Pigmentierungen mit der vorliegenden 3 D- Topographie mikroskopisch überlagert werden.
Durch mehrmalige Aufnahme kann das Messfeld automatisch erweitert werden (siehe Anspruch 2). Nach Abschluss der Stapelaufnahme folgt dann ein z. B.
akustisches Signal, welches der Bedienperson signalisiert, dass eine neue seitlich versetzte Stapelaufnahme gefahren werden kann. Die verschiedenen Aufnahmen können dann -ähnlich wie beim Stitching- zu einem Gesamtbild zusammengesetzt werden.
Gemäß Anspruch 4 ist vorgesehen, dass zusätzlich nach der oben beschriebenen Auswertung durch Fokussierung auf einen interessanten Tiefenschnitt ein
Highspeed-EchtzeitBild erzeugt werden, z. B. zur Messung der Durchblutung spezieller Bereiche.
Gemäß Anspruch 6 ist vorgesehen, dass der Konfokalsensor einen Matrixsensor in CMOS- oder CCD-Technik aufweist, ebenso die Farbübersichtskamera.
Zum„Blick" ins Innere der Haut verfügt der Konfokalsender über eine
monochromatische Strahlungsquelle, in diesem Fall eine Infrarot-Strahlungsquelle, die im Bereich zwischen 800 und 950 nm strahlt, wobei gemäß Anspruch 8 als Messwellenlänge 850 nm oder 940 nm gewählt wird.
Angewendet werden kann das erfindungsgemäße Gerät in der Krebsdiagnostik zur Früherkennung, Beobachtung und zur Diagnose von Veränderungen. Darüber hinaus können kosmetische Effekte beobachtet werden, wie z.B. die Eindringtiefe kosmetischer Präparate sowie der Tiefeneffekt der Behandlung. Auch Dicke und Struktur bei Brandverletzungen oder bei Hauttransplantationen können ermittelt werden, wobei die Untersuchtungsergebnisse dank der erfindungsgemäßen Technik mittels eines einzigen Gerätes innerhalb von wenigen Sekunden erhalten werden.
Die Erfindung wird im folgenden anhand der Figuren 1 und 2 dargestellt und erläutert:
Es zeigen:
Fig. 1 schematisch den optischen Aufbau des erfindungsgemäßen Gerätes; Fig. 2 ausführlichere Darstellung des Aufbaus des Konfokalsensors Fig. 3 Ablaufdiagramm der Messung
In der Figur 1 ist schematisch der optische Aufbau des erfindungsgemäßen Gerätes dargestellt. Es besteht im Wesentlichen aus den Gruppen A und B, wobei in der Gruppe A der konfokale Messaufbau und in der Gruppe B eine digitale Farbkamera dargestellt ist.
Mit dem Bezugszeichen 1 ist die Objektebene (in diesem Fall die Hautoberfläche) bezeichnet. Im Gerät selber ist mit dem Bezugszeichen 2 eine Fokussierlinse bezeichnet, die das von der kollimierten Strahlungsquelle 13 ausgesendete monochromatische Licht (infrarot) sowie das von der ebenfalls kollimierten
Weißlichtquelle 12 stammende Licht auf die Objektebene 1 fokussiert. Das von der Objektebene reflektierte Licht wird über eine weitere Fokussierlinse 4 und dem in der Zwischenbildebene angeordneten Mikrolinsenarray 5 durch die Abbildungsoptik 7, die aus den Elementen 21 , 22, 23 aus Figur 2 besteht, auf einem CCD-Matrixsensor 8 abgebildet, bzw. über den Strahlteiler 3 und die Abbildungsoptik 10 auf den
Matrixsensor 11 (Kamera).
Die Linse 4 ist das einzige bewegliche Teil der Anordnung, da sie für die
Fokussierung bei der schichtweisen Bildaufnahme verantwortlich ist.
Wie aus Figur 2 hervorgeht, handelt es sich bei 5 um ein rechteckiges oder ein quadratisches Mikrolinsenarray, das stationär im Strahlengang angeordnet ist und es erlaubt, dass simultan in Echtzeit ein komplettes„Schichtbild" aufgenommen werden kann. Derartige Mikrolinsenarrays haben sehr kleine Linsenabstände (z. B. 30 μητι), wobei die Linsen typischerweise rund und in einer quadratischen oder hexagonalen Packung angeordnet sind. In der in Figur 2 dargestellten Anordnung, die eine zentrale Komponente des konfokalen Messsystems darstellt, wird das Licht der Lichtquelle 13 von einer Kollektorlinse 14 über einen Strahlteiler 6 als paralleles Licht auf das Mikrolinsenarray 5 projiziert. Die Mikrolinsen 5 erzeugen viele verkleinerte Abbilder der Lichtquelle. Die Fokussiereinheit 16 (Bezugszeichen 2 und 4 aus
Figur 1) bildet die Foki der Mikrolinsen auf das Objekt 19 ab. Das vom Objekt 19 reflektierte Licht wird über die zuvor beschriebenen Elemente 16, 5 und 6 über die Fokussieroptik 23 auf die Blendenöffnung 21 fokussiert und über die Linse 22 auf den CCD-Sensor gerichtet.
Der Öffnungsdurchmesser der Blende 21 ist so gewählt, dass er der Emissionsfläche der Lichtquelle 13 entspricht.
In der Gruppe B ist zwischen der Farbkamera 1 und einem Strahlteiler 9 die
Fokussieroptik 10 angeordnet. Über den Strahlteiler 9 wird das Licht der Weißlicht- Strahlungsquelle 12 in den optischen Weg des Konfokalsensors A eingelenkt, wo es mittels des halbdurchlässigen Spiegels 3 (Strahlteiler) auf die Objektebene 1 des Objektes 19 gerichtet wird.
In der Figur 3 ist der zeitliche Ablauf einer Messung dargestellt. Wobei hier mit der Mode 100 angedeutet wird, dass eine Aufnahme eines Life-Farbbildstreams des Messobjektes 19 mittels der Farbkamera (Gruppe B) erfolgt, wobei die Dauer dieser Aufnahme anwendergesteuert ist (Übersichtsbild).
Im Modus 200 wird vom Kameramodus auf den Konfokalmodus umgeschaltet. Es erfolgt eine schnelle Konfokalmessung mit Tiefenscan (angedeutet durch den schrägen Verlauf). Dabei wird die Fokusebene 1 durch das gesamte Volumen des Messobjektes 19 geschoben.
Hieraus ergibt sich während der Messung zunächst ein Übersichtsbild der
Hautoberfläche, wonach dann durch die konfokale Messung die 3 D-Topographie der Hautoberfläche bis in mehrere Millimeter Tiefe erfolgt.
Durch die Verwendung einer Infrarotlichtquelle kann während der konfokalen
Messung ins Innere der Haut geschaut werden, wobei wie oben angegeben jeweils durch axiales Scannen ein Stapel Bilder erzeugt wird. In der nicht dargestellten Auswerteeinheit werden die gemessenen Daten in Schichtbildern der Haut (auch volumenmäßig) berechnet und auf einem ebenfalls nicht dargestellten (externen) Monitor angezeigt.
Im weiteren Verlauf (Mode 100) kann erneut ein Life- Farbbild dargestellt werden, während in der Mode 300 schließlich konfokal auf eine bestimmte Tiefe fokussiert wird und ein Stream von Bildern aufgenommen wird.
Mit der Messung in Mode 300 kann z. B. in bestimmter Tiefe die Blutzirkulation in Echtzeit dargestellt und/ oder ausgewertet werden.
Claims
1. Verfahren zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten mittels eines in einem Handgerät angeordneten konfokalen Sensors mit integrierter Farbkamera, wobei das Handgerät mit einem
Sensorkopf von der Bedienperson an die zu untersuchende Stelle der Haut herangefahren und ein Farbbild der Hautoberfläche aufgenommen wird, wonach der Sensor automatisch auf Konfokalbetrieb umgeschaltet wird, in welchem ein aus einer Vielzahl von durch simultane Erfassung aller für ein komplettes Bild erforderlichen Bildpunkte generierten Konfokalbildern bestehender ins Hautinnere hineinreichender Bildstapel aufgenommen wird und der gesamte axial ins Innere der Haut reichende Bereich Schicht für Schicht in Z-Richtung durchgescannt wird, wobei nach der
Messdatenaufnahme eine Auswertung derart erfolgt, dass ein 3 D-Bild der Topographie der Haut erstellt wird, desweiteren aus dem aufgenommenen Bildstapel Schnittbilder der Haut und des Hautvolumens in mehrere Millimeter Tiefe errechnet und die so generierten Bilder an einem Monitor angezeigt werden.
2. Verfahren nach Anspruch 1 ,
dadurch gekennzeichnet,
dass durch wiederholte Aufnahme das Messfeld erweitert und die einzelnen Aufnahmestapel zu einem Gesamtbild zusammengesetzt werden (Stitching).
Verfahren nach Anspruch 2,
dadurch gekennzeichnet,
dass nach Abschluss einer Stapelaufnahme ein Signal für die Bedienperson zur Aufnahme des nächsten Bildstapels erfolgt.
Verfahren nach einem der Ansprüche 1 bis 3,
dadurch gekennzeichnet,
dass zur Generierung eines Schnittbilds in Echtzeit gezielt konfokal auf eine bestimmte Hauttiefe fokussiert und eine kontinuierliche Reihe (Stream) von Bildern aufgenommen wird.
Vorrichtung zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 4, bestehend aus einem in einem tragbaren Gehäuse angeordneten
konfokalen Sensor (A) mit einem stationär angeordneten Mikrolinsenarray (5), wobei der konfokale Sensor (A) eine monochromatische Strahlungsquelle (13) aufweist, bestehend weiter aus einer Farbübersichtskamera (B) mit einer Weißlicht-Strahlungsquelle (12), wobei die Kamera mittels eines Strahlteilers (3) in den Messweg zuschaltbar ist und sowohl Kamera (B) als auch
Konfokalsensor (A) mit einer Signalauswerteeinheit verbunden ist.
Vorrichtung nach Anspruch 5,
dadurch gekennzeichnet,
dass der Konfokalsensor (A) einen CCD- oder CMOS-Matrixsensor (8) und auch die Farbübersichtskamera (B) einen Matrix-Sensor (11) aufweist.
Vorrichtung nach einem der vorhergehenden Ansprüche,
dadurch gekennzeichnet,
dass die Strahlungsquelle (13) des Konfokalsensors (A) eine im Bereich zwischen 800 und 950 nm emittierende Infrarotquelle ist.
Vorrichtung nach Anspruch 7,
dadurch gekennzeichnet,
dass die Wellenlänge 850 nm oder 940 nm beträgt.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14731152.6A EP2996548A1 (de) | 2013-05-15 | 2014-05-12 | Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten |
US14/890,681 US9687154B2 (en) | 2013-05-15 | 2014-05-12 | Method and apparatus for 3D measurement of the skin surface and near-surface skin layers |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102013008278.1A DE102013008278B4 (de) | 2013-05-15 | 2013-05-15 | Verfahren und Vorrichtung zur 3 D-Vermessung der Hautoberfläche und oberflächennaher Hautschichten |
DE102013008278.1 | 2013-05-15 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2014183860A1 true WO2014183860A1 (de) | 2014-11-20 |
Family
ID=50976577
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/EP2014/001274 WO2014183860A1 (de) | 2013-05-15 | 2014-05-12 | Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten |
Country Status (4)
Country | Link |
---|---|
US (1) | US9687154B2 (de) |
EP (1) | EP2996548A1 (de) |
DE (1) | DE102013008278B4 (de) |
WO (1) | WO2014183860A1 (de) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105411532A (zh) * | 2015-12-30 | 2016-03-23 | 广东欧珀移动通信有限公司 | 皮肤状况检测方法和装置 |
WO2017139712A1 (en) | 2016-02-11 | 2017-08-17 | David Dickensheets | Microscope lens with integrated wide-field camera and beam scanning device |
CN108267083A (zh) * | 2017-12-28 | 2018-07-10 | 顺丰科技有限公司 | 一种3d相机体积测量方法及系统 |
CN109543563A (zh) * | 2018-11-01 | 2019-03-29 | Oppo广东移动通信有限公司 | 安全提示方法、装置、存储介质及电子设备 |
CN112229338A (zh) * | 2020-11-27 | 2021-01-15 | 中国计量科学研究院 | 一种无标准片对零的双光谱共焦测量厚度方法 |
US20210353213A1 (en) * | 2020-05-15 | 2021-11-18 | MyWoundDoctor, LLC | System and method of wound assessment and treatment |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11122206B2 (en) | 2016-11-08 | 2021-09-14 | Preh Holding, Llc | Personal care device with camera |
US10511777B2 (en) | 2016-11-08 | 2019-12-17 | Thomas Nichols | Personal care device with camera |
CN108399596B (zh) * | 2018-02-07 | 2020-12-18 | 深圳奥比中光科技有限公司 | 深度图像引擎及深度图像计算方法 |
CN108449529B (zh) | 2018-02-07 | 2020-12-18 | 深圳奥比中光科技有限公司 | 深度计算处理器及移动终端 |
USD1000624S1 (en) | 2019-12-27 | 2023-10-03 | Thomas Nichols | Personal care device with camera |
EP4157061A2 (de) * | 2020-05-26 | 2023-04-05 | Dentsply Sirona Inc. | Verfahren und vorrichtung zur multimodalen weichgewebediagnose |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1607041A2 (de) * | 2004-06-17 | 2005-12-21 | Cadent Ltd. | Verfahren zum Bereitstellen von Daten im Zusammenhang mit der Mundhöhle |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070003114A1 (en) * | 2003-08-29 | 2007-01-04 | Hendriks Robert Frans M | Biometrical identification device |
US7460248B2 (en) * | 2006-05-15 | 2008-12-02 | Carestream Health, Inc. | Tissue imaging system |
DE102008039643A1 (de) * | 2008-08-25 | 2010-03-04 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und Vorrichtung zur interferometrischen Messung dreidimensionaler biometrischer Merkmale in Haut |
US8300220B2 (en) * | 2009-02-25 | 2012-10-30 | Vanderbilt University | Device and method for non-invasively evaluating a target of interest of a living subject |
DE102011082759A1 (de) * | 2011-09-15 | 2012-07-26 | Henkel Ag & Co. Kgaa | Verfahren zur individualisierten Hautbehandlung |
AU2013302966B2 (en) * | 2012-08-15 | 2017-06-08 | Lucid, Inc. | Systems and methods for imaging tissue |
-
2013
- 2013-05-15 DE DE102013008278.1A patent/DE102013008278B4/de not_active Expired - Fee Related
-
2014
- 2014-05-12 WO PCT/EP2014/001274 patent/WO2014183860A1/de active Application Filing
- 2014-05-12 US US14/890,681 patent/US9687154B2/en not_active Expired - Fee Related
- 2014-05-12 EP EP14731152.6A patent/EP2996548A1/de not_active Withdrawn
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1607041A2 (de) * | 2004-06-17 | 2005-12-21 | Cadent Ltd. | Verfahren zum Bereitstellen von Daten im Zusammenhang mit der Mundhöhle |
Non-Patent Citations (3)
Title |
---|
"A Window into the Skin. Confocal Laser Scanning Microscopy - In Vivo Histology for Cellular Level Skin Analyses in Cosmetic Research and Dermopharmacy VivaScope Pigmentation and Whitening Aging Inflammatory Cutaneous Status Aesthetic Dermatology Wound Healing and Scars Penetration Antiperspirants", 1 April 2011 (2011-04-01), XP055134671, Retrieved from the Internet <URL:http://www.vivascope.de/fileadmin/user_upload/Downloads/Cosmetic_Brochure_04_2011.pdf> [retrieved on 20140813] * |
CHRISTOPHER L ARRASMITH ET AL: "MEMS-based handheld confocal microscope for in-vivo skin imaging References and links scan mirror for single-point control of beam deflection and focus", J. INVEST. DERMATOL. SEMIN. CUTAN. MED. SURG. DERMATOLOGY DERMATOL. BR. J. DERMATOL. DERMATOL. SURG. OPT. EXPRESS J. MICROELECTROMECH. SYST. OPT. LETT. OPTICS EXPRESS J. MICROELECTROMECH. SYST. J. MICROLITH. MICROFAB. MICROSYST. APPL. OPT. OPT. EXPRE, 11 February 2010 (2010-02-11), pages 293 - 303, XP055134422, Retrieved from the Internet <URL:http://www.ncbi.nlm.nih.gov/pmc/articles/PMC3378354/pdf/oe-18-4-3805.pdf> [retrieved on 20140812] * |
LOEWKE, KEVIN ET AL: "Real-time image mosaicing with a hand-held dual-axes confocal microscope", SPIE, PO BOX 10 BELLINGHAM WA 98227-0010 USA, vol. 6851, 5 February 2008 (2008-02-05), pages 68510F-1 - 68510F-9, XP040432815, DOI: 10.1117/12.764322 * |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105411532A (zh) * | 2015-12-30 | 2016-03-23 | 广东欧珀移动通信有限公司 | 皮肤状况检测方法和装置 |
WO2017139712A1 (en) | 2016-02-11 | 2017-08-17 | David Dickensheets | Microscope lens with integrated wide-field camera and beam scanning device |
EP3414612A4 (de) * | 2016-02-11 | 2020-03-04 | Montana State University | Mikroskopobjektiv mit integrierter breitfeldkamera und strahlabtastvorrichtung |
US12072481B2 (en) | 2016-02-11 | 2024-08-27 | Montana State University | Microscope lens with integrated wide-field camera and beam scanning device |
CN108267083A (zh) * | 2017-12-28 | 2018-07-10 | 顺丰科技有限公司 | 一种3d相机体积测量方法及系统 |
CN109543563A (zh) * | 2018-11-01 | 2019-03-29 | Oppo广东移动通信有限公司 | 安全提示方法、装置、存储介质及电子设备 |
CN109543563B (zh) * | 2018-11-01 | 2021-08-24 | Oppo广东移动通信有限公司 | 安全提示方法、装置、存储介质及电子设备 |
US20210353213A1 (en) * | 2020-05-15 | 2021-11-18 | MyWoundDoctor, LLC | System and method of wound assessment and treatment |
CN112229338A (zh) * | 2020-11-27 | 2021-01-15 | 中国计量科学研究院 | 一种无标准片对零的双光谱共焦测量厚度方法 |
CN112229338B (zh) * | 2020-11-27 | 2022-05-17 | 中国计量科学研究院 | 一种无标准片对零的双光谱共焦测量厚度方法 |
Also Published As
Publication number | Publication date |
---|---|
EP2996548A1 (de) | 2016-03-23 |
DE102013008278B4 (de) | 2020-11-05 |
US20160081553A1 (en) | 2016-03-24 |
US9687154B2 (en) | 2017-06-27 |
DE102013008278A1 (de) | 2014-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2996548A1 (de) | Verfahren und vorrichtung zur 3 d-vermessung der hautoberfläche und oberflächennaher hautschichten | |
EP2443503B1 (de) | Vorrichtung und verfahren für die mehr-photonen-fluoreszenzmikroskopie zur gewinnung von informationen aus biologischem gewebe | |
EP3467432B1 (de) | Verfahren zum betreiben einer vorrichtung zum erfassen der dreidimensionalen geometrie von objekten | |
DE10043162A1 (de) | Lichtleitfaserbündel und Endoskopeinrichtung | |
DE3422144A1 (de) | Geraet zur darstellung flaechenhafter bereiche des menschlichen auges | |
EP2993464B1 (de) | Vorrichtung und verfahren zur qualitätskontrolle transparenter objekte | |
EP3568667B1 (de) | Messsystem und verfahren zur kombinierten erfassung der oberflächentopografie und hyperspektralen bildgebung | |
DE112006003666T5 (de) | Vorrichtung zur optischen Kohärenztomographie und Messkopf | |
DE102007047461A1 (de) | Verfahren und optische Anordnung zur Untersuchung einer Probe | |
DE102010036447A1 (de) | Verfahren zur Ermittlung von Materialcharakteristika | |
EP2508841B1 (de) | Verfahren und System zur optischen Kohärenztomographie | |
DE102004002918A1 (de) | Verfahren und Vorrichtung zur Untersuchung der Haut | |
DE10039182A1 (de) | Endoskopsystem,optisches Abtastsystem und Polygonspiegel | |
EP2508843B1 (de) | Verfahren und System zur optischen Kohärenztomographie | |
EP3768153B1 (de) | Multimodales bildgebungssystem und verfahren zur nicht-invasiven untersuchung eines untersuchungsobjekts | |
DE4341063A1 (de) | Vorrichtung und Verfahren zur optischen, ortsauflösenden Bestimmung von Dichteverteilungen in biologischem Gewebe | |
EP2508842B1 (de) | Verfahren und System zur optischen Kohärenztomographie | |
EP3741290B1 (de) | Vorrichtung zur abbildungserzeugung von hautläsionen | |
EP2208460A1 (de) | Erkennung und Lokalisierung von Gewebe durch Lichtanalyse | |
EP2327043B1 (de) | Vorrichtung zur aufnahme von biometrischen daten | |
EP4010145A1 (de) | Verfahren zum analysieren einer werkstückoberfläche für einen laserbearbeitungsprozess und eine analysevorrichtung zum analysieren einer werkstückoberfläche | |
DE102017118304A1 (de) | Vorrichtung und Verfahren zum Schneiden einer Probe | |
DE102015106806B4 (de) | Vorrichtung zum optischen Inspizieren von Objekten | |
WO2016180404A1 (de) | Verfahren und vorrichtung zur bestimmung optischer tiefeninformationen eines optisch streuenden objekts | |
DE102013222349B3 (de) | Vorrichtung und verfahren zur erfassung eines materials |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 14731152 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 14890681 Country of ref document: US |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2014731152 Country of ref document: EP |