EP4654879A1 - Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur herstellung einer medizinischen bildgebungsvorrichtung - Google Patents
Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur herstellung einer medizinischen bildgebungsvorrichtungInfo
- Publication number
- EP4654879A1 EP4654879A1 EP24702304.7A EP24702304A EP4654879A1 EP 4654879 A1 EP4654879 A1 EP 4654879A1 EP 24702304 A EP24702304 A EP 24702304A EP 4654879 A1 EP4654879 A1 EP 4654879A1
- Authority
- EP
- European Patent Office
- Prior art keywords
- light
- wavelength
- image sensor
- spectral range
- spectral
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00172—Optical arrangements with means for scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00186—Optical arrangements with imaging filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/044—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for absorption imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/046—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for infrared imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0208—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using focussing or collimating elements, e.g. lenses or mirrors; performing aberration correction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0248—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using a sighting port, e.g. camera or human eye
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2803—Investigating the spectrum using photoelectric array detector
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/36—Investigating two or more bands of a spectrum by separate detectors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
- G01J2003/2826—Multispectral imaging, e.g. filter imaging
Definitions
- Medical imaging device endoscope device, endoscope and method for manufacturing a medical imaging device
- the invention relates to a medical imaging device, an endoscope device, an endoscope and a method for producing a medical imaging device.
- Imaging devices such as endoscopic, exoscopic or microscopic devices that generate multispectral or hyperspectral images are known from the prior art.
- multispectral or hyperspectral images In addition to two spatial dimensions, such as a conventional image from a camera, multispectral or hyperspectral images have a spectral dimension.
- the spectral dimension includes several spectral bands (wavelength bands).
- Multispectral and hyperspectral images differ essentially in the number and width of their spectral bands. Such systems can in principle also be suitable for taking fluorescence images.
- DE 20 2014 010 558 U1 describes a device for recording a hyperspectral image of an examination area of a body.
- the device has an input lens for generating an image in an image plane and a slit-shaped aperture in the image plane for masking out a slit-shaped area of the image.
- the light passing through the aperture is fanned out by a dispersive element and recorded by a camera sensor.
- the camera sensor can record a large number of spectra, each with an associated spatial coordinate, along the longitudinal direction of the slit-shaped aperture.
- the device described is also designed to record further spectra along the longitudinal direction of the slit-shaped aperture in a direction different from the longitudinal direction of the slit-shaped aperture.
- the method underlying this disclosure for generating multispectral or hyperspectral images is also known as the so-called pushbroom method.
- multispectral and hyperspectral imaging devices are particularly suitable as endoscopic imaging devices.
- multispectral and/or Hyperspectral imaging is a fundamental field of application, for example for diagnostics and for assessing the success or quality of an intervention.
- the devices and methods described use image sensors that are light-sensitive over a specific spectral range, usually both in the visible range and in the near-infrared range.
- a suitable dispersive element directs incident light to different positions and thus different pixels of the image sensor used depending on the wavelength. The wavelength of the light can then be determined from the position of a pixel.
- the image sensor in question is often arranged in such a way that one direction of the dispersive splitting runs parallel to one of the two image axes of the image sensor. One or more adjacent image lines or one or more adjacent image columns can then be interpreted as the spectrum of a pixel.
- Optical gratings are regularly used as dispersive elements in hyperspectral cameras.
- the spectral range recorded by a hyperspectral camera is therefore limited accordingly, for example to the range from 500 nm to 1000 nm, so that no higher order diffraction maxima occur.
- the invention is based on the object of enabling a wide-ranging applicability of hyperspectral imaging. This object is achieved according to the invention by a medical imaging device, an endoscope device, an endoscope and a method as described herein and defined in the claims.
- a medical imaging device can be provided with a spectral camera that is designed to record hyperspectral images.
- the spectral camera comprises an optical system that is designed to spectrally split incident light by diffraction with respect to a spatial axis and an image capture sensor that defines a light-sensitive region and that is arranged with respect to the optical system such that the light-sensitive region extends along the spatial axis and the spectrally split light falls on the light-sensitive region.
- the image capture sensor can comprise a first image sensor that is light-sensitive in a first spectral region and that covers a first detection region of the light-sensitive region.
- the image capture sensor can comprise a second image sensor that is light-sensitive in a second spectral region that is different from the first spectral region and that covers a second detection region of the light-sensitive region that is different from the first detection region, wherein the second image sensor is arranged next to the first image sensor with respect to the spatial axis.
- the first spectral range and the second spectral range can together define an at least substantially continuous overall spectral range extending from a first wavelength to a second wavelength, wherein the first wavelength lies in the first spectral range.
- an endoscope device with such an imaging device can be provided.
- an endoscope with such an endoscope device can be provided.
- a method for producing a medical imaging device comprising providing an optical arrangement which is designed to spectrally split incident light and to image it in spectrally split form onto a spatial axis.
- the method can comprise providing a first image sensor which is light-sensitive in a first spectral range.
- the method can comprise providing a second image sensor that is light-sensitive in a second spectral range that is different from the first spectral range, wherein the first spectral range and the second spectral range together define an at least substantially continuous total spectral range that extends from a first wavelength to a second wavelength, wherein the first wavelength is in the first spectral range, wherein the second wavelength is in the second spectral range, and wherein the second wavelength is at least twice as long as the first wavelength.
- the method can comprise arranging the first image sensor and the second image sensor such that the second image sensor is located next to the first image sensor with respect to the spatial axis, and such that the first image sensor covers a first detection area of a light-sensitive image area and the second image sensor covers a second detection area of the light-sensitive image area that is different from the first detection area.
- a medical imaging device comprises a spectral camera that is designed to record hyperspectral images.
- the spectral camera comprises an optical system that is designed to spectrally split incident light by diffraction with respect to a spatial axis and an image capture sensor that defines a light-sensitive area and is arranged with respect to the optical system such that the light-sensitive area extends along the spatial axis and the spectrally split light falls on the light-sensitive area, with different diffraction orders superimposing themselves in a partial area of the light-sensitive area.
- the image capture sensor can be designed to capture spatially resolved intensity information for at least two different color channels that differ in terms of their wavelength-dependent sensitivity such that diffraction light of at least 2nd order can be detected with different intensities in the color channels.
- the imaging device may further comprise a processing unit configured to use the spatially resolved intensity information of the color channels to determine spectral information that describes a spectrum that is corrected for at least the second order diffracted light.
- an endoscope device with such an imaging device can be provided.
- an endoscope with such an endoscope device can be provided.
- a method for imaging can be provided, in particular by means of a medical imaging device according to the invention.
- the method comprises spectrally splitting incident light with respect to a spatial axis by diffraction.
- the method can also comprise imaging the spectrally split light onto an image capture sensor system that defines a light-sensitive region and is arranged such that the light-sensitive region extends along the spatial axis and the spectrally split light falls on the light-sensitive region, with different diffraction orders superimposing in a partial region of the light-sensitive region.
- the method can comprise capturing spatially resolved intensity information for at least two different color channels by means of the image capture sensor system, which differ in terms of their wavelength-dependent sensitivity such that diffraction light of at least 2nd order can be detected with different intensities in the color channels.
- the method may comprise determining spectral information describing a corrected spectrum over the spectral range, which is corrected with respect to the diffracted light to at least 2nd order, based on the spatially resolved intensity information of the color channels.
- the features according to the invention allow hyperspectral imaging to be used extensively.
- a large spectral range that can be used for hyperspectral imaging can be achieved.
- the image acquisition sensors used can be structurally simple and/or inexpensive.
- the inventors have recognized that for medical applications of hyperspectral imaging, spectral ranges below 500 nm and/or above 1000 nm are also relevant and that these additional spectral ranges should advantageously be available at the same time.
- the inventors have determined that relevant tissue information regarding tissue perfusion is available in the wavelength range between approximately 400 nm and 500 nm, provided that image data is acquired in this range in a suitable manner.
- the features of the invention make it possible to distinguish between different orders of diffracted light, which makes spectrally split object light comprehensively analyzable and usable for hyperspectral imaging. This makes a spectral range accessible for imaging that would otherwise require several different Hyperspectral cameras may be required. This allows for a compact design, a low level of complexity and a high level of cost efficiency.
- the imaging device can be set up for medical imaging.
- Medical imaging is to be understood in particular as an imaging which allows conclusions to be drawn about physiological properties of an examination area, such as tissue type and/or tissue properties, such as fat content, water content, oxygenation, presence of a dye or the like.
- the imaging preferably uses a spectral analysis to determine these physiological properties.
- the examination area is in particular an area which includes physiological components, such as tissue, blood or the like.
- the examination area is, for example, within a natural or artificially created cavity. Such cavities are, for example, the abdominal cavity, the intestine, the bladder, the kidney or the like. However, open tissue could also serve as an examination area.
- the imaging device is designed to be insertable into a cavity for assessment and/or observation, for example into an artificial and/or natural cavity, such as into the interior of a body, into a body organ, into tissue or the like.
- the imaging device can also be designed to be insertable into a housing, casing, shaft, pipe or other, in particular artificial, structure for assessment and/or observation.
- a recording process can be carried out using the imaging device and in particular using the spectral camera.
- a “recording process” is to be understood in particular as a recording process which comprises at least one or more method steps.
- a spectral image or partial sections of the spectral image of an examination area are recorded using the spectral camera.
- the spectral camera can be a hyperspectral camera, in particular a pushbroom spectral camera or work according to the pushbroom principle.
- the technique of spatial scanning is preferably used to record the hyperspectral images.
- the area under investigation is scanned in several successive steps, in particular to record the spectral image. Recording steps are generated from individual sections, in particular by scanning the examination area line by line at different times.
- the sections can then provide information about a spatial dimension and a spectral dimension through spectral fanning.
- a spectral image can then be put together from the sections, with these sections being placed together along a further spatial dimension to construct the image.
- the spectral image is formed in particular by a data cube which includes the spatial dimensions, the further spatial dimension and the spectral dimension.
- the spectral camera and in particular the image capture sensor system is set up to generate and/or capture image data which includes spatially and spectrally resolved information.
- the spatial and spectral information of the image data can be such that an associated spectrum can be obtained from it for several spatial pixels.
- the spectral camera can have a spatial resolution such that it provides a resolution of at least 100 pixels, preferably of at least 200 pixels, preferably of at least 300 pixels and advantageously of at least 400 pixels in at least two different spatial directions.
- the spectral camera and in particular the optics and/or the image capture sensors can be set up for hyperspectral imaging, in particular to capture and/or generate hyperspectral image data.
- Hyperspectral imaging or hyperspectral image data can refer in particular to imaging in which at least 10, at least 20, at least 50 or even at least 100 spectral bands can be and/or are captured independently of one another.
- the spectral camera can work according to the pushbroom principle and/or the whiskbroom principle and/or the staring principle and/or a snapshot principle.
- the imaging device can additionally enable a stereoscopic mode of operation, by means of which additional three-dimensional spatial information can be recorded.
- a hyperspectral image is formed by a four-dimensional hypercube, which comprises the spatial dimensions, the further spatial dimension and the spectral dimension as well as an additional spatial dimension. This can be achieved, for example, by combining two spectral cameras arranged offset from one another in their viewing direction.
- the spectral camera can be an endoscopic spectral camera.
- An “endoscopic spectral camera” is to be understood in particular as a spectral camera which interacts with an endoscope, is coupled or can be coupled, or is preferably formed integrally with it.
- the spectral camera can be an exoscopic spectral camera.
- an “exoscopic spectral camera” is to be understood in particular as a spectral camera which interacts with an exoscope, is coupled or can be coupled, or is preferably formed integrally with it.
- An “exoscope” can also be understood in particular as a surgical microscope.
- an exoscope is preferably to be understood as a surgical imaging device, in particular a surgical microscope, which is free of an eyepiece and instead preferably comprises a camera device, preferably with at least one white light camera.
- the imaging device can be a microscopic, macroscopic and/or exoscopic imaging device.
- the imaging device can be designed as a microscope, macroscope and/or exoscope and/or comprise such.
- the imaging device can be an endoscopic imaging device.
- the imaging device can be an endoscope device. It can comprise an endoscope and/or an endoscope system and/or be designed as such and/or form at least a part and preferably at least a major part and/or main component of an endoscope and/or an endoscope system.
- At least a major part can mean at least 55%, preferably at least 65%, preferably at least 75%, particularly preferably at least 85% and most preferably at least 95%, in particular with reference to a volume and/or a mass of an object.
- the image capture unit is configured to generate continuously updated image data.
- the image capture unit may be configured to generate the image data substantially in real time, which may include, for example, generating updated image data at least every 30 seconds, in some cases at least every 20 seconds, and in some cases even at least every 10 seconds or at least every 5 seconds.
- the imaging device may comprise an illumination device and/or be connectable, in particular detachably, to an illumination device which comprises at least one lighting element which is designed to be illuminated in at least one Operating state to illuminate and/or light up an object to be imaged.
- the lighting element can comprise a white light source, a, in particular tunable, monochrome light source, a laser, a white light laser, at least one light-emitting diode and/or a light-emitting diode array, at least one laser diode and/or a laser diode array or the like.
- the lighting device can comprise several different lighting elements that can be selectively activated. In particular, in different lighting modes, illumination light can be provided by suitable mixing and/or activating and/or deactivating one or more lighting elements.
- the imaging device can comprise a control unit.
- the control unit can comprise suitable control electronics and/or a computer.
- the control unit comprises at least one processor, computer-readable memory, an operating system and/or suitable inputs and outputs.
- the control unit can contain at least one control program. In particular, functions thereof can be implemented by the control program or be part of it.
- the imaging device and in particular the control unit can comprise at least one processor and/or an associated memory with program code that implements the functions and steps described, and/or an associated main memory and/or associated connections and/or data interfaces and/or an electronic circuit for implementing the functional units mentioned herein and/or for carrying out the method steps mentioned herein.
- One or more processors, memories, main memories, connections, data interfaces and/or circuits can also be associated with one or more functional units and/or implement one or more method steps.
- the imaging device may comprise an output unit configured to output to a user an output based on the hyperspectral images and/or a user output generated in accordance with the output.
- the output unit may be configured to output a visual output and/or an audio output and/or a haptic output and/or any other output perceptible by a user.
- the output unit may comprise suitable components, such as one or more lamps, illuminants, loudspeakers, screens, vibrators or the like.
- the output unit may comprise a computer and/or processor and/or memory and/or working memory and/or connections and/or a data interface for receiving, processing and outputting unprocessed, preprocessed and/or processed output data.
- the output generation unit can be connected to the output unit via an interface. The generated output can be processed and/or output by the output unit.
- the imaging device can comprise a display unit that is configured to display an image, in particular a moving image, for a user.
- the display unit can be part of the output unit and/or form it.
- the displayed image can be based on the image data.
- the display unit can comprise a screen and/or control electronics.
- the display unit can comprise a computer and/or processor and/or memory and/or working memory and/or connections and/or a data interface for receiving, processing and outputting unprocessed, preprocessed and/or processed image data and/or display data.
- the output generation unit can be connected to the display unit via an interface. The generated output can be processed and/or output by the display unit.
- the medical imaging device can comprise a shaft with at least one proximal section, one distal section and/or one intermediate section. Alternatively or additionally, the imaging device can be designed to be coupled to such a shaft.
- the spectral camera can be optically connected and/or connectable to the proximal end of the shaft.
- the distal section is designed in particular to be introduced into and/or located in a cavity to be examined in an operating state, for example during the diagnostic and/or therapeutic action.
- the proximal section is designed in particular to be arranged outside the cavity to be examined in an operating state, for example during the diagnostic and/or therapeutic action. “Distal” is to be understood as facing a patient and/or facing away from a user, in particular during use.
- Proximal is to be understood as facing away from a patient and/or facing away from a user, in particular during use.
- proximal is the opposite of distal.
- the shaft may be an elongated object.
- the shaft may at least partially and preferably at least largely form the distal portion.
- the optics can comprise at least one dispersive element, in particular at least one optical grating.
- the optics can also comprise an observation slit. Imaging light can pass through the observation slit onto the optical grating, so that an imaging light strip defined by the observation slit can be spectrally split.
- the spatial axis along which the incident light is split extends in particular at least substantially perpendicular to the observation slit.
- the spectral camera can comprise an input optics, in particular an input lens.
- the spectral camera can comprise a scanning device that is designed to move at least the observation slit and in particular the optics and/or the image capture sensor system, for example relative to the input optics. This movement of the observation slit can serve to scan an object to be imaged strip by strip and/or row by row and/or column by column.
- the image capture sensor system can have at least one image sensor.
- the at least one image sensor can define the light-sensitive area.
- the light-sensitive area can generally extend from a first, in particular smaller, wavelength to a second, in particular larger, wavelength.
- the image sensor and in particular the first image sensor mentioned can be a silicon sensor, for example a CCD sensor or a CMOS sensor.
- the image sensor and/or the first image sensor and/or the second image sensor can have a two-dimensional pixel pattern.
- the image capture sensor system can define pixels that are arranged in the light-sensitive area and cover it in particular according to a pixel pattern.
- the light-sensitive area can be an image capture sensor area that is defined by one or more image sensors.
- the light-sensitive area is rectangular, wherein a first side of the light-sensitive area can be oriented parallel to the spatial axis along which the spectral splitting takes place, and wherein a second side can be oriented perpendicular to the first side.
- Image strips that extend parallel to the second side can thus correspond to monochromatic or narrow-band spatial image strips. In particular, these are defined by the observation slit. Image strips that extend parallel to the first side can correspond to spectra of a specific image point.
- the first side can be longer than the second side.
- image sensor can refer to a complete electronic component. An image sensor in the sense of this disclosure can accordingly comprise contacts, conductor tracks, frames and/or structural elements associated with a semiconductor chip.
- the first detection area and the second detection area can be disjoint from each other.
- the first detection area can define the first detection area.
- the second detection area can define the second detection area.
- the first spectral range and the second spectral range can together form the overall spectral range.
- the overall spectral range can be at least substantially continuous in that a maximum spectral width of an uncovered spectral range lying between the first wavelength and the second wavelength is at most 100 nm, preferably at most 50 nm, particularly preferably at most 20 nm and preferably at most 10 nm wide.
- the first spectral range and the second spectral range can overlap one another.
- the first spectral range and the second spectral range can be directly adjacent to one another or spaced apart from one another.
- a spectral spacing can be selected such that the resulting overall spectral range is at least substantially continuous despite the spectral spacing.
- the light-sensitive region can be flat and/or planar at least in sections and in particular overall.
- the light-sensitive region can be oriented parallel to the spatial axis at least in sections and in particular overall.
- the light-sensitive region can also be inclined relative to the spatial axis at least in sections and in particular overall.
- the statement that the light-sensitive region extends along the spatial axis is to be understood in particular to mean that a projection of the light-sensitive region onto the spatial axis extends over a length that corresponds to at least 50%, at least 60%, at least 70% or even at least 80% of a length of the light-sensitive region.
- the first image sensor and the second image sensor can be arranged in a plane.
- the first image sensor defines a first detection surface and the second image sensor defines a second detection surface.
- the first detection surface and the second detection surface can be arranged parallel to one another.
- the first detection surface and the second detection surface can be arranged in a common plane.
- the first image sensor and the second image sensor can be arranged next to one another in such a way that two adjacent edges of the image sensors run parallel to one another, but the image sensors are inclined towards one another. This makes it possible to achieve an individually optimal orientation relative to the optics and in particular to the dispersive element of the optics for each image sensor.
- the image sensors can then have a different dispersion per unit distance.
- the light-sensitive area can be curved and/or bent accordingly. In this case, the light-sensitive area as a whole can extend along the spatial axis.
- One of the detection surfaces can be oriented parallel to the spatial axis.
- both the first detection surface and the second detection surface can be inclined relative to the spatial axis.
- the first image sensor and the second image sensor can be arranged directly next to one another.
- the image sensors can touch one another.
- the image sensors can be spaced apart from one another.
- a distance between the image sensors is in particular at most 5 mm, preferably at most 2 mm, particularly preferably at most 1 mm and preferably at most 0.5 mm.
- a distance between the image sensors is in particular at most 20%, preferably at most 10%, particularly preferably at most 5% and preferably at most 2% of an extension of a largest of the image sensors in a direction parallel to a spacing direction.
- spectral widths and/or to minimum and/or maximum wavelengths of spectral ranges can be understood within the scope of this disclosure to mean wavelengths or wavelength ranges in which an intensity is at most 10%, at most 5%, at most 2% or even at most 1% of a maximum intensity of the relevant reference spectral range.
- a spectral width of an emission spectrum of a luminous element can mean a distance between a first wavelength and a second wavelength, between which there is an emission maximum and at which an emission intensity is at most 10%, at most 5%, at most 2% or even at most 1% of the emission intensity at the emission maximum.
- spectral widths and/or minimum and/or maximum wavelengths of spectral ranges can be understood to mean Transmission properties and/or reflection properties and/or other wavelength-dependent optical properties of objects.
- the spatially resolved intensity information can be at least two-dimensionally resolved intensity information point by point.
- the spatially resolved intensity information can refer to a matrix of pixels.
- the color channels mentioned can each contain two-dimensional intensity information resolved point by point.
- the color channels can comprise a first color channel and a second color channel.
- the color channels can comprise a third color channel.
- the first color channel can be a red color channel with respect to visible light.
- the second color channel can be a green color channel with respect to visible light.
- the third color channel can be a blue color channel with respect to visible light.
- the image sensor can be a color-sensitive image sensor, in particular a three-color image sensor, for example an RGB image sensor.
- the color channels can each be sensitive in a sub-range of the visible spectral range and additionally at least in a sub-range of the near infrared range.
- a processing unit can be provided which is designed to determine combined spectral information based on sensor signals from the first image sensor and sensor signals from the second image sensor, which spectral information describes a spectrum over the entire spectral range.
- the processing unit is not necessarily designed to determine a corrected spectrum, as mentioned above.
- the processing unit may comprise a processor and/or a memory and/or a machine-readable medium.
- the machine-readable medium may contain program code that implements the function of the processing unit.
- the corrected spectrum can differ from an intensity distribution of the light split with respect to the spatial axis in that an intensity of diffracted light of at least 2nd order is reduced, in particular by at least 50%, preferably by at least 80%, particularly preferably by at least 90% and preferably by at least 95%. Due to the diffraction by the dispersive element, diffracted light of a first wavelength of at least 2nd order reaches a location on the light-sensitive area at which diffracted light of a second wavelength of 1st order falls, which is greater than the first wavelength. For example, at a certain position of the light-sensitive region, light with a wavelength of X nm 1st order coincides with light with a wavelength of X/2 2nd order, where X is a positive real number.
- a light intensity at this position is greater than the intensity of the 1st order light because the 2nd order light at this position also contributes to the light intensity. For a position-wavelength assignment, this would lead to an erroneous spectrum because the intensity for the wavelength X would be overestimated.
- the processing unit is set up to reduce or eliminate this overestimation by determining the corrected spectrum.
- the first image sensor and the second image sensor can be arranged such that they are positioned as described.
- the image sensors can be arranged on a common base plate and/or circuit board.
- the image sensors can be glued to one another and/or to the base plate and/or circuit board.
- the light-sensitive region and/or the image capture sensor system can be movable relative to the optics and in particular relative to the dispersive element. This makes it possible to change which wavelength ranges fall on which positions of the light-sensitive region and/or the image capture sensor system. For example, in the case of a spatial spacing of the first image sensor from the second image sensor and an associated spectral gap in the overall spectral range, the spectral gap can be changed. This makes it possible to close the spectral gap by recording several hyperspectral images for different positionings, in that each wavelength range between the first wavelength and the second wavelength in at least one of the hyperspectral images falls on the light-sensitive region and/or on a detection surface of at least one of the image sensors. In the case of a continuous light-sensitive region and/or in the case of a single image sensor, a spectral range to be imaged can also be changed by changing the position.
- visible light and/or a visible spectral range may refer to light having a wavelength of at least 500 nm, at least 450 nm or at least 400 nm and at most 780 nm, at most 750 nm or at most 700 nm.
- Near-infrared light and/or a near-infrared spectral range and/or the indication ‘near-infrared’ refers to light having a wavelength of at least 750 nm, at least 780 nm or at least 800 nm and at most 3000 nm, at most 2000 nm or at most 1500 nm.
- the second wavelength is in the second spectral range, the second wavelength being more than twice as large, preferably at least 2.1 times as large, particularly preferably at least 2.5 times as large and preferably at least 3 times as large as the first wavelength.
- This allows a large spectral range to be used for imaging.
- the limitation that only a spectral range between a lower limit wavelength and twice the lower limit wavelength can be used due to disturbing higher diffraction orders can be overcome.
- the first wavelength can be at most 450 nm and preferably at most 400 nm.
- the second wavelength can be at least 1000 nm and preferably at least 1200 nm.
- the second wavelength can be at least 1400 nm, preferably at least 1500 nm, particularly preferably at least 1600 nm and preferably at least 1700 nm.
- Cost-effective and reliable sensor technology for detecting wavelengths in the visible range and just beyond the visible range into the near-infrared range can be used in particular when the first spectral range comprises at least a wavelength range from 500 nm, preferably from 450 nm, to 800 nm, preferably to 900 nm.
- a silicon image sensor can be used as the first image sensor.
- the second spectral range comprises at least a wavelength range from 1000 nm, preferably from 900 nm, to 1500 nm, preferably to 1700 nm.
- the first and the second spectral range can overlap each other.
- the respective spectral range of the first image sensor and/or the second image sensor for capturing hyperspectral images is not fully utilized.
- the first image sensor can be a monochromatic image sensor, in particular a monochromatic silicon image sensor.
- the second image sensor can be a SWIR sensor (short-wave infrared sensor), in particular an InGaAs sensor. This allows readily available sensor elements to be combined cost-effectively and easily to expand an available spectral range for hyperspectral medical imaging.
- a high degree of information density over a large spectral range can be achieved in a structurally simple and cost-effective manner, in particular if the first image sensor and the second image sensor are arranged directly next to one another and define the light-sensitive area as an essentially continuous area.
- the light-sensitive area can be defined exclusively by the first image sensor and the second image sensor and in particular by their detection areas.
- the optics are configured to spectrally split incident light such that, for light with a wavelength in the first spectral range, n-order diffraction light reaches the first detection range and is detectable by the first image sensor due to its light sensitivity in the first spectral range, and (n+1)-order diffraction light reaches the second detection range but is not detectable by the second image sensor due to its lack of light sensitivity in the first spectral range, where n is a positive integer and in particular 1.
- the said lack of light sensitivity can be achieved by a filter element arranged in front of the second image sensor and/or be inherent in the material of the second image sensor.
- the second image sensor as such can be suitable for detecting the (n+1)-th order diffraction light, but can be integrated into the image capture sensor system in such a way and/or adapted and/or arranged in such a way that the (n+1)-th order diffraction light is not detected by the second image sensor.
- the information can refer to several values of n.
- the circumstance explained can apply both to 1st order diffraction light on the first image sensor and 2nd order diffraction light on the second image sensor as well as to 2nd order diffraction light on the first image sensor and 3rd order diffraction light on the second image sensor.
- light of higher orders for example (n+2)-th order, (n+3)-th order, etc.
- the first image sensor and the second image sensor can be designed, arranged and/or provided with filters such that the image capture sensor system can differentiate between different diffraction orders or can be aligned to one diffraction order.
- a high degree of reliability in blocking out higher diffraction orders can be achieved in particular if the imaging device and in particular the image capture sensor system further comprises at least one optical edge filter which is permeable to light with a wavelength above a cut-off wavelength and opaque to light with a wavelength below the cut-off wavelength, the cut-off wavelength being less than twice the first wavelength, and the optical edge filter being arranged at least partially in front of the second image sensor.
- the cut-off wavelength can also be selected such that it is greater than the first wavelength by a factor of (n+1)/n, where n is a positive integer.
- edge filters can be provided which gradually make the light-sensitive area light-sensitive for different spectral ranges or which gradually block out different diffraction light of higher orders.
- the edge filter mentioned can be arranged at least partially or completely in front of the second image sensor. This can prevent short-wave light of higher diffraction orders from reaching the second image sensor.
- the imaging device and in particular the image capture sensor system can comprise at least one optical edge filter that is permeable to light with a wavelength below a cut-off wavelength and opaque to light with a wavelength above the cut-off wavelength, the cut-off wavelength being less than twice the first wavelength, and the optical edge filter being arranged at least partially in front of the first image sensor.
- the cut-off wavelength can also be selected such that it is smaller than the first wavelength by a factor (n+1)/n, where n is a positive integer.
- edge filters can be provided that gradually make the light-sensitive area light-sensitive to different spectral ranges or that gradually block out different diffraction light of higher orders.
- the edge filter mentioned can be arranged at least partially or completely in front of the second image sensor. This can prevent short-wave light of higher diffraction orders from reaching the second image sensor.
- the edge filters mentioned i.e. the edge filter arranged at least partially in front of the first image sensor and/or the edge filter arranged at least partially in front of the second image sensor, can each be arranged at least partially in front of both image sensors.
- the position can be selected such that a physical edge of the edge filter coincides with a spatial position of the light-sensitive area at which a higher order wavelength, in particular 2nd order, and a lower order wavelength to be imaged, in particular 1st order, reach.
- the edge filter can then ensure that the higher order diffraction light is not detected.
- the first image sensor can be sensitive up to a wavelength of at least 950 nm, at least 1000 nm or at least 1100 nm.
- the edge filter can then be arranged partially in front of the first image sensor. It is also conceivable that the second image sensor is sensitive in a spectral range that extends to smaller wavelengths than, for example, twice the first wavelength. Light of a higher diffraction order may then only fall on a partial area of the second image sensor. The edge filter can then be arranged in such a way that it only covers this partial area.
- n-th order diffraction light reaches the first detection range and can be detected by the first image sensor due to its light sensitivity in the first spectral range
- (n+1)-th order diffraction light reaches the optical edge filter and is blocked by it, where n is a positive integer and in particular 1.
- the edge filter can thus be used to suppress higher orders of diffraction.
- the spectral information can relate to visible light and near-infrared light.
- the use of inexpensive and/or readily available image sensors as part of an image capture sensor system can be made possible in particular if the processing unit is set up to process the spectral information relating to the near-infrared light, depending on the wavelength using different color channels.
- the processing unit can be set up to access different color channels and/or different combinations of color channels for different sub-ranges in the near-infrared range.
- the processing unit can contain a lookup table in which it is noted which color channel and/or color channels are to be taken into account for different wavelengths.
- the processing unit can be set up to determine spectral information relating to visible light, depending on the wavelength using different color channels.
- the image capture sensor system can be set up to provide spatially resolved intensity information for at least three different color channels.
- the processing unit can be set up to determine spectral information for at least a first spectral range from a single color channel and to determine spectral information for a second spectral range from a combination of exactly two color channels. This makes it easy to use an RGB image sensor or another multi-color image sensor.
- Several spectral ranges can be provided in which the processing unit determines spectral information from a single color channel each. For example, this can be the case in the visible range for a red spectral range and/or a green spectral range and/or a blue spectral range.
- spectral ranges can be provided in which the processing unit uses a combination of exactly two color channels. There can be two or three or four or even more such spectral ranges. For example, a number of distinguishable spectral ranges can also exceed a number of color channels.
- a total spectral range that can be captured by the image capture sensor system can be divided into a first number of partial spectral ranges, each of which is assigned a specific rule as to which color channel and/or color channels are to be used by the processing unit to determine spectral information in this partial spectral range. Accordingly, a first number of determination rules can be present.
- a second number of color channels can be present. In some embodiments, the first number can be greater than the second number.
- the Processing unit is configured to determine spectral information for at least a third spectral range from a combination of exactly three color channels.
- the processing unit can combine an R channel, a G channel and a B channel for this purpose.
- the image capture sensor system comprises a filter pattern that defines the color channels.
- the filter pattern can in particular be a pixel pattern.
- the image sensor can comprise the filter pattern.
- the filter pattern can, for example, comprise a Bayer matrix.
- the image sensor can be a Bayer sensor.
- Other filter patterns are also conceivable according to the invention, for example an XTrans matrix.
- more than three color channels can be present, for example RGEB color channels, where e stands for "emerald”.
- a broadband white light channel can also be present.
- the filter pattern can, for example, define white pixels and/or filterless pixels in addition to colored pixels.
- the image capture sensor system can be set up to provide spatially resolved intensity information for at least three different color channels, wherein the color channels comprise a red color channel, a green color channel and a blue color channel.
- the color information can relate to the visible spectral range, i.e. the color channels can also be sensitive in the near infrared range, in particular in different sub-ranges of the near infrared range.
- the described targeted evaluation of different color channels can also be used in the described imaging device with two image sensors.
- the first image sensor can comprise several color channels in the manner described and can be combined with a second image sensor that is light-sensitive in a different spectral range.
- the second image sensor can provide several color channels in the manner described.
- the invention can generally comprise a method for imaging using an imaging device according to the invention.
- a method for operating an imaging device according to the invention can be provided.
- first, second, third object, etc. these serve to name and/or assign objects. Accordingly, for example, a first object and a third object, but not a second object, can be included. However, a number and/or sequence of objects could also be derived using numerical words.
- FIG. 1 is a schematic representation of a system with a medical imaging device
- Fig. 2 is a schematic representation of a spectral camera of the imaging device
- Fig. 3 is a schematic representation of an image acquisition sensor system of the imaging device
- Fig. 4 is a schematic representation of different spectral ranges
- Fig. 5 is a schematic representation of an image acquisition sensor system of an alternative imaging device
- Fig. 7 is a schematic representation of a sensitivity of different color channels of the image acquisition sensor
- Fig. 8 is a schematic representation of a selection of spectral ranges from the color channels of the image acquisition sensor
- Fig. 9 schematic spectra illustrating a corrected spectrum
- Fig. 10 is a schematic flow diagram of a method for manufacturing an imaging device.
- Fig. 11 is a schematic flow diagram of an imaging method.
- Fig. 1 shows a schematic representation of a system 78 with a medical imaging device 10.
- the imaging device 10 comprises a spectral camera 12, which in the present case is a hyperspectral imaging camera.
- the imaging device 10 further comprises a processing unit 44, which is configured to process image data acquired by the spectral camera 12.
- the imaging device 10 may be part of an endoscope device 74.
- the endoscope device 74 may be parts of an endoscope 76.
- the system 78 includes the endoscope 76.
- the system 78 can include a supply unit 80, as shown, to which the endoscope 76 can be selectively coupled.
- the supply unit 80 can be configured to control the endoscope 76 and/or receive image data and/or other data from the endoscope 76.
- the supply unit 80 can be connectable and/or connected to a display 82 of the system 78, on which a user can display recorded images.
- the supply unit 80 can also provide illumination light for the endoscope 76 and/or the endoscope device 74. In the case shown, an illumination device 82 is provided which provides illumination light for imaging.
- the endoscope 76 can be connectable and/or coupled to the illumination device 82 via a fiber optic cable 84.
- the endoscope 76 can also be coupled and/or connected to the supply unit 80 via an electrical cable 86.
- the electrical cable 86 can be configured to transmit electrical energy and/or data.
- a separate lighting device and/or illumination light source can be provided.
- the endoscope 76 can alternatively or additionally comprise integrated lighting elements for providing illumination light.
- the processing unit 44 can be part of the supply unit 82 to which the endoscope 76 can be connected.
- the endoscope device 74 can then, for example, comprise the imaging device 10 and the endoscope 76.
- the endoscope device 74 can comprise the supply unit 82 and/or a lighting device and/or the display 84.
- Fig. 2 shows a schematic representation of the spectral camera 12 of the imaging device 10.
- the spectral camera 12 works according to the pushbroom principle.
- the spectral camera 12 is designed as a spectral scanning hyperspectral camera.
- the spectral camera 12 comprises an input optics 94.
- the spectral camera 12 also comprises an observation slit 96.
- the spectral camera 12 comprises an image capture sensor system 18.
- the spectral camera 12 also comprises an optics 14 which is designed to to spectrally split incident light by diffraction with respect to a spatial axis 16.
- the optics 14 can comprise optical elements 98, 100 such as lenses.
- the optics 14 can comprise a dispersive element 102.
- the dispersive element 102 is designed as an optical transmission grating.
- the spectral camera 12 comprises a camera unit 104, which can be moved by means of a scanning device 106.
- the camera unit 104 can comprise a carrier 108.
- the camera unit 104 also comprises at least the observation slit 96, the dispersive element 102 and the image capture sensor system 18.
- the scanning device 106 is designed to move at least the observation slit 96 and in particular the optics 14 and/or the image capture sensor system 18. In the present case, this movement takes place relative to the input optics 94. This movement serves to scan an object to be imaged in strips and/or rows and/or columns.
- an image can be captured by means of the image capture sensor system 18, one axis of which corresponds to a spatial axis, in particular perpendicular to the spatial direction 16, and the other axis of which corresponds to a spectral axis, in particular parallel to the spatial direction 16.
- Each captured image is thus a spectrally resolved image strip.
- the spectral camera 12 can also comprise a housing 110 which houses the camera unit 104 and the scanning device 106.
- a shaft of the endoscope 76 can be coupled to the housing.
- Fig. 3 shows a schematic representation of the image capture sensor system 18 of the imaging device 10.
- the image capture sensor system 18 comprises a first image sensor 22, which defines a first detection area 26.
- the first image sensor 22 is in this case a monochromatic silicon image sensor.
- the image capture sensor system 18 also comprises a second image sensor 28, which defines a second detection area 32.
- the second image sensor 28 is in this case designed as a SWIR sensor.
- a resolution of the first image sensor 22 can be at least 0.5 megapixels, at least 1 megapixel, at least 2 megapixels, at least 5 megapixels or at least 10 megapixels, although larger or smaller values are also possible.
- a resolution of the second image sensor 28 can be at least 0.5 megapixels, at least 1 megapixel, at least 2 megapixels, at least 5 megapixels or at least 10 megapixels, although larger or smaller values are also possible.
- the first image sensor 22 and the second image sensor 28 are arranged directly next to one another.
- the image sensors 22, 28 are mounted on a common circuit board and touch one another along an edge.
- the detection areas 26, 32 can be spaced apart from one another due to their design, because corresponding detection areas of the image sensors 22, 28 do not extend to their outermost edges.
- the two detection areas 26, 32 together form a light-sensitive area 20 of the image capture sensor system 18.
- the light-sensitive area 20 extends along the spatial axis 16, in the present case, for example, parallel to the spatial axis 16.
- the two detection areas 26, 32 lie in a common plane.
- the light-sensitive area 20 is thus a planar area that extends parallel to the spatial axis 16.
- the light spectrally split by the optics 14 falls on different positions along the spatial axis 16 depending on the wavelength. In a direction perpendicular to the spatial axis 16, a monochromatic or narrow-band/single-color image strip of an object to be imaged is projected and/or focused onto the light-sensitive area 20, the spatial dimension of which is predetermined by the observation slit 96.
- Fig. 4 shows a schematic representation of different spectral ranges that are relevant for the image capture sensor system.
- the first image sensor 22 is light-sensitive in a first spectral range 24 that extends, for example, from 450 nm to at least 900 nm, in this case approximately from 400 nm to 1000 nm.
- the second image sensor 26 is light-sensitive in a second spectral range 30 that extends, for example, from 900 nm to at least 1500 nm, in this case to at least 1700 nm.
- the relative spatial arrangement of the optics 14 and the light-sensitive region 20 means that light from an overall spectral range 30 falls on the light-sensitive region 20 that is defined by the two spectral ranges 24, 30.
- the total spectral range 30 extends, for example, from a first wavelength 36 to a second wavelength 38.
- the first wavelength is, for example, 420 nm or 450 nm
- the second wavelength is, for example, 1500 nm or 1600 nm.
- the total spectral range 34 can have at least one spectral gap 112, which is formed by the spacing of the two detection areas 26, 32. In this area, spectrally split light does not hit a light-sensitive part of the image capture sensor system 18, but rather, for example, frame elements of the image sensors 22, 28, and therefore cannot be detected.
- the overall spectral range 34 is at least essentially continuous due to the arrangement of the image sensors 22, 28 next to one another.
- an edge filter 40 is provided, which is located in front of the second image sensor 28. In the embodiment shown as an example, this edge filter 40 also covers part of the first image sensor 22.
- a spectral edge of the edge filter 40 is selected at a cutoff wavelength 42 such that higher orders of diffraction are blocked.
- the cutoff wavelength 42 is twice the first wavelength 36, i.e. 840 nm. Higher diffraction orders of light with a wavelength between the first wavelength 36 and the cutoff wavelength 42 are thus blocked by both the covered part of the first image sensor 22 and the second image sensor 28.
- the 2nd order of the cutoff wavelength 42 which occurs at 1680 nm, is already outside the total spectral range 34. The present arrangement can therefore ensure that only light of the 1st diffraction order is imaged.
- edge filters can be used. This makes it possible to work with higher diffraction orders for which the critical wavelengths in question are closer together. In addition, an even larger total spectral range can be used.
- the image sensors 22, 28 can also be selected or provided with their own filters such that a transition between the two image sensors 22, 28 coincides with the 2nd order of the first wavelength 36. Higher diffraction orders then only fall on the second image sensor 28 and can thus be easily masked out.
- the processing unit 44 is designed to determine a common image and thus combined spectral information from the sensor signals of the two image sensors 22, 28. This then describes a spectrum over the entire spectral range 34.
- the spectral position of the gap 112 can be shifted. If necessary, several scans can be carried out in succession in order to obtain spectral information for the gap 112 as well. In some embodiments, the gap 112 can also simply be accepted by foregoing spectral resolution in the narrow spectral range in question.
- edge filter 40 does not necessarily have to cover the entire second image sensor 28.
- an edge filter 40 can also be provided exclusively in front of a partial area of the first image sensor, for example if the spectral sensitivity of the second image sensor 28 ensures that it does not detect any diffracted light of undesirable higher orders.
- Fig. 5 shows a schematic representation of an image capture sensor system 18' of an alternative imaging device.
- the reference numerals of this embodiment are provided with inverted commas.
- some or all of the components of the system described above can also be present.
- the embodiment described below also relates to a system with this structure.
- the image capture sensor system 18' comprises an image sensor 54', which defines a light-sensitive area 20'.
- the image sensor 54' is, for example, a silicon-based color sensor, such as an RGB CCD sensor. This is used in a spectral camera, as shown in Fig. 2.
- the image sensor 54' defines a light-sensitive area 20' that extends along a spatial axis 16'. Incident light is spectrally split along the spatial axis 16' by an optics of the spectral camera as described above.
- the image sensor 54' is light-sensitive in a spectral range within which Light of different diffraction orders can occur. In the present case, the image sensor 54' is light-sensitive, for example, in a spectral range between 400 nm and 1300 nm.
- a partial area 46' of the light-sensitive area 20' light of the first and second diffraction orders therefore overlap.
- the partial area 46' extends from 800 nm, i.e. twice the smallest detectable wavelength, to 1300 nm, i.e. the largest detectable wavelength.
- Fig. 6 shows transmission spectra of different color filters of the image capture sensor system 18'.
- Fig. 7 shows a schematic representation of a sensitivity of different color channels of the image capture sensor system 18'.
- the image sensor 54' detects light in a first color channel 48', a second color channel 50' and a third color channel 52'.
- the three color channels 48, 50, 52 can be, for example, a red color channel, a green color channel and a blue color channel with respect to visible light.
- the image sensor 54' comprises, for example, a filter pattern 72', which can comprise a Bayer matrix as shown schematically in Fig. 5.
- the filter pattern 72' comprises a plurality of pixel filters, which are shown excessively large and in too small a number in Fig. 5 for illustration purposes.
- the pixel filters are designated R for red, G for green and B for blue.
- a resolution of the image sensor 54' can be at least 0.5 megapixels, at least 1 megapixel, at least 2 megapixels, at least 5 megapixels or at least 10 megapixels, although larger or smaller values are also possible.
- the filters used define three different spectral sensitivities 88', 90', 92' according to three different transmission spectra 162, 164, 166.
- the transmission spectra 162, 164, 166 are shown for a wavelength range that extends approximately from 450 nm to 1000 nm.
- the transmission spectrum 166' belongs to a red filter or to the red pixel filters
- the transmission spectrum 164 ' belongs to a green filter or to the green pixel filters
- the transmission spectrum 162' belongs to a blue filter or to the blue pixel filters.
- the transmission spectrum 166' belongs to the first color channel 48'
- the transmission spectrum 164 ' belongs to the second color channel 50'
- the transmission spectrum 162' belongs to the third color channel 52'.
- the color channels 48', 50', 52' each refer to light that is detectable by the respective color pixels of the image sensor 54' due to the associated spectral sensitivity 88', 90', 92'.
- the transmission spectra 162', 164', 166' each define a specific color sensitivity in the visible range, which is why they are assigned to the three color channels 48', 50', 52'.
- the spectral sensitivity varies depending on the wavelength. In particular, it does not disappear outside the visible range. Instead, each of the color channels 48', 50', 52' also shows a specific spectral sensitivity in the near infrared. The spectral sensitivity is different for the three color channels 48', 50', 52'.
- spectral sensitivities are divided into three categories for illustration purposes. High spectral sensitivity in a specific spectral range is represented by white filled boxes. Medium spectral sensitivity is represented by light gray filled boxes. Low spectral sensitivity is represented by dark gray filled boxes. Due to the diffraction by the optics 14, the spatial axis 16' shown in the transverse direction corresponds to a spectral position. The relevant wavelength can therefore be deduced from a position on the image sensor 54' with respect to the spatial axis.
- the color channels 48', 50', 52' are taken into account according to their respective spectral sensitivities 88, 90, 92.
- the alternative imaging device comprises a processing unit 44', which is set up to use the spatially resolved intensity information of the color channels 48', 50', 52' to determine spectral information that describes a corrected spectrum that is corrected to at least the 2nd order with respect to the diffraction light.
- Fig. 8 shows a schematic representation of a selection of spectral ranges from the color channels 48', 50', 52'.
- the rectangles drawn with thick frame lines mark selected spectral ranges or corresponding position ranges on the image sensor 56'.
- those color channels 48', 50', 52' are selected which are suitably spectrally sensitive and which have transmission properties that allow light of higher diffraction orders to be blocked out.
- the blue color channel 56' is not used because its filter allows short-wave light to pass through and therefore, for example, for wavelengths between 800 and 900 nm, second-order light with a wavelength of 400 to 450 nm falls on the pixels of the color channel 56'. This light, however, is blocked by the filters of the red color channel 48' and the green color channel 50', as can be seen in Fig. 6.
- a spectral range 56', 58, 60' is considered in exactly one of the color channels 48', 50', 52'.
- a spectral range 66' immediately adjacent to the visible range all three color channels 48', 50', 52' are combined.
- a spectral range 68' following this two color channels 48', 50' are combined, but the third color channel 52' is excluded.
- a spectral range 62' that lies even further in the red only the first color channel 48' is considered.
- two color channels 48', 52' are combined further in the red in a spectral range 70', and finally only the third color channel 52' in a spectral range 64'.
- the first color channel 48' and the second color channel 50' would each contribute 2nd order diffraction light, which is blocked due to the spectral sensitivity of the third color channel 52' (see Fig. 6).
- the processing unit 44' can perform a spectral correction. As described, the processing unit 44' obtains spectral information from a single one of the color channels 48', 50', 52' in the spectral ranges 56', 58', 60', 62', 64', from two of the color channels 48', 50', 52' in the spectral ranges 66', 68', and from all three color channels 48', 50', 52' in the spectral range 70'.
- Fig. 9 shows schematic spectra to illustrate a correction made possible by this.
- the solid line shows the corrected spectrum obtained by the processing unit 44', which is free of higher diffraction orders. If, however, the light of higher diffraction orders were also detected, a distorted spectrum 116 would be obtained. This would, for example, contain the 2nd order contribution shown as spectrum 118.
- suitable color channels 48', 50', 52' By selecting suitable color channels 48', 50', 52', higher Orders can be reliably hidden using an existing filter pattern.
- an image sensor 56' with a filter pattern can also be used as the first image sensor 22 in the above-described imaging device 10' with two image sensors 22, 28.
- the described color channel-based correction can then be carried out in a spectral range covered by this image sensor.
- the different spectral sensitivity of the second image sensor 28' can be utilized and/or an additional edge filter can be used.
- Fig. 10 shows a schematic flow diagram of a method for producing an imaging device 10 which, as described above, has two image sensors 22, 28 arranged next to one another.
- the method sequence is also clear from the above description.
- a step S11 comprises providing an optics 14 which is designed to spectrally split incident light and to image it spectrally split onto a spatial axis 16.
- a step S12 comprises providing a first image sensor 22 which is light-sensitive in a first spectral range 24.
- a step S13 comprises providing a second image sensor 28 which is light-sensitive in a second spectral range 30 which is different from the first spectral range 24, wherein the first spectral range 24 and the second spectral range 30 together define a substantially continuous total spectral range 34 which extends from a first wavelength 36 to a second wavelength 38, wherein the first wavelength 36 lies in the first spectral range 24, wherein the second wavelength 38 lies in the second spectral range 30, and wherein the second wavelength 38 is at least twice as large as the first wavelength 36.
- a step S14 comprises arranging the first image sensor 22 and the second image sensor 28 such that the second image sensor 28 is located next to the first image sensor 22 with respect to the spatial axis 16, and such that the first image sensor 22 has a first detection area 26 of a light-sensitive image area 20 and the second image sensor 28 covers a second detection area 32 of the light-sensitive image area 20 which is different from the first detection area 26.
- An optional step S15 comprises attaching at least one edge filter 40 over at least a part of the first image sensor 22 and/or over at least a part of the second image sensor 28.
- Fig. 11 shows a schematic flow diagram of a method for imaging using an imaging device which, as described, comprises an image sensor with several different color channels 48', 50', 52'. The method sequence is also clear from the above description.
- a step S21 comprises spectrally splitting incident light with respect to a spatial axis 16' by diffraction.
- a step S22 comprises imaging the spectrally split light onto an image capture sensor 18' which defines a light-sensitive region 20' and which is arranged such that the light-sensitive region 20' extends along the spatial axis 16' and the spectrally split light falls on the light-sensitive region 20', with different diffraction orders superimposing in a partial region 46' of the light-sensitive region 20'.
- a step S23 includes capturing spatially resolved intensity information for at least two different color channels 48', 50', 52' by means of the image capture sensor system 18', which differ in terms of their wavelength-dependent sensitivity such that diffraction light of at least 2nd order can be detected with different intensities in the color channels 48', 50', 52'.
- a step S24 includes determining spectral information that describes a spectrum over the spectral range that is corrected with respect to the diffraction light of at least 2nd order, based on the spatially resolved intensity information of the color channels 48', 50', 52'.
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- General Physics & Mathematics (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
Die Erfindung betrifft eine medizinische Bildgebungsvorrichtung (10) mit einer Spektralkamera (12), die dazu eingerichtet ist, hyperspektrale Abbildungen aufzunehmen. Die Spektralkamera (12) umfasst eine Optik (14), die dazu eingerichtet ist, einfallendes Licht durch Beugung bezüglich einer Raumachse (16) spektral aufzuspalten, und eine Bilderfassungssensorik (18), die einen lichtempfindlichen Bereich (20) definiert und die bezüglich der Optik (14) derart angeordnet ist, dass sich der lichtempfindliche Bereich (20) entlang der Raumachse (16) erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich (20) fällt. Die Bilderfassungssensorik (18) umfasst einen ersten Bildsensor (22), der in einem ersten Spektralbereich (24) lichtempfindlich ist, und der einen ersten Detektionsbereich (26) des lichtempfindlichen Bereichs (20) abdeckt, und einen zweiten Bildsensor (28), der in einem zweiten Spektralbereich (30) lichtempfindlich ist, der von dem ersten Spektralbereich (24) verschieden ist, und der einen von dem ersten Detektionsbereich (26) verschiedenen zweiten Detektionsbereich (32) des lichtempfindlichen Bereichs (20) abdeckt, wobei der zweite Bildsensor (28) bezüglich der Raumachse (16) neben dem ersten Bildsensor (22) angeordnet ist. Der erste Spektralbereich (24) und der zweite Spektralbereich (30) definieren gemeinsam einen zumindest im Wesentlichen durchgängigen Gesamtspektralbereich (34), der sich von einer ersten Wellenlänge (36) bis zu einer zweiten Wellenlänge (38) erstreckt, wobei die erste Wellenlänge (36) im ersten Spektralbereich (24) liegt. Die Erfindung betrifft zudem eine Endoskopvorrichtung (74) mit einer Bildgebungsvorrichtung (10), ein Endoskop (76) mit einer Endoskopvorrichtung (74) und ein Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung (10).
Description
Medizinische Bildgebungsvorrichtung, Endoskopvorrichtung, Endoskop und Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung
Die Erfindung betrifft eine medizinische Bildgebungsvorrichtung, eine Endoskopvorrichtung, ein Endoskop und ein Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung.
Aus dem Stand der Technik sind Bildgebungsvorrichtungen wie beispielsweise endoskopische, exoskopische oder mikroskopische Vorrichtungen bekannt, die Multispektral- oder Hyperspektralbilder erzeugen. Multispektral- oder Hyperspektralbilder weisen neben zwei räumlichen Dimensionen, wie sie etwa ein herkömmliches Bild einer Kamera hat, eine spektrale Dimension auf. Die spektrale Dimension umfasst mehrere Spektralbänder (Wellenlängenbänder). Multispektrale und hyperspektrale Bilder unterscheiden sich im Wesentlichen in der Anzahl an und der Breite von ihren spektralen Bändern. Solche Systeme können grundsätzlich ebenfalls dazu geeignet sein, Fluoreszenzaufnahmen durchzuführen.
Es sind einige Bildgebungsvorrichtungen zur Erzeugung solcher Multispektral- oder Hyperspektralbilder, insbesondere im Kontext medizinischer Anwendungen, bekannt. In DE 20 2014 010 558 U1 ist beispielsweise eine Vorrichtung zur Aufnahme eines Hyperspektralbilds eines Untersuchungsgebietes eines Körpers beschrieben. In der Vorrichtung sind ein Eingangsobjektiv zur Erzeugung eines Bilds in einer Bildebene sowie eine schlitzförmige Blende in der Bildebene zur Ausblendung eines schlitzförmigen Bereichs des Bilds angeordnet. Das durch die Blende hindurchtretende Licht wird mittels eines dispersiven Elements aufgefächert und mittels eines Kamerasensors aufgenommen. Dadurch kann von dem Kamerasensor eine Vielzahl von Spektren mit jeweils zugeordneter räumlicher Koordinate entlang der Längsrichtung der schlitzförmigen Blende aufgenommen werden. Die beschriebene Vorrichtung ist weiterhin dazu eingerichtet, in einer von der Längsrichtung der schlitzförmigen Blende verschiedenen Richtung weitere Spektren entlang der Längsrichtung der schlitzförmigen Blende aufzunehmen. Das dieser Offenbarung zugrunde liegende Verfahren zur Erzeugung von Multispektral- oder Hyperspektralbildern ist auch als sogenanntes Pushbroom-Verfahren bekannt.
Wie in DE 10 2020 105 458 A1 beschrieben, eignen sich multispektrale und hyperspektrale Bildgebungsvorrichtungen insbesondere als endoskopische Bildgebungsvorrichtung. In dem Zusammenhang ist multispektrale und/oder
hyperspektrale Bildgebung ein fundamentales Einsatzfeld beispielsweise zur Diagnostik sowie zur Beurteilung eines Erfolgs bzw. einer Qualität eines Eingriffs.
In den beschriebenen Vorrichtungen und Verfahren werden Bildsensoren eingesetzt, die über einen bestimmten Spektralbereich lichtempfindlich sind, üblicherweise sowohl im sichtbaren Bereich als auch im Nahinfrarotbereich. Durch ein geeignetes dispersives Element wird einfallendes Licht je nach Wellenlänge auf unterschiedliche Positionen und somit unterschiedliche Pixel des verwendeten Bildsensors gelenkt. Aus der Position eines Pixels kann dann auf die Wellenlänge des Lichts geschlossen werden. Oftmals wird der betreffende Bildsensor derart angeordnet, dass eine Richtung der dispersiven Aufspaltung parallel zu einer der beiden Bildachsen des Bildsensors verläuft. Eine oder mehrere benachbarte Bildzeilen bzw. eine oder mehrere benachbarte Bildspalten sind dann als Spektrum eines Bildpunkts interpretierbar.
Als dispersive Elemente werden in Hyperspektralkameras regelmäßig optische Gitter eingesetzt. Der Winkel, unter dem dabei Licht einer bestimmten Wellenlänge auftritt, ist durch die bekannte Gittergleichung n ■ X = g ■ sin(cpn) gegeben, wobei n die Ordnung des Hauptmaximums bezeichnet, X die Wellenlänge, g die Gitterkonstante und (pn den Ablenkwinkel des Hauptmaximums.
Aufgrund der Gittergleichung fallen Maxima höherer Ordnungen für kurze Wellenlängen mit Maxima niedrigerer Ordnung für größere Wellenlängen zusammen. Beispielsweise fallen das 1. Hauptmaximum für eine gegebene Wellenlänge, beispielsweise 1000 nm, mit dem zweiten Hauptmaximum der halben Wellenlänge, beispielsweise 500 nm, zusammen. Wird ein entsprechend großer Spektralbereich beobachtet, kann daher allein auf der Grundlage eines Ablenkwinkels bzw. einer Beobachtungsposition nicht zuverlässig auf die tatsächliche Wellenlänge geschlossen werden. In der Praxis wird daher der Spektralbereich, der von einer Hyperspektralkamera aufgenommen wird, entsprechend beschränkt, zum Beispiel auf den Bereich von 500 nm bis 1000 nm, sodass keine Beugungsmaxima höherer Ordnung auftreten.
Ausgehend vom Stand der Technik liegt der Erfindung die Aufgabe zugrunde, eine weitreichende Einsetzbarkeit hyperspektraler Bildgebung zu ermöglichen.
Diese Aufgabe wird erfindungsgemäß gelöst durch eine medizinische Bildgebungsvorrichtung, eine Endoskopvorrichtung, ein Endoskop und ein Verfahren, wie sie hierin beschrieben und in den Ansprüchen definiert sind.
Es kann eine medizinische Bildgebungsvorrichtung mit einer Spektralkamera vorgesehen sein, die dazu eingerichtet ist, hyperspektrale Abbildungen aufzunehmen. Die Spektralkamera umfasst eine Optik, die dazu eingerichtet ist, einfallendes Licht durch Beugung bezüglich einer Raumachse spektral aufzuspalten und eine Bilderfassungssensorik, die einen lichtempfindlichen Bereich definiert und die bezüglich der Optik derart angeordnet ist, dass sich der lichtempfindliche Bereich entlang der Raumachse erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich fällt. Die Bilderfassungssensorik kann einen ersten Bildsensor umfassen, der in einem ersten Spektralbereich lichtempfindlich ist, und der einen ersten Detektionsbereich des lichtempfindlichen Bereichs abdeckt. Ferner kann die Bilderfassungssensorik einen zweiten Bildsensor umfassen, der in einem zweiten Spektralbereich lichtempfindlich ist, der von dem ersten Spektralbereich verschieden ist, und der einen von dem ersten Detektionsbereich verschiedenen zweiten Detektionsbereich des lichtempfindlichen Bereichs abdeckt, wobei der zweite Bildsensor bezüglich der Raumachse neben dem ersten Bildsensor angeordnet ist. Der erste Spektralbereich und der zweite Spektralbereich können gemeinsam einen zumindest im Wesentlichen durchgängigen Gesamtspektralbereich definieren, der sich von einer ersten Wellenlänge bis zu einer zweiten Wellenlänge erstreckt, wobei die erste Wellenlänge im ersten Spektralbereich liegt.
Des Weiteren kann eine Endoskopvorrichtung mit einer derartigen Bildgebungsvorrichtung vorgesehen sein.
Außerdem kann ein Endoskop mit einer solchen Endoskopvorrichtung vorgesehen sein.
Des Weiteren kann ein Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung bereitgestellt werden, wobei es sich bei der Bildgebungsvorrichtung um eine erfindungsgemäße Bildgebungsvorrichtung handeln kann. Das Verfahren umfasst ein Bereitstellen einer optischen Anordnung, die dazu eingerichtet ist, einfallendes Licht spektral aufzuspalten und spektral aufgespaltet auf eine Raumachse abzubilden. Zudem kann das Verfahren ein Bereitstellen eines ersten Bildsensors umfassen, der in einem ersten Spektralbereich lichtempfindlich
ist. Außerdem kann das Verfahren ein Bereitstellen eines zweiten Bildsensors umfassen, der in einem zweiten Spektralbereich lichtempfindlich ist, der von dem ersten Spektralbereich verschieden ist, wobei der erste Spektralbereich und der zweite Spektral bereich gemeinsam einen zumindest im Wesentlichen durchgängigen Gesamtspektralbereich definieren, der sich von einer ersten Wellenlänge bis zu einer zweiten Wellenlänge erstreckt, wobei die erste Wellenlänge im ersten Spektralbereich liegt, wobei die zweite Wellenlänge im zweiten Spektralbereich liegt, und wobei die zweite Wellenlänge wenigstens doppelt so groß ist wie die erste Wellenlänge. Ferner kann das Verfahren ein Anordnen des ersten Bildsensors und des zweiten Bildsensors derart umfassen, dass sich der zweite Bildsensor bezüglich der Raumachse neben dem ersten Bildsensor befindet, und derart, dass der erste Bildsensor einen ersten Detektionsbereich eines lichtempfindlichen Bildbereichs abdeckt und der zweite Bildsensor einen von dem ersten Detektionsbereich verschiedenen zweiten Detektionsbereich des lichtempfindlichen Bildbereichs abdeckt.
Ferner kann eine medizinische Bildgebungsvorrichtung vorgesehen sein. Die Bildgebungsvorrichtung umfasst eine Spektral kamera, die dazu eingerichtet ist, hyperspektrale Abbildungen aufzunehmen. Die Spektralkamera umfasst eine Optik, die dazu eingerichtet ist, einfallendes Licht durch Beugung bezüglich einer Raumachse spektral aufzuspalten und eine Bilderfassungssensorik, die einen lichtempfindlichen Bereich definiert und die bezüglich der Optik derart angeordnet ist, dass sich der lichtempfindliche Bereich entlang der Raumachse erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich fällt, wobei sich in einem Teilbereich des lichtempfindlichen Bereichs unterschiedliche Beugungsordnungen überlagern. Die Bilderfassungssensorik kann dazu eingerichtet sein, räumlich aufgelöste Intensitätsinformation für zumindest zwei unterschiedliche Farbkanäle zu erfassen, die sich hinsichtlich ihrer wellenlängenabhängigen Sensitivität derart unterscheiden, dass Beugungslicht wenigstens 2. Ordnung in den Farbkanälen unterschiedlich intensiv detektierbar ist. Die Bildgebungsvorrichtung kann ferner eine Verarbeitungseinheit umfassen, die dazu eingerichtet ist, anhand der räumlich aufgelösten Intensitätsinformation der Farbkanäle Spektralinformation zu ermitteln, die ein Spektrum beschreibt, das bezüglich des Beugungslichts wenigstens 2. Ordnung korrigiert ist.
Des Weiteren kann eine Endoskopvorrichtung mit einer derartigen Bildgebungsvorrichtung vorgesehen sein.
Außerdem kann ein Endoskop mit einer solchen Endoskopvorrichtung vorgesehen sein.
Zudem kann ein Verfahren zur Bildgebung vorgesehen sein, insbesondere mittels einer erfindungsgemäßen medizinischen Bildgebungsvorrichtung. Das Verfahren umfasst ein spektrales Aufspalten einfallenden Lichts bezüglich einer Raumachse durch Beugung. Ferner kann das Verfahren ein Abbilden des spektral aufgespalteten Lichts auf eine Bilderfassungssensorik umfassen, die einen lichtempfindlichen Bereich definiert und die derart angeordnet ist, dass sich der lichtempfindliche Bereich entlang der Raumachse erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich fällt, wobei sich in einem Teilbereich des lichtempfindlichen Bereichs unterschiedliche Beugungsordnungen überlagern. Zudem kann das Verfahren ein Erfassen räumlich aufgelöster Intensitätsinformation für zumindest zwei unterschiedliche Farbkanäle mittels der Bilderfassungssensorik umfassen, die sich hinsichtlich ihrer wellenlängenabhängigen Sensitivität derart unterscheiden, dass Beugungslicht wenigstens 2. Ordnung in den Farbkanälen unterschiedlich intensiv detektierbar ist. Außerdem kann das Verfahren ein Ermitteln von Spektralinformation umfassen, die ein korrigiertes Spektrum über den Spektralbereich beschreibt, das bezüglich des Beugungslichts wenigstens 2. Ordnung korrigiert ist, anhand der räumlich aufgelösten Intensitätsinformation der Farbkanäle.
Die erfindungsgemäßen Merkmale gestatten es, hyperspektrale Bildgebung weitreichend einzusetzen. Insbesondere kann ein großer zur hyperspektralen Bildgebung verwendbarer Spektralbereich erzielt werden. Verwendete Bilderfassungssensorik kann trotz eines großen verwendbaren Spektralbereichs konstruktiv einfach und/oder kostengünstig erhalten werden. Die Erfinder haben erkannt, dass für medizinische Anwendungen hyperspektraler Bildgebung auch Spektralbereich unterhalb von 500 nm und/oder oberhalb von 1000 nm relevant sind und dass diese zusätzlichen Spektralbereiche vorteilhaft gleichzeitig verfügbar sein sollen. Insbesondere haben die Erfinder festgestellt, dass im Wellenlängenbereich zwischen etwa 400 nm und 500 nm relevante Gewebeinformation bzgl. einer Perfusion des Gewebes verfügbar ist, sofern in diesem Bereich auf geeignete Weise Bilddaten erfasst werden. Durch die Merkmale der Erfindung ist es möglich, zwischen verschiedenen Ordnungen gebeugten Lichts zu unterscheiden, wodurch spektral aufgespaltetes Objektlicht umfassend analysierbar und für eine hyperspektrale Bildgebung verwendbar gemacht wird. Hierdurch wird ein Spektralbereich für Bildgebung zugänglich, für den andernfalls mehrere unterschiedliche
Hyperspektralkameras erforderlich werden. Entsprechen können eine kompakte Bauweise, ein geringer Grad an Komplexität und ein hoher Grad an Kosteneffizienz erzielt werden.
Die Bildgebungsvorrichtung kann zur medizinischen Bildgebung eingerichtet sein. Unter einer „medizinischen Bildgebung“ soll insbesondere eine Bildgebung verstanden werden, welche Rückschlüsse auf physiologische Eigenschaften eines Untersuchungsgebiets zulässt, wie beispielsweise Gewebeart und/oder Gewebeeigenschaften, wie beispielsweise einen Fettgehalt, einen Wassergehalt, eine Oxygenierung, ein Vorhandensein eines Farbstoffs oder dergleichen. Vorzugsweise nutzt die Bildgebung eine Spektralanalyse zur Bestimmung dieser physiologischen Eigenschaften. Bei dem Untersuchungsgebiet handelt es sich insbesondere um ein Gebiet, welches physiologische Bestandteile umfasst, wie beispielsweise Gewebe, Blut oder dergleichen. Das Untersuchungsgebiet liegt beispielsweise innerhalb einer natürlichen oder künstlich geschaffenen Kavität. Solche Kavitäten sind in etwa der Bauchraum, der Darm, die Blase, die Niere oder dergleichen. Allerdings könnte auch offenes Gewebe als Untersuchungsgebiet dienen. Die Bildgebungsvorrichtung ist in einigen Ausführungsformen dazu eingerichtet, zur Begutachtung und/oder Beobachtung in einen Hohlraum einführbar zu sein, beispielsweise in eine künstliche und/oder natürliche Kavität, etwa in ein Inneres eines Körpers, in ein Körperorgan, in Gewebe oder dergleichen. Die Bildgebungsvorrichtung kann auch dazu eingerichtet sein, zur Begutachtung und/der Beobachtung in ein Gehäuse, eine Verschalung, einen Schacht, ein Rohr oder eine andere, insbesondere künstliche, Struktur einführbar zu sein.
Mittels der Bildgebungsvorrichtung und insbesondere mittels der Spektralkamera kann ein Aufnahmevorgang durchführbar sein. Unter einem „Aufnahmevorgang“ soll insbesondere ein Vorgang zur Aufnahme verstanden werden, welcher wenigstens einen oder mehrere Verfahrensschritte umfasst. In dem Aufnahmevorgang der medizinischen Bildgebung wird eine Spektralabbildung oder Teilabschnitte der Spektralabbildung eines Untersuchungsgebiets mittels der Spektralkamera aufgenommen.
Die Spektralkamera kann eine Hyperspektralkamera, insbesondere eine Pushbroom- Spektralkamera sein bzw. nach dem Pushbroom-Prinzip arbeiten. Zum Aufnehmen der hyperspektralen Abbildungen wird vorzugsweise die Technik des räumlichen Scannens bzw. Spatial-Scanning verwendet. Das Untersuchungsgebiet wird insbesondere zur Aufnahme der Spektralabbildung nacheinander in mehreren
Aufnahmeschritten aus einzelnen Teilabschnitten erzeugt, und zwar insbesondere durch zeitlich versetztes zeilenweises Abscannen des Untersuchungsgebiets. Die Teilabschnitte können dann durch spektrale Auffächerung Aufschluss über eine Raumdimension und eine Spektraldimension geben. Aus den Teilabschnitten kann dann eine Spektralabbildung zusammengesetzt werden, wobei diese Teilabschnitte entlang einer weiteren Raumdimension zur Bildkonstruktion aneinandergesetzt werden. Die Spektralabbildung wird insbesondere von einem Datenwürfel gebildet, welcher die Raumdimensionen, die weitere Raumdimension und die Spektraldimension umfasst. In anderen Worten ist die Spektralkamera und insbesondere die Bilderfassungssensorik dazu eingerichtet, Bilddaten zu erzeugen und/oder zu erfassen, die räumlich und spektral aufgelöste Information umfassen. Die räumliche und spektrale Information der Bilddaten kann derart beschaffen sein, dass daraus für mehrere räumliche Bildpunkte jeweils ein zugehöriges Spektrum gewinnbar ist. Die Spektralkamera kann dahingehend räumlich auflösend sein, dass sie in zumindest zwei unterschiedliche Raumrichtungen jeweils eine Auflösung von zumindest 100 Bildpunkten, vorzugsweise von zumindest 200 Bildpunkten, bevorzugt von zumindest 300 Bildpunkten und vorteilhaft von zumindest 400 Bildpunkten liefert.
Die Spektralkamera und insbesondere die Optik und/oder die Bilderfassungssensorik kann/können zur hyperspektralen Bildgebung eingerichtet sein, im Speziellen dazu, hyperspektrale Bilddaten zu erfassen und/oder zu erzeugen. Hyperspektrale Bildgebung bzw. hyperspektrale Bilddaten kann sich dabei insbesondere auf solche Bildgebung beziehen, bei der wenigstens 10, wenigstens 20, wenigstens 50 oder sogar wenigstens 100 Spektralbänder voneinander unabhängig erfassbar sind und/oder erfasst werden. Die Spektralkamera kann nach dem Pushbroom-Prinzip und/oder nach dem Whiskbroom-Prinzip und/oder nach dem Staring-Prinzip und/oder nach einem Schnappschussprinzip arbeiten.
In einigen Ausführungsformen kann die Bildgebungsvorrichtung zusätzlich eine stereoskopische Funktionsweise ermöglichen, mittels welcher zusätzliche dreidimensionale Rauminformationen aufgenommen werden können. In diesem Fall wird eine hyperspektrale Abbildung von einem vierdimensionalen Hyperwürfel gebildet, welcher die Raumdimensionen, die weitere Raumdimension und die Spektraldimension sowie eine zusätzliche Raumdimension umfasst. Dies kann beispielsweise durch die Kombination zweier zueinander in ihrer Blickrichtung versetzt angeordneter Spektralkameras realisiert werden.
Die Spektralkamera kann eine endoskopische Spektralkamera sein. Unter einer „endoskopischen Spektral kamera“ soll insbesondere eine Spektral kamera verstanden werden, welche mit einem Endoskop zusammenwirkt, gekoppelt bzw. koppelbar ist oder vorzugsweise mit diesem integral ausgebildet ist. Alternativ oder zusätzlich kann die Spektralkamera eine exoskopische Spektralkamera sein. Unter einer „exoskopischen Spektralkamera“ soll insbesondere eine Spektralkamera verstanden werden, welche mit einem Exoskop zusammenwirkt, gekoppelt bzw. koppelbar ist oder vorzugsweise mit diesem integral ausgebildet ist. Unter einem „Exoskop“ kann insbesondere auch ein chirurgisches Mikroskop verstanden werden. Bevorzugt soll unter einem Exoskop jedoch eine chirurgische Bildgebungsvorrichtung, insbesondere ein chirurgisches Mikroskop, verstanden werden, das frei von einem Okular ist und stattdessen vorzugsweise eine Kameraeinrichtung vorzugsweise mit wenigstens einer Weißlichtkamera umfasst.
Allgemein ausgedrückt kann die Bildgebungsvorrichtung eine mikroskopische, makroskopische und/oder exoskopische Bildgebungsvorrichtung sein. Die Bildgebungsvorrichtung kann als Mikroskop, Makroskop und/oder Exoskop ausgebildet sein und/oder ein solches umfassen. In einigen Ausführungsformen kann die Bildgebungsvorrichtung eine endoskopische Bildgebungsvorrichtung sein. Die Bildgebungsvorrichtung kann eine Endoskopvorrichtung sein. Sie kann ein Endoskop und/oder ein Endoskopsystem umfassen und/oder als ein solches ausgebildet sein und/oder zumindest einen Teil und bevorzugt zumindest einen Großteil und/oder Hauptbestandteil eines Endoskops und/oder eines Endoskopsystems ausbilden. „Zumindest ein Großteil“ kann zumindest 55 %, vorzugsweise zumindest 65 %, bevorzugt zumindest 75 %, besonders bevorzugt zumindest 85 % und ganz besonders bevorzugt zumindest 95 % bedeuten, und zwar insbesondere mit Bezug auf ein Volumen und/oder eine Masse eines Objekts.
In einigen Ausführungsformen ist die Bilderfassungseinheit dazu eingerichtet, laufend aktualisierte Bilddaten zu erzeugen. Die Bilderfassungseinheit kann beispielsweise dazu eingerichtet sein, die Bilddaten im Wesentlichen in Echtzeit zu erzeugen, was beispielsweise eine Erzeugung aktualisierter Bilddaten wenigstens als 30 Sekunden, in einigen Fällen wenigstens als 20 Sekunden und in manchen Fällen sogar wenigstens alle 10 Sekunden oder wenigstens alle 5 Sekunden umfasst.
Die Bildgebungsvorrichtung kann eine Beleuchtungsvorrichtung umfassen und/oder mit einer Beleuchtungsvorrichtung, insbesondere lösbar, verbindbar sein, die zumindest ein Leuchtelement umfasst, das dazu eingerichtet ist, in zumindest einem
Betriebszustand ein abzubildendes Objekt zu beleuchten und/oder auszuleuchten. Das Leuchtelement kann eine Weißlichtquelle, eine, insbesondere durchstimmbare, monochrome Lichtquelle, ein Laser, ein Weißlichtlaser, zumindest eine Leuchtdiode und/oder ein Leuchtdiodenarray, zumindest eine Laserdiode und/oder ein Laserdiodenarray oder dergleichen umfassen. Die Beleuchtungsvorrichtung kann mehrere unterschiedliche Leuchtelemente umfassen, die wahlweise aktivierbar sind. Insbesondere kann in unterschiedlichen Beleuchtungsmodi Beleuchtungslicht durch geeignetes Mischen und/oder Aktivieren und/oder Deaktivieren eines oder mehrerer Leuchtelemente bereitstellbar sein.
Die Bildgebungsvorrichtung kann eine Steuereinheit umfassen. Die Steuereinheit kann geeignete Steuerelektronik und/oder einen Computer umfassen. In einigen Ausführungsformen umfasst die Steuereinheit zumindest einen Prozessor, computerlesbaren Speicher, ein Betriebssystem und/oder geeignete Ein- und Ausgänge. Die Steuereinheit kann zumindest ein Steuerprogramm beinhalten. Insbesondere können Funktionen derselben von dem Steuerprogramm implementiert bzw. Teil desselben sein. Die Bildgebungsvorrichtung und insbesondere die Steuereinheit kann zur Implementierung der hierin genannten Funktionseinheiten und/oder zur Durchführung der hierin genannten Verfahrensschritte jeweils zumindest einen Prozessor und/oder einen zugeordneten Speicher mit Programmcode, der die beschriebenen Funktionen und Schritte umsetzt, und/oder einen zugeordneten Arbeitsspeicher und/oder zugeordnete Anschlüsse und/oder Datenschnittstellen und/oder eine elektronische Schaltung umfassen. Ein oder mehrere Prozessoren, Speicher, Arbeitsspeicher, Anschlüsse, Datenschnittstellen und/oder Schaltungen können auch einer oder mehreren Funktionseinheiten zugeordnet sein und/oder einen oder mehrere Verfahrensschritte implementieren.
Die Bildgebungsvorrichtung kann eine Ausgabeeinheit umfassen, die dazu eingerichtet ist, eine auf den hyperspektralen Abbildungen beruhende Ausgabe und/oder nach Maßgabe der Ausgabe erzeugte Benutzerausgabe an einen Benutzer auszugeben. Die Ausgabeeinheit kann dazu eingerichtet sein, eine visuelle Ausgabe und/oder eine Audioausgabe und/oder eine haptische Ausgabe und/oder eine beliebige andere von einem Benutzer wahrnehmbare Ausgabe auszugeben. Hierfür kann die Ausgabeeinheit geeignete Komponenten umfassen, wie beispielsweise eine oder mehrere Lampen, Leuchtmittel, Lautsprecher, Bildschirme, Rüttler oder dergleichen. Die Ausgabeeinheit kann einen Computer und/oder Prozessor und/oder Speicher und/oder Arbeitsspeicher und/oder Anschlüsse und/oder eine Datenschnittschnittstelle zum Empfangen, Verarbeiten und Ausgeben von
unverarbeiteten, vorverarbeiteten und/oder verarbeiteten Ausgabedaten umfassen. Die Ausgabeerzeugungseinheit kann über eine Schnittstelle mit der Ausgabeeinheit verbunden sein. Die erzeugte Ausgabe kann von der Ausgabeeinheit verarbeitet und/oder ausgegeben werden.
Die Bildgebungsvorrichtung kann eine Anzeigeeinheit umfassen, die dazu eingerichtet ist, ein Bild, insbesondere ein Bewegtbild, für einen Benutzer anzuzeigen. Die Anzeigeeinheit kann Teil der Ausgabeeinheit sein und/oder diese ausbilden. Das angezeigte Bild kann auf den Bilddaten beruhen. Die Anzeigeeinheit kann einen Bildschirm und/oder Steuerungselektronik umfassen. Die Anzeigeeinheit kann einen Computer und/oder Prozessor und/oder Speicher und/oder Arbeitsspeicher und/oder Anschlüsse und/oder eine Datenschnittschnittstelle zum Empfangen, Verarbeiten und Ausgeben von unverarbeiteten, vorverarbeiteten und/oder verarbeiteten Bilddaten und/oder Anzeigedaten umfassen. Die Ausgabeerzeugungseinheit kann über eine Schnittstelle mit der Anzeigeeinheit verbunden sein. Die erzeugte Ausgabe kann von der Anzeigeeinheit verarbeitet und/oder ausgegeben werden.
Die medizinische Bildgebungsvorrichtung kann ein einen Schaft mit wenigstens einem proximalen Abschnitt, einem distalen Abschnitt und/oder einem Zwischenabschnitt umfassen. Alternativ oder zusätzlich kann die Bildgebungsvorrichtung dazu eingerichtet sein, mit einem solchen Schaft gekoppelt zu werden. Die Spektralkamera kann optisch an das proximale Ende des Schafts angebunden und/oder anbindbar sein. Der distale Abschnitt ist insbesondere dazu ausgebildet, in einem Betriebszustand, etwa während der diagnostischen und/oder therapeutischen Aktion, in eine zu untersuchende Kavität eingeführt zu werden und/oder darin befindlich zu sein. Der proximale Abschnitt ist insbesondere dazu ausgebildet, in einem Betriebszustand, etwa während der diagnostischen und/oder therapeutischen Aktion, außerhalb der zu untersuchenden Kavität angeordnet zu sein. Unter „distal“ soll insbesondere bei einer Benutzung einem Patienten zugewandt und/oder einem Benutzer abgewandt verstanden werden. Unter „proximal“ soll insbesondere bei einer Benutzung einem Patienten abgewandt und/oder einem Benutzer zugewandt verstanden werden. Insbesondere ist proximal das Gegenteil von distal. Der Schaft kann ein längliches Objekt sein. Ferner kann der Schaft zumindest teilweise und vorzugsweise zumindest zu einem Großteil den distalen Abschnitt ausbilden.
Die Optik kann zumindest ein dispersives Element umfassen, insbesondere zumindest ein optisches Gitter. Ferner kann die Optik einen Beobachtungsspalt umfassen. Abbildungslicht kann durch den Beobachtungsspalt auf das optische Gitter gelangen, sodass ein durch den Beobachtungsspalt definierter Abbildungslichtstreifen spektral aufgespaltet werden kann. Die Raumachse, entlang derer das einfallende Licht aufgespalten wird, erstreckt sich insbesondere zumindest im Wesentlichen senkrecht zu dem Beobachtungsspalt. Die Spektralkamera kann eine Eingangsoptik, insbesondere ein Eingangsobjektiv, umfassen. Die Spektralkamera kann eine Scaneinrichtung umfassen, die dazu eingerichtet ist, zumindest den Beobachtungsspalt und insbesondere die Optik und/oder die Bilderfassungssensorik zu bewegen, etwa relativ zu der Eingangsoptik. Dieses Bewegen des Beobachtungsspalts kann dem streifenweisen und/oder zeilenweisen und/oder spaltenweisen Scannen eines abzubildenden Objekts dienen.
Die Bilderfassungssensorik kann zumindest einen Bildsensor aufweisen. Der zumindest eine Bildsensor kann den lichtempfindlichen Bereich definieren. Der lichtempfindliche Bereich kann sich generell von einer ersten, insbesondere kleineren, Wellenlänge bis zu einer zweiten, insbesondere größeren, Wellenlänge erstrecken. Der Bildsensor und insbesondere der genannte erste Bildsensor kann ein Siliziumsensor sein, beispielsweise ein CCD-Sensor oder ein CMOS-Sensor. Der Bildsensor und/oder der erste Bildsensor und/oder der zweite Bildsensor kann ein zweidimensionales Pixelmuster aufweisen. Allgemein ausgedrückt kann die Bilderfassungssensorik Bildpunkte definieren, die in dem lichtempfindlichen Bereich angeordnet sind und diesen insbesondere gemäß einem Pixelmuster abdecken. Der lichtempfindliche Bereich kann ein Bilderfassungssensorbereich sein, der von einem oder mehreren Bildsensoren definiert ist. Der lichtempfindliche Bereich ist in einigen Ausführungsformen rechteckig, wobei eine erste Seite des lichtempfindlichen Bereichs parallel zu der Raumachse orientiert sein kann, entlang derer die spektrale Aufspaltung erfolgt, und wobei eine zweite Seite senkrecht zu der ersten Seite orientiert sein kann. Abbildstreifen, die sich parallel zu der zweiten Seite erstrecken, können somit monochromatischen bzw. schmalbandig aufgenommenen räumlichen Bildstreifen entsprechen. Insbesondere sind diese durch den Beobachtungsspalt definiert. Abbildstreifen, die sich parallel zu der ersten Seite erstrecken, können Spektren eines bestimmten Abbildpunkts entsprechen. Die erste Seite kann länger sein als die zweite Seite. Der Begriff „Bildsensor“ kann sich auf ein vollständiges elektronisches Bauelement beziehen. Ein Bildsensor im Sinne dieser Offenbarung kann entsprechend neben einem Halbleiterchip zugehörige Kontakte, Leiterbahnen, Rahmen und/oder Strukturelemente umfassen.
Der erste Detektionsbereich und der zweite Detektionsbereich können voneinander disjunkt sein. Die erste Detektionsfläche kann den ersten Detektionsbereich definieren. Die zweite Detektionsfläche kann den zweiten Detektionsbereich definieren.
Der erste Spektralbereich und der zweite Spektralbereich können gemeinsam den Gesamtspektralbereich bilden. Der Gesamtspektralbereich kann dahingehend zumindest im Wesentlichen durchgängig sein, dass eine maximale spektrale Breite eines zwischen der ersten Wellenlänge und der zweiten Wellenlänge liegenden nicht abgedeckter Spektralbereich höchstens 100 nm, bevorzugt höchstens 50 nm, besonders bevorzugt höchstens 20 nm und vorzugsweise höchstens 10 nm breit ist. Der erste Spektralbereich und der zweite Spektralbereich können einander überlappen. In anderen Ausführungsformen können der erste Spektralbereich und der zweite Spektralbereich unmittelbar aneinandergrenzen oder voneinander beabstandet sein. Eine spektrale Beabstandung kann dabei derart gewählt sein, dass der sich ergebende Gesamtspektralbereich trotz der spektralen Beabstandung zumindest im Wesentlichen durchgängig ist.
Der lichtempfindliche Bereich kann zumindest abschnittsweise und insbesondere insgesamt eben und/oder planar sein. Der lichtempfindliche Bereich kann zumindest abschnittsweise und insbesondere insgesamt parallel zur Raumachse orientiert sein. In einigen Ausführungsformen kann der lichtempfindliche Bereich auch zumindest abschnittsweise und insbesondere insgesamt relativ zu der Raumachse geneigt sein. Die Angabe, wonach sich der lichtempfindliche Bereich entlang der Raumachse erstreckt, ist insbesondere derart zu verstehen, dass sich eine Projektion des lichtempfindlichen Bereichs auf die Raumachse über eine Länge erstreckt, die wenigstens 50 %, wenigstens 60 %, wenigstens 70 % oder sogar wenigstens 80 % einer Länge des lichtempfindlichen Bereichs entspricht.
Der erste Bildsensor und der zweite Bildsensor können in einer Ebene angeordnet sein. Insbesondere definiert der erste Bildsensor eine erste Detektionsfläche und der zweite Bildsensor eine zweite Detektionsfläche. Die erste Detektionsfläche und die zweite Detektionsfläche können parallel zueinander angeordnet sein. Ferner können die erste Detektionsfläche und die zweite Detektionsfläche in einer gemeinsamen Ebene angeordnet sein. Es kann eine zu der ersten Detektionsfläche und der zweiten Detektionsfläche parallele Ebene existieren, die von der ersten Detektionsfläche und der zweiten Detektionsfläche höchstens 5 mm, bevorzugt höchstens 2 mm,
besonders bevorzugt höchstens 1 mm und vorzugsweise höchstens 0,5 mm beabstandet ist.
In einigen Ausführungsformen können der erste Bildsensor und der zweite Bildsensor derart nebeneinander angeordnet sein, dass zwei benachbarte Kanten der Bildsensoren parallel nebeneinander verlaufen, die Bildsensoren aber zueinander geneigt sind. Hierdurch kann für jeden Bildsensor eine individuell optimale Orientierung relativ zu der Optik und insbesondere zu dem dispersiven Element der Optik erzielbar sein. Es kann dann für die Bildsensoren eine unterschiedliche Dispersion pro Einheitsabstand vorliegen. Der lichtempfindliche Bereich kann entsprechend gekrümmt und/oder geknickt ausgebildet sein. In diesem Fall kann sich der lichtempfindliche Bereich als Ganzes entlang der Raumachse erstrecken. Dabei kann eine der Detektionsflächen parallel zur Raumachse orientiert sein. Alternativ können sowohl die erste Detektionsfläche als auch die zweite Detektionsfläche relativ zur Raumachse geneigt sein. Der erste Bildsensor und der zweite Bildsensor können unmittelbar nebeneinander angeordnet sein. Insbesondere können sich die Bildsensoren berühren. In einigen Ausführungsformen können die Bildsensoren voneinander beabstandet sein. Ein Abstand zwischen den Bildsensoren beträgt insbesondere höchstens 5 mm, bevorzugt höchstens 2 mm, besonders bevorzugt höchstens 1 mm und vorzugsweise höchstens 0,5 mm. Ein Abstand zwischen den Bildsensoren beträgt insbesondere höchstens 20 %, bevorzugt höchstens 10 %, besonders bevorzugt höchstens 5 % und vorzugsweise höchstens 2 % einer Erstreckung eines größten der Bildsensoren in eine Richtung parallel zu einer Beabstandungsrichtung.
Angaben, die sich auf spektrale Breiten und/oder auf minimal und/oder maximale Wellenlängen von Spektralbereichen beziehen, können im Rahmen dieser Offenbarung dahingehend zu verstehen sein, dass damit jeweils solche Wellenlängen oder Wellenlängenbereiche gemeint sind, in denen eine Intensität höchsten 10 %, höchstens 5 %, höchstens 2 % oder sogar höchstens 1 % von einer größten Intensität des betreffenden Bezugsspektralbereichs beträgt. Beispielsweise kann unter einer spektralen Breite eines Emissionsspektrums eines Leuchtelements ein Abstand zwischen einer ersten Wellenlänge und einer zweiten Wellenlänge gemeint sein, zwischen denen ein Emissionsmaximum liegt und bei denen eine Emissionsintensität höchsten 10 %, höchstens 5 %, höchstens 2 % oder sogar höchstens 1 % der Emissionsintensität am Emissionsmaximum beträgt. Gleichermaßen können im Rahmen dieser Offenbarung spektrale Breiten und/oder minimale und/oder maximale Wellenlängen von Spektralbereichen verstanden werden, die sich auf
Transmissionseigenschaften und/oder Reflexionseigenschaften und/oder sonstige wellenlängenabhängige optische Eigenschaften von Objekten beziehen.
Die räumlich aufgelöste Intensitätsinformation kann wenigstens zweidimensional punktweise aufgelöste Intensitätsinformation sein. In anderen Worten kann sich die räumlich aufgelöste Intensitätsinformation auf eine Matrix von Bildpunkten beziehen. Die erwähnten Farbkanäle können jeweils punktweise aufgelöste zweidimensionale Intensitätsinformation enthalten. Die Farbkanäle können einen ersten Farbkanal und einen zweiten Farbkanal umfassen. Ferner können die Farbkanäle einen dritten Farbkanal umfassen. Der erste Farbkanal kann bezüglich des sichtbaren Lichts ein roter Farbkanal sein. Der zweite Farbkanal kann bezüglich des sichtbaren Lichts ein grüner Farbkanal sein. Der dritte Farbkanal kann bezüglich des sichtbaren Lichts ein blauer Farbkanal sein. Der Bildsensor kann ein farbempfindlicher Bildsensor sein, insbesondere ein dreifarbiger Bildsensor, beispielsweise ein RGB-Bildsensor. Die Farbkanäle können jeweils in einem Teilbereich des sichtbaren Spektralbereichs und zusätzlich wenigstens in einem Teilbereich des Nah infra rotbereichs sensitiv sein.
Insbesondere in Ausführungsformen mit zwei Bildsensoren kann eine Verarbeitungseinheit vorgesehen sein, die dazu eingerichtet ist, anhand von Sensorsignalen des ersten Bildsensors und Sensorsignalen des zweiten Bildsensors kombinierte Spektralinformation zu ermitteln, die ein Spektrum über den Gesamtspektralbereich beschreibt. Die Verarbeitungseinheit ist in diesem Fall nicht zwingend dazu eingerichtet, ein korrigiertes Spektrum zu ermitteln, wie dies oben erwähnt ist.
Die Verarbeitungseinheit kann einen Prozessor und/oder einen Arbeitsspeicher und/oder ein maschinenlesbares Medium umfassen. Das maschinenlesbare Medium kann Programmcode enthalten, der die Funktion der Verarbeitungseinheit implementiert.
Das korrigierte Spektrum kann sich von einer Intensitätsverteilung des bezüglich der Raumachse aufgespalteten Lichts bezogen auf die Raumachse dadurch unterscheiden, dass eine Intensität von Beugungslicht wenigstens 2. Ordnung verringert ist, insbesondere um wenigstens 50 %, bevorzugt um wenigstens 80 %, besonders bevorzugt um wenigstens 90 % und vorzugsweise um wenigstens 95 %. Aufgrund der Beugung durch das dispersive Element gelangt Beugungslicht einer ersten Wellenlänge wenigstens 2. Ordnung an einen Ort auf dem lichtempfindlichen Bereich, an den Beugungslicht einer zweiten Wellenlänge 1. Ordnung fällt, die größer
ist als die erste Wellenlänge. Beispielsweise fällt an einer bestimmten Position des lichtempfindlichen Bereichs Licht mit einer Wellenlänge von X nm 1. Ordnung mit Licht mit einer Wellenlänge von X/2 2. Ordnung zusammen, wobei X eine positive reelle Zahl ist. Eine Lichtintensität ist an dieser Position größer als die Intensität des Licht 1. Ordnung, da auch das Licht 2. Ordnung an dieser Position zur Lichtintensität beiträgt. Für eine Zuordnung Position-Wellenlänge würde dies zu einem fehlerhaften Spektrum führen, weil die Intensität für die Wellenlänge X überschätzt würde. Die Verarbeitungseinheit ist dazu eingerichtet, diese Überschätzung zu verringern oder zu beseitigen, indem sie das korrigierte Spektrum ermittelt.
Bei dem Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung können der erste Bildsensor und der zweite Bildsensor derart angeordnet werden, dass sie wie beschrieben positioniert sind. Die Bildsensoren können auf einer gemeinsamen Grundplatte und/oder Platine angeordnet werden. Insbesondere können die Bildsensoren miteinander und/oder mit der Grundplatte und/oder Platine verklebt werden.
In einigen Ausführungsformen kann der lichtempfindliche Bereich und/oder die Bilderfassungssensorik relativ zu der Optik und insbesondere relativ zu dem dispersiven Element bewegbar sein. Hierdurch kann veränderbar sein, welche Wellenlängenbereiche auf welche Positionen des lichtempfindlichen Bereichs und/oder der Bilderfassungssensorik fallen. Beispielsweise kann im Fall einer räumlichen Beabstandung des ersten Bildsensors von dem zweiten Bildsensor und einer damit einhergehenden spektralen Lücke im Gesamtspektralbereich die spektrale Lücke verändert werden. Hierdurch kann durch die Aufnahme mehrerer hyperspektraler Abbildungen für unterschiedliche Positionierungen die spektrale Lücke geschlossen werden, indem jeder Wellenlängenbereich zwischen der ersten Wellenlänge und der zweiten Wellenlänge in zumindest einer der hyperspektralen Abbildungen auf den lichtempfindlichen Bereich und/oder auf eine Detektionsfläche zumindest eines der Bildsensoren fällt. Im Fall eines durchgängigen lichtempfindlichen Bereichs und/oder im Fall eines einzelnen Bildsensors kann zudem durch die Positionsveränderung ein abzubildender Spektralbereich verändert werden.
Im Rahmen dieser Offenbarung kann sich sichtbares Licht und/oder ein sichtbarer Spektralbereich auf Licht mit einer Wellenlänge von wenigstens 500 nm, wenigstens 450 nm oder wenigstens 400 nm und höchsten 780 nm, höchstens 750 nm oder höchstens 700 nm beziehen. Im Rahmen dieser Offenbarung kann sich
Nahinfrarotlicht und/oder ein Nahinfrarotspektralbereich und/oder die Angabe „nahinfrarot“ auf Licht mit einer Wellenlänge von wenigstens 750 nm, wenigstens 780 nm oder wenigstens 800 nm und höchstens 3000 nm, höchstens 2000 nm oder höchstens 1500 nm beziehen.
In einigen Ausführungsformen liegt die zweite Wellenlänge im zweiten Spektralbereich, wobei die zweite Wellenlänge mehr als doppelt so groß, bevorzugt wenigstens 2,1 -mal so groß, besonders bevorzugt wenigstens 2,5-mal so groß und vorzugsweise wenigstens 3-mal so groß ist wie die erste Wellenlänge. Hierdurch kann ein großer Spektralbereich zur Bildgebung herangezogen werden. Zudem kann die Limitation überwunden werden, dass aufgrund störender höherer Beugungsordnungen lediglich ein Spektralbereich zwischen einer unteren Grenzwellenlänge und einem doppelten der unteren Grenzwellenlänge verwendbar ist.
Die erste Wellenlänge kann höchstens 450 nm und vorzugsweise höchstens 400 nm betragen. Alternativ oder zusätzlich kann die zweite Wellenlänge mindestens 1000 nm und vorzugsweise mindestens 1200 nm betragen. Insbesondere für Ausführungsformen mit einem ersten Bildsensor und einem zweiten Bildsensor kann die zweite Wellenlänge mindestens 1400 nm, bevorzugt mindestens 1500 nm, besonders bevorzugt mindestens 1600 nm und vorzugsweise mindestens 1700 nm betragen.
Kostengünstige und zuverlässige Sensortechnologie zur Detektion von Wellenlängen im sichtbaren Bereich und knapp über den sichtbaren Bereich hinaus in den Nahinfrarotbereich hinein kann insbesondere dann verwendet werden, wenn der erste Spektralbereich zumindest einen Wellenlängenbereich von 500 nm, vorzugsweise von 450 nm, bis 800 nm, vorzugsweise bis 900 nm, umfasst. Insbesondere kann als erster Bildsensor ein Siliziumbildsensor verwendet werden.
Weithin verfügbare Sensortechnologie für die Detektion von sichtbarem Licht kann insbesondere dann zweckmäßig ergänzt und ein großer und für medizinische Anwendungen interessanter Spektralbereich kann insbesondere dann zugänglich gemacht werden, wenn der zweite Spektralbereich zumindest einen Wellenlängenbereich von 1000 nm, vorzugsweise von 900 nm, bis 1500 nm, vorzugsweise bis 1700 nm, umfasst. Der erste und der zweite Spektralbereich können einander überlappen. Je nach Ausgestaltung und Anordnung des dispersiven Elements kann vorgesehen sein, dass der jeweilige Spektral bereich des ersten
Bildsensors und/oder des zweiten Bildsensors für die Aufnahme hyperspektraler Abbildungen nicht vollumfänglich ausgeschöpft wird.
Der erste Bildsensor kann ein monochromatischer Bildsensor sein, insbesondere ein monochromatischer Silizium-Bildsensor. Alternativ oder zusätzlich kann der zweite Bildsensor ein SWIR-Sensor (Short-Wave-Infrared-Sensor) sein, insbesondere ein InGaAs-Sensor. Hierdurch können gut verfügbare Sensorelemente kostengünstig und einfach kombiniert werden, um einen verfügbaren Spektral bereich für hyperspektrale medizinische Bildgebung zu erweitern.
Ein hoher Grad an Informationsdichte über einen großen Spektral bereich kann insbesondere dann in baulich einfacher und kostengünstiger Weise erzielt werden, wenn der erste Bildsensor und der zweite Bildsensor unmittelbar nebeneinander angeordnet sind und den lichtempfindlichen Bereich als im Wesentlichen durchgängigen Bereich definieren. Der lichtempfindliche Bereich kann ausschließlich von dem ersten Bildsensor und dem zweiten Bildsensor und insbesondere von deren Detektionsflächen definiert sein.
Gemäß einigen Ausführungsformen ist die Optik dazu eingerichtet, einfallendes Licht spektral derart aufzuspalten, dass für Licht mit einer Wellenlänge im ersten Spektralbereich Beugungslicht n-ter Ordnung zu dem ersten Detektionsbereich gelangt und von dem ersten Bildsensor aufgrund dessen Lichtempfindlichkeit im ersten Spektralbereich detektierbar ist und Beugungslicht (n+1)-ter Ordnung zu dem zweiten Detektionsbereich gelangt aber vom zweiten Bildsensor aufgrund dessen fehlender Lichtempfindlichkeit im ersten Spektralbereich nicht detektierbar ist, wobei n eine positive ganze Zahl und insbesondere 1 ist. Die genannte fehlende Lichtempfindlichkeit kann durch ein vor dem zweiten Bildsensor angeordnetes Filterelement erzielt und/oder dem Material des zweiten Bildsensors inhärent sein. Insofern kann der zweite Bildsensor als solches dazu geeignet sein, das Beugungslicht (n+1 )-ter Ordnung zu detektieren, in die Bilderfassungssensorik aber in solcher Weise integriert und/oder derart angepasst und/oder angeordnet sein, dass das Beugungslicht (n+1 )-ter Ordnung vom zweiten Bildsensor nicht detektiert wird. Die Angaben können sich auf mehrere Werte von n beziehen. Beispielsweise kann der erläuterte Umstand sowohl für Beugungslicht 1. Ordnung auf dem ersten Bildsensor und Beugungslicht 2. Ordnung auf dem zweiten Bildsensor als auch für Beugungslicht 2. Ordnung auf dem ersten Bildsensor und Beugungslicht 3. Ordnung auf dem zweiten Bildsensor gelten. Ferner kann auch Licht höherer Ordnungen, beispielsweise (n+2)-ter Ordnung, (n+3)-ter Ordnung etc. vom zweiten Bildsensor
nicht detektierbar sein. Allgemein ausgedrückt können der erste Bildsensor und der zweite Bildsensor derart ausgebildet, angeordnet und/oder mit Filtern versehen sein, dass die Bilderfassungssensorik zwischen unterschiedlichen Beugungsordnungen unterscheiden bzw. auf eine Beugungsordnung ausgerichtet sein kann.
Ein hoher Grad an Zuverlässigkeit bei der Ausblendung höherer Beugungsordnungen kann insbesondere dann erzielt werden, wenn die Bildgebungsvorrichtung und insbesondere die Bilderfassungssensorik ferner zumindest einen optischen Kantenfilter umfasst, der für Licht mit einer Wellenlänge oberhalb einer Grenzwellenlänge durchlässig und für Licht mit einer Wellenlänge unterhalb der Grenzwellenlänge undurchlässig ist, wobei die Grenzwellenlänge kleiner ist als ein Doppeltes der ersten Wellenlänge, und wobei der optische Kantenfilter zumindest teilweise vor dem zweiten Bildsensor angeordnet ist. Allgemein kann die Grenzwellenlänge im Fall höherer Beugungsordnungen auch derart gewählt sein, dass sie um einen Faktor (n+1 )/n größer ist als die erste Wellenlänge, wobei n eine positive ganze Zahl ist. Ferner können mehrere unterschiedliche Kantenfilter vorgesehen sein, die den lichtempfindlichen Bereich graduell für unterschiedliche Spektralbereiche lichtempfindlich machen bzw. die graduell unterschiedliches Beugungslicht höherer Ordnungen ausblenden. Der genannte Kantenfilter kann zumindest abschnittsweise oder vollständig vor dem zweiten Bildsensor angeordnet sein. Hierdurch kann verhindert werden, dass kurzwelliges Licht höherer Beugungsordnung auf den zweiten Bildsensor gelangt.
Alternativ oder zusätzlich zu einem Kantenfilter vor dem zweiten Bildsensor kann die Bildgebungsvorrichtung und insbesondere die Bilderfassungssensorik zumindest einen optischen Kantenfilter umfassen, der für Licht mit einer Wellenlänge unterhalb einer Grenzwellenlänge durchlässig und für Licht mit einer Wellenlänge oberhalb der Grenzwellenlänge undurchlässig ist, wobei die Grenzwellenlänge kleiner ist als ein Doppeltes der ersten Wellenlänge, und wobei der optische Kantenfilter zumindest teilweise vor dem ersten Bildsensor angeordnet ist. Allgemein kann die Grenzwellenlänge im Fall höherer Beugungsordnungen auch derart gewählt sein, dass sie um einen Faktor (n+1 )/n kleiner ist als die erste Wellenlänge, wobei n eine positive ganze Zahl ist. Ferner können mehrere unterschiedliche Kantenfilter vorgesehen sein, die den lichtempfindlichen Bereich graduell für unterschiedliche Spektralbereiche lichtempfindlich machen bzw. die graduell unterschiedliches Beugungslicht höherer Ordnungen ausblenden. Der genannte Kantenfilter kann zumindest abschnittsweise oder vollständig vor dem zweiten Bildsensor angeordnet
sein. Hierdurch kann verhindert werden, dass kurzwelliges Licht höherer Beugungsordnung auf den zweiten Bildsensor gelangt.
Die genannten Kantenfilter, also der zumindest teilweise vor dem ersten Bildsensor angeordnete Kantenfilter und/oder der zumindest teilweise vor dem zweiten Bildsensor angeordnete Kantenfilter, können jeweils zumindest teilweise vor beiden Bildsensoren angeordnet sein. Die Position kann derart gewählt sein, dass eine physische Kante des Kantenfilter mit einer räumlichen Position des lichtempfindlichen Bereichs zusammenfällt, an der eine Wellenlänge höherer Ordnung, insbesondere 2. Ordnung, und eine abzubildende Wellenlänge niedrigerer Ordnung, insbesondere 1. Ordnung, gelangen. Durch den Kantenfilter kann dann bewerkstelligt werden, dass das Beugungslicht höherer Ordnung nicht detektiert wird. Beispielsweise kann der erste Bildsensor bis zu einer Wellenlänge von wenigstens 950 nm, wenigstens 1000 nm oder wenigstens 1100 nm sensitiv sein. Beträgt die erste Wellenlänge dann beispielsweise höchstens 450 nm, soll bereits ab 900 nm abgeschnitten werden. Der Kantenfilter kann dann teilweise vor dem ersten Bildsensor angeordnet sein. Ebenso ist denkbar, dass der zweite Bildsensor in einem Spektralbereich sensitiv ist, der zu kleineren Wellenlängen als beispielsweise einem Doppelten der ersten Wellenlänge reicht. Ggf. fällt dann lediglich auf einen Teilbereich des zweiten Bildsensors Licht höherer Beugungsordnung. Der Kantenfilter kann dann derart angeordnet sein, dass er lediglich diesen Teilbereich abdeckt.
Die Ausblendung höherer Beugungsordnungen kann insbesondere dann effizient zu einem breiten nutzbaren Spektral bereich führen, wenn die Optik dazu eingerichtet ist, einfallendes Licht spektral derart aufzuspalten, dass für Licht mit einer Wellenlänge im ersten Spektralbereich Beugungslicht n-ter Ordnung zu dem ersten Detektionsbereich gelangt und von dem ersten Bildsensor aufgrund dessen Lichtempfindlichkeit im ersten Spektral bereich detektierbar ist und Beugungslicht (n+1 )-ter Ordnung zu dem optischen Kantenfilter gelangt und von diesem blockiert wird, wobei n eine positive ganze Zahl und insbesondere 1 ist. Alternativ oder zusätzlich zu einer selektiven Lichtintensität der unterschiedlichen Bildsensoren kann somit der Kantenfilter dazu verwendet werden, höhere Beugungsordnungen auszublenden.
Die die Spektralinformation kann sich auf sichtbares Licht und auf Nahinfrarotlicht beziehen. Die Verwendung kostengünstig und/oder gut verfügbarer Bildsensoren als Teil einer Bilderfassungssensorik kann insbesondere dann ermöglicht werden, wenn die Verarbeitungseinheit dazu eingerichtet ist, die Spektralinformation, die sich auf
das Nahinfrarotlicht bezieht, wellenlängenabhängig anhand unterschiedlicher Farbkanäle zu ermitteln. Beispielsweise kann die Verarbeitungseinheit dazu eingerichtet sein, für unterschiedliche Teilbereiche im Nahinfrarotbereich auf unterschiedliche Farbkanäle und/oder auf unterschiedliche Kombinationen von Farbkanälen zuzugreifen. Die Verarbeitungseinheit kann eine Lookup-Tabelle beinhalten, in der für unterschiedliche Wellenlängen vermerkt ist, welcher und/oder welche Farbkanal und/oder Farbkanäle zu berücksichtigen sind. Zusätzlich kann die Verarbeitungseinheit dazu eingerichtet sein, Spektralinformation, die sich auf das sichtbare Licht bezieht, wellenlängenabhängig anhand unterschiedlicher Farbkanäle zu ermitteln.
Die Bilderfassungssensorik kann dazu eingerichtet sein, räumlich aufgelöste Intensitätsinformation für zumindest drei unterschiedliche Farbkanäle zu liefern. Ferner kann die Verarbeitungseinheit dazu eingerichtet sein, Spektralinformation für zumindest einen ersten Spektralbereich aus einem einzelnen Farbkanal zu ermitteln und Spektralinformation für einen zweiten Spektralbereich aus einer Kombination von genau zwei Farbkanälen zu ermitteln. Hierdurch kann in einfacher Weise ein RGB- Bildsensor oder ein anderer mehrfarbiger Bildsensor verwendet werden. Es können mehrere Spektralbereiche vorgesehen sein, in denen die Verarbeitungseinheit Spektralinformation aus jeweils einem einzelnen Farbkanal ermittelt. Zum Beispiel kann dies im sichtbaren Bereich für einen roten Spektralbereich und/oder einen grünen Spektralbereich und/oder einen blauen Spektralbereich der Fall sein. Ferner können mehrere Spektralbereiche vorgesehen sein, in denen die Verarbeitungseinheit eine Kombination von genau zwei Farbkanälen verwendet. Es kann etwa zwei oder drei oder vier oder noch mehr derartige Spektralbereiche geben. Beispielsweise Zudem kann hierdurch eine Anzahl unterscheidbarer Spektralbereiche eine Anzahl von Farbkanälen übersteigen. Ein Gesamtspektralbereich, der mittels der Bilderfassungssensorik erfassbar ist, kann in eine erste Anzahl von Teilspektralbereichen unterteilt sein, denen jeweils eine bestimmte Vorschrift zugeordnet ist, welcher Farbkanal und/oder welche Farbkanäle zur Ermittlung von Spektralinformation in diesem Teilspektralbereich von der Verarbeitungseinheit heranzuziehen sind. Entsprechend kann eine erste Anzahl von Ermittlungsvorschriften vorhanden sein. Ferner kann eine zweite Anzahl von Farbkanälen vorhanden sein. In einigen Ausführungsformen kann die erste Anzahl größer sein als die zweite Anzahl.
Verfügbare Spektralinformation kann insbesondere dann effizient und unter
Verwendung einfacher elektronischer Bauteile wirksam genutzt werden, wenn die
Verarbeitungseinheit dazu eingerichtet ist, Spektralinformation für zumindest einen dritten Spektralbereich aus einer Kombination von genau drei Farbkanälen zu ermitteln. Beispielsweise kann die Verarbeitungseinheit hierfür einen R-Kanal, einen G-Kanal und einen B-Kanal kombinieren.
In einigen Ausführungsformen umfasst die Bilderfassungssensorik ein Filtermuster, das die Farbkanäle definiert. Das Filtermuster kann insbesondere ein Pixelmuster sein. Der Bildsensor kann das Filtermuster umfassen. Das Filtermuster kann beispielsweise eine Bayer-Matrix umfassen. Der Bildsensor kann ein Bayer-Sensor sein. Andere Filtermuster sind erfindungsgemäß ebenso denkbar, beispielsweise eine XTrans-Matrix. Zudem können mehr als drei Farbkanäle vorhanden sein, beispielsweise RGEB-Farbkanäle, wobei e für „emerald“ (smaragdgrün) steht. Auch kann neben Farbkanälen ein breitbandiger Weißlichtkanal vorhanden sein. Das Filtermuster kann beispielsweise neben farbigen Pixeln auch weiße Pixel und/oder filterlose Pixel definieren.
Im Allgemeinen kann erfindungsgemäß die Bilderfassungssensorik dazu eingerichtet sein, räumlich aufgelöste Intensitätsinformation für zumindest drei unterschiedliche Farbkanäle zu liefern, wobei die Farbkanäle einen roten Farbkanal, einen grünen Farbkanal und einen blauen Farbkanal umfassen. Die Farbangaben können sich dabei auf den sichtbaren Spektralbereich beziehen, d. h. die Farbkanäle können zusätzlich im Nahinfrarotbereich sensitiv sein, insbesondere in unterschiedlichen Teilbereichen des Nahinfrarotbereichs.
Es versteht sich, dass die beschriebene gezielte Auswertung unterschiedlicher Farbkanäle auch in der beschriebenen Bildgebungsvorrichtung mit zwei Bildsensoren verwendet werden kann. Beispielsweise kann hierbei der erste Bildsensor in der beschriebenen Weise mehrere Farbkanäle umfassen und mit einem zweiten Bildsensor kombiniert sein, der in einem anderen Spektralbereich lichtempfindlich ist. Alternativ oder zusätzlich kann in der beschriebenen Weise der zweite Bildsensor mehrere Farbkanäle liefern.
Zudem versteht sich, dass erfindungsgemäß auch drei oder vier oder noch mehr unterschiedliche Bildsensoren vorgesehen sein können, die nebeneinander angeordnet sind bzw. deren Detektionsflächen und/oder Detektionsbereiche gemeinsam den lichtempfindlichen Bereich definieren.
Die Erfindung kann generell ein Verfahren zur Bildgebung mittels einer erfindungsgemäßen Bildgebungsvorrichtung umfassen. Zudem kann ein Verfahren zum Betrieb einer erfindungsgemäßen Bildgebungsvorrichtung vorgesehen sein.
Die erfindungsgemäßen Vorrichtungen und Systeme sowie die erfindungsgemäßen Verfahren sollen hierbei nicht auf die oben beschriebene Anwendung und Ausführungsform beschränkt sein. Insbesondere können diese zu einer Erfüllung einer hierin beschriebenen Funktionsweise eine von einer hierin genannten Anzahl von einzelnen Elementen, Bauteilen und Einheiten sowie Verfahrensschritten abweichende Anzahl aufweisen. Zudem sollen bei den in dieser Offenbarung angegebenen Wertebereichen auch innerhalb der genannten Grenzen liegende Werte als offenbart und als beliebig einsetzbar gelten.
Es wird insbesondere darauf hingewiesen, dass alle in Bezug auf eine Vorrichtung beschriebenen Merkmale und Eigenschaften, aber auch Verfahrensweisen, sinngemäß auf Verfahren übertragbar und im Sinne der Erfindung einsetzbar und als mitoffenbart gelten. Gleiches gilt auch in umgekehrter Richtung. Das bedeutet, dass auch in Bezug auf Verfahren genannte, bauliche also vorrichtungsgemäße Merkmale im Rahmen der Vorrichtungsansprüche berücksichtigt, beansprucht und ebenfalls zur Offenbarung gezählt werden können.
Im Folgenden wird die vorliegende Erfindung anhand der beigefügten Figuren beispielhaft beschrieben. Die Zeichnung, die Beschreibung und die Ansprüche enthalten zahlreiche Merkmale in Kombination. Der Fachmann wird die Merkmale zweckmäßigerweise auch einzeln betrachten und im Rahmen der Ansprüche sinnvoll in Kombination verwenden.
Falls von einem bestimmten Objekt mehr als ein Exemplar vorhanden ist, ist ggf. nur eines davon in den Figuren und in der Beschreibung mit einem Bezugszeichen versehen. Die Beschreibung dieses Exemplars kann entsprechend auf die anderen Exemplare von dem Objekt übertragen werden. Sind Objekte insbesondere mittels Zahlenwörtern, wie beispielsweise erstes, zweites, drittes Objekt etc. benannt, dienen diese der Benennung und/oder Zuordnung von Objekten. Demnach können beispielsweise ein erstes Objekt und ein drittes Objekt, jedoch kein zweites Objekt umfasst sein. Allerdings könnten anhand von Zahlenwörtern zusätzlich auch eine Anzahl und/oder eine Reihenfolge von Objekten ableitbar sein.
Es zeigen:
Fig. 1 eine schematische Darstellung eines Systems mit einer medizinischen Bildgebungsvorrichtung;
Fig. 2 eine schematische Darstellung einer Spektralkamera der Bildgebungsvorrichtung;
Fig. 3 eine schematische Darstellung einer Bilderfassungssensorik der Bildgebungsvorrichtung;
Fig. 4 eine schematische Darstellung unterschiedlicher Spektralbereiche;
Fig. 5 eine schematische Darstellung einer Bilderfassungssensorik einer alternativen Bildgebungsvorrichtung;
Fig. 6 Transmissionsspektren unterschiedlicher Farbfilter der Bilderfassungssensorik;
Fig. 7 eine schematische Darstellung einer Sensitivität unterschiedlicher Farbkanäle der Bilderfassungssensorik;
Fig. 8 eine schematische Darstellung einer Auswahl von Spektralbereichen aus den Farbkanälen der Bilderfassungssensorik;
Fig. 9 schematische Spektren zur Veranschaulichung eines korrigierten Spektrums;
Fig. 10 ein schematisches Ablaufdiagramm eines Verfahrens zur Herstellung einer Bildgebungsvorrichtung; und
Fig. 11 ein schematisches Ablaufdiagramm eines Verfahrens zur Bildgebung.
Fig. 1 zeigt eine schematische Darstellung eines Systems 78 mit einer medizinischen Bildgebungsvorrichtung 10. Die Bildgebungsvorrichtung 10 umfasst eine Spektralkamera 12, die vorliegend eine hyperspektral abbildende Hyperspektralkamera ist. Die Bildgebungsvorrichtung 10 umfasst ferner eine Verarbeitungseinheit 44, die dazu eingerichtet ist, von der Spektralkamera 12 erfasste Bilddaten zu verarbeiten.
Die Bildgebungsvorrichtung 10 kann Teil einer Endoskopvorrichtung 74 sein. Die Endoskopvorrichtung 74 kann Teile eines Endoskops 76 sein.
Das System 78 umfasst das Endoskop 76. Das System 78 kann wie dargestellt eine Versorgungseinheit 80 umfassen, an die das Endoskop 76 wahlweise ankoppelbar ist. Die Versorgungseinheit 80 kann dazu eingerichtet sein, das Endoskop 76 zu steuern und/oder Bilddaten und/oder andere Daten von dem Endoskop 76 zu empfangen. Die Versorgungseinheit 80 kann mit einer Anzeige 82 des Systems 78 verbindbar und/oder verbunden sein, auf der ein Benutzer aufgenommene Bilder darstellen kann. Die Versorgungseinheit 80 kann zudem Beleuchtungslicht für das Endoskop 76 und/oder die Endoskopvorrichtung 74 liefern. Im dargestellten Fall ist eine Beleuchtungsvorrichtung 82 vorgesehen, die Beleuchtungslicht für die Bildgebung liefert. Das Endoskop 76 kann über ein Lichtleiterkabel 84 and die Beleuchtungsvorrichtung 82 ankoppelbar und/oder angekoppelt sein. Das Endoskop 76 kann ferner über ein elektrisches Kabel 86 an die Versorgungseinheit 80 ankoppelbar und/oder angekoppelt sein. Das elektrische Kabel 86 kann dazu eingerichtet sein, elektrische Energie und/oder Daten zu übertragen.
In anderen Ausführungsformen kann eine separate Beleuchtungsvorrichtung und/oder Beleuchtungslichtquelle vorgesehen sein. Zudem kann das Endoskop 76 alternativ oder zusätzlich integrierte Leuchtelement zur Bereitstellung von Beleuchtungslicht umfassen.
In anderen Ausführungsformen kann die Verarbeitungseinheit 44 Teil der Versorgungseinheit 82 sein, an die das Endoskop 76 anschließbar ist. Die Endoskopvorrichtung 74 kann dann beispielsweise die Bildgebungsvorrichtung 10 und das Endoskop 76 umfassen. Die Endoskopvorrichtung 74 kann in einigen Ausführungsformen die Versorgungseinheit 82 und/oder eine Beleuchtungsvorrichtung und/oder die Anzeige 84 umfassen.
Fig. 2 zeigt eine schematische Darstellung der Spektralkamera 12 der Bildgebungsvorrichtung 10. Die Spektralkamera 12 arbeitet vorliegend nach dem Pushbroom-Prinzip. Die Spektralkamera 12 ist als eine Spectral-Scanning- Hyperspektralkamera ausgebildet. Die Spektralkamera 12 umfasst eine Eingangsoptik 94. Ferner umfasst die Spektral kamera 12 einen Beobachtungsspalt 96. Zudem umfasst die Spektral kamera 12 eine Bilderfassungssensorik 18. Des Weiteren umfasst die Spektralkamera 12 eine Optik 14, die dazu eingerichtet ist,
einfallendes Licht durch Beugung bezüglich einer Raumachse 16 spektral aufzuspalten. Die Optik 14 kann optische Elemente 98, 100 wie beispielsweise Linsen umfassen. Zudem kann die Optik 14 ein dispersives Element 102 umfassen. Das dispersive Element 102 ist vorliegend als ein optisches Transmissionsgitter ausgebildet.
Die Spektralkamera 12 umfasst eine Kameraeinheit 104, die mittels einer Scaneinrichtung 106 bewegbar ist. Die Kameraeinheit 104 kann einen Träger 108 umfassen. Ferner umfasst die Kameraeinheit 104 zumindest den Beobachtungsspalt 96, das dispersive Element 102 und die Bilderfassungssensorik 18. Die Scaneinrichtung 106 ist dazu eingerichtet, zumindest den Beobachtungsspalt 96 und insbesondere die Optik 14 und/oder die Bilderfassungssensorik 18 zu bewegen. Diese Bewegung erfolgt vorliegend relativ zu der Eingangsoptik 94. Dieses Bewegen des dem streifenweisen und/oder zeilenweisen und/oder spaltenweisen Scannen eines abzubildenden Objekts dienen. Somit kann für jede Scanposition ein Bild mittels der Bilderfassungssensorik 18 erfasst werden, dessen eine Achse, insbesondere senkrecht zur Raumrichtung 16, einer räumlichen Achse entspricht, und dessen andere Achse, insbesondere parallel zur Raumrichtung 16, einer spektralen Achse entspricht. Jedes erfasste Bild ist somit ein spektral aufgelöster Bildstreifen. Mehrere Abbildungen eines Scans können in grundsätzlich bekannter Art und Weise zusammengesetzt werden, um eine hyperspektrale Abbildung zu erhalten. Die Spektralkamera 12 kann ferner ein Gehäuse 1 10 umfassen, das die Kameraeinheit 104 und die Scaneinrichtung 106 einhaust. An das Gehäuse kann ein Schaft des Endoskops 76 ankoppelbar sein.
Fig. 3 zeigt eine schematische Darstellung der Bilderfassungssensorik 18 der Bildgebungsvorrichtung 10. Die Bilderfassungssensorik 18 umfasst einen ersten Bildsensor 22, der einen ersten Detektionsbereich 26 definiert. Der erste Bildsensor 22 ist vorliegend ein monochromatischer Siliziumbildsensor. Des Weiteren umfasst die Bilderfassungssensorik 18 einen zweiten Bildsensor 28, der einen zweiten Detektionsbereich 32 definiert. Der zweite Bildsensor 28 ist vorliegend als ein SWIR- Sensor ausgebildet. Eine Auflösung des ersten Bildsensors 22 kann wenigstens 0,5 Megapixel, wenigstens 1 Megapixel, wenigstens 2 Megapixel, wenigstens 5 Megapixel oder wenigstens 10 Megapixel betragen, wobei auch größere oder kleinere Werte möglich sind. Eine Auflösung des zweiten Bildsensors 28 kann wenigstens 0,5 Megapixel, wenigstens 1 Megapixel, wenigstens 2 Megapixel, wenigstens 5 Megapixel oder wenigstens 10 Megapixel betragen, wobei auch größere oder kleinere Werte möglich sind.
Der erste Bildsensor 22 und der zweite Bildsensor 28 sind unmittelbar nebeneinander angeordnet. Beispielsweise sind die Bildsensoren 22, 28 auf einer gemeinsamen Platine angebracht und berühren sich entlang einer Kante. Die Detektionsbereiche 26, 32 können bauartbedingt voneinander beabstandet sein, weil entsprechende Detektionsflächen der Bildsensoren 22, 28 sich nicht bis zu deren äußersten Kanten erstrecken.
Die beiden Detektionsbereiche 26, 32 bilden gemeinsam einen lichtempfindlichen Bereich 20 der Bilderfassungssensorik 18 aus. Der lichtempfindliche Bereich 20 erstreckt sich entlang der Raumachse 16, im vorliegenden Fall beispielhaft parallel zu der Raumachse 16. Die beiden Detektionsbereiche 26, 32 liegen in einer gemeinsamen Ebene. Der lichtempfindliche Bereich 20 ist somit ein planarer Bereich, der sich parallel zu der Raumachse 16 erstreckt. Das von der Optik 14 spektral aufgespaltene Licht fällt entsprechend wellenlängenabhängig auf unterschiedliche Positionen entlang der Raumachse 16. In eine Richtung senkrecht zur Raumachse 16 wird dabei jeweils ein monochromatischer oder schmalbandiger/einfarbiger Bildstreifen eines abzubildenden Objekts auf den lichtempfindlichen Beriech 20 projiziert und/oder fokussiert, dessen räumliche Dimension durch den Beobachtungsspalt 96 vorgegeben ist.
Fig. 4 zeigt eine schematische Darstellung unterschiedlicher Spektralbereiche, die für die Bilderfassungssensorik relevant sind. Im Folgenden wird auf die Figuren 3 und 4 zugleich Bezug genommen. Der erste Bildsensor 22 ist aufgrund seiner Beschaffenheit in einem ersten Spektralbereich 24 lichtempfindlich, der sich beispielsweise von 450 nm bis wenigstens 900 nm erstreckt, vorliegend etwa von 400 nm bis 1000 nm. Der zweite Bildsensor 26 ist aufgrund seiner Beschaffenheit in einem zweiten Spektralbereich 30 lichtempfindlich, der sich beispielsweise von 900 nm bis wenigstens 1500 nm erstreckt, vorliegend bis wenigstens 1700 nm. Die relative räumliche Anordnung der Optik 14 und des lichtempfindlichen Bereichs 20 führt dazu, dass Licht eines Gesamtspektralbereichs 30 auf den lichtempfindlichen Bereich 20 fällt, der durch die beiden Spektralbereiche 24, 30 definiert ist. Der Gesamtspektralbereich 30 erstreckt sich beispielsweise von einer ersten Wellenlänge 36 bis zu einer zweiten Wellenlänge 38. Die erste Wellenlänge ist beispielhaft 420 nm oder 450 nm, die zweite Wellenlänge ist beispielhaft 1500 nm oder 1600 nm.
Wie in Fig. 4 dargestellt ist, kann der Gesamtspektralbereich 34 zumindest eine spektrale Lücke 112 aufweisen, die durch die Beabstandung der beiden
Detektionsbereiche 26, 32 bedingt ist. In diesem Bereich trifft spektral aufgespaltenes Licht nicht auf einen lichtempfindlichen Teil der Bilderfassungssensorik 18, sondern beispielsweise auf Rahmenelemente der Bildsensoren 22, 28, und kann daher nicht detektiert werden. Der Gesamtspektralbereich 34 ist jedoch aufgrund der Anordnung der Bildsensoren 22, 28 nebeneinander zumindest im Wesentlichen durchgängig.
Aufgrund der großen spektralen Breite des Gesamtspektralbereichs 24 umfasst dieser Beugungslicht, das auf unterschiedliche Beugungsordnungen zurückzuführen ist. Ist beispielsweise die erste Wellenlänge 36 420 nm, tritt ab einem Doppelten dieses Werts, also ab einer Wellenlänge von 840 nm, eine 2. Beugungsordnung auf, ab einer Wellenlänge von 1260 nm zusätzlich eine dritte Beugungsordnung. Aufgrund der unterschiedlichen spektralen Empfindlichkeiten der Bildsensoren 22, 28 wird wenigstens ein Teil dieser höheren Beugungsordnungen von dem zweiten Bildsensor 28 nicht detektiert. Zusätzlich ist ein Kantenfilter 40 vorgesehen, der sich vor dem zweiten Bildsensor 28 befindet. In der exemplarisch gezeigten Ausführungsform deckt dieser Kantenfilter 40 zudem einen Teil des ersten Bildsensors 22 ab. Eine spektrale Kante des Kantenfilters 40 ist derart bei einer Grenzwellenlänge 42 gewählt, dass höhere Beugungsordnungen blockiert werden. Die Grenzwellenlänge 42 liegt im Beispiel bei einem Doppelten der ersten Wellenlänge 36, also bei 840 nm. Höhere Beugungsordnungen von Licht mit einer Wellenlänge zwischen der ersten Wellenlänge 36 und der Grenzwellenlänge 42 werden somit sowohl von dem abgedeckten Teil des ersten Bildsensors 22 als auch von dem zweiten Bildsensor 28 abgehalten. Die 2. Ordnung der Grenzwellenlänge 42 wiederum, die bei 1680 nm auftritt, liegt bereits außerhalb des Gesamtspektralbereichs 34. Somit kann durch die vorliegende Anordnung sichergestellt sein, dass lediglich Licht 1. Beugungsordnung abgebildet wird.
Es versteht sich, dass mehrere unterschiedliche Kantenfilter verwendet werden können. Hierdurch kann mit höheren Beugungsordnungen gearbeitet werden, für welche die betreffenden kritischen Wellenlängen näher zusammenrücken. Zudem kann ein noch größerer Gesamtspektralbereich verwendet werden.
In einigen Ausführungsformen können auch die Bildsensoren 22, 28 derart gewählt oder mit eigenen Filtern versehen sein, dass ein Übergang zwischen den beiden Bildsensoren 22, 28 mit der 2. Ordnung der ersten Wellenlänge 36 zusammenfällt. Höhere Beugungsordnungen fallen dann lediglich auf den zweiten Bildsensor 28 und können somit leicht ausgeblendet werden.
Die Verarbeitungseinheit 44 ist dazu eingerichtet, aus den Sensorsignalen der beiden Bildsensoren 22, 28 ein gemeinsamen Bild und somit kombinierte Spektralinformation zu ermitteln. Diese beschreibt dann ein Spektrum über den Gesamtspektralbereich 34.
Wir die Optik 14 relativ zu der Bilderfassungssensorik 18 geeignet gedreht, kann die spektrale Position der Lücke 112 verschoben werden. Ggf. können mehrere Scans hintereinander durchgeführt werden, um auch für die Lücke 112 Spektralinformation zu erhalten. In einigen Ausführungsformen kann die Lücke 1 12 auch schlicht in Kauf genommen werden, indem in dem betreffenden schmalen Spektralbereich auf spektrale Auflösung verzichtet wird.
Es ist zu beachten, dass der Kantenfilter 40 nicht zwingend den gesamten zweiten Bildsensor 28 abdecken muss. In einigen Ausführungsformen kann auch ausschließlich vor einem Teilbereich des ersten Bildsensors ein Kantenfilter 40 vorgesehen sein, wenn beispielsweise die spektrale Empfindlichkeit des zweiten Bildsensors 28 ohnehin bewerkstelligt, dass dieser kein Beugungslicht unerwünschter höherer Ordnungen detektiert.
Fig. 5 zeigt eine schematische Darstellung einer Bilderfassungssensorik 18‘ einer alternativen Bildgebungsvorrichtung. Zur Verdeutlichung sind die Bezugszeichen dieser Ausführungsform mit Hochkommata versehen. Bezüglich des Aufbaus und der Funktionsweise der alternativen Bildgebungsvorrichtung wird grundsätzlich auf die obige Beschreibung der Bildgebungsvorrichtung 10 verwiesen. Diese gilt analog für die alternative Bildgebungsvorrichtung 10. In dieser Ausführungsform können zudem einige oder sämtliche Komponenten des oben beschriebenen Systems vorhanden sein. Insofern betrifft die im Folgenden beschriebene Ausführungsform ebenfalls ein System mit diesem Aufbau.
Die Bilderfassungssensorik 18‘ umfasst einen Bildsensor 54‘, der einen lichtempfindlichen Bereich 20‘ definiert. Der Bildsensor 54‘ ist beispielsweise ein siliziumbasierter Farbsensor, etwa ein RGB-CCD-Sensor. Dieser wird in einer Spektralkamera verwendet, wie sie in Fig. 2 dargestellt ist.
Der Bildsensor 54‘ definiert einen lichtempfindlichen Bereich 20‘, der sich entlang einer Raumachse 16‘ erstreckt. Einfallendes Licht wird wie oben beschrieben von einer Optik der Spektralkamera entlang der Raumachse 16‘ spektral aufgespalten. Der Bildsensor 54‘ ist in einem Spektralbereich lichtempfindlich, innerhalb dessen
Licht unterschiedlicher Beugungsordnungen auftreten kann. Vorliegend ist der Bildsensor 54‘ beispielsweise in einem Spektralbereich zwischen 400 nm und 1300 nm lichtempfindlich. In einem Teilbereich 46‘ des lichtempfindlichen Bereichs 20‘ überlagern sich daher Licht erster und zweiter Beugungsordnung. Beispielsweise erstreckt sich der Teilbereich 46‘ von 800 nm, also einem Doppelten einer kleinsten detektierbaren Wellenlänge, bis zu 1300 nm, also einer größten detektierbaren Wellenlänge.
Im Folgenden wird zusätzlich auf die Figuren 6 und 7 Bezug genommen. Fig. 6 zeigt Transmissionsspektren unterschiedlicher Farbfilter der Bilderfassungssensorik 18‘. Fig. 7 zeigt eine schematische Darstellung einer Sensitivität unterschiedlicher Farbkanäle der Bilderfassungssensorik 18‘. Der Bildsensor 54‘ detektiert im vorliegenden Beispiel Licht in einem ersten Farbkanal 48‘, einem zweiten Farbkanal 50‘ und einem dritten Farbkanal 52‘.
Die drei Farbkanäle 48, 50, 52 können beispielsweise bezogen auf das sichtbare Licht ein roter Farbkanal, ein grüner Farbkanal und ein blauer Farbkanal sein. Der Bildsensor 54‘ umfasst etwa ein Filtermuster 72‘, das wie in Fig. 5 schematisch dargestellt eine Bayer-Matrix umfassen kann. Das Filtermuster 72‘ umfasst eine Vielzahl von Pixelfiltern, die zur Veranschaulichung in Fig. 5 übermäßig groß und in zu geringer Zahl dargestellt sind. Die Pixelfilter sind mit R für rot, G für grün und B für blau bezeichnet. Eine Auflösung des Bildsensors 54‘ kann wenigstens 0,5 Megapixel, wenigstens 1 Megapixel, wenigstens 2 Megapixel, wenigstens 5 Megapixel oder wenigstens 10 Megapixel betragen, wobei auch größere oder kleinere Werte möglich sind.
Die verwendeten Filter definieren drei unterschiedliche spektrale Empfindlichkeiten 88‘, 90‘, 92‘ gemäß drei unterschiedlichen Transmissionsspektren 162, 164, 166. In Fig. 7 sind die Transmissionsspektren 162, 164, 166 für einen Wellenlängenbereich dargestellt, der sich etwa von 450 nm bis 1000 nm erstreckt. Das Transmissionsspektrum 166‘ gehört zu einem roten Filter bzw. zu den roten Pixelfiltern, das Transmissionsspektrum 164 ‘ gehört zu einem grünen Filter bzw. zu den grünen Pixelfiltern, und das Transmissionsspektrum 162‘ gehört zu einem blauen Filter bzw. den blauen Pixelfiltern. Das Transmissionsspektrum 166‘ gehört zu dem ersten Farbkanal 48‘, das Transmissionsspektrum 164 ‘ gehört zu dem zweiten Farbkanal 50‘, und das Transmissionsspektrum 162‘ gehört zu dem dritten Farbkanal 52‘. In anderen Worten betreffen die Farbkanäle 48‘, 50‘, 52‘ jeweils Licht, das
aufgrund der zugehörigen spektralen Empfindlichkeit 88‘, 90‘, 92‘ von den betreffenden Farbpixeln des Bildsensors 54‘ detektierbar ist.
Wie zu erkennen ist, definieren die Transmissionsspektren 162‘, 164‘, 166‘ im sichtbaren jeweils eine bestimmte Farbempfindlichkeit, weshalb diese den drei Farbkanälen 48‘, 50‘, 52‘ zugeordnet sind. Die spektrale Empfindlichkeit schwank wellenlängenabhängig. Insbesondere ist sie außerhalb des sichtbaren Bereichs nicht verschwindend. Stattdessen zeigt jeder der Farbkanäle 48‘, 50‘, 52‘ auch im Nahinfraroten eine bestimmte spektrale Empfindlichkeit. Die spektrale Empfindlichkeit ist für die drei Farbkanäle 48‘, 50‘, 52‘ unterschiedlich.
In Fig. 7 sind die spektralen Empfindlichkeiten zur Veranschaulichung in drei Kategorien eingeteilt. Hohe spektrale Empfindlichkeit in einem bestimmten Spektralbereich ist durch weiß gefüllte Kästchen dargestellt. Mittlere spektrale Empfindlichkeit ist durch hellgrau gefüllte Kästchen dargestellt. Niedrige spektrale Empfindlichkeit ist durch dunkelgrau gefüllte Kästchen dargestellt. Aufgrund der Beugung durch die Optik 14 entspricht die in Querrichtung dargestellte Raumachse 16‘ eine spektralen Position. Es kann also aus einer Position auf dem Bildsensor 54‘ bezüglich der Raumachse auf die betreffende Wellenlänge geschlossen werden.
Soll über den gesamten verfügbaren Spektralbereich abgebildet werden, umfasst dies auch den Teilbereich 46‘, in dem sich Licht unterschiedlicher Beugungsordnung überlagt. Um zwischen Beugungsordnungen unterscheiden zu können, werden die Farbkanäle 48‘, 50‘, 52‘ nach Maßgabe ihrer jeweiligen spektralen Empfindlichkeiten 88, 90, 92 berücksichtigt. Die alternative Bildgebungsvorrichtung umfasst hierfür eine Verarbeitungseinheit 44‘, die dazu eingerichtet ist, anhand der räumlich aufgelösten Intensitätsinformation der Farbkanäle 48‘, 50‘, 52‘ Spektralinformation zu ermitteln, die ein korrigiertes Spektrum beschreibt, das bezüglich des Beugungslichts wenigstens 2. Ordnung korrigiert ist.
Das entsprechende Vorgehen wird unter Bezugnahme auf Fig. 8 beschrieben, die eine schematische Darstellung einer Auswahl von Spektralbereichen aus den Farbkanälen 48‘, 50‘, 52‘ zeigt. Die mit dicken Rahmenlinien eingezeichneten Rechtecke markieren hierbei ausgewählte Spektralbereiche bzw. hierzu korrespondierende Positionsbereiche auf dem Bildsensor 56‘. Es werden zur Detektion im jeweiligen Bereich diejenigen Farbkanäle 48‘, 50‘, 52‘ ausgewählt, die geeignet spektral empfindlich sind und die über Transmissionseigenschaften verfügen, die es gestatten, Licht höherer Beugungsordnung auszublenden.
Beispielsweise wird für die Detektion von Licht in einem Bereich einer doppelten Wellenlänge blauen Lichts auf die Verwendung des blauen Farbkanals 56‘ verzichtet, da dessen Filter kurzwelliges Licht durchlässt und daher beispielsweise für Wellenlängen zwischen 800 und 900 nm entsprechend Licht 2. Ordnung mit einer Wellenlänge von 400 bis 450 nm auf die Pixel des Farbkanals 56‘ fällt. Dieses Licht wird hingegen von den Filtern des roten Farbkanals 48‘ und des grünen Farbkanals 50‘ blockiert, wie in Fig. 6 zu erkennen ist.
Vorliegend wird beispielhaft die folgende Auswahl getroffen. Für blaues, grünes und rotes Licht wird jeweils ein Spektralbereich 56‘, 58, 60‘ in jeweils genau einem der Farbkanäle 48‘, 50‘, 52‘ betrachtet. In einem sich an den sichtbaren Bereich unmittelbar anschließenden Spektralbereich 66‘ werden alle drei Farbkanäle 48‘, 50‘, 52‘ kombiniert. In einem hieran anschließenden Spektralbereich 68‘ werden zwei Farbkanäle 48‘, 50‘ kombiniert, der dritte Farbkanal 52‘ wird hingegen ausgeschlossen. In einem noch weiter im Roten liegenden Spektralbereich 62‘ wird lediglich der erste Farbkanal 48‘ betrachtet.
Beispielhaft werden noch weiter im Roten in einem Spektralbereich 70‘ zwei Farbkanäle 48‘, 52‘ kombiniert, schließlich in einem Spektralbereich 64‘ lediglich der dritte Farbkanal 52‘. Hier würden der erste Farbkanal 48‘ und der zweite Farbkanal 50‘ jeweils Beugungslicht 2. Ordnung beitragen, das hingegen aufgrund der spektralen Empfindlichkeit des dritten Farbkanals 52‘ blockiert wird (vgl. Fig. 6).
Indem die Verarbeitungseinheit 44‘ das in den Farbkanälen 48‘, 50‘, 52‘ detektierte Licht wie beschrieben kombiniert, kann eine spektrale Korrektur durchgeführt werden. Wie beschrieben bezieht die Verarbeitungseinheit 44‘ hierzu in den Spektralbereichen 56‘, 58‘, 60‘, 62‘, 64‘ Spektralinformation aus einem einzelnen der Farbkanäle 48‘. 50‘, 52‘, in den Spektralbereichen 66‘, 68‘ aus zweien der Farbkanäle 48‘, 50‘, 52‘, und in dem Spektralbereich 70‘ aus allen drei Farbkanälen 48‘, 50‘, 52‘.
Fig. 9 zeigt schematische Spektren zur Veranschaulichung einer hierdurch ermöglichten Korrektur. Die durchgezogene Linie zeigt das durch die Verarbeitungseinheit 44‘ erhaltene korrigierte Spektrum, das frei von höheren Beugungsordnungen ist. Würde hingegen das Licht höherer Beugungsordnungen ebenfalls detektiert, würde ein verfälschtes Spektrum 1 16 erhalten. Dieses würde beispielsweise den als Spektrum 118 dargestellten Beitrag 2. Ordnung beinhalten. Durch die getroffene Auswahl geeigneter Farbkanäle 48‘, 50‘, 52‘ können höhere
Ordnungen unter Verwendung eines ohnehin vorhandenen Filtermusters zuverlässig ausgeblendet werden.
Es versteht sich, dass ein Bildsensor 56‘ mit einem Filtermuster auch als erster Bildsensor 22 in der oben beschriebene Bildgebungsvorrichtung 10‘ mit zwei Bildsensoren 22, 28 verwendet werden kann. In einem von diesem Bildsensor abgedeckten Spektralbereich kann dann die beschriebene farbkanalbasierte Korrektur erfolgen. Zusätzlich kann bedarfsweise die abweichende Spektralempfindlichkeit des zweiten Bildsensors 28‘ ausgenutzt und/oder ein zusätzlicher Kantenfilter eingesetzt werden.
Fig. 10 zeigt ein schematisches Ablaufdiagramm eines Verfahrens zur Herstellung einer Bildgebungsvorrichtung 10, die wie oben beschrieben über zwei nebeneinander angeordnete Bildsensoren 22, 28 verfügt. Der Verfahrensablauf ergibt sich auch anhand der obenstehenden Beschreibung. Ein Schritt S1 1 umfasst ein Bereitstellen einer Optik 14, die dazu eingerichtet ist, einfallendes Licht spektral aufzuspalten und spektral aufgespaltet auf eine Raumachse 16 abzubilden. Ein Schritt S12 umfasst ein Bereitstellen eines ersten Bildsensors 22, der in einem ersten Spektralbereich 24 lichtempfindlich ist. Ein Schritt S13 umfasst ein Bereitstellen eines zweiten Bildsensors 28, der in einem zweiten Spektral bereich 30 lichtempfindlich ist, der von dem ersten Spektralbereich 24 verschieden ist, wobei der erste Spektralbereich 24 und der zweite Spektralbereich 30 gemeinsam einen im Wesentlichen durchgängigen Gesamtspektralbereich 34 definieren, der sich von einer ersten Wellenlänge 36 bis zu einer zweiten Wellenlänge 38 erstreckt, wobei die erste Wellenlänge 36 im ersten Spektralbereich 24 liegt, wobei die zweite Wellenlänge 38 im zweiten Spektral bereich 30 liegt, und wobei die zweite Wellenlänge 38 wenigstens doppelt so groß ist wie die erste Wellenlänge 36. Ein Schritt S14 umfasst ein Anordnen des ersten Bildsensors 22 und des zweiten Bildsensors 28 derart, dass sich der zweite Bildsensor 28 bezüglich der Raumachse 16 neben dem ersten Bildsensor 22 befindet, und derart, dass der erste Bildsensor 22 einen ersten Detektionsbereich 26 eines lichtempfindlichen Bildbereichs 20 abdeckt und der zweite Bildsensor 28 einen von dem ersten Detektionsbereich 26 verschiedenen zweiten Detektionsbereich 32 des lichtempfindlichen Bildbereichs 20 abdeckt.
Ein optionaler Schritt S15 umfasst ein Anbringen zumindest eines Kantenfilters 40 über wenigstens einem Teil des ersten Bildsensors 22 und/oder über wenigstens einem Teil des zweiten Bildsensors 28.
Fig. 1 1 zeigt ein schematisches Ablaufdiagramm eines Verfahrens zur Bildgebung mittels einer Bildgebungsvorrichtung, die wie beschrieben einen Bildsensor mit mehreren unterschiedlichen Farbkanälen 48‘, 50‘, 52‘ umfasst. Der Verfahrensablauf ergibt sich auch anhand der obenstehenden Beschreibung. Ein Schritt S21 umfasst ein spektrales Aufspalten einfallenden Lichts bezüglich einer Raumachse 16‘ durch Beugung. Ein Schritt S22 umfasst ein Abbilden des spektral aufgespalteten Lichts auf eine Bilderfassungssensorik 18‘, die einen lichtempfindlichen Bereich 20‘ definiert und die derart angeordnet ist, dass sich der lichtempfindliche Bereich 20‘ entlang der Raumachse 16‘ erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich 20‘ fällt, wobei sich in einem Teilbereich 46‘ des lichtempfindlichen Bereichs 20‘ unterschiedliche Beugungsordnungen überlagern. Ein Schritt S23 umfasst ein Erfassen räumlich aufgelöster Intensitätsinformation für zumindest zwei unterschiedliche Farbkanäle 48‘, 50‘, 52‘ mittels der Bilderfassungssensorik 18‘, die sich hinsichtlich ihrer wellenlängenabhängigen Sensitivität derart unterscheiden, dass Beugungslicht wenigstens 2. Ordnung in den Farbkanälen 48‘, 50‘, 52‘ unterschiedlich intensiv detektierbar ist. Ein Schritt S24 umfasst ein Ermitteln von Spektralinformation, die ein Spektrum über den Spektralbereich beschreibt, das bezüglich des Beugungslichts wenigstens 2. Ordnung korrigiert ist, anhand der räumlich aufgelösten Intensitätsinformation der Farbkanäle 48‘, 50‘, 52‘.
Bezugszeichenliste
10 Bildgebungsvorrichtung
12 Spektralkamera
14 Optik
16 Raumachse
18 Bilderfassungssensorik
20 lichtempfindlicher Bereich
22 Bildsensor
24 Spektralbereich
26 Detektionsbereich
28 Bildsensor
30 Spektralbereich
32 Detektionsbereich
34 Gesamtspektralbereich
36 Wellenlänge
38 Wellenlänge
40 Kantenfilter
42 Grenzwellenlänge
44 Verarbeitungseinheit
46 Teilbereich
48 Farbkanal
50 Farbkanal
52 Farbkanal
54 Bildsensor
56 Spektralbereich
58 Spektralbereich
60 Spektralbereich
62 Spektralbereich
64 Spektralbereich
66 Spektralbereich
68 Spektralbereich
70 Spektralbereich
72 Filtermuster
74 Endoskopvorrichtung
76 Endoskop
78 System
80 Versorgungseinheit
82 Anzeige
84 Lichtleiterkabel
86 Kabel
88 Spektralempfindlichkeit
90 Spektralempfindlichkeit
92 Spektralempfindlichkeit
94 Eingangsoptik
96 Beobachtungsspalt
98 optisches Element
100 optisches Element
102 dispersives Element
104 Kameraeinheit
106 Scaneinrichtung
108 Träger
110 Gehäuse
112 Lücke
114 Spektrum
116 Spektrum
118 Spektrum
162 Transmissionsspektrum
164 Transmissionsspektrum
166 Transmissionsspektrum
Claims
1. Medizinische Bildgebungsvorrichtung (10) mit einer Spektralkamera (12), die dazu eingerichtet ist, hyperspektrale Abbildungen aufzunehmen, wobei die Spektralkamera (12) umfasst: eine Optik (14), die dazu eingerichtet ist, einfallendes Licht durch Beugung bezüglich einer Raumachse (16) spektral aufzuspalten; und eine Bilderfassungssensorik (18), die einen lichtempfindlichen Bereich (20) definiert und die bezüglich der Optik (14) derart angeordnet ist, dass sich der lichtempfindliche Bereich (20) entlang der Raumachse (16) erstreckt und das spektral aufgespaltete Licht auf den lichtempfindlichen Bereich (20) fällt, wobei die Bilderfassungssensorik (18) umfasst: einen ersten Bildsensor (22), der in einem ersten Spektralbereich (24) lichtempfindlich ist, und der einen ersten Detektionsbereich (26) des lichtempfindlichen Bereichs (20) abdeckt; und einen zweiten Bildsensor (28), der in einem zweiten Spektral bereich (30) lichtempfindlich ist, der von dem ersten Spektralbereich (24) verschieden ist, und der einen von dem ersten Detektionsbereich (26) verschiedenen zweiten Detektionsbereich (32) des lichtempfindlichen Bereichs (20) abdeckt, wobei der zweite Bildsensor (28) bezüglich der Raumachse (16) neben dem ersten Bildsensor (22) angeordnet ist, wobei der erste Spektralbereich (24) und der zweite Spektralbereich (30) gemeinsam einen zumindest im Wesentlichen durchgängigen Gesamtspektralbereich (34) definieren, der sich von einer ersten Wellenlänge (36) bis zu einer zweiten Wellenlänge (38) erstreckt, wobei die erste Wellenlänge (36) im ersten Spektralbereich (24) liegt.
2. Medizinische Bildgebungsvorrichtung (10) nach Anspruch 1 , wobei die zweite Wellenlänge (38) im zweiten Spektralbereich liegt, und wobei die zweite Wellenlänge (38) mehr als doppelt so groß ist wie die erste Wellenlänge (36).
3. Medizinische Bildgebungsvorrichtung (10) nach Anspruch 1 oder 2, wobei der erste Spektralbereich (24) zumindest einen Wellenlängenbereich von 500 nm, vorzugsweise von 450 nm, bis 800 nm, vorzugsweise bis 900 nm, umfasst.
4. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, wobei der zweite Spektralbereich (30) zumindest einen Wellenlängenbereich von 1000 nm, vorzugsweise von 900 nm, bis 1500 nm, vorzugsweise bis 1700 nm, umfasst.
5. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, wobei der erste Bildsensor (22) ein monochromatischer Bildsensor ist, und wobei der zweite Bildsensor (28) ein SWIR-Sensor, insbesondere ein InGaAs-Sensor, ist.
6. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, wobei der erste Bildsensor (22) und der zweite Bildsensor (28) unmittelbar nebeneinander angeordnet sind und den lichtempfindlichen Bereich (20) als im Wesentlichen durchgängigen Bereich definieren.
7. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, wobei die Optik dazu eingerichtet ist, einfallendes Licht spektral derart aufzuspalten, dass für Licht mit einer Wellenlänge im ersten Spektralbereich (24) Beugungslicht n-ter Ordnung zu dem ersten Detektionsbereich (26) gelangt und von dem ersten Bildsensor (22) aufgrund dessen Lichtempfindlichkeit im ersten Spektralbereich (24) detektierbar ist und Beugungslicht (n+1 )-ter Ordnung zu dem zweiten Detektionsbereich (32) gelangt aber vom zweiten Bildsensor (28) aufgrund dessen fehlender Lichtempfindlichkeit im ersten Spektralbereich (24) nicht detektierbar ist, wobei n eine positive ganze Zahl und insbesondere 1 ist.
8. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, ferner umfassend zumindest einen optischen Kantenfilter (40), der für Licht mit einer Wellenlänge oberhalb einer Grenzwellenlänge (42) durchlässig und für Licht mit einer Wellenlänge unterhalb der Grenzwellenlänge (42) undurchlässig ist, wobei die Grenzwellenlänge (42) kleiner ist als ein Doppeltes der ersten Wellenlänge (36), und
wobei der optische Kantenfilter (40) zumindest teilweise vor dem zweiten Bildsensor (28) angeordnet ist.
9. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, ferner umfassend zumindest einen optischen Kantenfilter (40), der für Licht mit einer Wellenlänge unterhalb einer Grenzwellenlänge (42) durchlässig und für Licht mit einer Wellenlänge oberhalb der Grenzwellenlänge (42) undurchlässig ist, wobei die Grenzwellenlänge (42) kleiner ist als ein Doppeltes der ersten Wellenlänge, und wobei der optische Kantenfilter (40) zumindest teilweise vor dem ersten Bildsensor angeordnet ist.
10. Medizinische Bildgebungsvorrichtung (10) nach Anspruch 8 oder 9, wobei die Optik (14) dazu eingerichtet ist, einfallendes Licht spektral derart aufzuspalten, dass für Licht mit einer Wellenlänge im ersten Spektralbereich (24) Beugungslicht n-ter Ordnung zu dem ersten Detektionsbereich (26) gelangt und von dem ersten Bildsensor (22) aufgrund dessen Lichtempfindlichkeit im ersten Spektralbereich detektierbar ist und Beugungslicht (n+1)-ter Ordnung zu dem optischen Kantenfilter (40) gelangt und von diesem blockiert wird wobei n eine positive ganze Zahl und insbesondere 1 ist.
11. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, wobei die Spektralkamera (12) nach dem Pushbroom-Prinzip arbeitet.
12. Medizinische Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche, ferner umfassend eine Verarbeitungseinheit (44), die dazu eingerichtet ist, anhand von Sensorsignalen des ersten Bildsensors (22) und Sensorsignalen des zweiten Bildsensors (28) kombinierte Spektralinformation zu ermitteln, die ein Spektrum über den Gesamtspektralbereich (34) beschreibt.
13. Endoskopvorrichtung (74) mit einer Bildgebungsvorrichtung (10) nach einem der vorhergehenden Ansprüche.
14. Endoskop (76) mit einer Endoskopvorrichtung (74) nach Anspruch 13.
15. Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung (10), insbesondere nach einem der Ansprüche 1 bis 12, umfassend die Schritte:
Bereitstellen einer Optik (14), die dazu eingerichtet ist, einfallendes Licht spektral aufzuspalten und spektral aufgespaltet auf eine Raumachse (16) abzubilden;
Bereitstellen eines ersten Bildsensors (22), der in einem ersten Spektralbereich (24) lichtempfindlich ist;
Bereitstellen eines zweiten Bildsensors (28), der in einem zweiten Spektralbereich (30) lichtempfindlich ist, der von dem ersten Spektral bereich (24) verschieden ist, wobei der erste Spektralbereich (24) und der zweite Spektralbereich (30) gemeinsam einen im Wesentlichen durchgängigen Gesamtspektralbereich (34) definieren, der sich von einer ersten Wellenlänge (36) bis zu einer zweiten Wellenlänge (38) erstreckt, wobei die erste Wellenlänge (36) im ersten Spektralbereich (24) liegt, wobei die zweite Wellenlänge (38) im zweiten Spektralbereich (30) liegt, und wobei die zweite Wellenlänge (38) wenigstens doppelt so groß ist wie die erste Wellenlänge (36); und
Anordnen des ersten Bildsensors (22) und des zweiten Bildsensors (28) derart, dass sich der zweite Bildsensor (28) bezüglich der Raumachse (16) neben dem ersten Bildsensor (22) befindet, und derart, dass der erste Bildsensor (22) einen ersten Detektionsbereich (26) eines lichtempfindlichen Bildbereichs (20) abdeckt und der zweite Bildsensor (28) einen von dem ersten Detektionsbereich (26) verschiedenen zweiten Detektionsbereich (32) des lichtempfindlichen Bildbereichs (20) abdeckt.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102023101964.3A DE102023101964A1 (de) | 2023-01-26 | 2023-01-26 | Medizinische Bildgebungsvorrichtung, Endoskopvorrichtung, Endoskop und Verfahren zur Herstellung einer medizinischen Bildgebungsvorrichtung |
| PCT/EP2024/051774 WO2024156806A1 (de) | 2023-01-26 | 2024-01-25 | Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur herstellung einer medizinischen bildgebungsvorrichtung |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| EP4654879A1 true EP4654879A1 (de) | 2025-12-03 |
Family
ID=89767199
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| EP24702304.7A Pending EP4654879A1 (de) | 2023-01-26 | 2024-01-25 | Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur herstellung einer medizinischen bildgebungsvorrichtung |
Country Status (4)
| Country | Link |
|---|---|
| EP (1) | EP4654879A1 (de) |
| CN (1) | CN120569151A (de) |
| DE (1) | DE102023101964A1 (de) |
| WO (1) | WO2024156806A1 (de) |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8081244B2 (en) * | 2006-07-24 | 2011-12-20 | Michael Golub | Snapshot spectral imaging systems and methods |
| US8922783B2 (en) * | 2007-04-27 | 2014-12-30 | Bodkin Design And Engineering Llc | Multiband spatial heterodyne spectrometer and associated methods |
| US9880054B2 (en) * | 2013-07-26 | 2018-01-30 | Inview Technology Corporation | Simplified compressive sensing spectral imager |
| DE102013217379A1 (de) | 2013-08-30 | 2015-03-05 | Spekled GmbH | Vorrichtung und Verfahren zur Aufnahme eines Hyperspektralbildes |
| CN114207392A (zh) * | 2019-07-26 | 2022-03-18 | 新加坡国立大学 | 成像系统及其光编码设备 |
| DE102020105458B4 (de) | 2019-12-13 | 2023-09-28 | Karl Storz Se & Co. Kg | Medizinische Bildgebungsvorrichtung |
| DE102020129739B4 (de) * | 2020-11-11 | 2023-03-02 | Karl Storz Se & Co. Kg | Endoskopische und/oder exoskopische Bildgebungsvorrichtung zur spektralen Bildgebung, Endoskop und/oder Exoskop mit einer Bildgebungsvorrichtung |
| DE102021110611B3 (de) * | 2021-04-26 | 2022-08-11 | Karl Storz Se & Co. Kg | Medizinische Bildgebungsvorrichtung, insbesondere Stereo-Endoskop oder Stereo-Exoskop |
-
2023
- 2023-01-26 DE DE102023101964.3A patent/DE102023101964A1/de active Pending
-
2024
- 2024-01-25 CN CN202480007659.1A patent/CN120569151A/zh active Pending
- 2024-01-25 EP EP24702304.7A patent/EP4654879A1/de active Pending
- 2024-01-25 WO PCT/EP2024/051774 patent/WO2024156806A1/de not_active Ceased
Also Published As
| Publication number | Publication date |
|---|---|
| CN120569151A (zh) | 2025-08-29 |
| WO2024156806A1 (de) | 2024-08-02 |
| DE102023101964A1 (de) | 2024-08-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102006038814B4 (de) | Elektronisches Endoskop, Endoskoplichtquelleneinheit, Endoskopprozessor und elektronisches Endoskopsystem | |
| DE102014110131B4 (de) | Bildaufnahmevorrichtung | |
| DE102020105459A1 (de) | Medizinische bildgebungsvorrichtung mit mehreren bildgebungsmodi | |
| EP2786696B1 (de) | Dentalkamerasystem | |
| DE102005034332A1 (de) | Einrichtung und Verfahren zur Beobachtung, Dokumentation und/oder Diagnose des Augenhintergrundes | |
| DE102010045364A1 (de) | Verfahren und Vorrichtung zur Erzeugung hochwertiger Fundusaufnahmen | |
| DE112018000393T5 (de) | Endoskopsystem und Bildanzeigevorrichtung | |
| EP3298345A1 (de) | Kamera und verfahren zur dreidimensionalen vermessung eines dentalen objekts | |
| DE112017004403T5 (de) | Endoskopsystem und charakteristischer betrag-berechnungsverfahren | |
| DE112017004418T5 (de) | Endoskopsystem | |
| WO2024079275A1 (de) | Medizinische bildgebungsvorrichtung und verfahren zur medizinischen bildgebung | |
| DE102017210274A1 (de) | Mikroskopiesystem und Mikroskopieverfahren zur Aufnahme von Fluoreszenzlichtbildern und Weißlichtbildern | |
| DE112016005019B4 (de) | Endoskopsystem | |
| DE102022117578A1 (de) | Beleuchtungsvorrichtung und Bildgebungsvorrichtung mit einer Beleuchtungsvorrichtung | |
| WO2024156805A1 (de) | Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur bildgebung | |
| DE102021119417A1 (de) | 3MOS-Kamera | |
| DE112017005214T5 (de) | Endoskopiesystem | |
| DE112017004417T5 (de) | Endoskopsystem | |
| DE102022117581A1 (de) | Beleuchtungsvorrichtung, Bildgebungsvorrichtung mit einer Beleuchtungsvorrichtung, Verfahren zur Erzeugung von Beleuchtungslicht und Verfahren zum Betrieb einer Bildgebungsvorrichtung | |
| EP4598415A1 (de) | Medizinische bildgebungsvorrichtung und verfahren zur medizinischen bildgebung | |
| WO2024156806A1 (de) | Medizinische bildgebungsvorrichtung, endoskopvorrichtung, endoskop und verfahren zur herstellung einer medizinischen bildgebungsvorrichtung | |
| EP4626297A1 (de) | Beleuchtungsvorrichtung zur bereitstellung von beleuchtungslicht für ein bildgebungsinstrument, bildgebungsvorrichtung, verfahren zum einstellen einer beleuchtungsvorrichtung und verfahren zur erzeugung von beleuchtungslicht | |
| DE102022114606A1 (de) | Medizinische Bildgebungsvorrichtung, Verfahren zum Betrieb einer solchen und Verfahren zur medizinischen Bildgebung | |
| EP4093018A1 (de) | Verfahren zur medizinischen bildgebung und medizinische bildgebungsvorrichtung | |
| EP4260556A2 (de) | Verfahren zur spektralen überprüfung von systemkomponenten eines modularen medizinischen bildgebungssystems |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: UNKNOWN |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE |
|
| PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE |
|
| 17P | Request for examination filed |
Effective date: 20250819 |
|
| AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC ME MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
| DAV | Request for validation of the european patent (deleted) | ||
| DAX | Request for extension of the european patent (deleted) |