EP3366032B1 - Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes - Google Patents

Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes Download PDF

Info

Publication number
EP3366032B1
EP3366032B1 EP16788651.4A EP16788651A EP3366032B1 EP 3366032 B1 EP3366032 B1 EP 3366032B1 EP 16788651 A EP16788651 A EP 16788651A EP 3366032 B1 EP3366032 B1 EP 3366032B1
Authority
EP
European Patent Office
Prior art keywords
optical
housing
channels
deflecting means
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP16788651.4A
Other languages
English (en)
French (fr)
Other versions
EP3366032A1 (de
Inventor
Frank Wippermann
Nicolas LANGE
Oliver Pabst
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Publication of EP3366032A1 publication Critical patent/EP3366032A1/de
Application granted granted Critical
Publication of EP3366032B1 publication Critical patent/EP3366032B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00Optical objectives specially designed for the purposes specified below
    • G02B13/001Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
    • G02B13/0055Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
    • G02B13/0065Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element having a beam-folding prism or mirror
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00Optical objectives specially designed for the purposes specified below
    • G02B13/06Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0816Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/106Beam splitting or combining systems for splitting or combining a plurality of identical beams or images, e.g. image replication
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/1066Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/14Beam splitting or combining systems operating by reflection only
    • G02B27/143Beam splitting or combining systems operating by reflection only using macroscopically faceted or segmented reflective surfaces
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/08Mirrors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/04Bodies collapsible, foldable or extensible, e.g. book type
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/17Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B3/00Focusing arrangements of general interest for cameras, projectors or printers
    • G03B3/10Power-operated focusing
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00Adjustment of optical system relative to image or object surface other than for focusing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Definitions

  • the present invention relates to an apparatus having a multi-channel imaging apparatus, a method of manufacturing the same, and a method of manufacturing the same, and methods of detecting an overall visual field.
  • the present invention further relates to multi-aperture linear channel array imaging systems with an extendable housing.
  • DE 10 2014 213 371 discloses a multi-aperture device having a plurality of laterally juxtaposed optical channels. It would therefore be desirable to have a concept that allows miniaturized devices to capture an overall visual field while ensuring high image quality.
  • the object of the present invention is therefore to provide an apparatus and a method of manufacturing the same, which enable a miniaturized execution of the apparatus and obtaining images in a high quality.
  • a core idea of the present invention is to have recognized that viewing directions of a multi-aperture imaging device outside of a housing in a low quality are affected. By deflecting beam paths of optical channels outside the multi-aperture imaging device or by deflecting outside the housing, a high quality of the images can thus be obtained. A deflection of the beam paths also makes it possible to orient the multi-aperture imaging device in the housing at least partially independently of a viewing direction of the multi-aperture imaging device. This is, for example, influenced or determined by the beam deflection device.
  • the independent orientation of the multi-aperture imaging device in the housing allows the comprehensive housing to be miniaturized, at least with respect to a dimension, such as a thickness.
  • the arrangement of the Strahlumlenk issued within the housing additionally allows the multi-aperture imaging device and any existing components of a lighting device remain hidden in this operating condition, resulting in a high degree of aesthetics of the overall device, as in this state, if necessary, no screens, lenses, LEDs or otherwise Components are recognizable.
  • an apparatus in one embodiment, includes a housing and a multi-aperture imaging device.
  • the multi-aperture imaging device has an array of juxtaposed optical channels and a beam deflector for redirecting a beam path of the optical channels.
  • Outside surfaces of the housing enclose a housing volume in a first operating state of the device.
  • the beam deflection device In the first operating state of the device, the beam deflection device has a first position within the housing volume. In a second operating state of the device, the beam deflection device has a second position, in which at least the beam deflection device is arranged at least partially outside the housing volume.
  • a method of providing a device includes providing a housing and disposing a multi-aperture imaging device in the housing.
  • the multi-aperture imaging device comprises an array of juxtaposed optical channels and a beam deflection device for redirecting a beam path of the optical channels.
  • the arrangement of the multi-aperture imaging device is carried out so that outer surfaces of the housing in a first operating state of the device enclose a housing volume and so that the beam deflection device is in the first operating state of the device has a first position within the housing volume.
  • the multi-aperture imaging device is arranged so that the beam deflecting device in a second Operating state of the device has a second position in which at least the beam deflecting device is at least partially disposed outside of the housing volume.
  • a method for detecting an overall visual field comprises moving a beam deflecting device of a multi-aperture imaging device to a position in which at least the beam deflecting device is at least partially enclosed outside of a housing volume and enclosed within a housing volume by outer surfaces of a housing in a first operating state of the device the beam deflecting device is arranged in a first position.
  • the method comprises detecting a total field of view with an array of juxtaposed optical channels of the multi-aperture imaging device whose beam paths are deflected by the beam redirecting device.
  • At least one actuator of an image stabilizer and / or a focusing device is arranged so that it is at least partially disposed between two planes which are spanned by sides of a cuboid.
  • the sides of the cuboid are aligned parallel to one another and to a line extension direction of the array and a part of the beam path of the optical channels between the image sensor and the beam deflection device.
  • a direction of the surface normal of the planes may be understood as the thickness direction of the device.
  • the volume of the cuboid is minimal and yet includes the image sensor, the array and the beam deflector. This allows a flat design of the housing. In contrast to existing solutions, this allows the camera in the thickness direction in any of the states of the cuboid volume of the housing protrudes out.
  • Fig. 1a shows a schematic side sectional view of a device 10 according to an embodiment in a first operating state.
  • the device 10 may be a mobile or immobile device, such as a mobile phone, a smartphone, a mobile computer, such as a tablet computer, and / or a mobile music player.
  • the device 10 comprises a multi-aperture imaging device 11 which has an image sensor 12, an array 14 of juxtaposed optical channels 16 and a beam deflection device 18.
  • the beam deflecting device 18 is designed to deflect a beam path 17 of the optical channels 16 and will be described in detail later.
  • the device 10 includes a housing 22 having outer surfaces 23 that enclose a housing volume 24.
  • This means the housing volume 24 may include an internal volume of the housing 22 and the volume of the housing 22.
  • the housing volume also includes a volume that is stressed by the housing walls and is thus enclosed by the outer surfaces 23 of the housing.
  • the housing 22 may be formed transparent or opaque and include, for example, plastic materials and / or metal materials.
  • the beam deflecting device 18 has a first position within the housing volume 24.
  • the housing 22 and / or components arranged in the housing 22 can block the beam path 17 of the optical channels 16 after being deflected by the beam deflection device 18, so that a field of view 26 arranged outside the housing 22 with the multi-aperture imaging device 11 is not to be detected or restricted is detectable.
  • the components may be about a battery, boards, non-transparent areas of the housing 22 or the like. In other words, another, possibly non-optical component can be arranged on a housing instead of a previous camera lens.
  • the housing 22 may have an opening 28 through which the housing volume 24 is connected to an outer volume 25 of the housing 22.
  • the opening 28 may at times be completely or partially closed by a cover 32.
  • the first operating state of the device 10 may be an inactive operating state of the multi-aperture imaging device 11, in which the optical channels 16 are, for example, directed to the inside of the housing 22 or not deflected.
  • the construction height of the multi-aperture imaging device is determined at least in part by the diameter of optics of the optical channels 16 (lenses).
  • the extension of the mirrors (beam deflecting device) in this thickness direction is equal to the extension of the lenses in this direction.
  • the beam path of the optical channel 16 is trimmed by the mirror 18. This leads to a reduction of the image brightness, whereby this reduction is dependent on the field angle.
  • the present embodiments solve this problem by moving parts or the entire multi-channel camera assembly, so that in the operating state of the camera parts of the structure protrude over the housing eg of a smartphone compared to the state of non-use of the camera.
  • the movement of the parts may be rotary (unfolding or unfolding), translational (extension) or consist of a mixed form.
  • the additional movements of parts or the entire system similar to known zoom lenses on compact cameras, allow a minimal design in non-use mode of the cameras and optimized for the realization of the technical function, larger design in the usage mode of the camera.
  • Fig. 1b shows a schematic side sectional view of the device 10 in a second operating state.
  • the beam deflecting device 18 has a second position outside the housing volume 24. This allows the beam deflector 18 to redirect the optical paths 17 of the optical channels 16 outside of the housing volume 24 and to detect the field of view 26 outside of the housing 22 from the multi-aperture imaging device 11.
  • the cover 32 may be made of the in FIG. 1a be shown moved away, so that the beam deflecting device 18 through the opening 28 of the housing 22 from the housing volume 24 is movable.
  • the beam deflecting device 18 can be moved translationally and / or rotationally between the first position and the second position. It is advantageous that the components within the housing 22 and / or the housing 22 do not block the deflected beam path 17 of the optical channels 16.
  • the multi-aperture imaging device 11 may be disposed in a camera body, which in turn is at least partially disposed in the housing 22.
  • the camera body may, for example, at least partially by a carriage, as in connection with Fig. 5 is described, be formed. This differs from a concept in which a single-channel camera is oriented in different directions by means of a folding-over mechanism, in that in the present case a rotation or tilting of an image sensor and / or the imaging optics can be avoided.
  • An overall field of view can be detected by means of the device 10 so that the beam deflecting device is moved starting from the first position to the second position, in which the beam deflecting device is placed at least partially outside a housing volume. If the beam deflecting device has the second position, the total field of view and with the array of juxtaposed optical channels of the multi-aperture imaging device whose beam paths are deflected by the beam deflecting device can be detected.
  • Fig. 2a shows a schematic side sectional view of a device 20 according to another embodiment in a first operating state.
  • the device 20 has the cover 23, which is rotatably mounted on the housing 22, for example via a connecting element 34a and / or via an optional connecting element 34b.
  • the connecting element 34a and / or 34b can be designed to allow tilting and therefore rotational movement between the cover 23 of the beam deflecting device 18 relative to the housing 22 and, for example, be formed as a hinge or roller bearing.
  • the beam deflector 18 may form or be part of a cover of the housing.
  • One of the beam redirecting surfaces of the beam deflector 18 may be an outer edge of the housing.
  • the beam deflecting device 18 has a first position and closes the housing 22 partially or completely.
  • the beam deflection device 18 may have a reflective area for deflecting the beam path 17 and having contact areas which are designed to form a mechanical contact with the housing 22 in its first position.
  • the camera may not be visible or barely visible when not in use.
  • Fig. 2b shows a schematic side sectional view of the device 20 in a second operating state.
  • the beam deflection device 18 can be rotationally moved relative to the housing 22, ie, be unfolded, so that the housing volume 24 is opened.
  • the rotational tilting permits an inclined or tilted orientation of the beam deflection device 18 with respect to a path of the beam path 17 of the optical channels 16 between the image sensor 12 and the beam deflection device 18, so that the beam path 17 is deflected at the beam deflection device 18 in a first direction 19a.
  • Fig. 2c shows a schematic side sectional view of the device 20 in a third position.
  • the device 20 may have the second operating state.
  • the beam deflection device 18 can redirect the beam path 17 of the optical channels 16 in another direction 19b so that another field of view or a field of view positioned at another location can be detected.
  • it may be a first side and an opposite side, such as front and back, left and right or top and bottom of the device 20 and / or a user, in which the beam path 17 is deflected.
  • the connecting elements 34a and 34b may, for example, be connected to a frame structure and the beam deflection device 18 so that the beam deflection device 18 can alternately have the second or third position.
  • Fig. 3a shows a schematic side sectional view of a device 30 according to another embodiment in the first operating state.
  • the device 30 has an at least partially transparent cover 36 which is disposed between an outer edge 23 of the housing 22 and the multi-aperture imaging device 11.
  • the at least partially transparent cover is connected to the beam deflector 18 and configured to move based on movement of the beam deflector 18.
  • the at least partially transparent cover 36 may have, for example, polymeric and / or glass materials.
  • u. a Provided devices that allow encapsulation of the optics to prevent contamination with the possibility of changing the encapsulated volume (movable coverslips).
  • Fig. 3b shows a schematic side sectional view of the device 30 in the second operating state.
  • the at least partially transparent cover is at least partially moved out of the housing volume 24. This can be done by a rotational movement of the beam deflecting device about the connecting element 34.
  • the beam deflection device 18 is designed to deflect the beam path 17 of the optical channels 16 in such a way that the optical channels run through the at least partially transparent cover.
  • the cover 36 is configured to reduce or prevent entry of particles, dirt and / or moisture into the housing volume 24.
  • the cover 36 may be formed transparent to the beam paths 17 and / or be partially opaque. For example.
  • the cover 36 may be opaque to certain wavelength ranges of electromagnetic radiation.
  • Fig. 3c shows a schematic side sectional view of the device 30, wherein the beam deflector 18 with an optional actuator 38 translationally along a Direction y perpendicular to a direction x of the beam path 17 between the image sensor 12 and the optical channels 16 and perpendicular to a direction z perpendicular to a line extension direction of the array of optical channels 16 is movable.
  • the beam deflecting device 18 may also be translationally moved about the connecting element 34 based on the rotational movement, for example via a guide, a lever or the like.
  • the unfolding (rotational movement) can be done manually or by using an actuator.
  • the optional actuator 38 may be disposed on the beam deflector 18. Alternatively, the actuator 38 may be disposed between the housing 22 and the beam deflecting device 18.
  • the actuator 38 may, for example, be arranged between the housing 22 and the connecting element 34a and / or between the connecting element 34a and the beam deflecting device 18.
  • the advantage of this is that, due to the translational movement of the beam deflecting device along the x-direction, the housing can be reduced by the housing 22 by shading the field of view to be detected.
  • Fig. 4a shows a schematic side sectional view of a device 40 according to an embodiment in the first operating state.
  • the beam deflector 18 is disposed in the first position within the housing volume of the housing 22 and configured to be moved from the first position to the second position based on a translational movement 42, which is schematically illustrated in FIG Fig. 4b is shown.
  • the housing may include the cover 32, which closes the housing 22 or an opening therein in the first operating state.
  • the beam deflection device 18 In the first operating state, the beam deflection device 18 may be oriented such that it has a minimal extent perpendicular to a direction x defined by the optical beam path within the housing 22.
  • Fig. 4b shows a schematic side sectional view of the device 40 in the second operating state.
  • the beam deflecting device is moved out of the housing volume 24 along the x-direction based on the translational movement 42, for example.
  • the beam deflecting device 18 can be moved through the opening 28.
  • the beam deflection device 18 can be rotationally movable about a rotation axis 44.
  • the beam deflecting device 18 can perform a rotational movement about the axis of rotation 44.
  • An angular orientation of the Strahlumschü can compared to the first operating state Fig.
  • a rotational movement 46 about the axis of rotation 44 allows a variable inclination of the beam deflection 18 relative to the beam path 17 between the optical channels 16 and the beam deflecting device 18 and thus a variable direction in which the beam path 17 of the optical channels 16 is deflected.
  • the optical channels 16 may include optics 64a-b.
  • optics 64a-b of the optical channels 16 and / or the image sensor 12 may be arranged outside the housing volume 24 in the second operating state.
  • the optics 64a-b of the optical channels 16 and / or the image sensor 12 may be moved together with the beam deflection device 18, for example in a translatory manner. This allows a small to minimal distance between the optics 64a-b of the optical channels and the beam deflector 18, in particular in the second operating state. The small distance allows a small surface area of the beam deflection device 18. An increasing distance would require a larger area of the beam deflection device 18 and to achieve the same imaging parameters a greater distance of the optical channels in order to completely redirect the beam path of the optical channels 16.
  • the beam deflecting device 18 may have a small area, which is advantageous because in particular a minimum extent in the y-direction perpendicular to the x-direction is achieved in the viewing plane and because a smaller component must be moved and by a Rotational movement, a thickness of the device must be low or not increased compared to a state in which the beam deflecting device 18 is not arranged.
  • the small size also has an advantageous effect for a space requirement, for example in the first or second operating state.
  • multi-aperture linear channel array cameras include a plurality of optical channels arranged side by side, each transmitting parts of the total field of view.
  • a mirror is mounted in front of the imaging lenses, which can be used for beam deflection and contributes to reducing the height.
  • a channel-wise adjusted mirror such as a facet mirror, wherein the facets are flat or arbitrarily curved or provided with a free-form surface, it is advantageously possible that the imaging optics of the optical channels are constructed substantially identical, whereas the viewing direction of the channels through the individual facets of the mirror array are given.
  • a surface of the beam deflection device is at least reflective to the optical channels associated Mirrored facets.
  • the deflection mirror can be rotatably mounted, wherein the rotation axis, for example. Parallel to the extension direction of the channels.
  • the deflection mirror can be reflective on both sides, whereby metallic or dielectric layers (to follow) can be used.
  • the rotation of the mirror can be analog or bistable or multiple stable.
  • the beam deflection device can be movable between at least a first position and a second position, wherein the beam paths are deflected in each position in different directions from each other.
  • the beam deflecting device can also be moved about an axis of rotation.
  • parts or all additional components of the multi-aperture imaging device can be moved in the same direction in translation, with identical or different travel paths being possible.
  • Fig. 5a shows a schematic side sectional view of a device 50 in which the cover 32 is arranged rotatably movable via a moving member 34 on a housing side 22b of the housing 22.
  • the beam deflecting device 18 may be mechanically connected to a carriage 47.
  • the carriage 47 can be understood as a mechanical transport device for moving at least the beam deflecting device 18.
  • the device 50 may comprise an actuator 33 which is designed to translate the carriage 47.
  • the actuator may comprise any desired drive, such as a stepping motor, a piezoelectric drive or a plunger drive.
  • the device 50 may include an actuator 33 'configured to release a mechanical latch 35 that locks the cover 32 and the housing to at least one housing side 22a. For example.
  • the beam deflection device or the travel carriage 47 can be moved out of the housing by means of a spring force when the lock 33 'is released. That is, the latch 35 may be configured to hold the beam deflector 18 in the first position.
  • the carriage 47 may also be arranged in device 40. This means that the carriage 47 can also be used in a translatory movement of the cover 32.
  • Fig. 5b shows a schematic side sectional view of the device 50 in which the carriage 47 along the translational movement direction 42 is moved, so that the beam deflector 18 is moved out of the housing volume 24.
  • the image sensor 12 and / or optics of the optical channels 16 may also be mechanically connected to the carriage 47 and mitbewegbar with the beam deflector 18 to an equal extent.
  • the image sensor 12 and / or the optics of the optical channels 16 may be movable to a lesser extent than the beam deflector 18, such that a distance between the image sensor 12, the optics, and / or beam deflector 18 is increased during retraction.
  • the image sensor 12 and / or the optics of the optical channels can be arranged in a stationary manner with respect to the housing, so that only the beam deflection device 18 is moved by means of the movement carriage 47.
  • An increasing distance between the image sensor 12, the optics and / or beam deflector 18 during a retraction allows a small distance of the components in the first operating state, so that the multi-aperture imaging device can be accommodated in the housing 22 with a small space requirement.
  • Fig. 5c shows a schematic side sectional view of the device 50 in the second operating state.
  • the beam deflecting device may be mounted rotatably in order to carry out the rotational movement 46, as described, for example, for the device 40.
  • the angular orientation of the beam deflector 18 can be compared with the first operating state Fig. 5a or the state in Fig. 5b may be changed such that the area of the beam deflection unit used by the beam path of the multi-aperture imaging device increases compared to the first operating state.
  • a side of the beam deflection device 18 facing the optical channels 16 or the image sensor 12 may have a dimension B perpendicular to the translational movement direction 42, for example along the y-direction, which is greater than a dimension A of the image sensor 12 or the optical Channels 16 along this direction.
  • the dimension B is, for example, perpendicular to a row extension direction of the array and parallel to a surface of an image sensor hit by the optical channels. This can cause a high degree of light from the Stahlumlenk issued 18 is deflected and a brightness of an image to be detected is high.
  • the dimension or dimension B is smaller than in the in Fig. 5c shown position or a position in which the beam deflecting device 18 directs the beam path in a different viewing direction.
  • Fig. 6a shows a schematic side sectional view of a device 60 according to an embodiment in the first operating state.
  • the beam deflecting device 18 has the first position.
  • the device 50 at least partially transparent covers 36a and 36b, which are connected to the cover 32 and with this along the translational movement direction 42 are movable.
  • the at least partially transparent covers 36a and 36b may each be disposed on mutually different sides of the beam deflecting device 18 between the same and the housing 22.
  • the covers 36a and 36b may be partially or completely disposed within the housing volume 24.
  • the covers 36a and 36b may, for example, at the in the Fig. 5a-c arranged traverse carriage 47 or be transparent areas of the carriage 47.
  • Fig. 6b shows a schematic side sectional view of the device 60, in which the beam deflecting device 18 has an intermediate position between the first position and the second position.
  • the intermediate position of the beam deflecting device can be obtained during retraction or extension of the beam deflecting device 18 into the housing volume 24 or out of the housing volume 24.
  • the beam deflecting device 18 is partially moved out of the housing volume 24.
  • Fig. 6c shows a schematic side sectional view of the device 60, in which the beam deflecting device 18 has the second position, that is, the beam deflecting device 18 is, for example, completely moved out of the housing volume 24.
  • the at least partially transparent covers 36a and 36b have a distance 48 from each other which is smaller than a comparable distance between side surfaces of the housing 22a and 22b.
  • FIG. 12 shows a schematic side sectional view of the device 60, in which a distance of the at least partially transparent covers 36a and 36b compared to FIGS Fig. 6a-c is enlarged.
  • the at least partially transparent covers 36a and / or 36b may be movable along a translational movement direction 52a or 52b facing away from the other at least partially transparent cover 36a or 36b, for example along a positive or negative y-direction.
  • the in the Fig. 6a-c illustrated state of the at least partially transparent covers 36a and 36b can be understood as a retracted or collapsed state.
  • the 6d shown state can be understood as extended or unfolded state in which a distance 48 'between the at least partially transparent covers 36a and 36b relative to the distance 48 changed, for example, is increased.
  • the distance 48 ' may, for example, be greater than or equal to the distance between the comparable sides of the housing 22.
  • the beam deflection device 18 is designed to deflect the optical paths of the optical channels so that they pass through the at least partially transparent covers 36a and / or 36b run. As related to Fig. 4b .
  • Fig. 5a and Fig. 5b is described, the angular orientation of the beam deflector 18 can be compared with the first operating state Fig. 6a or the state in Fig.
  • the increased distance 48 ' may alternatively or additionally allow for an increased perimeter of the rotary motion 46.
  • the beam deflection device 18 can be switchable between at least one first and one further position, wherein each position can be assigned to a viewing direction of the multi-aperture imaging device.
  • the rotation of the mirror can be analog or bistable or multiple stable.
  • the rotational movement 46 for changing a viewing direction of the multi-aperture imaging device can be combined with a rotational movement of the beam deflection device 18 for optical image stabilization, which in connection with Fig. 12 is described.
  • the covers 36a and / or 36b may encapsulate the other components of the multi-aperture imaging device.
  • the oppositely arranged covers 36a and / or 36b or transparent regions thereof can have a switchable diaphragm, so that the switchable diaphragm is, for example, introduced above and / or below or along any other direction of the beam deflection device.
  • the aperture can be switched according to the operating status and direction of the camera. For example. For example, an unused viewing direction of the multi-aperture imaging device can be at least partially closed by the diaphragm in order to reduce entry of stray light.
  • the aperture can z. B. be mechanically moved or electrochromic.
  • the areas affected by the diaphragm can additionally be equipped with a switchable diaphragm which covers the optical structure in the event of non-use.
  • the aperture may be electrically controllable and comprise an electro-chrome layer (sequence).
  • the diaphragm may comprise a mechanically moved part. The movement can be made using pneumatic, hydraulic, piezoelectric actuators, DC motors, stepper motors, thermal actuators, electrostatic Actuators, electrostrictive and / or magnetostrictive actuators or drives take place.
  • the diaphragm In a state of the multi-aperture imaging apparatus in which the viewing direction penetrates a diaphragm, the diaphragm can be switched so as to transmit the optical paths of the optical channels. That is, the multi-aperture imaging device may have a first operating state and a second operating state.
  • the beam deflection device can deflect the optical path of the optical channels in the first operating state so that it passes through a first transparent region of the cover 36a.
  • the beam path of the optical channels can be deflected so that it passes through a second transparent region of the cover 36b.
  • a first aperture 53a may be formed to optically at least partially close the first transparent region in the second operating state.
  • a second diaphragm 53b may be formed to at least partially close the second transparent region optically temporarily in the first operating state.
  • the first and / or second aperture 53a-b may be effective for at least one, at least two or all of the optical channels.
  • at least one, at least two or all of the optical channels of the multi-aperture imaging device may pass through the first aperture when the optical path of the optical channels is directed through the first transparent region and through the second aperture when the optical channel of the optical channels is directed through the second transparent region becomes.
  • Fig. 7 shows a schematic perspective view of a device 70 according to an embodiment, the three multi-aperture imaging devices 11a-c has.
  • the multi-aperture imaging devices 11a-c may be translatable along a respective translational movement direction 42a-c.
  • the multi-aperture imaging devices 11a-c may be disposed in minor sides 22c-f of the housing 22.
  • the housing may be formed flat, that is, a first extension of the housing 22 along a first housing direction, for example an x-direction, and a second extension of the housing 22 along a second housing direction, eg a z-direction, may be at least one threefold dimension, at least five times or at least seven times the size of a third dimension of the housing 22 along a third housing direction, such as the y-direction.
  • a main side 22a and / or 22b of the housing 22 may have the first and the second dimension and be arranged, for example, parallel to an x / z plane in space.
  • the minor sides 22c-f may connect the main sides 22a and 22b.
  • the multi-aperture imaging devices 11a and 11b may be disposed in or on the same side 22d in the housing 22 and may, for example, have a base distance BA from each other, such as for the purpose of stereoscopy. More than two modules would also be conceivable.
  • the total visual field may be detected stereoscopically or higher by using the multi-aperture imaging device 11c and at least one other multi-aperture imaging device 11a and / or 11b.
  • the multi-aperture imaging devices 11a, 11b and / or 11c may be individually movable. Alternatively, two or more of the modules may also be movable together as a whole system.
  • the device 70 may be designed to detect an overall visual field at least stereoscopically.
  • the total field of view is, for example, arranged on one of the main sides 22a or 22b, but may also be arranged on a side 22c-f.
  • the multi-aperture imaging devices 11a-c may each capture the total field of view.
  • the multi-aperture imaging devices 11a-c are shown spatially spaced from one another, the multi-aperture imaging devices 11a, 11b and / or 11c may also be spatially adjacent or combined.
  • the arrays of the imaging devices 11a and 11b, which may be formed in one line, may be arranged next to one another or parallel to one another, as may be associated with, for example Fig.
  • the arrays may form rows with each other, with each multi-aperture imaging device 11a and 11b having a single row array.
  • the imaging devices 11a and 11b may comprise a common beam deflection device and / or a common carrier of optics of the optical channels and / or a common image sensor.
  • Fig. 8 shows an enlarged perspective view of a section of the device 70 and the multi-aperture imaging devices 11a and 11b.
  • the device 70 has the second operating state.
  • the multi-aperture imaging device 11a and / or 11b protrudes beyond the original case side.
  • the beam deflection devices 18a and 18b are at least partially moved outside the housing volume based on the translational movement directions 42a and 42b.
  • only part of the beam deflection devices of the multi-aperture imaging devices 11a-c may also be moved out of the housing volume of the housing 22.
  • the multi-aperture imaging devices 11a-b have, for example, four optical channels 16a-d and 16e-h, respectively.
  • the beam deflectors 18a and 18b are each designed to deflect the optical paths 17a-d and 17e-h of the optical channels 16a-d and 17e-h, respectively.
  • other multi-aperture imaging devices may have a different number of optical channels than each other.
  • the multi-aperture imaging devices 11a-b may have the same or a different number of optical channels.
  • the multi-aperture imaging devices 11a and 11b have illumination devices 54a and 54b and 54c and 54d, respectively.
  • the illumination devices 54a-d are designed to at least partially illuminate the total field of view to be detected and may, for example, each be designed to illuminate a center of the total field of view (object area) to be detected.
  • at least one of the illumination devices 54a or 54b or 54c or 54d may be arranged to illuminate the total field of view along a central viewing direction of the optical channels 16a-d or 16e-h.
  • the total field of view may comprise different partial fields of view, each detected by at least one optical channel 16a-d or 16e-h.
  • a mean viewing direction of optical channels 16a-d or 16e-h may, for example, be a geometric mean of the viewing directions or a median value of the viewing directions.
  • the illumination devices 54a-b and 54c-d may be operated as a flash of the respective multi-aperture imaging device 11a or 11b and may comprise any light source.
  • the light source may, for example, be designed as a light-emitting diode (LED), since these have a low space requirement and a low energy requirement.
  • a multi-aperture imaging device may include none, one or more than two illumination devices 54a-d, wherein the number of illumination devices 54a-d of a multi-aperture imaging device may be different or equal to other multi-aperture imaging devices of a device. At least one of the illumination devices 54a-d may be configured to illuminate a plurality of object areas.
  • the illumination device can emit light along at least two viewing directions of the multi-aperture imaging device.
  • the illumination device may comprise at least two light sources.
  • the light sources can emit light in opposite sides of the device.
  • a light source on a top and a bottom, a front and a back and / or a left and right side of the carriage 47 may be mounted, in each case only the light source (s) of the page are used, corresponding to the male object area the selected orientation and thus the operating state of the beam deflecting device 18 is opposite and emits light in its direction.
  • light sources 54i can be arranged on the front and rear side of the movement carriage 47b and, depending on the position of the beam deflection device 18b, corresponding light sources can be used. The other, opposite light sources can remain unused.
  • the illumination devices 54a and 54b are arranged between the beam deflection device 18a and the image sensor 12a of the multi-aperture imaging device 11a.
  • the beam deflection device 18 can be designed to deflect an illumination radiation emitted by the illumination device 54a and / or 54b, for example a flashlight.
  • the illumination devices 54a-b can be arranged in the first operating state and in the second operating state of the device 70 within the housing volume.
  • the illumination radiation can be at least partially Be part of the beam paths 17a-d.
  • a lighting device 54c and / or 54d can be arranged laterally next to the beam deflection device on the carriage 47b.
  • the illumination devices 54c and 54d can be moved into the housing 22 or out of the housing 22 with the translatory movement 42b.
  • the illumination device is described in the context of the device 70, other devices or multi-aperture imaging devices described herein may also include a lighting device.
  • the lighting devices 54c and 54d may be mechanically connected to the carriage 47a and thus arranged in the first operating state within the volume 24 and thus be arranged invisible to a user.
  • the illumination devices 54a and 54b may alternatively and / or additionally be arranged stationary in the housing 22. Movement of the carriage 47b may cause movement of the illuminators 54c and 54d.
  • Optics 16a-d or 16e-f and optionally the image sensor 12a or 12b can also be moved out of the housing volume by the movement of the movement carriage 47a or 47b together with the beam deflection device 18a or 18b.
  • LEDs may be mounted on the moving parts for the realization of additional lighting (flash).
  • the LEDs can be mounted so that they radiate in the central direction of the channels or the Strahlumauch Anlagenen hold other areas, which is used to deflect the radiation.
  • Fig. 9 shows a schematic perspective view of a device 90 according to an embodiment having the second operating state.
  • the beam deflector 18 may be connected to the multi-aperture imaging device by means of fasteners 56a and 56b.
  • the fasteners 56a and 56b may be part of a carriage.
  • Fig. 10a shows a schematic perspective view of a device 100 according to an embodiment in the first operating state.
  • the cover 32 can form a plane with a housing main side and / or a housing side, for example the housing side 22c. Between the cover 32 and the housing side 22c can no gap or only a small gap, such as less than or equal to 1 mm, less than or equal to 0.5 mm or less or equal to 0.1 mm may be arranged so that a transition between the cover 32 and the housing side 22c is not or hardly noticeable , In simple terms, the cover 32 may not be visible.
  • Fig. 10b shows a schematic view of the device 100 in the second operating state.
  • the beam deflecting device 18 has the second position outside the housing volume. Viewed from the outside, the extended multi-aperture imaging device can be enclosed on all sides by the stationary housing frame and / or can have the appearance of a button.
  • the device 100 may be configured to move in accordance with a mechanical pressure on the cover 32.
  • Fig. 10a to release a mechanical lock, so that the beam deflecting device is movable out of the housing 22, for example based on a spring force.
  • the mechanical pressure can be generated, for example, by an actuator and / or by a user, for example by a finger pressure.
  • the beam deflecting means by means of the actuator or by means of the mechanical pressure can be moved back into the first position and actuate a lock there.
  • the actuator may be, for example, the actuator 33 or 33 '.
  • the movement can also take place manually, so that the user moves in or out of the parts or the entire system with his own force or folds in or out.
  • the movement may be a combination of manual operation and the action of spring force.
  • the user manually folds or pushes parts or the entire system for switching off the camera into the housing of the device, such as a smartphone, while tensioning a spring and a locking mechanism holds this position.
  • the switchable locking mechanism by a suitable controllable mechanism, such as an electric relay, solved and the spring force of the spring causes the extension or unfolding of the parts of the camera or the entire system.
  • the cover which forms part of the housing, the extendable and / or tiltable part and / or another mechanism thereto can be formed so that a (finger) pressure on this cover solves the lock, the parts or else move out or fold out the entire system and, if necessary, start the image acquisition software on the device.
  • Fig. 10c shows a schematic representation of an alternative to Fig. 10a in which the cover 32 is formed such that a main gap is formed between major sides of the housing 22 in the minor side 22c. This allows only two instead of four in Fig. 10a columns shown in the housing 22 are perceptible.
  • the extendable or foldable cover 32 and / or other covers may be formed as part (s) of the housing 22 on one or more edge sides of the flat housing.
  • FIG. 11a-c show a multi-aperture imaging device 11 according to an embodiment of the present application.
  • the multi-aperture imaging device 11 of FIG Fig. 11a-c includes a single-row array 14 of juxtaposed optical channels 16a-d.
  • Each optical channel 16a-d comprises an optical system 64a-d for imaging a respective partial field of view 74a-d of a total field of view 72 of the device 11 onto a respectively assigned image sensor region 58a-d of an image sensor 12.
  • the image sensor regions 58a-d may be formed from one chip, for example be comprising a corresponding pixel array, the chips as in the Fig. 11a-c indicated, may be mounted on a common substrate or a common board 62.
  • the image sensor regions 58a-d may be formed from a part of a common pixel array which extends continuously over the image sensor regions 58a-d, wherein the common pixel array is formed, for example, on a single chip. For example, only the pixel values of the common pixel array in the image sensor areas 58a-d are then read out.
  • various mixtures of these alternatives are also possible, such as the presence of a chip for two or more channels and another chip for other channels or the like.
  • a plurality of chips of the image sensor 12 for example, they may be mounted on one or more boards, such as all together or in groups, or the like.
  • Fig. 11a-c For example, four optical channels 16a-d are arranged side by side in line extension direction of the array 14, but the number four is merely exemplary and could be any other number greater than one.
  • the array 14 may also have further rows extending along the row extension direction.
  • Optical axes or the beam paths 17a-d of the optical channels 16a-d extend parallel to one another between the image sensor regions 58a-d and the optics 64a-d.
  • the image sensor areas 58a-d are arranged, for example, in a common plane and also the optical centers of the optics 64a-d. Both planes are parallel to each other, i. parallel to the common plane of the image sensor areas 58a-d.
  • optical centers of the optics 64a-d coincide with centers of the image sensor areas 58a-d.
  • the optics 64a-d on the one hand and the image sensor areas 58a-d are arranged at the same repetition distance in the row extension direction.
  • An image-side distance between image sensor areas 58a-d and the associated optics 64a-d is set such that the images on the image sensor areas 58a-d are set to a desired object distance.
  • the distance is, for example, in a range equal to or greater than the focal length of the optics 64a-d or, for example, in a range between a single and a two times the focal length of the optics 64a-d, both inclusive.
  • the image-side distance along the optical axis 17a-d between image sensor area 58a-d and optics 64a-d may also be adjustable, e.g. manually by a user or automatically via autofocus control.
  • the partial fields 74a-d of the optical channels 16a-d substantially completely overlap due to the parallelism of the optical paths or optical axes 17a-d.
  • the beam deflecting device 18 is provided to cover a larger total field of view 72 and thus the partial field of view 74a-d only partially overlap spatially.
  • the beam deflection device 18 deflects the beam paths 17a-d or optical axes into a total field of view direction 76 with a channel-specific deviation.
  • the total field of view direction 76 runs, for example, parallel to a plane which is perpendicular to the line extension direction of the array 14 and parallel to the course of the optical axes 17a-d before or without beam deflection.
  • the total field of view direction 76 of the optical axes 17a-d is rotated by the line extension direction by an angle that is> 0 ° and ⁇ 180 °, for example, between 80 and 100 ° and may be 90 °, for example.
  • the total field of view of the device 11, which corresponds to the total coverage of the partial field of view 74a-d, thus does not lie in the direction of an extension of the series connection of the image sensor 12 and the array 14 in the direction the optical axes 17a-d, but by the beam deflection is the total field of view lateral to the image sensor 12 and array 14 in a direction in which the height of the device 11 is measured, that is, the lateral direction perpendicular to the line extension direction.
  • the beam deflection device 18 deflects each beam path or the beam path of each optical channel 16a-d with a channel-specific deviation from the just-mentioned deflection leading to the direction 76.
  • the beam deflection device 18 comprises a reflective facet 68a-d for each channel 16a-d. These are slightly inclined to each other. The mutual tilting of the facets 68a-d is selected such that, when beam deflection by the beam deflecting device 18, the partial fields of view 74a-d are provided with a slight divergence such that the partial fields 74a-d only partially overlap. It can, as exemplarily in Fig. 11a is indicated, the individual deflection may also be designed such that the partial field of view 74a-d cover the total field of view 72 two-dimensionally, that are distributed two-dimensionally in the total field of view 72.
  • the beam deflector 18 may also be formed differently than previously described.
  • the beam deflector 18 does not necessarily have a reflective effect. It may therefore also be embodied differently than in the form of a facet mirror, such as e.g. in the form of transparent prism wedges.
  • the mean beam deflection could be 0 °, i. the direction 76 could, for example, be parallel to the beam paths 17a-d before or without beam deflection or, in other words, the device 11 could defy beam deflection device 18 "continue to look straight ahead".
  • the channel-specific redirecting by the beam redirector 18 would again cause the sub-field of view 74a-d to overlap only slightly with each other, such as e.g. in pairs with an overlap ⁇ 10% based on the solid angle ranges of the partial field of view 74a-d.
  • the beam deflector 18 provides the beam paths with an additional divergence such that the partial fields of view of N optical channels 16a-N overlap less than one another.
  • the beam deflection device 18 ensures that the total field of view has an opening angle that is greater than 1.5 times the aperture angle of the individual partial fields of view of the optical channels 16a-N.
  • the beam paths 17a-d With a kind of pre-divergence of the beam paths 17a-d, it would also be possible that, for example, not all facet inclinations differ, but that some groups of channels have, for example, the facets with the same inclination. The latter can then be formed in one piece or continuously merging, as a kind of facet, which is assigned to this group of channels adjacent in the line extension direction.
  • the divergence of the optical axes of these channels could then be due to the divergence of these optical axes, as achieved by lateral offset between optical centers of the optics and image sensor areas of the channels or prismatic structures or decentered lens cutouts.
  • the advance divergence might be limited to one level.
  • optical axes could, for example, run before or without beam deflection in a common plane, but divergent in this, and the facets only cause only an additional divergence in the other transverse plane, ie they are all parallel to the line extension direction and only different from the aforementioned tilted common plane of the optical axes, in which case again several facets may have the same inclination or could be assigned to a group of channels together whose optical axes, for example, already in the aforementioned common plane of the optical axes in pairs before or without beam deflection differ.
  • the total divergence could also be achieved by the lateral offset between optical centers of the optics on the one hand and centers of the image sensor areas on the other hand or by prism structures or decentered lens cutouts.
  • the mentioned potential pre-divergence may be achieved by having the optical centers of the optics in a straight line along the line extension direction, while the centers of the image sensor areas from the projection of the optical centers along the normal of the plane of the image sensor areas to points on a straight line are arranged differently in the image sensor plane, such as on Points that deviate from the points on the above-mentioned straight line in the image sensor plane channel-individually along the line extension direction and / or along the direction perpendicular to both the line extension direction and the image sensor normal.
  • pre-divergence can be achieved by having the centers of the image sensors in a straight line along the line extension direction, while the centers of the optics from the projection of the optical centers of the image sensors along the normal of the plane of the optical centers of the optics to points on a straight line in the optical center plane are arranged differently, such as at points that differ from the points on the above-mentioned straight line in the optical center plane channel individually along the line extension direction and / or along the direction perpendicular to both the line extension direction and the normal of the optical center plane. It is preferred if the aforesaid channel-individual deviation from the respective projection runs only in the line extension direction, that is to say the optical axes are provided only in a common plane with a preliminary divergence.
  • Both optical centers and image sensor area centers are then each on a straight line parallel to the line extension direction, but with different spacings.
  • a lateral offset between lenses and image sensors in a vertical lateral direction to the line extension direction led to an increase in the overall height.
  • a purely in-plane offset in the line extension direction does not change the height, but possibly less facets result and / or the facets have only a tilt in an angular orientation, which simplifies the structure.
  • Fig. 11d and 11e Exemplary illustrated in the case of the supported on a common support optics in which the adjacent channels 16a and 16b on the one hand and the adjacent channels 16c and 16d on the other hand in the common plane extending, respectively against each other squinting, so provided with an advance divergence, optical axes 17a and 17b and 17c and 17d, respectively.
  • the facets 68a and 68b may be formed by one facet
  • the facets 68c and 68d may be formed by another facet, as shown by dashed lines between the respective pairs of facets, and the single two facets are inclined in one direction only and both parallel to the row extension direction. It is also possible that individual facets have only a tilt in a spatial direction.
  • optical channels are assigned to the same partial field of view, for example for the purpose of superresolution or for increasing the resolution with which the corresponding partial field of view is scanned by these channels.
  • the optical channels within such a group would then be parallel, for example, before beam deflection and would be redirected by a facet to a partial field of view.
  • pixel images of the image sensor of one channel of a group are located in intermediate positions between images of the pixels of the image sensor of another channel of that group.
  • the multi-aperture imaging device may include a first plurality of optical channels configured to capture a total field of view, possibly complete.
  • a second plurality of optical channels of the multi-aperture imaging device may be configured to also and possibly completely capture the total field of view. The total field of view can thus be detected at least stereoscopically by the first plurality of optical channels and by the second plurality of optical channels.
  • the first plurality of optical channels and the second plurality of optical channels can hit a common image sensor, use a common array (array optics) and / or be redirected by a common beam deflection device.
  • a contiguous array camera is formed which is collectively controllable as one device, for example with respect to focus and / or image stabilization, which is advantageous because all channels are affected simultaneously using the same actuators become.
  • advantages arise from the monolithic construction with regard to the mechanical stability of the overall arrangement, in particular in the case of temperature changes. This is advantageous for composition of the overall image from the sub-images of the individual channels as well as for obtaining three-dimensional object data when used in stereo, triple, quattro, etc. systems with multiple sampling of the total field of view by different pluralities of channels 16.
  • the following discussion deals with the optics 64a-d, whose lens planes are also parallel to the common plane of the image sensor areas 58a-d.
  • lenses of the optics 64a-d of the optical channels 16a-d are attached to a main side 66a of the substrate 66 via one or more lens holders and mechanically interconnected via the substrate 66.
  • the beam paths 17a-d of the plurality of optical channels 16a-d pass through the substrate 66.
  • the substrate 66 is thus formed at least partially from transparent material and is plate-shaped or has, for example, the shape of a parallelepiped or another convex body with a planar main side 66a and an opposite, also planar main page 66b.
  • the main sides are preferably positioned perpendicular to the beam paths 17a-d.
  • there may be deviations from the pure parallelepiped shape which are due to an integral with the substrate molding of lenses of the optics.
  • the flat support substrate 66 is a glass or polymer substrate.
  • the carrier substrate 66 may comprise a glass plate.
  • the material of the substrate 66 may be selected from the standpoints of high optical transparency and low temperature coefficient or other mechanical properties such as hardness, modulus of elasticity or torsion.
  • the substrate 66 may be formed as a simple planar part of the beam path without any additional lenses being directly mounted thereon. Additionally, apertures, such as e.g. Aperture or false-aperture, or / and filter layers, such. IR block filter may be mounted on the substrate surfaces or consist of several layers of different substrates, on the surfaces of which aperture and filter layers may be attached, which in turn channel by channel e.g. can differ in their spectral absorption.
  • apertures such as e.g. Aperture or false-aperture, or / and filter layers, such.
  • IR block filter may be mounted on the substrate surfaces or consist of several layers of different substrates, on the surfaces of which aperture and filter layers may be attached, which in turn channel by channel e.g. can differ in their spectral absorption.
  • the substrate 66 may be made of material that has different properties in different regions of the electromagnetic spectrum that can be detected by the image sensor, in particular a non-constant absorption.
  • Each optic 64a-d comprises three lenses.
  • the number of lenses is however freely selectable. The number could be 1, 2 or any other number.
  • the lenses may be convex, having only one optically imaging functional surface, such as a spherical, an aspherical, a freeform surface, or two, such as two opposing ones, for example a convex one or to give a concave lens shape. Also, several optically effective lens surfaces are possible, such as by building a lens of several materials.
  • a first lens 78a-d of each optical channel 16a-d or optics is in the embodiment of FIG Fig. 11a-c formed on the main side 66a.
  • the lenses 78a-d have been formed by molding on the major side 66a of the substrate 66 and are made of, for example, polymer such as UV-curable polymer.
  • the impression takes place, for example, by means of an impression tool, and the curing can take place, for example, via temperature and / or UV irradiation.
  • Each optic 64a-d has another second and third lens 82a-d and 84a-d, respectively.
  • These lenses are exemplarily fixed via axially extending tubular lens holders 86a-d mutually in the interior of the respective lens holder and fixed on the latter on the main side 66b, such as by gluing or another joining technique. Openings 88a-d of the lens holders 86a-d are provided, for example, with a circular cross-section, in the cylindrical inner side of which the lenses 82a-d and 84a-d are attached.
  • the lenses lie coaxially on the respective optical axis of the beam paths 17a-d.
  • the lens holders 86a-d may, however, also have a cross-section which varies along their length or along the respective optical axes.
  • the cross section with decreasing distance to the image sensor 12 may have increasingly rectangular or square character.
  • the outer shape of the lens holder can thus also differ from the shape of the openings.
  • the material of the lens holder may be light-absorbing. According to the previously related to the Figures 11d and 11e described squinting lenses, the lens holder may not be rotationally symmetric and / or not coaxial pronounced.
  • the attachment via the above-mentioned lens holder is done, for example, so that lens vertices of the lenses held by the same are spaced from the substrate 66.
  • the substrate 66 is planar on both sides and thus has no refractive power.
  • the substrate 66 it would also be possible for the substrate 66 to have mechanical structures, such as, for example, recesses or projections, which enable a light, positive and / or non-positive alignment of subsequent components, such as the connection of individual lenses or housing parts.
  • the substrate 66 on the main side 66b could have attachment facilitating or alignment facilitating structures at the positions to which the respective end of the tube of the lens holder 86a-d of the respective optic 64a-d is attached.
  • These structures may be, for example, a circular recess or a recess having another shape corresponding to the shape of a side of the respective lens holder facing the substrate, in which the side of the respective lens holder 84a-d may engage. It should be emphasized once again that other opening cross-sections and thus possibly other Linsenaperturen are possible as circular.
  • Fig. 11a-c thus dissolves from a classic design of camera modules, which have individual lenses and have to support the individual lenses a completely enclosing this, non-transparent housing support. Rather, the above embodiment uses a transparent body 66 as a substrate carrier. This extends over a plurality of adjacent optical channels 16a-d to be penetrated by the imaging beam path. He does not disturb the picture, but he does not increase the height.
  • the substrate 66 does not necessarily extend across all the channels 16a-d of the multi-aperture imaging device 11.
  • any optics 64a-d it would be possible for any optics 64a-d to have lens-mounted lenses on both sides 66a and 66b, as shown in FIG Fig. 11f is shown.
  • Fig. 12 shows by way of example that the multi-aperture imaging device 11 of Fig. 11a-c could be supplemented by one or more of the additional facilities described below.
  • Fig. 12 shows Fig. 12 in that means 92 could be provided to rotate the beam deflector 18 about the axis of rotation 44, which is parallel to the line extension direction of the array 14.
  • the axis of rotation 44 is located, for example, in the plane of the beam paths 17a-d or less than a quarter of a diameter of the optics 64a-d.
  • the axis of rotation it would also be possible for the axis of rotation to be farther away, such as less than one optical diameter or less than four optical diameters.
  • the means 92 may be provided to rotate the beam deflector 18 with a short response time in only a small angular range, such as within a range of less than 1 ° or less 10 ° or less than 20 °, to reduce blurring of the multi-aperture imaging device 11, for example to balance a user during a shot.
  • the device 92 would be driven in this case, for example, by an image stabilization control.
  • the device 92 could be designed to provide, with larger angular displacements, the total field of view represented by the total coverage of the partial fields 74a-d (FIG. Fig. 11a ) is defined to change in its direction.
  • deflections it would also be possible for deflections to be achieved by rotation of the beam deflecting device 18, in which the total field of view is arranged in the opposite direction relative to the device 11, for example by the beam deflecting device 18 being designed as a mirror array reflective on both sides.
  • the device 11 may comprise means 94 for translating the optics 64a-d along the line extension direction by means of the substrate 66 or the substrate 66 itself and thus the optics 64a-d.
  • the device 94 could also be driven, for example, by the aforementioned image stabilization control to achieve image stabilization across the image stabilization by movement 96 along the line extender direction, which is realized by the rotation of the mirror deflector 18. *** "
  • the device 11 may include a means 98 for varying the image-side distance between the image sensor 12 and optics 64a-d and between Image sensor 12 and the carrier 66 to achieve a depth of field adjustment.
  • the device 98 can be controlled by a manual user control or by an autofocus control or focusing device of the device 11.
  • the device 94 thus serves as a suspension of the substrate 66 and is preferably, as in Fig. 12 indicated laterally adjacent to the substrate 66 along the line extension direction so as not to increase the height. It is also true for the devices 92 and 98 that they are preferably arranged in the plane of the optical beam paths so as not to increase the overall height.
  • the device 98 may also be connected to the beam deflector 18 and move it simultaneously or almost simultaneously so that, as the image-side distance between the image sensor 12 and optics 64a-d changes, a distance between the optics 64a-d and the beam deflector 18 substantially constant or constant.
  • the devices 92, 94 and / or 98 may be implemented based on pneumatic, hydraulic, piezoelectric actuators, DC motors, stepper motors, thermal actuators, electrostatic actuators, electrostrictive and / or magnetostrictive actuators or drives.
  • the optics 64a-d may not only be supported with each other, such as over the already mentioned transparent substrate, but also relative to the beam deflecting in a constant relative position, such as a suitable frame, preferably not the height enlarged and therefore preferably in the plane of the components 12, 14 and 18 or in the plane of the beam paths.
  • the constancy of the relative position could be limited to the distance between the optics and the beam deflector along the optical axes, so that the device 98 translates, for example, the optics 64a-d together with the beam deflection device along the optical axes.
  • the optics-to-beam deflector distance could be set to a minimum distance such that the beam path of the channels is not laterally restricted by the segments of the beam deflector 18, which reduces the height, otherwise the segments 68a-d will expand in lateral extent
  • the largest optics-to-beam deflection distance would have to be dimensioned so as not to cut the beam path.
  • the constancy of the relative position of the aforementioned frames could rigidly support the optics and the beam deflector along the x-axis so that the device 94 would translate the optics 64a-d along with the beam deflector along the line extent direction.
  • the above-described beam deflecting device 18 for deflecting the optical path of the optical channels, together with the actuator 92 for generating the rotational motion of the beam deflection device 18 of an optical image stabilization control of the multi-aperture imaging device 11, enables image field stabilization in two dimensions, namely by the translational movement of the substrate 66 Image stabilization along a first image axis, which is substantially parallel to the line extension direction, and by the generation of the rotational movement of the beam deflection 18 image stabilization along a second image axis, which is substantially parallel to the optical axes before or without beam deflection, or - if you look at the deflected optical axes - perpendicular to the optical axes and the line extension direction.
  • the arrangement described may cause a translational movement of the beam deflector fixed in the above-mentioned frame and the array 14 perpendicular to the line extension direction, e.g. by the described actuator 98, which can be used for the realization of a focus adjustment and thus an autofocus function.
  • a relative translatory movement between the image sensor 12 and the array 14 can also be implemented. This relative movement can be provided, for example, by the device 94 and / or the device 98.
  • the device when picked up via the image sensor areas, picks up an image of one scene per channel that has been imaged onto the image sensor areas by the channels and that the device optionally has a processor can, which merges or merges the images into an overall image that corresponds to the scene in the total field of view, and / or provides additional data, such as 3D image data and depth information of the object scene for the creation of depth maps and the software implementation such Refocusing (definition of image areas after shooting), all-in-focus images, Virtual Green Screen (foreground and background separation), etc.
  • the processor could also be an external component to the multi-aperture imaging device.
  • Fig. 13a illustrates that devices 11 of the previously described alternatives may, for example, be incorporated in a flat housing of a portable device 130, such as For example, a mobile phone, a smartphone or media player or the like, then, for example, the planes of the image sensor 12 and the image sensor areas and the lens planes of the optics of the optical channels 16 are aligned perpendicular to the flat direction of extension of the flat housing or parallel to the thickness direction.
  • the beam deflection device 18 would ensure that the total field of view of the multi-aperture imaging device 11 is located in front of a front side 102 of the flat housing, which also has, for example, a screen.
  • a deflection would be possible such that the field of view is located in front of a rear side of the flat housing, which is opposite to the front side 102.
  • the housing 22 of the device 130 or the device itself can be flat, since the illustrated position of the device 11 in the housing, the height of the device 11, which is parallel to the thickness of the housing, can be kept low.
  • Switchability could also be provided by providing a window on the side opposite side 102 and, for example, moving the beam deflector between two positions by, for example, performing the mirror as a front and back mirror and rotating it from one position to another , or as a facet mirror having a set of facets for one position and another set of facets for the other position, the facet sets being juxtaposed in the row extension direction and switched between positions by translational reciprocation of the beam diverter along the line extent direction becomes.
  • modules 11 whose partial fields of view of their channels cover the same field of view completely and optionally even in a congruent manner, can be compared with a base distance BA (cf. Fig. 7 ) to each other along a same line extension direction for both modules in device 130, such as for the purpose of stereoscopy. More than two modules would also be conceivable.
  • the line extension directions of the modules 11 could also not be collinear, but only parallel to each other.
  • a device 11 or a module with channels could also be equipped in such a way that they completely cover the same total field of view in groups.
  • the modules may be arranged in one or more rows / rows or at any position of the apparatus. In an arrangement of several modules, these may be the same or different.
  • a first module may be configured to perform stereoscopic detection of the total field of view.
  • a second module can be designed to perform simple detection, stereoscopic detection or higher order detection.
  • the beam deflecting device could be absent in alternative embodiments compared to the exemplary embodiments described above. If only partial overlap of the partial fields of view is desired, then this could be achieved, for example, by mutual lateral offsets between the center of the image sensor area and the optical center of the optics of the corresponding channel.
  • the actuators according to Fig. 12 could, of course, nevertheless be used, in substitution for the device 92, for example, the actuator 94 in addition to a translational movement of the optics or the carrier 66 in a position.
  • the above exemplary embodiments thus show a multi-aperture imaging device with a single-row array of juxtaposed optical channels, in which extends in the beam path of the multi-aperture imaging device, a substrate extending from the channels, for example, glass or polymer to improve the stability.
  • the substrate may additionally include lenses on the front and / or back.
  • the lenses may be made of the material of the substrate (such as formed by hot stamping) or molded thereon. Before and behind the substrate may be other lenses that are not on substrates and are mounted individually. There may be multiple substrates in a setup, both along and perpendicular to the row extent direction.
  • a substrate which may also be equipped with lenses according to the above examples, that is, inter alia, with lenses which are attached via lens holder to the main sides 66a and / or 66b, but here exemplified as integrally formed by, for example, injection molding or the like in that lenses are formed on the two sides 66a and 66b, as of course also molded lenses of material other than the material of the parallelepiped-shaped substrate 66 would be possible, and lenses on only one of the sides 66a or 66b. Both substrates are transparent and are penetrated by the beam paths, through the Main pages 66a and 66b through.
  • the above exemplary embodiments can therefore be implemented in the form of a multi-aperture imaging device, with a single-line channel arrangement, wherein each channel transmits a partial field of view of an overall visual field and the partial-field fields partially overlap.
  • a construction with several of such multi-aperture imaging devices for stereo trio, quattro, etc. structures for 3D image pickup is possible.
  • the plurality of modules can be embodied as one connected row.
  • the connected line could use identical actuators and a common beam deflecting element.
  • One or more mechanically amplifying substrates which may be present in the beam path may extend over the entire line, which may form a stereo, trio, quattro structure. It can be used methods of superresolution, where multiple channels map the same sub-picture areas.
  • the optical axes can also run without divergent beam deflecting, so that fewer facets are required on the Strahlumschmaschine.
  • the facets then advantageously have only one angular component.
  • the image sensor may be one-piece, having only one contiguous pixel matrix or multiple broken ones.
  • the image sensor can be composed of many partial sensors, which are arranged, for example, on a circuit board next to each other.
  • An autofocus drive, a focusing device can be designed so that the beam deflecting element is moved synchronously with the optics, or is stationary. In the absence of an advance divergence, embodiments provide that the beam paths between the image sensor 12 and the beam deflector 18 are substantially or completely parallel.
  • FIG. 12 shows a schematic structure comprising a first multi-aperture imaging device 11a and a second multi-aperture imaging device 11b, such as may be arranged in the device 130, for example.
  • the two multi-aperture imaging devices 11a and 11b may form a common multi-aperture imaging device 11 and have a common image sensor 12 and / or a common array 14.
  • the single-row arrays 14a and 14b form, for example, a common row in the common array 14.
  • the image sensors 12a and 12b can form the common image sensor 12 and, for example, on a common substrate or on a common circuit carrier such as a common board or a common flexboard be mounted.
  • the image sensors 12a and 12b may also comprise substrates different from each other.
  • various mixtures of these alternatives are also possible, such as multi-aperture imaging devices comprising a common image sensor, a common array, and / or a common beam redirecting device 18 and other multiaperture imaging devices having separate components. It is advantageous on a common image sensor, a common single-row array and / or a common beam deflection device that movement of a respective component can be obtained with great precision by driving a small amount of actuators and synchronization between actuators can be reduced or avoided. Furthermore, high thermal stability can be obtained.
  • further multi-aperture imaging devices can also have a common array, a common image sensor and / or a common beam deflection device.
  • the structure of the multi-aperture imaging device 11 may, for example, be useful for stereoscopic detection of a total or partial field of view when directing optical channels of different sub-multi-aperture imaging devices 11a and 11b to a same partial field of view.
  • other partial multi-aperture imaging devices can be integrated into the common multi-aperture imaging devices, allowing higher order detection compared to stereo.
  • FIG. 12 shows a 3D multi-aperture imaging device 140 as practicable in accordance with embodiments described herein.
  • She owns an image sensor which, like it in Fig. 14 is indicated, may be divided into two components 12 1 and 12 1 , a component 12 1 for the "right" optical channels 16 1 and the other component 12 2 for the "left" channels 16 second
  • the right and left optical channels 16 1 and 16 2 are in the example of FIG Fig. 14 constructed identically, but arranged laterally offset from one another by the base distance BA in order to obtain as much depth information with respect to the scene located in the field of view of the device 140.
  • the 3D multi-aperture imaging device may be formed by two or more multi-aperture imaging devices 11.
  • the elements which are provided with a reference number which is provided with an index 1 at the first position from the left thus belong to the first component 1 or a first module for the right channels, module 1, the device 140 and the elements, which are provided with a reference number, which is provided with an index 2 at the first position from the left, thus belong to the second component 2 or a second module for the left channels, module 2, the device 140.
  • the number of modules in Fig. 14 is two, the device could also have more, which are arranged with a respective base distance to each other.
  • each plurality 16 1 and 16 2 of optical channels includes four juxtaposed optical channels.
  • the individual "right" channels are distinguished by the second subscript.
  • the channels are indexed from right to left. That is, the optical channel 16 11 , the in Fig. 14 is not shown because of a selected for the sake of clarity Operaweg tiny is, for example, along the base distance direction 108, along which the left and right channels are offset from each other below the base distance BA offset from each other, arranged at the extreme right edge, ie farthest from the majority 16 2 left channels, the other right channels 16 follow 12 12 - 16 14 along the base distance direction 108.
  • the channels 16 11 - 16 14 thus form a single-row array of optical channels whose line extension direction corresponds to the base pitch direction 108.
  • the left channels 16 2 are constructed. They, too, are distinguished by the second subscript.
  • the left channels 16 21 - 16 24 are arranged side by side and in the same direction sequentially as the right channels 16 11 - 16 14 , namely such that the channel 16 21 is closest to the right channels and the channel 16 24 farthest from latter.
  • Each of the right channels 16 11-16 14 includes a corresponding optic, which, as it is in Fig. 14 is indicated, can consist of a lens system. Alternatively, each channel could have a lens.
  • Each optical channel 16 11-16 14 receives an up from the overlapping part of fields of view 74a-d of the total field of vision 72, which overlap each other, as in connection with the Fig. 11a is described.
  • the channel 16 11 forms, for example, the partial field of view 74 11 on an image sensor area 58 11 , the optical channel 16 12 the partial field of view 74 12 on an image sensor area 58 12 , the optical channel 16 13 an associated partial field of view 74 13 to a corresponding in Fig. 14 not visible image sensor area 58 13 of the image sensor 12 and the optical channel 16 14 an associated partial field of view 74 14 on a corresponding image sensor area 58 14 , which is also in Fig. 14 not shown because of occlusion.
  • the image sensor portions 58 11 are - 58 14 of the image sensor 12 or the component 12 1 of the image sensor 12 in a plane parallel to the base pitch direction BA or parallel to the line direction of extension 108, and at this level are lens planes of the optics of the optical channels 16 11 - 16 14 in parallel.
  • the image sensor regions are 58 11 - 58 14 to each other arranged with a lateral inter-channel spacing 110, with which the optics of the optical channels 16 11 - 16 14 one below the other in this direction, so that the optical axes and optical paths of the optical channels 16 11 - 16 14 between the image sensor areas 58 11 - 58 14 and the optics 16 11 - 16 14 parallel to each other.
  • centers of the image sensor portions 58 11 16 14 disposed on the respective optical axis, perpendicular to the aforementioned common plane of the image sensor portions 58 11 - 58 run fourteenth
  • the optical axes or optical paths of the optical channels 16 11-16 14 are deflected by a beam deflector 18 1 and provided with a divergence, which results in that the partial fields of 74 11 to 74 14 of the optical channels 16 11-16 14 mutually only partially overlap, such as in such a way that in pairs the partial fields 74 11 - 74 14 overlap at most 50% in the spatial angle sense.
  • the beam deflecting 18 1 can, as it is in Fig. 14 is indicated, for example, for each optical channel 16 11 - 16 14 have a reflective facet, which are tilted against each other under the channels 16 11 - 16 14 different.
  • An average tilt of the reflective facets with respect to the image sensor plane redirects the total field of view of the right channels 16 11-16 14 in a direction, for example, perpendicular to the plane in which the optical axes of the optics of the optical channels 16 11-16 14 are ahead without beam deflection through the device 18 1 , or deviates from this vertical direction less than 10 °.
  • the beam deflecting device 18 1 could also use prisms for beam deflection of the individual optical axes or beam paths of the optical channels 16 11-16 14 .
  • the beam deflection 18 1 provides the beam paths of the optical channels 16 11 - 16 14 with a divergence such that the actually linear in the direction 108 adjacent channels 16 11 - 16 14 cover the total field of view 72 two-dimensional.
  • the beam paths or optical axes could also deviate from the described parallelism, but that the parallelism of the beam paths of the optical channels could still be so pronounced that the partial fields of view passing through the individual channels 16 11 16 14 covered or on the respective image sensor portions 58 11 - are mapped 58 14, would largely overlap without further measures, namely, how the beam deflection, so to cover a greater total field of vision through the Multiaperturab Struktursvorraum 140 beam deflection 18, the beam paths so with provides an additional divergence that the partial fields of the channels 16 11-16 14 less overlap each other.
  • the beam deflection device 18 1 ensures, for example, that the total field of view has a averaged over all azimuthal angles and all transverse directions aperture angle which is greater than 1.5 times the corresponding central opening angle of sub-fields of view of the optical channels 16 11-16 14th
  • the optical channels 16 21 - 16 24 record the same total field of view 72 in almost congruent manner, namely in partial fields 74 21 - 74 24 , in which the total field of view 72 is split two-dimensionally, which overlap one another, and each of which almost completely overlaps with the corresponding partial field of view 74 11 - 74 14 of a corresponding channel of the right channels 16 11 - 16 14 .
  • the image sensor areas 58 11 - 58 24 may each be formed from a chip, as for the image sensor 12 in FIG Fig. 11 is described.
  • the 3D Multiaperturabticiansvorraum includes a processor 112, which performs the task, for example, the images 11 16 with an uptake by the 3D Multiaperturab Struktursvortechnik 10 through the right optical channels - were taken 14, 16 to a first picture to merge.
  • the problem to be overcome is the following: due to the inter-channel distances 110 between adjacent channels of the right-hand channels 16 11-16 14 , the pictures taken in the picture areas 58 11 - 16 14 when picked up by the channels 16 11 58 14 are recorded, not simply or translatorily mutually shifted and placed on top of each other. In other words, they can not be joined together easily.
  • Disparity is called the lateral offset along the direction B, 108 or 110 in the images of the image sensor areas 58 11 - 58 14 when shooting a same scene, which correspond to each other but are in different images.
  • the disparity of corresponding image contents again depends on the removal of that image content in the scene, ie the removal of the corresponding object from the device 140.
  • the processor 112 could now try to avoid disparities evaluate 58 14 itself to merge these images together to form a first overall picture, that of a "right picture" - the images of the image sensor portions 58. 11
  • the disadvantage however, that the inter-channel distance 110 is indeed present, and thus just causes the problem that the inter-channel distance 110 but on the other hand is also relatively low, so that the depth resolution or estimate is only inaccurate.
  • the attempt to correlate one another by means of correlating therefore corresponding image contents in an overlapping area between two images, for example in the overlapping area 114 between the images of the image sensor areas 58 11 and 58 12 , is difficult.
  • the processor of Fig. 14 therefore, in the overlap area 114 between the subfields 74 11 and 74 12 for merging, disparities in a pair of images, one of which is captured by one of the left channels 16 21 or 16 22 , are used for its mapped second subfield, namely 74 21 and 74, respectively 22 overlaps with the overlap area 114.
  • process 112 for merging the images of image sensor areas 58 11 and 58 12 evaluates disparities in images, one of which is captured by one of image sensor areas 58 21 or 58 22 and another by one of the channels involved in overlap area 114, ie Image captured by one of the image sensor areas 58 11 or 58 12 .
  • Such a pair then has a base pitch of base pitch BA plus / minus one or none of a channel base pitch 110.
  • the latter base pitch is significantly larger than a single channel base pitch 110, therefore the disparities in the overlap area 86 for the processor 112 can be more easily determined.
  • Processor 112 therefore evaluates disparities for merging the images of the right channels, which results in an image of the left channels, preferably, but not exclusively, between images of one of the right channels and one of the left channels.
  • the processor 112 that portion of the part of the field of view 74 11 which does not overlap with any other partial fields of the right channels, more or less accepts directly from the image 58 11 and the same takes for the non-overlapping regions of the partial field of view 74 12 , 74 13 and 74 14 based on the images of the image sensor areas 58 12 - 58 14 , wherein the images of the image sensor areas 58 11 - 58 14, for example, were recorded simultaneously.
  • the processor 112 draws disparities from image pairs whose overlap in the total field of view 72 overlaps in the overlapping area, but of which in the majority but not exclusively one was taken by one of the right channels and the other by one of the left channels, as again at the same time.
  • the processor 112 could, for example, the overall image that is calculated by the processor 112 for the images of the right channels, virtually not only in the overlapping region of the partial fields 74 11-74 14 of the right channels, but also in the non-overlap virtually at a glance point " be warped ", for example, laterally 16 11 in the center between the right channels - is 16 14, and that by also for those areas of the partial fields 74 11 -, disparities of image pairs evaluated 74 14 which do not overlap with each other by the processor 85 where one picture was taken through one of the right channels and another picture through one of the left channels.
  • the 3D multi-aperture imaging device 140 of FIG Fig. 14 Not only is it able to produce an overall image from the images of the right channels, but the 3D multi-aperture imaging device 140 of FIG Fig. 14 At least in an operating mode, too, an overall picture of the images of the left-hand channels and / or in addition to the overall image of the right-hand channels can produce a depth map from a recording in addition to the overall image of the first channels.
  • the processor 112 is for example configured to images formed by the left optical channels 16 21 - 58 21 16 24 or the image sensor areas - to merge 58 24 are added to a second overall image, namely, a total image left channel, while in an overlapping of laterally adjacent the partial fields 74 21 - to use 74 24 of the left optical channels disparities in a pair of images, one of which in the majority but not limited to a through a right optical channel 16 11 - 16 is received 14 and is overlapped with the corresponding overlap area of the pair of partial fields 74 21 - 74 24 , and the other is preferably received by one of the left optical channels whose partial field of view overlaps with the respective overlap area.
  • the processor 112 outputs two whole images, one for the right optical channels and the other for the left optical channels.
  • these two whole images could be fed separately to a user of the user's two eyes, thus leading to a three-dimensional impression of the recorded scene.
  • the processor 112 in addition to the overall image to the right channels, the processor 112 generates a depth map using disparities in pairs of images that include at least one pair for each of the right channels 16 11-16 14 Image captured by the respective right channel and another image captured by one of the left channels.
  • the depth map is generated by the processor 112
  • the two alternatives can both be processed by the processor 112: it could first generate the two full images, one for the right optical channels and the other for the left optical channels, as described above, by merging the images of the right channels in the overlapping areas between the images of the right channels also disparities from pairs of images are used, one of which belongs to the images of the left channels, and when merging the images of the left channels in the overlapping areas between the images of the left channels also disparities Pairs of images are used, one of which belongs to the images of the right channels, and then from the overall images thus obtained, which represent the scene in the total field of view from different perspectives to create an overall image with associated depth map, such as a total image, the to a virtual view or b to a virtual optical center between the optical centers of the optics of the right and left optical channels, possibly but not exclusively in the middle therebetween.
  • the processor 85 To calculate the Depth map and to warp one of the two images or warping and merging of both images into the virtual view, the processor 85 then used the right and left overall image, as an intermediate result of the previous merger of the left and right frames.
  • the processor evaluated here thus disparities in the two intermediate result total images in order to obtain the depth map and perform the warping or warping / merging of the same.
  • processor 112 performs the evaluation of disparities in a pair of images, for example, by cross-correlation of image areas.
  • the processor 112 may optionally include. still performs a channel-wise correction of perspective aberrations of the respective channel.
  • the embodiment of Fig. 14 was merely exemplary in many ways.
  • the number of right optical channels is not four, but is somehow greater than or equal to 2, both inclusive, and the overlap area of the partial optical fields of the right optical channels may be paired with each sub-field or channel is considered the largest overlap to the respective sub-field, in terms of area for all these pairs between 1/2 and 1/1000 of an average image size of the images from the image areas 58 11 - are added 58 14, are, for example, measured in the image plane, ie the level of image sensor areas.
  • the number may differ between the right channels and the left channels.
  • the number of left optical channels, N L , and right optical channels, N R need not necessarily be the same, and a division of the total field of view 72 into the partial fields of the left channels and the partial fields of the right channels will not be approximately equal has to be like this at Fig. 14 the case was.
  • the partial fields of view and their overlap it may, for example, behave in such a way that the partial fields of vision overlap by at least 20 pixels, as far as an image distance or object distance of 10 m is considered, at least for all pairs with the greatest overlap, this for the right channels as well as for the left channels.
  • the left optical channels and the right optical channels are formed in a single line.
  • the left and / or right channels could also form a two-dimensional array of optical channels.
  • the arrangement of Fig. 14 it is advantageous because it results in a minimum height perpendicular to the plane in which the optical axes of the optical channels, ie both the right and the left channels, leads before and without beam deflection.
  • the image sensor 12 it has already been mentioned that the same can be formed from one, two or more chips.
  • a chip per image sensor portion 58 11 - be provided 58 24, wherein selbige on one or more circuit boards can be fixed in the case of multiple chips, such as a circuit board for the left channels and the image sensors of the left - 58 14 and 58 21 Channels and a board for the image sensors of the right channels.
  • the channel spacing 110 corresponds to the lens diameter. This results in a small channel spacing and thus a low disparity.
  • the right channels on the one hand and the left channels on the other hand can be arranged with each other with an arbitrary distance BA, so that large disparities can be realized.
  • processor 112 merges the images of the right channels.
  • the same procedure could be performed by the processor 112 as mentioned above for both or all channel groups, or also for the left or the like.
  • Fig. 15a shows an embodiment of a multi-aperture imaging device 150.
  • the image sensor regions 58a-d are arranged in a common plane, namely the image plane of the optical channels 16 or their optics.
  • this plane is parallel to the plane spanned by a z and y axis of a Cartesian coordinate system, which in Fig. 15a for simplification of the following description is shown and provided with the reference numeral 115.
  • the size dimension of the multi-aperture imaging device 150 is larger than the diameter along the line extension direction.
  • the minimum extent of the multi-aperture imaging device 150 as determined by the mutual arrangement of image sensor 12 to optics 64 along the z-axis, ie along the optical axes or optical paths of the optical channels 16a-d, is less than the minimum extent along the z-axis, but due to the configuration of the optical channels 16a-d as a single-line array, it is larger than the minimum extension of the multi-aperture imaging device in the lateral direction y perpendicular to the line extension direction z.
  • each individual optical channel 16a-d is given by the lateral extent of each individual optical channel 16a-d, such as the extension of the optics 64a-d along the y-axis, possibly including the support 66.
  • the optical axes 17a-d in front of or without the deflection by the beam deflecting device 18 or on, for example, the optics 64a-d parallel to each other, as shown in FIG Fig. 15a is shown, or they differ only slightly from this.
  • the corresponding centered positioning of optics 64a-d and the image sensor areas 58a-d is easy to produce and low in terms of minimizing the space.
  • the parallelism of the beam paths of the optical channels also means that the partial fields covered by the individual channels 16a-d or imaged on the respective image sensor areas 58a-d would almost completely overlap without further measures, such as beam deflection .
  • another function of the beam deflector 18 is to diverge the beam paths so that the sub-fields of the channels 16a-d overlap less than one another.
  • a reflecting facet 68a-d uniquely associated with this channel each optically planar and inclined to each other, comprises such that the partial visual fields of the optical channels are less angularly overlapping and, for example, cover a total field of view covering one Opening angle, for example, is greater than 1.5 times the opening angle of the individual partial fields of the optical channels 16a-d.
  • the mutual inclination of the reflecting facet 68a-d ensures that the optical channels 16a-d, which are actually juxtaposed linearly along the z-axis, cover the total field of view 72 according to a two-dimensional arrangement of the partial fields 74a-d.
  • FIG. 15a the angular deflection of the optical axes 17a-d of the optical channel 16a-d in the plane which is spanned by the average direction of the optical axes before the beam deflection and the average direction of the optical axes after the beam deflection, ie in the zy plane in the example of Fig. 15a on the one hand, and in the plane perpendicular to the latter plane and parallel to the mean direction of the optical axis after beam deflection, on the other hand, the example of FIG Fig. 15a in the exemplary case that the mean direction after beam deflection corresponds to the y-axis.
  • the optical axes of the optical channels are therefore deflected by 90 ° in the yz plane about the z-axis, and on average, the optical axes are not tilted out of the yz plane.
  • ⁇ x 1 the inclination angle of the facet 68a with respect to the xz plane, measured in the xy plane, ie the tilt of the facet 68a about the z-axis with respect to the xz-plane, in which the optical axes 17a-d extend.
  • ⁇ z 1 0 ° corresponds to an alignment of the facet 68a parallel to the xz-plane.
  • ⁇ z 1 2 ⁇ ⁇ z 1 .
  • ⁇ x i 2 ⁇ ⁇ x i .
  • the angle of attack may be greater than an angle of inclination of the inclination of the reflecting facet associated with this channel with respect to the carrier substrate through which the optical channels pass.
  • the carrier substrate may be positioned parallel to a line extension direction of the array 14 and the angle of attack may lie in a plane perpendicular to the line extension direction.
  • Fig. 15b-15e show side views of a Strahlumschvortechnisch according to an embodiment of exemplary four optical channels, which are arranged linearly or one-sided.
  • the beam deflecting device 18 of Fig. 15b-15e could be used as a beam deflecting device Fig. 11a be used, but then the partial fields not as in Fig. 11a in clockwise direction 3, 4, 2, 1 would cover the total field of view, but clockwise according to the order of 4, 2, 1, 3.
  • the angles of inclination of the facets 68a-d are in Fig. 15b-e located. They are distinguished by superscript indices 1-4 or assigned to the respective channel.
  • ⁇ x 1 is here as well ⁇ x 4 0 °.
  • FIG Fig. 15b-15e displayed with 121.
  • the material forming the parallelepiped portion of the support substrate 123 is located below the dashed line 125. It will be appreciated that the additional material added to it has little volume, thus facilitating impression.
  • the carrier substrate 123 is at an angle of attack ⁇ x 0 placed inclined relative to the image sensor 12, namely about the axis about which the mean direction of the optical axes of the optical channels is deflected, ie the z-axis in Fig. 15a ,
  • This angle of attack ensures that the surface of the beam deflecting device 18 facing the image sensor 12 already effects a "coarse deflection" of the beam paths of the optical channels.
  • the deflection angles of deflection of the beam path of each optical channel by the beam deflection device 18 this means that they are each at the angle of attack ⁇ x 0
  • These facets-individual slopes of the facets 68a-d can be characterized by an inclination angle in the xy plane and an angle of inclination to the normal of the facet 68a-d Carrier substrate 123 are described in the plane perpendicular thereto. It is preferred that, for each channel, the angle of attack ⁇ x 0 is greater than the slope, ie ⁇ x 0 > Max ⁇ x ⁇ z for all channels.
  • ⁇ x 0 can for example be between 30 ° and 60 ° inclusive.
  • the manufacture of the beam deflecting device 18 of Fig. 15b-15e can be done by molding the additional material onto the carrier substrate 123 by means of an impression tool.
  • the support substrate 123 could be glass while the molded additional material thereon is polymer.
  • the beam deflection device 18 of Fig. 15b-15e is integrally formed by injection molding or the like.
  • the surface of the beam deflection device facing the image sensor is mirrored at least on the reflective facets associated with the optical channels.
  • the carrier substrate may be rotatably mounted rotatably, as for example. In connection with Fig. 4b is described.
  • Reasons for non-compliance may include, for example, non-compliance with manufacturing variances, such as e.g. Inaccuracies in the relative locations of the optics 64a-d to each other and relative to the image sensor 12. Manufacturing inaccuracies may also include inaccuracy of incorporation of the mirror deflector 18 and, optionally, the relative locations of the facets 68a-d to each other when the beam deflector 18 has facets 68a-d , In addition to or as an alternative to manufacturing tolerance deviations, temperature fluctuations may cause one or more of the above assumptions to be inaccurate or insufficiently met.
  • the algorithm performed by the processor 112 to merge the images of the image sensor areas 58a-d into the overall image may deviate from optimal alignment and placement of the image sensor areas 58a-d Compensate components, such as deviations of the positions of the partial field of view 74a-d within the total field of view 72 of a desired constellation of relative positions of the partial fields to each other.
  • the processor 112 could compensate for such deviations to some extent. However, if certain deviation limits are exceeded (non-compliance with Assumption 2), for example, the processor 112 would not be able to compensate for the deviations.
  • the multi-aperture imaging apparatus 150 of FIG Fig. 15a an adjusting device 116 for changing a relative position between the image sensor region 58i of a respective optical channel 16i, the optics 64i of the respective optical channel 16i and the beam deflector 18 or the corresponding segment 68i thereof or for changing an optical property 16i or an optical property on a channel-by-channel basis of the deflection of the beam path of the respective optical channel relevant segment 68i of the beam deflection 18.
  • the adjustment 116 is driven by default values or performs the adjustment tasks in accordance with the default values. These are provided by a memory 118 and / or a controller 122, which will be explained below.
  • the device 150 has, for example, a memory 118 with stored default values for the channel-specific activation of the setting device 116.
  • the default values can be predetermined by the manufacturer and stored in the memory 118.
  • the processor 112 may, for example, as shown in FIG Fig. 15a is indicated by a dashed line 124 via evaluations of recorded images of the image sensor areas 58a-d, such as images that are joined together by the processor 112 or merge into an overall image to be able to the stored default values in the memory 118th to improve or update.
  • the processor 112 captures a scene by adjusting the multi-aperture imager 150 via the adjuster 116 with current stored default values, as described in more detail below.
  • the default values are read from the memory 118 and used by the setting means 116 for channel-specific adjustment.
  • the processor 112 gains Analyze the images of the image sensor areas 58a-d thus captured information on how the stored and just used presets in the memory 118 should be modified to be more accurate at the next shot using these updated default values at the next shot or improved compliance with the above assumptions.
  • the stored default values may have a complete set of set values, i. a set of adjustment values to completely set the device 150. They are selected as described above and further elaborated below in order to reduce or eliminate certain channel-specific deviations of the optical properties of the channels from a desired characteristic
  • the default values include multiple sets of set values, such as one per a succession of contiguous temperature intervals, so that for imaging always the set of adjustment values is used that is currently suitable for a current situation.
  • controller 122 may perform an access to the table of associations between default value sets and different predetermined situations in memory 118.
  • the controller 122 obtains for this access sensor data that reflects the current situation, such as e.g. Data relating to temperature, pressure, humidity, position of the device 150 in space and / or a momentary acceleration or instantaneous rate of rotation of the device 150, and determines from these data one of the plurality of default value sets in the memory 118, namely the one associated with the predetermined situation which comes closest to the current situation as described by the sensor data.
  • Sensor data may also be obtained from the image sensor data of the image sensor areas themselves. For example, a set is selected by controller 122 in whose associated temperature interval the current temperature falls. The default values of the selected set from memory 118 used for a particular image capture by adjuster 116 may then be updated again if optional feedback 124 is used.
  • the stored default values can be designed, for example, such that a measure for a dispersion of a distribution of one or more properties under the optical channels is reduced by the control of the setting device by means of the stored default values, namely a transverse deviation of the partial field of view a regular distribution of the partial fields of view, focal lengths of the optics, or depth of field of the optical channels.
  • the default values could be determined in the controller 122 without a memory 118, namely, by, for example, having a map of the current sensor data firmly set to appropriate default values in the controller 122.
  • the figure may be described by a functional relationship between sensor data and default values.
  • the functional relationship could be adaptable by parameters.
  • the parameters could be adapted via the feedback 124.
  • the memory 118 may be, for example, a nonvolatile memory. It may be a read-only memory, but rewritable memory is also possible.
  • the controller 122 and the processor 112 may be implemented in software, hardware, or programmable hardware. It may be executed on a common microprocessor programs.
  • the sensors for providing the sensor data to the controller 122 may be associated with the apparatus 150, such as shown in FIG. the image sensor areas, or be external components such as components of the device in which the device is installed, as will be explained with reference to subsequent figures.
  • the adjustment 116 of Fig. 15a can apply to one, several or all of the design variants described below. Special combinations are also discussed below.
  • the setting device 116 comprises, for example, an actuator 126i for each channel 16i, which guides the optics 64i of the corresponding channel 16i in the axial direction along the optical axis 17i or along the beam path and / or transversely thereto along the z axis. Axis and / or the y-axis moves.
  • the actuator 126i could, for example, also move the image sensor 12 or a single image sensor area 58i.
  • the actuator 126i could cause relative movement of the image sensor area 58i, optics 64i, and / or the corresponding segment 64i of the beam deflector 24.
  • the adjusting means 116 comprises a phase-changing optical element or a phase-changing element 128i for each Channel 16i, as in Fig. 16a in which respective optics 64ai may be integrated (128i ") into which segment 68i may be integrated (128i '''), between image sensor region 58i and optic 64i (128i ') or between optic 64i and beam deflector segment 68i (128i'
  • the phase-modifying optical element 128i can, for example, bring about a location-dependent change of a refractive index, ie a local distribution thereof, such as liquid crystals, alternatively or additionally, the phase-changing optical element causes 128i, a change in the shape of an optically active surface, such as by use of piezos that mechanically act on flexible, solid, transparent materials and cause deformation, or by utilizing the electrowetting effect, for example, could change the refractive index of optic 64i.
  • phase change element 128i change a shape of an optical lens surface of optic 64i and thereby alter the effective power of optic 64i.”
  • phase change element 128i "'could be placed on an optically relevant surface of segments 68i, such as on the reflective facet. generate a sinusoidal phase grating to cause virtual tilt of the corresponding surface
  • the phase change element 128i 'or phase change element 128i "could redirect the optical axis.
  • the phase change caused by the phase changing optical element 128i can be largely rotationally symmetric, such as e.g. be rotationally symmetric about the optical axis 17i, thus effecting, for example, a change in the focal length of the optic 64i in the case 128i "However, the phase change effected by the element 128i may also be largely linear, such as linear along the z-axis. Axis or linear along the y-axis to cause a change of the deflection angle or a deflection of the optical axis 17i in the corresponding direction.
  • the rotationally symmetric phase change can be used for focusing, and the linear phase change for position correction of the partial field of view of the corresponding optical channel 16i.
  • the adjustment device 116 comprises an actuator 132i which has the segment 68i, such as the reflective facet of the respective channel 16i, in its angular orientation with respect to the optical path Axis 17i changes, ie the angle of attack ⁇ x i ,
  • the segment 68i is not limited to a reflective facet.
  • Each segment 68i could also be formed as a prism, which deflects the direction of the optical axis 17i in the yz plane, while the prism is traversed by the optical path 16i of the optical channel.
  • a pneumatic, hydraulic, piezoelectric, thermal, electrostatic or electrodynamic drive or a DC motor can be used to generate the movement of the optics 68i, which can be translational, for example, and to tilt the segment 68i by the actuator 132i and the z-axis. or stepper motor or turn a dive coil drive can be used.
  • Fig. 15a is indicated by dashed lines that the multi-aperture imaging device 150 optionally in addition to the adjustment 116 one or more actuators 134 for generating a channel-global, ie for all optical channels 16a-d same, relative movement between the image sensor 12, optical array 14 and beam deflector 18 may include.
  • the one or more additional actuators 134 may be as shown in FIG Fig. 15a is indicated to be part of an optionally existing autofocus control 136 (focusing device) and / or an optionally existing image stabilization control of the multi-aperture imaging device.
  • FIG. 17 shows the multi-aperture imaging apparatus 150 of FIG Fig. 15a wherein the optics 64a-d of the optical channels 16a-d are mechanically fixed against each other via the common carrier 66. Via this common holder, it is now possible to subject the optics 64a-d to a global movement that is the same for all channels, for example by a translatory movement of the carrier 66 in the z-direction, ie along the line extension direction of the array 14. For this purpose, a Actuator 134a provided.
  • the actuator 134a thus produces a translatory movement of the optics 64a-d, which is the same for all the optical channels 16a-d, in that the actuator 134a subjects the common carrier 66 to the translational movement along the x-axis.
  • the type of actuator 134a reference is made to the examples, with reference to FIGS Fig. 16a and 16b was pointed out.
  • the device 150 comprises an actuator 134b for the channel-global, ie the same for all optical channels 16a-d, changing the image sensor 58i-to-optical-64i distance along the x-axis or along the optical axis 17i. As it in Fig.
  • the actuator 134b subjects the optics 64a-d of the translational movement along the z-axis to change the distance from the associated image sensor sections 58a-d not via the carrier 66, but also via the actuator 134a, which thus also the translational Movement along the x-axis is subjected and acts as a kind of suspension for the carrier 66.
  • the device 150 of FIG Fig. 17 an actuator 134c for rotating the beam deflector 18 about an axis which is parallel to the z-axis and lies in or not far from the plane in which the optical axes 17a-d extend.
  • the actuators 134b and 134c for possible implementation examples, reference is made to the listing of examples which refer to FIGS Fig. 16a and 16b previously supplied.
  • the rotational movement or rotational movement exerted by the actuator 134c on the beam deflection device 18 has the same effect on the segments 68a-d of the beam deflection device 18 for all channels 16a-d, ie is channel-global.
  • the image stabilization controller 138 is capable of stabilizing, for example, the total field of view 72 by means of the actuator 134c in a first direction 142 and by means of the actuator 134a in a direction perpendicular thereto 144, for example, against camera shake by a user.
  • the first direction 142 can be obtained by a rotational movement about the rotation axis 44.
  • a translational movement of the beam deflection device 18 and / or of the array 14 can also be generated by the actuator 134.
  • the directions 142, 142 'and 144 may be parallel to the image axes, in a plane of the direction or correspond.
  • Image stabilizers described herein may be configured to co-operate for two, a plurality or all of the optical paths of the optical channels. This means that a channel-specific image stabilization can be dispensed with, which is advantageous.
  • the device 150 of FIG Fig. 15a for each channel 16a-d an actuator, such as an actuator 126i for each channel 16i, to channel the image sensor areas 58a-d channel individually along the z-axis and / or along the y-axis, for example manufacturing inaccuracies or temperature induced To offset drifts in the partial visual fields within the total field of vision.
  • the device 150 of Fig. 15a Alternatively or additionally, it could comprise an actuator 128i "to compensate for focal length differences of the optics 64a-d that have undesirably occurred due to the manufacturing process Fig.
  • the device 150 may then finally also have actuators of the type 128i 'or 128i'''.
  • the device 150 may thus include an actuator 134c configured to rotate the beam balancer 18 about an axis parallel to the row extension direction z of the array 14.
  • the axis of rotation is, for example, in the plane of the optical axes 17a-d or less than a quarter of a diameter of the optics 64a-d removed.
  • the actuator 134c may be provided to provide the beam deflector 18 with a short response time in a small angle range, such as a small angle range.
  • the actuator 134c would be driven, for example, by the image stabilization controller 138.
  • actuator 134c could be configured to provide, with larger angular displacements, the total field of view 72 resulting from the overall coverage of the partial field of view 74a-d (FIGS. Fig. 15a ) is defined to change in its direction.
  • deflections it would also be possible for deflections to be achieved by rotation of the beam deflection device 18, in which the total field of view is arranged in the opposite direction relative to the device 150, for example by the beam deflecting device 18 being designed as a mirror array reflective on both sides.
  • the device 150 may comprise an actuator 134a, which is designed to move the optics 64a-d by means of the substrate 66 or the substrate 66 itself and thus the optics 64a-d in a translatory manner along the line extension direction.
  • the actuator 134a could also be replaced by the aforementioned Image stabilization control to achieve image stabilization across the image stabilization, which is accomplished by the rotation of mirror deflector 18, by movement 96 along the line extent direction.
  • the device 150 may include an actuator 134b for varying the image-side distance between the image sensor 12 and the optics 64a-d or between the image sensor 12 and the body 66 in order to achieve a depth of field adjustment, cf. Fig. 12 ,
  • the device 98 may be controlled by a manual user control or by an autofocus control of the device 150.
  • the actuator 134a thus serves as a suspension of the substrate 66 and is preferably, as in Fig. 15a indicated laterally adjacent to the substrate 66 along the line extension direction so as not to increase the height. It is also true for the actuators 134b and 134c that they are preferably arranged in the plane of the optical beam paths so as not to increase the overall height.
  • the optics 64a-d may not only be supported with each other, such as over the already mentioned transparent substrate, but also relative to the beam deflecting in a constant relative position, such as a suitable frame, preferably not the height enlarged and therefore preferably in the plane of the components 12, 14 and 66 and in the plane of the beam paths.
  • the constancy of the relative position could be limited to the distance between optics and beam deflector along the optical axes, so that the actuator 134b, for example, translates the optics 64a-d together with the beam deflector 18 along the optical axes.
  • the optics-to-beam deflector distance could be set to a minimum distance such that the beam path of the channels is not laterally restricted by the segments of the beam deflector 18, which reduces the height, otherwise the segments 68i will be the largest in lateral extent Optics-to-beam deflector distance would have to be dimensioned so as not to cut the beam path.
  • the constancy of the relative position could mean that the aforementioned frame rigidly holds the optics and the beam deflector along the z-axis so that the actuator 134a would translate the optics 64a-d along with the beam deflector along the line extent direction.
  • the above-described beam deflecting device 18 for deflecting the optical path of the optical channels, together with the actuator 134c for generating the rotational movement of the beam deflector 18 and the actuator 134a of optical image stabilization control of the multi-aperture imaging device 150, enables image field stabilization in two dimensions, namely, the translational motion the substrate 66 is image stabilized along a first image axis substantially parallel to the line extender direction and image generation stabilized along a second image axis substantially parallel to the optical axes before or without beam deflection by generating the rotational motion of the beam redirector 18 - Looking at the deflected optical axes - perpendicular to the optical axes and the line extension direction.
  • the arrangement described can bring about a translatory movement of the beam deflection device fixed in the aforementioned frame and the array 14 perpendicular to the line extension direction, such as by the described actuator 54, which can be used for the realization of a focus adjustment and thus an autofocus function.
  • Fig. 18 shows a schematic view of a multi-aperture imaging device 180 to illustrate an advantageous arrangement of actuators, such as for image stabilization and / or setting a focus.
  • the image sensor 12, the array 14 and the beam deflector 18 can span a cuboid in space.
  • the cuboid may also be understood as a virtual cuboid and may, for example, have a minimal volume and in particular a minimal vertical extension along a direction parallel to the y-direction or a thickness direction and comprise the image sensor 12, the single-row array 14 and the beam deflection device 18.
  • the minimum volume can also be understood as describing a cuboid, which is spanned by the arrangement and / or operational movement of the image sensor 12, the array 14 and / or the beam deflection device 18.
  • the array 14 may have a line extension direction 146, along which the optical channels 16a and 16b are arranged next to one another, possibly parallel to one another.
  • the row extension direction 146 may be arranged stationary in space.
  • the virtual cuboid may have two sides, which are aligned parallel to one another, parallel to the line extension direction 146 of the single-line array 14 and parallel to a part of the beam path 17a and / or 17b of the optical channels 16a or 16b between the image sensor 12 and the beam deflection device 18 are. Simplified, but without limitation, this may for example be a top and a bottom of the virtual cuboid.
  • the two sides may span a first plane 148a and a second plane 148b. That is, the two sides of the cuboid can each be part of the plane 148a or 148b.
  • Other components of the multi-aperture imaging device may be disposed completely, but at least partially within the area between the planes 148a and 148b such that a space requirement of the multi-aperture imaging device 180 along a direction parallel to a surface normal of the planes 148a and / or 148b is low, which is advantageous.
  • a volume of the multi-aperture imaging device may have a small or minimal space between the planes 148a and 148b.
  • a construction space of the multi-aperture imaging device may be large or arbitrarily large.
  • the volume of the virtual cuboid is, for example, influenced by an arrangement of the image sensor 12, the single-line array 14 and the beam deflecting device 18, it being possible for the arrangement of these components according to the embodiments described herein to be such that the installation space of these components is along the direction perpendicular to the plane Layers and thus the distance between the levels 148a and 148b each other is low or minimal. Compared to other arrangements of the components, the volume and / or the distance between other sides of the virtual cuboid can be increased.
  • the multi-aperture imaging apparatus 180 includes actuator means 152 for generating relative motion between the image sensor 12, the single-row array 14, and the beam deflector 18.
  • the actuator means 152 is at least partially disposed between the planes 148a and 148b.
  • the actuator device 152 may be configured to rotationally move at least one of the image sensor 12, the one-line array 14, or the beam deflector 18 about at least one axis and / or translationally along one or more directions.
  • the actuator device 152 can have at least one actuator, such as the actuator 128i, 132i and / or 134, for channel-specific changing of a relative position between the image sensor region 58i of a respective optical channel 16i, the optics 64i of the respective optical channel 16i and the beam deflection device 18 and of the corresponding segment 68i thereof or for the channel-specific changing of an optical property 16i or an optical property of the segment 68i of the beam deflection device 18 relating to the deflection of the beam path of the respective optical channel.
  • the actuator device can implement autofocus and / or optical image stabilization. as described above.
  • the actuator device 152 may have a dimension or extent 154 parallel to the thickness direction. An amount of at most 50%, at most 30%, or at most 10% of the dimension 154 may protrude beyond the plane 148a and / or 148b from an area between the planes 148a and 148b or may protrude out of the area. This means that the actuator device 152 protrudes at most insignificantly beyond the plane 148a and / or 148b. According to embodiments, actuator device 152 does not protrude above planes 148a and 148b.
  • an extension of the multi-aperture imaging device 180 along the thickness direction is not increased by the actuator device 152.
  • Fig. 19a-f Advantageous embodiments of the beam deflecting device 18 will be described.
  • the embodiments show a number of advantages that are individually or in any combination with each other executable, but are not intended to be limiting.
  • FIG. 12 shows a schematic side sectional view of a beam deflection element 172, as is the case for a beam deflection device described here, for example the beam deflection device 18 of FIG Fig. 4 . 5 or 6 can be used.
  • the beam deflecting element 172 may be effective for one, a plurality or all of the optical channels 16a-d and may have a polygonal cross-section. Although a triangular cross-section is shown, it may be any other polygon. Alternatively or additionally, the cross section may also have at least one curved surface, wherein, in particular for reflective surfaces, an at least partially planar configuration may be advantageous in order to avoid aberrations.
  • the beam deflecting element 172 has, for example, a first side 174a, a second side 174b and a third side 174c. At least two sides, such as the sides 174a and 174b are reflective, so that the Strahlumlenkelement 172 is formed on both sides reflective.
  • the sides 174a and 174b may be main sides of the beam deflecting element 172, that is, sides whose area is larger than the side 174c.
  • the beam deflecting element 172 may be formed wedge-shaped and reflective on both sides. Opposite surface 174c, that is, between surfaces 174a and 174b, another surface may be disposed, but substantially smaller than surface 174c. In other words, the one formed by the surfaces 174a, b and c passes Wedge is not arbitrarily pointed, but is provided on the sharp side with a surface and thus dulled.
  • Fig. 19b 11 shows a schematic side sectional view of the beam deflection element 172, in which a suspension or a displacement axis 176 of the beam deflection element 172 is described.
  • the displacement axis 176 about which the beam deflecting element 172 can be rotationally and / or translationally movable in the beam deflecting device 18 can be displaced eccentrically with respect to a centroid 178 of the cross section.
  • the area centroid may also be a point describing the half dimension of the beam deflecting element 172 along a thickness direction 182 and along a direction 184 perpendicular thereto.
  • the displacement axis may be unchanged along a thickness direction 182 and may have any offset in a direction perpendicular thereto.
  • an offset along the thickness direction 182 is conceivable.
  • the displacement may, for example, be such that upon rotation of the Strahlumlenkelements 172 about the displacement axis 176, a higher travel is obtained, as in a rotation about the centroid 178.
  • the path to which the edge Moving between the sides 174a and 174b in one rotation increases at the same rotation angle as compared with a rotation around the centroid 178.
  • the beam deflection element 172 is preferably arranged such that the edge, that is to say the pointed side of the wedge-shaped cross section, faces the image sensor between the sides 174a and 174b.
  • a respective other side 174a or 174b can thus deflect the optical path of the optical channels.
  • the rotation can be performed so that a space requirement of the beam deflecting device along the thickness direction 182 is small, since movement of the beam deflecting element 172 so that a main side is perpendicular to the image sensor is not required.
  • the side 174c may also be referred to as a side or a back.
  • a plurality of beam deflection elements can be connected to one another in such a way that a connecting element is arranged on the side 174c or runs through the cross section of the beam deflection elements, that is to say arranged in the interior of the beam deflection elements, approximately in the region of the displacement axis 176.
  • the retaining element can be arranged in this way in that it does not or only to a limited extent, ie, at most 50%, at most 30% or at most 10%, over the beam deflecting element 172 along the direction 182 protrudes, so that the holding element does not increase or determine the extent of the overall structure along the direction 182.
  • the dimension in the thickness direction 182 may alternatively be determined by the lenses of the optical channels, ie they have the dimension defining the minimum of the thickness.
  • the beam deflecting element 172 can be made of glass, ceramic, glass ceramic, plastic, metal or a combination of these materials and / or other materials.
  • the beam deflecting element 172 may be arranged so that the tip, i. h., the edge between the main sides 174a and 174b faces the image sensor.
  • An attitude of the Strahlumlenkieri can be made so that it takes place only on the back or inside the Strahlumlenkiata, d. H. the main pages are not obscured.
  • a common holding or connecting element may extend over the back 174c.
  • the axis of rotation of the Strahlumlenkelements 172 may be arranged eccentrically.
  • FIG. 12 shows a schematic perspective view of a multi-aperture imaging device 190 comprising an image sensor 12, and a single-row array 14 of juxtaposed optical channels 16a-d.
  • the beam deflector 18 includes a number of beam deflectors 172a-d, which may correspond to the number of optical channels. Alternatively, a smaller number of Strahlumlenkianon be arranged, such as when at least one Strahlumlenkelement is used by two optical channels. Alternatively, a higher number may also be arranged, for example when a changeover of the deflection direction of the beam deflection device 18 takes place by means of a translatory movement. Each beam deflecting element 172a-d may be associated with an optical channel 16a-d.
  • the beam deflecting elements 172a-d may be referred to as a plurality of elements 172 according to FIG Fig. 11 be educated. Alternatively, at least two, several or all of the beam deflecting elements 172a-d may be integrally formed with each other.
  • Fig. 19d shows a schematic side sectional view of the Strahlumlenkelements 172, whose cross section is formed as a freeform surface.
  • the side 174c may have a recess 186, which allows attachment of a holding element, wherein the recess 186 may also be formed as a protruding element, such as a spring tongue and groove system.
  • the cross section also has a fourth side 174d which has a smaller surface area than the main sides 174a and 174b and connects them to each other.
  • Fig. 19e shows a schematic side sectional view of a first Strahlumlenkelements 172a and a second direction in the direction of the second Strahlumlenkelements 172b.
  • the recesses 186a and 186b can be arranged so that they are substantially congruent, so that an arrangement of a connecting element in the recesses is made possible.
  • Fig. 19f shows a schematic perspective view of the Strahlumlenk Vietnamese 18, for example, four Strahlumlenkelements 172 a - d, which are connected to a connecting element 188.
  • the connecting element can be usable to be translationally and / or rotationally movable by an actuator.
  • the connecting element 188 may be formed integrally and over an extension direction, such as the y-direction in Fig. 5c , on or in the beam deflecting elements 172a-d.
  • the connecting element 188 may also be connected only to at least one side of the beam deflecting device 18, for example when the beam deflecting elements 172a-d are integrally formed.
  • a connection with an actuator and / or a connection of the beam deflection elements 172a-d can also be effected in any other way, for example by means of gluing, wringing or soldering.
  • aspects have been described in the context of a device, it will be understood that these aspects also constitute a description of the corresponding method, so that a block or a component of a device is also to be understood as a corresponding method step or as a feature of a method step. Similarly, aspects described in connection with or as a method step also represent a description of a corresponding block or detail or feature of a corresponding device.

Description

  • Die vorliegende Erfindung bezieht sich auf eine Vorrichtung mit einer Multikanalabbildungsvorrichtung, auf ein Verfahren zum Herstellen derselben und auf ein Verfahren zum Herstellen derselben und Verfahren zum Erfassen eines Gesamtgesichtsfeldes. Die vorliegende Erfindung bezieht sich ferner auf Multiaperturabbildungssysteme mit linearer Kanalanordnung und einem ausfahrbarem Gehäuse.
  • Konventionelle Kameras übertragen in einem Kanal das gesamte Gesichtsfeld und sind in ihrer Miniaturisierung begrenzt. In mobilen Vorrichtungen wie etwa Smartphones werden zwei Kameras genutzt, die in und entgegen dem Richtungssinn der Flächennormalen des Displays orientiert sind. Es wurden bereits Multiaperturkameras mit linearer Kanalanordnung vorgeschlagen, die über eine Reduzierung der Bauhöhe verfügen. Hierbei werden Umlenkspiegel genutzt, die in ihrer Ausdehnung jedoch begrenzt sind und daher entweder zu einer unerwünschten Vergrößerung der Bauhöhe oder aber durch Vignettierung des Strahlengangs zu einer Reduzierung der Bildhelligkeit führen. Des Weiteren können bei einem Einbau in einem Gehäuse eines Smartphones andere Teile (Display, Batterie, Elektronik) im Weg sein, so dass die Strahlumlenkeinrichtung den Strahlengang nicht ungehindert in die verschiedenen Blickrichtungen umlenken kann.
  • DE 10 2014 213 371 offenbart eine Multiaperturvorrichtung mit einer Mehrzahl von lateral nebeneinander angeordneten optischen Kanälen. Wünschenswert wäre demnach ein Konzept, das miniaturisierte Vorrichtungen zum Erfassen eines Gesamtgesichtsfeldes unter Gewährleistung einer hohen Bildqualität ermöglicht.
  • Die Aufgabe der vorliegenden Erfindung besteht deshalb darin, eine Vorrichtung und ein Verfahren zum Herstellen derselben zu schaffen, die eine miniaturisierte Ausführung der Vorrichtung und ein Erhalten von Bildern in einer hohen Qualität ermöglichen.
  • Diese Aufgabe wird durch den Gegenstand der unabhängigen Patentansprüche gelöst. Ein Kerngedanke der vorliegenden Erfindung besteht darin, erkannt zu haben, dass Blickrichtungen einer Multiaperturabbildungsvorrichtung außerhalb eines Gehäuses in einem geringen Maß qualitativ beeinflusst sind. Durch Umlenken von Strahlengängen optischer Kanäle außerhalb der Multiaperturabbildungsvorrichtung oder durch ein Umlenken außerhalb des Gehäuses kann somit eine hohe Qualität der Bilder erhalten werden. Eine Umlenkung der Strahlengänge ermöglicht ferner eine Orientierung der Multiaperturabbildungsvorrichtung in dem Gehäuse zumindest teilweise unabhängig von einer Blickrichtung der Multiaperturabbildungsvorrichtung derart. Dies wird bspw. durch die Strahlumlenkeinrichtung beeinflusst oder festgelegt. Die unabhängige Orientierung der Multiaperturabbildungsvorrichtung in dem Gehäuse ermöglicht, dass das umfassende Gehäuse zumindest bzgl. einer Abmessung, etwa einer Dicke, miniaturisierbar ist. Die Anordnung der Strahlumlenkeinrichtung innerhalb des Gehäuses ermöglicht zusätzlich, dass die Multiaperturabbildungsvorrichtung und eventuell vorhandene Komponenten einer Beleuchtungseinrichtung in diesem Betriebszustand verborgen bleiben, was zu einem hohen Maß an Ästhetik des Gesamtgerätes führt, da in diesem Zustand ggf. keine Blenden, Linsen, LEDs oder anderweitige Komponenten erkennbar sind.
  • Gemäß einem Ausführungsbeispiel umfasst eine Vorrichtung ein Gehäuse und eine Multiaperturabbildungsvorrichtung. Die Multiaperturabbildungsvorrichtung weist ein Array von nebeneinander angeordneten optischen Kanälen und eine Strahlumlenkeinrichtung zum Umlenken eines Strahlengangs der optischen Kanäle auf. Außenflächen des Gehäuses umschließen in einem ersten Betriebszustand der Vorrichtung ein Gehäusevolumen. Die Strahlumlenkeinrichtung weist in dem ersten Betriebszustand der Vorrichtung eine erste Position innerhalb des Gehäusevolumens auf. Die Strahlumlenkeinrichtung weist in einem zweiten Betriebszustand der Vorrichtung eine zweite Position auf, in der zumindest die Strahlumlenkeinrichtung zumindest teilweise außerhalb des Gehäusevolumens angeordnet ist.
  • Gemäß einem weiteren Ausführungsbeispiel umfasst ein Verfahren zum Bereitstellen einer Vorrichtung ein Bereitstellen eines Gehäuses und ein Anordnen einer Multiaperturabbildungsvorrichtung in dem Gehäuse. Die Multiaperturabbildungsvorrichtung umfasst ein Array von nebeneinander angeordneten optischen Kanälen und einer Strahlumlenkeinrichtung zum Umlenken eines Strahlengangs der optischen Kanäle. Das Anordnen der Multiaperturabbildungsvorrichtung wird so ausgeführt, dass Außenflächen des Gehäuses in einem ersten Betriebszustand der Vorrichtung ein Gehäusevolumen umschließen und so dass die Strahlumlenkeinrichtung ist in dem ersten Betriebszustand der Vorrichtung eine erste Position innerhalb des Gehäusevolumens aufweist. Die Multiaperturabbildungsvorrichtung wird so angeordnet, dass die Strahlumlenkeinrichtung in einem zweiten Betriebszustand der Vorrichtung eine zweite Position aufweist, in der zumindest die Strahlumlenkeinrichtung zumindest teilweise außerhalb des Gehäusevolumens angeordnet ist.
  • Gemäß einem weiteren Ausführungsbeispiel umfasst ein Verfahren zum Erfassen eines Gesamtgesichtsfeldes ein Bewegen einer Strahlumlenkeinrichtung einer Multiaperturabbildungsvorrichtung in eine Position, in der zumindest die Strahlumlenkeinrichtung zumindest teilweise außerhalb eines Gehäusevolumens, das von Außenflächen eins Gehäuses in einem ersten Betriebszustand der Vorrichtung ein Gehäusevolumen umschlossen wird und in welchem die Strahlumlenkeinrichtung in einer ersten Position angeordnet ist. Das Verfahren umfasst ein Erfassen eines Gesamtgesichtsfeldes mit einem Array von nebeneinander angeordneten optischen Kanälen der Multiaperturabbildungsvorrichtung, deren Strahlengänge von der Strahlumlenkeinrichtung umgelenkt werden.
  • Gemäß einem weiteren Ausführungsbeispiel ist zumindest ein Aktor eines Bildstabilisators und/oder einer Fokussiereinrichtung so angeordnet ist, dass er zumindest teilweise zwischen zwei Ebenen angeordnet ist, die durch Seiten eines Quaders aufgespannt werden. Die Seiten des Quaders sind zueinander sowie zu einer Zeilenerstreckungsrichtung des Arrays und eines Teils des Strahlengangs der optischen Kanäle zwischen dem Bildsensor und der Strahlumlenkeinrichtung parallel ausgerichtet. Eine Richtung der Oberflächennormalen der Ebenen kann als Dickenrichtung der Vorrichtung verstanden werden. Das Volumen des Quaders ist minimal und umfasst dennoch den Bildsensor, das Array und die Strahlumlenkeinrichtung. Dies ermöglicht eine flache Ausführung des Gehäuses. Im Gegensatz zu bestehenden Lösungen ermöglicht dies, dass die Kamera dabei in Dickenrichtung in keinem der Zustände aus dem quaderförmigen Volumen des Gehäuses heraus ragt.
  • Weitere vorteilhafte Ausführungsformen sind der Gegenstand der abhängigen Patentansprüche.
  • Bevorzugte Ausführungsbeispiele der vorliegenden Erfindung werden nachfolgend Bezug nehmend auf die beiliegenden Zeichnungen erläutert. Es zeigen:
  • Fig. 1a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem Ausführungsbeispiel in einem ersten Betriebszustand;
    Fig. 1b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 1a in einem zweiten Betriebszustand;
    Fig. 2a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem weiteren Ausführungsbeispiel, die eine Abdeckung aufweist;
    Fig. 2b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 2a in einem zweiten Betriebszustand;
    Fig. 2c
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 2a in einer dritten Position;
    Fig. 3a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem weiteren Ausführungsbeispiel in dem ersten Betriebszustand, die eine zumindest teilweise transparente Abdeckung aufweist;
    Fig. 3b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 3a in dem zweiten Betriebszustand;
    Fig. 3c
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 3a, bei der eine Strahlumlenkeinrichtung zusätzlich translatorisch bewegbar ist;
    Fig. 4a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand mit einer translatorischen verschiebbaren Abdeckung;
    Fig. 4b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 4a in dem zweiten Betriebszustand;
    Fig. 5a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem Ausführungsbeispiel, bei der die Abdeckung rotatorisch bewegbar angeordnet ist;
    Fig. 5b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 5a bei der ein Verfahrschlitten translatorisch bewegbar ist;
    Fig. 5c
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 5a in dem zweiten Betriebszustand;
    Fig. 6a
    eine schematische Seitenschnittansicht einer Vorrichtung gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand, die gegenüber der Vorrichtung aus Fig. 5 zumindest teilweise transparente Abdeckungen aufweist;
    Fig. 6b
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 6a, bei der die Strahlumlenkeinrichtung eine Zwischenposition zwischen einer ersten Position und einer zweiten Position aufweist;
    Fig. 6c
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 6a, bei der die Strahlumlenkeinrichtung vollständig aus einem Gehäusevolumen herausgefahren ist;
    Fig. 6d
    eine schematische Seitenschnittansicht der Vorrichtung aus Fig. 6a, bei der ein Abstand zwischen den zumindest teilweise transparenten Abdeckungen verglichen mit den Fig. 6a-c vergrößert ist;
    Fig. 7
    eine schematische perspektivische Ansicht einer Vorrichtung gemäß einem Ausführungsbeispiel, die drei Multiaperturabbildungsvorrichtungen aufweist;
    Fig. 8
    eine vergrößerte perspektivische Ansicht eines Ausschnitts der Vorrichtung aus Fig. 7;
    Fig. 9
    eine schematische perspektivische Ansicht einer Vorrichtung gemäß einem Ausführungsbeispiel bei der die Strahlumlenkeinrichtung mittels Befestigungselementen mit der Multiaperturabbildungsvorrichtung verbunden ist;
    Fig. 10a
    eine schematische perspektivische Ansicht einer Vorrichtung gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand mit einer exemplarischen Form einer Abdeckung;
    Fig. 10b
    eine schematische Ansicht der Vorrichtung aus Fig. 10a in dem zweiten Betriebszustand gemäß einem Ausführungsbeispiel;
    Fig. 10c
    eine schematische Darstellung einer Alternative zu Fig. 10a gemäß einem Ausführungsbeispiel;
    Fig. 11a-c
    detaillierte Darstellungen einer Multiaperturabbildungsvorrichtung gemäß einem Ausführungsbeispiel;
    Fig. 11d-f
    Ausgestaltungsformen der Multiaperturabbildungsvorrichtung gem. Fig. 11a-c für den Fall von einem gemeinsamen Träger gehalterten Optiken von optischen Kanälen gemäß einem Ausführungsbeispiel;
    Fig. 12
    die Multiaperturabbildungsvorrichtung gem. Fig. 11a-c, die gemäß einem Ausführungsbeispiel um zusätzliche Einrichtungen zur für Realisierung von Relativbewegungen für eine optische Bildstabilisierung und zur Anpassung der Fokussierung ergänzt wird;
    Fig. 13a
    eine schematische Ansicht einer in einem flachen Gehäuse angeordnete Multiaperturabbildungsvorrichtung gem. einem Ausführungsbeispiel;
    Fig. 13b
    einen schematischen Aufbau einer Multiaperturabbildungsvorrichtung zum stereoskopischen Erfassen eines Gesamtgesichtsfeldes;
    Fig. 14
    eine schematische Ansicht einer 3D-Multiaperturabbildungsvorrichtung gemäß einem Ausführungsbeispiel;
    Fig. 15a
    eine schematische Ansicht einer weiteren Multiaperturabbildungsvorrichtung gemäß einem Ausführungsbeispiel, die gemäß einem Ausführungsbeispiel um zusätzliche Einrichtungen zur für Realisierung von Relativbewegungen für eine Fokussteuerung und zur optischen Bildstabilisierung ergänzt wird;
    Fig. 15b-15e
    schematische Seitenansichten einer Strahlumlenkvorrichtung gemäß einem Ausführungsbeispiel;
    Fig. 16a
    eine schematische Ansicht einer Multiaperturabbildungsvorrichtung mit einer Einstelleinrichtung zum kanalindividuellen Einstellen optischer Eigenschaften, gemäße einem Ausführungsbeispiel;
    Fig. 16b
    eine Variante einer Multiaperturabbildungsvorrichtung mit der Einstelleinrichtung gemäß einem Ausführungsbeispiel;
    Fig. 17
    eine schematische Ansicht der um zusätzliche Aktoren ergänzten Vorrichtung aus Fig. 15a gemäß einem Ausführungsbeispiel;
    Fig. 18
    eine schematische Ansicht einer Anordnung von Aktoren in einer Multiaperturabbildungsvorrichtung gemäß einem Ausführungsbeispiel; und
    Fig. 19a-19f
    eine vorteilhafte Ausgestaltung einer Strahlumlenkeinrichtung einer Abbildungsvorrichtung gemäß einem Ausführungsbeispiel.
  • Bevor nachfolgend Ausführungsbeispiele der vorliegenden Erfindung im Detail anhand der Zeichnungen näher erläutert werden, wird darauf hingewiesen, dass identische, funktionsgleiche oder gleichwirkende Elemente, Objekte und/oder Strukturen in den unterschiedlichen Figuren mit den gleichen Bezugszeichen versehen sind, so dass die in unterschiedlichen Ausführungsbeispielen dargestellte Beschreibung dieser Elemente untereinander austauschbar ist bzw. aufeinander angewendet werden kann.
  • Fig. 1a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 10 gemäß einem Ausführungsbeispiel in einem ersten Betriebszustand. Bei der Vorrichtung 10 kann es sich um eine mobile oder immobile Vorrichtung handeln, wie etwa ein Mobiltelefon, ein Smartphone, ein mobiler Computer, wie etwa ein Tablet-Computer und/oder eine mobile Musikabspieleinrichtung.
  • Die Vorrichtung 10 umfasst eine Multiaperturabbildungsvorrichtung 11, die einen Bildsensor 12, ein Array 14 von nebeneinander angeordneten optischen Kanälen 16 und eine Strahlumlenkeinrichtung 18 aufweist. Die Strahlumlenkeinrichtung 18 ist ausgebildet, um einen Strahlengang 17 der optischen Kanäle 16 umzulenken und wird später ausführlich beschrieben. Die Vorrichtung 10 umfasst ein Gehäuse 22, das Außenflächen 23 aufweist, die ein Gehäusevolumen 24 umschließen. Das bedeutet, das Gehäusevolumen 24 kann ein Innenvolumen des Gehäuses 22 und das Volumen des Gehäuses 22 umfassen. Das Gehäusevolumen beinhaltet dabei auch ein Volumen, dass durch die Gehäusewände beansprucht wird und wird somit von den Außenflächen 23 des Gehäuses umschlossen. Das Gehäuse 22 kann transparent oder opak gebildet sein und bspw. Kunststoffmaterialien und/oder Metallmaterialien umfassen. Die Strahlumlenkeinrichtung 18 weist eine erste Position innerhalb des Gehäusevolumens 24 auf. Löcher oder Durchbrüche in den Gehäuseseiten, etwa für akustische Kanäle von Mikrophonen oder für elektrische Kontakte der Vorrichtung 10 können für die Bestimmung des Gehäusevolumens 24 vernachlässigt werden. Das Gehäuse 22 und/oder in dem Gehäuse 22 angeordnete Bauteile können den Strahlengang 17 der optischen Kanäle 16 nach einer Umlenkung durch die Strahlumlenkeinrichtung 18 blockieren, so dass ein außerhalb des Gehäuses 22 angeordnetes Gesichtsfeld 26 mit der Multiaperturabbildungsvorrichtung 11 erfasst werden soll nicht oder nur eingeschränkt erfassbar ist. Bei den Bauteilen kann es sich etwa um einen Akku, Platinen, nicht transparente Bereiche des Gehäuses 22 oder dergleichen handeln. Anders ausgedrückt kann an einem Gehäuse anstelle eines bisherigen Kameraobjektivs ein anderes, ggf. nicht-optisches Bauelement angeordnet werden.
  • Das Gehäuse 22 kann eine Öffnung 28 aufweisen, durch die das Gehäusevolumen 24 mit einem Außenvolumen 25 des Gehäuses 22 verbunden ist. Die Öffnung 28 kann zeitweise von einer Abdeckung 32 ganz oder teilweise verschlossen sein. Der erste Betriebszustand der Vorrichtung 10 kann ein inaktiver Betriebszustand der Multiaperturabbildungsvorrichtung 11 sein, bei dem die optischen Kanäle 16 bspw. auf die Innenseite des Gehäuses 22 gelenkt werden oder nicht umgelenkt werden.
  • In anderen Worten wird die Bauhöhe des Aufbaus der Multiaperturabbildungsvorrichtung zumindest teilweise vom Durchmesser von Optiken der optischen Kanäle 16 (Linsen) bestimmt. In einem (ggf. optimalen) Fall ist die Ausdehnung der Spiegel (Strahlumlenkeinrichtung) in dieser Dickenrichtung gleich groß der Ausdehnung der Linsen in dieser Richtung. Dabei wird jedoch der Strahlengang des optischen Kanals 16 durch den Spiegel 18 beschnitten. Dies führt zu einer Reduzierung der Bildhelligkeit, wobei diese Reduzierung abhängig vom Feldwinkel ist. Die vorliegenden Ausführungsbeispiele lösen dies Problem, indem Teile oder aber der gesamte Multikanalkameraaufbau bewegt wird, so dass im Betriebszustand der Kamera Teile des Aufbaus über das Gehäuse z.B. eines Smartphones herausragen verglichen mit dem Zustand der Nichtnutzung der Kamera. Die Bewegung der Teile, wie z.B. die Strahlumlenkeinrichtung, kann rotativ (Ausklappen oder Aufklappen), translativ (Ausfahren) oder aus einer Mischform bestehen. Die zusätzlichen Bewegungen von Teilen bzw. des Gesamtsystems ermöglichen, ähnlich bekannter Zoom-Objektive an Kompaktkameras, eine minimale Bauform im Nichtnutzungsmodus der Kameras und eine für die Realisierung der technischen Funktion optimierte, größere Bauform im Nutzungsmodus der Kamera.
  • Fig. 1b zeigt eine schematische Seitenschnittansicht der Vorrichtung 10 in einem zweiten Betriebszustand. In dem zweiten Betriebszustand weist die Strahlumlenkeinrichtung 18 eine zweite Position außerhalb des Gehäusevolumens 24 auf. Dies ermöglicht, dass die Strahlumlenkeinrichtung 18 die Strahlengänge 17 der optischen Kanäle 16 außerhalb des Gehäusevolumens 24 umlenkt und das Gesichtsfeld 26 außerhalb des Gehäuses 22 von der Multiaperturabbildungsvorrichtung 11 erfassbar ist. Die Abdeckung 32 kann aus der in Figur 1a gezeigten Position wegbewegt sein, so dass die Strahlumlenkeinrichtung 18 durch die Öffnung 28 des Gehäuses 22 aus dem Gehäusevolumen 24 bewegbar ist. Die Strahlumlenkeinrichtung 18 kann translatorisch und/oder rotatorisch zwischen der ersten Position und der zweiten Position bewegt werden. Vorteilhaft ist, dass die Bauteile innerhalb des Gehäuses 22 und/oder das Gehäuse 22 den umgelenkten Strahlengang 17 der optischen Kanäle 16 nicht blockieren.
  • Die Multiaperturabbildungsvorrichtung 11 kann in einem Kameragehäuse angeordnet sein, das wiederum zumindest teilweise in dem Gehäuse 22 angeordnet ist. Das Kameragehäuse kann bspw. zumindest teilweise von einem Verfahrschlitten, wie er im Zusammenhang mit Fig. 5 beschrieben ist, gebildet sein. Dies unterscheidet sich von einem Konzept, bei dem eine einkanalige Kamera mittels eines Umklapp-Mechanismus in verscheide Richtungen orientiert wird, dadurch, dass vorliegend eine Rotation oder Verkippung eines Bildsensors und/oder der Abbildungsoptik vermeidbar ist.
  • Ein Gesamtgesichtsfeld kann mittels der Vorrichtung 10 so erfasst werden, dass die Strahlumlenkeinrichtung ausgehend von der ersten Position in die zweite Position bewegt wird, in der die Strahlumlenkeinrichtung zumindest teilweise außerhalb eines Gehäusevolumens platziert wird. Weist die Strahlumlenkeinrichtung die zweite Position auf, kann das Gesamtgesichtsfeld und mit dem Array von nebeneinander angeordneten optischen Kanälen der Multiaperturabbildungsvorrichtung, deren Strahlengänge von der Strahlumlenkeinrichtung umgelenkt werden, erfasst werden.
  • Fig. 2a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 20 gemäß einem weiteren Ausführungsbeispiel in einem ersten Betriebszustand. Die Vorrichtung 20 weist die Abdeckung 23 auf, die drehbar an dem Gehäuse 22 gelagert ist, etwa über ein Verbindungselement 34a und/oder über ein optionales Verbindungselement 34b. Das Verbindungselement 34a und/oder 34b kann ausgebildet sein, um ein Verkippen und mithin eine rotatorische Bewegung zwischen der Abdeckung 23 der Strahlumlenkeinrichtung 18 gegenüber dem Gehäuse 22 zu ermöglichen und bspw. als Scharnier oder Walzenlager gebildet sein.
  • Die Strahlumlenkeinrichtung 18 kann eine Abdeckung des Gehäuses bilden oder ein Teil hiervon sein. Eine der strahlumlenkenden Oberflächen der Strahlumlenkeinrichtung 18 kann eine Außenkannte des Gehäuses sein. Die Strahlumlenkeinrichtung 18 weist eine erste Position auf und verschließt das Gehäuse 22 teilweise oder vollständig. Bspw. kann die Strahlumlenkeinrichtung 18 einen reflektiven Bereich zum Umlenken des Strahlengang 17 aufweisen und Kontaktbereiche aufweisen, die ausgebildet sind, um mit dem Gehäuse 22 in er ersten Position einen mechanischen Kontakt zu bilden. Vereinfacht ausgedrückt, kann die Kamera nicht oder kaum sichtbar sein, wenn sie nicht benutzt wird.
  • Fig. 2b zeigt eine schematische Seitenschnittansicht der Vorrichtung 20 in einem zweiten Betriebszustand. In dem zweiten Betriebszustand kann die Strahlumlenkeinrichtung 18 rotatorisch gegenüber dem Gehäuse 22 bewegt, d. h., ausgeklappt, sein, so dass das Gehäusevolumen 24 geöffnet ist. Die rotatorische Verkippung ermöglicht eine geneigte oder verkippte Orientierung der Strahlumlenkeinrichtung 18 gegenüber einem Verlauf des Strahlengangs 17 der optischen Kanäle 16 zwischen dem Bildsensor 12 und der Strahlumlenkeinrichtung 18, so dass der Strahlengang 17 an der Strahlumlenkeinrichtung 18 in eine erste Richtung 19a umgelenkt wird.
  • Fig. 2c zeigt eine schematische Seitenschnittansicht der Vorrichtung 20 in einer dritten Position. Die Vorrichtung 20 kann den zweiten Betriebszustand aufweisen. Verglichen mit der zweiten Position, wie sie in Fig. 2b dargestellt ist, kann die Strahlumlenkeinrichtung 18 den Strahlengang 17 der optischen Kanäle 16 in eine andere Richtung 19b umlenken, so dass ein anderes Gesichtsfeld oder ein an einem anderen Ort positioniertes Gesichtsfeld erfassbar ist. Bspw. kann es sich um eine erste Seite und eine gegenüberliegende Seite, wie etwa Vorderseite und Rückseite, Links und Rechts oder Oben und Unten der Vorrichtung 20 und/oder eines Nutzers handeln, in die das Strahlengang 17 umgelenkt wird. Die Verbindungselemente 34a und 34b können bspw. mit einer Rahmenstruktur und der Strahlumlenkeinrichtung 18 verbunden sein, so dass die Strahlumlenkeinrichtung 18 wechselseitig die zweite oder dritte Position aufweisen kann. Durch eine umschaltbare Blickrichtung der Multiaperturabbildungsvorrichtung können bisherige Lösungen insbesondere in Smartphones unter Nutzung zweier Kameras mit Blickrichtung nach vorn und hinten durch einen Aufbau ersetzt werden.
  • Fig. 3a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 30 gemäß einem weiteren Ausführungsbeispiel in dem ersten Betriebszustand. Verglichen mit der Vorrichtung 20, wie sie in den Figuren 2a-c beschrieben ist, weist die Vorrichtung 30 eine zumindest teilweise transparente Abdeckung 36 auf, die zwischen einer Außenkannte 23 des Gehäuses 22 und der Multiaperturabbildungsvorrichtung 11 angeordnet ist. Die zumindest teilweise transparente Abdeckung ist mit der Strahlumlenkeinrichtung 18 verbunden und ausgebildet, um sich basierend auf einer Bewegung der Strahlumlenkeinrichtung 18 zu bewegen. Die zumindest teilweise transparente Abdeckung 36 kann bspw. polymere und/oder Glasmaterialien aufweisen.
  • In anderen Worten können u. a. Vorrichtungen vorgesehen sein, die eine Kapselung der Optik zum Schutz vor Verschmutzung unter Möglichkeit der Änderung des gekapselten Volumens ermöglichen (bewegliche Deckgläser).
  • Fig. 3b zeigt eine schematische Seitenschnittansicht der Vorrichtung 30 in dem zweiten Betriebszustand. Verglichen mit der Vorrichtung 20 in Fig. 2b ist die zumindest teilweise transparente Abdeckung zumindest teilweise aus dem Gehäusevolumen 24 herausbewegt. Dies kann durch eine Rotationsbewegung der Strahlumlenkeinrichtung um das Verbindungselement 34 erfolgen. Die Strahlumlenkeinrichtung 18 ist ausgebildet, um den Strahlengang 17 der optischen Kanäle 16 so umzulenken, dass die optischen Kanäle durch die zumindest teilweise transparente Abdeckung verlaufen. Die Abdeckung 36 ist ausgebildet, um einen Eintritt von Partikeln, Schmutz und/oder Feuchtigkeit in das Gehäusevolumen 24 zu reduzieren oder zu verhindern. Die Abdeckung 36 kann dabei für die Strahlengänge 17 transparent gebildet sein und/oder teilweise opak ausgebildet sein. Bspw. kann die Abdeckung 36 für bestimmte Wellenlängenbereiche elektromagnetischer Strahlung intransparent sein. Vorteilhaft an der Abdeckung 36 ist, dass durch den reduzierten Umfang von Partikeln, Schmutz und/oder Feuchtigkeit eine lange Betriebsdauer der Vorrichtung und/oder eine dauerhaft hohe Bildqualität erhalten werden kann, da eine Verschmutzung von Optiken der optischen Kanäle gering ist.
  • Fig. 3c zeigt eine schematische Seitenschnittansicht der Vorrichtung 30, bei der die Strahlumlenkeinrichtung 18 mit einem optionalen Aktor 38 translatorisch entlang einer Richtung y senkrecht zu einer Richtung x des Strahlengangs 17 zwischen dem Bildsensor 12 und den optischen Kanälen 16 und senkrecht zu einer Richtung z senkrecht zu einer Zeilenerstreckungsrichtung des Arrays von optischen Kanälen 16 bewegbar ist. Die Strahlumlenkeinrichtung 18 kann auch basierend auf der Rotationsbewegung um das Verbindungselement 34 translatorisch bewegt werden, etwa über eine Führung, einen Hebel oder dergleichen. Das Aufklappen (Rotationsbewegung) kann manuell oder unter Nutzung eines Aktors erfolgen. Der optionale Aktor 38 kann an der Strahlumlenkeinrichtung 18 angeordnet sein. Alternativ kann der Aktor 38 zwischen dem Gehäuse 22 und der Strahlumlenkeinrichtung 18 angeordnet sein. Der Aktor 38 kann bspw. zwischen dem Gehäuse 22 und dem Verbindungselement 34a und/oder zwischen dem Verbindungselement 34a und der Strahlumlenkeinrichtung 18 angeordnet sein. Vorteilhaft daran ist, dass durch die translatorische Bewegung der Strahlumlenkeinrichtung entlang der x-Richtung das Gehäuse eine Abschattung des zu erfassenden Gesichtsfeldes durch das Gehäuse 22 reduzierbar ist.
  • Fig. 4a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 40 gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand. Die Strahlumlenkeinrichtung 18 ist in der ersten Position innerhalb des Gehäusevolumens des Gehäuses 22 angeordnet und ausgebildet, um basierend auf einer tränslatorischen Bewegung 42 von der ersten Position in die zweite Position bewegt zu werden, die schematisch in Fig. 4b dargestellt ist. Wie in Fig. 4a dargestellt, kann das Gehäuse die Abdeckung 32 aufweisen, die das Gehäuse 22 bzw. eine Öffnung darin in dem ersten Betriebszustand verschließt. Die Strahlumlenkeinrichtung 18 kann in dem ersten Betriebszustand so orientiert sein, dass sie senkrecht zu einer Richtung x, die durch den optischen Strahlengang innerhalb des Gehäuses 22 definiert wird, eine minimale Ausdehnung aufweist.
  • Fig. 4b zeigt eine schematische Seitenschnittansicht der Vorrichtung 40 in dem zweiten Betriebszustand. Die Strahlumlenkeinrichtung ist basierend auf der translatorischen Bewegung 42, bspw. entlang der x-Richtung aus dem Gehäusevolumen 24 herausbewegt. Hierfür kann die Strahlumlenkeinrichtung 18 durch die Öffnung 28 bewegt werden. Die Strahlumlenkeinrichtung 18 kann um eine Rotationsachse 44 rotatorisch bewegbar sein. Während der translatorischen Bewegung zwischen dem ersten Betriebszustand und dem zweiten Betriebszustand kann die Strahlumlenkeinrichtung 18 eine rotatorische Bewegung um die Rotationsachse 44 ausführen. Eine Winkelorientierung der Strahlumlenkeinheit kann verglichen mit dem ersten Betriebszustand aus Fig. 4a verändert sein, so dass die vom Strahlengang der Multiaperturabbildungsvorrichtung genutzte Fläche der Strahlumlenkeinrichtung verglichen mit dem ersten Betriebszustand zunimmt. Eine Rotationsbewegung 46 um die Rotationsachse 44 ermöglicht eine veränderliche Neigung der Strahlumlenkeinrichtung 18 gegenüber dem Strahlengang 17 zwischen den optischen Kanälen 16 und der Strahlumlenkeinrichtung 18 und mithin eine veränderliche Richtung in die der Strahlengang 17 der optischen Kanäle 16 abgelenkt wird. Die optischen Kanäle 16 können Optiken 64a-b aufweisen.
  • Zusätzlich zur Strahlumlenkeinrichtung 18 können in dem zweiten Betriebszustand Optiken 64a-b der optischen Kanäle 16 und/oder der Bildsensor 12 außerhalb des Gehäusevolumens 24 angeordnet sein. Bspw. können die Optiken 64a-b der optischen Kanäle 16 und/oder der Bildsensor 12 mit der Strahlumlenkeinrichtung 18 mitbewegt werden, etwa translativ. Dies ermöglicht, einen geringen bis minimalen Abstand zwischen den Optiken 64a-b der optischen Kanäle und der Strahlumlenkeinrichtung 18, insbesondere im zweiten Betriebszustand. Der geringe Abstand ermöglicht eine geringe Flächenausdehnung der Strahlumlenkeinrichtung 18. Ein zunehmender Abstand würde eine größere Fläche der Strahlumlenkeinrichtung 18 und zur Erzielung gleicher Abbildungsparameter einen größeren Abstand der optischen Kanäle erfordern, um den Strahlengang der optischen Kanäle 16 vollständig umzulenken. Durch den geringen oder minimalen Abstand kann auch die Strahlumlenkeinrichtung 18 eine geringe Fläche aufweisen, was vorteilhaft ist, da insbesondere eine minimale Ausdehnung in y-Richtung senkrecht zur x-Richtung in der Betrachtungsebene erreicht wird und da ein kleineres Bauteil bewegt werden muss und durch eine Rotationsbewegung eine Dicke der Vorrichtung nur gering oder nicht erhöht werden muss gegenüber einem Zustand in welchem die Strahlumlenkeinrichtung 18 nicht angeordnet ist. Die geringe Größe wirkt sich auch vorteilhaft für einen Bauraumbedarf, bspw. im ersten oder zweiten Betriebszustand aus.
  • In anderen Worten umfassen Multiaperturkameras mit linearer Kanalanordnung mehrere optische Kanäle, die nebeneinander angeordnet sind, und jeweils Teile des Gesamtgesichtsfeldes übertragen. Vorteilhafterweise ist ein Spiegel vor den Abbildungslinsen angebracht, der zur Strahlumlenkung genutzt werden kann und zur Reduzierung der Bauhöhe beiträgt. In Kombination mit einem kanalweise angepassten Spiegel, etwa ein Facettenspiegel, wobei die Facetten plan oder beliebig gekrümmt oder mit einer Freiformfläche versehen sind, ist es vorteilhafterweise möglich, dass die Abbildungsoptiken der optischen Kanäle im Wesentlichen identisch aufgebaut sind, wohingegen die Blickrichtung der Kanäle durch die einzelnen Facetten des Spiegel-Arrays vorgegeben sind. Eine Oberfläche der Strahlumlenkeinrichtung ist zumindest an den optischen Kanälen zugeordneten reflektierenden Facetten verspiegelt. Es ist auch möglich, dass die Abbildungsoptiken der Kanäle unterschiedlich ausgeprägt sind, so dass sich unterschiedliche Blickrichtungen durch den Winkel der Spiegelfacette und der Gestaltung des jeweiligen optischen Kanals ergeben. Es ist weiterhin möglich, dass mehrere Kanäle denselben Bereich der Strahlumlenkeinrichtung nutzen und damit die Anzahl von Facetten kleiner als die der Kanäle ist. Der Ablenkspiegel kann dabei drehbar gelagert sein, wobei die Drehachse bspw. parallel zur Erstreckungsrichtung der Kanäle verläuft. Der Ablenkspiegel kann beidseitig reflektiv sein, wobei metallische oder dielektrische Schichten(folgen) genutzt werden können. Die Drehung des Spiegels kann analog oder bistabil oder mehrfach stabil erfolgen. Basierend auf der Dreh- oder Rotationsbewegung kann die Strahlumlenkeinrichtung zwischen zumindest einer ersten Stellung und einer zweiten Stellung bewegbar sein, wobei die Strahlengänge in jeder Stellung in voneinander verschiedene Richtungen umgelenkt werden. Ähnlich, wie es für die Stellungen der Strahlumlenkeinrichtung 18 in den Fig. 2-c beschrieben ist kann die Strahlumlenkeinrichtung auch um eine Rotationsachse bewegt werden. Zusätzlich zur translatorischen Bewegung der Gehäuseabdeckung 32 und der Strahlumlenkeinrichtung 18 können Teile bzw. alle zusätzlichen Komponenten der Multiaperturabbildungsvorrichtung translativ in dieselbe Richtung mitbewegt werden, wobei gleiche oder auch unterschiedliche Stellwege möglich sind.
  • Fig. 5a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 50 bei der die Abdeckung 32 rotatorisch bewegbar über ein Bewegungselement 34 an einer Gehäuseseite 22b des Gehäuses 22 angeordnet ist. Die Strahlumlenkeinrichtung 18 kann mit einem Verfahrschlitten 47 mechanisch verbunden sein. Der Verfahrschlitten 47 kann als mechanische Transporteinrichtung zum Bewegen zumindest der Strahlumlenkeinrichtung 18 verstanden werden. Die Vorrichtung 50 kann einen Aktor 33 umfassen, der ausgebildet ist, um den Verfahrschlitten 47 translatorisch zu bewegen. Der Aktor kann einen beliebigen Antrieb, etwa einen Schrittmotor, einen piezoelektrischen Antrieb oder einen Tauchspulenantrieb umfassen. Alternativ oder zusätzlich zu dem Aktor 33 kann die Vorrichtung 50 einen Aktor 33' umfassen, der ausgebildet ist, um eine mechanische Verriegelung 35 zu lösen, die die Abdeckung 32 und das Gehäuse an zumindest einer Gehäuseseite 22a verriegelt. Bspw. kann die Strahlumlenkeinrichtung oder der Verfahrschlitten 47 mittels einer Federkraft aus dem Gehäuse fahrbar sein, wenn die Verriegelung 33' gelöst wird. Das bedeutet, die Verriegelung 35 kann ausgebildet sein, um die Strahlumlenkeinrichtung 18 in der ersten Position zu halten. Der Verfahrschlitten 47 kann auch in Vorrichtung 40 angeordnet sein. Das bedeutet, der Verfahrschlitten 47 ist auch bei einer translatorischen Bewegung der Abdeckung 32 einsetzbar.
  • Fig. 5b zeigt eine schematische Seitenschnittansicht der Vorrichtung 50 bei der der Verfahrschlitten 47 entlang der translatorischen Bewegungsrichtung 42 bewegt ist, so dass die Strahlumlenkeinrichtung 18 aus dem Gehäusevolumen 24 herausbewegt ist. Der Bildsensor 12 und/oder Optiken der optischen Kanäle 16 können ebenfalls mit dem Verfahrschlitten 47 mechanisch verbunden sein und mit der Strahlumlenkeinrichtung 18 in einem gleichen Umfang mitbewegbar sein. Alternativ können der Bildsensor 12 und/oder die Optiken der optischen Kanäle 16 in einem geringeren Umfang als die Strahlumlenkeinrichtung 18 bewegbar sein, so dass ein Abstand zwischen dem Bildsensor 12, den Optiken und/oder Strahlumlenkeinrichtung 18 während eines Herausfahrens vergrößert wird. Alternativ oder zusätzlich können der Bildsensor 12 und/oder die Optiken der optischen Kanäle ortsfest bzgl. des Gehäuses angeordnet sein, so dass lediglich die Strahlumlenkeinrichtung 18 mittels des Verfahrschlittens 47 bewegt wird. Ein sich vergrößernder Abstand zwischen dem Bildsensor 12, den Optiken und/oder Strahlumlenkeinrichtung 18 während eines Herausfahrens ermöglicht einen geringen Abstand der Komponenten in dem ersten Betriebszustand, so dass die Multiaperturabbildungsvorrichtung mit einem geringen Bauraumbedarf in dem Gehäuse 22 untergebracht werden kann.
  • Fig. 5c zeigt eine schematische Seitenschnittansicht der Vorrichtung 50 in dem zweiten Betriebszustand. Die Strahlumlenkeinrichtung kann rotatorisch gelagert sein, um die Rotationsbewegung 46 auszuführen, wie es bspw. für die Vorrichtung 40 beschrieben ist. Wie es im Zusammenhang mit Fig. 4b beschrieben ist, kann die Winkelorientierung der Strahlumlenkeinrichtung 18 verglichen mit dem ersten Betriebszustand aus Fig. 5a oder dem Zustand in Fig. 5b verändert sein, so dass die vom Strahlengang der Multiaperturabbildungsvorrichtung genutzte Fläche der Strahlumlenkeinheit verglichen mit dem ersten Betriebszustand zunimmt. Eine den optischen Kanälen 16 bzw. dem Bildsensor 12 zugewandte Seite der Strahlumlenkeinrichtung 18 kann eine Abmessung B senkrecht zu der translatorischen Bewegungsrichtung 42, bspw. entlang der y-Richtung aufweisen, die größer ist, als eine Abmessung A des Bildsensors 12 bzw. der optischen Kanäle 16 entlang dieser Richtung. Die Abmessung B ist bspw. senkrecht zu einer Zeilenerstreckungsrichtung des Arrays und parallel zu einer Oberfläche eines Bildsensors, auf den die optischen Kanäle treffen. Dies kann dazu führen, dass ein hohes Maß an Licht von der Stahlumlenkeinrichtung 18 umlenkbar ist und eine Helligkeit eines zu erfassenden Bildes hoch ist. In der in Fig. 5a gezeigten Stellung ist die Ausdehnung oder Abmessung B kleiner als in der in Fig. 5c gezeigten Stellung oder einer Stellung, in der die Strahlumlenkeinrichtung 18 den Strahlengang in eine andere Blickrichtung lenkt.
  • Fig. 6a zeigt eine schematische Seitenschnittansicht einer Vorrichtung 60 gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand. Die Strahlumlenkeinrichtung 18 weist die erste Position auf. Verglichen mit der Vorrichtung 40 und der Vorrichtung, wie sie in den Figuren 4a und 4b beschrieben ist, weist die Vorrichtung 50 zumindest teilweise transparente Abdeckungen 36a und 36b auf, die mit der Abdeckung 32 verbunden sind und mit dieser entlang der translatorischen Bewegungsrichtung 42 bewegbar sind. Die zumindest teilweise transparenten Abdeckungen 36a und 36b können jeweils an voneinander verschiedenen Seiten der Strahlumlenkeinrichtung 18 zwischen selbiger und dem Gehäuse 22 angeordnet sein. In dem ersten Betriebszustand können die Abdeckungen 36a und 36b teilweise oder vollständig innerhalb des Gehäusevolumens 24 angeordnet sein. Die Abdeckungen 36a und 36b können bspw. an dem in den Fig. 5a-c dargestellten Verfahrschlitten 47 angeordnet oder transparente Bereiche des Verfahrschlittens 47 sein.
  • Fig. 6b zeigt eine schematische Seitenschnittansicht der Vorrichtung 60, bei der die Strahlumlenkeinrichtung 18 eine Zwischenposition zwischen der ersten Position und der zweiten Position aufweist. Bspw. kann die Zwischenposition der Strahlumlenkeinrichtung während eines Einfahrens oder eines Ausfahrens der Strahlumlenkeinrichtung 18 in das Gehäusevolumen 24 hinein bzw. aus dem Gehäusevolumen 24 heraus erhalten werden. Die Strahlumlenkeinrichtung 18 ist teilweise aus dem Gehäusevolumen 24 herausbewegt.
  • Fig. 6c zeigt eine schematische Seitenschnittansicht der Vorrichtung 60, bei der die Strahlumlenkeinrichtung 18 die zweite Position aufweist, d.h., die Strahlumlenkeinrichtung 18 ist bspw. vollständig aus dem Gehäusevolumen 24 herausgefahren. Die zumindest teilweise transparenten Abdeckungen 36a und 36b weisen einen Abstand 48 zueinander auf, der kleiner ist als ein vergleichbarer Abstand zwischen Seitenflächen des Gehäuses 22a und 22b.
  • Fig. 6d zeigt eine schematische Seitenschnittansicht der Vorrichtung 60, bei der ein Abstand der zumindest teilweise transparenten Abdeckungen 36a und 36b verglichen mit den Fig. 6a-c vergrößert ist. Die zumindest teilweise transparenten Abdeckungen 36a und/oder 36b können entlang einer von der jeweils anderen zumindest teilweise transparenten Abdeckung 36a bzw. 36b abgewandte translatorische Bewegungsrichtung 52a bzw. 52b, bspw. entlang einer positiven oder negativen y-Richtung bewegbar sein. Der in den Fig. 6a-c dargestellte Zustand der zumindest teilweise transparenten Abdeckungen 36a und 36b kann als eingefahrener oder zusammengeklappter Zustand verstanden werden. Der in Fig. 6d dargestellte Zustand kann als ausgefahrener oder ausgeklappter Zustand verstanden werden, bei dem ein Abstand 48' zwischen den zumindest teilweise transparenten Abdeckungen 36a und 36b gegenüber dem Abstand 48 verändert, bspw. vergrößert ist. Der Abstand 48' kann bspw. größer oder gleich sein, als der Abstand zwischen den vergleichbaren Seiten des Gehäuses 22. Die Strahlumlenkeinrichtung 18 ist ausgebildet, um die Strahlengänge der optischen Kanäle so umzulenken, dass sie durch die zumindest teilweise transparenten Abdeckungen 36a und/oder 36b verlaufen. Wie es im Zusammenhang mit Fig. 4b, Fig. 5a und Fig. 5b beschrieben ist, kann die Winkelorientierung der Strahlumlenkeinrichtung 18 verglichen mit dem ersten Betriebszustand aus Fig. 6a oder dem Zustand in Fig. 6b oder 6c verändert sein, so dass die vom Strahlengang der Multiaperturabbildungsvorrichtung genutzte Fläche der Strahlumlenkeinheit verglichen mit dem ersten Betriebszustand zunimmt. Der vergrößerte Abstand 48' kann alternativ oder zusätzlich einen erhöhten Umfang der rotatorischen Bewegung 46 ermöglichen. Mit der rotatorischen Bewegung 46 kann die Strahlumlenkeinrichtung 18 zwischen zumindest einer ersten und einer weiteren Stellungumschaltbar sein, wobei jede Stellung einer Blickrichtung der Multiaperturabbildungsvorrichtung zugeordnet werden kann. Die Drehung des Spiegels kann analog oder bistabil oder mehrfach stabil erfolgen. Die rotatorische Bewegung 46 zur Veränderung einer Blickrichtung der Multiaperturabbildungsvorrichtung kann mit einer Rotationsbewegung der Strahlumlenkeinrichtung 18 zur optischen Bildstabilisierung kombiniert werden, was im Zusammenhang mit Fig. 12 beschrieben ist. Die Abdeckungen 36a und/oder 36b können die anderen Komponenten der Multiaperturabbildungsvorrichtung kapseln.
  • Die gegenüberliegend angeordneten Abdeckungen 36a und/oder 36b bzw. transparente Bereiche hiervon können eine schaltbare Blende aufweisen, so dass die schaltbare Blende bspw. ober- und/oder unterhalb oder entlang einer beliebigen anderen Richtung der Strahlumlenkeinrichtung eingebracht ist. Die Blende kann nach Betriebszustand und Blickrichtung der Kamera geschaltet werden. Bspw. kann jeweils eine nicht genutzt Blickrichtung der Multiaperturabbildungsvorrichtung von der Blende zumindest teilweise verschlossen werden, um einen Eintritt von Falschlicht zu reduzieren. Die Blenden können z. B. mechanisch bewegt oder elektrochrom sein. Die von der Blende beeinflussten Bereiche können zusätzlich mit einer schaltbaren Blende ausgestattet sein, die den optischen Aufbau für den Fall der Nichtbenutzung abdeckt. Die Blende kann elektrisch steuerbar sein und eine elektro-chrome Schicht(folge) umfassen. Die Blende kann ein mechanisch bewegtes Teil umfassen. Die Bewegung kann unter Nutzung pneumatischer, hydraulischer, piezoelektrischer Aktoren, DC-Motoren, Schrittmotoren, thermischer Aktoren, elektrostatischer Aktoren, elektrostriktiver und/oder magnetostriktiver Aktoren oder Antriebe erfolgen. In einem Zustand der Multiaperturabbildungsvorrichtung, bei der die Blickrichtung eine Blende durchdringt kann die Blende so geschaltet werden, um die Strahlengänge der optischen Kanäle durchzulassen. Das bedeutet, dass die Multiaperturabbildungsvorrichtung einen ersten Betriebszustand und einen zweiten Betriebszustand aufweisen kann. Die Strahlumlenkeinrichtung kann den Strahlengang der optischen Kanäle in dem ersten Betriebszustand so umlenken, dass dieser durch einen ersten transparenten Bereich der Abdeckung 36a verläuft. In dem zweiten Betriebszustand kann der Strahlengang der optischen Kanäle so umgelenkt werden, dass dieser durch einen zweiten transparenten Bereich der Abdeckung 36b verläuft. Eine erste Blende 53a kann ausgebildet sein, um den ersten transparenten Bereich in dem zweiten Betriebszustand optisch zumindest teilweise zu verschließen. Eine zweite Blende 53b kann ausgebildet sein, um den zweiten transparenten Bereich in dem ersten Betriebszustand optisch zeitweise zumindest teilweise zu verschließen. So kann ein Eintritt von Falschlicht aus einer Richtung, die nicht die aktuelle Blickrichtung der Multiaperturabbildungsvorrichtung ist, reduziert werden, was sich vorteilhaft auf die Bildqualität auswirkt. Die erste und/oder zweite Blende 53a-b kann für zumindest einen, für zumindest zwei oder für alle der optischen Kanäle wirksam sein. Bspw. können zumindest einer, zumindest zwei oder alle optischen Kanäle der Multiaperturabbildungsvorrichtung durch die erste Blende verlaufen, wenn der Strahlengang der optischen Kanäle durch den ersten transparenten Bereich gelenkt wird und durch die zweite Blende verlaufen, wenn der Strahlengang der optischen Kanäle durch den zweiten transparenten Bereich gelenkt wird.
  • Es wird darauf hingewiesen, dass es möglich ist, einen Mechanismus zum Ausklappen der Strahlumlenkeinrichtung gemäß den Figuren 2 und 3 mit einem Mechanismus zum translatorischen Bewegen zu kombinieren, d.h., es können Mischformen auftreten. Ein Aufklappen des Gehäuses und/oder ein Ausfahren der Strahlumlenkeinrichtung kann derart erfolgen, dass ggf. das Abbildungsmodul, d. h., die optischen Kanäle, Optiken davon und/oder der Bildsensor aus dem Gehäusevolumen bewegt werden. Eine Winkeländerung der Strahlumlenkeinrichtung kann ermöglichen, dass eine Ausdehnung der Multiaperturabbildungsvorrichtung in Dickenrichtung groß ist und/oder dass die Strahlumlenkeinrichtung den Strahlengang ungehindert nach "vorn" und "hinten" umlenken kann. Deckgläser, etwa die Abdeckungen 36 können auch bzgl. der ausgeklappten bzw. ausgefahrenen Elemente fixiert sein. Die Deckgläser können beliebige, ebene oder nicht-ebene Flächen aufweisen.
  • Fig. 7 zeigt eine schematische perspektivische Ansicht einer Vorrichtung 70 gemäß einem Ausführungsbeispiel, die drei Multiaperturabbildungsvorrichtungen 11a-c aufweist. Die Multiaperturabbildungsvorrichtungen 11a-c können translatorisch entlang einer jeweiligen translatorischen Bewegungsrichtung 42a-c bewegbar sein. Die Multiaperturabbildungsvorrichtungen 11a-c können in Nebenseiten 22c-f des Gehäuses 22 angeordnet sein. Das Gehäuse kann flach gebildet sein, das bedeutet, eine erste Ausdehnung des Gehäuses 22 entlang einer ersten Gehäuserichtung, bspw. eine x-Richtung, und eine zweite Ausdehnung des Gehäuses 22 entlang einer zweiten Gehäuserichtung, bspw. eine z-Richtung, kann mindestens eine dreifache Abmessung, mindestens eine fünffache oder mindestens eine siebenfache Abmessung verglichen mit einer dritten Ausdehnung des Gehäuses22 entlang einer dritten Gehäuserichtung, etwa die y-Richtung, aufweisen. Eine Hauptseite 22a und/oder 22b des Gehäuses 22 kann die erste und die zweite Abmessung aufweisen und bspw. parallel zu einer x/z-Ebene im Raum angeordnet sein. Die Nebenseiten 22c-f können die Hauptseiten 22a und 22b verbinden bzw. dazwischen angeordnet sein.
  • Die Multiaperturabbildungsvorrichtungen 11a und 11b können in oder an derselben Seite 22d in dem Gehäuse 22 angeordnet sein und bspw. einen Basisabstand BA zueinander aufweisen, wie zum Beispiel zum Zweck der Stereoskopie. Mehr als zwei Module wären ebenfalls denkbar. So kann das Gesamtgesichtsfeld bspw. stereoskopisch oder höher durch eine Verwendung der Multiaperturabbildungsvorrichtung 11c und zumindest einer weiteren Multiaperturabbildungsvorrichtung 11a und/oder 11b erfasst werden. Die Multiaperturabbildungsvorrichtungen 11a, 11b und/oder 11c können einzeln bewegbar sein. Alternativ können zwei oder mehrere die Module auch gemeinsam als Gesamtsystem bewegbar sein.
  • Wie es nachfolgend ausführlich beschrieben ist, kann die Vorrichtung 70 ausgebildet sein, um ein Gesamtgesichtsfeld zumindest stereoskopisch zu erfassen. Das Gesamtgesichtsfeld ist bspw. an einer der Hauptseite 22a oder 22b angeordnet, kann jedoch auch an einer Nebenseite 22c-f angeordnet sein. Beispielsweise können die Multiaperturabbildungsvorrichtungen 11a-c jeweils das Gesamtgesichtsfeld aufnehmen. Obwohl die Multiaperturabbildungsvorrichtungen 11a-c räumlich von einander beabstandet angeordnet dargestellt sind, können die Multiaperturabbildungsvorrichtungen 11a, 11b und/oder 11c auch räumlich benachbart oder kombiniert angeordnet sein. Bspw. können die ggf. einzeilig gebildeten Arrays der Abbildungsvorrichtungen 11a und 11b nebeneinander oder parallel zu einander angeordnet sein, wie es bspw. im Zusammenhang mit Fig. 13b beschreiben ist. Die Arrays können Zeilen zueinander bilden, wobei jede Multiaperturabbildungsvorrichtung 11a und 11b ein einzeiliges Array aufweist. Die Abbildungsvorrichtungen 11a und 11b können eine gemeinsame Strahlumlenkeinrichtung und/oder einen gemeinsamen Träger von Optiken der optischen Kanäle und/oder ein gemeinsamen Bildsensor aufweisen.
  • Fig. 8 zeigt eine vergrößerte perspektivische Ansicht eines Ausschnitts der Vorrichtung 70 und der Multiaperturabbildungsvorrichtungen 11a und 11b. Die Vorrichtung 70 weist den zweiten Betriebszustand auf. Bspw. ragt die Multiaperturabbildungsvorrichtung 11a und/oder 11b über die ursprüngliche Gehäuseseite heraus. Die Strahlumlenkeinrichtungen 18a und 18b sind basierend auf den translatorischen Bewegungsrichtungen 42a und 42b zumindest teilweise außerhalb des Gehäusevolumens bewegt. Alternativ kann in dem zweiten Betriebszustand auch lediglich ein Teil der Strahlumlenkeinrichtungen der Multiaperturabbildungsvorrichtungen 11a-c aus dem Gehäusevolumen des Gehäuses 22 bewegt sein.
  • Die Multiaperturabbildungsvorrichtungen 11 a-b weisen bspw. jeweils vier optische Kanäle 16a-d und 16e-h auf. Die Strahlumlenkeinrichtungen 18a und 18b sind jeweils ausgebildet, um die Strahlengänge 17a-d bzw. 17e-h der optischen Kanäle 16a-d bzw. 17e-h umzulenken. Wie später ausführlich beschrieben ist, können andere Multiaperturabbildungsvorrichtungen eine von einander verschiedene Anzahl von optischen Kanälen aufweisen. Die Multiaperturabbildungsvorrichtungen11a-b können eine gleiche oder eine von einander verschiedene Anzahl optischer Kanäle aufweisen.
  • Die Multiaperturabbildungsvorrichtungen 11a und 11b weisen jeweils Beleuchtungseinrichtungen 54a und 54b bzw. 54c und 54d auf. Die Beleuchtungseinrichtungen 54a-d sind ausgebildet, um das zu erfassende Gesamtgesichtsfeld zumindest teilweise zu beleuchten und können bspw. jeweils ausgebildet sein, um ein Zentrum des zu erfassenden Gesamtgesichtsfeldes (Objektbereich) zu beleuchten. Gemäß einem Ausführungsbeispiel kann zumindest eine der Beleuchtungseinrichtungen 54a oder 54b bzw. 54c oder 54d so angeordnet sein, dass sie entlang einer mittleren Blickrichtung der optischen Kanäle 16a-d bzw. 16e-h das Gesamtgesichtsfeld beleuchtet. Das Gesamtgesichtsfeld kann von einander verschiedene Teilgesichtsfelder aufweisen, die jeweils von zumindest einem optischen Kanal 16a-d bzw. 16e-h erfasst werden. Eine mittlere Blickrichtung von optischen Kanälen 16a-d oder 16e-h kann bspw. ein geometrisches Mittel der Blickrichtungen oder ein Medianwert der Blickrichtungen sein.
  • Die Beleuchtungseinrichtungen 54a-b und 54c-d können als Blitzlicht der jeweiligen Multiaperturabbildungsvorrichtung 11a oder 11b betrieben werden und eine beliebige Lichtquelle umfassen. Vorteilhaft kann die Lichtquelle bspw. als lichtemittierende Diode (LED) ausgeführt sein, da diese einen geringen Bauraumbedarf und einen geringen Energiebedarf aufweisen. Gemäß weiteren Ausführungsbeispielen kann eine Multiaperturabbildungsvorrichtung keine, eine oder mehr als zwei Beleuchtungseinrichtungen 54a-d umfassen, wobei die Anzahl von Beleuchtungseinrichtungen 54a-d einer Multiaperturabbildungsvorrichtung von anderen Multiaperturabbildungsvorrichtungen einer Vorrichtung verschieden oder gleich sein kann. Zumindest eine der Beleuchtungseinrichtungen 54a-d kann ausgebildet ist, um mehrere Objektbereiche auszuleuchten. So kann bspw. Licht wahlweise in eine oder in mehrere Richtungen von der Beleuchtungseinrichtung ausgesendet werden. Die Beleuchtungseinrichtung kann entlang zumindest zweier Blickrichtungen der Multiaperturabbildungsvorrichtung Licht aussenden. Hierfür kann die Beleuchtungseinrichtung zumindest zwei Lichtquellen umfassen. Die Lichtquellen können Licht in gegenüberliegenden Seiten der Vorrichtung aussenden. Bspw. kann jeweils eine Lichtquelle auf einer Ober- und einer Unterseite, einer Vorder- und einer Rückseite und/oder einer linken und rechten Seite des Verfahrschlittens 47 angebracht sein, wobei jeweils nur die Lichtquelle(n) der Seite genutzt werden, die dem aufzunehmenden Objektbereich entsprechend der gewählten Orientierung und damit des Betriebszustands der Strahlumlenkeinrichtung 18 gegenüberliegt und in dessen Richtung Licht aussendet. Die oben erwähnten Vorder-, Rück-, Ober- und Unterseite sowie die Bezeichnungen links oder rechts sollen lediglich der Verdeutlichung dienen und nicht einschränkend verstanden werden, da sie mit jeder Orientierung im Raum wechselseitig vertauschbar sind. Das bedeutet bspw., dass Lichtquellen 54i auf Vorder- und Rückseite des Verfahrschlittens 47b angeordnet sein können und je nach Stellung der Strahlumlenkeinrichtung 18b entsprechende Lichtquellen genutzt werden können. Die anderen, gegenüberliegenden Lichtquellen können ungenutzt bleiben.
  • Beispielsweise sind die Beleuchtungseinrichtungen 54a und 54b zwischen der Strahlumlenkeinrichtung 18a und dem Bildsensor 12a der Multiaperturabbildungsvorrichtung 11a angeordnet. Die Strahlumlenkeinrichtung 18 kann ausgebildet sein, um eine von der Beleuchtungseinrichtung 54a und/oder 54b ausgesendete Beleuchtungsstrahlung, etwa ein Blitzlicht, umzulenken. Die Beleuchtungseinrichtungen 54a-b können in dem ersten Betriebszustand und in dem zweiten Betriebszustand der Vorrichtung 70 innerhalb des Gehäusevolumens angeordnet sein. Die Beleuchtungsstrahlung kann zumindest teilweise Teil der Strahlengänge 17a-d sein. Wie es bspw. für die Multiaperturabbildungsvorrichtung 11b dargestellt ist, kann eine Beleuchtungseinrichtung 54c und/oder 54d lateral neben der Strahlumlenkeinrichtung an dem Verfahrschlitten 47b angeordnet sein. Die Beleuchtungseinrichtungen 54c und 54d können mit der translatorischen Bewegung 42b in das Gehäuse 22 oder aus dem Gehäuse 22 bewegt werden. Obwohl die Beleuchtungseinrichtung im Zusammenhang mit der Vorrichtung 70 beschrieben sind, können auch andere hierin beschriebene Vorrichtungen oder Multiaperturabbildungsvorrichtungen eine Beleuchtungseinrichtung aufweisen.
  • Die Beleuchtungseinrichtungen 54c und 54d können mit dem Verfahrschlitten 47a mechanisch verbunden sein und damit im ersten Betriebszustand innerhalb des Volumens 24 angeordnet und mithin für einen Nutzer nicht sichtbar angeordnet sein. Die Beleuchtungseinrichtungen 54a und 54b können alternativ und/oder zusätzlich stationär in dem Gehäuse 22 angeordnet sein. Eine Bewegung des Verfahrschlittens 47b kann eine Bewegung der Beleuchtungseinrichtungen 54c und 54d bewirken.
  • Zusammen mit der Strahlumlenkeinrichtung 18a bzw. 18b können auch Optiken 16a-d oder 16e-f und ggf. der Bildsensor 12a bzw. 12b durch die Bewegung des Verfahrschlittens 47a bzw. 47b aus dem Gehäusevolumen bewegt werden.
  • In anderen Worten können auf den bewegten Teilen LEDs für die Realisierung einer zusätzlichen Beleuchtung (Blitzlicht) angebracht sein. Die LEDs können dabei so angebracht sein, dass sie in die mittlere Richtung der Kanäle strahlen bzw. können die Strahlumlenkeinrichtungen weitere Bereiche vorhalten, die zur Umlenkung der Strahlung genutzt wird.
  • Fig. 9 zeigt eine schematische perspektivische Ansicht einer Vorrichtung 90 gemäß einem Ausführungsbeispiel, die den zweiten Betriebszustand aufweist. Die Strahlumlenkeinrichtung 18 kann mittels Befestigungselementen 56a und 56b mit der Multiaperturabbildungsvorrichtung verbunden sein. Die Befestigungselemente 56a und 56b können Teil eines Verfahrschlittens sein.
  • Fig. 10a zeigt eine schematische perspektivische Ansicht einer Vorrichtung 100 gemäß einem Ausführungsbeispiel in dem ersten Betriebszustand. Die Abdeckung 32 kann mit einer Gehäusehauptseite und/oder eine Gehäusenebenseite, bspw. die Gehäusenebenseite 22c eine Ebene bilden. Zwischen der Abdeckung 32 und der Gehäuseseite 22c kann kein Spalt oder lediglich eine kleiner Spalt, etwa kleiner oder gleich 1 mm, kleiner oder gleich 0,5 mm oder kleiner oder gleich 0,1 mm angeordnet sein, so dass ein Übergang zwischen der Abdeckung 32 und der Gehäuseseite 22c nicht oder kaum wahrnehmbar ist. Vereinfacht ausgedrückt kann die Abdeckung 32 nicht sichtbar sein.
  • Fig. 10b zeigt eine schematische Ansicht der Vorrichtung 100 in dem zweiten Betriebszustand. Die Strahlumlenkeinrichtung 18 weist die zweite Position außerhalb des Gehäusevolumens auf. Von außen betrachtet kann die ausgefahrene Multiaperturabbildungsvorrichtung vom ruhendem Gehäuserahmen allseitig umschlossen sein und/oder ein Erscheinungsbild wie eine Taste aufweisen. Bspw. kann die Vorrichtung 100 ausgebildet sein, um bei einem mechanischen Druck auf die Abdeckung 32 gem. Fig. 10a eine mechanische Verriegelung zu lösen, so dass die Strahlumlenkeinrichtung aus dem Gehäuse 22 fahrbar ist, etwa basierend auf einer Federkraft. Der mechanische Druck kann bspw. durch einen Aktor und/oder durch einen Benutzer erzeugt werden, etwa durch einen Fingerdruck. Von der zweiten Position kann die Strahlumlenkeinrichtung mittels des Aktors oder mittels des mechanischen Drucks wieder in die erste Position bewegbar sein und dort eine Verriegelung betätigen. Der Aktor kann bspw. der Aktor 33 oder 33' sein. In anderen Worten kann die Bewegung auch manuell erfolgen, so dass der Nutzer die Teile bzw. das Gesamtsystem mit eigener Kraft ein- oder ausfährt bzw. ein- oder ausklappt. Die Bewegung kann insbesondere eine Kombination aus manueller Betätigung und Wirkung von Federkraft sein. So klappt bzw. schiebt der Nutzer manuell Teile bzw. das Gesamtsystem zum Ausschalten der Kamera ins Gehäuse des Gerätes, wie z.B. eines Smartphones ein, spannt dabei eine Feder und ein Verriegelungsmechanismus hält diese Stellung bei. Beim Einschalten der Kamera, z.B. mittels geeigneter Software am Smartphone, wird der schaltbare Verriegelungsmechanismus durch einen geeigneten steuerbaren Mechanismus, wie ein Elektrorelais, gelöst und die Federkraft der Feder bewirkt das Ausfahren bzw. Ausklappen von den Teilen der Kamera bzw. des Gesamtsystems. Des Weiteren kann die Abdeckung, die einen Teil des Gehäuses bildet, der ausfahrbare und/oder kippbare Teil und/oder ein weiterer hieran ansetzender Mechanismus so ausgeformt sein, dass ein (Finger-)Druck auf diese Abdeckung die Arretierung löst, die Teile oder auch das Gesamtsystem herausfahren bzw. -klappen und ggf. die Bildaufnahmesoftware auf dem Gerät startet. Die mitbewegte Abdeckung, die an den Seitenflächen einen Teil des Gehäuses bilden kann, kann vom ruhenden Gehäuse von außen sichtbar allseitig umschlossen sein oder die Seitenflächen über die gesamte Höhe (=Dickenrichtung des Gehäuse) unterbrechen.
  • Fig. 10c zeigt eine schematische Darstellung einer Alternative zu Fig. 10a, bei der die Abdeckung 32 so gebildet ist, dass zwischen Hauptseiten des Gehäuses 22 in der Nebenseite 22c ein durchgehender Spalt gebildet ist. Dies ermöglicht, dass lediglich zwei anstelle von vier in Fig. 10a dargestellten Spalten in dem Gehäuse 22 wahrnehmbar sind. Die ausfahrbare oder ausklappbare Abdeckung 32 und/oder weitere Abdeckungen können als Teil(e) des Gehäuses 22 an einer oder mehreren Randseiten des flachen Gehäuses gebildet sein.
  • Nachfolgend wird Bezug genommen auf einige mögliche Ausführungsformen der Multiaperturabbildungsvorrichtung, wie sie gemäß Ausführungsbeispielen einsetzbar ist.
  • Fig. 11a-c zeigen eine Multiaperturabbildungsvorrichtung 11 gemäß einem Ausführungsbeispiel der vorliegenden Anmeldung. Die Multiaperturabbildungsvorrichtung 11 von Fig. 11a-c umfasst ein einzeiliges Array 14 von nebeneinander angeordneten optischen Kanälen 16a-d. Jeder optische Kanal 16a-d umfasst eine Optik 64a-d zur Abbildung eines jeweiligen Teilgesichtsfeldes 74a-d eines Gesamtgesichtsfeldes 72 der Vorrichtung 11 auf einen jeweils zugeordneten Bildsensorbereich 58a-d eines Bildsensors 12. Die Bildsensorbereiche 58a-d können beispielsweise jeweils aus einem Chip gebildet sein, der ein entsprechendes Pixelarray umfasst, wobei die Chips wie in den Fig. 11a-c angedeutet, auf einem gemeinsamen Substrat bzw. einer gemeinsamen Platine 62 montiert sein können. Alternativ wäre es natürlich auch möglich, dass die Bildsensorbereiche 58a-d jeweils aus einem Teil eines gemeinsamen Pixelarrays, das sich kontinuierlich über die Bildsensorbereiche 58a-d erstreckt, gebildet sind, wobei das gemeinsame Pixelarray beispielsweise auf einem einzelnen Chip gebildet ist. Beispielsweise werden dann lediglich die Pixelwerte des gemeinsamen Pixelarrays in den Bildsensorbereichen 58a-d ausgelesen. Verschiedene Mischungen dieser Alternativen sind natürlich ebenfalls möglich, wie z.B. das Vorhandensein eines Chips für zwei oder mehr Kanäle und eines weiteren Chips für wiederum andere Kanäle oder dergleichen. In dem Fall mehrerer Chips des Bildsensors 12 können diese beispielsweise auf einer oder mehreren Platinen montiert sein, wie z.B. alle gemeinsam oder gruppenweise oder dergleichen.
  • Bei dem Ausführungsbeispiel von Fig. 11a-c sind vier optischen Kanäle 16a-d einzeilig nebeneinander in Zeilenerstreckungsrichtung des Arrays 14 angeordnet, aber die Zahl vier ist lediglich exemplarisch und könnte auch jede andere Zahl größer Eins annehmen. Darüber hinaus kann das Array 14 auch weitere Zeilen aufweisen, die sich entlang der Zeilenerstreckungsrichtung erstrecken.
  • Optische Achsen bzw. die Strahlengänge 17a-d der optischen Kanäle 16a-d verlaufen zwischen den Bildsensorbereichen 58a-d und den Optiken 64a-d parallel zueinander. Dazu sind die Bildsensorbereiche 58a-d beispielsweise in einer gemeinsamen Ebene angeordnet und ebenso die optischen Zentren der Optiken 64a-d. Beide Ebenen sind parallel zueinander, d.h. parallel zu der gemeinsamen Ebene der Bildsensorbereiche 58a-d. Zudem fallen bei einer Projektion senkrecht auf die Ebene der Bildsensorbereiche 58a-d optische Zentren der Optiken 64a-d mit Zentren der Bildsensorbereiche 58a-d zusammen. In anderen Worten ausgedrückt sind in diesen parallelen Ebenen die Optiken 64a-d einerseits und die Bildsensorbereiche 58a-d mit gleichem Wiederholabstand in Zeilenerstreckungsrichtung angeordnet.
  • Ein bildseitiger Abstand zwischen Bildsensorbereichen 58a-d und den zugehörigen Optiken 64a-d ist so eingestellt, dass die Abbildungen auf die Bildsensorbereiche 58a-d auf einen gewünschten Objektabstand eingestellt sind. Der Abstand liegt beispielsweise in einem Bereich gleich oder größer der Brennweite der Optiken 64a-d oder zum Beispiel in einem Bereich zwischen einem Einfachen und einem Zweifachen der Brennweite der Optiken 64a-d, beides inklusive. Der bildseitige Abstand entlang der optischen Achse 17a-d zwischen Bildsensorbereich 58a-d und Optik 64a-d kann auch einstellbar sein, wie z.B. manuell durch einen Benutzer oder automatisch über eine Autofokussteuerung.
  • Ohne zusätzliche Maßnahmen überlappten sich die Teilgesichtsfelder 74a-d der optischen Kanäle 16a-d im Wesentlichen vollständig aufgrund der Parallelität der Strahlengänge bzw. optischen Achsen 17a-d. Zur Abdeckung eines größeren Gesamtgesichtsfeldes 72 und damit sich die Teilgesichtsfelder 74a-d lediglich räumlich teilweise überlappen, ist die Strahlumlenkeinrichtung 18 vorgesehen. Die Strahlumlenkeinrichtung 18 lenkt die Strahlengänge 17a-d bzw. optischen Achsen mit einer kanalindividuellen Abweichung in eine Gesamtgesichtsfeldrichtung 76 um. Die Gesamtgesichtsfeldrichtung 76 verläuft beispielsweise parallel zu einer Ebene, die senkrecht zur Zeilenerstreckungsrichtung des Arrays 14 und parallel zu dem Verlauf der optischen Achsen 17a-d vor bzw. ohne Strahlumlenkung ist. Beispielsweise geht die Gesamtgesichtsfeldrichtung 76 aus den optischen Achsen 17a-d durch Drehung um die Zeilenerstreckungsrichtung um einen Winkel hervor, der > 0° und < 180° ist und beispielsweise zwischen 80 und 100° liegt und beispielsweise 90° betragen kann. Das Gesamtgesichtsfeld der Vorrichtung 11, das der Gesamtabdeckung der Teilgesichtsfelder 74a-d entspricht, liegt also nicht in Richtung einer Verlängerung der Hintereinanderschaltung des Bildsensors 12 und des Arrays 14 in Richtung der optischen Achsen 17a-d, sondern durch die Strahlumlenkung befindet sich das Gesamtgesichtsfeld seitlich zu Bildsensor 12 und Array 14 in einer Richtung, in der die Bauhöhe der Vorrichtung 11 gemessen wird, d.h. die laterale Richtung senkrecht zur Zeilenerstreckungsrichtung. Zusätzlich aber lenkt die Strahlumlenkeinrichtung 18 jeden Strahlengang bzw. den Strahlengang jedes optischen Kanals 16a-d mit einer kanalindividuellen Abweichung von der soeben erwähnten zu der Richtung 76 führenden Umlenkung ab. Dazu umfasst die Strahlumlenkeinrichtung 18 für jeden Kanal 16a-d eine reflektierende Facette 68a-d. Diese sind gegenseitig leicht geneigt. Die gegenseitige Verkippung der Facetten 68a-d ist derart gewählt, dass bei Strahlumlenkung durch die Strahlumlenkeinrichtung 18 die Teilgesichtsfelder 74a-d mit einer leichten Divergenz versehen werden, derart, dass sich die Teilgesichtsfelder 74a-d lediglich teilweise überlappen. Dabei kann, wie es exemplarisch in Fig. 11a angedeutet ist, die individuelle Umlenkung auch derart gestaltet sein, dass die Teilgesichtsfelder 74a-d das Gesamtgesichtsfeld 72 zweidimensional abdecken, d.h. im Gesamtgesichtsfeld 72 zweidimensional verteilt angeordnet sind.
  • Es sei darauf hingewiesen, dass viele der bisher beschriebenen Details zur Vorrichtung 11 lediglich exemplarisch gewählt wurden. Das betraf beispielsweise schon die zuvor erwähnte Anzahl von optischen Kanälen. Die Strahlumlenkeinrichtung 18 kann ebenfalls anders gebildet sein als dies bisher beschrieben wurde. Beispielsweise wirkt die Strahlumlenkeinrichtung 18 nicht notwendigerweise reflektiv. Sie kann also auch anders ausgeführt sein als in Form eines Facettenspiegels, wie z.B. in Form transparenter Prismenkeile. In diesem Fall könnte beispielsweise die mittlere Strahlumlenkung 0° betragen, d.h. die Richtung 76 könnte beispielsweise parallel zu den Strahlengängen 17a-d noch vor oder ohne Strahlumlenkung sein bzw. in anderen Worten ausgedrückt könnte die Vorrichtung 11 trotzt Strahlumlenkeinrichtung 18 weiterhin "geradeaus schauen". Die kanalindividuellen Umlenken durch die Strahlumlenkeinrichtung 18 würden wieder dazu führen, dass sich die Teilgesichtsfelder 74a-d lediglich geringfügig gegenseitig überlappen, wie z.B. paarweise mit einem Überlapp < 10 % bezogen auf die Raumwinkelbereiche der Teilgesichtsfelder 74a-d.
  • Auch könnten die Strahlengänge bzw. optischen Achsen von der beschrieben Parallelität abweichen und dennoch könnte die Parallelität der Strahlengänge der optischen Kanäle aber immer noch so ausgeprägt sein, dass sich die Teilgesichtsfelder, die durch die einzelnen Kanäle 16a-N abgedeckt bzw. auf die jeweiligen Bildsensorbereiche 58a-d abgebildet werden, ohne weitere Maßnahmen, wie nämlich die Strahlumlenkung, größtenteils überlappen würden, so dass, um ein größeres Gesamtgesichtsfeld durch die Multiaperturabbildungsvorrichtung 11 abzudecken, die Strahlumlenkeinrichtung 18 die Strahlengänge so mit einer zusätzlichen Divergenz versieht, dass sich die Teilgesichtsfelder von N optischen Kanälen 16a-N weniger gegenseitig überlappen. Die Strahlumlenkeinrichtung 18 sorgt beispielsweise dafür, dass das Gesamtgesichtsfeld einen Öffnungswinkel aufweist, der größer ist als 1,5-mal dem Öffnungswinkel der einzelnen Teilgesichtsfelder der optischen Kanäle 16a-N. Mit einer Art Vorab-Divergenz der Strahlengänge 17a-d wäre es auch möglich, dass sich beispielsweise nicht alle Facettenneigungen unterscheiden, sondern dass manche Gruppen von Kanälen beispielsweise die Facetten mit gleicher Neigung besitzen. Letztere können dann einstückig bzw. kontinuierlich ineinander übergehend gebildet werden, quasi als eine Facette, die dieser Gruppe von in Zeilenerstreckungsrichtung benachbarten Kanälen zugeordnet ist. Die Divergenz der optischen Achsen dieser Kanäle könnte dann von der Divergenz dieser optischen Achsen stammen, wie sie durch lateralen Versatz zwischen optischen Zentren der Optiken und Bildsensorbereichen der Kanäle oder Prismenstrukturen oder dezentrierten Linsenausschnitten erzielt wird. Die Vorab-Divergenz könnte sich beispielsweise auf eine Ebene beschränken. Die optischen Achsen könnten beispielsweise vor bzw. ohne Strahlumlenkung in einer gemeinsamen Ebene verlaufen, aber in dieser divergent, und die Facetten bewirken lediglich nur noch eine zusätzliche Divergenz in der anderen Transversalebene, d.h. sie sind alle parallel zur Zeilenerstreckungsrichtung und gegeneinander nur noch unterschiedlich zur vorerwähnten gemeinsamen Ebene der optischen Achsen geneigt, wobei hier wiederum mehrere Facetten gleichen Neigung besitzen können bzw. einer Gruppe von Kanälen gemeinsam zugeordnet sein könnten, deren optischen Achsen sich beispielsweise bereits in der vorerwähnten gemeinsamen Ebene der optischen Achsen paarweise vor bzw. ohne Strahlumlenkung unterscheiden.
  • Unter Weglassung der Strahlumlenkeinrichtung oder Ausbildung der Strahlumlenkeinrichtung als planer Spiegel oder dergleichen könnte auch die gesamte Divergenz durch den lateralen Versatz zwischen optischen Zentren der Optiken einerseits und Zentren der Bildsensorbereiche andererseits oder durch Prismenstrukturen oder dezentrierte Linsenausschnitte bewerkstelligt werden.
  • Die erwähnte möglicher Weise vorliegende Vorab-Divergenz kann beispielsweise erzielt werden, indem die optischen Zentren der Optiken auf einer Geraden entlang der Zeilenerstreckungsrichtung liegen, während die Zentren der Bildsensorbereiche von der Projektion der optischen Zentren entlang der Normalen der Ebene der Bildsensorbereiche auf Punkte auf einer Geraden in der Bildsensorebene abweichend angeordnet sind, wie z.B. an Punkten, die von den Punkten auf vorerwähnter Gerade in der Bildsensorebene kanalindividuell entlang der Zeilenerstreckungsrichtung und/oder entlang der Richtung senkrecht zur sowohl der Zeilenerstreckungsrichtung als auch der Bildsensornormalen abweichen. Alternativ kann Vorab-Divergenz erzielt werden, indem die Zentren der Bildsensoren auf einer Geraden entlang der Zeilenerstreckungsrichtung liegen, während die Zentren der Optiken von der Projektion der optischen Zentren der Bildsensoren entlang der Normalen der Ebene der optischen Zentren der Optiken auf Punkte auf einer Geraden in der Optikzentrenebene abweichend angeordnet sind, wie z.B. an Punkten, die von den Punkten auf vorerwähnter Gerade in der Optikzentrenebene kanalindividuell entlang der Zeilenerstreckungsrichtung und/oder entlang der Richtung senkrecht zur sowohl der Zeilenerstreckungsrichtung als auch der Normalen der Optikzentrenebene abweichen. Es wird bevorzugt, wenn vorerwähnte kanalindividuelle Abweichung von der jeweiligen Projektion lediglich in Zeilenerstreckungsrichtung verläuft, also die optischen Achsen sich lediglich in einer gemeinsamen Ebene befinden mit einer Vorabdivergenz versehen werden. Sowohl optische Zentren als auch Bildsensorbereichszentren liegen dann jeweils auf einer Geraden parallel zur Zeilenerstreckungsrichtung, aber mit unterschiedlichen Zwischenabständen. Ein lateraler Versatz zwischen Linsen und Bildsensoren in senkrechter lateraler Richtung zur Zeilenerstreckungsrichtung führte demgegenüber zu einer Vergrößerung der Bauhöhe. Ein rein In-Ebene-Versatz in Zeilenerstreckungsrichtung ändert die Bauhöhe nicht, aber es resultieren ggf. weniger Facetten und/oder die Facetten weisen nur eine Kippung in einer Winkelorientierung auf, was den Aufbau vereinfacht.
  • Das ist in Fig. 11d und 11e exemplarischen für den Fall der auf einem gemeinsamen Träger gehalterten Optiken veranschaulicht, bei denen die benachbarten Kanäle 16a und 16b einerseits und die benachbarten Kanäle 16c und 16d andererseits in der gemeinsamen Ebene verlaufende, jeweils gegeneinander schielende, also mit einer Vorab-Divergenz versehene, optische Achsen 17a und 17b bzw. 17c und 17d aufweisen. Die Facetten 68a und 68b können durch eine Facette gebildet werden und die Facetten 68c und 68d können durch eine andere Facette gebildet werden, wie es durch gestrichelte Linien zwischen den jeweiligen Paaren von Facetten gezeigt ist, und die einzigen zwei Facetten sind lediglich in einer Richtung geneigt und beide parallel zur Zeilenerstreckungsrichtung. Ebenfalls ist es möglich dass einzelne Facetten lediglich eine Verkippung in einer Raumrichtung aufweisen.
  • Ferner könnte es vorgesehen sein, dass manche optische Kanäle dem gleichen Teilgesichtsfeld zugeordnet sind, wie z.B. zum Zwecke der Superresolution bzw. zur Erhöhung der Auflösung, mit welcher das entsprechende Teilgesichtsfeld durch diese Kanäle abgetastet wird. Die optischen Kanäle innerhalb einer solchen Gruppe verliefen dann beispielsweise vor Strahlumlenkung parallel und würden durch eine Facette auf ein Teilgesichtsfeld umgelenkt werden. Vorteilhafterweise lägen Pixelbilder des Bildsensors eines Kanals einer Gruppe in Zwischenpositionen zwischen Bildern der Pixel des Bildsensors eines anderen Kanals dieser Gruppe.
  • Denkbar wäre beispielsweise auch ohne Superresolutionszwecken, sondern lediglich zu Stereoskopiezwecken eine Ausführung, bei denen eine Gruppe von unmittelbar benachbarten Kanälen in Zeilenerstreckungsrichtung mit ihren Teilgesichtsfeldern das Gesamtgesichtsfeld vollständig abdecken, und dass eine weitere Gruppe einander unmittelbar benachbarter Kanäle das Gesamtgesichtsfeld ihrerseits vollständig abdecken, und die Strahlengänge beider Kanalgruppen das Substrat bzw. einen Träger 66 durchlaufen. Das bedeutet, dass die Multiaperturabbildungsvorrichtung eine erste Vielzahl von optischen Kanälen aufweisen kann, die ausgebildet sind, um ein Gesamtgesichtsfeld, ggf. komplett, zu erfassen. Eine zweite Vielzahl von optischen Kanälen der Multiaperturabbildungsvorrichtung kann ausgebildet sein, um das Gesamtgesichtsfeld ebenfalls und ggf. komplett zu erfassen. Das Gesamtgesichtsfeld kann so zumindest stereoskopisch durch die erste Vielzahl von optischen Kanälen und durch die zweite Vielzahl von optischen Kanälen erfasst werden. Die erste Vielzahl von optischen Kanälen und die zweite Vielzahl von optischen Kanälen können auf einen gemeinsamen Bildsensor treffen, ein gemeinsames Array (Arrayoptik) nutzen und/oder von einer gemeinsamen Strahlumlenkeinrichtung umgelenkt werden. Im Gegensatz zu einem Array aus Einzelkameras wird eine zusammenhängende Array-Kamera gebildet, die gemeinsam als eine Vorrichtung steuerbar ist, bspw. in Bezug auf einen Fokus und/oder eine Bildstabilisierung, was vorteilhaft ist, da alle Kanäle gleichzeitig und unter Nutzung derselben Aktoren beeinflusst werden. Zusätzlich ergeben sich aus dem monolithischen Aufbau Vorteile hinsichtlich der mechanischen Stabilität der Gesamtanordnung insbesondere bei Temperaturänderungen. Dies ist vorteilhaft für Zusammensetzung des Gesamtbilds aus den Teilbilder der einzelnen Kanäle sowie bei der Gewinnung dreidimensionaler Objektdaten bei Nutzung in Stereo-, Tripple-, Quattro- usw. Systemen bei mehrfacher Abtastung des Gesamtgesichtsfelds durch unterschiedliche Vielzahlen von Kanälen 16.
  • Die nachfolgende Erörterung beschäftigt sich mit den Optiken 64a-d, deren Linsenebenen ebenfalls parallel zu der gemeinsamen Ebene der Bildsensorbereiche 58a-d liegt. Wie es nachfolgend beschrieben wird, sind Linsen der Optiken 64a-d der optischen Kanäle 16a-d an einer Hauptseite 66a des Substrats 66 über einen oder mehrere Linsenhalter befestigt und über das Substrat 66 mechanisch miteinander verbunden. Insbesondere verlaufen die Strahlengänge 17a-d der Mehrzahl von optischen Kanälen 16a-d durch das Substrat 66. Das Substrat 66 ist also zumindest bereichsweise aus transparentem Material gebildet und ist plattenförmig oder besitzt beispielsweise die Form eines Parallelepipeds oder eines anderen konvexen Körpers mit einer planaren Hauptseite 66a und einer gegenüberliegenden, dazu ebenfalls planaren Hauptseite 66b. Die Hauptseiten sind vorzugsweise senkrecht zu den Strahlengängen 17a-d positioniert. Wie nachfolgend beschrieben, kann es gemäß Ausführungsbeispielen Abweichungen von der reinen Parallelepipedform geben, die auf eine mit dem Substrat einstückige Ausformung von Linsen der Optiken zurückzuführen sind.
  • Bei dem Ausführungsbeispiel der Figuren 11a-c handelt es sich bei dem flachen Trägersubstrat 66 beispielsweise um ein Substrat aus Glas oder Polymer. Beispielsweise kann das Trägersubstrat 66 eine Glasplatte umfassen. Das Material des Substrats 66 kann nach Gesichtspunkten hoher optischer Transparenz und niedrigem Temperaturkoeffizienten oder weiteren mechanischen Eigenschaften wie Härte, Elastizitäts- oder Torsionsmodul ausgewählt sein.
  • Das Substrat 66 kann als einfaches planes Teil des Strahlenganges ausgebildet sein, ohne dass irgendwelche zusätzlichen Linsen direkt hierauf untergebracht sind. Zusätzlich können Blenden, wie z.B. Apertur- oder Falschlichtblenden, oder/und Filterschichten, wie z.B. IR-Blockfilter auf den Substratoberflächen angebracht sein oder aus mehreren Lagen verschiedener Substrate bestehen, auf deren Oberflächen Blenden und Filterschichten angebracht sein können, die sich wiederum kanalweise z.B. in ihrem spektralen Absorption unterscheiden können.
  • Das Substrat 66 kann aus Material bestehen, dass in unterschiedlichen Bereichen des elektromagnetischen Spektrums, welches vom Bildsensor detektiert werden kann, unterschiedliche Eigenschaften aufweist, insbesondere eine nicht-konstante Absorption.
  • Bei dem Ausführungsbeispiel von Fig. 11a-c umfasst jede Optik 64a-d drei Linsen. Die Anzahl der Linsen ist allerdings frei wählbar. Die Anzahl könnte 1, 2 oder jede andere beliebige Anzahl sein. Die Linsen können konvex, lediglich eine optisch abbildende Funktionsfläche wie z.B. eine sphärische, eine asphärische, eine Freiformfläche aufweisen, oder zwei, wie z.B. zwei einander gegenüberliegende, um beispielsweise eine konvexe oder eine konkave Linsenform zu ergeben. Auch mehrere optisch wirksame Linsenflächen sind möglich, wie z.B. durch Aufbau einer Linse aus mehreren Materialien.
  • Eine erste Linse 78a-d jedes optischen Kanals 16a-d oder Optik ist bei dem Ausführungsbeispiel von Fig. 11a-c an der Hauptseite 66a gebildet. Die Linsen 78a-d sind beispielsweise durch Abformung auf der Hauptseite 66a des Substrats 66 hergestellt worden und bestehen beispielsweise aus Polymer, wie z.B. aus UV-aushärtbarem Polymer. Die Abformung geschieht beispielsweise durch ein Abformwerkzeug und die Aushärtung kann beispielsweise über Temperatur und/oder über UV-Bestrahlung geschehen.
  • Bei dem Ausführungsbeispiel von Fig. 11a-c besitzt jede Optik 64a-d noch eine weitere zweite und dritte Linse 82a-d bzw. 84a-d. Diese Linsen sind exemplarisch über axial verlaufende röhrenförmige Linsenhalter 86a-d gegenseitig im Inneren des jeweiligen Linsenhalters fixiert und über Letzteren an der Hauptseite 66b fixiert, wie z.B. mittels Klebens oder einer anderen Fügetechnik. Öffnungen 88a-d der Linsenhalter 86a-d sind beispielsweise mit kreisförmigem Querschnitt versehen, in dessen zylindrischen Innenseite die Linsen 82a-d bzw. 84a-d befestigt sind. Für jede Optik 64a-d liegen also die Linsen koaxial auf der jeweiligen optischen Achse der Strahlengänge 17a-d. Die Linsenhalter 86a-d können aber auch einen sich über ihre Länge bzw. entlang der jeweiligen optischen Achsen ändernden Querschnitt aufweisen. Hierbei kann der Querschnitt mit geringer werdendem Abstand zum Bildsensor 12 zunehmend rechteckigen oder quadratischen Charakter aufweisen. Die äußere Form der Linsenhalter kann sich somit auch von der Form der Öffnungen unterscheiden. Das Material der Linsenhalter kann lichtabsorbierend sein. Entsprechend der zuvor im Zusammenhang mit den Figuren 11d und 11e beschriebenen schielenden Optiken können die Linsenhalter auch nicht rotationssymmetrisch und/oder nicht koaxial ausgeprägt sein.
  • Die Befestigung über die vorerwähnten Linsenhalter geschieht beispielsweise so, dass Linsenscheitel der durch dieselben gehalterten Linsen von dem Substrat 66 beabstandet sind.
  • Wie es im Vorhergehenden bereits erwähnt wurde, ist es möglich, dass das Substrat 66 beidseitig planar ist und mithin keine Brechkraftwirkung aufweist. Allerdings wäre es auch möglich, dass das Substrat 66 mechanische Strukturen aufweist, wie z.B. Vertiefungen oder Vorsprünge, die eine leichte, form- und/oder kraftschlüssige Ausrichtung anschließender Bauteile ermöglichen, wie z.B. das Anschließen von Einzellinsen oder Gehäuseteilen. Bei dem Ausführungsbeispiel von Fig. 11a-c beispielsweise könnte das Substrat 66 an der Hauptseite 66b befestigungserleichternde oder die Ausrichtung erleichternde Strukturen an den Positionen aufweisen, an welchen das jeweilige Ende der Röhre des Linsenhalters 86a-d der jeweiligen Optik 64a-d befestigt ist. Bei diesen Strukturen kann es sich beispielsweise um eine kreisförmige Vertiefung handeln oder einer Vertiefung mit einer anderen Form, die der Form einer dem Substrat zugewandten Seite des jeweiligen Linsenhalters entspricht, in die die Seite der jeweiligen Linsenhalters 84a-d Eingriff nehmen kann. Es sei noch einmal hervorgehoben, dass auch andere Öffnungsquerschnitte und damit korrespondierend eventuell andere Linsenaperturen als kreisförmige möglich sind.
  • Das Ausführungsbeispiel von Fig. 11a-c löst sich also von einem klassischen Aufbau von Kameramodulen, die Einzellinsen aufweisen und zur Halterung der Einzellinsen einen diese komplett umschließenden, nicht transparenten Gehäuseträger aufweisen. Vielmehr verwendet obiges Ausführungsbeispiel einen transparenten Körper 66 als Substratträger. Dieser erstreckt sich über mehrere benachbarte optische Kanäle 16a-d, um von deren Abbildungsstrahlengang durchdrungen zu werden. Er stört die Abbildung nicht, aber er erhöht auch nicht die Bauhöhe.
  • Es wird allerdings auf verschiedene Möglichkeiten hingewiesen, wie das Ausführungsbeispiel von Fig. 11a-c variiert werden könnte. Beispielsweise erstreckt sich das Substrat 66 nicht notwendigerweise über alle Kanäle 16a-d der Multiaperturabbildungsvorrichtung 11. Anders als im Vorhergehenden beschrieben, wäre es möglich, dass jede Optik 64a-d über Linsenträger gehalterte Linsen auf beiden Seiten 66a und 66b aufweist, wie es in Fig. 11f dargestellt ist.
  • Auch die Existenz lediglich der Linsen 82e-h auf der Hauptseite 66a, d.h. ohne die Linsen 82a-d und/oder 84a-d auf der anderen Seite 66b, wäre denkbar, ebenso wie das Vorsehen der Linsen 82a-d und/oder 84a-d auf der anderen Seite 66a, d.h. der dem Bildsensor 12 abgewandten Seite des Substrats 66 und nicht der davon zugewandten Seite, d.h. 66a. Ebenso ist die Anzahl an Linsen in einem Linsenträger 86a-h frei wählbar. So könnte auch lediglich eine Linse oder es könnten mehr als zwei in einem solchen Träger 86a-h vorhanden sein. Wie in Fig. 11f gezeigt, könnte es sein, dass auf beiden Seiten 66a und 66b Linsen über jeweilige Linsenträger 86a-d bzw. 86e-h an der jeweiligen Seite 66a bzw. 66b montiert sind.
  • Fig. 12 zeigt exemplarisch, dass die Multiaperturabbildungsvorrichtung 11 von Fig. 11a-c um eines oder mehrere der nachfolgend beschriebenen zusätzlichen Einrichtungen ergänzt werden könnte.
  • Beispielsweise zeigt Fig. 12, dass eine Einrichtung 92 vorhanden sein könnte, um die Strahlumlenkeinrichtung 18 um die Rotationsachse 44 zu drehen, die parallel zu der Zeilenerstreckungsrichtung des Arrays 14 ist. Die Rotationsachse 44 liegt beispielsweise in der Ebene der Strahlengänge 17a-d oder davon weniger als ein Viertel eines Durchmessers der Optiken 64a-d entfernt. Alternativ wäre es natürlich auch möglich, dass die Rotationsachse weiter entfernt liegt, wie z.B. weniger als ein Optikdurchmesser oder weniger als vier Optikdurchmesser. Die Einrichtung 92 kann beispielsweise vorgesehen sein, um die Strahlumlenkeinrichtung 18 mit kurzer Ansprechzeit in einem lediglich kleinen Winkelbereich, wie z.B. innerhalb einer Spanne von weniger als 1° oder weniger 10° oder weniger als 20° zu drehen, um Verwacklungen der Multiaperturabbildungsvorrichtung 11 durch beispielsweise einen Benutzer während einer Aufnahme auszugleichen. Die Einrichtung 92 würde in diesem Fall beispielsweise von einer Bildstabilisierungssteuerung angesteuert werden.
  • Alternativ oder zusätzlich könnte die Einrichtung 92 ausgebildet sein, um mit größeren Winkelverstellungen das Gesamtgesichtsfeld, das durch die Gesamtabdeckung der Teilgesichtsfelder 74a-d (Fig. 11a) definiert wird, in seiner Richtung zu verändern. Dabei wäre es ferner möglich, dass durch Rotation der Strahlumlenkeinrichtung 18 auch Ablenkungen erzielt werden, bei denen das Gesamtgesichtsfeld in der entgegengesetzten Richtung relativ zu der Vorrichtung 11 angeordnet ist, indem beispielsweise die Strahlumlenkeinrichtung 18 als ein beidseitig reflektives Spiegelarray ausgebildet ist.
  • Wiederum alternativ oder zusätzlich kann die Vorrichtung 11 eine Einrichtung 94 aufweisen, um die Optiken 64a-d vermittels des Substrats 66 bzw. das Substrat 66 selbst und damit die Optiken 64a-d translatorisch entlang der Zeilenerstreckungsrichtung zu bewegen. Die Einrichtung 94 könnte beispielsweise ebenfalls durch die vorerwähnte Bildstabilisierungssteuerung angesteuert werden, um durch eine Bewegung 96 entlang der Zeilenerstreckungsrichtung eine Bildstabilisierung quer zu der Bildstabilisierung zu erzielen, die durch die Rotation der Spiegelumlenkvorrichtung 18 verwirklicht wird.
  • Weiterhin kann zusätzlich oder alternativ die Vorrichtung 11 eine Einrichtung 98 zum Verändern des bildseitigen Abstands zwischen Bildsensor 12 und Optiken 64a-d bzw. zwischen Bildsensor 12 und dem Träger 66 aufweisen, um eine Schärfentiefeneinstellung zu erzielen. Die Einrichtung 98 kann durch eine manuelle Benutzersteuerung oder durch eine Autofokussteuerung bzw. Fokussiereinrichtung der Vorrichtung 11 gesteuert werden.
  • Die Einrichtung 94 dient also als Aufhängung des Substrats 66 und ist vorzugsweise, wie in Fig. 12 angedeutet seitlich neben dem Substrat 66 entlang der Zeilenerstreckungsrichtung angeordnet, um die Bauhöhe nicht zu erhöhen. Auch für die Einrichtungen 92 und 98 gilt, dass selbige vorzugsweise in der Ebene der optischen Strahlengänge angeordnet sind, um die Bauhöhe nicht zu erhöhen. Die Einrichtung 98 kann auch mit der Strahlumlenkeinrichtung 18 verbunden sein und diese simultan oder nahezu simultan bewegen, so dass bei einer Veränderung des bildseitigen Abstands zwischen Bildsensor 12 und Optiken 64a-d ein Abstand zwischen den Optiken 64a-d und der der Strahlumlenkeinrichtung 18 im Wesentlichen konstant oder konstant bleibt. Die Einrichtungen 92, 94 und/oder 98 können auf Basis pneumatischer, hydraulischer, piezoelektrischer Aktoren, DC-Motoren, Schrittmotoren, thermischer Aktoren, elektrostatischer Aktoren, elektrostriktiver und/oder magnetostriktiver Aktoren oder Antriebe implementiert sein.
  • Es sei darauf hingewiesen, dass die Optiken 64a-d nicht nur untereinander, wie z.B. über das schon erwähnte transparente Substrat, sondern auch relativ zu der Strahlumlenkeinrichtung in konstanter relativer Lage gehaltert sein können, wie z.B. über einen geeigneten Rahmen, der vorzugsweise die Bauhöhe nicht vergrößert und deshalb vorzugsweise in der Ebene der Komponenten 12, 14 und 18 bzw. in der Ebene der Strahlengänge verläuft. Die Konstanz der relativen Lage könnte sich auf den Abstand zwischen Optiken und Strahlumlenkeinrichtung entlang der optischen Achsen beschränken, so dass die Einrichtung 98 beispielsweise die Optiken 64a-d zusammen mit der Strahlumlenkeinrichtung translatorisch entlang der optischen Achsen bewegt. Der Optiken-zu-Strahlumlenkeinrichtung-Abstand könnte auf einen minimalen Abstand eingestellt werden, so dass der Strahlengang der Kanäle nicht durch die Segmente der Strahlumlenkeinrichtung 18 lateral eingeschränkt wird, was die Bauhöhe verringert, da andernfalls die Segmente 68a-d hinsichtlich der lateralen Ausdehnung für den größten Optiken-zu-Strahlumlenkeinrichtung-Abstand dimensioniert sein müssten, um den Strahlengang nicht einzuschneiden. Zusätzlich könnte die Konstanz der relativen Lage vorerwähnter Rahmen die Optiken und die Strahlumlenkeinrichtung entlang der x-Achse starr zueinander haltern, sodass die Einrichtung 94 die Optiken 64a-d zusammen mit der Strahlumlenkeinrichtung translatorisch entlang der Zeilenerstreckungsrichtung bewegen würde.
  • Die oben beschriebene Strahlumlenkeinrichtung 18 zum Umlenken des Strahlengangs der optischen Kanäle ermöglicht zusammen mit dem Aktor 92 zur Erzeugung der Rotationsbewegung der Strahlumlenkeinrichtung 18 einer optischen Bildstabilisierungssteuerung der Multiaperturabbildungsvorrichtung 11 eine Bild- bzw. Gesamtblickfeldstabilisierung in zwei Dimensionen, nämlich durch die translatorische Bewegung des Substrats 66 eine Bildstabilisierung entlang einer ersten Bildachse, die im Wesentlichen parallel zur Zeilenerstreckungsrichtung verläuft, und durch die Erzeugung der Rotationsbewegung der Strahlumlenkeinrichtung 18 eine Bildstabilisierung entlang einer zweiten Bildachse, die im Wesentlichen parallel zu den optischen Achsen vor bzw. ohne Strahlumlenkung verläuft, oder - betrachtet man die umgelenkten optischen Achsen - senkrecht zu den optischen Achsen und der Zeilenerstreckungsrichtung. Zusätzlich kann die beschriebene Anordnung eine translatorische Bewegung der im angesprochenen Rahmen fixierten Strahlumlenkeinrichtung und des Arrays 14 senkrecht zur Zeilenerstreckungsrichtung bewirken, wie z.B. durch den beschriebenen Aktor 98, die für die Realisierung einer Fokuseinstellung und damit einer Autofokusfunktion genutzt werden kann.
  • Alternativ oder zusätzlich zu der Rotationsbewegung zum Erhalten einer Bildstabilisierung entlang der zweiten Bildachse auch eine translatorische Relativbewegung zwischen dem Bildsensor 12 und dem Array 14 implementierbar ist. Diese Relativbewegung kann bspw. von der Einrichtung 94 und/oder der Einrichtung 98 bereitgestellt werden.
  • Es sei zu den obigen Ausführungen der Vollständigkeit halber noch darauf hingewiesen, dass die Vorrichtung bei einer Aufnahme über die Bildsensorbereiche ein Bild einer Szene pro Kanal aufnimmt, die durch die Kanäle auf die Bildsensorbereiche abgebildet worden sind, und dass die Vorrichtung optional über einen Prozessor verfügen kann, der die Bilder zu einem Gesamtbild zusammenfügt oder verschmelzt, das der Szene in dem Gesamtgesichtsfeld entspricht, und/oder zusätzliche Daten bereitstellt, wie zum Beispiel 3D-Bilddaten und Tiefeninformationen der Objektszene zur Erstellung von Tiefenkarten und zur softwaretechnischen Realisierung wie z.B. von Refocusing (Festlegung der Bildschärfebereiche nach der eigentlichen Aufnahme), All-in-Focus-Bildern, Virtual Green Screen (Trennung von Vorder- und Hintergrund) u.a.. Letztere Aufgaben könnten ebenfalls von jenem Prozessor erledigt werden oder extern. Der Prozessor könnte allerdings auch eine zu der Multiaperturabbildungsvorrichtung externe Komponente darstellen.
  • Fig. 13a illustriert, dass Vorrichtungen 11 der vorher beschrieben Alternativen beispielsweise in einem flachen Gehäuse eines tragbaren Geräts 130 eingebaut sein können, wie zum Beispiel eines Mobiltelefons, ein Smartphone oder Mediaplayers oder dergleichen, wobei dann beispielsweise die Ebenen des Bildsensors 12 bzw. der Bildsensorbereiche und die Linsenebenen der Optiken der optischen Kanäle 16 senkrecht zu der flachen Erstreckungsrichtung des flachen Gehäuses bzw. parallel zur Dickenrichtung ausgerichtet sind. Auf diese Weise würde beispielsweise die Strahlumlenkeinrichtung 18 dafür sorgen, dass das Gesamtgesichtsfeld der Multiaperturabbildungsvorrichtung 11 vor einer Vorderseite 102 des flachen Gehäuses liegt, das beispielsweise auch einen Bildschirm aufweist. Alternativ wäre auch eine Umlenkung derart möglich, dass sich das Gesichtsfeld vor einer Rückseite des flachen Gehäuses, die der Vorderseite 102 gegenüberliegt, befindet. Das Gehäuse 22 des Geräts 130 bzw. das Gerät selbst kann flach sein, da durch die illustrierte Lage der Vorrichtung 11 in dem Gehäuse, die Bauhöhe der Vorrichtung 11, die zur Dicke des Gehäuses parallel ist, gering gehalten werden kann. Eine Umschaltbarkeit könnte ebenfalls vorgesehen werden, indem ein Fenster auf der der Seite 102 gegenüberliegenden Seite vorgesehen wird und beispielsweise die Strahlumlenkeinrichtung zwischen zwei Stellungen bewegt wird, indem letztere beispielsweise als vor- und rückseitig spiegelnder Spiegel ausgeführt wird und von der einen in die andere Stellung gedreht wird, oder als Facettenspiegel mit einem Satz von Facetten für die eine Stellung und einem anderen Satz von Facetten für die andere Stellung, wobei die Facettensätze in Zeilenerstreckungsrichtung nebeneinander liegen und durch translatorische Hin- und Her-Bewegung der Strahlumlenkeinrichtung entlang der Zeilenerstreckungsrichtung zwischen den Stellungen umgeschaltet wird. Ein Verbau der Vorrichtung 11 in ein anderes ggf. nicht tragbares Gerät, wie z.B. eine Auto, wäre natürlich ebenfalls möglich.
  • Mehrere Module 11, deren Teilgesichtsfelder ihrer Kanäle das gleiche Gesichtsfeld vollständig und optional sogar in kongruenter Weise abdecken, können mit einem Basisabstand BA (vgl. Fig. 7) zueinander entlang einer für beide Module gleichen Zeilenerstreckungsrichtung in dem Gerät 130 verbaut sein, wie zum Beispiel zum Zweck der Stereoskopie. Mehr als zwei Module wären ebenfalls denkbar. Die Zeilenerstreckungsrichtungen der Module 11 könnten auch nicht kollinear, sondern lediglich parallel zueinander sein. Es sei jedoch noch einmal erwähnt, dass, wie im vorgehenden erwähnt, auch eine Vorrichtung 11 bzw. ein Modul mit Kanälen so ausgestattet sein könnte, dass dieselben gruppenweise dasselbe Gesamtgesichtsfeld jeweils vollständig abdecken. Die Module können in einer/mehreren Zeile(n)/Reihe(n) oder an beliebiger Stelle der Vorrichtung angeordnet sein. Bei einer Anordnung mehrerer Module können diese gleich oder verschieden gebildet sein. Bspw. kann ein erstes Modul ausgebildet sein, um eine stereoskopische Erfassung des Gesamtgesichtsfeldes auszuführen. Ein zweites Modul kann ausgebildet sein, um eine einfache Erfassung, eine stereoskopische Erfassung oder eine Erfassung höherer Ordnung auszuführen.
  • Es sei noch erwähnt, das die Strahlumlenkeinrichtung bei alternativen Ausführungsbeispielen verglichen zu den oben beschrieben Ausführungsbespielen auch fehlen könnte. Wenn eine lediglich teilweise gegenseitige Überlappung der Teilgesichtsfelder gewünscht ist, dann könnte dies zum Beispiel über gegenseitige laterale Versätze zwischen dem Zentrum des Bildsensorbereichs und des optischen Zentrums der Optik des entsprechenden Kanals erzielt werden. Die Aktoren gemäß Fig. 12 könnten natürlich dennoch Anwendung finden, wobei im Ersatz für die Einrichtung 92 beispielsweise der Aktor 94 zusätzlich zu einer translatorischen Bewegung der Optiken bzw. des Trägers 66 in der Lage ist.
  • Noch einmal in anderen Worten ausgeführt zeigen obige Ausführungsbeispiele also eine Multiaperturabbildungsvorrichtung mit einzeiligem Array von nebeneinander angeordneten optischen Kanälen, bei der sich irgendwo im Strahlengang der Multiaperturabbildungsvorrichtung ein sich über die Kanäle erstreckendes Substrat aus beispielsweise Glas oder Polymer zur Verbesserung der Stabilität erstreckt. Das Substrat kann zusätzlich bereits auf Vorder- und/oder Rückseite Linsen beinhalten. Die Linsen können aus dem Material des Substrats bestehen (wie z.B. durch Heizprägen entstanden) oder darauf abgeformt sein. Vor und hinter dem Substrat können sich weitere Linsen befinden, die sich nicht auf Substraten befinden und einzeln montiert werden. Es können mehrere Substrate in einem Aufbau, sowohl entlang als auch senkrecht zur Zeilenerstreckungsrichtung vorhanden sein. Es wäre es dabei auch möglich, mehrere Substrate mit Linsen entlang der Strahlengänge hintereinanderzuschalten, d.h. sie anderweitig hintereinander in einer vorbestimmten Lagebeziehung zueinander zu halten, wie z.B. über einen Rahmen, ohne dass ein Aneinanderfügen notwendig wäre. Auf diese Weise stünden für das Vorsehen bzw. Befestigen von Linsen zweimal so viele Hauptseiten zur Verfügung, wie Trägersubstrate verwendet werden, etwa ein Substrat 66, das gemäß obiger Beispiele mit Linsen bestückt sein kann, hier exemplarisch gemäß Fig. 11b, und ein Substrat, das ebenfalls gemäß obiger Beispiele mit Linsen bestückt sein kann, also unter anderem mit Linsen, die über Linsenhalter an den Hauptseiten 66a und/oder 66b befestigt sind, hier aber exemplarisch als einstückig durch beispielsweise Spritzguss oder dergleichen so hergestellt dargestellt ist, dass Linsen an den beiden Seiten 66a und 66b geformt sind, wie wohl natürlich auch abgeformte Linsen anderen Materials als das Material des parallelepipedförmigen Substrats 66 möglich wären sowie Linsen an nur einer der Seiten 66a oder 66b. Beide Substrate sind transparent und werden von den Strahlengängen durchdrungen, und zwar durch die Hauptseiten 66a und 66b hindurch. Obige Ausführungsbeispiele lassen sich also in Form einer Multiaperturabbildungsvorrichtung implementieren, und zwar mit einzeiliger Kanalanordnung, wobei jeder Kanal ein Teilgesichtsfeld eines Gesamtgesichtsfeldes überträgt und sich die Teilgesichtsfelder teilweise überlappen. Ein Aufbau mit mehreren der solchen Multiaperturabbildungsvorrichtungen für Stereo- Trio-, Quattro usw. Aufbauten für die 3D-Bildaufnahme ist möglich. Die Mehrzahl von Modulen kann dabei als eine zusammenhängende Zeile ausgeführt sein. Die zusammenhängende Zeile könnte identische Aktoren und ein gemeinsames Strahlumlenkelement nutzen. Ein oder mehrere eventuell im Strahlengang vorhandene mechanisch verstärkende Substrate können sich über die gesamte Zeile, die einen Stereo-, Trio, Quattro-Aufbau bilden kann, erstrecken. Es können Verfahren der Superresolution genutzt werden, wobei mehrere Kanäle dieselben Teilbildbereiche abbilden. Die optischen Achsen können auch bereits ohne Strahlumlenkeinrichtung divergent verlaufen, so dass weniger Facetten auf der Strahlumlenkeinheit benötigt werden. Die Facetten besitzen dann vorteilhafter Weise nur eine Winkelkomponente. Der Bildsensor kann einteilig sein, nur eine zusammenhängende Pixelmatrix oder mehrere unterbrochene aufweisen. Der Bildsensor kann aus vielen Teilsensoren zusammengesetzt sein, die z.B. auf einer Leiterplatte nebeneinander angeordnet sind. Ein Autofokusantrieb eine Fokussiereinrichtung kann so ausgeführt sein, dass das Strahlumlenkelement synchron mit den Optiken bewegt wird, oder ruhend ist. Bei einer Abwesenheit einer Vorab-Divergenz sehen es Ausführungsbeispiele vor, dass die Strahlengänge zwischen dem Bildsensor 12 und der Strahlumlenkeinrichtung 18 im Wesentlichen oder vollständig parallel verlaufen.
  • Fig. 13b zeigt einen schematischen Aufbau umfassend eine erste Multiaperturabbildungsvorrichtung 11a und eine zweite Multiaperturabbildungsvorrichtung 11b, wie er bspw. in dem Gerät 130 angeordnet sein kann. Die beiden Multiaperturabbildungsvorrichtungen 11a und 11b können eine gemeinsame Multiaperturabbildungsvorrichtung 11 bilden und einen gemeinsamen Bildsensor 12 und/oder ein gemeinsames Array 14 aufweisen. Die einzeiligen Arrays 14a und 14b bilden bspw. eine gemeinsame Zeile in dem gemeinsamen Array 14. Die Bildsensoren 12a und 12b können den gemeinsamen Bildsensor 12 bilden und bspw. auf einem gemeinsamen Substrat bzw. auf einem gemeinsamen Schaltungsträger wie einer gemeinsamen Platine oder einem gemeinsamen Flexboard montiert sein. Alternativ können die Bildsensoren 12a und 12b auch von einander verschiedene Substrate umfassen. Verschiedene Mischungen dieser Alternativen sind natürlich ebenfalls möglich, wie etwa Multiaperturabbildungsvorrichtungen umfassend einen gemeinsamen Bildsensor, ein gemeinsames Array und/oder eine gemeinsame Strahlumlenkeinrichtung 18 sowie weitere Multiaperturabbildungsvorrichtungen, die separate Komponenten aufweisen. Vorteilhaft an einem gemeinsamen Bildsensor, einem gemeinsamen einzeiligen Array und/oder einer gemeinsamen Strahlumlenkeinrichtung ist, dass eine Bewegung einer jeweiligen Komponente mit einer großen Präzision durch ansteuern einer geringen Menge von Aktoren erhalten werden kann und eine Synchronisierung zwischen Aktoren reduziert oder vermieden werden kann. Ferner kann eine hohe thermische Stabilität erhalten werden. Alternativ oder zusätzlich können auch weitere Multiaperturabbildungsvorrichtungen ein gemeinsames Array, einen gemeinsamen Bildsensor und/oder eine gemeinsame Strahlumlenkeinrichtung aufweisen. Der Aufbau der Multiaperturabbildungsvorrichtung 11 kann bspw. für eine stereoskopische Erfassung eines Gesamt- oder Teilgesichtsfeldes nutzbar sein, wenn optische Kanäle verschiedener Teil-Multiaperturabbildungsvorrichtungen 11a und 11b auf ein gleiches Teilgesichtsfeld gelenkt werden. In vergleichbarer Weise können weitere Teil-Multiaperturabbildungsvorrichtungen in die gemeinsame Multiaperturabbildungsvorrichtungen integriert werden, so dass eine Erfassung höherer Ordnung im Vergleich zu Stereo ermöglicht ist.
  • Fig. 14 zeigt eine 3D-Multiaperturabbildungsvorrichtung 140, wie sie gemäß hier beschriebenen Ausführungsbeispielen einsetzbar ist. Sie besitzt einen Bildsensor, der, wie es in Fig. 14 angedeutet ist, in zwei Komponenten 121 bzw. 121 aufgeteilt sein kann, eine Komponente 121 für die "rechten" optischen Kanäle 161 und die andere Komponente 122 für die "linken" Kanäle 162. Die rechten und die linken optischen Kanäle 161 und 162 sind bei dem Beispiel von Fig. 14 identisch aufgebaut, allerdings um den Basisabstand BA lateral versetzt voneinander angeordnet, um möglichst viele Tiefeninformationen bezüglich der im Gesichtsfeld der Vorrichtung 140 befindlichen Szene zu erhalten. Beispielsweise kann es die 3D-Multiaperturabbildungsvorrichtung durch zwei oder mehr Multiaperturabbildungsvorrichtungen 11 gebildet sein. Die Elemente, die mit einem Bezugszeichen versehen sind, das mit einem Index 1 an der ersten Position von links versehen ist, gehören somit zu der ersten Komponente 1 oder einem ersten Modul für die rechten Kanäle, Modul 1, der Vorrichtung 140 und die Elemente, die mit einem Bezugszeichen versehen sind, das mit einem Index 2 an der ersten Position von links versehen ist, gehören somit zu der zweiten Komponente 2 oder einem zweiten Modul für die linken Kanäle, Modul 2, der Vorrichtung 140. Obwohl die Anzahl der Module in Fig. 14 zwei ist, könnte die Vorrichtung auch mehr besitzen, die mit einem jeweiligen Basisabstand zueinander angeordnet sind.
  • In dem exemplarischen Fall von Fig. 14 umfasst jede Mehrzahl 161 und 162 von optischen Kanälen vier nebeneinander angeordnete optische Kanäle. Die einzelnen "rechten" Kanäle seien durch den zweiten tiefgestellten Index unterschieden. Die Kanäle seien dabei von rechts nach links indexiert. D.h., der optische Kanal 1611, der in Fig. 14 wegen einer zum Zwecke der Übersichtlichkeit gewählten Teilwegnahme nicht dargestellt ist, ist beispielsweise entlang der Basisabstandsrichtung 108, entlang welcher die linken und die rechten Kanäle voneinander unter dem Basisabstand BA versetzt zueinander angeordnet sind, am äußersten rechten Rand angeordnet, d.h. am weitesten entfernt von der Mehrzahl 162 linker Kanäle, wobei die anderen rechten Kanäle 1612 - 1614 entlang der Basisabstandsrichtung 108 folgen. Die Kanäle 1611 - 1614 bilden also ein einzeiliges Array von optischen Kanälen, dessen Zeilenerstreckungsrichtung der Basisabstandsrichtung 108 entspricht. Ebenso sind auch die linken Kanäle 162 aufgebaut. Auch sie seien durch den zweiten tiefgestellten Index voneinander unterschieden. Die linken Kanäle 1621 - 1624 sind nebeneinander und in der gleichen Richtung aufeinanderfolgend angeordnet wie die rechten Kanäle 1611 - 1614, nämlich so, dass der Kanal 1621 den rechten Kanälen am nächsten ist und der Kanal 1624 am weitesten entfernt von Letztgenannten.
  • Jeder der rechten Kanäle 1611 - 1614 umfasst eine entsprechende Optik, die, wie es in Fig. 14 angedeutet ist, aus einem Linsensystem bestehen kann. Alternativ könnte jeder Kanal eine Linse aufweisen. Jeder optische Kanal 1611 - 1614 nimmt eines von sich überlappenden Teilgesichtsfeldern 74a-d des Gesamtgesichtsfeldes 72 auf, die sich gegenseitig überlappen, wie es im Zusammenhang mit der Fig. 11a beschrieben ist. Der Kanal 1611 bildet beispielsweise das Teilgesichtsfeld 7411 auf einen Bildsensorbereich 5811 ab, der optische Kanal 1612 das Teilgesichtsfeld 7412 auf einen Bildsensorbereich 5812, der optische Kanal 1613 ein zugeordnetes Teilgesichtsfeld 7413 auf einen entsprechenden in Fig. 14 nicht sichtbaren Bildsensorbereich 5813 des Bildsensors 12 und der optische Kanal 1614 ein zugeordnetes Teilgesichtsfeld 7414 auf einen entsprechenden Bildsensorbereich 5814, der ebenfalls in Fig. 14 wegen Verdeckung nicht gezeigt ist.
  • In Fig. 14 sind die Bildsensorbereiche 5811 - 5814 des Bildsensors 12 bzw. der Komponente 121 des Bildsensors 12 in einer Ebene parallel zur Basisabstandsrichtung BA bzw. parallel zur Zeilenerstreckungsrichtung 108 angeordnet, und zu dieser Ebene sind auch Linsenebenen der Optiken der optischen Kanäle 1611 - 1614 parallel. Zudem sind die Bildsensorbereiche 5811 - 5814 untereinander mit einem lateralen Interkanalabstand 110 angeordnet, mit welchem auch die Optiken der optischen Kanäle 1611 - 1614 untereinander in dieser Richtung angeordnet sind, so dass die optischen Achsen und Strahlengänge der optischen Kanäle 1611 - 1614 zwischen den Bildsensorbereichen 5811 - 5814 und den Optiken 1611 - 1614 parallel zueinander verlaufen. Beispielsweise sind Zentren der Bildsensorbereiche 5811 - 5814 und optische Zentren der Optiken der optischen Kanäle 1611 - 1614 auf der jeweiligen optischen Achse angeordnet, die senkrecht zu der vorerwähnten gemeinsamen Ebene der Bildsensorbereiche 5811 - 5814 verlaufen.
  • Die optischen Achsen bzw. Strahlengänge der optischen Kanäle 1611 - 1614 werden durch eine Strahlumlenkeinrichtung 181 umgelenkt und damit mit einer Divergenz versehen, die dazu führt, dass sich die Teilgesichtsfelder 7411 - 7414 der optischen Kanäle 1611 - 1614 gegenseitig nur teilweise überlappen, wie z.B. so, dass sich paarweise die Teilgesichtsfelder 7411 - 7414 höchstens zu 50 % im Raumwinkelsinne überlappen. Die Strahlumlenkeinrichtung 181 kann, wie es in Fig. 14 angedeutet ist, beispielsweise für jeden optischen Kanal 1611 - 1614 eine reflektive Facette aufweisen, die unter den Kanälen 1611 - 1614 unterschiedlich gegeneinander verkippt sind. Eine mittlere Neigung der reflektiven Facetten gegenüber der Bildsensorebene lenkt das Gesamtgesichtsfeld der rechten Kanäle 1611 - 1614 in eine Richtung um, die beispielsweise senkrecht zu der Ebene steht, in welcher die optischen Achsen der Optiken der optischen Kanäle 1611 - 1614 vor bzw. ohne Strahlumlenkung durch die Vorrichtung 181 verlaufen, oder weicht von dieser senkrechten Richtung weniger als 10° ab. Alternativ könnte die Strahlumlenkeinrichtung 181 auch Prismen zur Strahlumlenkung der einzelnen optischen Achsen bzw. Strahlengänge der optischen Kanäle 1611 - 1614 verwenden.
  • Die Strahlumlenkeinrichtung 181 versieht die Strahlengänge der optischen Kanäle 1611 - 1614 mit einer Divergenz derart, dass die eigentlich linear in der Richtung 108 nebeneinander angeordneten Kanäle 1611 - 1614 das Gesamtgesichtsfeld 72 zweidimensional abdecken.
  • Es sei darauf hingewiesen, dass die Strahlengänge bzw. optischen Achsen auch von der beschrieben Parallelität abweichen könnte, dass dennoch die Parallelität der Strahlengänge der optischen Kanäle aber immer noch so ausgeprägt sein könnte, dass sich die Teilgesichtsfelder, die durch die einzelnen Kanäle 1611 - 1614 abgedeckt bzw. auf die jeweiligen Bildsensorbereiche 5811 - 5814 abgebildet werden, ohne weitere Maßnahmen, wie nämlich die Strahlumlenkung, größtenteils überlappen würden, so dass, um ein größeres Gesamtgesichtsfeld durch die Multiaperturabbildungsvorrichtung 140 abzudecken, die Strahlumlenkeinrichtung 18 die Strahlengänge so mit einer zusätzlichen Divergenz versieht, dass sich die Teilgesichtsfelder der Kanäle 1611 - 1614 weniger gegenseitig überlappen. Die Strahlumlenkeinrichtung 181 sorgt beispielsweise dafür, dass das Gesamtgesichtsfeld einen über alle azimutalen Winkel bzw. über alle Transversalrichtungen gemittelten Öffnungswinkel aufweist, der größer ist als 1,5-mal dem entsprechenden mittleren Öffnungswinkel der Teilgesichtsfelder der optischen Kanäle 1611 - 1614.
  • Ebenso wie die rechten Kanäle 1611 - 1614 sind nun auch die linken Kanäle 1621 - 1624 aufgebaut und relativ zu jeweiligen zugeordneten Bildsensorbereichen 5821 - 5824 positioniert, wobei die in der gleichen Ebene wie die optischen Achsen der Kanäle 1611 - 1614 parallel zueinander verlaufenden optischen Achsen der optischen Kanäle 1621 - 1624 durch eine korrespondierende Strahlumlenkeinrichtung 182 umgelenkt werden, so dass die optischen Kanäle 1621 - 1624 das gleiche Gesamtgesichtsfeld 72 in nahezu kongruenter Art und Weise aufnehmen, nämlich in Teilgesichtsfeldern 7421 - 7424, in die das Gesamtgesichtsfeld 72 zweidimensional aufgeteilt ist, die sich gegenseitig überlappen, und von denen jedes nahezu vollständig mit dem entsprechenden Teilgesichtsfeld 7411 - 7414 eines entsprechenden Kanals der rechten Kanäle 1611 - 1614 überlappt. Beispielsweise überlappen die Teilgesichtsfelder 7411 und das Teilgesichtsfeld 7421 nahezu vollständig miteinander, die Teilgesichtsfelder 7412 und 7422 usw. Die Bildsensorbereiche 5811 - 5824 können beispielsweise jeweils aus einem Chip gebildet sein, wie es für den Bildsensor 12 in Fig. 11 beschrieben ist.
  • Zusätzlich den vorerwähnten Komponenten umfasst die 3D-Multiaperturabbildungsvorrichtung einen Prozessor 112, der die Aufgabe übernimmt, beispielsweise die Bilder, die bei einer Aufnahme durch die 3D-Multiaperturabbildungsvorrichtung 10 durch die rechten optischen Kanäle 1611 - 1614 aufgenommen worden sind, zu einem ersten Gesamtbild zu verschmelzen. Das Problem, das dabei zu bewältigen ist, ist das Folgende: Aufgrund der Interkanalabstände 110 zwischen benachbarten Kanälen der rechten Kanäle 1611 - 1614 können die Bilder, die bei einer Aufnahme durch die Kanäle 1611 - 1614 in den Bildbereichen 5811 - 5814 aufgenommen werden, nicht einfach bzw. translatorisch gegenseitig verschoben und aufeinander gelegt werden. In anderen Worten ausgedrückt, lassen sie sich nicht ohne weiteres aneinanderfügen. Disparität nennt man den lateralen Versatz entlang der Richtung B, 108 bzw. 110 in den Bildern der Bildsensorbereiche 5811 - 5814 bei Aufnahme einer gleichen Szene, die einander korrespondieren sich aber in unterschiedlichen Bildern befinden. Die Disparität einander korrespondierender Bildinhalte hängt aber wiederum von der Entfernung dieses Bildinhalts in der Szene ab, d.h. der Entfernung des entsprechenden Objekts von der Vorrichtung 140. Der Prozessor 112 könnte nun versuchen, Disparitäten unter den Bildern der Bildsensorbereiche 5811 - 5814 selbst auszuwerten, um diese Bilder miteinander zu einem ersten Gesamtbild, nämlich zu einem "rechten Gesamtbild" zu verschmelzen. Nachteilig ist allerdings, dass die Interkanalabstand 110 zwar vorhanden ist, und damit eben erst das Problem hervorruft, dass der Interkanalabstand 110 aber andererseits auch relativ gering ist, so dass die Tiefenauflösung bzw. -abschätzung lediglich ungenau ist. Der Versuch, einander korrespondierende Bildinhalte in einem Überlappbereich zwischen zwei Bildern, wie z.B. in dem Überlappbereich 114 zwischen den Bildern der Bildsensorbereiche 5811 und 5812 beispielsweise mittels Korrelation zu ermitteln, ist deshalb schwierig.
  • Der Prozessor von Fig. 14 verwendet deshalb in dem Überlappbereich 114 zwischen den Teilgesichtsfeldern 7411 und 7412 zur Verschmelzung Disparitäten in einem Paar von Bildern, von denen eines durch einen der linken Kanäle 1621 oder 1622 aufgenommen ist, dessen abgebildetes zweites Teilgesichtsfeld, nämlich 7421 bzw. 7422, mit dem Überlappbereich 114 überlappt. Beispielsweise wertet der Prozess 112 zur Verschmelzung der Bilder der Bildsensorbereiche 5811 und 5812 Disparitäten in Bildern aus, von denen eines durch einen der Bildsensorbereiche 5821 öder 5822 und ein anderes durch einen der an dem Überlappbereich 114 beteiligten Kanäle aufgenommen ist, d.h. ein Bild, das durch einen der Bildsensorbereiche 5811 oder 5812 aufgenommen ist. Ein solches Paar besitzt dann einen Basisabstand von Grundbasisabstand BA plus/minus einem oder keinem eines Kanalbasisabstands 110. Letzterer Basisabstand ist deutlich größer als ein einzelner Kanalbasisabstand 110, weshalb sich die Disparitäten in dem Überlappbereich 86 für den Prozessor 112 leichter ermitteln lassen. Der Prozessor 112 wertet deshalb für die Verschmelzung der Bilder der rechten Kanäle Disparitäten aus, die sich mit einem Bild der linken Kanäle ergibt und zwar vorzugsweise, aber nicht ausschließlich, zwischen Bildern von einem der rechten Kanäle und einem der linken Kanäle.
  • Spezifischer ausgedrückt, ist es möglich, dass der Prozessor 112 denjenigen Teil des Teilgesichtsfeldes 7411, der nicht mit einem der anderen Teilgesichtsfelder der rechten Kanäle überlappt, mehr oder weniger direkt aus dem Bild 5811 übernimmt und das Gleiche unternimmt für die nicht-überlappenden Bereiche der Teilgesichtsfelder 7412, 7413 und 7414 auf Basis der Bilder der Bildsensorbereiche 5812 - 5814, wobei die Bilder der Bildsensorbereiche 5811 - 5814 beispielsweise gleichzeitig aufgenommen wurden. Lediglich in den Überlappbereichen benachbarter Teilgesichtsfelder, wie z.B. der Teilgesichtsfelder 7411 und 7412, zieht dann der Prozessor 112 Disparitäten aus Bildpaaren heran, deren Überlapp im Gesamtgesichtsfeld 72 im Überlappbereich überlappt, aber von denen in der Mehrzahl aber nicht ausschließlich eines durch einen der rechten Kanäle aufgenommen wurde und das andere durch einen der linken Kanäle, wie z.B. wiederum zur gleichen Zeit.
  • Gemäß einer alternativen Vorgehensweise wäre es allerdings ebenfalls möglich, dass der Prozessor 112 alle Bilder des rechten Kanals warpt, und zwar gemäß einer Auswertung von Disparitäten zwischen Paaren von Bildern, von denen jeweils eines durch die rechten Kanäle und das andere durch die linken Kanäle aufgenommen wurde. So könnte beispielsweise das Gesamtbild, das durch den Prozessor 112 für die Bilder der rechten Kanäle berechnet wird, virtuell nicht nur im Überlappbereich der Teilgesichtsfelder 7411 - 7414 der rechten Kanäle, sondern auch in dem Nicht-Überlappbereich virtuell auf einen Blick-Punkt "gewarpt" werden, der beispielsweise lateral in der Mitte zwischen den rechten Kanälen 1611 - 1614 liegt, und zwar indem auch für diejenigen Bereiche der Teilgesichtsfelder 7411 - 7414, die sich nicht gegenseitig überlappen, Disparitäten aus Bildpaaren durch den Prozessor 85 ausgewertet werden, bei denen ein Bild durch einen der rechten Kanäle und ein anderes Bild durch einen der linken Kanäle aufgenommen wurde.
  • Die 3D-Multiaperturabbildungsvorrichtung 140 von Fig. 14 ist nicht nur in der Lage, ein Gesamtbild aus den Bildern der rechten Kanäle zu erzeugen, sondern die 3D-Multiaperturabbildungsvorrichtung 140 von Fig. 14 ist zumindest auch in einem Betriebsmodus in der Lage, aus einer Aufnahme zusätzlich zu dem Gesamtbild der ersten Kanäle auch ein Gesamtbild der Bilder der linken Kanäle und/oder zusätzlich zu dem Gesamtbild der rechten Kanäle eine Tiefenkarte zu erzeugen.
  • Gemäß der ersten Alternative ist der Prozessor 112 beispielsweise ausgebildet, um Bilder, die durch die linken optischen Kanäle 1621 - 1624 bzw. die Bildsensorbereiche 5821 - 5824 aufgenommen sind, zu einem zweiten Gesamtbild zu verschmelzen, nämlich einem Gesamtbild linken Kanals, und dabei in einem Überlappbereich von lateral benachbarten der Teilgesichtsfelder 7421 - 7424 der linken optischen Kanäle Disparitäten in einem Paar von Bildern zu verwenden, von denen in der Mehrzahl aber nicht ausschließlich eines durch einen rechten optischen Kanal 1611 - 1614 aufgenommen ist und mit dem entsprechenden Überlappbereich des Paars von Teilgesichtsfeldern 7421 - 7424 überlappt, und das andere vorzugsweise durch einen der linken optischen Kanäle aufgenommen ist, dessen Teilgesichtsfeld mit dem jeweiligen Überlappbereich überlappt.
  • Gemäß der ersten Alternative gibt also für eine Aufnahme der Prozessor 112 zwei Gesamtbilder aus, nämlich eines für die rechten optischen Kanäle und das andere für die linken optischen Kanäle. Diese beiden Gesamtbilder könnten beispielsweise einem Benutzer der beiden Augen des Benutzers getrennt zugeführt werden und somit zu einem dreidimensionalen Eindruck der aufgenommenen Szene führen.
  • Gemäß der anderen vorerwähnten Alternative erzeugt der Prozessor 112 zusätzlich zu dem Gesamtbild zu den rechten Kanälen eine Tiefenkarte, und zwar unter Verwendung von Disparitäten in Paaren von Bildern, die zumindest für jedes der rechten Kanäle 1611 - 1614 zumindest ein Paar aufweisen, das ein Bild aufweist, das durch den jeweiligen rechten Kanal aufgenommen ist, und ein weiteres Bild, das durch eines der linken Kanäle aufgenommen ist.
  • Bei dem Ausführungsbeispiel, bei dem die Tiefenkarte durch den Prozessor 112 erzeugt wird, ist es auch möglich, dass vorerwähnte Warpen für die gesamten Bilder, die durch die rechten Kanäle aufgenommen sind, auf Basis der Tiefenkarte vorzunehmen. Da die Tiefenkarte über das Gesamtgesichtsfeld 72 hinweg Tiefeninformationen aufweist, ist es möglich, die gesamten Bilder, die durch die rechten Kanäle aufgenommen sind, d.h. nicht nur in den Überlappbereichen derselben, sondern auch in den Nicht-Überlapp-bereichen, auf einen virtuellen gemeinsamen Aperturpunkt bzw. ein virtuelles optisches Zentrum zu warpen.
  • Die beiden Alternativen können auch beide durch den Prozessor 112 abgearbeitet werden: Er könnte zunächst die beiden Gesamtbilder, nämlich eines für die rechten optischen Kanäle und das andere für die linken optischen Kanäle, wie oben beschrieben erzeugen, indem bei der Verschmelzung der Bilder der rechten Kanäle in den Überlappbereichen zwischen den Bildern der rechten Kanäle auch Disparitäten aus Paaren von Bildern verwendet werden, von denen eines zu den Bildern der linken Kanäle gehört, und bei der Verschmelzung der Bilder der linken Kanäle in den Überlappbereichen zwischen den Bildern der linken Kanäle auch Disparitäten aus Paaren von Bildern verwendet werden, von denen eines zu den Bildern der rechten Kanäle gehört, um dann aus den so gewonnen Gesamtbildern, die die Szene in dem Gesamtgesichtsfeld aus unterschiedlichen Perspektiven darstellen, ein Gesamtbild mit zugehöriger Tiefenkarte zu erzeugen, wie z.B. ein Gesamtbild, das zu einer virtuellen Ansicht bzw. bzw. zu einem virtuellen optischen Zentrum zwischen den optischen Zentren der Optiken der rechten und linken optischen Kanäle liegt, möglicher Weise aber nicht ausschließlich mittig dazwischen. Zur Berechnung der Tiefenkarte und zum Warpen eines der beiden Gesamtbilder oder Warpen und Verschmelzen beider Gesamtbilder in die virtuelle Ansicht verwendete der Prozessor 85 dann das rechte und linke Gesamtbild, quasi als Zwischenergebnis aus der vorangegangenen Verschmelzung der linken bzw. rechten Einzelbilder. Der Prozessor wertete hier also Disparitäten in den beiden Zwischenergebnisgesamtbildern aus, um die Tiefenkarte zu erhalten und das Warpen oder Warpen/Verschmelzen derselben durchzuführen.
  • Es sei erwähnt, dass der Prozessor 112 die Auswertung von Disparitäten in einem Paar von Bildern beispielsweise vermittels Kreuzkorrelation von Bildbereichen durchführt.
  • Es sei erwähnt, dass bei einer anderen Abdeckung des Gesamtgesichtsfeldes 72 durch die Teilgesichtsfelder der linken Kanäle einerseits und durch die Teilgesichtsfelder der rechten Kanäle andererseits sich ggf. auch mehr als vier Kanäle (unbeachtlich ihrer Zugehörigkeit zu den linken oder rechten Kanälen) einander gegenseitig überlappen, wie es z.B. ja auch an dem gegenseitigen Überlapp zwischen den Überlappbereichen von in Zeilenrichtung oder Spaltenrichtung benachbarten Teilgesichtsfeldern der bisherigen Beispiele der Fall war, wo die Teilgesichtsfelder der rechten Kanäle sowie die Teilgesichtsfelder der linken Kanäle jeweils für sich in Spalten und Zeilen angeordnet waren. Dann gilt für die Anzahl an Disparitätsquellen ganz allgemein, dass sie N 2 ,
    Figure imgb0001
    wobei N die Anzahl der Kanäle mit sich miteinander überlappenden Teilgesichtsfeldern bezeichne.
  • Zusätzlich zur vorhergehenden Beschreibung sei noch erwähnt, dass der Prozessor 112 optional u.a. noch eine kanalweise Korrektur perspektivischer Abbildungsstörungen des jeweiligen Kanals vornimmt.
  • Es sei darauf hingewiesen, dass das Ausführungsbeispiel von Fig. 14 in vielerlei Hinsicht lediglich exemplarisch war. Das betrifft beispielsweise die Anzahl an optischen Kanälen. Beispielsweise beträgt die Anzahl an rechten optischen Kanälen nicht Vier, sondern ist irgendwie größer gleich 2 oder liegt zwischen 2 und 10, beides inklusive, und der Überlappbereich der Teilgesichtsfelder der rechten optischen Kanäle kann, soweit für jedes Teilgesichtsfeld bzw. jeden Kanal, das Paar mit dem größten Überlapp zu dem jeweiligen Teilgesichtsfeld betrachtet wird, flächenmäßig für all diese Paare zwischen 1/2 und 1/1000 einer mittleren Bildgröße der Bilder, die von den Bildbereichen 5811 - 5814 aufgenommen werden, liegen, gemessen beispielsweise in der Bildebene, d.h. der Ebene der Bildsensorbereiche. Gleiches gilt beispielsweise für die linken Kanäle. Die Anzahl kann allerdings zwischen den rechten Kanälen und den linken Kanälen unterschiedlich sein. Das heißt, dass die Anzahl der linken optischen Kanäle, NL, und rechten optischen Kanäle, NR, nicht unbedingt gleich sein muss und eine Aufteilung des Gesamtgesichtsfeldes 72 in die Teilgesichtsfelder der linken Kanäle und die Teilgesichtsfelder der rechten Kanäle nicht in etwa gleich zu sein hat, wie dies bei Fig. 14 der Fall war. Hinsichtlich der Teilgesichtsfelder und deren Überlapp kann es sich beispielsweise so verhalten, dass die Teilgesichtsfelder beispielsweise um mindestens 20 Pixel ineinander ragen, soweit eine Bildentfernung bzw. Objektentfernung von 10 m betrachtet wird, jedenfalls für alle Paare mit größtem Überlapp, wobei dies für die rechten Kanäle ebenso wie für die linken Kanäle gelten kann.
  • Anders als im Vorhergehenden erörtert, ist es zudem nicht notwendig, dass die linken optischen Kanäle bzw. die rechten optischen Kanäle einzeilig gebildet sind. Die linken und/oder die rechten Kanäle könnten auch ein zweidimensionales Array von optischen Kanälen bilden. Zudem ist es nicht notwendig, dass die einzeiligen Arrays eine kollineare Zeilenerstreckungsrichtung aufweisen. Die Anordnung von Fig. 14 ist allerdings vorteilhaft, da sie zu einer minimalen Bauhöhe senkrecht zu der Ebene ergibt, in welcher die optischen Achsen der optischen Kanäle, d.h. sowohl der rechten als auch der linken Kanäle, vor bzw. ohne Strahlumlenkung, führt. Hinsichtlich des Bildsensors 12 war bereits erwähnt worden, dass selbiger aus ein, zwei oder mehreren Chips gebildet sein kann. Beispielsweise könnte ein Chip pro Bildsensorbereich 5811 - 5814 und 5821 - 5824 vorgesehen sein, wobei in dem Fall mehrerer Chips selbige auf einem oder mehreren Platinen befestigt sein können, wie z.B. eine Platine für die linken Kanäle bzw. die Bildsensoren der linken Kanäle und eine Platine für die Bildsensoren der rechten Kanäle.
  • Bei dem Ausführungsbeispiel von Fig. 14 ist es also möglich, benachbarte Kanäle innerhalb der Kanäle der rechten oder linken Kanäle so dicht wie möglich zu platzieren, wobei im optimalen Fall der Kanalabstand 110 dem Linsendurchmesser entspricht. Hieraus ergibt sich ein geringer Kanalabstand und mithin eine geringe Disparität. Die rechten Kanäle einerseits und die linken Kanäle andererseits können aber zueinander mit einem beliebigen Abstand BA angeordnet werden, so dass sich große Disparitäten realisieren lassen. Insgesamt ergibt sich die Möglichkeit einer artefaktreduzierten oder auch -freien Bildfusion und eine Erstellung von Tiefenkarten mit einem passiven optischen Abbildungssystem.
  • Gegenüber obigen Beispielen wäre es möglich, mehr als nur zwei Gruppen von Kanälen 161 und 162 zu verwenden, sondern mehr. Die Gruppenanzahl könnte mit N bezeichnet werden. Wären dann auch in diesem Fall die Anzahl von Kanälen pro Gruppe gleich sowie die Gesamtgesichtsfeldaufteilung in Teilgesichtsfelder für alle Gruppen gleich, dann ergäbe sich pro Überlappbereich von Teilgesichtsfeldern der Gruppe 161 beispielsweise eine Anzahl von Disparitätsquellen von 2 N 2 .
    Figure imgb0002
    Eine unterschiedliche Gesamtgesichtsfeldaufteilung für die Gruppen von Kanälen ist aber ebenfalls denkbar, wie oben schon erwähnt wurde.
  • Schließlich wird darauf hingewiesen, dass bei der vorhergehenden Beschreibung lediglich der exemplarische Fall aufgegriffen wurde, dass der Prozessor 112 die Bilder der rechten Kanäle verschmilzt. Selbiges Vorgehen könnte von dem Prozessor 112 wie im Vorhergehenden erwähnt für beide bzw. alle Kanalgruppen durchgeführt werden, oder auch für die linke oder dergleichen.
  • Fig. 15a zeigt ein Ausführungsbeispiel einer Multiaperturabbildungsvorrichtung 150. Vorzugsweise sind die Bildsensorbereiche 58a-d in einer gemeinsamen Ebene angeordnet, nämlich der Bildebene der optischen Kanäle 16 bzw. derer Optiken. In Fig. 15a ist diese Ebene exemplarisch parallel zu der Ebene, die durch eine z- und eine y-Achse eines kartesischen Koordinatensystems aufgespannt wird, das in Fig. 15a zur Vereinfachung der nachfolgenden Beschreibung eingezeichnet und mit dem Bezugszeichen 115 versehen ist.
  • Bei einem linearen Array von optischen Kanälen ist die Größenausdehnung der Multiaperturabbildungsvorrichtung 150, wie sie durch den Bildsensor 12 und die Optiken 64 nach unten hin beschränkt wird, entlang der Zeilenerstreckungsrichtung größer als der Durchmesser eine Linse. Die minimale Ausdehnung der Multiaperturabbildungsvorrichtung 150, wie sie durch die gegenseitige Anordnung von Bildsensor 12 zu Optiken 64 entlang der z-Achse, d.h. entlang der optischen Achsen bzw. Strahlengänge der optischen Kanäle 16a-d, bestimmt wird, ist zwar kleiner als die minimale Ausdehnung entlang der z-Achse, sie ist aber aufgrund der Ausgestaltung der optischen Kanäle 16a-d als einzeiliges Array größer als die Minimalausdehnung der Multiaperturabbildungsvorrichtung in der zu der Zeilenerstreckungsrichtung z senkrechten lateralen Richtung y. Letztere ist durch die laterale Ausdehnung jedes einzelnen optischen Kanals 16a-d, wie z.B. die Ausdehnung der Optiken 64a-d entlang der y-Achse, eventuell inklusive der Halterung 66, gegeben. Wie es im Vorhergehenden beschrieben wurde, sind bei dem Ausführungsbeispiel von Fig. 15a die optischen Achsen 17a-d vor der bzw. ohne die Umlenkung durch die Strahlumlenkeinrichtung 18 bzw. an beispielsweise den Optiken 64a-d parallel zueinander, wie es in Fig. 15a gezeigt ist, oder aber sie weichen hiervon nur wenig ab. Die damit korrespondierende zentrierte Positionierung von Optiken 64a-d sowie der Bildsensorbereiche 58a-d ist einfach herzustellen und günstig hinsichtlich der Minimierung des Bauraums. Die Parallelität der Strahlengänge der optischen Kanäle bedingt aber auch, dass sich die Teilgesichtsfelder, die durch die einzelnen Kanäle 16a-d abgedeckt bzw. auf die jeweiligen Bildsensorbereiche 58a-d abgebildet werden, ohne weitere Maßnahmen, wie nämlich die Strahlumlenkung, nahezu vollständig überlappen würden. Um ein größeres Gesamtgesichtsfeld durch die Multiaperturabbildungsvorrichtung 150 abzudecken, besteht nun eine weitere Funktion der Strahlumlenkeinrichtung 18 darin, die Strahlengänge so mit einer Divergenz zu versehen, dass sich die Teilgesichtsfelder der Kanäle 16a-d weniger gegenseitig überlappen.
  • Beispielsweise sei angenommen, dass die optischen Achsen 17a-d der Strahlengänge der optischen Kanäle 16a-d vor bzw. ohne die Strahlumlenkeinrichtung 18 parallel zueinander sind oder gegenüber einer parallelen Ausrichtung entlang der über alle Kanäle gemittelten Ausrichtung um weniger als ein Zehntel eines minimalen Öffnungswinkels der Teilgesichtsfelder der optischen Kanäle 16a-d abweichen. Ohne zusätzliche Maßnahmen überlappten dann die Teilgesichtsfelder größtenteils. Die Strahlumlenkeinrichtung 18 von Fig. 15a umfasst deshalb für jeden optischen Kanal 16a-d eine diesem Kanal eindeutig zugeordnete reflektierende Facette 68a-d, die jeweils optisch planar sind und gegeneinander geneigt sind, nämlich so, dass die Teilgesichtsfelder der optischen Kanäle raumwinkelmäßig weniger überlappen und beispielsweise ein Gesamtgesichtsfeld abdecken, das einen Öffnungswinkel aufweist, der beispielsweise größer ist als 1,5 mal dem Öffnungswinkel der einzelnen Teilgesichtsfelder der optischen Kanäle 16a-d. In dem exemplarischen Fall von Fig. 15a sorgt die gegenseitige Neigung der reflektierenden Facette 68a-d beispielsweise dafür, dass die eigentlich linear entlang der z-Achse nebeneinander angeordneten optischen Kanäle 16a-d das Gesamtgesichtsfeld 72 gemäß einer zweidimensionalen Anordnung der Teilgesichtsfelder 74a-d abdecken.
  • Betrachtet man bei dem Ausführungsbeispiel von Fig. 15a die angulare Ablenkung der optischen Achsen 17a-d des optischen Kanals 16a-d in der Ebene, die durch die gemittelte Richtung der optischen Achsen vor der Strahlumlenkung und der gemittelten Richtung der optischen Achsen nach der Strahlumlenkung aufgespannt wird, d.h. in der zy-Ebene in dem Beispiel von Fig. 15a, einerseits und in der Ebene, die senkrecht zu der letztgenannten Eben und parallel zur gemittelten Richtung der optischen Achse nach Strahlumlenkung verläuft, andererseits, so entspricht das Beispiel von Fig. 15a dem exemplarischen Fall, dass die mittlere Richtung nach Strahlumlenkung der y-Achse entspricht. Im Mittel werden die optischen Achsen der optischen Kanäle also um 90° in der yz-Ebene um die z-Achse umgelenkt und im Mittel werden die optischen Achsen nicht aus der yz-Ebene herausgekippt.
  • Es bezeichnet beispielsweise β x 1
    Figure imgb0003
    den Neigungswinkel der Facette 68a gegenüber der xz-Ebene, gemessen in der xy-Ebene, d.h. die Verkippung der Facette 68a um die z-Achse gegenüber der xz-Ebene, in welcher die optischen Achsen 17a-d verlaufen. β z 1 = 0 °
    Figure imgb0004
    entspricht einer Ausrichtung der Facette 68a parallel zu der xz-Ebene. Es gilt demzufolge α z 1 = 2 β z 1 .
    Figure imgb0005
    Entsprechend definiere β x 1
    Figure imgb0006
    den Neigungswinkel der Facette 68a gegenüber einer Ebene, die gegenüber der xz-Ebene die Neigung β z 1
    Figure imgb0007
    aufweist und parallel zu der z-Achse verläuft und zwar gemessen entlang der z-Achse. Es gilt demzufolge entsprechend α x 1 = 2 β x 1 .
    Figure imgb0008
    Die gleichen Definitionen sollen für die anderen Kanäle gelten: α x i = 2 β x i ,
    Figure imgb0009
    α z i = 2 β z i .
    Figure imgb0010
    Für jeden optischen Kanal kann der Anstellwinkel größer sein, als ein Neigungswinkel der Neigung der diesem Kanal zugeordneten reflektierenden Facette gegenüber dem Trägersubstrat, durch den die optischen Kanäle verlaufen. Hierbei kann das Trägersubstrat parallel zu einer Zeilenerstreckungsrichtung des Arrays 14 positioniert sein und der Anstellwinkel in einer Ebene senkrecht zu der Zeilenerstreckungsrichtung liegen.
  • Fig. 15b-15e zeigen Seitenansichten einer Strahlumlenkvorrichtung gemäß einem Ausführungsbeispiel für exemplarisch vier optische Kanäle, die linear bzw. einseitig angeordnet sind. Die Strahlumlenkvorrichtung 18 von Fig. 15b-15e könnte als Strahlumlenkvorrichtung von Fig. 11a verwendet werden, wobei dann allerdings die Teilgesichtsfelder nicht wie in Fig. 11a dargestellt im Uhrzeigersinn 3, 4, 2, 1 das Gesamtgesichtsfeld abdecken würden, sondern im Uhrzeigersinn gemäß der Reichenfolge 4, 2, 1, 3. Die Neigungswinkel der Facetten 68a-d sind in Fig. 15b-e eingezeichnet. Sie sind durch hochgestellte Indizes 1-4 voneinander unterschieden bzw. dem jeweiligen Kanal zugeordnet. β x 1
    Figure imgb0011
    ist hier ebenso wie β x 4
    Figure imgb0012
    0°. Die Rückseite des Trägersubstrats, d.h. die Seite, die der mit den Facetten 68a-d versehenen Oberfläche gegenüberliegt, ist in Fig. 15b-15e mit 121 angezeigt. Das den parallelepipedförmigen Anteil des Trägersubstrats 123 bildenden Material befindet sich unterhalb der gestrichelten Linie 125. Es ist ersichtlich, dass das zusätzliche Material, das diesem hinzukommt, wenig Volumen aufweist, so dass eine Abformung erleichtert wird.
  • Das Trägersubstrat 123 wird mit einem Anstellwinkel α x 0
    Figure imgb0013
    gegenüber dem Bildsensor 12 geneigt platziert, nämlich um die Achse, um die die mittlere Richtung der optischen Achsen der optischen Kanäle umgelenkt wird, d.h. die z-Achse in Fig. 15a. Dieser Anstellwinkel sorgt dafür, dass die den Bildsensor 12 zugewandte Oberfläche der Strahlumlenkvorrichtung 18 bereits eine "Grobumlenkung" der Strahlengänge der optischen Kanäle bewirkt.
  • Das bedeutet für die Umlenkwinkel des Umlenkens des Strahlengangs jedes optischen Kanals durch die Strahlumlenkvorrichtung 18, dass dieselben jeweils auf dem Anstellwinkel α x 0
    Figure imgb0014
    basieren sowie auf der jeweiligen Neigung der dem optischen Kanal zugeordneten reflektierenden Facette bezogen auf das Trägersubstrat 123 selbst. Diese erwähnten Facetten-individuellen Neigungen der Facetten 68a-d können wie soeben beschrieben durch einen Neigungswinkel in der xy-Ebene und einen Neigungswinkel gegenüber der Normalen des Trägersubstrats 123 in der dazu senkrechten Ebene beschrieben werden. Es wird bevorzugt, wenn gilt, dass für jeden Kanal der Anstellwinkel α x 0
    Figure imgb0015
    größer ist als die Neigung, d.h. α x 0 > max β x β z
    Figure imgb0016
    für alle Kanäle. Es wird noch mehr bevorzugt, wenn besagte Ungleichung bereits für α x 0 / 2
    Figure imgb0017
    oder sogar für α x 0 / 3
    Figure imgb0018
    erfüllt ist. In anderen Worten ausgedrückt, wird es bevorzugt, wenn der Anstellwinkel verglichen zu den Neigungswinkeln der Facetten 68a-d groß ist, so dass das zusätzliche Material gegenüber einer rein parallelepipedförmigen Form der Strahlumlenkvorrichtung 18 gering ist. α x 0
    Figure imgb0019
    kann beispielsweise zwischen 30° und 60° jeweils inklusive liegen.
  • Die Herstellung der Strahlumlenkvorrichtung 18 von Fig. 15b-15e kann beispielsweise dadurch erfolgen, dass auf das Trägersubstrat 123 das zusätzliche Material durch ein Abformwerkzeug abgeformt wird. Das Trägersubstrat 123 könnte hierbei beispielsweise Glas sein, während das abgeformte zusätzliche Material darauf Polymer ist. Eine weitere Möglichkeit bestünde darin, dass die Strahlumlenkvorrichtung 18 von Fig. 15b-15e einstückig durch Spritzguss oder dergleichen gebildet wird. Das führt dazu, dass die dem Bildsensor zugewandte Oberfläche der Strahlumlenkeinrichtung zumindest an den den optischen Kanälen zugeordneten reflektierenden Facetten verspiegelt ist. Das Trägersubstrat kann drehbar rotatorisch gelagert sein, wie es bspw. im Zusammenhang mit Fig. 4b beschrieben ist.
  • Manche Aspekte des bisher beschriebenen Aufbaus von Multiaperturabbildungsvorrichtungen betraf quasi eine Wunsch- oder Momentaneinstellung vor bzw. zum Zeitpunkt der Aufnahme eines Gesamtbildes beispielsweise. Die Multiaperturabbildungsvorrichtung 150 von Fig. 15a umfasst beispielsweise einen Prozessor, wie etwa den Prozessor 112, der Bilder, die durch die Bildsensorbereiche 58a-d zu beispielsweise einem gleichen Zeitpunkt aufgenommen worden sind, und zwar mit den vorerwähnten Einstellungen, zu einem Gesamtbild zusammenfügt, das die Szene in dem Gesamtgesichtsfeld 72 repräsentiert. Der Algorithmus, den der Prozessor 112 verwendet, um die Bilder, die durch die optischen Kanäle 16a-d auf die Bildsensorbereiche 58a-d abgebildet und von letzteren aufgenommen worden sind, zusammenzufügen bzw. zu dem Gesamtbild zu verschmelzen, ist beispielsweise so entworfen, dass Annahmen über die Einhaltung bestimmter Parameter der vorbeschriebenen Komponenten der Multiaperturabbildungsvorrichtung 150 eingehalten werden sollten, damit die Qualität des Gesamtbilds eine bestimmte Vorgabe erfüllt oder der Algorithmus überhaupt angewendet werden kann. Beispielsweise geht der Algorithmus von der Einhaltung eines oder mehrerer der folgenden Annahmen aus:
    1. 1) Die Optik-zu-Bildsensorbereich-Abstände entlang der x-Achse sind für alle optischen Kanäle 16a-d gleich;
    2. 2) Die relative Lage der Teilgesichtsfelder 74a-d und insbesondere der Überlapp zwischen denselben entspricht einer vorbestimmten Vorgabe oder weicht von letzterer um weniger als eine vorbestimmte Maximalabweichung ab.
  • Aus unterschiedlichen Gründen kann es nun aber sein, dass eine oder mehrere der soeben genannten Annahmen nicht eingehalten werden oder nicht ausreichend eingehalten werden. Gründe für das Nicht-Einhalten können beispielsweise in der Nicht-Einhaltung von Herstellungsvarianzen bestehen, wie z.B. Ungenauigkeiten der relativen Lagen der Optiken 64a-d zueinander und relativ zu dem Bildsensor 12. Herstellungsungenauigkeiten können auch eine Ungenauigkeit des Einbaus der Spiegelumlenkvorrichtung 18 und ggf. der relativen Lagen der Facetten 68a-d zueinander umfassen, wenn die Strahlumlenkeinrichtung 18 Facetten 68a-d aufweist. Zusätzlich oder alternativ zu den herstellungsbedingten Toleranzabweichungen können Temperaturschwankungen dafür sorgen, dass eine oder mehrere der oben genannten Annahmen nicht zutreffen oder nicht ausreichend eingehalten wird.
  • Bis zu einem gewissen Maße kann der durch den Prozessor 112 ausgeführte Algorithmus zur Zusammenfügung bzw. Verschmelzung der Bilder der Bildsensorbereiche 58a-d zu dem Gesamtbild ggf. Abweichungen von einer optimalen Ausrichtung und Anordnung der Komponenten ausgleichen, wie z.B. Abweichungen der Positionen der Teilgesichtsfelder 74a-d innerhalb des Gesamtgesichtsfeldes 72 von einer Sollkonstellation relativer Lagen der Teilgesichtsfelder zueinander. Beim Zusammenfügen bzw. Verschmelzen der Bilder könnte der Prozessor 112 beispielsweise in einem gewissen Maße solche Abweichungen ausgleichen. Bei Überschreitung gewisser Abweichungsgrenzen jedoch (Nicht-Einhaltung der Annahme 2) würde beispielsweise der Prozessor 112 nicht in der Lage sein, die Abweichungen auszugleichen.
  • Eine Herstellung der Multiaperturabbildungsvorrichtung 150 so, dass die soeben erwähnten Annahmen stets eingehalten werden, wie z.B. über einen gewissen Temperaturbereich hinweg, tendiert aber dazu, Herstellungskosten der Multiaperturabbildungsvorrichtung 150 zu erhöhen. Um dies zu vermeiden, umfasst die Multiaperturabbildungsvorrichtung 150 von Fig. 15a eine Einstelleinrichtung 116 zum kanalindividuellen Ändern einer relativen Lage zwischen dem Bildsensorbereich 58i eines jeweiligen optischen Kanals 16i, der Optik 64i des jeweiligen optischen Kanals 16i und der Strahlumlenkeinrichtung 18 bzw. des entsprechenden Segments 68i derselben oder zum kanalindividuellen Ändern einer optischen Eigenschaft 16i oder einer optischen Eigenschaft des die Umlenkung des Strahlengangs des jeweiligen optischen Kanals betreffenden Segments 68i der Strahlumlenkeinrichtung 18. Die Einstelleinrichtung 116 wird durch Vorgabewerte angesteuert bzw. führt die Einstellungsaufgaben gemäß den Vorgabewerten durch. Diese werden durch einen Speicher 118 und/oder eine Steuerung 122 bereitgestellt, die im Folgenden erläutert werden.
  • Die Vorrichtung 150 besitzt beispielsweise einen Speicher 118 mit eingespeicherten Vorgabewerten zur kanalindividuellen Ansteuerung der Einstelleinrichtung 116. Die Vorgabewerte können herstellerseitig vorgegeben und in den Speicher 118 eingespeichert sein. Zusätzlich kann der Prozessor 112 beispielsweise, wie es in Fig. 15a mit einer gestrichelten Linie 124 angedeutet ist, über Auswertungen von aufgenommenen Bildern der Bildsensorbereiche 58a-d, wie z.B. Bildern, die von dem Prozessor 112 zusammenzufügen bzw. zu einem Gesamtbild zu verschmelzen sind, in der Lage sein, die eingespeicherten Vorgabewerte in dem Speicher 118 zu verbessern bzw. zu aktualisieren. Beispielsweise nimmt der Prozessor 112 eine Szene auf, indem die Multiaperturabbildungsvorrichtung 150 über die Einstelleinrichtung 116 mit aktuellen eingespeicherten Vorgabewerten eingestellt wird, wie es im Nachfolgenden noch näher beschrieben wird. Dazu werden die Vorgabewerte aus dem Speicher 118 gelesen und durch die Einstelleinrichtung 116 zur kanalindividuellen Einstellung verwendet. Der Prozessor 112 gewinnt durch Analyse der so aufgenommenen Bilder der Bildsensorbereiche 58a-d Informationen darüber, wie die eingespeicherten und soeben zur Aufnahme verwendeten Vorgabewerte in dem Speicher 118 modifiziert werden sollten, um bei der nächsten Aufnahme unter Verwendung dieser verbesserten bzw. aktualisierten Vorgabewerte bei der nächsten Aufnahme zu einer genaueren bzw. verbesserten Einhaltung obiger Annahmen zu führen.
  • Die eingespeicherten Vorgabewerte können einen vollständigen Satz von Einstellwerten aufweisen, d.h. eine Satz von Einstellwerten, um die Vorrichtung 150 komplett einzustellen. Sie sind wie oben beschrieben und unten weiter ausgeführt ausgewählt, um bestimmte kanalindividuelle Abweichungen der optischen Eigenschaften der Kanäle von einer Sollcharakteristik zu verringern oder zu beseitigen
  • Es kann sein, dass die Vorgabewerte mehrere Sätze von Einstellwerten, wie z.B. einen pro einer Folge von aneinander anschließenden Temperaturintervallen, aufweisen, so dass für eine Bildaufnahme stets der Satz von Einstellwerten verwendet wird, der für eine aktuelle Situation gerade geeignet ist. Dazu kann beispielsweise die Steuerung 122 einen Zugriff bzw. einen Nachschlag in die Tabelle von Zuordnungen zwischen Vorgabewertsätzen und unterschiedenen vorbestimmten Situationen in dem Speicher 118 ausführen. Die Steuerung 122 erhält für diesen Zugriff Sensordaten, die die aktuelle Situation widerspiegeln, wie z.B. Daten betreffend Temperatur, Druck, Feuchte, Lage der Vorrichtung 150 im Raum und/oder eine momentane Beschleunigung oder momentane Drehrate der Vorrichtung 150, und bestimmt aus diesen Daten einen aus den mehreren Vorgabewertsätzen in dem Speicher 118, nämlich denjenigen, der der vorbestimmten Situation zugeordnet ist, die der aktuellen Situation, wie sie durch die Sensordaten beschrieben wird, am nächsten kommt. Sensordaten können auch aus den Bildsensordaten der Bildsensorbereiche selbst gewonnen sein. Beispielsweise wird durch die Steuerung 122 ein Satz ausgewählt, in dessen zugehöriges Temperaturintervall die aktuelle Temperatur fällt. Die für eine bestimmte Bildaufnahme durch die Einstelleinrichtung 116 verwendeten Vorgabewerte des ausgewählten Satzes aus dem Speicher 118 können dann wieder aktualisiert werden, wenn die optionale Rückkopplung 124 verwendet wird.
  • Die eingespeicherten Vorgabenwerte können zum Beispiel derart ausgebildet sein, dass ein Maß für eine Dispersion einer Verteilung eines oder mehrerer Eigenschaften unter den optischen Kanäle durch die Ansteuerung der Einstellvorrichtung mittels der eingespeicherten Vorgabenwerte reduziert wird, nämlich eine transversale Abweichung der Teilgesichtsfelder von einer regelmäßigen Verteilung der Teilgesichtsfelder, Brennweiten der Optiken, oder Schärfentiefentfernungen der optischen Kanäle.
  • Alternativ könnten die Vorgabewerte in der Steuerung 122 ohne einen Speicher 118 ermittelt werden, nämlich indem beispielsweise in der Steuerung 122 eine Abbildung von den aktuellen Sensordaten auf geeignete Vorgabewerte fest integriert ist. Die Abbildung kann durch einen funktionellen Zusammenhang zwischen Sensordaten und Vorgabewerten beschrieben sein. Der funktionelle Zusammenhang könnte durch Parameter adaptierbar sein. Die Parameter könnten über die Rückkopplung 124 adaptiert werden.
  • Der Speicher 118 kann beispielsweise ein nichtflüchtiger Speicher sein. Möglicherweise handelt es sich um einen Nurlesespeicher, aber ein wiederbeschreibbarer Speicher ist ebenfalls möglich. Die Steuerung 122 und der Prozessor 112 können in Software, Hardware oder in programmierbarer Hardware implementiert sein. Es kann sich um auf einem gemeinsamen Mikroprozessor ausgeführte Programme handeln. Die Sensoren zur Lieferung der Sensordaten für die Steuerung 122 können zur Vorrichtung 150 gehören, wie z.B. die Bildsensorbereiche, oder aber externe Komponenten sein, wie Komponenten des Geräts, in das die Vorrichtung eingebaut ist, wie es bezüglich nachfolgender Figuren noch erläutert wird.
  • Nachfolgend werden nun mögliche Ausgestaltungen für die Einstelleinrichtung 116 beschrieben. Die Einstelleinrichtung 116 von Fig. 15a kann dabei auf eine, mehrere oder alle der nachfolgend beschriebenen Ausgestaltungsvarianten zutreffen. Auf spezielle Kombinationen wird ebenfalls nachfolgend eingegangen.
  • In der gezeigten Variante umfasst die Einstelleinrichtung 116 beispielsweise einen Aktor 126i für jeden Kanal 16i, der die Optik 64i des entsprechenden Kanals 16i in axialer Richtung entlang der optischen Achse 17i bzw. längs des Strahlengangs und/oder transversal bzw. quer dazu entlang der z-Achse und/oder der y-Achse bewegt. Alternativ könnte der Aktor 126i beispielsweise auch den Bildsensor 12 oder einen einzelnen Bildsensorbereich 58i bewegen. Ganz allgemein könnte der Aktor 126i eine relative Bewegung von Bildsensorbereich 58i, Optik 64i und/oder dem entsprechenden Segment 64i der Strahlumlenkeinrichtung 24 bewirken.
  • Gemäß einer Variante, auf die sich Fig. 16a bezieht, umfasst die Einstelleinrichtung 116 ein phasenänderndes optisches Element bzw. ein Phasenänderungselement 128i für jeden Kanal 16i, das, wie in Fig. 16a angedeutet, in die jeweilige Optik 64ai integriert sein kann (128i"), in das Segment 68i integriert sein kann (128i''''), zwischen Bildsensorbereich 58i und Optik 64i (128i') oder zwischen Optik 64i und Strahlumlenkeinrichtungssegment 68i (128i''') positioniert sein kann, wobei auch Kombinationen der vorerwähnten Möglichkeiten möglich sind. Das phasenändernde optische Element 128i kann beispielsweise eine ortsabhängige Änderung eines Brechungsindex, also eine lokale Verteilung desselben, bewirken, wie z.B. durch Flüssigkeitskristalle. Alternativ oder zusätzlich bewirkt das phasenändernde optische Element 128i eine Änderung der Form einer optisch aktiven Oberfläche, wie z.B. durch Nutzung von Piezos, die auf flexible, feste, transparente Materialien mechanisch einwirken und eine Verformung bewirken oder durch Nutzung des Elektrobenetzungseffekts. Das Phasenänderungselement 128i" könnte beispielsweise den Brechungsindex der Optik 64i ändern. Alternativ könnte das Phasenänderungselement 128i" eine Form einer optischen Linsenfläche der Optik 64i verändern und dadurch die effektive Brechkraft der Optik 64i verändern. Das Phasenänderungselement 128i'''' könnte beispielsweise auf einer optisch relevanten Oberfläche der Segmente 68i, wie z.B. auf der reflektiven Facette, ein sinusförmiges Phasengitter erzeugen, um eine virtuelle Verkippung der entsprechenden Oberfläche zu bewirken. Auf ähnliche Weise könnte das Phasenänderungselement 128i' oder Phasenänderungselement 128i" die optische Achse umlenken.
  • In anderen Worten ausgedrückt, kann die Phasenänderung, die durch das phasenändernde optische Element 128i bewirkt wird, weitgehend rotationssymmetrisch, wie z.B. rotationssymmetrisch um die optische Achse 17i sein, und somit in dem Fall 128i" beispielsweise eine Änderung der Brennweite der Optik 64i bewirken. Die Phasenänderung, die durch das Element 128i bewirkt wird, kann allerdings auch weitgehend linear sein, wie z.B. linear entlang der z-Achse oder linear entlang der y-Achse, um eine Änderung des Ablenkwinkels bzw. eine Ablenkung der optischen Achse 17i in der entsprechenden Richtung zu bewirken.
  • Die rotationssymmetrische Phasenänderung kann zur Fokussierung verwendet werden, und die lineare Phasenänderung zur Lagekorrektur des Teilgesichtsfeldes des entsprechenden optischen Kanals 16i.
  • Gemäß einer weiteren Variante, die in Fig. 16b dargestellt ist, umfasst die Einstelleinrichtung 116 für jeden Kanal 16i einen Aktor 132i, der das Segment 68i, wie z.B. die reflektierende Facette des jeweiligen Kanals 16i, in seiner Winkelorientierung bezüglich der optischen Achse 17i ändert, d.h. den Anstellwinkel β x i .
    Figure imgb0020
    Dabei sei erwähnt, dass das Segment 68i nicht auf eine reflektierende Facette beschränkt ist. Jedes Segment 68i könnte auch als Prisma ausgebildet sein, das die Richtung der optischen Achse 17i in der yz-Ebene umlenkt, während das Prisma von dem Strahlengang des optischen Kanals 16i durchlaufen wird.
  • Zur Realisierung der relativen Bewegungen durch die Aktoren 126i bzw. 132i, d.h. zur Erzeugung der Bewegung der Optik 68i, die beispielsweise translatorisch ausgeführt sein kann, sowie zum Verkippen des Segments 68i durch den Aktor 132i und die z-Achse, kann beispielsweise ein pneumatischer, hydraulischer, piezoelektrischer, thermischer, elektrostatischer oder elektrodynamischer Antrieb oder ein DC- oder Schrittmotor oder wiederum ein Tauchspulenantrieb verwendet werden.
  • Zurückkehrend zur Fig. 15a ist mit gestrichelten Linien angedeutet, dass die Multiaperturabbildungsvorrichtung 150 optional zusätzlich zu der Einstelleinrichtung 116 einen oder mehrere Aktoren 134 zum Erzeugen einer kanalglobalen, d.h. für alle optischen Kanäle 16a-d gleiche, Relativbewegung zwischen Bildsensor 12, Optikarray 14 und Strahlumlenkeinrichtung 18 umfassen kann. Der eine oder die mehreren zusätzlichen Aktoren 134 kann/können dabei, wie es in Fig. 15a angedeutet ist, Teil einer optional vorhandenen Autofokussteuerung 136 (Fokusiereinrichtung) und/oder einer optional vorhandenen Bildstabilisierungssteuerung der Multiaperturabbildungsvorrichtung sein.
  • Ein konkretes Beispiel einer um zusätzliche Aktoren ergänzten Vorrichtung 150 von Fig. 15a ist in Fig. 17 gezeigt. Fig. 17 zeigt die Multiaperturabbildungsvorrichtung 150 von Fig. 15a, wobei die Optiken 64a-d der optischen Kanäle 16a-d über den gemeinsamen Träger 66 gegeneinander mechanisch fixiert sind. Über diesen gemeinsamen Halter ist es nun möglich, die Optiken 64a-d einer globalen für alle Kanäle gleichen Bewegung zu unterziehen, wie z.B. durch eine translatorische Bewegung des Trägers 66 in der z-Richtung, d.h. entlang der Zeilenerstreckungsrichtung des Arrays 14. Hierzu ist ein Aktor 134a vorgesehen. Der Aktor 134a erzeugt also eine translatorische Bewegung der Optiken 64a-d, die für alle optischen Kanäle 16a-d gleich ist, indem der Aktor 134a den gemeinsamen Träger 66 der translatorischen Bewegung entlang der x-Achse unterzieht. Hinsichtlich des Typs von Aktor 134a wird auf die Beispiele hingewiesen, auf die Bezug nehmend auf die Fig. 16a und 16b hingewiesen wurde. Ferner umfasst die Vorrichtung 150 einen Aktor 134b zum kanalglobalen, d.h. für alle optischen Kanäle 16a-d gleichen, Ändern des Bildsensor-58i-zu-Optik-64i-Abstands entlang der x-Achse bzw. entlang der optischen Achse 17i. Wie es in Fig. 17 angedeutet ist, unterzieht beispielsweise der Aktor 134b die Optiken 64a-d der translatorischen Bewegung entlang der z-Achse zur Änderung des Abstands von den zugeordneten Bildsensorabschnitten 58a-d nicht über den Träger 66, sondern auch via den Aktor 134a, der somit ebenfalls der translatorischen Bewegung entlang der x-Achse unterzogen wird und quasi als Aufhängung für den Träger 66 dient.
  • Zusätzlich umfasst die Vorrichtung 150 von Fig. 17 einen Aktor 134c zum Drehen der Strahlumlenkeinrichtung 18 um eine Achse, die parallel zur z-Achse verläuft und in oder nicht weit entfernt von der Ebene liegt, in welcher die optischen Achsen 17a-d verlaufen. Auch bezüglich der Aktoren 134b und 134c wird bezüglich möglicher Implementierungsbeispiele auf die Auflistung von Beispielen verwiesen, die Bezug nehmend auf die Fig. 16a und 16b im Vorhergehenden geliefert wurde. Die Rotationsbewegung bzw. Drehbewegung, die durch den Aktor 134c auf die Strahlumlenkeinrichtung 18 ausgeübt wird, wirkt sich auf die Segmente 68a-d der Strahlumlenkeinrichtung 18 für alle Kanäle 16a-d gleichermaßen aus, d.h. ist kanalglobal.
  • Über den Aktor 134b ist nun die Autofokussteuerung 136 beispielsweise in der Lage, den Fokus einer Aufnahme durch die Vorrichtung 150 vermittels der Kanäle 16a-d im kanalglobalen Sinne zu steuern. Die Bildstabilisierungssteuerung 138 ist in der Lage, das Gesamtgesichtsfeld 72 vermittels des Aktors 134c in einer ersten Richtung 142 und vermittels des Aktors 134a in einer dazu senkrechten Richtung 144 vor Verwacklungen durch einen Benutzer beispielsweise zu stabilisieren. Die erste Richtung 142 kann durch eine Rotationsbewegung um die Rotationsachse 44 erhalten werden. Wie es durch die erste Richtung 142' angedeutet ist, kann alternativ oder zusätzlich auch eine translatorische Bewegung der Strahlumlenkeinrichtung 18 und/oder des Arrays 14 von dem Aktor 134 erzeugt werden. Die Richtungen 142, 142' und 144 können dabei parallel zu den Bildachsen sein, in einer Ebene der Richtung oder diesen entsprechen. Hierin beschriebene Bildstabilisatoren können ausgebildet sein, um für zwei, eine Vielzahl oder alle Strahlengänge der optischen Kanäle gemeinsam zu wirken. Das bedeutet, auf eine kanalindividuelle Bildstabilisierung kann verzichtet werden, was vorteilhaft ist.
  • Beispielsweise weist dazu die Vorrichtung 150 von Fig. 15a für jeden Kanal 16a-d einen Aktor, etwa einen Aktor 126i für jeden Kanal 16i auf, um die Bildsensorbereiche 58a-d kanalindividuell einer translatorischen Bewegung entlang der z-Achse und/oder entlang der y-Achse zu unterziehen, um beispielsweise Herstellungsungenauigkeiten oder temperaturbedingte Drifts der Teilgesichtsfelder innerhalb des Gesamtgesichtsfeldes auszugleichen. Die Vorrichtung 150 von Fig. 15a könnte alternativ oder zusätzlich einen Aktor 128i" aufweisen, um Brennweitenunterschiede der Optiken 64a-d, die herstellungsbedingt unerwünschter Weise aufgetreten sind, auszugleichen. Zusätzlich oder alternativ kann die Vorrichtung 150 von Fig. 15a einen Aktor 128i''' aufweisen, um herstellungsbedingt oder temperaturbedingt entstandene Abweichungen der relativen Neigungen der Segmente 68a-d untereinander so zu kompensieren, dass die relativen Neigungen zu der gewünschten Abdeckung des Gesamtgesichtsfeldes 72 durch die Teilgesichtsfelder 74a-d führen. Zusätzlich oder alternativ kann die Vorrichtung 150 dann schließlich noch Aktoren des Typs 128i' bzw. 128i''' aufweisen.
  • Noch einmal zusammenfassend kann die Vorrichtung 150 also einen Aktor 134c aufweisen, der ausgebildet ist, um die Strahlumienkeinrichtung 18 um eine Achse zu drehen, die parallel zu der Zeilenerstreckungsrichtung z des Arrays 14 ist. Die Drehachse liegt beispielsweise in der Ebene der optischen Achsen 17a-d oder davon weniger als ein Viertel eines Durchmessers der Optiken 64a-d entfernt. Alternativ wäre es natürlich auch möglich, dass die Drehachse weiter entfernt liegt, wie z.B. weniger als ein Optikdurchmesser oder weniger als vier Optikdurchmesser.Der Aktor 134c kann beispielsweise vorgesehen sein, um die Strahlumlenkeinrichtung 18 mit kurzer Ansprechzeit in einem lediglich kleinen Winkelbereich, wie z.B. innerhalb einer Spanne von weniger als 5° oder weniger als 10° zu drehen, um Verwacklungen der Multiaperturabbildungsvorrichtung 150 durch beispielsweise einen Benutzer während einer Aufnahme auszugleichen. Der Aktor 134c würde in diesem Fall beispielsweise von der Bildstabilisierungssteuerung 138 angesteuert werden.
  • Alternativ oder zusätzlich könnte Aktor 134c ausgebildet sein, um mit größeren Winkelverstellungen das Gesamtgesichtsfeld 72, das durch die Gesamtabdeckung der Teilgesichtsfelder 74a-d (Fig. 15a) definiert wird, in seiner Richtung zu verändern. Dabei wäre es ferner möglich, dass durch Rotation der Strahlumlenkeinrichtung 18 auch Ablenkungen erzielt werden, bei denen das Gesamtgesichtsfeld in der entgegengesetzten Richtung relativ zu der Vorrichtung 150 angeordnet ist, indem beispielsweise die Strahlumlenkeinrichtung 18 als ein beidseitig reflektives Spiegelarray ausgebildet ist.
  • Wiederum alternativ oder zusätzlich kann die Vorrichtung 150 einen Aktor 134a aufweisen, der ausgebildet ist, um die Optiken 64a-d vermittels des Substrats 66 bzw. das Substrat 66 selbst und damit die Optiken 64a-d translatorisch entlang der Zeilenerstreckungsrichtung zu bewegen. Der Aktor 134a könnte beispielsweise ebenfalls durch die vorerwähnte Bildstabilisierungssteuerung angesteuert werden, um durch die Bewegung 96 entlang der Zeilenerstreckungsrichtung eine Bildstabilisierung quer zu der Bildstabilisierung zu erzielen, die durch die Rotation der Spiegelumlenkvorrichtung 18 verwirklicht wird.
  • Weiterhin kann zusätzlich oder alternativ die Vorrichtung 150 einen Aktor 134b zum Verändern des bildseitigen Abstands zwischen Bildsensor 12 und Optiken 64a-d bzw. zwischen Bildsensor 12 und Körper 66 aufweisen, um eine Schärfentiefeneinstellung zu erzielen, vgl. Fig. 12. Die Einrichtung 98 kann durch eine manuelle Benutzersteuerung oder durch eine Autofokussteuerung der Vorrichtung 150 gesteuert werden.
  • Der Aktor 134a dient also als Aufhängung des Substrats 66 und ist vorzugsweise, wie in Fig. 15a angedeutet seitlich neben dem Substrat 66 entlang der Zeilenerstreckungsrichtung angeordnet, um die Bauhöhe nicht zu erhöhen. Auch für die Aktoren 134b und 134c gilt, dass selbige vorzugsweise in der Ebene der optischen Strahlengänge angeordnet sind, um die Bauhöhe nicht zu erhöhen.
  • Es sei darauf hingewiesen, dass die Optiken 64a-d nicht nur untereinander, wie z.B. über das schon erwähnte transparente Substrat, sondern auch relativ zu der Strahlumlenkeinrichtung in konstanter relativer Lage gehaltert sein können, wie z.B. über einen geeigneten Rahmen, der vorzugsweise die Bauhöhe nicht vergrößert und deshalb vorzugsweise in der Ebene der Komponenten 12, 14 und 66 bzw. in der Ebene der Strahlengänge verläuft. Die Konstanz der relativen Lage könnte sich auf den Abstand zwischen Optiken und Strahlumlenkeinrichtung entlang der optischen Achsen beschränken, so dass der Aktor 134b beispielsweise die Optiken 64a-d zusammen mit der Strahlumlenkeinrichtung 18 translatorisch entlang der optischen Achsen bewegt. Der Optiken-zu-Strahlumlenkeinrichtung-Abstand könnte auf einen minimalen Abstand eingestellt sein, so dass der Strahlengang der Kanäle nicht durch die Segmente der Strahlumlenkeinrichtung 18 lateral eingeschränkt wird, was die Bauhöhe verringert, da andernfalls die Segmente 68i hinsichtlich der lateralen Ausdehnung für den größten Optiken-zu-Strahlumlenkeinrichtung-Abstand dimensioniert sein müssten, um den Strahlengang nicht einzuschneiden. Zusätzlich könnte die Konstanz der relativen Lage bedeuten, dass vorerwähnter Rahmen die Optiken und die Strahlumlenkeinrichtung entlang der z-Achse starr zueinander haltert, sodass der Aktor 134a die Optiken 64a-d zusammen mit der Strahlumlenkeinrichtung translatorisch entlang der Zeilenerstreckungsrichtung bewegen würde. Die oben beschriebene Strahlumlenkeinrichtung 18 zum Umlenken des Strahlengangs der optischen Kanäle ermöglicht zusammen mit dem Aktor 134c zur Erzeugung der Rotationsbewegung der Strahlumlenkeinrichtung 18 und dem Aktor 134a einer optischen Bildstabilisierungssteuerung der Multiaperturabbildungsvorrichtung 150 eine Bild- bzw. Gesamtbildfeldstabilisierung in zwei Dimensionen, nämlich durch die translatorische Bewegung des Substrats 66 eine Bildstabilisierung entlang einer ersten Bildachse, die im Wesentlichen parallel zur Zeilenerstreckungsrichtung verläuft, und durch die Erzeugung der Rotationsbewegung der Strahlumlenkeinrichtung 18 eine Bildstabilisierung entlang einer zweiten Bildachse, die im Wesentlichen parallel zu den optischen Achsen vor bzw. ohne Strahlumlenkung verläuft, oder - betrachtet man die umgelenkten optischen Achsen - senkrecht zu den optischen Achsen und der Zeilenerstreckungsrichtung. Zusätzlich kann die beschriebene Anordnung eine translatorische Bewegung der im angesprochenen Rahmen fixierten Strahlumlenkeinrichtung und des Arrays 14 senkrecht zur Zeilenerstreckungsrichtung bewirken, wie z.B. durch den beschriebenen Aktor 54, die für die Realisierung einer Fokuseinstellung und damit einer Autofokusfunktion genutzt werden kann.
  • Fig. 18 zeigt eine schematische Ansicht einer Multiaperturabbildungsvorrichtung 180 zur Verdeutlichung einer vorteilhaften Anordnung von Aktoren, etwa zur Bildstabilisierung und/oder zur Einstellung eines Fokus. Der Bildsensor 12, das Array 14 und die Strahlumlenkeinrichtung 18 können einen Quader im Raum aufspannen. Der Quader kann auch als virtueller Quader verstanden werden und kann beispielsweise ein minimales Volumen und insbesondere eine minimale senkrechte Ausdehnung entlang einer Richtung parallel zu der y-Richtung bzw. einer Dickenrichtung aufweisen und den Bildsensor 12, das einzeilige Array 14 und die Strahlumlenkeinrichtung 18 umfassen. Das minimale Volumen kann auch so verstanden werden, dass es einen Quader beschreibt, der durch die Anordnung und/oder betriebsgemäße Bewegung des Bildsensors 12, des Arrays 14 und/oder der Strahlumlenkeinrichtung 18 aufgespannt ist. Das Array 14 kann eine Zeilenerstreckungsrichtung 146 aufweisen, entlang derer die optischen Kanäle 16a und 16b nebeneinander, ggf. parallel zueinander, angeordnet sind. Die Zeilenerstreckungsrichtung 146 kann ortsfest im Raum angeordnet sein.
  • Der virtuelle Quader kann zwei Seiten aufweisen, die gegenüberliegend parallel zueinander, parallel zu der Zeilenerstreckungsrichtung 146 des einzeiligen Arrays 14 sowie parallel zu einem Teil des Strahlengangs 17a und/oder 17b der optischen Kanäle 16a bzw. 16b zwischen dem Bildsensor 12 und der Strahlumlenkeinrichtung 18 ausgerichtet sind. Vereinfacht, jedoch ohne einschränkende Wirkung, können dies beispielsweise eine Oberseite und eine Unterseite des virtuellen Quaders sein. Die zwei Seiten können eine erste Ebene 148a und eine zweite Ebene 148b aufspannen. D.h., die beiden Seiten des Quaders können jeweils Teil der Ebene 148a bzw. 148b sein. Weitere Komponenten der Multiaperturabbildungsvorrichtung können vollständig, zumindest aber teilweise innerhalb des Bereichs zwischen den Ebenen 148a und 148b angeordnet sein, so dass ein Bauraumbedarf der Multiaperturabbildungsvorrichtung 180 entlang einer Richtung parallel zu einer Oberflächennormalen der Ebenen 148a und/oder 148b gering ist, was vorteilhaft ist. Ein Volumen der Multiaperturabbildungsvorrichtung kann einen geringen oder minimalen Bauraum zwischen den Ebenen 148a und 148b aufweisen. Entlang der lateralen Seiten oder Erstreckungsrichtungen der Ebenen 148a und/oder 148b kann ein Bauraum der Multiaperturabbildungsvorrichtung groß oder beliebig groß sein. Das Volumen des virtuellen Quaders ist bspw. von einer Anordnung des Bildsensors 12, des einzeiligen Arrays 14 und der Strahlumlenkeinrichtung 18 beeinflusst, wobei die Anordnung dieser Komponenten gemäß der hierin beschriebenen Ausführungsbeispiele so erfolgen kann, dass der Bauraum dieser Komponenten entlang der Richtung senkrecht zu den Ebenen und mithin der Abstand der Ebenen 148a und 148b zueinander gering oder minimal wird. Gegenüber anderen Anordnungen der Komponenten kann das Volumen und/oder der Abstand anderer Seiten des virtuellen Quaders vergrößert sein.
  • Die Multiaperturabbildungsvorrichtung 180 umfasst eine Aktoreinrichtung 152 zum Erzeugen einer Relativbewegung zwischen dem Bildsensor 12, dem einzeiligen Array 14 und der Strahlumlenkeinrichtung 18. Die Aktoreinrichtung 152 ist zumindest teilweise zwischen den Ebenen 148a und 148b angeordnet. Die Aktoreinrichtung 152 kann ausgebildet sein, um zumindest eines aus dem Bildsensor 12, dem einzeiligen Array 14 oder der Strahlumlenkeinrichtung 18 rotatorisch um zumindest eine Achse und/oder translatorisch entlang einer oder mehrerer Richtungen oder zu bewegen. Hierfür kann die Aktoreinrichtung 152 zumindest einen Aktor aufweisen, etwa den Aktor 128i, 132i und/oder 134, zum kanalindividuellen Ändern einer relativen Lage zwischen dem Bildsensorbereich 58i eines jeweiligen optischen Kanals 16i, der Optik 64i des jeweiligen optischen Kanals 16i und der Strahlumlenkeinrichtung 18 bzw. des entsprechenden Segments 68i derselben oder zum kanalindividuellen Ändern einer optischen Eigenschaft 16i oder einer optischen Eigenschaft des die Umlenkung des Strahlengangs des jeweiligen optischen Kanals betreffenden Segments 68i der Strahlumlenkeinrichtung 18. Alternativ oder zusätzlich kann die Aktoreinrichtung einen Autofokus und/oder eine optische Bildstabilisierung implementieren, wie es vorangehend beschrieben ist.
  • Die Aktoreinrichtung 152 kann eine Abmessung oder Ausdehnung 154 parallel zu der Dickenrichtung aufweisen. Ein Anteil von höchstens 50 %, höchstens 30 % oder höchstens 10 % der Abmessung 154 kann ausgehend von einem Bereich zwischen den Ebenen 148a und 148b über die Ebene 148a und/oder 148b hinausragen oder aus dem Bereich herausragen. Das bedeutet, dass die Aktoreinrichtung 152 höchstens unwesentlich über die Ebene 148a und/oder 148b hinausragt. Gemäß Ausführungsbeispielen ragt die Aktoreinrichtung 152 nicht über die Ebenen 148a und 148b hinaus. Vorteilhaft daran ist, dass eine Ausdehnung der Multiaperturabbildungsvorrichtung 180 entlang der Dickenrichtung durch die Aktoreinrichtung 152 nicht vergrößert wird.
  • Anhand der Fig. 19a-f werden vorteilhafte Ausgestaltungen der Strahlumlenkeinrichtung 18 beschrieben. Die Ausführungen zeigen eine Reihe von Vorteilen auf, die einzeln oder in beliebiger Kombination mit einander ausführbar sind, jedoch nicht einschränkend wirken sollen.
  • Fig. 19a zeigt eine schematische Seitenschnittansicht eines Strahlumlenkelements 172, wie es für eine hierin beschriebene Strahlumlenkeinrichtung, etwa die Strahlumlenkeinrichtung 18 der Fig. 4, 5 oder 6 einsetzbar ist. Das Strahlumlenkelement 172 kann für einen, eine Mehrzahl oder alle der optischen Kanäle 16a-d wirksam sein und einen polygonzugartigen Querschnitt aufweisen. Obwohl ein dreieckiger Querschnitt gezeigt ist, kann es sich auch um ein beliebiges anderes Polygon handeln. Alternativ oder zusätzlich kann der Querschnitt auch zumindest eine gekrümmte Oberfläche aufweisen, wobei insbesondere bei reflektierenden Oberflächen eine zumindest abschnittsweise ebene Ausbildung vorteilhaft sein kann, um Abbildungsfehler zu vermeiden.
  • Das Strahlumlenkelement 172 weist bspw. eine erste Seite 174a, eine zweite Seite 174b und eine dritte Seite 174c auf. Zumindest zwei Seiten, etwa die Seiten 174a und 174b sind reflektiv ausgebildet, so dass das Strahlumlenkelement 172 beidseitig reflektiv ausgebildet ist. Bei den Seiten 174a und 174b kann es sich um Hauptseiten des Strahlumlenkelements 172 handeln, also Seiten, deren Fläche größer ist, als die Seite 174c.
  • In anderen Worten kann das Strahlumlenkelement 172 keilförmig und beidseitig reflektiv gebildet sein. Der Fläche 174c gegenüberliegend, also zwischen den Flächen 174a und 174b, kann eine weitere Fläche angeordnet sein, die jedoch wesentlich kleiner als die Fläche 174c ist. Mit anderen Worten verläuft der durch die Flächen 174a, b und c gebildete Keil nicht beliebig spitz zu, sondern ist an der spitzen Seite mit einer Fläche versehen und mithin abgestumpft.
  • Fig. 19b zeigt eine schematische Seitenschnittansicht des Strahlumlenkelements 172, bei dem eine Aufhängung oder eine Verschiebeachse 176 des Strahlumlenkelements 172 beschrieben ist. Die Verschiebeachse 176, um die das Strahlumlenkelement 172 rotatorisch und/oder translatorisch in der Strahlumlenkeinrichtung 18 bewegbar sein kann, kann exzentrisch bezüglich eines Flächenschwerpunktes 178 des Querschnitts verschoben sein. Der Flächenschwerpunkt kann alternativ auch ein Punkt sein, der die hälftige Abmessung des Strahlumlenkelements 172 entlang einer Dickenrichtung 182 und entlang einer Richtung 184 senkrecht hierzu beschreibt.
  • Die Verschiebeachse kann bspw. entlang einer Dickenrichtung 182 unverändert und einen beliebigen Versatz in einer Richtung senkrecht hierzu aufweisen. Alternativ ist auch ein Versatz entlang der Dickenrichtung 182 vorstellbar. Die Verschiebung kann bspw. so erfolgen, dass bei einer Rotation des Strahlumlenkelements 172 um die Verschiebeachse 176 ein höherer Stellweg erhalten wird, als bei einer Rotation um den Flächenschwerpunkt 178. So kann sich durch die Verschiebung der Verschiebeachse 176 der Weg, um den die Kante zwischen den Seiten 174a und 174b bei einer Rotation bewegt wird bei gleichem Rotationswinkel verglichen mit einer Rotation um den Flächenschwerpunkt 178 erhöhen. Bevorzugt ist das Strahlumlenkelement 172 so angeordnet, dass die Kante, also die spitze Seite des keilförmigen Querschnitts, zwischen den Seiten 174a und 174b dem Bildsensor zugewandt ist. Durch geringe Rotationsbewegungen kann somit eine jeweils andere Seite 174a oder 174b den Strahlengang der optischen Kanäle umlenken. Hierbei wird deutlich, dass die Rotation so ausgeführt werden kann, dass ein Raumbedarf der Strahlumlenkeinrichtung entlang der Dickenrichtung 182 gering ist, da eine Bewegung des Strahlumlenkelements 172 so, dass eine Hauptseite senkrecht zum Bildsensor steht, nicht erforderlich ist.
  • Die Seite 174c kann auch als Nebenseite oder als Rückseite bezeichnet werden. Mehrere Strahlumlenkelemente können so miteinander verbunden werden, dass ein verbindendes Element an der Seite 174c angeordnet ist, oder durch den Querschnitt der Strahlumlenkelemente verläuft, also im Inneren der Strahlumlenkelemente angeordnet ist, etwa im Bereich der Verschiebeachse 176. Insbesondere kann das haltende Element so angeordnet sein, dass es nicht oder lediglich in geringem Umfang, d. h., höchstens 50 %, höchstens 30 % oder höchstens 10 % über das Strahlumlenkelement 172 entlang der Richtung 182 hinausragt, so dass das Halteelement nicht die Ausdehnung des Gesamtaufbaus entlang der Richtung 182 erhöht oder bestimmt. Die Ausdehnung in Dickenrichtung 182 kann alternativ durch die Linsen der optischen Kanäle bestimmt sein, d. h. diese weisen die das Minimum der Dicke definierende Abmessung auf.
  • Das Strahlumlenkelement 172 kann aus Glas, Keramik, Glaskeramik, Kunststoff, Metall oder einer Kombination dieser Materialien und /oder weiterer Materialien gebildet sein.
  • In anderen Worten kann das Strahlumlenkelement 172 so angeordnet sein, dass die Spitze, d. h., die Kante zwischen den Hauptseiten 174a und 174b zum Bildsensor zeigt. Eine Haltung der Strahlumlenkelemente kann so erfolgen, dass sie lediglich an der Rückseite oder im Inneren der Strahlumlenkelemente erfolgt, d. h. die Hauptseiten werden nicht verdeckt. Ein gemeinsames haltendes oder verbindendes Element kann sich über die Rückseite 174c erstrecken. Die Drehachse des Strahlumlenkelements 172 kann exzentrisch angeordnet sein.
  • Fig. 19c zeigt eine schematische perspektivische Ansicht einer Multiaperturabbildungsvorrichtung 190, die einen Bildsensor 12, und ein einzeiliges Array 14 von nebeneinander angeordneten optischen Kanälen 16a-d umfasst. Die Strahlumlenkeinrichtung 18 umfasst eine Anzahl von Strahlumlenkelementen 172a-d, die der Anzahl von optischen Kanälen entsprechen kann. Alternativ kann eine geringere Anzahl von Strahlumlenkelementen angeordnet sein, etwa wenn zumindest ein Strahlumlenkelement von zwei optischen Kanälen genutzt wird. Alternativ kann auch eine höhere Anzahl angeordnet sein, etwa wenn eine Umschaltung der Umlenkrichtung der Strahlumlenkeinrichtung 18 durch eine translatorische Bewegung erfolgt. Jedes Strahlumlenkelement 172a-d kann einem optischen Kanal 16a-d zugeordnet sein. Die Strahlumlenkelemente 172a-d können als eine Vielzahl von Elementen 172 gemäß Fig. 11 agebildet sein. Alternativ können zumindest zwei, mehrere oder alle Strahlumlenkelemente 172a-d einstückig mit einander gebildet sein.
  • Fig. 19d zeigt eine schematische Seitenschnittansicht des Strahlumlenkelements 172, dessen Querschnitt das als Freiformfläche gebildet ist. So kann die Seite 174c eine Aussparung 186 aufweisen, die eine Befestigung eines haltenden Elements ermöglicht, wobei die Aussparung 186 auch als hervorstehendes Element, etwa als Feder eines Nut-FederSystems gebildet sein kann. Der Querschnitt weist ferner eine vierte Seite 174d auf, die eine geringere Flächenausdehnung als die Hauptseiten 174a und 174b aufweist und selbige mit einander verbindet.
  • Fig. 19e zeigt eine schematische Seitenschnittansicht eines ersten Strahlumlenkelements 172a und eines in Darstellungsrichtung dahinterliegenden zweiten Strahlumlenkelements 172b. Die Aussparungen 186a und 186b können dabei so angeordnet sein, dass sie im Wesentlichen deckungsgleich sind, so dass eine Anordnung eines verbindenden Elements in den Aussparungen ermöglicht ist.
  • Fig. 19f zeigt eine schematische perspektivische Ansicht der Strahlumlenkeinrichtung 18, die bspw. vier Strahlumlenkelements 172a-d umfasst, die mit einem verbindenden Element 188 verbunden sind. Das verbindende Element kann nutzbar sein, um von einem Aktor translatorisch und/oder rotatorisch bewegbar zu sein. Das verbindende Element 188 kann einstückig ausgebildet sein und über eine Erstreckungsrichtung, etwa die y-Richtung in Fig. 5c, an oder in den Strahlumlenkelementen 172a-d verlaufen. Alternativ kann das verbindende Element 188 auch lediglich mit zumindest einer Seite der Strahlumlenkeinrichtung 18 verbunden sein, etwa wenn die Strahlumlenkelemente 172a-d einstückig gebildet sind. Alternativ kann eine Verbindung mit einem Aktor und/oder eine Verbindung der Strahlumlenkelemente 172a-d auch auf beliebige andere Weise erfolgen, etwa mittels Kleben, Ansprengen oder Löten.
  • Obwohl manche Aspekte im Zusammenhang mit einer Vorrichtung beschrieben wurden, versteht es sich, dass diese Aspekte auch eine Beschreibung des entsprechenden Verfahrens darstellen, sodass ein Block oder ein Bauelement einer Vorrichtung auch als ein entsprechender Verfahrensschritt oder als ein Merkmal eines Verfahrensschrittes zu verstehen ist. Analog dazu stellen Aspekte, die im Zusammenhang mit einem oder als ein Verfahrensschritt beschrieben wurden, auch eine Beschreibung eines entsprechenden Blocks oder Details oder Merkmals einer entsprechenden Vorrichtung dar.
  • Die oben beschriebenen Ausführungsbeispiele stellen lediglich eine Veranschaulichung der Prinzipien der vorliegenden Erfindung dar. Deshalb ist beabsichtigt, dass die Erfindung lediglich durch den Schutzumfang der nachstehenden Patentansprüche und nicht durch die spezifischen Einzelheiten, die anhand der Beschreibung und der Erläuterung der Ausführungsbeispiele hierin präsentiert wurden, beschränkt sei.

Claims (15)

  1. Vorrichtung (10; 20; 30; 40; 50; 60; 70; 90; 100; 130) mit:
    einem Gehäuse (22); und
    einer Multiaperturabbildungsvorrichtung (11; 140; 150; 180) umfassend:
    einem Array (14) von nebeneinander angeordneten optischen Kanälen (16a-d; 16N); und
    einer Strahlumlenkeinrichtung (18) zum Umlenken eines Strahlengangs (17a-d) der optischen Kanäle (16a-d; 16N);
    wobei Außenflächen (23) des Gehäuses (22) in einem ersten Betriebszustand der Vorrichtung ein Gehäusevolumen (24) umschließen, wobei die Strahlumlenkeinrichtung (18) in dem ersten Betriebszustand der Vorrichtung eine erste Position innerhalb des Gehäusevolumens (24) aufweist,
    wobei die Strahlumlenkeinrichtung (18) in einem zweiten Betriebszustand der Vorrichtung eine zweite Position aufweist, in der die Strahlumlenkeinrichtung (18) zumindest teilweise außerhalb des Gehäusevolumens (24) angeordnet ist, dadurch gekennzeichnet, dass bei einem Übergang von dem ersten Betriebszustand in den zweiten Betriebszustand Optiken (64a-b) der optischen Kanäle (16a-d; 16N) und der Bildsensor (12) mit der Strahlumlenkeinrichtung (18) translatorisch mitbewegt werden.
  2. Vorrichtung gemäß Anspruch 1, wobei die Multiaperturabbildungsvorrichtung in der zweiten Position die Umlenkung der Strahlengänge (17a-d) der optischen Kanäle (16a-d; 16N) außerhalb des Gehäusevolumens (24) ausführt.
  3. Vorrichtung gemäß einem der vorangehenden Ansprüche, wobei die Strahlumlenkeinrichtung (18) an unterschiedlichen Positionen über Verbindungselemente (34a, 34b) mit dem Gehäuse (22) verbunden ist, und ausgebildet ist, um in dem zweiten Betriebszustand wechselweise die zweite und eine dritte Position aufzuweisen, in denen die Strahlumlenkeinrichtung (18) die optischen Kanäle (16a-d; 16N) in eine unterschiedliche Richtung umlenkt.
  4. Vorrichtung gemäß einem der vorangehenden Ansprüche, wobei eine Öffnung (28) des Gehäuses (22), durch die die Strahlumlenkeinrichtung (18) bewegbar ist, in der ersten Position der Strahlumlenkeinrichtung (18) von einer Abdeckung (32) verschlossen ist.
  5. Vorrichtung gemäß Anspruch 1, wobei die Strahlumlenkeinrichtung (18) zwischen der ersten Position und der zweiten Position bewegbar ist, und wobei die Strahlumlenkeinrichtung (18) in der ersten Position das Gehäuse (22) verschließt und in der zweiten Position einen Strahlengang (17a-d) der optischen Kanäle (16a-d; 16N) umlenkt.
  6. Vorrichtung gemäß Anspruch 5, wobei die Strahlumlenkeinrichtung (18) ausgebildet ist, um zwischen der ersten Position und der zweiten Position unter Ausführung einer rotatorischen Bewegung bewegt zu werden, bei der das das Gehäuse aufklappt.
  7. Vorrichtung gemäß Anspruch 5 oder 6, wobei die Strahlumlenkeinrichtung (18) zwischen der ersten Position, der zweiten Position und einer dritten Position bewegbar ist, wobei die Strahlumlenkeinrichtung (18) den Strahlengang (17a-d) der optischen Kanäle (16a-d; 16N) in der zweiten Position in eine erste Richtung (19a) umlenkt und in der dritten Richtung in eine zweite Richtung (19b) umlenkt.
  8. Vorrichtung gemäß einem der vorangehenden Ansprüche, wobei die Multiaperturabbildungsvorrichtung eine Beleuchtungseinrichtung (54a-c) aufweist, die ausgebildet ist, um einen zu erfassenden Objektbereich zu beleuchten.
  9. Vorrichtung gemäß einem der vorangehenden Ansprüche, ferner umfassend einen für zwei, eine Vielzahl oder alle Strahlengänge (17a-d) der optischen Kanäle (16a-d; 16N) gemeinsam wirkenden optischen Bildstabilisator (94; 134, 138; 152) zur Bildstabilisierung
    entlang einer ersten Bildachse (144) und einer zweiten Bildachse (142) durch Erzeugen einer translatorischen Relativbewegung (96) zwischen einem Bildsensor (12) und dem Array (14) oder der Strahlumlenkeinrichtung (18) wobei die translatorische Bewegung parallel zu einer ersten Bildachse (144) und einer zweiten Bildachse (142) eines von der Multiaperturabbildungsvorrichtung erfassten Bildes verläuft; oder
    entlang einer ersten Bildachse (144) durch Erzeugen einer translatorischen Relativbewegung (96) zwischen einem Bildsensor (12) und dem Array (14) und zur Bildstabilisierung entlang einer zweiten Bildachse (142) durch Erzeugen einer Rotationsbewegung der Strahlumlenkeinrichtung (18).
  10. Vorrichtung gemäß Anspruch 9, wobei der optische Bildstabilisator (94; 134, 138; 152) zumindest einen Aktor (134) umfasst und so angeordnet ist, dass er zumindest teilweise zwischen zwei Ebenen (148a-b) angeordnet ist, die durch Seiten eines Quaders aufgespannt werden, wobei die Seiten des Quaders zueinander sowie zu einer Zeilenerstreckungsrichtung (z; 146) des Arrays (14) und eines Teils des Strahlengangs (17a-d) der optischen Kanäle (16a-d; 16N) zwischen dem Bildsensor (12) und der Strahlumlenkeinrichtung (18) parallel ausgerichtet sind und dessen Volumen minimal ist und dennoch den Bildsensor (12), das Array (14) und die Strahlumlenkeinrichtung (18) umfasst.
  11. Vorrichtung gemäß einem der vorangehenden Ansprüche, die ferner eine Fokussiereinrichtung (98; 134b, 136) umfassend zumindest einen Aktor (134b) zum Einstellen eines Fokus der Multiaperturabbildungsvorrichtung, der ausgebildet ist, um eine Relativbewegung zwischen zumindest einer Optik (64a-d) eines der optischen Kanäle (16a-d; 16N) und dem Bildsensor (12) bereitzustellen.
  12. Vorrichtung gemäß einem der vorangehenden Ansprüche, wobei die Strahlumlenkeinrichtung (18) in einer ersten Stellung den Strahlengang (17a-d) der optischen Kanäle (16a-d; 16N) so umlenkt dass dieser durch einen ersten transparenten Bereich (36a) verläuft, und den Strahlengang (17a-d) der optischen Kanäle (16a-d; 16N) in einer zweiten Stellung so umlenkt dass dieser durch einen zweiten transparenten Bereich (36b) verläuft; und
    wobei eine erste Blende (53a) ausgebildet ist, um den ersten transparenten Bereich in der zweiten Stellung optisch zumindest teilweise zu verschließen, und wobei eine zweite Blende (53b) ausgebildet ist, um den zweiten transparenten Bereich (36b) in der ersten Stellung optisch zeitweise zumindest teilweise zu verschließen.
  13. Vorrichtung gemäß einem der vorangehenden Ansprüche, die zumindest eine weitere Multiaperturabbildungsvorrichtung (11; 140; 150; 180) aufweist, wobei die Vorrichtung ausgebildet ist, um ein Gesamtgesichtsfeld (72) zumindest stereoskopisch zu erfassen.
  14. Verfahren zum Bereitstellen einer Vorrichtung (10; 20; 30; 40; 50; 60; 70; 90; 100; 130) mit folgenden Schritten:
    Bereitstellen eines Gehäuses (22); und
    Anordnen einer Multiaperturabbildungsvorrichtung (11; 140; 150; 180) in dem Gehäuse (22), wobei die Multiaperturabbildungsvorrichtung folgendes umfasst:
    ein Array (14) von nebeneinander angeordneten optischen Kanälen (16a-d; 16N); und
    eine Strahlumlenkeinrichtung (18) zum Umlenken eines Strahlengangs (17a-d) der optischen Kanäle (16a-d; 16N);
    wobei das Anordnen der Multiaperturabbildungsvorrichtung so ausgeführt wird, dass Außenflächen (23) des Gehäuses (22) in einem ersten Betriebszustand der Vorrichtung ein Gehäusevolumen (24) umschließen, so dass die Strahlumlenkeinrichtung (18) in dem ersten Betriebszustand der Vorrichtung eine erste Position innerhalb des Gehäusevolumens (24) aufweist;
    so dass die Strahlumlenkeinrichtung (18) in einem zweiten Betriebszustand der Vorrichtung eine zweite Position aufweist, in der die Strahlumlenkeinrichtung (18) zumindest teilweise außerhalb des Gehäusevolumens (24) angeordnet ist; und dadurch gekennzeichnet, dass bei einem Übergang von dem ersten Betriebszustand in den zweiten Betriebszustand Optiken (64a-b) der optischen Kanäle (16a-d; 16N) und der Bildsensor (12) mit der Strahlumlenkeinrichtung (18) translatorisch mitbewegt werden.
  15. Verfahren zum Erfassen eines Gesamtgesichtsfeldes (74) mit folgenden Schritten:
    Bewegen einer Strahlumlenkeinrichtung (18) einer Multiaperturabbildungsvorrichtung (11; 140; 150; 180) in eine Position, in der die Strahlumlenkeinrichtung (18) zumindest teilweise außerhalb eines Gehäusevolumens (24) angeordnet ist, das von Außenflächen (23) eines Gehäuses (22) in einem ersten Betriebszustand einer Vorrichtung umschlossen wird und in welchem die Strahlumlenkeinrichtung (18) in einer ersten Position angeordnet ist; dadurch gekennzeichnet, dass Optiken (64a-b) von optischen Kanälen (16a-d; 16N) und ein Bildsensor (12) mit der Strahlumlenkeinrichtung (18) translatorisch mitbewegt werden; und
    Erfassen des Gesamtgesichtsfeldes (74) mit einem Array von nebeneinander angeordneten optischen Kanälen (16a-d; 16N) der Multiaperturabbildungsvorrichtung, deren Strahlengänge (17a-d) von der Strahlumlenkeinrichtung (18) umgelenkt werden.
EP16788651.4A 2015-10-21 2016-10-19 Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes Active EP3366032B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102015220566.5A DE102015220566B4 (de) 2015-10-21 2015-10-21 Vorrichtung mit einer Multiaperturabbildungsvorrichtung, Verfahren zum Bereitstellen derselben und Verfahren zum Erfassen eines Gesamtgesichtsfeldes
PCT/EP2016/075083 WO2017067977A1 (de) 2015-10-21 2016-10-19 Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes

Publications (2)

Publication Number Publication Date
EP3366032A1 EP3366032A1 (de) 2018-08-29
EP3366032B1 true EP3366032B1 (de) 2019-07-31

Family

ID=57218864

Family Applications (1)

Application Number Title Priority Date Filing Date
EP16788651.4A Active EP3366032B1 (de) 2015-10-21 2016-10-19 Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes

Country Status (9)

Country Link
US (2) US11016273B2 (de)
EP (1) EP3366032B1 (de)
JP (2) JP6962573B2 (de)
KR (1) KR102233890B1 (de)
CN (2) CN114338971A (de)
DE (1) DE102015220566B4 (de)
ES (1) ES2749711T3 (de)
TW (1) TWI642975B (de)
WO (1) WO2017067977A1 (de)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016200287A1 (de) 2016-01-13 2017-07-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtungen, Verfahren zum Herstellen derselben und Abbildungssystem
US10295817B2 (en) * 2016-06-01 2019-05-21 General Electric Company Stereo imaging system
DE102017204035B3 (de) 2017-03-10 2018-09-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017206442B4 (de) 2017-04-13 2021-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben
DE102017206429A1 (de) 2017-04-13 2018-10-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017208709B3 (de) 2017-05-23 2018-10-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrrichtung und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017211586A1 (de) * 2017-07-06 2019-01-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit geringer falschlichtempfindlichkeit, abbildungssystem und verfahren zum bereitstellen einer multiaperturabbildungsvorrichtung
DE102017216172A1 (de) * 2017-09-13 2019-03-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit geringer bauhöhe und umschaltbarer blickrichtung, abbildungssystem und verfahren zum bereitstellen einer multiaperturabbildungsvorrichtung
US11445125B2 (en) * 2017-12-12 2022-09-13 B.G. Negev Technologies And Applications Ltd., At Ben-Gurion University Partial aperture imaging system
US11187914B2 (en) * 2018-09-28 2021-11-30 Apple Inc. Mirror-based scene cameras
WO2020069420A2 (en) 2018-09-28 2020-04-02 Ocelot Laboratories Llc Camera system
CN112889000B (zh) * 2018-10-30 2022-05-10 华为技术有限公司 成像装置和信息终端
DE102018222830A1 (de) * 2018-12-10 2020-06-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multikanalabbildungsvorrichtung und vorrichtung mit einer multiaperturabbildungsvorrichtung
DE102018222865A1 (de) * 2018-12-21 2020-06-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte
DE102018222861A1 (de) 2018-12-21 2020-06-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zum Akkumulieren von Bildinformation
DE102019204075B4 (de) * 2019-03-25 2022-03-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte
WO2020237450A1 (en) * 2019-05-27 2020-12-03 Huawei Technologies Co., Ltd. Imaging device and information terminal
TWI693559B (zh) * 2019-06-03 2020-05-11 雷科股份有限公司 非同軸視覺系統應用於量測物品之上下重合度的方法
US20220210304A1 (en) * 2019-07-26 2022-06-30 Hewlett-Packard Development Company, L.P. Adjustable camera systems for displays
DE102020210001A1 (de) 2020-08-06 2022-02-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein Anordnung zum erzeugen einer optischen abbildung sowie ein kamerasystem
CN113749764A (zh) * 2021-09-10 2021-12-07 深圳市恒天伟焱科技股份有限公司 多线激光控制方法、装置及脱毛仪
US20230115144A1 (en) * 2021-10-08 2023-04-13 Dell Products L.P. Information handling system and display monitor camera with adjustable tilt coverage mirror

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR890005738Y1 (ko) * 1986-08-19 1989-08-26 고경환 케이크 상자 밑판
DE19736675A1 (de) * 1997-08-22 1999-02-25 Siemens Ag Mobiles Bildtelefon
US6532035B1 (en) * 2000-06-29 2003-03-11 Nokia Mobile Phones Ltd. Method and apparatus for implementation of close-up imaging capability in a mobile imaging system
US6992699B1 (en) * 2000-08-02 2006-01-31 Telefonaktiebolaget Lm Ericsson (Publ) Camera device with selectable image paths
JP2003163824A (ja) * 2001-11-28 2003-06-06 Minolta Co Ltd カメラ付き折畳式携帯機器
TWM242705U (en) * 2003-01-09 2004-09-01 Benq Corp Electronic device with photographic camera
JP2005037548A (ja) * 2003-07-17 2005-02-10 Konica Minolta Opto Inc 撮影レンズ装置及びカメラ
JP2005051419A (ja) * 2003-07-31 2005-02-24 Kyocera Corp 携帯端末装置および撮像ユニット
TWI231050B (en) * 2003-09-29 2005-04-11 Primax Electronics Ltd Moveable mirror module for an image capturing apparatus capable of taking multi angle pictures
JP2006064958A (ja) * 2004-08-26 2006-03-09 Canon Inc 撮像装置
JP2006115474A (ja) * 2004-09-14 2006-04-27 Konica Minolta Holdings Inc カメラ及びそのカメラを組み込んだ画像表示装置
US20070247540A1 (en) 2004-09-14 2007-10-25 Konica Minolta Holdings, Inc. Camera and Image Display Apparatus Mounting the Same Camera
US20070041723A1 (en) * 2005-08-22 2007-02-22 Gutierrez Roman C Elongated camera system for cellular telephones
JP4640641B2 (ja) * 2005-09-09 2011-03-02 富士フイルム株式会社 撮像装置
JP2007116361A (ja) * 2005-10-19 2007-05-10 Sony Ericsson Mobilecommunications Japan Inc カメラ付き携帯端末及び撮像装置
TWI375848B (en) * 2005-11-18 2012-11-01 Hon Hai Prec Ind Co Ltd Portable electron apparatus having an image capture unit
JP2008180773A (ja) * 2007-01-23 2008-08-07 Nikon Corp デジタルカメラおよび光学機器
US20080266443A1 (en) * 2007-04-30 2008-10-30 Jung Yul Lee Camera Module
CN101465891B (zh) * 2007-12-19 2012-05-30 鸿富锦精密工业(深圳)有限公司 移动通讯装置
TWI396429B (zh) * 2007-12-31 2013-05-11 Hon Hai Prec Ind Co Ltd 移動通訊裝置
KR100958369B1 (ko) * 2008-02-01 2010-05-17 유창산업기계(주) 손떨림 보정 기능이 구비된 영상촬영장치
US7964846B2 (en) * 2008-08-01 2011-06-21 Gatan, Inc. Retractable lens-coupled electron microscope camera with image sensor in electron microscope vacuum chamber
JP5361357B2 (ja) * 2008-12-10 2013-12-04 キヤノン株式会社 撮像装置の光学素子駆動機構、および撮像装置
US8194138B2 (en) * 2008-12-17 2012-06-05 Getac Technology Corporation Portable electronic device and camera module thereof
JP5415820B2 (ja) * 2009-05-12 2014-02-12 オリンパスイメージング株式会社 撮像装置
JP2011239207A (ja) * 2010-05-11 2011-11-24 Fujifilm Corp 撮像装置、撮像制御方法、及び撮像制御プログラム
JP2012027202A (ja) * 2010-07-22 2012-02-09 Nikon Corp ミラーユニットおよび撮像装置
US9172856B2 (en) * 2011-03-29 2015-10-27 Microsoft Technology Licensing, Llc Folded imaging path camera
WO2013055960A1 (en) * 2011-10-11 2013-04-18 Pelican Imaging Corporation Lens stack arrays including adaptive optical elements
US20140055624A1 (en) * 2012-08-23 2014-02-27 Microsoft Corporation Switchable camera mirror apparatus
US8830337B2 (en) * 2012-09-04 2014-09-09 Himax Imaging Limited Electronic device with camera functions
US9398264B2 (en) * 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
WO2014170722A1 (en) * 2013-04-19 2014-10-23 Othmar Bruehwiler A casing with mirror for handheld electronic devices with camera function
WO2015005056A1 (ja) * 2013-07-11 2015-01-15 コニカミノルタ株式会社 撮像装置
US9578252B2 (en) * 2013-10-18 2017-02-21 Light Labs Inc. Methods and apparatus for capturing images using optical chains and/or for using captured images
DE102014213371B3 (de) 2014-07-09 2015-08-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und verfahren zur erfassung eines objektbereichs
WO2016081567A1 (en) * 2014-11-19 2016-05-26 Orlo James Fiske Thin optical system and camera
US9507241B1 (en) * 2015-11-17 2016-11-29 Lenovo (Singapore) Pte, Ltd. Adjustable camera field of view

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
None *

Also Published As

Publication number Publication date
CN108432225A (zh) 2018-08-21
DE102015220566A1 (de) 2017-04-27
ES2749711T3 (es) 2020-03-23
EP3366032A1 (de) 2018-08-29
TWI642975B (zh) 2018-12-01
DE102015220566B4 (de) 2021-03-18
KR102233890B1 (ko) 2021-03-31
CN114338971A (zh) 2022-04-12
KR20180072767A (ko) 2018-06-29
US11474331B2 (en) 2022-10-18
US20180241920A1 (en) 2018-08-23
JP2018536892A (ja) 2018-12-13
JP2021043455A (ja) 2021-03-18
US20210263289A1 (en) 2021-08-26
CN108432225B (zh) 2021-09-03
WO2017067977A1 (de) 2017-04-27
TW201727315A (zh) 2017-08-01
JP6962573B2 (ja) 2021-11-05
US11016273B2 (en) 2021-05-25

Similar Documents

Publication Publication Date Title
EP3366032B1 (de) Vorrichtung mit einer multiaperturabbildungsvorrichtung, verfahren zum herstellen derselben und verfahren zum erfassen eines gesamtgesichtsfeldes
EP3371650B1 (de) Multi-apertur-abbildungsvorrichtung, abbildungssystem und verfahren zum erfassen eines objektbereichs
EP3403392B1 (de) Multiaperturabbildungsvorrichtung, abbildungssystem und verfahren zum erfassen eines objektbereichs
EP3456041B1 (de) 3d-multiaperturabbildungsvorrichtungen, multiaperturabbildungsvorrichtung, verfahren zum bereitstellen eines ausgangssignals einer 3d-multiaperturabbildungsvorrichtung und verfahren zum erfassen eines gesamtgesichtsfeldes
EP3403393B1 (de) Multiaperturabbildungsvorrichtungen, verfahren zum herstellen derselben und abbildungssystem
EP3338131B1 (de) Multiaperturabbildungsvorrichtung mit kanalindividueller einstellbarkeit
EP3225021B1 (de) Multiaperturabbildungsvorrichtung, abbildungssystem und verfahren zum bereitstellen einer multiaperturabbildungsvorrichtung
EP3338129B1 (de) Multiaperturabbildungsvorrichtung mit optiksubstrat
EP3338133B1 (de) Vorrichtung mit einer multikanalabbildungsvorrichtung und verfahren zum herstellen derselben
DE102015215836B4 (de) Multiaperturabbildungsvorrichtung mit einer reflektierende Facetten aufweisenden Strahlumlenkvorrichtung
DE102015215844B4 (de) Multiaperturabbildungsvorrichtung, tragbare Vorrichtung und Verfahren zum Herstellen einer Multiaperturabbildungsvorrichtung
DE102017204035B3 (de) Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102015017384B4 (de) Vorrichtung mit einer Multiaperturabbildungsvorrichtung, Verfahren zum Bereitstellen derselben und Verfahren zum Erfassen eines Gesamtgesichtsfeldes
DE102019204075B4 (de) Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte
DE102017012197B4 (de) Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20180418

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

RIN1 Information on inventor provided before grant (corrected)

Inventor name: WIPPERMANN, FRANK

Inventor name: PABST, OLIVER

Inventor name: LANGE, NICOLAS

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

RIC1 Information provided on ipc code assigned before grant

Ipc: G03B 5/00 20060101ALI20190123BHEP

Ipc: G03B 17/17 20060101ALI20190123BHEP

Ipc: G03B 17/00 20060101ALI20190123BHEP

Ipc: G03B 17/04 20060101ALI20190123BHEP

Ipc: H04N 5/232 20060101ALI20190123BHEP

Ipc: G02B 5/08 20060101ALI20190123BHEP

Ipc: H04N 5/225 20060101AFI20190123BHEP

INTG Intention to grant announced

Effective date: 20190215

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 1162252

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190815

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502016005837

Country of ref document: DE

REG Reference to a national code

Ref country code: NL

Ref legal event code: FP

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191031

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191202

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191031

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191101

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191130

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2749711

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20200323

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200224

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502016005837

Country of ref document: DE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG2D Information on lapse in contracting state deleted

Ref country code: IS

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191031

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191019

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191031

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191030

26N No opposition filed

Effective date: 20200603

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20191031

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191031

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191019

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: NL

Payment date: 20201020

Year of fee payment: 5

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FI

Payment date: 20201019

Year of fee payment: 5

Ref country code: ES

Payment date: 20201117

Year of fee payment: 5

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20161019

REG Reference to a national code

Ref country code: FI

Ref legal event code: MAE

REG Reference to a national code

Ref country code: NL

Ref legal event code: MM

Effective date: 20211101

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20211101

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20211019

REG Reference to a national code

Ref country code: DE

Ref legal event code: R079

Ref document number: 502016005837

Country of ref document: DE

Free format text: PREVIOUS MAIN CLASS: H04N0005225000

Ipc: H04N0023000000

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 1162252

Country of ref document: AT

Kind code of ref document: T

Effective date: 20211019

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20211019

REG Reference to a national code

Ref country code: ES

Ref legal event code: FD2A

Effective date: 20230203

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20211020

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20231025

Year of fee payment: 8

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20231023

Year of fee payment: 8

Ref country code: DE

Payment date: 20231018

Year of fee payment: 8