DE102020003090A1 - Mono camera and method for identifying a partial area of an image sensor - Google Patents
Mono camera and method for identifying a partial area of an image sensor Download PDFInfo
- Publication number
- DE102020003090A1 DE102020003090A1 DE102020003090.4A DE102020003090A DE102020003090A1 DE 102020003090 A1 DE102020003090 A1 DE 102020003090A1 DE 102020003090 A DE102020003090 A DE 102020003090A DE 102020003090 A1 DE102020003090 A1 DE 102020003090A1
- Authority
- DE
- Germany
- Prior art keywords
- camera
- image sensor
- image
- axis
- lens
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims description 34
- 238000012360 testing method Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 3
- 230000001815 facial effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 claims description 2
- 125000006850 spacer group Chemical group 0.000 description 4
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000035939 shock Effects 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- YTAHJIFKAKIKAV-XNMGPUDCSA-N [(1R)-3-morpholin-4-yl-1-phenylpropyl] N-[(3S)-2-oxo-5-phenyl-1,3-dihydro-1,4-benzodiazepin-3-yl]carbamate Chemical compound O=C1[C@H](N=C(C2=C(N1)C=CC=C2)C1=CC=CC=C1)NC(O[C@H](CCN1CCOCC1)C1=CC=CC=C1)=O YTAHJIFKAKIKAV-XNMGPUDCSA-N 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/16—Optical objectives specially designed for the purposes specified below for use in conjunction with image converters or intensifiers, or for use with projectors, e.g. objectives for projection TV
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/18—Focusing aids
- G03B13/30—Focusing aids indicating depth of field
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/28—Locating light-sensitive material within camera
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B43/00—Testing correct operation of photographic apparatus or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/147—Details of sensors, e.g. sensor lenses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
Abstract
Die Erfindung betrifft eine Monokamera (1) mit einem Bildsensor (2) und einem Objektiv (3), wobei das Objektiv entlang einer X-Achse verläuft und wenigstens eine Linse (4) umfasst, wobei die Linse (4) in einer durch eine auf der X-Achse senkrecht stehenden Y-Achse und eine senkrecht auf der X-Achse und der Y-Achse stehenden Z-Achse aufgespannten Ebene liegt. Die Erfindung ist dadurch gekennzeichnet, dass der Bildsensor (2) gegenüber der Linse (4) mit wenigstens einem Winkel (α) um die Y-Achse oder mit einem Winkel (β) um die Z-Achse gekippt ist.The invention relates to a mono camera (1) with an image sensor (2) and a lens (3), the lens running along an X axis and comprising at least one lens (4), the lens (4) being in one by one the Y-axis perpendicular to the X-axis and a plane spanned perpendicular to the X-axis and the Y-axis. The invention is characterized in that the image sensor (2) is tilted relative to the lens (4) with at least an angle (α) around the Y axis or with an angle (β) around the Z axis.
Description
Die Erfindung betrifft eine Monokamera nach der im Oberbegriff von Anspruch 1 näher definierten Art, ein Verfahren zur Identifikation eines Teilbereichs eines Bildsensors nach der im Oberbegriff von Anspruch 3 näher definierten Art sowie ein Fahrzeug mit einer Monokamera.The invention relates to a mono camera as defined in the preamble of
Kameras zur Erzeugung von Kamerabildern sind allgemein aus dem Stand der Technik bekannt. Zunehmend werden Kameras in Fahrzeugen installiert, um beispielsweise Informationen zur Steuerung von Fahrerassistenzsystemen aus den von den Kameras erzeugten Kamerabildern zu gewinnen. Eine Vielzahl an Anwendungen erfordert dabei eine Berechnung von Abstandsinformationen zwischen der Kamera und einem von der Kamera erfassten Objekt. Hierzu zählen beispielsweise eine Steuerung von Fahrzeugfunktionen durch das Erfassen von Fahrzeuginsassen durchgeführten Gesten, oder eine autonome oder wenigstens teilweise automatisierte Steuerung eines Fahrzeugs, bei der eine Außenkamera eines Fahrzeugs eine Umgebung überwacht, und dabei unter anderem ein Abstand zu vorausfahrenden Fahrzeugen ausgewertet wird. Eine Berechnung des Abstands geht dabei jedoch mit einem nicht zu vernachlässigenden Aufwand einher.Cameras for generating camera images are generally known from the prior art. Cameras are increasingly being installed in vehicles in order, for example, to obtain information for controlling driver assistance systems from the camera images generated by the cameras. A large number of applications require the calculation of distance information between the camera and an object captured by the camera. These include, for example, control of vehicle functions by detecting gestures carried out by vehicle occupants, or autonomous or at least partially automated control of a vehicle in which an external camera of a vehicle monitors an environment and, among other things, evaluates a distance from vehicles in front. However, a calculation of the distance is associated with a not insignificant effort.
Übliche Kamerasysteme, welche eine Abstandsberechnung ermöglichen, sind: das Erzeugen von Kamerabildern mittels einer Monokamera, wobei eine Objektgröße von in den Kamerabildern vorliegenden Objekten bekannt ist, welche als Vergleich zur Schätzung einer Entfernung zwischen den Objekten und der Monokamera verwendet werden. Hierzu kann ein einfaches und kostengünstiges Kamerasystem eingesetzt werden. Jedoch sind vorab Größeninformationen der erfassten Objekte notwendig, außerdem besteht eine Beeinträchtigung der Zuverlässigkeit der Abstandsberechnung, da diese auf Schätzungen beruht. Der Einsatz einer zweiten Kamera zur Ausbildung einer Stereokamera erlaubt eine genauere Berechnung des Abstands. Die beiden Kameras werden leicht versetzt zueinander installiert und erlauben eine Abstandsbestimmung durch das Ausnutzen einer Parallaxe, ähnlich zur dreidimensionalen Sicht beim Menschen. Ein solches Kamerasystem geht jedoch aufgrund der Erfordernis einer zweiten Kamera mit erhöhten Kosten einher. Eine Abstandsberechnung ist außerdem durch den Einsatz einer sogenannten Time-of-Flight-Kamera möglich. Dabei wird eine Szene aktiv, beispielsweise von einem Infrarotlicht, beleuchtet, wobei das ausgesendete Licht von einem Sensor erfasst wird und eine Laufzeit des Lichts zwischen Aussendung und Detektierung zur Abstandsberechnung ermittelt wird. Der Einsatz eines Time-of-Flight Kamerasystems geht jedoch mit einem hohen Systemaufwand und einem hohen Aufwand zur Auswertung der Laufzeitinformationen einher, was hohe Kosten bedingt.Common camera systems that enable a distance calculation are: the generation of camera images by means of a mono camera, an object size of objects present in the camera images being known which are used as a comparison for estimating a distance between the objects and the mono camera. A simple and inexpensive camera system can be used for this. However, size information of the detected objects is necessary in advance, and there is also an impairment of the reliability of the distance calculation, since this is based on estimates. The use of a second camera to form a stereo camera allows the distance to be calculated more precisely. The two cameras are installed slightly offset from one another and allow a distance to be determined by using parallax, similar to the three-dimensional view in humans. However, such a camera system is associated with increased costs due to the need for a second camera. A distance calculation is also possible using a so-called time-of-flight camera. In this case, a scene is actively illuminated, for example by an infrared light, the emitted light being detected by a sensor and a transit time of the light between the emission and detection being determined for the distance calculation. However, the use of a time-of-flight camera system is associated with a high system outlay and a high outlay for evaluating the runtime information, which entails high costs.
Die
Der Einsatz eines Kamerasystems zur Überwachung eines Fahrzeuginnenraums kann es erfordern, dass ein Bildsensor des Kamerasystems eine hohe Auflösung aufweist, damit die von ihm erzeugten Kamerabilder Details in einer ausreichend hohen Qualität darstellen. Ferner kann es erforderlich sein, dass ein solches Kamerasystem eine hohe Tiefenschärfe aufweist, damit zu überwachende Objekte, welche sich sowohl nahe an dem Kamerasystem, als auch entfernt zu diesem befinden können, scharf dargestellt werden, um Details zu erkennen. Beispielsweise wird eine kleine fahrzeugführende Person einen kürzeren Abstand zu einem Lenkrad des Fahrzeugs aufweisen als eine große fahrzeugführende Person. Um eine hohe Kameraauflösung zu gewährleisten, werden insbesondere großformatige Kamerasensoren eingesetzt. Diese gehen mit einem großen Bildwinkel einher, wodurch periphere Bildbereiche unnötig erfasst werden. Zur Reduktion des Bildwinkels, um nur einen relevanten Bildausschnitt zu erfassen, werden solche Kameras mit einem Objektiv versehen, welches eine gegenüber einem Weitwinkelobjektiv erhöhte Brennweite aufweist. Die Tiefenschärfe eines Objektivs ist jedoch von der Brennweite abhängig. Je größer die Brennweite eines Objektivs ist, desto geringer fällt seine Tiefenschärfe aus. Dies ist ein generelles Problem von konventionellen Kameras. Um dennoch ein Kamerasystem mit einer hohen Auflösung und einer hohen Tiefenschärfe zur Überwachung eines Fahrzeuginnenraums einzusetzen, existieren mehrere Lösungsvorschläge. Zum einen lässt sich an einem solchen Kamerasystem ein mechanisches Element zum Ändern des Kamerafokus vorsehen. Dies steigert jedoch die Komplexität des Kamerasystems und führt somit zu erhöhten Kosten. Außerdem ist ein solches System anfällig gegenüber Erschütterungen. Ferner ist es möglich, mehrere Kameras einzusetzen, von denen jede Kamera einen unterschiedlichen Fokusbereich aufweist. Dadurch, dass mehrere Kameras notwendig sind, ist auch ein solches Kamerasystem teuer.The use of a camera system for monitoring a vehicle interior may require that an image sensor of the camera system have a high resolution so that the camera images generated by it represent details in a sufficiently high quality. Furthermore, it may be necessary for such a camera system to have a high depth of field, so that objects to be monitored, which can be both close to and away from the camera system, are displayed sharply in order to recognize details. For example, a small vehicle-driving person will have a shorter distance to a steering wheel of the vehicle than a large vehicle-driving person. Large-format camera sensors are used in particular to ensure high camera resolution. These are associated with a large image angle, as a result of which peripheral image areas are captured unnecessarily. To reduce the image angle in order to capture only a relevant image section, such cameras are provided with a lens which has a focal length that is increased compared to a wide-angle lens. However, the depth of field of a lens depends on the focal length. The larger the focal length of a lens, the smaller its depth of field. This is a common problem with conventional cameras. In order to nevertheless use a camera system with a high resolution and a high depth of field for monitoring a vehicle interior, there are several proposed solutions. On the one hand, a mechanical element for changing the camera focus can be provided on such a camera system. However, this increases the complexity of the camera system and thus leads to increased costs. Such a system is also prone to shocks. It is also possible to use several cameras, each of which has a different focus area. Thereby, Such a camera system is also expensive because several cameras are necessary.
Der vorliegenden Erfindung liegt die Aufgabe zugrunde, eine robuste, kostengünstige und im Aufbau simpel gestaltete Kamera sowie ein Verfahren zur Nutzung einer solchen Kamera anzugeben, welche eine Abstandsbestimmung zwischen erfassten Objekten und der Kamera sowie eine Auswertung biometrischer Daten von mit der Kamera erfassten Personen über einen breiten Fokusbereich ermöglichen.The present invention is based on the object of specifying a robust, inexpensive camera with a simple design and a method for using such a camera, which can be used to determine the distance between detected objects and the camera as well as to evaluate biometric data of persons recorded with the camera via a allow wide focus range.
Erfindungsgemäß wird diese Aufgabe durch eine Monokamera mit den Merkmalen des Anspruchs 1, und ein Verfahren zur Identifikation eines Teilbereichs eines Bildsensors mit den Merkmalen des Anspruchs 3 gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen sowie ein Fahrzeug mit einer solchen Monokamera ergeben sich aus den hiervon abhängigen Ansprüchen.According to the invention, this object is achieved by a mono camera with the features of
Diese Aufgabe wird bei einer Monokamera mit einem Bildsensor und einem Objektiv, wobei das Objektiv entlang einer x-Achse verläuft und wenigstens eine Linse umfasst, wobei die Linse in einer durch eine auf der x-Achse senkrecht stehenden y-Achse und einer senkrecht auf der x-Achse und der y-Achse stehenden z-Achse aufgespannten Ebene liegt, erfindungsgemäß dadurch gelöst, dass der Bildsensor gegenüber der Linse mit wenigstens einem Winkel
Hierdurch weisen vom Bildsensor umfasste Pixel einen unterschiedlichen Abstand zur Linse auf. Der Abstand zwischen den Pixeln nimmt dabei von einem der Linse am nächsten stehenden Punktes des Bildsensors bis zu einem am weitesten von der Linse entfernten Bereich des Bildsensors graduell zu. Hierdurch ändert sich ein Fokus von einem mit der Monokamera erzeugten Kamerabild kontinuierlich. Befinden sich nun in einem mit der Monokamera erzeugten Kamerabild mehrere Objekte, welche jeweils einen unterschiedlichen Abstand zur Monokamera aufweisen, wird wenigstens ein Teilbereich eines jeden Objekts vom Bildsensor fokussiert erfasst. Bei dem von der erfindungsgemäßen Monokamera umfassten Bildsensor kann es sich um einen großformatigen Sensor handeln, welcher aufgrund des gekippten Bildsensors auch bei Einsatz eines Objektivs mit einer hohen Brennwerte eine hohe Tiefenschärfe gewährleistet.As a result, pixels comprised by the image sensor are at a different distance from the lens. The distance between the pixels gradually increases from a point of the image sensor closest to the lens to a region of the image sensor furthest away from the lens. As a result, a focus of a camera image generated with the mono camera changes continuously. If there are now several objects in a camera image generated with the mono camera, each of which has a different distance from the mono camera, at least a partial area of each object is captured in a focused manner by the image sensor. The image sensor comprised by the mono camera according to the invention can be a large-format sensor which, due to the tilted image sensor, ensures a high depth of field even when using a lens with a high calorific value.
Bevorzugt ist der Bildsensor gegenüber der Linse sowohl mit dem Winkel
Dadurch, dass der Bildsensor um beide Achsen gekippt ist, lässt sich eine Empfindlichkeit des Bildsensors weiter steigern, und somit eine Genauigkeit der Abstandsbestimmung erhöhen. Die Größe des Winkels
Ein Verfahren zur Identifikation eines Teilbereichs eines Bildsensors einer erfindungsgemäßen Monokamera weist erfindungsgemäß die folgenden Verfahrensschritte auf:
- a) Erzeugen und Speichern wenigstens eines Kamerabilds mithilfe der Monokamera;
- b) Auswerten eines Bildkontrasts eines gesamten Kamerabilds;
- c) Identifizieren des Teilbereichs des Bildsensors, dadurch, dass der zu identifizierende Teilbereich einen fokussierten Bildbereich des Kamerabilds erfasst.
- a) generating and storing at least one camera image using the mono camera;
- b) evaluating an image contrast of an entire camera image;
- c) Identifying the partial area of the image sensor, in that the partial area to be identified captures a focused image area of the camera image.
Mithilfe des Verfahrens ist es möglich, genau die Teilbereiche des Bildsensors zu detektieren, welche wenigstens einen fokussierten Bildbereich wenigstens eines mithilfe der Monokamera erfassten Objekts erfassen.With the aid of the method, it is possible to detect precisely the partial areas of the image sensor which capture at least one focused image area of at least one object captured using the mono camera.
Eine vorteilhafte Weiterbildung des Verfahrens sieht vor, dass das wenigstens eine Kamerabild mit einer Abstandsinformation angereichert wird, wobei die Abstandsinformation einen Abstand zwischen dem fokussierten Bildbereich, wobei dieser in einer Fokusebene liegt, und dem Bildsensor umfasst.An advantageous development of the method provides that the at least one camera image is enriched with distance information, the distance information comprising a distance between the focused image area, which lies in a focus plane, and the image sensor.
Dadurch, dass der Bildsensor gekippt ist, trifft für jedes innerhalb eines festgelegten Raums angeordnete und beliebig hierin zum Bildsensor beabstandete Objekt wenigstens ein fokussiertes Abbild, entsprechend dem fokussierten Bildbereich, auf den Bildsensor auf. Dabei wird nur ein Teilbereich des Bildsensors mit dem fokussierten Abbild bedeckt. Dabei liegt für jedes beliebig zum Bildsensor beabstandete Objekt wenigstens ein in einer individuellen Fokusebene liegender fokussierter Bildbereich vor. Liegt vorab eine Information darüber vor, welchen Abstand die jeweilige Fokusebene zum Bildsensor aufweist, kann den fokussierten Bildbereichen, und damit den Objekten, ein Abstand zum Bildsensor zuverlässig zugeordnet werden.Due to the fact that the image sensor is tilted, at least one focused image, corresponding to the focused image area, strikes the image sensor for each object which is arranged within a defined space and is at any distance from the image sensor therein. Only a partial area of the image sensor is covered with the focused image. There is at least one focused image area lying in an individual focus plane for each object spaced apart from the image sensor. If there is information in advance as to what distance the respective focus plane is from the image sensor, a distance from the image sensor can be reliably assigned to the focused image areas, and thus to the objects.
Entsprechend einer weiteren vorteilhaften Ausgestaltung des Verfahrens weist der Bildsensor eine Vielzahl an Teilbereichen auf, von denen jeder einen festen Abstand zu einer individuellen Fokusebene aufweist. Eine ursprüngliche Zuordnung zwischen den Teilbereichen und den festen Abständen zu den individuellen Fokusebenen erfolgt dabei durch eine Kalibrierung.According to a further advantageous embodiment of the method, the image sensor has a large number of partial areas, each of which is at a fixed distance from an individual focal plane. An original assignment A calibration is carried out between the sub-areas and the fixed distances to the individual focus levels.
Mithilfe der Kalibrierung wird für jeden Teilbereich des Bildsensors ein fester Abstand zwischen Bildsensor und Fokusebene bestimmt und den Teilbereichen zugeordnet. Somit ist es möglich, für ein Objekt, welches einen beliebigen Abstand innerhalb des festgelegten Raums zum Bildsensor aufweist, einen korrekten Abstand zum Bildsensor zuverlässig zu bestimmen.With the aid of the calibration, a fixed distance between the image sensor and the focal plane is determined for each partial area of the image sensor and assigned to the partial areas. It is thus possible to reliably determine a correct distance from the image sensor for an object which has an arbitrary distance within the defined space from the image sensor.
Eine vorteilhafte Weiterbildung des Verfahrens sieht ferner vor, dass zur Kalibrierung folgende Verfahrensschritte durchgeführt werden.
- • Erzeugen einer Vielzahl an Kamerabildern eines Testmusters, wobei das Testmuster einen festgelegten Abstand zum Bildsensor aufweist, welcher für jedes Kamerabild individuell bestimmt wird;
- • Detektion und Kennzeichnung der Teilbereiche, welche bei jeweiligen Kamerabildern einen fokussierten Bildbereich erfassen; und
- • Zuordnen der individuellen Abstände zwischen Testmuster und Bildsensor zu den gekennzeichneten Teilbereichen.
- Generating a plurality of camera images of a test pattern, the test pattern being at a fixed distance from the image sensor, which is determined individually for each camera image;
- • Detection and identification of the partial areas, which capture a focused image area in the case of respective camera images; and
- • Assignment of the individual distances between test pattern and image sensor to the marked sub-areas.
Mithilfe der beschriebenen Verfahrensschritte können die Abstände der Fokusebenen zum Bildsensor zuverlässig zur bestimmt werden. Das Testmuster kann dabei eine beliebige Gestalt aufweisen. Das Testmuster ist insbesondere so ausgeführt, dass es zu unterschiedlichen optischen Bedingungen bestmöglich von der Monokamera erfasst werden kann. Ein Minimal- und Maximalabstand des Testmusters zum Bildsensor kann dabei beliebig gewählt werden. Auch die Anzahl der Kamerabilder, und damit der Abstände der Fokusebenen zum Bildsensor kann beliebig gewählt werden. Insbesondere kann die Anzahl so hoch gewählt werden, dass eine kontinuierliche Abstandsbestimmung zwischen der nähesten Position zum Bildsensor und der entferntesten Position zum Bildsensor der Fokusebenen ermöglicht wird.With the aid of the method steps described, the distances between the focal planes and the image sensor can be reliably determined. The test pattern can have any shape. In particular, the test pattern is designed such that it can be captured by the mono camera in the best possible way under different optical conditions. A minimum and maximum distance between the test pattern and the image sensor can be chosen as desired. The number of camera images, and thus the distances between the focal planes and the image sensor, can also be selected as desired. In particular, the number can be chosen so high that a continuous distance determination between the closest position to the image sensor and the most distant position to the image sensor of the focal planes is made possible.
Bevorzugt werden zur Auswertung biometrischer Daten von Personen folgende zusätzliche Verfahrensschritte durchgeführt:
- d) Isolieren des fokussierten Bildbereichs aus dem Kamerabild;
- e) Erkennen von charakteristischen Gesichts- und/oder Körpermerkmalen wenigstens eines Körperteils einer Person, wobei zur Erkennung der Merkmale Methoden der Bildverarbeitung eingesetzt werden;
- f) Erzeugen wenigstens eines Lichtmusters auf wenigstens einem fokussierten Körperteil wenigstens einer Person;
- g) Erzeugen und Speichern von Kamerabildern, welche wenigstens ein fokussiertes Lichtmuster zeigen;
- h) Auswerten wenigstens eines Lichtmusters zur Berechnung der biometrischen Daten;
- i) Speichern von eine Position des wenigstens einen Körperteils in wenigstens einem Kamerabild kennzeichnenden Informationen; und
- j) erneutes Durchführen der Verfahrensschritte, beginnend mit Verfahrensschritt a).
- d) isolating the focused image area from the camera image;
- e) recognition of characteristic facial and / or body features of at least one body part of a person, methods of image processing being used to recognize the features;
- f) generating at least one light pattern on at least one focused body part of at least one person;
- g) generating and storing camera images which show at least one focused light pattern;
- h) evaluating at least one light pattern to calculate the biometric data;
- i) storing information characterizing a position of the at least one body part in at least one camera image; and
- j) performing the process steps again, starting with process step a).
Mithilfe der beschriebenen Verfahrensschritte ist es möglich, Personen, welche einen unterschiedlichen Abstand zur Kamera, und damit dem Bildsensor aufweisen, fokussiert zu erfassen. Auch bei Einsatz eines Bildsensors mit einer hohen Auflösung lässt sich somit eine besonders hohe Tiefenschärfe erzeugen. Dabei muss nicht auf die einzelnen Personen scharfgestellt werden, da für jeden beliebigen Abstand der Personen zum Bildsensor innerhalb des festgelegten Raums wenigstens ein Teilbereich des Bildsensors einen fokussierten Bereich der Personen erfasst. Somit kann auf das Umfassen einer mechanischen Fokussiereinrichtung verzichtet werden, wodurch die Monokamera eine besonders hohe Robustheit gegenüber Vibrationen und Schock aufweist und besonders günstig hergestellt werden kann. Das Verfahren kann dabei einmalig bis zum Verfahrensschritt i) durchgeführt werden, beispielsweise nach Aktivierung durch Eingabe eines Steuerungsbefehls, oder durch das Ausführen von Verfahrensschritt j) auch kontinuierlich durchgeführt werden.With the aid of the method steps described, it is possible to focus on people who are at different distances from the camera and thus from the image sensor. Even when using an image sensor with a high resolution, a particularly high depth of field can be produced. It is not necessary to focus on the individual people, since for any distance between the people and the image sensor within the defined space, at least a partial area of the image sensor detects a focused area of the people. It is therefore not necessary to include a mechanical focusing device, as a result of which the mono camera is particularly robust against vibration and shock and can be manufactured particularly cheaply. The method can be carried out once up to method step i), for example after activation by entering a control command, or by executing method step j) also continuously.
Ein Fahrzeug weist eine Monokamera auf, welche erfindungsgemäß dazu eingerichtet ist, biometrische Daten von Fahrzeuginsassen zu überwachen.A vehicle has a mono camera, which according to the invention is set up to monitor biometric data of vehicle occupants.
Somit lässt sich mit der erfindungsgemäßen Monokamera und einem erfindungsgemäßen Verfahren zur Identifikation eines Teilbereichs eines Bildsensors besonders einfach und kostengünstig ein Fahrzeuginnenraum überwachen. Die mit der Monokamera erzeugten Kamerabilder können ausgewertet werden, und dabei gewonnene Informationen zur Steuerung von Fahrerassistenzsystemen eingesetzt werden. Die Monokamera ist dabei so am Fahrzeug angeordnet, dass das Erfassen eines Fahrzeuginnenraums ermöglicht wird. Dabei entspricht der festgelegte Raum wenigstens einem Teil des Fahrzeuginnenraums. Ferner ist eine mit der Monokamera zur Auswertung von Kamerabildern verbundene Recheneinheit am Fahrzeug vorgesehen.A vehicle interior can thus be monitored particularly simply and inexpensively using the mono camera according to the invention and a method according to the invention for identifying a partial area of an image sensor. The camera images generated with the mono camera can be evaluated and the information obtained can be used to control driver assistance systems. The mono camera is arranged on the vehicle so that it is possible to capture a vehicle interior. The defined space corresponds to at least a part of the vehicle interior. Furthermore, an arithmetic unit connected to the mono camera for evaluating camera images is provided on the vehicle.
Weitere vorteilhafte Ausgestaltungen der erfindungsgemäßen Monokamera und dem erfindungsgemäßen Verfahren sowie dem Fahrzeug ergeben sich auch aus dem Ausführungsbeispiel, welches nachfolgend unter Bezugnahme auf die Figuren näher beschrieben wird. Further advantageous refinements of the mono camera according to the invention and the method according to the invention and the vehicle also result from the exemplary embodiment which is described in more detail below with reference to the figures.
Dabei zeigen:
-
1 eine Schnittansicht durch eine übliche Monokamera; -
2 eine Seitenansicht und eine Draufsicht auf einen Strahlengang zur Aufnahme eines fokussierten Bildbereichs von einem von einer erfindungsgemäßen Monokamera umfassten Bildsensor; und -
3 eine perspektivische Darstellung des Bildsensors der erfindungsgemäßen Monokamera.
-
1 a sectional view through a conventional mono camera; -
2nd a side view and a plan view of a beam path for recording a focused image area from an image sensor included by a mono camera according to the invention; and -
3rd a perspective view of the image sensor of the mono camera according to the invention.
Eine in
Ein oberer Abschnitt von
Im unteren Bereich von
Der in
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant has been generated automatically and is only included for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent literature cited
- DE 102013209721 A1 [0004]DE 102013209721 A1 [0004]
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020003090.4A DE102020003090A1 (en) | 2020-05-22 | 2020-05-22 | Mono camera and method for identifying a partial area of an image sensor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020003090.4A DE102020003090A1 (en) | 2020-05-22 | 2020-05-22 | Mono camera and method for identifying a partial area of an image sensor |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102020003090A1 true DE102020003090A1 (en) | 2020-07-16 |
Family
ID=71132064
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102020003090.4A Withdrawn DE102020003090A1 (en) | 2020-05-22 | 2020-05-22 | Mono camera and method for identifying a partial area of an image sensor |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102020003090A1 (en) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013209721A1 (en) | 2012-08-20 | 2014-02-20 | Johnson Controls Gmbh | Method for calibrating a TOF camera |
-
2020
- 2020-05-22 DE DE102020003090.4A patent/DE102020003090A1/en not_active Withdrawn
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013209721A1 (en) | 2012-08-20 | 2014-02-20 | Johnson Controls Gmbh | Method for calibrating a TOF camera |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102016206493A1 (en) | Method and camera system for determining the distance of objects to a vehicle | |
DE102016220075A1 (en) | Motor vehicle and method for 360 ° field detection | |
DE102008016215A1 (en) | Information device operating unit | |
DE112017002743T5 (en) | Parking assistance device and parking assistance method | |
DE102017223160B4 (en) | Method for detecting at least one object lying on a motor vehicle and control device and motor vehicle | |
DE112014001727T5 (en) | Apparatus and method for monitoring moving objects in a detection area | |
DE102012223481A1 (en) | Apparatus and method for tracking the position of a peripheral vehicle | |
DE102012209316A1 (en) | Method and device for processing sensor data of a stereo sensor system | |
DE102012110460A1 (en) | A method for entering a control command for a component of a motor vehicle | |
DE102012105436A1 (en) | Camera system i.e. light field camera system, for use in e.g. speed assistant system of motor car to determine distance between car and e.g. object, has microlens arrangement formed and arranged in optical path of electromagnetic radiation | |
DE102017105210A1 (en) | Optical radiation device for laser pulses with selective optics | |
DE102020206006A1 (en) | Method for calibrating and / or adjusting and control unit for a LiDAR system, LiDAR system and working device | |
DE102017123228A1 (en) | Method for classifying an object point as static or dynamic, driver assistance system and motor vehicle | |
DE102012015282B4 (en) | Method for detecting a covered state of an image capturing device of a motor vehicle, camera system and motor vehicle | |
DE102020003090A1 (en) | Mono camera and method for identifying a partial area of an image sensor | |
DE102021202454A1 (en) | Environment modeling based on camera data | |
DE102012105435A1 (en) | Camera system connected with driver assistance system of vehicle for determining object distance, has main unit to detect partial images for generating image of observed scene in light field area, so as to determine object distance | |
WO2021148286A1 (en) | Method and device for ascertaining the alignment of a surface of an object | |
DE102012222412B4 (en) | Method and device for object detection by means of focal length adjustment of a camera in a vehicle | |
DE102020215651A1 (en) | Vehicle vision system | |
DE102016109027A1 (en) | Method for checking the position of characteristic points in light distributions | |
EP3540507A1 (en) | Imaging apparatus and method for taking an image of a document and use thereof | |
DE102007033133A1 (en) | Method for detection of persons or object in area, involves detecting intersecting sections of multiple sampling lines by detection of reference object in sampling line | |
EP3728995A1 (en) | Method for determining distance information from an image of a spatial region | |
DE102018209366B4 (en) | Method for determining a position and / or orientation of a device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R230 | Request for early publication | ||
R081 | Change of applicant/patentee |
Owner name: DAIMLER AG, DE Free format text: FORMER OWNER: DAIMLER AG, 70372 STUTTGART, DE |
|
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |