WO2015090997A1 - Optisches sensorsystem - Google Patents
Optisches sensorsystem Download PDFInfo
- Publication number
- WO2015090997A1 WO2015090997A1 PCT/EP2014/076537 EP2014076537W WO2015090997A1 WO 2015090997 A1 WO2015090997 A1 WO 2015090997A1 EP 2014076537 W EP2014076537 W EP 2014076537W WO 2015090997 A1 WO2015090997 A1 WO 2015090997A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- sensor system
- optical sensor
- area
- viewing area
- partial
- Prior art date
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 58
- 238000003384 imaging method Methods 0.000 claims abstract description 27
- 238000012545 processing Methods 0.000 claims description 4
- 230000007613 environmental effect Effects 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 claims 3
- 230000003750 conditioning effect Effects 0.000 abstract 1
- 230000006978 adaptation Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
- G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
Definitions
- the invention relates to an optical sensor system according to the preamble of claim 1, in particular for use in a motor vehicle.
- an optical sensor system for use in a vehicle contains at least one camera unit and at least one computer for processing the images obtained by the camera unit.
- the optical sensor system is connected to at least one display system in the vehicle, wherein the digital images generated by the sensor system for the calculation of
- Refresh rate of the at least one optical sensor to the computing capacity of the at least one computer is adjusted so that the image information all
- an optical system of the camera unit is a wide-angle lens, wherein the image data are examined depending on the additional driver assistance task to the warning and information task for an auxiliary system such as a lane change assistant, Bird View, pre-crash sensor, traffic sign recognition, blind spot monitoring and Further
- Warning systems based on optical image processing Since the camera sensor has a higher resolution than the display, only a portion of the recorded overall image is shown on the display.
- the invention is based on the technical problem of providing an optical sensor system, in particular for use in a motor vehicle, which enables a variety of possible uses at low cost.
- the optical sensor system comprises an optical system, at least one photosensitive sensor and at least one arithmetic unit for processing data from the photosensitive
- the photosensitive sensor is
- the optical system has at least a first partial imaging optics and a second partial imaging optics, the first partial imaging optics having a first viewing area and the second partial imaging optics having a second viewing area which are different from one another.
- the first and second imaging optics are designed in such a way that the first field of view is focused on a first subregion of the
- Photosensitive sensor and the second field of view is mapped to a second portion of the photosensitive sensor. This makes it possible to optimally perform various functions by means of an optical sensor system.
- the additional effort compared to the known optical sensor systems consists only in the adaptation of the optics and a corresponding adaptation of the software for the evaluation of the data of the
- the second field of view is smaller than the first field of view and lies completely in the first field of vision. This embodiment is preferable
- the second field of view is smaller than the first
- This embodiment is preferably used to detect individual objects outside the first field of view. In principle, however, it is possible that the first and second field of view overlap. Furthermore, embodiments are also possible where the first and second viewing areas are the same size but have different viewing directions.
- Embodiments are possible, wherein in the simplest case the subregions are imaged onto different, mutually separate regions of the photosensitive sensor.
- the first subregion completely covers an active region of the photosensitive sensor, wherein the second subregion lies in the first subregion.
- the first part imaging optics is formed such that the part is omitted for the second portion in the image or overlap the two images.
- the image content in the second subarea of the first subimaging optics can be determined or estimated from adjacent parts of the first subarea or based on a priori knowledge, then this can be subtracted from the superimposed image in the second subarea.
- the realization of the first and second partial imaging optics can take place in various ways. Possible examples are diffractive optical elements (DOE) or lens-mirror combinations.
- DOE diffractive optical elements
- lens-mirror combinations Possible examples are diffractive optical elements (DOE) or lens-mirror combinations.
- the optic is formed as an asymmetrical lens, which forms two lenses for the two viewing areas.
- the advantage is that the number of components is minimized and the manufacturing costs are relatively low.
- the optical sensor system is designed as a camera of an environmental sensor system of a motor vehicle, wherein the first field of view has an angle of greater than 150 ° and the second field of view an angle between 30 ° to 60 °.
- the optical sensor system is arranged, for example, in a side mirror. The first viewing area thereby captures the lateral area of the motor vehicle, whereas the second viewing area is oriented to the rear. With the second partial imaging optics can then be detected from behind approaching vehicles with high resolution, so these data
- the angle of the first field of view is preferably 180 ° or nearly 180 °.
- the optical sensor system is designed in such a way that, based on a priori knowledge, the second subarea in or next to the first subarea where function-relevant information in the first subarea is not expected. This results in no relevant loss of information to map the second sub-area.
- the optical sensor system comprises at least one display unit, with the illustrations of the first and / or second partial area optionally being shown on the display unit.
- the image from the second subarea in the first subarea is made at locations where no functionally relevant information is expected.
- the optical sensor system is designed such that the representation is selected situationally on the display unit.
- manual or manual switching can alternatively or additionally be performed.
- the situational switching can be effected, for example, by actuation of a direction indicator, as a result of which adjacent lane monitoring becomes relevant.
- a situational switching is also given by the speed of Fahrzuegs. In a first speed range, the first situation is present and in a second speed range, the other situation in which is switched.
- FIG. 1 a shows an exemplary viewing region of an optical sensor system in one embodiment.
- FIG. 1 b is a schematic plan view of an associated optical system of the optical sensor according to FIG. 1 a (prior art),
- FIG. 1 c shows a representation of a partial scene from FIG. 1 a on the display
- Fig. 2 shows an exemplary scene on a traffic signal with a marked
- Fig. 3a is an exemplary representation of the scene of FIG. 1 a with a
- optical sensor system according to the invention
- Fig. 3b is a schematic plan view of an associated optics of the optical
- FIGS. 3a and 4 is a simplified block diagram of an optical sensor system.
- FIG. 1 a the image of a scene is shown, which receives an optical sensor system with a field of view of about 180 °, including the optics 2 of the optical sensor system is formed, for example, as a hemisphere, wherein in Fig. 1 b shows the corresponding bottom view is.
- An approaching vehicle can be recognized on the left behind.
- this scene section can be converted into a representation as shown in FIG. 1 c and displayed on a display unit. This raises the problem that the achievable resolution on the display unit is limited, since only a limited number of pixels of the sensor contain information about the motor vehicle.
- FIG. 2 shows an exemplary scene on a traffic signal system, wherein the field of vision of a front camera is drawn into the scene as a rectangle. Due to the limited field of view, the front camera can not detect the upper part of the traffic signal. If, on the other hand, the viewing area were enlarged, the achievable resolution drops again.
- the problem with the known optical sensors is therefore that partially areas of interest can not be displayed with sufficient resolution or, in extreme cases, can not even be detected.
- the optical sensor system 1 comprises an optical system 2 and at least one photosensitive sensor 3 in the form of a matrix sensor.
- the optic 2 has a first partial imaging optics 2a and a second partial imaging optics 2b.
- the first partial imaging optics 2a has a first viewing area S1 with an angle a1
- the second partial imaging optics 2b has a second viewing area S2 with an angle a2.
- the first viewing area S1 and the second viewing area S2 are different.
- the second viewing area S2 lies completely in the first viewing area S1.
- the first partial imaging optics 2a images a scene in the first viewing area S1 on a first partial area T1 of the photosensitive sensor 3.
- the second partial imaging optics 2b images a scene in the second viewing area S2 on a second partial area T2.
- the second subarea T2 lies completely in the first subarea T1. It is envisaged that the first part imaging optics 2a formed in this way is that this does not reflect in the second sub-area T2 or their share must be deducted.
- the two partial areas T1, T2 can also be deducted.
- the second subarea T2 lies in or next to the first
- Subarea T1 where no function-relevant information in the first sub-area T1 are expected.
- the optical sensor system 1 comprises a computing unit 4, which processes the data of the photosensitive sensor 3 and transmits it to a display unit 5.
- Computing unit 4 is designed such that these control signals SG can be obtained from other components such as control devices and in dependence of
- Control signals SG adjusts the representation on the display unit 5.
- inventive optics 2 shown the partial scene with the vehicle is imaged via the second partial imaging optical unit 2b as partial area T2 in the first partial area T1, where no function-relevant information is available.
- this is the
- the optical system 2 according to the invention is part of a bird-view system (auxiliary system), that is to say it belongs to a system which consists of four optics which are arranged around the vehicle
- the optics is arranged on a respective exterior mirror and or on a bumper of the vehicle. Ideally, the optics are on one
- Exterior mirror arranged so that it is aligned approximately parallel to the road surface. Ideally, it shows 5 to 10 degrees to the rear side traffic of the vehicle on the road.
- FIG. 3b a top view of an optics modified according to the invention is shown, which is designed as an asymmetric lens 6.
- This has a first partial lens 6a and a second partial lens 6b.
- the first partial lens 6a further has a viewing area of approximately 180 °, wherein the second partial lens 6b is formed with a smaller viewing area S2 of approximately 30 ° to 60 ° and is directed backwards to the rear.
- half of the hemisphere has been removed and replaced by a cuboid or cylinder, so that correspondingly more light is collected.
- the field of view S2 of the second partial-imaging device 2b lies outside of the first field of view S1 and maps the desired objects into the second subregion T2.
- these objects can be displayed in the second partial area T2 next to the representation of the first partial area T1 or in the representation of the first partial area T1 to get integrated.
- the objects of the second subarea T2 can be superimposed on the top left in the representation of the first subarea T1, since the sky shown there contains no function-relevant information.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Studio Devices (AREA)
- Traffic Control Systems (AREA)
Abstract
Die Erfindung betrifft ein optisches Sensorsystem (1), umfassend eine Optik (2), mindestens einen photosensitiven Sensor (3) sowie mindestens eine Recheneinheit (4) zur Aufbereitung von Daten des photosensitiven Sensors (3), wobei die Optik (2) einen Sichtbereich aufweist, wobei die Optik (2) mindestens eine erste Teil-Abbildungsoptik (2a) und eine zweite Teil- Abbildungsoptik (2b) aufweist, wobei die erste Teil-Abbildungsoptik (2a) einen ersten Sichtbereich (S1) und die zweite Teil-Abbildungsoptik (2b) einen zweiten Sichtbereich (S2) aufweist, wobei der erste und zweite Sichtbereich (S1, S2) verschieden sind, wobei die erste und zweite Teil-Abbildungsoptik (2a, 2b) derart ausgebildet sind, dass der erste Sichtbereich (S1) auf einen ersten Teilbereich (T1) des photosensitiven Sensors (3) und der zweite Sichtbereich (S2) auf einen zweiten Teilbereich (T2) des photosensitiven Sensors (3) abgebildet wird.
Description
Beschreibung
Optisches Sensorsystem
Die Erfindung betrifft ein optisches Sensorsystem gemäß dem Oberbegriff des Anspruchs 1 , insbesondere zur Anwendung in einem Kraftfahrzeug.
Aus der DE 20 201 1 005 102 U1 ist ein optisches Sensorsystem für den Einsatz in einem Fahrzeug bekannt, wobei das Sensorsystem mindestens eine Kameraeinheit und mindestens einen Rechner zur Verarbeitung der von der Kameraeinheit gewonnenen Bilder enthält. Das optische Sensorsystem ist mit mindestens einem Darstellungssystem im Fahrzeug verbunden, wobei die von dem Sensorsystem erzeugten digitalen Bilder für die Berechnung von
Zustandsinformationen für den Fahrer im Rechner verarbeitet werden, wobei die
Bildwiederholrate des mindestens einen optischen Sensors an die Rechenkapazität des mindestens einen Rechners so angepasst ist, dass die Bildinformationen alle
sicherheitsrelevanten Bilddaten enthält und der mindestens eine Rechner diese Bilddaten nach deren Erfassung in der verbliebenen Rechnerkapazität auf ihr Gefahrenpotential auswertet. Dabei wird vorgeschlagen, dass eine Optik der Kameraeinheit eine Weitwinkeloptik ist, wobei die Bilddaten je nach zusätzlicher Fahrerassistenzaufgabe untersucht werden, um die Warn- und Informationsaufgabe für ein Hilfssystem wie ein Spurwechselassistent, Bird View, Pre- Crash Sensor, Verkehrszeichenerkennung, Totwinkel-Überwachung sowie weitere
Warnsysteme, die auf optischer Bildverarbeitung beruhen, zu erfüllen. Da der Kamerasensor eine höhere Auflösung hat als das Display, wird auf dem Display immer nur ein Ausschnitt aus dem aufgenommenen Gesamtbild gezeigt.
Aus der US 2012/0249725 A1 sowie der DE 692 32 663 D2 sind Verfahren bekannt, um verzerrte Bildausschnitte bei Aufnahmen mit Weitwinkelobjektiven zu korrigieren.
Nachteilig ist, dass die erreichbare Auflösung von Objekten im Randbereich trotz
Transformation begrenzt ist.
Ein weiteres Problem stellt sich, wenn bei gewünschten zusätzlichen Funktionen relevante Objekte nicht mehr im Sichtbereich der Optik sind.
Grundsätzlich ist es möglich, entsprechend mehr Kameras vorzusehen, die auf die jeweilige Funktion optimiert sind, was jedoch sehr kostspielig ist.
Der Erfindung liegt das technische Problem zugrunde, ein optisches Sensorsystem zu schaffen, insbesondere für den Einsatz in einem Kraftfahrzeug, das mit geringen Kosten vielfältige Einsatzmöglichkeiten ermöglicht.
Die Lösung des technischen Problems ergibt sich durch ein optisches Sensorsystem mit den Merkmalen des Anspruchs 1. Weitere vorteilhafte Ausgestaltungen der Erfindung ergeben sich aus den Unteransprüchen.
Das optische Sensorsystem umfasst eine Optik, mindestens einen photosensitiven Sensor sowie mindestens eine Recheneinheit zur Aufbereitung von Daten des photosensitiven
Sensors, wobei die Optik einen Sichtbereich aufweist. Der photosensitive Sensor ist
beispielsweise als CMOS- oder CCD-Matrix-Sensor ausgebildet. Die Optik weist mindestens eine erste Teil-Abbildungsoptik und eine zweite Teil-Abbildungsoptik auf, wobei die erste Teil- Abbildungsoptik einen ersten Sichtbereich und die zweite Teil-Abbildungsoptik einen zweiten Sichtbereich aufweist, die voneinander verschieden sind. Die erste und zweite Abbildungsoptik sind derart ausgebildet, dass der erste Sichtbereich auf einen ersten Teilbereich des
photosensitiven Sensors und der zweite Sichtbereich auf einen zweiten Teilbereich des photosensitiven Sensors abgebildet wird. Hierdurch ist es möglich, mittels eines optischen Sensorsystems verschiedene Funktionen optimiert durchzuführen. Der Mehraufwand gegenüber den bekannten optischen Sensorsystemen besteht nur in der Anpassung der Optik und einer entsprechenden Anpassung der Software zur Auswertung der Daten des
photosensitiven Sensors.
In einer Ausführungsform ist der zweite Sichtbereich kleiner als der erste Sichtbereich und liegt vollständig im ersten Sichtbereich. Diese Ausführungsform kommt vorzugsweise zur
Anwendung, wenn die Auflösung in einzelnen Bereichen des ersten Sichtbereichs erhöht werden soll.
In einer alternativen Ausführungsform ist der zweite Sichtbereich kleiner als der erste
Sichtbereich und liegt vollständig außerhalb des ersten Sichtbereichs. Diese Ausführungsform kommt vorzugsweise zur Anwendung, um einzelne Objekte außerhalb des ersten Sichtbereichs zu erfassen.
Prinzipiell ist es aber möglich, dass sich der erste und zweite Sichtbereich überlappen. Des Weiteren sind auch Ausführungsformen möglich, wo der erste und zweite Sichtbereich gleich groß sind, aber verschiedene Blickrichtungen aufweisen.
Für die Abbildung auf den ersten und zweiten Teilbereich sind verschiedene
Ausführungsformen möglich, wobei im einfachsten Fall die Teilbereiche auf verschiedene, voneinander getrennte Bereiche des photosensitiven Sensors abgebildet werden.
Es ist aber auch möglich, dass der erste Teilbereich vollständig einen aktiven Bereich des photosensitiven Sensors abdeckt, wobei der zweite Teilbereich in dem ersten Teilbereich liegt. Dabei kann nun weiter vorgesehen sein, dass die erste Teil-Abbildungsoptik derart ausgebildet ist, dass der Teil für den zweiten Teilbereich bei der Abbildung ausgespart wird oder aber die beiden Abbildungen überlagern sich. Insbesondere wenn aus benachbarten Teilen des ersten Teilbereichs oder aufgrund von a priori Kenntnissen der Bildinhalt im zweiten Teilbereich der ersten Teil-Abbildungsoptik bestimmt oder geschätzt werden kann, so kann dieser vom überlagerten Bild im zweiten Teilbereich abgezogen werden.
Die Realisierung der ersten und zweiten Teil-Abbildungsoptik kann auf verschiedene Weisen erfolgen. Mögliche Beispiele sind diffraktive optische Elemente (DOE) oder Linsen-Spiegel- Kombinationen.
In einer Ausführungsform ist die Optik als asymmetrische Linse ausgebildet, die zwei Linsen für die beiden Sichtbereiche ausbildet. Der Vorteil ist, dass die Anzahl der Bauteile minimiert ist und die Herstellungskosten relativ gering sind.
In einer Ausführungsform ist das optische Sensorsystem als Kamera einer Umfeldsensorik eines Kraftfahrzeugs ausgebildet, wobei der erste Sichtbereich einen Winkel von größer 150° und der zweite Sichtbereich einen Winkel zwischen 30° bis 60° aufweist. Dabei ist das optische Sensorsystem beispielsweise in einem Seitenspiegel angeordnet. Der erste Sichtbereich erfasst dabei den seitlichen Bereich des Kraftfahrzeugs, wohingegen der zweite Sichtbereich nach hinten ausgerichtet ist. Mit der zweiten Teil-Abbildungsoptik können dann sich von hinten nähernde Kraftfahrzeuge mit hoher Auflösung erfasst werden, sodass diese Daten
insbesondere für Fahrspurwechsel oder allgemein Beobachtungen von benachbarten
Fahrspuren in hoher Auflösung zur Verfügung stehen. Der Winkel des ersten Sichtbereichs ist vorzugsweise 180° oder nahezu 180°.
In einer weiteren Ausführungsform ist das optische Sensorsystem derart ausgebildet, dass anhand von a priori Kenntnissen der zweite Teilbereich in oder neben den ersten Teilbereich
gelegt wird, wo keine funktionsrelevanten Informationen im ersten Teilbereich erwartet werden. Hierdurch entsteht keinerlei relevanter Informationsverlust, um den zweiten Teilbereich abzubilden.
In einer weiteren Ausführungsform umfasst das optische Sensorsystem mindestens eine Anzeigeeinheit, wobei wahlweise auf der Anzeigeeinheit die Abbildungen vom ersten und/oder zweiten Teilbereich dargestellt sind. Dabei kann bei der kombinierten Wiedergabe vorgesehen sein, dass die Abbildung vom zweiten Teilbereich im ersten Teilbereich an Stellen erfolgt, wo keine funktionsrelevanten Informationen erwartet werden.
Vorzugsweise ist das optische Sensorsystem derart ausgebildet, dass die Darstellung auf der Anzeigeeinheit situativ ausgewählt wird. Neben einer situativen Umschaltung kann alternativ oder ergänzend auch eine manuelle Umschaltung erfolgen. Die situative Umschaltung kann beispielsweise durch Betätigung eines Fahrtrichtungsanzeigers erfolgen, aufgrund dessen eine benachbarte Fahrspurüberwachung relevant wird. Eine situative Umschaltung ist auch durch die Geschwindigkeit des Fahrzuegs gegeben. In einem ersten Geschwindigkeitsbereich liegt die erste Situation vor und in einem zweiten Geschwindigkeitsbereich die andere Situation in der umgeschaltet wird.
Die Erfindung wird nachfolgend anhand eines bevorzugten Ausführungsbeispiels näher erläutert. Die Fig. zeigen:
Fig. 1 a einen beispielhaften Sichtbereich eines optischen Sensorsystems in einem
Seitenspiegel eines Kraftfahrzeugs als Umfeldsensorik (Stand der Technik),
Fig. 1 b eine schematische Draufsicht auf eine zugeordnete Optik des optischen Sensors gemäß Fig. 1 a (Stand der Technik),
Fig. 1 c eine Darstellung einer Teilszene aus Fig. 1 a auf dem Display,
Fig. 2 eine beispielhafte Szene an einer Lichtsignalanlage mit einem eingezeichneten
Sichtbereich einer Frontkamera eines Kraftfahrzeugs,
Fig. 3a eine beispielhafte Darstellung der Szene gemäß Fig. 1 a mit einem
erfindungsgemäßen optischen Sensorsystem,
Fig. 3b eine schematische Draufsicht auf eine zugeordnete Optik des optischen
Sensorsystems gemäß der Fig. 3a und
Fig. 4 ein vereinfachtes Blockschaltbild eines optischen Sensorsystems.
Bevor die Erfindung näher erläutert wird, soll zunächst die Ausgangssituation kurz erläutert werden. In der Fig. 1 a ist die Abbildung einer Szene dargestellt, die ein optisches Sensorsystem mit einem Sichtbereich von ca. 180° aufnimmt, wozu die Optik 2 des optischen Sensorsystems beispielsweise als Halbkugel ausgebildet ist, wobei in Fig. 1 b die entsprechende Unteransicht dargestellt ist. Dabei ist links hinten ein sich annäherndes Fahrzeug zu erkennen. Mittels der bekannten Transformationsvorschriften lässt sich dieser Szenenausschnitt in eine Darstellung wie in Fig. 1 c dargestellt umrechnen und auf einer Anzeigeeinheit darstellen. Dabei stellt sich das Problem, dass die erreichbare Auflösung auf der Anzeigeeinheit begrenzt ist, da nur eine begrenzte Anzahl von Pixeln des Sensors Informationen über das Kraftfahrzeug enthalten.
In der Fig. 2 ist eine beispielhafte Szene an einer Lichtsignalanlage dargestellt, wobei der Sichtbereich einer Frontkamera als Rechteck in die Szene eingezeichnet ist. Aufgrund des beschränkten Sichtbereichs kann die Frontkamera nicht den oberen Teil der Lichtsignalanlage erfassen. Würde hingegen der Sichtbereich vergrößert werden, sinkt wieder die erreichbare Auflösung.
Das Problem bei den bekannten optischen Sensoren ist also, dass teilweise interessierende Bereiche nicht mit ausreichender Auflösung dargestellt werden können oder im Extremfall gar nicht erfasst werden.
Die Lösung dieses technischen Problems soll nun anhand der Fig. 4 in Verbindung mit den Fig. 3a und 3b näher erläutert werden. Hierzu umfasst das optische Sensorsystem 1 eine Optik 2 und mindestens einen photosensitiven Sensor 3 in Form eines Matrix-Sensors. Die Optik 2 weist eine erste Teil-Abbildungsoptik 2a und eine zweite Teil-Abbildungsoptik 2b auf. Dabei weist die erste Teil-Abbildungsoptik 2a einen ersten Sichtbereich S1 mit einem Winkel a1 und die zweite Teil-Abbildungsoptik 2b einen zweiten Sichtbereich S2 mit einem Winkel a2 auf. Dabei sind der erste Sichtbereich S1 und der zweite Sichtbereich S2 verschieden. Im dargestellten Beispiel liegt der zweite Sichtbereich S2 vollständig im ersten Sichtbereich S1.
Die erste Teil-Abbildungsoptik 2a bildet eine Szene im ersten Sichtbereich S1 auf einem ersten Teilbereich T1 des photosensitiven Sensors 3 ab. Entsprechend bildet die zweite Teil- Abbildungsoptik 2b eine Szene im zweiten Sichtbereich S2 auf einem zweiten Teilbereich T2 ab. Im dargestellten Ausführungsbeispiel liegt der zweite Teilbereich T2 vollständig im ersten Teilbereich T1 . Dabei sei vorgesehen, dass die erste Teil-Abbildungsoptik 2a derart ausgebildet
ist, dass diese nicht in den zweiten Teilbereich T2 abbildet oder deren Anteil muss herausgerechnet werden. Alternativ können die beiden Teilbereiche T1 , T2 auch
nebeneinander liegen. Dabei liegt der zweite Teilbereich T2 in oder neben dem ersten
Teilbereich T1 , wo keine funktionsrelevanten Informationen im ersten Teilbereich T1 erwartet werden.
Des Weiteren umfasst das optische Sensorsystem 1 eine Recheneinheit 4, die die Daten des photosensitiven Sensors 3 aufbereitet und an eine Anzeigeeinheit 5 übermittelt. Die
Recheneinheit 4 ist dabei derart ausgebildet, dass diese Steuersignale SG von anderen Komponenten wie beispielsweise Steuergeräten erhalten kann und in Abhängigkeit der
Steuersignale SG die Darstellung auf der Anzeigeeinheit 5 anpasst.
In der Fig. 3a ist nun die aufgenommene Szene entsprechend Fig. 1 a mit einer
erfindungsgemäßen Optik 2 dargestellt. Dabei wird die Teil-Szene mit dem Fahrzeug über die zweite Teil-Abbildungsoptik 2b als Teilbereich T2 in den ersten Teilbereich T1 abgebildet, wo keine funktionsrelevanten Informationen liegen. Im dargestellten Beispiel ist dies die
Seitenverkleidung des eigenen Fahrzeugs, die für die Umfeldbeobachtung nicht von Interesse ist. Daher kommt es auch zu keinem Informationsverlust. Die erfindungsgemäße Optik 2 ist Bestandteil eines Bird-View-Systems (Hilfssystem), das heißt sie gehört zu einem System, welches aus vier Optiken, die um das Fahrzeug angeordnet sind besteht, um ein
dreidimensionales Bild zu erzeugen. Die Optik ist an jeweils einem Außenspiegel und oder an einem Stoßfänger des Fahrzeugs angeordnet. Idealerweise ist die Optik an einem
Außenspiegel so angeordnet, dass sie annährend parallel zur Fahrbahnoberfläche ausgerichtet ist. Idealerweise zeigt sie dabei 5 bis 10 Grad zum rückwärtigen Seitenverkehr des Fahrzeugs auf der Fahrbahn.
In der Fig. 3b ist dabei eine Draufsicht auf eine erfindungsgemäß modifizierte Optik dargestellt, die als asymmetrische Linse 6 ausgebildet ist. Diese weist eine erste Teil-Linse 6a und eine zweite Teil-Linse 6b auf. Die erste Teil-Linse 6a weist dabei weiter einen Sichtbereich von ca. 180° auf, wobei die zweite Teil-Linse 6b mit einem kleineren Sichtbereich S2 von ca. 30° bis 60° ausgebildet ist und rückwärts nach hinten gerichtet ist. Anschaulich ist dabei eine Hälfte der Halbkugel entfernt worden und durch einen Quader oder Zylinder ersetzt worden, sodass entsprechend mehr Licht gesammelt wird. Für Ausführungsformen, wo außerhalb des ersten Sichtbereichs S1 liegende Objekte erfasst werden sollen (siehe Problem gemäß Fig. 2), liegt der Sichtbereich S2 der zweiten Teil-Abbildungsoptik 2b außerhalb des ersten Sichtbereichs S1 und bildet die gewünschten Objekte in den zweiten Teilbereich T2 ab. In der Darstellung auf der Anzeigeeinheit 5 können diese Objekte im zweiten Teilbereich T2 neben der Darstellung des ersten Teilbereichs T1 dargestellt werden oder in die Darstellung des ersten Teilbereichs T1
integriert werden. So können beispielsweise die Objekte des zweiten Teilbereichs T2 links oben in der Darstellung des ersten Teilbereichs T1 eingeblendet werden, da der dort gezeigte Himmel keine funktionsrelevanten Informationen enthält.
Claims
Optisches Sensorsystem (1 ) für ein Fahrzeug, insbesondere für einen Außenspiegel und/oder einen Stoßfänger des Fahrzeugs, umfassend eine Optik (2), mindestens einen photosensitiven Sensor (3) sowie mindestens eine Recheneinheit (4) zur Aufbereitung von Daten des photosensitiven Sensors (3), wobei die Optik (2) einen Sichtbereich aufweist,
dadurch gekennzeichnet, dass
die Optik (2) mindestens eine erste Teil-Abbildungsoptik (2a) und eine zweite Teil- Abbildungsoptik (2b) aufweist, wobei die erste Teil-Abbildungsoptik (2a) einen ersten Sichtbereich (S1 ) und die zweite Teil-Abbildungsoptik (2b) einen zweiten Sichtbereich (S2) aufweist, wobei der erste und zweite Sichtbereich (S1 , S2) verschieden sind, wobei die erste und zweite Teil-Abbildungsoptik (2a, 2b) derart ausgebildet sind, dass der erste Sichtbereich (S1 ) auf einen ersten Teilbereich (T1 ) des photosensitiven Sensors (3) und der zweite Sichtbereich (S2) auf einen zweiten Teilbereich (T2) des photosensitiven Sensors (3) abgebildet wird.
Optisches Sensorsystem nach Anspruch 1 , dadurch gekennzeichnet, dass der zweite Sichtbereich (S2) kleiner als der erste Sichtbereich (S1 ) ist und vollständig im ersten Sichtbereich (S1 ) liegt.
Optisches Sensorsystem nach Anspruch 1 , dadurch gekennzeichnet, dass der zweite Sichtbereich (S2) kleiner als der erste Sichtbereich (S1 ) ist und vollständig außerhalb des ersten Sichtbereichs (S1 ) liegt.
Optisches Sensorsystem nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass der erste Teilbereich (T1 ) vollständig einen aktiven Bereich des photosensitiven Sensors (3) abdeckt, wobei der zweite Teilbereich (T2) in dem ersten Teilbereich (T1 ) liegt.
Optisches Sensorsystem nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass die Optik (2) als asymmetrische Linse
(6) ausgebildet ist.
Optisches Sensorsystem nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass das optische Sensorsystem (1 ) als Kamera einer Umfeldsensorik
eines Kraftfahrzeugs ausgebildet ist, wobei der erste Sichtbereich (S1 ) einen Winkel (a1 ) von größer 150° und der zweite Sichtbereich (S2) einen Winkel (a2) zwischen 30° und 60° aufweist.
7. Optisches Sensorsystem nach einem der vorangegangenen Ansprüche, dadurch
gekennzeichnet, dass das optische Sensorsystem (1 ) derart ausgebildet ist, dass anhand von a priori Kenntnissen der zweite Teilbereich (T2) in oder neben den ersten Teilbereich (T1 ) gelegt wird, wo keine funktionsrelevanten Informationen im ersten Teilbereich (T1 ) erwartet werden.
8. Optisches Sensorsystem nach einem der vorangegangenen Ansprüche, dadurch
gekennzeichnet, dass das optische Sensorsystem (1 ) mindestens eine Anzeigeeinheit (5) umfasst, wobei wahlweise auf der Anzeigeeinheit (5) die Abbildungen vom ersten Teilbereich (T1 ) und/oder zweiten Teilbereich (T2) dargestellt sind.
9. Optisches Sensorsystem nach Anspruch 8, dadurch gekennzeichnet, dass das optische Sensorsystem (1 ) derart ausgebildet ist, dass die Darstellung auf der Anzeigeeinheit (5) situativ ausgewählt wird.
10 Optisches Sensorsystem nach Anspruch 1 dadurch gekennzeichnet, dass es Bestandteil eines Hilfssystems ist, mit welchem ein dreidimensionales Bild darstellbar ist.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102013226196.9 | 2013-12-17 | ||
DE102013226196.9A DE102013226196A1 (de) | 2013-12-17 | 2013-12-17 | Optisches Sensorsystem |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2015090997A1 true WO2015090997A1 (de) | 2015-06-25 |
Family
ID=52021184
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/EP2014/076537 WO2015090997A1 (de) | 2013-12-17 | 2014-12-04 | Optisches sensorsystem |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE102013226196A1 (de) |
WO (1) | WO2015090997A1 (de) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109421600A (zh) * | 2017-08-29 | 2019-03-05 | Lg电子株式会社 | 车辆用环视提供装置及车辆 |
CN110161529A (zh) * | 2019-06-10 | 2019-08-23 | 炬佑智能科技(苏州)有限公司 | Tof传感器及其形成方法、机器视觉系统 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69232663D1 (de) | 1991-05-13 | 2002-08-01 | Interactive Pictures Corp | Rundumsichtausrichtungssystem mit bewegungsloser kamera |
WO2004110811A1 (de) * | 2003-05-26 | 2004-12-23 | Robert Bosch Gmbh | Kamera und vorrichtung zur ermittlung der helligkeit der umgebung eines kraftfahrzeuges |
DE102006024187A1 (de) * | 2005-05-26 | 2006-11-30 | Denso Corp., Kariya | Abbildungsmodul |
US20070001095A1 (en) * | 2005-06-29 | 2007-01-04 | Visteon Global Technologies, Inc. | Rear vision system |
US20080007618A1 (en) * | 2006-07-05 | 2008-01-10 | Mizuki Yuasa | Vehicle-periphery image generating apparatus and method of switching images |
DE102007016956A1 (de) * | 2007-04-05 | 2008-10-09 | Continental Teves Ag & Co. Ohg | Fahrerassistenzsystem |
DE202011005102U1 (de) | 2010-09-17 | 2011-07-09 | SMR Patents S.à.r.l. | Optische Sensorsysteme für Automotive Anwendung |
US20120249725A1 (en) | 2011-03-31 | 2012-10-04 | Tessera Technologies Ireland Limited | Face and other object tracking in off-center peripheral regions for nonlinear lens geometries |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4873572A (en) * | 1987-02-27 | 1989-10-10 | Olympus Optical Co., Ltd. | Electronic endoscope apparatus |
US5191203A (en) * | 1991-04-18 | 1993-03-02 | Mckinley Optics, Inc. | Stereo video endoscope objective lens system |
US5751492A (en) * | 1996-06-14 | 1998-05-12 | Eastman Kodak Company | Diffractive/Refractive lenslet array incorporating a second aspheric surface |
US6137535A (en) * | 1996-11-04 | 2000-10-24 | Eastman Kodak Company | Compact digital camera with segmented fields of view |
JP2001221633A (ja) * | 2000-02-09 | 2001-08-17 | Olympus Optical Co Ltd | 測距装置 |
US7129981B2 (en) * | 2002-06-27 | 2006-10-31 | International Business Machines Corporation | Rendering system and method for images having differing foveal area and peripheral view area resolutions |
EP1812968B1 (de) * | 2004-08-25 | 2019-01-16 | Callahan Cellular L.L.C. | Vorrichtung für mehrere kameraeinrichtungen und verfahren zu ihrem betrieb |
EP1646249A1 (de) * | 2004-10-08 | 2006-04-12 | Dialog Semiconductor GmbH | Stereoskopisches Bildaufnahmesystem mit Sensorenpaar auf einem Einzelchip |
CN101449574B (zh) * | 2006-05-16 | 2012-01-25 | 松下电器产业株式会社 | 摄像装置和半导体电路元件 |
JP2008164367A (ja) * | 2006-12-27 | 2008-07-17 | Matsushita Electric Ind Co Ltd | 固体撮像装置、カメラ、車両及び監視装置 |
US9118850B2 (en) * | 2007-11-27 | 2015-08-25 | Capso Vision, Inc. | Camera system with multiple pixel arrays on a chip |
WO2010065344A1 (en) * | 2008-11-25 | 2010-06-10 | Refocus Imaging, Inc. | System of and method for video refocusing |
US8237771B2 (en) * | 2009-03-26 | 2012-08-07 | Eastman Kodak Company | Automated videography based communications |
US20100328471A1 (en) * | 2009-06-24 | 2010-12-30 | Justin Boland | Wearable Multi-Channel Camera |
US20110063446A1 (en) * | 2009-09-14 | 2011-03-17 | Mcmordie David | Saccadic dual-resolution video analytics camera |
DE102009049387B4 (de) * | 2009-10-14 | 2016-05-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung |
US20130147979A1 (en) * | 2010-05-12 | 2013-06-13 | Pelican Imaging Corporation | Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain |
DE102011053250B4 (de) * | 2011-09-05 | 2016-11-17 | Carl Zeiss Ag | Verfahren zum Aufnehmen von Bildern eines Beobachtungsobjektes mit einem elektronischen Bildsensor und optisches Beobachtungsgerät |
US8890047B2 (en) * | 2011-09-21 | 2014-11-18 | Aptina Imaging Corporation | Stacked-chip imaging systems |
JP5871625B2 (ja) * | 2012-01-13 | 2016-03-01 | キヤノン株式会社 | 撮像装置、その制御方法および撮像システム |
-
2013
- 2013-12-17 DE DE102013226196.9A patent/DE102013226196A1/de active Pending
-
2014
- 2014-12-04 WO PCT/EP2014/076537 patent/WO2015090997A1/de active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69232663D1 (de) | 1991-05-13 | 2002-08-01 | Interactive Pictures Corp | Rundumsichtausrichtungssystem mit bewegungsloser kamera |
WO2004110811A1 (de) * | 2003-05-26 | 2004-12-23 | Robert Bosch Gmbh | Kamera und vorrichtung zur ermittlung der helligkeit der umgebung eines kraftfahrzeuges |
DE102006024187A1 (de) * | 2005-05-26 | 2006-11-30 | Denso Corp., Kariya | Abbildungsmodul |
US20070001095A1 (en) * | 2005-06-29 | 2007-01-04 | Visteon Global Technologies, Inc. | Rear vision system |
US20080007618A1 (en) * | 2006-07-05 | 2008-01-10 | Mizuki Yuasa | Vehicle-periphery image generating apparatus and method of switching images |
DE102007016956A1 (de) * | 2007-04-05 | 2008-10-09 | Continental Teves Ag & Co. Ohg | Fahrerassistenzsystem |
DE202011005102U1 (de) | 2010-09-17 | 2011-07-09 | SMR Patents S.à.r.l. | Optische Sensorsysteme für Automotive Anwendung |
US20120249725A1 (en) | 2011-03-31 | 2012-10-04 | Tessera Technologies Ireland Limited | Face and other object tracking in off-center peripheral regions for nonlinear lens geometries |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109421600A (zh) * | 2017-08-29 | 2019-03-05 | Lg电子株式会社 | 车辆用环视提供装置及车辆 |
EP3450255A1 (de) * | 2017-08-29 | 2019-03-06 | LG Electronics Inc. | Rundumsichtüberwachungsvorrichtung für fahrzeug sowie fahrzeug |
US10800330B2 (en) | 2017-08-29 | 2020-10-13 | Lg Electronics Inc. | Around view monitoring apparatus for vehicle, and vehicle |
CN109421600B (zh) * | 2017-08-29 | 2022-07-26 | Lg电子株式会社 | 车辆用环视提供装置及车辆 |
CN110161529A (zh) * | 2019-06-10 | 2019-08-23 | 炬佑智能科技(苏州)有限公司 | Tof传感器及其形成方法、机器视觉系统 |
Also Published As
Publication number | Publication date |
---|---|
DE102013226196A1 (de) | 2015-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102017130566B4 (de) | Sichtsystem zur Erfassung einer Fahrzeugumgebung und Spiegelersatzsystem für ein Fahrzeug mit einem Sichtsystem | |
EP3392692A2 (de) | Kamerasystem für ein kraftfahrzeug, spiegelersatzsystem mit einem solchen kamerasystem und fahrassistenzsystem mit einem solchen system | |
EP2765031B1 (de) | Sichtsystem für Fahrzeuge, insbesondere Nutzfahrzeuge | |
DE102009000550B4 (de) | Weitwinkelbildgebungssystem für die Bereitstellung eines Bildes der Umgebung eines Fahrzeugs, insbesondere eines Kraftfahrzeugs | |
DE102014018040A1 (de) | Sichtsystem | |
DE102012001835A1 (de) | Sichtsystem für ein Nutzfahrzeug zur Darstellung von gesetzlich vorgeschriebenen Sichtfeldern eines Hauptspiegels und eines Weitwinkelspiegels | |
DE102016206493A1 (de) | Verfahren und Kamerasystem zur Entfernungsbestimmung von Objekten zu einem Fahrzeug | |
EP2934947A1 (de) | Kraftfahrzeug mit kamera-monitor-system | |
EP3256345B1 (de) | Fahrerassistenzsystem | |
EP3607740B1 (de) | Kameravorrichtung und verfahren zur erfassung eines umgebungsbereichs eines fahrzeugs | |
EP3882080A1 (de) | Sichtsystem für ein fahrzeug und verfahren zum umschalten zwischen von dem sichtsystem dargestellten bildbereichen | |
DE102012215026A1 (de) | Verfahren und Vorrichtung zum Betreiben eines Fahrzeugs | |
DE102015215561A1 (de) | Fahrzeugkameravorrichtung zur Aufnahme einer Umgebung eines Kraftfahrzeugs sowie Fahrerassistenzvorrichtung zur Objekterkennung mit einer solchen Fahrzeugkameravorrichtung | |
DE102007025147B4 (de) | System zur Spurverlassenswarnung und/oder Spurhaltefunktion | |
DE102012015282B4 (de) | Verfahren zur Detektion eines verdeckten Zustands einer Bilderfassungseinrichtung eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug | |
DE102011014368A1 (de) | Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem | |
DE102014224903A1 (de) | Optischer Umfeldsensor für Fahrzeuge | |
DE102011121473A1 (de) | Verfahren zum Anzeigen von Bildern auf einer Anzeigeeinrichtung eines Kraftfahrzeugs,Fahrerassistenzeinrichtung, Kraftfahrzeug und Computerprogramm | |
WO2015090997A1 (de) | Optisches sensorsystem | |
DE102012021736B4 (de) | Bildsensor für sichtbares und infrarotes Licht und Kamerasystem | |
DE102014209863A1 (de) | Verfahren und Vorrichtung zum Betreiben einer Stereokamera für ein Fahrzeug sowie Stereokamera für ein Fahrzeug | |
DE102013220022B4 (de) | Fahrzeugkamera zur Erfassung von Bildern aus einem Umgebungsbereich eines Fahrzeugs und Fahrzeug | |
DE102016212730A1 (de) | Fahrzeugkameravorrichtung mit Bildauswertungselektronik | |
DE102015210870A1 (de) | Vorrichtung und Verfahren zum Erfassen eines Bildes einer Fahrzeugumgebung | |
EP3234907A1 (de) | Kamerasystem und verfahren zum visualisieren mindestens eines fahrzeugumfeldbereiches eines fahrzeugumfeldes eines fahrzeuges |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 14809807 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 14809807 Country of ref document: EP Kind code of ref document: A1 |