DE102021201014A1 - All-round view display with a vehicle view - Google Patents
All-round view display with a vehicle view Download PDFInfo
- Publication number
- DE102021201014A1 DE102021201014A1 DE102021201014.8A DE102021201014A DE102021201014A1 DE 102021201014 A1 DE102021201014 A1 DE 102021201014A1 DE 102021201014 A DE102021201014 A DE 102021201014A DE 102021201014 A1 DE102021201014 A1 DE 102021201014A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- camera
- image
- display
- computing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
Abstract
Anordnung mit einem ersten Fahrzeug, einer ersten Kamera, einer zweiten Kamera und einer Rechenvorrichtung, die ausgebildet ist, aus einem Bild der ersten Kamera und einem Bild der zweiten Kamera eine Rundumsicht-Darstellung des Fahrzeugs zu erstellen; wobei die erste Kamera das Fahrzeug nicht erfasst. Mindestens ein Teil des Fahrzeugs wird von der zweiten Kamera erfasst; wobei die Rechenvorrichtung ausgebildet ist, den von der zweiten Kamera erfassten mindestens einen Teil des Fahrzeugs in der Rundumsicht-Darstellung darzustellen.Arrangement with a first vehicle, a first camera, a second camera and a computing device which is designed to create an all-round view of the vehicle from an image of the first camera and an image of the second camera; wherein the first camera does not capture the vehicle. At least a portion of the vehicle is captured by the second camera; wherein the computing device is designed to display the at least part of the vehicle captured by the second camera in the all-round view display.
Description
Die Erfindung betrifft eine Anordnung nach dem Oberbegriff von Anspruch 1, eine Rechenvorrichtung nach dem Oberbegriff von Anspruch 3 und ein Computerprogramm nach dem Oberbegriff von Anspruch 4.The invention relates to an arrangement according to the preamble of claim 1, a computing device according to the preamble of claim 3 and a computer program according to the preamble of claim 4.
Aus dem Stand der Technik sind Omniview-Systeme bekannt. Diese werden eingesetzt, um ein Rundumsicht-Darstellung der Umgebung eines Fahrzeugs aus der Vogelperspektive zu erstellen. Mittels mehrerer Kameras, die an einem Fahrzeug angebracht sind, werden Bilder der Umgebung des Fahrzeugs aufgenommen. Diese Bilder werden weiterverarbeitet und zu einem Übersichtsbild fusioniert. In dem Übersichtsbild ist das Fahrzeug als vorgefertigte Grafik enthalten, da es von den Kameras nicht erfasst wird.Omniview systems are known from the prior art. These are used to create a bird's-eye view, all-round view of a vehicle's surroundings. Images of the surroundings of the vehicle are recorded by means of a plurality of cameras that are attached to a vehicle. These images are further processed and merged into an overview image. The vehicle is included in the overview image as a ready-made graphic, since it is not captured by the cameras.
Der Erfindung liegt die Aufgabe zugrunde, eine verbesserte Rundumsicht-Darstellung eines Fahrzeugs verfügbar zu machen. Diese Aufgabe wird gelöst durch eine Anordnung nach Anspruch 1, eine Rechenvorrichtung nach Anspruch 3 und ein Computerprogramm nach Anspruch 4. Bevorzugte Weiterbildungen ergeben sich aus dem abhängigen Anspruch und nachfolgender Beschreibung.The object of the invention is to make an improved all-round view display of a vehicle available. This object is achieved by an arrangement according to claim 1, a computing device according to claim 3 and a computer program according to claim 4. Preferred developments result from the dependent claim and the following description.
Die Anordnung umfasst eine erste Kamera und eine zweite Kamera. Bei den beiden Kameras handelt es sich bevorzugt um optische Foto- und/oder Videokameras. Die Kameras erstellen anhand von Licht des sichtbaren Spektrums Bilder von Gegenständen, die sich im Erfassungsbereich der jeweiligen Kamera befinden.The arrangement includes a first camera and a second camera. The two cameras are preferably optical photo and/or video cameras. The cameras use light in the visible spectrum to create images of objects that are in the detection area of the respective camera.
Darüber hinaus umfasst die Anordnung eine Rechenvorrichtung. Vorzugsweise handelt es sich um ein Steuergerät eines Fahrzeugs. Auch können die Rechenvorrichtungen extern, das heißt außerhalb des Fahrzeugs angeordnet und über eine vorzugsweise drahtlose Datenleitung mit diesen verbunden sein.In addition, the arrangement includes a computing device. It is preferably a control unit of a vehicle. The computing devices can also be arranged externally, that is to say outside of the vehicle, and connected to it via a preferably wireless data line.
Die Rechenvorrichtung ist erfindungsgemäß ausgebildet, aus einem Bild der ersten Kamera und einem Bild der zweiten Kamera eine Rundumsicht-Darstellung des Fahrzeugs zu erstellen. Die Rundumsicht-Darstellung wird auch Birdview-, Omniview- oder Surroundview-Darstellung genannt. Es handelt sich um ein Bild der Umgebung eines Fahrzeugs, das aus mehreren Einzelbildern zusammengesetzt ist. Vorliegend ist die Rundumsicht-Darstellung Bildern weiterer Kameras zusammengesetzt. Die Zusammensetzung der Rundumsicht-Darstellung aus den Einzelbildern erfolgt vorzugsweise, indem Verzerrungen in den Einzelbildern korrigiert werden, die Bilder in eine gemeinsame Darstellungsebene projiziert werden und eine Bildfusion durchgeführt wird. Entsprechende Verfahren sind aus dem Stand der Technik bekannt.According to the invention, the computing device is designed to create an all-round view representation of the vehicle from an image from the first camera and an image from the second camera. The all-round view display is also called bird view, omni view or surround view display. It is an image of the surroundings of a vehicle that is composed of several individual images. In the present case, the all-round view display is composed of images from other cameras. The all-round view display is preferably composed of the individual images by correcting distortions in the individual images, projecting the images into a common display plane and performing an image fusion. Corresponding methods are known from the prior art.
Die erste Kamera erfasst das Fahrzeug nicht. Das Fahrzeug befindet sich also nicht im Erfassungsbereich der ersten Kamera. Vorzugsweise sind weitere Kameras vorhanden, die das Fahrzeug nicht erfassen, und deren Bilder in die Rundumsicht-Darstellung einfließen. Die erste Kamera und die weiteren Kameras sind vorzugsweise an Front, Heck, einer Seite oder einer Ecke des Fahrzeugs angebracht.The first camera does not capture the vehicle. The vehicle is therefore not in the detection range of the first camera. Additional cameras are preferably present which do not capture the vehicle and whose images are included in the all-round view display. The first camera and the additional cameras are preferably attached to the front, rear, a side or a corner of the vehicle.
Erfindungsgemäß erfasst die zweite Kamera mindestens einen Teil des Fahrzeugs. Es befindet sich also mindestens ein Teil des Fahrzeugs im Erfassungsbereich der zweiten Kamera.According to the invention, the second camera captures at least part of the vehicle. At least part of the vehicle is therefore located in the detection range of the second camera.
Die Rechenvorrichtung ist ausgebildet, den im Erfassungsbereich der zweiten Kamera befindlichen Teil des Fahrzeugs in der Rundumsicht-Darstellung darzustellen. Damit enthält die Rundumsicht-Darstellung statt einer vorgefertigten Grafik des Fahrzeugs ein mittels der zweiten Kamera aufgenommenes Bild des mindestens einen Teils des Fahrzeugs. Die Rundumsicht-Darstellung gibt daher nicht nur das Umfeld des Fahrzeugs wieder, sondern auch den augenblicklichen Zustand des mindestens einen Teils des Fahrzeugs. So ist es für einen Betrachter der Rundumsicht-Darstellung möglich, anhand der Darstellung Rückschlüsse über den Zustand des mindestens einen Teils des Fahrzeugs zu ziehen.The computing device is designed to display the part of the vehicle located in the detection range of the second camera in the all-round view display. The all-round view display thus contains an image of the at least one part of the vehicle recorded by the second camera instead of a prefabricated graphic of the vehicle. The all-round view display therefore not only shows the surroundings of the vehicle, but also the current state of at least one part of the vehicle. It is thus possible for an observer of the all-round view representation to draw conclusions about the state of at least one part of the vehicle based on the representation.
In einer bevorzugten Weiterbildung handelt es sich bei dem im Erfassungsbereich der zweiten Kamera befindlichen mindestens einen Teil des Fahrzeugs um mindestens einen Teil einer Ladefläche, eines Aufbaus eines Anbaugeräts, etwa eines Krans, und/oder eines Dachs des Fahrzeugs. Der Betrachter der Rundumsicht-Darstellung sieht weiterbildungsgemäß den augenblicklichen Zustand des mindestens einen Teils der Ladefläche, des Aufbaus, des Anbaugeräts und/oder des Dachs. So lässt sich beispielsweise beurteilen, ob sich das Anbaugerät in einer Fahrposition befindet oder ob das Dach des Fahrzeugs eisfrei ist.In a preferred development, the at least part of the vehicle located in the detection range of the second camera is at least part of a loading area, a structure of an attachment, such as a crane, and/or a roof of the vehicle. According to the development, the observer of the all-round view representation sees the current state of at least one part of the loading area, the body, the attachment and/or the roof. For example, it is possible to assess whether the attachment is in a driving position or whether the roof of the vehicle is free of ice.
Die Darstellung des Bilds der zweiten Kamera in der Rundumsicht-Darstellung wird vorzugsweise auf einen Ausschnitt beschränkt, dessen Umrisse den Umrissen des Fahrzeugs entsprechen. Die Darstellung von Bildinformationen außerhalb dieses Umrisses wird dann aus dem Bild der ersten Kamera und gegebenenfalls den Bildern der gegebenenfalls vorhandenen weiteren Kameras generiert. Das Bild der zweiten Kamera wird dabei vorzugsweise dem Bild der ersten Kamera und gegebenenfalls den Bildern der gegebenenfalls vorhandenen weiteren Kameras in den Überlappungsbereichen transparent überlagert.The display of the image from the second camera in the all-round view display is preferably limited to a section whose outlines correspond to the outlines of the vehicle. The display of image information outside of this outline is then generated from the image of the first camera and, if applicable, the images of any additional cameras that may be present. The image of the second camera is preferably the image of the first camera and possibly the images of any available transparently superimposed on other cameras in the overlapping areas.
Damit sich bestehende Rundumsicht-Systeme erfindungsgemäß nachrüsten lassen, erfolgt die Kalibrierung der zweiten Kamera vorzugsweise bildbasiert durch Erkennen von Fahrzeugkanten und -strukturen. Auch ist es möglich, die Kalibrierung mittels Markern vorzunehmen, die in der Umgebung des Fahrzeugs aufgestellt werden.So that existing all-round vision systems can be retrofitted according to the invention, the second camera is preferably calibrated on an image basis by detecting vehicle edges and structures. It is also possible to carry out the calibration using markers that are set up in the vicinity of the vehicle.
Eine erfindungsgemäße Rechenvorrichtung ist ausgebildet, entsprechend der Rechenvorrichtung der erfindungsgemäßen Anordnung eine Rundumsicht-Darstellung zu erstellen.A computing device according to the invention is designed to create an all-round view corresponding to the computing device of the arrangement according to the invention.
Ein erfindungsgemäßes Computerprogramm ist ausgebildet, eine Rechenvorrichtung zu veranlassen, entsprechend der Rechenvorrichtung der erfindungsgemäßen Anordnung eine Rundumsicht-Darstellung zu erstellen.A computer program according to the invention is designed to cause a computing device to create an all-round view corresponding to the computing device of the arrangement according to the invention.
Claims (4)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102021201014.8A DE102021201014A1 (en) | 2021-02-04 | 2021-02-04 | All-round view display with a vehicle view |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102021201014.8A DE102021201014A1 (en) | 2021-02-04 | 2021-02-04 | All-round view display with a vehicle view |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102021201014A1 true DE102021201014A1 (en) | 2022-08-04 |
Family
ID=82402768
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102021201014.8A Pending DE102021201014A1 (en) | 2021-02-04 | 2021-02-04 | All-round view display with a vehicle view |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102021201014A1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140354813A1 (en) | 2011-09-16 | 2014-12-04 | Hitachi Construction Machinery Co., Ltd. | Surroundings Monitoring Device for Work Machine |
| US20180192005A1 (en) | 2015-06-29 | 2018-07-05 | Aisin Seiki Kabushiki Kaisha | Image display control device |
-
2021
- 2021-02-04 DE DE102021201014.8A patent/DE102021201014A1/en active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140354813A1 (en) | 2011-09-16 | 2014-12-04 | Hitachi Construction Machinery Co., Ltd. | Surroundings Monitoring Device for Work Machine |
| US20180192005A1 (en) | 2015-06-29 | 2018-07-05 | Aisin Seiki Kabushiki Kaisha | Image display control device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102012015398B3 (en) | Mirror replacement system for a vehicle | |
| DE102016206493A1 (en) | Method and camera system for determining the distance of objects to a vehicle | |
| DE102007044605B4 (en) | surveying equipment | |
| DE102009000550A1 (en) | Wide-angle imaging system for providing an image of the surroundings of a vehicle, in particular of a motor vehicle | |
| DE102013019138A1 (en) | A method for detecting a hidden state of a camera, camera system and motor vehicle | |
| DE102009019399B4 (en) | Method for automatically determining at least one target variable describing the change in the position of a motor vehicle | |
| DE102018113992A1 (en) | Method and device for detecting a traffic lane | |
| DE102015105760A1 (en) | System for parking a vehicle | |
| DE102012215026A1 (en) | Method and device for operating a vehicle | |
| DE102017116849A1 (en) | Indirect vision system for a vehicle | |
| DE102015215561A1 (en) | Vehicle camera device for receiving an environment of a motor vehicle and driver assistance device for object recognition with such a vehicle camera device | |
| DE102010023199A1 (en) | Method for operating image capturing device for realizing outer mirror functions of motor vehicle, involves monitoring momentary state of cameras in dependence of result of comparison and/or merging of environmental characteristics | |
| DE102021201014A1 (en) | All-round view display with a vehicle view | |
| DE102012015282B4 (en) | Method for detecting a covered state of an image capturing device of a motor vehicle, camera system and motor vehicle | |
| DE102011083232A1 (en) | Image capture device for a vehicle | |
| DE102014219428A1 (en) | Self-calibration of a stereo camera system in the car | |
| EP3234907A1 (en) | Camera system and method for visualizing at least one vehicle surroundings region of vehicle surroundings of a vehicle | |
| DE112017007812T5 (en) | Vehicle peripheral image display device and vehicle peripheral image display method | |
| EP3833576B1 (en) | Surveillance camera system | |
| DE102017206247A1 (en) | Method for predictive exposure control of a vehicle camera | |
| DE102013226196A1 (en) | Optical sensor system | |
| DE102020214622A1 (en) | Evaluation of image data from a stereo camera for object evaluation | |
| DE102015016943A1 (en) | Method for self-localization of a vehicle | |
| DE102018005117A1 (en) | Method for operating a driver assistance system and driver assistance system | |
| DE102019000486A1 (en) | Method for detecting and displaying traffic levels |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R012 | Request for examination validly filed | ||
| R083 | Amendment of/additions to inventor(s) | ||
| R016 | Response to examination communication |