DE102018102137A1 - Method for displaying a trajectory and corresponding device - Google Patents
Method for displaying a trajectory and corresponding device Download PDFInfo
- Publication number
- DE102018102137A1 DE102018102137A1 DE102018102137.2A DE102018102137A DE102018102137A1 DE 102018102137 A1 DE102018102137 A1 DE 102018102137A1 DE 102018102137 A DE102018102137 A DE 102018102137A DE 102018102137 A1 DE102018102137 A1 DE 102018102137A1
- Authority
- DE
- Germany
- Prior art keywords
- trajectory
- image
- vehicle
- displaying
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000001514 detection method Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 5
- 238000012549 training Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000007794 irritation Effects 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/06—Automatic manoeuvring for parking
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
- B62D15/0285—Parking performed automatically
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
Abstract
Eine Trajektorie eines Fahrzeugs soll korrekt in einer Szene mit Objekten angezeigt werden. Daher wird ein Verfahren zum Anzeigen einer Trajektorie (7) zum Fahren eines Fahrzeugs (1) zu einer vorbestimmten Position (2) bereitgestellt, einschließlich der Schritte des Berechnens der Trajektorie (7), des Detektierens eines Objekts (6) in einem durch die Trajektorie (7) dargestellten Bereich, des Anzeigens des Objekts (6) in einem Bild und des Anzeigens eines ersten Teils (9) der Trajektorie (7) im Bild. Ferner wird ein zweiter Teil (10) der Trajektorie zumindest teilweise durch das Objekt (6) in dem Bild verborgen oder als durch das Objekt (6) verborgen optisch codiert.A trajectory of a vehicle should be displayed correctly in a scene with objects. Therefore, there is provided a method of displaying a trajectory (7) for driving a vehicle (1) to a predetermined position (2), including the steps of calculating the trajectory (7), detecting an object (6) in one by the trajectory (7), displaying the object (6) in an image and displaying a first part (9) of the trajectory (7) in the image. Further, a second portion (10) of the trajectory is at least partially hidden by the object (6) in the image or optically encoded as hidden by the object (6).
Description
Die vorliegende Erfindung betrifft ein Verfahren zum Anzeigen einer Trajektorie zum Fahren eines Fahrzeugs zu einer vorbestimmten Position mit den Schritten des Berechnens der Trajektorie, des Detektierens eines Objekts in einem durch die Trajektorie dargestellten Bereich, des Anzeigens des Objekts in einem Bild und des Anzeigens eines ersten Teils der Trajektorie im Bild. Ferner betrifft die vorliegende Erfindung eine Vorrichtung zum Anzeigen einer Trajektorie zum Fahren eines Fahrzeugs zu einer vorbestimmten Position mit einer Recheneinrichtung zum Berechnen der Trajektorie, einer Detektionseinrichtung zum Detektieren eines Objekts in einem durch die Trajektorie dargestellten Bereich und einer Anzeigeeinrichtung zum Anzeigen des Objekts und eines ersten Teils der Trajektorie in dem Bild.The present invention relates to a method of displaying a trajectory for driving a vehicle to a predetermined position, comprising the steps of calculating the trajectory, detecting an object in a region represented by the trajectory, displaying the object in an image, and displaying a first one Part of the trajectory in the picture. Furthermore, the present invention relates to a device for displaying a trajectory for driving a vehicle to a predetermined position with a calculating device for calculating the trajectory, a detection device for detecting an object in a region represented by the trajectory and a display device for displaying the object and a first Part of the trajectory in the picture.
Mehrere automatisierte Parksysteme stehen bereits auf dem Markt zur Verfügung. Eine neue Kategorie von automatisierten Parksystemen ist das trainierte Parksystem. Ein solches trainiertes Parksystem kann für das Heimgebietsparken verwendet werden. Wenn der Fahrer zu Hause oder an seinem Arbeitsplatz ankommt, parkt er typischerweise sein Auto in seinen eigenen Parkplatz ein. Ein solcher Parkplatz kann eine Parklücke, ein Carport oder eine Garage sein. Das Fahrzeug fährt automatisch zum Parkplatz.Several automated parking systems are already available on the market. A new category of automated parking systems is the trained parking system. Such a trained parking system may be used for home area parking. When the driver arrives at home or at work, he typically parks his car in his own parking lot. Such a parking space may be a parking space, a carport or a garage. The vehicle automatically drives to the parking lot.
Eine typische Parkszene ist in
Folglich sind moderne halbautonome Autos dazu ausgelegt, selbst zu parken. Dazu müssen sie die Geometrie ihrer Umgebung kennen, wie in dem Beispiel von
Im Wiederholungsmodus kann eine vorgeschlagene Trajektorie auf einer Anzeige gezeigt werden. Vorzugsweise wird die Trajektorie
Angesichts dessen ist es die Aufgabe der vorliegenden Erfindung, ein Verfahren zum Anzeigen einer Trajektorie bereitzustellen, wobei Ungenauigkeiten der Visualisierung besser vermieden werden als bei bekannten Verfahren. Außerdem soll eine entsprechende Vorrichtung zum Anzeigen einer Trajektorie bereitgestellt werden.In view of this, it is the object of the present invention to provide a method for displaying a trajectory, wherein inaccuracies of the visualization are better avoided than in known methods. In addition, a corresponding device for displaying a trajectory should be provided.
Gemäß der vorliegenden Erfindung wird diese Aufgabe durch ein Verfahren nach Anspruch 1 und eine Vorrichtung nach Anspruch 10 gelöst. Weitere vorteilhafte Entwicklungen sind in den Unteransprüchen definiert.According to the present invention, this object is achieved by a method according to
Folglich wird ein Verfahren zum Anzeigen einer Trajektorie zum Fahren eines Fahrzeugs zu einer vorbestimmten Position mit den Schritten des Berechnens der Trajektorie, des Detektierens eines Objekts in einem durch die Trajektorie dargestellten Bereich, des Anzeigens des Objekts in einem Bild und des Anzeigens eines ersten Teils der Trajektorie in dem Bild bereitgestellt. Die Trajektorie ist ein Weg für das Fahrzeug, der zur vorbestimmten Position führen sollte. Diese vorbestimmte Position kann irgendeine Art von Zielort wie ein Parkplatz, eine Manövrierposition oder dergleichen sein. Die Trajektorie kann auf einem Anzeigebildschirm im Fahrzeug angezeigt werden. Das Fahrzeug kann beispielsweise eine HMI (Mensch-Maschine-Schnittstelle) mit einem Anzeigebildschirm aufweisen. Der Anzeigebildschirm kann für Kameraansichten der Umgebung des Fahrzeugs und auch zum Anzeigen der Trajektorie vorzugsweise mit den Kameraansichten einer optischen Kamera überlagert verwendet werden.Thus, a method of displaying a trajectory for driving a vehicle to a predetermined position is provided with the steps of calculating the trajectory, detecting an object in a region represented by the trajectory, displaying the object in an image, and displaying a first part of the image Trajectory provided in the image. The trajectory is a path for the vehicle that should lead to the predetermined position. This predetermined position may be any kind of destination such as a parking lot, a maneuvering position or the like. The trajectory can be displayed on a display screen in the vehicle. For example, the vehicle may include an HMI (human-machine interface) with a display screen. The display screen may be used for camera views of the surroundings of the vehicle and also for displaying the trajectory, preferably superposed with the camera views of an optical camera.
In einem ersten Schritt wird die Trajektorie berechnet. Eine solche Berechnung kann einen Trainingsprozess umfassen. Die Berechnung kann jedoch auch einfache theoretische Verfahren zum Finden einer zweckmäßigen Trajektorie von einer aktuellen Position zur vorbestimmten Position des Fahrzeugs umfassen. Die Berechnung kann auch umfassen, eine vorgeschlagene Trajektorie zum Verbinden zu einer vorgegebenen oder trainierten Trajektorie zu finden. In a first step, the trajectory is calculated. Such a calculation may include a training process. However, the calculation may also include simple theoretical methods for finding a suitable trajectory from a current position to the predetermined position of the vehicle. The calculation may also include finding a proposed trajectory for connecting to a given or trained trajectory.
In einem anschließenden Schritt wird ein Objekt in einem durch die Trajektorie dargestellten Bereich detektiert. Der Bereich kann durch einen vorgegebenen Abstand von der Trajektorie definiert sein. Folglich kann das Objekt auf der linken Seite oder rechten Seite der Trajektorie liegen. Vorzugsweise liegt der Bereich teilweise oder vollständig zwischen einer geraden Linie, die durch die aktuelle Position des Fahrzeugs und die vorbestimmte Position (Zielposition) definiert ist, einerseits und der Trajektorie andererseits. Jedes Objekt in diesem Bereich zwischen der geraden Linie und der Trajektorie kann sich auf die Sicht des Fahrers des Fahrzeugs entlang der Trajektorie auswirken. Wenn die Trajektorie beispielsweise hinter ein Gebäude führt, sollte die Trajektorie durch das Gebäude verborgen sein, so dass der Fahrer nicht den Eindruck erhält, dass die Trajektorie vor dem Gebäude oder sogar auf dem Gebäude verläuft. Die Detektion des Objekts kann umfassen, ein 3D-Modell des Objekts zu berechnen. Ein 3D-Modell eines Gebäudes nahe der Trajektorie wird beispielsweise bestimmt. Eine solche Bestimmung oder Detektion eines Objekts kann auf Kamerabildern oder Daten von anderen Sensoren wie Lidar-Sensoren, Radar-Sensoren, Ultraschallsensoren usw. basieren.In a subsequent step, an object is detected in an area represented by the trajectory. The area may be defined by a predetermined distance from the trajectory. Consequently, the object may be on the left side or right side of the trajectory. Preferably, the area lies partially or completely between a straight line defined by the current position of the vehicle and the predetermined position (target position), on the one hand, and the trajectory, on the other hand. Any object in this area between the straight line and the trajectory may affect the driver's view of the vehicle along the trajectory. For example, if the trajectory is behind a building, the trajectory should be hidden by the building so that the driver does not get the impression that the trajectory is in front of the building or even on the building. The detection of the object may include calculating a 3D model of the object. For example, a 3D model of a building near the trajectory is determined. Such determination or detection of an object may be based on camera images or data from other sensors such as lidar sensors, radar sensors, ultrasonic sensors, etc.
Der Schritt des Anzeigens des Objekts in einem Bild kann z. B. durch Anzeigen eines Kamerabildes auf dem Anzeigebildschirm des Fahrzeugs durchgeführt werden, wobei das Kamerabild eine Abbildung des Objekts umfasst. Folglich wird das Objekt nicht nur detektiert, sondern auch im Bild bildlich visualisiert.The step of displaying the object in an image may be e.g. Example, be performed by displaying a camera image on the display screen of the vehicle, wherein the camera image includes a picture of the object. Consequently, the object is not only detected, but also visually visualized in the image.
Neben dem Objekt im Bild als Teil der Umgebungen des Fahrzeugs wird ein erster Teil der Trajektorie im Bild angezeigt. Dieser erste Teil stellt jenen Teil der Trajektorie in der realen Welt dar, der vom Fahrer aus der aktuellen Position seines Fahrzeugs gesehen werden kann. Dies bedeutet, dass der erste Teil der Trajektorie im Bild einen Teil des Fahrweges darstellt, der in der Realität auch gesehen werden kann.In addition to the object in the image as part of the surroundings of the vehicle, a first part of the trajectory is displayed in the image. This first part represents that part of the trajectory in the real world that can be seen by the driver from the current position of his vehicle. This means that the first part of the trajectory in the picture represents part of the route, which can also be seen in reality.
Um Irritationen des Fahrers zu vermeiden, wird ein zweiter Teil der Trajektorie gemäß der vorliegenden Erfindung zumindest teilweise durch das Objekt im Bild verborgen oder als durch das Objekt verborgen optisch codiert. Vom aktuellen Blickpunkt des Fahrers liegt die Trajektorie teilweise hinter dem Objekt. Folglich verbirgt das Objekt diesen Teil der Trajektorie nicht nur in der Realität, sondern auch in der künstlichen oder erweiterten Abbildung. Das Objekt wird beispielsweise halbtransparent angezeigt, so dass die Trajektorie hinter dem Objekt in einer abgedunkelten Weise gesehen werden kann. Der erste Teil der Trajektorie wird beispielsweise mit einer schwarzen Linie angezeigt und der zweite Teil der Trajektorie, der durch das Objekt verborgen ist, wird durch eine graue Linie angezeigt. Folglich hat der Fahrer den Eindruck, dass die Trajektorie hinter dem Objekt verläuft. Folglich werden Irritationen vermieden.To avoid irritation of the driver, a second part of the trajectory according to the present invention is at least partially hidden by the object in the image or optically encoded as hidden by the object. From the driver's current point of view, the trajectory lies partially behind the object. Consequently, the object hides this part of the trajectory not only in reality, but also in the artificial or extended image. For example, the object is displayed semi-transparent so that the trajectory behind the object can be seen in a darkened manner. For example, the first part of the trajectory is displayed with a black line, and the second part of the trajectory hidden by the object is indicated by a gray line. Consequently, the driver has the impression that the trajectory is behind the object. Consequently, irritation is avoided.
In einer bevorzugten Ausführungsform wird der zweite Teil der Trajektorie vollständig durch das Objekt verborgen und wird im Bild nicht angezeigt. Dies bedeutet, dass der zweite Teil der Trajektorie im Bild nicht sichtbar ist. Mit anderen Worten, der erste Teil der Trajektorie endet am Objekt, da der zweite Teil der Trajektorie im Bild nicht gezeigt wird, erkennt der Fahrer unmittelbar, dass die Trajektorie nicht vor dem Objekt verläuft.In a preferred embodiment, the second part of the trajectory is completely hidden by the object and is not displayed in the image. This means that the second part of the trajectory is not visible in the image. In other words, the first part of the trajectory ends at the object, since the second part of the trajectory is not shown in the image, the driver immediately recognizes that the trajectory does not run in front of the object.
Wie bereits vorstehend angegeben, kann das Objekt halbtransparent im Bild angezeigt werden und der zweite Teil der Trajektorie kann im Bild in einer anderen Weise als der erste Teil angezeigt werden. Die Trajektorie hinter dem Objekt kann beispielsweise mit weniger Kontrast als der erste Teil der Trajektorie angezeigt werden, der nicht durch das Objekt verborgen ist. In einem anderen Beispiel wird der erste Teil der Trajektorie in einer anderen Farbe angezeigt als der zweite Teil der Trajektorie. In einem weiteren Beispiel kann die Art der Linie des ersten Teils der Trajektorie von der Art der Linie des zweiten Teils der Trajektorie verschieden sein. Die Linie hinter dem Objekt (zweiter Teil) wird beispielsweise mit einer dünneren Linie als der erste Teil der Trajektorie gezeigt.As already stated above, the object can be displayed semitransparent in the image and the second part of the trajectory can be displayed in the image in a different way than the first part. For example, the trajectory behind the object may be displayed with less contrast than the first part of the trajectory that is not hidden by the object. In another example, the first part of the trajectory is displayed in a different color than the second part of the trajectory. In another example, the type of line of the first part of the trajectory may be different from the type of line of the second part of the trajectory. For example, the line behind the object (second part) is shown with a thinner line than the first part of the trajectory.
In einer anderen bevorzugten Ausführungsform wird der erste Teil der Trajektorie mit einer durchgezogenen Linie angezeigt und der zweite Teil der Trajektorie wird mit einer gestrichelten Linie angezeigt. Intuitiv stellt die gestrichelte Linie eine Situation dar, in der die Trajektorie nicht direkt sichtbar ist. Diese Art von Visualisierung wird auch in technischen Zeichnungen verwendet, wenn eine Kante im Hintergrund verläuft. Die gestrichelte Linie kann eine Reihe von Punkten oder eine Reihe von kurzen Linien oder eine Mischung beider sein.In another preferred embodiment, the first part of the trajectory is indicated by a solid line and the second part of the trajectory is indicated by a dashed line. Intuitively, the dashed line represents a situation in which the trajectory is not directly visible. This type of visualization is also used in engineering drawings when an edge runs in the background. The dashed line may be a series of points or a series of short lines or a mixture of both.
Gemäß einer anderen vorteilhaften Ausführungsform wird der zweite Teil der Trajektorie mit weniger Kontrast angezeigt als der erste Teil der Trajektorie. Diese Kontrastvariation wurde bereits vorstehend angegeben. Dieses Verfahren stellt keine realistische Ansicht dar, aber es hilft dem Fahrer, sich den weiteren Weg der Trajektorie hinter dem Objekt vorzustellen. Der geringere Kontrast des zweiten Teils der Trajektorie hinter dem Objekt hat den positiven Effekt, dass der Fahrer einerseits erkennt, dass die Trajektorie hinter dem Objekt verläuft, und er andererseits realisiert, dass der erste Teil und der zweite Teil zur gleichen Trajektorie gehören.According to another advantageous embodiment, the second part of the trajectory is displayed with less contrast than the first part of the trajectory. This contrast variation has already been mentioned above. This procedure does not represent a realistic view, but it helps the driver himself to present the further path of the trajectory behind the object. The lower contrast of the second part of the trajectory behind the object has the positive effect that the driver recognizes on the one hand that the trajectory is behind the object, and on the other hand realizes that the first part and the second part belong to the same trajectory.
In einer vorteilhaften Weiterentwicklung wird ein Parkplatz oder eine Parklücke am Ende der Trajektorie angezeigt und der Parkplatz wird auch zumindest teilweise durch das Objekt im Bild verborgen. Dies bedeutet, dass nicht nur die Trajektorie durch das Objekt verborgen werden kann, sondern auch der Parkplatz selbst. Wiederum kann dieses Verbergen des Parkplatzes verwirklicht werden, indem der verborgene Teil des Parkplatzes mit weniger Kontrast oder mit unterbrochenen oder gestrichelten Linien gezeigt wird. Der Vorteil des Verbergens des Parkplatzes zumindest teilweise durch das Objekt besteht darin, dass der Fahrer unmittelbar erkennt, dass der Parkplatz hinter dem Objekt liegt, so dass das Fahrzeug um das Objekt zu seinem Ziel gefahren werden muss.In an advantageous further development, a parking space or a parking space at the end of the trajectory is displayed and the parking space is also at least partially hidden by the object in the image. This means that not only the trajectory can be hidden by the object, but also the parking lot itself. Again, this concealment of the parking space can be realized by showing the hidden part of the parking lot with less contrast or with broken or dashed lines. The advantage of hiding the parking lot at least partially by the object is that the driver immediately recognizes that the parking space is behind the object so that the vehicle must be driven around the object to its destination.
In einer anderen Ausführungsform wird ferner die Trajektorie automatisch trainiert und das Verfahren zum Anzeigen einer Trajektorie zum Fahren eines Fahrzeugs zu einer vorbestimmten Position wird verwendet, wenn die trainierte Trajektorie wiederholt wird. Dies bedeutet, dass die Trajektorie in einem Trainingsmodus zuerst gelernt wird. Nach einem solchen automatischen Training wird die Trajektorie vorzugsweise in einem Speicher des Fahrzeugs gespeichert. Wenn die trainierte Trajektorie wiederholt wird und ein Objekt in dem Bereich der Trajektorie detektiert wird, wird der erste Teil der Trajektorie vorzugsweise in einer ausgeprägten Weise angezeigt, wohingegen der zweite Teil der Trajektorie als zumindest teilweise durch das Objekt verborgen angezeigt wird.In another embodiment, furthermore, the trajectory is automatically trained and the method of displaying a trajectory for driving a vehicle to a predetermined position is used when the trained trajectory is repeated. This means that the trajectory is learned first in a training mode. After such automatic training, the trajectory is preferably stored in a memory of the vehicle. When the trained trajectory is repeated and an object in the region of the trajectory is detected, the first part of the trajectory is preferably displayed in a distinct manner, whereas the second part of the trajectory is displayed as being at least partially hidden by the object.
Für einen halbautomatischen oder vollständig automatischen Betrieb kann sich das Fahrzeug lokalisieren und kann entlang einer Verbindungstrajektorie auf die Trajektorie kommen. Für seine eigene Lokalisierung kann das Fahrzeug ein globales Positionssystem oder ein anderes Positionsbestimmungssystem, beispielsweise auf der Basis von Landmarken, verwenden. Nach der Kenntnis seiner eigenen Position kann das Fahrzeug automatisch zur vorgegebenen oder trainierten Trajektorie unter Verwendung einer vorgeschlagenen Verbindungstrajektorie lenken. Selbst diese Verbindungstrajektorie zur trainierten Trajektorie kann auf dem Anzeigebildschirm des Fahrzeugs angezeigt werden. Die Verbindungstrajektorie kann natürlich auch in derselben Weise wie die vorgegebene oder trainierte Trajektorie teilweise oder vollständig durch das Objekt verborgen werden.For semi-automatic or fully automatic operation, the vehicle can locate and come along the trajectory along a connection trajectory. For its own localization, the vehicle may use a global positioning system or other positioning system, for example based on landmarks. After knowing its own position, the vehicle can automatically steer to the given or trained trajectory using a proposed connection trajectory. Even this compound trajectory to the trained trajectory can be displayed on the display screen of the vehicle. Of course, the connection trajectory can also be partially or completely hidden by the object in the same way as the given or trained trajectory.
Entsprechend einer weiteren Ausführungsform werden die (trainierte) Trajektorie und die Verbindungstrajektorie gleichzeitig dargestellt. So hat der Fahrer die Möglichkeit, genau zu beobachten, was sein Fahrzeug in dem Wiedergabemodus tatsächlich macht, um auf die trainierte Trajektorie zu kommen. Vorzugsweise werden die trainierte Trajektorie und die Verbindungstrajektorie in verschiedenen Modi dargestellt, beispielsweise mit unterschiedlichen Farben oder unterschiedlichen Linientypen.Ein Computerprogrammprodukt kann eine Programmcodeeinrichtung, die auf einem computerlesbaren Medium gespeichert ist, zum Durchführen eines Verfahrens gemäß den vorstehend beschriebenen Verfahren umfassen, wenn das Computerprogrammprodukt durch einen Prozessor einer elektronischen Steuereinheit verarbeitet wird. Folglich kann die elektronische Steuereinheit durch das Computerprogrammprodukt betrieben werden, so dass ein Verfahren, wie vorstehend beschrieben, durchgeführt werden kann.According to a further embodiment, the (trained) trajectory and the connection trajectory are displayed simultaneously. Thus, the driver has the opportunity to observe exactly what his vehicle is actually doing in the playback mode in order to get to the trained trajectory. Preferably, the trained trajectory and connection trajectory are presented in different modes, for example, different colors or different linetypes. A computer program product may include program code means stored on a computer readable medium for performing a method according to the methods described above when the computer program product passes through a processor of an electronic control unit is processed. Consequently, the electronic control unit can be operated by the computer program product, so that a method as described above can be performed.
Um die obige Aufgabe zu lösen, wird auch eine Vorrichtung zum Anzeigen einer Trajektorie zum Fahren eines Fahrzeugs zu einer vorbestimmten Position bereitgestellt, die umfasst
- - eine Recheneinrichtung zum Berechnen der Trajektorie,
- - eine Detektionseinrichtung zum Detektieren eines Objekts in einem durch die Trajektorie dargestellten Bereich und
- - eine Anzeigeeinrichtung zum Anzeigen des Objekts und eines ersten Teils der Trajektorie im Bild,
- - die Anzeigeeinrichtung dazu ausgelegt ist, einen zweiten Teil der Trajektorie zumindest teilweise durch das Objekt im Bild zu verbergen oder den zweiten Teil als durch das Objekt (
6 ) verborgen optisch zu codieren.
- a computing device for calculating the trajectory,
- a detection device for detecting an object in a region represented by the trajectory and
- a display device for displaying the object and a first part of the trajectory in the image,
- - The display device is adapted to hide a second part of the trajectory at least partially by the object in the image or the second part as by the object (
6 ) optically encode.
Die Funktionen, Variationen und Vorteile, die in Verbindung mit dem erfindungsgemäßen Verfahren vorstehend beschrieben sind, können auch auf die erfindungsgemäße Vorrichtung zum Anzeigen der Trajektorie für das Fahrzeug angewendet werden. Ein Fahrzeug kann mit einer solchen Vorrichtung versehen sein.The functions, variations and advantages described above in connection with the method according to the invention can also be applied to the device according to the invention for displaying the trajectory for the vehicle. A vehicle may be provided with such a device.
Die Detektionseinrichtung der erfindungsgemäßen Vorrichtung zum Anzeigen der Trajektorie kann eine Kamera, einen Lidar-Sensor, einen Radar-Sensor und/oder ein GPS-System umfassen. Dies bedeutet, dass das Objekt und insbesondere die Geometrie des Objekts auf der Basis von Abbildungen detektiert werden können, die mit einer optischen Kamera erfasst werden. Zusätzlich oder alternativ können solche Informationen über das Objekt durch den Lidar-Sensor (Lichtdetektion und Entfernungsmessung) erhalten werden. In diesem Fall werden die Umgebungen des Fahrzeugs und insbesondere das Objekt optisch abgetastet und der Abstand wird auf der Basis der Abtastsignale bestimmt. Vorzugsweise wird ein Laser zum Abtasten der Umgebungen oder des Objekts verwendet. Anstelle von oder zusätzlich zum Lidar-Sensor kann ein Radar-Sensor verwendet werden. Ein Radar-Sensor kann auch wertvolle Informationen über Objekte an der Trajektorie liefern. Ferner kann die Detektionseinrichtung ein GPS-System umfassen. Folglich kann sich das Fahrzeug oder die Detektionseinrichtung lokalisieren. Mit solchen Positionsdaten und tatsächlichen Kartendaten können Informationen über Objekte in der Umgebung des Fahrzeugs erhalten werden. Nicht nur Lokalisierungsinformationen können mit solchen Sensoren erfasst werden, sondern auch Lageinformationen, einschließlich der Ausrichtung des Fahrzeugs.The detection device of the device according to the invention for displaying the trajectory may include a camera, a lidar sensor, a radar sensor and / or a GPS system. This means that the object, and in particular the geometry of the object, can be detected on the basis of images captured with an optical camera. Additionally or alternatively such information about the object can be obtained by the lidar sensor (light detection and distance measurement). In this case, the surroundings of the vehicle and in particular the object are optically scanned and the distance is determined on the basis of the scanning signals. Preferably, a laser is used to scan the surroundings or the object. Instead of or in addition to the lidar sensor, a radar sensor can be used. A radar sensor can also provide valuable information about objects on the trajectory. Furthermore, the detection device may comprise a GPS system. Consequently, the vehicle or the detection device can locate. With such position data and actual map data, information about objects in the vicinity of the vehicle can be obtained. Not only location information can be captured with such sensors, but also location information, including the orientation of the vehicle.
In einer weiteren vorteilhaften Ausführungsform ist die Vorrichtung eine mobile Vorrichtung, insbesondere ein Smartphone. Dies bedeutet, dass die Vorrichtung nicht fest in ein Fahrzeug integriert ist, sondern für sich eine reale mobile Vorrichtung ist. Wenn die Vorrichtung ein Smartphone ist, kann die hochauflösende Anzeige des Smartphones verwendet werden, um die Umgebung des Fahrzeugs und die Trajektorie anzuzeigen. Außerdem kann der Prozessor des Smartphones für alle Rechen- und Detektionsschritte verwendet werden, um die Funktionen der erfindungsgemäßen Vorrichtung zu verwirklichen.In a further advantageous embodiment, the device is a mobile device, in particular a smartphone. This means that the device is not firmly integrated into a vehicle, but is itself a real mobile device. If the device is a smartphone, the smartphone's high-resolution display can be used to indicate the vehicle's surroundings and trajectory. In addition, the processor of the smartphone can be used for all computing and detection steps in order to realize the functions of the device according to the invention.
Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen verwendbar, ohne den Rahmen der Erfindung zu verlassen. Es sind somit auch Ausführungen von der Erfindung als umfasst und offenbart anzusehen, die in den Figuren nicht explizit gezeigt und erläutert sind, jedoch aus separierten Merkmalskombinationen aus den erläuterten Ausführungen hervorgehen und erzeugbar sind. Es sind auch Ausführungen und Merkmalskombinationen als offenbart anzusehen, die somit nicht alle Merkmale eines ursprünglich formulierten unabhängigen Anspruchs aufweisen. Es sind darüber hinaus Ausführungen und Merkmalskombinationen, insbesondere durch die oben dargelegten Ausführungen, als offenbart anzusehen, die über die in den Rückbezügen der Ansprüche dargelegten Merkmalskombinationen hinausgehen oder abweichen.Further features of the invention will become apparent from the claims, the figures and the description of the figures. The features and combinations of features mentioned above in the description as well as the features and feature combinations mentioned below in the description of the figures and / or shown alone in the figures can be used not only in the respectively specified combination but also in other combinations, without departing from the scope of the invention , There are thus also embodiments of the invention as encompassed and disclosed, which are not explicitly shown and explained in the figures, but emerge from separate feature combinations of the described embodiments and can be generated. Embodiments and combinations of features are also to be regarded as disclosed, which thus do not have all the features of an originally formulated independent claim. Moreover, embodiments and combinations of features, in particular by the embodiments set out above, are to be regarded as disclosed, which go beyond or deviate from the combinations of features set out in the back references of the claims.
Die vorliegende Erfindung wird nun in Verbindung mit den beigefügten Figuren genauer beschrieben, die zeigen in:
-
1 eine Parksituation, in der das Fahrzeug eine Trajektorie von einer aktuellen Position zu einem Parkplatz verwendet; -
2 eine Draufsicht auf eine Situation mit einer Trajektorie um ein Haus; -
3 dieSituation von 2 in einer perspektivische Ansicht; -
4 dieSituation von 3 mit einem verborgenen Teil der Trajektorie; und -
5 dieSituation von 3 mit einer gestrichelten Trajektorie hinter dem Haus.
-
1 a parking situation in which the vehicle uses a trajectory from a current position to a parking lot; -
2 a plan view of a situation with a trajectory around a house; -
3 the situation of2 in a perspective view; -
4 the situation of3 with a hidden part of the trajectory; and -
5 the situation of3 with a dashed trajectory behind the house.
Die folgenden Ausführungsformen sind bevorzugte Beispiele der vorliegenden Erfindung.The following embodiments are preferred examples of the present invention.
Der Kern der vorliegenden Erfindung bezieht sich auf das, was für den Benutzer angezeigt wird, während das Fahrzeug eine vorgegebene oder trainierte Trajektorie verwendet. Das Fahrzeug kann sich beispielsweise in einem Wiederholungsmodus befinden. Das Verfahren zum Anzeigen kann davon abhängen, ob der Benutzer sich im Fahrzeug befindet, in welchem Fall die Szene beispielsweise auf der Kopfeinheit angezeigt wird, oder ob der Benutzer das Fahrzeug verlassen hat, in welchem Fall der Benutzer beispielsweise das Manöver von einer mobilen Vorrichtung überwachen kann. Die Erfindung kann für beide Verwendungsfälle relevant sein. Vorzugsweise kann eine jeweilige HMI (Mensch-Maschine-Schnittstelle) verwirklicht werden.The gist of the present invention relates to what is displayed to the user while the vehicle is using a predetermined or trained trajectory. The vehicle may be in a retry mode, for example. The method of displaying may depend on whether the user is in the vehicle, in which case the scene is displayed on the head unit, for example, or if the user has left the vehicle, in which case the user is monitoring the maneuver from a mobile device, for example can. The invention may be relevant for both cases of use. Preferably, a respective HMI (human-machine interface) can be realized.
Das vorgeschlagene Verfahren dient zum Erweitern der durch das System zu befahrenden Trajektorien und der Ziel- (Park-) Position auf der Kameraanzeige, um dem Benutzer eine klare Angabe des Weges zu geben, den das Fahrzeug befährt. Die Kameraanzeige kann ein Rundumsichtsystem sein. Für ein solches Rundumsichtsystem (SVS) können eine erste Kamera und mindestens eine zweite Kamera sowie eine entsprechende Auswertungsvorrichtung dazu ausgelegt sein, eine Rundumsicht auf der Basis der Bildsignale zu erzeugen. Auf der Basis der Bildsignale der Vielzahl von Kameras des Kameradetektionssystems kann folglich eine Gesamtrundumsicht von 360° erzeugt werden. Folglich kann das Kameradetektionssystem auch als Rundumsichtkamerasystem bezeichnet werden. Das Rundumsichtkamerasystem kann eine Draufsicht, eine Schalenansicht und individuelle Kameraansichten bereitstellen.The proposed method is for expanding the trajectories to be traveled by the system and the target (parking) position on the camera display to give the user a clear indication of the way the vehicle is traveling. The camera display can be a panoramic system. For such a panoramic view system (SVS), a first camera and at least one second camera and a corresponding evaluation device can be designed to generate an all-round view on the basis of the image signals. On the basis of the image signals of the plurality of cameras of the camera detection system, a total 360-degree view can thus be generated. Consequently, the camera detection system may also be referred to as a surround camera system. The all-round vision camera system may provide a top view, a shell view, and individualized camera views.
Die Anzeige bzw. die HMI kann auch verwendet werden, um die korrekte Trajektorie in dem Fall auszuwählen, in dem zwei oder mehr Trajektorien am gegenwärtigen Ort des Fahrzeugs verfügbar sind. Wenn mehrere Trajektorien auf dem Bildschirm angezeigt werden, kann die korrekte Trajektorie, die zur beabsichtigten Zielposition führt, leicht durch den Benutzer ausgewählt werden.The display or HMI may also be used to select the correct trajectory in the case where two or more trajectories are available at the current location of the vehicle. When multiple trajectories on the screen can be displayed, the correct trajectory leading to the intended target position can be easily selected by the user.
In einem Wiederholungsmodus startet das Fahrzeug
Mit anderem Worten, im Wiederholungsmodus der Parkfunktion lokalisiert sich die Anwendung erneut gegenüber einer vorher trainierten Trajektorie
Für einen Fahrer ist es jedoch intuitiver, erweiterte Kamerabilder mit den Trajektorien zu erhalten, wie in
Bilder einer Frontsichtkamera können verwendet werden, um eine Anzeige zu erzeugen, wie in
Die Erweiterung von Trajektorien von
Im Bild von
Der zweite Teil
Claims (13)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018102137.2A DE102018102137A1 (en) | 2018-01-31 | 2018-01-31 | Method for displaying a trajectory and corresponding device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018102137.2A DE102018102137A1 (en) | 2018-01-31 | 2018-01-31 | Method for displaying a trajectory and corresponding device |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102018102137A1 true DE102018102137A1 (en) | 2019-08-01 |
Family
ID=67224195
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102018102137.2A Withdrawn DE102018102137A1 (en) | 2018-01-31 | 2018-01-31 | Method for displaying a trajectory and corresponding device |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102018102137A1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023011993A1 (en) * | 2021-08-04 | 2023-02-09 | Robert Bosch Gmbh | Method for carrying out a movement manoeuvre using a driver assistance system |
DE102021133199A1 (en) | 2021-12-15 | 2023-06-15 | Bayerische Motoren Werke Aktiengesellschaft | Method and driver assistance system for considering objects when driving along a trajectory |
DE102022111805A1 (en) | 2022-05-11 | 2023-11-16 | Valeo Schalter Und Sensoren Gmbh | Switching between monitored maneuvering and automatic maneuvering when maneuvering |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102014011613A1 (en) * | 2014-08-05 | 2016-02-11 | Daimler Ag | Method and device for supporting a parking process for a vehicle |
DE102014220144A1 (en) * | 2014-10-06 | 2016-04-07 | Robert Bosch Gmbh | Method and device for assisting a driver of a motor vehicle |
DE102016211182A1 (en) * | 2015-09-08 | 2017-03-09 | Volkswagen Aktiengesellschaft | A method, apparatus and system for performing automated driving of a vehicle along a trajectory provided from a map |
-
2018
- 2018-01-31 DE DE102018102137.2A patent/DE102018102137A1/en not_active Withdrawn
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102014011613A1 (en) * | 2014-08-05 | 2016-02-11 | Daimler Ag | Method and device for supporting a parking process for a vehicle |
DE102014220144A1 (en) * | 2014-10-06 | 2016-04-07 | Robert Bosch Gmbh | Method and device for assisting a driver of a motor vehicle |
DE102016211182A1 (en) * | 2015-09-08 | 2017-03-09 | Volkswagen Aktiengesellschaft | A method, apparatus and system for performing automated driving of a vehicle along a trajectory provided from a map |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023011993A1 (en) * | 2021-08-04 | 2023-02-09 | Robert Bosch Gmbh | Method for carrying out a movement manoeuvre using a driver assistance system |
DE102021133199A1 (en) | 2021-12-15 | 2023-06-15 | Bayerische Motoren Werke Aktiengesellschaft | Method and driver assistance system for considering objects when driving along a trajectory |
DE102022111805A1 (en) | 2022-05-11 | 2023-11-16 | Valeo Schalter Und Sensoren Gmbh | Switching between monitored maneuvering and automatic maneuvering when maneuvering |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102014116140B4 (en) | Parking assist device and parking assistance method for a vehicle | |
DE102015203016B4 (en) | Method and device for optical self-localization of a motor vehicle in an environment | |
EP2805183B1 (en) | Method and device for visualizing the surroundings of a vehicle | |
DE102010051206A1 (en) | A method of generating an image of a vehicle environment and imaging device | |
DE102010016064A1 (en) | A vehicle peripheral display device and method for a vehicle peripheral image | |
DE102016211182A1 (en) | A method, apparatus and system for performing automated driving of a vehicle along a trajectory provided from a map | |
DE102010000385A1 (en) | Vehicle periphery display device | |
DE102018215344A1 (en) | SYSTEM AND METHOD FOR VEHICLE CONVOIS | |
DE102010042063A1 (en) | Method for determining conditioned image data about environment of motor car, involves conditioning position-related image with symbol to determine conditioned image data, where symbol is assigned to classified object in image | |
DE102014107155A1 (en) | Improved front curb visualization system | |
DE102014107158A1 (en) | Improved top-down imaging in a front curb visualization system | |
DE102010030463A1 (en) | Method for assisting a driver of a motor vehicle | |
EP2478510A1 (en) | Method and device for representing obstacles in a parking assistance system of motor vehicles | |
DE102006051977B4 (en) | Parking assistance system | |
DE102008046214A1 (en) | Environment monitoring method for vehicle e.g. commercial motor vehicle, utilized for transporting goods, involves determining and displaying relevant surrounding regions based on distance between vehicle and obstacle | |
DE102010051204A1 (en) | Method for displaying obstacle for vehicle, involves detecting area surrounding vehicle with camera system, and detecting obstacles with sensor element independent of camera system | |
DE102018102137A1 (en) | Method for displaying a trajectory and corresponding device | |
DE102015108944B4 (en) | Panoramic system and operating procedures thereof | |
DE102015206546A1 (en) | Road marking recognition device | |
DE102017106152A1 (en) | Determine an angle of a trailer with optimized template | |
DE102020127278B4 (en) | Around View Synthesis System and Method | |
DE102018119537A1 (en) | Method for assisting a user when driving a motor vehicle to a target position, computer program product, driver assistance system and motor vehicle | |
EP3224116A1 (en) | Method for characterizing camera images of a parking assistant | |
EP1724726B1 (en) | Method and apparatus for measuring a parking space with a single camera | |
DE102018121274B4 (en) | Process for visualizing a driving intention, computer program product and visualization system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R082 | Change of representative |
Representative=s name: JAUREGUI URBAHN, KRISTIAN, DR. RER. NAT., DE |
|
R083 | Amendment of/additions to inventor(s) | ||
R163 | Identified publications notified | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |