DE102018221186A1 - Autonomous parking procedure - Google Patents
Autonomous parking procedure Download PDFInfo
- Publication number
- DE102018221186A1 DE102018221186A1 DE102018221186.8A DE102018221186A DE102018221186A1 DE 102018221186 A1 DE102018221186 A1 DE 102018221186A1 DE 102018221186 A DE102018221186 A DE 102018221186A DE 102018221186 A1 DE102018221186 A1 DE 102018221186A1
- Authority
- DE
- Germany
- Prior art keywords
- motor vehicle
- image signal
- mobile terminal
- autonomous driving
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
- B62D15/0285—Parking performed automatically
Abstract
Die Erfindung betrifft ein Verfahren zum autonomen Parken eines Kraftfahrzeug (10), welches zumindest ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem (30) und eine Steuereinheit (40) aufweist. Im erfindungsgemäßen Verfahren erfolgt zunächst das Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät (70). Ferner wird von dem Fahrsystem zumindest ein autonomes Fahrmanöver zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs (10) in eine Zielposition des Kraftfahrzeugs (10) ermittelt. Ferner wird über die Kommunikationsverbindung zumindest ein mittels einer Kamera (96) des mobilen Endgeräts (70) aufgenommenes erstes Bildsignal und/oder eine von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs (10) von dem mobilen Endgerät (70) empfangen. Anhand des empfangenen zumindest einen ersten Bildsignals und/oder der empfangenen Lagekarte wird schließlich das zumindest eine autonome Fahrmanöver angepasst.The invention relates to a method for autonomously parking a motor vehicle (10), which has at least one driving system (30) set up for autonomous driving of the motor vehicle and a control unit (40). In the method according to the invention, a communication link is first established between the motor vehicle and a mobile terminal (70). The driving system also determines at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle (10) into a target position of the motor vehicle (10). Furthermore, at least one first image signal recorded by a camera (96) of the mobile terminal (70) and / or a position map of the motor vehicle (10) determined by the mobile terminal on the basis of the at least one first image signal is transmitted by the mobile terminal (70) via the communication link. receive. Finally, the at least one autonomous driving maneuver is adapted on the basis of the received at least one first image signal and / or the received position map.
Description
Die Erfindung betrifft ein Verfahren zum autonomen Parken eines Kraftfahrzeugs, insbesondere ein Verfahren zum autonomen Ein-, Aus- oder Umparken eines Kraftfahrzeugs unter Verwendung eines mit dem Kraftfahrzeug in Kommunikationsverbindung stehenden mobilen Endgeräts, beispielsweise eines Smartphones. Die Erfindung betrifft ferner ein Kraftfahrzeug mit einer zum Durchführen des erfindungsgemäßen Verfahrens ausgebildeten Steuereinheit.The invention relates to a method for autonomously parking a motor vehicle, in particular to a method for autonomously parking, parking or relocating a motor vehicle using a mobile terminal that is in communication with the motor vehicle, for example a smartphone. The invention further relates to a motor vehicle with a control unit designed to carry out the method according to the invention.
Heutige Fahrzeuge verfügen bereits über eine Vielzahl von Assistenzsystemen, die den Fahrer in einer Vielzahl von Fahrsituationen computerbasiert unterstützen. Solche Assistenzsysteme können auf Sensoren zum Erfassen einer Vielzahl von Messdaten zurückgreifen, welche die Sinnesfähigkeiten des Menschen bei weitem übersteigen. Zudem übertrifft die Geschwindigkeit dieser Assistenzsysteme die menschliche Reaktionszeit signifikant. Bekannte Fahrerassistenzsysteme sind beispielsweise Spurhalteassistenten, Bremsassistenten bei Fußgängererkennung und Abstandsregeltempomaten, insbesondere für Stausituationen.Today's vehicles already have a variety of assistance systems that support the driver in a variety of driving situations using computer technology. Such assistance systems can use sensors to record a multitude of measurement data, which far exceed the sensory abilities of humans. In addition, the speed of these assistance systems significantly exceeds the human response time. Known driver assistance systems are, for example, lane keeping assistants, brake assistants for pedestrian detection and cruise control, particularly for traffic jams.
Durch Anwendung solcher Assistenzsysteme geht die Autonomie des Fahrers bezüglich seiner Fahrentscheidungen zunehmend auf das Fahrzeug beziehungsweise in diesem operierende Steuereinheiten über. Am Ende dieser Entwicklungen steht ein autonom fahrendes Fahrzeug, welches vollständig ohne Eingriffe eines Menschen manövrieren kann. Als Projektion von Fahrerassistenzsystemen bleibt autonomes Fahren dabei jedoch auf den vollautomatisierten Personentransport beschränkt. Darüber hinaus findet das autonome Fahren insbesondere Anwendung bei Parkvorgängen, bei denen die durch Sensoren ermöglichte exakte Kenntnis der Fahrzeugumgebung sowie das exakte Durchführen autonomer Fahrmanöver vorteilhaft sind.By using such assistance systems, the driver's autonomy with regard to his driving decisions is increasingly transferred to the vehicle or control units operating in it. At the end of these developments is an autonomously driving vehicle that can be maneuvered completely without human intervention. As a projection of driver assistance systems, autonomous driving remains limited to fully automated passenger transport. In addition, autonomous driving is used in particular in parking processes in which the exact knowledge of the vehicle environment made possible by sensors and the exact performance of autonomous driving maneuvers are advantageous.
Für das autonome Parken eines Fahrzeugs kommen bislang vor allem Sensoren des Fahrzeugs zum Einsatz, welche das Erfassen von Abständen ermöglichen. Anhand dieser erfassten Abstände lassen sich sowohl die Größe von Parkpositionen als auch die Freiheitsgrade des Fahrzeugs zum Manövrieren ermitteln. Gängige Einparkassistenten erfordern beispielsweise ein einmaliges Vorbeifahren an einer leeren Parklücke, um einen autonomen Einparkvorgang in diese Parklücke durchzuführen. Beim Aus- oder Umparken ist die ausschließliche Verwendung von Abstandssensoren jedoch weniger vorteilhaft, da diese zumeist durch nahe Objekte, wie benachbarte Kraftfahrzeuge oder Wände abgeschattet sind. Somit sind die Zahl der verfügbaren Sensoren sowie der erfassbare Bereiche deutlich reduziert.So far, sensors of the vehicle, which enable the detection of distances, have been used primarily for autonomous parking of a vehicle. Based on these recorded distances, both the size of parking positions and the degrees of freedom of the vehicle for maneuvering can be determined. Common parking assistants require, for example, a one-time drive past an empty parking space in order to carry out an autonomous parking process in this parking space. When parking or relocating, however, the exclusive use of distance sensors is less advantageous, since these are mostly shadowed by nearby objects, such as neighboring motor vehicles or walls. This significantly reduces the number of available sensors and the areas that can be detected.
Der Erfindung liegt nun die Aufgabe zugrunde, den Stand der Technik zu bereichern und ein Verfahren zum autonomen Parken eines Fahrzeugs vorzuschlagen, welches die dem Fahrzeug zur Verfügung stehenden Umgebungsinformation erhöht, um somit die Genauigkeit der durchgeführten Manöver sowie die Sicherheit des autonomen Parkens zu erhöhen.The invention is based on the object of enriching the state of the art and proposing a method for autonomous parking of a vehicle which increases the environmental information available to the vehicle, in order to increase the accuracy of the maneuvers carried out and the safety of the autonomous parking.
Die erfindungsgemäße Aufgabe wird gelöst durch ein Verfahren und ein Kraftfahrzeug gemäß den unabhängigen Patentansprüchen. Bevorzugte Weiterbildungen sind Gegenstand der jeweils rückbezogenen Unteransprüche.The object of the invention is achieved by a method and a motor vehicle according to the independent patent claims. Preferred further developments are the subject of the respective dependent claims.
Ein erster Aspekt der Erfindung betrifft ein Verfahren zum autonomen Parken, insbesondere zum autonomen Aus-, Um- und Einparken eines Kraftfahrzeug wie im Folgendem im Detail beschrieben. In dem erfindungsgemäßen Verfahren kommen ein Kraftfahrzeug sowie ein mobiles Endgerät, wie beispielsweise ein Smartphone, Tablet oder Smart-Gear, zum Einsatz. Diese sind dabei jeweils zum Durchführen des erfindungsgemäßen Verfahrens ausgebildet, wie im folgenden im Detail beschrieben. Insbesondere weist das Kraftfahrzeug ein erstes Kommunikationsmodul, ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem und eine erste Steuereinheit auf. Ferner weist das auch mobile Endgerät zumindest ein zweites Kommunikationsmodul und eine zweite Steuereinheit sowie zumindest eine zum Erfassen eines Bildsignals, insbesondere eines Graustufenbildsignals oder eines Farbbildsignals, ausgebildete Kamera auf.A first aspect of the invention relates to a method for autonomous parking, in particular for autonomously parking, relocating and parking a motor vehicle, as described in detail below. A motor vehicle and a mobile terminal, such as a smartphone, tablet or smart gear, are used in the method according to the invention. These are each designed to carry out the method according to the invention, as described in detail below. In particular, the motor vehicle has a first communication module, a driving system set up for autonomous driving of the motor vehicle and a first control unit. Furthermore, the mobile terminal also has at least one second communication module and a second control unit and at least one camera designed to capture an image signal, in particular a grayscale image signal or a color image signal.
Unter Einsatz der entsprechenden Komponenten des Fahrzeugs und des mobilen Endgeräts erfolgt in dem erfindungsgemäßen Verfahren das Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und dem mobilen Endgerät, insbesondere zwischen der ersten Steuereinheit und der zweiten Steuereinheit mittels dem ersten Kommunikationsmodul und dem zweiten Kommunikationsmodul. Ferner erfolgt in dem erfindungsgemäßen Verfahren das Ermitteln zumindest eines autonomen Fahrmanövers, bevorzugt einer Mehrzahl autonomer Fahrmanöver, zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs. Das Ermitteln des zumindest einen Fahrmanövers erfolgt dabei vor oder nach dem Herstellen der Kommunikationsverbindung. Bevorzugt erfolgt das Ermitteln des zumindest einen Fahrmanövers gemäß dem Stand der Technik, beispielsweise vor dem Herstellen der Kommunikationsverbindung.Using the corresponding components of the vehicle and the mobile terminal, the method according to the invention establishes a communication link between the motor vehicle and the mobile terminal, in particular between the first control unit and the second control unit by means of the first communication module and the second communication module. Furthermore, in the method according to the invention, at least one autonomous driving maneuver, preferably a plurality of autonomous driving maneuvers, is ascertained for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle. The at least one driving maneuver is ascertained before or after the communication connection is established. The at least one driving maneuver is preferably determined in accordance with the prior art, for example before the communication connection is established.
Gemäß einer ersten Durchführungsform des erfindungsgemäßen Verfahrens wird ferner zumindest ein mittels einer Kamera des mobilen Endgeräts aufgenommenes erstes Bildsignal empfangen. Dabei handelt es sich bevorzugt um ein Graustufenbildsignal oder Farbbildsignal, welches von der Kamera, insbesondere von einer Fotokamera des Smartphones, erfasst wurde. Bevorzugt wird eine Mehrzahl erster Bildsignale, insbesondere eine zeitliche Abfolge von ersten Bildsignalen, empfangen. Alternativ wird ein Videosignal als eine Abfolge erster Bildsignale von dem mobilen Endgerät empfangen. In einer alternativen Durchführungsform des erfindungsgemäßen Verfahrens wird von dem mobilen Endgerät eine anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs empfangen. Gemäß dieser Durchführungsform wird die Lagekarte des Kraftfahrzeug im Smartphone ermittelt. Der Empfang des zumindest einen Bildsignals und/oder der Empfang der Lagekarte erfolgt dabei bevorzugt über die zuvor hergestellte Kommunikationsverbindung, beispielsweise eine Bluetooth, WLNA oder Mobilfunkverbindung zwischen den Kommunikationsmodulen von Fahrzeug und Endgerät.According to a first embodiment of the method according to the invention, at least one first image signal recorded by means of a camera of the mobile terminal is also received. This is preferably a grayscale image signal or color image signal, which was recorded by the camera, in particular by a photo camera of the smartphone. A plurality of first image signals, in particular a chronological sequence of first image signals, are preferably received. Alternatively, a video signal is received as a sequence of first image signals from the mobile terminal. In an alternative embodiment of the method according to the invention, the mobile terminal receives a location map of the motor vehicle determined on the basis of the at least one first image signal. According to this embodiment, the location map of the motor vehicle is determined in the smartphone. The at least one image signal and / or the location map are preferably received via the previously established communication connection, for example a Bluetooth, WLNA or mobile radio connection between the communication modules of the vehicle and the terminal.
Im erfindungsgemäßen Verfahren erfolgt ferner das Anpassen des zumindest einen autonomen Fahrmanövers, bevorzugt der Mehrzahl autonomer Fahrmanöver, anhand des empfangenen zumindest einen ersten Bildsignals sowie gegebenenfalls anhand der empfangenen Lagekarte. Im erfindungsgemäßen Verfahren wird mithin die Kamera eines mobilen Endgeräts genutzt, um eine Umgebung des Kraftfahrzeugs und/oder das Kraftfahrzeug selbst zu erfassen. Die so erfassten Daten werden im erfindungsgemäßen Verfahren sodann zur verbesserten Durchführung des autonomen Parkvorgangs verwendet. Erfindungsgemäß wird somit ein mobiles Endgerät, welches gegebenenfalls bereits anderweitig als Fernbedienung für autonome Parkfunktionen verwendet wird, fermer für die Verbesserung der Datenbasis des autonomen Parkens genutzt. Indem dazu zumindest eine Smartphone-interne Kamera genutzt wird, stehen insbesondere aus einer zusätzlichen Perspektive aufgenommene hochaufgelöste Bilddaten der Fahrzeugumgebung zur Verfügung. Diese können auf vielfältige Weise genutzt werden, um das autonome Fahren zu verbessern, wie im Folgenden im Detail beschrieben wird, insbesondere jedoch für die Absicherung des Umfelds des Kraftfahrzeugs. Hierzu werden bevorzugt bekannte Verfahren zur Bildverarbeitung, Bildsegmentierung und/oder Bilderkennung eingesetzt.In the method according to the invention, the at least one autonomous driving maneuver, preferably the plurality of autonomous driving maneuvers, is further adapted on the basis of the received at least one first image signal and, if appropriate, on the basis of the received position map. In the method according to the invention, the camera of a mobile terminal is therefore used to capture the surroundings of the motor vehicle and / or the motor vehicle itself. The data recorded in this way are then used in the method according to the invention for improved implementation of the autonomous parking process. According to the invention, a mobile terminal, which may already be used elsewhere as a remote control for autonomous parking functions, is also used to improve the database of autonomous parking. By using at least one smartphone-internal camera for this purpose, high-resolution image data of the vehicle environment recorded in particular from an additional perspective are available. These can be used in a variety of ways to improve autonomous driving, as will be described in detail below, but in particular for protecting the environment of the motor vehicle. Known methods for image processing, image segmentation and / or image recognition are preferably used for this purpose.
Das erfindungsgemäße Verfahren erhöht somit die Datenbasis für das Durchführen eines automatischen Parkvorgangs, wobei besonders vorteilhaft ausgenutzt wird, dass ein Nutzer sein Smartphone intuitiv oder bewusst auf besonders relevante Bereiche der Umgebung richtet. Ebenfalls kann ausgenutzt werden, dass der Nutzer sein Smartphone über die Umgebung des Fahrzeugs schweifen lässt. Die Intelligenz des Nutzers des mobilen Endgeräts kommt in dem erfindungsgemäß Verfahren somit ebenso vorteilhaft zum Tragen, wie die in dem mobilen Endgerät vorhandene mindestens eine Kamera. Darüber hinaus ermöglicht das erfindungsgemäße Verfahren das Erfassen von Bereichen, die sich für fahrzeugeigene Kameras in einem toten Winkel befinden. Dies ist insbesondere bei der Verwendung des erfindungsgemäßen Verfahrens für Kraftfahrzeug mit Anhängern vorteilhaft.The method according to the invention thus increases the database for carrying out an automatic parking process, with particular advantage being taken of the fact that a user intuitively or deliberately points his smartphone at particularly relevant areas of the environment. It can also be exploited that the user sweeps his smartphone over the surroundings of the vehicle. The intelligence of the user of the mobile terminal is thus used in the method according to the invention just as advantageously as the at least one camera present in the mobile terminal. In addition, the method according to the invention enables the detection of areas which are in a blind spot for vehicle-own cameras. This is particularly advantageous when using the method according to the invention for motor vehicles with trailers.
Im Rahmen der vorliegenden Erfindung umfasst das autonome Parken, insbesondere das autonome Ein-, Aus- oder Umparken eines Fahrzeugs, das autonome Fahren beziehungsweise Rangieren des Fahrzeugs von einer aktuellen Eigenposition hin zu einer Zielposition. Bevorzugt ist die Zielposition dabei eine geeignete Position zum Ankoppeln eines Anhängers, also eine Position an der das Fahrzeug für den Zweck des Ankoppelns parken soll. Mit anderen Worten umfasst das Anpassen des zumindest einen autonomen Fahrmanövers bevorzugt das Ermitteln einer optimalen Position zum Koppeln eines Anhängers, das heißt einer optimale Position zum Verbinden einer Anhängerkupplung des Kraftfahrzeugs mit einem Kupplungssystem des Anhängers (Anhängerkopplungsassistent). Hierbei wird vorteilhaft ausgenutzt, dass mit dem zumindest einen Bildsignal der Bereich der Anhängerkupplung, der gegebenenfalls von fahrzeugeigenen Kameras nicht erfassbar ist, sowie der Bereich des Kupplungssystems mittels der zumindest einen Kamera des mobilen Endgeräts mit hoher Genauigkeit erfassbar sind.In the context of the present invention, autonomous parking, in particular the autonomous parking, parking or relocating of a vehicle, includes autonomous driving or maneuvering of the vehicle from a current own position to a target position. The target position is preferably a suitable position for coupling a trailer, that is to say a position at which the vehicle is to be parked for the purpose of coupling. In other words, adapting the at least one autonomous driving maneuver preferably includes determining an optimal position for coupling a trailer, that is to say an optimal position for connecting a trailer coupling of the motor vehicle to a coupling system of the trailer (trailer coupling assistant). In this case, use is advantageously made of the fact that with the at least one image signal the area of the trailer coupling, which may not be detectable by the vehicle's own cameras, and the area of the coupling system can be detected with high accuracy by means of the at least one camera of the mobile terminal.
Ebenfalls bevorzugt ist die Zielposition eine geeignete Position zum Parken des Anhängers, also eine Position an der das Fahrzeug für den Zweck des Abkoppelns des Anhängers parken soll. Ferner bevorzugt ist die Zielposition eine geeignete Position zum Parken des Fahrzeugs und des Anhängers, wobei Fahrzeug und Anhänger auch beim Parken verbunden bleiben (Anhängerrangierassistent). Hierbei wird vorteilhaft ausgenutzt, dass mit dem zumindest einen Bildsignal ein Bereich hinter dem Anhänger, der gegebenenfalls von fahrzeugeigenen Kameras nicht erfassbar ist, mittels der Kamera des mobilen Endgeräts problemlos erfassbar ist.
In einer ferner bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens werden einem Nutzer auf dem mobilen Endgerät Anleitungsinformationen angezeigt, die angeben welche Umgebungsbereiche für das Fahrzeug und ein bestimmtes Parkmanöver von Interesse sind. Besonders bevorzugt werden diese Informationen vom Fahrzeug anhand des zumindest einen ermittelten autonomen Fahrmanövers zum Rangieren von der aktuellen Eigenposition des Kraftfahrzeugs zur Zielposition des Kraftfahrzeugs ermittelt und an das mobile Endgerät übermittelt. Das mobile Endgerät stellt diese Informationen bevorzugt im Rahmen einer geeigneten Anwendung dar. Der Nutzer wird so angeleitet, mit der zumindest einen Kamera genau die Umgebungsbereiche zu erfassen, die für das ermittelte Parkmanöver von besonderem Interesse sind und daher besonders zum Anpassen des Parkmanövers geeignet sind. Derartige Bereiche sind beispielsweise tote Winkel des Fahrzeugs und/oder Bereiche einer Anhängerkupplung und/oder Bereiche hinter einem verbundenen Anhänger.The target position is likewise preferably a suitable position for parking the trailer, that is to say a position at which the vehicle is to park for the purpose of uncoupling the trailer. The target position is furthermore preferably a suitable position for parking the vehicle and the trailer, the vehicle and trailer also remaining connected when parking (trailer maneuvering assistant). In this case, use is advantageously made of the fact that with the at least one image signal, an area behind the trailer, which may not be detectable by the vehicle's own cameras, can be easily detected by the camera of the mobile terminal.
In a further preferred embodiment of the method according to the invention, instruction information is displayed to the user on the mobile terminal, which information indicates which surrounding areas are of interest to the vehicle and a specific parking maneuver. This information is particularly preferably determined by the vehicle on the basis of the at least one determined autonomous driving maneuver for maneuvering from the current own position of the motor vehicle to the target position of the motor vehicle and transmitted to the mobile terminal. The mobile terminal device preferably displays this information in the context of a suitable application. The user is instructed to use the at least one camera to pinpoint the surrounding areas capture that are of particular interest for the determined parking maneuver and are therefore particularly suitable for adapting the parking maneuver. Such areas are, for example, blind spots of the vehicle and / or areas of a trailer coupling and / or areas behind a connected trailer.
In einer besonders bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens empfängt das Fahrzeug zumindest ein erstes Bildsignal von dem mobilen Endgerät. In dieser Durchführungsform ermittelt das Fahrzeug, insbesondere eine entsprechend ausgebildete Steuereinheit des Fahrzeugs anhand des zumindest einen empfangenen ersten Bildsignals eine Lagekarte. Bevorzugt wird die Lagekarte anhand einer Mehrzahl empfangener erster Bildsignale ermittelt. Die Lagekarte ist dabei eine Repräsentation der Umgebung des Fahrzeugs in einem von der Steuereinheit des Fahrzeugs verarbeitungsbaren Format. Bevorzugt wird die Lagekarte ferner anhand von Informationen zur Eigenposition des Fahrzeugs, zur Zielposition des autonomen Parkvorgangs, und zum zumindest einen Fahrmanöver ermittelt. Besonders bevorzugt verknüpft die Lagekarte Informationen zu einem Fahrschlauch des Fahrzeugs von dessen Eigenposition zur Zielposition des zumindest einen Fahrmanövers mit Informationen zur Umgebung des Fahrzeugs, insbesondere mit Informationen zu zumindest einem statischen oder dynamischen Hindernis in der Umgebung des Fahrzeugs. Gemäß dieser Durchführungsform erfolgt ferner ein Anpassen des zumindest einen Fahrmanövers anhand der ermittelten Lagekarte, wie im Folgenden im Detail beschrieben wird. Das Anpassen betrifft insbesondere das Unterbrechen des Manövrierens sowie das Nachjustieren der Zielposition.In a particularly preferred embodiment of the method according to the invention, the vehicle receives at least a first image signal from the mobile terminal. In this embodiment, the vehicle, in particular a correspondingly designed control unit of the vehicle, uses the at least one received first image signal to determine a position map. The location map is preferably determined on the basis of a plurality of received first image signals. The location map is a representation of the surroundings of the vehicle in a format that can be processed by the control unit of the vehicle. The location map is also preferably determined on the basis of information about the vehicle's own position, the target position of the autonomous parking process, and the at least one driving maneuver. The position map particularly preferably links information about a driving tube of the vehicle from its own position to the target position of the at least one driving maneuver with information about the surroundings of the vehicle, in particular with information about at least one static or dynamic obstacle in the surroundings of the vehicle. According to this embodiment, the at least one driving maneuver is also adapted based on the determined position map, as will be described in detail below. The adjustment affects in particular the interruption of maneuvering and the readjustment of the target position.
Gemäß einer besonders bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens ist die empfangene oder ermittelte Lagekarte eine statische oder dynamische dreidimensionale Repräsentation einer Umgebung des Kraftfahrzeugs ist. Mit anderen Worten enthält die Lagekarte dreidimensionale Informationen zum Fahrzeug selbst sowie zu zumindest einem in der Umgebung des Fahrzeugs befindlichen Hindernis. Die dreidimensionalen Informationen umfassen dabei bevorzugt drei kartesische Koordinaten des Fahrzeugs und der Hindernisse. Zum Erstellen einer dreidimensionalen Lagekarte sind zumindest zwei Bildsignale der Umgebung des Fahrzeugs aus zwei verschiedenen Blickwinkeln notwendig, um die notwendige Parallaxe-Information zum Erstellen einer dreidimensionalen Lagekarte zu ermitteln.According to a particularly preferred embodiment of the method according to the invention, the position map received or ascertained is a static or dynamic three-dimensional representation of an environment of the motor vehicle. In other words, the location map contains three-dimensional information about the vehicle itself and about at least one obstacle in the area surrounding the vehicle. The three-dimensional information preferably includes three Cartesian coordinates of the vehicle and the obstacles. To create a three-dimensional location map, at least two image signals of the surroundings of the vehicle from two different viewing angles are necessary in order to determine the necessary parallax information for creating a three-dimensional location map.
Gemäß einer ersten Durchführungsform wird die dreidimensionale Repräsentation anhand einer Mehrzahl mittels der Monokamera des mobilen Endgeräts aus verschiedenen Blickwinkeln aufgenommenen ersten Bildsignalen ermittelt. Hierzu kann dem Nutzer beispielsweise eine Anleitung angezeigt werden, wie er die Mehrzahl von Bildsignalen aufzunehmen hat. Die ersten Bildsignale aus verschiedenen Blickwinkeln werden dann an das Fahrzeug übermittelt oder es wird daraus die dreidimensionale Repräsentation im mobilen Endgerät ermittelt. Gemäß einer zweiten Durchführungsform weist das mobile Endgerät bereits zumindest eine Stereokamera auf und ist somit selbst zum Erfassen von dreidimensionalen Bildern eingerichtet. Zumindest ein erstes stereoskopisches Bildsignal wird dann an das Fahrzeug übermittelt oder es wird daraus die dreidimensionale Repräsentation im mobilen Endgerät ermittelt. Gemäß einer dritten Durchführungsform wird die dreidimensionale Repräsentation anhand zumindest eines mittels der Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und zumindest eines mittels einer Kamera des Kraftfahrzeugs aufgenommenen zweiten Bildsignals ermittelt. Dabei sind das erste Bildsignal und das zweite Bildsignal zwangsläufig aus verschiedenen Perspektiven aufgenommen. Das erste Bildsignal wird dann an das Fahrzeug übermittelt und dort wird aus diesem und dem zweiten Bildsignal die dreidimensionale Repräsentation ermittelt.According to a first embodiment, the three-dimensional representation is determined on the basis of a plurality of first image signals recorded from different angles by means of the mono camera of the mobile terminal. For this purpose, the user can be shown, for example, instructions on how to record the plurality of image signals. The first image signals from different points of view are then transmitted to the vehicle or the three-dimensional representation in the mobile terminal is determined therefrom. According to a second embodiment, the mobile terminal already has at least one stereo camera and is therefore itself set up for capturing three-dimensional images. At least a first stereoscopic image signal is then transmitted to the vehicle or the three-dimensional representation in the mobile terminal is determined therefrom. According to a third embodiment, the three-dimensional representation is determined on the basis of at least one first image signal recorded by the camera of the mobile terminal and at least one second image signal recorded by a camera of the motor vehicle. The first image signal and the second image signal are necessarily recorded from different perspectives. The first image signal is then transmitted to the vehicle and the three-dimensional representation is determined there from this and the second image signal.
Die oben beschriebene dritte Durchführungsform des erfindungsgemäßen Verfahrens ist besonderes vorteilhaft, da sie die Ausnutzung aller bereits vorhandener Hardware umfasst. Ferner vorteilhaft ist, dass sich die Perspektiven des ersten und zweiten Bildsignals in der Regel deutlich unterscheiden. Somit ergibt sich ein besonderes hoher Informationsgehalt aus der Verknüpfung des ersten Bildsignals und des zweiten Bildsignals. Dabei stellt sich jedoch die Frage, wie die Verknüpfung des ersten und des zweiten Bildsignals erfolgt. Gemäß einer bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand erster GPS Daten des mobilen Endgeräts und zweiter GPS Daten des Kraftfahrzeugs. Anhand dieser GPS Daten und bevorzugt weiterer Daten zur Ausrichtung der Kamera im Fahrzeug und/oder zu Lageinformationen des mobilen Endgeräts lassen sich die Bildsignale zueinander in Beziehung setzen.The third embodiment of the method according to the invention described above is particularly advantageous since it includes the use of all the hardware that is already present. It is also advantageous that the perspectives of the first and second image signals generally differ significantly. A particularly high information content thus results from the combination of the first image signal and the second image signal. However, the question arises as to how the first and second image signals are linked. According to a preferred embodiment, the at least one first image signal and the at least one second image signal are linked for three-dimensional representation using first GPS data of the mobile terminal and second GPS data of the motor vehicle. On the basis of this GPS data and preferably further data on the alignment of the camera in the vehicle and / or on position information of the mobile terminal, the image signals can be related to one another.
Gemäß einer ferner bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand eines in dem ersten Bildsignal identifizierten Teils des Kraftfahrzeugs und Raumlagedaten des Kraftfahrzeugs. Beispielsweise wird in dem ersten Bildsignal ein Nummernschild oder ein anderer Marker des Kraftfahrzeugs erkannt. Anhand von Informationen zur relativen Lage des Nummernschilds (oder anderen Markers) und der im Fahrzeug befindlichen Kamera, lassen sich die ersten und zweiten Bildsignale überlagern.According to a further preferred embodiment, the linking of the at least one first image signal and the at least one second image signal for three-dimensional representation takes place on the basis of a part of the motor vehicle identified in the first image signal and spatial position data of the motor vehicle. For example, a license plate or another marker of the motor vehicle is recognized in the first image signal. The first and second image signals can be superimposed on the basis of information on the relative position of the license plate (or other marker) and the camera in the vehicle.
Gemäß einer ebenfalls bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand eines in dem ersten Bildsignal und dem zweiten Bildsignal identifizierten Bereichs von Interesse für das zumindest eine autonome Fahrmanöver. Mit anderen Worten wird eine in den Bildsignalen selbst enthaltene Information zur Überlagerung der Bildsignale genutzt. Dies setzt beispielsweise die Anwendung von Segmentierung und/oder Bilderkennung (beispielsweise mittels künstlicher Intelligenz, Kl) auf beide Bildsignale voraus. Bei den zur Überlagerung beziehungsweise Verknüpfung genutzten Information handelt es sich besonders bevorzugt um ein in beiden Bildsignalen enthaltenes Objekt, beispielsweise ein Fahrzeug, ein Verkehrsschild oder dergleichen. Insbesondere mittels Bilderkennung und/oder durch Anwendung des Strahlensatzes lassen sich anhand von Größenunterschieden und/oder perspektivischen Verzerrungen des identifizierten Objekts in beiden Bildsignalen die relative Lagen von der Kamera des mobilen Endgeräts und dem Objekt und die relative Lage von der Kamera des Fahrzeugs und dem Objekt bestimmen. Anhand dieser relativen Lagen lässt sich dann die relative Lage von den Kameras von Fahrzeug und mobilem Endgerät bestimmen. According to a likewise preferred embodiment, the linking of the at least one first image signal and the at least one second image signal for three-dimensional representation takes place on the basis of an area of interest identified in the first image signal and the second image signal for the at least one autonomous driving maneuver. In other words, information contained in the image signals themselves is used to superimpose the image signals. This requires, for example, the application of segmentation and / or image recognition (for example by means of artificial intelligence, KI) to both image signals. The information used for overlaying or linking is particularly preferably an object contained in both image signals, for example a vehicle, a traffic sign or the like. In particular by means of image recognition and / or by using the beam set, the relative positions of the camera of the mobile terminal and the object and the relative position of the camera of the vehicle and the object can be based on size differences and / or perspective distortions of the identified object in both image signals determine. On the basis of these relative positions, the relative position of the cameras of the vehicle and the mobile terminal can then be determined.
Das erfindungsgemäße Verfahren umfasst ferner bevorzugt den Schritt des Erkennens zumindest eines statischen Hindernisses für das zumindest eine autonome Fahrmanöver. Besonders bevorzugt wird im erfindungsgemäßen Verfahren in der statischen dreidimensionalen Repräsentation zumindest ein statisches Hindernis für das oder die Fahrmanöver von der Fahrzeugeigenposition in die Endposition ermittelt. Bei dem statischen Hindernis handelt es sich beispielsweise um einen schmalen Poller oder Pfosten, eine Bodenwelle oder ein tiefes Schlagloch, ein auf dem Boden liegender Gegenstand, ein Bordstein oder dergleichen. Im erfindungsgemäßen Verfahren erfolgt daraufhin bevorzugt ein Anpassen des zumindest einen autonomen Fahrmanövers unter Berücksichtigung des zumindest einen statischen Hindernisses. So wird beispielsweise ein Poller, Pfosten, eine Bodenwelle, ein Schlagloch oder ein auf dem Boden liegender Gegenstand umfahren. Ein erkannter Bordstein führt bevorzugt zum Anpassen des Zielorts des Parkvorgangs, beispielsweise weil erkannt wird, dass der Bordstein aufgrund seiner Höhe nicht überfahren werden kann.The method according to the invention preferably further comprises the step of recognizing at least one static obstacle for the at least one autonomous driving maneuver. Particularly preferably, in the method according to the invention, at least one static obstacle for the driving maneuver or maneuvers from the vehicle's own position to the end position is determined in the static three-dimensional representation. The static obstacle is, for example, a narrow bollard or post, a bump or a deep pothole, an object lying on the floor, a curb or the like. In the method according to the invention, the at least one autonomous driving maneuver is then preferably adjusted, taking into account the at least one static obstacle. For example, a bollard, post, a bump, a pothole or an object lying on the ground is avoided. A recognized curb preferably leads to the adaptation of the destination of the parking process, for example because it is recognized that the height of the curb cannot be driven over.
Ebenfalls bevorzugt umfasst das erfindungsgemäße Verfahren ferner den Schritt des Erkennens zumindest eines dynamischen Hindernisses für das zumindest eine autonome Fahrmanöver. Besonders bevorzugt wird im erfindungsgemäßen Verfahren in der dynamischen dreidimensionalen Repräsentation zumindest eines dynamischen Hindernisses für das zumindest eine autonome Fahrmanöver erkannt. Bei dem zumindest einen dynamischen Hindernis handelt es sich beispielsweise um einen Fahrradfahrer oder eine Person, beispielsweise ein Kind, oder ein Tier, das sich zeitweilig in dem oben erwähnten Fahrschlauch aufhält. Im erfindungsgemäßen Verfahren erfolgt dann bevorzugt ein Unterbrechen des zumindest einen autonomen Fahrmanövers für die Dauer des Bestehens des zumindest einen dynamischen Hindernisses. Bevorzugt werden die vorbeschriebenen Verfahrensschritte wiederholt ausgeführt, wobei das Erkennen des dynamischen Hindernisses aufbauend auf einer Mehrzahl, insbesondere einer zeitlichen Abfolge, erster und gegebenenfalls zweiter Bildsignale erfolgt. Besonders bevorzugt ist in diesem Zusammenhang (aber auch unabhängig davon) das zumindest eine erste Bildsignal Teil eines mittels einer Kamera des mobilen Endgeräts aufgenommenen Videosignals. Eine derartige Zeitreihe von ersten Bildsignalen ermöglicht vorteilhaft die vorbeschriebene Erkennung dynamischer Hindernisse im Verfahren.The method according to the invention also preferably comprises the step of recognizing at least one dynamic obstacle for the at least one autonomous driving maneuver. In the method according to the invention, it is particularly preferably recognized in the dynamic three-dimensional representation of at least one dynamic obstacle for the at least one autonomous driving maneuver. The at least one dynamic obstacle is, for example, a cyclist or a person, for example a child, or an animal that is temporarily in the driving tube mentioned above. In the method according to the invention, the at least one autonomous driving maneuver is then preferably interrupted for the duration of the existence of the at least one dynamic obstacle. The above-described method steps are preferably carried out repeatedly, the dynamic obstacle being recognized based on a plurality, in particular a chronological sequence, of first and optionally second image signals. In this context, it is particularly preferred (but also independently of this) that the at least one first image signal is part of a video signal recorded by means of a camera of the mobile terminal. Such a time series of first image signals advantageously enables the above-described detection of dynamic obstacles in the method.
Ebenfalls bevorzugt erfolgt im erfindungsgemäßen Verfahren ein Speichern des zumindest einen mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals zum Nachweis der Überwachung des zumindest einen autonomen Fahrmanövers. Das Speichern erfolgt dabei im mobilen Endgerät und/oder im Fahrzeug. Alternativ bevorzugt wird die Lagekarte, insbesondere die dreidimensionale Repräsentation gespeichert. Der Nachweis der Überwachung autonomer Fahrmanöver kann gegebenenfalls verpflichtend sein. Die im erfindungsgemäßen Verfahren ohnehin aufgenommenen ersten Bildsignale können somit unmittelbar als Nachweismaterial für die durchgeführte Überwachung genutzt werden.Likewise, in the method according to the invention, the at least one first image signal recorded by means of a camera of the mobile terminal is preferably stored in order to demonstrate the monitoring of the at least one autonomous driving maneuver. The storage takes place in the mobile device and / or in the vehicle. Alternatively, the location map, in particular the three-dimensional representation, is preferably stored. Evidence of monitoring autonomous driving maneuvers may be mandatory. The first image signals recorded anyway in the method according to the invention can thus be used directly as evidence material for the monitoring carried out.
Die Verfahrensschritte des erfindungsgemäßen Verfahrens können durch elektrische oder elektronische Bauteile oder Komponenten (Hardware), durch Firmware (ASIC) implementiert sein oder durch beim Ausführen eines geeigneten Programms (Software) verwirklicht werden. Ebenfalls bevorzugt wird das erfindungsgemäße Verfahren durch eine Kombination von Hardware, Firmware und/oder Software verwirklicht, beziehungsweise implementiert. Beispielsweise sind einzelne Komponenten zum Durchführen einzelner Verfahrensschritte als separat integrierter Schaltkreis ausgebildet oder auf einem gemeinsamen integrierten Schaltkreis angeordnet. Einzelne zum Durchführen einzelner Verfahrensschritte eingerichtete Komponenten sind ferner bevorzugt auf einem (flexiblen) gedruckten Schaltungsträger (FPCB/PCB), einem Tape Carrier Package (TCP) oder einem anderen Substrat angeordnet.The method steps of the method according to the invention can be implemented by electrical or electronic components or components (hardware), by firmware (ASIC) or by executing a suitable program (software). The method according to the invention is likewise preferably implemented or implemented by a combination of hardware, firmware and / or software. For example, individual components for performing individual method steps are designed as separately integrated circuits or arranged on a common integrated circuit. Individual components set up to carry out individual method steps are also preferably arranged on a (flexible) printed circuit carrier (FPCB / PCB), a tape carrier package (TCP) or another substrate.
Die einzelnen Verfahrensschritte des erfindungsgemäßen Verfahrens sind ferner bevorzugt als ein oder mehrere Prozesse ausgebildet, die auf einem oder mehreren Prozessoren in einem oder mehreren elektronischen Rechengeräten laufen und beim Ausführen von ein oder mehreren Computerprogrammen erzeugt werden. Die Rechengeräte sind dabei bevorzugt dazu ausgebildet, mit anderen Komponenten, beispielsweise einem Kommunikationsmodul, sowie ein oder mehreren Sensoren beziehungsweise Kameras zusammenzuarbeiten, um die hierin beschriebenen Funktionalitäten zu verwirklichen. Die Anweisungen der Computerprogramme sind dabei bevorzugt in einem Speicher abgelegt, wie beispielsweise einem RAM-Element. Die Computerprogramme können jedoch auch in einem nicht-flüchtigen Speichermedium, wie beispielsweise einer CD-ROM, einem Flash-Speicher oder dergleichen abgelegt sein.The individual method steps of the method according to the invention are furthermore preferably designed as one or more processes based on one or more processors run in one or more electronic computing devices and are generated when one or more computer programs are executed. The computing devices are preferably designed to work together with other components, for example a communication module, and one or more sensors or cameras in order to implement the functionalities described here. The instructions of the computer programs are preferably stored in a memory, such as a RAM element. However, the computer programs can also be stored in a non-volatile storage medium, such as a CD-ROM, a flash memory or the like.
Dem Fachmann ist ferner ersichtlich, dass die Funktionalitäten von mehreren Computern (Datenverarbeitungsgeräten) kombiniert oder in einem einzigen Gerät kombiniert sein können oder dass die Funktionalität von einem bestimmten Datenverarbeitungsgerät auf eine Vielzahl von Geräten verteilt vorliegen kann, um die Schritte des erfindungsgemäßen Verfahrens auszuführen, ohne vom erfindungsgemäßen Verfahren abzuweichen.It is also apparent to the person skilled in the art that the functionalities of a plurality of computers (data processing devices) can be combined or combined in a single device or that the functionality of a specific data processing device can be distributed over a large number of devices in order to carry out the steps of the method according to the invention without to deviate from the method according to the invention.
Ein weiterer Aspekt der Erfindung betrifft ein Kraftfahrzeug, insbesondere einen Personenkraftwagen mit Verbrennungs-, Elektro- oder Hybridmotor, welches zumindest einen zum Erfassen von Umgebungsdaten eingerichteten ersten Sensor, zumindest einen zum Erfassen von Fahrzeugdaten eingerichteten zweiten Sensor und ein Kommunikationsmodul, sowie ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem aufweist. Das Kommunikationsmodul weist bevorzugt einen Funk-, Mobilfunk-, WLAN-, und/oder Bluetooth-Transceiver oder alternative Drahtloskommunikationsgeräte auf.A further aspect of the invention relates to a motor vehicle, in particular a passenger car with a combustion, electric or hybrid motor, which has at least one first sensor set up to record environmental data, at least one second sensor set up to record vehicle data and a communication module, and one for autonomous driving of the motor vehicle equipped driving system. The communication module preferably has a radio, mobile radio, WLAN, and / or Bluetooth transceiver or alternative wireless communication devices.
Der zumindest eine erste Sensor ist dabei dazu ausgebildet, die Umgebung des Fahrzeugs betreffende Sensorsignale zu erfassen. Der zumindest eine zweite Sensor ist dabei dazu ausgebildet, das Fahrzeug selbst betreffende Sensorsignale zu erfassen. Das Kommunikationsmodul ist dabei dazu ausgebildet, das Kraftfahrzeug und/oder dessen Umgebung potentiell betreffende Informationen über ein Kommunikationsnetzwerk zu empfangen. Dabei versetzt ein mittels des zumindest einen ersten Sensors empfangenes Umgebungssignal das parkende Kraftfahrzeug bevorzugt in die Lage, sich über seine Umwelt zu informieren und bildet bevorzugt eine Vielzahl von Umweltinformationen ab. Ein mittels des zumindest einen zweiten Sensors empfangenes Zustandssignal versetzt das parkende Kraftfahrzeug bevorzugt in die Lage, sich über seinen Eigenzustand zu informieren und bildet dazu eine Vielzahl von Zustandsinformationen ab. Ein mittels des Kommunikationsmoduls empfangenes Signal ermöglicht den Empfang erster Bildsignale vom mobilen Endgerät.The at least one first sensor is designed to detect sensor signals relating to the surroundings of the vehicle. The at least one second sensor is designed to detect sensor signals relating to the vehicle itself. The communication module is designed to receive information potentially relevant to the motor vehicle and / or its surroundings via a communication network. An ambient signal received by means of the at least one first sensor preferably enables the parked motor vehicle to obtain information about its environment and preferably displays a large amount of environmental information. A state signal received by means of the at least one second sensor preferably enables the parked motor vehicle to obtain information about its own state and, for this purpose, displays a large number of state information. A signal received by means of the communication module enables the reception of first image signals from the mobile terminal.
Ferner weist das Kraftfahrzeug eine zum Durchführen des erfindungsgemäßen Verfahrens, wie obenstehend beschrieben, ausgebildete Steuereinheit auf. Die Steuereinheit ist insbesondere dafür eingerichtet, eine Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät herzustellen, zumindest ein autonomes Fahrmanöver zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs zu ermitteln, zumindest ein mittels einer Kamera des mobilen Endgeräts aufgenommenes erstes Bildsignal und/oder eine von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät zu empfangen, und das zumindest eine autonome Fahrmanöver anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte anzupassen.Furthermore, the motor vehicle has a control unit designed to carry out the method according to the invention, as described above. The control unit is in particular set up to establish a communication link between the motor vehicle and a mobile terminal, to determine at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle, at least one first image signal and recorded by a camera of the mobile terminal / or to receive a position map of the motor vehicle determined by the mobile terminal based on the at least one first image signal from the mobile terminal, and to adapt the at least one autonomous driving maneuver based on the received at least one first image signal and / or based on the received location map.
Gängige Kraftfahrzeuge weisen bereits heute eine Vielzahl von Sensoren auf, welche als erste Sensoren ständig verschiedene Umweltbedingungen, wie Außentemperatur, (Luft)Feuchtigkeit, etc. erfassen. Ferner können Fahrzeuge auch bereits zweite Sensoren, beispielsweise Lagesensoren einer Diebstahlwarnanlage, aufweisen. Moderne Fahrzeuge sind ferner mit leistungsfähigen Kommunikationsmodulen ausgestattet, die den Empfang von Informationen über eine Vielzahl von Kanälen ermöglichen. Das erfindungsgemäße Verfahren führt diese bereits vorhandenen Sensoren einer neuen vorteilhaften Verwendung zu.Current motor vehicles already have a large number of sensors which are the first sensors to continuously record various environmental conditions, such as outside temperature, (air) humidity, etc. Furthermore, vehicles can also already have second sensors, for example position sensors of an anti-theft alarm system. Modern vehicles are also equipped with powerful communication modules that enable the reception of information via a variety of channels. The method according to the invention leads these already existing sensors to a new advantageous use.
Das Fahrsystem des erfindungsgemäßen Kraftfahrzeugs ist bevorzugt dafür eingerichtet, zumindest ein autonomes Fahrmanöver/eine autonome Fahrt von der Eigenposition des Fahrzeugs zu einer Zielposition beziehungsweise Parkposition durchzuführen. Besonders bevorzugt ist das Fahrsystem zur vollständig automatischen Führung des Kraftfahrzeugs ausgebildet und kann die Längsführung sowie die Querführung des Kraftfahrzeugs steuern. Ferner bevorzugt kann das Fahrsystem auf den zumindest einen ersten Sensor und/oder auf den zumindest einen zweiten Sensor zum Bestimmen von Zustandsinformationen und/oder von Umgebungsinformationen des Kraftfahrzeugs zugreifen. Diese ersten und zweiten Sensoren sind somit bevorzugt von dem Fahrsystem und von der Steuereinheit nutzbar.The driving system of the motor vehicle according to the invention is preferably set up to carry out at least one autonomous driving maneuver / autonomous drive from the vehicle's own position to a target position or parking position. The driving system is particularly preferably designed for completely automatic guidance of the motor vehicle and can control the longitudinal guidance and the transverse guidance of the motor vehicle. Furthermore, the driving system can preferably access the at least one first sensor and / or the at least one second sensor for determining status information and / or environmental information of the motor vehicle. These first and second sensors can thus preferably be used by the driving system and by the control unit.
Ein weiterer Aspekt der Erfindung betrifft eine Steuereinheit, die dafür eingerichtet ist, mit zumindest einem ersten Sensor zum Erfassen von Umgebungsdaten eines Kraftfahrzeugs, mit zumindest einem zweiten Sensor zum Erfassen von Zustandsdaten des Kraftfahrzeugs und mit einem Kommunikationsmodul eines Kraftfahrzeugs sowie mit einem Fahrsystem zum autonomen Fahren des Kraftfahrzeugs zu kommunizieren und die ferner dafür eingerichtet ist, das erfindungsgemäße Verfahren durchzuführen. Bevorzugte Ausgestaltungen der Steuereinheit entsprechen den obenstehend mit Bezug zu dem erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a control unit which is set up with at least one first sensor for recording ambient data of a motor vehicle, with at least one second sensor for recording status data of the motor vehicle and with one Communication module of a motor vehicle and to communicate with a driving system for autonomous driving of the motor vehicle and which is further configured to carry out the method according to the invention. Preferred configurations of the control unit correspond to the embodiments described above with reference to the motor vehicle according to the invention.
Ein weiterer Aspekt der Erfindung betrifft ein Verfahren einer Steuereinheit eines Kraftfahrzeugs, welches zumindest einen zum Erfassen von Umgebungsdaten eingerichteten ersten Sensor, zumindest einen zum Erfassen von Zustandsdaten des Kraftfahrzeugs eingerichteten zweiten Sensor und ein Kommunikationsmodul, ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem, sowie die Steuereinheit aufweist, wobei das Verfahren zumindest die folgenden Schritte aufweist: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte. Bevorzugte Ausgestaltungen des Verfahrens entsprechen den obenstehend mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a method of a control unit of a motor vehicle, which has at least one first sensor set up for recording environmental data, at least one second sensor set up for recording status data of the motor vehicle and a communication module, a driving system set up for autonomous driving of the motor vehicle, and the Control unit, the method comprising at least the following steps: establishing a communication link between the motor vehicle and a mobile terminal; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred embodiments of the method correspond to the embodiments described above with reference to the motor vehicle according to the invention.
Ein weiterer Aspekt der Erfindung betrifft ein Computerprogramm, umfassend Befehle, die bei der Ausführung des Programms durch einen Computer, wie beispielsweise eine Steuereinheit eines Kraftfahrzeugs, diesen veranlassen, das erfindungsgemäße Verfahren, umfassend die Schritte: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte, auszuführen. Bevorzugte Ausgestaltungen des Programms entsprechen den obenstehend mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a computer program comprising commands which cause the computer to execute the program, such as a control unit of a motor vehicle, to the method according to the invention, comprising the steps: establishing a communication link between the motor vehicle and a mobile terminal ; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred configurations of the program correspond to the embodiments described above with reference to the motor vehicle according to the invention.
Ein weiterer Aspekt der Erfindung betrifft ein computerlesbares Speichermedium, umfassend Befehle, die bei der Ausführung durch einen Computer, wie beispielsweise eine Steuereinheit eines Kraftfahrzeugs, diesen veranlassen, das erfindungsgemäße Verfahren, umfassend die Schritte: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte, auszuführen. Bevorzugte Ausgestaltungen des Speichermediums entsprechen den oben mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a computer-readable storage medium, comprising commands that cause it to be executed by a computer, such as a control unit of a motor vehicle, to the method according to the invention, comprising the steps: establishing a communication link between the motor vehicle and a mobile terminal; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred configurations of the storage medium correspond to the embodiments described above with reference to the motor vehicle according to the invention.
Die verschiedenen in dieser Anmeldung genannten Ausführungsformen der Erfindung sind, sofern im Einzelfall nicht anders ausgeführt, mit Vorteil miteinander kombinierbar.Unless otherwise stated in the individual case, the various embodiments of the invention mentioned in this application can advantageously be combined with one another.
Die Erfindung wird nachfolgend in Ausführungsbeispielen anhand der zugehörigen Zeichnungen erläutert. Es zeigen:
-
1 eine schematische Darstellung eines erfindungsgemäßen Systems aus einem erfindungsgemäßen Kraftfahrzeugs und einem erfindungsgemäßen mobilen Endgerät gemäß einer Ausführungsform; und -
2 eine schematische Darstellung eines erfindungsgemäßen Verfahrens gemäß einer Durchführungsform
-
1 a schematic representation of a system according to the invention from a motor vehicle according to the invention and a mobile terminal according to the invention according to one embodiment; and -
2nd is a schematic representation of a method according to the invention according to an embodiment
Das Kraftfahrzeug
Das Kraftfahrzeug weist ferner ein erstes Kommunikationsmodul
Darüber hinaus ist das erste Kommunikationsmodul
Das Kraftfahrzeug
Zumindest ein Teil der zweiten Sensoren
Das Kraftfahrzeug
Das mobile Endgerät weist eine zweite Steuereinheit
In einem ersten Schritt
BezugszeichenlisteReference symbol list
- 1010th
- KraftfahrzeugMotor vehicle
- 1111
- erster Sensorfirst sensor
- 1212
- zweiter Sensorsecond sensor
- 1313
- dritter Sensorthird sensor
- 2020th
- KommunikationsmodulCommunication module
- 2121st
- SpeicherStorage
- 2222
- TransponderTransponder
- 3030th
- FahrsystemDriving system
- 3131
- SpeicherStorage
- 3232
- NavigationsmodulNavigation module
- 4040
- SteuereinheitControl unit
- 4141
- SpeicherStorage
- 4242
- CPUCPU
- 5151
- vierter Sensorfourth sensor
- 5252
- fünfter Sensorfifth sensor
- 5353
- sechster Sensorsixth sensor
- 6161
- Satellit satellite
- 7070
- mobiles Endgerätmobile device
- 8080
- SteuereinheitControl unit
- 8181
- SpeicherStorage
- 8282
- CPUCPU
- 9090
- KommunikationsmodulCommunication module
- 9191
- TransponderTransponder
- 9292
- SpeicherStorage
- 9595
- GPS SensorGPS sensor
- 9696
- Kameracamera
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018221186.8A DE102018221186A1 (en) | 2018-12-07 | 2018-12-07 | Autonomous parking procedure |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018221186.8A DE102018221186A1 (en) | 2018-12-07 | 2018-12-07 | Autonomous parking procedure |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102018221186A1 true DE102018221186A1 (en) | 2020-06-10 |
Family
ID=70776395
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102018221186.8A Pending DE102018221186A1 (en) | 2018-12-07 | 2018-12-07 | Autonomous parking procedure |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102018221186A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111891119A (en) * | 2020-06-28 | 2020-11-06 | 东风汽车集团有限公司 | Automatic parking control method and system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102014200611A1 (en) * | 2014-01-15 | 2015-07-16 | Robert Bosch Gmbh | Method for the autonomous parking of a vehicle, driver assistance device for carrying out the method, and vehicle with the driver assistance device |
DE102015210118A1 (en) * | 2015-06-02 | 2016-12-08 | Volkswagen Aktiengesellschaft | Method and device for supporting the parking out of a vehicle |
DE102015223471A1 (en) * | 2015-11-26 | 2017-06-01 | Bayerische Motoren Werke Aktiengesellschaft | System for parking a vehicle |
-
2018
- 2018-12-07 DE DE102018221186.8A patent/DE102018221186A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102014200611A1 (en) * | 2014-01-15 | 2015-07-16 | Robert Bosch Gmbh | Method for the autonomous parking of a vehicle, driver assistance device for carrying out the method, and vehicle with the driver assistance device |
DE102015210118A1 (en) * | 2015-06-02 | 2016-12-08 | Volkswagen Aktiengesellschaft | Method and device for supporting the parking out of a vehicle |
DE102015223471A1 (en) * | 2015-11-26 | 2017-06-01 | Bayerische Motoren Werke Aktiengesellschaft | System for parking a vehicle |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111891119A (en) * | 2020-06-28 | 2020-11-06 | 东风汽车集团有限公司 | Automatic parking control method and system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102019211681B4 (en) | Method of a vehicle for automated parking | |
EP3204279B1 (en) | Method for operating an automatically driven, driverless motor vehicle and monitoring system | |
DE102019100559A1 (en) | METHOD AND SYSTEMS FOR SUPPORTING THE OPERATION OF A ROAD VEHICLE WITH A FLIGHT DROME | |
DE102019112002A1 (en) | SYSTEMS AND METHOD FOR THE AUTOMATIC DETECTION OF PENDING FEATURES | |
DE102018110425A1 (en) | METHOD AND SYSTEMS FOR LIDAR SPOT CLOUD ANOMALIES | |
DE102018120845A1 (en) | Method and device for monitoring an autonomous vehicle | |
DE102016115960A1 (en) | System and method for measuring object height for clearance height detection | |
EP3292423B1 (en) | Diagnostic method for a vision sensor of a vehicle and vehicle having a vision sensor | |
DE102019124152A1 (en) | CLUTCH SUPPORT SYSTEM | |
EP3830522B1 (en) | Method for estimating the quality of localisation in the self-localisation of a vehicle, device for carrying out the method, vehicle, and computer program | |
DE102018117526A1 (en) | Method, apparatus and system for wireless support of motor vehicle trailers in various maneuvers | |
EP2568310A2 (en) | Method, system and device for locating a vehicle relative to a predefined reference system | |
DE112018003827T5 (en) | Parking support system and method | |
DE102018120517A1 (en) | Detecting Track Conditions in Adaptive Cruise Control Systems | |
WO2017134228A1 (en) | Method for assisting autonomous travel of a motor vehicle, control device and parking assistance system | |
DE102018101513A1 (en) | Method for detecting garage parking spaces | |
DE102019121124A1 (en) | CLUTCH SUPPORT SYSTEM | |
DE102018116106A1 (en) | VIDEO TRANSMISSION FOR AN INCOMING LEFT-HANDING VEHICLE | |
DE102015210118B4 (en) | Method and device for supporting the parking out of a vehicle | |
WO2020225065A1 (en) | Method for ascertaining a vehicle trajectory | |
DE112018007967T5 (en) | VEHICLE CONTROL DEVICE, AUTOMATED VEHICLE TRAVEL DEVELOPMENT SYSTEM, VEHICLE CONTROL PROCEDURE AND PROGRAM | |
DE102018221186A1 (en) | Autonomous parking procedure | |
DE102014214327A1 (en) | Control device, vehicle, data delivery device and method | |
DE102022121938A1 (en) | SYSTEMS AND METHODS FOR ASSISTING A BATTERY ELECTRIC VEHICLE IN CARRYING OUT CHARGING AT A BATTERY CHARGER | |
DE102022102697A1 (en) | Parking assistance method and parking assistance device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication |