DE102018221186A1 - Autonomous parking procedure - Google Patents

Autonomous parking procedure Download PDF

Info

Publication number
DE102018221186A1
DE102018221186A1 DE102018221186.8A DE102018221186A DE102018221186A1 DE 102018221186 A1 DE102018221186 A1 DE 102018221186A1 DE 102018221186 A DE102018221186 A DE 102018221186A DE 102018221186 A1 DE102018221186 A1 DE 102018221186A1
Authority
DE
Germany
Prior art keywords
motor vehicle
image signal
mobile terminal
autonomous driving
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102018221186.8A
Other languages
German (de)
Inventor
Christoph ERFURTH
Dennis Loeben
Martin Dolejsi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102018221186.8A priority Critical patent/DE102018221186A1/en
Publication of DE102018221186A1 publication Critical patent/DE102018221186A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/0285Parking performed automatically

Abstract

Die Erfindung betrifft ein Verfahren zum autonomen Parken eines Kraftfahrzeug (10), welches zumindest ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem (30) und eine Steuereinheit (40) aufweist. Im erfindungsgemäßen Verfahren erfolgt zunächst das Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät (70). Ferner wird von dem Fahrsystem zumindest ein autonomes Fahrmanöver zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs (10) in eine Zielposition des Kraftfahrzeugs (10) ermittelt. Ferner wird über die Kommunikationsverbindung zumindest ein mittels einer Kamera (96) des mobilen Endgeräts (70) aufgenommenes erstes Bildsignal und/oder eine von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs (10) von dem mobilen Endgerät (70) empfangen. Anhand des empfangenen zumindest einen ersten Bildsignals und/oder der empfangenen Lagekarte wird schließlich das zumindest eine autonome Fahrmanöver angepasst.The invention relates to a method for autonomously parking a motor vehicle (10), which has at least one driving system (30) set up for autonomous driving of the motor vehicle and a control unit (40). In the method according to the invention, a communication link is first established between the motor vehicle and a mobile terminal (70). The driving system also determines at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle (10) into a target position of the motor vehicle (10). Furthermore, at least one first image signal recorded by a camera (96) of the mobile terminal (70) and / or a position map of the motor vehicle (10) determined by the mobile terminal on the basis of the at least one first image signal is transmitted by the mobile terminal (70) via the communication link. receive. Finally, the at least one autonomous driving maneuver is adapted on the basis of the received at least one first image signal and / or the received position map.

Description

Die Erfindung betrifft ein Verfahren zum autonomen Parken eines Kraftfahrzeugs, insbesondere ein Verfahren zum autonomen Ein-, Aus- oder Umparken eines Kraftfahrzeugs unter Verwendung eines mit dem Kraftfahrzeug in Kommunikationsverbindung stehenden mobilen Endgeräts, beispielsweise eines Smartphones. Die Erfindung betrifft ferner ein Kraftfahrzeug mit einer zum Durchführen des erfindungsgemäßen Verfahrens ausgebildeten Steuereinheit.The invention relates to a method for autonomously parking a motor vehicle, in particular to a method for autonomously parking, parking or relocating a motor vehicle using a mobile terminal that is in communication with the motor vehicle, for example a smartphone. The invention further relates to a motor vehicle with a control unit designed to carry out the method according to the invention.

Heutige Fahrzeuge verfügen bereits über eine Vielzahl von Assistenzsystemen, die den Fahrer in einer Vielzahl von Fahrsituationen computerbasiert unterstützen. Solche Assistenzsysteme können auf Sensoren zum Erfassen einer Vielzahl von Messdaten zurückgreifen, welche die Sinnesfähigkeiten des Menschen bei weitem übersteigen. Zudem übertrifft die Geschwindigkeit dieser Assistenzsysteme die menschliche Reaktionszeit signifikant. Bekannte Fahrerassistenzsysteme sind beispielsweise Spurhalteassistenten, Bremsassistenten bei Fußgängererkennung und Abstandsregeltempomaten, insbesondere für Stausituationen.Today's vehicles already have a variety of assistance systems that support the driver in a variety of driving situations using computer technology. Such assistance systems can use sensors to record a multitude of measurement data, which far exceed the sensory abilities of humans. In addition, the speed of these assistance systems significantly exceeds the human response time. Known driver assistance systems are, for example, lane keeping assistants, brake assistants for pedestrian detection and cruise control, particularly for traffic jams.

Durch Anwendung solcher Assistenzsysteme geht die Autonomie des Fahrers bezüglich seiner Fahrentscheidungen zunehmend auf das Fahrzeug beziehungsweise in diesem operierende Steuereinheiten über. Am Ende dieser Entwicklungen steht ein autonom fahrendes Fahrzeug, welches vollständig ohne Eingriffe eines Menschen manövrieren kann. Als Projektion von Fahrerassistenzsystemen bleibt autonomes Fahren dabei jedoch auf den vollautomatisierten Personentransport beschränkt. Darüber hinaus findet das autonome Fahren insbesondere Anwendung bei Parkvorgängen, bei denen die durch Sensoren ermöglichte exakte Kenntnis der Fahrzeugumgebung sowie das exakte Durchführen autonomer Fahrmanöver vorteilhaft sind.By using such assistance systems, the driver's autonomy with regard to his driving decisions is increasingly transferred to the vehicle or control units operating in it. At the end of these developments is an autonomously driving vehicle that can be maneuvered completely without human intervention. As a projection of driver assistance systems, autonomous driving remains limited to fully automated passenger transport. In addition, autonomous driving is used in particular in parking processes in which the exact knowledge of the vehicle environment made possible by sensors and the exact performance of autonomous driving maneuvers are advantageous.

Für das autonome Parken eines Fahrzeugs kommen bislang vor allem Sensoren des Fahrzeugs zum Einsatz, welche das Erfassen von Abständen ermöglichen. Anhand dieser erfassten Abstände lassen sich sowohl die Größe von Parkpositionen als auch die Freiheitsgrade des Fahrzeugs zum Manövrieren ermitteln. Gängige Einparkassistenten erfordern beispielsweise ein einmaliges Vorbeifahren an einer leeren Parklücke, um einen autonomen Einparkvorgang in diese Parklücke durchzuführen. Beim Aus- oder Umparken ist die ausschließliche Verwendung von Abstandssensoren jedoch weniger vorteilhaft, da diese zumeist durch nahe Objekte, wie benachbarte Kraftfahrzeuge oder Wände abgeschattet sind. Somit sind die Zahl der verfügbaren Sensoren sowie der erfassbare Bereiche deutlich reduziert.So far, sensors of the vehicle, which enable the detection of distances, have been used primarily for autonomous parking of a vehicle. Based on these recorded distances, both the size of parking positions and the degrees of freedom of the vehicle for maneuvering can be determined. Common parking assistants require, for example, a one-time drive past an empty parking space in order to carry out an autonomous parking process in this parking space. When parking or relocating, however, the exclusive use of distance sensors is less advantageous, since these are mostly shadowed by nearby objects, such as neighboring motor vehicles or walls. This significantly reduces the number of available sensors and the areas that can be detected.

Der Erfindung liegt nun die Aufgabe zugrunde, den Stand der Technik zu bereichern und ein Verfahren zum autonomen Parken eines Fahrzeugs vorzuschlagen, welches die dem Fahrzeug zur Verfügung stehenden Umgebungsinformation erhöht, um somit die Genauigkeit der durchgeführten Manöver sowie die Sicherheit des autonomen Parkens zu erhöhen.The invention is based on the object of enriching the state of the art and proposing a method for autonomous parking of a vehicle which increases the environmental information available to the vehicle, in order to increase the accuracy of the maneuvers carried out and the safety of the autonomous parking.

Die erfindungsgemäße Aufgabe wird gelöst durch ein Verfahren und ein Kraftfahrzeug gemäß den unabhängigen Patentansprüchen. Bevorzugte Weiterbildungen sind Gegenstand der jeweils rückbezogenen Unteransprüche.The object of the invention is achieved by a method and a motor vehicle according to the independent patent claims. Preferred further developments are the subject of the respective dependent claims.

Ein erster Aspekt der Erfindung betrifft ein Verfahren zum autonomen Parken, insbesondere zum autonomen Aus-, Um- und Einparken eines Kraftfahrzeug wie im Folgendem im Detail beschrieben. In dem erfindungsgemäßen Verfahren kommen ein Kraftfahrzeug sowie ein mobiles Endgerät, wie beispielsweise ein Smartphone, Tablet oder Smart-Gear, zum Einsatz. Diese sind dabei jeweils zum Durchführen des erfindungsgemäßen Verfahrens ausgebildet, wie im folgenden im Detail beschrieben. Insbesondere weist das Kraftfahrzeug ein erstes Kommunikationsmodul, ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem und eine erste Steuereinheit auf. Ferner weist das auch mobile Endgerät zumindest ein zweites Kommunikationsmodul und eine zweite Steuereinheit sowie zumindest eine zum Erfassen eines Bildsignals, insbesondere eines Graustufenbildsignals oder eines Farbbildsignals, ausgebildete Kamera auf.A first aspect of the invention relates to a method for autonomous parking, in particular for autonomously parking, relocating and parking a motor vehicle, as described in detail below. A motor vehicle and a mobile terminal, such as a smartphone, tablet or smart gear, are used in the method according to the invention. These are each designed to carry out the method according to the invention, as described in detail below. In particular, the motor vehicle has a first communication module, a driving system set up for autonomous driving of the motor vehicle and a first control unit. Furthermore, the mobile terminal also has at least one second communication module and a second control unit and at least one camera designed to capture an image signal, in particular a grayscale image signal or a color image signal.

Unter Einsatz der entsprechenden Komponenten des Fahrzeugs und des mobilen Endgeräts erfolgt in dem erfindungsgemäßen Verfahren das Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und dem mobilen Endgerät, insbesondere zwischen der ersten Steuereinheit und der zweiten Steuereinheit mittels dem ersten Kommunikationsmodul und dem zweiten Kommunikationsmodul. Ferner erfolgt in dem erfindungsgemäßen Verfahren das Ermitteln zumindest eines autonomen Fahrmanövers, bevorzugt einer Mehrzahl autonomer Fahrmanöver, zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs. Das Ermitteln des zumindest einen Fahrmanövers erfolgt dabei vor oder nach dem Herstellen der Kommunikationsverbindung. Bevorzugt erfolgt das Ermitteln des zumindest einen Fahrmanövers gemäß dem Stand der Technik, beispielsweise vor dem Herstellen der Kommunikationsverbindung.Using the corresponding components of the vehicle and the mobile terminal, the method according to the invention establishes a communication link between the motor vehicle and the mobile terminal, in particular between the first control unit and the second control unit by means of the first communication module and the second communication module. Furthermore, in the method according to the invention, at least one autonomous driving maneuver, preferably a plurality of autonomous driving maneuvers, is ascertained for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle. The at least one driving maneuver is ascertained before or after the communication connection is established. The at least one driving maneuver is preferably determined in accordance with the prior art, for example before the communication connection is established.

Gemäß einer ersten Durchführungsform des erfindungsgemäßen Verfahrens wird ferner zumindest ein mittels einer Kamera des mobilen Endgeräts aufgenommenes erstes Bildsignal empfangen. Dabei handelt es sich bevorzugt um ein Graustufenbildsignal oder Farbbildsignal, welches von der Kamera, insbesondere von einer Fotokamera des Smartphones, erfasst wurde. Bevorzugt wird eine Mehrzahl erster Bildsignale, insbesondere eine zeitliche Abfolge von ersten Bildsignalen, empfangen. Alternativ wird ein Videosignal als eine Abfolge erster Bildsignale von dem mobilen Endgerät empfangen. In einer alternativen Durchführungsform des erfindungsgemäßen Verfahrens wird von dem mobilen Endgerät eine anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs empfangen. Gemäß dieser Durchführungsform wird die Lagekarte des Kraftfahrzeug im Smartphone ermittelt. Der Empfang des zumindest einen Bildsignals und/oder der Empfang der Lagekarte erfolgt dabei bevorzugt über die zuvor hergestellte Kommunikationsverbindung, beispielsweise eine Bluetooth, WLNA oder Mobilfunkverbindung zwischen den Kommunikationsmodulen von Fahrzeug und Endgerät.According to a first embodiment of the method according to the invention, at least one first image signal recorded by means of a camera of the mobile terminal is also received. This is preferably a grayscale image signal or color image signal, which was recorded by the camera, in particular by a photo camera of the smartphone. A plurality of first image signals, in particular a chronological sequence of first image signals, are preferably received. Alternatively, a video signal is received as a sequence of first image signals from the mobile terminal. In an alternative embodiment of the method according to the invention, the mobile terminal receives a location map of the motor vehicle determined on the basis of the at least one first image signal. According to this embodiment, the location map of the motor vehicle is determined in the smartphone. The at least one image signal and / or the location map are preferably received via the previously established communication connection, for example a Bluetooth, WLNA or mobile radio connection between the communication modules of the vehicle and the terminal.

Im erfindungsgemäßen Verfahren erfolgt ferner das Anpassen des zumindest einen autonomen Fahrmanövers, bevorzugt der Mehrzahl autonomer Fahrmanöver, anhand des empfangenen zumindest einen ersten Bildsignals sowie gegebenenfalls anhand der empfangenen Lagekarte. Im erfindungsgemäßen Verfahren wird mithin die Kamera eines mobilen Endgeräts genutzt, um eine Umgebung des Kraftfahrzeugs und/oder das Kraftfahrzeug selbst zu erfassen. Die so erfassten Daten werden im erfindungsgemäßen Verfahren sodann zur verbesserten Durchführung des autonomen Parkvorgangs verwendet. Erfindungsgemäß wird somit ein mobiles Endgerät, welches gegebenenfalls bereits anderweitig als Fernbedienung für autonome Parkfunktionen verwendet wird, fermer für die Verbesserung der Datenbasis des autonomen Parkens genutzt. Indem dazu zumindest eine Smartphone-interne Kamera genutzt wird, stehen insbesondere aus einer zusätzlichen Perspektive aufgenommene hochaufgelöste Bilddaten der Fahrzeugumgebung zur Verfügung. Diese können auf vielfältige Weise genutzt werden, um das autonome Fahren zu verbessern, wie im Folgenden im Detail beschrieben wird, insbesondere jedoch für die Absicherung des Umfelds des Kraftfahrzeugs. Hierzu werden bevorzugt bekannte Verfahren zur Bildverarbeitung, Bildsegmentierung und/oder Bilderkennung eingesetzt.In the method according to the invention, the at least one autonomous driving maneuver, preferably the plurality of autonomous driving maneuvers, is further adapted on the basis of the received at least one first image signal and, if appropriate, on the basis of the received position map. In the method according to the invention, the camera of a mobile terminal is therefore used to capture the surroundings of the motor vehicle and / or the motor vehicle itself. The data recorded in this way are then used in the method according to the invention for improved implementation of the autonomous parking process. According to the invention, a mobile terminal, which may already be used elsewhere as a remote control for autonomous parking functions, is also used to improve the database of autonomous parking. By using at least one smartphone-internal camera for this purpose, high-resolution image data of the vehicle environment recorded in particular from an additional perspective are available. These can be used in a variety of ways to improve autonomous driving, as will be described in detail below, but in particular for protecting the environment of the motor vehicle. Known methods for image processing, image segmentation and / or image recognition are preferably used for this purpose.

Das erfindungsgemäße Verfahren erhöht somit die Datenbasis für das Durchführen eines automatischen Parkvorgangs, wobei besonders vorteilhaft ausgenutzt wird, dass ein Nutzer sein Smartphone intuitiv oder bewusst auf besonders relevante Bereiche der Umgebung richtet. Ebenfalls kann ausgenutzt werden, dass der Nutzer sein Smartphone über die Umgebung des Fahrzeugs schweifen lässt. Die Intelligenz des Nutzers des mobilen Endgeräts kommt in dem erfindungsgemäß Verfahren somit ebenso vorteilhaft zum Tragen, wie die in dem mobilen Endgerät vorhandene mindestens eine Kamera. Darüber hinaus ermöglicht das erfindungsgemäße Verfahren das Erfassen von Bereichen, die sich für fahrzeugeigene Kameras in einem toten Winkel befinden. Dies ist insbesondere bei der Verwendung des erfindungsgemäßen Verfahrens für Kraftfahrzeug mit Anhängern vorteilhaft.The method according to the invention thus increases the database for carrying out an automatic parking process, with particular advantage being taken of the fact that a user intuitively or deliberately points his smartphone at particularly relevant areas of the environment. It can also be exploited that the user sweeps his smartphone over the surroundings of the vehicle. The intelligence of the user of the mobile terminal is thus used in the method according to the invention just as advantageously as the at least one camera present in the mobile terminal. In addition, the method according to the invention enables the detection of areas which are in a blind spot for vehicle-own cameras. This is particularly advantageous when using the method according to the invention for motor vehicles with trailers.

Im Rahmen der vorliegenden Erfindung umfasst das autonome Parken, insbesondere das autonome Ein-, Aus- oder Umparken eines Fahrzeugs, das autonome Fahren beziehungsweise Rangieren des Fahrzeugs von einer aktuellen Eigenposition hin zu einer Zielposition. Bevorzugt ist die Zielposition dabei eine geeignete Position zum Ankoppeln eines Anhängers, also eine Position an der das Fahrzeug für den Zweck des Ankoppelns parken soll. Mit anderen Worten umfasst das Anpassen des zumindest einen autonomen Fahrmanövers bevorzugt das Ermitteln einer optimalen Position zum Koppeln eines Anhängers, das heißt einer optimale Position zum Verbinden einer Anhängerkupplung des Kraftfahrzeugs mit einem Kupplungssystem des Anhängers (Anhängerkopplungsassistent). Hierbei wird vorteilhaft ausgenutzt, dass mit dem zumindest einen Bildsignal der Bereich der Anhängerkupplung, der gegebenenfalls von fahrzeugeigenen Kameras nicht erfassbar ist, sowie der Bereich des Kupplungssystems mittels der zumindest einen Kamera des mobilen Endgeräts mit hoher Genauigkeit erfassbar sind.In the context of the present invention, autonomous parking, in particular the autonomous parking, parking or relocating of a vehicle, includes autonomous driving or maneuvering of the vehicle from a current own position to a target position. The target position is preferably a suitable position for coupling a trailer, that is to say a position at which the vehicle is to be parked for the purpose of coupling. In other words, adapting the at least one autonomous driving maneuver preferably includes determining an optimal position for coupling a trailer, that is to say an optimal position for connecting a trailer coupling of the motor vehicle to a coupling system of the trailer (trailer coupling assistant). In this case, use is advantageously made of the fact that with the at least one image signal the area of the trailer coupling, which may not be detectable by the vehicle's own cameras, and the area of the coupling system can be detected with high accuracy by means of the at least one camera of the mobile terminal.

Ebenfalls bevorzugt ist die Zielposition eine geeignete Position zum Parken des Anhängers, also eine Position an der das Fahrzeug für den Zweck des Abkoppelns des Anhängers parken soll. Ferner bevorzugt ist die Zielposition eine geeignete Position zum Parken des Fahrzeugs und des Anhängers, wobei Fahrzeug und Anhänger auch beim Parken verbunden bleiben (Anhängerrangierassistent). Hierbei wird vorteilhaft ausgenutzt, dass mit dem zumindest einen Bildsignal ein Bereich hinter dem Anhänger, der gegebenenfalls von fahrzeugeigenen Kameras nicht erfassbar ist, mittels der Kamera des mobilen Endgeräts problemlos erfassbar ist.
In einer ferner bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens werden einem Nutzer auf dem mobilen Endgerät Anleitungsinformationen angezeigt, die angeben welche Umgebungsbereiche für das Fahrzeug und ein bestimmtes Parkmanöver von Interesse sind. Besonders bevorzugt werden diese Informationen vom Fahrzeug anhand des zumindest einen ermittelten autonomen Fahrmanövers zum Rangieren von der aktuellen Eigenposition des Kraftfahrzeugs zur Zielposition des Kraftfahrzeugs ermittelt und an das mobile Endgerät übermittelt. Das mobile Endgerät stellt diese Informationen bevorzugt im Rahmen einer geeigneten Anwendung dar. Der Nutzer wird so angeleitet, mit der zumindest einen Kamera genau die Umgebungsbereiche zu erfassen, die für das ermittelte Parkmanöver von besonderem Interesse sind und daher besonders zum Anpassen des Parkmanövers geeignet sind. Derartige Bereiche sind beispielsweise tote Winkel des Fahrzeugs und/oder Bereiche einer Anhängerkupplung und/oder Bereiche hinter einem verbundenen Anhänger.
The target position is likewise preferably a suitable position for parking the trailer, that is to say a position at which the vehicle is to park for the purpose of uncoupling the trailer. The target position is furthermore preferably a suitable position for parking the vehicle and the trailer, the vehicle and trailer also remaining connected when parking (trailer maneuvering assistant). In this case, use is advantageously made of the fact that with the at least one image signal, an area behind the trailer, which may not be detectable by the vehicle's own cameras, can be easily detected by the camera of the mobile terminal.
In a further preferred embodiment of the method according to the invention, instruction information is displayed to the user on the mobile terminal, which information indicates which surrounding areas are of interest to the vehicle and a specific parking maneuver. This information is particularly preferably determined by the vehicle on the basis of the at least one determined autonomous driving maneuver for maneuvering from the current own position of the motor vehicle to the target position of the motor vehicle and transmitted to the mobile terminal. The mobile terminal device preferably displays this information in the context of a suitable application. The user is instructed to use the at least one camera to pinpoint the surrounding areas capture that are of particular interest for the determined parking maneuver and are therefore particularly suitable for adapting the parking maneuver. Such areas are, for example, blind spots of the vehicle and / or areas of a trailer coupling and / or areas behind a connected trailer.

In einer besonders bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens empfängt das Fahrzeug zumindest ein erstes Bildsignal von dem mobilen Endgerät. In dieser Durchführungsform ermittelt das Fahrzeug, insbesondere eine entsprechend ausgebildete Steuereinheit des Fahrzeugs anhand des zumindest einen empfangenen ersten Bildsignals eine Lagekarte. Bevorzugt wird die Lagekarte anhand einer Mehrzahl empfangener erster Bildsignale ermittelt. Die Lagekarte ist dabei eine Repräsentation der Umgebung des Fahrzeugs in einem von der Steuereinheit des Fahrzeugs verarbeitungsbaren Format. Bevorzugt wird die Lagekarte ferner anhand von Informationen zur Eigenposition des Fahrzeugs, zur Zielposition des autonomen Parkvorgangs, und zum zumindest einen Fahrmanöver ermittelt. Besonders bevorzugt verknüpft die Lagekarte Informationen zu einem Fahrschlauch des Fahrzeugs von dessen Eigenposition zur Zielposition des zumindest einen Fahrmanövers mit Informationen zur Umgebung des Fahrzeugs, insbesondere mit Informationen zu zumindest einem statischen oder dynamischen Hindernis in der Umgebung des Fahrzeugs. Gemäß dieser Durchführungsform erfolgt ferner ein Anpassen des zumindest einen Fahrmanövers anhand der ermittelten Lagekarte, wie im Folgenden im Detail beschrieben wird. Das Anpassen betrifft insbesondere das Unterbrechen des Manövrierens sowie das Nachjustieren der Zielposition.In a particularly preferred embodiment of the method according to the invention, the vehicle receives at least a first image signal from the mobile terminal. In this embodiment, the vehicle, in particular a correspondingly designed control unit of the vehicle, uses the at least one received first image signal to determine a position map. The location map is preferably determined on the basis of a plurality of received first image signals. The location map is a representation of the surroundings of the vehicle in a format that can be processed by the control unit of the vehicle. The location map is also preferably determined on the basis of information about the vehicle's own position, the target position of the autonomous parking process, and the at least one driving maneuver. The position map particularly preferably links information about a driving tube of the vehicle from its own position to the target position of the at least one driving maneuver with information about the surroundings of the vehicle, in particular with information about at least one static or dynamic obstacle in the surroundings of the vehicle. According to this embodiment, the at least one driving maneuver is also adapted based on the determined position map, as will be described in detail below. The adjustment affects in particular the interruption of maneuvering and the readjustment of the target position.

Gemäß einer besonders bevorzugten Durchführungsform des erfindungsgemäßen Verfahrens ist die empfangene oder ermittelte Lagekarte eine statische oder dynamische dreidimensionale Repräsentation einer Umgebung des Kraftfahrzeugs ist. Mit anderen Worten enthält die Lagekarte dreidimensionale Informationen zum Fahrzeug selbst sowie zu zumindest einem in der Umgebung des Fahrzeugs befindlichen Hindernis. Die dreidimensionalen Informationen umfassen dabei bevorzugt drei kartesische Koordinaten des Fahrzeugs und der Hindernisse. Zum Erstellen einer dreidimensionalen Lagekarte sind zumindest zwei Bildsignale der Umgebung des Fahrzeugs aus zwei verschiedenen Blickwinkeln notwendig, um die notwendige Parallaxe-Information zum Erstellen einer dreidimensionalen Lagekarte zu ermitteln.According to a particularly preferred embodiment of the method according to the invention, the position map received or ascertained is a static or dynamic three-dimensional representation of an environment of the motor vehicle. In other words, the location map contains three-dimensional information about the vehicle itself and about at least one obstacle in the area surrounding the vehicle. The three-dimensional information preferably includes three Cartesian coordinates of the vehicle and the obstacles. To create a three-dimensional location map, at least two image signals of the surroundings of the vehicle from two different viewing angles are necessary in order to determine the necessary parallax information for creating a three-dimensional location map.

Gemäß einer ersten Durchführungsform wird die dreidimensionale Repräsentation anhand einer Mehrzahl mittels der Monokamera des mobilen Endgeräts aus verschiedenen Blickwinkeln aufgenommenen ersten Bildsignalen ermittelt. Hierzu kann dem Nutzer beispielsweise eine Anleitung angezeigt werden, wie er die Mehrzahl von Bildsignalen aufzunehmen hat. Die ersten Bildsignale aus verschiedenen Blickwinkeln werden dann an das Fahrzeug übermittelt oder es wird daraus die dreidimensionale Repräsentation im mobilen Endgerät ermittelt. Gemäß einer zweiten Durchführungsform weist das mobile Endgerät bereits zumindest eine Stereokamera auf und ist somit selbst zum Erfassen von dreidimensionalen Bildern eingerichtet. Zumindest ein erstes stereoskopisches Bildsignal wird dann an das Fahrzeug übermittelt oder es wird daraus die dreidimensionale Repräsentation im mobilen Endgerät ermittelt. Gemäß einer dritten Durchführungsform wird die dreidimensionale Repräsentation anhand zumindest eines mittels der Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und zumindest eines mittels einer Kamera des Kraftfahrzeugs aufgenommenen zweiten Bildsignals ermittelt. Dabei sind das erste Bildsignal und das zweite Bildsignal zwangsläufig aus verschiedenen Perspektiven aufgenommen. Das erste Bildsignal wird dann an das Fahrzeug übermittelt und dort wird aus diesem und dem zweiten Bildsignal die dreidimensionale Repräsentation ermittelt.According to a first embodiment, the three-dimensional representation is determined on the basis of a plurality of first image signals recorded from different angles by means of the mono camera of the mobile terminal. For this purpose, the user can be shown, for example, instructions on how to record the plurality of image signals. The first image signals from different points of view are then transmitted to the vehicle or the three-dimensional representation in the mobile terminal is determined therefrom. According to a second embodiment, the mobile terminal already has at least one stereo camera and is therefore itself set up for capturing three-dimensional images. At least a first stereoscopic image signal is then transmitted to the vehicle or the three-dimensional representation in the mobile terminal is determined therefrom. According to a third embodiment, the three-dimensional representation is determined on the basis of at least one first image signal recorded by the camera of the mobile terminal and at least one second image signal recorded by a camera of the motor vehicle. The first image signal and the second image signal are necessarily recorded from different perspectives. The first image signal is then transmitted to the vehicle and the three-dimensional representation is determined there from this and the second image signal.

Die oben beschriebene dritte Durchführungsform des erfindungsgemäßen Verfahrens ist besonderes vorteilhaft, da sie die Ausnutzung aller bereits vorhandener Hardware umfasst. Ferner vorteilhaft ist, dass sich die Perspektiven des ersten und zweiten Bildsignals in der Regel deutlich unterscheiden. Somit ergibt sich ein besonderes hoher Informationsgehalt aus der Verknüpfung des ersten Bildsignals und des zweiten Bildsignals. Dabei stellt sich jedoch die Frage, wie die Verknüpfung des ersten und des zweiten Bildsignals erfolgt. Gemäß einer bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand erster GPS Daten des mobilen Endgeräts und zweiter GPS Daten des Kraftfahrzeugs. Anhand dieser GPS Daten und bevorzugt weiterer Daten zur Ausrichtung der Kamera im Fahrzeug und/oder zu Lageinformationen des mobilen Endgeräts lassen sich die Bildsignale zueinander in Beziehung setzen.The third embodiment of the method according to the invention described above is particularly advantageous since it includes the use of all the hardware that is already present. It is also advantageous that the perspectives of the first and second image signals generally differ significantly. A particularly high information content thus results from the combination of the first image signal and the second image signal. However, the question arises as to how the first and second image signals are linked. According to a preferred embodiment, the at least one first image signal and the at least one second image signal are linked for three-dimensional representation using first GPS data of the mobile terminal and second GPS data of the motor vehicle. On the basis of this GPS data and preferably further data on the alignment of the camera in the vehicle and / or on position information of the mobile terminal, the image signals can be related to one another.

Gemäß einer ferner bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand eines in dem ersten Bildsignal identifizierten Teils des Kraftfahrzeugs und Raumlagedaten des Kraftfahrzeugs. Beispielsweise wird in dem ersten Bildsignal ein Nummernschild oder ein anderer Marker des Kraftfahrzeugs erkannt. Anhand von Informationen zur relativen Lage des Nummernschilds (oder anderen Markers) und der im Fahrzeug befindlichen Kamera, lassen sich die ersten und zweiten Bildsignale überlagern.According to a further preferred embodiment, the linking of the at least one first image signal and the at least one second image signal for three-dimensional representation takes place on the basis of a part of the motor vehicle identified in the first image signal and spatial position data of the motor vehicle. For example, a license plate or another marker of the motor vehicle is recognized in the first image signal. The first and second image signals can be superimposed on the basis of information on the relative position of the license plate (or other marker) and the camera in the vehicle.

Gemäß einer ebenfalls bevorzugten Durchführungsform erfolgt das Verknüpfen des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand eines in dem ersten Bildsignal und dem zweiten Bildsignal identifizierten Bereichs von Interesse für das zumindest eine autonome Fahrmanöver. Mit anderen Worten wird eine in den Bildsignalen selbst enthaltene Information zur Überlagerung der Bildsignale genutzt. Dies setzt beispielsweise die Anwendung von Segmentierung und/oder Bilderkennung (beispielsweise mittels künstlicher Intelligenz, Kl) auf beide Bildsignale voraus. Bei den zur Überlagerung beziehungsweise Verknüpfung genutzten Information handelt es sich besonders bevorzugt um ein in beiden Bildsignalen enthaltenes Objekt, beispielsweise ein Fahrzeug, ein Verkehrsschild oder dergleichen. Insbesondere mittels Bilderkennung und/oder durch Anwendung des Strahlensatzes lassen sich anhand von Größenunterschieden und/oder perspektivischen Verzerrungen des identifizierten Objekts in beiden Bildsignalen die relative Lagen von der Kamera des mobilen Endgeräts und dem Objekt und die relative Lage von der Kamera des Fahrzeugs und dem Objekt bestimmen. Anhand dieser relativen Lagen lässt sich dann die relative Lage von den Kameras von Fahrzeug und mobilem Endgerät bestimmen. According to a likewise preferred embodiment, the linking of the at least one first image signal and the at least one second image signal for three-dimensional representation takes place on the basis of an area of interest identified in the first image signal and the second image signal for the at least one autonomous driving maneuver. In other words, information contained in the image signals themselves is used to superimpose the image signals. This requires, for example, the application of segmentation and / or image recognition (for example by means of artificial intelligence, KI) to both image signals. The information used for overlaying or linking is particularly preferably an object contained in both image signals, for example a vehicle, a traffic sign or the like. In particular by means of image recognition and / or by using the beam set, the relative positions of the camera of the mobile terminal and the object and the relative position of the camera of the vehicle and the object can be based on size differences and / or perspective distortions of the identified object in both image signals determine. On the basis of these relative positions, the relative position of the cameras of the vehicle and the mobile terminal can then be determined.

Das erfindungsgemäße Verfahren umfasst ferner bevorzugt den Schritt des Erkennens zumindest eines statischen Hindernisses für das zumindest eine autonome Fahrmanöver. Besonders bevorzugt wird im erfindungsgemäßen Verfahren in der statischen dreidimensionalen Repräsentation zumindest ein statisches Hindernis für das oder die Fahrmanöver von der Fahrzeugeigenposition in die Endposition ermittelt. Bei dem statischen Hindernis handelt es sich beispielsweise um einen schmalen Poller oder Pfosten, eine Bodenwelle oder ein tiefes Schlagloch, ein auf dem Boden liegender Gegenstand, ein Bordstein oder dergleichen. Im erfindungsgemäßen Verfahren erfolgt daraufhin bevorzugt ein Anpassen des zumindest einen autonomen Fahrmanövers unter Berücksichtigung des zumindest einen statischen Hindernisses. So wird beispielsweise ein Poller, Pfosten, eine Bodenwelle, ein Schlagloch oder ein auf dem Boden liegender Gegenstand umfahren. Ein erkannter Bordstein führt bevorzugt zum Anpassen des Zielorts des Parkvorgangs, beispielsweise weil erkannt wird, dass der Bordstein aufgrund seiner Höhe nicht überfahren werden kann.The method according to the invention preferably further comprises the step of recognizing at least one static obstacle for the at least one autonomous driving maneuver. Particularly preferably, in the method according to the invention, at least one static obstacle for the driving maneuver or maneuvers from the vehicle's own position to the end position is determined in the static three-dimensional representation. The static obstacle is, for example, a narrow bollard or post, a bump or a deep pothole, an object lying on the floor, a curb or the like. In the method according to the invention, the at least one autonomous driving maneuver is then preferably adjusted, taking into account the at least one static obstacle. For example, a bollard, post, a bump, a pothole or an object lying on the ground is avoided. A recognized curb preferably leads to the adaptation of the destination of the parking process, for example because it is recognized that the height of the curb cannot be driven over.

Ebenfalls bevorzugt umfasst das erfindungsgemäße Verfahren ferner den Schritt des Erkennens zumindest eines dynamischen Hindernisses für das zumindest eine autonome Fahrmanöver. Besonders bevorzugt wird im erfindungsgemäßen Verfahren in der dynamischen dreidimensionalen Repräsentation zumindest eines dynamischen Hindernisses für das zumindest eine autonome Fahrmanöver erkannt. Bei dem zumindest einen dynamischen Hindernis handelt es sich beispielsweise um einen Fahrradfahrer oder eine Person, beispielsweise ein Kind, oder ein Tier, das sich zeitweilig in dem oben erwähnten Fahrschlauch aufhält. Im erfindungsgemäßen Verfahren erfolgt dann bevorzugt ein Unterbrechen des zumindest einen autonomen Fahrmanövers für die Dauer des Bestehens des zumindest einen dynamischen Hindernisses. Bevorzugt werden die vorbeschriebenen Verfahrensschritte wiederholt ausgeführt, wobei das Erkennen des dynamischen Hindernisses aufbauend auf einer Mehrzahl, insbesondere einer zeitlichen Abfolge, erster und gegebenenfalls zweiter Bildsignale erfolgt. Besonders bevorzugt ist in diesem Zusammenhang (aber auch unabhängig davon) das zumindest eine erste Bildsignal Teil eines mittels einer Kamera des mobilen Endgeräts aufgenommenen Videosignals. Eine derartige Zeitreihe von ersten Bildsignalen ermöglicht vorteilhaft die vorbeschriebene Erkennung dynamischer Hindernisse im Verfahren.The method according to the invention also preferably comprises the step of recognizing at least one dynamic obstacle for the at least one autonomous driving maneuver. In the method according to the invention, it is particularly preferably recognized in the dynamic three-dimensional representation of at least one dynamic obstacle for the at least one autonomous driving maneuver. The at least one dynamic obstacle is, for example, a cyclist or a person, for example a child, or an animal that is temporarily in the driving tube mentioned above. In the method according to the invention, the at least one autonomous driving maneuver is then preferably interrupted for the duration of the existence of the at least one dynamic obstacle. The above-described method steps are preferably carried out repeatedly, the dynamic obstacle being recognized based on a plurality, in particular a chronological sequence, of first and optionally second image signals. In this context, it is particularly preferred (but also independently of this) that the at least one first image signal is part of a video signal recorded by means of a camera of the mobile terminal. Such a time series of first image signals advantageously enables the above-described detection of dynamic obstacles in the method.

Ebenfalls bevorzugt erfolgt im erfindungsgemäßen Verfahren ein Speichern des zumindest einen mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals zum Nachweis der Überwachung des zumindest einen autonomen Fahrmanövers. Das Speichern erfolgt dabei im mobilen Endgerät und/oder im Fahrzeug. Alternativ bevorzugt wird die Lagekarte, insbesondere die dreidimensionale Repräsentation gespeichert. Der Nachweis der Überwachung autonomer Fahrmanöver kann gegebenenfalls verpflichtend sein. Die im erfindungsgemäßen Verfahren ohnehin aufgenommenen ersten Bildsignale können somit unmittelbar als Nachweismaterial für die durchgeführte Überwachung genutzt werden.Likewise, in the method according to the invention, the at least one first image signal recorded by means of a camera of the mobile terminal is preferably stored in order to demonstrate the monitoring of the at least one autonomous driving maneuver. The storage takes place in the mobile device and / or in the vehicle. Alternatively, the location map, in particular the three-dimensional representation, is preferably stored. Evidence of monitoring autonomous driving maneuvers may be mandatory. The first image signals recorded anyway in the method according to the invention can thus be used directly as evidence material for the monitoring carried out.

Die Verfahrensschritte des erfindungsgemäßen Verfahrens können durch elektrische oder elektronische Bauteile oder Komponenten (Hardware), durch Firmware (ASIC) implementiert sein oder durch beim Ausführen eines geeigneten Programms (Software) verwirklicht werden. Ebenfalls bevorzugt wird das erfindungsgemäße Verfahren durch eine Kombination von Hardware, Firmware und/oder Software verwirklicht, beziehungsweise implementiert. Beispielsweise sind einzelne Komponenten zum Durchführen einzelner Verfahrensschritte als separat integrierter Schaltkreis ausgebildet oder auf einem gemeinsamen integrierten Schaltkreis angeordnet. Einzelne zum Durchführen einzelner Verfahrensschritte eingerichtete Komponenten sind ferner bevorzugt auf einem (flexiblen) gedruckten Schaltungsträger (FPCB/PCB), einem Tape Carrier Package (TCP) oder einem anderen Substrat angeordnet.The method steps of the method according to the invention can be implemented by electrical or electronic components or components (hardware), by firmware (ASIC) or by executing a suitable program (software). The method according to the invention is likewise preferably implemented or implemented by a combination of hardware, firmware and / or software. For example, individual components for performing individual method steps are designed as separately integrated circuits or arranged on a common integrated circuit. Individual components set up to carry out individual method steps are also preferably arranged on a (flexible) printed circuit carrier (FPCB / PCB), a tape carrier package (TCP) or another substrate.

Die einzelnen Verfahrensschritte des erfindungsgemäßen Verfahrens sind ferner bevorzugt als ein oder mehrere Prozesse ausgebildet, die auf einem oder mehreren Prozessoren in einem oder mehreren elektronischen Rechengeräten laufen und beim Ausführen von ein oder mehreren Computerprogrammen erzeugt werden. Die Rechengeräte sind dabei bevorzugt dazu ausgebildet, mit anderen Komponenten, beispielsweise einem Kommunikationsmodul, sowie ein oder mehreren Sensoren beziehungsweise Kameras zusammenzuarbeiten, um die hierin beschriebenen Funktionalitäten zu verwirklichen. Die Anweisungen der Computerprogramme sind dabei bevorzugt in einem Speicher abgelegt, wie beispielsweise einem RAM-Element. Die Computerprogramme können jedoch auch in einem nicht-flüchtigen Speichermedium, wie beispielsweise einer CD-ROM, einem Flash-Speicher oder dergleichen abgelegt sein.The individual method steps of the method according to the invention are furthermore preferably designed as one or more processes based on one or more processors run in one or more electronic computing devices and are generated when one or more computer programs are executed. The computing devices are preferably designed to work together with other components, for example a communication module, and one or more sensors or cameras in order to implement the functionalities described here. The instructions of the computer programs are preferably stored in a memory, such as a RAM element. However, the computer programs can also be stored in a non-volatile storage medium, such as a CD-ROM, a flash memory or the like.

Dem Fachmann ist ferner ersichtlich, dass die Funktionalitäten von mehreren Computern (Datenverarbeitungsgeräten) kombiniert oder in einem einzigen Gerät kombiniert sein können oder dass die Funktionalität von einem bestimmten Datenverarbeitungsgerät auf eine Vielzahl von Geräten verteilt vorliegen kann, um die Schritte des erfindungsgemäßen Verfahrens auszuführen, ohne vom erfindungsgemäßen Verfahren abzuweichen.It is also apparent to the person skilled in the art that the functionalities of a plurality of computers (data processing devices) can be combined or combined in a single device or that the functionality of a specific data processing device can be distributed over a large number of devices in order to carry out the steps of the method according to the invention without to deviate from the method according to the invention.

Ein weiterer Aspekt der Erfindung betrifft ein Kraftfahrzeug, insbesondere einen Personenkraftwagen mit Verbrennungs-, Elektro- oder Hybridmotor, welches zumindest einen zum Erfassen von Umgebungsdaten eingerichteten ersten Sensor, zumindest einen zum Erfassen von Fahrzeugdaten eingerichteten zweiten Sensor und ein Kommunikationsmodul, sowie ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem aufweist. Das Kommunikationsmodul weist bevorzugt einen Funk-, Mobilfunk-, WLAN-, und/oder Bluetooth-Transceiver oder alternative Drahtloskommunikationsgeräte auf.A further aspect of the invention relates to a motor vehicle, in particular a passenger car with a combustion, electric or hybrid motor, which has at least one first sensor set up to record environmental data, at least one second sensor set up to record vehicle data and a communication module, and one for autonomous driving of the motor vehicle equipped driving system. The communication module preferably has a radio, mobile radio, WLAN, and / or Bluetooth transceiver or alternative wireless communication devices.

Der zumindest eine erste Sensor ist dabei dazu ausgebildet, die Umgebung des Fahrzeugs betreffende Sensorsignale zu erfassen. Der zumindest eine zweite Sensor ist dabei dazu ausgebildet, das Fahrzeug selbst betreffende Sensorsignale zu erfassen. Das Kommunikationsmodul ist dabei dazu ausgebildet, das Kraftfahrzeug und/oder dessen Umgebung potentiell betreffende Informationen über ein Kommunikationsnetzwerk zu empfangen. Dabei versetzt ein mittels des zumindest einen ersten Sensors empfangenes Umgebungssignal das parkende Kraftfahrzeug bevorzugt in die Lage, sich über seine Umwelt zu informieren und bildet bevorzugt eine Vielzahl von Umweltinformationen ab. Ein mittels des zumindest einen zweiten Sensors empfangenes Zustandssignal versetzt das parkende Kraftfahrzeug bevorzugt in die Lage, sich über seinen Eigenzustand zu informieren und bildet dazu eine Vielzahl von Zustandsinformationen ab. Ein mittels des Kommunikationsmoduls empfangenes Signal ermöglicht den Empfang erster Bildsignale vom mobilen Endgerät.The at least one first sensor is designed to detect sensor signals relating to the surroundings of the vehicle. The at least one second sensor is designed to detect sensor signals relating to the vehicle itself. The communication module is designed to receive information potentially relevant to the motor vehicle and / or its surroundings via a communication network. An ambient signal received by means of the at least one first sensor preferably enables the parked motor vehicle to obtain information about its environment and preferably displays a large amount of environmental information. A state signal received by means of the at least one second sensor preferably enables the parked motor vehicle to obtain information about its own state and, for this purpose, displays a large number of state information. A signal received by means of the communication module enables the reception of first image signals from the mobile terminal.

Ferner weist das Kraftfahrzeug eine zum Durchführen des erfindungsgemäßen Verfahrens, wie obenstehend beschrieben, ausgebildete Steuereinheit auf. Die Steuereinheit ist insbesondere dafür eingerichtet, eine Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät herzustellen, zumindest ein autonomes Fahrmanöver zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs zu ermitteln, zumindest ein mittels einer Kamera des mobilen Endgeräts aufgenommenes erstes Bildsignal und/oder eine von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelte Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät zu empfangen, und das zumindest eine autonome Fahrmanöver anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte anzupassen.Furthermore, the motor vehicle has a control unit designed to carry out the method according to the invention, as described above. The control unit is in particular set up to establish a communication link between the motor vehicle and a mobile terminal, to determine at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle, at least one first image signal and recorded by a camera of the mobile terminal / or to receive a position map of the motor vehicle determined by the mobile terminal based on the at least one first image signal from the mobile terminal, and to adapt the at least one autonomous driving maneuver based on the received at least one first image signal and / or based on the received location map.

Gängige Kraftfahrzeuge weisen bereits heute eine Vielzahl von Sensoren auf, welche als erste Sensoren ständig verschiedene Umweltbedingungen, wie Außentemperatur, (Luft)Feuchtigkeit, etc. erfassen. Ferner können Fahrzeuge auch bereits zweite Sensoren, beispielsweise Lagesensoren einer Diebstahlwarnanlage, aufweisen. Moderne Fahrzeuge sind ferner mit leistungsfähigen Kommunikationsmodulen ausgestattet, die den Empfang von Informationen über eine Vielzahl von Kanälen ermöglichen. Das erfindungsgemäße Verfahren führt diese bereits vorhandenen Sensoren einer neuen vorteilhaften Verwendung zu.Current motor vehicles already have a large number of sensors which are the first sensors to continuously record various environmental conditions, such as outside temperature, (air) humidity, etc. Furthermore, vehicles can also already have second sensors, for example position sensors of an anti-theft alarm system. Modern vehicles are also equipped with powerful communication modules that enable the reception of information via a variety of channels. The method according to the invention leads these already existing sensors to a new advantageous use.

Das Fahrsystem des erfindungsgemäßen Kraftfahrzeugs ist bevorzugt dafür eingerichtet, zumindest ein autonomes Fahrmanöver/eine autonome Fahrt von der Eigenposition des Fahrzeugs zu einer Zielposition beziehungsweise Parkposition durchzuführen. Besonders bevorzugt ist das Fahrsystem zur vollständig automatischen Führung des Kraftfahrzeugs ausgebildet und kann die Längsführung sowie die Querführung des Kraftfahrzeugs steuern. Ferner bevorzugt kann das Fahrsystem auf den zumindest einen ersten Sensor und/oder auf den zumindest einen zweiten Sensor zum Bestimmen von Zustandsinformationen und/oder von Umgebungsinformationen des Kraftfahrzeugs zugreifen. Diese ersten und zweiten Sensoren sind somit bevorzugt von dem Fahrsystem und von der Steuereinheit nutzbar.The driving system of the motor vehicle according to the invention is preferably set up to carry out at least one autonomous driving maneuver / autonomous drive from the vehicle's own position to a target position or parking position. The driving system is particularly preferably designed for completely automatic guidance of the motor vehicle and can control the longitudinal guidance and the transverse guidance of the motor vehicle. Furthermore, the driving system can preferably access the at least one first sensor and / or the at least one second sensor for determining status information and / or environmental information of the motor vehicle. These first and second sensors can thus preferably be used by the driving system and by the control unit.

Ein weiterer Aspekt der Erfindung betrifft eine Steuereinheit, die dafür eingerichtet ist, mit zumindest einem ersten Sensor zum Erfassen von Umgebungsdaten eines Kraftfahrzeugs, mit zumindest einem zweiten Sensor zum Erfassen von Zustandsdaten des Kraftfahrzeugs und mit einem Kommunikationsmodul eines Kraftfahrzeugs sowie mit einem Fahrsystem zum autonomen Fahren des Kraftfahrzeugs zu kommunizieren und die ferner dafür eingerichtet ist, das erfindungsgemäße Verfahren durchzuführen. Bevorzugte Ausgestaltungen der Steuereinheit entsprechen den obenstehend mit Bezug zu dem erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a control unit which is set up with at least one first sensor for recording ambient data of a motor vehicle, with at least one second sensor for recording status data of the motor vehicle and with one Communication module of a motor vehicle and to communicate with a driving system for autonomous driving of the motor vehicle and which is further configured to carry out the method according to the invention. Preferred configurations of the control unit correspond to the embodiments described above with reference to the motor vehicle according to the invention.

Ein weiterer Aspekt der Erfindung betrifft ein Verfahren einer Steuereinheit eines Kraftfahrzeugs, welches zumindest einen zum Erfassen von Umgebungsdaten eingerichteten ersten Sensor, zumindest einen zum Erfassen von Zustandsdaten des Kraftfahrzeugs eingerichteten zweiten Sensor und ein Kommunikationsmodul, ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem, sowie die Steuereinheit aufweist, wobei das Verfahren zumindest die folgenden Schritte aufweist: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte. Bevorzugte Ausgestaltungen des Verfahrens entsprechen den obenstehend mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a method of a control unit of a motor vehicle, which has at least one first sensor set up for recording environmental data, at least one second sensor set up for recording status data of the motor vehicle and a communication module, a driving system set up for autonomous driving of the motor vehicle, and the Control unit, the method comprising at least the following steps: establishing a communication link between the motor vehicle and a mobile terminal; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred embodiments of the method correspond to the embodiments described above with reference to the motor vehicle according to the invention.

Ein weiterer Aspekt der Erfindung betrifft ein Computerprogramm, umfassend Befehle, die bei der Ausführung des Programms durch einen Computer, wie beispielsweise eine Steuereinheit eines Kraftfahrzeugs, diesen veranlassen, das erfindungsgemäße Verfahren, umfassend die Schritte: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte, auszuführen. Bevorzugte Ausgestaltungen des Programms entsprechen den obenstehend mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a computer program comprising commands which cause the computer to execute the program, such as a control unit of a motor vehicle, to the method according to the invention, comprising the steps: establishing a communication link between the motor vehicle and a mobile terminal ; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred configurations of the program correspond to the embodiments described above with reference to the motor vehicle according to the invention.

Ein weiterer Aspekt der Erfindung betrifft ein computerlesbares Speichermedium, umfassend Befehle, die bei der Ausführung durch einen Computer, wie beispielsweise eine Steuereinheit eines Kraftfahrzeugs, diesen veranlassen, das erfindungsgemäße Verfahren, umfassend die Schritte: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug und einem mobilen Endgerät; Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs in eine Zielposition des Kraftfahrzeugs; Empfang zumindest eines mittels einer Kamera des mobilen Endgeräts aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignal ermittelten Lagekarte des Kraftfahrzeugs von dem mobilen Endgerät; und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte, auszuführen. Bevorzugte Ausgestaltungen des Speichermediums entsprechen den oben mit Bezug zum erfindungsgemäßen Kraftfahrzeug beschriebenen Ausführungsformen.A further aspect of the invention relates to a computer-readable storage medium, comprising commands that cause it to be executed by a computer, such as a control unit of a motor vehicle, to the method according to the invention, comprising the steps: establishing a communication link between the motor vehicle and a mobile terminal; Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle into a target position of the motor vehicle; Receiving from the mobile terminal at least one first image signal recorded by a camera of the mobile terminal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal; and adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Preferred configurations of the storage medium correspond to the embodiments described above with reference to the motor vehicle according to the invention.

Die verschiedenen in dieser Anmeldung genannten Ausführungsformen der Erfindung sind, sofern im Einzelfall nicht anders ausgeführt, mit Vorteil miteinander kombinierbar.Unless otherwise stated in the individual case, the various embodiments of the invention mentioned in this application can advantageously be combined with one another.

Die Erfindung wird nachfolgend in Ausführungsbeispielen anhand der zugehörigen Zeichnungen erläutert. Es zeigen:

  • 1 eine schematische Darstellung eines erfindungsgemäßen Systems aus einem erfindungsgemäßen Kraftfahrzeugs und einem erfindungsgemäßen mobilen Endgerät gemäß einer Ausführungsform; und
  • 2 eine schematische Darstellung eines erfindungsgemäßen Verfahrens gemäß einer Durchführungsform
The invention is explained below in exemplary embodiments with reference to the accompanying drawings. Show it:
  • 1 a schematic representation of a system according to the invention from a motor vehicle according to the invention and a mobile terminal according to the invention according to one embodiment; and
  • 2nd is a schematic representation of a method according to the invention according to an embodiment

1 zeigt eine schematische Darstellung, insbesondere ein Blockdiagram eines beispielhaften Kraftfahrzeugs 10, insbesondere eines zweispurigen Kraftfahrzeugs mit Verbrennungs-, Elektro- oder Hybridmotor. Das Kraftfahrzeug 10 umfasst eine Vielzahl erster Sensoren, insbesondere einen ersten Sensor 11, einen zweiten Sensor 12, und einen dritten Sensor 13. Die ersten Sensoren 11, 12, 13 sind eingerichtet zum Erfassen von Umweltinformationen beziehungsweise Umgebungsdaten des Kraftfahrzeugs 10 und umfassen beispielsweise Temperatursensoren zum Erfassen einer Umgebungstemperatur, eine Kamera zum Erfassen eines Bildes einer das Kraftfahrzeug 10 unmittelbar umgebenden Umwelt, ein Mikrofon zum Erfassen von Geräuschen einer das Kraftfahrzeug 10 unmittelbar umgebenden Umwelt, Abstandssensoren wie beispielsweise Ultraschallsensoren zum Erfassen von Abständen zu das Kraftfahrzeug 10 umgebenden Objekten. Die ersten Sensoren 11, 12, 13 übertragen die von ihnen erfassten Umgebungssignale an eine erste Steuereinheit 40 des Kraftfahrzeugs 10. 1 shows a schematic representation, in particular a block diagram of an exemplary motor vehicle 10th , in particular a two-lane motor vehicle with a combustion, electric or hybrid engine. The car 10th comprises a large number of first sensors, in particular a first sensor 11 , a second sensor 12 , and a third sensor 13 . The first sensors 11 , 12 , 13 are set up to record environmental information or environmental data of the motor vehicle 10th and include, for example, temperature sensors for detecting an ambient temperature, a camera for recording an image of the motor vehicle 10th immediately surrounding Environment, a microphone for recording noise from the motor vehicle 10th immediately surrounding environment, distance sensors such as ultrasonic sensors for detecting distances to the motor vehicle 10th surrounding objects. The first sensors 11 , 12 , 13 transmit the environmental signals detected by them to a first control unit 40 of the motor vehicle 10th .

Das Kraftfahrzeug 10 weist ferner eine Mehrzahl zweiter Sensoren, insbesondere einen vierten Sensor 51, einen fünften Sensor 52, und einen sechsten Sensor 53 auf. Bei den zweiten Sensoren 51, 52 ,53 handelt es sich um Sensoren zum Ermitteln von das Kraftfahrzeug 10 selbst betreffenden Zustandsdaten, wie beispielsweise aktuelle Lage- und Bewegungsinformationen des Kraftfahrzeugs. Bei den zweiten Sensoren handelt es sich folglich beispielsweise um Geschwindigkeitssensoren, Beschleunigungssensoren, Neigungssensoren, Innenraumbewegungsmelder, Drucksensoren in den Fahrzeugsitzen oder dergleichen. Die zweiten Sensoren 51, 52, 53 übermitteln die von ihnen erfassten Zustandssignale an die erste Steuereinheit 40 des Kraftfahrzeugs 10. Darüber hinaus übermitteln die zweiten Sensoren 51, 52, 53 ihre Messergebnisse unmittelbar an ein Fahrsystem 30 vom Kraftfahrzeug.The car 10th also has a plurality of second sensors, in particular a fourth sensor 51 , a fifth sensor 52 , and a sixth sensor 53 on. With the second sensors 51 , 52 , 53 are sensors for determining the motor vehicle 10th status data itself, such as current position and movement information of the motor vehicle. The second sensors are consequently, for example, speed sensors, acceleration sensors, inclination sensors, interior motion detectors, pressure sensors in the vehicle seats or the like. The second sensors 51 , 52 , 53 transmit the status signals detected by them to the first control unit 40 of the motor vehicle 10th . In addition, the second sensors transmit 51 , 52 , 53 their measurement results directly to a driving system 30th from the motor vehicle.

Das Kraftfahrzeug weist ferner ein erstes Kommunikationsmodul 20 mit einem Speicher 21 und einem oder mehreren Transpondern beziehungsweise Sendeempfängern 22 auf. Bei den Transpondern 22 handelt es sich um einen Funk-, WLAN-, GPS- oder Bluetooth-Sendeempfänger oder dergleichen. Der Transponder kommuniziert mit dem internen Speicher 21 des ersten Kommunikationsmoduls 20, beispielsweise über einen geeigneten Datenbus. Mittels des Transponders 22 kann beispielsweise die aktuelle Position des Kraftfahrzeugs 10 durch Kommunikation mit einem GPS Satelliten 61 ermittelt und diese im internen Speicher 21 gespeichert werden. Ebenso kann mittels des Transponders 22 eine im Speicher 21 abgelegte Berechtigungsinformation an ein externes Kommunikationsmodul übermittelt werden. Das erste Kommunikationsmodul 20 kommuniziert auch mit der ersten Steuereinheit 40.The motor vehicle also has a first communication module 20th with a memory 21st and one or more transponders or transceivers 22 on. With the transponders 22 it is a radio, WLAN, GPS or Bluetooth transceiver or the like. The transponder communicates with the internal memory 21st of the first communication module 20th , for example via a suitable data bus. Using the transponder 22 can, for example, the current position of the motor vehicle 10th through communication with a GPS satellite 61 determined and this in the internal memory 21st get saved. Likewise, using the transponder 22 one in memory 21st stored authorization information can be transmitted to an external communication module. The first communication module 20th also communicates with the first control unit 40 .

Darüber hinaus ist das erste Kommunikationsmodul 20 dafür eingerichtet, mit einem mobilen Endgerät 70, beispielsweise einem persönlichen Kommunikationsgerät wie ein Smartphone oder ein Tablet eines Fahrers, Besitzers oder Halters des Kraftfahrzeugs 10 zu kommunizieren. Die Kommunikation erfolgt dabei insbesondere mit einem zweiten Kommunikationsmodul 90 des mobilen Endgeräts 70. Das zweite Kommunikationsmodul 90 weist dabei einen Speicher 92 und einen oder mehrere Transponder beziehungsweise Sendeempfängern 91 auf. Bei den Transpondern 91 handelt es sich um einen Funk-, WLAN-, GPS- oder Bluetooth-Sendeempfänger oder dergleichen. Der Transponder 91 kommuniziert mit dem internen Speicher 92 des zweiten Kommunikationsmoduls 90, beispielsweise über einen geeigneten Datenbus. Beispielsweise sind das erste und zweite Kommunikationsmodul 20, 90 dazu eingerichtet über ein UMTS (Universal Mobile Telecommunication Service) oder, LTE (Long Term Evolution) Mobilfunknetz miteinander zu kommunizieren. Die Kommunikation zwischen den Kommunikationsgeräten 20,90 ist dabei bevorzugt in eine entsprechende App eingebettet.In addition, the first communication module 20th set up with a mobile device 70 , for example a personal communication device such as a smartphone or a tablet of a driver, owner or holder of the motor vehicle 10th to communicate. Communication takes place in particular with a second communication module 90 of the mobile device 70 . The second communication module 90 has a memory 92 and one or more transponders or transceivers 91 on. With the transponders 91 it is a radio, WLAN, GPS or Bluetooth transceiver or the like. The transponder 91 communicates with the internal memory 92 of the second communication module 90 , for example via a suitable data bus. For example, the first and second communication modules 20th , 90 set up to communicate with each other via a UMTS (Universal Mobile Telecommunication Service) or, LTE (Long Term Evolution) cellular network. The communication between the communication devices 20, 90 is preferably embedded in a corresponding app.

Das Kraftfahrzeug 10 weist ferner das Fahrsystem 30 auf, das zum vollständig autonomen Fahrbetrieb, insbesondere zur Längs- und Querführung, des Kraftfahrzeugs 10 eingerichtet ist. Das Fahrsystem 30 weist ein Navigationsmodul 32 auf, das zum Berechnen von Routen zwischen einem Start- und einem Zielpunkt und zum Ermitteln der entlang dieser Route vom Kraftfahrzeug 10 durchzuführenden Manöver eingerichtet ist. Darüber hinaus umfasst das Fahrsystem 30 einen internen Speicher 31, beispielsweise für Kartenmaterialien, der mit dem Navigationsmodul 32 kommuniziert, beispielsweise über einen geeigneten Datenbus.The car 10th also shows the driving system 30th on that for fully autonomous driving, in particular for longitudinal and transverse guidance, of the motor vehicle 10th is set up. The driving system 30th has a navigation module 32 on that for calculating routes between a start and a destination and for determining the route along this route from the motor vehicle 10th maneuvers to be performed is set up. In addition, the driving system includes 30th an internal memory 31 , for example for map materials, with the navigation module 32 communicates, for example via a suitable data bus.

Zumindest ein Teil der zweiten Sensoren 51, 52, 53, des Kraftfahrzeugs übermittelt seine Messergebnisse direkt an das Fahrsystem 30. Bei diesen unmittelbar an das Fahrsystem übermittelten Daten handelt es sich insbesondere um aktuelle Lage- und Bewegungsinformationen des Kraftfahrzeugs. Diese werden bevorzugt von Geschwindigkeitssensoren, Beschleunigungssensoren, Neigungssensoren, etc. erfasst.At least part of the second sensors 51 , 52 , 53 , the motor vehicle transmits its measurement results directly to the driving system 30th . These data transmitted directly to the driving system are, in particular, current position and movement information of the motor vehicle. These are preferably detected by speed sensors, acceleration sensors, inclination sensors, etc.

Das Kraftfahrzeug 10 weist ferner eine erste Steuereinheit 40 auf, welche zum Durchführen der erfindungsgemäßen Verfahren eingerichtet ist. Hierzu verfügt die erste Steuereinheit 40 über einen internen Speicher 41 und eine CPU 42, welche miteinander kommunizieren, beispielsweise über einen geeigneten Datenbus. Darüber hinaus steht die erste Steuereinheit in Kommunikationsverbindung mit zumindest den ersten Sensoren 11, 12, 13, den zweiten Sensoren 51, 52, 53, dem ersten Kommunikationsmodul 20 und dem Fahrsystem 30, beispielsweise über eine oder mehrere jeweilige CAN-Verbindungen, eine oder mehrere jeweilige SPI-Verbindungen, oder andere geeignete Datenverbindungen.The car 10th also has a first control unit 40 which is set up to carry out the method according to the invention. For this purpose, the first control unit has 40 via an internal memory 41 and a CPU 42 which communicate with each other, for example via a suitable data bus. In addition, the first control unit is in communication with at least the first sensors 11 , 12 , 13 , the second sensors 51 , 52 , 53 , the first communication module 20th and the driving system 30th , for example via one or more respective CAN connections, one or more respective SPI connections, or other suitable data connections.

Das mobile Endgerät weist eine zweite Steuereinheit 80 auf, welche zum Durchführen der jeweiligen Schritte des erfindungsgemäßen Verfahrens eingerichtet ist. Hierzu verfügt die zweite Steuereinheit 80 über einen internen Speicher 81 und eine CPU 82, welche miteinander kommunizieren, beispielsweise über einen geeigneten Datenbus. Darüber hinaus steht die zweite Steuereinheit 80 in Kommunikationsverbindung mit zumindest einer Kamera 96 des mobilen Endgeräts, beispielsweise einer Monokamera oder einer Stereokamera 96. Ferner steht die zweite Steuereinheit 80 in Kommunikationsverbindung mit einem GPS Sensor 95 des mobilen Endgeräts. Die Kommunikationsverbindungen sind über eine oder mehrere jeweilige CAN-Verbindungen, SPI-Verbindungen, oder andere geeignete Datenverbindungen realisiert.The mobile terminal has a second control unit 80 which is set up to carry out the respective steps of the method according to the invention. For this purpose, the second control unit has 80 via an internal memory 81 and a CPU 82 which communicate with each other, for example via a suitable data bus. In addition, there is the second control unit 80 in communication with at least one camera 96 the mobile terminal, for example a mono camera or a stereo camera 96 . The second control unit is also located 80 in communication with a GPS sensor 95 of the mobile device. The communication connections are implemented via one or more respective CAN connections, SPI connections, or other suitable data connections.

2 zeigt ein schematisches Ablaufdiagramm eines vom erfindungsgemäßen Kraftfahrzeug 10 durchgeführten erfindungsgemäßen Verfahrens. 2nd shows a schematic flow diagram of a motor vehicle according to the invention 10th performed inventive method.

In einem ersten Schritt S100 des erfindungsgemäßen Verfahrens erfolgt das Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug 10 und einem mobilen Endgerät 70. In einem zweiten Schritt S200 erfolgt das Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs 10 in eine Zielposition des Kraftfahrzeugs 10. Die Reihenfolge der Schritte S100 und S200 ist beliebig. In einem dritten Schritt S300 des erfindungsgemäßen Verfahrens erfolgt der Empfang zumindest eines mittels einer Kamera 96 des mobilen Endgeräts 70 aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelten Lagekarte des Kraftfahrzeugs 10 von dem mobilen Endgerät 70. Schließlich erfolgt im einem vierten Schritt S400 des erfindungsgemäßen Verfahrens ein Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte.In a first step S100 In the method according to the invention, a communication link is established between the motor vehicle 10th and a mobile device 70 . In a second step S200 at least one autonomous driving maneuver for maneuvering is determined from a current own position of the motor vehicle 10th in a target position of the motor vehicle 10th . The order of the steps S100 and S200 is arbitrary. In a third step S300 In the method according to the invention, at least one is received by means of a camera 96 of the mobile device 70 recorded first image signal and / or a position map of the motor vehicle determined by the mobile terminal on the basis of the at least one first image signal 10th from the mobile device 70 . Finally, in a fourth step S400 of the method according to the invention adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map.

BezugszeichenlisteReference symbol list

1010th
KraftfahrzeugMotor vehicle
1111
erster Sensorfirst sensor
1212
zweiter Sensorsecond sensor
1313
dritter Sensorthird sensor
2020th
KommunikationsmodulCommunication module
2121st
SpeicherStorage
2222
TransponderTransponder
3030th
FahrsystemDriving system
3131
SpeicherStorage
3232
NavigationsmodulNavigation module
4040
SteuereinheitControl unit
4141
SpeicherStorage
4242
CPUCPU
5151
vierter Sensorfourth sensor
5252
fünfter Sensorfifth sensor
5353
sechster Sensorsixth sensor
6161
Satellit satellite
7070
mobiles Endgerätmobile device
8080
SteuereinheitControl unit
8181
SpeicherStorage
8282
CPUCPU
9090
KommunikationsmodulCommunication module
9191
TransponderTransponder
9292
SpeicherStorage
9595
GPS SensorGPS sensor
9696
Kameracamera

Claims (10)

Verfahren zum autonomen Parken eines Kraftfahrzeug (10) mit einem zum autonomen Fahren des Kraftfahrzeugs eingerichteten Fahrsystem (30) und einer Steuereinheit (40), das Verfahren aufweisend: Herstellen einer Kommunikationsverbindung zwischen dem Kraftfahrzeug (10) und einem mobilen Endgerät (70); Ermitteln zumindest eines autonomen Fahrmanövers zum Rangieren von einer aktuellen Eigenposition des Kraftfahrzeugs (10) in eine Zielposition des Kraftfahrzeugs (10); Empfang zumindest eines mittels einer Kamera (96) des mobilen Endgeräts (70) aufgenommenen ersten Bildsignals und/oder einer von dem mobilen Endgerät anhand des zumindest einen ersten Bildsignals ermittelten Lagekarte des Kraftfahrzeugs (10) von dem mobilen Endgerät (70); und Anpassen des zumindest eines autonomen Fahrmanövers anhand des empfangenen zumindest einen ersten Bildsignals und/oder anhand der empfangenen Lagekarte.Method for autonomously parking a motor vehicle (10) with a driving system (30) set up for autonomously driving the motor vehicle and a control unit (40), the method comprising: Establishing a communication link between the motor vehicle (10) and a mobile terminal (70); Determining at least one autonomous driving maneuver for maneuvering from a current own position of the motor vehicle (10) into a target position of the motor vehicle (10); Receiving from the mobile terminal (70) at least one first image signal recorded by means of a camera (96) of the mobile terminal (70) and / or a position map of the motor vehicle (10) determined by the mobile terminal based on the at least one first image signal; and Adapting the at least one autonomous driving maneuver on the basis of the received at least one first image signal and / or on the basis of the received position map. Verfahren nach Anspruch 1, ferner aufweisend: Ermitteln einer Lagekarte des Kraftfahrzeugs (10) anhand des zumindest einen empfangenen ersten Bildsignals, bevorzugt anhand einer Mehrzahl empfangener erster Bildsignale, und Anpassen des zumindest einen Fahrmanövers anhand der ermittelten Lagekarte.Procedure according to Claim 1 , further comprising: determining a position map of the motor vehicle (10) on the basis of the at least one received first image signal, preferably on the basis of a plurality of received first image signals, and adapting the at least one driving maneuver on the basis of the determined position map. Verfahren nach Anspruch 1 oder 2, wobei die empfangene oder ermittelte Lagekarte eine statische oder dynamische dreidimensionale Repräsentation einer Umgebung des Kraftfahrzeugs (10) ist.Procedure according to Claim 1 or 2nd , wherein the received or determined location map is a static or dynamic three-dimensional representation of an environment of the motor vehicle (10). Verfahren nach Anspruch 3, wobei die dreidimensionale Repräsentation anhand: - einer Mehrzahl mittels der Monokamera (96) des mobilen Endgeräts (70) aus verschiedenen Blickwinkeln aufgenommenen ersten Bildsignalen, - zumindest eines mittels der Stereokamera (96) des mobilen Endgeräts (70) aufgenommenen ersten Bildsignals, und/oder - zumindest eines mittels der Kamera (96) des mobilen Endgeräts (70) aufgenommenen ersten Bildsignals und zumindest eines mittels einer Kamera (11) des Kraftfahrzeugs (10) aufgenommenen zweiten Bildsignals ermittelt wird.Procedure according to Claim 3 , wherein the three-dimensional representation is based on: a plurality of first image signals recorded from the different viewing angles by means of the mono camera (96) of the mobile terminal (70), at least one first image signal recorded by the stereo camera (96) of the mobile terminal (70), and / or - at least one first image signal recorded by the camera (96) of the mobile terminal (70) and at least one by means of a camera (11) of the motor vehicle (10) recorded second image signal is determined. Verfahren nach Anspruch 4, wobei die Verknüpfung des zumindest einen ersten Bildsignals und des zumindest einen zweiten Bildsignals zur dreidimensionalen Repräsentation anhand: - erster GPS Daten des mobilen Endgeräts (70) und zweiter GPS Daten des Kraftfahrzeugs (10), - eines in dem ersten Bildsignal identifizierten Teils des Kraftfahrzeugs (10) und Raumlagedaten des Kraftfahrzeugs (10), - eines in dem ersten Bildsignal und dem zweiten Bildsignal identifizierten Bereichs von Interesse für das zumindest eine autonome Fahrmanöver, und/oder - zumindest eines in dem ersten Bildsignal und dem zweiten Bildsignal identifizierten Objekts erfolgt.Procedure according to Claim 4 , wherein the linking of the at least one first image signal and the at least one second image signal for three-dimensional representation based on: - first GPS data of the mobile terminal (70) and second GPS data of the motor vehicle (10), - a part of the motor vehicle identified in the first image signal (10) and spatial position data of the motor vehicle (10), - an area of interest identified in the first image signal and the second image signal for the at least one autonomous driving maneuver, and / or - at least one object identified in the first image signal and the second image signal. Verfahren nach einem der vorangehenden Ansprüche, ferner aufweisend: Erkennen zumindest eines statischen Hindernisses für das zumindest eine autonome Fahrmanöver, bevorzugt in der statischen dreidimensionalen Repräsentation, und Anpassen des zumindest einen autonomen Fahrmanövers unter Berücksichtigung des zumindest einen statischen Hindernisses.Method according to one of the preceding claims, further comprising: Detecting at least one static obstacle for the at least one autonomous driving maneuver, preferably in the static three-dimensional representation, and adapting the at least one autonomous driving maneuver, taking into account the at least one static obstacle. Verfahren nach einem der vorangehenden Ansprüche, ferner aufweisend: Erkennen zumindest eines dynamischen Hindernisses für das zumindest eine autonome Fahrmanöver, bevorzugt in der dynamischen dreidimensionalen Repräsentation, und Unterbrechen des zumindest einen autonomen Fahrmanövers für die Dauer des Bestehens des zumindest einen dynamischen Hindernisses.Method according to one of the preceding claims, further comprising: Recognizing at least one dynamic obstacle for the at least one autonomous driving maneuver, preferably in the dynamic three-dimensional representation, and Interrupting the at least one autonomous driving maneuver for the duration of the existence of the at least one dynamic obstacle. Verfahren nach einem der vorangehenden Ansprüche, ferner aufweisend: Speichern des zumindest eines mittels einer Kamera (96) des mobilen Endgeräts (70) aufgenommenen ersten Bildsignals zum Nachweis der Überwachung des zumindest einen autonomen Fahrmanövers.Method according to one of the preceding claims, further comprising: Saving the at least one first image signal recorded by means of a camera (96) of the mobile terminal (70) to demonstrate the monitoring of the at least one autonomous driving maneuver. Verfahren nach einem der vorangehenden Ansprüche, wobei das zumindest eine erste Bildsignal Teil eines mittels einer Kamera (96) des mobilen Endgeräts (70) aufgenommenen Videosignals ist.Method according to one of the preceding claims, wherein the at least one first image signal is part of a video signal recorded by means of a camera (96) of the mobile terminal (70). Kraftfahrzeug aufweisend zumindest einen zum Erfassen von Umgebungsdaten eingerichteten ersten Sensor (11, 12, 13), zumindest einen zum Erfassen von Fahrzeugdaten eingerichteten zweiten Sensor (51, 52, 53), ein Kommunikationsmodul (20), ein zum autonomen Fahren des Kraftfahrzeugs eingerichtetes Fahrsystem (30) und eine zum Durchführen des Verfahrens nach einem der Ansprüche 1 bis 9 eingerichtete Steuereinheit (40).Motor vehicle comprising at least one first sensor (11, 12, 13) set up for recording environmental data, at least one second sensor (51, 52, 53) set up for recording vehicle data, a communication module (20), a driving system set up for autonomous driving of the motor vehicle (30) and one for carrying out the method according to one of the Claims 1 to 9 established control unit (40).
DE102018221186.8A 2018-12-07 2018-12-07 Autonomous parking procedure Pending DE102018221186A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102018221186.8A DE102018221186A1 (en) 2018-12-07 2018-12-07 Autonomous parking procedure

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102018221186.8A DE102018221186A1 (en) 2018-12-07 2018-12-07 Autonomous parking procedure

Publications (1)

Publication Number Publication Date
DE102018221186A1 true DE102018221186A1 (en) 2020-06-10

Family

ID=70776395

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018221186.8A Pending DE102018221186A1 (en) 2018-12-07 2018-12-07 Autonomous parking procedure

Country Status (1)

Country Link
DE (1) DE102018221186A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111891119A (en) * 2020-06-28 2020-11-06 东风汽车集团有限公司 Automatic parking control method and system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014200611A1 (en) * 2014-01-15 2015-07-16 Robert Bosch Gmbh Method for the autonomous parking of a vehicle, driver assistance device for carrying out the method, and vehicle with the driver assistance device
DE102015210118A1 (en) * 2015-06-02 2016-12-08 Volkswagen Aktiengesellschaft Method and device for supporting the parking out of a vehicle
DE102015223471A1 (en) * 2015-11-26 2017-06-01 Bayerische Motoren Werke Aktiengesellschaft System for parking a vehicle

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014200611A1 (en) * 2014-01-15 2015-07-16 Robert Bosch Gmbh Method for the autonomous parking of a vehicle, driver assistance device for carrying out the method, and vehicle with the driver assistance device
DE102015210118A1 (en) * 2015-06-02 2016-12-08 Volkswagen Aktiengesellschaft Method and device for supporting the parking out of a vehicle
DE102015223471A1 (en) * 2015-11-26 2017-06-01 Bayerische Motoren Werke Aktiengesellschaft System for parking a vehicle

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111891119A (en) * 2020-06-28 2020-11-06 东风汽车集团有限公司 Automatic parking control method and system

Similar Documents

Publication Publication Date Title
DE102019211681B4 (en) Method of a vehicle for automated parking
EP3204279B1 (en) Method for operating an automatically driven, driverless motor vehicle and monitoring system
DE102019100559A1 (en) METHOD AND SYSTEMS FOR SUPPORTING THE OPERATION OF A ROAD VEHICLE WITH A FLIGHT DROME
DE102019112002A1 (en) SYSTEMS AND METHOD FOR THE AUTOMATIC DETECTION OF PENDING FEATURES
DE102018110425A1 (en) METHOD AND SYSTEMS FOR LIDAR SPOT CLOUD ANOMALIES
DE102018120845A1 (en) Method and device for monitoring an autonomous vehicle
DE102016115960A1 (en) System and method for measuring object height for clearance height detection
EP3292423B1 (en) Diagnostic method for a vision sensor of a vehicle and vehicle having a vision sensor
DE102019124152A1 (en) CLUTCH SUPPORT SYSTEM
EP3830522B1 (en) Method for estimating the quality of localisation in the self-localisation of a vehicle, device for carrying out the method, vehicle, and computer program
DE102018117526A1 (en) Method, apparatus and system for wireless support of motor vehicle trailers in various maneuvers
EP2568310A2 (en) Method, system and device for locating a vehicle relative to a predefined reference system
DE112018003827T5 (en) Parking support system and method
DE102018120517A1 (en) Detecting Track Conditions in Adaptive Cruise Control Systems
WO2017134228A1 (en) Method for assisting autonomous travel of a motor vehicle, control device and parking assistance system
DE102018101513A1 (en) Method for detecting garage parking spaces
DE102019121124A1 (en) CLUTCH SUPPORT SYSTEM
DE102018116106A1 (en) VIDEO TRANSMISSION FOR AN INCOMING LEFT-HANDING VEHICLE
DE102015210118B4 (en) Method and device for supporting the parking out of a vehicle
WO2020225065A1 (en) Method for ascertaining a vehicle trajectory
DE112018007967T5 (en) VEHICLE CONTROL DEVICE, AUTOMATED VEHICLE TRAVEL DEVELOPMENT SYSTEM, VEHICLE CONTROL PROCEDURE AND PROGRAM
DE102018221186A1 (en) Autonomous parking procedure
DE102014214327A1 (en) Control device, vehicle, data delivery device and method
DE102022121938A1 (en) SYSTEMS AND METHODS FOR ASSISTING A BATTERY ELECTRIC VEHICLE IN CARRYING OUT CHARGING AT A BATTERY CHARGER
DE102022102697A1 (en) Parking assistance method and parking assistance device

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication