DE102020209332A1

DE102020209332A1 - Method and system for assisting a vehicle user in the event of a vehicle breakdown of a motor vehicle

Info

Publication number: DE102020209332A1
Application number: DE102020209332.6A
Authority: DE
Inventors: Mark Bennemann
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2020-07-23
Filing date: 2020-07-23
Publication date: 2022-01-27

Abstract

Die Erfindung betrifft ein Verfahren zum Unterstützen eines Fahrzeugbenutzers (12) bei einer Fahrzeugpanne eines Kraftfahrzeugs (14), umfassend die Schritte: automatisches Starten einer Applikation (24) auf einem mobilen Endgerät (16), nachdem fahrzeugseitig die Fahrzeugpanne erfasst wurde; Ausgegeben einer Anleitung mittels der gestarteten Applikation (24), wobei die Anleitung vom Fahrzeugbenutzer (12) mittels des mobilen Endgeräts (16) am Kraftfahrzeug (14) durchzuführende Inspektionsschritte umfasst; Erfassen von optischen Fahrzeugdaten mittels des mobilen Endgeräts (16) während der Fahrzeugbenutzer (12) gemäß den ausgegebenen Inspektionsschritten eine Kamera des mobilen Endgeräts (16) auf zumindest einen Fahrzeugbereich (22) richtet und ein aktuelles Kamerabild überlagernde virtuelle Elemente der Anleitung mittels eines Displays des mobilen Endgeräts (16) eingeblendet werden; Übermitteln der erfassen optischen Fahrzeugdaten an einen Pannendienst (18), der in Abhängigkeit von den optischen Fahrzeugdaten zumindest eine Aktion zur Behebung der Fahrzeugpanne einleitet. Die Erfindung betrifft des Weiteren ein System (10) zum Unterstützen eines Fahrzeugbenutzers (12) bei einer Fahrzeugpanne sowie ein Kraftfahrzeug (14) für ein derartiges System (10).The invention relates to a method for supporting a vehicle user (12) in the event of a vehicle breakdown of a motor vehicle (14), comprising the steps of: automatically starting an application (24) on a mobile terminal (16) after the vehicle breakdown has been detected on the vehicle side; Instructions are issued using the started application (24), the instructions comprising inspection steps to be carried out on the motor vehicle (14) by the vehicle user (12) using the mobile terminal device (16); Recording of optical vehicle data by means of the mobile terminal device (16) while the vehicle user (12) directs a camera of the mobile terminal device (16) to at least one area of the vehicle (22) according to the output inspection steps and virtual elements of the instructions superimposed on a current camera image by means of a display of the mobile terminal (16) are displayed; Transmission of the optical vehicle data recorded to a breakdown service (18), which initiates at least one action to rectify the vehicle breakdown as a function of the optical vehicle data. The invention also relates to a system (10) for supporting a vehicle user (12) in the event of a vehicle breakdown and a motor vehicle (14) for such a system (10).

Description

Die vorliegende Erfindung betrifft ein Verfahren und ein System zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs. Des Weiteren betrifft die Erfindung noch ein Kraftfahrzeug für ein derartiges System.The present invention relates to a method and a system for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle. The invention also relates to a motor vehicle for such a system.

Oftmals sind Fahrzeugbenutzer mit den technischen Gegebenheiten ihres Kraftfahrzeugs nur unzureichend vertraut. Im Falle einer Fahrzeugpanne bleibt ihnen daher nichts anderes übrig, als einen Pannendienst zu kontaktieren. Erst mit Eintreffen von Mitarbeitern des Pannendienstes ist es üblicherweise dann möglich, zu erkennen, was genau zur Fahrzeugpanne geführt hat und welche Schritte zur Behebung der Fahrzeugpanne einzuleiten sind.Vehicle users are often only insufficiently familiar with the technical features of their motor vehicle. In the event of a vehicle breakdown, they have no choice but to contact a breakdown service. Only when the breakdown service employees arrive is it usually possible to identify exactly what caused the vehicle breakdown and what steps are to be taken to rectify the vehicle breakdown.

Es sind schon verschiedene Ansätze bekannt, die einen Fahrzeugbenutzer bei einer Fahrzeugpanne eines Kraftfahrzeugs unterstützen können. Die FR 2 951 293 A1 beschreibt zum Beispiel ein Verfahren zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs mithilfe von Augmented Reality. Mit einer Kamera eines Smartphones kann der Fahrzeugnutzer ein Bauteil des Kraftfahrzeugs aufnehmen, wobei mittels des Smartphones Zusatzinformationen einblendet werden. Dabei wird ein auf das Bauteil aufgeklebtes Piktogramm mittels des Smartphones erkannt, wonach mittels des Smartphones durch den Fahrzeugnutzer durchzuführende Aktionen eingeblendet werden. So erhält der Benutzer z.B. eine Anleitung, wie er einen Ölmessstab in einem Motorraum des Kraftfahrzeugs zu bedienen hat.Various approaches are already known which can support a vehicle user when a motor vehicle breaks down. the FR 2 951 293 A1 describes, for example, a method for assisting a vehicle user in the event of a vehicle breakdown of a motor vehicle using augmented reality. The vehicle user can use a camera on a smartphone to record a component of the motor vehicle, with additional information being displayed using the smartphone. A pictogram glued to the component is recognized by the smartphone, after which actions to be carried out by the vehicle user are displayed using the smartphone. For example, the user receives instructions on how to operate an oil dipstick in an engine compartment of the motor vehicle.

Die WO 2019/152916 A1 beschreibt ebenfalls ein Verfahren zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs mithilfe von Augmented Reality, wobei mittels eines mobilen Endgeräts Anleitungen an den Fahrzeugbenutzer ausgegeben werden.the WO 2019/152916 A1 also describes a method for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle using augmented reality, instructions being issued to the vehicle user using a mobile terminal device.

Die US 7 142 962 B1 beschreibt ein Over-the-Air-Update mittels eines Teleservices bei einem Kraftfahrzeug. Zunächst wird mittels des Teleservices über eine drahtlose Verbindung eine Testroutine beim Kraftfahrzeug durchgeführt, wobei in Abhängigkeit davon eine Softwareaktualisierung am Kraftfahrzeug durchgeführt wird.the U.S. 7,142,962 B1 describes an over-the-air update using a teleservice in a motor vehicle. First, a test routine is carried out on the motor vehicle by means of the teleservice via a wireless connection, with a software update being carried out on the motor vehicle as a function of this.

Es ist die Aufgabe der vorliegenden Erfindung, eine Lösung zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs bereitzustellen.It is the object of the present invention to provide a solution for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle.

Diese Aufgabe wird durch ein Verfahren und ein System zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs mit den Merkmalen der unabhängigen Ansprüche gelöst. Weitere mögliche Ausgestaltungen der Erfindung sind in den abhängigen Ansprüchen, der Beschreibung und den Figuren angegeben.This object is achieved by a method and a system for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle with the features of the independent claims. Further possible configurations of the invention are specified in the dependent claims, the description and the figures.

Bei dem erfindungsgemäßen Verfahren zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs wird automatisch eine Applikation auf einem mobilen Endgerät gestartet, nachdem fahrzeugseitig die Fahrzeugpanne erfasst wurde. Das betreffende Kraftfahrzeug kann beispielsweise ein Fahrzeugdiagnosesystem und/oder geeignete Sensoren aufweisen, die dazu ausgelegt sind, eine solche Fahrzeugpanne zu detektieren. Nachdem die Fahrzeugpanne festgestellt wurde, wird besagte Applikation auf dem mobilen Endgerät gestartet. Bei dem mobilen Endgerät kann es sich um beliebige mobile Endgeräte, wie beispielsweise Smartphones, Tablet-Computer und dergleichen handeln. Auch ist es möglich, dass es sich um eine mobile Einrichtung handelt, die mechanisch mit dem Kraftfahrzeug, beispielsweise auf einem Dashboard oder dergleichen, gekoppelt und abgenommen werden kann.In the method according to the invention for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle, an application is automatically started on a mobile terminal after the vehicle breakdown has been detected on the vehicle side. The motor vehicle in question can have a vehicle diagnostic system and/or suitable sensors, for example, which are designed to detect such a vehicle breakdown. After the vehicle breakdown has been determined, said application is started on the mobile device. The mobile terminal can be any mobile terminal, such as smartphones, tablet computers and the like. It is also possible for a mobile device to be involved, which can be coupled mechanically to the motor vehicle, for example on a dashboard or the like, and removed.

Mittels der gestarteten Applikation wird eine Anleitung ausgegeben, wobei diese vom Fahrzeugbenutzer mittels des mobilen Endgeräts am Kraftfahrzeug durchzuführende Inspektionsschritte umfasst. Der Fahrzeugbenutzer erhält also über die gestartete Applikation auf dem mobilen Endgerät gezielte Anleitungen, die er durchführen soll, um das Kraftfahrzeug zu inspizieren. Selbst wenn der Fahrzeugbenutzer sich technisch mit dem Kraftfahrzeug nur schlecht oder gar nicht auskennen sollte, kann er mit Hilfe der gestarteten Applikation und der ausgegebenen Anleitung einfach nachvollziehen, welche Schritte er als nächstes einleiten soll. Die Anleitung kann dabei sowohl akustische als auch optische Hinweise beinhalten.Using the started application, instructions are output, these comprising inspection steps to be carried out on the motor vehicle by the vehicle user using the mobile terminal device. The vehicle user thus receives specific instructions via the application started on the mobile terminal, which he should carry out in order to inspect the motor vehicle. Even if the vehicle user has little or no technical knowledge of the motor vehicle, he can use the application started and the instructions provided to easily understand which steps he should take next. The instructions can contain both acoustic and visual information.

Während der Fahrzeugbenutzer gemäß den ausgegebenen Inspektionsschritten eine Kamera des mobilen Endgeräts auf zumindest einen Fahrzeugbereich richtet, werden optische Fahrzeugdaten mittels des mobilen Endgeräts erfasst. Es können alternativ oder zusätzlich auch nicht optische Daten mittels des mobilen Endgeräts erfasst werden. Zudem werden ein aktuelles Kamerabild des mobilen Endgeräts überlagernde virtuelle Elemente der Anleitung mittels eines Displays des mobilen Endgeräts eingeblendet. Der Fahrzeugbenutzer erhält also über sein mobiles Endgerät Augmented-Reality-Inhalte in Form der virtuellen Elemente, die das aktuelle Kamerabild überlagern. Der Fahrzeugbenutzer erhält so beispielsweise visuelle und gezielte Hinweise, wie er die Kamera des mobilen Endgeräts auf den betreffenden Fahrzeugbereich auszurichten hat, sodass besagte optische Fahrzeugdaten mittels des mobilen Endgeräts erfasst und gesammelt werden können. Auch können noch anderweitige Informationen in Form der virtuellen Elemente eingeblendet werden, beispielsweise Informationen zu bestimmten Bauteilen, die gerade mit der Kamera des mobilen Endgeräts erfasst werden. Mit anderen Worten handelt es sich bei der Applikation auf dem mobilen Endgerät also um eine Augmented-Reality-Hilfe zur Unterstützung des Fahrzeugbenutzers beim Durchführen der besagten Inspektionsschritte.While the vehicle user directs a camera of the mobile terminal to at least one area of the vehicle in accordance with the inspection steps that have been output, optical vehicle data are recorded using the mobile terminal. Alternatively or additionally, non-optical data can also be recorded using the mobile terminal device. In addition, virtual elements of the instructions superimposed on a current camera image of the mobile terminal device are shown by means of a display of the mobile terminal device. The vehicle user thus receives augmented reality content via his mobile device in the form of virtual elements that overlay the current camera image. The vehicle user thus receives, for example, visual and specific information on how to align the camera of the mobile device with the relevant area of the vehicle, so that said visual vehicle data can be recorded and collected using the mobile device. Other information can also be are displayed in the form of virtual elements, for example information on certain components that are currently being captured by the camera on the mobile device. In other words, the application on the mobile terminal is an augmented reality aid to support the vehicle user when carrying out the said inspection steps.

Schließlich werden die erfassten optischen Fahrzeugdaten an einen Pannendienst übermittelt, der in Abhängigkeit von den optischen Fahrzeugdaten zumindest eine Aktion zur Behebung der Fahrzeugpanne einleitet. Dies kann aktiv auf Wunsch des Fahrzeugbenutzers erfolgen oder auch automatisch, ohne dass dies der Fahrzeugbenutzer aktiv veranlassen muss. Wichtige Informationen betreffend die Fahrzeugpanne und den davon betroffenen Fahrzeugbereich können somit an den Pannendienst übertragen werden. Insbesondere ist es möglich, dass diese Fahrzeugdaten z.B. an eine Servereineinrichtung des Pannendienstes übertragen werden. Das Kraftfahrzeug und/oder das mobile Endgerät können dafür geeignete Mittel aufweisen, beispielsweise zur drahtlosen Datenübermittlung via Mobilfunknetz. Die Fahrzeugdaten können auch an eine Verkehrsleitzentrale übermittelt werden. Stellt die Verkehrsleitzentrale z.B. fest, dass mehrere Fahrzeuge in relativ kurzem Abstand liegengeblieben sind, kann das beispielsweise auf ein Straßenproblem hindeuten.Finally, the captured optical vehicle data is transmitted to a breakdown service, which initiates at least one action to rectify the vehicle breakdown as a function of the optical vehicle data. This can take place actively at the request of the vehicle user or also automatically, without the vehicle user having to actively initiate this. Important information regarding the vehicle breakdown and the vehicle area affected by it can thus be transmitted to the breakdown service. In particular, it is possible for this vehicle data to be transmitted to a server facility of the breakdown service, for example. The motor vehicle and/or the mobile end device can have suitable means for this, for example for wireless data transmission via the mobile radio network. The vehicle data can also be transmitted to a traffic control center. If the traffic control center determines, for example, that several vehicles have broken down within a relatively short distance, this can indicate a road problem, for example.

Ein wesentlicher Aspekt der Erfindung betrifft also die Verwendung von Augmented-Reality auf einem portablen Gerät, um eine erste Hilfe bei einer Fahrzeugpanne leisten zu können. Der Erfindung liegt dabei die Erkenntnis zugrunde, dass bei einer Fahrzeugpanne üblicherweise die Fahrzeugbenutzer die Schwere eines Fehlers, der zur Fahrzeugpanne geführt hat, meist nur schwer einschätzen können. Die besagte Applikation auf dem mobilen Endgerät kann dabei helfen, den Fahrzeugbenutzer bei der Lösung beziehungsweise bei der Prüfung am Kraftfahrzeug zu unterstützen. Die Anleitung kann insbesondere spezielle Bilder und Text sowie direkt eine Objekterkennung in Kombination mit der besagten Augmented-Reality-Anzeige umfassen, sodass der Fahrzeugbenutzer Schritt für Schritt angeleitet wird. So kann der Fahrzeugbenutzer auch ohne technische Kenntnisse verschiedenste Fahrzeugkomponenten überprüfen und - sofern möglich - auch selbst schon eine Lösung herbeiführen.An essential aspect of the invention thus relates to the use of augmented reality on a portable device in order to be able to provide first aid in the event of a vehicle breakdown. The invention is based on the finding that when a vehicle breaks down, it is usually difficult for the vehicle user to assess the severity of a fault that led to the vehicle breakdown. Said application on the mobile terminal can help to support the vehicle user in solving or checking the motor vehicle. In particular, the instructions can include special images and text as well as direct object recognition in combination with said augmented reality display, so that the vehicle user is guided step by step. In this way, the vehicle user can check a wide range of vehicle components without any technical knowledge and - if possible - even bring about a solution himself.

Die besagten Augmented-Reality-Inhalte sind besonders vorteilhaft, da damit auch sehr ungeübte Fahrzeugbenutzer eine direkte Anleitung per Bild mit Zusatzinformationen erhalten können. Diese Inspektionsschritte beziehungsweise Überprüfung kann der Fahrzeugbenutzer beispielsweise während einer Wartezeit durchführen, bis Mitarbeiter des Pannendienstes eintreffen.The aforementioned augmented reality content is particularly advantageous, since even very inexperienced vehicle users can use it to receive direct image instructions with additional information. The vehicle user can carry out these inspection steps or checking, for example, while waiting until employees of the breakdown service arrive.

Zudem ist es beim Eintreffen von Mitarbeitern des Pannendienstes möglich, mittels des erfindungsgemäßen Verfahrens bereits zusätzliche Prüfdaten, Messdaten oder dergleichen bereitzustellen, die zuvor mittels des mobilen Endgeräts unter Anleitung durch die Applikation erfasst worden sind. Auch können besondere Bauteile, die typspezifisch nicht immer beim Pannendienst mitgeführt werden, rechtzeitig organisiert und bereitgestellt werden. Manche Pannen können aber eventuell nur durch das Abschleppen zur nächsten Werkstatt behoben werden. Mittels des erfindungsgemäßen Verfahrens ist es also möglich, einem Fahrzeugbenutzer eine besonders einfache Lösung an die Hand zu geben, mittels welcher er selbst bei wenig oder keinem technischen Wissen eine Pannenerkennung an seinem Kraftfahrzeug durchführen kann, da er eine gezielte Anleitung über die besagte Applikation auf dem mobilen Endgerät erhält. Das mobile Endgerät kann beispielsweise drahtlos mit einem Fahrzeugdiagnosesystem des Kraftfahrzeugs gekoppelt werden. Die Übermittlung der erfassten Fahrzeugdaten an den Pannendienst kann beispielsweise mittels des Fahrzeugdiagnosesystems erfolgen. Alternativ oder zusätzlich ist es auch möglich, dass das mobile Endgerät die besagten Fahrzeugdaten an den Pannendienst übermittelt. Darüber hinaus ist es auch möglich, dass eine Kommunikation zwischen dem Fahrzeugdiagnosesystem und der Applikation auf dem mobilen Endgerät stattfindet, sodass je nach diagnostizierten Fahrzeugfehlern die Applikation entsprechend passgenau zur Anleitung des Fahrzeugbenutzers angesteuert werden kann. Zwecks genereller Fahrzeugüberwachung können besagte Fahrzeugdaten auch beispielsweise einem Fahrzeughersteller zur Verfügung gestellt werden, um eventuelle Entwicklungsschwächen im Feld festzustellen.In addition, it is possible when employees of the breakdown service arrive, using the method according to the invention, to provide additional test data, measurement data or the like that have previously been recorded using the mobile terminal device under the guidance of the application. Special components that are not always included in the breakdown service, depending on the type, can be organized and made available in good time. However, some breakdowns can only be remedied by towing the vehicle to the nearest workshop. By means of the method according to the invention, it is therefore possible to provide a vehicle user with a particularly simple solution, by means of which he can carry out a breakdown detection on his motor vehicle even with little or no technical knowledge, since he can obtain specific instructions via said application on the mobile device receives. For example, the mobile terminal device can be wirelessly coupled to a vehicle diagnostic system of the motor vehicle. The recorded vehicle data can be transmitted to the breakdown service, for example, by means of the vehicle diagnostic system. As an alternative or in addition, it is also possible for the mobile terminal device to transmit said vehicle data to the breakdown service. In addition, it is also possible for communication to take place between the vehicle diagnostic system and the application on the mobile terminal device, so that depending on the vehicle faults diagnosed, the application can be controlled in a precisely tailored manner to guide the vehicle user. For the purpose of general vehicle monitoring, said vehicle data can also be made available to a vehicle manufacturer, for example, in order to identify any development weaknesses in the field.

Eine mögliche Ausgestaltung der Erfindung sieht vor, dass die Fahrzeugpanne charakterisierende Daten an die Applikation übertragen werden, welche in Abhängigkeit davon die passende Anleitung auswählt. Beispielsweise kann auf einem fahrzeuginternen Display ein QR-Code eingeblendet werden, der besagte charakterisierende Daten umfasst und somit die Art der Fahrzeugpanne näher spezifiziert. Mit der Kamera des mobilen Endgeräts kann der QR-Code gescannt werden, wonach die betreffenden Informationen an die Applikation auf dem mobilen Endgerät übertragen werden. Auch ist es beispielsweise möglich, über eine WLAN-Verbindung zwischen Kraftfahrzeug und mobilem Endgerät die besagten charakterisierenden Daten zu übertragen. Ebenso ist dies beispielsweise auch über eine Bluetooth-Verbindung möglich. Grundsätzlich ist insbesondere jede Art von kabelloser Übertragung möglich. Unter Berücksichtigung der die Fahrzeugpanne charakterisierenden Daten ist es so möglich, mittels der Applikation die passende Anleitung automaisch auszuwählen, sodass der Fahrzeugbenutzer auf besonders einfache Weise erkennen kann, welche Inspektionsschritte er zunächst durchführen soll. Darüber hinaus ist es möglich, dem Fahrzeugbenutzer beispielsweise über ein fahrzeuginternes Display und/oder über das mobile Endgerät schon Informationen bereitzustellen, um was für eine Art von Fahrzeugpanne es sich handelt.A possible embodiment of the invention provides that data characterizing the vehicle breakdown are transmitted to the application, which selects the appropriate instructions as a function of this. For example, a QR code can be shown on an in-vehicle display, which includes said characterizing data and thus specifies the type of vehicle breakdown in more detail. The QR code can be scanned with the camera of the mobile device, after which the relevant information is transmitted to the application on the mobile device. It is also possible, for example, to transmit said characterizing data via a WLAN connection between the motor vehicle and the mobile terminal device. This is also possible, for example, via a Bluetooth connection. In principle, in particular any type of wireless transmission is possible. Taking into account the vehicle With the data characterizing the breakdown, it is possible to use the application to automatically select the appropriate instructions, so that the vehicle user can easily identify which inspection steps he should carry out first. In addition, it is possible to provide the vehicle user with information about the type of vehicle breakdown, for example via an in-vehicle display and/or via the mobile terminal device.

Eine weitere mögliche Ausgestaltung der Erfindung sieht vor, dass die Fahrzeugdaten zumindest ein mittels der Kamera des mobilen Endgeräts aufgezeichnetes Kamerabild von dem Fahrzeugbereich umfassen. Automatische Aufnahmen können auch im Bereich des Versicherungsschutzes eine Rolle spielen. Der Fahrzeugbenutzer kann also mittels des mobilen Endgeräts gemäß der Anleitung eines oder mehrere Kamerabilder von dem betreffenden Fahrzeugbereich aufzeichnen lassen. So kann der Pannendienst anhand der übermittelten optischen Fahrzeugdaten schon erkennen, was gegebenenfalls in dem betreffenden Fahrzeugbereich defekt ist. So kann der Pannendienst schon vorab abschätzen beziehungsweise erkennen, welche Reparaturmaßnahmen zur Behebung der Fahrzeugpanne sehr wahrscheinlich erforderlich sein werden. Entsprechend geeignetes Personal des Pannendienstes kann je nach Art der Fahrzeugpanne beispielsweise zu dem Kraftfahrzeug geschickt werden. Es kann auch vorgesehen sein, dass dem Fahrer gezielt Sicherheitshinweise angezeigt werden; z. B., was er bei einer Panne berücksichtigen und/oder tun soll. Die Sicherheitshinweise können z.B. die Aufforderung umfassen, eine Warnweste anzulegen, ein Warndreieck aufzustellen und dergleichen. Zudem kann auch beispielsweise ein aktueller des Ort Fahrzeug, z.B. per GPS o.ä., lokalisiert und beim Ausgeben der Sicherheitshinweise berücksichtigt werden. Unterschiedliche Straßentypen können gegebenenfalls auch unterschiedliche Maßnahmen erfordern, beispielsweise auf Autobahnen andere als auf einer Landstraße.A further possible embodiment of the invention provides that the vehicle data include at least one camera image of the vehicle area recorded by the camera of the mobile terminal device. Automatic recordings can also play a role in the area of insurance coverage. The vehicle user can thus use the mobile terminal device to record one or more camera images of the vehicle area concerned in accordance with the instructions. In this way, the breakdown service can use the transmitted optical vehicle data to identify what may be defective in the relevant area of the vehicle. In this way, the breakdown service can estimate or recognize in advance which repair measures will most likely be necessary to fix the vehicle breakdown. Correspondingly suitable personnel from the breakdown service can be sent to the motor vehicle, for example, depending on the type of vehicle breakdown. It can also be provided that safety instructions are specifically displayed to the driver; e.g. B. What to consider and/or do in the event of a breakdown. The safety instructions can, for example, include the request to put on a high-visibility vest, set up a warning triangle and the like. In addition, for example, a current vehicle location, e.g. via GPS or the like, can be localized and taken into account when issuing the safety instructions. Different road types may also require different measures, for example different measures on motorways than on a country road.

In weiterer möglicher Ausgestaltung der Erfindung ist es vorgesehen, dass der Pannendienst zur Behebung der Fahrzeugpanne einen Servicewagen, einen Abschleppwagen und/oder Ersatzteile organisiert. Anhand der an den Pannendienst übertragenen Fahrzeugdaten ist es möglich, schon abzuschätzen, ob es beispielsweise möglich ist, die Fahrzeugpanne direkt vor Ort zu beheben. In dem Fall kann es sinnvoll sein, dass der Pannendienst zur Behebung der Fahrzeugpanne besagten Servicewagen vorbeischickt. Sollte der Pannendienst anhand der vorab übermittelten Fahrzeugdaten hingegen beispielsweise erkennen, dass eine Reparatur vor Ort sehr wahrscheinlich nicht funktionieren wird, so kann zur Behebung der Fahrzeugpanne beispielsweise besagter Abschleppwagen vorbeigeschickt werden. Auch ist es möglich, in Abhängigkeit von den vorab an den Pannendienst übermittelten Fahrzeugdaten schon zu erkennen, welche Ersatzteile gegebenenfalls erforderlich sind. Diese können Mitarbeitern des Pannendienstes direkt mitgegeben werden.In a further possible embodiment of the invention, it is provided that the breakdown service organizes a service car, a tow truck and/or spare parts to repair the vehicle breakdown. Based on the vehicle data transmitted to the breakdown service, it is possible to estimate whether it is possible, for example, to repair the vehicle breakdown directly on site. In this case, it may make sense for the breakdown service to send the said service vehicle to fix the vehicle breakdown. If, on the other hand, the breakdown service recognizes, for example from the vehicle data transmitted in advance, that an on-site repair is very unlikely to work, the aforementioned tow truck, for example, can be sent to repair the vehicle breakdown. It is also possible, depending on the vehicle data previously transmitted to the breakdown service, to identify which spare parts may be required. These can be given directly to employees of the breakdown service.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung ist es vorgesehen, dass die virtuellen Elemente eine gemäß der Anleitung vorgesehene Kameraausrichtung auf den Fahrzeugbereich kennzeichnen. So ist es beispielsweise möglich, dass auf dem Display des mobilen Endgeräts ein Zielkreuz, ein Rahmen oder Ähnliches angezeigt wird. Der Fahrzeugbenutzer erhält so eine optische Anleitung, wie er das mobile Endgerät und die Kamera des mobilen Endgeräts auf den betreffenden Fahrzeugbereich ausrichten muss, um entsprechend geeignete Kamerabilder zu erzeugen. Dabei ist es beispielsweise möglich, dass über die virtuellen Elemente angezeigt wird, wenn die Kameraausrichtung passend erfolgt ist. Dies kann beispielsweise durch eine entsprechende Farbgebung der virtuellen Elemente oder durch andere optische und/oder auch akustische Hinweise erfolgen. Der Fahrzeugbenutzer erhält also eine einfache und genaue Anleitung, wie er die Kameraausrichtung des mobilen Endgeräts vornehmen muss.According to a further possible embodiment of the invention, it is provided that the virtual elements identify a camera orientation to the vehicle area provided according to the instructions. For example, it is possible for a crosshair, a frame or the like to be shown on the display of the mobile terminal device. The vehicle user thus receives visual instructions on how to align the mobile terminal device and the camera of the mobile terminal device with the relevant area of the vehicle in order to generate appropriate camera images. It is possible, for example, for the virtual elements to indicate when the camera has been properly aligned. This can be done, for example, by a corresponding coloring of the virtual elements or by other optical and/or also acoustic indications. The vehicle user thus receives simple and precise instructions on how to align the camera of the mobile terminal device.

Eine weitere mögliche Ausgestaltung der Erfindung sieht vor, dass die Applikation die Kamera des mobilen Endgeräts zum automatischen Aufzeichnen des Fahrzeugbereichs ansteuert. Ohne Zutun des Fahrzeugbenutzers ist es also möglich, dass die Kamera des mobilen Endgeräts einmal oder auch mehrmals zum automatischen Aufzeichnen des Fahrzeugbereichs ausgelöst wird. Dies kann beispielsweise auch in Kombination mit den besagten virtuellen Elementen erfolgen. Wird festgestellt, dass die Kameraausrichtung entsprechend der eingeblendeten virtuellen Elemente korrekt erfolgt ist, so kann die Applikation danach die Kamera des mobilen Endgeräts zum automatischen Aufzeichnen des Fahrzeugbereichs ansteuern. So kann sichergestellt werden, dass der betreffende Fahrzeugbereich immer auch nur aus der richtigen Kameraperspektive aufgezeichnet wird, sodass dem Pannendienst auch auswertbare Informationen bereitgestellt werden.Another possible embodiment of the invention provides that the application controls the camera of the mobile terminal device to automatically record the area of the vehicle. Without any action on the part of the vehicle user, it is therefore possible for the camera of the mobile terminal device to be triggered once or several times to automatically record the area of the vehicle. This can also be done, for example, in combination with the said virtual elements. If it is determined that the camera has been correctly aligned according to the displayed virtual elements, the application can then control the camera of the mobile device to automatically record the area of the vehicle. In this way, it can be ensured that the vehicle area in question is only ever recorded from the correct camera perspective, so that the breakdown service is also provided with information that can be evaluated.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung ist es vorgesehen, dass im Fahrzeuginnenraum des Kraftfahrzeugs eine Information hinsichtlich der erfassten Fahrzeugpanne und ein Hinweis ausgegeben wird, dass mittels der gestarteten Applikation die Inspektionsschritte durchgeführt werden sollen. Je nach Schwere der Fahrzeugpanne ist es beispielsweise auch denkbar, dass das Kraftfahrzeug sich automatisch abbremst und stoppt. Durch Ausgeben der besagten Information hinsichtlich der erfassten Fahrzeugpanne wird der Fahrzeugbenutzer direkt darüber in Kenntnis gesetzt, dass und gegebenenfalls auch was für eine Art von Fahrzeugpanne vorliegt. Dadurch, dass der Hinweis ausgegeben wird, mittels der gestarteten Applikation die Inspektionsschritte durchzuführen, wird der Fahrzeugbenutzer direkt darüber in Kenntnis gesetzt, was die nächsten von ihm durchzuführenden Schritte sind.According to a further possible embodiment of the invention, it is provided that information regarding the detected vehicle breakdown and an indication that the inspection steps are to be carried out using the started application are output in the vehicle interior of the motor vehicle. Depending on the severity of the vehicle breakdown, it is also conceivable, for example, for the motor vehicle to brake and stop automatically. By outputting said information With regard to the recorded vehicle breakdown, the vehicle user is informed directly that and possibly also what type of vehicle breakdown has occurred. The fact that the message is output to carry out the inspection steps using the started application means that the vehicle user is directly informed as to what the next steps to be carried out are.

In weiterer möglicher Ausgestaltung der Erfindung ist es vorgesehen, dass die Applikation die durch den Fahrzeugbenutzer mittels des mobilen Endgeräts erfassten Fahrzeugdaten mit Sollvorgaben abgleicht und falls eine unzulässige Abweichung festgestellt wird, den Fahrzeugbenutzer dazu anleitet, die Fahrzeugdaten erneut mittels des mobilen Endgeräts zu erfassen. Wird beispielsweise festgestellt, dass der Fahrzeugbenutzer die Kamera des mobilen Endgeräts nicht korrekt auf den Fahrzeugbereich ausgerichtet hatte, sodass keine vom Pannendienst gut verwertbaren Kamerabilder vorliegen, kann der Fahrzeugbenutzer über die Applikation darüber in Kenntnis gesetzt und dazu aufgefordert werden, weitere Kamerabilder von dem betreffenden Fahrzeugbereich zu erfassen. Im Zuge der besagten Anleitung können dem Fahrzeugbenutzer noch gezielte Informationen beziehungsweise Hinweise gegeben werden, wie er das mobile Endgerät auf den betreffenden Fahrzeugbereich ausrichten soll. Sobald der Fahrzeugbereich mittels der Kamera des mobilen Endgeräts korrekt erfasst wurde, ist es beispielweise möglich, dass die Applikation dem Fahrzeugbenutzer einen Hinweis darüber gibt, dass der betreffende Inspektionsschritt erfolgreich abgeschlossen wurde. Danach kann ein Fahrzeugbenutzer beispielsweise darüber in Kenntnis gesetzt werden, dass die erfassten Fahrzeugdaten nun an den besagten Pannendienst übermittelt werden, der sich danach zum Beispiel telefonisch mit dem Fahrzeugbenutzer oder über die Applikation in Verbindung setzt, sodass der Fahrzeugbenutzer jederzeit darüber informiert ist, welche Schritte als nächstes der Pannendienst einleiten wird.In a further possible embodiment of the invention, it is provided that the application compares the vehicle data recorded by the vehicle user using the mobile device with target specifications and, if an impermissible deviation is detected, instructs the vehicle user to record the vehicle data again using the mobile device. If, for example, it is determined that the vehicle user has not correctly aligned the camera of the mobile device to the area of the vehicle, so that there are no camera images that can be used by the breakdown service, the vehicle user can be informed of this via the application and asked to take further camera images of the vehicle area in question capture. In the course of said instructions, the vehicle user can be given specific information or instructions on how to align the mobile terminal device with the vehicle area in question. As soon as the area of the vehicle has been correctly captured by the camera of the mobile device, it is possible, for example, for the application to inform the vehicle user that the relevant inspection step has been successfully completed. A vehicle user can then be informed, for example, that the vehicle data recorded will now be transmitted to the breakdown service in question, which will then contact the vehicle user, for example by telephone or via the application, so that the vehicle user is informed at all times about the steps to be taken next the breakdown service will initiate.

Der Fahrzeugbenutzer kann auch beispielsweise darüber in Kenntnis gesetzt werden, wo der Pannendienst sitzt oder sich aufhält. Dem Fahrzeugbenutzer kann z.B. auch eine fortlaufend aktualisierte Standortanzeige eines Pannenfahrzeugs, das sich auf den Weg zum Fahrzeugbenutzer macht, angezeigt werden, alternativ oder zusätzlich in Kombination mit einer Eintreffdauer und/oder Ankunftszeit. Der Fahrzeugnutzer kann auch mit einem Mitarbeiter des Pannendienstes direkt in Kontakt treten. Der Pannendienst kann z.B. ein gebuchter Service sein, beispielsweise vom ADAC oder dergleichen. Es kann auch vorgesehen sein, Daten hinsichtlich einer Fahrzeughistorie mit an den Pannendienst zu übertragen. Die Datenübertragung kann sequentiell und vollkontinuierlich erfolgen, sprich sobald Daten anfallen, werden diese erst gesammelt und dann in zeitlichen Abständen übertragen oder direkt, sobald diese anfallen.The vehicle user can also be informed, for example, where the breakdown service is based or located. For example, the vehicle user can also be shown a continuously updated location display of a breakdown vehicle that is on its way to the vehicle user, alternatively or additionally in combination with a arrival time and/or arrival time. The vehicle user can also contact a breakdown service employee directly. The breakdown service can, for example, be a booked service, for example from ADAC or the like. Provision can also be made for data relating to a vehicle history to be transmitted to the breakdown service. Data transmission can be sequential and fully continuous, i.e. as soon as data is generated, it is first collected and then transmitted at intervals or directly as soon as it is generated.

Das erfindungsgemäße System zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne umfasst ein Kraftfahrzeug, ein mobiles Endgerät und einen Pannendienst, die dazu eingerichtet sind, das erfindungsgemäße Verfahren oder mögliche Ausgestaltungen des erfindungsgemäßen Verfahrens durchzuführen. Mögliche Ausgestaltungen des erfindungsgemäßen Verfahrens sind als mögliche Ausgestaltungen des erfindungsgemäßen Systems und umgekehrt anzusehen, wobei das System insbesondere Mittel zur Durchführung der Verfahrensschritte aufweist.The system according to the invention for supporting a vehicle user in the event of a vehicle breakdown comprises a motor vehicle, a mobile terminal device and a breakdown service that are set up to carry out the method according to the invention or possible refinements of the method according to the invention. Possible configurations of the method according to the invention are to be regarded as possible configurations of the system according to the invention and vice versa, with the system in particular having means for carrying out the method steps.

Das erfindungsgemäße Kraftfahrzeug ist für das erfindungsgemäße System oder eine mögliche Ausgestaltung des erfindungsgemäßen Systems ausgelegt. Insbesondere kann das Kraftfahrzeug dazu eingerichtet sein, zur Durchführung der Verfahrensschritte Daten mit dem mobilen Endgerät und/oder dem Pannendienst auszutauschen.The motor vehicle according to the invention is designed for the system according to the invention or a possible embodiment of the system according to the invention. In particular, the motor vehicle can be set up to exchange data with the mobile terminal device and/or the breakdown service in order to carry out the method steps.

Weitere Merkmale der Erfindung können sich aus der nachfolgenden Figurenbeschreibung sowie anhand der Zeichnung ergeben. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen.Further features of the invention can result from the following description of the figures and from the drawing. The features and feature combinations mentioned above in the description and the features and feature combinations shown below in the description of the figures and/or in the figures alone can be used not only in the combination specified in each case, but also in other combinations or on their own, without going beyond the scope of the invention to leave.

Die Zeichnung zeigt in:

1 eine schematische Darstellung eines Systems zum Unterstützen eines Fahrzeugbenutzers bei einer Fahrzeugpanne eines Kraftfahrzeugs;
2 eine Perspektivansicht eines mobilen Endgeräts, das zu dem System gehört, wobei mittels einer auf dem mobilen Endgerät installierten Applikation eine Anleitung hinsichtlich durchzuführender Inspektionsschritte eingeblendet wird.

The drawing shows in:

1 a schematic representation of a system for supporting a vehicle user in the event of a vehicle breakdown of a motor vehicle;
2 a perspective view of a mobile terminal that belongs to the system, with instructions regarding inspection steps to be carried out being displayed by means of an application installed on the mobile terminal.

Ein System 10 zum Unterstützen eines Fahrzeugbenutzers 12 bei einer Fahrzeugpanne eines Kraftfahrzeugs 14 ist schematisch in 1 gezeigt. Zu dem System 10 gehört ein mobiles Endgerät 16, bei dem es sich beispielsweise um ein vom Fahrzeugbenutzer 12 mitgeführtes Smartphone handeln kann. Grundsätzlich kann es sich bei dem mobilen Endgerät 16 um beliebige mobile Endgeräte handeln, die eine Kamera und ein Display aufweisen und dazu eingerichtet sind, Daten mit dem Kraftfahrzeug 14 und/oder einem Pannendienst 18 des Systems 10 auszutauschen. Des Weiteren ist noch ein fahrzeuginternes Display 20 schematisch angedeutet.A system 10 for supporting a vehicle user 12 in the event of a vehicle breakdown of a motor vehicle 14 is shown schematically in FIG 1 shown. The system 10 includes a mobile terminal 16, which can be, for example, a smartphone carried by the vehicle user 12. In principle, the mobile terminal 16 can be any mobile terminal that has a camera and a display and are set up to exchange data with motor vehicle 14 and/or a breakdown service 18 of system 10 . Furthermore, a vehicle-internal display 20 is indicated schematically.

In 2 ist das mobile Endgerät 16 (hier in Form eines Tabletcomputers) in einer Perspektivansicht gezeigt, wobei dieses mit einer hier nicht erkennbaren rückseitigen Kamera auf einen Motorraum 22 des Kraftfahrzeugs 14 ausgerichtet ist. Auf dem mobilen Endgerät 16 ist eine Applikation 24 installiert, welche dazu eingerichtet ist, eine Anleitung hinsichtlich durchzuführender Inspektionsschritte für den Fahrzeugbenutzer 12 auszugeben.In 2 the mobile terminal device 16 (here in the form of a tablet computer) is shown in a perspective view, with it being aligned with a rear camera, which cannot be seen here, on an engine compartment 22 of the motor vehicle 14 . An application 24 is installed on the mobile terminal device 16 and is set up to output instructions for the vehicle user 12 with regard to inspection steps to be carried out.

Nachfolgend wird ein Verfahren zum Unterstützen des Fahrzeugbenutzers 12 im Falle einer Fahrzeugpanne des Kraftfahrzeugs 14 näher erläutert. Nachdem fahrzeugseitig die Fahrzeugpanne erfasst beziehungsweise festgestellt wurde, wird automatisch besagte Applikation 24 auf dem mobilen Endgerät 16 gestartet. Mittels der Applikation 24 wird eine Anleitung ausgegeben, wobei die Anleitung vom Fahrzeugbenutzer 12 mittels des mobilen Endgeräts 16 am Kraftfahrzeug 14 durchzuführende Inspektionsschritte umfasst.A method for supporting the vehicle user 12 in the event of a vehicle breakdown of the motor vehicle 14 is explained in more detail below. After the vehicle breakdown has been detected or determined on the vehicle side, said application 24 is started automatically on the mobile terminal device 16 . The application 24 is used to output instructions, the instructions including inspection steps to be carried out by the vehicle user 12 using the mobile terminal device 16 on the motor vehicle 14 .

Im hier beispielhaft gezeigten Fall erhält der Fahrzeugbenutzer 12 über die Applikation 24 die Anleitung, Aufnahmen vom Motorraum 22 mittels der Kamera des mobilen Endgeräts 16 zu machen. Dabei werden optische Fahrzeugdaten, also Kameradaten, mittels des mobilen Endgeräts 16 erfasst, während der Fahrzeugbenutzer 12 gemäß den ausgegebenen Inspektionsschritten besagte Kamera des mobilen Endgeräts 16 auf den Motorraum 22 richtet.In the case shown here as an example, the vehicle user 12 receives the instructions via the application 24 to take pictures of the engine compartment 22 using the camera of the mobile terminal device 16 . In this case, optical vehicle data, ie camera data, is recorded by means of the mobile terminal device 16, while the vehicle user 12 points said camera of the mobile terminal device 16 at the engine compartment 22 in accordance with the inspection steps that have been output.

Dabei werden ein aktuelles Kamerabild überlagernde virtuelle hier nicht näher gekennzeichnete Elemente der besagten Anleitung mittels eines Displays des mobilen Endgeräts 16 eingeblendet. Der Fahrzeugbenutzer 12 erhält also auf diese Art verschiedenste visuelle Hinweise, was er zu tun hat und wie er beispielsweise das mobile Endgerät 16 relativ zum Motorraum 22 ausrichten soll, um verschiedenste Aufnahmen vom Motorraum 22 mittels des mobilen Endgeräts 16 zu erstellen. Die so erfassten optischen Fahrzeugdaten werden an den Pannendienst 18 übertragen, der in Abhängigkeit von den übermittelten optischen Fahrzeugdaten zumindest eine Aktion zur Behebung der Fahrzeugpanne einleitet.In the process, virtual elements of said instructions, which are not identified in any more detail here and are superimposed on a current camera image, are shown by means of a display of the mobile terminal device 16 . In this way, the vehicle user 12 receives a wide variety of visual information as to what he has to do and how, for example, he should align the mobile terminal device 16 relative to the engine compartment 22 in order to create a wide variety of images of the engine compartment 22 using the mobile terminal device 16 . The visual vehicle data recorded in this way are transmitted to the breakdown service 18, which initiates at least one action to rectify the vehicle breakdown as a function of the transmitted visual vehicle data.

Über das fahrzeuginterne Display 20 ist es möglich, im Fahrzeuginnenraum des Kraftfahrzeugs 14 eine Information hinsichtlich der erfassten Fahrzeugpanne auszugeben. Der Fahrzeugbenutzer 12 bekommt also über das Display 20 direkt Informationen darüber, dass eine Fahrzeugpanne vorliegt und gegebenenfalls auch, welche Art von Fahrzeugpanne detektiert wurde. Darüber hinaus kann über das Display 20 ein Hinweis ausgegeben werden, dass mittels der gestarteten Applikation 24 die Inspektionsschritte durchgeführt werden sollen.Via the vehicle-internal display 20 it is possible to output information regarding the detected vehicle breakdown in the vehicle interior of the motor vehicle 14 . The vehicle user 12 thus receives direct information via the display 20 that there is a vehicle breakdown and possibly also what type of vehicle breakdown was detected. In addition, an indication can be output via the display 20 that the inspection steps are to be carried out using the application 24 that has been started.

Beispielsweise ist es möglich, dass mittels des Displays 20 ein QR-Code eingeblendet wird, den der Fahrzeugbenutzer 12 mit der Kamera des mobilen Endgeräts 16 abfotografieren kann. Dieser QR-Code kann die Fahrzeugpanne charakterisierende Daten umfassen, wobei durch Erfassung dieses QR-Codes diese Daten an die Applikation 24 übertragen werden, die in Abhängigkeit davon die passende Anleitung auswählt. Auch ist es beispielsweise möglich, die Fahrzeugpanne charakterisierende Daten über WLAN, Bluetooth oder über beliebige andere Art und Weise an die Applikation 24 zu übermitteln.For example, it is possible for a QR code to be shown on the display 20 , which the vehicle user 12 can photograph with the camera of the mobile terminal device 16 . This QR code can include data characterizing the vehicle breakdown, with this data being transmitted to the application 24 by detecting this QR code, which selects the appropriate instructions as a function of this. It is also possible, for example, to transmit data characterizing the vehicle breakdown to the application 24 via WLAN, Bluetooth or any other manner.

Die bereits erwähnten virtuellen Elemente der Applikation 24 können beispielsweise eine gemäß der Anleitung vorgesehene Kameraausrichtung des mobilen Endgeräts 16 auf den Motorraum 22 kennzeichnen. So ist es beispielsweise denkbar, dass ein Zielkreuz, ein Rahmen oder Ähnliches eingeblendet wird, sodass der Fahrzeugbenutzer 12 erkennen kann, ob er die Kamera des mobilen Endgeräts 16 korrekt auf den betreffenden Fahrzeugbereich, gemäß dem vorliegenden Beispiel also auf den Motorraum 22, ausgerichtet hat.The already mentioned virtual elements of the application 24 can identify, for example, a camera alignment of the mobile terminal device 16 to the engine compartment 22 provided according to the instructions. For example, it is conceivable that a crosshair, a frame or the like is displayed so that the vehicle user 12 can see whether he has correctly aligned the camera of the mobile terminal device 16 to the relevant vehicle area, i.e. to the engine compartment 22 according to the present example .

Die Applikation 24 kann zudem die Kamera des mobilen Endgeräts 16 zum automatischen Aufzeichnen des Motorraums 22 ansteuern. Durch eine entsprechende Bildverarbeitung der Kamerabilder ist es beispielsweise möglich, dass die Applikation 24 erkennen kann, ob die Kameraausrichtung korrekt ist. Dies kann zudem noch über die eingeblendeten virtuellen Elemente beispielsweise farblich kenntlich gemacht werden, indem diese zum Beispiel grün angezeigt werden, sobald die korrekte Kameraausrichtung detektiert wird. Sodann kann die Applikation 24 die Kamera des mobilen Endgeräts 16 zum automatischen Aufzeichnen des Motorraums 22 oder spezifischer Komponenten im Motorraum 22 ansteuern.The application 24 can also control the camera of the mobile terminal device 16 to automatically record the engine compartment 22 . Appropriate image processing of the camera images makes it possible, for example, for the application 24 to recognize whether the camera alignment is correct. This can also be indicated in color via the displayed virtual elements, for example by being displayed in green as soon as the correct camera orientation is detected. The application 24 can then control the camera of the mobile terminal device 16 to automatically record the engine compartment 22 or specific components in the engine compartment 22 .

Die Applikation 24 kann zudem die durch den Fahrzeugbenutzer 12 mittels des mobilen Endgeräts 16 erfassten optischen Fahrzeugdaten, also die Kamerabilder, mit Sollvorgaben abgleichen. Falls eine unzulässige Abweichung festgestellt wird, beispielsweise weil die Kamera des mobilen Endgeräts 16 nicht korrekt auf den betreffenden Bereich des Motorraums 22 ausgerichtet war, kann der Fahrzeugbenutzer 12 dazu angeleitet werden, die Fahrzeugdaten, also die Kamerabilder, erneut mittels des mobilen Endgeräts 16 zu erfassen, wobei er dabei wiederum durch die besagten virtuellen Elemente unterstützt werden kann.The application 24 can also compare the optical vehicle data recorded by the vehicle user 12 using the mobile terminal device 16, ie the camera images, with target specifications. If an impermissible deviation is detected, for example because the camera on mobile terminal device 16 was not correctly aligned with the relevant area of engine compartment 22, vehicle user 12 can be instructed to capture the vehicle data, i.e. the camera images, again using mobile terminal device 16 , where he is doing can in turn be supported by said virtual elements.

Nachdem die erfassten optischen Fahrzeugdaten, also insbesondere die Kamerabilder an den Pannendienst 18 übermittelt worden sind, kann dieser in Abhängigkeit von diesen Fahrzeugdaten zumindest eine Aktion zur Behebung der Fahrzeugpanne einleiten. Beispielsweise ist es denkbar, dass der Pannendienst 18 einen Servicewagen, einen Abschleppwagen und/oder Ersatzteile organisiert. Anhand der übermittelten Fahrzeugdaten ist es für den Pannendienst 18 möglich, zu entscheiden, ob eventuell ein Reparatur vor Ort beim Kraftfahrzeug 14 ausreichen sollte, sodass dieses weiterfahren kann.After the detected optical vehicle data, ie in particular the camera images, have been transmitted to the breakdown service 18, the breakdown service can initiate at least one action to rectify the vehicle breakdown as a function of this vehicle data. For example, it is conceivable that the breakdown service 18 organizes a service car, a tow truck and/or spare parts. Using the transmitted vehicle data, it is possible for the breakdown service 18 to decide whether an on-site repair of the motor vehicle 14 should be sufficient so that it can continue driving.

Sollte hingegen festgestellt werden, dass eine Reparatur direkt vor Ort aussichtslos ist, so kann ein Abschleppwagen vorbeigeschickt werden. Für den Servicewagen können beispielsweise schon passende Ersatzteile in Kenntnis der vorliegenden Fahrzeugpanne bereitgestellt werden. Ebenso ist es auch möglich, dass schon einmal Ersatzteile für einen Werkstattaufenthalt bereitgestellt werden können.If, on the other hand, it is determined that a repair directly on site is futile, a tow truck can be sent over. For example, suitable spare parts can be provided for the service vehicle, knowing that the vehicle has broken down. It is also possible that spare parts can be made available for a workshop visit.

Mittels des erläuterten Verfahrens und Systems 10 ist es also möglich, den Fahrzeugbenutzer 12 - insbesondere, auch wenn er wenige oder keine technischen Kenntnisse haben sollte - sinnvoll und einfach zu unterstützen, indem dieser eine Anleitung erhält, welche Inspektionsschritte er schon einmal mit seinem mobilen Endgerät 16 selbst durchführen soll. Der Motorraum 22 ist nur beispielhaft für beliebige Arten von Fahrzeugbereichen zu verstehen. Je nach Art der Fahrzeugpanne beziehungsweise Defekt kann der Fahrzeugbenutzer 12 also über die Applikation 24 angeleitet werden, unterschiedlichste Fahrzeugbereiche insbesondere optisch mittels des mobilen Endgeräts 16 zu inspizieren, sodass dementsprechende optische Fahrzeugdaten an den Pannendienst 18 übermittelt werden können.Using the method and system 10 explained, it is therefore possible to provide the vehicle user 12 with useful and simple support, especially if he has little or no technical knowledge, by giving him instructions as to which inspection steps he has already used with his mobile device 16 should carry out itself. The engine compartment 22 is only to be understood as an example for any types of vehicle areas. Depending on the type of vehicle breakdown or defect, the vehicle user 12 can be instructed via the application 24 to inspect a wide variety of vehicle areas, in particular visually using the mobile terminal device 16 , so that corresponding visual vehicle data can be transmitted to the breakdown service 18 .

BezugszeichenlisteReference List

1010: Systemsystem
1212: Fahrzeugbenutzervehicle user
1414: Kraftfahrzeugmotor vehicle
1616: mobiles Endgerätmobile device
1818: Pannendienstroadside assistance
2020: Displayscreen
2222: Motorraumengine compartment
2424: Applikationapplication

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent Literature Cited

FR 2951293 A1 [0003]
WO 2019/152916 A1 [0004]
US7142962B1 [0005]

Claims

Method for supporting a vehicle user (12) in the event of a vehicle breakdown of a motor vehicle (14), comprising the steps: - Automatically starting an application (24) on a mobile terminal (16) after the vehicle breakdown has been detected on the vehicle side; - Issuing instructions using the started application (24), the instructions from the vehicle user (12) using the mobile terminal (16) on the motor vehicle (14) comprises inspection steps to be carried out; - Recording of optical vehicle data by means of the mobile terminal device (16) while the vehicle user (12) directs a camera of the mobile terminal device (16) to at least one area of the vehicle (22) according to the output inspection steps and virtual elements of the instructions overlaying a current camera image by means of a display of the mobile terminal (16) are displayed; - Transmitting the captured optical vehicle data to a breakdown service (18), which initiates at least one action to rectify the vehicle breakdown as a function of the optical vehicle data.

procedure after claim 1 , characterized in that data characterizing the vehicle breakdown are transmitted to the application (24), which selects the appropriate instructions as a function thereof.

procedure after claim 1 or 2 , characterized in that the optical vehicle data comprise at least one camera image of the vehicle area (22) recorded by means of the camera of the mobile terminal device (16).

Method according to one of the preceding claims, characterized in that the breakdown service (18) organizes a service vehicle, a tow truck and/or spare parts to repair the vehicle breakdown.

Method according to one of the preceding claims, characterized in that the virtual elements identify a camera orientation provided according to the instructions on the vehicle area (22).

Method according to one of the preceding claims, characterized in that the application (24) controls the camera of the mobile terminal device (16) to automatically record the vehicle area (22).

Method according to one of the preceding claims, characterized in that in the vehicle interior of the motor vehicle (14) information is output regarding the detected vehicle breakdown and an indication that the inspection steps are to be carried out using the started application (24).

Method according to one of the preceding claims, characterized in that the application (24) compares the vehicle data recorded by the vehicle user (12) using the mobile terminal device (18) with target specifications and, if an impermissible deviation is determined, instructs the vehicle user (12) to do so to capture the vehicle data again using the mobile terminal (16).

System (10) for supporting a vehicle user (12) in the event of a vehicle breakdown, comprising a motor vehicle (14), a mobile terminal (16) and a breakdown service (18), which are set up to carry out a method according to one of the preceding claims.

Motor vehicle (14) for a system (10). claim 9 .