DE102020118320A1 - Procedure for registering a service intention at a gas station - Google Patents
Procedure for registering a service intention at a gas station Download PDFInfo
- Publication number
- DE102020118320A1 DE102020118320A1 DE102020118320.8A DE102020118320A DE102020118320A1 DE 102020118320 A1 DE102020118320 A1 DE 102020118320A1 DE 102020118320 A DE102020118320 A DE 102020118320A DE 102020118320 A1 DE102020118320 A1 DE 102020118320A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- service
- intention
- recorded
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 238000001514 detection method Methods 0.000 claims abstract description 20
- 230000008569 process Effects 0.000 claims description 41
- 230000006399 behavior Effects 0.000 claims description 16
- 230000008909 emotion recognition Effects 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 8
- 238000011156 evaluation Methods 0.000 claims description 6
- 239000007788 liquid Substances 0.000 claims description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 5
- 238000012790 confirmation Methods 0.000 claims description 3
- 230000003993 interaction Effects 0.000 claims description 3
- 230000008030 elimination Effects 0.000 claims description 2
- 238000003379 elimination reaction Methods 0.000 claims description 2
- 239000000446 fuel Substances 0.000 description 14
- 230000004927 fusion Effects 0.000 description 6
- 238000005406 washing Methods 0.000 description 6
- 235000019504 cigarettes Nutrition 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000945 filler Substances 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 206010029216 Nervousness Diseases 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 210000003608 fece Anatomy 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/085—Payment architectures involving remote charge determination or related payment systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
- G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/38—Payment protocols; Details thereof
- G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
-
- G06Q50/40—
Landscapes
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Navigation (AREA)
Abstract
Bereitgestellt wird ein Verfahren zur Erfassung einer Serviceintention an einer Tankstelle, wobei in einem ersten Schritt basierend auf durch fahrzeugeigene Sensorik erfassten Zustandsdaten des Fahrzeugs und Zustandsdaten und/oder Verhaltensdaten mindestens des Fahrers erfasst wird, ob eine Serviceintention besteht. In einem zweiten Schritt wird erfasst, welcher Art diese Serviceintention ist, indem erfasst wird, welchem Servicepunkt an der Tankstelle sich das Fahrzeug nähert. In einem dritten Schritt wird die Erfassung der Art der Serviceintention bestätigt, wenn das Fahrzeug an dem erfassten Servicepunkt anhält.A method for detecting a service intention at a gas station is provided, wherein in a first step, based on status data of the vehicle detected by on-board sensors and status data and/or behavior data of at least the driver, it is detected whether there is a service intention. In a second step, the type of service intention is recorded by recording which service point at the gas station the vehicle is approaching. In a third step, the detection of the type of service intention is confirmed when the vehicle stops at the detected service point.
Description
Die Erfindung betrifft ein Verfahren zur Erfassung einer Serviceintention an einer Tankstelle.The invention relates to a method for detecting a service intention at a gas station.
Fahrzeuge werden häufig an einer Tankstelle betankt. Als Tankstelle ist dabei sowohl eine herkömmliche Tankstelle zum Tanken von Benzin, Diesel, Gas etc. als auch eine Ladesäule für elektrisches Laden zu verstehen. Nach Beendigung des Tankvorgangs erfolgt dann der Bezahlvorgang. Hierzu muss der Nutzer die Nummer der Zapfsäule angeben. Dies kann entweder geschehen, indem er diese vor Beginn des Tankvorgangs auswählt oder an der Kasse nennt. Alternativ sind bereits mobile Applikationen (App) bekannt, die es dem Nutzer ermöglichen, den Bezahlvorgang am Fahrzeug durchzuführen, indem er die verwendete Zapfsäule über die App manuell auswählt oder bestätigt.Vehicles are often refueled at a gas station. A filling station is understood to mean both a conventional filling station for filling up with petrol, diesel, gas, etc. and a charging station for electric charging. After the refueling process is complete, the payment process takes place. To do this, the user must enter the number of the pump. This can be done either by selecting them before starting the fueling process or by naming them at the checkout. Alternatively, mobile applications (app) are already known that allow the user to carry out the payment process on the vehicle by manually selecting or confirming the gas pump used via the app.
Außerdem sind bereits regelbasierte Systeme z.B. aus der
Bisher ist immer ein regelbasierter Ansatz vorhanden, durch den ein begonnener Tankvorgang erkannt werden kann. Das heißt, dass bestimmte (starre) Bedingungen bzw. Regeln erfüllt werden müssen, damit ein Tankvorgang erkannt wird. Darüber hinaus verwenden diese Regeln Daten, die ein menschlicher Experte als relevante Merkmale einer Tank- oder Ladeintention identifiziert hat, z.B. ein erfasstes Bild der genutzten Zapfsäule oder Ladesäule. Auch ist bisher keine automatisierte Möglichkeit zum Bezahlen vorhanden, bei welcher der Nutzer keine Bestätigung der genutzten Zapfsäule durchführen muss. Dem Nutzer, insbesondere dem Fahrer, werden dabei zwar bereits einige Aufgaben abgenommen, aber es ist noch Verbesserungsbedarf vorhanden.So far, there has always been a rule-based approach that can be used to identify when a refueling process has started. This means that certain (rigid) conditions or rules must be met in order for a refueling process to be recognized. In addition, these rules use data that a human expert has identified as relevant characteristics of a refueling or charging intention, e.g. a captured image of the pump or charging station used. There is also no automated payment option available so far, in which the user does not have to confirm the petrol pump used. The user, especially the driver, is already relieved of some tasks, but there is still room for improvement.
Deshalb ist es eine Aufgabe dieser Erfindung, ein verbessertes Verfahren zur Erfassung einer Serviceintention an einer Tankstelle bereitzustellen. Diese Aufgabe wird erfindungsgemäß durch die Merkmale der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen sind Gegenstand der abhängigen Ansprüche.It is therefore an object of this invention to provide an improved method for detecting a service intention at a service station. According to the invention, this object is achieved by the features of the independent patent claims. Advantageous configurations are the subject matter of the dependent claims.
Vorgeschlagen wird ein Verfahren zur Erfassung einer Serviceintention an einer Tankstelle, wobei in einem ersten Schritt basierend auf durch fahrzeugeigene Sensorik erfassten Zustandsdaten des Fahrzeugs und Zustandsdaten und/oder Verhaltensdaten mindestens des Fahrers erfasst wird, ob eine Serviceintention besteht. In einem zweiten Schritt wird erfasst, welcher Art diese Serviceintention ist, indem erfasst wird, welchem Servicepunkt an der Tankstelle sich das Fahrzeug nähert. In einem dritten Schritt wird die Erfassung der Art der Serviceintention bestätigt, wenn das Fahrzeug an dem erfassten Servicepunkt anhält.A method for detecting a service intention at a gas station is proposed, wherein in a first step, based on vehicle status data detected by on-board sensors and status data and/or behavior data of at least the driver, it is detected whether there is a service intention. In a second step, the type of service intention is recorded by recording which service point at the gas station the vehicle is approaching. In a third step, the detection of the type of service intention is confirmed when the vehicle stops at the detected service point.
Des Weiteren ist vorgesehen, dass im dritten Schritt die Bestätigung der Art der Serviceintention erfolgt, wenn zusätzlich eine Erfassung erfolgt, dass mindestens einer der Fahrzeuginsassen aussteigt, und/oder eine Interaktion mit dem erfassten Servicepunkt erfasst wird, und/oder vorgegebene oder gelernte, für eine Serviceintention typische Verhaltensmuster eines Nutzers des Fahrzeugs erfasst werden. Dabei kann eine frühe Fusionierung (early fusion) der Daten erfolgen, indem nach jeder Erfassung eines einzelnen Ereignisses die Daten mit bereits erfassten Daten zusammengefasst und fusioniert werden, die Fusionierung also schrittweise erfolgt. Alternativ kann eine späte Fusionierung (late fusion) erfolgen, bei der zuerst alle Daten erfasst und erst dann fusioniert werden.Furthermore, it is provided that in the third step the type of service intention is confirmed if it is also detected that at least one of the vehicle occupants is getting out and/or an interaction with the detected service point is detected and/or specified or learned for a service intention typical behavior patterns of a user of the vehicle are recorded. In this case, an early fusion of the data can take place in that, after each acquisition of an individual event, the data are combined and fused with data that has already been acquired, ie the fusion takes place step by step. Alternatively, a late fusion (late fusion) can take place, in which all data are first recorded and only then merged.
Des Weiteren ist vorgesehen, dass Zustandsdaten des Fahrzeugs mindestens eines aus einer aktuellen Position des Fahrzeugs, einer Positionshistorie des Fahrzeugs, einer aktuellen Ausrichtung des Fahrzeugs, eines Tankzustands, eines Verschmutzungsgrads mindestens einer Scheibe, eines Luftzustands von Reifen, eines Zustands von anderen Flüssigkeiten, umfassend Wischwasser, Öl, umfassen. Durch Einbeziehen einer Vielzahl an Daten für das Trainieren und später dann Nutzen eines oder mehrerer künstlicher neuronaler Netzwerke, genauer DNN (deep neural network), mit der oben beschriebenen frühen (early fusion) oder späten (late fusion) Zusammenführung der Daten, auch auf den ersten Blick nicht mit einer Tankintention in Verbindung stehenden Daten, wird das Verfahren ständig verbessert, d.h. insbesondere wird die Erkennung robuster gemacht.Furthermore, it is provided that status data of the vehicle comprises at least one of a current position of the vehicle, a position history of the vehicle, a current orientation of the vehicle, a tank condition, a degree of soiling of at least one pane, an air condition of tires, a condition of other liquids wipe water, oil include. By including a large amount of data for training and then later using one or more artificial neural networks, more precisely DNN (deep neural network), with the early (early fusion) or late (late fusion) merging of the data described above, also on the At first glance, the data is not related to a tank intention, the process is constantly being improved, ie in particular the detection is made more robust.
Des Weiteren ist vorgesehen, dass Zustandsdaten mindestens des Fahrers mindestens eines aus einer Emotionserkennung, umfassend eine reichweitenbezogene Emotionserkennung oder eine Emotionserkennung im Zusammenhang mit einem Verschmutzungsgrad des Fahrzeugs, und/oder Blickerkennung und/oder Intentionserkennung aufgrund Spracherkennung während der Fahrt umfassen. Der Zustand oder das Verhalten eines Fahrers spiegelt die Intention häufig sehr gut wider, auch bereits vor Anfahren eines Servicepunktes. Je mehr Daten hierbei gesammelt und ausgewertet werden, desto genauer kann die Intention bestimmt werden.Furthermore, it is provided that status data of at least the driver at least one of an emotion recognition comprising a range-related emotion recognition or an emotion recognition in connection with a degree of pollution of the vehicle, and/or gaze recognition and/or intention recognition based on speech recognition while driving. The condition or behavior of a driver often reflects the intention very well, even before driving to a service point. The more data is collected and evaluated, the more precisely the intention can be determined.
Des Weiteren ist vorgesehen, dass, wenn im zweiten Schritt die Art der Serviceintention erkannt wurde, in einem weiteren Schritt ein freier Servicepunkt ermittelt und dem Fahrer vorgeschlagen wird, diesen anzufahren.Furthermore, it is provided that if the type of service intention was recognized in the second step, a free service point is determined in a further step and the driver is suggested to drive to it.
Des Weiteren ist vorgesehen, dass Zustandsdaten mindestens des Fahrers durch zusätzliche Nutzersensorik, mindestens umfassend mobile Endgeräte oder Wearables, erfasst werden. Durch Einbeziehen externer Daten wird die Datenmenge erweitert und damit das Verfahren weiter verbessert.Furthermore, it is provided that status data of at least the driver is recorded by additional user sensors, at least including mobile terminals or wearables. By including external data, the amount of data is expanded and the method is thus further improved.
Des Weiteren ist vorgesehen, dass im zweiten Schritt die Erfassung der Art des Servicepunkts erfolgt, indem die aktuelle Position des Fahrzeugs erfasst wird, und/oder eine kamerabasierte Erkennung einer Tankstelle erfolgt, der sich das Fahrzeug nähert, und/oder eine vorgegebene oder gelernte Position des Fahrzeugs zu einem Servicepunkt erfasst wird. Zusätzlich werden Zustandsdaten des Fahrzeugs und Zustandsdaten und/oder Verhaltensdaten mindestens des Fahrers in die Auswertung einbezogen.Furthermore, it is provided that in the second step the type of service point is detected by detecting the current position of the vehicle and/or a camera-based detection of a gas station that the vehicle is approaching and/or a predefined or learned position of the vehicle to a service point is recorded. In addition, status data of the vehicle and status data and/or behavior data of at least the driver are included in the evaluation.
Des Weiteren ist vorgesehen, dass, wenn der erkannte Servicepunkt eine Zapfsäule ist, sowohl der Beginn des Tankvorgangs als auch das Beenden des Tankvorgangs erfasst werden, und nach Beenden des Tankvorgangs der Bezahlvorgang automatisch durchgeführt wird. Nachdem die Tankintention erkannt wurde, muss die Zapfsäule erfasst werden, um den Bezahlvorgang zu automatisieren. Hierfür muss erkannt werden, dass sich das Fahrzeug einer Tankstelle und damit einer Zapfsäule nähert.Furthermore, it is provided that if the recognized service point is a petrol pump, both the start of the refueling process and the end of the refueling process are recorded, and the payment process is carried out automatically after the refueling process has ended. After the tank intention has been recognized, the pump must be recorded in order to automate the payment process. For this purpose, it must be recognized that the vehicle is approaching a gas station and thus a fuel pump.
Des Weiteren ist vorgesehen, dass im dritten Schritt der Servicepunkt, an welcher das Fahrzeug steht, durch eines oder eine Kombination erfasst wird aus einer Blickerfassung des Fahrers, einer kamerabasierten Erfassung des Servicepunkts, einer kamerabasierten Erfassung mehrerer Servicepunkte in der Umgebung des Fahrzeugs und Verwenden eines Ausschlussverfahrens zur Ermittlung des eigenen Servicepunkts.It is also provided that, in the third step, the service point at which the vehicle is located is recorded by one or a combination of a driver's gaze, a camera-based recording of the service point, a camera-based recording of a number of service points in the vicinity of the vehicle and using a Exclusion procedure to determine your own service point.
Des Weiteren ist vorgesehen, dass im dritten Schritt zur Erfassung der Zapfsäule, an welcher das Fahrzeug tankt, eine Kommunikation mit an der Tankstelle vorhandener Sensorik erfolgt, umfassend mindestens eine Kamera oder einen zur Zapfsäule zugehörigen Sender. Wiederum kann durch Verwenden zusätzlicher, externer Daten die Genauigkeit des Verfahrens verbessert werden.Furthermore, it is provided that in the third step for detecting the gas pump at which the vehicle is refueling, communication takes place with the sensor system present at the gas station, comprising at least one camera or a transmitter associated with the gas pump. Again, by using additional, external data, the accuracy of the method can be improved.
Des Weiteren ist vorgesehen, dass im dritten Schritt die Serviceintention zusätzlich bestätigt wird, indem vorgegebene oder gelernte, für die jeweilige Serviceintention typische Verhaltensmuster eines Nutzers des Fahrzeugs erfasst werden, umfassend ein Verlassen des Fahrzeugs eines der Insassen und mindestens eines aus einem Annähern an den Tankdeckel, einem Öffnen des Tankdeckels, einem Annähern an eine Zapfsäule oder ein Servicegerät, einer Blickrichtung in Richtung eines Servicepunkts, oder auch durch z.B. kamerabasiertes Erfassen eines Anlegens von Tankhandschuhen. Durch Erfassen einer Kombination aus mindestens zwei Verhaltensweisen kann die Genauigkeit der Erkennung weiter verbessert werden.Furthermore, it is provided that in the third step the service intention is additionally confirmed by predetermined or learned behavior patterns of a user of the vehicle being recorded, which are typical for the respective service intention, comprising leaving the vehicle of one of the occupants and at least one of approaching the fuel filler cap , opening the tank cap, approaching a gas pump or a service device, looking in the direction of a service point, or also, for example, by camera-based detection of putting on tank gloves. By detecting a combination of at least two behaviors, the accuracy of the recognition can be further improved.
Des Weiteren ist vorgesehen, dass die Ausführung des Bezahlvorgangs im vierten Schritt mittels drahtloser Kommunikation zwischen dem Fahrzeug oder einem mobilen Endgerät des Nutzers und einer entsprechenden Gegenstelle der Tankstelle erfolgt. Somit wird der Nutzer vollständig davon befreit, den Bezahlvorgang zumindest teilweise manuell ausführen zu müssen.Furthermore, it is provided that the execution of the payment process takes place in the fourth step by means of wireless communication between the vehicle or a mobile end device of the user and a corresponding remote station of the gas station. The user is thus completely freed from having to carry out the payment process at least partially manually.
Des Weiteren ist vorgesehen, dass das Lernen des Systems mittels supervised learning und/oder unsupervised learning erfolgt. Durch Anwenden von maschinellem Lernen kann das Fahrzeug noch selbständiger agieren und dem Nutzer Aufgaben abnehmen und den Tank/Lade/Servicevorgang nahtloser gestalten.Furthermore, it is provided that the system is learned by means of supervised learning and/or unsupervised learning. By applying machine learning, the vehicle can act even more independently and relieve the user of tasks and make the refueling/charging/service process more seamless.
Weitere Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen der Erfindung, anhand der Figuren der Zeichnung, die erfindungsgemäße Einzelheiten zeigt, und aus den Ansprüchen. Die einzelnen Merkmale können je einzeln für sich oder zu mehreren in beliebiger Kombination bei einer Variante der Erfindung verwirklicht sein.Further features and advantages of the invention result from the following description of exemplary embodiments of the invention, with reference to the figures of the drawing, which show details according to the invention, and from the claims. The individual features can each be implemented individually or together in any combination in a variant of the invention.
Bevorzugte Ausführungsformen der Erfindung werden nachfolgend anhand der beigefügten Zeichnung näher erläutert.
-
1 zeigt ein Ablaufdiagramm des Verfahrens gemäß einer Ausführung der vorliegenden Erfindung.
-
1 Figure 12 shows a flow chart of the method according to an embodiment of the present invention.
Wie bereits erwähnt fällt unter den Begriff Tankstelle sowohl eine herkömmliche Tankstelle, an der sowohl flüssiger und gasförmiger Treibstoff aufgenommen werden kann, als auch eine elektrische Ladestation. Außerdem fällt unter den Begriff Tankstelle auch eine Servicestation, bei der mehr als nur Tanken möglich ist, z.B. Luft auffüllen, Saugen, Waschen des Fahrzeugs oder von Teilen davon, Einkaufen, Essen etc. Bei allen Formen der Tankstelle wird an einer bestimmten Zapfsäule aufgetankt, die sowohl einen bisher üblichen Zapfhahn als auch im Falle eines induktiven Ladens z.B. eine Plattform etc. sein kann. Das heißt, dass unter den Begriff Tanken sowohl das herkömmliche Tanken von Kraftstoff zu verstehen ist, als auch das Aufladen eines Energiespeichers mit elektrischer Energie.As already mentioned, the term gas station includes both a conventional gas station, where both liquid and gaseous fuel can be taken, as well as an electric charging station. In addition, the term gas station also includes a service station where more than just refueling is possible, e.g. filling up air, vacuuming, washing the vehicle or parts of it, shopping, eating etc. With all types of gas station, refueling is done at a specific pump, which can be either a hitherto customary tap or, in the case of inductive charging, a platform, etc., for example. This means that the term refueling is to be understood as meaning both the conventional refueling of fuel and the charging of an energy store with electrical energy.
Das Grundkonzept der Erfindung ist, dass das Fahrzeug mit durch fahrzeugeigene Sensorik erfassten Daten und unter Verwendung von maschinellem Lernen selbständig eine Serviceintention erkennt, also ob ein Nutzer (demnächst) tanken (selbst oder durch eine dafür zur Verfügung stehende Person), sein Fahrzeug waschen, Luft nachfüllen, Teile des Fahrzeugs oder das Fahrzeug an sich waschen, das Fahrzeug saugen oder andere Tätigkeiten ausführen möchte, die an Tankstellen als Service zur Verfügung stehen. Außerdem soll im Fall, dass eine Tankintention erkannt wurde, der Bezahlvorgang automatisiert werden, d.h. die Zapfsäule ohne Bestätigung durch den Nutzer erkannt und die Bezahlung durchgeführt werden.The basic concept of the invention is that the vehicle automatically recognizes a service intention with data collected by the vehicle's own sensors and using machine learning, i.e. whether a user (soon) will fill up (himself or through a person available for this purpose), wash his vehicle, refill air, wash parts of the vehicle or the vehicle itself, vacuum the vehicle or perform other activities that are available as a service at petrol stations. In addition, if an intention to fill up is recognized, the payment process should be automated, i.e. the pump should be recognized without confirmation by the user and the payment made.
Durch Anwenden von Algorithmen des maschinellen Lernens wird das Verfahren und damit das Erkennen einer Serviceintention ständig verbessert. Insbesondere könnte das Gesamtsystem die Daten aus den Erkennungsschritten mit den Klassen Tanken, Waschen, Saugen, Reinigen etc. auf Basis eines a posteriori gegebenen Tank-/Wasch-/Saug-/Reinigungs etc., sowie auch eines Bezahlvorgangs, wenn vorhanden, für diesen Fahrer oder auch für andere Fahrer labeln (markieren) und damit dann die DNNs trainieren.By applying machine learning algorithms, the process and thus the recognition of a service intention is constantly being improved. In particular, the overall system could use the data from the recognition steps with the classes refueling, washing, vacuuming, cleaning etc. on the basis of a tank/washing/vacuuming/cleaning etc. given a posteriori, as well as a payment process, if any, for this Label (mark) drivers or for other drivers and then use them to train the DNNs.
Bisher ist es bekannt, dass ein Nutzer zu einer Tankstelle fährt, tankt und dann entweder an der Kasse oder per App bezahlt. Hierbei muss er entweder die Nummer der Zapfsäule angeben oder die in der App angezeigte, und z.B. von der Tankstelle übermittelte, Nummer der Zapfsäule bestätigen, was bereits recht komfortabel ist. Aber es besteht weiter Verbesserungsbedarf, dem Nutzer Aufgaben aktiv durch das Fahrzeug abzunehmen. Hierzu zählt auch, zu erkennen, ob der Fahrer eine Serviceintention und welche Serviceintention der Fahrer hat. Deshalb wird hier ein Verfahren vorgeschlagen, durch welches es ermöglicht wird, dass das Fahrzeug sozusagen mitdenkt und dadurch sowohl eine Tankintention als auch eine andere Serviceintention selbständig (autark) erkennt. Im Falle einer Tankintention wird auch eine Automatisierung eines Bezahlvorgangs an einer Tankstelle ermöglicht, durch welche der Nutzer weiter entlastet wird.So far it has been known that a user drives to a gas station, fills up and then pays either at the cash register or via the app. He must either enter the number of the pump or confirm the number of the pump displayed in the app and e.g. transmitted by the gas station, which is already quite convenient. But there is still room for improvement in terms of actively relieving the user of tasks through the vehicle. This also includes recognizing whether the driver has a service intention and which service intention the driver has. Therefore, a method is proposed here by which it is made possible for the vehicle to think along with it, so to speak, and thereby independently (autonomously) recognize both a tank intention and another service intention. In the case of an intention to fill up, it is also possible to automate a payment process at a gas station, which further relieves the user.
Im Detail wird ein Verfahren bereitgestellt, bei dem das Fahrzeug in die Lage versetzt wird, aus einer Kundeninteraktion und den Umfelddaten bzw. dem Umfeldkontext die Nutzerintention in Bezug auf einen Servicevorgang an einer Tankstelle zu lernen. Basierend auf der gewonnenen Erkenntnis kann dann das Fahrzeug selbständig agieren und dem Nutzer damit Arbeit abnehmen.In detail, a method is provided in which the vehicle is enabled to learn the user's intention in relation to a service process at a gas station from a customer interaction and the environment data or the environment context. Based on the knowledge gained, the vehicle can then act independently and thus relieve the user of work.
Hierfür wird ein Verfahren zur Erfassung einer Serviceintention an einer Tankstelle vorgeschlagen, wobei in einem ersten Schritt S1 basierend auf durch fahrzeugeigene Sensorik erfassten Zustandsdaten des Fahrzeugs und Zustandsdaten und/oder Verhaltensdaten mindestens des Fahrers erfasst wird, ob eine Serviceintention besteht.For this purpose, a method for detecting a service intention at a gas station is proposed, in a first step S1 based on vehicle status data detected by on-board sensors and status data and/or behavior data of at least the driver, determining whether there is a service intention.
Die Verwendung von fahrzeugeigener Sensorik macht das Fahrzeug autark und hat den Vorteil, dass wesentlich weniger Kommunikationsschnittstellen mit einer externen Infrastruktur wie z.B. Sensorik an der Tankstelle selbst nötig sind. In einer optionalen Ausführung können allerdings extern bereitgestellte Informationen, z.B. von einer Sensorik der Tankstelle, verwendet werden, um die selbst ermittelten Daten zu ergänzen und/oder zu verifizieren. Außerdem können Daten aus dem Bezahlvorgang einbezogen werden, um die in den Schritten des Verfahrens ermittelten Daten entsprechend für das Training zu labeln (markieren).The use of on-board sensors makes the vehicle self-sufficient and has the advantage that far fewer communication interfaces with an external infrastructure such as sensors at the gas station itself are required. In an optional embodiment, however, information provided externally, e.g. from a sensor system at the gas station, can be used to supplement and/or verify the data determined by the user. In addition, data from the payment process can be included in order to label (mark) the data determined in the steps of the method accordingly for the training.
Welche Sensorik verwendet wird, hängt von der Ausstattung des Fahrzeugs ab. Grundsätzlich kann jegliche Sensorik verwendet werden, welche Zustandsdaten des Fahrzeugs und Zustandsdaten und/oder Verhaltensdaten eines Fahrzeuginsassen, mindestens aber des Fahrers, erfassen kann.Which sensor technology is used depends on the equipment of the vehicle. In principle, any sensor system can be used which can record status data of the vehicle and status data and/or behavior data of a vehicle occupant, but at least of the driver.
Die erfassten Zustandsdaten des Fahrzeugs sind nicht zwingend Daten, die auf den ersten Blick mit einer Intention zum entsprechenden Servicewunsch in Verbindung stehen, wie z.B. der aktuelle Tankzustand des Fahrzeugs.The recorded status data of the vehicle is not necessarily data that at first glance is associated with an intention to request a service, such as the current tank status of the vehicle.
Vorteilhaft wird die aktuelle Position des Fahrzeugs, aber auch eine Positionshistorie, sowie eine aktuelle Ausrichtung des Fahrzeugs in die Auswertung einbezogen. Dies ermöglicht es, zu erkennen, dass z.B. ein Grenzübertritt in ein Billigtankland erkannt wird. Außerdem kann ein Verschmutzungsgrad sowohl im Inneren als auch außen am Fahrzeug, sowie der Zustand von anderen Flüssigkeiten als Kraftstoff wie z.B. Wischwasser, Öl etc., oder der Luftzustand von Reifen erfasst werden und in die Auswertung einbezogen werden, ob eine Serviceintention besteht und welche. So kann z.B. erkannt werden, ob lediglich ein Nachfüllen von Flüssigkeiten oder von Luft im Reifen erfolgen soll, oder ob eine Tankabsicht oder eine Absicht der Säuberung des Fahrzeugs besteht.The current position of the vehicle, but also a position history and a current alignment of the vehicle are advantageously included in the evaluation. This makes it possible to recognize that, for example, a border crossing into a low-cost tank country is being recognized. In addition, the degree of soiling both inside and outside the vehicle, as well as the condition of liquids other than fuel, such as wiper water, oil, etc., or the air condition of tires can be recorded and included in the evaluation as to whether a service intention exists and which ones. For example, it can be recognized whether only a topping up of liquids or from air in the tires, or whether there is an intention to refuel or to clean the vehicle.
Zustandsdaten und/oder Verhaltensdaten eines Fahrzeuginsassen umfassen mindestens eines aus einer Emotionserkennung, umfassend eine reichweitenbezogene Emotionserkennung oder eine Emotionserkennung im Zusammenhang mit einem Verschmutzungsgrad des Fahrzeugs, z.B. aufgrund eines verdreckten Innenraums oder von Vogelkot auf der Scheibe. Sowohl die Erkennung von Schmutz als auch die Emotionserkennung kann kamerabasiert oder z.B. mittels einem Regensensor erfolgen. Alternativ oder zusätzlich kann eine wiederum kamerabasierte Blickerkennung oder eine Spracherkennung während der Fahrt erfolgen. Hierfür können beispielsweise eine oder mehrere Innenraumkameras verwendet werden. Zur Emotionserkennung können auch Sensoren im Fahrzeug verwendet werden, die z.B. den Blutdruck oder Puls, oder einen Grad an Aufregung, die Stimmungslage etc. erfassen und in das entsprechende Emotionsbild wandeln können. Zur Spracherkennung können im Innenraum vorhandene Mikrofone verwendet werden und bestimmte Wörter wie „Tanken“, „dreckig“, „waschen“, „saugen“ oder Sätze „ich brauche Zigaretten“, „ich muss bald tanken“ etc. als Trigger verwendet werden, um eine Serviceintention zu erkennen und sogar die Art der Serviceintention. Verfahren und Vorrichtungen zur Emotionserfassung und Zustandserfassung von Personen sind auch bereits im Automobilbereich bekannt und können für diese Erfindung verwendet werden. Beispielsweise kann eine Reichweitenangst aufgrund des aktuellen Tankstands erfasst werden, da hier in der Regel mehrere Verhaltensweisen des Nutzers erfasst werden können, wie z.B. häufige Blicke auf die Tankanzeige oder Reichweitenanzeige, Nervosität, suchende Blicke nach draußen, um eine Tankstelle zu finden, langsameres Fahren. Die Auswertung der erfassten Daten erfolgt computergestützt z.B. auf einem fahrzeugeigenen Steuergerät. Status data and/or behavioral data of a vehicle occupant include at least one of emotion recognition, comprising range-related emotion recognition or emotion recognition in connection with the degree of dirt in the vehicle, e.g. due to a dirty interior or bird droppings on the window. Both the detection of dirt and the detection of emotions can be camera-based or e.g. using a rain sensor. Alternatively or additionally, camera-based gaze recognition or voice recognition can take place while driving. One or more interior cameras can be used for this, for example. Sensors in the vehicle can also be used to recognize emotions, which can record e.g. blood pressure or pulse, or a degree of excitement, mood, etc. and convert them into the corresponding emotional image. Microphones present in the interior can be used for speech recognition and certain words such as "fill up", "dirty", "wash", "suck" or phrases "I need cigarettes", "I have to fill up soon" etc. can be used as triggers recognize a service intention and even the nature of the service intention. Methods and devices for detecting emotions and status of people are also already known in the automotive sector and can be used for this invention. For example, range anxiety can be recorded based on the current level of fuel, since several user behaviors can usually be recorded here, such as frequent glances at the fuel gauge or range indicator, nervousness, searching looks outside to find a gas station, slower driving. The evaluation of the recorded data is computer-aided, e.g. on an on-board control unit.
Optional können Daten, die von zusätzlicher Nutzersensorik erfasst werden, einbezogen werden. Solche zusätzliche Nutzersensorik kann ein mobiles Endgerät oder ein Wearable sein, welches den aktuellen Gesundheitszustand erfasst und damit auch Rückschlüsse auf den emotionalen Zustand des Nutzers zulässt.Optionally, data collected by additional user sensors can be included. Such additional user sensor technology can be a mobile device or a wearable that records the current state of health and thus also allows conclusions to be drawn about the emotional state of the user.
In einem zweiten Schritt S2 wird erfasst, welcher Art die Serviceintention ist, indem erfasst wird, welchem Servicepunkt an der Tankstelle sich das Fahrzeug nähert. Wenn die Art der Serviceintention erkannt wurde, wird in einer Ausführung in einem weiteren Schritt S21 ein freier Servicepunkt ermittelt und dem Fahrer wird vorgeschlagen, diesen anzufahren.In a second step S2, the type of service intention is detected by detecting which service point at the gas station the vehicle is approaching. If the type of service intention has been recognized, in one embodiment a free service point is determined in a further step S21 and the driver is suggested to drive to it.
In einem dritten Schritt S3 wird die Erfassung der Art der Serviceintention bestätigt, wenn das Fahrzeug an dem erfassten Servicepunkt anhält. Die Erkennung der Serviceintention, d.h. der Art des gewünschten Service, kann sich in mehrere Phasen aufteilen. Die Serviceintention kann somit stufenweise verfeinert werden, und am Ende kann die finale, spezielle Serviceintention, z.B. Tankintention, endgültig bestätigt werden. Beispielsweise kann ein Annähern an eine Zapfsäule erfasst und damit eine Tankintention angenommen werden. Wenn das Fahrzeug aber nicht anhält, muss diese verworfen werden. Wenn es anhält, kann aus einem Aussteigen und z.B. Gehen eines Insassen in Richtung Zapfsäule oder Tankdeckel darauf geschlossen werden, dass die Erfassung korrekt ist, dass eine Tankintention vorliegt. Wenn allerdings erfasst wird, dass sich der Insasse nicht in Richtung Zapfsäule oder Tankdeckel bewegt, sondern z.B. vom Fahrzeug entfernt oder neben die Zapfsäule bzw. zu einem anderen Servicepunkt geht, wird die Erfassung der Tankintention verworfen und eine andere Serviceintention je nach Erfassung, was der Insasse tut, angenommen.In a third step S3, the detection of the type of service intention is confirmed when the vehicle stops at the detected service point. The recognition of the service intention, i.e. the type of service desired, can be divided into several phases. The service intention can thus be refined step by step, and at the end the final, special service intention, e.g. tank intention, can be finally confirmed. For example, approaching a petrol pump can be detected and an intention to fill up can thus be assumed. However, if the vehicle does not stop, it must be discarded. If it stops, it can be concluded from an occupant getting out and, for example, walking in the direction of the gas pump or tank cap, that the detection is correct, that there is an intention to fill up. However, if it is detected that the occupant is not moving in the direction of the petrol pump or fuel filler cap, but instead, for example, moves away from the vehicle or next to the petrol pump or to another service point, the registration of the tank intention is discarded and a different service intention depending on the registration, what the inmate does, suppose.
Die Erfassung, ob sich das Fahrzeug einem bestimmten Servicepunkt wie einer Zapfsäule oder einem Platz zum Luft Nachfüllen oder Saugen nähert, kann in unterschiedlicher Art und Weise erfolgen. Beispielsweise kann die aktuelle Position des Fahrzeugs erfasst werden und basierend auf einem Vergleich mit Kartendaten bestimmt werden, ob sich das Fahrzeug an einer oder in der Nähe einer Tankstelle befindet. The detection of whether the vehicle is approaching a specific service point such as a gas pump or a place for air refilling or vacuuming can be done in different ways. For example, the current position of the vehicle can be recorded and, based on a comparison with map data, it can be determined whether the vehicle is at or near a gas station.
Alternativ oder zusätzlich kann eine kamerabasierte Erkennung einer Tankstelle erfolgen, der sich das Fahrzeug nähert. Alternativ oder zusätzlich kann eine vorgegebene oder gelernte Position des Fahrzeugs zu einem Servicepunkt wie einer Zapfsäule erfasst werden, z.B. mittels Abstandssensoren des Fahrzeugs. Hierbei kann auch die Länge eines Zapfschlauches oder eines Ladekabels berücksichtigt werden.Alternatively or additionally, a camera-based detection of a gas station that the vehicle is approaching can take place. Alternatively or additionally, a predetermined or learned position of the vehicle in relation to a service point such as a gas pump can be recorded, e.g. by means of the vehicle's distance sensors. The length of a dispensing hose or a charging cable can also be taken into account here.
Die Erfassung des Servicepunkts, an welchem das Fahrzeug steht, z.B. der Zapfsäule, an dem das Fahrzeug tanken wird, kann ebenfalls in unterschiedlicher Art und Weise erfasst werden. Beispielsweise kann eine Blickerfassung des Fahrers erfolgen, ob dieser in Richtung einer bestimmten Zapfsäule blickt. Das heißt, dass hier eine Kombination aus Innenraum- und Außenkamera verwendet wird. Außerdem kann eine kamerabasierte Erfassung der Zapfsäule erfolgen, die sich am nächsten zu Fahrzeug befindet. Hierfür kann sowohl eine Innenraum- als auch eine Außenkamera verwendet werden, je nachdem, wie das Fahrzeug zur Zapfsäule steht und wo die Nummer der Zapfsäule angeordnet ist. Außerdem kann eine kamerabasierte Erfassung mehrerer Zapfsäulen in der Umgebung des Fahrzeugs erfolgen, wobei dann ein Ausschlussverfahren zur Ermittlung der eigenen Zapfsäule verwendet wird. Wenn es beispielsweise vier Zapfsäulen gibt, die Nummern zwei, drei und vier erkennbar sind, dann muss die eigene Zapfsäule diejenige mit der Nummer eins sein.The detection of the service point at which the vehicle is standing, for example the petrol pump where the vehicle will fill up, can also be detected in different ways. For example, the driver's gaze can be detected as to whether he is looking in the direction of a specific petrol pump. This means that a combination of indoor and outdoor cameras is used here. In addition, a camera-based detection of the petrol pump that is closest to the vehicle can take place. Both an interior and an exterior camera can be used for this, depending on how the vehicle is positioned in relation to the pump and where the number of the pump is located. In addition, a camera-based detection of several petrol pumps in the area of the vehicle, in which case an elimination method is used to determine one's own petrol pump. For example, if there are four pumps identified as numbers two, three and four, then their own pump must be the one numbered one.
In einer zusätzlichen, optionalen Ausführung kann zur Erfassung des Servicepunkts, an welchem das Fahrzeug steht, eine Kommunikation mit an der Tankstelle vorhandener Sensorik erfolgen. Hierbei kann z.B. mit einer Kamera oder einem zum Servicepunkt zugehörigen (aktiven oder passiven) Nahfeldsender kommuniziert werden. Diese Daten werden als Ergänzung und/oder zur Verifikation der eigenen Daten verwendet.In an additional, optional embodiment, communication with sensors present at the gas station can take place in order to record the service point at which the vehicle is standing. Here, for example, communication can take place with a camera or an (active or passive) near-field transmitter associated with the service point. This data is used to supplement and/or verify your own data.
Außerdem kann die Serviceintention zusätzlich bestätigt werden, indem vorgegebene oder gelernte, für die jeweilige Serviceintention typische Verhaltensmuster des Nutzers erfasst werden. Hierzu zählt hauptsächlich ein Verlassen des Fahrzeugs eines der Insassen, wobei hier nicht unbedingt der Fahrer das Fahrzeug verlassen muss, da es auch sein kann, dass ein anderer Insasse das Fahrzeug z.B. betankt oder Luft nachfüllt. Außerdem sollte zur Erkennung einer Tankabsicht mindestens eines aus einem Annähern an den Tankdeckel, einem Öffnen des Tankdeckels, einem Annähern an die Zapfsäule und einer Blickrichtung in Richtung der Zapfsäule erfasst werden, da diese Verhaltensweisen auch stark auf eine Intention zum Tanken hindeuten. Ansonsten kann ein Aussteigen auch bedeuten, dass lediglich die Scheibe gewaschen, Waschwasser, Luft, Öl oder sonstiges nachgefüllt werden soll, oder lediglich z.B. Zigaretten oder Getränke an der Tankstelle eingekauft werden, d.h. ohne dabei zu tanken. Dies kann zusätzlich verifiziert werden, indem erfasst wird, ob ein Tankvorgang begonnen hat, d.h. die Zapfsäule versucht, bezüglich der Bezahlung zu kommunizieren. Ähnlich verhält es sich, wenn die Intention ist, Luft aufzufüllen, zu saugen etc., denn auch sind bestimmte Verhaltensweisen vorhanden, die auf die Intention des Nutzers hinweisen.In addition, the service intention can also be confirmed by recording predefined or learned behavior patterns of the user that are typical for the respective service intention. This mainly includes when one of the occupants leaves the vehicle, although the driver does not necessarily have to leave the vehicle here, since it may also be the case that another occupant fills up the vehicle with fuel or air, for example. In addition, at least one of approaching the fuel cap, opening the fuel cap, approaching the fuel pump, and looking in the direction of the fuel pump should be recorded to recognize an intention to fill up, as these behaviors also strongly indicate an intention to fill up. Otherwise, getting out can also mean that only the windshield needs to be washed, washing water, air, oil or something else needs to be refilled, or you just have to buy cigarettes or drinks at the gas station, for example, i.e. without refueling. This can be additionally verified by detecting whether a refueling session has started, i.e. the dispenser is attempting to communicate regarding payment. The situation is similar when the intention is to fill up air, suck, etc., because there are also certain behaviors that indicate the intention of the user.
Wenn z.B. eine Tankintention erfasst wurde, werden sowohl der Beginn des Tankvorgangs als auch das Beenden des Tankvorgangs erfasst und nach Beenden des Tankvorgangs wird der Bezahlvorgang automatisch durchgeführt. Die Ausführung des Bezahlvorgangs erfolgt vorteilhaft mittels drahtloser Kommunikation zwischen dem Fahrzeug oder einem mobilen Endgerät des Nutzers und einer entsprechenden Gegenstelle der Tankstelle. Da die Zapfsäule bereits vom Fahrzeug selbständig erkannt wurde, ist keine Bestätigung durch den Nutzer erforderlich.If, for example, an intention to fill up has been recorded, both the start of the refueling process and the end of the refueling process are recorded and after the refueling process has ended, the payment process is carried out automatically. The payment process is advantageously carried out by means of wireless communication between the vehicle or a mobile terminal device of the user and a corresponding remote station at the gas station. Since the fuel pump has already been recognized by the vehicle itself, no confirmation from the user is required.
Die Auswertung aller erfassten Daten erfolgt vorteilhaft zentral im Fahrzeug in einer dafür vorgesehenen Recheneinheit wie einem Steuergerät. Hierfür werden die erfassten Daten dorthin zur Auswertung und weiteren Verwendung übertragen. Das Verfahren ist dabei, wie bereits erwähnt, als lernender Algorithmus ausgeführt. Vorteilhaft ist hierbei, dass eine sehr große Menge an Daten als Basis dient, die aus der fahrzeugeigenen Sensorik und gegebenenfalls externen Daten gewonnen und verarbeitet werden. Auch werden Daten, die auf den ersten Blick nicht sofort mit einer Tankintention in Verbindung gebracht werden, ausgewertet.All of the recorded data is advantageously evaluated centrally in the vehicle in a computing unit provided for this purpose, such as a control unit. For this purpose, the recorded data is transferred there for evaluation and further use. As already mentioned, the method is implemented as a learning algorithm. The advantage here is that a very large amount of data is used as a basis, which is obtained and processed from the vehicle's own sensors and, if necessary, external data. Data that is not immediately associated with a tank intention at first glance is also evaluated.
Das Lernen des Systems erfolgt dabei mittels supervised learning und/oder unsupervised learning. Beim supervised learning werden Daten vom Nutzer selbst oder von Dritten entsprechend ihrer Intention gelabelt, d.h. markiert. Beispielsweise kann ein Nutzer dem System mitteilen (ein Label vergeben), dass er nun aussteigt, um zu tanken, zu saugen, Zigaretten zu kaufen etc.. Alternativ kann der Nutzer auch während des Abschlusses oder nach Abschluss eines Vorgangs, also zeitlich vom tatsächlichen Ereignis gelöst, befragt werden, ob er gerade die erkannte Tätigkeit, z.B. Tanken, ausführt. Dies kann sowohl direkt nach Beenden des Vorgangs, z.B. beim Einsteigen, als auch im Nachgang, z.B. am selben Tag oder innerhalb eines vorgegeben Zeitrahmens, nachträglich erfolgen. Auch kann eine Abfrage z.B. durch eine entsprechende Applikation auf einem mobilen Endgerät erfolgen, um welchen Vorgang es sich bei dem gerade oder zu einem bestimmten Zeitpunkt ausgeführten Vorgang gehandelt hat.The system learns by means of supervised learning and/or unsupervised learning. In supervised learning, data is labeled, i.e. marked, by the user themselves or by third parties according to their intention. For example, a user can inform the system (issue a label) that he is now getting out to fill up gas, vacuum, buy cigarettes, etc. Alternatively, the user can also during the completion or after completion of a process, i.e. chronologically from the actual event be asked whether he is currently carrying out the recognized activity, eg refuelling. This can be done immediately after the end of the process, e.g. when boarding, or afterwards, e.g. on the same day or within a specified time frame. A query can also be made, e.g. by a corresponding application on a mobile device, as to which process the process is currently being carried out or is being carried out at a certain point in time.
Beim unsupervised learning werden dem System keine gelabelten Daten mitgeteilt, es lernt selbsttätig aus der erfassten Situation. Wenn also z.B. erfasst wird, dass sich ein Tankzustand von leer zu voll geändert hat, kann das System aus den Daten, die in die Zwischenzeit zwischen vollem und leerem Tank fallen, lernen, dass diese auf eine Tankintention hinweisen. Durch ständiges Überprüfen der erfassten Daten und der Annahme des Systems, ob eine Tankintention vorliegt oder nicht, z.B. bei den nächsten Übergängen zwischen leerem und vollem Tank, kann sich das System ständig selbst verbessern und dazulernen. Auch kann basierend auf Informationen, die von der Tankstelle an das Fahrzeug übermittelt werden, gelernt werden, dass ein Tankvorgang stattfindet oder stattgefunden hat, z.B. aufgrund einer Anfrage zur Bezahlung durch die Tankstelle bzw. Zapfsäule.With unsupervised learning, no labeled data is communicated to the system, it learns automatically from the recorded situation. So if, for example, it is detected that a tank status has changed from empty to full, the system can learn from the data that falls in the interval between a full and an empty tank that this indicates a tank intention. By constantly checking the recorded data and the system's acceptance of whether there is a tank intention or not, e.g. at the next transitions between empty and full tank, the system can constantly improve itself and learn from it. Based on information transmitted from the gas station to the vehicle, it can also be learned that a refueling process is taking place or has taken place, e.g. due to a request for payment from the gas station or gas pump.
Grundsätzlich ist es vorteilhaft, Datensätze vorab anzutrainieren, so dass das Verfahren basierend auf dem initialen Datensatz lernen kann. Hierbei können z.B. typische Verhaltensweisen eines Nutzers, der Tanken möchte, antrainiert werden, z.B. Handbewegungen, Gehen zum Tankdeckel, Öffnen des Tankdeckels etc. Auch kann ein bestimmter (maximaler) Abstand angelernt werden, bis zu welchem eine Tankintention angenommen werden kann etc. Dasselbe gilt für andere Serviceintentionen wie Waschen, Luft/Öl/Waschwasser etc. Nachfüllen, Zigaretten kaufen etc.In principle, it is advantageous to train data sets in advance so that the method can learn based on the initial data set. Here, for example, typical behaviors of a user who wants to refuel can be trained, for example hand movements, going to the tank cap, opening of the tank cap, etc. A specific (maximum) distance can also be taught up to which a tank intention can be accepted, etc. The same applies to other service intentions such as washing, air/oil/washing water, etc. refilling, buying cigarettes, etc.
Im Vergleich zum Stand der Technik liegt eine wesentliche Differenzierung also im Einsatz von maschinellem Lernen auf Basis von großen Datenmengen, welche aus den fahrzeugeigenen Sensoren und gegebenenfalls aus externen Sensoren erhalten werden. Das Fahrzeug kann eine Serviceintention autark erkennen.Compared to the prior art, there is a significant differentiation in the use of machine learning based on large amounts of data, which are obtained from the vehicle's own sensors and, if necessary, from external sensors. The vehicle can independently recognize a service intention.
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent Literature Cited
- US 2016/0035013 A1 [0003]US 2016/0035013 A1 [0003]
- KR 1020190110821 A1 [0003]KR 1020190110821 A1 [0003]
- US 2019/0330046 A1 [0003]US 2019/0330046 A1 [0003]
- US 2012/0206099 A1 [0003]US 2012/0206099 A1 [0003]
Claims (10)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102020118320.8A DE102020118320A1 (en) | 2020-07-10 | 2020-07-10 | Procedure for registering a service intention at a gas station |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102020118320.8A DE102020118320A1 (en) | 2020-07-10 | 2020-07-10 | Procedure for registering a service intention at a gas station |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102020118320A1 true DE102020118320A1 (en) | 2022-01-13 |
Family
ID=79020349
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102020118320.8A Pending DE102020118320A1 (en) | 2020-07-10 | 2020-07-10 | Procedure for registering a service intention at a gas station |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102020118320A1 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120206099A1 (en) | 2011-02-10 | 2012-08-16 | Denso Corpoation | Vehicular charge control apparatus and vehicular charge control system |
| US20160035013A1 (en) | 2014-07-30 | 2016-02-04 | Brian Plattenburg | Vehicle transaction processing |
| KR20190110821A (en) | 2018-03-21 | 2019-10-01 | 주식회사 오윈 | Method for Providing Refueling Payment based on Recognition of Situation by using In-Vehicle Device |
| US20190330046A1 (en) | 2018-04-25 | 2019-10-31 | Tanku LTD. | System and method for performing fueling operations |
-
2020
- 2020-07-10 DE DE102020118320.8A patent/DE102020118320A1/en active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120206099A1 (en) | 2011-02-10 | 2012-08-16 | Denso Corpoation | Vehicular charge control apparatus and vehicular charge control system |
| US20160035013A1 (en) | 2014-07-30 | 2016-02-04 | Brian Plattenburg | Vehicle transaction processing |
| KR20190110821A (en) | 2018-03-21 | 2019-10-01 | 주식회사 오윈 | Method for Providing Refueling Payment based on Recognition of Situation by using In-Vehicle Device |
| US20190330046A1 (en) | 2018-04-25 | 2019-10-31 | Tanku LTD. | System and method for performing fueling operations |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102011082361A1 (en) | Method for monitoring vehicles of a motor vehicle fleet | |
| DE102014016237A1 (en) | Method for operating a vehicle | |
| DE102019003785A1 (en) | Method for operating a vehicle | |
| WO2016142103A1 (en) | Method for updating parking area information in a navigation system and navigation system | |
| DE102020118320A1 (en) | Procedure for registering a service intention at a gas station | |
| EP3802285B1 (en) | Method and vehicle system for optimising parking suggestions | |
| DE102020211235A1 (en) | Parking area selection procedures and parking area selection system | |
| DE102020110124A1 (en) | VEHICLE FUEL LEVEL INDICATION SYSTEMS AND PROCEDURES | |
| DE102018214506A1 (en) | Method for further developing a driver assistance system and driver assistance system for a vehicle | |
| DE102017007215A1 (en) | Method for carrying out an autonomous driving operation of a vehicle | |
| DE102021003597A1 (en) | Method for influencing the behavior of at least one occupant in a vehicle | |
| DE102020209546A1 (en) | Method of assisting in the cleaning of a vehicle | |
| DE102017201289A1 (en) | Represent a target vehicle opening apron of an automated vehicle | |
| DE102021112856A1 (en) | Method for locating a charging station set up for charging a plug-in electric vehicle | |
| WO2020229327A1 (en) | Method and control device for automatically cleaning a motor vehicle | |
| DE102015218641A1 (en) | Method for direct or indirect communication between a motor vehicle and at least one external power supply unit for the motor vehicle in connection with a power supply operation | |
| DE102019003202A1 (en) | Method for positioning a vehicle | |
| DE102019002302A1 (en) | Method for determining the position of a vehicle in a predetermined loading area and position determination arrangement | |
| DE102018217611A1 (en) | Concept for setting an adjustable component of a motor vehicle | |
| DE102018211973A1 (en) | Proactive context-based provision of service recommendations in vehicles | |
| DE102021002295B3 (en) | Method for determining and outputting a driving speed adapted to a driving situation | |
| EP4114685B1 (en) | Method and device for generation of a personalised recharging recommendation for a battery of electric vehicles | |
| DE102020207444B4 (en) | Method for removing external contamination on a vehicle and vehicle with a device for removing such contamination | |
| DE102017201222A1 (en) | Method and system for machine learning | |
| DE102021108765A1 (en) | Method, processor circuit and operating system for providing context-sensitive tutorials for a device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: G06Q0050300000 Ipc: G06Q0050400000 |
|
| R163 | Identified publications notified |