DE102018222665B4 - Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis - Google Patents

Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis Download PDF

Info

Publication number
DE102018222665B4
DE102018222665B4 DE102018222665.2A DE102018222665A DE102018222665B4 DE 102018222665 B4 DE102018222665 B4 DE 102018222665B4 DE 102018222665 A DE102018222665 A DE 102018222665A DE 102018222665 B4 DE102018222665 B4 DE 102018222665B4
Authority
DE
Germany
Prior art keywords
taxi
interpreted
driving
gesture
autonomously
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102018222665.2A
Other languages
English (en)
Other versions
DE102018222665A1 (de
Inventor
Thanh-Binh To
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102018222665.2A priority Critical patent/DE102018222665B4/de
Priority to US16/718,469 priority patent/US11222214B2/en
Priority to CN201911326428.4A priority patent/CN111347985B/zh
Publication of DE102018222665A1 publication Critical patent/DE102018222665A1/de
Application granted granted Critical
Publication of DE102018222665B4 publication Critical patent/DE102018222665B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0088Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0287Control of position or course in two dimensions specially adapted to land vehicles involving a plurality of land vehicles, e.g. fleet or convoy travelling
    • G06Q50/40
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions

Abstract

Autonom fahrendes Taxi (1) mit einem Fahrmodul (14) zum autonomen Fahren des Taxis (1) in Abhängigkeit von dem Fahrmodul (14) zugeordneter Sensorik (12), wobei das Taxi (1) eine Außenkameraanordnung (22) zur Aufnahme von Bildern einer Umgebung des Taxis (1) sowie ein Analysemodul (251) zur Analyse der Bilder von der Umgebung des Taxis (1) auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist, dadurch gekennzeichnet, dass das Taxi (1) ein Außendisplay (24) zur Darstellung von Informationen außerhalb des Taxis (1) sowie eine Außendisplaysteuerung (253) zur Darstellung eines Bildes der Person auf dem Außendisplay (24) umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.

Description

  • Die Erfindung betrifft ein autonom fahrendes Taxi mit einem Fahrmodul zum autonomen Fahren des Taxis in Abhängigkeit von dem Fahrmodul zugeordneter Sensorik, wobei das Taxi eine Außenkameraanordnung zur Aufnahme von Bildern einer Umgebung des Taxis sowie ein Analysemodul zur Analyse der Bilder von der Umgebung des Taxis auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist. Die Erfindung betrifft zudem ein Verfahren zum Betrieb eines autonom fahrenden Taxis sowie ein Verfahren zum Betrieb eines Verkehrssystems mit einer Mehrzahl autonom fahrender Taxis.
  • Die US 2015 / 0 279 131 A1 offenbart ein System zur Fernsteuerung von Funktionen eines Fahrzeugs. Dabei umfasst das System Transmitter, einen Energiespeicher, einen Beschleunigungsmesser und eine Steuerungseinrichtung. Die Steuerungseinrichtung ist dabei derart ausgestaltet, dass sie Gesten eines Benutzers erkennt, wobei die Gesten funktionale Befehle repräsentieren.
  • Die DE 10 2016 217 770 A1 offenbart ein Verfahren zum Betrieb eines Kraftfahrzeuges mit einer das Vorfeld des Kraftfahrzeuges aufnehmenden Kameraeinrichtung und zugeordneter Steuerungseinrichtung zum Auswerten der Bilder, wobei die Steuerungseinrichtung die Bilder zum Erfassen wenigstens einer von den in den Bildern gezeigten Personen durchgeführten Handbewegung auswertet, wobei bei Erfassen einer Handbewegung, die eine einen Anhaltewunsch anzeigende Geste beschreibt, das selbstfahrende Kraftfahrzeug entweder angehalten wird oder ein dem Fahrer des Kraftfahrzeuges den Anhaltewunsch signalisierendes Signal gegeben wird.
  • Die WO 2018/ 106 385 A1 offenbart ein System zum Identifizieren eines Kunden für ein automatisiertes Taxi, wobei das automatisierte Taxi ein Kommunikationsnetzwerk, eine Kamera und eine Steuerung umfasst. Das Kommunikationsnetzwerk wird verwendet um einen Transportauftrag von einem Kunden zu einem autonomen Taxi zu übertragen.
  • Die DE 102 17 633 A1 offenbart eine Beleuchtungseinheit mit einem Halter, der zur Befestigung an einem Fahrzeughimmel von innen vorgesehen ist. Dabei schlägt die DE 102 17 633 A1 vor, die Beleuchtungseinheit bevorzugt in einem Taxi anzuwenden, das anzeigt, ob das Taxi frei ist, und dessen Anzeigenfläche nach innen gedreht beispielsweise als Anzeige für ein Taxometer dienen kann.
  • Die DE 20 2018 003 053 U1 offenbart ein als kleines Elektrofahrzeug ausgestaltetes autonomes Innenraum-Taxi. Dabei können unterschiedliche Aufbauten zum Transport von Personen und Gütern verwendet werden, die modular auf einer gemeinsamen Plattform aufbauen. Diese Plattform umfasst eine Bodengruppe, die das Fahrwerk aus einzeln antreibbaren lenkbaren Rädern aufnimmt. Außerdem nimmt die Bodengruppe einen Akku und eine Steuerelektronik auf. Zudem ist ein Bügel zur Aufnahme von Sensorik und Warnelementen als farbige LED Lichtsäulen vorgesehen, die den Betriebszustand des Innenraum-Taxis anzeigen sollen. Zudem ist ein Display vorgesehen, auf dem die Angaben zu dem Innenraum-Taxi der zu befördernden Person und dem Reiseziel angezeigt werden.
  • Es ist Aufgabe der Erfindung, ein den Betrieb von autonomen Taxis bzw. autonom fahrenden Taxis zu verbessern bzw. effektiver zu gestalten. Dabei ist es insbesondere wünschenswert, eine Flotte von autonom fahrenden Taxis besser auszulasten. Zudem ist es wünschenswert, die Wartezeiten für Fahrgäste von autonom fahrenden Taxis zu verkürzen.
  • Vorgenannte Aufgabe wird durch ein autonom fahrendes Taxi mit einem Fahrmodul zum autonomen Fahren des Taxis in Abhängigkeit von dem Fahrmodul zugeordneter Sensorik gelöst, wobei das Taxi eine Außenkameraanordnung zur Aufnahme von Bildern einer Umgebung des Taxis sowie ein Analysemodul zur Analyse der Bilder von der Umgebung des Taxis auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei das Taxi ein Außendisplay zur Darstellung von Informationen außerhalb des Taxis sowie eine Außendisplaysteuerung zur Darstellung eines Bildes, insbesondere eines Porträtbildes, der Person auf dem Außendisplay umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  • Autonomes Fahren im Sinne dieser Offenbarung bezieht sich insbesondere auf Level 5. Dies bedeutet insbesondere die durchgängige Ausführung aller Aspekte der dynamischen Fahraufgabe durch ein automatisiertes Fahrsystem unter allen Fahr- und Umweltbedingungen, die von einem menschlichen Fahrer bewältigt werden können. Eine Außenkameraanordnung im Sinne dieser Offenbarung kann eine oder mehrere Kameras umfassen. Eine Kamera in diesem Sinne kann zum Beispiel eine HDR Kamera oder eine neuromorphische Kamera sein. Gestik im Sinne dieser Offenbarung kann eine reine auf eine Hand beschränkt Gestik sein. Es kann jedoch auch vorgesehen sein, dass eine Gestik auch eine Gestik mit einbezieht, die mittels eines Smartphones ausgeführt wird (vergleiche WO 2018/ 106 385 A1).
  • In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst das Außendisplay eine Displayfläche von zumindest 0,2 m2, insbesondere von zumindest 0,25 m2. In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst das Außendisplay eine Scheibe des Taxis. Es kann auch vorgesehen sein, dass zusätzlich oder alternativ die Fahrbahn, zum Beispiel vor dem Taxi, als Projektionsfläche für einen entsprechenden Projektor des Taxis dient.
  • In weiterhin vorteilhafter Ausgestaltung der Erfindung sind die Außenkameraanordnung und das Analysemodul auch im besetzten Zustand des Taxis in Betrieb, wobei das Taxi eine Kommunikationsschnittstelle zum Versenden eines Bildes, insbesondere eines Porträtbildes, der Person umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  • Vorgenannte Aufgabe wird - insbesondere in Verbindung mit einem oder mehreren der vorgenannten Merkmale - zudem durch ein autonom fahrendes Taxi mit einem Fahrmodul zum autonomen Fahren des Taxis in Abhängigkeit von dem Fahrmodul zugeordneter Sensorik gelöst, wobei das Taxi eine Außenkameraanordnung zur Aufnahme von Bildern einer Umgebung des Taxis sowie ein Analysemodul zur Analyse der Bilder von der Umgebung des Taxis auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei die Außenkameraanordnung und das Analysemodul auch im besetzten Zustand des Taxis im Betrieb sind, wobei das Taxi eine Kommunikationsschnittstelle zum Versenden eines Bildes, insbesondere eines Porträtbildes, der Person umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  • Vorgenannte Aufgabe wird - insbesondere in Verbindung mit einem oder mehreren der vorgenannten Merkmale - zudem durch ein Verfahren zum Betrieb eines autonom fahrenden Taxis mit einem Fahrmodul zum autonomen Fahren des Taxis in Abhängigkeit von dem Fahrmodul zugeordneter Sensorik gelöst, wobei mittels einer Außenkameraanordnung des Taxis Bilder einer Umgebung des Taxis aufgenommen werden, wobei die Bilder von der Umgebung des Taxis auf eine Gestik analysiert werden, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei eine Gestik als Taxiruf interpretiert wird, dadurch gekennzeichnet, dass ein Bild, insbesondere ein Porträtbild, der Person, der die Gestik zugeordnet ist, die als Taxiruf interpretiert wird, mittels eines Außendisplays des Taxis (außerhalb des Taxis) dargestellt wird.
  • Vorgenannte Aufgabe wird - insbesondere in Verbindung mit einem oder mehreren der vorgenannten Merkmale - zudem durch ein Verfahren zum Betrieb eines Verkehrssystems mit zumindest zwei autonom fahrenden Taxis, ein erstes Taxi und zumindest ein zweites Taxi, gelöst, jeweils mit einem Fahrmodul zum autonomen Fahren des Taxis in Abhängigkeit der von dem Fahrmodul zugeordneter Sensorik, wobei mittels einer Außenkameraanordnung jedes der zumindest zwei Taxis Bilder einer Umgebung des jeweiligen Taxis aufgenommen werden unabhängig davon ob das jeweilige Taxi besetzt ist oder nicht, wobei die Bilder von der Umgebung des jeweiligen Taxis auf eine Gestik analysiert werden, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei das erste Taxi besetzt ist, wobei von dem ersten Taxi eine Gestik als Taxiruf interpretiert wird, wobei ein Bild, insbesondere ein Porträtbild, der Person, der die Gestik zugeordnet ist, die als Taxiruf interpretiert wird, von dem ersten Taxi zu dem zweiten Taxi (insbesondere Verbindung mit einer Ortsangabe) übertragen wird, und wobei das übertragene Bild, insbesondere das übertragene Porträtbild, mittels eines Außendisplays des zweiten Taxis (außerhalb des zweiten Taxis) dargestellt wird.
  • Weitere Vorteile und Einzelheiten ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen. Dabei zeigen:
    • 1 eine Prinzipdarstellung eines Ausführungsbeispiels eines autonom fahrenden Taxis,
    • 2 eine beispielhafte Ausgestaltung von Modulen und Zusammenhängen zwischen Modulen eines autonom fahrenden Taxis gemäß 1,
    • 3 ein vereinfacht dargestelltes Beispiel als Verfahren zum Betrieb eines autonom fahrenden Taxis gemäß 1,
    • 4 eine Prinzipdarstellung eines Protokolls zur Kommunikation mit einem autonom fahrenden Taxi gemäß 1,
    • 5 das Protokoll gemäß 4,
    • 6 das autonom fahrende Taxi gemäß 1 unmittelbar vor der Aufnahme eines unbegleiteten Kindes als Fahrgast,
    • 7 ein vereinfacht dargestelltes Beispiel als Verfahren zum Betrieb eines autonom fahrenden Taxis gemäß 1,
    • 8 ein Blockschaltbild zur Erläuterung der Ansteuerung eines Außendisplays eines autonom fahrenden Taxis gemäß 1,
    • 9 ein Ausführungsbeispiel für einen gestenbasierten Taxiruf eines autonom fahrenden Taxis gemäß 1,
    • 10 eine Weiterführung der Situation gemäß 9 durch die Darstellung des aufzunehmenden Fahrgastes,
    • 11 die Situation gemäß 10 mit alternativer oder ergänzender Darstellung des aufzunehmenden Fahrgastes auf eine Heckscheibe,
    • 12 die Situation gemäß 10 mit alternativer oder ergänzender Darstellung des aufzunehmenden Fahrgastes auf einer Frontscheibe bzw. Windschutzscheibe,
    • 13 eine Weiterführung der Situation gemäß 9 unter der Maßgabe eines nicht freien Taxis und
    • 14 das Protokoll gemäß 4 und 5.
  • 1 zeigt ein autonom operierendes Taxi 1, das über ein drahtloses Kommunikationssystem 4, wie ein Mobilfunknetz, mit einem Computer eines Nutzers, wie z.B. ein Smartphone 2, datentechnisch verbindbar ist. Das autonom operierende Taxi 1 umfasst dabei eine Steuerung CTR, Peripheriegeräte PER sowie ein Betreuungsmodul CHD.
  • 2 zeigt die Peripheriegeräte PER, die zentrale Steuerung CTR und das Betreuungsmodul CHD in einer detaillierten Darstellung. Die Peripheriegeräte PER umfassen unter anderem Aktoren 11 und Außensensoren 12. Die Aktoren 11 können unter anderem einen Lenkaktor, einen Bremsaktor sowie einen Antriebsaktor umfassen. Die Außensensoren 12 können Ultraschall, Lidar, Sonar, eine Kameraanordnung sowie insbesondere Radar umfassen. In Abhängigkeit der Ausgangsgrößen der Außensensoren 12 ermittelt ein autonomes Fahrmodul 14 die Sollwerte für die Aktoren 11. D.h. in Abhängigkeit der Außensensoren 12 und einer von einem Navigationssystem 15 ermittelten Route RT werden die Aktoren 11 und damit das Taxi 1 mittels des autonomen Fahrmoduls 14 gesteuert. Dem Navigationssystem 15 sind ein GPS 16 zur Ermittlung der aktuellen Position des autonom operierenden Taxis 1 und eine Eingabevorrichtung 17 zur Zieleingabe durch einen Benutzer zugeordnet.
  • Zu den Peripheriegeräten PER gehören auch Aktoren und Sensoren 18 zur automatischen Betätigung einer Tür mittels einer Türsteuerung 19. Die Peripheriegeräte PER umfassen zudem eine Innenraumsensorik 20, die insbesondere eine Kamera umfasst, mittels der ein Monitoringmodul 21 die Situation im Innenraum des autonom operierenden Taxis 1 überwacht.
  • Zudem ist eine Außenkameraanordnung 22 vorgesehen, mittels der die Umgebung des autonom operierenden Taxis 1 überwacht wird, um einen Fahrtgast zu ermitteln. Bezugszeichen 24 bezeichnet ein Außendisplay mittels dessen ein gesuchter Fahrgast des autonom operierenden Taxis 1 darstellbar ist. Zu den Peripheriegeräten PER gehören zudem ein Notausschalter sowie eine Kommunikationsschnittstelle 26 zum drahtlosen Kommunikationssystem 4. Zu den Peripheriegeräten PER kann auch ein Lesegerät, beispielsweise für ein e-Ticket, gehören.
  • 3 zeigt ein Verfahren zum Betrieb des autonom operierenden Taxis 1, wobei das Verfahren mit einem Schritt 71, in dem das Taxi 1 bestellt wird, mit einem Schritt 76, in dem das Taxi von einem anderen Taxi 1 angefordert wird, bzw. mit einem Schritt 77 beginnen kann. Es kann vorgesehen sein, dass im Zuge des Schrittes 71 auch eine Zieleingabe erfolgt, an die sich eine Übermittlung eines Abholauftrags in Form eines Datensatzes bzw. Protokolls gemäß 4 bzw. 5 (an die Zentrale) anschließt. Dabei bedeutet ID Name oder Kundennummer oder sonstige Identifikation. BLD bedeutet das Bild des Fahrgastes. ABH bedeutet Abholort und ZIL deutet Zielort. Der fünfte Eintrag bezieht sich auf einen Flag, der gesetzt ist, wenn der Fahrgast kein „Basisfahrgast“ ist. Unter einem Fahrgast, der nicht ein „Basisfahrgast“ ist, ist insbesondere ein Kind zu verstehen. Es kann darunter jedoch auch ein Erwachsener mit eingeschränkter Gesundheit verstanden werden. Ein Fahrgast, der kein „Basisfahrgast“ ist, kann jedoch auch einfach ein ortsfremder Erwachsener sein.
  • Dem Schritt 71 zum Bestellen des autonom operierenden Taxis 1 folgt ein Schritt 72, in dem die Bestellung bestätigt wird. Daran und an den Schritt 76 schließt sich das Abholen des Fahrgastes an (Schritt 73). Zum Abholen des Fahrgastes bewegt sich das autonom operierende Taxi 1 zunächst autonom zum Abholort. Zudem zeigt es - wie in 6 dargestellt - mittels des Außendisplays 24 ein Bild des abzuholenden Fahrgastes an. Mittels der Außenkameraanordnung 22 sowie einer daran angeschlossenen Bildauswertung wird zudem der Fahrgast gesucht. Ist der Fahrgast erkannt, hält das autonom operierende Taxi 1 an und erlaubt dem erkannten Fahrgast den Zugang zum autonom operierenden Taxi 1.
  • Dem Schritt 73, in dem der Fahrgast abgeholt wird, sowie dem Schritt 77 folgt ein Schritt 74, in dem der Fahrgast zum Ziel gebracht wird. Am Ziel angekommen entlässt das autonom operierende Taxi 1 den Fahrgast (Schritt 75). Zudem wird eine Bestätigung der erfolgreichen Fahrt von dem autonom operierenden Taxi 1 an die Zentrale gesendet. Diese sendet wiederum die Bestätigung bzw. die Beendigung des Auftrages an das Smartphone 2, das diese Bestätigung dem Benutzer des Smartphones 2 anzeigt.
  • Das Betreuungsmodul CHD ergänzt die Funktionalität der zentralen Steuerung CTR bzw. greift in diese ein, wenn der Fahrgast kein „Basisfahrgast“ und zudem unbegleitet ist. Entsprechendes gilt auch für mehrere Fahrgäste, die keine „Basisfahrgäste“ und zudem unbegleitet sind. So ist z.B. seitens des Betreuungsmoduls CHD vorgesehen, dass dem autonomen Fahrmodul 14 ein Notstop bzw. Nothalt aufgezwungen werden kann. Zudem blockiert das Betreuungsmodul CHD die Zieleingabe durch die Eingabevorrichtung 17. Auch blockiert das Betreuungsmodul CHD - abgesehen von einer Notöffnung - die Möglichkeit, die Tür 18 zu öffnen.
  • 7 zeigt ein detaillierter beschriebenes Verfahren zum Aufnehmen eines Fahrgastes durch ein autonomes Taxi bzw. das autonome Taxi 1, und 8 zeigt die unterlegte Funktionalität, die ein Analysemodul 251 zur Analyse von der Außenkameraanordnung 22 aufgenommener Bilder von der Umgebung des Taxis 1 auf eine Gestik umfasst. Es ist zudem ein Gesichtserkennungsmodul 252 zum Separieren eines Bildes eines Gesichts der Person vorgesehen, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist. Eine Außendisplaysteuerung 253 dient wahlweise der Darstellung des Bildes des Gesichts auf dem Außendisplay 24 oder zum Versenden über die Kommunikationsschnittstelle 26 (vgl. 14).
  • Das unter Bezugnahme auf 7 beschriebene Verfahren zum Betrieb des Taxis 1 beginnt mit einem Schritt 220, in dem das Taxi 1 als Teilnehmer im Straßenverkehr teilnimmt. Für das Taxi 1 kann auch die Option bestehen, an einem bestimmten Haltepunkt auf einen Fahrgast zu warten. Während des Betriebes nimmt das autonome Taxi 1 seine Umgebung insbesondere durch eine nach vorn gerichtete Umgebungs-Außenkameraanordnung 22 auf. Dem Schritt 220 folgt ein Schritt 221 mit einer Bildverarbeitung, in dem die von der Außenkameraanordnung 22 aufgenommenen Bilder ausgewertet werden.
  • Dem schließt sich ein Schritt 222 an, in dem die aufbereiteten bzw. analysierten Bilder auf Gesten untersucht werden, die einen Haltewunsch symbolisieren. Dem Schritt 222 folgt eine Abfrage 223, ob eine Geste als Mitfahrwunsch interpretiert wird bzw. werden könnte oder werden kann oder erkannt wurde. Wurde keine Geste erkannt, so folgt der Abfrage 223 wiederum der Schritt 220. Die Schleife aus dem Schritten 220, 221, 222 und der Abfrage 223 wird nicht nur dann durchlaufen, wenn das Taxi 1 frei ist, also Fahrgäste aufnehmen kann, sondern auch dann, wenn das autonome Taxi belegt ist.
  • Wird eine Gestik erkannt, die als Mitnahmewunsch durch das autonome Taxi 1 identifiziert wird, so folgt der Abfrage 223 eine Abfrage 224, ob das autonome Taxi 1 verfügbar ist. Ist das autonome Taxi 1 verfügbar, so folgt der Abfrage 224 ein Schritt 225, in dem dem potentiellen Fahrgast signalisiert wird, dass das autonome Taxi 1 verfügbar ist, und zudem welcher Fahrgast erkannt wurde.
  • Die beschriebenen Schritte sind anhand von 9 und 10 erläutert. Dabei zeigt 9 in Anlehnung an 1 der WO 2018/ 106 385 A1 das am Straßenverkehr teilnehmende autonome Taxi 1, das sich einer Gruppe 202 von Menschen, also potentiellen Mitfahrern, nähert. In dieser Gruppe von Menschen 202 erkennt das autonome Taxi 1 eine Frau 203 mit einer Gestik, die als Anhaltewunsch bzw. Mitfahrwunsch erkannt bzw. interpretiert wird. Um der als Fahrgast erkannten Frau 203 zu signalisieren, dass ihr Haltewunsch bzw. ihr Mitfahrwunsch erkannt wurde, blinkt das autonome Taxi 1 und hält an. Darüber hinaus wird auf einem Außendisplay 24 ein Bild dargestellt, das die Person zeigt, deren Gestik als Haltewunsch erkannt bzw. interpretiert wurde. Zusätzlich zu dem Außendisplay 24 kann auch ein entsprechendes Außendisplay 24 in der Frontscheibe des autonomen Taxis 1 (vgl. 11) und/oder in der Heckscheibe (vgl. 12) vorgesehen sein. Das beschriebene Szenario entspricht dem Schritt 225 in 8. An diesen Schritt 225 schließt sich ein Schritt 226 an, in dem der Fahrgast in das autonome Taxi 1 einsteigt. Dazu wird eine Tür geöffnet und nach dem Einsteigen des Fahrgastes 203 wieder verschlossen.
  • An den Schritt 226 schließt sich ein Schritt 227 an, in dem der Transportauftrag durchgeführt wird. Dazu gibt der Fahrgast bzw. die erkannte Person zunächst ein Ziel ein mittels der Zieleingabeeinrichtung. Das Navigationssystem berechnet daraufhin die Route für das autonome Taxi 1. Ist der Zielort erreicht, also der Transport der Person 203 abgeschlossen, so folgt dem Schritt 227 wiederum der Schritt 220.
  • Ist das autonome Taxi 1 dagegen nicht verfügbar (vgl. Abfrage 224), so folgt der Abfrage 224 ein Schritt 228, in dem das autonome Taxi 1, wie unter Bezugnahme auf 13 beschrieben, einem anderen Taxi 214, insbesondere über eine Zentrale, den Mitfahrwunsch übermittelt. Das ausgewählte autonome Taxi 214 zeigt im Übrigen auf einem Außendisplay 24 das Bild des erkannten potentiellen Fahrgastes an. Dazu werden ein Datensatz bzw. ein Protokoll gemäß 14 von dem autonomen Taxi 1 zu dem autonomen Taxi 214 (ggf. über die Zentrale) übertragen. Die Übertragung umfasst den Abholort ABH und das Bild BLD des abzuholenden Fahrgastes. Dem Schritt 228 folgt ein Schritt 229, in dem der potentielle Fahrgast 203 durch das Außendisplay 24 darüber informiert wird, dass es belegt ist. Zudem wird dem potentiellen Fahrgast 203 angezeigt, dass ein weiteres autonomes Taxi 214 bereits auf dem Weg ist, diesen Fahrgast 203 abzuholen.

Claims (7)

  1. Autonom fahrendes Taxi (1) mit einem Fahrmodul (14) zum autonomen Fahren des Taxis (1) in Abhängigkeit von dem Fahrmodul (14) zugeordneter Sensorik (12), wobei das Taxi (1) eine Außenkameraanordnung (22) zur Aufnahme von Bildern einer Umgebung des Taxis (1) sowie ein Analysemodul (251) zur Analyse der Bilder von der Umgebung des Taxis (1) auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist, dadurch gekennzeichnet, dass das Taxi (1) ein Außendisplay (24) zur Darstellung von Informationen außerhalb des Taxis (1) sowie eine Außendisplaysteuerung (253) zur Darstellung eines Bildes der Person auf dem Außendisplay (24) umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  2. Autonom fahrendes Taxi (1) nach Anspruch 1, dadurch gekennzeichnet, dass das Außendisplay (24) eine Displayfläche von zumindest 0,2 m2 umfasst.
  3. Autonom fahrendes Taxi (1) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass das Außendisplay (24) eine Scheibe des Taxis (1) umfasst.
  4. Autonom fahrendes Taxi (1) nach Anspruch 1, 2 oder 3, dadurch gekennzeichnet, dass die Außenkameraanordnung (22) und das Analysemodul (251) auch im besetzten Zustand des Taxis (1) in Betrieb sind, wobei das Taxi (1) eine Kommunikationsschnittstelle (4) zum Versenden eines Bildes der Person umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  5. Autonom fahrendes Taxi (1) mit einem Fahrmodul (14) zum autonomen Fahren des Taxis (1) in Abhängigkeit von dem Fahrmodul (14) zugeordneter Sensorik (12), wobei das Taxi (1) eine Außenkameraanordnung (22) zur Aufnahme von Bildern einer Umgebung des Taxis (1) sowie ein Analysemodul (251) zur Analyse der Bilder von der Umgebung des Taxis (1) auf eine Gestik umfasst, die als Taxiruf interpretierbar oder zu interpretieren ist, dadurch gekennzeichnet, dass die Außenkameraanordnung (22) und das Analysemodul (251) auch im besetzten Zustand des Taxis (1) im Betrieb sind, wobei das Taxi (1) eine Kommunikationsschnittstelle (4) zum Versenden eines Bildes, der Person umfasst, der die Gestik zugeordnet ist, die als Taxiruf interpretierbar oder zu interpretieren ist.
  6. Verfahren zum Betrieb eines autonom fahrenden Taxis (1) mit einem Fahrmodul (14) zum autonomen Fahren des Taxis (1) in Abhängigkeit von dem Fahrmodul (14) zugeordneter Sensorik (12), wobei mittels einer Außenkameraanordnung (22) des Taxis (1) Bilder einer Umgebung des Taxis (1) aufgenommen werden, wobei die Bilder von der Umgebung des Taxis (1) auf eine Gestik analysiert werden, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei eine Gestik als Taxiruf interpretiert wird, dadurch gekennzeichnet, dass ein Bild der Person, der die Gestik zugeordnet ist, die als Taxiruf interpretiert wird, mittels eines Außendisplays (24) des Taxis (1) dargestellt wird.
  7. Verfahren zum Betrieb eines Verkehrssystems mit zumindest zwei autonom fahrenden Taxis (1, 214) jeweils mit einem Fahrmodul (14) zum autonomen Fahren des Taxis (1) in Abhängigkeit der von dem Fahrmodul (14) zugeordneter Sensorik, wobei die zumindest zwei autonom fahrenden Taxis ein erstes Taxi (1) und ein zweites Taxi (214) umfassen, wobei mittels einer Außenkameraanordnung (22) jedes der zumindest zwei Taxis (1, 214) Bilder einer Umgebung des jeweiligen Taxis (1, 214) aufgenommen werden unabhängig davon, ob das jeweilige Taxi (1, 214) besetzt ist oder nicht, wobei die Bilder von der Umgebung des jeweiligen Taxis (1, 214) auf eine Gestik analysiert werden, die als Taxiruf interpretierbar oder zu interpretieren ist, wobei das erste Taxi (1) besetzt ist, wobei von dem ersten Taxi (1) eine Gestik als Taxiruf interpretiert wird, wobei ein Bild der Person, der die Gestik zugeordnet ist, die als Taxiruf interpretiert wird, von dem ersten Taxi (1) zu dem zweiten Taxi (214) übertragen wird, und wobei das übertragene Bild mittels eines Außendisplays des zweiten Taxis (214) dargestellt wird.
DE102018222665.2A 2018-12-20 2018-12-20 Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis Active DE102018222665B4 (de)

Priority Applications (3)

Application Number Priority Date Filing Date Title
DE102018222665.2A DE102018222665B4 (de) 2018-12-20 2018-12-20 Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis
US16/718,469 US11222214B2 (en) 2018-12-20 2019-12-18 Autonomous taxi
CN201911326428.4A CN111347985B (zh) 2018-12-20 2019-12-20 自动驾驶出租车

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102018222665.2A DE102018222665B4 (de) 2018-12-20 2018-12-20 Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis

Publications (2)

Publication Number Publication Date
DE102018222665A1 DE102018222665A1 (de) 2020-06-25
DE102018222665B4 true DE102018222665B4 (de) 2022-06-02

Family

ID=70969177

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018222665.2A Active DE102018222665B4 (de) 2018-12-20 2018-12-20 Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis

Country Status (3)

Country Link
US (1) US11222214B2 (de)
CN (1) CN111347985B (de)
DE (1) DE102018222665B4 (de)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019089591A1 (en) * 2017-10-30 2019-05-09 Mobileye Vision Technologies Ltd. Vehicle navigation based on human activity
US20200183415A1 (en) * 2018-12-10 2020-06-11 GM Global Technology Operations LLC System and method for control of an autonomous vehicle
US11221627B2 (en) * 2019-03-08 2022-01-11 Pony Ai Inc. Directed interaction of customers with autonomous vehicles
US11676236B2 (en) * 2019-07-22 2023-06-13 Pony Ai Inc. Systems and methods for autonomous passenger transport
JP7226167B2 (ja) * 2019-07-23 2023-02-21 トヨタ自動車株式会社 車両
US11537701B2 (en) * 2020-04-01 2022-12-27 Toyota Motor North America, Inc. Transport related n-factor authentication
US11377125B2 (en) * 2020-06-30 2022-07-05 Rivian Ip Holdings, Llc Vehicle rideshare localization and passenger identification for autonomous vehicles
JP7435529B2 (ja) * 2021-04-06 2024-02-21 トヨタ自動車株式会社 タクシーシステム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10217633A1 (de) 2002-04-19 2003-11-06 Siemens Ag Beleuchtungseinrichtung
US20150279131A1 (en) 2014-03-28 2015-10-01 Denso International America, Inc. Key fob and smartdevice gestures for vehicle functions
DE102016217770A1 (de) 2016-09-16 2018-03-22 Audi Ag Verfahren zum Betrieb eines Kraftfahrzeugs
WO2018106385A1 (en) 2016-12-06 2018-06-14 Delphi Technologie, Inc. Taxi client identification for automated vehicles
DE202018003053U1 (de) 2018-06-26 2018-07-20 Frank-Holger Dobbert Das Innenraum-TaxiEine Vorrichtung für den autonomen Transport von Personen und Gütern speziell für Innenräume und andere Fußgängerbereiche

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040036622A1 (en) * 2000-12-15 2004-02-26 Semyon Dukach Apparatuses, methods, and computer programs for displaying information on signs
US9749823B2 (en) * 2009-12-11 2017-08-29 Mentis Services France Providing city services using mobile devices and a sensor network
US20160086391A1 (en) * 2012-03-14 2016-03-24 Autoconnect Holdings Llc Fleetwide vehicle telematics systems and methods
CN103079169A (zh) * 2013-01-17 2013-05-01 成都美璞科技有限公司 一种基于Web网页实现的智能招车系统及方法
US20140300449A1 (en) * 2013-04-05 2014-10-09 Ani Kounavis Taxi hailing system and mobile application
US9304599B2 (en) * 2014-03-21 2016-04-05 Dell Products L.P. Gesture controlled adaptive projected information handling system input and output devices
JP6455866B2 (ja) 2014-03-31 2019-01-23 Necエンベデッドプロダクツ株式会社 監視装置、監視方法、及びプログラム
CN105404929B (zh) * 2014-09-16 2019-11-08 口碑控股有限公司 打车过程中目标定位辨识的方法、设备和系统
WO2016134513A1 (zh) * 2015-02-26 2016-09-01 刘一佳 一种远程呼叫出租车的方法以及移动终端
US20160378303A1 (en) * 2015-06-23 2016-12-29 Todd Crilley Mobile device system for hailing a taxi cab
DE102016201770B3 (de) 2016-02-05 2017-06-29 Ford Global Technologies, Llc Selbstzündende und für den HCCI-Betrieb geeignete Brennkraftmaschine und Verfahren zum Betreiben einer derartigen Brennkraftmaschine
US9836057B2 (en) * 2016-03-24 2017-12-05 Waymo Llc Arranging passenger pickups for autonomous vehicles
US20170330044A1 (en) * 2016-05-10 2017-11-16 GM Global Technology Operations LLC Thermal monitoring in autonomous-driving vehicles
CN108237974A (zh) * 2016-12-26 2018-07-03 大唐移动通信设备有限公司 车载显示装置、车载终端和约车用户终端及约车方法
US20180196417A1 (en) * 2017-01-09 2018-07-12 nuTonomy Inc. Location Signaling with Respect to an Autonomous Vehicle and a Rider
US10677602B2 (en) * 2017-01-25 2020-06-09 Via Transportation, Inc. Detecting the number of vehicle passengers
JP6872190B2 (ja) * 2017-05-11 2021-05-19 株式会社Zmp 統合タクシー配車システム
US11120264B2 (en) * 2017-06-02 2021-09-14 Apple Inc. Augmented reality interface for facilitating identification of arriving vehicle
JP6550162B1 (ja) * 2018-03-29 2019-07-24 中村 一人 タクシー配車システム及びタクシー配車方法
CN109712387B (zh) * 2018-09-26 2024-04-05 姜洪明 网约车、出租车的乘客和司机的安全保护系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10217633A1 (de) 2002-04-19 2003-11-06 Siemens Ag Beleuchtungseinrichtung
US20150279131A1 (en) 2014-03-28 2015-10-01 Denso International America, Inc. Key fob and smartdevice gestures for vehicle functions
DE102016217770A1 (de) 2016-09-16 2018-03-22 Audi Ag Verfahren zum Betrieb eines Kraftfahrzeugs
WO2018106385A1 (en) 2016-12-06 2018-06-14 Delphi Technologie, Inc. Taxi client identification for automated vehicles
DE202018003053U1 (de) 2018-06-26 2018-07-20 Frank-Holger Dobbert Das Innenraum-TaxiEine Vorrichtung für den autonomen Transport von Personen und Gütern speziell für Innenräume und andere Fußgängerbereiche

Also Published As

Publication number Publication date
US11222214B2 (en) 2022-01-11
US20200202142A1 (en) 2020-06-25
DE102018222665A1 (de) 2020-06-25
CN111347985B (zh) 2023-06-06
CN111347985A (zh) 2020-06-30

Similar Documents

Publication Publication Date Title
DE102018222665B4 (de) Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis
EP3478535B1 (de) Verfahren zum betrieb eines kraftfahrzeugs
EP3119640A1 (de) Leitung von fahrgästen
DE102019202169B4 (de) Insassendetektionssystem und -verfahren für ein beförderungsfahrzeug
DE102015202486A1 (de) Verfahren und Vorrichtung zum Überwachen eines auf einem Parkplatz fahrenden Fahrzeugs
DE102019216534A1 (de) Unbemanntes autonomes fahrzeug und verfahren zum steuern desselben
DE102020116334A1 (de) Rollstuhleinsteigeinformation-Übertragungssystem und Rollstuhleinsteigeinformation-Anzeigesystem
DE102015223613A1 (de) Verfahren und Vorrichtung zum automatischen Öffnen und Schließen mindestens einer Fensterscheibe eines Kraftfahrzeugs
DE102016014712B4 (de) Fahrzeug und Verfahren zur Ausgabe von Informationen an eine Fahrzeugumgebung
EP3877231A1 (de) Prädiktion eines voraussichtlichen fahrverhaltens
DE102016206694B4 (de) Assistenzsystem und Verfahren eines hochautomatisierten Fahrzeugs zur Verbesserung des Zusammenwirkens mit anderen Verkehrsteilnehmern
DE102020212376A1 (de) Ableitung der Intention eines Passagiers im Fahrzeug anhand einer Interaktion des Passagiers mit einem Gegenstand
DE102017216847A1 (de) Verfahren zur Führung eines Kraftfahrzeugs oder eines Benutzers zu einer Parkposition
EP4021298A1 (de) Fortbewegungsmittel, vorrichtung und verfahren zum positionieren eines automatisiert fahrfähigen fortbewegungsmittels
EP3573860B1 (de) Darstellen eines soll-fahrzeugöffnungsvorfelds eines automatisierten fahrzeugs
DE102018222664B3 (de) Autonom fahrendes Taxi sowie Verfahren zum Betrieb eines autonom fahrenden Taxis
DE102016215893A1 (de) Verfahren zum Transportieren von Personen auf einem Parkplatz und Parkplatzverwaltungssystem
DE102018214506A1 (de) Verfahren zur Weiterentwicklung eines Fahrerassistenzsystems und Fahrerassistenzsystem für ein Fahrzeug
DE102018222666A1 (de) Autonom fahrendes Taxi
CN208544268U (zh) 具有行车记录功能的车辆驾驶在线监测系统
DE102016218425A1 (de) Verfahren zum zumindest teilautomatisierten Anfahren eines Kraftfahrzeugs aus dem Stand
DE102019000175A1 (de) Verfahren zum Betreiben eines Kraftfahrzeugs sowie Kraftfahrzeug
DE102019213634A1 (de) Verfahren und Assistenzsystem zur Nutzung einer digitalen Karte in einem Fahrzeug
DE102018006824A1 (de) Verfahren zur Unterstützung eines Fahrgastes und Fahrzeug mit einer Vorrichtung zur Durchführung des Verfahrens
WO2019076695A1 (de) Verfahren zum auswerten von verkehrsdaten, computerprogramm, maschinenlesbares speichermedium und vorrichtung

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final