DE102017112172A1

DE102017112172A1 - Systeme, um proaktives infotainment bei autonom fahrenden fahrzeugen bereitzustellen

Info

Publication number: DE102017112172A1
Application number: DE102017112172.2A
Authority: DE
Inventors: Eli Tzirkel-Hancock; Claudia V. Goldman-Shenhar
Original assignee: GM Global Technology Operations LLC
Current assignee: GM Global Technology Operations LLC
Priority date: 2016-06-02
Filing date: 2017-06-01
Publication date: 2017-12-07
Also published as: US20170352267A1; CN107458325A

Abstract

System, um einem Passagier eines autonomen Fahrzeugs während eines autonomen Fahrens einen proaktiven Dienst bereitzustellen. Das System enthält eine hardwaregestützte Verarbeitungseinheit und eine nicht-transitorische computerlesbare Speicherkomponente, die ein Eingabe-Schnittstellen-Modul enthält, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, Eingabedaten erhält, die auf eine auf das autonome Fahren bezogene Bedingung angeben. Die Speicherkomponente enthält auch ein Aktions-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf der durch die Eingabedaten angegebene Bedingung eine vorgeschlagene Aktion bestimmt; und proaktiv einen Dialog mit dem Passagier mittels einer Fahrzeug-Passagier-Schnittstelle einleitet, wobei der Dialog einen Vorschlag, dass das Fahrzeug die vorgeschlagene Aktion unternimmt, enthält. Beispielhafte Aktionen umfassen ein Ausführen einer Konversationsfunktion, einer unterrichtenden Funktion, einer HVAC-Funktion, einer Funktion für autonomes Fahren und einer Infotainment-Funktion. Die Technologie schließt in verschiedenen Ausführungsformen beliebige der Prozesse ein, die durch die beschriebenen Systeme oder Vorrichtungen ausgeführt werden.

Description

TECHNISCHES GEBIET
Die vorliegende Offenbarung bezieht sich allgemein auf ein Infotainment bei Fahrzeugen und insbesondere auf Systeme und Prozesse, um Fahrzeuginsassen und in verschiedenen Ausführungsformen Passagieren von autonom fahrenden Fahrzeugen proaktiv Infotainment bereitzustellen. Das System kann eine oder mehrere Fahrzeugaktivitäten einleiten, wie etwa, als einige wenige Beispiele, Funktionen des autonomen Fahrens modifizieren, eine Fahrzeugroute einstellen oder Unterhaltung im Fahrzeug liefern.
HINTERGRUND
Dieser Abschnitt liefert Hintergrundinformation bezüglich der vorliegenden Offenbarung, welche nicht notwendigerweise Stand der Technik ist.
Hersteller produzieren zunehmend Fahrzeuge mit höheren Niveaus einer Automatisierung des Fahrens. Merkmale wie etwa eine adaptive Geschwindigkeitsregelung bzw. ein Abstandsregeltempomat und seitliche Positionierung bzw. Spurassistenz sind populär geworden und sind Vorläufer für eine stärkere Annahme von Fahrzeugen, die vollständig autonom fahren können.
Obgleich die Verfügbarkeit von Fahrzeugen, die autonom fahren können, zunimmt, halten Vertrautheit und Komfort bzw. Zufriedenheit von Nutzern mit Funktionen eines autonomen Fahrens nicht notwendigerweise Schritt. Der Zuspruch von Nutzern zur Automatisierung ist ein wichtiger Aspekt in der allgemeinen Annahme einer Technologie und Nutzererfahrung.
Mit der Erwartung, dass hochautomatisierte Fahrzeuge in naher Zukunft alltäglich werden, entwickelt sich auch ein Markt für vollautonome Taxidienste und gemeinsam genutzte Fahrzeuge. Zusätzlich zu dem Umstand, dass sie mit der automatisierten Funktionalität vertraut werden, werden sich an diesen Diensten interessierte Kunden daran gewöhnen müssen, von einem fahrerlosen Fahrzeug, das nicht ihr eigenes ist, und in einigen Fällen zusammen mit anderen Passagieren, die sie vielleicht nicht kennen, gefahren zu werden.
Ein Unbehagen gegenüber einer Funktionalität eines automatisierten Fahrens und möglicherweise auch mit dem Erlebnis gemeinsam genutzter Fahrzeuge kann zu einer verminderten Nutzung der Fähigkeiten des autonomen Fahrens führen, wie etwa durch den Nutzer, der einen Betrieb des autonomen Fahrens nicht einschaltet oder ausschaltet oder eine Fahrt in einem gemeinsam genutzten Fahrzeug nicht antritt oder fortsetzt. In manchen Fällen verwendet der Nutzer weiter die autonomen Funktionen, ob in einem gemeinsam genutzten Fahrzeug, aber mit einem verhältnismäßig geringen Grad an Zufriedenheit.
Ein sich unbehaglich fühlender Nutzer wird auch weniger wahrscheinlich überhaupt das Erlebnis eines gemeinsam genutzten Fahrzeugs bestellen oder fortgeschrittenere Fähigkeiten eines autonomen Fahrens erlernen und nutzen, ob bei einer gemeinsam genutzten Fahrt oder anderweitig.
Der Grad einer Annahme kann auch Marketing und Vertrieb von Fahrzeugen, die autonom fahren können, beeinflussen. Wenn Vertrauen der Nutzer in autonom fahrende Systeme und gemeinsam genutzte, automatisierte Fahrzeuge zunimmt, kaufen die Nutzer wahrscheinlicher ein Fahrzeug, das zum autonomen Fahren imstande ist, planen ein automatisiertes Taxi ein, nutzen ein automatisiertes Fahrzeug gemeinsam, wobei sie beispielhaft das Gleiche für andere tun oder anderen ausdrücklich empfehlen, das Gleiche zu tun.
ZUSAMMENFASSUNG
Die vorliegende Technologie löst viele Probleme und liefert viele Vorteile für eine Implementierung autonomer Fahrzeuge und kann auch bei Fahrzeugen genutzt werden, die manuell gefahren werden.
In einem Aspekt bezieht sich die Technologie auf ein System, um einem Passagier eines autonomen Fahrzeugs während eines autonomen Fahrens einen proaktiven Dienst bereitzustellen. Das System umfasst eine hardwaregestützte Verarbeitungseinheit und eine nicht-transitorische computerlesbare Speicherkomponente. Die Speicherkomponente enthält ein Eingabe-Schnittstellen-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, Eingabedaten erhält, die eine auf das autonome Fahren bezogene Bedingung angeben.
Die Speicherkomponente enthält auch ein Aktions-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf der durch die Eingabedaten angegebenen Bedingung eine vorgeschlagene Aktion bestimmt und proaktiv einen Dialog mit dem Passagier mittels einer Fahrzeug-Passagier-Schnittstelle einleitet, wobei der Dialog einen Vorschlag, dass das Fahrzeug die vorgeschlagene Aktion unternimmt, beinhaltet.
Die vorgeschlagene Aktion kann ein Einstellen einer Fahrzeugfunktion umfassen, die aus einer Gruppe von Funktionen ausgewählt wird, bestehend aus: einer Funktion eines autonomen Fahrens, einer Heizungs-, Belüftungs- und Klimaanlagen-(HVAC-)Funktion und einer Funktion des Infotainment-Systems des Fahrzeugs.
In verschiedenen Ausführungsformen enthält die Speicherkomponente ein Datenbank-Modul, das ein Passagierprofil mit Passagierprofildaten speichert; umfassen die Eingabedaten die Passagierprofildaten; und bestimmt das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, um die vorgeschlagene Aktion zu bestimmen, auf der Basis der Passagierprofildaten die vorgeschlagene Aktion.
In verschiedenen Ausführungsformen weist eine Ausführungsform der Speicherkomponente ein lernendes Modul auf, das, wenn es durch die Verarbeitungseinheit ausgeführt wird, basierend auf einer Nutzeraktivität erlernte Daten bestimmt; werden die bestimmten erlernten Daten im Passagierprofil gespeichert; und bestimmt das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, um die vorgeschlagene Aktion zu bestimmen, die vorgeschlagene Aktion basierend auf den die erlernten Daten enthaltenden Passagierprofildaten.
In verschiedenen Ausführungsformen enthält die Speicherkomponente ein Kontext-Modul; schließt die durch die Eingabedaten angegebene Bedingung Kontextdaten ein, die eine Bedingung in der Kabine oder eine externe Bedingung betreffen; und bestimmt das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf den Kontextdaten die entsprechende Aktion.
In verschiedenen Ausführungsformen geben die Kontextdaten eine oder mehrere einer Identität des Passagiers; eines Alters des Passagiers; einer Charakteristik des Kabinenklimas; und einer Charakteristik des Klimas außerhalb des Fahrzeugs an.
In verschiedenen Ausführungsformen ist die Bedingung eine eine Aktion unterstützende Bedingung; umfassen die Eingabedaten eine Auslösebedingung; und bestimmt das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, als Antwort auf die Auslösebedingung die vorgeschlagene Aktion.
In verschiedenen Ausführungsformen empfängt das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion; und das System weist ein Ausgabe-Gruppe-Modul auf, das, wenn es ausgeführt wird, eine Ausführung der vorgeschlagenen und genehmigten Aktion einleitet.
In verschiedenen Ausführungsformen umfasst die vorgeschlagene und genehmigte Aktion eine Funktion eines autonomen Fahrens eines Fahrzeugs; und das Ausgabe-Gruppe-Modul umfasst ein Modul für autonomes Fahren eines Fahrzeugs, das, wenn es ausgeführt wird, das Ausführen der Funktion eines autonomen Fahrens eines Fahrzeugs einleitet.
In verschiedenen Ausführungsformen umfasst die vorgeschlagene und genehmigte Aktion eine Klimasteuerungs-Aktion; und das Ausgabe-Gruppe-Modul umfasst ein Fahrzeugsteuerungs-Modul, das, wenn es ausgeführt wird, eine Ausführung der Klimasteuerungs-Aktion einleitet.
In verschiedenen Ausführungsformen umfasst die vorgeschlagene und genehmigte Aktion eine Konversations-Aktion; und das Ausgabe-Gruppe-Modul umfasst ein Fahrzeug-Passagier-Schnittstellen-Modul, das, wenn es ausgeführt wird, die Konversations-Aktion ausführt, mittels welcher sich das System über die Fahrzeug-Passagier-Schnittstelle mit dem Passagier akustisch unterhält.
In verschiedenen Ausführungsformen ist die Konversations-Aktion eine unterrichtende Aktion, die dafür eingerichtet ist, den Passagier über ein nicht auf das Fahrzeug und nicht auf die Fahrt bezogenes, für den Passagier interessantes Thema zu informieren; und das Kommunikations-Modul führt, wenn es ausgeführt wird, die unterrichtende Aktion aus.
In verschiedenen Ausführungsformen umfasst die vorgeschlagene und genehmigte Aktion eine Aktion einer externen Kommunikation; und das Ausgabe-Gruppe-Modul umfasst ein Modul für externe Kommunikation, das, wenn es ausgeführt wird, eine Ausführung der Aktion einer externen Kommunikation einleitet.
In verschiedenen Ausführungsformen umfasst die Aktion einer externen Kommunikation ein Senden einer Mitteilung betreffend einen Status des Passagiers oder des autonomen Fahrens an ein Gerät bzw. eine Vorrichtung eines Dritten.
In verschiedenen Ausführungsformen werden die Eingabedaten von einem Fahrzeugsensor empfangen, der die Bedingung erfasst hat.
In verschiedenen Ausführungsformen umfasst die nicht-transitorische computerlesbare Speicherkomponente ein Nutzermodell-Modul, das, wenn es durch die Verarbeitungseinheit ausgeführt wird, Nutzermodelldaten bereitstellt, die eine Präferenz oder eine andere Qualität des bestimmten Nutzers bereitstellen, wobei: die Eingabedaten die Nutzermodelldaten enthalten; und das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, auf der Basis der Nutzermodelldaten und der Bedingung die vorgeschlagene Aktion bestimmt.
In verschiedenen Ausführungsformen umfasst die nicht-transitorische computerlesbare Speicherkomponente ein Fahrzeugvorrichtungsmodell-Modul, das, wenn es durch die Verarbeitungseinheit ausgeführt wird, Daten eines Fahrzeugvorrichtungsmodells bereitstellt, die eine Qualität einer Fahrzeugvorrichtung angeben, wobei: die Eingabedaten die Daten eines Fahrzeugvorrichtungsmodells enthalten; und das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf dem Fahrzeugvorrichtungsmodell und der Bedingung die vorgeschlagene Aktion bestimmt.
In verschiedenen Implementierungen wird die Verarbeitungseinheit durch das System genutzt, ist aber kein Teil dessen.
Die Technologie umfasst in verschiedenen Ausführungsformen beliebige der Prozesse, die von den oben und hierin im Folgenden beschriebenen Systemen oder Vorrichtungen ausgeführt werden.
Zum Beispiel kann die Technologie einen Prozess einschließen, der durch ein System implementiert ist, um einem Passagier eines autonomen Fahrzeugs während eines autonomen Fahrens einen proaktiven Dienst bereitzustellen. Der Prozess umfasst ein Erhalten, durch die hardwaregestützte Verarbeitungseinheit, die ein Eingabe-Schnittstellen-Modul des Systems ausführt, von Eingabedaten, die eine auf das autonome Fahren bezogene Bedingung angeben.
Der Prozess kann auch ein Bestimmen, durch die hardwaregestützte Verarbeitungseinheit, die ein Aktions-Modul des Systems ausführt, einer vorgeschlagenen Aktion basierend auf der durch die Eingabedaten angegebenen Bedingung einschließen.
Und der Prozess kann ferner ein proaktives Einleiten, durch die hardwaregestützte Verarbeitungseinheit, die das Aktions-Modul des Systems ausführt, eines Dialogs mit dem Passagier über eine Fahrzeug-Passagier-Schnittstelle einschließen, wobei der Dialog einen Vorschlag, dass das Fahrzeug die vorgeschlagene Aktion unternimmt, enthält.
In einem anderen Aspekt bezieht sich die vorliegende Technologie auf ein System, um einem Passagier eines Fahrzeugs, wie etwa eines autonomen Fahrzeugs während einer Fahrt mit dem autonomen Fahrzeug, proaktive Dienste bereitzustellen. Das System umfasst eine hardwaregestützte Verarbeitungseinheit und eine nicht-transitorische computerlesbare Speicherkomponente. Der Speicher umfasst ein Eingabe-Schnittstellen-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, Eingabedaten erhält, die eine oder mehrere Bedingungen angeben, die sich auf eine Fahrt mit einem autonomen Fahrzeug beziehen.
Der Speicher enthält auch ein Aktions-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf den Eingabedaten eine entsprechende Aktion unter den Bedingungen bestimmt und einen Dialog mit dem Passagier proaktiv einleitet, der einen Vorschlag, dass das Fahrzeug die entsprechende Aktion unternimmt, beinhaltet.
Die entsprechende Aktion kann eine Einstellung an einer oder mehreren von: Funktionen des autonomen Fahrens, Heizungs-, Belüftungs- und Klimaanlagenfunktionen des Fahrzeugs und Funktionen des Infotainment-Systems des Fahrzeugs umfassen.
In verschiedenen Ausführungsformen enthält die Speicherkomponente ein Datenbank-Modul, das ein Passagierprofil speichert, enthalten die Eingabedaten die von einem Datenbank-Modul erhaltenen Passagierprofildaten und bestimmt das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf den die Passagierprofildaten enthaltenden Eingabedaten die entsprechende Aktion.
Die Speicherkomponente umfasst in einigen Fällen ein lernendes Modul, das, wenn es durch die Verarbeitungseinheit ausgeführt wird, Daten einer erlernten Schlussfolgerung basierend auf einem Nutzerverhalten oder einer anderen Nutzeraktivität bestimmt, und das lernende Modul oder das Aktions-Modul aktualisiert, wenn es ausgeführt wird, das Passagierprofil, um die Daten einer erlernten Schlussfolgerung einzubeziehen.
Die Speicherkomponente enthält ein Kontext-Modul in verschiedenen Implementierungen, die Eingabedaten enthalten Kontextdaten betreffend einen Kontext im Innenraum des Fahrzeugs oder einen Kontext außerhalb des Fahrzeugs, und das Aktions-Modul bestimmt, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf den die Kontextdaten enthaltenden Eingabedaten die entsprechende Aktion.
In einigen Fällen bezeichnen die Kontextdaten zumindest eines (i) einer Identität des Passagiers, (ii) einer Route für die aktuelle Fahrt mit dem autonomen Fahrzeug, (iii) eines Alters des Passagiers, (iv) einer Bedingung des Kabinenklimas und (v) einer Klimabedingung außerhalb des Fahrzeugs.
Die Eingabedaten geben eine Auslösebedingung in verschiedenen Ausführungsformen an, und das Aktions-Modul bestimmt, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, die entsprechende Aktion basierend auf den Eingabedaten und als Antwort darauf, dass ein Vorliegen der Auslösebedingung bestimmt wird.
In verschiedenen Ausführungsformen enthält die Speicherkomponente ein Nutzer-Schnittstellen-Modul, empfängt das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion, bezieht die vorgeschlagene Aktion das mit dem Passagier interagierende Fahrzeug ein, und interagiert das Nutzer-Schnittstellen-Modul mit dem Nutzer gemäß der vorgeschlagenen Aktion.
Die Speicherkomponente enthält in einigen Ausführungen ein Fahrzeugfunktionen-Ausgabe-Modul, das Eingabe-Schnittstellen-Modul empfängt, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion, die vorgeschlagene Aktion schließt eine Fahrzeugfunktion ein, und das Fahrzeugfunktionen-Ausgabe-Modul leitet, wenn es ausgeführt wird, die Fahrzeugfunktion ein.
In anderen Aspekten bezieht sich die vorliegende Technologie auf die oben beschriebene nicht-transitorische computerlesbare Speicherkomponente.
In noch anderen Aspekten bezieht sich die Technologie auf einen Algorithmus zum Ausführen der oben vorgetragenen Funktionen oder Prozesse, die die Funktionen einschließen, die durch die erwähnte Struktur ausgeführt werden.
Andere Aspekte der vorliegenden Technologie werden zum Teil ersichtlich sein und im Folgenden zum Teil aufgezeigt.
BESCHREIBUNG DER ZEICHNUNGEN
1 veranschaulicht schematisch ein beispielhaftes Transportfahrzeug mit tragbaren und entfernten Berechnungsvorrichtungen gemäß Ausführungsformen der vorliegenden Technologie.
2 veranschaulicht schematisch mehr Details des beispielhaften Fahrzeugcomputers von 1 in Verbindung mit den tragbaren und entfernten Berechnungsvorrichtungen.
3 zeigt eine andere Ansicht des Fahrzeugs, die beispielhafte Speicherkomponenten hervorhebt.
4 zeigt Interaktionen zwischen den verschiedenen Komponenten von 3, einschließlich mit externen Systemen.
5 zeigt ein beispielhaftes Algorithmendiagramm aus einer Perspektive des Systems oder eines intelligenten Agenten (engl. agent).
6 zeigt ein beispielhaftes Algorithmendiagramm aus einer Perspektive eines Servers der vorliegenden Technologie.
Die Figuren sind nicht notwendigerweise maßstabsgetreu, und einige Merkmale können übertrieben oder minimiert sein, um so Details bestimmter Komponenten zu zeigen.
DETAILBESCHREIBUNG
Nach Bedarf sind hierin detaillierte Ausführungsformen der vorliegenden Offenbarung dargelegt. Die offenbarten Ausführungsformen sind nur Beispiele, die in verschiedenen und alternativen Formen und Kombinationen davon verkörpert werden können. Wie hierin verwendet, beziehen sich zum Beispiel, beispielhaft und ähnliche Begriffe weit gefasst auf Ausführungsformen, die als eine Veranschaulichung, ein Exemplar, ein Modell oder Muster dienen.
In einigen Fällen wurden allgemein bekannte Komponenten, Systeme, Materialien oder Prozesse nicht im Detail beschrieben, um eine Verwirrung der vorliegenden Offenbarung zu vermeiden. Bestimmte strukturelle und funktionale Details, die hierin offenbart werden, sollen daher nicht als beschränkend interpretiert werden, sondern nur als eine Grundlage für die Ansprüche und als eine repräsentative Basis für den Fachmann, um die vorliegende Offenbarung zu verwenden.
I. Technologie Einführung
Die vorliegende Offenbarung beschreibt mittels verschiedener Ausführungsformen, Systeme und Prozesse, um Fahrzeuginsassen und in verschiedenen Ausführungsformen insbesondere Passagieren von autonom fahrenden Fahrzeugen Infotainment proaktiv bereitzustellen.
Das Infotainment umfasst beliebige eines breiten Spektrums an Information, und Systemfunktionen können ein Einleiten einer Fahrzeugaktivität, wie etwa Ändern einer geplanten Route, Verstellen von HVAC- oder Radioeinstellungen, Starten einer Filmpräsentation über einen Fahrzeugschirm, Modifizieren von Charakteristiken des autonomen Fahrens (Geschwindigkeit, usw.) oder Einleiten eines Dialogs mit einem Passagier umfassen.
Obgleich ausgewählte Beispiele der vorliegenden Technologie Transportfahrzeuge oder Reisearten und insbesondere Automobile beschreiben, ist die Technologie durch den Fokus nicht beschränkt. Die Konzepte können auf ein breites Spektrum von Systemen und Vorrichtungen wie etwa andere Transport- oder bewegliche Fahrzeuge einschließlich Luftfahrzeuge, Wasserfahrzeuge, Lastwagen, Busse, Züge, Transportwägen, dergleichen und anderes ausgedehnt werden.
Obgleich ausgewählte Beispiele der vorliegenden Technologie autonome Fahrzeuge beschreiben, ist die Technologie nicht auf Verwendung in autonomen (vollkommen oder teilweise autonomen) Fahrzeugen oder auf Zeiten beschränkt, in denen ein zum autonomen Fahren taugliches Fahrzeug gerade autonom gefahren wird. Verweise hierin auf Charakteristiken eines Passagiers und Kommunikationen, die für einen Empfang durch einen Passagier beispielsweise vorgesehen sind, sollten dahingehend betrachtet werden, dass analoge Implementierungen betreffend einen Fahrer des Fahrzeugs während eines manuellen Fahrzeugbetriebs offenbart sind. Während eines vollkommen autonomen Fahrens wird der ”Fahrer” als Passagier betrachtet.
II. Host-Fahrzeug – Fig. 1
Wendet man sich nun den Figuren und insbesondere der ersten Figur zu, zeigt 1 eine beispielhafte Host-Struktur oder Einrichtung 10 in der Form eines Fahrzeugs und insbesondere eines Automobils.
Das Fahrzeug 10 enthält einen hardwaregestützten Controller oder ein Controller-System 20. Das hardwaregestützte Controller-System 20 enthält ein Kommunikations-Teilsystem 30, um mit tragbaren oder lokalen Berechnungsvorrichtungen 34 und/oder externen Netzwerken 40 zu kommunizieren.
Durch die externen Netzwerke 40, wie etwa das Internet, ein lokales Netz, ein Mobilfunk- oder Satellitennetz, Kommunikationen von Fahrzeug zu Fahrzeug, von Fußgänger zu Fahrzeug oder andere Infrastruktur-Kommunikationen usw., kann das Fahrzeug 10 tragbare Geräte bzw. Vorrichtungen 34 oder entfernte Systeme 50 wie etwa entfernte Server erreichen.
Beispielhafte lokale Vorrichtungen 34 umfassen ein Smartphone 31 eines Nutzers, eine von einem Nutzer tragbare Vorrichtung wie etwa die veranschaulichten intelligenten Brillen und ein Tablet 33 und sind nicht auf diese Beispiele beschränkt. Andere beispielhafte tragbare Einrichtungen 32 umfassen eine Smartwatch, intelligente bzw. Smart-Bekleidung wie etwa ein Hemd oder einen Gürtel, ein Accessoire wie etwa eine Armspange oder intelligenten Schmuck wie etwa Ohrringe, Halsketten und Schlüsselbänder.
Eine weitere beispielhafte lokale Vorrichtung 34 ist eine Plug-in-Vorrichtung eines Nutzers wie etwa eine USB-Massenspeichervorrichtung oder wie etwa eine Vorrichtung, die dafür eingerichtet ist, drahtlos zu kommunizieren.
Noch eine andere beispielhafte lokale Vorrichtung 34 ist eine (im Detail nicht dargestellte) bordeigene Vorrichtung (OBD) wie etwa ein Radsensor, ein Bremssensor, ein Beschleunigungsmessgerät, ein Sensor für Rotorverschleiß, ein Drosselstellungssensor, ein Lenkwinkelsensor, eine Anzeigeeinrichtung für Umdrehungen pro Minute (UpM), Bremskraftsensoren, ein anderer, auf Fahrzeugzustand oder Dynamik bezogener Sensor für das Fahrzeug, mit welchem das Fahrzeug nach einer Herstellung nachgerüstet wird. Die OBD(s) kann (können) das Sensor-Teilsystem, auf das im Folgenden durch Bezugszeichen 60 verwiesen wird, einschließen oder ein Teil dessen sein.
Das Controller-System 20 des Fahrzeugs, welches in in Betracht gezogenen Ausführungsformen einen oder mehrere Mikrocontroller enthält, kann mit OBDs über ein Steuergerätnetz bzw. Controller-Netz (CAN) kommunizieren. Das auf CAN-Nachrichten basierende Protokoll ist typischerweise für eine vielfältige elektrische Verdrahtung mit Automobilen ausgelegt, und eine CAN-Infrastruktur kann einen CAN-Bus einschließen. Auf die OBD kann auch als CAN-Schnittstellen-(VCI-)Komponenten oder Produkte eines Fahrzeugs verwiesen werden, und auf die durch das CAN übertragenen Signale kann als CAN-Signale verwiesen werden. Kommunikationen zwischen der (den) OBD(s) und dem primären Controller oder Mikrocontroller 20 werden in anderen Ausführungsformen über ein ähnliches oder ein anderes, auf Nachrichten basierendes Protokoll ausgeführt.
Das Fahrzeug 10 weist auch verschiedene Montagestrukturen 35 auf. Die Montagestrukturen 35 umfassen eine Mittelkonsole, ein Armaturenbrett und eine Instrumententafel. Die Montagestruktur 35 enthält einen Plug-in-Port 36 – beispielsweise einen USB-Port – und eine visuelle Anzeige 37 wie etwa eine berührungsempfindliche Mensch-Maschine-Schnittstelle (HMI) für Eingabe/Ausgabe.
Das Fahrzeug 10 weist auch ein Sensor-Teilsystem 60 auf, das Sensoren umfasst, die Informationen an das Controller-System 20 liefern. Die Sensoreingabe in den Controller 20 ist rechts unter der Motorhaube des Fahrzeugs von 1 schematisch dargestellt. Beispielhafte Sensoren mit Basiszahl 60 (60 ₁, 60 ₂ usw.) sind ebenfalls dargestellt.
Sensordaten beziehen sich auf Merkmale wie etwa Fahrzeugoperationen, Fahrzeugposition und Fahrzeuglage, Nutzereigenschaften wie etwa Biometrik oder physiologische Maße und umweltbezogene Eigenschaften, die einen Fahrzeuginnenraum oder das Äußere des Fahrzeugs 10 betreffen.
Beispielhafte Sensoren umfassen eine Kamera 60 ₁, die in einem Rückspiegel des Fahrzeugs 10 positioniert ist, eine Kuppel- oder Dachkamera 60 ₂, die in einem Dachholm des Fahrzeugs positioniert ist, eine Umgebungskamera 60 ₃ (die vom Fahrzeug 10 abgewandt ist) und einen Umgebungsbereichssensor 60 ₄. Auf das Innere des Fahrzeugs fokussierte Sensoren 60 ₁, 60 ₂ wie etwa Kameras und Mikrofone sind dafür eingerichtet, die Anwesenheit von Personen, Aktivitäten von Personen oder andere Kabinenaktivität oder Eigenschaften zu erfassen. Die Sensoren können auch zu Authentifizierungszwecken in einer Registrierungs- oder Neuregistrierungs-Routine genutzt werden. Diese Untergruppe von Sensoren wird im Folgenden näher beschrieben.
In die Umwelt gewandte bzw. Umgebungssensoren 60 ₃, 60 ₄ erfassen Charakteristiken einer Umgebung 11 mit zum Beispiel Werbetafeln, Gebäuden, anderen Fahrzeugen, Verkehrszeichen, Verkehrslichter, Fußgänger usw.
Die erwähnten OBDs können in verschiedenen Ausführungsformen als lokale Vorrichtungen, Sensoren des Teilsystems 60 oder beides betrachtet werden.
Tragbare Geräte bzw. Vorrichtungen 34 (z. B. ein Nutzertelefon, eine tragbare Einrichtung eines Nutzers oder eine Plug-in-Vorrichtung eines Nutzers) können ebenfalls als Sensoren 60 betrachtet werden, wie etwa in Umgebungen, in denen das Fahrzeug 10 Daten nutzt, die von der lokalen Vorrichtung basierend auf einer Ausgabe eines Sensors (von Sensoren) der lokalen Vorrichtung bereitgestellt werden. Das Fahrzeugsystem kann Daten von einem Smartphone eines Nutzers verwenden, die beispielsweise nutzerbezogene physiologische Daten angeben, die durch einen biometrischen Sensor des Telefons erfasst werden.
Das Fahrzeug 10 enthält auch Kabinen-Ausgabekomponenten 70 wie etwa Lautsprecher 70 ₁, und eine Instrumententafel oder -anzeige 70 ₂. Die Ausgabekomponenten können auch einen Anzeigeschirm 70 ₃ an dem Armaturenbrett oder der Mittelkonsole, einen Schirm 70 ₄ am Rückspiegel (zum Anzeigen einer Abbildung von einer Rückfahr-/Sicherungskamera des Fahrzeugs) und jede beliebige visuelle Anzeigevorrichtung 37 des Fahrzeugs einschließen.
III. Bordeigene Computing- bzw. Berechnungsarchitektur – Fig. 2
2 veranschaulicht detaillierter das hardwaregestützte Berechnungs- oder Controller-System 20 von 1. Auf das Controller-System 20 kann durch andere Begriffe wie etwa Berechnungsvorrichtung bzw. -gerät, Controller, Controller-Gerät oder einen derartigen beschreibenden Begriff verwiesen werden, und es kann ein oder mehr Mikrocontroller, wie oben verwiesen wurde, sein oder solche umfassen.
Das Controller-System 20 ist in verschiedenen Ausführungsformen Teil des erwähnten größeren Systems 10 wie etwa eines Fahrzeugs.
Das Controller-System 20 umfasst ein hardwaregestütztes computerlesbares Speichermedium oder eine Datenspeichervorrichtung 104 und eine hardwaregestützte Verarbeitungseinheit 106. Die Verarbeitungseinheit 106 ist mit der computerlesbaren Speichervorrichtung 104 über eine Kommunikationsverbindung 108 wie etwa einen Computerbus oder drahtlose Komponenten verbunden oder verbindbar.
Auf die Verarbeitungseinheit 106 kann durch andere Namen wie etwa Prozessor, Verarbeitungs-Hardwareeinheit, dergleichen oder andere verwiesen werden.
Die Verarbeitungseinheit 106 kann zahlreiche Prozessoren umfassen oder sein, welche verteilte Prozessoren oder parallele Prozessoren in einer einzigen Maschine oder mehreren Maschinen umfassen könnten. Die Verarbeitungseinheit 106 kann beim Unterstützen einer Umgebung einer virtuellen Verarbeitung genutzt werden.
Die Verarbeitungseinheit 106 könnte eine Zustandsmaschine, eine anwendungsspezifische integrierte Schaltung (ASIC) oder ein programmierbares Gate-Array (PGA), das zum Beispiel ein Feld-PGA einschließt, umfassen. Bezugnahmen hierin auf die Verarbeitungseinheit, die einen Code oder Anweisungen ausführt, um Operationen, Vorgänge, Aufgaben, Funktionen, Schritte oder dergleichen auszuführen, könnten die Verarbeitungseinheit einschließen, die die Operationen direkt ausführt und/oder einer anderen Vorrichtung oder Komponente erleichtert, sie anweist oder mit ihr zusammenarbeitet, um die Operationen auszuführen.
In verschiedenen Ausführungsformen ist die Datenspeichervorrichtung 104 ein beliebiges eines flüchtigen Mediums, eines nicht-flüchtigen Mediums, eines entfernbaren Mediums und eines nicht-entfernbaren Mediums.
Der Begriff computerlesbare Medien und Varianten davon, wie er in der Beschreibung und den Ansprüchen verwendet wird, bezieht sich auf materielle bzw. greifbare Speichermedien.
Die Medien können eine Vorrichtung und nicht-transitorisch sein.
In einigen Ausführungsformen umfassen die Speichermedien flüchtige und/oder nicht-flüchtige, entfernbare und/oder nicht-entfernbare Medien wie etwa beispielsweise einen Direktzugriffsspeicher (RAM), einen Nurlesespeicher (ROM), einen elektrisch löschbaren programmierbaren Nurlesespeicher (EEPROM), einen Festkörperspeicher oder eine andere Speichertechnologie, CD-ROM, DVD, BLU-RAY oder einen anderen optischen Plattenspeicher, ein Magnetband, einen Magnetplattenspeicher oder andere magnetische Speichervorrichtungen.
Die Datenspeichervorrichtung 104 umfasst eine oder mehrere Speicherkomponenten, Einheiten oder Module 110, die einen computerlesbaren Code oder Anweisungen speichern, die durch die Verarbeitungseinheit 106 ausgeführt werden können, um die Funktionen des hierin beschriebenen Controller-Systems 20 auszuführen. Die Module und Funktionen werden in Verbindung mit 3 und 4 im Folgenden weiter beschrieben.
Die Datenspeichervorrichtung 104 enthält in einigen Ausführungsformen auch zusätzliche oder unterstützende Komponenten 112 wie etwa zusätzliche Software und/oder Daten, die eine Durchführung der Prozesse der vorliegenden Offenbarung unterstützen, wie etwa ein oder mehrere Nutzerprofile oder eine Gruppe von Standard- und/oder von Nutzern eingestellten Präferenzen.
Wie vorgesehen, enthält das Controller-System 20 auch ein Kommunikations-Teilsystem 30, um mit lokalen und externen Vorrichtungen und Netzwerken 34, 40, 50 zu kommunizieren. Das Kommunikations-Teilsystem 30 umfasst in verschiedenen Ausführungsformen irgendeines einer drahtgestützten Eingabe/Ausgabe (i/o) 116, zumindest ein langreichweitiges drahtloses Sende-Empfangsgerät 118 und ein oder mehrere kurz- und/oder mittelreichweitige drahtlose Sende-Empfangsgeräte 120. Die Komponente 122 ist beispielhaft dargestellt, um hervorzuheben, dass das System dafür eingerichtet sein kann, eine oder mehrere andere Arten drahtgestützter oder drahtloser Kommunikationseinrichtungen unterzubringen.
Das langreichweitige Sende-Empfangsgerät 118 ist in einigen Ausführungsformen dafür eingerichtet, Kommunikationen zwischen dem Controller-System 20 und einem langreichweitigen Netz wie etwa einem Satelliten- oder Mobilfunknetz zu ermöglichen, welches ebenfalls als durch Bezugszeichen 40 schematisch angegeben betrachtet werden kann.
Das kurz- oder mittelreichweitige Sende-Empfangsgerät 120 ist dafür eingerichtet, kurz- oder mittelreichweitige Kommunikationen wie etwa Kommunikationen mit anderen Fahrzeugen, Kommunikationen von Fahrzeug zu Fahrzeug (V2V) und Kommunikationen mit einer Infrastruktur eines Transportsystems (V21) zu ermöglichen. Allgemein kann Fahrzeug-zu-Einheit (V2X) auf kurzreichweitige Kommunikationen mit einer beliebigen Art von externer Einheit (zum Beispiel Vorrichtungen, die mit Fußgängern oder Radfahrern verbunden sind usw.) verweisen.
Um gemäß V2V, V21 oder mit anderen Geräten bzw. Vorrichtungen außerhalb des Fahrzeugs wie etwa lokalen Kommunikations-Routern usw. zu kommunizieren, kann das Sende-Empfangsgerät 120 für kurz- oder mittelreichweitige Kommunikation dafür eingerichtet sein, mittels eines oder mehrerer Protokolle für kurz- oder mittelreichweitige Kommunikation zu kommunizieren. Beispielhafte Protokolle umfassen eine zweckbestimmte Nahbereichskommunikation bzw. Dedicated Short-Range Communications (DSRC), WI-FI^®, BLUETOOTH^®, Infrarot, Infrared Data Association (IRDA), Nahfeldkommunikation (NFC), dergleichen oder Verbesserungen davon (WI-FI ist ein eingetragenes Warenzeichen von WI-FI Alliance aus Austin, Texas; BLUETOOTH ist ein eingetragenes Warenzeichen von Bluetooth SIG, Inc., aus Bellevue, Washington).
Durch kurz-, mittel- und/oder langreichweitige drahtlose Kommunikationen kann das Controller-System 20 mittels einer Operation des Prozessors 106 Information wie etwa in der Form von Nachrichten oder paketierten Daten an das (die) Kommunikationsnetzwerk(e) 40 senden und von ihm (ihnen) empfangen.
Entfernte Vorrichtungen 50, mit denen das Teilsystem 30 kommuniziert, sind in vielen Ausführungsformen nahe dem Fahrzeug 10, vom Fahrzeug entfernt oder beides.
Die entfernten Vorrichtungen 50 können mit jeder beliebigen geeigneten Struktur zum Ausführen der hierin beschriebenen Operationen umgesetzt sein. Eine beispielhafte Struktur umfasst eine beliebige oder alle Strukturen wie jene, die in Verbindung mit der Berechnungsvorrichtung 20 des Fahrzeugs beschrieben wurden. Eine entfernte Vorrichtung 50 umfasst beispielsweise eine Verarbeitungseinheit, ein Speichermedium mit Modulen, einen Kommunikationsbus und eine Eingabe/Ausgabe-Kommunikationsstruktur. Diese Merkmale werden als für die entfernte Vorrichtung 50 durch 1 dargestellt und den Querverweis durch diesen Absatz vorgesehen betrachtet.
Obgleich tragbare Vorrichtungen 34 innerhalb des Fahrzeugs 10 in 1 und 2 dargestellt sind, können beliebige von ihnen außerhalb des Fahrzeugs sein und mit ihm in Verbindung stehen.
Beispielhafte entfernte Systeme 50 umfassen einen entfernten Server wie etwa einen Anwendungs- bzw. Applikationsserver. Ein anderes beispielhaftes entferntes System 50 umfasst ein entferntes Kontrollzentrum, Datenzentrum oder Kundenservicezentrum.
Die Berechnungs- oder elektronische Vorrichtung 34 eines Nutzers, wie etwa ein Smartphone, kann ebenfalls vom Fahrzeug 10 entfernt sein und mit dem Teilsystem 30 wie etwa mittels des Internet oder eines anderen Kommunikationsnetzwerks 40 in Verbindung stehen.
Ein beispielhaftes Kontrollzentrum ist das OnStar^® Kontrollzentrum, das Einrichtungen aufweist, um mit Fahrzeugen und Nutzern, ob mittels des Fahrzeugs oder anderweitig (zum Beispiel eines Mobiltelefons) über eine langreichweitige Kommunikation wie etwa Satelliten- oder Mobilfunkkommunikationen, zu interagieren. ONSTAR ist ein eingetragenes Warenzeichen der OnStar Corporation, die eine Tochtergesellschaft der General Motors Company ist.
Wie erwähnt, enthält das Fahrzeug 10 auch ein Sensor-Teilsystem 60 mit Sensoren, die Information bezüglich Punkten bzw. Themen wie etwa Fahrzeugoperationen, Fahrzeugposition, Fahrzeuglage, Nutzereigenschaften, wie etwa Biometrik oder physiologische Maße, und/oder der Umgebung um das Fahrzeug 10 an das Controller-System 20 liefern. Die Anordnung kann so eingerichtet sein, dass das Controller-System 20 über drahtgebundene oder kurzreichweitige drahtlose Kommunikationsverbindungen 116, 120 mit Sensoren des Sensor-Teilsystems 60 kommuniziert oder zumindest Signale von ihnen empfängt.
In verschiedenen Ausführungsformen enthält das Sensor-Teilsystem 60 zumindest eine Kamera und zumindest einen Reichweiten- bzw. Bereichssensor 60 ₄, wie etwa Radar oder Sonar, der vom Fahrzeug weg gerichtet ist, um zum Beispiel autonomes Fahren zu unterstützen.
Kameras 60 ₃ für sichtbares Licht, die vom Fahrzeug 10 weg gerichtet sind, können eine monokulare, nach vorne blickende Kamera wie etwa jene umfassen, die in Spurhalteassistenz-(LDW-)Systemen verwendet werden. Ausführungsformen können andere Kameratechnologien wie etwa eine Stereokamera oder eine trifokale Kamera einschließen.
Sensoren, die dafür eingerichtet sind, äußere Bedingungen zu erfassen, können in jeder beliebigen einer Vielzahl von Richtungen angeordnet oder orientiert sein, ohne vom Umfang der vorliegenden Offenbarung abzuweichen. Beispielsweise können die Kameras 60 ₃ und der Reichweiten- bzw. Bereichssensor 60 ₄ in jeder oder einer ausgewählten Stellung, in der sie zum Beispiel (i) von einem vorderen Mittelpunkt des Fahrzeugs 10 aus nach vorn blicken, (ii) von einem rückwärtigen Mittelpunkt des Fahrzeugs 10 rückwärts blicken, (iii) von einer Seitenposition des Fahrzeugs seitlich des Fahrzeugs blicken und/oder (iv) zwischen diesen Richtungen, und jeweils bei oder in Richtung einer beliebigen Höhe orientiert sein.
Der Reichweitensensor 60 ₄ kann ein kurzreichweitiges bzw. Nahbereichsradar (SRR), ein Ultraschallsensor, ein langreichweitiges bzw. Fernbereichsradar wie beispielsweise etwa jene umfassen, die in autonomen oder Tempomat-(ACC-)Systemen, einem Sonar- oder Lichtdetektions- und Abstands-(LiDAR-)Sensor genutzt werden.
Andere beispielhafte Sensor-Teilsysteme 60 umfassen die erwähnten Kabinensensoren (60 ₁, 60 ₂, usw.). die dafür eingerichtet und angeordnet (z. B. im Fahrzeug positioniert und eingepasst) sind, um Aktivität, Personen, Umgebungsbedingungen der Kabine oder andere Merkmale in Bezug auf den Innenraum des Fahrzeugs zu erfassen. Beispielhafte Kabinensensoren (60 ₁, 60 ₂, usw.) umfassen Mikrofone, Kameras für sichtbares Licht im Fahrzeug, Sensoren für Gewichte auf Sitzen, Salzpegel eines Nutzers, Retina- und andere Nutzereigenschaften, Biometrik oder physiologische Maße und/oder die Umgebung um das Fahrzeug 10.
Die Kabinensensoren (60 ₁, 60 ₂, usw.) der Fahrzeugsensoren 60 können eine oder mehrere temperaturempfindliche Kameras (z. B. basierend auf sichtbarem Licht (3D, RGB, RGB-D), infrarot oder thermographisch) oder Sensoren einschließen. In verschiedenen Ausführungsformen sind Kameras vorzugsweise an einer hohen Stelle im Fahrzeug 10 positioniert. Beispielhafte Stellen schließen einen Rückspiegel und die Decke des Fahrgastraums ein.
Eine höhere Positionierung reduziert Störungen von seitlichen Hindernissen wie etwa den Rücklehnen der Vordersitze, die Passagiere der zweiten oder dritten Reihe blockieren oder mehrere jener Passagiere blockieren. Eine höher positionierte Kamera (lichtgestützt (z. B. RGB, RGB-D, 3D) oder thermisch oder infrarot) oder andere Sensoren können wahrscheinlich die Temperatur von mehreren Körperstellen jedes Passagiers – z. B. Rumpf, Beine, Füße – erfassen.
Zwei beispielhafte Stellen für die Kamera(s) sind in 1 durch Bezugszeichen 60 ₁, 60 ₂, usw. bezeichnet – eine am Rückspiegel und eine am Dachholm des Fahrzeugs.
Andere beispielhafte Sensor-Teilsysteme 60 umfassen dynamische Fahrzeugsensoren 134 wie etwa eine Trägheitsmoment-Einheit (IMU) mit einem oder mehreren Beschleunigungsmessern, einen Radsensor oder einen Sensor, der mit einem Lenksystem (zum Beispiel einem Lenkrad) des Fahrzeugs 10 verbunden ist.
Die Sensoren 60 können einen beliebigen Sensor zum Messen einer Fahrzeuglage oder anderer Dynamik wie etwa Position, Geschwindigkeit, Beschleunigung oder Höhe – z. B. Fahrzeughöhensensor – einschließen.
Die Sensoren 60 können jeden beliebigen Sensor einschließen, um eine Umgebung des Fahrzeugs zu vermessen, einschließlich jener, die oben erwähnt wurden, und anderer wie etwa eines Niederschlagssensors, um festzustellen, ob und wie viel es regnet oder schneit, eines Temperatursensors und jedes beliebigen anderen.
Sensoren zum Erfassen von Nutzereigenschaften umfassen jeden beliebigen biometrischen oder physiologischen Sensor wie etwa eine Kamera, die für eine Retina- oder andere Augenmerkmalserkennung, Gesichtserkennung oder Fingerabdruckerkennung verwendet wird, einen thermischen Sensor, ein Mikrofon, das für eine Sprach- oder andere Nutzererkennung verwendet wird, andere Arten von Nutzer identifizierenden kameragestützten Systemen, einen Gewichtssensor, Sensoren für Atmungsqualität (z. B. Alkoholtest), einen Sensor für Nutzertemperaturen, einen Elektrokardiogramm-(ECG-)Sensor, Sensoren für elektrodermale Aktivität (EDA) oder einen Hautleitwert (GSR), Sensoren für einen Blutvolumenstrom (BVP), Herzraten-(HR)Sensoren, Elektroenzephalogramm-(EEG)-Sensor, Elektromyographie (EMG) und Nutzertemperatur, einen Sensor, der einen Salzpegel misst, dergleichen oder andere.
Nutzer-Fahrzeug-Schnittstellen, wie etwa eine berührungsempfindliche Anzeige 37, Tasten, Knöpfe, dergleichen oder andere können ebenfalls als Teil des Sensor-Teilsystems 60 betrachtet werden.
2 zeigt auch die oben erwähnten Kabinen-Ausgabekomponenten 70. Die Ausgabekomponenten umfassen in verschiedenen Ausführungsformen einen Mechanismus zum Kommunizieren mit Insassen des Fahrzeugs. Die Komponenten umfassen, sind aber nicht darauf beschränkt, Lautsprecher 140, optische Anzeigen 142 wie etwa die Instrumententafel, einen Anzeigeschirm in der Mittelkonsole und einen Bildschirm im Rückspiegel und haptische Ausgaben 144 wie etwa Lenkrad- oder Sitzvibrationsaktoren. Das vierte Element 164 in diesem Bereich 70 ist vorgesehen, um hervorzuheben, dass das Fahrzeug jede beliebige einer großen Vielfalt anderer Ausgabekomponenten wie etwa Komponenten, die Geruch oder Licht in die Kabine vorsehen, einschließen kann.
IV. Zusätzliche Fahrzeugkomponenten – Fig. 3
3 zeigt eine alternative Ansicht des Fahrzeugs 10 der 1 und 2, die beispielhafte Speicherkomponenten und beispielhafte zugeordnete Vorrichtungen hervorhebt.
Wie erwähnt, umfasst die Datenspeichervorrichtung 104 ein oder mehrere Module 110 zum Ausführen der Prozesse der vorliegenden Offenbarung, und die Vorrichtung 104 kann Hilfs- bzw. zusätzliche Komponenten 112 wie etwa zusätzliche Software und/oder Daten enthalten, die eine Ausführung der Prozesse der vorliegenden Offenbarung unterstützen. Die zusätzlichen Komponenten 112 können zum Beispiel zusätzliche Software und/oder Daten enthalten, die eine Ausführung der Prozesse der vorliegenden Offenbarung unterstützen, wie etwa ein oder mehrere Nutzerprofile oder eine Gruppe von Standard- und/oder von Nutzern eingestellten Präferenzen.
Beliebige der Codes oder Anweisungen, die beschrieben werden, können Teil von mehr als einem Modul sein. Beliebige hierin beschriebene Funktionen können auch durch Ausführung von Anweisungen in einem oder mehreren Modulen ausgeführt werden, obgleich die Funktionen in erster Linie in Verbindung mit einem Modul mittels eines Hauptbeispiels beschrieben werden können. Auf jedes der Module kann durch einen beliebigen einer Vielzahl von Namen wie etwa durch einen Begriff oder eine Phrase, die dessen Funktion angibt, verwiesen werden.
Teil-Module können die verarbeitende hardwaregestützte Einheit 106 veranlassen, spezifische Operationen oder Routinen von Modulfunktionen auszuführen. Auf jedes Teil-Modul kann auch durch einen beliebigen einer Vielzahl von Namen wie etwa durch einen Begriff oder eine Phrase, die dessen Funktion angibt, verwiesen werden.
Beispielhafte dargestellte Module 110 umfassen:

– Eingabe-Gruppe 310
– Schnittstellen-Modul 312;
– Datenbank-Modul 314;
– Kontext-Modul 316;
– Nutzermodell-Modul 318; und
– Fahrzeugsystemmodell-Modul 319 oder Fahrzeugvorrichtungsmodell-Modul oder Fahrzeugteilsystemmodell-Modul;
– Aktivitäts-Gruppe 320
– Aktions-Modul 322; und
– Lernendes Modul 324; und
– Ausgabe-Gruppe 330
– Nutzer-Schnittstellen-Modul 332;
– Fahrzeugfunktions-Modul 334;
– Modul 336 für andere Ausgaben.

Andere in 3 dargestellte Fahrzeugkomponenten umfassen Kommunikations-Teilsysteme 30 des Fahrzeugs und das Sensor-Teilsystem 60 des Fahrzeugs. Diese Teilsysteme fungieren zumindest teilweise als Eingabequellen zu beliebigen der Module 110 und insbesondere zum Eingabe-Schnittstellen-Modul 312.
Beispielhafte Eingaben von dem Kommunikations-Teilsystem 30 beinhalten Identifizierungssignale von tragbaren Vorrichtungen, welche genutzt werden können, um eine tragbare Vorrichtung und somit den entsprechenden Nutzer für das Fahrzeug 10 zu identifizieren oder zu registrieren oder die/den Vorrichtung/Nutzer zumindest vorläufig zu registrieren, dem eine Registrierung höherer Ebene folgen soll.
Das Kommunikations-Teilsystem 30 empfängt und liefert, an die Eingabe-Gruppe 310, Daten von beliebigen eines breiten Spektrums von Quellen, einschließlich vom Fahrzeug 10 getrennter Quellen.
Beispielhafte Systeme 34 umfassen tragbare Geräte bzw. Vorrichtungen 34, von Fußgängern getragene Vorrichtungen, Systeme anderer Fahrzeuge, lokale Infrastruktur (lokalen Baken, Mobilfunktürmen, usw.), Satellitensysteme und entfernte Systeme 34/50, die beliebige einer großen Vielfalt an Information bereitstellen, wie etwa Nutzer identifizierende Daten, Daten der Nutzervorgeschichte, Nutzerauswahlen oder Nutzerpräferenzen, kontextbezogene Daten (Wetter, Straßenbedingungen, Navigation usw.), Programm- oder Systemaktualisierungen – entfernte Systeme können zum Beispiel Anwendungsserver enthalten, die einer Anwendung(en) entsprechen, die beim Fahrzeug 10 arbeitet(en), und beliebige relevante Nutzervorrichtungen 34, Computer eines Nutzers oder einer Aufsicht (Eltern, Arbeitsvorgesetzter), Server von Fahrzeugbetreibern, ein System eines Kundenkontrollzentrums, wie etwa Systeme des erwähnten OnStar^® Kontrollzentrums oder ein System eines Fahrzeugbetreibers, wie etwa dasjenige eines Taxiunternehmens, das eine Flotte betreibt, zu der das Fahrzeug 10 gehört, oder eines Betreibers eines Mitfahrdienstes.
Beispielhafte Eingaben vom Sensor-Teilsystem 60 des Fahrzeugs umfassen und sind nicht beschränkt auf:

– biometrische/physiologische Sensoren, die biometrische Daten betreffend Fahrzeuginsassen wie etwa Gesichtsmerkmale, Spracherkennung, Herzrate, Salzpegel, Haut- oder Körpertemperatur usw. bereitstellen;
– Eingabevorrichtungen von Fahrzeuginsassen, wie etwa Mensch-Maschine-Schnittstellen (HMIs) des Fahrzeugs, wie etwa ein berührungsempfindlicher Schirm, Tasten, Knöpfe, Mikrofone und dergleichen;
– Kabinensensoren, die Daten über Eigenschaften innerhalb des Fahrzeugs wie etwa Fahrzeuginnentemperatur liefern, Sensoren für das Gewicht auf Sitzen, die eine Masse oder ein Gewicht von Insassen angeben, und Bewegungsdetektionssensoren; und
– Umgebungssensoren, die Daten über Bedingungen um ein Fahrzeug bereitstellen, wie etwa von einer nach außen fokussierten Kamera, Distanzsensoren (z. B. LiDAR, Radar) und Temperatursensoren.

Die Ansicht zeigt auch beispielhafte Fahrzeug-Ausgabeeinrichtungen 70 und Nutzervorrichtungen 34, die im Fahrzeug 10 positioniert sein können. Ausgabeeinrichtungen 70 umfassen und sind nicht beschränkt auf:

– Komponente für eine Audio-Ausgabe, wie etwa Fahrzeuglautsprecher;
– Komponente für eine optische Ausgabe, wie etwa Fahrzeugbildschirme;
– Fahrzeugdynamik-Aktoren, wie etwa jene, die ein autonomes Fahren beeinflussen (Fahrzeugbremse, Drossel, Lenkung);
– Fahrzeugklima-Aktoren, wie etwa jene, die eine Temperatur eines HVAC-Systems, Luftfeuchtigkeit, Zonenausstöße, verstellbare Fensterstellung, verstellbare Schiebedachstellung und Lüfterdrehzahl(en) steuern; und
– tragbare Vorrichtungen 34 und entfernte Systeme 34/50, an die das System eine große Vielfalt an Information liefern kann, wie etwa Nutzer identifizierende Daten, biometrische Daten des Nutzers, Daten der Nutzervorgeschichte, kontextbezogene Daten (Wetter, Straßenbedingungen, usw.), Abfragen, Anweisungen oder Daten zur Verwendung beim Bereitstellen von Mitteilungen bzw. Benachrichtigungen, Warnungen oder Nachrichten an den Nutzer oder relevante Einheiten wie etwa Behörden, Rettungsdienste, Eltern, einen Betreiber oder Eigentümer eines betreffenden Fahrzeugs 10 oder ein System eines Kundenservicezentrums wie etwa das OnStar^® Kontrollzentrum.

Die Module, Teil-Module und ihre Funktionen werden im Folgenden weiter beschrieben.
V. Algorithmen und Prozesse – Fig. 4
V. A. Einführung in die Algorithmen
4 zeigt einen beispielhaften Algorithmus, Prozess oder eine Routine, schematisch dargestellt durch einen Ablauf 400, gemäß Ausführungsformen der vorliegenden Technologie. Auf die Algorithmen, Prozesse und Routinen wird hierin der Einfachheit halber zuweilen kollektiv als Prozesse oder Verfahren verwiesen.
Obgleich der Einfachheit halber ein einziger Ablauf 400 dargestellt ist, können beliebige der Funktionen oder Operationen in einem oder mehreren Prozessen, Routinen oder Subroutinen eines oder mehrerer Algorithmen von einer oder mehreren Vorrichtungen oder Systemen ausgeführt werden.
Es sollte sich verstehen, dass die Schritte, Operationen oder Funktionen der Prozesse nicht notwendigerweise in einer bestimmten Reihenfolge präsentiert werden und dass eine Ausführung einiger oder aller Operationen in einer alternativen Reihenfolge möglich ist und in Betracht gezogen wird. Die Prozesse können auch kombiniert werden oder überlappen, wie etwa eine oder mehrere Operationen eines der Prozesse, die in dem anderen Prozess durchgeführt wird oder werden.
Die Operationen wurden in der aufgezeigten Reihenfolge der einfachen Beschreibung und Veranschaulichung halber präsentiert. Operationen können hinzugefügt, weggelassen und/oder gleichzeitig ausgeführt werden, ohne vom Umfang der beigefügten Ansprüche abzuweichen. Es sollte sich auch verstehen, dass die veranschaulichten Prozesse zu jeder beliebigen Zeit beendet werden können.
In bestimmten Ausführungsformen werden einige oder alle Operationen der Prozesse und/oder im Wesentlichen äquivalente Operationen von einem Computer-Prozessor wie etwa der hardwaregestützten Verarbeitungseinheit 106, einer Verarbeitungseinheit eines Anwender- oder Nutzergeräts und/oder der Einheit einer entfernten Vorrichtung ausgeführt, die computerausführbare Anweisungen ausführt, die in einer nicht-transitorischen computerlesbaren Speichervorrichtung der jeweiligen Vorrichtung, wie etwa der Datenspeichervorrichtung 104 des Fahrzeugsystems 20, gespeichert sind.
Der Prozess kann enden, oder irgendeine der oder mehrere Operationen des Prozesses können wieder ausgeführt werden.
V. B. Systemkomponenten und Funktionen
4 zeigt die interagierenden Komponenten von 3 gemäß verschiedenen beispielhaften Algorithmen und Prozessabläufe der vorliegenden Technologie.
Obgleich Verbindungen zwischen Modulen nicht ausdrücklich dargestellt sind, interagieren Module der Eingabe-Gruppe auf verschiedene Weisen miteinander, um die Funktionen der vorliegenden Technologie zu erfüllen.
Wie beschrieben, umfasst die Eingabe-Gruppe 310 das Nutzer-Schnittstellen-Modul 312, das Datenbank-Modul 314, das Kontext-Modul 316, das Nutzermodell-Modul 318 und das Fahrzeugsystemmodell-Modul 319.
Das Eingabe-Schnittstellen-Modul 312, das von einem Prozessor wie etwa der hardwaregestützten Verarbeitungseinheit 106 ausgeführt wird, empfängt beliebige einer großen Vielfalt von Eingabedaten oder -signalen einschließlich von den hierin erwähnten Quellen.
Eine Ausgabe von irgendeinem der Module (Eingabe, Kontext, lernend 312, 316, 324, usw.) kann über das Datenbank-Modul 314 gespeichert werden. Auch können beliebige der Module 110 bei dem Datenbank-Modul 314 gespeicherte Daten verwenden.
Eingaben in die Eingabe-Gruppe 310 über das Eingabe-Schnittstellen-Modul 312, enthalten in verschiedenen Ausführungsformen Daten von beliebigen verschiedenster Eingabequellen. Beispielhafte Quellen umfassen Fahrzeugsensoren 60 und tragbare oder entfernte Vorrichtungen 34, 50, wie etwa deren Datenspeicherkomponenten, über das Kommunikations-Teilsystem 30 des Fahrzeugs. Eingaben umfassen auch über das Datenbank-Modul 314 eine Fahrzeug-Datenbank.
Sensordaten oder eine ausdrückliche Nutzereingabe geben in verschiedenen Ausführungsformen eine Bedingung des Passagiers an. Die Fahrzeugsensoren 60 können beispielsweise physiologische Sensoren umfassen, wie etwa eine Wärmekamera, EEG, ECG, andere, oben erwähnte derartige Sensoren oder andere Sensoren, die biometrische oder physiologische Eigenschaften des Passagiers erfassen können. Die Sensoren 60 können auch andere Kameras einschließen, die dafür eingerichtet und angeordnet (positioniert und ausgerichtet) sind, um eine Anwesenheit eines Passagiers, Gesichtsmerkmale, Gesten, andere Bewegungen eines Passagiers und/oder irgendeine derartige erfassbare Eigenschaft eines Passagiers zu erfassen.
In einer in Betracht gezogenen Ausführungsform können Sensordaten von einer nicht fahrzeugbezogenen Vorrichtung kommen, wie etwa Sensordaten von einer tragbaren Vorrichtung 34 eines Nutzers, die von einem Passagier getragen wird und Eigenschaften eines Passagiers erfasst – z. B. eine Kamera eines Mobiltelefongeräts.
Eingaben in die Eingabe-Gruppe 310, über das Eingabe-Schnittstellen-Modul 312, können auch Nutzereingaben in Fahrzeugschnittstellen umfassen. Beispielhafte Fahrzeugschnittstellen schließen Mikrofone, berührungsempfindliche Schirme und Kameras des Fahrzeugs ein. Die Schnittstellen können auch Schnittstellen zur Fahrzeugvorrichtungssteuerung einschließen, wie etwa Steuerungen (Knöpfe, Tasten auf einem Schirm, usw.) für ein HVAC-System des Fahrzeugs und Steuerungen für ein Infotainment-System des Fahrzeugs.
Eingaben in die Eingabe-Gruppe 310, über das Kontext-Modul 316, umfassen Information über die betreffende Situation. Die Information kann Kabinenbedingungen wie etwa Temperatur, Luftfeuchtigkeit, Lautstärke, dergleichen oder andere enthalten. Eine andere beispielhafte Kontextinformation enthält eine Information über eine äußere Umgebung des Fahrzeugs, wie etwa Temperatur, Luftfeuchtigkeit oder Lärmpegel außerhalb des Fahrzeugs 10. Auf diese Informationen kann als Umgebungsinformation über die umgebende oder umliegende Umwelt für das Fahrzeug verwiesen werden. Andere beispielhafte Kontextinformationen umfassen die Anzahl von Passagieren im Fahrzeug, die Fahrroute, Tageszeit, Stadtteil, usw.
Das Nutzermodell-Modul 318 enthält Passagier- oder Nutzermodelle oder greift auf solche Modelle wie etwa von einem entfernten Server 50 zu. Das System kann ein Nutzermodell-Modul für jeden von mehreren Nutzern, wie etwa Nutzer eines automatisierten Taxis, Mitglieder einer Familie oder eines Unternehmens, usw. enthalten.
In verschiedenen Ausführungsformen sind die Modelle nutzerspezifisch, so dass sich jedes Modell auf einen eindeutigen entsprechenden Nutzer bezieht.
Die Nutzermodelle können Passagierprofile oder -konten enthalten oder ein Teil dessen sein. Die Passagierprofile können Daten enthalten, die Passagierpräferenzen oder -einstellungen repräsentieren, die von dem Passagier und/oder einem System eingerichtet wurden. In Bezug auf eine Systemeinrichtung beispielsweise können Einstellungen durch ein System wie etwa das Fahrzeugsystem 20 basierend auf Beobachtungen einer Aktivität oder eines Verhaltens des Nutzers im Laufe der Zeit unter einem oder mehreren Umständen eingerichtet oder eingestellt werden. Das Erlernen kann beispielsweise von dem lernenden Modul 324 ausgeführt werden. Die Aktivität oder das Verhalten eines Nutzers kann ein wahrgenommenes Muster einer Aktivität oder eines Verhaltens einschließen, wie etwa eine bevorzugte Radiostation oder eine bevorzugte Station am späten Nachmittag, nach der Arbeit am Freitag, oder bevorzugte HVAC-Einstellungen, Fahreinstellungen, Musikgenres, allgemein oder unter bestimmten Bedingungen, usw.
Das Nutzermodell für jeden Passagier enthält Datenstrukturen, die den Passagier repräsentieren. Die Strukturen können Wünsche, Präferenzen oder dergleichen des Passagiers repräsentieren oder verwendet werden, um diese zu erlernen oder zu bestimmen. Basierend auf dem Nutzermodell kann das System (z. B. Aktions-Modul 322) dem Passagier einen genaueren Kundenservice bereitstellen, wie etwa eine genauere, kundenspezifische Information, Fahrzeugsteuerung, Unterhaltung bzw. Entertainment oder einen Dialog zwischen dem Fahrzeug und dem Fahrer.
Das Fahrzeugsystemmodell-Modul 319 enthält Systemmodelle, die jeweils mehrere Fahrzeugsysteme repräsentieren. Auf das Modul 319 kann durch andere Namen verwiesen werden, wie etwa das Fahrzeugvorrichtungsmodell-Modul oder Fahrzeugteilsystemmodell-Modul.
Das Fahrzeugvorrichtungsmodell für jedes Fahrzeugsystem umfasst Datenstrukturen, die das Fahrzeugsystem repräsentieren. Jedes Fahrzeugvorrichtungsmodell kann Daten enthalten, die eine Operation einer Fahrzeugvorrichtung wie etwa Modi, Zustände oder Bedingungen einer Fahrzeugvorrichtung repräsentieren.
Beispielhafte Modelle der Fahrzeugvorrichtungsmodell-Module umfassen ein Modell für autonomes Fahren eines Moduls für A-D-Fahrmodelle, ein HVAC-Modell eines HVAC-Modell-Moduls, usw.
Das Modell kann durch eine Nutzereingabe beeinflusst werden, wie etwa als Antwart auf einen Passagier, der eine Systemeinstellung ändert, wie etwa indem er eine HVAC-Temperatur herunterdreht. Basierend auf den Modellen kann das System (z. B. Aktions-Modul 322) genauere Entscheidungen darüber treffen, wie die Fahrzeugsysteme – Infotainment-System(e), HVAC-Systeme, System für autonomes Fahren, usw. – einzustellen sind.
Beliebige der anderen Eingaben in die Eingabe-Gruppe 310 oder bei einem anderen Eingabe-Gruppe-Modul erzeugte Daten können über das Datenbank-Modul 314 gespeichert werden. Die Daten können in den Fahrzeugdatenspeicher 104 und/oder in lokale oder entfernte Systeme gespeichert werden, wie etwa (1) einen Speicher einer mobilen Vorrichtung 34 in Verbindung mit einer Applikation der mobilen Vorrichtung; (2) einen Nutzercomputer wie etwa ein Tablet, Laptop oder einen Desktop-Computer mit einem Speicher, der die Daten über eine Internetverbindung und/oder eine Anwendung für die beim Computer gespeicherte Technologie empfangen kann; oder (3) einen Server oder entfernten Computer 50, wie etwa einen Computer eines entfernten Kundenservicezentrums wie das OnStar^® System.
Das Datenbank-Modul 314 kann auch Daten von anderen Gruppen 320, 330 wie etwa von dem Aktions-Modul 322 oder dem lernenden Modul 324 der Aktivitäts-Gruppe empfangen.
Daten der Eingabe-Gruppe werden nach einer etwaigen Formatierung, Umwandlung oder anderen Verarbeitung (z. B. durch das Eingabe-Schnittstellen-Modul 312) an die Aktivitäts-Gruppe 320 weitergeleitet.
Auf einen beliebigen Teil des Systems kann als ein intelligenter Agent (engl. agent) verwiesen werden. Der Ausdruck stammt aus der Technologie, die dafür konfiguriert ist, Entscheidungen zu treffen und mit dem Nutzer in einer Art und Weise zu interagieren, wie es herkömmliche Systeme nicht tun. Ein herkömmliches HVAC-System, das eine Temperatureinstellung um 5 Grad erhöht, falls ein Nutzer einen Knopf für eine Temperaturerhöhung um ein Grad fünfmal drückt, ist nicht intelligent. Ein System, das durch Unterhalten mit einem Fahrzeugpassagier und/oder nach Physiologie oder Verhalten (z. B. Gesten) des Passagiers bestimmt, dass der Passagier eine niedrigere Temperatur, oder die Fenster ein wenig heruntergedreht, schätzen oder wahrscheinlich schätzen würde, ist ein intelligenter Agent.
Die Aktivitäts-Gruppe 320 umfasst das Aktions-Modul 322 und das lernende Modul 324.
Das Aktivitäts-Modul 322 bestimmt, wenn es durch eine entsprechende Verarbeitungseinheit ausgeführt wird, eine oder mehrere Aktionen, um sie als Antwort auf die Eingabedaten von der Eingabe-Gruppe 310 auszuführen bzw. zu unternehmen. Das Aktivitäts-Modul 322 fragt in verschiedenen Implementierungen relevante Daten von der Eingabe-Gruppe 310 ab (ruft sie ab), empfängt sie ohne Anfrage (senden bzw. pushen) oder erhält sie auf andere Weise.
Das Aktivitäts-Modul 322 verarbeitet in verschiedenen Ausführungsformen vorliegende oder gegenwärtige und vergangene gespeicherte Daten, um die eine oder mehrere, zu unternehmende Aktionen zu bestimmen. Das Bestimmen kann einschließen, dass man Programme oder Algorithmen wie etwa einen Entscheidungsalgorithmus künstlicher Intelligenz laufen lässt. Das Aktivitäts-Modul 322 oder das lernende Modul 324 kann zu einer Bestimmung einer Aktion beitragen, indem Eingabedaten unter Verwendung eines lernenden Algorithmus der Maschine oder irgendeines anderen geeigneten lernenden Algorithmus verarbeitet werden.
Das Aktivitäts-Modul 322 bestimmt basierend auf zumindest den Eingabedaten von der Eingabe-Gruppe 310 beliebige einer großen Vielfalt von proaktiven Aktionen, um sie auszuführen oder einem oder mehreren Passagieren vorzuschlagen.
Das Aktivitäts-Modul 322 ist in verschiedenen Ausführungsformen dafür eingerichtet, eine Kommunikation zu bestimmen, um als Antwort auf eine Bestimmung, dass ein Auslöseereignis oder eine Auslösebedingung vorliegt, eine proaktive Aktion vorzusehen oder zu unternehmen. In zumindest einigen dieser Ausführungsformen schließt das Auslöseereignis oder die Auslösebedingung eine Nutzeranfrage nach einer Aktion nicht ein.
Stattdessen bestimmt das Aktivitäts-Modul 322, eine Aktion oder einen Dialog mit einem Passagier einzuleiten, der einen Vorschlag einer oder mehrerer möglicher Aktionen einschließt, und bestimmt basierend auf dem Dialog, ob die Aktionen ausgeführt bzw. unternommen werden sollen.
Beispielhafte Auslöseereignisse oder -bedingungen umfassen eine oder mehrere der Folgenden, sind aber nicht darauf beschränkt:

i) ein autonomes Fahrzeug nähert sich einem Ziel eines Passagiers;
ii) das autonome Fahrzeug beginnt eine lange Fahrt, was z. B. einen Vorschlag für eine Unterhaltung längerer Dauer wie etwa einen Film rechtfertigt;
iii) ein bestimmter Passagier, der im autonomen Fahrzeug ist (z. B. eine/ein Jugendliche/Jugendlicher);
iv) ein Zeitkontext – z. B. eine morgendliche Fahrt, die einen Vorschlag für gewisse fröhliche peppige Musik rechtfertigt, oder eine Fahrt am späten Abend, die einen Vorschlag für Entspannungsmusik rechtfertigt;
v) eine Klimabedingung in der Kabine – z. B. Kabinentemperatur ist hoch oder niedrig;
vi) eine Außenklimabedingung;
vii) eine Fahrzeugdynamik – z. B. eine geringere Fahrzeuggeschwindigkeit, die anzeigt, dass ein Herunterdrehen des Fensters eine gute Idee ist, um die Kabine zu kühlen, ohne einen zu großen Strömungswiderstand hinzuzufügen; und
viii) irgendeine Bedingung, die durch Präferenzen, Einstellungen oder vergangene Aktivitäten oder Entscheidungen des Passagiers angezeigt wird oder damit verknüpft ist – wie etwa (A) eine Temperatur in der Kabine, der man sich nähert oder die man erreicht hat, bei welcher das System bemerkt hat, dass der Nutzer in der Vergangenheit dazu tendierte, die Temperatureinstellung des Fahrzeugs herunterzudrehen (wobei eine entsprechende Aktion natürlich darin besteht, die Fahrzeugtemperatur dementsprechend einzustellen und vielleicht dem Fahrer mitzuteilen, dass selbiges getan wird, gerade getan wird oder getan wurde) oder (B) eine Radiolautstärke, die unter bestimmten Bedingungen bei einem bestimmten Pegel liegt, wie etwa die Musik, die während einer Fahrt nach der Arbeit mit teilweise heruntergedrehten Fenstern auf der Autobahn bei oder unter einem bestimmten Pegel liegt, wobei der Nutzer in der Vergangenheit unter diesen Umständen dazu tendierte, die Lautstärke auf einen höheren Pegel hochzudrehen (wobei eine entsprechende Aktion natürlich darin besteht, dementsprechend die Lautstärke des Fahrzeug-Infotainment einzustellen und dem Nutzer vielleicht mitzuteilen, dass selbiges getan wird, gerade getan wird oder getan wurde).

Beispielhafte vorgeschlagene proaktive Aktionen, einschließlich Fahrzeug-Nutzer-Kommunikationen und Nutzer-Fahrzeug-Dialoge, umfassen eine oder mehrere der Folgenden und sind nicht darauf beschränkt:

i. dem Nutzer vorschlagen, dass eine Einstellung am Klimasystem des Fahrzeugs vorgenommen wird;
ii. eine Einstellung an einem nicht auf HVAC bezogenen Fahrzeugsystem vorzunehmen, das ein effektives Passagierklima beeinflusst, wie etwa Fensterstellungen, Schiebe-/Hubdachstellung und Sitztemperatur;
iii. eine Präsentation eines Films oder ein anderes Infotainment vorschlagen;
iv. einen Dialog beginnen, und möglicherweise auch bestimmen, ob der Passagier einen Dialog fortsetzen möchte – zum Beispiel bestimmen, dass während eines Fahrzeug-Nutzer-Dialogs der Nutzer an dem Dialog beteiligt oder auf andere Weise daran interessiert erscheint, weiterzusprechen;
v. eine Einstellung an einem Fahrzeugdynamiksystem vorschlagen, wie etwa eine Erhöhung der Geschwindigkeit oder einer Richtungsänderung beim automatischen Fahren; und
vi. eine Änderung der Fahrroute vorschlagen, wie etwa vorschlagen, dass eine landschaftlich reizvollere Route genommen wird.

Andere beispielhafte Anwendungsfälle werden im Folgenden geliefert.
Das lernende Modul 324 bestimmt basierend auf einer beliebigen verschiedenster Eingaben die Art und Weise, um ein Passagierprofil zu ändern. Das System kann zum Beispiel bestimmen, dass der Passagier auf Vorschläge einer neuen Routenführung bzw. einer Umleitung positiv reagiert, und so ein entsprechendes Passagierprofil einstellen, um anzuzeigen, dass der Passagier nicht strikt darauf besteht, einen bestimmten Weg beizubehalten, generell oder unter bestimmten Bedingungen, wie etwa wenn er nicht in Eile ist, oder unter Bedingungen, wie etwa wenn er mit beabsichtigten Vorteilen einer neuen Routenführung, wie etwa Zweckmäßigkeit, größere Ruhe, indem eine ruhigere oder landschaftlich reizvollere Route genommen wird, präsentiert wird.
Um derartige Funktionen auszuführen, ist das lernende Modul 416 in verschiedenen Ausführungsformen dafür eingerichtet, künstliche Intelligenz, Computational Intelligence bzw. Berechnungsintelligenz, ein neuronales Netzwerk oder heuristische Strukturen oder einen derart geeigneten Code einzubeziehen.
Ergebnisse der Aktivitäts-Gruppe 320 werden an verschiedene Ziele geliefert. Wie erwähnt wurde, können die Ziele das Datenbank-Modul 314 des Eingabe-Moduls 310 und das lernende Modul 324 der Aktivitäts-Gruppe umfassen, über welche anschließende Aktivitäten des Systems verbessert werden können, wie etwa indem das in nachfolgenden Systemaktivitäten genutzte Passagierprofil aktualisiert wird.
Ein Hauptadressat der Aktivitäts-Gruppe 320 ist in verschiedenen Ausführungsformen die Ausgabe-Gruppe 330. Die Module der Ausgabe-Gruppe 330 formatieren, wandeln um oder verarbeiten auf andere Weise eine Ausgabe des Aktivitäts-Moduls 320, bevor selbige an eine oder mehrere verschiedener Ausgabekomponenten geliefert wird.
Die Ausgabe-Gruppe 330 umfasst das Nutzer-Schnittstellen-Modul 332, das Fahrzeugfunktions-Modul 334 und das Modul 336 für andere Ausgaben.
Das Nutzer-Schnittstellen-Modul 332 leitet, wenn es durch die Verarbeitungseinheit ausgeführt wird, beliebige System-Passagier-Interaktionen ein, die durch die Aktivitäts-Gruppe 320 entsprechend bestimmt wurden. Die Interaktionen können über eine beliebige HMI, wiewohl vom Fahrzeug 10, ausgeführt werden. Eine beispielhafte HMI umfasst jene der Fahrzeug-Schnittstellen 70 wie etwa einen Lautsprecher und Anzeigeschirm eines Fahrzeugs und Schnittstellen einer tragbaren oder Nutzervorrichtung 34 wie etwa einen Lautsprecher oder Schirm eines Mobiltelefons oder Tablets, oder ein Headset oder einen Bügel oder Hörer, der entweder mit dem Fahrzeug oder der tragbaren Vorrichtung verbunden ist, um dem Nutzer Audio bereitzustellen.
Das Fahrzeugfunktions-Modul 334 leitet, wenn es durch die Verarbeitungseinheit ausgeführt wird, beliebige Einstellungen von Fahrzeugfunktionen ein, die durch die Aktivitäts-Gruppe 320 entsprechend bestimmt wurden. Beispielhafte Fahrzeugfunktionen umfassen:

i. Fahrzeugdynamiken, wie etwa Funktionen beim autonomen Fahren wie Geschwindigkeit, Wenden, Parken und Beschleunigung;
ii. Funktionen des Infotainment-Systems, wie etwa des Radios oder eines Filmabspielgeräts;
iii. Funktionen von Fahrzeugsystemen, die das Kabinenklima beeinflussen, wie etwa HVAC, Fenster, Schiebedach, Sitzheizungen, usw.; und
iv. Routing- bzw. Streckenführungsfunktionen, wie etwa Ändern einer Route als Antwort auf ein Fahrzeug, vorgeschlagen und vom Passagier genehmigt, über eine Operation des Aktivitäts-Moduls 322.

Das Modul 334 kann spezifischere Begriffe einbeziehen, oder darauf kann durch diese verwiesen werden, welche sich auf spezifische Modulfunktionen beziehen können, wie etwa das Modul, das ein Modul 334 für ein Fahren mit einem autonomen Fahrzeug ist.
Das Modul 336 für andere Ausgaben führt, wenn es durch die Verarbeitungseinheit ausgeführt wird, beliebige andere Aktionen aus, die durch die Aktivitäts-Gruppe 320 bestimmt wurden. Als ein Beispiel können andere Ausgaben ein Senden von Mitteilungen oder Nachrichten an eine nicht fahrzeugbezogene Vorrichtung oder Adressen einbeziehen, wie etwa lokale oder entfernte Systeme, Einheiten oder Personen (z. B. E-Mail-Adresse oder Telefon des Nutzers, der Eltern, des Vorgesetzter, der Behörden, usw.), wie etwa an einen Betreiber einer Flotte autonomer Fahrzeuge, wovon ein den Passagier beförderndes Fahrzeug ein Teil ist. Die Kommunikation kann ein Liefern von Daten an einen entfernten Server zum Aktualisieren eines Passagierprofils, zur Verwendung bei einer Protokollierung und zukünftigen Nutzung des Profils in Verbindung mit einer späteren Fahrt mit einem autonomen Fahrzeug einschließen.
Das Modul 336 für andere Ausgaben kann spezifischere Begriffe einschließen, oder darauf kann durch solche verwiesen werden, welche sich auf spezifische Modulfunktionen beziehen können, wie etwa das Modul, das ein Modul für externe Kommunikation ist, das im Betrieb Mitteilungen an Dritte sendet, die nicht an der Fahrt teilnehmen, wie etwa Eltern, Freund, Vorgesetzter oder Flottenbetreiber.
V. C Zusätzlicher Algorithmus – Perspektive des intelligenten Agenten
5 zeigt eines beispielhaftes Algorithmendiagramm 500 aus einer Perspektive des Systems oder intelligenten Agenten.
Obgleich ein einziger Ablauf 500 der Einfachheit halber dargestellt ist, können beliebige der Funktionen oder Operationen in einem oder mehreren Prozessen, Routinen oder Subroutinen eines oder mehrerer Algorithmen durch eine oder mehrere Vorrichtungen oder Systeme ausgeführt werden.
Es sollte sich verstehen, dass die Schritte, Operationen oder Funktionen der Prozesse nicht notwendigerweise in einer bestimmten Reihenfolge präsentiert werden und dass eine Ausführung einiger oder aller Operationen in einer alternativen Reihenfolge möglich ist und in Betracht gezogen wird. Die Prozesse können auch kombiniert werden oder überlappen, wie etwa eine oder mehrere Operationen eines der Prozesse, die in dem anderen Prozess durchgeführt wird oder werden.
Die Operationen wurden der einfachen Beschreibung und Veranschaulichung halber in der aufgezeigten Reihenfolge präsentiert. Operationen können hinzugefügt, weggelassen und/oder gleichzeitig ausgeführt werden, ohne vom Umfang der beigefügten Ansprüche abzuweichen. Es sollte sich auch verstehen, dass die veranschaulichten Prozesse zu jeder Zeit beendet werden können.
In bestimmten Ausführungsformen werden einige oder alle Operationen der Prozesse und/oder im Wesentlichen äquivalente Operationen von einem Computer-Prozessor wie etwa der hardwaregestützten Verarbeitungseinheit 106, einer Verarbeitungseinheit eines tragbaren Geräts eines Nutzers und/oder der Einheit einer entfernten Vorrichtung ausgeführt, die computerausführbare Anweisungen ausführt, die in einer nicht-transitorischen computerlesbaren Speichervorrichtung der jeweiligen Vorrichtung, wie etwa der Datenspeichervorrichtung 104 des Fahrzeugsystems 20, gespeichert sind.
Der Prozess kann enden, oder irgendeine oder mehrere Operationen des Prozesses können wieder ausgeführt werden.
Jedes dargestellte Element kann ein Modul, eine Einheit, ein Modell, eine Funktion, eine Codekomponente, dergleichen oder etwas anderes sein oder enthalten.
Obgleich Verbindungen zwischen jedem Element nicht ausdrücklich dargestellt sind, können die Elemente miteinander auf beliebige, verschiedenste Arten miteinander interagieren, um die Funktionen der vorliegenden Technologie zu erfüllen.
Der Algorithmus 500 enthält eine Nutzereingabe-Einheit 501, um eine beliebige, ausdrücklich oder inhärent hierin beschriebene Eingabe zu empfangen und weiterzuleiten.
Eine Sensoreinheit erhält eine Eingabe von einem beliebigen eines breiten Spektrums an Sensoren, die dafür eingerichtet sind, Nutzer-, Kabinen- oder zusätzliche Fahrzeugeigenschaften zu messen. Beispielhafte Sensoren sind oben beschrieben und umfassen hier eine RGB-Kamera 512, eine Wärmekamera 514, einen physiologischen Sensor 516 oder einen beliebigen geeigneten oder gewünschten Sensor 518.
Der Algorithmus schließt auch eine Spracheinheit 520 ein, wie etwa ein Spracherkennungssystem, das imstande ist, eine hörbare Sprache eines Nutzers in Daten wie etwa Textdaten oder andere Daten umzuwandeln, die angeben, was der Nutzer spricht.
Eine andere Einheit ist eine Umgebungskontexteinheit 530, wie etwa eine, die beliebige Wetterdaten, Navigationsdaten, Verkehrsdaten, dergleichen und andere bereitstellt.
Eine Eingabe von einer beliebigen der Sensor-, Sprach- und Kontexteinheiten wird an eine Nutzerzustands-Einheit 540 geliefert. Die Nutzerzustands-Einheit enthält in verschiedenen Ausführungsformen beliebige der Merkmale, die oben in Verbindung mit der Aktivitäts-Gruppe 320 von 3 und 4 beschrieben wurden. Die Nutzerzustands-Einheit bestimmt einen Zustand (Zustand x) für jeden Nutzer und/oder Umstand und bestimmt eine zu unternehmende Ausgabeaktion.
Ausgabeaktionen können an ein Ausgabe-Teilsystem wie etwa die Ausgabe-Gruppe 330 der 3 und 4 geliefert werden.
Die Ausgabeaktionen können ein Aktualisieren eines Servers 550, wie etwa des Servers 50 der 1–4, einschließen. Die Aktualisierung kann ein Aktualisieren eines Nutzerprofils wie etwa das Aktualisieren von oben beschriebenen Profilen einschließen.
Die Ausgabeaktionen können ein Bestimmen eines oder mehrerer Befehle, die am Fahrzeug ausgeführt werden sollen, wie etwa eine Kommunikation zu bestimmen, um für einen Empfang durch den Nutzer mittels einer Fahrzeug-Nutzer-Schnittstelle 570 zu sorgen, und ein Bereitstellen einer solchen Fahrzeugausgabe 580 einschließen.
Eine Bestimmung von Ausgaben kann zusätzlich zu der Nutzerzustands-Ausgabe 540 auf beliebige von Nutzermodell-Daten von einer Nutzermodell-Einheit 562, Kontextmodell-Daten von einer Kontextmodell-Einheit 564 und Fahrzeugmodell-Daten von einer Fahrzeugmodell-Einheit 566 gestützt werden. Die Nutzer- und Fahrzeugkontext-Einheiten können wie das Nutzermodell-Modul 318 und das Fahrzeugsystemmodell-Modul 319, die oben in Verbindung mit 3 und 4 beschrieben wurden, sein.
Die Kontextmodell-Einheit 564 repräsentiert aktuelle Umstände als Modell, wie etwa indem als Eingabe in die Entscheidung 560 Daten bereitgestellt werden, die einen etwaigen, auf die gerade vorgenommene Bestimmung bezogenen Kontext repräsentieren. Der Kontext kann zum Beispiel eine Nutzerpräferenz, eine Präferenz einer Gruppe von Passagieren, eine bestimmte oder festgestellte Stimmung eines oder mehrerer Passagiere, eine Verfügbarkeit von Infotainment-Medien, eine Option der HVAC-Einstellung, usw. umfassen.
Als Antwort auf eine Ausgabe von der Fahrzeugausgabe-Einheit 580, wie etwa eine Anfrage für der Nutzer, ein Manöver eines autonomen Fahrzeugs, usw., kann der Nutzer eine weitere Eingabe bereitstellen, die durch eine Nutzerrückmeldungs-Einheit 590 dargestellt wird. Das System kann hier eine Nutzerangabe empfangen, die eine Nutzerantwort auf die Anfrage, eine Aussage, Geste oder anderes Verhalten eines Nutzers anzeigt, das angibt, was er von der Fahrzeugausgabe hält – z. B. ”Halt!” sagen, falls er durch ein seiner Meinung nach zu enges Überholmanöver beunruhigt ist. Die Nutzerrückmeldung von dieser Einheit 590 kann genutzt werden, um ein Nutzerprofil weiter zu aktualisieren (Aktualisierungseinheit 550 des Referenzservers), und/oder als Basis für die Nutzerzustandsbestimmung der erwähnten Einheit 540 für Entscheidungen über einen Nutzerzustand, wie in 5 gezeigt ist.
Der Prozess des Algorithmus kann enden, oder irgendeine andere oder mehrere Operationen des Prozesses können wieder ausgeführt werden.
V. D. Zusätzlicher Algorithmus – Server-Perspektive
6 zeigt ein beispielhaftes Algorithmendiagramm 600 aus einer Perspektive eines Servers der vorliegenden Technologie.
Obgleich ein einziger Ablauf 500 der Einfachheit halber dargestellt ist, können beliebige der Funktionen oder Operationen in einem oder mehreren Prozessen, Routinen oder Subroutinen eines oder mehrerer Algorithmen durch eine oder mehrere Vorrichtungen oder Systeme ausgeführt werden.
Es sollte sich verstehen, dass die Schritte, Operationen oder Funktionen der Prozesse nicht notwendigerweise in einer bestimmten Reihenfolge präsentiert werden und dass eine Ausführung einiger oder aller Operationen in einer alternativen Reihenfolge möglich ist und in Betracht gezogen wird. Die Prozesse können auch kombiniert werden oder überlappen, wie etwa eine oder mehrere Operationen eines der Prozesse, die in dem anderen Prozess durchgeführt wird oder werden.
Die Operationen wurden der einfachen Beschreibung und Veranschaulichung halber in der aufgezeigten Reihenfolge präsentiert. Operationen können hinzugefügt, weggelassen und/oder gleichzeitig ausgeführt werden, ohne vom Umfang der beigefügten Ansprüche abzuweichen. Es sollte sich auch verstehen, dass die veranschaulichten Prozesse zu jeder beliebigen Zeit beendet werden können.
In bestimmten Ausführungsformen werden einige oder alle Operationen der Prozesse und/oder im Wesentlichen äquivalente Operationen von einem Computer-Prozessor ausgeführt, wie etwa der hardwaregestützte Verarbeitungseinheit eines speziell konfigurierten Servers, konfiguriert mit Anweisungen zum Ausführen von Funktionen der vorliegenden Technologie, wobei die Funktionen an der Verarbeitungseinheit ausgeführt werden, die von Computern ausführbare Anweisungen ausführt, die in einer nicht-transitorischen computerlesbaren Speichervorrichtung der jeweiligen Vorrichtung, wie etwa des entfernten Servers 50 von 1–4, gespeichert sind.
Jedes dargestellte Element kann ein Modul, eine Einheit, ein Modell, eine Funktion, eine Code-Komponente, dergleichen oder anderes sein oder diese enthalten. Auf die Elemente wird der Einfachheit halber in erster Linie im Folgenden als Einheiten verwiesen.
Obgleich Verbindungen zwischen jedem Element nicht ausdrücklich dargestellt sind, können die Elemente miteinander auf beliebige verschiedenster Arten interagieren, um die Funktionen der vorliegenden Technologie zu erfüllen.
Der Algorithmus 600 umfasst auch eine Nutzereingabe-Einheit 610, um eine beliebige, ausdrücklich oder inhärent hierin beschriebene Eingabe zu empfangen und weiterzuleiten. Die Einheit 610 umfasst in verschiedenen Ausführungsformen beliebige der für die Nutzereingabe-Einheit 501 von 5 beschriebenen Merkmale.
Die Nutzereingabe kann bei einer Einheit 620 zur Nutzereingabe-Verarbeitung verarbeitet werden, oder sich fortsetzen oder auf eine verschiedene Weise, bevor sie einem Server 630 bereitgestellt wird. Der Server 630 kann eine so verarbeitete Eingabe oder noch unbearbeitete Eingabe von der Nutzereingabe 610 empfangen.
Der Algorithmus schließt auch eine Agent-Abfrage-Einheit 640 ein, die dafür eingerichtet ist, an den Server 630 eine Abfrage nach einer Information vom Fahrzeugsystem zu liefern, wie etwa von dem intelligenten Agenten des Fahrzeugs. Das System oder der Agent des Fahrzeugs fragt die Information wie etwa eine Nutzer-, Fahrzeug- und/oder Kontextmodell-Information (Referenz 632, 634, 636) zur Verwendung in beliebigen Operationen des intelligenten Agenten, einschließlich jener, die oben in Verbindung mit 4 beschrieben wurden, ab.
Der Server 630 enthält verschiedene Einheiten, oder steht mit ihnen in Verbindung, wie etwa eine Nutzermodell-Einheit 632, eine Kontextmodell-Einheit 564 und eine Fahrzeugmodell-Einheit 636. Diese Einheiten können in jeglicher Form wie die Nutzermodell-Einheit 562, die Kontextmodell-Einheit 564 bzw. die Fahrzeugmodell-Einheit 566 sein, die oben in Verbindung mit 5 beschrieben wurden.
Der Server 630 bestimmt bei Raute 638 basierend auf zumindest Eingaben von dem Nutzer 610, 620, und in einigen Fällen von Daten von der Agent-Abfrage-Einheit 640, eine Art und Weise, um Modelle zu aktualisieren. Beispielhafte, derart aktualisierte Modelle umfassen die erwähnten Modelle der Nutzermodell-Einheit 632, der Kontextmodell-Einheit 564 und der Fahrzeugmodell-Einheit 636.
In verschiedenen Ausführungsformen werden die Modelle genutzt, um Systemfunktionen auszuführen, ob an dem Server oder einem anderen System wie etwa dem Fahrzeugsystem 20 oder einer tragbaren Vorrichtung 34. Beispielhafte Funktionen umfassen ein Bestimmen eines Nutzerwunsches betreffend eine auf die Fahrt bezogene Operation wie etwa autonomes Fahren, HVAC-Funktionen oder Infotainment oder Bestimmen einer Art und Weise, in der mit einem oder mehreren Passagieren interagiert wird, wie etwa an welcher unterrichtenden Information der Nutzer in einer Diskussion unter bestimmten Umständen interessiert ist oder sein mag.
Eine erzeugte Information zur Modellaktualisierung kann von dem Server 630 über die Einheit 640 zur Aktualisierung von Fahrzeugmodellen an das Fahrzeugsystem 20 gesendet werden, um Versionen der gleichen Modelle in der Fahrzeugsoftware zu aktualisieren – z. B. die Nutzermodell-Einheit 562, die Kontextmodell-Einheit 564 und die Fahrzeugmodell-Einheit 566, die oben in Verbindung mit 5 beschrieben wurden.
Eine erzeugte Information zur Modellaktualisierung kann auch von dem Server 630 als Antwort auf die über die Agent-Abfrage-Einheit 640 am Server 630 empfangene Abfrage über eine Einheit 650 für eine Agent-Abfrage-Antwort gesendet werden.
Der Prozess des Algorithmus kann enden, oder irgendeine oder mehrere Operationen des Prozesses können wieder ausgeführt werden.
VI. Zusätzliche Struktur, Algorithmenmerkmale und Operationen
In Kombination mit beliebigen der hierin beschriebenen anderen Ausführungsformen, oder statt beliebiger Ausführungsformen, kann die vorliegende Technologie eine beliebige Struktur umfassen oder beliebige Funktionen wie folgt ausführen.
Die Technologie nutzt in verschiedenen Ausführungsformen eine Spracherkennung, um ein Nutzererlebnis zu verbessern, wie etwa indem ein Inhalt einer Nutzeranfrage oder einer Aussage, die eine Anfrage oder einen Wunsch angibt, bestimmt wird.
Die Technologie ermöglicht in verschiedenen Ausführungsformen eine große Vielfalt von Anwendungen, einschließlich Nutzungen, die sich auf proaktives Infotainment, Fahrzeugdynamik und Fahrzeugklima beziehen.
Das System der vorliegenden Technologie ist in verschiedenen Ausführungsformen dafür eingerichtet, einem Nutzer für eine Reise relevante Information proaktiv bereitzustellen und in einigen Ausführungsformen dem Nutzer vorzuschlagen, dass eine andere Aktion unternommen wird.
Die Technologie ist in verschiedenen Ausführungsformen beim Bereitstellen des Passagier-Infotainments, das für ihn relevant ist, proaktiv.
Die Technologie ist in verschiedenen Ausführungsformen dabei proaktiv, Fahrzeugnutzer während einer Fahrt einzubinden, einschließlich eines Fahrers oder Passagiers, einschließlich Mitfahrer des autonomen Fahrzeugs.
Erster beispielhafter Anwendungsfall, bezüglich Dialog und reisebezogener Information:

1. Fahrzeug: ”Dave, wir werden in 40 Minuten am Haus Deiner Mutter ankommen; möchtest Du, dass eine Nachricht über Deine Anfahrt 15 Minuten vor der Ankunft an Sie gesendet wird?”
2. Dave: ”Sicher, bitte.” – Das System ist dafür konfiguriert, den Dialog zu interpretieren. Hier z. B. soll das durch das Fahrzeugsystem bestimmte ”sicher, bitte” ”Ja” äquivalent sein, oder in einer anspruchsvolleren Ausführungsform als ”positiv” oder ”Ja”, aber mit einem gewissen Zögern oder als ein weniger lauthalses ”Ja” bestimmt werden.

Zweiter beispielhafter Anwendungsfall, bezüglich Dialog und reisebezogener Information:

1. Fahrzeug: ”Laura, entlang Deiner üblichen Route zur Arbeit gibt es heute Baustellen; überlegst Du Dir, zu einer längeren Route mit weniger Verkehr zu wechseln? Ich nehme an, dies wäre eine komfortablere Fahrt für Dich.”
2. Laura: ”Oh ja, bitte; ich muss lesen, und Baustellen stören mich sehr.”

Dritter beispielhafter Anwendungsfall, bezüglich Dialog und reisebezogener Information:

1. Fahrzeug: ”Laura, entlang Deiner üblichen Route zur Arbeit gibt es Baustellen; macht es Dir was aus, falls ich zur längeren Straße wechsle [oder 'stört Dich ein Wechsel']? Sie sollte für Dich bequemer sein (oder 'ich nehme an, es wäre eine bequemere Fahrt für Dich'). ”
2. Laura: ”Was sind die geschätzten Ankunftszeiten?”
3. Fahrzeug: ”Die übliche Route mit Baustelle kostet uns etwa 25 Minuten; die längere Route, obgleich weniger Baustellen, kostet uns 40 Minuten”
4. Laura: ”Dann bleibe bei der üblichen Route; andernfalls käme ich zu spät zu meinem Treffen”

Vierter beispielhafter Anwendungsfall, bezüglich Dialog und Wetter:

1. Fahrzeug: ”Alice, das Wetter scheint außen sehr freundlich zu sein, möchtest Du das Fenster offen haben; wir können durch Reduzieren des Klimaanlagenverbrauchs etwas Energie sparen...”
2. Alice: ”Sicher.”

Fünfter beispielhafter Anwendungsfall, bezüglich Dialog und autonomes Fahren:

1. Fahrzeug (wenn am Ziel ankommend): ”Laura, hier ist ein Parkplatz links von Dir.”
2. Fahrzeug: ”Möchtest Du dort parken?”
3. Laura: ”Ja.”
4. Fahrzeug führt den vorgeschlagenen Parkvorgang autonom aus.

Sechster beispielhafter Anwendungsfall, bezüglich Dialog und proaktives Infotainment:

1. Kinder fahren allein.
2. Fahrzeug: ”Möchtet Ihr, dass ich Euch eine Geschichte vorlese, einen Film abspiele oder Euch ein neues Spiel zeige?”
3. Johnny und Charlie: ”Ein neues Spiel!”

Siebter beispielhafter Anwendungsfall, bezüglich Dialog und Infotainment beim autonomen Fahren:

1. Ein Schüler auf dem Weg zur Schule.
2. Fahrzeug: ”Irgendwelche Tests heute?”
3. Lisa: ”Ja, wir haben eine Prüfung in Französisch, können wir üben?”
4. Fahrzeug: ”Sicher...”
5. Fahrzeug spricht mit Lisa in Französisch, auf einem Niveau entsprechend ihrer Prüfung; oder spielt eine Lektion aus einem Online-Kurs für das gleiche Niveau ab. Lisa kann ihr Niveau mitteilen, oder es kann beispielsweise in ihrem Nutzerprofil gespeichert sein.

Achter beispielhafter Anwendungsfall, bezüglich Dialog und Infotainment beim autonomen Fahren:

1. Schüler auf dem Weg zur Schule.
2. Fahrzeug: ”Irgendwelche Tests heute?”
3. Lisa: ”Ja, eine Prüfung in Französisch.”
4. Fahrzeug: ”Möchtest Du mit mir üben?”
5. Lisa: ”Ja.”
6. Fahrzeug spricht mit Lisa in Französisch, auf einem Niveau entsprechend ihrer Prüfung; oder spielt eine Lektion aus einem Online-Kurs für das gleiche Niveau ab. Lisa kann ihr Niveau mitteilen, oder es kann beispielsweise in ihrem Nutzerprofil gespeichert sein.

Neunter beispielhafter Anwendungsfall, bezüglich Dialog und Fahrer-Engagement (als Fahrer oder Passagier):

1. Fahrzeug: ”Dave, Du hast 45 Minuten monotone Fahrt vor Dir, möchtest Du Don Quixote weiterhören?”
2. Dave: ”Ja, bitte”

Zehnter beispielhafter Anwendungsfall, bezüglich Dialog und Infotainment:

1. Fahrzeug: ”Laura, Du siehst müde aus, möchtest Du Deine Straßenmusiktitel hören?”
2. Laura: ”Ja, bitte.”

Elfter beispielhafter Anwendungsfall, bezüglich Dialog, Infotainment und Fahrer-Einbindung:

1. Fahrzeug: ”Dave, genießt Du die Fahrt?”
2. David: ”Sie ist sehr monoton.”
3. Fahrzeug: ”Wie wäre es mit etwa klassischer Musik?”
4. David: ”Okay, und erzähle mir bitte einen Witz.”
5. Fahrzeug: (startet die Musik leise).
6. Fahrzeug: ”Klopf klopf...”

Zwölfter beispielhafter Anwendungsfall, bezüglich Dialog und Infotainment:

1. Fahrzeug: ”Dave, genießt Du die Fahrt?”
2. David: ”Sie ist sehr monoton/langweilig.”
3. Fahrzeug: ”Wie wäre es, wenn ich Dir einige Horoskope erzähle (falls z. B. das Passagierprofil angibt, dass der Passagier Horoskope mag)?
4. David: ”Ok”
5. Fahrzeug: Liefert Horoskope über visuelle oder Audio-(Lautsprecher-)Ausgabeeinrichtungen 70 des Fahrzeugs.

VII. Ausgewählte Vorteile
Viele der Vorteile und Nutzen der vorliegenden Technologie sind oben beschrieben. Der vorliegende Abschnitt formuliert einige jener erneut und verweist auf einige andere. Die beschriebenen Nutzen erheben keinen Anspruch auf Vollständigkeit der Vorteile der vorliegenden Technologie.
In verschiedenen Ausführungsformen unterstützt das System eine Einbindung bzw. einen Dialog zwischen Fahrzeuginsassen und dem Fahrzeug. Ein Fahrer, der zum Beispiel autonomes Fahren genießt, kann mehr mit dem Fahrzeug befasst sein, was wichtig sein kann, falls zum Beispiel der Fahrer-Passagier die Kontrolle über die Fahrt gegebenenfalls übernehmen muss.
Die Systeme unterstützen einen Komfort mit und die Freude an der Fahrzeugnutzung, einschließlich eines autonomen Fahrens, für den Nutzer.
Die genutzte Technologie verbessert die Zufriedenheit des Fahrers und/oder Passagiers, einschließlich des Komforts, bei einer Nutzung eines automatisierten Fahrens, indem beliebige einer großen Vielfalt von fahrzeug- und/oder nicht fahrzeugbezogenen Charakteristiken eingestellt werden, wie etwa Fahrstil-Parameter des Fahrzeugs, HVAC, Infotainment, usw.
Die Technologie führt zu gesteigerten bzw. verbesserten Funktionen von Systemen zum automatisierten Fahren. Es ist auch wahrscheinlicher, dass Nutzer fortgeschrittenere Fähigkeiten des autonomen Fahrens des Fahrzeugs nutzen oder darüber lernen, wenn sie mit dem autonomen Fahrzeug und dem Erlebnis eines autonomen Fahrens allgemein vertrauter sind.
Eine ”Beziehung” zwischen Nutzern und dem Fahrzeug wird verbessert. Der Nutzer wird das Fahrzeug eher als ein vertrautes Werkzeug, Hilfsmittel oder einen Freund betrachten.
Die Technologie kann auch die Niveaus einer Annahme beeinflussen und damit verbunden Marketing und Vertrieb von zum autonomen Fahren tauglichen Fahrzeugen beeinflussen. Da das Vertrauen der Nutzer in Systeme zum autonomen Fahren zunimmt, ist es wahrscheinlicher, dass sie ein zum autonomen Fahren taugliches Fahrzeug kaufen, ein weiteres kaufen oder eines, oder eine beispielhafte Nutzung eines, anderen empfehlen.
Ein weiterer Vorteil der Systemnutzung besteht darin, dass Nutzer keine Mühe beim Einstellen oder Kalibrieren von Parametern eines automatisierten Fahrerstils investieren müssen, da sie durch das System in Verbindung mit Interaktionen mit dem Nutzer (zum Beispiel Lernfunktionen) automatisch festgelegt oder eingestellt werden, um eine Beanspruchung der Nutzer zu minimieren und dabei Zufriedenheit und Komfort der Nutzer mit einem autonom fahrenden Fahrzeug und der Funktionalität zu erhöhen.
VIII. Schlussfolgerung
Verschiedene Ausführungsformen der vorliegenden Offenbarung sind hierin offenbart. Die offenbarten Ausführungsformen sind nur Beispiele, die in verschiedenen und alternativen Formen und Kombinationen davon verkörpert werden können.
Die oben beschriebenen Ausführungsformen sind nur beispielhafte Veranschaulichungen von Implementierungen, die für ein klares Verständnis der Prinzipien der Offenbarung dargelegt sind.
Verweise hierin darauf, wie ein Merkmal angeordnet ist, können, sind aber nicht darauf beschränkt, darauf verweisen, wie das Merkmal in Bezug auf andere Merkmale positioniert ist. Verweise hierin darauf, wie ein Merkmal eingerichtet bzw. konfiguriert ist, können, sind aber nicht darauf beschränkt, darauf verweisen, wie das Merkmal bemessen ist, wie das Merkmal geformt ist, und/oder ein Material des Merkmals. Der Einfachheit halber kann der Begriff eingerichtet bzw. konfiguriert verwendet werden, um auf sowohl die Konfiguration als auch Anordnung, die in diesem Abschnitt oben beschrieben sind, zu verweisen.
Richtungsverweise sind hierin hauptsächlich zur einfachen Beschreibung und für eine vereinfachte Beschreibung der beispielhaften Zeichnungen vorgesehen, und die beschriebenen Systeme können in beliebigen verschiedensten Orientierungen ausgestaltet sein. Verweise, die hierin eine Richtung angeben, sind nicht im beschränkenden Sinn angegeben. Beispielsweise sind Verweise auf höher, niedriger, oben, unten oder lateral nicht vorgesehen, um die Art und Weise zu beschränken, in der die Technologie der vorliegenden Offenbarung umgesetzt werden kann. Während zum Beispiel auf eine obere Oberfläche verwiesen werden kann, kann die Oberfläche, auf die verwiesen wird, in einem Entwurfs-, Fertigungs- oder Betriebs-Bezugsrahmen vertikal aufwärts oder obenauf sein, muss aber nicht. Die Oberfläche kann stattdessen beispielsweise in verschiedenen Ausführungsformen neben oder unterhalb anderer Komponenten des Systems sein.
Jede beliebige Komponente, die in den Figuren als ein einzelner Gegenstand beschrieben oder dargestellt ist, kann durch mehrere derartige Gegenstände ersetzt werden, die dafür eingerichtet sind, die Funktionen des beschriebenen einzelnen Gegenstands auszuführen. Desgleichen können beliebige mehrere Gegenstände durch einen einzigen Gegenstand ersetzt werden, der dafür eingerichtet ist, die Funktionen der mehreren beschriebenen Gegenstände auszuführen.
Variationen, Modifikationen und Kombinationen können an den oben beschriebenen Ausführungsformen vorgenommen werden, ohne vom Umfang der Ansprüche abzuweichen. Alle derartigen Variationen, Modifikationen und Kombinationen sind durch den Umfang dieser Offenbarung und die folgenden Ansprüche hierin eingeschlossen.

Claims

System, um einem Passagier eines autonomen Fahrzeugs während eines autonomen Fahrens einen proaktiven Dienst bereitzustellen, umfassend: eine hardwaregestützte Verarbeitungseinheit; und eine nicht-transitorische computerlesbare Speicherkomponente, umfassend: ein Eingabe-Schnittstellen-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, Eingabedaten erhält, die eine Bedingung bezüglich des autonomen Fahrens angeben; und ein Aktions-Modul, das, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird: basierend auf der durch die Eingabedaten angegebenen Bedingung eine vorgeschlagene Aktion bestimmt; und proaktiv einen Dialog mit dem Passagier mittels einer Fahrzeug-Passagier-Schnittstelle einleitet, wobei der Dialog einen Vorschlag, dass das Fahrzeug die vorgeschlagene Aktion unternimmt, einschließt.
System nach Anspruch 1, wobei die vorgeschlagene Aktion ein Einstellen einer Fahrzeugfunktion einschließt, die aus einer Gruppe von Funktionen ausgewählt wird, bestehend aus: einer Funktion eines autonomen Fahrens, einer Heizungs-, Belüftungs- und Klimaanlagen-(HVAC-)Funktion und einer Funktion des Fahrzeug-Infotainment-Systems.
System nach Anspruch 1, wobei: die Speicherkomponente ein Datenbank-Modul enthält, das ein Passagierprofil mit Passagierprofildaten speichert; die Eingabedaten die Passagierprofildaten umfassen; und das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, um die vorgeschlagene Aktion zu bestimmen, basierend auf den Passagierprofildaten die vorgeschlagene Aktion bestimmt.
System nach Anspruch 3, wobei: die Speicherkomponente ein lernendes Modul umfasst, das, wenn es durch die Verarbeitungseinheit ausgeführt wird, erlernte Daten basierend auf einer Nutzeraktivität bestimmt; die bestimmten erlernten Daten im Passagierprofil gespeichert werden; und das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, um die vorgeschlagene Aktion zu bestimmen, die vorgeschlagene Aktion basierend auf den die erlernten Daten enthaltenden Passagierprofildaten bestimmt.
System nach Anspruch 1, wobei: die Speicherkomponente ein Kontext-Modul enthält; die Bedingung, die durch die Eingabedaten angegeben wird, Kontextdaten bezüglich einer Bedingung in der Kabine oder einer äußeren Bedingung einschließt; und das Aktions-Modul, wenn es durch die hardwaregestützte Verarbeitungseinheit ausgeführt wird, basierend auf den Kontextdaten die entsprechende Aktion bestimmt.
System nach Anspruch 1, wobei: das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion empfängt; und das System ein Ausgabe-Gruppe-Modul umfasst, das, wenn es ausgeführt wird, eine Ausführung der vorgeschlagenen und genehmigten Aktion einleitet; die vorgeschlagene und genehmigte Aktion eine Funktion eines Fahrens mit einem autonomen Fahrzeug umfasst; und das Ausgabe-Gruppe-Modul ein Modul für ein Fahren mit einem autonomen Fahrzeug umfasst, das, wenn es ausgeführt wird, eine Ausführung der Funktion eines Fahrens mit einem autonomen Fahrzeug einleitet.
System nach Anspruch 1, wobei: das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion empfängt; und das System ein Ausgabe-Gruppe-Modul aufweist, das, wenn es ausgeführt wird, eine Ausführung der vorgeschlagenen und genehmigten Aktion einleitet; die vorgeschlagene und genehmigte Aktion eine Klimasteuerungs-Aktion umfasst; und das Ausgabe-Gruppe-Modul ein Fahrzeugsteuerungs-Modul aufweist, das, wenn es ausgeführt wird, eine Ausführung der Klimasteuerungs-Aktion einleitet.
System nach Anspruch 1, wobei: das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion empfängt; und das System ein Ausgabe-Gruppe-Modul aufweist, das, wenn es ausgeführt wird, eine Ausführung der vorgeschlagenen und genehmigten Aktion einleitet; die vorgeschlagene und genehmigte Aktion eine Konversations-Aktion umfasst; und das Ausgabe-Gruppe-Modul ein Modul einer Fahrzeug-Passagier-Schnittstelle aufweist, das, wenn es ausgeführt wird, die Konversations-Aktion ausführt, durch welche das System sich mit dem Passagier mittels der Fahrzeug-Passagier-Schnittstelle akustisch unterhält.
System nach Anspruch 8, wobei: die Konversations-Aktion eine unterrichtende Aktion ist, die dafür eingerichtet ist, den Passagier über ein nicht fahrzeugbezogenes, nicht auf eine Fahrt bezogenes, für den Passagier interessantes Thema zu informieren; das Kommunikations-Modul, wenn es ausgeführt wird, die unterrichtende Aktion ausführt.
System nach Anspruch 1, wobei: das Eingabe-Schnittstellen-Modul, wenn es ausgeführt wird, eine Passagiergenehmigung der vorgeschlagenen Aktion empfängt; und das System ein Ausgabe-Gruppe-Modul aufweist, das, wenn es ausgeführt wird, eine Ausführung der vorgeschlagenen und genehmigten Aktion einleitet; die vorgeschlagene und genehmigte Aktion eine Aktion einer externen Kommunikation umfasst; und das Ausgabe-Gruppe-Modul ein Modul für externe Kommunikation aufweist, das, wenn es ausgeführt wird, eine Ausführung der Aktion einer externen Kommunikation einleitet.