DE102017106886A1

DE102017106886A1 - Driver assistance procedures and systems

Info

Publication number: DE102017106886A1
Application number: DE102017106886.4A
Authority: DE
Inventors: Jeremy A. Salinger; Akram Abdel-Rahman
Original assignee: GM Global Technology Operations LLC
Current assignee: GM Global Technology Operations LLC
Priority date: 2016-03-31
Filing date: 2017-03-30
Publication date: 2017-10-05

Abstract

Verfahren und Systeme zum Steuern eines Fahrzeugs werden zur Verfügung gestellt. Bei einer Ausführungsform umfasst das Verfahren: Feststellung, durch einen Prozessor, einer mangelnden Reaktion eines Fahrers und/oder eines Fahrzeugsystems; Kommunizieren, in Reaktion auf die Feststellung, einer Anforderung durch einen Prozessor in Bezug auf Fernsteuerung an einen Fernserver; Empfangen, in Reaktion auf den Kommunikationsvorgang, Information durch einen Prozessor von dem Fernserver; und Steuern des Fahrzeugs durch ein oder mehrere halbautonome oder autonome Fahrzeugsteuersysteme auf Grundlage der empfangenen Information.Methods and systems for controlling a vehicle are provided. In one embodiment, the method comprises: determining, by a processor, a driver's lack of response, and / or a vehicle system; Communicating, in response to the determination, a request by a processor for remote control to a remote server; Receiving, in response to the communication process, information from a processor from the remote server; and controlling the vehicle by one or more semi-autonomous or autonomous vehicle control systems based on the received information.

Description

QUERVERWEIS AUF VERWANDTE ANMELDUNGEN CROSS-REFERENCE TO RELATED APPLICATIONS

Die vorliegende Anmeldung beansprucht den Zeitrang der provisorischen U.S.-Anmeldung Nr. 62/316,363, eingereicht am 31. März 2016, die insgesamt durch Bezugnahme in die vorliegende Anmeldung eingeschlossen wird. The present application claims the benefit of U.S. Provisional Application No. 62 / 316,363, filed March 31, 2016, which is incorporated by reference in its entirety by reference.

TECHNISCHES GEBIET TECHNICAL AREA

Das technische Gebiet betrifft allgemein Systeme und Verfahren zum Assistieren eines Fahrers beim Bedienen eines Fahrzeugs, und betrifft spezieller Verfahren und Systeme zur Erfassung, ob ein Fahrer unfähig zum Bedienen des Fahrzeugs ist, und das Fahrzeug zu betreiben, wenn der Fahrer das Fahrzeug nicht bedienen kann. The technical field generally relates to systems and methods for assisting a driver in operating a vehicle, and more particularly to methods and systems for detecting whether a driver is unable to operate the vehicle and to operate the vehicle when the driver can not operate the vehicle ,

HINTERGRUND BACKGROUND

Ein autonomes Fahrzeug ist ein Fahrzeug, das seine Umgebung erfassen kann, und ohne Benutzereingabe oder mit weniger Benutzereingaben navigieren kann. Ein autonomes Fahrzeug erfasst seine Umgebung unter Einsatz von Sensorgeräten wie beispielsweise Radar, Lidar, Bildsensoren, und dergleichen. Das autonome Fahrzeugsystem setzt weiterhin Information der Technologie globaler Positionierungssysteme (GPS) ein, von Navigationssystemen, anderen Fahrzeugen, von Infrastruktur, und/ oder drive-by-wire-Systemen, für die Navigation des Fahrzeugs zur Bestimmung seiner Umgebung. Ein halbautonomes Fahrzeug ist ein derartiges Fahrzeug, das seine Umgebung erfassen kann, und Betriebsassistenz zur Verfügung stellen kann, während ein Fahrer das Fahrzeug bedient. Das halbautonome Fahrzeug verwendet dieselbe oder ähnliche Information zur Erfassung seiner Umgebung. An autonomous vehicle is a vehicle that can sense its environment and navigate without user input or with fewer user inputs. An autonomous vehicle detects its surroundings using sensor devices such as radar, lidar, image sensors, and the like. The autonomous vehicle system also uses global positioning system (GPS) technology, navigation systems, other vehicles, infrastructure, and / or drive-by-wire systems to navigate the vehicle to determine its environment. A semi-autonomous vehicle is one such vehicle that can sense its environment and provide operational assistance while a driver is operating the vehicle. The semi-autonomous vehicle uses the same or similar information to detect its environment.

Es kann in einigen Fällen auftreten, dass ein Fahrer eines Fahrzeugs nicht mehr dazu fähig ist, weiterhin das Fahrzeug zu bedienen. Befindet sich das Fahrzeug bei derartigen Fällen in Bewegung, so ist es für das halbautonome Fahrzeug wünschenswert, dass es ohne den Einsatz einer Fahrereingabe betrieben werden kann, um so als ein autonomes Fahrzeug zu arbeiten. In einigen Fällen kann ein autonomes Fahrzeug feststellen, dass es ohne einige zusätzliche Information nicht weiter arbeiten kann. Es kann in derartigen Fällen geschehen, dass ein Fahrer eine derartige Rückmeldung nicht zur Verfügung stellen kann. Daher ist es wünschenswert, Verfahren und Systeme zur Verfügung zu stellen, um zu bestimmen, wann ein Fahrer unfähig zur Bereitstellung einer Reaktion ist. Es ist darüber hinaus wünschenswert, Verfahren und Systeme zum Betreiben des Fahrzeugs zur Verfügung zu stellen, wenn festgestellt wird, dass der Fahrer unfähig ist, eine Reaktion zur Verfügung zu stellen. Weiterhin werden andere wünschenswerte Merkmale und Eigenschaften der vorliegenden Erfindung aus der nachfolgenden detaillierten Beschreibung und den beigefügten Patentansprüchen deutlich, im Zusammenhang mit den beigefügten Zeichnungen und den voranstehenden Abschnitten bezüglich des technischen Gebiets und des Hintergrunds. In some cases, a driver of a vehicle may no longer be able to operate the vehicle. When the vehicle is in motion in such cases, it is desirable for the semi-autonomous vehicle to operate without the use of driver input so as to operate as an autonomous vehicle. In some cases, an autonomous vehicle may find that it can not continue working without some additional information. It may happen in such cases that a driver can not provide such feedback. Therefore, it is desirable to provide methods and systems for determining when a driver is unable to provide a response. It is also desirable to provide methods and systems for operating the vehicle when it is determined that the driver is unable to provide a response. Furthermore, other desirable features and characteristics of the present invention will become apparent from the subsequent detailed description and the appended claims, taken in conjunction with the accompanying drawings and the foregoing technical and background portions.

ZUSAMMENFASSUNG SUMMARY

Das Ziel der vorliegenden Erfindung wird durch den Gegenstand der unabhängigen Patentansprüche erreicht. Weitere Ausführungsformen sind in den abhängigen Patentansprüchen angegeben. The object of the present invention is achieved by the subject-matter of the independent claims. Further embodiments are specified in the dependent claims.

Es werden Verfahren und Systeme zum Steuern eines Fahrzeugs zur Verfügung gestellt. Bei einer Ausführungsform umfasst ein Verfahren: Bestimmung, durch einen Prozessor, eines mangelnden Reaktionsvermögens zumindest entweder eines Fahrers oder eines Fahrzeugsystems; Kommunizieren, in Reaktion auf die Feststellung, einer Anforderung durch einen Prozessor nach Fernsteuerung an einen Fernserver; Empfangen, in Reaktion auf die Kommunikation, von Information durch einen Prozessor von dem Fernserver; und Steuern des Fahrzeugs durch ein oder mehrere halbautonome oder autonome Fahrzeugsteuersysteme auf Grundlage der empfangenen Information. Methods and systems for controlling a vehicle are provided. In one embodiment, a method includes: determining, by a processor, a lack of responsiveness of at least one of a driver and a vehicle system; Communicating, in response to the determination, a request by a processor for remote control to a remote server; Receiving, in response to the communication, information from a processor from the remote server; and controlling the vehicle by one or more semi-autonomous or autonomous vehicle control systems based on the received information.

BESCHREIBUNG DER ZEICHNUNGEN DESCRIPTION OF THE DRAWINGS

Die beispielhaften Ausführungsformen werden nachstehend im Zusammenhang mit den folgenden Zeichnungsfiguren beschrieben, in welchen gleiche Bezugszeichen gleiche Elemente angeben, und bei welchen: The exemplary embodiments are described below in conjunction with the following drawing figures, in which like numerals indicate like elements, and in which:

1 ein Funktionsblockdiagramm eines Fahrzeugs ist, das ein Fahrerassistenzsystem gemäß verschiedenen Ausführungsformen aufweist; 1 FIG. 10 is a functional block diagram of a vehicle having a driver assistance system according to various embodiments; FIG.

2 eine Darstellung eines Fernassistenzbildschirms ist, der mit der Bereitstellung von Fernassistenz eingesetzt wird, gemäß verschiedenen Ausführungsformen; und 2 FIG. 10 is an illustration of a remote assistance screen used with providing remote assistance according to various embodiments; FIG. and

3 ein Flussablaufdiagramm ist, welches ein Fahrerassistenzsteuerverfahren gemäß verschiedenen Ausführungsformen erläutert. 3 FIG. 10 is a flowchart illustrating a driver assistance control method according to various embodiments. FIG.

DETAILLIERTE BESCHREIBUNG DETAILED DESCRIPTION

Die folgende detaillierte Beschreibung ist nur als beispielhaft zu verstehen, und soll nicht die Anwendung und Verwendungen einschränken. Weiterhin soll keine Bindung an irgendeine ausdrücklich angegebene oder impliziert vorhandene Theorie vorhanden sein, die in den Abschnitten bezüglich des technischen Gebiets, des Hintergrunds, der kurzen Zusammenfassung, oder in der nachstehenden detaillierten Beschreibung präsentiert wird. Es wird darauf hingewiesen, dass in sämtlichen Zeichnungen entsprechende Bezugszeichen gleiche oder entsprechende Teile und Merkmale angeben. Der hier verwendete Begriff Modul betrifft jede Hardware, Software, Firmware, Elektroniksteuerkomponente, Verarbeitungslogik, und/oder Prozessorgeräte, einzeln oder in jeglicher Kombination, einschließlich ohne Einschränkungen: eine anwendungsspezifisch integrierte Schaltung (ASIC), eine Elektronikschaltung, einen Prozessor (geteilt, speziell, oder Gruppe) und einen Speicher, der bzw. die ein oder mehrere Software- oder Firmware-Programme ausführt, eine Kombinationslogikschaltung, und/oder andere geeignete Komponenten, welche die geschilderte Funktionalität zur Verfügung stellen. The following detailed description is intended to be exemplary only and not intended to limit the application and uses. Furthermore, there is no intention to be bound by any expressed or implied theory that is set forth in the sections regarding the technical background, background, brief summary, or in the following detailed description. It should be noted that throughout the drawings, corresponding reference numerals indicate like or corresponding parts and features. The term module as used herein refers to any hardware, software, firmware, electronic control component, processing logic, and / or processor devices, individually or in any combination, including without limitation: an application specific integrated circuit (ASIC), an electronic circuit, a processor (shared, specifically, or group) and a memory executing one or more software or firmware programs, a combination logic circuit, and / or other suitable components that provide the described functionality.

Ausführungsformen der Erfindung können nachstehend anhand von Funktionsblockkomponenten und/oder Logikblockkomponenten und verschiedener Verarbeitungsschritte beschrieben werden. Es wird darauf hingewiesen, dass derartige Blockkomponenten durch jede Anzahl an Hardware-, Software-, und/oder Firmware-Komponenten realisiert werden können, die zur Durchführung der angegebenen Funktionen ausgebildet sind. So kann beispielsweise eine Ausführungsform der Erfindung verschiedene integrierte Schaltungskomponenten einsetzen, beispielsweise Speicherelemente, digitale Signalverarbeitungselemente, Logikelemente, Nachschlagetabellen, und dergleichen, welche verschiedene Funktionen unter Steuerung durch einen oder mehrere Mikroprozessoren oder andere Steuergeräte durchführen können. Darüber hinaus wissen Fachleute, dass Ausführungsformen der vorliegenden Erfindung im Zusammenhang mit jeder Anzahl an Lenk/Vortriebssteuersystemen in die Praxis umgesetzt werden können, und dass das hier beschriebene Fahrzeugsystem nur eine beispielhafte Ausführungsform der Erfindung darstellt. Embodiments of the invention may be described below with reference to functional block components and / or logic block components and various processing steps. It should be understood that such block components may be implemented by any number of hardware, software, and / or firmware components configured to perform the specified functions. For example, one embodiment of the invention may employ various integrated circuit components, such as memory elements, digital signal processing elements, logic elements, look-up tables, and the like, which may perform various functions under the control of one or more microprocessors or other controllers. Moreover, those skilled in the art will appreciate that embodiments of the present invention may be practiced in conjunction with any number of steering / propulsion control systems, and that the vehicle system described herein is only one example embodiment of the invention.

Um die Darstellung nicht unnötig zu belasten, kann es sein, dass herkömmliche Vorgehensweisen in Bezug auf Signalverarbeitung, Datenübertragung, Signalisierung, Steuerung, und andere Funktionsaspekte der Systeme (und der einzelnen Betriebskomponenten der Systeme) hier nicht im Einzelnen beschrieben werden. Darüber hinaus sollen die Verbindungslinien, die in den verschiedenen Figuren dargestellt sind, Beispiele für Funktionsbeziehungen und/oder physikalische Kopplungen zwischen den verschiedenen Elementen darstellen. Es wird darauf hingewiesen, dass zahlreiche alternative oder zusätzliche Funktionsbeziehungen oder physikalische Verbindungen bei einer Ausführungsform der Erfindung vorhanden sein können. In order not to unnecessarily burden the illustration, conventional procedures relating to signal processing, data transmission, signaling, control, and other functional aspects of the systems (and the individual operating components of the systems) may not be described in detail herein. In addition, the connecting lines shown in the various figures are intended to represent examples of functional relationships and / or physical couplings between the various elements. It should be understood that numerous alternative or additional functional relationships or physical connections may be present in one embodiment of the invention.

In 1 ist ein Beispiel für ein Fahrzeug 100 dargestellt, welches ein Fahrerassistenzsystem 110 gemäß beispielhaften Ausführungsformen aufweist. Das Fahrzeug 100 kann hierbei jede Art von Fahrzeug sein, einschließlich – jedoch nicht hierauf beschränkt – eines Automobils, eines SUVs, eines Wasserfahrzeugs, eines Luftfahrzeugs, usw. Obwohl die hier dargestellten Figuren ein Beispiel mit bestimmten Anordnungen von Elementen zeigen, können zusätzliche Elemente dazwischen, Geräte, Merkmale, oder Komponenten bei tatsächlichen Ausführungsformen vorhanden sein. Es wird ebenfalls darauf hingewiesen, dass 1 nur zur Erläuterung dient, und nicht unbedingt maßstabsgetreu ist. In 1 is an example of a vehicle 100 which is a driver assistance system 110 according to exemplary embodiments. The vehicle 100 may be any type of vehicle including, but not limited to, an automobile, SUV, watercraft, aircraft, etc. Although the figures illustrated herein show an example with particular arrangements of elements, additional elements therebetween, devices, Features, or components in actual embodiments. It is also noted that 1 for illustrative purposes only, and is not necessarily to scale.

Bei verschiedenen Ausführungsformen ist das Fahrzeug 100 ein halbautonomes Fahrzeug. Allerdings wird darauf hingewiesen, dass das Fahrzeug 100 jede Art eines Fahrzeugs sein kann, einschließlich, jedoch nicht hierauf beschränkt, eines herkömmlichen Fahrzeugs oder eines autonomen Fahrzeugs, da die Offenbarung nicht auf halbautonome Fahrzeuge beschränkt ist. Bei verschiedenen Ausführungsformen weist das halbautonome Fahrzeug 100 unter anderen Merkmalen einen oder mehrerer äußere Sensoren 120 auf, welche ein Element einer Umgebung des Fahrzeugs 100 erfassen, und Sensorsignale erzeugen, die zum Steuern einer Funktion oder mehrere Funktionen des Fahrzeugs 100 eingesetzt werden, um zumindest teilweise ein Fahren des Fahrzeugs 100 zu ermöglichen. So werden beispielsweise die Sensorsignale von einem Steuersystem oder mehreren Steuersystemen 130 des Fahrzeugs 100 dazu verwendet, Aktuatoren zu steuern, welche Fahrfunktionen des Fahrzeugs 100 steuern. Falls das Fahrzeug 100 ein Automobil ist, können die Steuersysteme 130 umfassen (wobei sie nicht hierauf beschränkt sind) ein Parksystem, ein Fahrzeuggeschwin-digkeitsregelsystems, ein Spurhaltesystem, ein Spurwechselsystem, ein Fahrzeuglenksystem, und so weiter. In diesem Zusammenhang wird darauf hingewiesen, dass die hier geschilderten Steuersysteme 130 nur als Beispiele zu verstehen sind, da bei verschiedenen Ausführungsformen jedes Steuersystem vorgesehen sein kann, das zur Bereitstellung einer vollständigen oder teilweisen Autonomie vorgesehen ist. Bei verschiedenen Ausführungsformen sind die Steuersysteme 130 in der Hinsicht halbautonom, dass sie sich auf Eingaben eines Fahrers in solchen Situationen verlassen, in welchen die Sensoren 120 und/oder das Steuersystem 130 nicht dazu fähig sind, die Fahrfunktionen in Bezug auf den Fahrzustand zu erfassen und/oder zu steuern. In various embodiments, the vehicle is 100 a semi-autonomous vehicle. However, it is noted that the vehicle 100 may be any type of vehicle, including, but not limited to, a conventional vehicle or autonomous vehicle, as the disclosure is not limited to semi-autonomous vehicles. In various embodiments, the semi-autonomous vehicle 100 among other features, one or more external sensors 120 on which an element of an environment of the vehicle 100 capture and generate sensor signals that are used to control one or more functions of the vehicle 100 be used to at least partially driving the vehicle 100 to enable. For example, the sensor signals are from one or more control systems 130 of the vehicle 100 used to control actuators which driving functions of the vehicle 100 Taxes. If the vehicle 100 An automobile is the control systems 130 include, but are not limited to, a parking system, a vehicle speed control system, a lane keeping system, a lane change system, a vehicle steering system, and so on. In this context, it should be noted that the control systems described here 130 by way of example only, as in various embodiments any control system provided to provide full or partial autonomy may be provided. In various embodiments, the control systems are 130 semi-autonomous in the sense that they rely on input from a driver in situations in which the sensors 120 and / or the tax system 130 are unable to detect and / or control the driving functions related to the driving condition.

Das Fahrerassistenzsystem 110, das dem halbautonomen Fahrzeug 100 zugeordnet ist, umfasst im Wesentlichen ein oder mehrere interne Sensoren 140, ein Assistenzmanagermodul 150, ein Mitteilungssystem 160, und einen Fernserver 170. Die internen Sensoren 140 erfassen beobachtbare Zustände in Bezug auf den Fahrer. So können beispielsweise die internen Sensoren 140 umfassen (wobei sie nicht darauf beschränkt sind) Bildsensoren, Sprachsensoren, Berührungssensoren, Schalter, Knöpfe, oder andere Sensoren, welche direkt oder indirekt eine Schnittstelle zum Fahrer zur Verfügung stellen, und welche auf dieser Grundlage Sensorsignale erzeugen. Das Mitteilungssystem 160 präsentiert dem Fahrer Information. Das Mitteilungssystem 160 präsentiert die Information über ein oder mehrere Audiogerät(e), ein oder mehrere Sichtgerät(e), ein oder mehrere haptische Gerät(e), und/oder irgendeine Kombination aus diesen. The driver assistance system 110 , the semi-autonomous vehicle 100 essentially comprises one or more internal sensors 140 , an assistant manager module 150 , a messaging system 160 , and a remote server 170 , The internal sensors 140 capture observable Conditions relating to the driver. For example, the internal sensors 140 include (but are not limited to) image sensors, voice sensors, touch sensors, switches, buttons, or other sensors that directly or indirectly provide an interface to the driver, and that generate sensor signals based thereon. The notification system 160 presents information to the driver. The notification system 160 presents the information about one or more audio device (s), one or more vision devices, one or more haptic devices, and / or any combination thereof.

Bei verschiedenen Ausführungsformen steht das Assistenzmanagermodul 150 in Kommunikationsverbindung mit den Steuersystemen 130, den internen Sensoren 140, und dem Mitteilungssystem 160 (beispielsweise entweder direkt oder über ein Fahrzeugkommunikationsnetzwerk, oder über eine andere Kommunikationseinrichtung). Das Assistenzmanagermodul 150 überwacht Kommunikationsvorgänge zwischen den Steuersystemen 130 und dem Mitteilungssystem 160 in Bezug auf Anforderungen nach einer Fahrerreaktion (im Falle eines halbautonomen Fahrzeugs) oder alternativ in Bezug auf eine Anforderung zur Bestätigung eines Manövers (beispielsweise Spurwechsel nach links, Spurwechsel nach rechts, Abbiegen nach links an der nächsten Kreuzung, Abbiegen nach rechts in eine Zufahrt, Verlangsamung bis zu einem Haltepunkt, einem Parkplatz, usw.) von einem anderen Steuersystem (im Falle eines autonomen Fahrzeugs), und überwacht Kommunikationsvorgänge oder Sensorsignale von den internen Sensoren 140 (oder anderen Steuersystemen) an das Steuersystem 130, um zu bestimmen, ob ein Fahrer (oder andere Steuersysteme) auf die Anforderungen reagiert oder nicht. So überwacht beispielsweise das Assistenzmanagermodul 150 ein oder mehrere Kommunikationsvorgänge oder Sensorsignale von den internen Sensoren 140, nachdem eine Reaktion des Fahrers über eine Kommunikation an das Mitteilungssystem 160 angefordert wurde, und falls keine Kommunikation oder ein Sensorsignal empfangen wird (beispielsweise innerhalb eines vorbestimmten Zeitraums, nachdem eine Anzahl an Anforderungen erzeugt wurde, oder aufgrund anderer Kriterien), von einigen erwarteten internen Sensoren 140, stellt das Assistenzmanagermodul 150 fest, dass der Fahrer nicht reagiert. Bei verschiedenen Ausführungsformen bewertet das Assistenzmanagermodul 150 weiterhin Daten von einem der Sensorsignale (beispielsweise Bilddaten oder andere Daten), um zu bestätigen, dass der Fahrer nicht reagiert (beispielsweise die Bewegung des Fahrers (Gesichtselement oder ein andere Körperelement) minimal ist, die Aufmerksamkeit des Fahrers nicht auf die Mitteilung der angeforderten Aktion gerichtet ist, und so weiter). In various embodiments, the assistant manager module is located 150 in communication with the control systems 130 , the internal sensors 140 , and the messaging system 160 (for example, either directly or via a vehicle communications network, or via another communication device). The assistant manager module 150 monitors communications between the control systems 130 and the messaging system 160 with respect to requests for a driver response (in the case of a semi-autonomous vehicle) or alternatively with respect to a request to confirm a maneuver (eg lane change to the left, lane change to the right, turn left at the next intersection, turn right into an access road, Slowing down to a breakpoint, parking lot, etc.) from another control system (in the case of an autonomous vehicle), and monitors communications or sensor signals from the internal sensors 140 (or other tax systems) to the tax system 130 to determine whether or not a driver (or other control systems) responds to the requests. For example, the assistant manager module monitors 150 one or more communications or sensor signals from the internal sensors 140 After a driver's reaction via a communication to the messaging system 160 and if no communication or sensor signal is received (for example, within a predetermined time period after a number of requests have been generated or due to other criteria), from some expected internal sensors 140 , provides the assistant manager module 150 determined that the driver does not respond. In various embodiments, the assistant manager module evaluates 150 furthermore, data from one of the sensor signals (eg, image data or other data) to confirm that the driver is unresponsive (e.g., motion of the driver (face element or other body element) is minimal, does not draw the driver's attention to the notification of the requested action is directed, and so on).

Es wird darauf hingewiesen, dass dann, wenn das Fahrzeug 100 ein autonomes Fahrzeug ist, die Anforderung nach einer Reaktion an ein anderes Steuersystem (nicht gezeigt) kommuniziert werden kann, oder einfach direkt an das Assistenzmanagermodul 150 kommuniziert werden kann. In derartigen Fällen stellt das Assistenzmanagermodul 150 ein mangelndes Reaktionsvermögen dadurch fest, dass es feststellt, dass das andere Steuersystem nicht reagiert, dass kein Steuersystem auf eine derartige Anforderung reagieren kann, oder dass ein Fahrer (oder anderer Benutzer) nicht reagiert. It should be noted that when the vehicle 100 an autonomous vehicle, the request for a response to another control system (not shown) can be communicated, or simply directly to the assistant manager module 150 can be communicated. In such cases, the assistant manager module provides 150 a lack of responsiveness by stating that the other control system is unresponsive, that no control system can respond to such a request, or that a driver (or other user) is unresponsive.

Das Assistenzmanagermodul 150 steht weiterhin in Kommunikationsverbindung mit dem Fernserver 170 (beispielsweise über ein Satellitenkommunikationsnetzwerk, oder eine andere Kommunikationseinrichtung). Wenn festgestellt wird, dass der Fahrer (oder ein anderes Steuersystem) nicht reagiert, kommuniziert das Assistenzmanagermodul 150 Information an den Fernserver 170, und empfängt Information von diesem. Wenn beispielsweise festgestellt wird, dass der Fahrer (oder ein anderes Steuersystem) nicht reagiert, kommuniziert das Assistenzmanagermodul 150 eine Anforderung bezüglich Fernsteuerung an den Fernserver 170. Die Anforderung nach Fernsteuerung kann Kontextinformation enthalten, beispielsweise (jedoch nicht hierauf beschränkt) einen momentanen Ort des Fahrzeugs 100, einen Fahrtweg des Fahrzeugs 100, eine Fahrzeugidentifizierungsnummer, Fahrerinformation, und so weiter. The assistant manager module 150 is still in communication with the remote server 170 (for example, via a satellite communication network, or other communication device). If it is determined that the driver (or other control system) is not responding, the assistant manager module communicates 150 Information to the remote server 170 , and receives information from this. For example, if it is determined that the driver (or other control system) is not responding, the assistant manager module communicates 150 a request for remote control to the remote server 170 , The request for remote control may include context information such as, but not limited to, a current location of the vehicle 100 , a travel path of the vehicle 100 , a vehicle identification number, driver information, and so on.

In Reaktion auf die Anforderung nach Fernsteuerung empfängt das Assistenzmanagermodul 150 Steuerinstruktionen von dem Fernserver 170. Die Steuerinstruktionen können umfassen (wobei sie nicht hierauf beschränkt sind) beispielsweise Koordinaten eines Ortes, um das Fahrzeug zum Anhalten zu bringen (beispielsweise einen Straßenrand, einen Parkplatz, und so weiter), Betriebsinstruktionen (beispielsweise Fahrzeuggeschwindigkeit, Lenkbefehle, und so weiter), um das Fahrzeug zum Anhalten zu veranlassen, oder um ein anderes Manöver durchzuführen, und/oder Mitteilungsinformation, damit dem Fahrer die Fernsteuerung und/oder der Ort bzw. das Manöver mitgeteilt wird. Das Assistenzmanagermodul 150 kommuniziert dann die Information von den Steuerinstruktionen an das geeignete Steuersystem 130 und/ oder das Mitteilungssystem 160. Das Steuersystem oder die Steuersysteme 130 betreibt/betreiben das Fahrzeug 100 auf Grundlage der Information, sodass das Fahrzeug 100 an dem betreffenden Ort anhält, oder das betreffende andere Manöver durchführt. Das Mitteilungssystem 160 teilt dem Fahrer die Fernsteuerung auf Grundlage der Information mit. In response to the request for remote control, the assistant manager module receives 150 Control instructions from the remote server 170 , The control instructions may include, but are not limited to, coordinates of a location to stop the vehicle (eg, a roadside, a parking lot, and so on), operational instructions (eg, vehicle speed, steering commands, and so forth) to cause the vehicle to stop, or to perform another maneuver, and / or notification information to inform the driver of the remote control and / or the location or maneuver. The assistant manager module 150 then communicates the information from the control instructions to the appropriate control system 130 and / or the notification system 160 , The control system or the control systems 130 operate / operate the vehicle 100 based on the information, so the vehicle 100 stops at the location concerned, or performs the other maneuver in question. The notification system 160 informs the driver of the remote control based on the information.

Bei verschiedenen Ausführungsformen weist der Fernserver 170 ein Fernsteuerungsmodul 180 auf. Das Fernsteuerungsmodul 180 empfängt die Anforderung nach Fernsteuerung von dem Fahrzeug 100, und verarbeitet die Anforderung, um einen Ort dafür zu bestimmen, dass das Fahrzeug 100 zum Anhalten veranlasst wird, oder um ein anderes Fahrmanöver zu bestimmen. Zum Beispiel kann der Ort automatisch bestimmt werden, auf Grundlage des momentanen Ortes des Fahrzeugs und der Fahrtroute und von Kartendaten, welche sichere Orte zum Anhalten anzeigen. Bei einem derartigen Fall vergleicht das Fernsteuermodul 180 den momentanen Ort des Fahrzeugs mit sicheren Orten, die entlang der Fahrtroute angezeigt werden, und wählt den nächsten sicheren Ort aus. Bei einem anderen Beispiel kann der Ort durch einen Benutzer des Fernservers 170 bestimmt werden. Zum Beispiel kann ein Benutzer mit einer Benutzerschnittstelle des Fernsteuermoduls 180 in Wechselwirkung treten. Ein Beispiel für eine Benutzerschnittstelle 190 ist in 2 gezeigt. Die Benutzerschnittstelle 190 weist bei verschiedenen Ausführungsformen einen Bildschirm 192 auf, der in Echtzeit den Ort des Fahrzeugs in Bezug auf eine Karte anzeigt, einen oder mehrere Bildschirm(e) 194, 196, welche in Echtzeit Videoaufnahmen zeigen, die von den Fahrzeugsensoren erhalten werden, und zumindest einen Bildschirm 198, der ein Bild enthält, das aus den Daten der anderen Sensoren erzeugt wird, welche den momentanen Ort des Fahrzeugs anzeigen, dessen Position, und dessen Fahrtrichtung auf der Straße, und/oder andere Fahrzeuge oder Hindernisse. In derartigen Fällen bewertet der Benutzer den Inhalt der Bildschirme und führt eine Auswahl über eine Tastatur 199 oder ein anderes Eingabegerät in Bezug auf den sicheren Ort durch, der am nächsten am Ort des Fahrzeugs liegt (oder in Bezug auf einen anderen Ort), und in Bezug auf den Fahrtweg und/oder Fahrmanöver, die sicher durchgeführt werden können. In various embodiments, the remote server 170 a remote control module 180 on. The remote control module 180 receives the request for remote control from the vehicle 100 , and processes the request to determine a location for the vehicle 100 to stop, or to determine another driving maneuver. For example, the location may be determined automatically based on the current location of the vehicle and the route and map data indicating safe locations for stopping. In such a case, the remote control module compares 180 the current location of the vehicle with safe locations displayed along the route and selects the nearest safe location. In another example, the location may be by a user of the remote server 170 be determined. For example, a user may have a user interface of the remote control module 180 interact. An example of a user interface 190 is in 2 shown. The user interface 190 has a screen in various embodiments 192 which displays in real time the location of the vehicle in relation to a map, one or more screen (s) 194 . 196 showing in real time video recordings obtained from the vehicle sensors and at least one screen 198 containing an image generated from the data of the other sensors indicating the current location of the vehicle, its position, and its direction of travel on the road, and / or other vehicles or obstacles. In such cases, the user assesses the contents of the screens and makes a selection via a keyboard 199 or another input device with respect to the safe location closest to the location of the vehicle (or with respect to another location), and with respect to the route and / or maneuvers that can be safely performed.

Wie wiederum in 1 gezeigt ist, stellt auf Grundlage des ausgewählten Ortes und/oder anderer Manöver das Fernsteuermodul 180 Betriebsinstruktionen fest (beispielsweise in Bezug auf die Fahrzeuggeschwindigkeit, Lenkbefehle, und so weiter), um das Fahrzeug 100 zum Anhalten zu veranlassen, oder um das Manöver durchzuführen, sowie Mitteilungsinformation, um dem Fahrer die Fernsteuerung und/oder den Ort bzw. das Manöver mitzuteilen. Das Fernsteuermodul 180 führt dann rückwärts eine Kommunikation mit dem Fahrzeug 100 durch, in Bezug auf die Koordinaten des Ortes zum Anhalten des Fahrzeugs 100, in Bezug auf Betriebsbefehle (beispielsweise Fahrzeuggeschwindigkeit, Lenkbefehle, und so weiter), um das Fahrzeug 100 zum Anhalten oder einem anderen Manöver zu veranlassen, und/oder Mitteilungsinformation zur Mitteilung der Fernsteuerung und/oder des Ortes bzw. des Manövers an den Fahrer. As again in 1 is shown, the remote control module based on the selected location and / or other maneuvers 180 Operating instructions (for example, in relation to the vehicle speed, steering commands, etc.) to the vehicle 100 to cause the vehicle to stop, or to perform the maneuver, and message information to notify the driver of the remote control and / or the location or maneuver. The remote control module 180 then leads backward communication with the vehicle 100 by, with respect to the coordinates of the place to stop the vehicle 100 with respect to operating commands (eg, vehicle speed, steering commands, etc.) to the vehicle 100 to suspend or otherwise maneuver, and / or message information to communicate the remote control and / or location or maneuver to the driver.

Bei verschiedenen Ausführungsformen bestimmt zusätzlich oder als Alternative zur Festlegung von Betriebsinstruktionen für ein Manöver das Fernsteuermodul 180 Betriebsinstruktionen zum Aktivieren eines oder mehrerer Steuersysteme 130, damit die Umgebung in Bezug auf den nicht reagierenden Fahrer gewarnt wird. So können beispielsweise die Betriebsinstruktionen eine Hupe steuern, Innen- oder Außenleuchten des Fahrzeugs steuern, eine Anschnallgurt-Vorspannung steuern, die Fahrersitzorientierung steuern, und so weiter. In various embodiments, in addition to or as an alternative to defining operational instructions for a maneuver, the remote control module determines 180 Operating instructions for activating one or more control systems 130 so that the environment is warned regarding the unresponsive driver. For example, the operation instructions may control a horn, control vehicle interior or exterior lights, control seat belt pretension, control driver seat orientation, and so forth.

In 3 erläutert ein Ablaufdiagramm Fahrerassistenzverfahren, die von den Modulen und/oder Systemen von 1 gemäß verschiedenen Ausführungsformen durchgeführt werden können. Anhand der vorliegenden Offenbarung wird deutlich, dass die Reihenfolge von Betriebsabläufen in den Verfahren nicht auf die Abfolge der Ausführung beschränkt ist, die in 2 dargestellt ist, sondern in einer oder mehreren unterschiedlichen Reihenfolge(n) durchgeführt werden kann, je nach Einsatzzweck und gemäß der vorliegenden Offenbarung. Weiterhin wird darauf hingewiesen, dass ein Schritt oder mehrere Schritte des Verfahrens hinzugefügt oder weggelassen werden können, ohne die Grundlagen des Verfahrens zu ändern. In 3 FIG. 2 illustrates a flowchart of driver assistance procedures used by the modules and / or systems of FIG 1 according to various embodiments can be performed. From the present disclosure, it will be understood that the order of operations in the methods is not limited to the sequence of the embodiments described in U.S. Patent Nos. 4,316,355; 2 but may be performed in one or more different order (s), depending on the purpose and according to the present disclosure. It should also be understood that one or more steps of the method may be added or omitted without changing the principles of the method.

Wie dargestellt, sind ein Steuersystem oder mehrere Steuersysteme 130 so betriebsfähig, dass sie das Fahrzeug 100 steuern. Zumindest eines der Steuersysteme 130 stellt fest, dass es die Reaktion eines Fahrers erfordert, bei 200. Die Anforderung einer Reaktion des Fahrers wird an das Mitteilungssystem 160 bei 210 kommuniziert, um dies dem Fahrer mitzuteilen. Das Assistenzmanagermodul 150 überwacht die Kommunikationsvorgänge bei 220 und stellt fest, dass eine Anforderung nach einer Reaktion des Fahrers ausgesandt wurde. Das Assistenzmanagermodul 150 führt eine Überwachung durch in Bezug auf Sensorsignale und/oder Kommunikationsvorgänge von dem internen Sensor oder den internen Sensoren 140 zurück zu dem anfordernden Steuersystem bei 230. Falls keine Sensorsignale und/oder Kommunikationsvorgänge empfangen werden, wird dann festgestellt, dass der Fahrer nicht reagiert, bei 230. Wahlweise fordert das Assistenzmanagermodul 150 zusätzliche Daten von den internen Sensoren an bei 240. In Reaktion hierauf stellen der interne Sensor oder die internen Sensoren Bilddaten für das Assistenzmanagermodul 150 zur Verfügung. Das Assistenzmanagermodul 150 verarbeitet die Bilddaten, um zu bestätigen, dass der Fahrer nicht reagiert bei 260. Es wird deutlich, dass bei verschiedenen Ausführungsformen jeder der Schritte 210–260 jegliche Anzahl an Malen wiederholt werden kann, bevor das Assistenzmanagermodul 150 feststellt, dass der Fahrer nicht reagiert. Weiterhin wird darauf hingewiesen, dass andere Verfahren zur Bestätigung, dass der Fahrer nicht reagiert, bei verschiedenen Ausführungsformen implementiert sein können, da die Schritte 220–260 nur Beispiele darstellen. As shown, one or more control systems 130 so operational that they are the vehicle 100 Taxes. At least one of the control systems 130 notes that it requires a driver's response when 200 , The request for a driver's reaction is sent to the messaging system 160 at 210 communicates to inform the driver. The assistant manager module 150 monitors the communication processes 220 and notes that a request for a driver's response has been sent. The assistant manager module 150 performs monitoring of sensor signals and / or communications from the internal sensor or sensors 140 back to the requesting control system 230 , If no sensor signals and / or communications are received, then it is determined that the driver is not responding 230 , Optionally, the assistant manager module calls 150 additional data from the internal sensors at 240 , In response, the internal sensor or sensors provide image data for the assistant manager module 150 to disposal. The assistant manager module 150 processes the image data to confirm that the driver is unresponsive 260 , It will be appreciated that in various embodiments, each of the steps 210 - 260 Any number of times can be repeated before the assistant manager module 150 determines that the driver is not responding. It should also be noted that other methods of confirming that the driver is unresponsive are different Embodiments may be implemented as the steps 220 - 260 only represent examples.

Bei 270 kommuniziert das Assistenzmanagermodul 150 eine Anforderung bezüglich Fernsteuerung an das Fernsteuermodul 170. Das Fernsteuermodul 170 empfängt die Anforderung, und bestimmt bei 280 einen Ort zum Anhalten des Fahrzeugs 100. Das Fernsteuermodul 170 kommuniziert den Anhalte-Ort und jegliche zusätzliche Information an das Assistenzmanagermodul 150 bei 290. Das Assistenzmanagermodul 150 empfängt die Information und kommuniziert Information bei 310 an das Mitteilungssystem 160 und bei 320 an das Steuersystem 130. Das Mitteilungssystem 160 teilt dem Fahrer die Fernsteuerung und den Ort, an welchem das Fahrzeug 100 angehalten wird, bei 330 mit. Das Steuersystem oder die Steuersysteme 130 steuern das Fahrzeug 100 so, dass es an dem Ort anhält, auf Grundlage der Information in Schritt 340. at 270 communicates with the assistant manager module 150 a request for remote control to the remote control module 170 , The remote control module 170 receives the request and determines 280 a place to stop the vehicle 100 , The remote control module 170 communicates the stopping place and any additional information to the assistant manager module 150 at 290 , The assistant manager module 150 receives the information and communicates information 310 to the notification system 160 and at 320 to the tax system 130 , The notification system 160 informs the driver of the remote control and the location of the vehicle 100 is stopped at 330 With. The control system or the control systems 130 control the vehicle 100 so that it stops at the location based on the information in step 340 ,

Weiterhin werden die folgenden Beispiele zur Verfügung gestellt, die für eine einfachere Bezugnahme nummeriert sind:

1. Ein Verfahren zum Steuern eines Fahrzeugs, wobei vorgesehen sind: Bestimmung einer mangelnden Reaktion zumindest entweder eines Fahrers oder eines Fahrzeugsystems durch einen Prozessor; Kommunizieren, in Reaktion auf die Feststellung, einer Anforderung nach Fernsteuerung an einen Fernserver durch einen Prozessor; Empfangen, in Reaktion auf die Kommunikation, von Information durch einen Prozessor von dem Fernserver; und Steuern des Fahrzeugs durch ein oder mehrere halbautonome oder autonome Fahrzeugsteuersystem(e) auf Grundlage der empfangenen Information.
2. Verfahren nach Beispiel 1, bei welchem die Feststellung der mangelnden Reaktion auf Grundlage einer Überwachung von Kommunikationsvorgängen zwischen Steuersystemen und einem Mitteilungssystem beruht.
3. Verfahren nach Beispiel 2, bei welchem die Überwachung für Kommunikationsvorgänge dient, die eine Anforderung einer Reaktion eines Fahrers enthalten.
4. Verfahren nach Beispiel 2 oder 3, bei welchem die Überwachung für Kommunikationsvorgänge dient, die eine Anforderung zur Bestätigung eines Manövers enthalten.
5. Verfahren nach Beispiel 2, 3 oder 4, bei welchem die Überwachung in Bezug auf das Fehlen einer Kommunikation von einem Sensor oder einem Steuersystem in Reaktion auf eine Anforderung erfolgt.
6. Verfahren nach einem der voranstehenden Beispiele, bei welchem die Feststellung der mangelnden Reaktion weiterhin auf einer Bewertung von Bilddaten beruht, die dem Fahrer zugeordnet sind.
7. Verfahren nach einem der voranstehenden Beispiele, bei welchem die Feststellung der mangelnden Reaktion auf einer Überwachung von Kommunikationsvorgängen zwischen Steuersystemen beruht.
8. Verfahren nach Beispiel 7, bei welchem die Feststellung der mangelnden Reaktion auf einer Feststellung beruht, dass die Steuersysteme nicht reagieren.
9. Verfahren nach Beispiel 7 oder 8, bei welchem die Feststellung der mangelnden Reaktion auf einer Feststellung beruht, dass kein Steuersystem auf eine Anforderung reagieren kann.
10. Verfahren nach Beispiel 7, 8 oder 9, bei welchem die Feststellung der mangelnden Reaktion auf einer Feststellung beruht, dass ein Benutzer nicht reagiert hat.
11. Verfahren nach einem der voranstehenden Beispiele, bei welchem die Information von dem Fernserver zumindest Koordinaten eines Ortes umfasst, um das Fahrzeug zum Anhalten zu veranlassen, und/oder Betriebsinstruktionen, um das Fahrzeug zum Anhalten zu veranlassen, und/oder Mitteilungsinformation, um dem Fahrer die Fernsteuerung mitzuteilen.
12. System zum Steuern eines Fahrzeugs, wobei vorgesehen sind: ein Assistenzmanagermodul, welches durch einen Prozessor feststellt, dass eine Bestätigung eines Fahrzeugmanövers nicht empfangen wird, welches durch den Prozessor eine Anforderung bezüglich Fernsteuerung an einen Fernserver kommuniziert, und welches durch den Prozessor Information von dem Fernserver empfängt; und zumindest ein halbautonomes oder autonomes Steuermodul, welches das Fahrzeug auf Grundlage der empfangenen Information steuert.
13. System nach Beispiel 12, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Überwachung von Kommunikationsvorgängen zwischen einem Steuersystem und einem Mitteilungssystem.
14. System nach Beispiel 13, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Überwachung von Kommunikationsvorgängen, welche eine Anforderung bezüglich einer Reaktion eines Fahrers enthalten.
15. System nach Beispiel 13 oder 14, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Überwachung von Kommunikationsvorgängen, welche eine Anforderung bezüglich einer Bestätigung eines Manövers enthalten.
16. System nach Beispiel 13, 14 oder 15, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Überwachung in Bezug auf ein Fehlen von Kommunikation von einem Sensor oder einem Steuersystem in Reaktion auf eine Anforderung.
17. System nach einem der Beispiele 13 bis 16, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Bewertung von Bilddaten, die mit dem Fahrer zusammenhängen.
18. System nach einem der Beispiele 12 bis 17, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Überwachung von Kommunikationsvorgängen zwischen Steuersystemen.
19. System nach Beispiel 18, bei welchem das Assistenzmanagermodul feststellt, dass eine Bestätigung nicht empfangen wird, auf Grundlage einer Feststellung, dass die Steuersysteme nicht reagieren, und/oder einer Feststellung, dass kein Steuersystem auf eine Anforderung reagieren kann, und/oder eine Feststellung, dass ein Benutzer nicht reagiert hat.
20. System nach einem der Beispiele 12 bis 19, bei welchem die empfangene Information Koordinaten eines Ortes enthält, um das Fahrzeug zum Anhalten zu veranlassen, und/oder Betriebsinstruktionen, um das Fahrzeug zum Anhalten zu veranlassen, und/oder Mitteilungsinformation, um dem Fahrer die Fernsteuerung mitzuteilen.

Furthermore, the following examples are provided, numbered for ease of reference:

A method for controlling a vehicle, comprising: determining, by a processor, a lack of response of at least one of a driver and a vehicle system; Communicating, in response to the determination, a request for remote control to a remote server by a processor; Receiving, in response to the communication, information from a processor from the remote server; and controlling the vehicle by one or more semi-autonomous or autonomous vehicle control systems based on the received information.
2. The method of Example 1, wherein the determination of the lack of response is based on monitoring communications between control systems and a messaging system.
3. The method of Example 2, wherein the monitoring is for communications that include a request for a driver's response.
4. The method of Example 2 or 3, wherein the monitoring is for communications involving a request to confirm a maneuver.
5. The method of Example 2, 3 or 4, wherein the monitoring for the lack of communication from a sensor or a control system is in response to a request.
6. The method of any one of the preceding examples, wherein the determination of the lack of response is further based on a rating of image data associated with the driver.
7. The method of any one of the preceding examples, wherein the determination of the lack of response is based on monitoring communications between control systems.
8. The method of Example 7, wherein the determination of the lack of response is based on a determination that the control systems are not responding.
9. The method of Example 7 or 8, wherein the determination of the lack of response is based on a determination that no control system can respond to a request.
10. The method of Example 7, 8 or 9, wherein determining the lack of response is based on a determination that a user has not responded.
11. The method of any of the preceding examples, wherein the information from the remote server includes at least coordinates of a location to cause the vehicle to stop, and / or operation instructions to cause the vehicle to stop, and / or notification information to the vehicle Driver to communicate the remote control.
12. A system for controlling a vehicle, comprising: an assistant manager module that determines, by a processor, that an acknowledgment of a vehicle maneuver is not received that communicates a remote control request to a remote server by the processor, and which information from the remote server receives; and at least one semi-autonomous or autonomous control module that controls the vehicle based on the received information.
13. The system of Example 12, wherein the assistant manager module determines that an acknowledgment is not received based on monitoring communications between a control system and a messaging system.
14. The system of Example 13, wherein the assistant manager module determines that an acknowledgment is not received based on monitoring communications that include a request for a driver's response.
15. The system of example 13 or 14, wherein the assistance manager module determines that an acknowledgment is not received based on monitoring communications that include a request for confirmation of a maneuver.
16. The system of Example 13, 14 or 15, wherein the assistant manager module determines that an acknowledgment is not received based on monitoring for a lack of communication from a sensor or control system in response to a request.
17. The system of any of examples 13 to 16, wherein the assistant manager module determines that an acknowledgment is not received based on a rating of image data associated with the driver.
18. The system of any one of Examples 12 to 17, wherein the assistant manager module determines that an acknowledgment is not received based on monitoring communications between control systems.
19. The system of Example 18, wherein the assistant manager module determines that an acknowledgment is not received based on a determination that the control systems are unresponsive, and / or a determination that no control system can respond to a request, and / or Finding that a user has not responded.
20. The system of any one of Examples 12 to 19, wherein the received information includes coordinates of a location to cause the vehicle to stop, and / or operation instructions to cause the vehicle to stop, and / or notification information to the driver to communicate the remote control.

Zwar wurde zumindest eine beispielhafte Ausführungsform in der voranstehenden detaillierten Beschreibung präsentiert, jedoch wird darauf hingewiesen, dass eine erhebliche Anzahl an Variationen vorhanden ist. Weiterhin wird darauf hingewiesen, dass die beispielhafte Ausführungsform bzw. die beispielhaften Ausführungsformen nur als Beispiele zu verstehen sind, und nicht den Umfang, die Einsetzbarkeit, oder die Konfiguration der Offenbarung auf irgendeine Art und Weise einschränken sollen. Stattdessen stellt die voranstehende detaillierte Beschreibung Fachleuten auf diesem Gebiet eine ausreichende Roadmap zum Implementieren der beispielhaften Ausführungsform oder der beispielhaften Ausführungsformen zur Verfügung. Weiterhin wird darauf hingewiesen, dass verschiedene Änderungen bezüglich der Funktion und der Anordnung von Elementen vorgenommen werden können, ohne vom Umfang der Offenbarung abzuweichen, wie sie in den beigefügten Patentansprüchen und deren rechtlichen Äquivalenten angegeben ist. While at least one exemplary embodiment has been presented in the foregoing detailed description, it should be understood that a significant number of variations are presented. It should be further understood that the exemplary embodiment (s) are intended to be exemplary only and are not intended to limit the scope, applicability, or configuration of the disclosure in any way. Instead, the foregoing detailed description provides those skilled in the art with sufficient roadmap to implement the exemplary embodiment or exemplary embodiments. It is further to be understood that various changes in the function and arrangement of elements may be made without departing from the scope of the disclosure as set forth in the appended claims and their legal equivalents.

Claims

Method for controlling a vehicle, wherein: Detecting, by a processor, a lack of response of a driver and / or a vehicle system; Communicating, by a processor, in response to the determination, a request for remote control to a remote server; in response to the communication, receiving, by a processor, information from the remote server; and Controlling the vehicle by one or more semi-autonomous or autonomous vehicle control systems based on the received information.

The method of claim 1, wherein determining the lack of response is based on monitoring communications between control systems and a messaging system.

The method of claim 2, wherein the monitoring is for communications that include a request for a driver's response.

A method according to claim 2 or 3, wherein the monitoring is for communications involving a request to confirm a maneuver.

A method according to claim 2, 3 or 4, wherein the monitoring for the lack of communication from a sensor or control system is in response to a request.

The method of any one of the preceding claims, wherein the determination of the lack of response is further based on a rating of image data associated with the driver.

A method as claimed in any one of the preceding claims, wherein the determination of the lack of response is based on monitoring communications between control systems.

The method of claim 7, wherein the determination of the lack of response is based on a determination that the control systems are not responding.

The method of any one of the preceding claims, wherein the information from the remote server includes coordinates of a location to cause the vehicle to stop, and / or operation instructions to bring the vehicle to a breakpoint, and / or notification information for notifying remote control the driver.

A system for controlling a vehicle, comprising: an assistant manager module that determines, by a processor, that an acknowledgment of a vehicle maneuver is not received, which request by the processor Remote control communicates to a remote server, and which receives information from the remote server by the processor; and at least one semi-autonomous or autonomous control module that controls the vehicle based on the received information.