DE102022213324A1

DE102022213324A1 - Method for operating a system with an autonomously driving vehicle

Info

Publication number: DE102022213324A1
Application number: DE102022213324.2A
Authority: DE
Inventors: Simon Bork; Sophie Pohlmann; Jörg Strunz
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2022-12-08
Filing date: 2022-12-08
Publication date: 2024-06-13
Also published as: WO2024121047A1

Abstract

Die Erfindung betrifft ein Verfahren zum Betrieb eines Systems (2) mit einem autonom fahrenden Fahrzeug (6), welches einen Außenlautsprecher (26) und ein Außenmikrofon (34) und eine von fahrzeugaußen betätigbare Nutzerschnittstelle (32) aufweist, sowie mit einer Flottenmanagementeinrichtung (4), welche mit dem Fahrzeug (6) datenübertragungstechnisch koppelbar ist, wobei das Fahrzeug (6) entsprechend einer Buchung an eine bestimmte Halteposition (50) fährt, und wobei für eine Kommunikation eines Nutzers (14) mit einem Betreuer der Flottenmanagementeinrichtung (4) nach einer Betätigung der Nutzerschnittstelle (32) eine Audio-Verbindung zwischen dem Fahrzeug (6) und der Flottenmanagementeinrichtung (4), wobei für die Audioverbindung das Außenmikrofon (34) als Eingabegerät des Fahrzeugs (6) und der Außenlautsprecher (26) als Ausgabegerät des Fahrzeugs (6) verwendet wird. Des Weiteren betrifft die Erfindung ein solches System (2).The invention relates to a method for operating a system (2) with an autonomously driving vehicle (6) which has an external loudspeaker (26) and an external microphone (34) and a user interface (32) which can be operated from outside the vehicle, and with a fleet management device (4) which can be coupled to the vehicle (6) for data transmission purposes, wherein the vehicle (6) drives to a specific stopping position (50) in accordance with a booking, and wherein an audio connection is established between the vehicle (6) and the fleet management device (4) for communication between a user (14) and a supervisor of the fleet management device (4) after the user interface (32) has been operated, wherein the external microphone (34) is used as the input device of the vehicle (6) and the external loudspeaker (26) is used as the output device of the vehicle (6) for the audio connection. The invention further relates to such a system (2).

Description

Die Erfindung betrifft ein Verfahren zum Betrieb eines System, das eine Fahrzeugflotte mit autonom fahrendes Fahrzeugen sowie eine Flottenmanagementeinrichtung für die Fahrzeugflotte aufweist. Des Weiteren betrifft die Erfindung ein solches System.The invention relates to a method for operating a system that has a vehicle fleet with autonomously driving vehicles and a fleet management device for the vehicle fleet. The invention also relates to such a system.

Für sehbehinderte Personen ist eine Nutzung eines Fahrzeugs, insbesondere der Zustieg in das Fahrzeugs, vergleichsweise schwer. Insbesondere sofern das Fahrzeug ein autonom fahrendes Fahrzeug ist, ist kein Fahrer vorhanden, welcher der sehbehinderten Person gegebenenfalls helfen kann.For visually impaired people, using a vehicle, especially getting into the vehicle, is comparatively difficult. Especially if the vehicle is an autonomous vehicle, there is no driver who can help the visually impaired person if necessary.

Aus der KR 20190072291 A ist ein Busstandorterkennungsverfahren für Sehbehinderte bekannt. Hierbei wird von einem Sehbehinderten eine Buseinstiegsanforderung ausgegeben. Anschließend wird ein Bus entsprechend der Buseinstiegsanforderung zugewiesen und die Buseinstiegsanforderung an den zugewiesenen Bus übertragen.From the KR 20190072291 A A bus location detection method for the visually impaired is known. In this method, a visually impaired person issues a bus boarding request. A bus is then assigned according to the bus boarding request and the bus boarding request is transmitted to the assigned bus.

In der KR 101861090 B1 ist ein Busfahrleitsystem für eine sehbehinderte Person bekannt, das es einer sehbehinderten Person ermöglicht, durch Kommunikation mit einem Bus bequem zu fahren. Das Busfahrleitsystem umfasst ein Smartphone, das mit einer Busanwendung ausgestattet ist, die es der sehbehinderten Person ermöglicht, einen Bus zu buchen, ein Busterminal, das an jedem Bus angebracht ist und dem Fahrer Informationen für sehbehinderte Personen bereitstellt, und einen Busführungsserver zur Kommunikation mit dem Smartphone und dem Busterminal.In the KR 101861090 B1 A bus trip guidance system for a visually impaired person is known that enables a visually impaired person to travel comfortably by communicating with a bus. The bus trip guidance system includes a smartphone equipped with a bus application that enables the visually impaired person to book a bus, a bus terminal attached to each bus that provides information for the visually impaired person to the driver, and a bus guidance server for communicating with the smartphone and the bus terminal.

Der Erfindung liegt die Aufgabe zugrunde, das Nutzen eines autonom fahrenden Fahrzeugs für Sehbehinderte zu erleichtern.The invention is based on the object of making it easier for visually impaired people to use an autonomously driving vehicle.

Diese Aufgabe wird erfindungsgemäß gelöst durch ein Verfahren mit den Merkmalen des Anspruchs 1 sowie durch eine System mit den Merkmalen des Anspruchs 9.This object is achieved according to the invention by a method having the features of claim 1 and by a system having the features of claim 9.

Das Verfahren dient dem Betrieb eines Systems. Das System weist eine Flottenmanagementeinrichtung für eine Fahrzeugflotte autonomer Fahrzeuge (autonom fahrender Fahrzeuge) auf. The method is used to operate a system. The system has a fleet management device for a fleet of autonomous vehicles (autonomously driving vehicles).

Des Weiteren umfasst das System die Fahrzeugflotte mit einem autonom fahrenden Fahrzeug. Unter einem autonom fahrendes Fahrzeug ist hierbei ein Fahrzeug zu verstehen, dass automatisch fährt, wobei im Fahrzeug kein Fahrer für das Führen des Fahrzeugs vorhanden ist. Das Fahrzeug ist insbesondere ein Kraftfahrzeug, beispielsweise ein Personenkraftwagen, zweckmäßig ein sogenanntes „Robotertaxi“. Das Fahrzeug umfasst einen Außenlautsprecher, welcher vorzugsweise anhand einer Fahrzeugaußenstruktur, wie beispielsweise einem Außenblech des Fahrzeugs, sowie anhand eines Exciters gebildet ist, der mit der Fahrzeugaußenstruktur gekoppelt ist, so dass der Exciter die Fahrzeugaußenstruktur zur Ausgabe eines Audiosignals in die Umgebung des Fahrzeugs anregen kann. Alternativ wird ein konventioneller, insbesondere wetterfester, Lautsprecher als Außenlautsprecher verwendet. Beispielsweise wird zusätzlich ein Hupe des Fahrzeugs verwendet, um ein akustisches Signal auszugeben.The system also includes the vehicle fleet with an autonomously driving vehicle. An autonomously driving vehicle is understood to mean a vehicle that drives automatically, with no driver in the vehicle to drive the vehicle. The vehicle is in particular a motor vehicle, for example a passenger car, expediently a so-called "robot taxi". The vehicle includes an external loudspeaker, which is preferably formed using an external vehicle structure, such as an external panel of the vehicle, and an exciter that is coupled to the external vehicle structure so that the exciter can stimulate the external vehicle structure to output an audio signal to the surroundings of the vehicle. Alternatively, a conventional, in particular weatherproof, loudspeaker is used as an external loudspeaker. For example, a horn of the vehicle is also used to output an acoustic signal.

Des Weiteren umfasst das Fahrzeug ein Außenmikrofon zur Erfassung eines akustischen Signals in der Umgebung des Fahrzeugs sowie eine Nutzerschnittstelle, die von fahrzeugaußen von einem Nutzer betätigbar ist. Zweckmäßig ist oder umfasst die Nutzerschnittstelle eine Taste oder ein Touch-Bedienfeld. Bevorzugt ist die Nutzerschnittstelle im Bereich eines Zustiegs, insbesondere der Tür. Beispielsweise ist die Nutzerschnittstelle an der der Umgebung zugewandten Außenseite der B-Säule des Fahrzeugs oder neben einer Seitenscheibe des Fahrzeugs angeordnet. Des Weiteren ist die Nutzerschnittstelle besonders bevorzugt für die Benutzung durch eine sehbehinderte Person eingerichtet. Hierzu ist die Nutzerschnittstelle beispielsweise mit einer der Blindenschrift Braille beschriftet. Also sind entsprechende Erhebungen an der Nutzerschnittstelle angeordnet.The vehicle also includes an external microphone for recording an acoustic signal in the area surrounding the vehicle and a user interface that can be operated by a user from outside the vehicle. The user interface is expediently or includes a button or a touch control panel. The user interface is preferably in the area of an entrance, in particular the door. For example, the user interface is arranged on the outside of the B-pillar of the vehicle facing the environment or next to a side window of the vehicle. Furthermore, the user interface is particularly preferably set up for use by a visually impaired person. For this purpose, the user interface is labeled with Braille, for example. Corresponding elevations are therefore arranged on the user interface.

Die Flottenmanagementeinrichtung ist datenübertragungstechnisch mit dem Fahrzeug, insbesondere mit dessen Steuereinrichtung, koppelbar.The fleet management device can be coupled to the vehicle, in particular to its control device, for data transmission purposes.

Beim Verfahren zum Betrieb des Systems fährt das Fahrzeug zunächst autonom an eine vorbestimmte (Haltestelle) Halteposition, die dem Fahrzeug entsprechend einer von einem Nutzer durchgeführten Buchung vorgegeben ist und/oder wird.In the method for operating the system, the vehicle first drives autonomously to a predetermined stopping position (stop), which is and/or will be specified to the vehicle according to a booking made by a user.

Weiterhin wird nach einer Betätigung der Nutzerschnittstelle, insbesondere wenn das Fahrzeug an der Halteposition angekommen ist und/oder dort steht, eine Audio-Verbindung zwischen dem Fahrzeug und der Flottenmanagementeinrichtung hergestellt, wobei für die Audioverbindung das Außenmikrofon als Eingabegerät des Fahrzeugs und der Außenlautsprecher als Ausgabegerät des Fahrzeugs verwendet wird.Furthermore, after actuation of the user interface, in particular when the vehicle has arrived at the stopping position and/or is standing there, an audio connection is established between the vehicle and the fleet management device, wherein the external microphone is used as the vehicle's input device and the external loudspeaker is used as the vehicle's output device for the audio connection.

Hierbei, also bei hergestellter Audio-Verbindung, wird ein akustisches Signal anhand des Außenmikrofons erfasst, zweckmäßig entsprechende erste Audiodaten von der Steuereinrichtung erzeugt, und die dem akustischen Signal entsprechenden ersten Audiodaten an die Flottenmanagementeinrichtung übertragen. Zusätzlich oder alternativ hierzu werden zweite Audiodaten von der Flottenmanagementeinrichtung an das Fahrzeug übertragen und ein den zweiten Audiodaten entsprechendes akustisches Signal anhand des Außenlautsprechers ausgegeben. Zweckmäßig sind dabei die zweiten Audiodaten anhand eines von einem Mikrofon der Flottenmanagementeinrichtung aufgenommenen akustischen Signals erzeugt. Mit anderen Worten entsprechen die zweiten Audiodaten einer Spracheingabe eines Betreuers („Operator“) der Fahrzeugflotte bzw. der Flottenmanagementeinrichtung.Here, i.e. when the audio connection is established, an acoustic signal is recorded using the external microphone, appropriate first audio data is generated by the control device, and the first audio data corresponding to the acoustic signal is sent to the fleet management. t device. In addition or as an alternative to this, second audio data is transmitted from the fleet management device to the vehicle and an acoustic signal corresponding to the second audio data is output via the external loudspeaker. The second audio data is expediently generated using an acoustic signal recorded by a microphone of the fleet management device. In other words, the second audio data corresponds to a voice input from a supervisor ("operator") of the vehicle fleet or the fleet management device.

Zusammenfassend dient dies der Kommunikation des Nutzers des Fahrzeugs mit dem Betreuer. Für die Kommunikation des Nutzers mit dem Betreuer wird vorteilhaft also das Fahrzeug selbst verwendet.In summary, this is used for communication between the user of the vehicle and the supervisor. The vehicle itself is therefore advantageous for communication between the user and the supervisor.

Das Herstellen der Audioverbindung nach dem Betätigen der Nutzerschnittstelle, insbesondere infolge des Betätigens der Nutzerschnittstelle, wird auch als „Anruf“ oder als „Operator call“ bezeichnet.Establishing the audio connection after activating the user interface, in particular as a result of activating the user interface, is also referred to as a “call” or “operator call”.

Besonders vorteilhaft kann anhand eines solchen Anrufs der Betreuer eine Hilfestellung für den Nutzer geben. Insbesondere sofern der Nutzer sehbehindert ist, kann anhand der Hilfestellung des Betreuers ein Nutzen des Fahrzeugs, insbesondere ein Zustieg erleichtert werden. Hierzu kann der Betreuer beispielsweise Anweisungen und/oder Informationen über die Position eines Türöffners geben. Alternativ oder zusätzlich hierzu kann der (sehbehinderte) Nutzer oder alternativ auch ein Nutzer, der nicht sehbehindert ist, anhand des Anrufs einen Notruf abgeben.It is particularly advantageous for the carer to be able to provide assistance to the user using such a call. In particular, if the user is visually impaired, the carer's assistance can make using the vehicle, and in particular getting in, easier. To do this, the carer can, for example, give instructions and/or information about the location of a door opener. Alternatively or in addition to this, the (visually impaired) user or alternatively a user who is not visually impaired can use the call to make an emergency call.

Gemäß einer vorteilhaften Ausgestaltung des Verfahrens werden, insbesondere für die Kommunikation des Nutzers mit dem Betreuer, (Bild-)Daten einer Innenraumkamera des Fahrzeugs und/oder (Bild-)Daten einer Außenkamera des Fahrzeugs an die Flottenmanagementeinrichtung übertragen. Mit anderen Worten wird zusätzlich zur Audioverbindung eine Bild- oder Video-Verbindung, insbesondere eine Bild- oder Video-Übertragung der Außenraumkamera und/oder der Innenraumkamera für die Kommunikation des Nutzers mit dem Betreuer hergestellt. Besonders vorteilhaft ist es dem Betreuer ermöglicht den Nutzer zu sehen. Folglich ist es dem Betreuer ermöglicht oder zumindest erleichtert, ein Problem des, insbesondere sehbehinderten, Nutzers zu erkennen und/oder ihm entsprechende Anweisungen anhand der Audioverbindung auszugeben.According to an advantageous embodiment of the method, (image) data from an interior camera of the vehicle and/or (image) data from an exterior camera of the vehicle are transmitted to the fleet management device, in particular for communication between the user and the supervisor. In other words, in addition to the audio connection, an image or video connection, in particular an image or video transmission from the exterior camera and/or the interior camera, is established for communication between the user and the supervisor. It is particularly advantageous for the supervisor to be able to see the user. Consequently, it is possible or at least easier for the supervisor to recognize a problem of the user, in particular a visually impaired user, and/or to give him appropriate instructions using the audio connection.

Gemäß einer geeigneten Ausgestaltung des Verfahrens werden zur Buchung des autonom fahrenden Fahrzeugs von einem mobilen Endgerät, insbesondere einem Smartphone, des Nutzers Eingabedaten an eine (erste) Servereinrichtung des Systems gesendet. Anhand der ersten Servereinrichtung wird anschließend die Halteposition und eine Identifikation des Fahrzeugs, insbesondere eine Fahrzeugidentifikationsnummer, bestimmt.According to a suitable embodiment of the method, input data is sent from a user's mobile device, in particular a smartphone, to a (first) server device of the system in order to book the autonomously driving vehicle. The stopping position and an identification of the vehicle, in particular a vehicle identification number, are then determined using the first server device.

Zweckmäßigerweise wird an das Fahrzeug eine Anweisung ausgegeben, an die bestimmte Halteposition zu fahren. Weiterhin wird zweckmäßig eine Bestätigung der Buchung und/oder eine Information über die Halteposition und/oder über die Identifikation des Fahrzeugs an das mobile Endgerät ausgegeben.It is expedient to issue an instruction to the vehicle to drive to the specific stopping position. Furthermore, a confirmation of the booking and/or information about the stopping position and/or about the identification of the vehicle is expediently issued to the mobile device.

Gemäß einer geeigneten Ausgestaltung des Verfahrens wird der Nutzer und/oder dessen mobiles Endgerät anhand des Fahrzeugs authentifiziert. Insbesondere wird anhand des Fahrzeugs überprüft, ob der der Nutzer die Buchung getätigt hat und/oder dass der Nutzer eine Person mit Sehbehinderung ist. Hierzu wird beispielsweise anhand der Außenraumkamera des Fahrzeugs der Nutzer aufgenommen und ein anhand der Außenraumkamera aufgenommenes Bild mit einem in einer Nutzer-Datenbank hinterlegten Bild des Nutzers abgeglichen. Alternativ oder zusätzlich hierzu erfolgt die Authentifizierung beispielsweise anhand einer Datenübertragung zwischen dem Fahrzeug und dem mobilen Endgerät des Nutzers, insbesondere einer Funkübertragung anhand von NFC, Bluetooth oder UWB (Ultrabreitband). Zweckmäßiger Weise erfolgt die Authentifizierung vor dem Zustieg des Nutzers in das Fahrzeug.According to a suitable embodiment of the method, the user and/or their mobile device are authenticated using the vehicle. In particular, the vehicle is used to check whether the user made the booking and/or that the user is a visually impaired person. For this purpose, for example, the user is recorded using the vehicle's exterior camera and an image recorded using the exterior camera is compared with an image of the user stored in a user database. Alternatively or additionally, authentication takes place, for example, using data transmission between the vehicle and the user's mobile device, in particular radio transmission using NFC, Bluetooth or UWB (ultra-wideband). Authentication expediently takes place before the user gets into the vehicle.

Gemäß einer bevorzugten Ausgestaltung des Verfahrens wird eine Sitzplatzbelegung im Fahrzeug erfasst. Mit anderen wird erfasst, welche der Sitzplätze im Fahrzeug von Passagieren bereits belegt sind. Dem Nutzer wird, insbesondere im Zuge dessen Zustieg beispielsweise von einem Innenlautsprecher des Fahrzeugs oder vom mobilen Endgerät des Nutzer, oder alternativ oder zusätzlich hierzu bereits vor der Ankunft des Fahrzeug an der Halteposition vom mobilen Endgerät, eine Information über die Sitzplatzbelegung akustisch ausgegeben. Besonders vorteilhaft wird der Nutzer anhand dieser Information zu einem freien Sitzplatz geführt. Somit ist die Benutzung des Fahrzeugs für den sehbehinderten Nutzer weiter erleichtert. Die Ausgabe dieser Information erfolgt bevorzugt automatisch und/oder erfolgt unabhängig von einem Anruf des Betreuers.According to a preferred embodiment of the method, seat occupancy in the vehicle is recorded. Others are used to record which of the seats in the vehicle are already occupied by passengers. The user is given acoustic information about seat occupancy, particularly when boarding, for example from an interior loudspeaker in the vehicle or from the user's mobile device, or alternatively or additionally from the mobile device before the vehicle arrives at the stopping position. It is particularly advantageous for the user to be guided to a free seat using this information. This makes using the vehicle even easier for the visually impaired user. This information is preferably given out automatically and/or independently of a call from the supervisor.

Gemäß einer bevorzugten Ausgestaltung wird - zweckmäßig vor dem zustieg des Nutzers - anhand des Außenlautsprechers des, insbesondere an der Halteposition stehenden, Fahrzeugs und/oder anhand des mobilen Endgeräts des Nutzers eine Information über eine Position, über die Orientierung des Fahrzeugs an der Halteposition und/oder eine Information über die Position dessen Tür für den Zustieg akustisch ausgegeben. Vorteilhaft ist das Auffinden der Tür für den sehbehinderten Nutzer somit zusätzlich erleichtert. Die Ausgabe dieser Information erfolgt bevorzugt automatisch und/oder erfolgt unabhängig von einem Anruf des Betreuers.According to a preferred embodiment, information about a position, about the orientation of the vehicle at the stopping position and/or about the position of its door for the Access is announced acoustically. This makes it easier for visually impaired users to find the door. This information is preferably provided automatically and/or independently of a call from the supervisor.

Gemäß einer vorteilhaften Ausgestaltung wird anhand des Fahrzeugs, beispielsweise anhand dessen Innenlautsprecher, anhand dessen Außenlautsprecher, und/oder anhand des mobilen Endgeräts eine Wegbeschreibung akustisch an den Nutzer akustisch ausgegeben wird. Die Wegbeschreibung umfasst dabei beispielsweise, dass der Zielort (die Zielhalteposition/Zielhaltestelle) gemäß der Buchung erreicht wurde und/oder die Beschreibung der relativen Lage weiterer Orte bezüglich der Zielhaltestelle.According to an advantageous embodiment, directions are given to the user acoustically using the vehicle, for example using its interior loudspeaker, its exterior loudspeaker, and/or the mobile device. The directions include, for example, that the destination (the destination stop position/destination stop) has been reached according to the booking and/or the description of the relative position of other locations in relation to the destination stop.

Gemäß einer geeigneten Ausgestaltung werden für die akustische Ausgabe einer Information, beispielsweise für die akustische Ausgabe der Information über die Sitzplatzbelegung, der Information über die Position und/oder Orientierung des Fahrzeug, und/oder der Wegbeschreibung, vom mobilen Endgerät und/oder von der ersten Servereinrichtung hierfür vorgesehene (Informations-) Daten, mit anderen Worten Daten für diese Information, mit noch anderen Worten Daten aus denen die jeweilige Information abgeleitet werden kann und/oder diese Information enthält an eine zweite Servereinrichtung des Systems gesendet. Die Informationsdaten sind oder umfassen insbesondere Daten über die erfasste Sitzplatzbelegung, den Typ des Fahrzeugs. Anhand dieser zweiten Servereinrichtung werden aus den Informations-Daten (Ausgabe-) Daten für eine bessere Verständlichkeit für Sehbehinderte erzeugt. Insbesondere sind diese Ausgabe-Daten insbesondere Audiodaten für die akustische Ausgabe durch das mobile Endgerät und/oder das Fahrzeug. Hierzu werden die Ausgabedaten zweckmäßig von der zweiten Servereinrichtung an das mobile Endgerät oder mittels der ersten Servereinrichtung an das Fahrzeug übertragen.According to a suitable embodiment, for the acoustic output of information, for example for the acoustic output of information about seat occupancy, information about the position and/or orientation of the vehicle, and/or directions, (information) data provided for this purpose by the mobile device and/or by the first server device, in other words data for this information, in still other words data from which the respective information can be derived and/or contains this information, are sent to a second server device of the system. The information data is or includes in particular data about the recorded seat occupancy, the type of vehicle. Using this second server device, (output) data is generated from the information data for better comprehensibility for the visually impaired. In particular, this output data is in particular audio data for the acoustic output by the mobile device and/or the vehicle. For this purpose, the output data is expediently transmitted from the second server device to the mobile device or by means of the first server device to the vehicle.

Ein weiterer Aspekt der Erfindung betrifft ein System, insbesondere ein System, das gemäß dem Verfahren in einer der oben genannten Varianten betreibbar oder betrieben ist. Das System umfasst zumindest also eine Flottenmanagementeinrichtung für eine Fahrzeugflotte, sowie die Fahrzeugflotte, welche ein autonom fahrendes Fahrzeug umfasst. Dieses Fahrzeug wiederum weist einen Außenlautsprecher, ein Außenmikrofon, sowie eine von fahrzeugaußen betätigbare Nutzerschnittstelle auf. Weiterhin umfasst das Fahrzeug Mittel, die dazu eingerichtet sind, dass nach einer Betätigung der Nutzerschnittstelle eine Audio-Verbindung zwischen dem Fahrzeug und der Flottenmanagementeinrichtung hergestellt wird, wobei für die Audioverbindung das Außenmikrofon als Eingabegerät und der Außenlautsprecher als Ausgabegerät verwendet wird.A further aspect of the invention relates to a system, in particular a system that can be operated or is operated according to the method in one of the above-mentioned variants. The system therefore comprises at least one fleet management device for a vehicle fleet, as well as the vehicle fleet, which comprises an autonomously driving vehicle. This vehicle in turn has an external loudspeaker, an external microphone, and a user interface that can be operated from outside the vehicle. The vehicle also comprises means that are set up so that an audio connection is established between the vehicle and the fleet management device after the user interface has been operated, the external microphone being used as the input device and the external loudspeaker as the output device for the audio connection.

Zweckmäßigerweise umfasst das System weiterhin die erste und/oder die zweite Servereinrichtung.Conveniently, the system further comprises the first and/or the second server device.

Gemäß einer vorteilhaften Ausgestaltung des Systems ist der Außenlautsprecher des Fahrzeugs anhand eines Exciters und anhand einer Fahrzeugaußenstruktur gebildet. Also wird als Außenlautsprecher die Fahrzeugaußenstruktur, beispielsweise ein Außenblech und/oder eine Außenverkleidung des Fahrzeugs verwendet, welche zur akustischen Ausgabe eines akustischen Signals vom Exciter zum Schwingen angeregt wird. Vorteilhaft ist bei der Verwendung eines anhand eines Exciters gebildeten Außenlautsprechers die für einen herkömmlichen Lautsprecher notwendige herkömmliche Lautsprechermembranen und deren Schutzabdeckungen nicht notwendig. Somit ist auch kein Durchbrüche in der Fahrzeugaußenstruktur notwendig. Damit einhergehend ist eine Ausführung des Lautsprechers realisiert, welche hinsichtlich Umwelteinflüsse (insbesondere Feuchtigkeit) besonders unproblematisch ist.According to an advantageous embodiment of the system, the external loudspeaker of the vehicle is formed by an exciter and by an external vehicle structure. The external vehicle structure, for example an external sheet and/or an external panel of the vehicle, is used as the external loudspeaker, which is stimulated to vibrate by the exciter in order to emit an acoustic signal. The advantage of using an external loudspeaker formed by an exciter is that the conventional loudspeaker membranes and their protective covers required for a conventional loudspeaker are not necessary. This means that no openings in the external vehicle structure are necessary. This also results in a loudspeaker design that is particularly unproblematic with regard to environmental influences (especially moisture).

Alternativ oder zusätzlich hierzu wird ein AVAS-Lautsprecher (Acoustic Vehicle Alerting System-Lautsprecher) des Fahrzeugs als Außenlautsprecher verwendet.Alternatively or in addition, an AVAS (Acoustic Vehicle Alerting System) loudspeaker in the vehicle is used as an external loudspeaker.

Nachfolgend werden Ausführungsbeispiele der Erfindung anhand einer Zeichnung näher erläutert. Darin zeigen:

1 schematisch ein System, das eine Flottenmanagementeinrichtung für eine Fahrzeugflotte, sowie ein autonom fahrendes Kraftfahrzeug der Fahrzeugflotte umfasst,
2 schematisch in Draufsicht das Kraftfahrzeug, und
3 anhand eines Flussdiagramms einen Verfahrensablauf zum Betrieb des Systems.

In the following, embodiments of the invention are explained in more detail with reference to a drawing. In the drawing:

1 schematically a system comprising a fleet management device for a vehicle fleet, as well as an autonomously driving motor vehicle of the vehicle fleet,
2 schematic plan view of the motor vehicle, and
3 using a flow chart to describe a procedure for operating the system.

Einander entsprechende Teile und Größen sind in allen Figuren stets mit gleichen Bezugszeichen versehen.Corresponding parts and sizes are always provided with the same reference symbols in all figures.

In der 1 ist ein System 2 schematisch dargestellt. Das System 2 umfasst eine Flottenmanagementeinrichtung 4 zum Betreuen bzw. zum Managen einer Fahrzeugflotte an autonom fahrenden (Kraft-)Fahrzeugen. Das System 2 umfasst des Weiteren die Fahrzeugflotte, wobei eines derer autonom fahrenden (Kraft-)Fahrzeuge 6 in der 1 und dieses vergleichsweise detailliert in der 2 gezeigt ist.In the 1 a system 2 is shown schematically. The system 2 comprises a fleet management device 4 for looking after or managing a vehicle fleet of autonomously driving (motor) vehicles. The system 2 further comprises the vehicle fleet, one of which autonomously driving (motor) vehicles 6 is in the 1 and this comparatively detailed in the 2 is shown.

Das System 2 umfasst eine erste Servereinrichtung 8, welche mit einem mobilen Endgerät 10 und/oder mit dem Fahrzeug 6 datenübertragungstechnisch verbindbar ist. Die erste Servereinrichtung 8 ist beispielsweise ein Bestandteil der Flottenmanagementeinrichtung 4. Gemäß dem hier dargestellten Ausführungsbeispiel ist die erste Servereinrichtung 8 baulich von der 4 getrennt ausgebildet. Die erste Servereinrichtung 8 stellt vorzugsweise ein Backend des Betreibers einer Software für den Buchungsvorgang und/oder für den Betreiber der Fahrzeugflotte bereit.The system 2 comprises a first server device 8, which can be connected to a mobile terminal 10 and/or to the vehicle 6 for data transmission purposes. The first server device 8 is, for example, a component of the fleet management device 4. According to the exemplary embodiment shown here, the first server device 8 is structurally separate from the 4. The first server device 8 preferably provides a backend for the operator of a software for the booking process and/or for the operator of the vehicle fleet.

Eine zweite Servereinrichtung 12 des Systems 2 ist mit dem mobilen Endgerät 10 und/oder mit der ersten Servereinrichtung 8 verbindbar. Die zweite Servereinrichtung 12 stellt vorzugsweise ein Backend des Betreibers einer Software zur Aufbereitung von Daten für sehbehinderte Nutzer 14 bereit. Insbesondere ist die zweite Servereinrichtung 12 dazu eingerichtet, an diese übertragene (Informations-)Daten, also Daten über eine Information für den sehbehinderten Nutzer 14, beispielsweise die Informationsdaten D_B, D_F, D_S, D_H (vgl. 3) aufzubereiten, wobei für eine Ausgabe eines akustischen Signals zweckmäßig Daten D_A, insbesondere Audiodaten, mit der Information erzeugt und an das mobile Endgerät und/oder an die erste Servereinrichtung 8 - und vorzugsweise von der ersten Servereinrichtung an das Fahrzeug 6 - übermittelt werden.A second server device 12 of the system 2 can be connected to the mobile terminal 10 and/or to the first server device 8. The second server device 12 preferably provides a backend of the operator of a software for processing data for visually impaired users 14. In particular, the second server device 12 is set up to process (information) data transmitted to it, i.e. data about information for the visually impaired user 14, for example the information data D _B , D _F , D _S , D _H (cf. 3 ), wherein for an output of an acoustic signal, data D _A , in particular audio data, are expediently generated with the information and transmitted to the mobile terminal and/or to the first server device 8 - and preferably from the first server device to the vehicle 6.

Die Signalübertragungswege zwischen dem Fahrzeug 6, der Flottenmanagementeinrichtung 4, der ersten Servereinrichtung 8 und der zweiten Servereinrichtung 12 sind in der 1 jeweils als strichlinierter Doppelpfeil dargestellt.The signal transmission paths between the vehicle 6, the fleet management device 4, the first server device 8 and the second server device 12 are in the 1 each shown as a dashed double arrow.

In der 2 ist das autonom fahrende Fahrzeug 6 vergleichsweise detailliert gezeigt. Dieses umfasst eine Innenraumkamera 16, deren Erfassungsbereich zumindest einen Abschnitt des Passagierraums 18 des Fahrzeugs 6 abdeckt. Eine Außenraumkamera 20 des Fahrzeugs 6 weist einen Erfassungsbereich mit Umgebung des Fahrzeugs 6, insbesondere mit der Umgebung einer Tür 22 des Fahrzeugs 6 zum Zustieg der Passagiere, auf.In the 2 the autonomously driving vehicle 6 is shown in comparative detail. This comprises an interior camera 16, the detection range of which covers at least a section of the passenger compartment 18 of the vehicle 6. An exterior camera 20 of the vehicle 6 has a detection range with the surroundings of the vehicle 6, in particular with the surroundings of a door 22 of the vehicle 6 for boarding the passengers.

Das Fahrzeug 6 umfasst einen Innenlautsprecher 24 zur Ausgabe eines akustischen Signals in den Passagierraum 18 sowie einen Außenlautsprecher 26 zur Ausgabe eines akustischen Signals in die Umgebung des Fahrzeugs 6, insbesondere in den Bereich der Tür 22. Der Außenlautsprecher 26 ist dabei anhand eines Exciters 28 und einer Fahrzeugaußenstruktur 30, hier beispielsweise eine Außenverkleidung des Fahrzeugs 6 gebildet. Zur Ausgabe des akustischen Signals regt der Exciter 28 die Fahrzeugaußenstruktur 30 zu Schwingungen an, welche das akustische Signal erzeugt. Gemäß einer nicht weiter dargestellten Alternative wird als Außenlautsprecher ein AVAS-Lautsprecher des Fahrzeugs 6 verwendet.The vehicle 6 comprises an interior loudspeaker 24 for emitting an acoustic signal into the passenger compartment 18 and an exterior loudspeaker 26 for emitting an acoustic signal into the surroundings of the vehicle 6, in particular into the area of the door 22. The exterior loudspeaker 26 is formed using an exciter 28 and an exterior vehicle structure 30, here for example an exterior panel of the vehicle 6. To emit the acoustic signal, the exciter 28 stimulates the exterior vehicle structure 30 to vibrate, which generates the acoustic signal. According to an alternative not shown in detail, an AVAS loudspeaker of the vehicle 6 is used as the exterior loudspeaker.

Das Fahrzeug 6 weist eine Nutzerschnittstelle 32 auf, die von fahrzeugaußen vom Nutzer 14 betätigbar ist. Mit anderen Worten ist die Nutzerschnittstelle 32 derart angeordnet, dass der Nutzer 14, der noch nicht zugestiegen ist, die Nutzerschnittstelle 32 betätigen kann. Gemäß dem hier dargestellten Ausführungsbeispiel ist die Nutzerschnittstelle 32 fahrzeugaußen neben der Tür 22 angeordnet.The vehicle 6 has a user interface 32 that can be operated from the outside of the vehicle by the user 14. In other words, the user interface 32 is arranged such that the user 14, who has not yet boarded, can operate the user interface 32. According to the exemplary embodiment shown here, the user interface 32 is arranged on the outside of the vehicle next to the door 22.

Ein Außenmikrofon 34 des Fahrzeugs 6 dient der Erfassung eines akustischen Signals aus der Umgebung des Fahrzeugs 6, nämlich aus der Umgebung der Nutzerschnittstelle 32. Mit anderen Worten wird anhand des Außenmikrofons Umgebungsschall erfasst. Aufgrund der Anordnung des Erfassungsbereichs des Außenmikrofons 34 im Bereich der Nutzerschnittstelle 32 ist es ermöglicht, ein vom Nutzer 14 ausgegebenes akustisches Signal, insbesondere vom Nutzer 14 Gesprochenes, zu erfassen. In der Draufsicht gemäß der 2 ist das Außenmikrofon 34 zum Zwecke einer besseren Übersichtlichkeit nicht weiter dargestellt.An external microphone 34 of the vehicle 6 is used to record an acoustic signal from the surroundings of the vehicle 6, namely from the surroundings of the user interface 32. In other words, ambient sound is recorded using the external microphone. Due to the arrangement of the detection area of the external microphone 34 in the area of the user interface 32, it is possible to record an acoustic signal emitted by the user 14, in particular what is spoken by the user 14. In the plan view according to the 2 For the sake of better clarity, the external microphone 34 is not shown further.

Das System 2 ist dazu ausgebildet, dass bei Betätigung der Nutzerschnittstelle 32 eine Audio-Verbindung, also eine datenübertragungstechnische Verbindung zum Übertragen von Audiodaten, zwischen dem Fahrzeug 6 und der Flottenmanagementeinrichtung 4 hergestellt wird. Hierzu ist das Außenmikrofon 34 und der Außenlautsprecher 26 sowie eine Sende- und Empfangseinheit 38 mit einer Steuereinrichtung 36 des Fahrzeugs datenübertragungstechnisch verbunden. Zusammenfassend werden die Steuereinrichtung 40 sowie die Sende- und Empfangseinheit 38 als Mittel 40 bezeichnet. Analog hierzu umfasst die Flottenmanagementeinrichtung ein Mikrofon 42 sowie einen Lautsprecher 44, und eine Sende- und Empfangseinheit 48, welche mit einer Steuereinrichtung 46 datenübertragungstechnisch verbunden sind.The system 2 is designed so that when the user interface 32 is activated, an audio connection, i.e. a data transmission connection for transmitting audio data, is established between the vehicle 6 and the fleet management device 4. For this purpose, the external microphone 34 and the external loudspeaker 26 as well as a transmitting and receiving unit 38 are connected to a control device 36 of the vehicle for data transmission. In summary, the control device 40 and the transmitting and receiving unit 38 are referred to as means 40. Analogously to this, the fleet management device comprises a microphone 42 and a loudspeaker 44, and a transmitting and receiving unit 48, which are connected to a control device 46 for data transmission.

Im Zuge der Audio-Verbindung wird ein akustisches Signal anhand des Außenmikrofons 34 des Fahrzeugs 6 erfasst, entsprechende Audiodaten von der Steuereinrichtung 36 erzeugt, und diese mittels der Sende- und Empfangseinheit 38 an die Flottenmanagementeinrichtung 4 übertragen. Analog hierzu werden ein akustisches Signal anhand des Mikrofons 42 der Flottenmanagementeinrichtung 4, insbesondere von einem Betreuer der Flotte Gesprochenes wie beispielsweise Anweisungen für den Nutzer des Fahrzeugs, erfasst, entsprechende Audiodaten von der Steuereinrichtung 46 erzeugt, und diese mittels der Sende- und Empfangseinheit 48 an das Fahrzeug 6 übertragen.During the audio connection, an acoustic signal is recorded using the external microphone 34 of the vehicle 6, corresponding audio data is generated by the control device 36, and this is transmitted to the fleet management device 4 using the transmitting and receiving unit 38. Similarly, an acoustic signal is recorded using the microphone 42 of the fleet management device 4, in particular words spoken by a fleet supervisor, such as instructions for the user of the vehicle, corresponding audio data is generated by the control device 46, and this is transmitted to the vehicle 6 using the transmitting and receiving unit 48.

Anhand der empfangenen Audiodaten werden von der Steuereinrichtung 36 bzw. 46 ein jeweiliges Lautsprechersignal für den Außenlautsprecher 26 bzw. für den Lautsprecher 44 erzeugt und an diesen ausgegeben.Based on the received audio data, the control device 36 or 46 generates a respective loudspeaker signal for the external loudspeaker 26 or for the loudspeaker 44 and outputs it to the latter.

Auf diese Weise ist eine Kommunikation zwischen dem Betreuer (nicht dargestellt) der Fahrzeugflotte und dem Nutzer 14 ermöglicht.In this way, communication between the supervisor (not shown) of the vehicle fleet and the user 14 is possible.

In der 3 ist ein Flussdiagramm gezeigt, das den Verfahrensablauf für den Betrieb des Systems 2 gemäß den 1 und 2 darstellt.In the 3 A flow chart is shown showing the procedure for operating the system 2 according to the 1 and 2 represents.

In einem ersten Schritt I wird das Fahrzeug 6 vom sehbehinderten Nutzer 14 gebucht. Hierzu werden von mobilen Endgerät 10 des Nutzers 14 Eingabedaten E an die erste Servereinrichtung 8 übertragen. Die erste Servereinrichtung 8 wertet diese Eingabedaten E aus, und bestimmt anhand dieser eines der Fahrzeuge der Fahrzeugflotte für den Transport des Nutzers 14, hier das Fahrzeug 6. Hierbei bestimmt die erste Servereinrichtung 8 eine Identifikation ID, nämlich eine eindeutige Identifikationsnummer, des Fahrzeugs 6 sowie eine Haltestelle 50, an welcher der Nutzer 14 dem Fahrzeug 6 zusteigen kann. Von der ersten Servereinrichtung 8 wird an das Fahrzeug 6 eine Anweisung ausgegeben, an die bestimmte Halteposition 50 zu fahren. Infolgedessen fährt das Fahrzeug 6 an die Halteposition 50.In a first step I, the vehicle 6 is booked by the visually impaired user 14. For this purpose, input data E is transmitted from the mobile device 10 of the user 14 to the first server device 8. The first server device 8 evaluates this input data E and uses it to determine one of the vehicles in the vehicle fleet for transporting the user 14, in this case the vehicle 6. The first server device 8 determines an identification ID, namely a unique identification number, of the vehicle 6 and a stop 50 at which the user 14 can board the vehicle 6. The first server device 8 issues an instruction to the vehicle 6 to drive to the specific stop position 50. As a result, the vehicle 6 drives to the stop position 50.

Die Informationsdaten D_F des Fahrzeugs 6 mit der Identifikation ID sowie Informationsdaten D_H über die Halteposition 50 werden von der ersten Servereinrichtung 8 an die zweite Servereinrichtung 12 übertragen. Anhand dieser werden die Informationsdaten D_F und D_H ausgewertet und entsprechende Daten D_A, insbesondere Audiodaten, zur akustischen Ausgabe an das mobile Endgerät 10 und/oder mittels der ersten Servereinrichtung 8 an das Fahrzeug 6 übermittelt.The information data D _F of the vehicle 6 with the identification ID as well as information data D _H about the stopping position 50 are transmitted from the first server device 8 to the second server device 12. Based on this, the information data D _F and D _H are evaluated and corresponding data D _A , in particular audio data, are transmitted for acoustic output to the mobile terminal 10 and/or by means of the first server device 8 to the vehicle 6.

Weiterhin eine Bestätigung der Buchung von der ersten Servereinrichtung 8 und/oder von der zweiten Servereinrichtung 12 an das mobile Endgerät übertragen.Furthermore, a confirmation of the booking is transmitted from the first server device 8 and/or from the second server device 12 to the mobile terminal.

Zweckmäßig gibt das Fahrzeug 6 bei der Anfahrt an die Halteposition ein (erstes) akustisches Signal, insbesondere anhand dessen Außenlautsprecher 26, aus, so dass das Fahrzeug 6 vom sehbehinderten Nutzer 14 besser erkannt werden kann, und ein Unfall vermieden wird. Beispielsweise ist dieses akustische Signal derart ausgestaltet, dass dieses den Geräuschen eines fahrendes Fahrzeugs entspricht.When approaching the stopping position, the vehicle 6 expediently emits a (first) acoustic signal, in particular via its external loudspeaker 26, so that the vehicle 6 can be better recognized by the visually impaired user 14 and an accident is avoided. For example, this acoustic signal is designed in such a way that it corresponds to the noises of a moving vehicle.

In einem zweiten Schritt II kommt das Fahrzeug nach der Anfahrt an die Halteposition 50 an dieser zum Stehen. Infolge dessen wird ein vom ersten akustischen Signal unterschiedliches zweites akustisches Signal, insbesondere anhand des Außenlautsprechers 26, ausgegeben, so dass der Nutzer 14 erkennt, dass das Fahrzeug 6 an der Halteposition 50 steht.In a second step II, the vehicle comes to a stop at the stopping position 50 after approaching it. As a result, a second acoustic signal that is different from the first acoustic signal is emitted, in particular via the external loudspeaker 26, so that the user 14 recognizes that the vehicle 6 is at the stopping position 50.

Vor dem Zustieg des Nutzers 14 in das Fahrzeug 6 wird der Nutzer 14 und/oder dessen mobiles Endgerät 10 anhand des Fahrzeugs 6 authentifiziert (Schritt III). Hierzu wird beispielsweise ein Bild des Nutzers 14 anhand der Außenraumkamera 20 aufgenommen und dieses zur Auswertung an die erste Servereinrichtung 8 übertragen. Alternativ umfasst das Fahrzeug 6 eine Schnittstelle (nicht dargestellt) für das mobile Endgerät 10 des Nutzers, so dass anhand eines Datenaustausches mit entsprechendem Authentifizierungscode die Authentifizierung durchgeführt werden kann.Before the user 14 gets into the vehicle 6, the user 14 and/or their mobile device 10 is authenticated using the vehicle 6 (step III). For this purpose, for example, an image of the user 14 is taken using the exterior camera 20 and this is transmitted to the first server device 8 for evaluation. Alternatively, the vehicle 6 includes an interface (not shown) for the user's mobile device 10, so that authentication can be carried out using a data exchange with the corresponding authentication code.

Optional wird in Schritt IV des Verfahrens anhand des Außenlautsprechers 26 und/oder anhand des mobilen Endgeräts 10 eine Information über die Position und/oder über die Orientierung des Fahrzeugs 6, also dessen Ausrichtung bezüglich der Halteposition 50, und/oder eine Information über die Position dessen Tür 22 akustisch an den Nutzer 14 ausgegeben. Hierzu werden von der ersten Servereinrichtung 8 die Informationsdaten D_F über das Fahrzeug 6, wie beispielsweise Kenndaten des Fahrzeugs, eine GPS-Position, oder eine Fahrzeugtrajektorie, an die zweite Servereinrichtung 12 übertragen, anhand dessen die Informationsdaten D_F ausgewertet und entsprechende Daten D_A, insbesondere Audiodaten, zur akustischen Ausgabe an das mobile Endgerät 10 und/oder mittels der ersten Servereinrichtung 8 an das Fahrzeug übermittelt werden.Optionally, in step IV of the method, information about the position and/or orientation of the vehicle 6, i.e. its orientation with respect to the stopping position 50, and/or information about the position of its door 22 is acoustically output to the user 14 using the external loudspeaker 26 and/or the mobile terminal 10. For this purpose, the information data D _F about the vehicle 6, such as vehicle identification data, a GPS position, or a vehicle trajectory, are transmitted from the first server device 8 to the second server device 12, based on which the information data D _F is evaluated and corresponding data D _A , in particular audio data, are transmitted for acoustic output to the mobile terminal 10 and/or to the vehicle by means of the first server device 8.

In Schritt V wird nach Betätigung der Nutzerschnittstelle 32 durch den Nutzer 14 eine Audioverbindung zwischen dem Fahrzeug 6 und der Flottenmanagementeinrichtung 4 hergestellt. Anhand dieses sogenannten Anrufs oder sogenannten „Operator call“ erfolgt eine Kommunikation zwischen dem sehbehinderten Nutzer 14 und dem Betreuer der Fahrzeugflotte. Der Betreuer gibt beispielsweise Anweisung oder Informationen, wie beispielsweise die Position der Tür 22, an den Nutzer, um diesen zu helfen.In step V, after the user 14 has activated the user interface 32, an audio connection is established between the vehicle 6 and the fleet management device 4. This so-called call or so-called "operator call" is used to communicate between the visually impaired user 14 and the vehicle fleet supervisor. The supervisor gives the user instructions or information, such as the position of the door 22, to help them.

Zusammenfassend wird für die Audioverbindung das Außenmikrofon 34 als Eingabegerät des Fahrzeugs 6 und der Außenlautsprecher 26 als Ausgabegerät des Fahrzeugs 6 verwendet.In summary, for the audio connection, the external microphone 34 is used as the input device of the vehicle 6 and the external loudspeaker 26 is used as the output device of the vehicle 6.

Zusätzlich zur Audioverbindung wird eine Video-Verbindung zwischen dem Fahrzeug 6 und der Flottenmanagementeinrichtung 4 hergestellt. Hierbei werden (Bild-)Daten B der Innenraumkamera 16 des Fahrzeugs 6 und/oder (Bild-)Daten B der Außenraumkamera 20 des Fahrzeugs 6 an die Flottenmanagementeinrichtung 4 übertragen werden. Auf diese Weise kann der Betreuer den Nutzer sehen und ein Problem des Nutzers besser erfassen, so dass der Betreuer vergleichsweise genaue Anweisungen oder Informationen für den Nutzer 14 bereitstellen kann.In addition to the audio connection, a video connection is established between the vehicle 6 and the fleet management device 4. In this case, (image) data B from the interior camera 16 of the vehicle 6 and/or (image) data B from the exterior camera 20 of the vehicle 6 are transmitted to the fleet user management device 4. In this way, the supervisor can see the user and better understand a problem of the user, so that the supervisor can provide comparatively precise instructions or information to the user 14.

Hierzu umfasst die Flottenmanagementeinrichtung 4 einen Bildschirm 52, der mit der Steuereinrichtung 46 signalübertragungstechnisch verbunden ist.For this purpose, the fleet management device 4 comprises a screen 52 which is connected to the control device 46 for signal transmission purposes.

Beim Öffnen der Tür 22 wird, insbesondere anhand des Außenlautsprechers 26 ein drittes, vom ersten und zweiten akustischen Signal unterschiedliches, akustisches Signal ausgegeben, das das Öffnen der Tür 22 signalisiert.When the door 22 is opened, a third acoustic signal, different from the first and second acoustic signals, is emitted, in particular by means of the external loudspeaker 26, which signals the opening of the door 22.

In Schritt VI, wird eine Sitzplatzbelegung der Sitzplätze 54 im Fahrzeug 6 erfasst. Hierzu werden beispielsweise von der Innenraumkamera 16 aufgenommene Bilder von der Steuereinrichtung 36 ausgewertet. Informationsdaten Ds über die Belegung der Sitzplätze 54 werden an die erste Servereinrichtung 8 und von dieser an die zweite Servereinrichtung 12 übermittelt. Beispielsweise enthalten die Informationsdaten zusätzlich eine Information über den Aufbau des Fahrzeugs, insbesondere über die Anordnung der Sitzplätze bezüglich des Zustiegs (der Tur 22). Die zweite Servereinrichtung 12 wertet die Informationsdaten Ds aus und überträgt entsprechende Daten D_A, insbesondere Audiodaten, an das mobile Endgerät 10 und/oder mittels der ersten Servereinrichtung 8 an das Fahrzeug 6, so dass anhand des mobilen Endgeräts 10 und/oder anhand des Fahrzeugs 6, insbesondere anhand dessen Innenlautsprecher 24, eine Information über die Sitzplatzbelegung akustisch ausgegeben wird. Beispielsweise wird anhand des mobilen Endgeräts ein Anweisung akustisch ausgegeben, wo der Sitzplatz bezüglich der Tür 22 oder bezüglich der aktuellen Position des Nutzers angeordnet ist. Beispielsweise wir ausgegeben, dass der Sitzplatz auf der linken Seite des Fahrzeugs angeordnet ist, und/oder dass sich der Nutzer nach rechts drehen soll, um zum Sitzplatz zu gelangen.In step VI, seat occupancy of the seats 54 in the vehicle 6 is recorded. For this purpose, images taken by the interior camera 16, for example, are evaluated by the control device 36. Information data Ds about the occupancy of the seats 54 are transmitted to the first server device 8 and from there to the second server device 12. For example, the information data additionally contains information about the structure of the vehicle, in particular about the arrangement of the seats with respect to boarding (the door 22). The second server device 12 evaluates the information data Ds and transmits corresponding data D _A , in particular audio data, to the mobile terminal 10 and/or to the vehicle 6 via the first server device 8, so that information about the seat occupancy is acoustically output using the mobile terminal 10 and/or the vehicle 6, in particular its interior loudspeaker 24. For example, an instruction is acoustically output using the mobile terminal as to where the seat is located with respect to the door 22 or with respect to the user's current position. For example, it is indicated that the seat is located on the left side of the vehicle and/or that the user should turn to the right to reach the seat.

Gemäß Schritt VII erreicht das Fahrzeug 6 nach der autonomen Fahrt den Zielort gemäß der Buchung. Hier wird anhand des mobilen Endgeräts und/oder anhand des Fahrzeuges 6, insbesondere anhand dessen Innenlautsprecher 24, eine Information über das Erreichen des Zielorts akustisch ausgegeben. Optional werden akustisch weitere Informationen über einen weiteren Zielort des Nutzers 14 ausgegeben, und wie dieser zu erreichen ist. Zusammenfassend wird eine Wegbeschreibung akustisch ausgegeben.According to step VII, the vehicle 6 reaches the destination according to the booking after the autonomous journey. Here, information about reaching the destination is acoustically output using the mobile device and/or the vehicle 6, in particular using its interior loudspeaker 24. Optionally, further information about another destination of the user 14 and how to reach it is output acoustically. In summary, directions are output acoustically.

Beim Öffnen der Tür 22 für das Aussteigen des Nutzers 14 wird weiterhin ein viertes Akustisches Signal ausgegeben, das das Öffnen der Tür signalisiert.When the door 22 is opened for the user 14 to exit, a fourth acoustic signal is emitted, signaling the opening of the door.

Zusammenfassend wird für eine akustische Ausgabe einer Information von der ersten Servereinrichtung 8 und/oder vom mobilen Endgerät 10 und/oder die Informationsdaten, also Daten für bzw. über die Information, beispielsweise die Informationsdaten D_F über das Fahrzeug 6, die Informationsdaten D_H über die Halteposition, Informationsdaten D_B über die Buchung, und/oder die Informationsdaten D_S über die Besetzung der Sitzplätze, an die zweite Servereinrichtung 12 des Systems 2 gesendet und anhand dieser für eine bessere Verständlichkeit für Sehbehinderte entsprechende Daten D_A, insbesondere Audiodaten, für die akustische Ausgabe erzeugt.In summary, for an acoustic output of information from the first server device 8 and/or from the mobile terminal 10 and/or the information data, i.e. data for or about the information, for example the information data D _F about the vehicle 6, the information data D _H about the stopping position, information data D _B about the booking, and/or the information data D _S about the occupancy of the seats, are sent to the second server device 12 of the system 2 and based on this, corresponding data D _A , in particular audio data, are generated for the acoustic output for better intelligibility for the visually impaired.

Die Erfindung ist nicht auf die vorstehend beschriebenen Ausführungsbeispiele beschränkt. Vielmehr können hieraus im Rahmen der Ansprüche auch andere Varianten der Erfindung vom Fachmann abgeleitet werden, ohne den Gegenstand der Erfindung zu verlassen. Insbesondere sind ferner alle im Zusammenhang mit den Ausführungsbeispielen und/oder in den Ansprüchen beschriebenen Einzelmerkmale auch auf andere Weise miteinander kombinierbar, ohne den Gegenstand der Erfindung zu verlassen.The invention is not limited to the embodiments described above. Rather, other variants of the invention can be derived from this within the scope of the claims by a person skilled in the art without departing from the subject matter of the invention. In particular, all individual features described in connection with the embodiments and/or in the claims can also be combined with one another in other ways without departing from the subject matter of the invention.

BezugszeichenlisteList of reference symbols

22: Systemsystem
44: FlottenmanagementeinrichtungFleet management facility
66: Fahrzeugvehicle
88th: (erste) Servereinrichtung(first) server setup
1010: mobiles Endgerätmobile device
1212: (zweite) Servereinrichtung(second) server setup
1414: NutzerUsers
1616: InnenraumkameraInterior camera
1818: PassagierraumPassenger compartment
2020: AußenraumkameraOutdoor camera
2222: Türdoor
2424: InnenlautsprecherIndoor speakers
2626: AußenlautsprecherOutdoor speakers
2828: ExciterExciters
3030: FahrzeugaußenstrukturVehicle exterior structure
3232: NutzerschnittstelleUser interface
3434: AußenmikrofonExternal microphone
3636: SteuereinrichtungControl device
3838: Sende- und EmpfangseinheitTransmitting and receiving unit
4040: MittelMedium
4242: Mikrofonmicrophone
4444: Lautsprecherspeaker
4646: SteuereinrichtungControl device
4848: Sende- und EmpfangseinheitTransmitting and receiving unit
5050: HaltepositionHolding position
5252: BildschirmScreen
5454: Sitzplatz Seat
BB: BilddatenImage data
DATHERE: Daten für akustische AusgabeData for acoustic output
DBDB: Informationsdaten über die BuchungInformation about the booking
DFDF: Informationsdaten über das FahrzeugInformation data about the vehicle
DHDH: Informationsdaten über die HaltepositionInformation data about the holding position
DSDS: Informationsdaten über die SitzplatzbewegungInformation data on seat movement
EE: EingabedatenInput data
IDID: Identifikation Identification
II: Buchung des FahrzeugsBooking the vehicle
IIII: Ankunft des Fahrzeugs an der HaltepositionArrival of the vehicle at the stopping position
IIIIII: Authentifizierung des NutzersUser authentication
IVIV: akustische Ausgabe bezüglich des Fahrzeugsacoustic output regarding the vehicle
VV: Herstellen einer AudioverbindungEstablishing an audio connection
VIVI: akustische Ausgabe bezüglich der Sitzplatzbelegungacoustic output regarding seat occupancy
VIIVII: AusstiegExit

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely to provide the reader with better information. The list is not part of the German patent or utility model application. The DPMA accepts no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

KR 20190072291 A [0003]
KR 101861090 B1 [0004]

Claims

Method for operating a system (2) with a vehicle fleet that includes an autonomously driving vehicle (6) that has an external loudspeaker (26) and an external microphone (34) and a user interface (32) that can be operated from outside the vehicle, and with a fleet management device (4) that can be coupled to the vehicle (6) for data transmission, - wherein the vehicle (6) drives to a predetermined stopping position (50) in accordance with a booking, and - wherein an audio connection is established between the vehicle (6) and the fleet management device (4) for communication between a user (14) and a supervisor of the fleet management device (4) after the user interface (32) has been operated, wherein the external microphone (34) is used as the input device of the vehicle (6) and the external loudspeaker (26) is used as the output device of the vehicle (6) for the audio connection.

Procedure according to Claim 1 , characterized in that data (B) from an interior camera (16) of the vehicle (6) and/or data (B) from an exterior camera (20) of the vehicle (6) are transmitted to the fleet management device (4).

Procedure according to Claim 1 or 2 , characterized in that for booking, input data (E) are sent from a mobile terminal (10) to a server device of the system (2), and that the stopping position (50) and an identification (ID) of the vehicle (6) are determined using the server device (8).

Method according to one of the Claims 1 until 3 , characterized in that the user (14) and/or his mobile terminal (10) is authenticated by means of the vehicle (6).

Method according to one of the Claims 1 until 4 , characterized in that a seat occupancy in the vehicle (6) is detected, and that information about the seat occupancy is acoustically output to the user, in particular by an interior loudspeaker (24) of the vehicle (6) and/or by the mobile terminal (10).

Method according to one of the Claims 1 until 5 , characterized in that information about the position and/or the orientation of the vehicle (6) and/or its door is acoustically output by means of the external loudspeaker (26) and/or the mobile terminal (10).

Method according to one of the Claims 3 until 6 , characterized in that for an acoustic output of information from the mobile terminal (10) and/or from the first server device (8), data (D _B , D _H , D _S , D _F ) for this information are sent to a second server device (12) of the system (2) and based on this, data (D _A ), in particular audio data, are generated for the acoustic output for better intelligibility for the visually impaired.

Method according to one of the Claims 1 until 7 , characterized in that directions are given acoustically by means of the vehicle (6) and/or the mobile terminal (10).

System (2), in particular for carrying out the method according to one of the Claims 1 until 8th , comprising - a fleet management device (4), - a vehicle fleet with an autonomously driving vehicle (6), which has an external loudspeaker (26), an external microphone (34), as well as a user interface (32) that can be operated from outside the vehicle and means (40) that are set up so that after actuation of the user interface (32) an audio connection is established between the vehicle (6) and the fleet management device (4), wherein the external microphone (34) is used as an input device and the external loudspeaker (26) is used as an output device for the audio connection.

System (2) according to Claim 9 , characterized in that the external loudspeaker (26) of the vehicle (6) is formed by an exciter (28) and a vehicle external structure (30).