DE102021123234A1 - TELEOPERATOR WORKSTATION - Google Patents

TELEOPERATOR WORKSTATION Download PDF

Info

Publication number
DE102021123234A1
DE102021123234A1 DE102021123234.1A DE102021123234A DE102021123234A1 DE 102021123234 A1 DE102021123234 A1 DE 102021123234A1 DE 102021123234 A DE102021123234 A DE 102021123234A DE 102021123234 A1 DE102021123234 A1 DE 102021123234A1
Authority
DE
Germany
Prior art keywords
teleoperator
workstation
motor vehicle
display
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102021123234.1A
Other languages
German (de)
Inventor
Gerhard Graf
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE102021123234.1A priority Critical patent/DE102021123234A1/en
Publication of DE102021123234A1 publication Critical patent/DE102021123234A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0016—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Bereitgestellt wird ein Teleoperator-Arbeitsplatz für ein teleoperiertes Kraftfahrzeug, wobei das Kraftfahrzeug eine Frontkamera, eine Heckkamera, eine linke Seitenkamera und eine rechte Seitenkamera aufweist, und wobei das Kraftfahrzeug ausgestaltet ist, um jeweils von der Frontkamera, der Heckkamera, und der linken und der rechten Seitenkamera aufgenommene Bilder an den Teleoperator-Arbeitsplatz zu senden. Der Teleoperator-Arbeitsplatz ist ausgestaltet, um eine Anzeige der von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit einer Ausrichtung eines Kopfes eines Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators zu verändern.

Figure DE102021123234A1_0000
A teleoperator workstation for a teleoperated motor vehicle is provided, the motor vehicle having a front camera, a rear camera, a left side camera and a right side camera, and the motor vehicle being designed to be controlled by the front camera, the rear camera, and the left and the to send pictures taken by the right side camera to the teleoperator workstation. The teleoperator workstation is designed to change a display of the images received from the motor vehicle as a function of an orientation of a teleoperator's head and/or as a function of a viewing direction of the teleoperator.
Figure DE102021123234A1_0000

Description

Die vorliegende Erfindung betrifft einen Teleoperator-Arbeitsplatz für ein teleoperiertes Kraftfahrzeug. Denkbar ist auch, dass ein System aufweisend den Teleoperator-Arbeitsplatz und das teleoperierte Kraftfahrzeug bereitgestellt wird.The present invention relates to a teleoperator workstation for a teleoperated motor vehicle. It is also conceivable that a system having the teleoperator workplace and the teleoperated motor vehicle is provided.

Ferngesteuerte bzw. teleoperierte Kraftfahrzeuge sind auf das Verständnis einer Fahrsituation eines Teleoperators bzw. Bedieners angewiesen während dieser mit dem System interagiert. Insbesondere soll der Bediener ein hohes Maß an Situationsbewusstsein aufrechterhalten, d.h. das Bewusstsein, das der Bediener über die Veränderungen der Umgebung hat, unter Berücksichtigung der aktuellen und zukünftigen Aktionen des teleoperierten Kraftfahrzeugs.Remote-controlled or teleoperated motor vehicles depend on the understanding of a driving situation by a teleoperator or operator while he is interacting with the system. In particular, the operator should maintain a high level of situational awareness, i.e. the awareness that the operator has of the changes in the environment, taking into account the current and future actions of the teleoperated motor vehicle.

Dazu werden basierend auf den Bedürfnissen des Bedieners geeignete Benutzerschnittstellen entworfen, um das Verständnis und den Umgang mit der entfernten Fahrsituation für den Bediener zu erleichtern.For this purpose, suitable user interfaces are designed based on the needs of the operator in order to make it easier for the operator to understand and deal with the remote driving situation.

In der US 10606259 B2 ist eine schematische perspektivische Ansicht einer gattungsgemäßen Teleoperations-Systemschnittstelle bzw. eines gattungsgemäßen Teleoperator-Arbeitsplatz gezeigt. Die Teleoperations-Systemschnittstelle umfasst drei Anzeigeeinheiten, die so eingerichtet sind, dass sie einem Teleoperator Informationen bereitstellen, die sich auf einen Betrieb eines Fahrzeugs oder mehrerer Fahrzeuge einer Flotte beziehen. Die Anzeigeeinheiten sind so eingerichtet, dass sie Informationen in Bezug auf von den Fahrzeugen empfangenen Kommunikationssignalen, Informationen in Bezug auf ein Straßennetz und/oder zusätzliche Informationen anzeigen, um eine Steuerung der Fahrzeuge durch den Teleoperator zu ermöglichen und zu erleichtern. Die Anzeigeeinheiten sind so eingerichtet, dass sie unterschiedliche Informationen in Bezug auf eines oder mehrere der Fahrzeuge anzeigen. Solche Informationen können als Animationen oder bildliche Darstellungen, Einfärbungen von Sensordaten, Abstraktionen von Sensordaten (z. B. Bounding Boxes) oder Ähnliches dargestellt werden, so dass die Informationen für den Teleoperator mit geringem Aufwand erfassbar sind.In the US10606259B2 1 is a schematic perspective view of a generic teleoperation system interface or teleoperator work station. The teleoperations system interface comprises three display units that are set up to provide a teleoperator with information relating to operation of one or more vehicles in a fleet. The display units are configured to display information related to communication signals received from the vehicles, information related to a road network and/or additional information to enable and facilitate control of the vehicles by the teleoperator. The display units are configured to display different information related to one or more of the vehicles. Such information can be presented as animations or pictorial representations, coloring of sensor data, abstractions of sensor data (e.g. bounding boxes) or the like, so that the information can be recorded by the teleoperator with little effort.

Darüber hinaus umfasst die in der der US 10606259 B2 gezeigte Teleoperations-Systemschnittstelle ein Teleoperator-Eingabegerät, das so eingerichtet ist, dass der Teleoperator einem der Fahrzeuge oder mehreren der Fahrzeuge Informationen zur Verfügung stellen kann, z.B. in Form von Teleoperations-Signalen, die das Fahrzeug bzw. die Fahrzeuge führen. Die Teleoperator-Eingabevorrichtung kann einen oder mehrere berührungsempfindliche Bildschirme, einen Stift, eine Maus, einen Drehknopf, ein Tastenfeld und/oder ein Gesteneingabesystem umfassen, das so eingerichtet ist, dass es vom Teleoperator ausgeführte Gesten in Eingabebefehle für die Teleoperator-Schnittstelle übersetzt. Die Eingabevorrichtung kann einen geteilten Bildschirm umfassen, der verschiedene berührungsempfindliche Bereiche aufweist, die der Teleoperator verwenden kann, um verschiedene Arten von Informationen für eines der Fahrzeuge bereitzustellen. Beispielsweise können die verschiedenen Bereiche des geteilten Bildschirms dem Teleoperator verschiedene Arten von Informationen zur Verfügung stellen und es dem Teleoperator erleichtern, dem Fahrzeug Anweisungen zu geben, mit dem Fahrzeug zusammenzuarbeiten und/oder Informationen und/oder vorgeschlagene Aktionen zu bestätigen, die vom Fahrzeug ausgeführt werden sollen. Zum Beispiel kann ein Teil des Eingabegeräts ein Menü verschiedener Fahrzeuge der Flotte bereitstellen, um dem Teleoperator die Auswahl eines Fahrzeugs zu erleichtern, für das er Anweisungen geben möchte. Andere Teile des Eingabegeräts können interaktive Anzeigen und/oder Optionen zur Bereitstellung von Anweisungen für ein ausgewähltes Fahrzeug enthalten.In addition, includes the in the US10606259B2 shown teleoperation system interface a teleoperator input device that is set up so that the teleoperator can provide information to one of the vehicles or more of the vehicles, for example in the form of teleoperation signals, which lead the vehicle or vehicles. The teleoperator input device may include one or more touch-sensitive screens, a stylus, a mouse, a rotary knob, a keypad, and/or a gesture input system configured to translate gestures performed by the teleoperator into input commands for the teleoperator interface. The input device may include a split screen having different touch-sensitive areas that the teleoperator can use to provide different types of information to one of the vehicles. For example, the different areas of the split screen may provide different types of information to the teleoperator and make it easier for the teleoperator to provide instructions to the vehicle, to cooperate with the vehicle, and/or to confirm information and/or suggested actions taken by the vehicle should. For example, a portion of the input device may provide a menu of different vehicles in the fleet to assist the teleoperator in selecting a vehicle for which to instruct. Other portions of the input device may include interactive displays and/or options to provide instructions for a selected vehicle.

Vor dem Hintergrund dieses Standes der Technik besteht die Aufgabe der vorliegenden Erfindung darin, eine gattungsgemäße Vorrichtung anzugeben, welche funktionell so weiterentwickelt ist, dass sie einem Teleoperator eines teleoperierten Kraftfahrzeugs eine ergonomischere Bedienung ermöglicht.Against the background of this prior art, the object of the present invention is to specify a generic device which is functionally further developed in such a way that it enables a teleoperator of a teleoperated motor vehicle to operate it more ergonomically.

Gelöst wird die Aufgabe durch die Merkmale des unabhängigen Anspruchs. Die Unteransprüche haben bevorzugte Weiterbildungen der Erfindung zum Inhalt.The problem is solved by the features of the independent claim. The dependent claims relate to preferred developments of the invention.

Danach wird die Aufgabe durch einen Teleoperator-Arbeitsplatz für ein teleoperiertes Kraftfahrzeug gelöst, wobei das Kraftfahrzeug eine Frontkamera, eine Heckkamera, eine linke Seitenkamera, die optional auf eine hintere linke Seite des Kraftahrzeugs gerichtet ist, und eine rechte Seitenkamera, die optional auf eine hintere rechte Seite des Kraftahrzeugs gerichtet ist, aufweist.The object is then achieved by a teleoperator workstation for a teleoperated motor vehicle, the motor vehicle having a front camera, a rear camera, a left side camera, which is optionally directed to a rear left side of the motor vehicle, and a right side camera, which is optionally directed to a rear right side of the motor vehicle is directed.

Die Anzahl der Kameras ist dabei nicht auf eine der jeweiligen Kameras limitiert, vielmehr ist „eine Kamera“ hier als „zumindest eine Kamera“ zu verstehen und es ist beispielsweise denkbar, dass drei Frontkameras bereitgestellt werden.The number of cameras is not limited to one of the respective cameras, rather “one camera” is to be understood here as “at least one camera” and it is conceivable, for example, that three front cameras are provided.

Die Frontkamera kann auf einen Bereich (in Hauptfahrrichtung) vor dem Kraftfahrzeug gerichtet sein, und insbesondere einen Bereich vor dem Kraftfahrzeug aufnehmen, der bei herkömmlichen Kraftfahrzeugen für einen Fahrer des Kraftfahrzeugs durch eine Frontscheibe und/oder eine Seitenscheibe wahrnehmbar ist.The front camera can be aimed at an area (in the main direction of travel) in front of the motor vehicle and, in particular, record an area in front of the motor vehicle which, in conventional motor vehicles, is for a driver of the motor vehicle can be perceived through a windscreen and/or a side window.

Die Heckkamera kann auf einen Bereich hinter dem Kraftfahrzeug gerichtet sein, und insbesondere einen Bereich hinter dem Kraftfahrzeug aufnehmen, der bei herkömmlichen Kraftfahrzeugen von einem Rückspiegel erfasst wird. Die Heckkamera kann auch Rückspiegelkamera genannt werden.The rear camera can be aimed at an area behind the motor vehicle and, in particular, record an area behind the motor vehicle that is captured by a rear-view mirror in conventional motor vehicles. The rear view camera can also be called rearview mirror camera.

Die Seitenkameras können jeweils auf einen Bereich seitlich, insbesondere hinter und neben, dem Kraftfahrzeug gerichtet sein, und insbesondere einen Bereich hinter und neben dem Kraftfahrzeug aufnehmen, der bei herkömmlichen Kraftfahrzeugen von einem Seitenspiegel erfasst wird. Die Seitenkameras können auch Seitenspiegelkameras genannt werden.The side cameras can each be directed to an area on the side, in particular behind and next to, the motor vehicle, and in particular record an area behind and next to the motor vehicle, which is captured by a side mirror in conventional motor vehicles. The side cameras can also be called side mirror cameras.

Das Kraftfahrzeug ist ausgestaltet, um jeweils von der Frontkamera, der Heckkamera, und der linken und der rechten Seitenkamera aufgenommene Bilder an den Teleoperator-Arbeitsplatz zu senden.The motor vehicle is designed to send images taken by the front camera, the rear camera, and the left and right side cameras to the teleoperator workstation.

Der Teleoperator-Arbeitsplatz zeichnet sich dadurch aus, dass er ausgestaltet ist, um die von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit einer Ausrichtung eines Kopfes eines Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators unterschiedlich bzw. veränderbar anzuzeigen.The teleoperator workstation is characterized in that it is designed to display the images received from the motor vehicle differently or modifiably depending on the orientation of a teleoperator's head and/or depending on the viewing direction of the teleoperator.

Der Teleoperator kann auch als Fahrer bezeichnet werden, wobei der Teleoperator-Arbeitsplatz ein Eingabesystem aufweisen kann, sodass der Teleoperator über das Eingabesystem Steuerbefehle an das Kraftfahrzeug senden kann. Die Steuerbefehle können eine Quer- und/oder Längsführung des Kraftfahrzeugs beeinflussen bzw. diese steuern.The teleoperator can also be referred to as the driver, and the teleoperator workstation can have an input system so that the teleoperator can send control commands to the motor vehicle via the input system. The control commands can influence or control a lateral and/or longitudinal guidance of the motor vehicle.

Denkbar ist, dass es sich bei dem Kraftfahrzeug um ein automatisiertes Kraftfahrzeug handelt, das ausgestaltet ist, zumindest teilweise und/oder zeitweise die Quer- und/oder Längsführung des Kraftfahrzeugs zu übernehmen.It is conceivable that the motor vehicle is an automated motor vehicle that is designed to take over the lateral and/or longitudinal guidance of the motor vehicle at least partially and/or temporarily.

Der Teleoperator-Arbeitsplatz kann ein Bildschirmsystem aufweisen, das in einem Betrieb des Teleoperator-Arbeitsplatzes in der Blickrichtung des Teleoperators und vor dem Teleoperator angeordnet ist.The teleoperator workstation can have a screen system, which is arranged in the viewing direction of the teleoperator and in front of the teleoperator when the teleoperator workstation is in operation.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der linken Seitenkamera ausschließlich dann anzuzeigen, wenn eine Kopfbewegung des Teleoperators von dem Teleoperator aus gesehen nach links erfolgt.The teleoperator workstation can be designed to display the images from the left-hand side camera only when the teleoperator's head moves to the left, as seen from the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der rechten Seitenkamera ausschließlich dann anzuzeigen, wenn eine Kopfbewegung des Teleoperators von dem Teleoperator aus gesehen nach rechts erfolgt.The teleoperator workstation can be designed to display the images from the right-hand side camera only when the teleoperator's head moves to the right, as seen from the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der linken Seitenkamera ausschließlich dann anzuzeigen, wenn die Blickrichtung des Teleoperators in einen Bereich vorbestimmter Größe an einem von dem Teleoperator aus gesehenen linken (äußeren) Rand des Bildschirmsystems zeigt.The teleoperator workstation can be designed to display the images from the left side camera only when the teleoperator's line of sight points to an area of predetermined size on a left (outer) edge of the screen system seen from the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der rechten Seitenkamera ausschließlich dann anzuzeigen, wenn die Blickrichtung des Teleoperators in einen Bereich vorbestimmter Größe an einem von dem Teleoperator aus gesehenen rechten (äußeren) Rand des Bildschirmsystems zeigt. The teleoperator workstation can be designed to display the images from the right-hand side camera only when the teleoperator's viewing direction points to an area of predetermined size on a right (outer) edge of the screen system seen from the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um eine Anzeige der von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit der Ausrichtung des Kopfes des Teleoperators und/oder in Abhängigkeit der Blickrichtung des Teleoperators kontinuierlich zu verändern.The teleoperator workstation can be designed to continuously change a display of the images received from the motor vehicle depending on the orientation of the teleoperator's head and/or depending on the viewing direction of the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um eine Anzeige der von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit der Ausrichtung des Kopfes des Teleoperators und/oder in Abhängigkeit der Blickrichtung des Teleoperators diskret zu verändern.The teleoperator workstation can be designed to discretely change a display of the images received from the motor vehicle depending on the orientation of the teleoperator's head and/or depending on the viewing direction of the teleoperator.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der rechten und/oder linken Seitenkamera ausschließlich als Bild-im-Bild anzuzeigen.The teleoperator workstation can be designed to display the images from the right and/or left side camera exclusively as a picture-in-picture.

Der Teleoperator-Arbeitsplatz kann ausgestaltet sein, um die Bilder der Heckkamera ausschließlich als Bild-im-Bild anzuzeigen.The teleoperator workplace can be designed to display the images from the rear camera exclusively as a picture-in-picture.

Das oben Beschriebene lässt sich mit anderen Worten und in einer möglichen konkreteren Form wie folgt zusammenfassen.The above can be summarized in other words and in a possibly more concrete form as follows.

Die Teleoperation, d.h. eine Steuerung eines Kraftfahrzeugs, beispielsweise eines Automobils, aus der Ferne, umfasst mehr als das bloße Manövrieren eines Fahrzeugs, und erfordert eine Interaktion des Teleoperators mit der entfernten Umgebung.Teleoperation, i.e. remote control of a motor vehicle, e.g., an automobile, involves more than mere maneuvering of a vehicle, and requires interaction of the teleoperator with the remote environment.

Der Teleoperator hat dabei regelmäßig in dynamischen Situationen mit sich relativ schnell verändernden Akteuren, wie beispielsweise anderen Verkehrsteilnehmern, und sich verändernden zu lösenden Problemen zu agieren.The teleoperator has to act regularly in dynamic situations with actors that change relatively quickly, such as other road users, and changing problems to be solved.

Auf der Grundlage von Fahrpraxis und Sensordaten, die der Teleoperator z.B. von am Kraftfahrzeug installierten Kameras erhält, trifft der Teleoperator seine Entscheidungen betreffend das Steuern des Kraftfahrzeugs.The teleoperator makes his decisions regarding the control of the motor vehicle on the basis of driving practice and sensor data, which the teleoperator receives, for example, from cameras installed on the motor vehicle.

In dieser Hinsicht können zusätzliche Kameraperspektiven das Situationsbewusstsein des Teleoperators verbessern. Darüber hinaus können auf Bedarf abrufbare Kameraperspektiven zusätzliche Vorteile bieten, wie z.B. die Vermeidung von Aufregung des Teleoperators, von kognitiver Überlastung des Teleoperators oder die Verbesserung des Bewusstseins des Teleoperators für die Nähe zu anderen Akteuren, welche das Fahrverhalten des Teleoperators beeinflussen können.In this regard, additional camera perspectives can improve the teleoperator's situational awareness. Furthermore, on-demand camera perspectives may provide additional benefits, such as avoiding teleoperator excitement, teleoperator cognitive overload, or enhancing the teleoperator's awareness of proximity to other actors who may influence the teleoperator's driving behavior.

Daher wird in einer konkreten Ausgestaltung vorgeschlagen, neben drei Front- und einer Rückspiegelkamera zwei zusätzliche Seitenkameras am teleoperierten Kraftfahrzeug vorzusehen, die auf die hintere linke bzw. rechte Seite des Kraftfahrzeugs gerichtet sind.It is therefore proposed in a specific embodiment to provide two additional side cameras on the teleoperated motor vehicle, in addition to three front and one rear-view mirror cameras, which are directed to the rear left and right side of the motor vehicle.

Die zusätzlichen Kameras können einen 360°-Rundumblick ermöglichen, was die Aufmerksamkeit des Teleoperators erhöht.The additional cameras can provide a 360° all-round view, which increases the teleoperator's attention.

Die Seitenkameras sind für den Teleoperator jedoch nicht direkt sichtbar, können aber bei Bedarf aufgerufen werden, indem der Teleoperator seinen Kopf dreht und/oder seinen Blick auf die linke bzw. rechte Seite des Bildschirms des Teleoperatorarbeitsplatzes richtet. Die Kopfbewegung soll das natürliche Fahrverhalten nachahmen, wenn der Fahrer im Fahrzeug sitzt und in die Seitenspiegel blickt.However, the side cameras are not directly visible to the teleoperator, but can be called up if required by the teleoperator turning his head and/or directing his gaze to the left or right side of the teleoperator workstation screen. The head movement is intended to mimic natural driving behavior when the driver sits in the vehicle and looks into the side mirrors.

Dafür können grundsätzlich zwei verschiedene Steuervorrichtungen bzw. Steuerungsschnittstellen vorgesehen werden, um die zusätzlichen Seitenkameras anzusteuern, die sich auf einen diskreten und einen kontinuierlichen Modus beziehen.In principle, two different control devices or control interfaces can be provided for this in order to control the additional side cameras, which relate to a discrete and a continuous mode.

Im kontinuierlichen Steuermodus kann die Anzeigesteuerung basierend auf einem Gierkopfwinkel erfolgen, d.h. basierend auf einem Abstand einer aktuellen Kopfposition des Teleoperators und einer Bildschirmmitte oder Anzeigemitte des Bildschirmsystems des Teleoperatorarbeitsplatzes. Befindet sich der Blick des Teleoperators nicht in der Bildschirmmitte, bewegt sich die Anzeige bzw. Kameraansicht in die Richtung, in die der Teleoperator blickt. Wenn der Teleoperator seinen Kopf von links nach rechts dreht, bewegt sich die entfernte Kameraansicht (hier das Bild der rechten Seitenkamera) kontinuierlich in den Anzeigebereich des Bildschirmsystems und die nahe Kameraansicht (hier das Bild der linken Seitenkamera) bewegt sich aus dem Anzeigebereich des Bildschirmsystems (und umgekehrt).In the continuous control mode, the display control can be based on a yaw head angle, i.e. based on a distance of a current head position of the teleoperator and a screen center or display center of the screen system of the teleoperator workstation. If the teleoperator's gaze is not centered on the screen, the display or camera view moves in the direction the teleoperator is facing. When the teleoperator rotates his head from left to right, the distant camera view (here, the right side camera image) moves continuously into the display area of the display system and the near camera view (here, the left side camera image) moves out of the display area of the display system ( and vice versa).

Im diskreten Steuermodus kann der Anzeigebereich in aktive Bereiche unterteilt werden, die es dem Teleoperator ermöglichen, Steuerbefehle zu senden. Bewegt der Teleoperator beispielsweise den Blick über die obere linke (oder rechte) Seite des Bildschirms, so erscheint die entsprechende Seitenkamera. Das Bild der Seitenkamera wird über das Bild der Frontkamera gelegt, zeigt also gleichzeitig die Front- und die Seitenkamera (sog. Bild-im-Bild). Dieses Konzept ist als Bild-im-Bild bekannt und hat sich in der Teleoperation als leistungsfähig erwiesen.In discrete control mode, the display area can be divided into active areas that allow the teleoperator to send control commands. For example, if the teleoperator moves their gaze across the upper left (or right) side of the screen, the corresponding side camera will appear. The image from the side camera is superimposed on the image from the front camera, i.e. it shows the front and side cameras at the same time (so-called picture-in-picture). This concept is known as picture-in-picture and has proven powerful in teleoperation.

Sowohl im diskreten als auch im kontinuierlichen Steuermodus ist denkbar, dass dem Bediener ein Name bzw. eine Bezeichnung der Kamera angezeigt wird, insbesondere umfassend deren räumliche Beziehung zum Kraftfahrzeug, z. B. hinten links. Der Name bzw. die Bezeichnung der Kamera kann z.B. in der unteren Mitte, jedes oder des Videobildes, auf das der Teleoperator aktuell blickt, angezeigt werden.Both in the discrete and in the continuous control mode, it is conceivable for the operator to be shown a name or designation of the camera, in particular including its spatial relationship to the motor vehicle, e.g. B. rear left. The name or designation of the camera can be displayed, for example, in the bottom center of each or the video image that the teleoperator is currently looking at.

Nachfolgend wird eine Ausführungsform mit Bezug zu 1 bis 3 beschrieben.

  • 1 zeigt schematisch einen zu einem teleoperierten Kraftfahrzeug verbundenen Teleoperator-Arbeitsplatz,
  • 2 zeigt schematisch den Teleoperator-Arbeitsplatz aus 1, der ausgestaltet ist, um eine Anzeige von von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit einer Ausrichtung eines Kopfes eines Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators kontinuierlich zu verändern, und
  • 3 zeigt schematisch den Teleoperator-Arbeitsplatz aus 1, der ausgestaltet ist, um eine Anzeige von von dem Kraftfahrzeug empfangenen Bilder in Abhängigkeit einer Ausrichtung eines Kopfes eines Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators diskret zu verändern,
The following is an embodiment related to 1 until 3 described.
  • 1 schematically shows a teleoperator workplace connected to a teleoperated motor vehicle,
  • 2 shows the teleoperator workplace schematically 1 , which is designed to continuously change a display of images received from the motor vehicle depending on an orientation of a head of a teleoperator and/or depending on a viewing direction of the teleoperator, and
  • 3 shows the teleoperator workplace schematically 1 , which is designed to discretely change a display of images received from the motor vehicle as a function of an orientation of a head of a teleoperator and/or as a function of a viewing direction of the teleoperator,

In der nachfolgenden Beschreibung werden dieselben Bezugszeichen für dieselben Gegenstände verwendet.In the following description, the same reference numbers are used for the same items.

Wie 1 zu entnehmen ist, ist ein bidirektionaler Daten bzw. Informationsaustausch zwischen dem automatisierten, teleoperierten Kraftfahrzeug 1 und dem Teleoperator-Arbeitsplatz 2, insbesondere von Steuersignalen vom Teleoperator-Arbeitsplatz 2 zum teleoperierten Kraftfahrzeug 1 und von Sensordaten vom Kraftfahrzeug 1 zum Teleoperator-Arbeitsplatz 2, vorgesehen.How 1 can be seen, a bidirectional exchange of data or information between the automated, teleoperated motor vehicle 1 and the teleoperator workstation 2, in particular of control signals from the teleoperator workstation 2 to the teleoperated motor vehicle 1 and of sensor data from the motor vehicle 1 to the teleoperator workstation 2, is provided .

Dazu ist der Teleoperator-Arbeitsplatz 2 mit dem Kraftfahrzeug 1, insbesondere drahtlos, verbunden. Für den Daten- bzw. Informationsaustausch können dem Fachmann bekannte Kommunikationsstandards verwendet werden.For this purpose, the teleoperator workstation 2 is connected to the motor vehicle 1, in particular wirelessly. For the exchange of data or information communication standards known to those skilled in the art can be used.

Das Kraftfahrzeug 1 ist so automatisiert, dass ein (nicht dargestellter) Bediener bzw. Teleoperator mittels der vom Teleoperator-Arbeitsplatz 2 zum teleoperierten Kraftfahrzeug 1 übertragenen Informationen, insbesondere der Steuersignale, eine Quer- und/oder Längsführung des Kraftfahrzeugs 1 direkt und/oder indirekt steuern kann.The motor vehicle 1 is automated in such a way that an operator or teleoperator (not shown) can use the information transmitted from the teleoperator workstation 2 to the teleoperated motor vehicle 1, in particular the control signals, to direct and/or indirectly guide the motor vehicle 1 laterally and/or longitudinally can control.

Das Kraftfahrzeug 1 weist drei (nicht dargestellte) Frontkameras, eine Heckkamera, eine linke Seitenkamera, die auf eine hintere linke Seite des Kraftahrzeugs 1 gerichtet ist, und eine rechte Seitenkamera, die auf eine hintere rechte Seite des Kraftahrzeugs 1 gerichtet ist, auf.The motor vehicle 1 has three front cameras (not shown), a rear camera, a left side camera directed to a rear left side of the motor vehicle 1, and a right side camera directed to a rear right side of the motor vehicle 1.

Das Kraftfahrzeug 1 ist ausgestaltet, um die jeweils von der Frontkamera, der Heckkamera, und der linken und der rechten Seitenkamera aufgenommenen Bilder 21 - 26 an den Teleoperator-Arbeitsplatz 2 zu senden.The motor vehicle 1 is designed to send the images 21 - 26 recorded by the front camera, the rear camera, and the left and right side cameras to the teleoperator workstation 2 .

Der Teleoperator-Arbeitsplatz 2 ist ausgestaltet, um die von dem Kraftfahrzeug 1 empfangenen Bilder 21 - 26, insbesondere Videos, anzuzeigen. Dazu weist der Teleoperator-Arbeitsplatz 2 ein Bildschirmsystem 5 mit drei Anzeigebereichen 51, 52, 53 auf, das in einem Betrieb des Teleoperator-Arbeitsplatzes 2 in der Blickrichtung des Teleoperators und vor dem Teleoperator angeordnet istThe teleoperator workstation 2 is designed to display the images 21-26 received from the motor vehicle 1, in particular videos. For this purpose, the teleoperator workstation 2 has a screen system 5 with three display areas 51, 52, 53, which is arranged in the viewing direction of the teleoperator and in front of the teleoperator when the teleoperator workstation 2 is in operation

Die Anzeige der von dem Kraftfahrzeug 1 empfangenen Bilder 21 - 26 wird von dem Teleoperator-Arbeitsplatz 2 in Abhängigkeit einer Ausrichtung eines Kopfes 3 des Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators verändert.The display of the images 21 - 26 received from the motor vehicle 1 is changed by the teleoperator workstation 2 depending on the orientation of a head 3 of the teleoperator and/or depending on the viewing direction of the teleoperator.

Sowohl die Ausrichtung des Kopfes als auch die Blickrichtung kann beispielsweise mittels einer am Teleoperator-Arbeitsplatz 2 verbauten auf den Teleoperator gerichteten (nicht dargestellten) Kamera bestimmt werden.Both the alignment of the head and the viewing direction can be determined, for example, by means of a camera (not shown) installed at the teleoperator workstation 2 and directed at the teleoperator.

Dies kann grundsätzlich in zwei verschiedenen Anzeigemodi erfolgen, d.h. einem kontinuierlichen Anzeigemodus, der in 2 dargestellt ist, und in einem diskreten bzw. diskontinuierlichen Anzeigemodus, der in 3 dargestellt ist.Basically, this can be done in two different display modes, i.e. a continuous display mode, which is in 2 is shown, and in a discrete or discontinuous display mode shown in 3 is shown.

In 2 ist das Bildschirmsystem 5 mit seinen drei Anzeigebereichen 51, 52, 53 aus Sicht des Teleoperators in zwei Zuständen dargestellt, die auf gleicher Höhe nebeneinander angeordnet sind.In 2 the screen system 5 with its three display areas 51, 52, 53 is shown in two states from the perspective of the teleoperator, which are arranged next to one another at the same height.

In dem oberen der zwei Zustände ist der Kopf 3 des Teleoperators gerade nach vorne gerichtet, d.h. ein Winkel zwischen einer Vertikalen und einer Nase des Teleoperators beträgt im Wesentlichen null. In dem unteren der zwei Zustände ist der Kopf 3 des Teleoperators nach links gedreht, d.h. der Winkel zwischen der Vertikalen und der Nase des Teleoperators ist größer null und entspricht einer maximal vom Bildschirmsystem 5 abbildbaren Auslenkung.In the upper of the two states, the teleoperator's head 3 is pointed straight forward, i.e. an angle between a vertical and a nose of the teleoperator is substantially zero. In the lower of the two states, the head 3 of the teleoperator is turned to the left, i.e. the angle between the vertical and the nose of the teleoperator is greater than zero and corresponds to a maximum deflection that can be displayed by the screen system 5 .

In dem oberen Zustand in 2 werden in den drei Anzeigebereichen 51, 52, 53 die von den drei Frontkameras aufgenommenen Bilder 21, 22, 23 von links nach rechts der tatsächlichen Anordnung der Kameras am Kraftfahrzeug 1 entsprechend dargestellt. Das von der Heckkamera aufgenommene Bild 24 wird als Bild-im-Bild in dem mittleren Anzeigebereich 52 dargestellt, auf den der Blick des Teleoperators aktuell gerichtet ist. Die von den Seitenkameras aufgenommenen Bilder 25 (linke Seitenkamera) und 26 (rechte Seitenkamera) werden in diesem Zustand von dem Bildschirmsystem 5 nicht angezeigt.In the above state in 2 the images 21, 22, 23 recorded by the three front cameras are displayed in the three display areas 51, 52, 53 from left to right according to the actual arrangement of the cameras on the motor vehicle 1. The image 24 recorded by the rear camera is displayed as a picture-in-picture in the middle display area 52, on which the teleoperator is currently looking. The images 25 (left side camera) and 26 (right side camera) recorded by the side cameras are not displayed by the screen system 5 in this state.

Nun erfolgt eine Drehung des Kopfes 3 des Teleoperators aus Sicht des Teleoperators um eine Drehrichtung 4 nach links, und die Anzeige verändert sich, wie dies durch die Pfeile in dem oberen Zustand in 2 dargestellt ist, sodass die Anzeige gem. dem unteren in 2 dargestellten Zustand resultiert.The teleoperator's head 3 is now rotated to the left by a direction of rotation 4 from the teleoperator's point of view, and the display changes, as indicated by the arrows in the upper state in FIG 2 is shown, so that the display according to the lower in 2 shown state results.

In dem unteren Zustand in 2 werden in den drei Anzeigebereichen 51, 52, 53 das von der linken Seitenkamera aufgenommene Bild 25 und nur noch von zwei der drei (d.h. der mittleren und rechten) Frontkameras aufgenommene Bilder 21, 22 von links nach rechts der tatsächlichen Anordnung der Kameras am Kraftfahrzeug 1 entsprechend dargestellt. Das von der Heckkamera aufgenommene Bild 24 wird als Bild-im-Bild in dem rechten Anzeigebereich 53 dargestellt, auf den der Blick des Teleoperators aktuell nicht gerichtet ist, sodass dieses analog zu einem feststehenden Rückspiegel raumfest im Bild 22 der mittleren Frontkamera verbleibt. Das von der rechten Frontkamera aufgenommenen Bild 23 und das von der rechten Seitenkamera aufgenommene Bild 26 werden in diesem Zustand von dem Bildschirmsystem 5 nicht angezeigt.In the lower state in 2 In the three display areas 51, 52, 53, the image 25 recorded by the left side camera and only two of the three (i.e. the middle and right) front cameras recorded images 21, 22 from left to right of the actual arrangement of the cameras on the motor vehicle 1 shown accordingly. The image 24 recorded by the rear camera is displayed as a picture-in-picture in the right-hand display area 53, which the teleoperator is currently not looking at, so that it remains spatially fixed in the image 22 of the middle front camera, analogous to a fixed rear-view mirror. The image 23 recorded by the right front camera and the image 26 recorded by the right side camera are not displayed by the screen system 5 in this state.

Diese Beschreibung gilt analog für eine Drehung des Kopfes 3 nach rechts, wobei dann in den drei Anzeigebereichen 51, 52, 53 das von der rechten Seitenkamera aufgenommene Bild 26 und nur noch von zwei der drei (d.h. der mittleren und linken) Frontkameras aufgenommene Bilder 22, 23 von links nach rechts der tatsächlichen Anordnung der Kameras am Kraftfahrzeug 1 entsprechend dargestellt werden würden.This description applies analogously to a rotation of the head 3 to the right, in which case the image 26 recorded by the right-hand side camera and only two of the three (i.e. the middle and left) front cameras recorded images 22 , 23 would be displayed from left to right according to the actual arrangement of the cameras on the motor vehicle 1 .

In 3 ist das Bildschirmsystem 5 ebenfalls mit seinen drei Anzeigebereichen 51, 52, 53 aus Sicht des Teleoperators in zwei Zuständen dargestellt, die auf gleicher Höhe nebeneinander angeordnet sind.In 3 the screen system 5 is also shown with its three display areas 51, 52, 53 in two states from the perspective of the teleoperator which are arranged next to each other at the same height.

In dem oberen der zwei Zustände ist der Kopf 3 des Teleoperators gerade nach vorne gerichtet, d.h. der Winkel zwischen einer Vertikalen und einer Nase des Teleoperators beträgt im Wesentlichen null. In dem unteren der zwei Zustände ist der Kopf 3 des Teleoperators nach links gedreht, d.h. der Winkel zwischen der Vertikalen und der Nase des Teleoperators ist größer null und entspricht der maximal vom Bildschirmsystem 5 abbildbaren Auslenkung.In the upper of the two states, the teleoperator's head 3 is pointed straight forward, i.e. the angle between a vertical and a nose of the teleoperator is substantially zero. In the lower of the two states, the head 3 of the teleoperator is turned to the left, i.e. the angle between the vertical and the nose of the teleoperator is greater than zero and corresponds to the maximum deflection that can be displayed by the screen system 5.

In dem oberen Zustand in 3 werden in den drei Anzeigebereichen 51, 52, 53 die von den drei Frontkameras aufgenommenen Bilder 21, 22, 23 von links nach rechts der tatsächlichen Anordnung der Kameras am Kraftfahrzeug 1 entsprechend dargestellt. Das von der Heckkamera aufgenommene Bild 24 wird als Bild-im-Bild in dem mittleren Anzeigebereich 52 dargestellt, auf den der Blick des Teleoperators aktuell gerichtet ist. Die von den Seitenkameras aufgenommenen Bilder 25 (linke Seitenkamera) und 26 (rechte Seitenkamera) werden in diesem Zustand von dem Bildschirmsystem 5 nicht angezeigt. Dies entspricht der Anzeige des in 2 dargestellten kontinuierlichen Anzeigemodus.In the above state in 3 the images 21, 22, 23 recorded by the three front cameras are displayed in the three display areas 51, 52, 53 from left to right according to the actual arrangement of the cameras on the motor vehicle 1. The image 24 recorded by the rear camera is displayed as a picture-in-picture in the middle display area 52, on which the teleoperator is currently looking. The images 25 (left side camera) and 26 (right side camera) recorded by the side cameras are not displayed by the screen system 5 in this state. This corresponds to the display of the in 2 illustrated continuous display mode.

Nun erfolgt eine Drehung des Kopfes 3 des Teleoperators aus Sicht des Teleoperators um eine Drehrichtung 4 nach links, und die Anzeige verändert sich, wie dies durch den Pfeil in dem oberen Zustand in 3 dargestellt ist, sodass die Anzeige gem. dem unteren in 3 dargestellten Zustand resultiert.The teleoperator's head 3 is now rotated to the left by a direction of rotation 4 from the teleoperator's point of view, and the display changes, as indicated by the arrow in the upper state in FIG 3 is shown, so that the display according to the lower in 3 shown state results.

In dem unteren Zustand in 3 werden in den drei Anzeigebereichen 51, 52, 53 weiterhin die von den drei Frontkameras aufgenommenen Bilder 21, 22, 23 von links nach rechts der tatsächlichen Anordnung der Kameras am Kraftfahrzeug 1 entsprechend dargestellt. Das von der Heckkamera aufgenommene Bild 24 wird weiterhin als Bild-im-Bild in dem mittleren Anzeigebereich 52 dargestellt, auf den der Blick des Teleoperators aber aktuell nicht mehr gerichtet ist. Das von der linken Seitenkamera aufgenommene Bild 25 wird nun als Bild-im-Bild in dem linken Anzeigebereich 51 zusammen mit dem von der linken Frontkamera aufgenommenen Bild 21 angezeigt. Das von der rechten Seitenkamera aufgenommene Bild 26 wird in diesem Zustand von dem Bildschirmsystem 5 nicht angezeigt.In the lower state in 3 the images 21, 22, 23 recorded by the three front cameras are displayed in the three display areas 51, 52, 53 from left to right according to the actual arrangement of the cameras on the motor vehicle 1. The image 24 recorded by the rear camera is still displayed as a picture-in-picture in the central display area 52, but the teleoperator is no longer looking at it. The image 25 captured by the left side camera is now displayed as a picture-in-picture in the left display area 51 together with the image 21 captured by the left front camera. The image 26 recorded by the right side camera is not displayed by the screen system 5 in this state.

Diese Beschreibung gilt analog für eine Drehung des Kopfes 3 nach rechts, wobei dann das von der rechten Seitenkamera aufgenommene Bild 26 nun als Bild-im-Bild in dem rechten Anzeigebereich 53 zusammen mit dem von der rechten Frontkamera aufgenommenen Bild 23 angezeigt werden würde. Das von der linken Seitenkamera aufgenommene Bild 25 würde in diesem Zustand von dem Bildschirmsystem 5 nicht angezeigt werden.This description applies analogously to a rotation of the head 3 to the right, in which case the image 26 recorded by the right side camera would now be displayed as a picture-in-picture in the right display area 53 together with the image 23 recorded by the right front camera. The image 25 recorded by the left side camera would not be displayed by the screen system 5 in this state.

Bei den oben mit Bezug zu 2 und 3 beschriebenen Beispielen wurde die Anzeige basierend auf der Ausrichtung des Kopfes 3 des Teleoperators verändert. Denkbar ist jedoch auch, zusätzlich oder alternativ die oben beschriebene Veränderung der Anzeige basierend auf bzw. in Abhängigkeit der Blickrichtung des Teleoperators vorzunehmen.At the above related to 2 and 3 In the examples described, the display has been altered based on the orientation of the teleoperator's head 3 . However, it is also conceivable to additionally or alternatively carry out the above-described change in the display based on or as a function of the viewing direction of the teleoperator.

BezugszeichenlisteReference List

11
Kraftfahrzeugmotor vehicle
22
Teleoperator-Arbeitsplatzteleoperator workplace
21 - 2621 - 26
Bilder der KamerasPictures from the cameras
33
Kopf des TeleoperatorsTeleoperator's head
44
Drehrichtung des Kopfes des TeleoperatorsDirection of rotation of the teleoperator's head
55
Bildschirmsystemscreen system
51 - 5351 - 53
Anzeigebereiche des BildschirmsystemsDisplay areas of the screen system

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent Literature Cited

  • US 10606259 B2 [0004, 0005]US 10606259 B2 [0004, 0005]

Claims (10)

Teleoperator-Arbeitsplatz (2) für ein teleoperiertes Kraftfahrzeug (1), - wobei das Kraftfahrzeug eine Frontkamera, eine Heckkamera, eine linke Seitenkamera, die optional auf eine hintere linke Seite des Kraftahrzeugs (1) gerichtet ist, und eine rechte Seitenkamera, die optional auf eine hintere rechte Seite des Kraftahrzeugs (1) gerichtet ist, aufweist, und - wobei das Kraftfahrzeug (1) ausgestaltet ist, um jeweils von der Frontkamera, der Heckkamera, und der linken und der rechten Seitenkamera aufgenommene Bilder (21 - 26) an den Teleoperator-Arbeitsplatz (2) zu senden, dadurch gekennzeichnet, dass - der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um eine Anzeige der von dem Kraftfahrzeug (1) empfangenen Bilder (21 - 26) in Abhängigkeit einer Ausrichtung eines Kopfes (3) eines Teleoperators und/oder in Abhängigkeit einer Blickrichtung des Teleoperators zu verändern.Teleoperator workstation (2) for a teleoperated motor vehicle (1), - the motor vehicle having a front camera, a rear camera, a left side camera, which is optionally directed to a rear left side of the motor vehicle (1), and a right side camera, which is optionally directed towards a rear right side of the motor vehicle (1), and - wherein the motor vehicle (1) is designed to display images (21 - 26) respectively taken by the front camera, the rear camera, and the left and right side cameras to send the teleoperator workstation (2), characterized in that - the teleoperator workstation (2) is designed to display the images (21 - 26) received from the motor vehicle (1) as a function of an alignment of a head (3 ) of a teleoperator and/or depending on a viewing direction of the teleoperator. Teleoperator-Arbeitsplatz (2) nach Anspruch 1, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ein Bildschirmsystem (5) aufweist, das in einem Betrieb des Teleoperator-Arbeitsplatzes (2) in der Blickrichtung des Teleoperators und vor dem Teleoperator angeordnet ist.Teleoperator workplace (2) after claim 1 , characterized in that the teleoperator workstation (2) has a screen system (5) which is arranged in the viewing direction of the teleoperator and in front of the teleoperator when the teleoperator workstation (2) is in operation. Teleoperator-Arbeitsplatz (2) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder (25) der linken Seitenkamera ausschließlich dann anzuzeigen, wenn eine Kopfbewegung des Teleoperators von dem Teleoperator aus gesehen nach links erfolgt.Teleoperator workplace (2) after claim 1 or 2 , characterized in that the teleoperator workstation (2) is designed to display the images (25) of the left side camera only when the teleoperator's head moves to the left as seen from the teleoperator. Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder der rechten Seitenkamera (26) ausschließlich dann anzuzeigen, wenn eine Kopfbewegung des Teleoperators von dem Teleoperator aus gesehen nach rechts erfolgt.Teleoperator workplace (2) according to one of Claims 1 until 3 , characterized in that the teleoperator workstation (2) is designed to display the images from the right-hand side camera (26) only when the teleoperator's head moves to the right, as seen from the teleoperator. Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder der linken Seitenkamera ausschließlich dann anzuzeigen, wenn die Blickrichtung des Teleoperators in einen Bereich vorbestimmter Größe an einem von dem Teleoperator aus gesehen linken Rand des Bildschirmsystems (5) zeigt.Teleoperator workplace (2) according to one of Claims 1 until 4 , characterized in that the teleoperator workstation (2) is designed to display the images from the left-hand side camera only when the teleoperator's line of sight points to an area of predetermined size on a left-hand edge of the screen system (5), as seen from the teleoperator . Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder der rechten Seitenkamera ausschließlich dann anzuzeigen, wenn die Blickrichtung des Teleoperators in einen Bereich vorbestimmter Größe an einem von dem Teleoperator aus gesehen rechten Rand des Bildschirmsystems (5) zeigt.Teleoperator workplace (2) according to one of Claims 1 until 5 , characterized in that the teleoperator workstation (2) is designed to display the images from the right-hand side camera only when the teleoperator's line of sight points to an area of predetermined size on a right-hand edge of the screen system (5), as seen from the teleoperator . Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um eine Anzeige der von dem Kraftfahrzeug (1) empfangenen Bilder (21 - 26) in Abhängigkeit der Ausrichtung des Kopfes (3) des Teleoperators und/oder in Abhängigkeit der Blickrichtung des Teleoperators kontinuierlich zu verändern.Teleoperator workplace (2) according to one of Claims 1 until 6 , characterized in that the teleoperator workstation (2) is designed to display the images (21-26) received from the motor vehicle (1) depending on the orientation of the head (3) of the teleoperator and/or depending on the viewing direction of the teleoperator to change continuously. Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um eine Anzeige der von dem Kraftfahrzeug (1) empfangenen Bilder (21 - 26) in Abhängigkeit der Ausrichtung des Kopfes des Teleoperators und/oder in Abhängigkeit der Blickrichtung des Teleoperators diskret zu verändern.Teleoperator workplace (2) according to one of Claims 1 until 7 , characterized in that the teleoperator workstation (2) is designed to discretely display the images (21-26) received from the motor vehicle (1) depending on the orientation of the teleoperator's head and/or depending on the viewing direction of the teleoperator to change. Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder der rechten und/oder linken Seitenkamera (25, 26) ausschließlich als Bild-im-Bild anzuzeigen.Teleoperator workplace (2) according to one of Claims 1 until 8th , characterized in that the teleoperator workstation (2) is designed to display the images from the right and/or left side camera (25, 26) exclusively as a picture-in-picture. Teleoperator-Arbeitsplatz (2) nach einem der Ansprüche 1 bis 9, dadurch gekennzeichnet, dass der Teleoperator-Arbeitsplatz (2) ausgestaltet ist, um die Bilder (24) der Heckkamera ausschließlich als Bild-im-Bild anzuzeigen.Teleoperator workplace (2) according to one of Claims 1 until 9 , characterized in that the teleoperator workstation (2) is designed to display the images (24) of the rear camera exclusively as a picture-in-picture.
DE102021123234.1A 2021-09-08 2021-09-08 TELEOPERATOR WORKSTATION Pending DE102021123234A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102021123234.1A DE102021123234A1 (en) 2021-09-08 2021-09-08 TELEOPERATOR WORKSTATION

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102021123234.1A DE102021123234A1 (en) 2021-09-08 2021-09-08 TELEOPERATOR WORKSTATION

Publications (1)

Publication Number Publication Date
DE102021123234A1 true DE102021123234A1 (en) 2023-03-09

Family

ID=85226367

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102021123234.1A Pending DE102021123234A1 (en) 2021-09-08 2021-09-08 TELEOPERATOR WORKSTATION

Country Status (1)

Country Link
DE (1) DE102021123234A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190196465A1 (en) 2017-12-22 2019-06-27 Toyota Research Institute, Inc. Input from a plurality of teleoperators for decision making regarding a predetermined driving situation
US10606259B2 (en) 2017-07-07 2020-03-31 Zoox, Inc. Interactions between vehicle and teleoperations system
DE102018131104A1 (en) 2018-12-06 2020-06-10 Valeo Schalter Und Sensoren Gmbh Method for assisting a user in remote control of a motor vehicle, computer program product, remote control device and driver assistance system for a motor vehicle
DE102019204939A1 (en) 2019-04-05 2020-10-08 Robert Bosch Gmbh Method and device for controlling a vehicle by a teleoperator
DE102019132759A1 (en) 2019-12-03 2021-06-10 Valeo Schalter Und Sensoren Gmbh Method for the remote-controlled driving of a motor vehicle with a teleoperator, computer program product and teleoperations guidance system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10606259B2 (en) 2017-07-07 2020-03-31 Zoox, Inc. Interactions between vehicle and teleoperations system
US20190196465A1 (en) 2017-12-22 2019-06-27 Toyota Research Institute, Inc. Input from a plurality of teleoperators for decision making regarding a predetermined driving situation
DE102018131104A1 (en) 2018-12-06 2020-06-10 Valeo Schalter Und Sensoren Gmbh Method for assisting a user in remote control of a motor vehicle, computer program product, remote control device and driver assistance system for a motor vehicle
DE102019204939A1 (en) 2019-04-05 2020-10-08 Robert Bosch Gmbh Method and device for controlling a vehicle by a teleoperator
DE102019132759A1 (en) 2019-12-03 2021-06-10 Valeo Schalter Und Sensoren Gmbh Method for the remote-controlled driving of a motor vehicle with a teleoperator, computer program product and teleoperations guidance system

Similar Documents

Publication Publication Date Title
EP2484558B1 (en) Display device for fields of vision of a commercial vehicle
EP3138736B1 (en) Mirror replacement system as camera display system of a motor vehicle, in particular a commercial vehicle
DE102013021834B4 (en) Device and method for navigating within a menu for vehicle control and selecting a menu entry from the menu
EP3024700B1 (en) Method and device for reproducing a lateral and/or rear surrounding area of a vehicle
DE102016106255A1 (en) Vehicle exterior camera systems and methods
DE102012102508A1 (en) Adjustment method and system of a smart vehicle imaging device
DE102017128296A1 (en) SYSTEMS AND METHOD FOR CHANGING THE VIEW FIELD OF AN EXTERNAL REVERSING CAMERA
DE112013000873T5 (en) Peripheral monitoring device for transport vehicle
DE102014214514A1 (en) Apparatus and method for exchanging data between vehicles for setting up a convoy
DE102009025205A1 (en) Display surface for environment representation of surround-view system in screen of car, has field displaying top view of motor vehicle and environment, and another field displaying angle indicator for displaying environment regions
WO2015135737A1 (en) Method and apparatus for providing a graphical user interface in a vehicle
WO2014170279A1 (en) Method for selecting an information source from a plurality of information sources for display on a display of data spectacles
DE102013221201A1 (en) Method for assisting a driver when parking
DE102020210650A1 (en) MULTI-CAMERA VISION SYSTEMS FOR A WORK VEHICLE
EP3695266A1 (en) Method for operating a display device in a motor vehicle
DE102018009157A1 (en) Control arrangement and motor vehicle with such a control arrangement
DE102016114689A1 (en) A method for assisting the driver of a motor vehicle when maneuvering the motor vehicle with a trailer, driver assistance system and team
DE102015007491A1 (en) Method for operating a driver information system of a motor vehicle and motor vehicle
EP3296795B1 (en) Method for displaying an image object in a vehicle on a display seen inside and outside the vehicle
DE10297590T5 (en) Driving support system, image output device and rod equipped with camera
DE102021123234A1 (en) TELEOPERATOR WORKSTATION
DE102021120856B3 (en) Method for operating a display device of a motor vehicle, motor vehicle and control device
DE102020134814A1 (en) Device for monitoring the surroundings of a vehicle
EP3833565B1 (en) Method and a display device for visualising an arrangement and method of operation of surroundings sensors of a motor vehicle
DE112017000204T5 (en) working vehicle

Legal Events

Date Code Title Description
R163 Identified publications notified