EP4070302A1 - Method and device for assisting at least one operator in performing planning and/or control tasks - Google Patents

Method and device for assisting at least one operator in performing planning and/or control tasks

Info

Publication number
EP4070302A1
EP4070302A1 EP20816455.8A EP20816455A EP4070302A1 EP 4070302 A1 EP4070302 A1 EP 4070302A1 EP 20816455 A EP20816455 A EP 20816455A EP 4070302 A1 EP4070302 A1 EP 4070302A1
Authority
EP
European Patent Office
Prior art keywords
operator
traffic
data
road users
external view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP20816455.8A
Other languages
German (de)
French (fr)
Inventor
Hejar GÜRLÜK
Lothar CHRISTOFFELS
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deutsches Zentrum fuer Luft und Raumfahrt eV
Original Assignee
Deutsches Zentrum fuer Luft und Raumfahrt eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deutsches Zentrum fuer Luft und Raumfahrt eV filed Critical Deutsches Zentrum fuer Luft und Raumfahrt eV
Publication of EP4070302A1 publication Critical patent/EP4070302A1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/0017—Arrangements for implementing traffic-related aircraft activities, e.g. arrangements for generating, displaying, acquiring or managing traffic information
    • G08G5/0026—Arrangements for implementing traffic-related aircraft activities, e.g. arrangements for generating, displaying, acquiring or managing traffic information located on the ground
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/0073—Surveillance aids
    • G08G5/0082—Surveillance aids for monitoring traffic from a ground station
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/02—Automatic approach or landing aids, i.e. systems in which flight data of incoming planes are processed to provide landing data
    • G08G5/025—Navigation or guidance aids
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/06—Traffic control systems for aircraft, e.g. air-traffic control [ATC] for control when on the ground
    • G08G5/065—Navigation or guidance aids, e.g. for taxiing or rolling

Definitions

  • the invention relates to a support system for supporting at least one operator in situation-dependent planning and / or management tasks in a traffic area with a plurality of road users.
  • the invention also relates to a method for this purpose.
  • traffic control centers colloquially often also referred to as centers or towers or control rooms
  • the human factor plays a major role here, since even today a large part of the traffic management tasks that are carried out by the traffic control center are carried out by the so-called pilot.
  • a pilot regulates the traffic within the area of operation of the traffic area entrusted to him, with direct traffic guidance usually taking place.
  • direct instructions to a vehicle in question which only affect the vehicle itself and are intended for this, actions of the vehicle driver of the relevant vehicle is initiated based on the direct instructions of the pilot, so that all traffic within the traffic area can be regulated and controlled.
  • a pilot usually has a significantly higher situational awareness with regard to the overall traffic situation in the traffic area than the individual drivers of the vehicles in the traffic area.
  • the controller is an air traffic controller who is responsible for air traffic within the area of operation entrusted to him and who has to ensure that the aircraft be guided safely and, if necessary, economically through the familiar catchment area. Landing at an airport and taking off from an airport and the subsequent guidance of the aircraft through the airspace play a particularly important role here.
  • the overall situation in a certain flight area e.g. in the approach area of an airport
  • options for action can also be generated and displayed to the controller in order to be able to support him even better in his planning and / or management tasks.
  • Such options for action are automatically generated by the system based on the state of the overall situation as it results from the state data and then presented to the controller.
  • an assistance system for supporting situation-dependent planning and / or management tasks of a controlled system is known, the state of the controlled system being sensed here as well, according to the generic type, using a status detection unit.
  • acoustic recording unit acoustic speech signals between the controller and a pilot in the airspace are recorded and analyzed, based on the content of the Speech signals between the controller and the pilot then adjust the state of the controlled system.
  • the outside view is essential, especially for the area traffic control, in order to ensure appropriate situational awareness.
  • the transition from looking outside (head-up) to the display systems (head-down) can under certain circumstances be very critical if, due to complex traffic situations, the viewing times at the display systems are greatly extended. Especially during night flights or when visibility is poor, the controllers are even more dependent on their display systems, which results in even longer head-down times.
  • An augmented reality system is known from US 2005/0231419 A1, in which traffic data that was collected by various sensors at an airport is displayed. The system also responds to physical gestures by the controller to select and communicate with specific road users.
  • Such planning data from a controller for example an air traffic controller, are still displayed today manually (for example in the form of paper strips) or by electronic assistance systems, which are then displayed on the outside must be mentally transferred to the surgeon.
  • a controller for example an air traffic controller
  • electronic assistance systems which are then displayed on the outside must be mentally transferred to the surgeon.
  • this ties up the surgeon's mental capacities and thus prevents attention to correspondingly other, more important elements.
  • a support system is proposed to support at least one operator (for example controllers, in particular air traffic controllers) in situation-dependent planning and / or management tasks of a traffic area with a plurality of road users, the support system having a first data interface, a second data interface and a projection has direction.
  • operator for example controllers, in particular air traffic controllers
  • the support system Via the first data interface, the support system receives corresponding position information relating to the road users in the respective traffic area that is assigned to the operator.
  • a traffic area within the meaning of the present invention is understood to mean a demarcated area or a demarcated area within which the at least one operator is responsible for the safe guidance of the road users located in the traffic area.
  • the area or the area can be territorially limited.
  • the traffic space can be an air space for aircraft approaching and / or departing.
  • the traffic area can also be a ground-related area, for example the apron of an airport.
  • a situation to be assisted is understood to mean the implementation of planning and / or management tasks within an area (traffic area) or an area, such as the control of aircraft within an airspace or ground area by one or more air traffic controllers or that Controlling ships within a port area by one or more port pilots.
  • the position information that is fed to the support system via the first data interface contains the position of one, several or all road users within the traffic area in relation to a specified reference system or reference point. With the help of the position information, all road users can be localized within the traffic area.
  • the second data interface is set up to provide the operator's planning data assigned to the traffic participants concerned for guiding the traffic participants within the traffic area concerned to the support system.
  • an augmented exterior view for the surgeon is now generated in the natural exterior view of at least part of the traffic area, the augmented exterior view taking place as a function of the position information of the traffic participants and the planning data of the traffic participants.
  • the planning data of the respective road users are indexed with the aid of the projection device for local perception by the operator in the natural external view of the operator.
  • a coupling of the conventional systems with the augmented exterior view can be provided, thereby ensuring that the controller can always go back to the conventional working mode in the event of failure of the support system according to the invention and the associated lack of functionality. Since the coupling entails data synchronization, the data entries made in the augmented exterior view are always updated or synchronized in the conventional displays / systems. For this purpose, it is particularly advantageous if the data generated by the support system are transmitted and exchanged to other assistance systems coupled to the support system via a further, third data interface.
  • a localized representation of planning data to the road users is understood to mean that the planning data can be visually perceived in a radius around the respective road user, so that the planning data projected in this way is recognized as being assigned to the respective road user.
  • the immediate proximity of the presentation of the planning data to the respective road users ensures that the operator perceives the displayed planning data as being assigned to the corresponding road user and thus visually recognizes the assignment of the presented planning data to the respective road user.
  • the traffic area can be a part of an airport (for example a runway or apron) and / or an air space, for example the air space when the aircraft are starting or when the aircraft are landing.
  • an airport for example a runway or apron
  • an air space for example the air space when the aircraft are starting or when the aircraft are landing.
  • the planning data assigned to the road users are a sequence position within a departure sequence and / or a landing sequence, the projection device being set up to display the sequence positions assigned to the road users at the respective To project road users into the surgeon's natural external view for local perception by the surgeon.
  • Such planning data in the sense of the present invention can alternatively or additionally also contain identity information such as LFZ type and characteristics such as weight classes (light / medium / heavy)
  • the projection device is designed to project infrastructure elements of the traffic area into the natural external view of the operator for local perception by the operator. This is particularly advantageous when the natural external view is impaired (for example in the Night or in bad weather) and / or if the infrastructure elements of the traffic area are not recognizable due to the distance to the operator or because they are only available virtually and are used to control the traffic (e.g. stop bars).
  • the projection device can be set up to project the stopping points in the apron of an airport or other control elements for controlling the aircraft at the airport in the form of an augmented representation into the natural external view of the operator so that they are visually in the natural external view for the operator become perceptible. This allows head-down times or cross-checks to be reduced.
  • the operational context is determined based on status data of the traffic area and / or the road users and, depending on the determined operational context, traffic data relating to the respective road user is selected, wherein the projection unit is further set up to project the traffic data selected based on the operational context to the respective road user for local perception by the operator in the natural external view of the operator.
  • the status data of the traffic area and / or the traffic participants can be provided to the support system via the first data interface.
  • This advantageous embodiment makes it possible to counteract information overload caused by too much unnecessary information. This can increase situational awareness by displaying the most relevant information for the current operational context.
  • the operational context is determined based on status data of the traffic area and / or the traffic participants and depending on the determined operational context for the respective traffic participant at least one corresponding Interaction possibility with the road user and / or an infrastructure element of the traffic area is selected, wherein the projection unit is also set up to use the interaction options selected based on the operational context as an interaction element on the respective traffic part.
  • the status data of the traffic area and / or that of the traffic participants can be made available to the support system via the first data interface.
  • Such an interaction option can be implemented, for example, by means of a context menu with one or more menu entries.
  • This advantageous embodiment makes it possible to counteract information overload caused by too many unnecessary interaction options.
  • situational awareness can be increased by limiting the most relevant options for action based on the operational context.
  • route or runway segments can be blocked or released by switching infrastructure elements at an airport.
  • stop bars for example, to be switched and a corresponding roll release to be initiated and documented interactively.
  • the possible interaction variants are only displayed to the respective infrastructure elements or the road users if they are possible at all based on the operational context.
  • the operational context is understood to mean that part of the process sequence for controlling and guiding the road users within which the respective road user is located. Control and / or guidance commands that make no sense or are irrelevant or not useful in relation to the operational context are consequently also not shown in the augmented external view.
  • the task is also achieved with the method according to claim 7 for supporting at least one operator in situation-dependent planning and / or management tasks of a traffic area with a plurality of road users, the method having the following steps:
  • Figure 1 Schematic representation of the support system according to the invention in an airport environment.
  • FIG. 1 shows, in a greatly simplified schematic representation, the support system 10 with which an operator 100 is to be supported in situation-dependent planning and / or management tasks of a traffic area 200 with a plurality of traffic participants 210.
  • the operator 100 is an air traffic controller located in a control tower or control room, from where he has a direct visual view of the traffic area 200 for which he is responsible through a corresponding window pane.
  • the view out of the control room is therefore the natural external view or external view 12 for the operator 100 in order to be able to directly perceive the traffic area 200 and the traffic participants 210 located therein.
  • This natural exterior view 12 is now to be replaced by an augmented exterior view, in which the natural exterior view 12 has additional information relating to the traffic area 200 and the traffic participants 210 contained therein artificially added.
  • the support system 10 has a projection device 14 which has a first data interface 16 and a second data interface 18.
  • the projection device 14 is connected to an information management system 20, which is usually part of the conventional pilot workstation.
  • This information management 20 not only provides the projection device 14 with the position data or position information (location data from ground position and / or air position radar) of the individual traffic participants 210, but also other status data of the traffic area 200 or the traffic participants 210 For example, environmental data such as weather data, visibility data (transmission meter), various sensor data from existing air traffic control systems (e.g. stop-bar circuits) as well as user inputs in existing conventional human-machine interfaces.
  • the projection device 14 is also provided with planning data from the operator 100 for guiding the road users 210 within the relevant traffic area 200, which data comes from a TFDPS 22 (Tower Flight Data Processing System). From the TFDPS 22, in particular, the departure sequence of road users 210 in traffic area 200 is known, in that each road user 210 is assigned a position or point within the departure sequence. The sequence of the departure sequence is part of the flight plan data or planning data of the operator 100.
  • TFDPS 22 Tower Flight Data Processing System
  • the first data interface 16 and the second data interface 18 can also be designed as a common data interface, in this case the information management 20 and the TFDPS 22 are connected to the projection device 14 via this common data interface.
  • the information management 20 and the TFDPS 22 can arise from the same system.
  • the support system 10 also has a detection device 24 which is provided to determine the position of the surgeon 100 in relation to the natural external view 12.
  • planning data 220 augmented by the projection device 14 are now projected into the natural external view 12 for local perception by the operator 100 to the respective road users 210.
  • these augmented planning data 220 relate to the order of the sequence, here the departure sequence, of the aircraft 210.
  • the operator 100 can immediately recognize the order in which the individual traffic participants are planned in his departure sequence. This is particularly of great interest if the airport topology is such that the aircraft must be threaded onto the runway from several directions. Because here it is not immediately recognizable in which order the aircraft are to take off.
  • an augmented label 230 is projected for each aircraft 210, which can be perceived by the surgeon, the position of the individual labels 230 being projected into the natural external view 12 in such a way that the surgeon 100 uses the respective label 230 as a recognizes corresponding aircraft belonging to it. Accordingly, the labels 230 are projected so close to the aircraft that it is possible to clearly identify which label 230 belongs to which aircraft. In these labels 230, the position within the departure sequence is then indicated by a sequence number in order to make the sequence of the departure sequence recognizable over the entire natural exterior view.
  • Further data can be displayed in these labels 230, such as flight number, identifier and other status data of the aircraft and / or the traffic area (not shown). These additional data are used in particular to quickly identify the respective road user in the augmented exterior view and, if necessary, to establish / generate a sequence without having to resort to other systems.
  • interaction options in the form of selectable menu items (context menus) 240 can also be displayed in the augmented external view (for example on the labels), which are generated depending on the context in order to prevent information overload.
  • Such interaction possibilities 240 offer the operator 100 the possibility of communicating directly with infrastructure elements 250 of the airport and / or the road users 210 and of controlling them. In this way, you can use augmented menus 240 in the natural outside view 12, for example, switch stop bars 250 or transmit instructions to road users 210 digitally or by radio.
  • first data interface 18 second data interface 20 information management 22 TFDPS 24 recognition device

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Traffic Control Systems (AREA)

Abstract

The invention relates to an assistance system for assisting at least one operator in performing situation-dependent planning and/or control tasks of a traffic space with a multiplicity of road users, wherein the assistance system comprises: - a first data interface which is configured to receive position information relating to the road users of the traffic space; - a second data interface which is configured to receive planning data, assigned to the respective road users, of the operator in order to control the road users within the respective traffic space; and - a projection device which, in order to generate an augmented external view for the operator into the natural external view of at least part of the traffic space, is designed in such a way that the planning data assigned to the individual road users is projected into the operator's natural external view of the respective road users in accordance with the position information of the road users, so that said data is perceived by the operator in a positionally accurate fashion.

Description

Verfahren und Vorrichtung zur Unterstützung mindestens eines Operateurs bei Planungs- und/oder Führungsaufgaben die Erfindung betrifft ein Unterstützungssystem zur Unterstützung mindestens eines Operateurs bei situationsabhängigen Planungs- und/oder Führungsaufgaben eines Verkehrsraumes mit einer Mehrzahl von Verkehrsteilnehmern. Die Erfindung betrifft ebenso ein Verfahren hierzu. Method and device for supporting at least one operator in planning and / or management tasks. The invention relates to a support system for supporting at least one operator in situation-dependent planning and / or management tasks in a traffic area with a plurality of road users. The invention also relates to a method for this purpose.
Durch den weiter steigenden Grad der Automation in fast allen Lebensbereichen kommen vermehrt immer mehr Assistenzsysteme zum Einsatz, die ganz oder nur in Teilbereichen die Planungs- und/oder Führungsaufgaben eines Operateurs unterstüt zen oder sogar vollständig die Kontrolle übernehmen sollen, um die mit der Pla nungs- und/oder Führungsaufgabe betraute Person zu entlasten und die Sicherheit zu erhöhen. Due to the increasing degree of automation in almost all areas of life, more and more assistance systems are being used that support the planning and / or management tasks of a surgeon in whole or in part or even take full control of those involved in planning - and / or relieve the person entrusted with management tasks and increase safety.
Zur Sicherung und Kontrolle von Verkehrsräumen, insbesondere eines Luftraumes in der Umgebung von Flughäfen oder eines Seeraumes in der Umgebung eines Ha fens, existieren in der Regel Verkehrsleitzentralen (umgangssprachlich oft auch als Center bzw. Tower oder Warte bezeichnet), die den jeweiligen Verkehr in ihrem Ein flussgebiet kontrollieren und auch steuern, indem Anweisungen an die Fahrzeugbe satzung bzw. Fahrzeugführer übermittelt werden. Hierbei spielt der Faktor Mensch eine große Rolle, da auch heute noch ein Großteil der Verkehrsführungsaufgaben, die von der Verkehrsleitzentrale durchgeführt werden, durch den sogenannten Lot sen erfolgen. To secure and control traffic areas, in particular an air area in the vicinity of airports or a sea area in the vicinity of a port, there are usually traffic control centers (colloquially often also referred to as centers or towers or control rooms) that manage the respective traffic in their Control and manage a river basin by sending instructions to the vehicle crew or driver. The human factor plays a major role here, since even today a large part of the traffic management tasks that are carried out by the traffic control center are carried out by the so-called pilot.
Ein Lotse regelt dabei den Verkehr innerhalb des ihm anvertrauten Einsatzgebietes des Verkehrsraumes, wobei in der Regel eine direkte Verkehrsführung erfolgt. Durch direkte Anweisungen an ein betreffendes Fahrzeug, die nur das jeweilige Fahrzeug selber betreffen und dafür gedacht sind, werden Handlungen der Fahrzeugführer des betreffenden Fahrzeuges aufgrund der direkten Anweisungen des Lotsen initiiert, so- dass hierrüber der gesamte Verkehr innerhalb des Verkehrsraumes geregelt und ge steuert werden kann. Ein Lotse hat dabei in der Regel ein deutlich höheres Situati onsbewusstsein bezüglich der gesamten Verkehrssituation in dem Verkehrsraum als die einzelnen Fahrzeugführer der Fahrzeuge des Verkehrsraumes. A pilot regulates the traffic within the area of operation of the traffic area entrusted to him, with direct traffic guidance usually taking place. By direct instructions to a vehicle in question, which only affect the vehicle itself and are intended for this, actions of the vehicle driver of the relevant vehicle is initiated based on the direct instructions of the pilot, so that all traffic within the traffic area can be regulated and controlled. A pilot usually has a significantly higher situational awareness with regard to the overall traffic situation in the traffic area than the individual drivers of the vehicles in the traffic area.
Handelt es sich bei dem Verkehrsraum bspw. um einen Luftraum, bspw. in der Um gebung einen Flughafens, so ist der Lotse ein Fluglotse, der für den Flugverkehr in nerhalb des ihm anvertrauten Einsatzgebietes verantwortlich ist und dafür Sorge zu tragen hat, dass die Flugzeuge sicher und ggf. auch ökonomisch durch den ihm an vertrauten Einzugsbereich geführt werden. Hierbei spielt insbesondere das Landen auf einem Flughafen sowie das Starten von einem Flughafen und die sich daran an schließende Führung des Flugzeuges durch den Luftraum eine besonders große Rolle. If the traffic area is, for example, an airspace, for example in the vicinity of an airport, the controller is an air traffic controller who is responsible for air traffic within the area of operation entrusted to him and who has to ensure that the aircraft be guided safely and, if necessary, economically through the familiar catchment area. Landing at an airport and taking off from an airport and the subsequent guidance of the aircraft through the airspace play a particularly important role here.
So wird bei Fluglotsen basierend auf den Radardaten, den von den Flugzeugen aus gesendeten Informationen und weiteren externen Zustandsdaten (bspw. Wetterda ten) die Gesamtsituation in einem bestimmten Flugbereich (beispielsweise im Anflug bereich eines Flughafens) kontinuierlich ermittelt und graphisch auf einem Display dem Lotsen angezeigt, um so den Fluglotsen ein möglichst umfassendes Situations bewusstsein zu verschaffen. Außerdem können je nach verwendetem System auch Handlungsoptionen generiert und dem Lotsen angezeigt werden, um ihn bei seiner Planungs- und/oder Führungsaufgabe noch besser unterstützen zu können. Derar tige Handlungsoptionen werden dabei basierend auf dem Zustand der Gesamtsitua tion, wie er sich aus den Zustandsdaten ergibt, von dem System automatisch gene riert und dem Lotsen dann präsentiert. In the case of air traffic controllers, for example, based on the radar data, the information sent by the aircraft and other external status data (e.g. weather data), the overall situation in a certain flight area (e.g. in the approach area of an airport) is continuously determined and shown graphically on a display to the controller in order to make the air traffic controllers as aware of the situation as possible. In addition, depending on the system used, options for action can also be generated and displayed to the controller in order to be able to support him even better in his planning and / or management tasks. Such options for action are automatically generated by the system based on the state of the overall situation as it results from the state data and then presented to the controller.
Aus der DE 10 2011 107 934 A1 ist ein Assistenzsystem zur Unterstützung bei situa tionsabhängigen Planungs- und/oder Führungsaufgaben einer Regelstrecke bekannt, wobei auch hier gattungsgemäß zunächst mithilfe einer Zustandserfassungseinheit der Zustand der Regelstrecke sensorisch erfasst wird. Mithilfe einer akustischen Auf nahmeeinheit werden akustische Sprachsignale zwischen dem Lotsen und einem Pi loten im Luftraum aufgenommen und analysiert, wobei basierend auf dem Inhalt der Sprachsignale zwischen Lotse und Pilot dann der Zustand der Regelstrecke ange passt wird. From DE 10 2011 107 934 A1, an assistance system for supporting situation-dependent planning and / or management tasks of a controlled system is known, the state of the controlled system being sensed here as well, according to the generic type, using a status detection unit. With the help of an acoustic recording unit, acoustic speech signals between the controller and a pilot in the airspace are recorded and analyzed, based on the content of the Speech signals between the controller and the pilot then adjust the state of the controlled system.
Aufgrund der häufig sehr hohen Informationsdichte derartiger Assistenzsysteme fo kussiert der Operateur, der das Assistenzsystem nutzt, seine Aufmerksamkeit auf die relevanten Ereignisse. Zur Unterstützung werden dabei diskrete Ereigniselemente zur Wahrnehmung durch verschiedene Sinne präsentiert, um die Aufmerksamkeit des Operateurs auf diejenigen Ereignisse und Informationen zu fokussieren, die aus Sicht des Assistenzsystems einer Handlung durch den Operateur bedürfen. Due to the often very high information density of such assistance systems, the surgeon who uses the assistance system focuses his attention on the relevant events. To support this, discrete event elements are presented for perception by different senses in order to focus the surgeon's attention on those events and information that, from the perspective of the assistance system, require action by the surgeon.
Gerade im Nahbereich des Verkehrsraumes, beispielsweise die Vorfeldkontrolle, ist die Außensicht insbesondere bei der Platzverkehrskontrolle unerlässlich, um ein an gemessenes Situationsbewusstsein zu gewährleisten. Der Übergang vom Blick nach draußen (Head-Up) auf die Anzeigesysteme (Head-Down) kann unter Umständen sehr kritisch sein, wenn sich aufgrund von komplexen Verkehrssituationen die Blick zeiten auf die Anzeigesysteme stark verlängern. Gerade beim Nachtflugbetrieb oder bei schlechten Sichtbedingungen sind die Lotsen noch stärker von ihren Anzeigesys temen abhängig, was noch längere Head-Down Zeiten zur Folge hat. Especially in the vicinity of the traffic area, for example the apron control, the outside view is essential, especially for the area traffic control, in order to ensure appropriate situational awareness. The transition from looking outside (head-up) to the display systems (head-down) can under certain circumstances be very critical if, due to complex traffic situations, the viewing times at the display systems are greatly extended. Especially during night flights or when visibility is poor, the controllers are even more dependent on their display systems, which results in even longer head-down times.
Aus der US 2005/0231419 A1 ist ein Augmented-Reality-System bekannt, bei dem Verkehrsdaten, die von verschiedenen Sensoren eines Flughafens gesammelt wur den, angezeigt werden. Das System reagiert auch auf physische Gesten des Lotsen, um bestimmte Verkehrsteilnehmer auszuwählen und mit diesem zu kommunizieren. An augmented reality system is known from US 2005/0231419 A1, in which traffic data that was collected by various sensors at an airport is displayed. The system also responds to physical gestures by the controller to select and communicate with specific road users.
Allerdings können durch derartige Systeme lediglich bestehende und durch Senso ren erfassbare Verkehrsdaten dargestellt werden, wie sie bereits durch herkömmli che Assistenzsysteme (Head-Down) darstellbar sind. Das Situationsbewusstsein ei nes Lotsen erstreckt sich jedoch nicht nur auf die vorhandenen Verkehrsdaten, son dern auch auf seine Planungsdaten, wie der Verkehrsraum mit seinen vielen Ver kehrsteilnehmern zukünftig aussehen soll. However, only existing traffic data that can be recorded by sensors can be displayed by such systems, as can already be displayed by conventional assistance systems (head-down). The situation awareness of a pilot extends not only to the existing traffic data, but also to his planning data, how the traffic area with its many traffic participants should look in the future.
Derartige Planungsdaten eines Lotsen, beispielsweise eines Fluglotsen, werden auch heute noch manuell (beispielsweise in Form von Papierstreifen) oder durch elektronische Assistenzsysteme abgebildet, die dann auf die Außenansicht durch den Operateur mental übertragen werden müssen. Dies bindet jedoch mentale Kapa zitäten bei dem Operateur und verhindert so die Aufmerksamkeit auf entsprechend andere, wichtigere Elemente. Such planning data from a controller, for example an air traffic controller, are still displayed today manually (for example in the form of paper strips) or by electronic assistance systems, which are then displayed on the outside must be mentally transferred to the surgeon. However, this ties up the surgeon's mental capacities and thus prevents attention to correspondingly other, more important elements.
Es ist daher Aufgabe der vorliegenden Erfindung ein verbessertes System sowie Verfahren anzugeben, mit dem ein Operateur bei situationsabhängigen Planungs und/oder Führungsaufgaben eines Verkehrsraumes auch hinsichtlich seiner Pla nungsdaten besser unterstützt werden kann. It is therefore the object of the present invention to provide an improved system and method with which an operator can be better supported with situation-dependent planning and / or management tasks of a traffic area, also with regard to his planning data.
Die Aufgabe wird mit dem Unterstützungssystem gemäß Anspruch 1 sowie dem Ver fahren gemäß Anspruch 7 erfindungsgemäß gelöst. Vorteilhafte Ausgestaltungen der Erfindung finden sich in den entsprechenden Unteransprüchen. The object is achieved according to the invention with the support system according to claim 1 and the method according to claim 7. Advantageous refinements of the invention can be found in the corresponding subclaims.
Gemäß Anspruch 1 wird ein Unterstützungssystem zur Unterstützung mindestens ei nes Operateurs (beispielsweise Lotsen, insbesondere Fluglotsen) bei situationsab hängigen Planungs- und/oder Führungsaufgaben eines Verkehrsraumes mit einer Mehrzahl von Verkehrsteilnehmern vorgeschlagen, wobei das Unterstützungssystem eine erste Datenschnittstelle, eine zweite Datenschnittstelle und eine Projektionsein richtung aufweist. According to claim 1, a support system is proposed to support at least one operator (for example controllers, in particular air traffic controllers) in situation-dependent planning and / or management tasks of a traffic area with a plurality of road users, the support system having a first data interface, a second data interface and a projection has direction.
Über die erste Datenschnittstelle erhält das Unterstützungssystem entsprechende Positionsinformationen bezüglich der Verkehrsteilnehmer des jeweiligen Verkehrs raumes, der dem Operateur zugewiesen ist. Via the first data interface, the support system receives corresponding position information relating to the road users in the respective traffic area that is assigned to the operator.
Unter einem Verkehrsraum im Sinne der vorliegenden Erfindung wird dabei ein abge grenztes Gebiet oder ein abgegrenzter Bereich verstanden, innerhalb dessen der mindestens eine Operateur für die sichere Führung der sich im Verkehrsraum befind lichen Verkehrsteilnehmer verantwortlich ist. Das Gebiet oder der Bereich kann dabei territorial begrenzt sein. So kann es sich bei dem Verkehrsraum beispielsweise um einen Luftraum anfliegender und/oder abfliegender Flugzeuge handeln. Es kann sich bei dem Verkehrsraum aber auch um ein bodenbezogenes Gebiet handeln, bei spielsweise das Vorfeld eines Flughafens. Unter einer zu assistierenden Situation wird dabei innerhalb eines Bereiches (Ver kehrsraum) oder eines Gebietes die Durchführung von Planungs- und/oder Füh rungsaufgaben verstanden, wie beispielsweise das Steuern von Flugzeugen inner halb eines Luftraumes oder Bodengebietes durch einen oder mehrere Fluglotsen o- der das Steuern von Schiffen innerhalb eines Hafenbereiches durch einen oder meh rere Hafenlotsen. A traffic area within the meaning of the present invention is understood to mean a demarcated area or a demarcated area within which the at least one operator is responsible for the safe guidance of the road users located in the traffic area. The area or the area can be territorially limited. For example, the traffic space can be an air space for aircraft approaching and / or departing. However, the traffic area can also be a ground-related area, for example the apron of an airport. A situation to be assisted is understood to mean the implementation of planning and / or management tasks within an area (traffic area) or an area, such as the control of aircraft within an airspace or ground area by one or more air traffic controllers or that Controlling ships within a port area by one or more port pilots.
Die Positionsinformationen, die dem Unterstützungssystem über die erste Daten schnittstelle zugeführt werden, enthalten dabei die Position eines, mehrerer oder al ler Verkehrsteilnehmer innerhalb des Verkehrsraumes in Bezug zu einem vorgege benen Referenzsystem oder Referenzpunkt. Mithilfe der Positionsinformationen las sen sich demnach sämtliche Verkehrsteilnehmer innerhalb des Verkehrsraumes lo kalisieren. The position information that is fed to the support system via the first data interface contains the position of one, several or all road users within the traffic area in relation to a specified reference system or reference point. With the help of the position information, all road users can be localized within the traffic area.
Die zweite Datenschnittstelle ist eingerichtet, die den betreffenden Verkehrsteilneh mern zugeordneten Planungsdaten des Operateurs zur Führung der Verkehrsteilneh mer innerhalb des betreffenden Verkehrsraumes dem Unterstützungssystem bereit zustellen. The second data interface is set up to provide the operator's planning data assigned to the traffic participants concerned for guiding the traffic participants within the traffic area concerned to the support system.
Mithilfe der Projektionseinrichtung wird nun eine augmentierte Außenansicht für den Operateur in die natürliche Außensicht auf zumindest einen Teil des Verkehrsraumes erzeugt, wobei die augmentierte Außensicht in Abhängigkeit von den Positionsinfor mationen der Verkehrsteilnehmer und den Planungsdaten der Verkehrsteilnehmer erfolgt. Dabei werden die Planungsdaten der jeweiligen Verkehrsteilnehmer mithilfe der Projektionseinrichtung zur ortstreuen Wahrnehmung durch den Operateur in die natürliche Außensicht des Operateurs indiziert. With the help of the projection device, an augmented exterior view for the surgeon is now generated in the natural exterior view of at least part of the traffic area, the augmented exterior view taking place as a function of the position information of the traffic participants and the planning data of the traffic participants. The planning data of the respective road users are indexed with the aid of the projection device for local perception by the operator in the natural external view of the operator.
Mithilfe der vorliegenden Erfindung wird es somit möglich, den vom Operateur er zeugten Plan zum Führen der Verkehrsteilnehmer innerhalb des Verkehrsraumes in die natürliche Außensicht so zu projizieren, dass die den einzelnen Verkehrsteilneh mern zugeordneten Planungsdaten entsprechend an diesen Verkehrsteilnehmern angezeigt werden. Damit kann der Operateur auch beim Blick aus dem Kontrollzent- rum heraus (Head-Up) die von ihm erzeugten Planungsdaten zum Führen der Ver- kehrsteilnehmer in einer visualisierten Form erkennen, wodurch das Situationsbe wusstsein zu jeder Zeit, d. h. sowohl bei Head-Up Zeiten als auch bei Head-Down Zeiten, stets aktuell und vollständig erhalten bleibt. With the help of the present invention, it is thus possible to project the plan generated by the operator for guiding the road users within the traffic area into the natural external view so that the planning data assigned to the individual road users are displayed accordingly to these road users. This means that the surgeon can also view the planning data he has generated to conduct the process when looking out of the control center (head-up). Recognize road users in a visualized form, which means that situational awareness is always kept up-to-date and complete at all times, ie for both head-up and head-down times.
Dabei kann eine Kopplung der konventionellen Systeme mit der augmentierten Au ßenansicht vorgesehen sein, wodurch gewährleistet werden kann, dass der Lotse bei Ausfall des erfindungsgemäßen Unterstützungssystem und damit verbundener feh lender Funktionalität immer wieder in den konventionellen Arbeitsmodus zurückge hen kann. Da die Kopplung eine Datensynchronisation mit sich zieht, werden stets die in der augmentierten Außenansicht getätigten Dateneingaben in den konventio nellen Anzeigen/Systemen aktualisiert bzw. syncronisiert. Hierfür ist es besonders vorteilhaft, wenn über eine weitere, dritte Datenschnittstelle die durch das Unterstüt zungssystem generierten Daten an andere mit dem Unterstützungssystem gekoppel ten Assistenzsysteme übertragen und ausgetauscht werden. A coupling of the conventional systems with the augmented exterior view can be provided, thereby ensuring that the controller can always go back to the conventional working mode in the event of failure of the support system according to the invention and the associated lack of functionality. Since the coupling entails data synchronization, the data entries made in the augmented exterior view are always updated or synchronized in the conventional displays / systems. For this purpose, it is particularly advantageous if the data generated by the support system are transmitted and exchanged to other assistance systems coupled to the support system via a further, third data interface.
Unter einer ortstreuen Darstellung von Planungsdaten an den Verkehrsteilnehmern wird im Sinne der vorliegenden Erfindung verstanden, dass die Planungsdaten in ei nem Umkreis um den jeweiligen Verkehrsteilnehmer herum visuell wahrnehmbar sind, sodass die so projizierten Planungsdaten als dem jeweiligen Verkehrsteilneh mer zugeordnet erkannt werden. Durch die unmittelbare Nähe der Darstellung der Planungsdaten an den jeweiligen Verkehrsteilnehmern wird somit sichergestellt, dass der Operateur die dargestellten Planungsdaten als zu dem entsprechenden Ver kehrsteilnehmer zugeordnet wahrnimmt und somit visuell die Zuordnung der darge stellten Planungsdaten zu den jeweiligen Verkehrsteilnehmern erkennt. In the context of the present invention, a localized representation of planning data to the road users is understood to mean that the planning data can be visually perceived in a radius around the respective road user, so that the planning data projected in this way is recognized as being assigned to the respective road user. The immediate proximity of the presentation of the planning data to the respective road users ensures that the operator perceives the displayed planning data as being assigned to the corresponding road user and thus visually recognizes the assignment of the presented planning data to the respective road user.
Wie bereits angesprochen, kann es sich bei dem Verkehrsraum um einen Teil eines Flughafens (beispielsweise Rollfeld oder Vorfeld) handeln und/oder um einen Luft raum, beispielsweise den Luftraum beim Starten der Flugzeuge oder beim Landen der Flugzeuge. As already mentioned, the traffic area can be a part of an airport (for example a runway or apron) and / or an air space, for example the air space when the aircraft are starting or when the aircraft are landing.
Gemäß einer Ausführungsform ist vorgesehen, dass die den Verkehrsteilnehmern zugeordneten Planungsdaten eine Sequenzposition innerhalb einer Abflugsequenz und/oder einer Landesequenz sind, wobei die Projektionseinrichtung eingerichtet ist, die den Verkehrsteilnehmern zugeordneten Sequenzpositionen an den jeweiligen Verkehrsteilnehmern zur ortstreuen Wahrnehmung durch den Operateur in die natür liche Außensicht des Operateurs zu projizieren. Solche Planungsdaten im Sinne der vorliegenden Erfindung können alternativ oder zusätzlich auch Identitätsinformatio nen wie z.B. LFZ Typ und Charakteristika wie z.B. Gewichtsklassen (Light/Me dium/Heavy) beinhalten According to one embodiment it is provided that the planning data assigned to the road users are a sequence position within a departure sequence and / or a landing sequence, the projection device being set up to display the sequence positions assigned to the road users at the respective To project road users into the surgeon's natural external view for local perception by the surgeon. Such planning data in the sense of the present invention can alternatively or additionally also contain identity information such as LFZ type and characteristics such as weight classes (light / medium / heavy)
Hierdurch wird es möglich, dass der Operateur durch einen Blick nach außen (Au ßenansicht) sofort erkennen kann, welchem erkennbaren Verkehrsteilnehmer, den er in seiner natürlichen Außensicht sofort wahrnimmt, welche Sequenzposition inner halb seiner Abflugsequenz und/oder Landesequenz zugeordnet ist. Es bedarf hierfür keiner mentalen Transformation des analog vorliegenden Plans in die natürliche Au ßensicht, sondern der Operateur kann mit einem Blick aus seinem Kontrollraum bzw. Kontrollzentrum heraus sofort erkennen, welche sich dort befindliche Verkehrsteil nehmer (Flugzeug) an welcher Position innerhalb seiner geplanten Sequenz steht. Damit erhält der Operateur auch eine unmittelbare Übersicht über die gesamte Se quenz und kann so an den Verkehrsteilnehmern, die er aus seiner natürlichen Au ßensicht heraus erkennen kann, die gesamte geplante Sequenz visuell ablesen. This makes it possible for the surgeon to immediately see by looking outwards (outside view) which recognizable road user, whom he immediately perceives in his natural external view, which sequence position is assigned within his departure sequence and / or landing sequence. This does not require a mental transformation of the analogous plan into the natural external view, but the operator can immediately see at a glance from his control room or control center which road users (aircraft) are located there in which position within his planned sequence . This gives the surgeon an immediate overview of the entire sequence and can visually read the entire planned sequence from the road users who can be recognized from his natural outside view.
Gemäß einer Ausführungsform ist vorgesehen, dass die Projektionseinrichtung ein gerichtet ist, Infrastrukturelemente des Verkehrsraumes zur ortstreuen Wahrneh mung durch den Operateur in die natürliche Außensicht des Operateurs zu projizie ren. Dies ist insbesondere dann vorteilhaft, wenn die natürliche Außensicht beein trächtigt ist (beispielsweise in der Nacht oder bei schlechtem Wetter) und/oder wenn die Infrastrukturelemente des Verkehrsraumes aufgrund der Entfernung zum Opera teur oder weil sie nur virtuell vorliegen und der Steuerung des Verkehrs dienen (bei spielsweise Stopp-Bars) nicht erkennbar sind. According to one embodiment it is provided that the projection device is designed to project infrastructure elements of the traffic area into the natural external view of the operator for local perception by the operator. This is particularly advantageous when the natural external view is impaired (for example in the Night or in bad weather) and / or if the infrastructure elements of the traffic area are not recognizable due to the distance to the operator or because they are only available virtually and are used to control the traffic (e.g. stop bars).
So kann die Projektionseinrichtung beispielsweise eingerichtet sein, die im Vorfeld eines Flughafens befindlichen Haltepunkte oder andere Steuerungselemente zur Steuerung der Flugzeuge auf dem Flughafen in Form einer augmentierten Darstel lung in die natürliche Außensicht des Operateurs zu projizieren, sodass sie für den Operateur visuell in der natürlichen Außensicht wahrnehmbar werden. Hierdurch können Head-Down Zeiten bzw. Cross-Checks verringert werden. Außerdem wird es so auch möglich, die Interaktionen mit den Infrastrukturelementen des Verkehrsraumes zu dokumentieren, wie beispielsweise die Dokumentation der Rollfreigabe. Wird beispielsweise über Sprechfunk eine Rollfreigabe erteilt über ein augmentierte Interaktionsmenü eingegeben, so wird simultan im entsprechenden augmentierten Label des betreffenden Luftfahrzeuges der aktuelle Freigabestatus dokumentiert und gleichzeitig der relevante Stopp-Bar geschaltet. For example, the projection device can be set up to project the stopping points in the apron of an airport or other control elements for controlling the aircraft at the airport in the form of an augmented representation into the natural external view of the operator so that they are visually in the natural external view for the operator become perceptible. This allows head-down times or cross-checks to be reduced. In addition, it is also possible to document the interactions with the infrastructure elements of the traffic area, such as the documentation of the taxi clearance. If, for example, a roll release is given via radio via an augmented interaction menu, the current release status is simultaneously documented in the corresponding augmented label of the aircraft in question and the relevant stop bar is switched at the same time.
Gemäß einer Ausführungsform ist vorgesehen, dass mittels einer Datenverarbei tungseinheit für mindestens einen Verkehrsteilnehmer, vorzugsweise für alle Ver kehrsteilnehmer, der operationeile Kontext basierend auf Zustandsdaten des Ver kehrsraumes und/oder der Verkehrsteilnehmer ermittelt und in Abhängigkeit von dem ermittelten operationeilen Kontext den jeweiligen Verkehrsteilnehmer betreffende Verkehrsdaten ausgewählt wird, wobei die Projektionseinheit weiterhin eingerichtet ist, die basierend auf dem operationeilen Kontext ausgewählten Verkehrsdaten an dem jeweiligen Verkehrsteilnehmer zur ortstreuen Wahrnehmung durch den Opera teur in die natürliche Außensicht des Operateurs zu projizieren. Die Zustandsdaten des Verkehrsraumes und/oder der Verkehrsteilnehmer kann dabei über die erste Da tenschnittstelle dem Unterstützungssystem bereitgestellt werden. According to one embodiment it is provided that by means of a data processing unit for at least one road user, preferably for all road users, the operational context is determined based on status data of the traffic area and / or the road users and, depending on the determined operational context, traffic data relating to the respective road user is selected, wherein the projection unit is further set up to project the traffic data selected based on the operational context to the respective road user for local perception by the operator in the natural external view of the operator. The status data of the traffic area and / or the traffic participants can be provided to the support system via the first data interface.
Durch diese vorteilhafte Ausführungsform kann erreicht werden, dass einer Informa tionsüberladung durch zu viele, unnötige Informationen entgegengewirkt wird. Hier durch kann das Situationsbewusstsein erhöht werden, indem die relevantesten Infor mationen für den aktuellen operationeilen Kontextes angezeigt werden. This advantageous embodiment makes it possible to counteract information overload caused by too much unnecessary information. This can increase situational awareness by displaying the most relevant information for the current operational context.
Gemäß einerweiteren Ausführungsform ist vorgesehen, dass mittels einer Datenver arbeitungseinheit für einen, mehrere oder alle relevanten Verkehrsteilnehmer der operationeile Kontext basierend auf Zustandsdaten des Verkehrsraumes und/oder der Verkehrsteilnehmer ermittelt und in Abhängigkeit von dem ermittelten operatio neilen Kontext für den jeweiligen Verkehrsteilnehmer mindestens eine entspre chende Interaktionsmöglichkeit mit dem Verkehrsteilnehmer und/oder einem Infra strukturelement des Verkehrsraumes ausgewählt wird, wobei die Projektionseinheit weiterhin eingerichtet ist, die basierend auf dem operationeilen Kontext ausgewähl ten Interaktionsmöglichkeiten als Interaktionselement an dem jeweiligen Verkehrsteil- nehmer zur ortstreuen Wahrnehmung durch den Operateur in die natürliche Außen sicht des Operateurs zu projizieren. Die Zustandsdaten des Verkehrsraumes und/o der der Verkehrsteilnehmer kann dabei über die erste Datenschnittstelle dem Unter stützungssystem bereitgestellt werden. Eine solche Interaktionsmöglichkeit kann bspw. durch ein Kontextmenü mit einem oder mehreren Menüeinträgen realisiert werden. According to a further embodiment it is provided that by means of a data processing unit for one, several or all relevant traffic participants the operational context is determined based on status data of the traffic area and / or the traffic participants and depending on the determined operational context for the respective traffic participant at least one corresponding Interaction possibility with the road user and / or an infrastructure element of the traffic area is selected, wherein the projection unit is also set up to use the interaction options selected based on the operational context as an interaction element on the respective traffic part. To project the user into the surgeon's natural external view for local perception by the surgeon. The status data of the traffic area and / or that of the traffic participants can be made available to the support system via the first data interface. Such an interaction option can be implemented, for example, by means of a context menu with one or more menu entries.
Durch diese vorteilhafte Ausführungsform kann erreicht werden, dass einer Informa tionsüberladung durch zu viele, unnötige Interaktionsmöglichkeiten entgegengewirkt wird. Hierdurch kann das Situationsbewusstsein erhöht werden, indem die relevan testen Aktionsmöglichkeiten basierend auf dem operationeilen Kontext eingeschränkt werden. So können durch das Schalten von Infrastrukturelementen an einem Flugha fen beispielsweise Routen- oder Pistensegmente gesperrt oder freigegeben werden. Auch lassen sich hierdurch beispielsweise Stopp-Bars schalten und so interaktiv eine entsprechende Rollfreigabe einleiten und dokumentieren. Dabei werden die mögli chen Interaktionsvarianten nur dann an den jeweiligen Infrastrukturelemente oder den Verkehrsteilnehmern angezeigt, wenn diese basierend auf dem operationeilen Kontext überhaupt möglich sind. This advantageous embodiment makes it possible to counteract information overload caused by too many unnecessary interaction options. In this way, situational awareness can be increased by limiting the most relevant options for action based on the operational context. For example, route or runway segments can be blocked or released by switching infrastructure elements at an airport. This also enables stop bars, for example, to be switched and a corresponding roll release to be initiated and documented interactively. The possible interaction variants are only displayed to the respective infrastructure elements or the road users if they are possible at all based on the operational context.
Unter dem operationeilen Kontext wird im Sinne der vorliegenden Erfindung derje nige Teil des Verfahrensablaufes zur Steuerung und Führung der Verkehrsteilneh mer verstanden, innerhalb dessen sich der jeweilige Verkehrsteilnehmer befindet. Steuerungs- und oder Führungsbefehle, die in Bezug auf den operationeilen Kontext keinen Sinn ergeben bzw. irrelevant oder nicht sinnvoll sind, werden demzufolge in der augmentierten Außenansicht auch nicht dargestellt. For the purposes of the present invention, the operational context is understood to mean that part of the process sequence for controlling and guiding the road users within which the respective road user is located. Control and / or guidance commands that make no sense or are irrelevant or not useful in relation to the operational context are consequently also not shown in the augmented external view.
Die Aufgabe wird im Übrigen auch mit dem Verfahren gemäß Anspruch 7 zur Unter stützung mindestens eines Operateurs bei situationsabhängigen Planungs- und/oder Führungsaufgaben eines Verkehrsraumes mit einer Mehrzahl von Verkehrsteilneh mer, wobei das Verfahren die folgenden Schritte aufweist: The task is also achieved with the method according to claim 7 for supporting at least one operator in situation-dependent planning and / or management tasks of a traffic area with a plurality of road users, the method having the following steps:
- Erhalten von Positionsinformationen bezüglich der Verkehrsteilnehmer des Verkehrsraumes mittels einer ersten Datenschnittstelle; - Obtaining position information regarding the road users in the traffic area by means of a first data interface;
- Erhalten von den betreffenden Verkehrsteilnehmern zugeordneten Pla nungsdaten des Operateurs zur Führung der Verkehrsteilnehmer innerhalb zumindest eines Teilbereiches des betreffenden Verkehrsraumes mittels einer zweiten Datenschnittstelle; und - Receipt of the operator's planning data assigned to the relevant road users for guiding the road users within at least a partial area of the relevant traffic area by means of a second data interface; and
- Erzeugen einer augmentierten Außenansicht für den Operateur in die na türliche Außensicht auf zumindest einen Teil des Verkehrsraumes mittels einer Projektionseinrichtung derart, dass in Abhängigkeit von den Positi onsinformationen der Verkehrsteilnehmer die den einzelnen Verkehrsteil nehmern zugeordneten Planungsdaten an den jeweiligen Verkehrsteilneh mern zur ortstreuen Wahrnehmung durch den Operateur in die natürliche Außensicht des Operateurs projiziert werden. - Generating an augmented external view for the operator in the natural external view of at least part of the traffic area by means of a projection device in such a way that, depending on the positional information of the traffic participants, the planning data assigned to the individual traffic participants are sent to the respective traffic participants for local perception by the The surgeon can be projected into the surgeon's natural external view.
Vorteilhafte Ausgestaltungen des Verfahrens finden sich in den entsprechenden Un teransprüchen. Advantageous refinements of the method can be found in the corresponding subclaims.
Die Erfindung wird anhand der beigefügten Figur beispielhaft näher erläutert. Es zeigt: The invention is explained in more detail by way of example with reference to the accompanying figure. It shows:
Figur 1 Schematische Darstellung des erfindungsgemäßen Unterstützungssys tems in einem Flughafenumfeld. Figure 1 Schematic representation of the support system according to the invention in an airport environment.
Figur 1 zeigt in einer schematisch stark vereinfachten Darstellung das Unterstüt zungssystem 10, mit dem ein Operateur 100 bei situationsabhängigen Planungs und/oder Führungsaufgaben eines Verkehrsraumes 200 mit einer Mehrzahl von Ver kehrsteilnehmern 210 unterstützt werden soll. Der Operateur 100 ist im Ausführungs beispiel der Figur 1 ein Fluglotse befindet sich in einem Kontrollturm bzw. Kontroll- raum, von wo er durch eine entsprechende Fensterscheibe einen direkten visuellen Blick auf den von ihm zu verantwortenden Verkehrsraum 200 hat. Der Blick aus dem Kontrollraum heraus ist somit für den Operateur 100 die natürliche Außenansicht bzw. Außensicht 12, um den Verkehrsraum 200 und die darin befindlichen Verkehrs teilnehmer 210 direkt visuell wahrnehmen zu können. FIG. 1 shows, in a greatly simplified schematic representation, the support system 10 with which an operator 100 is to be supported in situation-dependent planning and / or management tasks of a traffic area 200 with a plurality of traffic participants 210. In the exemplary embodiment in FIG. 1, the operator 100 is an air traffic controller located in a control tower or control room, from where he has a direct visual view of the traffic area 200 for which he is responsible through a corresponding window pane. The view out of the control room is therefore the natural external view or external view 12 for the operator 100 in order to be able to directly perceive the traffic area 200 and the traffic participants 210 located therein.
Diese natürliche Außenansicht 12 soll nun durch eine augmentierte Außenansicht er setzt werden, bei der der natürlichen Außenansicht 12 weitere Informationen bezüg lich des Verkehrsraumes 200 und den darin enthaltenen Verkehrsteilnehmern 210 künstlichen zugefügt werden. H ierfür weist das Unterstützungssystem 10 eine Pro jektionseinrichtung 14 auf, die eine erste Datenschnittstelle 16 und eine zweite Da tenschnittstelle 18 hat. This natural exterior view 12 is now to be replaced by an augmented exterior view, in which the natural exterior view 12 has additional information relating to the traffic area 200 and the traffic participants 210 contained therein artificially added. For this purpose, the support system 10 has a projection device 14 which has a first data interface 16 and a second data interface 18.
Über die erste Datenschnittstelle 16 ist die Projektionseinrichtung 14 mit einem Infor mationsmanagement 20 verbunden, das in der Regel Bestandteil des konventionel len Lotsenarbeitsplatzes ist. Über dieses Informationsmanagement 20 werden der Projektionseinrichtung 14 dabei nicht nur die Positionsdaten bzw. Positionsinformati onen (Ortungsdaten aus Bodenlage- und/oder Luftlageradar) der einzelnen Ver kehrsteilnehmer 210 bereitgestellt, sondern auch weitere Zustandsdaten des Ver kehrsraumes 200 bzw. der Verkehrsteilnehmer 210. Solche Zustandsdaten können beispielsweise Umgebungsdaten wie Wetterdaten, Sichtweitendaten (Transmissio- meter), diverse Sensordaten aus bestehenden Flugsicherungssystemen (beispiels weise Stopp-Bar-Schaltungen) sowie Nutzereingaben in bestehende konventionelle Mensch-Maschine-Schnittsteilen sein. Via the first data interface 16, the projection device 14 is connected to an information management system 20, which is usually part of the conventional pilot workstation. This information management 20 not only provides the projection device 14 with the position data or position information (location data from ground position and / or air position radar) of the individual traffic participants 210, but also other status data of the traffic area 200 or the traffic participants 210 For example, environmental data such as weather data, visibility data (transmission meter), various sensor data from existing air traffic control systems (e.g. stop-bar circuits) as well as user inputs in existing conventional human-machine interfaces.
Über die zweite Datenschnittstelle 18 werden der Projektionseinrichtung 14 des Wei teren Planungsdaten des Operateurs 100 zur Führung der Verkehrsteilnehmer 210 innerhalb des betreffenden Verkehrsraumes 200 bereitgestellt, die aus einem TFDPS 22 (Tower Flight Data Processing System) stammen. Aus dem TFDPS 22 ist dabei insbesondere die Abflugsequenz der Verkehrsteilnehmer 210 des Verkehrsraumes 200 bekannt, indem jedem Verkehrsteilnehmer 210 eine Position bzw. Stelle inner halb der Abflugsequenz zugeordnet ist. Die Reihenfolge der Abflugsequenz ist dabei Bestandteil der Flugplandaten bzw. Planungsdaten des Operateurs 100. Via the second data interface 18, the projection device 14 is also provided with planning data from the operator 100 for guiding the road users 210 within the relevant traffic area 200, which data comes from a TFDPS 22 (Tower Flight Data Processing System). From the TFDPS 22, in particular, the departure sequence of road users 210 in traffic area 200 is known, in that each road user 210 is assigned a position or point within the departure sequence. The sequence of the departure sequence is part of the flight plan data or planning data of the operator 100.
Die erste Datenschnittstelle 16 und die zweite Datenschnittstelle 18 können dabei auch als eine gemeinsame Datenschnittstelle ausgebildet sein, bei diesem Fall das Informationsmanagement 20 und das TFDPS 22 über diese gemeinsame Daten schnittstelle mit der Projektionseinrichtung 14 verbunden werden. Das Informations management 20 und das TFDPS 22 können dabei aus einem demselben System hervorgehen. The first data interface 16 and the second data interface 18 can also be designed as a common data interface, in this case the information management 20 and the TFDPS 22 are connected to the projection device 14 via this common data interface. The information management 20 and the TFDPS 22 can arise from the same system.
Das Unterstützungssystem 10 weist des Weiteren eine Erkennungseinrichtung 24 auf, die dazu vorgesehen ist, die Position des Operateurs 100 in Bezug auf die natür liche Außensicht 12 zu ermitteln. The support system 10 also has a detection device 24 which is provided to determine the position of the surgeon 100 in relation to the natural external view 12.
Basierend auf den Positionsinformationen der Verkehrsteilnehmer 210, die über die erste Datenschnittstelle 16 bereitgestellt werden, den Planungsdaten des Opera teurs, die über die zweite Datenschnittstelle 18 der Projektionseinrichtung 14 bereit gestellt werden, sowie der relativen Position des Operateurs 100 in Bezug auf die na türliche Außensicht 12, die über die Erkennungseinrichtung 24 bereitgestellt wird, werden nun mithilfe der Projektionseinrichtung 14 augmentierte Planungsdaten 220 in die natürliche Außensicht 12 zur ortstreuen Wahrnehmung durch den Operateur 100 an die jeweiligen Verkehrsteilnehmer 210 projiziert. Diese augmentierten Pla nungsdaten 220 beziehen sich im Ausführungsbeispiel der Figur 1 dabei auf die Rei henfolge der Sequenz, hier die Abflugsequenz, der Flugzeuge 210. Damit kann der Operateur 100 durch einen Blick aus seinem Kontrollturm heraus auf den Verkehrsraum 200 sofort erkennen, in welcher Reihenfolge die einzelnen Ver kehrsteilnehmer in seiner Abflugsequenz geplant sind. Dies ist insbesondere dann von großem Interesse, wenn die Flughafentopologie dergestalt ist, dass die Flug zeuge aus mehreren Richtungen auf die Landebahn eingefädelt werden müssen. Denn hier ist nicht auf den ersten Blick erkennbar, in welcher Reihenfolge die Flug zeuge abfliegen sollen. Based on the position information of the road users 210 provided via the first data interface 16, the operator's planning data provided via the second data interface 18 of the projection device 14, and the relative position of the operator 100 in relation to the natural external view 12, which is provided via the recognition device 24, planning data 220 augmented by the projection device 14 are now projected into the natural external view 12 for local perception by the operator 100 to the respective road users 210. In the exemplary embodiment in FIG. 1, these augmented planning data 220 relate to the order of the sequence, here the departure sequence, of the aircraft 210. Thus, by looking out of his control tower at the traffic area 200, the operator 100 can immediately recognize the order in which the individual traffic participants are planned in his departure sequence. This is particularly of great interest if the airport topology is such that the aircraft must be threaded onto the runway from several directions. Because here it is not immediately recognizable in which order the aircraft are to take off.
Demzufolge wird mithilfe der Projektionseinrichtung 14 ein jedes Flugzeug 210 ein augmentiertes Label 230 projiziert, das durch den Operateur wahrnehmbar ist, wobei die Position der einzelnen Labels 230 so in die natürliche Außensicht 12 projiziert wird, dass der Operateur 100 das jeweilige Label 230 als zu dem entsprechenden Flugzeug zugehörig erkennt. Demzufolge werden die Labels 230 derart dicht an den Flugzeugen projiziert, dass eine eindeutige Zuordnung erkennbar ist, welches Label 230 zu welchem Flugzeug gehört. In diesen Labels 230 wird dann die Position inner halb der Abflugsequenz durch eine Sequenznummer angezeigt, um so die Reihen folge der Abflugsequenz über die gesamte natürlichen der Außenansicht hinweg er kennbar zu machen. Accordingly, with the aid of the projection device 14, an augmented label 230 is projected for each aircraft 210, which can be perceived by the surgeon, the position of the individual labels 230 being projected into the natural external view 12 in such a way that the surgeon 100 uses the respective label 230 as a recognizes corresponding aircraft belonging to it. Accordingly, the labels 230 are projected so close to the aircraft that it is possible to clearly identify which label 230 belongs to which aircraft. In these labels 230, the position within the departure sequence is then indicated by a sequence number in order to make the sequence of the departure sequence recognizable over the entire natural exterior view.
In diesen Labels 230 können weitere Daten angezeigt werden, wie beispielsweise Flugnummer, Kennung und andere Zustandsdaten des Flugzeuges und/oder des Verkehrsraumes (nicht dargestellt). Diese zusätzlichen Daten dienen insbesondere dazu, den jeweiligen Verkehrsteilnehmer in der augmentierten Außenansicht schnell zu identifizieren und ggf. eine Sequenz zu etablieren/generieren, ohne hierfür auf an dere Systeme zurückgreifen zu müssen. Further data can be displayed in these labels 230, such as flight number, identifier and other status data of the aircraft and / or the traffic area (not shown). These additional data are used in particular to quickly identify the respective road user in the augmented exterior view and, if necessary, to establish / generate a sequence without having to resort to other systems.
Darüber hinaus lassen sich in der augmentierten Außensicht (bspw. an den Labels) auch Interaktionsmöglichkeiten in Form von auswählbaren Menüpunkten (Kontext menüs) 240 anzeigen, die kontextabhängig generiert werden, um so einer Informa tionsüberladung vorzubeugen. Solche Interaktionsmöglichkeiten 240 bieten dem Operateur 100 dabei die Möglichkeit, mit Infrastrukturelementen 250 des Flughafens und/oder den Verkehrsteilnehmern 210 direkt selbst zu kommunizieren und diese zu steuern. So lassen sich über augmentierte Menüs 240 in der natürlichen Außensicht 12 beispielsweise Stopp-Bars 250 schalten oder Anweisungen an den Verkehrsteil nehmer 210 digital oder per Sprechfunk übertragen. In addition, interaction options in the form of selectable menu items (context menus) 240 can also be displayed in the augmented external view (for example on the labels), which are generated depending on the context in order to prevent information overload. Such interaction possibilities 240 offer the operator 100 the possibility of communicating directly with infrastructure elements 250 of the airport and / or the road users 210 and of controlling them. In this way, you can use augmented menus 240 in the natural outside view 12, for example, switch stop bars 250 or transmit instructions to road users 210 digitally or by radio.
Bezuqszeichenliste Reference list
10 Unterstützungssystem 12 natürliche Außensicht 14 Projektionseinrichtung 10 support system 12 natural external view 14 projection device
16 erste Datenschnittstelle 18 zweite Datenschnittstelle 20 Informationsmanagement 22 TFDPS 24 Erkennungseinrichtung 16 first data interface 18 second data interface 20 information management 22 TFDPS 24 recognition device
100 Operateur 200 Verkehrsraum 210 Verkehrsteilnehmer 220 augmentierte Planungsdaten 230 Labels 100 operator 200 traffic area 210 road users 220 augmented planning data 230 labels
240 Kontextmenüs 240 context menus
250 Infrastrukturelemente des Flughafens 250 infrastructure elements of the airport

Claims

Patentansprüche: Patent claims:
1. Unterstützungssystem (10) zur Unterstützung mindestens eines Operateurs (100) bei situationsabhängigen Planungs- und/oder Führungsaufgaben eines Verkehrsraumes (200) mit einer Mehrzahl von Verkehrsteilnehmer (210), wo bei das Unterstützungssystem (10) aufweist: 1. Support system (10) to support at least one operator (100) in situation-dependent planning and / or management tasks of a traffic area (200) with a plurality of road users (210), where the support system (10) has:
- eine erste Datenschnittstelle (16), die zum Erhalten von Positionsinformati onen bezüglich der Verkehrsteilnehmer (210) des Verkehrsraumes (200) eingerichtet ist; - A first data interface (16) which is set up to receive positional information with respect to the road users (210) of the traffic area (200);
- eine zweite Datenschnittstelle (18), die zum Erhalten von den betreffenden Verkehrsteilnehmern (210) zugeordneten Planungsdaten (220) des Opera teurs (100) zur Führung der Verkehrsteilnehmer (210) innerhalb des betref fenden Verkehrsraumes (200) eingerichtet ist; und - A second data interface (18) which is set up to receive planning data (220) of the operator (100) assigned to the relevant traffic participants (210) for guiding the traffic participants (210) within the relevant traffic area (200); and
- eine Projektionseinrichtung (14), die zum Erzeugen einer augmentierten Außenansicht für den Operateur (100) in die natürliche Außensicht (12) auf zumindest einen Teil des Verkehrsraumes (200) derart ausgebildet ist, dass in Abhängigkeit von den Positionsinformationen der Verkehrsteilneh mer (210) die den einzelnen Verkehrsteilnehmern (210) zugeordneten Pla nungsdaten (220) an den jeweiligen Verkehrsteilnehmern (210) zur ort streuen Wahrnehmung durch den Operateur (100) in die natürliche Außen sicht (12) des Operateurs (100) projiziert werden. - A projection device (14) which is designed to generate an augmented external view for the surgeon (100) in the natural external view (12) of at least part of the traffic area (200) in such a way that depending on the position information of the traffic participants (210 ) the planning data (220) assigned to the individual road users (210) are projected to the respective road users (210) to scatter perception by the operator (100) into the natural external view (12) of the operator (100).
2. Unterstützungssystem (10) nach Anspruch 1, dadurch gekennzeichnet, dass der Verkehrsraum (200) ein Flughafen und/oder ein Luftraum ist. 2. Support system (10) according to claim 1, characterized in that the traffic area (200) is an airport and / or an airspace.
3. Unterstützungssystem (10) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die den Verkehrsteilnehmern (210) zugeordneten Planungsdaten (220) eine Sequenzposition innerhalb einer Abflugsequenz und/oder einer Landese quenz sind, wobei die Projektionseinrichtung (14) eingerichtet ist, die den Ver kehrsteilnehmern (210) zugeordneten Sequenzpositionen an den jeweiligen Verkehrsteilnehmern (210) zur ortstreuen Wahrnehmung durch den Operateur (100) in die natürliche Außensicht (12) des Operateurs zu projizieren. 3. Support system (10) according to claim 1 or 2, characterized in that the planning data (220) assigned to the road users (210) a sequence position within a departure sequence and / or a landing sequence, the projection device (14) being set up to convert the sequence positions assigned to the traffic participants (210) to the respective traffic participants (210) for local perception by the operator (100) To project the external view (12) of the surgeon.
4. Unterstützungssystem (10) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Projektionseinrichtung (14) eingerichtet ist, Infrastrukturelemente des Verkehrsraumes (200) zur ortstreuen Wahrneh mung durch den Operateur (100) in die natürliche Außensicht (12) des Opera teurs (100) zu projizieren. 4. Support system (10) according to one of the preceding claims, characterized in that the projection device (14) is set up, infrastructure elements of the traffic area (200) for local perception by the operator (100) in the natural external view (12) of the operator (100) to project.
5. Unterstützungssystem (10) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Datenverarbeitungseinheit vorgesehen ist, die eingerichtet ist, für mindestens einen Verkehrsteilnehmer (210) den opera tioneilen Kontext basierend auf Zustandsdaten des Verkehrsraumes (200) und/oder der Verkehrsteilnehmer (210) zu ermitteln und in Abhängigkeit von dem ermittelten operationeilen Kontext den jeweiligen Verkehrsteilnehmer (210) betreffende Verkehrsdaten auszuwählen, wobei die Projektionseinheit weiterhin eingerichtet ist, die basierend auf dem operationeilen Kontext ausge wählten Verkehrsdaten an dem jeweiligen Verkehrsteilnehmer (210) zur ort streuen Wahrnehmung durch den Operateur (100) in die natürliche Außen sicht (12) des Operateurs (100) zu projizieren. 5. Support system (10) according to one of the preceding claims, characterized in that a data processing unit is provided which is set up for at least one road user (210) the operational context based on status data of the traffic area (200) and / or the road users ( 210) and, depending on the determined operational context, select traffic data pertaining to the respective road user (210), the projection unit also being set up to distribute the traffic data selected based on the operational context to the respective road user (210) to the location to project the surgeon (100) into the natural external view (12) of the surgeon (100).
6. Unterstützungssystem (10) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Datenverarbeitungseinheit vorgesehen ist, die eingerichtet ist, für mindestens einen Verkehrsteilnehmer (210) den opera tioneilen Kontext basierend auf Zustandsdaten des Verkehrsraumes (200) und/oder der Verkehrsteilnehmer (210) zu ermitteln und in Abhängigkeit von dem ermittelten operationeilen Kontext für den jeweiligen Verkehrsteilnehmer (210) mindestens eine entsprechende Interaktionsmöglichkeit mit dem Ver kehrsteilnehmer (210) und/oder einem Infrastrukturelement des Verkehrsrau mes (200) auszuwählen, wobei die Projektionseinheit weiterhin eingerichtet ist, die basierend auf dem operationeilen Kontext ausgewählten Interaktions möglichkeiten als Interaktionselement an dem jeweiligen Verkehrsteilnehmer (210) zur ortstreuen Wahrnehmung durch den Operateur (100) in die natürli che Außensicht (12) des Operateurs (100) zu projizieren. 6. Support system (10) according to one of the preceding claims, characterized in that a data processing unit is provided which is set up for at least one road user (210) the operational context based on status data of the traffic area (200) and / or the road users ( 210) and depending on the determined operational context for the respective road user (210) to select at least one corresponding interaction option with the road user (210) and / or an infrastructure element of the traffic area (200), the projection unit still being set up is to project the interaction options selected based on the operational context as an interaction element on the respective road user (210) for local perception by the operator (100) in the natural external view (12) of the operator (100).
7. Verfahren zur Unterstützung mindestens eines Operateurs (100) bei situati onsabhängigen Planungs- und/oder Führungsaufgaben eines Verkehrsrau mes (200) mit einer Mehrzahl von Verkehrsteilnehmer (210), wobei das Ver fahren die folgenden Schritte aufweist: 7. A method for supporting at least one operator (100) in situation-dependent planning and / or management tasks of a traffic area (200) with a plurality of road users (210), the method comprising the following steps:
- Erhalten von Positionsinformationen bezüglich der Verkehrsteilnehmer (210) des Verkehrsraumes (200) mittels einer ersten Datenschnittstelle (16); - Obtaining position information relating to the road users (210) in the traffic area (200) by means of a first data interface (16);
- Erhalten von den betreffenden Verkehrsteilnehmern (210) zugeordneten Planungsdaten des Operateurs (100) zur Führung der Verkehrsteilnehmer (210) innerhalb zumindest eines Teilbereiches des betreffenden Verkehrs raumes (200) mittels einer zweiten Datenschnittstelle (18); und - Obtaining planning data from the operator (100) assigned to the relevant traffic participants (210) for guiding the traffic participants (210) within at least a partial area of the relevant traffic area (200) by means of a second data interface (18); and
- Erzeugen einer augmentierten Außenansicht für den Operateur (100) in die natürliche Außensicht (12) auf zumindest einen Teil des Verkehrsrau mes (200) mittels einer Projektionseinrichtung (14) derart, dass in Abhän gigkeit von den Positionsinformationen der Verkehrsteilnehmer (210) die den einzelnen Verkehrsteilnehmern (210) zugeordneten Planungsdaten an den jeweiligen Verkehrsteilnehmern (210) zur ortstreuen Wahrnehmung durch den Operateur (100) in die natürliche Außensicht (12) des Opera teurs (100) projiziert werden. - Generating an augmented external view for the surgeon (100) in the natural external view (12) of at least part of the traffic area (200) by means of a projection device (14) such that depending on the position information of the road users (210) the Planning data assigned to individual road users (210) are projected to the respective road users (210) for local perception by the operator (100) in the natural external view (12) of the operator (100).
8. Verfahren nach Anspruch 7, dadurch gekennzeichnet, dass der Verkehrsraum (200) ein Flughafen und/oder ein Luftraum ist. 8. The method according to claim 7, characterized in that the traffic area (200) is an airport and / or an airspace.
9. Verfahren nach Anspruch 7 oder 8, dadurch gekennzeichnet, dass die den Verkehrsteilnehmern (210) zugeordneten Planungsdaten eine Sequenzposi tion innerhalb einer Abflugsequenz und/oder einer Landesequenz sind, wobei die den Verkehrsteilnehmern (210) zugeordneten Sequenzpositionen an den jeweiligen Verkehrsteilnehmern (210) zur ortstreuen Wahrnehmung durch den Operateur (100) in die natürliche Außensicht (12) des Operateurs (100) mittels der Projektionseinrichtung (14) projiziert werden. 9. The method according to claim 7 or 8, characterized in that the planning data assigned to the road users (210) are a sequence position within a departure sequence and / or a landing sequence, the sequence positions assigned to the road users (210) being on the respective road users (210) for local perception by the The surgeon (100) can be projected into the natural external view (12) of the surgeon (100) by means of the projection device (14).
10. Verfahren nach einem der Ansprüche 7 bis 9, dadurch gekennzeichnet, dass Infrastrukturelemente des Verkehrsraumes (200) zur ortstreuen Wahrneh mung durch den Operateur (100) in die natürliche Außensicht (12) des Opera teurs (100) zu projizieren. 10. The method according to any one of claims 7 to 9, characterized in that infrastructure elements of the traffic area (200) for local perception by the operator (100) to project into the natural external view (12) of the operator (100).
11. Verfahren nach einem der Ansprüche 7 bis 10, dadurch gekennzeichnet, dass mittels einer Datenverarbeitungseinheit für mindestens einen Verkehrsteilneh mer (210) der operationeile Kontext basierend auf Zustandsdaten des Ver kehrsraumes (200) und/oder der Verkehrsteilnehmer (210) zu ermittelt und in Abhängigkeit von dem ermittelten operationeilen Kontext des jeweiligen Ver kehrsteilnehmers (210) betreffende Verkehrsdaten ausgewählt werden, wobei die basierend auf dem operationeilen Kontext ausgewählten Verkehrsdaten an dem jeweiligen Verkehrsteilnehmer (210) zur ortstreuen Wahrnehmung durch den Operateur (100) in die natürliche Außensicht (12) des Operateurs (100) mittels der Projektionseinheit projiziert werden. 11. The method according to any one of claims 7 to 10, characterized in that by means of a data processing unit for at least one road user (210) to determine the operational context based on status data of the traffic area (200) and / or the road users (210) and in Depending on the determined operational context of the respective road user (210), relevant traffic data are selected, the traffic data selected based on the operational context for the respective road user (210) for local perception by the operator (100) in the natural external view (12) of the surgeon (100) are projected by means of the projection unit.
12. Verfahren nach einem der Ansprüche 7 bis 11, dadurch gekennzeichnet, dass mittels einer Datenverarbeitungseinheit für mindestens einen Verkehrsteilneh mer (210) der operationeile Kontext basierend auf Zustandsdaten des Ver kehrsraumes (200) und/oder der Verkehrsteilnehmer (210) ermittelt und in Ab hängigkeit von dem ermittelten operationeilen Kontext für den jeweiligen Ver kehrsteilnehmer (210) mindestens eine entsprechende Interaktionsmöglichkeit mit dem Verkehrsteilnehmer (210) und/oder einem Infrastrukturelement des Verkehrsraumes (200) ausgewählt wird, wobei die basierend auf dem operati oneilen Kontext ausgewählten Interaktionsmöglichkeiten als Interaktionsele ment an dem jeweiligen Verkehrsteilnehmer (210) zur ortstreuen Wahrneh mung durch den Operateur (100) in die natürliche Außensicht (12) des Opera teurs (100) mittels der Projektionseinheit projiziert werden. 12. The method according to any one of claims 7 to 11, characterized in that by means of a data processing unit for at least one road user (210) the operational context is determined based on status data of the traffic area (200) and / or the road users (210) and in Ab Depending on the determined operational context for the respective road user (210), at least one corresponding interaction option with the road user (210) and / or an infrastructure element of the traffic area (200) is selected, the interaction options selected based on the operational context as an interaction element projected on the respective road user (210) for local perception by the operator (100) in the natural external view (12) of the operator (100) by means of the projection unit.
EP20816455.8A 2019-12-06 2020-11-27 Method and device for assisting at least one operator in performing planning and/or control tasks Pending EP4070302A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102019133410.1A DE102019133410A1 (en) 2019-12-06 2019-12-06 Method and device for supporting at least one surgeon in planning and / or management tasks
PCT/EP2020/083657 WO2021110555A1 (en) 2019-12-06 2020-11-27 Method and device for assisting at least one operator in performing planning and/or control tasks

Publications (1)

Publication Number Publication Date
EP4070302A1 true EP4070302A1 (en) 2022-10-12

Family

ID=73646330

Family Applications (1)

Application Number Title Priority Date Filing Date
EP20816455.8A Pending EP4070302A1 (en) 2019-12-06 2020-11-27 Method and device for assisting at least one operator in performing planning and/or control tasks

Country Status (3)

Country Link
EP (1) EP4070302A1 (en)
DE (1) DE102019133410A1 (en)
WO (1) WO2021110555A1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7129887B2 (en) * 2004-04-15 2006-10-31 Lockheed Martin Ms2 Augmented reality traffic control center
DE102011107934B4 (en) 2011-07-19 2018-08-23 Deutsches Zentrum für Luft- und Raumfahrt e.V. assistance system
US8922589B2 (en) * 2013-04-07 2014-12-30 Laor Consulting Llc Augmented reality apparatus

Also Published As

Publication number Publication date
DE102019133410A1 (en) 2021-06-10
WO2021110555A1 (en) 2021-06-10

Similar Documents

Publication Publication Date Title
EP0883873B1 (en) Airport guidance system, in particular airport surface movement guidance and control system
EP3052363B1 (en) Device for automatically driving a vehicle
EP2944532B1 (en) Traffic light assisting system for a vehicle with a display device
EP3052353B1 (en) Method for a driver assistance system of a vehicle
EP3052354B1 (en) Method for a driver assistance system of a vehicle
EP1610971B1 (en) Method for adjusting the speed of a motor vehicle according to risk and device for carrying out said method
DE102009042557A1 (en) Aircraft-centered ground maneuver monitoring and alarm system
EP2956833B1 (en) Method and device for displaying information of a system
DE102014203138A1 (en) Driver assistance system for a motor vehicle and method for assisting a motor vehicle driver
DE102013001326A1 (en) Motor vehicle i.e. car, has car-to-car communication unit outputting warning signal e.g. warning symbol, to driver of car if technical device of particular motor vehicle within environment of car is not activated
DE102018210226A1 (en) PROCESS AND DEVICE FOR USE WITH VEHICLES WITH AUTONOMIC DRIVING MODE
EP3176047A1 (en) Operating system for the driving of a vehicle, in particular of a commercial vehicle
EP4176378A1 (en) Method for capturing the surroundings using at least two independent imaging surroundings capture sensors, apparatus for performing the method, vehicle and appropriately designed computer program
DE102014202509A1 (en) Control of a fully or fully automatic driving function
WO2012110046A1 (en) Device and method for monitoring and controlling traffic guidance at an airport
DE102017107484A1 (en) A method of providing a display assisting a driver of a motor vehicle, driver assistance system and motor vehicle
EP3566925A1 (en) (partially) autonomous motor vehicle and method for operating the same
WO2021110555A1 (en) Method and device for assisting at least one operator in performing planning and/or control tasks
WO2014135500A1 (en) Method and device arrangement for individual automated traffic control of road users at an airport
EP3847050B1 (en) Method and control device for operating a display device which can be worn on the head in a motor vehicle
DE102013008356B4 (en) Method and device for displaying control objects of a control system
DE102010004653A1 (en) Control method for rail vehicle, involves controlling automatic drive control to manual remote-drive control during transition of rail vehicle from free railway track to track close area
EP3217378B1 (en) Method and device for guiding traffic, in particular aircraft
DE102018222666A1 (en) Autonomous taxi
DE19956455A1 (en) Speed and/or distance-regulated driving method involves transmitting signals into vehicle from local detection and transmission equipment to automatically influence vehicle operation

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20220706

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)