DE102007052813B3

DE102007052813B3 - Data processing method for use in multi-monitor environment, involves forming logical connection between common application framework and monitor service that is associated with runtime environment and operated based on principle of facade

Info

Publication number: DE102007052813B3
Application number: DE200710052813
Authority: DE
Inventors: Chiheb Charrad; Christian Scharf; Hans-Martin von Dr. Stockhausen
Original assignee: Siemens AG
Current assignee: Siemens Healthineers Ag De
Priority date: 2007-11-06
Filing date: 2007-11-06
Publication date: 2009-01-22
Anticipated expiration: 2027-11-07

Abstract

The method involves producing a sub-application (S1) logically linked with an application (A), during run-time of the application. A visual range for the application and the sub-application is automatically allocated. The range is displayed by displays. The application and the sub-application are assigned to a common application framework (AF). A logical connection between the framework and a monitor service is formed. The service is associated with a runtime environment and operated according to a principle of a monitor placement facade.

Description

Die Erfindung betrifft ein Verfahren zur Verarbeitung von Daten in einer Multi-Monitor-Umgebung sowie ein zur Durchführung des Verfahrens geeignetes System.The The invention relates to a method for processing data in one Multi-monitor environment and one suitable for performing the method System.

Aus der US 6,982,682 B1 ist ein Multi-Monitor-Computergraphiksystem bekannt, welches zum Betrieb einer Mehrzahl von Graphikanwendungen geeignet sein soll, die in unterschiedlichem Maße für Multi-Monitor-Umgebungen ausgelegt sind. Mehrere Monitore können als einzelne Anzeigevorrichtungen oder als einzige, große Anzeigevorrichtung benutzt werden, wobei die Art der Nutzung der Monitore in einer Konfigurationsdatei festgelegt ist. Die Ansteuerung der einzelnen Monitore erfolgt jeweils über einen separaten Graphikkanal, welcher Graphikdaten in Signale für den Monitorbetrieb umsetzt. Hierbei kann eine anzuzeigende Graphik auf genau einem Monitor dargestellt oder derart auf zwei Graphikkanäle aufgeteilt werden, dass sie zu einem Teil auf einem ersten Monitor und zum einem weiteren Teil auf einem zweiten Monitor angezeigt wird. Allgemein werden Graphikdaten, die ein Graphikserver empfängt, durch einen Anwendungsmanager verarbeitet, der die Daten einem geeigneten Graphikkanal zuordnet. Einzelne Anzeigeflächen des aus der US 6,982,682 B1 bekannten Graphiksystems sind nicht notwendigerweise planar, wobei die Krümmung von Anzeigeflächen gegebenenfalls durch die Ansteuerung von mit den Anzeigeflächen zusammenwirkenden Projektoren optisch kompensiert werden kann.From the US Pat. No. 6,982,682 B1 For example, a multi-monitor computer graphics system is known which is intended to be capable of operating a plurality of graphics applications designed to varying degrees for multi-monitor environments. Multiple monitors can be used as individual display devices or as a single, large display device, with the way the monitors are used in a configuration file. The individual monitors are controlled via a separate graphics channel, which converts graphic data into signals for monitor operation. In this case, a graphic to be displayed can be displayed on exactly one monitor or divided into two graphics channels in such a way that it is displayed partly on a first monitor and on another part on a second monitor. Generally, graphics data that a graphics server receives is processed by an application manager that associates the data with a suitable graphics channel. Individual display surfaces of the US Pat. No. 6,982,682 B1 known graphics system are not necessarily planar, wherein the curvature of display surfaces can optionally be optically compensated by the control of cooperating with the display surfaces projectors.

Die US 2003/0227423 A1 offenbart ein Anzeigesystem, welches mehrere Bildschirme umfasst, von denen einer als Hauptbildschirm definiert wird. Das Anzeigesystem umfasst weiter ein Mehrfachanzeige-Steuersystem, das die Anzeige der Bildschirme steuert, wobei ein Bildsignalgenerator an die Bildschirme angeschlossen ist. Das Mehrfachanzeige-Steuersystem weist eine Arbeitspositions-Erfassungseinrichtung auf, unter der eine Vorrichtung zur Erfassung einer Zeigerposition oder eines aktiven Fensters verstanden wird. Zusätzlich umfasst das Mehrfachanzeige-Steuersystem eine Bildschirmerkennungsvorrichtung, die einen Bildschirm, auf dem Arbeitsvorgänge ausgeführt werden, als Arbeitsbildschirm erkennt. Ferner ist eine Bildaustauschvorrichtung vorgesehen, die den Displayinhalt des Bildschirms, auf dem Arbeitsvorgänge ausgeführt werden, und den Displayinhalt des Hauptbildschirms austauscht.The US 2003/0227423 A1 discloses a display system that includes multiple screens, one of which is defined as the main screen. The display system further comprises a multi-display control system that controls the display of the screens, with an image signal generator connected to the screens. The multi-display control system comprises a working position detecting means, which is understood to mean a device for detecting a pointer position or an active window. In addition, the multi-display control system includes a screen recognition device that recognizes a screen on which operations are performed as a work screen. Further, an image exchange device is provided which exchanges the display content of the screen on which operations are performed and the display content of the main screen.

Praktische Erläuterungen zur Arbeit mit Multi-Monitor-Systemen enthält die Technische Übersicht: „NVIDIA nView-Technologie, Revolutionäre Funktionalität und Performance für Multidisplay-Anwendungen", NVIDIA Corporation, 2003, TB-00958-001_v01. Die hierin beschriebene Software soll dem Anwender die Möglichkeit bieten, mit Hilfe von Funktionen für das Anwendungs- und Fenstermanagement selbst zu entscheiden, auf welchem Bildschirm und Desktop bestimmte Anwendungen dargestellt werden.practical Explanations to work with multi-monitor systems contains the technical overview: "NVIDIA nView technology, Revolutionary functionality and performance for multi-display applications ", NVIDIA Corporation, 2003, TB-00958-001_v01. The software described herein is intended to be Users the opportunity with application and window management capabilities even decide on which screen and desktop specific Applications are presented.

Aus der DE 103 51 351 B4 ist ein Verfahren und ein System zur Generierung einer multi-Monitor Benutzerschnittstelle auf mindestens einem Zielsystem für eine Applikation bekannt. Nach diesem Verfahren wird auf ein Konfigurationsfile zugegriffen, das zumindest Komponenten eines Layouts der zu generierenden Benutzerschnittstelle, auch als User Interface bezeichnet, beschreibt. Das Generieren der Benutzerschnittstelle ist von dem Zielsystem und/oder von der Applikation datentechnisch entkoppelt. Die Benutzerschnittstelle wird durch eine Vielzahl von Steuerungsfeldern definiert, wobei das Verfahren in die Abschnitte Kreieren des Steuerungsfeldes, Positionieren des Steuerungsfeldes und Weiterleiten des Steuerungsfeldes an einen konfigurierbaren Control Handler aufgeteilt ist.From the DE 103 51 351 B4 For example, a method and system for generating a multi-monitor user interface on at least one target system for an application is known. According to this method, a configuration file is accessed which at least describes components of a layout of the user interface to be generated, also referred to as user interface. The generation of the user interface is decoupled from the target system and / or from the application. The user interface is defined by a plurality of control panels, the method being divided into the sections creating the control panel, positioning the control panel and forwarding the control panel to a configurable control handler.

Insbesondere bei medizinischen Applikationen kann die Notwendigkeit gegeben sein, dass sich die Applikation während der Laufzeit, vor allem direkt nach dem Start, dynamisch auf eine beliebige Multi-Monitor-Umgebung anpasst. Dieses Problem der Anpassung an eine neue Monitorkonfiguration kann mit Mitteln der Programmierung angegangen werden. Hierfür müssen bei der Entwicklung einer Applikation alle denkbaren Monitorkonfigurationen im Design und bei der Implementierung der Benutzerschnittstellen der Applikation berücksichtigt werden. Es ist jedoch nicht unwahrscheinlich, dass sich im Laufe der sich typischerweise über mehrere Jahre erstreckenden Nutzungsdauer der Applikation die Anforderungen hinsichtlich des Erscheinungsbildes der Applikation ändern. In einem solchen Fall ist nach dem Stand der Technik häufig eine Anpassung der vorhan denen Implementierung erforderlich, wobei als Ergebnis der Anpassung wiederum nur eine Lösung für eine einzige Monitorkonfiguration oder bestimmte, genau definierte Monitorkonfigurationen zur Verfügung steht.Especially in medical applications there may be a need that the application during the runtime, especially right after the start, dynamically to any Multi-monitor environment adapts. This problem of customization A new monitor configuration may be using means of programming be addressed. Therefor have to In the development of an application all imaginable monitor configurations in the design and implementation of user interfaces the application is considered become. However, it is not unlikely that in the course of typically over several years of useful life of the application the requirements change the appearance of the application. In In such a case, according to the prior art is often a Adjustment of the existing implementation required, where as The result of the adaptation is again only one solution for a single monitor configuration or specific, well-defined monitor configurations are available.

Der Erfindung liegt die Aufgabe zugrunde, Prozesse in Multi-Monitor-Anwendungen gegenüber dem Stand der Technik insbesondere hinsichtlich der Flexibilität und Anwenderfreundlichkeit weiterzuentwickeln.Of the Invention is based on the object processes in multi-monitor applications compared to the State of the art, in particular with regard to flexibility and user-friendliness further.

Diese Aufgabe wird erfindungsgemäß gelöst durch ein Verfahren mit den Merkmalen des Anspruchs 1 sowie durch ein Datenverarbeitungssystem mit den Merkmalen des Anspruchs 8. Im Folgenden im Zusammenhang mit dem Verfahren erläuterte Ausgestaltungen und Vorteile der Erfindung gelten sinngemäß auch für das Datenverarbeitungssystem und umgekehrt.These The object is achieved by a method having the features of claim 1 and by a Data processing system with the features of claim 8. Below Embodiments explained in connection with the method and Advantages of the invention apply mutatis mutandis to the data processing system and vice versa.

Das Verfahren sieht vor, dass in einem eine Mehrzahl an Anzeigevorrichtungen umfassenden Datenverarbeitungssystem zunächst eine Applikation bereitgestellt wird. Während der Laufzeit der Applikation wird mindestens eine mit der Applikation logisch verknüpfte Subapplikation erzeugt. Schließlich erfolgt eine automatische Zuordnung von mittels der verschiedenen Anzeigevorrichtungen darstellbaren Sichtbereichen zur Applikation sowie zur Subapplikation.The Method provides that in a plurality of display devices comprehensive data processing system initially provided an application becomes. While The runtime of the application will be at least one with the application logically linked Subapplication generated. Finally done an automatic assignment of by means of the various display devices displayable viewing areas for application and for subapplication.

Das Datenverarbeitungssystem ist damit in der Lage, sich jederzeit, insbesondere kurz nach dem Starten einer Applikation, auf eine neue Monitorkonfiguration einzustellen. Im Vergleich zum Stand der Technik ist damit auf einer höheren abstrakten Ebene ein Multi-Monitor-Konzept implementiert, wobei es nicht mehr erforderlich ist, für jede denkbare Monitorkonfiguration eine eigene Konfigurationsdatei zu hinterlegen. Vielmehr ist mit dem Verfahren eine adaptive Anpassung auf eine Multi-Monitor-Umgebung realisiert, wobei im Fall einer Änderung der Monitorkonfiguration, das heißt einer Änderung hinsichtlich Anzahl und spezifischer Parameter der Anzeigevorrichtungen, die existierende Applikationsimplementie rung weiterhin nutzbar ist. Dies wird dadurch ermöglicht, dass mit der im Zuge der Anpassung auf eine neue Monitorkonfiguration erfolgenden Erstellung der mindestens einen Subapplikation auch entsprechende Benutzerschnittstellen, welche die geänderte, insbesondere erweiterte, Monitorkapazität nutzen, automatisch generiert werden.The Data processing system is thus able, at any time, especially shortly after starting an application, to a new one Monitor configuration. Compared to the state of the art is thus at a higher level abstract level implements a multi-monitor concept, taking It is no longer necessary for any conceivable monitor configuration to save your own configuration file. Rather, it is with the method an adaptive adaptation to a multi-monitor environment realized, in the case of a change the monitor configuration, that is a change in number and specific parameter of the display devices that exist Application Implementation tion is still available. This will be done allows that in the course of customization to a new monitor configuration subsequent creation of the at least one subapplication also corresponding user interfaces that the changed, in particular, use advanced, monitor capacity, automatically generated become.

Die Subapplikationen, welche in Abhängigkeit der gegebenen Monitorkonfiguration dynamisch generiert werden, werden auch als Dynamic Pages bezeichnet. Mit den Dynamic Pages kann eine Applikation während ihrer Laufzeit visuell und semantisch erweitert werden.The Subapplications, which depend on the given monitor configuration will be dynamically generated also called Dynamic Pages. With the Dynamic Pages can one Application during be extended visually and semantically.

Die auch als Views bezeichneten Sichtbereiche sind beispielsweise zur Anzeige jeweils einer Mehrzahl von so genannten Benutzerschnittstellenelementen nutzbar, die der Applikation oder einer Subapplikation zugeordnet sind. Innerhalb eines Sichtbereichs sind in bevorzugter Ausgestaltung mehrere Untersichtbereiche, auch als Areas bezeichnet, unterscheidbar.The Also known as views viewing areas are for example to Display of a plurality of so-called user interface elements usable, assigned to the application or a subapplication are. Within a field of view are in a preferred embodiment several sub-view areas, also referred to as areas, distinguishable.

In der Applikation sowie jeder Subapplikation kann gemäß einer vorteilhaften Gestaltung des erfindungsgemäßen Verfahrens unter Nutzung eines Handlers eine Trennung von Visualisierung und Funktion der Applikation beziehungsweise Subapplikation erfolgen. Prinzipielle Möglichkeiten der Aufteilung von visuellen Komponenten und ereignisbezogenen Komponenten sind in der DE 103 51 351 A1 offenbart.In the application and each subapplication can be carried out according to an advantageous embodiment of the method according to the invention using a handler a separation of visualization and function of the application or subapplication. Principal possibilities of the division of visual components and event-related components are in the DE 103 51 351 A1 disclosed.

Durch die Trennung von visuellen und verhaltensorientierten Bestandteilen der Applikation wird eine sehr hohe Flexibilität erreicht. Im einzelnen betrifft dies die Anpassungs- und Änderungsfähigkeit der Applikation, die Austauschbarkeit, Wartbarkeit, Strukturbarkeit und Testbarkeit sowie die Eignung dafür, dass verschiedene Entwickler an einer Benutzerschnittstellenapplikation (UI Applikation) gleichzeitig arbeiten, ohne die Ergebnisse anderer Entwickler, welche ebenfalls an Schnittstellen der Applikation arbeiten, abwarten zu müssen. Die letztgenannte Eigenschaft wird auch als „Separation of Concerns" bezeichnet.By the separation of visual and behavioral components The application achieves a very high degree of flexibility. In particular this is the adaptability and modifiability of the Application, interchangeability, maintainability, structure and testability as well as the suitability for different developers at a user interface application (UI application) at the same time work without the results of other developers, which also to work on interfaces of the application, to wait. The the latter property is also referred to as "separation of concerns".

Das Verfahren arbeitet im Rahmen eines Applikationsframeworks, der in eine Ablaufumgebung eingebettet ist, wobei ein Monitor Service der Ablaufumgebung zuzurechnen ist und nach dem Prinzip der Facade arbeitet. Hinsichtlich des Designpatterns der Facade wird beispielhaft auf die US 2002/0174198 A1 verwiesen, die die automatische Registrierung verschiedener Gerätetypen mittels einer Management Software zum Gegenstand hat.The method works within the framework of an application framework that is embedded in a runtime environment, whereby a monitor service can be assigned to the runtime environment and works according to the principle of the façade. With regard to the design pattern of the facade is exemplified on the US 2002/0174198 A1 referring to the automatic registration of various types of devices by means of a management software.

Benutzerschnittstellen der Applikation sind beispielsweise mit einer XML Syntax beschrieben. Das erfindungsgemäße Verfahren ist jedoch nicht auf einen bestimmten Software-Standard festgelegt.User Interfaces The application is described with an XML syntax, for example. The inventive method however, is not set to a specific software standard.

Unabhängig von der genauen Ausführungsform ist das erfindungsgemäße Verfahren mittels eines Computerprogrammprodukts ausführbar, wobei ein von einem Computer lesbares Medium den Computer zur Durchführung des Verfahrens veranlasst. Das Programm ist hierbei nicht notwendigerweise auf einem einzigen Medium gespeichert, sondern kann beispielsweise, in Funktionsblöcke unterteilt, in mehreren örtlich voneinander getrennten Speichern abgelegt sein.Independent of the exact embodiment is the inventive method executable by a computer program product, one of a Computer readable medium causes the computer to perform the method. The Program is not necessarily on a single medium but may, for example, be subdivided into functional blocks, in several local be stored separately from each other.

Der Vorteil der Erfindung liegt insbesondere darin, dass zu einer für eine Multi-Monitor-Umgebung vorgesehenen Applikation automatisch Dynamic Pages als Subapplikationen generiert werden, welche eine optimierte Ausnutzung der vorhandenen Anzeigevorrichtungen ermöglichen. Hierfür kann eine Benutzerschnittstelle einer Applikation in einem einzigen Entwicklungszyklus für alle möglichen Monitorkonfigurationen entwickelt werden. Damit ist zu Beginn der Entwicklung einer Applikationsentwicklung die Möglichkeit gegeben, die gesamte Applikationsbenutzerschnittstelle in eine Hauptapplikation und eine beliebige Anzahl von Subapplikationen, nämlich Dynamic Pages, aufzuteilen, welche unabhängig voneinander, bei spielsweise simultan oder in beliebiger zeitlicher Reihenfolge, entwickelt werden können. Bereits in der Entwicklungsphase zeichnet sich die Applikation somit durch eine außerordentlich hohe Flexibilität aus.Of the Advantage of the invention is in particular that to one provided for a multi-monitor environment Application automatically generates dynamic pages as subapplications which is an optimized utilization of the existing display devices enable. Therefor can be a user interface of an application in a single Development cycle for all possible Monitor configurations are developed. This is the beginning of the Development of an application development given the opportunity the whole Application user interface into a main application and a to divide any number of subapplications, namely dynamic pages, which independently of each other, for example, simultaneously or in any chronological order, can be developed. Already in the development phase, the application is characterized by an extraordinarily high flexibility out.

Nachfolgend werden mehrere Varianten des erfindungsgemäßen Verfahrens sowie ein zur Durchführung des Verfahrens geeignetes Datenverarbeitungssystem anhand einer Zeichnung näher erläutert. Hierin zeigen:Below are several variants of the inventive method and a suitable for carrying out the method data processing system illustrated by a drawing. Herein show:

1 In symbolisierter Darstellung ein Datenverarbeitungssystem mit mehreren Anzeigevorrichtungen, 1 Symbolized representation of a data processing system with several display devices,

2 in einer schematischen Blockdarstellung ein Applikationsframework mit einer Applikation und mehreren Subapplikationen, 2 in a schematic block diagram an application framework with one application and several subapplications,

3 die prinzipielle Zusammenwirkung eines Konfigurationsfiles, eines Handlers, sowie mehrerer Benutzerschnittstellenelemente im Rahmen eines Applikationsframeworks, 3 the principal interaction of a configuration file, a handler and several user interface elements within an application framework,

4 die Nutzung mehrerer Sichtbereiche, welche durch eine Anzeigevorrichtung bereitgestellt werden, 4 the use of multiple viewing areas provided by a display device,

5 eine mögliche Nutzung eines einer Applikation zugeordneten Sichtbereichs, wobei zwei zur Applikation gehörende Subapplikationen existieren, 5 a possible use of a viewing area associated with an application, whereby two subapplications belonging to the application exist,

6 diverse Sichtbereiche in einem Multi-Monitor-System mit drei Anzeigevorrichtungen, 6 various viewing areas in a multi-monitor system with three display devices,

7 die Verwaltung verschiedener Sichtbereiche mit Hilfe eines Monitor Service in einem Datenverarbeitungssystem, und 7 the management of various viewing areas using a monitor service in a data processing system, and

8 die gleichzeitige Nutzung mehrerer Anzeigevorrichtungen in einem Multi-Monitor-System nach dem Prinzip der Facade. 8th the simultaneous use of several display devices in a multi-monitor system according to the principle of the Facade.

Einander entsprechende oder gleichwirkende Teile oder Parameter sind in allen Figuren mit den gleichen Bezugszeichen gekennzeichnet.each other corresponding or equivalent parts or parameters are in all Figures marked with the same reference numerals.

Ein in 1 in grober Schematisierung dargestelltes Datenverarbeitungssystem 1 umfasst ein Datenaufnahmesystem 2 sowie eine datentechnisch, insbesondere über ein Netzwerk, mit dem Datenaufnahmesystem 2 verbundene Datenverarbeitungseinheit 3. Das Datenaufnahmesystem 2 kann beispielsweise so genannte Modalitäten in der Medizintechnik, insbesondere bildgebende diagnostische Geräte wie Computertomographie- oder Magnetresonanzgeräte, umfassen. An die Datenverarbeitungseinheit 3 sind mehrere Anzeigevorrichtungen 4, nämlich Monitore, angeschlossen, so dass es sich bei dem Datenverarbeitungssystem 1 insgesamt um ein Multi-Monitor-System handelt. Es wird davon ausgegangen, dass sich die Monitorkonfiguration des Datenverarbeitungssystems 1 zu einer beliebigen Zeit ändern kann, indem beispielsweise ein zusätzlicher Monitor 4 an die Datenverarbeitungseinheit 3 angeschlossen wird.An in 1 in rough schematization represented data processing system 1 includes a data collection system 2 as well as a data technology, in particular via a network, with the data acquisition system 2 connected data processing unit 3 , The data acquisition system 2 For example, it may include so-called modalities in medical technology, in particular imaging diagnostic devices such as computed tomography or magnetic resonance devices. To the data processing unit 3 are several display devices 4 , namely monitors, connected so that it is the data processing system 1 total is a multi-monitor system. It is assumed that the monitor configuration of the data processing system 1 can change at any time by, for example, an additional monitor 4 to the data processing unit 3 is connected.

Als Basis für das mittels der Datenverarbeitungseinheit 3 durchführbare Verfahren steht ein Applikationsframework AF (2) zur Verfügung, der bei der Entwicklung von Benutzerschnittstellen, kurz auch als Schnittstellen oder als User Interfaces (UI) bezeichnet, die Visualisierung vom Verhalten einer Applikation trennt. Die Benutzerschnittstelle macht für den Benutzer im vorliegenden Fall eine der medizintechischen Datenverarbeitung zuzurechnende Applikation A sichtbar, wobei das Applikationsframework AF insbesondere zum Lesen und Laden von Daten der Schnittstelle der Applikation A genutzt wird. Da die Schnittstelle der Applikation A zu keinem Zeitpunkt geändert wird, wird auch von einem statischen Applikations User Interface gesprochen.As a basis for using the data processing unit 3 feasible methods is an application framework AF ( 2 ), which in the development of user interfaces, also referred to as interfaces or as user interfaces (UI), separates the visualization from the behavior of an application. The user interface makes visible for the user in the present case an application A attributable to the medical-technical data processing, the application framework AF being used in particular for reading and loading data of the interface of the application A. Since the interface of application A is not changed at any time, it is also referred to as a static application user interface.

Die in 2 in ihren Grundzügen skizzierte Softwarearchitektur ermöglicht es der Applikation A, während ihrer Laufzeit so genannte Dynamic Pages nachzuladen oder zu erzeugen, wobei es sich um dynamisch nach dem Start der Applikation A generierte Subapplikationen handelt. Im vereinfachten Beispiel nach 2 sind lediglich zwei Dynamic Pages als Subapplikationen S1, S2 angedeutet. Tatsächlich kann das Datenverarbeitungssystem 1 auch mit einer wesentlich höheren Zahl an Subapplikationen arbeiten, welche über das Applikationsframework AF an die Applikation A angebunden sind.In the 2 Software architecture outlined in its outline enables application A to reload or generate so-called dynamic pages during its runtime, these being subapplications dynamically generated after the start of application A. In the simplified example according to 2 only two dynamic pages are indicated as subapplications S1, S2. In fact, the data processing system 1 also work with a significantly higher number of subapplications, which are connected to the application A via the application framework AF.

Das Applikationsframework AF erfüllt beim Starten der Applikation A die Funktionen Laden eines Konfigurationsfiles, Parsen des Konfigurationsfiles, Erzeugen konfigurierter Benutzerschnittstellenelemente, Setzen von Parametern (Properties) der erzeugten Benutzerschnittstellenelemente, Platzieren und Visualisieren der Benutzerschnittstellenelemente, sowie Erzeugen einer Instanz eines Handlers.The Application framework AF met when starting application A the functions load a configuration file, Parsing the configuration file, generating configured user interface elements, Setting parameters (properties) of the generated user interface elements, Placing and visualizing user interface elements, and generating an instance of a handler.

Näheres zu diesen Schritten ist 3 veranschaulicht. Insbesondere ist die Zusammenwirkung eines Konfigurationsfiles K und eines zusätzlichen Handlers H mit dem Applikationsframework AF schematisch visualisiert. Weiter sind als Beispiele konfigurierter Benutzerschnittstellenelemente, auch als UI Elemente bezeichnet, ein Button BT, ein Slider SL und eine List Box LB dargestellt. Als weitere, nicht dargestellte Beispiele von UI Elementen sind Custom Controls zu nennen. Die beispielhaft genannten UI Elemente werden ebenso wie der mit diesen zusammenwirkende zusätzliche Handler H zur Laufzeit der Applikation A mittels des Applikationsframeworks AF erzeugt. Dagegen werden im Konfigurationsfile K enthaltene, in 3 nicht als gesonderte graphische Element dargestellte UI Elemente sowie ein ebenso zum Konfigurationsfile K gehörender, graphisch nicht hervorgehobener Handler bereits zum Start der Applikation A bereitgestellt.More about these steps 3 illustrated. In particular, the interaction of a configuration file K and an additional handler H with the application framework AF is schematically visualized. Further, as examples of configured user interface elements, also referred to as UI elements, a button BT, a slider SL and a list box LB are shown. Other non-illustrated examples of UI elements include custom controls. The UI elements mentioned by way of example, as well as the additional handler H interacting with them, are generated at runtime of the application A by means of the application framework AF. In contrast, K contained in the configuration file, in 3 not shown as a separate graphical element UI elements as well as a configuration file K belonging, graphically not highlighted handler already provided for the start of the application A.

Auf Details der Multi-Monitor-Nutzung, welche mit Hilfe des Applikationsframeworks AF flexibel realisiert wird, wird im Folgenden anhand 4 eingegangen. Das Applikationsframework AF koordiniert die anforderungsgerechte Nutzung von beispielsweise drei Monitoren 4, wobei im Beispiel nach 4 jeder Monitor 4 einen einzigen zur Anzeige von Daten vorgesehenen Sichtbereich V1, V2, V3 aufweist. Die Sichtbereiche V1, V2, V3 werden auch als Views bezeichnet. Ein einzelner Sichtbereich V1, V2, V3 kann in mehrere Untersichtbereiche A1, A2, A3, auch als Areas bezeichnet, aufgeteilt sein. Eine Aufteilung in Areas ist im vorliegenden Beispiel bei den Sichtbereichen V1, V3 gegeben. Die einzelnen Areas A1, A2, A3 dienen der Darstellung von Benutzerschnittstellenelemente. Beispielsweise sind dies die in 3 gezeigten UI Elemente UI–EL.On details of multi-monitor use, which with the help of the application framework AF flexible is realized in the following 4 received. The application framework AF coordinates the requirements-based use of, for example, three monitors 4 , in the example according to 4 every monitor 4 has a single viewing area V1, V2, V3 provided for displaying data. The viewing areas V1, V2, V3 are also called views. A single viewing area V1, V2, V3 can be divided into a plurality of lower viewing areas A1, A2, A3, also referred to as areas. A division into areas is given in the present example in the viewing areas V1, V3. The individual areas A1, A2, A3 are used to display user interface elements. For example, these are the ones in 3 shown UI elements UI-EL.

Bei der Entwicklung der Applikation A werden in einer ersten Ebene zunächst die Views V1, V2, V3 definiert, welche dann vom Applikationsframework AF erzeugt werden. Innerhalb eines Views V1, V2, V3 werden bei Bedarf mehrere Areas A1, A2, A3 konfiguriert, welchen durch Konfiguration die jeweils darzustellenden Benutzerschnittstellenelemente zugeordnet werden. Der Entwickler geht somit bei diesem View-Area Konzept nach einem strukturierten Top-Down Ansatz vor.at The development of the application A in a first level, the first Views V1, V2, V3 are defined, which then come from the application framework AF are generated. Within a view V1, V2, V3 will be on demand several Areas A1, A2, A3 configured by configuration associated with each user interface elements to be displayed become. The developer follows this view-area concept a structured top-down approach.

Der Applikationsframework AF zeichnet sich in besonderem Maße auch durch seine Erweiterungsfähigkeit aus. In diesem Zusammenhang spielen die jeder Applikation A zugeordneten Konfigurationsfiles K eine entscheidende Rolle, indem sie festlegen, welche Anteile der Applikation A zur Laufzeit geladen und erzeugt, aber auch wieder entladen werden können. Das Konfigurationsfile K unterscheidet sich von der zugehörigen Applikation A nicht durch die Struktur, sondern lediglich hinsichtlich des Inhalts, wobei der Applikationsframework AF der Applikation A Methoden anbietet, um das Konfigurationsfile K bedarfsweise zu laden oder zu entladen. Beim Laden des Konfigurationsfiles K laufen prinzipiell die gleichen Schritte wie beim Starten der Applikation ab, wobei im Unterschied hierzu die Erweiterung zusätzlich zur existierenden Benutzerschnittstelle visualisiert wird. Das Verhalten der Erweiterung, das heißt einer Subapplikation S1, S2, ist mittels eines dieser zugeordneten Handlers H beschrieben. Damit bleibt die Modularität der Applikation A unabhängig vom Erweiterungsgrad erhalten. Insgesamt stellt jede Subapplikation S1, S2 eine eigenständige Einheit dar, welche in der Lage ist, über definierte Schnittstellen mit weiteren Subapplikationen sowie mit der Applikation A zu kommunizieren.Of the Application framework AF is also particularly suitable through its expandability out. In this context, the applications assigned to each application A play Configuration files K play a crucial role by setting which parts of the application A are loaded and generated at runtime, but also can be unloaded again. The configuration file K does not differ from the associated application A by the Structure, but only in terms of content, the Application framework AF of application A offers methods to to load or unload the configuration file K as needed. When loading the configuration file K in principle run the same Steps as when starting the application, with a difference in addition the extension in addition is visualized to the existing user interface. Behaviour the extension, that is one Subapplication S1, S2, is by means of a handler associated therewith H described. Thus, the modularity of the application A remains independent of Degree of expansion obtained. Overall, each subapplication represents S1, S2 an independent Unit that is capable of having defined interfaces with Further subapplications and to communicate with the application A.

Die Zuordnung jeweils eines eigenen Handlers H sowohl zur Applikation A als auch zu jeder Subapplikation S1, S2 geht anschaulich aus 5 hervor. Die Benutzerschnittstelle der Applikation A ist hierin als Main Applikations UI bezeichnet. Von insgesamt n Subapplikationen (n > 1) sind in der vereinfachten Darstellung nach 5 lediglich zwei Subapplikations-Benutzerschnittstellen (Applikations-UI-Erweiterung UIE) visualisiert. Mit UI–EL werden hierbei UI-Elemente bezeichnet. Sowohl zur Visualisierung des Benutzerschnittstelle der Applikation A als auch zur Visualisierung der Benutzerschnittstellen jeder Subapplikation S1, S2 steht ein eigener Sichtbereich V1, V2, V3 zur Verfügung. Diese Sichtbereich V1, V2, V3 werden unter Berücksichtigung der verfügbaren Monitorkapazität des Datenverarbeitungssystems 1 automatisch vergeben und passen sich jeder Änderung der Monitorkonfiguration selbsttätig an.The assignment of a separate handler H both to the application A and to each subapplication S1, S2 is clear 5 out. The user interface of the application A is referred to herein as the main application UI. Out of a total of n subapplications (n> 1) are in the simplified representation 5 only two subapplication user interfaces (application UI extension UIE) visualized. UI-EL refers to UI elements. Both for visualization of the user interface of the application A as well as for visualization of the user interface of each subapplication S1, S2 is a separate field of view V1, V2, V3 available. These viewing areas V1, V2, V3 are taking into account the available monitor capacity of the data processing system 1 automatically assigned and adapt to any change in the monitor configuration automatically.

Existiert eine die vorhandenen Anzeigevorrichtungen 4 bereits mit der Hauptapplikation, das heißt der Applikation A, vollständig ausnutzende Visualisierung, auch als Applikationsgeometrie bezeichnet, so werden im Fall einer Erweiterung, also einer Generierung mindestens einer Subapplikation S1, S2, die dieser zugehörigen Benutzerschnittstellenelemente auf Sichtbereichen V1, V2, V3 (Views) und gegebenenfalls Untersichtbereichen A1, A2, A3 (Areas), welche ursprünglich für die Applikation A vorgesehen waren, platziert. Anschaulich gesprochen erfolgt somit bedarfsabhängig ein neuer Zuschnitt der Views V1, V2, V3 und Areas A1, A2, A3. Durch die Einfügung von Erweiterungen in die existierende Applikationsgeometrie ist die Mög lichkeit gegeben, die Applikation A und deren Erweiterungen unabhängig voneinander zu entwickeln.Does one exist the existing display devices 4 already with the main application, that is the application A, fully exploiting visualization, also referred to as application geometry, so in the case of an extension, ie generation of at least one subapplication S1, S2, the associated user interface elements on viewing areas V1, V2, V3 (Views ) and optionally sub-view areas A1, A2, A3 (Areas), which were originally intended for the application A, placed. Illustratively speaking, a new cut of the views V1, V2, V3 and Areas A1, A2, A3 takes place as needed. By inserting extensions into the existing application geometry, it is possible to develop application A and its extensions independently of each other.

Die flexible Aufteilung der vorhandenen Monitorkapazität wird durch den für die Subapplikationen S1, S2 verwendeten Begriff Dynamic Page DP herausgestellt, welcher auch in 6 aufgeführt ist. Das Konzept der Dynamic Pages umfasst die Konfigurierbarkeit der Applikation A hinsichtlich der Visualisierung, die Trennung von Visualisierung und Verhalten mittels Handler H, sowie das oben bereits erläuterte View-Area- und Erweiterungs-Konzept. Allgemein kann man einen Sichtbereich V1, V2, V3 als äußeren Rahmen der Applikation A betrachten, welcher nicht notwendigerweise mit dem von einem einzigen Monitor 4 bereitgestellten Anzeigebereich identisch ist. Vielmehr kann ein einziger Monitor 4 mehrere Sichtbereiche V1, V2, V3 aufweisen. Umgekehrt ist es im Ausnahmefall möglich, dass sich ein einziger Sichtbereich V1, V2, V3 über mehrere Monitore 4 erstreckt.The flexible distribution of the existing monitor capacity is emphasized by the term dynamic page DP used for the subapplications S1, S2, which is also used in 6 is listed. The concept of dynamic pages includes the configurability of application A with regard to visualization, the separation of visualization and behavior using handler H, as well as the view area and extension concept explained above. In general, one can regard a field of view V1, V2, V3 as the outer frame of the application A, which is not necessarily that of a single monitor 4 provided display area is identical. Rather, a single monitor can 4 have multiple viewing areas V1, V2, V3. Conversely, it is possible in exceptional cases that a single field of view V1, V2, V3 over several monitors 4 extends.

In jedem Fall ist der Sichtbereich V1, V2, V3 zur Visualisierung mindestens eines Benutzerschnittstellenelements geeignet. Die Applikation A wird ganzheitlich, in all ihren möglichen Monitorkonfigurationen betrachtet, wobei sich eine Aufteilung der Applikation A in spezifische Sichtbereiche V1, V2, V3 ergibt, die jeweils wiederum eine Einheit darstellen. Eine Subapplikation S1, S2 in Form einer Dynamic Page DP entsteht durch Zusammenfassung der Konfiguration eines Sichtbereichs V1, V2, V3 einschließlich seiner zugehörigen Untersichtbereiche A1, A2, A3 zu einer neuen Konfiguration.In any case, the viewing area V1, V2, V3 is suitable for visualizing at least one user interface element. The application A is considered holistically, in all its possible monitor configurations, with a division of the application A results in specific viewing areas V1, V2, V3, which in turn each represent a unit. A subapplication S1, S2 in the form of a Dynamic Page DP is created by summarizing the Kon figuration of a field of view V1, V2, V3 including its associated lower areas A1, A2, A3 to a new configuration.

Der Zugriff auf eine Sammlung von Dynamic Pages DP, das heißt von Subapplikationen S1, S2, sowie das Instanziieren während der Laufzeit der Applikation A wird bei jeder beliebigen Erweiterung EA der Applikation A mit Hilfe des Applikationsframeworks AF bewerkstelligt, wobei zur systematischen Trennung von Funktion und Visualisierung der Applikation A beziehungsweise jeder Subapplikation S1, S2 sowohl der Applikation A als auch jeder Subapplikation S1, S2 jeweils ein eigener Handler H zugeordnet ist. Sichtbereiche V1, V2, V3 können nicht nur durch die Applikation A, sondern auch durch jede Subapplikation S1, S2 in jeder beliebigen Anzahl erzeugt werden. Hierbei werden die durch einzelne Anzeigevorrichtungen 4 zur Verfügung gestellten, in der Regel voneinander abweichenden Anzeigemöglichkeiten automatisch mit Hilfe des Applikationsframeworks AF abgeglichen und je nach Bedarf ohne Eingriff des Benutzers den verschiedenen Subapplikationen S1, S2 sowie der Applikation A zugeordnet.The access to a collection of dynamic pages DP, that is of subapplications S1, S2, as well as the instantiating during the runtime of the application A is done with any extension EA of the application A using the application framework AF, wherein the systematic separation of function and Visualization of the application A or each subapplication S1, S2 both the application A and each subapplication S1, S2 each own handler H is assigned. Viewing regions V1, V2, V3 can be generated in any number not only by the application A, but also by each subapplication S1, S2. Here are the by individual display devices 4 provided, usually different from each other display options automatically adjusted using the application framework AF and assigned as needed without intervention of the user the various subapplications S1, S2 and the application A.

Der Applikationsframeworks AF ist, wie in 7 angedeutet, in einer Ablaufumgebung AU eingebettet. Der Applikationsframework AF ist hierbei zwar für die Erzeugung der Sichtbereiche V1, V2, V3, aber nicht für deren Visualisierung auf einer speziellen Anzeigevorrichtung 4 vorgesehen. Vielmehr reicht der Applikationsframework AF die erzeugten Sichtbereiche V1, V2, V3 zusammen mit einem logischen Namen an die Ablaufumgebung AU weiter, welche anhand des logischen Namens jeden Sichtbereich V1, V2, V3 einer physikalischen Anzeigevorrichtung 4, das heißt in der Regel einem Monitor, zuordnet. Statt eines Monitors kann abhängig vom Verwendungszweck des Datenverarbeitungssystems 1 und von den örtlichen Gegebenheiten auch eine beliebige andere Anzeigevorrichtung 4, beispielsweise ein Projektionsgerät, zum Einsatz kommen. Mit dem Bezugszeichen 5 wird in 7 ein „Dynamic Page Repository"-Block und mit M ein „Monitor Service" bezeichnet.The application frameworks AF is, as in 7 indicated, embedded in a runtime environment AU. The application framework AF is in this case for the generation of the viewing areas V1, V2, V3, but not for their visualization on a special display device 4 intended. Rather, the application framework AF extends the generated viewing areas V1, V2, V3 together with a logical name to the runtime environment AU, which uses the logical name of each viewing area V1, V2, V3 of a physical display device 4 , which is usually a monitor, assigns. Instead of a monitor, depending on the intended use of the data processing system 1 and from the local conditions, any other display device 4 , For example, a projection device, are used. With the reference number 5 is in 7 a "Dynamic Page Repository" block and M a "Monitor Service".

Unabhängig davon, wie die Anzeigevorrichtungen 4 im Einzelfall ausgebildet sind, bietet der Applikationsframework AF jedem Handler H die Möglichkeit, über einen Service die aktuelle Monitorkonfiguration der Klientenhardware abzufragen. Diese Information ermöglicht es jedem Handler H, bereits vor dem Laden einer Subapplikation S1, S2 eine Vorauswahl aus den zur Verfügung stehenden Subapplikation S1, S2, das heißt Dynamic Pages, zu treffen. Im Fall einer Änderung der Monitorkonfiguration des Datenverarbeitungssystems 1 durch den Benutzer, im einfachsten Fall durch Anschluss oder Abklemmen eines Monitors 4, stellt sich die Applikation A ohne Änderung ihrer Konfiguration oder ihres Codes selbsttätig auf die neue Monitorkonfiguration ein.Regardless of how the display devices 4 are designed in individual cases, the application framework AF offers each handler H the ability to query the current monitor configuration of the client hardware via a service. This information allows each handler H to make a pre-selection from the available subapplication S1, S2, that is to say dynamic pages, even before loading a subapplication S1, S2. In the case of a change in the monitor configuration of the data processing system 1 by the user, in the simplest case by connecting or disconnecting a monitor 4 , Application A automatically sets itself to the new monitor configuration without changing its configuration or code.

Zum Zweck der automatischen Adaption auf eine neue Monitorkonfiguration wird die Erzeugung der Sichtbereiche V1, V2, V3 und ihre Platzierung auf einem physikalisch vorhandenen Monitor 4 durch eine eigene Softwarekomponente separiert, welche nach dem Prinzip der Facade (Monitor Plazierung Facade 6) arbeitet, wie in 8 veranschaulicht. Zunächst konfiguriert ein in die Software integrierter Applikationsentwickler als Attribut an jeden Sichtbereich V1, V2, V3 eine logische Monitor-Adresse (Monitor-ID), welche dann mit Hilfe der Facade einer physikalischen Anzeigevorrichtung 4 zugeordnet wird, so dass der Sichtbereich V1, V2, V3 auf einem Monitor 4 platziert werden kann. Mit 7 wird hierbei ein Plazierungsalgorithmus bezeichnet und 8 steht für „View Dynamic Page".For the purpose of automatically adapting to a new monitor configuration, the generation of the viewing areas V1, V2, V3 and their placement on a physically existing monitor 4 separated by its own software component, which according to the principle of the Facade (Monitor Placement Facade 6 ) works as in 8th illustrated. Firstly, an application developer integrated in the software configures as an attribute to each viewing area V1, V2, V3 a logical monitor address (monitor ID) which is then used with the aid of the facade of a physical display device 4 is assigned, so that the visual range V1, V2, V3 on a monitor 4 can be placed. With 7 this is called a placement algorithm and 8th stands for "View Dynamic Page".

Nach einer vorteilhaften Ausgestaltung ist die Möglichkeit gegeben, der Applikation A sowie den Subapplikationen S1, S2, insbesondere jeder Dynamic Page, welche mit den Subapplikationen S1, S2 identisch oder von diesen umfasst sind, ein konfigurierbares Regelset zugeordnet, welches unter Nutzung des Applikationsframeworks AF einem Sichtbereich V1, V2, V3 einen geeigneten Monitor 4 zuordnet. Eine einfache Regel könnte beispielsweise bestimmen, in allen Fällen, soweit verfügbar, denselben Monitor 4 zu verwenden. Eine andere Regel könnte festlegen, dass für bestimmte Sichtbereiche V1, V2, V3 ausschließlich ein Monitor mit einer festgelegten Mindestauflösung verwendet wird. Nach einer weiteren Regel könnte vorgesehen sein, für einen bestimmten Sichtbereich V1, V2, V3 stets einen Monitor 4 mit einem bestimmten logischen Namen zu nutzen, wobei der logische Name beispielsweise vorab durch den Benutzer wahlweise einer von mehreren Anzeigevorrichtungen 4 zugeordnet worden sein kann. Diese beispielhafte Aufzählung möglicher Regeln für die Nutzung der im Datenverarbeitungssystem 1 zur Verfügung stehenden Anzeigevorrichtungen 4 ist keineswegs abschließend. Vielmehr ist es möglich, beliebige Zusammenhänge zwischen für die Anzeige von Daten bereitzus tellenden Sichtbereichen V1, V2, V3 und physikalisch vorhandenen Anzeigevorrichtungen 4 in der Datenverarbeitungseinheit 3 zu hinterlegen, insbesondere in Form eines programmierten Regelsets. Damit entfällt der Aufwand einer Anpassung der Konfiguration der Applikation A im Fall einer Änderung der Monitorkonfiguration.According to an advantageous embodiment, the possibility exists of assigning the application A and the subapplications S1, S2, in particular each dynamic page, which are identical to or encompassed by the subapplications S1, S2, to a configurable set of rules which, using the application framework AF Viewing area V1, V2, V3 a suitable monitor 4 assigns. For example, a simple rule might determine the same monitor in all cases, if available 4 to use. Another rule could specify that for certain viewing areas V1, V2, V3 only a monitor with a fixed minimum resolution is used. According to another rule could be provided for a certain field of view V1, V2, V3 always a monitor 4 with a particular logical name, for example, the logical name optionally being pre-selected by the user, optionally one of a plurality of display devices 4 may have been assigned. This illustrative list of possible rules for the use of the data processing system 1 available display devices 4 is by no means exhaustive. Rather, it is possible to arbitrary relationships between bereitzust for the display of data indicating viewing areas V1, V2, V3 and physically existing display devices 4 in the data processing unit 3 to deposit, in particular in the form of a programmed rule set. This eliminates the expense of customizing the configuration of application A in the event of a change in the monitor configuration.

Claims

A method of data processing in a multi-monitor environment, comprising the following steps: - providing an application (A) in one of a plurality of display devices ( 4 ) comprehensive data processing system ( 1 ), - generation of a logically ver with the application (A) linked subapplication (S1, S2) during the runtime of the application (A), - automatic assignment by means of the various display devices ( 4 ) displayable regions (V1, V2, V3) for application (A) and subapplication (S1, S2), characterized in that the application (A) and the at least one subapplication (S1, S2) assigned to a common application framework (AF) and a logical link between the application framework (AF) and one of a runtime environment (AU) associated, working on the principle of the Facade Monitor Service (M) is produced.

Method according to claim 1, characterized in that that the application (A) assigned to several subapplications (S1, S2) become.

Method according to claim 1 or 2, characterized that different viewing areas (V1, V2, V3) for visualization of different interfaces (UI) of the application (A) and the data concerning at least one subapplication (S1, S2) be used.

Method according to one of claims 1 to 3, characterized that by means of a handler (H) a separation of visualization and function of the application (A) takes place.

Method according to one of claims 1 to 4, characterized that by means of a handler (H) a separation of visualization and function of the at least one subapplication (S1, S2) takes place.

Method according to claim 5, characterized in that that each subapplication (S1, S2) is assigned a separate handler (H) becomes.

Method according to one of claims 1 to 6, characterized in that the application (A) together with the at least one subapplication (S1, S2) in each possible monitor configuration in the data processing system ( 1 ) automatically display the available display devices ( 4 ) with division into visible areas (V1, V2, V3) as well as Untersichtbereiche (A1, A2, A3) uses.

A data processing system in a multi-monitor environment, comprising a plurality of display devices ( 4 ) and a data processing unit linked thereto ( 3 ), which is arranged for data processing to carry out the method according to claim 1.