EP2356809A2 - Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit - Google Patents

Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit

Info

Publication number
EP2356809A2
EP2356809A2 EP09783040A EP09783040A EP2356809A2 EP 2356809 A2 EP2356809 A2 EP 2356809A2 EP 09783040 A EP09783040 A EP 09783040A EP 09783040 A EP09783040 A EP 09783040A EP 2356809 A2 EP2356809 A2 EP 2356809A2
Authority
EP
European Patent Office
Prior art keywords
image
control unit
output unit
output
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP09783040A
Other languages
English (en)
French (fr)
Inventor
Christian Reimann
Holger Santelmann
Gerhard Schulz
Frank Arndt
Hans-Gerd Brummel
Volker Heblinski
Willi Paschmann
Olaf Schmidt
Dietmar Weber
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP2356809A2 publication Critical patent/EP2356809A2/de
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Definitions

  • the invention relates to a method for transmitting an image from a first control unit to a second control unit and to an output unit for carrying out the method.
  • the maintenance technician has a mobile computer system with a head-mounted display (HMD) for the maintenance of technical systems.
  • the maintenance technician can access application-related documents on his mobile computer system, whereby the documents are formed from documents that are required for the maintenance of the relevant technical system. These documents typically created an expert in the Back Office ⁇ .
  • the maintenance technician can have the documents displayed on his head-mounted display of the mobile computer system by using a zoom function to select a suitable image detail from an overall image.
  • the display capability of a head-mounted display differs significantly from the display capability of a conventional monitor of the expert in the back office.
  • the resolution of the HMD is significantly lower.
  • the maintenance technician has hitherto selected the important details of the documents in a time-consuming manner with the aid of a zoom function.
  • the object of the invention is to provide a method and a device for jointing with which the War ⁇ tung technician can operate his computer system with HMD with as few interactions.
  • a method according to the invention is used, in which the image to be displayed is displayed by a first control unit on a first output unit with a first image resolution. On a second control unit with a second output unit, the image to be displayed is displayed on the second output unit with the same image resolution as on the first monitor, wherein the second output unit is designed as an HMD.
  • the first output unit is preferably a commercially available monitor, e.g. an LCD monitor with high image resolution of for example 1280x800 and more, and the first control unit designed as a commercially available computer.
  • the image is composed of a photo of the technical equipment to be maintained and in each case the photo superimposed annotations such. For example, technical texts, freehand lines, circles around technical issues shown on the photo. As a result, all relevant information is quickly available to the service technician.
  • the first output unit there are further pixels for representing an input menu field for storing the image to be transmitted. This makes it possible to provide the service technician exactly or only the images that he needs.
  • additional pixels are present on the first output unit outside of the image for displaying a further input menu field on which a preview of a digital photo is made possible, from which a partial detail of a first or further photos can be selected by menu navigation.
  • This allows the expert in the back office to select exactly the image sections that the maintenance technician needs in his system. This avoids that the maintenance technician is distracted by unimportant image sections.
  • the service technician can access online from his control unit with the head-mounted display to the images stored on the first control unit, which the expert has stored in the back-office for the service technician.
  • the service technician always has the latest versions of the images available.
  • the image desired by the service technician is transmitted in advance from the first control unit via a data transmission line to the second control unit and stored there.
  • the maintenance technician can thus view locally from his second control unit by activating a menu screen on the HMD the respectively called image. There- Through the maintenance technician can access his documents even without the availability of an online data line, z. B. in case of failure of the data transmission line in case of failure.
  • the first dispensing unit a higher ver ⁇ Tikale and / or horizontal resolution than the second output unit. This allows the expert in the back office on his large monitor conveniently and quickly create the images for the maintenance technician.
  • the service technician can only access the immutable images created by the back office expert. An adjustment of the image by the maintenance technician is therefore not feasible. This will prevent the image from being mistakenly altered by the service technician in the field and a format that is difficult to read on the HMD.
  • the developed for viewing of the document or the image and to insert annotations upper flat element on the first output unit has exactly the resolution or size (in Pi ⁇ xeln) such as that developed for display in the HMD upper flat element. This prevents otherwise necessary scalings, in which the document under certain circumstances optically worse.
  • the expert selected from the general stock of documents in the back ⁇ Office documents and determined at each step of the technician to benot costumen documents neckline, under certain circumstances also multiple openings per document. The expert adds If necessary, add annotations and place them in a structured directory, which is made available to the technician online or offline.
  • Figure 1 The system on which the method for transmitting an image from a first to a second control unit profundkelbar.
  • FIG. 2 shows a representation of an image on the first output unit which can be processed by the expert in the back-office.
  • Figure 3 the representation of an image on a HMD, which is selectable by a service technician via a menu.
  • FIG. 4 shows a further comparison of the representations on the first output unit and on the second output unit (HMD).
  • FIG. 1 shows the system on which the method for transmitting an image from a first to a second control unit S1, S2 runs.
  • FIG. 1 shows a first control unit S1, which is a commercially available computer or computer.
  • a keyboard TAI and a mouse MA are connected to the control unit S1.
  • the output unit Ml is designed as a commercially available LCD monitor with high image resolution of 1280 x 800 or more. On the monitor M1 are shown in the following figures Images Bl, B2, Photos PHl, PH2 and input fields EMI1 to EM14 were output.
  • a second control unit S2 is provided, to which a keyboard TA2, a mouse MA2, a microphone MI and a second output unit M2 can be connected as input media.
  • the second output unit M2 is designed as a head mounted display (HMD), which is worn by a maintenance technician WT on the head, a flexible mobile use is made possible even under difficult environmental conditions.
  • HMD head mounted display
  • the service technician may be controlled by voice control, e.g. by command "before”, command "back”, via the microphone MI connected to the headset M2 or the computer S2 to control the menu field EM2 shown in FIG.
  • the first and second control units S1, S2 can be connected to one another via a data connection D1.
  • the data link DL can for example be a standard TCP / IP protocol Internetpro ⁇ .
  • the data connection Dl can alternatively be carried out asynchronously by storing the data on a transportable data medium (hard disk, USB stick, etc.).
  • FIG. 2 shows the output on a first output unit M1, on which an image B1 can be processed by an expert in the back office.
  • an image B1 can be processed by an expert in the back office.
  • the expert in the back office now processes the image Bl technical unit TA so that the War ⁇ processing technician WT is purposefully made to the technical problem. This is done by selecting from a suitable partial section of a photo PHl that is visible to the right of the image Bl in a menu field EM12.
  • the expert Bl can superimpose annotations on the image Bl by means of the menu field EM14 arranged above the image B1. Examples play as a circle around the Al special techni ⁇ cal property "terminals" of the technical unit TA is set here. An arrow connects the text "V?" with the circle Al.
  • the annotations A1, A2 indicate to the service technician that he should observe or measure or check the voltage (in volts) at the terminals located in circuit A1.
  • the technical system TA contains in the picture Bl some circuit breakers including wiring in a cabinet dar. Furthermore lines, rectangles and other geometric shapes can be superimposed on the image Bl.
  • the menu field EMI1 is arranged, with which the images or documents can be stored or can be recalled for further processing.
  • the right of the picture Bl below the Menufelds Emil is the Em- gabemenufeld EM12 arranged, the control elements for initial dialing of a document or a photograph PhI for further processing.
  • the image Bl as Sectionaus ⁇ section of the pictures from PhI Experts.
  • Em further input menu EM13 is located below the image Bl and provides controls for transferring or
  • FIG. 3 shows the representation of the images B1, B2, "that is visible to the maintenance technician WT. visible from his head-mounted display M2.
  • the pictures Bl, B2, ". are each shown on the head-mounted display Ml with the same screen resolution as on the pictures Bl, Bl, ... on the first output ⁇ ment unit Ml.
  • FIG. 4 shows the illustration of the image B1 on the first output unit M1 and the representation of the image B1 on the second output unit M2.
  • the maintenance technician sees an image B1 that has the same resolution as the image B1, which the expert from the back office sees on his first output unit M1.
  • the expert on the first output unit Ml can see in his workspace only the representation that also sees the maintenance technician WT. This avoids the maintenance technician WT gets to see an unfavorable resolution on his head mounted display due to carelessness of the expert in the back office.
  • FIG. 4 a shows a further embodiment of the image from FIG. 4, in which the input EMi of FIGS. 2 and 3 are shown in detail.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Übertragen eines Bildes von einer ersten Steuereinheit auf eine zweite Steuereinheit, wobei ein Wartungstechniker (WT) das Bild auf seinem Head-Mounted Display zur Wartung von technischen Anlagen anschauen kann. Das Bild wurde erzeugt von einem Experten im Back-Office auf einer ersten Ausgabeeinheit (M1). Das Bild wird auf der ersten Ausgabeeinheit (M1) mit der gleichen Auflösung wiedergegeben wie auf dem Head-Mounted Display. Mit weiteren Optionen wird die Effizienz des Wartungstechnikers (WT) erhöht.

Description

Beschreibung
Verfahren zum Übertragen eines Bildes von einer ersten Steuereinheit auf eine zweite Steuereinheit und Ausgabeeinheit
Die Erfindung betrifft ein Verfahren zum Übertragen eines Bildes von einer ersten Steuereinheit auf eine zweite Steuereinheit und eine Ausgabeeinheit zur Durchfuhrung des Verfahrens .
Aus Wikipedia "Head-Mounted Display" (Ausdruck März 2009) sind verschiedene Ausfuhrungsformen eines am Kopf befestigten visuellen Ausgabegerats bekannt, das am Computer erzeugte Bilder auf einem augennahen Bildschirm darstellt oder direkt auf die Netzhaut projiziert.
Zur Wartung von technischen Anlagen verfugt der Wartungstechniker über ein mobiles Rechner-System mit einem Head-Mounted Display (HMD) . Der Wartungstechniker kann auf anwendungsbezo- gene Unterlagen auf seinem mobilen Rechner-System zugreifen, wobei die Unterlagen aus Dokumenten gebildet werden, die zur Wartung der betreffenden technischen Anlage benotigt werden. Diese Dokumente erstellt üblicherweise ein Experte im Back¬ Office. Der Wartungstechniker kann sich die die Dokumente auf seinem Head-Mounted Display des mobilen Rechner-Systems anzeigen lassen, indem er über eine Zoom- Funktion einen geeigneten Bildausschnitt aus einem Gesamtbild auswählen kann.
Die Darstellungsfahigkeit eines Head-Mounted Displays unter- scheidet sich deutlich von der Darstellungsfahigkeit eines üblichen Monitors des Experten im Back-Office Insbesondere ist die Auflosung des HMDs deutlich geringer.
Der Wartungstechniker hat bisher zeitaufwandig mit Hilfe ei- ner Zoom-Funktion die wichtigen Details der Dokumente ausgewählt . Die Aufgabe der Erfindung besteht darin, ein Verfahren und eine Vorrichtung zur Verfugung zu stellen, mit dem der War¬ tungstechniker sein Rechner-System mit HMD mit möglichst wenigen Interaktionen bedienen kann.
Die Aufgabe der Erfindung wird durch die Merkmale der unab¬ hängigen Patentansprüche gelost.
Vorteilhafte Weiterbildungen der Erfindung sind in den abhan- gigen Patentansprüchen dargestellt.
Es wird ein erfmdungsgemaßen Verfahren genutzt, bei dem das darzustellende Bild von einer ersten Steuereinheit auf einer ersten Ausgabeeinheit mit einer ersten Bildauflosung darge- stellt wird. Auf einer zweiten Steuereinheit mit einer zweiten Ausgabeeinheit wird das darzustellende Bild auf der zweiten Ausgabeeinheit mit der gleichen Bildauflösung wie auf dem ersten Monitor dargestellt, wobei die zweite Ausgabeeinheit als HMD ausgebildet ist.
Dabei ist vorzugsweise die erste Ausgabeeinheit als handelsüblicher Monitor, z.B. ein LCD Monitor mit hoher Bildauflosung von beispielsweise 1280x800 und mehr, und die erste Steuereinheit als handelsüblicher Computer ausgebildet.
Vorzugsweise sind auf der zweiten Ausgabeeinheit außerhalb des ersten Bildes weitere Pixel zur Darstellung von Statusin¬ formationen und eines Emgabe-Menufeldes zum sequentiellen Aufruf des Bildes oder weiterer Bilder vorhanden. Dabei wird/werden das weitere Bild/die weiteren Bilder ebenso wie das erste Bild auf der zweiten Ausgabeeinheit mit der glei¬ chen Bildauflösung wie auf der ersten Ausgabeeinheit dargestellt. Dadurch kann der Wartungstechniker schnell auf die gewunsch- ten Informationen zugreifen. Ferner reicht für den Wartungstechniker ein einfaches Eingabemittel aus, z.B. mit der einfachen Funktion „Klicken vor - klicken zurück". Vorzugsweise wird das Bild zusammengestellt aus einem Photo der zu wartenden technischen Anlage und jeweils den das Photo überlagernden Annotationen wie z. B. Texte mit technischen Sachverhalten, Freihandlinien, Kreise um von auf dem Photo dargestellten technischen Sachverhalten. Dadurch stehen dem Wartungstechniker alle relevanten Informationen schnell zur Verfugung .
Vorzugsweise sind auf der ersten Ausgabeeinheit außerhalb des Bildes weitere Pixel zur Darstellung eines Eingabe-Menufelds zur Abspeicherung des zu übertragenden Bildes vorhanden. Dadurch ist es möglich, dem Wartungstechniker genau bzw. nur die Bilder zur Verfugung zu stellen, die er auch benotigt.
Vorzugsweise sind auf der ersten Ausgabeeinheit zusatzlich außerhalb des Bildes weitere Pixel zur Darstellung eines weiteren Eingabe-Menufeldes vorhanden, auf denen eine Vorschau auf ein digitales Photo ermöglicht wird, aus dem durch Menu- fuhrung ein Teilausschnitt aus einem ersten bzw. weiteren Photos auswahlbar ist. Dadurch kann sich der Experte im BackOffice in seinem System genau die Bildausschnitte auswählen, die der Wartungstechniker benotigt. Dadurch wird vermieden, dass der Wartungstechniker durch unwichtige Bildausschnitte abgelenkt wird.
Vorzugsweise kann der Wartungstechniker von seiner Steuereinheit mit dem Head-Mounted Display auf die auf der ersten Steuereinheit gespeicherten Bilder online zugreifen, die der Experte im Back-Office für den Wartungstechniker abgespei- chert hat. Dadurch hat der Wartungstechniker immer die aktuellsten Versionen der Bilder zur Verfugung.
Vorzugsweise wird das vom Wartungstechniker gewünschte Bild vorab von der ersten Steuereinheit über eine Datenubertra- gungsleitung auf die zweite Steuereinheit übertragen und dort abgespeichert. Der Wartungstechniker kann somit lokal von seiner zweiten Steuereinheit durch Ansteuern eines Menufens- ters auf dem HMD das jeweils aufgerufene Bild anschauen. Da- durch kann der Wartungstechnrker auch ohne Verfügbarkeit einer Online-Datenleitung auf seine Dokumente zugreifen, z. B. bei Ausfall der Datenubertragungsleitung im Falle einer Störung.
Vorzugsweise weist die erste Ausgabeeinheit eine höhere ver¬ tikale und/oder horizontale Bildauflösung auf als die zweite Ausgabeeinheit. Dadurch kann der Experte im Back-Office auf seinem großen Monitor bequem und schnell die Bilder für den Wartungstechniker erstellen.
Vorzugsweise kann der Wartungstechniker nur auf die unveränderbaren Bilder zugreifen, die vom Experten im Back-Office erstellt wurden. Ein Anpassen des Bilds durch den Wartungs- techniker ist somit nicht durchfuhrbar. Dadurch wird verhindert, dass das Bild durch den Wartungstechniker im Einsatz irrtümlich verändert wird und ein Format erhalt, das auf dem HMD schlecht lesbar ist.
Um das durch den Wartungstechniker bewusst durchgeführte Anpassen eines Dokuments bzw. eines Bilds zu unterbinden, ist die Oberflache, mit dem der Experte im Back-Office die Anno¬ tationen durchfuhrt, so angepasst, dass er automatisch und ohne es beachten zu müssen, nur Dokumente oder Ausschnitte mit Annotationen der zweiten Steuereinheit zur Verfugung stellt, die auch durch den Wartungstechniker mit einem HMD wahrnehmbar sind.
Das zur Ansicht des Dokuments bzw. des Bilds und zum Einfügen von Annotationen entwickelte Oberflachenelement auf der ersten Ausgabeeinheit hat genau die Auflosung bzw. Große (in Pi¬ xeln) wie das zur Anzeige im HMD entwickelte Oberflachenelement. Dies verhindert sonst notwendige Skalierungen, bei denen das Dokument unter Umstanden optisch schlechter wird. Aus dem allgemeinen Dokumentenbestand wählt der Experte im Back¬ Office Dokumente aus und bestimmt zu jedem Arbeitsschritt des Technikers den benotigten Dokumentenausschnitt, unter Umstanden auch mehrere Ausschnitte pro Dokument. Der Experte fugt gegebenenfalls Annotationen hinzu und legt diese in einem strukturierten Verzeichnis ab, das dem Techniker online oder offline verfugbar gemacht wird.
Im Folgenden sind die Figuren zur Erläuterung der Erfindung dargestellt .
Es zeigen:
Figur 1: Das System, auf dem das Verfahren zum Übertragen eines Bildes von einer ersten auf eine zweite Steuereinheit durchfuhrbar ist.
Figur 2: eine Darstellung eines Bilds auf der ersten Ausga- beeinheit, das für den Experten im Back-Office bearbeitbar ist.
Figur 3: die Darstellung eines Bilds auf einem HMD, das von einem Wartungstechniker über ein Menü auswahlbar ist .
Figur 4: eine Gegenüberstellung der Darstellungen auf der ersten Ausgabeeinheit und auf der zweiten Ausgabe¬ einheit (HMD) . Figur 4a: eine weitere Gegenüberstellung der Darstellungen auf der ersten Ausgabeeinheit und auf der zweiten Ausgabeeinheit (HMD) .
In Figur 1 ist das System dargestellt, auf dem das Verfahren zum Übertragen eines Bildes von einer ersten auf eine zweite Steuereinheit Sl, S2 ablauft. In Figur 1 ist eine erste Steuereinheit Sl dargestellt, die ein handelsüblicher Rechner oder Computer ist. Als Eingabemedium sind an die Steuerein- heit Sl eine Tastatur TAI und eine Maus MA angeschlossen.
Die Ausgabeeinheit Ml ist als handelsüblicher LCD-Monitor mit hoher Bildauflösung mit 1280 x 800 oder mehr ausgebildet. Auf dem Monitor Ml werden die in den nachfolgenden Figuren darge- stellten Bilder Bl, B2, Photos PHl, PH2 und Eingabefelder EMIl bis EM14 ausgegeben.
Es ist eine zweite Steuereinheit S2 vorgesehen, an die als Eingabemedien eine Tastatur TA2, eine Maus MA2, ein Mikrofon MI und eine zweite Ausgabeeinheit M2 anschließbar sind. Die zweite Ausgabeeinheit M2 ist als Head Mounted Display (HMD) ausgebildet, das von einem Wartungstechniker WT auf dem Kopf getragen wird, ein flexibler mobiler Einsatz auch unter schwierigen Umgebungsbedingungen ermöglicht wird.
An die zweite Steuereinheit S2 sind weiterhin spezielle Eingabemittel anschließbar, die für den flexiblen Einsatz des Wartungstechnikers WT ausgelegt sind. Insbesondere ist durch die in der folgenden Figur 3 dargestellten vereinfachten Me- nufuhrung ein einfaches Eingabemittel K mit der Funktionalität „Klick Bild weiter/Klick vor - Klick Bild zuruck/Klick zurück" ausreichend. (Welche Eingabemittel gibt es hier auf dem Markt?)
Weiterhin kann der Wartungstechniker durch Sprachsteuerung, z.B. durch Kommando „Vor", Kommando „zurück", über das am Headset M2 oder am Rechner S2 angeschlossene Mikrofon MI das in Figur 3 dargestellte Menufeld EM2 steuern.
Auf der zweiten Ausgabeeinheit M2 wird das in folgender Figur 3 dargestellte Gesamtbild dargestellt:
Die erste und die zweite Steuereinheit Sl, S2 sind über eine Datenverbindung Dl miteinander verbindbar. Die Datenverbindung Dl kann beispielsweise ein übliches TCP/IP- Internetpro¬ tokoll erfolgen. Die Datenverbindung Dl kann alternativ asynchron durch Speicherung der Daten auf einem transportablen Datenmedium (Festplatte, USB-Stick, usw.) erfolgen.
In Figur 2 ist die Ausgabe auf einer ersten Ausgabeeinheit Ml dargestellt, auf der ein Bild Bl für einen Experten im BackOffice bearbeitbar ist. Auf dem Bild Bl ist eine technische Anlage TA dargestellt. Der Experte im Back-Office bearbeitet nun das Bild Bl der technischen Anlage TA so, dass der War¬ tungstechniker WT zielgerichtet auf die technische Problemstellung hingewiesen wird. Dies geschieht durch Auswahl aus einem geeigneten Teilausschnitt eines Photos PHl, dass rechts vom Bild Bl in einem Menufeld EM12 sichtbar ist.
Dem Bild Bl kann der Experte durch das oberhalb des Bildes Bl angeordneten Menufelds EM14 Annotationen überlagern. Bei- spielsweise wird hier ein Kreis Al um die spezielle techni¬ sche Eigenschaft „Klemmen" der technischen Anlage TA gelegt. Ein Pfeil verbindet den Text „Volt?" mit dem Kreis Al. Durch die Annotationen Al, A2 wird dem Wartungstechniker darauf hingewiesen, dass er die Spannung (in Volt) an den sich im Kreis Al befindlichen Klemmen beachten bzw. messen oder überprüfen soll. Die technische Anlage TA enthalt in dem Bild Bl einige Sicherungsschalter inklusive Verkabelung in einem Schaltschrank dar. Weiterhin können Linien, Rechtecke und andere geometrischen Formen dem Bild Bl überlagert werden.
Außerhalb des Bildes Bl sind weitere Bildschirmbereiche mit unterschiedlichen Menufeidern EMIl bis EM14 enthalten:
Rechts vom Bild Bl ist das Menufeld EMIl angeordnet, mit dem die Bilder bzw. Dokumente abgelegt werden können bzw. zur weiteren Bearbeitung wieder aufgerufen werden können.
Rechts vom Bild Bl unterhalb des Menufelds EMIl ist das Em- gabemenufeld EM12 angeordnet, das Steuerungselemente zur Aus- wähl eines Dokuments bzw. eines Photos PhI zur weiteren Bearbeitung dar. Beispielsweise wird das Bild Bl als Teilaus¬ schnitt des Photos PhI vom Experten erzeugt.
Em weiteres Eingabemenufeld EM13 ist unterhalb des Bildes Bl angeordnet und stellt Steuerelemente zum Übertragen bzw.
Speichern von fertig erstellten Bildern Bl, B2,... dar. Hier kann z. B. die Übertragung der Bilder Bl, B2,... von der ersten Steuereinheit auf die zweite Steuereinheit erfolgen. In Figur 3 ist die für den Wartungstechniker WT sichtbare Darstellung der Bilder Bl, B2,„. aus seinem Head-Mounted Display M2 sichtbar. Die Bilder Bl, B2,„. sind jeweils auf dem Head-Mounted Display Ml mit der gleichen Bildschirmauflosung dargestellt wie auf den Bildern Bl, Bl, ... auf der ersten Aus¬ gabeeinheit Ml.
Unterhalb des Bildes Bl ist das Eingabemenufeld EM2 darge- stellt und vom Wartungstechniker WT durch das einfache Einga¬ bemittel K bedienbar. Der Wartungstechniker wählt aufgrund seiner beschrankten Eingabemittel die Bilder, B2... durch im Eingabemenufeld EM2 aus. Alternativ kann der Wartungstechniker nur durch eine „vor- zurück"- Taste die Bilder sequen- tiell auswählen. Der Wartungstechniker ist durch die beschrankte Menuauswahl bewusst stark eingeschränkt. Durch die Vorauswahl und Annotierung der Bilder Bl, B2, ... durch den Experten im Back-Office wurde eine intelligente Vorauswahl getroffen, so dass der Wartungstechniker WT schnell und effi- zient mit geringer Fehlerquote die aktuelle technische Problematik bearbeiten kann.
Links und unterhalb des ersten Bildes Bl sind Statusinforma¬ tionen, wie z. B. der Kundenname „xy" oder die Anlage ,,A" für den Wartungstechniker WT verfugbar.
In Figur 4 ist die Darstellung des Bildes Bl auf der ersten Ausgabeeinheit Ml und die Darstellung des Bildes Bl auf der zweiten Ausgabeeinheit M2 gegenübergestellt. Hier ist sicht- bar, dass der Wartungstechniker ein Bild Bl sieht, das die gleiche Auflosung aufweist wie das Bild Bl, das der Experte aus dem Back-Office auf seiner ersten Ausgabeeinheit Ml sieht. Der Experte auf der ersten Ausgabeeinheit Ml kann in seinem Arbeitsbereich nur die Darstellung sehen, die auch der Wartungstechniker WT sieht. Dadurch wird vermieden, der Wartungstechniker WT durch Unachtsamkeit des Experten im BackOffice eine ungunstige Auflosung auf seinem Head Mounted Display zu sehen bekommt. In Figur 4a ist eine weiterführende Ausführung des Bildes aus Figur 4, in der die Eingabemenues EMi aus den Figuren 2 und 3 detailliert dargestellt sind.

Claims

Patentansprüche
1. Verfahren zum Übertragen eines Bildes (Bl) mit einer vorgegebenen ersten Bildauflosung (nlxml Pixel) von einer ersten Steuereinheit (Sl) mit einer ersten Ausgabeeinheit (Ml) auf eine zweite Steuereinheit (S2) mit einer zweiten Ausgabeein¬ heit (M2), wobei
- die zweite Ausgabeeinheit (M2) als Head-Mounted-Display (HMD) ausgebildet ist, und
- das Bild (Bl) auf der zweiten Ausgabeeinheit (M2) mit der gleichen Bildauflosung wie auf der ersten Ausgabeeinheit (Ml) ausgegeben wird.
2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass der Zugriff von der zweiten Steuereinheit (S2) mit dem Head- Mounted-Display (M2) auf das auf der ersten Steuereinheit (Sl) gespeicherte Bild (Bl) bzw. ein weiteres Bild (B2) über eine Datenverbindung (Dl) online erfolgt.
3. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass der Zugriff von der zweiten Steuereinheit (S2) mit dem Head Mounted Display (HMD) auf das auf der ersten Steuereinheit
(51) gespeicherte Bild (Bl) oder die weitere Bilder (B2) erfolgt, indem das erste Bild (Bl) oder die weiteren Bild (B2) über eine Datenverbindung (Dl) auf die zweiten Steuereinheit
(52) übertragen, dort gespeichert und von dort von der zwei- ten Steuereinheit (S2) durch Ansteuern eines Eingabe-
Menufeldes (Ml) auf die zweite Ausgabeeinheit (M2) (Head- Mounted Display) ausgegeben werden.
4. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass
-auf der zweiten Ausgabeeinheit (M2) außerhalb des Bildes (Bl) weitere Pixel zur Darstellung von Statusinformationen (ST) und eines Eingabe-Menufeldes (EM2) zum sequentiellen Aufruf des Bildes (Bl) oder eines weiteren Bildes (B2) vor¬ handen sind,
-das weitere Bild (B2) auf der zweiten Ausgabeeinheit (M2) mit der gleichen Bildauflosung wie auf der ersten Ausgabeein- heit (Ml) ausgegeben wird.
5. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass das erste Bild (Bl) und/oder das weitere Bild (B2) aus einem Teilausschnitt eines ersten bzw. weiteren digitalen Photos
(PhI, Ph2) gebildet werden, die eine technischen Anlage darstellen, wobei dem jeweiligen Teilausschnitt jeweils Annotationen zur Erläuterung des technischen Sachverhalts auf dem ersten bzw. weiteren Photo (PhI, Ph2) überlagert sind, bei- spielsweise Text, Freihandlinien, Kreise, Rechtecke, .. .
6. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass auf der ersten Ausgabeeinheit (Ml) außerhalb des Bildes (Bl) bzw. des weiteren Bildes (B2) weitere Pixel vorhanden sind zur Darstellung
- eines Emgabe-Menufeldes (EM13) zum Abspeichern oder Über¬ tragen des ersten bzw. weiteren Bildes (Bl, B2) auf die zweite Steuereinheit (S2), - eines Emgabe-Menufeldes (EM12) zur Vorschau und zur Auswahl eines Teilausschnitts eines Photos (PhI),
- eines Emgabe-Menufeldes (EMIl) zur Auswahl eines Dokuments mit einem Bild (Bl) oder/und eines Photos (PhI) aus der Dokumentenablage, - eines Emgabe-Menufeldes (EM14) zum Hinzufügen von Annotationen zum Photo (Ph) bzw. zum Bild (Bl),
7. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die erste Ausgabeeinheit (Ml) eine höhere vertikale und/oder horizontale Bildauflösung (nxm Pixel) aufweist als die zweite Ausgabeeinheit (M2)
8. Ausgabeeinheit (M2) mit einer Steuereinheit (S2) zum Durchfuhren des Verfahrens nach einem der vorherigen Verfah¬ rensanspruche .
EP09783040A 2008-12-10 2009-09-15 Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit Withdrawn EP2356809A2 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102008061448 2008-12-10
PCT/EP2009/061959 WO2010066481A2 (de) 2008-12-10 2009-09-15 Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit

Publications (1)

Publication Number Publication Date
EP2356809A2 true EP2356809A2 (de) 2011-08-17

Family

ID=42243110

Family Applications (1)

Application Number Title Priority Date Filing Date
EP09783040A Withdrawn EP2356809A2 (de) 2008-12-10 2009-09-15 Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit

Country Status (3)

Country Link
US (1) US20110291916A1 (de)
EP (1) EP2356809A2 (de)
WO (1) WO2010066481A2 (de)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101861380B1 (ko) 2012-07-16 2018-05-28 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이
US20150220506A1 (en) * 2014-02-05 2015-08-06 Kopin Corporation Remote Document Annotation
US9691181B2 (en) 2014-02-24 2017-06-27 Sony Interactive Entertainment Inc. Methods and systems for social sharing head mounted display (HMD) content with a second screen
JP6693718B2 (ja) * 2015-02-27 2020-05-13 株式会社ソニー・インタラクティブエンタテインメント 表示制御プログラム、表示制御装置、及び表示制御方法
WO2016136794A1 (ja) 2015-02-27 2016-09-01 株式会社ソニー・インタラクティブエンタテインメント 表示制御プログラム、表示制御装置、及び表示制御方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6078427A (en) * 1998-12-01 2000-06-20 Kaiser Electro-Optics, Inc. Smooth transition device for area of interest head-mounted display

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2612351A1 (fr) * 1987-03-10 1988-09-16 Witzig Patrick Systeme de transmission simultanee d'ordres radio-diffuses et d'images televisees
DE69434851T2 (de) * 1993-08-12 2007-04-19 Seiko Epson Corp. Am Kopf montierte Bildanzeigevorrichtung und diese enthaltendes Datenverarbeitungsgerät
US5874960A (en) * 1995-07-05 1999-02-23 Microsoft Corporation Method and system for sharing applications between computer systems
US7248232B1 (en) * 1998-02-25 2007-07-24 Semiconductor Energy Laboratory Co., Ltd. Information processing device
US6867752B1 (en) * 1998-08-31 2005-03-15 Semiconductor Energy Laboratory Co., Ltd. Portable information processing system
US20020140633A1 (en) * 2000-02-03 2002-10-03 Canesta, Inc. Method and system to present immersion virtual simulations using three-dimensional measurement
DE60144300D1 (de) * 2000-10-20 2011-05-05 Fujifilm Corp Bildverarbeitungsvorrichtung, welche Informationen mit einem identifizierten Subjekt des Bildes verknüpft
JP2003279881A (ja) * 2002-03-27 2003-10-02 Hitachi Ltd 携帯情報装置
JP2005018613A (ja) * 2003-06-27 2005-01-20 Toshiba Corp 情報処理装置、ウィンドウ表示制御方法およびプログラム
US7403642B2 (en) * 2005-04-21 2008-07-22 Microsoft Corporation Efficient propagation for face annotation
WO2007035637A2 (en) * 2005-09-19 2007-03-29 Industrial Color, Inc. Digital file management
US20070069976A1 (en) * 2005-09-26 2007-03-29 Willins Bruce A Method and system for interface between head mounted display and handheld device
WO2008153599A1 (en) * 2006-12-07 2008-12-18 Adapx, Inc. Systems and methods for data annotation, recordation, and communication
JP4857196B2 (ja) * 2007-05-31 2012-01-18 キヤノン株式会社 頭部装着型表示装置、及びその制御方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6078427A (en) * 1998-12-01 2000-06-20 Kaiser Electro-Optics, Inc. Smooth transition device for area of interest head-mounted display

Also Published As

Publication number Publication date
WO2010066481A3 (de) 2011-03-03
US20110291916A1 (en) 2011-12-01
WO2010066481A2 (de) 2010-06-17

Similar Documents

Publication Publication Date Title
EP1141799B1 (de) System und verfahren zum bedienen und beobachten eines automatisierungssystems
DE69726167T2 (de) Verfahren zur verwaltung der darstellung von bildschirmanzeigen in einer multifenster-rechnungsumgebung
EP1182541A2 (de) System und Verfahren zum kombinierten Einsatz verschiedener Display-/Gerätetypen mit systemgesteuerter kontextabhängiger Informationsdarstellung
EP2356809A2 (de) Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit
WO2000058799A1 (de) System und verfahren zur dokumentationsverarbeitung mit mehrschichtiger strukturierung von informationen, insbesondere für technische und industrielle anwendungen
DE102013007632A1 (de) Geordnete Darstellung von Zusatzdaten zu Web-Seiten
DE3930581A1 (de) Arbeitsplatz fuer prozessfuehrungspersonal
AT15099U2 (de) System zur Überwachung einer technischen Vorrichtung
DE112005000278T5 (de) Codec-Steuerung
DE10206227A1 (de) Mikroskopie-Laborvorrichtung
DE10253174A1 (de) Vorrichtung zur Entwicklung und/oder Konfiguration eines Automatisierungssystems
DE10320268B4 (de) Vorrichtung und Verfahren zum Auffinden und Darstellen von Informationen
WO2003038538A1 (de) System und verfahren zur dynamischen darstellung des ist-zustandes eines auftrages in relation zu einem zielzustand
EP1227647B1 (de) Maschinendiagnose/-service mittels "Augmented Reality" und Echtzeitübertragung von Multimedianachrichten
DE10315018A1 (de) Vorrichtung und Verfahren zum Übertragen von Videodaten
DE102013106280A1 (de) Verfahren zur Visualisierung eines CAD-Modells
DE102004010203B4 (de) Verfahren, Vorrichtung und Computerprogramm zur Erstellung einer Projektierung für ein Bediengerät einer Automatisierungskomponente
DE10217818B4 (de) Verfahren zur Anzeige entfernter Bildschirminhalte
DE102017129794A1 (de) Anzeigevorrichtung
EP2163983A1 (de) Verfahren zur Erzeugung einer Druckdatei aus Datenobjekten eines Speichers
DE102008012187A1 (de) Darstellung von Bildschirminhalten in Abhängigkeit von Kompetenzfunktionen
EP4287043A1 (de) Generierung von hologrammen zur darstellung in einer augmented reality umgebung
DE10047928B4 (de) Simulationssystem
DE10116331A1 (de) System und Verfahren zum kombinierten Einsatz verschiedener Display-/Gerätetypen mit systemgesteuerter kontextabhängiger Informationsdarstellung
DE4421497A1 (de) Verfahren und Anlage zum Abbilden von Objekten

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20110519

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO SE SI SK SM TR

DAX Request for extension of the european patent (deleted)
RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIEMENS AKTIENGESELLSCHAFT

17Q First examination report despatched

Effective date: 20170316

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIEMENS AKTIENGESELLSCHAFT

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20170727