DE102011085003A1 - Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment - Google Patents

Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment Download PDF

Info

Publication number
DE102011085003A1
DE102011085003A1 DE201110085003 DE102011085003A DE102011085003A1 DE 102011085003 A1 DE102011085003 A1 DE 102011085003A1 DE 201110085003 DE201110085003 DE 201110085003 DE 102011085003 A DE102011085003 A DE 102011085003A DE 102011085003 A1 DE102011085003 A1 DE 102011085003A1
Authority
DE
Germany
Prior art keywords
virtual environment
digital images
manufacturing
virtual
views
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE201110085003
Other languages
German (de)
Inventor
Bernd Korves
Thomas Lepel
Gerald Meckl
Aclan Okur
Christian Rossmüller
Martin Schönfelder
Jürgen Wildner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Priority to DE201110085003 priority Critical patent/DE102011085003A1/en
Priority to PCT/EP2012/070654 priority patent/WO2013057192A1/en
Publication of DE102011085003A1 publication Critical patent/DE102011085003A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0007Image acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

The method involves importing digital images captured by a camera (13) to a virtual environment (17) and arranging images such that the image contents illustrate the spatial relationship of manufacturing plant. A navigation tool (19) is provided to select the viewer views of the digital images in virtual environment.

Description

Die Erfindung betrifft ein Verfahren zur Visualisierung der räumlichen Verhältnisse einer Fertigungsstätte, bei dem von der Fertigungsstätte eine Vielzahl von digitalen Bildern erzeugt wird. The invention relates to a method for visualizing the spatial relationships of a production site, in which a large number of digital images is produced by the production site.

Als Fertigungsstätte soll im weiteren Sinne ein Gebilde verstanden werden, was aus mindestens zwei Fertigungseinrichtungen besteht. Hiermit kann beispielsweise eine Fertigungszelle gemeint werden, die mehrere Maschinen enthält. Es kann als Fertigungsstätte jedoch auch beispielsweise eine ganze Fabrikhalle oder sogar eine gesamte Fabrik als Modell dargestellt werden. Als Fertigungseinrichtungen sind im weiteren Sinne alle für die Fertigung erforderlichen räumlichen Einheiten zu verstehen. Hierzu gehören im engeren Sinne Maschinen zur Bearbeitung von Produkten, jedoch gleichfalls Einrichtungen zum Transport der Produkte zwischen den unterschiedlichen Maschinen sowie weitere in der Fertigungsstätte notwendige räumliche Einrichtungen. Unter sonstige räumliche Einrichtungen können beispielsweise Büros für Fertigungsleiter, Laufwege für Mitarbeiter usw. verstanden werden. As a manufacturing facility should be understood in a broader sense, a structure, which consists of at least two production facilities. By this may be meant, for example, a manufacturing cell containing multiple machines. However, as a manufacturing facility, for example, an entire factory floor or even an entire factory may be modeled. In the broader sense, manufacturing equipment means all the spatial units required for production. In the narrow sense, this includes machines for processing products, but also means for transporting the products between the different machines as well as other spatial equipment required in the production facility. Other physical facilities may include, for example, offices for production managers, routes for employees, etc.

An sich ist es allgemein bekannt, Fertigungsstätten wie beispielsweise Fabrikhallen als Modell darzustellen. Derartige Modelle können insbesondere in der Planungsphase das Vorstellungsvermögen der an der Planung Beteiligten unterstützen. Auch ist es bekannt, dass von bereits bestehenden Fertigungsstätten Bilder aufgenommen werden, die in der Planungsphase gezeigt werden, um den Fabrikplanern eine bessere Vorstellung von den bestehenden Verhältnissen zu vermitteln. Die Aufnahme der Bilder macht es allerdings erforderlich, dass die Fertigungsstätte begangen wird, wobei sich die Fabrikplaner bei der Begehung auch einen realen Eindruck von der Fertigungsstätte machen können. In itself, it is well known to represent manufacturing facilities such as factory buildings as a model. Especially in the planning phase, such models can support the imagination of those involved in the planning process. It is also known that images are taken of already existing production sites which are shown in the planning phase in order to give the factory planners a better idea of the existing conditions. The inclusion of the images, however, requires that the manufacturing site be committed, whereby the factory planners can make a real impression of the manufacturing site during the inspection.

Die Aufgabe der Erfindung liegt darin, ein Verfahren zur Visualisierung der räumlichen Verhältnisse von Fertigungsstätten dahingehend zu verbessern, dass der durch die aufgenommenen Bilder entstehende visuelle Eindruck verbessert wird. The object of the invention is to improve a method for visualizing the spatial relationships of production facilities in such a way that the visual impression created by the recorded images is improved.

Diese Aufgabe wird mit dem eingangs angegebenen Verfahren erfindungsgemäß dadurch gelöst, dass die digitalen Bilder in eine virtuelle Umgebung importiert werden und in dieser derart angeordnet werden, dass die Bildinhalte in einer die räumlichen Verhältnisse wiedergebenden Beziehung zueinander gesetzt sind. Außerdem wird in dieser virtuellen Umgebung ein Navigationswerkzeug zur Verfügung gestellt, mit dem der Betrachter Sichten auf die digitalen Bilder in der virtuellen Umgebung auswählen kann. Durch das Navigationswerkzeug wird es also möglich, die Bilder in einem die wahren räumlichen Verhältnisse der Fertigungsstätte wiedergebenden Zusammenhang zu betrachten. Die Sichten können dabei die Bilder selbst sein, so dass das Navigationswerkzeug lediglich eine Oberfläche zur Verfügung stellt, die Bilder in Abhängigkeit ihrer Perspektive und Lage im Raum der Fertigungsstätte in einem sinnvollen Kontext zu betrachten. Es ist jedoch auch möglich, dass die Sichten die auf den digitalen Bildern gespeicherten Informationen enthalten, die in zweckmäßiger Weise in die virtuelle Umgebung eingebunden werden (hierzu im Folgenden noch mehr). Vorteilhaft macht die virtuelle Umgebung es möglich, dass die Begehung des Ist-Zustandes der Fertigungsstätte auch virtuell erfolgen kann. Hierdurch kann beispielsweise Reisezeit der Fabrikplaner eingespart werden. This object is achieved with the method specified in the present invention in that the digital images are imported into a virtual environment and are arranged in such a way that the image contents are set in a spatial relationships reproducing relationship to each other. In addition, a navigation tool is provided in this virtual environment that allows the viewer to select views of the digital images in the virtual environment. The navigation tool thus makes it possible to view the images in a context that reflects the true spatial relationships of the production site. The views may be the images themselves, so that the navigation tool only provides a surface to view the images depending on their perspective and location in the space of the manufacturing facility in a meaningful context. However, it is also possible for the views to contain the information stored on the digital images, which are expediently integrated into the virtual environment (more on this in the following). Advantageously, the virtual environment makes it possible that the inspection of the actual state of the production site can also be virtual. As a result, for example, travel time of the factory planner can be saved.

Gemäß einer vorteilhaften Ausgestaltung der Erfindung ist vorgesehen, dass die virtuelle Umgebung eine die Grundfläche der Fertigungsstätte repräsentierende Fläche zur Verfügung stellt. Hierbei handelt es sich in erster Linie um eine zweidimensionale Darstellung der virtuellen Umgebung. Dies bedeutet nicht, dass die auf dieser Grundfläche zur Verfügung stehenden Sichten der Bilder in einer Weise bearbeitet wurden, dass diese einen dreidimensionalen Raum eröffnen. Allerdings ist diese virtuelle Umgebung so ausgelegt, dass sie sozusagen dem Fabrikboden nachempfunden ist, so dass die Begehung des Standortes auf der Grundfläche der Fertigungsstätte erfolgt. According to an advantageous embodiment of the invention, it is provided that the virtual environment provides an area representing the base area of the production facility. This is primarily a two-dimensional representation of the virtual environment. This does not mean that the views of the images available on this surface have been edited in such a way that they open up a three-dimensional space. However, this virtual environment is designed to be modeled on the factory floor, so that the site is inspected on the footprint of the factory floor.

Besonders vorteilhaft ist es auch möglich, dass auf der Fläche zweidimensionale Modelle von Fertigungseinrichtungen in der Fertigungsstätte angezeigt werden, deren Abmessungen als Datensätze aus einem Fabrikplanungsprogramm importiert werden. Diese Vorgehensweise ist besonders dann von Vorteil, wenn die Fabrik ursprünglich mit Hilfe eines virtuellen Datensatzes geplant wurde, der noch zur Verfügung steht. Hier können auf einfache Weise Daten der Fertigungseinrichtungen in die virtuelle Umgebung importiert werden, insbesondere Daten über die geometrischen Abmessungen. Anschließend kann eine Verknüpfung dieser Daten mit den Bildinformationen der digitalen Bilder erfolgen. It is also particularly advantageously possible for two-dimensional models of production facilities to be displayed on the area in the production facility, the dimensions of which are imported as data records from a factory planning program. This approach is particularly beneficial if the factory was originally planned using a virtual dataset that is still available. Here, data of the production facilities can be imported into the virtual environment in a simple manner, in particular data about the geometric dimensions. Subsequently, a combination of these data with the image information of the digital images can take place.

Gemäß einer alternativen Ausgestaltung der Erfindung ist vorgesehen, dass die virtuelle Umgebung einen die dreidimensionale Ausdehnung der Fertigungsstätte repräsentierenden virtuellen Raum zur Verfügung stellt. In diesem Raum kann der Betrachter navigieren und vorteilhaft beispielsweise auch eine Vogelperspektive anwählen. Die Sichten können daher auch in Abhängigkeit der Perspektive in dem virtuellen Raum verteilt werden. In diesem Falle ist es besonders vorteilhaft, wenn in dem Raum virtuelle Modelle von Fertigungseinrichtungen angezeigt werden, deren Abmessungen als Datensätze aus einem Fabrikplanungsprogramm importiert werden. Hierfür gilt das oben zur Fläche Aufgeführte entsprechend. Derartige Daten liegen normalerweise dann vor, wenn bereits ein Fabrikplanungsprogramm für vergangene Planungsprozesse angewendet wurde. According to an alternative embodiment of the invention, it is provided that the virtual environment provides a virtual space representing the three-dimensional extent of the production site. In this room, the viewer can navigate and advantageous, for example, select a bird's eye view. The views can therefore also be distributed in the virtual space depending on the perspective. In this case, it is particularly advantageous if in the room virtual models of manufacturing facilities are displayed, the dimensions of which are imported as records from a factory planning program. This is the case for the above listed area corresponding. Such data is usually available when a factory planning program has been used for past planning processes.

Besonders vorteilhaft ist es, wenn die Modelle ebene Flächen aufweisen, auf die die digitalen Bilder als Sicht projiziert werden. Eventuell müssen die Modelle, die aus dem Fabrikplanungsprogramm zur Verfügung stehen, dementsprechend vereinfacht werden, so dass ebene Flächen zur Verfügung stehen. Vorteilhaft können die Bilder auf ebene Flächen besonders einfach projiziert werden, so dass ein visueller Eindruck der betreffenden Fertigungseinrichtung entsteht, wenn der virtuelle Betrachter vor dem entsprechenden Objekt steht. Der hiermit verbundene Rechenaufwand kann vorteilhaft begrenzt werden. It is particularly advantageous if the models have flat surfaces onto which the digital images are projected as a view. It may be necessary to simplify the models available from the factory planning program so that flat surfaces are available. Advantageously, the images can be particularly easily projected on flat surfaces, so that a visual impression of the relevant manufacturing device is created when the virtual viewer is in front of the corresponding object. The associated computational effort can be advantageously limited.

Mit mehr Rechenaufwand ist es verbunden, wenn gemäß einer anderen Ausgestaltung der Erfindung die für die Fertigungseinrichtungen relevanten Bildanteile erkannt und als Textur für die Oberfläche der dreidimensional ausgestalteten Modelle verwendet werden. Hierdurch entstehen virtuelle Räume, die vorteilhaft einen stärkeren dreidimensionalen Eindruck vermitteln können. Die Bildanteile, die zu bestimmten Fertigungseinrichtungen gehören, werden dann auf die betreffenden dreidimensionalen Teile der Modelle der Fertigungseinrichtung projiziert. Die Oberfläche sieht nach diesem Prozess realistischer aus, was als Textur der Oberfläche bezeichnet wird. With more computational effort, it is connected, if according to another embodiment of the invention, the image components relevant to the production facilities recognized and used as a texture for the surface of the three-dimensionally designed models. This creates virtual spaces that can advantageously convey a stronger three-dimensional impression. The image parts belonging to specific production devices are then projected onto the relevant three-dimensional parts of the models of the production device. The surface looks more realistic after this process, which is called texture of the surface.

Die Benutzeroberfläche der virtuellen Umgebung muss so ausgestaltet werden, dass eine Navigation des Betrachters innerhalb der virtuellen Umgebung möglich wird. Beispielsweise kann gemäß einer anderen Ausgestaltung der Erfindung vorgesehen werden, dass in der virtuellen Umgebung mit dem Navigationswerkzeug Aussichtspunkte angewählt werden können, denen Sichten auf die digitalen Bilder zugeordnet sind. Diese auch als View Point bezeichneten Punkte werden in der Ansicht der virtuellen Umgebung angezeigt und können beispielsweise per Mausklick ausgewählt werden. Hierdurch ist ein einfaches Navigieren durch die virtuelle Umgebung ermöglicht. The user interface of the virtual environment must be designed so that the viewer can navigate within the virtual environment. For example, it can be provided according to another embodiment of the invention that in the virtual environment with the navigation tool vantage points can be selected, which views are assigned to the digital images. These points, also known as view points, are displayed in the view of the virtual environment and can be selected, for example, by mouse click. This allows easy navigation through the virtual environment.

Die Aussichtspunkte können vorteilhaft mit 360°-Ansichten oder Kugelprojektionen der digitalen Bilder (auch als Bubble Views bezeichnet) ausgestattet werden. Vorteilhaft kann sich der Betrachter einen Aussichtspunkt aussuchen und dann entweder von diesem einen Rundumblick durchführen (360°-Ansicht) oder bei Kugelprojektion zusätzlich auch einen Blick nach oben und nach unten durchführen. The vantage points can advantageously be equipped with 360 ° views or spherical projections of the digital images (also referred to as bubble views). Advantageously, the viewer can choose a vantage point and then either perform a panoramic view of it (360 ° view) or additionally perform a view up and down in the case of spherical projection.

Gemäß einer Ausgestaltung der Erfindung kann auch vorgesehen sein, dass das Navigationswerkzeug eine Steuerung zur Verfügung stellt, mit der ein virtueller Betrachter durch die virtuelle Umgebung bewegt werden kann. Diese Steuerung kann beispielsweise durch einen Joystick verwirklicht sein. Dies wäre eine Hardwarekomponente, die an einen geeigneten Computer angeschlossen werden müsste. Auch ist es möglich, die Steuerung auf dem Bildschirm darzustellen, so dass eine Navigation in verschiedene Richtungen durch Mausklicks ermöglicht werden würde. Eine Steuerung ermöglicht dem Betrachter vorteilhaft eine freie Auswahl der Perspektive, die nicht auf bestimmte Aussichtspunkte beschränkt ist. Vorteilhaft ist es, wenn als Sichten aus den Bildern jeweils Punktwolkenmodelle erzeugt werden (auch als Voxel Cloud Model bezeichnet), welche in die virtuelle Umgebung eingebettet sind. Die Bildinformationen werden somit komplett in den dreidimensionalen Raum projiziert, so dass den Pixeln der digitalen Bildern Voxel (Bildpunkte) in dem Wolkenmodell zugeordnet werden. According to one embodiment of the invention, it can also be provided that the navigation tool provides a control with which a virtual viewer can be moved through the virtual environment. This control can be realized for example by a joystick. This would be a hardware component that would need to be connected to a suitable computer. It is also possible to display the control on the screen, so that navigation in different directions would be made possible by mouse clicks. A control advantageously allows the viewer a free choice of perspective, which is not limited to specific vantage points. It is advantageous if point cloud models are generated as views from the images (also referred to as voxel cloud model), which are embedded in the virtual environment. The image information is thus completely projected into the three-dimensional space, so that the pixels of the digital images are assigned voxels (pixels) in the cloud model.

Zuletzt kann vorteilhaft vorgesehen werden, dass die virtuelle Umgebung durch ein dreidimensionales Globalmodell der Fertigungsstätte einschließlich zumindest eines Teils der Fertigungseinrichtungen gebildet wird, wobei die Sichten durch Projektion der Bilder auf die Oberflächen des Modells erzeugt werden. Dies setzt voraus, dass ein derartiges Globalmodell der Fertigungsstätte existiert. Dies ist regelmäßig der Fall, wenn die Fertigungsstätte ursprünglich mittels eines virtuellen dreidimensionalen Modells geplant wurde, wie dies von Fabrikplanungsprogrammen verwendet wird. Diese Daten können dann verwendet werden, um den Rechenaufwand vorteilhaft zu verringern, der damit verbunden ist, die Bildinformation der digitalen Bilder an bestimmte Raumpunkte zu binden. Lastly, it can be advantageously provided that the virtual environment is formed by a three-dimensional global model of the production facility, including at least part of the production facilities, the views being produced by projecting the images onto the surfaces of the model. This presupposes that such a global model of the manufacturing facility exists. This is usually the case when the factory was originally planned using a virtual three-dimensional model as used by factory scheduling programs. These data can then be used to advantageously reduce the amount of computation associated with binding the image information of the digital images to certain spatial points.

Weitere Einzelheiten der Erfindung werden nachfolgend anhand der Zeichnung beschrieben. Gleiche oder sich entsprechende Zeichnungselemente sind jeweils mit den gleichen Bezugszeichen versehen und werden nur insoweit mehrfach erläutert, wie Further details of the invention are described below with reference to the drawing. Identical or corresponding drawing elements are each provided with the same reference numerals and will only be explained several times as far as

sich Unterschiede zwischen den einzelnen Figuren ergeben. Es zeigen: There are differences between the individual figures. Show it:

1 ein Ausführungsbeispiel des erfindungsgemäßen Verfahrens als Flussdiagramm, 1 An embodiment of the method according to the invention as a flow chart,

2 ein dreidimensionales Modell, wie es nach einem Ausführungsbeispiel des erfindungsgemäßen Verfahrens erstellt wurde und 2 a three-dimensional model, as it was created according to an embodiment of the method according to the invention and

3 ein zweidimensionales Modell der Fertigungsstätte gemäß 2, wie es nach einem anderen Ausführungsbeispiel des erfindungsgemäßen Verfahrens erstellt wurde. 3 a two-dimensional model of the manufacturing facility according to 2 , as it was created according to another embodiment of the method according to the invention.

Das in 1 dargestellte Verfahren beginnt in einer Fertigungsstätte 11. In dieser ist exemplarisch eine Fertigungseinrichtung 12a dargestellt. Um die Verhältnisse in der Fertigungseinrichtung 11 zu visualisieren, werden zunächst mittels einer Kamera 13 digitale Bilder von der Fertigungsstätte 11 aufgenommen. Die Kamera 13 ist auf einem Wagen 14 befestigt, welcher durch Fertigungsstätte 11 bewegt werden kann. This in 1 The procedure described begins in a production facility 11 , In this example, a manufacturing facility 12a shown. To the conditions in the manufacturing facility 11 To visualize, first, by means of a camera 13 digital pictures of the factory 11 added. The camera 13 is on a cart 14 attached, which by manufacturing plant 11 can be moved.

In einem nächsten Schritt werden die Bilder von der Kamera 14 in einem Computer 15 hochgeladen. Auf diesem Computer ist weiterhin ein Programm installiert, welches eine Verarbeitung der digitalen Bilder ermöglicht. Diese Programme sind technisch verfügbar, wobei die Bearbeitung der Bilder zur Erzeugung von Sichten geschieht (hierzu im Folgenden mehr). Zusätzlich können durch den Computer 15 auch Daten 16 verarbeitet werden, die beispielsweise durch ein Planungsprogramm für Fabriken zur Verfügung gestellt werden können. Hierbei kann es sich beispielsweise um die räumlichen Daten der in der Fertigungsstätte 11 befindlichen Fertigungseinrichtungen 12a handeln. In a next step, the pictures are taken from the camera 14 in a computer 15 uploaded. On this computer, a program is still installed, which allows processing of the digital images. These programs are technically available, with the processing of the images being done to create views (see more below). In addition, through the computer 15 also data 16 that can be provided, for example, by a factories design program. This may be, for example, the spatial data of the production facility 11 located manufacturing facilities 12a act.

Der Computer erstellt einen virtuellen Raum 17, der in einem nächsten Schritt mittels eines Ausgabegerätes dargestellt werden kann. Als Navigationswerkzeug ist in 1 ein Cursor angedeutet, mit dem beispielsweise die Fertigungseinrichtung 12a angeklickt werden kann. Dies aktiviert eine Sicht auf die Fertigungseinrichtung 12a, die in 1 nicht näher dargestellt ist. The computer creates a virtual space 17 , which can be displayed in a next step by means of an output device. As a navigation tool is in 1 a cursor indicated, with the example, the manufacturing facility 12a can be clicked. This activates a view of the manufacturing facility 12a , in the 1 not shown in detail.

In 2 ist ein virtueller Raum 20 dargestellt, der dreidimensional ausgebildet ist und die geometrischen Verhältnisse in der Fertigungsstätte 11 wiedergibt. Die Fertigungseinrichtungen sind als dreidimensionale Modelle 21 ausgebildet. Auch der Weg ist in diesem Zusammenhang als Fertigungseinrichtung zu verstehen und als zweidimensionales Modell 22 ausgebildet. An der hinteren Wand ist ein Eingang 23 zu erkennen. In 2 is a virtual space 20 represented, which is formed in three dimensions and the geometric conditions in the factory 11 reproduces. The manufacturing facilities are as three-dimensional models 21 educated. The way is to be understood in this context as a manufacturing facility and as a two-dimensional model 22 educated. On the back wall is an entrance 23 to recognize.

Die Modelle 21 sind soweit vereinfacht, dass sich dreidimensionale Quader ergeben. Diese Quader schaffen die Möglichkeit, die digitalen Bilder als Sicht 24 direkt auf die ebenen Flächen zu projizieren. Dies ist exemplarisch nur einmal dargestellt, wobei der Aufbau durch das entsprechende Modell 21 repräsentierten Maschine aus der Sicht 24 hervorgeht. Bei dem anderen Modell 21 ist zu erkennen, dass als Aussichtspunkt 25a eine der ebenen Flächen mit dem Cursor 19 angeklickt werden kann, um eine Sicht wie die Sicht 24 zu erstellen. Aussichtspunkte können beispielsweise auch die Kugeln 25b sein, wobei ein Klick auf diese Aussichtspunkte eine Kugelprojektion als Sicht auf die Fertigungsstätte von dem betreffenden Punkt aus öffnet. Zuletzt kann ein Aussichtspunkt 25c auch aus einer im Raum stehenden Fläche bestehen, die eine Sicht öffnet, welche genau der Perspektive entspricht, als ob der Betrachter vor dieser Fläche stünde. The models 21 are so far simplified that arise three-dimensional cuboid. These cuboids create the possibility of using the digital images as a point of view 24 to project directly onto the flat surfaces. This is exemplified only once, the structure by the corresponding model 21 represented machine from view 24 evident. For the other model 21 it can be seen that as a vantage point 25a one of the flat areas with the cursor 19 can be clicked to a view like the point of view 24 to create. Viewpoints can, for example, the balls 25b be a click on these vantage points opens a spherical projection as a view of the factory from the point in question. Lastly, a lookout point 25c also consist of a surface standing in the space, which opens a view that corresponds exactly to the perspective, as if the viewer stood in front of this surface.

Weiterhin ist in den Raum 20 auch eine Schaltfläche integriert, die als Steuerung 26 verwendet werden kann. Durch Klick auf die verschiedenen Richtungspfeile kann ein imaginärer Betrachter in dem dreidimensionalen Raum 20 bewegt werden. Durch Klicken auf die Schaltfläche „P“ kann eine bestimmte Sicht abgespeichert werden, um später wieder aufgerufen werden zu können. Furthermore, in the room 20 also integrated a button as a control 26 can be used. By clicking on the different directional arrows, an imaginary viewer in the three-dimensional space 20 to be moved. By clicking on the "P" button, a specific view can be saved for later recall.

Gemäß 3 ist eine einfachere virtuelle Umgebung in Form einer Fläche 27 dargestellt. Diese repräsentiert den Boden der auch in 2 dargestellten Werkshalle. Auch die Aussichtspunkte sind in dieser Darstellung vereinfacht dargestellt, beispielsweise der Aussichtspunkt 25d, der kreisförmig ist und bei Anklicken eine 360°-Ansicht der Werkshalle erzeugt. Dieser gewährt einen Blick für einen imaginären Betrachter, der sich genau auf der Kreuzung der Wege befindet. Weiterhin kann mit dem Cursor 19 jedes der zweidimensionalen Modelle 22 angeklickt werden, um Sichten auf diese Modelle zu öffnen. Auch kann jeweils die Wand der Werkshalle, also in der Fläche 27 die Begrenzung angeklickt werden, um als Aufriss der Fertigungsstätte ausgeführte Sichten zu öffnen. According to 3 is a simpler virtual environment in the form of a surface 27 shown. This represents the ground in too 2 represented factory hall. Also, the viewpoints are shown simplified in this representation, for example, the viewpoint 25d , which is circular and when clicked creates a 360 ° view of the factory floor. This provides a view for an imaginary viewer who is exactly at the intersection of the paths. Furthermore, with the cursor 19 each of the two-dimensional models 22 be clicked to open views on these models. Also, in each case the wall of the workshop, so in the area 27 Click the boundary to open views that are run as an outline of the factory.

Claims (12)

Verfahren zur Visualisierung der räumlichen Verhältnisse einer Fertigungsstätte (11), bei dem von der Fertigungsstätte eine Vielzahl von digitalen Bildern erzeugt wird, dadurch gekennzeichnet, dass • die digitalen Bilder in eine virtuelle Umgebung (17) importiert werden und in dieser derart angeordnet werden, dass die Bildinhalte in einer die räumlichen Verhältnisse wiedergebenden Beziehung zueinander gesetzt sind und • die virtuelle Umgebung ein Navigationswerkzeug zur Verfügung stellt, mit dem der Betrachter Sichten (24) auf die digitalen Bilder in der virtuellen Umgebung (17) auswählen kann. Method for visualizing the spatial relationships of a manufacturing facility ( 11 ), in which a large number of digital images are generated by the production facility, characterized in that • the digital images are converted into a virtual environment ( 17 ) and arranged in such a way that the image contents are set in relation to each other in a spatial relationship and the virtual environment provides a navigation tool with which the viewer can view ( 24 ) on the digital images in the virtual environment ( 17 ). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die virtuelle Umgebung (17) eine die Grundfläche der Fertigungsstätte (11) repräsentierende Fläche (27) zur Verfügung stellt. Method according to claim 1, characterized in that the virtual environment ( 17 ) one the base area of the manufacturing plant ( 11 ) surface ( 27 ). Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass auf der Fläche (27) zweidimensionale Modelle (22) von Fertigungseinrichtungen (12a) angezeigt werden, deren Abmessungen als Datensätze (16) aus einem Fabrikplanungsprogramm importiert werden. Method according to claim 2, characterized in that on the surface ( 27 ) two-dimensional models ( 22 ) of manufacturing facilities ( 12a ), the dimensions of which as datasets ( 16 ) are imported from a factory planning program. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die virtuelle Umgebung einen die dreidimensionale Ausdehnung der Fertigungsstätte (11) repräsentierenden virtuellen Raum (20) zur Verfügung stellt. A method according to claim 1, characterized in that the virtual environment is a three-dimensional extent of the manufacturing site ( 11 ) representing virtual space ( 20 ). Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass in dem Raum (20) virtuelle Modelle (21) von Fertigungseinrichtungen (12a) angezeigt werden, deren Abmessungen als Datensätze (16) aus einem Fabrikplanungsprogramm importiert werden. Method according to claim 4, characterized in that in the room ( 20 ) virtual models ( 21 ) of manufacturing facilities ( 12a ), the dimensions of which as datasets ( 16 ) are imported from a factory planning program. Verfahren nach einem der Ansprüche 3 oder 5, dadurch gekennzeichnet, dass die Modelle (21, 22) ebene Flächen aufweisen, auf die die digitalen Bilder als Sicht (24) projiziert werden. Method according to one of claims 3 or 5, characterized in that the models ( 21 . 22 ) have flat surfaces to which the digital images as a view ( 24 ) are projected. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass die für die Fertigungseinrichtungen (12a) relevanten Bildanteile erkannt und als Textur für die Oberfläche der dreidimensional ausgestalteten Modelle (21) verwendet werden. A method according to claim 5, characterized in that for the manufacturing facilities ( 12a ) relevant image components and as texture for the surface of the three-dimensionally designed models ( 21 ) be used. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass in der virtuellen Umgebung (17) mit dem Navigationswerkzeug Aussichtspunkte (251, 25b, 25c, 25d) angewählt werden können, denen Sichten (24) auf die digitalen Bilder zugeordnet sind. Method according to one of the preceding claims, characterized in that in the virtual environment ( 17 ) with the navigation tool Viewpoints ( 251 . 25b . 25c . 25d ), which have views ( 24 ) are assigned to the digital images. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass als Sichten (24) der Aussichtpunkte (251, 25b, 25c, 25d) 360°-Ansichten oder Kugelprojektionen zur Verfügung gestellt werden. Method according to claim 8, characterized in that as views ( 24 ) of the viewpoints ( 251 . 25b . 25c . 25d ) 360 ° views or spherical projections are provided. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass das Navigationswerkzeug eine Steuerung (26) zur Verfügung stellt, mit der ein virtueller Betrachter durch die virtuelle Umgebung (17) bewegt werden kann. Method according to one of the preceding claims, characterized in that the navigation tool has a controller ( 26 ), with which a virtual viewer through the virtual environment ( 17 ) can be moved. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass als Sicht aus den Bildern ein Punktwolkenmodell erzeugt wird, welches in die virtuellen Umgebung (17) eingebettet wird. A method according to claim 10, characterized in that as a view from the images, a point cloud model is generated, which in the virtual environment ( 17 ) is embedded. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass die virtuelle Umgebung (17) durch ein dreidimensionales Globalmodell der Fertigungsstätte (11) einschließlich zumindest eines Teils der Fertigungseinrichtungen (12a) gebildet wird, wobei die Sichten durch Projektion der Bilder auf die Oberflächen des Modells erzeugt werden. Method according to claim 10, characterized in that the virtual environment ( 17 ) through a three-dimensional global model of the manufacturing facility ( 11 ) including at least part of the manufacturing equipment ( 12a ), the views being generated by projecting the images onto the surfaces of the model.
DE201110085003 2011-10-21 2011-10-21 Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment Ceased DE102011085003A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE201110085003 DE102011085003A1 (en) 2011-10-21 2011-10-21 Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment
PCT/EP2012/070654 WO2013057192A1 (en) 2011-10-21 2012-10-18 Method for surveying and visually displaying the physical circumstances of a production plant

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE201110085003 DE102011085003A1 (en) 2011-10-21 2011-10-21 Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment

Publications (1)

Publication Number Publication Date
DE102011085003A1 true DE102011085003A1 (en) 2013-04-25

Family

ID=48051135

Family Applications (1)

Application Number Title Priority Date Filing Date
DE201110085003 Ceased DE102011085003A1 (en) 2011-10-21 2011-10-21 Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment

Country Status (1)

Country Link
DE (1) DE102011085003A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014206473A1 (en) 2013-06-27 2014-12-31 Abb Technology Ltd Method and video communication device for transmitting video to a remote user

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2233122A (en) * 1989-04-28 1991-01-02 Nissan Motor Positioning in distributed control system
US20060155402A1 (en) * 2001-11-21 2006-07-13 Dale Read 3d virtual manufacturing process
US7583275B2 (en) * 2002-10-15 2009-09-01 University Of Southern California Modeling and video projection for augmented virtual environments
US20100315416A1 (en) * 2007-12-10 2010-12-16 Abb Research Ltd. Computer implemented method and system for remote inspection of an industrial process

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2233122A (en) * 1989-04-28 1991-01-02 Nissan Motor Positioning in distributed control system
US20060155402A1 (en) * 2001-11-21 2006-07-13 Dale Read 3d virtual manufacturing process
US7583275B2 (en) * 2002-10-15 2009-09-01 University Of Southern California Modeling and video projection for augmented virtual environments
US20100315416A1 (en) * 2007-12-10 2010-12-16 Abb Research Ltd. Computer implemented method and system for remote inspection of an industrial process

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
NAVAB, N. [et al.]: Cylicon: A Software Platform for the Creation & Update of Virtual Factories. Proceeding of the 7th IEEE International Conference on Emerging Technologies and Factory Automation, 1999, S. 459-463. *
TAKAHASHI, H. [et al.]: Low Cost Rendering Method for Virtual Factory Considering Interpolation of Occluded Objects. Journal of Mobile Multimedia, Vol. 3, 2007, S. 269-286. *
TORR, P. H. S. [et al.]: Feature Based Methods for Structure and Motion Estimation. In: Vision Algorithms ´99, ed. by B. Triggs, A. Zisserman, R. Szeliski, Springer, 2000, S. 278-294. *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014206473A1 (en) 2013-06-27 2014-12-31 Abb Technology Ltd Method and video communication device for transmitting video to a remote user
US9628772B2 (en) 2013-06-27 2017-04-18 Abb Schweiz Ag Method and video communication device for transmitting video to a remote user

Similar Documents

Publication Publication Date Title
DE69907644T2 (en) REAL-TIME SYSTEM FOR THREE-DIMENSIONAL REALISTIC VIRTUAL IMAGE DISPLAY
DE69833808T2 (en) Interactive time span display
DE102010018634B4 (en) Method for entering a spatial structure of manufacturing facilities in a computer-aided planning program and its optimization
WO2009049973A2 (en) Method for creating and/or updating textures of background object models, video monitoring system for carrying out the method, and computer program
DE10144932A1 (en) Visualization of a workpiece by computer simulation of a machining process with workpiece contours defined by the intersection of a cutting edge along a preset machining path
DE102006027202A1 (en) Crane e.g. crawler crane, operation planner, has central planning unit performing simulation and calculation of operation, and clients inputting and outputting data and communicating with central planning unit by Internet
DE102008022141A1 (en) Method and device for improving and / or validating 3D segmentation
WO2010086261A1 (en) Model assembly of a production plant having true-to-scale models of production devices and method for entering a spatial assembly of production devices into a computer-aided planning program
DE112016001829T5 (en) Automatically associate images using visual property references to related applications
EP4137981A1 (en) Generation of a building information model
DE102007009851B3 (en) Industrial robot's position determining method, involves determining position of robot relative to object based on assigned model points, and determining position of camera assigned to image and position of camera relative to robot
DE102015220031A1 (en) Method for confidence estimation for optical-visual pose determination
DE19704529B4 (en) A method for automatically generating and manipulating shadow geometry and interactive computerized display
EP1092210B1 (en) Device and method for constructing a virtual installation model
DE102011085003A1 (en) Method for visualizing spatial relationships of manufacturing plant, involves providing navigation tool to select viewer views of digital images in virtual environment
EP2304621A1 (en) Parallel navigation in a plurality of cad models
DE102005010225A1 (en) Method for comparing a real object with a digital model
WO2013057192A1 (en) Method for surveying and visually displaying the physical circumstances of a production plant
EP3944120B1 (en) Method for the determination of blank parameters for panels and method for producing panels for the panelling of a surface
EP3616140A1 (en) System for supporting teamwork by means of augmented reality
DE102021133633B3 (en) Method of providing a gripping device
DE102015120929A1 (en) Method for the preliminary simulation of a military mission in a field of operation
DE102015120927A1 (en) Method for displaying a simulation environment
DE102010061642A1 (en) Method for creating planning document for building, involves determining base surface, building outline and roof plan and clearance surfaces associated with land register plan
DE102018222148A1 (en) Editing of visual information

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R002 Refusal decision in examination/registration proceedings
R003 Refusal decision now final

Effective date: 20131210