WO2017144050A1 - Militärisches sandkastensystem und verfahren zum betrieb eines militärischen sandkastens - Google Patents

Militärisches sandkastensystem und verfahren zum betrieb eines militärischen sandkastens Download PDF

Info

Publication number
WO2017144050A1
WO2017144050A1 PCT/DE2017/100141 DE2017100141W WO2017144050A1 WO 2017144050 A1 WO2017144050 A1 WO 2017144050A1 DE 2017100141 W DE2017100141 W DE 2017100141W WO 2017144050 A1 WO2017144050 A1 WO 2017144050A1
Authority
WO
WIPO (PCT)
Prior art keywords
environment
military
placeholder
virtual
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/DE2017/100141
Other languages
English (en)
French (fr)
Inventor
Michael Haubner
Manuel Pabst
Daniel Lay
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KNDS Deutschland GmbH and Co KG
Original Assignee
Krauss Maffei Wegmann GmbH and Co KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Krauss Maffei Wegmann GmbH and Co KG filed Critical Krauss Maffei Wegmann GmbH and Co KG
Publication of WO2017144050A1 publication Critical patent/WO2017144050A1/de
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating three-dimensional [3D] models or images for computer graphics
    • G06T19/006—Mixed reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B29—WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29C—SHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00—Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • B29C64/20—Apparatus for additive manufacturing; Details thereof or accessories therefor
    • B29C64/227—Driving means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B29—WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29C—SHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00—Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • B29C64/30—Auxiliary operations or equipment
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B29—WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29C—SHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00—Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • B29C64/30—Auxiliary operations or equipment
    • B29C64/386—Data acquisition or data processing for additive manufacturing
    • B29C64/393—Data acquisition or data processing for additive manufacturing for controlling or regulating additive manufacturing processes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three-dimensional [3D] modelling for computer graphics
    • G06T17/05—Geographic models
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B33—ADDITIVE MANUFACTURING TECHNOLOGY
    • B33Y—ADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
    • B33Y50/00—Data acquisition or data processing for additive manufacturing

Definitions

  • Military sandboxes have a long history in preparing military forces and units.
  • the respective sandboxes are used to visualize a deployment area and objects in it, such as buildings, vegetation and enemy positions and troops.
  • Different levels of military sandboxes were and are used in different hierarchy levels of the shuttle and / or for different assignments to be planned, in particular the level of detail or the level of detail of the sandbox Terrain and the objects therein.
  • a squad leader can improvise a military sandbox for situation and operational briefings with the forces assigned to him, using the simplest means, such as branches, rocks, moss, and a piece of earth's surface, for immediate or immediate deployment to sketch and illustrate the forces subordinated to him.
  • sand and other malleable material can be used to provide a more detailed and detailed military sandbox at a very high cost, using ground-based terrain modeling and schematic models of the terrain objects created and possibly using other models that symbolize, for example, your own forces or troops used.
  • the resulting sandboxes are subject to a number of limitations, which in total lead to the terrain and the objects therein, in which the Is planned and later carried out, the forces participating in the mission as well as the forces planning the deployment inaccurate, falsified or even misinformed. Only as one of many examples, a situation is described, in which the use in a mountainous or otherwise rugged real terrain to be planned and executed. However, depending on the material used in the construction of the military sandbox to reshape the real estate, only certain slopes or gradients in the terrain can be recreated in the military sandpit.
  • the display of moving objects in a military sandbox is inadequate because the respective units and / or material are typically moved only as tactical signs in the military sandpit, so that the relation between the moving objects, the area of the sandbox and the objects of the sandbox, in particular a size comparison, can not take place or even takes place, without taking into account the lack of scale.
  • the present invention is directed to providing a military sandbox system and a method of operating a military sandbox that overcomes the above-mentioned disadvantages of the prior art.
  • this object is achieved by mapping a simulation environment which maps the real environment geospecifically in a presentation environment, including an object placeholder arranged in the presentation environment with a recording device having at least one object placeholder and its position and / or Alignment in the presentation environment and identifying a virtual object based on the identified object Wildcard is generated.
  • at least one virtual object taking into account the position and / or the orientation of the object placeholder with at least one display device arranged in the presentation environment, displays display elements which are superimposed on real image contents with display element arranged in the visual field of a user for displaying virtual image contents are shown.
  • mapping a simulation environment that maps the real environment geospecifically it is possible to ensure a highly accurate, detailed and, in addition, up-to-date reproduction of the real terrain and the real objects contained within it as part of the operation of the military sandbox.
  • the use of object placeholders, the identification of the object placeholders as well as their position and / or orientation in the presentation environment and the creation and display of virtual image content based thereon not only but especially for the case where the object placeholders for mobile military units or
  • the use of forces enables a highly realistic and detailed image of the actual unit to be displayed in the simulation environment image for the user, ie to be perceived so that, for example, the size ratios of the virtual image contents correspond to the size ratios of the image
  • the deployment environment can be compared to the simulation environment and the deployment can accordingly be prepared more effectively, in particular with the exception of misunderstandings mediated by the military sandbox.
  • the position and / or the orientation of the at least one NEN display device determined in the presentation environment and taken into account in the determination of an insertion position of the virtual image content on the display element.
  • the respective object position holder can take into account the respective position and / or orientation of the display device so that different virtual objects are generated for display devices at different positions and as virtual image contents on the display element can be displayed on different display positions.
  • the position and / or orientation of the display in the presentation environment a user is allowed to change his position and viewing direction in the display environment, thereby changing the displayed virtual object and its display position to cause the user Impression seems to be a plastic, in the simulation environment or at least in the presentation environment arranged real object at a certain point or at a certain point of the presentation environment.
  • the changes of positions and / or orientations of the display device are compensated and, at the same time, the virtual object is given a spatiality by the possibility of viewing from different directions.
  • the image of the simulation environment is carried out by a physical three-dimensional model, in particular to scale.
  • a physical model has the advantage that it allows a tactile or haptic interaction with the user. It is particularly advantageous if the model is solid and has only a low deformability. As a result, many of the limitations of classic military sandboxes described above can be overcome. Further disadvantages are overcome by the fact that the model is a geospecific model of the real environment. Because this increases the degree of correspondence between the model and the real environment to an unknown degree, so that a very realistic assessment of the situation in the real environment and a correspondingly advantageous preparation or planning of a military mission can be done.
  • the model of the simulation environment is produced by a three-dimensional printing process.
  • Three-dimensional printing processes or 3-D printing processes are particularly suitable for converting a real environment geo-specific simulation environment, which is preferably in the form of digital data, into a physical three-dimensional model in the shortest possible time.
  • the expense of producing the real-environment image is minimized.
  • mapping the simulation environment as a virtual representation by means of at least one display device takes place.
  • mapping the simulation environment as a virtual representation in particular the magnification and the respective part of the simulation environment can be changed and adapted as far as possible. That is, for example, zooming in or out, as well as moving or otherwise altering the mapped portion of the simulation environment during the process may be enabled, for example, in response to a corresponding user input.
  • a further advantageous embodiment of the method is provided, according to which a model placeholder is arranged, recorded and identified in the presentation environment, wherein the identification of the model placeholder results in an assignment to a simulation environment or part of a simulation environment to be displayed.
  • the representation of the virtual objects or the virtual object and the mapping of the simulation environment to a the same way or with the same means.
  • the operation of a military sandbox arranges a model placeholder and at least one object placeholder in the Presentation environment and the recording, identification and presentation or mapping as virtual objects and as a virtual representation of the simulation environment provides.
  • model place holder and / or the object placeholder will be discussed in more detail later in this description with reference to the subject features of the sandbox system.
  • the position and / or orientation of the model placeholder in the presentation environment is identified and from this the position and / or orientation of the image of the simulation environment in the form of the virtual representation of the simulation environment is determined.
  • the orientation of the image of the simulation environment in the presentation environment is determined via the model placeholder.
  • a change of the position or the orientation of the model placeholder is provided as a form of the user input in order to change the image of the simulation environment or at least the orientation of the image for the respective user of a display device.
  • a rotation of the model place holder leads to a corresponding rotation of the image of the simulation environment, which accordingly represents for the user of a display device as a change or change of the virtual image of the simulation environment.
  • the orientation of the image of the simulation environment takes place automatically in the presentation environment and independently of the position and / or orientation of the model placeholder. This can be advantageous, for example, if in the presentation environment, for example, a fixed north direction is specified for all simulation environments, in particular virtual simulation environments, which can facilitate the use of the military sandbox, in particular the orientation.
  • the insertion position and / or the orientation of the at least one virtual object are determined from the position and / or orientation of the object placeholder, the position and / or the orientation of the model place holder and / or a terrain and / or area surrounding the simulation environment. or surface model of the real environment is determined.
  • This embodiment relates to the case where no physical model of the simulation environment is used as an image, but a virtual simulation environment is mapped in the presentation environment, or more specifically a virtual simulation environment displayed the display element of the display device and thus displayed superimposed with the real image content of the presentation environment.
  • the model placeholder used for this purpose and the object placeholder likewise used can be arranged, for example, in one plane, in particular on a flat base, such as, for example, a floor or a table surface of the simulation environment.
  • a representation of the simulation environment in the form of a virtual simulation environment is generated and displayed by the display device, which gives the user the impression of a three-dimensional, non-planar surface that simulates the terrain and / or the surface of the real environment.
  • the virtual objects as well as the virtual simulation environments in the presentation environment are only perceived by those users who use a corresponding display device or who are equipped with a corresponding display device.
  • it may be particularly advantageous for the proposed method if other users within or outside the presentation environment are also enabled to perceive the virtual image contents and / or the virtual simulation environments, in particular to visually perceive them.
  • a further advantageous embodiment provides that the recording of the presentation environment, in particular with a recording device, the presentation environment for reproducing the image of the simulation environment and / or the at least one virtual object takes place and the recording is transmitted in particular to an additional display.
  • model placeholder and its position and / or orientation are identified in the receptacle and, in particular, taken into account in the context of a transmission to an additional display.
  • the consideration may lie in the fact that the identified model placeholder is converted into a corresponding image of the simulation environment that can be displayed on the display in an image upstream of an additional display or at least one process step preceding the display on an additional display, so that An image of the virtual simulation environment can be displayed on the additional display.
  • the additional display is a screen or a display
  • the model placeholder is recognized in the recording of the presentation environment
  • the model placeholder is assigned to a corresponding simulation environment
  • the additional display is displayed Image of the simulation environment integrated into the recording of the presentation environment and displayed instead of the model placeholder.
  • Corresponding method steps can also be provided for the at least one recorded and identified object placeholder so that an image of the virtual object, in particular instead of the object placeholder itself, is displayed on the additional display in addition to the image of the virtual simulation environment.
  • the simulation environment is generated by the evaluation of sensor data, in particular image recordings, obtained during an overflight over and / or a transit through the real environment.
  • simulation environments which are generated by the evaluation of sensor data obtained during an overflight over and / or a transit through the real environment, have the advantage that the simulation environments have a particularly high timeliness and also include sufficient information for generating a geospecific simulation environment , Accordingly, the images of the simulation environment used in the method also benefit from the proposed design of the simulation environment.
  • a military sandbox system of the type mentioned above has an image of a simulation environment simulating a real environment in a presentation environment, as well as at least one display device arranged in the presentation environment Display element arranged in the field of view of a user for displaying virtual image data superimposed on real image data, an object placeholder arranged in the presentation environment for displaying a virtual object by means of the display element, a recording device arranged in the presentation environment at least for receiving the at least one object placeholder and also a Computing unit, the latter being arranged at least for identifying the at least one object placeholder and its position and / or orientation in the presentation environment and for generating a virtual object for display on the display element in dependence of the identified object placeholder.
  • the system of the present invention allows for detailed and true-to-scale reproduction of the terrain and off-field objects needed to prepare and / or plan the military mission Meaning are.
  • the military sandbox system avoids that the users get a misconception of the real terrain and the real objects, so conveyed by the real environment.
  • the additional use of display devices for superimposed display of virtual image content and real image content also makes it possible for users to perceive the presentation environment per se on the one hand, and virtual objects in the presentation environment, for example virtual units or forces, in particular in combination and / or overlay can be displayed and / or perceived with the image of the simulation environment, so that even with respect to the virtual objects of the sandbox system a realistic or even exact scale can be maintained. It also makes it easier to use virtual objects, at least for users of the system. Tems, which are equipped with a corresponding display device, the visualization of movable in the military sandpit or movable military units through the use of corresponding movable or movable object placeholder and resulting virtual objects.
  • the display means for superimposed display of virtual image content and real image content allow multiple users to simultaneously use the system, to respectively perceive virtual objects and, at the same time, to perceive, in particular see, the other users in the presentation environment as part of the real image contents. This facilitates communication among the users and thus a coordinated planning or preparation of the military mission.
  • the image of the simulation environment comprises a physical three-dimensional model, in particular a three-dimensional print of the simulation environment or a part of the simulation environment.
  • the physical image of the simulation environment is placed as such in the presentation environment. It can be provided, for example, that the image has a fixed size, to which it is combined for locking or attachment in the presentation environment with a corresponding receptacle and / or holder.
  • the image of the simulation environment comprises a model placeholder arranged in the presentation environment, which is associated with the recording device and the arithmetic unit of a computer-generated simulation environment stored in a memory device of the system, wherein the memory device is connected to the display device and / or or the Computing unit is linked, that by means of the computer-generated simulation environment, a representation of a virtual simulation environment with the display device is made possible.
  • the use of a virtual simulation environment generated from an identified model placeholder and superimposed on the display means with the real image content of the presentation environment superimposed on the display for the user has the advantage that any restrictions on generating the image of the simulation environment are eliminated, so that the highest possible degree of realism can be achieved in the image of the virtual simulation environment.
  • the virtual simulation environment is thus displayed as virtual image content and is reduced to the model placeholder objectively.
  • the size scale of the simulation environment image can be easily changed while operating and / or using the sandbox system.
  • At least one detection device which serves to detect the position and / or orientation of the at least one pointing device is provided.
  • the detection device for detecting the position and / or orientation of the at least one display device enables a particularly advantageous display of the virtual image contents, in particular the virtual objects and the virtual simulation environments.
  • the insertion position of the virtual objects and / or the virtual simulation environments on the display element is influenced particularly advantageously by such a detection device.
  • a virtual object or a virtual simulation environment cor- It is particularly advantageous, even if the position and orientation of the respective display device in the display environment and thus the relative position between the adosvor- direction and the model placeholder and / or object placeholder to be able to display on the display element and superimposed with the real image content as well as the orientation of the display device with respect to the model placeholder and / or the object placeholder is known.
  • the detection device comprises at least one arranged on the display device marker for detecting the position and / or orientation of the display device in the presentation environment.
  • the detection can take place for example via the receiving device.
  • the orientation or the change in the orientation of the display device is detected and determined on the basis of the changes in the position of the marker.
  • the alignment can be determined using a plurality of markers.
  • the receiving device has a transmission means for reproducing the image of the simulation environment and / or the at least one virtual object, in particular for transmission to an additional display.
  • the transfer means the object place holder received by the receiving device and / or model placeholder, if necessary, after an identification by the arithmetic unit over a data network to a remotely located combined computer and display unit are transmitted to the, starting from the identified object placeholder and / or identified model placeholder, also a display of the military sandbox , ie a reproduction of the military sandbox. Accordingly, an additional display arranged outside the presentation environment can be provided for displaying the image of the simulation environment and of the at least one virtual object.
  • the transmission of the transmission medium to the data relating to the object placeholder and possibly the model placeholder and the respective relative arrangements and orientations can be limited in a particularly advantageous manner, with the data being received on the combined computer and display unit from this data An image of the object (s) and possibly an image of the simulation environment is created.
  • the additional displays are distinguished by the fact that, in contrast to the display devices, they are not set up to superimpose virtual image contents and real image contents, but merely display a received image signal.
  • the object placeholders it can also be provided on the one hand that they are displayed as such on the additional display, or that these are displayed as an object on the additional display, wherein the object is generated taking into account the identified object placeholder.
  • the object placeholders and / or the model placeholders are designed as markers with a machine-readable coding, in particular an infrared coding.
  • machine-readable codes can be realized, for example, in the form of barcodes or two-dimensional binary codes (QR codes).
  • QR codes two-dimensional binary codes
  • the object placeholders have means for attaching a removable marking, in particular inscription.
  • a removable marking in particular inscription.
  • This makes it possible to operate the military sandbox system with blank placeholders or blank markers which can only be identified with a corresponding marking, in particular inscription, following their recording with the receiving device and assigned correspondingly to a virtual object.
  • This significantly facilitates and makes more flexible the use of the system since, for example, the user does not first have to select or select the correct object placeholder, but basically, using a blank object placeholder and affixing a corresponding marking, in particular lettering Can use available blank object placeholders.
  • model placeholders can also be true for model placeholders.
  • the at least one object placeholder has a smooth cover layer for applying a removable inscription. Because this is also one Reuse of the placeholder allows, so that a particularly great flexibility of the system is achieved.
  • the at least one object placeholder has a lettering with military tactical signs.
  • military tactical signs are readily and immediately identifiable by trained or skilled military sandbox users. This makes it possible for users without a display device to be included in the use of the military sandbox system for the overlaid display of virtual image content and real image content. For while these do not receive a display of a virtual object based on the object placeholder in the presentation environment via an advertisement on the respective display element, but can also estimate the military and / or tactical situation without the display of a corresponding virtual object due to the military tactical signs of object placeholder used ,
  • FIG. 1 is a schematic representation of a military sandbox system according to a first embodiment
  • Fig. 2 is a schematic representation of a military sandbox system according to a second embodiment.
  • Fig. 1 shows a presentation environment 1 in which a plurality of user 2 is located. At least a part of the user 2 has a display device 3 arranged in the field of view of the user 2 Display element for displaying virtual image content, which is superimposed on real image content.
  • the display devices 3 can be designed, for example, as head-mounted transparent readouts (optical see-through head-up displays).
  • Such a display device 03 makes it possible for the respective user 2, on the one hand, to perceive the presentation environment 1 and objects and objects located therein as real image content and, moreover, to perceive virtual image contents via the display element of the display device 3, which are then superimposed with the real image contents.
  • an image 4 of a simulation environment which maps a geospecifically specific real environment is also arranged.
  • the image 4 is embodied as a three-dimensional physical model, in particular to scale, of a simulation environment which images the real environment. This also means that all users 2, regardless of whether they have a display device 3 or not, can perceive the image 04 of the simulation environment as part of the real image content of the presentation environment 1.
  • the presentation environment 01 furthermore comprises a recording device 5, which is set up to record at least part of the presentation environment 1.
  • the receiving device 05 is arranged in particular so that it receives the image 4 of the simulation environment.
  • the receiving device 5 may be formed, for example, as a camera, in particular a video camera.
  • an object placeholder 6 is arranged, which in the example of FIG. 1 is designed as a movable QR code. Additionally or alternatively, the object placeholder 6 can also be designed inscribable. Equally, provision may also be made for the object placeholder 6 to have military tactical symbols which were possibly applied as part of an application of a removable label for a blank object placeholder.
  • an additional display 7 is arranged in the presentation environment 1. The representation of the additional display 7 is largely determined by the receiving device 5. More details on the content of the display of the additional display 7 will be described below.
  • the military sandbox system 10 has a computing unit 8 and a memory device 9.
  • the arithmetic unit 8 for data-communication see at least with the memory device 9, the receiving device 5 and the display device 3 and possibly the additional display 07 is connected.
  • the display devices 3 further comprise detection devices 11, which are designed, for example, as markers and by means of which the position and / or the orientation of the display device 3 in the presentation environment 1 can be detected via the recording device 5. Furthermore, the display devices 3 can be equipped with connecting elements 12, which in the example of FIG. 1 are designed as wireless connecting elements 12 and enable the data-related communication at least with the arithmetic unit 8.
  • the arithmetic unit 8 the position and orientation of the display device 3 based on the position of the detection device 11 is determined from the recording of the receiving device 5.
  • Au- from the recording of the Freein device 5 of the object placeholder 6 and its position and / or orientation in the presentation environment 1 identified.
  • an access to the storage unit 9 determines with which virtual object the object place holder 6 is linked.
  • an object database can be stored in the storage unit, which allows an association between the identified object placeholder 6 and an object of the object database.
  • the objects may be military units or forces. The objects can also affect vehicles, aircraft or ships.
  • the arithmetic unit 8 calculates a virtual object for each pointing device 3 in the presentation environment 1, for example as a two-dimensional projection of a three-dimensional object , and a corresponding insertion position of the virtual object on the display element of the display device 3. Thereafter, the respectively determined and / or created virtual object is transferred from the arithmetic unit 8 to the display device 3, where possibly with the involvement of a display device 3 associated further computing unit , the virtual object is displayed on the display element of the display device 3 and, accordingly, overlaid with the real image contents of the presentation environment 01.
  • the users 2 who have a display device 3, in addition to the image 4 of the simulation environment can also perceive the virtual object, which is displayed as if it were at the position of the object placeholder 6 in the image of the simulation environment. It thus becomes possible for the user of the military sandbox system 10 of FIG. 1, insofar as he has a display device 3, to perceive a highly realistic image 4 of a simulation environment that maps a real environment geospecifically and superimposed virtual objects such as units or forces to optimally prepare or train such a military mission.
  • the image 4 of a simulation environment reproducing the real environment in a geospecific manner provides a realistic and misrepresentative preventive image of the real environment and additionally provides a particularly realistic military sandbox via the insertion or overlaying of virtual objects the corresponding virtual objects allow a much more vivid preparation of a military mission.
  • the image contents displayed on the additional display 7 can assume different characteristics.
  • the additional display 7 reproduces the receptacle of the receiving device 5 identically or does not further process and / or process it. In the example of FIG. 1, this would mean that the image 4 and the object placeholder 6 are displayed on the additional display 7 from the perspective of the receiving device 5.
  • the recording of the recording device 5 can also be processed so that instead of the object place holder 6, an object which corresponds to the object placeholder associated with the object, is integrated into the receptacle of the receiving device 5 and displayed on the additional display 7.
  • FIG. 2 essentially shows a military sandbox system 10 identical to that of FIG. 1.
  • the image 4 of the simulation environment which maps the real environment geospecifically comprises a model placeholder 13 which is also received by the receiving device 5 and identified on the part of the computer or the computing units.
  • the user 2 is shown via the display device 3, a virtual simulation environment as a virtual image content on the display element of the display device 3 for display.
  • a corresponding virtual object is generated and displayed based on the object placeholder 6. This may be done in accordance with the description of FIG.
  • the image contents shown on the additional display 7 it is particularly advantageous, especially for user 2, without a display device 3 if the image of the model place holder 13 is processed by the recording device 5 by the arithmetic unit 8 such that the model placeholder 13 does not appear on the additional display 7 but an image of the simulation environment is shown, which is also shown schematically in FIG.
  • FIG. 2 likewise shows an object placeholder 6 which, in addition to a machine-readable coding 15, such as a stitch code or bar code or QR code, has a tactical military character.
  • a machine-readable coding 15 such as a stitch code or bar code or QR code

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Materials Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Software Systems (AREA)
  • Manufacturing & Machinery (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Remote Sensing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Verfahren zum Betrieb eines militärischen Sandkastens und militärisches Sandkastensystem, wobei das Verfahren die folgenden Verfahrensschritte umfasst: Abbilden einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung in einer Darstellungsumgebung (1); Aufnahme von zumindest einem Objektplatzhalter (6) mit einer Aufnahmeeinrichtung (5); Identifizieren des zumindest einen Objektplatzhalters (6) und dessen Position und/oder Ausrichtung in der Darstellungsumgebung (1); Erzeugen von zumindest einem virtuellen Objekt anhand des identifizierten Objektplatzhalters (6); und Darstellen des zumindest einen virtuellen Objekts unter Berücksichtigung der Position und/oder Ausrichtung des Objektplatzhalters (6) mit zumindest einer in der Darstellungsumgebung (1) angeordneten Anzeigeeinrichtung (3) mit im Sichtfeld eines Benutzers (2) angeordnetem Anzeigeelement zur Anzeige von virtuellen Bildinhalten, welche realen Bildinhalten überlagert angezeigt werden.

Description

Militärisches Sandkastensystem und
Verfahren zum Betrieb eines militärischen Sandkastens
Militärische Sandkästen haben in der Einsatzvorbereitung militärischer Kräfte und Einheiten eine lange Geschichte. Dabei dienen die jeweiligen Sand- kästen zur Visualisierung eines Einsatzgeländes und darin befindlicher Objekte, wie beispielsweise Gebäude, Bewuchs sowie feindliche Stellungen und Truppen.
Dabei wurden und werden in unterschiedlichen Hierarchieebenen des Mi Ii - tärs und/oder für unterschiedliche zu planende Einsätze unterschiedlichste Ausprägungen von militärischen Sandkästen benutzt, was insbesondere die Detailgenauigkeit oder die Detailhöhe des im Sandkasten widergespiegelten Geländes und der darin befindlichen Objekte betrifft. So kann beispielsweise auf einer der unteren militärischen Hierarchieebenen ein Truppführer zur Lage- und Einsatzbesprechung mit den ihm unterstellten Kräften unter Zuhilfenahme einfachster Mittel, wie beispielsweise Äste, Steine, Moos und einem Stück Erdoberfläche einen militärischen Sandkasten improvisieren, um die unmittelbare Lage oder den unmittelbaren Einsatz zu skizzieren und den ihm unterstellten Kräften zu veranschaulichen.
Auf hochrangierenden Ebenen des Militärs oder zur Vorbereitung von von langer Hand geplanten Spezialeinsätzen können unter Zuhilfenahme von Sand oder anderem plastisch verformbaren Material als Untergrund zur Darstellung des Geländes sowie unter Verwendung schematischer Modelle der im Gelände befindlichen Objekte unter sehr hohem zeitlichen Aufwand detailgetreuere und detailliertere militärische Sandkästen erstellt und ggf. unter Verwendung weiterer Modelle, die beispielsweise die eigenen Kräfte oder Truppen symbolisieren, verwendet werden.
Doch selbst wenn ein hoher Aufwand bei der Herstellung sowie der Verwendung des militärischen Sandkastens aufgebracht wird, so sind doch die dar- aus resultierenden Sandkästen einer Vielzahl von Limitierungen unterworfen, die insgesamt dazu führen, dass das Gelände und die darin befindlichen Objekte, in denen der Einsatz geplant wird und später durchzuführen ist, den am Einsatz teilnehmenden Kräften sowie den den Einsatz planenden Kräften ungenau, verfälscht oder gar falsch vermittelt werden. Nur als eines vieler Beispiele sei hier eine Situation beschrieben, bei der der Einsatz in einem bergigen oder sonst zerklüfteten realen Gelände geplant und ausgeführt werden soll. Je nach Material, welches bei der Erstellung des militärischen Sandkastens zur Nachformung des realen Geländes verwendet wird, können jedoch nur gewisse Steigungen oder Steigungsraten im Gelän- de im militärischen Sandkasten nachgebildet werden. Dies ist beispielsweise bei der klassischen und namensgebenden Verwendung von Sand zur Nachformung des realen Geländes der Fall. In diesem speziellen Fall führt dies dazu, dass das Gelände im militärischen Sandkasten insgesamt zu gleichmäßig oder zu flach abgebildet wird, was für den Benutzer des Sandkastens zu Fehlvorstellungen hinsichtlich der möglichen Bewegung eigener oder gegnerischer Kräfte in dem Gelände führen kann.
Aber auch andere Limitierungen, wie beispielsweise die Verwendung von standardisierten oder schematischen Modellen zur Nachbildung von Gebäuden kann zu einer Fehlvorstellung bei der Benutzung des militärischen Sandkastens führen, die im schlimmsten Falle den gesamten Erfolg des ge- planten Einsatzes in Frage stellt.
Auch die Darstellung von beweglichen Objekten in einem im militärischen Sandkasten, insbesondere in Form von beweglichen Truppen oder beweglichem Gerät, ist unzureichend, da die jeweiligen Einheiten und/oder das jeweilige Material in der Regel nur als taktische Zeichen in dem militärischen Sandkasten bewegt werden, so dass der Bezug zwischen den beweglichen Objekten, dem Gelände des Sandkastens und den Objekten des Sandkastens, insbesondere ein Größenvergleich, nicht stattfinden kann oder gar stattfindet, ohne dass die fehlende Maßstabsgetreue berücksichtigt wird.
Die A u f g a b e der vorliegenden Erfindung besteht dementsprechend darin, ein militärisches Sandkastensystem sowie ein Verfahren zum Betrieb eines militärischen Sandkastens anzugeben, welche die oben genannten Nachteile des Standes der Technik überwinden.
Bei einem Verfahren der eingangs genannten Art wird diese Aufgabe dadurch g e l ö s t , dass eine die Realumgebung geospezifisch abbildende Simulationsumgebung in einer Darstellungsumgebung abgebildet, einen in der Darstellungsumgebung angeordneten Objektplatzhalter mit einer Auf- nahmeeinrichtung aufgenommen, der zumindest einen Objektplatzhalter und dessen Position und/oder Ausrichtung in der Darstellungsumgebung identifiziert und ein virtuelles Objekt anhand des identifizierten Objekt- Platzhalters erzeugt wird. Zudem wird im Rahmen des erfindungsgemäßen Verfahrens, dass zumindest ein virtuelles Objekt unter Berücksichtigung der Position und/oder der Ausrichtung des Objektplatzhalters mit zumindest einer in der Darstellungsumgebung angeordneten Anzeigeeinrichtung mit im Sichtfeld eines Benutzers angeordnetem Anzeigeelement zur Anzeige von virtuellen Bildinhalten, welche realen Bildinhalten überlagert anzeigt werden, dargestellt.
Dadurch werden mit dem erfindungsgemäßen Verfahren erhebliche Vorteile gegenüber dem Stand der Technik generiert. Denn durch die Abbildung einer die Realumgebung geospezifisch abbildenden Simulationsumgebung wird ermöglicht, dass eine hochgradig genaue, detailgetreue und darüber hinaus aktuelle Wiedergabe des realen Geländes und der darin befindlichen realen Objekte im Rahmen des Betrieb des militärischen Sandkastens ge- währleistet wird.
Darüber hinaus wird durch die Verwendung von Objektplatzhaltern, der Identifizierung der Objektplatzhalter sowie deren Position und/oder Ausrichtung in der Darstellungsumgebung und der darauf aufbauenden Erzeu- gung und Darstellung virtueller Bildinhalte nicht nur aber besonders für den Fall, dass die Objektplatzhalter für bewegliche militärische Einheiten oder Kräfte verwendet werden, ermöglicht, dass ein hochgradig realistisches und detailgetreues Abbild der tatsächlichen Einheit in der Abbildung der Simulationsumgebung für den Benutzer zur Anzeige gebracht wird, also wahr- nehmbar gemacht wird, so dass beispielsweise auch die Größenverhältnisse der virtuellen Bildinhalte mit den Größenverhältnissen des Abbilds der Simulationsumgebung verglichen und der Einsatz dementsprechend effektiver, insbesondere unter Ausschluss von durch den militärischen Sandkasten vermittelten Fehlvorstellungen, vorbereitet werden kann.
In einer ersten vorteilhaften Ausführungsform des Verfahrens ist zudem vorgesehen, dass die Position und/oder die Ausrichtung der zumindest ei- nen Anzeigeeinrichtung in der Darstellungsumgebung ermittelt und bei der Bestimmung einer Einblendungsposition des virtuellen Bildinhalts auf dem Anzeigeelement berücksichtigt wird. Aus ein und demselben Objektplatzhalter kann im Rahmen der Identifizierung und der anschließenden Erzeu- gung eines virtuellen Objekts die jeweilige Position und/oder Ausrichtung der Anzeigeeinrichtung berücksichtigt werden, so dass beispielsweise für Anzeigeeinrichtungen an unterschiedlichen Positionen unterschiedliche virtuelle Objekte erzeugt und als virtuelle Bildinhalte auf dem Anzeigeelement auf jeweils unterschiedlichen Einblendungspositionen angezeigt wer- den können.
Gleichermaßen wird durch die Berücksichtigung der Position und/oder Ausrichtung der Anzeigeeinrichtung in der Darstellungsumgebung ermöglicht, dass ein Benutzer seine Position und seine Blickrichtung in der Darstel- lungsumgebung ändert und dadurch sich das angezeigte virtuelle Objekt und dessen Einblendungsposition so verändert, dass bei dem Benutzer der Eindruck erscheint, es handle sich um ein plastisches, in der Simulationsumgebung oder zumindest in der Darstellungsumgebung angeordnetes reales Objekt an einem bestimmten Punkt oder an einer bestimmten Stelle der Darstellungsumgebung. Es werden also gewissermaßen die Veränderungen von Positionen und/oder Ausrichtungen der Anzeigeeinrichtung kompensiert und gleichzeitig dem virtuellen Objekt eine Räumlichkeit, durch die Möglichkeit einer Betrachtung aus unterschiedlichen Richtungen, verliehen. Gemäß einer weiteren besonders bevorzugten Ausführungsform des Verfahrens kann vorgesehen sein, dass das Abbild der Simulationsumgebung durch ein physisches dreidimensionales, insbesondere maßstabsgetreues Modell erfolgt. Ein physisches Modell hat dabei den Vorteil, dass es eine taktile oder haptische Interaktion mit dem Benutzer ermöglicht. Es ist dabei be- sonders vorteilhaft, wenn das Modell solide ist und nur eine Geringe Verformbarkeit aufweist. Dadurch können viele der eingangs beschriebenen Limitierungen klassischer militärischer Sandkästen überwunden werden. Weitere Nachteile werden dadurch überwunden, dass es sich bei dem Modell um ein geospezifisches Modell der Realumgebung handelt. Denn damit steigt der Grad der Entsprechung zwischen dem Modell und der Realumgebung auf ein ungekanntes Maß, so dass eine sehr realistische Einschätzung der Situation in der Realumgebung und eine entsprechend vorteilhafte Vorbereitung oder Planung eines militärischen Einsatzes erfolgen kann.
Ganz besonders bevorzugt kann dabei vorgesehen sein, dass das Modell der Simulationsumgebung durch ein dreidimensionales Druckverfahren herge- stellt wird. Dreidimensionale Druckverfahren oder 3 D- Druckverfahren eignen sich besonders, um innerhalb kürzester Zeit eine Realumgebung geo- spezifisch abbildende Simulationsumgebung, die bevorzugt in Form von digitalen Daten vorliegt, in ein physisches dreidimensionales Modell zu überführen. Damit wir trotz eines besonders hohem Maß an Übereinstimmung oder Entsprechung zwischen dem Modell und der Realumgebung, der Aufwand zur Herstellung des Abbilds der Realumgebung auf ein Minimum reduziert.
Besonders bevorzugt sind dabei solche 3D-Druckverfahren, bei denen die erzeugten oder erzeugbaren Geometrien keinen Einschränkungen unterliegen, beispielsweise auch Überhänge oder dergleichen erzeugt werden können.
Auch wenn ein physisches Modell zur Abbildung der Simulationsumgebung in der Darstellungsumgebung den Vorteil der haptischen oder taktilen Interaktion ermöglicht, so erfordern sie doch einen gewissen Aufwand im Rahmen der Durchführung des vorgeschlagenen Verfahrens. Dies bedeutet, dass das jeweilige Modell zunächst erstellt, insbesondere gedruckt werden muss und dann die Simulationsumgebung oder vielmehr einen bestimmten Ausschnitt einer Simulationsumgebung in einem festen Maßstab abzubilden. Um jedoch den Herstellungsvorgang abzukürzen, den Maßstab variabel zu halten und darüber hinaus auch den abgebildeten Teil der Simulationsumgebung während des Verfahrens verändern zu können, ist eine weitere besonders vorteilhafte Ausführungsform des Verfahrens vorgesehen.
Diese sieht vor, dass das Abbilden der Simulationsumgebung als virtuelle Darstellung mittels der zumindest eine Anzeigeeinrichtung erfolgt. Denn bei dem Abbilden der Simulationsumgebung als virtuelle Darstellung kann insbesondere der Abbildungsmaßstab und der jeweilige Teil der Simulation- sumgebung weitestgehend frei verändert und angepasst werden. Dies bedeutet, dass beispielsweise ein Heran-Zoomen oder Heraus-Zoomen sowie ein Verschieben oder anderweitiges Verändern des abgebildeten Teils der Simulationsumgebung während des Verfahrens beispielsweise in Reaktion auf eine entsprechende Benutzereingabe ermöglicht werden kann. Darüber hinaus ist das Erstellen oder Herstellen eines Abbilds der Simulationsumgebung in Form einer virtuellen Darstellung unter Verwendung einer entsprechenden Recheneinheit innerhalb kürzester Zeit zu bewerkstelligen.
Alternativ oder zusätzlich kann jedoch auch vorgesehen sein, dass die Aus- wähl einer Simulationsumgebung und/oder die Auswahl eines bestimmten Teils oder Abschnitts einer Simulationsumgebung und/oder der jeweilige Maßstab, in dem die Simulationsumgebung oder der Teil einer Simulationsumgebung abgebildet wird, auf andere Weise als durch eine Benutzerinteraktion oder Benutzereingabe festgelegt wird. Dazu ist eine weitere vor- teilhafte Ausprägung des Verfahrens vorgesehen, gemäß der ein Modellplatzhalter in der Darstellungsumgebung angeordnet, aufgenommen und identifiziert wird, wobei durch die Identifizierung des Modellplatzhalters eine Zuordnung zu einer darzustellenden Simulationsumgebung oder eines Teils einer Simulationsumgebung erfolgt.
In diesem Fall erfolgen die Darstellung der virtuellen Objekte oder des virtuellen Objekts und das Abbilden der Simulationsumgebung auf eine ver- gleichbare Art und Weise bzw. mit den gleichen Mitteln. Das bedeutet auch, dass durch die Verwendung der Anzeigeeinrichtungen mit im Sichtfeld eines Benutzers angeordneten Anzeigeelement zur Anzeige von virtuellen Bildinhalten, welche realen Bildinhalten überlagert angezeigt werden, gemäß dieser Ausführungsform des Verfahrens der Betrieb eines militärischen Sandkastens das Anordnen eines Modellplatzhalters und zumindest eines Objektplatzhalters in der Darstellungsumgebung und die Aufnahme, Identifizierung und Darstellung oder Abbildung als virtuelle Objekte und als virtuelle Darstellung der Simulationsumgebung vorsieht. Es sind also im Ge- gensatz zu einem klassischen militärischen Sandkasten in dieser Ausführungsform des Verfahrens weder physische Gegenstände zur Abbildung des realen Geländes und der darin befindlichen realen Objekte in der Darstellungsumgebung vorhanden noch sind in der Darstellungsumgebung physische in dem Sandkasten anzuordnende Objekte, wie beispielsweise zu bewegen- de oder zu verschiebende Truppen in Form von Modellen vorhanden.
Auf die Art und die Beschaffenheit des Modellplatzhalters und /oder der Objektplatzhalter wird im weiteren Verlauf dieser Beschreibung mit Bezug auf die gegenständlichen Merkmale des Sandkastensystems noch genauer eingegangen werden.
In einer weiteren besonders bevorzugten Ausführung des Verfahrens ist vorgesehen, dass die Position und/oder Ausrichtung des Modellplatzhalters in der Darstellungsumgebung identifiziert wird und daraus die Position und/oder Ausrichtung des Abbilds der Simulationsumgebung in Form der virtuellen Darstellung der Simulationsumgebung bestimmt wird. Dadurch wird neben der Auswahl des Abbilds einer Simulationsumgebung oder eines Teils davon auch die Ausrichtung des Abbilds der Simulationsumgebung in der Darstellungsumgebung über den Modellplatzhalter bestimmt.
Dies kann besonders vorteilhaft sein, wenn beispielsweise das Abbild der Simulationsumgebung in der Darstellungsumgebung in einer speziellen oder bevorzugten Ausrichtung erzeugt und abgebildet oder dargestellt werden soll. Andererseits kann es auch besonders vorteilhaft sein, wenn beispielsweise eine Veränderung der Position oder der Ausrichtung des Modellplatzhalters als eine Form der Benutzereingabe vorgesehen ist, um das Abbild der Simulationsumgebung oder zumindest die Ausrichtung des Abbilds für den jeweiligen Benutzer einer Anzeigevorrichtung zu verändern. So kann beispielsweise vorgesehen sein, dass eine Rotation des Modellplatzhalters zu einer entsprechenden Rotation des Abbilds der Simulationsumgebung führt, welche sich für den Benutzer einer Anzeigevorrichtung dementspre- chend als eine Änderung oder Veränderung der virtuellen Abbildung der Simulationsumgebung darstellt.
Alternativ könnte jedoch auch vorgesehen sein, dass die Ausrichtung des Abbilds der Simulationsumgebung, insbesondere der virtuellen Simulation- sumgebung, in der Darstellungsumgebung automatisch und unabhängig von der Position und/oder Ausrichtung des Modellplatzhalters erfolgt. Dies kann beispielsweise vorteilhaft sein, wenn in der Darstellungsumgebung beispielsweise eine fixe Nordrichtung für alle Simulationsumgebungen, insbesondere virtuelle Simulationsumgebungen festgelegt ist, was die Benutzung des militärischen Sandkastens, insbesondere die Orientierung, erleichtern kann.
Außerdem kann vorteilhaft vorgesehen werden, dass die Einblendungsposition und/oder die Ausrichtung des zumindest einen virtuellen Objekts aus der Position und/oder Ausrichtung des Objektplatzhalters, der Position und/oder der Ausrichtung des Modellplatzhalters und/oder einem von der Simulationsumgebung umfassten Gelände- und/oder Oberflächenmodell der Realumgebung bestimmt wird. Diese Ausgestaltung betrifft den Fall, in dem kein physisches Modell der Simulationsumgebung als Abbild verwendet wird, sondern eine virtuelle Simulationsumgebung in der Darstellungsumgebung abgebildet wird oder genauer eine virtuelle Simulationsumgebung auf dem Anzeigeelement der Anzeigevorrichtung dargestellt und damit mit den realen Bildinhalten der Darstellungsumgebung überlagert angezeigt wird.
Der dazu zum Einsatz kommende Modellplatzhalter und der ebenfalls zum Einsatz kommende Objektplatzhalter können beispielsweise in einer Ebene, insbesondere auf einer flachen Unterlage, wie beispielsweise einem Fußboden oder einer Tischoberfläche der Simulationsumgebung angeordnet sein. Anhand des Modellplatzhalters wird jedoch mittels der Anzeigevorrichtung eine Abbildung der Simulationsumgebung in Form einer virtuellen Simulati- onsumgebung erzeugt und dargestellt, die dem Benutzer den Eindruck einer dreidimensionalen, nicht ebenen Oberfläche vermittelt, die das Gelände und/oder die Oberfläche der Realumgebung nachbildet. Um in diesem Fall jedoch den militärischen Sandkasten dazu nutzen zu können, virtuelle Objekte in der virtuellen Simulationsumgebung zu platzieren, zu bewegen und dergleichen, ist es jedoch notwendig, dass die virtuellen Objekte, insbesondere deren Einblendungsposition auf dem Anzeigeelement der Anzeigevorrichtung so bestimmt werden, dass der Eindruck entsteht, die virtuellen Objekte befänden sich auf der Oberfläche der virtuellen Simulationsumgebung und nicht darüber oder darunter. Dies wird dadurch ermöglicht, dass zunächst die Relativanordnung und die Relativausrichtung des Modellplatzhalters und des zumindest einen Objektplatzhalters zueinander aufgenommen und identifiziert werden. Im Anschluss daran wird aus den besagten Relativanordnungen anhand des von der Simulationsumgebung umfassten Gelände- und/oder Oberflächenmodell der Realumgebung ermittelt, welche Höhe das Gelände- oder das Oberflächenmodell der Simulationsumgebung am Ort des Modellplatzhalter hat. Anschließend wird daraus abgeleitet, auf welcher Höhe oder an welcher Position des Anzeigeelements das virtuelle Objekt darzustellen oder anzuzeigen ist, damit eine Darstellung erfolgt, die den Eindruck erweckt, das virtuelle Objekt befände sich auf der Oberfläche des Geländemodells oder Oberflächenmodells der virtuellen Simulationsumgebung. Dies bedeutet mit anderen Worten ausgedrückt, dass ausgehend von der Relativanordnung zwischen Modellplatzhalter und Objekt- Platzhalter eine Projektion des virtuellen Objekts auf die Oberfläche der virtuellen Simulationsumgebung vorgenommen wird.
Bei den vorangegangenen Beschreibungen des Verfahrens ist ersichtlich, dass die virtuellen Objekte sowie die virtuellen Simulationsumgebungen in der Darstellungsumgebung nur von solchen Benutzers wahrgenommen werden, die eine entsprechende Anzeigevorrichtung benutzen oder die mit einer entsprechenden Anzeigevorrichtung ausgestattet sind. Es kann für das vorgeschlagene Verfahren jedoch besonders vorteilhaft sein, wenn auch andere Benutzer innerhalb oder außerhalb der Darstellungsumgebung in die Lage versetzt werden, die virtuellen Bildinhalte und/oder die virtuellen Simulationsumgebungen wahrzunehmen, insbesondere optisch wahrzunehmen. Dazu sieht eine weitere vorteilhafte Ausführungsform vor, dass die Aufnahme der Darstellungsumgebung, insbesondere mit einer Aufnahmeein- richtung, der Darstellungsumgebung zur Reproduktion des Abbilds der Simulationsumgebung und/oder des zumindest einen virtuellen Objekts erfolgt und die Aufnahme insbesondere an eine Zusatz-Anzeige übertragen wird.
Weiter kann besonders vorteilhaft vorgesehen sein, dass in der Aufnahme der Modellplatzhalter sowie dessen Position und /oder Ausrichtung identifiziert und insbesondere im Rahmen einer Übertragung an eine Zusatz- Anzeige berücksichtigt wird. Die Berücksichtigung kann dabei darin liegen, dass der identifizierte Modellplatzhalter in einem der Übertragung an eine Zusatz-Anzeige vorgeschalteten oder zumindest einem der Anzeige auf ei- ner Zusatz-Anzeige vorgeschalteten Verfahrensschritt in ein entsprechendes auf der Anzeige darstellbares Abbild der Simulationsumgebung umgewandelt wird, so dass auf der Zusatz-Anzeige ein Abbild der virtuellen Simulationsumgebung zur Anzeige gebracht werden kann. Für den Fall, dass es sich bei der Zusatz-Anzeige um einen Bildschirm oder ein Display handelt kann also vorgesehen sein, dass in der Aufnahme der Darstellungsumgebung der Modellplatzhalter erkannt wird, der Modellplatzhalter einer entsprechenden Simulationsumgebung zugeordnet wird und auf der Zusatzanzeige ein Abbild der Simulationsumgebung in die Aufnahme der Darstellungsumgebung integriert und anstatt des Modellplatzhalters angezeigt wird.
Dementsprechende Verfahrensschritte können auch für den zumindest ei- nen aufgenommenen und identifizierten Objektplatzhalter vorgesehen sein, so dass auf der Zusatz-Anzeige neben dem Abbild der virtuellen Simulationsumgebung auch ein Abbild des virtuellen Objekts, insbesondere anstatt des Objektplatzhalters selbst, zur Anzeige gebracht wird. In einer weiteren, besonders vorteilhaften Ausführungsform des Verfahrens ist darüber hinaus vorgesehen, dass die Simulationsumgebung durch die Auswertung von bei einem Überflug über und/oder einer Durchfahrt durch die Realumgebung gewonnenen Sensordaten, insbesondere Bildaufnahmen, erzeugt wird. Eine ausführliche Beschreibung betreffend eine derartige Er- zeugung von Simulationsumgebungen findet sich in der deutschen Patentanmeldung DE 10 2015 120999.3, deren Inhalt hiermit vollständig in die vorliegende Beschreibung mit aufgenommen wird.
Die Verwendung von Simulationsumgebungen, die durch die Auswertung von bei einem Überflug über und/oder einer Durchfahrt durch die Realumgebung gewonnenen Sensordaten erzeugt werden, haben den Vorteil, dass die Simulationsumgebungen eine besonders hohe zeitliche Aktualität aufweisen und zudem genügend Informationen zur Erzeugung einer geospezifischen Simulationsumgebung umfassen. Dementsprechend profitieren auch die im Verfahren verwendeten Abbildungen der Simulationsumgebung von der vorgeschlagenen Ausgestaltung der Simulationsumgebung.
Die eingangs beschriebene Aufgabe wird weiter durch ein militärisches Sandkastensystem der eingangs genannten Art dadurch g e l ö s t , dass das Sandkastensystem ein Abbild einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung in einer Darstellungsumgebung, sowie zumindest eine in der Darstellungsumgebung angeordnete Anzeigeeinrichtung mit im Sichtfeld eines Benutzers angeordneten Anzeigeelement zur Anzeige von virtuellen Bilddaten, die realen Bilddaten überlagert angezeigt werden, einen in der Darstellungsumgebung angeordneten Objektplatzhalter zur Darstellung eines virtuellen Objekts mittels des Anzeigeelements, eine in der Darstellungsumgebung angeordnete Aufnahmeeinrichtung zumindest zur Aufnahme des zumindest einen Objektplatzhalters sowie ferner eine Recheneinheit aufweist, wobei letztere zumindest zur Identifizierung des zumindest einen Objektplatzhalters und dessen Position und/oder Ausrichtung in der Darstellungsumgebung und zur Erzeugung eines virtuellen Objekts zur Darstellung auf dem Anzeigeelement in Abhängigkeit des identifizierten Objektplatzhalters eingerichtet ist.
Wie auch das oben beschriebene Verfahren ermöglicht das erfindungsgemäße System durch die Verwendung eines Abbilds einer die Realumgebung ge- ospezifisch abbildenden Simulationsumgebung, eine detailgetreue und maßstabsgetreue Wiedergabe des Geländes und der im Gelände befindlichen Objekte, die zur Vorbereitung und/oder Planung des militärischen Einsatzes von höchster Bedeutung sind. Damit vermeidet das militärische Sandkastensystem, dass die Benutzer eine Fehlvorstellung von dem realen Gelände und den realen Objekten, also von der Realumgebung vermittelt bekommen.
Durch die zusätzliche Verwendung von Anzeigeeinrichtungen zur überlagerten Anzeige von virtuellen Bildinhalten und realen Bildinhalten wird zudem ermöglicht, dass die Benutzer einerseits die Darstellungsumgebung an sich wahrnehmen können und andererseits in der Darstellungsumgebung virtuelle Objekte, beispielsweise virtuelle Einheiten oder Kräfte, insbesondere in Kombination und/oder Überlagerung mit dem Abbild der Simulationsumgebung angezeigt und/oder wahrgenommen werden können, so dass auch be- züglich der virtuellen Objekte des Sandkastensystems ein realistischer oder gar exakter Maßstab eingehalten werden kann. Darüber hinaus erleichtert die Verwendung virtueller Objekte, zumindest für die Benutzer des Sys- tems, welche mit einer entsprechenden Anzeigeeinrichtung ausgestattet sind, die Visualisierung der in dem militärischen Sandkasten bewegbaren oder beweglichen militärischen Einheiten durch die Verwendung entsprechender bewegbarer oder beweglicher Objektplatzhalter und daraus resul- tierenden virtuellen Objekten.
Außerdem ermöglichen die Anzeigeeinrichtungen zur überlagerten Anzeige von virtuellen Bildinhalten und realen Bildinhalten, dass mehrere Benutzer gleichzeitig das System nutzen, jeweils virtuelle Objekte wahrnehmen und gleichzeitig auch die andere Benutzer in der Darstellungsumgebung als Teil der realen Bildinhalte wahrnehmen, insbesondere sehen können. Dies erleichtert die Kommunikation unter den Benutzern und damit eine abgestimmte Planung oder Vorbereitung des militärischen Einsatzes.
In einer ersten vorteilhaften Ausführungsform des militärischen Sandkastensystems ist vorgesehen, dass das Abbild der Simulationsumgebung ein physisches dreidimensionales Modell, insbesondere ein dreidimensionaler Druck der Simulationsumgebung oder eines Teils der Simulationsumgebung, um- fasst.
In diesem Fall wird das physische Abbild der Simulationsumgebung als solches in der Darstellungsumgebung angeordnet. Es kann dabei beispielsweise vorgesehen sein, dass das Abbild eine feste Größe aufweist, um es zur Arretierung oder Befestigung in der Darstellungsumgebung mit einer entsprechenden Aufnahme und /oder Halterung kombiniert wird.
In einer alternativen Ausführungsform des Systems ist vorgesehen, dass das Abbild der Simulationsumgebung einen in der Darstellungsumgebung angeordneten Modellplatzhalter umfasst, der mit der Aufnahmeeinrichtung und der Recheneinheit einer in einer Speichereinrichtung des Systems gespeicherten computergenerierten Simulationsumgebung zugeordnet wird, wobei die Speichereinrichtung derart mit der Anzeigeeinrichtung und/oder der Recheneinheit verknüpft ist, dass mittels der computergenerierten Simulationsumgebung eine Darstellung einer virtuellen Simulationsumgebung mit der Anzeigeeinrichtung ermöglicht wird. Die Verwendung einer virtuellen Simulationsumgebung, welche ausgehend von einem identifizierten Modellplatzhalter generiert und über die Anzeigeeinrichtungen mit den realen Bildinhalten der Darstellungsumgebung überlagert für den Benutzer zur Anzeige gebracht wird, hat den Vorteil, dass jegliche Beschränkungen hinsichtlich des Erzeugens des Abbilds der Simulationsumgebung wegfallen, so dass ein höchstmögliches Maß an Realitätsnähe des Abbilds der virtuellen Simulationsumgebung erreicht werden kann. Damit wird auch das größtmögliche Maß an Übereinstimmung zwischen dem Abbild der Simulationsumgebung der Realumgebung ermöglicht. Die virtuelle Simulationsumgebung ist somit als virtueller Bildinhalt angezeigt und ist in gegenständlicher Hinsicht auf den Modelplatzhalter reduziert. Bei einer virtuellen Simulationsumgebung kann zudem in einfacher Weise der Größenmaßstab des Abbilds der Simulationsumgebung einfach und während des Betriebs und/oder der Benutzung des Sandkastensystems geändert werden.
In einer ebenfalls vorteilhaften Ausführungsform des militärischen Sandkastensystems ist vorgesehen, dass zumindest eine Erfassungseinrichtung, die zur Erfassung der Position und/oder Ausrichtung der zumindest einen An- Zeigevorrichtung dient, vorgesehen ist. Die Erfassungseinrichtung zur Erfassung der Position und/oder Ausrichtung der zumindest einen Anzeigevorrichtung ermöglicht eine besonders vorteilhafte Anzeige der virtuellen Bildinhalte, insbesondere der virtuellen Objekte und der virtuellen Simulationsumgebungen. Ganz besonders vorteilhaft beeinflusst wird durch eine sol- che Erfassungseinrichtung die Einblendungsposition der virtuellen Objekte und/oder der virtuellen Simulationsumgebungen auf dem Anzeigeelement. Denn um ein virtuelles Objekt oder eine virtuelle Simulationsumgebung kor- rekt auf dem Anzeigeelement anzeigen zu können und mit den realen Bildinhalten überlagern zu können, ist es besonders vorteilhaft, wenn auch die Position und die Ausrichtung der jeweiligen Anzeigevorrichtung in der Darstellungsumgebung und damit die Relativposition zwischen der Anzeigevor- richtung und dem Modellplatzhalter und/oder Objektplatzhalter sowie die Ausrichtung der Anzeigevorrichtung bezüglich des Modellplatzhalters und/oder der Objektplatzhalter bekannt ist.
Gemäß einer besonders vorteilhaften Ausführung der Erfassungseinrichtung kann vorgesehen sein, dass diese zumindest einen an der Anzeigeeinrichtung angeordneten Marker zur Erfassung der Position und/oder der Ausrichtung der Anzeigeeinrichtung in der Darstellungsumgebung umfasst. Die Erfassung kann beispielsweise über die Aufnahmeeinrichtung erfolgen. Es kann dabei vorgesehen sein, dass neben der absoluten Position des Markes in der Darstellungsumgebung anhand der Veränderungen der Position des Markers die Ausrichtung oder die Veränderung der Ausrichtung der Anzeigeeinrichtung erfasst und bestimmt wird. Alternativ kann die Ausrichtung anhand einer Mehrzahl von Markern ermittelt werden. In einer weiteren besonders wünschenswerten Ausgestaltung des militärischen Sandkastensystems ist vorgesehen, dass die Aufnahmeeinrichtung ein Übertragungsmittel zur Reproduktion des Abbilds der Simulationsumgebung und/oder des zumindest einen virtuellen Objekts, insbesondere zur Übertragung an eine Zusatz- Anzeige, aufweist. Damit wird ermöglicht, dass auch nicht in der Darstellungsumgebung befindliche Benutzer und/oder in der Darstellungsumgebung befindliche Nutzer, die jedoch nicht mit einer Anzeigeeinrichtung ausgestattet sind, den militärischen Sandkasten samt der darin befindlichen oder angeordneten, insbesondere virtuellen Objekten wahrnehmen können.
Es kann beispielsweise vorgesehen sein, dass mit dem Übertragungsmittel die mit der Aufnahmeeinrichtung aufgenommenen Objektplatzhalter und/oder Modellplatzhalter, ggf. nach einer Identifizierung seitens der Recheneinheit über ein Datennetzwerk an eine entfernt angeordnete kombinierte Rechner- und Anzeigeeinheit übertragen werden, an der, ausgehend von dem identifizierten Objektplatzhalter und /oder identifizierten Modell- Platzhalter, ebenfalls eine Anzeige des militärischen Sandkastens, also eine Reproduktion des militärischen Sandkastens, erfolgt. Demnach kann eine außerhalb der Darstellungsumgebung angeordnete Zusatz-Anzeige zur Anzeige des Abbilds der Simulationsumgebung und des zumindest einen virtuellen Objekts vorgesehen sein. In dieser Ausführung kann besonders vorteil- haft die Übertragung des Übertragungsmittels auf die Daten betreffend den oder die Objektplatzhalter und ggf. den Modellplatzhalter sowie die jeweiligen Relativanordnungen und -Ausrichtungen begrenzt werden, wobei emp- fängerseitig an der kombinierten Rechner- und Anzeigeeinheit aus diesen Daten ein Abbild des oder der Objekte und ggf. ein Abbild der Simulation- sumgebung erstellt wird.
Alternativ kann jedoch auch eine in der Darstellungsumgebung angeordnete Zusatz-Anzeige zur Anzeige des Abbilds der Simulationsumgebung und des zumindest einen virtuellen Objekts vorgesehen sein. Dies ermöglicht wie bereits erwähnt auch Benutzer ohne eine Anzeigeeinrichtung zur überlagerten Anzeige von virtuellen und realen Bildinhalten, eine entsprechende Wahrnehmung des militärischen Sandkastens.
Dabei zeichnen sich die Zusatz-Anzeigen dadurch aus, dass sie im Gegen- satz zu den Anzeigeeinrichtungen, nicht zur Überlagerung von virtuellen Bildinhalten und realen Bildinhalten eingerichtet sind, sondern lediglich ein empfangenes Bildsignal anzeigen. Dementsprechend kann mit Blick auf die Objektplatzhalter auch einerseits vorgesehen sein, dass diese als solche auf der Zusatz-Anzeige angezeigt werden, oder dass diese als Objekt auf der Zusatz-Anzeige angezeigt werden, wobei das Objekt unter Berücksichtigung des identifizierten Objektplatzhalters generiert wird. Gemäß einer weiteren vorteilhaften Ausführungsform des Systems ist vorgesehen, dass die Objektplatzhalter und/oder der Modellplatzhalter als Marker mit einer maschinenlesbaren Codierung, insbesondere einer Infrarot- Codierung, ausgestaltet sind. Derartige maschinenlesbare Codierungen kön- nen beispielsweise in Form von Strichcodes oder zweidimensionalen Binärcodes (QR-Codes) realisiert werden. Im Fall einer Ausgestaltung als Infrarot-Codierung kann dementsprechend vorgesehen sein, dass die Aufnahmeeinrichtung einen Infrarotsender aufweist, um die maschinenlesbaren Codierungen der als Marker ausgestalteten Objektplatzhalter oder Modell- Platzhalter aufnehmen zu können.
Alternativ zu einer maschinenlesbaren Codierung auf einem als Marker ausgestalteten Objektplatzhalter kann auch vorgesehen sein, dass die Objektplatzhalter Mittel zur Anbringung einer entfernbaren Kennzeichnung, insbe- sondere Beschriftung, aufweisen. Dies ermöglich den Betrieb des militärischen Sandkastensystems mit Blanko- Platzhaltern oder Blankomarkern, die erst mit einer entsprechenden Kennzeichnung, insbesondere Beschriftung, im Anschluss an ihre Aufnahme mit der Aufnahmeeinrichtung identifiziert und entsprechend einem virtuellen Objekt zugeordnet werden können. Dadurch wird die Benutzung des Systems deutlich erleichtert und flexibili- siert, da der Benutzer beispielsweise vor dem Gebrauch eines Objektplatzhalters nicht zunächst den korrekten Objektplatzhalter ausmachen oder aussuchen muss, sondern unter Verwendung eines Blankoobjektplatzhalters und dem Anbringen einer entsprechenden Kennzeichnung, insbesondere Beschriftung, grundsätzlich jeden zur Verfügung stehenden Blankoobjekt- platzhalter verwenden kann. Gleiches kann auch für Modelplatzhalter zutreffen.
In diesem Zusammenhang ist es deshalb besonders vorteilhaft, wenn der zumindest eine Objektplatzhalter eine glatte Deckschicht zur Aufbringung einer entfernbaren Beschriftung aufweist. Denn dadurch wird auch eine Wiederverwendung der Platzhalter ermöglicht, so dass eine besonders große Flexibilität des Systems erreicht wird.
Alternativ oder zusätzlich zu einer maschinenlesbaren Codierung kann vor- gesehen sein, dass der zumindest eine Objektplatzhalter eine Beschriftung mit militärischen taktischen Zeichen aufweist. Derartige militärische taktische Zeichen sind von geschulten oder geübten Benutzern von militärischen Sandkasten ohne weiteres und unmittelbar identifizierbar. Dadurch wird ermöglicht, dass auch Benutzer ohne eine Anzeigeeinrichtung zur überla- gerten Anzeige von virtuellen Bildinhalten und realen Bildinhalten in die Benutzung des militärischen Sandkastensystems mit eingezogen werden können. Denn diese erhalten zwar kein Anzeige eines virtuellen Objekts basierend auf dem Objektplatzhalter in der Darstellungsumgebung über eine Anzeige auf dem jeweiligen Anzeigeelement, können jedoch aufgrund der verwendeten militärischen taktischen Zeichen der Objektplatzhalter die militärische und/oder taktische Lage auch ohne die Anzeige eines entsprechenden virtuellen Objekts einschätzen.
Weitere Vorteile und Einzelheiten des erfindungsgemäßen Verfahrens sowie des erfindungsgemäßen Systems werden nachfolgend unter Zuhilfenahme der beigefügten schematischen Zeichnungen von Ausführungsbeispielen erläutert werden. Darin zeigen:
Fig. 1 eine schematische Darstellung eines militärischen Sandkastensystems gemäß einer ersten Ausführungsform;
Fig. 2 eine schematische Darstellung eines militärischen Sandkastensystems gemäß einer zweiten Ausführungsform. Die Fig. 1 zeigt eine Darstellungsumgebung 1 , in der eine Mehrzahl von Benutzers 2 befindlich ist. Zumindest ein Teil der Benutzer 2 verfügt über eine Anzeigeeinrichtung 3 mit im Sichtfeld des Benutzers 2 angeordnetem Anzeigeelement zur Anzeige von virtuellen Bildinhalten, welche realen Bildinhalten überlagert angezeigt werden. Die Anzeigeeinrichtungen 3 können beispielsweise als kopfbefestigbare Durchsicht-Anzeigen (optical see- through head-up displays) ausgebildet sein. Eine derartige Anzeigeeinrich- tung 03 ermöglicht es dem jeweiligen Benutzer 2 einerseits die Darstellungsumgebung 1 und darin befindliche Gegenstände und Objekte als realen Bildinhalt wahrzunehmen und darüber hinaus über das Anzeigeelement der Anzeigeeinrichtung 3 virtuelle Bildinhalte wahrzunehmen, die dann mit den realen Bildinhalten überlagert werden. In der Darstellungsumgebung 1 der Fig. 1 ist zudem ein Abbild 4 einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung angeordnet. In der Darstellung der Fig. 1 ist das Abbild 4 als ein dreidimensionales physisches, insbesondere maßstabsgetreues Modell einer die Realumgebung abbildenden Simulationsumgebung ausgeführt. Dies bedeutet auch, dass alle Benutzer 2, unabhängig davon, ob sie über eine Anzeigeeinrichtung 3 verfügen oder nicht, das Abbild 04 der Simulationsumgebung als Teil der realen Bildinhalte der Darstellungsumgebung 1 wahrnehmen können.
Die Darstellungsumgebung 01 umfasst darüber hinaus eine Aufnahmeein- richtung 5, die dazu eingerichtet ist, zumindest einen Teil der Darstellungsumgebung 1 aufzunehmen. Dabei ist die Aufnahmeeinrichtung 05 insbesondere so angeordnet, dass sie das Abbild 4 der Simulationsumgebung aufnimmt. Die Aufnahmeeinrichtung 5 kann beispielsweise als Kamera, insbesondere Videokamera ausgebildet sein.
Auf dem Abbild 4 der Simulationsumgebung ist ein Objektplatzhalter 6 angeordnet, der im Beispiel der Fig. 1 als beweglicher QR-Code ausgestaltet ist. Zusätzlich oder alternativ kann der Objektplatzhalter 6 auch beschriftbar ausgeführt sein. Gleichermaßen kann auch vorgesehen sein, dass der Objektplatzhalter 6 militärische taktische Zeichen aufweist, die ggf. im Rahmen einer Aufbringung einer wieder entfernbaren Beschriftung eines Blankoobjektplatzhalters aufgebracht wurden. Als weiteren Bestandteil des militärischen Sandkastensystems 10 ist in der Darstellungsumgebung 1 eine Zusatz-Anzeige 7 angeordnet. Die Darstellung der Zusatz-Anzeige 7 wird maßgeblich über die Aufnahmeeinrichtung 5 be- stimmt. Genauere Einzelheiten zu dem Inhalt der Darstellung der Zusatz- Anzeige 7 werden im Folgenden noch beschrieben werden.
Außerdem weist das militärische Sandkastensystem 10 eine Recheneinheit 8 sowie eine Speichereinrichtung 9 auf. Die Recheneinheit 8 zur datentechni- sehen Kommunikation ist zumindest mit der Speichereinrichtung 9, der Aufnahmeeinrichtung 5 sowie mit der Anzeigeeinrichtung 3 und ggf. der Zusatz-Anzeige 07 verbunden.
Die Anzeigeeinrichtungen 3 umfassen weiter Erfassungseinrichtungen 11 , die beispielsweise als Marker ausgestaltet sind und anhand derer über die Aufnahmeeinrichtung 5 die Position und/oder die Ausrichtung der Anzeigeeinrichtung 3 in der Darstellungsumgebung 1 erfasst werden kann. Weiter können die Anzeigeeinrichtungen 3 mit Verbindungselementen 12 ausgestattet sein, die im Beispiel der Fig. 1 als drahtlose Verbindungselemente 12 ausgeführt sind und die datentechnische Kommunikation zumindest mit der Recheneinheit 8 ermöglichen.
Nachfolgend wird eine erste Ausführungsform des erfindungsgemäßen Verfahrens anhand der Darstellung der Fig. 1 beschrieben.
Mit der Aufnahmeein richtung 5 erfolgt eine Aufnahme der Darstellungsumgebung 1 mitsamt des Abbilds 4 der Simulationsumgebung, dem Objektplatzhalter 6 sowie den Erfassungseinrichtungen 11 der Anzeigeeinrichtungen 3. Die von der Aufnahmeeinrichtung 5 erstellte Aufnahme wird an die Recheneinheit 8 übertragen. In der Recheneinheit 8 wird aus der Aufnahme der Aufnahmeeinrichtung 5 die Position und Ausrichtung der Anzeigeeinrichtung 3 anhand der Position der Erfassungseinrichtung 11 bestimmt. Au- ßerdem wird aus der Aufnahme der Aufnahmeein richtung 5 der Objektplatzhalter 6 sowie dessen Position und /oder Ausrichtung in der Darstellungsumgebung 1 identifiziert. Im Anschluss an die Identifizierung des Objektplatzhalters 6 wird durch ein Zugriff auf die Speichereinheit 9 festge- stellt, mit welchem virtuellen Objekt der Objektplatzhalter 6 verknüpft ist. Dazu kann eine Objektdatenbank in der Speichereinheit hinterlegt sein, die eine Zuordnung zwischen dem identifizierten Objektplatzhalter 6 und einem Objekt der Objektdatenbank ermöglicht. Beispielsweise kann es sich bei den Objekten um militärische Einheiten oder Kräfte handeln. Die Ob- jekte können auch Fahrzeuge, Flugzeuge oder Schiffe betreffen.
Ausgehend von der Position und/oder Ausrichtung des Objektplatzhalters 6 sowie der Position und/oder Ausrichtung der Anzeigeeinrichtung 3 im Darstellungsraum 1 berechnet die Recheneinheit 8 anschließend für jede An- Zeigeeinrichtung 3 in der Darstellungsumgebung 1 ein virtuelles Objekt, beispielsweise als zweidimensionale Projektion eines dreidimensionalen Objekts, und eine entsprechende Einblendungsposition des virtuellen Objekts auf dem Anzeigeelement der Anzeigeeinrichtung 3. Im Anschluss daran wird das jeweils ermittelte und/oder erstellte virtuelle Objekt von der Recheneinheit 8 an die Anzeigeeinrichtung 3 übertragen, wo ggf. unter Einbindung einer der Anzeigeeinrichtung 3 zugeordneten weiteren Recheneinheit, das virtuelle Objekt auf dem Anzeigeelement der Anzeigeeinrichtung 3 dargestellt und dementsprechend mit den realen Bildinhalten der Darstellungsumgebung 01 überlagert wird.
Folglich können die Benutzer 2, welche über eine Anzeigeeinrichtung 3 verfügen, zusätzlich zu dem Abbild 4 der Simulationsumgebung auch das virtuelle Objekt wahrnehmen, welches so dargestellt wird, als ob es sich an der Position des Objektplatzhalters 6 in dem Abbild der Simulationsumgebung befände. Es wird also möglich, dass der Benutzer des militärischen Sandkastensystems 10 der Fig. 1 , soweit er über eine Anzeigeeinrichtung 3 verfügt, ein hochgradig realistisches Abbild 4 einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung und dazu überlagert virtuelle Objekte, wie beispielsweise Einheiten oder Kräfte, wahrnehmen und so einen militärischen Einsatz optimal vorbereiten oder trainieren kann. Dabei wird einerseits sichergestellt, dass durch das Abbild 4 einer die Realumgebung geospezifisch abbildenden Simulationsumgebung ein realistisches und Fehlvorstellungen vorbeugendes Abbild der Realumgebung bereitgestellt und zu- dem über die Einblendung oder Überlagerung von virtuellen Objekten, zusätzlich ein besonders realistischer militärischer Sandkasten zur Verfügung gestellt wird, in dem die entsprechenden virtuellen Objekte eine deutlich anschaulichere Vorbereitung eines militärischen Einsatzes erlauben. Bei der auf der Zusatz-Anzeige 7 dargestellten Bildinhalte können unterschiedliche Ausprägungen annehmen. Einerseits kann vorgesehen sein, dass die Zusatz-Anzeige 7 die Aufnahme der Aufnahmeeinrichtung 5 identisch wiedergibt oder nicht weiter verarbeitet und/oder aufbereitet widerspiegelt. Im Beispiel der Fig. 1 würde dies bedeuten, dass das Abbild 4 sowie der Objektplatzhalter 6 aus der Perspektive der Aufnahmeeinrichtung 5 auf der Zusatz- Anzeige 7 angezeigt werden.
Die Aufnahme der Aufnahmeeinrichtung 5 kann jedoch auch so aufbereitet werden, dass anstatt des Objektplatzhalters 6 ein Objekt, welches dem dem Objektplatzhalter zugeordneten Objekt entspricht, in die Aufnahme der Aufnahmeeinrichtung 5 integriert und auf der Zusatz-Anzeige 7 dargestellt wird.
Die Darstellung der Fig. 2 zeigt im Wesentlichen ein zu der Darstellung der Fig. 1 identisches militärisches Sandkastensystem 10. In Abweichung zu der Darstellung der Fig. 1 umfasst das Abbild 4 der die Realumgebung geospezifisch abbildenden Simulationsumgebung einen Modellplatzhalter 13, der ebenfalls von der Aufnahmeeinrichtung 5 aufgenommen und auf Seiten des Rechners oder der Recheneinheiten identifiziert wird. Im Anschluss daran wird dem Benutzer 2 über die Anzeigeeinrichtung 3 eine virtuelle Simulationsumgebung als virtueller Bildinhalt auf dem Anzeigeelement der Anzeige- Vorrichtung 3 zur Anzeige gebracht. Dies bedeutet, dass ausgehend von dem Modellplatzhalter 13, der Position und/oder Ausrichtung des Modellplatzhalters 13 sowie der Position und/oder Ausrichtung der Erfassungseinrichtung 11 , auf dem Anzeigeelement der Anzeigeeinrichtung 03 ein virtuelles Abbild der Simulationsumgebung erzeugt und mit den realen Bildinhal- ten der Darstellungsumgebung 01 überlagert zur Anzeige gebracht wird. Zusätzlich wird anhand des Objektplatzhalters 6 ein entsprechendes virtuelles Objekt erzeugt und angezeigt. Dies kann in Übereinstimmung mit der Beschreibung der Fig. 1 erfolgen. Bei der auf der Zusatzanzeige 7 dargestellten Bildinhalte ist es, insbesondere für Benutzer 2, ohne eine Anzeigeeinrichtung 3 besonders vorteilhaft, wenn die Aufnahme des Modellplatzhalters 13 seitens der Aufnahmeeinrichtung 5 durch die Recheneinheit 8 so aufbereitet wird, dass auf der Zusatzanzeige 7 nicht der Modellplatzhalter 13, sondern ein Abbild der Simulati- onsumgebung dargestellt wird, was auch in der Fig. 2 schematisch dargestellt ist.
In der Fig. 2 ist ebenfalls ein Objektplatzhalter 6 gezeigt, der neben einer maschinenlesbaren Codierung 15, wie beispielsweise einem Stichcode oder Barcode oder QR-Code, ein taktisches militärisches Zeichen aufweist.
Dadurch kann für den Fall, dass auf der Zusatzanzeige 7 lediglich eine Umwandlung des Modellplatzhalters 13 in eine Darstellung oder ein Abbild der Simulationsumgebung erfolgt, ein geschulter Benutzer 02 anhand des militärischen taktischen Zeichens 14 auf der Darstellung der Zusatzanzeige 7 gleichermaßen die Position sowie die Funktion des in dem militärischen Sandkastens angeordneten Einheit identifizieren. Bezugszeichen:
Darstellungsumgebung 1
Benutzer 2 Anzeigevorrichtung 3
Abbild 4
Aufnahmeeinrichtung 5
Objektplatzhalter 6
Zusatz-Anzeige 7 Recheneinheit 8
Speichereinheit 9
Sandkastensystem 10
Erfassungseinrichtung 1 1
Verbindungselement 12 Modellplatzhalter 1 3
Taktisches Zeichen 14 Maschinenlesbare Codierung 1 5

Claims

Patentansprüche:
1. Verfahren zum Betrieb eines militärischen Sandkastens
g e k e n n z e i c h n e t d u r c h
die Verfahrensschritte:
- Abbilden einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung in einer Darstellungsumgebung (1 ) und
- Aufnahme von zumindest einem Objektplatzhalter (6) mit einer Aufnahmeeinrichtung (5);
- Identifizieren des zumindest einen Objektplatzhalters (6) und dessen Position und/oder Ausrichtung in der Darstellungsumgebung (1 );
- Erzeugen von zumindest einem virtuellen Objekt anhand des identifizierten Objektplatzhalters (6); und
- Darstellen des zumindest einen virtuellen Objekts unter Berücksichtigung der Position und/oder Ausrichtung des Objektplatzhalters (6) mit zumindest einer in der Darstellungsumgebung (1 ) angeordneten Anzeigeeinrichtung (3) mit im Sichtfeld eines Benutzers (2) angeordnetem Anzeigeelement zur Anzeige von virtuellen Bildinhalten, wel- che realen Bildinhalten überlagert angezeigt werden.
2. Verfahren nach Anspruch 1 ,
dadurch gekennzeichnet,
dass die Position und/oder die Ausrichtung der zumindest einen An- Zeigeeinrichtung (3) in der Darstellungsumgebung (1 ) ermittelt und bei der Bestimmung einer Einblendungsposition des virtuellen Objekts auf dem Anzeigeelement bei der Darstellung von virtuellen Bildinhalten berücksichtigt wird. 3. Verfahren nach Anspruch 1 oder 2,
dadurch gekennzeichnet, dass Abbilden der Simulationsumgebung durch ein physisches dreidimensionales, insbesondere maßstabsgetreues, Modell erfolgt.
Verfahren nach Anspruch 3,
dadurch gekennzeichnet,
dass das Modell der Simulationsumgebung durch ein dreidimensionales Druckverfahren hergestellt wird.
Verfahren nach Anspruch 1 oder 2,
dadurch gekennzeichnet,
dass das Abbilden der Simulationsumgebung durch einen virtuellen Bildinhalt, insbesondere durch eine virtuelle Simulationsumgebung, mittels der zumindest einen Anzeigeeinrichtung (3) erfolgt.
Verfahren nach Anspruch 5,
dadurch gekennzeichnet,
dass ein Modellplatzhalter (13) in der Darstellungsumgebung (1 ) angeordnet, aufgenommen und identifiziert wird, wobei durch die Identifizierung des Modellplatzhalters (13) eine Zuordnung zu einer abzubildenden Simulationsumgebung erfolgt.
Verfahren nach Anspruch 6,
dadurch gekennzeichnet,
dass die Position und /oder die Ausrichtung des Modellplatzhalters (13) in der Darstellungsumgebung (1 ) identifiziert und daraus die Position und /oder die Ausrichtung des Abbilds der Simulationsumgebung bestimmt wird.
Verfahren nach Anspruch 6 oder 7 ,
dadurch gekennzeichnet,
dass die Einblendungsposition und/oder die Ausrichtung des zumindest einen virtuellen Objekts aus der der Position und/oder Ausrichtung des Objektplatzhalters (6), der Position und/oder Ausrichtung des Modelplatzhalters (13) und/oder einem von der Simulationsumgebung umfassten Gelände-und/oder Oberflächenmodell der Realumgebung bestimmt wird.
Verfahren nach einem der Ansprüche 1 bis 8,
dadurch gekennzeichnet,
dass die Aufnahmeeinrichtung (5) die Darstellungsumgebung (1 ) zur Reproduktion des Abbilds der Simulationsumgebung und/oder des zumindest einen virtuellen Objekt aufnimmt und insbesondere an einer Zusatz-Anzeige (7) überträgt.
Verfahren nach Anspruch 9,
dadurch gekennzeichnet,
dass in der Aufnahme der Objektplatzhalter (6) und/oder der Modellplatzhalter (1 3) sowie dessen Position und/oder Ausrichtung identifiziert und insbesondere im Rahmen einer Übertragung übertragen wird/werden.
Verfahren nach einem der Ansprüche 1 bis 10,
dadurch gekennzeichnet,
dass die Simulationsumgebung durch die Auswertung von bei einem Überflug über und/oder einer Durchfahrt durch die Realumgebung gewonnenen Sensordaten, insbesondere Bildaufnahmen erzeugt wird.
Militärisches Sandkastensystem
gekennzeichnet durch
ein Abbild (4) einer eine Realumgebung geospezifisch abbildenden Simulationsumgebung in einer Darstellungsumgebung (1 ),
zumindest eine in der Darstellungsumgebung (1 ) angeordnete Anzeigeeinrichtung (3) mit einem im Sichtfeld eines Benutzers angeordneten Anzeigeelement zur Anzeige von virtuellen Bildinhalten, welche realen Bildinhalten überlagert angezeigt werden und
einen in der Darstellungsumgebung (1 ) angeordneten Objektplatzhal- ter (6) zur Darstellung eines virtuellen Objekts mittels des Anzeigeelements,
eine in der Darstellungsumgebung (1 ) angeordnete Aufnahmeeinrichtung (5) zumindest zur Aufnahme des zumindest einen Objektplatzhalters (6), sowie
einer Recheneinheit (8) zumindest zur Identifizierung des zumindest einen Objektplatzhalters (6) und dessen Position und/oder Ausrichtung in der Darstellungsumgebung (1 ) und zur Erzeugung eines virtuellen Objekts zur Darstellung auf dem Anzeigeelement in Abhängigkeit des identifizierten Objektplatzhalters (6).
Militärisches Sandkastensystem nach Anspruch 12,
dadurch gekennzeichnet,
dass das Abbild (4) der Simulationsumgebung ein physisches dreidimensionales Modell, insbesondere einen dreidimensionalen Druck der Simulationsumgebung, umfasst.
Militärisches Sandkastensystem nach Anspruch 12,
dadurch gekennzeichnet,
dass das Abbild (4) der Simulationsumgebung einen in der Darstellungsumgebung angeordneten Modellplatzhalter(13) umfasst, der mit der Aufnahmeeinrichtung (5) aufgenommen und der Recheneinheit (8) zu einer in einer Speichereinrichtung (9) des Systems (10) gespeicherten computergenerierten Simulationsumgebung zugeordnet wird, wobei die Speichereinrichtung (9) derart mit der Anzeigeeinrichtung (3) und/oder Recheneinheit (8) verknüpf ist, dass mittels der computergenerierten Simulationsumgebung eine Darstellung einer virtuellen Simulationsumgebung als virtueller Bildinhalt mit der Anzeigeeinrichtung (3) ermöglicht wird.
15. Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 14, gekennzeichnet durch,
zumindest eine Erfassungseinrichtung (11 ) die zur Erfassung der Posi- tion und/oder Ausrichtung der zumindest einen Anzeigevorrichtungen (3).
16. Militärisches Sandkastensystem nach Anspruch 15,
dadurch gekennzeichnet,
dass die Erfassungseinrichtung (11 ) zumindest einen an der Anzeigeeinrichtung (3) angeordneten Marker zur Erfassung der Position und/oder Ausrichtung der Anzeigeeinrichtung (3) in der Darstellungsumgebung (1 ) umfasst.
17. Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 16, dadurch gekennzeichnet,
dass die Aufnahmeeinrichtung (5) ein Übertragungsmittel zur Reproduktion des Abbilds (4) der Simulationsumgebung und/oder des zu- mindest einen virtuellen Objekt, insbesondere zur Übertragung an eine Zusatz-Anzeige (7), aufweist.
18. Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 17, gekennzeichnet durch
zumindest eine in und/oder außerhalb der Darstellungsumgebung (1 ) angeordneten Zusatz-Anzeige (7) zur Anzeige des Abbilds (4) der Simulationsumgebung und eines dem zumindest einen virtuellen Objekts entsprechenden Objekts oder eines Objektplatzhalters (6). 19. Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 18, dadurch gekennzeichnet,
dass die Objektplatzhalter (6) und/oder Modellplatzhalter (13) als Marker mit einer maschinenlesbaren Codierung (15), insbesondere einer Infrarot-Codierung, ausgestaltet sind.
20. Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 19, dadurch gekennzeichnet,
dass der zumindest eine Objektplatzhalter (6) Mittel zur Anbringung einer entfernbaren Kennzeichnung, insbesondere Beschriftung, aufweisen.
Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 20, dadurch gekennzeichnet,
dass der zumindest eine Objektplatzhalter (6) eine, insbesondere glatte, Deckschicht zur Aufbringung einer entfernbaren Beschriftung aufweist.
Militärisches Sandkastensystem nach einem der Ansprüche 12 bis 21 , dadurch gekennzeichnet,
dass der zumindest eine Objektplatzhalter (6) eine Beschriftung mit militärischen taktischen Zeichen (14) aufweist.
PCT/DE2017/100141 2016-02-22 2017-02-21 Militärisches sandkastensystem und verfahren zum betrieb eines militärischen sandkastens Ceased WO2017144050A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102016103054.6A DE102016103054A1 (de) 2016-02-22 2016-02-22 Militärisches Sandkastensystem und Verfahren zum Betrieb eines militärischen Sandkastens
DE102016103054.6 2016-02-22

Publications (1)

Publication Number Publication Date
WO2017144050A1 true WO2017144050A1 (de) 2017-08-31

Family

ID=58314056

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE2017/100141 Ceased WO2017144050A1 (de) 2016-02-22 2017-02-21 Militärisches sandkastensystem und verfahren zum betrieb eines militärischen sandkastens

Country Status (2)

Country Link
DE (1) DE102016103054A1 (de)
WO (1) WO2017144050A1 (de)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE1248986B (de) * 1967-08-31
EP1279136A4 (de) * 2000-04-06 2005-02-09 Solid Terrain Modeling Hochauflösende dreidimensionale abbildungsvorrichtung für topographische und 3d-modelle
DE202006018390U1 (de) * 2006-12-05 2008-04-17 Innoteams Gmbh System zur mobilen Präsentation von virtuellen 3D-Modellen
DE102007045835B4 (de) * 2007-09-25 2012-12-20 Metaio Gmbh Verfahren und Vorrichtung zum Darstellen eines virtuellen Objekts in einer realen Umgebung
WO2011075061A1 (en) * 2009-12-15 2011-06-23 Xm Reality Simulations Ab Device for measuring distance to real and virtual objects
DE102010016113A1 (de) * 2010-03-24 2011-09-29 Krauss-Maffei Wegmann Gmbh & Co. Kg Verfahren zur Ausbildung eines Besatzungsmitglieds eines insbesondere militärischen Fahrzeugs
US9224231B2 (en) * 2012-09-14 2015-12-29 Nagabhushanam Peddi Augmented reality system indexed in three dimensions
DE102015120999A1 (de) 2015-12-02 2017-06-08 Krauss-Maffei Wegmann Gmbh & Co. Kg Verfahren zur Erzeugung und Darstellung einer computergenerierten, eine Realumgebung abbildenden Simulationsumgebung

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
ANONYMOUS: "U.S. Military Better Visualizes Unfamiliar Conflict Settings With 3D Printing Technology from Z Corporation", 9 December 2005 (2005-12-09), XP002770020, Retrieved from the Internet <URL:https://www.3dsystems.com/press-releases/us-military-better-visualizes-unfamiliar-conflict-settings-3d-printing-technology-z> [retrieved on 20170510] *
D. W. F. VAN KREVELEN ET AL: "A Survey of Augmented Reality Technologies, Applications and Limitations", THE INTERNATIONAL JOURNAL OF VIRTUAL REALITY 9(2), 1 January 2010 (2010-01-01), pages 1 - 20, XP055089152, Retrieved from the Internet <URL:http://kjcomps.6te.net/upload/paper1 .pdf> [retrieved on 20131119] *
GHAWANA T ET AL: "3D printing for urban planning: A physical enhancement of spatial perspective", URBAN AND REGIONAL DATA MANAGEMENT, UDMS ANNUAL 2013 - PROCEEDINGS OF THE URBAN DATA MANAGEMENT SOCIETY SYMPOSIUM 2013 - URBAN AND REGIONAL DATA MANAGEMENT, UDMS ANNUAL 2013 - PROCEEDINGS OF THE URBAN DATA MANAGEMENT SOCIETY SYMPOSIUM 2013 2013 TAYLO, 2013, pages 211 - 224, XP002770021 *
KYUNGBOO JUNG ET AL: "Virtual Tactical Map with Tangible Augmented Reality Interface", COMPUTER SCIENCE AND SOFTWARE ENGINEERING, 2008 INTERNATIONAL CONFERENCE ON, IEEE, PISCATAWAY, NJ, USA, 12 December 2008 (2008-12-12), pages 1170 - 1173, XP031377385, ISBN: 978-0-7695-3336-0 *
WILLEM LE ROUX: "THE USE OF AUGMENTED REALITY IN COMMAND AND CONTROL SITUATION AWARENESS", SCIENTIA MILITARIA, SOUTH AFRICAN JOURNAL OF MILITARY STUDIES, vol. 38, no. 1, 2010, pages 115 - 133, XP002770019, ISSN: 1022-8136, Retrieved from the Internet <URL:http://scientiamilitaria.journals.ac.za/pub/article/download/82/111> [retrieved on 20170509], DOI: 10.5787/38-1-82 *

Also Published As

Publication number Publication date
DE102016103054A1 (de) 2017-08-24

Similar Documents

Publication Publication Date Title
DE602004008001T2 (de) Bildanzeigeverfahren und Bildanzeigesystem
DE102005061952A1 (de) Verfahren und System zur Bestimmung einer Ungenauigkeitsinformation in einem Augmented Reality System
EP3539086B1 (de) Verfahren und vorrichtung zum überlagern eines abbilds einer realen szenerie mit virtuellen bild- und audiodaten und ein mobiles gerät
DE102016105496A1 (de) System zur Prüfung von Objekten mittels erweiterter Realität
WO2008074561A1 (de) Verfahren zum darstellen eines kartenausschnittes in einem navigationssystem und navigationssystem
EP3420539B1 (de) Verfahren zum betrieb einer anzeigevorrichtung und system zur anzeige von realen bildinhalten einer realumgebung überlagerten virtuellen bildinhalten
EP2201524A2 (de) Verfahren zur erzeugung und aktualisierung von texturen von drei-dimensionalen aus mehreren bildern rekonstruierten hintergrundmodellen für ein videoüberwachungssystem
DE3219032A1 (de) Stereophotogrammetrisches aufnahme- und auswerteverfahren sowie auswertevorrichtung
DE102019216548A1 (de) Verfahren und mobile Erfassungsvorrichtung zur Erfassung von Infrastrukturelementen eines unterirdischen Leitungsnetzwerks
WO2019072481A1 (de) Verfahren zum betrieb einer anzeigeeinrichtung in einem kraftfahrzeug
DE102015120999A1 (de) Verfahren zur Erzeugung und Darstellung einer computergenerierten, eine Realumgebung abbildenden Simulationsumgebung
EP3179450A1 (de) Verfahren zur multisensorischen darstellung eines objekts und darstellungssystem
DE112013006968T5 (de) Dynamische Beschriftungsanordnungsvorrichtung, Anzeigevorrichtung, dynamisches Beschriftungsanordnungsverfahren und Anzeigeverfahren
DE19746639A1 (de) Verfahren zur digitalen Erfassung räumlicher Objekte und Szenen für eine 3D-Bildkarte sowie 3D-Bildkarte
WO2017144050A1 (de) Militärisches sandkastensystem und verfahren zum betrieb eines militärischen sandkastens
DE102009019019A1 (de) Video-basiertes Mono-Kamera-Navigationssystem
DE102017107580A1 (de) Schaltanlage und Verfahren zum Bearbeiten oder Überprüfen einer Anordnung von elektrischen oder elektronischen Geräten einer Schaltanlage
WO2017182021A1 (de) Verfahren und system zur darstellung einer simulationsumgebung
EP4564137A1 (de) Verfahren zur nutzung eines erweiterten realitätsraumes und ein physischer anker zur nutzung eines erweiterten realitätsraumes
DE102015120929A1 (de) Verfahren zur vorbereitenden Simulation eines militärischen Einsatzes in einem Einsatzgebiet
DE102013106280A1 (de) Verfahren zur Visualisierung eines CAD-Modells
EP3384469A2 (de) Verfahren zur darstellung einer simulationsumgebung
DE102021132351A1 (de) Bilderzeugender Simulator, Vorrichtung, System und Simulationsverfahren für ein Training an einem Führungssystem
DE102014224851A1 (de) Vorrichtung und Verfahren zur Darstellung von Strukturinformation über ein technisches Objekt
WO2014173454A1 (de) Verfahren, system und computer zur bereitstellung von informationen in echtzeit auf einem bildschirm eines nutzers zu mindestens einem menschlichen und/oder gegenständlichen teilnehmer einer veranstaltung

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17710824

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 17710824

Country of ref document: EP

Kind code of ref document: A1