DE102015214858A1 - Method and system for creating a three-dimensional model of a production environment and resources - Google Patents
Method and system for creating a three-dimensional model of a production environment and resources Download PDFInfo
- Publication number
- DE102015214858A1 DE102015214858A1 DE102015214858.0A DE102015214858A DE102015214858A1 DE 102015214858 A1 DE102015214858 A1 DE 102015214858A1 DE 102015214858 A DE102015214858 A DE 102015214858A DE 102015214858 A1 DE102015214858 A1 DE 102015214858A1
- Authority
- DE
- Germany
- Prior art keywords
- marker
- environment
- scanning device
- data
- scanning
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C15/00—Surveying instruments or accessories not provided for in groups G01C1/00 - G01C13/00
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C15/00—Surveying instruments or accessories not provided for in groups G01C1/00 - G01C13/00
- G01C15/002—Active optical surveying means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/74—Systems using reradiation of electromagnetic waves other than radio waves, e.g. IFF, i.e. identification of friend or foe
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Die Erfindung beschreibt ein Verfahren zum Erstellen eines dreidimensionalen Modells einer Umgebung (1), insbesondere einer Produktionsumgebung, mit einer Anzahl an Objekten (2, 3, 4), insbesondere Produktionsressourcen. Das erfindungsgemäße Verfahren umfasst in einem Schritt a) das Anordnen zumindest eines Markers (7) an einem zu vermessenden Objekt (2, 3, 4), wobei einem jeweiligen Marker (7) zumindest ein eindeutiges Informationsdatum zugeordnet ist. In einem Schritt b) wird die Umgebung (1) mit einer Abtastvorrichtung (5) abgetastet, um aus einem von Objekten (2, 3, 4) der Umgebung (1) reflektierten Signal eine diskrete Menge von Abtastpunkten der Umgebung (1) zu ermitteln. In Schritt c) erfolgt das Übertragen zumindest des eindeutigen Informationsdatums des zumindest einen Markers (7) an eine Recheneinheit (12), während oder nachdem der Marker (7) durch die Abtastvorrichtung (5) abgetastet wird oder wurde. Schließlich wird in einem Schritt d) eine Oberflächengeometrie aus der diskreten Menge an abgetasteten Daten ermittelt, wobei zusätzlich dem jeweiligen eindeutigen Informationsdatum zugeordnete Objektdaten, die geometrische und/oder nicht-geometrische Daten umfassen, verarbeitet werden.The invention describes a method for creating a three-dimensional model of an environment (1), in particular a production environment, with a number of objects (2, 3, 4), in particular production resources. The inventive method comprises in a step a) arranging at least one marker (7) on an object to be measured (2, 3, 4), wherein a respective marker (7) is associated with at least one unique information date. In a step b), the environment (1) is scanned with a scanning device (5) in order to determine from a signal reflected from objects (2, 3, 4) of the environment (1) a discrete set of sampling points of the environment (1) , In step c), at least the unique information data of the at least one marker (7) is transmitted to a computing unit (12) during or after the marker (7) is scanned by the scanning device (5). Finally, in a step d), a surface geometry is determined from the discrete quantity of sampled data, with object data additionally associated with the respective unique information datum, which comprise geometrical and / or non-geometric data, being processed.
Description
Die Erfindung betrifft ein Verfahren zum Erstellen eines dreidimensionalen Modells einer Umgebung, insbesondere Produktionsumgebung, mit einer Anzahl an Objekten, insbesondere Produktionsressourcen. Die Erfindung betrifft darüber hinaus einen Marker und ein System zum Erstellen eines dreidimensionalen Modells, welches eine Abtastvorrichtung und zumindest einen erfindungsgemäßen Marker umfasst. The invention relates to a method for creating a three-dimensional model of an environment, in particular a production environment, with a number of objects, in particular production resources. The invention further relates to a marker and a system for creating a three-dimensional model comprising a scanning device and at least one marker according to the invention.
Laserscanning oder Laserabtastung bezeichnet das zeilen- oder rasterartige Überstreichen von Oberflächen oder Körpern mit einem Laserstrahl, um diese zu vermessen, zu bearbeiten oder um ein Bild zu erzeugen. Sensoren, die den Laserstrahl entsprechend ablenken, heißen Laserscanner. Ein Laserscanner besteht aus einem Scan- oder Abtastkopf und einer Treiber- und Ansteuerelektronik. Beim Laserscanning wird die Oberflächengeometrie von Gegenständen, z.B. mittels Pulslaufzeit, Phasendifferenz im Vergleich zu einer Referenz oder durch Triangulation von Laserstrahlen, digital erfasst. Dabei entsteht eine diskrete Menge von Abtastpunkten, die als Punktwolke bezeichnet wird. Die Koordinaten der gemessenen Punkte werden aus den Winkeln und der Entfernung in Bezug zu einem Ursprung, z.B. dem Standort des Laserscanners, ermittelt. Das dreidimensionale Laserscanning liefert als Ergebnis eine dreidimensionale Punktwolke und somit ein vollständiges Abbild einer Messszene. Anhand der Punktwolke werden beispielsweise Einzelmaße, wie z.B. Längen und Winkel, bestimmt oder es wird aus ihr eine geschlossene Oberfläche konstruiert und zur Visualisierung verwendet. Dadurch ist es beispielsweise möglich, im Umfeld von Produktionsanlagen, ein vollständiges dreidimensionales Modell der Produktionsumgebung mit einer darin angeordneten Anzahl an Produktionsressourcen zu erstellen. Produktionsressourcen können beispielsweise Roboter, Maschinen, Werkzeuge, Wände, Säulen, Träger oder andere Gegenstände sein. Laser scanning or laser scanning refers to the line or raster-like sweeping of surfaces or bodies with a laser beam in order to measure, process or create an image. Sensors that deflect the laser beam accordingly are called laser scanners. A laser scanner consists of a scanning or scanning head and a driver and control electronics. In laser scanning, the surface geometry of objects, e.g. by means of pulse transit time, phase difference in comparison to a reference or by triangulation of laser beams, recorded digitally. This results in a discrete set of sampling points, which is referred to as a point cloud. The coordinates of the measured points are determined from the angles and the distance with respect to an origin, e.g. the location of the laser scanner. As a result, three-dimensional laser scanning yields a three-dimensional point cloud and thus a complete image of a measurement scene. On the basis of the point cloud, for example, individual dimensions, such as Lengths and angles, determined or it is constructed from a closed surface and used for visualization. This makes it possible, for example, to create a complete three-dimensional model of the production environment with a number of production resources arranged therein in the vicinity of production plants. Production resources can be, for example, robots, machines, tools, walls, columns, carriers or other objects.
Ein Verfahren zur Detektion bzw. Lageerkennung von bekannten Objekten ist beispielsweise aus der
Die
Es ist Aufgabe der vorliegenden Erfindung, ein Verfahren anzugeben, das die Erstellung eines dreidimensionalen Modells einer Umgebung, insbesondere einer Produktionsumgebung mit einer Anzahl an Produktionsressourcen, ermöglicht, wobei der Detaillierungsgrad des Modells verbessert werden soll. It is an object of the present invention to provide a method that enables the creation of a three-dimensional model of an environment, in particular a production environment with a number of production resources, wherein the level of detail of the model should be improved.
Eine weitere Aufgabe der Erfindung besteht darin, ein Hilfsmittel anzugeben, welche die effiziente Durchführung des Verfahrens ermöglichen. Another object of the invention is to provide an aid which enables the efficient implementation of the method.
Es ist schließlich Aufgabe der Erfindung, ein System zum Erstellen eines dreidimensionalen Modells einer Umgebung anzugeben, welches die schnelle Durchführung des Verfahrens bei verbessertem Detaillierungsgrad erlaubt. It is finally an object of the invention to provide a system for creating a three-dimensional model of an environment, which allows the rapid implementation of the method with improved level of detail.
Diese Aufgaben werden gelöst durch ein Verfahren gemäß den Merkmalen des Anspruches 1, ein Computerprogrammprodukt gemäß den Merkmalen des Anspruches 12, einen Marker gemäß den Merkmalen des Anspruches 13, und ein System gemäß den Merkmalen des Anspruches 18. Vorteilhafte Ausgestaltungen ergeben sich aus den abhängigen Ansprüchen. These objects are achieved by a method according to the features of
Die Aufgabe wird gelöst durch ein Verfahren eines dreidimensionalen Modells einer Umgebung mit einer Anzahl an Objekten. Bei der Umgebung handelt es sich insbesondere um eine Produktionsumgebung mit Produktionsressourcen. Solche Produktionsressourcen können beispielsweise Roboter, Maschinen, Werkzeuge, usw. sein. Andere Objekte sind beispielsweise Wände, Säulen, Träger oder andere Gegenstände in der Umgebung. Das Verfahren umfasst die Schritte:
- a) Anordnen zumindest eines Markers an einem zu vermessenden Objekt, wobei einem jeweiligen Marker zumindest ein eindeutiges Informationsdatum, z.B. ein eindeutiges Identifikationsdatum bzw. ein eindeutiger Identifikationsdatensatz, zugeordnet ist. Das Informationsdatum kann beispielsweise in dem jeweiligen Marker gespeichert sein. Das Informationsdatum kann elektronisch gespeicherte Zeichen, Angaben und/oder Informationen umfassen. Das eindeutige Informationsdatum kann auch optisch auslesbar sein.
- b) Abtasten der Umgebung mit einer Abtastvorrichtung, um aus einem von Objekten der Umgebung reflektierten Signal eine diskrete Menge von Abtastpunkten der Umgebung zu ermitteln. Als Abtastvorrichtung kann z.B. ein Laserscanner genutzt werden. Weitere Systeme, die etwa auf elektromagnetischen Wellen (die nicht unter die Kategorie sichtbares Licht respektive Laser fallen) oder Funk basieren, als auch Systeme, die mit mechanischen Wellen (mit einem oder mehreren Signalemittern) arbeiten, sind ebenfalls als Abtastvorrichtung geeignet.
- c) Übertragen zumindest des eindeutigen Informationsdatums des zumindest einen Markers an eine Recheneinheit, während oder nachdem der Marker durch die Abtastvorrichtung abgetastet wird oder wurde. Die Übertragung des eindeutigen Informationsdatums kann zeitgleich mit der Abtastung des betreffenden Markers mit der Abtastvorrichtung erfolgen. Erfolgt die Übertragung des eindeutigen Informationsdatums nachdem der Marker durch die Abtastvorrichtung abgetastet wurde, so ist hierunter ein zeitlicher Versatz mit einer vorgegebenen Zeitspanne zu verstehen. Dabei soll insbesondere eine zeitliche Korrelation zwischen dem Abtasten der Umgebung bzw. des Markers und dem Übertragen des Informationsdatums bestehen. So kann das Informationsdatum beispielsweise nach Ablauf einer vorgegebenen Zeitdauer nach dem Abtasten des Markers durch die Abtastvorrichtung an die Recheneinheit übertragen werden, so dass beispielsweise sichergestellt ist, dass die Abtastung der Umgebung bereits beendet ist. In beiden Varianten stellt die Abtastung des Markers durch die Abtastvorrichtung ein Triggerevent für die Übertragung des Informationsdatums an die Recheneinheit dar.
- d) Ermittlung einer Oberflächengeometrie aus der diskreten Menge an abgetasteten Daten, wobei zusätzlich dem jeweiligen eindeutigen Informationsdatum zugeordnete Objektdaten, die geometrische und/oder nicht-geometrische Daten umfassen, verarbeitet werden. Nicht-geometrische Objektdaten sind beispielsweise Schaltpläne, das Zeitverhalten eines Objekts (z.B. einer Werkzeugmaschine), Funktionsbeschreibungen, Beschreibungen allgemeiner Art, eine Art einer integrierten Steuerung, eine Information über einen implementierten Steuerungscode, Messdaten, eine IP-Adresse, Wartungsinformationen und dergleichen. Unter geometrischen Daten sind Daten z.B. eines CAD-Modells oder vereinfachte geometrische Daten des durch den Laserscanner abgetasteten Objekts zu verstehen.
- a) arranging at least one marker on an object to be measured, wherein a respective marker at least a unique information date, such as a unique identification date or a unique identification data set is assigned. The informational date can be stored, for example, in the respective marker. The informational date may include electronically stored characters, indications and / or information. The unique information date can also be optically readable.
- b) scanning the environment with a scanning device to determine a discrete set of sampling points of the environment from a signal reflected from objects of the environment. As a scanning device, for example, a laser scanner can be used. Other systems based on electromagnetic waves (which do not fall under the category of visible light or laser) or radio, as well as systems that use mechanical waves (with one or more signal emitters) are also suitable as a scanning device.
- c) transmitting at least the unique information data of the at least one marker to a computing unit during or after the marker is scanned by the scanning device. The transmission of the unique information data can be carried out simultaneously with the scanning of the relevant marker with the scanning device. If the transmission of the unique information data after the marker has been scanned by the scanning device, this is to be understood as a time offset with a predetermined period of time. In particular, there should be a temporal correlation between the scanning of the environment or of the marker and the transmission of the information data. Thus, for example, after a predetermined period of time has elapsed after the marker has been scanned, the informational date can be transmitted by the scanning device to the arithmetic unit, thus ensuring, for example, that the scanning of the surroundings has already ended. In both variants, the scanning of the marker by the scanning device is a trigger event for the transmission of the information data to the arithmetic unit.
- d) Determining a surface geometry from the discrete amount of sampled data, wherein in addition to the respective unique information data associated object data that includes geometric and / or non-geometric data processed. Non-geometrical object data are, for example, circuit diagrams, the time behavior of an object (eg a machine tool), functional descriptions, general descriptions, a type of integrated control, information about an implemented control code, measurement data, an IP address, maintenance information and the like. Geometric data is to be understood as meaning, for example, a CAD model or simplified geometric data of the object scanned by the laser scanner.
Bei dem erfindungsgemäßen Verfahren werden durch Abtastung gewonnene Daten mit weiteren Daten angereichert, welche nicht durch Abtastung gewonnen werden. Die weiteren Daten können wahlweise direkt von dem Marker zu der Recheneinheit übertragen werden. Alternativ können diese auch anhand des von dem Marker zu der Recheneinheit übertragenen eindeutigen Informationsdatums gewonnen werden. In the method according to the invention, data obtained by sampling are enriched with further data which are not obtained by sampling. The further data can optionally be transmitted directly from the marker to the arithmetic unit. Alternatively, these can also be obtained from the unique information date transmitted from the marker to the arithmetic unit.
Dieses Vorgehen erlaubt es beispielsweise, das durch Abtastung gewonnene dreidimensionale Modell eines Objekts durch zugeordnete Objektdaten zu ergänzen. Beispielsweise können die zusätzlichen Objektdaten eine vollständige Geometrie des Objekts umfassen. Dadurch können beispielsweise solche Bereiche eines von dem Laserscanner abgetasteten Objekts, welche aufgrund von Abschattung nicht abtastbar sind, mit Hilfe der zusätzlichen Objektdaten ergänzt werden, so dass das Objekt vollständig in dem dreidimensionalen Modell enthalten ist. This procedure makes it possible, for example, to supplement the three-dimensional model of an object obtained by scanning with associated object data. For example, the additional object data may include a complete geometry of the object. As a result, for example, those areas of an object scanned by the laser scanner, which can not be scanned due to shadowing, can be supplemented with the aid of the additional object data, so that the object is completely contained in the three-dimensional model.
Andererseits ist es möglich, in dem dreidimensionalen Modell ein vereinfachtes Modell eines Objekts zu hinterlegen, um Speicherplatz einzusparen. Das durch Abtastung gewonnene dreidimensionale Modell erfasst ein Objekt mit all seinen Details. Hierdurch ergibt sich eine große Datenmenge, welche im weiteren Verlauf verarbeitet und gespeichert werden muss. Dies kann dadurch vereinfacht werden, dass anhand der einem abgetasteten Objekt zugeordneten Objektdaten auf vereinfachte geometrische Daten zurückgegriffen wird, bei dem beispielsweise nicht notwendige Details nicht enthalten sind. Dadurch kann eine zu verarbeitende und zu speichernde Datenmenge signifikant reduziert werden. On the other hand, it is possible to deposit a simplified model of an object in the three-dimensional model in order to save storage space. The three-dimensional model obtained by scanning captures an object with all its details. This results in a large amount of data, which must be processed and stored in the course. This can be simplified by using simplified geometric data based on the object data assigned to a scanned object, in which, for example, unnecessary details are not contained. As a result, a data volume to be processed and stored can be significantly reduced.
Die zusätzlichen Objektdaten können, wie beschrieben, auch nicht-geometrische Daten umfassen. Hierdurch ist es beispielsweise möglich, neben den statisch abgetasteten Daten des dreidimensionalen Modells Bewegungsdaten eines Objekts zu berücksichtigen. Anhand solcher in den zusätzlichen Objektdaten gespeicherten Informationen kann beispielsweise ein Arbeitsbereich, aber auch ein zeitliches Verhalten des abgetasteten Objekts berücksichtigt werden. The additional object data, as described, may also include non-geometric data. This makes it possible, for example, to take into account movement data of an object in addition to the statically sampled data of the three-dimensional model. Based on such information stored in the additional object data, for example, a work area, but also a temporal behavior of the scanned object can be taken into account.
Die Verarbeitung der zusätzlichen Objektdaten kann dazu führen, dass das zu ermittelnde dreidimensionale Modell gegenüber der tatsächlichen Abtastung verändert und/oder ergänzt wird. Alternativ oder zusätzlich können die einem Objekt zugeordneten Daten auch als später aufzurufende Kontextdaten bereitgestellt werden. Dies betrifft beispielsweise Schaltpläne, Bedienungsanleitungen, die Steuerung betreffende Informationen und dergleichen. The processing of the additional object data may result in the three-dimensional model to be determined being changed and / or supplemented with respect to the actual sampling. Alternatively or additionally, the data associated with an object can also be provided as context data to be called later. This relates, for example, to circuit diagrams, operating instructions, information concerning the control and the like.
Insbesondere ermöglicht es das vorgeschlagene Verfahren, das dreidimensionale Modell mit einer geringeren Anzahl an Messungen, d.h. Abtastungen mit einer Abtastvorrichtung, zu erstellen und mit weiteren Informationen anzureichern. In particular, the proposed method enables the three-dimensional model with a smaller number of measurements, i. Scans with a scanner, to create and enrich with other information.
Gemäß einer zweckmäßigen Ausgestaltung ermittelt die Abtastvorrichtung aus dem reflektierten Signal das Abtasten eines der Marker. Insbesondere kann die Abtastvorrichtung die Abtastdaten verarbeiten, um den Marker anhand einer charakteristischen Oberflächeneigenschaft zu ermitteln. Zweckmäßigerweise erfolgt dies durch einen Vergleich der Abtastdaten mit zuvor ermittelten und gespeicherten Referenzdaten. Dadurch kann dem Marker bzw. dessen Position in den Abtastdaten zumindest das zugehörige Informationsdatum zugeordnet werden. According to an expedient embodiment, the scanning device determines the scanning of one of the markers from the reflected signal. In particular, the scanner may process the scan data to determine the marker based on a characteristic surface property. Appropriately, this is done by comparing the sample data with previously determined and stored reference data. As a result, at least the associated information date can be assigned to the marker or its position in the scan data.
Das Ermitteln des zumindest einen Markers kann in Echtzeit durchgeführt werden. Alternativ kann das Ermitteln des zumindest einen Markers auch nach Beendigung der Abtastung der Umgebung durchgeführt werden. The determination of the at least one marker can be carried out in real time. Alternatively, the determination of the at least one marker can also be carried out after completion of the scanning of the environment.
Bei dem erfindungsgemäßen Verfahren kann zudem vorgesehen sein, dass ein aktuell abgetasteter Marker der Abtastvorrichtung das Abtasten mitteilt. Hierzu kann insbesondere die Abtastvorrichtung als reflektiertes Signal ein von dem Marker manipuliertes Signal empfangen, wobei die Detektion des manipulierten Signals das gegenwärtige Abtasten des Markers anzeigt. Das von der Abtastvorrichtung ausgesendete Abtastsignal kann als elektromagnetische Schwingung angesehen werden. Durch entsprechende Ausgestaltung des Markers kann diese elektromagnetische Schwingung manipuliert werden, so dass eine entsprechende Information an die Abtastvorrichtung bzw. die Recheneinheit übermittelbar ist. In the method according to the invention, it can also be provided that a currently scanned marker of the scanning device notifies the scanning. For this purpose, in particular, the scanning device may receive as a reflected signal a signal manipulated by the marker, the detection of the manipulated signal indicating the current scanning of the marker. The scanning signal emitted by the scanning device can be regarded as electromagnetic oscillation. By appropriate design of the marker, this electromagnetic oscillation can be manipulated, so that a corresponding information to the scanning device or the arithmetic unit can be transmitted.
Gemäß einer weiteren Ausgestaltung kann ein jeweiliges eindeutiges Informationsdatum einem Abtastpunkt oder einer Menge von Abtastpunkten, insbesondere dem oder den Abtastpunkten des zugeordneten Markers oder des Objekts zugeordnet werden. Umfassen die Objektdaten Kontextinformationen, wie z.B. eine Bedienungsanleitung, welche nicht unmittelbar in die Abtastdaten gerechnet werden können, so können diese z.B. einem einzigen Abtastpunkt des betreffenden Objekts zugeordnet werden. Ebenso ist es möglich, die Objektdaten einer Menge von Abtastpunkten zuzuordnen, um beispielsweise deren Zugehörigkeit zu einem abgetasteten Objekt anzuzeigen. According to a further embodiment, a respective unique information date can be assigned to a sampling point or to a set of sampling points, in particular to the sampling point (s) of the associated marker or object. The object data includes context information, such as an instruction manual, which can not be calculated directly into the sampling data, these may e.g. be associated with a single sampling point of the object in question. It is also possible to associate the object data with a set of sampling points, for example to indicate that they belong to a scanned object.
Das eindeutige Informationsdatum und die optionalen Objektdaten können an die Recheneinheit übertragen werden, solange ein jeweiliger Marker von einem Abtastsignal der Abtastvorrichtung bestrahlt wird. Gemäß dieser Ausgestaltung ist vorgesehen, die Informationsübertragung in dem reflektierten Signal vorzunehmen. Dazu ist es erforderlich, dass der jeweilige Marker, welcher die Manipulation des Abtastsignals vornimmt, von der Abtastvorrichtung angestrahlt wird. Hierzu kann es zweckmäßig sein, wenn das von der Abtastvorrichtung ausgesendete Abtastsignal gebündelt ist, um einen gezielten, eng umgrenzten Bereich anzustrahlen. Hierzu kann die Abtastvorrichtung eine entsprechende Fokussiereinheit in Gestalt einer Linse (Glaslinse oder elektromagnetische Linse) bzw. ein Linsensystem umfassen, wobei letzteres über eine variable, aktiv einstellbare Brennweite verfügen kann. The unique information data and the optional object data may be transmitted to the arithmetic unit as long as a respective marker is irradiated by a scanning signal of the scanning device. According to this embodiment, it is provided to carry out the information transmission in the reflected signal. For this purpose, it is necessary for the respective marker, which performs the manipulation of the scanning signal, to be illuminated by the scanning device. For this purpose, it may be expedient if the scanning signal emitted by the scanning device is bundled in order to illuminate a specific, narrowly delimited area. For this purpose, the scanning device may comprise a corresponding focusing unit in the form of a lens (glass lens or electromagnetic lens) or a lens system, the latter having a variable, actively adjustable focal length.
Neben einer Abtastvorrichtung, die elektromagnetische Wellen aussendet, kann auch eine Abtastvorrichtung verwendet werden, die zur Ausstrahlung mechanischer Schwingungen ausgebildet ist. Durch diese können durch Bündelung verschiedener Schallwellen Interferenzen hervorgerufen werden. Dazu umfasst der Scanner vorzugsweise eine oder mehrere Quellen mechanischer Schwingungen, deren Frequenz beeinflussbar bzw. einstellbar ist. Die Orientierung der Schwingungsquellen oder ihre Position zueinander ist zweckmäßigerweise änderbar, um für einen eng umgrenzten lokalen Bereich eine Interferenz zu beeinflussen, um Informationen zu übertragen. In addition to a scanning device that emits electromagnetic waves, a scanning device can be used which is designed to emit mechanical vibrations. These can cause interference by bundling different sound waves. For this purpose, the scanner preferably comprises one or more sources of mechanical vibrations whose frequency can be influenced or adjusted. The orientation of the vibration sources or their position relative to one another is expediently changeable in order to influence interference for a narrow local area in order to transmit information.
Gemäß einer weiteren Ausgestaltung werden die Objektdaten von dem zumindest einen Rechner zusätzlich zu dem eindeutigen Informationsdatum an die Recheneinheit übertragen. Alternativ können die Objektdaten anhand des eindeutigen Informationsdatums von der Recheneinheit aus einer Datenbank ermittelt werden. According to a further refinement, the object data are transmitted from the at least one computer to the arithmetic unit in addition to the unique information datum. Alternatively, the object data can be determined based on the unique information data from the arithmetic unit from a database.
Die Erfindung schafft ferner ein Computerprogrammprodukt, das direkt in den internen Speicher einer digitalen Recheneinheit geladen werden kann und Softwarecodeabschnitte umfasst, mit denen die Schritte der vorher beschriebenen Verfahren ausgeführt werden, wenn das Produkt auf einer Recheneinheit läuft. Das Computerprogrammprodukt kann in Gestalt eines physikalischen Datenträgers, wie z.B. einer DVD, einer CD, einem USB-Speicher, einer Speicherkarte, aber auch in Gestalt einer über einen Kommunikationskanal übertragbaren Datei vorliegen. The invention further provides a computer program product that can be loaded directly into the internal memory of a digital processing unit and includes software code portions that perform the steps of the previously described methods when the product is run on a computing unit. The computer program product may be in the form of a physical medium such as a hard disk. a DVD, a CD, a USB memory, a memory card, but also in the form of a transferable via a communication channel file.
Die Aufgabe wird ferner gelöst durch einen Marker zum Anbringen an einem Objekt, insbesondere einer Produktionsressource, für die Erstellung eines dreidimensionalen Modells einer Umgebung, insbesondere einer Produktionsumgebung, mit Hilfe einer Abtastvorrichtung. Der Marker umfasst eine Kommunikationseinrichtung zur Übertragung von Daten zu der Abtastvorrichtung oder einer anderen Recheneinheit. Die Daten umfassen zumindest ein dem Marker zugeordnetes, eindeutiges Informationsdatum. The object is further achieved by a marker for attachment to an object, in particular a production resource, for creating a three-dimensional model of an environment, in particular a production environment, with the aid of a scanning device. The marker comprises a communication device for transmitting data to the scanning device or another computing unit. The data comprise at least one unique information date associated with the marker.
Zweckmäßigerweise umfasst der Marker ein Mittel zur Manipulation eines Abtastsignals der Abtastvorrichtung, um zumindest das Informationsdatum an die Abtastvorrichtung zu übertragen. Das Abtastsignal kann eine Schwingung elektro-magnetischer Natur oder eine mechanische Schwingung sein. The marker expediently comprises a means for manipulating a scanning signal of the scanning device in order to transmit at least the information data to the scanning device. The scanning signal may be a vibration of electromagnetic nature or a mechanical vibration.
Der Marker kann weiterhin dazu ausgebildet sein, dass das Mittel zur Manipulation weitere Objektdaten an die Abtastvorrichtung oder eine Recheneinheit überträgt, solange der Marker von dem Abtastsignal der Abtastvorrichtung bestrahlt wird. The marker can furthermore be designed so that the means for manipulation transmits further object data to the scanning device or a computing unit as long as the marker is irradiated by the scanning signal of the scanning device.
Der Marker kann ferner eine Energieerzeugungseinheit umfassen, um dem Abtastsignal Energie zu entziehen, um die Kommunikationseinrichtung mit Energie zu versorgen. Hierzu können Effekte wie Resonanz, Fotoeffekt, Energiegewinnung aus Wärme, thermochemische oder thermo-elektrische Effekte, Schalldruck oder Induktion genutzt werden. Alternativ oder zusätzlich kann der Marker eine Energieversorgungseinrichtung aufweisen, wie z.B. eine Batterie oder einen Akkumulator, um dessen Komponenten mit Energie zu versorgen. The marker may further comprise a power generation unit for depriving power of the sense signal to the communication device to provide energy. For this purpose, effects such as resonance, photo effect, energy production from heat, thermochemical or thermoelectric effects, sound pressure or induction can be used. Alternatively or additionally, the marker may have a power supply device, such as a battery or a rechargeable battery, to power its components.
Gemäß einer weiteren zweckmäßigen Ausgestaltung weist der Marker eine Form und/oder eine Oberflächenbeschaffenheit auf, so dass dieser durch eine Abtastvorrichtung maschinell erkennbar ist, um eine Zuordnung des Informationsdatums zu einem oder mehreren Abtastpunkten des Markers zu ermöglichen. According to a further expedient embodiment, the marker has a shape and / or a surface finish, so that it can be machine-detected by a scanning device in order to allow the information data to be assigned to one or more sampling points of the marker.
Die Erfindung wird weiter durch ein System zum Erstellen eines dreidimensionalen Modells einer Umgebung mit einer Anzahl an Objekten gelöst. Das System umfasst eine Abtastvorrichtung zur Abtastung der Umgebung, um aus einem von den Objekten der Umgebung reflektierten Signal eine diskrete Menge von Abtastpunkten der Umgebung zu ermitteln. Das System umfasst weiter zumindest einen Marker der oben beschriebenen Art mit einem jeweiligen eindeutigen Informationsdatum, wobei ein jeweiliger Marker an einem jeweiligen Objekt, das geometrische und/oder nicht-geometrische Eigenschaften aufweist, welche als Objektdaten in einem Speicher zum Auslesen nicht-flüchtig gespeichert sind, angebracht ist. Schließlich umfasst das System eine Recheneinheit zum Verarbeiten der diskreten Menge an abgetasteten Abtastpunkten der Abtastvorrichtung und Anreicherung eines oder einer Menge der Abtastpunkte mit den Objektdaten. Die Recheneinheit kann dabei eine Recheneinheit der Abtastvorrichtung sein. Die Recheneinheit kann auch eine davon unabhängige Recheneinheit sein, welche zum Datenaustausch mit der Abtastvorrichtung ausgebildet ist und ferner über Kommunikationsmittel umfasst, um das jeweilige eindeutige Informationsdatum des zumindest einen Markers zu empfangen. The invention is further solved by a system for creating a three-dimensional model of an environment having a number of objects. The system includes a scanning device for sensing the environment to determine a discrete set of sample points of the environment from a signal reflected from the objects of the environment. The system further comprises at least one marker of the type described above with a respective unique information date, wherein a respective marker on a respective object, the geometric and / or non-geometric properties, which are non-volatile stored as object data in a memory for reading , is appropriate. Finally, the system includes a computation unit for processing the discrete set of sampled sample points of the sampler and accumulating one or a plurality of sample points with the object data. The arithmetic unit can be an arithmetic unit of the scanning device. The arithmetic unit may also be an independent arithmetic unit, which is designed for data exchange with the scanning device and further comprises communication means to receive the respective unique information date of the at least one marker.
Der Speicher kann eine Datenbank sein, deren Inhalt durch die Recheneinheit auslesbar und verarbeitbar ist. Der Speicher kann alternativ oder zusätzlich Teil des Markers sein. The memory may be a database whose content can be read out and processed by the arithmetic unit. The memory may alternatively or additionally be part of the marker.
Darüber hinaus kann das System eine Kommunikationseinrichtung zum Empfang von Daten des zumindest einen Markers umfassen. In addition, the system may include a communication device for receiving data of the at least one marker.
Die Erfindung wird nachfolgend näher anhand von Ausführungsbeispielen in der Zeichnung erläutert. Es zeigen: The invention will be explained in more detail below with reference to exemplary embodiments in the drawing. Show it:
Um ein dreidimensionales Modell der Produktionsumgebung
Das Anordnen des Markers
Das Informationsdatum
Weiter kann der Marker
Alternativ kann der Marker die auf ihn treffende Schwingung über ein passives Verfahren manipulieren, um hierdurch eine Information, wie z.B. das genannte Informationsdatum, an den Laserscanner zu übertragen. Alternatively, the marker may manipulate the vibration impinging on it by a passive method to thereby obtain information such as e.g. the said information date to be transmitted to the laser scanner.
Alternativ kann das Auftreffen der Schwingung auch dazu genutzt werden, über die Kommunikationseinrichtung
Die Objektdaten
Sind die Objektdaten
Gemäß einem zweiten Schritt S42 des Verfahrens aus
In einem dritten Schritt S43 erfolgt eine Übertragung des eindeutigen Informationsdatums
Die Recheneinheit
In einem vierten Schritt S44 des Verfahrens aus
In dem Moment, in dem das Abtastsignal auf den Marker
Eine Bündelung der Schwingung kann beispielsweise durch eine Fokussiereinheit mit einem Linsensystem oder einer einzelnen Linse erfolgen. Basiert die Abtastvorrichtung auf einer mechanischen Schwingung, so kann diese über eine Mehrzahl an Sendern verfügen, welche durch Änderung ihrer Position oder Orientierung der Schwingungsquellen eine Interferenz am Ort des Markers erzeugen können. A bundling of the oscillation can take place, for example, by means of a focusing unit with a lens system or a single lens. If the scanning device is based on a mechanical vibration, then it may have a plurality of transmitters which can generate interference at the location of the marker by changing their position or orientation of the vibration sources.
Durch das beschriebene Verfahren kann der Detaillierungsgrad des dreidimensionalen Modells in verschiedenen Graduierungen erhöht werden. The described method can increase the level of detail of the three-dimensional model in different graduations.
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 1 1
- Produktionsumgebung production environment
- 1B 1B
- Boden ground
- 2 2
- Objekt (Produktionsressource) Object (production resource)
- 3 3
- Objekt (Produktionsressource) Object (production resource)
- 3A 3A
- Dreharm rotating arm
- 3B 3B
- Dreharm rotating arm
- 3C 3C
- Dreharm rotating arm
- 3D 3D
- Arbeitsbereich Workspace
- 4 4
- Objekt (Produktionsressource) Object (production resource)
- 4A 4A
- erste Teilkomponente first subcomponent
- 4B 4B
- zweite Teilkomponente second subcomponent
- 5 5
- Abtastvorrichtung (z.B. Laserscanner) Scanning device (e.g., laser scanner)
- 5S 5S
- Abtastsignal sampling
- 6 6
- durch die Abtastvorrichtung nicht erfassbare Bereiche der Produktionsressourcen non-detectable areas of the production resources by the scanner
- 7 7
- Marker marker
- 8 8th
-
eindeutiges Informationsdatum des Markers
7 unique information date of themarker 7 - 9 9
- Objektdaten object data
- 11 11
- Messort Measuring location
- 12 12
- Recheneinheit computer unit
- 13 13
- Abtasteinheit scanning
- 14 14
- Kommunikationseinheit communication unit
- 15 15
- Speicher Storage
- 16 16
- Kommunikationseinrichtung communicator
- 19 19
- Recheneinheit computer unit
- 20 20
- Datenbank Database
- 21 21
- Kommunikationskanal communication channel
- 22 22
- Abschattungen shadowing
- S41 S41
- Verfahrensschritt step
- S42 S42
- Verfahrensschritt step
- S43 S43
- Verfahrensschritt step
- S44 S44
- Verfahrensschritt step
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- EP 0364614 A1 [0003] EP 0364614 A1 [0003]
- US 2011/052263 A1 [0004] US 2011/052263 A1 [0004]
Claims (21)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015214858.0A DE102015214858A1 (en) | 2015-08-04 | 2015-08-04 | Method and system for creating a three-dimensional model of a production environment and resources |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015214858.0A DE102015214858A1 (en) | 2015-08-04 | 2015-08-04 | Method and system for creating a three-dimensional model of a production environment and resources |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102015214858A1 true DE102015214858A1 (en) | 2017-02-09 |
Family
ID=57854069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102015214858.0A Pending DE102015214858A1 (en) | 2015-08-04 | 2015-08-04 | Method and system for creating a three-dimensional model of a production environment and resources |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102015214858A1 (en) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0364614A1 (en) | 1988-10-17 | 1990-04-25 | Siemens Aktiengesellschaft | Method of recognising the spatial position and orientation of already known objects |
DE102006005958A1 (en) * | 2006-02-08 | 2007-08-16 | Kuka Roboter Gmbh | Method for generating an environment image |
DE102007007576B4 (en) * | 2007-02-15 | 2009-01-15 | Kuka Roboter Gmbh | Method and device for securing a working space |
DE102008034606A1 (en) * | 2008-07-25 | 2010-01-28 | Bayerische Motoren Werke Aktiengesellschaft | Method for displaying environment of vehicle on mobile unit, involves wirelessly receiving image signal from vehicle, and generating display image signal on mobile unit through vehicle image signal, where mobile unit has virtual plane |
US20110052263A1 (en) | 2009-09-02 | 2011-03-03 | Ricoh Company, Ltd. | Optical scanner and image forming apparatus |
DE102009058802A1 (en) * | 2009-12-18 | 2011-06-22 | EADS Deutschland GmbH, 85521 | Arrangement for the combined representation of a real and a virtual model in the context of a real model as well as a method for the simulation of a virtual model in connection with virtual as well as real existing tools in the context of a real model |
DE102008034198B4 (en) * | 2008-07-21 | 2014-01-23 | Zoller & Fröhlich GmbH | Target and method for evaluating scans |
DE102014218429A1 (en) * | 2014-09-15 | 2016-03-17 | Bayerische Motoren Werke Aktiengesellschaft | Method for carrying out an at least partially automated movement of a vehicle within a spatially limited area |
-
2015
- 2015-08-04 DE DE102015214858.0A patent/DE102015214858A1/en active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0364614A1 (en) | 1988-10-17 | 1990-04-25 | Siemens Aktiengesellschaft | Method of recognising the spatial position and orientation of already known objects |
DE102006005958A1 (en) * | 2006-02-08 | 2007-08-16 | Kuka Roboter Gmbh | Method for generating an environment image |
DE102007007576B4 (en) * | 2007-02-15 | 2009-01-15 | Kuka Roboter Gmbh | Method and device for securing a working space |
DE102008034198B4 (en) * | 2008-07-21 | 2014-01-23 | Zoller & Fröhlich GmbH | Target and method for evaluating scans |
DE102008034606A1 (en) * | 2008-07-25 | 2010-01-28 | Bayerische Motoren Werke Aktiengesellschaft | Method for displaying environment of vehicle on mobile unit, involves wirelessly receiving image signal from vehicle, and generating display image signal on mobile unit through vehicle image signal, where mobile unit has virtual plane |
US20110052263A1 (en) | 2009-09-02 | 2011-03-03 | Ricoh Company, Ltd. | Optical scanner and image forming apparatus |
DE102009058802A1 (en) * | 2009-12-18 | 2011-06-22 | EADS Deutschland GmbH, 85521 | Arrangement for the combined representation of a real and a virtual model in the context of a real model as well as a method for the simulation of a virtual model in connection with virtual as well as real existing tools in the context of a real model |
DE102014218429A1 (en) * | 2014-09-15 | 2016-03-17 | Bayerische Motoren Werke Aktiengesellschaft | Method for carrying out an at least partially automated movement of a vehicle within a spatially limited area |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102014101587B4 (en) | Registration of a scene with consistency check | |
DE102014104712B4 (en) | Registration of a scene disintegrating into clusters with visualized clusters | |
DE102016102607A1 (en) | Scan arrangement and method for scanning an object | |
DE102017213217A1 (en) | Test scenario database system for realistic virtual test driving scenarios | |
DE102016105496A1 (en) | System for checking objects using augmented reality | |
DE102013110580A1 (en) | Method for optically scanning and measuring a scene | |
DE102018207706A1 (en) | Environmental scan using a work machine with a camera | |
DE102018117660A1 (en) | METHOD AND SYSTEM FOR DETERMINING A POSITION OF A VEHICLE | |
DE102014110992A1 (en) | Register a clustered scene with location tracking | |
DE102019215903A1 (en) | Method and device for generating training data for a recognition model for recognizing objects in sensor data of a sensor, in particular of a vehicle, method for training and method for actuation | |
DE102020206190A1 (en) | SYSTEM AND PROCEDURE FOR CONFIGURATION OF A WORKPLACE WARNING ZONE. | |
DE102018009114A1 (en) | Method for determining the position of a mobile part movable on a travel surface and installation with mobile part for carrying out the method | |
EP3150037A1 (en) | Method and system for sensor-supported management of an agricultural field | |
EP3440433B1 (en) | Method for determining a pose of an at least partially autonomously moving vehicle using specially selected landmarks transmitted from a back end server | |
DE102015214857A1 (en) | Method and system for creating a three-dimensional model of a production environment | |
DE202014000433U1 (en) | Device for detecting and displaying three-dimensional objects | |
EP3575912A1 (en) | Robotic mower | |
EP2749982B1 (en) | Generation and updating of reference models | |
DE102015110649B4 (en) | Method for detecting topographic properties of a surface and device for this purpose | |
EP3486607B1 (en) | Image-based edge measurement | |
DE102015214858A1 (en) | Method and system for creating a three-dimensional model of a production environment and resources | |
DE102019203623A1 (en) | Method of providing a card | |
DE102006005958A1 (en) | Method for generating an environment image | |
DE102015213557A1 (en) | Method and system for creating a three-dimensional model of a production environment | |
DE102010042821A1 (en) | Method and apparatus for determining a basic width of a stereo detection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: G01B0011300000 Ipc: G01B0021200000 |
|
R163 | Identified publications notified | ||
R012 | Request for examination validly filed | ||
R016 | Response to examination communication |