DE10215885A1 - Automatische Prozesskontrolle - Google Patents

Automatische Prozesskontrolle

Info

Publication number
DE10215885A1
DE10215885A1 DE10215885A DE10215885A DE10215885A1 DE 10215885 A1 DE10215885 A1 DE 10215885A1 DE 10215885 A DE10215885 A DE 10215885A DE 10215885 A DE10215885 A DE 10215885A DE 10215885 A1 DE10215885 A1 DE 10215885A1
Authority
DE
Germany
Prior art keywords
work
real
virtual
environment
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE10215885A
Other languages
English (en)
Inventor
Werner Schreiber
Thomas Alt
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE10215885A priority Critical patent/DE10215885A1/de
Priority to DE50312843T priority patent/DE50312843D1/de
Priority to PCT/EP2003/002409 priority patent/WO2003078112A2/de
Priority to AT03711954T priority patent/ATE472764T1/de
Priority to EP03711954A priority patent/EP1487616B1/de
Publication of DE10215885A1 publication Critical patent/DE10215885A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Manipulator (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur automatischen Prozesskontrolle, bei welchem eine reale Arbeitsumgebung mit Hilfe einer Arbeitsumgebungserfassungseinrichtung erfasst wird. Eine automatische Protokollierung wird dadurch gewährleistet, dass reale Arbeitsvorgänge von Manipulatoren in der realen Arbeitsumgebung erfasst werden, dass die erfassten realen Arbeitsvorgänge mit zumindest einem vorgegebenen virtuellen Arbeitsvorgang verglichen werden und dass bei einem positiven Vergleichsergebnis die realen Arbeitsvorgänge automatisch protokolliert werden.

Description

  • Die Erfindung betrifft ein Verfahren zur automatischen Prozesskontrolle, bei welchem eine reale Arbeitsumgebung mit Hilfe einer Arbeitsumgebungserfassungseinrichtung erfasst wird. Des weiteren betrifft die Erfindung ein System zur automatischen Protokollierung von realen Arbeitsschritten, mit einer eine reale Arbeitsumgebung erfassenden Arbeitsumgebungserfassungseinrichtung und mit zumindest einem reale Arbeitsschritte ausführenden Manipulator. Schließlich betrifft die Erfindung auch die Verwendung eines erfindungsgemäßen Verfahrens und eines erfindungsgemäßen Systems.
  • Verfahren zur Protokollierung und Überprüfung von Arbeitsschritten sind aus dem Stand der Technik bekannt. Ein solches bekanntes Verfahren, das die Protokollierung und Überprüfung von Arbeitsschritten bei der Kommissionierung von Teilen in der Produktion ermöglicht, ist beispielsweise das sog. "Pick-To-Light"-Verfahren. Bei diesem Verfahren wird dem Mitarbeiter mit Hilfe direkt am Lagerort angebrachter Anzeigeinstrumenten angezeigt, welche Produktmengen bzw. welche Waren er zu entnehmen hat. Eine Bestätigung der Entnahme erfolgt per Knopfdruck durch den Anwender selbst. Dies ist jedoch nachteilig an dem bekannten Verfahren, da es dadurch möglich ist, dass Waren entnommen werden können, ohne dass eine Bestätigung erfolgt. Auch ist es dadurch möglich, dass Warenentnahmen bestätigt werden, die tatsächlich gar nicht stattgefunden haben. In diesen Fällen ist eine Bereitstellungssequenz für eine produktspezifische Kommissionierung unterbrochen. Die Lagerhaltung kann nicht mehr kontrolliert werden. Auch wenn mehrere Mitarbeiter bei der Kommissionierung eingesetzt werden, müssen deren Arbeitsabläufe und die Koordination ihrer Arbeitsschritte miteinander koordiniert werden.
  • Aus dem Stand der Technik sind ebenfalls sog. "Augmented Reality" (AR)-Systeme bekannt. Diese AR-Systeme ermöglichen eine Überlagerung der realen Umgebung mit einer rechnergenerierten Umgebung, der virtuellen Welt.
  • Augmented Reality stellt eine Mensch-Maschine-Schnittstelle dar, mit deren Hilfe dem Anwender Informationen in sein Sichtfeld eingeblendet werden. Die eingeblendeten Informationen erweitern die Wahrnehmung der Anwender. Eine Einblendung kann bei Augmented Realtiy Systemen kontextabhängig sein, d. h. passend und abgeleitet vom jeweils betrachteten Objekt, z. B. einem Bauteil. Beispielsweise wird das reale Sichtfeld eines Monteurs durch eingeblendete Montagehinweise um für ihn wichtige Informationen erweitert. Als Informationen können prinzipiell jegliche Arten von Daten, insbesondere Bilder und/oder Texte eingeblendet werden. Der Anwender hat durch die Überlagerung von virtueller und realen Welt die Möglichkeit, Soll-Ist-Abgleiche durchzuführen. Darüber hinaus kann mit Hilfe eines Augmented Reality Systems eine komplexe Information jeglicher Art auch ohne Überlagerung mit dem realen Sichtfeld visualisiert werden.
  • Zum Einsatz kommen AR-Systeme beispielsweise in der Flugzeugmontage. Hierbei werden durch das AR-System Informationen in das Sichtfeld eines Monteurs eingeblendet. Diese Informationen, beispielsweise Montageanleitungen, sind für den Monteur bei einem aktuell durchgeführten Arbeitsschritt hilfreich. In diesem Fall ersetzt das AR-System das herkömmliche Montagehandbuch. Vorzugsweise werden halbdurchlässige Datenbrillen eingesetzt, die sowohl den Blick des Monteurs auf ein gerade bearbeitetes reales Objekt freigeben als auch eine Einblendung verschiedenster Informationen erlaubt. Solche Datenbrillen sind beispielsweise aus T. P. Caudell, D. M. Mizell: "Augmented Reality: An Application of Heads-Up Display Technology to Manual Manufacturing Processes", Proceedings of the Hawaii International Conference on Systems Sciences, pp. 659-669, IEEE Press, Januar 1992 beschrieben. Nachteilig an den beschriebenen Augmented Reality-Systemen ist, dass diese keine automatische Protokollerung von Arbeitsschritten ermöglichen. Werden durch den Monteur Fehler bei der Durchführung von Arbeitsschritten gemacht, fallen diese nicht auf.
  • Ausgehend von den beschriebenen Nachteilen des Standes der Technik lag der Erfindung das technische Problem zugrunde, eine automatische Protokollierung und Überprüfung von Arbeitsschritten zu ermöglichen.
  • Das zuvor hergeleitete und aus dem Stand der Technik bekannte technische Problem wird erfindungsgemäß durch ein Verfahren gelöst, bei dem reale Arbeitsvorgänge von Manipulatoren in der realen Arbeitsumgebung erfasst werden, bei dem erfasste reale Arbeitsvorgänge mit zumindest einem vorgegebenen virtuellen Arbeitsvorgang verglichen werden und ein Vergleichsergebnis der realen Arbeitsvorgänge automatisch protokolliert wird.
  • Als Arbeitsumgebungserfassungseinrichtung kommen Bilderfassungseinrichtungen mit Hilfe von Kameras, Infrarotsensoren, Radarsensoren, Ultraschallsensoren oder sonstige Mittel in Betracht, mit deren Hilfe eine Arbeitsumgebung hinreichend genau erfasst werden kann.
  • Arbeitsvorgänge von Manipulatoren umfassen Tätigkeiten aller Art, die zur Erstellung eines Produkts notwendig sind. Insbesondere bezieht sich der Begriff auf Tätigkeiten zur Auswahl von Teilen innerhalb der Montage. Dabei kommen alle Industriegüter, insbesondere auch Kraftfahrzeuge, in Betracht.
  • Manipulatoren sind insbesondere menschliche Gliedmaßen, wie beispielsweise Arm und Finger oder auch Werkzeuge, wie beispielsweise Schraubenschlüssel.
  • Durch einen Vergleich von erfassten realen Vorgängen (Ist-Vorgang) mit einem vorgegebenen virtuellen Arbeitsvorgang (Soll-Vorgang) lässt sich feststellen, welcher Arbeitsvorgang tatsächlich vorgenommen worden ist. Ergibt ein Vergleich von Ist- Vorgang mit Soll-Vorgang ein positives Vergleichsergebnis, so lässt sich der Ist-Vorgang erfindungsgemäß automatisch protokollieren. Auch bei einem negativem Vergleichsergebnis ist eine Protokollierung möglich. Dadurch können auch fehlerhafte Arbeitsschritte oder nicht durchgeführte Arbeitsschritte ermittelt werden.
  • Gemäß einer vorteilhaften Ausgestaltung wird vorgeschlagen, dass die erfasste reale Arbeitsumgebung in Relation zu einer virtuellen Arbeitsumgebung gesetzt wird und dass reale Arbeitsvorgänge von Manipulatoren in der virtuellen Arbeitsumgebung als virtuelle Arbeitsvorgänge virtueller Manipulatoren angezeigt werden. Dabei ist es vorteilhaft, dem Anwender die Position der zu manipulierenden Teile derart zu kennzeichnen, dass diese durch eine Überlagerung der Markierung mit dem realen Teil erkenntlich werden. Dadurch lässt sich der Arbeitsvorgang dem Anwender leicht erläutern.
  • Auch ist es vorteilhaft, wenn die zu manipulierenden Gegenstände im wahrgenommenen Bild hinsichtlich ihres räumlichen Ortes mit einem Rahmen oder einem Kreis gekennzeichnet werden. Der Anwender erkennt dann die zu manipulierenden Gegenstände leicht.
  • Gemäß einer weiteren vorteilhaften Ausgestaltung wird vorgeschlagen, dass die räumliche Position der Manipulatoren erkannt wird und mit einer Soll-Position der Manipulatoren in der virtuellen Arbeitsumgebung verglichen werden. Bei einer dem Fertigungsplan entsprechenden Ausführung der Tätigkeit ergibt sich eine Übereinstimmung der räumlichen Positionen von realen und virtuellen Manipulatoren, wodurch eine korrekte Ausführung protokolliert werden kann. Das manuelle Quittieren von durchgeführten Arbeitsschritten entfällt.
  • Eine Kontrolle der Protokollierung lässt sich vorteilhaft dadurch erreichen, dass das Vergleichsergebnis angezeigt wird. Dies kann sowohl negativ als auch positiv sein. Der Anwender kann sofort kontrollieren, ob der Durchgeführte Arbeitsschritt protokolliert wurde.
  • Vorteilhaft lässt sich das Verfahren einsetzen, wenn lediglich dokumentationspflichtige Arbeitsschritte erfasst und protokolliert werden. Dadurch wird die Bearbeitungsgeschwindigkeit deutlich erhöht. Auch ist es möglich, dass das Auslassen von dokumentationspflichtigen Arbeitsschritten protokolliert wird.
  • Eine Kontrolle eines aktuellen Produktionsfortschrittes sowie die Koordination einzelner Produktionsschritte lässt sich dadurch erreichen, dass die protokollierten Arbeitsschritte zentral gespeichert werden und dass mit Hilfe der zentral gespeicherten, protokollierten Arbeitsschritte ein Produktionsfortschritt dargestellt wird.
  • Es wird bevorzugt, dass die räumliche Position des Manipulators und/oder die räumliche Position des Anwenders und/oder die räumliche Position des zu manipulierenden Arbeitsgegenstandes und/oder die räumliche Position des Anwenders im Bezug auf den Manipulator und den zu manipulierenden Gegenstand erfasst wird. Durch Erfassung der räumlichen Positionen lässt sich leicht der zu protokollierende Arbeitsvorgang erkennen.
  • Das erfindungsgemäße Problem wird gemäß eines weiteren Gegenstandes der Endung durch ein System gelöst, das sich dadurch kennzeichnet, dass eine Vergleichseinrichtung vorgesehen ist, dass eine Protokollierungseinrichtung vorgesehen ist, dass die Arbeitsumgebungserfassungseinrichtung geeignet ist, reale Arbeitsschritte zu erfassen, dass die Vergleichseinrichtung geeignet ist, die erfassten Arbeitsschritte mit gespeicherten virtuellen Arbeitsschritten zu vergleichen, und dass die Protokollierungseinrichtung geeignet ist, Vergleichsergebnisse zu protokollieren.
  • Bei einem solchen System ist ein Augmented Reality-System vorteilhaft, wobei dieses Augmented Reality-System geeignet ist, eine virtuelle Arbeitsumgebung in Relation zur erfassten Arbeitsumgebung wiederzugeben. Dem Anwender wird mit Hilfe des Augmented Reality-Systems die virtuelle Arbeitsumgebung angezeigt und er kann sich in Kenntnis der virtuellen Arbeitsumgebung in der realen Arbeitsumgebung bewegen. Montagehinweise und Anleitungen können ihm durch das Augmented Reality-System gegeben werden.
  • Hierbei ist vorteilhaft, dass ein Datenbrille vorgesehen ist, wobei die Datenbrille geeignet ist, die virtuelle Umgebung in Relation zur erfassten realen Umgebung wiederzugeben.
  • Besonders vorteilhaft und zuverlässig ist eine Protokollierung, wenn eine Mustererkennungseinrichtung vorgesehen ist, wobei die Mustererkennungseinrichtung geeignet ist, die realen Arbeitsschritte mit Hilfe optischer Bilderkennungsverfahren zu erfassen.
  • Ein weiterer Gegenstand der Erfindung ist die Verwendung eines vorbeschriebenen Verfahrens sowie eines vorbeschriebenen Systems in der Kraftfahrzeugproduktion. Die Erfindung ist nicht auf den Einsatz in der Kraftfahrzeugsproduktion beschränkt. Bei der Herstellung beliebiger Güter, bei der Wartung beliebiger existierender Güter oder bei der Demontage von Gütern lässt sich das erfindungsgemäße Verfahren und das erfindungsgemäße System ebenfalls einsetzen. Des weiteren ist die Erfindung auch bei der Bereitstellung von Gütern als Dienstleistung, beispielsweise im Versandhandel, einsetzbar.
  • Die Erfindung wird im Nachfolgenden anhand einer Ausführungsbeispiele zeigenden Zeichnung näher erläutert. In der Zeichnung zeigen:
  • Fig. 1 ein Augmented Reality-System;
  • Fig. 2 ein erfindungsgemäßes System;
  • Fig. 3 ein weiteres erfindungsgemäßes System.
  • Fig. 1 zeigt ein bekanntes Augmented Reality-System mit einem Datenspeicher 110, Softwareeinrichtungen 120a-n, einer Steuereinrichtung 130, einer Kamera 132 und einer Datenbrille 134. Die Steuereinrichtung 130 weist eine Vermessungseinrichtung 131 und eine Auswerteeinrichtung 133 auf.
  • Die Kamera 132, die vorteilhafterweise über eine drahtlose Verbindung mit der Steuereinrichtung 130 kommuniziert, nimmt ein Bild der Arbeitsumgebung auf. Die Bildinformationen werden über die drahtlose Verbindung an die Steuereinrichtung 130 übermittelt. Diese Daten werden dann innerhalb der Vermessungseinrichtung 131 kontinuierlich hinsichtlich bekannter Bildmuster analysiert. Durch die Analyse auf bekannte Bildmuster wird die relative Position der Kamera 132 im Bezug auf die räumliche Arbeitsumgebung bestimmt. Die so ermittelte relative Position der Kamera 134 wird an die Auswerteeinrichtung 133 übergeben. In der Auswerteeinrichtung 133 werden entsprechend der ermittelten Positionen geeignete virtuelle Informationen zusammengestellt. Bei der Zusammenstellung der virtuellen Informationen werden die Softwareeinrichtungen 120a-n genutzt. Die Softwareeinrichtungen 120a-n sind mit einem Datenspeicher 110 verbunden. Im Datenspeicher 110 sind virtuelle Informationen zu einer Vielzahl von möglichen Positionen innerhalb der Arbeitsumgebung abgelegt. Hierzu gehören u. a. relevante Arbeitsmaterialien und Montageanleitungen. Die zusammengestellten Informationen werden von den Softwareeinrichtungen 120a-n an die Auswerteeinrichtung 133 übergeben. In der Auswerteeinrichtung 133 wird ein virtuelles Bild erstellt, welches über eine vorzugsweise drahtlose Verbindung an die Datenbrille 134 übermittelt wird. In der Datenbrille 134 wird das virtuelle Bild projiziert und somit zur Überlagerung mit dem tatsächlich wahrgenommenen Bild der Arbeitsumgebung gebracht. Ein sich am Ort der realen Umgebung aufhaltender Anwender der Datenbrille 134 hat dadurch zum einen durch die Datenbrille hindurch eine freie Sicht auf die reale Arbeitsumgebung, zum anderen wird von der Steuereinrichtung 130 die virtuelle Information in Abhängigkeit von der betrachteten realen Umgebung in der Datenbrille präsentiert. Auf diese Weise findet im Sichtfeld des Anwenders eine Überlagerung der virtuellen Information mit der realen Arbeitsumgebung statt.
  • Fig. 2 zeigt ein erfindungsgemäßes System zur automatischen Protokollierung und Überprüfung von Arbeitsschritten. Erneut ist ein Augmented Reality-System 100 dargestellt, bei dem die Steuereinrichtung 130 über eine drahtlose Verbindung in Wirkverbindung mit den Softwareeinrichtungen 120 und dem Datenspeicher 110 steht. Außerdem ist ein Manipulator 231 dargestellt, wobei dies der Arm eines Anwenders ist. Der Manipulator 132 weist eine Markierung 230 auf.
  • Die Bewegung des Manipulators 231, respektive die Bewegung der Markierung 230 wird über die Kamera 132 aufgenommen. Die Bewegung des Manipulators 231 dient als Eingangsinformation für das erfindungsgemäße Verfahren. Sie wird über die Bewegung der für die Kamera verfolgbaren Markierung 230 erfasst. Die Markierung 230 ist dabei fest am Manipulator 231 angebracht. Außerdem wird die räumliche Position des zu manipulierenden Gegenstandes erfasst. Die erfassten Bildinformationen werden durch die Steuereinrichtung 130 ausgewertet.
  • Dabei wird durch die Vermessungseinrichtung 131 die bestimmte räumliche Ist-Position des Manipulators 231 und gegebenenfalls die räumliche Ist-Position des zu manipulierenden Objektes (nicht dargestellt) ermittelt und an die Auswerteeinrichtung 133 übergeben. Mit den Softwareeinrichtungen 120a-n sowie den Datenspeichern 110 werden Informationen zu der ermittelten Ist-Position gesammelt. Die Informationen über die Ist-Position werden von der Steuereinrichtung 130 an die Vergleichseinrichtung 202 übermittelt. In der Vergleichseinrichtung 202 sind Soll- Positionen abgelegt. Durch einen Vergleich der Soll-Positionen mit den Ist-Positionen sowie von gespeicherten virtuellen Arbeitsvorgängen mit erfassten realen Arbeitsvorgängen lässt sich feststellen, ob ein vorgegebener Arbeitsvorgang durchgeführt wird. Bei einem positiven Vergleichsergebnis durch die Vergleichseinrichtung 202 wird der Arbeitsvorgang protokolliert und durch die Protokolliereinrichtung 204 abgespeichert. Unter eventueller Einbeziehung weiterer Informationen, wie beispielsweise Toleranzwerte, wird der durch die Manipulation beabsichtigte Arbeitsschritt als durchgeführt oder als nicht durchgeführt in der Protokolliereinrichtung 204 klassifiziert. Entsprechend dieser Klassifikation wird der Arbeitsschritt quittiert und in der Protokolliereinrichtung 204 abgelegt. Des weiteren wird eine graphische Repräsentation der Klassifikation in der Datenbrille 134 angezeigt. Auch ist es möglich, einen fehlerhaften Arbeitsschritt oder das Auslassen eines Arbeitsschrittes zu protokollieren.
  • Fig. 3 zeigt eine beispielhafte Anwendung des erfindungsgemäßen Verfahrens. Der Anwender hat die Aufgabe, für ein zu produzierendes Gut die benötigten Teile bereitzustellen. Die benötigten Teile sind in einem Lager 300 abgelegt, wobei das Lager 300 aus verschiedenen Regalböden 302 besteht.
  • Zunächst wird die Arbeitsumgebung mit Hilfe der Kamera erfasst und Zusatzinformationen werden aus den Datenspeichern 110 geladen. Außerdem werden notwendige Arbeitsschritte ermittelt. Die ermittelten Arbeitsschritte werden über die Datenbrille 134 dem Benutzer angezeigt. In dem vorliegenden Beispiel wird der Lagerort (der Regalboden) des zu entnehmenden Teils über die Datenbrille 134 mittels geeigneter Einblendung 304 angezeigt. Der Benutzer weiß nun, dass er das entsprechende Teil entnehmen muss. Er entnimmt das Teil unter Verwendung des Manipulators 231. Über die Kamera 132 wird die Bewegung der Markierung 230 erkannt und mit einer Soll-Bewegung verglichen. Entspricht die Bewegung der Markierung 230 einer Soll-Bewegung, so wird dies in der Vergleichseinrichtung 202 erkannt und eine erfolgreiche Ausführung des Arbeitsschrittes wird in der Protokolliereinrichtung 204 protokolliert. Eine erfolgreiche oder eine negative Protokollierung wird dem Anwender über die Datenbrille 134 signalisiert.
  • Durch das erfindungsgemäße System ist es zum einen möglich, dem Anwender Montageanleitungen zu geben, und zum anderen wird überprüft, ob diese Anweisungen korrekt ausgeführt werden. Schließlich wird eine korrekte als auch eine inkorrekte Ausführung eines Arbeitsschrittes protokolliert. BEZUGSZEICHENLISTE 100 Augmented Reality-System
    110 Datenspeicher
    120a-n Softwareeinrichtungen
    130 Steuereinrichtung
    131 Vermessungseinrichtung
    132 Kamera
    133 Auswerteeinrichtung
    134 Datenbrille
    202 Vergleichseinrichtung
    204 Protokolliereinrichtung
    230 Markierung
    231 Manipulator
    300 Regal
    302 Regalboden
    304 eingeblendeter Regalboden

Claims (12)

1. Verfahren zur automatischen Prozesskontrolle, bei welchem eine reale Arbeitsumgebung mit Hilfe einer Arbeitsumgebungserfassungseinrichtung erfasst wird, dadurch gekennzeichnet,
dass reale Arbeitsvorgänge von Manipulatoren in der realen Arbeitsumgebung erfasst werden,
dass die erfassten realen Arbeitsvorgänge mit zumindest einem vorgegebenen virtuellen Arbeitsvorgang verglichen werden, und
dass ein Vergleichsergebnis der realen Arbeitsvorgänge automatisch protokolliert wird.
2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die erfasste reale Arbeitsumgebung in Relation zu einer virtuellen Arbeitsumgebung gesetzt wird, und dass reale Arbeitsvorgänge von Manipulatoren in der virtuellen Arbeitsumgebung als virtuelle Arbeitsvorgänge virtueller Manipulatoren angezeigt werden.
3. Verfahren nach einem der Ansprüche 1 oder 2, dadurch gekennzeichnet, dass eine erfasste räumliche Position der Manipulatoren mit einer Soll-Position der Manipulatoren in der virtuellen Arbeitsumgebung verglichen wird.
4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass das Vergleichsergebnis angezeigt wird.
5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass dokumentationspflichtige Arbeitsschritte erfasst und protokolliert werden.
6. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die protokollierten Arbeitsschritte zentral gespeichert werden und dass mit Hilfe der zentral gespeicherten protokollierten Arbeitsschritte ein Produktionsfortschritt dargestellt wird.
7. Verfahren nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass die räumliche Position des Manipulators und/oder die räumliche Position des Anwenders und/oder die räumliche Position des zu manipulierenden Arbeitsgegenstandes und/oder die relative räumliche Position des Anwenders in Bezug auf den Manipulator und den zu manipulierenden Arbeitsgegenstand erfasst wird.
8. System zur automatischen Protokollierung von realen Arbeitsschritten, insbesondere für ein Verfahren nach einem der Ansprüche 1 bis 7,
mit einer eine reale Arbeitsumgebung erfassenden Arbeitsumgebungserfassungseinrichtung, und
mit zumindest einem reale Arbeitsschritte ausführenden Manipulator, dadurch gekennzeichnet,
dass eine Vergleichseinrichtung vorgesehen ist,
dass eine Protokollierungseinrichtung vorgesehen ist,
dass die Arbeitsumgebungserfassungseinrichtung geeignet ist, reale Arbeitsschritte zu erfassen,
dass die Vergleichseinrichtung geeignet ist, die erfassten Arbeitsschritte mit gespeicherten virtuellen Arbeitsschritten zu vergleichbar, und
dass die Protokollierungseinrichtung geeignet ist, Vergleichsergebnisse zu protokollieren.
9. System nach Anspruch 8, dadurch gekennzeichnet, dass ein Augmented Reality System vorgesehen ist, wobei das Augmented Reality System geeignet ist, eine virtuelle Arbeitsumgebung in Relation zur erfassten realen Arbeitsumgebung wiederzugeben.
10. System nach einem der Ansprüche 8 oder 9, dadurch gekennzeichnet, dass eine Datenbrille vorgesehen ist, wobei die Datenbrille geeignet ist, die virtuelle Umgebung in Relation zur erfassten realen Arbeitsumgebung wiederzugeben.
11. System nach einem der Ansprüche 8 bis 10, dadurch gekennzeichnet, dass eine Mustererkennungseinrichtung vorgesehen ist, wobei die Mustererkennungseinrichtung geeignet ist, die realen Arbeitsschritte mit Hilfe optischer Bilderkennungsverfahren zu erfassen.
12. Verwendung eines Verfahrens nach Anspruch 1 oder eines Systems nach Anspruch 8 in der Kraftfahrzeugsproduktion.
DE10215885A 2002-03-20 2002-04-11 Automatische Prozesskontrolle Withdrawn DE10215885A1 (de)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE10215885A DE10215885A1 (de) 2002-03-20 2002-04-11 Automatische Prozesskontrolle
DE50312843T DE50312843D1 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle
PCT/EP2003/002409 WO2003078112A2 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle
AT03711954T ATE472764T1 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle
EP03711954A EP1487616B1 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE10212451 2002-03-20
DE10215885A DE10215885A1 (de) 2002-03-20 2002-04-11 Automatische Prozesskontrolle

Publications (1)

Publication Number Publication Date
DE10215885A1 true DE10215885A1 (de) 2003-10-02

Family

ID=27797980

Family Applications (2)

Application Number Title Priority Date Filing Date
DE10215885A Withdrawn DE10215885A1 (de) 2002-03-20 2002-04-11 Automatische Prozesskontrolle
DE50312843T Expired - Lifetime DE50312843D1 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle

Family Applications After (1)

Application Number Title Priority Date Filing Date
DE50312843T Expired - Lifetime DE50312843D1 (de) 2002-03-20 2003-03-10 Automatische prozesskontrolle

Country Status (2)

Country Link
AT (1) ATE472764T1 (de)
DE (2) DE10215885A1 (de)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202004004495U1 (de) * 2004-03-19 2004-12-30 Wittenbauer, Rudolf, Dipl.-Ing. (FH) Einrichtung zur Erkennung von Montagefehlern
EP1654982A1 (de) * 2004-11-08 2006-05-10 Siemens Aktiengesellschaft System zur Messung und Interpretation von Hirnaktivitäten
EP2161219A1 (de) 2008-09-05 2010-03-10 KNAPP Systemintegration GmbH Verfahren und Vorrichtung zur visuellen Unterstützung von Kommissioniervorgängen
DE102011122206A1 (de) * 2011-12-23 2013-06-27 Volkswagen Aktiengesellschaft Verfahren zum Betrieb eines Augmented-Reality-Systems
DE102012100354A1 (de) 2012-01-17 2013-07-18 Prof. Dr. Meier - Institut für Produktionsmanagement und Logistik GmbH Kommissionierungsverfahren
DE102014204969A1 (de) * 2014-03-18 2015-09-24 Daimler Ag Verfahren zur Überwachung von Fertigungsvorgängen, sowie zugehörige Überwachungsvorrichtung
EP2876059A4 (de) * 2012-06-29 2016-06-08 Toyokanetsu Solutions Kabushiki Kaisha Trägervorrichtung und system zur aufnahme von artikeln
WO2016207920A1 (en) * 2015-06-23 2016-12-29 Lin Up Srl Device for acquisition and processing of data concerning human activity at workplace
DE102016220352A1 (de) * 2016-10-18 2018-04-19 B. Braun Melsungen Ag Manuelles Kommissioniersystem
DE102017107357A1 (de) 2016-10-21 2018-04-26 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Absortierunterstützungsverfahren, Absortiersystem und Flachbettwerkzeugmaschine
WO2018073420A1 (de) 2016-10-21 2018-04-26 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Absortierunterstützungsverfahren, absortiersystem und flachbettwerkzeugmaschine
EP2686254B1 (de) * 2011-03-17 2018-08-15 SSI Schäfer Automation GmbH Steuerung und überwachung einer lager- und kommissionieranlage durch bewegung und sprache
DE102017108622A1 (de) * 2017-04-23 2018-10-25 Goodly Innovations GmbH System zur unterstützung von teamarbeit mittels augmented reality
DE102017211301A1 (de) 2017-07-04 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Überwachungsvorrichtung und Verfahren zum Betreiben einer Überwachungsvorrichtung
DE102017213742A1 (de) 2017-08-08 2019-02-14 Bayerische Motoren Werke Aktiengesellschaft Vorratsvorrichtung und Verfahren zum Betreiben einer Vorratsvorrichtung
DE102017219067A1 (de) 2017-10-25 2019-04-25 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und verfahren zur visuellen unterstützung eines benutzers in einem arbeitsumfeld
DE102018201467A1 (de) 2018-01-31 2019-08-01 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zur Visualisierung von Arbeitsschritten in einem Produktionsprozess
DE102019131235A1 (de) * 2019-11-19 2021-05-20 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Verfahren zum Verknüpfen von Information mit einem Werkstückdatensatz und Flachbettwerkzeugmaschine
WO2021175420A1 (en) * 2020-03-04 2021-09-10 Telefonaktiebolaget Lm Ericsson (Publ) Human action recognition and assistance to ar device

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202004004495U1 (de) * 2004-03-19 2004-12-30 Wittenbauer, Rudolf, Dipl.-Ing. (FH) Einrichtung zur Erkennung von Montagefehlern
EP1654982A1 (de) * 2004-11-08 2006-05-10 Siemens Aktiengesellschaft System zur Messung und Interpretation von Hirnaktivitäten
EP2161219A1 (de) 2008-09-05 2010-03-10 KNAPP Systemintegration GmbH Verfahren und Vorrichtung zur visuellen Unterstützung von Kommissioniervorgängen
US11312570B2 (en) 2008-09-05 2022-04-26 Knapp Systemintegration Gmbh Method and apparatus for visual support of commission acts
AT10520U3 (de) * 2008-09-05 2013-10-15 Knapp Systemintegration Gmbh Vorrichtung und verfahren zur visuellen unterstützung von kommissioniervorgängen
EP2686254B1 (de) * 2011-03-17 2018-08-15 SSI Schäfer Automation GmbH Steuerung und überwachung einer lager- und kommissionieranlage durch bewegung und sprache
DE102011122206A1 (de) * 2011-12-23 2013-06-27 Volkswagen Aktiengesellschaft Verfahren zum Betrieb eines Augmented-Reality-Systems
DE102012100354A1 (de) 2012-01-17 2013-07-18 Prof. Dr. Meier - Institut für Produktionsmanagement und Logistik GmbH Kommissionierungsverfahren
EP2876059A4 (de) * 2012-06-29 2016-06-08 Toyokanetsu Solutions Kabushiki Kaisha Trägervorrichtung und system zur aufnahme von artikeln
US11307411B2 (en) 2012-06-29 2022-04-19 Toyo Kanetsu Solutions K.K. Support device and system for article picking or sorting work
DE102014204969A1 (de) * 2014-03-18 2015-09-24 Daimler Ag Verfahren zur Überwachung von Fertigungsvorgängen, sowie zugehörige Überwachungsvorrichtung
WO2016207920A1 (en) * 2015-06-23 2016-12-29 Lin Up Srl Device for acquisition and processing of data concerning human activity at workplace
DE102016220352A1 (de) * 2016-10-18 2018-04-19 B. Braun Melsungen Ag Manuelles Kommissioniersystem
DE102017107357A1 (de) 2016-10-21 2018-04-26 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Absortierunterstützungsverfahren, Absortiersystem und Flachbettwerkzeugmaschine
WO2018073420A1 (de) 2016-10-21 2018-04-26 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Absortierunterstützungsverfahren, absortiersystem und flachbettwerkzeugmaschine
US11059076B2 (en) 2016-10-21 2021-07-13 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Sorting support methods, sorting systems, and flatbed machine tools
DE102017108622A1 (de) * 2017-04-23 2018-10-25 Goodly Innovations GmbH System zur unterstützung von teamarbeit mittels augmented reality
DE102017211301A1 (de) 2017-07-04 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Überwachungsvorrichtung und Verfahren zum Betreiben einer Überwachungsvorrichtung
CN110546660A (zh) * 2017-07-04 2019-12-06 宝马股份公司 监控设备和用于运行监控设备的方法
WO2019007651A1 (de) 2017-07-04 2019-01-10 Bayerische Motoren Werke Aktiengesellschaft Überwachungsvorrichtung und verfahren zum betreiben einer überwachungsvorrichtung
US11774938B2 (en) 2017-07-04 2023-10-03 Bayerische Motoren Werke Aktiengesellschaft Monitoring device and method for operating a monitoring device
CN110546660B (zh) * 2017-07-04 2024-02-13 宝马股份公司 监控设备和用于运行监控设备的方法
DE102017213742A1 (de) 2017-08-08 2019-02-14 Bayerische Motoren Werke Aktiengesellschaft Vorratsvorrichtung und Verfahren zum Betreiben einer Vorratsvorrichtung
DE102017219067A1 (de) 2017-10-25 2019-04-25 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und verfahren zur visuellen unterstützung eines benutzers in einem arbeitsumfeld
DE102018201467A1 (de) 2018-01-31 2019-08-01 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zur Visualisierung von Arbeitsschritten in einem Produktionsprozess
DE102019131235A1 (de) * 2019-11-19 2021-05-20 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Verfahren zum Verknüpfen von Information mit einem Werkstückdatensatz und Flachbettwerkzeugmaschine
WO2021099138A1 (de) 2019-11-19 2021-05-27 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Verfahren zum verknüpfen von information mit einem werkstückdatensatz und flachbettwerkzeugmaschine
DE102019131235B4 (de) 2019-11-19 2022-09-08 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Verfahren zum Verknüpfen von Information mit einem Werkstückdatensatz und Flachbettwerkzeugmaschine
WO2021175420A1 (en) * 2020-03-04 2021-09-10 Telefonaktiebolaget Lm Ericsson (Publ) Human action recognition and assistance to ar device

Also Published As

Publication number Publication date
DE50312843D1 (de) 2010-08-12
ATE472764T1 (de) 2010-07-15

Similar Documents

Publication Publication Date Title
DE102019009313B4 (de) Robotersteuerung, Verfahren und Computerprogramm unter Verwendung von erweiterter Realität und gemischter Realität
DE10215885A1 (de) Automatische Prozesskontrolle
DE60127644T2 (de) Lehrvorrichtung für einen Roboter
DE102015015503B4 (de) Robotersystem, das eine mit erweiterter Realität kompatible Anzeige aufweist
DE102017128543B4 (de) Störbereich-einstellvorrichtung für einen mobilen roboter
DE102019109624B4 (de) Roboterbewegungseinlernvorrichtung, Robotersystem und Robotersteuerung
EP3098034B1 (de) Auswahl eines gerätes oder eines objektes mit hilfe einer kamera
DE102014108287A1 (de) Schnelles Erlernen durch Nachahmung von Kraftdrehmoment-Aufgaben durch Roboter
EP3518055B1 (de) Überwachungs- und bediensystem für einen fertigungsarbeitsplatz und verfahren zum fertigen eines produkts oder teilprodukts
DE102014106210A1 (de) Probabilistische Personennachführung unter Verwendung der Mehr- Ansichts-Vereinigung
DE102014106211A1 (de) Sichtbasierte Mehrkamera-Fabriküberwachung mit dynamischer Integritätsbewertung
DE102016212236A1 (de) Interaktionssystem und -verfahren
DE102016224774B3 (de) Verfahren zur Programmierung eines Messroboters und Programmiersystem
DE102019125117A1 (de) Sichtgeführter roboterarm und verfahren zum betreiben desselben
EP1487616B1 (de) Automatische prozesskontrolle
WO2020074722A1 (de) Verfahren und robotersystem zur eingabe eines arbeitsbereichs
DE102014104673A1 (de) Prozessunterstützungssystem und Verfahren zum Unterstützen eines Prozesses
WO2019110263A1 (de) Sichere brillenartige vorrichtung und verfahren
DE112022004981T5 (de) Anzeigedaten-Erzeugungsprogramm, Anzeigedaten-Erzeugungsgerät und Anzeigedaten-Erzeugungsverfahren
DE102017219067A1 (de) Vorrichtung und verfahren zur visuellen unterstützung eines benutzers in einem arbeitsumfeld
DE102020006160A1 (de) Verfahren zur Lageerkennung eines Objekts mittels eines Lageerfassungssystems, Verfahren zum Bearbeiten eines Objekts sowie Lageerfassungssystem
DE102020214960A1 (de) E/a-signalinformations-anzeigesystem
DE102019007091A1 (de) Robotersteuervorrichtung
DE102004032996A1 (de) Einfache Roboterprogrammierung
DE102020104359B4 (de) Arbeitsraumbegrenzung für einen Robotermanipulator

Legal Events

Date Code Title Description
OR8 Request for search as to paragraph 43 lit. 1 sentence 1 patent law
8105 Search report available
8110 Request for examination paragraph 44
8130 Withdrawal
R120 Application withdrawn or ip right abandoned

Effective date: 20110214