JP2021529391A - 拡張現実を使用した操作上の境界ゾーンの視覚化と変更 - Google Patents
拡張現実を使用した操作上の境界ゾーンの視覚化と変更 Download PDFInfo
- Publication number
- JP2021529391A JP2021529391A JP2020572694A JP2020572694A JP2021529391A JP 2021529391 A JP2021529391 A JP 2021529391A JP 2020572694 A JP2020572694 A JP 2020572694A JP 2020572694 A JP2020572694 A JP 2020572694A JP 2021529391 A JP2021529391 A JP 2021529391A
- Authority
- JP
- Japan
- Prior art keywords
- zone
- robot
- machine
- operating
- interference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 20
- 238000012800 visualization Methods 0.000 title description 9
- 238000012986 modification Methods 0.000 title description 7
- 230000004048 modification Effects 0.000 title description 7
- 230000000007 visual effect Effects 0.000 claims abstract description 11
- 238000007689 inspection Methods 0.000 claims description 70
- 230000033001 locomotion Effects 0.000 claims description 35
- 238000000034 method Methods 0.000 claims description 26
- 230000006870 function Effects 0.000 claims description 18
- 230000008859 change Effects 0.000 claims description 9
- 239000003550 marker Substances 0.000 claims description 9
- 238000013461 design Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000001010 compromised effect Effects 0.000 claims 1
- 238000001514 detection method Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 7
- 238000012360 testing method Methods 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 6
- 238000004088 simulation Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000009545 invasion Effects 0.000 description 2
- 230000008672 reprogramming Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000003466 welding Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000010420 art technique Methods 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 239000002775 capsule Substances 0.000 description 1
- 210000002310 elbow joint Anatomy 0.000 description 1
- 210000004394 hip joint Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1628—Programme controls characterised by the control loop
- B25J9/163—Programme controls characterised by the control loop learning, adaptive, model based, rule based expert control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
- B25J9/1661—Programme controls characterised by programming, planning systems for manipulators characterised by task planning, object-oriented languages
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
- B25J9/1664—Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1674—Programme controls characterised by safety, monitoring, diagnostic
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/35—Nc in input of data, input till input file format
- G05B2219/35506—Camera images overlayed with graphics, model
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/36—Nc in input of data, input key till input tape
- G05B2219/36167—Use camera of handheld device, pda, pendant, head mounted display
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/39—Robotics, robotics to robotics hand
- G05B2219/39443—Portable, adapted to handpalm, with joystick, function keys, display
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/39—Robotics, robotics to robotics hand
- G05B2219/39449—Pendant, pda displaying camera images overlayed with graphics, augmented reality
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/39—Robotics, robotics to robotics hand
- G05B2219/39451—Augmented reality for robot programming
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/40—Robotics, robotics mapping to robotics vision
- G05B2219/40202—Human robot coexistence
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/40—Robotics, robotics mapping to robotics vision
- G05B2219/40317—For collision avoidance and detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Manipulator (AREA)
- Numerical Control (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
この出願は、2018年6月26日出願の「拡張現実での二重検査安全ゾーンの視覚化と変更」と題する米国仮特許出願第62/690,125号の優先日の利益を主張する。
Claims (22)
- 機械の操作ゾーンを視覚化して変更するためのシステムであって、前記システムは、
作業セル内で操作可能な機械と、
前記機械と通信する機械制御装置であって、前記制御装置は、プロセッサ及びメモリを備え、前記機械の操作を制御するための機械制御ソフトウェアと共に構成される、機械制御装置と、
前記機械制御装置と通信する拡張現実(AR)装置であって、前記AR装置は、1つ又は複数のカメラと、位置追跡センサと、ディスプレイとを有し、前記AR装置は、ARゾーンソフトウェアアプリケーションを実行するように構成されたプロセッサ及びメモリをさらに備える、AR装置と、を具備し、
前記ARゾーンソフトウェアアプリケーションは、
作業セル座標系に対する前記AR装置の位置と向きを確立する機能と、
前記AR装置が移動するときに、前記作業セル座標系に対する前記AR装置の位置と向きを継続的に追跡する機能と、
1つ又は複数の操作ゾーンを作成し、表示し、変更する機能であって、前記作業セル内の前記ロボット及び他の物理的部材の画像に重ね合わされた前記操作ゾーンの仮想表示を提供する機能を含み、前記操作ゾーンのそれぞれには、操作ゾーンの場所、大きさ及び形状を画定するために使用される制御点が含まれる、機能と、
操作ゾーンと、前記作業セル内の前記機械の部品と、前記他の物理的部材との間の干渉を検査する機能であって、前記機械が、所定の動作プログラムを介して移動している間に干渉を検査する機能を含む、機能と、
機械操作中に後で使用するために、前記操作ゾーンを前記機械制御装置に転送する機能と、を含む機能を提供する、システム。 - 前記AR装置は、ユーザが着用するヘッドセット装置である、請求項1に記載のシステム。
- 前記操作ゾーンの前記制御点は、ユーザの身ぶりを介して操作可能であり、前記ユーザは、前記身ぶりを介して前記制御点を選択して移動させる、請求項2に記載のシステム。
- 前記AR装置は、ユーザによって保持されるスマートフォン、タブレット計算装置又はロボット教示ペンダントである、請求項1に記載のシステム。
- 前記作業セル座標系に対する前記AR装置の位置及び向きを確立する機能には、既知のデサインを有し、前記作業セル座標系内の既知の位置に設置された視覚的マーカの画像を分析することが含まれる、請求項1に記載のシステム。
- 前記操作ゾーンは、前記作業セル内の固定空間を記述する1つ又は複数の安全ゾーンと、前記ロボットの部品周りの空間ゾーンを記述する干渉検査ゾーンと、許容関節位置範囲を記述する関節位置検査ゾーンとを含む、請求項1に記載のシステム。
- 前記安全ゾーンは、前記機械が留まらなければならない空間を画定する許容ゾーンとして、あるいは前記機械が入ることができない空間を画定する禁止ゾーンとして構成可能である、請求項6に記載のシステム。
- 前記干渉検査ゾーンは、前記ARゾーンソフトウェアアプリケーションに既知であり、前記ARゾーンソフトウェアアプリケーションから選択可能な関節中心位置に対して画定可能な形状を有する、請求項6に記載のシステム。
- 前記操作ゾーンは、点、線、平面、多面体体積、角柱体積、球状体積及び任意選択の半球形端部を備えた円筒形体積をはじめとする形状を有する、請求項1に記載のシステム。
- 前記位置追跡センサは、1つ又は複数のジャイロスコープ及び1つ又は複数の加速度計を含み、前記センサは、前記AR装置内の前記プロセッサに信号を提供して、前記AR装置の位置及び向きの変化の継続的な計算を可能にする、請求項1に記載のシステム。
- 前記操作ゾーンの前記仮想表示は、前記AR装置の位置及び向きの変化に基づいて継続的に更新される、請求項10に記載のシステム。
- 干渉を検査する機能は、干渉が検出されたときに前記操作ゾーンの前記仮想表示を変更する機能であって、侵害された操作ゾーンの色を変更する機能及び前記干渉が発生する場所を視覚的に強調表示する機能を含む、請求項1に記載のシステム。
- 前記機械は産業用ロボットである、請求項1に記載のシステム。
- ロボット操作ゾーンの視覚化及び変更のための装置であって、前記装置は、ロボット制御装置と通信する拡張現実(AR)装置を具備し、
前記AR装置は、ユーザが着用するヘッドセットであり、1つ又は複数のカメラ、慣性センサ及び1つのディスプレイを有し、
前記AR装置は、ARゾーンソフトウェアアプリケーションを実行するように構成されたプロセッサ及びメモリをさらに備え、
前記AR装置は、ロボット作業セルに対するその位置及び向きを継続的に追跡し、
前記AR装置は、前記作業セル内のロボット及び他の物理的部材の画像に重ね合わされた1つ又は複数の操作ゾーンの仮想表示を提供し、
前記操作ゾーンのそれぞれが、操作ゾーンの大きさ及び形状を画定するために使用される制御点を含み、
前記AR装置はさらに、前記ロボットが所定の動作プログラムを介して移動している間の干渉の検査をはじめとして、前記操作ゾーンと、前記作業セル内の前記ロボットの部品と、前記他の物理的部材との間の干渉を検査する、装置。 - 機械の操作ゾーンを視覚化して変更する方法であって、前記方法は、
作業セル内で操作可能な機械と、前記機械と通信する機械制御装置とを提供するステップと、
前記機械制御装置と通信する拡張現実(AR)装置を提供するステップであって、前記AR装置は、1つ又は複数のカメラ、位置追跡センサ及び1つのディスプレイを有し、前記AR装置は、ARゾーンソフトウェアアプリケーション(アプリ)を実行するように構成されたプロセッサ及びメモリをさらに備える、ステップと、
前記アプリによって、作業セル座標系に対する前記AR装置の位置と向きを確立するステップと、
前記AR装置が移動するときに、前記作業セル座標系に対する前記AR装置の位置と向きを継続的に追跡するステップと、
前記アプリによる1つ又は複数の操作ゾーンを作成し、表示し、変更するステップであって、前記作業セル内の前記機械及び他の物理的部材の画像に重ね合わされた前記操作ゾーンの仮想表示を提供するステップを含み、前記操作ゾーンのそれぞれは、操作ゾーンの大きさ及び形状を画定するために使用される制御点を含む、ステップと、
前記機械が、所定の動作プログラムを介して移動する間の干渉の検査をはじめとして、前記AR装置のアプリ又は前記機械制御装置のソフトウェアによって、操作ゾーンと、前記作業セル内の前記機械の部品と、前記他の物理的部材との間の干渉を検査するステップと、
機械操作中に後で使用するために、前記操作ゾーンを前記AR装置から前記機械制御装置に転送するステップと、を含む方法。 - 前記AR装置は、ユーザが着用するヘッドセット装置であり、前記操作ゾーンの前記制御点は、ユーザの身ぶりを介して操作可能であり、前記ユーザは、前記身ぶりを介して前記制御点を選択して移動させる、請求項15に記載の方法。
- 前記作業セル座標系に対する前記AR装置の位置及び向きを確立するステップは、既知のデザインを有し、前記作業セル座標系内の既知の位置に設置された視覚的マーカの画像を分析することを含む、請求項15に記載の方法。
- 前記操作ゾーンは、前記作業セル内の固定空間を記述する1つ又は複数の安全ゾーンと、前記機械の部品周りの空間ゾーンを記述する干渉検査ゾーンと、許容可能な関節位置範囲を記述する関節位置検査ゾーンとを含み、
前記安全ゾーンは、前記機械が留まらなければならない空間を画定する許容ゾーンとして、あるいは前記機械が入ることができない空間を画定する禁止ゾーンとして構成可能であり、前記干渉検査ゾーンは、前記ARゾーンソフトウェアアプリケーションに認識され、前記ARゾーンソフトウェアアプリケーションから選択可能な関節中心位置に対して画定可能な形状を有する、請求項15に記載の方法。 - 前記操作ゾーンは、点、線、平面、多面体体積、角柱体積、回転楕円体体積及び任意選択の半球形端部を備えた円筒形体積をはじめとする形状を有する、請求項15に記載の方法。
- 前記位置追跡センサは、1つ又は複数のジャイロスコープ及び1つ又は複数の加速度計を含み、前記センサは、前記AR装置内の前記プロセッサに信号を提供して、前記AR装置の位置及び向きの変化の継続的な計算を可能にし、前記操作ゾーンの前記仮想表示は、前記AR装置の位置及び向きの変化に基づいて継続的に更新される、請求項15に記載の方法。
- 干渉を検査するステップは、干渉が検出されたときに前記操作ゾーンの前記仮想表示を変更することであって、侵害された操作ゾーンの色を変更することと、前記干渉が発生する場所を視覚的に強調表示することとを含む、請求項15に記載の方法。
- 前記機械は産業用ロボットである、請求項15に記載の方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862690125P | 2018-06-26 | 2018-06-26 | |
US62/690,125 | 2018-06-26 | ||
US16/453,811 | 2019-06-26 | ||
US16/453,811 US11850755B2 (en) | 2018-06-26 | 2019-06-26 | Visualization and modification of operational bounding zones using augmented reality |
PCT/US2019/039344 WO2020006144A1 (en) | 2018-06-26 | 2019-06-26 | Visualization and modification of operational bounding zones using augmented reality |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021529391A true JP2021529391A (ja) | 2021-10-28 |
JP7419271B2 JP7419271B2 (ja) | 2024-01-22 |
Family
ID=68981336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020572694A Active JP7419271B2 (ja) | 2018-06-26 | 2019-06-26 | 拡張現実を使用した操作上の境界ゾーンの視覚化と変更 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11850755B2 (ja) |
JP (1) | JP7419271B2 (ja) |
CN (1) | CN112313046A (ja) |
DE (1) | DE112019003204T5 (ja) |
WO (1) | WO2020006144A1 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3946825A1 (en) * | 2019-03-25 | 2022-02-09 | ABB Schweiz AG | Method and control arrangement for determining a relation between a robot coordinate system and a movable apparatus coordinate system |
JP1646443S (ja) * | 2019-03-27 | 2019-11-25 | ||
JP7359633B2 (ja) * | 2019-10-17 | 2023-10-11 | ファナック株式会社 | ロボットシステム |
DE102020201375B3 (de) * | 2020-02-05 | 2021-06-24 | Magna Steyr Fahrzeugtechnik Ag & Co Kg | Verfahren zur Überprüfung eines Sicherheitsbereichs eines Roboters |
DE102020203636A1 (de) | 2020-03-20 | 2021-09-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein | Ermittlung von Sicherheitsbereichen um eine automatisiert arbeitende Maschine |
DE102020129823B4 (de) * | 2020-11-12 | 2022-07-07 | Sick Ag | Visualisieren eines Schutzfeldes |
CN116847958A (zh) * | 2021-02-10 | 2023-10-03 | Abb瑞士股份有限公司 | 用于调整用于处理工件的机器人路径的方法和装置 |
KR20220152790A (ko) * | 2021-05-10 | 2022-11-17 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
WO2023131385A1 (en) | 2022-01-10 | 2023-07-13 | Universal Robots A/S | Augmented reality supported safety plane adjustment |
DE102022202569B3 (de) | 2022-03-15 | 2023-06-29 | Kuka Deutschland Gmbh | Prüfen einer vorgegebenen Bahn eines Roboters |
WO2023174873A1 (de) * | 2022-03-15 | 2023-09-21 | Kuka Deutschland Gmbh | Prüfen einer vorgegebenen bahn eines roboters |
DE102022202564A1 (de) | 2022-03-15 | 2023-09-21 | Kuka Deutschland Gmbh | Prüfen einer Sicherheitskonfiguration eines Roboters |
DE102022202571B3 (de) | 2022-03-15 | 2023-07-06 | Kuka Deutschland Gmbh | Prüfen einer vorgegebenen Bahn eines Roboters |
DE102022202562A1 (de) | 2022-03-15 | 2023-09-21 | Kuka Deutschland Gmbh | Ermitteln wenigstens einer Grenze für ein Betreiben eines Roboters |
DE102022202563B3 (de) | 2022-03-15 | 2023-07-06 | Kuka Deutschland Gmbh | Planen einer Bahn eines Roboters |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ZA952853B (en) * | 1994-04-18 | 1995-12-21 | Caterpillar Inc | Method and apparatus for real time monitoring and co-ordination of multiple geography altering machines on a work site |
DE10305384A1 (de) * | 2003-02-11 | 2004-08-26 | Kuka Roboter Gmbh | Verfahren und Vorrichtung zur Visualisierung rechnergestützter Informationen |
JP3975959B2 (ja) * | 2003-04-23 | 2007-09-12 | トヨタ自動車株式会社 | ロボット動作規制方法とその装置およびそれを備えたロボット |
US8214098B2 (en) | 2008-02-28 | 2012-07-03 | The Boeing Company | System and method for controlling swarm of remote unmanned vehicles through human gestures |
US10475240B2 (en) | 2010-11-19 | 2019-11-12 | Fanuc Robotics America Corporation | System, method, and apparatus to display three-dimensional robotic workcell data |
US9292085B2 (en) * | 2012-06-29 | 2016-03-22 | Microsoft Technology Licensing, Llc | Configuring an interaction zone within an augmented reality environment |
US10888998B2 (en) * | 2013-10-07 | 2021-01-12 | Abb Schweiz Ag | Method and device for verifying one or more safety volumes for a movable mechanical unit |
JP2015174185A (ja) * | 2014-03-14 | 2015-10-05 | 三菱重工業株式会社 | ロボットのシミュレーション装置及び方法、制御装置、及びロボットシステム |
US9283678B2 (en) * | 2014-07-16 | 2016-03-15 | Google Inc. | Virtual safety cages for robotic devices |
JP2016107379A (ja) * | 2014-12-08 | 2016-06-20 | ファナック株式会社 | 拡張現実対応ディスプレイを備えたロボットシステム |
US9643314B2 (en) | 2015-03-04 | 2017-05-09 | The Johns Hopkins University | Robot control, training and collaboration in an immersive virtual reality environment |
EP3323565B1 (de) * | 2016-11-21 | 2021-06-30 | Siemens Aktiengesellschaft | Verfahren und vorrichtung zur inbetriebnahme eines mehrachssystems |
US10445944B2 (en) * | 2017-11-13 | 2019-10-15 | Rockwell Automation Technologies, Inc. | Augmented reality safety automation zone system and method |
-
2019
- 2019-06-26 DE DE112019003204.6T patent/DE112019003204T5/de active Pending
- 2019-06-26 JP JP2020572694A patent/JP7419271B2/ja active Active
- 2019-06-26 CN CN201980042822.7A patent/CN112313046A/zh active Pending
- 2019-06-26 WO PCT/US2019/039344 patent/WO2020006144A1/en active Application Filing
- 2019-06-26 US US16/453,811 patent/US11850755B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP7419271B2 (ja) | 2024-01-22 |
DE112019003204T5 (de) | 2021-03-11 |
US11850755B2 (en) | 2023-12-26 |
CN112313046A (zh) | 2021-02-02 |
US20190389066A1 (en) | 2019-12-26 |
WO2020006144A1 (en) | 2020-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7419271B2 (ja) | 拡張現実を使用した操作上の境界ゾーンの視覚化と変更 | |
EP3055744B1 (en) | A method and a device for verifying one or more safety volumes for a movable mechanical unit | |
US11220002B2 (en) | Robot simulation device | |
US10166673B2 (en) | Portable apparatus for controlling robot and method thereof | |
JP2022500263A (ja) | 拡張現実及びデジタルツインのためのロボット較正 | |
US8406923B2 (en) | Apparatus for determining pickup pose of robot arm with camera | |
JP5390813B2 (ja) | 空間情報表示装置及び支援装置 | |
JP2019519387A (ja) | 拡張現実ロボットシステムの可視化 | |
JP7155664B2 (ja) | シミュレーション装置、制御装置およびロボット | |
KR20180063515A (ko) | 로봇 교시장치 및 이의 교시방법 | |
JP2003270719A (ja) | 投影方法、投影装置、作業支援方法及び作業支援システム | |
CN108177144A (zh) | 机器人系统 | |
JP2021079520A (ja) | 拡張現実を用いたシミュレーション装置及びロボットシステム | |
CN108081267B (zh) | 用于启动多轴系统的方法和装置 | |
JP2015174184A (ja) | 制御装置 | |
US11157226B2 (en) | Control apparatus, head mounted display and robot system | |
Ragni et al. | ARTool Zero: Programming trajectory of touching probes using augmented reality | |
JP6894829B2 (ja) | 構造物撤去シミュレーション方法 | |
KR102403021B1 (ko) | 로봇 교시 장치 및 이를 이용한 로봇 교시 방법 | |
JP7443014B2 (ja) | ロボットアーム試験装置 | |
JP2011215692A (ja) | 3次元3自由度回転パラメータ処理装置 | |
WO2017032407A1 (en) | An industrial robot system and a method for programming an industrial robot | |
JP7444603B2 (ja) | ロボット駆動領域シミュレーション装置、およびロボット駆動領域シミュレーション方法並びにロボット駆動領域シミュレーションプログラム | |
KR20200094941A (ko) | 생산 라인에서의 작업자 위치 인식 방법 및 그 장치 | |
JP6707327B2 (ja) | 動作判別装置及び動作判別方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230829 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230921 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7419271 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |