JP6748019B2 - 外力表示機能を有するロボットシステム、処理装置及び教示操作盤 - Google Patents

外力表示機能を有するロボットシステム、処理装置及び教示操作盤 Download PDF

Info

Publication number
JP6748019B2
JP6748019B2 JP2017077702A JP2017077702A JP6748019B2 JP 6748019 B2 JP6748019 B2 JP 6748019B2 JP 2017077702 A JP2017077702 A JP 2017077702A JP 2017077702 A JP2017077702 A JP 2017077702A JP 6748019 B2 JP6748019 B2 JP 6748019B2
Authority
JP
Japan
Prior art keywords
robot
external force
unit
magnitude
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017077702A
Other languages
English (en)
Other versions
JP2018176331A (ja
Inventor
尚 大島
尚 大島
啓太 前田
啓太 前田
知之 山本
知之 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fanuc Corp
Original Assignee
Fanuc Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fanuc Corp filed Critical Fanuc Corp
Priority to JP2017077702A priority Critical patent/JP6748019B2/ja
Priority to CN201810284128.3A priority patent/CN108687748A/zh
Priority to DE102018002732.6A priority patent/DE102018002732B4/de
Priority to US15/948,104 priority patent/US10810770B2/en
Publication of JP2018176331A publication Critical patent/JP2018176331A/ja
Application granted granted Critical
Publication of JP6748019B2 publication Critical patent/JP6748019B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00Two-dimensional [2D] image generation
    • G06T11/20Drawing from basic elements
    • G06T11/26Drawing of charts or graphs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Program-controlled manipulators
    • B25J9/0009Constructional details, e.g. manipulator supports, bases
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/06Control stands, e.g. consoles, switchboards
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • B25J13/085Force or torque sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Program-controlled manipulators
    • B25J9/16Program controls
    • B25J9/1628Program controls characterised by the control loop
    • B25J9/1633Program controls characterised by the control loop compliant, force, torque control, e.g. combined with position control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Program-controlled manipulators
    • B25J9/16Program controls
    • B25J9/1656Program controls characterised by programming, planning systems for manipulators
    • B25J9/1671Program controls characterised by programming, planning systems for manipulators characterised by simulation, either to verify existing program or to create and verify new program, CAD/CAM oriented, graphic oriented programming systems
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three-dimensional [3D] modelling for computer graphics
    • G06T17/10Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating three-dimensional [3D] models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating three-dimensional [3D] models or images for computer graphics
    • G06T19/20Editing of three-dimensional [3D] images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/40Robotics, robotics mapping to robotics vision
    • G05B2219/40099Graphical user interface for robotics, visual robot user interface
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2016Rotation, translation, scaling
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S901/00Robots
    • Y10S901/46Sensing device

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Geometry (AREA)
  • Architecture (AREA)
  • Manipulator (AREA)
  • Numerical Control (AREA)

Description

本発明は、外力表示機能を有するロボットシステムに関する。本発明はまた、外力表示機能を有する処理装置に関する。本発明はまた、外力表示機能を有する教示操作盤に関する。
ロボットが受ける接触力を検出する力センサを備えたロボットシステムは知られている(例えば特許文献1参照)。特許文献1に記載のロボットシステムでは、多関節ロボットに力センサが取り付けられ、力センサの現在出力から推定内力及び力補正量を減算して、ロボットアームが外部環境に接触する接触力を算出している。このロボットシステムは、接触力が所定値を超えたときにロボットアームを停止させる構成を有する。
また、作業ツールとワークとの間に働く力を検出する力検出部と、力検出部が検出した力を表示する表示部とを備えたロボットシステムは知られている(例えば特許文献2参照)。特許文献2に記載のロボットシステムでは、ロボットアームに力センサが取り付けられ、力センサが検出した作業ツールとワークとの間に働く力を、ワーク表面の力の作用点又はその近傍を原点とする線分又は線分状(例えばベクトル状)の図形として表示部に表示している。
特開2015−171747号公報 特開2017−001122号公報
ロボットに加わる外力を検出して表示するシステム構成において、検出した外力の大きさ及び方向を視覚で認識できるだけでなく直感的に判定できるように画像化して表示することが望まれている。
本開示の一態様は、ロボットと、ロボットに加わる外力を検出する検出部と、検出部が検出した外力の大きさ及び方向を三次元直交座標系の情報に基づき座標値に変換する変換部と、変換部が得た座標値を用いて、外力の大きさ及び方向を立体図形で表す力モデル画像を生成する画像生成部と、画像生成部が生成した力モデル画像を三次元表示する表示部と、を備え、画像生成部が生成する力モデル画像は、外力の大きさ及び方向を球体の球面から中心に向かう円錐状の立体図形で表す、ロボットシステムである。
本開示の他の態様は、ロボットに加わる外力を取得する外力取得部と、外力取得部が取得した外力の大きさ及び方向を三次元直交座標系の情報に基づき座標値に変換する変換部と、変換部が得た座標値を用いて、外力の大きさ及び方向を立体図形で表す力モデル画像を生成する画像生成部と、画像生成部が生成した力モデル画像を三次元表示処理する表示処理部と、を含み、画像生成部が生成する力モデル画像は、外力の大きさ及び方向を球体の球面から中心に向かう円錐状の立体図形で表す、処理装置である。
本開示のさらに他の態様は、ロボットに加わる外力の大きさ及び方向を球体の球面から中心に向かう円錐状の立体図形で表す力モデル画像を、三次元表示する表示部を備える、教示操作盤である。
一態様に係るロボットシステムは、検出部が検出した外力の大きさ及び方向を、変換部が三次元直交座標系の座標値に変換し、画像生成部がこの座標値を用いて、外力の大きさ及び方向を図形で表す力モデル画像を生成し、表示部が力モデル画像を三次元表示するように構成したから、力モデル画像の視認者は、ロボットに加わる外力の大きさ及び方向を視覚で認識できるだけでなく、どの程度の外力がどういう方向へ加わっているかを直感的に判定することができる。
他の態様に係る処理装置、及びさらに他の態様に係る教示操作盤は、上記したロボットシステムの効果と同等の効果を奏する。
一態様に係るロボットシステムの構成を示す機能ブロック図である。 一実施形態によるロボットシステムを模式的に示す図である。 表示画面の一例を示す図である。 表示画面の他の例を示す図である。 表示画面のさらに他の例を示す図である。 表示画面のさらに他の例を示す図である。 他の実施形態によるロボットシステムを示す機能ブロック図である。 他の態様に係る処理装置の構成を示す機能ブロック図である。 一実施形態による処理装置を示す機能ブロック図である。 さらに他の態様に係る教示操作盤の構成を示す機能ブロック図である。 一実施形態による教示操作盤を模式的に示す図である。 他の実施形態による教示操作盤を示す機能ブロック図である。
以下、添付図面を参照して本開示の実施の形態を説明する。全図面に渡り、対応する構成要素には共通の参照符号を付す。
図1は、本開示の一態様に係るロボットシステム10の構成を機能ブロックで示す。ロボットシステム10は、ロボット12と、ロボット12に加わる外力Fを検出する検出部14と、検出部14が検出した外力Fの大きさ及び方向を三次元直交座標系の座標値Cに変換する変換部16と、変換部16が得た座標値Cを用いて、外力Fの大きさ及び方向を図形で表す力モデル画像Ifを生成する画像生成部18と、画像生成部18が生成した力モデル画像Ifを三次元表示する表示部20とを備える。
ロボット12は、多関節型、ガントリ型、パラレルリンク型等の、公知の種々の機構部から適宜選択した機構部(ロボットアームとも称する)を備え、機構部の先端に取り付けたハンドや工具等のエンドエフェクタを用いて、対象物に対しハンドリング、加工等の種々の作業を実行することができる。検出部14は、ロボット12に設置される所望個数の力センサ、加速度センサ等のセンサ類や、ロボット12の所望の動作軸の負荷等を検出する検出回路等から構成できる。検出部14は、ロボット12に加わる外力Fを例えば三次元直交座標系の各軸方向の分力として検出する構成を有することもできる。なお本開示において、ロボット12や検出部14の構成は特に限定されない。
変換部16は、例えば電算機のCPU(中央処理装置)等の演算処理装置の一機能(ハードウェア)として構成できる。或いは変換部16は、例えば電算機のCPU等の演算処理装置を機能させるためのソフトウェアとして構成できる。変換部16は、検出部14が検出した外力Fのデータから外力Fの大きさ及び方向を抽出し、それら大きさ及び方向を、三次元直交座標系の座標値C(fx、fy、fz)に変換する演算を実行する。変換部16が得る座標値Cは、表示部20への表示に適した力モデル画像Ifを生成するために用いられるものであって、その三次元直交座標系としては、表示部20に設定される座標系を採用できる。
画像生成部18は、例えば電算機のCPU(中央処理装置)等の演算処理装置の一機能(ハードウェア)として構成できる。或いは画像生成部18は、例えば電算機のCPU等の演算処理装置を機能させるためのソフトウェアとして構成できる。画像生成部18は、変換部16が得た座標値C(fx、fy、fz)を用いて、画像視認者が外力Fの大きさ及び方向を直感的に判定できるような単一の立体図形を作画し、この立体図形で表現される力モデル画像Ifを生成する。力モデル画像Ifの立体図形の一例として、後述する円錐状の図形を挙げることができる。円錐状の力モデル画像Ifの場合、画像生成部18は、座標値Cの三次元直交座標系の原点を円錐の底面の中心に置き、座標値Cで示される外力Fの大きさと方向とをそれぞれ、円錐の底面中心から頂点に至る距離と方向とで表現した力モデル画像Ifを生成できる。なお、力モデル画像Ifが表す「外力Fの大きさ」とは、外力Fの数値自体ではなく、外力Fの大きさの程度(例えば所定の外力制限値に対する割合)を意味する。
表示部20は、LCD(液晶ディスプレイ)、OLED(有機ELディスプレイ)等の表示装置と、表示装置の画面に画像を表示するためのデータ処理を行う表示処理部とを有することができる。表示部20は、画像生成部18が生成した力モデル画像Ifを表示装置の画面に三次元表示する。なお、本開示において「三次元表示」とは、例えば、奥行きを表現する三次元距離画像を表示すること、画像の回転等によって画像視認者が三次元情報を確認できるように表示すること、等を含む。
図2は、上記したロボットシステム10の基本的構成を有する一実施形態によるロボットシステム22を模式的に示す。図2のロボットシステム22では、垂直多関節型の機構部を有するロボット12に検出部14が内蔵され、ロボット12を制御するロボットコントローラ24に変換部16及び画像生成部18の機能が付与されている。また、ロボットコントローラ24に可搬型の教示操作盤26が接続され、教示操作盤26に、表示装置及び表示処理部を含む表示部20が設けられている。なお、表示部20の表示処理部の機能をロボットコントローラ24に持たせることもできる。或いは、表示部20を、ロボットコントローラ24やその上位の制御装置(図示せず)に設けることもできる。ロボットコントローラ24は、ロボット12が遂行する作業に関わる種々の動作を制御でき、機構部の各軸の動作だけでなく、機構部先端に取り付けたエンドエフェクタ(図示せず)の動作も制御できる。
図3〜図6は、表示部20の表示画面28の例を示す。図示のように、表示部20は、力モデル画像Ifを、ロボット12の現在の姿勢を表すロボットモデル画像Irと共に三次元表示することができる。この構成では、画像生成部18(図1)は、力モデル画像Ifを生成することに加えて、ロボットモデル画像Irを生成することができる。表示部20は、力モデル画像If及びロボットモデル画像Irをカラー表示することができる。
図3〜図6に示す例では、画像生成部18が生成する力モデル画像Ifは、外力Fの大きさ及び方向を、球体Sの球面から中心に向かって先細る円錐状の図形で表すものである。図示の例では、画像生成部18は、奥行きを含む三次元距離画像の球体S及びロボットモデル画像Irを生成し、表示部20は、球体Sをロボットモデル画像Irに重ね合わせて表示している。図示の例では、球体Sはその中心がロボットモデル画像Irの中心にほぼ一致する位置に配置され、あたかも半透明の球体Sにロボット12(図2)が包囲されているように表示されている。
図3〜図6に示す例では、球体Sの球面の一部に円錐状の力モデル画像Ifの円形の底面が配置され、底面中心と球体Sの中心とを結ぶ線上に力モデル画像Ifの頂点が配置される。この表示形態で、力モデル画像Ifの底面中心から頂点に至る距離は、ロボット12に加わる外力F(図1)の大きさを表し、力モデル画像Ifの底面中心から頂点に向かう方向は、ロボット12に加わる外力Fの方向を表している。画像生成部18は、前述したように変換部16(図1)が得た座標値Cを用いて、まず、座標値Cで示される外力Fの方向が球体Sの球面から中心に向かう方向となるように、座標値Cの三次元直交座標系を球体S上に設定する。次いで画像生成部18は、球体Sの球面に配置された座標系原点を中心とする任意径の円を球面上に作画するとともに、この円を底面とし、かつ座標値Cで示される外力Fの大きさを座標系原点から頂点に至る距離で表現する円錐を作画することで、球体Sの一部分としての力モデル画像Ifを生成することができる。
図3〜図6に例示する力モデル画像Ifは、ロボット12の現在の姿勢を表すロボットモデル画像Irと共に表示部20に表示されるから、ロボット12に加わる外力Fの方向によっては、例えば図3に示すように、球体Sの球面上に力モデル画像Ifの底面だけが表示される状態が生じ得る。このような表示状態に対処し得るように、表示部20は、画面上で力モデル画像Ifを三次元方向に回転させる機能を有する。表示部20は、ロボットモデル画像Irを力モデル画像Ifと共に三次元方向に回転させることもできる。
例えば図4に示すように、図3の表示画面36内で上下に延びる鉛直軸線(不可視)を中心に力モデル画像If及びロボットモデル画像Irを回転させることで、円錐頂点を視認可能な力モデル画像Ifを表示できる。図3の画像から図4の画像への回転量を調整することで、表示部20に、外力Fの大きさをより正しく判定可能な力モデル画像Ifを表示できる。また、例えば図5に示すように、図4の表示画面36内で左右に延びる水平軸線(不可視)を中心に力モデル画像If及びロボットモデル画像Irを回転させることで、円錐頂点を別方向から視認可能な力モデル画像Ifを表示できる。図4の画像から図5の画像への回転量を調整することで、表示部20に、外力Fの方向をより正しく判定可能な力モデル画像Ifを表示できる。表示部20は、例えばオペレータの指示に従い、力モデル画像If及びロボットモデル画像Irをあらゆる三次元方向へ所望の角度に渡り回転できるように構成することができる。
上記したように画像生成部18は、外力Fの大きさを力モデル画像Ifの高さ(底面中心から頂点までの距離)によって表現できる。一例として、外力Fが大きくなるに従い、力モデル画像Ifの高さを高くすることができる。球体Sの半径は、画像視認者が力モデル画像Ifの高さの変化を容易に認識できるような寸法に設定できる。例えば球体Sの半径を、予め定めた外力制限値の100%に対応させることができる。また表示部20は、例えばオペレータの指示に従い、球体Sの半径を自在に変更できるように構成することもできる。なお、力モデル画像Ifに用いられる図形は、図示の円錐状の図形に限定されず、外力Fの大きさ及び方向を表現可能な様々な立体図形を採用できる。
画像生成部18は、球体Sの半径を零として、力モデル画像Ifを生成することもできる。この場合、例えば、表示部20に予め設定されたロボットモデル画像Irの三次元直交座標系の原点をロボットモデル画像Irの中心(つまり半径零の球体Sの中心)に配置し、この三次元直交座標系に座標値Cを適用して、ロボットモデル画像Irの中心から径方向外方を指し示すような立体図形を作画することで、外力Fの大きさ及び方向を表す力モデル画像Ifを生成できる。
画像生成部18は、外力Fの大きさに応じて異なる色の力モデル画像Ifを生成することができる。一例として、予め定めた外力制限値に対し、検出部14が検出した外力Fが、所定割合(例えば80%)以下の場合は、安全を示す色(例えば青色)の力モデル画像Ifを生成し、所定割合を超える場合は、危険を示す色(例えば赤色)の力モデル画像Ifを生成することができる。表示部20は、外力Fの大きさに応じた色で生成された力モデル画像Ifを三次元表示することができる。また表示部20は、球体Sを透明化することもできる。表示部20は、例えばオペレータの指示に従い、球体Sの透明度や色を自在に変更できるように構成することもできる。
図6に示すように、画像生成部18は、外力Fの大きさを表すグラフ画像30を生成することができる。図6の例では、グラフ画像30は、予め定めた外力制限値に対する外力Fの割合を表す棒グラフとして生成されている。また図6の例では、外力Fの大きさを表すグラフ画像30に加えて、ロボット12の動作軸に加わる負荷外力の大きさを表すグラフ画像32とモーメントの大きさを表すグラフ画像34とが、同様の棒グラフとして生成されている。表示部20は、力モデル画像Ifを三次元表示するとともに、同じ表示画面28内にグラフ画像30、32、34を表示することができる。
画像生成部18は、外力Fの大きさに応じて異なる色のグラフ画像30を生成することができる。一例として、予め定めた外力制限値に対し、検出部14が検出した外力Fが、所定割合(例えば80%)以下の場合は、安全を示す色(例えば緑色)のグラフ画像30を生成し、所定割合を超える場合は、危険を示す色(例えば赤色)のグラフ画像30を生成することができる。また外力Fの閾値を複数段階に設定して、やや危険を示す色(例えば黄色)のグラフ画像30を生成することもできる。表示部20は、外力Fの大きさに応じた色で生成されたグラフ画像30を表示することができる。表示部20は、例えばオペレータの指示に従い、外力Fの閾値やグラフ画像30の色を自由に設定できるように構成することもできる。グラフ画像32、34についてもグラフ画像30と同様に構成できる。
上記構成を有するロボットシステム10、22は、検出部14が検出した外力Fの大きさ及び方向を、変換部16が三次元直交座標系の座標値Cに変換し、画像生成部18がこの座標値Cを用いて、外力Fの大きさ及び方向を図形で表す力モデル画像Ifを生成し、表示部20が力モデル画像Ifを三次元表示するように構成したから、力モデル画像Ifの視認者は、ロボット12に加わる外力Fの大きさ及び方向を視覚で認識できるだけでなく、どの程度の外力Fがどういう方向へ加わっているかを直感的に判定することができる。
例えばロボットシステム10、22が、人との協働作業を安全に実施できるロボット(いわゆる協働ロボット)12を備える場合、一般に、検出部14が検出した外力Fが所定の外力制限値を超えたときにロボット12を強制停止させることで人の安全を確保するシステム構成が採用される。この構成において、ロボット12を停止後に再稼働させるためには、停止の要因となった外力Fを特定するとともに外力Fの原因を除去する必要がある。外力Fを特定するには、ロボット12が停止したときにロボット12に加わっていた外力Fの方向を知ることが有用である。ロボットシステム10、22によれば、力モデル画像Ifの視認者(例えばロボットシステム10、22のオペレータ)が、どの程度の外力Fがどういう方向へ加わっているかを直感的に判定できるから、ロボット12の停止後に外力Fを特定してその原因を迅速に除去でき、ロボットシステム10、22の復旧や再構築の工数を削減して作業効率低下を回避することができる。
表示部20が力モデル画像Ifをロボットモデル画像Irと共に三次元表示する構成とすることで、視認者は、どの程度の外力Fがロボット12に対してどの方向へ加わっているかを一層確実に判定することができる。また、力モデル画像Ifを球体Sの球面から中心に向かう円錐状の図形を用いて生成する構成とすれば、視認者は、ロボット12に対し外部からの力(つまり外力F)が円錐の先細り方向へロボット12を押すように加わっていることを、容易に直感的に判定できる。さらに、外力Fの大きさに応じて異なる色の力モデル画像Ifを表示することで、直感的判定を一層容易にすることができる。
図7は、前述したロボットシステム10の基本的構成を有する他の実施形態によるロボットシステム40を機能ブロックで示す。ロボットシステム40の構成要素のうち、ロボットシステム10の構成要素に対応するものについては、共通の参照符号を付してその説明を適宜省略する。
ロボットシステム40は、検出部14が検出した外力Fの大きさを予め定めた閾値と比較して、外力Fの大きさが閾値を超えたときに力モデル画像Ifを表示部20に表示させる表示制御部42を備える。表示制御部42は、例えば電算機のCPU(中央処理装置)等の演算処理装置の一機能(ハードウェア)として構成したり、同演算処理装置を機能させるためのソフトウェアとして構成したりすることができる。図2のロボットシステム22では、ロボットコントローラ24又は教示操作盤26に表示制御部42の機能を持たせることができる。表示制御部42は、外力Fの大きさが閾値を超えるまでは力モデル画像Ifを表示部20に表示させず、外力Fの大きさが閾値を超えたときに初めて力モデル画像Ifを表示部20に表示させるとともに、その表示状態を維持するように構成できる。この構成により、力モデル画像Ifの三次元表示に関わる演算負荷を軽減できる。
表示制御部42が用いる外力Fの閾値は、例えば、予め定めた外力制限値の50%〜100%の範囲で設定できる。外力Fの閾値が外力制限値の100%に相当する構成(つまり閾値=制限値)では、例えばロボットシステム40が前述した協働ロボット12を備える場合に、外力Fが所定の外力制限値を超えてロボット12を強制停止させた瞬間の、外力Fの大きさと方向とを表す力モデル画像Ifが表示部20に表示され、その表示状態が維持されるように構成できる。この構成によれば、例えばロボットシステム40のオペレータは、ロボット12が停止した後に表示部20の力モデル画像Ifを視認することで、ロボット12の停止の要因となった外力Fの大きさ及び方向を判定でき、システム復旧作業を迅速に行うことができる。
ロボットシステム40は、検出部14が検出した外力Fの大きさを予め定めた外力制限値と比較して、外力Fの大きさが外力制限値を超えたときにロボット12を停止するロボット制御部44を備える。ロボット制御部44は、例えば電算機のCPU(中央処理装置)等の演算処理装置の一機能(ハードウェア)として構成したり、同演算処理装置を機能させるためのソフトウェアとして構成したりすることができる。図2のロボットシステム22では、ロボットコントローラ24にロボット制御部44の機能を持たせることができる。例えばロボットシステム40が前述した協働ロボット12を備える場合に、ロボット制御部44は、外力Fが所定の外力制限値を超えたときにロボット12を強制停止させる。なおロボットシステム40は、表示制御部42とロボット制御部44との少なくとも一方を備えることができる。
ロボットシステム40において、表示部20は、図6に示すように、ロボット12の停止を視覚的に報知するための停止報知欄46を有することができる。停止報知欄46には、例えば、ロボット12が正常動作している間は、安全を示す色(例えば緑色)と文字(例えばSAFE)とを表示でき、ロボット12が強制停止したときは、危険を示す色(例えば赤色)と文字(例えばSTOP)とを表示できる。
図8は、本開示の他の態様に係る処理装置50の構成を機能ブロックで示す。処理装置50は、前述したロボットシステム10、22における力モデル画像Ifの三次元表示処理の機能を担うことができるものであって、ロボットシステム10、22の構成要素に対応する構成要素については、共通の参照符号を付してその説明を適宜省略する。
処理装置50は、ロボット12に加わる外力Fを取得する外力取得部52と、外力取得部52が取得した外力Fの大きさ及び方向を三次元直交座標系の座標値Cに変換する変換部16と、変換部16が得た座標値Cを用いて、外力Fの大きさ及び方向を図形で表す力モデル画像Ifを生成する画像生成部18と、画像生成部18が生成した力モデル画像Ifを三次元表示処理する表示処理部54とを含む。処理装置50は、例えば電算機のCPU(中央処理装置)等の演算処理装置として構成でき、外力取得部52、変換部16、画像生成部18及び表示処理部54はそれぞれ、処理装置50の一機能(ハードウェア)として構成したり処理装置50を機能させるためのソフトウェアとして構成したりすることができる。また処理装置50の外力取得部52、変換部16、画像生成部18及び表示処理部54の機能を、物理的に異なる複数の処理装置に分担させることもできる。
外力取得部52は、ロボットシステム10、22において検出部14が検出したロボット12に加わる外力Fを、検出部14から取得することができる。変換部16及び画像生成部18は、ロボットシステム10、22における変換部16及び画像生成部18に相当する機能を有する。表示処理部54は、ロボットシステム10、22が備える表示部20に力モデル画像Ifを三次元表示させることができる。
図3〜図6を参照して説明したように、処理装置50において、画像生成部18は、ロボット12の現在の姿勢を表すロボットモデル画像Irを生成することができ、表示処理部54は、力モデル画像Ifをロボットモデル画像Irと共に三次元表示処理することができる。また、画像生成部18が生成する力モデル画像Ifは、外力Fの大きさ及び方向を球体Sの球面から中心に向かう円錐状の図形で表すものとすることができる。また、画像生成部18は、外力Fの大きさに応じて異なる色の力モデル画像Ifを生成することができる。また、画像生成部18は、外力Fの大きさを表すグラフ画像30を生成することができ、表示処理部54は、力モデル画像Ifを三次元表示処理するとともにグラフ画像30を表示処理することができる。
図9は、前述した処理装置50の基本的構成を有する一実施形態による処理装置60を機能ブロックで示す。処理装置60の構成要素のうち、処理装置50の構成要素に対応するものについては、共通の参照符号を付してその説明を適宜省略する。処理装置60は、前述したロボットシステム40における力モデル画像Ifの三次元表示処理の機能を担うことができるものである。
処理装置60は、外力取得部52が取得した外力Fの大きさを予め定めた閾値と比較する比較部62をさらに含む。表示処理部54は、外力Fの大きさが閾値を超えたときに力モデル画像Ifを三次元表示処理する。比較部62は、処理装置60の一機能(ハードウェア)として構成したり処理装置60を機能させるためのソフトウェアとして構成したりすることができる。表示処理部54は、例えば前述したロボットシステム40の表示制御部42の制御により、外力Fの大きさが閾値を超えるまでは力モデル画像Ifを表示部20に表示させず、外力Fの大きさが閾値を超えたときに初めて力モデル画像Ifを表示部20に表示させるとともに、その表示状態を維持するように、三次元表示処理を実行できる。この構成により、力モデル画像Ifの三次元表示に関わる演算負荷を軽減できる。
上記構成を有する処理装置50、60は、前述したロボットシステム10、22、40の効果と同等の効果を奏する。
図10は、本開示のさらに他の態様に係る教示操作盤70の構成を機能ブロックで示す。教示操作盤70は、前述したロボットシステム10、22、40における力モデル画像Ifの三次元表示機能を担うことができるものであって、ロボットシステム10、22、40の構成要素に対応する構成要素については、共通の参照符号を付してその説明を適宜省略する。
教示操作盤70は、ロボット12に加わる外力Fの大きさ及び方向を図形で表す力モデル画像Ifを、三次元表示する表示部20を備える。表示部20は、ロボットシステム10、22、40における表示部20に相当する機能を有する。表示部20は、ロボットシステム10、22、40における画像生成部18が生成した力モデル画像If、或いは前述した処理装置50、60における表示処理部54が処理した力モデル画像Ifを、表示画面に三次元表示することができる。
図11は、上記した教示操作盤70の基本的構成を有する一実施形態による教示操作盤72を模式的に示す。教示操作盤72は、例えばロボットシステム10、22、40のオペレータがロボット12を操作するために用いる可搬型のユーザインタフェース装置であって、操作指示を入力するための種々の入力キー74やロボット12の状態を表示するための表示画面28等を有する。
図12は、前述した教示操作盤70の基本的構成を有する他の実施形態による教示操作盤80を機能ブロックで示す。教示操作盤80の構成要素のうち、教示操作盤70の構成要素に対応するものについては、共通の参照符号を付してその説明を適宜省略する。
教示操作盤80は、力モデル画像Ifを三次元方向に回転させるための入力操作部82を備える。図11の教示操作盤72においては、入力キー74の一部や、表示画面28がタッチ入力機能を有する場合は表示画面28の一部に、入力操作部82の機能を持たせることができる。図3〜図5を参照して説明したように、教示操作盤80において、例えばロボットシステム10、22、40のオペレータが入力操作部82を操作して、力モデル画像Ifを所望の三次元方向へ回転させることで、外力Fの大きさや方向を視覚により判定可能な力モデル画像Ifを表示部20に表示させることができる。
上記構成を有する教示操作盤70、72、80は、前述したロボットシステム10、22、40の効果と同等の効果を奏する。
以上、種々の実施形態の構成を図面に基づいて説明したが、本開示は上述した構成に限定されず、様々な修正を施すことができるものである。
10、22、40 ロボットシステム
12 ロボット
14 検出部
16 変換部
18 画像生成部
20 表示部
26、70、72、80 教示操作盤
42 表示制御部
44 ロボット制御部
50、60 処理装置
52 外力取得部
54 表示処理部
62 比較部
82 入力操作部

Claims (13)

  1. ロボットと、
    前記ロボットに加わる外力を検出する検出部と、
    前記検出部が検出した前記外力の大きさ及び方向を三次元直交座標系の情報に基づき座標値に変換する変換部と、
    前記変換部が得た前記座標値を用いて、前記外力の前記大きさ及び前記方向を立体図形で表す力モデル画像を生成する画像生成部と、
    前記画像生成部が生成した前記力モデル画像を三次元表示する表示部と、
    を備え
    前記画像生成部が生成する前記力モデル画像は、前記外力の前記大きさ及び前記方向を球体の球面から中心に向かう円錐状の前記立体図形で表す、ロボットシステム。
  2. 前記検出部が検出した前記外力の前記大きさを予め定めた閾値と比較して、前記大きさが前記閾値を超えたときに前記力モデル画像を前記表示部に表示させる表示制御部をさらに備える、請求項1に記載のロボットシステム。
  3. 前記画像生成部は、前記ロボットの現在の姿勢を表すロボットモデル画像を生成し、前記表示部は、前記力モデル画像を前記ロボットモデル画像と共に三次元表示する、請求項1又は2に記載のロボットシステム。
  4. 前記画像生成部は、前記外力の前記大きさに応じて異なる色の前記力モデル画像を生成する、請求項1〜のいずれか1項に記載のロボットシステム。
  5. 前記画像生成部は、前記外力の前記大きさを表すグラフ画像を生成し、前記表示部は、前記力モデル画像を三次元表示するとともに前記グラフ画像を表示する、請求項1〜のいずれか1項に記載のロボットシステム。
  6. 前記検出部が検出した前記外力の前記大きさを予め定めた制限値と比較して、前記大きさが前記制限値を超えたときに前記ロボットを停止するロボット制御部をさらに備える、請求項1〜のいずれか1項に記載のロボットシステム。
  7. ロボットに加わる外力を取得する外力取得部と、
    前記外力取得部が取得した前記外力の大きさ及び方向を三次元直交座標系の情報に基づき座標値に変換する変換部と、
    前記変換部が得た前記座標値を用いて、前記外力の前記大きさ及び前記方向を立体図形で表す力モデル画像を生成する画像生成部と、
    前記画像生成部が生成した前記力モデル画像を三次元表示処理する表示処理部と、
    を含み、
    前記画像生成部が生成する前記力モデル画像は、前記外力の前記大きさ及び前記方向を球体の球面から中心に向かう円錐状の前記立体図形で表す、処理装置。
  8. 前記外力取得部が取得した前記外力の前記大きさを予め定めた閾値と比較する比較部をさらに含み、前記表示処理部は、前記大きさが前記閾値を超えたときに前記力モデル画像を三次元表示処理する、請求項に記載の処理装置。
  9. 前記画像生成部は、前記ロボットの現在の姿勢を表すロボットモデル画像を生成し、前記表示処理部は、前記力モデル画像を前記ロボットモデル画像と共に三次元表示処理する、請求項又はに記載の処理装置。
  10. 前記画像生成部は、前記外力の前記大きさに応じて異なる色の前記力モデル画像を生成する、請求項のいずれか1項に記載の処理装置。
  11. 前記画像生成部は、前記外力の前記大きさを表すグラフ画像を生成し、前記表示処理部は、前記力モデル画像を三次元表示処理するとともに前記グラフ画像を表示処理する、請求項10のいずれか1項に記載の処理装置。
  12. ロボットに加わる外力の大きさ及び方向を球体の球面から中心に向かう円錐状の立体図形で表す力モデル画像を、三次元表示する表示部を備える、教示操作盤。
  13. 前記力モデル画像を三次元方向に回転させるための入力操作部をさらに備える、請求項1に記載の教示操作盤。
JP2017077702A 2017-04-10 2017-04-10 外力表示機能を有するロボットシステム、処理装置及び教示操作盤 Active JP6748019B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017077702A JP6748019B2 (ja) 2017-04-10 2017-04-10 外力表示機能を有するロボットシステム、処理装置及び教示操作盤
CN201810284128.3A CN108687748A (zh) 2017-04-10 2018-04-02 具有外力显示功能的机器人系统、处理装置以及示教操作盘
DE102018002732.6A DE102018002732B4 (de) 2017-04-10 2018-04-05 Robotersystem, Verarbeitungsvorrichtung und Programmierhandgerät mit einer Funktion zum Anzeigen einer äußeren Kraft
US15/948,104 US10810770B2 (en) 2017-04-10 2018-04-09 Robot system, processing device and teach pendant, having external force displaying function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017077702A JP6748019B2 (ja) 2017-04-10 2017-04-10 外力表示機能を有するロボットシステム、処理装置及び教示操作盤

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020050075A Division JP6878646B2 (ja) 2020-03-19 2020-03-19 外力表示機能を有するロボットシステム及び処理装置

Publications (2)

Publication Number Publication Date
JP2018176331A JP2018176331A (ja) 2018-11-15
JP6748019B2 true JP6748019B2 (ja) 2020-08-26

Family

ID=63711590

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017077702A Active JP6748019B2 (ja) 2017-04-10 2017-04-10 外力表示機能を有するロボットシステム、処理装置及び教示操作盤

Country Status (4)

Country Link
US (1) US10810770B2 (ja)
JP (1) JP6748019B2 (ja)
CN (1) CN108687748A (ja)
DE (1) DE102018002732B4 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7223493B2 (ja) * 2017-05-19 2023-02-16 川崎重工業株式会社 ロボットシステム
US11762369B2 (en) * 2019-02-06 2023-09-19 Sensory Robotics, Inc. Robotic control via a virtual world simulation
JP7400217B2 (ja) * 2019-05-30 2023-12-19 セイコーエプソン株式会社 ロボットシステムおよび可搬型教示装置
JP7260405B2 (ja) 2019-06-07 2023-04-18 ファナック株式会社 オフラインプログラミング装置、ロボット制御装置および拡張現実システム
CN110980276B (zh) * 2019-12-30 2021-08-17 南京埃克里得视觉技术有限公司 一种三维视觉配合机器人实施铸件自动下料的方法
TWI883313B (zh) 2021-03-31 2025-05-11 日商發那科股份有限公司 算出作用在機器人裝置或工件上之外力的容許值的計算裝置及機器人的控制裝置
JP7754946B2 (ja) * 2021-12-21 2025-10-15 ファナック株式会社 制御装置及び機械システム
DE112022005397T5 (de) * 2022-01-18 2024-08-29 Fanuc Corporation Simulationsvorrichtung
CN115179323B (zh) * 2022-07-12 2024-12-24 南京工程学院 基于远心视觉约束的机器末位姿测量装置及精度提升方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06262563A (ja) * 1993-03-17 1994-09-20 Fanuc Ltd 産業用ロボットの位置教示支援用力表示装置
JP3606595B2 (ja) * 1994-01-28 2005-01-05 三菱電機株式会社 工作機械制御装置
JPH08287291A (ja) * 1995-04-13 1996-11-01 Fanuc Ltd 画像表示方式
JP3841439B2 (ja) 1996-07-24 2006-11-01 ファナック株式会社 ロボットのジョグ送り方法
JP2006000977A (ja) * 2004-06-17 2006-01-05 National Univ Corp Shizuoka Univ ロボット環境間力作用状態呈示装置
EP3530420B1 (en) 2006-03-03 2023-09-06 Universal Robots A/S Joint for a robot
JP5203037B2 (ja) * 2008-05-09 2013-06-05 アズビル株式会社 教示装置及び教示方法
WO2010104157A1 (ja) * 2009-03-11 2010-09-16 本田技研工業株式会社 作業装置及び作業方法
JP5846479B2 (ja) * 2011-08-23 2016-01-20 株式会社Ihi ロボットとその制御方法
DE102012110508B4 (de) 2011-11-04 2022-05-12 Fanuc Robotics America Corp. Roboter Einstellvorrichtung mit 3-D Display
JP5716769B2 (ja) 2013-02-21 2015-05-13 株式会社安川電機 ロボットシミュレータ、ロボット教示装置およびロボット教示方法
JP5941083B2 (ja) 2014-03-12 2016-06-29 ファナック株式会社 外部環境との接触を検知するロボット制御装置
JP6350037B2 (ja) * 2014-06-30 2018-07-04 株式会社安川電機 ロボットシミュレータおよびロボットシミュレータのファイル生成方法
JP6676286B2 (ja) 2015-05-12 2020-04-08 キヤノン株式会社 情報処理方法、および情報処理装置
JP6088583B2 (ja) * 2015-06-08 2017-03-01 ファナック株式会社 ロボットと力の表示機能を備えたロボット制御装置

Also Published As

Publication number Publication date
US20180293768A1 (en) 2018-10-11
DE102018002732A8 (de) 2019-11-28
US10810770B2 (en) 2020-10-20
JP2018176331A (ja) 2018-11-15
CN108687748A (zh) 2018-10-23
DE102018002732A1 (de) 2019-10-10
DE102018002732B4 (de) 2022-04-28

Similar Documents

Publication Publication Date Title
JP6748019B2 (ja) 外力表示機能を有するロボットシステム、処理装置及び教示操作盤
US9857962B2 (en) Robot operation apparatus and robot operation program product
EP3342545A1 (en) Robot system
JP7419271B2 (ja) 拡張現実を使用した操作上の境界ゾーンの視覚化と変更
TWI654055B (zh) Robot operating device and robot operating program
CN104002296B (zh) 机器人模拟器、机器人示教装置以及机器人示教方法
JPWO2014013605A1 (ja) ロボットシミュレータ、ロボット教示装置およびロボット教示方法
JP6110893B2 (ja) 仮想空間位置指定方法、プログラム、プログラムを記録した記録媒体、および、装置
JP6399692B2 (ja) ヘッドマウントディスプレイ、画像表示方法及びプログラム
JP2021079520A (ja) 拡張現実を用いたシミュレーション装置及びロボットシステム
JP2018008347A (ja) ロボットシステムおよび動作領域表示方法
TW202017626A (zh) 資訊處理裝置、中介裝置、模擬系統以及資訊處理方法
US11567571B2 (en) Remote control of a device via a virtual interface
KR20230002252A (ko) 다자유도 로봇의 충돌감지 경계값 튜닝 시스템, 방법 및 그래픽 사용자 인터페이스
CN107257946B (zh) 用于虚拟调试的系统
JP6878646B2 (ja) 外力表示機能を有するロボットシステム及び処理装置
Piyavichayanon et al. Collision-aware ar telemanipulation using depth mesh
CN115756082A (zh) 一种操作手柄控制系统、方法及存储介质
CN116600951A (zh) 用于操作机器人的方法和系统
US20210018986A1 (en) Interactive holographic human-computer interface
JP7187820B2 (ja) 制御装置、ヘッドマウントディスプレイ、及びロボットシステム
JP7704839B2 (ja) 表示部を有するロボットを備えるロボットシステム
JP6803650B2 (ja) ロボット操作装置、ロボット操作プログラム
CN105164594B (zh) 用于提供触觉反馈的呈现的方法,工业机器人系统和便携式操作人员控制设备
CN114474010A (zh) 一种直观的工业机器人仿真系统

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180618

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180731

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180820

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190125

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190319

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190612

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190620

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20190802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200319

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200806

R150 Certificate of patent or registration of utility model

Ref document number: 6748019

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150