JPWO2015129473A1 - ロボットアーム装置、キャリブレーション方法及びプログラム - Google Patents

ロボットアーム装置、キャリブレーション方法及びプログラム Download PDF

Info

Publication number
JPWO2015129473A1
JPWO2015129473A1 JP2016505142A JP2016505142A JPWO2015129473A1 JP WO2015129473 A1 JPWO2015129473 A1 JP WO2015129473A1 JP 2016505142 A JP2016505142 A JP 2016505142A JP 2016505142 A JP2016505142 A JP 2016505142A JP WO2015129473 A1 JPWO2015129473 A1 JP WO2015129473A1
Authority
JP
Japan
Prior art keywords
unit
arm
joint
robot arm
internal model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016505142A
Other languages
English (en)
Other versions
JP6555248B2 (ja
Inventor
康久 神川
康久 神川
栄良 笠井
栄良 笠井
容平 黒田
容平 黒田
亘 小久保
亘 小久保
利充 坪井
利充 坪井
哲治 福島
哲治 福島
康宏 松田
康宏 松田
宮本　敦史
敦史 宮本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2015129473A1 publication Critical patent/JPWO2015129473A1/ja
Application granted granted Critical
Publication of JP6555248B2 publication Critical patent/JP6555248B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1679—Programme controls characterised by the tasks executed
    • B25J9/1692—Calibration of manipulator
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697—Vision controlled systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00681—Aspects not otherwise provided for
    • A61B2017/00725—Calibration or performance testing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101—Computer-aided simulation of surgical operations
    • A61B2034/102—Modelling of surgical devices, implants or prosthesis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39016—Simultaneous calibration of manipulator and camera
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39029—Verify if calibration position is a correct, by comparing with range in rom
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39045—Camera on end effector detects reference pattern
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39057—Hand eye calibration, eye, camera on hand, end effector
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/40—Robotics, robotics mapping to robotics vision
    • G05B2219/40613—Camera, laser scanner on end effector, hand eye manipulator, local

Abstract

【課題】より効率的に、より高精度に内部モデルのキャリブレーションを行うことを可能にする。【解決手段】複数のリンクが関節部によって連結されて構成され、撮像部を接続可能なアーム部、を備え、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルが、前記撮像部が実空間上の基準点に向けられた状態において取得される内部モデル情報を用いて更新される、ロボットアーム装置を提供する。【選択図】図１

Description

本開示は、ロボットアーム装置、キャリブレーション方法及びプログラムに関する。
近年、工業分野においては、より正確により素早く作業を行うために、ロボット装置が広く用いられている。ロボット装置の駆動部分は、複数のリンクが関節部によって互いに連結された多リンク構造体（例えばアーム部）によって構成されているものがあり、複数の当該関節部における回転駆動が制御されることにより、多リンク構造体全体としての駆動が制御される。
ここで、ロボット装置によって対象物に対して作業を行う際には、ロボット装置に備えられる撮像装置によって、当該対象物の位置及び姿勢についての情報を取得し、当該位置及び姿勢についての情報に基づいて多リンク構造体を駆動させることが行われている。例えば、特許文献１には、把持機構と撮像手段とが先端に設けられたアーム部を備えるロボット装置において、コンベア上を搬送される対象物を把持する作業を行わせる技術が開示されている。具体的には、特許文献１に記載の技術では、把持機構が対象物を把持している状態での第１の手先位置と、当該把持機構が対象物をリリースし所定の位置まで移動した状態での第２の手先位置と、当該第２の手先位置において撮像手段によって撮影された画像から抽出される対象物の特徴的な部位の座標と、を事前に記憶しておく。そして、作業時には、運搬中の対象物の当該特徴的な部位の座標が、事前に記憶された座標に一致するように、第２の手先位置から第１の手先位置まで把持機構を移動させ、対象物を把持する。
特開２００２−１８７５４号公報
ここで、多リンク構造体を有するロボット装置の制御系は、当該多リンク構造体の状態を示す内部モデルを有しており、当該内部モデルに基づいて多リンク構造体の駆動が制御される。内部モデルでは、多リンク構造体の幾何学的パラメータ及び力学的パラメータが、ロボット装置内部の座標系に基づいて表現されている。例えば、ロボット装置における機械的な寸法誤差等に起因して、ロボット装置の内部モデルにおける座標系と、実空間における座標系との間にずれが生じていると、内部モデルにおける多リンク構造体の姿勢や動作と、実空間における多リンク構造体の姿勢や動作との間にずれが生じ、所望の駆動制御が行われない可能性がある。従って、ロボット装置に作業を行わせる前には、内部モデルにおける座標系と実空間における座標系とのずれを補正する、内部モデルのキャリブレーションが行われる。
特許文献１に記載の技術は、撮像手段によって撮影された画像情報に基づいて、把持機構の位置のいわばオフセットを行うことにより、煩雑なロボット装置のキャリブレーション作業を省略することを目的とするものである。しかしながら、特許文献１に記載の技術は、ロボット装置が所定の単純な動作を繰り返し行うことを前提とするものであり、ロボット装置により複雑で自由度の高い動作を行わせようとする場合には適用することができない。このように、特許文献１に記載の技術は必ずしも汎用的なものではなく、より多様な用途に用いられることを目的とするロボット装置においては、やはり、ロボット装置のキャリブレーションを行う必要がある。
しかしながら、ロボット装置のキャリブレーションを行ったとしても、例えば撮像装置自身も少なからず機械的な寸法誤差を有しているため、撮像装置の撮影範囲（視野領域）や焦点位置等が、制御しようとしている所望の範囲や位置とずれてしまう可能性がある。また、部品交換時等、ロボット装置の再度のキャリブレーションを行う際には、撮像装置を一旦取り外し、ロボット装置のキャリブレーションが終了した後に再び取り付ける等、多くの工数を要する。従って、現場での実施が困難であるとともに、メンテナンスに長大な時間が掛かり、ロボット装置の作業効率の低下につながる恐れがある。
上記事情に鑑みれば、撮像装置を備えるロボット装置においては、より効率的に、より高精度に内部モデルのキャリブレーションを行う技術が求められていた。そこで、本開示では、より効率的に、より高精度に内部モデルのキャリブレーションを行うことが可能な、新規かつ改良されたロボットアーム装置、キャリブレーション方法及びプログラムを提案する。
本開示によれば、複数のリンクが関節部によって連結されて構成され、撮像部を接続可能なアーム部、を備え、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルが、前記撮像部が実空間上の基準点に向けられた状態において取得される内部モデル情報を用いて更新される、ロボットアーム装置が提供される。
また、本開示によれば、複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得することと、取得した前記内部モデル情報を用いて、前記内部モデルを更新することと、を含む、キャリブレーション方法が提供される。
また、本開示によれば、コンピュータのプロセッサに、複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得する機能と、取得した前記内部モデル情報を用いて、前記内部モデルを更新する機能と、を実現させる、プログラムが提供される。
本開示によれば、内部モデルが、アーム部の幾何情報だけでなく、撮像部の焦点位置情報をも含む。そして、当該撮像部の焦点位置情報まで含めた内部モデルのキャリブレーションが行われる。従って、撮像部１４０が内包し得る幾何的な誤差まで含めて内部モデルをキャリブレーションすることができるため、撮像部の焦点位置をより高精度に制御することが可能となる。また、アーム部と撮像部とを別々にキャリブレーションする必要がないため、より効率的にキャリブレーションを行うことが可能となる。
以上説明したように本開示によれば、より効率的に、より高精度に内部モデルのキャリブレーションを行うことが可能となる。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係るロボットアーム制御システムの機能構成を示す機能ブロック図である。 本実施形態に係るキャリブレーション方法の処理手順の一例を示すフロー図である。 アーム部に取り付けられる冶具を用いたキャリブレーション方法について説明するための説明図である。 アーム部に取り付けられる冶具を用いたキャリブレーション方法について説明するための説明図である。 平板状の冶具を用いたキャリブレーション方法について説明するための説明図である。 本開示の一実施形態に係るロボットアーム装置が医療用に用いられる場合の一適用例について説明するための説明図である。 本開示の一実施形態に係るロボットアーム装置の外観を示す概略図である。 本開示の一実施形態に係る関節部のアクチュエータを、回転軸を通る断面で切断した様子を模式的に示す断面図である。 図８に示すトルクセンサを、駆動軸の軸方向から見た様子を模式的に示す概略図である。 図８に示すアクチュエータに適用されるトルクセンサの他の構成例を示す概略図である。 本開示の一実施形態に係る理想関節制御について説明するための説明図である。 本開示の一実施形態に係るロボットアーム制御システムの一構成例を示す機能ブロック図である。 本開示の一実施形態に係るアーム動作の一具体例であるピボット動作について説明するための説明図である。 図１２に示すピボット動作を実現するための運動目的及び拘束条件について説明するための説明図である。 本開示の一実施形態に係るロボットアーム装置における冗長自由度を有する変形例の外観を示す概略図である。 本開示の一実施形態に係るロボットアーム制御方法の処理手順を示すフロー図である。 本開示の一実施形態に係るロボットアーム装置及び制御装置のハードウェア構成の一構成例を示す機能ブロック図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．ロボットアーム制御システムの構成
２．キャリブレーション方法
３．キャリブレーション方法の具体例
４．適用例
４−１．医療用ロボットアーム装置についての検討
４−２．本開示の一実施形態
４−２−１．ロボットアーム装置の外観
４−２−２．一般化逆動力学について
４−２−２−１．仮想力算出処理
４−２−２−１．実在力算出処理
４−２−３．理想関節制御について
４−２−４．ロボットアーム制御システムの構成
４−２−５．運動目的の具体例
４−３．ロボットアーム制御方法の処理手順
４−４．医療用ロボットアーム装置についてのまとめ
５．ハードウェア構成
６．補足
本明細書では、まず、＜１．ロボットアーム制御システムの構成＞において、本開示の好適な一実施形態に係るロボットアーム制御システムの構成について説明する。＜１．ロボットアーム制御システムの構成＞では、本実施形態に係るロボットアーム制御システムの中でも、ロボットアーム装置の駆動制御に関する部分ではなく、内部モデルのキャリブレーションに関する機能について主に説明を行う。更に、＜２．キャリブレーション方法＞及び＜３．キャリブレーション方法の具体例＞では、内部モデルのキャリブレーション方法の詳細や、具体的な手順等について説明する。
その後、＜４．適用例＞において、本実施形態に係るキャリブレーション方法が適用され得るロボットアーム装置の一例として、全身協調制御と呼ばれる制御方式によってその駆動が制御される医療用ロボットアーム装置について説明する。＜４．適用例＞では、主に、ロボットアーム装置の制御に関する事項について説明を行う。
なお、＜４．適用例＞も含めて、以下の説明では、本開示の好適な一実施形態として、主に医療用に用いられるロボットアーム装置を例に挙げて説明を行う。ただし、本実施形態はかかる例に限定されず、例えば工業用等、他の分野に対しても適用可能である。
＜１．ロボットアーム制御システムの構成＞
まず、図１を参照して、本開示の一実施形態に係るロボットアーム制御システムの構成について説明する。図１は、本開示の一実施形態に係るロボットアーム制御システムの機能構成を示す機能ブロック図である。
図１を参照すると、本実施形態に係るロボットアーム制御システム２は、ロボットアーム装置１０及び制御装置２０を備える。本実施形態においては、制御装置２０によって、ロボットアーム装置１０の駆動を制御するための各種の演算が行われ、当該演算結果に基づいてロボットアーム装置１０のアーム部の駆動が制御される。また、ロボットアーム装置１０のアーム部には後述する撮像部１４０が設けられており、例えば、撮像部１４０によって撮影された画像が表示装置（図示せず。）の表示画面に表示される。例えば、ロボットアーム装置１０が手術等の医療行為に用いられる場合であれば、撮像部１４０によって患者の術部が撮影され、操作者（術者）は、撮影された画像が表示されている表示装置の表示画面を観察しながら、各種の処置を行うことができる。
ここで、本実施形態に係るロボットアーム制御システム２は、その特徴的な構成の一つとして、ロボットアーム装置１０の駆動を制御する際に用いられる内部モデルのキャリブレーションを行う機能を有する。従って、以下の説明では、図１を参照して、ロボットアーム装置１０及び制御装置２０の構成の中でも、主に内部モデルのキャリブレーションに関する機能について詳細に説明することとする。そのため、図１では、ロボットアーム装置１０の駆動制御についての各種の演算等を行う機能についてはその図示を省略し、専らキャリブレーションを行うための各種の機能について図示している。実際には、本実施形態に係るロボットアーム装置１０及び制御装置２０は、例えば図１１を参照して後述するような、ロボットアーム装置１０の駆動制御に係る各種の構成を有し得る。ロボットアーム装置１０の駆動制御に関する各種の機能については、下記＜４．適用例＞で改めて詳細に説明する。なお、本実施形態に係る内部モデルのキャリブレーション方法が適用され得るロボットアーム装置１０の制御方式は任意であってよく、下記＜４．適用例＞で説明する方式に限定されない。本実施形態に係るキャリブレーション方法は、一般的に内部モデルの概念を用いて駆動が制御されるロボット装置であれば、あらゆるロボット装置に対して適用することが可能である。
ロボットアーム装置１０は、複数のリンクが複数の関節部によって連結されて構成される多リンク構造体であるアーム部を有し、当該アーム部を可動範囲内で駆動させることにより、当該アーム部の先端に設けられる先端ユニット（本実施形態では撮像部）の位置及び姿勢の制御を行う。
図１を参照すると、ロボットアーム装置１０はアーム部１２０を備える。また、ロボットアーム装置１０は、図示しない制御部（例えば、後述する図１１に示すアーム制御部１１０）を更に備えてもよい。当該制御部は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の各種のプロセッサによって構成され、ロボットアーム装置１０の動作を統合的に制御するとともに、アーム部１２０の駆動を制御する機能を有する。制御装置２０によって算出されたロボットアーム装置１０の駆動を制御するための制御量に基づいて、当該制御部によってアーム部１２０を構成する各関節部の駆動が制御されることにより、アーム部１２０全体の駆動が制御されることとなる。なお、当該制御部は、各関節部にそれぞれ設けられ、各関節部の駆動をそれぞれ制御してもよい。
アーム部１２０は、複数のリンクが複数の関節部によって連結されて構成される多リンク構造体であり、上述した制御部からの制御によりその駆動が制御される。アーム部１２０は、関節部１３０及び撮像部１４０を有する。なお、アーム部１２０が有する複数の関節部１３０の機能及び構成は互いに同様であるため、図１では、それら複数の関節部１３０を代表して１つの関節部１３０の構成を図示している。
関節部１３０は、アーム部１２０においてリンク間を互いに回動可能に連結するとともに、上述した制御部からの制御によりその回転駆動が制御されることによりアーム部１２０を駆動する。関節部１３０は関節状態検出部１３２を有する。
関節状態検出部１３２は、関節部１３０の状態を検出する。ここで、関節部１３０の状態とは、関節部１３０の運動の状態を意味していてよい。例えば、関節部１３０の状態には、関節部１３０の回転角度、回転角速度、回転角加速度、発生トルク等の情報が含まれる。本実施形態においては、関節状態検出部１３２は、例えばエンコーダ及びトルクセンサ等の各種のセンサによって構成されており、関節部１３０の回転角度、並びに、関節部１３０の発生トルク及び外トルクを検出することができる。関節状態検出部１３２は、検出した関節部１３０の状態を制御装置２０に送信する。
なお、図１では図示を省略しているが、関節部１３０は、関節部１３０を駆動させる機能を有する関節駆動部を更に有してもよい。当該関節駆動部は、関節部１３０に設けられるアクチュエータを構成するモータ等の駆動機構である。当該関節駆動部が所定の制御量に従って駆動することにより関節部１３０が回転駆動することとなる。関節駆動部は、上述した制御部によってその駆動が制御される。例えば、当該制御部からの指令に応じた電流量によって、関節駆動部を構成するモータが駆動されることとなる。
撮像部１４０は、アーム部１２０の先端に設けられる先端ユニットの一例であり、撮影対象の画像を取得する。具体的には、撮像部１４０は、カメラや顕微鏡、内視鏡等の各種の撮像装置によって構成される。例えば、撮像部１４０は、デジタルビデオカメラによって構成されており、撮影対象の画像を表す画像信号を取得することができる。撮像部１４０は、取得した画像信号を制御装置２０に送信する。なお、撮像部１４０が取得した画像信号が、ディスプレイ等の表示装置（図示せず。）に送信され、当該画像信号に基づいて、当該表示装置に撮像部１４０によって撮影された撮像画像が表示されてもよい。
なお、ロボットアーム装置１０では、例えば、撮像部１４０はアーム部１２０の先端に設けられる。図１では、撮像部１４０が複数の関節部１３０及び複数のリンクを介して最終段のリンクの先端に設けられる様子を、関節部１３０と撮像部１４０との間にリンクを模式的に図示することにより表現している。ただし、本実施形態はかかる例に限定されず、撮像部１４０はアーム部１２０のいずれかの部位に設けられればよく、その配置位置は必ずしも先端に限定されない。
以上、ロボットアーム装置１０の機能及び構成について説明した。次に、制御装置２０の機能及び構成について説明する。図１を参照すると、制御装置２０は、記憶部２２０及び制御部２３０を有する。
記憶部２２０は、例えば磁気記憶装置や半導体記憶装置等のストレージ装置によって構成され、制御装置２０によって処理される各種の情報を記憶する。本実施形態においては、記憶部２２０は、ロボットアーム装置１０の内部モデルを記憶している。ここで、内部モデルとは、ロボットアーム装置１０の駆動制御に用いられる制御モデルであり、制御対象であるアーム部１２０の位置及び姿勢を表す情報（幾何情報）を含むものである。また、本実施形態では、ロボットアーム装置１０の内部モデルは、アーム部１２０の幾何情報とともに、撮像部１４０の焦点位置についての情報（焦点位置情報）を含んでいる。つまり、本実施形態では、内部モデルのキャリブレーションを行う際に、アーム部１２０の位置及び姿勢だけでなく、撮像部１４０の焦点位置まで含めたキャリブレーションが行われることとなる。
内部モデルでは、アーム部１２０の位置及び姿勢、並びに、撮像部１４０の焦点位置が、当該内部モデルにおける座標系（以下、第１の座標系とも呼称する。）に基づいて表現されており、アーム部１２０及び撮像部１４０の駆動は当該第１の座標系に従って記述されることとなる。従って、第１の座標系と実空間における座標系（以下、第２の座標系とも呼称する。）との間にずれが生じていると、例えばアーム部１２０が所望の位置に移動しなかったり、撮像部１４０の焦点位置が所望の点に位置しなかったりといった不都合が生じる可能性がある。内部モデルのキャリブレーションとは、第１の座標系と第２の座標系とのずれを補正する処理に対応している。
制御部２３０は、例えばＣＰＵ等の各種のプロセッサによって構成され、制御装置２０の動作を統合的に制御するとともに、ロボットアーム装置１０の内部モデルのキャリブレーションのための各種の処理を行う。また、制御装置２０は、関節状態検出部１３２によって検出された関節部１３０の状態に基づいて、ロボットアーム装置１０のアーム部１２０の駆動を制御するための各種の演算を行うことができる。ここでは、制御部２３０の機能の中でも、内部モデルのキャリブレーションに関する機能について詳しく説明する。
制御部２３０は、内部モデル情報取得部２６０及び内部モデル更新部２７０を有する。
内部モデル情報取得部２６０は、アーム部１２０及び撮像部１４０が所定の位置及び姿勢にある状態において、内部モデルを規定するための内部モデル情報を取得する。ここで、内部モデル情報は、内部モデルを規定し得る情報であり、例えばアーム部１２０の幾何情報や、撮像装置の焦点位置情報を含む。また、所定の位置及び姿勢とは、例えば撮像部１４０が実空間上の所定の点である基準点に向けられた状態であってよい。
内部モデル情報取得部２６０は、アーム部１２０及び撮像部１４０の位置及び姿勢が互いに異なる複数の状態において、互いに異なる複数の内部モデル情報を取得することができる。ここで、アーム部１２０及び撮像部１４０の位置及び姿勢が互いに異なる状態とは、例えば、特定の基準点に撮像部１４０が向けられた状態で、アーム部１２０及び撮像部１４０の位置及び姿勢が変化されることにより実現されてもよいし、互いに異なる複数の基準点に対して撮像部１４０が向けられることにより実現されてもよい。後述するが、本実施形態では、内部モデルのキャリブレーションを行う際に、内部モデル情報に基づいて、内部モデルを記述する所定の数式（内部モデル式）が作成される。当該内部モデル式は、第１の座標系と第２の座標系とのずれ量を未知数として含んでおり、アーム部１２０及び撮像部１４０の位置及び姿勢に対応した複数の内部モデル情報が取得されることにより、複数の内部モデル式によって形成される連立方程式が作成される。当該連立方程式を解き、その解を内部モデル式に代入することにより、内部モデルが更新される（キャリブレーションされる）こととなる。
内部モデル情報についてより具体的に説明する。本実施形態では、内部モデル情報として、アーム部１２０の幾何情報、撮像部１４０の焦点位置情報及び撮像部１４０の視野領域の位置ずれ量についての位置ずれ情報が取得される。ここで、撮像部１４０の視野領域の位置ずれ量とは、第１の座標系と第２の座標系との幾何的な位置ずれ量を示す指標であり、撮像部１４０の視野領域の、実空間における対応する領域との３次元的な位置ずれ量のことであってよい。本実施形態では、撮像部１４０が第２の座標系における所定の点である基準点に向けられた状態における内部モデル情報が取得される。撮像部１４０の視野領域は、第１の座標系に従って記述されるアーム部１２０及び撮像部１４０の位置及び姿勢に基づいて決定されるものであるから、例えば、撮像部１４０の視野領域の中心が基準点を向くようにアーム部１２０及び撮像部１４０の位置及び姿勢を調整した際の、撮像部１４０の視野領域の中心と基準点とのずれ量が、第１の座標系と第２の座標系との幾何的な位置ずれ量を示していると言える。
内部モデル情報取得部２６０は、上述したような各種の内部モデル情報を取得可能に構成される。例えば、内部モデル情報取得部２６０は、アーム状態取得部２４１、焦点位置情報取得部２６２及び位置ずれ情報取得部２６３を有する。
アーム状態取得部２４１は、アーム部１２０のアーム状態を取得することにより、アーム部１２０の幾何情報を取得する。ここで、アーム状態とは、アーム部１２０の運動の状態を意味しており、例えば、アーム状態には、アーム部１２０の位置、姿勢、速度、加速度、力等の情報が含まれる。アーム状態取得部２４１は、関節状態検出部１３２によって検出された関節部１３０の状態に基づいて、アーム部１２０のアーム状態を取得することができる。本実施形態では、アーム状態取得部２４１は、撮像部１４０が実空間上の所定の点である基準点に向けられた状態におけるアーム状態を取得し、当該アーム状態に含まれるアーム部１２０の幾何情報を、内部モデル情報として取得することができる。
焦点位置情報取得部２６２は、撮像部１４０の焦点位置情報を取得する。本実施形態では、焦点位置情報取得部２６２は、撮像部１４０が実空間上の所定の点である基準点に向けられた状態における撮像部１４０の焦点位置情報を、内部モデル情報として取得することができる。例えば、撮像部１４０の焦点位置情報は、撮像部１４０の焦点距離に基づいて取得され得る。本実施形態では、撮像部１４０から撮像部１４０の焦点距離についての情報が焦点位置情報取得部２６２に送信されることにより、撮像部１４０の焦点位置情報が取得されてよい。なお、当該焦点距離は、例えば、撮像部１４０の焦点を基準点に合わせた際における、撮像部１４０内の光学系の状態（例えば焦点調整用のレンズの位置等）に基づいて、撮像部１４０によって算出され得る。あるいは、撮像部１４０は、合焦時の光学系の状態についての情報を焦点位置情報取得部２６２に送信し、当該焦点距離の算出は焦点位置情報取得部２６２によって行われてもよい。
位置ずれ情報取得部２６３は、撮像部１４０の視野領域の位置ずれ量についての位置ずれ情報を取得する。本実施形態では、位置ずれ情報取得部２６３は、撮像部１４０が実空間上の所定の点である基準点に向けられた状態における撮像部１４０の視野領域の位置ずれ情報を、内部モデル情報として取得することができる。例えば、撮像部１４０の視野領域の位置ずれ情報は、撮像部１４０によって撮影される撮像画像に基づいて取得され得る。本実施形態では、撮像部１４０から撮像部１４０によって撮影された撮像画像についての情報が位置ずれ情報取得部２６３に送信されることにより、位置ずれ情報が取得されてよい。具体的には、位置ずれ情報取得部２６３は、撮像画像に対して適宜画像解析処理を行うことにより、例えば当該撮像画像の中心（すなわち視野領域の中心）と基準点との３次元的なずれ量を算出し、当該ずれ量を位置ずれ情報として取得することができる。なお、当該画像解析処理は、必ずしも位置ずれ情報取得部２６３によって行われなくてもよく、撮像部１４０によって行われてもよいし、他の任意の構成によって行われてもよい。
上述したように、内部モデル情報取得部２６０は、アーム部１２０及び撮像部１４０の位置及び姿勢が互いに異なる複数の状態において、互いに異なる複数の内部モデル情報を取得することができる。つまり、本実施形態では、アーム状態取得部２４１、焦点位置情報取得部２６２及び位置ずれ情報取得部２６３は、アーム部１２０及び撮像部１４０の位置及び姿勢が互いに異なる複数の状態において、アーム部１２０の幾何情報、撮像部１４０の焦点位置情報及び撮像部１４０の視野領域の位置ずれ情報を、それぞれ取得することができる。内部モデル情報取得部２６０（アーム状態取得部２４１、焦点位置情報取得部２６２及び位置ずれ情報取得部２６３）は、取得した内部モデル情報を、内部モデル更新部２７０に提供する。
内部モデル更新部２７０は、内部モデル情報取得部２６０によって取得された内部モデル情報を用いて内部モデルを更新する。具体的には、内部モデル更新部２７０は、まず、取得された内部モデル情報を、内部モデル式として表現する。上述したように、当該内部モデル式は、内部モデルを記述する式であり、第１の座標系と第２の座標系とのずれ量を未知数として含んだ方程式として表現されている。ここで、例えば、内部モデル情報が取得される際の基準点は、その座標（第２の座標系における座標）が既知の点として設定されており、当該基準点の座標についての情報は例えば記憶部２２０等の内部モデル更新部２７０によってアクセス可能な記憶領域に予め記憶されている。内部モデル更新部２７０は、当該基準点の座標についての情報に基づいて、第１の座標系と第２の座標系とのずれ量を未知数として含む内部モデル式を作成することができる。また、本実施形態では、内部モデル情報取得部２６０によって複数の内部モデル情報が取得され得るため、内部モデル更新部２７０は、複数の内部モデル式によって形成される連立方程式を作成することができる。
ここで、内部モデル式における未知数は、アーム部１２０の駆動軸に応じた数だけ存在し得る。具体的には、アーム部１２０を構成する各関節部１３０について、互いに直交する３方向（例えばｘ軸方向、ｙ軸方向及びｚ軸方向）及びそれらの軸周りの回転方向に対応する６つの未知数が設定され得る。また、アーム部１２０に対する撮像部１４０の姿勢が制御可能に構成されていれば、撮像部１４０の駆動軸である互いに直交する３方向に対応する３つの未知数が設定され得る。更に、各リンクのｘ軸方向、ｙ軸方向及びｚ軸方向へのたわみも未知数として設定されてもよい。具体的な内部モデル式の形や、未知数の数は、対象としている内部モデルに応じて決定され得る。本実施形態では、内部モデル情報取得部２６０は、アーム部１２０の構成に応じて、内部モデル式における未知数を求めるために必要な数（すなわち未知数の数以上）の内部モデル式を作成可能なだけの内部モデル情報を取得する。これにより、内部モデル更新部２７０は、未知数について解くことが可能なだけの数の内部モデル式に作成し、連立方程式を立てることができ、当該未知数を解析的に又は数値計算により近似的に算出することができる。
内部モデル更新部２７０は、算出した未知数（連立方程式から得られた解）を用いて、内部モデルを更新する。具体的には、内部モデル式の未知数に連立方程式から得られた解を代入し、当該内部モデル式によって内部モデルを構築する。連立方程式から得られる解は、内部モデルにおける第１の座標系と実空間における第２の座標系との位置ずれ量を表すものであるため、当該解を用いて内部モデルを更新することにより、内部モデルにおける位置ずれ量を補正すること、すなわちキャリブレーションを行うことが可能となる。
以上、図１を参照して、本開示の一実施形態に係るロボットアーム制御システムの構成について説明した。以上説明したように、本実施形態では、ロボットアーム装置１０の内部モデルとして、撮像部１４０の焦点位置情報まで含んだ内部モデルが用意される。そして、その内部モデルをキャリブレーションする際に、当該焦点位置情報まで含めてキャリブレーションが行われる。従って、ロボットアーム装置単体ではなく、撮像部１４０が内包し得る幾何的な誤差まで含めて、内部モデルをキャリブレーションすることができるため、撮像部の焦点位置をより高精度に制御することが可能となる。また、ロボットアーム装置１０と撮像部１４０とが同一の内部モデルとして表現されており、内部モデルをキャリブレーションする際には、これらが一体的にキャリブレーションされることとなるため、例えばキャリブレーション時に撮像部１４０をロボットアーム装置１０から取り外す等の作業を行う必要がなく、より効率的にキャリブレーションを行うことが可能となる。
なお、上記の実施形態では、駆動部としてアーム部１２０を備えるロボットアーム装置１０を例に挙げて説明を行ったが、本実施形態はかかる例に限定されない。本実施形態は、駆動部に撮像部が設けられる構成を有するロボット装置において、当該駆動部の構成だけでなく、撮像部の焦点位置まで含んだ内部モデルを構築し、撮像部の焦点位置まで含めて当該内部モデルのキャリブレーションを行うものである。従って、本実施形態における内部モデルのキャリブレーションの手法は、撮像部を有し、内部モデルの概念を用いてその駆動が制御されるロボット装置であれば、あらゆるロボット装置に対して適用可能である。
また、本実施形態に係るロボットアーム装置１０は、その用途も例えば医療用に限定されない。本実施形態では、撮像部の焦点位置まで含めて内部モデルのキャリブレーションを行うことにより、駆動制御時に撮像装置の焦点位置を高精度に制御することが可能となる。従って、例えば工業分野において、製品の検品や外観検査等を行うために、当該製品を詳細に観察する作業に用いられるロボットアーム装置等、他の分野において用いられるロボット装置に対しても、本実施形態における内部モデルのキャリブレーションの手法は、好適に適用され得る。
なお、以上説明した、本実施形態に係るロボットアーム制御システム２の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。
また、上述のような本実施形態に係るロボットアーム制御システム２の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
＜２．キャリブレーション方法＞
次に、図２を参照して、本実施形態に係るキャリブレーション方法の処理手順について説明する。図２は、本実施形態に係るキャリブレーション方法の処理手順の一例を示すフロー図である。なお、図２のフロー図に示す各処理は、例えば図１に示すロボットアーム制御システム２の機能構成によって実行され得る。
図２を参照すると、本実施形態に係るキャリブレーション方法では、まず、アーム部１２０が移動され、撮像部１４０が実空間上の所定の点である基準点に向けられる。そして、撮像部１４０の焦点位置が、基準点に合わせられる（ステップＳ１０１）。アーム部を移動させる処理は、例えば所定の表示装置に表示される撮像部１４０によって撮影された画像を参照しながら、操作者の手作業によって行われてもよいし、所定の制御プログラムに従ってアーム部１２０が駆動されることにより行われてもよい。また、例えば、撮像部１４０の焦点位置を基準点に合わせる処理は、撮像部１４０によって撮影された画像を参照しながら操作者の手作業によって行われてもよいし、撮像部１４０がオートフォーカス（ＡＦ）機能を有する場合であれば、当該ＡＦ機能を利用して行われてもよい。
次に、撮像部１４０が基準点に向けられた状態で、アーム部１２０の幾何情報、撮像部１４０の焦点位置情報及び撮像部１４０の視野領域の位置ずれ情報が取得される（ステップＳ１０３）。当該処理は、例えば図１に示す内部モデル情報取得部２６０（アーム状態取得部２４１、焦点位置情報取得部２６２及び位置ずれ情報取得部２６３）によって行われる処理に対応している。
次に、取得された内部モデル情報に基づいて、内部モデルを記述する内部モデル式が作成される（ステップＳ１０５）。当該内部モデル式は、内部モデルにおける第１の座標系と、実空間における第２の座標系とのずれ量を未知数として含み得る。ステップＳ１０１及びステップＳ１０３において、アーム部１２０及び撮像部１４０の位置及び姿勢が互いに異なる複数の状態において、互いに異なる複数の内部モデル情報が取得されている場合には、これら複数の内部モデル情報に基づいて、複数の内部モデル式からなる連立方程式が作成されることとなる。
次に、作成された内部モデル式が、例えば記憶部２２０等の所定の記憶装置に保存される。また、当該記憶装置が参照され、これまでに作成された方程式（内部モデル式）の数が確認される（ステップＳ１０７）。
次に、確認された方程式の数に対して、所定の数の方程式が作成されたかが判定される（ステップＳ１０９）。ここで、所定の数とは、方程式を解くために必要なだけの数（すなわち、方程式に含まれる未知数の数以上の任意の数）であってよい。方程式の数が足りない場合には、ステップＳ１０１に戻り、ステップＳ１０１〜ステップＳ１０７までの処理が繰り返し行われる。これにより、互いに異なる複数のアーム部１２０及び撮像部１４０の位置及び姿勢に対応する複数の内部モデル情報が取得され、これら複数の内部モデル情報に対応する複数の内部モデル式が作成されることとなる。
ステップＳ１０９において、所定の数の方程式が作成されたと判定された場合には、ステップＳ１１１に進み、これらの方程式からなる連立方程式の解が算出される。当該処理は、連立方程式を解く際に用いられる各種の公知のアルゴリズムを用いて、解析的に又は数値解析的に行われてよい。
最後に、得られた解が内部モデル式に代入されることにより、第１の座標系と第２の座標系とのずれ量をなくすように内部モデルが更新され、内部モデルがキャリブレーションされることとなる（ステップＳ１１３）。なお、ステップＳ１０５〜ステップＳ１１３に示す処理は、例えば図１に示す内部モデル更新部２７０によって行われてよい。
以上、図２を参照して、本実施形態に係るキャリブレーション方法の処理手順について説明した。
＜３．キャリブレーション方法の具体例＞
次に、本実施形態に係るキャリブレーション方法の具体例について説明する。上述したように、内部モデル情報を取得する際に撮像部１４０が向けられる基準点は、座標が既知である実空間上の所定の点として設定され得る。当該基準点は、ロボットアーム装置１０との位置関係が明確な点であればどのように設定されてもよい。
内部モデルをキャリブレーションする際には、アーム部１２０及び撮像部１４０の位置及び姿勢を変えながら、複数の内部モデル情報が取得され得る。例えば、ロボットアーム装置１０の周囲の空間上に複数の基準点を設定しておき、撮像部１４０をそれらの点に順次向けながら、各基準点に対して内部モデル情報を取得することも可能である。しかしながら、このような方法では、事前に基準点を設定する際の手間が大きく、内部モデル情報を取得する際のアーム部１２０の操作量も大きいため、作業の負荷が高くなってしまう可能性がある。ここでは、より効率的にキャリブレーションを行う方法の一例として、所定の冶具を用いて当該基準点を設定する方法について説明する。
なお、以下に説明する具体例においては、本実施形態に係るロボットアーム装置１０の駆動制御によって実現される動作の一つである、ピボット動作と呼ばれる動作を利用している。ピボット動作は、アーム部１２０に設けられた撮像部１４０が、３次元空間上の所定の点（以下、ピボット中心点とも呼称する。）を向いた状態で、当該ピボット中心点を頂点とした円錐体面上を移動する動作である。また、ピボット動作では、ピボット中心点と撮像部１４０との距離を固定することにより、撮像部１４０がピボット中心点を中心とした半球上を移動するように動作させることも可能である。更に、ピボット動作では、ピボット中心点を撮像装置の光軸上に固定したまま、ピボット中心点と撮像装置との光軸方向の距離だけを変化させる動作を行うことも可能となる。ピボット動作を用い、ピボット中心点をキャリブレーションの基準点とすることにより、内部モデル情報をより効率的に取得することが可能となる。なお、このようなピボット動作を実現するための具体的なロボットアーム装置の制御方法については、下記＜４．適用例＞で詳しく説明するため、ここでは詳細な説明を省略する。
（３−１．アーム部に取り付けられる冶具を用いたキャリブレーション方法）
図３及び図４を参照して、アーム部に取り付けられる冶具（取り付け冶具）を用いたキャリブレーション方法について説明する。図３及び図４は、アーム部に取り付けられる冶具を用いたキャリブレーション方法について説明するための説明図である。
当該具体例におけるキャリブレーション方法では、図３に示すように、ロボットアーム装置３１０のアーム部３２０の先端に冶具３３１が設けられる。冶具３３１は、所定の方向に突出した形状を有しており、冶具３３１の先端３３２までの長さは、アーム部３２０の先端に設けられる撮像装置３３０の所定の焦点距離における差動距離（ＷＤ：Ｗｏｒｋ Ｄｉｓｔａｎｃｅ）と略一致している。ここでは、一例として、冶具３３１の先端３３２までの長さが、焦点距離が２００（ｍｍ）における撮像装置３３０のＷＤ（焦点距離２００のＷＤ）と一致するように調整されているとする。また、冶具３３１は、その先端３３２の位置が、撮像装置３３０の視野領域の中心３４０と略一致するように、アーム部３２０に取り付けられている。つまり、内部モデルのキャリブレーションが適切に行われた状態で、撮像装置３３０の焦点距離が２００（ｍｍ）に合わせられた場合には、その焦点位置が、冶具３３１の先端３３２と一致することとなる。
ここで、撮像装置３３０と冶具３３１とは、ともにアーム部３２０の先端に取り付けられるが、冶具３３１は、撮像装置３３０に取り付けられるのではなく、あくまでアーム部３２０に取り付けられることが好ましい。冶具３３１が撮像装置３３０に取り付けられると、冶具３３１が取り付けられたこと自体が撮像装置３３０の駆動や光学系に影響を及ぼす可能性があり、正確な内部モデル情報が取得されない恐れがあるからである。ただし、撮像装置３３０の筐体に十分な強度があり、冶具３３１が撮像装置３３０の駆動や光学系に及ぼす影響が十分小さい場合には、冶具３３１は撮像装置３３０に取り付けられてもよい。
ロボットアーム装置３１０は、基台であるベース部３５０と、ベース部３５０から延伸するアーム部３２０を備える。また、アーム部３２０は、複数のリンク３２２が複数の関節部３２１によって連結されて構成される。アーム部３２０、リンク３２２及び関節部３２１は、図１に示すアーム部１２０、リンク及び関節部１３０に対応するものである。図３に示す例では、ロボットアーム装置３１０のアーム部３２０は、６つの関節部３２１を有し、６自由度を有するように構成されている。図３では、各関節部３２１が有する６軸の運動方向（互いに直交する３軸方向及びこれら３軸周りの回転方向）を模式的に矢印で図示している。また、本実施形態では、冶具３３１の先端３３２も、その姿勢を３軸方向に変化させることができる。
冶具３３１を用いたキャリブレーション方法では、まず、アーム部３２０の先端に冶具３３１が取り付けられた状態で、アーム部３２０の幾何情報及び冶具３３１の先端３３２の位置を示す幾何情報を取得する。例えば、冶具３３１の先端３３２を他の冶具を用いて空間上の所定の点に固定した状態（これにより、当該他の冶具を用いてピボット動作が実現されることとなる）で、アーム部３２０の位置及び姿勢を変化させながら、複数組のアーム部３２０の幾何情報及び冶具３３１の先端３３２の位置を示す幾何情報を取得する。これらの情報の取得は、例えば上述した図１に示すアーム状態取得部２４１によって行われてよい。これにより、アーム部３２０の各関節部３２１の６軸分の座標と、冶具３３１の先端３３２の座標が算出され得る。
ここで、上述したように、例えば冶具３３１の先端３３２までの長さは、撮像装置３３０における焦点距離２００（ｍｍ）におけるＷＤに対応するように調整されている。そこで、撮像装置３３０の焦点距離を２００（ｍｍ）に合わせた状態で、撮像装置３３０の焦点位置情報と、視野領域の中心３４０と冶具３３１の先端３３２との位置ずれ情報と、が取得される。当該位置ずれ情報は、例えば、撮像装置３３０によって撮影された撮像画像に対する画像解析から取得することができる。撮像装置３３０の視野領域の中心３４０と冶具３３１の先端３３２との位置ずれ量は、内部モデルにおける撮像装置３３０の焦点距離２００（ｍｍ）での焦点を原点とする座標系（焦点座標（ＷＤ２００））と、実空間における冶具３３１の先端３３２を原点とする座標系との位置ずれ量であると言える。これらの情報の取得は、例えば上述した図１に示す焦点位置情報取得部２６２及び位置ずれ情報取得部２６３によって行われてよい。なお、撮像装置３３０の焦点距離を２００（ｍｍ）に合わせた場合、当該焦点距離に対応するＷＤと、冶具３３１の先端３３２までの長さとの間には微小なずれが存在し得る。ＷＤの微小なずれは撮像装置３３０のＡＦ機能によって補正可能であるため、当該ＡＦ機能を用いて冶具３３１の先端３３２に焦点を合わせた状態で、撮像装置３３０の焦点位置情報と、視野領域の中心３４０と冶具３３１の先端３３２との位置ずれ情報と、が取得されてもよい。
取得したこれらの情報に基づいて、ロボットアーム装置１０は、焦点距離２００（ｍｍ）の状態での内部モデルのキャリブレーションを行うことができる。当該処理は、例えば上述した図１に示す内部モデル更新部２７０によって行われてよい。
ここで、当該キャリブレーションにより、焦点距離２００（ｍｍ）の状態では撮像装置３３０の焦点位置と冶具３３１の先端３３２との位置ずれは補正されることとなるが、撮像装置３３０の焦点距離を変化させた場合に、必ずしも撮像装置３３０の光軸上に冶具３３１の先端３３２が位置するとは限らない。そこで、撮像装置３３０の焦点距離を変化させ、他の焦点距離においても光軸の位置ずれ量の補正を行う。
具体的には、アーム部３２０から冶具３３１を取り外し、冶具３３１の先端３３２が存在していた点（これは、キャリブレーション実行後における焦点距離２００（ｍｍ）の状態での撮像装置３３０の焦点位置（視野領域の中心３４０）でもある。）をピボット動作のピボット中心点として設定する。このとき、実空間上のピボット中心点に対応する点には、その位置を示す目印となる冶具である測定基準子３３４を配置しておく（図４（ａ））。図４（ａ）に示す状態では、キャリブレーションが行われたことにより、ピボット中心点と測定基準子３３４とは一致している。
この状態で、撮像装置３３０にピボット動作を行わせるように、アーム部３２０の駆動を制御し、ピボット中心点を撮像装置３３０の光軸上に固定したまま、ピボット中心点と撮像装置３３０との光軸方向の距離を所定の焦点距離の分だけ変化させる。図４は、一例として、焦点距離が４００（ｍｍ）に対応する位置まで撮像装置３３０を移動させた場合を図示している（図中（ｂ））。理想的には、撮像装置３３０を移動させた後にも、測定基準子３３４が撮像装置３３０の光軸上に位置することが望ましいが、実際には、光軸と測定基準子３３４との間にはずれが生じ得る。また、同じく、理想的には、移動後の撮像装置３３０によって測定基準子３３４に焦点を合わせた際の焦点距離は４００（ｍｍ）であることが望ましいが、実際には、設定値である４００（ｍｍ）と移動後の焦点距離との間にはずれが生じ得る。図４では、これらのずれを、測定基準子３３４に基づく座標系（固定座標）と焦点座標（ＷＤ４００）とのずれ量として模式的に図示している。図４（ｂ）に示す状態で、例えば撮像装置３３０によって撮影された撮像画像を解析することにより、視野領域の中心３４０と測定基準子３３４との位置ずれ量と、撮像装置３３０の焦点距離についての情報と、を取得することができる。ロボットアーム装置１０は、取得した位置ずれ量についての情報と、焦点距離についての情報とを、撮像装置３３０の光軸のずれ量を表すパラメータとして用いることにより、焦点距離４００（ｍｍ）の状態での内部モデルのキャリブレーション（光軸のずれの補正）を行うことができる。
同様の手順により、ピボット動作を用いて撮像装置３３０を光軸方向に移動させながら、他の焦点距離においても内部モデルのキャリブレーションを行うことができる。図４では、一例として、焦点距離が６００（ｍｍ）に対応する位置まで撮像装置３３０を移動させた場合において、同様に、撮像装置３３０の視野領域の中心３４０と測定基準子３３４との位置ずれ量が取得される様子を図示している（図中（ｃ））。そして、同様に、取得した位置ずれ量についての情報を、撮像装置３３０の光軸のずれ量を表すパラメータとして用いることにより、焦点距離６００（ｍｍ）の状態での内部モデルのキャリブレーション（光軸のずれの補正）を行うことができる。
図３及び図４に示す例では、焦点距離が２００（ｍｍ）、４００（ｍｍ）、６００（ｍｍ）のときについてのみ図示しているが、実際には、使用中に撮像装置３３０が取り得る焦点距離に対応する範囲内において撮像装置３３０が適宜移動され、範囲内のいくつかの焦点距離に対して同様の処理が適宜行われてよい。これにより、撮像装置３３０の焦点位置（光軸のずれ）まで含めたロボットアーム装置１０のキャリブレーションが行われることとなる。
以上、図３及び図４を参照して、アーム部に取り付けられる冶具を用いたキャリブレーション方法について説明した。
（３−２．平板状の冶具を用いたキャリブレーション方法）
図５を参照して、平板状の冶具（平板冶具）を用いたキャリブレーション方法について説明する。図５は、平板状の冶具を用いたキャリブレーション方法について説明するための説明図である。
当該具体例におけるキャリブレーション方法では、図５に示すように、ロボットアーム装置のアーム部３６０の先端に設けられた撮像装置３７０によって、平板冶具３８０を撮影することにより、キャリブレーションが行われる。平板冶具３８０の平面内の一点には、測定の基準となる測定基準子３８１が、撮像装置３７０によって視覚的に認識され得る目印として設けられている。平板冶具３８０は、実空間上の所定の位置に固定されており、すなわち、測定基準子３８１は実空間上の基準点として設定され得る。
図５では、簡単のため、ロボットアーム装置の構成のうち、アーム部３６０のみを主に図示している。図５では図示を省略しているが、実際には、基台等の台座の上にアーム部３６０が設置されることによりロボットアーム装置が構成され得る。ロボットアーム装置のアーム部３６０は、複数のリンク３６２が複数の関節部３６１によって連結されて構成される。アーム部３６０、リンク３６２及び関節部３６１は、図１に示すアーム部１２０、リンク及び関節部１３０に対応するものである。
図５を参照して、平板冶具３８０を用いたキャリブレーション方法の詳細について説明する。当該キャリブレーション方法では、まず、撮像装置３７０が平板冶具３８０の測定基準子３８１を向くようにアーム部３６０の位置及び姿勢が調整される。そして、撮像装置３７０の焦点位置を測定基準子３８１に合わせた状態で、測定基準子３８１をピボット中心点として設定し、撮像装置３７０にピボット動作を行わせる。ピボット動作によれば、理想的には、常に撮像装置３７０の光軸上にピボット中心点である測定基準子３８１が位置している（すなわち、視野領域の中心と測定基準子３８１とが一致している）はずであるが、実際には、キャリブレーションが行われていない場合には、内部モデルとして認識されているピボット中心点と、実空間上での測定基準子３８１との間にずれが生じており、撮像装置３７０の視野領域の中心と測定基準子３８１との間にずれが生じ得る。
従って、キャリブレーションを行うために、ピボット動作を行い、アーム部３６０及び撮像装置３７０の位置及び姿勢を変化させながら、内部モデル情報（アーム部３６０の幾何情報、撮像装置３７０の焦点位置情報及び撮像装置３７０の視野領域の位置ずれ情報）を順次取得する。当該内部モデル情報の取得の処理は、例えば上述した図１に示す内部モデル情報取得部２６０によって行われてよい。
ここで、撮像装置３７０の視野領域の位置ずれ情報は、撮像装置３７０によって撮影された撮像画像を解析することにより取得され得る。図５では、一例として、互いに異なる２つの姿勢（第１の姿勢、第２の姿勢）における、撮像装置３７０によって撮影された撮像画像の様子を模式的に図示している。図５に示すように、撮像画像には、平板冶具３８０及び測定基準子３８１が写り込んでいるため、当該撮像画像に基づいて、視野領域３７１の中心３７２と、平板冶具３８０の測定基準子３８１との３次元的な位置ずれ量が測定され得る。
キャリブレーションを行うために必要な数だけの内部モデル情報が取得されるまで（すなわち、所定の数の方程式（内部モデル式）が作成されるまで）、アーム部３６０及び撮像装置３７０の位置及び姿勢を様々に変えながら、内部モデル情報の取得が行われる。そして、取得された内部モデル情報に基づいて、ロボットアーム装置の内部モデルのキャリブレーションが行われる。当該処理は、例えば上述した図１に示す内部モデル更新部２７０によって行われてよい。
以上、図５を参照して、平板状の冶具（平板冶具）を用いたキャリブレーション方法について説明した。
以上説明したように、冶具３３１、３８０を用いるとともに、ピボット動作を用いることにより、例えば空間上に位置する任意の点を基準点としてキャリブレーションを行う場合に比べて、操作者の負担がより少なく、より容易にキャリブレーションを行うことが可能となる。従って、より効率的なキャリブレーション作業が実現され得る。
＜４．適用例＞
本実施形態では、以上説明した手法によってキャリブレーションが行われた内部モデルを用いて、ロボットアーム装置１０の駆動制御が行われ得る。以下では、本実施形態に係るロボットアーム装置１０の駆動を制御するための、ロボットアーム制御システムの構成や、ロボットアーム制御方法の処理手順について説明する。ここで、本実施形態に係るロボットアーム装置１０は、医療用のロボットアーム装置として好適に適用することが可能である。そこで、以下では、医療用ロボットアーム装置を例に挙げて、ロボットアーム装置１０の駆動制御の一実施形態について説明を行う。
（４−１．医療用ロボットアーム装置についての検討）
まず、本開示をより明確なものとするために、本発明者らが以下に説明する実施形態に想到するに至った背景について説明する。
近年、工業分野においては、より正確により素早く作業を行うために、ロボット装置が広く用いられている。ここで、ロボット装置及び各関節部の制御方式としては、位置制御と力制御とが知られている。位置制御では、関節部のアクチュエータに、例えば角度等の指令値が与えられ、当該指令値に追随するように関節部の駆動が制御される。一方、力制御では、ロボット装置全体として作業対象に加えるべき力の目標値が与えられ、当該目標値が示す力を実現するように関節部の駆動（例えば関節部によって発生されるトルク）が制御される。
一般的に、制御上の簡便さやシステムの構成のしやすさから、位置制御によって駆動されるロボット装置が広く用いられている。しかしながら、位置制御は、外力に柔軟に応じることが困難であるため、俗に「硬い制御」と呼ばれることがあり、多様な外界との物理インタラクション（例えば、対人物理インタラクション）を行いながらタスクを遂行するロボット装置には適していない。一方、力制御は、システム構成は複雑化する反面、力オーダーでの「柔らかい制御」が実現できるため、特に対人物理インタラクションを行うロボット装置に適した制御方法であり、よりユーザビリティに優れた制御方法と言える。
例えば、力制御が適用されたロボット装置の一例としては、本願出願人と同一出願人による先行出願である「特開２０１０−１８８４７１号公報」を参照することができる。当該特許文献には、対向する２輪の車輪からなる移動機構と複数の関節部を有する腕部を備えたロボット装置において、当該車輪及び当該関節部の駆動を全体として協調させて制御する（全身協調制御を行う）ロボット装置が開示されている。
一方、近年、医療分野においては、各種の施術（例えば、手術や検査）を行う際に、アーム部の先端に様々な医療用のユニット（先端ユニット）が設けられたバランス型アーム（支持アームとも呼称する。）を用いる試みが行われている。例えば、バランス型アームのアーム部の先端に顕微鏡や内視鏡、カメラ等の撮像機能を有する様々な撮像装置を設け、施術者（ユーザ）が当該撮像装置によって撮影された術部の画像を観察しながら各種の施術を行う方法が提案されている。
しかしながら、バランス型アームは、アーム部を移動させた際の力の均衡を取るためのカウンターバランス用ウェイト（カウンターウェイト又はバランサーとも呼称する。）を備える必要があるため、装置が大型化する傾向がある。施術時の作業空間の確保の観点からは、施術に用いられる装置にはより一層の小型化が求められており、一般的に提案されているバランス型アームではこのような要請に応えることが困難であった。また、バランス型アームにおいては、アーム部の駆動の一部のみ、例えば先端ユニットを平面上（２次元上）で移動させるための２軸の駆動のみが電動駆動となっており、アーム部及び先端ユニットの移動には施術者自身や周囲の医療スタッフによる手動での位置決めが必要となる。従って、一般的なバランス型アームでは、撮影時の安定性（例えば先端ユニットの位置決めの精度や制振等）の確保や、例えば視点を患者の体の所定の部位に固定した状態で様々な方向から観察する等の観察の自由度の確保が困難であった。
特に、アーム部に取り付けられた撮像装置によって術部を観察する際には、視点を術部に固定したまま、異なる距離や異なる角度から当該術部を観察したいという要望がある。このような観察は、撮像装置にピボット動作を行わせることにより実現され得るが、バランス型アームによってピボット動作を行うためには、上記特許文献１に記載されているような複雑な機械的構成が必要となり、高い操作性を得ることは難しい。
このような状況に鑑みて、バランス型アームに代わる装置として、位置制御によって駆動が制御される医療用のロボットアーム装置も提案されている。しかしながら、施術の更なる効率化及びユーザの負担軽減のために、ロボットアーム装置の駆動制御には、ユーザによってアーム部及び先端ユニットとして設けられる撮像ユニットの位置や姿勢をより直感的に制御することができる、より高い操作性が求められていた。位置制御によって駆動が制御されるロボットアーム装置では、このようなユーザの要望に応えることが困難であった。
そこで、より安定性が高く、より操作性の高いアーム部の駆動制御を行うことが可能なロボットアーム装置を実現することにより、ユーザの負担をより軽減することが望まれていた。また、医療用に用いられるという観点から、ロボットアーム装置には、以下のような性能が求められる。
図６を参照して、本開示の一実施形態に係るロボットアーム装置が医療用に用いられる場合の一適用例について説明するとともに、医療用ロボットアーム装置に求められる諸性能について説明する。図６は、本開示の一実施形態に係るロボットアーム装置が医療用に用いられる場合の一適用例について説明するための説明図である。
図６は、本実施形態に係るロボットアーム装置を用いた施術の様子を模式的に表している。具体的には、図６を参照すると、施術者（ユーザ）５２０である医師が、例えばメス、鑷子、鉗子等の手術用の器具５２１を使用して、施術台５３０上の施術対象（患者）５４０に対して手術を行っている様子が図示されている。なお、以下の説明においては、施術とは、手術や検査等、ユーザ５２０である医師が施術対象５４０である患者に対して行う各種の医療的な処置の総称であるとする。また、図６に示す例では、施術の一例として手術の様子を図示しているが、ロボットアーム装置５１０が用いられる施術は手術に限定されず、他の各種の施術、例えば内視鏡を用いた検査等であってもよい。
施術台５３０の脇には本実施形態に係るロボットアーム装置５１０が設けられる。ロボットアーム装置５１０は、基台であるベース部５１１と、ベース部５１１から延伸するアーム部５１２を備える。アーム部５１２は、複数の関節部５１３ａ、５１３ｂ、５１３ｃと、関節部５１３ａ、５１３ｂによって連結される複数のリンク５１４ａ、５１４ｂと、アーム部５１２の先端に設けられる撮像ユニット５１５を有する。図６に示す例では、簡単のため、アーム部５１２は３つの関節部５１３ａ〜５１３ｃ及び２つのリンク５１４ａ、５１４ｂを有しているが、実際には、アーム部５１２及び撮像ユニット５１５の位置及び姿勢の自由度を考慮して、所望の自由度を実現するように関節部５１３ａ〜５１３ｃ及びリンク５１４ａ、５１４ｂの数や形状、関節部５１３ａ〜５１３ｃの駆動軸の方向等が適宜設定されてよい。
関節部５１３ａ〜５１３ｃは、リンク５１４ａ、５１４ｂを互いに回動可能に連結する機能を有し、関節部５１３ａ〜５１３ｃの回転が駆動されることにより、アーム部５１２の駆動が制御される。ここで、以下の説明においては、ロボットアーム装置５１０の各構成部材の位置とは、駆動制御のために規定している空間における位置（座標）を意味し、各構成部材の姿勢とは、駆動制御のために規定している空間における任意の軸に対する向き（角度）を意味する。また、以下の説明では、アーム部５１２の駆動（又は駆動制御）とは、関節部５１３ａ〜５１３ｃの駆動（又は駆動制御）、及び、関節部５１３ａ〜５１３ｃの駆動（又は駆動制御）を行うことによりアーム部５１２の各構成部材の位置及び姿勢が変化される（変化が制御される）ことをいう。
アーム部５１２の先端には先端ユニットとして各種の医療用器具が接続される。図６に示す例では、先端ユニットの一例としてアーム部５１２の先端に撮像ユニット５１５が設けられている。撮像ユニット５１５は、撮影対象の画像（撮影画像）を取得するユニットであり、例えば動画や静止画を撮影できるカメラ等である。図６に示すように、アーム部５１２の先端に設けられた撮像ユニット５１５が施術対象５４０の施術部位の様子を撮影するように、ロボットアーム装置５１０によってアーム部５１２及び撮像ユニット５１５の姿勢や位置が制御される。なお、アーム部５１２の先端に設けられる先端ユニットは撮像ユニット５１５に限定されず、各種の医療用器具であってよい。当該医療用器具としては、例えば、内視鏡や顕微鏡、上述した撮像ユニット５１５等の撮像機能を有するユニットや、各種の施術器具、検査装置等、施術に際して用いられる各種のユニットが挙げられる。このように、本実施形態に係るロボットアーム装置５１０は、医療用器具を備えた医療用ロボットアーム装置であると言える。また、アーム部５１２の先端に、２つの撮像ユニット（カメラユニット）を有するステレオカメラが設けられ、撮像対象を３次元画像（３Ｄ画像）として表示するように撮影が行われてもよい。なお、先端ユニットとして、施術部位を撮影するための撮像ユニット５１５や当該ステレオカメラ等のカメラユニットが設けられるロボットアーム装置５１０のことをビデオ顕微鏡用ロボットアーム装置とも呼称する。
また、ユーザ５２０と対向する位置には、モニタやディスプレイ等の表示装置５５０が設置される。撮像ユニット５１５によって撮影された施術部位の撮影画像は、表示装置５５０の表示画面に表示される。ユーザ５２０は、表示装置５５０の表示画面に表示される施術部位の撮影画像を見ながら各種の処置を行う。
このように、本実施形態においては、医療分野において、ロボットアーム装置５１０によって施術部位の撮影を行いながら手術を行うことが提案される。ここで、手術を含む各種の施術においては、より施術を効率的に行うことにより、ユーザ５２０及び患者５４０の疲労や負担を軽減することが求められる。このような要求を満たすために、ロボットアーム装置５１０には、例えば以下のような性能が求められると考えられる。
まず、１点目として、ロボットアーム装置５１０には、手術における作業空間を確保することが求められる。ユーザ５２０が施術対象５４０に対して各種の処置を行っている最中に、アーム部５１２や撮像ユニット５１５が施術者の視界を妨げたり、処置を行う手の動きを妨げたりすると、手術の効率の低下につながる。また、図６では図示していないが、実際の手術現場では、ユーザ５２０に器具を渡したり、患者５４０の各種のバイタルサインを確認したりといった、様々なサポート作業を行う複数の他の医師や看護師等がユーザ５２０及び患者５４０の周囲にいることが一般的であり、また、当該サポート作業を行うための他の装置等が存在するため、手術環境は煩雑である。従って、ロボットアーム装置５１０は、より小型であることが望ましい。
次いで、２点目として、ロボットアーム装置５１０には、撮像ユニット５１５を移動させる際の高い操作性が求められる。例えば、手術を行う部位や手術の内容によっては、ユーザ５２０には、施術部位に対して処置を行っている最中に、同じ施術部位を様々な位置、角度から観察したいという要求がある。施術部位を観察する角度を変えるには、撮像ユニット５１５の施術部位に対する角度を変更する必要があるが、その際、撮像ユニット５１５の撮影方向は施術部位に固定されたまま（すなわち、同一の部位を撮影したまま）、撮影する角度だけが変化することがより望ましい。従って、例えば、撮像ユニット５１５の撮影方向が施術部位に固定された状態で、撮像ユニット５１５が施術部位を頂点とした円錐の面内を移動する、当該円錐の軸を旋回軸とした旋回動作（ピボット動作）のような、より自由度の高い操作性がロボットアーム装置５１０に求められていた。なお、撮像ユニット５１５の撮影方向が所定の施術部位に固定されることから、ピボット動作はポイントロック動作とも呼ばれる。
また、撮像ユニット５１５の位置及び角度を変化させるためには、例えばユーザ５２０が手動でアーム部５１２を動かすことによって、撮像ユニット５１５を所望の位置及び角度に動かす方法が考えられる。従って、撮像ユニット５１５の移動や上述したピボット動作等が、例えば片手でも容易に行える操作性があることが望ましい。
また、手術時には、例えばユーザ５２０が両手で処置を行いながら、撮像ユニット５１５によって撮影される撮影画像の撮影中心を、処置を行っている部位から別の部位（例えば次の処置を行う部位）に移動させたいという要求も考えられる。従って、撮像ユニット５１５の位置及び姿勢を変化させる際に、上述したような手動によってアーム部５１２の駆動を制御する方法だけではなく、例えばペダル等の入力部からの操作入力によってアーム部５１２の駆動を制御する方法のような、多様なアーム部５１２の駆動方法が求められる。
このように、２点目の性能として、ロボットアーム装置５１０には、例えば上述したピボット動作や手動による容易な移動を実現する、よりユーザ５２０の直感や要望に合った高い操作性が求められる。
最後に、３点目として、ロボットアーム装置５１０には、アーム部５１２の駆動制御における安定性が求められる。アーム部５１２の駆動制御に対する安定性とは、アーム部５１２を駆動した際の先端ユニットの位置及び姿勢の安定性のことであってよい。また、アーム部５１２の駆動制御に対する安定性には、アーム部５１２を駆動した際の先端ユニットのスムーズな移動や振動の抑制（制振）も含まれる。例えば、図６に示す例のように先端ユニットが撮像ユニット５１５である場合に、もしも撮像ユニット５１５の位置や姿勢が安定しないと、表示装置５５０の表示画面に表示される撮影画像が安定せず、ユーザに不快感を与えかねない。特に、ロボットアーム装置５１０が手術に用いられる際には、先端ユニットとして２つの撮像ユニット（カメラユニット）を有するステレオカメラが設けられ、当該ステレオカメラによる撮影画像に基づいて生成される３次元画像（３Ｄ画像）が表示装置５５０に表示される使用方法が想定され得る。このように３Ｄ画像が表示される場合に、当該ステレオカメラの位置や姿勢が不安定であると、ユーザのいわゆる３Ｄ酔いを誘発する可能性がある。また、手術を行う部位や手術の内容によっては、撮像ユニット５１５によって撮影される観察範囲はφ１５ｍｍ程度にまで拡大されることがある。このように撮像ユニット５１５が狭い範囲を拡大して撮影している場合には、撮像ユニット５１５の僅かな振動が撮像画像の大きな揺れやブレとなって表れる。従って、アーム部５１２及び撮像ユニット５１５の駆動制御には、許容範囲１ｍｍ程度の高い位置決め精度が要求される。このように、アーム部５１２の駆動制御においては、高精度の応答性と高い位置決め精度が求められる。
本発明者らは、上記の３つの性能の観点から、一般的な既存のバランス型アームや位置制御によるロボットアーム装置について検討を行った。
まず、１点目の手術の作業空間の確保に関しては、一般的なバランス型アームでは、通常、アーム部を移動させた際の力の均衡を取るためのカウンターバランス用ウェイト（カウンターウェイト又はバランサーとも呼称する。）がベース部の内部等に設けられるため、バランス型アームの装置の大きさを小型化することが難しく、当該性能を満たしているとは言い難い。
また、２点目の高い操作性に関しては、一般的なバランス型アームでは、アーム部の駆動の一部のみ、例えば撮像ユニットを平面上（２次元上）で移動させるための２軸の駆動のみが電動駆動となっており、アーム部及び撮像ユニットの移動には手動による位置決めが必要となるため、高い操作性が実現できるとは言い難い。また、一般的な位置制御によるロボットアーム装置において、アーム部の駆動の制御、すなわち撮像ユニットの位置及び姿勢の制御に用いられる位置制御は、外力に柔軟に応じることが困難であるため、俗に「硬い制御」と呼ばれることがあり、要求されているようなユーザの直感に合った操作性を実現するには適していない。
また、３点目のアーム部の駆動制御における安定性に関しては、一般的に、アーム部の関節部には、摩擦や慣性等のモデル化することが困難な因子が存在する。一般的なバランス型アームや位置制御によるロボットアーム装置においては、関節部の駆動制御においてこれらの因子が外乱となって表れてしまうことにより、理論上適切な制御値（例えば関節部のモータに印加する電流値）を与えた場合であっても所望の駆動（例えば関節部のモータにおける所望の角度の回転）が実現しないことがあり、要求されているようなアーム部の駆動制御における高い安定性を実現することは困難である。
以上説明したように、本発明者らは、医療用に用いられるロボットアーム装置について検討した結果、ロボットアーム装置に関して、上述したような３点の性能に対する要求が存在するとの知見を得た。しかしながら、一般的な既存のバランス型アームや位置制御によるロボットアーム装置では、これらの性能を満たすことは困難であると考えられる。本発明者らは、上述した３点の性能を満たす構成について検討した結果、以下に説明する実施形態に係るロボットアーム装置、ロボットアーム制御システム、ロボットアーム制御方法及びプログラムに想到した。以下では、本発明者らが想到した一実施形態について詳細に説明する。
（４−２．本開示の一実施形態）
以下では、本開示の一実施形態に係るロボットアーム制御システムについて説明する。本実施形態に係るロボットアーム制御システムにおいては、ロボットアーム装置に設けられる複数の関節部の駆動を、一般化逆動力学を用いた全身協調制御により制御する。更に、外乱の影響を補正することにより指令値に対する理想的な応答を実現する理想関節制御を当該関節部の駆動制御に適用する。
以下の本実施形態の説明では、まず、（４−２−１．ロボットアーム装置の外観）で、本実施形態に係るロボットアーム装置の外観を示すとともに、ロボットアーム装置の概略構成について説明する。次いで、（４−２−２．一般化逆動力学について）及び（４−２−３．理想関節制御について）で、本実施形態に係るロボットアーム装置の制御に用いられる一般化逆動力学と理想関節制御の概要について説明する。次いで、（４−２−４．ロボットアーム制御システムの構成）で、本実施形態に係るロボットアーム装置を制御するためのシステムの構成について機能ブロック図を用いて説明する。最後に、（４−２−５．運動目的の具体例）で、本実施形態に係るロボットアーム装置における、一般化逆動力学を用いた全身協調制御の具体例について説明する。
なお、以下の説明では、本開示の一実施形態として、ロボットアーム装置のアーム部の先端ユニットが撮像ユニットであり、図６に示すように手術時に当該撮像ユニットによって施術部位を撮影する場合について説明するが、本実施形態はかかる例に限定されない。本実施形態に係るロボットアーム制御システムは、他の先端ユニットを有するロボットアーム装置が他の用途に用いられる場合であっても適用可能である。
（４−２−１．ロボットアーム装置の外観）
まず、図７を参照して、本開示の一実施形態に係るロボットアーム装置の概略構成について説明する。図７は、本開示の一実施形態に係るロボットアーム装置の外観を示す概略図である。
図７を参照すると、本実施形態に係るロボットアーム装置４００は、ベース部４１０及びアーム部４２０を備える。ベース部４１０はロボットアーム装置４００の基台であり、ベース部４１０からアーム部４２０が延伸される。また、図７には図示しないが、ベース部４１０内には、ロボットアーム装置４００を統合的に制御する制御部が設けられてもよく、アーム部４２０の駆動が当該制御部によって制御されてもよい。当該制御部は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）等の各種の信号処理回路によって構成される。
アーム部４２０は、複数の関節部４２１ａ〜４２１ｆと、関節部４２１ａ〜４２１ｆによって互いに連結される複数のリンク４２２ａ〜４２２ｃと、アーム部４２０の先端に設けられる撮像ユニット４２３を有する。
リンク４２２ａ〜４２２ｃは棒状の部材であり、リンク４２２ａの一端が関節部４２１ａを介してベース部４１０と連結され、リンク４２２ａの他端が関節部４２１ｂを介してリンク４２２ｂの一端と連結され、更に、リンク４２２ｂの他端が関節部４２１ｃ、４２１ｄを介してリンク４２２ｃの一端と連結される。更に、撮像ユニット４２３が、アーム部４２０の先端、すなわち、リンク４２２ｃの他端に、関節部４２１ｅ、４２１ｆを介して連結される。このように、ベース部４１０を支点として、複数のリンク４２２ａ〜４２２ｃの端同士が、関節部４２１ａ〜４２１ｆによって互いに連結されることにより、ベース部４１０から延伸されるアーム形状が構成される。
撮像ユニット４２３は撮影対象の画像を取得するユニットであり、例えば動画、静止画を撮影するカメラ等である。アーム部４２０の駆動が制御されることにより、撮像ユニット４２３の位置及び姿勢が制御される。本実施形態においては、撮像ユニット４２３は、例えば施術部位である患者の体の一部領域を撮影する。ただし、アーム部４２０の先端に設けられる先端ユニットは撮像ユニット４２３に限定されず、アーム部４２０の先端には先端ユニットとして各種の医療用器具が接続されてよい。このように、本実施形態に係るロボットアーム装置４００は、医療用器具を備えた医療用ロボットアーム装置であると言える。
ここで、以下では、図７に示すように座標軸を定義してロボットアーム装置４００の説明を行う。また、座標軸に合わせて、上下方向、前後方向、左右方向を定義する。すなわち、床面に設置されているベース部４１０に対する上下方向をｚ軸方向及び上下方向と定義する。また、ｚ軸と互いに直交する方向であって、ベース部４１０からアーム部４２０が延伸されている方向（すなわち、ベース部４１０に対して撮像ユニット４２３が位置している方向）をｙ軸方向及び前後方向と定義する。更に、ｙ軸及びｚ軸と互いに直交する方向をｘ軸方向及び左右方向と定義する。
関節部４２１ａ〜４２１ｆはリンク４２２ａ〜４２２ｃを互いに回動可能に連結する。関節部４２１ａ〜４２１ｆはアクチュエータを有し、当該アクチュエータの駆動により所定の回転軸に対して回転駆動される回転機構を有する。各関節部４２１ａ〜４２１ｆにおける回転駆動をそれぞれ制御することにより、例えばアーム部４２０を伸ばしたり、縮めたり（折り畳んだり）といった、アーム部４２０の駆動を制御することができる。ここで、関節部４２１ａ〜４２１ｆは、下記（４−２−２．一般化逆動力学について）で後述する全身協調制御及び下記（４−２−３．理想関節制御について）で後述する理想関節制御によってその駆動が制御される。また、上述したように、本実施形態に係る関節部４２１ａ〜４２１ｆは回転機構を有するため、以下の説明において、関節部４２１ａ〜４２１ｆの駆動制御とは、具体的には、関節部４２１ａ〜４２１ｆの回転角度及び／又は発生トルク（関節部４２１ａ〜４２１ｆが発生させるトルク）が制御されることを意味する。
本実施形態に係るロボットアーム装置４００は、６つの関節部４２１ａ〜４２１ｆを有し、アーム部４２０の駆動に関して６自由度が実現されている。具体的には、図７に示すように、関節部４２１ａ、４２１ｄ、４２１ｆは、接続されている各リンク４２２ａ〜４２２ｃの長軸方向及び接続されている撮像ユニット４７３の撮影方向を回転軸方向とするように設けられており、関節部４２１ｂ、４２１ｃ、４２１ｅは、接続されている各リンク４２２ａ〜４２２ｃ及び撮像ユニット４７３の連結角度をｙ−ｚ平面（ｙ軸とｚ軸とで規定される平面）内において変更する方向であるｘ軸方向を回転軸方向とするように設けられている。このように、本実施形態においては、関節部４２１ａ、４２１ｄ、４２１ｆは、いわゆるヨーイングを行う機能を有し、関節部４２１ｂ、４２１ｃ、４２１ｅは、いわゆるピッチングを行う機能を有する。
このようなアーム部４２０の構成を有することにより、本実施形態に係るロボットアーム装置４００ではアーム部４２０の駆動に対して６自由度が実現されるため、アーム部４２０の可動範囲内において撮像ユニット４２３を自由に移動させることができる。図７では、撮像ユニット４２３の移動可能範囲の一例として半球を図示している。半球の中心点が撮像ユニット４２３によって撮影される施術部位の撮影中心であるとすれば、撮像ユニット４２３の撮影中心を半球の中心点に固定した状態で、撮像ユニット４２３を半球の球面上で移動させることにより、施術部位を様々な角度から撮影することができる。
ここで、図８を参照して、図７に示す関節部４２１ａ〜４２１ｆの構成についてより詳細に説明する。なお、ここでは、図８を参照して、関節部４２１ａ〜４２１ｆの構成のうち、関節部４２１ａ〜４２１ｆの回転駆動に主に関係する構成であるアクチュエータの構成について説明する。
図８は、本開示の一実施形態に係る関節部４２１ａ〜４２１ｆのアクチュエータを、回転軸を通る断面で切断した様子を模式的に示す断面図である。なお、図８では、関節部４２１ａ〜４２１ｆの構成のうち、アクチュエータのみを図示しているが、関節部４２１ａ〜４２１ｆは、他の構成を有してもよい。例えば、関節部４２１ａ〜４２１ｆは、図８に図示する構成以外にも、アクチュエータの駆動を制御するための制御部や、リンク４２２ａ〜４２２ｃ及び撮像ユニット４２３を接続、支持するための支持部材等、アーム部４２０の駆動に必要な各種の構成を有する。なお、ここまでの説明及び以下の説明において、アーム部の関節部の駆動とは、関節部におけるアクチュエータの駆動を意味していてもよい。
なお、上述したように、本実施形態においては、関節部４２１ａ〜４２１ｆは、下記（４−２−３．理想関節制御について）で後述する理想関節制御によってその駆動が制御される。従って、図８に示す関節部４２１ａ〜４２１ｆのアクチュエータは、理想関節制御に対応した駆動を行えるように構成されている。具体的には、関節部４２１ａ〜４２１ｆのアクチュエータは、当該関節部４２１ａ〜４２１ｆにおける回転角度及び回転駆動に伴うトルクを調整できるように構成されている。また、関節部４２１ａ〜４２１ｆのアクチュエータは、回転運動に対する粘性抵抗係数を任意に調整できるように構成されており、例えば外部から加えられる力に対して回転しやすい（すなわち、アーム部４２０を手動で移動しやすい）状態や回転し難い（すなわち、アーム部４２０を手動で移動し難い）状態を実現することができる。
図８を参照すると、本実施形態に係る関節部４２１ａ〜４２１ｆのアクチュエータ４３０は、モータ４２４、モータドライバ４２５、減速機４２６、エンコーダ４２７、トルクセンサ４２８及び駆動軸４２９を有する。図８に示すように、エンコーダ４２７、モータ４２４、減速機４２６及びトルクセンサ４２８は、駆動軸４２９に対して直列にこの順で連結される。
モータ４２４は、アクチュエータ４３０における原動機であり、駆動軸４２９をその軸周りに回転させる。例えば、モータ４２４は、ブラシレスＤＣモータ等の電動モータである。本実施形態においては、モータ４２４は電流を供給されることによってその回転駆動が制御される。
モータドライバ４２５は、モータ４２４に電流を供給することによりモータ４２４を回転駆動させるドライバ回路（ドライバＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ））であり、モータ４２４に供給する電流量を調整することにより、モータ４２４の回転数を制御することができる。また、モータドライバ４２５は、モータ４２４に供給する電流量を調整することにより、上述したようなアクチュエータ４３０の回転運動に対する粘性抵抗係数を調整することができる。
減速機４２６は、駆動軸４２９に接続され、モータ４２４によって生じた駆動軸４２９の回転速度を所定の減速比で減速することにより、所定の値を有する回転駆動力（すなわち、トルク）を発生させる。減速機４２６には、バックラッシレス型の高性能減速機が用いられる。例えば、減速機４２６は、ハーモニックドライブ（登録商標）であってもよい。減速機４２６によって生成されたトルクは、減速機４２６の出力軸に接続されたトルクセンサ４２８を介して、後段の出力部材（図示せず。例えばリンク４２２ａ〜４２２ｃや撮像ユニット４２３等の連結部材）に伝達される。
エンコーダ４２７は、駆動軸４２９に接続され、駆動軸４２９の回転数を検出する。エンコーダによって検出された駆動軸４２９の回転数と、減速機４２６の減速比との関係に基づいて、関節部４２１ａ〜４２１ｆの回転角度、回転角速度及び回転角加速度等の情報を得ることができる。
トルクセンサ４２８は、減速機４２６の出力軸に接続され、減速機４２６によって生成されたトルク、すなわち、アクチュエータ４３０によって出力されるトルクを検出する。以下の説明では、アクチュエータ４３０によって出力されるトルクのことを単に発生トルクとも呼称する。
このように、アクチュエータ４３０においては、モータ４２４に供給する電流量を調整することにより、モータ４２４の回転数を調整することがでる。ここで、減速機４２６における減速比は、ロボットアーム装置４００の用途に応じて適宜設定可能であってよい。従って、減速機４２６の減速比に応じて、モータ４２４の回転数を適宜調整することにより、発生トルクを制御することができる。また、アクチュエータ４３０においては、エンコーダ４２７によって検出された駆動軸４２９の回転数に基づいて、関節部４２１ａ〜４２１ｆの回転角度、回転角速度及び回転角加速度等の情報を得ることができ、トルクセンサ４２８によって、関節部４２１ａ〜４２１ｆにおける発生トルクを検出することができる。
また、トルクセンサ４２８は、アクチュエータ４３０による発生トルクだけでなく、外部から加えられる外トルクも検出することができる。従って、トルクセンサ４２８によって検出された外トルクに基づいて、モータドライバ４２５がモータ４２４に供給する電流量を調整することにより、上述したような回転運動に対する粘性抵抗係数を調整することができ、例えば外部から加えられる力に対して回転しやすい状態や回転し難い状態を実現することができる。
ここで、図９Ａ及び図９Ｂを参照して、トルクセンサ４２８の構成について詳細に説明する。図９Ａは、図８に示すトルクセンサ４２８を、駆動軸４２９の軸方向から見た様子を模式的に示す概略図である。
図９Ａを参照すると、トルクセンサ４２８は、外輪部４３１、内輪部４３２、梁部４３３ａ〜４３３ｄ及び歪み検出素子４３４ａ〜４３４ｄを有する。図９Ａに示すように、外輪部４３１及び内輪部４３２は同心円状に配置される。本実施形態では、内輪部４３２が入力側、すなわち、減速機４２６からの出力軸と接続され、外輪部４３１が出力側、すなわち、後段の出力部材（図示せず。）と接続される。
４本の梁部４３３ａ〜４３３ｄは、同心円状に配置された外輪部４３１と内輪部４３２との間に配設され、外輪部４３１と内輪部４３２とを互いに接続する。図９Ａに示すように、梁部４３３ａ〜４３３ｄは、隣り合う梁部４３３ａ〜４３３ｄ同士が互いに９０度の角度となるように、外輪部４３１と内輪部４３２との間に介設される。
梁部４３３ａ〜４３３ｄのうち、互いに向かい合う、すなわち、互いに１８０度の角度で設けられる２本には、歪み検出素子４３４ａ〜４３４ｄが設けられる。歪み検出素子４３４ａ〜４３４ｄによって検出された梁部４３３ａ〜４３３ｄの変形量に基づいて、アクチュエータ４３０の発生トルク及び外トルクを検出することができる。
図９Ａに示す例では、梁部４３３ａ〜４３３ｄのうち、梁部４３３ａに歪み検出素子４３４ａ、４３４ｂが、梁部４３３ｃに歪み検出素子４３４ｃ、４３４ｄが設けられる。また、歪み検出素子４３４ａ、４３４ｂは梁部４３３ａを挟むように設けられ、歪み検出素子４３４ｃ、４３４ｄは梁部４３３ｃを挟むように設けられる。例えば、歪み検出素子４３４ａ〜４３４ｄは歪みゲージであり、梁部４３３ａ、４３３ｃの表面に貼り付けられることにより、梁部４３３ａ、４３３ｃの幾何的な変形量を電気抵抗の変化に基づいて検出する。図９Ａに示すように４ヶ所に歪み検出素子４３４ａ〜４３４ｄが設けられることにより、検出素子４３４ａ〜４３４ｄがいわゆるホイートストンブリッジを構成する。従って、いわゆる４ゲージ法を用いて歪みを検出することができるため、歪みを検出する軸以外の他軸の干渉や駆動軸４２９の偏心、温度ドリフト等の影響を低減することができる。
このように、梁部４３３ａ〜４３３ｄは、歪みを検出するための起歪体の役割を果たす。なお、本実施形態に係る歪み検出素子４３４ａ〜４３４ｄの種類は歪みゲージに限定されず、他の素子が用いられてもよい。例えば、歪み検出素子４３４ａ〜４３４ｄは、磁気特性の変化に基づいて梁部４３３ａ〜４３３ｄの変形量を検出する素子であってもよい。
また、図８及び図９Ａには図示しないが、トルクセンサ４２８による発生トルク及び外トルクの検出精度を向上させるために、以下に示す構成が適用されてもよい。例えば、梁部４３３ａ〜４３３ｄの外輪部４３１と接続する部位を他の部位よりも薄肉化することにより、支持モーメントが解放されるため、検出される変形量の線形性が向上されるとともにラジアル荷重による影響が低減される。また、外輪部４３１及び内輪部４３２をともにベアリングを介してハウジングで支持することにより、入力軸及び出力軸の双方からの他軸力、モーメントの作用を排除することができる。また、外輪部４３１に作用する他軸モーメントを低減するために、図８に示すアクチュエータ４３０の他端、すなわちエンコーダ４２７が配設される部位に両持ち支持用ベアリングが配設されてもよい。
以上、図９Ａを参照して、トルクセンサ４２８の構成について説明した。以上説明したように、図９Ａに示すトルクセンサ４２８の構成により、アクチュエータ４３０の発生トルク及び外トルクの検出において、高精度な検出が可能となる。
ここで、本実施形態においては、トルクセンサ４２８の構成は図９Ａに示す構成に限定されず、他の構成であってもよい。アクチュエータ４３０に適用されるトルクセンサについて、トルクセンサ４２８以外の他の構成の一例を、図９Ｂを参照して説明する。
図９Ｂは、図８に示すアクチュエータ４３０に適用されるトルクセンサの他の構成例を示す概略図である。図９Ｂを参照すると、本変形例に係るトルクセンサ４２８ａは、外輪部４４１、内輪部４４２、梁部４４３ａ〜４４３ｄ及び歪み検出素子４４４ａ〜４４４ｄを有する。なお、図９Ｂでは、図９Ａと同様、トルクセンサ４２８ａを駆動軸４２９の軸方向から見た様子を模式的に示している。
トルクセンサ４２８ａにおいて、外輪部４４１、内輪部４４２、梁部４４３ａ〜４４３ｄ及び歪み検出素子４４４ａ〜４４４ｄの機能及び構成は、図９Ａを参照して説明したトルクセンサ４２８の外輪部４３１、内輪部４３２、梁部４３３ａ〜４３３ｄ及び歪み検出素子４３４ａ〜４３４ｄの機能及び構成とほぼ同様である。本変形例に係るトルクセンサ４２８ａは、梁部４４３ａ〜４４３ｄと外輪部４４１との接続部分の構成が異なる。従って、図９Ｂに示すトルクセンサ４２８ａについては、図９Ａに示すトルクセンサ４２８との相違点である梁部４４３ａ〜４４３ｄと外輪部４４１との接続部位の構成について主に説明を行い、重複する構成については説明を省略する。
図９Ｂを参照すると、トルクセンサ４２８ａの全体図と併せて、梁部４４３ｂと外輪部４４１との接続部位が拡大して図示されている。なお、図９Ｂでは、梁部４４３ａ〜４４３ｄと外輪部４４１との４ヶ所の接続部位のうちの１ヶ所である梁部４４３ｂと外輪部４４１との接続部位のみを拡大して図示しているが、他の３ヶ所である梁部４４３ａ、４４３ｃ、４４３ｄと外輪部４４１との接続部位も同様の構成を有している。
図９Ｂにおける拡大図を参照すると、梁部４４３ｂと外輪部４４１との接続部位においては、外輪部４４１に係合凹部が設けられており、梁部４４３ｂの先端が係合凹部に係合されることにより両者が接続される。また、当該梁部４４３ｂと外輪部４４１との間には、間隙Ｇ１、Ｇ２が設けられる。間隙Ｇ１は梁部４４３ｂが外輪部４４１に向かって延伸する方向における両者の間隙を表しており、間隙Ｇ２は当該方向とは直交する方向における両者の間隙を表している。
このように、トルクセンサ４２８ａにおいては、梁部４４３ａ〜４４３ｄと外輪部４４１とが、所定の間隙Ｇ１、Ｇ２を有して分離して配設される。すなわち、トルクセンサ４２８ａにおいては、外輪部４４１と内輪部４４２とが分離している。従って、内輪部４４２が外輪部４４１に対して拘束されず動きの自由度を有するため、例えばアクチュエータ４３０の駆動に際して振動が生じたとしても、振動による歪み成分を内輪部４４２と外輪部４４１との間の空隙Ｇ１、Ｇ２によって吸収することができる。よって、トルクセンサ４２８ａをアクチュエータ４３０のトルクセンサとして適用することにより、より高精度な発生トルク及び外トルクの検出が実現される。
なお、図８、図９Ａ及び図９Ｂに示すような、理想関節制御に対応するアクチュエータ４３０の構成については、例えば、本願出願人による先行特許出願である特開２００９−２６９１０２号公報や特開２０１１−２０９０９９号公報を参照することができる。
以上、図７、図８、図９Ａ及び図９Ｂを参照して、本実施形態に係るロボットアーム装置４００の概略構成について説明した。次に、本実施形態に係るロボットアーム装置４００におけるアーム部４２０の駆動、すなわち、関節部４２１ａ〜４２１ｆの駆動を制御するための全身協調制御及び理想関節制御について説明する。
（４−２−２．一般化逆動力学について）
次に、本実施形態におけるロボットアーム装置４００の全身協調制御に用いられる一般化逆動力学の概要について説明する。
一般化逆動力学は、複数のリンクが複数の関節部によって連結されて構成される多リンク構造体（例えば本実施形態においては図７に示すアーム部４２０）において、各種の操作空間（Ｏｐｅｒａｔｉｏｎ Ｓｐａｃｅ）における様々な次元に関する運動目的を、各種の拘束条件を考慮しながら、複数の当該関節部に生じさせるトルクに変換する、多リンク構造体の全身協調制御における基本演算である。
操作空間は、ロボット装置の力制御における重要な概念である。操作空間は、多リンク構造体に作用する力と多リンク構造体の加速度との関係を記述するための空間である。多リンク構造体の駆動制御を位置制御ではなく力制御によって行う際に、多リンク構造体と環境との接し方を拘束条件として用いる場合に操作空間という概念が必要となる。操作空間は、例えば、多リンク構造体が属する空間である、関節空間、デカルト空間、運動量空間等である。
運動目的は、多リンク構造体の駆動制御における目標値を表すものであり、例えば、駆動制御によって達成したい多リンク構造体の位置、速度、加速度、力、インピーダンス等の目標値である。
拘束条件は、多リンク構造体の形状や構造、多リンク構造体の周囲の環境及びユーザによる設定等によって定められる、多リンク構造体の位置、速度、加速度、力等に関する拘束条件である。例えば、拘束条件には、発生力、優先度、非駆動関節の有無、垂直反力、摩擦錘、支持多角形等についての情報が含まれる。
一般化動力学においては、数値計算上の安定性と実時間処理可能な演算効率とを両立するため、その演算アルゴリズムは、第１段階である仮想力決定プロセス（仮想力算出処理）と、第２段階である実在力変換プロセス（実在力算出処理）によって構成される。第１段階である仮想力算出処理では、各運動目的の達成に必要な、操作空間に作用する仮想的な力である仮想力を、運動目的の優先度と仮想力の最大値を考慮しながら決定する。第２段階である実在力算出処理では、非駆動関節、垂直反力、摩擦錘、支持多角形等に関する拘束を考慮しながら、上記で得られた仮想力を関節力、外力等の実際の多リンク構造体の構成で実現可能な実在力に変換する。以下、仮想力算出処理及び実在力算出処理について詳しく説明する。なお、以下の仮想力算出処理、実在力算出処理及び後述する理想関節制御の説明においては、理解を簡単にするために、具体例として、図７及び図８に示した本実施形態に係るロボットアーム装置４００のアーム部４２０の構成を例に挙げて説明を行う場合がある。
（４−２−２−１．仮想力算出処理）
多リンク構造体の各関節部におけるある物理量によって構成されるベクトルを一般化変数ｑと呼ぶ（関節値ｑ又は関節空間ｑとも呼称する。）。操作空間ｘは、一般化変数ｑの時間微分値とヤコビアンＪとを用いて、以下の数式（１）で定義される。
Figure 2015129473
本実施形態では、例えば、ｑはアーム部４２０の関節部４２１ａ〜４２１ｆにおける回転角度である。操作空間ｘに関する運動方程式は、下記数式（２）で記述される。
Figure 2015129473
ここで、ｆは操作空間ｘに作用する力を表す。また、Λ−１は操作空間慣性逆行列、ｃは操作空間バイアス加速度と呼ばれるものであり、それぞれ下記数式（３）、（４）で表される。
Figure 2015129473
なお、Ｈは関節空間慣性行列、τは関節値ｑに対応する関節力（例えば関節部４２１ａ〜４２１ｆおける発生トルク）、ｂは重力、コリオリ力、遠心力を表す項である。
一般化逆動力学においては、操作空間ｘに関する位置、速度の運動目的は、操作空間ｘの加速度として表現できることが知られている。このとき、上記数式（１）から、運動目的として与えられた目標値である操作空間加速度を実現するために、操作空間ｘに作用するべき仮想力ｆｖは、下記数式（５）のような一種の線形相補性問題（ＬＣＰ：Ｌｉｎｅａｒ Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｐｒｏｂｌｅｍ）を解くことによって得られる。
Figure 2015129473
ここで、ＬｉとＵｉはそれぞれ、ｆｖの第ｉ成分の負の下限値（−∞を含む）、ｆｖの第ｉ成分の正の上限値（＋∞を含む）とする。上記ＬＣＰは、例えばＩｔｅｒａｔｉｖｅ法、Ｐｉｖｏｔ法、ロバスト加速度制御を応用する方法等を用いて解くことができる。
なお、操作空間慣性逆行列Λ−１、バイアス加速度ｃは、定義式である上記数式（３）、（４）の通り算出すると計算コストが大きい。従って、多リンク構造体の一般化力（関節力τ）から一般化加速度（関節加速度）を得る準動力学計算（ＦＷＤ）を応用することにより、操作空間慣性逆行列Λ−１の算出処理をより高速に算出する方法が提案されている。具体的には、操作空間慣性逆行列Λ−１、バイアス加速度ｃは、順動力学演算ＦＷＤを用いることにより、関節空間ｑ、関節力τ、重力ｇ等の多リンク構造体（例えば、アーム部４２０及び関節部４２１ａ〜４２１ｆ）に作用する力に関する情報から得ることができる。このように、操作空間に関する順動力学演算ＦＷＤを応用することにより、関節部の数Ｎに対してＯ（Ｎ）の計算量で操作空間慣性逆行列Λ−１を算出することができる。
ここで、運動目的の設定例として、絶対値Ｆｉ以下の仮想力ｆｖｉで操作空間加速度の目標値（ｘの２階微分に上付きバーを付して表す）を達成するための条件は、下記数式（６）で表現できる。
Figure 2015129473
また、上述したように、操作空間ｘの位置、速度に関する運動目的は、操作空間加速度の目標値として表すことができ、具体的には下記数式（７）で表現される（操作空間ｘの位置、速度の目標値を、ｘ、ｘの１階微分に上付きバーを付して表す）。
Figure 2015129473
その他、分解操作空間の考え方を用いることにより、他の操作空間の線形和で表される操作空間（運動量、デカルト相対座標、連動関節等）に関する運動目的を設定することもできる。なお、競合する運動目的間には優先度を与える必要がある。優先度毎かつ低優先度から順に上記ＬＣＰを解き、前段のＬＣＰで得られた仮想力を次段のＬＣＰの既知外力として作用させることができる。
（４−２−２−２．実在力算出処理）
一般化逆動力学の第２段階である実在力算出処理では、上記（２−２−１．仮想力決定プロセス）で得られた仮想力ｆｖを、実在の関節力と外力で置換する処理を行う。仮想力による一般化力τｖ＝Ｊｖ Ｔｆｖを関節部に生じる発生トルクτａと外力ｆｅとで実現するための条件は、下記数式（８）で表現される。
Figure 2015129473
ここで、添え字ａは駆動関節部の集合（駆動関節集合）を表し、添え字ｕは非駆動関節部の集合（非駆動関節集合）を表す。すなわち、上記数式（８）の上段は非駆動関節部による空間（非駆動関節空間）の力の釣り合いを表しており、下段は駆動関節部による空間（駆動関節空間）の力の釣合いを表している。Ｊｖｕ、Ｊｖａは、それぞれ、仮想力ｆｖが作用する操作空間に関するヤコビアンの非駆動関節成分、駆動関節成分である。Ｊｅｕ、Ｊｅａは、外力ｆｅが作用する操作空間に関するヤコビアンの非駆動関節成分、駆動関節成分である。Δｆｖは仮想力ｆｖのうち、実在力で実現不能な成分を表す。
上記数式（８）の上段は不定であり、例えば下記数式（９）に示すような２次計画問題（ＱＰ：Ｑｕａｄｒａｔｉｃ Ｐｒｏｇｒａｍｉｎｇ Ｐｒｏｂｌｅｍ）を解くことで、ｆｅ及びΔｆｖを得ることができる。
Figure 2015129473
ここで、εは上記数式（８）の上段の両辺の差であり、数式（８）の等式誤差を表す。ξはｆｅとΔｆｖとの連結ベクトルであり、変数ベクトルを表す。Ｑ１及びＱ２は、最小化の際の重みを表す正定値対称行列である。また、上記数式（９）の不等式拘束は、垂直反力、摩擦錐、外力の最大値、支持多角形等、外力に関する拘束条件を表現するのに用いられる。例えば、矩形の支持多角形に関する不等式拘束は、下記数式（１０）のように表現される。
Figure 2015129473
ここで、ｚは接触面の法線方向を表し、ｘ及びｙはｚに垂直な直交２接線方向を表す。（Ｆｘ，Ｆｙ，Ｆｚ）及び（Ｍｘ，Ｍｙ，Ｍｚ）は、接触点に作用する外力及び外力モーメントである。μｔ及びμｒは、それぞれ並進、回転に関する摩擦係数である。（ｄｘ，ｄｙ）は支持多角形のサイズを表している。
上記数式（９）、（１０）から、最小ノルム又は最小誤差の解ｆｅ、Δｆｖが求められる。上記数式（９）から得られたｆｅ、Δｆｖを上記数式（８）の下段に代入することにより、運動目的を実現するために必要な関節力τａを得ることができる。
基底が固定され、非駆動関節が無い系の場合は、関節力のみで全ての仮想力を置換可能であり、上記数式（８）において、ｆｅ＝０、Δｆｖ＝０とすることができる。この場合、上記数式（８）の下段から、関節力τａについて以下の数式（１１）を得ることができる。
Figure 2015129473
以上、本実施形態に係る一般化逆動力学を用いた全身協調制御について説明した。上記のように、仮想力算出処理及び実在力算出処理を順に行うことにより、所望の運動目的を達成するための関節力τａを得ることができる。すなわち、逆に言えば、算出された関節力τａを関節部４２１ａ〜４２１ｆの運動における理論モデルに反映することにより、関節部４２１ａ〜４２１ｆが、所望の運動目的を達成するように駆動される。
なお、ここまで説明した一般化逆動力学を用いた全身協調制御について、特に、仮想力ｆｖの導出過程や、上記ＬＣＰを解き仮想力ｆｖを求める方法、ＱＰ問題の解法等の詳細については、例えば、本願出願人による先行特許出願である特開２００９−９５９５９号公報や特開２０１０−１８８４７１号公報を参照することができる。
（４−２−３．理想関節制御について）
次に、本実施形態に係る理想関節制御について説明する。各関節部４２１ａ〜４２１ｆの運動は、下記数式（１２）の二次遅れ系の運動方程式によってモデル化される。
Figure 2015129473
ここで、Ｉａは関節部における慣性モーメント（イナーシャ）、τａは関節部４２１ａ〜４２１ｆの発生トルク、τｅは外部から各関節部４２１ａ〜４２１ｆに作用する外トルク、νａは各関節部４２１ａ〜４２１ｆにおける粘性抵抗係数である。上記数式（１２）は、関節部４２１ａ〜４２１ｆにおけるアクチュエータ４３０の運動を表す理論モデルとも言える。
上記（４−２−２．一般化逆動力学について）で説明したように、一般化逆動力学を用いた演算により、運動目的及び拘束条件を用いて、当該運動目的を実現するために各関節部４２１ａ〜４２１ｆに作用させるべき実在力であるτａを算出することができる。従って、理想的には、算出された各τａを上記数式（１２）に適用することにより、上記数式（１２）に示す理論モデルに従った応答が実現する、すなわち、所望の運動目的が達成されるはずである。
しかし、実際には、様々な外乱の影響により、関節部４２１ａ〜４２１ｆの運動と上記数式（１２）に示すような理論モデルとの間には誤差（モデル化誤差）が生じる場合がある。モデル化誤差は、多リンク構造体の重量、重心、慣性テンソル等のマスプロパティに起因するものと、関節部４２１ａ〜４２１ｆ内部における摩擦や慣性等に起因するものとに大別することができる。このうち、前者のマスプロパティに起因するモデル化誤差は、ＣＡＤ（Ｃｏｍｐｕｔｅｒ Ａｉｄｅｄ Ｄｅｓｉｇｎ）データの高精度化や同定手法の適用によって、理論モデル構築時に比較的容易に低減することが可能である。
一方、後者の関節部４２１ａ〜４２１ｆ内部の摩擦や慣性等に起因するモデル化誤差は、例えば関節部４２１ａ〜４２１ｆの減速機４２６における摩擦等、モデル化が困難な現象に起因しており、理論モデル構築時に無視できないモデル化誤差が残留し得る。また、上記数式（１２）におけるイナーシャＩａや粘性抵抗係数νａの値と、実際の関節部４２１ａ〜４２１ｆにおけるこれらの値との間に誤差が生じている可能性がある。これらのモデル化が困難な誤差は、関節部４２１ａ〜４２１ｆの駆動制御において外乱となり得る。従って、このような外乱の影響により、実際には、関節部４２１ａ〜４２１ｆの運動は、上記数式（１２）に示す理論モデル通りには応答しない場合がある。よって、一般化逆動力学によって算出された関節力である実在力τａを適用しても、制御目標である運動目的が達成されない場合が生じる。本実施形態では、各関節部４２１ａ〜４２１ｆにアクティブな制御系を付加することで、上記数式（１２）に示す理論モデルに従った理想応答を行うよう、関節部４２１ａ〜４２１ｆの応答を補正することを考える。具体的には、本実施形態では、関節部４２１ａ〜４２１ｆのトルクセンサ４２８、４２８ａを用いた摩擦補償型のトルク制御を行うに留まらず、要求される発生トルクτａ、外トルクτｅに対して、イナーシャＩａ及び粘性抵抗係数νａに至るまで理論値に従った理想応答を行うことが可能となる。
本実施形態では、このように、ロボットアーム装置４００の関節部４２１ａ〜４２１ｆが上記数式（１２）に示すような理想的な応答を行うように関節部の駆動を制御することを、理想関節制御と呼称する。ここで、以下の説明では、当該理想関節制御によって駆動が制御されるアクチュエータのことを、理想的な応答が行われることから仮想アクチュエータ（ＶＡ：Ｖｉｒｔｕａｌｉｚｅｄ Ａｃｔｕａｔｏｒ）とも呼称する。以下、図１０を参照して、本実施形態に係る理想関節制御について説明する。
図１０は、本開示の一実施形態に係る理想関節制御について説明するための説明図である。なお、図１０では、理想関節制御に係る各種の演算を行う概念上の演算器をブロックで模式的に図示している。
図１０を参照すると、アクチュエータ６１０は、図８に示すアクチュエータ４３０の機構を模式的に表しており、モータ（Ｍｏｔｏｒ）６１１、減速機（Ｒｅｄｕｃｔｉｏｎ Ｇｅａｒ）６１２、エンコーダ（Ｅｎｃｏｄｅｒ）６１３及びトルクセンサ（Ｔｏｒｑｕｅ Ｓｅｎｓｏｒ）６１４は、それぞれ、図８に示すモータ４２４、減速機４２６、エンコーダ４２７及びトルクセンサ４２８（又は図９Ｂに示すトルクセンサ４２８ａ）に対応している。
ここで、アクチュエータ６１０が上記数式（１２）で表される理論モデルに従った応答を行なうことは、上記数式（１２）の右辺が与えられたときに、左辺の回転角加速度が達成されることに他ならない。また、上記数式（１２）に示すように、理論モデルには、アクチュエータ６１０に作用する外トルク項τｅが含まれている。本実施形態では、理想関節制御を行うために、トルクセンサ６１４によって外トルクτｅを測定する。また、エンコーダ６１３によって測定されたアクチュエータ６１０の回転角度ｑに基づいて外乱に起因するトルクの推定値である外乱推定値τｄを算出するために、外乱オブザーバ６２０を適用する。
ブロック６３１は、上記数式（１２）に示す関節部４２１ａ〜４２１ｆの理想的な関節モデル（Ｉｄｅａｌ Ｊｏｉｎｔ Ｍｏｄｅｌ）に従った演算を行う演算器を表している。ブロック６３１は、発生トルクτａ、外トルクτｅ、回転角速度（回転角度ｑの１階微分）を入力として、上記数式（１２）の左辺に示す回転角加速度目標値（回転角目標値ｑｒｅｆの２階微分）を出力することができる。
本実施形態では、上記（４−２−２．一般化逆動力学について）で説明した方法によって算出された発生トルクτａと、トルクセンサ６１４によって測定された外トルクτｅが、ブロック６３１に入力される。一方、微分演算を行う演算器を表すブロック６３２に、エンコーダ６１３によって測定された回転角度ｑが入力されることにより、回転角速度（回転角度ｑの１階微分）が算出される。上記発生トルクτａ及び外トルクτｅに加えて、ブロック６３２によって算出された回転角速度がブロック６３１に入力されることにより、ブロック６３１によって回転角加速度目標値が算出される。算出された回転角加速度目標値は、ブロック６３３に入力される。
ブロック６３３は、アクチュエータ６１０の回転角加速度に基づいてアクチュエータ６１０に生じるトルクを算出する演算器を表す。本実施形態においては、具体的には、ブロック６３３は、回転角加速度目標値にアクチュエータ６１０における公称イナーシャ（ノミナルイナーシャ）Ｊｎを乗じることにより、トルク目標値τｒｅｆを得ることができる。理想の応答においては、アクチュエータ６１０に当該トルク目標値τｒｅｆを生じさせることにより、所望の運動目的が達成されるはずであるが、上述したように、実際の応答には外乱等の影響が生じる場合がある。従って、本実施形態においては、外乱オブザーバ６２０によって外乱推定値τｄを算出し、外乱推定値τｄを用いて当該トルク目標値τｒｅｆを補正する。
外乱オブザーバ６２０の構成について説明する。図１０に示すように、外乱オブザーバ６２０は、トルク指令値τと、エンコーダ６１３によって測定された回転角度ｑから算出される回転角速度に基づいて、外乱推定値τｄを算出する。ここで、トルク指令値τは、外乱の影響が補正された後の、最終的にアクチュエータ６１０に生じさせるトルク値である。例えば、外乱推定値τｄが算出されていない場合には、トルク指令値τはトルク目標値τｒｅｆとなる。
外乱オブザーバ６２０は、ブロック６３４とブロック６３５とから構成される。ブロック６３４は、アクチュエータ６１０の回転角速度に基づいてアクチュエータ６１０に生じるトルクを算出する演算器を表す。本実施形態においては、具体的には、エンコーダ６１３によって測定された回転角度ｑから、ブロック６３２によって算出された回転角速度がブロック６３４に入力される。ブロック６３４は、伝達関数Ｊｎｓによって表される演算を行うことにより、すなわち、当該回転角速度を微分することにより回転角加速度を求め、更に算出された回転角加速度にノミナルイナーシャＪｎを乗じることにより、実際にアクチュエータ６１０に作用しているトルクの推定値（トルク推定値）を算出することができる。
外乱オブザーバ６２０内では、当該トルク推定値とトルク指令値τとの差分が取られることにより、外乱によるトルクの値である外乱推定値τｄが推定される。具体的には、外乱推定値τｄは、前周の制御におけるトルク指令値τと、今回の制御におけるトルク推定値との差分であってよい。ブロック６３４によって算出されるトルク推定値は実際の測定値に基づくものであり、ブロック６３３によって算出されたトルク指令値τはブロック６３１に示す関節部４２１ａ〜４２１ｆの理想的な理論モデルに基づくものであるため、両者の差分を取ることによって、上記理論モデルでは考慮されていない外乱の影響を推定することができるのである。
また、外乱オブザーバ６２０には、系の発散を防ぐために、ブロック６３５に示すローパスフィルター（ＬＰＦ：Ｌｏｗ Ｐａｓｓ Ｆｉｌｔｅｒ）が設けられる。ブロック６３５は、伝達関数ｇ／（ｓ＋ｇ）で表される演算を行うことにより、入力された値に対して低周波成分のみを出力し、系を安定化させる。本実施形態では、ブロック６３４によって算出されたトルク推定値とトルク指令値τｒｅｆとの差分値は、ブロック６３５に入力され、その低周波成分が外乱推定値τｄとして算出される。
本実施形態では、トルク目標値τｒｅｆに外乱オブザーバ６２０によって算出された外乱推定値τｄを加算するフィードフォワード制御が行われることにより、最終的にアクチュエータ６１０に生じさせるトルク値であるトルク指令値τが算出される。そして、トルク指令値τに基づいてアクチュエータ６１０が駆動される。具体的には、トルク指令値τが対応する電流値（電流指令値）に変換され、当該電流指令値がモータ６１１に印加されることにより、アクチュエータ６１０が駆動される。
以上、図１０を参照して説明した構成を取ることにより、本実施形態に係る関節部４２１ａ〜４２１ｆの駆動制御においては、摩擦等の外乱成分があった場合であっても、アクチュエータ６１０の応答を目標値に追従させることが可能となる。また、関節部４２１ａ〜４２１ｆの駆動制御について、理論モデルが仮定するイナーシャＩａ及び粘性抵抗係数νａに従った理想応答を行うことが可能となる。
なお、以上説明した理想関節制御の詳細については、例えば、本願出願人による先行特許出願である特開２００９−２６９１０２号公報を参照することができる。
以上、本実施形態において用いられる一般化逆動力学について説明するとともに、図１０を参照して本実施形態に係る理想関節制御について説明した。以上説明したように、本実施形態においては、一般化逆動力学を用いることにより、アーム部４２０の運動目的を達成するための各関節部４２１ａ〜４２１ｆの駆動パラメータ（例えば関節部４２１ａ〜４２１ｆの発生トルク値）を、拘束条件を考慮して算出する、全身協調制御が行われる。また、図１０を参照して説明したように、本実施形態においては、上記一般化逆動力学を用いた全身協調制御により算出された発生トルク値に対して外乱の影響を考慮した補正を行うことにより、関節部４２１ａ〜４２１ｆの駆動制御において理論モデルに基づいた理想的な応答を実現する、理想関節制御が行われる。従って、本実施形態においては、アーム部４２０の駆動について、運動目的を達成する高精度な駆動制御が可能となる。
（４−２−４．ロボットアーム制御システムの構成）
次に、上記（４−２−２．一般化逆動力学について）及び上記（４−２−３．理想関節制御について）で説明した全身協調制御や理想関節制御がロボットアーム装置の駆動制御に適用された、本実施形態に係るロボットアーム制御システムの構成について説明する。
図１１を参照して、本開示の一実施形態に係るロボットアーム制御システムの一構成例について説明する。図１１は、本開示の一実施形態に係るロボットアーム制御システムの一構成例を示す機能ブロック図である。なお、図１１に示すロボットアーム制御システムでは、ロボットアーム装置のアーム部の駆動の制御に関わる構成について主に図示している。
図１１を参照すると、本開示の一実施形態に係るロボットアーム制御システム１は、ロボットアーム装置１０、制御装置２０及び表示装置３０を備える。本実施形態においては、制御装置２０によって、上記（４−２−２．一般化逆動力学について）で説明した全身協調制御及び上記（４−２−３．理想関節制御について）で説明した理想関節制御における各種の演算が行われ、その演算結果に基づいてロボットアーム装置１０のアーム部の駆動が制御される。また、ロボットアーム装置１０のアーム部には後述する撮像部１４０が設けられており、撮像部１４０によって撮影された画像が表示装置３０の表示画面に表示される。以下、ロボットアーム装置１０、制御装置２０及び表示装置３０の構成について詳細に説明する。なお、図１１に示すロボットアーム制御システム１は、図１を参照して説明したロボットアーム制御システム２に対応するものであり、ロボットアーム制御システム２に対して、図１では図示を省略していた、ロボットアーム装置１０の駆動制御に関する機能構成を改めて詳細に図示したものである。
ロボットアーム装置１０は、複数の関節部と複数のリンクから構成される多リンク構造体であるアーム部を有し、当該アーム部を可動範囲内で駆動させることにより、当該アーム部の先端に設けられる先端ユニットの位置及び姿勢の制御を行う。ロボットアーム装置１０は、図７に示すロボットアーム装置４００に対応している。
図１１を参照すると、ロボットアーム装置１０は、アーム制御部１１０及びアーム部１２０を有する。また、アーム部１２０は、関節部１３０及び撮像部１４０を有する。
アーム制御部１１０は、ロボットアーム装置１０を統合的に制御するとともに、アーム部１２０の駆動を制御する。アーム制御部１１０は、図７を参照して説明した制御部（図７には図示せず。）に対応している。具体的には、アーム制御部１１０は駆動制御部１１１を有し、駆動制御部１１１からの制御によって関節部１３０の駆動が制御されることにより、アーム部１２０の駆動が制御される。より具体的には、駆動制御部１１１は、関節部１３０のアクチュエータにおけるモータに対して供給される電流量を制御することにより、当該モータの回転数を制御し、関節部１３０における回転角度及び発生トルクを制御する。ただし、上述したように、駆動制御部１１１によるアーム部１２０の駆動制御は、制御装置２０における演算結果に基づいて行われる。従って、駆動制御部１１１によって制御される、関節部１３０のアクチュエータにおけるモータに対して供給される電流量は、制御装置２０における演算結果に基づいて決定される電流量である。ただし、当該制御部は、各関節部にそれぞれ設けられ、各関節部の駆動をそれぞれ制御してもよい。
アーム部１２０は、複数の関節部と複数のリンクから構成される多リンク構造体であり、アーム制御部１１０からの制御によりその駆動が制御される。アーム部１２０は、図７に示すアーム部４２０に対応している。アーム部１２０は、関節部１３０及び撮像部１４０を有する。なお、アーム部１２０が有する複数の関節部の機能及び構成は互いに同様であるため、図１１では、それら複数の関節部を代表して１つの関節部１３０の構成を図示している。
関節部１３０は、アーム部１２０においてリンク間を互いに回動可能に連結するとともに、アーム制御部１１０からの制御によりその回転駆動が制御されることによりアーム部１２０を駆動する。関節部１３０は、図７に示す関節部４２１ａ〜４２１ｆに対応している。また、関節部１３０は、アクチュエータを有し、当該アクチュエータの構成は、例えば図８、図９Ａ及び図９Ｂに示す構成と同様である。
関節部１３０は、関節駆動部１３１及び関節状態検出部１３２を有する。
関節駆動部１３１は、関節部１３０のアクチュエータにおける駆動機構であり、関節駆動部１３１が駆動することにより関節部１３０が回転駆動する。関節駆動部１３１は、駆動制御部１１１によってその駆動が制御される。例えば、関節駆動部１３１は、図８に示すモータ４２４及びモータドライバ４２５に対応する構成であり、関節駆動部１３１が駆動することは、モータドライバ４２５が駆動制御部１１１からの指令に応じた電流量でモータ４２４を駆動することに対応している。
関節状態検出部１３２は、関節部１３０の状態を検出する。ここで、関節部１３０の状態とは、関節部１３０の運動の状態を意味していてよい。例えば、関節部１３０の状態には、関節部１３０の回転角度、回転角速度、回転角加速度、発生トルク等の情報が含まれる。本実施形態においては、関節状態検出部１３２は、関節部１３０の回転角度を検出する回転角度検出部１３３及び関節部１３０の発生トルク及び外トルクを検出するトルク検出部１３４を有する。なお、回転角度検出部１３３及びトルク検出部１３４は、図８に示すアクチュエータ４３０のエンコーダ４２７及び図９Ａ及び図９Ｂに示すトルクセンサ４２８、４２８ａに、それぞれ対応している。関節状態検出部１３２は、検出した関節部１３０の状態を制御装置２０に送信する。
撮像部１４０は、アーム部１２０の先端に設けられる先端ユニットの一例であり、撮影対象の画像を取得する。撮像部１４０は、図７に示す撮像ユニット４２３に対応している。具体的には、撮像部１４０は、撮影対象を動画や静止画の形式で撮影することのできるカメラ等である。より具体的には、撮像部１４０は、２次元上に配列された複数の受光素子を有し、当該受光素子における光電変換により、撮影対象の画像を表す画像信号を取得することができる。撮像部１４０は、取得した画像信号を表示装置３０に送信する。
なお、図７に示すロボットアーム装置４００において撮像ユニット４２３がアーム部４２０の先端に設けられていたように、ロボットアーム装置１０においても、実際には撮像部１４０がアーム部１２０の先端に設けられている。図１１では、撮像部１４０が複数の関節部１３０及び複数のリンクを介して最終段のリンクの先端に設けられる様子を、関節部１３０と撮像部１４０との間にリンクを模式的に図示することにより表現している。
なお、本実施形態においては、アーム部１２０の先端には先端ユニットとして各種の医療用器具が接続され得る。当該医療用器具としては、例えば、メスや鉗子等の各種の施術器具や、超音波検査装置の探触子等の各種の検査装置の一ユニット等、施術に際して用いられる各種のユニットが挙げられる。また、本実施形態では、図１１に示す撮像部１４０や、内視鏡、顕微鏡等の撮像機能を有するユニットも医療用器具に含まれてよい。このように、本実施形態に係るロボットアーム装置１０は、医療用器具を備えた医療用ロボットアーム装置であると言える。同様に、本実施形態に係るロボットアーム制御システム１は、医療用ロボットアーム制御システムであると言える。なお、図１１に示すロボットアーム装置１０は、撮像機能を有するユニットを先端ユニットとして備えるビデオ顕微鏡用ロボットアーム装置であるとも言える。また、アーム部１２０の先端に、２つの撮像ユニット（カメラユニット）を有するステレオカメラが設けられ、撮像対象を３Ｄ画像として表示するように撮影が行われてもよい。
以上、ロボットアーム装置１０の機能及び構成について説明した。次に、制御装置２０の機能及び構成について説明する。図１１を参照すると、制御装置２０は、入力部２１０、記憶部２２０及び制御部２３０を有する。
制御部２３０は、制御装置２０を統合的に制御するとともに、ロボットアーム装置１０におけるアーム部１２０の駆動を制御するための各種の演算を行う。具体的には、制御部２３０は、ロボットアーム装置１０のアーム部１２０の駆動を制御するために、全身協調制御及び理想関節制御における各種の演算を行う。以下、制御部２３０の機能及び構成について詳しく説明するが、全身協調制御及び理想関節制御については、上記（４−２−２．一般化逆動力学について）及び上記（４−２−３．理想関節制御について）で既に説明しているため、ここでは詳しい説明は省略する。
制御部２３０は、全身協調制御部２４０、理想関節制御部２５０、内部モデル情報取得部２６０及び内部モデル更新部２７０を有する。
全身協調制御部２４０は、一般化逆動力学を用いた全身協調制御に関する各種の演算を行う。本実施形態では、全身協調制御部２４０は、関節状態検出部１３２によって検出された関節部１３０の状態に基づいてアーム部１２０の状態（アーム状態）を取得する。また、全身協調制御部２４０は、当該アーム状態と、アーム部１２０の運動目的及び拘束条件と、に基づいて、操作空間におけるアーム部１２０の全身協調制御のための制御値を、一般化逆動力学を用いて算出する。なお、操作空間とは、例えばアーム部１２０に作用する力とアーム部１２０に発生する加速度との関係を記述するための空間である。
全身協調制御部２４０は、アーム状態取得部２４１、演算条件設定部２４２、仮想力算出部２４３及び実在力算出部２４４を有する。ここで、上述した図１では、説明のため、便宜的に、アーム状態取得部２４１を、内部モデル情報取得部２６０に含まれる一機能として図示していたが、これらは同様の機能を有するものである。
アーム状態取得部２４１は、関節状態検出部１３２によって検出された関節部１３０の状態に基づいて、アーム部１２０の状態（アーム状態）を取得する。ここで、アーム状態とは、アーム部１２０の運動の状態を意味していてよい。例えば、アーム状態には、アーム部１２０の位置、速度、加速度、力等の情報が含まれる。上述したように、関節状態検出部１３２は、関節部１３０の状態として、各関節部１３０における回転角度、回転角速度、回転角加速度、発生トルク等の情報を取得している。また、後述するが、記憶部２２０は、制御装置２０によって処理される各種の情報を記憶するものであり、本実施形態においては、記憶部２２０には、アーム部１２０に関する各種の情報（アーム情報）、例えばアーム部１２０を構成する関節部１３０及びリンクの数や、リンクと関節部１３０との接続状況、リンクの長さ等の情報が格納されていてよい。アーム状態取得部２４１は、記憶部２２０から当該アーム情報を取得することができる。従って、アーム状態取得部２４１は、関節部１３０の状態とアーム情報とに基づいて、複数の関節部１３０、複数のリンク及び撮像部１４０の空間上の位置（座標）（すなわち、アーム部１２０の形状や撮像部１４０の位置及び姿勢）や、各関節部１３０、リンク及び撮像部１４０に作用している力等の情報をアーム状態として取得することができる。アーム状態取得部２４１は、取得したアーム情報を演算条件設定部２４２に送信する。
演算条件設定部２４２は、一般化逆動力学を用いた全身協調制御に関する演算における演算条件を設定する。ここで、演算条件とは、運動目的及び拘束条件であってよい。運動目的は、アーム部１２０の運動に関する各種の情報であってよい。具体的には、運動目的は、撮像部１４０の位置及び姿勢（座標）、速度、加速度並びに力等の目標値であったり、アーム部１２０の複数の関節部１３０及び複数のリンクの位置（座標）、速度、加速度及び力等の目標値であったりしてもよい。また、拘束条件は、アーム部１２０の運動を制限（拘束）する各種の情報であってよい。具体的には、拘束条件は、アーム部の各構成部材が移動不可能な領域の座標や、移動不可能な速度、加速度の値、発生不可能な力の値等であってよい。また、拘束条件における各種の物理量の制限範囲は、アーム部１２０の構造的に実現することが不可能であることから設定されてもよいし、ユーザによって適宜設定されてもよい。また、演算条件設定部２４２は、アーム部１２０の構造についての物理モデル（例えば、アーム部１２０を構成するリンクの数や長さ、リンクの関節部１３０を介した接続状況、関節部１３０の可動範囲等がモデル化されたもの。上記＜１．ロボットアーム制御システムの構成＞、＜２．キャリブレーション方法＞及び＜３．キャリブレーション方法の具体例＞で説明した内部モデルに対応する。）を有し、当該物理モデルに、所望の運動条件及び拘束条件が反映された制御モデルを生成することにより、運動条件及び拘束条件を設定してもよい。
本実施形態においては、運動目的及び拘束条件を適切に設定することにより、アーム部１２０に所望の動作を行わせることが可能となる。例えば、運動目的として、撮像部１４０の位置の目標値を設定することにより撮像部１４０をその目標の位置に移動させることはもちろんのこと、アーム部１２０が空間上の所定の領域内に侵入しないようにする等、拘束条件によって移動の制約を設けてアーム部１２０を駆動させることも可能である。
運動目的の具体例として、例えば、運動目的は、撮像部１４０の撮影方向が施術部位に固定された状態で、撮像部１４０が施術部位を頂点とした円錐の面内を移動する、当該円錐の軸を旋回軸とした旋回動作である、ピボット動作であってもよい。また、当該ピボット動作においては、撮像部１４０と円錐の頂点に当たる点との距離が一定に保たれた状態で旋回動作が行われてもよい。このようなピボット動作を行うことにより、観察部位を等距離からかつ異なる角度から観察できるようになるため、手術を行うユーザの利便性を向上させることができる。
また、他の具体例として、運動目的は、各関節部１３０における発生トルクを制御する内容であってもよい。具体的には、運動目的は、アーム部１２０に作用する重力を打ち消すように関節部１３０の状態を制御するとともに、更に外部から与えられた力の方向へのアーム部１２０の移動をサポートするように関節部１３０の状態を制御するパワーアシスト動作であってもよい。より具体的には、パワーアシスト動作においては、アーム部１２０の各関節部１３０における重力による外トルクを打ち消す発生トルクを各関節部１３０に生じさせるように各関節部１３０の駆動が制御されることにより、アーム部１２０の位置及び姿勢が所定の状態で保持される。この状態で更に外部から（例えばユーザから）外トルクが加えられた場合に、与えられた外トルクと同じ方向の発生トルクを各関節部１３０に生じさせるように各関節部１３０の駆動が制御される。このようなパワーアシスト動作を行うことにより、ユーザが手動でアーム部１２０を動かす場合に、ユーザはより小さい力でアーム部１２０を移動させることができるため、あたかも無重力下でアーム部１２０を動かしているような感覚をユーザに対して与えることができる。また、上述したピボット動作と当該パワーアシスト動作とを組み合わせることも可能である。
ここで、本実施形態において、運動目的とは、全身協調制御において実現されるアーム部１２０の動作（運動）を意味していてもよいし、当該動作における瞬時的な運動目的（すなわち、運動目的における目標値）を意味していてもよい。例えば上記のピボット動作であれば、撮像部１４０がピボット動作を行うこと自体が運動目的であるが、ピボット動作を行っている最中においては、当該ピボット動作における円錐面内での撮像部１４０の位置や速度等の値が、瞬時的な運動目的（当該運動目的における目標値）として設定されている。また例えば上記のパワーアシスト動作であれば、外部から加えられた力の方向へのアーム部１２０の移動をサポートするパワーアシスト動作を行うこと自体が運動目的であるが、パワーアシスト動作を行っている最中においては、各関節部１３０に加えられる外トルクと同じ方向への発生トルクの値が、瞬時的な運動目的（当該運動目的における目標値）として設定されている。本実施形態における運動目的は、瞬時的な運動目的（例えばある時間におけるアーム部１２０の各構成部材の位置や速度、力等の目標値）と、瞬時的な運動目的が連続的に達成された結果、経時的に実現されるアーム部１２０の各構成部材の動作の、双方を含む概念である。全身協調制御部２４０における全身協調制御のための演算における各ステップでは瞬時的な運動目的がその都度設定され、当該演算が繰り返し行われることにより、最終的に所望の運動目的が達成される。
なお、本実施形態においては、運動目的が設定される際に、各関節部１３０の回転運動における粘性抵抗係数も適宜設定されてよい。上述したように、本実施形態に係る関節部１３０は、アクチュエータ４３０の回転運動における粘性抵抗係数を適宜調整できるように構成される。従って、運動目的の設定に際して各関節部１３０の回転運動における粘性抵抗係数も設定することにより、例えば外部から加えられる力に対して回転しやすい状態や回転し難い状態を実現することができる。例えば上述したパワーアシスト動作であれば、関節部１３０における粘性抵抗係数が小さく設定されることにより、ユーザがアーム部１２０を移動させる際に要する力がより小さくてよく、ユーザに与えられる無重力感がより助長される。このように、各関節部１３０の回転運動における粘性抵抗係数は、運動目的の内容に応じて適宜設定されてよい。
なお、運動目的の具体例については、下記（４−２−５．運動目的の具体例）で改めて詳しく説明する。
ここで、本実施形態においては、後述するように、記憶部２２０には、全身協調制御に関する演算において用いられる運動目的や拘束条件等の演算条件に関するパラメータが格納されていてもよい。演算条件設定部２４２は、記憶部２２０に記憶されている拘束条件を、全身協調制御の演算に用いる拘束条件として設定することができる。
また、本実施形態においては、演算条件設定部２４２は、複数の方法によって運動目的を設定することができる。例えば、演算条件設定部２４２は、アーム状態取得部２４１から送信されるアーム状態に基づいて運動目的を設定してもよい。上述したように、アーム状態には、アーム部１２０の位置の情報やアーム部１２０に対して作用する力の情報が含まれる。従って、例えばユーザがアーム部１２０を手動で移動させようとしている場合には、アーム状態取得部２４１によって、ユーザがアーム部１２０をどのように移動させようとしているか、に関する情報もアーム状態として取得される。従って、演算条件設定部２４２は、取得されたアーム状態に基づいて、ユーザがアーム部１２０を移動させた位置や速度、力等を瞬時的な運動目的として設定することができる。このように運動目的が設定されることにより、アーム部１２０の駆動は、ユーザによるアーム部１２０の移動を追随し、サポートするように制御される。
また、例えば、演算条件設定部２４２は、入力部２１０からユーザによって入力される指示に基づいて運動目的を設定してもよい。後述するが、入力部２１０は、ユーザが制御装置２０にロボットアーム装置１０の駆動制御に関する情報や命令等を入力するための入力インターフェースであり、本実施形態においては、ユーザによる入力部２１０からの操作入力に基づいて、運動目的が設定されてもよい。具体的には、入力部２１０は、例えばレバー、ペダル等のユーザが操作する操作手段を有し、当該レバー、ペダル等の操作に応じて、アーム部１２０の各構成部材の位置や速度等が、演算条件設定部２４２によって瞬時的な運動目的として設定されてもよい。
更に、例えば、演算条件設定部２４２は、記憶部２２０に記憶されている運動目的を、全身協調制御の演算に用いる運動目的として設定してもよい。例えば、空間上の所定の点で撮像部１４０が静止するという運動目的であれば、当該所定の点の座標を運動目的として予め設定することができる。また、例えば、撮像部１４０が空間上において所定の軌跡上を移動するという運動目的であれば、当該所定の軌跡を表す各点の座標を運動目的として予め設定することができる。このように、運動目的が予め設定できるものである場合には、当該運動目的が予め記憶部２２０に記憶されていてもよい。また、例えば上述したピボット動作であれば、運動目的は円錐の面内における位置や速度等を目標値とするものに限られるし、パワーアシスト動作であれば、運動目的は力を目標値とするものに限られる。このように、ピボット動作やパワーアシスト動作のような運動目的が予め設定されている場合には、これらの運動目的における瞬時的な運動目的として設定され得る目標値の範囲や種類等に関する情報が、記憶部２２０に記憶されていてもよい。演算条件設定部２４２は、このような運動目的に関する各種の情報も含めて、運動目的として設定することができる。
なお、演算条件設定部２４２が、上記のいずれの方法で運動目的を設定するかは、ロボットアーム装置１０の用途等に応じてユーザによって適宜設定可能であってよい。また、演算条件設定部２４２は、また、上記の各方法を適宜組み合わせることにより、運動目的及び拘束条件を設定してもよい。なお、記憶部２２０に格納されている拘束条件の中に運動目的の優先度が設定されていてもよく、複数の互いに異なる運動目的が存在する場合には、演算条件設定部２４２は、当該拘束条件の優先度に応じて運動目的を設定してもよい。演算条件設定部２４２は、アーム状態並びに設定した運動目的及び拘束条件を仮想力算出部２４３に送信する。
仮想力算出部２４３は、一般化逆動力学を用いた全身協調制御に関する演算における仮想力を算出する。仮想力算出部２４３が行う仮想力の算出処理は、例えば、上記（４−２−２−１．仮想力算出処理）で説明した一連の処理であってよい。仮想力算出部２４３は、算出した仮想力ｆｖを実在力算出部２４４に送信する。
実在力算出部２４４は、一般化逆動力学を用いた全身協調制御に関する演算における実在力を算出する。実在力算出部２４４が行う実在力の算出処理は、例えば、上記（４−２−２−２．実在力算出処理）で説明した一連の処理であってよい。実在力算出部２４４は、算出した実在力（発生トルク）τａを理想関節制御部２５０に送信する。なお、本実施形態においては、実在力算出部２４４によって算出された発生トルクτａのことを、全身協調制御における関節部１３０の制御値という意味で、制御値又は制御トルク値とも呼称する。
理想関節制御部２５０は、理論モデルに基づいた理想的な応答を実現する理想関節制御に関する各種の演算を行う。本実施形態では、理想関節制御部２５０は、実在力算出部２４４によって算出された発生トルクτａに対して外乱の影響を補正することにより、アーム部１２０の理想的な応答を実現するトルク指令値τを算出する。なお、理想関節制御部２５０によって行われる演算処理は、上記（４−２−３．理想関節制御について）で説明した一連の処理に対応している。
理想関節制御部２５０は、外乱推定部２５１及び指令値算出部２５２を有する。
外乱推定部２５１は、トルク指令値τと、回転角度検出部１３３によって検出された回転角度ｑから算出される回転角速度に基づいて、外乱推定値τｄを算出する。なお、ここでいうトルク指令値τは、最終的にロボットアーム装置１０に送信されるアーム部１２０での発生トルクを表す指令値である。このように、外乱推定部２５１は、図１０に示す外乱オブザーバ６２０に対応する機能を有する。
指令値算出部２５２は、外乱推定部２５１によって算出された外乱推定値τｄを用いて、最終的にロボットアーム装置１０に送信されるアーム部１２０に生じさせるトルクを表す指令値であるトルク指令値τを算出する。具体的には、指令値算出部２５２は、上記数式（１２）に示す関節部１３０の理想モデルから算出されるτｒｅｆに外乱推定部２５１によって算出された外乱推定値τｄを加算することにより、トルク指令値τを算出する。例えば、外乱推定値τｄが算出されていない場合には、トルク指令値τはトルク目標値τｒｅｆとなる。このように、指令値算出部２５２の機能は、図１０に示す外乱オブザーバ６２０以外の機能に対応している。
以上説明したように、理想関節制御部２５０においては、外乱推定部２５１と指令値算出部２５２との間で繰り返し情報のやり取りが行われることにより、図１０を参照して説明した一連の処理が行われる。理想関節制御部２５０は算出したトルク指令値τをロボットアーム装置１０の駆動制御部１１１に送信する。駆動制御部１１１は、送信されたトルク指令値τに対応する電流量を、関節部１３０のアクチュエータにおけるモータに対して供給する制御を行うことにより、当該モータの回転数を制御し、関節部１３０における回転角度及び発生トルクを制御する。
本実施形態に係るロボットアーム制御システム１においては、ロボットアーム装置１０におけるアーム部１２０の駆動制御は、アーム部１２０を用いた作業が行われている間継続的に行われるため、ロボットアーム装置１０及び制御装置２０における以上説明した処理が繰り返し行われる。すなわち、ロボットアーム装置１０の関節状態検出部１３２によって関節部１３０の状態が検出され、制御装置２０に送信される。制御装置２０では、当該関節部１３０の状態と、運動目的及び拘束条件とに基づいて、アーム部１２０の駆動を制御するための全身協調制御及び理想関節制御に関する各種の演算が行われ、演算結果としてのトルク指令値τがロボットアーム装置１０に送信される。ロボットアーム装置１０では、当該トルク指令値τに基づいてアーム部１２０の駆動が制御され、駆動中又は駆動後の関節部１３０の状態が、再び関節状態検出部１３２によって検出される。
内部モデル情報取得部２６０は、アーム部１２０及び撮像部１４０が所定の位置及び姿勢にある状態において、内部モデルを規定するための内部モデル情報を取得する。また、内部モデル更新部２７０は、内部モデル情報取得部２６０によって取得された内部モデル情報を用いて内部モデルを更新する。ここで、内部モデル情報取得部２６０及び内部モデル更新部２７０の機能については、上記＜１．ロボットアーム制御システムの構成＞で詳しく説明しているため、ここでは、その詳細な説明は省略する。内部モデル更新部２７０によって更新された、すなわち、キャリブレーションが行われた内部モデルを用いて、例えば演算条件設定部２４２によって運動目的及び拘束条件が設定され、仮想力算出部２４３及び実在力算出部２４４によって、設定された運動目的及び拘束条件に基づく制御値が算出されることとなる。
制御装置２０が有する他の構成についての説明を続ける。
入力部２１０は、ユーザが制御装置２０にロボットアーム装置１０の駆動制御に関する情報や命令等を入力するための入力インターフェースである。本実施形態においては、ユーザによる入力部２１０からの操作入力に基づいて、ロボットアーム装置１０のアーム部１２０の駆動が制御され、撮像部１４０の位置及び姿勢が制御されてもよい。具体的には、上述したように、ユーザによって入力部２１０から入力されたアームの駆動の指示に関する指示情報が演算条件設定部２４２に入力されることにより、演算条件設定部２４２が当該指示情報に基づいて全身協調制御における運動目的を設定してもよい。このように、ユーザが入力した指示情報に基づく運動目的を用いて全身協調制御が行われることにより、ユーザの操作入力に応じたアーム部１２０の駆動が実現される。
具体的には、入力部２１０は、例えばマウス、キーボード、タッチパネル、ボタン、スイッチ、レバー及びペダル等のユーザが操作する操作手段を有する。例えば入力部２１０がペダルを有する場合、ユーザは当該ペダルを足で操作することによりアーム部１２０の駆動を制御することができる。従って、ユーザが患者の施術部位に対して両手を使って処置を行っている場合であっても、足によるペダルの操作によって撮像部１４０の位置及び姿勢、すなわち、施術部位の撮影位置や撮影角度を調整することができる。
記憶部２２０は、制御装置２０によって処理される各種の情報を記憶する。本実施形態においては、記憶部２２０は、制御部２３０によって行われる全身協調制御及び理想関節制御に関する演算において用いられる各種のパラメータを記憶することができる。例えば、記憶部２２０は、全身協調制御部２４０による全身協調制御に関する演算において用いられる運動目的及び拘束条件を記憶していてもよい。記憶部２２０が記憶する運動目的は、上述したように、例えば撮像部１４０が空間上の所定の点で静止することのような、予め設定され得る運動目的であってよい。また、拘束条件は、アーム部１２０の幾何的な構成やロボットアーム装置１０の用途等に応じて、ユーザによって予め設定され、記憶部２２０に格納されていてもよい。また、記憶部２２０には、アーム状態取得部２４１がアーム状態を取得する際に用いるアーム部１２０に関する各種の情報が記憶されていてもよい。更に、記憶部２２０には、制御部２３０による全身協調制御及び理想関節制御に関する演算における演算結果や演算過程で算出される各数値等が記憶されてもよい。このように、記憶部２２０には、制御部２３０によって行われる各種の処理に関するあらゆるパラメータが格納されていてよく、制御部２３０は、記憶部２２０と相互に情報を送受信しながら各種の処理を行うことができる。
以上、制御装置２０の機能及び構成について説明した。なお、本実施形態に係る制御装置２０は、例えばＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）やサーバ等の各種の情報処理装置（演算処理装置）によって構成することができる。次に、表示装置３０の機能及び構成について説明する。
表示装置３０は、各種の情報を表示画面上にテキスト、イメージ等様々な形式で表示することにより、当該情報をユーザに対して視覚的に通知する。本実施形態においては、表示装置３０は、ロボットアーム装置１０の撮像部１４０によって撮影された画像を表示画面上に表示する。具体的には、表示装置３０は、撮像部１４０によって取得された画像信号に各種の画像処理を施す画像信号処理部（図示せず。）や処理された画像信号に基づく画像を表示画面上に表示させる制御を行う表示制御部（図示せず。）等の機能及び構成を有する。なお、表示装置３０は、上記の機能及び構成以外にも、一般的に表示装置が有する各種の機能及び構成を有してもよい。表示装置３０は、図６に示す表示装置５５０に対応している。
以上、図１１を参照して、本実施形態に係るロボットアーム装置１０、制御装置２０及び表示装置３０の機能及び構成について説明した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。
以上説明したように、本実施形態によれば、ロボットアーム装置１０における多リンク構造体であるアーム部１２０が、少なくとも６自由度以上の自由度を有するとともに、当該アーム部１２０を構成する複数の関節部１３０のそれぞれの駆動が駆動制御部１１１によって制御される。そして、当該アーム部１２０の先端には医療用器具が設けられる。このように、各関節部１３０の駆動が制御されることにより、より自由度の高いアーム部１２０の駆動制御が実現され、よりユーザにとって操作性の高い医療用のロボットアーム装置１０が実現される。
より具体的には、本実施形態によれば、ロボットアーム装置１０において、関節状態検出部１３２によって関節部１３０の状態が検出される。そして、制御装置２０において、当該関節部１３０の状態と、運動目的及び拘束条件とに基づいて、アーム部１２０の駆動を制御するための一般化逆動力学を用いた全身協調制御に関する各種の演算が行われ、演算結果としてのトルク指令値τが算出される。更に、ロボットアーム装置１０において、当該トルク指令値τに基づいてアーム部１２０の駆動が制御される。このように、本実施形態においては、一般化逆動力学を用いた全身協調制御により、アーム部１２０の駆動が制御される。従って、力制御によるアーム部１２０の駆動制御が実現され、よりユーザにとって操作性の高いロボットアーム装置が実現される。また、本実施形態では、全身協調制御において、例えばピボット動作やパワーアシスト動作といった、よりユーザの利便性を向上させる各種の運動目的を実現する制御が可能となる。更に、本実施形態においては、例えばアーム部１２０を手動で移動させたり、ペダルからの操作入力により移動させたりといった、多様な駆動手段が実現されるため、ユーザの利便性の更なる向上が実現される。
また、本実施形態においては、アーム部１２０の駆動制御について、全身協調制御と併せて理想関節制御が適用される。理想関節制御においては、関節部１３０内部の摩擦や慣性等の外乱成分を推定し、推定した外乱成分を用いたフィードフォワード制御が行われる。従って、摩擦等の外乱成分がある場合であっても、関節部１３０の駆動について理想的な応答を実現することができる。よって、アーム部１２０の駆動制御において、振動等の影響がより少ない、高精度の応答性と高い位置決め精度や安定性が実現される。
更に、本実施形態においては、アーム部１２０を構成する複数の関節部１３０のそれぞれが、例えば図８に示すような、理想関節制御に適合した構成を有し、各関節部１３０における回転角度、発生トルク及び粘性抵抗係数を電流値によって制御することができる。このように、各関節部１３０の駆動が電流値によって制御され、また、全身協調制御により各関節部１３０の駆動がアーム部１２０全体の状態を把握しながら制御されるため、カウンターバランスが不要となり、ロボットアーム装置１０の小型化が実現される。
（４−２−５．運動目的の具体例）
次に、本実施形態に係る運動目的の具体例について説明する。上記（４−２−４．ロボットアーム制御システムの構成）で説明したように、本実施形態においては、全身協調制御によって各種の運動目的が実現される。ここでは、本実施形態に係る運動目的の具体例として、パワーアシスト動作と、ピボット動作について説明する。なお、以下の運動目的の具体例についての説明では、図１１に示す機能ブロック図における参照番号を用いて、本実施形態に係るロボットアーム制御システムの構成部材を表す。
パワーアシスト動作は、アーム部１２０に作用する重力を打ち消すように関節部１３０の状態を制御するとともに、更に外部から与えられた力の方向へのアーム部１２０の移動をサポートするように関節部１３０の状態を制御する動作である。具体的には、ユーザがアーム部１２０を手動で動かす際に、ユーザによって加えられた力をサポートするようにアーム部１２０の駆動を制御する動作である。より具体的には、パワーアシスト動作を実現するために、まず、重力以外の力がアーム部１２０に作用していない状態における外トルクがトルク検出部１３４によって検出され、検出された外トルクを打ち消す発生トルクを各関節部１３０に生じさせるように、瞬時的な運動目的が設定される。この段階で、アーム部１２０の位置及び姿勢が所定の状態で保持される。この状態で更に外部から（例えばユーザから）外トルクが加えられた場合に、追加的に与えられた外トルクがトルク検出部１３４によって検出され、検出された追加的な外トルクと同じ方向の発生トルクを各関節部１３０に生じさせるという瞬時的な運動目的が更に設定される。このような瞬時的な運動目的に従って各関節部１３０の駆動が制御されることによりパワーアシスト動作が実現される。パワーアシスト動作により、ユーザはより小さい力でアーム部を移動させることができるため、あたかも無重力下でアーム部１２０を動かしているような感覚を得ることができ、ユーザによるアーム部１２０の操作性が向上する。
ピボット動作は、アーム部１２０の先端に設けられる先端ユニットが、当該先端ユニットの向きが空間上の所定の点に固定された状態で、当該所定の点を頂点とした円錐の面上を移動する、当該円錐の軸を旋回軸とした旋回動作である。具体的に先端ユニットが撮像部１４０である場合であれば、ピボット動作は、アーム部１２０の先端に設けられる撮像部１４０が、撮像部１４０の撮影方向が空間上の所定の点に固定された状態で、当該所定の点を頂点とした円錐の面上を移動する、当該円錐の軸を旋回軸とした旋回動作である。ピボット動作における円錐の頂点に当たる点としては、例えば施術部位が選択される。また、ピボット動作においては、先端ユニット又は撮像部１４０と円錐の頂点に当たる点との距離が一定に保たれた状態で旋回動作が行われてもよい。なお、先端ユニットの向き又は撮像部１４０の撮影方向が空間上の所定の点（例えば施術部位）に固定されることから、ピボット動作はポイントロック動作とも呼ばれる。
ピボット動作について、図１２及び図１３を参照してより詳細に説明する。図１２は、本開示の一実施形態に係るアーム動作の一具体例であるピボット動作について説明するための説明図である。図１３は、図１２に示すピボット動作を実現するための運動目的及び拘束条件について説明するための説明図である。
図１２を参照すると、患者７５０上における施術部位がピボット動作における頂点に設定されている。当該頂点をピボット点Ｐｉと呼称する。図１２では、簡単のため、本実施形態に係るロボットアーム装置１０のうち、図１１における撮像部１４０に対応するユニットである撮像ユニット７１３のみを図示している。図１２に示すように、ピボット動作においては、撮像ユニット７１３が円錐Ａの底面の円周上に限り移動することができるように、すなわち、撮像ユニット７１３とピボット点Ｐｉとの距離が一定に保たれた状態で撮像ユニット７１３が円錐Ａの面内を移動するように、運動目的及び拘束条件が設定されてもよい。また、円錐Ａの形状、すなわち、円錐Ａの頂点の角度θや、ピボット点Ｐｉと撮像ユニット７１３との距離は、ユーザによって適宜設定されてよい。例えば、ピボット点Ｐｉと撮像ユニット７１３との距離は撮像ユニット７１３における光学系の焦点距離に調整される。このようなピボット動作を適用することにより、施術部位を等距離からかつ異なる角度から観察できるようになるため、手術を行うユーザの利便性を向上させることができる。
また、ピボット動作においては、円錐Ａ及び円錐Ｂのように、ピボット点Ｐｉを固定したまま撮像ユニット７１３が移動可能な円錐の位置を移動させることができてもよい。図１２に示す例では、円錐Ａの旋回軸は施術部位に対して略垂直であり、円錐Ｂの旋回軸は施術部位に対して略水平である。このように、例えばピボット動作を行う円錐を、円錐Ａ、Ｂのように、ピボット点Ｐｉを固定したまま略９０度回転できるように、運動目的及び拘束条件が設定されてもよい。このようなピボット動作を適用することにより、施術部位を更に多くの方向から観察できるようになるため、ユーザの利便性を更に向上させることができる。
なお、図１２に示す例では、撮像ユニット７１３が円錐Ａの底面の円周上に限り移動することができるように運動目的及び拘束条件が設定される例を示しているが、本実施形態に係るピボット動作はかかる例に限定されない。例えば、ピボット点Ｐｉの位置及び円錐Ａ、Ｂの頂点の角度θは固定したまま、ピボット点Ｐｉと撮像ユニット７１３との距離は自由に移動できるように、運動目的及び拘束条件が設定されてもよい。このようなピボット動作を適用することにより、角度は固定したまま撮像ユニット７１３と施術部位との距離だけを変えることができるようになるため、撮像ユニット７１３の焦点距離（フォーカス）を適宜調整することにより施術部位を拡大又は縮小して観察する等、よりユーザの要求に応える施術部位の観察が可能となる。
次に、図１３を参照して、図１２に示したようなピボット動作を実現するための運動目的及び拘束条件について詳しく説明する。図１３を参照すると、撮像ユニット７１３を有するアーム部７１０がピボット点Ｐｉを基点としてピボット動作を行っている様子が図示されている。なお、図１３では、撮像ユニット７１３とピボット点Ｐｉとの距離が一定に保たれた状態でのピボット動作を例に挙げて説明を行う。アーム部７１０は、複数の関節部７１１ａ、７１１ｂ、７１１ｃと複数のリンク７１２ａ、７１２ｂ、７１２ｃを有し、本実施形態に係る全身協調制御及び理想関節制御によってその駆動が制御されているとする。例えば、アーム部７１０及びその構成部材は、図７に示した本実施形態に係るアーム部４２０及びその構成部材と同様の構成を有する。
ここで、アーム部７１０の支点である原点ＯＡを零点とするアーム座標系と、空間上の原点ＯＳを零点とする空間座標系を考える。アーム部７１０の運動はアーム座標系で管理されている。なお、アーム座標系及び空間座標系は、相互の座標系への座標変換が可能であるように定義される。
空間座標系から見た撮像中心をＰｗとする。また、アーム座標系において、撮像ユニット７１３とリンク７１２ｃとを接続する関節部７１１ｃから、撮像ユニット７１３自体の長さＤと撮像ユニット７１３の焦点距離ｆだけ離れた位置をピボット点Ｐｉとする。
この状態で、ピボット点Ｐｉと撮像中心Ｐｗとが一致した状態でアーム部７１０が駆動されるように、運動目的及び拘束条件を設ける。すなわち、アーム座標系におけるピボット点Ｐｉを空間座標系における撮像中心Ｐｗに固定するような拘束をアーム座標系において設ける。また、運動目的として、撮像ユニット７１３がピボット点Ｐｉ（すなわち撮像中心Ｐｗ）を頂点とする円錐の面上に位置するような座標や、撮像ユニット７１３がピボット点Ｐｉを向くような撮像ユニット７１３の姿勢が設定される。このような拘束条件及び運動目的の下で全身協調制御が行われることにより、アーム部７１０の動作によって撮像ユニット７１３の位置及び姿勢が変化したとしても、撮像ユニット７１３の向きは常に撮像中心Ｐｗ（すなわち、ピボット点Ｐｉ）を向いたまま、かつ、撮像ユニット７１３と撮像中心Ｐｗとの距離が焦点距離ｆに保たれたままとなる。従って、撮像ユニット７１３と撮像中心Ｐｗとの距離が一定に保たれた状態でのピボット動作が実現される。撮像ユニット７１３と撮像中心Ｐｗ（又はピボット点Ｐｉ）との距離を変化させながらピボット動作を行う際には、上述したピボット点Ｐｉの設定方法を変更すればよい。具体的には、例えば、アーム座標系において、関節部７１１ｃから撮像ユニット７１３自体の長さＤと任意の距離だけ離れた位置をピボット点Ｐｉとし、当該任意の距離を可変なパラメータとすればよい。
なお、上述したピボット動作とパワーアシスト動作とが組み合わされて用いられてもよい。ピボット動作とパワーアシスト動作とが組み合わされて用いられる場合、例えばユーザが手動で撮像部１４０を移動させる際に、ユーザは無重力下で撮像部１４０を移動させているような感覚でより少ない力で撮像部１４０を移動させることができるとともに、撮像部１４０の移動位置は円錐の面内に制限される。従って、ピボット動作時における撮像部１４０の移動の操作性が向上する。
以上、本実施形態に係る運動目的の具体例として、パワーアシスト動作及びピボット動作について説明した。なお、本実施形態に係る運動目的はかかる例に限定されない。本実施形態では、例えば以下のような運動目的も実現可能である。
例えば、撮像部１４０の位置が所定の点で固定されるように、撮像部１４０の座標が運動目的として設定されてもよい。この場合、例えばアーム部１２０の撮像部１４０以外の構成部材に外部から力が与えられた際に、関節部１３０及びリンクも所定の位置で固定され移動しないように運動目的及び拘束条件を設定することも可能であるし、関節部１３０及びリンクは与えられた外力に応じて移動するものの撮像部１４０の位置は固定されるように運動目的及び拘束条件を設定することも可能である。後者の場合、例えば、アーム部１２０が作業の妨げとなり移動させようとする際に、撮像部１４０による撮影画像は固定されたままアーム部１２０の他の構成部材の位置及び姿勢を移動させるといった、より自由度の高い制御が実現される。
また、例えば、駆動中にアーム部１２０がヒトやモノとの接触を検出した場合に、即座にアーム部１２０の駆動を停止する動作が実現されるように、運動目的及び拘束条件が設定されてもよい。このような動作を行うことにより、アーム部１２０がヒトやモノに衝突する際の危険性を低減することができる。なお、アーム部１２０がヒトやモノと接触したことは、例えば関節状態検出部１３２によって関節部１３０に加えられた外トルクの変化によって検出されてもよい。
また、例えば、撮像部１４０が空間上において所定の軌跡上を移動するように運動目的が設定されてもよい。具体的には、当該所定の軌跡を表す各点の座標が運動目的として設定されてもよい。このように運動目的が設定されることにより、撮像部１４０の移動可能範囲が当該軌跡上に制限される。更に、当該軌跡を表す各点の座標と併せて、撮像部１４０の速度や各点を通過する時間等が運動目的として設定されることにより、撮像部１４０が所定の軌跡上を所定のタイミングで自動的に移動するオートメーション化された駆動を行うこともできる。このような運動設定に従った駆動制御は、例えばロボットアーム装置１０が所定の作業を自動的に繰り返し行う場合に有効である。
また、例えば、空間上の所定の領域内にアーム部１２０が侵入しない動作が実現されるように、運動目的及び拘束条件が設定されてもよい。図６を参照して説明したように、本実施形態においてはユーザが表示画面を見ながら手術を行う。従って、ユーザと表示画面との間の領域にアーム部１２０が位置すると、ユーザの視界を遮ることとなり、手術の効率低下につながる恐れがある。従って、例えばユーザと表示画面の間の領域をアーム部１２０の侵入禁止領域として設定することにより、手術の効率化を図ることができる。
ここで、このようにアーム部１２０に侵入禁止領域を設定する場合には、アーム部１２０の自由度が６自由度よりも多いことが好ましい。何故ならば、６自由度よりも多い自由度を冗長自由度として利用することができるため、６自由度の駆動を確保しつつ、上記のような侵入禁止領域等にも対応できるからである。このような６自由度よりも多い自由度を有するアーム部を備えるロボットアーム装置の構成について、図１４を参照して詳しく説明する。
図１４は、本開示の一実施形態に係るロボットアーム装置における冗長自由度を有する変形例の外観を示す概略図である。なお、図１４においても、図７で定義した方向と同一の座標軸を図示している。
図１４を参照すると、本変形例に係るロボットアーム装置４５０は、ベース部４６０及びアーム部４７０を備える。また、アーム部４７０は、複数の関節部４７１ａ〜４７１ｇと、関節部４７１ａ〜４７１ｇによって互いに連結される複数のリンク４７２ａ〜４７２ｄと、アーム部４７０の先端に設けられる撮像ユニット４７３を有する。ここで、図１４に示すロボットアーム装置４５０は、図７を参照して説明したロボットアーム装置４００に対してアーム部４７０の自由度が１つ増加した構成に対応している。従って、ベース部４６０、個々の関節部４７１ａ〜４７１ｇ及びリンク４７２ａ〜４７２ｄ、並びに、撮像ユニット４７３の機能及び構成は、図７を参照して説明したロボットアーム装置４００のベース部４１０、個々の関節部４２１ａ〜４２１ｆ及びリンク４２２ａ〜４２２ｃ、並びに、撮像ユニット４２３の機能及び構成と同様であるため、詳細な説明は省略する。以下では、ロボットアーム装置４００との相違点であるアーム部４７０の構成について主に説明する。
本実施形態に係るロボットアーム装置４５０は、７つの関節部４７１ａ〜４７１ｇを有し、アーム部４７０の駆動に関して７自由度が実現されている。具体的には、リンク４７２ａの一端がベース部４６０と連結され、リンク４７２ａの他端が関節部４２１ａを介してリンク４７２ｂの一端と連結される。また、リンク４２２ｂの他端が関節部４７１ｂ、４７１ｃを介してリンク４７２ｃの一端と連結される。更に、リンク４７２ｃの他端が関節部４７１ｄ、４７１ｅを介してリンク４７２ｄの一端と連結され、４７２ｄの他端が関節部４７１ｆ、４７１ｇを介して撮像ユニット４７３と連結される。このように、ベース部４６０を支点として、複数のリンク４７２ａ〜４７２ｄの端同士が、関節部４７１ａ〜４７１ｇによって互いに連結されることにより、ベース部４６０から延伸されるアーム部４７０が構成される。
また、図１４に示すように、関節部４７１ａ、４７１ｃ、４７１ｅ、４７１ｇは、接続されている各リンク４７２ｂ〜４７２ｄの長軸方向及び接続されている撮像ユニット４７３の撮影方向を回転軸方向とするように設けられており、関節部４７１ｂ、４７１ｄ、４７１ｆは、接続されている各リンク４７２ｃ〜４７２ｄ及び撮像ユニット４７３の連結角度をｙ−ｚ平面内において変更する方向であるｘ軸方向を回転軸方向とするように設けられている。このように、本変形例においては、関節部４７１ａ、４７１ｃ、４７１ｅ、４７１ｇは、いわゆるヨーイングを行う機能を有し、関節部４７１ｂ、４７１ｄ、４７１ｆは、いわゆるピッチングを行う機能を有する。
このようなアーム部４７０の構成を有することにより、本実施形態に係るロボットアーム装置４５０ではアーム部４７０の駆動に対して７自由度が実現されるため、アーム部４７０の可動範囲内において撮像ユニット４７３を空間内で自由に移動させることができるとともに、冗長自由度を有する。図１４では、図７と同様に、撮像ユニット４７３の移動可能範囲の一例として半球を図示している。半球の中心点が撮像ユニット４７３によって撮影される施術部位の撮影中心であるとすれば、撮像ユニット４７３の撮影中心を半球の中心点に固定した状態で、撮像ユニット４７３を半球の球面上で移動させることにより、施術部位をあらゆる角度から撮影することができる。本実施形態に係るロボットアーム装置４５０は、更に１つの冗長自由度を有することにより、このような撮像ユニット４７３の半球上の移動とともに、アーム部４７０の軌道を制限することができ、上述した侵入禁止領域のような拘束条件にも容易に対応することができる。侵入禁止領域を設定することにより、例えば、撮像ユニット４７３によって撮影された画像が表示されるモニタと施術者及びスタッフとの間にアーム部４７０が存在しないようにアーム部４７０の駆動を制御することができ、施術者及びスタッフによるモニタの視認が妨げられることを防ぐことができる。また、侵入禁止領域を設定することにより、施術者及びスタッフや周囲の他の機器との干渉（接触）を避けてアーム部４７０が移動するようにアーム部４７０の駆動を制御することが可能となる。
（４−３．ロボットアーム制御方法の処理手順）
次に、図１５を参照して、本開示の一実施形態に係るロボットアーム制御方法の処理手順について説明する。図１５は、本開示の一実施形態に係るロボットアーム制御方法の処理手順を示すフロー図である。なお、以下では、図１１に示すロボットアーム制御システム１の構成によって本実施形態に係るロボットアーム制御方法が実現される場合を例に挙げて説明を行う。従って、本実施形態に係るロボットアーム制御方法は医療用ロボットアーム制御方法であると言える。なお、以下の本実施形態に係るロボットアーム制御方法の処理手順についての説明において、図１１に示すロボットアーム制御システム１の各構成の機能については、上記（４−２−４．ロボットアーム制御システムの構成）で既に説明しているため、詳細な説明は省略する。
図１５を参照すると、本実施形態に係るロボットアーム制御方法では、まず、ステップＳ８０１で、関節状態検出部１３２によって関節部１３０の状態が検出される。ここで、関節部１３０の状態とは、例えば関節部１３０における回転角度、発生トルク及び／又は外トルクである。
次にステップＳ８０３で、ステップＳ８０１で検出された関節部１３０の状態に基づいて、アーム状態取得部２４１によってアーム状態が取得される。アーム状態とは、アーム部１２０の運動の状態のことであり、例えばアーム部１２０の各構成部材の位置、速度、加速度やアーム部１２０の各構成部材に作用する力等であってよい。
次にステップＳ８０５で、ステップＳ８０３で取得されたアーム状態に基づいて、演算条件設定部２４２によって全身協調制御における演算で用いられる運動目的及び拘束条件が設定される。なお、演算条件設定部２４２はアーム状態に基づいて運動目的を設定しなくてもよく、例えば、入力部２１０からユーザによって入力されるアーム部１２０の駆動についての指示情報に基づいて運動目的を設定してもよいし、記憶部２２０に予め格納されている運動目的を用いてもよい。更に、上記の各方法を適宜組み合わせることにより、運動目的を設定してもよい。また、演算条件設定部２４２は記憶部２２０に予め格納されている拘束条件を用いてもよい。
次にステップＳ８０７で、アーム状態、運動目的及び拘束条件に基づいて、一般化逆動力学を用いた全身協調制御についての演算が行われ、制御値τａが算出される。なお、ステップＳ８０７で行われる処理は、図１１に示す仮想力算出部２４３及び実在力算出部２４４における一連の処理、すなわち、上記（４−２−２．一般化逆動力学について）で説明した一連の処理であってよい。
次にステップＳ８０９で、外乱推定値τｄが算出され、当該外乱推定値τｄを用いて、理想関節制御についての演算が行われ、制御値τａから指令値τが算出される。なお、ステップＳ８０９で行われる処理は、図１１に示す理想関節制御部２５０における一連の処理、すなわち、上記（４−２−３．理想関節制御について）で説明した一連の処理であってよい。
最後にステップＳ８１１で、指令値τに基づいて、駆動制御部１１１によって関節部１３０の駆動が制御される。
以上、図１５を参照して、本実施形態に係るロボットアーム制御方法の処理手順について説明した。なお、本実施形態においては、図１５に示すステップＳ８０１〜ステップＳ８１１における処理が、アーム部１２０を用いた作業が行われている間繰り返し行われる。従って、本実施形態においては、アーム部１２０を用いた作業が行われている間、アーム部１２０の駆動制御が継続的に行われる。
（４−４．医療用ロボットアーム装置についてのまとめ）
以上説明したように、本実施形態においては、以下の効果を得ることができる。
以上説明したように、本実施形態によれば、ロボットアーム装置１０における多リンク構造体であるアーム部１２０が、少なくとも６自由度以上の自由度を有するとともに、当該アーム部１２０を構成する複数の関節部１３０のそれぞれの駆動が駆動制御部１１１によって制御される。そして、当該アーム部１２０の先端には医療用器具が設けられる。このように、各関節部１３０の駆動が制御されることにより、より自由度の高いアーム部１２０の駆動制御が実現され、よりユーザにとって操作性の高い医療用のロボットアーム装置１０が実現される。
具体的には、本実施形態によれば、ロボットアーム装置１０において、関節状態検出部１３２によって関節部１３０の状態が検出される。そして、制御装置２０において、当該関節部１３０の状態と、運動目的及び拘束条件とに基づいて、アーム部１２０の駆動を制御するための一般化逆動力学を用いた全身協調制御に関する各種の演算が行われ、演算結果としてのトルク指令値τが算出される。更に、ロボットアーム装置１０において、当該トルク指令値τに基づいてアーム部１２０の駆動が制御される。このように、本実施形態においては、一般化逆動力学を用いた全身協調制御により、アーム部１２０の駆動が制御される。従って、力制御によるアーム部１２０の駆動制御が実現され、よりユーザにとって操作性の高いロボットアーム装置が実現される。また、本実施形態では、全身協調制御において、例えばピボット動作やパワーアシスト動作といった、よりユーザの利便性を向上させる各種の運動目的を実現する制御が可能となる。更に、本実施形態においては、例えばアーム部１２０を手動で移動させたり、ペダルからの操作入力により移動させたりといった、多様な駆動手段が実現されるため、ユーザの利便性の更なる向上が実現される。
また、本実施形態においては、アーム部１２０の駆動制御について、全身協調制御と併せて理想関節制御が適用される。理想関節制御においては、関節部１３０内部の摩擦や慣性等の外乱成分を推定し、推定した外乱成分を用いたフィードフォワード制御が行われる。従って、摩擦等の外乱成分がある場合であっても、関節部１３０の駆動について理想的な応答を実現することができる。よって、アーム部１２０の駆動制御において、振動等の影響がより少ない、高精度の応答性と高い位置決め精度や安定性が実現される。
更に、本実施形態においては、アーム部１２０を構成する複数の関節部１３０のそれぞれが、例えば図８に示すような、理想関節制御に適合した構成を有し、各関節部１３０における回転角度、発生トルク及び粘性抵抗係数を電流値によって制御することができる。このように、各関節部１３０の駆動が電流値によって制御され、また、全身協調制御により各関節部１３０の駆動がアーム部１２０全体の状態を把握しながら制御されるため、カウンターバランスが不要となり、ロボットアーム装置１０の小型化が実現される。
このように、本実施形態によれば、上記（４−１．医療用ロボットアーム装置についての検討）で説明したロボットアーム装置に求められる性能を全て満たすことができる。従って、本実施形態に係るロボットアーム装置を用いた各種の施術において、より効率的に施術を行うことができ、ユーザや患者の疲労や負担をより軽減することが実現される。
また、本実施形態では、力制御によってロボットアーム装置１０のアーム部１２０が駆動されることにより、万が一駆動中にアーム部１２０が施術者やスタッフ等に干渉（接触）したとしても、アーム部１２０が必要以上の力を発生せず、アーム部１２０が安全に停止する。そして、当該干渉から解放されれば、設定された運動目的に従って所望の位置までアーム部１２０が移動し、施術が継続される。このように、本実施形態では、ロボットアーム装置１０の駆動制御に力制御が用いられることにより、駆動中におけるアーム部１２０と周囲の物体との干渉に対して、より高い安全性が確保される。
なお、例えば、上記実施形態では、ロボットアーム装置のアーム部の先端ユニットが撮像ユニットであり、図６に示すように手術時に当該撮像ユニットによって施術部位を撮影する場合について説明したが、本実施形態はかかる例に限定されない。本実施形態に係るロボットアーム制御システム１は、他の先端ユニットを有するロボットアーム装置が他の用途に用いられる場合であっても適用可能である。例えば、先端ユニットは内視鏡や腹腔鏡であってもよいし、超音波検査器や胃カメラ等、他の検査機器であってもよい。
例えば、腹腔鏡を用いた施術では、患者の体内に腹腔鏡を挿入し、当該腹腔鏡によって撮影された映像を観察しながら、別途挿入される鉗子や電気メス等の術具を用いて各種の処置が行われる。このような施術方法においては、例えば腹腔鏡をロボットアームによって操作しながら、処置用の術具を施術者が直接操作することができれば、１人のユーザによって施術を行うことができ、より効率的な施術が可能となる。しかしながら、一般的な既存のバランス型アームにおいては、操作性の観点から、１人のユーザが、自身の手による術具の操作とロボットアームによる腹腔鏡の操作とを同時に行うことは困難であった。よって、既存の方法では、複数名のスタッフが必要であり、１人の施術者がロボットアームによって腹腔鏡を操作しながら、他の者が術具を用いた処置を行うことが一般的であった。しかし、本実施形態に係るロボットアーム装置では、上述したように、全身協調制御による高い操作性が実現される。また、理想関節制御により、振動等の影響がより少ない、高精度の応答性と高い安定性が実現される。従って、本実施形態によれば、ロボットアーム装置による観察用の腹腔鏡の操作と、自身の手による術具の操作とを、施術者１人で容易に行うことが可能となる。
また、本実施形態に係るロボットアーム装置は、医療以外の用途に用いられてもよい。本実施形態に係るロボットアーム装置では、理想関節制御により、高精度の応答性と高い安定性が実現されるため、例えば高い精度が求められる工業部品の加工や組み立て等の作業にも対応可能である。
また、上記実施形態では、ロボットアーム装置の関節部が回転機構を有し、当該回転機構の回転駆動が制御されることによってアーム部の駆動が制御される場合について説明したが、本実施形態はかかる例に限定されない。例えば、本実施形態に係るロボットアーム装置においては、アーム部を構成するリンクがリンクの延伸方向に伸縮する機構（例えば油圧で駆動するものやボールねじを駆動するもの等）を有し、リンクの長さが可変であってもよい。リンクの長さが可変である場合、例えば関節部における回転に加えてリンクの伸縮も考慮した全身協調制御によって、所望の運動目的を達成するようにアーム部の駆動が制御される。
また、上記実施形態では、ロボットアーム装置におけるアーム部の自由度が６自由度以上である場合について説明したが、本実施形態はかかる例に限定されない。また、ロボットアーム装置におけるアーム部を構成する複数の関節部が全て理想関節制御に対応するアクチュエータを有する場合について説明したが、本実施形態はかかる例に限定されない。本実施形態においては、ロボットアーム装置の用途に応じて多様な運動目的が設定され得る。従って、設定された運動目的が達成可能であれば、アーム部は、６自由度よりも低い自由度を有してもよいし、アーム部を構成する複数の関節部のうちの一部が一般的な関節機構を有する関節部であってもよい。このように、本実施形態においては、アーム部の構成は、運動目的を達成可能であるように構成されればよく、ロボットアーム装置の用途に応じて適宜構成されてよい。
＜５．ハードウェア構成＞
次に、図１６を参照しながら、図１及び図１１に示す、本実施形態に係るロボットアーム装置１０及び制御装置２０のハードウェア構成について、詳細に説明する。図１６は、本開示の一実施形態に係るロボットアーム装置１０及び制御装置２０のハードウェア構成の一構成例を示す機能ブロック図である。
ロボットアーム装置１０及び制御装置２０は、主に、ＣＰＵ９０１と、ＲＯＭ９０３と、ＲＡＭ９０５と、を備える。また、ロボットアーム装置１０及び制御装置２０は、更に、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９と、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備える。
ＣＰＵ９０１は、演算処理装置及び制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９又はリムーバブル記録媒体９２７に記録された各種プログラムに従って、ロボットアーム装置１０及び制御装置２０内の動作全般又はその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。ＣＰＵ９０１は、本実施形態においては、例えば、図１１に示すアーム制御部１１０及び制御部２３０に対応している。
ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。また、外部バス９１１には、インターフェース９１３を介して、入力装置９１５、出力装置９１７、ストレージ装置９１９、ドライブ９２１、接続ポート９２３及び通信装置９２５が接続される。
入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、レバー及びペダル等、ユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、ロボットアーム装置１０及び制御装置２０の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。ロボットアーム装置１０及び制御装置２０のユーザは、この入力装置９１５を操作することにより、ロボットアーム装置１０及び制御装置２０に対して各種のデータを入力したり処理動作を指示したりすることができる。入力装置９１５は、本実施形態においては、例えば、図１１に示す入力部２１０に対応する。また、本実施形態においては、入力装置９１５を介したユーザによる操作入力により、アーム部１２０の駆動における運動目的が設定され、当該運動目的に従って全身協調制御が行われてもよい。
出力装置９１７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で構成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置及びランプ等の表示装置や、スピーカ及びヘッドホン等の音声出力装置や、プリンタ装置等がある。出力装置９１７は、例えば、ロボットアーム装置１０及び制御装置２０が行った各種処理により得られた結果を出力する。具体的には、表示装置は、ロボットアーム装置１０及び制御装置２０が行った各種処理により得られた結果を、テキスト又はイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。本実施形態においては、アーム部１２０の駆動制御に関する各種の情報が、あらゆる形式で出力装置９１７から出力されてよい。例えば、アーム部１２０の駆動制御における、アーム部１２０の各構成部材の移動の軌跡が、グラフの形式で出力装置９１７の表示画面に表示されてもよい。なお、例えば、図１１に示す表示装置３０は、出力装置９１７の表示装置としての機能及び構成と、当該表示装置の駆動を制御するための制御部等の構成を備える装置であってもよい。
ストレージ装置９１９は、ロボットアーム装置１０及び制御装置２０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ等を格納する。ストレージ装置９１９は、本実施形態においては、例えば、図１及び図１１に示す記憶部２２０に対応する。また、本実施形態においては、ストレージ装置９１９は、一般化逆動力学を用いた全身協調制御に関する演算における演算条件（運動目的及び拘束条件）を記憶することができ、ロボットアーム装置１０及び制御装置２０はストレージ装置９１９に記憶されているこれらの演算条件を用いて全身協調制御に関する演算を行ってもよい。
ドライブ９２１は、記録媒体用リーダライタであり、ロボットアーム装置１０及び制御装置２０に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク又は半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク又は半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ−ＤＶＤメディア又はＢｌｕ−ｒａｙ（登録商標）メディア等である。また、リムーバブル記録媒体９２７は、コンパクトフラッシュ（登録商標）（ＣＦ：ＣｏｍｐａｃｔＦｌａｓｈ）、フラッシュメモリ又はＳＤメモリカード（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ ｍｅｍｏｒｙ ｃａｒｄ）等であってもよい。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ ｃａｒｄ）又は電子機器等であってもよい。本実施形態においては、アーム部１２０の駆動制御に関する各種の情報が、ドライブ９２１によって、各種のリムーバブル記録媒体９２７から読み出され、又は各種のリムーバブル記録媒体９２７に書き込まれてよい。
接続ポート９２３は、機器をロボットアーム装置１０及び制御装置２０に直接接続するためのポートである。接続ポート９２３の一例として、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）ポート等がある。接続ポート９２３の別の例として、ＲＳ−２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ポート等がある。この接続ポート９２３に外部接続機器９２９を接続することで、ロボットアーム装置１０及び制御装置２０は、外部接続機器９２９から直接各種のデータを取得したり、外部接続機器９２９に各種のデータを提供したりする。本実施形態においては、アーム部１２０の駆動制御に関する各種の情報が、接続ポート９２３を介して、各種の外部接続機器９２９から読み出され、又は各種の外部接続機器９２９に書き込まれてよい。
通信装置９２５は、例えば、通信網（ネットワーク）９３１に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線若しくは無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード等である。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ又は各種通信用のモデム等であってもよい。この通信装置９２５は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置９２５に接続される通信網９３１は、有線又は無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信又は衛星通信等であってもよい。本実施形態においては、アーム部１２０の駆動制御に関する各種の情報が、通信装置９２５によって、通信網９３１を介して外部の他の機器との間で相互に送受信されてもよい。
以上、本開示の実施形態に係るロボットアーム装置１０及び制御装置２０の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。なお、図１６では図示しないが、ロボットアーム装置１０は、図１及び図１１に示すアーム部１２０に対応する各種の構成を当然備える。
なお、上述のような本実施形態に係るロボットアーム装置１０、制御装置２０及び表示装置３０の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
＜６．補足＞
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）複数のリンクが関節部によって連結されて構成され、撮像部を接続可能なアーム部、を備え、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルが、前記撮像部が実空間上の基準点に向けられた状態において取得される内部モデル情報を用いて更新される、ロボットアーム装置。
（２）前記内部モデル情報は、前記アーム部の幾何情報、前記撮像部の焦点位置情報及び前記撮像部の視野領域の位置ずれ量を表す位置ずれ情報を含む、前記（１）に記載のロボットアーム装置。
（３）前記アーム部及び前記撮像部の位置及び姿勢が互いに異なる複数の状態において、互いに異なる複数の前記内部モデル情報が取得され、前記内部モデルは、取得された複数の内部モデル情報を用いて更新される、前記（１）又は（２）に記載のロボットアーム装置。
（４）前記内部モデル情報は、互いに異なる複数の基準点に対してそれぞれ取得され、前記内部モデルは、当該複数の基準点に対応する複数の内部モデル情報を用いて更新される、前記（１）〜（３）のいずれか１項に記載のロボットアーム装置。
（５）複数の前記内部モデル情報に基づいて、前記内部モデルにおける座標系と実空間における座標系とのずれ量を未知数として含む、前記内部モデルを記述する複数の内部モデル式が作成され、前記複数の内部モデル式を用いて前記内部モデルが更新される、前記（３）又は（４）に記載のロボットアーム装置。
（６）前記基準点は、実空間上における座標が既知の点として設定される、前記（１）〜（５）のいずれか１項に記載のロボットアーム装置。
（７）前記基準点は、前記アーム部に取り付けられる冶具上の所定の点として設定される、前記（１）〜（５）のいずれか１項に記載のロボットアーム装置。
（８）前記関節部の状態に基づいて前記関節部の駆動を制御する駆動制御部、を更に備え、前記駆動制御部は、複数の前記関節部の状態に基づいて取得される前記アーム部の状態に基づく、前記アーム部の協調制御のための制御値に基づいて前記関節部の駆動を制御する、前記（１）〜（７）のいずれか１項に記載のロボットアーム装置。
（９）前記駆動制御部は、検出された複数の前記関節部の状態に基づいて取得される前記アーム部の状態と、前記アーム部の運動目的及び拘束条件と、を用いた一般化逆動力学による前記アーム部の全身協調制御のための制御値、に基づいて前記関節部の駆動を制御する、前記（８）に記載のロボットアーム装置。
（１０）前記制御値は、前記アーム部に作用する力と前記アーム部に発生する加速度との関係を記述する操作空間において前記運動目的を達成するために作用される仮想力と、前記拘束条件に基づいて前記仮想力が前記関節部を駆動するための実在力と、に基づいて算出される、前記（９）に記載のロボットアーム装置。
（１１）前記駆動制御部は、前記制御値に対して外乱の影響を補正することにより算出される指令値に基づいて前記関節部の駆動を制御する、前記（８）又は（９）に記載のロボットアーム装置。
（１２）前記指令値は、検出された前記関節部の状態に基づいて推定される前記関節部の駆動に対する外乱の影響を表す外乱推定値を用いて、前記制御値を補正することにより算出される、前記（１１）に記載のロボットアーム装置。
（１３）前記駆動制御部は、前記撮像部の光軸上に実空間上の所定の点が位置するという拘束条件に基づいて前記関節部の駆動を制御することにより、前記撮像部が前記所定の点を向いた状態で前記所定の点を頂点とするピボット動作を行うように、前記アーム部の駆動を制御する、前記（９）〜（１２）のいずれか１項に記載のロボットアーム装置。
（１４）前記駆動制御部は、前記撮像部の光軸上の所定の点である第１の点が実空間上の所定の点である第２の点に固定されるという拘束条件に基づいて前記関節部の駆動を制御することにより、前記撮像部が前記第２の点を向いた状態で前記第２の点を中心とするピボット動作を行うように、前記アーム部の駆動を制御する、前記（９）〜（１２）のいずれか１項に記載のロボットアーム装置。
（１５）複数の前記関節部は、前記関節部の状態を検出する関節状態検出部を有し、前記関節状態検出部は、前記関節部での発生トルク及び前記関節部に外部から加えられる外トルクを検出するトルク検出部と、前記関節部の回転角度を検出する回転角度検出部と、を少なくとも有する、前記（１）〜（１４）のいずれか１項に記載のロボットアーム装置。
（１６）前記制御値は、前記関節部での発生トルクである、前記（８）〜（１４）のいずれか１項に記載のロボットアーム装置。
（１７）前記撮像部は顕微鏡である、前記（１）〜（１６）のいずれか１項に記載のロボットアーム装置。
（１８）前記ロボットアーム装置は医療行為に用いられる、前記（１）〜（１７）のいずれか１項に記載のロボットアーム装置。
（１９）複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得することと、取得した前記内部モデル情報を用いて、前記内部モデルを更新することと、を含む、キャリブレーション方法。
（２０）コンピュータのプロセッサに、複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得する機能と、取得した前記内部モデル情報を用いて、前記内部モデルを更新する機能と、を実現させる、プログラム。
１ ロボットアーム制御システム
１０ ロボットアーム装置
２０ 制御装置
３０ 表示装置
１１０ アーム制御部
１１１ 駆動制御部
１２０ アーム部
１３０ 関節部
１３１ 関節駆動部
１３２ 回転角度検出部
１３３ トルク検出部
１４０ 撮像部
２１０ 入力部
２２０ 記憶部
２３０ 制御部
２４０ 全身協調制御部
２４１ アーム状態取得部
２４２ 演算条件設定部
２４３ 仮想力算出部
２４４ 実在力算出部
２５０ 理想関節制御部
２５１ 外乱推定部
２５２ 指令値算出部
２６０ 内部モデル情報取得部
２６２ 焦点位置情報取得部
２６３ 位置ずれ情報取得部
２７０ 内部モデル更新部

Claims (20)

  1. 複数のリンクが関節部によって連結されて構成され、撮像部を接続可能なアーム部、
    を備え、
    少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルが、前記撮像部が実空間上の基準点に向けられた状態において取得される内部モデル情報を用いて更新される、
    ロボットアーム装置。
  2. 前記内部モデル情報は、前記アーム部の幾何情報、前記撮像部の焦点位置情報及び前記撮像部の視野領域の位置ずれ量を表す位置ずれ情報を含む、
    請求項１に記載のロボットアーム装置。
  3. 前記アーム部及び前記撮像部の位置及び姿勢が互いに異なる複数の状態において、互いに異なる複数の前記内部モデル情報が取得され、
    前記内部モデルは、取得された複数の内部モデル情報を用いて更新される、
    請求項１に記載のロボットアーム装置。
  4. 前記内部モデル情報は、互いに異なる複数の基準点に対してそれぞれ取得され、
    前記内部モデルは、当該複数の基準点に対応する複数の内部モデル情報を用いて更新される、
    請求項３に記載のロボットアーム装置。
  5. 複数の前記内部モデル情報に基づいて、前記内部モデルにおける座標系と実空間における座標系とのずれ量を未知数として含む、前記内部モデルを記述する複数の内部モデル式が作成され、
    前記複数の内部モデル式を用いて前記内部モデルが更新される、
    請求項３に記載のロボットアーム装置。
  6. 前記基準点は、実空間上における座標が既知の点として設定される、
    請求項１に記載のロボットアーム装置。
  7. 前記基準点は、前記アーム部に取り付けられる冶具上の所定の点として設定される、
    請求項１に記載のロボットアーム装置。
  8. 前記関節部の状態に基づいて前記関節部の駆動を制御する駆動制御部、を更に備え、
    前記駆動制御部は、複数の前記関節部の状態に基づいて取得される前記アーム部の状態に基づく、前記アーム部の協調制御のための制御値に基づいて前記関節部の駆動を制御する、
    請求項１に記載のロボットアーム装置。
  9. 前記駆動制御部は、検出された複数の前記関節部の状態に基づいて取得される前記アーム部の状態と、前記アーム部の運動目的及び拘束条件と、を用いた一般化逆動力学による前記アーム部の全身協調制御のための制御値、に基づいて前記関節部の駆動を制御する、
    請求項８に記載のロボットアーム装置。
  10. 前記制御値は、前記アーム部に作用する力と前記アーム部に発生する加速度との関係を記述する操作空間において前記運動目的を達成するために作用される仮想力と、前記拘束条件に基づいて前記仮想力が前記関節部を駆動するための実在力と、に基づいて算出される、
    請求項９に記載のロボットアーム装置。
  11. 前記駆動制御部は、前記制御値に対して外乱の影響を補正することにより算出される指令値に基づいて前記関節部の駆動を制御する、
    請求項８に記載のロボットアーム装置。
  12. 前記指令値は、検出された前記関節部の状態に基づいて推定される前記関節部の駆動に対する外乱の影響を表す外乱推定値を用いて、前記制御値を補正することにより算出される、
    請求項１１に記載のロボットアーム装置。
  13. 前記駆動制御部は、前記撮像部の光軸上に実空間上の所定の点が位置するという拘束条件に基づいて前記関節部の駆動を制御することにより、前記撮像部が前記所定の点を向いた状態で前記所定の点を頂点とするピボット動作を行うように、前記アーム部の駆動を制御する、
    請求項９に記載のロボットアーム装置。
  14. 前記駆動制御部は、前記撮像部の光軸上の所定の点である第１の点が実空間上の所定の点である第２の点に固定されるという拘束条件に基づいて前記関節部の駆動を制御することにより、前記撮像部が前記第２の点を向いた状態で前記第２の点を中心とするピボット動作を行うように、前記アーム部の駆動を制御する、
    請求項９に記載のロボットアーム装置。
  15. 複数の前記関節部は、前記関節部の状態を検出する関節状態検出部を有し、
    前記関節状態検出部は、
    前記関節部での発生トルク及び前記関節部に外部から加えられる外トルクを検出するトルク検出部と、
    前記関節部の回転角度を検出する回転角度検出部と、
    を少なくとも有する、
    請求項１に記載のロボットアーム装置。
  16. 前記制御値は、前記関節部での発生トルクである、
    請求項８に記載のロボットアーム装置。
  17. 前記撮像部は顕微鏡である、
    請求項１に記載のロボットアーム装置。
  18. 前記ロボットアーム装置は医療行為に用いられる、
    請求項１に記載のロボットアーム装置。
  19. 複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得することと、
    取得した前記内部モデル情報を用いて、前記内部モデルを更新することと、
    を含む、
    キャリブレーション方法。
  20. コンピュータのプロセッサに、
    複数のリンクが関節部によって連結されて構成されるアーム部に設けられる撮像部が実空間上の基準点に向けられた状態において、少なくとも前記アーム部の幾何情報及び前記撮像部の焦点位置情報を含む内部モデルを規定するための内部モデル情報を取得する機能と、
    取得した前記内部モデル情報を用いて、前記内部モデルを更新する機能と、
    を実現させる、プログラム。
JP2016505142A 2014-02-28 2015-02-12 医療用アーム装置、キャリブレーション方法及びプログラム Expired - Fee Related JP6555248B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014038653 2014-02-28
JP2014038653 2014-02-28
PCT/JP2015/053874 WO2015129473A1 (ja) 2014-02-28 2015-02-12 ロボットアーム装置、キャリブレーション方法及びプログラム

Publications (2)

Publication Number Publication Date
JPWO2015129473A1 true JPWO2015129473A1 (ja) 2017-03-30
JP6555248B2 JP6555248B2 (ja) 2019-08-07

Family

ID=54008796

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016505142A Expired - Fee Related JP6555248B2 (ja) 2014-02-28 2015-02-12 医療用アーム装置、キャリブレーション方法及びプログラム

Country Status (5)

Country Link
US (1) US10556345B2 (ja)
EP (1) EP3112096B1 (ja)
JP (1) JP6555248B2 (ja)
CN (1) CN106029308B (ja)
WO (1) WO2015129473A1 (ja)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2754039T3 (es) * 2014-04-30 2020-04-15 Abb Schweiz Ag Procedimiento para calibrar un punto central de una herramienta para un sistema de robot industrial
US10179407B2 (en) * 2014-11-16 2019-01-15 Robologics Ltd. Dynamic multi-sensor and multi-robot interface system
US9592603B2 (en) * 2014-12-01 2017-03-14 Spin Master Ltd. Reconfigurable robotic system
JP6576042B2 (ja) * 2015-01-14 2019-09-18 キヤノン株式会社 表示制御装置及びその方法、プログラム
JP2016221645A (ja) * 2015-06-02 2016-12-28 セイコーエプソン株式会社 ロボット、ロボット制御装置およびロボットシステム
GB201512966D0 (en) * 2015-07-22 2015-09-02 Cambridge Medical Robotics Ltd Drive arrangements for robot arms
DE102016200214B4 (de) * 2016-01-11 2021-06-10 Carl Zeiss Meditec Ag Stativ und Verfahren für die Drehmomentkompensation
JP6704255B2 (ja) * 2016-01-19 2020-06-03 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置、医療用観察システム及び画揺れ補正方法
JP6654066B2 (ja) 2016-03-11 2020-02-26 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置
US11160633B2 (en) * 2016-03-28 2021-11-02 Sony Olympus Medical Solutions Inc. Medical observation apparatus, driving control method, medical observation system, and support arm apparatus
JP2017177255A (ja) * 2016-03-29 2017-10-05 ソニー株式会社 制御装置及び制御方法
WO2017169143A1 (ja) * 2016-03-30 2017-10-05 ソニー株式会社 情報処理装置、情報処理方法及びキャリブレーションシステム
WO2017187795A1 (ja) * 2016-04-28 2017-11-02 ソニー株式会社 制御装置、制御方法及び手術システム
CN106547249B (zh) * 2016-10-14 2019-03-01 广州励丰文化科技股份有限公司 一种语音检测与本地媒体相结合的机械臂控制台及方法
JP6661027B2 (ja) * 2016-11-17 2020-03-11 株式会社Ｆｕｊｉ 作業ロボット
JP6904767B2 (ja) * 2017-04-18 2021-07-21 キヤノン株式会社 連続体ロボットシステムの制御装置、連続体ロボットシステムの作動方法、プログラム
JP6915395B2 (ja) * 2017-06-16 2021-08-04 セイコーエプソン株式会社 制御装置、ロボットシステム、テーブル作成方法およびロボット制御方法
CN107423515B (zh) * 2017-08-01 2020-08-04 中科新松有限公司 机械臂摩擦辨识方法、装置、设备及存储介质
CN107703756B (zh) * 2017-11-03 2021-03-02 广州视源电子科技股份有限公司 动力学模型参数辨识方法、装置、计算机设备及存储介质
CN107718049B (zh) * 2017-11-10 2022-02-15 尊道（上海）自动化设备有限公司 一种机械手工作位置偏移的检测机构及检测方法
JP7199178B2 (ja) * 2018-08-28 2023-01-05 株式会社東芝 ロボット制御装置、ロボット装置、ロボット制御のパラメータ調整方法、およびプログラム
JP6823024B2 (ja) 2018-09-11 2021-01-27 ファナック株式会社 ロボットのキャリブレーションシステムおよびキャリブレーション方法
JP7163115B2 (ja) * 2018-09-12 2022-10-31 キヤノン株式会社 ロボットシステム、ロボットシステムの制御方法、物品の製造方法、制御装置、操作装置、撮像装置、制御プログラム及び記録媒体
CN109571475B (zh) * 2018-12-06 2021-06-15 中国科学院长春光学精密机械与物理研究所 一种力触觉控制系统及机器人
JP7305951B2 (ja) * 2018-12-14 2023-07-11 ニデック株式会社 キャリブレーション装置及びキャリブレーション方法
US20220072708A1 (en) * 2019-02-08 2022-03-10 Nec Corporation Motion model calculation device, control device, joint mechanism, and motion model calculation method
US11690680B2 (en) 2019-03-19 2023-07-04 Mako Surgical Corp. Trackable protective packaging for tools and methods for calibrating tool installation using the same
JP2020160185A (ja) * 2019-03-25 2020-10-01 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置及び医療用観察システム
JP7275759B2 (ja) * 2019-03-28 2023-05-18 セイコーエプソン株式会社 物体検出方法、物体検出装置およびロボットシステム
CN110653016B (zh) * 2019-11-05 2021-05-28 英华达（上海）科技有限公司 移液系统及其校准方法
CN111714210B (zh) * 2020-06-30 2024-02-13 深圳市精锋医疗科技股份有限公司 手术机器人及其控制装置、控制方法
JP2022156449A (ja) * 2021-03-31 2022-10-14 ソニーグループ株式会社 手術ロボット及び手術システム
JPWO2023013740A1 (ja) * 2021-08-04 2023-02-09
US20240009848A1 (en) * 2021-11-05 2024-01-11 Foshan Flexiv Robotics Technology Co, . Ltd. Kinematics calibration method and calibration system for robot with multiple degrees of freedom
CN114152680B (zh) * 2021-11-26 2022-06-21 中国科学院合肥物质科学研究院 一种六轴机械臂超声波检测系统的tcp校准方法及装置
CN114081635B (zh) * 2022-01-21 2022-04-12 极限人工智能有限公司 基于图像的器械角度检测方法、装置、设备及存储介质

Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62214304A (ja) * 1986-03-17 1987-09-21 Seiko Epson Corp ロボツトの絶対精度測定法
JPH06187021A (ja) * 1992-12-15 1994-07-08 Citizen Watch Co Ltd 視覚付きロボットの座標補正方法
JPH0929673A (ja) * 1995-07-10 1997-02-04 Mitsubishi Heavy Ind Ltd マニピュレータ制御装置
JPH1063317A (ja) * 1996-08-13 1998-03-06 Fanuc Ltd ロボット−視覚センサシステムにおける座標系結合方法
JP2000115809A (ja) * 1998-09-29 2000-04-21 Mitsubishi Heavy Ind Ltd 三次元表示マンマシン・システム
JP2005138223A (ja) * 2003-11-06 2005-06-02 Fanuc Ltd ロボット用位置データ修正装置
JP2006293624A (ja) * 2005-04-08 2006-10-26 Mitsubishi Electric Corp 多軸制御装置
JP2007061979A (ja) * 2005-09-01 2007-03-15 Sharp Corp ロボットアームの視覚センサ補正方法およびコンピュータプログラム
US20070156017A1 (en) * 2005-12-30 2007-07-05 Intuitive Surgical Inc. Stereo telestration for robotic surgery
JP2007260298A (ja) * 2006-03-29 2007-10-11 Univ Waseda 手術支援ロボットの動作制御システム及び位置検出装置
JP2009028851A (ja) * 2007-07-27 2009-02-12 Nachi Fujikoshi Corp ロボット制御装置
WO2009110242A1 (ja) * 2008-03-06 2009-09-11 パナソニック株式会社 マニピュレータおよびその制御方法
JP2012081568A (ja) * 2010-10-14 2012-04-26 Sony Corp ロボットの制御装置及び制御方法、並びにコンピューター・プログラム
JP2012091280A (ja) * 2010-10-27 2012-05-17 Mitsubishi Electric Corp 座標系校正方法及びロボットシステム
JP2012196486A (ja) * 2005-09-30 2012-10-18 Restoration Robotics Inc 毛嚢ユニットの採収および移植用の自動システム
JP2013066965A (ja) * 2011-09-21 2013-04-18 Toshiba Corp ロボット制御装置、外乱判定方法およびアクチュエータ制御方法
WO2013071071A1 (en) * 2011-11-09 2013-05-16 Intuitive Surgical Operations, Inc. Application of force feedback on an input device to urge its operator to command an articulated instrument to a preferred pose
JP2014014876A (ja) * 2012-07-05 2014-01-30 Canon Inc ロボット制御装置、及びロボット制御方法
US20140039517A1 (en) * 2012-08-03 2014-02-06 Stryker Corporation Navigation System for use with a Surgical Manipulator Operable in Manual or Semi-Autonomous Modes

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5297238A (en) 1991-08-30 1994-03-22 Cimetrix Incorporated Robot end-effector terminal control frame (TCF) calibration method and device
JP4265088B2 (ja) 2000-07-10 2009-05-20 株式会社豊田中央研究所 ロボット装置及びその制御方法
US6940891B2 (en) * 2002-10-28 2005-09-06 Metron Systems, Inc. High precision optical imaging systems and related systems
JP5272617B2 (ja) 2008-09-26 2013-08-28 株式会社Ｉｈｉ ロボット装置及びロボット装置の制御方法
US9498231B2 (en) * 2011-06-27 2016-11-22 Board Of Regents Of The University Of Nebraska On-board tool tracking system and methods of computer assisted surgery
BR112015023547B8 (pt) * 2013-03-15 2022-09-27 Synaptive Medical Inc Montagem de braço automatizado para uso usado durante um procedimento médico sobre uma parte anatômica
US9827054B2 (en) * 2014-03-14 2017-11-28 Synaptive Medical (Barbados) Inc. Intelligent positioning system and methods therefore
CN103398702B (zh) * 2013-08-05 2015-08-19 青岛海通机器人系统有限公司 一种移动机器人远程操控装置及其操控技术

Patent Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62214304A (ja) * 1986-03-17 1987-09-21 Seiko Epson Corp ロボツトの絶対精度測定法
JPH06187021A (ja) * 1992-12-15 1994-07-08 Citizen Watch Co Ltd 視覚付きロボットの座標補正方法
JPH0929673A (ja) * 1995-07-10 1997-02-04 Mitsubishi Heavy Ind Ltd マニピュレータ制御装置
JPH1063317A (ja) * 1996-08-13 1998-03-06 Fanuc Ltd ロボット−視覚センサシステムにおける座標系結合方法
JP2000115809A (ja) * 1998-09-29 2000-04-21 Mitsubishi Heavy Ind Ltd 三次元表示マンマシン・システム
JP2005138223A (ja) * 2003-11-06 2005-06-02 Fanuc Ltd ロボット用位置データ修正装置
JP2006293624A (ja) * 2005-04-08 2006-10-26 Mitsubishi Electric Corp 多軸制御装置
JP2007061979A (ja) * 2005-09-01 2007-03-15 Sharp Corp ロボットアームの視覚センサ補正方法およびコンピュータプログラム
JP2012196486A (ja) * 2005-09-30 2012-10-18 Restoration Robotics Inc 毛嚢ユニットの採収および移植用の自動システム
US20070156017A1 (en) * 2005-12-30 2007-07-05 Intuitive Surgical Inc. Stereo telestration for robotic surgery
JP2007260298A (ja) * 2006-03-29 2007-10-11 Univ Waseda 手術支援ロボットの動作制御システム及び位置検出装置
JP2009028851A (ja) * 2007-07-27 2009-02-12 Nachi Fujikoshi Corp ロボット制御装置
WO2009110242A1 (ja) * 2008-03-06 2009-09-11 パナソニック株式会社 マニピュレータおよびその制御方法
JP2012081568A (ja) * 2010-10-14 2012-04-26 Sony Corp ロボットの制御装置及び制御方法、並びにコンピューター・プログラム
JP2012091280A (ja) * 2010-10-27 2012-05-17 Mitsubishi Electric Corp 座標系校正方法及びロボットシステム
JP2013066965A (ja) * 2011-09-21 2013-04-18 Toshiba Corp ロボット制御装置、外乱判定方法およびアクチュエータ制御方法
WO2013071071A1 (en) * 2011-11-09 2013-05-16 Intuitive Surgical Operations, Inc. Application of force feedback on an input device to urge its operator to command an articulated instrument to a preferred pose
JP2014014876A (ja) * 2012-07-05 2014-01-30 Canon Inc ロボット制御装置、及びロボット制御方法
US20140039517A1 (en) * 2012-08-03 2014-02-06 Stryker Corporation Navigation System for use with a Surgical Manipulator Operable in Manual or Semi-Autonomous Modes

Also Published As

Publication number Publication date
CN106029308B (zh) 2019-10-29
EP3112096A4 (en) 2017-11-15
US20170066131A1 (en) 2017-03-09
JP6555248B2 (ja) 2019-08-07
CN106029308A (zh) 2016-10-12
EP3112096A1 (en) 2017-01-04
WO2015129473A1 (ja) 2015-09-03
EP3112096B1 (en) 2020-10-14
US10556345B2 (en) 2020-02-11

Similar Documents

Publication Publication Date Title
JP6555248B2 (ja) 医療用アーム装置、キャリブレーション方法及びプログラム
JP6272885B2 (ja) 医療用ロボットアーム装置、医療用ロボットアーム制御システム、医療用ロボットアーム制御方法及びプログラム
JP6614130B2 (ja) 手術用ロボットアーム装置、手術用ロボットアーム制御方法及びプログラム
JP6586079B2 (ja) アーム装置、及びプログラム
JP6773165B2 (ja) 医療用支持アーム装置、医療用支持アーム制御方法及びプログラム
WO2015133291A1 (ja) アクチュエータ及びロボットアーム装置
WO2017169096A1 (ja) 医療用支持アームの制御装置、医療用支持アーム装置の制御方法及び医療用システム
WO2015137040A1 (ja) ロボットアーム装置、ロボットアーム制御方法及びプログラム
WO2017169082A1 (ja) 制御装置及び制御方法
US11950970B2 (en) Medical support arm system, medical support arm control method, and medical support arm control device
WO2015137140A1 (ja) ロボットアームの制御装置、ロボットアームの制御方法及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180205

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190205

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190208

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190214

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190222

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20190515

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190522

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190611

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190624

R151 Written notification of patent or utility model registration

Ref document number: 6555248

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees