JP2001219389A - ロボット装置、ロボット装置の制御方法、記録媒体及びプログラム - Google Patents

ロボット装置、ロボット装置の制御方法、記録媒体及びプログラム

Info

Publication number
JP2001219389A
JP2001219389A JP2000381009A JP2000381009A JP2001219389A JP 2001219389 A JP2001219389 A JP 2001219389A JP 2000381009 A JP2000381009 A JP 2000381009A JP 2000381009 A JP2000381009 A JP 2000381009A JP 2001219389 A JP2001219389 A JP 2001219389A
Authority
JP
Japan
Prior art keywords
state
robot
states
motion
predetermined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000381009A
Other languages
English (en)
Other versions
JP3413725B2 (ja
Inventor
Takayuki Fujikawa
孝之 藤川
Masahiro Fujita
雅博 藤田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2000381009A priority Critical patent/JP3413725B2/ja
Publication of JP2001219389A publication Critical patent/JP2001219389A/ja
Application granted granted Critical
Publication of JP3413725B2 publication Critical patent/JP3413725B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Manipulator (AREA)
  • Feedback Control In General (AREA)

Abstract

(57)【要約】 【課題】 ロボットの動作を多様化し、表現力を高め
る。 【解決手段】 状態遷移作成部140は、ロボット1の
初期状態から目標状態に到るまでに動作パスが通過する
状態を検出し、これらの状態間の複数の動作アークに重
み係数wijを付加する。パス選択部142は、動作パ
スに含まれる動作アークの重み係数の総和が最小になる
ように、各状態間それぞれの間の動作アークを選択す
る。アーク選択部144は、パス選択部142が選択し
た動作パスに含まれる動作アークを、重み係数に基づい
て確率的に選択し、最終的な動作パスを決定する。デー
タ送信部146は、最終的な動作パスに含まれる動作ア
ークが示すロボット1の動作を実現するために必要な動
作データを経時的に生成し、駆動部120a〜120d
を制御してロボット1の動作を実現する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、ロボット装置の民
生用あるいは産業用の利用に関し、ロボット装置及びそ
のようなロボット装置の行動パターンを制御するロボッ
ト装置の制御方法、並びにそのようなロボット装置を制
御するためのプログラム及びそのようなプログラムを記
録した記録媒体に関する。
【0002】
【発明が解決しようとする課題】ロボットに行動を教示
する場合、予め所望の行動パターンおよびその順番を全
てプログラム化し、ロボットまたはロボットの制御装置
に記憶させておく必要があった。行動がプログラムによ
り決められている場合、ロボットはプログラムに記述さ
れた行動パターンをそのまま継続的に保って動作する。
従って、ロボットの行動を多様化することができず、ロ
ボットを行動させて表現可能な事象に限りがあり、その
表現力も充分とはいえなかった。
【0003】最近、周囲で変化する動的環境に応じてロ
ボットの行動を変更することができる行動制御方式とし
て、障害物回避、徘徊などの基本行動を階層化して制御
するサブサンプションアーキテクチュア(Subsumption
Architecture)方式が提案されている。この方式によれ
ば、上位階層に属する行動が周囲の環境に適応せず、失
敗に終わった場合に、ロボットに下位階層に属する行動
とることを常に誘発することができる。しかし、逆に、
下位階層に属する行動が失敗した場合には、ロボットに
上位階層に属する行動をとることを積極的に誘発する行
動制御が困難である。
【0004】また、サブサンプションアーキテクチュア
方式によれば、行動パターンは階層的な行動の積み重ね
により与えられるが、各階層に含まれる行動パターンが
固定化されるため、行動パターンの多様性に制約が生じ
てしまう。このように、サブサンプションアーキテクチ
ュア方式においては、ロボットの行動パターンの単調化
が避けられず、ロボットの動作が有する表現力も限られ
たものになってしまう。
【0005】本発明は、上述した従来技術の問題点に鑑
みてなされたものであり、ロボットの動作を多様化し、
動作により表現可能な事象を増やし、しかも、ロボット
の動作の表現力を高めることができるロボット装置、ロ
ボット装置の制御方法、記録媒体及びプログラムを提供
することを目的とする。
【0006】
【課題を解決するための手段】本発明に係るロボット装
置は、関節駆動部を有し所定の動作を表現するロボット
装置である。このロボット装置は、上述の課題を解決す
るために、ロボット装置の動作状態を記述した動作状態
モデル記憶手段と、動作状態モデルに記述された動作を
確率的に選択し、選択した動作を表現するように、関節
駆動部を制御する動作制御手段とを有する。
【0007】このような構成を有するロボット装置は、
ロボット装置の動作状態を記述した動作状態モデルに記
述された動作を確率的に選択し、選択した動作を表現す
るように、関節駆動部を制御する。例えば、これによ
り、ロボット装置は、動作の表現力が増大される。
【0008】また、本発明に係るロボット装置の制御方
法は、関節駆動部を有し所定の動作を表現するロボット
装置の制御方法である。このロボット装置の制御方法
は、ロボット装置の動作状態を記述した動作状態モデル
に記述された動作を確率的に選択し、選択した動作を表
現するように、関節駆動部を制御する。例えば、この制
御方法により、ロボット装置は、動作の表現力が増大さ
れる。
【0009】また、本発明に係る記録媒体は、関節駆動
部を有し所定の動作を表現するロボット装置の制御をす
るプログラムを記録した記録媒体である。この記録媒体
は、上述の課題を解決するために、ロボット装置の動作
状態を記述した動作状態モデルに記述された動作を確率
的に選択し、選択した動作を表現するように、関節駆動
部を制御するプログラムを記録している。
【0010】この記録媒体に記録されているプログラム
の実行により、ロボット装置は、ロボット装置の動作状
態を記述した動作状態モデルに記述された動作を確率的
に選択し、選択した動作を表現するように、関節駆動部
を制御する。例えば、これにより、ロボット装置は、動
作の表現力が増大される。
【0011】また、本発明に係るプログラムは、関節駆
動部を有し所定の動作を表現するロボット装置の制御を
するためのプログラムである。このプログラムは、上述
の課題を解決するために、ロボット装置の動作状態を記
述した動作状態モデルに記述された動作を確率的に選択
し、選択した動作を表現するように、関節駆動部を制御
する。
【0012】このプログラムの実行により、ロボット装
置は、ロボット装置の動作状態を記述した動作状態モデ
ルに記述された動作を確率的に選択し、選択した動作を
表現するように、関節駆動部を制御する。例えば、これ
により、ロボット装置は、動作の表現力が増大される。
【0013】また、本発明に係るロボット装置は、関節
駆動部を有し所定の動作を表現するロボット装置であ
る。このロボット装置は、上述の課題を解決するため
に、ロボット装置の所定の複数の状態及び所定の複数の
動作が定義された状態遷移モデル記憶手段を有し、複数
の状態の内、直接に遷移可能な2つの状態の間それぞれ
において、2つの状態の間を遷移する際のロボット装置
の動作を示す1つ以上の動作アークを定め、定めた動作
アークそれぞれに所定の重み係数を付し、複数の状態の
内、第1の状態から第2の状態へ遷移する際に、到達可
能な遷移パスそれぞれに含まれる重み係数全体の評価結
果に基づいて一の遷移パスを決定する。例えば、これに
より、ロボット装置は、動作の表現力が増大される。
【0014】また、本発明に係るロボット装置の制御方
法は、関節駆動部を有し所定の動作を表現するロボット
装置の制御方法である。このロボット装置の制御方法
は、上述の課題を解決するために、ロボット装置の所定
の複数の状態及び所定の複数の動作が定義された状態遷
移モデルの複数の状態の内、直接に遷移可能な2つの状
態の間それぞれにおいて、2つの状態の間を遷移する際
のロボットの動作を示す1つ以上の動作アークを定め、
定めた動作アークそれぞれに所定の重み係数を付し、複
数の状態の内、第1の状態から第2の状態へ遷移する際
に、到達可能な遷移パスそれぞれに含まれる上記重み係
数全体の評価結果に基づいて一の遷移パスを決定し、決
定した遷移パスに基づいて第1の状態から第2の状態に
ロボット装置を遷移させる制御をする。例えば、この制
御方法により、ロボット装置は、動作の表現力が増大さ
れる。
【0015】また、本発明に係る記録媒体は、関節駆動
部を有し所定の動作を表現するロボット装置の制御をす
るプログラムを記録した記録媒体である。この記録媒体
は、上述の課題を解決するために、ロボット装置の所定
の複数の状態及び所定の複数の動作が定義された状態遷
移モデルの複数の状態の内、直接に遷移可能な2つの状
態の間それぞれにおいて、2つの状態の間を遷移する際
のロボット装置の動作を示す1つ以上の動作アークを定
め、定めた動作アークそれぞれに所定の重み係数を付
し、複数の状態の内、第1の状態から第2の状態へ遷移
する際に、到達可能な遷移パスそれぞれに含まれる重み
係数全体の評価結果に基づいて一の遷移パスを決定し、
決定した遷移パスに基づいて第1の状態から第2の状態
にロボット装置を遷移させる制御をするプログラムを記
録している。例えば、この記録媒体に記録されているプ
ログラムの実行により、ロボット装置は、動作の表現力
が増大される。
【0016】また、本発明に係るプログラムは、関節駆
動部を有し所定の動作を表現するロボット装置の制御を
するためのプログラムである。このプログラムは、上述
の課題を解決するために、ロボット装置の所定の複数の
状態及び所定の複数の動作が定義された状態遷移モデル
の複数の状態の内、直接に遷移可能な2つの状態の間そ
れぞれにおいて、上記2つの状態の間を遷移する際のロ
ボット装置の動作を示す1つ以上の動作アークを定め、
定めた動作アークそれぞれに所定の重み係数を付し、複
数の状態の内、第1の状態から第2の状態へ遷移する際
に、到達可能な遷移パスそれぞれに含まれる重み係数全
体の評価結果に基づいて一の遷移パスを決定し、決定し
た遷移パスに基づいて第1の状態から第2の状態にロボ
ット装置を遷移させる制御をする。例えば、このプログ
ラムの実行により、ロボット装置は、動作の表現力が増
大される。
【0017】
【発明の実施の形態】以下、本発明の実施例を説明す
る。図1は、本発明に係るロボット制御方法が適用され
るロボット1の外形を例示する図であって、(A)はロ
ボット1の正面図を示し、(B)はロボット1の上面図
を示し、(C)はロボット1の側面図を示す。
【0018】図1(A)〜(C)に例示するように、ロ
ボット1は、本発明に係るロボット制御方法によりそれ
ぞれ制御され、駆動される4本の脚10a〜10dを有
する。
【0019】ロボット1の「寝る(状態1;Sleepin
g)」、「座る(状態2;Sitting )」、「波打つ(状
態3;Waving)」或いは「手を振る(状態3;Wavin
g)」、「立つ(状態4;Standing)」および「歩く
(状態5;Walking ) 」といった基本的な動作は「状
態(図4等)」として定義される。また、ロボット1
は、これらの状態の間を状態遷移する際には、予め定義
され、それぞれ選択される確率に対応する重み係数が付
され、この重み係数に基づいて確率的に選択され、これ
らの状態の間で状態遷移を行う際のロボット1の動作を
規定する「動作アーク」に基づいた動作を行う。
【0020】図2は、図1に示したロボット1において
本発明に係るロボット制御方法を実現するために用いら
れる制御部12の構成を示す図である。
【0021】図2に示すように、ロボット1の制御部1
2は、制御回路14、駆動部120a〜120dおよび
センサ16から構成される。
【0022】制御回路14は、マイクロプロセッサ、R
OM、RAM、および、演算処理に必要な周辺回路から
構成され、本発明に係るロボット制御方法を実現するた
めのプログラム(図3)を実行し、予め設定された状態
を定義するデータ、および、センサ16から入力される
センサデータ等に基づいて、駆動部120a〜120d
に対して脚10a〜10dの動きを示す動作データを供
給する。
【0023】センサ16は、例えばロボット1の周囲の
環境、例えば光の強度・色、温度、および、周囲にある
壁や他のロボット1との距離を検出し、検出した周囲の
環境に係るセンサデータを制御回路14に対して出力す
る。
【0024】駆動部120a〜120dは、それぞれモ
ータおよびモータ駆動回路等から構成され、制御回路1
4から入力された動作データに基づいて脚10a〜10
dを前後・上下に動かす。つまり、制御回路14および
駆動部120a〜120dは協働して、各状態における
ロボット1の動作、および、状態遷移中のロボット動作
を実現する。
【0025】図3は、本発明に係るロボット制御方法を
実現するためのプログラム構成を示す図である。
【0026】図3に示す状態遷移作成部140、パス選
択部142、アーク選択部144およびデータ送出部1
46は、状態遷移作成部140のROMに記憶されてお
り、制御回路14のマイクロプロセッサにより実行され
る。
【0027】(1)状態遷移作成部140の動作 状態遷移作成部140は、ロボット1の動作開始時の状
態(初期状態)から動作終了時の状態(目標状態)に到
るまでに通過する状態を検出し、検出した状態と、状態
の間を遷移する際の動作アークとに基づいて状態遷移図
(図4等)を作成する。
【0028】まず、ロボット1に実現される状態を予め
定義し、ロボット1の動作を直接、定義した各状態間で
遷移させるために、各状態間を遷移する際のロボット1
の動作を示す動作アークを、直接に遷移可能な2つの状
態の間で1つ以上定義する。これらの、定義した動作ア
ークそれぞれには、アーク選択部144により選択され
る確率に対応する重み係数を付する。
【0029】以上のように定義された状態と動作アーク
は状態遷移図に表すことができる。つまり、定義された
2つの状態S,S に対して、状態Sから状態S
にロボット1の動作を遷移させる動作アークAij
定義される。
【0030】動作アークAijには、重み係数wij
与えられる。最終的な動作パスに含まれる動作アークA
ijは、N個の動作アークA ij,(k=1,…,
N)から選択可能であり、動作アークA ijが選択さ
れる確率的重みP(k=1,…,N)は、下式で表さ
れる。
【0031】
【数1】
【0032】図4に、ロボット1の状態、動作アークお
よび重み係数の関係を示す状態遷移図の例を示す。
【0033】例えば、図4に例示するように、ロボット
1が脚10a〜10dを縮めて底面を床につける状態1
(スリーピング;Sleeping)から、ロボット1が脚10
a,10bを縮め、脚10c,10dを伸ばして脚10
c,10d側の底面だけを床につける状態2(シッティ
ング;Sitting )に状態遷移する際の動作アークには重
み係数w12が付されている。
【0034】また、状態1(スリーピング;Sleeping)
から、ロボット1が脚10a〜10dを延ばして床に対
して底面を平行に保つ状態4(スタンディング;Standi
ng)に状態遷移する際の動作アークには重み係数w14
が付されている。また、状態2から状態1に状態遷移す
る際の動作アークには重み係数w21が付されている。
【0035】状態1,2,4と、他の2状態(ロボット
1が脚10a,10bと脚10c,10dとを交互に伸
縮する状態3(ウェービング;Waving)、および、ロボ
ット1が歩行する状態5(ウォーキング;Walking ))
との間にも同様に動作アークが定義され、それぞれ重み
係数w24,w42,…,w55が付される。
【0036】また、図5に、図4において隣接する位置
にあり、他の状態を介さずに直接状態遷移することがで
きる2つの状態間に定義されたN個の動作アークの例を
示す。
【0037】図5に例示するように、状態1と状態2と
の間にはN本の動作アークA12が定義されており、こ
れらN本の動作アークA12がアーク選択部144によ
り選択される確率は、それぞれ確率的重みP(1)〜P
(N)となる。
【0038】(2)パス選択部142の動作 パス選択部142は、状態遷移作成部140が作成した
状態遷移図に基づいて、動作パスに含まれる動作アーク
の重み係数の総和が最小になる動作アークの集合を、ロ
ボット1が初期状態から目標状態に到るまでの間に経過
する動作パスとして選択する。つまり、動作パスに含ま
れる直接に遷移可能な2つの隣接する状態の間には、1
つ以上の動作アークが存在しうる。
【0039】パス選択部142は、図4に示した状態遷
移図に基づいて、ロボット1を初期状態Sから目標状
態Sへ設定させるとき、最適な動作パスを選択する。
動作パスは、初期状態Sから出発して、状態から直接
接続している動作アークを経由して目標状態Sへ到達
可能な動作アーク列として定義される。この動作パス
は、一般に複数、存在する。これらの動作パスから、下
式に示す評価関数Wを最小にするいずれかを選択する。
【0040】
【数2】
【0041】
【数3】
【0042】ここで、上記2式において、Mは図4に示
した状態遷移図の状態Sの総数を示す。また、W
は、初期状態Sから目標状態Sへ到達可能なパス
lを構成する動作アークの重み係数の和を示す。また、
は、そのパスを構成する動作アークAij,(i,
j=1,2,…,M,i≠j)の数を表す。
【0043】以下、パスlを選択する具体的な処理手段
について説明する。まず、初期設定として、状態S
管理する2つのリスト、閉リストおよび開リストを定義
する。閉リストの初期集合は空集合である。
【0044】開リストの初期集合として、下式のように
全ての状態S(i=1,…,M)を与える。
【0045】
【数4】
【0046】また、下式のように、評価変数の初期値と
して各状態Sに対応した評価変数D〔i〕を定義す
る。
【0047】
【数5】
【0048】また、下式のように、初期状態Sを初期
接続状態Sとする。
【0049】
【数6】
【0050】次に、開リスト集合、閉リスト集合、評価
変数、接続状態の更新を行う。
【0051】下式中の式(0.1),(0.2)を用い
て、S=Sとなるまで、開リスト集合、閉リスト集
合、評価変数、接続状態の更新を繰り返す。
【0052】
【数7】
【0053】ここで、式(0.1)を満足する状態S
を新しい接続状態Sとして、接続状態Sを更新す
る。この新たな接続状態Sを開リスト集合から除き、
閉リスト集合に加える。このとき、旧接続状態S(O
LD)は新接続状態S(NEW)の親となり、ポイン
ターで接続される。
【0054】
【数8】
【0055】この新接続状態Sを介して、式(0.
2)より評価変数D〔i〕を更新する。
【0056】さらに、閉リスト内に目標状態Sからポ
インターをたどって、初期状態Sに到る状態列l=S
,…,S,…,S,…,Sが得られる。このと
き、ロボットの初期状態Sから目標状態Sまでの動
作パスは、閉リスト内のポインターを逆にたどりること
により、下式のように求められる。
【0057】
【数9】
【0058】以上のように、初期状態Sを除き、動作
パスが経由する状態Sに対応するAを必ず選択
する。
【0059】図6は、パス選択部142の処理を示すフ
ローチャートである。図6に示すように、パス選択部1
42は、初期設定として、開リスト集合(OPEN)の要素
を全状態とし、閉リスト集合(CLOSED)を空とする(S
1)。また、初期接続状態をSとする(S2)。
【0060】目標状態と接続状態が一致するならば、目
標状態にすでに到達したことになるので、状態探索を終
了する(S3)。
【0061】閉リスト集合内で目標状態から初期状態へ
ポインターをたどり、逆向きに初期状態から目標状態へ
ソーティングし直す(S7)。
【0062】以上の各処理により、状態間を結ぶ動作ア
ーク列が生成され、パス選択部142の実行が終了す
る。
【0063】もし、目標状態と接続状態が一致しなけれ
ば、開リスト集合の中で、評価変数を最小にする状態を
新しい接続状態Sとし、閉リスト集合内に加える(S
4)。
【0064】開リスト内の評価変数を新しい接続状態S
を用いて更新する(S5)。
【0065】さらに、接続状態Sを開リスト内から閉
リスト内に加え、S3の処理に戻る(S6)。なお、S
3の条件が満たされるまで、S4〜S6の処理が繰り返
される。
【0066】(3)アーク選択部144の動作 アーク選択部144は、パス選択部142が選択した動
作パスに含まれる動作アークのいずれかを、動作アーク
それぞれに付された重み係数に基づいて確率的に選択す
る。つまり、アーク選択部144は、動作パスに含ま
れ、直接に遷移可能な2つの状態の間それぞれに存在す
る1つ以上の動作アークのいずれかをそれぞれ選択し、
最終的な動作パスを決定する。
【0067】アーク選択部144は、パス選択部142
が選択した動作パスに対して、動作パス中の動作アーク
ijそれぞれが複数個ずつ含む動作アークA ij
中から、一つの動作アークを確率的に選択する。
【0068】この選択の処理手順は、まず、数値
〔R,R〕の範囲で一様な乱数を考え、動作アーク
ijに対応する領域〔s,e 〕を下式のよう
に定義する。
【0069】
【数10】
【0070】ここで、上式において、Pは、確率係数
を示し、P=0である。一様乱数の値vが、s≦v
<eの範囲にある場合において、一様乱数の値vに対
応する動作アークA ijを選択する。この選択によ
り、ロボットの初期状態Sから目標状態Sまでの動
作パスは、選択された動作アークA ijを用いて下式
のように定義される。
【0071】
【数11】
【0072】(4)データ送出部146の動作 データ送出部146は、アーク選択部144が決定した
動作パスに含まれる動作アークそれぞれが示すロボット
1の動作を実現するために駆動部120a〜120dに
与えるべき動作データを経時的に生成し、駆動部120
a〜120dに供給する。
【0073】アーク選択部144の動作説明において示
したように、ロボット1の初期状態Sから目標状態S
までの動作アークA ij列が出力される。
【0074】データ送出部146は、目標状態Sから
目標状態Sへの動作アークA を、アーク選択
部144による動作アーク選択と同様の手続きで選択
し、動作アーク列(0.3)の最後に追加する。従っ
て、データ送出部146により最終的に以下の動作アー
ク列が生成される。
【0075】
【数12】
【0076】図7は、図4に示した状態遷移図に重み係
数を付し、状態3を初期状態とし、状態4を目標状態と
した状態遷移図である。
【0077】図8は、図7に示した状態遷移図に基づい
て、状態遷移作成部140、パス選択部142、アーク
選択部144およびデータ送出部146により決定され
る動作アーク列を示す図である。
【0078】図7および図8に示すように、データ送出
部146は、この動作アーク列が示す動作をロボット1
にさせるために駆動部120a〜120dそれぞれに与
えるべき経時的な動作データを生成し、駆動部120a
〜120dそれぞれに対して供給する。
【0079】ただし、初期状態Sと目標状態Sが一
致した場合、動作アーク列A GGが生成されるが、こ
のとき動作アーク列A GGに対応する動作データは駆
動部120a〜120dに対して供給されない。この場
合、特に状態が変わらず、無駄な処理を省くことができ
る。
【0080】以下、ロボット1の動作を説明する。制御
部12の状態遷移作成部140は、ロボット1の初期状
態から目標状態に到るまでに通過する状態を検出し、検
出した状態と、状態の間を遷移する際の動作アークとに
基づいて、例えば図4に示した状態遷移図を作成し、動
作アークそれぞれに、式1に示した確率的重みPk にそ
れぞれ対応する重み係数wijを付加する。
【0081】パス選択部142は、動作パスに含まれる
動作アークの重み係数の総和が最小になる動作アークの
集合を、式2〜式9および図6に示した手順に従って、
ロボット1が初期状態から目標状態に到るまでの間に経
過する動作パスとして選択する。
【0082】アーク選択部144は、パス選択部142
が選択した動作パスに含まれる動作アークのいずれか
を、式10および式11に示した手順に従って、動作ア
ークそれぞれに付された重み係数に基づいて確率的に選
択し、最終的な動作パスを決定する。
【0083】データ送出部146は、アーク選択部14
4が決定した動作パスに含まれる動作アークそれぞれが
示すロボット1の動作を実現するために駆動部120a
〜120dに与えるべき動作データを経時的に生成し、
駆動部120a〜120dに供給する。
【0084】駆動部120a〜120dは、データ送出
部146から供給された動作データに従って脚10a〜
10dを駆動し、初期状態から目標状態に到るまでの各
状態の動作、および、最終的な動作パスに含まれる各動
作アークが示すロボット1の動作を実現する。
【0085】以上説明したように、本発明のロボット行
動制御装置によれば、予め定義された各状態におけるロ
ボット1の動作、および、各状態間それぞれにおいて1
つ以上定義された動作アークが示す状態遷移中のロボッ
ト1の動作に基づいて、ロボット1に複数の動作パター
ンを与えることができる。また、初期状態から目標状態
とを同じにして複数回、ロボット1を動作させても、新
たな初期状態から目標状態に到る動作を行うたびに、ア
ーク選択部144により異なる動作アークを含む動作パ
スが最終的に決定されるので、ロボット1の動作が多様
化し、その表現力がより向上する。
【0086】なお、以上の説明においては、制御部12
がロボット1について予め固定的に設定された状態、動
作アークおよび重み係数に基づいて動作パスを決定する
場合について説明したが、例えば、センサ16から入力
されるセンサデータに基づいて、選択可能な動作アーク
を制限する、あるいは、重み係数の値を動的に変更する
等の変形を施すことにより、周囲の環境に応じてロボッ
ト1の動作パターンを変更することが可能になる。
【0087】また、制御部12の各プログラムの動作内
容は例示であって、ロボット1の用途に応じて必要な部
分のみを抽出して用いて、本発明に係るロボット制御方
法を実現してもよい。
【0088】また、上述のようなロボットの制御は、プ
ログラムによって実現でき、また、そのようなプログラ
ムが記録されている記録媒体によっても実現できる。
【0089】
【発明の効果】以上述べたように、本発明に係るロボッ
ト装置、ロボット装置の制御方法、記録媒体及びプログ
ラムによれば、ロボットの動作を多様化することができ
る。
【0090】また、本発明に係るロボット装置、ロボッ
ト装置の制御方法、記録媒体及びプログラムによれば、
ロボットの動作により表現可能な事象の数を増すとがで
きる。
【0091】また、本発明に係るロボット装置、ロボッ
ト装置の制御方法、記録媒体及びプログラムによれば、
ロボットの動作の表現力を高めることができる。
【図面の簡単な説明】
【図1】本発明に係るロボット制御方法が適用されるロ
ボットの外形を例示する図であって、(A)はロボット
の正面図を示し、(B)はロボットの上面図を示し、
(C)はロボットの側面図を示す。
【図2】図1に示したロボットにおいて本発明に係るロ
ボット制御方法を実現するために用いられる制御部の構
成を示す図である。
【図3】本発明に係るロボット制御方法を実現するため
のプログラム構成を示す図である。
【図4】図1に示したロボットの状態、動作アークおよ
び重み係数の関係を例示する状態遷移図を示す図であ
る。
【図5】図4において隣接する位置にあり、他の状態を
介さずに直接状態遷移することができる2つの状態間に
定義されたN個の動作アークの例を示す図である。
【図6】図3に示したパス選択部の処理を示すフローチ
ャートである。
【図7】図4に示した状態遷移図に重み係数を付し、状
態3を初期状態とし、状態4を目標状態とした状態遷移
図である。
【図8】図7に示した状態遷移図に基づいて、図3に示
した状態遷移作成部、パス選択部、アーク選択部および
データ送出部により決定される動作アーク列を示す図で
ある。
【符号の説明】
1 ロボット、10a〜10d 脚、12 制御部、1
20a〜120d 駆動部、14 制御回路、140
状態遷移作成部、142 パス選択部、144アーク選
択部、146 データ送出部、16 センサ

Claims (12)

    【特許請求の範囲】
  1. 【請求項1】 関節駆動部を有し所定の動作を表現する
    ロボット装置において、 上記ロボット装置の動作状態を記述した動作状態モデル
    記憶手段と、 上記動作状態モデルに記述された動作を確率的に選択
    し、上記選択した動作を表現するように、上記関節駆動
    部を制御する動作制御手段とを有することを特徴とする
    ロボット装置。
  2. 【請求項2】 上記動作状態モデルは、 所定の複数の状態を有し、 直接に遷移可能な2つの状態の間それぞれにおいて、上
    記2つの状態の間を遷移する際の上記ロボット装置の動
    作を示す1つ以上の動作アークを定め、 定めた上記動作アークそれぞれに、上記動作アークが選
    択される遷移確率が付された確率状態遷移モデルで記述
    されたことを特徴とする請求項1記載のロボット装置。
  3. 【請求項3】 上記動作アークは、上記複数の状態の内
    の1つの状態から、自己の状態へ遷移する際の上記ロボ
    ット装置の動作を示す自己動作アークを含むことを特徴
    とする請求項2記載のロボット装置。
  4. 【請求項4】 上記遷移確率は、動的に変更可能である
    ことを特徴とする請求項2記載のロボット装置。
  5. 【請求項5】 関節駆動部を有し所定の動作を表現する
    ロボット装置の制御方法において、 上記ロボット装置の動作状態を記述した動作状態モデル
    に記述された動作を確率的に選択し、 上記選択した動作を表現するように、上記関節駆動部を
    制御することを特徴とするロボット装置の制御方法。
  6. 【請求項6】 関節駆動部を有し所定の動作を表現する
    ロボット装置の制御をするプログラムを記録した記録媒
    体において、 上記ロボット装置の動作状態を記述した動作状態モデル
    に記述された動作を確率的に選択し、 上記選択した動作を表現するように、上記関節駆動部を
    制御するプログラムを記録した記録媒体。
  7. 【請求項7】 関節駆動部を有し所定の動作を表現する
    ロボット装置の制御をするためのプログラムにおいて、 上記ロボット装置の動作状態を記述した動作状態モデル
    に記述された動作を確率的に選択し、 上記選択した動作を表現するように、上記関節駆動部を
    制御するためのプログラム。
  8. 【請求項8】 関節駆動部を有し所定の動作を表現する
    ロボット装置において、 上記ロボット装置の所定の複数の状態及び所定の複数の
    動作が定義された状態遷移モデル記憶手段を有し、 上記複数の状態の内、直接に遷移可能な2つの状態の間
    それぞれにおいて、上記2つの状態の間を遷移する際の
    上記ロボット装置の動作を示す1つ以上の動作アークを
    定め、 定めた上記動作アークそれぞれに所定の重み係数を付
    し、 上記複数の状態の内、第1の状態から第2の状態へ遷移
    する際に、到達可能な遷移パスそれぞれに含まれる上記
    重み係数全体の評価結果に基づいて一の遷移パスを決定
    することを特徴とするロボット装置。
  9. 【請求項9】 上記重み係数は、動的に変更可能である
    ことを特徴とする請求項8記載のロボット装置。
  10. 【請求項10】 関節駆動部を有し所定の動作を表現す
    るロボット装置の制御方法において、 上記ロボット装置の所定の複数の状態及び所定の複数の
    動作が定義された状態遷移モデルの上記複数の状態の
    内、直接に遷移可能な2つの状態の間それぞれにおい
    て、上記2つの状態の間を遷移する際の上記ロボット装
    置の動作を示す1つ以上の動作アークを定め、 定めた上記動作アークそれぞれに所定の重み係数を付
    し、 上記複数の状態の内、第1の状態から第2の状態へ遷移
    する際に、到達可能な遷移パスそれぞれに含まれる上記
    重み係数全体の評価結果に基づいて一の遷移パスを決定
    し、 上記決定した遷移パスに基づいて上記第1の状態から上
    記第2の状態に上記ロボット装置を遷移させる制御をす
    ることを特徴とするロボット装置の制御方法。
  11. 【請求項11】 関節駆動部を有し所定の動作を表現す
    るロボット装置の制御をするプログラムを記録した記録
    媒体において、 ロボット装置の所定の複数の状態及び所定の複数の動作
    が定義された状態遷移モデルの複数の状態の内、直接に
    遷移可能な2つの状態の間それぞれにおいて、上記2つ
    の状態の間を遷移する際の上記ロボット装置の動作を示
    す1つ以上の動作アークを定め、 定めた上記動作アークそれぞれに所定の重み係数を付
    し、 上記複数の状態の内、第1の状態から第2の状態へ遷移
    する際に、到達可能な遷移パスそれぞれに含まれる上記
    重み係数全体の評価結果に基づいて一の遷移パスを決定
    し、 上記決定した遷移パスに基づいて上記第1の状態から上
    記第2の状態に上記ロボット装置を遷移させる制御をす
    るプログラムを記録した記録媒体。
  12. 【請求項12】 関節駆動部を有し所定の動作を表現す
    るロボット装置の制御をするためのプログラムにおい
    て、 上記ロボット装置の所定の複数の状態及び所定の複数の
    動作が定義された状態遷移モデルの上記複数の状態の
    内、直接に遷移可能な2つの状態の間それぞれにおい
    て、上記2つの状態の間を遷移する際の上記ロボット装
    置の動作を示す1つ以上の動作アークを定め、 定めた上記動作アークそれぞれに所定の重み係数を付
    し、 上記複数の状態の内、第1の状態から第2の状態へ遷移
    する際に、到達可能な遷移パスそれぞれに含まれる上記
    重み係数全体の評価結果に基づいて一の遷移パスを決定
    し、 上記決定した遷移パスに基づいて上記第1の状態から上
    記第2の状態に上記ロボット装置を遷移させる制御をす
    るためのプログラム。
JP2000381009A 2000-12-14 2000-12-14 ロボット及びロボットの制御方法 Expired - Fee Related JP3413725B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000381009A JP3413725B2 (ja) 2000-12-14 2000-12-14 ロボット及びロボットの制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000381009A JP3413725B2 (ja) 2000-12-14 2000-12-14 ロボット及びロボットの制御方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP26842295A Division JP3413694B2 (ja) 1995-10-17 1995-10-17 ロボット制御方法およびロボット

Publications (2)

Publication Number Publication Date
JP2001219389A true JP2001219389A (ja) 2001-08-14
JP3413725B2 JP3413725B2 (ja) 2003-06-09

Family

ID=18849098

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000381009A Expired - Fee Related JP3413725B2 (ja) 2000-12-14 2000-12-14 ロボット及びロボットの制御方法

Country Status (1)

Country Link
JP (1) JP3413725B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7595464B2 (en) 2003-11-20 2009-09-29 Panasonic Corporation Infrared ray lamp and heating apparatus
KR101189772B1 (ko) 2009-12-30 2012-10-10 한국생산기술연구원 쇼 윈도우용 인조물의 제어 장치 및 그 제어 방법
JP2013537652A (ja) * 2010-06-01 2013-10-03 アルカテル−ルーセント 情報処理システムによるオブジェクト管理
KR20200122834A (ko) * 2019-04-19 2020-10-28 한국전자통신연구원 가상 환경에서 학습된 지능형 에이전트를 이용하여 실제 사물의 움직임을 제어하는 방법 및 장치

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7595464B2 (en) 2003-11-20 2009-09-29 Panasonic Corporation Infrared ray lamp and heating apparatus
KR101189772B1 (ko) 2009-12-30 2012-10-10 한국생산기술연구원 쇼 윈도우용 인조물의 제어 장치 및 그 제어 방법
JP2013537652A (ja) * 2010-06-01 2013-10-03 アルカテル−ルーセント 情報処理システムによるオブジェクト管理
KR101485331B1 (ko) * 2010-06-01 2015-01-22 알까뗄 루슨트 정보 처리 시스템에 의한 오브젝트들의 관리
KR20200122834A (ko) * 2019-04-19 2020-10-28 한국전자통신연구원 가상 환경에서 학습된 지능형 에이전트를 이용하여 실제 사물의 움직임을 제어하는 방법 및 장치
KR102355021B1 (ko) 2019-04-19 2022-01-24 한국전자통신연구원 가상 환경에서 학습된 지능형 에이전트를 이용하여 실제 사물의 움직임을 제어하는 방법 및 장치

Also Published As

Publication number Publication date
JP3413725B2 (ja) 2003-06-09

Similar Documents

Publication Publication Date Title
JP3413694B2 (ja) ロボット制御方法およびロボット
Mautner et al. Projective simulation for classical learning agents: a comprehensive investigation
JP4525477B2 (ja) 学習制御装置および学習制御方法、並びに、プログラム
Cully et al. Evolving a behavioral repertoire for a walking robot
US6594649B2 (en) Interactive artificial intelligence
Bagaria et al. Skill discovery for exploration and planning using deep skill graphs
Kartoun et al. A human-robot collaborative reinforcement learning algorithm
EP1083488A2 (en) Interactive artificial intelligence
CN108830376B (zh) 针对时间敏感的环境的多价值网络深度强化学习方法
WO2020246059A1 (ja) パラメータ算出装置、ロボット制御システム、およびロボットシステム
JP2010179454A5 (ja)
US7478073B2 (en) Architecture for self-developing devices
JP2006309519A (ja) 強化学習システム、及び強化学習プログラム
JP2001219389A (ja) ロボット装置、ロボット装置の制御方法、記録媒体及びプログラム
Walker et al. The balance between initial training and lifelong adaptation in evolving robot controllers
Rempis et al. An interactively constrained neuro-evolution approach for behavior control of complex robots
Suyatinov Biological principles of intellectual motion control: models and implementation options
JP2001212784A (ja) ロボット制御方法、ロボット装置、記録媒体及びプログラム
Ghanea-Hercock et al. An evolved fuzzy reactive control system for co-operating autonomous robots
JPH0850548A (ja) 経路学習方法及び装置
Feldmaier et al. Path-finding using reinforcement learning and affective states
JP2005071265A (ja) 学習装置および方法、並びにロボットのカスタマイズ方法
Fukuda et al. Hierarchical control system in intelligent robotics and mechatronics
KR20060072597A (ko) 가변 우선순위 기반의 로봇 행동선택 구조 및 그 방법
Saxena et al. A cognitive approach to solve water jugs problem

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20030225

LAPS Cancellation because of no payment of annual fees