JP4506249B2

JP4506249B2 - ロボット装置及びその動作比較方法

Info

Publication number: JP4506249B2
Application number: JP2004113508A
Authority: JP
Inventors: 文英田中
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2004-04-07
Filing date: 2004-04-07
Publication date: 2010-07-21
Anticipated expiration: 2024-04-07
Also published as: JP2005297095A

Description

本発明は、見まね動作を通じてユーザ等の他の動作主体との双方向コミュニケーションを実現するロボット装置及びその動作比較方法に関する。

電気的又は磁気的な作用を用いて人間（生物）の動作に似た運動を行う機械装置を「ロボット」という。我が国においてロボットが普及し始めたのは、１９６０年代末からであるが、その多くは、工場における生産作業の自動化・無人化等を目的としたマニピュレータや搬送ロボット等の産業用ロボット（Industrial Robot）であった。

最近では、人間のパートナーとして生活を支援する、すなわち住環境その他の日常生活上の様々な場面における人的活動を支援する実用ロボットの開発が進められている。このような実用ロボットは、産業用ロボットとは異なり、人間の生活環境の様々な局面において、個々に個性の相違した人間、又は様々な環境への適応方法を自ら学習する能力を備えている。例えば、犬、猫のように４足歩行の動物の身体メカニズムやその動作を模した「ペット型」ロボット、或いは、２足直立歩行を行う人間等の身体メカニズムや動作をモデルにしてデザインされた「人間型」又は「人間形」ロボット（Humanoid Robot）等のロボット装置は、既に実用化されつつある。これらのロボット装置は、産業用ロボットと比較して、エンターテインメント性を重視した様々な動作を行うことができるため、エンターテインメントロボットと称される場合もある。また、これらのロボット装置の中には、自律的に動作を行うものが存在する。

ところで、見まね動作等のいわゆる模倣動作は、動作獲得やコミュニケーションの基本であるとの考察から、ロボット装置とユーザ（人間）との間の円滑なコミュニケーションやインタラクションを実現するために、ロボット装置にユーザ動作の模倣能力を与えようとする研究がなされ始めてきている（非特許文献１〜３参照）。

Christopher Lee, Yangsheng Xu, "Online, Interactive Learning of Gestures for Human/Robot Interfaces", 1996 IEEE International Conference on Robotics and Automation, Vol.4, p.2982-2987 Gordon Cheng, Akihiko Nagakubo and Yasuo Kuniyoshi,"Continuous Humanoid Interaction: An Integrated Perspective - Gaining Adaptivity, Redundancy, Flexibility - In One Robotics and Autonomous Systems", Vol.37, No.2-3, p.161-183, November 2001 稲邑哲也，戸嶋巌樹，中村仁彦、「ミメシスに基づくヒューマノイドの行動獲得と原始シンボルの創発」、第１６回人工知能学会全国大会（発表論文番号1D1-02）、2002

しかしながら、上述した非特許文献１〜３に記載されているような従来の研究は、「ロボット装置によるユーザ（人間）の動作の見まね」に留まっており、言わば一方向にしか着目していないものであった。このため、ロボット装置とユーザとの間の双方向コミュニケーションという観点からは不十分なものであった。

本発明は、このような従来の実情に鑑みて提案されたものであり、見まね動作を通じてユーザ等の他の動作主体との双方向コミュニケーションを実現するロボット装置及びその動作比較方法を提供することを目的とする。

上述した目的を達成するために、本発明に係るロボット装置は、自律的に動作可能なロボット装置であって、複数の動作パターンから一の動作パターンを選択して発現する動作発現手段と、発現した動作パターンを記憶する動作記憶手段と、発現した動作パターンを他の動作主体が模倣している様子を画像として入力する画像入力手段と、音声入力手段と、上記画像入力手段を介して入力された画像から上記他の動作主体の動作パターンを抽出する動作抽出手段と、上記動作記憶手段に記憶されている動作パターンと上記動作抽出手段によって抽出された動作パターンとを比較する比較手段と、上記比較結果に応じて上記他の動作主体の動作パターンを評価する評価手段とを備え、上記動作発現手段は、上記画像入力手段を介して入力された上記他の動作主体の画像から上記動作抽出手段により動作パターンを抽出し、上記他の動作主体が発現した動作を模倣した動作パターンを発現し、上記音声入力手段は、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力し、上記動作発現手段は、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させるものである。

ここで、本発明に係るロボット装置は、上記評価手段による評価結果を音声により出力する音声出力手段をさらに備えてもよい。

また、上記動作発現手段は、上記他の動作主体が発現した動作を模倣した動作パターンを発現することもできる。

さらに、本発明に係るロボット装置は、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力する音声入力手段をさらに備えるようにしてもよく、この場合、上記動作発現手段は、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させることができる。

また、上述した目的を達成するために、本発明に係るロボット装置の動作比較方法は、自律的に動作可能なロボット装置の動作比較方法であって、複数の動作パターンから一の動作パターンを選択して発現する動作発現工程と、発現した動作パターンを動作記憶手段に記憶する動作記憶工程と、発現した動作パターンを他の動作主体が模倣している様子を画像として入力する画像入力工程と、音声入力工程と、上記画像入力工程にて入力された画像から上記他の動作主体の動作パターンを抽出する動作抽出工程と、上記動作記憶手段に記憶されている動作パターンと上記動作抽出工程にて抽出された動作パターンとを比較する比較工程と、上記比較結果に応じて上記他の動作主体の動作パターンを評価する評価工程とを有し、上記動作発現工程では、上記画像入力工程を介して入力された上記他の動作主体の画像から上記動作抽出工程にて動作パターンを抽出し、上記他の動作主体が発現した動作を模倣した動作パターンを発現し、上記音声入力工程では、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力し、上記動作発現工程では、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させるものである。

ここで、本発明に係るロボット装置の動作比較方法は、上記評価工程における評価結果を音声により出力する音声出力工程をさらに有してもよい。

また、上記他の動作主体が発現した動作を模倣した動作パターンを発現する模倣工程をさらに有してもよい。

さらに、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力する音声入力工程をさらに有してもよく、この場合、上記動作発現工程では、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させることができる。

本発明に係るロボット装置及びその動作比較方法によれば、ロボット装置自身が発現した動作パターンと、他の動作主体がロボット装置の動作パターンを模倣した動作パターンとを比較し、評価することができる。また、これを他の動作主体との間で双方向に行うことで、見まね動作を通じた双方向コミュニケーションを実現することができ、ロボット装置の価値観を向上させることができる。

以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。この実施の形態は、本発明を、ユーザ（人間）との双方向の見まね動作を通じてコミュニケーションを実現する２足歩行タイプのロボット装置に適用したものである。このロボット装置は、住環境その他の日常生活上の様々な場面における人的活動を支援する実用ロボットであり、人間が行う基本的な動作を表出できるエンターテインメントロボットでもある。以下では先ず、このようなロボット装置の構成について説明し、次いで、このロボット装置とユーザとの双方向の見まね動作の実現方法について詳細に説明する。

（１）ロボット装置の構成
先ず、本実施の形態におけるロボット装置の構成について説明する。図１に示すように、本実施の形態におけるロボット装置１は、体幹部ユニット２の所定の位置に頭部ユニット３が連結されると共に、左右２つの腕部ユニット４Ｒ／Ｌと、左右２つの脚部ユニット５Ｒ／Ｌが連結されて構成されている（但し、Ｒ及びＬの各々は、右及び左の各々を示す接尾辞である。以下において同じ。）。

このロボット装置１が具備する関節自由度構成を図２に模式的に示す。頭部ユニット３を支持する首関節は、首関節ヨー軸１０１と、首関節ピッチ軸１０２と、首関節ロール軸１０３という３自由度を有している。

また、上肢を構成する各々の腕部ユニット４Ｒ／Ｌは、肩関節ピッチ軸１０７と、肩関節ロール軸１０８と、上腕ヨー軸１０９と、肘関節ピッチ軸１１０と、前腕ヨー軸１１１と、手首関節ピッチ軸１１２と、手首関節ロール軸１１３と、手部１１４とで構成される。手部１１４は、実際には、複数本の指を含む多関節・多自由度構造体である。但し、手部１１４の動作は、ロボット装置１の姿勢制御や歩行制御に対する寄与や影響が少ないので、本明細書ではゼロ自由度と仮定する。したがって、各腕部ユニット４Ｒ／Ｌは、７自由度で構成される。

また、体幹部ユニット２は、体幹ピッチ軸１０４と、体幹ロール軸１０５と、体幹ヨー軸１０６という３自由度を有する。

また、下肢を構成する各々の脚部ユニット５Ｒ／Ｌは、股関節ヨー軸１１５と、股関節ピッチ軸１１６と、股関節ロール軸１１７と、膝関節ピッチ軸１１８と、足首関節ピッチ軸１１９と、足首関節ロール軸１２０と、足部１２１とで構成される。本明細書中では、股関節ピッチ軸１１６と股関節ロール軸１１７の交点は、ロボット装置１の股関節位置を定義する。人体の足部は、実際には多関節・多自由度の足底を含んだ構造体であるが、ロボット装置１の足部１２１は、ゼロ自由度とする。したがって、各脚部ユニット５Ｒ／Ｌは、６自由度で構成される。

以上を総括すれば、ロボット装置１全体としては、合計で３＋７×２＋３＋６×２＝３２自由度を有することになる。但し、エンターテインメント向けのロボット装置１が必ずしも３２自由度に限定される訳ではない。設計・制作上の制約条件や要求仕様等に応じて、自由度すなわち関節数を適宜増減することができることはいうまでもない。

上述したようなロボット装置１がもつ各自由度は、実際にはアクチュエータを用いて実装される。外観上で余分な膨らみを排してヒトの自然体形状に近似させること、２足歩行という不安定構造体に対して姿勢制御を行うことなどの要請から、アクチュエータは小型且つ軽量であることが好ましい。

図３には、ロボット装置１の制御システム構成を模式的に示している。図３に示すように、制御システムは、ユーザ入力などに動的に反応して情緒判断や感情表現を司る思考制御モジュール２００と、アクチュエータ３５０の駆動などロボット装置１の全身協調運動を制御する運動制御モジュール３００とで構成される。

思考制御モジュール２００は、情緒判断や感情表現に関する演算処理を実行するＣＰＵ（Central Processing Unit）２１１や、ＲＡＭ（Random Access Memory）２１２、ＲＯＭ（Read Only Memory）２１３、及び外部記憶装置（ハード・ディスク・ドライブなど）２１４で構成され、モジュール内で自己完結した処理を行うことができる独立駆動型の情報処理装置である。

この思考制御モジュール２００は、画像入力装置２５１から入力される画像データや音声入力装置２５２から入力される音声データなど、外界からの刺激などに従って、ロボット装置１の現在の感情や意思を決定する。ここで、画像入力装置２５１は、例えばＣＣＤ（Charge Coupled Device）カメラを左右に１つずつ備えており、また、音声入力装置２５２は、例えばマイクロホンを複数備えている。また、思考制御モジュール２００は、スピーカを備える音声出力装置２５３を介して、音声を出力することができる。

また、思考制御モジュール２００は、意思決定に基づいた動作又は行動シーケンス、すなわち四肢の運動を実行するように、運動制御モジュール３００に対して指令を発行する。

一方の運動制御モジュール３００は、ロボット装置１の全身協調運動を制御するＣＰＵ３１１や、ＲＡＭ３１２、ＲＯＭ３１３、及び外部記憶装置（ハード・ディスク・ドライブなど）３１４で構成され、モジュール内で自己完結した処理を行うことができる独立駆動型の情報処理装置である。外部記憶装置３１４には、例えば、オフラインで算出された歩行パターンや目標とするＺＭＰ軌道、その他の行動計画を蓄積することができる。ここで、ＺＭＰとは、歩行中の床反力によるモーメントがゼロとなる床面上の点のことであり、また、ＺＭＰ軌道とは、例えばロボット装置１の歩行動作期間中にＺＭＰが動く軌跡を意味する。なお、ＺＭＰの概念並びにＺＭＰを歩行ロボットの安定度判別規範に適用する点については、Miomir Vukobratovic 著“LEGGED LOCOMOTION ROBOTS”（加藤一郎外著『歩行ロボットと人工の足』（日刊工業新聞社））に記載されている。

運動制御モジュール３００には、図２に示したロボット装置１の全身に分散するそれぞれの関節自由度を実現するアクチュエータ３５０、体幹部ユニット２の姿勢や傾斜を計測する姿勢センサ３５１、左右の足底の離床又は着床を検出する接地確認センサ３５２，３５３、バッテリなどの電源を管理する電源制御装置３５４などの各種の装置が、バス・インターフェース（Ｉ／Ｆ）３０１経由で接続されている。ここで、姿勢センサ３５１は、例えば加速度センサとジャイロ・センサの組み合わせによって構成され、接地確認センサ３５２，３５３は、近接センサ又はマイクロ・スイッチなどで構成される。

思考制御モジュール２００と運動制御モジュール３００とは、共通のプラットフォーム上で構築され、両者間はバス・インターフェース２０１，３０１を介して相互接続されている。

運動制御モジュール３００では、思考制御モジュール２００から指示された行動を体現すべく、各アクチュエータ３５０による全身協調運動を制御する。すなわち、ＣＰＵ３１１は、思考制御モジュール２００から指示された行動に応じた動作パターンを外部記憶装置３１４から取り出し、又は内部的に動作パターンを生成する。そして、ＣＰＵ３１１は、指定された動作パターンに従って、足部運動、ＺＭＰ軌道、体幹運動、上肢運動、腰部水平位置及び高さなどを設定すると共に、これらの設定内容に従った動作を指示する指令値を各アクチュエータ３５０に転送する。

また、ＣＰＵ３１１は、姿勢センサ３５１の出力信号によりロボット装置１の体幹部ユニット２の姿勢や傾きを検出すると共に、各接地確認センサ３５２，３５３の出力信号により各脚部ユニット５Ｒ／Ｌが遊脚又は立脚の何れの状態であるかを検出することによって、ロボット装置１の全身協調運動を適応的に制御することができる。

また、ＣＰＵ３１１は、ＺＭＰ位置が常にＺＭＰ安定領域の中心に向かうように、ロボット装置１の姿勢や動作を制御する。

さらに、運動制御モジュール３００は、思考制御モジュール２００において決定された意思通りの行動がどの程度発現されたか、すなわち処理の状況を、思考制御モジュール２００に返すようになっている。

このようにしてロボット装置１は、制御プログラムに基づいて自己及び周囲の状況を判断し、自律的に行動することができる。

（２）ロボット装置とユーザとの双方向の見まね動作
次に、上述したロボット装置１とユーザとの双方向の見まね動作の実現方法について説明する。以下では、ロボット装置１と１人のユーザとが面し合ってお互いにダンスを披露し合い、そのダンスをお互いに評価し、さらに新しいダンスの創作を行うという場面を想定する。

ロボット装置１とユーザとの双方向の見まね動作は、例えば図４のフローチャートに示すような順序で行われる。なお、このフローチャートでは、ユーザからダンスを開始するものとするが、この例に限定されるものでないことは勿論である。

先ずステップＳ１において、ユーザは、ロボット装置１に向かって例えば両腕や両手を用いたリズミカルなダンスを披露する。この際、ロボット装置１は、ユーザのダンスを観察しておく。なお、このダンスは、次ループまで行い続けてもよく、任意のタイミングで停止させてもよい。また、ダンスの内容を適宜変化させても構わない。

次にステップＳ２において、ロボット装置１は、観察したダンスを模倣した動作を発現し続け、続くステップＳ３において、ユーザは、任意のタイミングでロボット装置１の動作を評価する。この評価結果に応じて、ロボット装置１は、ステップＳ２に戻って動作を発現し続けるか、又はステップＳ４に進む。この点については後述する。

ステップＳ４において、ロボット装置１は、発現した動作を変調することで新しいダンスを創作し、ステップＳ５において、このダンスをユーザに披露する。この際、ユーザは、ロボット装置１のダンスを観察しておく。なお、このダンスは、次ループまで行い続けてもよく、任意のタイミングで停止させてもよい。

続いてステップＳ６において、ユーザは、観察したダンスを模倣した動作を発現し続け、続くステップＳ７において、ロボット装置１は、任意のタイミングでユーザの動作を評価する。この評価結果に応じて、ロボット装置１は、ステップＳ５に戻って同じ動作又は異なる動作を発現し続けるか、又はステップＳ８に進む。この点については後述する。

ステップＳ８において、ユーザは、発現した動作に基づいて新しいダンスを創作し、ステップＳ１に戻る。

以下、図５〜図７を参照しながら、図４のフローチャートの各ステップについて詳細に説明する。なお、図５は、図４のステップＳ１〜Ｓ４、すなわちユーザがダンスを披露しロボット装置１がそれを模倣した動作を行う際に関連するロボット装置１の機能ブロック構成を示したものである。一方、図７は、図４のステップＳ５〜Ｓ８、すなわちロボット装置１がダンスを披露しユーザがそれを模倣した動作を行う際に関連するロボット装置１の機能ブロック構成を示したものである。

先ず、図４のステップＳ１において、ユーザは、ロボット装置１に向かって例えば両腕や両手を用いたリズミカルなダンスを披露し、ロボット装置１は、そのダンスを観察する。

この際、ロボット装置１では、図５のカメラ画像入力器１０（図３の画像入力装置２５１に相当）を介してダンスの画像が入力される。

動領域抽出器１１は、この画像から動き領域を抽出し、図６（Ａ）に示すように、その動き領域を囲むブロック領域（Block Region；ＢＲ）と呼ばれる長方形を求める。これは、通常用いられている基本的な画像処理方法を用いて行われ、フレーム間差分による動領域摘出とそのラベリング、ラベル領域を含む最小長方形計算という手続きを踏む。実際には、ＢＲの中心点と縦横の長さとの３つのデータが抽出され、ＢＲ軌跡短期記憶部１２に供給される。

ＢＲ軌跡短期記憶部１２は、一定時間内に動領域抽出器１１で抽出されたデータをキュー構造によって保持する。

リズム情報抽出器１３は、ＢＲ軌跡短期記憶部１２に記憶されたＢＲ中心点時系列情報からリズム情報を計算する。ここでは、図６（Ｂ）に示すように、各時点におけるＢＲ中心点が、画像中心を任意角度で通る軸Ｌ上に射影され、その軸Ｌと時間軸とよって定義される波形情報に変換される。この波形から実際のリズムを算出する方法としては種々考えられるが、例えばその波形に簡単な信号処理を施してスペクトル情報を得るものとする。

身体性変換器１４は、ＢＲ軌跡短期記憶部１２に記憶されたＢＲの縦横の長さ情報から、動作として該当するロボット装置１の身体部分を決定する。ここでは、縦横それぞれについて時間平均を算出し、その大きさに合った身体マッピング（例：「縦平均がｍ以下且つ横平均がｎ以下の場合は手先とする」など）を予めプログラマが設定しておくものとし、それに即して該当する身体部分が決定される。

動作パターン抽出器１５は、リズム情報抽出器１３及び身体性変換器１４の出力を合わせて動作パターンとして一時保持する。

次に図４のステップＳ２において、ロボット装置１は、観察したダンスを模倣した動作を発現し続ける。

具体的に、ロボット装置１では、動作パターン抽出器１５に保持されている動作パターンが身体制御器１６に供給され、身体制御器１６は、この動作パターンに従って該当するアクチュエータ１７を動かす。例えば、スペクトル中の最大周波数を用いてアクチュエータ１７を任意角度振動させる。

続いて図４のステップＳ３において、ユーザは、任意のタイミングでロボット装置１の動作を評価する。

この際、ユーザは、任意のタイミングでロボット装置１に音声指示を与える。音声指示は、ロボット装置１のマイク音声入力器２０（図３の音声入力装置２５２に相当）を介して入力され、音声認識器２１によって解釈される。例えば、ユーザから「よし」という音声指示が与えられた場合、音声認識器２１から動作パターン抽出器１５に命令が送られ、その時の動作パターンが動作記憶器１８に保持される。また、ユーザから「だめ」という音声指示が与えられた場合、音声認識器２１から動作パターン抽出器１５に命令が送られ、その時の動作パターンをランダムに変更する。変更された動作パターンは、一定時間、身体制御器１６に送り続けられ、この間、動作パターン抽出器１５とリズム情報抽出器１３及び身体性変換器１４との接続は切られる。また、ユーザから「タイミング前（後）」という音声指示が与えられた場合、身体制御器１６に命令が送られ、アクチュエータ１７を動かすタイミングをそれまでのデフォルト値より一定時間早く（遅く）する。これは、ユーザの動作との位相タイミングを調整するために用いられる。また、ユーザから「新しいダンスを踊って」という音声指示が与えられた場合、新規動作パターン生成器１９に命令が送られ、ステップＳ４の処理が行われる。

図４のステップＳ４において、ロボット装置１は、発現した動作を変調することで新しいダンスを創作する。

具体的に、新規動作パターン生成器１９は、動作記憶器１８に保持された動作パターンを用いて新しい動作パターンを生成する。生成方法としては、例えば過去の任意の２つの動作パターンを取り出し、そのスペクトルを成分毎に平均して新しいスペクトルを求める方法や、単純にランダムに過去の１つの動作パターンを選ぶ方法、さらにその動作パターンをランダムに変化させる方法などが挙げられる。

続いて図４のステップＳ５において、ロボット装置１は、生成した新しいダンスをユーザに披露する。

この際、ステップＳ４で選ばれた動作パターンが図７の動作記憶器１８に保持され、同時に動作マッチング器２２に供給される。また、身体制御器１６は、この動作パターンに従って該当するアクチュエータ１７を動かす。

続いて図４のステップＳ６において、ユーザは、観察したダンスを模倣した動作を発現し続け、ロボット装置１は、そのダンスを観察する。

この際、ロボット装置１では、ステップＳ２の前半と同様に、カメラ画像入力器１０、動領域抽出器１１、ＢＲ軌跡短期記憶部１２、リズム情報抽出器１３及び身体性変換器１４を介して動作パターン抽出器１５に動作パターンが保持され、その動作パターンは、動作マッチング器２２に供給される。

続いて図４のステップＳ７において、ロボット装置１は、任意のタイミングでユーザの動作を評価する。

具体的に、ロボット装置１では、予めロボット行動設定器２５にプログラマが設定した任意のタイミングで動作マッチング器２２に命令が送られ、動作マッチング器２２は、この命令に応じて、動作パターン抽出器１５から供給された動作パターンと動作記憶器１８から供給された動作パターンとを比較する。比較方法としては、単純にスペクトル同士と身体部位項同士のマッチングを取り、前者に関しては例えば最大周波数間の距離を計算するものとする。この距離が所定の閾値以下であり且つ身体マッチングが取れている場合、音声合成器２３は、スピーカ音声出力器２４（図３の音声出力装置２５３に相当）を介して「よし」という音声を出力し、そうでない場合には「だめ」という音声を出力する。「よし」という音声を出力した場合、ロボット行動設定器２５は、動作記憶器１８から新しい動作パターンをランダムに抽出し、この動作パターンを身体制御器１６に供給して、ステップＳ５に戻る。また、「だめ」という音声を出力した連続回数が予めプログラマが設定した回数に達した場合、ロボット行動設定器２５は、同様に動作記憶器１８から新しい動作パターンをランダムに抽出し、この動作パターンを身体制御器１６に供給して、ステップＳ５に戻る。また、「よし」という音声を出力した通算回数が予めプログラマが設定した回数に達した場合、ロボット行動設定器２５は、音声合成器２３及びスピーカ音声出力器２４を介して「新しいダンスを踊って」という音声を出力し、ステップＳ８に進む。

続いて図４のステップＳ８において、ユーザは、発現した動作に基づいて新しいダンスを創作し、ステップＳ１に戻る。

なお、任意のタイミングでユーザから「終了」という音声がマイク音声入力器２０を介して入力され、音声認識器２１によって認識された場合、身体制御器１６は、アクチュエータ１７の動きを止め、ループが終了する。

以上説明したように、本実施の形態におけるロボット装置１によれば、ユーザとの間で双方向にダンスの見まね動作を行うことで、双方向のインタラクションを実現することができ、ロボット装置１の価値観を向上させることができる。

また、ダンスをお互いに評価し合い、その評価結果に応じてダンスの動作を変化させることにより、例えば実際のダンス振り付けを考える際に、創作者のアイディア創出の一助とすることができる。

なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。

例えば、上述した実施の形態では、ロボット装置１とユーザ（人間）とが見まね動作を通じて双方向コミュニケーションを実現するものとして説明したが、ロボット装置１のコミュニケーション対象がユーザに限定されるものではなく、同様の機能を有するロボット装置等の他の動作主体をコミュニケーション対象としても構わない。

本実施の形態におけるロボット装置の外観を示す斜視図である。同ロボット装置の機能構成を模式的に示すブロック図である。同ロボット装置の制御ユニットの構成を詳細に示すブロック図である。同ロボット装置とユーザとの双方向の見まね動作の順序を説明するフローチャートである。ユーザがダンスを披露しロボット装置がそれを模倣した動作を行う際に関連するロボット装置の機能ブロック構成を示す図である。同図（Ａ）は、ロボット装置が画像から抽出する動き領域及びその動き領域を囲むブロック領域を示す図であり、同図（Ｂ）は、リズム情報を計算するためにブロック領域中心点を画像中心を任意角度で通る軸上に射影する様子を示す図である。ロボット装置がダンスを披露しユーザがそれを模倣した動作を行う際に関連するロボット装置の機能ブロック構成を示す図である。

符号の説明

１ロボット装置、１０カメラ画像入力器、１１動領域抽出器、１２ＢＲ軌跡短期記憶部、１３リズム情報抽出器、１４身体性変換器、１５動作パターン抽出器、１６身体制御器、１７アクチュエータ、１８動作記憶器、１９新規動作パターン生成器、２０マイク音声入力器、２１音声認識器、２２動作マッチング器、２３音声合成器、２４スピーカ音声出力器、２５ロボット行動設定器

Claims

自律的に動作可能なロボット装置であって、
複数の動作パターンから一の動作パターンを選択して発現する動作発現手段と、
発現した動作パターンを記憶する動作記憶手段と、
発現した動作パターンを他の動作主体が模倣している様子を画像として入力する画像入力手段と、
音声入力手段と、
上記画像入力手段を介して入力された画像から上記他の動作主体の動作パターンを抽出する動作抽出手段と、
上記動作記憶手段に記憶されている動作パターンと上記動作抽出手段によって抽出された動作パターンとを比較する比較手段と、
上記比較結果に応じて上記他の動作主体の動作パターンを評価する評価手段と
を備え、
上記動作発現手段は、上記画像入力手段を介して入力された上記他の動作主体の画像から上記動作抽出手段により動作パターンを抽出し、上記他の動作主体が発現した動作を模倣した動作パターンを発現し、
上記音声入力手段は、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力し、
上記動作発現手段は、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させる
ロボット装置。
上記評価手段による評価結果を音声により出力する音声出力手段をさらに備える請求項１記載のロボット装置。
人間を模した外観形状とされ、
上記他の動作主体は、該ロボット装置のユーザである
請求項１記載のロボット装置。
自律的に動作可能なロボット装置の動作比較方法であって、
複数の動作パターンから一の動作パターンを選択して発現する動作発現工程と、
発現した動作パターンを動作記憶手段に記憶する動作記憶工程と、
発現した動作パターンを他の動作主体が模倣している様子を画像として入力する画像入力工程と、
音声入力工程と、
上記画像入力工程にて入力された画像から上記他の動作主体の動作パターンを抽出する動作抽出工程と、
上記動作記憶手段に記憶されている動作パターンと上記動作抽出工程にて抽出された動作パターンとを比較する比較工程と、
上記比較結果に応じて上記他の動作主体の動作パターンを評価する評価工程と
を有し、
上記動作発現工程では、上記画像入力工程を介して入力された上記他の動作主体の画像から上記動作抽出工程にて動作パターンを抽出し、上記他の動作主体が発現した動作を模倣した動作パターンを発現し、
上記音声入力工程では、上記他の動作主体が発現した動作を模倣した動作パターンに対する上記他の動作主体からの評価結果を音声により入力し、
上記動作発現工程では、上記他の動作主体からの評価結果に応じて、発現する動作パターンを変調させる
ロボット装置の動作比較方法。
上記評価工程における評価結果を音声により出力する音声出力工程をさらに有する請求項４記載のロボット装置の動作比較方法。
人間を模した外観形状とされ、
上記他の動作主体は、該ロボット装置のユーザである
請求項４記載のロボット装置の動作比較方法。