JP2001265521A - モーションキャプチャシステム - Google Patents

Abstract

(57)【要約】 【課題】 身体の動きを束縛することなく、測定環境の
制限が少なく、確実に人間などの動きを把握できるよう
にする。 【解決手段】 身体の動作要点部１２ａ〜１２ｆの各々
に複数のアンテナエレメントを取り付け、身体に着けた
無線送信装置１３から各アンテナエレメントを識別可能
な無線信号を送出し、これを各アンテナから送出する。
この無線信号を周囲に配置した無線受信装置１４ａ〜１
４ｆで受信し、各信号の受信電界強度から動作要点部の
位置、動き、向きをデータ処理装置１５で計算し、動き
の自由度の高いリアルタイムのモーションキャプチャシ
ステムを提供する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、人間の身体の動き
を解析するモーションキャプチャシステムに関するもの
である。

【０００２】

【従来の技術】今日では、ＣＧ（コンピュータグラフィ
ック）技術の発展により、人間の身体（オブジェクト）
の動きのデータを抽出し、オブジェクトを計算機によっ
て自然に表現できるようになっている。この方法は、人
間の身体の関節等の主要ポイント（動作要点部）に白い
マークやランプを貼り付け、実際の人間の動きを数台の
テレビカメラで違った角度から撮影し、コンピュータで
その映像を解析して、ＣＧのスケルトン（骨格み）デー
タを動きとして解析する方法である。

【０００３】また最近は、このような画像解析を使用せ
ず、バーチャルリアリティー技術を応用したＣＧ技術と
しての磁気式と光学式の二つのモーションキャプチャシ
ステムも用いられている。このうち、磁気式は強力な磁
場で被写体の人間の動く空間を覆い、体の関節部分に取
り付けた磁気センサで空間の位置を割り出す方法であ
る。データがリアルタイムに入手できるので、ＴＶなど
の番組作成に欠かせないものになっている。

【０００４】一方、最近主流になりつつあるのが光学式
である。この方式によるモーションキャプチャシステム
の利点は、精度の高さ、被写体の人間にコードがないの
で自然な演技をしやすいことにある。図２に光学式のモ
ーションキャプチャシステムの構成例を示す。被測定者
（モデル人物）２１には、白丸で示すようにマーカが
頭、首、肩、腕、手首、腰、膝、足首などの動作要点部
に取り付けられている。このマーカは自転車の反射板シ
ートを貼りつけた反射球で出来ている。照明装置２２ａ
〜２２ｆはデータ処理装置２５と同期を取って、定期的
に赤外線を発光している。その光は、被測定者２１の動
作要点部に取り付けられた反射球であるマーカから反射
し、高速度高感度カメラ２３ａ〜２３ｆがその反射光を
捉え、照明装置２２ａ〜２２ｆの発光ごとのマーカの位
置が画像データとしてデータ処理装置２５へ取り込まれ
る。取り込まれた画像は、画像処理後に、三点計測で、
三次元形状モデルで空間状の点として変換されるもので
ある。

【０００５】

【発明が解決しようとする課題】磁気式モーションキャ
ップチャシステムの場合においては、通常、被測定者の
体中にセンサが貼つけられ、このセンサからの電気信号
を伝達するためのケーブルを引きずった状態で被測定者
が動作せねばならず、自由度がないという問題があっ
た。また、近くに金属があると、磁界が歪むために、測
定を行う場所の設定に苦労や手間がかかるという問題点
があった。さらに、三次元座標を求めるのには一定の磁
場強度を必要とするが、磁界が円を描いて回っているた
めに、磁界の中心から離れていくほど磁力が弱くなり
（歪み）、位置検出精度が悪くなる。そのため画像処理
に問題が生じ、測定誤差が発生しやすいという問題点が
あった。

【０００６】一方、光学式モーションキャプチャシステ
ムの場合、反射球の移動位置を全体の画像として取り込
むため、背景が画像に入らないように、何らかの幕で覆わ
れた空間環境で被写体が動作する必要があった。また、
大掛かりな画像キャプチャシステムで、高速度高感度カ
メラの台数分だけ照明装置が必要となり、三点計測を行
つた後、どの点に、どのマーカがあつたのか条件設定を考
慮しなければならず、リアルタイムの運用が非常に難し
い。 さらに、被写体の動作要点部に取り付けられている
マーカである反射球と他の反射球が重なったり、画像を
捉える高速度高感度カメラの死角に移動したときなどに
は、各反射球の識別に誤りが生じ易く、データ処理を誤る
といった問題点があつた。

【０００７】本発明は、以上の問題を解決するためにな
されたものであり、ＣＧ(コンピュータグラフィック）で
映像解析の評価を行う従来の方式とは異なり、無線技術
(ワイヤレス)を用いることで被測定者の向きや姿勢を容
易に検出することが可能で、一般の人でも違和感なく動
作を測定できるモーションキャプチャシステムを提供す
ることを目的としている。

【０００８】

【課題を解決するための手段】上記の目的を達成するた
めに、本発明は、被測定者の動作要点部の動きを検出
し、シミュレートするモーションキャプチャシステムに
おいて、被測定者の動作要点部の各々に複数個ずつ取り
付けられたアンテナエレメントと、このアンテナエレメ
ントの各々を識別可能な無線信号を生成して各アンテナ
エレメントへ送出する無線送信装置と、前記アンテナエ
レメントの各々から送信された無線信号を受信する複数
の無線受信装置と、この無線受信装置により受信された
各無線信号の受信電界強度から前記動作要点部の位置、
動き、向きの少なくとも１つを検出する処理手段とを備
えたことを特徴とするモーションキャプチャシステムを
提供する。

【０００９】

【発明の実施の形態】以下、本発明の実施の形態を詳細
に説明する。図１は、本発明モーションキャプチャーシ
ステムの構成例を示す図で、動き（モーション）を検出
・捕捉（キャプチャ）される被測定者１１の動作要点部
（主に関節部）を白丸で示す。図では頭部１２ａ、左肩
１２ｂ、左腕１２ｃ、左手首１２ｄ、右膝１２ｅ、右足
首１２ｆなど１３個の動作要点部がある場合を示してい
る。各動作要点部には複数のアンテナエレメントが設置
され、そのアンテナエレメントには被測定者１１の背中
に設けた斜線で示す無線送信装置１３から、そのアンテ
ナエレメントの位置を示す位置信号が送られ無線電波と
して送出されている。動作要点部がｍ個あり、各動作要
点部にｎ個のアンテナエレメントを設置するとすると、
アンテナエレメントの総数はｍ×ｎ個となる。無線送信
機１３からはｍ×ｎ個のアンテナエレメントにそれぞれ
のアンテナエレメントを識別できる位置信号を送出して
いる。

【００１０】図１では、被測定者１１の周囲に６台の無
線受信装置１４ａ〜１４ｆが配置されている例を示して
いる。もちろん、実際に周囲に設置するのは受信アンテ
ナのみで、受信機などの位置は周囲に分布している必要
はない。また、必要により６台以上の無線受信装置を設
置する場合もある。各無線受信装置からは受信結果がデ
ータ処理装置１５に送られている。各無線受信装置１４
ａ〜１４ｆは、それぞれが、すべての動作要点部のアン
テナエレメントから送出される位置信号を受信できるも
のである。この各アンテナエレメントを識別する位置信
号の構成法として最も簡単なものは、ｍ×ｎ個のアンテ
ナエレメントからすべて異なる無線周波数を送出する方
法である。この方法はアンテナエレメントの数が少ない
場合は容易に実現できるが、アンテナエレメントの数が
多くなると送受信機の数が膨大になる。図１の場合、動
作要点部が１３個、各動作要点部に４個のアンテナエレ
メントを設置すると、アンテナエレメントの個数は５２
個となる。これに全て異なる無線周波数を割り当てると
すると、無線送信装置１３には５２の異なる無線周波数
の送信機、無線受信装置１４ａから１４ｆの６個の無線
受信装置も各々、５２の周波数の受信機を持つ必要があ
る。

【００１１】送信周波数の数を少なくするには、アンテ
ナエレメントからの電波の送出を時分割で行う方法があ
る。例えば一つの動作要点部に４個のアンテナエレメン
トがあるとすると、一つの動作要点部の４つのアンテナ
エレメントからはｆ１〜ｆ４までの異なる無線周波数を
同時に送出するが、異なる動作要点部には異なる時間に
同じｆ１からｆ４までの無線周波数を送出する。すなわ
ち、図１で左肩１２ｂの周囲に設置した４個のアンテナ
エレメントからｆ１からｆ４までの無線周波数を送出
し、Ｔ時間送出すると左肩１２ｂのアンテナエレメント
からの送出を中止し、次は左腕１２ｃにある４個のアン
テナエレメントから無線周波数ｆ１〜ｆ４を送出し、Ｔ
時間経過すると次は左手首１２ｄの４個のアンテナエレ
メントから送出するというように、被測定者１１のすべ
ての動作要点部から順次ｆ１〜ｆ４の無線周波数を時分
割的に送出する。このようにすると送信する無線周波数
は４個だけに減少する。しかし、無線送信装置１３には
被測定者１１の動作要点部の数だけ、順次にアンテナエ
レメントを切り換える切り替え装置が必要となる。これ
により無線受信装置においても、無線受信装置１４ａか
ら１４ｆの無線受信機の受信周波数はｆ１からｆ４まで
の４つでよいが、受信した無線周波数がどの動作要点部
のものかの識別が必要となる。これは、無線送信装置１
３から動作要点部ごとに順次アンテナエレメントを切り
換えて送信するので、その順序をあらかじめ決めておけ
ば、無線受信装置でも送信側と同期をとって受信するこ
とで可能である。この同期の取り方は、例えば無線送信
装置から何も送出しない時間をとり、その次に最初に送
出する動作要点部は頭部１２ａとし、順次各動作要点部
から電波を送出し一回りすればまた何も送信しない時間
をとることで容易に実現できる。

【００１２】なお、動作要点部ごとの時分割送信で、同
期を取った一周期内ですべての動作要点部で送信回数を
同じにする必要はなく、動作が激しいと考えられる手首
などの動作要点部からは一周期内でも複数回電波を送出
し、首や腰のアンテナエレメントからは１回だけにする
などの制御も可能である。また動作要点部識別を、同期
と送信順序で行わずに、アンテナエレメントから送出す
る無線電波を単にキャリア周波数の送信だけにするので
なく、動作要点部を表すデータで変調して送出すること
もできる。すなわち、各動作要点部にその動作要点部を
識別するＩＤを付与し、そのＩＤのデータで動作要点部
のアンテナエレメントから送出する無線周波数を変調す
れば、受信側では、データを復調することでどの動作要
点部からの位置信号であるかが識別できる。この方法を
とれば、動作要点部ごとに時分割で送信することは同じ
だが、動作要点部の送信順序は自由に変更できる。動き
が激しい動作要点部からは順序に関係なく頻繁に送信す
ることも可能となる。

【００１３】次に、本発明の動作原理を手首の動きを例
に説明する。図３は、動作要点部としての手首とその周
囲に設置されたアンテナエレメントの配置例を示す断面
図である。手首３１の周囲に４個のアンテナエレメント
３２ａ、３２ｂ、３２ｃ、３２ｄが設置されている。一
般に、動作要点部にｎ個のアンテナエレメントを設置す
るには、動作要点部の周囲に３６０／ｎ度ごとに等間隔
に設置するのが好ましい。図では４個なので９０度間隔
に取り付けている。アンテナエレメントを手首に取り付
けるにはリストバンドなどを用いると容易である。今、
無線送信装置１３からはアンテナエレメント３２ａには
無線周波数ｆ１が、アンテナエレメント３２ｂには無線
周波数ｆ２が、アンテナエレメント３２ｃには無線周波
数ｆ３が、アンテナエレメント３２ｄには無線周波数ｆ
４と周波数の異なる電波が送出されているものとする。
他の動作要点部との識別は時分割で行っているものとす
る。手首３１の周囲には６台の無線受信装置１４ａ〜１
４ｆがある。各無線受信装置は動作要点部３１の各アン
テナエレメントからの電波を受信し、その電界強度を検
出してデータ処理装置１５に送出している。

【００１４】説明を簡単にするために、図３の無線受信
装置１４ａ〜１４ｆは、平面的に配置されているとして
説明する。一つのアンテナエレメントから送出された電
波は、そのアンテナエレメントに近い無線受信装置では
電界強度が強く受信され、離れれば受信電界強度は低
い。図３の状態では、アンテナエレメント３２ｂからの
無線周波数ｆ２の電波は無線受信装置１４ｂでもっとも
電界強度が強く受信され、無線受信装置１４ｅでの受信
電界強度が最も低い。一方、アンテナエレメント３２ｄ
からの無線周波数ｆ４の電波は、無線受信装置１４ｅで
最も強く受信され無線受信装置１４ｂでは最も弱く受信
される。他のアンテナエレメントからの電波も同様に近
い無線受信装置の受信電界強度が大きく計測される。そ
のため、各アンテナエレメントからのデータを受信した
データ処理装置１５では、図３の状態に手首があること
を識別している。

【００１５】手首３１が右に９０度回転した場合の図
が、図４である。図３から図４に手首が回転すると、無
線受信装置１４ｂではアンテナエレメント３２ｂから送
出される周波数ｆ２の電界強度が下がり、アンテナエレ
メント３２ｃから送出される周波数ｆ３の電波がもっと
も強く受信される。一方無線受信装置１４ｅでは、アン
テナエレメント３２ｄからの周波数ｆ４の受信電界強度
が下がり、アンテナエレメント３２ａからの周波数ｆ１
の電波が最も強く受信される。これらのデータがデータ
処理装置１５に送られ、データ処理装置１５は手首３１
が図３の状態から図４の９０度右に回転したことを知
る。

【００１６】次に、図４で、手首３１が右に移動したと
すると、無線受信装置１４ｂで受信した各アンテナエレ
メントから受信した電波、すなわちアンテナエレメント
３２ａから送信される周波数ｆ１の電波、３２ｂから送
信される周波数ｆ２の電波、３２ｃから送信される周波
数ｆ３の電波、３２ｄから送信される周波数ｆ４の電波
の受信電界強度は、いづれも右に移動しなかった状態の
値より低下し、無線受信装置１４ｅで受信されるこれら
の電波の電界強度は逆に強くなる。このデータがデータ
処理装置１５に送られるので、データ処理装置１５では
手首３１が右に移動したことを知る。

【００１７】以上、動作要点部の位置の検出、動き、向
きの測定について定性的に説明したが、実際の測定は、
アンテナエレメントからの送信電波の受信電界強度を各
無線受信装置で定量的に測定し、そのデータをもとに動
作要点部の位置を計算する。そして、この計算された位
置の時間的変化から、動作要点部の動きの大きさ、向き
などを求める。原理的には、一次元の直線上の移動であ
れば、一つの無線受信装置の受信電界強度から位置が決
定でき、二次元の平面上の動きであれば二台の無線受信
装置の受信電界強度で位置が決定できる。また三次元の
立体的な動きであれば３台の無線受信装置での受信電界
強度から位置が決定可能である。しかし実際には、身体
の陰で受信不能な状態もあるので、多数の無線受信装置
の配置が必要となる。図３、図４では無線受信装置１４
ａから１４ｆは平面的に設置されていると仮定して位置
や動きの検出原理を説明したが、実際の無線受信装置の
配置は立体的に設置され、また各無線受信装置に設けら
れている受信アンテナは、指向性の高いアンテナ（八木
アンテナ、ヘリカルアンテナ、コーナレフレクタアンテ
ナなど）であるので、受信電界強度から位置を求めるに
は、これらの特性を考慮する必要がある。さらには、手
首などの動作要点部は、体の陰になることもあり、体の
反対側の無線受信装置では、距離による電波の減衰より
も大きな減衰を受けた受信電界強度となる。そのような
場合のためには、すべての無線受信装置からの受信電界
強度のデータを用いるのでなく、ある閾値より強く受信
されている無線受信装置のデータのみから、位置を計算
することも必要である。

【００１８】以上説明したように、実際は、無線受信装
置のアンテナは立体的に配置され、動作要点部の位置は
３次元的に検出される。すなわち、無線受信装置の受信
アンテナの受信電界強度からベクトル演算等を用いて空
間的な座標を割り出し、その値を用いて演算・解析し被
測定者の動作要点部の向き・動きを検出し、動作状況を割
り出すことになる。しかしながら、ある動作要点部のア
ンテナエレメントが体の陰になり、無線受信装置の受信
電界強度の値が測定不能となったりして、位置検出が難
しい状態が生じることも考えられる。このような場合に
対処するため、他の動作要点部の計算できた位置の値か
ら検出できなかった動作要点部の位置を推定する。この
ために、あらかじめ、位置が検出できた動作要点部と位
置が検出できなかった動作要点部の組合せのパターンを
用意しておく。組合せのパターン例を図５に示す。これ
は、動作要点部の位置が受信した電界強度から検出でき
たかどうかを示していて、“１”は検出できた場合で、
“０”が検出できなかった場合である。

【００１９】データ処理装置１５のＲＯＭ（リードオン
リメモリ）には、図５に示すように、ある動作要点部の
一つで位置が検出できなかった場合のパターンと、その
検出できなかった動作要点部の位置をどのような演算式
で計算して推定するかの式が記憶されている。図６にそ
の一つのパターンを例に詳細に示す。図６では最初の欄
が首の動作要点部で、次の欄が腰の動作要点部、その次
が右肩の動作要点部を示し、その各々の値は“１”であ
るので、位置が検出できていることを表している。最初
から９つ目の欄は左手首の動作要点部でその値は“０”
である。演算式の欄には、左手首の位置が検出出来なか
ったときに、他の動作要点部の位置から推定する計算式
が書かれている。この例では、左手首の位置が計算でき
ない場合とは、左手首が腹部に覆われる場合であると考
え、首の位置と腰の位置の中間にあると推定する。その
ため、演算式には（首の位置座表＋腰の位置座標）／２
が記入されている。従って、左手首の位置が検出できな
かった場合には、ＲＯＭに記憶されている図５に示す検
出不能パターンの中から、左手首の動作要点部が“０”
である場合のパターンを抽出し、そこに書かれている演
算式を実行し、左手首の位置とする。この場合は、首の
位置座標が（ａ１，ｂ１，ｃ１）で、腰の位置座表が
（ａ２，ｂ２，ｃ２）であるとすると、（（ａ１＋ａ
２）／２，（ｂ１＋ｂ２）／２，（ｃ１＋ｃ２）／２）
を計算し左手首の動作要点部の位置とする。このように
することで、動作要点部のアンテナエレメントからの無
線電波が無線受信装置に届かないことが生じても、他の
動作要点部の位置から推定することができる。

【００２０】

【発明の効果】本発明により以下の効果がある。 （１）無線技術を応用し、被測定者の動作要点部の周囲
に複数のアンテナエレメントを配置し、受信側で受信電
界強度を検出し、演算・解析することで被測定者の向き
や姿勢の動作データを確実に得ることが出来る。 （２）マーカの識別がむずかしい光学式と比較し、演算
処理が迅速に容易に行え、リアルタイムでのシステム運
用が可能となる。 （３）磁気式のように周辺に金属があると磁界が歪む問
題もなく、光学式のように周囲を幕で覆う必要がないな
ど、測定を行う場所の設定に苦労や手間がかかることが
ない。 （４）被測定者の自由度が増し、被測定者が動作できる
空間があれば、どのような場所でも測定を実施できる。 （５）一つの位置の検出が困難な動作要点部があって
も、他の既知の動作要点部の位置から推定することで、
検出不能の場合に対処可能である。

【図面の簡単な説明】

【図１】本発明のモーシヨンキャプチャシステムの構成
例を示す図である。

【図２】光学式のモーシヨンキャプチャシステムの構成
図である。

【図３】動作要点部へのアンテナエレメントの設置例を
示す図である。

【図４】図３のアンテナエレメント設置例の動作要点部
が９０度回転した場合の図である。

【図５】位置検出不能の動作要点部の位置を推定するＲ
ＯＭの内容を示す図である。

【図６】位置を推定するＲＯＭの内容の詳細図である。

【符号の説明】

１１ 被測定者 １２ａ、１２ｂ、１２ｃ、１２ｄ、１２ｅ、１２ｆ 動
作要点部 １３ 無線送信装置 １４ａ、１４ｂ、１４ｃ、１４ｄ、１４ｅ、１４ｆ 無
線受信装置 １５ データ処理装置 ３１ 手首 ３２ａ、３２ｂ、３２ｃ、３２ｄ アンテナエレメント

Claims (1)

【特許請求の範囲】
1. 【請求項１】 被測定者の動作要点部の動きを検出し、
   シミュレートするモーションキャプチャシステムにおい
   て、 被測定者の動作要点部の各々に複数個ずつ取り付けられ
   たアンテナエレメントと、このアンテナエレメントの各
   々を識別可能な無線信号を生成して各アンテナエレメン
   トへ送出する無線送信装置と、前記アンテナエレメント
   の各々から送信された無線信号を受信する複数の無線受
   信装置と、この無線受信装置により受信された各無線信
   号の受信電界強度から前記動作要点部の位置、動き、向
   きの少なくとも１つを検出する処理手段とを備えたこと
   を特徴とするモーションキャプチャシステム。