JP2024058733A - ゲームシステム、ゲームシステムの制御方法及びコンピュータプログラム - Google Patents

Abstract

【課題】撮像データを利用して、ゲームをプレイしている間のプレイヤによるエネルギーの消費量を算出する。【解決手段】プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムは、前記撮像データを取得する撮像データ取得手段と、前記撮像データを解析して、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出する解析手段と、前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出する算出手段とを備える。【選択図】図５

Description

本発明は、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステム、ゲームシステムの制御方法及びコンピュータプログラムに関する。

特許文献１には、ゲームプレイによる累積エネルギー消費量がゲーム画面に表示されるダイエットモードが設けられているゲーム装置が開示されている。このダイエットモードでは、プレイヤーが、体重の数値を設定入力できる。また、ゲーム装置を構成する家庭用ゲーム機には、コントローラが接続されている。そして、プレイヤーがコントローラ上でステップを踏むと、両足の位置を表す操作信号が家庭用ゲーム機に送られる。これにより、家庭用ゲーム機のＣＰＵは、記憶された操作信号に基づいてプレイヤーの両足の状態が推移したかを判断する。そして、プレイヤーが両足を推移させたことによるエネルギー消費量が算出される。

特許文献２には、ゲームの運動量を測定するゲーム機が開示されている。また、特許文献２には、ゲーム機の踏み台に体重測定センサを取り付け、体重測定センサの出力信号によって体重を入力する構成が開示されている。

特開２００４－０２４９０３号公報 特開２００２－１１２９８４号公報

ゲームシステムは、プレイヤを撮像して得られる撮像データを用いたゲームを提供することがある。この場合、ゲームシステムは、ゲームを提供するために、撮像データを取得する。そのため、撮像データを利用して副次的な要素を提供できれば、プレイヤに対して新たな楽しみを与えることができる。

一態様に係るゲームシステムは、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムであって、前記撮像データを取得する撮像データ取得手段と、前記撮像データを解析して、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出する解析手段と、前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出する算出手段とを備える。

また、他の一態様に係る制御方法は、コンピュータを備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムの制御方法であって、前記コンピュータに、前記撮像データを取得させ、前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる。

また、他の一態様に係るコンピュータプログラムは、コンピュータを備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムのコンピュータプログラムであって、前記コンピュータに、前記撮像データを取得させ、前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる。

これにより、撮像データを利用して、ゲームをプレイしている間のプレイヤによるエネルギーの消費量を算出でき、プレイヤに対して新たな楽しみを与えることができる。

ゲームシステムの概略図。 一例としてのゲーム画面の概略図。 ゲームシステムの概略ブロック図。 一例としての案内情報を示す概略図。 算出処理の概略フローチャート。

以下、本発明を実施するための例示的な実施形態を、図面を参照して詳細に説明する。ただし、以下の実施形態において説明する寸法、材料、形状及び構成要素の相対的な位置は任意に設定でき、本発明が適用される装置又は方法の構成又は様々な条件に応じて変更できる。また、特別な記載がない限り、本発明の範囲は、以下に具体的に記載された実施形態に限定されない。

［第１実施形態］
図１に示すゲームシステム１００は、プレイヤを撮像して得られる撮像データを用いたゲームを提供する。一例として、このゲームは、プレイヤの動作として、音楽に対応する振り付けを踊るようなダンス動作をプレイヤに要求するように構成されている。また、ゲームシステム１００は、ゲームサーバ１０と、プレイヤにゲームをプレイさせるゲーム機６０とを備えている。そして、ゲーム機６０は、所定のネットワーク５０を介してゲームサーバ１０に接続可能である。なお、ゲーム機６０は、単体でゲームシステム１００として機能してもよい。

ネットワーク５０は、ゲームサーバ１０と、ゲーム機６０とをそれぞれ接続できるように構成されている。一例として、ネットワーク５０は、ＴＣＰ／ＩＰプロトコルを利用してネットワーク通信を実現するように構成されている。具体的には、ローカルエリアネットワーク５２が、ゲームサーバ１０とインターネット５１とを接続している。そして、ＷＡＮとしてのインターネット５１とローカルエリアネットワーク５２とが、ルータ５３を介して接続されている。ゲーム機６０も、インターネット５１に接続されるように構成されている。

代替的に、ゲーム機６０と、ゲーム機６０が設置されている店舗等のルータ５３との間にローカルサーバが設置されていてもよい。ゲーム機６０は、このローカルサーバを介して、ゲームサーバ１０と通信可能に接続される。また、ゲームサーバ１０とゲーム機６０とは、ローカルエリアネットワーク５２に代えて又は加えてインターネット５１により、相互に接続されていてもよい。また、ネットワーク５０は、専用線、電話回線、企業内ネットワーク、移動体通信網、その他の通信回線、及びそれらの組み合わせ等のいずれであってもよく、有線であるか無線であるかを問わない。

ゲームサーバ１０は、複数のコンピュータとしてのサーバユニットが組み合わされることにより一台の論理的なサーバ装置として構成されている。ただし、ゲームサーバ１０は、単一のサーバユニットによって構成されてもよい。あるいは、ゲームサーバ１０が、クラウドコンピューティングを利用して論理的に構成されてもよい。なお、ゲームサーバ１０は、外部サーバと協働して機能してもよい。

ゲームサーバ１０は、ゲーム装置の一例であるゲーム機６０に対して、ゲームサービスを含むゲーム装置用の各種サービスを提供する。このゲームサービスは、ネットワーク５０を介してゲーム機６０のゲームプログラム或いはデータを配信し、更新するゲーム配信サービスを含んでいる。この配信サービスを通じて、ゲームサーバ１０は、各ゲーム機６０にゲームの提供に必要な各種のプログラム或いはデータを適宜に配信する。

ゲームサービスは、ゲームサーバ１０がゲーム機６０からプレイヤを一意に識別するプレイヤ識別情報（以下、プレイヤＩＤともいう）を受け取って、プレイヤを認証するサービスを含んでいてもよい。また、ゲームサービスは、認証したプレイヤのプレイ結果を含むプレイデータを、ゲームサーバ１０がゲーム機６０から受け取って保存するサービスを含んでいてもよい。さらに、ゲームサービスは、ゲームサーバ１０が保存するプレイデータを、ゲーム機６０に提供するサービスを含んでいてもよい。その他に、ゲームサービスは、ネットワーク５０を介して複数のプレイヤが共通のゲームをプレイする際に、ゲームサーバ１０がプレイヤ同士をマッチングするサービスを含んでいてもよい。

また、ゲームサービスは、ゲームサーバ１０がプレイヤから料金を徴収するサービスを含んでいてもよい。さらに、ゲームサーバ１０は、ネットワーク５０を介してのプレイヤにウェブサービスを提供してもよい。このウェブサービスは、ゲームに関する各種の情報を提供する情報提供サービス、プレイヤによる情報発信、交換、及び共有といった交流の場を提供するコミュニティサービス、及び各プレイヤにプレイヤＩＤを付与するサービス等の他のサービスを含んでいてもよい。

ゲーム機６０は、所定の対価である料金の支払いと引き換えに、対価に対応した範囲でプレイヤにゲームをプレイさせる商業用又は業務用のゲーム装置である。このゲーム機６０は、アーケードゲーム機と呼ばれることがある。また、ゲーム機６０はコンピュータ装置であり、多数のプレイヤにゲームを繰り返しプレイさせて収益を上げることを主たる目的として、店舗等に設置される。ゲーム機６０は、プレイヤの動作を伴うゲームの一例として、音楽に合わせてプレイヤがダンス動作を行う音楽ゲームをプレイさせる。なお、ゲーム機６０は、音楽ゲーム以外のゲームとして、例えば格闘ゲーム、パズルゲーム、クイズゲーム、又はスポーツゲーム等の、プレイヤの動作を伴う他のゲームをプレイさせてもよい。以下では、ゲームシステム１００が音楽ゲームを提供する例を主に説明する。

代替的に、ゲーム機６０は、据置型又はブック型のパーソナルコンピュータ、携帯電話（スマートフォンを含む）のようなモバイル端末装置であってもよい。その他にも、据置型の家庭用ゲーム装置、携帯型ゲーム装置、及び携帯型タブレット端末装置等の各種のコンピュータ装置が、ゲーム機６０に含まれる。このようなゲーム機６０は、各種のコンピュータソフトウェアを実装することにより、ゲームサーバ１０が提供する種々のサービスをプレイヤに享受させることができる。

［ゲームの概要］
次に、図２及び図３を参照して、ゲーム機６０が提供する音楽ゲームの概要について説明する。図２はゲーム画面ＧＳを示す概略図であり、図３はゲームシステム１００の概略ブロック図である。図３に示すように、ゲーム機６０は、表示装置６４を備えている。この表示装置６４は、一例として液晶ディスプレイ、有機ＥＬディスプレイ、及び無機ＥＬディスプレイ等のディスプレイ、又はタッチパネルである。さらに、表示装置６４は、マトリクス状に配置された発光装置（例えば、発光ダイオード）、又は筐体の一部にゲーム画面を投影するプロジェクタであってもよい。

また、ゲーム機６０は、ゲーム時に再生されるゲーム音楽及び効果音等を出力する音声出力装置６５を備えている。この音声出力装置６５は、一例としてスピーカである。表示装置６４及び音声出力装置６５は、いずれもゲーム機６０の筐体に設けられているが、それぞれ筐体とは別体であってもよい。

図２に示すように、表示装置６４は、指示標識及びダンスオブジェクトＤＯを表示する。指示標識は、プレイヤへプレイ動作を指示し、例えば、音楽に合わせた基準ダンス動作を記述した情報であるダンスデータＤ１に基づいて生成される。このダンスデータＤ１は、サーバ記憶部１２が記憶している。一例として、基準ダンス動作は、プレイヤが再現すべき基準となるダンス動作であり、音楽に合わせたプロダンサーによるダンス動作、又は音楽に合わせてゲームをプレイする他のプレイヤによるダンス動作である。

ゲーム機６０が提供するゲームでは、複数種類の指示標識が表示される。例えば、指示標識は、ポーズマーカーＭＰ１，ＭＰ２と、タッチマーカーＭＴ１，ＭＴ２とを含む。ポーズマーカーＭＰ１，ＭＰ２は、ダンサーのシルエットの形を模した形状を有している。そして、ポーズマーカーＭＰ１，ＭＰ２は、プレイヤが行うべきプレイ動作として、ダンサーのポーズ又はダンサーのダンス動作を表す。また、タッチマーカーＭＴ１，ＭＴ２は、プレイヤが手足を移動させるべき位置として、ダンサーの手足が移動した位置を示す。さらに、指示標識は、ダンサーの手足の動きの軌道であり、プレイヤが手足を動かすべき軌道を示すトレースマーカー（不図示）を含んでいる。

また、ゲーム画面ＧＳの上部には、タイムラインＴＬが表示される。そして、ポーズマーカーＭＰ１は、タイムラインＴＬに表示される。このポーズマーカーＭＰ１は、プレイヤがどのように体を動かすのかを指示するために、所定の動作を繰り返しながらタイムラインＴＬ上を移動する。図２の例では、ポーズマーカーＭＰ１が、ゲーム画面ＧＳの右端から左に向かって移動する。そして、プレイヤは、ポーズマーカーＭＰ１がタイムラインＴＬの判定フレームＦＬに囲まれた領域に到達するタイミングで、ポーズマーカーＭＰ１によって指示されるダンス動作を行う。

また、ポーズマーカーＭＰ２は、タイムラインＴＬの下方に表示される。このポーズマーカーＭＰ２は、プレイヤの決めポーズを指示するために、固定のポーズを模した画像として表されている。ここで、決めポーズとは、音楽の特徴的な部分に対応するタイミングで行うポーズであり、一例として、体の動きを一時的に止める動作である。そして、二つのポーズマーカーＭＰ２の一方は、ゲーム画面ＧＳの右端からゲーム画面ＧＳの中央に向かって移動し、他方はゲーム画面ＧＳの左端からゲーム画面ＧＳの中央に向かって移動する。プレイヤは、ポーズマーカーＭＰ２がゲーム画面ＧＳの中央に到達するタイミングで、ポーズマーカーＭＰ２が示すポーズを取る。

なお、ポーズマーカーＭＰ２は一つであってもよく、三つ以上であってもよい。さらに、ポーズマーカーＭＰ２の当初表示位置と移動方向は任意である。例えば、ポーズマーカーＭＰ２は、ゲーム画面ＧＳの上端又は下端からゲーム画面ＧＳの中央に向かって移動してもよい。さらに、ポーズマーカーＭＰ２は、ゲーム画面ＧＳの中央に表示されて、ゲーム画面ＧＳの上端又は下端に向かって移動してもよい。若しくは、ポーズマーカーＭＰ２は、ゲーム画面ＧＳの中央に表示されて、ゲーム画面ＧＳの右端又は左端に向かって移動してもよい。

タイムラインＴＬの下方には、ダンスオブジェクトＤＯが表示される。そして、タッチマーカーＭＴ１，ＭＴ２は、ダンスオブジェクトＤＯの周囲に表示される。具体的に、タッチマーカーＭＴ２は、手を動かす位置をプレイヤに指示し、ダンスオブジェクトＤＯの手の付近に表示される。また、タッチマーカーＭＴ１は、足を動かす位置をプレイヤに指示し、ダンスオブジェクトＤＯの足の付近（特に足元）に表示される。なお、図２においては一つのダンスオブジェクトＤＯとしてメインダンサーが表示されている。ただし、ダンスオブジェクトＤＯは、メインダンサーに加えて、バックダンサーを含んでいてもよい。さらに、ダンスオブジェクトＤＯは、音楽に合わせて動くアイテム若しくは動物等の動作するオブジェクトを含んでいてもよい。

ゲームシステム１００が提供する音楽ゲームでは、サーバ記憶部１２が記憶している指示データＤ２に基づいて、所定のタイミング（以下、「指示タイミング」ともいう）に指示標識によってプレイ動作が指示される。一例として、指示タイミングは、音楽の各小節の各拍のタイミング（例えば、一拍目であれば拍頭）に対応する。そして、指示タイミングと、プレイヤがプレイ動作を行った動作タイミングとが比較される。

その結果、指示タイミングとプレイ動作のタイミングとのずれが小さいと、適切なプレイ動作を行ったと評価されて高い評価が得られる。また、指示タイミングとプレイ動作のタイミングとのずれが大きいと、プレイヤがプレイ動作に失敗したと評価されて低い評価が得られるか、又は評価を得られない。なお、ずれが大きい場合に加えて、指示タイミングにプレイヤのプレイ動作を行わない場合にも、低い評価結果となる。また、評価対象となるプレイ動作は、指示標識によって指示される動作には限られない。

図２におけるタイムラインＴＬの上方には、ビューワーゲージＶＧが表示される。ビューワーゲージＶＧは、プレイヤが指示標識によって指示されたタイミングで適切なプレイ動作を行うと伸びていく。一方、プレイヤがプレイ動作に失敗すると、ビューワーゲージＶＧは変化しないか、又は縮んでしまう。そして、ビューワーゲージＶＧが合格ラインに到達すると、ゲームのステージクリアとなる。さらに、タイムラインＴＬの上方であって、ビューワーゲージＶＧの右方には、スコアＳＣが表示される。スコアＳＣは、プレイヤの成績としての点数を表し、プレイヤが指示標識によって指示されたタイミングで適切なプレイ動作を行うと増加する。一方、プレイヤがプレイ動作に失敗すると、スコアＳＣが加算されないか、又は減少してしまう。

また、ゲーム画面ＧＳの下部には、コンボ数ＣＮが表示されている。コンボ数ＣＮは、プレイヤが適切なダンス動作を連続して行うと増加する。そして、プレイヤがダンス動作に失敗すると、コンボ数ＣＮはリセットされてゼロに戻るか、又は減少する。なお、指示標識は、時間の経過とともに種々の態様で変化してもよい。例えば、指示標識の変化態様としては、面積が徐々に小さくなる態様、色が徐々に変化する態様、濃度が徐々に濃く又は薄くなる態様、徐々に明るく又は暗くなる態様、及び徐々にオブジェクトの数が多く又は少なくなる態様が含まれる。さらに、指示標識は、文字、図形、模様、数字、及び記号並びにこれらの組み合わせを含んでいてもよい。

［ゲームシステムの構成］
図３を参照して、ゲームシステム１００の制御系について説明する。ゲームサーバ１０は、ゲームサーバ１０を制御するサーバ制御部１１と、ゲームサーバ１０の制御プログラムＰＧ１を記憶した記憶手段の一例であるサーバ記憶部１２とを備えている。サーバ制御部１１は、所定のプログラムに従って各種の演算処理及び動作制御を実行するプロセッサと、その他の周辺装置とを組み合わせたコンピュータとして構成されている。

例えば、サーバ制御部１１のプロセッサは、ＣＰＵ（Central Processing Unit）、又はＭＰＵ（Micro-Processing Unit）であり、サーバ記憶部１２に記憶された制御プログラムＰＧ１に基づいて、ゲームサーバ１０の全体を制御すると共に、各種処理についても統括的に制御する。また、サーバ記憶部１２は、プロセッサが動作するためのシステムワークメモリであるＲＡＭ（Random Access Memory）、並びにプログラム及びシステムソフトウェアを格納するＲＯＭ（Read Only Memory）、ＨＤＤ（Hard Disc Drive）及びＳＳＤ（Solid State Drive）等の記憶装置を含む。例えば、ＣＰＵは、ＲＯＭ又はＨＤＤに記憶された制御プログラムＰＧ１に従って、種々の演算、制御、及び判別等の処理動作を実行する。

サーバ制御部１１には、所定の指令及びデータを入力するキーボード若しくは各種スイッチを含むインターフェース（不図示）が、有線接続又は無線接続されている。また、サーバ制御部１１には、装置の入力状態、設定状態、計測結果、及び各種情報を表示するモニタ（不図示）が、有線接続又は無線接続されている。さらに、サーバ制御部１１は、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）、ＣＦ（Compact Flash）カード、及びＵＳＢ（Universal Serial Bus）メモリ等の可搬記録媒体、又はインターネット上のサーバ等の外部記憶媒体に記憶されたプログラムに従って制御を行うこともできる。

サーバ記憶部１２は、コンピュータ読み取り可能な非一時的記憶媒体の一例である不揮発性記憶媒体を含んだ、ハードディスク及び半導体記憶装置等の記憶装置である。サーバ記憶部１２は、一つの記憶ユニット上に全てのデータを記憶してもよいし、複数の記憶ユニットにデータを分散して記憶してもよい。そして、サーバ記憶部１２は、必要な各種の処理をサーバ制御部１１に実行させるコンピュータプログラムの一例として、制御プログラムＰＧ１を記録している。そして、サーバ制御部１１は、制御プログラムＰＧ１を実行することによって、ゲーム機６０をプレイするプレイヤにゲームサービスを提供する。例えば、サーバ制御部１１は、制御プログラムＰＧ１を実行することによって、指示標識を表示するための指示データＤ２を生成する。

また、サーバ記憶部１２は、音楽に合わせた基準ダンス動作のダンスデータＤ１を記憶している。例えば、ダンスデータＤ１は、ダンサー又はプレイヤの基準ダンス動作を撮像したダンス動画に基づいて生成される。一例として、ダンス動画の解析結果からダンサー又はプレイヤのダンスデータＤ１が取得される。このダンスデータＤ１は、ダンスを開始してから終了するまでの動作を記述した情報である。一例として、ダンスデータＤ１は、ボーン解析によって取得されるボーンデータである。代替的に、ダンスデータＤ１は、ダンサー又はプレイヤの体の各部の位置、向き、及び変位量を示すデータであってもよい。なお、以下の説明においては、ダンサーの基準ダンス動作のダンスデータＤ１を利用する例について主に説明する。

ここで、ボーンデータは、ダンサーの体の一部の位置座標を示す点を結ぶボーンを示す情報を意味しており、ボーンデータにおいてボーン同士は連結点によって互いに連結されている。そして、ダンス動画におけるダンサーのボーンの位置及び向き、並びに変位量に基づいて、ダンサーの基準ダンス動作を、ダンスデータＤ１として記録できる。なお、ボーンデータは、ダンス開始からの時間経過に伴う各時点におけるダンサーのボーンを表す。ただし、ボーンデータは、ボーンの位置、向き、及び変位量を予測した情報を一部に含んでいてもよい。なお、サーバ制御部１１は、ゲーム機６０の撮像装置６３が撮像した動画又は外部の記録装置から取得した動画を解析してダンスデータＤ１を取得してもよい。代替的に、予めダンス動作を撮像して得られたダンス動画を解析してボーンデータが作成されており、オペレータが、当該ボーンデータをサーバ記憶部１２に記憶させてもよい。

また、サーバ記憶部１２は、音楽ゲーム用のゲームデータＧＤを記憶している。そして、ゲームデータＧＤには、指示データＤ２と、音楽データＤ３とが含まれている。音楽データＤ３は、ゲーム中に再生される楽曲であるが、効果音及び演出音等のデータを含んでいてもよい。そして、指示データＤ２は、ゲームの操作手順を定義したデータであり、例えば、指示標識の表示タイミング、表示位置並びに移動速度、及び指示標識の種類等のデータを含んでいる。さらに、ゲームデータＧＤは、画像データ（不図示）を記憶している。画像データは、例えば、指示標識、演出画像、アイコン、各種オブジェクト、及び背景等の画像のデータを含んでいる。

さらに、サーバ制御部１１は、指示データＤ２と、ゲームデータ等のゲームの提供に必要なゲーム用のデータとを、ゲーム機６０に送信する。また、サーバ制御部１１は、ゲーム機６０からプレイヤデータとして、プレイヤの個人情報（例えば、プレイヤＩＤ）、ゲーム機６０から受信する動作データＤ４、及びゲームの成績等のゲームのプレイに関する情報を取得する。そして、サーバ制御部１１は、プレイヤデータをサーバ記憶部１２に記憶させる。さらに、サーバ制御部１１は、プレイヤの認証等を行ってもよい。

また、サーバ制御部１１は、ゲームにおいて使用される指示データＤ２であって、プレイ動作を行うべき指示タイミングにおいて指示標識を表示するための指示データＤ２を生成する。すなわち、サーバ制御部１１は、ダンスデータＤ１に基づいて、指示データＤ２の少なくとも一部を生成する。代替的に、指示データＤ２は、外部サーバ等の他のコンピュータ装置において生成されていてもよい。さらに、他のコンピュータ装置は、据置型又はブック型のパーソナルコンピュータ、及び携帯電話（スマートフォンを含む）のようなモバイル端末装置であってもよい。この場合、サーバ制御部１１は、他のコンピュータ装置から指示データＤ２を取得して、サーバ記憶部１２に記憶させる。そして、他のコンピュータ装置の記憶部は、ダンスデータＤ１、音楽データＤ３、及び制御プログラムＰＧ１を記憶している。

［ゲーム装置の構成］
ゲーム機６０は、ゲーム機６０を制御するゲーム機制御部６１と、ゲーム機プログラムＰＧ２を記憶したゲーム機記憶部６２とを備えている。ゲーム機制御部６１は、所定のプログラムに従って各種の演算処理及び動作制御を実行するプロセッサと、その他の周辺装置とを組み合わせたコンピュータである。プロセッサは、例えばＣＰＵ、又はＭＰＵであり、ゲーム機プログラムＰＧ２に基づいて、ゲーム機６０の全体を制御すると共に、各種処理についても統括的に制御する。また、ゲーム機記憶部６２は、プロセッサが動作するためのシステムワークメモリであるＲＡＭ、並びにプログラム及びシステムソフトウェアを格納するＲＯＭ、ＨＤＤ及びＳＳＤ等の記憶装置を含む。また、ゲーム機制御部６１は、ＣＤ、ＤＶＤ、ＣＦカード、及びＵＳＢメモリ等の可搬記録媒体、又はインターネット上のサーバ等の外部記憶媒体に記憶されたプログラムに従って制御することもできる。

ゲーム機記憶部６２は、コンピュータ読み取り可能な非一時的記憶媒体の一例である不揮発性記憶媒体を含んだ、ハードディスク及び半導体記憶装置等の記憶装置である。また、ゲーム機記憶部６２は、コンピュータプログラムの一例であるゲーム機プログラムＰＧ２とともに、ゲームサーバ１０から取得したゲーム用のデータを記録している。ゲーム用のデータは、ゲーム機プログラムＰＧ２に従ってプレイヤに所定のゲームをプレイさせるために使用される。なお、ゲーム用のデータは、サーバ記憶部１２が記憶しているゲームデータと同様に、画像データ、音楽データＤ３、及び指示データＤ２を含んでいてもよい。さらにゲーム用のデータは、ダンスオブジェクトＤＯのデータを含んでいてもよい。

また、ゲーム機６０は、プレイヤを撮像する撮像装置６３を有している。撮像装置６３は、一例としてカメラであり、複数のカメラ（例えば二台のカメラ）から構成されていてもよい。当該カメラは、撮像範囲にプレイヤの体全体が含まれるように配置されている。また、撮像装置６３は、プレイヤを撮像して得られる撮像データ（例えば画像又は映像）をゲーム機記憶部６２に記憶させる。代替的に、撮像装置６３は、ゲーム機６０とは別体の外部撮像装置であってもよい。このような外部撮像装置は、ゲーム機６０と無線又は有線接続され、撮像データをゲーム機６０に送信する。また、外部撮像装置は、スマートフォン又はデジタルカメラ等であってもよい。さらに、ゲーム機６０は、ゲーム画面が表示される表示装置６４を備えている。また、ゲーム機６０は、ゲームのプレイ中に出力される楽曲、判定音、評価音、及び効果音等の音声を出力する音声出力装置６５を備えている。

［エネルギーの消費量］
音楽ゲームをプレイするプレイヤに対して、ゲームをプレイしている間に消費するエネルギーの消費量を提示すれば、プレイヤに対して新たな楽しみを与えることができる。一例として、エネルギーの消費量は、プレイ中のカロリーの消費量、又はカロリーの消費量に脂肪消費割合（例えば０．６）を乗じて得られる脂肪燃焼量である。そして、消費量を算出する方法として、例えば、足で踏む入力装置又は手に持つ入力装置を利用して、消費量を算出する方法が考えられる。しかし、このような入力装置を利用する場合、算出に利用されるのが体の一部（例えば、足又は手）の動きに限定される。そのため、消費量の算出精度が低くなる可能性がある。

そのため、算出精度を高める方法として、プレイヤの体重を考慮することが考えられる。例えば、プレイヤが自らの体重を事前に入力し、入力された体重に運動時の代謝量及び運動時間等を乗じて消費量を算出する方法が考えられる。しかし、ゲームをプレイするプレイヤにとっては、ゲームをプレイすることが主な目的である。そのため、消費量の算出は副次的な楽しみとなる。したがって、消費量の算出のために、体重等の身体情報の入力操作をプレイヤに要求すると、プレイヤが煩雑さを感じてしまい、ゲームをプレイする意欲を減退させる結果となる。

さらに、プレイヤは、人前でゲームをプレイすること、例えば、店舗に設置されたゲーム機６０においてゲームをプレイすることがある。この場合、体重等の個人的な情報が、他人に見られてしまう可能性もある。そのため、プレイヤに、身体情報の入力操作を要求することは、ゲームをプレイする意欲を減退させる結果となる。さらに、体重は日々変化するので、算出精度を高くするためには、プレイヤが自らの体重を正確に把握する必要がある。しかし、消費量の算出のために、体重等の測定をプレイヤに要求すると、プレイヤが煩雑さを感じてしまう結果となる。

このように、算出精度を高めるためには、プレイヤの身体情報を用いながら、プレイヤに煩雑さを感じさせずに身体情報を取得することが望ましい。そこで、ゲームシステム１００は、ゲームプレイを行うプレイヤを撮像して得られた撮像データを解析することによって、プレイヤの身体情報を取得する。そのため、ゲームシステム１００のゲーム機６０においては、ゲーム機制御部６１が、撮像データ取得部６１Ａ、解析部６１Ｂ、算出部６１Ｃ、動作データ取得部６１Ｄ、及びゲーム制御部６１Ｅを有している。

［撮像データ取得手段］
撮像データ取得手段の一例である撮像データ取得部６１Ａは、撮像装置６３によって撮像されたプレイヤの撮像データを取得する。例えば、撮像データ取得部６１Ａは、撮像装置６３から撮像データ（例えば、画像又は映像）を取得する。そして、撮像データ取得部６１Ａは、撮像データを一時的にゲーム機記憶部６２に記憶させる。また、撮像データ取得部６１Ａは、ゲーム機記憶部６２又はサーバ記憶部１２が記憶している撮像データを取得してもよい。例えば、撮像データ取得部６１Ａは、ゲーム中に、プレイヤのダンス動作を撮像して得られる撮像データを取得する。また、撮像データ取得部６１Ａは、ゲームの開始前又は開始直後に、静止姿勢をとった状態のプレイヤを撮像して得られる撮像データを取得する。代替的に、撮像データ取得部６１Ａは、外部撮像装置から撮像データを取得してもよい。

［解析手段］
解析手段の一例である解析部６１Ｂは、撮像データ取得部６１Ａが取得した撮像データを解析する。そして、解析部６１Ｂは、プレイヤの身体に関する身体情報と、プレイヤがゲームをプレイしている間の運動負荷との少なくとも一方を算出する。例えば、解析部６１Ｂは、身体情報としてプレイヤの身長と体重を算出するとともに、運動負荷として身体の少なくとも一部の変位量を算出する。一例として、身体情報は、身長、体重、ボディ・マス指数、体型、性別、年齢、及び体表面積の少なくとも一つである。また、運動負荷は、一例として変位量、運動量、運動時間、及び運動強度の少なくとも一つである。

例えば、解析部６１Ｂは、撮像データとしてのプレイヤの体が含まれている画像の中から、プレイヤの体の足先部及び頭頂部の二つの特徴点を抽出する。そして、解析部６１Ｂは、３次元空間における特徴点の座標を算出する。さらに、解析部６１Ｂは、画像の中から平面を検出して、カメラから画像内の所定の平面（例えば、プレーエリア）までの距離を算出する。代替的に、所定の平面までの距離は、予めゲーム機記憶部６２が記憶していてもよい。そして、解析部６１Ｂは、所定の平面内における二つの特徴点の長さを、プレイヤの身長として算出する。ただし、解析部６１Ｂは、その他の公知の方法によって、撮像データからプレイヤの身長を算出してもよい。

さらに、解析部６１Ｂは、算出した身長を用いて、プレイヤの体重を算出する。一例として、解析部６１Ｂは、身長を二乗して得られた値に、所定のボディ・マス指数（例えば２３）を乗じて、身体情報としての体重を算出する。なお、所定のボディ・マス指数は、１８．５以上且つ２４．９以下の範囲から選択された任意の値であってもよい。代替的に、解析部６１Ｂは、後述する態様によって算出したボディ・マス指数を用いて、プレイヤの体重を算出してもよい。なお、運動負荷のみが算出される場合、解析部６１Ｂは、ゲーム機６０が備える体重計から体重を取得してもよく、プレイヤが入力した体重を取得してもよい。

また、解析部６１Ｂは、ゲームのプレイ中に運動負荷を算出する。具体的に、解析部６１Ｂは、運動強度に運動時間（ｈ）を乗じて、運動負荷としての運動量を算出する。一例として、運動強度は、ゲーム内の動作（例えば、動作の内容又は体の各部の変位量等）に応じて、予め定められている値である。具体的に、解析部６１Ｂは、プレイヤの動作を撮像して得られる撮像データとしての動画を解析する。そして、解析部６１Ｂは、プレイヤの体の各部の位置、向き、及び変位量等のデータを取得する。なお、解析部６１Ｂが、動作データ取得部６１Ｄとしても機能してもよい。この場合、解析部６１Ｂは、動作データＤ４を生成する。

さらに、解析部６１Ｂは、変位量等のデータに基づいて、ゲーム中のプレイヤの動作（例えば、各部の変位量）に応じた運動強度を特定する。一例として、解析部６１Ｂは、変位量が少ない緩いダンス動作である場合、運動強度を「４」と特定する。また、解析部６１Ｂは、変位量が多い激しいダンス動作である場合、運動強度を「７」と特定する。さらに、解析部６１Ｂは、特定した運動強度に、ダンス動作の時間（例えば、１／３６００時間＝１秒）を乗じて運動量を算出する。これにより、エネルギーの消費量の算出精度をより高めることができる。代替的に、解析部６１Ｂは、プレイヤの心拍数を用いて運動強度を算出してもよい。

また、解析部６１Ｂは、プレイヤの体型に応じたボディ・マス指数を算出してもよい。一例として、解析部６１Ｂは、プレイヤの全身を撮像して得られた画像を撮像データとして解析する。そして、解析部６１Ｂは、プレイヤの体の大きさを特定する。さらに、解析部６１Ｂは、特定した体の大きさに基づいて、プレイヤの体型を複数の種類（低体重、普通、肥満、肥満一度、肥満二度、肥満三度、又は肥満四度等）のいずれかに分類する。そして、解析部６１Ｂは、体型に応じたボディ・マス指数を算出する。これにより、エネルギーの消費量の算出精度をより高めることができる。

一例として、解析部６１Ｂは、低体重に対して１８、普通に対して２３、肥満に対して２７、肥満一度に対して２７、肥満二度に対して３２、肥満三度に対して３７、肥満四度に対して４０のボディ・マス指数を算出する。さらに、解析部６１Ｂは、プレイヤがゲーム機６０に入力した体型、又はプレイヤの個人情報を参照して取得した体型に応じたボディ・マス指数を算出してもよい。代替的に、解析部６１Ｂは、プレイヤの身長と体重とを用いてボディ・マス指数を算出してもよい。一例として、解析部６１Ｂは、身長を二乗して得られた値によって体重を除算することによって、ボディ・マス指数を算出する。

また、解析部６１Ｂは、運動負荷として身体の複数の部分の変位量を算出する。例えば、解析部６１Ｂは、ゲームのプレイ中に、体の代表部位（例えば骨格を表すボーン）の３次元空間における座標の移動距離（すなわち変位量）を算出する。なお、運動負荷を算出するために参照される代表部位は、予め設定されていてもよい。そして、解析部６１Ｂは、設定されている代表部位の変位量に基づいて運動量を算出する。一例として、代表部位は、腕、足、頭、腰部、胸部、首、肩、膝、肘、腹部、手先、足先、大腿、下腿、上腕、及び前腕の少なくとも一つである。なお、解析部６１Ｂは、運動負荷として変位量に加えて、身体の各部の加速度を用いてもよい。この場合、ゲーム機６０は、加速度センサをさらに備えていてもよい。

そして、算出部６１Ｃは、エネルギー量の消費量を算出する際に、プレイヤの身体の複数の部分の少なくとも一つの部分の重み付けを、複数の部分の他の部分の重み付けとは異ならせる。一例として、算出部６１Ｃは、筋肉が多い足の部分の重みが、筋肉が少ない腕の部分の重みよりも大きくなるように、両者の重み付けを異ならせる。これにより、エネルギーの消費量の算出精度をより高めることができる。例えば、算出部６１Ｃは、解析部６１Ｂが算出した変位量又は運動量に、各部の重みに対応する係数を乗じた上で、エネルギー量の消費量を算出する。なお、身体の部分の重み付けは、筋肉量に基づく態様には限定されない。例えば、算出部６１Ｃは、上半身の重み付けを、下半身の重み付けよりも大きくして消費量を算出してもよい。

また、解析部６１Ｂは、プレイヤの身体の少なくとも一部の移動方向を算出する。例えば、解析部６１Ｂは、体の代表部位（例えば骨格を表すボーン）の３次元空間における座標の移動方向を特定する。そして、算出部６１Ｃは、移動方向に基づいて、エネルギー量の消費量を算出する。これにより、エネルギーの消費量の算出精度をより高めることができる。具体的に、算出部６１Ｃは、消費量を算出する際に、少なくとも一つの移動方向の重み付けを、他の移動方向の重み付けとは異ならせる。一例として、算出部６１Ｃは、より負荷が強い腕を上げる動作（すなわち、上方向への腕の変位）と、腕を下げる動作（すなわち、下方向への腕の変位）とで重み付けを異ならせる。そして、算出部６１Ｃは、解析部６１Ｂが算出した変位量又は運動量に、各移動方向の重みに対応する係数を乗じた上で、エネルギー量の消費量を算出する。

一例として、解析部６１Ｂは、料金の支払い後から動作の案内開始又は音楽の再生開始までの間に、身体情報を算出する。ただし、解析部６１Ｂは、動作の案内開始又は音楽の再生開始後に身体情報を算出してもよい。この場合であっても、ゲームの終了後にエネルギーの消費量をプレイヤに提示できる。

また、解析部６１Ｂは、前記静止姿勢をとった状態で撮像して得られる撮像データを解析して、身体情報を算出してもよい。より具体的に、解析部６１Ｂは、動作データ取得部６１Ｄによって、プレイヤの身体の少なくとも一部の位置座標が取得されるときに撮像される撮像データを解析して、身体情報を算出してもよい。例えば、撮像データ取得部６１Ａは、動作データ取得部６１Ｄが３次元空間におけるプレイヤの身体の特徴点の座標を、位置座標として算出する時に撮像データを取得する。そして、解析部６１Ｂは、この時に身体情報を算出する。これにより、身体情報を算出するために必要な撮像データを取得するための専用の時間を設ける必要がない。そのため、ゲームが中断されないので、ゲームの進行へ与える影響を小さくできる。

ただし、動作データ取得部６１Ｄが位置座標を取得するときに撮像されたデータを利用すれば、解析部６１Ｂが身体情報を算出するタイミングは、撮像と異なるタイミングであってもよい。例えば、解析部６１Ｂは、位置座標を取得するときに撮像されたデータを利用して、プレイヤがゲームをプレイしている間、又はゲームをプレイした後に身体情報を算出してもよい。さらに、解析部６１Ｂは、前回のプレイ中に撮像して取得された撮像データを利用してもよい。

［算出手段］
算出手段の一例としての算出部６１Ｃは、プレイヤがゲームをプレイしている間に消費するエネルギーの消費量を算出する。例えば、算出部６１Ｃは、解析部６１Ｂが算出した身体情報としての体重に基づいて、エネルギーの消費量を算出する。一例として、算出部６１Ｃは、解析部６１Ｂが算出した体重と運動量とに基づいて消費量を算出する。具体的に、算出部６１Ｃは、解析部６１Ｂが算出した体重に、同じく解析部６１Ｂが算出した運動量を乗じる。さらに、算出部６１Ｃは、体重に運動量を乗じた値に所定の係数（例えば「１．０５」）を乗じてエネルギーの消費量としてのカロリーの消費量を算出する。なお、消費量の計算式、各種の係数、及び上述した重み付けの値等の算出に必要なデータは、算出データＣＤに含まれてゲーム機記憶部６２が記憶している。

これにより、ゲーム機６０は、ゲーム中に消費されたエネルギーの消費量を、表示装置６４に表示させることができる。また、ゲーム機６０は、ゲームサーバ１０にエネルギーの消費量を送信できる。そして、ゲームサーバ１０のサーバ記憶部１２が、プレイヤＩＤと関連付けて消費量を記憶する。これにより、ゲームシステム１００は、所望のタイミング（例えば、ダンスの終了タイミング、ゲームの成績表示タイミング、又はプレイヤから取得要求を受け取ったタイミング）で、消費量を取得してプレイヤへ提示できる。

そのため、プレイヤは、身体的特徴を人前で入力することなく、単にゲームをプレイするのみで、高い精度の消費量を知ることができる。その結果、ゲームをプレイすることによって、消費量を知得できるという新たな楽しみを、プレイヤへ与えることができる。さらに、ゲーム機６０が備える撮像装置６３を用いてプレイヤを撮像すれば、ゲームに用いられる撮像装置６３を撮像データの生成に利用できる。そのため、体重又は身長を計測する専用の計測装置を、ゲーム機６０に設ける必要がない。

［動作データ取得手段］
動作データ取得手段の一例としての動作データ取得部６１Ｄは、撮像データを解析して、プレイヤの動作（例えばダンス動作）を記述した動作データＤ４を取得する。一例として、動作データＤ４は、ゲーム中に動作データ取得部６１Ｄがボーン解析して取得したボーンデータである。また、動作データ取得部６１Ｄは、プレイヤが静止姿勢をとった状態で撮像して得られる撮像データを用いて身体の少なくとも一部の位置座標を取得する。一例として、プレイヤは、体の一部の位置座標を示す連結点を特定する処理（以下、キャリブレーションともいう。）を行う場合に、静止姿勢をとるように案内される。

例えば、キャリブレーションは、料金の支払い後又はゲームの開始から、プレイヤに対するダンス動作の案内開始又は音楽の再生開始までに行われる。なお、キャリブレーションのための撮像データは、解析部６１Ｂによる身体情報の解析用の撮像データとは、別に撮像され且つ保存されてもよい。代替的に、プレイヤは、音楽の再生開始後に、キャリブレーションのための静止姿勢をとるように案内されてもよい。

例えば、動作データ取得部６１Ｄは、プレイヤが静止姿勢をとった状態で位置座標を取得する。そのために、ゲーム制御部６１Ｅは、プレイヤに対して静止姿勢を案内する案内情報を、表示装置６４に表示させてもよい。一例として、ゲーム制御部６１Ｅは、図４に示すように「プレーエリアの中心で静止して下さい」の文字列ＧＩを、案内情報として表示装置６４に表示させる。また、ゲーム制御部６１Ｅは、静止姿勢を案内する案内情報として、画像を表示装置６４に表示させてもよい。図４の例では、案内情報として、静止姿勢を示す人型のオブジェクトＰＯの画像がゲーム画面ＧＳに表示されている。

例えば、ゲーム制御部６１Ｅは、音楽の出力開始後且つダンス開始前に、静止姿勢を示す人型のオブジェクトＰＯを表示装置６４に表示させる。音楽の出力開始後に案内情報が表示されることにより、ゲームの流れを止めずにキャリブレーションが行われる。そのため、プレイヤに、違和感を与えることを抑制できる。なお、キャリブレーションの際に、ゲーム制御部６１Ｅが、静止姿勢を案内する案内情報を表示装置６４に表示させなくともよい。この場合、静止姿勢をとった状態で撮像して得られる撮像データが用いられていれば、動作データ取得部６１Ｄは、プレイヤが動いている状態で、キャリブレーションを行ってもよい。さらに、ゲーム制御部６１Ｅは、静止姿勢を案内する案内音声を、音声出力装置６５に出力させてもよい。

また、解析部６１Ｂは、案内情報が表示される時に撮像される撮像データを解析して、身体情報を算出してもよい。さらに、解析部６１Ｂは、案内情報が表示される時に身体情報を解析してもよい。例えば、案内情報は、キャリブレーションを行う時、ダンス開始前の待ちポーズを指示する時、又はダンスの決めポーズを指示する時等に表示される。そして、解析部６１Ｂは、この時に撮像される撮像データを解析して、身体情報を算出する。これにより、身体情報を算出するために必要な撮像データを取得するための専用の時間を設ける必要が無い。そのため、ゲームが中断されないので、ゲームの進行へ与える影響を小さくできる。

また、動作データ取得部６１Ｄが動作データＤ４を取得すると、ゲーム制御部６１Ｅは、動作データＤ４に基づいて動作するように、表示装置６４にゲームオブジェクトを表示させてもよい。具体的に、ゲーム制御部６１Ｅは、プレイヤの動作に同期して動くように、ゲーム画面ＧＳにゲームオブジェクトを表示させる。例えば、ゲームオブジェクトは、足又は手等の体の一部を模した画像であり、プレイヤの動作に同期するように動く。すなわち、プレイヤが足又は手を動かすと、ゲームオブジェクトもプレイヤの足又は手の動きに同期するように動く。例えば、プレイヤが腕を上下に動かすと腕のゲームオブジェクトも上下に動き、プレイヤが足を左右に動かすと足のゲームオブジェクトも左右に動く。これにより、プレイヤは、ゲームオブジェクトの動きと、ダンスオブジェクトＤＯの動きとを比較できる。その結果、プレイヤは、正しいダンス動作を認識できる。

また、動作データ取得部６１Ｄは、解析結果からプレイヤの動作データＤ４を取得して、ゲーム機記憶部６２に記憶させる。動作データＤ４は、プレイヤが選択したゲームが開始してから終了するまでのプレイヤの動作を記述した情報である。例えば、ゲームは、プレイヤが開始操作をしたときに開始して、シーケンスデータによって設定されているゲーム時間が経過したときに終了する。さらに、ゲーム機制御部６１は、動作データＤ４をゲームサーバ１０に送信する。そして、サーバ記憶部１２は、動作データＤ４をプレイデータ（不図示）に含めて記憶する。この動作データＤ４は、プレイヤによるダンス動作が反映されるように動作するゲームオブジェクトを生成するために利用できる。代替的に、動作データＤ４は、プレイヤの体の各部の位置、向き、及び変位量を示すデータであってもよい。

また、撮像装置６３に加えて、プレイヤの動きを検出する他の検出装置が設けられていてもよい。一例として、他の検出装置は、プレイヤが体に装着しているマーカーを撮像するカメラである。この場合、動作データ取得部６１Ｄは、マーカーが映っている映像を解析して、動作データＤ４を取得する。また、検出装置は、プレイヤの体の動きを検出するセンサを含んでいてもよい。この場合、検出装置は、プレイヤの体の動きを検出するジャイロセンサ及び加速度センサ等の慣性センサと、検出された動きを記録する記録装置とから構成されてもよい。さらに、検出装置は、プレイヤの体の動きを検出する磁気式又は機械式のセンサと、検出された動きを記録する記録装置とから構成されてもよい。

［ゲーム制御手段］
ゲーム制御手段の一例としてのゲーム制御部６１Ｅは、ゲーム機プログラムＰＧ２に基づいてゲームの進行を制御する。また、ゲーム制御部６１Ｅは、エネルギーの消費量を示す情報を表示装置６４に表示させる。例えば、ゲーム制御部６１Ｅは、消費量を示す情報として、消費されたカロリーを表す数値、文字、又は画像等を表示装置６４に表示させる。代替的に、ゲーム制御部６１Ｅは、消費量を示す情報として、消費量が増えるにつれて長くなるバー等を表示装置６４に表示させてもよい。

また、ゲーム制御部６１Ｅは、ゲームの進行を制御するために、ゲームの進行に必要な各種の演算制御を実行する。一例として、ゲーム制御部６１Ｅは、判定フレームＦＬに向かって移動するポーズマーカーＭＰ１の位置及び移動速度によって、指示タイミングとダンス動作とを表示装置６４に表示させる。さらに、ゲーム制御部６１Ｅは、ダンスデータＤ１に基づいて生成された指示標識であって、プレイヤへプレイ動作を指示する指示標識を表示する。

具体的に、ゲーム制御部６１Ｅは、ダンスデータＤ１に基づいて音楽に合わせて動作するダンスオブジェクトＤＯを表示させる。さらに、ゲーム制御部６１Ｅは、指示データＤ２に基づいて、所定の指示タイミングにおいて指示標識を表示させる。これにより、ゲーム制御部６１Ｅは、プレイ動作を行うタイミングをプレイヤに指示する。プレイヤは、ダンスオブジェクトＤＯの動作を真似てダンスしてもよいし、指示標識の指示に従ってダンスしてもよい。

一例として、ゲーム制御部６１Ｅは、ゲームサーバ１０から予め取得していたダンスオブジェクトＤＯの画像データ等を利用して、ダンスデータＤ１に従ってダンスオブジェクトＤＯが動くゲーム画面ＧＳを生成する。このとき、ゲーム制御部６１Ｅは、ダンスオブジェクトＤＯが動くとともに、バックダンサーとなるダンスオブジェクトＤＯも動くゲーム画面ＧＳを生成してもよい。また、ゲーム画面ＧＳには、指示標識、背景、及び演出画像等の画像又は映像が含まれる。代替的に、ゲーム制御部６１Ｅは、基準ダンス動作を踊るダンサーの動作を模倣するように動作するダンスオブジェクトＤＯの動画のデータを、ゲームサーバ１０から予め取得していてもよい。

ダンスオブジェクトＤＯの表示態様の一例として、ダンスオブジェクトＤＯにはボーンが設定されており、ゲーム制御部６１Ｅは、ゲームサーバ１０から予め取得していたダンサーのダンスデータＤ１に従って、ダンスオブジェクトＤＯの隣接するボーン同士の相対的な位置及び向きを変化させる。これにより、ダンスオブジェクトＤＯの外形も変化する。そして、ダンスオブジェクトＤＯの外観は、ボーンの位置及び向きの変化に伴って変化するテクスチャによって表現される。ゲーム画面ＧＳでは、ダンサーの基準ダンス動作がダンスオブジェクトＤＯの動きに反映される。例えば、基準ダンス動作において腕が上下に移動すると、ダンスオブジェクトＤＯの腕も上下に動く。プレイヤは、表示装置６４に表示されるダンスオブジェクトＤＯを見ながら、指示標識によって指示されるダンス動作を行うように体を動かす。

指示標識の表示態様の一例として、ゲーム制御部６１Ｅは、図２に示すようにポーズマーカーＭＰ１，ＭＰ２を表示させる。具体的に、ゲーム制御部６１Ｅは、予めゲームサーバ１０から取得してゲーム機記憶部６２が記憶している指示データＤ２に含まれている指示タイミングを読み出す。そして、ゲーム制御部６１Ｅは、指示タイミングにポーズマーカーＭＰ１が判定フレームＦＬに到達して表示されるように、ポーズマーカーＭＰ１を表示させ且つ移動させる。また、ゲーム制御部６１Ｅは、指示タイミングにポーズマーカーＭＰ２が画面中央又はダンスオブジェクトＤＯに到達して表示されるように、ポーズマーカーＭＰ２を表示させ且つ移動させる。

また、指示標識の表示態様の一例として、ゲーム制御部６１Ｅは、タッチマーカーＭＴ１，ＭＴ２を表示装置６４に表示させる。具体的に、ゲーム制御部６１Ｅは、指示データＤ２に含まれている指示タイミングを読み出す。そして、指示タイミング又は指示タイミングの直前に、タッチマーカーＭＴ１，ＭＴ２を指示データＤ２に示される位置に表示させる。さらに、ゲーム制御部６１Ｅは、音声出力装置６５に指示タイミングを示す音を出力させてもよい。また、ゲーム制御部６１Ｅは、ゲーム機６０に設けられた発光装置を点灯又は消灯させることによって、指示タイミングを示してもよい。さらに、ゲーム制御部６１Ｅは、ゲーム機６０に設けられた振動装置を振動させることによって、指示タイミングを示してもよい。

さらに、ゲーム制御部６１Ｅは、評価手段としても機能し、指示タイミングに対するプレイ動作の動作タイミングを評価する。具体的に、ゲーム制御部６１Ｅは、プレイヤの動作データＤ４の解析結果に基づいて、プレイヤのプレイ動作の動作タイミングを評価する。例えば、ゲーム制御部６１Ｅは、プレイヤの手がタッチマーカーＭＴ２に到達する動作タイミング、又は到達すると予測される動作タイミングと、指示タイミングとを比較する。そして、ゲーム制御部６１Ｅは、比較結果に基づいて、プレイ動作を評価する。同様に、ゲーム制御部６１Ｅは、プレイヤの足がタッチマーカーＭＴ１に到達する動作タイミングを評価する。

また、ゲーム制御部６１Ｅは、プレイヤがプレイ動作を行う動作タイミングと、ポーズマーカーＭＰ１が判定フレームＦＬに到達する指示タイミングとを比較する。そして、ゲーム制御部６１Ｅは、比較結果に基づいて、プレイ動作を評価する。若しくは、ゲーム制御部６１Ｅは、プレイ動作を行う動作タイミングとポーズマーカーＭＰ２による指示タイミングを比較して、プレイ動作を評価する。なお、ゲーム制御部６１Ｅは、プレイヤの動作データＤ４とダンスデータＤ１とを比較して、プレイヤのプレイ動作が適切であるか否かも評価できる。

そして、ゲーム制御部６１Ｅは、動作タイミングが指示タイミングと近い場合には、高い評価をゲーム機記憶部６２に記憶させる。一方、ゲーム制御部６１Ｅは、動作タイミングが指示タイミングと遠い場合には、低い評価をゲーム機記憶部６２に記憶させる。さらに、ゲーム制御部６１Ｅは、評価結果を示す画像又は文字（例えば、「Ｐｅｒｆｅｃｔ」、「Ｇｏｏｄ」又は「Ｂａｄ」の文字）を表示装置６４に表示させてもよい。また、ゲーム制御部６１Ｅは、音声出力装置６５に評価結果を示す音声を出力させてもよい。さらに、ゲーム制御部６１Ｅは、ゲーム機６０に設けられた発光装置を点灯又は消灯させることによって、評価結果を示してもよい。また、ゲーム制御部６１Ｅは、ゲーム機６０に設けられた振動装置を振動させることによって、評価結果を示してもよい。

また、ゲーム制御部６１Ｅは、プレイ動作が高い評価である場合、ゲームの成績が上がるように評価して、プレイヤの成績に高い点数を加える。また、ゲーム制御部６１Ｅは、プレイ動作が低い評価である場合、プレイヤの成績に点数を加えないか、又は低い点数を加える。さらに、ゲーム制御部６１Ｅは、プレイ動作が低い評価である場合、プレイヤの成績から点数を減じてもよい。そして、ゲーム制御部６１Ｅは、ゲームの成績として、スコアＳＣを表示装置６４に表示させる。

［算出処理フロー］
次に、図５に示すフローチャートを参照して、エネルギーの消費量の算出処理について説明する。プレイヤがゲームを開始すると、ゲーム制御部６１Ｅは、プレイヤに対して静止姿勢を案内する案内情報を、表示装置６４に表示させる（Ｓ１０１）。そして、撮像装置６３が静止姿勢をとった状態のプレイヤを撮影し、撮像データ取得部６１Ａは、撮像装置６３から撮像データを取得する（Ｓ１０２）。また、動作データ取得部６１Ｄは、プレイヤの身体の少なくとも一部の位置座標を取得して、キャリブレーションの処理を行う（Ｓ１０３）。

解析部６１Ｂは、静止姿勢をとった状態で撮像して得られる撮像データを解析して、身体情報を算出する（Ｓ１０４）。その後、ゲーム制御部６１Ｅは、音楽に対応するダンス動作をプレイヤに要求するように、ゲームの進行を制御する（Ｓ１０５）。そして、撮像装置６３がダンスするプレイヤを撮影し、撮像データ取得部６１Ａは、撮像装置６３から撮像データを取得する。さらに、動作データ取得部６１Ｄは、撮像データを解析して、プレイヤのダンス動作を記述した動作データＤ４を取得する（Ｓ１０６）。

並行して、解析部６１Ｂは、撮像データを解析して、プレイヤがゲームをプレイしている間の運動負荷を算出する（Ｓ１０７）。そして、算出部６１Ｃは、プレイヤがゲームをプレイしている間に消費するエネルギーの消費量を算出する（Ｓ１０８）。また、ゲーム制御部６１Ｅは、エネルギーの消費量を示す情報を表示装置６４に表示させる（Ｓ１０９）。その後、ゲームが終了すれば（Ｓ１１０でＹＥＳ）算出処理が終了し、ゲームが終了しなければ（Ｓ１１０でＮＯ）消費量の算出と表示が継続される。

以上説明したゲームシステム１００によれば、撮像データを利用して、ゲームをプレイしている間のプレイヤによるエネルギーの消費量を算出でき、プレイヤに対して新たな楽しみを与えることができる。また、プレイヤの身体情報を用いて消費量の算出精度を高めながら、プレイヤに煩雑さを感じさせずに身体情報を取得できる。

以上、各実施形態を参照して本発明について説明したが、本発明は上記実施形態に限定されるものではない。本発明に反しない範囲で変更された発明、及び本発明と均等な発明も本発明に含まれる。また、各実施形態及び各変形形態、並びに各実施形態又は各変形形態に含まれる技術的手段は、本発明に反しない範囲で適宜組み合わせることができる。

例えば、解析部６１Ｂは、運動負荷を算出せずに身体情報のみを算出してもよい。この場合、算出部６１Ｃは、ダンスの振り付け又は曲毎に予め定められた運動負荷を、ゲーム機記憶部６２等から取得して、エネルギーの消費量を算出する。または、算出部６１Ｃは、他の検出装置が検出した運動負荷を取得して、エネルギーの消費量を算出する。さらに、解析部６１Ｂは、身体情報を算出せずに運動負荷のみを算出してもよい。この場合、算出部６１Ｃは、ユーザが入力した身体情報を取得して、エネルギーの消費量を算出する。

また、ゲームサーバ１０に設けられた論理的装置の少なくとも一部は、ゲーム機６０又は他のコンピュータ装置に設けることができる。さらに、ゲーム機６０に設けられた論理的装置の少なくとも一部は、ゲームサーバ１０又は他のコンピュータ装置に設けることができる。これらの場合、ゲーム機６０、ゲームサーバ１０、及び他のコンピュータ装置の少なくとも二つの装置が協働してゲームシステム１００として機能する。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。なお、各態様の理解を容易にするため、添付図面に図示された参照符号を付記する。ただし、参照符号は、本発明を図示の形態に限定する意図で付記するものではない。

（付記１）
プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステム１００であって、
前記撮像データを取得する撮像データ取得手段６１Ａと、
前記撮像データを解析して、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出する解析手段６１Ｂと、
前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出する算出手段６１Ｃとを備える、ゲームシステム。

（付記２）
前記撮像データを解析して、前記プレイヤの動作を記述した動作データＤ４を取得する動作データ取得手段６１Ｄをさらに備え、
前記動作データ取得手段６１Ｄは、前記プレイヤが静止姿勢をとった状態で撮像して得られる前記撮像データを用いて前記身体の少なくとも一部の位置座標を取得し、
前記解析手段６１Ｂは、前記静止姿勢をとった状態で撮像して得られる前記撮像データを解析して、前記身体情報を算出する、付記１に記載のゲームシステム。

（付記３）
表示装置６４と、
前記ゲームの進行を制御するゲーム制御手段６１Ｅとをさらに備え、
前記ゲームは、前記プレイヤの動作として、音楽に対応するダンス動作を前記プレイヤに要求するように構成されており、
前記ゲーム制御手段６１Ｅは、前記ダンス動作を記述した前記動作データＤ４に基づいて動作するように、前記表示装置６４にゲームオブジェクトを表示させる、付記２に記載のゲームシステム。

（付記４）
表示装置６４と、
前記ゲームの進行を制御するゲーム制御手段６１Ｅとをさらに備え、
前記ゲーム制御手段６１Ｅは、前記プレイヤに対して静止姿勢を案内する案内情報ＧＩを、前記表示装置６４に表示させ、
前記解析手段６１Ｂは、前記案内情報ＧＩが表示されるときに撮像される前記撮像データを解析して、前記身体情報を算出する、付記１又は２に記載のゲームシステム。

（付記５）
前記ゲーム制御手段６１Ｅは、前記消費量を示す情報を前記表示装置６４に表示させる、付記４に記載のゲームシステム。

（付記６）
前記解析手段６１Ｂは、前記身体情報として前記プレイヤの身長と体重を算出するとともに、前記運動負荷として前記身体の少なくとも一部の変位量を算出し、
前記算出手段６１Ｃは、前記体重と前記変位量とに基づいて前記消費量を算出する、付記１から５のいずれか一項に記載のゲームシステム。

（付記７）
前記解析手段６１Ｂは、前記プレイヤの体型に応じたボディ・マス指数を算出する、付記１から６のいずれか一項に記載のゲームシステム。

（付記８）
前記解析手段６１Ｂは、前記運動負荷として前記身体の複数の部分の変位量を算出し、
前記算出手段６１Ｃは、前記消費量を算出する際に、前記複数の部分の少なくとも一つの部分の重み付けを、前記複数の部分の他の部分の重み付けとは異ならせる、付記１から７のいずれか一項に記載のゲームシステム。

（付記９）
前記解析手段６１Ｂは、前記身体の少なくとも一部の移動方向を算出し、
前記算出手段６１Ｃは、前記移動方向に基づいて前記消費量を算出する、付記１から８のいずれか一項に記載のゲームシステム。

（付記１０）
前記算出手段６１Ｃは、前記消費量を算出する際に、少なくとも一つの移動方向の重み付けを、他の移動方向の重み付けとは異ならせる、付記９に記載のゲームシステム。

（付記１１）
コンピュータ６１を備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステム１００の制御方法であって、
前記コンピュータ６１に、
前記撮像データを取得させ、
前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、
前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる、制御方法。

（付記１２）
コンピュータ６１を備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステム１００のコンピュータプログラムＰＧ２であって、
前記コンピュータ６１に、
前記撮像データを取得させ、
前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、
前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる、コンピュータプログラム。

付記１に記載のゲームシステム１００、付記１１に記載の制御方法、及び付記１２に記載のコンピュータプログラムＰＧ２によれば、撮像データを利用して、ゲームをプレイしている間のプレイヤによるエネルギーの消費量を算出でき、プレイヤに対して新たな楽しみを与えることができる。また、プレイヤの身体情報を用いて消費量の算出精度を高めながら、プレイヤに煩雑さを感じさせずに身体情報を取得できる。さらに、ゲーム機６０が備える撮像装置６３を用いてプレイヤを撮像すれば、ゲームに用いられる撮像装置６３を撮像データの生成に利用できる。そのため、体重又は身長を計測する専用の計測装置を、ゲーム機６０に設ける必要がない。

また、付記２から４に記載のゲームシステム１００によれば、身体情報を算出するために必要な撮像データを取得するための専用の時間を設ける必要が無く、ゲームが中断されないのでゲームの進行へ与える影響を小さくできる。また、付記５に記載のゲームシステム１００によれば、ゲーム中に消費されたエネルギーの消費量を、所望のタイミングでプレイヤへ提示できる。また、付記６から１０に記載のゲームシステム１００によれば、エネルギーの消費量の算出精度をより高めることができる。

６１ ：ゲーム機制御部（コンピュータ）
６１Ａ ：撮像データ取得手段
６１Ｂ ：解析手段
６１Ｃ ：算出手段
６１Ｄ ：動作データ取得手段
６１Ｅ ：ゲーム制御手段
６４ ：表示装置
１００ ：ゲームシステム
Ｄ４ ：動作データ
ＧＩ ：文字列（案内情報）
ＰＧ２ ：ゲーム機プログラム（コンピュータプログラム）

Claims (12)

1. プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムであって、
   前記撮像データを取得する撮像データ取得手段と、
   前記撮像データを解析して、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出する解析手段と、
   前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出する算出手段とを備える、ゲームシステム。
2. 前記撮像データを解析して、前記プレイヤの動作を記述した動作データを取得する動作データ取得手段をさらに備え、
   前記動作データ取得手段は、前記プレイヤが静止姿勢をとった状態で撮像して得られる前記撮像データを用いて前記身体の少なくとも一部の位置座標を取得し、
   前記解析手段は、前記静止姿勢をとった状態で撮像して得られる前記撮像データを解析して、前記身体情報を算出する、請求項１に記載のゲームシステム。
3. 表示装置と、
   前記ゲームの進行を制御するゲーム制御手段とをさらに備え、
   前記ゲームは、前記プレイヤの動作として、音楽に対応するダンス動作を前記プレイヤに要求するように構成されており、
   前記ゲーム制御手段は、前記ダンス動作を記述した前記動作データに基づいて動作するように、前記表示装置にゲームオブジェクトを表示させる、請求項２に記載のゲームシステム。
4. 表示装置と、
   前記ゲームの進行を制御するゲーム制御手段とをさらに備え、
   前記ゲーム制御手段は、前記プレイヤに対して静止姿勢を案内する案内情報を、前記表示装置に表示させ、
   前記解析手段は、前記案内情報が表示されるときに撮像される前記撮像データを解析して、前記身体情報を算出する、請求項１に記載のゲームシステム。
5. 前記ゲーム制御手段は、前記消費量を示す情報を前記表示装置に表示させる、請求項４に記載のゲームシステム。
6. 前記解析手段は、前記身体情報として前記プレイヤの身長と体重を算出するとともに、前記運動負荷として前記身体の少なくとも一部の変位量を算出し、
   前記算出手段は、前記体重と前記変位量とに基づいて前記消費量を算出する、請求項１から５のいずれか一項に記載のゲームシステム。
7. 前記解析手段は、前記プレイヤの体型に応じたボディ・マス指数を算出する、請求項１から５のいずれか一項に記載のゲームシステム。
8. 前記解析手段は、前記運動負荷として前記身体の複数の部分の変位量を算出し、
   前記算出手段は、前記消費量を算出する際に、前記複数の部分の少なくとも一つの部分の重み付けを、前記複数の部分の他の部分の重み付けとは異ならせる、請求項１から５のいずれか一項に記載のゲームシステム。
9. 前記解析手段は、前記身体の少なくとも一部の移動方向を算出し、
   前記算出手段は、前記移動方向に基づいて前記消費量を算出する、請求項１から５のいずれか一項に記載のゲームシステム。
10. 前記算出手段は、前記消費量を算出する際に、少なくとも一つの移動方向の重み付けを、他の移動方向の重み付けとは異ならせる、請求項９に記載のゲームシステム。
11. コンピュータを備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムの制御方法であって、
    前記コンピュータに、
    前記撮像データを取得させ、
    前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、
    前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる、制御方法。
12. コンピュータを備え、プレイヤを撮像して得られる撮像データを用いたゲームを提供するゲームシステムのコンピュータプログラムであって、
    前記コンピュータに、
    前記撮像データを取得させ、
    前記撮像データを解析させて、前記プレイヤの身体に関する身体情報と、前記プレイヤが前記ゲームをプレイしている間の運動負荷との少なくとも一方を算出させ、
    前記プレイヤが前記ゲームをプレイしている間に消費するエネルギーの消費量を算出させる、コンピュータプログラム。

Images