JP7250726B2 - コンピュータプログラム、サーバ装置及び方法 - Google Patents

Description

特許法第３０条第２項適用 （１）ウェブサイトの掲載日 ２０１９年８月１８日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｒｅａｌｉｔｙ－ｆｅｓｔｉｖａｌ．ｗｒｉｇｈｔｆｌｙｅｒ．ｎｅｔ／３／ 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記アドレスにより特定されるウェブサイトにおいて、出願に係る発明に関する「ＲＥＡＬＩＴＹ ＦＥＳＴＩＶＡＬ３」を公開した。

特許法第３０条第２項適用 （２）公開の実施日 ２０１９年８月１８日 公開の場所 公開は、株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが運営するＶｔｕｂｅｒ専用のライブ配信アプリケーション「ＲＥＡＬＩＴＹ」を介して配信された「ＲＥＡＬＩＴＹ ＦＥＳＴＩＶＡＬ３」において２回放送された歌番組（Ｆ＞＞ＶＲ）の２回目の放送における「ＥＮＤＩＮＧ ＳＰＥＣＩＡＬ」において行われた。上記アプリケーション「ＲＥＡＬＩＴＹ」は、下記アドレスにより特定されるウェブサイトにおいてダウンロード可能である。 ｈｔｔｐｓ：／／ｌｅ．ｗｒｉｇｈｔｆｌｙｅｒ．ｎｅｔ／ｒｅａｌｉｔｙ／ ｈｔｔｐｓ：／／ｉｔｕｎｅｓ．ａｐｐｌｅ．ｃｏｍ／ｕｓ／ａｐｐ／ｒｅａｌｉｔｙ／ｉｄ１４０４１７６５６４？ｌ＝ｊａ＆ｌｓ＝１＆ｍｔ＝８ ｈｔｔｐｓ：／／ｐｌａｙ．ｇｏｏｇｌｅ．ｃｏｍ／ｓｔｏｒｅ／ａｐｐｓ／ｄｅｔａｉｌｓ？ｉｄ＝ｎｅｔ．ｗｒｉｇｈｔｆｌｙｅｒ．ｌｅ．ｒｅａｌｉｔｙ ｈｔｔｐｓ：／／ａｐｐｓ．ａｐｐｌｅ．ｃｏｍ／ｊｐ／ａｐｐ／ｒｅａｌｉｔｙ－ｖｔｕｂｅｒ％Ｅ５％Ｂ０％８２％Ｅ７％９４％Ａ８％Ｅ３％８３％Ａ９％Ｅ３％８２％Ａ４％Ｅ３％８３％９６％Ｅ３％８２％Ａ２％Ｅ３％８３％９７％Ｅ３％８３％ＡＡ／ｉｄ１４０４１７６５６４ 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、同社が提供する上記アドレスにより特定されるウェブサイトにおいてダウンロード可能なＶＴｕｂｅｒ専用ライブ視聴・配信アプリケーション「ＲＥＡＬＩＴＹ」において、出願に係る発明に関する「ＲＥＡＬＩＴＹ ＦＥＳＴＩＶＡＬ３」を公開した。

特許法第３０条第２項適用 （３）集会の掲載日 ２０１９年９月５日 集会名、開催場所 コンピュータエンターテインメントデベロッパーズカンファレンス２０１９（ＣＥＤＥＣ２０１９）、パシフィコ横浜 会議センター（横浜西区みなとみらい） 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記集会において、出願に係る発明に関する公開を行った。

特許法第３０条第２項適用 （４）ウェブサイトの掲載日 ２０１９年７月５日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｃｅｄｉｌ．ｃｅｓａ．ｏｒ．ｊｐ／ｃｅｄｉｌ＿ｓｅｓｓｉｏｎｓ／ｖｉｅｗ／２０６３ 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記アドレスにより特定されるウェブサイトにおいて、出願に係る発明に関する「Ｖｔｕｂｅｒ」に関する公開を行った。

特許法第３０条第２項適用 （５）公開日 ２０１９年７月５日 公開場所 ｈｔｔｐｓ：／／ｃｅｄｉｌ．ｃｅｓａ．ｏｒ．ｊｐ／ｃｅｄｉｌ＿ｓｅｓｓｉｏｎｓ／ｖｉｅｗ／２０６３内の「講演資料」項目内においてログイン後にアクセス可能な講演資料 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記アドレスにより特定される講演資料内において、出願に係る発明に関する「Ｖｔｕｂｅｒ」に関する公開を行った。

特許法第３０条第２項適用 （６）ウェブサイトの掲載日 ２０１９年９月５日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｗｗｗ．ｗａｎｔｅｄｌｙ．ｃｏｍ／ｃｏｍｐａｎｉｅｓ／ｗｒｉｇｈｔｆｌｙｅｒ／ｐｏｓｔ＿ａｒｔｉｃｌｅｓ／１８４９５０ 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記アドレスにより特定されるウェブサイトにおいて、出願に係る発明に関する「Ｖｔｕｂｅｒ」に関する公開を行った。

特許法第３０条第２項適用 （７）ウェブサイトの掲載日 ２０１９年８月２２日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｗｗｗ．ｗａｎｔｅｄｌｙ．ｃｏｍ／ｃｏｍｐａｎｉｅｓ／ｗｒｉｇｈｔｆｌｙｅｒ／ｐｏｓｔ＿ａｒｔｉｃｌｅｓ／１８３０６１ 公開者 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔ 公開された発明の内容 株式会社Ｗｒｉｇｈｔ Ｆｌｙｅｒ Ｌｉｖｅ Ｅｎｔｅｒｔａｉｎｍｅｎｔが、上記アドレスにより特定されるウェブサイトにおいて、出願に係る発明に関する「ＲＥＡＬＩＴＹ ＦＥＳＴＩＶＡＬ３」に関する公開を行った。

本件出願に開示された技術は、配信者（演者）の動作に基づいた画像を表示する、コンピュータプログラム、サーバ装置及び方法に関する。

従来から、配信者（演者）の動作に基づいた画像を生成するために、モーションキャプチャシステムが用いられる。特開２０１７－５１１９０６号公報（特許文献１）は、慣性センサを用いたモーションキャプチャシステムを開示している。特許文献１に開示されたモーションキャプチャシステムは、配信者の身体における複数の部位に装着された慣性センサから受信した信号に基づいて、上記身体における各部分の位置を決定する。なお、上記特許文献１は、引用によりその全体が本明細書に組み入れられる。

特開２０１７－５１１９０６号公報

しかしながら、上述した慣性センサを用いたモーションキャプチャシステムでは、慣性センサを用いて物理的な空間における配信者の位置（座標）を算出する場合には、このように算出される位置は、時間の経過とともに蓄積されるノイズに起因して、実際の配信者の位置とは大きく異なる可能性がある。

したがって、本件出願において開示された幾つかの実施形態は、物理的な空間における配信者（演者）の位置を向上した精度により検出する、コンピュータプログラム、サーバ装置、端末装置及び表示方法を提供する。

一態様に係るコンピュータプログラムは、「少なくとも１つのプロセッサにより実行されることにより、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

一態様に係るサーバ装置は、「少なくとも１つのプロセッサを具備し、該少なくとも１つのプロセッサが、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する」ことができる。

一態様に係る方法は、「コンピュータにより読み取り可能な命令を実行する少なくとも１つのプロセッサにより実行される方法であって、該少なくとも１つのプロセッサが、前記命令を実行することにより、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得する第１取得工程と、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得する第２取得工程と、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出する第１算出工程と、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する第２算出工程と、を含む」ことができる。

図１は、一実施形態に係る通信システムの構成の一例を示すブロック図である。 図２は、図１に示した通信システム１により実行される各動作がいずれの装置により実行され得るのかを例示する表である。 図３は、図１に示した端末装置２０（サーバ装置３０）のハードウェア構成の一例を模式的に示すブロック図である。 図４は、図１に示した端末装置２０（サーバ装置３０）の機能の一例を模式的に示すブロック図である。 図５は、図１に示した通信システム１により行われる動作の一例を示すフロー図である。 図６は、図１に示した通信システム１において身体位置情報算出部１５０（２５０）により行われる動作の一例を示すフロー図である。 図７は、図１に示した通信システム１において身体位置情報算出部１５０（２５０）により行われる動作の別の例を示すフロー図である。

以下、添付図面を参照して本発明の様々な実施形態を説明する。なお、図面において共通した構成要素には同一の参照符号が付されている。また、或る図面に表現された構成要素が、説明の便宜上、別の図面においては省略されていることがある点に留意されたい。さらにまた、添付した図面が必ずしも正確な縮尺で記載されている訳ではないということに注意されたい。

１．通信システムの概要
本件出願において開示される通信システムでは、簡潔にいえば、以下の動作が行われる。まず、スタジオ等の物理的な空間に居る配信者（演者）は、その身体における複数の部位に複数の第１センサ（例えば慣性センサ）を装着する。さらに、配信者は、その身体におけるいずれかの部位（例えば背中）に、少なくとも１つの第２センサ（例えば光学センサ）を装着する。「配信装置」は、配信者が演技を行っている間において、例えば単位時間ごとに、複数の第１センサから出力された動作情報、及び、少なくとも１つの第２センサから出力された位置情報を取得することができる。ここで、配信装置には、例えば以下の装置を含む任意の装置が含まれる。
・配信者の端末装置
・スタジオ等に設置された端末装置及び／又はスタジオユニット
・スタジオ等に設置されたサーバ装置

（配信装置が動画を生成する態様）
次に、配信装置は、取得した動作情報に基づいて、物理的な空間における配信者の各部位の位置を算出することができる。また、配信装置は、取得した位置情報に基づいて、物理的な空間における配信者の身体の位置を算出することができる。さらに、配信装置は、取得した物理的な空間における各部位の位置を仮想的な空間における各部位の位置に変換することができる。さらにまた、配信装置は、取得した物理的な空間における身体の位置を仮想的な空間における身体の位置に変換することができる。さらに、配信装置は、取得した仮想的な空間における各部位の位置及び身体の位置に基づいて、配信者のアバターのアニメーションを含む動画を生成してサーバ装置に送信することができる。このサーバ装置は、配信者の端末装置等から受信した動画を、各視聴者の端末装置に配信することができる。これにより、各視聴者の端末装置は、サーバ装置から受信した動画を再生することができる。

（サーバ装置が動画を生成する態様）
これに並行して、配信装置は、取得した動作情報及び位置情報を、サーバ装置に送信することができる。このサーバ装置は、取得した動作情報に基づいて、物理的な空間における配信者の各部位の位置を算出することができる。また、このサーバ装置は、取得した位置情報に基づいて、物理的な空間における配信者の身体の位置を算出することができる。さらに、このサーバ装置は、取得した物理的な空間における各部位の位置を仮想的な空間における各部位の位置に変換することができる。さらにまた、サーバ装置は、取得した物理的な空間における身体の位置を仮想的な空間における身体の位置に変換することができる。さらに、このサーバ装置は、取得した仮想的な空間における各部位の位置及び身体の位置に基づいて、配信者のアバターのアニメーションを含む動画を生成して各視聴者の端末装置に送信することができる。これにより、各視聴者の端末装置は、サーバ装置から受信した動画を再生することができる。

（各視聴者の端末装置が動画を生成する態様）
或いはまた、このサーバ装置は、取得した動作情報及び位置情報を各視聴者の端末装置に送信することができる。各視聴者の端末装置は、取得した動作情報に基づいて、物理的な空間における配信者の各部位の位置を算出することができる。また、各視聴者の端末装置は、取得した位置情報に基づいて、物理的な空間における配信者の身体の位置を算出することができる。さらに、各視聴者の端末装置は、取得した物理的な空間における各部位の位置を仮想的な空間における各部位の位置に変換することができる。さらにまた、各視聴者の端末装置は、取得した物理的な空間における身体の位置を仮想的な空間における身体の位置に変換することができる。さらに、各視聴者の端末装置は、取得した仮想的な空間における各部位の位置及び身体の位置に基づいて、配信者のアバターのアニメーションを含む動画を生成して表示することができる。

２．通信システムの例

図１は、一実施形態に係る通信システムの構成の一例を示すブロック図である。図１に示すように、通信システム１は、通信網１０に接続される１又はそれ以上の端末装置２０と、通信網１０に接続される１又はそれ以上のサーバ装置３０と、を含むことができる。なお、図１には、端末装置２０の例として、３つの端末装置２０Ａ～２０Ｃが例示され、サーバ装置３０の例として、３つのサーバ装置３０Ａ～３０Ｃが例示されている。しかし、端末装置２０として、これら以外の１又はそれ以上の端末装置２０が通信網１０に接続され得る。また、サーバ装置３０として、これら以外の１又はそれ以上のサーバ装置３０が通信網１０に接続され得る。

また、通信システム１は、通信網１０に接続される１又はそれ以上のスタジオユニット４０を含むことができる。なお、図１には、スタジオユニット４０の例として、２つのスタジオユニット４０Ａ及び４０Ｂが例示されている。しかし、スタジオユニット４０として、これら以外の１又はそれ以上のスタジオユニット４０が通信網１０に接続され得る。

通信網１０は、携帯電話網、無線ＬＡＮ、固定電話網、インターネット、イントラネット及び／又はイーサネット（登録商標）等をこれらに限定することなく含むことができる。

図２は、図１に示した通信システム１により実行される各動作がいずれの装置により実行され得るのかを例示する表である。

まず、態様（１）に着目する。（Ａ）動作情報及び位置情報の取得～（Ｄ）動画の生成までが、配信装置により実行され得る。（Ｅ）動画の表示は、配信装置及び各視聴者の端末装置により実行され得る。

次に、態様（２）に着目する。経路（２Ａ）では、（Ａ）動画情報及び位置情報の取得～（Ｅ）動画の表示までが、配信装置により実行され得る。

経路（２Ａ）に並行して実行され得る経路（２Ｂ）では、（Ｂ）物理的な空間における位置の算出～（Ｄ）動画の生成までが、サーバ装置により実行され得る。（Ｅ）動画の表示が、各視聴者の端末装置により実行され得る。

次に、態様（３）に着目する。経路（３Ａ）で行われる動作は、上述した態様（２）の経路（２Ａ）で行われる動作と同様である。

経路（３Ａ）に並行して実行され得る経路（３Ｂ）では、（Ｂ）物理的な空間における位置の算出及び（Ｃ）仮想的な空間における位置の算出が、サーバ装置により実行され得る。（Ｄ）動画の生成及び（Ｅ）動画の表示が、各視聴者の端末装置により実行され得る。

次に、態様（４）に着目する。経路（４Ａ）で行われる動作は、上述した態様（２）の経路（２Ａ）で行われる動作と同様である。

経路（４Ａ）と並行して実行され得る経路（４Ｂ）では、（Ｂ）物理的な空間における位置の算出がサーバ装置により実行され得る。（Ｃ）仮想的な空間における位置の算出～（Ｅ）動画の表示までが、各視聴者の端末装置により実行され得る。

次に、態様（５）に着目する。経路（５Ａ）で行われる動作は、上述した態様（２）の経路（２Ａ）で行われる動作と同様である。

経路（５Ａ）と並行して実行され得る経路（５Ｂ）では、（Ｂ）物理的な空間における位置の算出～（Ｅ）動画の表示までが、各視聴者の端末装置により実行され得る。

「配信装置」に含まれる、配信者の端末装置２０、並びに、スタジオ等に設置された端末装置２０及びスタジオユニット４０は、インストールされた所定のアプリケーション（動画配信用のアプリケーション等）を実行することにより、態様（１）～態様（５）の各々の場合に割り当てられた上述した動作を実行することができる。或いはまた、「配信装置」に含まれる、配信者の端末装置２０、並びに、スタジオ等に設置された端末装置２０及びスタジオユニット４０は、インストールされたウェブブラウザを実行することにより、サーバ装置３０からウェブページを受信及び表示して、同様の動作を実行することができる。

なお、本明細書において、「所定のアプリケーション」又は「特定のアプリケーション」とは、１又はそれ以上のアプリケーションであってもよいし、１又はそれ以上のアプリケーションと１又はそれ以上のミドルウェアとの組み合わせであってもよい。

各視聴者の端末装置２０もまた、インストールされた所定のアプリケーション（動画配信用のアプリケーション等）を実行することにより、態様（１）～態様（５）の各々の場合に割り当てられた上述した動作を実行することができる。或いはまた、「配信装置」に含まれる、配信者の端末装置２０、並びに、スタジオ等に設置された端末装置２０及びスタジオユニット４０は、インストールされたウェブブラウザを実行することにより、サーバ装置３０からウェブページを受信及び表示して、同様の動作を実行することができる。

配信者の端末装置２０及び各視聴者の端末装置２０は、スマートフォン、タブレット、携帯電話（フィーチャーフォン）、及び／又は、パーソナルコンピュータ等を、これらに限定することなく含むことができる。

スタジオ等に設置された端末装置２０及びスタジオユニット４０は、パーソナルコンピュータ、スーパーコンピュータ、及び／又は、量子コンピュータ等をこれらに限定することなく含むことができる。

「配信装置」に含まれるサーバ装置３０は、インストールされた特定のアプリケーションを実行してアプリケーションサーバとして機能することにより、態様（１）～態様（５）の各々の場合に割り当てられた上述した動作を実行することができる。また、「配信装置」に含まれるサーバ装置３０は、インストールされた特定のアプリケーションを実行してウェブサーバとして機能することにより、各端末装置２０及び／又はスタジオユニット等に送信するウェブページを介して、同様の動作を実行することができる。

サーバ装置３０は、パーソナルコンピュータ、スーパーコンピュータ、及び／又は、量子コンピュータ等をこれらに限定することなく含むことができる。

３．各装置のハードウェア構成
次に、端末装置２０、サーバ装置３０及びスタジオユニット４０の各々が有するハードウェア構成の一例について説明する。

３－１．端末装置２０のハードウェア構成
各端末装置２０のハードウェア構成例について図３を参照して説明する。図３は、図１に示した端末装置２０（サーバ装置３０）のハードウェア構成の一例を模式的に示すブロック図である。なお、図３において、括弧内の参照符号は、後述するように各サーバ装置３０に関連して記載されている。

各端末装置２０は、主に、中央処理装置２１と、主記憶装置２２と、入出力インタフェイス装置２３と、入力装置２４と、補助記憶装置２５と、出力装置２６と、を含むことができる。これら装置同士は、データバス及び／又は制御バスにより接続されている。

中央処理装置２１は、「ＣＰＵ」と称されることがあり、主記憶装置２２に記憶されている命令及びデータに対して演算を行い、その演算の結果を主記憶装置２２に記憶させることができる。さらに、中央処理装置２１は、入出力インタフェイス装置２３を介して、入力装置２４、補助記憶装置２５及び出力装置２６等を制御することができる。端末装置２０は、１又はそれ以上のこのような中央処理装置２１を含むことが可能である。

主記憶装置２２は、「メモリ」と称されることがあり、入力装置２４、補助記憶装置２５及び通信網１０等（サーバ装置３０等）から、入出力インタフェイス装置２３を介して受信した命令及びデータ、並びに、中央処理装置２１の演算結果を記憶することができる。主記憶装置２２は、ＲＡＭ（ランダムアクセスメモリ）、ＲＯＭ（リードオンリーメモリ）及び／又はフラッシュメモリ等をこれらに限定することなく含むことができる。

補助記憶装置２５は、主記憶装置２２よりも大きな容量を有する記憶装置である。補助記憶装置２５は、上記特定のアプリケーションやウェブブラウザ等を構成する命令及びデータ（コンピュータプログラム）を記憶しておき、中央処理装置２１により制御されることにより、これらの命令及びデータ（コンピュータプログラム）を、入出力インタフェイス装置２３を介して主記憶装置２２に送信することができる。補助記憶装置２５は、磁気ディスク装置及び／又は光ディスク装置等をこれらに限定することなく含むことができる。

入力装置２４は、外部からデータを取り込む装置であり、タッチパネル、ボタン、キーボード、マウス及び／又はセンサ等をこれらに限定することなく含むことができる。センサは、後述するように、１又はそれ以上のカメラ等を含む第１種のセンサ、及び／又は、１又はそれ以上のマイク等を含む第２種のセンサをこれらに限定することなく含むことができる。

出力装置２６は、ディスプレイ装置、タッチパネル及び／又はプリンタ装置等をこれらに限定することなく含むことができる。

このようなハードウェア構成にあっては、中央処理装置２１が、補助記憶装置２５に記憶された特定のアプリケーションを構成する命令及びデータ（コンピュータプログラム）を順次主記憶装置２２にロードし、ロードした命令及びデータを演算することができる。これにより、中央処理装置２１は、入出力インタフェイス装置２３を介して出力装置２６を制御し、或いはまた、入出力インタフェイス装置２３及び通信網１０を介して、他の装置（例えばサーバ装置３０及び他の端末装置２０等）との間で様々な情報の送受信を行うことができる。これにより、端末装置２０は、インストールされた特定のアプリケーションを実行することにより、図２を参照して上述した動作を実行することができる。

なお、端末装置２０は、中央処理装置２１に代えて又は中央処理装置２１とともに、１又はそれ以上のマイクロプロセッサ、及び／又は、グラフィックスプロセッシングユニット（ＧＰＵ）を含むことができる。

３－２．サーバ装置３０のハードウェア構成
各サーバ装置３０のハードウェア構成例について同じく図３を参照して説明する。各サーバ装置３０のハードウェア構成は、例えば、上述した各端末装置２０のハードウェア構成と同一とすることができる。したがって、各サーバ装置３０が有する構成要素に対する参照符号は、図３において括弧内に示されている。

各サーバ装置３０は、主に、中央処理装置３１と、主記憶装置３２と、入出力インタフェイス装置３３と、入力装置３４と、補助記憶装置３５と、出力装置３６と、を含むことができる。これら装置同士は、データバス及び／又は制御バスにより接続されている。

中央処理装置３１、主記憶装置３２、入出力インタフェイス装置３３、入力装置３４、補助記憶装置３５及び出力装置３６は、それぞれ、上述した各端末装置２０に含まれる、中央処理装置２１、主記憶装置２２、入出力インタフェイス装置２３、入力装置２４、補助記憶装置２５及び出力装置２６と略同一であり得る。

このようなハードウェア構成にあっては、中央処理装置３１が、補助記憶装置３５に記憶された特定のアプリケーションを構成する命令及びデータ（コンピュータプログラム）を順次主記憶装置３２にロードし、ロードした命令及びデータを演算することができる。これにより、中央処理装置３１は、入出力インタフェイス装置３３を介して出力装置３６を制御し、或いはまた、入出力インタフェイス装置３３及び通信網１０を介して、他の装置（例えば各端末装置２０等）との間で様々な情報の送受信を行うことができる。

これにより、サーバ装置３０は、インストールされた特定のアプリケーションを実行してアプリケーションサーバ及び／又はウェブサーバとして機能することができる。これにより、サーバ装置３０は、図２を参照して上述した動作を実行することができる。

なお、サーバ装置３０は、中央処理装置３１に代えて又は中央処理装置３１とともに、１又はそれ以上のマイクロプロセッサ、及び／又は、グラフィックスプロセッシングユニット（ＧＰＵ）を含むことができる。

３－３．スタジオユニット４０のハードウェア構成
スタジオユニット４０は、パーソナルコンピュータ等の情報処理装置により実装可能である。スタジオユニット４０は、図示はされていないが、上述した端末装置２０及びサーバ装置３０と同様に、主に、中央処理装置と、主記憶装置と、入出力インタフェイス装置と、入力装置と、補助記憶装置と、出力装置と、を含むことができる。これら装置同士は、データバス及び／又は制御バスにより接続されている。

スタジオユニット４０は、インストールされた特定のアプリケーションを実行して情報処理装置として機能することができる。これにより、スタジオユニット４０は、図２を参照して上述した動作を実行することができる。

なお、スタジオユニット４０は、中央処理装置に代えて又は中央処理装置とともに、１又はそれ以上のマイクロプロセッサ、及び／又は、グラフィックスプロセッシングユニット（ＧＰＵ）を含むことができる。

４．各装置の機能
次に、端末装置２０、サーバ装置３０及びスタジオユニット４０の各々が有する機能の一例について説明する。

４－１．端末装置２０の機能
図４は、図１に示した端末装置２０（サーバ装置３０）の機能の一例を模式的に示すブロック図である。図４に示すように、端末装置２０は、記憶部１００と、センサ部１１０と、動作情報取得部１２０と、位置情報取得部１３０と、部位位置情報算出部１４０と、身体位置情報算出部１５０と、変換部１６０と、動画生成部１７０と、表示部１８０と、ユーザインタフェイス部１９０と、通信部２００と、を含むことができる。

（１）記憶部１００
画像の配信及び／又は画像の受信等に必要とされる例えば以下に示す情報を含む様々な情報を記憶することができる。
・演者に装着された第１センサ（例えば慣性センサ）から受信した動作情報
・演者に装着された第２センサ（例えば光学センサ）から受信した位置情報
・動作情報に基づいて算出された部位位置情報
・位置情報に基づいて算出された身体位置情報
・物理的な空間における座標から仮想的な空間における座標に変換された部位位置情報
・物理的な空間における座標から仮想的な空間における座標に変換された身体位置情報
・仮想的な空間における座標に変換された部位位置情報と、仮想的な空間における座標に変換された身体位置情報と、に基づいて生成された動画等

（２）センサ部１１０
センサ部１１０は、様々なタイプのカメラ及び／又はマイクロフォン等のセンサと、このようなセンサにより取得された情報を処理する少なくとも１つのプロセッサと、を含むことができる。センサ部１１０は、このセンサ部１１０に対向する演者の顔に関するデータ（画像及び／又は音声等）を取得して、さらにこのデータに対する情報処理を実行することが可能である。

具体的には、例えば、センサ部１１０は、まず、様々なタイプのカメラを用いて、単位時間ごとに演者の顔に関する画像データを取得することができる。ここで、単位時間は、ユーザ・演者等によりユーザインタフェイス部１９０を介して任意のタイミングにおいて任意の長さに設定・変更可能である。さらに、センサ部１１０は、このように取得した画像データを用いて、単位時間ごとに演者の顔における複数の部分の各々の位置を測定することができる。ここで、複数の部分とは、上記のとおり、右目、左目、右眉毛、左眉毛、鼻、口、右耳、左耳、顎、右頬、左頬、及び／又は、これらの部位のうちの何れかの部分における一部分等を、これらに限定することなく含むことができる。なお、カメラにより取得された画像データを用いて単位時間ごとに演者の顔における複数の部分の位置を測定する手法としては、当業者にとって周知である様々な手法を用いることが可能である。

例えば、１つの実施形態では、センサ部１１０は、センサとして、可視光線を撮像するＲＧＢカメラと、近赤外線を撮像する近赤外線カメラと、を含むことができる。このようなカメラとしては、例えばｉｐｈｏｎｅ Ｘ（登録商標）のトゥルーデプス（Ｔｒｕｅ Ｄｅｐｔｈ）カメラが利用可能である。なお、トゥルーデプス（Ｔｒｕｅ Ｄｅｐｔｈ）カメラとしては、https://developer.apple.com/documentation/arkit/arfaceanchorに開示されたカメラを利用することができる。このウェブサイトに記載された事項は、引用によりその全体が本明細書に組み入れられる。

ＲＧＢカメラに関して、センサ部１１０は、ＲＧＢカメラにより取得された画像をタイムコード（画像を取得した時間を示すコード）に対応付けて単位時間ごとに記録したデータを生成することができる。このデータは、例えばＭＰＥＧファイルであり得る。

さらに、センサ部１１０は、近赤外線カメラにより取得された所定数（例えば５１個）の深度を示す数値（例えば浮動小数点の数値）を上記タイムコードに対応付けて単位時間ごとに記録したデータを生成することができる。このデータは、例えばＴＳＶファイルであり得る。ここで、ＴＳＶファイルとは、データ間をタブで区切って複数のデータを記録する形式のファイルである。

近赤外線カメラに関して、具体的には、まず、ドットプロジェクタがドット（点）パターンを含む赤外線レーザーを演者の顔に放射することができる。さらに、近赤外線カメラが、演者の顔に投影され反射した赤外線ドットを捉え、このように捉えた赤外線ドットの画像を生成することができる。センサ部１１０は、予め登録されているドットプロジェクタにより放射されたドットパターンの画像と、近赤外線カメラにより捉えられた画像とを比較して、両画像における各ポイント（例えば５１個のポイント・５１個の部分の各々）における位置のずれを用いて各ポイント（各部分）の深度を算出することができる。ここで、各ポイント（各部分）の深度は、各ポイント（各部分）と近赤外線カメラとの間の距離であり得る。センサ部１１０は、このように算出された深度を示す数値を上記のようにタイムコードに対応付けて単位時間ごとに記録したデータを生成することができる。

これにより、センサ部１１０は、タイムコードに対応付けて、単位時間ごとに、ＭＰＥＧファイル等の動画と、各部位の位置（座標等）とを、演者の顔に関するデータ（測定データ）として取得することができる。

Ａｒｇｕｍｅｎｔｅｄ Ｆａｃｅｓを利用することにより、センサ部１１０は、カメラにより撮像された画像を用いて、次に示す情報を単位時間ごとに取得することができる。
（１）演者の頭蓋骨の物理的な中心位置、
（２）演者の顔を構成する何百もの頂点を含み、上記中心位置に対して定義される顔メッシュ、及び、
（３）上記（１）及び（２）に基づいて識別された、演者の顔における複数の部分（例えば、右頬、左頬、鼻の頂点）の各々の位置（座標）

この技術を用いることにより、センサ部１１０は、単位時間ごとに、演者の顔における複数の部分の各々の位置（座標）を取得することができる。

なお、センサ部１１０は、マイクロフォン等から出力された演者の発話及び／又は歌唱に関する音声データについては、このデータに対して周知の信号処理を行うことにより、音声信号を取得することができる。この音声信号は、例えばＭＰＥＧファイル等であってもよい。

（３）動作情報取得部１２０及び部位位置情報算出部１４０
スタジオ等の物理的な空間に居る演者の身体における複数の部位には、（図示しない）複数の第１センサ（例えば慣性センサ）が装着されている。なお、演者の身体における複数の部位は、例えば、頭、顎、右肩、右肘、右手首、右手の甲、右手の指、左肩、左肘、左手首、左手の甲、左手の指、右股関節、右膝、右足首、右足の甲、右足爪先、左股関節、左膝、左足首、左足の甲、左足爪先、背中及び腰等を含む複数の部位から選択され得る。これら複数の第１センサの各々は、３次元加速度計、３次元ジャイロスコープ及び３次元磁力計等のうちの少なくとも１つを含むことができる。複数の第１センサの各々は、単位時間ごとに、センサ信号（動作情報）を送信することができる。なお、複数の第１センサとしては、例えば、イクセンス社により提供される”MVN BIOMECH”（http://0c7.co.jp/products/xsens/products/mvn_biomech/）を利用することが可能である。上記ウェブサイトに開示された内容は、引用によりその全体が本明細書に組み入れられる。

動作情報取得部１２０は、複数の第１センサの各々により送信されたセンサ信号（動作情報）を取得することができる。

部位位置情報算出部１４０は、動作情報取得部１２０により取得された、複数の第１センサの各々のセンサ情報に基づいて、複数の第１センサ（すなわち身体における複数の部位）の各々の位置情報（及び向き等）を算出することができる。なお、各第１センサから受信したセンサ情報に基づいてそのセンサの位置情報を取得する手法としては、例えば、特開２０１７－５１１９０６号公報、特表２０１３－５００８１２号公報及び特許第５３８８４７３号公報に記載されている周知の手法を用いることが可能である。なお、これらの文献は、引用によりそれらの全体が本明細書に組み入れられる。

（４）位置情報取得部１３０及び身体位置情報算出部１５０
スタジオ等の物理的な空間に居る演者の身体におけるいずれかの部位（例えば背中）には、（図示しない）少なくとも１つの第２センサ（例えば光学センサ）が装着されている。また、スタジオ等の物理的な空間に居る演者の近くには、図示しない２つのベースステーション（第１ベースステーション及び第２ベースステーション）が設置され得る。

第１ベースステーション及び第２ベースステーションは、例えば、多軸レーザーエミッターであり得る。第１ベースステーションは、例えば、同期用の点滅光を発した後に、鉛直軸の周りにレーザー光を走査することができる。第２ベースステーションは、例えば、同期用の点滅光を発した後に、水平軸の周りにレーザー光を走査することができる。

第２センサは、第１ベースステーション及び第２ベースステーションからの点滅光及びレーザー光の入射を検知することができる。さらに、第２センサは、点滅光の入射タイミングとレーザー光の入射タイミングとの時間差、この第２センサでの受光時間、この第２センサが検知したレーザー光の入射角度等に基づいて、この第２センサの位置情報（及び向き等）を検出することができる。さらにまた、第２センサは、単位時間ごとに、この第２センサが検出した位置情報を送信することができる。位置情報取得部１３０は、このように第２センサにより単位時間ごとに送信された位置情報を取得することができる。

なお、このような第２センサ、並びに、第１ベースステーション及び第２ベースステーションとしては、例えば、ＨＴＣ社により提供される”HTC VIVE”を利用することができる。上記ウェブサイトに開示された内容は、引用によりその全体が本明細書に組み入れられる。

身体位置情報算出部１５０は、位置情報取得部１３０により取得された第２センサの位置情報に基づいて、身体の位置情報を算出することができる。なお、身体の位置情報の算出手法については、図６を参照して後述する。

（５）変換部１６０
変換部１６０は、部位位置情報算出部１４０により算出された、複数の第１センサの各々の位置情報を、物理的な空間における座標から仮想的な空間における座標に変換することができる。さらに、変換部１６０は、身体位置情報算出部１５０により算出された、第２センサの位置情報を、物理的な空間における座標から仮想的な空間における座標に変換することができる。なお、物理的な空間とは、演者が存在する空間（例えばスタジオ等）における座標である。また、仮想的な空間とは、演者のアバターが存在する空間における座標である。

（６）動画生成部１７０
動画生成部１７０は、例えば、以下の情報を用いて、演者の身体の動作に追従したアバターのアニメーションを含む動画を生成することができる。
・センサ部１１０により取得された演者の身体に関するデータ（測定データ）
・部位位置情報算出部１４０により算出された複数の第１センサ（身体における複数の部位）の各々の位置情報
・身体位置情報算出部１５０により算出された身体の位置情報

例えば、動画生成部１７０は、演者の身体の動作に追従して、例えば、アバターが以下の動作を行うような動画を生成することができる。
・アバターが真顔を維持して瞬きを行うこと
・アバターが真顔を維持して俯くこと
・アバターが口や目を動作させること
・アバターが仮想空間において移動すること
・アバターが身体における複数の部位を動作させること

このような動画の生成は、動画生成部１７０が、例えば以下の処理等を行うことにより実現可能である。
・センサ部１１０により取得された演者の身体に関する測定データ（顔における複数の部分の各々の座標）に基づいて、アバターの顔を描画する処理
・身体位置情報算出部１５０により算出された身体の位置情報に基づいて定められる座標に、アバターを描画する処理
・部位位置情報算出部１４０により算出された各第１センサの位置情報に基づいて定められる座標に、その第１センサに対応する部位を描画する処理
また、このような動画の生成は、当業者にとって周知である様々なレンダリング技術を用いることによって実現可能である。

このように動画生成部１７０により生成された動画を格納したファイルは、記憶部１００に記憶され得る。

（７）表示部１８０
表示部１８０は、例えば、タッチパネル及び／又はディスプレイパネル等を含むことができる。このような表示部１８０は、動画生成部１７０により生成され記憶部１００により記憶された動画を格納したファイルを再生して表示することができる。

（８）ユーザインタフェイス部１９０
ユーザインタフェイス部１９０は、タッチパネル、マウス及び／又はキーボード等を含むことができる。このようなユーザインタフェイス部１９０は、演者により行われた操作の内容を示す情報を生成することができる。

（９）通信部２００
通信部２００は、動画の配信及び／又は動画の受信に必要とされる様々な情報を、通信網１０を介してサーバ装置３０との間で通信することができる。特に、当該端末装置２０が演者（配信者）の端末装置２０として動作する場合には、通信部２００は、記憶部１００に記憶された動画を、サーバ装置３０に送信することができる。当該端末装置２０が視聴者の端末装置２０として動作する場合には、通信部２００は、配信者の端末装置２０により配信された動画を、サーバ装置３０を介して受信することができる。

４－２．サーバ装置３０の機能及びスタジオユニット４０の機能
サーバ装置３０の機能の一例について同じく図４を参照して説明する。サーバ装置３０の機能としては、例えば、上述した端末装置２０の機能の少なくとも一部を用いることが可能である。したがって、サーバ装置３０が有する構成要素に対する参照符号は、図４において括弧内に示されている。また、スタジオユニットは、図４に示した端末装置２０又はサーバ装置３０と同様の構成を有することにより、端末装置２０又はサーバ装置３０と同様の動作を行うことが可能である。

５．通信システム１により行われる動作
次に、上述した通信システム１により行われる動作の一例について、図５を参照して説明する。図５は、図１に示した通信システム１により行われる動作の一例を示すフロー図である。

５－１．全体の動作
図５に示すように、まず、ステップ（以下「ＳＴ」という。）４０２において、配信装置は、例えば単位時間ごとに、測定データ、動作情報及び位置情報を取得することができる。配信装置は、このように取得した測定データ、動作情報及び／又は位置情報を、記憶部１００（２００）に記憶させるようにしてもよい。なお、測定データは、センサ部１１０（２１０）により取得され得る。動作情報及び位置情報は、それぞれ、動作情報取得部１２０（２２０）及び位置情報取得部１３０（２３０）により取得され得る。なお、ＳＴ４０２において行われる動作は、図２に示した動作（Ａ）に含まれ得る。

ＳＴ４０４において、配信装置（の部位位置情報算出部１４０（２４０））は、ＳＴ４０２において取得された動作情報に基づいて、物理的な空間における各部位の位置情報を算出することができる。なお、ＳＴ４０４において行われる動作は、図２に示した動作（Ｂ）に含まれ得る。

ＳＴ４０６において、配信装置（の身体位置情報算出部１５０（２５０））は、ＳＴ４０２において取得された位置情報に基づいて、物理的な空間における身体の位置情報を算出することができる。ＳＴ４０６において行われる具体的な処理については、図６を参照して後述する。なお、ＳＴ４０６において行われる動作は、図２に示した動作（Ｂ）に含まれ得る。

ＳＴ４０８において、配信装置（の部位位置情報算出部１４０（２４０））は、ＳＴ４０４において算出された各部位の位置情報を、物理的な空間における３次元座標から、仮想的な空間における３次元座標に変換することができる。演者が演技を行う物理的な空間（例えばスタジオ等）のサイズと、アバターが配置される仮想的な空間のサイズとは、同一ではないため、このような物理的な空間における３次元座標から仮想的な空間（例えばカラオケボックスの部屋等）における３次元座標に対する位置情報の変換が行われる。なお、ＳＴ４０８において行われる動作は、図２に示した動作（Ｃ）に含まれ得る。

ＳＴ４１０において、配信装置（の身体位置情報算出部１５０（２５０））は、ＳＴ４０６において算出された身体の位置情報を、物理的な空間における３次元座標から、仮想的な空間における３次元座標に変換することができる。演者が演技を行う物理的な空間（例えばスタジオ等）のサイズと、アバターが配置される仮想的な空間（例えばカラオケボックスの部屋等）のサイズとは、同一ではないため、このような物理的な空間における３次元座標から仮想的な空間における３次元座標に対する位置情報の変換が行われる。なお、ＳＴ４１０において行われる動作は、図２に示した動作（Ｃ）に含まれ得る。

ＳＴ４１２において、配信装置（の動画生成部１７０（２７０））は、ＳＴ４０２において取得された測定データと、ＳＴ４０８において仮想的な空間における３次元座標に変換された各部位の位置情報と、ＳＴ４１０において仮想的な空間における３次元座標に変換された身体の位置情報と、を含む情報等に基づいて、アバターのアニメーションを含む動画を生成することができる。さらに、配信装置（の通信部２００（３００））は、このように生成された動画をサーバ装置３０に送信することができる。これにより、各視聴者の端末装置２０は、ＳＴ４１４において生成された動画を、サーバ装置３０を介して受信することができる。なお、ＳＴ４１２において行われる動作は、図２に示した動作（Ｄ）に含まれ得る。

ＳＴ４１４において、配信装置及び各視聴者の端末装置２０は、ＳＴ４１４において生成された動画を再生及び表示することができる。なお、ＳＴ４１４において行われる動作は、図２に示した動作（Ｅ）に含まれ得る。

ＳＴ４１６において、配信装置は、処理を継続するか否かを判定することができる。処理の継続が判定された場合には、処理は上述したＳＴ４０２に戻る。一方、処理の中止が判定された場合には、処理は終了する。

なお、図５に示した各ステップにおける処理は、別のステップにおける処理と少なくとも部分的に並行して実行されるものであってもよい。例えば、ＳＴ４０２において、配信装置が、単位時間ごとに、測定データ、動作情報及び位置情報を取得することに並行して、配信装置は、ＳＴ４０４～ＳＴ４１４のそれぞれにおける動作を実行し、かつ、各視聴者の端末装置２０はＳＴ４１４における動作を実行することができる。

５－２．身体位置情報算出部１５０（２５０）により実行される処理の具体例
次に、上述したＳＴ４０６において身体位置情報算出部１５０（２５０）により行われる具体的な処理の一例について、図６を参照して説明する。図６は、図１に示した通信システム１において身体位置情報算出部１５０（２５０）により行われる動作の一例を示すフロー図である。

図６を参照すると、ＳＴ５０２において、配信装置は、第１単位時間ごとにＳＴ４０２において取得した位置情報に対して前処理を実行することができる。前処理には、ＳＴ４０２において取得した位置情報を、所定の原点（所定の座標）を基準とした位置情報に変換する処理、及び／又は、ＳＴ４０２において取得した位置情報を、所定の桁数に収める処理等が、含まれ得る。

ＳＴ５０４において、配信装置は、前回の第１単位時間（以下「前第１単位時間」という）において取得した位置情報と、現在の第１単位時間（以下「現第１単位時間」という）において取得した位置情報と、の間における変化量を算出することができる。

ＳＴ５０６において、配信装置は、ＳＴ５０４において算出した変化量が閾値を上回るか否かを判定することができる。ＳＴ５０６において変化量が閾値以下であると判定された場合には、ＳＴ５０８において、配信装置は、現第１単位時間において取得した位置情報を有効な位置情報として決定することができる。かかる有効な位置情報は、上述したＳＴ４１０において用いられる。この後、処理は上述したＳＴ５０２に戻る。

一方、ＳＴ５０６において変化量が閾値を上回ると判定された場合には、処理はＳＴ５１０に移行する。なお、このように変化量が閾値を上回る現象は、第１ベースステーション及び／又は第２ベースステーションにより発せられた点滅光又は他の光が、何らかの物体に反射して、配信者に装着された第２センサに入射したこと等（これに限られない）に起因して生ずることが考えられる。

ＳＴ５１０において、配信装置は、現第１単位時間において取得した位置情報を破棄することができる。ＳＴ５１２において、配信装置は、上述したＳＴ５０２におけるものと同様の処理を実行することができる。ＳＴ５１４において、配信装置は、新たな前第１単位時間（これまでに用いた前第１単位時間とは異なる前第１単位時間）において取得した位置情報と、新たな現第１単位時間（これまでに用いた現第１単位時間とは異なる現第１単位時間）において取得した位置情報と、の間における変化量を算出することができる。

ＳＴ５１６において、配信装置は、ＳＴ５０４において算出した変化量が閾値を上回るか否かを判定することができる。ＳＴ５１６において変化量が閾値以下であると判定された場合には、ＳＴ５１８において、配信装置は、現第１単位時間（ＳＴ５１４における新たな現第１単位時間と同一）において取得した位置情報を有効な位置情報として決定することができる。かかる有効な位置情報は、上述したＳＴ４１０において用いられる。この後、処理は上述したＳＴ５０２に戻る。

一方、ＳＴ５１６において変化量が閾値を上回ると判定された場合には、処理は上述したＳＴ５１０に戻る。

図６に示した処理によれば、配信装置は、前第１単位時間において取得した位置情報と現第１単位時間において取得した位置情報との間における変化量が閾値以下である場合には、当該現第１単位時間において取得した位置情報を有効な位置情報として使用することができる。

一方、上記変化量が上記閾値を上回る場合には、配信装置は、当該現第１単位時間において取得した位置情報を廃棄することができる。この後、配信装置は、新たな前第１単位時間において取得した位置情報と、新たな現第１単位時間において取得した位置情報との間における変化量が閾値以下となるまで、そのような新たな現単位時間において取得した位置情報を破棄し続ける。さらに、上記変化量が上記閾値以下となった時点において、配信装置は、そのような時点における現第１単位時間において取得した位置情報を有効な位置情報として使用することができる。これにより、配信装置は、光の反射等に起因して第２センサから受信した位置情報に誤りが存在する場合には、そのような位置情報を破棄し続け、その後に第２センサから取得した適切な位置情報を、有効な位置情報として利用することができる。

なお、図６に示した例では、配信装置が第２センサから位置情報を取得する時間におけるインターバル（ＳＴ５０２、ＳＴ５１２）と、配信装置が変化量を取得するために用いる２つの位置情報の間におけるインターバル（ＳＴ５０４、ＳＴ５１４）とが、同一（第１単位時間ごと）である場合について説明した。しかし、図７に例示するように、配信装置が変化量を取得するために用いる２つの位置情報の間におけるインターバル（ＳＴ６０４、ＳＴ６１４）を、配信装置が第２センサから位置情報を取得する時間におけるインターバル（ＳＴ６０２、ＳＴ６１２）より長くすることも可能である。すなわち、図７において、第２単位時間を第１単位時間よりも長くすることが可能である。なお、図７に示した例における動作は、第１単位時間と第２単位時間とを組み合わせて用いる点を除き、図６に示した例における動作と同様である。

６．変形例
図５に示したＳＴ４０４において配信装置が算出する各部位の位置情報は、用いられる第１センサの性能等によっては、時間の経過とともに、生じた誤差を蓄積していくことにより、大きな誤差を含む可能性が考えられる。このような問題に対処するために、配信装置は、ＳＴ４０４において算出した各部位の位置情報を、所定のタイミング（例えば周期的に）において、補正することができる。

例えば、配信装置は、ＳＴ４０６において取得した「有効な位置情報」に基づいて、ＳＴ４０４において算出した各部位の位置情報を補正することができる。具体的には、第１の方法では、配信装置は、ＳＴ４０６において有効な位置情報として取得した身体の位置情報が、前回有効な位置情報として取得した身体の位置情報から、例えば、（Δｘ、Δｙ、Δｚ）だけシフトしている場合には、ＳＴ４０４において取得した各部位の位置情報を、相対的に、（Δｘ、Δｙ、Δｚ）又は（ｋ１・Δｘ、ｋ２・Δｙ、ｋ３・Δｚ）だけシフトすることができる。ここで、ｋ１、ｋ２及びｋ３は、それぞれ、任意の係数である。

また、図６及び図７に示した例において、第１単位時間及び／又は第２単位時間は、任意のタイミングで変更可能な単位時間であり得る。

さらに、上述した様々な実施形態では、第１センサ及び第２センサとして、それぞれ、慣性センサ及び光学センサを用いる場合について説明した。しかし、相互に異なる第１センサ及び第２センサの各々は、周知である、光学（式）センサ、慣性（式）センサ、磁気（式）センサ及び機械（式）センサを含む様々なセンサから選択され得る。このような場合にも、第２センサからの位置情報を用いて算出された位置情報としては、単位時間当たりの変化量が閾値以下である位置情報のみが、有効な位置情報として用いられる。これにより、第２センサからの位置情報を用いて算出された位置情報のうち、一定の大きさを超える誤差を有する位置情報は、破棄される。したがって、配信者の身体の位置を向上した精度により検出することが可能である。さらに、このような第２センサからの位置情報を用いて算出された位置情報の単位時間当たりの変化量に基づいて、複数の第１センサ（複数の部位）の各々から受信した動作情報を用いて算出された位置情報を補正することができる。これにより、各第１センサが装着された部位の位置情報についても、向上した精度により検出することができる。

さらにまた、図６及び図７に示した例では、配信装置が、図２に示した動作（Ａ）～動作（Ｅ）を実行し、各視聴者の端末装置２０が動作（Ｅ）を実行する場合（図２における態様（１）に対応する場合）について説明した。しかし、動作（Ａ）～動作（Ｅ）は、図２における態様（２）～態様（５）に示すように、複数の装置により分担して実行されるようにしてもよい。

この場合、隣接する２つの動作が相互に異なる装置により実行される場合には、これら２つの動作のうち先に生ずる動作を実行する装置は、その動作により得られた情報等を、後に生ずる動作を実行する装置に対して送信する必要がある。

例えば、態様（２）の経路（２Ｂ）に着目すると、配信装置は、動作（Ａ）により得られた動作情報及び位置情報（測定データ）を、動作（Ｂ）を実行するサーバ装置に送信する必要がある。同様に、サーバ装置は、動作（Ｄ）により得られた動画を、各視聴者の端末装置に送信する必要がある。

別の例として、態様（５）の経路（５Ｂ）に着目すると、配信装置は、動作（Ａ）により得られた動作情報及び位置情報（測定データ）を、例えばサーバ装置を介して、各視聴者の端末装置に送信する必要がある。

なお、図２に示された、態様（３）の経路（３Ｂ）、態様（４）の経路（４Ｂ）及び態様（５）の経路（５Ｂ）においては、各視聴者の端末装置は、配信装置により生成された動画を表示するのではなく、その視聴者の端末装置自体により生成（描画）された動画を表示することができる（この方式は、視聴者の端末装置（クライアント）がレンダリング（描画）を行うことから、「クライアントレンダリング」といわれることがある）。これにより、各視聴者の端末装置は、一般的に大きな容量を有する動画を受信する必要がないため、より高速に、配信者のアバターのアニメーションを含む動画を表示することができる。すなわち、配信装置により表示される動画と、各視聴者の端末装置により表示される動画との間における時間差を、大幅に抑えることが可能である。

７．様々な態様
第１の態様に係るコンピュータプログラムは、「少なくとも１つのプロセッサにより実行されることにより、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第２の態様に係るコンピュータプログラムは、上記第１の態様において「前記位置情報に基づいて算出された前記身体の位置が有効な位置として使用可能であるか否かを判断する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第３の態様に係るコンピュータプログラムは、上記第２の態様において「第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、前記第１単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第４の態様に係るコンピュータプログラムは、上記第３の態様において「前記第１単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第５の態様に係るコンピュータプログラムは、上記第４の態様において「前記身体の位置の変化量が閾値を上回った当該第１単位時間より後に生ずる新たな第１単位時間における前記身体の位置の変化量が閾値以下に戻った場合に、当該新たな第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第６の態様に係るコンピュータプログラムは、上記第２の態様において「第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、前記第１単位時間より長い第２単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第７の態様に係るコンピュータプログラムは、上記第６の態様において「前記第２単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第８の態様に係るコンピュータプログラムは、上記第７の態様において「前記身体の位置の変化量が閾値を上回った当該第２単位時間より後に生ずる新たな第２単位時間における前記身体の位置の変化量が閾値以下に戻った場合に、当該新たな第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第９の態様に係るコンピュータプログラムは、上記第３の態様から上記第５の態様のいずれかにおいて「前記第１単位時間が変更可能である」。

第１０の態様に係るコンピュータプログラムは、上記第６の態様から上記第８の態様のいずれかにおいて「前記第１単位時間及び／又は前記第２単位時間が変更可能である」。

第１１の態様に係るコンピュータプログラムは、上記第３の態様から上記第１０の態様のいずれかにおいて「前記位置情報に基づいて算出された前記身体の有効な位置を仮想的な空間における前記身体の位置に変換し、前記動作情報に基づいて算出された前記複数の部位の各々の位置を仮想的な空間における該複数の部位の各々の位置に変換する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第１２の態様に係るコンピュータプログラムは、上記第１１の態様において「前記仮想的な空間における前記身体の位置、及び、前記仮想的な空間における前記複数の部位の各々の位置に基づいて、前記配信者のアバターのアニメーションを含む動画を生成する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第１３の態様に係るコンピュータプログラムは、上記第１の態様から上記第１２の態様のいずれかにおいて「前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む」ことができる。

第１４の態様に係るコンピュータプログラムは、上記第１の態様から上記第１３の態様のいずれかにおいて「取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第１５の態様に係るコンピュータプログラムは、上記第１の態様から上記第１４の態様のいずれかにおいて「前記少なくとも１つのプロセッサが、スタジオに設置される端末装置、前記配信者の端末装置、視聴ユーザの端末装置、及び／又は、サーバ装置に搭載される」ことができる。

第１６の態様に係るサーバ装置は、「少なくとも１つのプロセッサを具備し、該少なくとも１つのプロセッサが、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する」ことができる。

第１７の態様に係るサーバ装置は、上記第１６の態様において「前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む」ことができる。

第１８の態様に係るサーバ装置は、上記第１６の態様又は上記第１７の態様において「取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する、ように前記少なくとも１つのプロセッサを機能させる」ことができる。

第１９の態様に係る方法は、「コンピュータにより読み取り可能な命令を実行する少なくとも１つのプロセッサにより実行される方法であって、該少なくとも１つのプロセッサが、前記命令を実行することにより、物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得する第１取得工程と、前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得する第２取得工程と、前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出する第１算出工程と、前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する第２算出工程と、を含む」ことができる。

第２０の態様に係る方法は、上記第１９の態様において「各工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行される」ことができる。

第２１の態様に係る方法は、上記第１９の態様において「前記第１取得工程及び前記第２取得工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行され、前記第１算出工程及び前記第２算出工程が、前記スタジオに設置された端末装置又は前記配信者の端末装置に接続されるサーバ装置に搭載された、前記少なくとも１つのプロセッサにより実行される」ことができる。

第２２の態様に係る方法は、上記第１９の態様において「前記第１取得工程及び前記第２取得工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行され、前記第１算出工程及び前記第２算出工程が、前記スタジオに設置された端末装置又は前記配信者の端末装置に対してサーバ装置を介して接続される端末装置に搭載された、前記少なくとも１つのプロセッサにより実行される」ことができる。

第２３の態様に係る方法は、上記第１９の態様において「各工程が、スタジオに設置された端末装置又は前記配信者の端末装置に対してサーバ装置を介して接続される端末装置に搭載された、前記少なくとも１つのプロセッサにより実行される」ことができる。

第２４の態様に係る方法は、上記第１９の態様から上記第２３の態様のいずれかにおいて「前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む」ことができる。

第２５の態様に係る方法は、上記第１９の態様から上記第２４の態様のいずれかにおいて「前記少なくとも１つのプロセッサが、前記命令を実行することにより、取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する」ことができる。

以上のように、様々な態様によれば、物理的な空間における配信者（演者）の位置を向上した精度により検出する、コンピュータプログラム、サーバ装置、端末装置及び表示方法を提供することができる。

１ 通信システム
１０ 通信網
２０（２０Ａ～２０Ｃ） 端末装置
３０（３０Ａ～３０Ｃ） サーバ装置
４０（４０Ａ、４０Ｂ） スタジオユニット
１００（２００） 記憶部
１１０（２１０） センサ部
１２０（２２０） 動作情報取得部
１３０（２３０） 位置情報取得部
１４０（２４０） 部位位置情報算出部
１５０（２５０） 身体位置情報算出部
１６０（２６０） 変換部
１７０（２７０） 動画生成部
１８０（２８０） 表示部
１９０（２９０） ユーザインタフェイス部
２００（３００） 通信部

Claims (23)

1. 少なくとも１つのプロセッサにより実行されることにより、
   物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、
   前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、
   前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、
   前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出し、
   第１の動作又は第２の動作を実行する、ように前記少なくとも１つのプロセッサを機能させ、
   前記第１の動作が、
   第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
   前記第１単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
   前記第１単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
   算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含み、
   前記第２の動作が、
   第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
   前記第１単位時間より長い第２単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
   前記第２単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
   算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含む、
   ことを特徴とするコンピュータプログラム。
2. 前記第１の動作及び前記第２の動作の各々は、算出された前記複数の部位の位置を、前記有効な位置として使用可能であると判断された前記身体の位置と前回有効な位置として使用可能であると判断された前記身体の位置との差に基づいてシフトすることを含む、請求項１に記載のコンピュータプログラム。
3. 前記第１の動作は、前記身体の位置の変化量が閾値を上回った当該第１単位時間より後に生ずる新たな第１単位時間における前記身体の位置の変化量が閾値以下に戻った場合に、当該新たな第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用することを含む、請求項１又は請求項２に記載のコンピュータプログラム。
4. 前記第２の動作は、前記身体の位置の変化量が閾値を上回った当該第２単位時間より後に生ずる新たな第２単位時間における前記身体の位置の変化量が閾値以下に戻った場合に、当該新たな第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用することを含む、請求項１から請求項３のいずれかに記載のコンピュータプログラム。
5. 前記第１の動作において使用される前記第１単位時間が変更可能である、請求項１から請求項４のいずれかに記載のコンピュータプログラム。
6. 前記第２の動作において使用される前記第１単位時間及び／又は前記第２単位時間が変更可能である、請求項１から請求項５のいずれかに記載のコンピュータプログラム。
7. 前記位置情報に基づいて算出された前記身体の有効な位置を仮想的な空間における前記身体の位置に変換し、
   前記動作情報に基づいて算出された前記複数の部位の各々の位置を仮想的な空間における該複数の部位の各々の位置に変換する、
   ように前記少なくとも１つのプロセッサを機能させる、請求項１から請求項６のいずれかに記載のコンピュータプログラム。
8. 前記仮想的な空間における前記身体の位置、及び、前記仮想的な空間における前記複数の部位の各々の位置に基づいて、前記配信者のアバターのアニメーションを含む動画を生成する、
   ように前記少なくとも１つのプロセッサを機能させる、請求項７に記載のコンピュータプログラム。
9. 前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む、請求項１から請求項８のいずれかに記載のコンピュータプログラム。
10. 取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する、
    ように前記少なくとも１つのプロセッサを機能させる、請求項１から請求項９のいずれかに記載のコンピュータプログラム。
11. 前記少なくとも１つのプロセッサが、スタジオに設置される端末装置、前記配信者の端末装置、視聴ユーザの端末装置、及び／又は、サーバ装置に搭載される、請求項１から請求項１０のいずれかに記載のコンピュータプログラム。
12. 少なくとも１つのプロセッサを具備し、
    該少なくとも１つのプロセッサが、
    物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得し、
    前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得し、
    前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出し、
    前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出し、
    第１の動作又は第２の動作を実行する、ように構成され、
    前記第１の動作が、
    第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
    前記第１単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
    前記第１単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
    算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含み、
    前記第２の動作が、
    第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
    前記第１単位時間より長い第２単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
    前記第２単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
    算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含む、ことを特徴とするサーバ装置。
13. 前記第１の動作及び前記第２の動作の各々は、算出された前記複数の部位の位置を、前記有効な位置として使用可能であると判断された前記身体の位置と前回有効な位置として使用可能であると判断された前記身体の位置との差に基づいてシフトすることを含む、請求項１２に記載のサーバ装置。
14. 前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む、請求項１２又は請求項１３に記載のサーバ装置。
15. 取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する、
    ように前記少なくとも１つのプロセッサを機能させる、請求項１２から請求項１４のいずれかに記載のサーバ装置。
16. コンピュータにより読み取り可能な命令を実行する少なくとも１つのプロセッサにより実行される方法であって、
    該少なくとも１つのプロセッサが、前記命令を実行することにより、
    物理的な空間に存在する配信者の身体における複数の部位に取り付けられた複数の第１センサから出力された該複数の部位の各々の動作に関する動作情報を取得する第１取得工程と、
    前記配信者の身体に取り付けられた少なくとも１つの第２センサから出力された該身体の位置に関する位置情報を取得する第２取得工程と、
    前記動作情報に基づいて前記物理的な空間における前記複数の部位の各々の位置を算出する第１算出工程と、
    前記位置情報に基づいて前記物理的な空間における前記身体の位置を算出する第２算出工程と、
    第１の動作又は第２の動作を実行する工程と、を含み、
    前記第１の動作が、
    第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
    前記第１単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
    前記第１単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第１単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
    算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含み、
    前記第２の動作が、
    第１単位時間ごとに前記位置情報に基づいて前記身体の位置を算出し、
    前記第１単位時間より長い第２単位時間における前記身体の位置の変化量が閾値以下である場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を有効な位置として使用可能であると判断し、
    前記第２単位時間における前記身体の位置の変化量が閾値を上回った場合に、当該第２単位時間に前記位置情報に基づいて算出された前記身体の位置を破棄し、
    算出された前記複数の部位の各々の位置を、前記有効な位置として使用可能であると判定された前記身体の位置に基づいて補正する、ことを含む、ことを特徴とする方法。
17. 前記第１の動作及び前記第２の動作の各々は、算出された前記複数の部位の位置を、前記有効な位置として使用可能であると判断された前記身体の位置と前回有効な位置として使用可能であると判断された前記身体の位置との差に基づいてシフトすることを含む、請求項１６に記載の方法。
18. 各工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行される、請求項１６又は請求項１７に記載の方法。
19. 前記第１取得工程及び前記第２取得工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行され、
    前記第１算出工程及び前記第２算出工程が、前記スタジオに設置された端末装置又は前記配信者の端末装置に接続されるサーバ装置に搭載された、前記少なくとも１つのプロセッサにより実行される、請求項１６又は請求項１７に記載の方法。
20. 前記第１取得工程及び前記第２取得工程が、スタジオに設置された端末装置又は前記配信者の端末装置に搭載された前記少なくとも１つのプロセッサにより実行され、
    前記第１算出工程及び前記第２算出工程が、前記スタジオに設置された端末装置又は前記配信者の端末装置に対してサーバ装置を介して接続される端末装置に搭載された、前記少なくとも１つのプロセッサにより実行される、請求項１６又は請求項１７に記載の方法。
21. 各工程が、スタジオに設置された端末装置又は前記配信者の端末装置に対してサーバ装置を介して接続される端末装置に搭載された、前記少なくとも１つのプロセッサにより実行される、請求項１６又は請求項１７に記載の方法。
22. 前記少なくとも１つのプロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ及び／又はグラフィックスプロセッシングユニット（ＧＰＵ）を含む、請求項１６から請求項２１のいずれかに記載の方法。
23. 前記少なくとも１つのプロセッサが、前記命令を実行することにより、取得された前記動作情報及び／又は前記位置情報を記憶部に記憶する、請求項１６から請求項２２のいずれかに記載の方法。

Images