JP7323900B1 - プログラム、情報処理方法、及び情報処理装置 - Google Patents

プログラム、情報処理方法、及び情報処理装置 Download PDF

Info

Publication number
JP7323900B1
JP7323900B1 JP2022104194A JP2022104194A JP7323900B1 JP 7323900 B1 JP7323900 B1 JP 7323900B1 JP 2022104194 A JP2022104194 A JP 2022104194A JP 2022104194 A JP2022104194 A JP 2022104194A JP 7323900 B1 JP7323900 B1 JP 7323900B1
Authority
JP
Japan
Prior art keywords
user
avatar object
viewing
moving image
user device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022104194A
Other languages
English (en)
Other versions
JP2024004560A (ja
Inventor
大起 早田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GREE Inc
Original Assignee
GREE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GREE Inc filed Critical GREE Inc
Priority to JP2022104194A priority Critical patent/JP7323900B1/ja
Priority to US18/129,505 priority patent/US20240007700A1/en
Priority to JP2023117382A priority patent/JP2024007548A/ja
Application granted granted Critical
Publication of JP7323900B1 publication Critical patent/JP7323900B1/ja
Publication of JP2024004560A publication Critical patent/JP2024004560A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

【課題】描画の処理負荷を軽減しつつ、動画を視聴する第２ユーザが動画配信に参加する機会を増やす。【解決手段】ユーザ装置１２は、配信ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画をディスプレイに出力する第１出力制御処理と、動画を視聴する第２ユーザの動画に対するアクションが、予め定めた基準アクションに該当する場合に、第２ユーザの動作を適用しない第２アバターオブジェクトと、第１アバターオブジェクトとを含む動画をディスプレイ２８に出力する第２出力制御処理と、を実行する。【選択図】図１

Description

本発明は、プログラム、情報処理方法、及び情報処理装置に関する。
従来から、ユーザの動きに基づくアバターオブジェクトのアニメーションを含む動画を配信する情報処理システムが知られている（例えば、特許文献１参照）。このシステムでは、二体のキャラクタを含む動画をリアルタイムに生成する。また、声優の音声を動画にリアルタイムに合成して、ネットワークを通じて配信する。
特開２０１５－１８４６８９号公報
ところで、動画を配信する情報処理システムにおいては、視聴ユーザの人数の増加、若しくは、視聴時間を累積した累積視聴時間又は視聴回数の増加を図ること等を目的として、配信中の動画への視聴ユーザの参加の機会を増やすことが検討されている。
しかし、上記システムのように、複数のユーザが動画の配信に参加する場合であってもその参加人数は限られており、視聴ユーザが参加する機会の増加には至らなかった。
一態様では、情報処理装置が実行するプログラムを提供する。前記プログラムは、１又は複数のコンピュータに、第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画をディスプレイに出力する第１出力制御処理と、第２ユーザの前記動画に対するアクションが、予め定めた基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第１アバターオブジェクトよりも描画の処理負荷が小さく且つ前記第２ユーザに対応する第２アバターオブジェクト及び前記基準アクションに対応する情報を前記動画に前記第１アバターオブジェクトの表示期間よりも短い表示期間内において表示する第２出力制御処理と、を実行させる。
別の態様では、情報処理方法を提供する。前記情報処理方法は、１又は複数のコンピュータが、第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画をディスプレイに出力する第１出力制御処理と、第２ユーザの前記動画に対するアクションが、予め定めた基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第１アバターオブジェクトよりも描画の処理負荷が小さく且つ前記第２ユーザに対応する第２アバターオブジェクト及び前記基準アクションに対応する情報を前記第１アバターオブジェクトの表示期間よりも短い表示期間内において前記動画に表示する第２出力制御処理と、を実行する。
別の態様では、情報処理装置を提供する。前記情報処理装置は、第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画を、第２ユーザが用いる第２ユーザ装置から動画の視聴要求に基づき前記第２ユーザ装置のディスプレイに出力させる第１処理部と、前記第２ユーザの前記動画に対するアクションであって予め定めた基準アクションに対応する情報を前記第２ユーザ装置から取得する第２処理部と、前記第１アバターオブジェクトよりも描画の処理負荷が小さく且つ前記第２ユーザに対応する第２アバターオブジェクトを描画するためのデータを前記第２ユーザ装置から取得する第３処理部と、前記第２ユーザの前記動画に対するアクションが、前記基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第２アバターオブジェクト及び前記基準アクションに対応する情報を前記動画に前記第１アバターオブジェクトの表示期間よりも短い表示期間内において表示させる第４処理部と、を備える。
別の態様では、情報処理方法を提供する。前記情報処理方法は、１又は複数のコンピュータが、第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画を、第２ユーザが用いる第２ユーザ装置から動画の視聴要求に基づき前記第２ユーザ装置のディスプレイに出力させる第１処理と、前記第２ユーザの前記動画に対するアクションであって予め定めた基準アクションに対応する情報を前記第２ユーザ装置から取得する第２処理と、前記第１アバターオブジェクトよりも描画の処理負荷が小さく且つ第２ユーザに対応する第２アバターオブジェクトを描画するためのデータを前記第２ユーザ装置から取得する第３処理と、前記第２ユーザの前記動画に対するアクションが、前記基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第２アバターオブジェクト及び前記基準アクションに対応する情報を前記動画に前記第１アバターオブジェクトの表示期間よりも短い表示期間内において表示させる第４処理と、を実行する。
本発明によれば、描画の処理負荷を軽減しつつ、動画を視聴する視聴ユーザが動画配信に参加する機会を増加することができる。
第１実施形態における情報処理システムの一実施形態を示す模式図である。 同実施形態のユーザ管理データを示す図である。 同実施形態の本体パーツデータの構成を示す図である。 同実施形態の装着パーツデータの構成を示す図である。 同実施形態のコラボレーション配信の視聴画面を示す図である。 同実施形態の簡易アバターオブジェクトを表示するための手順を示すフローチャートである。 同実施形態のホーム画面を示す図である。 同実施形態の視聴画面を示す図である。 同実施形態の視聴画面を示す図である。 同実施形態の視聴画面を示す図である。 同実施形態の視聴画面を示す図である。 同実施形態の視聴画面を示す図である。 同実施形態の配信画面を示す図である。 第２実施形態におけるモードを切り替える手順を示すフローチャートである。 第２実施形態の視聴画面を示す図である。 他の実施形態のギフトオブジェクトを表示する手順を示すフローチャートである。
（第１実施形態）
以下、プログラム、情報処理方法、及び情報処理装置の第１実施形態について説明する。
＜情報処理システム＞
図１を参照して、情報処理システム１１について説明する。情報処理システム１１は、複数のユーザ装置１２及びサーバ１３を含む。ユーザ装置１２とサーバ１３とは、ネットワーク１４を介してデータを送受信する。ユーザ装置１２は、ユーザの入力操作に基づいて動画の配信及び視聴に必要なデータをサーバ１３から受信する。
ユーザ装置１２を用いて動画を配信するユーザを配信ユーザ、配信された動画を視聴するユーザを視聴ユーザという。ユーザは、配信ユーザ及び視聴ユーザの両方になることが可能である。つまり、ユーザは、動画を視聴する場合は視聴ユーザであり、動画を配信する場合は配信ユーザである。また、配信ユーザが用いるユーザ装置１２を配信ユーザ装置１２Ａといい、視聴ユーザが用いるユーザ装置１２を視聴ユーザ装置１２Ｂという。配信ユーザ及び視聴ユーザ、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂを区別しない場合には、単にユーザ、ユーザ装置１２という。なお、配信ユーザは特許請求の範囲の第１ユーザに対応し、視聴ユーザは特許請求の範囲の第２ユーザに対応する。また、配信ユーザ装置１２Ａは第１ユーザ装置、視聴ユーザ装置１２Ｂは第２ユーザ装置に対応する。
ユーザ装置１２は、スマートフォン（多機能電話端末）、タブレット端末、パーソナルコンピュータ、コンソールゲーム機、ウェアラブルコンピュータ、又はこれらの装置以外の動画を再生可能な情報処理装置である。ウェアラブルコンピュータは、ユーザが動画を視聴可能な画面を備えていればよく、例えばユーザの頭部に装着されるヘッドマウントディスプレイ、又は眼鏡型のウェアラブル端末等である。ユーザ装置１２は、単独で動作する装置であってもよく、互いに各種のデータを送受信可能に接続された複数の装置から構成されるものであってもよい。後者のユーザ装置１２の一例として、例えばアウトサイドイン方式のトラッキングを行うシステムがある。
ユーザ装置１２は、制御部２０、ストレージ２２（記憶媒体）、通信インターフェース（Ｉ／Ｆ）２３を備える。制御部２０は、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphic Processing Unit）、ＮＰＵ（Neural network Processing Unit）等の１又は複数の演算回路を備える。また、制御部２０は、演算回路が読み出し及び書き込みが可能な主記憶装置（記憶媒体）であるメモリを備える。メモリは、半導体メモリ等から構成される。制御部２０は、ストレージ２２又は外部ストレージからオペレーティングシステムやその他のプログラムをメモリに読み込み、メモリから取り出した命令を実行する。通信Ｉ／Ｆ２３は、ネットワーク１４を介して、サーバ１３及び他のユーザ装置１２とデータを送受信することができる。ネットワーク１４は、ローカルエリアネットワーク、インターネット等、各種のネットワークを含む。制御部２０は、特許請求の範囲の第１出力制御部、第２出力制御部に対応する。ストレージ２２は、特許請求の範囲の記憶部に対応する。
ストレージ２２は、補助記憶装置（記憶媒体）であり、例えば、磁気ディスク、光ディスク、半導体メモリ等の記憶媒体である。ストレージ２２は、複数のストレージを組み合わせて用いることもできる。
制御部２０は、ユーザの操作部２７に対する入力操作に基づいて、ストレージ２２に記録された各種プログラムを実行することにより、動画の配信に関する各処理及び視聴に関する各処理を実行する。以下、説明の便宜上、動画の配信を行う状態を配信モードといい、他の配信ユーザが配信する動画を視聴する状態を視聴モードという。
また、ユーザ装置１２は、センサユニット２４、スピーカ２５、マイク２６、操作部２７、及びディスプレイ２８を備える。センサユニット２４、スピーカ２５、マイク２６、操作部２７及びディスプレイ２８の少なくとも一つは、制御部２０と同じ装置内に設けられていてもよく、制御部２０を備える装置に接続する態様で設けられていてもよい。
センサユニット２４は、ユーザの表情の変化を示すフェイスモーション、及びセンサユニット２４に対するユーザの身体の相対位置の変化を示すボディモーションを検出する１又は複数のセンサである。フェイスモーションは、瞬きや口の開閉等の動きを含む。センサユニット２４は、公知の物を使用することができる。センサユニット２４の一例は、ユーザに向かって照射された光がユーザの顔等に反射して返ってくるまでの飛行時間（Time of Flight）を測定するＴｏＦセンサ、ユーザの顔を撮影するカメラ及びカメラが撮影したデータを画像処理する画像処理部を含むものである。また、センサユニット２４は、可視光線を撮像するＲＧＢカメラと、近赤外線を撮像する近赤外線カメラとを含んでいてもよい。ＲＧＢカメラや近赤外線カメラは、例えば「ｉＰｈｏｎｅＸ（登録商標）」のトゥルーデプス（Ｔｒｕｅ Ｄｅｐｔｈ）、又は「ｉＰａｄ Ｐｒｏ（登録商標）」等の「ＬＩＤＡＲ」（Light Detection and Ranging、又はLaser Imaging Detection and Ranging）や、スマートフォンに搭載されるその他のＴｏＦセンサを用いることが可能である。このカメラは、具体的には、ドットプロジェクタによってユーザの顔等に数万の不可視のドット（点）を投影する。そして、ドットパターンの反射光を検出し、分析して顔の深度マップを形成し、顔等の赤外線画像をキャプチャすることで、正確な顔データをキャプチャする。センサユニット２４の演算処理部は、深度マップと赤外線画像に基づいて各種の情報を生成し、その情報を登録済みの参照データと比較して、顔の各ポイントの深度（各ポイントと近赤外線カメラとの間の距離）や深度以外の位置のずれを算出する。
また、センサユニット２４は、ユーザの顔だけでなく、手をトラッキングする（ハンドトラッキング）機能を有していてもよい。また、センサユニット２４は、手以外の人間の部位の位置又は向きを検出するセンサを含んでいてもよい。センサユニット２４は、加速度センサ等の速度や加速度を検出するセンサ、ジャイロセンサ等の方向や方位を検出するセンサ等のセンサをさらに含むものであってもよい。センサユニット２４は、上記のＴｏＦセンサや公知の他のセンサの検出結果に基づきユーザが存在する現実空間の物体を認識し、認識した物体を空間地図にマッピングする空間マッピング機能を有していてもよい。以下、フェイスモーションの検出データ及びボディモーションの検出データを特に区別しないで説明する場合には単に「トラッキングデータ」という。なお、センサユニット２４の画像処理部は、制御部２０が備えていてもよい。
スピーカ２５は、音声データを音声に変換して出力する。マイク２６は、ユーザが発話した音声を入力し、音声データに変換する。ディスプレイ２８は、制御部２０の出力指示に応じて、各種画像を出力する。
操作部２７は、ユーザ装置１２の種類に応じたものを用いることができる。操作部２７の一例は、ディスプレイ２８と一体化されたタッチパネルである。また、操作部２７の他の例は、ユーザ装置１２の筐体等に設けられた操作ボタン、キーボード、マウス、ユーザが手で操作するコントローラ等である。コントローラは、加速度センサ、ジャイロ等の慣性計測センサ（ＩＭＵ：Inertial Measurement Unit）等の公知の各種のセンサを内蔵していてもよい。また、操作部２７の他の一例は、ユーザの手の動き、目の動き、頭部の動き、視線の方向等を特定するトラッキング装置であってもよい。この態様では、例えば、ユーザの手の動きに基づいて、ユーザの指示を判定し、動画の配信を開始又は終了したり、メッセージや動画への評価、所定のオブジェクト（例えば後述するギフト）の表示等の各種操作を実行したりすることができる。なお、センサユニット２４がハンドトラック機能等の入力インターフェース機能も有する場合には、操作部２７は省略可能である。
＜サーバ＞
次にサーバ１３について説明する。サーバ１３は、動画を配信するためのサービスを提供するサービス提供者等が用いるものである。サーバ１３は、制御部３０と、通信Ｉ／Ｆ３４と、ストレージ３５とを備えている。制御部３０は、１又は複数の演算回路を有している。制御部３０は、ユーザ装置１２の制御部２０と同様な構成である。また、通信Ｉ／Ｆ３４及びストレージ３５は、ユーザ装置１２と同様な構成である。サーバ１３は１つの装置から構成されていてもよく、複数の装置から構成されていてもよい。サーバ１３が複数の装置から構成される場合、それらの装置は、制御部３０の機能、ストレージ３５に格納された各種のデータを分散して備える。制御部３０は、特許請求の範囲の第１処理部、第２処理部、第３処理部、第４処理部に対応する。
＜動画の配信方式＞
動画の配信方式としては、クライアントレンダリング方式、ブラウザレンダリング方式、映像配信方式及びサーバ配信方式のうち一つを用いることができる。
クライアントレンダリング方式は、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂが動画の生成に必要な動画構成データをサーバ１３から受信して動画を描画するものである。動画構成データは、配信ユーザ装置１２Ａのセンサユニット２４が検出したトラッキングデータを含む。また、各ユーザ装置１２は、配信ユーザの発話に基づく音声データを取得し、動画と同期させて音声を出力する。この場合、各ユーザ装置１２のストレージ２２には、アプリケーションプログラムと、アバターを描画する描画データ等の各種データとが記憶される。
ブラウザレンダリング方式は、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂが、ストレージ２２に格納したウェブブラウザプログラムを用いて、動画を描画する方法である。このとき、配信ユーザ装置１２Ａは、トラッキングデータ等をサーバ１３に送信する。ユーザ装置１２は、ＨＴＭＬ（Hyper Text Markup Language）等のマークアップ言語で記述され、ＣＳＳ（Cascading Style Sheets）、ＪａｖａＳｃｒｉｐｔ（登録商標）等が用いられたウェブページをサーバ１３からダウンロードする。ユーザ装置１２で起動されたウェブブラウザプログラムは、ブラウザ上で動作するＪａｖａＳｃｒｉｐｔによってアバターオブジェクトや他のオブジェクトを描画する。ブラウザレンダリング方式では、ユーザ装置１２はサーバ１３から受信したデータを揮発性メモリに記憶し、動画を表示するためのウェブページのＵＲＬ等のデータを不揮発性メモリに記憶する。このため、アバターオブジェクトの描画データはユーザ装置１２に記憶されない。
映像配信方式は、配信ユーザ装置１２Ａが動画データを生成する方式である。視聴ユーザ装置１２Ｂは、配信ユーザ装置１２Ａから受信した動画データに基づいて動画をディスプレイ２８に表示する。具体的には、配信ユーザ装置１２Ａがトラッキングデータ等を用いて動画データを生成する。また、配信ユーザ装置１２Ａは、エンコードした動画データ及び音声データをサーバ１３に送信する。サーバ１３は、動画データ及び音声データを視聴ユーザ装置１２Ｂに送信する。
サーバ配信方式は、サーバ１３が動画データを生成する方式である。サーバ１３は、トラッキングデータ、音声データを配信ユーザ装置１２Ａから受信する。そして、サーバ１３は、それらのデータに基づいて動画データを生成する。サーバ１３は、生成した動画データを配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂに送信する。配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂは、受信した動画データに基づき動画をディスプレイ２８に出力する。
このように、ユーザ装置１２及びサーバ１３のいずれかが動画データの生成を担う。動画データの生成を担う装置は、配信方式に応じて変更可能である。ユーザ装置１２が動画データの生成を担う場合、視聴ユーザ装置１２Ｂが動画データの生成を行ってもよいし、配信ユーザ装置１２Ａが動画データの生成を行ってもよい。また、必要に応じてユーザ装置１２は、他のユーザ装置１２を送信先として、生成した動画データを送信する。
なお、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂは互いに異なる方式で動画を表示してもよい。例えば配信ユーザ装置１２Ａがクライアントレンダリング方式で動画を表示し且つ視聴ユーザ装置１２Ｂがブラウザレンダリング方式で動画を表示してもよい。
本実施形態では、各ユーザ装置１２がクライアントレンダリング方式で動画を配信する方法について説明する。
クライアントレンダリング方式では、ユーザ装置１２は、動画アプリケーションプログラムをストレージ２２に記憶している。また、ストレージ２２は、動画アプリケーションプログラムの実行に用いられるアバターオブジェクト及び他のオブジェクトの三次元モデルデータ等を記憶している。
配信ユーザ装置１２Ａの制御部２０は、センサユニット２４から取得したトラッキングデータを含む動画構成データ及びマイク２６が集音した音声に基づく音声データをサーバ１３に送信する。配信ユーザは、自身に対応するアバターオブジェクトのパーツを好みのパーツに設定することができる。動画構成データは、アバターオブジェクトのパーツを示す識別情報（パーツＩＤ）を含んでいる。また、配信ユーザは、仮想空間の仮想カメラの位置を調整可能である。動画構成データは、仮想カメラの位置を含んでいてもよい。トラッキングデータ及び音声データには、タイムスタンプが付与されている。タイプスタンプは、制御部２０の計時機能を有する回路（内部クロック）に基づく基準時間情報に基づいて生成される。又はタイムスタンプは、サーバ１３から送信される時刻情報又は時刻配信サービスを提供するサーバ１３から取得した基準時間情報に基づいて生成される。タイムスタンプは、基準とする時間からの経過時間を表していてもよいし、時刻を表していてもよい。
視聴ユーザ装置１２Ｂは、配信ユーザのアバターオブジェクトのパーツＩＤを、動画の視聴を開始したタイミング等の所定のタイミングで予め受信している。視聴ユーザ装置１２Ｂは、トラッキングデータを配信ユーザのアバターオブジェクトに適用する。また、視聴ユーザ装置１２Ｂの制御部２０は、アバターオブジェクト、アバターオブジェクト以外のオブジェクトを含めてレンダリングを行う。ここでいうレンダリングは、仮想カメラの位置の取得、透視投影、オブジェクトの各々に関連付けられた深度情報に基づく隠面消去等が含まれる描画処理をいう。レンダリングは、これらのうち少なくとも一つの処理であってもよいし、シェーディング、テクスチャマッピング等の処理を含んでいてもよい。
制御部２０は、視聴ユーザからの投稿メッセージ又は通知等のデータをサーバ１３から受信する。制御部２０は、アバターオブジェクトや他のオブジェクトの画像と、投稿メッセージや通知等を合成した動画データをディスプレイ２８に出力する。また、制御部２０は、タイムスタンプに基づいて音声データを動画データと同期させてスピーカ２５から出力する。
さらに、制御部２０は、視聴ユーザの操作に基づいて、ギフトオブジェクトの表示要求（ギフト表示要求）の送信、動画に対するメッセージの投稿、動画に対する評価（「いいね！」ボタン、又は「favorite」ボタンの選択等）を行う。
＜動画に用いられるデータの構成＞
次に図２～図４を参照して、動画の配信又は視聴に用いられる各データについて、詳述する。
図２は、ユーザ管理データ５０の一例を示す。ユーザ管理データ５０は、サーバ１３に記憶される。ユーザ管理データ５０は、ユーザの識別情報であるユーザＩＤ、コイン、ポイントのデータを含む。コインは、ユーザが購入可能な媒体である。ポイントは、動画の視聴、動画の配信等のアクションにより得ることができる媒体である。この他に、ユーザ管理データ５０は、イベントに参加することにより累積するスコアを含んでいてもよい。コイン、ポイント、スコアは、動画配信サービス内で利用することが可能である。なお、ユーザ装置１２がユーザ管理データ５０を記憶していてもよい。
図３は、アバターオブジェクトの本体パーツデータ５１の一例である。本体パーツデータ５１は、ユーザ装置１２のストレージ２２に記憶される。
本体パーツについて説明する。本体パーツは、アバターオブジェクトの部位を構成するパーツである。本体パーツを描画するデータは、ポリゴンデータ、及びアバターオブジェクトの動作を表現するための骨格データ（ボーン）、テクスチャデータ等を含む。また、本体パーツには、アバター属性が関連付けられている。アバター属性は、例えば「Ｍ型」等の男性型、「Ｆ型」等の女性型といった型式、身長、肌色、体型等である。アバター属性によって、アバターオブジェクトの骨格データ、ポリゴンデータ等が異なる。ユーザがアバター属性を選択することによって、上半身や下半身等の本体パーツが選択される。また、この本体パーツの一部は、ユーザが任意に設定することができる。例えば、ユーザは、目、口、髪型等のパーツを選択することが可能である。本実施形態では、各ユーザは、ユーザが利用可能なアバターとして３体のアバターオブジェクトを登録することが可能である。
本体パーツデータ５１は、アバターのスロット番号、型式、身長、肌色、体型、その他の本体パーツに関する情報を含む。本体パーツデータ５１は、アバターのスロット番号毎に、各種の情報を有している。型式は、ユーザが選択したアバター属性である型式である。身長、肌色、体型は、ユーザが選択した身長、肌色、体型の識別情報である。ユーザが選択する前は、身長、肌色及び体型は、初期設定のままである。ユーザは、身長、肌色及び体型の設定を変更することが可能である。パーツは、目、口、及び髪型等の個別のパーツのＩＤである。また、複数の装着パーツの中には、色が選択可能な装着パーツがある。例えば、「Ｔシャツ」である装着パーツには、「赤」、「青」、「緑」の色が選択可能である。なお、ユーザが本体パーツを選択する前は、初期設定の本体パーツが適用されている。
図４は、装着パーツデータ５２の一例を示す。装着パーツについて説明する。装着パーツは、アバターオブジェクトの所定の部位に適用されるパーツである。装着パーツは、例えば上半身に適用される「トップス」、足に適用される「靴」、下半身に適用される「スカート」等である。ユーザは、アバターオブジェクトのアバター属性に応じた複数の装着パーツから、好みの装着パーツを選択することが可能である。つまり、視聴ユーザは、スロット番号が「１」～「３」のアバターオブジェクト毎に、装着パーツを適用することができる。なお、ユーザが装着パーツを選択する前は、初期設定の装着パーツが適用されている。
装着パーツには、アバターオブジェクトの部位を示す属性データが関連付けられている。なお、装着パーツは、アバターオブジェクトの所定の部位に関連付けられるものであればよく、アバターオブジェクトの衣服類以外にも、「コップ」、「ジョッキ」、「傘」、「楽器」等であってもよい。例えば「コップ」は、アバターオブジェクトの手の部位に関連付けられている。「コップ」のパーツが手に適用されることにより「コップ」を持ったアバターオブジェクトを表示することができる。装着パーツには、アプリケーションプログラムをインストールしたときに記憶される標準のパーツと、ユーザがコインとの交換やイベントへの参加等を行うことによってサーバ１３が付与するパーツがある。
装着パーツデータ５２は、パーツＩＤ、アイテム名、部位、属性、色及び適用されるアバターオブジェクトのスロット番号を含む。パーツＩＤは、選択した装着パーツの識別情報（ＩＤ）である。アイテム名は、装着パーツの名称である。例えば、「初心者Ｔシャツ」等のアイテムの名称が記憶されている。部位は、装着パーツが適用されるアバターオブジェクトの部位である。属性は、その装着パーツが適用されるアバターの属性であり、全属性（例えば「Ａｌｌ」）、「Ｍ型」、又は「Ｆ型」が設定される。色は、装着パーツの色であって、ユーザが選択した色を示す。適用されるスロット番号は、ユーザが登録したアバターオブジェクトのうち、装着パーツが適用されるアバターオブジェクトのスロット番号を示す。
ユーザ装置１２は、装着パーツデータ５２のほか、非装着パーツデータを記憶していてもよい。非装着パーツは、仮想空間に適用される装着パーツ以外のパーツである。例えば、非装着パーツは、背景として表示される壁紙等のオブジェクトである。非装着パーツデータは、パーツ毎に、パーツＩＤ、アイテム名、色を含む。なお、非装着パーツは、適用対象のアバターオブジェクトと関連付けて記憶されていてもよい。
＜コラボレーション配信機能＞
次に、コラボレーション配信機能（共演機能）について説明する。コラボレーション配信では、配信ユーザ以外のユーザは、共演者として、自身に対応するアバターオブジェクトを配信中の動画に表示させることができる。コラボレーション配信における共演は、配信ユーザによりコラボレーション配信を許可する設定がなされた動画でのみ行うことができる。つまり、配信ユーザによって許可されたユーザは、共演者となることが可能である。コラボレーション配信は、配信ユーザに加え、１人以上所定人数以下の共演ユーザが参加できる。所定人数は例えば３人である。なお、配信ユーザのアバターオブジェクト１１０は、特許請求の範囲の第１アバターオブジェクトに対応する。
コラボレーション配信に参加するにあたり、ユーザ装置１２は、配信ユーザ装置１２Ａに参加申請を送信する。配信ユーザが参加申請を承認すると、コラボレーション配信において配信ユーザがホストユーザ、参加申請を行ったユーザがゲストユーザとなる。そして、ホストユーザに対応するホストアバターオブジェクト、及びゲストユーザに対応するゲストアバターオブジェクトが動画に表示される。
図５は、コラボレーション配信の視聴画面６０を示す。この視聴画面６０は、視聴ユーザ装置１２Ｂのディスプレイ２８に表示される。なお、配信ユーザ装置１２Ａにもほぼ同様の画面が表示される。
視聴画面６０は、ホストアバターオブジェクト６１の画像を含む。図５に示す視聴画面６０は、ホストアバターオブジェクト６１のほか、三人のゲストユーザのゲストアバターオブジェクト６２～６４を表示した例を示している。ゲストアバターオブジェクト６２は第３アバターオブジェクトに対応する。
１体目のゲストアバターオブジェクト６２は、第１ゲストユーザに対応するアバターオブジェクトである。ゲストアバターオブジェクト６２は、ホストアバターオブジェクト６１の位置７０の右側の位置７１に表示される。ホストアバターオブジェクト６１及びゲストアバターオブジェクト６２は、三次元モデルデータを用いて描画される。また、ホストアバターオブジェクト６１にはホストユーザの動作を検出したトラッキングデータが適用されている。つまり、ホストユーザの身体の動きに合わせて、ホストアバターオブジェクト６１が動作する。ゲストアバターオブジェクト６２には、第１ゲストユーザの動作を検出したトラッキングデータが適用されている。つまり、第１ゲストユーザの身体の動きに合わせて、ゲストアバターオブジェクト６２が動作する。なお、トラッキングデータが適用されるゲストアバターオブジェクト６２を、第２アバターオブジェクトという。
第１ゲストユーザの次に参加申請が承認された第２ゲストユーザのゲストアバターオブジェクト６３は、ホストアバターオブジェクト６１及びゲストアバターオブジェクト６２の後方のうち左側の位置７２に表示される。第２ゲストユーザの次に参加申請が承認された第３のゲストユーザのゲストアバターオブジェクト６４は、後方右側の位置７３に表示される。ゲストアバターオブジェクト６３，６４は、三次元モデルデータを用いて描画される。ゲストアバターオブジェクト６３には、第２ゲストユーザの動作を検出したトラッキングデータが適用されている。ゲストアバターオブジェクト６４には、第３ゲストユーザの動作を検出したトラッキングデータが適用されている。
ゲストアバターオブジェクト６２は、第１ゲストユーザの操作により退出する。又は、ゲストアバターオブジェクト６２は、表示が開始されてから所定時間が経過したとき、ゲストアバターオブジェクト６２は位置７１から自動的に退出するようにしてもよい。そして、第２ゲストユーザのゲストアバターオブジェクト６３が位置７１に配置される。また、第３ゲストユーザのゲストアバターオブジェクト６４は位置７２に配置される。さらに、共演を待機する新たなゲストアバターオブジェクトが存在する場合には、そのアバターオブジェクトが位置７３に表示される。なお、四人の許容枠において、二人の共演者のゲストアバターオブジェクト６２，６３のみが存在し、待機するゲストユーザが存在しない場合には、それらのゲストアバターオブジェクト６２，６３が表示され続けてもよい。
＜簡易アバターオブジェクトの表示機能＞
次に、視聴ユーザに対応するアバターオブジェクト１１０の表示機能について説明する。描画の処理負荷が小さく且つ視聴ユーザに対応するアバターオブジェクト１１０を、以下において簡易アバターオブジェクトという。簡易アバターオブジェクトの画像データは、ユーザ装置１２の制御部２０によって予め生成されている。簡易アバターオブジェクトは、簡易アバターオブジェクトに対応する視聴ユーザによって選択されているスロット番号のアバターオブジェクトである。このアバターオブジェクトには、その視聴ユーザによって選択された装着パーツが適用されている。換言すると、動画の配信に用いる３次元のアバターオブジェクト１１０を構成している本体パーツ及び装着パーツに基づいて生成されている。また、生成された簡易アバターオブジェクトの画像データは、ユーザ装置１２のストレージ２２に記憶されている。なお、簡易アバターオブジェクトの画像データは、サーバ１３が生成してもよい。
簡易アバターオブジェクトは、描画の処理負荷が軽減されたデータである。簡易アバターオブジェクトは、二次元オブジェクトとして描画すること、トラッキングデータを適用しないこと、及びポリゴン数を低減させることの少なくとも一つの手法を用いて処理負荷が軽減されている。さらにユーザ装置１２の処理負荷を低減するため、簡易アバターオブジェクトの画像データは、複数のパーツを一体化したものであってもよい。また、簡易アバターオブジェクトには物理的挙動を行うコンポーネントが省略されていてもよい。また、簡易アバターオブジェクトの画面上の大きさは、ホストアバターオブジェクト６１及びゲストアバターオブジェクト６２～６４の画像の大きさに比べて小さい。
本実施形態においては、簡易アバターオブジェクトは、二次元オブジェクトとして描画される。また、簡易アバターオブジェクトは、トラッキングデータが適用されない。
さらに、簡易アバターオブジェクトの表示は、配信ユーザによる許可は必要なく、視聴ユーザが予め定めた基準アクションを実行したことを契機に表示される。つまり、配信ユーザが動画の配信中に、基準アクションが実行される都度、簡易アバターオブジェクトの表示を許可する操作又は許可しない操作を実行する場合、配信ユーザの操作が煩雑になってしまう。このため、簡易アバターオブジェクトは、配信ユーザの許可を経ることなく表示される。また、簡易アバターオブジェクトはトラッキングデータが適用されないので、視聴ユーザが動画内で迷惑行為を行う可能性は低い。このため、簡易アバターオブジェクトの表示について、配信ユーザが許可を行う必要性は低い。
また、簡易アバターオブジェクトは、ＧＵＩ（Graphical User Interface）を表示するための領域に配置される。以下、この領域をＵＩ表示領域という。ＵＩ表示領域に配置されたＧＵＩは、三次元の仮想空間において最前面に表示される。
簡易アバターオブジェクトは、ＵＩ表示領域に表示されるため、仮想空間内に設定される仮想カメラに対する深度情報（Ｚ値、画面奥行方向の位置）が関連付けられていない。深度情報は、画面を表示する仮想カメラからの距離を示す。仮想カメラから遠い位置にあるオブジェクトは、深度が大きくなる。このため、簡易アバターオブジェクトを描画する際は、他の三次元オブジェクトとのレンダリングにおいて、深度テスト（隠面消去）を行う必要が無い。深度テストでは、一方のオブジェクトが他方のオブジェクトの手前にあるか又は奥にあるかを判定し、他方のオブジェクトの奥にある場合には、一方のオブジェクトの隠れていない領域を描画し、隠れている領域を描画しない。深度テストの一つの手法として、例えばＺテスト（Z‐buffering）がある。ゲストアバターオブジェクト６２～６４については深度テストを行う必要があるが、簡易アバターオブジェクトは深度情報が関連付けられていないため、深度テストを行う必要が無い。このため、ゲストアバターオブジェクト６２～６４を描画するための処理負荷よりも、簡易アバターオブジェクトを描画するための処理負荷を低減することができる。
簡易アバターオブジェクトは、視聴ユーザが以下の基準アクションを行ったことを契機にユーザ装置１２のディスプレイ２８に表示される。
・動画の視聴を開始したとき。
・動画に対して評価を行ったとき。
・メッセージを投稿したとき。
・ギフト表示要求を送信したとき。
視聴ユーザ装置１２Ｂは、視聴ユーザによる基準アクションの指示操作を受け付けると、実行された基準アクションに関連付けられた各種のデータと、簡易アバターオブジェクトの画像データとをサーバ１３に送信する。このとき、画像データではなく、簡易アバターオブジェクトを表示するための本体パーツ及び装着パーツのパーツＩＤを送信してもよい。また、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクトの画像データ又はパーツＩＤを、基準アクションの指示操作を受け付ける前に予めサーバ１３に対して送信していてもよい。
サーバ１３は、基準アクションに対応するデータと、基準アクションに対応するデータの表示要求とを配信ユーザ装置１２Ａ及び複数の視聴ユーザ装置１２Ｂに送信する。送信先の視聴ユーザ装置１２Ｂは、簡易アバターオブジェクトの画像データ等を送信した視聴ユーザ装置１２Ｂを含んでいてもよいし、含んでいなくてもよい。送信先の視聴ユーザ装置１２Ｂに、簡易アバターオブジェクトの画像データ等を送信した視聴ユーザ装置１２Ｂが含まれない場合、その視聴ユーザ装置１２Ｂは基準アクションに関連付けられた各種のデータと、簡易アバターオブジェクトの画像データに基づいて画面を表示する。
配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂは、実行された基準アクションに関連付けられた各種のデータと、簡易アバターオブジェクトの画像データとをサーバ１３から受信する。そして、それらの配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂは、ホストアバターオブジェクト６１に加え、簡易アバターオブジェクト、基準アクションに対応する情報をディスプレイ２８に出力する。
簡易アバターオブジェクト８０は、所定時間だけ動画に表示される。つまり、簡易アバターオブジェクト８０が表示される期間は、配信ユーザのアバターオブジェクト１１０が表示される期間よりも短い。又は、簡易アバターオブジェクト８０は、配信ユーザの操作又は簡易アバターオブジェクト８０に対応する視聴ユーザの操作に基づき、動画から消去されるようにしてもよい。
（動作）
次に、ユーザ装置１２及びサーバ１３の動作について説明する。
ユーザ装置１２は、第１出力制御処理、第２出力制御処理及び第３出力制御処理を行う。
第１出力制御処理では、制御部２０は、配信ユーザの動作を表すトラッキングデータを適用したアバターオブジェクト１１０を含む動画をディスプレイ２８に出力する。
第２出力制御処理では、制御部２０は、視聴ユーザの動画に対するアクションが、予め定めた基準アクションに該当する場合に、アバターオブジェクト１１０に加えて、簡易アバターオブジェクト及び基準アクションに対応する情報を動画にアバターオブジェクト１１０の表示期間よりも短い表示期間内において表示する。簡易アバターオブジェクトは、第１アバターオブジェクトよりも描画の処理負荷が小さく且つ視聴ユーザに対応する。
第３出力制御処理では、制御部２０は、動画に他のユーザが共演者として参加する場合に、配信ユーザのアバターオブジェクト１１０及び共演ユーザの動作を表すゲストアバターオブジェクト６２を含む動画をディスプレイ２８に出力する。共演ユーザのゲストアバターオブジェクト６２は、共演ユーザの動作を表すトラッキングデータが適用されている。
サーバ１３は、第１処理、第２処理、第３処理、及び第４処理を行う。
第１処理では、制御部３０は、配信ユーザの動作を表すトラッキングデータを適用したアバターオブジェクト１１０を含む動画を、視聴ユーザが用いる視聴ユーザ装置１２Ｂから動画の視聴要求に基づき視聴ユーザ装置１２Ｂのディスプレイ２８に出力させる。
第２処理では、制御部３０は、視聴ユーザの基準アクションに対応する情報を視聴ユーザ装置１２Ｂから取得する。
第３処理では、制御部３０は、配信ユーザのアバターオブジェクト１１０よりも描画の処理負荷が小さく且つ視聴ユーザに対応する簡易アバターオブジェクトを描画するためのデータを視聴ユーザ装置１２Ｂから取得する。
第４処理では、制御部３０は、視聴ユーザの動画に対するアクションが、基準アクションに該当する場合に、アバターオブジェクト１１０に加えて、簡易アバターオブジェクト及び基準アクションに対応する情報を動画にアバターオブジェクト１１０の表示期間よりも短い表示期間内において表示させる。
次に図６を参照して、視聴ユーザ装置１２Ｂが簡易アバターオブジェクトの画像データを送信する手順について詳述する。視聴ユーザ装置１２Ｂは、視聴ユーザが選択した動画の視聴を開始しているものとする。
視聴ユーザ装置１２Ｂの制御部２０は、ユーザによる操作部２７に対する入力操作に基づいて、視聴ユーザによるアクションを検知したか否かを判断する（ステップＳ１０）。アクションが無いと判断すると（ステップＳ１０：ＮＯ）、ステップＳ１４に進む。
一方、制御部２０は、視聴ユーザのアクションを検知すると（ステップＳ１０：ＹＥＳ）、視聴ユーザのアバターオブジェクトである簡易アバターオブジェクトを表示するか否かを判断する（ステップＳ１１）。具体的には、制御部２０は、検知したアクションが、簡易アバターオブジェクトを表示する基準アクションに該当するか否かを判断する。基準アクションを示すリストは、予めストレージ２２等に記憶されている。
制御部２０は、簡易アバターオブジェクトを表示しないと判断すると（ステップＳ１１：ＮＯ）、簡易アバターオブジェクトの画像データを送信せずに、アクションに応じた処理を行う（ステップＳ１３）。簡易アバターオブジェクトを表示するアクションに該当しないアクションとしては、配信ユーザのフォロー、配信動画の共有、配信動画のキャプチャ（スクリーンショット）、動画の視聴の終了等である。
一方、制御部２０は、簡易アバターオブジェクトを表示すると判断すると（ステップＳ１１：ＹＥＳ）、簡易アバターオブジェクトの画像データをサーバ１３に送信する（ステップＳ１２）。例えば、制御部２０は、視聴ユーザが動画に対して好評価を行ったとき、好評価を動画に反映する要求と、簡易アバターオブジェクトの画像データとをサーバ１３に送信する。また、制御部２０は、視聴ユーザが動画にメッセージを投稿したとき、メッセージの内容を含むデータと簡易アバターオブジェクトの画像データとをサーバ１３に送信する。さらに、制御部２０は、視聴ユーザがギフト表示要求を送信したとき、ギフト表示要求、視聴ユーザが選択したギフトオブジェクトのＩＤ、及び簡易アバターオブジェクトの画像データをサーバ１３に送信する。
ステップＳ１４において、制御部２０は、動画の配信が終了したか否かを判断する。動画の配信が終了しないと判断すると（ステップＳ１４：ＮＯ）、ステップＳ１０に戻る。動画の配信を終了すると判断すると（ステップＳ１４：ＹＥＳ）、処理を終了する。
（視聴画面）
次に図７～図１２を参照して、ユーザ装置１２がディスプレイ２８に表示する画面について説明する。
図７を参照して、ホーム画面１０１について説明する。ユーザが動画アプリケーションを起動すると、ユーザ装置１２は、配信中の動画のリストをサーバ１３から受信する。ユーザ装置１２は、リストに基づいてホーム画面１０１をディスプレイ２８に出力する。ホーム画面１０１には、視聴可能な動画を示す動画選択部１０２が表示されている。ユーザが動画選択部１０２を選択すると、ユーザ装置１２は、選択された動画のＩＤを視聴要求とともにサーバ１３に送信する。サーバ１３は、視聴ユーザ数を更新するとともに、動画を描画するための動画構成データ及び音声データをユーザ装置１２に送信する。これにより、ユーザ装置１２が視聴モードとなる。
視聴ユーザ装置１２Ｂは、動画構成データ等をサーバ１３から受信すると、動画構成データを用いて動画データを生成する。そして動画データに基づいて視聴画面１００をディスプレイ２８に出力する。
視聴画面１００及び配信ユーザ装置１２Ａに表示される配信画面は、例外を除き、アバターオブジェクト１１０を含む動画の内容はほぼ同じである。このため、図８～図１２では視聴画面１００を例示して簡易アバターオブジェクト８０の表示態様について説明する。
図８は、視聴画面１００の一例を示す。視聴画面１００は、配信ユーザに対応するアバターオブジェクト１１０の画像を含む。アバターオブジェクト１１０には、配信ユーザの動作に基づくトラッキングデータが適用されている。アバターオブジェクト１１０には、装着パーツ１１１の描画データが適用されている。仮想空間には、壁紙である非装着パーツ１２５が適用されている。また、視聴ユーザ装置１２Ｂは、アバターオブジェクト１１０のアニメーションと同期させて音声をスピーカ２５から出力する。
また、視聴画面１００は、視聴者数１１２と総ハート数１１３とを含む。視聴者数１１２は、動画を視聴した視聴者を累積した人数である。又は視聴者数１１２は、動画を視聴中の視聴者数であってもよい。また、総ハート数１１３は、動画を開始してから動画に対し視聴者が好評価を行った回数である。
また、視聴画面１００は、視聴ランキングボタン１１４、配信ユーザランキングボタン１１５、共有ボタン１１６、及びフォローボタン１１７を含む。視聴ランキングボタン１１４を視聴ユーザが操作することで、視聴ユーザ装置１２Ｂは、その配信ユーザが配信する動画を視聴したことのある視聴ユーザにおいて、ギフトの送付数に基づく視聴ユーザの順位を表示する。配信ユーザランキングボタン１１５は、動画を配信する全ての配信ユーザにおいて、ギフトオブジェクトを受け取った数に基づく配信ユーザの順位を表示する。例えば、この順位は、全ての配信ユーザを対象に算出されたものである。また、順位は、「花束」等のギフトオブジェクトの種類毎に、ギフトオブジェクトを受け取った数の多い順に並べた順位である。
共有ボタン１１６を視聴ユーザが選択することで、視聴ユーザ装置１２Ｂは動画のリンク（ＵＲＬ）を他のソーシャルネットワークサービスで送信すること、リンクのコピー、又は相互にフォローしているユーザのフォローリストの読み出し等を行う。フォローボタン１１７を視聴ユーザが選択することで、サーバ１３はこの視聴ユーザとこの動画を配信する配信ユーザとを関連付ける。
また、視聴画面１００は、メッセージ入力部１１８及びメッセージ表示部１１９を含む。メッセージ入力部１１８は、視聴ユーザが配信ユーザに対するメッセージを送信することが可能である入力フォームである。メッセージ表示部１１９は、各視聴ユーザ装置１２Ｂが送信したメッセージ、又は視聴ユーザのアクションに基づきサーバ１３が送信した定型のメッセージである。メッセージ表示部１１９は、最新のものが最も上方（又は下方）になるように表示され、新たなメッセージ表示部１１９が追加されると下方（又は上方）に移動し、メッセージ表示部１１９の表示可能領域の下方（又は上方）まで到達すると消去される。
また、視聴画面１００は、カメラボタン１２０、好評価ボタン１２１及びギフトボタン１２２を含む。カメラボタン１２０が選択操作されると視聴ユーザ装置１２Ｂは表示している視聴画面１００をキャプチャする。また、キャプチャした視聴画面１００を、ストレージ２２に記憶する。好評価ボタン１２１が選択操作されると、視聴ユーザ装置１２Ｂは、例えばハートマーク等の好評価を示す指標を視聴画面１００に表示する。また、視聴ユーザ装置１２Ｂは好評価を反映する要求をサーバ１３に送信する。サーバ１３は好評価を反映する要求を受信すると、総ハート数１１３を更新する。視聴ユーザは、対価の支払いを行うことなく好評価を示す指標を動画に表示することができる。
ギフトボタン１２２が選択操作されると、視聴ユーザ装置１２Ｂは、ギフトの一覧を視聴画面１００に重ねて表示する。その視聴ユーザ装置１２Ｂを用いる視聴ユーザはギフトの一覧からギフトを選択する。視聴ユーザ装置１２Ｂは、選択されたギフトのギフトＩＤ及びギフト表示要求をサーバ１３に送信する。また、その視聴ユーザ装置１２Ｂは、ギフトＩＤ及びギフト表示要求をサーバ１３から受信すると、ギフトＩＤに対応するギフトオブジェクトをアバターオブジェクト１１０とともに描画する。視聴ユーザは、対価の支払いを行ってギフトオブジェクトを動画に表示する。ギフトオブジェクトに対して支払われうる対価は、コイン及びポイントである。上述したようにコインはユーザが購入するものであるため、コインが支払われるギフトオブジェクトは有償オブジェクトである。ポイントは、動画に関するユーザのアクションに基づきユーザが獲得できるものである。このため、ポイントが支払われるギフトオブジェクトは無償オブジェクトである。
上述したように、視聴ユーザ装置１２Ｂは、その視聴ユーザ装置１２Ｂを用いる視聴ユーザのアクションが基準アクションに該当する場合に、簡易アバターオブジェクト８０を表示する。視聴ユーザ装置１２Ｂは、動画アプリケーションプログラムを起動したとき、又は動画の視聴を開始したとき等のタイミングで、簡易アバターオブジェクト８０の画像データの生成処理を行う。具体的には、スロット番号が「１」～「３」のアバターオブジェクト１１０のうち、その視聴ユーザが選択しているアバターオブジェクト１１０のパーツＩＤ又は画像データを取得する。このとき取得されたアバターオブジェクト１１０の画像データには、その視聴ユーザが予め適用した装着パーツ１１１が適用されている。つまり、視聴ユーザは、自身の簡易アバターオブジェクト８０が動画に表示されることから、簡易アバターオブジェクト８０に適用される装着パーツを配信ユーザに合わせたり、現実世界の季節に合わせたものとしたりする等の工夫をすることが可能となる。
そして制御部２０は、画像データの軽量化を行う。上述したように、例えば、視聴ユーザ装置１２Ｂは、アバターオブジェクト１１０の画像データを二次元化する。また、アバターオブジェクト１１０の大きさよりも簡易アバターオブジェクト８０を小さくする。その視聴ユーザ装置１２Ｂは簡易アバターオブジェクト８０の画像データを生成してストレージ２２に記憶する。そして、その視聴ユーザ装置１２Ｂを用いる視聴ユーザが基準アクションを行ったとき、簡易アバターオブジェクト８０の画像データをストレージ２２から読み出してサーバ１３に送信する。
なお、簡易アバターオブジェクト８０の画像データの生成処理は、サーバ１３が行ってもよい。このときサーバ１３は、視聴ユーザ装置１２Ｂから、本体パーツのＩＤ及び装着パーツのＩＤを受信するとともに、これらのＩＤに基づいて簡易アバターオブジェクト８０の画像データを生成する。又は、簡易アバターオブジェクト８０の画像データの生成処理は、各視聴ユーザ装置１２Ｂが視聴画面１００を描画する際に生成するようにしてもよい。この場合、視聴ユーザ装置１２Ｂは、アクションを行った視聴ユーザの視聴ユーザ装置１２Ｂから、サーバ１３を介して、本体パーツのＩＤ及び装着パーツのＩＤを受信するとともに、これらのＩＤに基づいて簡易アバターオブジェクト８０の画像データを生成する。
図８に示す視聴画面１００では、動画の視聴を開始した視聴ユーザの簡易アバターオブジェクト８０が表示されている。視聴ユーザ装置１２Ｂは、他の視聴ユーザが視聴を開始した場合、サーバ１３からその他の視聴ユーザに対応する簡易アバターオブジェクト８０の画像データを受信して、簡易アバターオブジェクト８０を表示する。また、視聴ユーザ装置１２Ｂは、当該視聴ユーザ装置１２Ｂを用いる視聴ユーザが動画の視聴を開始したとき、簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。また、ストレージ２２から読み出した簡易アバターオブジェクト８０の画像をディスプレイ２８に表示するか、又は、サーバ１３から受信した簡易アバターオブジェクト８０の画像データに基づいて簡易アバターオブジェクト８０の画像を表示する。
視聴画面１００は表示スペースが限られているため、多数の簡易アバターオブジェクト８０をレイアウトすることが難しい。よって、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０を１つずつ表示する。このとき、簡易アバターオブジェクト８０の画像は、「入室しました」等のメッセージ表示部１１９に関連付けられていることが判別可能となるように表示される。図８の例では、メッセージ表示部１１９の外側であって、視聴画面１００の上下方向におけるメッセージ表示部１１９の位置と同じ位置に表示される。
例えば、視聴ユーザ装置１２Ｂは、サーバ１３から、簡易アバターオブジェクト８０の画像データを受信した順序に基づいて簡易アバターオブジェクト８０を表示する。視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、動画の視聴を開始したことを表すメッセージ表示部１１９と同じタイミングで出力する。また、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、メッセージ表示部１１９に隣接させて一定期間表示する。視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、メッセージ表示部１１９が消去される前に消去してもよい。このようにすると、メッセージ表示部１１９を閲覧可能にしつつ、他の簡易アバターオブジェクト８０の表示スペースを確保することができる。又は、簡易アバターオブジェクト８０の画像を、メッセージ表示部１１９と同時に消去するようにしてもよい。
図９に示す視聴画面１００では、動画に対して好評価を行った視聴ユーザの簡易アバターオブジェクト８０が表示されている。視聴ユーザ装置１２Ｂは、好評価を示す指標１２９の表示要求と簡易アバターオブジェクト８０の画像データをサーバ１３から受信すると、これらに基づいて、指標１２９及び簡易アバターオブジェクト８０の画像を表示する。また、視聴ユーザ装置１２Ｂは、当該視聴ユーザ装置１２Ｂを用いる視聴ユーザが動画を好評価する操作を行った場合、指標１２９の表示要求とともに簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。
視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、好評価を行ったことを表すメッセージ表示部１１９と同じタイミングで表示する。また、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、好評価が行われたことを表すメッセージ表示部１１９に隣接させて一定期間表示する。
図１０に示す視聴画面１００では、メッセージを投稿した視聴ユーザの簡易アバターオブジェクト８０が表示されている。視聴ユーザ装置１２Ｂは、他の視聴ユーザが投稿したメッセージと簡易アバターオブジェクト８０の画像データをサーバ１３から受信すると、これらに基づいてメッセージ表示部１１９及び簡易アバターオブジェクト８０の画像を表示する。また、視聴ユーザ装置１２Ｂは、当該視聴ユーザ装置１２Ｂを用いる視聴ユーザがメッセージを投稿する操作を行った場合、メッセージとともに、簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。
視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、視聴ユーザが投稿したメッセージを示すメッセージ表示部１１９と同じタイミングで出力する。また、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、投稿されたメッセージの内容を示すメッセージ表示部１１９に隣接させて一定期間表示する。
図１１に示す視聴画面１００では、ギフトオブジェクトを贈った視聴ユーザの簡易アバターオブジェクト８０が表示されている。視聴ユーザ装置１２Ｂは、当該視聴ユーザ装置１２Ｂを用いる視聴ユーザがギフトオブジェクト１２３の表示要求を送信する操作を行った場合、ギフトＩＤとともに、視聴ユーザに対応する簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。また、視聴ユーザ装置１２Ｂは、ギフトＩＤと簡易アバターオブジェクト８０の画像データを受信すると、これらに基づいてギフトオブジェクト１２３及び簡易アバターオブジェクト８０を表示する。視聴ユーザ装置１２Ｂは、ギフトオブジェクト１２３の画像データを予めサーバ１３から受信している。
例えば、視聴ユーザ装置１２Ｂは、受信したギフトＩＤのギフトオブジェクト１２３と、簡易アバターオブジェクト８０及びメッセージ表示部１１９とを同時に表示することが好ましい。これによれば、ギフトオブジェクト１２３を贈った視聴ユーザを判別可能に表示することができる。
視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像を、メッセージ表示部１１９が消去される前に消去してもよい。このようにすると、メッセージ表示部１１９を閲覧可能にしつつ、他の簡易アバターオブジェクト８０の表示スペースを確保することができる。又は、簡易アバターオブジェクト８０の画像を、メッセージ表示部１１９と同時に消去する。
図１２に示す視聴画面１００では、配信ユーザによって視聴ユーザのプロフィールが表示されている場面を示している。配信ユーザ装置１２Ａが、配信ユーザによる視聴ユーザのプロフィールを確認するための確認操作を受け付けると、視聴ユーザのプロフィール情報をディスプレイ２８に出力する。視聴ユーザのプロフィール情報は、視聴ユーザ装置１２Ｂがストレージ２２に記憶している。また、視聴ユーザ装置１２Ｂは、視聴ユーザが動画の視聴を開始したとき、又は配信ユーザによる確認操作を受け付けたとき等の所定のタイミングで視聴ユーザのプロフィール情報をサーバ１３に送信する。
配信ユーザが視聴ユーザのプロフィールを見るとき、サーバ１３は、その視聴ユーザが用いる視聴ユーザ装置１２Ｂに対し、簡易アバターオブジェクト８０の画像データを要求する。そして、サーバ１３は、簡易アバターオブジェクト８０の画像データを受信すると、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂに簡易アバターオブジェクト８０の画像データを送信する。
視聴ユーザ装置１２Ｂは、サーバ１３から受信した画像データに基づいて、簡易アバターオブジェクト８０の画像を表示する。このとき、簡易アバターオブジェクト８０を、視聴画面１００の端から所定位置まで歩くような動作で表示してもよい。
図１３は、配信ユーザ装置１２Ａがディスプレイ２８に表示する配信画面１０３の一例を示す。配信画面１０３は、視聴画面１００と同様に簡易アバターオブジェクト８０の画像を含む。配信ユーザ装置１２Ａは、簡易アバターオブジェクト８０に関連付けて、簡易アバターオブジェクト８０に対応する視聴ユーザのプロフィール情報１３０を表示する。なお、このプロフィール情報１３０は、動画を視聴している視聴ユーザ装置１２Ｂには表示されない。これにより、視聴ユーザのプロフィールを視聴ユーザ自身の意図に反して不特定多数の他のユーザに公開することがない。また、視聴ユーザは、配信ユーザが視聴ユーザ自身のプロフィールを確認していることを把握することができる。
配信画面１０３は、視聴者数１１２、総ハート数１１３、コラボレーションをしている共演者の人数１３１を含む。共演者の人数１３１は、コラボレーション配信に参加している共演者の数を示す。
また、配信画面１０３は、共有ボタン１１６、共演者確認ボタン１３７、配信ユーザランキングボタン１１５、設定ボタン１３８、及び音声ボタン１３９を含む。コラボレーション配信中に共演者確認ボタン１３７を選択することによって、共演者のプロフィール情報１３０を見ることができる。共演者のプロフィール情報１３０を確認するときも、視聴ユーザ装置１２Ｂは図１２に示すようなプロフィール情報１３０を含まない視聴画面１００を表示する。設定ボタン１３８を選択することで、配信の設定を行うことができる。音声ボタン１３９が選択されると、配信ユーザ装置１２Ａは、音声の出力を停止（ミュート）するか、又は音声停止状態を解除する。
また、配信画面１０３は、コメントボタン１４０、撮影ボタン１４１、ゲームボタン１４２、動画視聴ボタン１４３、ガチャ実行ボタン１４４を含む。コメントボタン１４０が操作されることで、配信ユーザ装置１２Ａは、コメントを入力する入力フォームを表示する。撮影ボタン１４１が操作されることで、配信ユーザ装置１２Ａは、動画のキャプチャを行う。ゲームボタン１４２が操作されることで、配信ユーザ装置１２Ａは動画の配信中に実行可能なゲームの一覧を表示する。ゲームの実況画面は、動画に表示される。動画視聴ボタン１４３が操作されることで、配信ユーザ装置１２Ａは、他の動画配信サービスによって提供される動画を選択する画面を表示する。ガチャ実行ボタン１４４が操作されることで、配信ユーザ装置１２Ａは、実行可能な抽選（ガチャ）の一覧を表示する。
第１実施形態の効果について説明する。
（１－１）ユーザ装置１２は、視聴ユーザが基準アクションを行った場合に第２アバターオブジェクトである簡易アバターオブジェクト８０を、第１アバターオブジェクトであるアバターオブジェクト１１０を含む動画に表示する。このため、視聴ユーザが動画の配信に参加する機会を増やすことができる。また、簡易アバターオブジェクト８０は、配信ユーザのアバターオブジェクト１１０に比べ描画の処理負荷が小さいため、簡易アバターオブジェクト８０を表示する第２出力制御処理の処理負荷を低減することができる。また、簡易アバターオブジェクト８０と合わせて、基準アクションに対応するメッセージ表示部１１９を表示するため、視聴ユーザが行ったアクションを目立たせることができる。
（１－２）配信ユーザに対応するアバターオブジェクト１１０の他に、共演ユーザの動作が反映されたゲストアバターオブジェクト６２及び共演ユーザの動作が反映されないゲストアバターオブジェクト６３，６４を動画に表示させる。このため、共演ユーザは自身のアバターオブジェクト１１０の動画への表示を通じて動画の配信に参加することができる。また、簡易アバターオブジェクト８０の画面上の大きさは、配信ユーザに対応するアバターオブジェクト１１０及びゲストアバターオブジェクト６２～６４よりも小さいため、それらのアバターオブジェクト１１０の演出等を阻害しないようにすることができる。
（１－３）ゲストアバターオブジェクト６２～６４は、配信ユーザによって許可された場合に表示される。また、簡易アバターオブジェクト８０は、配信ユーザの許可を経ることなく表示することが可能である一方で、視聴ユーザの動作が反映されない。このため、配信ユーザの動画配信中の許可操作が煩雑になるのを抑制することができる。また、迷惑行為を行う可能性の低いユーザの共演のみ共演を許可することで、他のユーザによる迷惑行為を抑制することができる。
（１－４）簡易アバターオブジェクト８０は、画面の奥行方向と平行な方向において、配信ユーザのアバターオブジェクト１１０及び他のオブジェクトよりも手前に表示する。したがって、簡易アバターオブジェクト８０については、他のオブジェクトとの深度の比較等の画像処理が不要となるため、簡易アバターオブジェクト８０を表示する第２出力制御処理の負荷を軽減することができる。
（１－５）ユーザ装置１２は、簡易アバターオブジェクト８０を、視聴ユーザが行った基準アクションに対応するメッセージ表示部１１９と関連付けて表示する。このため、配信ユーザ及び視聴ユーザは、視聴ユーザが行ったアクションと簡易アバターオブジェクト８０とを紐づけることができる。
（１－６）ユーザ装置１２は、視聴ユーザが基準アクションを行った場合に加え、配信ユーザが基準アクションを実行した場合に簡易アバターオブジェクト８０を表示することができる。
（１－７）配信ユーザが視聴ユーザ又はゲストユーザのプロフィール情報を確認する操作を行った場合に、配信ユーザ装置１２Ａは、簡易アバターオブジェクト８０及びプロフィール情報１３０を表示する。一方、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０を表示し、プロフィール情報１３０は表示しない。このため、視聴ユーザのプロフィール情報が、不特定多数の他の視聴ユーザに意図せず公開されてしまうことを抑制することができる。
（第２実施形態）
次に、情報処理システムの第２実施形態について説明する。第２実施形態においては、視聴ユーザ数に応じて簡易アバターオブジェクト８０を表示する表示態様を変更する点が第１実施形態と異なる。以下、第１実施形態と同様の部分については同一符号を付してその詳細な説明を省略する。
サーバ１３の制御部３０は、視聴ユーザ数をメモリ等に記憶している。制御部３０は、視聴ユーザ装置１２Ｂから動画の視聴要求を受信すると、視聴ユーザ数を更新する。視聴ユーザ数は、動画の視聴を途中で停止した視聴ユーザを含む累積視聴ユーザ数であってもよく、動画を視聴中である視聴ユーザ数であってもよい。
サーバ１３は、視聴ユーザのアクションに基づいて簡易アバターオブジェクト８０の画像を個別に表示する第１モードと、複数の簡易アバターオブジェクト８０を同時に表示する第２モードとを切り替える。第１モードから第２モードへ切り替える切替条件は、第１モードにおいて視聴ユーザ数が第１モードの最大人数を超えたことである。
図１４を参照して、サーバ１３がモードを切り替える手順について説明する。サーバ１３の制御部３０は、視聴ユーザ数が最大人数を超えたか否かを判断する（ステップＳ２０）。制御部３０は、視聴ユーザ数が最大人数以下であると判断すると（ステップＳ２０：ＮＯ）、第１モードを維持しつつ、ステップＳ２４に進む。
制御部３０が、視聴ユーザ数が最大人数を超えたと判断すると（ステップＳ２０：ＹＥＳ）、モードを切り替えるか否かを判定する（ステップＳ２１）。制御部３０は、視聴ユーザ数が最大人数を超えたときに、モードを切替可能である通知を送信し、当該通知を配信ユーザ装置１２Ａに出力させる。そして、サーバ１３が、配信ユーザの指示操作を受け付けた配信ユーザ装置１２Ａからモードの切替要求を受信した場合に、モードを第２モードに切り替えると判定する。サーバ１３が、配信ユーザの指示操作を受け付けた配信ユーザ装置１２Ａからモードの維持する要求を受信した場合に、モードを第１モードに維持すると判定する。
制御部３０が、モードを第２モードに切り替えないと判定すると（ステップＳ２１：ＮＯ）、第１モードを維持して（ステップＳ２３）、ステップＳ２４に進む。
制御部３０が、モードを第２モードに切り替えると判定すると（ステップＳ２１：ＹＥＳ）、動画の表示態様を第２モードに切り替える（ステップＳ２２）。具体的には、制御部３０は、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂに、モード切替要求を送信する。視聴ユーザ装置１２Ｂは、モード切替要求を受信したとき又はその前の所定のタイミングで、視聴ユーザの各々に対応する簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。このとき、視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像データに代えて、簡易アバターオブジェクトのパーツＩＤを送信してもよい。
第２モードにおいて、サーバ１３は、配信ユーザ装置１２Ａから送信された動画構成データを視聴ユーザ装置１２Ｂに送信する。また、サーバ１３は、視聴ユーザ装置１２Ｂから受信した簡易アバターオブジェクト８０の画像データを、配信ユーザ装置１２Ａ及び視聴ユーザ装置１２Ｂに送信する。また、各ユーザ装置１２は、サーバ１３から受信した画像データに基づいて簡易アバターオブジェクト８０を表示する。
このとき、ユーザ装置１２は、全ての視聴ユーザの簡易アバターオブジェクト８０を表示してもよい。また、全ての視聴ユーザのうち、所定人数の簡易アバターオブジェクト８０を表示してもよい。例えば視聴ユーザが５０人以上である場合、２０人の視聴ユーザに対応する視聴ユーザの簡易アバターオブジェクト８０を表示するようにしてもよい。そして、複数回に分けて、全ての視聴ユーザの簡易アバターオブジェクト８０を表示するようにしてもよい。この場合、簡易アバターオブジェクト８０の表示が入れ替わる際に、新たに表示される複数の簡易アバターオブジェクト８０を、視聴を開始した順番で画面外から画面内に入るように行進させるように表示してもよい。言い換えると、新たに表示される複数の簡易アバターオブジェクト８０を一方向に移動させてもよい。同様に、簡易アバターオブジェクト８０の表示が入れ替わる際に、退出する複数の簡易アバターオブジェクト８０を画面外に行進させるように表示してもよい。
また、ユーザ装置１２は、第２モードにおける簡易アバターオブジェクト８０の描画処理の負荷を、第１モードにおける簡易アバターオブジェクト８０の描画処理の負荷よりも小さくしてもよい。又はサーバ１３が各ユーザ装置１２に簡易アバターオブジェクト８０の画像データを送信する際に描画処理の負荷を小さくして送信するようにしてもよい。例えば、第２モードにおける簡易アバターオブジェクト８０を、個別のオブジェクトではなく、複数の簡易アバターオブジェクト８０をまとめた画像データとして表示してもよい。
サーバ１３は、動画の配信が終了したか否かを判断する（ステップＳ２４）。サーバ１３が動画の配信を終了していないと判断すると（ステップＳ２４：ＮＯ）、ステップＳ２０に戻る。また、サーバ１３が動画の配信を終了したと判断すると（ステップＳ２４：ＹＥＳ）、この処理を終了する。
なお、第１モードから第２モードに切り替える条件となる視聴ユーザ数が、視聴中の視聴ユーザ数である場合、第２モードに移行した後に視聴ユーザ数が最大人数以下となることがある。第２モードに移行にした後に視聴ユーザ数が最大人数以下になった場合に、第２モードを維持するようにしてもよい。又は、第２モードに移行にした後に視聴ユーザ数が最大人数以下になった場合に、第１モードに戻るようにしてもよい。
図１５は、第２モードの視聴画面１００である。視聴画面１００は、配信ユーザのアバターオブジェクト１１０と、複数の視聴ユーザの簡易アバターオブジェクト８０とを含む。簡易アバターオブジェクト８０は、図１５に例示するように、ステージ上に位置するアバターオブジェクト１１０の前方に並んでいてもよい。又は、アバターオブジェクト１１０を囲むように簡易アバターオブジェクト８０が並んでいてもよい。
視聴ユーザがギフト表示要求を送信するための操作を視聴ユーザ装置１２Ｂにおいて行うと、視聴ユーザ装置１２Ｂは、ギフトＩＤ、ユーザＩＤ及び簡易アバターの画像データをサーバ１３に送信する。サーバ１３は、ギフトＩＤ、ユーザＩＤ、及び簡易アバターオブジェクト８０の画像データをユーザ装置１２に送信する。このとき、サーバ１３はこの視聴ユーザの簡易アバターオブジェクト８０を他の簡易アバターオブジェクト８０よりも目立たせるようにユーザ装置１２に表示させる。例えば、簡易アバターオブジェクト８０を、配信ユーザのアバターオブジェクト１１０の隣に表示させる。アバターオブジェクト１１０がステージ上に位置する場合には、簡易アバターオブジェクト８０もステージ上に位置する。
第２実施形態によれば、第１実施形態の（１－１）～（１－７）に記載の効果に加え、以下の効果を得ることができる。
（２－１）視聴ユーザの人数が最大人数を超えたとき、複数の視聴ユーザの簡易アバターオブジェクト８０の表示を可能とする。このため、視聴ユーザが、配信ユーザのライブ会場に参加しているような演出を行うことができる。
（第３実施形態）
次に、情報処理システムの第３実施形態について説明する。第３実施形態においては、ギフトオブジェクト１２３を表示するとき、その表示要求を行った視聴ユーザが動画を視聴しているか否かに基づいて、ギフトオブジェクト１２３の表示態様を変える点が第１実施形態と異なる。以下、第１実施形態と同様の部分については同一符号を付してその詳細な説明を省略する。
図１６を参照して、サーバ１３がギフトオブジェクト１２３の表示要求をユーザ装置１２に送信する手順について説明する。以下においてギフトオブジェクト１２３の表示要求を、ギフト表示要求という。
サーバ１３は、ギフト表示要求を受信したか否かを判断する（ステップＳ３１）。このとき、サーバ１３は、ギフト表示要求と同時若しくはその前に、簡易アバターオブジェクト８０の画像データを受信している。ギフト表示要求を受信していない場合には（ステップＳ３１：ＮＯ）、ステップＳ３７に進む。サーバ１３は、ギフト表示要求を受信したと判断すると（ステップＳ３１：ＹＥＳ）、ギフトオブジェクト１２３を表示するタイミングであるか否かを判断する（ステップＳ３２）。
ここで、サーバ１３は、ギフトオブジェクト１２３の属性に合わせて、当該ギフトオブジェクト１２３を表示するタイミングを判断する。ぬいぐるみ等、特に表示タイミングが限定されない場合には、ギフト表示要求を受信することを契機として視聴ユーザ装置１２Ｂにギフトオブジェクト１２３を表示させる。装着オブジェクトである場合には、配信ユーザ装置１２Ａに装着オブジェクトであるギフトオブジェクト１２３が贈られたことを通知する。これに対し、配信ユーザが装着オブジェクトの表示を許可する操作を行ったときに、視聴ユーザ装置１２Ｂにギフトオブジェクト１２３を表示させる。但し、配信ユーザが装着オブジェクトの表示を許可することは一例である。サーバ１３は、装着オブジェクトのギフト表示要求を受信することを契機として視聴ユーザ装置１２Ｂにギフトオブジェクト１２３を表示させてもよい。
また、ギフトオブジェクト１２３の表示位置が決められている場合がある。例えば「壁紙」、「掛け軸」、「タワーケーキ」等のギフトオブジェクト１２３は、予め定められた表示位置に一定期間表示されるが、既に表示位置に表示されているギフトオブジェクト１２３が消去されないと新たなギフトオブジェクト１２３を表示できない。このような場合、ギフトオブジェクト１２３に関連付けられた表示位置が空いた場合に、ギフトオブジェクト１２３を表示するタイミングであると判断する。
サーバ１３は、ギフトオブジェクト１２３を表示するタイミングではないと判断すると（ステップＳ３２：ＮＯ）、ギフトオブジェクト１２３の表示タイミングを待機する。
サーバ１３は、ギフトオブジェクト１２３を表示するタイミングであると判断すると（ステップＳ３２：ＹＥＳ）、そのギフトオブジェクト１２３を贈った視聴ユーザが動画を視聴中であるか否かを判断する（ステップＳ３３）。
サーバ１３は、ギフトオブジェクト１２３を贈った視聴ユーザが動画を視聴中であると判断すると（ステップＳ３３：ＹＥＳ）、簡易アバターオブジェクト８０及びギフトオブジェクト１２３をユーザ装置１２に表示させる（ステップＳ３４）。具体的には、サーバ１３は、ギフトＩＤ及び簡易アバターオブジェクト８０の画像データをユーザ装置１２に送信する。ユーザ装置１２は、ギフトＩＤ及び簡易アバターオブジェクト８０の画像データを受信すると、ギフトＩＤに対応するギフトオブジェクト１２３を描画するとともに、簡易アバターオブジェクト８０の画像を表示する。このとき、簡易アバターオブジェクト８０とギフトオブジェクト１２３とを同じタイミングで出力することが好ましい。又は簡易アバターオブジェクト８０の表示期間とギフトオブジェクト１２３の表示期間とが重複していることが好ましい。
一方、サーバ１３は、ギフトオブジェクト１２３を贈った視聴ユーザが動画を視聴中ではないと判断すると（ステップＳ３３：ＮＯ）、簡易アバターオブジェクト８０を表示せずに、ギフトオブジェクト１２３を表示する（ステップＳ３５）。具体的には、サーバ１３は、ギフトＩＤをユーザ装置１２に送信する。ユーザ装置１２は、ギフトＩＤを受信すると、ギフトＩＤに対応するギフトオブジェクト１２３を描画する。
つまり、視聴ユーザ装置１２Ｂがギフト表示要求を送信したタイミングと、ギフトオブジェクト１２３が表示されるタイミングとは多少のずれがあることがある。また、ギフトオブジェクト１２３の属性によってはギフトオブジェクト１２３が表示されるまでに時間を要する場合がある。そして、視聴ユーザ装置１２Ｂがギフト表示要求を送信してから、ギフトオブジェクト１２３が表示されるまでの間に、ギフトオブジェクト１２３を贈った視聴ユーザが視聴を終了する可能性がある。
本実施形態においても上記実施形態と同様に、ギフトオブジェクト１２３を贈った視聴ユーザに対応する簡易アバターオブジェクト８０を表示する。しかし、ギフトオブジェクト１２３の表示を行う前に視聴ユーザが動画の視聴を終了した場合、視聴ユーザが動画の視聴を終了しているにも関わらず簡易アバターオブジェクト８０が表示されてしまうと、視聴ユーザ又は配信ユーザが違和感を覚える可能性がある。このため、ギフトオブジェクト１２３の表示を行う前に視聴ユーザが動画の視聴を終了した場合には簡易アバターオブジェクト８０を表示しない。
ステップＳ３７において、サーバ１３は配信を終了しない場合には（ステップＳ３７：ＮＯ）、ステップＳ３１に戻り、ギフト表示要求を受信したか否かを繰り返し判断する。サーバ１３が配信を終了した場合には（ステップＳ３７：ＹＥＳ）、処理を終了する。
第３実施形態によれば、第１実施形態の（１－１）～（１－７）に記載の効果に加え、以下の効果を得ることができる。
（３－１）ユーザ装置１２は、ギフト表示要求を送信した視聴ユーザが視聴を継続している場合に、ギフトオブジェクト１２３及び簡易アバターオブジェクト８０を表示する。また、ギフト表示要求を送信した視聴ユーザが視聴を継続していない場合に、簡易アバターオブジェクト８０を表示せず、ギフトオブジェクト１２３を表示する。このため、配信ユーザや他の視聴ユーザが、視聴ユーザが退出したにもかかわらず、その視聴ユーザの簡易アバターオブジェクト８０が表示されることによる違和感を覚えることを抑制することができる。
上記各実施形態は、以下のように変更して実施することができる。上記実施形態及び以下の変更例は、技術的に矛盾しない範囲で互いに組み合わせて実施することができる。
＜ユーザ＞
・上記各実施形態では、配信ユーザは、映像に関する情報及び音声に関する情報の少なくとも一方を送信する側のユーザを意味する。例えば、配信ユーザは、単独での動画配信、複数人が参加可能なコラボ配信を実行するユーザである。又は、配信ユーザは、複数人が参加及び視聴の少なくとも一方が可能なビデオチャットまたはボイスチャット、複数人が参加及び視聴の少なくとも一方が可能な仮想空間上でのイベント（パーティなど）を主催又は開催するユーザであればよい。すなわち、配信ユーザは、ホストユーザ、主催ユーザ又は開催ユーザと言い換えることもできる。
一方で、視聴ユーザは、映像に関する情報及び音声に関する情報の少なくとも一方を受信する側のユーザを意味する。ただし、視聴ユーザは上記情報を受信するのみならず、リアクションすることも可能なユーザとすることができる。例えば、視聴ユーザは、動画配信、コラボ配信を視聴するユーザである。又は視聴ユーザは、ビデオチャット、ボイスチャットやイベントに参加及び視聴の少なくとも一方を行うユーザであればよい。そのため、視聴ユーザは、ゲストユーザ、参加ユーザ、リスナー、観覧ユーザ、応援ユーザなどと言い換えることもできる。
＜コラボレーション配信＞
・上記各実施形態では、簡易アバターオブジェクト８０を１つずつ表示するようにしたが、複数の簡易アバターオブジェクト８０を表示するようにしてもよい。この場合であっても、基準アクションのメッセージ表示部１１９と簡易アバターオブジェクト８０との対応が判別可能に表示することが好ましい。
・上記各実施形態において、配信ユーザが参加を許可した場合に、共演ユーザのコラボレーション配信への参加を可能とした。これに代えて若しくは加えて、配信ユーザが許可しなくても、共演ユーザのコラボレーション配信への参加を可能としてもよい。この場合、視聴ユーザのステータス情報が所定条件を満たしたユーザのアバターオブジェクトのみ、トラッキングデータが適用されたアバターオブジェクト１１０として表示してもよい。また、動画での活動が所定条件を満たさないユーザのアバターオブジェクトは、簡易アバターオブジェクト８０として表示される。なおステータス情報は、ユーザの動画に対する活動を示す情報や、動画に直接的又は間接的に関連するユーザの情報である。
・コラボレーション配信において、後方左側の位置及び後方右側の位置７２，７３に表示されるゲストアバターオブジェクト６３，６４は、ホストアバターオブジェクト６１及びゲストアバターオブジェクト６２に比べて描画の処理負荷が少ないオブジェクトであってもよい。例えば、ゲストアバターオブジェクト６３，６４には、第２ゲストユーザ及び第３ゲストユーザのトラッキングデータが適用されない。
また、ゲストアバターオブジェクト６３，６４を描画するデータは、ホストアバターオブジェクト６１等を描画するデータよりも、描画の処理負荷が少ない。例えば、ゲストアバターオブジェクト６３，６４を描画するデータは二次元オブジェクトを描画するデータである。つまり、ゲストアバターオブジェクト６３，６４は、二次元オブジェクトとして描画される。
ゲストアバターオブジェクト６３，６４を描画する画像データは、動画を描画する視聴ユーザ装置１２Ｂが生成したものである。又は、第２ゲストユーザ及び第３ゲストユーザが用いるユーザ装置１２から送信されたものであってもよい。
ゲストアバターオブジェクト６３，６４を描画する描画データは、ポリゴン数を低減させたデータであってもよい。ポリゴン数を低減することで画像処理の負荷を低下させることができる。又は、ゲストアバターオブジェクト６３，６４を描画する描画データは、アバターオブジェクトを構成する本体パーツ及び装着パーツ等の複数のパーツを一体化させたデータであってもよい。パーツ数を減らすことで、パーツを個々に描画するよりも画像処理の負荷を軽減することができる。
又はゲストアバターオブジェクト６３，６４では、ホストアバターオブジェクト６１に関連付けられている物理的挙動を行うコンポーネントが省略されていてもよい。例えばゲストアバターオブジェクト６３，６４と、他のオブジェクトが重なったとしても衝突判定を行わなくてもよい。
また、配信ユーザ装置１２Ａに加え、各ゲストユーザが用いるユーザ装置１２は、ゲストユーザの発話に基づく音声データをサーバ１３に送信するようにしてもよい。つまり、動画を表示するユーザ装置１２は、ホストユーザの音声及び各ゲストユーザの音声を、動画と同期させて出力する。
又は、ゲストユーザが用いるユーザ装置１２のうち、第１ゲストユーザが用いるユーザ装置１２のみ、音声データをサーバ１３に送信するようにしてもよい。ホストユーザ及び第１ゲストユーザの音声を出力するとともに、第２ゲストユーザ及び第３ゲストユーザの音声を出力しなくてもよい。
＜簡易アバターオブジェクト＞
・上記実施形態では、ユーザ装置１２は、簡易アバターオブジェクト８０を、二次元オブジェクトとして描画するとともに、視聴ユーザのトラッキングデータを適用せずに描画した。これに代えて、ユーザ装置１２は、簡易アバターオブジェクト８０を、視聴ユーザのトラッキングデータが適用された二次元オブジェクトとして描画してもよい。また、簡易アバターオブジェクト８０を、三次元オブジェクトとして描画するとともに、視聴ユーザのトラッキングデータを適用せずに描画してもよい。また、簡易アバターオブジェクト８０を、ポリゴン数を軽減した三次元オブジェクトとして描画してもよい。上記実施形態では、視聴ユーザのアバターオブジェクト１１０を２次元化したが、ユーザ装置１２は、３次元オブジェクトのアバターオブジェクト１１０に対応する簡易アバターオブジェクト８０の画像データを予め記憶していてもよい。この画像データは、アバターオブジェクト１１０を変形（デフォルメ）した画像データであってもよい。例えば、アバターオブジェクト１１０の頭部を大きくした低等身の簡易アバターオブジェクト８０に関するデータであってもよい。
・第１実施形態では、配信ユーザのフォロー、配信動画の共有、配信動画のキャプチャ（スクリーンショット）、動画の視聴の終了といった視聴ユーザのアクションが基準アクションに該当しないとした。しかし、これらのアクションの何れかが実行された場合に、簡易アバターオブジェクト８０を表示するようにしてもよい。
・簡易アバターオブジェクト８０は、視聴ユーザの動画内でのアクションに応じて変化させてもよい。簡易アバターオブジェクト８０が表示されたとき、動画を見ているユーザは簡易アバターオブジェクト８０が表示される契機がわからない場合がある。特に画面のサイズが小さいスマートフォン等においては表示できる情報に限りがある。このため、簡易アバターオブジェクト８０が表示される契機となる視聴ユーザのアクション毎に、簡易アバターオブジェクト８０が準備されていてもよい。また、簡易アバターオブジェクト８０は静止した画像でもよく、所定のモーションデータが適用されていてもよい。例えば、視聴ユーザが好評価ボタン１２１を選択した場合、「goodサイン」をした簡易アバターオブジェクト８０を表示してもよい。また、視聴ユーザがギフトボタン１２２を選択した場合、プレゼントの箱を持った簡易アバターオブジェクト８０を表示してもよい。また、視聴ユーザがメッセージを投稿した場合、封筒を持った簡易アバターオブジェクト８０を表示してもよい。また、配信ユーザ装置１２Ａがプロフィール情報１３０を表示している間は、簡易アバターオブジェクト８０が視聴ユーザのアカウント名を表示したプレートを持っていたり、手を挙げていたりしていてもよい。ユーザ装置１２は、基準アクションに応じた複数の簡易アバターオブジェクト８０の画像データを作成するとともにストレージ２２に記憶する。この態様によれば、配信ユーザ及び視聴ユーザは、簡易アバターオブジェクト８０が表示されたとき、簡易アバターオブジェクト８０が表示される契機を理解することが可能となる。
＜基準アクション＞
・上記各実施形態では、簡易アバターオブジェクト８０（第２アバターオブジェクト）を表示するシステムを、配信ユーザが配信ユーザ装置１２Ａを用いて動画を配信し、視聴ユーザが視聴ユーザ装置１２Ｂを用いて動画を視聴する情報処理システムに具体化した。これに代えて、簡易アバターオブジェクト８０を表示するシステムを、ユーザに対応するアバターオブジェクトが移動するメタバース（仮想空間）の画像をユーザ装置１２に出力するシステムに具体化してもよい。このメタバースでは、第１ユーザが会話又はパフォーマンスする小空間において、第２ユーザがこの小空間を訪問することがある。小空間は、部屋、ライブ会場等である。この態様において、他方のユーザが小空間を訪問したときに簡易アバターオブジェクト８０を表示してもよい。この場合、小空間に集合するユーザのアバターオブジェクトの数が多くなると、ユーザ装置１２の処理負荷が大きくなる。よって簡易アバターオブジェクト８０を表示することによって処理負荷を軽減することができる。
・第１実施形態では、配信ユーザがコメントを動画に投稿するアクションを基準アクションとしてもよい。コメントボタン１４０で、コメントの宛先である視聴ユーザを指定したとき、その視聴ユーザに対応する簡易アバターオブジェクト８０を配信画面及び視聴画面に表示するようにしてもよい。また、例えば配信画面に表示された視聴ランキングボタン（図示略）が配信ユーザによって選択された場合に、視聴ランキングに含まれる視聴ユーザの簡易アバターオブジェクト８０を順番に表示するようにしてもよい。
＜簡易アバターオブジェクトの表示モード＞
・第２実施形態において、視聴ユーザ数が第１モードでの最大人数を超える場合には、ユーザ装置１２は第２モードで視聴ユーザの簡易アバターオブジェクト８０を描画するようにした。これに代えて、視聴ユーザ装置１２Ｂの種類に応じて描画モードを選択するようにしてもよい。例えば、視聴ユーザ装置１２Ｂが、スマートフォンである場合には第１モードで簡易アバターオブジェクト８０を描画する。また、視聴ユーザ装置１２Ｂがパーソナルコンピュータ、ヘッドマウントディスプレイである場合には、第２モードで簡易アバターオブジェクト８０を描画する。このとき、視聴ユーザ装置１２Ｂは自身のスペック情報を取得するとともに、スペック情報が第２モードで簡易アバターオブジェクト８０を描画可能であるか否かを判定するようにしてもよい。そして、視聴ユーザ装置１２Ｂが、第２モードで簡易アバターオブジェクト８０を描画可能であると判定した場合に、第２モードに移行するようにしてもよい。
・第２実施形態において、配信ユーザのアクションに応じて描画モードを切り替えるようにしてもよい。具体的には、配信ユーザ装置１２Ａが、配信ユーザが歌っているか、会話をしているかを判断する。配信ユーザ装置１２Ａが、配信ユーザが歌っていると判断すると、第２モードでの表示要求を、サーバ１３を介して視聴ユーザ装置１２Ｂに送信する。第２モードでの表示要求を受信すると、視聴ユーザ装置１２Ｂは、予め受信した視聴ユーザの簡易アバターオブジェクト８０の画像データを用いて第２モードで簡易アバターオブジェクト８０を描画する。配信ユーザ装置１２Ａが、配信ユーザが会話していると判断すると、第１モードでの表示要求を、サーバ１３を介して視聴ユーザ装置１２Ｂに送信する。第１モードでの表示要求を受信すると、視聴ユーザ装置１２Ｂは、予め受信した視聴ユーザの簡易アバターオブジェクト８０の画像データを用いて第１モードで簡易アバターオブジェクト８０を描画する。
・上記各実施形態において、配信ユーザが参加を許可した場合に、共演ユーザのコラボレーション配信への参加を可能とした。これに代えて若しくは加えて、配信ユーザが許可しなくても、共演ユーザのコラボレーション配信への参加を可能としてもよい。この場合、動画での活動が所定条件を満たしたユーザのアバターオブジェクトのみ、トラッキングデータが適用されたアバターオブジェクト１１０として表示してもよい。また、動画での活動が所定条件を満たさないユーザのアバターオブジェクトは、簡易アバターオブジェクト８０として表示される。
＜視聴ユーザに関する所定条件＞
・上記各実施形態では、視聴ユーザのアクションに基づいて簡易アバターオブジェクト８０を描画するようにした。これに加えて、視聴ユーザのステータス情報が視聴ユーザに関する所定条件を満たす場合に簡易アバターオブジェクト８０を描画するようにしてもよい。ステータス情報は、ユーザの動画に対する活動を示す情報や、動画に直接的又は間接的に関連するユーザの情報である。動画に間接的に関連する情報とは、例えばサーバ１３が外部サーバから取得可能な情報である。サーバ１３は、外部サーバのＡＰＩ（Application Programming Interface）を用いて動画に間接的に関連する情報を取得する。
例えば、ステータス情報は配信ユーザと視聴ユーザとの友好関係を示す情報である。配信ユーザをフォローした視聴ユーザが基準アクションを実行した場合に、ユーザ装置１２がその視聴ユーザの簡易アバターオブジェクト８０を描画するようにしてもよい。つまり、視聴ユーザ装置１２Ｂ等に格納されたフォローリストに配信ユーザの識別情報が含まれていればよい。また、ステータス情報は、視聴ユーザが属するグループに関する情報であってもよい。所定の条件は、配信ユーザを応援するファンクラブや、配信ユーザが属するグループに属していることであってもよい。また、ステータス情報は、視聴ユーザの動画に対する活動を示す情報であってもよい。所定の条件は、配信ユーザの応援ランキングの所定の順位以上であることである。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、初めて動画を視聴したことである。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、視聴ユーザの累積視聴時間が所定時間以上、視聴回数が所定回数以上、特定の配信者が配信する動画の累積視聴時間が所定時間以上、視聴回数が所定回数以上であることである。累積視聴時間及び視聴回数は、特定配信者が配信する動画の累積視聴時間及び視聴回数であってもよい。また、累積視聴時間及び視聴回数は、複数の配信者が配信する動画毎の累積視聴時間及び視聴回数を合計した累積視聴時間及び視聴回数であってもよい。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、ギフト表示要求を送信した回数が所定回数以上であることである。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、メッセージの投稿回数が所定回数以上であることである。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、所定金額以上のギフトオブジェクトを贈ったことである。又は、簡易アバターオブジェクト８０を表示する視聴ユーザの条件は、課金額が基準値に到達したことである。また、簡易アバターオブジェクト８０を一度表示した後は、その簡易アバターオブジェクト８０を表示しないようにしてもよい。この場合には、簡易アバターオブジェクト８０を表示できる視聴ユーザを制限することで、表示面積が限られたスマートフォンであっても、表示の条件を満たす全ての簡易アバターオブジェクト８０を表示することができる。
・上記実施形態において、ユーザ装置１２は、複数の視聴ユーザが配信ユーザにギフトを贈る場合に、それらの視聴ユーザに対応する簡易アバターオブジェクト８０を描画するようにしてもよい。例えば、視聴ユーザ装置１２Ｂは、複数の視聴ユーザがチャットを行うグループチャットの画面を表示している。グループチャットは、テキストのチャット、音声によって会話が可能である音声チャット、及びビデオチャットのいずれか一つ、又はそれらの組み合わせである。ギフト表示要求を行う一の視聴ユーザ装置１２Ｂは、ギフトＩＤと、グループＩＤとをサーバ１３に送信する。グループＩＤに代えて、グループに属するユーザのユーザＩＤを送信するようにしてもよい。サーバ１３は、ギフト表示要求を受信すると、グループＩＤに関連付けられた視聴ユーザの視聴ユーザ装置１２Ｂに対し、簡易アバターオブジェクト８０の画像データを要求する。グループに属する視聴ユーザの視聴ユーザ装置１２Ｂは、簡易アバターオブジェクト８０の画像データをサーバ１３に送信する。サーバ１３は、受信した簡易アバターオブジェクト８０の画像データを各ユーザ装置１２に送信する。ユーザ装置１２は、ギフトＩＤに対応するギフトオブジェクトとともに、グループに属する視聴ユーザの簡易アバターオブジェクト８０を同時に描画する。又は、ユーザ装置１２は、ギフトＩＤに対応するギフトオブジェクトとともに、グループに属する視聴ユーザのうち、代表者の簡易アバターオブジェクト８０を描画する。代表者は、ギフト表示要求を行った視聴ユーザであってもよく、グループ内で予め決められた視聴ユーザであってもよい。代表者が予め決められている場合には、ユーザ装置１２又はサーバ１３に、そのユーザのユーザＩＤが記録されている。
・配信ユーザ装置１２Ａにおいて配信終了ボタンが選択操作された場合、配信ユーザのアバターオブジェクト１１０及び視聴ユーザの簡易アバターオブジェクト８０が集合した状態の画像データを生成するようにしてもよい。ユーザ装置１２は、配信ユーザのアバターオブジェクトに加え、全員又は一部の視聴ユーザの簡易アバターオブジェクト８０を動画に表示する。また、ユーザ装置１２は、画面をキャプチャして、集合写真としてディスプレイ２８に表示する。さらに、ユーザ装置１２は生成した画像データをストレージ２２に記憶する。
・上記各実施形態では、ユーザ装置１２が簡易アバターオブジェクト８０の画像データを生成し、サーバ１３に送信するようにした。これに代えて若しくは加えて、サーバ１３が画像データを生成してもよい。または、ユーザ装置１２が、動画データを生成する際に簡易アバターオブジェクト８０の画像データを生成するようにしてもよい。この場合、各視聴ユーザのアバターオブジェクト１１０の本体パーツのパーツＩＤ、装着パーツのパーツＩＤを予め取得する。簡易アバターオブジェクト８０の画像データを生成する装置は、動画の配信方式等に応じて変更が可能である。
（情報処理システム）
・センサユニット２４は、ユーザの表情の変化、頭部の動き、センサユニット２４に対するユーザの相対位置を検出した検出データを取得するとしたが、このうち少なくとも一つであってもよい。また、センサユニット２４は、ユーザの表情の変化、頭部の動き及びユーザの相対位置の少なくとも一つに加えて、若しくは代えて、頭部の動作以外の動きを検出した検出データ等のその他の検出データを取得してもよい。
・動画に表示される仮想空間は、拡張現実（ＡＲ；Augmented Reality）の空間であってもよい。例えば、視聴ユーザ装置１２Ｂのカメラが撮影した現実世界の画像に、配信ユーザ装置１２Ａから送信されたデータに基づくアバターオブジェクト及びギフトオブジェクト等のアニメーションを重ねて表示してもよい。又は、配信ユーザ装置１２Ａが、自身のカメラが撮影した現実世界の画像に、アバターオブジェクト及びギフトオブジェクト等のアニメーションを重ねて表示することによって動画を生成し、動画をエンコードしてサーバ１３に送信するようにしてもよい。
・上記各実施形態では、ユーザ装置１２は、スマートフォン、携帯電話機、タブレット端末、パーソナルコンピュータ、コンソールゲーム機、ヘッドマウントディスプレイ等のウェアラブルコンピュータ等の情報処理装置とした。これに代えて、情報処理システムを、動画配信用のスタジオに設けられたシステムとしてもよい。情報処理システムは、情報処理装置、サーバ、配信ユーザの身体に装着されるセンサユニット２４、センサユニット２４の位置を検出するトラッキングシステム、操作部２７、スピーカ２５、ディスプレイ２８を有する。トラッキングシステムは、同期用のパルスレーザ光を出射する多軸レーザエミッターを備えていてもよい。センサユニット２４は、レーザ光を検出するセンサを備え、同期パルスで同期をとりつつ、自らの位置及び向きを検出する。センサユニット２４は、例えば、HTC Corporation（登録商標）から提供されているVive Tracker（登録商標）及びVive Base Station（登録商標）を用いることができる。
・ユーザ装置１２の制御部２０は、アプリケーションプログラムの実行により、第１出力制御処理、第２出力制御処理、第３出力制御処理を実行するようにした。これらのうち少なくとも一つは、サーバ１３、又は情報処理システム１１を構成する他の装置が実行するようにしてもよい。また、サーバ１３の制御部３０は、第１処理、第２処理、第３処理及び第４処理を実行するようにした。これらのうち少なくとも一つは、ユーザ装置１２、又は情報処理システム１１を構成する他の装置が実行するようにしてもよい。
１１…情報処理システム
１２…ユーザ装置
１３…サーバ

Claims (23)

  1. １又は複数のコンピュータに、
    第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画をディスプレイに出力する第１出力制御処理と、
    第２ユーザの前記動画に対するアクションが、予め定めた基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第１アバターオブジェクトよりも描画の処理負荷が小さいアバターオブジェクトであって前記第２ユーザに対応する第２アバターオブジェクトと前記基準アクションに対応する情報とを、前記第１アバターオブジェクトの表示期間よりも短い表示期間内において前記動画に表示する第２出力制御処理と、を実行させる、プログラム。
  2. 前記コンピュータに、前記動画に他のユーザが共演者として参加する場合に、前記第１アバターオブジェクト及び前記共演者である共演ユーザの動作を表すトラッキングデータを適用した第３アバターオブジェクトを含む前記動画を前記ディスプレイに出力する第３出力制御処理をさらに実行させ、
    前記第２出力制御処理では、前記第１アバターオブジェクト及び前記第３アバターオブジェクトよりも画面上の大きさが小さい前記第２アバターオブジェクトを表示する、請求項１に記載のプログラム。
  3. 前記第２出力制御処理では、前記第１ユーザが話した音声を出力し、複数の前記共演ユーザのうち一部の前記共演ユーザが話した音声を出力しない、請求項２に記載のプログラム。
  4. 前記コンピュータに、前記第１ユーザが第１ユーザ装置において他のユーザが共演者として参加することを許可する許可操作を行ったことを条件に、前記第１アバターオブジェクト、及び前記共演者である共演ユーザの動作を表すトラッキングデータを適用した第３アバターオブジェクトを含む前記動画を前記ディスプレイに出力する第３出力制御処理をさらに実行させ、
    前記第２出力制御処理では、前記第２ユーザが前記基準アクションを実行したとの条件を満たした場合に、前記第２アバターオブジェクトを前記動画に表示する、請求項１に記載のプログラム。
  5. 前記第２出力制御処理では、前記第２アバターオブジェクトを、前記基準アクションに対応する内容を含むメッセージ表示部と関連付けて表示する、請求項１に記載のプログラム。
  6. 前記第２出力制御処理では、さらに、前記第１ユーザによる前記動画に対するアクションが前記基準アクションに該当する場合に、当該基準アクションの対象となる前記第２ユーザの前記第２アバターオブジェクトを前記動画に表示する、請求項１に記載のプログラム。
  7. 前記第１ユーザの前記基準アクションは、前記第１ユーザが用いる第１ユーザ装置が前記第２ユーザのプロフィール情報の表示要求を送信したことであり、
    前記第１ユーザ装置には前記第２ユーザのプロフィール情報及び前記第２アバターオブジェクトが表示され、前記第２ユーザが用いる第２ユーザ装置には前記第２アバターオブジェクトが表示される、請求項６に記載のプログラム。
  8. 前記第２出力制御処理では、前記第２ユーザのステータス情報が所定の条件を満たす前記第２ユーザが前記基準アクションを行った場合のみ前記第２アバターオブジェクトを表示する、請求項１に記載のプログラム。
  9. 前記第２ユーザのステータス情報は、前記第１ユーザとの友好関係を示す情報であって、前記所定の条件は、前記第２ユーザのフォローリストに前記第１ユーザの識別情報が含まれていることである、請求項８に記載のプログラム。
  10. 前記第２ユーザのステータス情報は、前記第２ユーザが属するグループに関する情報であって、前記所定の条件は、前記第２ユーザが、前記第１ユーザが含まれるグループに属していることである、請求項８に記載のプログラム。
  11. 前記第２ユーザのステータス情報は、前記動画に対する活動を示す情報であって、前記所定の条件は、前記第１ユーザが配信する前記動画を視聴した回数である視聴回数が所定回数以上、又は前記第１ユーザが配信する前記動画を視聴した時間を累積した累積視聴時間が所定時間以上であることである、請求項８に記載のプログラム。
  12. 前記第２ユーザのステータス情報は、前記動画に対する活動を示す情報であって、前記所定の条件は、前記第１ユーザが配信する前記動画に対するメッセージの投稿回数又はギフトオブジェクトの表示要求を送信した回数が所定回数以上であることである、請求項８に記載のプログラム。
  13. 前記第２ユーザのステータス情報は、前記動画に対する活動を示す情報であって、前記所定の条件は、前記第１ユーザが配信する前記動画に対する課金が基準値に到達したことである、請求項８に記載のプログラム。
  14. 前記コンピュータに、
    前記動画を視聴する前記第２ユーザの人数が所定人数を超えたかを判定する処理をさらに実行させるとともに、
    前記第２出力制御処理では、前記第２ユーザの人数が所定人数以下である場合に、複数の前記第２アバターオブジェクトを１つずつ表示し、前記第２ユーザの人数が所定人数を超えた場合に、複数の前記第２アバターオブジェクトを同じ期間内において表示する、請求項１に記載のプログラム。
  15. 前記コンピュータに、前記第１ユーザによって前記動画の配信が終了される場合に、前記第２アバターオブジェクト及び前記第１アバターオブジェクトが集合した状態を画面に表示する処理と、
    前記集合した状態を含む画面をキャプチャした画像データを記憶部に記憶する処理と、をさらに実行させる、請求項１に記載のプログラム。
  16. 前記第２出力制御処理では、ギフトオブジェクトを表示するとき、当該ギフトオブジェクトの表示要求を送信した前記第２ユーザが用いる第２ユーザ装置が視聴モードを継続している場合には前記第２アバターオブジェクト及び前記ギフトオブジェクトを表示し、前記第２ユーザ装置が前記視聴モードではない場合には前記第２アバターオブジェクトを表示せずに前記ギフトオブジェクトを表示する、請求項１に記載のプログラム。
  17. 前記基準アクションは、前記第２ユーザが用いる第２ユーザ装置が前記動画の視聴を開始したことである、請求項１～１６のいずれか１項に記載のプログラム。
  18. 前記基準アクションは、前記第２ユーザが用いる第２ユーザ装置が前記動画に対する評価に関する情報を送信したことである、請求項１～１６のいずれか１項に記載のプログラム。
  19. 前記基準アクションは、前記第２ユーザが用いる第２ユーザ装置が前記動画に対するメッセージを投稿したことである、請求項１～１６のいずれか１項に記載のプログラム。
  20. 前記基準アクションは、前記第２ユーザが用いる第２ユーザ装置が前記動画に対してギフトオブジェクトの表示要求を送信したことである、請求項１～１６のいずれか１項に記載のプログラム。
  21. １又は複数のコンピュータが、
    第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画をディスプレイに出力する第１出力制御処理と、
    第２ユーザの前記動画に対するアクションが、予め定めた基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第１アバターオブジェクトよりも描画の処理負荷が小さいアバターオブジェクトであって前記第２ユーザに対応する第２アバターオブジェクトと前記基準アクションに対応する情報とを、前記第１アバターオブジェクトの表示期間よりも短い表示期間内において前記動画に表示する第２出力制御処理と、を実行する、情報処理方法。
  22. 第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画を、第２ユーザが用いる第２ユーザ装置からの動画の視聴要求に基づき前記第２ユーザ装置のディスプレイに出力させる第１処理部と、
    前記第２ユーザの前記動画に対するアクションであって予め定めた基準アクションに対応する情報を前記第２ユーザ装置から取得する第２処理部と、
    前記第１アバターオブジェクトよりも描画の処理負荷が小さいアバターオブジェクトであって前記第２ユーザに対応する第２アバターオブジェクトを描画するためのデータを前記第２ユーザ装置から取得する第３処理部と、
    前記第２ユーザの前記動画に対するアクションが、前記基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第２アバターオブジェクトと前記基準アクションに対応する情報とを、前記第１アバターオブジェクトの表示期間よりも短い表示期間内において前記動画に表示させる第４処理部と、を備える、情報処理装置。
  23. １又は複数のコンピュータが、
    第１ユーザの動作を表すトラッキングデータを適用した第１アバターオブジェクトを含む動画を、第２ユーザが用いる第２ユーザ装置からの動画の視聴要求に基づき前記第２ユーザ装置のディスプレイに出力させる第１処理と、
    前記第２ユーザの前記動画に対するアクションであって予め定めた基準アクションに対応する情報を前記第２ユーザ装置から取得する第２処理と、
    前記第１アバターオブジェクトよりも描画の処理負荷が小さいアバターオブジェクトであって前記第２ユーザに対応する第２アバターオブジェクトを描画するためのデータを前記第２ユーザ装置から取得する第３処理と、
    前記第２ユーザの前記動画に対するアクションが、前記基準アクションに該当する場合に、前記第１アバターオブジェクトに加えて、前記第２アバターオブジェクトと前記基準アクションに対応する情報とを、前記第１アバターオブジェクトの表示期間よりも短い表示期間内において前記動画に表示させる第４処理と、を実行する、情報処理方法。
JP2022104194A 2022-06-29 2022-06-29 プログラム、情報処理方法、及び情報処理装置 Active JP7323900B1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022104194A JP7323900B1 (ja) 2022-06-29 2022-06-29 プログラム、情報処理方法、及び情報処理装置
US18/129,505 US20240007700A1 (en) 2022-06-29 2023-03-31 Program, information processing method, and information processing device
JP2023117382A JP2024007548A (ja) 2022-06-29 2023-07-19 プログラム、情報処理方法、及び情報処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022104194A JP7323900B1 (ja) 2022-06-29 2022-06-29 プログラム、情報処理方法、及び情報処理装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023117382A Division JP2024007548A (ja) 2022-06-29 2023-07-19 プログラム、情報処理方法、及び情報処理装置

Publications (2)

Publication Number Publication Date
JP7323900B1 true JP7323900B1 (ja) 2023-08-09
JP2024004560A JP2024004560A (ja) 2024-01-17

Family

ID=87519483

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2022104194A Active JP7323900B1 (ja) 2022-06-29 2022-06-29 プログラム、情報処理方法、及び情報処理装置
JP2023117382A Pending JP2024007548A (ja) 2022-06-29 2023-07-19 プログラム、情報処理方法、及び情報処理装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023117382A Pending JP2024007548A (ja) 2022-06-29 2023-07-19 プログラム、情報処理方法、及び情報処理装置

Country Status (2)

Country Link
US (1) US20240007700A1 (ja)
JP (2) JP7323900B1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021152785A (ja) 2020-03-24 2021-09-30 グリー株式会社 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画配信システム、動画配信サーバ及び動画配信方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9218413B2 (en) * 2011-06-13 2015-12-22 Opus Deli, Inc. Venue-related multi-media management, streaming, online ticketing, and electronic commerce techniques implemented via computer networks and mobile devices
US9734463B2 (en) * 2015-12-21 2017-08-15 Opus Deli, Inc. Automated, conditional event ticketing, reservation, and promotion techniques implemented over computer networks
US9349108B2 (en) * 2011-06-13 2016-05-24 Opus Deli, Inc. Automated, conditional event ticketing and reservation techniques implemented over a computer network
US10390064B2 (en) * 2015-06-30 2019-08-20 Amazon Technologies, Inc. Participant rewards in a spectating system
US11663791B1 (en) * 2021-11-16 2023-05-30 At&T Intellectual Property I, L.P. Dynamic avatars for customer support applications
US20230260219A1 (en) * 2022-02-17 2023-08-17 Rovi Guides, Inc. Systems and methods for displaying and adjusting virtual objects based on interactive and dynamic content

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021152785A (ja) 2020-03-24 2021-09-30 グリー株式会社 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画配信システム、動画配信サーバ及び動画配信方法
JP2022089817A (ja) 2020-03-24 2022-06-16 グリー株式会社 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画配信システム、動画配信サーバ及び動画配信方法

Also Published As

Publication number Publication date
JP2024007548A (ja) 2024-01-18
JP2024004560A (ja) 2024-01-17
US20240007700A1 (en) 2024-01-04

Similar Documents

Publication Publication Date Title
JP7145266B2 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP7098676B2 (ja) 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画配信システム、動画配信サーバ及び動画配信方法
US11740766B2 (en) Information processing system, information processing method, and computer program
JP6941245B1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP7001796B1 (ja) 情報処理プログラム、情報処理方法及び情報処理システム
JP7293329B1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP2021158558A (ja) 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画管理プログラム、動画管理方法、サーバ及び動画配信システム
JP2023143963A (ja) プログラム、情報処理方法及び情報処理装置
KR102082670B1 (ko) 방송 시청을 위한 가상 현실 사용자 인터페이스 제공 방법 및 장치
JP7092930B1 (ja) プログラム、情報処理方法、サーバ及びサーバの情報処理方法
US20230252706A1 (en) Information processing system, information processing method, and computer program
JP7323900B1 (ja) プログラム、情報処理方法、及び情報処理装置
JP2022097475A (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP7357865B1 (ja) プログラム、情報処理方法、及び情報処理装置
JP7223834B2 (ja) プログラム、情報処理方法及び情報処理装置
US11704854B2 (en) Information processing system, information processing method, and computer program
JP6983980B1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP7301262B2 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
US12100085B2 (en) Information processing system, information processing method and non-transitory computer readable medium storing program
JP7550411B1 (ja) プログラム、情報処理方法、サーバ、サーバの情報処理方法及び情報処理システム
US20240152311A1 (en) Information processing system, information processing method, and computer program
JP2024139691A (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP2023098892A (ja) 情報処理システム、情報処理方法およびコンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220629

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20221205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230424

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230620

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230720

R150 Certificate of patent or registration of utility model

Ref document number: 7323900

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150