JP2021064253A - キャラクタを使ったライブ通信システム - Google Patents

Abstract

【課題】 キャラクタを介したコミュニケーションにおいて、キャラクタと視聴者の非言語コミュニケーションを深化させる。【解決手段】 配信者により操作される配信装置と視聴者により操作される視聴装置を含むライブ通信システムを想定する。配信端末は、配信者を撮像し、配信者の動作の特徴を示す動作情報を生成する。また、配信者から音声メッセージを受け付け、動作情報および音声メッセージを視聴装置に送信する。視聴装置は、動作情報に応じてキャラクタを動作させるとともに、キャラクタの動作に合わせて音声メッセージを出力する。視聴装置は、また、視聴者による飲食物オブジェクトの移動操作を受け付ける。飲食物オブジェクトがキャラクタの口に近づくと、キャラクタが飲食物オブジェクトを飲食する動画が表示される。【選択図】図１１

Description

本発明は、通信ネットワークを介した視覚的なコミュニケーション技術、に関する。

スマートフォンの普及にともない、ＳＮＳ（Social Networking Service）を介したコミュニケーションが一般化している。ＳＮＳでは、テキストだけでなく写真や動画像などさまざまなコンテンツを気軽に共有できる。ＳＮＳは、人と人との「絆（つながり）」を強く感じさせるツールである。

一方、コンピュータゲームの分野においては、ユーザがキャラクタ（コンピュータ）と会話をしながらプレイするゲームがある。ユーザは、現実には存在しないキャラクタに対して強い思い入れをもつことが多い。

特開２０１２−２３１２８１号公報

キャラクタは、ゲームデザイナーによってつくられた仮想的存在であり、人間のような実在感をもたない。その一方、キャラクタは、非実在性に起因する独特の魅力をもつ。本発明者らは、キャラクタ特有の魅力と人間同士特有の「リアルなつながり」の双方を取り込むことにより、新しいコミュニケーション方法を提案できるのではないかと考えた。

具体的には、配信者（人間）と視聴者（人間）の会話を想定する。配信者は、ちょうどテレビアニメの声優のようにキャラクタの代弁者となり、キャラクタを通して視聴者と会話する。このようなコミュニケーションを想定した場合、視聴者はキャラクタと言葉以上の関わりをもつことができれば、視聴者のキャラクタに対する思い入れをいっそう強めることができると考えられる。

本発明は、上記認識に基づいて完成された発明であり、その主たる目的は、キャラクタを介したコミュニケーションにおいて、特に、キャラクタと視聴者の非言語コミュニケーションを深化させるための技術、を提供することにある。

本発明のある態様におけるライブ通信システムは、配信者により操作される配信装置と視聴者により操作される視聴装置を含む。
配信装置は、配信者を撮像する撮像部と、配信者の撮像画像から、配信者の動作の特徴を示す動作情報を生成する動作情報生成部と、配信者から第１メッセージを受け付ける第１メッセージ取得部と、動作情報および第１メッセージを送信する送信部と、を備える。
視聴装置は、動作情報および第１メッセージを受信する受信部と、視聴装置の画面にキャラクタを動画表示させ、動作情報に応じてキャラクタを動作させる視聴キャラクタ表示部と、キャラクタの動作に合わせて第１メッセージを出力する第１メッセージ出力部と、視聴者から、飲食物オブジェクトに対する移動操作を受け付ける飲食物操作部と、視聴者による操作にしたがって、飲食物オブジェクトを移動表示させる飲食物表示部と、を備える。
視聴キャラクタ表示部は、所定の飲食条件が成立するとき、キャラクタが飲食物オブジェクトを飲食する動画を表示させる。

本発明の別の態様におけるライブ通信システムは、配信者により操作される配信装置と視聴者により操作される視聴装置を含む。
配信装置は、配信者を撮像する撮像部と、配信者の撮像画像から、配信者の動作の特徴を示す動作情報を生成する動作情報生成部と、配信装置の画面にキャラクタを動画表示させ、動作情報に応じてキャラクタを動作させる配信キャラクタ表示部と、キャラクタの口の位置座標を特定する口特定部と、飲食条件の成否を判定する飲食判定部と、配信者から第１メッセージを受け付ける第１メッセージ取得部と、動作情報および第１メッセージを送信する送信部と、を備える。
送信部は、飲食条件が成立したとき、飲食指示を動作情報の一部として送信する。
視聴装置は、動作情報および第１メッセージを受信する受信部と、視聴装置の画面にキャラクタを動画表示させ、動作情報に応じてキャラクタを動作させる視聴キャラクタ表示部と、キャラクタの動作に合わせて第１メッセージを出力する第１メッセージ出力部と、視聴者から、飲食物オブジェクトに対する移動操作を受け付ける飲食物操作部と、視聴者による操作にしたがって、飲食物オブジェクトを移動表示させる飲食物表示部と、飲食物オブジェクトの位置座標を特定する飲食物特定部と、飲食物オブジェクトの位置座標を送信する送信部と、を備える。
配信装置の飲食判定部は、キャラクタの口の位置座標と飲食物オブジェクトの位置座標の距離が第１の閾値以下であるとき飲食条件が成立したと判定する。
配信装置の送信部は、動作情報の送信に際しては、キャラクタの動画データを視聴装置への送信対象とはしない。
視聴装置の視聴キャラクタ表示部は、飲食指示が受信されたとき、キャラクタが飲食物オブジェクトを飲食する動画を表示させる。

本発明によれば、キャラクタを介した豊かなコミュニケーションを実現しやすくなる。

ライブ通信システムのハードウェア構成図である。 ライブ通信システムによる会話サービスを説明するための模式図である。 配信装置およびサーバの機能ブロック図である。 視聴装置の機能ブロック図である。 視聴装置に表示される視聴者会話画面の画面図である。 配信装置に表示される配信者会話画面の画面図である。 配信装置および視聴装置の双方においてキャラクタを表示させる処理のシーケンス図である。 配信者が体を傾けたときのキャラクタを示す画面図である。 視聴装置において飲食物オブジェクトを食べようとするキャラクタを示す画面図である。 飲食条件を説明するための模式図である。 視聴装置における飲食動画を示す画面図である。 飲み物の場合の画像変化を示す模式図である。 配信装置および視聴装置の双方においてキャラクタが飲食する様子を表示させる処理のシーケンス図である。 飲食物オブジェクトにサインオブジェクトを付加するときの画面図である。 サインオブジェクトを付加された飲食物オブジェクトをキャラクタが食べたときの画面図である。 飲食物オブジェクトの一部を分けて与えるときの様子を示す模式図である。 視聴者が投げた飲食物オブジェクトをキャラクタがキャッチするときの画面図である。

図１は、ライブ通信システム１００のハードウェア構成図である。
ライブ通信システム１００においては、サーバ１０２に対して、複数の配信装置１０４ａ、１０４ｂ・・・１０４ｍ（以下、まとめて言うときや特に区別しないときには「配信装置１０４」と総称する）および複数の視聴装置１０８ａ、１０８ｂ・・・１０８ｎ（以下、まとめて言うときや特に区別しないときには「視聴装置１０８」と総称する）がインターネット１０６を介して接続される。配信装置１０４および視聴装置１０８としては、スマートフォンを想定しているが、ラップトップＰＣなどの汎用コンピュータであってもよい。

配信装置１０４を使用するユーザを「配信者」とよぶ。視聴装置１０８を使用するユーザを「視聴者」とよぶ。配信者がサービスの提供者となり、視聴者がサービスの享受者となる。

図２は、ライブ通信システム１００による会話サービスを説明するための模式図である。
本実施形態においては、１つの配信装置１０４に対して多数の視聴装置１０８が同時接続できる。以下、１対多通信を前提として説明する。図２は、１人の配信者１１０に対して、３人の視聴者１１２ａ、１１２ｂ、１１２ｃ（以下、まとめて言うときや特に区別しないときには「視聴者１１２」と総称する）がグループで会話をする状況を想定している。

配信者１１０にはあらかじめキャラクタが対応づけられる。配信装置１０４には配信者１１０に対応づけられる配信キャラクタ１１４ａが表示される。視聴装置１０８にも視聴キャラクタ１１４ｂが表示される。配信キャラクタ１１４ａと視聴キャラクタ１１４ｂはまったく同じキャラクタである。以下、配信キャラクタ１１４ａと視聴キャラクタ１１４ｂを特に区別しないときには単に「キャラクタ１１４」とよぶ。

配信者１１０が配信装置１０４の前でしゃべると、その音声データは視聴装置１０８に一斉送信される。配信装置１０４は配信者の口の動きを検出し、配信キャラクタ１１４ａの口も動かす。また、これに連動して、視聴装置１０８は視聴キャラクタ１１４ｂの口も動かす。視聴者１１２には、配信者ではなく、あたかも視聴キャラクタ１１４ｂが自らの意思でしゃべっているように見える。いわば、配信者１１０は「声優」としてキャラクタ１１４の代弁者となる。以下、配信者１１０により入力される音声メッセージを「第１メッセージ」とよぶ。

視聴者１１２は、テキストにて視聴装置１０８にメッセージ（以下、「第２メッセージ」とよぶ）を入力する。第２メッセージは、配信装置１０４および視聴装置１０８に一斉送信される。視聴者１１２は、視聴キャラクタ１１４ｂの話を聞きながら、第２メッセージを入力することでキャラクタ１１４（配信者１１０）と会話する。

キャラクタ１１４の基本設定（キャラクタ１１４の容姿や表情変化の豊かさなど）と配信者１１０の声質や会話力によって、キャラクタ１１４の個性がかたちづくられる。

図３は、配信装置１０４およびサーバ１０２の機能ブロック図である。
配信装置１０４およびサーバ１０２の各構成要素は、ＣＰＵ（Central Processing Unit）および各種コプロセッサなどの演算器、メモリやストレージといった記憶装置、それらを連結する有線または無線の通信線を含むハードウェアと、記憶装置に格納され、演算器に処理命令を供給するソフトウェアによって実現される。コンピュータプログラムは、デバイスドライバ、オペレーティングシステム、それらの上位層に位置する各種アプリケーションプログラム、また、これらのプログラムに共通機能を提供するライブラリによって構成されてもよい。以下に説明する各ブロックは、ハードウェア単位の構成ではなく、機能単位のブロックを示している。
視聴装置１０８についても同様である。

（配信装置１０４）
配信装置１０４は、ユーザインタフェース処理部１１６、撮像部１１８、データ処理部１２０、通信部１２２およびデータ格納部１２４を含む。
通信部１２２は、通信処理を担当する。撮像部１１８は、配信者１１０を撮像する。ユーザインタフェース処理部１１６は、配信者１１０からの操作を受け付けるほか、画像表示や音声出力など、ユーザインタフェースに関する処理を担当する。データ格納部１２４はキャラクタ１１４の画像データを含む各種データを格納する。データ処理部１２０は、通信部１２２、ユーザインタフェース処理部１１６、撮像部１１８により取得されたデータおよびデータ格納部１２４に格納されているデータに基づいて各種処理を実行する。データ処理部１２０は、ユーザインタフェース処理部１１６、撮像部１１８、通信部１２２およびデータ格納部１２４のインタフェースとしても機能する。

通信部１２２は、送信部１４８と受信部１５０を含む。

ユーザインタフェース処理部１１６は、配信者１１０からの入力を受け付ける入力部１２６と配信者１１０に各種情報を出力する出力部１２８を含む。
入力部１２６は、動作検出部１３０、第１メッセージ取得部１３２、配信サイン入力部１３４および飲食物選択部１３６を含む。動作検出部１３０は、撮像部１１８を介して配信者１１０の表情や体の動きを検出する。第１メッセージ取得部１３２は、第１メッセージ（音声メッセージ）を取得する。配信サイン入力部１３４は、「飲食物オブジェクト」に対する配信者１１０からのサイン入力を受け付ける（後述）。飲食物オブジェクトの詳細は後述するが、食べ物または飲み物を表現する画像であればよく、少なくとも、一般的に人間が摂取および消化するものを表現した二次元または三次元の画像であればよい。飲食物選択部１３６は、複数の視聴者１１２から提供される複数の飲食物オブジェクトに対する選択を受け付ける。

出力部１２８は、配信キャラクタ表示部１３８、第２メッセージ出力部１４０および飲食物表示部１４２を含む。
配信キャラクタ表示部１３８は配信装置１０４に配信キャラクタ１１４ａを表示させる。第２メッセージ出力部１４０は視聴者１１２による第２メッセージ（テキストメッセージ）を配信装置１０４に表示させる。飲食物表示部１４２は視聴者１１２から提供される飲食物オブジェクトを配信装置１０４の画面に表示させる。

データ処理部１２０は、動作情報生成部１４４、飲食判定部２２０および口特定部１４６を含む。
動作情報生成部１４４は、動作検出部１３０の検出結果から「動作情報」を生成する。動作情報とは、配信者１１０の表情を示す特徴ベクトル（例：眉の角度、目や口の開度を示す数値、配信者１１０と配信装置１０４との相対的な位置関係（前後左右）を示す数値など、配信者１１０の動作状態を示す数値データである。飲食判定部２２０は、「飲食条件」の成否を判定する。飲食条件とは、キャラクタ１１４が飲食物オブジェクトを摂取したとみなすための条件であればよい。本実施形態においては、飲食物オブジェクトがキャラクタ１１４の口元に十分に近づいたときに飲食条件が成立するとして説明する（図９に関連して後述）。口特定部１４６は、キャラクタ１１４の口の位置座標を検出する（以下、「口座標」とよぶ）。配信装置１０４および視聴装置１０８は同一の画面座標系（二次元座標系）を共有する。口座標は、画面座標系（ｘｙ座標系）における口の位置座標を示す。

（サーバ１０２）
サーバ１０２は、通信部１５２、ライブ制御部１５４およびデータ格納部１５６を含む。
通信部１５２は、通信処理を担当する。データ格納部１５６は各種データを格納する。ライブ制御部１５４は、通信部１５２により取得されたデータおよびデータ格納部１５６に格納されているデータに基づいて配信装置１０４と視聴装置１０８のコミュニケーションを仲介・統括する。ライブ制御部１５４は、通信部１５２およびデータ格納部１５６のインタフェースとしても機能する。

データ格納部１５６は、複数のキャラクタ１１４のデータを格納するキャラクタ格納部１５８を含む。データ格納部１５６は、このほか飲食物オブジェクトの画像データも保存する。飲食物オブジェクトは飲食物ＩＤにより一意に識別される。

図４は、視聴装置１０８の機能ブロック図である。
視聴装置１０８は、ユーザインタフェース処理部１６２、データ処理部１６６、通信部１６４およびデータ格納部１６８を含む。
通信部１６４は、通信処理を担当する。ユーザインタフェース処理部１６２は、視聴者１１２からの操作を受け付けるほか、画像表示や音声出力など、ユーザインタフェースに関する処理を担当する。データ格納部１６８はキャラクタ１１４の画像データを含む各種データを格納する。配信装置１０４と視聴装置１０８はどちらもキャラクタ１１４のデータをそれぞれ格納する。データ処理部１６６は、通信部１６４およびユーザインタフェース処理部１６２により取得されたデータおよびデータ格納部１６８に格納されているデータに基づいて各種処理を実行する。データ処理部１６６は、ユーザインタフェース処理部１６２、通信部１６４およびデータ格納部１６８のインタフェースとしても機能する。

通信部１２２は、送信部１８６と受信部１９０を含む。

ユーザインタフェース処理部１６２は、視聴者１１２からの入力を受け付ける入力部１７０と視聴者１１２に各種情報を出力する出力部１７２を含む。
入力部１７０は、第２メッセージ取得部１７４、キャラクタ選択部１７６、飲食物操作部１７８および視聴サイン入力部２２２を含む。第２メッセージ取得部１７４は、第２メッセージ（テキストメッセージ）を取得する。キャラクタ選択部１７６は、会話対象となるキャラクタ１１４の選択を受け付ける。飲食物操作部１７８はキャラクタ１１４にプレゼントしたい飲食物オブジェクトの選択および飲食物オブジェクト２２６の移動操作を受け付ける。視聴サイン入力部２２２は、飲食物オブジェクトに対する視聴者１１２からのサイン入力を受け付ける（後述）。

出力部１７２は、視聴キャラクタ表示部１８０、第１メッセージ出力部１８２、第２メッセージ出力部１８４および飲食物表示部２２４を含む。
視聴キャラクタ表示部１８０は、視聴装置１０８に視聴キャラクタ１１４ｂを表示させる。第１メッセージ出力部１８２は配信者１１０による第１メッセージを視聴装置１０８から音声出力する。第２メッセージ出力部１８４は視聴者１１２による第２メッセージを視聴装置１０８に画面表示させる。飲食物表示部２２４は、飲食物オブジェクトを視聴装置１０８の画面に表示させる。

データ処理部１６６は、飲食物特定部２２７を含む。飲食物特定部２２７は、飲食物オブジェクトの位置座標を検出する（以下、「飲食物座標」とよぶ）。飲食物座標は、口座標と同一の画面座標系（ｘｙ座標系）における飲食物オブジェクトの位置座標を示す。

ライブ通信サービスの開始時において、サーバ１０２のライブ制御部１５４は、視聴装置１０８にキャラクタ選択画面（図示せず）を表示させる。視聴者１１２は、視聴装置１０８に表示されたキャラクタ選択画面において会話したい視聴キャラクタ１１４ｂ（配信者１１０）を選ぶ。ライブ制御部１５４は、会話可能な状態（スタンバイ状態）にある配信者１１０に対応するキャラクタ１１４を会話可能なキャラクタとしてキャラクタ選択画面に提示する。キャラクタ選択部１７６は視聴キャラクタ１１４ｂの選択を受け付ける。
以下、視聴者１１２は視聴キャラクタ１１４ｂ１（図５参照）との会話を楽しむものとして説明する。

図５は、視聴装置１０８に表示される視聴者会話画面１９６の画面図である。
視聴装置１０８の視聴キャラクタ表示部１８０は、おしゃべりの相手として選ばれた視聴キャラクタ１１４ｂ１を動画表示させる。視聴者１１２は、視聴キャラクタ１１４ｂ１との会話を楽しむ。視聴者１１２からは配信者１１０の姿が見えることはない。視聴装置１０８の第１メッセージ出力部１８２は、視聴キャラクタ１１４ｂ１を担当する配信者１１０からの音声（第１メッセージ）を出力する。視聴者１１２は、テキストにより視聴キャラクタ１１４ｂ１へのメッセージ（第２メッセージ）を入力する。サーバ１０２は、第１メッセージおよび第２メッセージを配信装置１０４、視聴装置１０８の間で共有させる。

第２メッセージ出力部１８４はメッセージ領域１９８に第２メッセージをテキスト表示させる。１人の配信者１１０が複数の視聴者１１２と同時並行にて会話する方式であるため、サーバ１０２は各視聴者１１２の第２メッセージを配信装置１０４および複数の視聴者１１２に一斉配信する。視聴者１１２は、メッセージ領域１９８により自分の第２メッセージだけでなく他の視聴者１１２の第２メッセージも視認できる。第２メッセージ出力部１８４は第２メッセージを受信順に並べて表示させる。

視聴者１１２は、飲食物ボタン２００を選択することにより、視聴キャラクタ１１４ｂ１に対して飲食物オブジェクトを提供できる（詳細後述）。

図６は、配信装置１０４に表示される配信者会話画面２０６の画面図である。
図６に示す配信者会話画面２０６は、配信キャラクタ１１４ａ１（視聴キャラクタ１１４ｂ１に対応）を担当する配信者１１０の配信装置１０４に表示される。配信キャラクタ表示部１３８は、配信キャラクタ１１４ａ１を動画表示させる。視聴キャラクタ１１４ｂ１と配信キャラクタ１１４ａは同一キャラクタであり、動きも同じである。配信者１１０は、自らの分身である配信キャラクタ１１４ａ１の動きを配信装置１０４にて確認しながら複数の視聴者１１２（視聴キャラクタ１１４ｂ１を会話の相手として選んだ視聴者１１２）と会話する。配信者１１０は、配信装置１０４に向かって音声にて第１メッセージを入力する。送信部１４８は第１メッセージをサーバ１０２に送信し、サーバ１０２のライブ制御部１５４は第１メッセージを複数の視聴装置１０８に配信する。

第２メッセージ出力部１４０は、視聴者１１２からの第２メッセージをメッセージ領域１９８に時系列順にて表示させる。配信者１１０はメッセージ領域１９８に次々に表示される第２メッセージをみながら不特定多数の視聴者１１２に話しかける。配信装置１０４のカメラ２０８（撮像部１１８）は、配信者１１０を撮像する。動作検出部１３０は、撮像画像から配信者１１０の表情および動作を検出し、動作情報生成部１４４は動作情報を生成する。配信キャラクタ表示部１３８は、動作情報に基づいて配信キャラクタ１１４ａ１の動きを決定する。また、詳細は後述するが視聴キャラクタ１１４ｂ１も同じ動作情報に基づいて視聴装置１０８にて動画表示される。

図７は、配信装置１０４および視聴装置１０８の双方においてキャラクタ１１４を表示させる処理のシーケンス図である。
配信装置１０４の動作検出部１３０は、配信者１１０の動作を検出する（Ｓ１０）。動作情報生成部１４４は、動作情報を生成する（Ｓ１２）。動作情報は、配信者１１０の表情、体の角度、配信者１１０の撮像部１１８からの遠近、などを示す数値データである（Ｓ１２）。また、動作情報には、後述の「飲食指示」も含まれる。

配信装置１０４の送信部１４８は、サーバ１０２経由にて、各視聴装置１０８に動作情報を送信する（Ｓ１４）。配信キャラクタ表示部１３８は、動作情報に基づいて配信キャラクタ１１４ａ１の動画像を生成し（Ｓ１６）、配信装置１０４に配信キャラクタ１１４ａ１を動画表示させる（Ｓ１８）。

一方、視聴装置１０８の視聴キャラクタ表示部１８０も、受信された動作情報に基づいて視聴キャラクタ１１４ｂ１の動画像を生成し（Ｓ２０）、視聴装置１０８に視聴キャラクタ１１４ｂ１を動画表示させる（Ｓ２２）。

配信キャラクタ１１４ａ１と視聴キャラクタ１１４ｂ１は、同一のキャラクタであり、かつ、同一の動作情報に基づいて動きが決まるため、配信装置１０４および視聴装置１０８それぞれにおいて配信キャラクタ１１４ａ１と視聴キャラクタ１１４ｂは同じ姿にて同じ動作を行う。

配信装置１０４は、キャラクタ１１４の動画像（キャラクタ画像）そのものを視聴装置１０８に送信しているのではなく、キャラクタ１１４の動作を定義する動作情報のみを送信している。動画像そのものを送信するよりも送信データ量が少ないため、配信キャラクタ１１４ａ１と視聴キャラクタ１１４ｂ１それぞれの動きを速やかに連動させやすい。いいかえれば、動作情報が配信キャラクタ１１４ａ１の動きとして反映されるまでの時間と、同じ動作情報が視聴キャラクタ１１４ｂ１の動きとして反映されるまでの時間の差分が小さいため、視聴者１１２はキャラクタ１１４（配信者１１０）との快適な会話を楽しむことができる。

第１メッセージ（音声メッセージ）と動作情報は一体化して配信装置１０４から視聴装置１０８に送信されてもよい。この場合には、視聴キャラクタ表示部１８０は、視聴キャラクタ１１４ｂ１の動作と音声メッセージがずれにくくなる。また、動画像そのものではなく、動画像を決定するための動作情報を送信することは、インターネット１０６に対する通信負荷を抑制する上でも有効である。

図８は、配信者１１０が体を傾けたときのキャラクタ１１４を示す画面図である。
配信者１１０が体を左右に傾けると、動作検出部１３０は体の傾斜を検出する。動作情報生成部１４４は、傾斜角および傾斜方向を動作情報に含める。視聴キャラクタ表示部１８０は、動作情報にしたがって、視聴キャラクタ１１４ｂ１を傾斜させる。配信キャラクタ表示部１３８も、同じ動作情報にしたがって配信キャラクタ１１４ａ１を傾斜させる。このように、配信者１１０が体を左右に傾けると、配信側と視聴側双方のキャラクタ１１４は配信者１１０に合わせて体を傾ける。配信者１１０が体を前後に傾けたときにも、キャラクタ１１４は同様にして体を前後させる。動作検出部１３０は、配信者１１０の前傾後傾を撮像画像に映る配信者１１０の大きさから認識すればよい。

一般的には、体の傾斜に人間の心理が現れるといわれる。たとえば、会話に興味をもっているときに人間は前傾姿勢（聞こうという体勢）になりやすく、動揺しているときには体は左右に揺れるともいわれる。配信者１１０の体の動きをキャラクタ１１４にも反映させることにより、視聴者１１２はキャラクタ１１４（配信者１１０）の心理を感じ取ることができる。

また、配信者１１０は体を動かすことでキャラクタ１１４の口の位置を変化させることができる。配信装置１０４の口特定部１４６は、配信キャラクタ１１４ａ１の口座標を適宜検出する。配信キャラクタ１１４ａ１の口座標に基づいて飲食条件の成否が判定されるが、詳細は後述する。

図９は、視聴装置１０８において飲食物オブジェクト２２６を食べようとするキャラクタ１１４を示す画面図である。
視聴者１１２は、飲食物ボタン２００をタッチすることにより（図５参照）、複数種類の飲食物オブジェクト２２６からいずれかの飲食物オブジェクト２２６を選択する。飲食物操作部１７８は、飲食物オブジェクト２２６の選択を受け付ける。図９においては、チョコレート菓子のポッキー（登録商標）を模した飲食物オブジェクト２２６が選択されている。

飲食物表示部２２４は、飲食物オブジェクト２２６を視聴装置１０８に画面表示させる。視聴装置１０８は、飲食物オブジェクト２２６の飲食物ＩＤを、サーバ１０２を経由して配信装置１０４に送信する。配信装置１０４の飲食物表示部１４２も、配信装置１０４に飲食物オブジェクト２２６を画面表示させる。これにより、配信装置１０４および視聴装置１０８の双方に同一の飲食物オブジェクト２２６が表示される。視聴装置１０８は配信装置１０４に飲食物オブジェクト２２６の画像データそのものを送信するのではなく、飲食物ＩＤを送信することで通信負荷を抑制している。

視聴者１１２は、視聴装置１０８において飲食物オブジェクト２２６にタッチすることで、飲食物オブジェクト２２６を画面上で自由に二次元移動させることができる。視聴装置１０８の飲食物操作部１７８は、飲食物オブジェクト２２６に対する視聴者１１２の移動操作を受け付ける。飲食物特定部２２７は、飲食物オブジェクト２２６の位置を示す飲食物座標を特定する。

視聴装置１０８の送信部１８６は、飲食物座標を配信装置１０４に送信する。配信装置１０４の飲食物表示部１４２は、受信した飲食物座標にしたがって飲食物オブジェクト２２６の表示位置を決定する。このため、配信装置１０４および視聴装置１０８の双方において、同一の飲食物オブジェクト２２６が同一の位置（口座標）にて表示される。視聴者１１２が、飲食物オブジェクト２２６の先端を視聴キャラクタ１１４ｂ１の口元に近づけると飲食条件が成立し、視聴キャラクタ１１４ｂ１（配信キャラクタ１１４ａ１）が飲食物オブジェクト２２６を飲食する動画像（以下、「飲食動画」とよぶ）が表示される。飲食動画は「キャラクタ１１４が飲食物オブジェクト２２６をくわえて、かじり、口を動かす動画像」としてあらかじめ配信装置１０４および視聴装置１０８の双方に用意されている。

図１０は、飲食条件を説明するための模式図である。
視聴装置１０８の飲食物特定部２２７は、飲食物オブジェクト２２６の先端部の画面における座標を飲食物座標Ｐ２として特定する。視聴装置１０８の送信部１８６は、適宜、飲食物座標Ｐ２を配信装置１０４に送信する。一方、配信装置１０４の口特定部１４６は、配信キャラクタ１１４ａ１の口座標Ｐ１を適宜検出する。配信装置１０４の飲食判定部２２０は、口座標Ｐ１と飲食物座標Ｐ２の距離ｄ１が所定の閾値以内となったとき、いいかえれば、飲食物オブジェクト２２６の先端部とキャラクタ１１４の口が十分に近づいたとき、飲食条件が成立したと判定する。

飲食条件が成立したとき、配信装置１０４の配信キャラクタ表示部１３８は、配信キャラクタ１１４ａ１が飲食物オブジェクト２２６を飲食する動画像である飲食動画を表示させる。一方、配信装置１０４の送信部１４８は、動作情報の一部として、飲食条件の成立を示す「飲食指示」を視聴装置１０８に送信する。視聴装置１０８の視聴キャラクタ表示部１８０は、飲食指示を受信したときには、視聴キャラクタ１１４ｂ１が飲食物オブジェクト２２６を飲食する動画像である飲食動画を表示させる。配信装置１０４から視聴装置１０８に飲食動画データそのものが送信されることはない。

図１１は、視聴装置１０８における飲食動画を示す画面図である。
飲食条件が成立したとき、配信装置１０４は飲食指示を視聴装置１０８に送信する。このとき、視聴キャラクタ１１４ｂ１は口を開けて飲食物オブジェクト２２６の一部を頬張り、飲食物オブジェクト２２６をモグモグと食べる。このように、視聴装置１０８の視聴キャラクタ表示部１８０は、飲食指示を受信したとき視聴キャラクタ１１４ｂ１の飲食動画を表示させる。

視聴装置１０８の飲食物表示部２２４は、飲食物オブジェクト２２６の画像を変化させる。図１１においては、飲食物オブジェクト２２６の半分が欠損し、半分が残っている。このような表現方法により、視聴者１１２は、飲食物オブジェクト２２６をキャラクタ１１４の口元に近づけると、キャラクタ１１４が飲食物オブジェクト２２６を食べてくれたという感覚、いいかえれば、キャラクタ１１４が、視聴者１１２からのプレゼントを受け入れた上で、飲食という行為をしているという実在的な感覚をもつことができる。

図１２は、飲み物の場合の画像変化を示す模式図である。
飲食物オブジェクト２２６は、食べ物に限らず、飲み物であってもよい。図１２に示す飲食物オブジェクト２２６は、タピオカミルクティ（登録商標）を模した飲み物を示す。タピオカミルクティ（登録商標）は、ミルク２３２（液体）とタピオカ団子２３０（固形物）を含み、ストロー２２８から吸い上げることで飲食される。飲食物特定部２２７は、ストロー２２８の先端部を飲食物座標Ｐ２として特定する。ストロー２２８の先端を視聴キャラクタ１１４ｂ１の口元に近づけるときに飲食条件が成立する。

キャラクタ１１４は、飲食条件が成立すると、タピオカミルクティ（登録商標）を少しずつ飲んでいく。飲食物表示部１４２はミルク２３２の水位を時間経過とともに少しずつ下げていくことにより、キャラクタ１１４がタピオカミルクティ（登録商標）（飲食物オブジェクト２２６）を飲んでいる様子を表現する。また、適宜、タピオカ団子２３０もストロー２２８から吸い上げられる。

このように、視聴者１１２は飲み物としての飲食物オブジェクト２２６を提供することにより、キャラクタ１１４が自分のプレゼントした飲み物を飲んでくれていると感じることができる。ライブ通信システム１００においては、視聴者１１２はキャラクタ１１４との会話を楽しむだけでなく、「飲食物をあげる」「飲食してもらう（受け入れてもらう）」という行為を実現することにより、キャラクタ１１４の実在感を高めている。

図１３は、配信装置１０４および視聴装置１０８の双方においてキャラクタ１１４が飲食する様子を表示させる処理のシーケンス図である。
視聴者１１２は、飲食物ボタン２００をタッチし（図５参照）、飲食物オブジェクト２２６を選択する（Ｓ３０）。視聴装置１０８の送信部１８６は、選択された飲食物オブジェクト２２６の飲食物ＩＤをサーバ１０２に送信する（Ｓ３２）。サーバ１０２は、あらかじめ飲食物ＩＤと飲食物オブジェクト２２６の画像を対応づけて登録しており、飲食物オブジェクト２２６の画像情報（以下、「飲食物画像」ともよぶ）を配信装置１０４に送信する（Ｓ３４）。
なお、配信装置１０４があらかじめ飲食物画像を保有しているときには、サーバ１０２は飲食物画像ではなく飲食物ＩＤを配信装置１０４に送信すればよい。

視聴者１１２は、飲食物オブジェクト２２６を動かすことができる。視聴装置１０８の飲食物オブジェクト２２６は飲食物座標を検出し、送信部１８６は飲食物座標をサーバ１０２に送信する（Ｓ３６）。サーバ１０２の通信部１５２は、飲食物座標を配信装置１０４に送信する（Ｓ３８）。

配信装置１０４の飲食物表示部１４２は、飲食物オブジェクト２２６を指定された飲食物座標に表示させる（Ｓ４０）。同様にして、視聴装置１０８の飲食物表示部２２４も、飲食物オブジェクト２２６を表示させる（Ｓ４１）。視聴装置１０８の飲食物特定部２２７は飲食物座標を定期的に検出し、送信部１８６も定期的に飲食物座標をサーバ１０２に送信する（Ｓ４２、Ｓ４４）。

配信装置１０４の飲食判定部２２０は、飲食物座標を受信するごとに飲食条件の成否を判定する。飲食条件が成立したとき（Ｓ４６）、配信装置１０４の視聴装置１０８は、飲食指示をサーバ１０２に送信する（Ｓ４８）。サーバ１０２は飲食指示を視聴装置１０８に転送する（Ｓ４９）。

配信装置１０４の配信キャラクタ表示部１３８は、配信キャラクタ１１４ａ１の飲食動画を表示する（Ｓ５０）。また、配信装置１０４の飲食物表示部１４２は、飲食によって一部が欠損した飲食物オブジェクト２２６を表示させる（Ｓ５２）。同様にして、視聴装置１０８の視聴キャラクタ表示部１８０は、視聴キャラクタ１１４ｂ１の飲食動画を表示させる（Ｓ５４）。視聴装置１０８の飲食物表示部２２４も、飲食によって一部が欠損した飲食物オブジェクト２２６を表示させる（Ｓ５６）。

図１３においては、サーバ１０２は飲食物画像を配信装置１０４に送信し、配信装置１０４は飲食物画像によって示される飲食物オブジェクト２２６を飲食物座標に基づいて移動表示させる。配信装置１０４は、いったん飲食物画像を取得できれば、あとは、飲食物画像を再度取得する必要はない。配信装置１０４は、飲食物画像の取得後は、飲食物オブジェクト２２６を適宜受信される飲食物座標にしたがって独自に移動表示させる。視聴装置１０８から配信装置１０４に飲食物オブジェクト２２６の飲食物画像を常に送信するわけではないので、通信負荷が小さく、配信装置１０４においてスムーズに飲食物オブジェクト２２６を移動表示させることができる。

複数の視聴者１１２が同時的に複数の飲食物オブジェクト２２６をキャラクタ１１４に提供しようとする場合がある。この場合には、配信装置１０４は複数の飲食物ＩＤを受信する。配信者１１０は、複数の飲食物ＩＤに対応する複数の飲食物オブジェクト２２６のうち、食べたい飲食物オブジェクト２２６にキャラクタ１１４の口を近づけることで飲食物オブジェクト２２６を選んで食べる。

あるいは、配信者１１０は、複数の飲食物オブジェクト２２６から食べたい飲食物オブジェクト２２６をタップして選んでもよい。この場合、配信装置１０４の飲食物選択部１３６は、配信者１１０による飲食物オブジェクト２２６の選択を受け付ける。配信装置１０４の飲食物表示部１４２は、選択された飲食物オブジェクト２２６だけを配信装置１０４における表示対象とする。

たとえば、視聴者１１２ａが飲食物オブジェクト２２６ａを提供し、視聴者１１２ｂが飲食物オブジェクト２２６ｂを提供したとする。配信装置１０４には飲食物オブジェクト２２６ａと飲食物オブジェクト２２６ｂが表示される。ここで、配信者１１０が飲食物オブジェクト２２６ａを選択したとする。配信装置１０４の送信部１４８は、選択された飲食物オブジェクト２２６ａの飲食物ＩＤを全ての視聴装置１０８に送信する。飲食物オブジェクト２２６ａの飲食物座標は、配信装置１０４からすべての視聴装置１０８に配信される。このため、すべての視聴装置１０８において同一の飲食物オブジェクト２２６ａが同一位置に表示される。飲食条件が成立したときには、すべての視聴装置１０８において同一の飲食動画が表示される。

複数の視聴者１１２から提供された飲食物オブジェクト２２６のうち、配信者１１０はいずれかの飲食物オブジェクト２２６を選択する。上記例の場合、配信者１１０が飲食物オブジェクト２２６ａを選択することで、すべての視聴装置１０８にはキャラクタ１１４により飲食物オブジェクト２２６ａが飲食される動画が表示される。このため、飲食物オブジェクト２２６ａを提供した視聴者１１２ａは「選んでもらえた」という特別感をもつことができる。

図１４は、飲食物オブジェクト２２６にサインオブジェクト２３６を付加するときの画面図である。
視聴者１１２は、ツールオブジェクト２３４を使って飲食物オブジェクト２２６を加工することもできる。図１４においては、オムレツを模した飲食物オブジェクト２２６に対して、ケチャップを模したツールオブジェクト２３４により「おめでとう」というメッセージを示すサインオブジェクト２３６を描いている。

視聴者１１２は、飲食物オブジェクト２２６を選択したあと、加工モードの実行を指示する。飲食物操作部１７８は、加工モードの入力を受け付ける。加工モードにおいては、飲食物表示部２２４は飲食物オブジェクト２２６を拡大表示させる。加工モードにおいて、視聴者１１２はツールオブジェクト２３４（ケチャップ）を選択し、ツールオブジェクト２３４をフリーハンドで動かすことにより、飲食物オブジェクト２２６（オムレツ）にメッセージを書き込むことができる。メッセージはサインオブジェクト２３６として飲食物オブジェクト２２６と一体化される。ここでは、視聴者１１２は、お気に入りのキャラクタ１１４の誕生日を祝うために「おめでとう」とケチャップで描いたオムレツをキャラクタ１１４にプレゼントしようとしている。

視聴装置１０８の送信部１８６は、飲食物オブジェクト２２６の飲食物ＩＤとサンオブジェクトサインオブジェクト２３６の画像（以下、「サイン画像」とよぶ）を、サーバ１０２を経由して配信装置１０４に送信する。配信装置１０４は、飲食物オブジェクト２２６およびサイン画像を取得し、サイン付きのオムレツを示す画像を生成する。配信装置１０４はサイン付きのオムレツを示す新しい飲食物オブジェクト２２６を他の視聴装置１０８にも送信する。このような制御方法により、ライブ通信システム１００の参加者全員で「サイン付きのオムレツ画像」を共有する。

図１５は、サインオブジェクト２３６を付加された飲食物オブジェクト２２６をキャラクタ１１４が食べたときの画面図である。
視聴者１１２が飲食物オブジェクト２２６を視聴キャラクタ１１４ｂ１の口元に近づけると、飲食条件が成立し、視聴キャラクタ１１４ｂ１が飲食物オブジェクト２２６を食べる飲食動画が表示される。このとき、飲食物表示部２２４は飲食物オブジェクト２２６の一部を欠損させる。また、飲食物表示部２２４は飲食物オブジェクト２２６の一部の欠損に合わせて、サインオブジェクト２３６の一部も欠損させる。配信装置１０４および他の視聴装置１０８においても同様である。

視聴者１１２は、ツールオブジェクト２３４を使うことにより、オリジナル性の高い飲食物オブジェクト２２６を作ることができる。また、視聴者１１２は、サインオブジェクト２３６により自分の気持ちを込めた飲食物オブジェクト２２６をキャラクタ１１４が食べてくれることにより、いっそうキャラクタ１１４との絆、特別な関係性を感じることができる。視聴者１１２は、サインオブジェクト２３６を付加した飲食物オブジェクト２２６、あるいは、キャラクタ１１４が飲食物オブジェクト２２６を食べてくれる場面を動画または静止画として保存してもよい。

図１６は、飲食物オブジェクト２２６の一部を分けて与えるときの様子を示す模式図である。
図１６に示す飲食物オブジェクト２２６は、ガラス容器２４２に盛られた３つのアイスクリーム２３８（アイスクリーム２３８ａ、アイスクリーム２３８ｂおよびアイスクリーム２３８ｃ）である。視聴者１１２は、３つのアイスクリーム２３８のうち、スプーンオブジェクト２４０によりアイスクリーム２３８ｃ（第１の部分オブジェクト）を飲食物オブジェクト２２６から分離させることができる（分割操作）。視聴者１１２は、スプーンオブジェクト２４０を指で動かし、スプーンオブジェクト２４０の先端をアイスクリーム２３８ｃに重ねる。このとき、視聴装置１０８の飲食物表示部２２４は、飲食物オブジェクト２２６からアイスクリーム２３８ｃがスプーンオブジェクト２４０によってすくい取られた様子を画像表示する。同様にして、配信装置１０４に対してもスプーンオブジェクト２４０の位置座標が送信され、配信装置１０４の飲食物表示部１４２も独自にアイスクリーム２３８ｃがスプーンオブジェクト２４０によってすくい取られた様子を画像表示する。他の視聴装置１０８においても同様である。

視聴者１１２は、アイスクリーム２３８ｃをキャラクタ１１４の口元に移動させる。視聴装置１０８の飲食物オブジェクト２２６は、アイスクリーム２３８ｃの位置座標を飲食物座標として配信装置１０４に送信し、配信装置１０４の飲食判定部２２０はこの飲食物座標に基づいて飲食条件の成否を判定する。飲食条件が成立したとき、キャラクタ１１４がスプーンオブジェクト２４０からアイスクリーム２３８ｃを口で受け取って食べる飲食動画が表示される。アイスクリーム２３８ｃは画面から消去される。

飲食物オブジェクト２２６は、アイスクリーム２３８ａ、アイスクリーム２３８ｂおよびガラス容器２４２を含み、アイスクリーム２３８ｃを失った画像となる（残部オブジェクト）。視聴者１１２が、更に、アイスクリーム２３８ａ（第２の部分オブジェクト）をスプーンオブジェクト２４０によってすくい取り（分割操作）、同様にしてアイスクリーム２３８ａをキャラクタ１１４に食べさせることができる。このときには、キャラクタ１１４がアイスクリーム２３８ａを食べる飲食動画が表示される。飲食物オブジェクト２２６は、アイスクリーム２３８ｂおよびガラス容器２４２を含み、アイスクリーム２３８ａも失った画像となる。アイスクリーム２３８ａは画面から消去される。

このような制御方法によれば、視聴者１１２は飲食物の一部（アイスクリーム２３８ｃなど）をすくい取り、これをキャラクタ１１４に食べさせるという行為を楽しむことができる。また、配信者１１０も体を動かすことでキャラクタ１１４の口元をアイスクリーム２３８ｃに近づけることで、キャラクタ１１４にアイスクリーム２３８ｃを受け取らせる。このように、飲食物オブジェクト２２６の一部を「取り出して」「受け渡す」という行為を実現することで、視聴者１１２はキャラクタ１１４に対して恋人と接しているかのような交流感をいだきやすくなる。

図１７は、視聴者１１２が投げた飲食物オブジェクト２２６をキャラクタ１１４がキャッチするときの画面図である。
図１７に示す飲食物オブジェクト２２６はマシュマロを模している。視聴者１１２は、飲食物オブジェクト２２６に指を置き、フリック操作（指で弾く操作）をすることで飲食物オブジェクト２２６を投げることができる。飲食物操作部１７８は、飲食物オブジェクト２２６に対するフリック操作を検出し、フリックの方向および速度を検出する。飲食物表示部２２４は、フリックの速度と方向に基づいて飲食物オブジェクト２２６が放物線を描いて飛んでいく様子を画面表示する。このとき、視聴装置１０８の飲食物オブジェクト２２６は飲食物座標を適宜検出し、送信部１８６は飲食物座標を配信装置１０４に送信する。

配信装置１０４の飲食判定部２２０は、適宜変化する飲食物オブジェクト２２６の飲食物座標とキャラクタ１１４の口座標の距離を計算し、２つの座標の距離が閾値以内となったとき、飲食条件が成立したと判定する。キャラクタ１１４の口と飲食物オブジェクト２２６が十分に近づいたときにはキャラクタ１１４は飲食物オブジェクト２２６を食べることができる。このような制御方法によれば、いわゆる「マシュマロキャッチ」をキャラクタ１１４と楽しむことができる。

＜総括＞
以上、実施形態に基づいてライブ通信システム１００について説明した。
本実施形態によれば、視聴者１１２はキャラクタ１１４と会話を楽しめるだけでなく、キャラクタ１１４に「飲食をさせる」ことができるため、視聴者１１２とキャラクタ１１４（配信者１１０）の親密度をいっそう高めることができる。飲食物オブジェクト２２６がキャラクタ１１４の口に十分に近づくことで、飲食条件が成立する。視聴者１１２は飲食物オブジェクト２２６をキャラクタ１１４の口に近づけ、キャラクタ１１４（配信者１１０）は口を飲食物オブジェクト２２６に近づける。飲食条件が成立するためには、視聴者１１２とキャラクタ１１４（配信者１１０）にある程度の意思疎通が必要となる。キャラクタ１１４が飲食物オブジェクト２２６を飲食したとき、視聴者１１２はキャラクタ１１４と呼吸が合ったかのような、意思が疎通したかのような独特の感覚をもつことができる。

人間同士でも仲良しになると、一緒にご飯を食べにいくことが多い。人間同士が親密性を高める上で「食事をともにする」という共同行為は重要な意味をもつ。また、旅行先でお土産を買って来るのも、親密性を高め、確認をするための重要な行為である。このような飲食物に関連する心理学的な意味に着目し、視聴者１１２が飲食物オブジェクト２２６をキャラクタ１１４に差し出し、キャラクタ１１４が飲食物オブジェクト２２６を食べる、あるいは、飲むことにより、「食事をともにする」という感覚をライブ通信システム１００により実現した。飲食物オブジェクト２２６を与えるだけでなく、飲食物オブジェクト２２６をキャラクタ１１４の口元に近づけ、キャラクタ１１４（配信者１１０）が口元を飲食物オブジェクト２２６に近づけることにより飲食条件が成立する。これにより、視聴者１１２は、自分の真心がキャラクタ１１４通じたかような気持ちを持つことができる。

更に、キャラクタ１１４が飲食物オブジェクト２２６を食べるとき、飲食物オブジェクト２２６を欠損させたり（図１１参照）、飲食物オブジェクト２２６の画像を変化させたり（図１２参照）、あるいは、飲食物オブジェクト２２６の一部を分け与えることで残部を表示させることにより（図１６参照）、キャラクタ１１４が本当に飲食物オブジェクト２２６を摂取したかのような演出効果を高めることができる。

なお、本発明は上記実施形態や変形例に限定されるものではなく、要旨を逸脱しない範囲で構成要素を変形して具体化することができる。上記実施形態や変形例に開示されている複数の構成要素を適宜組み合わせることにより種々の発明を形成してもよい。また、上記実施形態や変形例に示される全構成要素からいくつかの構成要素を削除してもよい。

［変形例］
本実施形態においては、第１メッセージは音声、第２メッセージはテキストであるとして説明した。変形例として、第１メッセージはテキストであってもよいし、第２メッセージは音声であってもよい。また、スタンプ画像や絵文字など、アイコン画像によりメッセージを伝えてもよい。

本実施形態においては、配信装置１０４において飲食条件の成否を判定するとして説明した。変形例として配信装置１０４ではなく、視聴装置１０８が飲食判定部２２０と口特定部１４６を備えてもよい。この場合、視聴装置１０８の口特定部１４６が口座標を検出し、視聴装置１０８の飲食判定部２２０が口座標および飲食物座標に基づいて飲食条件を判定する。飲食条件が成立したときには、視聴装置１０８は飲食指示を配信装置１０４に送信する。サーバ１０２は、また、飲食指示を他の視聴装置１０８にも送信する。配信装置１０４および視聴装置１０８は、飲食条件が成立したときには、それぞれ飲食動画を表示させればよい。

飲食物オブジェクト２２６は有料にて提供されてもよい。視聴者１１２は、有料にて飲食物オブジェクト２２６を購入し、これをキャラクタ１１４に提供してもよい。また、飲食物操作部１７８は、所定期間、たとえば、１９：００から２０：００に限り、視聴者１１２が無料で飲食物オブジェクト２２６を手に入れることができるとしてもよい。

飲食判定部２２０は、飲食物座標と口座標に基づいて飲食条件の成否を判定するとして説明した。このほかにも、視聴者１１２が飲食物オブジェクト２２６をキャラクタ１１４の手元に近づけたときに飲食条件が成立するとしてもよい。また、配信装置１０４の出力部１２８は、飲食物オブジェクト２２６が提供される時に飲食ボタンを画面表示させてもよい。配信者１１０が飲食ボタンをタッチしたとき、キャラクタ１１４は飲食物オブジェクト２２６を飲食するとしてもよい。

本実施形態においては、視聴者１１２が飲食物オブジェクト２２６にタッチして動かすことで飲食物オブジェクト２２６を移動させるとして説明した。変形例として、視聴者１１２の手の動きや身体の動きをカメラで検出し、これにしたがって飲食物オブジェクト２２６の位置（飲食物座標）を変化させてもよい。

キャラクタ１１４（配信者１１０）は、複数の飲食物オブジェクト２２６を提供される順に食べてもよい。たとえば、視聴装置１０８ａが飲食物オブジェクト２２６ａを提供し、視聴装置１０８ｂが少し遅れて飲食物オブジェクト２２６ｂを提供したとする。配信装置１０４の飲食物表示部１４２は、まず、飲食物オブジェクト２２６ａのみを表示し、飲食物オブジェクト２２６ａが飲食されたことを条件として、次の飲食物オブジェクト２２６ｂを表示させるとしてもよい。

キャラクタ１１４に満腹度を設定してもよい。飲食判定部２２０は、キャラクタ１１４の満腹度が所定値以下であることを条件として、飲食条件を成立させるとしてもよい。キャラクタ１１４が飲食物オブジェクト２２６を食べると、飲食判定部２２０は満腹度を上昇させる。また、飲食判定部２２０は時間経過とともにキャラクタ１１４の満腹度を低下させる。このような制御方法によれば、視聴者１１２は、キャラクタ１１４の空腹時間を見計らって飲食物オブジェクト２２６を提供する必要があるため、視聴者１１２はいっそうキャラクタ１１４の実在性を感じることができる。キャラクタ１１４によって、満腹度の上昇率あるいは低下率を異ならせてもよい。

本実施形態においては、視聴者１１２はツールオブジェクト２３４を使うことによりフリーハンドにてサインオブジェクト２３６をデザインするとして説明した。変形例として、スタンプを模したツールオブジェクト２３４により飲食物オブジェクト２２６を装飾してもよいし、小旗やパウダーなどのアイテムにより飲食物オブジェクト２２６を装飾してもよい。

視聴者１１２は、飲食物オブジェクト２２６に限らず、帽子や服などの装飾オブジェクトをキャラクタ１１４にプレゼントしてもよい。このとき、装飾オブジェクトにサインやスタンプを追加してもよい。このような制御方法によれば、オリジナル性の高い装飾オブジェクトをキャラクタ１１４にプレゼントできる。

視聴者１１２に限らず、配信者１１０がサインオブジェクト２３６により飲食物オブジェクト２２６を装飾してもよい。たとえば、視聴者１１２が提供する飲食物オブジェクト２２６に対して、配信者１１０は加工モードを指定する。加工モードにおいては、配信者１１０は飲食物オブジェクト２２６にサインオブジェクト２３６を付加する。配信装置１０４は、サインオブジェクト２３６の付加された飲食物オブジェクト２２６の飲食物画像を視聴装置１０８に送信する。この結果として、サイン付きの飲食物オブジェクト２２６の飲食物画像が全参加者で共有される。飲食物オブジェクト２２６を提供したキャラクタ１１４は、飲食物オブジェクト２２６を移動操作して、キャラクタ１１４は飲食物オブジェクト２２６を食べる。

このような制御方法によれば、視聴者１１２が提供した飲食物オブジェクト２２６に対して配信者１１０（キャラクタ１１４）は「ありがとう」などのオリジナルメッセージを返すことができる。視聴者１１２は、配信者１１０（キャラクタ１１４）が加工したオリジナル性のある飲食物オブジェクト２２６を撮影してもよい。

配信者１１０（キャラクタ１１４）は、視聴者１１２からプレゼントされた色紙などのグッズ（オブジェクト）にサインをしてもよい。

視聴者１１２は、料理をすることで、オリジナルの飲食物オブジェクト２２６を作成してもよい。たとえば、複数の素材オブジェクトから視聴者１１２はいくつかの素材オブジェクトを選択する。視聴装置１０８は飲食物作成部（図示せず）を備え、飲食物作成部は選択された素材オブジェクトに基づいてさまざまな飲食物オブジェクト２２６を生成する。このような制御方法によれば、視聴者１１２は料理をする楽しみや、料理を食べてもらう楽しみを味わうことができる。

１００ ライブ通信システム、１０２ サーバ、１０４ 配信装置、１０６ インターネット、１０８ 視聴装置、１１０ 配信者、１１２ 視聴者、１１４ キャラクタ、１１４ａ 配信キャラクタ、１１４ｂ 視聴キャラクタ、１１６ ユーザインタフェース処理部、１１８ 撮像部、１２０ データ処理部、１２２ 通信部、１２４ データ格納部、１２６ 入力部、１２８ 出力部、１３０ 動作検出部、１３２ 第１メッセージ取得部、１３４ 配信サイン入力部、１３６ 飲食物選択部、１３８ 配信キャラクタ表示部、１４０ 第２メッセージ出力部、１４２ 飲食物表示部、１４４ 動作情報生成部、１４６ 口特定部、１４８ 送信部、１５０ 受信部、１５２ 通信部、１５４ ライブ制御部、１５６ データ格納部、１５８ キャラクタ格納部、１６２ ユーザインタフェース処理部、１６４ 通信部、１６６ データ処理部、１６８ データ格納部、１７０ 入力部、１７２ 出力部、１７４ 第２メッセージ取得部、１７６ キャラクタ選択部、１７８ 飲食物操作部、１８０ 視聴キャラクタ表示部、１８２ 第１メッセージ出力部、１８４ 第２メッセージ出力部、１８６ 送信部、１９０ 受信部、１９６ 視聴者会話画面、１９８ メッセージ領域、２００ 飲食物ボタン、２０６ 配信者会話画面、２０８ カメラ、２２０ 飲食判定部、２２２ 視聴サイン入力部、２２４ 飲食物表示部、２２６ 飲食物オブジェクト、２２７ 飲食物特定部、２２８ ストロー、２３０ タピオカ団子、２３２ ミルク、２３４ ツールオブジェクト、２３６ サインオブジェクト、２３８ アイスクリーム、２４０ スプーンオブジェクト、２４２ ガラス容器

Claims (10)

1. 配信者により操作される配信装置と視聴者により操作される視聴装置を含み、
   前記配信装置は、
   配信者を撮像する撮像部と、
   配信者の撮像画像から、配信者の動作の特徴を示す動作情報を生成する動作情報生成部と、
   配信者から第１メッセージを受け付ける第１メッセージ取得部と、
   前記動作情報および前記第１メッセージを送信する送信部と、を備え、
   前記視聴装置は、
   前記動作情報および前記第１メッセージを受信する受信部と、
   前記視聴装置の画面にキャラクタを動画表示させ、前記動作情報に応じて前記キャラクタを動作させる視聴キャラクタ表示部と、
   前記キャラクタの動作に合わせて前記第１メッセージを出力する第１メッセージ出力部と、
   視聴者から、飲食物オブジェクトに対する移動操作を受け付ける飲食物操作部と、
   視聴者による操作にしたがって、前記飲食物オブジェクトを移動表示させる飲食物表示部と、を備え、
   前記視聴キャラクタ表示部は、所定の飲食条件が成立するとき、前記キャラクタが前記飲食物オブジェクトを飲食する動画を表示させることを特徴とするライブ通信システム。
2. 前記視聴装置の前記飲食物表示部は、視聴者の手の位置に対応して前記飲食物オブジェクトの位置座標を変化させ、
   前記視聴キャラクタ表示部は、前記飲食物オブジェクトの位置座標と前記キャラクタの口の位置座標の距離が第１の閾値以下であるとき前記飲食条件が成立し、前記キャラクタが前記飲食物オブジェクトを飲食する動画を表示させることを特徴とする請求項１に記載のライブ通信システム。
3. 前記視聴装置の前記視聴キャラクタ表示部は、前記キャラクタが前記飲食物オブジェクトを飲食するとき、前記飲食物オブジェクトの一部を欠損させた画像を表示させることを特徴とする請求項１または２に記載のライブ通信システム。
4. 前記視聴装置は、
   視聴者から、前記飲食物オブジェクトに対するサインの入力を受け付ける視聴サイン入力部、を更に備え、
   前記飲食物表示部は、前記飲食物オブジェクトに前記サインを合成して表示させることを特徴とする請求項１から３のいずれかに記載のライブ通信システム。
5. 前記配信装置は、
   配信者から、前記飲食物オブジェクトに対するサインの入力を受け付ける配信サイン入力部、を更に備え、
   前記送信部は、更に、前記サインの画像を送信し、
   前記視聴装置の前記受信部は、前記サインの画像を受信し、
   前記飲食物表示部は、前記飲食物オブジェクトに前記サインの画像を合成して表示させることを特徴とする請求項１から４のいずれかに記載のライブ通信システム。
6. 前記配信装置は、複数の前記視聴装置と同時接続され、
   前記視聴装置は、更に、視聴者により指定された飲食物オブジェクトのＩＤを送信する送信部、を更に備え、
   前記配信装置は、１以上の視聴装置において指定された飲食物オブジェクトに対する配信者の選択を受け付ける飲食物選択部、を更に備え、
   前記配信装置の前記送信部は、前記選択された飲食物オブジェクトを前記複数の視聴装置に同時送信し、
   前記複数の視聴装置それぞれの前記視聴キャラクタ表示部は、前記選択された飲食物オブジェクトを対象として、前記キャラクタが飲食する動画を表示させることを特徴とする請求項１から５のいずれかに記載のライブ通信システム。
7. 前記視聴装置の前記飲食物操作部は、更に、前記飲食物オブジェクトに対する視聴者からの分割操作を受け付け、
   前記飲食物表示部は、前記分割操作が受け付けられたとき、前記飲食物オブジェクトを第１の部分オブジェクトと残部オブジェクトに分離させ、前記視聴者による操作にしたがって前記第１の部分オブジェクトを移動表示させ、
   前記視聴キャラクタ表示部は、前記第１の部分オブジェクトの位置座標と前記キャラクタの口の位置座標の距離が第２の閾値以下であるとき前記飲食条件が成立し、前記キャラクタが前記第１の部分オブジェクトを飲食する動画を表示させるとともに第１の部分オブジェクトを消去し、
   前記飲食物表示部は、前記残部オブジェクトに対する分割操作が受け付けられたとき、前記残部オブジェクトを第２の部分オブジェクトと新たな残部オブジェクトに分離させ、前記視聴者による操作にしたがって前記第２の部分オブジェクトを移動表示させ、
   前記視聴キャラクタ表示部は、前記第２の部分オブジェクトの位置座標と前記キャラクタの口の位置座標の距離が第３の閾値以下であるとき前記飲食条件が再度成立し、前記キャラクタが前記第２の部分オブジェクトを飲食する動画を表示させるとともに第２の部分オブジェクトを消去することを特徴とする請求項１から６のいずれかに記載のライブ通信システム。
8. 前記視聴装置の前記飲食物表示部は、視聴者により前記飲食物オブジェクトを投げる操作がなされたとき、前記飲食物オブジェクトを所定の軌道に沿って移動表示させ、
   前記視聴キャラクタ表示部は、前記移動表示される飲食物オブジェクトの位置座標と前記キャラクタの口の位置座標の距離が第４の閾値以内であるとき前記飲食条件が成立し、前記キャラクタが前記飲食物オブジェクトを飲食する動画を表示させることを特徴とする請求項１から７のいずれかに記載のライブ通信システム。
9. 配信者により操作される配信装置と視聴者により操作される視聴装置を含み、
   前記配信装置は、
   配信者を撮像する撮像部と、
   配信者の撮像画像から、配信者の動作の特徴を示す動作情報を生成する動作情報生成部と、
   前記配信装置の画面にキャラクタを動画表示させ、前記動作情報に応じて前記キャラクタを動作させる配信キャラクタ表示部と、
   前記キャラクタの口の位置座標を特定する口特定部と、
   飲食条件の成否を判定する飲食判定部と、
   配信者から第１メッセージを受け付ける第１メッセージ取得部と、
   前記動作情報および前記第１メッセージを送信する送信部と、を備え、
   前記送信部は、前記飲食条件が成立したとき、飲食指示を前記動作情報の一部として送信し、
   前記視聴装置は、
   前記動作情報および前記第１メッセージを受信する受信部と、
   前記視聴装置の画面にキャラクタを動画表示させ、前記動作情報に応じて前記キャラクタを動作させる視聴キャラクタ表示部と、
   前記キャラクタの動作に合わせて前記第１メッセージを出力する第１メッセージ出力部と、
   視聴者から、飲食物オブジェクトに対する移動操作を受け付ける飲食物操作部と、
   視聴者による操作にしたがって、前記飲食物オブジェクトを移動表示させる飲食物表示部と、
   前記飲食物オブジェクトの位置座標を特定する飲食物特定部と、
   前記飲食物オブジェクトの位置座標を送信する送信部と、を備え、
   前記配信装置の前記飲食判定部は、前記キャラクタの口の位置座標と前記飲食物オブジェクトの位置座標の距離が第１の閾値以下であるとき前記飲食条件が成立したと判定し、 前記配信装置の前記送信部は、前記動作情報の送信に際しては、前記キャラクタの動画データを前記視聴装置への送信対象とはせず、
   前記視聴装置の前記視聴キャラクタ表示部は、前記飲食指示が受信されたとき、前記キャラクタが前記飲食物オブジェクトを飲食する動画を表示させることを特徴とするライブ通信システム。
10. 配信者を撮像する機能と、
    配信者の撮像画像から、配信者の動作の特徴を示す動作情報を生成する機能と、
    配信者から第１メッセージを受け付ける機能と、
    前記動作情報および前記第１メッセージを送信する機能と、を配信装置において発揮させる第１のプログラムと、
    前記動作情報および前記第１メッセージを受信する機能と、
    視聴装置の画面にキャラクタを動画表示させ、前記動作情報に応じて前記キャラクタを動作させる機能と、
    前記キャラクタの動作に合わせて前記第１メッセージを出力する機能と、
    視聴者から、飲食物オブジェクトに対する移動操作を受け付ける機能と、
    視聴者による操作にしたがって、前記飲食物オブジェクトを移動表示させる機能と、
    所定の飲食条件が成立するとき、前記キャラクタが前記飲食物オブジェクトを飲食する動画を表示させる機能と、を視聴装置において発揮させる第２のプログラムと、を含むことを特徴とするライブ通信プログラム。

Images