JP2023146875A - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Abstract

【課題】仮想空間内についてのアバタ視点画像を用いるシステムにおける利便性を向上させること。【解決手段】仮想空間配置部５１は、ブースが配置された展示ホール及び展示ホール内を移動可能なアバタを３次元の仮想空間に夫々配置させる。出展者アバタ生成部５２は、出展者端末３に対する出展者の操作により行われる指示のうち、出展者アバタを生成する指示に基づいて、出展者アバタを、２次元情報で構成されるアバタとして生成する。アバタ移動部５３は、来場者によるアバタを移動させる指示に基づいてアバタの位置を第２座標に移動させる。アバタ視点画像生成部５５は、第１座標にブースが配置された展示ホール及び第２座標のアバタが配置された仮想空間において、第２座標に基づいて設定される視点から撮像した３次元画像をアバタ視点画像として生成する。【選択図】図５

Description

本発明は、情報処理装置、情報処理方法、及びプログラムに関する。

従来、３次元の仮想空間内における様々な視点から撮像された画像を、ＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）等を用いて閲覧するＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）に関する技術が存在する（特許文献１参照）。

特開２０１７－０１２３９７号公報

しかしながら、特許文献１に記載の技術を含む従来技術では、単に所定の３次元の仮想空間におけるある位置（座標）の視点から撮像された画像、例えば、当該仮想空間に存在するアバタに基づいて設定された視点から撮像された画像（以下、「アバタ視点画像」と呼ぶ）を生成してユーザに閲覧させるに過ぎなかった。ユーザは、アバタ視点画像を閲覧しても、仮想空間に存在するオブジェクト（他のユーザのアバタや壁等）が含まれることはわかるが、いずれのオブジェクトにアクション（例えば、話しかける行為）をすべきかの把握は困難であった。
即ち、特許文献１に記載の技術を含む従来技術では、仮想空間内についてのアバタ視点画像を用いるシステムにおける利便性が十分でない状況であった。

本発明は、このような状況に鑑みてなされたものであり、仮想空間内についてのアバタ視点画像を用いるシステムにおける利便性を向上させることを目的とする。

上記目的を達成するため、本発明の一態様の情報処理装置は、
ブースが配置された展示ホール、前記ブースの中に出展者として存在する出展者アバタ、及び前記展示ホール内を来場者として移動可能な来場者アバタを、３次元の仮想空間に夫々配置させる配置手段と、
第１デバイスに対する第１ユーザの操作により行われる指示のうち、前記出展者アバタを生成する第１指示に基づいて、前記出展者アバタを、２次元情報で構成されるアバタとして生成する出展者アバタ生成手段と、
第２デバイスに対する第２ユーザの操作により行われる指示のうち、前記展示ホール内で前記アバタを所定位置に移動させる第２指示に基づいて、前記仮想空間における前記アバタを当該所定位置に移動させる来場者アバタ移動手段と、
２次元情報から構成される前記出展者アバタが定位置に存在する前記ブースが配置された前記展示ホール、及び、前記所定位置の前記来場者アバタが夫々配置された前記仮想空間において、前記座標に基づいて設定される視点から撮像した３次元画像を、来場者視点画像として生成する画像生成手段と、
前記来場者視点画像を前記第２デバイスに表示させる制御を実行する表示制御手段と、
を備える。

本発明の一態様の情報処理方法及びプログラムは、本発明の一態様の情報処理装置に対応する方法及びプログラムである。

本発明によれば、仮想空間内についてのアバタ視点画像を用いるシステムにおける利便性を向上させることができる。

本発明の情報処理装置の一実施形態に係るサーバを用いて提供されるサービスにおいて表示される画面の一例を示す図である。 本発明の情報処理装置の一実施形態に係るサーバを用いて提供されるサービスにおいて表示される画面の一例であって、図１と異なる例を示す図である。 本発明の情報処理装置の一実施形態に係るサーバが適用される情報処理システムの構成の一例を示す図である。 図３に示す情報処理システムのうちサーバのハードウェア構成の一例を示すブロック図である。 図２の情報処理システムを構成する図４のサーバの機能的構成の一例を示す機能ブロック図である。 図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、アバタを含むブースに関する各種設定を行う画面を示す画像の一例を示す図である。 図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、出展者に対して来場者の情報を提供する画面を示す画像の一例を示す図である。 図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、来場者に対するアテンドが含まれる画面を示す画像の一例を示す図である。

以下、本発明の実施形態について図面を用いて説明する。
図１は、本発明の情報処理装置の一実施形態に係るサーバを用いて提供されるサービスにおいて表示される画面の一例を示す図である。

まず、本発明の実施形態を説明するに先立ち、図１を用いて、本発明の情報処理装置の一実施形態に係るサーバを用いて提供されるサービス（以下、「本サービス」と呼ぶ）について簡単に説明する。
本サービスとは、次のようなサービスである。
即ち、本サービスは、３次元の仮想空間内において開催される展示会において、主催者（例えば図２の主催者ＵＳ）、出展者（例えば図２の出展者ＵＴ－１乃至ＵＴ－ｎ）、及び来場者（例えば図２の来場者ＵＲ－１乃至ＵＲ－ｍ）に提供されるサービスである。

具体的には例えば、図１に示すように、３次元の仮想空間には、主催者により設定される展示ホールＴＨが配置される。展示ホールＴＨ内には、複数の出展者の夫々の商品等（コンテンツ）が出展される複数のブースＢが配置される。
来場者は、端末（例えば図２の来場者端末４－１乃至４－ｍ）を操作して、展示ホールＴＨ内を、アバタＡとして移動し、興味あるブースＢを訪れる。
図１は、来場者の端末に表示される、アバタＡに基づく視点から３次元の仮想空間が撮像された結果得られる３次元画像ＧＡ（以下、「アバタ視点画像ＧＡ」と呼ぶ）の一例が示されている。

そして、来場者は、端末を操作して、展示ホールＴＨ内に配置されたブースＢを訪れて、ブースＢの展示物を閲覧したり、出展者からの説明を受けたりする。

ここで、３次元の仮想空間内に配置されるアバタは、３Ｄアバタであることが通常である。
本サービスにおいても、来場者のアバタＡＲ（以下、「来場者アバタＡＲ」と呼ぶ）は、３Ｄアバタである。即ち、来場者アバタＡＲは、３次元のポリゴンからなるアバタである。
しかしながら、出展者のアバタＡＳ（以下、「出展者アバタＡＳ」と呼ぶ）は、実写型２Ｄアバタとなっている。即ち、出展者アバタＡＳには、２次元の写真画像が採用されている。
なお、詳しくは後述するが、図１において、出展者アバタＡＳには、「３Ｄのオンラインイベントサービスを提供する〇〇〇のブースです」というセリフが吹き出しの形態で表示されている。即ち、ブースＢに立ち寄ろうとしている来場者には、出展者アバタＡＳからのセリフが提供される。
以下に、図１に示すようにアバタ視点画像ＧＡにおける来場者アバタＡＲと出展者アバタＡＳについてより詳しく説明する。

出展者アバタＡＳは、２次元の画像のため高画質にアバタ視点画像ＧＡに含まれることになる。これにより、来場者は、出展者アバタＡＳをより現実に即した実写型２Ｄアバタ（写真の画像）により把握することができるため、親近感を得ることができる。その結果、来場者は出展者に話かけやすくなる。

また、アバタ視点画像ＧＡ上において実写型２Ｄアバタと同様に高画質となり得る、多量のポリゴン数からなる３Ｄアバタも存在する。しかしながら、そのような３Ｄアバタを出展社アバタＡＳ及び来場者アバタＡＲの双方に採用することは、パフォーマンス上の負荷が極めて高い。
そこで、本サービスでは、出展者アバタＡＳとして実写型２Ｄアバタを採用している。これにより、パフォーマンス上の負荷を削減すると共に、上述の来場者が出展者に話しかけやすくなるという効果を奏することができるのである。

また、本サービスでは、来場者アバタＡＲとして図１に示すように、荒い３次元のポリゴンからなるアバタを採用している。これにより、パフォーマンス上の負荷を削減しているのである。その結果、パフォーマンス上の負荷を削減すると共に、展示ホールＴＨ内に多数のアバタの設置が可能となるのである。

更に言えば、来場者アバタＡＲは、３次元のポリゴンからなるアバタであり、出展者アバタＡＳと性質が異なる。このため、アバタ視点画像ＧＡにおいて、出展者アバタＡＳが目立つため、来場者にとって話しかける相手となり得る出展者の把握が容易となる。
以下、来場者アバタＡＲと出展者アバタＡＳとの性質の違いとして、アバタ視点画像ＧＡ内におけるアバタの見え方の違いについて説明する。

来場者アバタＡＲから他の来場者アバタＡＲを見ている場合を考える。
この場合、他の来場者アバタは３Ｄアバタである。そのため、上述したように、他の来場者アバタは、比較的荒い３次元のポリゴンとしてアバタ視点画像ＧＡに含まれる。
また、他の来場者アバタＡＲと対面している状態から、対面した他の来場者アバタＡＲを見ながら、その、他の来場者アバタＡＲの横に回るような動作をしたとき、他の来場者アバタＡＲを斜めから見た様子や側面の様子がアバタ視点画像ＧＡに反映される。

次に、来場者アバタＡＲから出展者アバタＡＳを見ている場合を考える。
この場合、出展者アバタＡＳは、実写型２Ｄアバタ（２次元の写真画像）である。そのため、上述したように、出展者アバタＡＳは、高画質な写真としてアバタ視点画像ＧＡに含まれる。
また、実写型２Ｄアバタ（２次元の写真画像）は、３次元の仮想空間内において厚みを持たない。そのため、３次元の仮想空間において出展者アバタが固定されているとすれば、来場者アバタＡＲが、出展者アバタＡＳと対面した状態からその出展者アバタＡＳの横に回るように移動したとき、出展者アバタＡＳにパースがついて見えたり厚みが薄くなったり、側面からは厚みがなく見えなくなったりする。

このように、来場者アバタＡＲが移動した場合、３Ｄアバタである他の来場者アバタＡＲと、実写型２Ｄアバタである出展者アバタＡＳでは、見え方が異なるのである。
これにより、来場者は、アバタ視点画像ＧＡにおいて来場者アバタＡＲと出展者アバタＡＳとを判別することが容易となるのである。

本サービスは、上述の性質を前提として、より来場者にとって好適なアバタ画像を得るため、「２Ｄアバタの自動方向変更機能」を有する。以下、「２Ｄアバタの自動方向変更機能」について、図２を更に用いて説明する。

図２は、本発明の情報処理装置の一実施形態に係るサーバを用いて提供されるサービスにおいて表示される画面の一例であって、図１と異なる例を示す図である。

図２の来場者アバタＡＲは、図１と比較してブースＢや出展者アバタＡＳ等を中心として右側に移動（展示ホールＴＨを上から見て反時計回りに移動）している。即ち、図１及び図２に示すアバタ視点画像ＧＡの両方において、出展者アバタＡＳは、来場者アバタと正対している。
即ち、本サービスでは、２Ｄアバタの自動方向変更機能により、出展者アバタＡＳは、来場者アバタＡＲの位置に対して正対するように、自動で方向が変更される。
これにより、出展者アバタＡＳにパースがついて見えたり厚みが薄くなったり、側面からは厚みがなく見えなくなったりしないため、アバタ視点画像ＧＡ内における出展者アバタＡＳの位置の把握が容易となる。

更に言えば、上述したように、来場者アバタＡＲが移動した場合、他の来場者アバタＡＲを斜めから見た様子や側面の様子としてアバタ視点画像ＧＡに反映される。これに対して、来場者アバタＡＲが移動した場合、アバタ視点画像ＧＡにおいて、出展者アバタＡＳは、常に正対した様子としてアバタ視点画像ＧＡに反映される。
これにより、更に、アバタ視点画像ＧＡ内における出展者アバタＡＳの位置の把握が容易となる。

さらに以下、本サービスの基本的な流れについて説明する。

主催者、出展者、及び参加者の夫々は、各々の端末を用いて、ブラウザ機能等によりインターネット等を介して、本サービスの提供者（以下、「サービス提供者」と呼ぶ）により管理されるサーバ（例えば後述の図２のサーバ１）に接続することで、本サービスを利用することができる。即ち、本サービスは、いわゆるクラウドサービスとして実現されている。
ここで、ブラウザ機能の代わりに、端末に予めインストールされた専用のアプリケーションソフトウェア（以下、「専用アプリ」と呼ぶ）が利用されることにより、本サービスを利用できるようにしてもよい。

まず、主催者は、端末を操作して、展示ホールＴＨの形状とブースＢの配置図を決定する。
そのうえで、主催者は、複数の出展者を誘致し、複数の出展者と交渉し、ブース配置を決める。
主催者は、端末を操作して管理画面を表示させ、その管理画面にて、ブース配置に基づいて、展示ホールＴＨ内に複数の出展者の夫々のブースＢを配置させる。
出展者は、端末を操作して管理画面を表示させ、その管理画面にて、自身のブースＢについて各種の設定をする。その際に出展者は、端末を操作して、ブースＢにおいて説明等をする担当者のアバタ、即ち、上述の出展者アバタＡＳを設定する。詳しくは図６を用いて後述するが、出展者は、用意された出展者アバタＡＳから任意のアバタを選択したり、予め撮影した担当者の写真等をアップロードすることで、出展者アバタＡＳを設定する。
これにより、３次元の仮想空間の展示ホールＴＨにおいて、参加者（アバタＡ）が来場することが可能になる。

来場者は、端末を操作して、事前登録をした後に、展示会（イベント）の当日にログインして、展示ホールＴＨ内をアバタＡとして移動することができる。アバタＡの移動の様子は、アバタ視点画像ＧＡとして端末に表示される。
来場者は、端末を操作して、展示ホールＴＨ内を移動し、自身が訪れたいブースＢを訪れて、展示物を閲覧したり、出展者の説明を聞くことなどができる。

詳細については後述するが、来場者は、端末を操作して各ブースＢを訪れる際の利便性を向上させる各種機能を利用することができる。

次に、図２を参照して、上述した図１の本サービスの提供を実現させる情報処理システム、即ち本発明の情報処理装置の一実施形態に係るサーバが適用される情報処理システムの構成について説明する。
図２は、本発明の情報処理装置の一実施形態に係るサーバが適用される情報処理システムの構成の一例を示す図である。

図５に示す情報処理システムは、サーバ１と、主催者端末２と、出展者端末３－１乃至３－ｎ（ｎは１以上の整数値）と、来場者端末４－１乃至４－ｍ（ｍはｎとは独立した１以上の整数値）を含むように構成されている。
サーバ１、主催者端末２、出展者端末３－１乃至３－ｎ、及び来場者端末４－１乃至４－ｍは、インターネット等の所定のネットワークＮＷを介して相互に接続されている。

サーバ１は、サービス提供者により管理される情報処理装置である。サーバ１は、主催者端末２、出展者端末３－１乃至３－ｎ、及び来場者端末４－１乃至４－ｍと適宜通信をしながら、本サービスを実現するための各種処理を実行する。

主催者端末２は、主催者ＵＳが操作する情報処理装置である。主催者端末２は、パーソナルコンピュータ、タブレット、スマートフォン等で構成される。主催者端末２は、例えば主催者ＵＳによる各種情報の入力操作を受け付けてサーバ１に送信したり、サーバ１から送信されてきた各種情報を受信して表示したりする。なお、図２には主催者端末２が１台のみ描画されているが、これは説明を理解し易くするために簡略化させたものである。実際には、複数の展示会（イベント）の数、即ち複数の主催者ＵＳに対応する主催者端末２が存在し得る。

出展者端末３－１乃至３－ｎの夫々は、出展者ＵＴ－１乃至ＵＴ－ｎの夫々が操作する情報処理装置である。出展者端末３は、上述したように、パーソナルコンピュータ、タブレット、スマートフォン等で構成される。
なお、以下、出展者ＵＴ－１乃至ＵＴ－ｎの個々を区別する必要がない場合、これらをまとめて出展者ＵＴと呼ぶ。また、出展者ＵＴと呼んでいる場合、出展者端末３－１乃至３－ｎをまとめて「出展者端末３」と呼ぶ。
出展者端末３は、例えば出展者ＵＴによる各種情報の入力操作を受け付けてサーバ１に送信したり、サーバ１から送信されてきた各種情報を受信して表示したりする。

来場者端末４－１乃至４－ｎの夫々は、来場者ＵＲ－１乃至ＵＲ－ｍの夫々が操作する情報処理装置である。来場者端末４は、上述したように、パーソナルコンピュータ、タブレット、スマートフォン等で構成される。
なお、以下、来場者ＵＲ－１乃至ＵＲ－ｍの個々を区別する必要がない場合、これらをまとめて来場者ＵＲと呼ぶ。また、来場者ＵＲと呼んでいる場合、来場者端末４－１乃至４－ｍをまとめて「来場者端末４」と呼ぶ。
来場者端末４は、例えば来場者ＵＲによる各種情報の入力操作を受け付けてサーバ１に送信したり、サーバ１から送信されてきた各種情報を受信して表示したりする。

図３は、図２に示す情報処理システムのうちサーバのハードウェア構成の一例を示すブロック図である。

サーバ１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、入力部１６と、出力部１７と、記憶部１８と、通信部１９と、ドライブ２０とを備えている。

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部１８からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

ＣＰＵ１１、ＲＯＭ１２、及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、入力部１６、出力部１７、記憶部１８、通信部１９及びドライブ２０が接続されている。

入力部１６は、例えばキーボード等により構成され、各種情報を入力する。
出力部１７は、液晶等のディスプレイやスピーカ等により構成され、各種情報を画像や音声として出力する。
記憶部１８は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成され、各種データを記憶する。
通信部１９は、インターネットを含むネットワークＮＷを介して他の装置（例えば図２の主催者端末２、出展者端末３－１乃至３－ｎ、及び来場者端末４－１乃至４－ｍ）との間で通信を行う。

ドライブ２０には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２０によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部１８にインストールされる。
また、リムーバブルメディア３１は、記憶部１８に記憶されている各種データも、記憶部１８と同様に記憶することができる。

なお、図示はしないが、図２の主催者端末２、出展者端末３、及び来場者端末４も、図３に示すハードウェア構成と基本的に同様の構成を有することができる。したがって、主催者端末２、出展者端末３、及び来場者端末４のハードウェア構成についての説明は省略する。

このような図３のサーバ１の各種ハードウェアと各種ソフトウェアとの協働により各種処理の実行が可能になる。その結果、上述の本サービスを提供することができる。
以下、図２の情報処理システムを構成する図３のサーバ１において実行される機能的構成について説明する。
図４は、図２の情報処理システムを構成する図３のサーバの機能的構成の一例を示す機能ブロック図である。

図４に示すように、サーバ１のＣＰＵ１１においては、展示ホール設置部５１と、出展者アバタ生成部５２と、アバタ移動部５３と、仮想空間配置部５４と、アバタ視点画像生成部５５と、表示制御部５６と、セリフ取得部５７と、セリフ出力部５８と、チャット制御部５９と、軌跡収集部６０と、出展側対応制御部６１とが機能する。

展示ホール設置部５１は、主催者端末２に対する主催者ＵＳの操作に基づいて、３次元の仮想空間内に展示ホールＴＨを設定する。

出展者アバタ生成部５２は、主催者端末２に対する主催者ＵＳの操作又は出展者端末３に対する出展者ＵＴの操作により行われる指示のうち、展示ホールＴＨ内のブースＢの出展者アバタＡＳを生成する指示に基づいて、展示ホールＴＨ内における出展者アバタＡＳとして２次元情報で構成されるアバタを生成する。

なお、必要に応じて、出展者アバタ生成部５２は、主催者端末２に対する主催者ＵＳの操作又は出展者端末３に対する出展者ＵＴの操作により行われる指示のうち、予め用意された複数の出展者アバタＡＳから任意のものを選択する指示に基づいて、２次元情報で構成されるアバタを生成することもできる。
また必要に応じて、出展者アバタ生成部５２は、出展者ＵＴの操作により行われる指示のうち、現実の出展者や所定のモデルが撮像された写真画像を送信して選択するする指示に基づいて、２次元情報で構成されるアバタを生成することもできる。

即ち、出展者アバタ生成部５２は、図６に示すＵＩ（ＵｓｅｒＩｎｔｅｒｆａｃｅ）を出展者ＵＴの出展者端末３に提示させ、出展者ＵＴの操作により、アバタを生成することができる。
図６は、図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、アバタを含むブースに関する各種設定を行う画面を示す画像の一例を示す図である。
なお、図６示すように、アバタを含むブースに関する各種設定を行う画面には、ブースＢに関する設定メニューとして、「３Ｄブース外観」、「３Ｄブース内観」、「２Ｄブース」、「ブース基本情報」、「担当者管理」が含まれている。また、図６示すように、アバタを含むブースに関する各種設定を行う画面には、来場者に関するメニューとして、「来場者一覧」、「チャットの設定」が含まれている。図６示すように、アバタを含むブースに関する各種設定を行う画面には、データの「ダウンロード」メニューが含まれている。

図６に示す画像には、「誘導員キャラクター」として、複数の実写型２Ｄアバタ（２次元の写真画像）が含まれている。出展者ＵＴは、「誘導員キャラクター」に含まれる複数２Ｄアバタ（２次元の写真画像）から、任意のものを選択することにより、それを出展者アバタＡＳとして選択することができる。
また、図示はしないが、出展者ＵＴは、任意の写真画像を、出展者端末３を介してアップロード等することにより、誘導員キャラクターとすることができる。これにより、出展者ＵＴは、任意の写真画像を出展者アバタＡＳとして利用することができるようになる。
即ち例えば、出展者ＵＴは、後述するチャット機能を利用する出展者の担当者自身の写真画像や、出展者自身の指定する制服を着用した人物の写真画像等を出展者アバタＡＳとして利用することができるようになる。
なお、２Ｄアバタは、写真画像に限定されない。即ち例えば、出展者ＵＴは、予め用意又は自身でアップロード等した２Ｄのキャラクター画像（２Ｄや３ＤのキャラクタＣＧの画像）も「誘導員キャラクター」として利用することができる。
このように、出展者ＵＴが、自身の設定した（写真画像に限定されない）画像を出展者アバタＡＳとして利用させる機能を、以下、「出展者アバタ設定機能」と呼ぶ。

アバタ移動部５３は、来場者端末４に対する来場者ＵＲの操作により行われる指示のうち、展示ホールＴＨ内で自身のアバタＡを第２座標に移動させる移動指示に基づいて、仮想空間におけるアバタの現在位置を第２座標に移動させる。

ここで、来場者端末４に対する来場者ＵＲの操作により行われる指示のうち、展示ホールＴＨ内で自身のアバタＡを第２座標に移動させる移動指示には、アバタＡの姿勢の変更指示も含まれている。
そこで、アバタ移動部５３は、変更指示に基づく姿勢に変更してアバタＡを上述の第２座標に移動させる。

仮想空間配置部５４は、ブースＢが第１座標に配置された展示ホールＴＨを３次元の仮想空間に配置させると共に、アバタＡを第２座標に配置させる。
また、仮想空間配置部５４は、出展者アバタ生成部５２により生成された、現実の出展者や所定のモデルが撮像された写真画像に基づいて、当該写真画像を出展者アバタＡＳとして第２座標に配置させることができる。
また、仮想空間配置部５４は、来場者アバタＡＲの姿勢に応じた向きで、出展者アバタＡＳを配置させる。具体的には例えば、来場者アバタＡＲの位置及び姿勢からみたアバタ視点画像ＧＡにおいて、出展者アバタＡＳが配置される位置の出展者アバタＡＳが正対して含まれるように、出展者アバタを配置する。

アバタ視点画像生成部５５は、第１座標にブースＢが配置された展示ホールＴＨ、及び、第２座標のアバタＡが夫々配置された仮想空間において、第２座標に基づいて設定される視点から撮像した３次元画像を、アバタ視点画像ＧＡとして生成する。
これにより、出展者アバタＡＳは、来場者アバタＡＲの位置や姿勢によらず、アバタ視点画像ＧＡに正対して含まれるようになる。

表示制御部５６は、図１に示すように、アバタ視点画像ＧＡを来場者端末４に表示させる制御を実行する。

このようにして、展示ホール設置部５１、出展者アバタ生成部５２、アバタ移動部５３、仮想空間配置部５４、アバタ視点画像生成部５５及び表示制御部５６の上述した一連の処理の実行により、上述の「２Ｄアバタの自動方向変更機能」が実現される。
即ち、２Ｄアバタの自動方向変更機能とは、来場者端末４において移動された来場者アバタＡＲの位置や姿勢に基づいて、主催者端末２又は展示者端末３において設定された実写型２Ｄアバタ（２次元の写真画像）が仮想空間に配置され、アバタ視点画像ＧＡを生成等する機能である。
なお、展示ホールＴＨにおける複数の来場者の夫々に対して正対するようにアバタ視点画像ＧＡが提供される。即ち、複数の来場者の夫々にとっての仮想空間は、少なくとも出展者アバタＡＳについて異なる別の仮想空間であると言える。

セリフ取得部５７は、出展者アバタＡＳから出力させるセリフを取得する。
具体的には例えば、セリフ取得部５７は、図６に示す誘導員キャラクターの「誘導員の誘導メッセージ」欄に入力された文字列をセリフとして取得する。
セリフ出力部５８は、セリフ取得部５７において取得されたセリフを、ブースＢの中に存在する出展者アバタＡＳから発せられたセリフとして、来場者アバタＡＲに対応する来場者ＵＲの来場者端末４から出力させる制御を実行する。
具体的には例えば、セリフ出力部５８は、図１に示すように、セリフを出展者アバタＡＳの吹き出しとしてアバタ視点画像ＧＡに重畳して表示することで出力させる。

また例えば、セリフ出力部５８は、文字列として入力されたセリフを、所定のＡＩ等により音読させた音声として、来場者端末４から出力させる制御を実行することもできる。
また例えば、セリフ取得部５７はセリフを音声データとして取得し、セリフ出力部５８は来場者端末４から音声として出力させる制御を実行することもできる。

また例えば、セリフ取得部５７は、図示せぬチャットボットエンジンやＡＩ型チャットエンジンからセリフを取得することができる。このとき、チャットボットエンジンやＡＩ型チャットエンジンには、ブースＢにきた来場者ＵＲの氏名やその時刻、リード情報、行動履歴、チャット履歴等のデータが提供される。そして、チャットボットエンジンやＡＩチャットエンジンは、これらのデータに基づいて、セリフを生成する。
これにより、例えば、上場企業に所属する来場者ＵＲと、中小企業に所属する来場者ＵＲとで、異なるセリフがセリフ取得部５７により取得される。
その結果、来場者ＵＲは、自身の状況に合わせた好適なセリフで、出展者アバタＡＳから話しかけられることになるため、ブースＢでの出展者アバタＵＳでの対応はより好適なものとなる。

なお、図示はしないが、出展者ＵＴは、来場者端末４から出力される音声を音声の形態で録音させてセリフとして取得させてもよい。即ち、この場合、セリフ取得部５７は、出展者端末３を介して録音された音声をセリフとして取得する。そして、セリフ出力部５８は、取得された音声のセリフを、来場者端末４から出力させる。
このように、出展者ＵＴが、自身の設定した写真画像を出展者アバタＡＳに利用させる機能を、以下、「出展者アバタセリフ機能」と呼ぶ。

ここで、来場者ＵＲ（そのアバタＡ）は、在席中のブースＢに行くことで、担当者とチャットで会話することができる。
なお、このようなチャットでの会話を実現すべく、図５のチャット制御部５９がサーバ１のＣＰＵ１１に設けられている。
即ち、チャット制御部５９は、ブースＢに存在するアバタＡに対応する来場者ＵＲと、当該ブースＢに在席中の担当者との間でチャットを行うために、来場者ＵＲが操作する来場者端末４と、担当者が操作する出展者端末３又は他の端末との間の通信を制御する。
なお、以下、ブースＢに存在するアバタＡに対応する来場者ＵＲと、当該ブースＢに在席中の担当者との間でチャットを行う機能を「チャット機能」と呼ぶ。
ここで、出展者アバタＡＳには出展者の複数の担当者を割り当てることができる。来場者ＵＲが出展者アバタＡＳに対して話しかけるアクションをすると、割り当てられた出展者ＵＴの担当者が管理画面でテキストチャット、音声チャット、ビデオチャット等で対応することができる。
即ち、出展者アバタＡＳには管理画面で出展担当者が紐付けられている。来場者ＵＲは、話しかけた出展者アバタＡＳに紐づけられた人（出展者ＵＴの担当者）と音声チャット、テキストチャット、ビデオチャットなどを行うことができる。なお、紐づけられる担当者は１名であってもよい。

軌跡収集部６０は、図３の来場者ＵＲ－１乃至ＵＲ－ｍの夫々が操作するアバタＡの夫々の展示ホールＴＨ内における移動の軌跡を示す軌跡データを取得して、来場者ＵＲ－１乃至ＵＲ－ｍの夫々の軌跡データを集計して所定の分析を行う。
出展側対応制御部６１は、軌跡データに基づいてブースＢに滞在する来場者アバタＡＲの滞在時間を計測し、滞在時間が所定以上になったとき、出展者端末３に対して所定通知をする制御と、来場者端末４において出展者アバタＡＳから所定出力をさせる制御とのうち少なくとも一方を実行する。

即ち、出展者アバタ生成部５２は、図７に示すＵＩを出展者ＵＴの出展者端末３に提示させ、滞在時間が所定以上の来場者ＵＲに対して対応を行うことを促すことができる。
図７は、図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、出展者に対して来場者の情報を提供する画面を示す画像の一例を示す図である。

図７においては、図６の「来場者一覧」メニューが選択されている。
図７に示すように、来場者一覧においては、ブースＢにきた来場者ＵＲの氏名やその時刻、リード情報、行動履歴、チャット履歴等が表示される。
そして、図示はしないが、来場者ＵＲが所定時間ブースＢに滞在した場合、その来場者ＵＲは、そのブースＢの内容に興味があると考えられる。そこで、本サービスでは、所定時間ブースＢに来場者アバタＡＲが滞在した場合、来場者ＵＲへの対応が促されるのである。
このように、以下、出展者ＵＴに対して、そのブースＢに来た来場者ＵＲへの対応を促す（誘導する）機能を、「出展側による対応誘導機能」と呼ぶ。

また例えば、出展側対応制御部６１は、所定時間ブースＢに滞在した来場者ＵＲに対して、所定のメッセージを出展者アバタＡＳを介して話かけてもよい。即ち例えば、「気になることはございますか？」等のメッセージが、来場者ＵＲに提供される。これにより、来場者ＵＲとのチャットが開始すると共に、出展者ＵＴにとっては、その返答から対応をするように促される。

なお、仮想空間配置部５４は、アテンド目的の所定のトリガにより、ブースＢ内の位置とは異なる位置であって、アバタ視点画像ＧＡに出展者アバタＡＳが被写体として含まれる位置に、出展者アバタを配置させることができる。
具体的には、仮想空間配置部５４は、図８に示すように、ブースＢ以外の位置に来場者アバタＡＲが位置する場合において、アバタ視点画像ＧＡに、出展者アバタＡＳを配置することができる。このとき、配置された出展者アバタＡＳから所定のセリフが出力される。

図８は、図５の機能的構成のサーバの制御により出展者端末に表示される画像のうち、来場者に対するアテンドが含まれる画面を示す画像の一例を示す図である。
即ち、図８において、来場者アバタＡＲは、ブースＢ以外の通路部に位置している。そして、アバタ視点画像ＧＡには、ブースＢの出展者アバタＡＳ以外の出展者アバタＡＳ１が配置されている。そして、出展者アバタＡＳ１は、「次は右奥のＸＸＸブースへ行ってみてください。面白いＭＡがありますよ。」というセリフを吹き出しの形態で発している。

このように、来場者がアテンドを受けるべきタイミングに、アバタ視点画像ＧＡには、アテンドをしてくれる出展者アバタＡＳ１が含まれて表示される。
そして、出展者アバタＡＳ１により紹介されるブースＢは、自動でのアテンドの場合、ＡＩ等により選択されたブースＢの紹介や興味があると考えられる次に行くべきブースなどをアテンドする。
なお、来場者ＵＲは、所定操作により、アテンドの出展者アバタＡＳ１を非表示とすることもできる。
このように、来場者ＵＲに対してアテンドさせる機能を、以下、「２Ｄアバタによるアテンド機能」と呼ぶ。

以上、本発明の一実施形態について説明したが、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものとみなす。

図３に示すシステム構成、及び図４に示すサーバ１のハードウェア構成は、本発明の目的を達成するための例示に過ぎず、特に限定されない。

また、図５に示す機能ブロック図は、例示に過ぎず、特に限定されない。即ち、上述した処理を全体として実行できる機能が図３の情報処理システムに備えられていれば足り、この機能を実現するためにどのような機能ブロック及びデータベースを用いるのかは、特に図５の例に限定されない。

また、機能ブロック及びデータベースの存在場所も、図５に限定されず、任意でよい。
図５の例では、全ての処理は、図５の情報処理システムを構成する図５のサーバ１のＣＰＵ１１の制御により行われる構成となっているが、これに限定されない。例えばサーバ１側に配置された機能ブロック及びデータベースの少なくとも一部を、主催者端末２側、出展者端末３側、来場者端末４側、又は図示せぬ他の情報処理装置が備える構成としてもよい。

また、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。
また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えばサーバの他汎用のスマートフォンやパーソナルコンピュータであってもよい。

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図示せぬリムーバブルメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

以上をまとめると、本発明が適用される情報処理装置は、次のような構成を有していれば足り、各種各様な実施の形態を取ることができる。

即ち、本発明が適用される情報処理装置（例えば図３のサーバ１）は、
ブース（図１のブースＢ）が配置された展示ホール（展示ホールＴＨ）、前記ブースの中に出展者として存在する出展者アバタ（図１の出展者アバタＡＳ）、及び前記展示ホール内を来場者として移動可能な来場者アバタ（図１の来場者アバタＡＲ）を、３次元の仮想空間に夫々配置させる配置手段と、
第１デバイス（図２の出展者端末３）に対する第１ユーザ（出展者ＵＴ）の操作により行われる指示のうち、前記出展者アバタを生成する第１指示に基づいて、前記出展者アバタを、２次元情報で構成されるアバタとして生成する出展者アバタ生成手段と、
第２デバイス（図２の来場者端末４）に対する第２ユーザ（来場者ＵＲ）の操作により行われる指示のうち、前記展示ホール内で前記アバタを所定位置に移動させる第２指示に基づいて、前記仮想空間における前記アバタを当該所定位置に移動させる来場者アバタ移動手段と、
２次元情報から構成される前記出展者アバタが定位置に存在する前記ブースが配置された前記展示ホール、及び、前記所定位置の前記来場者アバタが夫々配置された前記仮想空間において、前記座標に基づいて設定される視点から撮像した３次元画像を、来場者視点画像（例えば図１のアバタ視点画像ＧＡ）として生成する画像生成手段と、
前記来場者視点画像を前記第２デバイスに表示させる制御を実行する表示制御手段と、
を備える。
これにより、上述の「２Ｄアバタによる出展者のアバタ表示機能」が実現される。
その結果、３次元の仮想空間内についてのアバタ視点画像を用いるシステムにおける利便性を向上させることができる。

本発明が適用される情報処理装置において、
前記出展者アバタから出力させるセリフを取得するセリフ取得手段と、
取得された前記セリフを、前記ブースの中に存在する前記来場者アバタに対応する前記第１ユーザの前記第１デバイスから出力させる制御を実行するセリフ出力手段と、
をさらに備えるようにすることもできる。
これにより、上述の「出展者アバタのセリフ出力機能」が実現される。

本発明が適用される情報処理装置において、
前記第２指示は、前記アバタの姿勢の変更指示を含み、
前記アバタ移動手段は、前記変更指示に基づく姿勢に変更して前記アバタを前記第２座標に移動させ、
前記配置手段は、前記ブースの中に存在する前記来場者アバタの前記姿勢に応じた向きで、前記出展者アバタを前記定位置に配置させるようにすることもできる。
これにより、上述の「２Ｄアバタの自動方向変更機能」が実現される。

本発明が適用される情報処理装置において、
前記第１指示は、前記第１ユーザにより予め用意された用意画像を含み、
前記出展者アバタ生成手段は、当該用意画像に基づいて前記出展者アバタを生成するようにすることもできる。
これにより、上述の「出展者アバタ設定機能」が実現される。

本発明が適用される情報処理装置において、
前記ブースに存在する前記来場者アバタに対応する前記第２ユーザと、前記出展者アバタに対応付けられた前記担当者との間でチャットを行うために、当該第２ユーザが操作する前記第２デバイスと、当該担当者が操作する前記第１デバイス又は別デバイスとの間で通信する制御を実行するチャット制御手段をさらに備えるようにすることができる。
これにより、上述の「出展側担当者割当てチャット機能」が実現される。

本発明が適用される情報処理装置において、
前記第２ユーザに対応する前記来場者アバタの前記展示ホール内における移動の軌跡を示す軌跡データを収集する軌跡収集手段と、
前記軌跡データに基づいて前記ブースに滞在する前記来場者アバタの滞在時間を計測し、当該滞在時間が所定以上になったとき、前記第１デバイスに対して所定通知をする制御と、前記第２デバイスにおいて前記出展者アバタから所定出力をさせる制御とのうち少なくとも一方を実行する出展側対応制御手段と、
をさらに備えるようにすることができる。
これにより、上述の「出展側による対応誘導機能」が実現される。

本発明が適用される情報処理装置において、
前記配置手段は、アテンド目的の所定のトリガにより、前記ブース内の前記定位置とは異なる位置であって、前記来場者視点画像に前記出展者アバタが被写体として含まれる位置に、当該出展者アバタを配置させるようにすることもできる。
これにより、上述の「２Ｄアバタによるアテンド機能」が実現される。

１・・・サーバ、２・・・主催者端末、３・・・出展者端末、４・・・来場者端末、１１・・・ＣＰＵ、２０・・・ドライブ、３１・・・リムーバブルメディア、５１・・・展示ホール設置部、５２・・・出展者アバタ生成部、５３・・・アバタ移動部、５４・・・仮想空間配置部、５５・・・アバタ視点画像生成部、５６・・・表示制御部、５７・・・セリフ取得部、５８・・・セリフ出力部、５９・・・チャット制御部、６０・・・軌跡収集部、６１・・・出展側対応制御部

Claims (9)

1. ブースが配置された展示ホール、前記ブースの中に出展者として存在する出展者アバタ、及び前記展示ホール内を来場者として移動可能な来場者アバタを、３次元の仮想空間に夫々配置させる配置手段と、
   第１デバイスに対する第１ユーザの操作により行われる指示のうち、前記出展者アバタを生成する第１指示に基づいて、前記出展者アバタを、２次元情報で構成されるアバタとして生成する出展者アバタ生成手段と、
   第２デバイスに対する第２ユーザの操作により行われる指示のうち、前記展示ホール内で前記アバタを所定位置に移動させる第２指示に基づいて、前記仮想空間における前記アバタを当該所定位置に移動させる来場者アバタ移動手段と、
   ２次元情報から構成される前記出展者アバタが定位置に存在する前記ブースが配置された前記展示ホール、及び、前記所定位置の前記来場者アバタが夫々配置された前記仮想空間において、前記座標に基づいて設定される視点から撮像した３次元画像を、来場者視点画像として生成する画像生成手段と、
   前記来場者視点画像を前記第２デバイスに表示させる制御を実行する表示制御手段と、
   を備える情報処理装置。
2. 前記出展者アバタから出力させるセリフを取得するセリフ取得手段と、
   取得された前記セリフを、前記ブースの中に存在する前記来場者アバタに対応する前記第１ユーザの前記第１デバイスから出力させる制御を実行するセリフ出力手段と、
   をさらに備える請求項１に記載の情報処理装置。
3. 前記第２指示は、前記アバタの姿勢の変更指示を含み、
   前記アバタ移動手段は、前記変更指示に基づく姿勢に変更して前記アバタを前記第２座標に移動させ、
   前記配置手段は、前記ブースの中に存在する前記来場者アバタの前記姿勢に応じた向きで、前記出展者アバタを前記定位置に配置させる、
   請求項１又は２に記載の情報処理装置。
4. 前記第１指示は、前記第１ユーザにより予め用意された用意画像を含み、
   前記出展者アバタ生成手段は、当該用意画像に基づいて前記出展者アバタを生成する、
   請求項１乃至３のうち何れか１項に記載の情報処理装置。
5. 前記第１ユーザに属するＫ人（Ｎは１以上の整数値）の担当者のうち１人以上が前記出展者アバタに対応付けられており、
   前記ブースに存在する前記来場者アバタに対応する前記第２ユーザと、前記出展者アバタに対応付けられた前記担当者との間でチャットを行うために、当該第２ユーザが操作する前記第２デバイスと、当該担当者が操作する前記第１デバイス又は別デバイスとの間で通信する制御を実行するチャット制御手段をさらに備える、
   請求項１乃至４のうち何れか１項に記載の情報処理装置。
6. 前記第２ユーザに対応する前記来場者アバタの前記展示ホール内における移動の軌跡を示す軌跡データを収集する軌跡収集手段と、
   前記軌跡データに基づいて前記ブースに滞在する前記来場者アバタの滞在時間を計測し、当該滞在時間が所定以上になったとき、前記第１デバイスに対して所定通知をする制御と、前記第２デバイスにおいて前記出展者アバタから所定出力をさせる制御とのうち少なくとも一方を実行する出展側対応制御手段と、
   をさらに備える請求項１乃至５のうち何れか１項に記載の情報処理装置。
7. 前記配置手段は、アテンド目的の所定のトリガにより、前記ブース内の前記定位置とは異なる位置であって、前記来場者視点画像に前記出展者アバタが被写体として含まれる位置に、当該出展者アバタを配置させる、
   請求項１乃至６のうち何れか１項に記載の情報処理装置。
8. 情報処理装置が実行する情報処理方法において、
   ブースが配置された展示ホール、前記ブースの中に出展者として存在する出展者アバタ、及び前記展示ホール内を来場者として移動可能な来場者アバタを、３次元の仮想空間に夫々配置させる配置ステップと、
   第１デバイスに対する第１ユーザの操作により行われる指示のうち、前記出展者アバタを生成する第１指示に基づいて、前記出展者アバタを、２次元情報で構成されるアバタとして生成する出展者アバタ生成ステップと、
   第２デバイスに対する第２ユーザの操作により行われる指示のうち、前記展示ホール内で前記アバタを所定位置に移動させる第２指示に基づいて、前記仮想空間における前記アバタを当該所定位置に移動させる来場者アバタ移動ステップと、
   ２次元情報から構成される前記出展者アバタが定位置に存在する前記ブースが配置された前記展示ホール、及び、前記所定位置の前記来場者アバタが夫々配置された前記仮想空間において、前記座標に基づいて設定される視点から撮像した３次元画像を、来場者視点画像として生成する画像生成ステップと、
   前記来場者視点画像を前記第２デバイスに表示させる制御を実行する表示制御ステップと、
   を含む情報処理方法。
9. コンピュータに、
   ブースが配置された展示ホール、前記ブースの中に出展者として存在する出展者アバタ、及び前記展示ホール内を来場者として移動可能な来場者アバタを、３次元の仮想空間に夫々配置させる配置ステップと、
   第１デバイスに対する第１ユーザの操作により行われる指示のうち、前記出展者アバタを生成する第１指示に基づいて、前記出展者アバタを、２次元情報で構成されるアバタとして生成する出展者アバタ生成ステップと、
   第２デバイスに対する第２ユーザの操作により行われる指示のうち、前記展示ホール内で前記アバタを所定位置に移動させる第２指示に基づいて、前記仮想空間における前記アバタを当該所定位置に移動させる来場者アバタ移動ステップと、
   ２次元情報から構成される前記出展者アバタが定位置に存在する前記ブースが配置された前記展示ホール、及び、前記所定位置の前記来場者アバタが夫々配置された前記仮想空間において、前記座標に基づいて設定される視点から撮像した３次元画像を、来場者視点画像として生成する画像生成ステップと、
   前記来場者視点画像を前記第２デバイスに表示させる制御を実行する表示制御ステップと、
   を含む制御処理を実行させるプログラム。

Images