JPWO2017098780A1 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

Abstract

【課題】空間のつながりに３次元的表現を用いることで通信相手との距離を演出し、より快適なコミュニケーションを実現することが可能な情報処理装置、情報処理方法、およびプログラムを提供する。【解決手段】通信先からデータを受信する受信部と、前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、を備える、情報処理装置。【選択図】図１

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関する。

近年、通信技術の発達により、複数人の参加者がいる２つの場所間で会話を行うTV電話会議システムが提案されている。具体的には、例えば表示装置、カメラ、マイク、およびスピーカが各場所に設けられ、一方の場所で撮影された映像および収音された音声データが、リアルタイムで、他方の場所に設置された表示装置およびスピーカから出力される。

このような双方向通信技術に関し、例えば下記特許文献１では、窓状撮像表示装置を用いて双方向通信を行う際に、見る側の人間の位置や角度が変化に応じた映像が見るようにする技術が提案され、これにより、テレビを通して会話を行う利用者同士の視線がずれてしまうことを解消する。

また、下記特許文献２では、ユーザの状態情報に基づいて、自分と通信相手の通信に対する要求の度合いを判断し、相互に不都合のない快適なコミュニケーションを行うようにすることができることが提案されている。これにより、相手が状態情報を見逃して呼び出しを行ったり、また、相手が強制的に呼び出しを行う等、ユーザにとって不都合な呼び出しを受けることを回避することができる。

特許第４５７６７４０号公報 特許第４６４５３５５号公報

しかしながら、上述した特許文献１では、窓状撮像表示装置を用いて離れた空間同士が一つの窓を通してつながっているように感じさせる効果がある一方、空間同士の距離はゼロで接しているため、相手がすぐそばに居ることに抵抗が生じてしまう場合もある。

また、上述した特許文献２においても、空間同士をつなげるタイミング（すなわち呼び出しタイミング）について善処されているが、空間同士の距離については何ら言及されていない。

そこで、本開示では、空間のつながりに３次元的表現を用いることで通信相手との距離を演出し、より快適なコミュニケーションを実現することが可能な情報処理装置、情報処理方法、およびプログラムを提案する。

本開示によれば、通信先からデータを受信する受信部と、前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、を備える、情報処理装置を提案する。

本開示によれば、プロセッサが、通信先からデータを受信することと、前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成することと、前記生成された空間画像情報を通信元の表示部に表示するよう制御することと、を含む、情報処理方法を提案する。

本開示によれば、コンピュータを、通信先からデータを受信する受信部と、前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、として機能させるための、プログラムを提案する。

以上説明したように本開示によれば、空間のつながりに３次元的表現を用いることで通信相手との距離を演出し、より快適なコミュニケーションを実現することが可能となる。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の一実施形態によるテレプレゼンスシステムの概要について示す図である。 本実施形態による通信制御装置の構成の一例を示すブロック図である。 本実施形態による３次元空間上の空間同士の距離について説明する図である。 本実施形態による３次元空間上の空間同士の距離について説明する図である。 本実施形態によるユーザのつながり要求レベルの算出式の一例を示す図である。 本実施形態による最適なつながり度合いの算出式の一例を示す図である。 本実施形態による空間距離ゼロの際の表示例を示す図である。 本実施形態による空間距離が少し離れた際の表示例を示す図である。 本実施形態による空間距離がさらに離れた際の表示例を示す図である。 本実施形態による３Ｄ中庭空間に仮想の猫が居る場合について説明する図である。 本実施形態による３Ｄ中庭空間に仮想の植木鉢が配置される場合について説明する図である。 本実施形態によるリビング映像内の特定物のみを３Ｄ中庭空間に配置する場合について説明する図である。 本実施形態による通信先の地域の気象情報を３Ｄ空間に反映した場合について説明する図である。 本実施形態による３Ｄ空間のシーン適用例を説明する図である。 本実施形態による３Ｄ空間のシーン適用例を説明する図である。 本実施形態による視線移動に応じた画面変化について説明する図である。 本実施形態による他の視線移動に応じた画面変化について説明する図である。 本実施形態による通信制御処理を示すシーケンス図である。 本実施形態による通信制御処理を示すシーケンス図である。 本実施形態によるシーン設定処理を示すフローチャートである。 本実施形態の応用例による通信制御装置の構成の一例を示すブロック図である。 応用例による送信処理を示すフローチャートである。 応用例による明快度に応じた相手空間画像の表示について説明する図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による情報処理装置の概要
２．通信制御装置の構成
３．空間情報の表示例
３−１．離隔距離
３−２．３Ｄ中庭空間の利用
３−３．シーン事例
３−４．視線移動に応じた画面変化
４．動作処理
４−１．通信制御処理
４−２．シーン設定処理
５．応用例
６．まとめ

＜＜１．本開示の一実施形態による情報処理装置の概要＞＞
本開示の一実施形態によるテレプレゼンスシステム１の概要について図１を参照して説明する。本実施形態によるテレプレゼンスシステム１は、離れた空間同士を映像・音声・その他の情報チャンネルによって接続し、あたかもその場所がつながって相手が存在しているように感じさせることを可能とする。例えば親と子供が離れて暮らしている際に、互いのリビング空間が窓やドアを介してつながっているように見せることを可能とする。例えば互いのリビング空間が接続する場合、ユーザは、相手空間の様子（例えば、子供の様子、親の様子等）を大まかに把握しながら生活することができる。

一般的なビデオチャット技術では、映像音声チャネルによる遠隔コミュニケーション時に、映像の表示/非表示や音声のON/OFF(ミュート)といった、０か１かの切替えはできるものの、つながり度合いの細かな調整はできなかった。そのため、常に高臨場感でつながりたくはないが、相手の様子を感じていたいといったユーザのニーズに応えられていなかった。また、接続状態の切替えはユーザが手動で行う必要があり、操作コストの面でも利用頻度の向上を妨げていた。

また、テレプレゼンス通信装置において、つながり度合いを段階的に調整できる事例として、例えば相手のリビング映像にブラー処理(ぼかし)やマスク処理(遮蔽)等の２次元平面的なフィルター処理をかける方式も考えられるが、相手の映像が鮮明に見えていなくとも、すぐ傍に相手がいるように感じられ、通信者間の心地よい間合いを表現できていなかった。

そこで、本実施形態では、空間のつながりに３次元的表現を用いて、接続する空間同士の距離を制御することで、より快適なコミュニケーションの実現や、ユーザにとって心地よいつながり度合いの提供を可能とする。空間同士の距離は、例えば通信先の映像（リビング空間の映像）を通信元の表示部で表示する際に、所定のシーンが反映された３次元空間上の少し離れた位置に配置することで奥行きを表現し、通信相手が目の前ではなく、少し離れた場所に居るように感じることができる。

また、つながり度合いに応じた空間同士の距離は、ユーザ状態等に応じて自動的かつ連続的に最適化することで、ユーザ操作の手間を省くことも可能となる。

より具体的には、図１に示すように、本実施形態によるテレプレゼンスシステム１は、通信制御装置１０Ａ、１０Ｂ、１０Ｃがネットワーク２０を介して接続されている。また、ネットワーク２０には、処理サーバ３０が接続されている。

通信制御装置１０Ａ、１０Ｂ、１０Ｃは、それぞれ、入力部を有し、ユーザＡ、ユーザＢ、ユーザＣが居る空間の情報を取得して他の通信制御装置１０または処理サーバ３０に送信する。また、通信制御装置１０Ａ、１０Ｂ、１０Ｃは、それぞれ出力部を有し、他の通信制御装置１０または処理サーバ３０から受信した情報を出力する。

処理サーバ３０は、通信制御装置１０Ａ〜１０Ｃのいずれか２以上が接続されている際に、双方向通信の同期処理や、双方からのつながり要求レベルに基づく離隔距離の算出・制御等を行う。なお、これらの同期処理、離隔距離の算出・制御等は、各通信制御装置１０Ａ、１０Ｂ、１０Ｃで行うようにして、処理サーバ３０を含まないシステム構成とすることも可能である。

＜＜２．通信制御装置の構成＞＞
続いて、本実施形態による通信制御装置１０の構成について図２を参照して説明する。図２は、本実施形態による通信制御装置１０の構成の一例を示すブロック図である。

図２に示すように、通信制御装置１０は、入力部１０１、空間情報取得部１０２、状態判定部１０３、空間距離制御部１０４、操作Ｉ／Ｆ（インタフェース）１０５、３Ｄ中庭空間生成部１０６、通信部１０７、空間情報生成部１０８、出力部１０９、および記憶部１１０を有する。

入力部１０１は、空間情報を入力する機能を有する。例えば入力部１０１は、カメラ１０１１、マイク（マイクロホンの略称）１０１２、およびセンサ１０１３により実現される。カメラ１０１１は、複数であってもよく、空間内（例えばリビング）を撮像し、撮像画像を取得する。また、マイク１０１２は、複数であってもよく、空間内の音声や、空間周辺（例えば隣の部屋、廊下、家の外等）の環境音を集音し、音声データを取得する。また、センサ１０１３は、空間内や空間周辺の各種情報を検知する機能を有し、例えば、温度センサ、湿度センサ、照度センサ、人感センサ、ドア開閉センサ等が想定される。

空間情報取得部１０２は、入力部１０１から様々な空間情報を取得し、状態判定部１０３により状態判定の素材として用いることができるようデータを準備し、出力する。データの準備とは、例えばノイズ処理、画像解析、物体認識、音声解析等である。さらに、空間情報取得部１０２は、取得した空間情報に基づいて、ユーザ認識を行う。ユーザ認識とは、その空間に居るユーザの個人識別、ユーザの位置（部屋のどこに居るか等）、姿勢（立っているか、座っているか、寝ているか等）、感情（楽しんでいるか、悲しんでいるか等）、行動（夕飯の準備をしている、テレビを見ている、本を読んでいる等）、繁忙度（忙しそうに動き回っているか等）の認識が想定される。また、空間情報取得部１０２は、取得した空間情報に基づいて、環境認識を行う。環境認識とは、その空間の現在の時間帯（朝方、昼、夕方、深夜）、明るさ（部屋の明るさ、窓からの光）、温度、音響（空間内で収音された音）、地域（その空間が存在する場所）、整頓度（部屋の片づけ具合）等の認識が想定される。

状態判定部１０３は、空間情報取得部１０２により取得され、出力された情報に基づいて、空間の状態やユーザの状態（すなわち、通信元の空間のコンテキスト）を判定する。例えば状態判定部１０３は、空間情報取得部１０２によるユーザ認識結果および環境認識結果に基づいて、空間の状態やユーザの状態を判定する。なお、通信元の空間のコンテキストには、ユーザの状態、ユーザが居る実空間の状態、時間、季節、天候、場所、または相手ユーザとの関係性が含まれ得る。

空間距離制御部１０４は、接続された空間同士の３次元空間上の距離（奥行きの離隔距離）を制御する機能を有する。本実施形態では、３次元空間上の適切な距離に、通信先の空間から取得した情報を配置し、つながりに奥行きを見せることで、心地よいつながり状態を実現する。ここで図３Ａおよび図３Ｂを参照して、本実施形態による３次元空間上の空間同士の距離について説明する。図３Ａ、図３Ｂに示す例では、３次元空間上において、通信元のディスプレイ１０９１Ａに表示される窓枠４０を基準として、相手空間画像４１が奥行き方向の所定距離に配置される場合について説明する。

図３Ａ上段では、相手空間画像４１が、３次元空間上で窓枠４０に対して距離ゼロに配置されている場合の配置例４００ａを示す。この場合、窓枠４０いっぱいに相手空間画像４１が表示され、ユーザは、相手の空間が一つの窓を介してすぐ目の前にあるように感じることができる。図３Ａ下段では、相手空間画像４１が、窓枠４０から少し離れた距離に配置されている場合の配置例４００ｂを示す。この場合、窓枠４０から多少奥方向に、相手空間画像４１が表示され、ユーザは、相手の空間が少し離れた位置にあるため、心理的抵抗が距離ゼロの場合よりも下がる。次いで、図３Ｂ上段では、相手空間画像４１が、さらに離れた距離に配置されている場合の配置例４００ｃを示す。この場合、ユーザは、相手の空間が離れた位置にあるため、心理的抵抗が図３Ａ下段に示す距離の場合よりも下がる。続いて、図３Ｂ下段では、相手空間画像４１が、図３Ｂ上段の配置例４００ｃよりもさらに離れた距離に配置されている場合の配置例４００ｄを示す。この場合、ユーザは、相手の空間がさらに離れた位置にあるため、心理的抵抗が図３Ｂ上段に示す距離の場合よりも下がる。

かかる相手空間との距離は、例えばユーザのつながり要求レベルと通信先ユーザのつながり要求レベルとに基づいて調整される。まず、ユーザのつながり要求レベルは、例えば空間距離制御部１０４により、状態判定部１０３から出力された判定結果（通信元の空間のコンテキスト）に基づいて算出される。ここで、図４に、ユーザのつながり要求レベルの算出式の一例を示す。図４の式１に示すように、つながり要求レベルは、ユーザ要素（ユーザの状態）と環境要素（空間の状態）を掛け合わせて算出され得る。例えばユーザが母親で、洗顔中であって、通信先空間の様子を見たいという状態であって、また、空間内は騒がしく、掃除前の時間帯で、晴天といった空間状態である場合に、つながり要求レベルの強弱が０〜１００の数値で算出される。なお本実施形態では、図４に示すように、つながり要求レベルとして、「間合い」と「明快度」を算出することも可能である。「間合い」とは、すなわち３次元空間上の離隔距離であって、繋がっている相手との適切な距離を保つよう出力することで、心地よい接続状態を実現することができる。「明快度」とは、通信先空間の映像の見え具合である。本実施形態では、ぼかしたり遮蔽したりすることで、相手の映像が鮮明に見えないようにすることが可能であって、この際の見え具合を「明快度」と称す。

通信先ユーザのつながり要求レベルは、通信部１０７を介して、通信先の通信制御装置１０から送信される。

そして、空間距離制御部１０４は、算出したユーザのつながり要求レベルと、受信した通信先ユーザのつながり要求レベルとに基づいて、最適なつながり度合いを算出する。ここで、図５に、最適なつながり度合いの算出式の一例を示す。図５の式２に示すように、例えばユーザＡとユーザＢのつながり度合いを算出する場合、ユーザＡのつながり要求レベルと、ユーザＢのつながり要求レベルとを掛け合わせて、最適なつながり度合いを算出する。本実施形態では、最適なつながり度合いが強い程、空間同士の距離は短く、また、映像も鮮明に見えるため、高臨場感で接続し、最適なつながり度合いが低い程、空間同士の距離は長く、また、映像が鮮明に見えないため、低臨場感で接続する。なお、ここでは一例として「つながり度合い」が「間合い」と「明快度」の両方を含むものとして算出式の説明を行ったが、本実施形態はこれに限定されず、「つながり度合い」が「間合い」のみを含むものとして、算出してもよい。

操作Ｉ／Ｆ（インタフェース）１０５は、ユーザからの操作入力を受け付け、空間距離制御部１０４や３Ｄ中庭空間生成部１０６へ出力する。これにより、例えば、ユーザが任意に「ユーザのつながり要求レベル」を設定したり、次に説明する空間のシーンを設定したりすることが可能となる。また、３次元空間に配置された各種オブジェクトに対するユーザからの操作入力も可能となる。

３Ｄ中庭空間生成部１０６は、空間距離制御部１０４により設定された通信相手との距離に応じて３次元空間に配置された通信先の空間の映像と、通信元ユーザ側である手前側との間の３Ｄ空間を、「３Ｄ中庭空間」と称し、かかる空間の生成を行う。「３Ｄ中庭空間」には、通信元または通信先からの情報が反映され、また、指定されたオブジェクトが配置されたりすることも可能である。これにより、通信相手の空間と、仮想の中庭を通じてつながっているような画面を表示することが可能となる。また、中庭空間に、通信相手のユーザ状態や空間状態、相手空間の周辺情報等を反映させることで、間接的に相手の状態を認識することが可能となる。このような３Ｄ中庭空間生成部１０６により生成される３Ｄ中庭空間の詳細に関しては、後述する。

通信部１０７は、ネットワーク２０を介して他の通信制御装置１０や処理サーバ３０と接続し、データの送受信を行う。例えば通信部１０７は、空間情報取得部１０２から出力された空間情報、空間距離制御部１０４から出力された空間距離、３Ｄ中庭空間生成部１０６から出力された３Ｄ中庭空間の情報を通信先の通信制御装置１０または処理サーバ３０へ送信する。また、通信部１０７は、通信先の通信制御装置１０または処理サーバ３０から受信した空間情報、空間距離、３Ｄ中庭空間の情報等を受信する。本実施形態では、通信元および通信先において、表示される３Ｄ中庭空間および３次元空間上の距離が同期され得る。また、通信部１０７は、処理サーバ３０がネットワーク上の関連サービスサーバから取得した情報（天候情報、ニュース、スケジュール情報等）、またはネットワーク上の関連サービスサーバから当該情報を直接、受信することも可能である。

空間情報生成部１０８は、３Ｄ中庭空間生成部１０６により生成された３Ｄ中庭空間と、通信部１０７を介して受信した通信先の空間の映像に基づいて、空間情報を生成し、出力部１０９に送出する。例えば空間情報生成部１０８は、３Ｄ中庭空間生成部１０６により生成された３Ｄ中庭空間に、通信部１０７を介して受信した通信先の空間の映像を合成した空間画像情報を生成し、ディスプレイ１０９１で表示するよう制御する。

出力部１０９は、空間情報生成部１０８により生成された空間情報を、通信元のユーザに提示する機能を有する。例えば出力部１０９は、ディスプレイ１０９１、スピーカ１０９２、またはインジケータ１０９３により実現される。

記憶部１１０は、通信部１０７を介して送受信されるデータを記憶する。また、図２に示す例では、通信部１０７に接続しているが、本実施形態はこれに限定されず、通信制御装置１０に含まれる各構成の記憶領域として用いられ得る。

＜＜３．空間情報の表示例＞＞
続いて、図６〜図１５を参照して、本実施形態による空間情報の表示例について説明する。

＜３−１．離隔距離＞
上述したように、本実施形態では、相手空間画像４１が、３次元空間上において、通信元と通信先の両者のつながり要求レベルに基づいたつながり度合いに応じた距離（離隔距離）に配置される。ここで、離隔距離がゼロの場合から徐々に広がる場合における通信元のディスプレイ１０９１Ａでの表示例を、図６〜図８に示して説明する。

図６は、本実施形態による空間距離ゼロの際の表示例を示す図である。図６に示すように、ユーザＡが居る空間の壁面に設置されたディスプレイ１０９１Ａに、窓枠４０が表示され、窓枠４０の内側いっぱいに相手空間画像４１が表示されている。相手空間画像４１は例えば相手ユーザＢの居るリビングの撮像画像である。かかる映像は、例えば相手空間で撮影されたリアルタイム映像である。なお、図６に示す例では、ディスプレイ１０９１Ａの周辺に、カメラ１０１１が設置されている。また、図示しないが、ディスプレイ１０９１Ａの周辺には、スピーカ１０９２やマイク１０１２も設置され、接続された空間同士で音声の送受信も行われ得る。

図７は、本実施形態による空間距離が少し離れた際の表示例を示す図である。図７に示すように、相手空間画像４１が窓枠４０から離れて奥に表示されることで、ユーザは、視覚的に相手との距離を感じることができ、すぐ目の前に存在を感じるよりも、快適なつながり具合となる場合がある。相手空間画像４１は、例えば３次元空間上において、仮想的な構造物５１の窓部分に合成されている。また、相手空間画像４１との間には、３Ｄ中庭空間Ｓ１が存在し、ユーザＡは、３Ｄ中庭空間Ｓ１を介して、相手空間とつながっていると感じることができる。また、かかる空間距離と、３Ｄ中庭空間は、相手空間でも同期され、相手側のディスプレイからも、同じ空間距離に、こちら側の映像がリアルタイムで表示され、その間には３Ｄ中庭空間が同様に表示される。

図８は、本実施形態による空間距離がさらに離れた際の表示例を示す図である。ここでの空間距離は、図７の場合における空間距離よりさらに奥行き方向に遠く、図８に示すように、相手空間画像４１が窓枠４０からさらに離れた場所に表示され、ユーザは視覚的に相手との距離をさらに感じることとなる。

以上説明した図６〜図８では、森の中にある向かいのログハウスに通信相手のユーザが住んでいるといったシーンが適用されている。かかるシーンは、通信元ユーザまたは通信先ユーザにより予め選択することが可能である。

＜３−２．３Ｄ中庭空間の利用＞
続いて、相手空間画像４１が配置される３次元空間上の３Ｄ中庭空間の利用例について説明する。本実施形態では、例えば３Ｄ中庭空間に表示したオブジェクトを介して相互コミュニケーションを実現することが可能となる。すなわち、３Ｄ中庭空間に配置する様々な対象物に対して、自分側と相手側の双方から相互に操作や影響を及ぼすことができるようにすることによって、対象物を通じたコミュニケーションが可能となる。

例えば、３Ｄ中庭空間Ｓ１に仮想のペットを配置し、通信元ユーザおよび通信先ユーザが、エサを与えたりできるようにし、エサの多さや回数に応じてペットの活動エリアがどちらかに寄るようにしてもよい。図９は、本実施形態による３Ｄ中庭空間Ｓ１に仮想の猫５２が居る場合について説明する図である。図９に示す例では、通信元ユーザが沢山のエサを与えたため、猫５２が、通信元ユーザ側の窓枠４０の出窓部分に座ったりして、よりリアルに猫５２の存在を表現している。エサは、課金式にしてもよい。また、エサを与える等の、３Ｄ中庭空間Ｓ１内の仮想オブジェクトへの作用手法は、連携するモバイル機器から行ったり、ディスプレイ１０９１Ａがタッチパネルディスプレイ（操作Ｉ／Ｆ１０５）の場合はタッチ操作により行ったり、周辺に設けられたレバーやスイッチ等から行ったり、また、カメラ１０１１により受け付けられるジェスチャー操作により行ったりすることが想定される。

また、３Ｄ中庭空間Ｓ１には、仮想の花や植物を配置し、通信元ユーザおよび通信先ユーザが、水を与えたり、種を撒いたりすることで、一緒に植物を育てるコミュニケーションを実現することができる。また、図１０に示すように、窓枠４０の出窓部分に、植物５３が並べられてもよい。通信元ユーザは、お気に入りの仮想植物を購入して配置してもよいし、相手からプレゼントされた仮想植物を配置してもよい。

また、３Ｄ中庭空間Ｓ１に焚火を配置して、通信元ユーザおよび通信先ユーザから薪が投げ入れられた場合に炎があがるよう表示制御してもよい。

さらに、３Ｄ中庭空間Ｓ１には、相手空間画像４１から抽出した特定物を配置するようにしてもよい。これにより、例えば部屋が散らかっている場合に、部屋全ては見られたくないが、子供が遊んでいる様子のみは祖父母に見せたい場合等、特定部分のみを選択的に通信相手と共有することが可能となる。図１１は、リビング映像内の特定物のみを３Ｄ中庭空間Ｓ１に配置する場合について説明する図である。

図１１左に示すように、通信相手から許可された子供画像６０の映像だけが相手空間画像４１から抽出され、図１１右に示すように、相手空間画像４１の手前の３Ｄ中庭空間Ｓ１に、抽出された子供画像６０’が表示される。これにより、相手空間画像４１は遠くにあるためよく見えない場合でも、抽出された特定部分のみが３Ｄ中庭空間Ｓ１に表示されてよく見ることができる。抽出する特定部分は、人間に限定されず、動物や人工物であってもよい。例えば、相手空間内にいるペットを抽出して３Ｄ中庭空間Ｓ１に配置したり、相手空間内に置いてあるピアノとその奏者だけを３Ｄ中庭空間Ｓ１に配置して演奏を聞いたりすることができる。

相手空間画像４１から子供画像６０の抽出は、例えば相手空間画像４１の物体認識（奥行き認識）を行って、動いている物体(動体認識)のみを抽出する背景分離手法を用いたり、人間の骨格(ボーン)を認識し、その関節や各部の動きを規定の３Ｄモデルに適応することで対象人物のみを抽出する人物分離手法を用いたりすることが想定される。通信制御装置１０は、子供画像６０を一般的な（または予め取得した当該子供の）３Ｄモデルに適応することで、３Ｄ中庭空間Ｓ１を動き回る子供をよりリアルに表現することができる。

また、本実施形態では、通信制御装置１０は、相手空間から取得した様々な情報を３Ｄ中庭空間に反映させ、間接的に相手の状況を伝えることが可能となる。

例えば、通信制御装置１０は、相手空間内の照明(色温度、明るさ、揺らぎ)を、３Ｄ中庭空間や、距離が近い際には通信元ユーザ側の出窓部分に反映する等、通信先の実空間の環境情報を反映させてもよい。また、通信制御装置１０は、相手空間内において、調理器を操作（火をつける等）している場合、相手空間映像が配置された仮想の構造物の仮想の煙突から煙が出るよう制御してもよい。

また、通信制御装置１０は、相手空間内の温度、湿度、風（気流）等を、３Ｄ中庭空間に反映させたり（例えば３Ｄ中庭空間に配置された仮想の動物や植物で表現）、通信元空間の空調制御装置等で再現したりしてもよい。

また、通信制御装置１０は、通信先の地域の天候を反映させてもよい。具体的には、通信制御装置１０は、例えば通信相手の地域に台風が接近してくると、相手の家（仮想的な構造物５１）の上空を曇りにし、周辺の木が強風で揺れるよう制御する。また、通信制御装置１０は、通信相手の地域に火山がある場合、気象情報を参照して、噴煙の様子をリアルタイムで再現してもよい。ここで、図１２に、気象情報を３Ｄ空間に反映した場合について説明する図を示す。図１２に示すように、通信先の地域の噴煙の様子（オブジェクト５４）や天候が、相手空間画像４１が配置された仮想的な構造物５１の周辺に反映され、ユーザＡは、リアルタイムで通信先の気象状況を把握することができる。

また、通信制御装置１０は、３Ｄ中庭空間に仮想の植物を配置している際に、通信先の地域または通信元の地域の気象情報を当該仮想の植物に反映させてもよい。例えば、通信制御装置１０は、良い天気が続いた場合は、植物が成長して花が咲く等の制御を行ってもよい。

また、通信制御装置１０は、通信相手の一日の行動情報を取得し、そのダイジェストをまとめて３Ｄ中庭空間に設置した仮想的な掲示板に表示してもよい。

＜３−３．シーン事例＞
相手空間画像を配置する３Ｄ空間のシーンは、様々な場が想定される。図１３〜図１４に適用シーンの一例を示す。

図１３左に示す図では、森の中にある向かいのログハウスに通信相手が住んでいるシーンＳ２を適用したものであって、仮想の構造物５５の窓部分４２に、相手空間画像が表示される。また、図１３右に示す図では、都会の向かい合った高層マンションの一室に通信相手が住んでいるシーンＳ３を適用したものであって、仮想の構造物５６の窓部分４３に、相手空間画像が表示される。

図１４左に示す図では、ある戦闘ゲームにおける一室に通信相手（ゲーム相手）が住んでいるシーンＳ４を適用したものであって、仮想の構造物５７のドア部分４４に、相手空間画像が表示される。また、図１４右に示す図では、並走する列車に通信相手が居るシーンＳ５を適用したものであって、仮想の構造物５８のドア部分４５に、相手空間画像が表示される。

上述したような各シーンは、予め登録された一般的なシーンの他、映画コンテンツから抽出されたシーン、ゲームコンテンツから抽出されたシーンが想定される。また、並走する列車に通信相手が居るシーンＳ５は、通信元ユーザが自動車や電車等の移動する空間において通信相手とつながる場合に適用されるようにしてもよい。

＜３−４．視線移動に応じた画面変化＞
また、本実施形態による通信制御装置１０は、ディスプレイ１０９１Ａを見ているユーザＡの視線移動に応じて表示画面を変化させることで、空間の存在をより感じさせることができる。

図１５Ａは、本実施形態による視線移動に応じた画面変化について説明する図である。図１５Ａ左に示すように、ユーザＡが、ディスプレイ１０９１Ａの前に立ち、相手空間画像４１を見ている状態から、図１５Ａ右に示すように、ユーザＡがディスプレイ１０９１Ａに対して右側に移動した際、通信制御装置１０は、視線移動に応じてアングルを変化させた相手空間画像４１−１を生成し、表示する。図１５Ａに示す例では、窓に見立てたディスプレイ１０９１Ａに対してユーザＡが右側から見ると、部屋の左側が見えるようになる。また、窓枠４０が奥行き方向に厚みを持った出窓画像により表現されている場合、通信制御装置１０は、同様に視点移動に応じて厚みの幅や出窓の角度を変化させることで、実施に窓を介して相手空間とつながっているよう見える視覚効果を提示することができる。図１５Ｂは、本実施形態による他の視線移動に応じた画面変化について説明する図である。図１５Ｂ左側に示す例は、ユーザＡ（不図示）が、窓に見立てたディスプレイ１０９１Ａに対して左に移動した場合に表示される相手空間画像４１−２の一例である。ディスプレイ１０９１Ａを左側から見ると、窓を介して部屋の右側が見えるようになる。また、図１５Ｂ中央に示す例は、ユーザＡがディスプレイ１０９１Ａに対して上方向に移動した場合に表示される相手空間画像４１−３の一例である。ディスプレイ１０９１Ａを上方向から見ると、窓を介して部屋の下側が見えるようになる。また、図１５Ｂ右側に示す例は、ユーザＡがディスプレイ１０９１Ａに対して下方向に移動した場合に表示される相手空間画像４１−４の一例である。ディスプレイ１０９１Ａを下方向側から見ると、窓を介して部屋の上側が見えるようになる。

視線移動の検知は、カメラ１０１１により行われ得るが、ユーザＡの視線検出の他、頭部の向きを検出して頭部追従により同様の表示制御を行うことが可能である。

＜＜４．動作処理＞＞
次に、本実施形態による動作処理について図１６〜図１８を参照して具体的に説明する。

＜４−１．通信制御処理＞
図１６および図１７は、本実施形態による通信制御処理を示すシーケンス図である。ここでは、一例として、通信制御装置１０Ａが通信元（空間Ａ）、通信制御装置１０Ｂが通信先（空間Ｂ）であって、処理サーバ３０を介してデータの送受信が行われている場合について説明する。

図１６に示すように、まず、通信制御装置１０Ａは、接続先の呼び出しを通信制御装置１０Ｂに対して行い（ステップＳ１０３）、通信制御装置１０Ｂから接続許可を受信すると（ステップＳ１０６）、セッションを確立する（ステップＳ１０９）。

次に、通信制御装置１０Ａは、空間情報取得部１０２により空間情報を取得し（ステップＳ１１２）、状態判定部１０３により、ユーザＡの状態および空間Ａの状態を判別する（ステップＳ１１５）。

次いで、通信制御装置１０Ａは、空間情報や、状態情報を、通信部１０７から通信制御装置１０Ｂへ送信する（ステップＳ１１８）。

一方、通信制御装置１０Ｂ側でも、同様に空間情報の取得（ステップＳ１２１）、ユーザＢの状態・空間Ｂの状態判別を行い（ステップＳ１２４）、各種情報を通信制御装置１０Ａへ送信する（ステップＳ１２７）。

次に、通信制御装置１０Ａは、空間距離制御部１０４により、ユーザＡのつながり要求レベルを算出し（ステップＳ１３０）、処理サーバ３０へ送信する（ステップＳ１３３）。ユーザＡのつながり要求レベルは、ユーザＡにより任意に入力されたものであってもよいし、ユーザ状態や空間状態の判別結果に基づいて算出されてもよい。

次いで、通信制御装置１０Ｂ側でも同様に、空間距離制御部１０４により、ユーザＢのつながり要求レベルを算出し（ステップＳ１３６）、処理サーバ３０へ送信する（ステップＳ１３９）。

続いて、処理サーバ３０は、ユーザＡのつながり要求レベルおよびユーザＢのつながり要求レベルに基づいて、距離調整を行う（ステップＳ１４２）。すなわち、処理サーバ３０は、ユーザＡのつながり要求レベルおよびユーザＢのつながり要求レベルに基づいて、最適なつながり度合いを算出する。つながり度合いの算出は、図５を参照して上述した式２により行われ得る。

次に、処理サーバ３０は、算出した距離を、通信制御装置１０Ａ、１０Ｂにそれぞれ送信する（ステップＳ１４５、Ｓ１４８）。

次いで、通信制御装置１０Ａ、１０Ｂでは、空間距離制御部１０４により、空間距離の最適制御を行う（ステップＳ１５１、Ｓ１５４）。具体的には、空間距離制御部１０４は、処理サーバ３０から送信された距離を、空間距離として設定する。

次に、処理サーバ３０は、通信制御装置１０Ａ、１０Ｂにそれぞれシーン情報を送信する（ステップＳ１５７、Ｓ１６３）。送信されるシーン情報は、ユーザＡまたはユーザＢにより選択されたシーンの情報であってもよいし、処理サーバ３０が自動的に決定したシーンの情報であってもよい。

次いで、通信制御装置１０Ａは、３Ｄ中庭空間生成部１０６により、処理サーバ３０から送信されたシーン情報、上記ステップＳ１２７で受信した空間情報、状態判別情報を用いて、３Ｄ中庭空間の生成を行う（ステップＳ１６０）。また、３Ｄ中庭空間生成部１０６は、関連情報（気象情報、相手空間内の照度、調理器の状態、相手ユーザのスケジュール情報、行動履歴等）が送信された場合（ステップＳ１６９）、当該関連情報も３Ｄ中庭空間に反映させる（ステップＳ１７２）。

一方、通信制御装置１０Ｂ側でも、同様に、３Ｄ中庭空間の生成（ステップＳ１６６）、受信した関連情報の３Ｄ中庭空間への反映（ステップＳ１７５、Ｓ１７８）。

次に、通信制御装置１０Ａは、空間情報生成部１０８により生成された、３Ｄ中庭空間と相手空間画像（空間Ｂの映像）を含む空間情報を、出力部（ディスプレイ、スピーカ）から提示する（ステップＳ１８１）。一方、通信制御装置１０Ｂ側でも同様に、３Ｄ中庭空間と相手空間画像（空間Ａの映像）を含む空間情報を、出力部（ディスプレイ、スピーカ）から提示する（ステップＳ１８４）。

上述した３Ｄ中庭空間および互いの相手空間画像は、処理サーバ３０により同期され、互いのディスプレイにおいて、同じタイミング、同じ距離感で表示され得る。

続いて、通信制御装置１０Ａは、何らかの情報更新があった場合（ステップＳ１８７／Ｙｅｓ）、ステップＳ１１２からの処理を繰り返す。また、通信制御装置１０Ｂも、何らかの情報更新があった場合（ステップＳ１９０／Ｙｅｓ）、ステップＳ１２１からの処理を繰り返す。

そして、通信制御装置１０Ａは、接続終了が指示されると（ステップＳ１９３／Ｙｅｓ）、通信制御装置１０Ｂに対して接続終了の確認を行い（ステップＳ１９６）、通信制御装置１０Ｂから接続終了の許可を受信すると（ステップＳ１９９）、セッションを切断する（ステップＳ２０２）。

以上、本実施形態による通信制御処理について説明した。なお、ここでは一例として処理サーバ３０により同期処理や、最適なつながり度合いの算出、シーン情報の送信等を行っているが、本実施形態はこれに限定されず、これらの処理を通信制御装置１０で行うことも可能である。

＜４−２．シーン設定処理＞
次に、シーン（３Ｄ空間シーン）設定処理について図１８を参照して説明する。図１８に示すように、まず、処理サーバ３０は、シーン候補を通信制御装置１０Ａに送信（提示）する（ステップＳ３０３）。

次に、通信制御装置１０Ａは、受信したシーン候補をディスプレイに表示し、ユーザＡによる選択を受け付ける（ステップＳ３０６）。

次いで、選択されたシーンが有料の場合（ステップＳ３０９／Ｙｅｓ）、処理サーバ３０において課金処理が行われる（ステップＳ３１２）。

次に、処理サーバ３０は、３Ｄ中庭空間に配置するオブジェクト候補を通信制御装置１０Ａに送信（提示）する（ステップＳ３１５）。

次いで、通信制御装置１０Ａは、オブジェクトを３Ｄ中庭空間に配置する（ステップＳ３１８）。この際、通信制御装置１０Ａは、配置するオブジェクトをユーザＡに任意に選択させてもよい。

次に、配置するオブジェクトが有料の場合（ステップＳ３２１／Ｙｅｓ）、処理サーバ３０において課金処理が行われる（ステップＳ３２４）。

以上によりシーン設定が終了する。なお、ここでは一例として通信制御装置１０Ａを操作するユーザＡにより、通信相手と共有するシーンを設定する場合について説明したが、本実施形態はこれに限定されず、複数ユーザにより共同してシーン設定が行わるようにしてもよい。

次いで、設定したシーンの適用について説明する。通信制御装置１０Ａは、空間情報取得部１０２により空間情報を取得すると（ステップＳ３２７）、空間情報をシーンに紐付ける（ステップＳ３３０）。具体的には、通信制御装置１０Ａは、空間情報をシーンに反映させたり、通信相手の空間情報をシーン内に配置したりする。

次に、通信制御装置１０Ａは、関連サービス情報を取得すると（ステップＳ３３３）、関連情報をシーンに紐付ける（ステップＳ３３６）。具体的には、通信制御装置１０Ａは、関連情報をシーンに反映させる。

＜＜５．応用例＞＞
続いて、本実施形態の応用例について図１９〜図２１を参照して説明する。

図１９は、本実施形態の応用例による通信制御装置１００の構成の一例を示すブロック図である。図１９に示すように、通信制御装置１００は、入力部１０１、空間情報取得部１０２、状態判定部１０３、空間距離制御部１０４、操作Ｉ／Ｆ（インタフェース）１０５、３Ｄ中庭空間生成部１０６、通信部１０７、空間情報生成部１０８、出力部１０９、記憶部１１０、および送信情報生成部１１１を有する。

通信制御装置１００の構成は、図２を参照して説明した本実施形態による通信制御装置１０と比較して送信情報生成部１１１をさらに備える点が異なるため、ここでは通信制御装置１０と相違する点について主に説明し、その他の構成の説明は図２を参照して説明したものと同様であるため、省略する。

送信情報生成部１１１は、通信部１０７を介して通信先へ送信するデータ量を調整することが可能である。送信情報生成部１１１は、空間距離制御部１０４により設定された最適なつながり度合いに応じた距離の長さに応じて、低解像で済む場合はカメラ１０１１で撮像した通信元側の空間の映像を低解像度に圧縮して送信する等して、通信コストを低減させることが可能となる。

例えば、送信情報生成部１１１は、最適なつながり度合いに応じた距離が１０ｍの間合いの場合、通信先へ送信するＨＤ解像度の映像をＱＶＧＡ（quarter video graphics array）解像度に圧縮する（すなわち、解像度を落とす）。

また、通信先で時間積分(長期露光効果)して表示される場合、フレーム速度を例えば60fpsから5fpsに落として送信するようにしてもよい。

また、最適なつながり度合いは更新されるため、例えば送信情報生成部１１１は、つながり度合いが強くなった場合（距離が短くなった場合）は、ＱＶＧＡ解像度からＶＧＡ（video graphics array）解像度に上げて送信するようにしてもよい。また、送信情報生成部１１１は、複数の相手空間画像が３次元空間上に配置され、一方の相手空間Ｘの画像が近付いて来た（すなわち当該一方の通信先とのつながり度合いが強くなった）場合、当該一方の通信先へ送信する映像をＱＶＧＡ解像度からＶＧＡ解像度に上げるよう制御してもよい。また、当該一方の相手空間画像が近付いてきたため、他方の相手空間Ｙの画像が見切れてしまった場合、他方の相手空間からもこちら側が相手空間Ｘにより見切れるため、送信情報生成部１１１は、映像の送信を停止させてもよい。

図２０は、応用例による送信処理を示すフローチャートである。図２０に示すように、まず、通信制御装置１００の送信情報生成部１１１は、空間情報取得部１０２から空間情報を取得し（ステップＳ４０３）、空間距離制御部１０４から最適なつながり度合いを取得する（ステップＳ４０６）。

次に、送信情報生成部１１１は、相手ユーザと調整された最適なつながり度合いに基づいて、相手ユーザ側で全てのデータを提示するか否かを判断する（ステップＳ４０９）。例えば送信情報生成部１１１は、最適なつながり度合いに応じた距離が所定の閾値以下の場合、相手ユーザ側で全てのデータを提示すると判断する。

次いで、相手ユーザ側で全てのデータを提示しない場合（ステップＳ４０９／Ｎｏ）、送信情報生成部１１１は、相手ユーザ側でのデータ提示に必要な（必要最低限の）データを生成する（ステップＳ４１２）。例えば送信情報生成部１１１は、解像度を落としたり、画像を縮小したりする。

そして、通信部１０７は、相手ユーザ側で全てのデータを提示する場合は（ステップＳ４０９／Ｙｅｓ）全てのデータを、全てのデータを提示しない場合は送信情報生成部１１１により生成した必要なデータを、相手ユーザ側へ送信する（ステップＳ４１５）。

以上説明した例では、最適なつながり度合いに応じた距離（間合い）に応じてデータの圧縮可否を行う旨を説明したが、本実施形態はこれに限定されず、例えば最適なつながり度合いに「明快度」が含まれ、明快度が所定の閾値以下の場合には、同様にデータの圧縮を行ってもよい。

図２１は、明快度に応じた相手空間画像４６の表示について説明する図である。つながり度合いの実現は、３次元空間上の距離の制御の他、表示する相手空間の映像の明快度によって調整することも可能である。例えば図２１に示すように、相手空間画像４６を、カーテンにより多少遮蔽されている状態に編集することで、同じ離隔距離でもつながり度合いを低くすることが可能となる。かかる遮蔽状態は、通信元および通信先で同期されるため、送信情報生成部１１１は、相手側へ送信する映像を遮蔽した状態に編集し、データ容量の軽減、およびプライバシーの保護を実現可能とする。また、映像の明快度の調整は、カーテン越しの映像に限定されず、例えば窓越しに相手のシルエットが見える映像や、相手の室内（静物）のみクリアに表示し、動いている人物を時間積分（長期露光効果）で透過して表示する映像で調整してもよい。

＜＜６．まとめ＞＞
上述したように、本開示の実施形態による情報処理システムでは、空間のつながりに３次元的表現を用いることで通信相手との距離を演出し、より快適なコミュニケーションを実現することを可能とする。

具体的には、通信元の空間に設置されたディスプレイを窓（またはドア）に見立てて、３次元空間上の所定の距離離れた場所に、通信相手の空間の映像を配置する空間画像を表示することで、通信相手との距離を視覚的に表現することができる。なお、壁面に設置されるディスプレイの縦横比は、実際の窓やドアで用いられている寸法に合わせて実現されてもよい。また、ディスプレイをドアに見立てる場合、ディスプレイの下辺が床面付近に位置するように配置することで、よりリアルに、ドアの向こうの空間の存在を表現することができる。

また、３次元空間上に配置される通信相手の空間の映像の表示領域の縦横比を、ディスプレイの縦横比と同じにするよう制御してもよい。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上述した通信制御装置１０、または処理サーバ３０に内蔵されるＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、およびＲＡＭ（Random Access Memory）等のハードウェアに、通信制御装置１０、または処理サーバ３０の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。

また、上述した実施形態では、ディスプレイ１０９１が壁に設置されている場合について説明したが、本実施形態はこれに限定されず、情報処理端末に設けられた表示部をディスプレイ１０９１として用いてもよい。また、例えば透過型または非透過型のＨＭＤ（Head Mounted Display）の表示部をディスプレイ１０９１として用いてもよい。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、本技術は以下のような構成も取ることができる。
（１）
通信先からデータを受信する受信部と、
前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、
前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、
を備える、情報処理装置。
（２）
前記情報処理装置は、
前記３次元空間上における前記通信元と前記通信先との仮想的な離隔距離を制御する距離制御部をさらに備え、
前記生成部は、前記距離制御部により調整された離隔距離に対応する位置に、前記通信先の空間に対応する画像を配置する、前記（１）に記載の情報処理装置。
（３）
前記距離制御部は、前記通信元からのつながり要求レベルおよび前記通信先からのつながり要求レベルに基づいて、前記離隔距離を制御する、前記（２）に記載の情報処理装置。
（４）
前記距離制御部は、前記通信元の空間情報に基づいて判定された通信元ユーザのコンテキストおよび前記通信先の空間情報に基づいて判定された通信先ユーザのコンテキストに基づいて、前記離隔距離を制御する、前記（２）または（３）に記載の情報処理装置。
（５）
前記コンテキストは、ユーザの状態、ユーザが居る実空間の状態、時間、季節、天候、場所、または相手ユーザとの関係性の少なくともいずれかを含む、前記（４）に記載の情報処理装置。
（６）
前記３次元空間上に配置される前記通信先の空間に対応する画像は、前記通信先から受信した前記通信先の空間内の撮像画像に基づいて生成される、前記（１）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記生成部は、前記通信先の空間に関連する関連情報をさらに用いて、前記空間画像情報を生成する、前記（６）に記載の情報処理装置。
（８）
前記関連情報は、前記通信先における気象情報、前記通信先の空間内の照度、調理器の状態、前記通信先のユーザのスケジュール情報または行動履歴を少なくとも含む、前記（７）に記載の情報処理装置。
（９）
前記生成部は、前記３次元空間上に配置された仮想建築物または仮想移動物体の窓領域またはドア領域に前記通信先の空間に対応する画像を配置した前記空間画像情報を生成する、前記（６）〜（８）のいずれか１項に記載の情報処理装置。
（１０）
前記生成部は、前記通信先の空間のリアルタイムの情報に基づいて前記空間画像情報を生成する、前記（６）〜（９）のいずれか１項に記載の情報処理装置。
（１１）
前記表示制御部は、前記表示部に表示する空間画像情報を、ユーザの視点移動に追従するよう制御する、前記（１）〜（１０）のいずれか１項に記載の情報処理装置。
（１２）
前記生成部は、設定された所定シーンを反映した３次元空間を生成する、前記（１）〜（１１）のいずれか１項に記載の情報処理装置。
（１３）
前記表示制御部は、前記通信先の空間に対応する画像が配置されている位置の手前側の空間に表示されたオブジェクトに対して、前記通信元または前記通信先から取得した情報を反映させる、前記（１）〜（１２）のいずれか１項に記載の情報処理装置。
（１４）
前記生成部は、前記通信先の空間に対応する画像に基づいて生成したオブジェクトを、前記通信先の空間に対応する画像が配置されている位置の手前側の空間に配置した前記空間画像情報を生成する、前記（１）〜（１３）のいずれか１項に記載の情報処理装置。
（１５）
前記情報処理装置は、
前記通信先へ送信するデータを、前記通信元の空間から取得したデータに基づいて、前記仮想的な離隔距離に応じて生成するデータ生成部をさらに備える、前記（２）に記載の情報処理装置。
（１６）
前記情報処理装置は、前記通信先の空間に対応する画像の表示と、前記通信元の空間に対応する画像の前記通信先の空間での表示とを同期させるよう制御する、前記（１）〜（１５）のいずれか１項に記載の情報処理装置。
（１７）
プロセッサが、
通信先からデータを受信することと、
前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成することと、
前記生成された空間画像情報を通信元の表示部に表示するよう制御することと、
を含む、情報処理方法。
（１８）
コンピュータを、
通信先からデータを受信する受信部と、
前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、
前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、
として機能させるための、プログラム。

１ テレプレゼンスシステム
１０（１０Ａ〜１０Ｃ） 通信制御装置
２０ ネットワーク
３０ 処理サーバ
４０ 窓枠
４１ 相手空間画像
４１’ 相手空間画像
１００ 通信制御装置
１０１ 入力部
１０１１ カメラ
１０１２ マイク
１０１３ センサ
１０２ 空間情報取得部
１０３ 状態判定部
１０４ 空間距離制御部
１０５ 操作Ｉ／Ｆ
１０６ 中庭空間生成部
１０７ 通信部
１０８ 空間情報生成部
１０９ 出力部
１０９１ ディスプレイ
１０９２ スピーカ
１０９３ インジケータ
１１０ 記憶部
１１１ 送信情報生成部

Claims (18)

1. 通信先からデータを受信する受信部と、
   前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、
   前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、
   を備える、情報処理装置。
2. 前記情報処理装置は、
   前記３次元空間上における前記通信元と前記通信先との仮想的な離隔距離を制御する距離制御部をさらに備え、
   前記生成部は、前記距離制御部により調整された離隔距離に対応する位置に、前記通信先の空間に対応する画像を配置する、請求項１に記載の情報処理装置。
3. 前記距離制御部は、前記通信元からのつながり要求レベルおよび前記通信先からのつながり要求レベルに基づいて、前記離隔距離を制御する、請求項２に記載の情報処理装置。
4. 前記距離制御部は、前記通信元の空間情報に基づいて判定された通信元ユーザのコンテキストおよび前記通信先の空間情報に基づいて判定された通信先ユーザのコンテキストに基づいて、前記離隔距離を制御する、請求項２に記載の情報処理装置。
5. 前記コンテキストは、ユーザの状態、ユーザが居る実空間の状態、時間、季節、天候、場所、または相手ユーザとの関係性の少なくともいずれかを含む、請求項４に記載の情報処理装置。
6. 前記３次元空間上に配置される前記通信先の空間に対応する画像は、前記通信先から受信した前記通信先の空間内の撮像画像に基づいて生成される、請求項１に記載の情報処理装置。
7. 前記生成部は、前記通信先の空間に関連する関連情報をさらに用いて、前記空間画像情報を生成する、請求項６に記載の情報処理装置。
8. 前記関連情報は、前記通信先における気象情報、前記通信先の空間内の照度、調理器の状態、前記通信先のユーザのスケジュール情報または行動履歴を少なくとも含む、請求項７に記載の情報処理装置。
9. 前記生成部は、前記３次元空間上に配置された仮想建築物または仮想移動物体の窓領域またはドア領域に前記通信先の空間に対応する画像を配置した前記空間画像情報を生成する、請求項６に記載の情報処理装置。
10. 前記生成部は、前記通信先の空間のリアルタイムの情報に基づいて前記空間画像情報を生成する、請求項６に記載の情報処理装置。
11. 前記表示制御部は、前記表示部に表示する空間画像情報を、ユーザの視点移動に追従するよう制御する、請求項１に記載の情報処理装置。
12. 前記生成部は、設定された所定シーンを反映した３次元空間を生成する、請求項１に記載の情報処理装置。
13. 前記表示制御部は、前記通信先の空間に対応する画像が配置されている位置の手前側の空間に表示されたオブジェクトに対して、前記通信元または前記通信先から取得した情報を反映させる、請求項１に記載の情報処理装置。
14. 前記生成部は、前記通信先の空間に対応する画像に基づいて生成したオブジェクトを、前記通信先の空間に対応する画像が配置されている位置の手前側の空間に配置した前記空間画像情報を生成する、請求項１に記載の情報処理装置。
15. 前記情報処理装置は、
    前記通信先へ送信するデータを、前記通信元の空間から取得したデータに基づいて、前記仮想的な離隔距離に応じて生成するデータ生成部をさらに備える、請求項２に記載の情報処理装置。
16. 前記情報処理装置は、前記通信先の空間に対応する画像の表示と、前記通信元の空間に対応する画像の前記通信先の空間での表示とを同期させるよう制御する、請求項１に記載の情報処理装置。
17. プロセッサが、
    通信先からデータを受信することと、
    前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成することと、
    前記生成された空間画像情報を通信元の表示部に表示するよう制御することと、
    を含む、情報処理方法。
18. コンピュータを、
    通信先からデータを受信する受信部と、
    前記通信先の空間に対応する画像が３次元空間上の所定の位置に配置された空間画像情報を生成する生成部と、
    前記生成された空間画像情報を通信元の表示部に表示するよう制御する表示制御部と、
    として機能させるための、プログラム。

Images