JP6541497B2 - コミュニケーションシステム、その制御方法及びプログラム - Google Patents

Description

本発明は、遠隔地とコミュニケーションを取るためのコミュニケーションシステム、その制御方法、及びプログラムに関する。

離れた場所（遠隔地）にいる相手とコミュニケーションを取るためのシステムが知られている。特許文献１には、離れた場所にいる相手と会議を行うための遠隔会議システムが開示されている。特許文献１のシステムには、人物を撮像するためのカメラと、画像を投影するためのプロジェクタと、プロジェクタによって投影された画像を映し出すスクリーンが含まれる。

特許文献１のシステムでは、ある会議室に備えられたカメラで撮像した人物画像が相手側（遠隔地）のプロジェクタによってスクリーンに投影される一方で、相手側のカメラで撮像された人物が会議室のプロジェクタによってスクリーンに投影される。また、特許文献１には、人物を等身大のサイズで映し出すことによって会議の臨場感を高めることが示されている。

特開２００８−１９１６１３号公報

特許文献１のシステムにおいて、カメラは人物を前面側から撮像するために使用される。従って、複数の人物が向かい合ってコミュニケーションを取る場合には特許文献１のシステムは有効であると考えられる。しかしながら、例えばコミュニケーションとしてオフィスの会議を想定すると、特許文献１のシステムでは十分なコミュニケーションを取ることができない場合がある。

会議の場合、人物はスクリーンの前に移動してスクリーンに投影された資料を指さしたり、ホワイトボードに新たな記入を行う場合がある。このような場合、人物のアクション（指さしや新たな記入）を遠隔地に伝える為に、人物を背面側から撮像することが望ましい。ところが、特許文献１のシステムの場合、人物を背面側から撮像することは想定されていない。

これを踏まえて、人物を前面側から撮像するための前面カメラに加えて、人物を背面側から撮像するための背面カメラを更に用いることが検討されている。しかしながら、前面カメラで撮像した人物画像と背面カメラで撮像した人物画像のどちらを遠隔地に投影するかをユーザ（例えば会議の参加者）に手動で切り替えさせると、コミュニケーションがその都度停滞することになる。これは、円滑なコミュニケーションを妨げる要因となる。

そこで本発明では、前面カメラで撮像した人物画像と背面カメラで撮像した人物画像のどちらを遠隔地に投影するかを、ユーザに意識させることなく自動的に切り替え可能な仕組みを提供することを目的とする。

上述した課題を解決するために、本発明が提供するコミュニケーションシステムは、第１の投影面に画像を投影する第１の投影手段と、前記第１の投影面の前に位置する人物を前記第１の投影面側から撮像する第１の撮像手段と、前記人物に対して前記第１の投影面の反対側から前記人物を撮像する第２の撮像手段と、第２の投影面に投影する画像として、前記第１の撮像手段によって撮像された人物画像と、前記第２の撮像手段によって撮像された人物画像のいずれかを、前記人物の位置に基づいて選択する選択手段と、前記選択手段によって選択された人物画像を前記第２の投影面に投影する第２の投影手段とを備え、前記第２の投影手段によって前記第２の投影面に投影される人物画像には、透明化処理が実行されることを特徴とする。

また、本発明が提供するコミュニケーションシステムは、遠隔地とコミュニケーションを行うためのコミュニケーションシステムであって、投影面に画像を投影する第１の投影手段と、前記投影面の前に位置する人物を前記投影面側から撮像する第１の撮像手段と、前記人物に対して前記投影面の反対側から前記人物を撮像する第２の撮像手段と、前記第１の撮像手段によって撮像された人物画像と、前記第２の撮像手段によって撮像された人物画像のいずれかを、前記人物の位置に基づいて選択する選択手段と、前記選択手段によって選択された人物画像に透明化処理を実行する処理手段と、前記透明化処理が実行された人物画像を前記遠隔地に送信する送信手段とを備えることを特徴とする。

本発明によれば、前面カメラで撮像した人物画像と背面カメラで撮像した人物画像のどちらを遠隔地に投影するかを自動的に切り替えることができるため、円滑なコミュニケーションが促進される。

コミュニケーションシステムの構成を示す図である。 コミュニケーションを行っている様子を示す図である。 コミュニケーションを行っている様子を示す図である。 コミュニケーションシステムのハードウェア構成を示す図である。 背面人物画像と前面人物画像の切り替えについて説明する図である。 遠隔地のスクリーンに投影される人物画像を説明する図である。 制御サーバが実行する処理を示すフローチャートである。 遠隔地の制御サーバが実行する処理を示すフローチャートである。

以下、本発明を実施するための最良の形態について図面を用いて説明する。なお、以下の実施の形態は特許請求の範囲に係る発明を限定するものでなく、また実施の形態で説明されている特徴の組み合わせの全てが発明の解決手段に必須のものとは限らない。

（実施形態１）
図１は、本発明が適用されるコミュニケーションシステムの断面図である。このコミュニケーションシステムを用いることにより、オフィス１（例えば本社）とオフィス２（例えば支社）の間でコミュニケーションを取ることが可能となっている。なお、ここでは２箇所のオフィスを例にしているが、３以上のオフィス間でコミュニケーションを取ることが可能な構成であってもよい。

また、ここで説明する各オフィスは、移動に数時間を要するほど離れたものであっても良いし、同一のビルに設けられた別の会議室であっても良い。即ち、「遠隔」という表現は、物理的な空間が別であることを示すものであり、物理的な距離や移動にかかる時間の長さを定義するものではない。

図１（Ａ）に示すオフィス１には、プロジェクタ１０１、スクリーン１０２、前面カメラ１０３、背面カメラ１０４が備えられている。プロジェクタ１０１は、他のオフィスで撮像された画像をスクリーン１０２に投影する投影装置である。本実施形態の場合、前面カメラ１０３や背面カメラ１０４が撮像する画像、及び、スクリーン１０２に投影される画像は動画を想定しているが、静止画であってもよい。

プロジェクタ１０１は、会議資料と遠隔地（例えばオフィス２）の人物画像とを重畳してスクリーン１０２に投影する。なお、本実施形態では１つのプロジェクタを用いてスクリーン１０２に投影を行う構成を説明するが、プロジェクタを複数設けて、会議資料と遠隔地の人物画像をそれぞれ異なるプロジェクタが投影してもよい。

スクリーン１０２は、プロジェクタ１０１によって投影される画像を映し出す投影面である。なお、スクリーン１０２は、他のオフィスとのコミュニケーションを取るときに一時的に設置するものであっても良いし、オフィスの壁がスクリーン１０２の役割を兼ねても良い。また、本実施形態では画像を表示する手段としてプロジェクタとスクリーンを使用する例を示すが、大型の液晶ディスプレイを用いて画像を表示するようにしても良い。

前面カメラ１０３は、人物１０５を撮像するための撮像装置であり、スクリーン１０２に埋め込まれている。前面カメラ１０３は、スクリーン１０２の前に立つ人物１０５の前面を、投影面側であるスクリーン１０２側から撮像するためのカメラである。人物１０５がスクリーン１０２の方を向いている場合に人物１０５の前面を撮像できるように、前面カメラ１０３は図１（Ａ）に示す位置に設置される。

背面カメラ１０４は、人物１０５を撮像するための撮像装置である。背面カメラ１０４は、スクリーン１０２の前に立つ人物１０５の背面や、スクリーン１０２に映し出された画像を撮像するためのカメラである。人物１０５がスクリーン１０２の方を向いている場合に人物１０５の背面（背中側）を撮像できるように、背面カメラ１０４は図１（Ａ）に示す位置（人物１０５に対してスクリーン１０２の反対側）に設置される。

前面カメラ１０３には、被写体までの距離を検知するための距離センサが含まれる。前面カメラ１０３によって得られる画像には、ＲＧＢで８ビット３チャネルの情報からなるカラー画像と、８ビット１チャネルの情報からなる距離画像が含まれる。距離画像を用いることで、前面カメラ１０３は、スクリーン１０２と人物１０５との間の距離を測定可能である。

また、図１（Ｂ）に示すように、人物１１５が居るオフィス２にも、オフィス１と同様の設備（プロジェクタ１１１、スクリーン１１２、前面カメラ１１３、背面カメラ１１４）が備えられている。

図２（Ａ）は、コミュニケーションシステムの外観図であり、オフィス１の人物１０５がオフィス２の人物１１５とコミュニケーションを取っている様子を示している。スクリーン１０２には、オフィス２の前面カメラ１１３によって撮像された人物１１５と、会議資料２００とが投影されている。

オフィス１には、送信器２０１ａと受信器２０１ｂから成るデジタイザが備えられている。デジタイザは、スクリーン１０２に対してなされるユーザの動作を検知するための検知装置である。デジタイザは、送信器２０１ａが投射した赤外光が人物１０５の体の一部、或いは人物１０５が持っている指示棒等によって遮られた場合に、その位置を示す座標を出力する。なお、ここでは送信器２０１ａと受信器２０１ｂをそれぞれスクリーン１０２の左右に配置する例を示したが、スクリーン１０２の上下に配置しても良い。また、ユーザの動作を検知する方法はデジタイザに限らず、スクリーン１０２にタッチパネル機能を備えるようにし、スクリーン１０２が押圧された位置を検知するようにしてもよい。

図２（Ｂ）は、オフィス２の様子を示している。オフィス２のスクリーン１１２には、オフィス１の前面カメラ１０３によって撮像された人物１０５と、会議資料２１０とが投影されている。また、オフィス２も、オフィス１と同様に送信器２１１ａと受信器２１１ｂから成るデジタイザが備えられている。

以上、図２で示すように、オフィス１とオフィス２のそれぞれにおいて遠隔地の人物が投影される。従って、人物１０５と人物１１５にしてみれば、お互いが同じ会議室で向かい合ってコミュニケーションを行っている感覚を得ることができる。

会議の場合、ユーザ（会議参加者）が投影されている会議資料に近付いて、会議資料を指や指示棒で指しながらコミュニケーションを行うケースがある。このようなケースにおいて前面カメラで撮像した人物画像を遠隔地に投影しても、遠隔地のユーザにしてみれば、会議資料のどこを指しているのか把握できない。そこで本実施形態では、ユーザがスクリーンに近付いた場合に、遠隔地に投影する画像を前面カメラで撮像した人物画像から背面カメラで撮像した人物画像に切り替えることを特徴とする。なお、以降の説明では、前面カメラで撮像した人物画像のことを前面人物画像、背面カメラで撮像した人物画像のことを背面人物画像と呼ぶ場合がある。

遠隔地に投影する画像を前面人物画像から背面人物画像に切り替える処理について、図３を用いて詳しく説明する。図３（Ａ）は、オフィス１において、人物１０５がスクリーン１０２に近づいて、指示棒で会議資料を指している様子を示す。図２（Ａ）の場合と比較すると、人物１０５は、スクリーン１０２により近付いた位置にいる。

オフィス２では、図３（Ｂ）に示すように、投影されている画像が、人物１０５の前面人物画像から背面人物画像に切り替わる。これにより、オフィス２の人物１１５は、人物１０５が会議資料のどこを指示棒で指しているのかを把握できる。また、オフィス２において投影される人物１０５の背面人物画像には、透明化処理が実行されている。従って、人物１１５にしてみれば、人物１０５の背面人物画像と会議資料が重なって投影されていても、重なっている部分がどんな内容であるか把握できる。

次に図４を用いて、コミュニケーションシステムのハードウェア構成を説明する。図１から図３には示していないが、オフィス１には制御サーバ４０１が備えられている。制御サーバ４０１に含まれるＣＰＵ４０２は、ＲＯＭ４０４に記憶された制御プログラムを読み出して、オフィス１内に備えられた各装置を制御する。ＲＡＭ４０３は、ＣＰＵ４０２の主メモリ、ワークエリア等の一時記憶領域として用いられる。なお、オフィス１では、１つのＣＰＵ４０２が１つのメモリ（ＲＡＭ４０３）を用いて後述するフローチャートに示す各処理を実行するものとするが、他の態様であっても構わない。例えば、各カメラやプロジェクタ、デジタイザのそれぞれに対して個別にＣＰＵを備えるようにするなど、複数のＣＰＵや複数のＲＡＭ、或いはＨＤＤやＳＳＤを協働させて各処理を実行するようにすることもできる。また、後述する処理の一部をＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等のハードウェア回路を用いて実行するようにしてもよい。ＨＤＤ４０５は、各種データを記憶する記憶媒体として使用される。

ネットワーク４００は、各オフィスを繋ぐネットワークである。ネットワーク４００の種類は限定されず、有線、無線、ＷＡＮ、ＬＡＮ、公衆回線、専用回線など、環境に合わせて適宜選択できる。ネットワークＩ／Ｆ４１０は、オフィス１をネットワーク４００に接続するためのインターフェースである。

図１から図３には示していないが、各オフィスにはマイクとスピーカーが設置されている。オフィス内の人物が発する言葉はマイクによって音声信号に変換され、遠隔地のスピーカーから出力される。オフィス１には、マイク４１１とスピーカー４１２が備えられており、音声Ｉ／Ｆ４０７は、マイク４１１による音声の入力及びスピーカー４１２による音声の出力を制御するためのインターフェースである。

プロジェクタＩ／Ｆ４０８は、プロジェクタ１０１による画像の投影を制御するためのインターフェースである。本実施形態では、１つのプロジェクタを用いてスクリーンへの画像の投影を行っているが、スクリーンの幅が大きい場合等、複数のプロジェクタを用いてスクリーンへの投影を行ってもよい。

デジタイザＩ／Ｆ４０９は、送信器２０１ａと受信器２０１ｂから成るデジタイザによるユーザの動作の検知を制御するためのインターフェースである。カメラＩ／Ｆ４０６は、前面カメラ１０３、背面カメラ１０４による撮像を制御するためのインターフェースである。

また、オフィス２は、オフィス１と同様のハードウェア構成である。オフィス２の各ハードウェアはオフィス１のハードウェアと同様であるため、説明を省略する。

次に、背面人物画像と前面人物画像を切り替える処理について、図５及び図６を用いて更に詳しく説明する。図５は、オフィス１を上（天井側）から見た際の、スクリーン１０２と人物１０５の位置関係を示している。前面カメラ１０３は、スクリーン１０２に埋め込まれている。従って、前面カメラ１０３が測定する前面カメラ１０３と人物１０５との間の距離は、スクリーン１０２と人物１０５との間の距離に一致する。なお、図５の距離Ｄ１、Ｄ２、Ｄ３、Ｄ４は閾値として予め定義されていて、制御サーバ４０１のＨＤＤ４０５や制御サーバ４２１のＨＤＤ４２５に記憶されている。

人物１０５の位置が位置範囲Ａ（距離Ｄ３＜前面カメラ１０３と人物１０５との間の距離≦距離Ｄ４）である場合、オフィス１の制御サーバ４０１は、人物１０５の前面人物画像をオフィス２に送信する。また、人物１０５の前面人物画像の透明度は０％、つまり、透明化処理は実行されずにオフィス２に送信される。オフィス２では、図６（Ａ）の投影結果となる。オフィス２のスクリーン１１２に投影される画像は人物１０５の前面人物画像であり、人物１１５にしてみれば、人物１０５と向き合ってコミュニケーションを行うことができる。

人物１０５の位置が位置範囲Ｂ（距離Ｄ２≦前面カメラ１０３と人物１０５との間の距離≦距離Ｄ３）である場合、オフィス１の制御サーバ４０１は、人物１０５の前面人物画像をオフィス２に送信する。また、人物１０５の前面人物画像は、以下の計算式に基づいて決まる透明度で透明化処理が実行されて、オフィス２に送信される。オフィス２では、図６（Ｂ）の投影結果となる。図６（Ａ）とは異なり、図６（Ｂ）の前面人物画像には透明化処理が実行される。人物１０５の位置が位置範囲Ｂである場合、人物１０５がスクリーン１０２に近付くにつれて、オフィス２に投影される人物１０５の前面人物画像の透明度は大きくなる。

Ｌ：前面カメラと人物との間の距離
前面カメラ１０３と人物１０５との間の距離が距離Ｄ２である位置は、前面人物画像と背面人物画像の切り替え位置である。前面カメラ１０３と人物１０５との間の距離が距離Ｄ２である場合、人物１０５の前面人物画像の透明度は１００％、つまり完全に透明になる。その結果、オフィス２では、図６（Ｃ）の投影結果となる。

人物１０５の位置が位置範囲Ｃ（距離Ｄ１≦前面カメラ１０３と人物１０５との間の距離＜距離Ｄ２）である場合、オフィス１の制御サーバ４０１は、人物１０５の背面人物画像をオフィス２に送信する。人物１０５の位置が位置範囲Ａ又は位置範囲Ｂである場合とは異なり、前面人物画像ではなく背面人物画像がオフィス２に送信される。これは、人物１０５がスクリーン１０２に近付いていて、会議資料に対して何らかのアクション（例えば指示棒で指す行為）を行うことが予想されるためである。また、前面人物画像と背面人物画像の切り替えは自動的に実行されるため、人物１０５と人物１１５は円滑なコミュニケーションを行うことができる。

また、人物１０５の位置が位置範囲Ｃである場合、人物１０５の背面人物画像は、以下の計算式に基づいて決まる透明度で透明化処理が実行されて、オフィス２に送信される。図５は、最小透明度を６０（％）とした例を示しているが、最小透明度は他の値を採用してもよい。オフィス２では、図６（Ｄ）の投影結果となる。図６（Ａ）や図６（Ｂ）とは異なり、人物１０５の背面人物画像がオフィス２のスクリーン１１２に投影される。人物１０５の位置が位置範囲Ｃである場合、人物１０５がスクリーン１０２に近付くにつれて、オフィス２に投影される人物１０５の背面人物画像の透明度は小さくなる。

Ｌ：前面カメラと人物との間の距離
最小透明度：位置範囲Ｄの透明度
前面人物画像と背面人物画像の切り替え位置に注目すると、人物１０５がスクリーン１０２に近づく際に、人物画像が完全に透明になる瞬間が発生する。オフィス２の人物１１５にしてみれば、人物１０５の前面人物画像が段々透明になり、そして一瞬消えて人物１０５の背面人物画像に切り替わるため、スムーズな画像の変化として認識することができる。

人物１０５の位置が位置範囲Ｄ（前面カメラ１０３と人物１０５との間の距離＜距離Ｄ１）である場合、オフィス１の制御サーバ４０１は、人物１０５の背面人物画像をオフィス２に送信する。また、人物１０５の背面人物画像の透明度は６０％である。オフィス２では、図６（Ｅ）の投影結果となる。オフィス２のスクリーン１１２に投影される画像は人物１０５の前面人物画像であり、人物１１５にしてみれば、会議資料に対する人物１０５のアクションを把握できる。なお、透明度６０％という値は一例であり、他の値であってもよい。

次に、オフィス１の制御サーバ４０１が実行する処理を、図７のフローチャートを用いて説明する。図７のフローチャートは、オフィス２に送信する画像として、前面人物画像と背面人物画像のいずれかをオフィス１の制御サーバ４０１が選択する処理を示す。図７のフローチャートに示す各ステップは、ＣＰＵ４０２がＲＯＭ４０４等のメモリに格納された制御プログラムをＲＡＭ４０３に展開して実行することによって処理される。

まずステップＳ７０１において、ＣＰＵ４０２は、スクリーン１０２の前にいる人物（本実施形態の場合、人物１０５）の位置を特定する。本実施形態の場合、前面カメラ１０３が距離センサを備えていて、前面カメラ１０３が測定した前面カメラ１０３と人物１０５との間の距離に基づいて、人物１０５の位置が特定される。前面カメラ１０３と人物１０５との間の距離と特定される位置範囲の関係は、図５で説明した通りである。

次にステップＳ７０２において、ＣＰＵ４０２は、オフィス２に送信する画像として、前面人物画像を使用するか否かを判定する。ステップＳ７０１で特定した人物１０５の位置が位置範囲Ａ又は位置範囲Ｂである場合、ＣＰＵ４０２は、前面人物画像を使用すると判定する。言い換えれば、ＣＰＵ４０２は、オフィス２に送信する画像として、前面人物画像を選択する。そして処理はステップＳ７０３に進む。

一方、ステップＳ７０１で特定した人物１０５の位置が位置範囲Ｃ又は位置範囲Ｄである場合、ＣＰＵ４０２は、前面人物画像を使用しないと判定する。言い換えれば、ＣＰＵ４０２は、オフィス２に送信する画像として、背面人物画像を選択する。そして処理はステップＳ７０７に進む。

次にステップＳ７０３について説明する。ステップＳ７０３において、ＣＰＵ４０２は、前面カメラ１０３が撮像した画像から人物画像を抽出する。本実施形態の場合、予め用意している背景画像（人物がいないときに前面カメラ１０３が予め撮像していた画像）と、前面カメラ１０３による最新の撮像画像との差分画像を取得し、取得した差分画像を人物画像とする。もちろん、ここで説明した人物画像の抽出方法は一例であり、他の方法であってもよい。

次にステップＳ７０４において、ＣＰＵ４０２は、ステップＳ７０１で特定した人物１０５の位置に基づいて透明度を決定する。人物の位置と透明度の関係は、図５で説明した通りである。そしてステップＳ７０５において、ＣＰＵ４０２は、ステップＳ７０３で抽出した人物画像に対して、ステップＳ７０４で決定した透明度で透明化処理を実行する。

次にステップＳ７０６において、ＣＰＵ４０２は、前面人物画像をオフィス２に送信する。より詳細に説明すると、ＣＰＵ４０２は、前面人物画像をオフィス２に送信するようにネットワークＩ／Ｆ４１０を制御する。ここで送信される前面人物画像は、ステップＳ７０５で透明化処理が実行された画像である。

次にステップＳ７０７について説明する。ステップＳ７０７において、ＣＰＵ４０２は、背面カメラ１０４が撮像した画像から人物画像を抽出する。撮像画像から人物画像を抽出する方法は、ステップＳ７０３と同様である。

次にステップＳ７０８において、ＣＰＵ４０２は、ステップＳ７０１で特定した人物１０５の位置に基づいて透明度を決定する。人物の位置と透明度の関係は、図５で説明した通りである。そしてステップＳ７０９において、ＣＰＵ４０２は、ステップＳ７０７で抽出した人物画像に対して、ステップＳ７０８で決定した透明度で透明化処理を実行する。

次にステップＳ７１０において、ＣＰＵ４０２は、背面人物画像をオフィス２に送信する。より詳細に説明すると、ＣＰＵ４０２は、背面人物画像をオフィス２に送信するようにネットワークＩ／Ｆ４１０を制御する。ここで送信される背面人物画像は、ステップＳ７０９で透明化処理が実行された画像である。

次にステップＳ７１１について説明する。ステップＳ７１１において、ＣＰＵ４０２は、コミュニケーションを終了するか否かを判定する。例えば所定の終了操作がユーザになされた場合に、コミュニケーションを終了するとＣＰＵ４０２が判定し、図７のフローチャートが示す処理を終了する。一方、コミュニケーションを終了しないとＣＰＵ４０２が判定すると、処理はステップＳ７０１に戻る。

次に、オフィス２の制御サーバ４２１が実行する処理を、図８のフローチャートを用いて説明する。図８のフローチャートは、オフィス１から受信した人物画像（前面人物画像又は背面人物画像）を会議資料と重畳してスクリーン１１２に投影する処理を示す。図８のフローチャートに示す各ステップは、ＣＰＵ４２２がＲＯＭ４２４等のメモリに格納された制御プログラムをＲＡＭ４２３に展開して実行することによって処理される。

まずステップＳ８０１において、ＣＰＵ４２２は、オフィス１から人物画像（前面人物画像又は背面人物画像）を受信したか否かを判定する。オフィス１から人物画像を受信した場合、処理はステップＳ８０２に進む。一方、オフィス１から人物画像を受信していない場合、処理はステップＳ８０３に進む。

ステップＳ８０２において、ＣＰＵ４２２は、ステップＳ８０１で受信した人物画像と会議資料を重畳してスクリーン１１２に投影する。より詳細に説明すると、ＣＰＵ４２２は、人物画像と会議資料を合成した合成画像をスクリーン１１２に投影するようにプロジェクタ１１１を制御する。

ステップＳ８０３において、ＣＰＵ４２２は、コミュニケーションを終了するか否かを判定する。例えば所定の終了操作がユーザになされた場合に、コミュニケーションを終了するとＣＰＵ４２２が判定し、図８のフローチャートが示す処理を終了する。一方、コミュニケーションを終了しないとＣＰＵ４２２が判定すると、処理はステップＳ８０１に戻る。

本実施形態によれば、人物の位置に基づいて、前面人物画像と背面人物画像のいずれを遠隔地に送信するかを切り替えることができる。特に、人物がスクリーンに近付いた場合に背面人物画像に切り替えるため、遠隔地のユーザにしてみれば、会議資料に対する人物のアクションを容易に把握することができる。また、前面人物画像と背面人物画像の切り替えは人物の位置に基づいて自動的に実行されるため、ユーザの手間が軽減され、円滑なコミュニケーションが促進される。

また、本実施形態によれば、遠隔地に投影される人物画像には透明化処理が実行される。遠隔地のユーザにしてみれば、会議資料と人物が重なって投影されていても、重なっている部分がどんな内容であるか容易に把握できる。

また、本実施形態によれば、前面人物画像と背面人物画像の切り替えが発生する際に、人物画像が完全に透明になるタイミングが発生する。遠隔地のユーザにしてみれば、前面人物画像が段々透明になり、そして一瞬消えて背面人物画像に切り替わるため、スムーズな画像の変化として認識することができる。

（その他実施形態）
本発明は、上述の各実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０３ 前面カメラ
１０４ 背面カメラ
４０１ 制御サーバ
４０２ ＣＰＵ
４１０ ネットワークＩ／Ｆ

Claims (20)

1. 第１の投影面に画像を投影する第１の投影手段と、
   前記第１の投影面に配置され、前記第１の投影面の前に位置する被写体を撮像する第１の撮像手段と、
   前記被写体に対して前記第１の投影面の反対側から前記被写体を撮像する第２の撮像手段と、
   処理パラメータに基づいて画像処理を実行する画像処理手段と、
   前記第１の投影面から前記被写体までの距離と少なくとも一つの閾値とを比較することによって、前記第１の撮像手段によって撮像された前記被写体の第１の画像を前記画像処理に用いるか、前記第２の撮像手段によって撮像された前記被写体の第２の画像を前記画像処理に用いるかを決定し、前記第１の投影面から前記被写体までの距離と前記少なくとも一つの閾値とを比較することによって、前記画像処理の処理パラメータを決定する決定手段と、
   前記画像処理手段によって画像処理が実行された画像を第２の投影面に投影する第２の投影手段と、を備えることを特徴とするコミュニケーションシステム。
2. 前記第１の撮像手段は、前記第１の投影面に埋め込まれていることを特徴とする請求項１に記載のコミュニケーションシステム。
3. 前記第１の撮像手段は、前記第１の投影面から前記被写体までの距離を決定する距離センサを含むことを特徴とする請求項１または２に記載のコミュニケーションシステム。
4. 前記第２の投影手段は、前記画像処理手段によって画像処理が実行された画像と、前記画像処理手段によって画像処理が実行された画像と異なる画像を投影することを特徴とする請求項１乃至３のいずれか１項に記載のコミュニケーションシステム。
5. 前記第１の投影面から前記被写体までの距離が、前記少なくとも１つの閾値のうち所定の閾値以下である場合に、前記画像処理手段は、前記第２の画像に対して画像処理を実行し、
   前記第１の投影面から前記被写体までの距離が、前記所定の閾値よりも長い場合に、前記画像処理手段は、前記第１の画像に対して画像処理を実行することを特徴とする請求項１乃至４のいずれか１項に記載のコミュニケーションシステム。
6. 前記第１の投影面から前記被写体までの距離が、前記少なくとも１つの閾値のうち所定の閾値未満である場合に、前記画像処理手段は、前記第２の画像に対して画像処理を実行し、
   前記第１の投影面から前記被写体までの距離が、前記所定の閾値以上である場合に、前記画像処理手段は、前記第１の画像に対して画像処理を実行することを特徴とする請求項１乃至５のいずれか１項に記載のコミュニケーションシステム。
7. 前記画像処理は、透明化処理であり、
   前記処理パラメータは、透明度であることを特徴とする請求項１乃至６のいずれか１項に記載のコミュニケーションシステム。
8. 前記少なくとも１つの閾値は、前記第１の投影面から最も短い距離である第１の閾値、前記第１の閾値よりも前記第１の投影面から長い距離である第２の閾値、前記第２の閾値よりも前記第１の投影面から長い距離である第３の閾値、前記第３の閾値よりも前記第１の投影面から長い距離である第４の閾値を含み、
   前記第１の投影面から前記被写体までの距離が、前記第１の閾値未満であることに応じて、前記画像処理手段は前記第２の画像に対して６０％の透明度で前記透明化処理を行い、
   前記第１の投影面から前記被写体までの距離が、前記第１の閾値以上であり前記第２の閾値未満であることに応じて、前記画像処理手段は、前記第２の画像に対して、前記被写体から前記第１の投影面までの距離が短くなるほど透過率が低下するように、６０％〜１００％の範囲で透明化処理を行い、
   前記第１の投影面から前記被写体までの距離が、前記第２の閾値以上であり前記第３の閾値未満であることに応じて、前記画像処理手段は、前記第１の画像に対して、前記被写体から前記第１の投影面までの距離が短くなるほど透明度が高くなるように、０％〜１００％の範囲で透明化処理を行い、
   前記第１の投影面から前記被写体までの距離が、前記第３の閾値以上であり前記第４の閾値未満であることに応じて、前記画像処理手段は、前記第１の画像に対して、０％の透明度で透明化処理を行うことを特徴とする請求項７に記載のコミュニケーションシステム。
9. 前記第２の閾値を境にして、前記決定手段は、前記第１の画像を用いるか、前記第２の画像を用いるかを切り替えることを特徴とする請求項８に記載のコミュニケーションシステム。
10. 前記第１の画像は、前記第１の撮像手段により撮像された大きな画像のうち、被写体が抽出された部分であり、
    前記第２の画像は、前記第２の撮像手段により撮像された大きな画像のうち、被写体が抽出された部分であることを特徴とする請求項１乃至９のいずれか１項に記載のコミュニケーションシステム。
11. 投影面に画像を投影する投影手段と、
    前記投影面に配置され、前記投影面の前に位置する被写体を撮像する第１の撮像手段と、
    前記被写体に対して前記投影面の反対側から前記被写体を撮像する第２の撮像手段と、
    処理パラメータに基づいて画像処理を実行する画像処理手段と、
    前記投影面から前記被写体までの距離と少なくとも一つの閾値とを比較することによって、前記第１の撮像手段によって撮像された前記被写体の第１の画像を前記画像処理に用いるか、前記第２の撮像手段によって撮像された前記被写体の第２の画像を前記画像処理に用いるかを決定し、前記投影面から前記被写体までの距離と前記少なくとも一つの閾値とを比較することによって、前記画像処理の処理パラメータを決定する決定手段と、
    前記画像処理手段によって画像処理が実行された画像を外部装置に送信する送信手段を、を備えることを特徴とするコミュニケーションシステム。
12. 前記第１の撮像手段は、前記投影面に埋め込まれていることを特徴とする請求項１１に記載のコミュニケーションシステム。
13. 前記第１の撮像手段は、前記投影面から前記被写体までの距離を決定する距離センサを含むことを特徴とする請求項１１または１２に記載のコミュニケーションシステム。
14. 前記投影面から前記被写体までの距離が、前記少なくとも１つの閾値のうち所定の閾値以下である場合に、前記画像処理手段は、前記第２の画像に対して画像処理を実行し、
    前記投影面から前記被写体までの距離が、前記少なくとも１つの閾値よりも長い場合に、前記画像処理手段は、前記第１の画像に対して画像処理を実行することを特徴とする請求項１１乃至１３のいずれか１項に記載のコミュニケーションシステム。
15. 前記投影面から前記被写体までの距離が、前記少なくとも１つの閾値のうち所定の閾値未満である場合に、前記画像処理手段は、前記第２の画像に対して画像処理を実行し、
    前記投影面から前記被写体までの距離が、前記所定の閾値以上である場合に、前記画像処理手段は、前記第１の画像に対して画像処理を実行することを特徴とする請求項１１乃至１４のいずれか１項に記載のコミュニケーションシステム。
16. 前記画像処理は、透明化処理であり、
    前記処理パラメータは、透明度であることを特徴とする請求項１１乃至１５のいずれか１項に記載のコミュニケーションシステム。
17. 前記少なくとも１つの閾値は、前記投影面から最も短い距離である第１の閾値、前記第１の閾値よりも前記投影面から長い距離である第２の閾値、前記第２の閾値よりも前記投影面から長い距離である第３の閾値、前記第３の閾値よりも前記投影面から長い距離である第４の閾値を含み、
    前記投影面から前記被写体までの距離が、前記第１の閾値未満であることに応じて、前記画像処理手段は前記第２の画像に対して６０％の透明度で前記透明化処理を行い、
    前記投影面から前記被写体までの距離が、前記第１の閾値以上であり前記第２の閾値未満であることに応じて、前記画像処理手段は、前記第２の画像に対して、前記被写体から前記投影面までの距離が短くなるほど透過率が低下するように、６０％〜１００％の範囲で透明化処理を行い、
    前記投影面から前記被写体までの距離が、前記第２の閾値以上であり前記第３の閾値未満であることに応じて、前記画像処理手段は、前記第１の画像に対して、前記被写体から前記投影面までの距離が短くなるほど透明度が高くなるように、０％〜１００％の範囲で透明化処理を行い、
    前記投影面から前記被写体までの距離が、前記第３の閾値以上であり、前記第４の閾値未満であることに応じて、前記画像処理手段は、前記第１の画像に対して、０％の透明度で透明化処理を行うことを特徴とする請求項１６に記載のコミュニケーションシステム。
18. 前記第２の閾値を境にして、前記決定手段は、前記第１の画像を用いるか、前記第２の画像を用いるかを切り替えることを特徴とする請求項１７に記載のコミュニケーションシステム。
19. 前記第１の画像は、前記第１の撮像手段により撮像された大きな画像のうち、被写体が抽出された部分であり、
    前記第２の画像は、前記第２の撮像手段により撮像された大きな画像のうち、被写体が抽出された部分であることを特徴とする請求項１１乃至１８のいずれか１項に記載のコミュニケーションシステム。
20. 前記第１の撮像手段および前記第２の撮像手段は、前記被写体を挟んで反対側に配置されることを特徴とする請求項１乃至１９のいずれか１項に記載のコミュニケーションシステム。

Images