JP2024016623A - 画像伝達システム、画像伝達方法 - Google Patents

Abstract

【課題】画像を取得される人物のプライバシーに配慮しながら、あるエリアにいる人物に対して、異なるエリアにいる人物との繋がりを感じさせ、安心感や連帯感を与えることのできる技術を提供すること。【解決手段】画像伝達システムは、第１エリアに存在する第１人物を第１カメラで撮影して第１画像を取得する処理と、第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、第１エリアと異なる第２エリアに設置された第２物体に第１人物シルエット画像を投影或いは表示する処理と、第１画像に基づいて、第１人物が第１トリガ動作を行ったか否か判定する処理と、第１人物が第１トリガ動作を行った場合、第１人物シルエット画像よりも第１人物そのものの画像に近い第１人物詳細画像を第２物体に投影或いは表示する処理と、を実行する。【選択図】図５

Description

本開示は、画像伝達システム及び画像伝達方法に関する。

特許文献１は、ネットワークカメラを用いて特定区域の犯罪や事故の発生に対応し、違法行為や不法行為等についての情報を収集するための情報収集方法を開示している。特許文献１に開示の情報収集方法では、商店街の通りに２以上のネットワークカメラが設置され、それぞれのカメラごとに定められた視界エリア内が撮影されて画像が保存される。そして、違法行為者や不法行為者の行為現場までの侵入経路や退出経路が撮影された記録画面が選択され、選択された画面が画像情報として記憶媒体に記憶される。記憶媒体は警察等に提出され、事件解決に役立てることができる。

特許文献２は、コンテンツを同時視聴しているユーザ同士が円滑なコミュニケーションをとれるようにすることを目的とした表示制御装置を開示している。カメラやマイク等によって取得されたあるユーザの情報が別のユーザの元に出力され、ユーザは、ユーザ同士で賑わっているような感覚を得ることができる。

なお、本開示の技術分野における出願時の技術レベルを示す文献としては、上記特許文献１及び特許文献２の他にも下記の特許文献３乃至特許文献６を例示することができる。

特開２００３－３１７１６８号公報 国際公開第２０１４／１９２５５２号 国際公開第２０１９／０９７８０２号 特開２０２１－０２７３８４号公報 国際公開第２０１１／０４３１００号 特開２００４－３４８０７８号公報

ネットワークに接続されたカメラや表示装置を、人と人との繋がり感やコミュニケーションの向上のために用いることを考える。ネットワークに接続されたカメラや表示装置を用いて、ある場所にいる人物の画像を別の場所に映し出すことによって、繋がり感を演出することは可能である。ただし、このとき、画像を取得される人物のプライバシーへの配慮も重要となる。

本開示の目的は、画像を取得される人物のプライバシーに配慮しながら、あるエリアにいる人物に対して、異なるエリアにいる人物との繋がりを感じさせ、安心感や連帯感を与えることのできる技術を提供することにある。

第１の観点は、画像伝達システムに関連する。
画像伝達システムは、１又は複数のプロセッサを備える。
１又は複数のプロセッサは、
第１エリアに存在する第１人物を第１カメラで撮影して第１画像を取得する処理と、
第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、
第１エリアと異なる第２エリアに設置された第２物体に第１人物シルエット画像を投影或いは表示する処理と、
第１画像に基づいて、第１人物が第１トリガ動作を行ったか否か判定する処理と、
第１人物が第１トリガ動作を行った場合、第１人物シルエット画像よりも第１人物そのものの画像に近い第１人物詳細画像を第２物体に投影或いは表示する処理と、
を実行するように構成される。

第２の観点は、画像伝達方法に関する。
画像伝達方法は、
第１エリアに存在する第１カメラにより第１画像を取得する処理と、
第１画像に含まれる第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、
第１エリアと異なる第２エリアに設置された第２物体に第１人物シルエット画像を投影或いは表示する処理と
第１画像に基づいて、第１人物が第１トリガ動作を行ったか否か判定する処理と、
第１人物が第１トリガ動作を行った場合、第１人物シルエット画像よりも第１人物そのものの画像に近い第１人物詳細画像を第２物体に投影あるいは表示する処理と、
を含む。

本開示の技術によれば、画像を取得される人物のプライバシーに配慮しながら、あるエリアにいる人物に対して、異なるエリアにいる人物との繋がりを感じさせ、安心感や連帯感を与えることができる。

本実施の形態に係る画像伝達システムの構成例を示すブロック図である。 本実施の形態に係る画像伝達システムの別の構成例を示すブロック図である。 本実施の形態に係る画像伝達システムが適用された場面の例を示す概略図である。 第１人物詳細画像の例を示す概略図である。 本実施の形態に係る画像伝達システムが実行する、画像伝達モード設定処理の例を示すフローチャートである。 本実施の形態に係る画像伝達システムが実行する、画像伝達処理の例を示すフローチャートである。 画像伝達モード設定処理の別の例を示すフローチャートである。 画像伝達モード設定処理の更に別の例を示すフローチャートである。 本実施の形態に係る画像伝達システムの構成例を示すブロック図である。 本実施の形態に係る画像伝達システムが適用された場面の例を示す概略図である。 画像伝達モード設定処理の例を示すフローチャートである。 本実施の形態に係る画像伝達システムが適用された場面の例を示す概略図である。 本実施の形態に係る画像伝達システムが適用された場面の別の例を示す概略図である。

添付図面を参照して、本開示の実施の形態を説明する。

１．概要
図１は、本実施の形態に係る画像伝達システム１００の最小の構成を示している。画像伝達システム１００は、画像処理装置１１０、投影／表示装置１２０を含む。

画像処理装置１１０は、カメラ等から取得される画像を処理して、或いは予め取得されるデータを処理して、投影／表示装置１２０で投影或いは表示するための種々の画像を生成する装置である。生成される種々の画像には、カメラ等の撮影により得られた実在の人物そのものの画像や、実在の人物をシルエットで表した画像、実在の人物をアバターで表した画像、実在しないキャラクタをシルエットで表した画像等が含まれる。画像処理装置１１０は、実在の人物を表した画像の生成を行うときは、その人物の今現在の動きがわかるように、撮影により得られた画像からリアルタイムに画像を生成することができる。

なお、ここで、実在の人物そのものの画像は、カメラ等の撮影により得られる画像から背景を除き、人物のみを切り出した画像を含む。また、人物やキャラクタを表すシルエットの画像とは、人物やキャラクタの輪郭だけがわかるように、輪郭の中身が黒く塗りつぶされた画像である。人物を表すアバターの画像とは、人物の画像をイラスト風や３Ｄモデル風に加工し、人物の特徴を表現しつつも不要な部分は抽象化したキャラクタの画像である。

投影／表示装置１２０は、画像処理装置１１０が生成した画像を投影或いは表示する装置である。投影／表示装置１２０は、画像を壁やスクリーン等の投影面に投影するプロジェクタ等であってもよいし、ディスプレイに画像を表示する装置であってもよい。

画像処理装置１１０は、１又は複数のプロセッサ１１１（以下、単にプロセッサ１１１と呼ぶ）と１又は複数の記憶装置１１２（以下、単に記憶装置１１２と呼ぶ）を備える。記憶装置１１２には、プロセッサ１１１で実行可能な複数のプログラムと、それに関連する種々のデータとが記憶されている。プロセッサ１１１が記憶装置１１２に記憶されたプログラムを実行することにより、画像処理装置１１０は、画像の生成を含む各種の処理を実行することができる。

このような画像伝達システム１００を、様々な場面で活用することを考える。

２．第１の活用例
２－１．構成例
図２は、第１の活用例における画像伝達システム１００の構成例を示している。画像伝達システム１００は、画像処理装置１１０及び投影／表示装置１２０に加えて、撮影装置１３０を含む。撮影装置１３０は画像を撮影するための装置であり、第１カメラ１３１を含む。画像処理装置１１０は、撮影装置１３０が撮影した画像を取得し、取得した画像に基づいて、投影／表示装置１２０で投影或いは表示するための画像を生成することができる。投影／表示装置１２０は、第２物体Ｏ２に画像を投影或いは表示するための第２装置１２２を含む。

第１の活用例では、画像伝達システム１００を、ある場所にいる人物が、異なる場所にいる人物との繋がりを感じることを可能にし、人と人との繋がり感やコミュニケーションを向上させるためのシステムとして活用することを考える。具体的には、画像伝達システム１００を使って画像を投影或いは表示することで、第１エリアにいる第１人物の存在を第１エリアとは異なる第２エリアにいる第２人物に伝え、第２人物が第１人物との繋がりを感じることを可能にする。第１エリアと第２エリアになり得るエリアとしては、例えば、建物の中や屋外の廊下（通路）や広間、部屋等が挙げられる。第１エリア及び第２エリアは、異なる２つの建物内にあってもよいし、同じ建物内の異なる２つのエリアであってもよいし、いずれか又は両方が屋外のエリアであってもよい。

２－２．活用の形態（基本の形態）
図３には、第１エリアＡ１にいる第１人物１及び第２エリアＡ２にいる第２人物２が示されている。図３の例では、第１エリアＡ１及び第２エリアＡ２は同じ建物１０００内の異なる場所に位置する廊下である。第１エリアＡ１には第１カメラ１３１が設置され、第１エリアＡ１にいる第１人物１を撮影することができる。第２エリアＡ２には投影装置として構成された第２装置１２２が設置され、第２エリアＡ２内に設置された第２物体Ｏ２に画像を投影することができる。第２物体Ｏ２は、第２エリアＡ２の壁や柱、扉等の構造物であってもよいし、画像を投影するために専用に設置されたスクリーン等であってもよい。

なお、以下、第２装置１２２が投影装置である場合を例に挙げて説明するが、第１の活用例において、第２装置１２２は第２物体Ｏ２に画像を表示する表示装置であってもよい。このとき、第２物体Ｏ２はディスプレイなどの表示画面であってもよく、第２装置１２２の一部を構成する物体であってもよい。

また、図３では第１エリアＡ１内に第１カメラ１３１が設置されているが、設置場所は必ずしも第１エリアＡ１内に限定される必要はなく、第１エリアＡ１にいる第１人物１を撮影可能な位置であれば第１エリアＡ１の外であってもよい。同様に、第２装置１２２は第２物体Ｏ２に画像を投影或いは表示可能な位置に設置されていればよく、設置場所は第２エリアＡ２内でなくてもよい。

画像伝達システム１００は、第１エリアＡ１に第１人物１が存在している間、画像伝達処理を実行する。画像伝達処理は、第１人物１の存在を画像によって第２人物２に伝えるための処理である。画像伝達処理は次のような流れで行われる。まず、第１カメラ１３１により第１人物１が撮影される。第１人物１を撮影して得られた第１画像は、プロセッサ１１１によって取得される。プロセッサ１１１は、第１画像に基づいて、第１人物１を表す画像Ｐ１をリアルタイムに生成する。生成された画像Ｐ１は、第２装置１２２により第２物体Ｏ２にリアルタイムに投影される。

画像伝達処理が行われることによって、第２人物２は、第１人物１と異なるエリアにいながらにして、まるで同じエリアにいるかのように第１人物１の存在を感じることができる。これにより、第２人物２に安心感や連帯感を与えることができる。

ただし、ここで注意しなければならないのが、第１人物１のプライバシーの問題である。第１人物１が、必ずしも第２人物２に自らの詳細な状態がわかるような画像を公開することを望んでいるとは限らない。第１人物１のプライバシーの問題を解決するため、画像伝達処理には複数の画像伝達モードが設けられる。そして、第１エリアＡ１に最初に第１人物１が現れたときは、画像伝達モードのうちのシルエットモードが開始する。シルエットモードは、画像Ｐ１を、第１人物１のシルエットを表す第１人物シルエット画像とするモードである。図３では、画像Ｐ１として第１人物シルエット画像が投影されている。

画像伝達モードがまずシルエットモードから開始することで、第１人物１の詳細な画像がいきなり第２人物２に公開されることがなくなり、第１人物１は、安心して第１エリアＡ１に入ったり第１エリアＡ１を通り抜けたりすることができる。一方で、第２人物２にとっては、画像Ｐ１がシルエットの画像であるか否かに関わらず、第１人物１の存在を感じて安心感や連帯感を得られることには変わりない。それどころか、画像Ｐ１がシルエットの画像とされることで、まるでそこにいる誰かの影が映っているかのような奥行き感が生み出され画像Ｐ１の存在感が強調される。こうして、第１人物１のプライバシーに配慮しつつ、第２人物２に対しては、安心感や連帯感をより効果的に与えることができる。

さて、以上に述べたように、画像伝達処理が開始するときの最初の画像伝達モードとしてシルエットモードは適切である。しかし、第１人物１が、自身のより詳細な画像を第２人物２に公開することを望んでいることもあり得る。例えば、第１人物１は、シルエットから伝わる動作だけでなく、服装や表情をも第２人物２に伝えたいと思っているかもしれない。第１人物１と第２人物２とのコミュニケーションや繋がり感を向上させるという観点から、第１人物１が希望する場面においては、第１人物１のより詳細な画像が第２人物２に公開されることが望ましい。そこで、第１人物１による意思表示があると判断されるときは、画像伝達システム１００は、画像伝達モードをシルエットモードからライブモードに変更する。ライブモードは、画像Ｐ１を、第１人物シルエット画像よりも第１人物１そのものの画像に近い第１人物詳細画像にするモードである。

図４は、第１人物詳細画像の例として、第１人物１そのものの画像が画像Ｐ１として第２物体Ｏ２に投影されている。第１人物詳細画像は、このように第１人物１そのものの画像であってもよいし、第１人物１を表すアバターの画像であってもよい。画像Ｐ１が第１人物詳細画像とされることで、第２人物２は、第１人物シルエット画像からは伝わらない、服装や表情等も含めた第１人物１の詳細を知ることができる。

画像伝達モードをライブモードに変更するときに必要となる第１人物１の意思表示の有無は、第１人物１が行う第１トリガ動作により判断される。第１人物１が第１トリガ動作を行ったと判断されるときは、画像伝達システム１００は、画像伝達モードをシルエットモードからライブモードに切り替える。第１トリガ動作となる動作は、システムの管理者等によって予め設定される。第１トリガ動作としては任意の動作が設定されてよいが、第１人物１が自らの意思に基づいて第１トリガ動作を行ったことがわかるように、第１エリアＡ１をただ通行するときには通常行われない動作が設定されることが望ましい。例として、両手を大きく振る、その場で３回ジャンプする、壁に両手を２回同時にタッチする、などの動作が第１トリガ動作とされてもよい。

第１トリガ動作は、第１人物１に予め教えられることが好ましい。第１人物１に第１トリガ動作を知らせる方法としては、第１エリアＡ１の壁や入口に第１トリガ動作についての説明を掲示しておく方法や、第１エリアＡ１を通過することが見込まれる人物に対して、それぞれの人物が所有するスマートフォンのアプリ等を通じて説明を配信しておく方法が例示される。このように、第１人物１に対して第１トリガ動作が予め指定されることで、第１人物１による第１トリガ動作が自らの意思に基づいて行われたことをより明確にすることができる。

また、別の例として、第１トリガ動作は、第１人物１が自ら設定することのできる動作であってもよい。例えば、スマートフォンのアプリ等を通じて、事前に好きな動作を登録しておくことができてもよい。第１トリガ動作を第１人物１自身が指定した動作とすることで、第１人物１が知らないうちに第１トリガ動作を行ってしまう可能性を少なくし、第１人物１による第１トリガ動作が第１人物１の意思に基づいて行われたことを更に明確にすることができる。

２－３．フローチャート
第１の活用例においてプロセッサ１１１が実行する処理は、画像伝達モード設定処理と画像伝達処理とを含む。画像伝達モード設定処理と画像伝達処理とはそれぞれ異なるプログラムによって実行される。図５は、画像伝達モード設定処理の例を示すフローチャートである。画像伝達モード設定処理は、所定の制御周期で繰り返し実行される。

ステップＳ１０１において、プロセッサ１１１は、第１エリアＡ１に新たな第１人物１が現れたか否かを判定する。第１エリアＡ１内に新たな第１人物１が現れたことは、第１画像に基づいて判断されてもよいし、第１エリアＡ１に設置された人感センサ等のセンサにより判断されてもよい。第１エリアＡ１に新たに第１人物１が出現したと判定された場合（ステップＳ１０１；Ｙｅｓ）、処理はステップＳ１０２に進む。第１エリアＡ１に新たな第１人物１が出現していない場合（ステップＳ１０１；Ｎｏ）、今サイクルの処理は終了する。

ステップＳ１０２において、プロセッサ１１１は、画像伝達処理フラグをＯＮにする。画像伝達処理フラグは画像伝達処理を実行させるためのフラグである。このとき、画像伝達モードはシルエットモードに設定される。シルエットモードが開始すると、処理はステップＳ１０３に進む。

ステップＳ１０３において、プロセッサ１１１は、第１人物１による第１トリガ動作が行われたか否かを判定する。第１人物１による第１トリガ動作が行われたか否かは、第１画像に基づいて判定される。第１人物１による第１トリガ動作が行われたと判定された場合（ステップＳ１０３；Ｙｅｓ）、処理はステップＳ１０４に進む。第１人物１による第１トリガ動作が行われていないと判定された場合（ステップＳ１０３；Ｎｏ）、処理はステップＳ１０５に進む。ステップＳ１０３において、プロセッサ１１１は、第１人物１によって自発的に第１トリガ動作が行われたと判断される場合にのみ第１トリガ動作が行われたと判定し、第１人物１が行った第１トリガ動作が自発的な動作でないと判断される場合は、第１トリガ動作が行われていないと判定してもよい。

ステップＳ１０４において、プロセッサ１１１は、ライブモードを開始する。つまり、画像伝達モードをシルエットモードからライブモードに変更する。ライブモードが開始されると、処理はステップＳ１０５に進む。なお、現在の画像伝達モードが既にライブモードに設定されている場合は画像伝達モードの変更は行われず、ライブモードが継続される。

ステップＳ１０５において、プロセッサ１１１は、第１エリアＡ１に第１人物１が存在しているか否かを判定する。第１エリアＡ１に第１人物１が存在しているか否かは、第１画像に基づいて判断されてもよいし、第１エリアＡ１に設置されたセンサから取得される情報に基づいて判断されてもよい。第１人物１が引き続き第１エリアＡ１に存在している場合（ステップＳ１０５；Ｙｅｓ）、処理はステップＳ１０３に戻る。第１人物１が第１エリアＡ１に存在しなくなっている場合（ステップＳ１０５；Ｎｏ）処理はステップＳ１０６に進む。

ステップＳ１０６において、プロセッサ１１１は、画像伝達処理フラグをＯＦＦにする。画像伝達処理フラグがＯＦＦになると、後述する画像伝達処理が行われなくなることで、画像Ｐ１の第２物体Ｏ２への投影は終了する。画像伝達処理フラグがＯＦＦにされると、今サイクルの処理は終了する。

図６は、プロセッサ１１１が実行する画像伝達処理の例を示すフローチャートである。画像伝達処理は、画像伝達処理フラグがＯＮになっている間、所定の制御周期で繰り返し実行される。画像伝達モード設定処理と画像伝達処理との実行サイクルは同じであってもよいし、異なっていてもよい。

ステップＳ２０１において、プロセッサ１１１は第１画像を取得する。第１画像は、第１カメラ１３１によって第１エリアＡ１に存在する第１人物１を撮影することで得られる。第１画像が取得されると、処理はステップＳ２０２に進む。

ステップＳ２０２において、プロセッサ１１１は、第１画像に基づいて画像Ｐ１を生成する。画像伝達モードがシルエットモードの間は、第１画像から第１人物１の輪郭が抽出され、画像Ｐ１として第１人物シルエット画像が生成される。画像伝達モードがライブモードの間は、第１画像から第１人物１そのものの画像が抽出されて画像Ｐ１とされる、又は第１画像に含まれる第１人物１の画像からアバターの画像が生成される。画像Ｐ１の生成は、第１画像の取得に対してリアルタイムに行われる。画像Ｐ１が生成されると、処理はステップＳ２０３に進む。

ステップＳ２０３において、プロセッサ１１１は、第２装置１２２によって画像Ｐ１を第２物体Ｏ２に投影させる。画像Ｐ１の投影は、画像Ｐ１の生成に対してリアルタイムに行われる。画像Ｐ１が投影されると、今サイクルの処理は終了する。

なお、第１エリアＡ１に複数の第１人物１が存在する場合、それぞれの第１人物１に対する処理は連動しない。つまり、画像伝達モード設定処理及び画像伝達処理はそれぞれの第１人物１に対して独立に実行される。そのため、第２物体Ｏ２に投影される複数の画像Ｐ１の中に第１人物シルエット画像と第１人物詳細画像とが混在する場合がある。

例えば、１人目の第１人物１－Ｘが第１エリアＡ１に入ってきて画像伝達処理フラグがＯＮにされた後、第１人物１－Ｘの第１トリガ動作によって画像伝達モードがライブモードに設定されたとする。その後、２人目の第１人物１－Ｙが第１エリアＡ１に入ってきたとすると、第１人物１－Ｙに対する画像伝達処理フラグが新たにＯＮにされる。そして、第１人物１－Ｙに対しての画像伝達モードは、第１人物１－Ｘによる第１トリガ動作の有無に関わらず、最初はシルエットモードに設定され、第１人物１－Ｙの第１トリガ動作があったときに初めてライブモードに設定される。このように、それぞれの第１人物１に対して独立に画像伝達モードの設定が行われることで、第１人物１が複数存在する場合も、それぞれの第１人物１が自分の意思に基づいて、第２エリアＡ２に向けて公開される情報量をコントロールすることを可能にする。

以上に説明したように、第１の活用例においては、画像伝達システム１００によって、第１エリアＡ１にいる第１人物１の画像Ｐ１が異なる第２エリアＡ２に映し出され、第２人物２に対して安心感や一体感が与えられる。また、最初に映し出される第１人物１の画像は必ずシルエットの画像とされることで、第１人物１のプライバシーに配慮すると同時に、画像Ｐ１の存在感を強調することができ、第２人物２に対して安心感や一体感を効果的に演出することができる。また、第１人物１による意思表示があったときには画像Ｐ１を第１人物詳細画像とすることで、第１人物１と第２人物２とのコミュニケーションをより円滑にすることができる。

２－４．応用形態
以下に、第１の活用例を応用した２つの形態を説明する。１つ目の応用形態及び２つ目の応用形態は組み合わせることも可能である。

１つ目の応用形態として、画像伝達システム１００は、第１人物１が第１トリガ動作を行う度に画像Ｐ１を第１人物１そのものの画像により近づけていってもよい。具体的には、ライブモードとして第１段階目のライブモード、第２段階目のライブモード、…といったように複数の段階のモードが設定され、第１人物１が第１トリガ動作を行う度にライブモードが現在の段階から１つ上の段階のライブモードに移行する。それぞれの段階では、投影される第１人物詳細画像がどの程度第１人物１に近い画像であるかが異なる。図７は、１つ目の応用例においてプロセッサ１１１により実行される画像伝達モード設定処理の例を示すフローチャートである。

ステップＳ３０１からステップＳ３０３における処理は、図５のステップＳ１０１からステップＳ１０３における処理と同様である。ステップＳ３０３において、第１人物１による第１トリガ動作が行われたと判定された場合（ステップＳ３０３；Ｙｅｓ）、処理はステップＳ３０４に進む。第１人物１によるトリガ動作が行われていないと判定された場合（ステップＳ３０３；Ｎｏ）、処理はステップＳ３０５に進む。

ステップＳ３０５において、第１エリアＡ１に第１人物１が存在しているか否かが判定される。引き続き第１エリアＡ１に第１人物１が存在している場合（ステップＳ３０５；Ｙｅｓ）、処理はステップＳ３０３に戻る。第１人物１が第１エリアＡ１からいなくなっている場合（ステップＳ３０５；Ｎｏ）、処理はステップＳ３０９に進む。

ステップＳ３０４において、画像伝達モードがシルエットモードから第１段階目のライブモードに変更される。第１段階目のライブモードが開始すると、処理はステップＳ３０６に進む。

ステップＳ３０６からステップＳ３０８の処理は、ステップＳ３０３からステップＳ３０５の処理と基本的には同じである。ただし、ステップＳ３０７において設定されるライブモードは現在のライブモードによって決まる。現在のライブモードがＮ－１段階目のライブモードのとき、ステップＳ３０７においてＮ段階目のライブモードが開始する。ただし、現在のライブモードが１番上の段階のライブモードのときは、画像伝達モードは同じ段階のライブモードに引き続き設定される。

その後、第１エリアＡ１から第１人物１がいなくなるまでステップＳ３０６からステップＳ３０８の処理が繰り返される。ステップＳ３０８において第１エリアＡ１に第１人物１が存在しないと判定されると（ステップＳ３０８；Ｎｏ）、処理はステップＳ３０９に進む。ステップＳ３０９においては、図５のステップＳ１０６と同様に、プロセッサ１１１によって画像伝達処理フラグがＯＦＦにされる。画像伝達処理フラグがＯＦＦにされると、今サイクルの処理は終了する。

ライブモードの複数の段階は、２段階であってもよく、第１段階目のライブモードで第１人物詳細画像が第１人物１を表すアバターの画像とされ、第２段階目のライブモードで第１人物詳細画像が第１人物１そのものの画像とされてもよい。或いは、ライブモードの複数の段階は２段階よりも多くの段階から成っていてもよい。例えば、第１段階目のライブモードで第１人物詳細画像が第１人物１の特徴の細かい部分までは表現せずに第１人物１を大幅に抽象化したアバターの画像とされ、ライブモードの段階が上がるごとに、第１人物詳細画像が第１人物１をより詳細に表現した画像に移行されていってもよい。そして、１番上の段階のライブモードで第１人物詳細画像が第１人物１そのものの画像とされてもよい。

１つ目の応用形態では、ライブモードに複数の段階が設けられることで、第１人物１は画像Ｐ１によって公開される情報量をコントロールすることが可能になり、よりプライバシーへの配慮のなされたシステムとすることができる。例えば、第１人物１が、第１人物シルエット画像からは伝わらない、自分が笑っているか怒っているか等の表情は第２人物２に伝えたいが、自身が明確に特定されるような詳細な特徴までは第２人物２に知られたくないと考える場合等に有効である。このような場合にも、第１人物１がトリガ動作を行う回数によって画像Ｐ１の抽象度をコントロールし、第２人物２に知られてもよいと思う情報のみが公開されるようにすることを可能とする。

続いて、２つ目の応用形態について説明する。２つ目の応用形態では、画像Ｐ１を第１人物シルエット画像に戻すためのリセット動作が設定される。図８は、２つ目の応用例における画像伝達モード設定処理の例を示すフローチャートである。図８のフローチャートにおけるステップＳ４０１からステップＳ４０４における処理は、図５のステップＳ１０１からステップＳ１０４の処理と同様である。なお、ステップＳ４０２において、画像伝達処理フラグが既にＯＮになっている場合は、ＯＮの状態が維持される。ステップＳ４０４でライブモードが開始された後、処理はステップＳ４０５に進む。

ステップＳ４０５において、プロセッサ１１１は、第１人物１によるリセット動作が行われたか否かを判定する。リセット動作は、一度ライブモードに設定された画像伝達モードを再びシルエットモードに戻すための動作である。第１人物１によるリセット動作の有無は第１画像に基づいて判断される。第１人物１によるリセット動作が行われたと判定された場合（ステップＳ４０５；Ｙｅｓ）、処理はステップＳ４０２に戻る。第１人物１によるリセット動作が行われていないと判定された場合（ステップＳ４０５；Ｎｏ）、処理はステップＳ４０６に進む。ステップＳ４０５において、プロセッサ１１１は、第１人物１によって自発的にリセット動作が行われた場合にのみリセット動作が行われたと判定し、リセット動作が第１人物１による自発的な動作でないと判断される場合は、リセット動作が行われていないと判定してもよい。

リセット動作はシステムの管理者等により予め設定される。リセット動作は、第１トリガ動作と異なる動作であれば任意の動作が設定されてよい。ただし、第１人物１が自分の意思に基づいてリセット動作を行ったことがわかるように、第１エリアＡ１をただ通行するときには通常行われない動作が設定されることが望ましい。また、第１トリガ動作との区別を明確にするため、第１トリガ動作と大きく異なる動作が設定されることが望ましい。例えば、第１トリガ動作として両手を大きく振る動作が設定され、リセット動作としてその場で大きくジャンプする動作が設定されてもよい。

ステップＳ４０６及びステップＳ４０７における処理は、図５のステップＳ１０５及びステップＳ１０６における処理と同様である。ステップＳ４０７で画像伝達処理フラグがＯＦＦにされると、今サイクルの処理は終了する。

２つ目の応用形態においては、リセット動作が設定されることによって、第１人物１は、第２人物２に第１人物詳細画像を公開したくないにもかかわらず誤って第１トリガ動作を行ってしまったときに、自らの意思に基づいて画像Ｐ１を第１人物シルエット画像に戻すことができる。これにより、第１人物１のプライバシーにより配慮したシステムとすることができ、第１人物１にとっての安心感を高めることができる。

２－５．双方向の情報伝達
以上の説明では、第１エリアＡ１から第２エリアＡ２の一方向に向けて行われる画像による情報の伝達について述べた。このような画像による情報の伝達は、双方向に向けて行われてもよい。つまり、第１エリアＡ１から第２エリアＡ２へ画像による情報の伝達が行われると同時に、第２エリアＡ２から第１エリアＡ１へも画像による情報の伝達が行われてもよい。

図９は、双方向の情報の伝達が行われる場合の画像伝達システム１００の構成例を示している。撮影装置１３０は第１カメラ１３１及び第２カメラ１３２の２つのカメラを含む。投影／表示装置１２０は、第１物体Ｏ１に画像を投影或いは表示する第１装置１２１、及び第２物体Ｏ２に画像を投影或いは表示する第２装置１２２の２つの装置を含む。

図１０は、双方向の情報の伝達が行われている場面の例を示している。第１エリアＡ１には第１人物１が、第２エリアＡ２には第２人物２が存在している。第１カメラ１３１によって第１人物１が撮影され、撮影された画像に基づいて作成された第１人物１を表す画像Ｐ１が第２物体Ｏ２に投影されている点は図４と同様である。図１０では、それに加えて、第１エリアＡ１に第１装置１２１が、第２エリアＡ２に第２カメラ１３２が設置されている。そして、第２カメラ１３２で第２人物２が撮影され、撮影された画像に基づいて作成された第２人物２を表す画像Ｐ２が、第１エリアＡ１に設置された第１物体Ｏ１に投影されている。

画像Ｐ１及び画像Ｐ２はそれぞれ、投影が開始するときには、第１人物シルエット画像及び第２人物のシルエットを表す第２人物シルエット画像とされる。そして、第１人物１による第１トリガ動作が行われたときは、第１人物１に対してライブモードが開始して画像Ｐ１が第１人物詳細画像とされる。また、第２人物２による第２トリガ動作が行われたときは、第２人物２に対してライブモードが開始して画像Ｐ２が第２人物シルエット画像よりも第２人物そのものの画像に近い第２人物詳細画像とされる。第２トリガ動作は、システムの管理者等によって予め設定される。第１トリガ動作と第２トリガ動作は同じ動作であってもよいし、異なる動作であってもよい。第１人物１と第２人物２はお互いの画像を見ることができるため、双方向のコミュニケーションに繋がる。

なお、第１物体Ｏ１と同様、第２物体Ｏ２は、第２エリアＡ２の壁や柱、扉等の構造物であってもよいし、画像を投影するために専用に設置されたスクリーン等であってもよい。また、第２装置１２２についても、例として投影装置である場合を仮定して説明しているが、第２物体Ｏ２に画像を表示する表示装置であってもよい。このとき第２物体Ｏ２はディスプレイなどの表示画面であってもよく、第２装置１２２の一部であってもよい。

また、第２カメラ１３２の設置場所は必ずしも第２エリアＡ２内に限定される必要はなく、第２エリアＡ２にいる第２人物２を撮影可能な位置であれば第２エリアＡ２の外であってもよい。同様に、第２装置１２２は第２物体Ｏ２に画像を投影或いは表示可能な位置に設置されていればよく、設置場所は第２エリアＡ２内でなくてもよい。

双方向の情報の伝達が行われる場合、第１人物１に対しての画像伝達モードと、第２人物２に対しての画像伝達モードとは、独立に設定されてもよいし、連動して設定されてもよい。独立に設定される場合は、上記の説明における第１エリアＡ１、第２エリアＡ２、第１人物１、第２人物２、第１カメラ１３１、第２装置１２２、第２物体Ｏ２、第１トリガ動作をそれぞれ第２エリアＡ２、第１エリアＡ１、第２人物２、第１人物１、第２カメラ１３２、第１装置１２１、第１物体Ｏ１、第２トリガ動作に置き換えることで画像Ｐ２の投影に関する処理が実現できる。

２－６．トリガ動作の連携
双方向の情報の伝達が行われる場合、第１人物１に対しての画像伝達モードと、第２人物２に対しての画像伝達モードとは、連動して設定されてもよい。このとき、シルエットモードからライブモードへの移行のためのトリガ動作を、第１人物１と第２人物２の連携によって実現される動作とすることができる。第１人物１と第２人物２の連携によって可能になるトリガ動作としては、同時又は同一のトリガ動作が想定される。同時のトリガ動作が行われるとは、第１人物１による第１トリガ動作と第２人物２による第２トリガ動作が同時に行われることである。この場合も、第１トリガ動作と第２トリガ動作は、同じ動作であっても異なる動作であってもよい。同一のトリガ動作が行われるとは、第１トリガ動作と第２トリガ動作が同じ動作であり、第１人物１による第１トリガ動作及び第２人物２による第２トリガ動作のどちらもが行われることである。

例えば、第１人物が第１物体Ｏ１に投影された画像Ｐ２に触れると同時に第２人物２が第２物体Ｏ２に投影された画像Ｐ１に触れることを、同時又は同一のトリガ動作としてもよい。トリガ動作を連携させるときは、単に同時に行われた動作をトリガ動作とするだけでなく、このように、第１人物１と第２人物２とが協力して行うことが必要な動作をトリガ動作とすることができ、第１人物１と第２人物２との間により強い繋がり感や連帯感や感じさせることが可能になる。

図１１は、トリガ動作を連携させる場合における、画像伝達モード設定処理の例を示すフローチャートである。

ステップＳ５０１において、プロセッサ１１１は、第１エリアＡ１内に第１人物が、第２エリアＡ２に第２人物が存在し、第１人物１と第２人物２が揃った状態になっているか否かを判定する。それぞれのエリアに第１人物１及び第２人物２が存在しているか否かは、第１カメラ１３１及び第２カメラ１３２が撮影する画像に基づいて判断されてもよいし、それぞれのエリアに設置された人感センサ等により判断されてもよい。第１人物１と第２人物２が揃っていると判定された場合（ステップＳ５０１；Ｙｅｓ）、処理はステップＳ５０２に進む。第１人物１と第２人物２が揃っていない場合（ステップＳ５０１；Ｎｏ）、今サイクルの処理は終了する。

ステップＳ５０２において、プロセッサ１１１は、画像伝達処理フラグをＯＮにする。このとき、画像伝達モードはシルエットモードに設定される。シルエットモードが開始すると、処理はステップＳ５０３に進む。なお、図１１のフローチャートが示す処理において、第１人物１に対する画像伝達処理フラグのＯＮ／ＯＦＦと第２人物２に対する画像伝達処理フラグのＯＮ／ＯＦＦ、及び第１人物１に対する画像伝達モードの設定と第２人物２に対する画像伝達モードの設定とは連動して行われる。

ステップＳ５０３において、プロセッサ１１１は、同時又は同一のトリガ動作が行われたか否かを判定する。同時又は同一のトリガ動作が行われたか否かは、第１画像及び第２画像に基づいて判断される。ここで、第２画像は第２人物２を第２カメラ１３２で撮影することによって得られる画像である。同時又は同一のトリガ動作が行われたと判定された場合（ステップＳ５０３；Ｙｅｓ）、処理はステップＳ５０４に進む。同時又は同一のトリガ動作が行われていないと判定された場合（ステップＳ５０３；Ｎｏ）、処理はステップＳ５０５に進む。ステップＳ５０３において同時のトリガ動作の有無を判断するとき、プロセッサ１１１は、第１人物１によって第１トリガ動作が行われたタイミングと第２人物２によって第２トリガ動作が行われたタイミングとの差が一定時間内であれば同時のトリガ動作が行われたと判断してもよい。

ステップＳ５０４において、プロセッサ１１１は、ライブモードを開始する。現在の画像伝達モードがライブモードの場合は現在のモードが継続される。ライブモードが開始されると、処理はステップＳ５０５に進む。

ステップＳ５０５において、プロセッサ１１１は、第１エリアＡ１に第１人物１が、第２エリアＡ２に第２人物２が存在しているか否かを判定する。第１人物１と第２人物２のいずれもが引き続き存在している場合（ステップＳ５０５；Ｙｅｓ）、処理はステップＳ５０３に戻る。いずれか、又は両方の人物がいなくなっている場合（ステップＳ５０５；Ｎｏ）処理はステップＳ５０６に進む。

ステップＳ５０６において、プロセッサ１１１は、画像伝達処理フラグをＯＦＦにする。画像伝達処理フラグがＯＦＦになると、画像Ｐ１の第１物体Ｏ１への投影及び画像Ｐ２の第２物体Ｏ２への投影は終了する。画像伝達処理フラグがＯＦＦにされると、今サイクルの処理は終了する。

２－７．その他の例
第１エリアＡ１と第２エリアＡ２が遠く離れたエリアの場合、第１エリアＡ１と第２エリアＡ２との間には時差が発生することがある。画像伝達システム１００は、このような２つのエリアの間に発生する時差に対応したシステムであってもよい。つまり、画像伝達システム１００は、第１エリアＡ１を撮影して取得された画像Ｐ１を即座に第２物体Ｏ２に投影せず、時差を考慮したタイミングで第２物体Ｏ２に投影してもよい。

また、画像伝達システム１００は、画像Ｐ１と一緒に画像Ｐ２を第２物体Ｏ２に投影し、画像Ｐ２と一緒に画像Ｐ１を第１物体Ｏ１に投影してもよい。これにより、画像同士のインタラクションを生みだすことができる。例えば、第１人物１や第２人物２は、画像同士を重ね合わるといった楽しみ方によって、互いの繋がりをより強く感じることができる。

また、第１人物１と第１物体Ｏ１との距離が近くなるほど画像Ｐ１の濃さが濃くなるように画像Ｐ１の濃さは可変とされてもよい。同様に、第２人物２と第２物体Ｏ２との距離が近くなるほど画像Ｐ２の濃さが濃くなるように画像Ｐ２の濃さが可変とされてもよい。これにより、投影される画像Ｐ１及び画像Ｐ２の臨場感をより強調することができる。

３．第２の活用例
第１の活用例では、実在の人物との繋がりを感じさせるためのシステムとして、画像伝達システム１００を活用することを考えた。第２の活用例では、実在しないキャラクタとの繋がりを感じさせるためのシステムとして、画像伝達システム１００を活用することを考える。

図１２は、第２の活用例において画像伝達システム１００が適用された場面の例を示している。第２の活用例においては、投影／表示装置１２０は特定エリアＡ３内の投影面Ｓ１に画像を投影する投影装置１２３を含む。投影面Ｓ１は、特定エリアＡ３の壁や床、柱、扉等の構造物であってもよいし、画像の投影用に設置されたスクリーンであってもよい。また、投影面Ｓ１は平面であっても曲面であってもよい。

画像伝達システム１００（プロセッサ１１１）は、キャラクタＣ３を表すシルエットの画像Ｐ３を生成し、投影装置１２３によって投影面Ｓ１に投影する。画像Ｐ３の投影は、人物３が特定エリアＡ３に存在していることを条件として行われる。人物３は不特定の人物であってよく、単数の人物であってもよいし複数の人物であってもよい。人物３が特定エリアＡ３に存在していることは、例えば、人感センサ等のセンサによって判断されてもよい。センサが人を検知しているときは、特定エリアＡ３に人物３が存在していると判断される。また、このようなセンサは、画像伝達システム１００に含まれる装置であってもよい。別な例として、図１３に示されるように特定エリアＡ３に第３カメラ１３３が設置され、第３カメラ１３３が取得する情報に基づいて人物３が存在していることが判断されてもよい。このとき、第３カメラ１３３は撮影装置１３０に含まれていてもよい。

画像伝達システム１００（プロセッサ１１１）は、少なくとも特定エリアＡ３内に人物３が存在していることを条件として、特定エリアＡ３内の投影面Ｓ１に、キャラクタＣ３を表す画像Ｐ３を投影する。ここで、画像Ｐ３はシルエットの画像とされる。画像Ｐ３をシルエットの画像とすることで、キャラクタＣ３の存在感を強調する上で効果的である。また、画像Ｐ３がシルエットの画像とされることで、投影面Ｓ１として専用のスクリーンではなく特定エリアＡ３内の既存の構造物を使用した画像の投影が容易になる。既存の構造物を使用する場合には、画像Ｐ３がどこに出てくるのか人物３にとって予測がしづらくなり、キャラクタＣ３に出会ったときの臨場感を高めることができる。

第２の活用例においては、次のようないくつかの実施形態が想定される。次に挙げる実施形態は、それぞれ単独で実施されてもよいし、複数を組み合わせて実施されてもよい。

１つ目の実施形態では、画像伝達システム１００（プロセッサ１１１）は、１体のキャラクタＣ３を表す画像Ｐ３を、特定エリアＡ３内に２以上投影しない。キャラクタＣ３が１体しか存在しないことを画像Ｐ３でも表現することで、キャラクタＣ３の実在感を強調することができる。また、キャラクタＣ３のレア感が高まる。

２つ目の実施形態では、画像伝達システム１００（プロセッサ１１１）は、人物３とキャラクタＣ３との関係性を特定し、特定した関係性に応じて画像Ｐ３で表されるキャラクタＣ３の行動を変化させる。画像伝達システム１００は、例えば、第３カメラ１３３によって人物３を認識し、それぞれの人物３とキャラクタＣ３との関係性を特定することができる。特定される関係性は、例えばある人物がキャラクタに会った回数及び時間に応じたパラメータが予め規定され、それに基づいて決定されてもよいし、ランダムに決まる要素によって決定されてもよい。人物３とキャラクタＣ３との関係性を示す関係性情報は、記憶装置１１２に記憶される。プロセッサ１１１は、その関係性情報に基づいて、画像Ｐ３で表されるキャラクタＣ３の行動を変化させる。関係性に応じてキャラクタＣ３の動きが変わることで、まるでキャラクタに感情があるように感じられ、実在感を増すことができる。

３つ目の実施形態では、画像伝達システム１００（プロセッサ１１１）は、人物３がトリガ動作を行うことを、画像Ｐ３の投影を開始するための条件とする。トリガ動作は、システムの管理者等によって予め設定される。人物３によるトリガ動作の有無は、例えば、第３カメラ１３３で人物３を撮影して得られる画像に基づいて判断することができる。１つ目の活用例及び２つ目の活用例の場合と異なり、このときのトリガ動作は、人物３には予め教えられない。つまり、人物３がたまたまトリガ動作を行ったときにのみ画像Ｐ３の投影が開始することになる。このようなトリガ動作が画像Ｐ３の投影の条件とされることで、キャラクタのレア感が高まり、驚きやわくわく感を提供することができる。

Ａ１ 第１エリア
Ａ２ 第２エリア
Ａ３ 特定エリア
Ｃ３ キャラクタ
Ｏ１ 第１物体
Ｏ２ 第２物体
Ｐ１ 画像
Ｐ２ 画像
Ｐ３ 画像
Ｓ１ 投影面
１ 第１人物
２ 第２人物
３ 人物
１００ 画像伝達システム
１１０ 画像処理装置
１１１ プロセッサ
１１２ 記憶装置
１２０ 表示装置
１２１ 第１装置
１２２ 第２装置
１２３ 投影装置
１３０ 撮影装置
１３１ 第１カメラ
１３２ 第２カメラ
１３３ 第３カメラ
１０００ 建物

Claims (11)

1. １又は複数のプロセッサを備え、
   前記１又は複数のプロセッサは、
   第１エリアに存在する第１人物を第１カメラで撮影して第１画像を取得する処理と、
   前記第１画像内の前記第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、
   前記第１エリアと異なる第２エリアに設置された第２物体に前記第１人物シルエット画像を投影或いは表示する処理と、
   前記第１画像に基づいて、前記第１人物が第１トリガ動作を行ったか否か判定する処理と、
   前記第１人物が前記第１トリガ動作を行った場合、前記第１人物シルエット画像よりも前記第１人物そのものの画像に近い第１人物詳細画像を前記第２物体に投影或いは表示する処理と、
   を実行するように構成された
   画像伝達システム。
2. 請求項１に記載の画像伝達システムであって、
   前記第１トリガ動作は、前記第１人物に予め教えられる動作、或いは、前記第１人物によって予め設定された動作である、
   画像伝達システム。
3. 請求項１又は２に記載の画像伝達システムであって、
   前記第１人物詳細画像は、前記第１人物そのものの画像、或いは、前記第１人物のアバターの画像である
   画像伝達システム。
4. 請求項１又は２に記載の画像伝達システムであって、
   前記１又は複数のプロセッサは、
   前記第１人物が前記第１トリガ動作を行う度に、前記第１人物詳細画像を前記第１人物そのものの前記画像により近づける処理
   を更に実行するように構成された
   画像伝達システム。
5. １又は複数のプロセッサを備え、
   前記１又は複数のプロセッサは、
   第１エリアに存在する第１人物を第１カメラで撮影して第１画像を取得する処理と、
   前記第１画像内の前記第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、
   前記第１エリアと異なる第２エリアに設置された第２物体に前記第１人物シルエット画像を投影或いは表示する処理と、
   前記第２エリアに存在する第２人物を第２カメラで撮影して第２画像を取得する処理と、
   前記第２画像に含まれる前記第２人物のシルエットを表す第２人物シルエット画像を生成する処理と、
   前記第１エリアに設置された第１物体に前記第２人物シルエット画像を投影或いは表示する処理と、
   前記第１画像及び前記第２画像に基づいて、前記第１人物と前記第２人物が同時又は同一のトリガ動作を行ったか否か判定する処理と、
   前記第１人物と前記第２人物が前記同時又は同一のトリガ動作を行った場合、前記第１人物シルエット画像よりも前記第１人物そのものの画像に近い第１人物詳細画像を前記第２物体に投影或いは表示し、且つ、前記第２人物シルエット画像よりも前記第２人物そのものに近い第２人物詳細画像を前記第１物体に投影或いは表示する処理と
   を実行するように構成された
   画像伝達システム。
6. 請求項５に記載の画像伝達システムであって、
   前記同時又は同一のトリガ動作は、前記第１人物が前記第１物体に投影或いは表示された前記第２人物シルエット画像に触れると同時に、前記第２人物が前記第２物体に投影或いは表示された前記第１人物シルエット画像に触れることを含む
   画像伝達システム。
7. 特定エリア内の人を検知するセンサと、
   １又は複数のプロセッサと、を備え、
   前記１又は複数のプロセッサは、少なくとも前記センサが前記人を検知していることを条件として、前記特定エリア内の投影面にキャラクタを表すシルエットの画像を投影する処理を実行するように構成されている
   画像伝達システム。
8. 請求項７に記載の画像伝達システムであって、
   前記１又は複数のプロセッサは、１体の前記キャラクタを表す前記シルエットの画像を前記特定エリア内に２以上投影しない、
   画像伝達システム。
9. 請求項７又は８に記載の画像伝達システムであって、
   前記１又は複数のプロセッサは、前記センサが検知した人と前記キャラクタとの関係性を特定し、前記関係性に応じて、前記画像によって表される前記キャラクタの行動を変化させる、
   画像伝達システム。
10. 請求項７又は８に記載の画像伝達システムであって、
    前記１又は複数のプロセッサは、前記センサによって検知されている前記人がトリガ動作を行うことを条件として、前記画像を投影する、
    画像伝達システム。
11. 第１エリアに存在する第１カメラにより第１画像を取得する処理と、
    前記第１画像に含まれる第１人物のシルエットを表す第１人物シルエット画像を生成する処理と、
    前記第１エリアと異なる第２エリアに設置された第２物体に前記第１人物シルエット画像を投影或いは表示する処理と
    前記第１画像に基づいて、前記第１人物が第１トリガ動作を行ったか否か判定する処理と、
    前記第１人物が前記第１トリガ動作を行った場合、前記第１人物シルエット画像よりも前記第１人物そのものの画像に近い第１人物詳細画像を前記第２物体に投影或いは表示する処理と
    を含む
    画像伝達方法。

Images