JP2023013256A - 画像通信装置 - Google Patents

Abstract

【課題】自由度の高いコミュニケーションを操作者だけの操作により実現するオンラインコミュニケーションツールを提供する。【解決手段】画像通信装置１は、操作者の側を撮影する第１のカメラと、操作者の反対側を撮影する第２のカメラと、操作者の側を向く第１の表示部と、操作者の反対側を向く第２の表示部と、通信部と、制御部と、を備える。第１の表示部および第２の表示部は、それぞれ独立に、第１のカメラまたは第２のカメラで撮影された画像を表示する。通信部は、第１のカメラまたは第２のカメラで撮影された画像を遠隔地の通信装置に送信し、送信された画像を遠隔地の通信装置の表示部に表示させる。記制御部は、第１の表示部、第２の表示部および遠隔地の通信装置の表示部への画像の表示をそれぞれ独立に制御する。制御部の制御内容は、操作者が単独で操作可能である。【選択図】図１

Description

特許法第３０条第２項適用申請有り 研究報告ヒューマンコンピュータインタラクション（ＨＣＩ）２０２０－ＨＣＩ－１８９巻 １２号 一般社団法人情報処理学会 令和２年８月２８日発行

本発明は、画像通信装置に関する。

インターネットユーザが遠隔地にあるオブジェクトをどの方向からも立体的に見ることのできる、双方向型仮想テレプレゼンスシステムが提案されている（例えば、特許文献１参照）。

特表２００４－５１４２０５

旅行や展示会など、不特定多数の人が集まるイベントは、人間の日常生活に欠かせない。しかしながら開催地が遠いとか、病気療養中である、などといった理由で、こうしたイベントに参加できない人もいる。特に昨今のパンデミックの状況下にあっては、感染拡大を予防する観点から、イベントの参加人数や人の移動が厳しく制限される。これに対し最近普及の進むオンラインコミュニケーションツール（ｚｏｏｍ（登録商標）、ｓｋｙｐｅ（登録商標）等）を利用することにより、現地に行かなくても、遠隔地にいながら映像や音声を共有することができるようになった。以下、こうした遠隔地にいる人（以下、「クライアント」と呼ぶ）が、現地にいる人（以下、「レポータ」と呼ぶ）に同行しているような仮想的な動向体験のことを「オンラインツアー」と呼ぶ。

しかしながら、従来のオンラインコミュニケーションツールには、実現できるコミュニケーションが限られた視野のカメラを用いたものに限定されるとか、予定外の第三者がイベントに登場したような場合に当該第三者も含めたコミュニケーションが十分取れない、などといった制限がある。このため、自由なコミュニケーションを実現できないということが問題となる。また多くのカメラを備えたオンラインコミュニケーションツールを使用する場合は、機器類が大規模となり操作や管理が複雑になるため、操作者だけの操作では運用・制御できないことも問題となる。

本発明はこうした状況に鑑みてなされたものであり、その目的は、自由度の高いコミュニケーションを操作者だけの操作により実現するオンラインコミュニケーションツールを提供することにある。

上記課題を解決するために、本発明のある態様の画像通信装置は、操作者の側を撮影する第１のカメラと、操作者の反対側を撮影する第２のカメラと、操作者の側を向く第１の表示部と、操作者の反対側を向く第２の表示部と、通信部と、制御部と、を備える。第１の表示部および第２の表示部は、それぞれ独立に、第１のカメラまたは第２のカメラで撮影された画像を表示する。通信部は、第１のカメラまたは第２のカメラで撮影された画像を遠隔地の通信装置に送信し、送信された画像を当該遠隔地の通信装置の表示部に表示させる。制御部は、第１の表示部、第２の表示部および遠隔地の通信装置の表示部への画像の表示をそれぞれ独立に制御する。制御部の制御内容は、操作者のみにより操作可能である。

この態様によると、自由度の高いコミュニケーションを操作者だけの操作により実現できるオンラインコミュニケーションツールとしての画像通信装置を提供することができる。

ある実施の形態では、画像通信装置は、操作者の周囲を撮影する第３のカメラをさらに備えてもよい。第１の表示部および第２の表示部は、それぞれ独立に、第１のカメラ、第２のカメラまたは第３のカメラで撮影された画像を表示してもよい。通信部は、第１のカメラ、第２のカメラまたは第３のカメラで撮影された画像を遠隔地の通信装置に送信してもよい。

ある実施の形態では、遠隔地の通信装置はカメラを備えてもよい。画像通信装置の通信部は、遠隔地の通信装置のカメラで撮影された画像を受信し、当該受信した画像を第１の表示部および第２の表示部に表示させてもよい。第１の表示部、第２の表示部および遠隔地の通信装置の表示部は、それぞれ独立に、第１のカメラ、第２のカメラまたは遠隔地の通信装置のカメラで撮影された画像を表示してもよい。

ある実施の形態では、画像通信装置は、予め用意された画像コンテンツを記憶する記憶部をさらに備えてもよい。第１の表示部および第２の表示部は、それぞれ独立に、第１のカメラで撮影された画像、第２のカメラで撮影された画像または記憶部に記憶された画像コンテンツを表示してもよい。通信部は、第１のカメラで撮影された画像、第２のカメラで撮影された画像または記憶部に記憶された画像コンテンツを遠隔地の通信装置に送信してもよい。

ある実施の形態では、画像通信装置は、第１のカメラ、第２のカメラおよび第３のカメラとそれぞれ対になったマイクと、当該マイクの各々によって集音された音を再生するスピーカと、をさらに備えてもよい。これらのマイクの各々は、それぞれ、第１のカメラ、第２のカメラおよび第３のカメラの周辺の音を集音してもよい。このとき、制御部は、これらのマイクの各々によって集音された音の再生をそれぞれ独立に制御してもよい。

ある実施の形態では、画像通信装置は、操作者が制御部の制御内容を操作するための操作パネルをさらに備えてもよい。

ある実施の形態では、画像通信装置は、第１のカメラおよび第２のカメラが撮影する方向と異なる方向を撮影する第４のカメラと、第４のカメラが撮影する方向を向く第３の表示部と、をさらに備えてもよい。第１の表示部、第２の表示部および第３の表示部は、それぞれ独立に、第１のカメラ、第２のカメラまたは第４のカメラで撮影された画像を表示してもよい。通信部は、第１のカメラ、第２のカメラまたは第４のカメラで撮影された画像を遠隔地の通信装置に送信してもよい。

ある実施の形態では、画像通信装置は、第１のカメラおよび第２のカメラで撮影された画像を３Ｄ画像化する３Ｄ画像化部をさらに備えてもよい。

ある実施の形態では、画像通信装置は、第１の表示部および第２の表示部に表示させるためのＡＲ画像を生成するＡＲ画像生成部をさらに備えてもよい。

ある実施の形態では、画像通信装置は、操作者の周辺全体の音を集音する無指向性マイクをさらに備えてもよい。

なお、以上の構成要素の任意の組み合わせや、本発明の構成要素や表現を方法、装置、プログラム、プログラムを記録した一時的なまたは一時的でない記憶媒体、システムなどの間で相互に置換したものもまた、本発明の態様として有効である。

本発明によれば、自由度の高いコミュニケーションを操作者だけの操作により実現できるオンラインコミュニケーションツールを提供することができる。

第１の実施の形態に係る画像通信装置の機能ブロック図である。 図１の画像通信装置をオンラインツアーに使用しているときの様子を示す図である。 第２の実施の形態に係る画像通信装置の機能ブロック図である。 レポータが図３の画像通信装置の本体を左手に持ち、第３のカメラを右手に持つ様子を示す図である。 （ａ）は、図３の画像通信装置２の第１の表示部に表示された画像を示す。（ｂ）は、図３の画像通信装置の第２の表示部に表示された画像を示す。（ｃ）は、クライアントの通信端末の表示部に表示された画像を示す。 第３の実施の形態に係る画像通信装置の機能ブロック図である。 第４の実施の形態に係る画像通信装置の機能ブロック図である。 第５の実施の形態に係る画像通信装置の機能ブロック図である。 第６の実施の形態に係る画像通信装置の機能ブロック図である。 第７の実施の形態に係る画像通信装置の機能ブロック図である。 第８の実施の形態に係る画像通信装置の機能ブロック図である。 第９の実施の形態に係る画像通信装置の機能ブロック図である。 第１０の実施の形態に係る画像通信装置の機能ブロック図である。

以下、本発明を好適な実施の形態をもとに各図面を参照しながら説明する。実施の形態および変形例では、同一または同等の構成要素、部品には、同一の符号を付するものとし、適宜重複した説明は省略する。また、各図面における部品の寸法は、理解を容易にするために適宜拡大、縮小して示される。また、各図面において実施の形態を説明する上で重要ではない要素の一部は省略して表示する。また、第１、第２などの序数を含む用語は多様な構成要素を説明するために用いられるが、この用語は１つの構成要素を他の構成要素から区別する目的でのみ用いられ、この用語によって構成要素が限定されるものではない。

具体的な実施の形態を説明する前に、先ず概要を説明する。本実施の形態は、画像通信装置（以下、「本画像通信装置」と呼ぶ）に関する。以下では、本画像通信装置を旅行に関するオンライツアーに使用する例を説明する。この場合、レポータ（例えばツアーガイド）が本画像通信装置を携帯し、現地で移動しながらこれを操作する。遠隔地にいるクライアントは、表示部を備えた通信端末（スマートフォンやタブレット端末などの通信装置）を用いてオンラインツアーに参加する。

本画像通信装置は、本画像通信装置の操作者であるレポータ（以下、「操作者」とも呼ぶ）の側を撮影するカメラ（以下、「第１のカメラ」と呼ぶ）と、操作者の反対側を撮影するカメラ（以下、「第２のカメラ」と呼ぶ）と、を備える。第１のカメラは、スマートフォンのフロントカメラまたはインカメラに相当する。第２のカメラは、スマートフォンのリアカメラまたはアウトカメラに相当する。本画像通信装置はまた、操作者の側を向く表示部（以下、「第１の表示部」と呼ぶ）と、操作者の反対側を向く表示部（以下、「第２の表示部」と呼ぶ）と、を備える。第１の表示部はスマートフォンのディスプレイに相当するが、第２の表示部は従来のスマートフォンには備わっていない構成であることに注意する。

第１の表示部および第２の表示部は、それぞれ独立に、第１のカメラまたは第２のカメラで撮影された画像を表示する。すなわち第１の表示部と第２の表示部に表示される画像は、同じ画像であってもよく、異なる画像であってもよい。第１の表示部と第２の表示部に表示される画像の表示方法（画像の配置、画像の大小比率、画像の拡大率・縮小率、解像度、カラーバランス等）もまた、同じであってもよいし、異なっていてもよい。例えば、第１の表示部および第２の表示部には、ともに第１のカメラで撮影された画像が表示されてもよい。あるいは、第１の表示部には第２のカメラで撮影された画像が表示され、第２の表示部には第１のカメラで撮影された画像が表示されてもよい。さらには、第１の表示部には第１のカメラで撮影された画像と第２のカメラで撮影された画像の両方が３：７の大きさの比率で表示され、第２の表示部には第１のカメラで撮影された画像と第２のカメラで撮影された画像の両方が１：１の大きさの比率で表示されてもよい。

本画像通信装置は、通信部を備える。この通信部は、第１のカメラまたは第２のカメラで撮影された画像をクライアントの通信端末に送信し、送信された画像をクライアントの通信端末の表示部に表示させる。クライアントの通信端末の表示部に表示される画像は、第１の表示部や第２の表示部に表示される画像と同じ画像であってもよいし、異なる画像であってもよい。

本画像通信装置は、制御部を備える。この制御部は、第１の表示部、第２の表示部およびクライアントの通信端末の表示部への画像の表示をそれぞれ独立に制御する。すなわち、第１の表示部、第２の表示部およびクライアントの通信端末の表示部への表示画像として、どの画像を表示するかをそれぞれ別々に選択したり、表示方法（画像配置、拡大率・縮小率、解像度、カラーバランス等）をそれぞれ別々に変えたりすることができる。そしてこれらの表示制御は、操作者が単独で操作することができる。

レポータ（操作者）は、本画像通信装置を携帯しながら現地を移動する。このとき第１のカメラは、レポータが現地の様子を説明したり、感想を述べたりする姿を撮影する。第２のカメラは、レポータの目に映る姿を撮影する。このとき、例えば訪問先の店の店員や、現地で偶然出会った人など（以下、「第三者」と呼ぶ）が、オンラインツアーのコミュニケーションに参加したい場合がある。こうした第三者は、予め決められた者とは限らないし、通信端末を持っているとも限らないし、コミュニケーションにいつ参加しいつ離脱するかも分からない。このような場合であっても、本画像通信装置は、第２のカメラを用いてこうした第三者を撮影することができる。このとき第１の表示部は、レポータに向けて第１のカメラや第２のカメラが撮影した画像を表示する。一方第２の表示部は、第三者に向けて第１のカメラや第２のカメラが撮影した画像を表示する。クライアント端末の表示部は、クライアントに向けて第１のカメラや第２のカメラが撮影した画像を表示する。これにより、レポータ、クライアントおよび第三者は、３者間で自由にコミュニケーションを交わすことができる。このとき、第１の表示部、第２の表示部およびクライアント端末の表示部に、それぞれどんな画像をどのような形で表示させるかは、レポータが単独で自由に操作し、制御することができる。従ってオンラインツアーにおけるコミュニケーションの自由度が、従来に比べ飛躍的に向上する。

さらに本画像通信装置は、シンプルな機器構成と操作インタフェースとを用いて構成することができるため、操作や管理が簡易となり、表示画面等の制御を操作者単独の操作により実現することができる。

以上説明したように、本実施の形態に係る画像通信装置は、自由度の高いコミュニケーションを操作者だけの操作により実現できるオンラインコミュニケーションツールを提供することができる。

上記では、旅行を例としてオンライツアーでの活用を説明した。しかしこれに限られず、本画像通信装置は、展示会、学芸会、スポーツイベント、結婚式、入学式・卒業式、会社案内・学校案内など様々なオンラインツアーへの応用が可能である。また上記の例では、レポータとクライアントとがエンドツーエンドで直接コミュニケーションを交わした。しかしこれに限られず、本実施の形態に係る画像通信装置は、テレビ番組の出演者（レポータ）から視聴者（クライアント）への情報提供など、放送局やオンラインサービス提供者を介したサービス提供に使用することもできる。

［第１の実施の形態］
図１は第１の実施の形態に係る画像通信装置１の機能ブロック図である。画像通信装置１は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、を備える。画像通信装置１は、インターネットなどのネットワークを介して、遠隔にいるクライアントの通信端末１００に接続される。クライアントの通信端末１００は表示部１２０を備える。

第１のカメラ１１は、レポータ（操作者）の側（主にレポータ自身）を撮影する。第２のカメラ１２は、レポータの反対側（主にレポータが見るもの）を撮影する。第１の表示部２１はレポータの側を向き、主にレポータによって観察される。第２の表示部２２はレポータの反対側を向き、主にレポータに向かい合う人によって観察される。

第１の表示部２１および第２の表示部２２は、それぞれ独立に、第１のカメラ１１または第２のカメラ１２で撮影された画像を表示する。例えば第１の表示部２１と第２の表示部２２に表示される画像は、同じ画像であってもよいし、異なる画像であってもよい。第１の表示部２１と第２の表示部２２に表示される画像の表示方法（画像の配置、画像の大小比率、画像の拡大率・縮小率、解像度、カラーバランス等）もまた、同じであってもよいし、異なっていてもよい。

通信部３０は、第１のカメラ１１または第２のカメラ１２で撮影された画像をクライアントの通信端末１００に送信し、送信された画像をクライアントの通信端末１００の表示部１２０に表示させる。クライアントの通信端末１００の表示部１２０に表示される画像は、第１の表示部２１や第２の表示部２２に表示される画像と同じ画像であってもよいし、異なる画像であってもよい。クライアントの通信端末１００の表示部１２０に表示される画像の表示方法もまた、第１の表示部２１や第２の表示部２２に表示される画像のものと同じであってもよいし、異なっていてもよい。

制御部４０は、第１の表示部２１、第２の表示部２２およびクライアントの通信端末１００の表示部１２０への画像の表示をそれぞれ独立に制御する。すなわち、第１の表示部２１、第２の表示部２２およびクライアントの通信端末１００の表示部１２０への表示画像として、どの画像を表示するかをそれぞれ別々に選択したり、表示方法をそれぞれ別々に変えたりすることができる。そしてこれらの表示制御は、レポータ（操作者）が単独で操作することができる。

図２に、画像通信装置１をオンラインツアーに使用しているときの様子を示す。ここでは、レポータが画像通信装置１を左手に持って、正面にいる第三者と向き合っている。第１のカメラ１１はレポータの姿を撮影し、第２のカメラ１２は第三者の姿を撮影する。レポータは第１の表示部２１に表示される画像を観察し、第三者は第２の表示部２２に表示される画像を観察する。第１のカメラ１１および第２のカメラ１２で撮影された画像は、ネットワークを介して遠隔にいるクライアントの通信端末１００に送信される。クライアントの通信端末１００の表示部１２０には、第１のカメラ１１で撮影されたレポータの画像と、第２のカメラ１２で撮影された第三者の画像とが表示されている。このようにして、画像通信装置１を使うことにより、レポータ、クライアントおよび第三者との間で画像を通じたコミュニケーションを交わすことができる。

本実施の形態によれば、自由度の高いコミュニケーションをレポータだけの操作により実現することができる。

［第２の実施の形態］
図３は第１の実施の形態に係る画像通信装置２の機能ブロック図である。画像通信装置２は、第１のカメラ１１と、第２のカメラ１２と、第３のカメラ１３と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、第３のカメラ１３をさらに備える点で異なる。画像通信装置２のその他の構成は、画像通信装置１の構成と共通である。以下、画像通信装置２に関し、画像通信装置１と異なる部分に焦点を当てて説明し、共通する部分の重複する説明は省略する（以下同様）。

第３のカメラ１３はレポータの周囲を撮影するためのカメラであり、例えばレポータが携帯可能なハンドカメラで構成される。レポータは、第３のカメラを用いて任意の画像を撮影することができる。例えば第３のカメラは、旅行先の風景や、第三者と共通に興味を持った物（例えば、店に陳列された商品など）を撮影してもよい。

第１の表示部２１および第２の表示部２２は、それぞれ独立に、第１のカメラ１１、第２のカメラ１２または第３のカメラ１３で撮影された画像を表示する。通信部３０は、第１のカメラ１１、第２のカメラ１２または第３のカメラ１３で撮影された画像をクライアントの通信端末１００に送信する。

図４に、レポータが画像通信装置２の本体を左手に持ち、第３のカメラ１３を右手に持つ様子を示す。図示されるように、画像通信装置２はシンプルかつポータブルな機器で構成されているため、レポータが１人で持ち運び操作することが可能である。

図５に、画像通信装置２の第１の表示部２１に表示された画像（ａ）、画像通信装置２の第２の表示部２２に表示された画像（ｂ）およびクライアントの通信端末１００の表示部１２０に表示された画像（ｃ）を示す。図５（ａ）に示されるように、第１の表示部２１には、第２のカメラ１２で撮影された第三者の画像が全面に表示される。図５（ｂ）に示されるように、第２の表示部２２には、第２のカメラ１２で撮影された第三者の画像と、第３のカメラで撮影された風景の画像とが、約１：３の大きさの比率で、Ｐ ｉｎ Ｐ（Ｐｉｃｔｕｒｅ ｉｎ Ｐｉｃｔｕｒｅ）形式で表示される。図５（ｃ）に示されるように、クライアントの通信端末１００の表示部１２０には、第１のカメラ１１で撮影されたレポータの画像と、第２のカメラ１２で撮影された第三者の画像と、第３のカメラで撮影された風景の画像とが、約２：１：１の大きさの比率で、Ｐ ｂｙ Ｐ（Ｐｉｃｔｕｒｅ ｂｙ Ｐｉｃｔｕｒｅ）形式で表示される。

第１の表示部２１、第２の表示部２２、クライアントの通信端末１００の表示部１２０のそれぞれに、どのような画像をどのような表示方法で表示するかの制御は、レポータが単独で操作することができる。

本実施の形態によれば、レポータが任意の対象を撮影できる第３のカメラで撮影した画像を使うことができるので、より豊かなコミュニケーションを実現することができる。

［第３の実施の形態］
図６は第３の実施の形態に係る画像通信装置３の機能ブロック図である。この実施の形態では、クライアントの通信端末１００がカメラ１３０を備えている。カメラ１３０は、クライアント自身の画像や、クライアントの周囲の画像を撮影する。画像通信装置３は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、を備える。通信部３０は、ネットワークを介して、クライアントの通信端末１００のカメラ１３０で撮影された画像を受信し、受信した画像を第１の表示部２１および第２の表示部２２に表示させる。第１の表示部２１、第２の表示部２２およびクライアントの通信端末１００の表示部１２０は、それぞれ独立に、第１のカメラ１１、第２のカメラ１２またはクライアントの通信端末１００のカメラ１３０で撮影された画像を表示する。

本実施の形態によれば、クライアントの通信端末１００のカメラ１３０で撮影したクライアント側の画像を使うことができるので、さらに自由度の高いコミュニケーションを実現することができる。

［第４の実施の形態］
図７は第４の実施の形態に係る画像通信装置４の機能ブロック図である。画像通信装置４は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、記憶部５０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、記憶部５０をさらに備える点で異なる。画像通信装置４のその他の構成は、画像通信装置１の構成と共通である。

記憶部５０は、予め用意された画像コンテンツを記憶する。こうした画像コンテンツは、オンラインツアーに関連する周辺情報や、参加者のプロフィールに関する情報を含むものなど、任意の画像コンテンツであってよい。第１の表示部２１および第２の表示部２２は、それぞれ独立に、第１のカメラ１１で撮影された画像、第２のカメラ１２で撮影された画像または記憶部５０に記憶された画像コンテンツを表示する。通信部３０は、第１のカメラ１１で撮影された画像、第２のカメラ１２で撮影された画像または記憶部５０に記憶された画像コンテンツをクライアントの通信端末１００に送信する。

本実施の形態によれば、予め用意された画像コンテンツを使うことができるので、さらに自由度の高いコミュニケーションを実現することができる。

［第５の実施の形態］
図８は第５の実施の形態に係る画像通信装置５の機能ブロック図である。画像通信装置５は、第１のカメラ１１と、第２のカメラ１２と、第３のカメラ１３と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、記憶部５０と、第１のカメラ１１と対になった第１のマイク１１Ｍと、第２のカメラ１２と対になった第２のマイク１２Ｍと、第３のカメラ１３と対になった第３のマイク１３Ｍと、スピーカ１１Ｓと、を備える。すなわち画像通信装置５は、図３の画像通信装置２に対して、第１のマイク１１Ｍと、第２のマイク１２Ｍと、第３のマイク１３Ｍと、スピーカ１１Ｓと、を備える点で異なる。画像通信装置５のその他の構成は、画像通信装置２の構成と共通である。

第１のマイク１１Ｍ、第２のマイク１２Ｍおよび第３のマイク１３Ｍは、指向性マイクで構成され、それぞれ、第１のカメラ１１、第２のカメラ１２とおよび第３のカメラ１３の周辺の音を集音する。スピーカ１１Ｓは、第１のマイク１１Ｍ、第２のマイク１２Ｍおよび第３のマイク１３Ｍの各々によって集音された音を再生する。

本実施の形態によれば、各マイクが、対応する各カメラの撮影方向からの音声を選択的に集音し再生することができるので、臨場感のあるコミュニケーションを実現することができる。

この実施の形態において、制御部４０は、第１のマイク１１Ｍ、第２のマイク１２Ｍおよび第３のマイク１３Ｍの各々によって集音された音の再生をそれぞれ独立に制御してもよい。例えば、レポータが説明する場面では第１のマイク１１Ｍが集音した音声を最も大きく再生し、第３のカメラ１３で撮影された風景を主に表示する場面では第３のマイク１３Ｍが集音した音声を最も大きく再生するといった具合である。

本実施の形態によれば、各マイクが集音した音声を最適に制御して再生できるので、さらに臨場感のあるコミュニケーションを実現することができる。

［第６の実施の形態］
図９は第６の実施の形態に係る画像通信装置６の機能ブロック図である。画像通信装置６は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、操作パネル６０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、操作パネル６０をさらに備える点で異なる。画像通信装置６のその他の構成は、画像通信装置１の構成と共通である。

レポータ（操作者）は、制御部４０の制御内容を操作するために操作パネル６０を操作する。例えば操作パネル６０は、第１の表示部２１、第２の表示部２２およびクライアントの通信端末１００の表示部１２０への表示画像として、どの画像を表示するかをそれぞれ別々に選択したり、どのような表示方法（画像配置、拡大率・縮小率、解像度、カラーバランス等）で表示するかを決めたりするためのユーザインタフェースを提供する。

本実施の形態によれば、操作者は、より便利で使い勝手よく制御部の制御内容を操作することができる。

［第７の実施の形態］
図１０は第７の実施の形態に係る画像通信装置７の機能ブロック図である。画像通信装置７は、第１のカメラ１１と、第２のカメラ１２と、第４のカメラ１４と、第１の表示部２１と、第２の表示部２２と、第３の表示部２３と、通信部３０と、制御部４０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、第４のカメラ１４と、第３の表示部２３と、をさらに備える点で異なる。画像通信装置７のその他の構成は、画像通信装置１の構成と共通である。

第４のカメラ１４は、レポータ（操作者）の側ともレポータの反対側とも異なる方向を撮影する。言い換えれば第４のカメラ１４は、第１のカメラが撮影する方向とも前記第２のカメラが撮影する方向とも異なる方向を撮影する。例えば第４のカメラ１４は、レポータの横方向、上方向あるいは下方向など、レポータの側およびレポータの反対側と異なる任意の方向を撮影してよい。第３の表示部２３は、第４のカメラ１４が撮影する方向を向く。第１の表示部２１、第２の表示部２２および第３の表示部２３は、それぞれ独立に、第１のカメラ１１、第２のカメラ１２または第４のカメラ１４で撮影された画像を表示する。通信部３０は、第１のカメラ１１、第２のカメラ１２または第４のカメラ１４で撮影された画像をクライアントの通信端末１００に送信する。

第１のカメラ１１は、レポータの側（主にレポータ自身）を撮影する。第２のカメラ１２は、レポータの反対側（主にレポータの目に映る姿）を撮影する。第４のカメラ１４は、レポータの側ともレポータの反対側とも異なる方向、例えばレポータの横方向（主にレポータの横方向にいる人）を撮影する。第１の表示部２１はレポータの側を向き、主にレポータによって観察される。第２の表示部２２はレポータの反対側を向き、主にレポータに向かい合う人によって観察される。第３の表示部２３は第４のカメラ１４が撮影する方向を向き、主に第４のカメラ１４が撮影する方向にいる人によって観察される。従って第４のカメラ１４と第３の表示部２３があることにより、レポータに向かい合う第三者に加えて、当該第三者とは異なる方向にいる第三者もコミュニケーションに参加することができる。

本実施の形態によれば、より多くの人がコミュニケーションに参加できるので、コミュニケーションの自由度をさらに向上することができる。

［第８の実施の形態］
図１１は第８の実施の形態に係る画像通信装置８の機能ブロック図である。画像通信装置８は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、３Ｄ画像化部７０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、３Ｄ画像化部７０をさらに備える点で異なる。画像通信装置６のその他の構成は、画像通信装置１の構成と共通である。

３Ｄ画像化部７０は、第１のカメラ１１および第２のカメラ１２で撮影された画像を３Ｄ画像化する。第１の表示部２１および第２の表示部２２には、３Ｄ画像化部７０によって３Ｄ画像化された画像が表示される。

本実施の形態によれば、３Ｄ画像化された画像を使うことができるので、より視覚的効果の高いコミュニケーションを実現することができる。

［第９の実施の形態］
図１２は第９の実施の形態に係る画像通信装置９の機能ブロック図である。画像通信装置９は、第１のカメラ１１と、第２のカメラ１２と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、ＡＲ画像生成部８０と、を備える。すなわち画像通信装置２は、図１の画像通信装置１に対して、ＡＲ画像生成部８０をさらに備える点で異なる。画像通信装置６のその他の構成は、画像通信装置１の構成と共通である。

ＡＲ画像生成部８０は、第１の表示部２１および第２の表示部２２に表示させるためのＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ：拡張現実）画像を生成する。
ＡＲ画像は、オンラインツアーに関連する付加的な情報や、オンラインツアーをより効果的に見せる情報を含むものなど、任意のＡＲ画像であってよい。第１の表示部２１および第２の表示部２２には、第１のカメラ１１および第２のカメラ１２で撮影された画像に加えて、ＡＲ画像生成部８０によって生成されたＡＲ画像が表示される。

本実施の形態によれば、生成したＡＲ画像を表示させることができるので、さらに視覚的効果の高いコミュニケーションを実現することができる。

［第１０の実施の形態］
図１３は第１０の実施の形態に係る画像通信装置１０の機能ブロック図である。画像通信装置１０は、第１のカメラ１１と、第２のカメラ１２と、第３のカメラ１３と、第１の表示部２１と、第２の表示部２２と、通信部３０と、制御部４０と、記憶部５０と、第１のカメラ１１と対になった第１のマイク１１Ｍと、第２のカメラ１２と対になった第２のマイク１２Ｍと、第３のカメラ１３と対になった第３のマイク１３Ｍと、スピーカ１１Ｓと、無指向性マイク９０と、を備える。すなわち画像通信装置１０は、図８の画像通信装置５に対して、無指向性マイク９０をさらに備える点で異なる。画像通信装置１０のその他の構成は、画像通信装置５の構成と共通である。

無指向性マイク９０は、レポータの周辺全体の音を集音する。これにより、第１のマイク１１Ｍ、第２のマイク１２Ｍおよび第３のマイク１３Ｍが対応する各カメラの撮影方向から選択的に集音した音声に加えて、例えば背景音としての周辺全体の音が集音される。スピーカ１１Ｓは、第１のマイク１１Ｍ、第２のマイク１２Ｍおよび第３のマイク１３Ｍの各々によって集音された音、並びに無指向性マイク９０によって集音された音を再生する。

本実施の形態によれば、各カメラの撮影方向からの音声に加えて、周辺全体の音も集音して再生することができるので、聴覚的により臨場感のあるコミュニケーションを実現することができる。

以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

１…画像通信装置。
２…画像通信装置。
３…画像通信装置。
４…画像通信装置。
５…画像通信装置。
６…画像通信装置。
７…画像通信装置。
８…画像通信装置。
９…画像通信装置。
１０…画像通信装置。
１１…第１のカメラ。
１２…第２のカメラ。
１３…第３のカメラ。
１４…第４のカメラ。
１１Ｍ…第１のマイク。
１２Ｍ…第２のマイク。
１３Ｍ…第３のマイク。
１１Ｓ…スピーカ。
２１…第１の表示部。
２２…第２の表示部。
２３…第３の表示部。
３０…通信部。
４０…制御部。
５０…記憶部。
６０…操作パネル。
７０…３Ｄ画像化部。
８０…ＡＲ画像生成部。
９０…無指向性マイク。
１００…クライアントの通信端末。
１２０…クライアントの通信端末の表示部。
１３０…クライアントの通信端末のカメラ。

Claims (11)

1. 操作者の側を撮影する第１のカメラと、
   前記操作者の反対側を撮影する第２のカメラと、
   前記操作者の側を向く第１の表示部と、
   前記操作者の反対側を向く第２の表示部と、
   通信部と、
   制御部と、を備え、
   前記第１の表示部および前記第２の表示部は、それぞれ独立に、前記第１のカメラまたは前記第２のカメラで撮影された画像を表示し、
   前記通信部は、前記第１のカメラまたは前記第２のカメラで撮影された画像を遠隔地の通信装置に送信し、送信された画像を前記遠隔地の通信装置の表示部に表示させ、
   前記制御部は、前記第１の表示部、前記第２の表示部および前記遠隔地の通信装置の表示部への画像の表示をそれぞれ独立に制御し、
   前記制御部の制御内容は、前記操作者が単独で操作可能であることを特徴とする画像通信装置。
2. 前記操作者の周囲を撮影する第３のカメラをさらに備え、
   前記第１の表示部および前記第２の表示部は、それぞれ独立に、前記第１のカメラ、前記第２のカメラまたは前記第３のカメラで撮影された画像を表示し、
   前記通信部は、前記第１のカメラ、前記第２のカメラまたは前記第３のカメラで撮影された画像を前記遠隔地の通信装置に送信することを特徴とする請求項１に記載の画像通信装置。
3. 前記遠隔地の通信装置はカメラを備え、
   前記通信部は、前記遠隔地の通信装置のカメラで撮影された画像を受信し、受信した画像を前記第１の表示部および前記第２の表示部に表示させ、
   前記第１の表示部、前記第２の表示部および前記遠隔地の通信装置の表示部は、それぞれ独立に、前記第１のカメラ、前記第２のカメラまたは前記遠隔地の通信装置のカメラで撮影された画像を表示することを特徴とする請求項２に記載の画像通信装置。
4. 予め用意された画像コンテンツを記憶する記憶部をさらに備え、
   前記第１の表示部および前記第２の表示部は、それぞれ独立に、前記第１のカメラで撮影された画像、前記第２のカメラで撮影された画像または前記記憶部に記憶された画像コンテンツを表示し、
   前記通信部は、前記第１のカメラで撮影された画像、前記第２のカメラで撮影された画像または前記記憶部に記憶された画像コンテンツを前記遠隔地の通信装置に送信することを特徴とする請求項１から３のいずれかに記載の画像通信装置。
5. 前記第１のカメラおよび前記第２のカメラとおよび前記第３のカメラとそれぞれ対になったマイクと、
   前記マイクの各々によって集音された音を再生するスピーカと、をさらに備え、
   前記マイクの各々は、それぞれ、前記第１のカメラ、前記第２のカメラおよび前記第３のカメラの周辺の音を集音することを特徴とする請求項２に記載の画像通信装置。
6. 前記制御部は、前記マイクの各々によって集音された音の再生をそれぞれ独立に制御することを特徴とする請求項５に記載の画像通信装置。
7. 前記操作者が前記制御部の制御内容を操作するための操作パネルをさらに備えることを特徴とする請求項１から６のいずれかに記載の画像通信装置。
8. 前記第１のカメラおよび前記第２のカメラが撮影する方向と異なる方向を撮影する第４のカメラと、
   前記第４のカメラが撮影する方向を向く第３の表示部と、をさらに備え、
   前記第１の表示部、前記第２の表示部および前記第３の表示部は、それぞれ独立に、前記第１のカメラ、前記第２のカメラまたは前記第４のカメラで撮影された画像を表示し、
   前記通信部は、前記第１のカメラ、前記第２のカメラまたは前記第４のカメラで撮影された画像を前記遠隔地の通信装置に送信することを特徴とする請求項１に記載の画像通信装置。
9. 前記第１のカメラおよび前記第２のカメラで撮影された画像を３Ｄ画像化する３Ｄ画像化部をさらに備えることを特徴とする請求項１に記載の画像通信装置。
10. 前記第１の表示部および前記第２の表示部に表示させるためのＡＲ画像を生成するＡＲ画像生成部をさらに備えることを特徴とする請求項１に記載の画像通信装置。
11. 前記操作者の周辺全体の音を集音する無指向性マイクをさらに備えることを特徴とする請求項５に記載の画像通信装置。

Images