JP3587106B2 - 視線一致テレビ会議装置 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は視線一致テレビ会議装置に関し、特にテレビカメラとモニタ装置とを用いて複数人数でテレビ会議を行うための多地点間テレビ会議装置に関する。
【０００２】
【従来の技術】
従来、多地点間テレビ会議装置としては、テレビカメラとモニタ装置とを用い、複数地点にいる参加者の映像を撮影及び伝送することで多地点テレビ会議を行うシステムが多く提案されている。
【０００３】
このような多地点テレビ会議システムでは、会議参加者が同じ会議を行っているという臨場感を与えるために、参加者間の視線を一致させ、会話を円滑にすることが重要な課題である。
【０００４】
これに対して、図９に示すように、特開平２−５０６９１号公報に開示された技術ではユーザに提示する画面を複数の小画面に分割し、各小画面に多地点の参加者の映像を表示させ、その小画面の近くにビデオカメラを置き、通信相手に自分の近くのカメラ映像を送信している。これによって、会話相手には自分の正面に近い映像が映されることになり、自然な会話が可能になる。
【０００５】
また、自然な会議映像をユーザに提示する方法としては、特開平８−３２９４８号公報に開示された技術がある。この技術では、３人以上参加の多地点会議の場合に湾曲した大スクリーンにユーザの映像を配置し、スクリーン後方でシステムの使用者とその映像の映っている方向の延長線上にビデオカメラを設置し、各参加者に映像を送信している。
【０００６】
この映像は、図１０で示すように、仮想的な会議空間内で各参加者が均等な距離になるように（３人の場合は正三角形の頂点、４人の場合は正方形の頂点に）配置している。
【０００７】
図１２（ａ）〜（ｃ）では３人で対話をしている例を示しているが、Ｐ地点のユーザがＡ地点のユーザと会話するために、視線を一致させると、Ｐ地点のユーザの正面画像がＡ地点に送られるため、Ａ地点とＰ地点とは互いに視線を一致させているように見える。
【０００８】
また、Ｂ地点のユーザへは正面から６０度の角度の横顔の映像を撮影して送信しているため、Ｂ地点のユーザはＰ地点のユーザがＡ地点のユーザの方を見ているような映像を呈示することができる。このように、どの参加者同士が会話をしていても互いの視線が一致しているように見える。
【０００９】
【発明が解決しようとする課題】
しかしながら、特開平２−５０６９１号公報に開示された技術では自分が会話している相手の表示位置とカメラの方向とが微妙にずれており、正確には自分と相手との視線が一致しないという問題がある。
【００１０】
この問題は現在知られているようなハーフミラーによる視線一致装置等を使用することによって回避することができるが、それだけではなく、図１１（ａ），（ｂ）に示すように、他人同士が会話をしている場合に、その会話者同士の視線があっているようには見えないため、十分な臨場感が得られないという問題がある。
【００１１】
一方、特開平８−３２９４８号公報に開示された技術では、上記の問題を解決しているが、参加者を均等な距離になるように配置しているため、一番設定が簡単な３人の会議の場合に視野角６０度もの広視野角の曲面スクリーンを用意しなければならず、スクリーンの設定が困難であるという問題がある。
【００１２】
また、スクリーンの設定を３人の場合で６０度以下にすると、図１３（ａ）〜（ｃ）に示すように、会話をしているＡ地点のユーザにはＰ地点のユーザの正面顔が見えるため、自然なコミュニケーションが可能であるが、Ｂ地点のユーザへは６０度未満の角度から撮ったＰ地点のユーザの横顔映像しか送ることができないため、Ｐ地点のユーザの映像が正確にＡ地点のユーザと視線を合わせている映像を見ることができず、不自然になってしまう。
【００１３】
そこで、本発明の目的は上記の問題点を解消し、各対話者の視線を一致させることができ、自然な対話を可能にすることができる視線一致テレビ会議装置を提供することにある。
【００１４】
【課題を解決するための手段】
本発明による視線一致テレビ会議装置は、複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
前記通信先の操作者の映像を異なる位置に配置して表示する表示スクリーンと、
前記表示スクリーン上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
前記表示スクリーン上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを備えている。
【００１５】
本発明による他の視線一致テレビ会議装置は、複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
前記通信先の操作者の映像を異なる位置に配置して表示する表示スクリーンと、
前記表示スクリーンの背後に設置されかつ操作者の映像を撮影する複数の撮像装置と、
操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
前記対話相手検出部によって検出された結果に応じて、表示される会話中の通信先の操作者と視線が一致する前記撮像装置の位置を決定し、かつ前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する前記複数の撮像装置の位置を決定し、会話中の通信先に応じて前記複数の撮像装置各々を移動させる撮像装置移動部と、
前記対話相手検出部の検出結果に応じて前記会話中の通信先及びそれ以外の通信先にそれぞれ前記複数の撮像装置各々で撮影した映像のうちの対応する映像を送信する映像送信部とを備えている。
【００１６】
本発明による別の視線一致テレビ会議装置は、複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
前記通信先の操作者の映像を異なる位置に配置して表示する受像機と、
前記受信機の表示画面上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
前記受信機の表示画面上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを備えている。
【００１７】
すなわち、本発明の第１の視線一致テレビ会議装置は、通信相手の映像を異なる位置に配置して表示する大画面の表示スクリーンと、ユーザが通信相手の映像を見る時の視線に合わせて設置した正面用カメラと、ユーザが他の通信相手の映像を見る時の横顔を表示スクリーン上の映像配置に従った角度から撮影するように設置した複数の横顔用カメラとを用意している。
【００１８】
通信相手にはこれらのカメラで撮影した映像を送信するが、どのカメラの映像を送信するかを決定するために対話相手検出部を持つ。これはユーザが他地点のどの通信相手と会話しているかを検出するための手段である。対話相手検出部で得られた結果から、映像送信部がどのカメラで撮影した映像を各通信相手に送るかを選択して送信する。
【００１９】
本発明の第１の視線一致テレビ会議装置では、以上の手段を備えることで、遠隔地点の通信相手と視線一致して対話が可能となり、各対話者の視線を一致させることが可能となるので、テレビ会議において自然な対話が可能になる。
【００２０】
また、本発明の第２の視線一致テレビ会議装置は、通信相手と対話している時の正面映像を撮影する正面カメラと、横顔を撮影する横顔用カメラとを用意するのではなく、対話相手検出部によって検出された対話相手によってカメラを移動させることが可能な撮像装置移動部を備えている。
【００２１】
さらに、本発明の第３の視線一致テレビ会議装置は、正面用カメラで撮影したすべてのカメラ映像を画像処理することで、ユーザが向いている顔の向きを検出する対話相手検出部を備えている。
【００２２】
本発明の第２の視線一致テレビ会議装置では各通信相手と対話している時に、正面から撮影するカメラを用意していなかったが、本発明の第４の視線一致テレビ会議装置ではこの正面から撮影するカメラを用意し、本発明の第３の視線一致テレビ会議装置に備えている対話相手検出部を持っている。
【００２３】
本発明の第５の視線一致テレビ会議装置は、各地点から送信されてきた映像を単に合成するだけでなく、各地点の映像から人物像だけを取り出すことが可能な背景処理部と、コンピュータグラフィックスで生成した会議室映像等の任意の背景映像を合成することが可能な映像合成部とを備え、遠隔地の参加者が同じ会議を行っている一体感を出すことを可能としている。
【００２４】
本発明の第６の視線一致テレビ会議装置は、表示スクリーンを持つのではなく大画面のブラウン管を用いた受像機を用いている。
【００２５】
これによって、本発明の第１及び第３の視線一致テレビ会議装置によれば、撮像装置を正面用及び横顔用にそれぞれ用意することによって、各対話者の視線が一致し、自然な対話が可能となる。
【００２６】
また、本発明の第２及び第４の視線一致テレビ会議装置によれば、対話相手によって撮像装置を移動させることで、各対話者の視線が一致し、自然な対話が可能となる。さらに、本発明の第５の視線一致テレビ会議装置によれば、同じ仮想的な会議室空間に参加することで、さらに同じ会議に参加しているという一体感を高めることが可能となる。
【００２７】
【発明の実施の形態】
次に、本発明の実施例について図面を参照して説明する。図１は本発明の第１の実施例による視線一致テレビ会議装置の構成を示すブロック図である。図１において、本発明の第１の実施例による視線一致テレビ会議装置は表示スクリーン１と、正面用撮像装置２−１〜２−ｉと、横顔用撮像装置３−１〜３−ｊと、対話相手検出部４と、映像送信部５とから構成されている。
【００２８】
本発明の第１の実施例による視線一致テレビ会議装置では他の２地点の対話相手の映像を表示し、ユーザに呈示するための表示スクリーン１を備えている。また、ユーザが表示スクリーン１に映っている対話相手を見る場合に、その視線の先に正面用撮像装置２−１〜２−ｉを用意する。
【００２９】
ここで、表示スクリーン１はユーザが映っている対話相手を見た場合の視線の先に正面用撮像装置２−１〜２−ｉのいずれかを設置できるように、表示スクリーン１は半透明になっていたり、ハーフミラーを装備する等、映像を表示することとカメラで撮影できることとの両方の機能を備えていることが必要である。
【００３０】
次に、ユーザが表示スクリーン１に映っている対話相手を見る場合に、その対話相手と会話している時の横顔を撮影するための横顔撮像装置３−１〜３−ｊが用意されている。
【００３１】
ユーザは対話相手検出部４によって、多地点のどのユーザと会話しているかを指定し、その指定されたユーザへは正面用撮像装置２−１〜２−ｉで撮影した映像を送信し、指定されていないユーザへは横顔用撮像装置３−１〜３−ｊで撮影した映像を送る映像送信部５を備えている。
【００３２】
図２は本発明の第１の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。図２（ａ）はＰ地点でのカメラの配置を示しており、図２（ｂ）はＢ地点で見る画像を示している。これら図１及び図２を参照して本発明の第１の実施例による視線一致テレビ会議装置の映像表示手法の原理について説明する。ここで、説明を簡単化するために、本発明の第１の実施例による視線一致テレビ会議装置は３地点間のテレビ会議に用いられるものとする。
【００３３】
表示スクリーン１が６０度もの視野角をとれず、６０度未満のθ度であったとする。この場合、Ａ地点のユーザとＢ地点のユーザとを表示スクリーン１上に均等に配置すると、図２（ａ）に示すような配置になる。
【００３４】
ここで、Ｐ地点のユーザとＡ地点のユーザとが会話をしている場合を考える。Ａ地点にはＰ地点のユーザの正面映像、Ｂ地点にはＰ地点のユーザがＡ地点のユーザを見ている画像を送信する必要がある。Ａ地点に送信する映像は正面用撮像装置２−１によってＰ地点のユーザがＡ地点の方を向いている正面映像を撮影する。
【００３５】
また、図２（ａ）に示す通り、Ｐ地点の表示スクリーン１で見ると、Ａ地点とＢ地点とは（９０−０．５θ）度の角度で表示される。同様に、Ｂ地点で見ると、Ｐ地点とＡ地点とは（９０−０．５θ）度の角度で表示されていることになる。
【００３６】
Ｐ地点がＡ地点と会話をしている時には正面用撮像装置２−２［図２（ａ）の「Ｂ地点へのカメラ１」］ではθ度の横顔しか撮影できない。このため、これより更に（９０−１．５θ）度離れた横顔撮像装置３−２［図２（ａ）の「Ｂ地点へのカメラ２」］で撮影しなければならない。
【００３７】
これはＰ地点のユーザがＡ地点のユーザと会話をしている場合であるが、Ｂ地点のユーザと会話している時にはＢ地点には正面用撮像装置２−２で撮影した映像を、またＡ地点には横顔撮像装置３−１で撮影した映像を送る必要がある。
【００３８】
これを区別するため、対話相手検出部４によってどの相手と対話しているのかを検出する。これで検出された対話相手には正面撮像装置２−１，２−２で撮像した映像を、それ以外には、横顔撮像装置３−１，３−２で撮影した映像を他の地点へ送信することによって、図２（ｂ）に示すような各地点のユーザが視線を一致させて会話することができ、自然なコミュニケーションがとれる。
【００３９】
図３は本発明の第１の実施例による視線一致テレビ会議装置の４地点での遠隔会議で視線一致するためのカメラの配置の説明図である。図３においては、Ｐ地点からＡ地点、Ｂ地点、Ｃ地点を見ている時のカメラの配置状況を示している。
【００４０】
ここで、上記の本発明の第１の実施例の説明においてはその説明を簡単化するために、３地点間のテレビ会議を前提としているが、これを図３に示すように、４地点以上の間のテレビ会議に拡張するのは容易である。
【００４１】
図４は本発明の第２の実施例による視線一致テレビ会議装置の構成を示すブロック図である。図４において、本発明の第２の実施例による視線一致テレビ会議装置は表示スクリーン１と、対話相手検出部４と、映像送信部５と、撮像装置６−１〜６−ｋと、撮像装置移動部７とから構成されている。
【００４２】
本発明の第２の実施例による視線一致テレビ会議装置は本発明の第１の実施例による視線一致テレビ会議装置と異なり、正面用撮像装置２−１〜２−ｉ及び横顔撮像装置３−１〜３−ｊを持たず、撮像装置６−１〜６−ｋでこれらを兼用している。
【００４３】
図５は本発明の第２の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。これら図４及び図５を参照して本発明の第２の実施例による視線一致テレビ会議装置の映像表示手法の原理について説明する。
【００４４】
３地点で会話を行う場合、Ｐ地点ではＡ地点用のカメラ６Ａ及びＢ地点用のカメラ６Ｂの２台のカメラで構成された撮像装置６−１〜６−ｋを持つ。カメラ６Ａで撮影した映像はＡ地点に送られ、カメラ６Ｂで撮影した映像は地点に送られる。撮像装置６−１〜６−ｋは撮像装置移動部７によって、図５に示すように、レール等の手段で移動できるようになっている。
【００４５】
撮像装置移動部７は以下のように、撮像装置６−１〜６−ｋを移動させる。図５に示すように、Ｐ地点がＡ地点のユーザと会話している時、カメラ６Ａは表示スクリーン１でＡ地点の映像が映っている視線の延長上にある。
【００４６】
また、カメラ６ＢはＢ地点の映像が映っている延長上からさらに（９０−１．５θ）度、右にある。Ｐ地点が会話相手をＢ地点のユーザに変えた場合、Ａ地点用のカメラであるカメラ６Ａは現在の位置から（９０−１．５θ）度左へ移動し、カメラ６Ｂも（９０−１．５θ）度左へ移動して表示スクリーン１上でＢ地点の映像が映っている延長上に移動する。
【００４７】
ここで、撮像装置６−１〜６−ｋの位置はＰ地点がどの地点のユーザと会話しているかを検出する必要があるが、これを行うのが対話相手検出部４である。対話相手検出部４で検出した対話相手をもとに、撮像装置移動部７は撮像装置６−１〜６−ｋを移動させる。
【００４８】
図６は本発明の第３の実施例による視線一致テレビ会議装置の構成を示すブロック図である。図６において、本発明の第３の実施例による視線一致テレビ会議装置は表示スクリーン１と、正面用撮像装置２−１〜２−ｉと、横顔用撮像装置３−１〜３−ｊと、対話相手検出部４と、映像送信部５とから構成されている。
【００４９】
本発明の第３の実施例による視線一致テレビ会議装置では本発明の第１の実施例による視線一致テレビ会議装置にある対話相手検出部４を正面用撮像装置２−１〜２−ｉで撮影した正面画像をもとに検出するようにしたものである。
【００５０】
図７は本発明の第３の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。これら図６及び図７を参照して本発明の第３の実施例による視線一致テレビ会議装置の映像表示手法の原理について説明する。
【００５１】
本発明の第３の実施例による視線一致テレビ会議装置では、Ｐ地点が各地点のユーザの方を向いて会話を行う場合、その正面用撮像装置２−１〜２−ｉで撮影される映像の例を示している。
【００５２】
ここではＰ地点のユーザがＡ地点のユーザと会話している例であるが、この場合、Ａ地点用の正面用撮像装置２−１にはＰ地点のユーザの正面映像が映るが、Ｂ地点用の正面用撮像装置２−ｉにはＰ地点のユーザの右向きの横顔が見えることになる。この映像の違いによって、対話相手を検出する対話相手検出部４を備える。
【００５３】
対話相手検出部４による対話相手の検出の具体的な方法としては、顔全体に対する目の位置、目と目との距離等を測定することで、それらの位置や距離に基づいて対話相手を検出することができる。
【００５４】
図８は本発明の第４の実施例による視線一致テレビ会議装置の構成を示すブロック図である。図８において、本発明の第４の実施例による視線一致テレビ会議装置は表示スクリーン１と、正面用撮像装置２−１〜２−ｉと、対話相手検出部４と、映像送信部５と、撮像装置６−１〜６−ｋと、撮像装置移動部７とから構成されている。
【００５５】
本発明の第４の実施例による視線一致テレビ会議装置は本発明の第２の実施例による視線一致テレビ会議装置と本発明の第３の実施例による視線一致テレビ会議装置とをあわせたものであり、撮像装置移動部７によって移動する撮像装置６−１〜６−ｋだけではなく、各地点のユーザを見る時の正面の顔映像を撮影するための正面用撮像装置２−１〜２−ｉを持ち、これの映像を対話相手検出部４に入力することで、正面画像を基に検出するようにしたものである。
【００５６】
また、これらの発明では表示スクリーン１に表示される映像は各地点から送られてきた映像を何も加工せずに表示するだけである。一般に、送られてきた映像には人物の映像だけでなく、その地点の会議室等の背景映像も映っているが、その映像から人物映像のみを切り出すための背景処理部（図示せず）を備え、除去した背景部分を透明にし、コンピュータグラフィックス等で作成した仮想的な背景の会議室映像と自然に合成することができる映像合成部（図示せず）を備えることによって、さらに同じ会議室で会議を行っているような一体感を与え、コミュニケーションを自然にすることができる。
【００５７】
さらに、大きな表示スクリーンを用意できない場合、ブラウン管を用いた受像機でこの代用をすることができる。しかし、この場合は半透明スクリーンやハーフミラー等の手段によって正確な視線一致を行うことが困難なため、できるだけ相手の顔が表示されている部分に近く正面用撮像装置、横顔用撮像装置を配置する必要がある。
【００５８】
このように、撮像装置として正面用撮像装置２−１〜２−ｉと横顔用撮像装置３−１〜３−ｊとを配設することによって、各対話者の視線を一致させることができ、自然な対話を行わせることができる。
【００５９】
また、対話相手によって撮像装置６−１〜６−ｋを撮像装置移動部７によって移動させることによって、各対話者の視線を一致させることができ、自然な対話を行わせることができる。
【００６０】
さらに、映像から人物映像のみを背景処理部で切り出し、除去した背景部分を透明にし、コンピュータグラフィックス等で作成した仮想的な背景の会議室映像と映像合成部で自然に合成させることによって、同じ仮想的な会議室空間に参加させているようにすることができ、同じ会議に参加しているという一体感を高めることができる。
【００６１】
【発明の効果】
以上説明したように本発明によれば、複数の地点にいる通信相手の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において、通信相手の映像を異なる位置に配置して表示する表示スクリーンと、各々操作者の正面の映像を撮影する複数の正面用撮像装置と、各々操作者の横顔の映像を撮影する複数の横顔用撮像装置とを表示スクリーン上の映像配置に基づいた角度から撮影するように予め配置し、操作者がどの通信相手と会話しているかを検出する対話相手検出部の検出結果に応じて会話中の通信先に複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信することによって、各対話者の視線を一致させることができ、自然な対話を可能にすることができるという効果がある。
【図面の簡単な説明】
【図１】本発明の第１の実施例による視線一致テレビ会議装置の構成を示すブロック図である。
【図２】（ａ），（ｂ）は本発明の第１の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。
【図３】本発明の第１の実施例による視線一致テレビ会議装置の４地点での遠隔会議で視線一致するためのカメラの配置の説明図である。
【図４】本発明の第２の実施例による視線一致テレビ会議装置の構成を示すブロック図である。
【図５】本発明の第２の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。
【図６】本発明の第３の実施例による視線一致テレビ会議装置の構成を示すブロック図である。
【図７】本発明の第３の実施例による視線一致テレビ会議装置の映像表示手法の原理を示す図である。
【図８】本発明の第４の実施例による視線一致テレビ会議装置の構成を示すブロック図である。
【図９】従来のテレビ会議システムを説明するための図である。
【図１０】従来の視野角が十分にあるスクリーンで話者同士の視線を一致させる技術を説明するための図である。
【図１１】（ａ），（ｂ）は一般的なテレビ会議システムで話者同士の視線が一致しないことを説明するための図である。
【図１２】（ａ）〜（ｃ）は視野角が十分にあるスクリーンにおいて話者同士が視線一致することを説明するための図である。
【図１３】（ａ）〜（ｃ）は従来手法で視野角が十分にないスクリーンの場合に話者同士の視線が一致しないことを説明するための図である。
【符号の説明】
１ 表示スクリーン
２−１〜２−ｉ 正面用撮像装置
３−１〜３−ｊ 横顔用撮像装置
４ 対話相手検出部
５ 映像送信部
６−１〜６−ｋ 撮像装置
７ 撮像装置移動部

Claims (10)

1. 複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
   前記通信先の操作者の映像を異なる位置に配置して表示する表示スクリーンと、
   前記表示スクリーン上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
   前記表示スクリーン上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
   操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
   前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを有し、前記対話相手検出部は、前記複数の正面用撮像装置の映像を基に操作者がどの通信先の操作者と会話しているかを検出するよう構成したことを特徴とする視線一致テレビ会議装置。
2. 複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
   前記通信先の操作者の映像を異なる位置に配置して表示する表示スクリーンと、
   前記表示スクリーン上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
   前記表示スクリーン上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
   操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
   前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを有し、 前記正面用撮像装置は、前記操作者を中心とし、隣り合う前記正面用撮像装置のなす角度が６０度未満になるように配置されていることを特徴とする視線一致テレビ会議装置。
3. 前記表示スクリーンの背後に設置されかつ操作者の映像を撮影する複数の撮像装置と、前記対話相手検出部によって検出された会話中の通信先に応じて前記複数の撮像装置各々を移動させる撮像装置移動部とを含むことを特徴とする請求項１または請求項２に記載の視線一致テレビ会議装置。
4. 複数地点から受け取った各地点の映像から人物像だけを取り出す背景処理部と、前記背景処理部が取り出した人物像を所望の背景映像と合成して前記表示スクリーンに表示する映像合成部とを含むことを特徴とする請求項１から請求項３のいずれか一項に記載の視線一致テレビ会議装置。
5. 複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
   前記通信先の操作者の映像を異なる位置に配置して表示する表示スクリーンと、
   前記表示スクリーンの背後に設置されかつ操作者の映像を撮影する複数の撮像装置と、
   操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
   前記対話相手検出部によって検出された結果に応じて、表示される会話中の通信先の操作者と視線が一致する前記撮像装置の位置を決定し、かつ前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する前記複数の撮像装置の位置を決定し、会話中の通信先に応じて前記複数の撮像装置各々を移動させる撮像装置移動部と、
   前記対話相手検出部の検出結果に応じて前記会話中の通信先及びそれ以外の通信先にそれぞれ前記複数の撮像装置各々で撮影した映像のうちの対応する映像を送信する映像送信部とを有し、前記対話相手検出部は、前記複数の撮像装置の映像を基に操作者がどの通信先の操作者と会話しているかを検出するよう構成したことを特徴とする視線一致テレビ会議装置。
6. 複数地点から受け取った各地点の映像から人物像だけを取り出す背景処理部と、前記背景処理部が取り出した人物像を所望の背景映像と合成して前記表示スクリーンに表示する映像合成部とを含むことを特徴とする請求項５に記載の視線一致テレビ会議装置。
7. 複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
   前記通信先の操作者の映像を異なる位置に配置して表示する受像機と、
   前記受信機の表示画面上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
   前記受信機の表示画面上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
   操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
   前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを有し、前記対話相手検出部は、前記複数の正面用撮像装置の映像を基に操作者がどの通信先の操作者と会話しているかを検出するよう構成したことを特徴とする視線一致テレビ会議装置。
8. 複数の地点にいる通信先の操作者の映像を受信し、それらを一つの画面に合成して会議を行う多地点接続型テレビ会議において表示される操作者の映像の視線を一致させるための視線一致テレビ会議装置であって、
   前記通信先の操作者の映像を異なる位置に配置して表示する受像機と、
   前記受信機の表示画面上の映像配置に基づき、表示される会話中の通信先の操作者と視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の正面の映像を撮影する複数の正面用撮像装置と、
   前記受信機の表示画面上の映像配置に基づき、前記会話中の通信先以外の通信先の操作者から見た映像において、表示される対話中の操作者同士の視線が一致する角度から撮影するように予め前記受像機の周囲に配置されかつ各々操作者の横顔の映像を撮影する複数の横顔用撮像装置と、
   操作者がどの通信先の操作者と会話しているかを検出する対話相手検出部と、
   前記対話相手検出部の検出結果に応じて前記会話中の通信先に前記複数の正面用撮像装置各々で撮影した映像のうちの対応する映像を送信しかつ前記会話中の通信先以外の通信先に前記複数の横顔用撮像装置各々で撮影した映像のうちの対応する映像をそれぞれ送信する映像送信部とを有し、前記正面用撮像装置は、前記操作者を中心とし、隣り合う前記正面用撮像装置同士のなす角度が６０度未満になるように配置されていることを特徴とする視線一致テレビ会議装置。
9. 複数地点から受け取った各地点の映像から人物像だけを取り出す背景処理部と、前記背景処理部が取り出した人物像を所望の背景映像と合成して前記受像機に表示する映像合成部とを含むことを特徴とする請求項７または請求項８に記載の視線一致テレビ会議装置。
10. 前記受像機は、ブラウン管であることを特徴とする請求項７から請求項９のいずれか一項に記載の視線一致テレビ会議装置。

Images