JP2001136501A - 視線一致テレビ会議装置 - Google Patents

視線一致テレビ会議装置

Info

Publication number
JP2001136501A
JP2001136501A JP31898399A JP31898399A JP2001136501A JP 2001136501 A JP2001136501 A JP 2001136501A JP 31898399 A JP31898399 A JP 31898399A JP 31898399 A JP31898399 A JP 31898399A JP 2001136501 A JP2001136501 A JP 2001136501A
Authority
JP
Japan
Prior art keywords
image
video
conversation
video conference
imaging devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP31898399A
Other languages
English (en)
Other versions
JP3587106B2 (ja
Inventor
Kozo Satoda
浩三 里田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP31898399A priority Critical patent/JP3587106B2/ja
Publication of JP2001136501A publication Critical patent/JP2001136501A/ja
Application granted granted Critical
Publication of JP3587106B2 publication Critical patent/JP3587106B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

(57)【要約】 【課題】 各対話者の視線を一致させ、自然な対話が可
能な視線一致テレビ会議装置を提供する。 【解決手段】 表示スクリーン1は他地点の対話相手の
映像を表示し、ユーザに呈示する。正面用撮像装置2−
1〜2−iはユーザが多地点のユーザと視線を合わせて
対話する場合、その視線の先に配置する。横顔撮像装置
3−1〜3−jは他の地点のユーザのために、その対話
相手と会話している時の横顔を撮影する。映像送信部5
はユーザが対話相手検出部4で多地点のどのユーザと会
話しているかを指定した時に、その指定されたユーザへ
正面用撮像装置2−1〜2−iで撮影した映像を送信
し、指定されていないユーザへ横顔用撮像装置3−1〜
3−jで撮影した映像を送る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は視線一致テレビ会議
装置に関し、特にテレビカメラとモニタ装置とを用いて
複数人数でテレビ会議を行うための多地点間テレビ会議
装置に関する。
【0002】
【従来の技術】従来、多地点間テレビ会議装置として
は、テレビカメラとモニタ装置とを用い、複数地点にい
る参加者の映像を撮影及び伝送することで多地点テレビ
会議を行うシステムが多く提案されている。
【0003】このような多地点テレビ会議システムで
は、会議参加者が同じ会議を行っているという臨場感を
与えるために、参加者間の視線を一致させ、会話を円滑
にすることが重要な課題である。
【0004】これに対して、図9に示すように、特開平
2−50691号公報に開示された技術ではユーザに提
示する画面を複数の小画面に分割し、各小画面に多地点
の参加者の映像を表示させ、その小画面の近くにビデオ
カメラを置き、通信相手に自分の近くのカメラ映像を送
信している。これによって、会話相手には自分の正面に
近い映像が映されることになり、自然な会話が可能にな
る。
【0005】また、自然な会議映像をユーザに提示する
方法としては、特開平8−32948号公報に開示され
た技術がある。この技術では、3人以上参加の多地点会
議の場合に湾曲した大スクリーンにユーザの映像を配置
し、スクリーン後方でシステムの使用者とその映像の映
っている方向の延長線上にビデオカメラを設置し、各参
加者に映像を送信している。
【0006】この映像は、図10で示すように、仮想的
な会議空間内で各参加者が均等な距離になるように(3
人の場合は正三角形の頂点、4人の場合は正方形の頂点
に)配置している。
【0007】図12(a)〜(c)では3人で対話をし
ている例を示しているが、P地点のユーザがA地点のユ
ーザと会話するために、視線を一致させると、P地点の
ユーザの正面画像がA地点に送られるため、A地点とP
地点とは互いに視線を一致させているように見える。
【0008】また、B地点のユーザへは正面から60度
の角度の横顔の映像を撮影して送信しているため、B地
点のユーザはP地点のユーザがA地点のユーザの方を見
ているような映像を呈示することができる。このよう
に、どの参加者同士が会話をしていても互いの視線が一
致しているように見える。
【0009】
【発明が解決しようとする課題】しかしながら、特開平
2−50691号公報に開示された技術では自分が会話
している相手の表示位置とカメラの方向とが微妙にずれ
ており、正確には自分と相手との視線が一致しないとい
う問題がある。
【0010】この問題は現在知られているようなハーフ
ミラーによる視線一致装置等を使用することによって回
避することができるが、それだけではなく、図11
(a),(b)に示すように、他人同士が会話をしてい
る場合に、その会話者同士の視線があっているようには
見えないため、十分な臨場感が得られないという問題が
ある。
【0011】一方、特開平8−32948号公報に開示
された技術では、上記の問題を解決しているが、参加者
を均等な距離になるように配置しているため、一番設定
が簡単な3人の会議の場合に視野角60度もの広視野角
の曲面スクリーンを用意しなければならず、スクリーン
の設定が困難であるという問題がある。
【0012】また、スクリーンの設定を3人の場合で6
0度以下にすると、図13(a)〜(c)に示すよう
に、会話をしているA地点のユーザにはP地点のユーザ
の正面顔が見えるため、自然なコミュニケーションが可
能であるが、B地点のユーザへは60度未満の角度から
撮ったP地点のユーザの横顔映像しか送ることができな
いため、P地点のユーザの映像が正確にA地点のユーザ
と視線を合わせている映像を見ることができず、不自然
になってしまう。
【0013】そこで、本発明の目的は上記の問題点を解
消し、各対話者の視線を一致させることができ、自然な
対話を可能にすることができる視線一致テレビ会議装置
を提供することにある。
【0014】
【課題を解決するための手段】本発明による視線一致テ
レビ会議装置は、複数の地点にいる通信相手の映像を受
信し、それらを一つの画面に合成して会議を行う多地点
接続型テレビ会議において表示される参加者の映像の視
線を一致させるための視線一致テレビ会議装置であっ
て、通信相手の映像を異なる位置に配置して表示する表
示スクリーンと、前記表示スクリーン上の映像配置に基
づいた角度から撮影するように予め配置されかつ各々操
作者の正面の映像を撮影する複数の正面用撮像装置と、
前記表示スクリーン上の映像配置に基づいた角度から撮
影するように予め配置されかつ各々操作者の横顔の映像
を撮影する複数の横顔用撮像装置と、操作者がどの通信
相手と会話しているかを検出する対話相手検出部と、前
記対話相手検出部の検出結果に応じて前記会話中の通信
先に前記複数の正面用撮像装置各々で撮影した映像のう
ちの対応する映像を送信しかつ前記会話中の通信先以外
の通信先に前記複数の横顔用撮像装置各々で撮影した映
像のうちの対応する映像をそれぞれ送信する映像送信部
とを備えている。
【0015】本発明による他の視線一致テレビ会議装置
は、複数の地点にいる通信相手の映像を受信し、それら
を一つの画面に合成して会議を行う多地点接続型テレビ
会議において表示される参加者の映像の視線を一致させ
るための視線一致テレビ会議装置であって、通信相手の
映像を異なる位置に配置して表示する表示スクリーン
と、前記表示スクリーンの背後に設置されかつ操作者の
映像を撮影する複数の撮像装置と、操作者がどの通信相
手と会話しているかを検出する対話相手検出部と、前記
対話相手検出部によって検出された会話中の通信相手に
応じて前記複数の撮像装置各々を移動させる撮像装置移
動部と、前記対話相手検出部の検出結果に応じて前記会
話中の通信先及びそれ以外の通信先にそれぞれ前記複数
の撮像装置各々で撮影した映像のうちの対応する映像を
送信する映像送信部とを備えている。
【0016】本発明による別の視線一致テレビ会議装置
は、複数の地点にいる通信相手の映像を受信し、それら
を一つの画面に合成して会議を行う多地点接続型テレビ
会議において表示される参加者の映像の視線を一致させ
るための視線一致テレビ会議装置であって、通信相手の
映像を異なる位置に配置して表示する受像機と、前記受
信機の表示画面上の映像配置に基づいた角度から撮影す
るように予め前記受像機の周囲に配置されかつ各々操作
者の正面の映像を撮影する複数の正面用撮像装置と、前
記受信機の表示画面上の映像配置に基づいた角度から撮
影するように予め前記受像機の周囲に配置されかつ各々
操作者の横顔の映像を撮影する複数の横顔用撮像装置
と、操作者がどの通信相手と会話しているかを検出する
対話相手検出部と、前記対話相手検出部の検出結果に応
じて前記会話中の通信先に前記複数の正面用撮像装置各
々で撮影した映像のうちの対応する映像を送信しかつ前
記会話中の通信先以外の通信先に前記複数の横顔用撮像
装置各々で撮影した映像のうちの対応する映像をそれぞ
れ送信する映像送信部とを備えている。
【0017】すなわち、本発明の第1の視線一致テレビ
会議装置は、通信相手の映像を異なる位置に配置して表
示する大画面の表示スクリーンと、ユーザが通信相手の
映像を見る時の視線に合わせて設置した正面用カメラ
と、ユーザが他の通信相手の映像を見る時の横顔を表示
スクリーン上の映像配置に従った角度から撮影するよう
に設置した複数の横顔用カメラとを用意している。
【0018】通信相手にはこれらのカメラで撮影した映
像を送信するが、どのカメラの映像を送信するかを決定
するために対話相手検出部を持つ。これはユーザが他地
点のどの通信相手と会話しているかを検出するための手
段である。対話相手検出部で得られた結果から、映像送
信部がどのカメラで撮影した映像を各通信相手に送るか
を選択して送信する。
【0019】本発明の第1の視線一致テレビ会議装置で
は、以上の手段を備えることで、遠隔地点の通信相手と
視線一致して対話が可能となり、各対話者の視線を一致
させることが可能となるので、テレビ会議において自然
な対話が可能になる。
【0020】また、本発明の第2の視線一致テレビ会議
装置は、通信相手と対話している時の正面映像を撮影す
る正面カメラと、横顔を撮影する横顔用カメラとを用意
するのではなく、対話相手検出部によって検出された対
話相手によってカメラを移動させることが可能な撮像装
置移動部を備えている。
【0021】さらに、本発明の第3の視線一致テレビ会
議装置は、正面用カメラで撮影したすべてのカメラ映像
を画像処理することで、ユーザが向いている顔の向きを
検出する対話相手検出部を備えている。
【0022】本発明の第2の視線一致テレビ会議装置で
は各通信相手と対話している時に、正面から撮影するカ
メラを用意していなかったが、本発明の第4の視線一致
テレビ会議装置ではこの正面から撮影するカメラを用意
し、本発明の第3の視線一致テレビ会議装置に備えてい
る対話相手検出部を持っている。
【0023】本発明の第5の視線一致テレビ会議装置
は、各地点から送信されてきた映像を単に合成するだけ
でなく、各地点の映像から人物像だけを取り出すことが
可能な背景処理部と、コンピュータグラフィックスで生
成した会議室映像等の任意の背景映像を合成することが
可能な映像合成部とを備え、遠隔地の参加者が同じ会議
を行っている一体感を出すことを可能としている。
【0024】本発明の第6の視線一致テレビ会議装置
は、表示スクリーンを持つのではなく大画面のブラウン
管を用いた受像機を用いている。
【0025】これによって、本発明の第1及び第3の視
線一致テレビ会議装置によれば、撮像装置を正面用及び
横顔用にそれぞれ用意することによって、各対話者の視
線が一致し、自然な対話が可能となる。
【0026】また、本発明の第2及び第4の視線一致テ
レビ会議装置によれば、対話相手によって撮像装置を移
動させることで、各対話者の視線が一致し、自然な対話
が可能となる。さらに、本発明の第5の視線一致テレビ
会議装置によれば、同じ仮想的な会議室空間に参加する
ことで、さらに同じ会議に参加しているという一体感を
高めることが可能となる。
【0027】
【発明の実施の形態】次に、本発明の実施例について図
面を参照して説明する。図1は本発明の第1の実施例に
よる視線一致テレビ会議装置の構成を示すブロック図で
ある。図1において、本発明の第1の実施例による視線
一致テレビ会議装置は表示スクリーン1と、正面用撮像
装置2−1〜2−iと、横顔用撮像装置3−1〜3−j
と、対話相手検出部4と、映像送信部5とから構成され
ている。
【0028】本発明の第1の実施例による視線一致テレ
ビ会議装置では他の2地点の対話相手の映像を表示し、
ユーザに呈示するための表示スクリーン1を備えてい
る。また、ユーザが表示スクリーン1に映っている対話
相手を見る場合に、その視線の先に正面用撮像装置2−
1〜2−iを用意する。
【0029】ここで、表示スクリーン1はユーザが映っ
ている対話相手を見た場合の視線の先に正面用撮像装置
2−1〜2−iのいずれかを設置できるように、表示ス
クリーン1は半透明になっていたり、ハーフミラーを装
備する等、映像を表示することとカメラで撮影できるこ
ととの両方の機能を備えていることが必要である。
【0030】次に、ユーザが表示スクリーン1に映って
いる対話相手を見る場合に、その対話相手と会話してい
る時の横顔を撮影するための横顔撮像装置3−1〜3−
jが用意されている。
【0031】ユーザは対話相手検出部4によって、多地
点のどのユーザと会話しているかを指定し、その指定さ
れたユーザへは正面用撮像装置2−1〜2−iで撮影し
た映像を送信し、指定されていないユーザへは横顔用撮
像装置3−1〜3−jで撮影した映像を送る映像送信部
5を備えている。
【0032】図2は本発明の第1の実施例による視線一
致テレビ会議装置の映像表示手法の原理を示す図であ
る。図2(a)はP地点でのカメラの配置を示してお
り、図2(b)はB地点で見る画像を示している。これ
ら図1及び図2を参照して本発明の第1の実施例による
視線一致テレビ会議装置の映像表示手法の原理について
説明する。ここで、説明を簡単化するために、本発明の
第1の実施例による視線一致テレビ会議装置は3地点間
のテレビ会議に用いられるものとする。
【0033】表示スクリーン1が60度もの視野角をと
れず、60度未満のθ度であったとする。この場合、A
地点のユーザとB地点のユーザとを表示スクリーン1上
に均等に配置すると、図2(a)に示すような配置にな
る。
【0034】ここで、P地点のユーザとA地点のユーザ
とが会話をしている場合を考える。A地点にはP地点の
ユーザの正面映像、B地点にはP地点のユーザがA地点
のユーザを見ている画像を送信する必要がある。A地点
に送信する映像は正面用撮像装置2−1によってP地点
のユーザがA地点の方を向いている正面映像を撮影す
る。
【0035】また、図2(a)に示す通り、P地点の表
示スクリーン1で見ると、A地点とB地点とは(90−
0.5θ)度の角度で表示される。同様に、B地点で見
ると、P地点とA地点とは(90−0.5θ)度の角度
で表示されていることになる。
【0036】P地点がA地点と会話をしている時には正
面用撮像装置2−2[図2(a)の「B地点へのカメラ
1」]ではθ度の横顔しか撮影できない。このため、こ
れより更に(90−1.5θ)度離れた横顔撮像装置3
−2[図2(a)の「B地点へのカメラ2」]で撮影し
なければならない。
【0037】これはP地点のユーザがA地点のユーザと
会話をしている場合であるが、B地点のユーザと会話し
ている時にはB地点には正面用撮像装置2−2で撮影し
た映像を、またA地点には横顔撮像装置3−1で撮影し
た映像を送る必要がある。
【0038】これを区別するため、対話相手検出部4に
よってどの相手と対話しているのかを検出する。これで
検出された対話相手には正面撮像装置2−1,2−2で
撮像した映像を、それ以外には、横顔撮像装置3−1,
3−2で撮影した映像を他の地点へ送信することによっ
て、図2(b)に示すような各地点のユーザが視線を一
致させて会話することができ、自然なコミュニケーショ
ンがとれる。
【0039】図3は本発明の第1の実施例による視線一
致テレビ会議装置の4地点での遠隔会議で視線一致する
ためのカメラの配置の説明図である。図3においては、
P地点からA地点、B地点、C地点を見ている時のカメ
ラの配置状況を示している。
【0040】ここで、上記の本発明の第1の実施例の説
明においてはその説明を簡単化するために、3地点間の
テレビ会議を前提としているが、これを図3に示すよう
に、4地点以上の間のテレビ会議に拡張するのは容易で
ある。
【0041】図4は本発明の第2の実施例による視線一
致テレビ会議装置の構成を示すブロック図である。図4
において、本発明の第2の実施例による視線一致テレビ
会議装置は表示スクリーン1と、対話相手検出部4と、
映像送信部5と、撮像装置6−1〜6−kと、撮像装置
移動部7とから構成されている。
【0042】本発明の第2の実施例による視線一致テレ
ビ会議装置は本発明の第1の実施例による視線一致テレ
ビ会議装置と異なり、正面用撮像装置2−1〜2−i及
び横顔撮像装置3−1〜3−jを持たず、撮像装置6−
1〜6−kでこれらを兼用している。
【0043】図5は本発明の第2の実施例による視線一
致テレビ会議装置の映像表示手法の原理を示す図であ
る。これら図4及び図5を参照して本発明の第2の実施
例による視線一致テレビ会議装置の映像表示手法の原理
について説明する。
【0044】3地点で会話を行う場合、P地点ではA地
点用のカメラ6A及びB地点用のカメラ6Bの2台のカ
メラで構成された撮像装置6−1〜6−kを持つ。カメ
ラ6Aで撮影した映像はA地点に送られ、カメラ6Bで
撮影した映像は地点に送られる。撮像装置6−1〜6−
kは撮像装置移動部7によって、図5に示すように、レ
ール等の手段で移動できるようになっている。
【0045】撮像装置移動部7は以下のように、撮像装
置6−1〜6−kを移動させる。図5に示すように、P
地点がA地点のユーザと会話している時、カメラ6Aは
表示スクリーン1でA地点の映像が映っている視線の延
長上にある。
【0046】また、カメラ6BはB地点の映像が映って
いる延長上からさらに(90−1.5θ)度、右にあ
る。P地点が会話相手をB地点のユーザに変えた場合、
A地点用のカメラであるカメラ6Aは現在の位置から
(90−1.5θ)度左へ移動し、カメラ6Bも(90
−1.5θ)度左へ移動して表示スクリーン1上でB地
点の映像が映っている延長上に移動する。
【0047】ここで、撮像装置6−1〜6−kの位置は
P地点がどの地点のユーザと会話しているかを検出する
必要があるが、これを行うのが対話相手検出部4であ
る。対話相手検出部4で検出した対話相手をもとに、撮
像装置移動部7は撮像装置6−1〜6−kを移動させ
る。
【0048】図6は本発明の第3の実施例による視線一
致テレビ会議装置の構成を示すブロック図である。図6
において、本発明の第3の実施例による視線一致テレビ
会議装置は表示スクリーン1と、正面用撮像装置2−1
〜2−iと、横顔用撮像装置3−1〜3−jと、対話相
手検出部4と、映像送信部5とから構成されている。
【0049】本発明の第3の実施例による視線一致テレ
ビ会議装置では本発明の第1の実施例による視線一致テ
レビ会議装置にある対話相手検出部4を正面用撮像装置
2−1〜2−iで撮影した正面画像をもとに検出するよ
うにしたものである。
【0050】図7は本発明の第3の実施例による視線一
致テレビ会議装置の映像表示手法の原理を示す図であ
る。これら図6及び図7を参照して本発明の第3の実施
例による視線一致テレビ会議装置の映像表示手法の原理
について説明する。
【0051】本発明の第3の実施例による視線一致テレ
ビ会議装置では、P地点が各地点のユーザの方を向いて
会話を行う場合、その正面用撮像装置2−1〜2−iで
撮影される映像の例を示している。
【0052】ここではP地点のユーザがA地点のユーザ
と会話している例であるが、この場合、A地点用の正面
用撮像装置2−1にはP地点のユーザの正面映像が映る
が、B地点用の正面用撮像装置2−iにはP地点のユー
ザの右向きの横顔が見えることになる。この映像の違い
によって、対話相手を検出する対話相手検出部4を備え
る。
【0053】対話相手検出部4による対話相手の検出の
具体的な方法としては、顔全体に対する目の位置、目と
目との距離等を測定することで、それらの位置や距離に
基づいて対話相手を検出することができる。
【0054】図8は本発明の第4の実施例による視線一
致テレビ会議装置の構成を示すブロック図である。図8
において、本発明の第4の実施例による視線一致テレビ
会議装置は表示スクリーン1と、正面用撮像装置2−1
〜2−iと、対話相手検出部4と、映像送信部5と、撮
像装置6−1〜6−kと、撮像装置移動部7とから構成
されている。
【0055】本発明の第4の実施例による視線一致テレ
ビ会議装置は本発明の第2の実施例による視線一致テレ
ビ会議装置と本発明の第3の実施例による視線一致テレ
ビ会議装置とをあわせたものであり、撮像装置移動部7
によって移動する撮像装置6−1〜6−kだけではな
く、各地点のユーザを見る時の正面の顔映像を撮影する
ための正面用撮像装置2−1〜2−iを持ち、これの映
像を対話相手検出部4に入力することで、正面画像を基
に検出するようにしたものである。
【0056】また、これらの発明では表示スクリーン1
に表示される映像は各地点から送られてきた映像を何も
加工せずに表示するだけである。一般に、送られてきた
映像には人物の映像だけでなく、その地点の会議室等の
背景映像も映っているが、その映像から人物映像のみを
切り出すための背景処理部(図示せず)を備え、除去し
た背景部分を透明にし、コンピュータグラフィックス等
で作成した仮想的な背景の会議室映像と自然に合成する
ことができる映像合成部(図示せず)を備えることによ
って、さらに同じ会議室で会議を行っているような一体
感を与え、コミュニケーションを自然にすることができ
る。
【0057】さらに、大きな表示スクリーンを用意でき
ない場合、ブラウン管を用いた受像機でこの代用をする
ことができる。しかし、この場合は半透明スクリーンや
ハーフミラー等の手段によって正確な視線一致を行うこ
とが困難なため、できるだけ相手の顔が表示されている
部分に近く正面用撮像装置、横顔用撮像装置を配置する
必要がある。
【0058】このように、撮像装置として正面用撮像装
置2−1〜2−iと横顔用撮像装置3−1〜3−jとを
配設することによって、各対話者の視線を一致させるこ
とができ、自然な対話を行わせることができる。
【0059】また、対話相手によって撮像装置6−1〜
6−kを撮像装置移動部7によって移動させることによ
って、各対話者の視線を一致させることができ、自然な
対話を行わせることができる。
【0060】さらに、映像から人物映像のみを背景処理
部で切り出し、除去した背景部分を透明にし、コンピュ
ータグラフィックス等で作成した仮想的な背景の会議室
映像と映像合成部で自然に合成させることによって、同
じ仮想的な会議室空間に参加させているようにすること
ができ、同じ会議に参加しているという一体感を高める
ことができる。
【0061】
【発明の効果】以上説明したように本発明によれば、複
数の地点にいる通信相手の映像を受信し、それらを一つ
の画面に合成して会議を行う多地点接続型テレビ会議に
おいて、通信相手の映像を異なる位置に配置して表示す
る表示スクリーンと、各々操作者の正面の映像を撮影す
る複数の正面用撮像装置と、各々操作者の横顔の映像を
撮影する複数の横顔用撮像装置とを表示スクリーン上の
映像配置に基づいた角度から撮影するように予め配置
し、操作者がどの通信相手と会話しているかを検出する
対話相手検出部の検出結果に応じて会話中の通信先に複
数の正面用撮像装置各々で撮影した映像のうちの対応す
る映像を送信しかつ会話中の通信先以外の通信先に前記
複数の横顔用撮像装置各々で撮影した映像のうちの対応
する映像をそれぞれ送信することによって、各対話者の
視線を一致させることができ、自然な対話を可能にする
ことができるという効果がある。
【図面の簡単な説明】
【図1】本発明の第1の実施例による視線一致テレビ会
議装置の構成を示すブロック図である。
【図2】(a),(b)は本発明の第1の実施例による
視線一致テレビ会議装置の映像表示手法の原理を示す図
である。
【図3】本発明の第1の実施例による視線一致テレビ会
議装置の4地点での遠隔会議で視線一致するためのカメ
ラの配置の説明図である。
【図4】本発明の第2の実施例による視線一致テレビ会
議装置の構成を示すブロック図である。
【図5】本発明の第2の実施例による視線一致テレビ会
議装置の映像表示手法の原理を示す図である。
【図6】本発明の第3の実施例による視線一致テレビ会
議装置の構成を示すブロック図である。
【図7】本発明の第3の実施例による視線一致テレビ会
議装置の映像表示手法の原理を示す図である。
【図8】本発明の第4の実施例による視線一致テレビ会
議装置の構成を示すブロック図である。
【図9】従来のテレビ会議システムを説明するための図
である。
【図10】従来の視野角が十分にあるスクリーンで話者
同士の視線を一致させる技術を説明するための図であ
る。
【図11】(a),(b)は一般的なテレビ会議システ
ムで話者同士の視線が一致しないことを説明するための
図である。
【図12】(a)〜(c)は視野角が十分にあるスクリ
ーンにおいて話者同士が視線一致することを説明するた
めの図である。
【図13】(a)〜(c)は従来手法で視野角が十分に
ないスクリーンの場合に話者同士の視線が一致しないこ
とを説明するための図である。
【符号の説明】
1 表示スクリーン 2−1〜2−i 正面用撮像装置 3−1〜3−j 横顔用撮像装置 4 対話相手検出部 5 映像送信部 6−1〜6−k 撮像装置 7 撮像装置移動部

Claims (10)

    【特許請求の範囲】
  1. 【請求項1】 複数の地点にいる通信相手の映像を受信
    し、それらを一つの画面に合成して会議を行う多地点接
    続型テレビ会議において表示される参加者の映像の視線
    を一致させるための視線一致テレビ会議装置であって、 通信相手の映像を異なる位置に配置して表示する表示ス
    クリーンと、 前記表示スクリーン上の映像配置に基づいた角度から撮
    影するように予め配置されかつ各々操作者の正面の映像
    を撮影する複数の正面用撮像装置と、 前記表示スクリーン上の映像配置に基づいた角度から撮
    影するように予め配置されかつ各々操作者の横顔の映像
    を撮影する複数の横顔用撮像装置と、 操作者がどの通信相手と会話しているかを検出する対話
    相手検出部と、 前記対話相手検出部の検出結果に応じて前記会話中の通
    信先に前記複数の正面用撮像装置各々で撮影した映像の
    うちの対応する映像を送信しかつ前記会話中の通信先以
    外の通信先に前記複数の横顔用撮像装置各々で撮影した
    映像のうちの対応する映像をそれぞれ送信する映像送信
    部とを有することを特徴とする視線一致テレビ会議装
    置。
  2. 【請求項2】 前記表示スクリーンの背後に設置されか
    つ操作者の映像を撮影する複数の撮像装置と、前記対話
    相手検出部によって検出された会話中の通信相手に応じ
    て前記複数の撮像装置各々を移動させる撮像装置移動部
    とを含むことを特徴とする請求項1記載の視線一致テレ
    ビ会議装置。
  3. 【請求項3】 前記対話相手検出部は、前記複数の正面
    用撮像装置の映像を基に操作者がどの通信相手と会話し
    ているかを検出するよう構成したことを特徴とする請求
    項1または請求項2記載の視線一致テレビ会議装置。
  4. 【請求項4】 複数地点から受け取った各地点の映像か
    ら人物像だけを取り出す背景処理部と、前記背景処理部
    が取り出した人物像を所望の背景映像と合成して前記表
    示スクリーンに表示する映像合成部とを含むことを特徴
    とする請求項1から請求項3のいずれか記載の視線一致
    テレビ会議装置。
  5. 【請求項5】 複数の地点にいる通信相手の映像を受信
    し、それらを一つの画面に合成して会議を行う多地点接
    続型テレビ会議において表示される参加者の映像の視線
    を一致させるための視線一致テレビ会議装置であって、 通信相手の映像を異なる位置に配置して表示する表示ス
    クリーンと、 前記表示スクリーンの背後に設置されかつ操作者の映像
    を撮影する複数の撮像装置と、 操作者がどの通信相手と会話しているかを検出する対話
    相手検出部と、 前記対話相手検出部によって検出された会話中の通信相
    手に応じて前記複数の撮像装置各々を移動させる撮像装
    置移動部と、 前記対話相手検出部の検出結果に応じて前記会話中の通
    信先及びそれ以外の通信先にそれぞれ前記複数の撮像装
    置各々で撮影した映像のうちの対応する映像を送信する
    映像送信部とを有することを特徴とする視線一致テレビ
    会議装置。
  6. 【請求項6】 前記対話相手検出部は、前記複数の撮像
    装置の映像を基に操作者がどの通信相手と会話している
    かを検出するよう構成したことを特徴とする請求項5記
    載の視線一致テレビ会議装置。
  7. 【請求項7】 複数地点から受け取った各地点の映像か
    ら人物像だけを取り出す背景処理部と、前記背景処理部
    が取り出した人物像を所望の背景映像と合成して前記表
    示スクリーンに表示する映像合成部とを含むことを特徴
    とする請求項4または請求項5記載の視線一致テレビ会
    議装置。
  8. 【請求項8】 複数の地点にいる通信相手の映像を受信
    し、それらを一つの画面に合成して会議を行う多地点接
    続型テレビ会議において表示される参加者の映像の視線
    を一致させるための視線一致テレビ会議装置であって、 通信相手の映像を異なる位置に配置して表示する受像機
    と、 前記受信機の表示画面上の映像配置に基づいた角度から
    撮影するように予め前記受像機の周囲に配置されかつ各
    々操作者の正面の映像を撮影する複数の正面用撮像装置
    と、 前記受信機の表示画面上の映像配置に基づいた角度から
    撮影するように予め前記受像機の周囲に配置されかつ各
    々操作者の横顔の映像を撮影する複数の横顔用撮像装置
    と、 操作者がどの通信相手と会話しているかを検出する対話
    相手検出部と、 前記対話相手検出部の検出結果に応じて前記会話中の通
    信先に前記複数の正面用撮像装置各々で撮影した映像の
    うちの対応する映像を送信しかつ前記会話中の通信先以
    外の通信先に前記複数の横顔用撮像装置各々で撮影した
    映像のうちの対応する映像をそれぞれ送信する映像送信
    部とを有することを特徴とする視線一致テレビ会議装
    置。
  9. 【請求項9】 前記対話相手検出部は、前記複数の正面
    用撮像装置の映像を基に操作者がどの通信相手と会話し
    ているかを検出するよう構成したことを特徴とする請求
    項8記載の視線一致テレビ会議装置。
  10. 【請求項10】 複数地点から受け取った各地点の映像
    から人物像だけを取り出す背景処理部と、前記背景処理
    部が取り出した人物像を所望の背景映像と合成して前記
    表示スクリーンに表示する映像合成部とを含むことを特
    徴とする請求項8または請求項9記載の視線一致テレビ
    会議装置。
JP31898399A 1999-11-10 1999-11-10 視線一致テレビ会議装置 Expired - Fee Related JP3587106B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP31898399A JP3587106B2 (ja) 1999-11-10 1999-11-10 視線一致テレビ会議装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP31898399A JP3587106B2 (ja) 1999-11-10 1999-11-10 視線一致テレビ会議装置

Publications (2)

Publication Number Publication Date
JP2001136501A true JP2001136501A (ja) 2001-05-18
JP3587106B2 JP3587106B2 (ja) 2004-11-10

Family

ID=18105189

Family Applications (1)

Application Number Title Priority Date Filing Date
JP31898399A Expired - Fee Related JP3587106B2 (ja) 1999-11-10 1999-11-10 視線一致テレビ会議装置

Country Status (1)

Country Link
JP (1) JP3587106B2 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004193962A (ja) * 2002-12-11 2004-07-08 Sony Corp 画像通信装置、および画像通信方法、並びにコンピュータ・プログラム
WO2007122907A1 (ja) * 2006-03-29 2007-11-01 Matsushita Electric Industrial Co., Ltd. 画像コーデック装置
JP2009539334A (ja) * 2006-05-31 2009-11-12 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. ビデオストリームをアラインするための融合空間
WO2010041954A1 (en) 2008-10-07 2010-04-15 Tandberg Telecom As Method, device and computer program for processing images during video conferencing
WO2011011917A1 (zh) * 2009-07-29 2011-02-03 华为终端有限公司 视频通信方法、装置和系统
JP2011097447A (ja) * 2009-10-30 2011-05-12 Sharp Corp コミュニケーションシステム
JP2013009111A (ja) * 2011-06-23 2013-01-10 Oki Electric Ind Co Ltd コミュニケーションシステム及びコミュニケーション装置
JP2016212262A (ja) * 2015-05-08 2016-12-15 キヤノン株式会社 コミュニケーションシステム、その制御方法及びプログラム
JP2017022600A (ja) * 2015-07-13 2017-01-26 国立大学法人静岡大学 画像通信装置
WO2017199483A1 (ja) * 2016-05-18 2017-11-23 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP2018125727A (ja) * 2017-02-01 2018-08-09 国立大学法人静岡大学 顔画像処理装置
US10067562B2 (en) 2015-06-26 2018-09-04 Samsung Electronics Co., Ltd. Display apparatus and image correction method thereof
KR102244276B1 (ko) * 2020-11-09 2021-04-26 (주)한국원자력 엔지니어링 화상통화자 시선처리방법
CN113395479A (zh) * 2021-06-16 2021-09-14 随锐科技集团股份有限公司 视频会议画面处理方法及系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9544538B2 (en) 2012-05-15 2017-01-10 Airtime Media, Inc. System and method for providing a shared canvas for chat participant

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4539015B2 (ja) * 2002-12-11 2010-09-08 ソニー株式会社 画像通信装置、および画像通信方法、並びにコンピュータ・プログラム
JP2004193962A (ja) * 2002-12-11 2004-07-08 Sony Corp 画像通信装置、および画像通信方法、並びにコンピュータ・プログラム
WO2007122907A1 (ja) * 2006-03-29 2007-11-01 Matsushita Electric Industrial Co., Ltd. 画像コーデック装置
JP2009539334A (ja) * 2006-05-31 2009-11-12 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. ビデオストリームをアラインするための融合空間
US8379075B2 (en) 2008-10-07 2013-02-19 Cisco Technology, Inc. Method, device, and computer-readable medium for processing images during video conferencing
WO2010041954A1 (en) 2008-10-07 2010-04-15 Tandberg Telecom As Method, device and computer program for processing images during video conferencing
EP2335415A1 (en) * 2008-10-07 2011-06-22 Tandberg Telecom AS Method, device and computer program for processing images during video conferencing
EP2335415A4 (en) * 2008-10-07 2012-06-20 Cisco Systems Int Sarl METHOD, DEVICE AND COMPUTER PROGRAM FOR IMAGE PROCESSING DURING VIDEO CONFERENCES
NO332960B1 (no) * 2008-10-07 2013-02-11 Cisco Systems Int Sarl Fremgangsmate, innretning og datamaskinprogram for a prosessere bilder under videokonferanser
WO2011011917A1 (zh) * 2009-07-29 2011-02-03 华为终端有限公司 视频通信方法、装置和系统
US8717410B2 (en) 2009-07-29 2014-05-06 Huawei Device Co., Ltd. Video communication method, apparatus, and system
JP2011097447A (ja) * 2009-10-30 2011-05-12 Sharp Corp コミュニケーションシステム
JP2013009111A (ja) * 2011-06-23 2013-01-10 Oki Electric Ind Co Ltd コミュニケーションシステム及びコミュニケーション装置
JP2016212262A (ja) * 2015-05-08 2016-12-15 キヤノン株式会社 コミュニケーションシステム、その制御方法及びプログラム
US10067562B2 (en) 2015-06-26 2018-09-04 Samsung Electronics Co., Ltd. Display apparatus and image correction method thereof
JP2017022600A (ja) * 2015-07-13 2017-01-26 国立大学法人静岡大学 画像通信装置
WO2017199483A1 (ja) * 2016-05-18 2017-11-23 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JPWO2017199483A1 (ja) * 2016-05-18 2019-03-14 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10659728B2 (en) 2016-05-18 2020-05-19 Sony Corporation Information processing apparatus and information processing method
JP2018125727A (ja) * 2017-02-01 2018-08-09 国立大学法人静岡大学 顔画像処理装置
JP7012983B2 (ja) 2017-02-01 2022-01-31 国立大学法人静岡大学 顔画像処理装置
KR102244276B1 (ko) * 2020-11-09 2021-04-26 (주)한국원자력 엔지니어링 화상통화자 시선처리방법
CN113395479A (zh) * 2021-06-16 2021-09-14 随锐科技集团股份有限公司 视频会议画面处理方法及系统
CN113395479B (zh) * 2021-06-16 2022-06-24 随锐科技集团股份有限公司 视频会议画面处理方法及系统

Also Published As

Publication number Publication date
JP3587106B2 (ja) 2004-11-10

Similar Documents

Publication Publication Date Title
US9774896B2 (en) Network synchronized camera settings
JPH07154763A (ja) 在席テレビ会議装置
JP3587106B2 (ja) 視線一致テレビ会議装置
US20120050458A1 (en) System and method for providing depth adaptive video conferencing
JP2003506927A (ja) ビデオ会議の参加者がカメラに焦点を合わせた状態で相手方ユーザの前に出現できるようにする方法と装置
WO2018214746A1 (zh) 一种视频会议实现方法、装置、系统及计算机存储介质
US20170237941A1 (en) Realistic viewing and interaction with remote objects or persons during telepresence videoconferencing
US11076127B1 (en) System and method for automatically framing conversations in a meeting or a video conference
WO2000031974A2 (en) Improved teleconferencing system
JP2006333301A (ja) テレビ通信装置
EP4106326A1 (en) Multi-camera automatic framing
JP4576740B2 (ja) 窓状撮像表示装置及びそれを使う双方向通信方法
US10979666B2 (en) Asymmetric video conferencing system and method
JPH0522722A (ja) 画像通信用入出力装置
JPH0481088A (ja) 視線一致型の人物映像表示・撮像装置
JPS63194497A (ja) 立体テレビ会議方式
JPH08256316A (ja) 通信会議システム
JPH11355804A (ja) ネットワーク会議画像処理装置
TWI248021B (en) Method and system for correcting out-of-focus eyesight of attendant images in video conferencing
WO2013060295A1 (zh) 一种视频处理方法和系统
JP2012010059A (ja) 撮影装置及びこれを用いた遠隔コミュニケーションシステム
JP2016072844A (ja) 映像システム
JP3139100B2 (ja) 多地点画像通信端末装置および多地点対話方式
JP2591439B2 (ja) テレビ会議用動画像合成方式
JP2005328461A (ja) テレビ会議装置及び多地点テレビ会議システム

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20040302

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20040401

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040423

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20040401

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20040518

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040720

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040802

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070820

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080820

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080820

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090820

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090820

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100820

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110820

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110820

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120820

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130820

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees