JPH0267890A

JPH0267890A - 多地点間テレビ会議システム

Info

Publication number: JPH0267890A
Application number: JP21982788A
Authority: JP
Inventors: Naofumi Inmaki; 印牧　直文; Kazunori Shimamura; 和典島村; Toyomichi Yamada; 山田　豊道
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1988-09-02
Filing date: 1988-09-02
Publication date: 1990-03-07
Anticipated expiration: 2013-02-04
Also published as: JP2708490B2

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】（１）発明の属する技術分野本発明は１通信網を介して多地点から送られてくるビデ
オ信号とオーディオ信号に対して、各ビデオ信号の中か
ら人物動画部分を抽出し、抽出された複数の該人物動画
部分を例えば講演会場での聴衆の着席光景のごとく人工
的に配列し、該オーディオ信号の中で音量レベルの高い
人物動画部分を起立状態に表示する多地点間テレビ会議
方式に関するものである。

（２）従来の技術第９図は、従来の多地点間テレビ会議システムの例であ
る０ｍ個の地点からそれぞれ人物動画Ｘ、、Ｘ、、・・
・Ｘ、を含むビデオ信号と音声のオーディオ信号とがカ
メラ２とマイク３とから成る入力端子１から入力され２
通信網１０を介して。

人物動画Ｘ、、Ｘ、、・・・Ｘ、に対してはモニタ２０
に、音声に対してはスピーカ５に出力される。視聴者４
は、モニタ２０とスピーカ５を用いてｍ個の地点の出席
者と遠隔会議を行う。

第１０図は、従来の表示再生システム例である。

第１０図（ａ）は、モニタ２０を複数台（ｍ個）用いる
例で、スピーカ５も同数分（ｍ個）設置される。この種
のシステムは、地点数分だけモニタ２０を設置する必要
が生じ２重役会議のように２０〜３０人の多地点（ｍ＝
２０〜３０）からの会議に対しては、スペースファクタ
が低下するとともに、経済性に劣るという第１の欠点が
ある。

第１０図（ｂ）は、モニタ２０を大画面スクリーンにす
る例である。人物動画を合成するとともに、　？ＪＩ数
個ｎ（ｎ５ｍ）のスピーカ５を用いる。画面サイズが大
型化するため、装置の設営が大掛かりになり設営の簡便
性が低下するという第２の欠点があ更に、第１０図（ｂ
）図示のシステムでは１画面幅が長いため複数個ｎのス
ピーカ５で生成する音像定位の精度がｎがｍより小さい
程、低下するという第３の欠点がある。この点に対して
ｎ＝ｍにする方法も考えられるがスピーカ５の設置台数
の観点から経済性に劣るという第３の欠点がある。

また、第１０図（ｂ）図示のシステムに対してモニタ２
０を小型化して、方形の画面に分割した各領域に各人物
動画を割当て合成表示する方法が考えられている。この
種のシステムは１画面サイズが小型であることから、ス
ピーカの設置台数を少なく押えられ、音像定位の精度の
問題がなくなるとともに多数の人物動画を同時に表示で
きるという利点がある。ところが１分割画面の該６！域
が固定していると会議の発言者の音量が大きくなっても
、対応する人物動画がだれなのか識別し難いという第４
の欠点がある。

（３）発明の目的本発明の目的は、音量が大きい発言者の人物動画を他の
人物動画より視覚的に浮き出たせることをねらいとし、
上記従来の欠点を除去するため。

講演会場での聴衆の着席光景の如く多地点から転送され
る多数の人物動画を人工的に配列合成し音量が大きい発
言者の人物動画を起立状態などで表示する多地点間テレ
ビ会議方式を提供することにある。

（４）発明の構成（４−１）発明の特徴と従来の技術との差異第１図は１
本発明の特徴を示す第１の例を説明する図である。モニ
タ２０の画面において９人物動画の顔部分子を横並びに
配列して水平基線８の下方向に沿って横並びの該頭部分
を重ね合わせて遠近感を生成し２頭部分子１の人物が発
言し、音量が大きくなった時点を契機にしてＳＳＲ部分
子１の人物動画ＸＩが上方向１８に沿って、顔から下半
身までに表示面積を拡大して、あたかも人物動画Ｘが起
立するかのように表示することを示している。

第２図は２本発明の特徴を示す第２の例を説明する図で
ある。モニタ２０の画面において、垂直基線９によって
発言者席と聴衆音度とに領域分割し該聴衆音度の領域に
ついては、第１図で述べたように水平基線８に基づいて
遠近感を考慮して顔部分子の重ね合わせを行う。頭部分
］、の人物が発言し、音量が大きくなった時点を契機に
して、該顔部分子、の人物動画Ｘ１が発言者席に移動す
るように映像移動処理１９を行うとともに、該頭部分子
１の分割画面領域２１を色付けるか又はウィンカ−する
如き処理を行う、即ち、聴衆者の中から起立して発言席
に移動するような視覚的画像処理を行う。

以上説明したように９本発明は、地点数が増加し１表示
再生する人物動画の数が増加しても容易に対処できると
ともに１発言者の人物動画を他の人物動画より視覚的に
浮き出たせることによって音量が高い発言者の音像と映
像とを連動させることを主な特徴とする。

（４−２）実施例第３図は９本発明の第一の実施例の構成を示すフ゛ロン
ク図であって、５はスピーカ、２０はモニタ３０はビデ
オ信号入力端子、３１はオーディオ信号入力端子、　１
００は人力インタフェース部、２００は人物動画部分抽
出部、３００は動画像重ね合わせ合成部、４００は動画
メモリ部、５００は人物動画部分拡大・縮ｌｊい移動処
理部である。

これを動作するには、制御部７００の指令によりｍ個の
多地点から送られてくるビデオ信号とオーディオ信号と
をビデオ信号入力端子３０とオーディオ信号入力端子３
１とを介して、入力インタフェース部１００は受信し１
ｍ個の該受信ビデオ信号を人物動画部分抽出部２００に
１ｍ個の該受信オーディオ信号を音量レベル検出部６０
０に、それぞれ転送する。

人物動画部分抽出部２００は、転送されてくる各ビデオ
信号に対して、ビデオ信号に含まれる人物動画部分Ｘ、
、Ｘ□、・・・Ｘ、を切り出し・抽出し。

抽出したｍ個の該人物動画部分Ｘ＋　、Ｘｚ　、・・・
Ｘ。

を動画像重ね合わせ合成部３００に転送する。動画像重
ね合わせ合成部３００は、転送されてくるｍ個の該人物
動画部分Ｘ＋　、Ｘｉ　、・・・Ｘｌとモニタ画面上の
分割画面との対応と重ね合わせ順序を規定する分割画面
割当てテーブル３１０に基づいて、逐次、動画メモリ部
４００を構成する重ね合わせ用メモリ４１０に格納する
。

動画像重ね合わせ合成部３００は２人物動画部分拡大・
縮ノ１い移動処理部５００から通知される動画メモリア
クセス許可信号に基づいて、動画メモリ部４００の重ね
合わせ用メモ１月１０からｍ個の該人物動画部分を重ね
合わせた映像を読み出し、ビデオ信号にしてモニタ２０
に出力する。

第４図は１人物動画の重ね合わせ法の例を示す説明図で
ある９重ね合わせ用メモリ４１０としてＡ面、Ｂ面、０
面の３種のメモリから構成されている例が示されている
。講演会場での聴衆の着席形態の映像の如く遠近感を生
成するために、横並び方向の人物動画部分は同一のメモ
リ（Ａ面、Ｂ面Ｃ面の１つ）に格納し、モニタ２０の画
面の上端部分の横並びの人物動画から下方向の横並びの
人物動画を順次重ね合わせる方法（■→■→■）が示さ
れている。即ち１図中では、Ａ面の上にＢ面を。

Ｂ面の上に０面を重ね合わせている。

他方、音量レベル検出部６００は１人力インタフェース
部１００から転送されてくるｍ個のオーディオ信号の中
で音量が高い信号を検出し、該信号に対応する人物動画
の拡大・移動処理の依頼通知を人物動画部分拡大・縮小
・移動処理部５００に転送する。該依頼通知後に、音量
が通常状態にもどった場合、音量レベル検出部６００は
、依頼取消し通知を人物動画部分拡大・縮小・移動処理
部５００に転送する。又、並行して音量レベル検出部６
００はｍ個のオーディオ信号を音声加算してスピーカ５
に出力する。

人物動画部分拡大・縮１１い移動処理部５００は。

音量レベル検出部６００から通知される処理対象の人物
動画部分に関する処理依頼又は依頼取消しの旨を受信し
、これを契機にして、該処理対象の人物動画部分に関す
る処理の起動／停止のタイミングを制御する。人物動画
部分拡大・縮小・移動処理部５００は、このタイミング
制御と動画像重ね合わせ合成部３００から通知される動
画メモリアクセス許可信号とに基づいて、処理の起動の
場合には動画メモリ部４００に格納されている処理対象
の人物動画部分を起立するかの如く拡大・移動処理を行
い、他方処理の停止の場合には、処理対象の人物動画部
分の起立状態からもとの着席状態にもどすための縮小・
移動処理を行う。第４図では１分割画面領域２２を拡大
して、起立状態を視覚的に見やすくするために、水平基
線８を横切り、あたかも起立するかのように処理するこ
とを示している。

処理方法は、処理対象の人物動画部分が格納されている
重ね合わせ用メモリ４１０の同一メモリ上で行われる。

図中では８面上で処理することを示している。

第５図は、起立表示の第１の方法を表わす説明図である
。今まで説明した方法であり、音量の高い人物頭部分子
、に対して水平基線８を越え起立した人物動画Ｘ、を生
成する。この例では人物顔部分子２は人物動画Ｘ＋　に
よって見えないものとなる。

第６図は、起立表示の第２の方法を表わす説明図である
。横方向の着席方法を１つおきに空席にする例である。

音量の高い人物頭部分子、に対して、水平基線８を越え
起立した人物動画Ｘ、を生成する。人物動画Ｘ、によっ
て見えなくなる人物頭部分子２を左右の空席に移動させ
る点が第５図図示の方法と異なる。この方法は、全ての
会議出席者の顔が常に見えるという利点がある。

第７図は、起立表示の第３の方法を表わす説明図である
。横方向の着席方法を１つおきに空席にしており、第６
図の場合と類似しているが、起立した人物動画Ｘ１の表
示面積をより拡大するという点で異なる。即ち、起立し
た人物動画Ｘ１を強調できるという利点を有する。

７第８図は、起立表示の第４の方法を表わす説明図であ
る。水平基線８の他に、垂直基線９を設け。

固定の発言席領域２６を設定する。

音量の高い人物顔部分子＋に対応する人物動画Ｘ１を発
言席領域２６に移動させて表示するとともに９分割画面
領域２１に色付けるか又はウィンカ−表示する。

（５）発明の詳細な説明したように３本発明によれば、ビデオ信号から人
物動画部分を抽出し、講演会場での聴衆の着席光景のご
とく人工的に遠近感を付けて配列するとともに、音声の
音量レベルの高い人物動画部分を起立状態に表示するこ
とから２表示画面の小型化が図れ１表示のスペースファ
クタ及び経済性に優れるという利点があるとともに、設
営の簡便さが向上するという利点がある。更に７画面の
小型化により、又、映像・音像相互作用によって音声の
再生スピーカの台数を低減でき、複雑な音像定位の処理
が不要になるという利点があるとともに、起立状態表示
によって、だれが発言しているかを映像の起立動作表示
及び位置から知覚することができ、音声もその発言者の
口元に見掛は上、引きよせられるという効果が生じる。

【図面の簡単な説明】

第１図は本発明の特徴を示す第１の例を説明する図、第
２図は本発明の特徴を示す第２の例を説明する図、第３
図は本発明の第一の実施例の構成を示すブロック図、第
４図は人物動画の重ね合わせ法の例を示す説明図、第５
図は起立表示の第１の方法を表わす説明図、第６図は起
立表示の第２の方法を表わす説明図、第７図は起立表示
の第３の方法を表わす説明図、第８図は起立表示の第４
の方法を表わす説明図、第９図は従来の多地点間テレビ
会議システムの例、第１０図は従来の表示再生システム
例を示す図である。１・・・入力端末、２・・・カメラ、３・・・マイク、
４・・・視聴者、５・・・スピーカ、８・・・水平基線
、９・・・垂直基線、　１０・・・通信網、２０・・・
モニタ、　２１．２２．２３．２４゜２５・・・分割画
面領域、２６・・・発言席領域、３０・・・ビデオ信号
入力端子、３１・・・オーディオ信号入力端子。１００・・・入力インタフェース部、２００・・・人物
動画部分抽出部、３００・・・動画像重ね合わせ合成部
、３１０・・・分割画面割当てテーブル、　４００・・
・動画メモリ部４１０・・・重ね合わせ用メモリ５５０
０・・・人物動画部分拡大・縮ノ１い移動処理部、６０
０・・・音量レベル検出部、７００・・・制御部。特許出願人　　日本電信電話株式会社

Claims

【特許請求の範囲】多地点から通信網を介して送られてくるビデオ信号とオ
ーディオ信号とを表示・再生するテレビ会議システムに
おいて、前記ビデオ信号の中から人物動画部分を抽出する手段と
、予め定められた分割画面割当てテーブルに基づいて、該
人物動画部分を重ね合わせて合成する手段と、重ね合わせて合成した重ね合わせ動画を記憶する手段と
、前記オーディオ信号の中から音量レベルが高いオーディ
オ信号を検出する手段と、検出された該オーディオ信号に対応する人物動画部分を
拡大・縮小・移動する処理手段とを具備し、複数の該人物動画を用いて人工的に着席形態の映像を合
成し、かつ音量レベルの高い人物動画を起立状態に表示
することを特徴とする多地点間テレビ会議方式。