JPH09149395A

JPH09149395A - 通信装置

Info

Publication number: JPH09149395A
Application number: JP7303056A
Authority: JP
Inventors: Yoshito Maekawa; 義人前川
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1995-11-21
Filing date: 1995-11-21
Publication date: 1997-06-06

Abstract

(57)【要約】【課題】複数の相手端末からの映像と音声の対応を容
易に確認できるようにする。【解決手段】互いに対となる又は一体化した複数の画
像モニタ１２ａ，１２ｂ，１２ｃと複数のスピーカ２２
ａ，２２ｂ，２２ｃを具備する。各通信装置は、通信開
始時に地点識別情報（端末番号と端末ＩＤ）を送出す
る。受信側となる端末のシステム制御回路３２は、受信
した地点識別情報により、各相手端末にモニタ１２ａ，
１２ｂ又は１２ｃとスピーカ２２ａ，２２ｂ又は２２ｃ
を割り当てる。回路３２は、受信した映像地点識別情報
の端末ＩＤ（例えば、会社名、所属名、地名及び電話番
号等）を取り出し、ビデオ・インタフェース１６に供給
する。ビデオ・インターフェース１６は端末ＩＤを画像
化し、同じ端末からの受信映像に合成して、その端末に
割り付けられたモニタ１２ａ，１２ｂ又は１２ｃに供給
する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像、音声及びデ
ータ等の各種メディアを組み合わせて多地点間でマルチ
メディア通信を行なう通信装置に関する。

【０００２】

【従来の技術】近年、ＩＳＤＮ（サービス総合ディジタ
ル網）による通信サービスが実用化されたことにより、
ＩＳＤＮ等のディジタル回線を用いたＡＶ（Ａｕｄｉｏ
Ｖｉｓｕａｌ）サービスが注目されており、各種テレ
ビ電話装置やテレビ会議システム等のマルチメディア通
信装置が普及しつつある。

【０００３】通常、ＭＣＵ（多地点間通信制御ユニッ
ト）と呼ばれる通信装置に複数のマルチメディア通信装
置を接続することによって、多地点間でのマルチメディ
ア通信を実現する。また、最近では複数のマルチメディ
ア通信装置をＭＣＵ無しで接続し、多地点間通信を行な
う方式も提案されている。

【０００４】一般的に、従来のマルチメディア通信装置
は、音声出力手段を１つしか有していないので、どの地
点で発言しているかを認識することができなかった。特
に、すべての音声が加算されて受信される構成では、同
時に複数の発言者が存在する場合に、どの音声がどの発
言者によるものかを識別できない又は困難であるという
状況があった。この問題を解決する構成として、複数の
スピーカを設けて、異なる地点からの受信音声を別々の
スピーカから出力する方式が、提案されている。

【０００５】また一般的に、従来のマルチメディア通信
装置は、映像出力手段を１つしか有しておらず、通常
は、１つの受信映像（通常は、発言者の映像）のみが映
像出力手段に表示されるので、発言をしていない他の地
点の様子を知ることができないという問題が発生する。
画面分割又はウインドウ表示により１画面内に複数の受
信映像を表示可能とし、すべての地点からの受信映像を
表示した場合であっても、複数の発言者からの受信音声
がどの地点からの受信音声であり、どの受信映像に対応
しているかを識別することができないという問題があっ
た。

【０００６】この問題の解決手段として、複数の受信映
像を一画面に合成して表示しつつ、その合成方法や合成
位置に応じて、受信音声の合成と複数のスピーカからの
出力を選択するようにした構成も提案されている。

【０００７】

【発明が解決しようとする課題】しかし、複数のスピー
カを設ける構成では、受信映像に関して何も考慮されて
いないため、複数の受信音声と複数の受信映像を互いに
関連づけることができず、複数の発言者からの受信音声
がどの受信映像に対応しているかを識別することができ
ないという欠点があった。

【０００８】また、複数の受信映像を一画面に合成して
表示しつつ、その合成方法や合成位置に応じて受信音声
の合成と複数スピーカからの出力を選択する構成では、
臨場感を出すという目的は達成されるが、映像出力手段
を１つしか有していないので、複数の受信音声と複数の
受信映像を明確に関連づけることができず、複数の発言
者からの受信音声がどの受信映像に対応しているかを容
易に識別するとができないという欠点があった。また、
映像表示方式として複数の地点からの受信映像を合成し
て表示する映像合成方式を採用しているので、複数の地
点からの受信映像を切り換えて表示する映像切り換え方
式の場合に対応できないという欠点があった。

【０００９】本発明は、多地点間通信における映像及び
音声の出力に関して利便性の向上した通信装置を提供す
ることを目的とする。

【００１０】

【課題を解決するための手段】映像出力切り換え手段
が、映像識別情報受信手段により受信された映像地点識
別情報に応じて複数の映像出力手段の中から１つを選択
し、当該映像受信手段からの受信映像を供給する。ま
た、音声出力切り換え手段が、音声識別情報受信手段に
より受信された音声地点識別情報に応じて複数の音声出
力手段の中から１つを選択し、当該音声受信手段からの
受信音声を供給する。これにより、複数の地点より受信
される複数の受信映像と複数の受信音声が地点識別情報
に対応した別々の映像出力手段と音声出力手段より出力
される。従って、複数の受信音声と複数の受信映像を明
確に関連づけることができ、複数の発言者からの受信音
声がどの受信映像に対応しているかを容易に識別するこ
とができるようになる。

【００１１】

【発明の実施の形態】以下、図面を参照して、本発明の
実施の形態を詳細に説明する。

【００１２】図１は、本発明の一実施例であるマルチメ
ディア通信装置の概略構成ブロック図を示す。図１にお
いて、１０はユーザを撮影するカメラ、１２ａ，１２
ｂ，１２ｃはカメラ１０による入力映像、受信映像及び
操作画面などを表示する画像モニタである。各画像モニ
タ１２ａ，１２ｂ，１２ｃの利用法は、後で詳細に説明
する。１４は、ＩＴＵ−Ｔ勧告Ｈ．２６１に従い、送信
すべき映像信号を符号化し、受信した符号化映像データ
を復号化するビデオ符号化復号化回路、１６は、カメラ
１０の出力を所定の伝送用フォーマット（例えば、ＣＩ
Ｆ又はＱＣＩＦ）に変換してビデオ符号化復号化回路１
４に供給すると共に、ビデオ符号化復号化回路１４によ
り復号化された受信映像を表示用フォーマットに変換し
て画像モニタ１２に出力するビデオ・インターフェース
である。ビデオ・インターフェース１６はまた、カメラ
１０による入力映像、受信映像及び操作画面を選択及び
合成し、並びに分割表示する機能を具備する。

【００１３】２０は音声入力用のマイク、２２ａ，２２
ｂ，２２ｃは音声出力用のスピーカ、２４は、送信すべ
き音声信号を符号化すると共に、受信した符号化音声信
号を復号化する音声符号化復号化回路（音声コーデッ
ク）である。２６は、マイク２０及びスピーカ２２ａ，
２２ｂ，２２ｃと音声符号化復号化回路２４との間の音
声インターフェースである。

【００１４】なお、本実施例では、画像モニタ１２ａと
スピーカ２２ａ、画像モニタ１２ｂとスピーカ２２ｂ、
画像モニタ１２ｃとスピーカ２２ｃは一体化されてい
る。結果として、本実施例の通信装置には、３台の映像
音声出力装置が設けられていることになる。

【００１５】音声符号化復号化回路２４は、本実施例で
は、６４ｋｂｐｓＰＣＭＡ−ｌａｗ、６４ｋｂｐｓ
ＰＣＭ μ−ｌａｗ、６４ｋｂｐｓ／５６ｋｂｐｓ／
４８ｋｂｐｓＳＢ−ＡＤＰＣＭ、３２ｋｂｐｓＡＤ
ＰＣＭ、１６ｋｂｐｓ（例えば、ＡＰＣ−ＡＢ）及び８
ｋｂｐｓＡＰＣ−ＡＢ等に対応可能である。

【００１６】音声インターフェース２６は、スピーカ２
２ａ，２２ｂ，２２ｃの切り換え、エコーを消去するエ
コー・キャンセル処理、並びに、ダイヤル・トーン、呼
出し音、ビジー・トーン及び着信音などのトーン生成処
理も行なう。

【００１７】３０は送受信するデータのデータ・インタ
ーフェースである。

【００１８】３２は、ＣＰＵ、ＲＯＭ、ＲＡＭ、補助記
憶装置等の周知のデバイスからなり、全体を制御するシ
ステム制御回路、３４は、システム制御回路３２に使用
者が所定の指示を入力するための操作装置（例えば、テ
ン・キー、キーボード、タッチパネル、ディジタイザ、
トラック・ボール及び／又はマウス等）である。システ
ム制御回路３２はまた、データ・インターフェース３０
に送信すべきデータを供給し、データ・インターフェー
ス３０からシステム制御回路３２には、通信相手端末か
ら受信したデータが供給される。

【００１９】３６はＩＳＤＮ回線のＩＳＤＮユーザ・網
インターフェース・プロトコルに従い回線を制御する回
線インターフェース、３８は、ＩＴＵ−Ｔ勧告Ｈ．２２
１に従い、回線インターフェース３６からの受信情報
を、その内容に応じてビデオ符号化復号化回路１４、音
声符号化復号化回路２４、データ・インターフェース３
０及びシステム制御回路３２に分離供給すると共に、ビ
デオ符号化復号化回路１４からの符号化画像データ、音
声符号化復号化回路２４からの符号化音声データ、デー
タ・インターフェース３０からのデータ及びシステム制
御回路３２からの制御コマンドを送信フレーム単位に多
重化して回線インターフェース３６に供給する分離多重
化回路である。

【００２０】図２は、図１に示す構造の４台の通信装置
５０ａ，５０ｂ，５０ｃ，５０ｄを、ＩＳＤＮ回線５２
を介してループ状に接続して、ビデオ会議を行なえるよ
うにした構成を示す。図２に示す接続構成では、各通信
装置５０ａ，５０ｂ，５０ｃ，５０ｄは、最大３地点か
ら受信される音声及び映像を出力する必要があり、本実
施例では、各地点からの受信情報（映像と音声）を、そ
れぞれ別の映像音声出力装置から出力する。例えば、通
信装置５０ａは、通信装置５０ｂから受信した映像を画
像モニタ１２ａに供給すると共に、受信した音声をスピ
ーカ２２ａに供給し、通信装置５０ｃから受信した映像
を画像モニタ１２ｂに供給すると共に、受信した音声を
スピーカ２２ｂに供給し、通信装置５０ｄから受信した
映像を画像モニタ１２ｃに供給すると共に、受信した音
声をスピーカ２２ｃに供給する。どの地点からの受信情
報をどの映像音声出力装置に供給するかは、通信回線の
確立順、又は、使用者の指定により決定される。

【００２１】用意される映像音声出力装置の数より多い
通信相手がある場合、使用者は、操作装置３４からシス
テム制御回路３２に映像音声出力すべき通信相手の選択
又は選択基準を入力する。例えば、発言者及び重要な参
加者には、それぞれに１台の映像音声出力装置を割り当
て、その他の参加者全員には１台の１台の映像音声出力
装置を割り当て、分割画面で映像表示し、合成音声で音
声出力する。

【００２２】図３は、映像送信を開始する時の動作フロ
ーチャートを示す。システム制御回路３２は、データ・
インタフェース３０及び分離多重化回路３８を介して全
通信相手に、映像地点識別情報として多地点通信におけ
る端末番号（例えば、数字の１）と端末ＩＤ（例えば、
会社名、所属名、地名及び電話番号等）を送信する（Ｓ
１）。更に、自映像（カメラ１０の入力映像）の送信を
開始する（Ｓ２）。カメラ１０から入力された映像は、
ビデオ・インタフェース１６を介してビデオ符号化復号
化回路１４に入力され、ここで符号化される。ビデオ符
号化復号化回路１４により符号化されたビデオ情報は、
分離多重化回路３８で多重化され、回線インタフェース
３６からＩＳＤＮ回線に送出される。

【００２３】図４は、音声送信を開始する時の動作フロ
ーチャートを示す。システム制御回路３２は、データ・
インタフェース３０及び分離多重化回路３８を介して全
通信相手に、音声地点識別情報として多地点通信におけ
る端末番号（例えば、数字の１）と端末ＩＤ（例えば、
会社名、所属名、地名及び電話番号等）を送信する（Ｓ
１１）。映像送信の開始時に送信した端末番号及び端末
ＩＤを音声用にも兼用する場合に、この動作は省略でき
る。そして、マイク２０からの入力音声の送信を開始す
る（Ｓ１２）。マイク２０から入力された音声は、音声
インタフェース２６を介して音声符号化復号化回路２４
に入力され、符号化される。音声符号化復号化回路２４
により符号化された音声信号は、分離多重化回路３８で
多重化され、回線インタフェース３６からＩＳＤＮ回線
に送出される。

【００２４】図５は、映像受信を開始するときの動作フ
ローチャートを示す。システム制御回路３２は、映像地
点識別情報の受信を監視する（Ｓ２１）。通信相手から
の映像地点識別情報は、回線インターフェース３６、分
離多重化回路３８及びデータ・インタフェース３０を介
してシステム制御回路３２に入力する。

【００２５】映像地点識別情報を受信すると、システム
制御回路３２は、受信した映像地点識別情報を内部メモ
リ等に記憶する（Ｓ２２）。受信された映像地点識別情
報の中から端末番号を取り出し、その端末番号の端末か
らの映像をどのモニタ１２ａ，１２ｂ又は１２ｃで表示
するかを決定する（Ｓ２３）。例えば、端末番号１の端
末にモニタ１２ａが割り当てられたとすれば、ビデオ・
インタフェース１６は、以後に端末番号１の端末から受
信する映像をモニタ１２ａに供給する。

【００２６】次に、システム制御回路３２は、受信した
映像地点識別情報の中から端末ＩＤ（例えば、会社名、
所属名、地名及び電話番号等）を取り出し、ビデオ・イ
ンタフェース１６に供給する。ビデオ・インターフェー
ス１６は、システム制御回路３２からの端末ＩＤを画像
データ化し、内部メモリに記憶し（Ｓ２４）、同じ端末
からの受信映像に端末ＩＤの画像データを合成し（Ｓ２
５）、合成映像を、その端末に割り付けられたモニタ１
２ａ，１２ｂ又は１２ｃに供給する（Ｓ２６）。

【００２７】これにより、各モニタ１２ａ，１２ｂ，１
２ｃには、異なる通信相手端末からの映像が、端末ＩＤ
を合成した状態で表示される。

【００２８】図６は、音声受信を開始するときの動作フ
ローチャートを示す。システム制御回路３２は、音声地
点識別情報の受信を監視する（Ｓ３１）。通信相手から
の音声地点識別情報は、回線インターフェース３６、分
離多重化回路３８及びデータ・インタフェース３０を介
してシステム制御回路３２に入力する。

【００２９】音声地点識別情報を受信すると、システム
制御回路３２は、受信した音声地点識別情報を内部メモ
リ等に記憶する（Ｓ３２）。受信された音声地点識別情
報の中から端末番号を取り出し、その端末番号（例え
ば、数字の１）を取り出し、その端末番号の端末からの
音声をどのスピーカ２２ａ，２２ｂ又は２２ｃから出力
するかを決定し（Ｓ３３）、以後、その端末から受信し
た音声を、対応付けたスピーカ２２ａ，２２ｂ又は２２
ｃに供給する。例えば、端末番号１の端末にスピーカ２
２ａが割り当てられたとすれば、音声インタフェース２
６は、以後に端末番号１の端末から受信する音声をスピ
ーカ２２ａに供給する。

【００３０】なお、映像地点識別情報により通信相手端
末とモニタ１２ａ，１２ｂ，１２ｃとの対応を既に決定
している場合には、その同じ対応でスピーカ２２ａ，２
２ｂ，２２ｃを割り当てればよいことは明らかであり、
この逆に、図６に従い音声地点識別情報により通信相手
端末とスピーカ２２ａ，２２ｂ，２２ｃとの対応を既に
決定している場合には、その同じ対応でモニタ１２ａ，
１２ｂ，１２ｃを割り当てればよい。

【００３１】通信回線として、ＩＳＤＮ回線を例に説明
したが、ＰＳＴＮ（アナログ電話網）、ＣＳＰＤＮ（回
線交換網）及びＬＡＮ等の様々な回線を利用できること
も明らかである。

【００３２】また、上記実施例では、実際に映像や音声
を送信する各マルチメディア通信装置が映像地点識別情
報及び音声地点識別情報を送信するとしたが、議長端末
を設け、議長端末が会議開始に先立ってこれらの地点識
別情報を各参加者端末に送信するようにしてもよい。

【００３３】更に、上記実施例では、マルチメディア通
信装置をループ状に接続したが、ＭＣＵを使用した構成
であってもよい。この場合、ＭＣＵが、各端末の映像地
点識別情報及び音声地点識別情報を各端末に送信する。

【００３４】映像地点識別情報と音声地点識別情報は、
まったく同一のものであってもよく、発言権に相当する
ものであってもよい。その伝送フォーマットと内容は、
特に上記実施例に限定されない。例えば、ＭＣＵが送信
するＩＴＵ−Ｔ勧告Ｈ．２３０で規定されるＶＩＮを使
用してもよい。映像地点識別情報及び音声地点識別情報
は、データ・チャネルで送信する方法の他に、ＩＴＵ一
Ｔ勧告Ｈ．２２１で規定されるＢＡＳにより送信する方
法、映像のヘッダに挿入して送信する方法等、様々な方
法が考えられる。

【００３５】ビデオ符号化復号化回路１４における復号
化器は、１個の復号化器で構成してもよいし、地点毎に
異なる複数の復号化器で構成してもよい。同様に音声符
号化復号化回路２４における復号化器は、１個の復号化
器で構成してもよいし、地点毎に異なる複数の復号化器
で構成してもよい。

【００３６】相手地点数がモニタ１２ａ，１２ｂ，１２
ｃの数を越える場合は、１つのモニタに複数地点を割り
当てて、映像の切り換え表示を行なってもよい。また、
相手地点数がスピーカの数を越える場合は、１つのスピ
ーカに複数地点を割り当てて、合成音声を出力するよう
にしてもよい。従って、モニタの数とスピーカの数は、
必ずしも一致する必要はない。

【００３７】モニタとスピーカが一体型となっているも
のには、例えば音声入力端子と映像入力端子を有するテ
レビ等が考えられるが、モニタとスピーカは必ずしも一
体型になっている必要はなく、それぞれ別々の構成とし
て、例えば別々の映像モニタとスピーカを対にして使用
することも可能である。

【００３８】当然のことながら、複数のモニタと複数の
スピーカをすべて内蔵したマルチメディア通信装置であ
ってもよい。

【００３９】

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、複数の地点より受信される複数の
受信映像と複数の受信音声が地点識別情報に対応した別
々の映像出力手段と音声出力手段より出力されるので、
複数の受信音声と複数の受信映像を明確に関連づけるこ
とができる。これにより、複数の発言者からの受信音声
がどの受信映像に対応しているかを容易に識別すること
ができるようになる。

【００４０】また、複数の地点からの受信映像を切り換
えて表示する映像切り換え式の映像表示方式であって
も、複数の発言者からの受信音声がどの地点からの受信
音声であるかを識別できる。

【００４１】更に、複数の受信映像とともに映像の送信
元を示す地点情報が表示されるので、複数の受信映像の
夫々がどの地点からの映像であるかを容易に識別できる
ようになる。

【図面の簡単な説明】

【図１】本発明の一実施例の概略構成ブロック図であ
る。

【図２】通信システムの接続構成を示すブロック図で
ある。

【図３】映像送信開始時のフローチャートである。

【図４】音声送信開始時のフローチャートである。

【図５】映像受信開始時のフローチャートである。

【図６】音声受信開始時のフローチャートである。

【符号の説明】

１０：カメラ１２ａ，１２ｂ，１２ｃ：画像モニタ１４：ビデオ符号化復号化回路１６：ビデオ・インターフェース２０：マイク２２ａ，２２ｂ，２２ｃ：スピーカ２４：音声符号化復号化回路２６：音声インターフェース３０：データ・インターフェース３２：システム制御回路３４：操作装置３６：回線インターフェース３８：分離多重化回路５０ａ，５０ｂ，５０ｃ，５０ｄ：通信装置５２：ＩＳＤＮ回線

Claims

【特許請求の範囲】

【請求項１】複数の地点からの映像を受信する映像受
信手段と、複数の地点からの音声を受信する音声受信手
段と、受信映像の送信元を示す映像地点識別情報を受信
する映像識別情報受信手段と、受信音声の送信元を示す
音声地点識別情報を受信する音声識別情報受信手段と、
複数の地点から受信した受信映像を出力する複数の映像
出力手段と、複数の地点から受信した受信音声を出力す
る複数の音声出力手段と、当該映像識別情報受信手段に
より受信された映像地点識別情報に応じて当該複数の映
像出力手段の中から１つを選択し、当該映像受信手段か
らの受信映像の出力先を切り換える映像出力切り換え手
段と、当該音声識別情報受信手段により受信された音声
地点識別情報に応じて当該複数の音声出力手段の中から
１つを選択し、当該音声受信手段からの受信音声の出力
先を切り換える音声出力切り換え手段とを具備し、複数
の受信映像と複数の受信音声をそれぞれ地点識別情報に
対応した映像出力手段と音声出力手段に出力することを
特徴とする通信装置。
【請求項２】更に、上記映像識別情報受信手段により
受信された映像地点識別情報を映像信号に変換し、上記
映像受信手段により受信された受信映像と合成する映像
合成手段を具備する請求項１に記載の通信装置。
【請求項３】複数の地点からの映像を受信する映像受
信手段と、複数の地点からの音声を受信する音声受信手
段と、映像及び音声の受信情報の送信元を示す送信元地
点識別情報を受信する識別情報受信手段と、複数の地点
から受信した受信映像を出力する複数の映像出力手段
と、複数の地点から受信した受信音声を出力する複数の
音声出力手段と、当該識別情報受信手段により受信され
た送信元地点識別情報に応じて当該複数の映像出力手段
の中から１つを選択し、当該映像受信手段からの受信映
像の出力先を切り換える映像出力切り換え手段と、当該
識別情報受信手段により受信された送信元地点識別情報
に応じて当該複数の音声出力手段の中から１つを選択
し、当該音声受信手段からの受信音声の出力先を切り換
える音声出力切り換え手段とを具備し、複数の受信映像
と複数の受信音声を送信元に対応した映像出力手段と音
声出力手段に出力することを特徴とする通信装置。
【請求項４】更に、上記識別情報受信手段により受信
された地点識別情報を映像信号に変換し、上記映像受信
手段により受信された受信映像と合成する映像合成手段
を具備する請求項３に記載の通信装置。