JP2004120460A

JP2004120460A - ビデオ会議システムとビデオ会議端末装置およびプログラム

Info

Publication number: JP2004120460A
Application number: JP2002282343A
Authority: JP
Inventors: Hideyuki Kamemoto; 亀元　秀幸; Keisuke Yasui; 安井　圭介
Original assignee: Hitachi Information Systems Ltd
Current assignee: Hitachi Information Systems Ltd
Priority date: 2002-09-27
Filing date: 2002-09-27
Publication date: 2004-04-15

Abstract

【課題】受信側で再生している音声・画像データの品質を送信元で知ることができるようにする。
【解決手段】ビデオ会議システムのクライアントＡ１１１，Ｂ１２１のそれぞれは、品質情報収集部１１４，１２４において、相手側から送信されてきた音声・画像データの受信状態を示す品質情報を生成し、生成した品質情報を送信元の装置に送信し、品質表示部１１２，１２２において、相手方から送信されてきた品質情報を表示する構成とする。これにより、クライアントＡ１１１，Ｂ１２１のユーザは、自装置から送信した音声・画像データの受信側での再生状態を容易に確認できる。
【選択図】　　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、音声・画像を使用するビデオ会議技術に係わり、特に、ビデオ会議システムの信頼性の向上を図るのに好適なビデオ会議システムとその端末装置に関するものである。
【０００２】
【従来の技術】
ビデオ会議システムの利用は、最近、注目されているシステムの一つであり、例えば、出張費を削減するために導入する企業も多く、その効果も期待できる。しかし、実際の使用においては、相手に自分の声が届いているのか、その品質が不安であり、その都度、相手に確認したり、声を大きくして話すケースが多く、使い勝手に問題がある。
【０００３】
ビデオ会議システムにおける品質を向上させるための従来技術としては、特許文献１〜５に記載のものがある。
【０００４】
例えば、特許文献１には、ビデオ会議システムに関して、高速ＬＡＮにおいて会議サービス用のノードを設けるとともに、各端末側に映像を縮小して符号化する機能を導入し、会議ノードで、これらの映像信号を復号して合成し分配するおとにより、通信地点数にともなう品質劣化を避け、効率的に画像の合成を行って各端末に分配する技術が記載されている。
【０００５】
また、特許文献２には、ＴＶ会議において、対象とする発言者の音声を明確に聴取し得るようにする技術が記載され、特許文献３には、テレビ会議における発言者を、その音声に基づき特定して、その発言者をモニタ画面に分かり易く表示する技術が記載されている。
【０００６】
また、特許文献４には、テレビ会議の端末において、複数のマイクからの音声レベルを計測して、音声レベルの高いマイクと対応するカメラからの映像を選択してディスプレイに表示する技術が記載され、特許文献５には、ビデオ会議システムにおいて、例えば発言者の動画ストリームのみ間引かず、多は間引くことで、データ量を抑えながらも、必要な画像の画質を落とさないようにする技術が記載されている。
【０００７】
しかし、いずれの従来技術においても、上述した、実際の使用における問題点、すなわち、相手に自分の声が届いているのかといった不安を解消させることはできない。
【０００８】
【特許文献１】
特開平０５−１５３５８３号公報
【特許文献２】
特開平０８−０８８６９２号公報
【特許文献３】
特開平０７−１０７４５１号公報
【特許文献４】
特開平０８−１６３５２６号公報
【特許文献５】
特開平１１−３０６６０３号公報
【０００９】
尚、ＴＶを使ったビデオ会議システムでは、音声データ、画像データのどちらもスムーズに送受信されるので、使用者に不安を与えないものもあるが、このタイプのシステムでは、ネットワークの使用帯域が大きく、回線の細い拠点では使用できないという問題点があった。
【００１０】
【発明が解決しようとする課題】
解決しようとする問題点は、従来の技術では、送信元の音声・画像データを受信側で再生するだけであり、その品質を送信元で知ることができない点である。
【００１１】
本発明の目的は、これら従来技術の課題を解決し、送信した音声・画像データが、受信側においてどのような状態で届いているかを、ビデオ会議システムを使用しながら送信側でリアルタイムに確認することを可能とし、ユーザの不安感を解消させ、ストレスなくビデオ会議システムを使用させることを可能とし、ビデオ会議システムの利便性、信頼性、および性能の向上を可能とすることである。
【００１２】
【課題を解決するための手段】
上記目的を達成するため、本発明では、ビデオ会議システムを構成する端末装置に、送信されてきた音声・画像データの受信状態を示す品質情報を生成し、生成した品質情報を送信元に送信すると共に、相手方の端末装置から送信されてきた品質情報を表示する品質情報収集機能（１１４，１２４）を設け、送信した音声・画像データの受信側での受信状態を、送信元で確認可能とする構成としたことを特徴とする。
【００１３】
【発明の実施の形態】
以下、本発明の実施の形態を、図面により詳細に説明する。
【００１４】
図１は、本発明に係わるビデオ会議システムの構成例を示すブロック図であり、図２は、図１におけるビデオ会議システムの端末装置のハードウェア構成例を示すブロック図、図３は、図１のビデオ会議システムにおける端末装置で表示される画面例を示す説明図、図４は、図１におけるビデオ会議システムの処理動作例を示すフローチャートである。
【００１５】
図２において、２１はＣＲＴ（Ｃａｔｈｏｄｅ　Ｒａｙ　Ｔｕｂｅ）やＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）等からなる表示装置、２２はキーボードやマウス等からなる入力装置、２３はＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）等からなる外部記憶装置、２４はＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）２４ａや主メモリ２４ｂおよび入出力インタフェース２４ｃ等を具備してコンピュータ処理を行なう情報処理装置、２５は本発明に係わるプログラムやデータを記録したＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ−Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）もしくはＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｉｄｅｏ　Ｄｉｓｃ／Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｃ）等からなる光ディスク、２６は光ディスク２５に記録されたプログラムおよびデータを読み出すための駆動装置、２７はＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）カードやモデム等からなる通信装置である。
【００１６】
光ディスク２５に格納されたプログラムおよびデータを情報処理装置２４により駆動装置２６を介して外部記憶装置２３内にインストールした後、外部記憶装置２３から主メモリ２４ｂに読み込みＣＰＵ２４ａで処理することにより、情報処理装置２４内に図１に示すビデオ会議システムを構成する各端末装置（クライアントＡ１１１，Ｂ１２１）における各機能が実現される。
【００１７】
図１に示すように、本例のビデオ会議システムは、端末装置としてクライアントＡ１１１，Ｂ１２１を、ＬＡＮからなるネットワーク１３１を介して接続した構成からなり、クライアントＡ１１１，Ｂ１２１のそれぞれには、品質表示部１１２，１２２と、ビデオ会議処理部１１３，１２３と、品質情報収集部１１４，１２４，および、ＯＳ１１５，１２５が設けられている。
【００１８】
品質表示部１１２，１２２と品質情報収集部１１４，１２４は本発明に係わる処理を行う機能であり、ビデオ会議処理部１１３，１２３は、ビデオ会議システムのクライアントアプリケーションであり、ＯＳ１１５，１２５は、クライアントＡ１１１，Ｂ１２１上の各プログラムを制御するオペレーティング・システム（Ｏｐｅｒａｔｉｎｇ　Ｓｙｓｔｅｍ）である。
【００１９】
このような構成により、本発明のビデオ会議システムのクライアントＡ１１１，Ｂ１２１のそれぞれは、品質情報収集部１１４，１２４において、相手側から送信されてきた音声・画像データの受信状態を示す品質情報を生成し、生成した品質情報を送信元の装置に送信し、品質表示部１１２，１２２において、相手方から送信されてきた品質情報を表示する。
【００２０】
このことにより、クライアントＡ１１１，Ｂ１２１のユーザは、自装置から送信した音声・画像データの受信側での再生状態を容易に確認できる。
【００２１】
尚、品質情報収集部１１４，１２４では、図示していないスピーカからの出力レベルを測定し、測定した出力レベルを品質情報として、また、図２における表示装置１の画面上に表示された画像データのパケット数を計測し、予め定められた時間間隔で計測したパケット数を品質情報として、送信元に送信する。
【００２２】
このことにより、品質情報の送受信でのネットワークの使用帯域を小さくでき、回線の細い拠点での適用も可能である。
【００２３】
以下、このようなビデオ会議システムの動作を説明する。
【００２４】
ビデオ会議が始まると、クライアントアプリケーションＡ１１１，Ｂ１２１間では、ビデオ会議処理部１１３，１２３での処理により、音声・画像データがやり取りされ、音声データはスピーカで、画像データは表示装置の画面で出力される。
【００２５】
ここで、クライアントＢ１２１が送信側、クライアントＡ１１１が受信側として動作しているものとすると、クライアントＡ１１１の品質情報収集部１１４が、スピーカから出力された音声データ、および、画面上に表示された画像データをキャプチャし、品質情報として生成し、送信元であるクライアントＢ１２１で動作する品質表示部１２２に送信する。
【００２６】
送信する品質情報としては、極力、ネットワーク１３１の帯域を使用しないように、音声出力レベル、画像到着確認情報とする。
【００２７】
品質情報を受け取ったクライアントＢ１２１の品質表示部１２２は、この品質情報を、図３に示す構成で画面上に表示する。
【００２８】
図３においては、ビデオ会議システムを使用するユーザ側に表示される画面の例を示しており、２０１はビデオ会議システムを使用するユーザのクライアントマシンの表示装置での画面（クライアントの画面）であり、２０２はビデオ会議システムのアプリケーション（ビデオ会議処理部１１３，１２３）が表示する会議画像画面である。
【００２９】
また、２０３は相手側の音声出力レベル（単位ｄｂ）を示す画面（相手側音声レベル画面）であり、２０４は受信した画像データのパケットの割合を示す画面（相手側画像到着画面）である。この割合とは、所定の測定間隔内で、どれだけのパケットが受信できたかを示している。
【００３０】
このように、クライアントの画面２０１上で、ビデオ会議システムのアプリケーション（ビデオ会議処理部１１３，１２３）が表示する会議画像画面２０２と共に、相手側での音声出力レベル（単位ｄｂ）を示す相手側音声レベル画面２０３と、相手側で受信した画像データのパケットの割合を示す相手側画像到着画面２０４を表示することにより、ユーザは、自装置から送信した音声・画像データが、相手方でどのような品質状態で再現されているかを容易に知ることができる。
【００３１】
次に、図４を用いて、本例のビデオ会議システムの処理動作を説明する。
【００３２】
ステップ３０１においては、ビデオ会議を行う相手とのコネクション接続処理を行い、ステップ３０２では、送信相手との情報送信間隔等を決定するためのネゴシエート処理を行う。
【００３３】
また、ステップ３０３では、ビデオ会議システムを終了するかどうかの判定を行い、ここで、Ｙｅｓ（終了する）であれば、ステップ３０４での処理として、コネクションを切断し、プログラムを終了する。また、Ｎｏ（終了せず）であれば、ステップ３０５〜３０７での情報収集、送信処理に移る。
【００３４】
すなわち、ステップ３０５において、音声・画像データの出力情報を収集する処理を行う。この収集処理としては、種々のものを用いることができ、例えば、ＯＳレベルで、Ｓｏｕｎｄボードまでの出力を確認する技術や、アプリケーションレベルで、音声・画像コーデックの処理が成功したかどうかを確認する技術を用いることができる。
【００３５】
その後、ステップ３０６において、送信元へ収集情報を送る処理を行い、ステップ３０７において、ステップ３０２の処理でネゴシエートした送信間隔の間、情報収集・送信を中断する処理を行う。
【００３６】
以上、図１〜図４を用いて説明したように、本例では、ビデオ会議システムの端末装置（クライアントＡ１１１，Ｂ１２１）において、受信側から送信側に、受信側における音声・画像データの受信状態を示す情報を送信し、送信側において、自装置が送信している音声・画像データの受信側での受信状態を示す情報を出力する構成とする。
【００３７】
このように、送信側において、自装置が送った音声・画像データが相手側に正常に届いているかどうかを、リアルタイムに画面上に表示等することで、送信側のユーザは、不安感なくビデオ会議を行うことができる。
【００３８】
また、障害（受信側に音声・画像が届かなかった）が発生した場合でも、送信元のユーザ自身が直ぐに認識できるので、言い直す等、即時対応が取れる。
【００３９】
尚、本発明は、図１〜図４を用いて説明した例に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能である。例えば、本例では、ネットワーク１３１としてＬＡＮを例として説明したが、インターネット等のＷＡＮ（Ｗｉｄｅ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）を用いることでも良い。
【００４０】
また、図２におけるコンピュータ構成例では、図示していないが、ビデオ会議システムに必要な周辺装置、例えば、マイクやスピーカ、あるいは、録画装置などを設けた構成とする。また、本例では、光ディスクを記録媒体として用いているが、ＦＤ（ＦｌｅｘｉｂｌｅＤｉｓｋ）等を記録媒体として用いることでも良い。また、プログラムのインストールに関しても、通信装置を介してネットワーク経由でプログラムをダウンロードしてインストールすることでも良い。
【００４１】
【発明の効果】
本発明によれば、受信側で再生している音声・画像データの品質を送信元で知ることができるので、送信した音声・画像データが、受信側においてどのような状態で届いているかを、送信側で、ビデオ会議システムを使用しながらリアルタイムに確認することができ、ユーザの不安感を解消させ、ストレスなくビデオ会議システムを使用させることが可能となり、ビデオ会議システムの利便性、信頼性、および性能が向上する。
【図面の簡単な説明】
【図１】本発明に係わるビデオ会議システムの構成例を示すブロック図である。
【図２】図１におけるビデオ会議システムの端末装置のハードウェア構成例を示すブロック図である。
【図３】図１のビデオ会議システムにおける端末装置で表示される画面例を示す説明図である。
【図４】図１におけるビデオ会議システムの処理動作例を示すフローチャートである。
【符号の説明】
２１：表示装置、２２：入力装置、２３：外部記憶装置、２４：情報処理装置、２４ａ：ＣＰＵ、２４ｂ：主メモリ、２４ｃ：入出力インタフェース、２５：光ディスク、２６：駆動装置、２７：通信装置、１１１，１２１：クライアントＡ，Ｂ、１１２，１２２：品質表示部、１１３，１２３：ビデオ会議処理部、１１４，１２４：品質情報収集部、１１５，１２５：ＯＳ（オペレーティング・システム）、１３１：ネットワーク（ＬＡＮ）、２０１：クライアントの画面、２０２：会議画像画面（画像）、２０３：相手側音声レベル画面、２０４：相手側画像到着画面。

Claims

ネットワークを介して接続された端末装置間で音声・画像データの送受信を行うビデオ会議システムであって、
上記端末装置に、送信されてきた音声・画像データの受信状態を示す品質情報を生成し、生成した品質情報を送信元の装置に送信する第１の手段と、
相手方の端末装置から送信されてきた上記品質情報を表示する第２の手段と
設けたことを特徴とするビデオ会議システム。
請求項１に記載のビデオ会議システムであって、
上記第１の手段は、上記端末装置に設けられたスピーカからの出力レベルを測定し、該測定した出力レベルを上記品質情報とすることを特徴とするビデオ会議システム。
請求項１、もしくは、請求項２のいずれかに記載のビデオ会議システムであって、
上記第１の手段は、上記端末装置に設けられた表示装置の画面上に表示された画像データのパケット数を計測し、予め定められた時間間隔で計測したパケット数を上記品質情報とすることを特徴とするビデオ会議システム。
コンピュータを、請求項１から請求項３のいずれかに記載のビデオ会議システムにおける端末装置に設けた各手段として機能させるためのプログラム。
ネットワークを介して音声・画像データの送受信を行うビデオ会議システムを構成するビデオ会議端末装置であって、
送信されてきた音声・画像データの受信状態を示す品質情報を生成し、生成した品質情報を送信元の装置に送信する第１の手段と、
相手方の端末装置から送信されてきた上記品質情報を表示する第２の手段と
有することを特徴とするビデオ会議端末装置。
請求項５に記載のビデオ会議端末装置であって、
上記第１の手段は、スピーカからの出力レベルを測定し、該測定した出力レベルを上記品質情報とすることを特徴とするビデオ会議端末装置。
請求項５、もしくは、請求項６のいずれかに記載のビデオ会議端末装置であって、
上記第１の手段は、表示装置の画面上に表示された画像データのパケット数を計測し、予め定められた時間間隔で計測したパケット数を上記品質情報とすることを特徴とするビデオ会議端末装置。
コンピュータを、請求項５から請求項７のいずれかに記載のビデオ会議端末装置における各手段として機能させるためのプログラム。