JP2009239646A - テレビ会議システムおよびテレビ会議装置および画像処理プログラム - Google Patents

Abstract

【課題】
撮像した画像情報を通信先と相互間で共有し、その通信先からこの画像情報に対して所定の指示情報を示すことができるようにしたテレビ会議システムおよびテレビ会議装置および画像処理プログラムを提供する。
【解決手段】
撮影機器１０で撮影した撮影データを自ネットワークの記憶装置１３に記憶するとともに中継装置１２を介して相手先のネットワークに送信し、相手先のネットワークの記憶装置１３にも同様に記憶する。撮影時刻や撮影速度などの撮影情報を指定することで相互ネットワーク間で自ネットワークの記憶装置１３に記憶された撮影データをそれぞれ表示操作機に表示する。表示した撮影データに対して図形などを描画することで相手先のネットワークの撮影データにもその図形などを描画する。
【選択図】図１

Description

本発明は、テレビ会議システムおよびテレビ会議装置および画像処理プログラムに関する。

遠隔地にいる者同士がある対象について議論を行う場合、それらの者が同一の位置・場所にいないことによって共通の対象物若しくは双方の対象物を参照することが難しい。このため、従来の技術であるテレビ会議システムを使うことにより、互いの様子を相互に伝え合い、その対象物を参照して議論を行うことを可能にしている。

一般的なテレビ会議システムは、撮影機器であるビデオカメラで撮影した静止画像や動画像（これらを纏めて「画像情報」ともいう）を相互で相手側に転送し、受信側ではこれを参照することによって相手の様子や動作を把握している。

特許文献１に開示された従来技術では、テレビ会議システムなどの付帯設備として動画像を資料とする環境で、テレビ会議システムを構成する複数のクライアントが同時刻に同じ画面の動画像を視聴することを可能にした技術が示されている。この従来技術では、クライアント毎にデコード遅延時間及び回線遅延時間をクライアント属性として記憶しておき、動画像サーバーから動画像データを転送する前に、現在時刻を通知して各クライアントまでの転送遅延時間を求め、これらの情報から、動画像サーバーから転送された動画データが各クライアントで再生可能になる時刻を求め、この再生開始時間を各クライアントへ通知し、各クライアントが指定された時刻から動画像を再生している。

また、特許文献２で開示された従来技術では、ネットワーク上に保存された映像メディアを複数のノードから同時に閲覧できるようにしている。さらに、この従来技術では、映像メディアの閲覧の際の低コスト化および送信負荷の低減を可能にしている。
特開２００２−１５２６９９号公報 特開２００４−１３５２７７号公報

上記するような従来技術は、撮影した画像情報を録画保存してその画像情報を相互間で同期させて再生できるようにした技術であって、録画保存した画像情報に対し、テレビ会議システムが有するリアルタイム性を確保した情報交換が難しい。

本発明は、撮像した動画等の画像情報を通信先と相互間で共有し、その通信先からこの画像情報に対して所定の指示情報を示すことができるようにしたテレビ会議システムおよびテレビ会議装置および画像処理プログラムを提供することを目的とする。

上記目的を達成するため、請求項１の発明は、自地点のテレビ会議装置で撮像された動画および他地点のテレビ会議装置で撮像され前記他地点のテレビ会議装置から送信される動画を各地点のテレビ会議装置で該動画を撮影した時間情報とともにそれぞれ記憶する記憶手段と、前記記憶手段に記憶された動画の再生を指示する指示手段と、前記指示手段による前記動画の再生指示に対応して、前記他地点のテレビ会議装置に対して該動画の再生指示および前記時間情報を送信する送信手段と、前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点のテレビ会議装置で再生される動画と同一の画像を該動画と同期して前記自地点のテレビ会議装置で再生する再生手段とを具備する。

また、請求項２の発明は、請求項１の発明において、前記指示手段は、前記動画の早送り、巻戻し、一時停止、コマ送り、スロー再生、スロー逆再生を指示する特殊再生操作手段を含む。

また、請求項３の発明は、請求項１の発明において、前記再生手段により再生される動画に対して再生位置指定を行う再生位置指定手段と、前記再生位置指定手段による再生位置指定情報を前記他地点のテレビ会議装置に通知する通知手段とを更に具備し、前記再生手段により再生される動画に対する位置指定に同期して前記他地点のテレビ会議装置で再生される画像に対して同一の位置指定が行われる。

また、請求項４の発明は、請求項１の発明において、前記再生手段により再生される動画に対して図形、線、文字を含む追加情報を書き込む書込み手段と、前記書込み手段により書き込まれた前記追加情報を前記他地点のテレビ会議装置に通知する通知手段とを更に具備し、前記再生手段により再生される動画に対する追加情報の書込みに同期して前記他地点のテレビ会議装置で再生される画像に対して同一の追加情報の書込みが行われる。

また、請求項５の発明は、第１のテレビ会議装置と、前記第１のテレビ会議装置と通信網を介して接続される第２のテレビ会議装置とを具備し、前記第１のテレビ会議装置は、前記第１のテレビ会議装置で撮影した撮像映像に対応する動画信号を発生する第１の動画信号発生手段と、前記第１の動画信号発生手段から発生された動画信号に同期信号を付与する第１の同期信号付与手段と、前記第１の同期信号付与手段により同期信号が付与された第１の動画を前記通信網を介して前記第２のテレビ会議装置に送信する第１の動画送信手段と、前記第２のテレビ会議装置から前記通信網を介して送信された第２の動画を受信する第１の動画受信手段と、前記第１の動画および前記第２動画を記憶する第１の記憶手段と、第１の記憶手段前記第１の動画と前記第２の動画とのいずれかを切替える第１の切替手段と、前記第１の切替手段により切替えられた前記第１の動画若しくは前記第２の動画を表示する第１の表示手段と、前記第１の切替手段を制御するとともに、前記第１の記憶手段に記憶された前記第１の動画若しくは前記第２の動画の再生操作を行う第１の操作手段とを具備し、前記第２のテレビ会議装置は、前記第２１のテレビ会議装置で撮影した撮像映像に対応する動画信号を発生する第２の動画信号発生手段と、前記第２の動画信号発生手段から発生された動画信号に同期信号を付与する第２の同期信号付与手段と、前記第２の同期信号付与手段により同期信号が付与された動画を前記通信網を介して前記第１のテレビ会議装置に送信する第２の動画送信手段と、前記第１のテレビ会議装置から前記通信網を介して送信された前記第１の動画を受信する第２の動画受信手段と、前記第２の動画および前記第１の動画を記憶する第２の記憶手段と、前記第２の記憶手段に記憶された前記第２の動画と前記第１の動画とのいずれかを切替える第２の切替手段と、前記第２の切替手段により切替えられた前記第２の動画若しくは前記第１の動画を表示する第２の表示手段と、前記第１の操作手段の操作に同期し、前記第２の切替手段を制御するとともに、前記第２の動画若しくは前記第１の動画の再生操作を行う第２の操作手段とを具備する。

また、請求項６の発明は、自地点で撮像された動画および他地点で撮像され前記他地点から送信される動画を該動画を撮影した時間情報とともにそれぞれ記憶する記憶手段と、前記記憶手段に記憶された動画の再生を指示する指示手段と、前記指示手段による前記動画の再生指示に対応して、前記他地点に対して該動画の再生指示および前記時間情報を送信する送信手段と、前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点で再生される動画と同一の画像を該動画と同期して再生する再生手段とを具備する。

また、請求項７の発明は、コンピュータを、自地点で撮像された動画および他地点で撮像され前記他地点から送信される動画を該動画を撮影した時間情報とともにそれぞれ記憶手段に記憶させる記憶制御手段、前記記憶手段に記憶された動画の再生を指示する指示手段、前記指示手段による前記動画の再生指示に対応して、前記他地点に対して該動画の再生指示および前記時間情報を送信する送信手段、前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点で再生される動画と同一の画像を該動画と同期して再生する再生手段として機能させる。

本発明の請求項１によれば、撮像した動画等の画像情報を通信先と相互間で共有し、この画像情報を相互間で閲覧した状態で通信先とリアルタイムに情報交換を行えるようになるという効果を奏する。

また、請求項２によれば、共有する画像情報に対して動画の早送り、巻戻し、一時停止、コマ送り、スロー再生、スロー逆再生を指示することが可能になるという効果を奏する。

また、請求項３によれば、通信回線の通信負荷を最小限にし、より高画質の画像情報を再生することが可能になるという効果を奏する。

また、請求項４によれば、動画等の画像情報に対して追加した図形、線、文字を含む追加情報をも相互間で共有することが可能になるという効果を奏する。

また、請求項５によれば、撮像した動画等の画像情報を通信先と相互間で共有し、この画像情報を相互間で閲覧した状態で通信先とリアルタイムに情報交換を行えるようになるという効果を奏する。

また、請求項６によれば、撮像した動画等の画像情報を通信先と相互間で共有し、この画像情報を相互間で閲覧した状態で通信先とリアルタイムに情報交換を行えるようになるという効果を奏する。

また、請求項７によれば、撮像した動画等の画像情報を通信先と相互間で共有し、この画像情報を相互間で閲覧した状態で通信先とリアルタイムに情報交換を行えるようになるという効果を奏する。

以下、本発明に係わるテレビ会議システムおよびテレビ会議装置および画像処理プログラムの一実施例を添付図面を参照して詳細に説明する。

図１は、本発明の実施の形態におけるテレビ会議システムおよびテレビ会議装置および画像処理プログラムを適用して構成したテレビ会議システムのシステム構成図の一例である。

図１において、このテレビ会議システムは、撮影機器１０、中継装置１１、表示操作機１２、記憶装置１３を具備して構成される複数の拠点ネットワーク同士を公衆回線網などのネットワーク通信路を介して接続した構成であって、カメラ等の撮影機器１０で撮影した撮影データを当該撮影機器１０が設けられた拠点ネットワーク以外の拠点ネットワークにある表示操作機１２に表示し、その撮影データに対して各拠点ネットワーク間で情報交換を行う。

図１では、２つの拠点ネットワーク（拠点ネットワークＡ、拠点ネットワークＢ）を接続した構成を示し、拠点ネットワークＡの撮影機器１０を「撮影機器１０Ａ」と示し、中継装置１１を「中継装置１１Ａ」と示し、表示操作機１２を「表示操作機１２Ａ」と示し、記憶装置１３を「記憶装置１３Ａ」と示す。

また、拠点ネットワークＢの撮影機器１０を「撮影機器１０Ｂ」と示し、中継装置１１を「中継装置１１Ｂ」と示し、表示操作機１２を「表示操作機１２Ｂ」と示し、記憶装置１３を「記憶装置１３Ｂ」と示す。

以下に、各拠点ネットワークで行われる処理を、拠点ネットワークＡを例にして示す。

撮影機器１０Ａを用いて撮影対象Ａを撮影すると、その撮影データがリアルタイムで中継装置１１Ａへと転送される。中継装置１１Ａで受信した撮影データには「撮影時刻情報」および「撮影速度情報」などの撮影情報が属性として記録されており、中継装置１１Ａでは、この撮影データに同期信号を付与して記憶装置１３Ａに記録する。この同期信号は、相互の拠点ネットワーク間で同期して撮影データを操作できるようにした信号である。

また、これと同時に、中継装置１１Ａは、撮影データをネットワーク通信路を介して他方の拠点ネットワークへと転送する。この他方の拠点ネットワークへの転送においても同期信号が付与された状態で転送される。

さらに、中継装置１１Ａで他方の拠点ネットワーク（例えば、拠点ネットワークＢ）から撮影データを受信した場合には、その撮影データを記録装置１３Ａへと記録するとともに表示操作機１２Ａに表示する。このときの受信した撮影データにも同期信号が付与されている状態にある。

続いて、以下で拠点ネットワークを構成する装置について説明する。

中継装置１１Ａでは、受信した撮影データを予め指定された宛先となる中継装置へ中継するとともに、その撮影データを記録装置１３Ａへと記録する処理を行う。もちろん、撮影機器１０Ａで撮影した撮影データを中継装置１１Ａが表示操作機１２Ａへと転送することで表示操作機１２Ａにその撮影データを表示するようにしてもよい。

なお、表示操作機１２Ａで、他方の拠点ネットワークから受信した撮影データと撮影機器１０Ａで撮影した撮影データとを同時に表示するような構成であってもよいし、いずれか一方を選択して切り替えて表示するような構成であってもよい。例えば、２つの撮影データを同時表示する２画面表示機能やいずれか一方の主となる撮影データに他方の画像データを小窓画面を用いて補助的に表示するピクチャーインピクチャー機能などを用いる。

記憶装置１３Ａには、撮影機器１０Ａによって撮影した撮影データおよび他方の拠点ネットワークに設けられた撮影機器（例えば、拠点ネットワークＢの撮影機器１０Ｂ）で撮影した撮影データが記録されている。また、記録された撮影データには「撮影時刻情報」および「撮影速度情報」などの撮影情報および同期信号が付与されている。

表示操作機１２Ａは、他方の拠点ネットワークＢの撮影機器１０Ｂで撮影した撮影データをリアルタイムに表示するとともに、また、記憶装置１３Ａに記憶された撮影データをも操作指示によって表示する。この表示操作機１２Ａは、表示ディスプレイのほかタッチパネルによって構成され、表示した撮影データに対して文字や記号、線、図形などを描画することも可能である。

このような構成において、拠点ネットワークＡの撮影対象Ａについて、拠点ネットワークＡにいるユーザ（「ユーザＡ」と示す）と拠点ネットワークＢにいるユーザ（「ユーザＢ」と示す）とがある事柄（議題）に対して議論を行う場合を例にして処理を説明する。

まず、撮影対象Ａを撮影機器１０Ａによって撮影することにより同一ネットワークである拠点ネットワークＡの記憶装置１３Ａに、同期信号が付与された撮影データが記録される。また、これと同時に、中継装置１１Ａを介して他方のネットワークである拠点ネットワークＢにその撮影データが転送され、拠点ネットワークＢの中継装置１１Ｂが記憶装置１３Ｂにその撮影データを記録する。記憶装置１３Ａにも撮影機器１０Ｂで撮影した撮影データが同期信号の付与された状態で記録される。

このとき、拠点ネットワークＡの表示操作機１２Ａには、撮影機器１０Ｂで撮影している撮影データを表示した状態にあり、また、拠点ネットワークＢの表示操作機１２Ｂには、撮影機器１０Ａで撮影している撮影データが表示された状態にある。

このときの表示操作機（１２Ａ、１２Ｂ）に表示される画面例を図３に示す。

もちろん、ピクチャーインピクチャー機能を用いて拠点ネットワークＡの表示操作機１２Ａには、撮影機器１０Ｂで撮影している撮影データと撮影機器１０Ａで撮影した撮影データとを同時に表示してもよい。この場合の表示例を図４に示す。

このような表示状態において、撮影対象Ａが存在する拠点ネットワークＡとは異なるネットワークの拠点ネットワークＢにある表示操作機１２Ｂを用いて一時停止操作を行うと、この表示操作機１２Ｂに、同拠点ネットワークＢの記憶装置１３Ｂに記録した撮影機器１０Ａで撮影した撮影対象Ａの撮影データに切り替えて一時停止した状態で表示させる。

もちろん、一時停止操作でなく停止操作や再生操作を行ってもよい。このとき、以下のような処理が行われる。

表示操作機１２Ｂで指定された操作に基づく撮影情報により中継装置１１Ｂでは、記憶装置１３Ｂに記憶された撮影データを表示操作機１２Ｂへと表示する。また、表示操作機１２Ｂで表示した撮影データおよびその撮影データに描画した文字や記号、線、図形などを拠点ネットワークＡへ転送して表示操作機１２Ａに表示させる。

このとき、拠点ネットワークＡの撮影機器１０Ａで撮影した撮影データは拠点ネットワークＢの表示操作機１２Ｂにピクチャーインピクチャー機能を用いて小窓画面に補助的に表示させる。また、拠点ネットワークＢの撮影機器１０Ｂで撮影した撮影データは拠点ネットワークＡの表示操作機１２Ａの小窓画面に補助的に表示する。

このようにして記憶装置（１３Ａ、１３Ｂ）で記憶する撮影データを表示した状態では、早送り、巻き戻し、一時停止、コマ送り、コマ戻し、スロー再生、スロー逆再生などの特殊再生操作が可能になる。

例えば、表示操作機１２Ｂによって特殊再生操作が行われると、中継装置１１Ｂは、特殊再生操作の指示情報を拠点ネットワークＡの中継装置１０Ａへと転送する。中継装置１０Ａでは、この指示情報を表示操作機１２Ａへ転送して表示操作機１２Ａがその指示情報に基づく特殊再生操作を実行する。

なお、上記の処理動作では、拠点ネットワークＢの表示操作機１２Ｂで文字や記号、線、図形などを描画した撮影データを他方の拠点ネットワークＡに転送して表示操作機１２Ａに表示するような構成であるが、文字や記号、線、図形などを描画した撮影データの該当フレーム（静止画）を逐次、送信して表示するような構成であってもよい。

この場合、表示操作機１２Ａに表示させる撮影データは同期信号に基づいて記憶装置１３Ａに記録した撮影データを表示させ、文字や記号、線、図形などを描画した撮影データの該当フレーム（静止画）が拠点ネットワークＢより受信した場合には同期信号に基づいてそのフレームを表示した撮影データに優先して表示させるような構成も可能である。

このときの詳細な処理の流れを図５乃至図１０に示す。

図２は、本発明の実施の形態におけるテレビ会議システムの機能構成を示すブロック図である。

図２は、２拠点ネットワーク間がネットワーク通信網で接続されたテレビ会議システムで行われる画像処理の構成を示し、各拠点ネットワークは、撮像部１０１、同期信号付与部１０２、情報送信部１０３、記憶部１０４、操作部１０５、切替部１０６、情報受信部１０７、表示部１０８を具備した構成である。

各拠点ネットワークに共通であることから拠点ネットワークＡを例に説明する。

撮像部１０１は、カメラなどの撮像機器によって構成され、被写体を撮像し、撮像した撮影データを同期信号付与部１０２へと転送する。この撮影データには、撮影した時刻情報である撮影時刻および撮影の速度を示した撮影速度の各撮影情報が設定されている。

同期信号付与部１０２では、撮影データに対して相互の拠点ネットワーク間で同期して撮影データを操作できるようにした同期信号を付与する。撮影データに同期信号を付与すると、同期信号付与部１０２は、その撮影データを記憶部１０４へと記憶すると同時に、情報送信部１０３へと転送する。

記憶部１０４では、撮影情報が設定された撮影データに同期信号を付与した状態で記憶し、これは、操作部１０５からの指示により表示部１０８に表示可能な状態であることを示す。

また、情報送信部１０３は、他の拠点ネットワークへと撮影データ等を送信する送信インターフェースであって、通信先の拠点ネットワークＢの情報受信部１０７へと撮影データを送信する。情報送信部１０３と情報受信部１０７とによってリアルタイム通信を行う通信路を形成し、他のネットワーク通信に優先して撮影データが送信される。

拠点ネットワークＡの情報受信部１０７は、拠点ネットワークＢの情報送信部１０３より送信された撮影データ等を受信する。この情報受信部１０７では、受信した撮影データを記憶部１０４へと記憶するとともに、その撮影データを切替部１０６へと転送する。この撮影データにも同様に、同期信号や撮影情報が付与されており、これらの付与した状態で記憶部１０４へと記憶する。

さらに、情報受信部１０７より撮影データを受信した切替部１０６では、受信した撮影データを成形して表示部１０８へと転送する。この切替部１０６では、表示部１０８に表示する撮影データを切り替える切替処理を行う。切り替えられる撮影データは、他の拠点ネットワークから受信した撮影データと、記憶部１０４に記憶されている撮影データのいずれかであり、操作部１０５によるユーザ操作によって切替処理が行われる。

そして、表示部１０８は、切替部１０６より受信した撮影データを表示する。

操作部１０５は、ユーザにより特殊再生操作等を受け付けて、情報送信部１０３や記憶部１０４、切替部１０６へと通知する。

また、この操作部１０５は、ユーザからの指示により表示部１０８に表示した撮影データに対して文字や記号、線、図形などを描画指示し、これらの描画情報を情報送信部１０３を介して他の拠点ネットワークＢへと送信する。

この情報を受信すると、情報受信部１０７は、切替部１０６へと転送して切替部１０６が表示部１０８に記憶部１０４で記憶する撮影データを表示するとともに、描画情報を当該撮影データ上に表示する。

図１および図２に示す構成における詳細な処理の遷移を図５乃至図１０のシーケンス図で示し、以下で説明する。

図３は、本発明の実施の形態におけるテレビ会議システムの表示操作機に表示される撮影データの一例を示す図である。

図３には、図１に示すネットワーク構成における拠点ネットワークＡの表示操作機１２Ａと拠点ネットワークＢの表示操作機１２Ｂを示している。各表示操作機（１２Ａ、１２Ｂ）は、再生させた状態にある撮影データに文字や図形などを描画することができ、さらに、その撮影データを一時停止させた一フレームに文字や図形などを描画することできる。

図３に示される各表示操作機（１２Ａ、１２Ｂ）には、拠点ネットワークＡの撮影機器１０Ａで撮影して拠点ネットワークＢの記憶装置１３Ｂに記録された撮影データを特殊再生操作によって再生させ、その再生状態にある撮影データに文字や図形などを描画した状態を示している。

図３に示す表示操作機に表示された撮影データは、図１に示す撮影対象Ａを撮影したものであって、その撮影対象Ａが「「掲示板」に示される情報を人である「ユーザ」が「棒」で指し示している状態」であることを示すものである。

この撮影対象Ａに、図３の拠点ネットワークＢの表示操作機１２Ｂを用いて、「ユーザ」の立ち位置を右方向へ誘導する「右方向矢印」の図形（３０１）と、「掲示板」に示される情報を訂正する「訂正内容情報」の文字列および図形（３０２）とを、タッチペン３０３を操作することによって描画した状態を示している。

これにより、拠点ネットワークＡの表示操作機１２Ａにもその描画した文字や図形（３０１、３０２）が描画された撮影データが転送されて表示される。

図４は、本発明の実施の形態におけるテレビ会議システムの表示例を示す図である。

図４は、図１に示すネットワーク構成における拠点ネットワークＡの表示操作機１２Ａと拠点ネットワークＢの表示操作機１２Ｂを示し、各表示操作機（１２Ａ、１２Ｂ）には、共有情報である議論の対象となる撮影データを同時に表示させ、さらにピクチャーインピクチャー機能を用いて、その撮影データとともに表示操作機内部の小窓画面（１２−１Ａ、１２−２Ｂ）に通信相手の撮影機器（１０Ａ、１０Ｂ）で撮影した撮影データを表示させている。

すなわち、表示操作機に表示している記憶装置で記憶している過去に撮影した撮影データに対して、相互間で情報の共有（議論）を行うことが可能となる。

ちなみに、拠点ネットワークＡにある表示操作機１２Ａの小窓画面（１２−１Ａ）には、拠点ネットワークＢの撮影機器１０Ｂで撮影対象Ｂを撮影した撮影データが表示され、同様に、拠点ネットワークＢにある表示操作機１２Ｂの小窓画面（１２−１Ｂ）には、拠点ネットワークＡの撮影機器１０Ａで撮影対象Ａを撮影した撮影データが表示される。

図５乃至図１０は、本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図である。

図５から図１０に示す各処理遷移は、図１に示す拠点ネットワークＡと拠点ネットワークＢとからなるネットワーク構成における処理遷移を示しており、各拠点ネットワークＡおよび拠点ネットワークＢでは図２に示すような機能が構成されている。

拠点ネットワークＡにおけるシステム構成を「システムＡ」と示し、このシステムの操作者であるユーザを「ユーザＡ」としており、また、拠点ネットワークＢにおけるシステム構成を「システムＢ」と示し、このシステムの操作者であるユーザを「ユーザＢ」として、各シーケンス図を説明する。

まず、図５におけるシーケンス図では、拠点ネットワークＡおよび拠点ネットワークＢの撮影機器が撮影対象を撮影し、撮影データを相手の拠点ネットワークへと送信して各拠点ネットワークに設けられた記憶領域を有する記憶部に記憶するとともにその撮影データを画面に表示している状態にある。この撮影データには撮影時刻情報が記録されている。

このような状態において、拠点ネットワークＡのユーザＡが一時停止ボタンを押下する（５０１）と、システムＡは、ユーザ操作により指定された操作、この場合一時停止操作の指示を受信する（５０２）。

システムＡでは、システムＢから受信した撮影データから一時停止操作が行われた時刻を特定する（５０３）。続いて、システムＢから受信して記憶部で記憶している過去に撮影された撮影データを画面に表示できる状態へと切り替え（５０４）、ユーザ操作により指定された操作である一時停止操作による一時停止した状態で画面に表示させる（５０５）。

この撮影データを画面に表示させるために切り替える処理（５０４）は、一時停止操作による一時停止が行われる前まで画面に表示されていたシステムＢから受信したリアルタイムの撮影データではなく、記憶部に記憶した一時停止操作直前の撮影データを表示できるように切り替える処理である。

もちろん、上記するようなピクチャーインピクチャー機能を用いた図４に示すような画面で、切り替えた記憶部に記憶する撮影データをメイン画面に表示し、またシステムＢから受信しているリアルタイムの撮影データを小窓画面に表示するような構成であってもよい。

そして、この一時停止操作が行われたことおよび一時停止操作の時刻情報をシステムＢへと通知する（５０６）。

システムＢでは、システムＡより指定された操作および時刻情報を受信すると（５０７）、システムＢで記憶する自システムＢで撮影した過去の撮影データを表示部に表示できる状態へと切り替える（５０８）。

切替後、その撮影データを表示部に表示させる（５０９）。もちろん、上記同様、ピクチャーインピクチャー機能を用いた画面構成であってもよい。

上記の処理では、一時停止ボタンや停止ボタンなどが押下されて画面に表示されている撮影データが停止すると、切替処理が行われて記憶部に記憶されている撮影データを用いた画面操作が可能な状態へと切り替わる。

なお、一般的に、システムＢで記録した自システムＢで撮影した過去の撮影データの方が、システムＡで記録したシステムＢで撮影した過去の撮影データよりも通信路を介するための圧縮処理を施していないことから高画質となる。上記のステップ５０９においてシステムＢで表示する画像データをシステムＡに送信し、システムＡで表示しても良い。

これにより、システムＡにおいて、より高画質の一時停止画像を表示させることができる。

図６は、図５に示す処理遷移によって一時停止された状態で巻き戻しボタンを押下した場合の処理遷移である。

巻き戻しボタンがユーザＡにより押下されると（６０１）、システムＡはユーザＡにより指定された操作として巻き戻し操作の指示を受信する（６０２）。システムＡでは記憶部で記憶し、画面に一時停止状態で表示している撮影データを巻き戻し再生して画面に表示させる（６０３）。

これによって、画面上では巻き戻されて早送りされた画面が表示されている状態となる。

そして、システムＡは、システムＢに対して巻き戻し操作を行ったことを通知する（６０４）。

システムＢでは、システムＡより巻き戻し操作が行われたことを受信し（６０５）、システムＢの記憶部に記憶する撮影データの巻き戻し再生を行う（６０６）。そして、巻き戻し再生している撮影データを表示する（６０７）。

図７は、図６に示す処理遷移によって巻き戻された状態で再生ボタンを押下した場合の処理遷移である。

再生ボタンがユーザＡにより押下されると（７０１）、システムＡはユーザにより指定された操作として再生操作の指示を受信する（７０２）。システムＡでは、記憶部で記憶し、巻き戻し状態にある撮影データの巻き戻しを停止してその時点における再生位置時刻情報を特定する（７０３）。そして、その再生位置時刻情報の時刻から撮影データを再生して画面に表示させる（７０４）。

このとき、システムＡは再生操作が行われたことおよび再生位置時刻情報をシステムＢへと通知する（７０５）。

システムＢでは、再生操作が行われたことおよび再生位置時刻情報を受信し（７０６）、巻き戻し状態にある撮影データを再生位置時刻情報に基づいて再生する（７０７）。

上記で図５から図７を用いて説明した処理遷移では、システムＢで撮影した撮影データに対してシステムＡが操作する場合の処理遷移であるのに対して図８および図９ではシステムＢで撮影した撮影データに対してシステムＢが所定の操作を行う場合の処理遷移を示す。

図８は、例えば図７に示す処理遷移によって撮影データが再生された状態で早送りボタンを押下した場合の処理遷移である。

システムＢを操作するユーザＢが早送りボタンを押下すると（８０１）、システムＢはユーザＢにより指定された操作として早送りボタン操作の指示を受信する（８０２）。システムＢでは、再生状態にある撮影データを早送り再生して画面に表示させる（８０３）。

これによって、画面上では早送りされて再生された画面が表示されている状態となる。

そして、システムＢは、システムＡに対して早送り操作を行ったことを通知する（８０４）。

システムＡでは、システムＢより早送り操作が行われたことを受信し（８０５）、自システムＡの記憶部に記憶する撮影データを早送り再生して画面に表示する（８０６）。

図９は、図８に示す処理遷移によって撮影データが早送り再生された状態で再生ボタンを押下した場合の処理遷移を示す。

ユーザＢが再生ボタンを押下すると（９０１）、システムＢはユーザにより指定された操作として再生ボタン操作の指示を受信する（９０２）。システムＢでは、早送り再生している状態にある撮影データから再生位置時刻情報を特定する（９０３）。そして、その再生位置時刻情報の時刻から撮影データを再生して画面に表示させる（９０４）。

このとき、システムＢは再生操作が行われたことおよび再生位置時刻情報をシステムＡへと通知する（９０５）。

システムＡでは、再生操作が行われたことおよび再生位置時刻情報を受信し（９０６）、早送り再生状態にある撮影データを再生位置時刻情報に基づいて再生する（９０７）。

図１０は、例えば図９に示す処理遷移によって撮影データが再生された状態、すなわち記憶部に記憶されている過去の撮影データが再生された状態から、システムＡおよびシステムＢの撮影機器によって撮影されたリアルタイム映像を相互のシステムの画面に表示する状態へと戻す場合の処理遷移を示している。

システムＡで操作するユーザＡが復帰ボタンを押下すると（１００１）、システムＡは、ユーザＡにより指定された操作である復帰ボタン操作の指示を受信する（１００２）。

システムＡでは、システムＡの記憶部で記憶している撮影データの画面への出力を停止する処理を行い（１００３）、画面に表示される撮影データの入力をシステムＢから受信する撮影データとする切替処理を行う（１００４）。

そして、システムＡは、システムＢに対して復帰ボタンが押下されたことを通知する（１００５）。

システムＢでは、復帰ボタンの押下の通知を受信すると（１００６）、システムＢの記憶部より出力される撮影データを停止し（１００７）、システムＡから受信するリアルタイムの撮影データを画面に表示するような切替処理を行う（１００８）。

そして、システムＡから受信する撮影データを画面に表示させる（１００９）。

なお、本発明は、通信機能を備えたテレビ会議システムで上述の動作を実行させ、あるいは上述の手段を構成させるためのプログラムを格納した記録媒体（ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ等）から該プログラムをコンピュータにインストールし、これを実行させることにより、上述の処理を実行するテレビ会議システムを構成することも可能である。テレビ会議システムを構成するコンピュータは、システムバスを介してＣＰＵ（Central Processor Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ハードディスクが接続されている。ＣＰＵは、ＲＯＭまたはハードディスクに記憶されているプログラムに従い、ＲＡＭを作業領域にして処理を行う。

また、プログラムを供給するための媒体は、通信媒体（通信回線、通信システムのように一時的または流動的にプログラムを保持する媒体）でもよい。例えば、通信ネットワークの電子掲示板（ＢＢＳ：Bulletin Board Service）に該プログラムを掲示し、これを通信回線を介して配信するようにしてもよい。

本発明は、上記し、且つ図面に示す実施例に限定することなく、その要旨を変更しない範囲内で適宜変形して実施できるものである。

本発明の実施の形態におけるテレビ会議システムおよびテレビ会議装置および画像処理プログラムを適用して構成したテレビ会議システムのシステム構成図の一例。 本発明の実施の形態におけるテレビ会議システムの機能構成を示すブロック図。 本発明の実施の形態におけるテレビ会議システムの表示操作機に表示される撮影データの一例を示す図。 本発明の実施の形態におけるテレビ会議システムの表示例を示す図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。 本発明の実施の形態におけるテレビ会議システムの処理遷移を示すシーケンス図。

符号の説明

１０ 撮影機器
１１ 中継装置
１２ 表示操作機
１３ 記憶装置
１０１ 撮像部
１０２ 同期信号付与部
１０３ 情報送信部
１０４ 記憶部
１０５ 操作部
１０６ 切替部
１０７ 情報受信部
１０８ 表示部

Claims (7)

1. 自地点のテレビ会議装置で撮像された動画および他地点のテレビ会議装置で撮像され前記他地点のテレビ会議装置から送信される動画を各地点のテレビ会議装置で該動画を撮影した時間情報とともにそれぞれ記憶する記憶手段と、
   前記記憶手段に記憶された動画の再生を指示する指示手段と、
   前記指示手段による前記動画の再生指示に対応して、前記他地点のテレビ会議装置に対して該動画の再生指示および前記時間情報を送信する送信手段と、
   前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点のテレビ会議装置で再生される動画と同一の画像を該動画と同期して前記自地点のテレビ会議装置で再生する再生手段と
   を具備するテレビ会議システム。
2. 前記指示手段は、
   前記動画の早送り、巻戻し、一時停止、コマ送り、スロー再生、スロー逆再生を指示する特殊再生操作手段を含む請求項１記載のテレビ会議システム。
3. 前記再生手段により再生される動画に対して再生位置指定を行う再生位置指定手段と、
   前記再生位置指定手段による再生位置指定情報を前記他地点のテレビ会議装置に通知する通知手段と
   を更に具備し、
   前記再生手段により再生される動画に対する再生位置指定に同期して前記他地点のテレビ会議装置で再生される画像に対して同一の再生位置指定が行われる請求項１記載のテレビ会議システム。
4. 前記再生手段により再生される動画に対して図形、線、文字を含む追加情報を書き込む書込み手段と、
   前記書込み手段により書き込まれた前記追加情報を前記他地点のテレビ会議装置に通知する通知手段と
   を更に具備し、
   前記再生手段により再生される動画に対する追加情報の書込みに同期して前記他地点のテレビ会議装置で再生される画像に対して同一の追加情報の書込みが行われる請求項１記載のテレビ会議システム。
5. 第１のテレビ会議装置と、
   前記第１のテレビ会議装置と通信網を介して接続される第２のテレビ会議装置と
   を具備し、
   前記第１のテレビ会議装置は、
   前記第１のテレビ会議装置で撮影した撮像映像に対応する動画信号を発生する第１の動画信号発生手段と、
   前記第１の動画信号発生手段から発生された動画信号に同期信号を付与する第１の同期信号付与手段と、
   前記第１の同期信号付与手段により同期信号が付与された第１の動画を前記通信網を介して前記第２のテレビ会議装置に送信する第１の動画送信手段と、
   前記第２のテレビ会議装置から前記通信網を介して送信された第２の動画を受信する第１の動画受信手段と、
   前記第１の動画および前記第２動画を記憶する第１の記憶手段と、
   第１の記憶手段前記第１の動画と前記第２の動画とのいずれかを切替える第１の切替手段と、
   前記第１の切替手段により切替えられた前記第１の動画若しくは前記第２の動画を表示する第１の表示手段と、
   前記第１の切替手段を制御するとともに、前記第１の記憶手段に記憶された前記第１の動画若しくは前記第２の動画の再生操作を行う第１の操作手段と
   を具備し、
   前記第２のテレビ会議装置は、
   前記第２１のテレビ会議装置で撮影した撮像映像に対応する動画信号を発生する第２の動画信号発生手段と、
   前記第２の動画信号発生手段から発生された動画信号に同期信号を付与する第２の同期信号付与手段と、
   前記第２の同期信号付与手段により同期信号が付与された動画を前記通信網を介して前記第１のテレビ会議装置に送信する第２の動画送信手段と、
   前記第１のテレビ会議装置から前記通信網を介して送信された前記第１の動画を受信する第２の動画受信手段と、
   前記第２の動画および前記第１の動画を記憶する第２の記憶手段と、
   前記第２の記憶手段に記憶された前記第２の動画と前記第１の動画とのいずれかを切替える第２の切替手段と、
   前記第２の切替手段により切替えられた前記第２の動画若しくは前記第１の動画を表示する第２の表示手段と、
   前記第１の操作手段の操作に同期し、前記第２の切替手段を制御するとともに、前記第２の動画若しくは前記第１の動画の再生操作を行う第２の操作手段と
   を具備するテレビ会議システム。
6. 自地点で撮像された動画および他地点で撮像され前記他地点から送信される動画を該動画を撮影した時間情報とともにそれぞれ記憶する記憶手段と、
   前記記憶手段に記憶された動画の再生を指示する指示手段と、
   前記指示手段による前記動画の再生指示に対応して、前記他地点に対して該動画の再生指示および前記時間情報を送信する送信手段と、
   前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点で再生される動画と同一の画像を該動画と同期して再生する再生手段と
   を具備するテレビ会議装置。
7. コンピュータを、
   自地点で撮像された動画および他地点で撮像され前記他地点から送信される動画を該動画を撮影した時間情報とともにそれぞれ記憶手段に記憶させる記憶制御手段、
   前記記憶手段に記憶された動画の再生を指示する指示手段、
   前記指示手段による前記動画の再生指示に対応して、前記他地点に対して該動画の再生指示および前記時間情報を送信する送信手段、
   前記送信手段による前記再生指示および前記時間情報の送信により、前記他地点で再生される動画と同一の画像を該動画と同期して再生する再生手段
   として機能させる画像処理プログラム。

Images