JP2002223264A - 協調処理方式 - Google Patents

Abstract

(57)【要約】 【課題】 送信装置４０のデータ提供手段により提供さ
れるデータの操作開始に基づいてデータ操作指示手段が
受信装置のデータの操作開始を指示し、同期制御手段５
５３が伝送遅延時間分だけデータの操作を調整し、送信
装置と受信装置のデータの操作同期をとる。 【解決手段】 伝送遅延時間を考慮した同期制御によ
り、正確な協調動作を行うことが可能になる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は遠隔地間通信での協調
動作を行なう方式に関し、特にビデオ映像や音声のよう
な大容量の情報を扱う協調処理方式に関するものであ
る。また、遠隔地間通信でのデータ配信及びデータ受信
に関するものである。

【０００２】

【従来の技術】従来例１．図３４は従来のパソコン通信
のファイル転送のような一括転送方式を示す図である。
図において４０は送信側計算機、５０は受信側計算機、
６０は送信側計算機４０と受信側計算機５０を結ぶ回
線、４４は送信側計算機４０に接続された送信データ記
憶部、５４は受信側計算機５０に接続された受信データ
記憶部である。

【０００３】次に動作について説明する。送信側計算機
４０は送信データ記憶部４４に記憶された送信データを
回線６０を用いて受信側計算機に送信する。受信側計算
機５０は回線６０から送られてくるデータを受信し、受
信データ記憶部５４に記憶する。ここで送信されるデー
タは、例えばワープロのテキストや、データベース、表
計算のデータなどである。これらのテキストやデータは
ファイルという形で記憶部に記憶されており、送信側計
算機及び受信側計算機はファイル転送を用いてデータを
一括転送する。このように従来のデータ転送にはファイ
ルを単位としたバッチ処理の形式で一括転送する方式が
用いられる。

【０００４】従来例２．図３５はテレビ電話のようなリ
アルタイムの転送方式を示す図である。図はＣＣＩＴＴ
（国際電信電話諮問委員会）において画像符号化方式を
はじめとするオーディオビジュアル通信サービス関連の
標準化に向けて一連の勧告化を行った際のテレビ電話会
議端末の構成を示す図である。このテレビ電話会議端末
には映像を入出力する映像入出力機器１と映像を符号化
複号化する映像符号化装置２と音声を入出力する音声入
出力機器３と音声を符号化複号化する音声符号化装置４
と各種テレマティーク端末５が備えられている。多重化
伝送符号化装置６はこれらの装置から入力される信号を
多重化してネットワークインタフェース１０に出力す
る。ネットワークインタフェースはテレビ電話会議端末
をネットワークに接続し、他のテレビ電話会議端末との
データの交換を行う。又システム制御部７はこのテレビ
電話会議端末の制御を行う。このテレビ電話会議通信方
式は映像と音声及びパソコン等の扱うデータを多重化し
て伝送するにあたり、リアルタイムにデータを転送する
ことにより、テレビ会議システムを提供するものであ
る。

【０００５】従来例３．図３６は「インターフェイス，
１９９１年１２月，Ｐ．１６０〜１８２」の「カラー静
止画像の国際標準符号化方式」に示されたＪＰＥＧアル
ゴリズムの概念を示す図である。ＪＰＥＧアルゴリズム
は、ＣＣＩＴＴ ＳＧ ＶＩＩＩ（国際電信電話諮問委
員会研究グループＶＩＩＩ）のラポータ・グループＣＣ
ＩＣ（Ｃｏｍｍｏｎ Ｃｏｎｐｏｎｅｎｔ ｆｏｒ Ｉ
ｍａｇｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）とＩＳＯ Ｊ
ＴＣ１／ＳＣ２９／ＷＧ１０のジョイント・グループＪ
ＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘ
ｐｅｒｔ Ｇｒｏｕｐ）で、カラー静止画像符号化方式
の標準方式として提案されているものである。

【０００６】このＪＰＥＧアルゴリズムは図に示すよう
にシーケンシャル符号化とプログレッシブ符号化の２種
類の符号化方式を有している。シーケンシャル符号化方
式は画像の上から下へ走査線に従って画像情報を転送し
再生する方法であり、鮮明な画像を上から下へと徐々に
再生することができる。一方プログレッシブ符号化方式
はまず画質は必ずしも良く無いが全体像が把握できる画
像を素早く表示し、徐々にその画質を向上させる方式で
ある。この方式を用いると瞬時に大まかな画像が表示さ
れるため画像の内容を早い時点で理解することが可能に
なる。このプログレッシブ符号化方式を用いる場合に、
通信途中においてもその画像が受信側で必要かどうかを
早めに判断することができ、通信の続行又は中止を通信
中に指示することが可能になる。

【０００７】従来例４．図３７は例えば特開平２−１７
４４３６号公報に示された従来の「共同作業実現方式」
の図であり、図において２１はＰＣ本体、２２は通信制
御用ＰＣ、２３はキーボード、２４は通信用ＰＣ用キー
ボード、２５はメモリ、２６はＰＣ本体２１上で動作す
る汎用ソフト、２７はシリアルインターフェイス、２８
はＣＰＵ、２９は通信回線である。

【０００８】次に動作について説明する。図において、
汎用ソフト２６を起動するとプログラムはＰＣ本体２１
のメモリ２５に展開されるが、この際、汎用ソフト２６
の内、キー入力プログラム部分に改造が加えられ、改造
したキー入力プログラム２５ｂが生成される。

【０００９】キーボード２３が押されるとシリアルイン
ターフェイス２７ｃ、２７ｂを経由してＣＰＵ２８によ
って起動された改造したキー入力プログラム２５ｂによ
って読みとられ、シリアルインターフェイス２７ａを経
由して通信用ＰＣに伝えられる。

【００１０】通信用ＰＣでは通信回線２９に該データを
送信するとともに通信回線から受信したデータに優先度
を示すデータを付与した受信データを、シリアルインタ
ーフェイス２７ａを経由して改造したキー入力プログラ
ム２５ｂに渡す。

【００１１】改造したキー入力プログラム２５ｂではキ
ーボード２３からの入力と通信用ＰＣ２２からの入力の
２つを受け付けるが、通信制御用ＰＣ２２からの入力デ
ータに高い優先度を示すデータが付与されていた場合は
通信用ＰＣ２２からのデータをキー入力バッファ２５ｃ
に書き込み、それ以外の場合にはキーボード２３からの
入力データをキー入力バッファ２５ｃに書き込む。

【００１２】以上、この例では遠隔地での共同作用実現
方式の場合を説明したが、これ以外にも共有白板、或い
は遠隔画面操作、或いはアプリケーションプログラムの
共同操作等の技術が従来から考えられている。

【００１３】従来例５．図３８は特開平４−１１１６５
９号公報に示された「情報蓄積通信装置」の構成を示す
図である。この装置は、出力用時間監視部４９、５５か
らそれぞれ情報記憶部４４、５２に対して各メディアの
セグメント出力開始信号を送出する。情報記憶部４４、
５２は、その出力開始信号を受信すると、音声情報を音
声出力部４７、５３に、描画・ポインティング情報、静
止画情報を画像表示部４８、５４に、それぞれ出力し
て、入力時と同じ並列出力を再現する。マルチメディア
情報送信／蓄積装置４０およびマルチメディア情報受信
装置５０の双方において、各メディア情報を同時に出力
する場合には、装置４０、５０の双方で出力開始情報と
しての装置間同期情報を送受信し合い、それらの情報を
契機としてセグメント出力の制御を行う。このようにし
て、この装置は、広帯域伝送路のみで伝送されていたマ
ルチメディア情報を、一時蓄積して、送受信および再生
を行うことにより、マルチメディア情報を狭帯域の伝送
路により送受信を可能とする。

【００１４】従来例６．図３９は特開昭５２−３２６１
７号公報に示された情報伝送方式の構成を示す図であ
る。この方式においては、ペン７７によって表示装置７
５上の任意の部分を指示すると、タブレット７６、タブ
レット駆動回路７８によって位置情報が読み取られ、軸
情報メモリ８０に記憶される。指示信号発生回路８１は
記憶された位置情報により、画像信号の所定の位置に輝
度信号を挿入し、画面の指示された部分を明るく光らせ
る。また並列直列変換回路８５は軸情報メモリ８０から
読出されたＸ、Ｙ軸情報を、２値化、直列変換する。
Ｘ、Ｙ軸情報は変調器７４で変調された後、伝送路へ送
出される。受信側では位置情報と輝度信号を読出し表示
する。この方式は、画像を蓄積表示する狭帯域通信方式
において、送信側で被写体の任意部分を指示し、受信側
の同一位置に表示させ、送受信間の意志の疎通を図るも
のである。

【００１５】

【発明が解決しようとする課題】従来例１に示したよう
に、ファイル転送を用いた一括転送方式を用いる場合に
は次のような解決すべき課題がある。 （１）ファイル転送が完了しないと受信側ではその情報
を利用することができない。 （２）ファイル転送の間、そのファイル転送と同じ通信
路を共用する他の通信が圧迫される。 （３）ファイル転送の間、送信側は他の装置からデータ
を受信することが出来ない。 （４）受信側ではファイル転送が終わるまで情報の概要
がつかめない。 （５）ファイル転送後は、送信側と受信側ではファイル
を別々に管理するため、同じ情報を参照しての閲覧や加
工の作業をすることができない。 （６）受信側ではデータを全て受信するまで価値を判断
することができないため、送信側では全ての情報を転送
することになり、無駄な情報を転送してしまう場合があ
る。

【００１６】従来例２に示したようなリアルタイムで情
報を転送する方式においては、以下に述べるような解決
すべき課題が有る。 （１）テレビ電話のように映像と音声を同一の通信路で
送る場合には通信路の容量の制限からそれぞれ品質を落
として転送している。 （２）テレビ電話会議端末のように送信側、受信側共に
特殊な機器が必要になる。 （３）テレビ電話会議の場合には送信側が情報をリアル
タイムで転送し、受信側はそれをリアルタイムで受信
し、情報を蓄積しないため、後に情報を加工することが
出来ない。再び同じデータを閲覧する場合には、送信側
から同じ情報を再転送することが必要になる。 （４）受信側は全てのデータを受信するまでその価値を
判断することが出来ないので、送信側は全てのデータを
転送するため無駄な情報を転送する場合がある。

【００１７】従来例３に示したＪＰＥＧアルゴリズムの
場合には以下のような解決すべき課題がある。 （１）ＪＰＥＧアルゴリズムは静止画での加算的対話型
転送方式を提供することができるが、ビデオ映像や音声
が扱えない。 （２）ＪＰＥＧアルゴリズムは静止画というメディアに
対する転送方式を提供するが複数の情報（複数のメディ
アが混在する情報）を同時に扱えない。

【００１８】従来例４に示した遠隔共同作業実現方式に
は、以下に示すような解決すべき課題がある。 （１）ビデオ映像や音声は通信路の容量の制限から品質
を落として転送される。 （２）遠隔共同作業中に回線を使用している場合には、
遠隔共同作業を指示するための通信量にむらがあり回線
の使用効率に無駄がある。また共有白板や、遠隔画面操
作や、同一アプリケーションの共同操作を行う場合にも
従来例４に示した遠隔共同作業実現方式と同様に（１）
及び（２）の解決すべき課題がある。

【００１９】従来例５に示した情報蓄積通信装置におい
ては装置の双方で装置間同期情報を送受信しあい両装置
の同期をとった情報の出力を再現することが出来るが、
伝送遅延や動作遅延等の遅延を見込んだ処理を行ってい
ないため、正確な同期を取った共同作業が行われていな
いという問題点があった。

【００２０】従来例６に示した情報伝送方式においては
送信側で被写体の任意部分を指示し、受信側の同一位置
に表示させ、送受信間の意志の疎通を図ることが出来る
が、送信側での被写体の任意部分の指示が単純であり、
先に指示した部分を後で再び参照する場合には、再び先
に指示した部分を改めて指示しなければ成らないという
問題点があった。

【００２１】以上のように従来のデータ転送方式はいず
れの転送方式を用いる場合においても一長一短の部分が
存在している。この発明は遠隔地間通信でビデオ映像や
音声のような大容量の情報を効率よく転送することによ
り、遠隔地において転送された情報を用いて協調処理が
行える協調処理方式を提供することを目的とする。ま
た、遠隔地間通信でビデオ映像や音声のような大容量の
情報を効率よく転送するデータ配信システム及びビデオ
データ受信システムを提供することを目的とする。

【００２２】

【課題を解決するための手段】第１の発明に係る協調処
理方式は送信装置と受信装置の間で協調動作を行う場合
に以下の要素を有するものである。 （ａ）送信装置と受信装置の各々に設けられ、互いに対
応するデータを提供するデータ提供手段、（ｂ）上記送
信装置のデータ提供手段により提供されるデータの操作
開始に基づいて、上記受信装置のデータ提供手段により
提供されるデータの操作開始を指示するデータ操作指示
手段、（ｃ）上記送信装置のデータ提供手段により提供
されるデータの操作開始から上記受信装置のデータ提供
手段により提供されるデータの操作開始までの遅延時間
分だけ、データの操作を調整して送信装置と受信装置の
データの操作同期をとる同期制御手段。

【００２３】第２，３の発明にかかる協調動作方式は前
述した第１の発明に係る協調処理方式と他の発明に係る
データ配信システムを組み合わせることにより、データ
を転送すると共に、転送されたデータを用いて同期制御
を行いながらそのデータを協調処理する場合の発明であ
る。

【００２４】第４の発明に係る協調処理方式は、協調処
理に用いるデータとカーソルを表示する表示手段と、カ
ーソルを用いて画面上に複数の位置を指定する指定手段
と、指定手段により指定された位置にマークを表示する
マーク表示手段を備えたことを特徴とするものである。

【００２５】

【作用】第１の発明に係る協調処理方式においては、同
期制御手段は送信装置と受信装置の間の遅延時間分だけ
データの操作を早めるか、または遅くすることにより、
送信装置と受信装置の同期を取る。この遅延時間には、
伝送遅延或いは送信装置、受信装置の動作遅延等が含ま
れているため送信装置と受信装置の操作同期を正確にと
ることが可能になる。

【００２６】第２，３の発明における協調動作方式にお
いては、他の発明で述べたようにデータの転送中に既に
転送されたデータを利用して協調動作を行う場合に合わ
せて、第１の発明で述べた同期制御手段による正確な同
期をとった協調処理を行う場合である。

【００２７】第４の発明にかかる協調処理方式は、表示
画面にマークを複数指定することができるため協調動作
を行う場合に先に指定した位置を改めてカーソルにより
指定する必要がなくなり、送信側と受信側においてそれ
ぞれ改めて位置を指定する必要が無くなる。

【００２８】

【実施例】実施例１．図１はこの発明に係る協調処理方
式のブロック構成図である。図において４０は送信装
置、１０３は転送手段、５０は受信装置である。３００
はデータを提供するデータ提供手段、１０１はデータ提
供手段３００から提供されるデータに対して優先度を設
定する優先度設定手段、１０２はデータ提供手段３００
から提供されるデータに対して優先度に基づきデータを
選択的に抽出するデータ抽出手段、５００はデータを表
示したり表示したデータに対して優先度の指定を行なう
データ操作手段である。６００は上記送信装置、転送手
段、或いは受信装置の負荷を監視する負荷監視手段であ
る。１０５は送信データを記憶する送信データ記憶手
段、２０１はテレビカメラ或いはビデオ装置等のデータ
を入力するデータ入力手段、１０５ａはデータ入力手段
から入力されたデータを一時的に記憶する送信データバ
ッファである。３０１は送信データバッファのデータを
削除し、或いはデータ入力手段からのデータ入力を調整
するデータ抑制手段である。又１０４は受信したデータ
を利用可能な形式のデータに再構成するデータ再構成手
段、１０６は受信したデータを記憶する受信データ記憶
手段、１０７は受信したデータを表示装置等へ出力する
データ出力手段である。４００は受信したデータを利用
するデータ利用手段である。

【００２９】次に動作の概要について説明する。優先度
設定手段１０１は転送するデータの優先度を設定する。
データ抽出手段１０２は送付するデータのうち優先度設
定手段１０１により設定された優先度の高いものを選択
的に抽出する。転送手段はデータ抽出手段１０２が抽出
したデータを受信装置５０に転送する。受信装置５０の
データ利用手段４００は既に受信したデータを使用して
利用可能な形式のデータを再構成する。この再構成は送
信装置４０から受信装置５０へのデータの転送中にも行
われ、受信装置５０は伝送中にも係わらずデータを利用
することができる。

【００３０】次に図２を用いて具体例について説明す
る。図２はビデオデータがＦ０〜Ｆ１０までの１１枚の
フレームから構成されている場合を示している。このビ
デオデータを転送する場合には従来は先頭のフレームか
ら順に転送していたのに対し、この実施例では転送する
順番を状況に応じて変更するものである。例えば優先度
設定手段１０１が間引き間隔を１とすることにより、図
３に示すように偶数フレームが先に送られ、次に奇数フ
レームが送られることになる。もし図２に示した１１枚
のフレームが１秒間に転送されるべきものであった場合
には、図３に示すＦ０〜Ｆ１０の６枚のフレームが送ら
れた時点では６ｆｐｓ（フレーム／ｓｅｃ）の画像を受
信側に表示することが可能になる。又図３のＦ１〜Ｆ９
までのフレームが受信側に送られた場合には、前に送ら
れた６つのフレームと後に送られた５つのフレームを合
わせる事により１１ｆｐｓの画像を受信側に表示するこ
とが可能になる。

【００３１】次に図４を用いて優先度設定手段が間隔を
次第に細かくするという優先度を設定した場合について
説明する。図４は優先度設定手段１０１がＦ０〜Ｆ１０
のフレームを等間隔に間引いて抽出する場合を示したも
のである。データ抽出手段１０２はまず最初にＦ０，Ｆ
５，Ｆ１０を抽出する。これはフレームを５個飛びに選
択したことによる。また次にＦ２，Ｆ７が抽出される。
これは残りのフレームの中からフレームを２個毎（３個
毎）に抽出したものである。同様にして残っているフレ
ームの間引き間隔を次第に小さくしていくことにより、
Ｆ０〜Ｆ１０のフレームの全てのフレームを送ることが
できる。この図４に示した方法によれば、フレームＦ０
〜Ｆ１０送る場合に各部分において、ｆｐｓ値が均一な
結果が得られる。

【００３２】次に図５に基づいて他の例について説明す
る。図４においては５個飛びに抽出したフレームを１つ
のまとまり、或いは２個（３個）飛びに抽出したフレー
ムを１つのまとまりとして転送する場合について説明し
たが、図５においては１つのまとまりが終わる前に次の
まとまりを転送する場合について説明する。図５におい
て（ａ）は５個おきに抽出した場合の１つのまとまり、
（ｂ）は残りのフレームから２個おきに抽出した場合の
１つのまとまり、（ｃ）は残りのフレームから更に抽出
した場合の１つのまとまりを示している。この例におい
ては（ａ）のまとまりの転送が終了する前に（ｂ）のま
とまりの最初のフレームＦ２を先に転送する。同様に
（ｂ）の１つのまとまりの転送が終了する前に（ｃ）の
１つのまとまりのフレームＦ３を転送している。このよ
うに１つのまとまりが終わる前に次のまとまりを転送す
ることによりデータのはじめの方において早期により高
いｆｐｓ値を得ることが可能になり、受信側において
は、受信早期の画面がより早く完全な形式で得られるこ
とになる。

【００３３】上記図３〜図５に示した場合は送信データ
記憶手段１０５に送信すべきフレームが既に格納されて
おり、ランダムにフレームを抽出することができる場合
に適応出来るものである。一方、カメラやビデオテープ
等の時系列にデータを発生するデータ入力手段２０１が
存在している場合には、まだ発生していないデータを抽
出することは不可能である。この場合でも適用出来るの
が前述した図５に示した方法であり、時系列にデータを
発生する場合に予定した１つのまとまりが終了する前に
次のまとまりを送る方法を適用することが出来る。

【００３４】図６は図５に示した例をテレビカメラで撮
影中のデータを送信データバッファ１０５ａに入力して
いる最中にデータ抽出手段１０２が優先度に基づいてデ
ータを抽出する場合の一例を示している。図６において
時間軸に沿ってフレームＦ０から順にフレームが送信デ
ータバッファ１０５ａに入力されてくる。データ抽出手
段は５つおきにフレームを抽出しようとするが、時刻Ｔ
０においてはフレームＦ０が既に送信データバッファ１
０５に蓄えられているためフレームＦ０を抽出して転送
することが可能である。そしてこのフレームＦ０の転送
に４フレーム発生分の時間がかかる場合には、次に転送
すべき時刻Ｔ４になる。Ｔ４においてデータ抽出手段
は、５個飛びにフレームを抽出しようとするが、フレー
ムＦ５はまだ送信データバッファ１０５ａには入力され
てきていない。そこで次に送るべきまとまりの先頭であ
るフレームＦ２を時刻Ｔ４において抽出する。さらに４
フレーム発生時間後の時刻Ｔ８においては、最初のまと
まりであるフレームＦ５が既に送信データバッファ１０
５ａに記憶されているため時刻Ｔ８においてフレームＦ
５を抽出し転送する。次に時刻Ｔ１２においては送信デ
ータバッファ１０５ａにフレームＦ１０がすでに記憶さ
れているため、最初のまとまりであるフレームＦ１０が
選択され時刻Ｔ１２において転送される。

【００３５】このように撮影中の場合、或いはシリアル
に（時系列的に）データを入力する場合には、図５に示
した方式を用いる事により待ち時間をなくすことができ
ると共に受信側においては一定のｆｐｓ値を確保する事
が出来る。又送信側においては送信するデータを全て記
憶する必要が無く送信データを記憶するバッファの容量
を節約することができる。

【００３６】尚、図６においてはテレビカメラで撮影中
のフレームデータについて説明したが、ビデオテープや
ＤＡＴや磁気テープ等のシーケンシャルにアクセスが可
能なデータ全てに対して前述した方式を適用することが
可能である。

【００３７】次に図１に示したデータ抑制手段３０１の
動作について説明する。データ抑制手段３０１は送信デ
ータバッファ１０５ａに蓄積されたフレームのうち、送
られる見込みの低いフレームを削除する。或いは送られ
る見込みの低いフレームを新たに入力されるフレームに
より上書きする。例えば図４及び図５に示したような方
式によりフレームを送る場合、送られる見込みの低いフ
レームとは（ｄ）で示されるＦ１，Ｆ６，Ｆ９のフレー
ムである。データ抑制手段は、これら送られる見込みの
低いフレームを削除する事により送信データバッファ１
０５ａの容量を少なくすることが出来る。

【００３８】またデータ抑制手段３０１はデータ入力手
段２０１に対して働きかけ、送られる見込みの低いフレ
ームは予めデータ入力手段から送信データバッファ１０
５ａに対して送信を行わないようにしても構わない。前
述した例においてはフレームＦ１，Ｆ６，Ｆ９をデータ
入力手段２０１から出力しないようにデータ入力手段を
制御する。このようにデータ抑制手段３０１は、優先度
設定手段１０１が設定した優先度を参照し、優先度の低
いデータを送信データバッファ１０５ａに保持しないよ
うにすることにより、バッファの容量を節約することが
できる。尚データ抑制手段３０１は優先度設定手段が優
先度を変更する度にその抑制量を変更するようにしても
よい。

【００３９】次に図１に示した負荷監視手段６００の動
作について説明する。負荷監視手段６００はデータ抽出
手段１０２の抽出処理の負荷及び転送手段１０３のデー
タ転送負荷及びデータ利用手段４００のデータの利用負
荷を監視する。即ち、負荷監視手段６００は、回線状況
や送受信側の処理プロセッサの負荷等を常時監視し、そ
の監視結果に応じて優先度設定手段に働きかけ、優先度
をダイナミックに変更させる役割を持っている。負荷を
監視した結果、負荷が大きすぎると判断した場合には負
荷監視手段６００は優先度設定手段に対し、設定されて
いる優先度を下げるように指示する。例えば優先度設定
手段が１０ｆｐｓを達成するようにデータ抽出手段に対
して優先度を設定している場合には、１０ｆｐｓという
優先度を７ｆｐｓに減少させる。１０ｆｐｓから７ｆｐ
ｓにｆｐｓ値を下げることによりデータ抽出手段はデー
タの抽出を１０から７に変更する。従ってデータの抽出
量及び転送量及びデータの再構成処理量等も下がること
により負荷が減少する。

【００４０】尚この例では、フレームの数を減少させる
場合について説明したが、負荷監視手段が負荷が大きい
と判断した場合に優先度設定手段は優先度を変更する場
合にはその他の場合として、例えば解像度を低くする或
いは色の表現を粗くする等その他の優先度設定手段が設
定している優先度を上下させる事によりシステムの負荷
を減少させることが可能である。

【００４１】次に図７を用いて他の例について説明す
る。図７（ａ）は図２に示したビデオデータのフレーム
構成を示している。図７（ｂ）は（ａ）に示したフレー
ムをそのままフレーム毎転送するのではなく、フレーム
間差分をとったデータとして転送する場合のブロックＢ
０，Ｂ１，・・・を模式的に示したものである。（ｃ）
は（ｂ）に示した１つのブロックを分解したものであ
り、Ｆは通常のフレームデータを持つキーフレームを示
し、Ｓはフレーム間差分データを示している。この例に
おいては３フレームおきにキーフレームとし、間の２フ
レームを用いてフレーム間差分データを抽出して転送す
る場合を示している。即ち図７（ｂ）において最初のブ
ロックはフレームＦ０とフレーム間差分データＳ０から
構成されている。フレーム間差分データＳ０は、フレー
ムＦ０とフレームＦ１の差分及び、フレームＦ０とフレ
ームＦ２の差分から構成されている。なおこのフレーム
間差分データの作成方式は色々な方法が考えられてお
り、図に示すようにフレームＦ０との差分をそれぞれと
る必要は無く、フレームＦ０とＦ１の差分及びフレーム
Ｆ１とフレームＦ２の差分をフレーム間差分データとし
てとる場合でも構わない。或いはその他の方法によりフ
レーム間差分をとる場合でも構わない。

【００４２】このように画像信号をフレームとフレーム
間差分データにより構成する場合においてもこのフレー
ムとフレーム間差分データを１つのブロックとし、この
ブロックを単位としてデータ抽出手段がブロックの抽出
を行う事により、前述した図３〜図６に示した方式を採
用することができる。即ち図３〜図６に示したＦ０，Ｆ
１，Ｆ２，・・・を図７（ｂ）のＢ０，Ｂ１，Ｂ２，・
・・と置き換えることによりブロック単位に前述した方
式を適用することが可能である。

【００４３】またブロック単位にデータを抽出するので
はなく図７（ｃ）に示したようにキーフレームとフレー
ム間差分データを分解し、それぞれが分離して抽出可能
なようにしても構わない。即ちデータ抽出手段１０２は
図７（ｃ）に示したようにキーフレームＦを抽出する場
合もあるし、或いはフレーム間差分データＳを抽出する
場合も存在する。尚、この場合には優先度設定手段１０
１はキーフレームＦを先に転送し、そのキーフレームに
従属するフレーム間差分データＳを後に送るようにしな
ければならない。なぜならばフレーム間差分データＳを
先に転送しても受信側ではキーフレームが無ければ元の
データを利用できる形式に再構成することが出来ないか
らである。

【００４４】次に図８は、フレーム間差分データＳ２の
更に差分をとった差分間差分データが存在する場合のデ
ータ構成の概要を示す図である。図８においてＳＳはフ
レーム間差分データ同士の差分をとった差分間差分デー
タである。画像データがこのように構成されている場合
には、優先度設定手段１０１はキーフレームＦに対して
高い優先度を設定し、次にフレーム間差分データＳに対
して次の優先度を設定し、最後に差分間差分データＳＳ
に対して優先度を設定しなければならない。このように
転送するデータが他のデータに依存しており、転送する
データのみでは受信側で利用可能な形式のデータに再構
成出来ない場合には、他のデータに依存しない独立のデ
ータを先に転送し、その後従属しているデータを順に送
るように優先度の設定がされなければならない。

【００４５】次に図９を用いて他の例について説明す
る。図９において５０１は撮影画面、５０２は注目領域
である。データ操作手段５００は撮影画面５０１を表示
し、撮影画面５０１に対して注目すべき領域を注目領域
５０２として指定する。この指定はキーボード或いはマ
ウス等を用いてオペレータが指定することが可能であ
る。優先度設定手段１０１はデータ操作手段５００によ
り設定された注目領域５０２に対して、他の撮影画面と
比べてより高い優先度を割り当てる。データ抽出手段１
０２は注目領域５０２の画像を優先的に抽出し転送す
る。このようにしてデータを操作しているオペレータが
注目したい領域を先に受信装置に送ることが可能にな
る。データ抽出手段は注目領域を抽出する場合には、そ
の注目領域が撮影画面のどの部分にあたるかを示すオフ
セット情報も合わせて送らなければならない。受信装置
５０のデータ再構成手段１０４は送られてきた注目領域
５０２の情報とオフセット情報を用いることにより、送
られてきたデータが画面のどの位置のものであるかを判
断する事が出来る。データ出力手段１０７はデータ再構
成手段により再構成されたデータをそのオフセット位置
に基づいて表示することが可能になる。

【００４６】尚データ操作手段５００によりオペレータ
が注目領域の大きさを変化させる場合、或いは注目領域
の位置を変化させる場合がある。例えば、注目すべき場
所が撮影画面の左から右に移動した場合には、オペレー
タはデータ操作手段５００により注目領域を左から右に
移動させる。優先度設定手段はデータ操作手段により注
目領域が移動した場合には、それに追随して注目領域の
オフセット情報を変更する。データ抽出手段はそのオフ
セット情報を元に注目領域を移動させながらデータを抽
出する。

【００４７】前述した例においては、データ操作手段５
００はオペレータの入力により優先度設定手段に対して
注目領域の変更を指示する場合を説明したが、注目領域
は人間が指定する場合に限らず、予めメモリ等の記憶手
段に記憶されている場合でも構わない。例えば抽出する
データの全てに亙って、画面中央部１０センチ四方を注
目領域として予め設定しておいても構わない。或いは撮
影画面のズーム比に応じてその注目領域もズーム比と同
様に拡大縮小するように予め設定しておいても構わな
い。

【００４８】図９に示した例は注目領域を定める場合に
ついて説明したが、注目領域という限られた範囲を指定
するばかりでなく注目対象物を指定する場合でも構わな
い。例えば、画像データにおいて赤い色を着た人間が登
場する場合に、赤い色に対して優先度を高く割り当てる
ことが可能である。或いは赤い色を表示しているデータ
及びその周辺のデータに対して優先度を高くすることも
可能である。

【００４９】図１０は注目対象物に対して優先度を与え
る場合の一例を示す図である。図においてＡ，Ｂ，Ｃは
注目対象物（オブジェクト）である。Ｄはその背景であ
る。この例ではオブジェクトＡから順にオブジェクト
Ｂ、オブジェクトＣの順に優先度を与え、背景Ｄに対し
ては最も低い優先度を割り当てる例を示している。

【００５０】次に図１１には前述したオブジェクトＡ、
及びオブジェクトＢに対して更に異なる優先度を与える
場合について示している。オブジェクトＡ、オブジェク
トＢが共に人間である場合には、その顔の部分に対して
更に優先度を高く設定した例である。即ち顔の部分をＡ
１、Ｂ１とし、体の部分Ａ２、Ｂ２とした場合、顔の部
分に対してより高い優先度を与えた例を示している。な
おこの注目対象物を指定する場合も、図１に示したデー
タ操作手段５００を用いてオペレータがマニュアルによ
り注目対象物を指定することが可能である。又、一方予
め注目対象物の特徴を記憶させておき、例えば赤い服を
着た人を注目対象物として赤い色を表示しているデータ
を優先的に抽出するということも可能である。このよう
に注目対象物を指定する場合にも、マニュアルによる認
識及びシステムによる自動認識のいずれの場合でも適応
することが可能である。

【００５１】尚、アニメデータを扱う場合には、アニメ
データをビデオデータのような画素から構成されるデー
タとして構成する場合とアニメとして描かれた対象物が
Ｘ方向にＹメートル動くというような数値データで表わ
されるアニメデータとが存在する。アニメデータが画素
データではなく数値データとして表わされている場合に
は、注目対象物がどの方向にどのように移動するかとい
うことはデータを解析することにより認識することがで
きるため、自動認識しやすい。

【００５２】尚、前述したような注目領域、或いは注目
対象物の認識は継続的に行うことによりプロセッサの負
荷を高くするという不具合をもたらす。従って注目領域
や注目対象物の認識は継続的に行うのではなく、断続的
に行うようにしても構わない。図１２は注目領域の認識
をＡ時点とＢ時点に分けて断続的に行った場合の一例を
示す図である。Ａ時点では注目領域５０２ａが撮影画面
の左側にあり、Ｂ時点には注目領域５０２ｂが撮影画面
の右側に移動していた場合には、認識された注目領域の
間を補完する。例えばＡ時点とＢ時点の中間時点におけ
る注目領域を、注目領域５０２ａと注目領域５０２ｂの
位置の中間における位置として注目領域５０２ｃを補完
により生成することが可能である。この補完方法として
は線形補完を用いたりその他従来から知られている各種
の補完方式を用いることが可能である。例えば画像デー
タを扱う場合には画像データに適した補完方式が存在
し、又音声データを扱う場合には音声データに適した補
完方式がそれぞれの分野において色々提案されている。

【００５３】次に図１３を用いてこの実施例の他の例に
ついて説明する。図１３（ａ）に示す撮影画面５０１に
おいて注目領域５０２が左側に指定されたものとする。
その場合にはデータ入力手段２０１に働きかけて、例え
ばカメラのズームを調整し、注目領域５０２を拡大す
る。又は、カメラのアングルを変え注目領域が画面の撮
影画面５０１の中央に位置するように調整する。このよ
うにして注目領域５０２の情報が、より多くデータ抽出
手段１０２によって抽出されるように制御するようにし
ても構わない。

【００５４】図１４はこの実施例の他の例を示す図であ
る。図１４（ａ）はベジエポイントの例を示している。
曲線を描く場合に、先ず曲線の中間地点を用いて直線に
よって概略を表示し、その後曲線の中間地点をさらに加
えることにより、本来の曲線に次第に近づけていく方法
がある。この場合にも、最初の直線のデータを先に抽出
して転送し、その後次第に曲線に近づいていくような情
報を転送することが可能である。又、図１４（ｂ）に示
すように形状データを転送する場合にも、はじめ情報量
の少ないデータから次第に本来のデータに近づくように
データを転送するようにしても構わない。この例では四
角系から六角形、六角形から八角形、八角形から円にな
るようにデータを段階的に転送する場合を示している。

【００５５】次に色彩情報を分離し、分離した情報にそ
れぞれ優先度を与える場合について説明する。ここで色
彩情報とは輝度（明度）を含むものとする。例えば色彩
情報を転送する場合には、先ず白黒の二値映像を伝送
し、次に２５６色のカラー画像を伝送し、さらに最後に
フルカラーの映像を伝送するという方法が考えられる。
図１５は１バイト（８ビット）を用いてトルーカラー方
式（ダイレクトカラー方式）のＭＳＢ〜ＬＳＢの順に８
つのレイヤーに分けて情報を転送する場合の例を示した
ものである。レイヤー１の１ビット目を送信することに
より、二値の映像を先ず送ることが出来る。更にレイヤ
ー２のビットを送ることにより４値までの映像を送るこ
とができる。同様に１ビットずつ増やす毎により８値，
１６値，３２値，・・・というように２５６値までの映
像を送ることが可能である。

【００５６】又図１６に示すようにカラーテーブルを用
いて色を表示するような場合でも構わない。この例では
カラーテーブルが０〜１６までのアドレスに対して１６
種類の色を指定しておき、インデックスの値によってカ
ラーテーブルを検索し、その対応する色を表示する例で
ある。このインデックス情報を転送する場合にも前述し
たように、レイヤー１からレイヤー４の順に送ることに
より色彩情報を分離して送ることが可能である。

【００５７】又、図１６において別な分離方式としてカ
ラーテーブルとインデックスを分離することも考えられ
る。例えばカラーテーブルが頻繁に変わるようなシステ
ムにおいては、カラーテーブルとインデックスの両方を
転送するということが必要になる。優先度設定手段１０
１はカラーテーブルとインデックスに対して優先度を与
える。例えばカラーテーブルに対して高い優先度を割り
当てた場合には、カラーテーブルが常にそれを用いるイ
ンデックスよりも先に受信側に送られることになる。或
いは逆にインデックスに対して高い優先度を割り当てた
場合には、インデックスが先に転送されるため受信側で
は古いカラーテーブルを用いて情報を表示することにな
るが、新たなカラーテーブルが送られた時点で正しい色
の表示をすることが可能になる。

【００５８】次に図１７は色彩情報がＨＳＶ方式或いは
ＲＧＢ方式によって表現される場合の例を示している。
矢印Ａの順番にデータ転送をする場合には、ＨまたはＲ
の情報が先に送られ、次にＳまたはＧの情報が送られ、
最後にＶまたはＢの情報が送られる場合を示している。
又矢印Ｃの場合は矢印ＡがＭＳＢ〜ＬＳＢの方向に向か
って情報を転送していたのに対して、この場合はＬＳＢ
〜ＭＳＢの方向に向かって情報を転送する場合を示して
いる。さらに矢印Ｂの場合は、ＨＳＶ或いはＲＧＢの順
に１ビットづつ情報を転送する場合を示している。又図
３６に示したプログレッシブ符号化方式を用いる場合に
は、図３６（ｂ）粗いデータ１５を先に転送し、次に残
されたデータを転送し、さらに最後に残されたデータを
転送するという方式をビデオデータ等に応用することが
可能である。即ち、ビデオデータやアニメデータの１つ
１つのフレームを静止画として捕らえ、前述したプログ
レッシブ符号化方式で得られるデータを順に送ることが
可能である。

【００５９】次に図１８は撮影画面の走査線を示す図で
ある。優先度設定手段１０１が優先度を設定する場合に
は、この走査線に対して優先度を設定することも可能で
ある。例えば偶数番目の走査線に対して優先度を高く設
定し、奇数番目の走査線に対して優先度を低く設定する
事により、受信側では偶数番目の走査線を用いて、先に
画像を表示し利用することが可能になる。もし、映像画
面がインターレースモードを用いている場合であって、
かつ優先度設定手段が１つおきの走査線に対して優先度
を高く設定している場合には、実際に画面に表示する走
査線の順番と優先度が高く設定された走査線の時間的発
生順序が等しく成るため、効率の良いデータ抽出を行う
ことが可能になる。

【００６０】尚、この他にデータを分離し、分離したデ
ータを分けて送る例としては、例えば形状データを先に
送り、後から色等の属性データ或いは線の太さ等の属性
データを送ることが考えられる。或いは形状データを先
に送り、後からその形状の持つ材質データやその形状が
持つ面の表面データ等を送ることができる。例えば先に
直方体の形状のみを送り、後から各面に対して色のデー
タを送ることが出来る。或いは直方体の形状データを送
り後からその直方体の各面の表面材質が金属であるか、
ゴムであるか等の表面材質データを送ることができる。

【００６１】前述した実施例においては画像データを扱
う場合について説明したが、以下に音声データを扱う場
合について説明する。デジタルサウンドデータを扱う場
合にＰＣＭ（パルス・コード・モジュレーション）及び
ＡＤＰＣＭ（アダプティブ・ディファレンシャル・パル
ス・コード・モジュレーション）による符号化方式が用
いられている。これらの符号化方式においては、ある一
定のサンプリングレートに基づいて音声をサンプリング
することにより、符号化が行われる。音声データを扱う
場合には、このサンプリングレートに基づいて行われた
サンプリングデータに対して優先度を設定することが可
能である。

【００６２】図１９は音声データをサンプリングする場
合の一例を示した図である。図１９（ａ）に示すように
音声データを時刻Ｔ１からＴ７においてサンプリングし
た結果の値をＳ１〜Ｓ７とする。このＳ１〜Ｓ７を符号
化し、それぞれを１つの単位として転送することが可能
である。例えばＰＣＭ方式の場合にはＳ１〜Ｓ７までが
それぞれ１つのコードとして出力されるため、図１９
（ｂ）に示すようにまず奇数番目のコードＳ１，Ｓ３，
Ｓ５，Ｓ７を転送し、のちに偶数番目のコードＳ２，Ｓ
４，Ｓ６を転送することが可能である。もし図１９
（ａ）におけるサンプリングレートを４４ＫＨｚである
とするならば、図１９（ｂ）に示すＳ１〜Ｓ７の奇数番
目のコードを転送した時点では、２２ＫＨｚでサンプリ
ングした場合と同程度の品質の音声データを受信装置で
再構成することが可能である。又Ｓ２〜Ｓ６までの偶数
番目のコードを転送した時点では受信装置においては、
４４ＫＨｚでサンプリングしたデータと同様の音声デー
タを再構成することが可能になる。

【００６３】又音声データにプライオリティーを付けて
抽出する場合の例として、波長毎或いは帯域毎に優先度
を与えることも可能である。

【００６４】或いは音声データがチャネル毎に伝送され
る場合においても、そのチャネル毎に優先度を与えるこ
とが可能である。例えば、左右２チャネルにより右スピ
ーカ、左スピーカに対して音声データを出力するような
場合には右スピーカと左スピーカに出力する音声に対し
て優先度を設定することが可能である。

【００６５】次にビデオデータ等の時間軸のあるデータ
の場合について説明する。時間軸に沿って発生するデー
タの場合には、時間軸上のある連続した１つのまとまり
をシーンとして、それぞれのシーンに対して優先度を与
えることが可能である。このシーンとはビデオデータに
おいて画面が大きく転換するような場合でも構わない。
或いは１分単位、１秒単位というように物理的に時間を
単位にして区切って、区切られたまとまりをシーンとす
る場合でも構わない。例えば図１のデータ操作手段５０
０に対してビデオデータを表示し、オペレータがそのビ
デオデータを見ることによりマニュアルにより場面転換
を判定してシーンを設定するようにしても構わない。或
いは図１に示すデータ出力手段１０７において受信して
利用可能に成ったデータを受信側のオペレータが見て、
その中で場面転換がある場合を指定し、これをシーンと
しても構わない。或いはデータ入力手段２０１において
用いられているデータ入力機器の動作に連動してシーン
を区切っても構わない。例えばテレビカメラがアングル
を変えた場合、或いはズーム比を変えた場合等のタイミ
ングでシーンを区切っても構わない。或いはデータ入力
手段においてビデオテープを用いている場合にはそのテ
ープにタイムコードが記憶されている場合がある。この
タイムコードをチェックすることにより時間を検出する
ことができる。従ってこの時間を検出することにより、
強制的に例えば１分おきにシーンを区切るようにしても
構わない。或いは画像データをベクトル量子化する場合
において算出されるフレーム間差分データを用いてシー
ンを検出しても構わない。差分が大きい時、或いはキー
フレームが転送される時をシーンの区切りとしても構わ
ない。又前述したようなシーンの区切りの方式を組み合
わせて用いる事により、シーンの区切りを付けるように
しても構わない。

【００６６】次に、加算減算が可能な構成を有するデー
タの場合について説明する。デジタル楽器を複数制御す
ることが可能なＭＩＤＩのような制御データは加算性の
あるデータ構造をしている。例えば、ピアノに割り当て
られたチャネル、バイオリンに割り当てられたチャネル
を加算することによりピアノとバイオリンの協奏曲を得
ることが出来る。従って優先度設定手段１０１はピアノ
のチャネル、或いはバイオリンのチャネルに対して異な
った優先度を設定する。又高音部、中音部、低音部とい
う音域間に対しても異なった優先度を割り当てるように
してもよい。

【００６７】次に複合されたメディアを転送する場合の
例について説明する。テレビ会議システムのようにビデ
オデータとサウンドデータを同時に転送するような場合
が存在する。或いは複合文書のようにテキストと、レイ
アウトと、イメージを複合した文書を転送する場合が存
在する。このように複数のメディアを複合して転送する
場合には、各メディア間で優先度を設定することが可能
である。例えば写真イメージと、その写真を説明するテ
キストが複合された複合文書がある場合には、先ず先に
写真イメージを転送し、後からその写真イメージを説明
したテキストを転送することが考えられる。

【００６８】次に、図１に示したデータ抽出手段１０２
の他の例について説明する。図２０はデータ抽出手段１
０２の内部構成を示す図である。データ抽出手段１０２
は送信データ記憶手段１０５に記憶されているデータの
メディアから他のメディアに変換する機能を有してい
る。図２０において１４０１は原メディアで記憶されて
いる送信データを他のメディアである代行メディアに変
換するメディア変換手段、１４０３はメディア変換手段
により変換された代行メディアを記録する変換済み送信
データ記憶手段、１４０２は代行メディアに対して選択
的にデータを抽出する選択的データ抽出手段である。例
えば送信データ記憶手段１０５には音声データが記録さ
れているものとする。メディア変換手段１４０１はこの
音声データを音声認識を用いることによりテキストデー
タに変換する。選択的データ抽出手段１４０２はこの変
換されたテキストを優先度に基づいて選択的に抽出す
る。このように音声データをテキストに変換する事によ
り転送するデータ量が少なくなる。

【００６９】更に図２１はデータ抽出手段の他の例を示
す図である。図において１４０４は現メディアに対して
データを選択的に抽出する選択的データ抽出手段であ
る。この例においては、まず送信データ記憶部に記憶さ
れた音声データの中から優先度に基づいた選択的な抽出
を行い、抽出したデータを変換前送信データ記憶手段１
４０３に記憶する。メディア変換手段１４０１は変換前
送信データ記憶手段に記憶された音声データをテキスト
データに変換する。図２０に示す例は変換を先に行い、
抽出を後に行う場合を示しており、図２１に示す場合は
先に抽出を行い後で変換を行う場合を示している。この
ように音声データをテキストデータに変換してテキスト
データを先に転送し、後に音声データを転送するという
方法を用いることにより、テキストを用いることにより
先ず概略を把握することが出来、後に音声を受けること
により詳細を把握することができる。テキストというの
は音声から音声認識により生成されたものであるが、音
声の持つ音の高低や音の大小、或いはバックグラウンド
の音等が存在しないものである。従ってこのテキストを
転送しただけでは実際の情報が相手には伝わりにくい。
しかし、音声データに比べてテキストデータはそのデー
タ量が格段に少ないために、先ずテキストを転送してお
き、テキストのような代行メディアにより相手に概略を
把握して貰い、その後に音声のような原メディアにより
詳細を把握してもらうということが可能になる。

【００７０】図２２は図１に示したデータ抽出手段１０
２の他の例を示す図である。１４０４は送信データ記憶
手段に記憶された現データから概要データを抽出する概
要データ抽出手段、１４０５は原データから優先度に従
って選択的にデータを抽出する原データ抽出手段であ
る。この例においてはデータ抽出手段は、概要を一早く
伝えるために原データから概要データを抽出する。例え
ば送信データ記憶手段にある原データが１０２４×１０
２４の解像度を持つ画像データである場合に概要データ
抽出手段は２５６×２５６という解像度を持つ縮小した
画面にデータを圧縮して受信装置に転送する。その後原
データ抽出手段は走査線や色等の優先度に基づいて１０
２４×１０２４の原データからデータを選択的に抽出し
て受信装置へ転送する。受信装置側では先に概要データ
を受信しているため２５６×２５６の縮小画面を表示す
ることが可能である。その時点でデータが必要ないと判
断した場合には、そのデータの転送ををキャンセルする
ことも可能である。後から詳細なデータが送らてきた場
合には、先に受信した概要データは不要になるため受信
側で不要になったデータを廃棄する。

【００７１】次に図１に示したデータ利用手段４００の
動作について説明する。図２３はデータ利用手段４００
にある受信データ記憶手段と、記憶手段１０６と、デー
タ再構成手段１０４と、データ出力手段１０７の関係を
示す図である。図２３においては転送手段により転送さ
れてきたデータは受信データ記憶部１０６にシーケンシ
ャルに書き込まれる。データ再構成手段１０４は受信デ
ータ記憶手段１０６に書き込まれたデータを再構成し、
再びこのデータを受信データ記憶手段１０６に書き戻
す。データ出力手段１０７は受信データ記憶手段に記憶
された再構成されたデータをシーケンシャルにリード
し、これを表示装置等に出力する。

【００７２】次に図２４はデータ利用手段４００の他の
例を示す図である。転送手段１０３により転送されたデ
ータはデータ再構成手段１０４に入力される。データ再
構成手段１０４は入力したデータを再構成しながら受信
データ記憶手段１０６に記憶させる。データ出力手段１
０７は、受信データ記憶手段１０６に記憶された再構成
されたデータをシーケンシャルに読み出して表示装置等
に出力する。図２３の場合には受信データ記憶手段には
転送データがシーケンシャルに書き込まれ、その後デー
タ再構成手段がシーケンシャルに書き込まれたデータの
関係する部分を読み込むことにより、データを再構成す
る。従って受信データ記憶手段のファイルの構成はデー
タ再構成手段１０４が関連するデータを容易に読み出せ
るようなファイル構造をもつことが望ましい。また図２
４に示す受信データ記憶手段はデータ再構成手段により
再構成されたデータが、受信データ記憶手段に時間と共
に追加されるため、追加が容易なファイル構造をもつこ
とが望ましい。

【００７３】次に図２５は受信データ記憶手段１０６の
構成の一例を示す図である。１０６ａは受信データを受
信して一時的に蓄える受信データバッファである。１０
６ｂは受信データバッファに蓄えられたデータを記憶す
る受信データ記憶部である。この受信データバッファ１
０６ａから受信データ記憶部１０６ｂへのデータの転送
は、あるタイミングで行われ、既に受信データ記憶部に
ある先のデータと新たに受信データバッファに書き込ま
れた新しいデータをマージして受信データ記憶部に記憶
する場合、或いは先に受信データ記憶部に記憶されたデ
ータを新たに受信データバッファに受信したデータで置
き換える場合等が考えられる。このように受信データ記
憶手段１０６の内部を受信データバッファと受信データ
記憶部という２つの部分に分ける事により受信装置が１
つのファイルを書き込んでいる場合には、そのシステム
が書き込み中のファイルからデータを読み込むことがで
きないという制限を持っている場合においても、受信デ
ータ記憶手段１０６全体としては読み込みと書き込みの
両方が可能になる。

【００７４】次に優先度設定手段１０１が優先度を設定
する場合の例について説明する。前述したように優先度
設定手段１０１により設定された優先度に基づきデータ
抽出手段１０２がデータの抽出を行うが、この優先度は
必ずしも固定的なものではなくダイナミックに変更され
るものであって構わない。例えばＡという要素とＢとい
う要素が存在し、Ａの要素の優先度がＢの要素よりも大
きい場合について考える。データ抽出手段がＡという要
素とＢという要素を抽出可能である場合であって、かつ
転送手段１０３がその転送が回線の空き状態からＡの要
素の転送をすることができないが、Ｂの要素の転送は可
能であるという場合には回線の転送効率を考慮してＢと
いう要素の優先度をＡよりも高く設定することにより、
Ｂの要素を先に転送することが考えられる。

【００７５】図２６は優先度を割り当てる場合に各要素
に均一の優先度を与えるのではなく、各要素に対応して
優先度を変化させる場合の一例を示す図である。図２６
（ａ）はフレームナンバーが増加する毎に優先度を低く
設定した場合の例である。また図２６（ｂ）は図４に示
したように一定の間隔をおいてフレームを送信する場合
の優先度の変化について示したものである。

【００７６】また図２７はある情報が発生してからその
経過時間が過ぎるに従って優先度が減少する場合の例を
示したものである。例えば、シーン８が出現してから２
０分がすでに経過している場合には、優先度５が与えら
れていたのに対して、さらにシーン８が転送されないま
ま４０分経過した場合には、優先度が５から１に下げら
れた例を示している。このように、経過時間が過ぎれば
過ぎる程優先度を減少させるのは、その要素が過去にな
ればなる程、重要性が失われることを考慮したものであ
る。

【００７７】尚、今まで説明した優先度はそれぞれ優先
度が一つある場合について説明したが、優先度を複数持
ち、予め与えた条件式によって実際の優先度を算出する
ようにしても構わない。例えば図２６（ｂ）に示すよう
な優先度の割当を持つと同時に、図２７に示すような優
先度の割当をも持つ場合には、フレームナンバーとその
フレームが実際に出現してからどの位の経過時間がたっ
たかという２つの優先度に基づいて実際の優先度が決定
される。またその場合には重み付けを行って優先度を算
出するようにしても構わない。

【００７８】又優先度を変化させる場合の一例として、
目標上限値を設け、上限に達した場合、或いは上限に近
づく場合に優先度を下げるという方式も考えられる。例
えば画像フレームを１０ｆｐｓを目標上限値として転送
する場合に８ｆｐｓを達成した時点で優先度を落とし、
他の要素に転送の機会を与えることができる。

【００７９】尚、以上述べたような優先度の変更は常に
行うようにしても構わないが常時優先度の評価を行うこ
とによりプロセッサの負荷が増大する。このため優先度
の変更を断続的に行うようにしても構わない。断続的に
行うことによりプロセッサの負荷を下げることが可能で
ある。

【００８０】次に図２８は優先度設定手段による優先度
の設定を受信装置からのフィードバック情報に基づいて
行う場合を示している。図２８において１８０１は受信
側に優先度設定手段が設定した上限目標値に対する達成
率を表示してオペレータにモニタさせる受信側達成率モ
ニタ手段である。１８０２は受信側において優先度の変
更を指示する受信側優先度指示手段である。受信側にい
るオペレータは受信側達成率モニタ手段により表示され
た目標上限値に対する達成率をモニタすることが出来
る。オペレータはこの達成率をモニタすることにより優
先度の変更を受信側優先度指示手段１８０２により指示
することができる。受信側優先度指示手段１８０２は転
送手段１０３を介してこの優先度の変更指示を優先度設
定手段１０１にフィードバックすることができる。優先
度設定手段１０１はこのフィードバック情報を考慮して
実際の優先度を調整する。

【００８１】次に図２９は送信装置において優先度を調
整する場合の一例を示す図である。図において１８０５
は送信側において目標上限値に対する達成率を表示して
オペレータにモニタさせる送信側達成率モニタ手段であ
る。１８０６はオペレータからの優先度の変更指示を受
け付ける送信側優先度指示手段である。１８０７は優先
度の変更指示に基づいて優先度を調整或いは決定する優
先度調整決定手段である。このように、送信側において
も送信側達成率モニタ手段及び送信側優先度指示手段を
設けることにより、送信側にいるオペレータによって優
先度を調整することが可能になる。

【００８２】尚送信側或いは受信側の達成率モニタ手段
が表示する達成率の表示方法は例えば目標上限値に対す
る達成率をパーセンテージで表示したり、或いは棒グラ
フ等を用いて表示することが可能である。或いはこれら
パーセンテージや棒グラフによる割合表示ではなく実際
に実データを表示するようにしても構わない。例えば送
信側で３０ｆｐｓの映像が存在しており、そのうち１０
ｆｐｓ相当分を転送している状態において、送信側達成
率モニタ手段１８０５は送信装置の表示装置に対して１
０ｆｐｓの画像を実際に表示する。オペレータはこの１
０ｆｐｓの画像を実際に見ることができ、十分な情報で
ある場合には残りの２０ｆｐｓ分の未転送のデータに対
する優先度を低くする。逆に１０ｆｐｓの画像が十分で
ないと判断した場合には残りの２０ｆｐｓに相当するデ
ータに対する優先度を高くすることにより早急に満足の
いく映像が得られる。

【００８３】次に図３０を用いて優先度の変更を行う場
合の操作方式について説明する。図３０はシーン間にお
いて優先度を指定する場合の優先度指定画面を表示の一
例を示す図である。図において３０１は優先度を高くす
るシーンを登録するための優先パレット、３０２はシー
ンが記録表示されているシーンプール、３０３はシーン
プール３０２から優先パレット３０１へ登録するための
ポップアップメニューである。優先パレットには優先度
を高くするシーンを３つ登録することができる。一方、
プール３０２には受信した、或いは送信するシーンが表
示される。例えばシーン１１の優先度を高くした場合に
は、先ずマウス等によりシーン１１をクリックすること
によりシーン１１をハイライトさせる。シーン１１をク
リックする事によりポップアップメニュー３０３が表示
される。次にマウスでポップアップメニュー３０３の矢
印１を選択することにより、シーン１１は優先パレット
の第１番目のパレットに移動する。このようにしてシー
ン１１の優先度を上げることができる。もしフレームレ
ートや解像度をマニュアルにより指定したい場合には、
優先パレット３０１に備えられたフレームレート３０１
ａ、或いは解像度３０１ｂの各点をマウスで指定するこ
とにより所望のフレームレート、或いは所望の解像度を
指定することが可能である。また優先パレット３０１に
登録したシーンを再びプール３０２に戻す場合には、矢
印３０４を選択することにより対応するシーンがプール
３０２に退出することになる。

【００８４】尚図３０に示す例においては、選択及び退
出を矢印を指定することにより行ったが、他の方法を用
いても構わない。例えばプール１２を優先パレット２に
移動させる場合には、シーン１２上でマウスをクリック
し、そのままマウスを優先パレット２の領域までドラッ
グし、マウスボタンを放すことによりシーン１２を優先
パレット２に移動するようにしても構わない。

【００８５】次に図３１は優先度を指示する場合の他の
例を示す図である。図３１は達成率モニタ手段と優先度
指示手段が１つの画面に対して達成率を表示すると共
に、同様の表示から優先度の変更指示が行える例を示し
ている。この例では、０分〜５分までがシーン１、５分
〜１０分までがシーン２である場合を示しており、シー
ン１においては７ｆｐｓという目標上限値を設定してい
た場合に対して、その達成度合いが示されている。オペ
レータが５分経過後に７ｆｐｓという目標上限値が低い
と判断した場合には、５分〜１０分の間に設定された７
ｆｐｓという目標上限値をマウスで指定し、目標上限値
を９ｆｐｓの所にドラッグすることにより目標上限値の
指定をすることができる。このように目標上限値を高く
設定することで実際の達成度合いは低くなるが、目標上
限値を高くすることにより優先度が高くなり徐々に達成
の度合いが高くなる。

【００８６】尚、ビデオ情報を転送時に優先度を指示す
るための判断材料として詳細な静止画像を選択的に転送
するという方式も考えられる。例えばシーンの変化時に
そのシーンの第１フレームを静止画像として優先度指示
のための判断材料になるように詳細なデータとして送
り、それをモニタさせる。或いはシーンの変化時から一
定時間経過時のフレームの詳細な静止画像を優先度指示
の判断材料として転送しモニタさせることにより、その
シーンに対する優先度指示を行うことが可能である。

【００８７】次に、図１に示したデータ再構成手段１０
４の動作の一例について説明する。データ再構成手段１
０４は受信データが送られた来た場合にその受信データ
を用いて補完を行う。この補完は各メディアにおいて適
切なものを用いるものとする。データ再構成手段１０４
は補完を行って生成した補完データを用いてデータを利
用できる形式にするが、後に実データが送られたきた場
合には補完データをこの実データで置き換える。

【００８８】又、データ再構成手段１０４の他の動作例
として予め共通に用意出来るデータを送受信側に用意し
ておき、変化分を選択的に抽出しデータの再構成をこの
予め用意しておいた共通データと変化分に基づいて行う
ようにしても構わない。例えば右チャネルと左チャネル
を持つサウンドデータがある場合において、右チャネル
のサウンドデータは不変であるという場合において、送
信側と受信側において右チャネルのサウンドデータを予
め記憶手段に記憶させておく。送信側は左チャネルのデ
ータのみを受信側に転送する。受信側は予め記憶してお
いた右チャネルのサウンドデータに対して転送されてき
た左チャネルの音を付加することにより、データの再構
成を行うことができる。或いは予め共通なデータを用意
できない場合には送信側から受信側に転送されたデータ
を受信側に蓄積しておき、この蓄積したデータを共通デ
ータと見なすようにしても構わない。送信側は前に送っ
たデータと類似するデータを送信する場合には前に送っ
たデータとの差分のみを転送し、受信側は蓄積した共通
データと送られてくる差分データを用いてデータを再構
成することが可能である。

【００８９】実施例２．図３２はこの発明に係る協調処
理方式の一例を示す図である。送信装置４０において、
５００はデータの操作を行うデータ操作手段である。５
４０はデータ操作手段によりデータを出力するデータ出
力手段である。５４１はデータ出力手段５４０から出力
されるデータを表示する表示手段である。５４２はデー
タ出力手段５４０に対してデータを提供するデータ提供
手段である。５４３は送信側装置において受信装置５０
との間で同期をとるための同期制御手段である。５４４
は表示手段に対して複数の位置を指定することが可能な
ポイント指示手段である。

【００９０】又受信装置５０において、５２０は転送手
段１０３から転送されてくるデータの操作指示を受け取
り、送信装置と同様のデータを出力するデータ出力手段
である。５５２は送信装置４０のデータ提供手段５４２
と同様のデータを提供するデータ提供手段である。５５
１はデータ出力手段から出力されるデータを表示する表
示手段である。５５３は送信装置４０と受信装置５０と
の間で同期制御を行う同期制御手段である。５５５は送
信装置のポイント指示手段５４４から送られてくる指示
に基づき表示手段５５１に対して複数のマークを表示す
るマーク表示手段である。

【００９１】次に同期制御手段５４３及び同期制御手段
５５３の動作について説明する。この実施例における同
期制御手段５４３及び５５３は予め転送手段１０３が転
送に必要とする遅延時間を知っているものとする。及び
送信装置内部における伝送遅延及び送信装置の機械的な
動作遅延の時間も知っているものとする。さらに、受信
装置５０における伝送時間及びデータ出力手段の機械的
な動作遅延時間も予め知っているものとする。送信装置
４０側においてデータ操作手段５００がデータの操作を
開始するとデータ操作手段５００はデータの操作指示を
データ出力手段５２０に伝える。例えばデータ操作手段
がビデオテープに格納されたデータを表示手段に表示す
る場合を考えてみる。データ提供手段５４２及び５５５
には同一のビデオテープが備わっているものとする。先
ず送信装置４０においてデータ操作手段によりプレーの
ボタンが押された場合データ提供手段５４２にあるビデ
オテープが回転しはじめ、データ出力手段５４０はビデ
オテープからの映像を表示手段５４１に出力する。同時
にデータ操作手段５００は転送手段１０３を介して受信
装置のデータ出力手段に対してもデータ提供手段５５２
にあるビデオテープのプレーを開始するよう指示命令を
出す。データ出力手段５２０はデータ提供手段５５２に
あるビデオテープのプレーを開始する。この場合には受
信装置側では伝送遅延時間及び機械的な動作遅延時間が
間に入っていることにより遅れて画像の再生が行われる
ことになる。しかし、同期制御手段５５３は受信装置の
データ出力手段５２０によるビデオテープからの映像の
再生が送信装置における映像の再生と正確に同期するよ
うにデータ出力手段を操作する。例えば、同期制御手段
５５３はデータ出力手段５２０に対して遅延時間に相当
する分だけテープを早送りさせることにより送信装置に
おける画像の再生と受信装置における画像の再生を正確
に同期させる。

【００９２】前述した例においては同期制御手段５５３
が受信装置のデータ出力手段に対してテープを早送りさ
せる場合について説明したが、他の方法により同期を取
るようにしても構わない。例えば、データ操作手段５０
０がビデオテープからの画像の再生を停止する指示を出
した場合について考える。データ操作手段５００がデー
タ出力手段に対して１００フレーム目で画像の再生を停
止するという指示を出した場合、受信装置の出力手段５
２２も同様に１００フレーム目で画像の再生を停止する
旨の指示が転送される。しかし、実際にこの１００フレ
ーム目で画像の再生を停止する旨の指示が受信装置のデ
ータ出力手段５２０に到着するときには、すでに１００
フレーム目の画像を再生し終わっており１００フレーム
目以降の画像フレームの再生をしてしまっている。この
場合には同期制御手段５５３はデータ手段に対してビデ
オテープの巻き戻しを命令し、１００フレーム目が来た
時に画像の再生を停止させるように制御する。次に送信
装置の同期制御手段５４３が同期制御を行う場合につい
て説明する。前述したようにデータ操作手段５００がデ
ータの再生を開始する指示を出した場合には受信装置の
データ出力手段は遅延時間分だけ遅れてそのデータの再
生を開始する。即ち、同期制御手段５４３はデータ出力
手段５４０のプレー開始を遅延時間分だけ遅らせる。デ
ータ出力手段５４０が遅延時間分だけ画像の再生を停止
するため受信装置５０のデータ出力手段５２０が実際に
画像の再生を開始するのと同期して、送信装置４０にお
いて画像の再生を開始する。

【００９３】前述した例においては同期制御手段５４３
及び５５３が伝送遅延時間及び動作遅延時間を予め知っ
ている場合について説明したが、機器構成が代わる場合
或いはシステム構成が代わる場合にはこれらの遅延時間
も変化する場合が考えられる。このような場合には同期
制御手段５４３及び５５３は伝送遅延時間を実測し、実
測した伝送遅延時間を用いて同期制御を行うようにして
もよい。例えば同期制御手段はテストコマンドを定期的
に相手装置に送ることにより、実際に相手装置との間で
生じている遅延時間を測定する。

【００９４】次に図３２に示した構成において、一方の
装置に対して主導権を持たせるような方式が考えられ
る。例えば送信装置４０に対して主導権を持たせた場合
データのプレー、及び早送り、早戻し、ストップ全て送
信装置に持たせて行うようにしても構わない。或いは受
信装置５２は現在プレー中のデータをストップすること
しか出来ないようにしても構わない。次に、送信装置及
び受信装置の両方においてデータの編集及び加工をでき
るような方式にしても構わない。即ち単にデータを表示
するばかりでなく、互いにそのデータを協調しあいなが
ら編集したり加工したりするようにしても構わない。

【００９５】又、送信装置及び受信装置で扱うデータの
種類は必ずしも同じものである必要は無い。例えばデー
タ提供手段５４２はアナログビデオデータを提供し、デ
ータ提供手段５５２はデジタルビデオデータを提供する
ような場合でも構わない。同期制御手段５４３と同期制
御手段５５３はアナログビデオデータとデジタルビデオ
データの対応関係をとり、互いに同一内容のデータが表
示できるように制御する。

【００９６】又、次にデータ操作手段５００にリセット
機能を持たせるようにしても構わない。このリセット機
能は送信装置と受信装置の同期をとるためのリセット機
能である。回線の故障或いは装置の故障等により送信装
置と受信装置の同期が取れなくなる場合が発生する。こ
のような場合にはデータ操作手段５００が同期リセット
機能を働かせることにより両者の同期を取り戻す。例え
ばデータ操作手段は第１００番目のフレームで停止する
ようなリセットを行い、その指示を受信装置に対して転
送することができる。受信装置は第１００番目のフレー
ムで停止するように自己の装置を調整する。

【００９７】次に図３２に示したポイント指示手段５４
４及びマーク指示手段５５５の動作について図３３を用
いて説明する。図３３において３３１は現在のカーソ
ル、３３１ａ、３３１ｂ、３３１ｃは残留表示されたカ
ーソルである。ポイント指示手段５４４はカーソルが任
意の位置にある場合にその位置にカーソルを残留表示す
ることを指示することができる。カーソルを残留表示す
る旨の指示は転送手段により受信装置に転送されマーク
表示手段５５５はカーソルがある位置にカーソルを残留
表示させる。このようにして、カーソル３３１ａ及び３
３１ｂ及び３３１ｃが残留表示される。複数のカーソル
が表示されることにより送信側と受信側においては共通
の位置を其のカーソルを用いて指定することができる。
例えば、残留表示された順番にＡ，Ｂ，Ｃという記号を
付けてカーソルを残留表示させている場合に、カーソル
Ａ，カーソルＢ，カーソルＣとを用いることにより、そ
のカーソルが指し示しているものを指定することができ
る。現在のカーソル３３１を改めて指し示したい場所に
移動することなく、単に残留表示されているカーソルを
用いて目的のものを指定することが出来る。

【００９８】又、この応用例として残留表示されたカー
ソルにコメントを付したり、或いはハイパーリンクを設
定しても構わない。例えばカーソルＡをクリックするこ
とによりカーソルＡに付したコメントがポップアップメ
ニューにより表示される。或いはハイパーリンク情報が
表示される。またこのように複数表示されたカーソルは
一定時間経過後に自動消去するようにしても構わない。

【００９９】実施例３．上記実施例１においては、階層
的に分離出来るデータを優先度に基づいて抽出して転送
する場合を説明し、実施例２においてはデータを共有
し、互いに同期制御を行う場合について説明したが、こ
の実施例１と実施例２を組み合わせて用いることも可能
である。

【０１００】即ち送信装置４０は実施例１のようにデー
タ抽出手段１０２が抽出したデータを受信装置に転送す
る。受信装置５０は転送されたデータを再構成すること
によりデータの利用を即座に可能にする。そして送信装
置はデータ操作手段５００を用いて現在転送中のデータ
に対するデータ操作を開始する。送信側のデータ提供手
段５４２には予め全てのデータが蓄積されている場合、
或いはテレビカメラ等から順次データが送られてくる場
合等が考えられるが、いずれの場合にしても完全なデー
タをデータ出力手段５４０を用いて表示手段５４１に出
力することができる。それに対して受信装置５０にある
データ提供手段５５２はデータ再構成手段１０４により
再構成されたデータしか存在していない。しかし、実施
例１で述べたようにデータ再構成手段１０４により再構
成されたデータは即座に利用することが可能である。従
って、データ操作手段５００からのデータ再生指示が送
られてきた場合にデータ出力手段５２０はデータ再構成
手段１０４により再構成されたデータを用いて協調処理
を行うことが可能である。

【０１０１】その際、同期制御手段５４３及び５５３は
互いに対応する部分が表示されるように制御する。例え
ば、送信装置４０においてはフレーム番号Ｆ０〜Ｆ１０
まで順番に表示する場合、受信装置のデータ提供手段５
５２においてはまだフレームＦ０とＦ５しか利用できな
い場合が存在するが、その場合にはデータ出力手段５４
０がフレームＦ０〜Ｆ４を表示している間にはデータ出
力手段５２０はフレームＦ０を表示する。またデータ出
力手段５４０がフレームＦ５〜Ｆ１０を表示している場
合にはフレーム出力手段５２０はＦ５を出力する。この
ような同期の対応は同期制御手段５４３及び５５３が行
う。

【０１０２】尚、このように実施例１と実施例２を組み
合わせる場合でも回線の使用効率の面からみてさほど問
題は生じない。なぜならば実施例１で説明した通り優先
度の指定が終わってから実施例２の協調動作を開始する
ものとすると、実施例２に示した協調動作の場合はデー
タ転送量が少ないので回線には空き容量が生ずる。この
空き容量を用いて実施例１に示したデータの転送を行う
ことが可能である。

【０１０３】又このように実施例１と実施例２を組み合
わせることにより優先度の変更を自動的に行うことが出
来る。例えば実施例２に示した協調動作を行っている場
合、その協調動作のために表示されているシーン、或い
はその協調動作が行われている部分に対するデータは特
に優先的に転送すべきであると考えられるために、優先
度設定手段１０１は現在協調動作により閲覧されている
データの優先度を高くする。また実施例１と実施例２を
組み合わせることにより受信装置５０側からの指定によ
り送信データ記憶手段に記憶されているデータを早送り
しながら（ブラウズしながら）受信装置５０側において
優先度の指定を行うことが可能になる。

【０１０４】実施例４．上記実施例１から３においては
通信方向が片方向である場合について説明したが、これ
を対称な構成として双方向とするようにしても構わな
い。

【０１０５】実施例５．上記実施例においては通信回線
を１つだけ用いる場合について説明したが、それ以外に
音声通信のための通信回線を設けてオペレータが互いに
電話等により会話をしながら協調動作を円滑に進めるよ
うにしても構わない。

【０１０６】実施例６．また上記実施例２においては協
調動作を行う場合に、送信装置および受信装置にはオペ
レータがそれぞれ存在している場合を前提にして説明し
たが、受信装置側にオペレータが不在の場合には送信装
置から送られてくる操作記録を蓄積しておくようにして
も構わない。このように操作記録を蓄積しておくことに
より、受信装置ではオペレータが後からその蓄積した操
作記録を再生することができる。

【０１０７】実施例７．また上記実施例において転送手
段１０３が１対１の転送を行う場合について説明した
が、１対ｎ、ｎ対１またはｎ対ｎの転送を行うような場
合でも構わない。また転送手段が１対ｎ、ｎ対１、ｎ対
ｎの転送を行う場合には接続した相手により要求が異な
る場合が存在する。例えば受信装置Ａは１０ｆｐｓの品
質を要求し、受信装置Ｂは５ｆｐｓの品質を要求するよ
うな場合がある。この場合には転送手段１０３がそれぞ
れの要求に応じた変換を行って、転送するようにしても
構わない。或いは、接続した受信装置の機器の制限によ
り同一データを転送出来ない場合も存在する。例えば受
信装置Ａが１０２４×１０２４の解像度で表示すること
が出来、受信装置が２５６×２５６の解像度でしかデー
タを表示出来ない場合にはそれぞれの解像度に変換して
データを転送する。

【０１０８】実施例８．上記実施例１においては転送手
段１０３が存在し、送信装置４０と受信装置５０は遠隔
地にある場合を前提にして説明したが、転送手段１０３
は必ずしも回線を用いてデータを転送する場合に限ら
ず、例えばバスを用いてデータを転送する場合でも構わ
ない。従って送信装置と受信装置は同一場所に存在する
ような場合であっても構わない。

【０１０９】

【発明の効果】以上のようにこの発明によれば階層的に
分離することが可能なデータを転送する場合に、優先度
の高いデータから先に転送して、すべてのデータ転送が
終わる前にそのデータを利用できるようにしたので、デ
ータの転送開始直後から送信側と受信側の両方において
データの利用を開始することが可能になる。

【０１１０】又、この発明によれば同期制御手段が伝送
遅延時間を考慮して同期制御を行うので正確な協調動作
を行うことが可能になる。

【図面の簡単な説明】

【図１】この発明に係る協調処理方式の構成を示す図で
ある。

【図２】この発明のビデオデータのフレームを示す図で
ある。

【図３】この発明のビデオデータの転送順序を示す図で
ある。

【図４】この発明のビデオデータの転送順序を示す図で
ある。

【図５】この発明のビデオデータの転送順序を示す図で
ある。

【図６】この発明のビデオデータの転送順序を示す図で
ある。

【図７】この発明のフレームデータの他の例を示す図で
ある。

【図８】この発明のフレームデータの他の例を示す図で
ある。

【図９】この発明の注目領域の例を示す図である。

【図１０】この発明の注目対象の例を示す図である。

【図１１】この発明の注目対象の例を示す図である。

【図１２】この発明の注目領域を補完する例を示す図で
ある。

【図１３】この発明の注目領域の一例を示す図である。

【図１４】この発明の階層データの一例を示す図であ
る。

【図１５】この発明の色彩情報の一例を示す図である。

【図１６】この発明の色彩情報の一例を示す図である。

【図１７】この発明の色彩情報の一例を示す図である。

【図１８】この発明の走査線情報を示す図である。

【図１９】この発明の音声データの一例を示す図であ
る。

【図２０】この発明のデータ抽出手段の一例を示す図で
ある。

【図２１】この発明のデータ抽出手段の一例を示す図で
ある。

【図２２】この発明のデータ抽出手段の一例を示す図で
ある。

【図２３】この発明の利用手段の一例を示す図である。

【図２４】この発明の利用手段の一例を示す図である。

【図２５】この発明の利用手段の一例を示す図である。

【図２６】この発明の優先度を変更する場合の一例を示
す図である。

【図２７】この発明の優先度を変更する場合の一例を示
す図である。

【図２８】この発明の受信装置からのフィードバックの
例を示す図である。

【図２９】この発明の優先度決定手段の一例を示す図で
ある。

【図３０】この発明の優先度変更の操作方式を示す図で
ある。

【図３１】この発明の優先度変更の操作方式を示す図で
ある。

【図３２】この発明に係る協調処理方式の他の実施例を
示す構成図である。

【図３３】この発明のポイント指示手段とマーク表示手
段を説明するための図である。

【図３４】従来のファイル転送を用いた一括転送方式を
示す図である。

【図３５】従来のテレビ電話会議端末の構成を示す図で
ある。

【図３６】従来のＪＰＥＧの符号化方式を示す図であ
る。

【図３７】従来の遠隔協調動作方式の一例を示す図であ
る。

【図３８】従来の情報蓄積通信装置を示す図である。

【図３９】従来の情報伝送方式を示す図である。

【符号の説明】

４０ 送信装置 ５０ 受信装置 １０１ 優先度設定手段 １０２ データ抽出手段 １０３ 転送手段 １０４ データ再構成手段 １０５ 送信データ記憶手段 １０５ａ 送信データバッファ １０６ 受信データ記憶手段 １０７ データ出力手段 ２０１ データ入力手段 ３００ データ提供手段 ３０１ データ抑制手段 ４００ データ利用手段 ５００ データ操作手段 ６００ 負荷監視手段

───────────────────────────────────────────────────── フロントページの続き (72)発明者 中野 初美 鎌倉市大船五丁目１番１号 三菱電機株式 会社情報電子研究所内 (72)発明者 神田 準史郎 鎌倉市大船五丁目１番１号 三菱電機株式 会社情報電子研究所内 Ｆターム(参考） 5C064 AA02 AC01 AC04 AC08 AC11 AD00 AD14 5K034 DD01 HH01 HH02 HH16 HH18 HH63 MM21

Claims (4)

【特許請求の範囲】
1. 【請求項１】 送信装置と受信装置の間で協調動作を行
   なう協調処理方式において、以下の要素を有する協調処
   理方式 （ａ）送信装置と受信装置の各々に設けられ、互いに対
   応するデータを提供するデータ提供手段、（ｂ）上記送
   信装置のデータ提供手段により提供されるデータの操作
   開始に基づいて、上記受信装置のデータ提供手段により
   提供されるデータの操作開始を指示するデータ操作指示
   手段、（ｃ）上記送信装置のデータ提供手段により提供
   されるデータの操作開始から上記受信装置のデータ提供
   手段により提供されるデータの操作開始までの遅延時間
   分だけ、データの操作を調整して送信装置と受信装置の
   データの操作同期をとる同期制御手段。
2. 【請求項２】 送信装置と受信装置の間で協調動作を行
   なう協調処理方式において、上記送信装置は、（ａ）上
   記送信装置のデータ提供手段により提供されるデータの
   優先度を設定する優先度設定手段、（ｂ）上記優先度設
   定手段により設定された優先度に基づいて、上記データ
   提供手段により提供されるデータから転送するデータを
   選択的に抽出するデータ抽出手段、（ｃ）上記データ抽
   出手段により抽出したデータを転送する転送手段を有
   し、上記受信装置は、（ａ）上記転送手段により転送さ
   れたデータを受信するとともに、上記転送手段によるデ
   ータの転送中にそれまでに受信したデータを利用可能な
   形式のデータに再構成して上記受信側のデータ提供手段
   に記憶させるデータ再構成手段、（ｂ）上記転送手段に
   よるデータの転送中に、上記データ操作指示手段からの
   指示に基づき、上記受信側のデータ提供手段から提供さ
   れるデータの操作を開始するデータ使用手段を有してい
   ることを特徴とする請求項１記載の協調処理方式。
3. 【請求項３】 上記優先度設定手段は、上記送信装置が
   操作中のデータの優先度を高くするとともに、上記デー
   タ抽出手段は、上記送信装置が操作中のデータを優先的
   に抽出することを特徴とする請求項２記載の協調処理方
   式。
4. 【請求項４】 送信装置と受信装置の間で協調動作を行
   なう協調処理方式において、協調処理に用いるデータを
   画面に表示するとともに、上記画面の位置を指定するカ
   ーソルを表示する表示手段と、上記カーソルを用いて画
   面上に複数の位置を指定するポイント指定手段と、上記
   指定された位置にマークを表示するマーク表示手段を備
   えたことを特徴とする協調処理方式。