JP3169767B2 - 蓄積画像データ再生制御方法およびこれを用いたマルチメディア情報蓄積交換システム - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ＩＴＵ−Ｔ勧告に準拠
したテレビ電話装置等からの動画像、音声、データから
なるマルチメディア多重化データをセンタに入力・蓄積
し、その後、出力・再生するセンタ・ツウ・エンドの通
信形態を用いたマルチメディア情報蓄積交換システムと
それに用いられる蓄積画像データ再生制御方法に関する
ものである。

【０００２】

【従来の技術】図１１（ａ）はテレビ電話装置等の通信
端末からの動画像、音声、データからなるマルチメディ
ア多重化データをセンタに入力・蓄積し、その後、出力
・再生するセンタ・ツウ・エンドの通信形態を用いたマ
ルチメディア情報蓄積交換システムの構成を示したもの
である。通信端末１１７と、センタ１１０は通信網１２
０を介して接続されている。センタ１１０は図１１
（ｂ）に示す多重化データ受信部１１５、図１１（ｃ）
に示す多重化データ送信部１１６と通信端末１１７から
入力されるマルチメディア情報を蓄積する記憶装置１１
９と、蓄積されたマルチメディア情報を取り出す制御等
のシステム全体の制御を行うシステム制御部１１８から
構成される。

【０００３】図１１（ｂ），（ｃ）は図１１（ａ）で示
したシステムにおける多重化データ受信部と多重化デー
タ送信部の従来の構成を示したものである。図１１
（ｂ）において、１１１は回線多重化データから蓄積多
重化データを抽出する蓄積データ抽出部、１１２はその
蓄積多重化データから蓄積パケットデータを生成する蓄
積パケット生成部、１１５はそれらで構成される多重化
データ受信部である。図１１（ｃ）において、１１３は
再生パケットデータを再生多重化データに分解する再生
パケット分解部、１１４はその再生多重化データから回
線多重化データを生成する回線多重化データ生成部、１
１６はこれらで構成される多重化データ送信部である。

【０００４】図１２（ａ）はテレビ電話等で用いられて
いるデータの多重化形式を示す図であり、国際標準（Ｉ
ＴＵ−Ｔ勧告Ｈ．２２１）として採用されているもので
ある。図１２（ａ）は２Ｂチャネル通信の場合の１フレ
ームの信号の配置例である。１２１は音声データに割り
当てられる第１Ｂチャネルの領域であり、オーディオデ
ータは発生順にＡ１，Ａ２，…Ａ５６０に配置される。
１２２は画像データに割り当てられる第１、第２Ｂチャ
ネルの領域であり、ビデオデータは発生順にＶ１，Ｖ
２，…Ｖ６８８に配置される。１２３はフレーム同期信
号（ＦＡＳ）であり、Ｂチャネル毎の第８サブチャネル
の第１〜第８オクテットのビットが該当し、フレーム化
情報、マルチフレーム化情報として用いる。１２４はビ
ットレート割当信号（ＢＡＳ）であり、Ｂチャネル毎の
第８サブチャネルの第９〜第１６オクテットのビットが
該当し、ビット割当信号により、単一のチャネルまたは
複数の同期したチャネルを様々に構造化する端末能力を
示し、また受信側にそのような構造化した信号を分離
し、使用する指示をする符号を送信できる（詳細につい
ては、上記Ｈ．２２１勧告を参照）。図１２（ｂ）はＢ
チャネル毎に回線に送信されるフレーム内データの送信
順序を示したものであり、矢示１２５で示すように第１
オクテットの第１ビットから第８ビットまで送信される
と第２オクテットの第１ビットから第８ビットまで送信
されるという順序で第８０オクテットまで送信される。
この送信データは、図１１（ｂ）に示す回線多重化デー
タに該当する。

【０００５】図１３は従来の蓄積時のパケットフォーマ
ットを示す図であり、１３１は伝送レートや多重化レー
ト、符号化方式等の蓄積データを管理するヘッダ情報、
１３２はパケットで構成されるサブマルチフレームの
数、１３３はサブマルチフレームデータであり、図１２
（ａ）に示すフレームフォーマットで多重化された多重
化データの２フレーム分で構成されている（１フレーム
が１０ｍｓ分のデータであるから、２０ｍｓ分のデータ
をパケット化の単位としている）。

【０００６】マルチメディア情報蓄積交換システムの動
作概要及び該システムで用いられている従来の蓄積、再
生動作を図１１、図１２、図１３を用いて説明する。

【０００７】まず、蓄積時には、通信端末１１７から通
信網１２０を経由して送出される回線多重化データは多
重化データ受信部１１５内の蓄積データ抽出部１１１で
受信される。蓄積データ抽出部１１１は蓄積する多重化
データの抽出を行い、蓄積パケット生成部１１２に蓄積
多重化データを出力する。蓄積パケット生成部１１２で
は、システム制御部１１８の指示に従い、通信時のデー
タの多重化レート、符号化方式などの蓄積データを管理
するヘッダ情報を付加して、図１３に示すフォーマット
に従って蓄積パケットを生成し、記憶装置１１９に出力
する。

【０００８】次に、再生時には、記憶装置１１９から出
力される再生パケットデータは再生パケット分解部１１
３で受信される。再生パケット分解部１１３はパケット
のヘッダ情報の内容をシステム制御部１１８に通知す
る。システム制御部１１８は回線多重化データ生成部１
１４に対し、図１２のＢＡＳ１２４を使用して、蓄積時
の通信端末の動作モードと再生時の通信端末の動作モー
ドの整合を行わせる。それが完了すると、再生パケット
分解部１１３でパケットの分解を行い、再生する多重化
データを回線多重化データ生成部１１４に出力する。回
線多重化データ生成部１１４では、図１２に示すＦＡＳ
１２３、ＢＡＳ１２４の書き換えを行って回線多重化デ
ータを生成し、通信網１２０に送出し、通信端末１１７
で再生させる。

【０００９】

【発明が解決しようとする課題】上記した従来の蓄積画
像データ再生制御方法では、図１２（ａ）に示すデータ
の多重化形式で蓄積を行っているため、蓄積した画像を
通信端末１１７で再生する場合、通常ＦＥＣ（Ｆｏｒｗ
ａｒｄ Ｅｒｒｏｒ Ｃｏｒｒｅｃｔｉｏｎ）フレーム
同期が確立してから画像を表示するようになっている。
再生途中で中断（任意の時点で再生データを止める）指
示を行うと、中断を指示した時点でビデオオフを図１２
（ａ）のＢＡＳ１２４を用いて通信端末１１７に送信す
るので、ＦＥＣ（Ｆｏｒｗａｒｄ Ｅｒｒｏｒ Ｃｏｒ
ｒｅｃｔｉｏｎ）フレーム同期が外れる。再生の中断再
開の指示があると、ＦＥＣフレーム同期の再引き込みを
行い、同期が確立してから画像を表示するようになって
いる。このため、再生中断状態から再開状態に移行した
場合、画像データが欠落したり、再開時の画像が乱れた
りするといった問題が発生する。

【００１０】また、記憶装置１１９から多重化データ送
信部１１６に再生パケットデータを出力する際に記憶装
置１１９の一時的な転送処理能力の低下が発生した場合
には、多重化データ送信部１１６と通信端末１１７との
間で転送すべき画像データが途切れる場合も発生する。
この場合にも、前述のＦＥＣフレーム同期が外れ、ＦＥ
Ｃフレームの再同期が確立するまでに送信される再生パ
ケットデータが欠落したり、あるいはＦＥＣフレーム同
期確立後に表示される画像が乱れたりするという問題が
発生する。

【００１１】本発明は、上記の問題点に鑑みてなされた
もので、センタがマルチメディア情報を蓄積し通信端末
でその再生を行う場合において、再生中断、中断再開時
もしくはセンタにおけるデータ転送処理能力の一時的な
低下による画像データの欠落時にも、画像の乱れや表示
再生の応答遅延の劣化を防止できる蓄積画像データ再生
制御方法およびマルチメディア情報蓄積交換システムを
提供することを目的とする。

【００１２】

【課題を解決するための手段】上記の目的を達成するた
め、請求項１の発明では、入力された画像、音声等のマ
ルチメディアデータを多重化して送受信する通信端末
と、前記通信端末と通信網を介して接続され前記マルチ
メディアデータを蓄積する記憶手段を有するセンタとか
らなるマルチメディア情報蓄積交換システムにおいて、
前記通信端末から通信網を介して受信した前記マルチメ
ディアデータのうちの画像データについては、前記セン
タへの蓄積時に、ビデオフレームを抽出して予めビデオ
フレーム単位に区分けして前記記憶手段に蓄積してお
き、通常時は、蓄積した前記画像データを読み出し、ビ
デオフレーム単位を検出し、マルチメディアデータとし
て多重化して前記通信端末に送出し、前記通信端末への
送出中に前記通信端末からの再生停止要求あるいは前記
記憶手段からの転送途切れを含む要因による中断が発生
した時は、中断発生時点以降の前記画像データのビデオ
フレーム単位の送出を中断し、そのかわりに、フィルビ
ットを強制的に挿入したビデオフレーム単位を生成し、
マルチメディアデータとして多重化して前記通信端末に
送出し、前記通信端末からの再開指示要求あるいは前記
記憶手段からの転送途切れの回復を含む要因による中断
解除時は、中断していた前記画像データのビデオフレー
ム単位からマルチメディアデータとして多重化して前記
通信端末への送出を再開することを特徴とする蓄積画像
データ再生制御方法を手段とする。

【００１３】また、請求項２の発明では、入力された画
像、音声等のマルチメディアデータを多重化して送受信
する通信端末と、前記通信端末と通信網を介して接続さ
れ前記マルチメディアデータを蓄積する記憶手段を有す
るセンタとからなるマルチメディア情報蓄積交換システ
ムにおいて、前記センタへの蓄積時には、前記マルチメ
ディアデータを前記記憶手段に蓄積しておき、通常時
は、蓄積した前記マルチメディアデータを読み出し、前
記マルチメディアデータのうちの画像データについて
は、ビデオフレームを抽出してビデオフレーム単位に区
分けをし、マルチメディアデータとして多重化して前記
通信端末に送出し、前記通信端末への送出中に前記通信
端末から再生停止要求あるいは前記記憶手段からの転送
途切れを含む要因よる中断が発生した時は、中断発生時
点以降の前記画像データのビデオフレーム単位の送出を
中断し、そのかわりに、フィルビットを強制的に挿入し
たビデオフレーム単位を生成し、マルチメディアデータ
として多重化して前記通信端末に送出し、前記通信端末
からの再開指示要求あるいは前記記憶手段からの転送途
切れの回復を含む要因による中断解除時は、中断してい
た前記画像データのビデオフレーム単位からマルチメデ
ィアデータとして多重化して前記通信端末への送出を再
開することを特徴とする蓄積画像データ再生制御方法を
手段とする。

【００１４】また、請求項３の発明では、上記の蓄積画
像データ再生制御方法において、前記記憶手段に蓄積さ
れた前記マルチメディアデータのうちの音声データにつ
いては、前記通信端末への送出中に前記通信端末からの
再生停止要求あるいは前記記憶手段からの転送途切れを
含む要因による中断が発生した時は、中断発生時点以降
の前記音声データの送出を中断し、そのかわりに、無音
データを強制的に挿入した音声データを生成し、マルチ
メディアデータとして多重化して前記通信端末に送出
し、前記通信端末からの再開指示要求あるいは前記記憶
手段からの転送途切れの回復を含む要因による中断解除
時は、中断していた前記画像データのビデオフレーム単
位からマルチメディアデータとして多重化して前記通信
端末への送出を再開することを特徴とする蓄積画像デー
タ再生制御方法を手段とする。

【００１５】また、請求項４の発明では、入力された画
像、音声等のマルチメディアデータを多重化して送受信
する通信端末と、前記通信端末と通信網を介して接続さ
れ前記マルチメディアデータを蓄積する記憶手段を有す
るセンタとからなるマルチメディア情報蓄積交換システ
ムにおいて、前記センタが、前記通信端末から通信網を
介して受信した多重化された前記マルチメディアデータ
から各種メディアデータを分離する回線データ分離手
段、前記回線データ分離手段から出力される画像データ
の誤り訂正を行う誤り訂正手段、前記誤り訂正手段から
出力される画像データからのビデオフレームの抽出を行
うビデオフレーム抽出手段、前記ビデオフレーム抽出手
段から出力される画像データと前記回線データ分離手段
から出力される音声データを含むデータから蓄積パケッ
トを生成する第１の蓄積パケット生成手段を有して構成
される多重化データ受信手段と、前記第１の蓄積パケッ
ト生成手段からの出力データを蓄積し画像データに対し
てはビデオフレーム単位で蓄積する前記記憶手段と、前
記記憶手段から出力された前記蓄積パケットから各種メ
ディアデータに分離する再生パケット分離手段、前記再
生パケット分離手段から出力される画像データに対して
ビデオフレーム単位を検出するビデオフレーム検出手
段、前記ビデオフレーム検出手段から出力される画像デ
ータに対してフィルビットの挿入を行うフィルビット挿
入手段、前記通信端末からの再生停止・再開指示あるい
は前記記憶手段から出力される蓄積パケットの転送途切
れあるいはその回復を含む中断・中断再開要因を監視し
前記フィルビット挿入手段の制御と前記ビデオフレーム
検出手段の制御を行うデータ監視手段、前記フィルビッ
ト挿入手段からの画像データから誤り訂正フレームを生
成する誤り訂正フレーム生成手段、前記誤り訂正フレー
ム生成手段から出力される画像データと前記再生パケッ
ト分解手段から出力される音声データとを含むデータの
多重化を行う回線データ多重化手段を有して構成される
多重化データ送信手段と、を具備することを特徴とする
マルチメディア情報蓄積交換システムを手段とする。

【００１６】また、請求項５の発明では、入力された画
像、音声等のマルチメディアデータを多重化して送受信
する通信端末と、前記通信端末と通信網を介して接続さ
れ前記マルチメディアデータを蓄積する記憶手段を有す
るセンタとからなるマルチメディア情報蓄積交換システ
ムにおいて、前記センタが、前記通信端末から通信網を
介して受信した多重化された前記マルチメディアデータ
から蓄積データを抽出するマルチメディア多重化データ
抽出手段、前記マルチメディア多重化データ抽出手段か
ら出力されるマルチメディアデータを蓄積パケットに生
成する第２の蓄積パケット生成手段を有して構成される
多重化データ受信手段と、前記第２の蓄積パケット生成
手段からの出力データをそのままの形式で蓄積する前記
記憶手段と、前記記憶手段から出力された前記蓄積パケ
ットから各種メディアデータに分離を行うマルチメディ
ア多重化データ分離手段、前記マルチメディア多重化デ
ータ分離手段から出力される画像データに対して誤り訂
正を行う訂正手段、前記誤り訂正を行う誤り訂正手段か
ら出力される画像データからビデオフレームの抽出を行
うビデオフレーム抽出手段、前記ビデオフレーム抽出手
段から出力される画像データに対してフィルビットの挿
入を行うフィルビット挿入手段、前記通信端末からの再
生停止・再開指示あるいは前記記憶手段から出力される
蓄積パケットの転送途切れあるいはその回復を含む中断
・中断再開要因を監視し前記フィルビット挿入手段の制
御と前記ビデオフレーム抽出手段の制御を行うデータ監
視手段、前記フィルビット挿入手段からの画像データか
ら誤り訂正フレームを生成する誤り訂正フレーム生成手
段、前記誤り訂正フレーム生成手段から出力される画像
データと前記マルチメディア多重化データ分離手段から
出力される音声データを含むデータの多重化を行う回線
データ多重化手段を有して構成される多重化データ送信
手段と、を具備することを特徴とするマルチメディア情
報蓄積交換システムを手段とする。

【００１７】さらに、請求項６の発明では、上記のマル
チメディア情報蓄積交換システムにおいて、前記多重化
データ送信手段が、前記再生パケット分解手段あるいは
前記マルチメディア多重化データ分解手段から出力され
る音声データに対して前記通信端末からの再生停止・再
開指示あるいは前記記憶手段から出力される蓄積パケッ
トの転送途切れあるいはその回復を含む中断・中断再開
要因の監視を行う前記データ監視手段の指示で無音デー
タの挿入を行う無音データ挿入手段と、前記無音データ
挿入手段からの音声データと前記誤り訂正フレーム生成
手段から出力される画像データを含むデータの多重化を
行う回線データ多重化手段とを有してなることを特徴と
するマルチメディア情報蓄積交換システムを手段とす
る。

【００１８】

【作用】本発明の蓄積画像データ再生制御方法およびマ
ルチメディア情報蓄積交換システムでは、マルチメディ
ア多重化データの画像データの蓄積形態がビデオフレー
ム単位であるか否かによらず、多重化データ送信手段で
ビデオフレーム単位の検出もしくはビデオフレームの抽
出を行って、ビデオフレーム単位に区切って転送制御を
行い、かつ、転送すべきデータが無い時にはフィルビッ
ト挿入を行って通信端末に送信することにより、再生時
の再生中断（いわゆるポーズ）、中断再開といった操作
を行った場合にも、通信端末での同期外れを無くして、
画像の乱れや、表示再生の応答遅延の劣化を防止する。
また、記憶手段と多重化データ送信手段との間のデータ
転送能力が一時的に低下した場合に発生する通信端末に
転送すべき画像データの欠落にも、データ監視手段によ
る監視制御でフィルビット挿入を行うことにより、同様
にして、通信端末で画像が静止したような表示を行わ
せ、画像の乱れや、表示再生の応答遅延の劣化を防止す
る。更には、上記事由のため、画像データの送出を行わ
ない時には、音声データには無音データを挿入すること
により、画像データの送信再開時の音声と画像の同期を
保持させる。

【００１９】

【実施例】以下、本発明の実施例を図面により詳細に説
明する。

【００２０】図１は本発明によるマルチメディア情報蓄
積交換システムの構成図であり、１は通信端末、２はセ
ンタ、３は通信端末１をセンタ２に接続しているＩＳＤ
Ｎ等の通信網、４はカメラ、５はモニタ、６はハンドセ
ットである。また、通信端末１を構成するものとして、
７はシステム制御部、８は画像符号化／復号化部、９は
音声符号化／復号化部、１０は端末の多重化データ送受
信部である。さらに、センタ２を構成するものとして、
１１はセンタのシステム制御部、１２は多重化データ受
信部、１３は多重化データ送信部、１４は記憶装置であ
る。

【００２１】図１において、マルチメディア情報蓄積交
換システムの基本動作を説明する。

【００２２】通信端末１側のカメラ４からの画像データ
は画像符号化／復号化部８でフレーム間予測符号化され
る。符号化された画像データは、ハンドセット６から入
力され音声符号化／復号化部９で符号化された音声デー
タとシステム制御部７からの制御情報と共に多重化デー
タ送受信部１０で多重化され、通信網３を通じてセンタ
２に伝送される。センタ２では、通信端末１から送信さ
れてきたマルチメディア多重化データを多重化データ受
信部１２で受信し、蓄積パケットデータを生成して、記
憶装置１４に転送する。記憶装置１４では、適当なファ
イルとして蓄積を行う。

【００２３】蓄積されたデータは通信端末１を介したユ
ーザまたはセンタ２からの指示により記憶装置１４から
読み出され、センタ２内の多重化データ送信部１３に送
られる。多重化データ送信部１３では、システム制御部
１１の指示により、蓄積時にそのまま蓄積された制御情
報を新たな制御情報に書き換え、多重化して、通信網３
を通じて通信端末１に伝送する。通信端末１では、セン
タ２から送られてきた多重化データを多重化データ送受
信部１０で受信し、制御情報と音声データと画像データ
に分離し、制御情報はシステム制御部７へ、音声データ
は音声符号化／復号化部９へ、画像データは画像符号化
／復号化部８へ送られる。画像符号化／復号化部８で
は、システム制御部７からの指示に従って、画像の復号
再生が行われ、再生画像がモニタ５に表示される。音声
データは音声復号再生され、ハンドセット６から出力さ
れる。

【００２４】このようにして、通信端末１からの画像、
音声等からなる情報をセンタ２に登録したり、蓄積され
た情報を検索して読み出すことも出来る。尚、通信端末
１側の多重化データ送受信部１０とセンタ２側の多重化
データ受信部１２、多重化データ送信部１３の間の回線
による通信は常に行われており、多重化データ受信部１
２、多重化データ送信部１３と記憶装置１４との間のデ
ータ転送は蓄積時あるいは蓄積データの読み出し時のみ
行われる。また、制御情報は回線接続状態であれば、画
像データなどの有無によらずに送信可能である。

【００２５】図２は図１のセンタ２内の多重化データ受
信部１２の構成図であり、これを構成するものとして、
２１は回線データ分離部、２２はＦＥＣの誤り訂正部、
２３はビデオフレーム抽出部、２４は第１の蓄積パケッ
ト生成部である。

【００２６】図３は図１のセンタ２内の多重化データ送
信部１３の構成図であり、これを構成するものとして、
３１は再生パケット分解部、３２はビデオフレーム検出
部、３３はフィルビット挿入部、３４はデータ監視部、
３５はＦＥＣフレーム生成部、３６は回線データ多重化
部である。

【００２７】図４は図２の多重化データ受信部１２の画
像データを表した図であり、図４中（ａ）は図２の回線
データ分離部２１からＦＥＣの誤り訂正部２２への信号
ａに相当し、ＦＥＣ同期信号と誤り訂正を行うためのパ
リティ、符号化データ量の調整を行うためのフィルビッ
ト、及び画像情報ビットで構成されている画像データで
ある。図４中（ｂ）は図２中のＦＥＣの誤り訂正部２２
からビデオフレーム抽出部２３への信号ｂに相当し、Ｆ
ＥＣの誤り訂正が施され、フィルビット等の不要情報が
取り除かれたものである。図４中（ｃ）は図２中のビデ
オフレーム抽出部２３から第１の蓄積パケット生成部２
４への信号ｃに相当し、フレーム開始符号（ＰＳＣ）毎
に抽出されたビデオフレームである。

【００２８】図５は蓄積を行うときのパケット構成図で
ある。５１は蓄積時の多重化レート、符号化方式及び符
号化能力等の情報が明記されたヘッダ情報、５２は画像
データ長、５３は音声データ長、５４は画像のビデオフ
レーム数（Ｎ）、５５は画像のビデオフレームデータ長
とビデオフレームデータの組、５６は音声データであ
る。ビデオフレームデータ長とビデオフレームデータの
組は、フレーム単位でフレーム１からフレームＮまであ
る。

【００２９】図６は図３の多重化データ送信部１３の画
像データを表した図であり、図６中（ａ）は図３中のビ
デオフレーム検出部３２からフィルビット挿入部３３へ
の信号ｄに相当し、フレーム開始符号（ＰＳＣ）毎に抽
出されたビデオフレームである。図６中（ｂ）は図３中
のフィルビット挿入部３３からＦＥＣフレーム生成部３
５への信号ｅに相当し、フィルビットが挿入されたもの
である。図６中（ｃ）は図３中のＦＥＣフレーム生成部
３５から回線データ多重化部３６への信号ｆに相当し、
ＦＥＣの同期信号と伝送誤り訂正のためのパリティビッ
トが付加されたＦＥＣフレームである。

【００３０】次に、以上の各図を参照して、本発明の第
１の実施例の動作について詳しく説明する。

【００３１】蓄積時には、図２中の回線データ分離部２
１で通信網３から受信したマルチメディア多重化データ
を画像、音声等に分離を行い、画像データはＦＥＣの誤
り訂正部２２、音声データは第１の蓄積パケット生成部
２４に出力する。ＦＥＣの誤り訂正部２２では、図４中
（ａ）に示す状態の画像データ信号ａを受信し、ＦＥＣ
の誤り訂正を行い、図４中（ｂ）に示す信号ｂをビデオ
フレーム抽出部２３に出力する。ビデオフレーム抽出部
２３では、受信したデータから前記ＰＳＣ信号を探索し
て図４中（ｃ）に示す信号ｃを第１の蓄積パケット生成
部２４に出力する。第１の蓄積パケット生成部２４で
は、受信した画像、音声データを図５のパケットフォー
マットに従って蓄積パケットを生成し、ヘッダ情報５１
には、多重化レート、符号化方式及び符号化能力等の情
報を明記し、記憶装置１４に出力する。

【００３２】再生時には、再生パケット分解部３１で記
憶装置１４から出力されたパケットデータを受信する。
再生パケットデータを受信した再生パケット分解部３１
はヘッダ情報５１を抽出してシステム制御部１１に通知
する。システム制御部１１は回線データ多重化部３６に
対して図１２で説明したＢＡＳ１２４を使用して蓄積時
の通信端末の動作モードと再生時の通信端末の動作モー
ドとの整合をとるように指示する。回線データ多重化部
３６で動作モードの整合が完了したら、再生パケット分
解部３１では、パケットの分解を行い、画像データをビ
デオフレーム検出部３１に出力し、音声データ等を回線
データ多重化部３６に出力する。ビデオフレーム検出部
３２では、図５に示すビデオフレーム数５４、ビデオフ
レームデータ長とビデオフレームデータ５５からビデオ
フレームデータの単位を検出し、図６中（ａ）に示すビ
デオフレームデータ信号ｄをフィルビット挿入部３３
に、ビデオフレームデータ長情報をデータ監視部３４に
出力する。フィルビット挿入部３３では、データ監視部
３４の制御に従い、蓄積画像を再生するのに先だって通
信端末においてＦＥＣの同期が確立するようにフィルビ
ットを挿入し、図６（ｂ）中に示す信号ｅをＦＥＣフレ
ーム生成部３５に出力する。ＦＥＣフレーム生成部３５
では、ＦＥＣフレームを生成して、図６中（ｃ）に示す
信号ｆを回線フレーム多重化部３６に出力する。回線デ
ータ多重化部３６では、画像、音声等のデータを図１２
に示した多重化フォーマットに従って多重化して通信網
３に送出する。

【００３３】蓄積画像、音声データを通信端末１で再生
中に、通信端末１から再生中断指示を行うためには、通
信端末１で再生制御のための情報を図１２のＢＡＳ１２
４に設定して、センタ２へ送信する方法がある。センタ
２側では、多重化データ受信部１２を経由して、システ
ム制御部１１で受信する。システム制御部１１では、Ｂ
ＡＳ１２４で受信した再生中断指示情報をデータ監視部
３４に出力する。データ監視部３４では、ビデオフレー
ム検出部３２に対して、再生中のビデオフレームデータ
のフィルビット挿入部３３への出力をビデオフレーム単
位で停止させる。また、フィルビット挿入部３３に対し
てはＦＥＣの同期を維持させるために、再生中断が解除
されるまで強制的にフィルビットの挿入を行うように制
御を行う。これにより、通信端末１側ではビデオフレー
ム単位でのデータ受信を行い、最終データを受信した状
態で画像表示が静止する。

【００３４】再生中断が解除された場合は、データ監視
部３４からビデオフレーム検出部３３に対して、ビデオ
フレームの転送を再開するように制御を行い、フィルビ
ット挿入部３３に対しては、フィルビットの制御を通常
モードに戻し、再開後の画像データを通信端末１に対し
て送出させる。これにより、通信端末１では、再生再開
後の画像データから表示を再開し、再開時の画像の乱れ
が防止出来る。また、再開中断中にもＦＥＣ同期が外れ
ることはないので、表示再開時の応答遅延の劣化がな
い。

【００３５】更に、記憶装置１４からの再生パケットデ
ータの途切れが発生した（実時間性が損なわれた）場合
には、再生パケット分解部３１からデータ監視部３４に
通知が行われ、再生中断時と同様のフィルビット挿入制
御が行われる。データの途切れが回復した場合も、再生
パケット分解部３２からデータ監視部３４に通知が行わ
れ、フィルビットの強制挿入を通常モードに戻すように
制御を行う。これにより、センタの処理能力が一時的に
低下した場合にも、画像の表示を乱れさせること無く、
画像表示が再開できる。また、データが途切れている間
のＦＥＣ同期外れがないので、表示再開時の応答遅延の
劣化がない。

【００３６】次に、本発明の第２の実施例について説明
する。第２の実施例は、第１の実施例において、記憶装
置１４についてマルチメディアデータを蓄積する前に、
多重化データ受信部１２で実施したビデオフレームの抽
出処理を、記憶装置１４からの再生時、多重化データ送
信部１３で一括して行うものである。以下、具体的な構
成および動作について説明する。

【００３７】図７は図１の多重化データ受信部１２の他
の構成図であり、本実施例で使用するものである。図
中、７１はマルチメディア多重化データ抽出部、７２は
第２の蓄積パケット生成部である。

【００３８】図８は多重化データ送信部１３の他の構成
図であり、本実施例で使用するものである。図中、８１
はマルチメディア多重化データ分離部、８２はＦＥＣ誤
り訂正部、８３はビデオフレーム抽出部、８４はフィル
ビット挿入部、８５はデータ監視部、８６はＦＥＣフレ
ーム生成部、８７は回線データ多重化部である。

【００３９】図９は図８の多重データ送信部１３の画像
データを表した図であり、図９中（ａ）は図８のマルチ
メディア多重化データ分離部８１からＦＥＣ誤り訂正部
８２への信号ｇに相当し、ＦＥＣ同期信号と誤り訂正を
行うためのパリティ、符号化データ量の調整を行うため
のフィルビット、及び画像情報ビットで構成されている
画像データである。図９中（ｂ）は図８のＦＥＣ誤り訂
正部８２からビデオフレーム抽出部８３への信号ｈに相
当し、ＦＥＣの誤り訂正が行われ、フィルビット等の不
要情報が取り除かれたものである。図９中（ｃ）は図８
中のビデオフレーム抽出部８３からフィルビット挿入部
８４への信号ｉに相当し、フレーム開始符号（ＰＳＣ）
毎に抽出されたビデオフレームである。図９中（ｄ）は
図８中のフィルビット挿入部８４からＦＥＣフレーム生
成部８６への信号ｊに相当し、フィルビットが挿入され
たものである。図９中（ｅ）は図８中のＦＥＣフレーム
生成部８６から回線データ多重化部８７への信号ｋに相
当し、ＦＥＣの同期信号と伝送誤り訂正のためのパリテ
ィビットが付加されたＦＥＣフレームである。

【００４０】図７において、蓄積時には、通信端末１か
ら通信網３を経由して抽出される図１２の形式のマルチ
メディア多重化データはマルチメディア多重化データ抽
出部７１で受信され、マルチメディア多重化データ抽出
部７１は蓄積する多重化データの抽出を行い、第２の蓄
積パケット生成部７２に出力する。第２の蓄積パケット
生成部７２では、受信した画像、音声データを図１３の
パケットフォーマットに従って蓄積パケットを生成し、
ヘッダ情報１３１には、多重化レート、符号化方式及び
符号化能力等の情報を明記し、記憶装置１４に出力す
る。

【００４１】再生時には、記憶装置１４から出力された
再生パケットデータはマルチメディア多重化データ分離
部８１で受信される。マルチメディア多重化データ分離
部８１では、パケットのヘッダ情報の内容をシステム制
御部１１に通知する。システム制御部１１は回線データ
多重化部８７に対して図１２に示すＢＡＳ１２４を使用
して蓄積時の通信端末の動作モードと再生時の通信端末
の動作モードとの整合をとるように指示する。回線デー
タ多重化部８７で動作モードの整合が完了したら、マル
チメディア多重化データ分解部８１では、多重化データ
の分離を行い、図９（ａ）に示す状態の画像データ信号
ｇをＦＥＣの誤り訂正部８２、音声データ等の回線デー
タ多重化部８７に出力する。ＦＥＣの誤り訂正部８２で
は、その画像データ信号ｇを受信し、ＦＥＣの誤り訂正
を行い、図９中（ｂ）に示す信号ｈをビデオフレーム抽
出部８３に出力する。該ビデオフレーム抽出部８３で
は、受信したデータから前記ＰＳＣ信号を探索して図９
中（ｃ）に示す信号ｉをビデオフレーム単位でフィルビ
ット挿入部８４とデータ監視部８５に出力する。フィル
ビット挿入部８４では、データ監視部８５の制御に従
い、蓄積画像を再生するのに先だって通信端末１におい
てＦＥＣの同期が確立するようにフィルビットを挿入
し、図９中（ｃ）に示す信号ｊをＦＥＣフレーム生成部
８６に出力する。ＦＥＣフレーム生成部８６では、ＦＥ
Ｃフレームを生成して、図９中（ｄ）に示す信号ｋを回
線フレーム多重化部８７に出力する。回線データ多重化
部８７では、画像、音声等のデータを図１２に示した多
重化フォーマットに従って多重化して通信網３に送出す
る。

【００４２】蓄積画像、音声データを通信端末１で再生
中に、通信端末１から再生中断指示があった場合には、
第１の実施例で説明したように、センタ２側では、多重
化データ受信部１２を経由して、システム制御部１１で
受信する。システム制御部１１では、ＢＡＳ１２４で受
信した再生中断指示情報をデータ監視部８５に出力す
る。データ監視部８５では、ビデオフレーム抽出部８３
に対して、再生中のビデオフレームデータのフィルビッ
ト挿入部８４への出力をビデオフレーム単位で停止させ
る。また、フィルビット挿入部８４に対してはＦＥＣの
同期を維持させるために、再生中断が解除されるまで強
制的にフィルビットの挿入を行うように制御を行う。こ
れにより、通信端末１側ではビデオフレーム単位でのデ
ータ受信を行い、最終データを受信した状態で画像表示
が静止する。

【００４３】再生中断が解除された場合は、データ監視
部８５からビデオフレーム抽出部８３に対して、ビデオ
フレームの転送を再開するように制御を行い、フィルビ
ット挿入部８４に対しては、フィルビットの制御を通常
モードに戻し、再開後の画像データを通信端末１に対し
て送出させる。これにより、通信端末１では、再生再開
後の画像データから表示を再開し、再開時の画像の乱れ
が防止出来る。また、再開中断中にもＦＥＣ同期が外れ
ることはないので、表示再開時の応答遅延の劣化がな
い。

【００４４】更に、記憶装置１４からの再生パケットデ
ータの途切れが発生した（実時間性が損なわれた）場合
には、再生パケット分解部８１からデータ監視部８５に
通知が行われ、再生中断時と同様のフィルビット挿入制
御が行われる。データの途切れが回復した場合も、マル
チメディア多重化データ分離部８１からデータ監視部８
５に通知が行われ、フィルビットの強制挿入を通常モー
ドに戻すように制御を行う。これにより、センタ２の処
理能力が一時的に低下した場合にも、画像の表示を乱れ
させること無く、画像表示が再開できる。また、データ
が途切れている間のＦＥＣ同期外れがないので、表示再
開時の応答遅延の劣化がない。

【００４５】次に、本発明の第３の実施例について説明
する。

【００４６】図１０は図１の多重化データ送信部１３の
他の構成図であり、本実施例で用いるものである。図
中、１０１はマルチメディア多重化データ分離部、１０
２はＦＥＣ誤り訂正部、１０３はビデオフレーム抽出
部、１０４はフィルビット挿入部、１０５はデータ監視
部、１０６はＦＥＣフレーム生成部、１０７は回線デー
タ多重化部、１０８は無音データ挿入部である。

【００４７】図１０の構成は、第２の実施例と比較する
に、マルチメディア多重化データ分離部１０１から回線
データ多重化部１０７へ出力される音声データに対し
て、無音データ挿入部１０８を介設した点で相違する。
その他の同一名称のものおよび信号ｉ〜ｋは第２の実施
例と同様であり、蓄積時および再生時の基本的な動作は
第２の実施例で述べたと同様である。

【００４８】蓄積画像、音声データを通信端末１で再生
中に、通信端末１から再生中断指示があった場合には、
第２の実施例で説明したように、センタ２側では、多重
化データ受信部１２経由して、システム制御部１１で受
信する。システム制御部１１では、ＢＡＳ１２４で受信
した再生中断指示情報をデータ監視部１０５に出力す
る。該データ監視部１０５では、ビデオフレーム抽出部
１０３に対して、再生中のビデオフレームデータのフィ
ルビット挿入部１０４への出力をビデオフレーム単位で
停止させる。また、フィルビット挿入部１０４に対して
はＦＥＣの同期を維持させるために、再生中断が解除さ
れるまで強制的にフィルビットの挿入を行うように制御
を行う。また、音声データに対しては、データ監視部１
０５から無音データ挿入部１０８に対し、マルチメディ
ア多重化データ分離部１０１から出力される音声データ
の転送を停止し、通信端末１の音声符号化方式に合わせ
た符号化無音データを挿入する。これにより、通信端末
１側ではビデオフレーム単位でのデータ受信を行い、最
終データを受信した状態で画像表示が停止すると共に、
音声については不要な雑音を除去できる。

【００４９】再生中断が解除された場合は、データ監視
部１０５からビデオフレーム抽出部１０３に対して、ビ
デオフレームの転送を再開するように制御を行い、フィ
ルビット挿入部１０４に対しては、フィルビットの制御
を通常モードに戻し、再開後の画像データを通信端末に
対して送出させる。マルチメディア多重化データ分離部
１０１に対しては、音声データの転送を再開させ、無音
データ挿入部１０８に対しては、無音データの挿入を停
止させ、通常モードに戻す。

【００５０】これにより、通信端末１では、再生再開後
の画像データから表示を再開し、再開時の画像の乱れが
防止出来る。また、再生中断中にもＦＥＣ同期が外れる
ことはないので、表示再開時の応答遅延の劣化がない。
また、画像と音声の同期再生も可能になる。

【００５１】なお、無音データの挿入制御については、
第２の実施例で説明したが、第１の実施例にも適用でき
ることは明らかである。

【００５２】

【発明の効果】以上の説明から明らかなように、請求項
１または請求項４の発明によれば、画像の蓄積形式が、
ビデオフレーム形式である場合に、再生側でビデオフレ
ーム単位の画像データ検出を行えるようにし、再生中の
中断操作を行い一時的に画像データの転送を停止する場
合、あるいはセンタの一時的な処理能力の低下により画
像データの実時間性が損なわれる場合などで、強制的フ
ィルビットの挿入を行うように制御するようにしたの
で、画像の表示を乱れさせること無く、画像表示が再開
できる。また、画像データが途切れている間の同期外れ
がないので、表示再開時の応答遅延の劣化がない。

【００５３】また、請求項２または請求項５の発明によ
れば、画像の蓄積形式が、多重化データ形式である場合
に、再生側でビデオフレーム単位の画像データ抽出を行
えるようにし、再生中の中断操作を行い一時的に画像デ
ータの転送を停止する場合、あるいはセンタの一時的な
処理能力の一時低下により、画像データの実時間性が損
なわれる場合などで、強制的フィルビットの挿入を行う
ように制御するようにしたので、画像の表示を乱れさせ
ること無く、画像表示が再開できる。また、画像データ
が途切れている間の同期外れがないため、表示再開時の
応答遅延の劣化がない。

【００５４】さらに、請求項３または請求項６の発明に
よれば、特に、再生中の中断操作を行い一時的に画像デ
ータの転送を停止する場合、あるいはセンタの一時的な
処理能力の低下により、画像データの実時間性が損なわ
れる場合などで、強制的フィルビットの挿入制御と無音
データの挿入強制を同期させて行うため、画像データの
送信再開時の音声と画像の同期が保持される。

【図面の簡単な説明】

【図１】本発明による蓄積画像データ再生制御方法の実
施例を説明するためのマルチメディア情報蓄積交換シス
テム構成図

【図２】本発明による第１の実施例の蓄積画像データ再
生制御方法の実現に用いる多重化データ受信部の構成図

【図３】上記第１の実施例の蓄積画像データ再生制御方
法の実現に用いる多重化データ送信部の構成図

【図４】図２の多重化データ受信部の画像データを表し
た図

【図５】本発明による蓄積パケットの形式を表した図

【図６】図３の多重化データ送信部の画像データを表し
た図

【図７】本発明による第２の実施例の蓄積画像データ再
生制御方法の実現に用いる多重化データ受信部の構成図

【図８】本発明による第２の実施例の蓄積画像データ再
生制御方法の実現に用いる多重化データ送信部の構成図

【図９】図８の多重化データ送信部の画像データを表し
た図

【図１０】本発明による第３の実施例の蓄積画像データ
再生制御方法の実現に用いる多重化データ送信部の構成
図

【図１１】（ａ）はマルチメディア情報蓄積交換システ
ムの構成図、（ｂ）はそのシステムを構成する従来の多
重化データ受信部の構成図、（ｃ）は同じくそのシステ
ムを構成する従来の多重化データ送信部の構成図

【図１２】（ａ），（ｂ）はテレビ電話等で用いられる
データの多重化形式を表す図

【図１３】従来の蓄積パケットの形式を表す図

【符号の説明】

１…通信端末 ２…センタ ３…ＩＳＤＮ等の通信網 ４…カメラ ５…モニタ ６…ハンドセット ７…システム制御部 ８…画像符号化／復号化部 ９…音声符号化／復号化部 １０…多重化データ送受信部 １１…システム制御部 １２…多重化データ受信部 １３…多重化データ送信部 １４…記憶装置 ２１…回線データ分離部 ２２…ＦＥＣの誤り訂正部 ２３…ビデオフレーム抽出部 ２４…第１の蓄積パケット生成部 ３１…再生パケット分解部 ３２…ビデオフレーム検出部 ３３…フィルビット挿入部 ３４…データ監視部 ３５…ＦＥＣフレーム生成部 ３６…回線データ多重化部 ７１…マルチメディア多重化データ抽出部 ７２…第２の蓄積パケット生成部 ８１…マルチメディア多重化データ分離部 ８２…ＦＥＣ誤り訂正部 ８３…ビデオフレーム抽出部 ８４…フィルビット挿入部 ８５…データ監視部 ８６…ＦＥＣフレーム生成部 ８７…回線データ多重化部 １０１…マルチメディア多重化データ分離部 １０２…ＦＥＣ誤り訂正部 １０３…ビデオフレーム抽出部 １０４…フィルビット挿入部 １０５…データ監視部 １０６…ＦＥＣフレーム生成部 １０７…回線データ多重化部 １０８…無音データ挿入部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 岩野 恒明 大阪府大阪市阿倍野区長池町22番22号 シャープ株式会社内 (56)参考文献 特開 平５−276194（ＪＰ，Ａ) 特開 平５−276193（ＪＰ，Ａ) 特開 平７−184176（ＪＰ，Ａ) 特開 昭61−260784（ＪＰ，Ａ) 特開 平１−218143（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04L 12/54 H04L 12/58 H04N 5/93 H04N 7/14

Claims (6)

(57)【特許請求の範囲】
1. 【請求項１】 入力されたマルチメディアデータを多重
   化して送受信する通信端末と、前記通信端末と通信網を
   介して接続され前記マルチメディアデータを蓄積する記
   憶手段を有するセンタとからなるマルチメディア情報蓄
   積交換システムにおいて、 前記通信端末から通信網を介して受信した前記マルチメ
   ディアデータのうちの画像データについては、前記セン
   タへの蓄積時に、ビデオフレームを抽出して予めビデオ
   フレーム単位に区分けして前記記憶手段に蓄積してお
   き、通常時は、蓄積した前記画像データを読み出し、ビ
   デオフレーム単位を検出し、マルチメディアデータとし
   て多重化して前記通信端末に送出し、前記通信端末への
   送出中に前記通信端末からの再生停止要求あるいは前記
   記憶手段からの転送途切れを含む要因による中断が発生
   した時は、中断発生時点以降の前記画像データのビデオ
   フレーム単位の送出を中断し、そのかわりに、フィルビ
   ットを強制的に挿入したビデオフレーム単位を生成し、
   マルチメディアデータとして多重化して前記通信端末に
   送出し、前記通信端末からの再開指示要求あるいは前記
   記憶手段からの転送途切れの回復を含む要因による中断
   解除時は、中断していた前記画像データのビデオフレー
   ム単位からマルチメディアデータとして多重化して前記
   通信端末への送出を再開することを特徴とする蓄積画像
   データ再生制御方法。
2. 【請求項２】 入力されたマルチメディアデータを多重
   化して送受信する通信端末と、前記通信端末と通信網を
   介して接続され前記マルチメディアデータを蓄積する記
   憶手段を有するセンタとからなるマルチメディア情報蓄
   積交換システムにおいて、 前記センタへの蓄積時には、前記マルチメディアデータ
   を前記記憶手段に蓄積しておき、通常時は、蓄積した前
   記マルチメディアデータを読み出し、前記マルチメディ
   アデータのうちの画像データについては、ビデオフレー
   ムを抽出してビデオフレーム単位に区分けをし、マルチ
   メディアデータとして多重化して前記通信端末に送出
   し、前記通信端末への送出中に前記通信端末から再生停
   止要求あるいは前記記憶手段からの転送途切れを含む要
   因よる中断が発生した時は、中断発生時点以降の前記画
   像データのビデオフレーム単位の送出を中断し、そのか
   わりに、フィルビットを強制的に挿入したビデオフレー
   ム単位を生成し、マルチメディアデータとして多重化し
   て前記通信端末に送出し、前記通信端末からの再開指示
   要求あるいは前記記憶手段からの転送途切れの回復を含
   む要因による中断解除時は、中断していた前記画像デー
   タのビデオフレーム単位からマルチメディアデータとし
   て多重化して前記通信端末への送出を再開することを特
   徴とする蓄積画像データ再生制御方法。
3. 【請求項３】 請求項１または請求項２記載の蓄積画像
   データ再生制御方法において、前記記憶手段に蓄積され
   た前記マルチメディアデータのうちの音声データについ
   ては、前記通信端末への送出中に前記通信端末からの再
   生停止要求あるいは前記記憶手段からの転送途切れを含
   む要因による中断が発生した時は、中断発生時点以降の
   前記音声データの送出を中断し、そのかわりに、無音デ
   ータを強制的に挿入した音声データを生成し、マルチメ
   ディアデータとして多重化して前記通信端末に送出し、
   前記通信端末からの再開指示要求あるいは前記記憶手段
   からの転送途切れの回復を含む要因による中断解除時
   は、中断していた前記画像データのビデオフレーム単位
   からマルチメディアデータとして多重化して前記通信端
   末への送出を再開することを特徴とする蓄積画像データ
   再生制御方法。
4. 【請求項４】 入力されたマルチメディアデータを多重
   化して送受信する通信端末と、前記通信端末と通信網を
   介して接続され前記マルチメディアデータを蓄積する記
   憶手段を有するセンタとからなるマルチメディア情報蓄
   積交換システムにおいて、 前記センタが、 前記通信端末から通信網を介して受信した多重化された
   前記マルチメディアデータから各種メディアデータを分
   離する回線データ分離手段、前記回線データ分離手段か
   ら出力される画像データの誤り訂正を行う誤り訂正手
   段、前記誤り訂正手段から出力される画像データからの
   ビデオフレームの抽出を行うビデオフレーム抽出手段、
   前記ビデオフレーム抽出手段から出力される画像データ
   と前記回線データ分離手段から出力される音声データを
   含むデータから蓄積パケットを生成する第１の蓄積パケ
   ット生成手段を有して構成される多重化データ受信手段
   と、 前記第１の蓄積パケット生成手段からの出力データを蓄
   積し画像データに対してはビデオフレーム単位で蓄積す
   る前記記憶手段と、 前記記憶手段から出力された前記蓄積パケットから各種
   メディアデータに分離する再生パケット分離手段、前記
   再生パケット分離手段から出力される画像データに対し
   てビデオフレーム単位を検出するビデオフレーム検出手
   段、前記ビデオフレーム検出手段から出力される画像デ
   ータに対してフィルビットの挿入を行うフィルビット挿
   入手段、前記通信端末からの再生停止・再開指示あるい
   は前記記憶手段から出力される蓄積パケットの転送途切
   れあるいはその回復を含む中断・中断再開要因を監視し
   前記フィルビット挿入手段の制御と前記ビデオフレーム
   検出手段の制御を行うデータ監視手段、前記フィルビッ
   ト挿入手段からの画像データから誤り訂正フレームを生
   成する誤り訂正フレーム生成手段、前記誤り訂正フレー
   ム生成手段から出力される画像データと前記再生パケッ
   ト分解手段から出力される音声データとを含むデータの
   多重化を行う回線データ多重化手段を有して構成される
   多重化データ送信手段と、 を具備することを特徴とするマルチメディア情報蓄積交
   換システム。
5. 【請求項５】 入力されたマルチメディアデータを多重
   化して送受信する通信端末と、前記通信端末と通信網を
   介して接続され前記マルチメディアデータを蓄積する記
   憶手段を有するセンタとからなるマルチメディア情報蓄
   積交換システムにおいて、 前記センタが、 前記通信端末から通信網を介して受信した多重化された
   前記マルチメディアデータから蓄積データを抽出するマ
   ルチメディア多重化データ抽出手段、前記マルチメディ
   ア多重化データ抽出手段から出力されるマルチメディア
   データを蓄積パケットに生成する第２の蓄積パケット生
   成手段を有して構成される多重化データ受信手段と、 前記第２の蓄積パケット生成手段からの出力データをそ
   のままの形式で蓄積する前記記憶手段と、 前記記憶手段から出力された前記蓄積パケットから各種
   メディアデータに分離を行うマルチメディア多重化デー
   タ分離手段、前記マルチメディア多重化データ分離手段
   から出力される画像データに対して誤り訂正を行う訂正
   手段、前記誤り訂正を行う誤り訂正手段から出力される
   画像データからビデオフレームの抽出を行うビデオフレ
   ーム抽出手段、前記ビデオフレーム抽出手段から出力さ
   れる画像データに対してフィルビットの挿入を行うフィ
   ルビット挿入手段、前記通信端末からの再生停止・再開
   指示あるいは前記記憶手段から出力される蓄積パケット
   の転送途切れあるいはその回復を含む中断・中断再開要
   因を監視し前記フィルビット挿入手段の制御と前記ビデ
   オフレーム抽出手段の制御を行うデータ監視手段、前記
   フィルビット挿入手段からの画像データから誤り訂正フ
   レームを生成する誤り訂正フレーム生成手段、前記誤り
   訂正フレーム生成手段から出力される画像データと前記
   マルチメディア多重化データ分離手段から出力される音
   声データを含むデータの多重化を行う回線データ多重化
   手段を有して構成される多重化データ送信手段と、 を具備することを特徴とするマルチメディア情報蓄積交
   換システム。
6. 【請求項６】 請求項４または請求項５記載のマルチメ
   ディア情報蓄積交換システムにおいて、前記多重化デー
   タ送信手段が、 前記再生パケット分解手段あるいは前記マルチメディア
   多重化データ分解手段から出力される音声データに対し
   て前記通信端末からの再生停止・再開指示あるいは前記
   記憶手段から出力される蓄積パケットの転送途切れある
   いはその回復を含む中断・中断再開要因の監視を行う前
   記データ監視手段の指示で無音データの挿入を行う無音
   データ挿入手段と、前記無音データ挿入手段からの音声
   データと前記誤り訂正フレーム生成手段から出力される
   画像データを含むデータの多重化を行う回線データ多重
   化手段とを有してなることを特徴とするマルチメディア
   情報蓄積交換システム。