JPH06284417A - マルチメディア多重化信号蓄積再生方法 - Google Patents

Abstract

(57)【要約】 【目的】センタ・ツウ・エンド型の動画像蓄積交換シス
テムにおいて，端末の通信能力に応じた蓄積交換サービ
スを実現することを目的とする。 【構成】画像，音声，データからなるマルチメディア多
重化信号を蓄積する際，多重化の通信条件情報を付加し
て蓄積することにより，再生時に，その通信条件情報
と，再生要求を行なった端末の通信能力とを比較し，端
末の通信能力に応じてマルチメディア多重化信号のデー
タ形式を変更して送出する，または送信不可の表示を送
出するなどの処理を行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は，動画像，音声，データ
などのマルチメディア情報を符号化及び多重化し，それ
を蓄積し，その後，復号，再生するセンタ・ツウ・エン
ドの通信形態を用いた動画像蓄積交換システムにおける
マルチメディア多重化信号蓄積再生方法に関するもので
ある。

【０００２】

【従来の技術】従来のセンタ・ツウ・エンド型の静止画
をベースとした画像蓄積サービスのシステム構成を図
８，動画テレビ電話のシステム構成を図９，ＣＣＩＴＴ
勧告Ｈシリーズに従う動画テレビ電話で用いられる動画
像伝送方法を図１０に示す。

【０００３】図８で，センタ８０３と端末８０１は通信
網８０２を介して接続されている。端末８０１もしくは
センタ内のホスト８１０からの接続要求により，通信網
８０２を介して通信路が確立される。通信路が確立され
ると，センタ８０３から端末８０１に対して，静止画像
の案内画面のデータが転送され，端末８０１のモニタ８
０６に表示される。端末８０１側のユーザは案内画面に
沿って，メニュー選択を行う。画像の蓄積を選択する
と，カメラ８０５からの画像とハンドセット８０７から
の音声が各々画像符号化・復号化部８０８，音声符号化
・復号化部８０９で符号化されて，通信路を経由してセ
ンタ８０３へ送られ，ホスト８１０の制御により蓄積装
置８０４に格納される。再生を選択すると，センタ８０
３の蓄積装置８０４に蓄積されている符号化画像，符号
化音声が読み出され，通信路を経由して端末８０１へ送
られ，画像符号化・復号化部８０８，音声符号化・復号
化部８０９で画像と音声が復号化され，モニタ８０６に
静止画像，ハンドセット８０７に音声が出力される。

【０００４】ここで，画像・音声に関する端末の能力は
固定であるとしているため端末を問わず読み出すことが
できる。一方，動画テレビ電話の動作は以下のようにな
る。図９において，自側端末９０１のカメラ９０４ａか
ら入力された画像は，画像符号化・復号化部９０８ａで
フレーム間予測符号化方式により符号化され，分離・多
重化部９０９ａに入力される。ハンドセット９０６ａか
ら入力された音声信号は，音声符号化・復号化部９１０
ａで符号化され，分離・多重化部９０９ａに入力され
る。分離・多重化部９０９ａでは，制御部９０７ａの制
御により，前記の符号化画像と前記符号化音声と制御部
９０７ａから指示されるデータを一緒にして多重化を行
い，通信網９０３を経由して相手側端末９０２に多重化
データ（以下，マルチメディア多重化信号と呼ぶ）を送
信する。自側端末９０１から送られてきたマルチメディ
ア多重化信号は分離・多重化部９０９ｂで受信され，デ
ータと符号化画像と符号化音声に分離される。データは
制御部９０７ｂに，符号化画像は画像符号化・復号化部
９０８ｂに，符号化音声は音声符号化・復号化部９１０
ｂに各々転送される。画像符号化・復号化部９０８ｂで
フレーム間予測符号化された符号化画像が復号され，モ
ニタ９０５ｂに再生出力され，符号化音声は音声符号化
・復号化部９１０ｂで復号化され，ハンドセット９０６
ｂに出力される。データは制御部９０７ｂで処理され
る。

【０００５】次に，図１０において，動画像の伝送方法
について説明する。自側端末９０１の制御部９０７ａは
呼接続要求を送出し，相手側端末９０２の制御部９０７
ｂは，呼接続要求通知に対して応答し，制御部９０７ａ
と制御部９０７ｂの間で回線の接続が確立する。この
後，各々の端末の通信能力（オーディオ能力，転送レー
ト，ビデオ能力等）の交換を行い，通信するモードが決
定される。この後に，自側端末９０１からは，相手側端
末９０２に対してフレーム間予測の基準画面となる更新
画面の送信要求を出す。この情報を受信すると，相手側
端末９０２の制御部９０７ｂは画像符号化・復号化部９
０８ｂに対し，更新画面送出指示を出し，相手側端末９
０２の画像符号化・復号化部９０８ｂは更新画面データ
を自側端末９０１向けに送出する。このような手順によ
り，回線接続後，一番早いタイミングで良好な画像を自
側端末９０１で見ることができる。

【０００６】図８に示したシステムに対して，図９，図
１０で示したＣＣＩＴＴ勧告Ｈシリーズに従う動画テレ
ビ電話を用いて動画像蓄積交換サービスを実現しようと
した場合，センタとの間に通信路が確立した後のセンタ
−動画テレビ電話間の通信能力交換手順の結果，動画テ
レビ電話の通信能力（オーディオ能力，ビデオ能力，転
送レートなど）に応じた通信モードが決定される。この
ため，センタには通信能力の異なる動画テレビ電話から
のマルチメディア多重化信号が蓄積されることになる。
通信能力の異なるマルチメディア多重化信号の再生要求
が行われた場合には，そのマルチメディア多重化信号は
再生要求を行った動画テレビ電話に対して，送信されな
いか，送信されたとしても，動画テレビ電話側で画像ま
たは音声の復号エラーが発生することになる。

【０００７】

【発明が解決しようとする課題】ＣＣＩＴＴ勧告Ｈシリ
ーズに従う動画テレビ電話を用いて，動画像蓄積交換サ
ービスを実現しようとした場合，センタとの間に通信路
が確立し，センタ側から前述したマルチメディア多重化
信号を送信しようとしたときに，マルチメディア多重化
信号の多重化の条件によっては，画像・音声が再生され
ないケースが発生する。

【０００８】本発明は，上記の点に鑑みなされたもの
で，センタ接続後に通信能力を決定した後，端末の通信
能力が前述したマルチメディア多重化信号の多重化の条
件と異なっていても，端末が前述したマルチメディア多
重化信号の多重化の条件の通信能力を包含している場合
には，画像・音声を再生できる動画像蓄積交換システム
を提供することにある。

【０００９】

【課題を解決するための手段】本発明は，入力された画
像を符号化または復号化する第１の符号化・復号化手段
と，入力された音声を符号化または復号化する第２の符
号化・復号化手段と，符号化した画像を符号化音声やデ
ータと多重化して送信する第１の送信手段と，多重化さ
れたマルチメディア多重化信号を受信して符号化画像と
符号化音声とデータとに分離する第１の受信手段と，そ
れらを制御する第１の制御手段とを備えた端末と，前記
第１の送信手段から伝送されてきたマルチメディア多重
化信号を受信してマルチメディア多重化信号の一部を分
離，再多重する第２の受信手段と，前記第２の受信手段
で分離，再多重されたマルチメディア多重化信号を蓄積
する蓄積手段と，蓄積したマルチメディア多重化信号を
読み出す読み出し手段と，読み出したマルチメディア多
重化信号を送信する第２の送信手段と，それらを制御す
る第２の制御手段とを備えたセンタとが通信網を介して
接続されたセンタ・ツウ・エンド型の動画像蓄積交換シ
ステムにおいて，マルチメディア多重化信号蓄積再生方
法において，マルチメディア多重化信号を蓄積するとき
に，前記第１の送信手段で多重化された画像，音声，デ
ータの多重化の条件を前記第２の受信手段で通信条件情
報としてマルチメディア多重化信号に付加して蓄積を行
い，マルチメディア多重化信号を再生するときに，前記
通信条件情報をもとに，前記第２の送信手段でマルチメ
ディア多重化信号の多重化された条件を判別し，その条
件に合わせて前記第１の受信手段でマルチメディア多重
化信号を分離し，画像，音声，データを復号する。

【００１０】

【作用】本発明は，動画テレビ電話とセンタとの間での
通信路開設に続く，センタ−動画テレビ電話間の通信能
力交換手順で得られた動画テレビ電話の通信能力と再生
要求されたマルチメディア多重化信号に蓄積時に付与さ
れた通信条件情報を比較して，同一であれば，該マルチ
メディア多重化信号をそのままセンタから動画テレビ電
話に送信して動画テレビ電話側で再生を行わせる。

【００１１】前者の通信能力が後者の通信能力を包含し
ていれば，センタ側から該マルチメディア多重化信号の
通信条件に合う通信モードに切り替えることを動画テレ
ビ電話側に対して通知した後，該マルチメディア多重化
信号をセンタから動画テレビ電話に送信して動画テレビ
電話側で再生を行わせる。

【００１２】前者の通信能力が後者の通信能力を包含し
ていなければ，センタ側で動画テレビ電話側の通信能力
に合うように，該マルチメディア多重化信号のデータ形
式を変換した後に送信を行い，動画テレビ電話で再生を
行わせるか，もしくは該動画テレビ電話の通信能力に合
ったセンタで内蔵するマルチメディア多重化信号による
システムメッセージを送信することにより，動画テレビ
電話側に送信不可である旨の表示を行わせる。

【００１３】これにより，動画テレビ電話の通信能力に
応じたマルチメディア多重化信号の再生処理が可能とな
る。

【００１４】

【実施例】以下，本発明の実施例を詳細に説明する。本
発明によるマルチメディア多重化信号蓄積再生方法を用
いる動画像蓄積交換システムの構成を図１，ＣＣＩＴＴ
勧告Ｈ．２２１のフレーム構成を図２，マルチメディア
多重化信号蓄積フォーマット及び通信条件情報を図３，
センタと端末の間の画像伝送方法を図４から図７に示
す。

【００１５】図１において，１０１は動画テレビ電話，
１０２はセンタ，１０３は通信網である。動画テレビ電
話１０１は，カメラ１０４，モニタ１０５，ハンドセッ
ト１０６，制御部１０７，画像符号化・復号化部１０
８，音声符号化・復号化部１１０，分離・多重化部１０
９から構成され，センタ１０２は，制御部１１１，分離
・多重化部１１２，蓄積装置１１３から構成される。

【００１６】図２において，２０１は分離・多重化部１
０９，１１２で組み立てられるＣＣＩＴＴ勧告Ｈ．２２
１に準拠したフレーム構成，２０２はフレーム同期信号
（以下ＦＡＳという），２０３はビットレート割当信号
（以下ＢＡＳという）であり，端末の通信能力や通信条
件のネゴシエーションに使われる。２０４は符号化画
像，符号化音声，一般のデータが多重化されたデータ，
２０５はＩＳＤＮの基本インタフェースを２つで使用す
る場合のフレーム構成を表す。

【００１７】本実施例におけるマルチメディア多重化信
号の蓄積フォーマットは，図３に示すように，ヘッダ部
３００，パケット構成条件３０１，通信条件情報３０
２，マルチメディア多重化データ部３０３で構成され
る。ここで通信条件情報３０２は，ＣＣＩＴＴ勧告Ｈ．
２２１に準拠したＢＡＳ２０３で設定する画像・音声・
データの符号化方式，転送レート，網条件等で構成さ
れ，端末の通信能力に応じて設定される。

【００１８】図１，図２及び図３に従って，動画テレビ
電話を用いた動画像蓄積交換システムの動作概要を説明
する。動画テレビ電話１０１からセンタ１０２へ通信網
１０３を経由して接続を行い，通信路が確立した後，動
画テレビ電話１０１内の制御部１０７とセンタ１０２内
の制御部１１１で図２に示すＢＡＳ２０３を用いて，端
末との通信能力交換手順を行う。それにより，制御部１
０７の指示でセンタ１０２との画像通信が行われる。即
ち，動画テレビ電話１０１側のカメラ１０４からの動画
像は，画像符号化・復号化部１０８でフレーム間予測符
号化される。符号化画像は，ハンドセット１０６から入
力されて音声符号化・復号化部１１０で符号化された符
号化音声と，制御部１０７からのデータと一緒に，分離
・多重化部１０９で多重化され，マルチメディア多重化
信号として，通信網１０３を経てセンタ１０２内の分離
・多重化部１１２に伝送される。

【００１９】センタ１０２側では，分離・多重化部１１
２でマルチメディア多重化信号を受信すると，動画テレ
ビ電話１０１の利用者からの蓄積要求を受けた制御部１
１１の指示により，図２に示すフレーム構成２０１（も
しくは２０５）はそのままにして，分離・多重化部１１
２で通信条件情報３０２を付加して図３に示すフォーマ
ットで蓄積装置１１３に格納する。動画テレビ電話１０
１の利用者からの蓄積指示がなければ，マルチメディア
多重化信号は分離・多重化部１１２で廃棄される。

【００２０】蓄積されたマルチメディア多重化信号は，
動画テレビ電話１０１の利用者からの要求を受信した制
御部１１１の指示により，蓄積装置１１３から分離・多
重化部１１２に転送される。分離・多重化部１１２で
は，通信路開設時に通信能力交換手順で得た動画テレビ
電話１０１の通信能力情報と，再生要求されたマルチメ
ディア多重化信号の通信条件情報３０２との整合性をチ
ェック後，必要とあれば，センタ−動画テレビ電話間の
現在の通信モードの変更手順を行い，前記マルチメディ
ア多重化信号を，通信網１０３を通じて動画テレビ電話
１０１に伝送する。

【００２１】動画テレビ電話１０１では，センタから送
られてきたマルチメディア多重化信号を分離・多重化部
１０９で符号化画像，符号化音声，データに分離する。
分離された符号化画像は画像符号化・復号化部１０８，
符号化音声は音声符号化・復号化部１１０，データは制
御部１０７に転送される。符号化画像については，画像
符号化・復号化部１０８で制御部１０７からの指示に従
い，動画の復号，再生が行われ，モニタ１０５に表示さ
れる。符号化音声については，音声符号化・復号化部１
１０で復号，再生が行われ，ハンドセット１０６から出
力される。このようにして，動画テレビ電話１０１から
のメッセージをセンタ１０２に蓄積したり，蓄積されて
いるメッセージを検索し，読み出すことができる。

【００２２】次に，本発明の基本部分についての動作を
詳しく説明する。図４から図７にセンタと端末の間の動
画を用いた画像伝送方法を示す。図４に示すように，動
画テレビ電話１０１の制御部１０７から送出する呼接続
要求に，センタ１０２の制御部１１１が応答し，通信網
１０３を介して動画テレビ電話１０１とセンタ１０２と
の間の回線の接続が確立する。その後，動画テレビ電話
１０１側の制御部１０７とセンタ１０２側の制御部１１
１の間で，前述のＢＡＳ２０３を用いて，双方の通信能
力交換を行う。

【００２３】通信能力を相互に通知した後，通信モード
が決定すると，センタ１０２側では，制御部１１１の指
示により，蓄積装置１１３から初期メニューデータが呼
び出される。制御部１１１は初期メニューデータを分離
・多重化部１１２，通信網１０３を経由して動画テレビ
電話１０１へ送信する。動画テレビ電話１０１では，通
信網１０３から受信したマルチメディア多重化信号につ
いて，分離・多重化部１０９，画像符号化・復号化部１
０８を経由させ，モニタ１０５で画像を再生する。

【００２４】一方，動画テレビ電話１０１とセンタ１０
２の間では，制御部１０７と制御部１１１の間でネゴシ
エーションされた結果に従い，動画テレビ電話側から，
Ｈ．２２１フレームデータ形式としてマルチメディア多
重化信号が送信されてきており，センタ１０２側の分離
・多重化部１１２で廃棄している。

【００２５】次に，図５に従って，マルチメディア多重
化信号を動画テレビ電話１０１からセンタ１０２に蓄積
する場合について述べる。動画テレビ電話１０１でのメ
ニュー選択を契機として，動画テレビ電話１０１側の制
御部１０７から分離・多重化部１０９に対し，画像蓄積
開始要求をＢＡＳにより伝送するよう指示を行う。セン
タ１０２では，分離・多重化部１１２で画像蓄積開始要
求をＢＡＳで受信し，その内容を制御部１１１に通知す
る。制御部１１１では，分離・多重化部１１２に対し，
蓄積開始指示を出す。分離・多重化部１１２はフレーム
間予測の基準画面となる更新画面の送信要求を動画テレ
ビ電話１０１の制御部１０７にＢＡＳを用いて通知す
る。

【００２６】動画テレビ電話１０１側の制御部１０７で
は，センタ１０２側からの更新画面要求を受けて，画像
符号化・復号化部１０８に対して画面更新の指示を与え
る。画像符号化・復号化部１０８は更新画面をセンタ１
０２に向けて送出する。センタ１０２内の分離・多重化
部１１２では，制御部１１１から蓄積開始指示を受けた
直後から，動画テレビ電話１０１側から送信されてきて
いるＨ．２２１フレームデータ形式のマルチメディア多
重化信号を一定サイズのパケットに分割する。該パケッ
トは，図３に示すマルチメディア多重化データ部３０３
に設定され，さらに動画テレビ電話１０１から送信され
ている通信モードを設定した通信条件情報３０２，ヘッ
ダ部３００，パケット構成条件３０１とで構成する蓄積
フォーマットに組み立てて，蓄積装置１１３に順次，蓄
積を行い，動画テレビ電話１０１からの蓄積終了要求を
受信するまで続ける。このとき，蓄積装置１１３に蓄積
されるフォーマット及び通信条件情報の内容は，前述の
図３に示したとおりである。

【００２７】次に，図６に従って再生方法について述べ
る。蓄積されたマルチメディア多重化信号をセンタ１０
２から読み出す場合，マルチメディア多重化信号の蓄積
時と同様に，動画テレビ電話１０１でのメニュー選択を
契機として，再生要求がＢＡＳにより通信網１０３を介
してセンタ１０２の制御部１１１へ送信される。その
後，制御部１１１の指示により，蓄積装置１１３よりマ
ルチメディア多重化信号を読み出す。制御部１１１で
は，マルチメディア多重化信号に付加されている前記通
信条件情報３０２と回線接続後に通信能力交換手順で取
得した動画テレビ電話１０１の通信能力との比較を行
い，同等の通信能力ならば，制御部１１１，分離・多重
化部１１２，通信網１０３を介して動画テレビ電話１０
１へマルチメディア多重化信号を送信する。

【００２８】もし，動画テレビ電話１０１とセンタ１０
２側との通信能力が不一致で，前記通信条件情報３０２
の通信能力を動画テレビ電話１０１の通信能力が包含し
ている場合には，マルチメディア多重化信号を送信する
前に動画テレビ電話側の制御部１０７とセンタ側の制御
部１１１の間で，センタ１０２から前記通信条件情報３
０２に合う通信モードに切り替えることを通知するた
め，分離・多重化部１１２，通信網１０３を介して，動
画テレビ電話１０１側の分離・多重化部１０９を経て制
御部１０７にセンタ側通信能力調整通知を送る（図６に
示すセンタ側通信能力調整通知送信手順１１４）。その
後，動画テレビ電話１０１では，センタ１０２から送ら
れてくるＨ．２２１フレームデータ形式のマルチメディ
ア多重化信号を受信する。例えば，蓄積画像の映像符号
化方式がＱＣＩＦで，動画テレビ電話１０１の映像符号
化方式がＣＩＦの機能を有し，ＱＣＩＦの機能を包含し
ている場合などである。

【００２９】また，動画テレビ電話１０１とセンタ１０
２側との通信能力が不一致で，前記した通信条件情報３
０２の通信能力を動画テレビ電話１０１が包含していな
い場合には，図７に示すように，動画テレビ電話１０１
の通信能力に合ったセンタ１０２で内蔵するマルチメデ
ィア多重化信号によるシステムメッセージを送信するこ
とにより，動画テレビ電話１０１に送信不可である旨の
表示を行わせる（図７に示すシステムメッセージ送信手
順１１５）。もしくは，そのままのマルチメディア多重
化信号の送信は行わず，センタ１０２で動画テレビ電話
１０１の通信能力に合うように，マルチメディア多重化
信号のデータ形式を変換した後に送信を行い，動画テレ
ビ電話１０１で再生を行わせるようにする。

【００３０】このようにして，蓄積されたマルチメディ
ア多重化信号の通信条件及び通信路開設時に通信能力交
換手順で取得した動画テレビ電話１０１の通信能力をも
とに通信モードの制御を行うことにより，動画テレビ電
話１０１の通信能力に応じた蓄積交換サービスが可能と
なる。

【００３１】

【発明の効果】以上説明したように，本発明によれば，
画像，音声，データからなるマルチメディア多重化信号
を蓄積する際，多重化の条件を付加して蓄積するため，
再生時に呼び出されたマルチメディア多重化信号につい
て，再生要求を行った端末の通信能力に合わせた処理を
行うことができ，端末の通信能力に応じた汎用性のある
蓄積交換サービスを実現できるようになる。

【図面の簡単な説明】

【図１】本発明を適用する動画像蓄積交換システムの構
成を示す図である。

【図２】本発明での蓄積画像フレームの構成例を示す図
である。

【図３】マルチメディア多重化信号蓄積フォーマット及
び通信条件情報を示す図である。

【図４】本発明の実施例によるセンタと端末の間の画像
伝送方法を示す図である。

【図５】本発明の実施例によるセンタと端末の間の画像
伝送方法を示す図である。

【図６】本発明の実施例によるセンタと端末の間の画像
伝送方法を示す図である。

【図７】本発明の実施例によるセンタと端末の間の画像
伝送方法を示す図である。

【図８】従来の静止画をベースとした画像蓄積サービス
のシステム構成を示す図である。

【図９】従来の動画テレビ電話のシステム構成を示す図
である。

【図１０】動画テレビ電話で用いられる動画像伝送方法
の説明図である。

【符号の説明】

１０１ 動画テレビ電話 １０２ センタ １０３ 通信網 １０４ カメラ １０５ モニタ １０６ ハンドセット １０７ 制御部 １０８ 画像符号化・復号化部 １０９ 分離・多重化部 １１０ 音声符号化・復号化部 １１１ 制御部 １１２ 分離・多重化部 １１３ 蓄積装置

Claims (1)

【特許請求の範囲】
1. 【請求項１】 入力された画像を符号化または復号化す
   る第１の符号化・復号化手段と，入力された音声を符号
   化または復号化する第２の符号化・復号化手段と，符号
   化した画像を符号化音声やデータと多重化して送信する
   第１の送信手段と，多重化されたマルチメディア多重化
   信号を受信して符号化画像と符号化音声とデータとに分
   離する第１の受信手段と，前記第１の符号化・復号化手
   段，前記第２の符号化・復号化手段，前記第１の送信手
   段及び前記第１の受信手段を制御する第１の制御手段と
   を備えた端末と， 前記第１の送信手段から伝送されてきたマルチメディア
   多重化信号を受信してマルチメディア多重化信号の一部
   を分離，再多重する第２の受信手段と，前記第２の受信
   手段で分離，再多重されたマルチメディア多重化信号を
   蓄積する蓄積手段と，蓄積したマルチメディア多重化信
   号を読み出す読み出し手段と，読み出したマルチメディ
   ア多重化信号を送信する第２の送信手段と，前記第２の
   受信手段及び前記第２の送信手段を制御する第２の制御
   手段とを備えたセンタとが通信網を介して接続されたセ
   ンタ・ツウ・エンド型の動画像蓄積交換システムにおけ
   るマルチメディア多重化信号蓄積再生方法において， マルチメディア多重化信号を蓄積するときに，前記第１
   の送信手段で多重化された画像，音声，データの多重化
   の条件を，前記第２の受信手段で通信条件情報としてマ
   ルチメディア多重化信号に付加して蓄積を行い， マルチメディア多重化信号を再生するときに，前記通信
   条件情報をもとに，前記第２の送信手段でマルチメディ
   ア多重化信号の多重化された条件を判別し，その条件に
   合わせて前記第１の受信手段でマルチメディア多重化信
   号を分離し，画像，音声，データを復号するようにした
   ことを特徴とするマルチメディア多重化信号蓄積再生方
   法。