JPH07264563A - 蓄積映像・音声伝送方法とその装置 - Google Patents

Abstract

(57)【要約】 【目的】 蓄積映像・音声伝送により伝送される高レー
ト映像・音声の再生開始までにかかる時間を短縮でき、
高レート映像・音声入手のための要求を即時にできる利
便性の高い蓄積映像・音声伝送装置を実現する。 【構成】 低レート映像・音声伝送中に、受信装置３０
１の高品質映像要求部３１８から通信回線３７を介して
送信装置３００へ高品質映像・音声を要求する。この要
求を受けて送信装置３００は、映像切替部３４により伝
送中の低レート映像・音声伝送を一旦終了し、蓄積装置
３３に蓄積している高レート映像・音声の伝送を行う。
この映像切替部３４は、再度の切り替え要求や高レート
映像・音声伝送終了後に自動的に低レート映像・音声伝
送を再開する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、通信回線を介して互い
に接続された送信装置と受信装置から構成され、通信回
線の伝送速度よりも高いレートで符号化された映像・音
声符号化データを伝送する蓄積映像・音声伝送装置にお
いて、低レート映像・音声伝送と高レート映像・音声伝
送を切り替える蓄積映像・音声伝送方法とその装置に関
するものである。

【０００２】

【従来の技術】従来、低レート映像・音声伝送と高レー
ト映像・音声伝送とを瞬時に切り替えたり、或いは低レ
ート映像・音声伝送中に使用している通信回線容量の一
部分を使用して高レート映像・音声伝送を行ったりする
蓄積映像・音声伝送装置は存在していなかった。

【０００３】また、従来の蓄積映像・音声伝送装置にお
いては、伝送中に今伝送されている映像を表示して確認
することはできず、一旦蓄積が終了してから再生・表示
して映像を確認することしかできなかった。例えば、Ｋ
ＤＤの商品Ｖａｓｅ．１では、２〜３Ｍｂ／ｓで映像を
符号化し、音声と共に６４Ｋｂ／ｓで伝送することによ
り蓄積映像・音声伝送を行っている。Ｖａｓｅ．１にお
いては、伝送中には映像を表示することはできず、伝送
終了後に符号化と同じレートでの映像復号化、表示が可
能であるにすぎなかった。また、ＭＰＥＧ（ムービング
ピクチャ エキスパーツ グループ）１などの符号化
方式による蓄積映像符号化・復号化装置、音声符号化・
復号化装置、データ通信装置を組み合わせて蓄積映像・
音声伝送装置を構成した場合においても、一旦蓄積が終
了するまで伝送中の映像を確認することはできなかっ
た。

【０００４】

【発明が解決しようとする課題】上記したように、従来
の蓄積映像・音声伝送装置においては、低レート映像・
音声伝送と高レート映像・音声伝送で、同一の通信回線
を使用し、これらの映像・音声伝送を瞬時に切り替え
て、映像・音声を伝送する装置はなかった。このため、
低レート映像・音声伝送中に高レート映像・音声伝送を
要求することができず、低レート映像・音声伝送終了後
に改めて高レート映像・音声伝送を要求していた。この
結果、高レート映像・音声入手のための要求を即時に行
うことができないこと、低レート映像・音声伝送に要す
る時間と高レート映像伝送に要する時間の合計時間後に
初めて高レート映像・音声を再生することが可能になる
ことなど、利便性が損なわれていた。

【０００５】また、従来の蓄積映像・音声伝送装置で
は、一旦符号化データの伝送・蓄積が終了するまで蓄積
映像・音声の内容を再生することができなかったため、
伝送中に映像・音声が正しいことを確認することができ
ず、伝送中の映像・音声が間違えていた場合、伝送が終
了するまで間違えていたことを確認することができなか
った。また、伝送中に映像・音声を再生することができ
なかったため、伝送がどこまで進んだかを伝送中に知る
方法がなかった。

【０００６】本発明は、上記問題点を解決するためにな
されたものであり、その目的は、低レート映像・音声伝
送中に高レート映像・音声伝送のための要求を可能にす
ることにより、蓄積映像・音声伝送により伝送される高
レート映像・音声の再生開始までにかかる時間の短縮、
高レート映像・音声入手のための要求を即時に行うこと
ができることによる利便性の高い蓄積映像・音声伝送装
置を実現することにある。また、蓄積映像・音声伝送中
に伝送されている映像・音声を再生することにより、蓄
積映像・音声伝送している映像・音声を確認するための
手段を提供する蓄積映像・音声伝送装置を実現すること
にある。

【０００７】

【課題を解決するための手段】上記の目的を達成するた
め、請求項１の発明では、通信回線を介して符号化した
映像・音声データを伝送する蓄積映像・音声伝送方法に
おいて、受信側から送信側に対して低レート符号化した
映像・音声データと少なくとも高レート符号化した映像
データを含む映像・音声データの切り替え要求を発し得
るようにし、送信側が前記切り替え要求に応じて前記低
レート符号化した映像・音声データの伝送と前記高レー
ト符号化した映像データを含む映像・音声データの伝送
を切り替えることとした。

【０００８】また、請求項２の発明では、通信回線を介
して互いに接続された送信装置と受信装置から構成され
る蓄積映像・音声伝送装置において、受信装置に、受信
した符号化データを蓄積する蓄積手段と、該受信したも
しくは該蓄積した符号化データの映像・音声多重分離手
段と、低レート映像復号化手段と、低レート音声復号化
手段と、高レート映像復号化手段と、送信装置の低レー
ト映像符号化手段ならびに低レート音声符号化手段によ
って符号化した符号化データと高レート映像符号化手段
ならびに前記低レート音声符号化手段によって符号化し
た符号化データとの切り替えを要求する手段と、を有
し、送信装置に、前記低レート映像符号化手段と、前記
低レート音声符号化手段と、前記高レート映像符号化手
段と、それらによる符号化データを多重化する映像・音
声多重化手段と、該多重化された符号化データを蓄積す
る蓄積手段と、前記低レート映像符号化手段ならびに前
記低レート音声符号化手段によって符号化したもしくは
該符号化し前記蓄積した符号化データと前記高レート映
像符号化手段と前記低レート音声符号化手段によって符
号化し前記蓄積した符号化データを前記受信装置の切り
替え要求手段からの要求に応じて切り替えて伝送する手
段と、を有する構成とした。

【０００９】また、請求項３の発明では、上記構成の装
置において、受信装置が、低レート映像復号化手段の他
に高レート音声復号化手段を有し、該受信装置における
切り替えを要求する手段が、送信装置の低レート映像符
号化手段ならびに低レート音声符号化手段によって符号
化した符号化データと高レート映像符号化手段ならびに
高レート音声符号化手段によって符号化した符号化デー
タとの切り替えを要求するものであり、送信装置が、低
レート音声符号化手段の他に高レート音声符号化手段を
有し、該送信装置における要求に応じて切り替えて伝送
する手段が、低レート映像符号化手段ならびに前記低レ
ート音声符号化手段によって符号化したもしくは該符号
化し蓄積した符号化データと高レート映像符号化手段な
らびに前記高レート音声符号化手段によって符号化し蓄
積した符号化データを前記切り替えを要求する手段から
の要求に応じて切り替えて伝送するものとした。

【００１０】また、請求項４の発明では、上記構成の装
置において、受信装置に、受信中の映像を表示する手段
を有することとし、具体的には、請求項５の発明に示す
ように、受信中の映像を表示する手段として、一映像フ
レームを検出する手段と、該検出した一映像フレームを
前記検出する手段が次の一映像フレームを検出するまで
保持する手段とを有し、該保持する手段の映像フレーム
を表示するものとした。

【００１１】さらに、請求項６の発明では、上記請求項
４の装置構成において、受信装置に、受信した符号化デ
ータの蓄積と同時にすでに受信し蓄積した符号化データ
の読み出しが可能な蓄積手段を備え、前記受信し蓄積し
た高レート映像符号化手段によって符号化した符号化デ
ータを同一のレートで再生する手段と、スロー再生する
手段と、早送り再生する手段のうち、一以上の手段を有
するものとし、具体的には、請求項７の発明に示すよう
に、符号化データを同一のレートで再生する手段と、ス
ロー再生する手段と、早送り再生する手段とが、蓄積手
段に蓄積した映像フレームを識別して、順次再生した
り、数個おきに再生したり、同じ映像フレームを数回連
続して再生したりするものとした。

【００１２】

【作用】請求項１の発明では、受信側の要求に応じて、
送信側が低レート符号化した映像・音声符号化データ
と、少なくとも高レート符号化した映像データを含む映
像・音声符号化データを切り替えて伝送することによ
り、蓄積映像伝送により伝送される高レート映像・音声
の表示開始までにかかる時間の短縮、高レート映像・音
声入手のための要求の即時化を実現し、伝送中の映像の
確認、高レート映像の表示開始までの時間がかかるとい
った従来の蓄積映像・音声伝送装置の有している問題点
を解決する。

【００１３】請求項２の発明では、受信装置に上記の切
り替えを要求する手段を設けて、その要求を送信装置に
発し得るようにし、送信装置には、少なくとも高レート
符号化した映像データを含む映像・音声符号化データを
蓄積する手段に蓄積しておいて、上記の要求に応じて低
レート符号化した映像・音声符号化データと、少なくと
も高レート符号化した映像データを含む映像・音声符号
化データを切り替えて当該受信装置に伝送することで、
上記の伝送方法を実現する装置を提供する。

【００１４】請求項３の発明では、上記の請求項２の発
明の装置において、送信装置が高レート符号化で映像デ
ータを符号化する際、音声データも高レート符号化する
ことにより、受信装置側において高品質の映像とともに
高品質の音声を入手可能にする。

【００１５】請求項４および請求項５の発明では、例え
ば、受信装置において、高レート符号化した映像符号化
データの一映像フレームを検出する毎に表示を行うこと
で、伝送中の映像をスローモーションとして再生するこ
とにより、蓄積映像伝送中には映像内容の確認ができな
いという従来の蓄積映像・音声伝送装置の有している問
題点を解決する。

【００１６】請求項６および請求項７の発明では、受信
装置において、受信中の映像・音声符号化データを蓄積
手段に蓄積すると同時に、すでに受信し蓄積した映像デ
ータについて、高レート符号化と同一レートで、例え
ば、順次再生、数個おきの再生、重複再生を行うことに
より、その時点での伝送終了部分の映像の通常速度での
再生、早送り再生、スロー再生を可能にして利便性を増
す。

【００１７】

【実施例】以下、本発明の実施例を、図面を参照して詳
細に説明する。

【００１８】＜実施例１＞まず、本発明の実施例におけ
る映像符号化データの構成例を示す。

【００１９】図１はその映像符号化データの構成図であ
る。図１において、１１はピクチャヘッダ、１２はフレ
ームデータ、即ち符号化された一映像フレームの符号化
データである。映像符号化データにおいて、一映像フレ
ームはピクチャヘッダ１１により識別することができ
る。

【００２０】図２に伝送フレームの構成図を示す。図２
において、２１は複数の映像フレームを含む伝送フレー
ム、２２はＢＡＳ符号、２３はサブチャネルである。図
２は、ＣＣＩＴＴ勧告のＨ．２２１の伝送フレーム構成
である。映像符号化された信号は、伝送時には図２の伝
送フレーム２１を単位として伝送される。各伝送フレー
ム２１にはＢＡＳ（Ｂｉｔ Ａｌｌｏｃａｔｉｏｎ Ｓ
ｉｇｎａｌ）符号２２がある。ＢＡＳ符号を用いること
により、映像信号、音声信号に割り当てる通信回線容量
を切り替えるなど、マルチメディア多重構造を変更する
ことができる。

【００２１】図３に本発明の実施例１のブロック構成図
を示す。本実施例１は、通信回線を介して符号化した映
像・音声データを伝送する場合において、受信側から送
信側に対して低レート符号化した映像・音声データと高
レート符号化した映像・音声データの切り替え要求を発
し得るようにし、送信側が前記切り替え要求に応じて低
レート符号化と高レート符号化を切り替える蓄積映像・
音声伝送方法を実現するための構成を示している。

【００２２】図において、３００は送信装置、３０１は
受信装置、３７はそれらを互いに接続する通信回線であ
る。送信装置３００を構成するものとして、３１は高レ
ート映像符号化部、３２は低レート映像符号化部、３３
は送信側蓄積装置、３４は映像切替部、３５はマルチメ
ディア（ＭＭ）多重化部、３６は送信側通信制御部、３
１９は音声符号化部、３２０はマルチメディア多重化部
である。また、受信装置３０１を構成するものとして、
３８は受信側通信制御部、３９はマルチメディア多重分
離部、３１０は受信側蓄積装置、３１１はスイッチ、３
１２はピクチャヘッダ検出部、３１３はバッファ、３１
４は映像復号化部、３１５はフレームメモリ、３１６は
再生速度制御部、３１７はピクチャヘッダ管理部、３１
８は高品質映像要求部、３１２は音声復号化部である。

【００２３】なお、図３の構成には、後記する他の実施
例を実施するための構成も含まれており、以下の実施例
１の説明ではそれらの説明を除く。

【００２４】本実施例１では、送信装置３００と受信装
置３０１の双方の通信制御部に映像・音声の他に、例え
ばＨ．２２１のＬＳＤ（Ｌｏｗ Ｓｐｅｅｄ Ｄａｔ
ａ）によりデータを伝送する機能を持たせ、受信装置３
０１に送信装置３００へ低レート映像・音声伝送と高レ
ート映像・音声伝送とを切り替えることを要求する高品
質映像要求部３２１を設けて、その要求を上記Ｈ．２２
１のＬＳＤで伝送可能とする。送信装置３００には、こ
の要求を受け取った場合に、カメラから入力した映像を
順次低レートで符号化している映像符号化データ、或い
は、送信側蓄積装置３３に蓄積している低レート映像符
号化データの伝送を一旦終了して、蓄積装置３３に蓄積
している高レート映像・音声符号化データの伝送に切り
替える映像切替部３４を設ける。また、この映像切替部
３４に、受信装置３０１から再度低レート映像・音声伝
送と高レート映像・音声伝送とを切り替える要求がなさ
れるか、もしくは高レート映像・音声符号化データの伝
送終了後に、自動的に低レート映像・音声符号化データ
の伝送を再開する機能を持たせる。

【００２５】図３を用いて本発明の実施例１の動作を説
明する。本実施例１では、低レート映像・音声伝送中
に、送信装置３００、受信装置３０１のデータ通信機能
により、受信装置３０１から送信装置３００へ高品質映
像・音声を伝送するための高レート映像・音声伝送への
切理替えを要求する。この要求が受信装置３０１から送
信装置３００になされた場合、伝送中の低レート映像・
音声伝送を一旦終了し、高レート映像・音声伝送を行
う。再度切り替え要求があるか、もしくは高レート映像
・音声伝送終了後に自動的に低レート映像・音声伝送を
再開する。低レート映像・音声伝送と高レート映像・音
声伝送の切り替えは、送信装置３００から送出されるＢ
ＡＳ（Ｂｉｔ Ａｌｌｏｃａｔｉｏｎ Ｓｉｇｎａｌ）
符号により行われる。以下、上記の動作について詳しく
説明する。

【００２６】低レート映像符号化された映像符号化デー
タは、情報量が少ないため、元の映像信号が例えば１０
秒間であれば、伝送自体に要する時間も１０秒間で済
む。

【００２７】図略のカメラから入力した映像を直接伝送
する場合には、低レート符号化部３２で符号化した映像
符号化データと音声符号化部３１９で符号化した音声符
号化データをマルチメディア多重化部３５でマルチメデ
ィア多重化し、映像切替部３４、通信制御部３６を介し
て伝送する。一方、予め映像を蓄積しておいて伝送する
場合には、送信装置３００では、まず同じ映像を高レー
ト映像符号化部３１で符号化した映像符号化データと、
低レート映像符号化部３２で符号化した映像符号化デー
タを、音声符号化部３１９で符号化された音声符号化デ
ータとマルチメディア多重化部３５，３２０で多重化
し、送信側蓄積装置３３に格納しておく。低レート映像
符号化された映像符号化データを伝送する場合には、送
信側蓄積装置３３から低レート映像符号化された映像符
号化データを含むマルチメディア多重データが再生さ
れ、映像切替部３４を介して、通信制御部３６に転送さ
れる。このマルチメディア多重データは、送信側通信制
御部３６、通信回線３７、受信側通信制御部３８を介し
て転送された後、受信側蓄積装置３１０に蓄積されると
同時に、受信側蓄積装置３１０からスイッチ３１１を通
してマルチメディア多重分離部３９に転送される。マル
チメディア多重分離された音声符号化データは、音声復
号化部３２１で復号化される。映像符号化データはバッ
ファ３１３へ転送され、映像復号化部３１４で復号化さ
れてフレームメモリ３１５に保持され、図略のディスプ
レイに表示される。この時、伝送速度と低レート符号化
レートが同じであるため、原映像信号と同じ時間間隔で
再生・表示が行われる。

【００２８】次に、上記低レート映像符号化された映像
符号化データの伝送中に、高品質映像を要求する場合の
動作について説明する。低レート映像符号化された映像
符号化データの伝送中に高品質映像を入手するときに
は、受信装置３０１で高品質映像要求部３１８から要求
を受信側通信制御部３８、通信回線３７を介して送信装
置に要求する。この要求は、前述したように例えばＣＣ
ＩＴＴ勧告のＨ．２２１のＬＳＤ（Ｌｏｗ Ｓｐｅｅｄ
Ｄａｔａ）を用いて伝送することができる。この要求
は、映像フレーム伝送とは無関係に伝送される。

【００２９】送信装置３００では、高品質映像の要求を
受けると、送信側通信制御部３６によりその要求を映像
切替部３４へ転送する。映像切替部３４は、低レート符
号化部３２と音声符号化部３１９により符号化され、マ
ルチメディア多重化部３２０で多重化されたマルチメデ
ィア多重データ、もしくは送信側蓄積装置３３の低レー
ト映像符号化されたマルチメディア多重データの現在転
送中の映像フレームの転送が終了した後、高レート映像
符号化されたマルチメディア多重データを再生してその
伝送を開始する。高レート映像符号化されたマルチメデ
ィア多重データへの切り替えは、図２の伝送フレーム構
成のＢＡＳ符号２２により行う。

【００３０】受信装置３０１では、受信側通信制御部３
８によりＢＡＳ符号２２が検知されると、再生速度制御
部３１６、ピクチャヘッダ管理部３１７に高レート映像
符号化された映像符号化データの伝送になったことを通
知する。ピクチャヘッダ管理部３１７では、低レート映
像符号化された映像符号化データと、高レート映像符号
化された映像符号化データを区別し、管理する。

【００３１】高レート映像符号化された映像符号化デー
タの伝送終了後には、カメラから入力した映像を低レー
ト映像符号化していた場合には、自動的に低レート映像
符号化された映像符号化データの伝送を再開する。

【００３２】なお、高レート映像符号化された映像符号
化データ伝送中に、再生速度制御部３１６から再生速度
を指示し、ピクチャヘッダ管理部３１７により再生を行
う映像フレームを制御する事により、高レート映像符号
化された映像符号化データ伝送中にその映像を表示する
ことができる。詳しくは、実施例３で述べる。

【００３３】＜実施例２＞図４は、本発明の実施例２の
ブロック構成図である。本実施例２は、高レート映像符
号化された映像符号化データ伝送中に、受信装置におい
て受信中の高レート映像符号化された映像を表示する実
施例である。

【００３４】図４において、４００は送信装置、４０１
は受信装置、４４はそれらを互いに接続する通信回線で
ある。送信装置４００を構成するものとして、４１は映
像符号化部、４２は送信側蓄積装置、４３はマルチメデ
ィア多重化部、４１１は音声符号化部である。また、受
信装置４０１を構成するものとして、４５はマルチメデ
ィア多重分離部、４６は受信側蓄積装置、４７はピクチ
ャヘッダ検出部、４８はバッファ、４９は映像復号化
部、４１０はフレームメモリ、４１２は音声復号化部で
ある。なお、図４では、本実施例の動作説明に必要な構
成要素のみを示してあり、通信制御部等は省略してあ
る。

【００３５】図４を用いて本発明の実施例２の動作を説
明する。本実施例２は、高レート映像・音声伝送中に、
受信装置において受信中の高レート映像符号化された映
像を表示するために、送信装置４００では映像符号化デ
ータのフレームの先頭を表す印、ピクチャヘッダをつけ
る。受信装置４０１ではピクチャヘッダを受信する毎に
映像符号化データの復号化を行い伝送中の映像を表示す
る。表示した映像を、その次の映像フレームを表すピク
チャヘッダが受信されるまで、保持することにより蓄積
映像・音声伝送中に伝送している映像をスローモーショ
ンとして表示することができ、伝送中に映像内容の確認
を行うことができる。以下、その動作を詳しく述べる。

【００３６】送信装置４００では、映像符号部４１で符
号化した映像符号化データと音声符号化部４１１で符号
化した音声符号化データをマルチメディア多重化部４３
で多重化し、一旦送信側蓄積装置４２に蓄積し、通信回
線４４を介して受信装置４０１へ伝送する。

【００３７】受信装置４０１では、通信回線４４を介し
て伝送されてきたマルチメディア多重データを受信側蓄
積装置４６に蓄積すると同時に、ピクチャヘッダ検出部
４７により、ピクチャヘッダ１１の存否を判定する。ま
た、これらと並行してバッファ４８にフレームデータ１
２（映像符号化データ）を蓄える。映像符号化データに
おいて、映像フレームは図１のピクチャヘッダ１１によ
り識別することができ、蓄積映像伝送の際に映像復号化
を行う前に映像信号の同期を確立することができる。ピ
クチャヘッダ１１がピクチャヘッダ検出部４７で検出さ
れた場合、マルチメディア多重分離部４５により映像符
号化データと音声符号化データに分離された後、一映像
フレームに相当する図１のフレームデータ１２（映像符
号化データ）がバッファ４８から映像復号化部４９に転
送され復号化される。この復号化された映像フレームは
フレームメモリ４１０に転送され、図略のディスプレイ
に表示される。フレームメモリ４１０は、次のピクチャ
ヘッダがピクチャヘッダ検出部４７で検出されるまで、
現在の映像を保持している。音声符号化データは音声復
号化部４１２で復号化される。

【００３８】このように受信装置４０１では、映像・音
声符号化データからピクチャヘッダを検出する毎に、そ
れまでバッファ４８に蓄えられていた映像符号化データ
を映像復号化する。この復号化された映像フレームは即
ち現在伝送中の映像であり、これはフレームメモリ４１
０に転送され、次の映像フレームが復号化されるまでの
間保持されてディスプレイに表示されるので、伝送中の
映像の内容を受信装置４０１で確認しながら伝送するこ
とが可能となる。

【００３９】上記のピクチャヘッダは、映像符号化レー
トに対応した間隔毎に現れる。一方、伝送速度は低いの
でピクチャヘッダが現れる間隔はもとの映像フレームの
時間間隔よりも広くなるため、伝送中の映像はスローモ
ーションとして表示されることになる。例えば、映像符
号化部４１の符号化レートが２Ｍｂ／ｓであり毎秒３０
フレームの映像を伝送する場合、通信回線４４の伝送速
度が１２８Ｋｂ／ｓとすると、一映像フレームあたりの
情報量は６６．７Ｋビットとなり、０．５２秒毎にフレ
ームメモリ２１０に保持されている映像が更新されるこ
とになる。即ち、１５．６分の１倍速のスローモーショ
ンで、蓄積映像伝送中の映像を、受信側蓄積装置４６に
蓄積すると同時にフレームメモリ４１０に保持し、表示
することができる。もちろん、蓄積が終了した後には、
受信側蓄積装置４６に蓄積した映像符号化データを映像
復号化部４９で復号化することも可能であることは言う
までもない。

【００４０】＜実施例３＞図５は、本発明の実施例３の
ブロック構成図である。本実施例３は、高レート符号化
された映像を伝送中に、受信装置においてその時点まで
に受信した高レート映像符号化データを再生、もしくは
早送り再生、もしくはスロー再生する実施例である。

【００４１】図５において、５００は送信装置、５０１
は受信装置、５４はそれらを互いに接続する通信回線で
ある。送信装置５００を構成するものとして、５１は映
像符号化部、５２は送信側蓄積装置、５３はマルチメデ
ィア多重化部、５１４は音声符号化部である。また、受
信装置５０１を構成するものとして、５５はマルチメデ
ィア復号化部、５６は受信側蓄積装置、５７はピクチャ
ヘッダ検出部、５８はバッファ、５９は映像復号化部、
５１０はフレームメモリ、５１１はピクチャヘッダ管理
部、５１２は再生速度制御部、５１３はスイッチ、５１
５は音声復号化部である。なお、図５でも、本実施例３
の動作説明に必要な構成要素のみを示してあり、通信制
御部等は省略してある。

【００４２】本実施例３では、高レート符号化された映
像を伝送中に、受信装置５０１においてその時点までに
受信した高レート映像符号化データを通常速度での再
生、早送り再生、スロー再生するために、受信装置５０
１に映像・音声符号化データを蓄積及び再生が同時に行
える蓄積装置５６を設け、それにより高レート映像符号
化データを蓄積する。また、本実施例３では、受信装置
５０１において、再生速度制御部５１２に、通常速度で
の再生、早送り再生、スロー再生を制御する機能を持た
せ、ピクチャヘッダ管理部５１１に、再生速度制御部５
１２の制御によって、受信側蓄積装置５６から通常速度
で映像符号化データを再生する機能のほかに、早送り再
生のためにピクチャヘッダを数個おきに映像符号化デー
タを再生する機能、スロー再生のために同じピクチャヘ
ッダに対応した映像符号化データを数回連続して再生す
る機能を持たせる。

【００４３】図５を用いて本発明の実施例３の動作を説
明する。本実施例３では、蓄積映像・音声伝送を行って
いる途中に、受信装置５０１での指示により、蓄積動作
を継続しながらその時点まで蓄積手段に蓄積されている
映像音声符号化データを符号化時の符号化レートで復号
化することにより通常速度での再生を行い、また、その
際にピクチャヘッダを管理することにより早送り再生や
スロー再生を行う。この動作は送信装置５００には関係
なく、受信装置５０１のみで行う。この時には、伝送さ
れてくる映像・音声符号化データは受信側蓄積装置５６
に蓄積されるのみであり、上記実施例２の動作は行わな
い。その代わりに、復号化動作を受信側蓄積装置５６か
ら再生した映像・音声符号化データを用いて行う。早送
り再生動作は、蓄積装置５６の数個おきのピクチャヘッ
ダに対応した符号化データを再生することにより実現す
る。一方、スロー再生は、同じピクチャヘッダに対応し
た符号化データを数回連続して再生することにより実現
する。これらの動作は受信中に可能であるのみならず、
受信終了後にも同様の操作が可能であることは、明らか
である。以下、上記の動作を詳しく説明する。

【００４４】蓄積映像伝送中にスローモーションとして
伝送中の映像を表示するための動作は、スイッチ５１３
がマルチメディア多重分離部５５からの映像符号化デー
タをバッファ５８へ転送するように再生速度制御部５１
２により設定することにより、実施例２と同様に可能で
ある。

【００４５】本実施例３では、上記実施例２の受信中映
像表示を終了し、蓄積映像伝送を行っている途中に、受
信装置５０１でその時点まで受信側蓄積装置５６に蓄積
されているマルチメディア多重データを、ピクチャヘッ
ダを管理して符号化時の符号化レートで復号化する事に
より、通常速度での再生、任意可変速度での再生（早送
り、スロー再生）を行う。この動作は送信装置５００に
は関係なく、受信装置５０１側のみで行う。この動作時
には、通信回線５４を介して伝送されてくるマルチメデ
ィア多重データは受信側蓄積装置５６に蓄積される。マ
ルチメディア多重分離部５５で分離した後、映像符号化
データについては、スイッチ５１３は再生速度制御部５
１２により、受信側蓄積装置５６、マルチメディア多重
分離部５５から出力される映像符号化データのみをバッ
ファ５８に転送するように設定されるので、伝送中映像
のスローモーション表示は行わない。

【００４６】通常速度での再生時は、再生速度制御部５
１２により、ピクチャヘッダ管理部５１１を、連続的に
マルチメディア多重データを受信側蓄積装置５６から再
生するように制御する。受信側蓄積装置５６から再生さ
れ、マルチメディア多重分離部で分離された映像符号化
データはスイッチ５１３によりバッファ５８に転送さ
れ、映像復号化部５９で映像信号に復号化され、フレー
ムメモリ５１０に転送される。音声符号化データはマル
チメディア分離された後、音声復号化部５１５で復号化
される。

【００４７】早送り再生時には、再生速度制御部５１２
は、ピクチャヘッダ管理部５１１を、例えば２つおき、
３つおきといった間隔で図１のフレームデータ１２（映
像符号化データ）を受信側蓄積装置５６から出力するよ
うに制御する。スイッチ５１３以後の動作は通常速度で
の再生時と同様である。

【００４８】スロー再生時には、再生速度制御部５１２
は、ピクチャヘッダ管理部５１１を、受信側蓄積装置５
６からのマルチメディア多重データの出力が、例えば５
／３０秒に１フレームといった、間欠的に行われるよう
に制御する。受信側蓄積装置５６から出力されたマルチ
メディア多重データはマルチメディア多重分離部５５で
分離され、スイッチ５１３によりバッファ５８に転送さ
れる。映像復号化部５９で復号化された映像信号はフレ
ームメモリ５１０に転送される。次の映像フレームを復
号化・表示するタイミングは、再生速度制御部５１２に
より制御され、フレームメモリ５１０は次の映像信号が
復号化されるまで、現在の映像信号を保持している。

【００４９】上記の通常速度、可変速度での再生は、蓄
積映像伝送中のみならず、伝送終了後においても実行可
能であることは先にも述べた通りである。

【００５０】なお、以上の実施例では、高レート符号化
した映像データとともに伝送する音声データとして低レ
ート符号化した音声データを用いる例を示したが、送信
装置に低レート音声符号化手段（例えば、図１の音声符
号化部３１９）とは別に高レート音声符号化手段を設
け、これにより高レート符号化した音声データを高レー
ト符号化した映像データと多重化する音声データとして
も良い。この場合、受信側では、高品質な映像とともに
高品質な音声が入手可能になる。

【００５１】

【発明の効果】以上の説明で明らかなように、本発明の
蓄積映像・音声伝送方法とその装置は、低レート映像・
音声伝送中に少なくとも高レート映像を含む映像・音声
伝送のための要求を可能とし、この時、低レート映像・
音声伝送を一旦終了し少なくとも高レート映像を含む映
像・音声伝送を行うので、蓄積映像・音声伝送により伝
送される高レート映像の表示開始までにかかる時間を短
縮することができるとともに、高レート映像入手のため
の要求を即時に行うことができ、利便性の高い蓄積映像
伝送を実現することができる。

【００５２】また、請求項３の発明によれば、特に、受
信側の切り替えの要求に応じて高レート映像とともに高
レート音声を伝送することが可能である。すなわち、受
信側において、高品質な映像とともに、高品質な音声を
入手できる。

【００５３】また、請求項４の発明によれば、特に、蓄
積映像・音声伝送中に伝送している映像をスローモーシ
ョンとして表示することができ、伝送中に映像内容の確
認を行うことができる。

【００５４】また、請求項５の発明によれば、特に、符
号化データの各映像フレームを受信する毎に符号化デー
タの復号化を行いその映像を次の映像フレームの受信ま
で保持して伝送中の映像を表示するので、容易に伝送中
の映像表示ができる。

【００５５】また、請求項６の発明によれば、特に、受
信中の映像データの蓄積を継続しながら、その時点まで
に蓄積されている映像部分の通常速度での再生、早送り
再生、スロー再生を行うことができる。これにより、従
来の蓄積映像・音声伝送装置のように一旦蓄積が終了す
るまで内容を表示・確認することができないといった不
具合や、伝送がどこまで進んだかを映像で確認すること
ができないといった不都合がなくなり、蓄積映像・音声
伝送中に伝送されている映像を表示することができるよ
うになる。

【００５６】さらに、請求項７の発明によれば、特に、
上記の通常速度での再生、早送り再生、スロー再生が容
易に行える。

【図面の簡単な説明】

【図１】本発明の実施例における映像符号化データの構
成例を示す図

【図２】本発明の実施例における伝送フレームの構成例
を示す図

【図３】本発明の実施例１のブロック構成図

【図４】本発明の実施例２のブロック構成図

【図５】本発明の実施例３のブロック構成図

【符号の説明】

１１…ピクチャヘッダ １２…フレームデータ ２１…伝送フレーム ２２…ＢＡＳ符号 ２３…サブチャネル ３１…高レート映像符号化部 ３２…低レート映像符号化部 ３３…送信側蓄積装置 ３４…映像切替部 ３５…マルチメディア多重化部 ３６…送信側通信制御部 ３７…通信回線 ３８…受信側通信制御部 ３９…マルチメディア多重分離部 ３１０…受信側蓄積装置 ３１１…スイッチ ３１２…ピクチャヘッダ検出部 ３１３…バッファ ３１４…映像復号化部 ３１５…フレームメモリ ３１６…再生速度制御部 ３１７…ピクチャヘッダ管理部 ３１８…高品質映像要求部 ３１９…音声符号化部 ３２０…音声復号化部 ４１…映像符号化部 ４２…送信側蓄積装置 ４３…マルチメディア多重化部 ４４…通信回線 ４５…マルチメディア多重分離部 ４６…受信側蓄積装置 ４７…ピクチャヘッダ検出部 ４８…バッファ ４９…映像復号化部 ４１０…フレームメモリ ４１１…音声符号化部 ４１２…音声復号化部 ５１…映像符号化部 ５２…送信側蓄積装置 ５３…マルチメディア多重化部 ５４…通信回線 ５５…マルチメディア多重分離部 ５６…受信側蓄積装置 ５７…ピクチャヘッダ検出部 ５８…バッファ ５９…映像復号化部 ５１０…フレームメモリ ５１１…ピクチャヘッダ管理部 ５１２…再生速度制御部 ５１３…スイッチ ５１４…音声符号化部 ５１５…音声復号化部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 中野 愼夫 東京都千代田区内幸町１丁目１番６号 日 本電信電話株式会社内

Claims (7)

【特許請求の範囲】
1. 【請求項１】 通信回線を介して符号化した映像・音声
   データを伝送する蓄積映像・音声伝送方法において、 受信側から送信側に対して低レート符号化した映像・音
   声データと少なくとも高レート符号化した映像データを
   含む映像・音声データの切り替え要求を発し得るように
   し、 送信側が前記切り替え要求に応じて前記低レート符号化
   した映像・音声データの伝送と前記高レート符号化した
   映像データを含む映像・音声データの伝送を切り替える
   ことを特徴とする蓄積映像・音声伝送方法。
2. 【請求項２】 通信回線を介して互いに接続された送信
   装置と受信装置から構成される蓄積映像・音声伝送装置
   において、 受信装置に、受信した符号化データを蓄積する蓄積手段
   と、該受信したもしくは該蓄積した符号化データの映像
   ・音声多重分離手段と、低レート映像復号化手段と、低
   レート音声復号化手段と、高レート映像復号化手段と、
   送信装置の低レート映像符号化手段ならびに低レート音
   声符号化手段によって符号化した符号化データと高レー
   ト映像符号化手段ならびに前記低レート音声符号化手段
   によって符号化した符号化データとの切り替えを要求す
   る手段と、を有し、 送信装置に、前記低レート映像符号化手段と、前記低レ
   ート音声符号化手段と、前記高レート映像符号化手段
   と、それらによる符号化データを多重化する映像・音声
   多重化手段と、該多重化された符号化データを蓄積する
   蓄積手段と、前記低レート映像符号化手段ならびに前記
   低レート音声符号化手段によって符号化したもしくは該
   符号化し前記蓄積した符号化データと前記高レート映像
   符号化手段と前記低レート音声符号化手段によって符号
   化し前記蓄積した符号化データを前記受信装置の切り替
   え要求手段からの要求に応じて切り替えて伝送する手段
   と、を有することを特徴とする蓄積映像・音声伝送装
   置。
3. 【請求項３】 受信装置が、低レート映像復号化手段の
   他に高レート音声復号化手段を有し、該受信装置におけ
   る切り替えを要求する手段が、送信装置の低レート映像
   符号化手段ならびに低レート音声符号化手段によって符
   号化した符号化データと高レート映像符号化手段ならび
   に高レート音声符号化手段によって符号化した符号化デ
   ータとの切り替えを要求するものであり、 送信装置が、低レート音声符号化手段の他に高レート音
   声符号化手段を有し、該送信装置における要求に応じて
   切り替えて伝送する手段が、低レート映像符号化手段な
   らびに前記低レート音声符号化手段によって符号化した
   もしくは該符号化し蓄積した符号化データと高レート映
   像符号化手段ならびに前記高レート音声符号化手段によ
   って符号化し蓄積した符号化データを前記切り替えを要
   求する手段からの要求に応じて切り替えて伝送するもの
   であることを特徴とする請求項２記載の蓄積映像・音声
   伝送装置。
4. 【請求項４】 請求項２または請求項３記載の蓄積映像
   ・音声伝送装置において、受信装置に、受信中の映像を
   表示する手段を有することを特徴とする蓄積映像・音声
   伝送装置。
5. 【請求項５】 受信中の映像を表示する手段が、一映像
   フレームを検出する手段と、該検出した一映像フレーム
   を前記検出する手段が次の一映像フレームを検出するま
   で保持する手段とを有し、該保持する手段の映像フレー
   ムを表示するものであることを特徴とする請求項４記載
   の蓄積映像・音声伝送装置。
6. 【請求項６】 請求項４記載の蓄積映像・音声伝送装置
   において、受信装置に、受信した符号化データの蓄積と
   同時にすでに受信し蓄積した符号化データの読み出しが
   可能な蓄積手段を備え、前記受信し蓄積した高レート映
   像符号化手段によって符号化した符号化データを同一の
   レートで再生する手段と、スロー再生する手段と、早送
   り再生する手段のうち、一以上の手段を有することを特
   徴とする蓄積映像・音声伝送装置。
7. 【請求項７】 符号化データを同一のレートで再生する
   手段と、スロー再生する手段と、早送り再生する手段と
   が、蓄積手段に蓄積した映像フレームを識別して、順次
   再生したり、数個おきに再生したり、同じ映像フレーム
   を数回連続して再生したりするものであることを特徴と
   する請求項６記載の蓄積映像・音声伝送装置。