JPH11127435A - 圧縮符号化された映像／音声信号の復号化装置 - Google Patents
圧縮符号化された映像／音声信号の復号化装置Info
- Publication number
- JPH11127435A JPH11127435A JP28991597A JP28991597A JPH11127435A JP H11127435 A JPH11127435 A JP H11127435A JP 28991597 A JP28991597 A JP 28991597A JP 28991597 A JP28991597 A JP 28991597A JP H11127435 A JPH11127435 A JP H11127435A
- Authority
- JP
- Japan
- Prior art keywords
- time
- decoding
- unit
- coding unit
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2368—Multiplexing of audio and video streams
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
(57)【要約】
【課題】 圧縮符号化された映像，音声信号を同期復号
化できるようにする。 【解決手段】 圧縮符号化されて多重化された映像，音
声信号にその復号化時刻を示すタイムスタンプTSPなど
が挿入されたシステムストリームSSがシステムデコーダ
部２に供給され、これらが分離される。圧縮符号化され
た映像信号と音声信号が夫々デコーダ３ａ，３ｂに供給
されて符号化単位毎に復号される。また、タイムスタン
プTSPが同期制御部５に供給される。同期制御部５は、
タイムスタンプTSPを受けると、デコーダ３ａ，３ｂに
マーク刻印指示を送り、これに応じてマーク刻印の対象
となる符号化単位の復号化タイミングでマーク検出信号
が送られてくると、このタイムスタンプTSPと現在時刻S
TCとからこの対象となる符号化単位の復号化が遅れてい
るか、早まっているかを判定し、この判定結果に応じて
デコーダ３ａ，３ｂの復号動作を早めたり、送らせたり
する。
化できるようにする。 【解決手段】 圧縮符号化されて多重化された映像，音
声信号にその復号化時刻を示すタイムスタンプTSPなど
が挿入されたシステムストリームSSがシステムデコーダ
部２に供給され、これらが分離される。圧縮符号化され
た映像信号と音声信号が夫々デコーダ３ａ，３ｂに供給
されて符号化単位毎に復号される。また、タイムスタン
プTSPが同期制御部５に供給される。同期制御部５は、
タイムスタンプTSPを受けると、デコーダ３ａ，３ｂに
マーク刻印指示を送り、これに応じてマーク刻印の対象
となる符号化単位の復号化タイミングでマーク検出信号
が送られてくると、このタイムスタンプTSPと現在時刻S
TCとからこの対象となる符号化単位の復号化が遅れてい
るか、早まっているかを判定し、この判定結果に応じて
デコーダ３ａ，３ｂの復号動作を早めたり、送らせたり
する。
Description
【０００１】
【発明の属する技術分野】本発明は、圧縮符号化された
映像信号や音声信号の復号化装置に関する。
映像信号や音声信号の復号化装置に関する。
【０００２】
【従来の技術】ディジタル化された映像信号や音声信号
（以下、ディジタル映像／音声信号という）は膨大な情
報量を有している。このため、かかるディジタル映像／
音声信号を磁気ディスクなどの記録媒体に長時間にわた
ってそのまま記録しようとすると、非常に大きい記憶容
量が必要になるし、また、かかるディジタル映像／音声
信号を有線または無線でもってリアルタイムで伝送しよ
うとすると、データのビットレートが高いことから、広
帯域な伝送路が必要であり、いずれの場合もコストが嵩
むことになる。そこで、信号処理によって映像／音声デ
ータを効率良く符号化し、データ量を削減するための符
号化方式がいくつか提案されている。このような符号化
方式の１つとしては、ＭＰＥＧ（例えば、「OPTRONIC
S」；1992 No.5 pp.８６−９８の“蓄積媒体における符
号化”に記載されている）がある。
（以下、ディジタル映像／音声信号という）は膨大な情
報量を有している。このため、かかるディジタル映像／
音声信号を磁気ディスクなどの記録媒体に長時間にわた
ってそのまま記録しようとすると、非常に大きい記憶容
量が必要になるし、また、かかるディジタル映像／音声
信号を有線または無線でもってリアルタイムで伝送しよ
うとすると、データのビットレートが高いことから、広
帯域な伝送路が必要であり、いずれの場合もコストが嵩
むことになる。そこで、信号処理によって映像／音声デ
ータを効率良く符号化し、データ量を削減するための符
号化方式がいくつか提案されている。このような符号化
方式の１つとしては、ＭＰＥＧ（例えば、「OPTRONIC
S」；1992 No.5 pp.８６−９８の“蓄積媒体における符
号化”に記載されている）がある。
【０００３】ＭＰＥＧでは、符号化の対象となる映像／
音声信号を所定の期間毎に区切り、夫々の区切りを１つ
の符号化単位として符号化されている。
音声信号を所定の期間毎に区切り、夫々の区切りを１つ
の符号化単位として符号化されている。
【０００４】例えば、映像信号の場合、図７に示すよう
に、１フレーム期間の画像をピクチャと呼ばれる１つの
単位として符号化を行なう。このピクチャが連続したも
のが映像信号のエレメンタリストリームと呼ばれる符号
化列になっている。また、音声信号の場合も同様に、図
８に示すように、所定の期間（１オーディオフレーム期
間）に含まれる音声データをオーディオフレームと呼ば
れる１つの単位として符号化を行なう。オーディオフレ
ームが連続したものが音声のエレメンタリストリームで
ある。
に、１フレーム期間の画像をピクチャと呼ばれる１つの
単位として符号化を行なう。このピクチャが連続したも
のが映像信号のエレメンタリストリームと呼ばれる符号
化列になっている。また、音声信号の場合も同様に、図
８に示すように、所定の期間（１オーディオフレーム期
間）に含まれる音声データをオーディオフレームと呼ば
れる１つの単位として符号化を行なう。オーディオフレ
ームが連続したものが音声のエレメンタリストリームで
ある。
【０００５】ところで、このようにして符号化された映
像信号や音声信号のエレメンタリストリームには、再生
時刻に関する情報は含まれていない。このため、そのま
までは、特定の映像信号や音声信号のエレメンタリスト
リームを相互に同期させて復号化することができない。
そこで、同期再生を可能にすることを目的として、ＭＰ
ＥＧでは、以下に述べるように、時刻情報を符号化する
ことができるようにしている。
像信号や音声信号のエレメンタリストリームには、再生
時刻に関する情報は含まれていない。このため、そのま
までは、特定の映像信号や音声信号のエレメンタリスト
リームを相互に同期させて復号化することができない。
そこで、同期再生を可能にすることを目的として、ＭＰ
ＥＧでは、以下に述べるように、時刻情報を符号化する
ことができるようにしている。
【０００６】上記のエレメンタリストリームの上位階層
に、システムレイヤと呼ばれる階層が設けられ、このシ
ステムレイヤに対応する符号化列はシステムストリーム
と呼ばれている。
に、システムレイヤと呼ばれる階層が設けられ、このシ
ステムレイヤに対応する符号化列はシステムストリーム
と呼ばれている。
【０００７】図９はシステムストリームの概念を示す図
である。同図において、システムストリームは、その内
部に映像信号のエレメンタリストリームと音声信号との
エレメンタリストリームを、一般に、複数チャンネル分
時分割多重化して包含しており、さらに、これに付加情
報（ヘッダ情報）が定期的に挿入されている。
である。同図において、システムストリームは、その内
部に映像信号のエレメンタリストリームと音声信号との
エレメンタリストリームを、一般に、複数チャンネル分
時分割多重化して包含しており、さらに、これに付加情
報（ヘッダ情報）が定期的に挿入されている。
【０００８】かかるヘッダ情報には、図１０に示すよう
に、システムストリームの該当位置における時刻情報
や、後述するタイムスタンプが含まれている。
に、システムストリームの該当位置における時刻情報
や、後述するタイムスタンプが含まれている。
【０００９】時刻情報は、それ自身が復号化システム側
に入力された時点の時刻（即ち、現在時刻）を表わすも
のである。復号化システム側では、これを利用して内蔵
の内部時計が校正され、この時刻情報が表わす時刻に合
わされる。例えば、図１０において、システムストリー
ムに含まれる順次の時刻情報が時刻Ｔ０，Ｔ１，Ｔ２，
……を表わしているものとすると、かかる時刻情報を受
ける毎に、この内部時計はその時刻をＴ０，Ｔ１，Ｔ
２，……と校正される。これにより、符号化システム側
が意図している時間軸を復号化システム側で再現するこ
とが可能となる。
に入力された時点の時刻（即ち、現在時刻）を表わすも
のである。復号化システム側では、これを利用して内蔵
の内部時計が校正され、この時刻情報が表わす時刻に合
わされる。例えば、図１０において、システムストリー
ムに含まれる順次の時刻情報が時刻Ｔ０，Ｔ１，Ｔ２，
……を表わしているものとすると、かかる時刻情報を受
ける毎に、この内部時計はその時刻をＴ０，Ｔ１，Ｔ
２，……と校正される。これにより、符号化システム側
が意図している時間軸を復号化システム側で再現するこ
とが可能となる。
【００１０】また、タイムスタンプは、エレメンタリス
トリーム中のそれが挿入されている時点以後の最初の符
号化単位（ピクチャやオーディオフレーム）が、復号化
システムにおいて、復号化されるべき時刻を示す情報で
ある。例えば、図１０において、システムストリームＳ
Ｓのヘッダ情報に含まれるタイムスタンプＤn以後の最
初の符号化単位をピクチャＰnとすると、このタイムス
タンプＤnはこのピクチャＰnが復号化されるべき時刻を
示している。
トリーム中のそれが挿入されている時点以後の最初の符
号化単位（ピクチャやオーディオフレーム）が、復号化
システムにおいて、復号化されるべき時刻を示す情報で
ある。例えば、図１０において、システムストリームＳ
Ｓのヘッダ情報に含まれるタイムスタンプＤn以後の最
初の符号化単位をピクチャＰnとすると、このタイムス
タンプＤnはこのピクチャＰnが復号化されるべき時刻を
示している。
【００１１】そこで、内部時計が表わす時間軸上でのタ
イムスタンプが表わす時刻に、そのタイムスタンプで指
定される符号化単位（ピクチャとこれに対応するオーデ
ィオフレーム）を復号化することにより、映像信号や音
声信号は復号化システムの内部時計に同期して復号化さ
れることになり、結果的に、映像信号と音声信号相互の
同期再生が可能となる。
イムスタンプが表わす時刻に、そのタイムスタンプで指
定される符号化単位（ピクチャとこれに対応するオーデ
ィオフレーム）を復号化することにより、映像信号や音
声信号は復号化システムの内部時計に同期して復号化さ
れることになり、結果的に、映像信号と音声信号相互の
同期再生が可能となる。
【００１２】
【発明が解決しようとする課題】ところで、上記のよう
に、システムストリームにおいては、映像信号や音声信
号など、一般には、複数チャンネルのエレメンタリスト
リームが多重化されている。そのために、その復号化を
行なうためには、図１１に示すように、システムデコー
ダで、まず、システムストリームから映像信号や音声信
号夫々のエレメンタリストリームを分離抽出し、しかる
後、夫々を専用の復号器（エレメンタリデコーダ）で復
号化することが必要がある。
に、システムストリームにおいては、映像信号や音声信
号など、一般には、複数チャンネルのエレメンタリスト
リームが多重化されている。そのために、その復号化を
行なうためには、図１１に示すように、システムデコー
ダで、まず、システムストリームから映像信号や音声信
号夫々のエレメンタリストリームを分離抽出し、しかる
後、夫々を専用の復号器（エレメンタリデコーダ）で復
号化することが必要がある。
【００１３】しかし、上記のタイムスタンプは、エレメ
ンタリストリームではなく、システムストリームのヘッ
ダ情報中に含まれているため、システムストリームから
上記のエレメンタリストリームを分離抽出した時点で、
タイムスタンプと符号化単位（ピクチャやオーディオフ
レーム）との対応関係が失われてしまい、タイムスタン
プを利用した同期復号化ができないという問題がある。
ンタリストリームではなく、システムストリームのヘッ
ダ情報中に含まれているため、システムストリームから
上記のエレメンタリストリームを分離抽出した時点で、
タイムスタンプと符号化単位（ピクチャやオーディオフ
レーム）との対応関係が失われてしまい、タイムスタン
プを利用した同期復号化ができないという問題がある。
【００１４】本発明の目的は、かかる問題を解消し、復
号化時でのタイムスタンプと符号化単位との対応関係が
維持し、同期復号化を可能とした圧縮符号化された映像
／音声信号の復号化装置を提供することにある。
号化時でのタイムスタンプと符号化単位との対応関係が
維持し、同期復号化を可能とした圧縮符号化された映像
／音声信号の復号化装置を提供することにある。
【００１５】
【課題を解決するための手段】上記目的を達成するため
に、、本発明は、映像信号や音声信号が符号化単位毎に
圧縮符号化されて多重化された多重ストリームに、該符
号化単位の復号化時刻を指定するタイムスタンプと符号
化システムで指定する現在時刻を表わす第１の時刻情報
とが符号化単位毎に付加可能としたシステムストリーム
が供給され、圧縮符号化された該映像信号や音声信号を
該符号化単位毎に復号化する圧縮符号化された映像／音
声信号の復号化装置であって、該システムストリームか
ら該圧縮符号化された映像信号や音声信号と、該タイム
スタンプと、該第１の時刻情報とを分離するシステムデ
コーダ部と、該圧縮符号化された該映像信号や音声信号
を符号化単位毎に復号化するエレメンタリデコーダ部
と、クロックをカウントし、そのカウント値を該時刻情
報で校正して該現在時刻を表わす第２の時刻情報として
出力する内部時計と、該タイムスタンプと該第２の時刻
情報とに応じて該エレメンタリデコーダ部の復号化動作
を制御する同期制御部とを有し、該同期制御部は、シス
テムデコーダ部で分離された該タイムスタンプを記憶す
るタイムスタンプ記憶手段と、システムデコーダ部から
該タイムスタンプが供給されると、該エレメンタリデコ
ーダ部にマーカ刻印の指示を送るマーカ刻印指示手段
と、該マーカ刻印の指示に伴って該該エレメンタリデコ
ーダ部から送られてくるマーカ検出信号を受信すると、
内部時計からの該第２の時刻情報が表わす現在時刻と該
タイムスタンプ記憶手段に記憶された該タイムスタンプ
が表わす符号化単位の復号化時刻とを比較する比較手段
と、該第２の時刻情報による現在時刻よりも該タイムス
タンプによる符号化単位の復号化時刻が進んでいること
を該比較手段の比較結果が表わしているとき、待機指示
を出力し、該第２の時刻情報による現在時刻よりも該タ
イムスタンプによる符号化単位の復号化時刻が遅れてい
ることを該比較手段の比較結果が表わしているとき、破
棄指示を出力する同期補正手段ととからなり、該エレメ
ンタリデコーダ部は、該マーカ刻印の指示に応じて所定
の該符号化単位の復号化時点を検出して該マーカ検出信
号を出力し、かつ該待機指示と破棄指示とにより、復号
化処理が制御されて、該圧縮符号化された映像信号や音
声信号の復号化処理時点を、該第２の時刻情報が表わす
時間軸上で該タイムスタンプが表わす時刻とする。
に、、本発明は、映像信号や音声信号が符号化単位毎に
圧縮符号化されて多重化された多重ストリームに、該符
号化単位の復号化時刻を指定するタイムスタンプと符号
化システムで指定する現在時刻を表わす第１の時刻情報
とが符号化単位毎に付加可能としたシステムストリーム
が供給され、圧縮符号化された該映像信号や音声信号を
該符号化単位毎に復号化する圧縮符号化された映像／音
声信号の復号化装置であって、該システムストリームか
ら該圧縮符号化された映像信号や音声信号と、該タイム
スタンプと、該第１の時刻情報とを分離するシステムデ
コーダ部と、該圧縮符号化された該映像信号や音声信号
を符号化単位毎に復号化するエレメンタリデコーダ部
と、クロックをカウントし、そのカウント値を該時刻情
報で校正して該現在時刻を表わす第２の時刻情報として
出力する内部時計と、該タイムスタンプと該第２の時刻
情報とに応じて該エレメンタリデコーダ部の復号化動作
を制御する同期制御部とを有し、該同期制御部は、シス
テムデコーダ部で分離された該タイムスタンプを記憶す
るタイムスタンプ記憶手段と、システムデコーダ部から
該タイムスタンプが供給されると、該エレメンタリデコ
ーダ部にマーカ刻印の指示を送るマーカ刻印指示手段
と、該マーカ刻印の指示に伴って該該エレメンタリデコ
ーダ部から送られてくるマーカ検出信号を受信すると、
内部時計からの該第２の時刻情報が表わす現在時刻と該
タイムスタンプ記憶手段に記憶された該タイムスタンプ
が表わす符号化単位の復号化時刻とを比較する比較手段
と、該第２の時刻情報による現在時刻よりも該タイムス
タンプによる符号化単位の復号化時刻が進んでいること
を該比較手段の比較結果が表わしているとき、待機指示
を出力し、該第２の時刻情報による現在時刻よりも該タ
イムスタンプによる符号化単位の復号化時刻が遅れてい
ることを該比較手段の比較結果が表わしているとき、破
棄指示を出力する同期補正手段ととからなり、該エレメ
ンタリデコーダ部は、該マーカ刻印の指示に応じて所定
の該符号化単位の復号化時点を検出して該マーカ検出信
号を出力し、かつ該待機指示と破棄指示とにより、復号
化処理が制御されて、該圧縮符号化された映像信号や音
声信号の復号化処理時点を、該第２の時刻情報が表わす
時間軸上で該タイムスタンプが表わす時刻とする。
【００１６】この場合、タイムスタンプは所定の符号化
単位が復号化される時刻を表わすものであるから、圧縮
された映像信号と音声信号でのこの所定の符号化単位
は、第２の時刻情報で表わされる時間軸上でのこのタイ
ムスタンプで表わされる時刻に復号化されることにな
り、従って、圧縮された映像信号と音声信号とが互いに
関連し合うものであるときには、これら映像信号と音声
信号とは同期して復号化されることになる。
単位が復号化される時刻を表わすものであるから、圧縮
された映像信号と音声信号でのこの所定の符号化単位
は、第２の時刻情報で表わされる時間軸上でのこのタイ
ムスタンプで表わされる時刻に復号化されることにな
り、従って、圧縮された映像信号と音声信号とが互いに
関連し合うものであるときには、これら映像信号と音声
信号とは同期して復号化されることになる。
【００１７】
【発明の実施の形態】以下、本発明の実施形態を図面に
より説明する。図１は本発明による圧縮符号化された映
像／音声信号の復号化装置の第１の実施形態を示すブロ
ック図であって、１は入力端子、２はシステムデコーダ
部、３ａ，３ｂはエレメンタリデコーダ部、４はＳＴＣ
カウンタ、５は同期制御部、６ａ，６ｂは出力端子であ
る。
より説明する。図１は本発明による圧縮符号化された映
像／音声信号の復号化装置の第１の実施形態を示すブロ
ック図であって、１は入力端子、２はシステムデコーダ
部、３ａ，３ｂはエレメンタリデコーダ部、４はＳＴＣ
カウンタ、５は同期制御部、６ａ，６ｂは出力端子であ
る。
【００１８】同図において、入力端子１からシステムス
トリームＳＳが入力し、システムデコーダ部部２に供給
される。このシステムデコーダ部２では、システムスト
リームＳＳが解析されることにより、映像信号のエレメ
ンタリストリーム（以下、映像エレメンタリストリーム
という）ＶＥＳと音声信号のエレメンタリストリーム
（以下、音声エレメンタリストリームという）ＡＥＳと
に分離され、夫々エレメンタリデコーダ部３ａ，３ｂに
供給される。また、システムデコーダ部２では、システ
ムストリームＳＳのヘッダ情報ＨＥＤから現在時刻を表
わす時刻情報ＳＣＲが抽出されてＳＴＣカウンタ４に供
給され、さらに、ヘッダ情報ＨＥＤから符号化単位の復
号化時刻を指定するタイムスタンプＴＳＰが抽出されて
同期制御部５に供給される。
トリームＳＳが入力し、システムデコーダ部部２に供給
される。このシステムデコーダ部２では、システムスト
リームＳＳが解析されることにより、映像信号のエレメ
ンタリストリーム（以下、映像エレメンタリストリーム
という）ＶＥＳと音声信号のエレメンタリストリーム
（以下、音声エレメンタリストリームという）ＡＥＳと
に分離され、夫々エレメンタリデコーダ部３ａ，３ｂに
供給される。また、システムデコーダ部２では、システ
ムストリームＳＳのヘッダ情報ＨＥＤから現在時刻を表
わす時刻情報ＳＣＲが抽出されてＳＴＣカウンタ４に供
給され、さらに、ヘッダ情報ＨＥＤから符号化単位の復
号化時刻を指定するタイムスタンプＴＳＰが抽出されて
同期制御部５に供給される。
【００１９】ＳＴＣカウンタ４は、内部クロックをカウ
ントして時刻を計時し、時刻情報ＳＴＣを出力する時計
であり、システムデコーダ部２から時刻情報ＳＣＲを受
け取ると、これによって時刻が校正される。従って、こ
のＳＴＣカウンタ４からの時刻情報ＳＴＣは、入力され
るシステムストリームＳＳが含む時間軸、即ち、時刻情
報ＳＴＣが表わす時刻に常に同期し、図示しない符号化
システム側が意図している時間軸を復号化装置で再現さ
れることになる。
ントして時刻を計時し、時刻情報ＳＴＣを出力する時計
であり、システムデコーダ部２から時刻情報ＳＣＲを受
け取ると、これによって時刻が校正される。従って、こ
のＳＴＣカウンタ４からの時刻情報ＳＴＣは、入力され
るシステムストリームＳＳが含む時間軸、即ち、時刻情
報ＳＴＣが表わす時刻に常に同期し、図示しない符号化
システム側が意図している時間軸を復号化装置で再現さ
れることになる。
【００２０】図２は図１における映像信号用のエレメン
タリデコーダ部３ａの一具体例を示すブロック図であっ
て、７は入力バッファメモリ、８は復号化部、９はマー
カ刻印部、１０はマーカ検出部である。
タリデコーダ部３ａの一具体例を示すブロック図であっ
て、７は入力バッファメモリ、８は復号化部、９はマー
カ刻印部、１０はマーカ検出部である。
【００２１】同図において、システムデコーダ部２（図
１）から供給される映像エレメンタリストリームＶＥＳ
は、一旦入力バッファバッファメモリ７に記憶されてか
ら符号化単位であるピクチャ毎に復号化部８によって逐
次読み出され、映像信号に復号化されて出力端子６ａか
ら出力される。
１）から供給される映像エレメンタリストリームＶＥＳ
は、一旦入力バッファバッファメモリ７に記憶されてか
ら符号化単位であるピクチャ毎に復号化部８によって逐
次読み出され、映像信号に復号化されて出力端子６ａか
ら出力される。
【００２２】マーカ刻印部９は、同期制御部５（図１）
からマーカ刻印の指示を受け取ると、この指示の直後に
システムデコーダ部２（図１）から供給され始める映像
エレメンタリストリームＶＥＳのピクチャに目印（マー
カ）をつける。例えば、図６に示すように、いま、映像
信号のエレメンタリストリームＶＥＳのピクチャＰ２の
期間内にマーカ刻印の指示を受けたとすると、この指示
を受けた後に最初に供給され始めるピクチャＰ３の先頭
部分に特定のパターンを持つデータをマーカとして挿入
し、入力バッファメモリ７に蓄えるようにする。
からマーカ刻印の指示を受け取ると、この指示の直後に
システムデコーダ部２（図１）から供給され始める映像
エレメンタリストリームＶＥＳのピクチャに目印（マー
カ）をつける。例えば、図６に示すように、いま、映像
信号のエレメンタリストリームＶＥＳのピクチャＰ２の
期間内にマーカ刻印の指示を受けたとすると、この指示
を受けた後に最初に供給され始めるピクチャＰ３の先頭
部分に特定のパターンを持つデータをマーカとして挿入
し、入力バッファメモリ７に蓄えるようにする。
【００２３】また、マーカ検出部１０は、入力バッファ
メモリ７から読み出されて復号化部８に供給される映像
エレメンタリストリームＶＥＳを常時監視し、マーカ刻
印部９によって挿入されてマーカを検出すると、その時
点でマーカ検出信号を発生して同期制御部５（図１）に
供給する。これにより、同期制御部５は、マーカが挿入
されたピクチャの符号化部８への供給時点を知ることが
できる。
メモリ７から読み出されて復号化部８に供給される映像
エレメンタリストリームＶＥＳを常時監視し、マーカ刻
印部９によって挿入されてマーカを検出すると、その時
点でマーカ検出信号を発生して同期制御部５（図１）に
供給する。これにより、同期制御部５は、マーカが挿入
されたピクチャの符号化部８への供給時点を知ることが
できる。
【００２４】なお、この同期制御部５から復号化部８に
待機／破棄指示ＷＡＩＴ／ＤＲＯＰが供給されるが、こ
れについては後述する。
待機／破棄指示ＷＡＩＴ／ＤＲＯＰが供給されるが、こ
れについては後述する。
【００２５】図１における音声信号用のエレメンタリデ
コーダ部３ｂも、映像信号用のエレメンタリデコーダ部
３ａと同様であり、オーディオフレームについて同様の
処理がなされる。従って、その説明を省略する。
コーダ部３ｂも、映像信号用のエレメンタリデコーダ部
３ａと同様であり、オーディオフレームについて同様の
処理がなされる。従って、その説明を省略する。
【００２６】図３は図１での同期制御部５の一具体例を
示すブロック図であって、１１はマーカ刻印指示部、１
２はタイムスタンプ記憶部、１３は比較部、１４は同期
補正部、１５ａは映像同期制御ブロック、１５ｂは音声
同期制御ブロックである。
示すブロック図であって、１１はマーカ刻印指示部、１
２はタイムスタンプ記憶部、１３は比較部、１４は同期
補正部、１５ａは映像同期制御ブロック、１５ｂは音声
同期制御ブロックである。
【００２７】同図において、同期制御部５は映像同期制
御ブロック１５ａと音声同期制御ブロック１５ｂとから
構成されている。なお、これら映像同期制御ブロック１
５ａと音声同期制御ブロック１５ｂとは同様の構成をな
し、同様の動作を行なうので、ここでは、映像同期制御
ブロック１５ａについて説明する。
御ブロック１５ａと音声同期制御ブロック１５ｂとから
構成されている。なお、これら映像同期制御ブロック１
５ａと音声同期制御ブロック１５ｂとは同様の構成をな
し、同様の動作を行なうので、ここでは、映像同期制御
ブロック１５ａについて説明する。
【００２８】映像同期制御ブロック１５ａは、マーカ刻
印指示部１１とタイムスタンプ記憶部１２と比較部１３
と同期補正部１４とから構成されている。
印指示部１１とタイムスタンプ記憶部１２と比較部１３
と同期補正部１４とから構成されている。
【００２９】マーカ刻印指示部１１は、システムデコー
ダ部２からタイムスタンプＴＳＰを受けると、映像信号
用のエレメンタリデコーダ部３ａにマーカ刻印の指示を
与える。
ダ部２からタイムスタンプＴＳＰを受けると、映像信号
用のエレメンタリデコーダ部３ａにマーカ刻印の指示を
与える。
【００３０】タイムスタンプ記憶部１２は、システムデ
コーダ部２からのタイムスタンプＴＳＰを記憶する。
コーダ部２からのタイムスタンプＴＳＰを記憶する。
【００３１】比較部１３は、映像信号用のエレメンタリ
デコーダ部３ａ（図１）からマーカ検出信号を受け取る
と、タイムスタンプ記憶部１２に記憶されているタイム
スタンプＴＳＰの値（ピクチャの復号化時刻）とＳＴＣ
カウンタ４（図１）からの時刻情報ＳＴＣの値（現在時
刻）とを比較し、その比較結果を同期補正部１４に供給
する。
デコーダ部３ａ（図１）からマーカ検出信号を受け取る
と、タイムスタンプ記憶部１２に記憶されているタイム
スタンプＴＳＰの値（ピクチャの復号化時刻）とＳＴＣ
カウンタ４（図１）からの時刻情報ＳＴＣの値（現在時
刻）とを比較し、その比較結果を同期補正部１４に供給
する。
【００３２】同期補正部１４は、比較部１３の比較結果
により、時刻情報ＳＴＣが表わす現在時刻よりもタイム
スタンプＴＳＰの復号化時刻の方が進んでいる場合に
は、復号化部８（図２）での復号化が本来の復号化すべ
き時刻より早まっている（即ち、現在復号化されるべき
ピクチャＰnよりも後のピクチャＰ(n+α)が復号化され
る状態にある）と判断して、映像信号用のエレメンタリ
デコーダ部３ａ（図１）に待機指示ＷＡＩＴを送り、時
刻情報ＳＴＣが表わす現在時刻がタイムスタンプＴＳＰ
が表わす時刻に追い付いた時点で待機指示ＷＡＩＴを解
除する。
により、時刻情報ＳＴＣが表わす現在時刻よりもタイム
スタンプＴＳＰの復号化時刻の方が進んでいる場合に
は、復号化部８（図２）での復号化が本来の復号化すべ
き時刻より早まっている（即ち、現在復号化されるべき
ピクチャＰnよりも後のピクチャＰ(n+α)が復号化され
る状態にある）と判断して、映像信号用のエレメンタリ
デコーダ部３ａ（図１）に待機指示ＷＡＩＴを送り、時
刻情報ＳＴＣが表わす現在時刻がタイムスタンプＴＳＰ
が表わす時刻に追い付いた時点で待機指示ＷＡＩＴを解
除する。
【００３３】そこで、図２において、映像信号用のエレ
メンタリデコーダ部３ａでは、同期制御部５から待機指
示ＷＡＩＴを受けると、復号化部８が映像エレメンタリ
ストリームＶＥＳのピクチャの復号化処理をα個のピク
チャの期間分一時停止し、しかる後、この復号化処理を
再開する。
メンタリデコーダ部３ａでは、同期制御部５から待機指
示ＷＡＩＴを受けると、復号化部８が映像エレメンタリ
ストリームＶＥＳのピクチャの復号化処理をα個のピク
チャの期間分一時停止し、しかる後、この復号化処理を
再開する。
【００３４】このようにして、映像信号用のエレメンタ
リデコーダ部３ａでの復号化処理が本来の時刻よりも進
み過ぎている場合には、本来の正しい時刻に合うよう
に、復号化処理を遅らせることができ、これにより、正
しい時刻で復号化処理を行なうことができる。
リデコーダ部３ａでの復号化処理が本来の時刻よりも進
み過ぎている場合には、本来の正しい時刻に合うよう
に、復号化処理を遅らせることができ、これにより、正
しい時刻で復号化処理を行なうことができる。
【００３５】また、図３において、同期補正部１４で
は、比較部１３の比較結果により、時刻情報ＳＴＣが表
わす現在時刻よりもタイムスタンプＴＳＰが表わす復号
化すべき時刻の方が遅れて場合には、映像信号用のエレ
メンタリデコーダ部３ａの復号化部８での復号化処理が
本来の時刻より遅くれている（即ち、現在復号化される
べきピクチャＰnよりも前のピクチャＰ(n+β)が復号化
される状態にある）と判断し、映像信号用のエレメンタ
リデコーダ部３ａに破棄指示ＤＲＯＰを送る。ここで、
１ピクチャに相当する期間は既知であるので、同期補正
部１４では、時刻ＳＴＣの時刻とタイムスタンプＴＳＰ
の現在時刻との差分（即ち、時間差）がどのくらいのピ
クチャ分に相当するかを計算し、そのピクチャ個数分だ
け繰り返し破棄指示ＤＲＯＰ指示を出力する。
は、比較部１３の比較結果により、時刻情報ＳＴＣが表
わす現在時刻よりもタイムスタンプＴＳＰが表わす復号
化すべき時刻の方が遅れて場合には、映像信号用のエレ
メンタリデコーダ部３ａの復号化部８での復号化処理が
本来の時刻より遅くれている（即ち、現在復号化される
べきピクチャＰnよりも前のピクチャＰ(n+β)が復号化
される状態にある）と判断し、映像信号用のエレメンタ
リデコーダ部３ａに破棄指示ＤＲＯＰを送る。ここで、
１ピクチャに相当する期間は既知であるので、同期補正
部１４では、時刻ＳＴＣの時刻とタイムスタンプＴＳＰ
の現在時刻との差分（即ち、時間差）がどのくらいのピ
クチャ分に相当するかを計算し、そのピクチャ個数分だ
け繰り返し破棄指示ＤＲＯＰ指示を出力する。
【００３６】そこで、図２において、エレメンタリデコ
ーダ部３ａでは、同期制御部５からの破棄指示ＤＲＯＰ
を受ける毎にその直後の１ピクチャ分を破棄し（即ち、
入力バッファメモリ７からのピクチャの読出しを飛ば
し）、この破棄指示ＤＲＯＰが供給されなくなると、そ
の次のピクチャから復号化処理を再開する。
ーダ部３ａでは、同期制御部５からの破棄指示ＤＲＯＰ
を受ける毎にその直後の１ピクチャ分を破棄し（即ち、
入力バッファメモリ７からのピクチャの読出しを飛ば
し）、この破棄指示ＤＲＯＰが供給されなくなると、そ
の次のピクチャから復号化処理を再開する。
【００３７】このようにして、映像信号用のエレメンタ
リデコーダ部３ａでの復号化処理が本来の時刻よりも遅
れ過ぎている場合には、本来の正しい時刻に合うよう
に、復号化処理を早めることができ、これにより、正し
い時刻で復号化処理を行なうことができる。
リデコーダ部３ａでの復号化処理が本来の時刻よりも遅
れ過ぎている場合には、本来の正しい時刻に合うよう
に、復号化処理を早めることができ、これにより、正し
い時刻で復号化処理を行なうことができる。
【００３８】以上のように、この第１の実施形態では、
特定のタイムスタンプＴＳＰとそれに対応する符号化さ
れた映像信号のピクチャや符号化された音声信号のオー
ディオフレームとの対応関係を保つことができる。従っ
て、映像信号及び音声信号夫々を、タイムスタンプＴＳ
Ｐで時刻情報ＳＴＣに同期させて復号化処理することが
でき、これにより、映像信号と音声信号を相互に同期再
生することが可能になる。
特定のタイムスタンプＴＳＰとそれに対応する符号化さ
れた映像信号のピクチャや符号化された音声信号のオー
ディオフレームとの対応関係を保つことができる。従っ
て、映像信号及び音声信号夫々を、タイムスタンプＴＳ
Ｐで時刻情報ＳＴＣに同期させて復号化処理することが
でき、これにより、映像信号と音声信号を相互に同期再
生することが可能になる。
【００３９】図４は本発明による圧縮符号化された映像
／音声信号の復号化装置の第２の実施形態を示すブロッ
ク図であって、１６はＭＰＵ−Ｉ／Ｆ部、１７はＭＰＵ
作業用メモリ、１８はＭＰＵであり、図１に対応する部
分には同一符号をつけて重複する説明を省略する。
／音声信号の復号化装置の第２の実施形態を示すブロッ
ク図であって、１６はＭＰＵ−Ｉ／Ｆ部、１７はＭＰＵ
作業用メモリ、１８はＭＰＵであり、図１に対応する部
分には同一符号をつけて重複する説明を省略する。
【００４０】この第２の実施形態は、主として、図１に
おける同期制御部５を汎用のＭＰＵ（マイクロプロセサ
ユニット）を用いて構成したものであって、図４に示す
ように、かかる同期制御部５は、ＭＰＵ１８とＭＰＵ作
業用メモリ１７とで構成されて、ＭＰＵ−Ｉ／Ｆ部１６
を介して、システムデコーダ部２や映像信号用のエレメ
ンタリデコーダ部３ａ，音声信号用のエレメンタリデコ
ーダ部３ｂと接続されている。また、図１でのＳＴＣカ
ウンタ４としては、ＭＰＵ１８に内蔵のカウンタを利用
している。
おける同期制御部５を汎用のＭＰＵ（マイクロプロセサ
ユニット）を用いて構成したものであって、図４に示す
ように、かかる同期制御部５は、ＭＰＵ１８とＭＰＵ作
業用メモリ１７とで構成されて、ＭＰＵ−Ｉ／Ｆ部１６
を介して、システムデコーダ部２や映像信号用のエレメ
ンタリデコーダ部３ａ，音声信号用のエレメンタリデコ
ーダ部３ｂと接続されている。また、図１でのＳＴＣカ
ウンタ４としては、ＭＰＵ１８に内蔵のカウンタを利用
している。
【００４１】システムデコーダ部２で入力システムスト
リームＳＳのヘッダ情報ＨＥＤから抽出された時刻情報
ＳＣＲは、インターフェイス回路であるＭＰＵ−Ｉ／Ｆ
部１６を介してＭＰＵ１８に供給される。ＭＰＵ１８
は、この時刻情報ＳＣＲをＭＰＵ−Ｉ／Ｆ部１６を経由
して受け取り、これによって内蔵のＳＴＣカウンタ４の
カウント値（即ち、現在時刻）を校正する。
リームＳＳのヘッダ情報ＨＥＤから抽出された時刻情報
ＳＣＲは、インターフェイス回路であるＭＰＵ−Ｉ／Ｆ
部１６を介してＭＰＵ１８に供給される。ＭＰＵ１８
は、この時刻情報ＳＣＲをＭＰＵ−Ｉ／Ｆ部１６を経由
して受け取り、これによって内蔵のＳＴＣカウンタ４の
カウント値（即ち、現在時刻）を校正する。
【００４２】また、システムデコーダ部２で入力システ
ムストリームＳＳのヘッダ情報ＨＥＤから抽出されたタ
イムスタンプＴＳＰも、ＭＰＵ−Ｉ／Ｆ部１６を介して
ＭＰＵ１８に供給される。ＭＰＵ１８は、このタイムス
タンプＴＳＰを受け取ると、ＭＰＵ−Ｉ／Ｆ部１６を介
して映像信号用のエレメンタリデコーダ部３ａや音声信
号用のエレメンタリデコーダ部３ｂにマーカ刻印の指示
を与える。これと同時に、ソフトウエア処理により、Ｍ
ＰＵ作業用メモリ１７内の所定の位置にこのタイムスタ
ンプＴＳＰを記憶させる。
ムストリームＳＳのヘッダ情報ＨＥＤから抽出されたタ
イムスタンプＴＳＰも、ＭＰＵ−Ｉ／Ｆ部１６を介して
ＭＰＵ１８に供給される。ＭＰＵ１８は、このタイムス
タンプＴＳＰを受け取ると、ＭＰＵ−Ｉ／Ｆ部１６を介
して映像信号用のエレメンタリデコーダ部３ａや音声信
号用のエレメンタリデコーダ部３ｂにマーカ刻印の指示
を与える。これと同時に、ソフトウエア処理により、Ｍ
ＰＵ作業用メモリ１７内の所定の位置にこのタイムスタ
ンプＴＳＰを記憶させる。
【００４３】上記のようにして、映像信号用のエレメン
タリデコーダ部３ａや音声信号用のエレメンタリデコー
ダ部３ｂから出力されるマーカ検出信号は、ＭＰＵ−Ｉ
／Ｆ部１６を介し、割込要求としてＭＰＵ１８に供給さ
れる。ＭＰＵ１８は、この割込要求を取り込むと、ＳＴ
Ｃカウンタ４のカウント値が表わす現在時刻とＭＰＵ作
業用メモリ１７に記憶されているタイムスタンプＴＳＰ
の復号すべき時刻とを比較し、この比較の結果、復号化
処理が本来の時刻より進み過ぎている場合には、ＭＰＵ
−Ｉ／Ｆ部１６経由で待機指示ＷＡＩＴを映像信号用の
エレメンタリデコーダ部３ａや音声信号用のエレメンタ
リデコーダ部３ｂに送る。逆に、復号化処理が本来の時
刻より遅れている場合には、ＭＰＵ−Ｉ／Ｆ部１６経由
で破棄指示ＤＲＯＰを映像信号用のエレメンタリデコー
ダ部３ａや信号用のエレメンタリデコーダ部３ｂに送
る。
タリデコーダ部３ａや音声信号用のエレメンタリデコー
ダ部３ｂから出力されるマーカ検出信号は、ＭＰＵ−Ｉ
／Ｆ部１６を介し、割込要求としてＭＰＵ１８に供給さ
れる。ＭＰＵ１８は、この割込要求を取り込むと、ＳＴ
Ｃカウンタ４のカウント値が表わす現在時刻とＭＰＵ作
業用メモリ１７に記憶されているタイムスタンプＴＳＰ
の復号すべき時刻とを比較し、この比較の結果、復号化
処理が本来の時刻より進み過ぎている場合には、ＭＰＵ
−Ｉ／Ｆ部１６経由で待機指示ＷＡＩＴを映像信号用の
エレメンタリデコーダ部３ａや音声信号用のエレメンタ
リデコーダ部３ｂに送る。逆に、復号化処理が本来の時
刻より遅れている場合には、ＭＰＵ−Ｉ／Ｆ部１６経由
で破棄指示ＤＲＯＰを映像信号用のエレメンタリデコー
ダ部３ａや信号用のエレメンタリデコーダ部３ｂに送
る。
【００４４】以上のように、この第２の実施形態におい
ても、映像信号と音声信号を同期させて復号化処理する
ことが可能となる。
ても、映像信号と音声信号を同期させて復号化処理する
ことが可能となる。
【００４５】また、汎用のＭＰＵを用いているため、上
記の同期制御処理のほかに、処理能力に余裕がある限
り、例えば、復号化システム全体の制御のように、他の
作業を行なうこともできるので、システム全体としての
回路規模を削減し、コストを低減させることが可能とな
る。
記の同期制御処理のほかに、処理能力に余裕がある限
り、例えば、復号化システム全体の制御のように、他の
作業を行なうこともできるので、システム全体としての
回路規模を削減し、コストを低減させることが可能とな
る。
【００４６】図５は本発明による圧縮符号化された映像
／音声信号の復号化装置の第３の実施形態におけるエレ
メンタリデコーダ部を示すブロック図であって、１９，
２０はピクチャ数カウンタであり、図２に対応する部分
には同一符号をつけて重複する説明を省略する。なお、
ここでは、映像信号用のエレメンタリデコーダ部３ａに
ついて説明するが、音声信号用のエレメンタリデコーダ
部３ｂもこれと同様であるので、その説明を省略する。
／音声信号の復号化装置の第３の実施形態におけるエレ
メンタリデコーダ部を示すブロック図であって、１９，
２０はピクチャ数カウンタであり、図２に対応する部分
には同一符号をつけて重複する説明を省略する。なお、
ここでは、映像信号用のエレメンタリデコーダ部３ａに
ついて説明するが、音声信号用のエレメンタリデコーダ
部３ｂもこれと同様であるので、その説明を省略する。
【００４７】この第３の実施形態は、映像信号用のエレ
メンタリデコーダ部３ａにおけるマーカの付け方が先の
実施形態と異なるものである。
メンタリデコーダ部３ａにおけるマーカの付け方が先の
実施形態と異なるものである。
【００４８】同図において、ピクチャ数カウンタ１９
は、入力バッファメモリ７の中に記憶されているピクチ
ャの個数を示すカウンタである。入力バッファメモリ７
にピクチャが書き込まれる度に、ピクチャ数カウンタ１
９のカウント値が１ずつ増加し、入力バッファメモリ７
から復号化部８にピクチャが読み出される度に、ピクチ
ャ数カウンタ１９のカウント値が１ずつ減少する。これ
により、ピクチャ数カウンタ１９のカウント値は、常
に、その時点での入力バッファメモリ７に記憶されてい
るピクチャの個数を表わしている。
は、入力バッファメモリ７の中に記憶されているピクチ
ャの個数を示すカウンタである。入力バッファメモリ７
にピクチャが書き込まれる度に、ピクチャ数カウンタ１
９のカウント値が１ずつ増加し、入力バッファメモリ７
から復号化部８にピクチャが読み出される度に、ピクチ
ャ数カウンタ１９のカウント値が１ずつ減少する。これ
により、ピクチャ数カウンタ１９のカウント値は、常
に、その時点での入力バッファメモリ７に記憶されてい
るピクチャの個数を表わしている。
【００４９】映像信号用のエレメンタリデコーダ部３ａ
が上記のマーカ刻印指示を受け取るとき、ピクチャ数カ
ウンタ１９のカウント値がピクチャ数カウンタ２０に取
り込まれる。このカウント値は、マーカを付けようとす
るピクチャに先行して入力バッファメモリ７に既に蓄積
されているピクチャの個数を示すものである。
が上記のマーカ刻印指示を受け取るとき、ピクチャ数カ
ウンタ１９のカウント値がピクチャ数カウンタ２０に取
り込まれる。このカウント値は、マーカを付けようとす
るピクチャに先行して入力バッファメモリ７に既に蓄積
されているピクチャの個数を示すものである。
【００５０】入力バッファメモリ７から復号化部８にピ
クチャが読み出される度に、ピクチャ数カウンタ２０の
カウント値が１ずつ減少し、そのカウント値が０になっ
たとき、ピクチャ数カウンタ２０がマーカ検出信号を出
力する。ここで、ピクチャ数カウンタ２０のカウント値
が０になるということは、マーカを付けたいピクチャに
先行するピクチャが存在しないことを意味する。
クチャが読み出される度に、ピクチャ数カウンタ２０の
カウント値が１ずつ減少し、そのカウント値が０になっ
たとき、ピクチャ数カウンタ２０がマーカ検出信号を出
力する。ここで、ピクチャ数カウンタ２０のカウント値
が０になるということは、マーカを付けたいピクチャに
先行するピクチャが存在しないことを意味する。
【００５１】例えば、ピクチャ数カウンタ１９でのカウ
ント値がＮのとき、ピクチャ数カウンタ２０がマーカ刻
印指示を受け取ったとすると、ピクチャ数カウンタ２０
はこのカウント値Ｎがプリセットされるが、このとき、
入力バッファメモリ７にはＮ個のピクチャが蓄積されて
おり、次に入力バッファメモリ７に書き込まれるピクチ
ャがマーク刻印される対象のピクチャということにな
る。そこで、この対象となるピクチャは入力バッファメ
モリ７から（Ｎ＋１）番目に読み出されるものとなるか
ら、ピクチャ数カウンタ１９が入力バッファメモリ７か
らピクチャが読み出される毎に１ずつカウントダウンし
てそのカウント値が０になると、その次に読み出される
ピクチャがこの対象のピクチャということになる。これ
により、マーカを付けたいピクチャがこれから復号化処
理され始めることが分かる。
ント値がＮのとき、ピクチャ数カウンタ２０がマーカ刻
印指示を受け取ったとすると、ピクチャ数カウンタ２０
はこのカウント値Ｎがプリセットされるが、このとき、
入力バッファメモリ７にはＮ個のピクチャが蓄積されて
おり、次に入力バッファメモリ７に書き込まれるピクチ
ャがマーク刻印される対象のピクチャということにな
る。そこで、この対象となるピクチャは入力バッファメ
モリ７から（Ｎ＋１）番目に読み出されるものとなるか
ら、ピクチャ数カウンタ１９が入力バッファメモリ７か
らピクチャが読み出される毎に１ずつカウントダウンし
てそのカウント値が０になると、その次に読み出される
ピクチャがこの対象のピクチャということになる。これ
により、マーカを付けたいピクチャがこれから復号化処
理され始めることが分かる。
【００５２】このように、この第３の実施形態では、入
力バッファメモリ７に記憶されているピクチャ数を監視
し、これ利用することにより、第１の実施形態における
マーカ刻印及び検出と同等の効果を得ることができ、映
像信号と音声信号の同期再生が可能となる。
力バッファメモリ７に記憶されているピクチャ数を監視
し、これ利用することにより、第１の実施形態における
マーカ刻印及び検出と同等の効果を得ることができ、映
像信号と音声信号の同期再生が可能となる。
【００５３】以上、本発明の実施形態について説明した
が、本発明は、これら実施形態に限定されるものではな
い。例えば、上記各実施形態では、圧縮符号化された映
像信号や音声信号信号としてＭＰＥＧのシステムストリ
ームを例としたが、本発明はこれに限定されるものでは
なく、映像または音声の圧縮符号化信号と、その上位階
層において、復号化時刻情報を記述可能な階層構造を持
った符号化方式であれば、本発明は適用可能である。
が、本発明は、これら実施形態に限定されるものではな
い。例えば、上記各実施形態では、圧縮符号化された映
像信号や音声信号信号としてＭＰＥＧのシステムストリ
ームを例としたが、本発明はこれに限定されるものでは
なく、映像または音声の圧縮符号化信号と、その上位階
層において、復号化時刻情報を記述可能な階層構造を持
った符号化方式であれば、本発明は適用可能である。
【００５４】また、上記各実施形態において、映像信号
と音声信号が夫々１つずつ多重化された符号を入力とし
て例にとりあげたが、本発明はそれに限定されるもので
はなく、多重化される映像信号と音声信号の数は夫々任
意でよいし、これら映像信号と音声信号とのいずれか一
方のみであってもよい。なお、この場合には、多重化さ
れる符号の数に応じて、エレメンタリデコーダ部３とそ
れに対応する同期制御部５の内部構成が設定されること
はいうまでもない。
と音声信号が夫々１つずつ多重化された符号を入力とし
て例にとりあげたが、本発明はそれに限定されるもので
はなく、多重化される映像信号と音声信号の数は夫々任
意でよいし、これら映像信号と音声信号とのいずれか一
方のみであってもよい。なお、この場合には、多重化さ
れる符号の数に応じて、エレメンタリデコーダ部３とそ
れに対応する同期制御部５の内部構成が設定されること
はいうまでもない。
【００５５】
【発明の効果】以上説明したように、、本発明によれ
ば、特定のタイムスタンプとそれに対応する符号化映像
信号のピクチャや符号化音声信号のオーディオフレーム
との対応関係を保つことができるから、映像信号及び音
声信号夫々をタイムスタンプを用いて時刻情報ＳＴＣに
同期させて復号化することができ、これにより、映像信
号と音声信号とを相互に同期再生することが可能にな
る。
ば、特定のタイムスタンプとそれに対応する符号化映像
信号のピクチャや符号化音声信号のオーディオフレーム
との対応関係を保つことができるから、映像信号及び音
声信号夫々をタイムスタンプを用いて時刻情報ＳＴＣに
同期させて復号化することができ、これにより、映像信
号と音声信号とを相互に同期再生することが可能にな
る。
【図１】本発明による圧縮符号化された映像／音声信号
の復号化装置の第１の実施形態を示すブロック図であ
る。
の復号化装置の第１の実施形態を示すブロック図であ
る。
【図２】図１におけるエレメンタリデコーダ部の一具体
例を示すブロック図である。
例を示すブロック図である。
【図３】図１における同期制御部の一具体例を示すブロ
ック図である。
ック図である。
【図４】本発明による圧縮符号化された映像／音声信号
の復号化装置の第２の実施形態を示すブロック図であ
る。
の復号化装置の第２の実施形態を示すブロック図であ
る。
【図５】本発明による圧縮符号化された映像／音声信号
の復号化装置の第３の実施形態でのエレメンタリデコー
ダ部を示すブロック図である
の復号化装置の第３の実施形態でのエレメンタリデコー
ダ部を示すブロック図である
【図６】各実施形態でのマーカの挿入を説明する図であ
る。
る。
【図７】映像のエレメンタリストリームを説明する図で
ある。
ある。
【図８】音声のエレメンタリストリームを説明する図で
ある。
ある。
【図９】システムストリームを説明する図である。
【図１０】システムストリームのヘッダ情報を説明する
図である。
図である。
【図１１】システムストリームからの各エレメンタリス
トリームの分離と夫々のエレメンタリストリームの復号
化を説明する図である。
トリームの分離と夫々のエレメンタリストリームの復号
化を説明する図である。
１ 入力端子 ２ システムデコーダ部 ３ａ 映像信号用のエレメンタリデコーダ部 ３ｂ 音声信号用のエレメンタリデコーダ部 ４ ＳＴＣカウンタ ５ 同期制御部 ６ａ，６ｂ 出力端子 ７ 入力バッファメモリ ８ 復号化部 ９ マーカ刻印部 １０ マーカ検出部 １１ マーカ刻印指示部 １２ タイムスタンプ記憶部 １３ 比較部 １４ 同期補正部 １５ａ 映像同期制御ブロック １５ｂ 音声同期制御ブロック １６ ＭＰＵ−Ｉ／Ｆ部 １７ ＭＰＵ作業用メモリ １８ ＭＰＵ １９，２０ ピクチャ数カウンタ
Claims (5)
- 【請求項１】 映像信号や音声信号が符号化単位毎に圧
縮符号化されて多重化された多重ストリームに、該符号
化単位の復号化時刻を指定するタイムスタンプと符号化
システムで指定する現在時刻を表わす第１の時刻情報と
が符号化単位毎に付加可能としたシステムストリームが
供給され、圧縮符号化された該映像信号や音声信号を該
符号化単位毎に復号化する圧縮符号化された映像／音声
信号の復号化装置であって、 該システムストリームから該圧縮符号化された映像信号
や音声信号と、該タイムスタンプと、該第１の時刻情報
とを分離するシステムデコーダ部と、 該圧縮符号化された該映像信号や音声信号を符号化単位
毎に復号化するエレメンタリデコーダ部と、 クロックをカウントし、そのカウント値を該時刻情報で
校正して該現在時刻を表わす第２の時刻情報として出力
する内部時計と、 該タイムスタンプと該第２の時刻情報とに応じて該エレ
メンタリデコーダ部の復号化動作を制御する同期制御部
とを有し、 該同期制御部は、 システムデコーダ部で分離された該タイムスタンプを記
憶するタイムスタンプ記憶手段と、 システムデコーダ部から該タイムスタンプが供給される
と、該エレメンタリデコーダ部にマーカ刻印の指示を送
るマーカ刻印指示手段と、 該マーカ刻印の指示に伴って該該エレメンタリデコーダ
部から送られてくるマーカ検出信号を受信すると、内部
時計からの該第２の時刻情報が表わす現在時刻と該タイ
ムスタンプ記憶手段に記憶された該タイムスタンプが表
わす符号化単位の復号化時刻とを比較する比較手段と、 該第２の時刻情報による現在時刻よりも該タイムスタン
プによる符号化単位の復号化時刻が進んでいることを該
比較手段の比較結果が表わしているとき、待機指示を出
力し、該第２の時刻情報による現在時刻よりも該タイム
スタンプによる符号化単位の復号化時刻が遅れているこ
とを該比較手段の比較結果が表わしているとき、破棄指
示を出力する同期補正手段ととからなり、 該エレメンタリデコーダ部は、該マーカ刻印の指示に応
じて所定の該符号化単位の復号化時点を検出して該マー
カ検出信号を出力し、かつ該待機指示と破棄指示とによ
り、復号化処理が制御されて、該圧縮符号化された映像
信号や音声信号の復号化処理時点を、該第２の時刻情報
が表わす時間軸上で該タイムスタンプが表わす時刻とす
ることを特徴とする圧縮符号化された映像／音声信号の
復号化装置。 - 【請求項２】 請求項１において、 前記エレメンタリデコーダ部は、 前記システムデコーダ部からの前記圧縮符号化された映
像信号や音声信号が符号化単位毎に書き込まれる入力バ
ッファメモリと、 該入力バッファメモリから該符号化単位を順次読取、復
号化処理する復号化手段と、 前記同期制御部の前記マーカ刻印指示手段からの前記マ
ーカ刻印の指示があると、該入力バッファメモリに書き
込まれる該符号化単位にマークを付加するマーク刻印手
段と、 該マークが付加された該符号化単位が該入力バッファメ
モリから読み出されると、該マーク検出信号を発生する
マーカ検出手段とからなり、 該復号化手段は、 前記同期制御部の前記同期補正手段から前記待機指示を
受けたときには、該入力バッファメモリからの該符号化
単位の読取りを、該第２の時刻情報による現在時刻と該
タイムスタンプによる符号化単位の復号化時刻との時間
差に応じた個数の該符号化単位分停止し、 該同期制御部の該同期補正手段から該破棄指示を受けた
ときには、該入力バッファメモリからの該符号化単位の
読取りを、前記第２の時刻情報による現在時刻と前記タ
イムスタンプによる符号化単位の復号化時刻との時間差
に応じた個数の該符号化単位分飛び越えることを特徴と
する圧縮符号化された映像／音声信号の復号化装置。 - 【請求項３】 請求項１において、 前記エレメンタリデコーダ部は、 前記システムデコーダ部からの前記圧縮符号化された映
像信号や音声信号が符号化単位毎に書き込まれる入力バ
ッファメモリと、 該入力バッファメモリから該符号化単位を順次読取、復
号化処理する復号化手段と、 該入力バッファメモリに格納されている該符号化単位の
個数をカウントする第１のカウンタと、 前記同期制御部の前記マーカ刻印指示手段からの前記マ
ーカ刻印の指示があると、該第１のカウンタのカウント
値を取り込んで該入力バッファから該符号化単位が読み
取られる毎に１ずつダウンカウントし、カウント値が０
になったとき、前記マーク検出信号を発生する第２のカ
ウンタとからなり、 該復号化手段は、 前記同期制御部の前記同期補正手段から前記待機指示を
受けたときには、該入力バッファメモリからの該符号化
単位の読取りを、該第２の時刻情報による現在時刻と該
タイムスタンプによる符号化単位の復号化時刻との時間
差に応じた個数の該符号化単位分停止し、 該同期制御部の該同期補正手段から該破棄指示を受けた
ときには、該入力バッファメモリからの該符号化単位の
読取りを、前記第２の時刻情報による現在時刻と前記タ
イムスタンプによる符号化単位の復号化時刻との時間差
に応じた個数の該符号化単位分飛び越えることを特徴と
する圧縮符号化された映像／音声信号の復号化装置。 - 【請求項４】 請求項１，２または３において、 前記同期制御部として、マイクロプロセサユニットを用
いたことを特徴とする圧縮符号化された映像／音声信号
の復号化装置。 - 【請求項５】 請求項４において、 前記内部時計として、該マイクロプロセサユニットに内
蔵のカウンタを用いたことを特徴とする圧縮符号化され
た映像／音声信号の復号化装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28991597A JPH11127435A (ja) | 1997-10-22 | 1997-10-22 | 圧縮符号化された映像／音声信号の復号化装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28991597A JPH11127435A (ja) | 1997-10-22 | 1997-10-22 | 圧縮符号化された映像／音声信号の復号化装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11127435A true JPH11127435A (ja) | 1999-05-11 |
Family
ID=17749418
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28991597A Pending JPH11127435A (ja) | 1997-10-22 | 1997-10-22 | 圧縮符号化された映像／音声信号の復号化装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11127435A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006229606A (ja) * | 2005-02-17 | 2006-08-31 | Sanyo Electric Co Ltd | ストリームデータ再生装置、ストリームデータ再生プログラム及びストリームデータ再生方法 |
| JP2006254163A (ja) * | 2005-03-11 | 2006-09-21 | Ntt Docomo Inc | データ送受信装置、双方向データ伝送システム、及び、データ送受信方法 |
| WO2007073349A1 (en) * | 2005-12-19 | 2007-06-28 | Agency For Science, Technology And Research | Method and system for event detection in a video stream |
| CN114203191A (zh) * | 2021-12-10 | 2022-03-18 | 北京万博信普通讯技术有限公司 | Dra同步音频编码的传输方法 |
-
1997
- 1997-10-22 JP JP28991597A patent/JPH11127435A/ja active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006229606A (ja) * | 2005-02-17 | 2006-08-31 | Sanyo Electric Co Ltd | ストリームデータ再生装置、ストリームデータ再生プログラム及びストリームデータ再生方法 |
| JP4636896B2 (ja) * | 2005-02-17 | 2011-02-23 | 三洋電機株式会社 | ストリームデータ再生装置、ストリームデータ再生プログラム及びストリームデータ再生方法 |
| JP2006254163A (ja) * | 2005-03-11 | 2006-09-21 | Ntt Docomo Inc | データ送受信装置、双方向データ伝送システム、及び、データ送受信方法 |
| JP4520335B2 (ja) * | 2005-03-11 | 2010-08-04 | 株式会社エヌ・ティ・ティ・ドコモ | データ送受信装置、双方向データ伝送システム、及び、データ送受信方法 |
| WO2007073349A1 (en) * | 2005-12-19 | 2007-06-28 | Agency For Science, Technology And Research | Method and system for event detection in a video stream |
| CN114203191A (zh) * | 2021-12-10 | 2022-03-18 | 北京万博信普通讯技术有限公司 | Dra同步音频编码的传输方法 |
| CN114203191B (zh) * | 2021-12-10 | 2022-09-09 | 河南广播电视台 | Dra同步音频编码的传输方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3106987B2 (ja) | オーディオ・ビデオ同期再生装置 | |
| US6292621B1 (en) | Recording apparatus for newly recording a second encoded data train on a recording medium on which an encoded data train is recorded | |
| US5521922A (en) | Data demultiplexer | |
| US6493362B1 (en) | Data recording method and data recording system | |
| JP2002016918A (ja) | マルチメディア多重化伝送システムおよび時間情報生成方法 | |
| JP2001359051A (ja) | 情報処理装置および情報処理方法、並びに記録媒体 | |
| US20060274827A1 (en) | Apparatus and method for synchronized playback | |
| JP3692164B2 (ja) | Ｍｐｅｇデコーダ | |
| US6731658B1 (en) | Data recording method and data recording apparatus | |
| JP2002094930A (ja) | 記録装置、記録方法、再生装置、再生方法、及び記憶媒体 | |
| JPH0918870A (ja) | タイミング検出回路及びその方法 | |
| JP3558983B2 (ja) | デジタル放送の記録再生装置 | |
| US7434248B2 (en) | Broadcast system and apparatus, sync information replacing apparatus and method, program, and recording medium recording the program | |
| EP0757491B1 (en) | Data encoding and/or decoding apparatus and methods | |
| JPH11127435A (ja) | 圧縮符号化された映像／音声信号の復号化装置 | |
| JPH0863884A (ja) | ディジタル情報符号化・復号装置 | |
| US6556626B1 (en) | MPEG decoder, MPEG system decoder and MPEG video decoder | |
| JP2001359049A (ja) | プログラム記録再生方法および装置 | |
| JP3852114B2 (ja) | 圧縮画像データ伝送方法及び装置 | |
| JP3944845B2 (ja) | 情報処理装置および方法、記録媒体、並びにプログラム | |
| JP2001111610A (ja) | 情報データ伝送システムの受信装置 | |
| JP2823806B2 (ja) | 画像復号装置 | |
| JP2001339688A (ja) | トランスポートストリーム再生装置 | |
| US20040028376A1 (en) | Image recording device and method | |
| JP2003087749A (ja) | 画像データ再生装置および画像データ再生方法 |