JP3744017B2 - 画像デコーダ - Google Patents
画像デコーダ Download PDFInfo
- Publication number
- JP3744017B2 JP3744017B2 JP4492895A JP4492895A JP3744017B2 JP 3744017 B2 JP3744017 B2 JP 3744017B2 JP 4492895 A JP4492895 A JP 4492895A JP 4492895 A JP4492895 A JP 4492895A JP 3744017 B2 JP3744017 B2 JP 3744017B2
- Authority
- JP
- Japan
- Prior art keywords
- input
- frame
- bit stream
- picture
- timing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
Description
【０００１】
【産業上の利用分野】
この発明は、ＭＰＥＧ（Moving Picture Coding Experts Groupe）等の圧縮された可変長コードからなる画像情報を復号する画像デコーダに関する。
【０００２】
【従来の技術】
ディジタル通信ネットワークや情報記憶媒体の進歩に伴って、Ｈ．２６１，ＭＰＥＧ１，ＭＰＥＧ２等の種々のディジタル画像圧縮方式が提案され、標準化されている。
これらの方式における符号化されたビットストリームは、ＭＰＥＧ１を例にとると、シーケンス層、ＧＯＰ（Groupe of Pictures）層、ピクチャ層、スライス層、マクロブロック層、ブロック層の６つの階層から構成される。図４は、このうち、シーケンス層、ＧＯＰ層の２階層を示したものである。なお、ＭＰＥＧ２の場合もほぼ同様の階層構造を採るが、ＧＯＰ層はオプションとなり、その中のピクチャ層の並びも特に規定されないものとなる。ＭＰＥＧの特定ピクチャでは、前後の画面データに基づいて１枚の画面データが符号化されるので、１画面だけで完結した情報とはならない。このため、何枚かの画面データを一まとまりにしたＧＯＰを単位としてランダムアクセスを可能にしている。
【０００３】
ＧＯＰは、Ｉ，Ｐ，Ｂの３種類のピクチャの組み合わせにより構成される。各ピクチャは、１フレーム分の画像データに相当し、Ｉ（Intra ）ピクチャはフレーム内符号化画像、Ｐ（Predictive）ピクチャはフレーム間順方向予測符号化画像、Ｂ（Bidirectionally predictive）ピクチャはフレーム間両方向予測符号化画像である。各ピクチャは、ピクチャ・スタート・コード（ＰＳＣ）、テンポラル・リファレンス（ＴＲ）、ピクチャ・コーディング・タイプ（ＰＣＴ）、ＶＢＶディレイ（ＶＤ）等のヘッダ部分と、フレームデータとを含んでいる。なお、ＭＰＥＧ２では、上述した１フレーム単位に代え１フィールド単位の画像データを扱うこともある得る。
【０００４】
ＭＰＥＧのビットストリームは可変長符号化されているため、復号化における各フレームの情報量は一定でない。例えば、フレーム内符号化により生成されるＩピクチャは、動きベクトル補償を用いてフレーム間符号化されたＰ，Ｂピクチャに比べて、そのフレーム当たりの符号量が圧倒的に多い。また、同じタイプのピクチャでも、画像の動きの激しさや画面の単調さ等によってフレーム当たりの符号量は変動する。
【０００５】
そこで、通信回線等の一定レートの伝送路でＭＰＥＧビットストリームを伝送する場合、図５に示すように、デコーダ本体２の前段に、レート調整用の入力バッファ１が設けられる。入力バッファ１には、一定レートで入力ビットストリームＢＳが書き込まれ、フレーム周期に相当する一定間隔で１フレーム分のピクチャデータがデコーダ本体２に読み出される。
図６は、その様子を説明するための図である。入力バッファ１がクリアされている初期状態では、まず、入力ビットストリームＢＳは、入力バッファ１をスルー状態で通過してデコード本体２の図示しないＶＬＣ（Variable length code）デコーダによりデコードされる。最初の１フレーム分のピクチャ▲１▼がデコードされたら、続くフレームのピクチャ▲２▼が入力バッファ１に溜まり始める。別途指定される最初のピクチャ（ここでは▲１▼とする）の表示タイミングで次のフレームのピクチャ▲２▼のデコードが開始される。即ち、入力ビットフレームＢＳは一定レートで連続的に入力されるから、次のピクチャの表示タイミングが到来するまでは、入力ビットストリームが入力バッファ１上に蓄積されるのである。なお、フレーム間符号化処理を行う関係上、実際のフレーム表示タイミングは、デコードタイミングよりも数フレーム先となることもあり得るがが、ここでは、説明を簡単にするために、デコードタイミングと表示タイミングとが１フレームだけずれているものとして説明している。
【０００６】
各ピクチャの表示タイミングは、各ピクチャのヘッダに記述されたＶＢＶディレイによって決定される。即ち、この値が、ＰＳＣ検出からピクチャ表示タイミングまでの遅延時間に相当する。
【０００７】
【発明が解決しようとする課題】
上述した従来の画像デコーダでは、ビットストリームＢＳに含まれている表示タイミングを規定する情報（ＶＢＶディレイＶＤ）に基づいて各画像フレームの表示タイミングを決定している。このため、例えば、図７に示すように、ＩＳＤＮ回線等を介して伝送された複数チャンネルのビットストリームＢＳａ，ＢＳｂ，ＢＳｃをスイッチ３によってリアルタイムで切替えて表示する場合、各ビットストリームＢＳａ，ＢＳｂ，ＢＳｃの表示タイミングは必ずしも一致しない。例えば、図８のピクチャ▲３▼が表示されているフレームでビットストリームＢＳａからＢＳｂへの切替が発生すると、既にデコードされているピクチャ▲４▼まではビデオ出力Ｖo として表示されることになるが、次のフレームの開始タイミングから切替後のピクチャ▲１▼′の表示開始タイミングまでの時間Ｔが、ビットストリームＢＳｂのＶＤによって決定されるため、フレーム期間のＮ倍とならず、同期ズレが発生する。このため、例えばテレビ会議等で表示画面を頻繁に切替えるような場合に、その都度、表示画面が乱れるという問題が発生する。
【０００８】
この発明は、このような問題点に鑑みされたもので、チャンネル切替時でも表示画面が乱れることがない画像デコーダを提供することを目的とする。
【０００９】
【課題を解決するための手段】
この発明は、画像情報と当該画像情報の表示タイミングを指示する遅延時間情報とを含む可変長フレームの入力ビットストリームをデコードしてデコードされた画像情報を前記遅延時間情報で規定された時間だけ遅延させた後の表示タイミングで出力するデコード手段と、このデコード手段の入力段に設けられ前記入力ビットストリームを順次格納すると共に前記デコード手段へ前記入力ビットストリームを前記遅延時間情報で指示された表示タイミングに同期させて供給するための入力バッファとを備えた画像デコーダにおいて、前記入力バッファと前記デコード手段との間に前記入力ビットストリームを格納可能な遅延バッファを挿入し、前記デコード手段は、表示タイミングが互いに同期しない複数の入力ビットストリームを選択的に入力し、この入力された入力ビットストリームについて、前記画像情報の遅延時間情報に基づく表示タイミングが経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるタイミングで前記画像情報を表示すると共に、次にデコードすべき可変長フレームのデコードを開始するものであり、前記遅延バッファは、少なくとも前記遅延時間情報で規定された時間が経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるまでの入力ビットストリームを格納可能なものであることを特徴とする。
【００１０】
【作用】
この発明によれば、入力バッファの後段に少なくとも１フレーム分の情報を蓄積できる遅延バッファを配置すると共に、ビットストリームで決定されるタイミングとは別個に表示タイミングを決定するフレーム同期パルスを与え、各ビットストリームで設定された遅延期間が経過したのち、最初に発生する前記フレーム同期パルスに同期させてそのフレームを表示させると共に、前記遅延時間経過から前記フレーム同期パルスの発生までの期間に到来する入力ビットストリームについては、前記遅延バッファで吸収するようにしている。このため、表示タイミングがまちまちの複数チャンネルのビットストリームを切替えても、各フレームの表示タイミングは、全て前記フレーム同期パルスに同期することになり、従来のような同期ずれが発生することがない。
【００１１】
【実施例】
以下、図面を参照して、この発明の実施例について説明する。
図１は、この発明の一実施例に係るＭＰＥＧ１，２用の画像デコーダを示すブロック図である。
この画像デコーダは、デコーダ本体１１、ＤＲＡＭ１２及びＣＰＵ１３から構成されている。デコーダ本体１１は、入力されたビットストリームに対し、１フレーム毎に、ＶＬＣデコード、逆量子化、逆ＤＣＴ（Discrete cosine transform ）、ハーフペル動き補償等の各処理を施し、画像フレームを復号する。このデコーダ本体１１には、復号された画像フレームの表示タイミングを決定するためのフレーム同期パルスが外部から与えられている。ＤＲＡＭ１２は、ビットストリームを受信してデコーダ本体１１に供給するまでの間、ビットストリームを蓄積する１フレーム分の入力バッファ２１と、その後段に配置されたタイミング調整用の１フレーム分の遅延バッファ２２と、動き補償のために前後のフレームの画像情報を記憶するフレームメモリ２３と、ＣＰＵ１３の動作のためのメインメモリ２４とを構成するための各記憶領域を提供する。
【００１２】
ＩＳＤＮ等の回線を介して受信されるビットストリームＢＳａ，ＢＳｂ，ＢＳｃは、ＣＰＵ１３の制御のもと、スイッチ１４等によって切替えられて入力バッファ２１、更に遅延バッファ２２に蓄積される。
【００１３】
図２は、ビットストリームＢＳａ，ＢＳｂの入力タイミング及び表示タイミングと、入力バッファ２１及び遅延バッファ２２のデータ蓄積量を示す図である。このシステムでは、入力バッファ２１に時間にして１フレーム分のビットストリームが、また遅延バッファ２２に時間にして最大１フレーム分のビットストリームがそれぞれ蓄積される。いま、ピクチャ▲２▼に着目すると、ピクチャ▲１▼のデコードタイミングに先行するタイミングでこのピクチャ▲２▼が入力バッファ２１及び遅延バッファ２２に蓄積されていく。ピクチャ▲２▼は、蓄積終了後の次のフレーム同期パルスの入力タイミングでデコードされる。そして、ピクチャ▲２▼のＶＢＶディレイＶＤが経過した後の最初のフレーム同期パルスの入力タイミングに同期してピクチャ▲２▼が表示される。即ち、ピクチャ▲２▼は、ピクチャスタートコードＰＳＣの検出後、ＶＤ＋α経過した時点で表示される。表示タイミングが＋αだけ遅れた分、入力ビットストリームＢＳａを余分に蓄積しなければならないが、この分は、遅延バッファ２２に蓄積されることになる。＋α分は、１フレームを超えることはないので、遅延バッファ２２の容量は、少なくとも１フレーム分であればよい。
【００１４】
ピクチャ▲４▼の入力途中で、入力ビットストリームＢＳａからＢＳｂへの切替が発生した場合、入力バッファ２１及び遅延バッファ２２はクリアされる。この時点で、ピクチャ▲３▼までのデコードが終了しているので、ピクチャ▲３▼までの表示は行われる。バッファ２１，２２のクリア後、ピクチャ▲１▼′のピクチャスタートコードＰＳＣが検出されたら、バッファ２１，２２を最初はスルー状態にして、直ちにピクチャ▲１▼′のデコードを開始する。ピクチャ▲１▼′は、ＶＤ経過後の最初のフレーム同期パルスの入力タイミングで表示される。即ち、ピクチャ▲１▼′は、ＰＳＣ検出後、ＶＤ＋β経過した時点で表示される。その間、バッファ２１，２２には、ピクチャ▲２▼′とピクチャ▲３▼′の一部とが蓄積される。βも１フレームを超えることはない。
【００１５】
このように、ＶＤ経過後のフレーム同期パルスに同期して画像フレームを表示させることにより、別々のビットストリームを同期させることができるので、チャンネル切替時に画面が乱れることはない。
【００１６】
図３は、以上の処理を実現するためのデコーダ本体１１の図示しないＶＬＤデコーダの処理を示すフローチャートである。
まず、入力バッファ２１及び遅延バッファ２２をクリアし（Ｓ１）、ＰＳＣを検出したら（Ｓ２）、第１フレームから順にＶＬＣデコードし（Ｓ３，Ｓ４，Ｓ５）、デコード終了後、そのフレームのＶＤが経過するまで待つ（Ｓ６）。ＶＤが経過したら、フレーム同期パルスが検出されるのを待つ（Ｓ７）。フレーム同期パルスが検出されたら、バッファ２１，２２に格納されている次のフレームをＶＬＣデコードする（Ｓ４，Ｓ５）。
ＶＬＣデコードの途中で、チャンネル切替等に起因してエラーが発生した場合には、ステップＳ１に戻ってバッファ２１，２２をクリアする（Ｓ１）。
以上の処理を繰り返すことにより、同期乱れの無いチャンネル切替が実現できる。
【００１７】
なお、以上の実施例では、フレーム同期パルスをビットストリームＢＳａ，ＢＳｂ，ＢＳｃとは無関係に外部から供給するようにしているが、ビットストリームＢＳａ，ＢＳｂ，ＢＳｃのいずれか一つに合わせるようにしてもよい。この場合には、最初に入力されたビットストリームのＶＤに基づく表示タイミングをＣＰＵ１３が把握しておき、切替後のビットストリームのＶＤを切替前のビットストリームの表示タイミングに基づいてαだけ加算すればよい。
また、以上の説明では、便宜上、各ピクチャの表示タイミングがデコードタイミングの１フレーム後となっているが、実際の動作では、状況に応じ、表示タイミングがデコードタイミングの数フレーム後となることもあり得る。
また、ＭＰＥＧの場合、Ｐ，Ｂピクチャでは、単独で画面を構成することができないので、チャネル切替後、最初にＩピクチャが検出された時点からデコードを開始することが望ましい。
更に、バッファ２１，２２のクリアタイミングについても、ＶＬＣデコードエラーを検出する他に、ＣＰＵ１３が切替タイミングを把握している場合には、ＣＰＵ１３からデコーダ本体１１にバッファクリアタイミングを与えるようにしてもよい。
【００１８】
【発明の効果】
以上述べたように、この発明によれば、ビットストリームのフレーム毎に設定された遅延期間が経過したのち、最初に発生する前記フレーム同期パルスに同期させてそのフレームを表示させると共に、前記遅延時間経過から前記フレーム同期パルスの発生までの期間に到来する入力ビットストリームについては、遅延バッファで吸収するようにしているので、表示タイミングがまちまちの複数チャンネルのビットストリームを切替えても、各フレームの表示タイミングは、全て前記フレーム同期パルスに同期することになり、従来のような同期ずれが発生することがない。
【図面の簡単な説明】
【図１】 この発明の一実施例に係る画像デコーダのブロック図である。
【図２】 同画像デコーダのビットストリーム入力タイミング及び表示タイミングとバッファのデータ量との関係を示す図である。
【図３】 同画像デコーダのＶＬＣデコード部での処理を示すフローチャートである。
【図４】 ＭＰＥＧのデータ構造を説明するための図である。
【図５】 従来の画像デコーダの構成を示す図である。
【図６】 従来の画像デコーダのビットストリーム入力タイミング及び表示タイミングとバッファのデータ量との関係を示す図である。
【図７】 複数チャンネルのビットストリームを切替えて入力する従来の画像デコーダのブロック図である。
【図８】 複数チャンネルのビットストリームを切替えたときの従来の問題点を説明するための図である。
【符号の説明】
１，２１…入力バッファ、２，１１…デコーダ本体、３，１４…スイッチ、１２…ＤＲＡＭ、１３…ＣＰＵ、２２…遅延バッファ、２３…フレームメモリ、２４…メインメモリ。
【産業上の利用分野】
この発明は、ＭＰＥＧ（Moving Picture Coding Experts Groupe）等の圧縮された可変長コードからなる画像情報を復号する画像デコーダに関する。
【０００２】
【従来の技術】
ディジタル通信ネットワークや情報記憶媒体の進歩に伴って、Ｈ．２６１，ＭＰＥＧ１，ＭＰＥＧ２等の種々のディジタル画像圧縮方式が提案され、標準化されている。
これらの方式における符号化されたビットストリームは、ＭＰＥＧ１を例にとると、シーケンス層、ＧＯＰ（Groupe of Pictures）層、ピクチャ層、スライス層、マクロブロック層、ブロック層の６つの階層から構成される。図４は、このうち、シーケンス層、ＧＯＰ層の２階層を示したものである。なお、ＭＰＥＧ２の場合もほぼ同様の階層構造を採るが、ＧＯＰ層はオプションとなり、その中のピクチャ層の並びも特に規定されないものとなる。ＭＰＥＧの特定ピクチャでは、前後の画面データに基づいて１枚の画面データが符号化されるので、１画面だけで完結した情報とはならない。このため、何枚かの画面データを一まとまりにしたＧＯＰを単位としてランダムアクセスを可能にしている。
【０００３】
ＧＯＰは、Ｉ，Ｐ，Ｂの３種類のピクチャの組み合わせにより構成される。各ピクチャは、１フレーム分の画像データに相当し、Ｉ（Intra ）ピクチャはフレーム内符号化画像、Ｐ（Predictive）ピクチャはフレーム間順方向予測符号化画像、Ｂ（Bidirectionally predictive）ピクチャはフレーム間両方向予測符号化画像である。各ピクチャは、ピクチャ・スタート・コード（ＰＳＣ）、テンポラル・リファレンス（ＴＲ）、ピクチャ・コーディング・タイプ（ＰＣＴ）、ＶＢＶディレイ（ＶＤ）等のヘッダ部分と、フレームデータとを含んでいる。なお、ＭＰＥＧ２では、上述した１フレーム単位に代え１フィールド単位の画像データを扱うこともある得る。
【０００４】
ＭＰＥＧのビットストリームは可変長符号化されているため、復号化における各フレームの情報量は一定でない。例えば、フレーム内符号化により生成されるＩピクチャは、動きベクトル補償を用いてフレーム間符号化されたＰ，Ｂピクチャに比べて、そのフレーム当たりの符号量が圧倒的に多い。また、同じタイプのピクチャでも、画像の動きの激しさや画面の単調さ等によってフレーム当たりの符号量は変動する。
【０００５】
そこで、通信回線等の一定レートの伝送路でＭＰＥＧビットストリームを伝送する場合、図５に示すように、デコーダ本体２の前段に、レート調整用の入力バッファ１が設けられる。入力バッファ１には、一定レートで入力ビットストリームＢＳが書き込まれ、フレーム周期に相当する一定間隔で１フレーム分のピクチャデータがデコーダ本体２に読み出される。
図６は、その様子を説明するための図である。入力バッファ１がクリアされている初期状態では、まず、入力ビットストリームＢＳは、入力バッファ１をスルー状態で通過してデコード本体２の図示しないＶＬＣ（Variable length code）デコーダによりデコードされる。最初の１フレーム分のピクチャ▲１▼がデコードされたら、続くフレームのピクチャ▲２▼が入力バッファ１に溜まり始める。別途指定される最初のピクチャ（ここでは▲１▼とする）の表示タイミングで次のフレームのピクチャ▲２▼のデコードが開始される。即ち、入力ビットフレームＢＳは一定レートで連続的に入力されるから、次のピクチャの表示タイミングが到来するまでは、入力ビットストリームが入力バッファ１上に蓄積されるのである。なお、フレーム間符号化処理を行う関係上、実際のフレーム表示タイミングは、デコードタイミングよりも数フレーム先となることもあり得るがが、ここでは、説明を簡単にするために、デコードタイミングと表示タイミングとが１フレームだけずれているものとして説明している。
【０００６】
各ピクチャの表示タイミングは、各ピクチャのヘッダに記述されたＶＢＶディレイによって決定される。即ち、この値が、ＰＳＣ検出からピクチャ表示タイミングまでの遅延時間に相当する。
【０００７】
【発明が解決しようとする課題】
上述した従来の画像デコーダでは、ビットストリームＢＳに含まれている表示タイミングを規定する情報（ＶＢＶディレイＶＤ）に基づいて各画像フレームの表示タイミングを決定している。このため、例えば、図７に示すように、ＩＳＤＮ回線等を介して伝送された複数チャンネルのビットストリームＢＳａ，ＢＳｂ，ＢＳｃをスイッチ３によってリアルタイムで切替えて表示する場合、各ビットストリームＢＳａ，ＢＳｂ，ＢＳｃの表示タイミングは必ずしも一致しない。例えば、図８のピクチャ▲３▼が表示されているフレームでビットストリームＢＳａからＢＳｂへの切替が発生すると、既にデコードされているピクチャ▲４▼まではビデオ出力Ｖo として表示されることになるが、次のフレームの開始タイミングから切替後のピクチャ▲１▼′の表示開始タイミングまでの時間Ｔが、ビットストリームＢＳｂのＶＤによって決定されるため、フレーム期間のＮ倍とならず、同期ズレが発生する。このため、例えばテレビ会議等で表示画面を頻繁に切替えるような場合に、その都度、表示画面が乱れるという問題が発生する。
【０００８】
この発明は、このような問題点に鑑みされたもので、チャンネル切替時でも表示画面が乱れることがない画像デコーダを提供することを目的とする。
【０００９】
【課題を解決するための手段】
この発明は、画像情報と当該画像情報の表示タイミングを指示する遅延時間情報とを含む可変長フレームの入力ビットストリームをデコードしてデコードされた画像情報を前記遅延時間情報で規定された時間だけ遅延させた後の表示タイミングで出力するデコード手段と、このデコード手段の入力段に設けられ前記入力ビットストリームを順次格納すると共に前記デコード手段へ前記入力ビットストリームを前記遅延時間情報で指示された表示タイミングに同期させて供給するための入力バッファとを備えた画像デコーダにおいて、前記入力バッファと前記デコード手段との間に前記入力ビットストリームを格納可能な遅延バッファを挿入し、前記デコード手段は、表示タイミングが互いに同期しない複数の入力ビットストリームを選択的に入力し、この入力された入力ビットストリームについて、前記画像情報の遅延時間情報に基づく表示タイミングが経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるタイミングで前記画像情報を表示すると共に、次にデコードすべき可変長フレームのデコードを開始するものであり、前記遅延バッファは、少なくとも前記遅延時間情報で規定された時間が経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるまでの入力ビットストリームを格納可能なものであることを特徴とする。
【００１０】
【作用】
この発明によれば、入力バッファの後段に少なくとも１フレーム分の情報を蓄積できる遅延バッファを配置すると共に、ビットストリームで決定されるタイミングとは別個に表示タイミングを決定するフレーム同期パルスを与え、各ビットストリームで設定された遅延期間が経過したのち、最初に発生する前記フレーム同期パルスに同期させてそのフレームを表示させると共に、前記遅延時間経過から前記フレーム同期パルスの発生までの期間に到来する入力ビットストリームについては、前記遅延バッファで吸収するようにしている。このため、表示タイミングがまちまちの複数チャンネルのビットストリームを切替えても、各フレームの表示タイミングは、全て前記フレーム同期パルスに同期することになり、従来のような同期ずれが発生することがない。
【００１１】
【実施例】
以下、図面を参照して、この発明の実施例について説明する。
図１は、この発明の一実施例に係るＭＰＥＧ１，２用の画像デコーダを示すブロック図である。
この画像デコーダは、デコーダ本体１１、ＤＲＡＭ１２及びＣＰＵ１３から構成されている。デコーダ本体１１は、入力されたビットストリームに対し、１フレーム毎に、ＶＬＣデコード、逆量子化、逆ＤＣＴ（Discrete cosine transform ）、ハーフペル動き補償等の各処理を施し、画像フレームを復号する。このデコーダ本体１１には、復号された画像フレームの表示タイミングを決定するためのフレーム同期パルスが外部から与えられている。ＤＲＡＭ１２は、ビットストリームを受信してデコーダ本体１１に供給するまでの間、ビットストリームを蓄積する１フレーム分の入力バッファ２１と、その後段に配置されたタイミング調整用の１フレーム分の遅延バッファ２２と、動き補償のために前後のフレームの画像情報を記憶するフレームメモリ２３と、ＣＰＵ１３の動作のためのメインメモリ２４とを構成するための各記憶領域を提供する。
【００１２】
ＩＳＤＮ等の回線を介して受信されるビットストリームＢＳａ，ＢＳｂ，ＢＳｃは、ＣＰＵ１３の制御のもと、スイッチ１４等によって切替えられて入力バッファ２１、更に遅延バッファ２２に蓄積される。
【００１３】
図２は、ビットストリームＢＳａ，ＢＳｂの入力タイミング及び表示タイミングと、入力バッファ２１及び遅延バッファ２２のデータ蓄積量を示す図である。このシステムでは、入力バッファ２１に時間にして１フレーム分のビットストリームが、また遅延バッファ２２に時間にして最大１フレーム分のビットストリームがそれぞれ蓄積される。いま、ピクチャ▲２▼に着目すると、ピクチャ▲１▼のデコードタイミングに先行するタイミングでこのピクチャ▲２▼が入力バッファ２１及び遅延バッファ２２に蓄積されていく。ピクチャ▲２▼は、蓄積終了後の次のフレーム同期パルスの入力タイミングでデコードされる。そして、ピクチャ▲２▼のＶＢＶディレイＶＤが経過した後の最初のフレーム同期パルスの入力タイミングに同期してピクチャ▲２▼が表示される。即ち、ピクチャ▲２▼は、ピクチャスタートコードＰＳＣの検出後、ＶＤ＋α経過した時点で表示される。表示タイミングが＋αだけ遅れた分、入力ビットストリームＢＳａを余分に蓄積しなければならないが、この分は、遅延バッファ２２に蓄積されることになる。＋α分は、１フレームを超えることはないので、遅延バッファ２２の容量は、少なくとも１フレーム分であればよい。
【００１４】
ピクチャ▲４▼の入力途中で、入力ビットストリームＢＳａからＢＳｂへの切替が発生した場合、入力バッファ２１及び遅延バッファ２２はクリアされる。この時点で、ピクチャ▲３▼までのデコードが終了しているので、ピクチャ▲３▼までの表示は行われる。バッファ２１，２２のクリア後、ピクチャ▲１▼′のピクチャスタートコードＰＳＣが検出されたら、バッファ２１，２２を最初はスルー状態にして、直ちにピクチャ▲１▼′のデコードを開始する。ピクチャ▲１▼′は、ＶＤ経過後の最初のフレーム同期パルスの入力タイミングで表示される。即ち、ピクチャ▲１▼′は、ＰＳＣ検出後、ＶＤ＋β経過した時点で表示される。その間、バッファ２１，２２には、ピクチャ▲２▼′とピクチャ▲３▼′の一部とが蓄積される。βも１フレームを超えることはない。
【００１５】
このように、ＶＤ経過後のフレーム同期パルスに同期して画像フレームを表示させることにより、別々のビットストリームを同期させることができるので、チャンネル切替時に画面が乱れることはない。
【００１６】
図３は、以上の処理を実現するためのデコーダ本体１１の図示しないＶＬＤデコーダの処理を示すフローチャートである。
まず、入力バッファ２１及び遅延バッファ２２をクリアし（Ｓ１）、ＰＳＣを検出したら（Ｓ２）、第１フレームから順にＶＬＣデコードし（Ｓ３，Ｓ４，Ｓ５）、デコード終了後、そのフレームのＶＤが経過するまで待つ（Ｓ６）。ＶＤが経過したら、フレーム同期パルスが検出されるのを待つ（Ｓ７）。フレーム同期パルスが検出されたら、バッファ２１，２２に格納されている次のフレームをＶＬＣデコードする（Ｓ４，Ｓ５）。
ＶＬＣデコードの途中で、チャンネル切替等に起因してエラーが発生した場合には、ステップＳ１に戻ってバッファ２１，２２をクリアする（Ｓ１）。
以上の処理を繰り返すことにより、同期乱れの無いチャンネル切替が実現できる。
【００１７】
なお、以上の実施例では、フレーム同期パルスをビットストリームＢＳａ，ＢＳｂ，ＢＳｃとは無関係に外部から供給するようにしているが、ビットストリームＢＳａ，ＢＳｂ，ＢＳｃのいずれか一つに合わせるようにしてもよい。この場合には、最初に入力されたビットストリームのＶＤに基づく表示タイミングをＣＰＵ１３が把握しておき、切替後のビットストリームのＶＤを切替前のビットストリームの表示タイミングに基づいてαだけ加算すればよい。
また、以上の説明では、便宜上、各ピクチャの表示タイミングがデコードタイミングの１フレーム後となっているが、実際の動作では、状況に応じ、表示タイミングがデコードタイミングの数フレーム後となることもあり得る。
また、ＭＰＥＧの場合、Ｐ，Ｂピクチャでは、単独で画面を構成することができないので、チャネル切替後、最初にＩピクチャが検出された時点からデコードを開始することが望ましい。
更に、バッファ２１，２２のクリアタイミングについても、ＶＬＣデコードエラーを検出する他に、ＣＰＵ１３が切替タイミングを把握している場合には、ＣＰＵ１３からデコーダ本体１１にバッファクリアタイミングを与えるようにしてもよい。
【００１８】
【発明の効果】
以上述べたように、この発明によれば、ビットストリームのフレーム毎に設定された遅延期間が経過したのち、最初に発生する前記フレーム同期パルスに同期させてそのフレームを表示させると共に、前記遅延時間経過から前記フレーム同期パルスの発生までの期間に到来する入力ビットストリームについては、遅延バッファで吸収するようにしているので、表示タイミングがまちまちの複数チャンネルのビットストリームを切替えても、各フレームの表示タイミングは、全て前記フレーム同期パルスに同期することになり、従来のような同期ずれが発生することがない。
【図面の簡単な説明】
【図１】 この発明の一実施例に係る画像デコーダのブロック図である。
【図２】 同画像デコーダのビットストリーム入力タイミング及び表示タイミングとバッファのデータ量との関係を示す図である。
【図３】 同画像デコーダのＶＬＣデコード部での処理を示すフローチャートである。
【図４】 ＭＰＥＧのデータ構造を説明するための図である。
【図５】 従来の画像デコーダの構成を示す図である。
【図６】 従来の画像デコーダのビットストリーム入力タイミング及び表示タイミングとバッファのデータ量との関係を示す図である。
【図７】 複数チャンネルのビットストリームを切替えて入力する従来の画像デコーダのブロック図である。
【図８】 複数チャンネルのビットストリームを切替えたときの従来の問題点を説明するための図である。
【符号の説明】
１，２１…入力バッファ、２，１１…デコーダ本体、３，１４…スイッチ、１２…ＤＲＡＭ、１３…ＣＰＵ、２２…遅延バッファ、２３…フレームメモリ、２４…メインメモリ。
Claims (1)
- 画像情報と当該画像情報の表示タイミングを指示する遅延時間情報とを含む可変長フレームの入力ビットストリームをデコードしてデコードされた画像情報を前記遅延時間情報で規定された時間だけ遅延させた後の表示タイミングで出力するデコード手段と、
このデコード手段の入力段に設けられ前記入力ビットストリームを順次格納すると共に前記デコード手段へ前記入力ビットストリームを前記遅延時間情報で指示された表示タイミングに同期させて供給するための入力バッファと
を備えた画像デコーダにおいて、
前記入力バッファと前記デコード手段との間に前記入力ビットストリームを格納可能な遅延バッファを挿入し、
前記デコード手段は、表示タイミングが互いに同期しない複数の入力ビットストリームを選択的に入力し、この入力された入力ビットストリームについて、前記画像情報の遅延時間情報に基づく表示タイミングが経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるタイミングで前記画像情報を表示すると共に、次にデコードすべき可変長フレームのデコードを開始するものであり、
前記遅延バッファは、少なくとも前記遅延時間情報で規定された時間が経過した後、前記複数の入力ビットストリームに共通のフレーム同期パルスが出力されるまでの入力ビットストリームを格納可能なものである
ことを特徴とする画像デコーダ。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4492895A JP3744017B2 (ja) | 1995-02-09 | 1995-02-09 | 画像デコーダ |
| US08/596,503 US5798804A (en) | 1995-02-09 | 1996-02-05 | Image decoder for decoding variable-length image data using frame synchronizing signal and method of decoding the image data |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4492895A JP3744017B2 (ja) | 1995-02-09 | 1995-02-09 | 画像デコーダ |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH08223572A JPH08223572A (ja) | 1996-08-30 |
| JP3744017B2 true JP3744017B2 (ja) | 2006-02-08 |
Family
ID=12705144
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4492895A Expired - Fee Related JP3744017B2 (ja) | 1995-02-09 | 1995-02-09 | 画像デコーダ |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5798804A (ja) |
| JP (1) | JP3744017B2 (ja) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100230912B1 (ko) * | 1997-01-20 | 1999-11-15 | 감영환 | 고화질 텔레비젼(hdtv)의 복호지연에 의한 오류 데이타 제거장치 및 방법 |
| US6295094B1 (en) * | 1997-09-11 | 2001-09-25 | U.S. Philips Corporation | Instant replay of digital video optimized using non MPEG frame tags |
| JP3407287B2 (ja) * | 1997-12-22 | 2003-05-19 | 日本電気株式会社 | 符号化復号システム |
| FR2780186B1 (fr) * | 1998-06-23 | 2000-08-11 | St Microelectronics Sa | Procede et dispositif de decodage d'une image, comprimee notamment selon les normes mpeg, en particulier une image bidirectionnelle |
| KR100363174B1 (ko) * | 2001-02-15 | 2002-12-05 | 삼성전자 주식회사 | 비 정상 동기 신호를 처리하는 영상 표시 제어 장치 및 그방법 |
| US7120646B2 (en) * | 2001-04-09 | 2006-10-10 | Health Language, Inc. | Method and system for interfacing with a multi-level data structure |
| JP4306519B2 (ja) * | 2003-09-29 | 2009-08-05 | アイシン・エィ・ダブリュ株式会社 | 圧力制御弁 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4856030A (en) * | 1988-07-20 | 1989-08-08 | Itt Defense Communications | Apparatus and methods of locking a receiving modem to a transmitting modem employing a burst signal |
| US5490258A (en) * | 1991-07-29 | 1996-02-06 | Fenner; Peter R. | Associative memory for very large key spaces |
| US5233629A (en) * | 1991-07-26 | 1993-08-03 | General Instrument Corporation | Method and apparatus for communicating digital data using trellis coded qam |
| US5289276A (en) * | 1992-06-19 | 1994-02-22 | General Electric Company | Method and apparatus for conveying compressed video data over a noisy communication channel |
| US5486864A (en) * | 1993-05-13 | 1996-01-23 | Rca Thomson Licensing Corporation | Differential time code method and apparatus as for a compressed video signal |
| US5452006A (en) * | 1993-10-25 | 1995-09-19 | Lsi Logic Corporation | Two-part synchronization scheme for digital video decoders |
| US5453799A (en) * | 1993-11-05 | 1995-09-26 | Comsat Corporation | Unified motion estimation architecture |
| US5473385A (en) * | 1994-06-07 | 1995-12-05 | Tv/Com Technologies, Inc. | Clock correction in a video data decoder using video synchronization signals |
| US5533021A (en) * | 1995-02-03 | 1996-07-02 | International Business Machines Corporation | Apparatus and method for segmentation and time synchronization of the transmission of multimedia data |
-
1995
- 1995-02-09 JP JP4492895A patent/JP3744017B2/ja not_active Expired - Fee Related
-
1996
- 1996-02-05 US US08/596,503 patent/US5798804A/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH08223572A (ja) | 1996-08-30 |
| US5798804A (en) | 1998-08-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100232992B1 (ko) | 동화상 디코딩 회로 | |
| JP4649615B2 (ja) | 映像符号化、復号化装置および映像符号化、復号化方法、並びにそれらのプログラム | |
| KR100301826B1 (ko) | 비디오디코더 | |
| JPH08505512A (ja) | 映像デコーダにおけるチャンネル・バッファの管理 | |
| KR20010031222A (ko) | 트랜스코딩 방법 및 장치 | |
| JPH1118083A (ja) | ディジタル信号符号化方法及び装置、信号記録媒体並びに信号伝送方法 | |
| KR0185927B1 (ko) | 입력비트열의 프레임레이트를 변환하는 영상복호화장치 및 방법 | |
| EP1280356A2 (en) | Apparatus and method for compressing multiplexed video signals | |
| KR100215824B1 (ko) | 엠펙 디코더의 프레임 메모리 및 영상 데이타 디코딩방법 | |
| US6160847A (en) | Detection mechanism for video channel underflow in MPEG-2 video decoding | |
| JP3516450B2 (ja) | ビットストリームの伝送方法及び伝送システム | |
| JP3744017B2 (ja) | 画像デコーダ | |
| US5905534A (en) | Picture decoding and encoding method and apparatus for controlling processing speeds | |
| JP4010617B2 (ja) | 画像復号化装置及び画像復号化方法 | |
| JPH08237666A (ja) | フレーム間帯域圧縮信号処理装置 | |
| JP3852838B2 (ja) | 動画像送受信システム、動画像送信装置、及び動画像受信装置 | |
| US6885703B1 (en) | Video code processing method, which can generate continuous moving pictures | |
| JPH10191331A (ja) | 画像データの符号化方法及び装置 | |
| WO2001045402A1 (en) | Image reproducing method and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods | |
| WO1996033573A1 (en) | Device and method for coding moving image | |
| JPH07274179A (ja) | 動画像符号化装置 | |
| JP4433319B2 (ja) | 信号再生装置 | |
| JP2820631B2 (ja) | 画像復号方法および装置 | |
| JP2002010263A (ja) | 動画像符号化装置および動画像符号化方法 | |
| JPH11136680A (ja) | 画像符号化方法及び装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041207 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050927 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051004 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051101 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20051114 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |