JP2002218472A - 可変画像レート復号化装置及び可変画像レート復号化方法 - Google Patents

可変画像レート復号化装置及び可変画像レート復号化方法

Info

Publication number
JP2002218472A
JP2002218472A JP2001014251A JP2001014251A JP2002218472A JP 2002218472 A JP2002218472 A JP 2002218472A JP 2001014251 A JP2001014251 A JP 2001014251A JP 2001014251 A JP2001014251 A JP 2001014251A JP 2002218472 A JP2002218472 A JP 2002218472A
Authority
JP
Japan
Prior art keywords
image
decoding
decoded
rate
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001014251A
Other languages
English (en)
Inventor
Kenji Sugiyama
賢二 杉山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP2001014251A priority Critical patent/JP2002218472A/ja
Priority to US10/029,793 priority patent/US20020097797A1/en
Publication of JP2002218472A publication Critical patent/JP2002218472A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

(57)【要約】 【課題】 入来符号列のフレーム画素数が変化しても、
常に最適な再生画像が得られる復号化装置及び復号化方
法を提供すること。 【解決手段】 画像レート設定器１３は、入来符号列の
画像サイズ(フレーム画素数)とあらかじめ設定されてい
る本装置の復号処理能力値とから復号化の画像レートを
決定し、設定した復号化画像レートを符号列スイッチ８
へ与える。符号列スイッチ８は、復号化画像レートに従
って、ピクチャーヘッダーの情報でピクチャータイプ
（Ｉ、Ｐ、Ｂ）とフレーム番号を認識して、Ｂピクチャ
ーの符号列を周期的に間引く。残った符号列は、可変長
復号化器１に与えられ、これ以降で復号化処理が行われ
る。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像を効率的に伝
送、蓄積、表示するために、双方向予測を含む画像間予
測符号化により高能率符号化された符号列から動画像を
再生する可変画像レート復号化装置及び可変画像レート
復号化方法に関する。そして、この発明は特に、入来符
号列のフレーム画素数が変化しても、常に最適な再生動
画像が得られる可変画像レート復号化装置及び可変画像
レート復号化方法を提供することを目的とする。
【０００２】
【従来の技術】＜可変画像レート復号化＞動画像符号化
では、６４ｋｂｐｓなど特に低い転送ビットレートで符
号化する場合、入来する画像の全てを符号化せず、間引
いた一部の画像のみを符号化する場合がある。復号化で
はこれに従って、入来する符号列を順次復号し、復号さ
れたフレームは次のフレームが復号されるまで繰り返し
出力される。
【０００３】一方、符号化が所定画像レートの場合で
も、ソフトウエア処理による復号化などでは、復号化処
理能力が入来符号列を実時間で完全に復号するに至らな
い場合、全ての画像を復号するのではなく、間引いた一
部の画像のみを復号する。結果的に復号化する画像レー
トが可変になる。
【０００４】ＭＰＥＧ方式による双方向予測を含む画像
間予測符号化では、Ｉピクチャーと呼ばれる独立符号化
（画像内符号化）よる画像の他に、Ｐピクチャーと呼ば
れる片側方向の画像間予測符号化を用いた画像と、Ｂピ
クチャーと呼ばれる双方向の画像間予測符号化を用いた
画像とが生成される。
【０００５】ここで、Ｂピクチャーは、他のフレームの
参照フレームにならないので、復号化しなくても他のフ
レームには影響しない。これにより、Ｂピクチャーの符
号列を削除して復号画像レートを落とすことができる。
巡回予測が行われるＰピクチャーは、復号化されないと
次のフレームが復号化できないので、削除することはで
きない。 ＜従来例可変画像レート復号化装置＞図３は可変画像レ
ート復号化装置の従来例構成を示したものである。符号
入力端子１１より入来する所定画像レートの符号列は、
符号列バッファ３１に与えられる。復号化処理の進行に
従って、入来符号列は符号列バッファ３１からスイッチ
３２を介して可変長復号化器１に与えられる。可変長復
号化器１で予測残差の可変長符号が固定長の符号に戻さ
れ、逆量子化器２に与えられる。固定長符号は逆量子化
器２で予測残差の再生ＤＣＴ（離散コサイン変換）係数
値となり、逆ＤＣＴ３に与えられる。逆ＤＣＴ３は８×
８個の係数を再生予測残差信号に変換し、加算器４に与
える。加算器４では再生予測残差信号に、画像間予測器
９から与えられる予測信号が加算され、再生画像とな
る。
【０００６】この様にして得られた再生画像信号は、フ
レームメモリ５に書き込まれ、Ｂピクチャーの再生画像
はそのままスイッチ６に、Ｐピクチャーの再生画像は参
照画像となるため、フレームメモリ１０に与えられる。
画像間予測器９は参照画像から予測信号を形成し、加算
器４に与える。スイッチ６はＢピクチャーではフレーム
メモリ５の出力を、Ｐピクチャーではフレームメモリ１
０で遅延させられた出力を選択し、画像出力端子７から
出力する。
【０００７】
【発明が解決しようとする課題】柔軟な構造の復号化処
理を備えた従来の復号化装置では、入来符号列のフレー
ムサイズが変わっても復号は可能であるが、所定復号処
理能力より大きなフレームサイズの場合、１フレーム分
の所定処理時間で復号が完了しなくなる。その場合、符
号列バッファ３１から読み出される符号列の速度が本来
より遅くなり、一方、入来符号列の速度は本来のままな
ので、符号列がバッファ３１からあふれることになる。
あふれた符号列はスイッチ３２で廃棄される。
【０００８】破棄された現フレームの符号列は当然復号
化されないまま、復号処理は復号可能な次のフレームに
移ることになる。入来符号列における各フレームの符号
量は大きく変動するので、どのフレームが復号できるか
は不確定であり、Ｐ(Ｉ)ピクチャーが復号化されない
と、それより先は次のＩピクチャーまで復号できない。
【０００９】このように、従来の可変画像レート復号化
装置は、入来符号列に対して処理能力が不足する場合、
現フレームの復号化処理が済んだ時点で復号化可能な次
のフレームの復号を行うので、フレーム符号量の変動に
伴って再生フレームの間隔が不規則になり、必ずしも最
適な復号化処理ができなかった。
【００１０】また、フレーム画素数（フレームサイズ）
に対して復号化処理用のフレームメモリ容量が不足する
場合は、復号化処理が行えなかった。
【００１１】この発明は、入来符号列のフレーム画素数
が変化しても、常に最適な再生画像が得られる可変画像
レート復号化装置及び可変画像レート復号化方法を提供
することを目的とする。
【００１２】
【課題を解決するための手段】そこで、上記課題を解決
するために本発明は、下記の装置及び方法を提供するも
のである。 （１） 双方向予測を含む画像間予測符号化により符号
化された入来符号列から動画像を再生する可変画像レー
ト復号化装置であって、前記入来符号列のフレーム画素
数に関する情報を得て、前記フレーム画素数と復号化処
理能力との関係から動画像の復号化画像レートを設定す
る画像レート設定手段と、前記復号化画像レートに応じ
て、前記入来符号列における双方向画像間予測画像の内
の少なくとも一部を復号化しないようにし、前記復号化
画像レートで前記入来符号列の復号化を行って復号画像
を得る復号化手段と、前記復号画像の画像を補間して所
定画像レートの再生画像を得る補間手段と、を備えたこ
とを特徴とする可変画像レート復号化装置。 （２） 双方向予測を含む画像間予測符号化により符号
化された入来符号列から動画像を再生する可変画像レー
ト復号化装置であって、前記入来符号列のフレーム画素
数に関する情報を得て、前記フレーム画素数と後述の復
号化用フレームメモリの容量との関係から、前記入来符
号列における双方向画像間予測画像の復号化ができない
場合に、前記入来符号列における全ての双方向画像間予
測画像を復号化しない復号化方法を設定する復号化制御
手段と、前記復号化方法に従って前記入来符号列を復号
化し復号画像を得る復号化手段と、前記復号化方法に従
って双方向予測を行わない場合は、双方向予測を行う場
合の４フレーム分のメモリを、画素数２倍の２フレーム
分のメモリとして用い、前記復号画像から所定の再生画
像を得る復号化用フレームメモリと、を備えたことを特
徴とする可変画像レート復号化装置。 （３） 双方向予測を含む画像間予測符号化により符号
化された入来符号列から動画像を再生する可変画像レー
ト復号化方法であって、前記入来符号列のフレーム画素
数に関する情報を得て、前記フレーム画素数と復号化処
理能力との関係から動画像の復号化画像レートを設定
し、前記設定された復号化画像レートに応じて、前記入
来符号列における双方向画像間予測画像の内の少なくと
も一部を復号化しないようにし、前記設定された復号化
画像レートで前記入来符号列の復号化を行って復号画像
を得、前記得られた復号画像を補間して所定画像レート
の再生画像を得る、ことを特徴とする可変画像レート復
号化方法。 （４） 双方向予測を含む画像間予測符号化により符号
化された入来符号列から動画像を再生する可変画像レー
ト復号化方法であって、前記入来符号列のフレーム画素
数に関する情報を得て、前記フレーム画素数と後述の復
号化用フレームメモリの容量との関係から、前記入来符
号列における双方向画像間予測画像の復号化ができない
場合に、前記入来符号列における全ての双方向画像間予
測画像を復号化しない復号化方法を設定し、前記設定さ
れた復号化方法に従って前記入来符号列を復号化し復号
画像を得、前記設定された復号化方法に従って双方向予
測を行わない場合は、双方向予測を行う場合の４フレー
ム分のメモリを、画素数２倍の２フレーム分のメモリと
して用いる復号化用フレームメモリにより、前記得られ
た復号画像から所定の再生画像を得る、ことを特徴とす
る可変画像レート復号化方法。
【００１３】
【発明の実施の形態】本発明の第１実施例は、フレーム
画素数と復号化処理能力とから最適な復号画像レートを
設定するが、Ｐピクチャー間隔と画像レートの関係か
ら、Ｐピクチャーは必ず復号化される。従って、第１実
施例では、再生画像レートが低下する場合でも、処理能
力に対して最大限の復号が行え、再生動画像のフレーム
間隔は一定となる。
【００１４】また、本発明の第２実施例では、フレーム
画素数とフレームメモリ容量とから双方向画像間予測画
像（Ｂピクチャー）の復号化ができない場合は、フレー
ムメモリの使用方法を変更して双方向画像間予測画像以
外の復号化のみを行うことで、通常復号で必要な４フレ
ーム分のフレームメモリを２フレーム分のフレームメモ
リとして使用でき、２倍のフレーム画素数まで復号化可
能となる。 ＜第１実施例可変画像レート復号化装置＞本発明の可変
画像レート復号化装置の第１実施例について説明する。
第１実施例の構成を図１に示す。図３の従来例と同一構
成要素には同一符号を記してある。図１には、図３と比
較して、多重化分離器１２、画像レート設定器１３が追
加されている。また、符号列スイッチ８の動作が異な
る。
【００１５】符号入力端子１１より入来する符号列は、
Ｉピクチャーの他にＰピクチャーとＢピクチャーの両方
を用いたＭＰＥＧ型の符号化で、Ｐ(またはＩ)ピクチャ
ー間隔が６フレームで符号化されたものである。画像サ
イズは４８０ｐと呼ばれる輝度信号７２０×４８０画素
のもの、７２０ｐと呼ばれる輝度信号１２８０×７２０
画素のもの、１０８０ｐと呼ばれる輝度信号１９２０×
１０８０画素のもののいずれかである。画像レートはす
べて６０ｆｐｓ(frame per second)で、画像サイズの識
別情報は符号列に多重化されている。
【００１６】符号列は、多重化分離器１２で符号列から
画像サイズに関する情報が抽出され、主たる符号列は符
号列スイッチ８を介して可変長復号化器１へ、画像サイ
ズに関する情報は画像レート設定器１３に与えられる。
【００１７】画像レート設定器１３は、画像サイズ(フ
レーム画素数)とあらかじめ設定されている本装置の復
号処理能力値とから復号化の画像レートを決定し、設定
した画像レートを符号列スイッチ８へ与える。
【００１８】復号のための処理能力は、入来符号列の
(画像サイズ×画像レート)に比例して必要になる。画像
サイズは、４８０ｐに対して７２０ｐが２．６７倍、１
０８０ｐが６倍である。従って、４８０ｐで６０ｆｐｓ
の復号能力がある場合、フレーム画素数と処理量が比例
関係であったとすると、７２０ｐで２２．５ｆｐｓ、１
０８０ｐで１０ｆｐｓの復号が可能になる。処理能力が
上がれば、各画像の復号化レートは上昇する。この関係
を表１に示す。
【００１９】
【表１】 現実には、ＢピクチャーとＰピクチャーで復号化方法が
異なり、一般的にＢピクチャーのほうが処理量は多い。
また、ピクチャーヘッダーの復号などは画像サイズに関
係ないので、フレーム画素数に単純に比例するわけでは
ない。これらの特性は復号化処理回路(ソフトウエア)に
よって異なるので、画像レート設定器１３はこれらを考
慮する必要がある。
【００２０】一方、入来する符号列は常に６０ｆｐｓで
符号化されており、処理能力がそれに満たない場合は、
そのままでは復号化できないので、符号列を低い画像レ
ートのものに変換する。ここで、Ｐピクチャーは必ず復
号されないと、先のフレームの復号ができなくなるの
で、復号されるフレームはピクチャータイプに同期して
制御され、Ｂピクチャーの符号列のみが多段階に間引か
れる。その様子を図５に示す。設定される復号化画像レ
ートは６０ｆｐｓ、３０ｆｐｓ、２０ｆｐｓ、１０ｆｐ
ｓの４種類となる。先の復号化能力から決まる復号化画
像レートを超えない範囲で、この中から最も高い復号化
画像レートが設定される。
【００２１】符号列スイッチ８は、復号化画像レートに
従って、ピクチャーヘッダーの情報でピクチャータイプ
（Ｉ、Ｐ、Ｂ）とフレーム番号を認識して、Ｂピクチャ
ーの符号列を周期的に間引く。残った符号列は、可変長
復号化器１に与えられ、これ以降で復号化処理が行われ
るが、この処理は復号化画像レートが落とされたもの
で、実時間よりも長い処理時間で各フレームが復号され
る。
【００２２】可変長復号化器１は可変長符号を固定長の
符号に戻し、固定長符号は逆量子化器２に与えられる。
固定長符号は逆量子化器２で係数値となり、逆ＤＣＴ
（離散コサイン変換器）３に与えられる。逆ＤＣＴ３は
８×８個の係数を再生予測残差信号に変換し、加算器４
に与える。加算器４では再生予測残差信号に予測信号が
加算され、復号画像となる。
【００２３】この様にして得られた復号画像信号は、フ
レームメモリ５に書き込まれ、Ｂピクチャーの再生画像
はそのままスイッチ６に、Ｐ(Ｉ)ピクチャーの再生画像
は参照画像となるため、フレームメモリ１０に与えられ
る。画像間予測器９は参照画像から予測信号を形成し、
加算器４に与える。スイッチ６はＢピクチャーではフレ
ームメモリ５の出力を、Ｐ(Ｉ)ピクチャーではフレーム
メモリ１０で遅延させられた出力を選択し、画像出力端
子７から出力する。
【００２４】フレームメモリ５、１０は、間引かれてい
るフレームの分を繰り返し出力することにより、復号画
像に対して補間を行い、所定画像レートの再生画像を得
る。この補間処理は復号化画像レートにより異なり、３
０ｆｐｓの場合は２フレームが繰り返され、２０ｆｐｓ
の場合は３フレームが、１０ｆｐｓの場合は６フレーム
が繰り返される。この様子を図７に示す。
【００２５】画像間予測器８は、フレームメモリ１０に
保持されている参照画像から予測信号を形成し、得られ
た予測信号は加算器４に与えられる。
【００２６】入来符号列の画像サイズが大きな場合に、
復号画像の画像レートが低下することになる。動画像信
号は毎秒６０フレーム(フィールド)が基本であるが、こ
の値は面フリッカの検知限界から来るものであり、画像
のすべての動きでそれが必要なわけではない。実際、映
画フィルムが２４ｆｐｓであることからも推測できる
が、３０ｆｐｓで動きの劣化(不自然さ)が検知されるの
は早い動きの場合のみで、通常２０ｆｐｓでも大きな劣
化とはならない。ただし、１０ｆｐｓはかなり不自然と
なるので、一般的な視聴には適さない。
【００２７】本実施例においては、６０ｆｐｓの順次走
査でＰ(またはＩ)ピクチャー間隔が６フレームを例に説
明したが、他のフレームレート、飛越し走査、他のＰ
(Ｉ)ピクチャー間隔の場合でも実施可能であることは言
うまでもない。また、ＭＰＥＧ等では画像間予測の参照
フレームとならないのは双方向画像間予測(Ｂ)ピクチャ
ーであるが、必ずしも双方向予測でなくても参照フレー
ムとならないものは同様に廃棄可能である。
【００２８】このように第１実施例は、フレーム画素数
と復号化処理能力とから最適な復号画像レートを設定す
るが、Ｐピクチャー間隔と画像レートの関係から、Ｐピ
クチャーは必ず復号化される。従って、第１実施例で
は、復号化画像レートが低下する場合でも、復号処理能
力に対して最大限の復号が行え、再生動画像のフレーム
間隔は一定となる。よって、入来符号列のフレーム画素
数が変化しても、常に最適な再生画像が得られるように
なる。 ＜第２実施例可変画像レート復号化装置＞本発明の可変
画像レート復号化装置の第２実施例について説明する。
その構成を図２に示す。図１の第１実施例と同一構成要
素には同一符号を記してある。図２には、図１と比較し
て、画像レート設定器１３の代わりに複号化設定器２３
があり、フレームメモリ５、１０の代わりにフレームメ
モリ２１、２２がある。
【００２９】第２実施例において、第１実施例と大きく
異なるのは符号列の制御とフレームメモリの使い方で、
復号化処理は基本的に同じであるので、異なる部分のみ
説明する。第２実施例では、Ｂピクチャーの復号を行わ
ないように設定した場合、Ｐピクチャーの復号におい
て、メモリの使用領域を変更して、２倍の画像サイズの
画像まで復号できるようにする。
【００３０】符号入力端子１１、多重化分離器１２、可
変長復号化器１、逆量子化器２、逆ＤＣＴ３、加算器
４、画像間予測器９の動作は図１の第１実施例と同じで
ある。
【００３１】復号化設定器２３は、画像サイズとあらか
じめ設定されているフレームメモリ２１，２２の容量と
から復号方法を判断し、設定した復号方法を符号列スイ
ッチ８、フレームメモリ２１、２２へ与える。復号化
は、Ｂピクチャーを含めた復号が不可能な場合に、Ｐピ
クチャー及びＩピクチャーのみを復号する。
【００３２】Ｂピクチャーの復号には、復号された画像
を書き込むフレームメモリ、双方向予測のためのＰ(ま
たはＩ)ピクチャーの復号画像が蓄積される順方向予測
参照フレームメモリと逆方向予測参照フレームメモリ、
さらにＢピクチャーを繰り返し出力するための出力フレ
ームメモリが必要となる。なお、最後の出力フレームメ
モリはフレーム補間を行わない場合は必要ないが、順次
走査フレーム形態から通常の飛越し走査形態への変換
や、フィルム画像の２−３プルダウン処理でも必要にな
るので一般的なものである。
【００３３】Ｐ及びＩピクチャーのみの復号では、復号
された画像を書き込むフレームメモリと、画像間予測及
び繰り返し出力兼用のためフレームメモリとが必要にな
る。つまりＢピクチャーの復号には４フレーム分のフレ
ームメモリが必要となるが、Ｐ及びＩピクチャーのみの
復号では２フレーム分のフレームメモリでよいことにな
り、即ちＰ及びＩピクチャーのみなら半分のフレームメ
モリで良いことになる。
【００３４】フレームメモリの容量は、入来符号列の画
像サイズに比例して必要になる。画像サイズは、４８０
ｐに対して７２０ｐが２．６７倍、１０８０ｐが６倍で
ある。従って、７２０ｐで２フレーム分あれば、４８０
ｐで全ての復号が、７２０ｐでＰ及びＩピクチャーのみ
の複号が可能になり、１０８０ｐで２フレーム分あれ
ば、４８０ｐと７２０ｐで全ての復号が、１０８０ｐで
Ｐ及びＩピクチャーのみの複号が可能になる。
【００３５】復号化によりフレームメモリ２１と２２
は、領域分割方法が図４のように変更される。フレーム
メモリ２１は、全ての復号で復号画像の書き込みとＢピ
クチャー出力に使われるものが、Ｐ及びＩピクチャーの
みの復号では、復号画像の書き込みのみに使われ、２倍
の画像サイズの画像に対応できる。フレームメモリ２２
は、全ての復号で順方向予測及び逆方向予測の２フレー
ム分(Ｐピクチャー出力兼用)のものが、Ｐ及びＩピクチ
ャーのみの復号では、順方向予測の１フレーム分のみに
使われ、フレームメモリ２１と同様に２倍の画像サイズ
の画像に対応できる。
【００３６】このように、第２実施例は、フレーム画素
数とフレームメモリ容量とから双方向画像間予測画像
（Ｂピクチャー）の復号化ができない場合は、フレーム
メモリの使用方法を変更して双方向画像間予測画像以外
の復号化のみを行うことで、通常復号で必要な４フレー
ム分のフレームメモリを２フレーム分のフレームメモリ
として使用でき、２倍のフレーム画素数まで復号化可能
となる。従って、入来符号列のフレーム画素数が変化し
ても、常に最適な再生画像が得られるようになる。
【００３７】
【発明の効果】以上の通り、本発明は下記の効果を有す
る。 （イ）フレーム画素数と復号化処理能力とから最適な復
号化画像レートを設定するようにした場合には、Ｐピク
チャー間隔と復号化画像レートとの関係から、Ｐピクチ
ャーは必ず復号化される。従って、復号化画像レートが
低下する場合でも、復号処理能力に対して最大限の復号
が行え、再生動画像のフレーム間隔は一定となり、動き
の不自然さは最小限である。よって、入来符号列のフレ
ーム画素数が変化しても、常に最適な再生画像が得られ
るようになる。 （ロ）フレーム画素数とフレームメモリ容量とから双方
向画像間予測画像（Ｂピクチャー）の復号化ができない
場合は、復号化用フレームメモリの使用方法を変更して
双方向画像間予測画像以外の復号化のみを行うことで、
通常復号で必要な４フレーム分のフレームメモリを２フ
レーム分のフレームメモリとして使用でき、２倍のフレ
ーム画素数まで復号化可能となる。従って、入来符号列
のフレーム画素数が変化しても、常に最適な再生画像が
得られるようになる。
【図面の簡単な説明】
【図１】第１実施例の構成例を示す図である。
【図２】第２実施例の構成例を示す図である。
【図３】従来例の構成例を示す図である。
【図４】第２実施例でのフレームメモリ使用領域を示す
図である。
【図５】第１実施例での画像間引きの様子を示す図であ
る。
【図６】第１実施例での補間の様子を示す図である。
【符号の説明】
１ 可変長復号化器 ２ 逆量子化器 ３ 逆ＤＣＴ ４ 加算器 ５，１０，２１，２２ フレームメモリ ６ 画像スイッチ ７ 画像出力端子 ８，３２ 符号列スイッチ ９ 画像間予測器 １１ 符号列入力端子 １２ 多重化分離器 １３ 画像レート設定器 ２３ 復号化設定器 ３１ 符号列バッファ

Claims (4)

    【特許請求の範囲】
  1. 【請求項１】双方向予測を含む画像間予測符号化により
    符号化された入来符号列から動画像を再生する可変画像
    レート復号化装置であって、 前記入来符号列のフレーム画素数に関する情報を得て、
    前記フレーム画素数と復号化処理能力との関係から動画
    像の復号化画像レートを設定する画像レート設定手段
    と、 前記復号化画像レートに応じて、前記入来符号列におけ
    る双方向画像間予測画像の内の少なくとも一部を復号化
    しないようにし、前記復号化画像レートで前記入来符号
    列の復号化を行って復号画像を得る復号化手段と、 前記復号画像の画像を補間して所定画像レートの再生画
    像を得る補間手段と、を備えたことを特徴とする可変画
    像レート復号化装置。
  2. 【請求項２】双方向予測を含む画像間予測符号化により
    符号化された入来符号列から動画像を再生する可変画像
    レート復号化装置であって、 前記入来符号列のフレーム画素数に関する情報を得て、
    前記フレーム画素数と後述の復号化用フレームメモリの
    容量との関係から、前記入来符号列における双方向画像
    間予測画像の復号化ができない場合に、前記入来符号列
    における全ての双方向画像間予測画像を復号化しない復
    号化方法を設定する復号化制御手段と、 前記復号化方法に従って前記入来符号列を復号化し復号
    画像を得る復号化手段と、 前記復号化方法に従って双方向予測を行わない場合は、
    双方向予測を行う場合の４フレーム分のメモリを、画素
    数２倍の２フレーム分のメモリとして用い、前記復号画
    像から所定の再生画像を得る復号化用フレームメモリ
    と、を備えたことを特徴とする可変画像レート復号化装
    置。
  3. 【請求項３】双方向予測を含む画像間予測符号化により
    符号化された入来符号列から動画像を再生する可変画像
    レート復号化方法であって、 前記入来符号列のフレーム画素数に関する情報を得て、
    前記フレーム画素数と復号化処理能力との関係から動画
    像の復号化画像レートを設定し、 前記設定された復号化画像レートに応じて、前記入来符
    号列における双方向画像間予測画像の内の少なくとも一
    部を復号化しないようにし、前記設定された復号化画像
    レートで前記入来符号列の復号化を行って復号画像を
    得、 前記得られた復号画像を補間して所定画像レートの再生
    画像を得る、ことを特徴とする可変画像レート復号化方
    法。
  4. 【請求項４】双方向予測を含む画像間予測符号化により
    符号化された入来符号列から動画像を再生する可変画像
    レート復号化方法であって、 前記入来符号列のフレーム画素数に関する情報を得て、
    前記フレーム画素数と後述の復号化用フレームメモリの
    容量との関係から、前記入来符号列における双方向画像
    間予測画像の復号化ができない場合に、前記入来符号列
    における全ての双方向画像間予測画像を復号化しない復
    号化方法を設定し、 前記設定された復号化方法に従って前記入来符号列を復
    号化し復号画像を得、 前記設定された復号化方法に従って双方向予測を行わな
    い場合は、双方向予測を行う場合の４フレーム分のメモ
    リを、画素数２倍の２フレーム分のメモリとして用いる
    復号化用フレームメモリにより、前記得られた復号画像
    から所定の再生画像を得る、ことを特徴とする可変画像
    レート復号化方法。
JP2001014251A 2001-01-23 2001-01-23 可変画像レート復号化装置及び可変画像レート復号化方法 Pending JP2002218472A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001014251A JP2002218472A (ja) 2001-01-23 2001-01-23 可変画像レート復号化装置及び可変画像レート復号化方法
US10/029,793 US20020097797A1 (en) 2001-01-23 2001-12-31 Method and apparatus for decoding picture signal at variable picture rate

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001014251A JP2002218472A (ja) 2001-01-23 2001-01-23 可変画像レート復号化装置及び可変画像レート復号化方法

Publications (1)

Publication Number Publication Date
JP2002218472A true JP2002218472A (ja) 2002-08-02

Family

ID=18880976

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001014251A Pending JP2002218472A (ja) 2001-01-23 2001-01-23 可変画像レート復号化装置及び可変画像レート復号化方法

Country Status (2)

Country Link
US (1) US20020097797A1 (ja)
JP (1) JP2002218472A (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007043719A (ja) * 2005-08-04 2007-02-15 Samsung Electronics Co Ltd ピクチャースキップ方法及び装置
WO2008007758A1 (en) * 2006-07-14 2008-01-17 Sony Corporation Reproduction device, reproduction method, and program
JP2008199109A (ja) * 2007-02-08 2008-08-28 Saxa Inc 情報処理装置および情報処理方法
JP2010288028A (ja) * 2009-06-10 2010-12-24 Nec Casio Mobile Communications Ltd 動画ストリーム処理装置及び動画ストリーム処理プログラム
JP2012513135A (ja) * 2008-12-19 2012-06-07 トムソン ライセンシング ビデオストリームをブラウジングする方法
JP2014011714A (ja) * 2012-07-02 2014-01-20 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
JP2016158282A (ja) * 2016-04-12 2016-09-01 株式会社Ｎｔｔドコモ 動画像予測復号方法及び動画像予測復号装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7010046B2 (en) * 2002-05-02 2006-03-07 Lsi Logic Corporation Method and/or architecture for implementing MPEG frame display using four frame stores
CN102256138A (zh) * 2010-05-18 2011-11-23 安凯(广州)微电子技术有限公司 一种改善视频播放效果的方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6009236A (en) * 1994-09-26 1999-12-28 Mitsubishi Denki Kabushiki Kaisha Digital video signal record and playback device and method for giving priority to a center of an I frame
EP0710028A3 (en) * 1994-10-28 2000-01-19 Kabushiki Kaisha Toshiba Image decoding apparatus
KR0185932B1 (ko) * 1995-12-11 1999-04-15 김광호 고속재생을 위한 비디오데이타 복호방법 및 그 장치

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007043719A (ja) * 2005-08-04 2007-02-15 Samsung Electronics Co Ltd ピクチャースキップ方法及び装置
US8817885B2 (en) 2005-08-04 2014-08-26 Samsung Electronics Co., Ltd. Method and apparatus for skipping pictures
WO2008007758A1 (en) * 2006-07-14 2008-01-17 Sony Corporation Reproduction device, reproduction method, and program
JP2008022475A (ja) * 2006-07-14 2008-01-31 Sony Corp 再生装置および再生方法、並びにプログラム
JP2008199109A (ja) * 2007-02-08 2008-08-28 Saxa Inc 情報処理装置および情報処理方法
JP4735558B2 (ja) * 2007-02-08 2011-07-27 サクサ株式会社 情報処理装置および情報処理方法
JP2012513135A (ja) * 2008-12-19 2012-06-07 トムソン ライセンシング ビデオストリームをブラウジングする方法
US9277210B2 (en) 2008-12-19 2016-03-01 Thomson Licensing Method and apparatus for partial coefficient decoding and spatial scaling
JP2010288028A (ja) * 2009-06-10 2010-12-24 Nec Casio Mobile Communications Ltd 動画ストリーム処理装置及び動画ストリーム処理プログラム
JP2014011714A (ja) * 2012-07-02 2014-01-20 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
US9942562B2 (en) 2012-07-02 2018-04-10 Ntt Docomo, Inc. Video predictive encoding device, video predictive encoding method, video predictive encoding program, video predictive decoding device, video predictive decoding method, and video predictive decoding program
US10116956B2 (en) 2012-07-02 2018-10-30 Ntt Docomo, Inc. Video predictive encoding device, video predictive encoding method, video predictive encoding program, video predictive decoding device, video predictive decoding method, and video predictive decoding program
US10560711B2 (en) 2012-07-02 2020-02-11 Ntt Docomo, Inc. VIDEO PREDICTIVE ENCODING DEVICE, VIDEO PREDICTIVE ENCODING Method, video predictive encoding program, video predictive decoding device, video predictive decoding method, and video predictive decoding program
JP2016158282A (ja) * 2016-04-12 2016-09-01 株式会社Ｎｔｔドコモ 動画像予測復号方法及び動画像予測復号装置

Also Published As

Publication number Publication date
US20020097797A1 (en) 2002-07-25

Similar Documents

Publication Publication Date Title
US8275247B2 (en) Method and apparatus for normal reverse playback
US20090103630A1 (en) Image processing device
US20020167607A1 (en) Method and device for generating a video signal
US7333711B2 (en) Data distribution apparatus and method, and data distribution system
JP2911114B2 (ja) 輪郭線復号化装置
JPH09200695A (ja) 高速再生のためのビデオデータの復号化方法及びその装置
EP0827347A2 (en) Recording and reproducing apparatus for digital image information
JP2002218472A (ja) 可変画像レート復号化装置及び可変画像レート復号化方法
JPH0937243A (ja) 動画像符号化装置及び復号装置
JPH08280022A (ja) 符号化ビデオ信号の復号化方法及び装置
JP3078991B2 (ja) 低遅延モード画像復号方法および装置
US20080181314A1 (en) Image coding apparatus and image coding method
US6128340A (en) Decoder system with 2.53 frame display buffer
JP4320509B2 (ja) 映像再符号化装置および方法
JP4906197B2 (ja) 復号装置および方法、並びに記録媒体
JP2007158778A (ja) トリック再生用コンテンツ作成方法および装置、トリック再生用圧縮動画データ送出方法および装置、およびトリック再生用コンテンツ作成用プログラム
JP3859118B2 (ja) 可変画像レート符号化装置、可変画像レート復号化装置、可変画像レート符号化方法、及び可変画像レート復号化方法
JP4867872B2 (ja) 画像処理装置、この画像処理装置の制御方法、及び、プログラム
JP3067404B2 (ja) 画像符号化装置及び復号化装置
KR100252810B1 (ko) 엠펙디코더
JPWO2008129648A1 (ja) フレームレート変換装置、フレームレート変換方法及び動画像符号化装置
JP3946177B2 (ja) 動画像符号化装置及び復号装置
JP2006319645A (ja) 映像再生装置及び方法及びプログラム及び記憶媒体
KR101336820B1 (ko) 다채널 트릭 모드에 특화된 복호화 장치 및 방법
JP2005236386A (ja) 画像処理装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060908

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070227