JP2001025015A - 動画像符号化装置及びその方法 - Google Patents
動画像符号化装置及びその方法Info
- Publication number
- JP2001025015A JP2001025015A JP19014399A JP19014399A JP2001025015A JP 2001025015 A JP2001025015 A JP 2001025015A JP 19014399 A JP19014399 A JP 19014399A JP 19014399 A JP19014399 A JP 19014399A JP 2001025015 A JP2001025015 A JP 2001025015A
- Authority
- JP
- Japan
- Prior art keywords
- code amount
- image
- quantization scale
- margin
- average
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
タイムで可変ビットレート符号化を行う際に好適な符号
量制御装置に関する。 【解決手段】 動画像の符号化を行う動画像符号化装置
において、各画像の発生符号量を検出する手段23と、
各画像の平均量子化スケールを検出する手段22と、各
画像の目標平均符号量を設定する手段33と、符号量の
余裕分を設定する手段32と、前記発生符号量、量子化
スケールと、前記目標平均符号量、符号量余裕分から所
定区間の割当符号量を決定する手段14と、最小量子化
スケールを設定する手段34と、前記割当符号量に対応
した量子化スケールにより次に符号化する量子化スケー
ルを決定し、前記割当符号量に対応した量子化スケール
が前記最小量子化スケールより小さい場合には、前記最
小量子化スケールにより前記次に符号化する量子化スケ
ールを決定する手段14とを備えた。
Description
り、特に、リアルタイムで可変ビットレート符号化を行
う際に好適な符号量制御装置及びその方法に関する。
る技術の国際標準として既にMPEG2が規定されている。M
PEG2は、動画像を構成する「フレーム」画像を「マクロブ
ロック」と呼ばれる16×16画素のブロックに分割し、各
マクロブロック単位に、時間的に前または後に所定の数
フレーム離れた参照画像と符号化画像の間で「動きベク
トル」と呼ばれる動き量を求め、この動き量を基に参照
画像から符号化画像を構成する「動き補償予測」技術
と、動き補償予測の誤差信号または符号化画像そのもの
に対して、直交変換の一種であるDCT(離散コサイン
変換)を用いて情報量を圧縮する「変換符号化」技術の2
つの画像符号化の要素技術をベースに規定されている。
例を図7に示す。また、符号化ピクチャ構造の一例を図
6に示す。動き補償予測では、図6に示した符号化ピク
チャ構造のように、 Iピクチャ(フレーム内符号化)、P
ピクチャ(順方向予測符号化)、Bピクチャ(双方向予測
符号化)と呼ばれる、予測方法の異なる3種類のピクチ
ャの組合せによって構成される。図7に示されるよう
に、変換符号化では、Iピクチャでは符号化画像そのも
のに対し、P,Bピクチャでは動き補償器77による動
き補償予測の誤差信号である減算器71の出力に対し
て、DCTがDCT器72で施される。
て量子化が、符号量制御部90の出力により制御して量
子化器73によってなされた後に、動きベクトル等のそ
の他の付帯情報と共に可変長符号化が可変長符号化器7
5でなされ、符号列が「ビットストリーム」としてバッ
ファ76に記憶された後に出力される。この際、バッフ
ァ76の充足度に応じて符号量制御部90で量子化スケ
ールが制御される。一方、量子化器73の出力係数は、
逆量子化器77、IDCT器78に供給さて、局部復号
されてブロック毎にフレームメモリ81に貯えられる。
間当りの発生符号量(ビットレート)は一定ではない。そ
こで、量子化器73での量子化の際の量子化スケールを
マクロブロック単位に適宜変更することにより、所要の
ビットレートに制御することが可能になっている。MPEG
2 Test Model 5では、GOP単位で発生符号量を一定にす
る固定ビットレート制御方法が提案されている。
ト制御方法は、一定の転送レートが要求される用途に対
しては有効な方法である。しかし、動画像シーケンスの
どの部分に対してもほぼ同じ符号量が割り当てられるた
め、情報量を多く含む複雑なシーンに対しては十分な符
号量が与えられずに画質劣化が生じてしまう。これに対
して、情報量が少ない単純なシーンの場合には符号量が
余剰になって無駄が生じ、DVD-Videoのように可変転送
レートが可能な用途に対しては、適切なレート制御方法
とは言えなかった。
法が可変ビットレート制御方法である。特開平6−14
1298号公報には、可変ビットレート制御による符号
化装置が開示されている。この装置では、最初に、入力
動画像に対して固定量子化スケールによって仮符号化を
行い、単位時間毎に発生符号量がカウントされる。つぎ
に、入力動画像全体の発生符号量が所要値になるよう
に、仮符号化時の発生符号量に基づいて各部分の目標転
送レートを設定する。そしてこの目標転送レートに合致
するように制御を行いながら、入力動画像に対して2回
目の符号化、言い換えると実符号化が行われる。
リームを得るためには少なくとも2回の符号化を行わな
ければならず、リアルタイム性を要求されるような用途
ではこの装置のような2パス方式の可変ビットレート制
御は使用出来ない。
符号化するための可変ビットレート制御方法、すなわち
1パス方式の可変ビットレート制御方法も存在する。特
開平10−302396号公報には、1パス方式の可変
ビットレート制御方法による符号化装置が開示されてい
る。
位時間毎の符号化難易度を測定し、それを予め標準化さ
れた符号化難易度と割当符号量の関係から単位時間毎の
割当符号量の参考値を求める。
へ変更する方法は、記録媒体に所定の時間長記録する動
画像の発生符号量の総和が記録媒体に記録可能な実容量
以下になるように、記録媒体の実容量から定まる一定の
割当符号量bavで符号化した場合の割当符号量Bavと現在
までの実際の発生符号量の総和Bgenを比較し、Bav−Bge
nが正の時にbav以上の割当符号量を許可することによ
り、所定の時間長の動画像が一定の記録容量の記録媒体
に記録出来ることを保証する1パス方式の可変ビットレ
ート制御を実現している。
式の可変ビットレート制御では2パス方式とは異なり、
入力される動画像シーケンスがどのような画面複雑度の
時間変化で構成されているかは予めわからない状態でビ
ットレート制御を行わなければならない。上記従来発明
では実際の発生符号量が、記録媒体の実容量から定まる
一定の割当符号量bavより下回った分だけ、それ以降の
符号化でbavを上回る符号量割当が可能になる。そのた
め、動画像シーケンスの前半で比較的符号化が易しく、
後半が難しい場合は、前半の余剰ビットが後半の難しい
部分に回せて、シーケンス全体の主観画質の改善が可能
になるが、逆に前半が難しく、後半が易しい場合は前半
の難しい部分の主観画質の改善は不可能である上に、符
号化の終了した時点では後半の易しい部分で符号量が余
剰になり、記録媒体の容量の無駄が生じてしまう。本発
明は以上の問題を解決して、割当符号量に時間的に変化
するマージンを付加することによって、動画像シーケン
スの初めの部分でも一定の割当符号量を上回る符号量割
当を可能にし、シーケンス全体の符号量割当を適正に
し、かつ全般的な画質向上を図ることを目的とする。
2等の動き補償予測、直交変換、量子化、可変長符号化
の各手段を備えた可変ビットレート制御による動画像符
号化装置において、各画像の発生符号量と平均量子化ス
ケールを検出し、それと同時に各画像の目標平均符号量
と符号量の余裕分であるマ−ジンを設定する。
れる15フレーム程度の一定の長さの画像群)に対し
て、符号列の転送先が例えば記録媒体の場合は、動画像
シーケンスの記録時間と記録媒体の実容量から定まる一
定のビットレートで符号化した場合の割当符号量を設定
する。符号量のマージンは後述する方法によって、所定
時間毎に設定値が変更される。各画像の発生符号量、量
子化スケールと、目標平均符号量、符号量のマージンか
ら前記一定区間の割当符号量を決定し、それを所定の方
法で一定区間内の各画像に配分する。
像シーケンスの記録済み時間または残り記録時間で変化
させ、シーケンスの最初では最大で、時間の経過と共に
一定の割合で減少させ、シーケンスの最後では0となる
ように設定することにより、記録媒体の実容量を超える
ことなく、途中の区間では一定のビットレートを超える
符号量割当が可能になる。あるいは、記録媒体の実容量
に対しマージンを設ける場合は、記録媒体の容量のマー
ジンを動画像シーケンスの所定の区間長に区切った各区
間に配分する。
目に、後半になるにつれて次第に少な目に設定し、前半
で余ったマージンは順次後半に繰り越すことにより、無
駄の少ないマージンの割当が可能となる。
像シーケンスの記録済み時間、残り記録時間、記録済み
の発生符号量、記録媒体に対する残り容量、目標転送レ
ート、最大転送レート及び所定時間における実転送レー
トのうちのいくつかを因数とする関数によってマージン
を設定することにより、一層適正な符号量制御を行うこ
とが可能になる。
当符号量に対し、各フレームの平均量子化スケールと発
生符号量を乗算して所定の変換を施して、各フレームの
画面複雑度を求め、この値を一定期間内のピクチャタイ
プ別平均画面複雑度で割った値を前記各画像の割当符号
量に乗算することにより、画面複雑度を考慮した符号量
割当が行われる。
の方法の第1の実施例について、以下に図1と共に説明
する。図1に示したように、本発明の動画像符号化装置
及びその方法の第1の実施例は、減算器11、DCT器1
2、量子化器13、符号量制御器14、可変長符号化器
15、バッファ16、逆量子化器17、IDCT器18、動
き補償予測器19、加算器20、フレームメモリ21、
平均量子化スケール検出器22、発生符号量検出器2
3、画像特性検出器25、記録時間検出器31、マージ
ン設定器32、平均レート設定器33、及び最小量子化
スケール設定器34より構成されている。
割器によって、予めマクロブロック単位に分割されてい
るものとする。分割された原画像は、Iピクチャについ
ては動き補償予測が行われず、原画像ブロックそのもの
がDCT器12に送られ、DCTされた後に量子化器13で符
号量制御器14から送られる量子化スケールによって量
子化される。
で符号に変換されてバッファ16で調整された後に符号
が出力される。一方、量子化器13の出力係数は逆量子
化器17、IDCT器18で局部復号されてブロック毎にフ
レームメモリ21に貯えられる。
画像とフレームメモリに貯えられた所定の局部復号画像
ブロックが動き補償予測器19に供給され、ここで動き
ベクトル検出及び動き補償が行われて、予測画像ブロッ
クが減算器11で原画像ブロックとの間で画素間差分が
取られ、差分値である誤差画像ブロックがDCT器12に
送られる。
子化器13で符号量制御器14から送られる量子化スケ
ールによって量子化された後に可変長符号化器15で符
号に変換されてバッファ16で調整された後に符号が出
力される。
器17、IDCT器18で局部復号された後に前記予測画像
ブロックが加算器20によって画素毎に加算され、ブロ
ック毎にフレームメモリ21に貯えられる。
量子化スケールが平均量子化スケール検出器22に送ら
れ、そこで1フレーム毎に量子化スケールが加算され、1
フレームの平均量子化スケールが算出される。一方、バ
ッファ16において発生符号量が監視され、値が発生符
号量検出器23に送られる。ここにおいて、発生符号量
がフレーム単位に加算され、1フレームの発生符号量が
検出される。
フレームの発生符号量が順次加算されて、動画像シーケ
ンスの先頭から現在までに符号化した画像の実際の総発
生符号量が計算される。各フレームの平均量子化スケー
ル、発生符号量、及び現在までの総発生符号量は符号量
制御器14に送られる。
トレートRaveが設定され、符号量制御器14に送られ
る。平均目標ビットレートRaveの設定値は、例えば記録
媒体35の場合、動画像データが記録可能な容量と、そ
れに記録する動画像シーケンスの記録時間から決定され
る。すなわち、固定ビットレート制御で符号化した場合
の平均ビットレートに相当する。
レート設定器33で設定した平均レートに応じて、量子
化スケールの最小値を設定する。一般的に量子化スケー
ルは、ある一定値以上になると復号画像の画質に劣化が
知覚する。
ールを下げても復号画像の画質はほとんど変わらないの
で、量子化スケールを一定値でリミッタをかけてそれ以
上は量子化スケールが下がらないようにすることによ
り、リミッタのかかった部分で発生符号量を平均レート
より少なくして、復号画像の画質を保持しつつ、発生符
号量の削減を図るものである。平均レートに応じて最小
量子化スケールを変更することにより、平均レートに見
合った画質を選択することが出来る。
であるマージンの値が所定の周期毎に設定される。マー
ジンの設定方法には、(1) ビットレートに対するマージ
ンと(2) 一定区間内の発生符号量の総量に対するマージ
ンとの2つの方法がある。記録時間や記録媒体35の容
量といったパラメータの設定等によって適宜適切な方を
選択して、マージンの設定を行う。
て(図2) 図2にマージンの配分方法と符号量推移の一実施例を示
す。マージンは、平均目標ビットレートRaveに対して与
えられ、例えばRaveが4Mbpsの時、10%のマージンを与
えるとき、マージンを10%または0.4Mbpsと表す。
ている場合、記録時間検出器31で検出される記録経過
時間より残り記録時間が得られるので、符号化の開始時
点ではマージンが最大で、符号化の終了時点でマージン
が0になるよう、残り記録時間に比例したマージンの量
を決定する関数を設定する。前記所定の周期毎に、記録
時間検出器31で得られる残り記録時間から前記関数に
より符号量マージンが決定される。
るにつれてマージンが少なくなってしまうので、現在ま
でに符号化した画像の実際の総発生符号量と、この区間
を平均目標ビットレートRaveで符号化した場合の発生符
号量の差を計算し、この差の一定割合を前記マージンに
加算することにより、シーケンスの後半でも十分なマー
ジンが確保される。
るマージンについて(図3) 図3にマージンの配分方法と符号量推移の他の実施例を
示す。これは記録媒体35における形式的な記録容量の
表示が実際の最大容量より小さく設定される場合で、例
えば記録媒体35の容量表示が1.0 Gbitで、実際の最大
容量が1.2Gbitの時、マージンは20%または0.2Gbitと表
す。
記録媒体の目安の記録時間が表示されている場合は、そ
の目安の記録時間を所定の区間長に分割する。なお、分
割される各区間の長さは等間隔でもよいし、そうでなく
てもよい。
5の容量のマージンを所定の方法によって配分する。マ
ージンの配分方法は、例えば分割各区間の長さに比例し
て、すなわち各区間が等間隔ならば配分するマージンも
等しく配分してもよいが、シーケンスの最初の方は相対
的に多く、後半になるにつれて次第に少なく設定し、前
半で余ったマージンは順次後半に繰り越すことにより、
無駄の少ないマージンの割当を実現している。
は、記録媒体35の実際の最大容量と表示記録容量の差
を限度としてもよいし、それを若干越えたマージンの量
を設定してもよい。
生符号量が記録媒体35の実際の最大容量以下になるこ
とが保証され、容量の差を若干越えた量を設定した場合
は、実際の総発生符号量が記録媒体35の実際の最大容
量以下になる保証はなくなるが、その分符号化の難しい
部分における画質改善の幅がより大きくなる。なお、マ
ージンの値を符号量制御器14に送る場合は、(1)の場
合と同様に平均目標ビットレートRaveに対するマージン
に換算する。
ル検出器22から送られてきた各フレームの平均量子化
スケール、発生符号量検出器から送られてきた発生符号
量と現在までの総発生符号量、平均レート設定器33か
ら送られてきた平均目標ビットレート、最小量子化スケ
ール設定器34から送られてきた最小量子化スケール、
及びマージン設定器32から送られてきたマージンか
ら、MPEG2 Test Model 5または別の符号量配分の方法
(各画像に対する符号量割当方法)を用いて符号量制御が
行われ、各画像の目標割当符号量が決定される。
た目標割当符号量の決定方法を以下に説明する。固定ビ
ットレート制御におけるビットレートをBitRate、1秒当
りのフレーム数をPictureRate、1つの符号化単位である
1GOP(通常はIピクチャの間隔)のフレーム数をNとする
と、1GOPの平均割当符号量Raveは次式(1)で与えられ
る。
OPの割当符号量Rcは、Raveと1GOP当りのマージンmargin
を用いて、次式(2)で設定される。
の場合よりもマージン分だけ高いビットレートで制御す
ることになる。そうするとマージン分だけ符号量が不足
することになるが、後述するように、最小量子化スケー
ルによる量子化スケールのリミッタがかかるため、リミ
ッタのかかった部分における発生符号量の削減をマージ
ンによる符号量増加に充当して、所定の平均目標ビット
レートに収めることが可能である。
割り振ることにより、これから符号化する各画像の目標
符号量を算出する。1GOPに含まれるP、Bピクチャのフ
レーム数をNp、Nb、Iピクチャに対するP、Bピクチャ
の量子化スケールの設定比率をKp、Kb、直前に符号化し
た同じピクチャタイプのピクチャの画面複雑度(発生符
号量と平均量子化スケールとの積)をXi, Xp, Xbとす
る。この時、各ピクチャタイプの目標割当符号量Ti, T
p, Tbは次式(3) (4) (5)で与えられる。なお、MAX[A,
B]はAとBのいずれか大きい方を選択する動作を示す。
とバッファ16で検出される各マクロブロックの発生符
号量をもとに、MPEG2 Test Model 5または別の符号量配
分の方法(各マクロブロックに対する符号量割当方法)を
用いて各マクロブロックの量子化スケールを決定する。
ロブロックの原画像アクティビティが検出され、この値
が符号量制御器14へ送られる。このアクティビティの
値はMPEG2 Test Model 5における各マクロブロックの量
子化スケールを変更する適応量子化制御に使用される
が、この適応量子化制御は行わなくてもよい。または別
の方法により適応量子化制御を行ってもよい。
の量子化スケールに対し、最小量子化スケール設定器3
4によって設定される最小量子化スケールによるリミッ
タがかけられる。すなわち、各マクロブロックの量子化
スケールが最小量子化スケールよりも小さい場合は最小
量子化スケールに置き換えて、それ以外の場合は前記決
定した値をそのまま各マクロブロックの量子化スケール
として最終的に決定し、この値が符号量制御器14から
出力される。
ブロックの量子化スケールが量子化器13に送られ、現
在の画像(DCT後の分割された原画像または動き補償予測
の誤差画像ブロック)がこの量子化スケールで量子化さ
れる。更に量子化器13の出力は、可変長符号化器15
で可変長符号化されて、バッファ16で調整された後に
符号が出力される。
ファ16で監視される発生符号量がそれぞれ、平均量子
化スケール検出器22、発生符号量検出器23に送ら
れ、次のピクチャの符号量制御に使用される。なお、発
生符号量検出器23では現在までに符号化した画像につ
いて発生符号量を加算して、実際の総符号量を求め、こ
の値をマージン設定器32に送っている。
平均目標ビットレートRaveから求まる、固定のRaveで符
号化した場合の目標発生符号量(前記マージンの設定方
法(2)では現在までに割当てられたマージンの総量も含
む。)と、発生符号量検出器23で求めた実際の総発生
符号量との差を計算し、この発生符号量の目標と実際の
差に対して一定比率を乗算して、これをマージン設定器
32で設定したマージンに加算することにより、初期設
定において、シーケンスの後半ではマージンが小さくな
るように設定した場合でも、後半部分のマージンを十分
に確保することが可能になる。
第2の実施例について、以下に図4と共に説明する。第
2の実施例では第1の実施例に比べ、レート比較器37
と残量検出器36が追加され、マージン設定器32Aの
動作が変更になっているが、それ以外の部分は第1の実
施例と同一なので、変更になった部分についてのみ説明
する。
23で検出された各画像の発生符号量を所定期間につい
て加算して、この期間の実転送レートを計算した値と、
平均レート設定器33から出力される目標転送レート、
最大転送レートとをマージン設定器32に送る。
設定された最大容量と記録媒体35に内蔵された符号量
カウンタで検出された記録済み符号量の差、もしくは記
録済み領域の位置情報を検出して、それを残り記録容量
に変換することにより、記録媒体35の残り容量を検出
し、それをマージン設定器32に送る。
出器31から送られた動画像シーケンスの記録済み時間
または残り記録時間、発生符号量検出器23から送られ
た記録済みの発生符号量、残量検出器36から送られた
記録媒体35に対する残り容量、レート比較器37から
送られた目標転送レート、最大転送レート及び所定時間
における実転送レートのうちのいくつかを因数とする関
数を設定し、この関数によってマージンの設定を行うこ
とにより、一層適切な符号量制御を行うことが可能にな
る。
第3の実施例について、以下に図5と共に説明する。第
3の実施例では第2の実施例に比べ、画面複雑度算出器
24が追加され、符号量制御器14の動作が変更になっ
ているが、それ以外の部分は第2の実施例と同一なの
で、変更になった部分についてのみ説明する。
ケール検出器22から1フレームの平均量子化スケール
が、発生符号量検出器23からは1フレームの発生符号
量が各画像毎に入力され、平均量子化スケールと発生符
号量とが乗算された後に乗算結果に所定の変換が施され
て、各フレームの画面複雑度として求められる。
雑度は符号化ピクチャタイプ別に一定期間内の値が加算
された後にその期間内の同じピクチャタイプのフレーム
数で除算されて、各ピクチャタイプの平均画面複雑度 X
i-ave, Xp-ave, Xb-ave が算出される。各ピクチャタイ
プの平均画面複雑度 Xi-ave, Xp-ave, Xb-aveと、直前
に符号化した同じピクチャタイプの画像の画面複雑度 X
i, Xp, Xb は符号量制御器14に送られる。
た各ピクチャタイプの平均画面複雑度 Xi-ave, Xp-ave,
Xb-aveと直前に符号化した同じピクチャタイプの画像
の画面複雑度 Xi, Xp, Xb、平均量子化スケール検出器
22から送られてきた各フレームの平均量子化スケー
ル、発生符号量検出器23から送られてきた発生符号量
と現在までの総発生符号量、平均レート設定器33から
送られてきた平均目標ビットレート、最小量子化スケー
ル設定器34から送られてきた最小量子化スケール、マ
ージン設定器32Aから送られてきたマージンから、MP
EG2 Test Model 5、または別の符号量配分の方法(各画
像に対する符号量割当方法)を用いて、符号量制御器1
4において符号量制御が行われる。
量を決定する場合、第1の実施例における式(1)のRcを
求める式が次の(6)のように変わるが、その他の部分は
第1の実施例と同じである。
5等において設定するビットレートの値を、平均目標ビ
ットレートにマージンを加えることにより、固定ビット
レート制御の場合よりもマージン分だけ高いビットレー
トで制御して各画像の目標割当符号量が決定した後、当
該ピクチャタイプについて、直前に符号化した画像の画
面複雑度を平均画面複雑度で割った値を、得られた各画
像の目標割当符号量に乗算することにより、画面複雑度
を考慮した符号量割当が行われる。
バッファ16で検出される各マクロブロッの発生符号量
をもとに、第1、第2の実施例と同様にして、各マクロ
ブロックの量子化スケールを決定する。
施例で得られる各画像の目標割当符号量に対し画面複雑
度を考慮した符号量割当を行っているが、これを第1の
実施例に適用してもよい。
トレート制御で動画像を符号化する際に、各画像の発生
符号量、量子化スケールと、目標平均符号量、符号量の
マージンから前記一定区間の割当符号量を決定し、それ
を所定の方法で一定区間内の各画像に配分する。符号量
のマージンの設定値は、例えば動画像シーケンスの記録
済み時間または残り記録時間で変化させ、シーケンスの
最初では最大で、時間の経過と共に一定の割合で減少さ
せ、シーケンスの最後では0となるように設定すること
により、記録媒体の実容量を超えることなく、途中の区
間では一定のビットレートを超える符号量割当が可能に
なる。
ンを設ける場合は、記録媒体の容量のマージンを動画像
シーケンスの所定の区間長に区切った各区間に配分す
る。マージンの配分をシーケンスの最初では多目に、後
半になるにつれて次第に少な目に設定し、前半で余った
マージンは順次後半に繰り越すことにより、無駄の少な
いマージンの割当が可能となる。
残り記録時間、記録済みの発生符号量、記録媒体に対す
る残り容量、目標転送レート、最大転送レート及び所定
時間における実転送レートのうちのいくつかを因数とす
る関数によってマージンを設定することにより、一層適
正な符号量制御を行うことが可能になる。
像の割当符号量に対し、各フレームの平均量子化スケー
ルと発生符号量を乗算して所定の変換を施して、各フレ
ームの画面複雑度を求め、この値を一定期間内のピクチ
ャタイプ別平均画面複雑度で割った値を前記各画像の割
当符号量に乗算することにより、画面複雑度を考慮した
符号量割当を行って、1パス方式の可変ビットレート制
御による動画像符号化においても、より画像の特性に応
じた符号量制御が可能になる。
の実施例を示したブロック構成図である。
量推移の一実施例を示した図である。
量推移の他の実施例を示した図である。
の実施例を示したブロック構成図である。
の実施例を示したブロック構成図である。
示した図である。
Claims (10)
- 【請求項1】入力動画像を、動き補償予測手段、直交変
換手段、量子化手段、及び可変長符号化手段を有して符
号化を行う動画像符号化装置において、 前記入力動画像の各画像の発生符号量を検出する手段
と、 前記入力動画像の各画像の平均量子化スケールを検出す
る手段と、 前記入力動画像の各画像の目標平均符号量を設定する手
段と、 前記発生符号量の余裕分(マ−ジン)を設定する手段と、 前記目標平均符号量と前記各画像の発生符号量との差を
検出し、前記発生符号量の余裕分を更新する手段と、 前記目標平均符号量と前記発生符号量の余裕分とを加算
して、所定区間の割当符号量を決定する手段と、 最小量子化スケールを設定する手段と、 前記割当符号量に対応した量子化スケールにより次に符
号化する画像の量子化スケールを決定し、前記割当符号
量に対応した量子化スケールが前記最小量子化スケール
より小さい場合には、前記最小量子化スケールにより前
記次に符号化する画像の量子化スケールを決定する手段
とを備えたことを特徴とする動画像符号化装置。 - 【請求項2】請求項1に記載された動画像符号化装置に
おいて、 前記発生符号量の余裕分を設定する手段は、 所定時間毎に発生符号量余裕分の設定値を変更すること
を特徴とする動画像符号化装置。 - 【請求項3】請求項2に記載された動画像符号化装置に
おいて、 前記所定時間毎に変更する符号量余裕分の設定値は、 符号化動画像全体に対する発生符号量余裕分を前記所定
時間毎に所定の割合で配分することを特徴とする動画像
符号化装置。 - 【請求項4】請求項1に記載された動画像符号化装置に
おいて、 前記発生符号量の余裕分を設定する手段は、 符号化動画像の記録済み時間または残り記録時間によっ
て発生符号量余裕分の設定値を決定することを特徴とす
る動画像符号化装置。 - 【請求項5】請求項1に記載された動画像符号化装置に
おいて、 前記発生符号量の余裕分を設定する手段は、 観測時刻における符号化動画像の記録済み時間、残り記
録時間、記録済みの発生符号量、記録媒体に対する残り
容量、目標転送レート、最大転送レート及び所定時間に
おける実転送レートのうちのいくつかを因数とする関数
により、符号量余裕分の設定値を決定することを特徴と
する動画像符号化装置。 - 【請求項6】請求項2乃至請求項5のいずれかに記載さ
れた動画像符号化装置において、 発生符号量検出手段で得られた各画像の発生符号量、平
均量子化スケール検出手段で得られた各画像の平均量子
化スケールから各画像の画面複雑度を検出する手段と、
前記画面複雑度の一定期間における平均値を求める手段
を有し、 前記所定区間の割当符号量を決定する手段は、前記目標
平均符号量に対し前記画面複雑度の平均値に対する符号
化画像の前記画面複雑度の割合を乗算することによって
割当符号量を決定し、前記割当符号量から前記次に符号
化する画像の量子化スケールを決定するようにしたこと
を特徴とする動画像符号化装置。 - 【請求項7】入力動画像を、動き補償予測ステップ、直
交変換ステップ、量子化ステップ、及び可変長符号化ス
テップを有して符号化を行う動画像符号化方法におい
て、 前記入力動画像の各画像の発生符号量を検出するステッ
プと、 前記入力動画像の各画像の平均量子化スケールを検出す
るステップと、 前記入力動画像の各画像の目標平均符号量を設定するス
テップと、 前記発生符号量の余裕分(マ−ジン)を設定するステップ
と、 前記目標平均符号量と前記各画像の発生符号量との差を
検出し、前記発生符号量の余裕分を更新するステップ
と、 前記目標平均符号量と前記発生符号量の余裕分とを加算
して、所定区間の割当符号量を決定するステップと、 最小量子化スケールを設定するステップと、 前記割当符号量に対応した量子化スケールにより次に符
号化する画像の量子化スケールを決定し、前記割当符号
量に対応した量子化スケールが前記最小量子化スケール
より小さい場合には、前記最小量子化スケールにより前
記次に符号化する画像の量子化スケールを決定するステ
ップとを備えたことを特徴とする動画像符号化方法。 - 【請求項8】請求項7に記載された動画像符号化方法に
おいて、 前記発生符号量の余裕分を設定するステップは、所定時
間毎に発生符号量余裕分の設定値を変更することを特徴
とする動画像符号化方法。 - 【請求項9】請求項8に記載された動画像符号化方法に
おいて、 前記所定時間毎に変更する符号量余裕分の設定値は、 符号化動画像全体に対する発生符号量余裕分を前記所定
時間毎に所定の割合で配分することを特徴とする動画像
符号化方法。 - 【請求項10】請求項8及び請求項9のいずれかに記載
された動画像符号化方法において、 発生符号量検出ステップで得られた各画像の発生符号
量、平均量子化スケール検出ステップで得られた各画像
の平均量子化スケールから各画像の画面複雑度を検出す
るステップと、前記画面複雑度の一定期間における平均
値を求めるステップを有し、 前記所定区間の割当符号量を決定するステップは、前記
目標平均符号量に対し、前記画面複雑度の平均値に対す
る符号化画像の前記画面複雑度の割合を乗算することに
よって割当符号量を決定し、前記割当符号量から前記次
に符号化する画像の量子化スケールを決定するようにし
たことを特徴とする動画像符号化方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19014399A JP4362793B2 (ja) | 1999-07-05 | 1999-07-05 | 動画像符号化装置及びその方法 |
EP00305070A EP1063851B1 (en) | 1999-06-22 | 2000-06-15 | Apparatus and method of encoding moving picture signal |
DE60035740T DE60035740T2 (de) | 1999-06-22 | 2000-06-15 | Vorrichtung und Verfahren zur Kodierung von Bewegtbildsignalen |
CNB001096087A CN1159916C (zh) | 1999-06-22 | 2000-06-15 | 活动图象编码装置及其方法 |
US09/597,485 US6600783B1 (en) | 1999-06-22 | 2000-06-19 | Apparatus and method of encoding moving picture signal |
US10/454,677 US6922442B2 (en) | 1999-06-22 | 2003-06-05 | Apparatus and method of encoding moving picture signal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19014399A JP4362793B2 (ja) | 1999-07-05 | 1999-07-05 | 動画像符号化装置及びその方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001025015A true JP2001025015A (ja) | 2001-01-26 |
JP4362793B2 JP4362793B2 (ja) | 2009-11-11 |
Family
ID=16253129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP19014399A Expired - Lifetime JP4362793B2 (ja) | 1999-06-22 | 1999-07-05 | 動画像符号化装置及びその方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4362793B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002232882A (ja) * | 2001-01-31 | 2002-08-16 | Nec Corp | 事前解析を用いた動画像符号化装置、動画像符号化方法、及びそのプログラム。 |
JP2006324806A (ja) * | 2005-05-17 | 2006-11-30 | Canon Inc | 画像処理装置及び画像処理方法 |
US7151856B2 (en) | 2002-04-25 | 2006-12-19 | Matsushita Electric Industrial Co., Ltd. | Picture coding apparatus and picture coding method |
JP2007129509A (ja) * | 2005-11-04 | 2007-05-24 | Matsushita Electric Ind Co Ltd | 符号量制御方法および符号量制御装置 |
JP2007288364A (ja) * | 2006-04-13 | 2007-11-01 | Canon Inc | 情報伝送装置及び情報伝送方法 |
JP2010136047A (ja) * | 2008-12-04 | 2010-06-17 | Nippon Telegr & Teleph Corp <Ntt> | 映像符号量制御方法,映像符号化装置,映像符号量制御プログラムおよびその記録媒体 |
US8363717B2 (en) | 2005-05-17 | 2013-01-29 | Canon Kabushiki Kaisha | Image processing apparatus |
-
1999
- 1999-07-05 JP JP19014399A patent/JP4362793B2/ja not_active Expired - Lifetime
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002232882A (ja) * | 2001-01-31 | 2002-08-16 | Nec Corp | 事前解析を用いた動画像符号化装置、動画像符号化方法、及びそのプログラム。 |
US7151856B2 (en) | 2002-04-25 | 2006-12-19 | Matsushita Electric Industrial Co., Ltd. | Picture coding apparatus and picture coding method |
JP2006324806A (ja) * | 2005-05-17 | 2006-11-30 | Canon Inc | 画像処理装置及び画像処理方法 |
JP4510696B2 (ja) * | 2005-05-17 | 2010-07-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US8363717B2 (en) | 2005-05-17 | 2013-01-29 | Canon Kabushiki Kaisha | Image processing apparatus |
JP2007129509A (ja) * | 2005-11-04 | 2007-05-24 | Matsushita Electric Ind Co Ltd | 符号量制御方法および符号量制御装置 |
JP4556844B2 (ja) * | 2005-11-04 | 2010-10-06 | パナソニック株式会社 | 符号量制御方法および符号量制御装置 |
JP2007288364A (ja) * | 2006-04-13 | 2007-11-01 | Canon Inc | 情報伝送装置及び情報伝送方法 |
JP2010136047A (ja) * | 2008-12-04 | 2010-06-17 | Nippon Telegr & Teleph Corp <Ntt> | 映像符号量制御方法,映像符号化装置,映像符号量制御プログラムおよびその記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP4362793B2 (ja) | 2009-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1372113B1 (en) | Variable bit rate video encoding method and device | |
JP3866538B2 (ja) | 動画像符号化方法及び装置 | |
US7092441B1 (en) | Moving pictures encoding with constant overall bit rate | |
CN100401782C (zh) | 控制视频序列速率的方法和装置及视频编码装置 | |
JP3934712B2 (ja) | 映像信号符号化方法及び装置 | |
EP1551186B1 (en) | Video coding apparatus with resolution converter | |
JPH11346362A (ja) | リアルタイム単一パス可変ビット・レ―ト制御方法及び符号器 | |
EP1063851A2 (en) | Apparatus and method of encoding moving picture signal | |
WO2000018137A1 (en) | Frame-level rate control for video compression | |
JP3259702B2 (ja) | 動画像可変ビットレート符号化装置および方法 | |
JP2001008215A (ja) | 動画像符号化装置及びその方法 | |
JP3872849B2 (ja) | 動画像符号化装置 | |
JP4362795B2 (ja) | 動画像符号化装置及びその方法 | |
JP2006135557A (ja) | 動画像符号化装置 | |
US7274739B2 (en) | Methods and apparatus for improving video quality in statistical multiplexing | |
JP2001025015A (ja) | 動画像符号化装置及びその方法 | |
JP4362794B2 (ja) | 動画像符号化装置及びその方法 | |
JP2950065B2 (ja) | 可変転送レート符号化装置 | |
JP3812267B2 (ja) | 動画像符号化装置及びその方法 | |
JP2004328150A (ja) | 動画像符号化装置及び方法 | |
JP2004040811A (ja) | 動映像符号化のためのdct演算量調節方法及びその装置 | |
JP3858520B2 (ja) | 動画像符号化装置及びその方法 | |
JP3812269B2 (ja) | 動画像符号化装置及びその方法 | |
JP2000041240A (ja) | 可変ビットレート符号化装置および方法 | |
JP3734286B2 (ja) | 動画像符号化装置及び動画像伝送装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060331 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080229 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080424 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090501 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090625 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090724 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090806 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4362793 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130828 Year of fee payment: 4 |
|
EXPY | Cancellation because of completion of term |