JP2001359097A - 符号量割り当て装置および方法 - Google Patents

符号量割り当て装置および方法

Info

Publication number
JP2001359097A
JP2001359097A JP2000174064A JP2000174064A JP2001359097A JP 2001359097 A JP2001359097 A JP 2001359097A JP 2000174064 A JP2000174064 A JP 2000174064A JP 2000174064 A JP2000174064 A JP 2000174064A JP 2001359097 A JP2001359097 A JP 2001359097A
Authority
JP
Japan
Prior art keywords
frame
buffer occupancy
code amount
image group
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000174064A
Other languages
English (en)
Other versions
JP3889552B2 (ja
Inventor
Takeshi Nakamura
毅 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Electronic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Electronic Corp filed Critical Pioneer Electronic Corp
Priority to JP2000174064A priority Critical patent/JP3889552B2/ja
Priority to US09/877,077 priority patent/US6940902B2/en
Publication of JP2001359097A publication Critical patent/JP2001359097A/ja
Application granted granted Critical
Publication of JP3889552B2 publication Critical patent/JP3889552B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/149Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/197Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Algebra (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

(57)【要約】 【課題】 ビデオ・シーケンスを構成する各フレームの
画像複雑さ指標に基づいて、各フレームに最適な符号量
を割り当てる装置および方法を提供する。 【解決手段】 ビデオ信号に含まれる所定数の画像フレ
ームを有する画像群のバッファ占有率が、予め設定され
たバッファ占有率の上限値と下限値との間の範囲内に収
まるように、前記画像群単位で符号量が割り当てられる
(第1の段階)。次に、前記画像群内における最初のフ
レームのバッファ占有率が、予め設定されたバッファ占
有率の上限値を超えないように、前記最初のフレームに
符号量が割り当てられる(第2の段階)。そして、前記
画像群符号量割当手段および前記第1フレーム符号量割
当手段により、割り当てられた前記符号量に基づいて、
前記画像群内における最初のフレーム以外のフレームに
符号量が割り当てられる(第3の段階)。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、ビデオ信号を符号
化して記録媒体に記録する圧縮符号化データ記録におけ
る符号量割り当て装置および方法に関する。
【0002】
【従来の技術】通常、画像をディジタル化して、DVD
−ROM、CD−ROMやハードディスクなどの記録媒
体に記録する場合、そのデータ量は膨大なものとなるた
め、通常は圧縮符号化して記録される。この圧縮符号化
方法には、各種の圧縮符号化方式があり、特に、画像の
空間周波数が低周波に集中する性質を利用して圧縮を行
うDCT(Discrete Cosine Transform)をベースとし
た符号化方式が、比較的多く使用されている。DCTは
JPEG(Joint Photographic Coding Experts Group)
や、MPEG(Moving Picture Coding Experts Group)
1、MPEG2、またはMPEG4などの国際標準の符
号化方式の中で使用されている。
【0003】従来より、MPEG方式により圧縮符号化
を行う装置では、固定ビットレート符号化方式や、可変
ビットレート符号化方式により、符号化制御を行うこと
が知られている。
【0004】固定ビットレート符号化方式では、ビデオ
・シーケンスを構成する各フレームの目標符号量は、そ
の画像の複雑さに関係なく一定値であり、符号化の時点
においてデコーダ・バッファの占有率を勘案し、オーバ
ーフローや、アンダーフローを発生させないように符号
化制御を行っている。
【0005】一方、可変ビットレート符号化方式では、
前もって得られた画像複雑さ指標に基づいて、事前にビ
デオ・シーケンス内の各フレームの最適な符号量割り当
てを行っているため、各フレームに必要とされる符号量
の割り当てが可能であり、フレームの間の画質の差を抑
えることができる。
【0006】
【発明が解決しようとする課題】ところで、各フレーム
の符号発生量は、そのフレームの画像複雑さ指標と相関
関係があるので、画像複雑さ指標を無視した各フレーム
の符号量割り当てでは、各フレームの画質にムラが生じ
ることとなる。また、符号化の時点でのデコーダ・バッ
ファの占有率を勘案した符号量割り当てでは、より多く
の符号量が欲しい場合に、バッファの余地が少ないため
に大きな符号量を割り当てられず画質劣化が生じ、少な
い符号量で十分の画質が得られる場合でも、バッファの
余地が大きいために多くの符号量を割り当ててしまう。
【0007】一方、単純に、画像複雑さ指標に基づい
て、各フレームの符号量割り当てを行うと、デコーダ・
バッファが、オーバーフローや、アンダーフローを起こ
してしまう結果となる。
【0008】本発明は、以上の点に鑑みてなされたもの
であり、ビデオ・シーケンスを構成する各フレームの画
像複雑さ指標に基づいて、各フレームに最適な符号量を
割り当てる装置および方法を提供することを目的とす
る。
【0009】
【課題を解決するための手段】上記課題を解決するた
め、請求項1に記載の発明は、ビデオ信号を符号化して
記録媒体に記録する圧縮符号化データ記録における符号
量割り当て装置であって、ビデオ信号に含まれる所定数
の画像フレームを有する画像群のバッファ占有率が、予
め設定されたバッファ占有率の上限値と下限値との間の
範囲内に収まるように、前記画像群単位で符号量を割り
当てる画像群符号量割当手段と、前記画像群内における
最初のフレームのバッファ占有率が、予め設定されたバ
ッファ占有率の上限値を超えないように、前記最初のフ
レームに符号量を割り当てる第1フレーム符号量割当手
段と、前記画像群符号量割当手段および前記第1フレー
ム符号量割当手段により、割り当てられた前記符号量に
基づいて、前記画像群内における最初のフレーム以外の
フレームに符号量を割り当てる第2フレーム符号量割当
手段と、を備えるように構成する。
【0010】このように構成された発明によれば、ビデ
オ信号に含まれる所定数の画像フレームを有する画像群
のバッファ占有率が、予め設定されたバッファ占有率の
上限値と下限値との間の範囲内に収まるように、前記画
像群単位で符号量が割り当てられる(第1の段階)。次
に、前記画像群内における最初のフレームのバッファ占
有率が、予め設定されたバッファ占有率の上限値を超え
ないように、前記最初のフレームに符号量が割り当てら
れる(第2の段階)。そして、前記画像群符号量割当手
段および前記第1フレーム符号量割当手段により、割り
当てられた前記符号量に基づいて、前記画像群内におけ
る最初のフレーム以外のフレームに符号量が割り当てら
れる(第3の段階)。
【0011】従って、このような3段階の割り当てによ
り、デコーダ・バッファにおけるオーバーフローや、ア
ンダーフローを無くし、符号量を最適化することがで
き、より高い画質を得ることができる。
【0012】請求項2に記載の発明は、請求項1に記載
の符号量割り当て装置において、前記第1フレーム符号
量割当手段は、前記算出された最初のフレームのバッフ
ァ占有率が、予め設定されたバッファ占有率の上限値と
下限値との間の範囲内に収まるように、前記最初のフレ
ームに符号量を割り当てるように構成する。
【0013】請求項3に記載の発明は、ビデオ信号を符
号化して記録媒体に記録する圧縮符号化データ記録にお
ける符号量割り当て装置であって、ビデオ信号に含まれ
る複数の所定数の画像フレームを有する画像群の目標符
号発生量を、それぞれの画像群の画像複雑さ指標に基づ
いて求め、それぞれの画像群のバッファ占有率を算出す
る画像群バッファ占有率算出手段と、前記算出された画
像群のバッファ占有率が、予め設定されたバッファ占有
率の上限値と下限値との間の範囲内に収まるように、前
記画像群のバッファ占有率を補正し、当該画像群単位で
符号量を割り当てる画像群符号量割当手段と、前記符号
量が割り当てられた画像群内における最初のフレームの
目標符号発生量を、それぞれの最初のフレームの画像複
雑さ指標に基づいて求め、それぞれの最初のフレームの
バッファ占有率を算出する第1フレームバッファ占有率
算出手段と、前記算出された最初のフレームのバッファ
占有率が、予め設定されたバッファ占有率の上限値を超
えないように、前記最初のフレームのバッファ占有率を
補正し、当該最初のフレームに符号量を割り当てる第1
フレーム符号量割当手段と、前記符号量が割り当てられ
た画像群内における最初のフレーム以外のフレームの目
標符号発生量を、それぞれのフレームの画像複雑さ指標
に基づいて求め、それぞれのフレームのバッファ占有率
を算出する第2フレームバッファ占有率算出手段と、前
記算出された最初のフレーム以外のフレームのバッファ
占有率が、予め設定されたバッファ占有率の上限値と下
限値との間の範囲内に収まるように、前記最初のフレー
ム以外のフレームのバッファ占有率を補正し、当該フレ
ームに符号量を割り当てる第2フレーム符号量割当手段
と、を備えるように構成する。
【0014】このように構成された発明によれば、ビデ
オ信号に含まれる複数の所定数の画像フレームを有する
画像群の目標符号発生量が、それぞれの画像群の画像複
雑さ指標に基づいて求められ、それぞれの画像群のバッ
ファ占有率が算出される。次に、前記算出された画像群
のバッファ占有率が、予め設定されたバッファ占有率の
上限値と下限値との間の範囲内に収まるように、前記画
像群のバッファ占有率が補正され、当該画像群単位で符
号量が割り当てられる(第1の段階)。次に、前記符号
量が割り当てられた画像群内における最初のフレームの
目標符号発生量が、それぞれの最初のフレームの画像複
雑さ指標に基づいて求められ、それぞれの最初のフレー
ムのバッファ占有率が算出される。次に、前記算出され
た最初のフレームのバッファ占有率が、予め設定された
バッファ占有率の上限値を超えないように、前記最初の
フレームのバッファ占有率が補正され、当該最初のフレ
ームに符号量が割り当てられる(第2の段階)。次に、
前記符号量が割り当てられた画像群内における最初のフ
レーム以外のフレームの目標符号発生量が、それぞれの
フレームの画像複雑さ指標に基づいて求められ、それぞ
れのフレームのバッファ占有率が算出される。前記算出
された最初のフレーム以外のフレームのバッファ占有率
が、予め設定されたバッファ占有率の上限値と下限値と
の間の範囲内に収まるように、前記最初のフレーム以外
のフレームのバッファ占有率が補正され、当該フレーム
に符号量が割り当てられる(第3の段階)。
【0015】従って、画像複雑さ指標に基づいて求めら
れた符号発生量が、3段階で補正(画像群単位のバッフ
ァ占有率の補正、最初のフレームのバッファ占有率の補
正、最初のフレーム以外のフレームのバッファ占有率の
補正)されることより、デコーダ・バッファにおいてオ
ーバーフローや、アンダーフローの無い最適な符号量を
各フレームに割り当てることができ、より高画質を実現
することができる。また、第2段階において、第3段階
に先立ち、最初のフレームの符号量の割り当てを行うこ
とで、極力、最初のフレームの発生符号量を維持するこ
とができるので、より綺麗な画像を再生することができ
る。
【0016】請求項4に記載の発明は、請求項3に記載
の符号量割り当て装置において、前記第1フレーム符号
量割当手段は、前記算出された最初のフレームのバッフ
ァ占有率が、予め設定されたバッファ占有率の上限値と
下限値との間の範囲内に収まるように、前記最初のフレ
ームに符号量を割り当てるように構成する。
【0017】請求項5に記載の発明は、請求項3または
4に記載の符号量割り当て装置において、前記画像群の
目標符号発生量は、前記画像群内に含まれる各フレーム
の画像複雑さ指標の総和と、前記ビデオ信号に含まれる
各画像群の画像複雑さ指標の総和との比に基づいて求め
られるように構成する。
【0018】従って、各画像群の符号発生量は、画像複
雑さ指標に比例した割合になるので、画質のムラを防止
することができる。
【0019】請求項6に記載の発明は、請求項3乃至5
のいずれかに記載の符号量割り当て装置において、前記
最初のフレームの目標符号発生量は、前記最初のフレー
ムの画像複雑さ指標と、当該最初のフレームを有する画
像群の画像複雑さ指標との比に基づいて求められるよう
に構成する。
【0020】従って、最初のフレームの符号発生量は、
画像複雑さ指標に比例した割合になるので、画質のムラ
を防止することができる。
【0021】請求項7に記載の発明は、請求項3乃至6
のいずれかに記載の符号量割り当て装置において、前記
最初のフレーム以外のフレームの目標符号発生量は、前
記画像群符号量割当手段により割り当てられた前記画像
群の符号量から、前記第1フレーム符号量割当手段によ
り割り当てられた前記最初のフレームの符号量を差し引
いた符号量を、前記最初のフレーム以外のフレームのそ
れぞれの画像複雑さ指標に基づいて比例配分して求めら
れるように構成する。
【0022】従って、最初のフレーム以外のフレームの
符号発生量は、画像複雑さ指標に比例した割合になるの
で、画質のムラを防止することができる。また、最初の
フレーム以外のフレームの符号発生量は、第2の段階の
補正により、減らされた最初のフレームの符号量をも含
め比例配分させることができる。
【0023】請求項8に記載の発明は、請求項3乃至7
のいずれかに記載の符号量割り当て装置において、前記
画像群符号量割当手段は、前記算出されたそれぞれの画
像群のバッファ占有率が、予め設定されたバッファ占有
率の上限値より大きいか否か、および予め設定されたバ
ッファ占有率の下限値より小さいか否かを判断し、前記
上限値より大きい画像群については、当該画像群のバッ
ファ占有率と予め設定されたバッファ占有率の上限値と
の比を上限画像群補正比率として算出し、前記下限値よ
り小さい画像群については、当該画像群のバッファ占有
率と予め設定されたバッファ占有率の下限値との比を下
限画像群補正比率として算出し、前記算出された上限画
像群補正比率のうち最も大きい上限画像群補正比率を、
基準となる初期バッファ占有率より大きい画像群のバッ
ファ占有率に乗算して補正し、前記算出された下限画像
群補正比率のうち最も大きい下限画像群補正比率を、基
準となる初期バッファ占有率より小さい画像群のバッフ
ァ占有率に乗算して補正し、当該画像群単位で符号量を
割り当てるように構成する。
【0024】従って、各画像群のバッファ占有率が、オ
ーバーフロー、アンダーフローになることを防止するこ
とができる。
【0025】請求項9に記載の発明は、請求項3乃至8
のいずれかに記載の符号量割り当て装置において、前記
第1フレーム符号量割当手段は、前記算出された最初の
フレームのバッファ占有率が、予め設定されたバッファ
占有率の上限値より大きいか否か判断し、当該上限値よ
り大きい場合には、前記最初のフレームバッファ占有率
が、前記予め設定されたバッファ占有率の上限値と等し
くなるように補正し、前記最初のフレームに符号量を割
り当てるように構成する。
【0026】従って、最初のフレームのバッファ占有率
が、オーバーフローになることを防止することができ
る。
【0027】請求項10に記載の発明は、請求項3乃至
9のいずれかに記載の符号量割り当て装置において、前
記第1フレーム符号量割当手段は、前記算出された最初
のフレームのバッファ占有率が、予め設定されたバッフ
ァ占有率の下限値より小さいか否か判断し、当該下限値
より小さい場合には、前記最初のフレームバッファ占有
率が、前記予め設定されたバッファ占有率の下限値と等
しくなるように補正し、前記最初のフレームに符号量を
割り当てるように構成する。
【0028】従って、最初のフレームのバッファ占有率
が、アンダーフローになることを防止することができ
る。
【0029】請求項11に記載の発明は、請求項3乃至
10のいずれかに記載の符号量割り当て装置において、
前記第2フレーム符号量割当手段は、前記算出された最
初のフレーム以外のフレームのバッファ占有率が、予め
設定されたバッファ占有率の上限値より大きいか否か、
および、予め設定されたバッファ占有率の下限より小さ
いか否かを判断し、前記上限値より大きい前記フレーム
のバッファ占有率または前記下限値より小さい前記フレ
ームのバッファ占有率と、予め求められた理想ライン上
のバッファ占有率との第1の差分を算出するとともに、
前記バッファ占有率の上限値または下限値と、予め求め
られた理想ライン上のバッファ占有率との第2の差分を
算出し、前記第1の差分と前記第2の差分との比をフレ
ーム補正比率として算出し、当該算出されたフレーム補
正比率のうち最も大きいフレーム補正比率を、前記上限
値または前記下限値のそれぞれについて求め、当該フレ
ーム補正比率を、最初のフレーム以外のフレームのバッ
ファ占有率に乗算して補正し、当該フレームに符号量を
割り当てるように構成する。
【0030】従って、最初のフレーム以外のフレームの
バッファ占有率が、オーバーフロー、アンダーフローに
なることを防止することができる。
【0031】請求項12に記載の発明は、請求項11に
記載の符号量割り当て装置において、前記理想ライン
は、前記第1フレーム符号量割当手段により符号量が割
り当てられた最初のフレームのバッファ占有率と、当該
最初のフレームを有する画像群内における最後のフレー
ムのバッファ占有率との間にひかれたラインであるよう
に構成する。
【0032】従って、フレームバッファ占有率の理想的
なラインを求めることができる。
【0033】請求項13に記載の発明は、ビデオ信号を
符号化して記録媒体に記録する圧縮符号化データ記録に
おける符号量割り当て方法であって、ビデオ信号に含ま
れる所定数の画像フレームを有する画像群のバッファ占
有率が、予め設定されたバッファ占有率の上限値と下限
値との間の範囲内に収まるように、前記画像群単位で符
号量を割り当てる画像群符号量割当工程と、前記画像群
内における最初のフレームのバッファ占有率が、予め設
定されたバッファ占有率の上限値を超えないように、前
記最初のフレームに符号量を割り当てる第1フレーム符
号量割当工程と、前記画像群符号量割当工程および前記
第1フレーム符号量割当工程により、割り当てられた前
記符号量に基づいて、前記画像群内における最初のフレ
ーム以外のフレームに符号量を割り当てる第2フレーム
符号量割当工程と、を備えるように構成する。
【0034】従って、このような3段階の割り当てによ
り、デコーダ・バッファにおけるオーバーフローや、ア
ンダーフローを無くし、符号量を最適化することがで
き、より高い画質を得ることができる。
【0035】請求項14に記載の発明は、ビデオ信号を
符号化して記録媒体に記録する圧縮符号化データ記録に
おける符号量割り当て方法であって、ビデオ信号に含ま
れる複数の所定数の画像フレームを有する画像群の目標
符号発生量を、それぞれの画像群の画像複雑さ指標に基
づいて求め、それぞれの画像群のバッファ占有率を算出
する画像群バッファ占有率算出工程と、前記算出された
画像群のバッファ占有率が、予め設定されたバッファ占
有率の上限値と下限値との間の範囲内に収まるように、
前記画像群のバッファ占有率を補正し、当該画像群単位
で符号量を割り当てる画像群符号量割当工程と、前記符
号量が割り当てられた画像群内における最初のフレーム
の目標符号発生量を、それぞれの最初のフレームの画像
複雑さ指標に基づいて求め、それぞれの最初のフレーム
のバッファ占有率を算出する第1フレームバッファ占有
率算出工程と、前記算出された最初のフレームのバッフ
ァ占有率が、予め設定されたバッファ占有率の上限値を
超えないように、前記最初のフレームのバッファ占有率
を補正し、当該最初のフレームに符号量を割り当てる第
1フレーム符号量割当工程と、前記符号量が割り当てら
れた画像群内における最初のフレーム以外のフレームの
目標符号発生量を、それぞれのフレームの画像複雑さ指
標に基づいて求め、それぞれのフレームのバッファ占有
率を算出する第2フレームバッファ占有率算出工程と、
前記算出された最初のフレーム以外のフレームのバッフ
ァ占有率が、予め設定されたバッファ占有率の上限値と
下限値との間の範囲内に収まるように、前記最初のフレ
ーム以外のフレームのバッファ占有率を補正し、当該フ
レームに符号量を割り当てる第2フレーム符号量割当工
程と、を備えるように構成する。
【0036】従って、画像複雑さ指標に基づいて求めら
れた符号発生量が、3段階で補正(画像群単位のバッフ
ァ占有率の補正、最初のフレームのバッファ占有率の補
正、最初のフレーム以外のフレームのバッファ占有率の
補正)されることより、デコーダ・バッファにおいてオ
ーバーフローや、アンダーフローの無い最適な符号量を
各フレームに割り当てることができ、より高画質を実現
することができる。また、第2段階において、第3段階
に先立ち、最初のフレームの符号量の割り当てを行うこ
とで、極力、最初のフレームの発生符号量を維持するこ
とができるので、より綺麗な画像を再生することができ
る。
【0037】請求項15に記載の発明は、請求項14に
記載の符号量割り当て方法において、前記画像群の目標
符号発生量は、前記画像群内に含まれる各フレームの画
像複雑さ指標の総和と、前記ビデオ信号に含まれる各画
像群の画像複雑さ指標の総和との比に基づいて求められ
るように構成する。
【0038】従って、各画像群の符号発生量は、画像複
雑さ指標に比例した割合になるので、画質のムラを防止
することができる。
【0039】請求項16に記載の発明は、請求項14ま
たは15に記載の符号量割り当て方法において、前記最
初のフレームの目標符号発生量は、前記最初のフレーム
の画像複雑さ指標と、当該最初のフレームを有する画像
群の画像複雑さ指標との比に基づいて求められるように
構成する。
【0040】従って、最初のフレームの符号発生量は、
画像複雑さ指標に比例した割合になるので、画質のムラ
を防止することができる。
【0041】請求項17に記載の発明は、請求項14乃
至16のいずれかに記載の符号量割り当て方法におい
て、前記最初のフレーム以外のフレームの目標符号発生
量は、前記画像群符号量割当工程により割り当てられた
前記画像群の符号量から、前記第1フレーム符号量割当
工程により割り当てられた前記最初のフレームの符号量
を差し引いた符号量を、前記最初のフレーム以外のフレ
ームのそれぞれの画像複雑さ指標に基づいて比例配分し
て求められるように構成する。
【0042】従って、最初のフレーム以外のフレームの
符号発生量は、画像複雑さ指標に比例した割合になるの
で、画質のムラを防止することができる。
【0043】
【発明の実施の形態】以下、図面を参照して本発明の好
適な実施の形態について説明する。
【0044】以下に説明する実施の形態は、ビデオ信号
をMPEG方式により符号化して記録媒体に記録する圧
縮符号化データ記録における符号量割り当て装置(以下
「MPEGエンコーダ」と称す。)において、各フレー
ムへの最適な符号量の割り当てに関して本発明を適用し
た場合の実施形態である。なお、記録媒体には、DVD
−ROM、DVD−RAM、DVD−RW、CD−RO
M、ハードディスクなどが含まれる。
【0045】本発明の実施形態を具体的に説明する前
に、MPEGエンコーダにより作成され、記録媒体に記
録されたビデオ・シーケンス(以下「ビット・ストリー
ム(符号化されたデータ列)」と称す)が、MPEG方
式による復号を行う復号装置(以下「MPEGデコー
ダ」と称す。)でデコードされる際の流れを図1および
図2を参照して説明する。図1は、MPEGデコーダの
理想(仮想)モデル(STD:System Target Decode
r)を示す図である。この理想モデルは、VBV(Video
Buffer Verifier)バッファ10と、MPEGデコータ
20と、整列用バッファ30を備える。図2は、VBV
バッファ10のデータ占有率(%)の推移状況を示す図
である。なお、ここでは、流れを簡単に説明するため、
固定ビットレート、固定フレームレートとするが、可変
であっても同じ事がいえる。
【0046】図1に示すように、MPEGエンコーダに
より作成されたビット・ストリームは、ビットレートR
でVBVバッファ10に入力され、蓄積されていく。こ
うして、図2の符号50部に示すように、徐々に、VB
Vバッファ10のデータ占有量(bits)が増していくこ
ととなる。ここで、ビットレートRとは、フレーム間に
VBVバッファ10に入力されるデータ量(bits)をい
い、ビットレートR=ビットレート/フレームレートを
示すものである。また、ビット・ストリームは、VSH
(Video Sequence Header)などの各種ヘッダ情報と、
所定数の画像フレームを有する画像群であるGOP(Gr
oup Of Picture)から構成される。GOPは1個以上の
ピクチャから構成され、1つのピクチャが1フレームを
示している。このピクチャには、フレーム内符号のみか
ら構成(予測符号化なし)されるIピクチャ(Intra-Pict
ure)と、前方向のみのフレーム間予測符号から構成
(フレーム間順方向予測符号化)されるPピクチャ(Pr
edictive-Picture)と、前後の双方向のフレーム間予測
符号から構成(双方向予測符号化)されるBピクチャ
(Bidirectionally predictive-Picture)の3種類があ
る。通常、GOPのフレーム構造は、最初にIピクチ
ャ、その後、Pピクチャ、Bピクチャが続いている。そ
れぞれピクチャの平均的な符号発生量は、Iピクチャ>
Pピクチャ>Bピクチャの順となる。ピクチャは任意の
領域に分割された複数のスライスから構成される。スラ
イスは左から右へ、または上から下への順序で並んだ複
数のマクロブロックから構成される。
【0047】次に、VBVバッファ10に入力されたビ
ット・ストリームが、ビットストリーム中に指定された
図2に示す初期バッファ占有量(B'0)分のデータ量に
達すると、1フレーム分のデータが、VBVバッファ1
0からMPEGデコーダ20に瞬時に転送される。これ
により、図2に示すように、転送された符号量(d0
分、VBVバッファ10のデータ占有量(bits)が減少
する。また、引き続きビットストリームが、VBVバッ
ファ10に蓄積されていく。次のフレームのデータにつ
いても、次のフレームのデコードすべき時間に達する
と、VBVバッファ10からMPEGデコーダ20に瞬
時に転送される。以降も、VBVバッファ10に入力さ
れたビット・ストリームは、各フレームのデコードすべ
き時間に達する毎に転送される。ここで、図2に示す
「B」は、VBVバッファサイズ(bits)を、「B'N
は、第Nフレームのデータを取り除く(転送)前のVB
Vバッファ占有量(bits)を、「BN」は、第Nフレー
ムのデータを取り除いた後のVBVバッファ占有量(bi
ts)を、「dN」は、第Nフレームの符号量(bits)
を、それぞれ示している。また、図2の例では、最初の
フレームがIピクチャのため、そのバッファ占有量
(B'0)が、これ以降のフレームのバッファ占有量(例
えば、B'N)より大きくなっている。
【0048】次に、MPEGデコーダ20に転送された
1フレームのデータは、瞬時にデコード(復号)され、
画像データとして出力される。この時、フレームの順番
の入れ替えが必要な場合、例えば、そのフレームがBピ
クチャの場合には、整列バッファ30にて、フレームの
順番を入れ替えられ出力される。
【0049】このように、入力されたビット・ストリー
ムは、MPEGデコーダ20にてデコード(復号)され
るが、この時、VBVバッファ10が、図3に示すよう
に、オーバーフローや、アンダーフローを起こさないよ
うに、MPEGエンコーダでは、BN≧0、かつ、B’N
≦Bの条件を保証しなければならない。つまり、MPE
Gエンコーダは、かかる条件を満足するように、各フレ
ームに最適な符号量の割り当てを行い、ビット・ストリ
ームを作成する必要がある。
【0050】以下に、MPEGエンコーダにおける各フ
レームへの最適な符号量の割り当てに関して本発明の実
施形態を図4乃至図14を参照して具体的に説明する。
【0051】図4は、本発明の実施形態にかかるMPE
Gエンコーダ100の概略構成図である。図1に示すよ
うに、MPEGエンコーダ100は、取得部50と、動
き検出部51と、符号化部52と、最適符号量計算部5
3と、発生符号量計算部54と、量子化制御部55と、
マルチプレクサ56と、バッファメモリ57と、を備え
ている。
【0052】先ず、MPEGエンコーダ100の動作を
簡単に説明する。
【0053】取得部50は、入力ディジタルビデオ信号
から画像データを1フレーム毎に取得してフィールド間
引きなどの所定の処理を行う。また、取得したフレーム
のピクチャ種別を判別し、フレームの順番の変更が必要
な場合、例えば、Bピクチャである場合には、フレーム
の順番の変更も行う。動き検出部51は、16×16画
素のマクロブロック単位で、入力画像の動きベクトルを
算出し、フレーム信号Svとして出力する。
【0054】符号化部52は、加算部52aと、離散コ
サイン変換部(DCT:Discrete Cosine Transform)
52bと、量子化部(Q:Quantization)52cと、可
変長符号化部(VLC:Variable Length Coding)52
dと、逆量子化部(Q-1)52eと、逆離散コサイン変
換部(DCT-1)52fと、フレーム蓄積および動き補
償予測部52gと、を備えている。
【0055】加算部52aは、動き補償予測部52gか
らの補償信号Seを、動き検出部51からのフレーム信
号Svから減算し、減算信号Saとして離散コサイン変
換部52bへ出力する。離散コサイン変換部52bは、
減算信号Saを8×8画素のブロックで2次元離散コサ
イン変換し、変換信号Sdとして量子化部52cへ出力
する。量子化部52cは、変換信号Sdを後述する量子
化制御部55からのレート信号Srに基づいて決定され
る量子化スケールで量子化し、量子化信号Sqとして可
変長符号化部52dおよび逆量子化部52eへ出力す
る。
【0056】逆量子化部52eは、量子化信号Sqに対
して逆量子化処理を施し、逆量子化信号Sigとして逆
離散コサイン変換部(DCT-1)52fへ出力する。逆
離散コサイン変換部52fは、逆量子化信号Sigを逆
離散コサイン変換し、逆変換信号Sidとして動き補償
予測部52gへ出力する。動き補償予測部52gは、逆
変換信号Sidと、動き検出部51からのフレーム信号
Svに含まれる動きベクトルに基づいて、MPEG方式
におけるいわゆるフレーム間予測を用いた動き補償処理
を行い、上記補償信号Seを生成して加算部52aに出
力する。
【0057】一方、可変長符号化部52dは、上記量子
化信号Sqに対して可変長符号化処理を施し、可変長符
号Soutとしてマルチプレクサ56を介してバッファ
メモリ57へ出力する。こうして、バッファメモリ57
から、可変長符号Soutがビット・ストリームとして
出力され、記録媒体に記録されることとなる。このと
き、発生符号量計算部54は、バッファメモリ57の可
変長符号Soutに基づき、実際の発生符号量を計算
し、目標値を超える場合には、補正信号Shを量子化制
御部55へ出力する。これにより、量子化制御部55
は、補正信号Shと、レート信号Srに基づいて量子化
スケールを決定する。
【0058】次に、本発明の特徴部分である各フレーム
への最適な符号発生量の割り当て処理について説明す
る。かかる処理は、最適符号量計算部53にて行われ
る。最適符号量計算部53は、画像複雑さ指標計算部5
3aと、画像複雑さ指標蓄積部53bと、セレクタ53
cと、符号量割り当て計算部53dと、を備えている。
【0059】画像複雑さ指標計算部53aは、符号化部
52の加算部52aから出力された減算信号Saに基づ
いて、各フレームの画像複雑さ指標を算出する。画像複
雑さ指標は、分散、或いは、平均絶対値誤差で現され、
各フレームの符号発生量と比例関係(或いは、何らかの
関数、例えば、指数関数)にある。例えば、画像複雑さ
指標として、Iピクチャでは分散を、Pピクチャ、Bピ
クチャでは差分画像の分散を、それぞれ使用する。画像
複雑さ指標蓄積部53bは、画像複雑さ指標計算部53
aで算出された画像複雑さ指標を蓄積する。そして、全
てのフレームの画像複雑さ指標が算出された後、かかる
画像複雑さ指標のデータが、画像複雑さ指標蓄積部53
bからセレクタ53cを介して、符号割り当て計算部5
3dへ出力される。但し、第1回目のGOP内の各フレ
ームの画像複雑さ指標は、画像複雑さ指標計算部53a
にて計算できないため、予め、ある比率で設定した画像
複雑さ指標を、シーケンス情報として、セレクタ53c
から取り込み、符号割り当て計算部53dへ出力する。
そして、符号割り当て計算部53dは、各フレームの画
像複雑さ指標に基づいて、各フレームに最適な符号量を
割り当てるための計算を行う。かかる計算は、図5に示
すように、大きく3段階に分けることができる。第1の
段階はGOP単位での符号発生量の補正、第2の段階は
最初のフレームの符号発生量の補正、第3の段階はフレ
ーム単位での符号発生量の補正である。
【0060】(1)GOP単位での符号発生量の補正 以下に、第1の段階のGOP単位での符号発生量の補正
について、図6および図7を参照して説明する。図6
は、符号割り当て計算部53dによるGOP単位での符
号発生量の補正の処理を示すフローチャートを、図7
は、GOP単位での符号発生量の補正におけるバッファ
占有率(%)を示す図である。
【0061】先ず、各フレームの画像複雑さ指標に基づ
いて、各GOPの目標符号発生量(bits)が算出される
(S1)。例えば、目標総符号発生量(目標ビットレー
ト(bps)×秒数(s))をT、総画像複雑さ指標をS、
第i番目GOPの画像複雑さ指標をSGiとした場合、
第i番目のGOPの目標符号発生量(TGi)は、式
(数1)によって算出される。
【0062】TGi=T・SGi/S (数1) ここで、以降の説明に度々使用する画像複雑さ指標、目
標符号発生量について、フレーム単位、GOP単位、総
GOPで表した時の相互関係を図15に示しておく。
【0063】次に、求められた各GOPの目標符号発生
量(bits)に基づいて、各GOPの開始時点でのVBV
バッファ占有率(%)(フレームデータ発生前)が算出
される(S2)。例えば、VBVバッファサイズ(bit
s)をB、第i番目GOPのフレーム数をNGi、各フレ
ーム毎のバッファの減少量(bits)をRとした場合、第
i+1番目のGOPの開始時点でのVBVバッファ占有
率(BLi+1,0)は、式(数2)によって算出される。
【0064】 BLi+1,0=BLi,0+(TGi−R・NGi)/B (数2) 但し、第1番目のGOPの開始時点でのVBVバッファ
占有率(BLi,0)は、初期バッファ占有率(B0)に一
致する。即ち、BLi,0=B0となる。
【0065】こうして、全てのGOPの開始時点のVB
Vバッファ占有率(%)が算出されると、後述するオー
バーフロー側のGOP補正比率(RGmax)が「1」
に、アンダーフロー側のGOP補正比率(RGmin)が
「1」に設定される(S3)。このRGmax、RG
minは、GOP単位での符号発生量の補正にあたり使用
されるパラメータであり、初期段階では「1」(即ち、
補正無しを示す)に設定される。
【0066】次に、GOPの開始時点のVBVバッファ
占有率(%)が、予め設定されたVBVバッファ占有率
(%)のGOP上限値(LUG)より大きいGOPがあ
るか否か(オーバーフローのGOPがあるか否か)が判
断される(S4)。例えば、図7に示すように、第N−
2番目のGOPの開始時点でのVBVバッファ占有率
(BLN-2,0)が、VBVバッファ占有率(%)のGO
P上限値(LUG)を超えた場合には、オーバーフロー
と判断される。そして、オーバーフローと判断されたG
OPの全てについて(図7では、BLN-2,0のみである
が実際には、複数存在する)GOP補正比率(R
max)が算出され、そのうち、最大のGOP補正比率
(RGmax)が新たなGOP補正比率(RGmax)として
設定される(S5)。初期バッファ占有率(%)をB0
とすると、最大のGOP補正比率(RGmax)は、式
(数3)によって算出される。
【0067】 RGmax=max((BLi,0−B0)/(LUG−B0)) (数3) 次に、上記GOPの開始時点のVBVバッファ占有率
(%)が、予め設定されたVBVバッファ占有率(%)
のGOP下限値(LLG)より小さいGOPがあるか否
か(アンダーフローのGOPがあるか否か)が判断され
る(S6)。例えば、図7に示すように、第3番目のG
OPの開始時点でのVBVバッファ占有率(BL3,0
が、VBVバッファ占有率(%)のGOP下限値(LL
G)を下回った場合には、アンダーフローと判断され
る。そして、アンダーフローと判断されたGOPの全て
について、GOP補正比率(RGmin)が算出され、そ
のうち、最大のGOP補正比率(RGmin)が新たなG
OP補正比率(RGmin)として設定される(S7)。
最大のGOP補正比率(RGmin)は、式(数4)によ
って算出される。
【0068】 RGmin=max((BLi,0−B0)/(LLG−B0)) (数4) ここで、GOP上限値(LUG)およびGOP下限値
(LLG)は、実際の符号発生量とのズレを見込んで任
意に設定することができる。
【0069】次に、各GOPの開始時点のVBVバッフ
ァ占有率(%)について、初期バッファ占有率(B0
より大きいか否かが判断される(S8)。初期バッファ
占有率(B0)より大きいと判断されたGOPについて
は、そのGOPの開始時点のVBVバッファ占有率
(%)が、ステップS5で算出された補正比率(RG
max)に基づいて補正される(S9)。即ち、図7に示
すように、当該GOP内の全てのフレームのバッファ占
有率(%)が、補正比率(RGmax)に基づいて、一律
に低下(図7の例では、実線のバッファ占有率(%)か
ら破線のバッファ占有率(%)に補正)されることとな
る。例えば、ステップS9による補正後の第i番目のV
BVバッファ占有率(BL’i,0)は、式(数5)によ
って算出される。
【0070】 BL’i,0=B0+(BLi,0−B0)/RGmax (数5) 次に、各GOPの開始時点のVBVバッファ占有率
(%)について、初期バッファ占有率(B0)より小さ
いか否かが判断される(S10)。初期バッファ占有率
(B0)より小さいと判断されたGOPについては、そ
のGOPの開始時点のVBVバッファ占有率(%)が、
ステップS7で算出された補正比率(RGmi n)に基づ
いて補正される(S11)。かかる補正では、当該GO
P内の全てのフレームのバッファ占有率(%)が、補正
比率(RGmin)に基づいて、一律に上昇されることと
なる。例えば、ステップS11による補正後の第i番目
のVBVバッファ占有率(BL’i,0)は、式(数6)
によって算出される。
【0071】 BL’i,0=B0+(BLi,0−B0)/RGmin (数6) こうして、各GOPの開始時点のVBVバッファ占有率
(%)の補正が行われると、これらの補正結果による各
GOPの割り当て符号量が算出される(S12)。例え
ば、第i番目GOPのフレーム数をNGi、各フレーム
毎のVBVバッファの減少量(bits)をRとした場合、
第i番目のGOPの割り当て符号量(TG’i)は、式
(数7)によって算出される。
【0072】 TG’i=R・NGi+(BLi+1,0−BLi,0)・B (数7) ここで、BLi+1,0、BLi,0には、ステップS7、若し
くはステップS9にて補正されたものは補正後のBL’
i+1,0、BL’i,0を、補正されていないものはステップ
S3で算出されたBLi+1,0、BLi,0を使用する。
【0073】このように、第1の段階では、GOP単位
での符号発生量の補正を行い、各GOPに符号量が割り
当てられる。これにより、先ず、GOP単位で、オーバ
ーフロー、アンダーフローの発生を極力抑えることがで
きる。
【0074】なお、符号化するシーケンスがGOP構造
を持たず、かつ、シーケンスが短い場合には、全体を1
つのGOPとみなし、上記処理をスキップするように構
成する。また、符号化するシーケンスがGOP構造を持
たず、かつ、シーケンスが長い場合には、全体を複数の
シーケンスに分割し、それぞれをGOPとみなして上記
処理を行うように構成する。
【0075】(2)最初のフレームの符号発生量の補正 上記第1の段階の補正では、GOP内の各フレーム毎の
VBVバッファ占有率(%)は考慮せず、GOP単位で
VBVバッファ占有率(%)を考慮して割り当てる符号
量を決定したため、GOP内のフレームのバッファ占有
率(%)が、予め設定されたVBVバッファ占有率
(%)のフレーム上限値(LUF)より大きくなった
り、或いは、VBVバッファ占有率(%)のフレーム下
限値(LLF)より小さくなったりする場合がある。か
かる場合に、この第2の段階では、最初のフレームの符
号発生量を補正し、最初のフレームに最適な符号量を割
り当てるものである。そして、最初のフレーム以外のフ
レームの符号発生量の補正は、第3の段階で行う。
【0076】以下に、第2の段階の最初のフレームの符
号発生量の補正について、図8および図9を参照して説
明する。図8は、符号割り当て計算部53dによる最初
のフレームの符号発生量の補正の処理を示すフローチャ
ートを、図9は、最初のフレームの符号発生量の補正に
おけるバッファ占有率(%)を示す図である。
【0077】先ず、GOPの目標符号発生量(bits)
と、最初のフレームの画像複雑さ指標とGOPの画像複
雑さ指標との比より、GOPの最初のフレームの目標符
号発生量(bits)が算出される(S21)。例えば、第
i番目GOPの最初のフレームの画像複雑さ指標をSF
i,0、第i番目GOPの画像複雑さ指標をSGiとした場
合、第i番目のGOPの最初のフレームの目標符号発生
量(bits)(TFi,0)は、式(数8)によって算出さ
れる。
【0078】 TFi,0=TGi・SFi,0/SGi (数8) 次に、求められたGOPの開始時点のVBVバッファ占
有率(%)に基づいて、その最初のフレームのVBVバ
ッファ占有率(%)(例えば、i番目GOPの最初のフ
レームのVBVバッファ占有率BUi,0)が式(数9)
によって算出される(S22)。
【0079】 BUi,0=BLi,0+TFi,0/B (数9) 次に、かかる最初のフレームのVBVバッファ占有率
(%)が、予め設定されたVBVバッファ占有率(%)
のフレーム上限値(LUF)より大きいか否か(オーバ
ーフローしているか否か)が判断される(S23)。フ
レーム上限値(LUF)より大きいと判断された場合、
最初のフレームのVBVバッファ占有率(%)が補正さ
れる(S24)。例えば、補正後の第i番目のGOPの
最初のフレームのバッファ占有率(BU’i,0)は、式
(数10)によって算出される。
【0080】BU’i,0=LUF (数10) 図9の例では、最初のフレームのVBVバッファ占有率
(BUi,0)から、フレーム上限値(LUF)を超えた
分(X)が差し引かれ、新たなVBVバッファ占有率
(BU’i,0)として設定されることを示している。こ
の差し引かれた「X」分の符号量、即ち、本来、最初の
フレームに割り当てるべき符号量は、後述する第3の段
階の補正にて、後のフレーム(同じGOP内の最初のフ
レーム以外のフレーム)に補填(比例配分)することと
なる。
【0081】次に、GOPの最初のフレームのVBVバ
ッファ占有率(%)が、予め設定されたVBVバッファ
占有率(%)のフレーム下限値(LLF)より小さいか
否か(アンダーフローしているか否か)が判断される
(S25)。フレーム下限値(LLF)より小さいと判
断された場合、最初のフレームのVBVバッファ占有率
(%)が補正される(S26)。例えば、補正後の第i
番目のGOPの最初のフレームのバッファ占有率(B
U’i,0)は、式(数11)によって算出される。
【0082】BU’i,0=LLF (数11) ここで、フレーム上限値(LUF)およびフレーム下限
値(LLF)は、実際の符号発生量とのズレを見込んで
任意に設定することができる。
【0083】こうして、GOPの最初のフレームのVB
Vバッファ占有率(%)の補正が行われると、これらの
補正結果によるGOPの最初のフレームの割り当て符号
量が算出される(S27)。例えば、第i番目のGOP
の最初のフレームの割り当て符号量(TF’i,0)は、
式(数12)によって算出される。
【0084】 TF’i,0=(BUi,0−BLi,0)・B (数12) ここで、BUi,0には、ステップS24、若しくはステ
ップS26にて補正されたものは補正後のBU’
i,0を、補正されていないものはステップS22で算出
されたBUi,0を使用する。
【0085】なお、最初のフレームの符号発生量の補正
は、符号化するシーケンス内の全てのGOPが対象とな
る。
【0086】このように、第2の段階では、GOP内の
最初のフレームの符号発生量の補正を行い、最初のフレ
ームに最適な符号量が割り当てられる。これにより、最
初のフレームの符号量が確定し、これを基準に第3の段
階にて、最初のフレーム以外のフレームの符号発生量の
補正を行うことができる。このように、最初のフレーム
の発生符号量を、先ず始めに補正することとしたのは、
上述した通り、GOPは、通常、Iピクチャの後に、P
ピクチャ、Bピクチャがくるような構造となっており、
Pピクチャ、Bピクチャは、Iピクチャのフレームを参
照して予測していくものであるため、綺麗な画像を得る
には、なるべく、最初のフレームであるIピクチャの符
号発生量を維持する必要があるからである。即ち、第2
の段階で、最初のフレームのVBVバッファ占有率がオ
ーバーフローにならない場合には、最初のフレームたる
Iピクチャの符号発生量はそのまま維持され、その後の
第3の段階にて補正されない。また、第2の段階で、最
初のフレームのVBVバッファ占有率がオーバーフロー
になる場合にも、最初のフレームであるIピクチャの符
号発生量は最小限の補正にとどまり、その後の第3の段
階にて補正されないので、綺麗な画像を確保できるので
ある。
【0087】(3)フレーム単位での符号発生量の補正 第2の段階の補正では、GOPの最初のフレームの符号
発生量を補正し、最適な符号量の割り当てを行なった
が、この第3の段階の補正では、最初のフレーム以外の
フレームの符号発生量を補正し、最適な符号量の割り当
てを行うものである。
【0088】以下に、第3の段階のフレーム単位での符
号発生量の補正について、図10および図11を参照し
て説明する。図10は、符号割り当て計算部53dによ
るフレーム単位での符号発生量の補正の処理を示すフロ
ーチャートを、図11は、フレーム単位での符号発生量
の補正におけるバッファ占有率(%)を示す図である。
【0089】先ず、GOP内の最初のフレーム以外の各
フレームの目標符号発生量(bits)が、各フレームの画像
複雑さ指標に基づいて算出される(S31)。各フレー
ムの目標符号発生量(bits)は、GOPに割り当てられた
符号量から最初のフレームの符号量を差し引いたもの
を、画像複雑さ指標で比例配分して算出される。例え
ば、t=TGi−TFi,0とし、s=SGi−SFi,0とす
ると、第i番目GOPの第j番目フレームの目標符号発
生量(bits)(TFi,j)は、式(数13)によって算
出される。
【0090】 TFi,j=t・SFi,j/s (数13) 次に、求められたGOPのフレームの目標符号発生量
(bits)に基づいて、フレームデータ発生前と、発生後
のVBVバッファ占有率(%)が算出される(S3
2)。例えば、VBVバッファサイズ(bits)をBとし
た場合、第i番目GOPの第j番目フレームのデータ発
生後のVBVバッファ占有率(BUi,j)は、式(数1
4)によって算出される。
【0091】 BUi,j=BLi,j+TFi,j/B (数14) また、式(数13)の「BLi,j」は、第i番目GOP
の第j番目フレームのデータ発生前のVBVバッファ占
有率(%)を示しており、例えば、式(数15)によっ
て算出される。
【0092】 BLi,j+1=BUi,j−R/B (数15) こうして、図11に示すBUi,j、BLi,jが算出される
と、オーバーフロー側のフレーム補正比率(RFmax
が「1」に、アンダーフロー側のフレーム補正比率(R
min)が「1」に設定される(S33)。このR
max、RFminは、フレーム単位での符号発生量の補正
にあたり使用されるパラメータであり、初期段階では、
「1」(即ち、補正無しを示す)に設定される。
【0093】次に、図11(A)に示すように、一つの
GOP内の最初のフレームのバッファ占有率(%)と、
最後のフレームバッファ占有率(%)の間の目標(理
想)ラインの値が、算出される(S34)。例えば、第
i番目GOPの最初のフレームのVBVバッファ占有率
をBUi,0と、第i番目GOPの最後のフレーム(第i
番目GOPのフレーム総数(NGi)−1)のVBVバ
ッファ占有率をBUi,NGi -1、とすると、第i番目GO
Pの第j番目のフレームの目標ラインの値(Kj)は、
式(数16)によって算出される。
【0094】 Kj=BUi,0+(BUi,NGi-1−BUi,0)・j/(NGi−1) (数1 6) 次に、ステップS32で算出されたフレームのデータ発
生後のVBVバッファ占有率(%)が、予め設定された
VBVバッファ占有率(%)のフレーム上限値(LU
F)より大きいフレームがあるか否か(オーバーフロー
のフレームがあるか否か)が判断される(S35)。オ
ーバーフローと判断されたフレームの全てについて、フ
レーム補正比率(RFmax)が算出され、そのうち、最
大のフレーム補正比率(RFmax)が新たなフレーム補
正比率(RFmax)として設定される(S36)。最大
のフレーム補正比率(RFmax)は、式(数17)によ
って算出される。
【0095】 RFmax=max((BUi,j−Kj)/(LUF−Kj)) (数17) 次に、ステップS32で算出されたフレームのデータ発
生前のVBVバッファ占有率(%)が、予め設定された
VBVバッファ占有率(%)のフレーム下限値(LL
F)より小さいフレームがあるか否か(アンダーフロー
のフレームがあるか否か)が判断される(S37)。ア
ンダーフローと判断されたフレームの全てについて、フ
レーム補正比率(RFmin)が算出され、そのうち、最
大のフレーム補正比率(RFmin)が新たなフレーム補
正比率(RFmin)として設定される(S38)。最大
のフレーム補正比率(RFmin)は、式(数18)によ
って算出される。
【0096】 RFmin=max((Kj−BLi,j)/(Kj−LLF)) (数18) 図11(A)では、第i番目GOPの第j番目フレーム
がアンダーフローを起こしているが、式(数17)の
「(Kj−BLi,j)/(Kj−LLF)」は、図11
(B)の「a/b」に相当する。同じGOP内のフレー
ムの「a/b」(アンダーフローを起こしているフレー
ムに限る。)のうち、最も大きい値がRFmi nとして設
定される。
【0097】次に、一つのフレームのデータ発生後のV
BVバッファ占有率(%)が目標ラインの値(Kj)よ
り大きく、かつ、そのフレームの次のフレームのデータ
発生前のVBVバッファ占有率(%)も目標ラインの値
(Kj)より大きいという条件を満たすその一つのフレ
ームがあるか否かが判断される(S39)。例えば、B
i,j>Kj、かつ、BLi,j+1>Kj+1の条件を満たす第
j番目のフレームがあるか否か判断される。そのような
フレームがあると判断された場合には、そのフレームの
データ発生後のVBVバッファ占有率(%)が、ステッ
プS36で算出されたフレーム補正比率(RFmax)に
基づいて補正される(S40)。例えば、そのようなフ
レームが第j番目フレームであるとすると、補正後の第
j番目フレームのデータ発生後のVBVバッファ占有率
(BU’i,j)は、式(数19)によって算出される。
【0098】 BU’i,j=Kj+(BUi,j−Kj)/RFmax (数19) このような補正は、上記条件を満たす全てのフレームに
ついて行われる。
【0099】次に、一つのフレームのデータ発生後のV
BVバッファ占有率(%)が目標ラインの値(Kj)よ
り小さく、かつ、そのフレームの次のフレームのデータ
発生前のVBVバッファ占有率(%)も目標ラインの値
(Kj)より小さいという条件を満たすその一つのフレ
ームがあるか否かが判断される(S41)。例えば、B
i,j<Kj、かつ、BLi,j+1<Kj+1の条件を満たす第
j番目のフレームがあるか否か判断される。そのような
フレームがあると判断された場合には、そのフレームの
次のフレームのデータ発生前のVBVバッファ占有率
(%)が、ステップS38で算出されたフレーム補正比
率(RFmin)に基づいて補正される(S42)。例え
ば、そのようなフレームが第j番目フレームであるとす
ると、補正後の第j+1番目フレームのデータ発生前の
VBVバッファ占有率(BL’i,j+ 1)は、式(数2
0)によって算出される。
【0100】 BL’i,j+1=Kj+1−(Kj+1−BLi,j+1)/RFmin (数20) 即ち、図11(C)に示すように、最初のフレーム以外
のフレームのVBVバッファ占有率(%)がRFmin
b/aで比例補正される。
【0101】また、BU’i,jとBL’i,j+1との関係
は、式(数21)で表される。
【0102】 BU’i,j=BL’i,j+1+R/B (数21) なお、図10に示す処理は、シーケンス内の全てのGO
Pについて行われるが、ステップ35にてオーバーフロ
ーのフレームもなく、ステップS37にてアンダーフロ
ーのフレームもないと判断されたGOPについては、上
記補正は行われないこととなる。
【0103】こうして、GOPの最初のフレーム以外の
フレームのVBVバッファ占有率(%)の補正が行われ
ると、これらの補正結果によるGOPの最初のフレーム
以外のフレームの割り当て符号量が算出される(S4
3)。例えば、第i番目GOPのj番目フレームの割り
当て符号量(TF’i,j)は、式(数22)によって算
出される。
【0104】 TF’i,j=R+(BLi,j+1−BLi,j)・B=R+(BUi,j−BUi,j-1) ・B (数22) ここで、BLi,j+1、BLi,jには、ステップS42にて
補正されたものは補正後のBL’i,j+1、BL’i,jを、
補正されていないものはステップS32で算出されたB
i,j+1、BLi,jを使用する。また、BUi,j、BU
i,j-1には、ステップS40にて補正されたものは補正
後のBU’i,j、BU’i,j-1を、補正されていないもの
はステップS32で算出されたBUi,j、BUi,j-1を使
用する。
【0105】このように、第3の段階では、フレーム単
位での符号発生量の補正を行い、各フレーム(最初のフ
レームを除く)に最適な符号量が割り当てられる。これ
により、各フレーム単位のオーバーフロー、アンダーフ
ローを完全に無くすことができる。
【0106】以上の説明したように、符号割り当て計算
部53dは、上記3段階の補正を行い、最適な符号量の
割り当てを行なった後、かかる符号量をレート信号Sr
として、量子化制御部55へ出力する。そして、上述し
た通り、符号化部52は、変換信号Sdを量子化制御部
55からのレート信号Srに基づいて決定される量子化
スケールで量子化して、ビデオ・ストリームを作成して
出力する。
【0107】このように作成されたビデオ・ストリーム
により、MPEGデコーダでデコードされる際、オーバ
ーフロー、アンダーフローを発生させずに、かつ、高画
質の画像を再生させることができる。
【0108】図12乃至図14は、上記補正のシミュレ
ーション結果を示すものである。図12は、補正前と後
のVBVバッファ占有率(%)および割り当て符号量
(bits)をGOP単位で示したものである。図12に示
すように、補正前のバッファ占有率55は、バッファ占
有率のGOP上限値(LUG=75%)とバッファ占有
率のGOP下限値(LLG=15%)の範囲内に無いG
OPが存在し、オーバーフロー、アンダーフローを起こ
しているが、補正後のバッファ占有率56は、かかる範
囲内に収まっていることがわかる。また、図13は、補
正前と後のVBVバッファ占有率(%)および割り当て
符号量(bits)をフレーム単位で示したものであり、オ
ーバーフロー側の補正に関するものである。図14は、
補正前と後のVBVバッファ占有率(%)および割り当
て符号量(bits)をフレーム単位で示したものであり、
アンダーフロー側の補正に関するものである。図13お
よび図14を合わせて見ると、補正前のバッファ占有率
60は、図13に示すバッファ占有率のフレーム上限値
(LUF=85%)と、図14に示すバッファ占有率の
フレーム下限値(LLG=15%)の範囲内に無いフレ
ームが存在し、オーバーフロー、アンダーフローを起こ
しているが、補正後のバッファ占有率61は、かかる範
囲内に収まっていることがわかる。また、かかる補正
は、上述した通り、理想ライン62を中心に補正されて
いることがわかる。
【0109】なお、上記実施形態においては、上記3段
階の補正を行い、最適な符号量を割り当てることとした
が、これに限定されず、例えば、上記第1の段階の補正
(GOP単位での符号発生量の補正)のみを行って、最
適な符号量を割り当てるようにしてもよく、或いは、上
記第2の段階の補正(最初のフレームの符号発生量の補
正)および上記第3の段階の補正(フレーム単位での符
号発生量の補正)のみを行って、最適な符号量を割り当
てるようにしてもよい。
【0110】また、上記実施形態において、Iピクチ
ャ、Pピクチャ、Bピクチャ、GOPの名称は、MPE
G−1、MPEG−2における呼び名であるが、MPE
G−4の場合には、IピクチャをI−VOP(Video Ob
ject Plane)、PピクチャをP−VOP、Bピクチャを
B−VOP、GOPをGOV(Group Of VOP)と読み替
えることで、同様の機能を実現できる。所定数の画像フ
レームを有する画像群には、GOVも含まれる。
【0111】
【発明の効果】以上説明したように、本発明によれば、
ビデオ・シーケンスを構成する、各画像群、各フレーム
の画像複雑さ指標に基づいて算出された符号発生量に対
して3段階の補正を行うことにより、オーバーフロー、
アンダーフローが発生しない最適な符号量を割り当てる
ことができる。また、最初のフレームの発生符号量の補
正は最小限にとどめ、出来る限り最初のフレームの符号
発生量を維持することができるので、より綺麗な画像を
確保できる。
【図面の簡単な説明】
【図1】本発明の実施形態にかかるMPEGデコーダの
理想(仮想)モデルを示す図である。
【図2】本発明の実施形態にかかるVBVバッファのデ
ータ占有量(bits)の推移状況を示す図である。
【図3】図2において、オーバーフロー、アンダーフロ
ーがある場合のVBVバッファのデータ占有量(bits)
の推移状況を示す図である。
【図4】本発明の実施形態にかかるMPEGエンコーダ
100の概略構成図である。
【図5】本発明の実施形態にかかる符号発生量の補正処
理を示すフローチャートである。
【図6】本発明の実施形態にかかる符号割り当て計算部
によるGOP単位での符号発生量の補正の処理を示すフ
ローチャートである。
【図7】GOP単位での符号発生量の補正におけるバッ
ファ占有率(%)を示す図である。
【図8】本発明の実施形態にかかる符号割り当て計算部
による最初のフレームの符号発生量の補正の処理を示す
フローチャートである。
【図9】最初のフレームの符号発生量の補正におけるバ
ッファ占有率(%)を示す図である。
【図10】本発明の実施形態にかかる符号割り当て計算
部によるフレーム単位での符号発生量の補正の処理を示
すフローチャートである。
【図11】フレーム単位での符号発生量の補正における
バッファ占有率(%)を示す図である。
【図12】補正前と後のVBVバッファ占有率(%)お
よび割り当て符号量(bits)をGOP単位で示した図で
ある。
【図13】補正前と後のVBVバッファ占有率(%)お
よび割り当て符号量(bits)をフレーム単位で示したも
のであり、オーバーフロー側の補正に関する図である。
【図14】補正前と後のVBVバッファ占有率(%)お
よび割り当て符号量(bits)をフレーム単位で示したも
のであり、アンダーフロー側の補正に関する図である。
【図15】画像複雑さ指標、目標符号発生量について、
フレーム単位、GOP単位、総GOPで表した時の相互
関係を示す図である。
【符号の説明】
10…VBVバッファ 20…MPEGデコーダ 30…整列用バッファ 50…取得部 51…動き検出部 52…符号化部 52a…加算部 52b…離散コサイン変換部 52c…量子化部 52d…可変長符号化部 52e…逆量子化部 52f…逆離散コサイン変換部 52g…フレーム蓄積および補償予測部 53…最適符号量計算部 53a…画像複雑さ指標計算部 53b…画像複雑さ指標蓄積部 53c…セレクタ 53d…符号量割り当て計算部 54…発生符号量計算部 55…量子化計算部 56…マルチプレクサ 57…バッファメモリ
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C053 FA22 FA24 GB06 GB11 GB37 JA01 KA24 KA25 LA07 5C059 KK35 MA00 MA23 ME01 PP04 SS12 SS13 TA60 TB04 TC19 TD04 UA02 UA33 5J064 BA09 BA16 BB12 BC01 BC16 BC26 BD03

Claims (17)

    【特許請求の範囲】
  1. 【請求項1】 ビデオ信号を符号化して記録媒体に記録
    する圧縮符号化データ記録における符号量割り当て装置
    であって、 ビデオ信号に含まれる所定数の画像フレームを有する画
    像群のバッファ占有率が、予め設定されたバッファ占有
    率の上限値と下限値との間の範囲内に収まるように、前
    記画像群単位で符号量を割り当てる画像群符号量割当手
    段と、 前記画像群内における最初のフレームのバッファ占有率
    が、予め設定されたバッファ占有率の上限値を超えない
    ように、前記最初のフレームに符号量を割り当てる第1
    フレーム符号量割当手段と、 前記画像群符号量割当手段および前記第1フレーム符号
    量割当手段により、割り当てられた前記符号量に基づい
    て、前記画像群内における最初のフレーム以外のフレー
    ムに符号量を割り当てる第2フレーム符号量割当手段
    と、を備えることを特徴とする符号量割り当て装置。
  2. 【請求項2】 前記第1フレーム符号量割当手段は、前
    記算出された最初のフレームのバッファ占有率が、予め
    設定されたバッファ占有率の上限値と下限値との間の範
    囲内に収まるように、前記最初のフレームに符号量を割
    り当てることを特徴とする請求項1に記載の符号量割り
    当て装置。
  3. 【請求項3】 ビデオ信号を符号化して記録媒体に記録
    する圧縮符号化データ記録における符号量割り当て装置
    であって、 ビデオ信号に含まれる複数の所定数の画像フレームを有
    する画像群の目標符号発生量を、それぞれの画像群の画
    像複雑さ指標に基づいて求め、それぞれの画像群のバッ
    ファ占有率を算出する画像群バッファ占有率算出手段
    と、 前記算出された画像群のバッファ占有率が、予め設定さ
    れたバッファ占有率の上限値と下限値との間の範囲内に
    収まるように、前記画像群のバッファ占有率を補正し、
    当該画像群単位で符号量を割り当てる画像群符号量割当
    手段と、 前記符号量が割り当てられた画像群内における最初のフ
    レームの目標符号発生量を、それぞれの最初のフレーム
    の画像複雑さ指標に基づいて求め、それぞれの最初のフ
    レームのバッファ占有率を算出する第1フレームバッフ
    ァ占有率算出手段と、 前記算出された最初のフレームのバッファ占有率が、予
    め設定されたバッファ占有率の上限値を超えないよう
    に、前記最初のフレームのバッファ占有率を補正し、当
    該最初のフレームに符号量を割り当てる第1フレーム符
    号量割当手段と、 前記符号量が割り当てられた画像群内における最初のフ
    レーム以外のフレームの目標符号発生量を、それぞれの
    フレームの画像複雑さ指標に基づいて求め、それぞれの
    フレームのバッファ占有率を算出する第2フレームバッ
    ファ占有率算出手段と、 前記算出された最初のフレーム以外のフレームのバッフ
    ァ占有率が、予め設定されたバッファ占有率の上限値と
    下限値との間の範囲内に収まるように、前記最初のフレ
    ーム以外のフレームのバッファ占有率を補正し、当該フ
    レームに符号量を割り当てる第2フレーム符号量割当手
    段と、を備えることを特徴とする符号量割り当て装置。
  4. 【請求項4】 前記第1フレーム符号量割当手段は、前
    記算出された最初のフレームのバッファ占有率が、予め
    設定されたバッファ占有率の上限値と下限値との間の範
    囲内に収まるように、前記最初のフレームに符号量を割
    り当てることを特徴とする請求項3に記載の符号量割り
    当て装置。
  5. 【請求項5】 前記画像群の目標符号発生量は、前記画
    像群内に含まれる各フレームの画像複雑さ指標の総和
    と、前記ビデオ信号に含まれる各画像群の画像複雑さ指
    標の総和との比に基づいて求められることを特徴とする
    請求項3または4に記載の符号量割り当て装置。
  6. 【請求項6】 前記最初のフレームの目標符号発生量
    は、前記最初のフレームの画像複雑さ指標と、当該最初
    のフレームを有する画像群の画像複雑さ指標との比に基
    づいて求められることを特徴とする請求項3乃至5のい
    ずれかに記載の符号量割り当て装置。
  7. 【請求項7】 前記最初のフレーム以外のフレームの目
    標符号発生量は、前記画像群符号量割当手段により割り
    当てられた前記画像群の符号量から、前記第1フレーム
    符号量割当手段により割り当てられた前記最初のフレー
    ムの符号量を差し引いた符号量を、前記最初のフレーム
    以外のフレームのそれぞれの画像複雑さ指標に基づいて
    比例配分して求められることを特徴とする請求項3乃至
    6のいずれかに記載の符号量割り当て装置。
  8. 【請求項8】 前記画像群符号量割当手段は、前記算出
    されたそれぞれの画像群のバッファ占有率が、予め設定
    されたバッファ占有率の上限値より大きいか否か、およ
    び予め設定されたバッファ占有率の下限値より小さいか
    否かを判断し、前記上限値より大きい画像群について
    は、当該画像群のバッファ占有率と予め設定されたバッ
    ファ占有率の上限値との比を上限画像群補正比率として
    算出し、前記下限値より小さい画像群については、当該
    画像群のバッファ占有率と予め設定されたバッファ占有
    率の下限値との比を下限画像群補正比率として算出し、
    前記算出された上限画像群補正比率のうち最も大きい上
    限画像群補正比率を、基準となる初期バッファ占有率よ
    り大きい前記画像群のバッファ占有率に乗算して補正
    し、前記算出された下限画像群補正比率のうち最も大き
    い下限画像群補正比率を、基準となる初期バッファ占有
    率より小さい前記画像群のバッファ占有率に乗算して補
    正し、当該画像群単位で符号量を割り当てることを特徴
    とする請求項3乃至7のいずれかに記載の符号量割り当
    て装置。
  9. 【請求項9】 前記第1フレーム符号量割当手段は、前
    記算出された最初のフレームのバッファ占有率が、予め
    設定されたバッファ占有率の上限値より大きいか否か判
    断し、当該上限値より大きい場合には、前記最初のフレ
    ームバッファ占有率が、前記予め設定されたバッファ占
    有率の上限値と等しくなるように補正し、前記最初のフ
    レームに符号量を割り当てることを特徴とする請求項3
    乃至8のいずれかに記載の符号量割り当て装置。
  10. 【請求項10】 前記第1フレーム符号量割当手段は、
    前記算出された最初のフレームのバッファ占有率が、予
    め設定されたバッファ占有率の下限値より小さいか否か
    判断し、当該下限値より小さい場合には、前記最初のフ
    レームバッファ占有率が、前記予め設定されたバッファ
    占有率の下限値と等しくなるように補正し、前記最初の
    フレームに符号量を割り当てることを特徴とする請求項
    3乃至9のいずれかに記載の符号量割り当て装置。
  11. 【請求項11】 前記第2フレーム符号量割当手段は、
    前記算出された最初のフレーム以外のフレームのバッフ
    ァ占有率が、予め設定されたバッファ占有率の上限値よ
    り大きいか否か、および、予め設定されたバッファ占有
    率の下限より小さいか否かを判断し、前記上限値より大
    きい前記フレームのバッファ占有率または前記下限値よ
    り小さい前記フレームのバッファ占有率と、予め求めら
    れた理想ライン上のバッファ占有率との第1の差分を算
    出するとともに、前記バッファ占有率の上限値または下
    限値と、予め求められた理想ライン上のバッファ占有率
    との第2の差分を算出し、前記第1の差分と前記第2の
    差分との比をフレーム補正比率として算出し、当該算出
    されたフレーム補正比率のうち最も大きいフレーム補正
    比率を、前記上限値または前記下限値のそれぞれについ
    て求め、当該フレーム補正比率を最初のフレーム以外の
    フレームのバッファ占有率に乗算して補正し、当該フレ
    ームに符号量を割り当てることを特徴とする請求項3乃
    至10のいずれかに記載の符号量割り当て装置。
  12. 【請求項12】 前記理想ラインは、前記第1フレーム
    符号量割当手段により符号量が割り当てられた最初のフ
    レームのバッファ占有率と、当該最初のフレームを有す
    る画像群内における最後のフレームのバッファ占有率と
    の間にひかれたラインであることを特徴とする請求項1
    1に記載の符号量割り当て装置。
  13. 【請求項13】 ビデオ信号を符号化して記録媒体に記
    録する圧縮符号化データ記録における符号量割り当て方
    法であって、 ビデオ信号に含まれる所定数の画像フレームを有する画
    像群のバッファ占有率が、予め設定されたバッファ占有
    率の上限値と下限値との間の範囲内に収まるように、前
    記画像群単位で符号量を割り当てる画像群符号量割当工
    程と、 前記画像群内における最初のフレームのバッファ占有率
    が、予め設定されたバッファ占有率の上限値を超えない
    ように、前記最初のフレームに符号量を割り当てる第1
    フレーム符号量割当工程と、 前記画像群符号量割当工程および前記第1フレーム符号
    量割当工程により、割り当てられた前記符号量に基づい
    て、前記画像群内における最初のフレーム以外のフレー
    ムに符号量を割り当てる第2フレーム符号量割当工程
    と、を備えることを特徴とする符号量割り当て方法。
  14. 【請求項14】 ビデオ信号を符号化して記録媒体に記
    録する圧縮符号化データ記録における符号量割り当て方
    法であって、 ビデオ信号に含まれる複数の所定数の画像フレームを有
    する画像群の目標符号発生量を、それぞれの画像群の画
    像複雑さ指標に基づいて求め、それぞれの画像群のバッ
    ファ占有率を算出する画像群バッファ占有率算出工程
    と、 前記算出された画像群のバッファ占有率が、予め設定さ
    れたバッファ占有率の上限値と下限値との間の範囲内に
    収まるように、前記画像群のバッファ占有率を補正し、
    当該画像群単位で符号量を割り当てる画像群符号量割当
    工程と、 前記符号量が割り当てられた画像群内における最初のフ
    レームの目標符号発生量を、それぞれの最初のフレーム
    の画像複雑さ指標に基づいて求め、それぞれの最初のフ
    レームのバッファ占有率を算出する第1フレームバッフ
    ァ占有率算出工程と、 前記算出された最初のフレームのバッファ占有率が、予
    め設定されたバッファ占有率の上限値を超えないよう
    に、前記最初のフレームのバッファ占有率を補正し、当
    該最初のフレームに符号量を割り当てる第1フレーム符
    号量割当工程と、 前記符号量が割り当てられた画像群内における最初のフ
    レーム以外のフレームの目標符号発生量を、それぞれの
    フレームの画像複雑さ指標に基づいて求め、それぞれの
    フレームのバッファ占有率を算出する第2フレームバッ
    ファ占有率算出工程と、 前記算出された最初のフレーム以外のフレームのバッフ
    ァ占有率が、予め設定されたバッファ占有率の上限値と
    下限値との間の範囲内に収まるように、前記最初のフレ
    ーム以外のフレームのバッファ占有率を補正し、当該フ
    レームに符号量を割り当てる第2フレーム符号量割当工
    程と、を備えることを特徴とする符号量割り当て方法。
  15. 【請求項15】 前記画像群の目標符号発生量は、前記
    画像群内に含まれる各フレームの画像複雑さ指標の総和
    と、前記ビデオ信号に含まれる各画像群の画像複雑さ指
    標の総和との比に基づいて求められることを特徴とする
    請求項14に記載の符号量割り当て方法。
  16. 【請求項16】 前記最初のフレームの目標符号発生量
    は、前記最初のフレームの画像複雑さ指標と、当該最初
    のフレームを有する画像群の画像複雑さ指標との比に基
    づいて求められることを特徴とする請求項14または1
    5に記載の符号量割り当て方法。
  17. 【請求項17】 前記最初のフレーム以外のフレームの
    目標符号発生量は、前記画像群符号量割当工程により割
    り当てられた前記画像群の符号量から、前記第1フレー
    ム符号量割当工程により割り当てられた前記最初のフレ
    ームの符号量を差し引いた符号量を、前記最初のフレー
    ム以外のフレームのそれぞれの画像複雑さ指標に基づい
    て比例配分して求められることを特徴とする請求項14
    乃至16のいずれかに記載の符号量割り当て方法。
JP2000174064A 2000-06-09 2000-06-09 符号量割り当て装置および方法 Expired - Fee Related JP3889552B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2000174064A JP3889552B2 (ja) 2000-06-09 2000-06-09 符号量割り当て装置および方法
US09/877,077 US6940902B2 (en) 2000-06-09 2001-06-11 Code quantity assignment device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000174064A JP3889552B2 (ja) 2000-06-09 2000-06-09 符号量割り当て装置および方法

Publications (2)

Publication Number Publication Date
JP2001359097A true JP2001359097A (ja) 2001-12-26
JP3889552B2 JP3889552B2 (ja) 2007-03-07

Family

ID=18676177

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000174064A Expired - Fee Related JP3889552B2 (ja) 2000-06-09 2000-06-09 符号量割り当て装置および方法

Country Status (2)

Country Link
US (1) US6940902B2 (ja)
JP (1) JP3889552B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2011138900A1 (ja) * 2010-05-06 2013-07-22 日本電信電話株式会社 映像符号化制御方法および装置
US9179165B2 (en) 2010-05-07 2015-11-03 Nippon Telegraph And Telephone Corporation Video encoding control method, video encoding apparatus and video encoding program

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030185299A1 (en) * 2001-11-30 2003-10-02 Taro Takita Program, recording medium, and image encoding apparatus and method
JP4179917B2 (ja) * 2003-04-22 2008-11-12 株式会社東芝 動画像符号化装置及び方法
JP3675464B2 (ja) * 2003-10-29 2005-07-27 ソニー株式会社 動画像符号化装置および動画像符号化制御方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3085465B2 (ja) * 1989-10-31 2000-09-11 オリンパス光学工業株式会社 画像データの符号化装置および符号化方法
JP3614448B2 (ja) * 1993-07-22 2005-01-26 日本放送協会 画像信号符号化多重方法及びその装置
US5563549A (en) * 1995-03-17 1996-10-08 Maxim Integrated Products, Inc. Low power trim circuit and method
US5650860A (en) * 1995-12-26 1997-07-22 C-Cube Microsystems, Inc. Adaptive quantization
TW369747B (en) * 1997-01-16 1999-09-11 Matsushita Electric Ind Co Ltd Image encoding device and the method
US5949490A (en) * 1997-07-08 1999-09-07 Tektronix, Inc. Distributing video buffer rate control over a parallel compression architecture
US6434196B1 (en) * 1998-04-03 2002-08-13 Sarnoff Corporation Method and apparatus for encoding video information
US6563549B1 (en) * 1998-04-03 2003-05-13 Sarnoff Corporation Method and apparatus for adaptively encoding an information stream
JP3395892B2 (ja) * 1999-05-06 2003-04-14 日本電気株式会社 動画像符号化装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2011138900A1 (ja) * 2010-05-06 2013-07-22 日本電信電話株式会社 映像符号化制御方法および装置
JP5584757B2 (ja) * 2010-05-06 2014-09-03 日本電信電話株式会社 映像符号化制御方法および装置
US9179154B2 (en) 2010-05-06 2015-11-03 Nippon Telegraph And Telephone Corporation Video encoding control method and apparatus
US9179165B2 (en) 2010-05-07 2015-11-03 Nippon Telegraph And Telephone Corporation Video encoding control method, video encoding apparatus and video encoding program

Also Published As

Publication number Publication date
US20020009138A1 (en) 2002-01-24
JP3889552B2 (ja) 2007-03-07
US6940902B2 (en) 2005-09-06

Similar Documents

Publication Publication Date Title
US6229849B1 (en) Coding device and method
EP2403248B1 (en) Moving picture encoding device, moving picture encoding method, and moving picture encoding computer program
US20090046778A1 (en) Bit rate control method and apparatus
US20010046263A1 (en) Video encoding apparatus that adjusts code amount by skipping encoding of image data
JP4358215B2 (ja) 動画像符号化装置及びその方法
JP2003018603A (ja) 動画像符号化方法及び装置
JP3259702B2 (ja) 動画像可変ビットレート符号化装置および方法
US20130294502A1 (en) Motion video encoding apparatus, motion video encoding method, and motion video encoding computer program
JP2008306705A (ja) イントラピクチャーのみを利用した動画シーケンスの符号化時のビット率制御方法及び装置
JP5128389B2 (ja) 動画像符号化装置及び動画像符号化方法
JP3907875B2 (ja) 符号化レート制御装置及び情報符号化装置
JP2006295535A (ja) 動画像符号化装置および方法
US6226326B1 (en) Coding device and coding method
JP2001028753A (ja) 動画像符号化装置及びその方法
JP3889552B2 (ja) 符号量割り当て装置および方法
JP2002199392A (ja) 映像符号化方法および装置
JP4826533B2 (ja) 画像処理装置および画像処理方法、プログラム、並びに、記録媒体
JP2004328150A (ja) 動画像符号化装置及び方法
KR100962761B1 (ko) 화상 처리 장치, 화상 처리 방법, 및 기록 매체
US20090213929A1 (en) Transcoder
JP4193080B2 (ja) 符号化装置及び方法
JP4399794B2 (ja) 画像符号化装置及び画像符号化方法
JPH114445A (ja) 画像符号化装置および方法
JP2005033599A (ja) 符号化装置、および、符号化方法、並びに、プログラム
JP4582710B2 (ja) 動画像符号化装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060502

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060905

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061128

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20061130

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101208

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101208

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111208

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121208

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees