JPH09294267A - 画像圧縮符号化装置 - Google Patents
画像圧縮符号化装置Info
- Publication number
- JPH09294267A JPH09294267A JP10507896A JP10507896A JPH09294267A JP H09294267 A JPH09294267 A JP H09294267A JP 10507896 A JP10507896 A JP 10507896A JP 10507896 A JP10507896 A JP 10507896A JP H09294267 A JPH09294267 A JP H09294267A
- Authority
- JP
- Japan
- Prior art keywords
- generated
- picture
- bits
- encoding
- coding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 本発明は、画像の符号化の困難さに応じて符
号化の発生ビットを制御して符号化劣化の少ない画像符
号化方法および装置を提供することを目的とする。 【解決手段】 符号化困難さ処理部4は、1ピクチャー
データを解析して1ピクチャー分の符号化の困難さ指標
を算出し、レート制御部6へ送る。レート制御部6は、
ピクチャー毎の目標発生ビット数をその困難さ指標に応
じて変更し、全体のビット数は、数GOP程度内で調整
する。
号化の発生ビットを制御して符号化劣化の少ない画像符
号化方法および装置を提供することを目的とする。 【解決手段】 符号化困難さ処理部4は、1ピクチャー
データを解析して1ピクチャー分の符号化の困難さ指標
を算出し、レート制御部6へ送る。レート制御部6は、
ピクチャー毎の目標発生ビット数をその困難さ指標に応
じて変更し、全体のビット数は、数GOP程度内で調整
する。
Description
【0001】
【発明の属する技術分野】本発明は、映像信号等の画像
のディジタル圧縮符号化方法及び装置に関するものであ
り、特に、符号化する際の量子化幅の制御、発生ビット
数の制御等に関するものである。
のディジタル圧縮符号化方法及び装置に関するものであ
り、特に、符号化する際の量子化幅の制御、発生ビット
数の制御等に関するものである。
【0002】
【従来の技術】従来のディジタル圧縮符号化としては、
例えばISO/IEC 13818-2(通称、MPEG2)にディジ
タル圧縮符号化データの国際標準フォーマットがあり、
その復号方法が示されている。また、そのフォーマット
に符号化する代表的な方法としては、ISO-IEC/JTC/SC29
/WG11 N0328の"Test Model 3"にその記述がある。
例えばISO/IEC 13818-2(通称、MPEG2)にディジ
タル圧縮符号化データの国際標準フォーマットがあり、
その復号方法が示されている。また、そのフォーマット
に符号化する代表的な方法としては、ISO-IEC/JTC/SC29
/WG11 N0328の"Test Model 3"にその記述がある。
【0003】図11は、従来のMPEG2ビデオ符号化
装置の構成を示したものである。同図において、101
は入力ビデオ信号を符号化する順番にピクチャを並び替
える画像並び替え部、102はピクチャデータを符号化
する単位であるマクロブロックに変換する走査変換部、
103は入力マクロブロックとその画像データに対する
予測値との差分を求める差分部、104はDCT変換処
理部、105は重みづけ量子化処理部、106は可変長
符号化部、107は逆量子化部、108は逆DCT処理
部、109は動き補償付き予測処理部、110はモード
判定部、111は動き検出処理部、112はレート制御
部、113はエンコーダ送出バッファ、114は加算処
理部である。
装置の構成を示したものである。同図において、101
は入力ビデオ信号を符号化する順番にピクチャを並び替
える画像並び替え部、102はピクチャデータを符号化
する単位であるマクロブロックに変換する走査変換部、
103は入力マクロブロックとその画像データに対する
予測値との差分を求める差分部、104はDCT変換処
理部、105は重みづけ量子化処理部、106は可変長
符号化部、107は逆量子化部、108は逆DCT処理
部、109は動き補償付き予測処理部、110はモード
判定部、111は動き検出処理部、112はレート制御
部、113はエンコーダ送出バッファ、114は加算処
理部である。
【0004】以上のように構成された従来のMPEG2
ビデオ符号化装置について、以下その動作を説明する。
ビデオ符号化装置について、以下その動作を説明する。
【0005】まず最初に、符号化の際の画像のデータ構
造を図12を用いて説明する。符号化されるデータの各
ピクチャーは、マクロブロックに分割されて符号化され
る。このマクロブロックは、16×16画素の領域のデ
ータであり、さらに輝度および色差信号についてそれぞ
れ基本符号化処理単位である8×8のブロックに分けら
れ符号化される。また、マクロブロックにおいて、マク
ロブロック内のブロックの符号化方法および量子化幅等
を決定する。
造を図12を用いて説明する。符号化されるデータの各
ピクチャーは、マクロブロックに分割されて符号化され
る。このマクロブロックは、16×16画素の領域のデ
ータであり、さらに輝度および色差信号についてそれぞ
れ基本符号化処理単位である8×8のブロックに分けら
れ符号化される。また、マクロブロックにおいて、マク
ロブロック内のブロックの符号化方法および量子化幅等
を決定する。
【0006】スライスは、複数のマクロブロックを含む
データ単位で複数のスライスで1つのピクチャーを構成
する。ピクチャーは、その符号化方法として、ピクチャ
ー内で符号化するピクチャー(以後、Iピクチャーと称
する)、時間的に過去のピクチャーから予測符号化する
ピクチャー(以後、Pピクチャーと称する)、時間的に
過去と未来の両方のピクチャーから予測符号化するピク
チャー(以後、Bピクチャーと称する)がある。
データ単位で複数のスライスで1つのピクチャーを構成
する。ピクチャーは、その符号化方法として、ピクチャ
ー内で符号化するピクチャー(以後、Iピクチャーと称
する)、時間的に過去のピクチャーから予測符号化する
ピクチャー(以後、Pピクチャーと称する)、時間的に
過去と未来の両方のピクチャーから予測符号化するピク
チャー(以後、Bピクチャーと称する)がある。
【0007】図12におけるピクチャーの配置は、その
典型的な例であり、最初のIピクチャーを用いて3枚先
のピクチャー(Pピクチャー)を予測符号化し、その間
に含まれるピクチャー(Bピクチャー)を両側予測して
いる。したがって、符号化する場合には、最初にIピク
チャーを符号化し、次にPピクチャー、ついでBピクチ
ャー、と本来の時間方向の並びを変更して符号化する必
要がある。
典型的な例であり、最初のIピクチャーを用いて3枚先
のピクチャー(Pピクチャー)を予測符号化し、その間
に含まれるピクチャー(Bピクチャー)を両側予測して
いる。したがって、符号化する場合には、最初にIピク
チャーを符号化し、次にPピクチャー、ついでBピクチ
ャー、と本来の時間方向の並びを変更して符号化する必
要がある。
【0008】さらに、Iピクチャーから始まる複数のピ
クチャーでもってGOP(グループオブピクチャー)を
構成し、さらに任意の数のGOPで1つのビデオシーケ
ンスを構成する。
クチャーでもってGOP(グループオブピクチャー)を
構成し、さらに任意の数のGOPで1つのビデオシーケ
ンスを構成する。
【0009】以上のようなデータ構造のもと、図11に
戻ってその動作を説明する。入力信号は、画像並び替え
部101に入力される。入力画像の各ピクチャーは、符
号化する順番に順序が入れ替えられる。画像並び替え部
101の出力は走査線変換処理部102に入力され、走
査線変換処理部102は、入力された信号を16×16
画素領域のマクロブロックデータ単位に分割して差分部
103に送る。差分部103では、動き補償付き予測処
理部109からの予測値との差分がとられ、予測誤差が
求められる。予測誤差値は、DCT変換処理部104で
8×8ブロックごとにDCT変換が行われ、各変換係数
は、重みづけ量子化処理部105において量子化処理さ
れ、量子化データは可変長符号化106で可変長符号化
されて圧縮符号化データになる。圧縮符号化データは、
所望の伝送レートで伝送するために一端エンコーダ送出
バッファ113に蓄えられたのち出力される。
戻ってその動作を説明する。入力信号は、画像並び替え
部101に入力される。入力画像の各ピクチャーは、符
号化する順番に順序が入れ替えられる。画像並び替え部
101の出力は走査線変換処理部102に入力され、走
査線変換処理部102は、入力された信号を16×16
画素領域のマクロブロックデータ単位に分割して差分部
103に送る。差分部103では、動き補償付き予測処
理部109からの予測値との差分がとられ、予測誤差が
求められる。予測誤差値は、DCT変換処理部104で
8×8ブロックごとにDCT変換が行われ、各変換係数
は、重みづけ量子化処理部105において量子化処理さ
れ、量子化データは可変長符号化106で可変長符号化
されて圧縮符号化データになる。圧縮符号化データは、
所望の伝送レートで伝送するために一端エンコーダ送出
バッファ113に蓄えられたのち出力される。
【0010】一方、重みづけ量子化処理部105で量子
化されたデータは、予測画像を生成させるために、逆量
子化部107、逆DCT処理部108で再生処理され、
動き補償付き予測部109で予測値が算出されて差分部
103に入力される。動き検出部111は、マクロブロ
ック毎の動きベクトルを算出し、動き補償付き予測処理
部109に入力するとともに可変長符号化処理部106
に送る。レート制御部112は、可変長符号化処理部1
06から生成されるビットストリームの発生ビット数と
目標ビットレートから換算した目標の発生ビット数を比
較し、最終的に目標のビット数で符号化が完了するよう
に重みづけ量子化部105の量子化幅を制御する。
化されたデータは、予測画像を生成させるために、逆量
子化部107、逆DCT処理部108で再生処理され、
動き補償付き予測部109で予測値が算出されて差分部
103に入力される。動き検出部111は、マクロブロ
ック毎の動きベクトルを算出し、動き補償付き予測処理
部109に入力するとともに可変長符号化処理部106
に送る。レート制御部112は、可変長符号化処理部1
06から生成されるビットストリームの発生ビット数と
目標ビットレートから換算した目標の発生ビット数を比
較し、最終的に目標のビット数で符号化が完了するよう
に重みづけ量子化部105の量子化幅を制御する。
【0011】以下、レート制御部112内での処理を説
明する。まず最初に、目標ビットレートから換算したG
OPあたりの目標とするビット数をGとし、符号化中、
本GOP中で残されたビット数をR、直前に符号化した
I、P、Bピクチャーの画像の発生ビット数をSI、S
P、SB、そのときの量子化パラメータの平均値をそれぞ
れQI、QP、QB、符号化の困難さをXI=SI×QI、X
P=SP×QP、XB=SB×QBと定義し、各ピクチャーを
符号化する場合の目標ビット数は、そのピクチャーが
I、P、Bのどのピクチャーかによって、
明する。まず最初に、目標ビットレートから換算したG
OPあたりの目標とするビット数をGとし、符号化中、
本GOP中で残されたビット数をR、直前に符号化した
I、P、Bピクチャーの画像の発生ビット数をSI、S
P、SB、そのときの量子化パラメータの平均値をそれぞ
れQI、QP、QB、符号化の困難さをXI=SI×QI、X
P=SP×QP、XB=SB×QBと定義し、各ピクチャーを
符号化する場合の目標ビット数は、そのピクチャーが
I、P、Bのどのピクチャーかによって、
【0012】
【数1】
【0013】
【数2】
【0014】
【数3】
【0015】で与える。ただし、Kp、Kbは定数、N
P、NBはまだ符号化されていないGOPにある残りのP
ピクチャーおよびBピクチャーの数である。Rの値は、
そのピクチャーでの発生ビット数をSとすると、R=R
−Sで更新され、GOPの最初でR=R+Gで更新され
る。すなわち、GOPあたりの発生ビット数を決め、そ
れを各ピクチャーあたりにその構成比に応じてビットを
割り当て符号化し、各ピクチャー毎にその発生ビット数
をもとめ、その値をRから差し引いて再び各ピクチャー
毎にその目標の発生ビット数を修正して割り当る。そし
て、さらに、GOP単位で目標ビット数からのずれを次
のGOPの目標発生ビット数に割り当てる。
P、NBはまだ符号化されていないGOPにある残りのP
ピクチャーおよびBピクチャーの数である。Rの値は、
そのピクチャーでの発生ビット数をSとすると、R=R
−Sで更新され、GOPの最初でR=R+Gで更新され
る。すなわち、GOPあたりの発生ビット数を決め、そ
れを各ピクチャーあたりにその構成比に応じてビットを
割り当て符号化し、各ピクチャー毎にその発生ビット数
をもとめ、その値をRから差し引いて再び各ピクチャー
毎にその目標の発生ビット数を修正して割り当る。そし
て、さらに、GOP単位で目標ビット数からのずれを次
のGOPの目標発生ビット数に割り当てる。
【0016】各ピクチャーの目標発生ビットから量子化
パラメータを制御する方法を説明する。I、P、Bピク
チャーについて仮想バッファを仮定し、i番目のマクロ
ブロックを符号化するときの各マクロブロックでの目標
発生ビット数を一定として、各仮想バッファのデータ残
量をdIi、dPi、dBiとすると、
パラメータを制御する方法を説明する。I、P、Bピク
チャーについて仮想バッファを仮定し、i番目のマクロ
ブロックを符号化するときの各マクロブロックでの目標
発生ビット数を一定として、各仮想バッファのデータ残
量をdIi、dPi、dBiとすると、
【0017】
【数4】
【0018】
【数5】
【0019】
【数6】
【0020】で示される。ここでBiはiを含んだそれ
までのすべてのマクロブロックの発生ビット数、MB_
cntは1ピクチャーあたりに含まれるマクロブロック
の数、dI0、dP0、dB0はピクチャーの先頭でのバ
ッファ残量の初期値である。
までのすべてのマクロブロックの発生ビット数、MB_
cntは1ピクチャーあたりに含まれるマクロブロック
の数、dI0、dP0、dB0はピクチャーの先頭でのバ
ッファ残量の初期値である。
【0021】以上の式で計算されたバッファ残量を用い
て、i番目のマクロブロックでの量子化パラメータQi
は、
て、i番目のマクロブロックでの量子化パラメータQi
は、
【0022】
【数7】
【0023】ただし、r=2×(目標ビットレート)/
(ピクチャーレート)である。以上の方法により各マク
ロブロック毎に量子化パラメータを算出し、量子化幅を
制御する。
(ピクチャーレート)である。以上の方法により各マク
ロブロック毎に量子化パラメータを算出し、量子化幅を
制御する。
【0024】こうすることで、目標のビットレートに対
して、ピクチャー単位でその目標の発生ビット数を設定
し、そのピクチャーが含まれるGOP単位で発生ビット
数が目標レートにあうように目標発生ビット数を制限
し、さらに各マクロブロックでの発生ビット数が一定と
した場合の発生ビット数との比較により算出した仮想バ
ッファ残量に比例させて量子化パラメータを制御するこ
とにより、ピクチャーの目標発生ビット数に近い符号発
生量になるように制御できる。
して、ピクチャー単位でその目標の発生ビット数を設定
し、そのピクチャーが含まれるGOP単位で発生ビット
数が目標レートにあうように目標発生ビット数を制限
し、さらに各マクロブロックでの発生ビット数が一定と
した場合の発生ビット数との比較により算出した仮想バ
ッファ残量に比例させて量子化パラメータを制御するこ
とにより、ピクチャーの目標発生ビット数に近い符号発
生量になるように制御できる。
【0025】
【発明が解決しようとする課題】しかしながら前記のよ
うな構成は、ピクチャー単位でその目標の発生ビット数
を設定し、そのピクチャーが含まれるGOP単位で発生
ビット数が目標レートにあうように目標発生ビット数を
制限するものである。したがって、シーンチェンジや入
力画像内での物体の動きの増加などにより符号化の際の
困難さが増加した場合、それまでの画像とほぼ同じビッ
ト数で符号化しようとするため、急激に量子化幅を大き
くするように制御され、その結果、画像が急激に劣化し
てしまうという問題点があった。
うな構成は、ピクチャー単位でその目標の発生ビット数
を設定し、そのピクチャーが含まれるGOP単位で発生
ビット数が目標レートにあうように目標発生ビット数を
制限するものである。したがって、シーンチェンジや入
力画像内での物体の動きの増加などにより符号化の際の
困難さが増加した場合、それまでの画像とほぼ同じビッ
ト数で符号化しようとするため、急激に量子化幅を大き
くするように制御され、その結果、画像が急激に劣化し
てしまうという問題点があった。
【0026】また、その際、GOPで目標発生ビット数
よりも実際の発生ビット数が極端に増えた場合、次のG
OPの目標発生ビット数がこれを吸収するよう動作する
ため、そのGOPでの画質が劣化してしまう問題があっ
た。
よりも実際の発生ビット数が極端に増えた場合、次のG
OPの目標発生ビット数がこれを吸収するよう動作する
ため、そのGOPでの画質が劣化してしまう問題があっ
た。
【0027】また、1ピクチャーあたりの発生ビット数
制御を、各マクロブロックでの発生ビット数が一定とし
た場合の発生ビット数との比較により算出した仮想バッ
ファ残量に比例させて量子化パラメータを制御すること
により行うため、たとえば、ピクチャー中の後半部分に
複雑な絵柄等が存在した場合、前半の簡単な部分に多く
のビットが割り当てられしまい、後半部で予定以上の発
生ビット数になってしまったり、逆に前半部に複雑な絵
柄がある場合には、発生ビット数が複雑な絵柄では抑制
されてしまい、後半部にそのビットが割り当てられてし
まい、1枚のピクチャー中で本来割り当てられるべき部
分でビットが割り当てられないという問題点があった。
制御を、各マクロブロックでの発生ビット数が一定とし
た場合の発生ビット数との比較により算出した仮想バッ
ファ残量に比例させて量子化パラメータを制御すること
により行うため、たとえば、ピクチャー中の後半部分に
複雑な絵柄等が存在した場合、前半の簡単な部分に多く
のビットが割り当てられしまい、後半部で予定以上の発
生ビット数になってしまったり、逆に前半部に複雑な絵
柄がある場合には、発生ビット数が複雑な絵柄では抑制
されてしまい、後半部にそのビットが割り当てられてし
まい、1枚のピクチャー中で本来割り当てられるべき部
分でビットが割り当てられないという問題点があった。
【0028】また、これらの問題点を解決するための方
法として、1度全画像を符号化して符号化する場合の困
難さなどのパラメータを算出することにより、画像全体
にわたって最適なビット配分を求め、再度符号化し直す
方法があるが、これではカメラでの撮影時など実時間で
の符号化などを行うことが困難であるという問題点があ
った。
法として、1度全画像を符号化して符号化する場合の困
難さなどのパラメータを算出することにより、画像全体
にわたって最適なビット配分を求め、再度符号化し直す
方法があるが、これではカメラでの撮影時など実時間で
の符号化などを行うことが困難であるという問題点があ
った。
【0029】本発明は前記問題点を解決し、全画像を一
端符号化することが困難である場合においても、符号化
の困難さの変化によって画質が急激に劣化することがな
く、また、設定レートにおいて最も画質がよくなるよう
に量子化幅を制御できる画像符号化方法および装置を提
供することを目的とする。
端符号化することが困難である場合においても、符号化
の困難さの変化によって画質が急激に劣化することがな
く、また、設定レートにおいて最も画質がよくなるよう
に量子化幅を制御できる画像符号化方法および装置を提
供することを目的とする。
【0030】
【課題を解決するための手段】上記目的を達成するため
に、本発明は、目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数から目標ビットレートに基
づき量子化幅を修正し符号化する画像符号化において、
前記各中間点においてそれまでの発生ビット数と目標ビ
ットレートより換算した発生ビット数の差である発生ビ
ット誤差を算出し、前記発生ビット誤差を少なくとも2
以上の数で除算したビット数を前記目標ビットレートよ
り算出される次の中間地点までの発生ビット数より減算
したビット数を次の中間点までの発生ビット数として量
子化幅を制御するものである。また、映像信号中の複数
ピクチャからなるグループオブピクチャの境界を中間点
とするものでる。
に、本発明は、目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数から目標ビットレートに基
づき量子化幅を修正し符号化する画像符号化において、
前記各中間点においてそれまでの発生ビット数と目標ビ
ットレートより換算した発生ビット数の差である発生ビ
ット誤差を算出し、前記発生ビット誤差を少なくとも2
以上の数で除算したビット数を前記目標ビットレートよ
り算出される次の中間地点までの発生ビット数より減算
したビット数を次の中間点までの発生ビット数として量
子化幅を制御するものである。また、映像信号中の複数
ピクチャからなるグループオブピクチャの境界を中間点
とするものでる。
【0031】また、本発明は、目標のビットレートを設
定し、符号化のあらかじめ決めた各中間点においてそれ
までに符号化によって発生した発生ビット数から目標ビ
ットレートに基づき量子化幅を修正し符号化する画像符
号化において、各ピクチャ毎の符号化の困難さを示す困
難さ指標の基準値を設定し、目標ビットレートから算出
される現ピクチャを符号化する際の目標発生ビット数を
困難さ指標の基準値のピクチャーを符号化する際の基準
発生ビット数とし、現ピクチャの困難さ指標を算出し、
現ピクチャーの符号化の際の目標発生ビット数と基準発
生ビット数間の違いが前記困難さ指標の基準値との違い
に相関するように現ピクチャーの符号化の際の目標発生
ビット数を設定するものである。
定し、符号化のあらかじめ決めた各中間点においてそれ
までに符号化によって発生した発生ビット数から目標ビ
ットレートに基づき量子化幅を修正し符号化する画像符
号化において、各ピクチャ毎の符号化の困難さを示す困
難さ指標の基準値を設定し、目標ビットレートから算出
される現ピクチャを符号化する際の目標発生ビット数を
困難さ指標の基準値のピクチャーを符号化する際の基準
発生ビット数とし、現ピクチャの困難さ指標を算出し、
現ピクチャーの符号化の際の目標発生ビット数と基準発
生ビット数間の違いが前記困難さ指標の基準値との違い
に相関するように現ピクチャーの符号化の際の目標発生
ビット数を設定するものである。
【0032】また、本発明は、目標のビットレートを設
定し、符号化のあらかじめ決めた各中間点においてそれ
までに符号化によって発生した発生ビット数から目標ビ
ットレートに基づき量子化幅を修正し符号化する画像符
号化において、各中間点を複数の符号化ブロックからな
るマクロブロック毎におき、マクロブロックの符号化の
困難さ指標を計算し、1ピクチャ内の各マクロブロック
の符号化の困難さ指標の比率にしたがってピクチャ全体
の発生ビット数から各マクロブロックの符号化発生ビッ
ト数を算出し、仮装バッファのデータ残量を示すバッフ
ァフルネス値より前記符号化発生ビット数を減算すると
ともに、実際に符号化した結果の発生符号量を加算した
値を次のマクロブロックを符号化する際のバッファフル
ネスとして算出し、算出したバッファフルネス値に比例
して量子化幅を設定するものである。
定し、符号化のあらかじめ決めた各中間点においてそれ
までに符号化によって発生した発生ビット数から目標ビ
ットレートに基づき量子化幅を修正し符号化する画像符
号化において、各中間点を複数の符号化ブロックからな
るマクロブロック毎におき、マクロブロックの符号化の
困難さ指標を計算し、1ピクチャ内の各マクロブロック
の符号化の困難さ指標の比率にしたがってピクチャ全体
の発生ビット数から各マクロブロックの符号化発生ビッ
ト数を算出し、仮装バッファのデータ残量を示すバッフ
ァフルネス値より前記符号化発生ビット数を減算すると
ともに、実際に符号化した結果の発生符号量を加算した
値を次のマクロブロックを符号化する際のバッファフル
ネスとして算出し、算出したバッファフルネス値に比例
して量子化幅を設定するものである。
【0033】
【発明の実施の形態】以下、本発明の実施の形態につい
て図1から図7を用いて説明する。
て図1から図7を用いて説明する。
【0034】図1は本発明の一実施形態に係る画像圧縮
符号化装置のブロック図である。図1において、1は入
力画像をその符号化の順に並び替える画像並び替え処理
部、2は1フレーム遅延処理部である。3は図11に示
した従来例における、走査変換部102、差分部10
3、DCT変換処理部104、重みづけ量子化処理部1
05、可変長符号化部106、逆量子化部107、逆D
CT処理部108、動き補償付き予測処理部109、モ
ード判定部110、加算処理部114、において符号化
処理を行う基本符号化処理部である。4は入力画像を解
析し符号化の困難さを算出する符号化困難さ算出処理
部、5は動き検出処理部、6はレート制御部、7はエン
コーダ送出バッファである。
符号化装置のブロック図である。図1において、1は入
力画像をその符号化の順に並び替える画像並び替え処理
部、2は1フレーム遅延処理部である。3は図11に示
した従来例における、走査変換部102、差分部10
3、DCT変換処理部104、重みづけ量子化処理部1
05、可変長符号化部106、逆量子化部107、逆D
CT処理部108、動き補償付き予測処理部109、モ
ード判定部110、加算処理部114、において符号化
処理を行う基本符号化処理部である。4は入力画像を解
析し符号化の困難さを算出する符号化困難さ算出処理
部、5は動き検出処理部、6はレート制御部、7はエン
コーダ送出バッファである。
【0035】以上のような構成において、以下その動作
を説明する。入力画像データは、画像並び替え処理部1
において、そののち符号化する順に並び替えられる。動
き検出部5は、Pピクチャー、Bピクチャーについてそ
れぞれ参照ピクチャーとの比較によって、各マクロブロ
ックに対する動きベクトルを算出する。この算出結果は
基本符号化処理部3に送られ、動き補償付きの予測画像
生成に用いられる。また、動きベクトル算出結果は、符
号化困難さ算出処理部4にも送られる。
を説明する。入力画像データは、画像並び替え処理部1
において、そののち符号化する順に並び替えられる。動
き検出部5は、Pピクチャー、Bピクチャーについてそ
れぞれ参照ピクチャーとの比較によって、各マクロブロ
ックに対する動きベクトルを算出する。この算出結果は
基本符号化処理部3に送られ、動き補償付きの予測画像
生成に用いられる。また、動きベクトル算出結果は、符
号化困難さ算出処理部4にも送られる。
【0036】図2は符号化困難さ算出処理部4の構成図
である。図2において、8は予測誤差画像生成部、9は
DCT処理部、10は量子化部、11は可変長符号化部
(VLC)、12は発生ビット数カウンターである。画
像並び替え処理部1からの画像データは、動きベクトル
信号とともに予測誤差画像生成部8に入力される。予測
誤差画像生成部8では、入力画像がIピクチャーの場合
は、そのまま画像を保持し、Pピクチャーの場合は動き
検出部5からの動きベクトルにしたがって、予測した画
像と入力画像との差をとって予測誤差画像を生成する。
同様にBピクチャーの場合は両側予測結果より予測誤差
画像を生成する。
である。図2において、8は予測誤差画像生成部、9は
DCT処理部、10は量子化部、11は可変長符号化部
(VLC)、12は発生ビット数カウンターである。画
像並び替え処理部1からの画像データは、動きベクトル
信号とともに予測誤差画像生成部8に入力される。予測
誤差画像生成部8では、入力画像がIピクチャーの場合
は、そのまま画像を保持し、Pピクチャーの場合は動き
検出部5からの動きベクトルにしたがって、予測した画
像と入力画像との差をとって予測誤差画像を生成する。
同様にBピクチャーの場合は両側予測結果より予測誤差
画像を生成する。
【0037】次に、DCT処理部9にてブロック毎にD
CT処理をおこない、量子化部10で量子化した後、可
変長符号化部11で符号化する。この際、量子化部10
は、常に一定の量子化パラメータで符号化する。量子化
パラメータの値は任意の値でよいが、ここではq_scale
(量子化パラメータ)=10として量子化する。発生ビッ
ト数カウンター12では、符号化されたデータのビット
数をマクロブロック毎に算出し、固定のq_scaleの値と
乗算して、マクロブロック毎の符号化の困難さを示す信
号である"complexity"を算出し、さらにこれらを合計す
ることによりピクチャーあたりの"complexity"を算出
し、レート制御部6に送出する。
CT処理をおこない、量子化部10で量子化した後、可
変長符号化部11で符号化する。この際、量子化部10
は、常に一定の量子化パラメータで符号化する。量子化
パラメータの値は任意の値でよいが、ここではq_scale
(量子化パラメータ)=10として量子化する。発生ビッ
ト数カウンター12では、符号化されたデータのビット
数をマクロブロック毎に算出し、固定のq_scaleの値と
乗算して、マクロブロック毎の符号化の困難さを示す信
号である"complexity"を算出し、さらにこれらを合計す
ることによりピクチャーあたりの"complexity"を算出
し、レート制御部6に送出する。
【0038】一方、入力画像は、1フレーム遅延処理部
2において、動き検出部5および符号化困難算出処理部
4での処理を行うための遅延量として1ピクチャー分遅
延されて、基本符号化処理部3へ入力される。基本符号
化処理部3は、従来例で説明したのと同様の基本的な符
号化処理をレート制御部6からの量子化パラメータ値に
したがった量子化幅で符号化し、MPEG標準に準拠し
たビットストリームを生成する。
2において、動き検出部5および符号化困難算出処理部
4での処理を行うための遅延量として1ピクチャー分遅
延されて、基本符号化処理部3へ入力される。基本符号
化処理部3は、従来例で説明したのと同様の基本的な符
号化処理をレート制御部6からの量子化パラメータ値に
したがった量子化幅で符号化し、MPEG標準に準拠し
たビットストリームを生成する。
【0039】レート制御部6は、基本符号化処理部3か
らのビットストリームの発生ビット数と符号化困難さ算
出処理部4からの"complexity"、および目標ビットレー
ト数をもとに量子化パラメータであるq_scaleを決定
し、基本符号化処理部3での符号化の際の量子化幅を決
定する。
らのビットストリームの発生ビット数と符号化困難さ算
出処理部4からの"complexity"、および目標ビットレー
ト数をもとに量子化パラメータであるq_scaleを決定
し、基本符号化処理部3での符号化の際の量子化幅を決
定する。
【0040】図3はレート制御部6の構成図である。1
3は基本符号化処理部3で生成された1GOP分のビッ
トストリームの発生ビット数をカウントする発生ビット
カウンター、14は1ピクチャー分のビット発生数をカ
ウントする発生ビットカウンター、15は1マクロブロ
ック分のビット発生数をカウントする発生ビットカウン
ター、16は制御部である。制御部16は、発生ビット
カウンター13、14、15と目標ビットレート、及び
ビデオデコーダデコーダにビットストリームを送る際の
最大伝送レートDec_R、符号化困難さ検出処理部4から
の"complexcity"に基づいてマクロブロックタイミング
毎に"q_scale"値を生成する。
3は基本符号化処理部3で生成された1GOP分のビッ
トストリームの発生ビット数をカウントする発生ビット
カウンター、14は1ピクチャー分のビット発生数をカ
ウントする発生ビットカウンター、15は1マクロブロ
ック分のビット発生数をカウントする発生ビットカウン
ター、16は制御部である。制御部16は、発生ビット
カウンター13、14、15と目標ビットレート、及び
ビデオデコーダデコーダにビットストリームを送る際の
最大伝送レートDec_R、符号化困難さ検出処理部4から
の"complexcity"に基づいてマクロブロックタイミング
毎に"q_scale"値を生成する。
【0041】図4は、制御部16での"q_scale"算出ア
ルゴリズムの説明図である。j番目のGOPを符号化す
るとして最初に直前のGOPでのビット発生数GOP_
Bj-1を発生ビットカウンター13より読み取る。ただ
し、最初のGOPでは0とする。次に、j番目のGOP
を符号化する直前の発生ビット数と目標ビットレートか
ら、全GOPが同じビット数を発生するとして算出でき
る発生ビット数Gとの誤差であるGOPレベル目標発生
ビット数誤差DIF_Gjを算出する。すなわち、
ルゴリズムの説明図である。j番目のGOPを符号化す
るとして最初に直前のGOPでのビット発生数GOP_
Bj-1を発生ビットカウンター13より読み取る。ただ
し、最初のGOPでは0とする。次に、j番目のGOP
を符号化する直前の発生ビット数と目標ビットレートか
ら、全GOPが同じビット数を発生するとして算出でき
る発生ビット数Gとの誤差であるGOPレベル目標発生
ビット数誤差DIF_Gjを算出する。すなわち、
【0042】
【数8】
【0043】ただし、DIF_G1 = 0 Gは、例えば15フレームで構成されたGOPであると
きは、目標ビットレートの2分の1である。
きは、目標ビットレートの2分の1である。
【0044】次に、j番目のGOPを符号化する場合の
目標発生ビット数R(j)を算出する。R(j)は、以
下の式で算出する。
目標発生ビット数R(j)を算出する。R(j)は、以
下の式で算出する。
【0045】
【数9】
【0046】ただし、Tは2以上の定数である。Tの値
は2以上の値で効果があるが、GOPが15フレーム程
度であり、数秒間レベルでのビット調整を許すのであれ
ば、10から30程度、さらに数分レベルでの発生ビッ
ト数調整を許す場合は60程度の値としても効果があ
る。ここでは、T=20とする。
は2以上の値で効果があるが、GOPが15フレーム程
度であり、数秒間レベルでのビット調整を許すのであれ
ば、10から30程度、さらに数分レベルでの発生ビッ
ト数調整を許す場合は60程度の値としても効果があ
る。ここでは、T=20とする。
【0047】次にIピクチャー、Pピクチャー、Bピク
チャーの各ピクチャーにおける目標発生ビット数の暫定
値TTI、TTP、TTBを以下の式に基づき算出する。
チャーの各ピクチャーにおける目標発生ビット数の暫定
値TTI、TTP、TTBを以下の式に基づき算出する。
【0048】
【数10】
【0049】
【数11】
【0050】
【数12】
【0051】ここで、XI、XP、XBは、I、P、Bピ
クチャーでの"complexity"の予測値であり、ここでは、
XI、XP、XBの比率のみ必要である。この値は、符号
化困難さ算出処理部4から得られる直前GOPの最後の
I、P、Bピクチャーでの"complexity"を用いることも
できるが、本実施形態では、XI:XP:XBを160:
60:42の固定値とする。また、NP、NBはGOP内
にあるPピクチャー、Bピクチャーの数である。Kp、
Kbは量子化マトリクスから決定する補正用の定数であ
るが、ここではKp=1.0、Kb=1.4とする。すな
わち、各ピクチャーには、その困難さの比によってビッ
ト配分する。
クチャーでの"complexity"の予測値であり、ここでは、
XI、XP、XBの比率のみ必要である。この値は、符号
化困難さ算出処理部4から得られる直前GOPの最後の
I、P、Bピクチャーでの"complexity"を用いることも
できるが、本実施形態では、XI:XP:XBを160:
60:42の固定値とする。また、NP、NBはGOP内
にあるPピクチャー、Bピクチャーの数である。Kp、
Kbは量子化マトリクスから決定する補正用の定数であ
るが、ここではKp=1.0、Kb=1.4とする。すな
わち、各ピクチャーには、その困難さの比によってビッ
ト配分する。
【0052】次に、I,P,Bピクチャーについて基準
となる符号化の困難さである基準"complexity"たるC
I、CP、CBを設定する。設定は、平均q_scale=10に
設定した際に発生ビット数がそれぞれTTI、TTP、T
TBとなる"complexity"とする。ただし、この設定は、
最初のGOPあるいは、目標ビットレートに変更があっ
たときのみ行い、それ以外の場合は以前の値をそのまま
設定値とする。以上の処理がGOPレベルでの算出処理
であり、以下各ピクチャー毎の処理となる。
となる符号化の困難さである基準"complexity"たるC
I、CP、CBを設定する。設定は、平均q_scale=10に
設定した際に発生ビット数がそれぞれTTI、TTP、T
TBとなる"complexity"とする。ただし、この設定は、
最初のGOPあるいは、目標ビットレートに変更があっ
たときのみ行い、それ以外の場合は以前の値をそのまま
設定値とする。以上の処理がGOPレベルでの算出処理
であり、以下各ピクチャー毎の処理となる。
【0053】次に、符号化するピクチャーの平均量子化
パラメータ("q_scale")であるq_picを設定する。こ
れは、符号化するピクチャーによってそれぞれ対応する
基準"complexity"たるCIまたはCPまたはCBをTTIま
たはTTPまたはTTBの発生ビットで符号化した場合の
平均量子化パラメータである。
パラメータ("q_scale")であるq_picを設定する。こ
れは、符号化するピクチャーによってそれぞれ対応する
基準"complexity"たるCIまたはCPまたはCBをTTIま
たはTTPまたはTTBの発生ビットで符号化した場合の
平均量子化パラメータである。
【0054】次に、符号化するピクチャーの目標発生ビ
ット数TI、TP、TBを設定する。設定は、符号化困難
さ算出処理部4からこれより符号化するピクチャーの"c
omplexity"たるC_picを、先に設定した平均量子化パラ
メータq_picで符号化するのに必要なビット数に設定す
る。ただし、目標発生ビット数の上限を以下のように設
定する。
ット数TI、TP、TBを設定する。設定は、符号化困難
さ算出処理部4からこれより符号化するピクチャーの"c
omplexity"たるC_picを、先に設定した平均量子化パラ
メータq_picで符号化するのに必要なビット数に設定す
る。ただし、目標発生ビット数の上限を以下のように設
定する。
【0055】再生側のデコーダバッファ内のデータ残量
をVBV_fullnessとし、初期値を標準デコーダのバッ
ファ容量である1.8Mビット、ピクチャーレートをPi
c_Rとして、ピクチャーを符号化する毎にバッファ残量
を次式で計算する。
をVBV_fullnessとし、初期値を標準デコーダのバッ
ファ容量である1.8Mビット、ピクチャーレートをPi
c_Rとして、ピクチャーを符号化する毎にバッファ残量
を次式で計算する。
【0056】
【数13】
【0057】ただし、B_picは、発生ビットカウンター
14で検出される符号化されたピクチャーの発生ビット
数である。また、R(j)=Dec_Rとしたときの(数1
0)〜(数12)で計算される目標発生ビット数を算出
し、VBV_fullnessとのどちらか小さい方を目標ビッ
ト数の上限とする。
14で検出される符号化されたピクチャーの発生ビット
数である。また、R(j)=Dec_Rとしたときの(数1
0)〜(数12)で計算される目標発生ビット数を算出
し、VBV_fullnessとのどちらか小さい方を目標ビッ
ト数の上限とする。
【0058】暫定の目標発生ビット数から最終の目標発
生ビット数の決定までの処理は図5に示すグラフ上で説
明できる。図5において、横軸は、符号化の困難さを示
す"complexity"であり、縦軸はその時の発生ビット数で
ある。平均量子化パラメータ一定のグラフは、平均量子
化パラメータに比例した傾きをもつ直線となる。最初の
暫定の目標発生ビット数TT0とq_scale=10の曲線と
の交点での"complexity"が基準値となる(図5の位置
1)。グラフ中で直線でない部分は目標発生ビット数の
上限制約と下限制約であり、上限は上記の条件で決定さ
れ、下限は経験的にビットレートが2Mbps以下にな
らないように決定する。次に、符号化困難さ算出部4か
らの値がCC0である場合、CC0でのq_scale=10上
の発生ビット数T0が目標発生ビット数となる(図5の
位置2)。次に、暫定発生ビット数がTT1の場合、T
T1と基準値で決まる点(図5の位置3)を通るq_scale
一定の曲線が引ける。符号化困難さ算出部4からの値が
CC1である場合、先の曲線上のCC1での発生ビット数
T1が目標発生ビット数となる(図5の位置4)。
生ビット数の決定までの処理は図5に示すグラフ上で説
明できる。図5において、横軸は、符号化の困難さを示
す"complexity"であり、縦軸はその時の発生ビット数で
ある。平均量子化パラメータ一定のグラフは、平均量子
化パラメータに比例した傾きをもつ直線となる。最初の
暫定の目標発生ビット数TT0とq_scale=10の曲線と
の交点での"complexity"が基準値となる(図5の位置
1)。グラフ中で直線でない部分は目標発生ビット数の
上限制約と下限制約であり、上限は上記の条件で決定さ
れ、下限は経験的にビットレートが2Mbps以下にな
らないように決定する。次に、符号化困難さ算出部4か
らの値がCC0である場合、CC0でのq_scale=10上
の発生ビット数T0が目標発生ビット数となる(図5の
位置2)。次に、暫定発生ビット数がTT1の場合、T
T1と基準値で決まる点(図5の位置3)を通るq_scale
一定の曲線が引ける。符号化困難さ算出部4からの値が
CC1である場合、先の曲線上のCC1での発生ビット数
T1が目標発生ビット数となる(図5の位置4)。
【0059】図4に戻って、ピクチャーあたりの目標発
生ビット数が決まると、ピクチャー内量子化パラメータ
制御処理でマクロブロック毎のq_scaleが制御される。
生ビット数が決まると、ピクチャー内量子化パラメータ
制御処理でマクロブロック毎のq_scaleが制御される。
【0060】図6はピクチャー内量子化パラメータ制御
処理の説明図である。i番目のマクロブロックでの量子
化パラメータq_scaleの値をMQUANTi、レート制御
用の仮想バッファを定義してi番目のマクロブロックの
符号化前のデータ残量をdiとする。ただし、diの初
期値は、
処理の説明図である。i番目のマクロブロックでの量子
化パラメータq_scaleの値をMQUANTi、レート制御
用の仮想バッファを定義してi番目のマクロブロックの
符号化前のデータ残量をdiとする。ただし、diの初
期値は、
【0061】
【数14】
【0062】ただし、rは反応パラメータであり、本実
施形態の例では次式とする。
施形態の例では次式とする。
【0063】
【数15】
【0064】最初に、ピクチャー全体の困難さ指標C_p
icを読み取る。次にとする。最初にピクチャー全体の困
難さ指標を読み取る。次に、最初のマクロブロックのM
QUANTi値はq_picとする。次からのマクロブロッ
クからは、以下の方法でdiを求める。
icを読み取る。次にとする。最初にピクチャー全体の困
難さ指標を読み取る。次に、最初のマクロブロックのM
QUANTi値はq_picとする。次からのマクロブロッ
クからは、以下の方法でdiを求める。
【0065】まず、直前のマクロブロックでの発生ビッ
ト数B_mb(i-1)を発生ビット数カウンター15より読み
取る。次に、符号化困難さ算出処理部4からの直前のマ
クロブロックの符号化の困難さである"complexity"C_m
b(i-1)より、直前のマクロブロックで発生すると予想さ
れたビット数T_mb(i-1)を次式で求める。
ト数B_mb(i-1)を発生ビット数カウンター15より読み
取る。次に、符号化困難さ算出処理部4からの直前のマ
クロブロックの符号化の困難さである"complexity"C_m
b(i-1)より、直前のマクロブロックで発生すると予想さ
れたビット数T_mb(i-1)を次式で求める。
【0066】
【数16】
【0067】ただし、T_picは、Iピクチャーのときは
TIであり、PピクチャーのときはTPであり、Bピクチ
ャーのときはTBである。diは、次式で算出する。
TIであり、PピクチャーのときはTPであり、Bピクチ
ャーのときはTBである。diは、次式で算出する。
【0068】
【数17】
【0069】次に、MQUANTiを次式で求め、基本
符号化処理部3に送る。
符号化処理部3に送る。
【0070】
【数18】
【0071】以上のマクロブロック毎の量子化マトリク
スの設定をピクチャーの最後まで繰り返す。
スの設定をピクチャーの最後まで繰り返す。
【0072】再び図4に戻って、ピクチャー内量子化パ
ラメータ処理は、GOPの最後までピクチャー毎に繰り
返し行う。
ラメータ処理は、GOPの最後までピクチャー毎に繰り
返し行う。
【0073】以上のレート制御部6の処理によって、基
本符号化処理部3での量子化幅が制御されて符号化さ
れ、エンコーダ送出バッファ7に送られて出力される。
本符号化処理部3での量子化幅が制御されて符号化さ
れ、エンコーダ送出バッファ7に送られて出力される。
【0074】以上のように本実施形態によれば、目標ビ
ットレートから算出されるピクチャー毎の基準となる符
号化困難さに暫定の目標発生ビット数を求め、その基準
値との相対関係で目標発生ビット数を暫定値より修正す
ることにより、シーンチェンジや映像内に動作の激しい
物体等がある場合など、符号化の困難さが急激に増加す
る場合には、それに応じたビット数が割り当てられるこ
とになり、画像の急激な劣化を防止することができる。
ットレートから算出されるピクチャー毎の基準となる符
号化困難さに暫定の目標発生ビット数を求め、その基準
値との相対関係で目標発生ビット数を暫定値より修正す
ることにより、シーンチェンジや映像内に動作の激しい
物体等がある場合など、符号化の困難さが急激に増加す
る場合には、それに応じたビット数が割り当てられるこ
とになり、画像の急激な劣化を防止することができる。
【0075】また、ピクチャー毎の符号化の困難さによ
って発生ビット数を増減させたことによる目標発生ビッ
ト数よりの誤差は、数GOPにわたって修正することに
なるので、その直後の符号化のビット配分の影響は小さ
く、ほぼ同じ画質を保持できる。
って発生ビット数を増減させたことによる目標発生ビッ
ト数よりの誤差は、数GOPにわたって修正することに
なるので、その直後の符号化のビット配分の影響は小さ
く、ほぼ同じ画質を保持できる。
【0076】図7は、一定の符号化困難さの画像中で瞬
間的に符号化困難さが増加した場合のGOP単位での発
生ビット数の変化のイメージを説明した図である。困難
さが一定で十分な時間の後には、一定レートで符号化さ
れる。ところが同図(a)のように、符号化困難さが瞬
間的に増加した場合、そのGOPの発生ビット数は急激
に増加する。例えば、発生ビット数が2倍になったとす
ると、その次のGOPでは、T=20の場合、20分の
1だけ発生ビット数が抑制され、その後指数関数的にビ
ット発生量は回復する。したがって、最も大きい影響を
受ける直後のGOPにおいても20分の1のビット発生
量の抑制にとどまるし、1GOPを0.5とすると10
秒程度後には、ほぼ全体のビットレートは目標のビット
レートに回復する。
間的に符号化困難さが増加した場合のGOP単位での発
生ビット数の変化のイメージを説明した図である。困難
さが一定で十分な時間の後には、一定レートで符号化さ
れる。ところが同図(a)のように、符号化困難さが瞬
間的に増加した場合、そのGOPの発生ビット数は急激
に増加する。例えば、発生ビット数が2倍になったとす
ると、その次のGOPでは、T=20の場合、20分の
1だけ発生ビット数が抑制され、その後指数関数的にビ
ット発生量は回復する。したがって、最も大きい影響を
受ける直後のGOPにおいても20分の1のビット発生
量の抑制にとどまるし、1GOPを0.5とすると10
秒程度後には、ほぼ全体のビットレートは目標のビット
レートに回復する。
【0077】図8は、一定の符号化困難さが続いた後、
やや複雑で一定の符号化困難さのものが続き、再びもと
の符号化困難さが続いた場合の、GOP毎の発生ビット
数と量子化幅を尺度とした画質の変化のイメージを示し
た図である。符号化困難さが増加したとき、GOPの発
生ビット数は画質を維持するために増加するが、指数関
数的にビットレートを維持するための発生ビット数に修
正される。その際、画質は、急激に劣化することなく数
秒レベルで連続的に低下させることができる。また、再
びもとの困難さに戻ったとき、その直後のGOPで発生
ビット数は減少するが、指数関数的に増加し、もとの最
適な発生ビット数に戻る。その際の画質も、符号化が困
難であったときの画質から数秒レベルで連続的に回復さ
せることができる。
やや複雑で一定の符号化困難さのものが続き、再びもと
の符号化困難さが続いた場合の、GOP毎の発生ビット
数と量子化幅を尺度とした画質の変化のイメージを示し
た図である。符号化困難さが増加したとき、GOPの発
生ビット数は画質を維持するために増加するが、指数関
数的にビットレートを維持するための発生ビット数に修
正される。その際、画質は、急激に劣化することなく数
秒レベルで連続的に低下させることができる。また、再
びもとの困難さに戻ったとき、その直後のGOPで発生
ビット数は減少するが、指数関数的に増加し、もとの最
適な発生ビット数に戻る。その際の画質も、符号化が困
難であったときの画質から数秒レベルで連続的に回復さ
せることができる。
【0078】また、符号化の途中で目標のビットレート
が変更された場合も連続的に画質をレートに応じた画質
に制御できる。すなわち、目標ビットレートが減少した
場合、符号化困難さの基準設定値も同じ比率で減少す
る。したがって、ほぼ目標レート通りに符号化できてい
る場合には、次のピクチャーの暫定目標発生ビット数も
ほぼ目標発生ビット数に比例して減少するため、ピクチ
ャーの平均量子化パラメータは、そのまま目標発生ビッ
ト数が維持されていた場合のものとほぼ同じになり、そ
の後のピクチャーで指数関数的に変化していく。図8
は、一定の符号化困難さの画像に対して目標ビットレー
トが変更された場合のGOPでの発生ビット数および画
質の変化のイメージを示した図である。目標ビットレー
トの変更後、発生符号量は指数関数的に抑制され、最適
なビットに近づく。一方、画質は、連続的に低下して指
示されたレートでの画質に変更される。
が変更された場合も連続的に画質をレートに応じた画質
に制御できる。すなわち、目標ビットレートが減少した
場合、符号化困難さの基準設定値も同じ比率で減少す
る。したがって、ほぼ目標レート通りに符号化できてい
る場合には、次のピクチャーの暫定目標発生ビット数も
ほぼ目標発生ビット数に比例して減少するため、ピクチ
ャーの平均量子化パラメータは、そのまま目標発生ビッ
ト数が維持されていた場合のものとほぼ同じになり、そ
の後のピクチャーで指数関数的に変化していく。図8
は、一定の符号化困難さの画像に対して目標ビットレー
トが変更された場合のGOPでの発生ビット数および画
質の変化のイメージを示した図である。目標ビットレー
トの変更後、発生符号量は指数関数的に抑制され、最適
なビットに近づく。一方、画質は、連続的に低下して指
示されたレートでの画質に変更される。
【0079】また、本実施形態によると、ピクチャー内
の各マクロブロックの符号化の困難さに応じてマクロブ
ロックあたりの量子化幅を制御するため、目標のビット
レートとの誤差が少なく、また、最適なビット配分でピ
クチャーを符号化できる。
の各マクロブロックの符号化の困難さに応じてマクロブ
ロックあたりの量子化幅を制御するため、目標のビット
レートとの誤差が少なく、また、最適なビット配分でピ
クチャーを符号化できる。
【0080】図9は、従来例における量子化パラメータ
の制御と本実施形態における制御との比較を示してい
る。図9(a)は従来例によるものであり、同図(b)
は本実施形態の場合である。通常、1つのピクチャー中
の符号化困難さは一定ではなく、いくつかのピークをも
っている。
の制御と本実施形態における制御との比較を示してい
る。図9(a)は従来例によるものであり、同図(b)
は本実施形態の場合である。通常、1つのピクチャー中
の符号化困難さは一定ではなく、いくつかのピークをも
っている。
【0081】従来例では、各マクロブロック内での発生
ビット数を一定と仮定して、実際の発生ビット数との差
を仮想バッファのデータ残量として量子化パラメータを
制御する。したがって、画像の後半に符号化困難さのピ
ークをもつような場合には、画像の前半は実際のビット
発生量は少なくなり、そのため、量子化パラメータは減
少し、本来求める画質より高い品質で符号化される。一
方、後半部では、ビット発生量は増加してしまい、最終
的に目標の発生ビット数よりも多いビット数になってし
まったり、バッファ残量の増加のために急激に量子化パ
ラメータが増加して、画質が目的とする品質よりも低下
する。
ビット数を一定と仮定して、実際の発生ビット数との差
を仮想バッファのデータ残量として量子化パラメータを
制御する。したがって、画像の後半に符号化困難さのピ
ークをもつような場合には、画像の前半は実際のビット
発生量は少なくなり、そのため、量子化パラメータは減
少し、本来求める画質より高い品質で符号化される。一
方、後半部では、ビット発生量は増加してしまい、最終
的に目標の発生ビット数よりも多いビット数になってし
まったり、バッファ残量の増加のために急激に量子化パ
ラメータが増加して、画質が目的とする品質よりも低下
する。
【0082】それに対して、本実施形態では、符号化困
難さに比例して各マクロブロックでの発生ビット数を
(数16)のように設定しているため、ピクチャー中の
符号化困難さの分布に近いビット配分がなされ、画質お
よびビット発生数も目標に近い値となる。
難さに比例して各マクロブロックでの発生ビット数を
(数16)のように設定しているため、ピクチャー中の
符号化困難さの分布に近いビット配分がなされ、画質お
よびビット発生数も目標に近い値となる。
【0083】なお、本実施形態では、GOP単位で目標
ビットレートと発生ビット数の差を求め、目標発生ビッ
ト数の修正を行ったが、同様の時間程度に発生ビット誤
差の影響を除算して目標発生ビット数の修正を行うので
あれば、ピクチャー毎に修正してもよいし、また別の単
位で行なってもよい。
ビットレートと発生ビット数の差を求め、目標発生ビッ
ト数の修正を行ったが、同様の時間程度に発生ビット誤
差の影響を除算して目標発生ビット数の修正を行うので
あれば、ピクチャー毎に修正してもよいし、また別の単
位で行なってもよい。
【0084】また、符号化困難さの基準値の設定方法に
ついても、q_scale=10以外の値で設定しても同様の
効果が得られ、また、目標ビットレートの変更等がない
場合には、初めから固定した値を設定しておいてもよ
い。
ついても、q_scale=10以外の値で設定しても同様の
効果が得られ、また、目標ビットレートの変更等がない
場合には、初めから固定した値を設定しておいてもよ
い。
【0085】また、ピクチャーレベルにおける暫定の目
標発生ビット数と符号化困難さの基準値で決まる量子化
パラメータの値と同じ値になるように、実際のピクチャ
ーの目標発生ビット数をその符号化の困難さに従って決
定したが、量子化パラメータの値が大きく変化しない範
囲で図5における直線部分を修正して、目標発生ビット
数を変化させることも可能である。すなわち、目標ビッ
トレートから算出された目標発生ビット数で、符号化困
難さの基準値の画像が符号化できるように設定し、実際
の符号化困難さの基準値との違いに応じて目標発生ビッ
ト数を増やすことで同様の効果が得られる。
標発生ビット数と符号化困難さの基準値で決まる量子化
パラメータの値と同じ値になるように、実際のピクチャ
ーの目標発生ビット数をその符号化の困難さに従って決
定したが、量子化パラメータの値が大きく変化しない範
囲で図5における直線部分を修正して、目標発生ビット
数を変化させることも可能である。すなわち、目標ビッ
トレートから算出された目標発生ビット数で、符号化困
難さの基準値の画像が符号化できるように設定し、実際
の符号化困難さの基準値との違いに応じて目標発生ビッ
ト数を増やすことで同様の効果が得られる。
【0086】また、符号化困難さの指標として"complex
ity"を用いたが、符号化困難さを示す指標として別のも
のを用いてもよい。図10は、符号化困難さ算出処理部
4を各ピクチャーのアクティビティーに相当する、平均
との誤差の2乗和を求めるものにした場合の構成であ
る。図10において、17は予測誤差画像生成部、18
は演算部である。予測誤差画像生成部17は、図2の場
合と同様、Iピクチャーの場合はそのまま、P、Bピク
チャーの場合には、それぞれの予測誤差が画像を生成す
る。演算部18は、予測誤差画像生成部17からの予測
誤差画像から各マクロブロックの平均の2乗の誤差を求
める。そして、その合計をピクチャー全体の符号化困難
さとし、これを"complexity”の代用値として用いる。
ただし、変化量の差について"complexity"と同程度にな
るように補正して用いる。
ity"を用いたが、符号化困難さを示す指標として別のも
のを用いてもよい。図10は、符号化困難さ算出処理部
4を各ピクチャーのアクティビティーに相当する、平均
との誤差の2乗和を求めるものにした場合の構成であ
る。図10において、17は予測誤差画像生成部、18
は演算部である。予測誤差画像生成部17は、図2の場
合と同様、Iピクチャーの場合はそのまま、P、Bピク
チャーの場合には、それぞれの予測誤差が画像を生成す
る。演算部18は、予測誤差画像生成部17からの予測
誤差画像から各マクロブロックの平均の2乗の誤差を求
める。そして、その合計をピクチャー全体の符号化困難
さとし、これを"complexity”の代用値として用いる。
ただし、変化量の差について"complexity"と同程度にな
るように補正して用いる。
【0087】また、本実施形態では、レート制御部6
は、基本符号化処理部3と独立した構成であるが、符号
化装置自体をDSP等のプロセッサ構成をとる場合など
においてプロセッサ内でレート制御機能を他の処理の制
御と兼ねて行うことも可能であり、本実施形態で示した
ような、量子化パラメータを制御してレート制御する手
段を有する符号化装置に本発明は有効である。
は、基本符号化処理部3と独立した構成であるが、符号
化装置自体をDSP等のプロセッサ構成をとる場合など
においてプロセッサ内でレート制御機能を他の処理の制
御と兼ねて行うことも可能であり、本実施形態で示した
ような、量子化パラメータを制御してレート制御する手
段を有する符号化装置に本発明は有効である。
【0088】
【発明の効果】以上説明したように、本発明によれば、
各ピクチャー毎の符号化困難さを示す困難さ指標の基準
値を設定し、目標ビットレートから算出される現ピクチ
ャを符号化する際の目標発生ビット数を困難さ指標の基
準値のピクチャーを符号化する際の基準発生ビット数と
し、現ピクチャの困難さ指標を算出し、現ピクチャーの
符号化の際の目標発生ビット数と基準発生ビット数間の
違いが前記困難さ指標の基準値との違いに相関するよ
う、現ピクチャーの符号化の際の目標発生ビット数を設
定するため、符号化の困難さに応じてビット発生数を割
り当てることができ、シーンチェンジなど急激な符号化
困難さの増加に対しても、画像をその品質を大きく変化
させることなく符号化できる。
各ピクチャー毎の符号化困難さを示す困難さ指標の基準
値を設定し、目標ビットレートから算出される現ピクチ
ャを符号化する際の目標発生ビット数を困難さ指標の基
準値のピクチャーを符号化する際の基準発生ビット数と
し、現ピクチャの困難さ指標を算出し、現ピクチャーの
符号化の際の目標発生ビット数と基準発生ビット数間の
違いが前記困難さ指標の基準値との違いに相関するよ
う、現ピクチャーの符号化の際の目標発生ビット数を設
定するため、符号化の困難さに応じてビット発生数を割
り当てることができ、シーンチェンジなど急激な符号化
困難さの増加に対しても、画像をその品質を大きく変化
させることなく符号化できる。
【0089】また、各中間点においてそれまでの発生ビ
ット数と目標ビットレートより換算した発生ビット数の
差である発生ビット誤差を算出し、前記発生ビット誤差
を少なくとも2以上の数で除算したビット数を前記目標
ビットレートより算出される次の中間地点までの発生ビ
ット数より減算したビット数を次の中間点までの発生ビ
ット数として量子化幅を制御するため、符号化する画像
の変化、目標ビットレートの変化においてもその画質を
急激に変化させることなく、連続的に変化させることが
でき、また、瞬間的な画質の変化に対してもその直後の
画質の変化を最小限に抑えることができる。
ット数と目標ビットレートより換算した発生ビット数の
差である発生ビット誤差を算出し、前記発生ビット誤差
を少なくとも2以上の数で除算したビット数を前記目標
ビットレートより算出される次の中間地点までの発生ビ
ット数より減算したビット数を次の中間点までの発生ビ
ット数として量子化幅を制御するため、符号化する画像
の変化、目標ビットレートの変化においてもその画質を
急激に変化させることなく、連続的に変化させることが
でき、また、瞬間的な画質の変化に対してもその直後の
画質の変化を最小限に抑えることができる。
【0090】また、マクロブロック毎に符号化の困難さ
をを計算し、1ピクチャ内の各マクロブロックの困難さ
の比率にしたがって、ピクチャ全体の発生ビット数から
各マクロブロックの符号化発生ビット数を算出し、仮想
バッファのフルネス(fullness)より前記符号化発生ビ
ット数を減算するとともに、実際に符号化した結果の発
生符号量を加算した値を次のマクロブロックを符号化す
る際のバッファフルネスとして算出し、算出したバッフ
ァフルネス値に比例して量子化幅を設定することによ
り、ピクチャー内で目標発生ビット数の精度をあげ、か
つ画質の均一化を図ることができ、本発明の実用的効果
は大きい。
をを計算し、1ピクチャ内の各マクロブロックの困難さ
の比率にしたがって、ピクチャ全体の発生ビット数から
各マクロブロックの符号化発生ビット数を算出し、仮想
バッファのフルネス(fullness)より前記符号化発生ビ
ット数を減算するとともに、実際に符号化した結果の発
生符号量を加算した値を次のマクロブロックを符号化す
る際のバッファフルネスとして算出し、算出したバッフ
ァフルネス値に比例して量子化幅を設定することによ
り、ピクチャー内で目標発生ビット数の精度をあげ、か
つ画質の均一化を図ることができ、本発明の実用的効果
は大きい。
【図1】本発明の一実施形態における画像圧縮符号化装
置のブロック図
置のブロック図
【図2】本発明の実施形態における画像圧縮符号化装置
の符号化困難さ算出処理部のブロック図
の符号化困難さ算出処理部のブロック図
【図3】本発明の実施形態における画像圧縮符号化装置
のレート制御部のブロック図
のレート制御部のブロック図
【図4】本発明の実施形態における画像圧縮符号化装置
のレート制御部でのq_scale算出方法の説明図
のレート制御部でのq_scale算出方法の説明図
【図5】本発明の実施形態における目標発生ビット数の
決定方法の説明図
決定方法の説明図
【図6】本発明の実施形態における画像圧縮符号化装置
のレート制御部でのピクチャー内量子化パラメータ制御
処理の説明図
のレート制御部でのピクチャー内量子化パラメータ制御
処理の説明図
【図7】本発明の実施形態において一定の符号化困難さ
の画像中で瞬間的に困難さが増加した場合のGOP単位
での発生ビット数の変化のイメージ説明図
の画像中で瞬間的に困難さが増加した場合のGOP単位
での発生ビット数の変化のイメージ説明図
【図8】本発明の実施形態において一定の符号化困難さ
が続いた後、やや複雑で一定の困難さが続き、再びもと
の困難さが続いた場合のGOP毎の発生ビット数と量子
化幅を尺度とした画質の変化の説明図
が続いた後、やや複雑で一定の困難さが続き、再びもと
の困難さが続いた場合のGOP毎の発生ビット数と量子
化幅を尺度とした画質の変化の説明図
【図9】従来例における量子化パラメータの制御と本実
施形態における制御との比較の説明図
施形態における制御との比較の説明図
【図10】本発明の実施形態における画像符号化装置の
画像中のアクティビティを困難さとして算出する符号化
困難さ算出処理部の構成図
画像中のアクティビティを困難さとして算出する符号化
困難さ算出処理部の構成図
【図11】従来の画像圧縮符号化装置のブロック図
【図12】MPEG標準のデータ構造の説明図
1 画像並び替え処理部 2 1ピフレーム遅延処理部 3 基本符号化処理部 4 符号化困難さ算出処理部 5 動き検出部 6 レート制御部 7 エンコーダ送出バッファ 8 予測誤差画像生成部 9 DCT処理部 10 量子化部 11 可変長符号化部 12 発生ビット数カウンター 13,14,15 発生ビットカウンター 16 制御部 17 予測誤差画像生成部 18 演算部 101 画像並び替え部 102 走査変換部 103 差分部 104 DCT変換処理部 105 重みづけ量子化処理部 106 可変長符号化部 107 逆量子化部 108 逆DCT処理部 109 動き補償付き予測処理部 110 モード判定部 111 動き検出部 112 レート制御部 113 エンコーダ送出バッファ 114 加算処理部
Claims (16)
- 【請求項1】 目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数と目標ビットレートに基づ
いて量子化幅を修正し符号化する符号化方法において、 前記各中間点においてそれまでの発生ビット数と目標ビ
ットレートより換算した発生ビット数との差である発生
ビット誤差を算出し、前記発生ビット誤差を少なくとも
2以上の数で除算したビット数を前記目標ビットレート
より算出される次の中間地点までの発生ビット数より減
算したビット数を、次の中間点までの発生ビット数とし
て量子化幅を制御することを特徴とする画像圧縮符号化
方法。 - 【請求項2】 映像信号中の複数ピクチャーからなるグ
ループ・オブ・ピクチャーの境界を中間点とすることを
特徴とする請求項1記載の画像圧縮符号化方法。 - 【請求項3】 目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数と目標ビットレートに基づ
いて量子化幅を修正し符号化する符号化方法において、 各ピクチャー毎の符号化の困難さを示す困難さ指標の基
準値を設定し、目標ビットレートから算出される現ピク
チャーを符号化する際の目標発生ビット数を困難さ指標
の基準値のピクチャーを符号化する際の基準発生ビット
数とし、現ピクチャーの困難さ指標を算出し、現ピクチ
ャーの符号化の際の目標発生ビット数と基準発生ビット
数間の違いが前記困難さ指標の基準値との違いに相関す
るよう、現ピクチャーの符号化の際の目標発生ビット数
を設定することを特徴とする画像圧縮符号化方法。 - 【請求項4】 各ピクチャー毎の符号化の困難さを示す
困難さ指標の基準値を設定し、目標ビットレートから算
出される現ピクチャーを符号化する際の目標発生ビット
数を困難さ指標の基準値のピクチャーを符号化する際の
基準発生ビット数とし、前記基準発生ビット数でもって
困難さ指標の基準値のピクチャーを符号化する際の予想
平均量子幅を算出して現ピクチャーを符号化する際の目
標平均量子化幅とし、現ピクチャーの困難さ指標を算出
し、算出した困難さ指標を目標平均量子化幅で符号化し
た場合に必要とする発生ビット数を算出して、現ピクチ
ャーの符号化の際の目標発生ビット数とすることを特徴
とする請求項3記載の画像圧縮符号化方法。 - 【請求項5】 現ピクチャーの符号化の際の目標発生ビ
ット数の上限値を設定し、予想平均量子化幅より算出し
た発生ビット数が上記上限値を越える場合、現ピクチャ
ーの発生ビット数を上記上限値とすることを特徴とする
請求項4記載の画像圧縮符号化方法。 - 【請求項6】 ピクチャー内符号化、ピクチャー間前方
向予測符号化、およびピクチャー間両側予測符号化をピ
クチャー毎に切り替えて符号化する符号化方法で、かつ
目標のビットレートを設定し、符号化のあらかじめ決め
た各中間点においてそれまでに符号化によって発生した
発生ビット数から目標ビットレートに基づき量子化幅を
修正し符号化する符号化方法において、 映像信号中の複数ピクチャーからなるグループ・オブ・
ピクチャの境界を中間点とし、前記各中間点においてそ
れまでの発生ビット数と目標ビットレートより換算した
発生ビット数との差である発生ビット誤差を算出し、前
記発生ビット誤差を少なくとも2以上の数で除算した結
果のビット数を、前記目標ビットレートより算出される
次の中間地点までの発生ビット数より減算したビット数
を、次の中間点までの発生ビット数として、前記発生ビ
ット数を、グループ・オブ・ピクチャーを構成するピク
チャー内符号化ピクチャー(Iピクチャー)、前方向予
測符号化ピクチャー(Pピクチャー)、および両方向フ
レーム間予測符号化ピクチャー(Bピクチャー)に振り
分けて、その基準発生ビットとすることを特徴とする請
求項3記載の画像符号化方法。 - 【請求項7】 目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数から目標ビットレートに基
づき量子化幅を修正し符号化する符号化方法において、 各中間点を複数の符号化ブロックからなるマクロブロッ
ク毎におき、該マクロブロックの符号化の困難さ指標を
計算し、1ピクチャー内の各マクロブロックの符号化の
困難さ指標の比率にしたがってピクチャー全体の発生ビ
ット数から各マクロブロックの符号化発生ビット数を算
出し、仮想バッファのデータ残量を示すバッファ・フル
ネス値より前記符号化発生ビット数を減算するととも
に、実際に符号化した結果の発生符号量を加算した値を
次のマクロブロックを符号化する際のバッファ・フルネ
ス値として算出し、該算出したバッファ・フルネス値に
比例して量子化幅を設定することを特徴とする画像符号
化方法。 - 【請求項8】 映像信号中の複数ピクチャーからなるグ
ループ・オブ・ピクチャの境界を中間点とし、前記各中
間点においてそれまでの発生ビット数と目標ビットレー
トより換算した発生ビット数との差である発生ビット誤
差を算出し、前記発生ビット誤差を少なくとも2以上の
数で除算した結果のビット数を、前記目標ビットレート
より算出される次の中間地点までの発生ビット数より減
算したビット数を、次の中間点までの発生ビット数とし
て、前記発生ビット数を、グループ・オブ・ピクチャー
を構成するピクチャー内符号化ピクチャー(Iピクチャ
ー)、前方向予測符号化ピクチャー(Pピクチャー)、
および両方向フレーム間予測符号化ピクチャー(Bピク
チャー)に振り分けてその基準発生ビットとし、困難さ
指標の基準値との比較に基づいて、現ピクチャー全体の
発生ビット数を設定することを特徴とする請求項7記載
の画像符号化方法。 - 【請求項9】 目標のビットレートを設定し、符号化の
あらかじめ決めた各中間点においてそれまでに符号化に
よって発生した発生ビット数と目標ビットレートに基づ
き量子化幅を修正し符号化する符号化装置において、 符号化の際の発生ビット数を検出する発生ビット数検出
手段と、前記発生ビット数に基づいて量子化幅を示すパ
ラメータ値を算出する量子化幅算出手段とを具備し、 前記量子化幅算出手段は、前記各中間点においてそれま
での発生ビット数と目標ビットレートより換算した発生
ビット数との差である発生ビット誤差を算出し、前記発
生ビット誤差を少なくとも2以上の数で除算したビット
数を、前記目標ビットレートより算出される次の中間地
点までの発生ビット数より減算したビット数を、次の中
間点までの発生ビット数として量子化幅を算出すること
を特徴とする画像圧縮符号化装置。 - 【請求項10】 量子化幅算出手段は、映像信号中の複
数ピクチャーからなるグループ・オブ・ピクチャーの境
界を中間点とすることを特徴とする請求項9記載の画像
圧縮符号化装置。 - 【請求項11】 目標のビットレートを設定し、符号化
のあらかじめ決めた各中間点においてそれまでに符号化
によって発生した発生ビット数と目標ビットレートに基
づいて量子化幅を修正し符号化する符号化装置におい
て、 符号化困難さ指標検出手段と量子化幅算出手段とを具備
し、 前記符号化困難さ指標検出手段は、現ピクチャーの符号
化の困難さを示す困難さ指標を算出し、 前記量子化幅算出手段は、各ピクチャー毎の符号化の困
難さを示す困難さ指標の基準値を設定し、目標ビットレ
ートから算出される現ピクチャーを符号化する際の目標
発生ビット数を困難さ指標の基準値のピクチャーを符号
化する際の基準発生ビット数とし、現ピクチャーの符号
化の際の目標発生ビット数と基準発生ビット数間の違い
が、前記符号化困難さ指標検出手段が検出した現ピクチ
ャーの困難さ指標の基準値との違いに相関するよう、現
ピクチャーの符号化の際の目標発生ビット数を設定し、
該目標発生ビット数に基づいて量子化幅を算出すること
を特徴とする画像圧縮符号化装置。 - 【請求項12】 量子化幅算出手段は、基準発生ビット
数でもって困難さ指標の基準値のピクチャーを符号化す
る際の予想平均量子幅を算出して現ピクチャーを符号化
する際の目標平均量子化幅とし、現ピクチャーの困難さ
指標を算出し、算出した困難さ指標を目標平均量子化幅
で符号化した場合に必要とする発生ビット数を算出し
て、現ピクチャーの符号化の際の目標発生ビット数とす
ることを特徴とする請求項11記載の画像圧縮符号化装
置。 - 【請求項13】 量子化幅算出手段は、現ピクチャーの
符号化の際の目標発生ビット数の上限値を設定し、予想
平均量子化幅より算出した発生ビット数が上記上限値を
越える場合、現ピクチャーの発生ビット数を上記上限値
とすることを特徴とする請求項12記載の画像圧縮符号
化装置。 - 【請求項14】 ピクチャー内符号化、ピクチャー間前
方向予測符号化、およびピクチャー間両側予測符号化の
少なくとも2つの符号化方法をピクチャー毎に切り替え
て符号化する符号化方法で、かつ目標のビットレートを
設定し、符号化のあらかじめ決めた各中間点においてそ
れまでに符号化によって発生した発生ビット数から目標
ビットレートに基づき量子化幅を修正し符号化する符号
化装置において、 符号化の際の発生ビット数を検出する発生ビット数検出
手段を具備し、 量子化幅算出手段が、前記発生ビット数検出手段の検出
結果を用いて、映像信号中の複数ピクチャーからなるグ
ループ・オブ・ピクチャーの境界を中間点とし、前記各
中間点においてそれまでの発生ビット数と目標ビットレ
ートより換算した発生ビット数との差である発生ビット
誤差を算出し、前記発生ビット誤差を少なくとも2以上
の数で除算した結果のビット数を、前記目標ビットレー
トより算出される次の中間地点までの発生ビット数より
減算したビット数を、次の中間点までの発生ビット数と
して、前記発生ビット数を、グループ・オブ・ピクチャ
ーを構成するピクチャー内符号化ピクチャー(Iピクチ
ャー)、前方向予測符号化ピクチャー(Pピクチャ
ー)、および両方向フレーム間予測符号化ピクチャー
(Bピクチャー)に振り分けて、その基準発生ビットと
することを特徴とする請求項11記載の画像符号化装
置。 - 【請求項15】 目標のビットレートを設定し、符号化
のあらかじめ決めた各中間点においてそれまでに符号化
によって発生した発生ビット数から目標ビットレートに
基づき量子化幅を修正し符号化する符号化装置におい
て、 符号化困難さ指標検出手段と量子化幅算出手段とを具備
し、 前記符号化困難さ指標検出手段は、1ピクチャー内の符
号化困難さをマクロブロック毎に検出し、 前記量子化幅算出手段は、各中間点を複数の符号化ブロ
ックからなるマクロブロック毎におき、1ピクチャー内
の各マクロブロックの符号化の困難さ指標の比率にした
がってピクチャー全体の発生ビット数から各マクロブロ
ックの符号化発生ビット数を算出し、仮想バッファのデ
ータ残量を示すバッファ・フルネス値より前記符号化発
生ビット数を減算するとともに、実際に符号化した結果
の発生符号量を加算した値を次のマクロブロックを符号
化する際のバッファ・フルネス値として算出し、該算出
したバッファ・フルネス値に比例して量子化幅を設定す
ることを特徴とする画像符号化装置。 - 【請求項16】 符号化の際の発生ビット数を検出する
発生ビット数検出手段を具備し、 量子化幅算出手段は、映像信号中の複数ピクチャーから
なるグループ・オブ・ピクチャーの境界を中間点とし、
前記各中間点において前記発生ビット数検出手段から得
られるこれまでの発生ビット数と目標ビットレートより
換算した発生ビット数との差である発生ビット誤差を算
出し、前記発生ビット誤差を少なくとも2以上の数で除
算した結果のビット数を、前記目標ビットレートより算
出される次の中間地点までの発生ビット数より減算した
ビット数を、次の中間点までの発生ビット数として、前
記発生ビット数を、グループ・オブ・ピクチャーを構成
するピクチャー内符号化ピクチャー(Iピクチャー)、
前方向予測符号化ピクチャー(Pピクチャー)、および
両方向フレーム間予測符号化ピクチャー(Bピクチャ
ー)に振り分けてその基準発生ビットとし、困難さ指標
の基準値との比較に基づいて、現ピクチャー全体の発生
ビット数を設定することを特徴とする請求項15記載の
画像符号化装置。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10507896A JP3173369B2 (ja) | 1996-04-25 | 1996-04-25 | 画像圧縮符号化装置 |
EP97106862A EP0804035B1 (en) | 1996-04-25 | 1997-04-25 | Moving picture encoding apparatus and method |
DE69713549T DE69713549T2 (de) | 1996-04-25 | 1997-04-25 | Gerät und Verfahren zur Bewegtbildkodierung |
US08/847,478 US6115421A (en) | 1996-04-25 | 1997-04-25 | Moving picture encoding apparatus and method |
KR1019970015492A KR100471956B1 (ko) | 1996-04-25 | 1997-04-25 | 화상압축부호화장치및방법 |
EP01127462A EP1182888A3 (en) | 1996-04-25 | 1997-04-25 | Video coding with bit rate dependent quantisation |
US09/537,076 US6173012B1 (en) | 1996-04-25 | 2000-03-28 | Moving picture encoding apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10507896A JP3173369B2 (ja) | 1996-04-25 | 1996-04-25 | 画像圧縮符号化装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH09294267A true JPH09294267A (ja) | 1997-11-11 |
JP3173369B2 JP3173369B2 (ja) | 2001-06-04 |
Family
ID=14397905
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP10507896A Expired - Fee Related JP3173369B2 (ja) | 1996-04-25 | 1996-04-25 | 画像圧縮符号化装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3173369B2 (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11313318A (ja) * | 1998-04-28 | 1999-11-09 | Matsushita Electric Ind Co Ltd | 画像符号化方法 |
WO2003017674A1 (en) * | 2001-08-09 | 2003-02-27 | Sony Corporation | Image encoding apparatus and method |
US6763138B1 (en) | 1999-03-11 | 2004-07-13 | Nec Corporation | Method and apparatus for coding moving picture at variable bit rate |
JP2009502069A (ja) * | 2005-07-19 | 2009-01-22 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 画像ストリーミング・システム内の圧縮レベルを切り換えるシステム、方法、及び媒体 |
JP2009246513A (ja) * | 2008-03-28 | 2009-10-22 | Canon Inc | 動画像符号化装置及びその制御方法、コンピュータプログラム |
WO2010087113A1 (ja) * | 2009-01-27 | 2010-08-05 | 日本電気株式会社 | 配信システム、配信方法、サーバ装置、プログラム及びクライアント装置 |
US8254685B2 (en) | 2005-07-28 | 2012-08-28 | International Business Machines Corporation | Detecting content change in a streaming image system |
JP2014011493A (ja) * | 2012-06-27 | 2014-01-20 | Ntt Electornics Corp | 量子化制御装置 |
US8774268B2 (en) | 2007-10-04 | 2014-07-08 | Canon Kabushiki Kaisha | Moving image encoding apparatus and method for controlling the same |
US8792562B2 (en) | 2007-10-04 | 2014-07-29 | Canon Kabushiki Kaisha | Moving image encoding apparatus and method for controlling the same |
-
1996
- 1996-04-25 JP JP10507896A patent/JP3173369B2/ja not_active Expired - Fee Related
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11313318A (ja) * | 1998-04-28 | 1999-11-09 | Matsushita Electric Ind Co Ltd | 画像符号化方法 |
US6763138B1 (en) | 1999-03-11 | 2004-07-13 | Nec Corporation | Method and apparatus for coding moving picture at variable bit rate |
US7539246B2 (en) | 2001-08-09 | 2009-05-26 | Sony Corporation | Image encoding apparatus and method |
WO2003017674A1 (en) * | 2001-08-09 | 2003-02-27 | Sony Corporation | Image encoding apparatus and method |
US8218886B2 (en) | 2005-07-19 | 2012-07-10 | International Business Machines Corporation | Transitioning compression levels in a streaming image system |
JP4900976B2 (ja) * | 2005-07-19 | 2012-03-21 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 画像ストリーミング・システム内の圧縮レベルを切り換える方法、並びに、システム、サーバ、及びコンピュータ・プログラム |
JP2009502069A (ja) * | 2005-07-19 | 2009-01-22 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 画像ストリーミング・システム内の圧縮レベルを切り換えるシステム、方法、及び媒体 |
US8254685B2 (en) | 2005-07-28 | 2012-08-28 | International Business Machines Corporation | Detecting content change in a streaming image system |
US8774268B2 (en) | 2007-10-04 | 2014-07-08 | Canon Kabushiki Kaisha | Moving image encoding apparatus and method for controlling the same |
US8792562B2 (en) | 2007-10-04 | 2014-07-29 | Canon Kabushiki Kaisha | Moving image encoding apparatus and method for controlling the same |
JP2009246513A (ja) * | 2008-03-28 | 2009-10-22 | Canon Inc | 動画像符号化装置及びその制御方法、コンピュータプログラム |
WO2010087113A1 (ja) * | 2009-01-27 | 2010-08-05 | 日本電気株式会社 | 配信システム、配信方法、サーバ装置、プログラム及びクライアント装置 |
JP5494495B2 (ja) * | 2009-01-27 | 2014-05-14 | 日本電気株式会社 | 配信システム、配信方法、サーバ装置、プログラム及びクライアント装置 |
US8909809B2 (en) | 2009-01-27 | 2014-12-09 | Nec Corporation | Delivery system, delivery method, server device, program, and client device |
US9319739B2 (en) | 2009-01-27 | 2016-04-19 | Nec Corporation | Delivery system, delivery method, server device, program, and client device |
JP2014011493A (ja) * | 2012-06-27 | 2014-01-20 | Ntt Electornics Corp | 量子化制御装置 |
Also Published As
Publication number | Publication date |
---|---|
JP3173369B2 (ja) | 2001-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100471956B1 (ko) | 화상압축부호화장치및방법 | |
KR100610520B1 (ko) | 비디오 데이터 부호화 장치, 비디오 데이터 부호화 방법, 비디오데이터 전송 장치 및 비디오 데이터 기록 매체 | |
EP0892555A2 (en) | Adaptive video coding method | |
EP1068736B1 (en) | Method and apparatus for performing adaptive encoding rate control of a video information stream including 3:2 pull-down video information | |
JPH0898185A (ja) | 画像符号化装置 | |
JPH0898179A (ja) | 画像符号化装置 | |
JPH06268986A (ja) | 量子化装置 | |
JP2002010259A (ja) | 画像符号化装置及び画像符号化方法及び画像符号化プログラムを記録した記録媒体 | |
JP3907875B2 (ja) | 符号化レート制御装置及び情報符号化装置 | |
EP1978745B1 (en) | Statistical adaptive video rate control | |
JP3173369B2 (ja) | 画像圧縮符号化装置 | |
KR100588795B1 (ko) | 부호화 장치 및 부호화 방법 | |
JP4295828B2 (ja) | 領域情報で符号化する方法 | |
JP4362795B2 (ja) | 動画像符号化装置及びその方法 | |
KR101069254B1 (ko) | H.264를 위한 프레임 단위 비트율 제어 방법 | |
KR100708182B1 (ko) | 동영상 부호화기의 비트율 제어 장치 및 방법 | |
US9185420B2 (en) | Moving image coding apparatus and moving image coding method | |
JP4532607B2 (ja) | ブロック・ベースのコード化システムにおいてコード化モードを選択するための装置および方法 | |
JP2873781B2 (ja) | 動画像符号量制御方法と装置 | |
JP3812269B2 (ja) | 動画像符号化装置及びその方法 | |
JP3151173B2 (ja) | 画像圧縮符号化装置及び方法 | |
JP4193080B2 (ja) | 符号化装置及び方法 | |
KR100963322B1 (ko) | 실시간 h.264를 위한 적응적 프레임 비트율 제어 방법 | |
JPH09191458A (ja) | 動画像圧縮符号化方法及びその装置 | |
JP3779066B2 (ja) | 動画像符号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
LAPS | Cancellation because of no payment of annual fees |