JP2010268508A - 画像符号化方法、その装置及びその制御プログラム - Google Patents

画像符号化方法、その装置及びその制御プログラム Download PDF

Info

Publication number
JP2010268508A
JP2010268508A JP2010164660A JP2010164660A JP2010268508A JP 2010268508 A JP2010268508 A JP 2010268508A JP 2010164660 A JP2010164660 A JP 2010164660A JP 2010164660 A JP2010164660 A JP 2010164660A JP 2010268508 A JP2010268508 A JP 2010268508A
Authority
JP
Japan
Prior art keywords
quantization
block
dead zone
image
scale
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010164660A
Other languages
English (en)
Other versions
JP4952828B2 (ja
Inventor
Keiichi Chono
慶一 蝶野
Yuzo Senda
裕三 仙田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2010164660A priority Critical patent/JP4952828B2/ja
Publication of JP2010268508A publication Critical patent/JP2010268508A/ja
Application granted granted Critical
Publication of JP4952828B2 publication Critical patent/JP4952828B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/149Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

【課題】量子化特性付加情報を利用することなく、変換係数毎、複数の変換係数を構成要素とするブロックごとに自在な強度の量子化を可能とし、高画質な画像符号化技術を提供する。
【解決手段】画像符号化装置は、入力動画像を目標の画質で符号化するための理想量子化パラメータを計算する量子化制御装置(103)と、理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するギャップ補正デッドゾーンスケール生成装置(205)と、評価した関係に対応してデッドゾーン幅を設定して変換係数を量子化する量子化装置(102)とを備える。
【選択図】 図18

Description

本発明は、画像符号化方法、その装置及びその制御プログラムに関し、特に主観画質改善のための適応量子化を行なう画像符号化方法、その装置及びその制御プログラムに関する。
図面を参照して従来の技術を説明する。
以下では、図1を参照して従来技術の1つである直交変換装置と予測装置(フレーム内予測/フレーム間予測)に基づいたハイブリッド動画像符号化を説明する。
従来技術では、動画像を構成する画像フレ−ムを複数のマクロブロック(MB)とよばれる領域に分割し、さらに前記MBを細かく分割したブロックに対して符号化を行う。従来技術の具体的な画像フレームの構成例として、AVC(ISO/IEC 14496-10 Advanced Video Coding)の画像フレーム構成を図2に示す。
前記MBは、過去に再構築された同一画像フレーム内から予測するフレーム内予測装置5108、あるいは過去に再構築された過去の画像フレームから予測するフレーム間予測装置5109が供給する予測値が減じられる。前記予測値が減じられたMBの信号を予測誤差信号と呼ぶ。
前記予測誤差信号は、さらに細かいブロック(以後に単純にブロックと呼ぶ)に分割されて、直交変換装置5101によって空間領域から周波数領域に変換される。
量子化装置5102によって、前記周波数領域に変換されたブロックの直交変換係数は、量子化制御装置5103よりMB単位で供給する量子化パラメータに対応する量子化ステップサイズで量子化される。
一般に前記量子化制御装置5103は、発生符号量を監視して発生符号量が目標の符号量よりも多いようであれば量子化パラメータを大きくし、逆に発生符号量が目標の符号量よりも少ないようであれば量子化パラメータを小さくする。これによって動画像を目標符号量で符号化できる。
前記量子化された直交変換係数は量子化変換係数とよばれ、可変長符号化装置5104によってエントロピー符号化されて出力される。
以降の符号化のために、前記量子化変換係数は、逆量子化装置5105で逆量子化され、さらに逆直交変換装置5106によって逆直交変換されて元の空間領域に戻される。
前記空間領域に戻されたブロックには、前記予測値が加えられフレームメモリ5107に格納される。前記格納されたブロックで再構成される画像フレームを参照フレームと呼ぶ。
フレーム内予測装置5108は、前記参照フレームから現MBの予測誤差信号を最小とする予測方向、一方のフレーム間予測装置5109は、前記参照フレームから現MBの予測誤差信号を最小とする動きベクトルを検出する。予測判定スイッチ5110は、前記フレーム内予測による予測誤差とフレーム間予測による予測誤差を比較し、予測誤差が小なる予測を選択する。
以上の処理によって圧縮された動画像の主観画質を保つために、前記量子化制御装置5103は、発生符号量だけでなく、入力画像信号や予測誤差信号を監視して、量子化対象のMBの視覚感度が高ければ量子化パラメータを小さく(量子化を細かく)、低ければ量子化パラメータを大きく(量子化を粗く)する(量子化が細かいほど画質がよい)。
AVCなどの従来技術では、伝送する量子化パラメータの情報量を削減するために、1つのMBに対して1つの量子化パラメータしか伝送できない制約がある。
この制約により、MBを構成するブロックのすべての直交変換係数を(輝度信号では256個の係数を)、同じ量子化幅すなわち量子化特性で量子化する。
このため、従来技術には以下の3つの課題がある。
第1の問題に、MBを構成する各ブロックの絵柄が同一とは限らない。このような場合において、従来技術ではMBを構成する各ブロックの絵柄に適した量子化ができない。
第2の問題に、MBを構成する個々のブロックが独立のフレーム内予測、あるいはMBを構成する個々のブロックが独立の動きベクトルによってフレーム間予測が可能な動画像符号化において、MBを構成するブロックごとに予測誤差を最小化する性能が異なる(以後、予測性能と呼ぶ)。このような場合において、従来技術ではMBを構成する各ブロックの予測性能に適した量子化ができない。
第3の問題に、第1および第2の理由により、ブロック内部の座標(以後、空間周波数とよぶ)に対応する直交変換係数の分布が異なり、MBを構成する各ブロックでその分布が一様とならない。このような場合において、従来技術では各ブロックの直交変換係数の分布に適した量子化ができない。
これらの問題により、従来技術では、MB内で最も周波数領域で視覚感度の高い変換係数、あるはMB内で最も空間領域で視覚感度が高いブロックに合わせて、MBの量子化パラメータを決定するしかない。この結果、周波数領域で視覚感度の低い他の変換係数や、空間領域で視覚感度の低いブロックが必要以上に細かく量子化される。すなわち、視覚感度の低い変換係数に不要な情報量を割り当てている。
また、フレーム内予測MBではMBを構成する全ブロック内の変換係数に対して高域の変換係数を低域の変換係数よりも係数を切り落とし、フレーム間予測では前記係数の切り落としをオフとすることで、量子化特性付加情報を伝送することなく画像フレーム全体の平均的な主観画質改善する技術が、特許文献1に記載されている。
特開2003−230142号公報
しかしながら、上述した従来技術のように複数の変換係数、あるいは複数変換係数を構成要素とするブロックの集合に同じ量子化パラメータを設定する方法では、ブロックの絵柄、ブロックの予測性能、ブロックの変換係数の分布に適した量子化ができない。かといって、変換係数毎あるいは複数変換係数を構成要素とするブロック毎に量子化パラメータを設定して伝送する方法では、量子化パラメータ(以後、量子化特性付加情報とよぶ)の符号量が膨大になり、一定の符号量での画像符号化では利用できない。
また、文献1に記載されるような技術では、画像フレームの最小構成単位であるブロック毎(すなわち、MBを構成するブロックごと)の絵柄/各ブロックの予測性能/各ブロック内の係数の分布に応じた量子化を実現できず、画像フレーム内に局所的な画質劣化が生じてしまう問題がある。すなわち、上述した問題1,2,3を解決することはできない。
そこで、本発明は上記課題に鑑みて発明されたものであって、その目的は、量子化特性付加情報を利用することなく、変換係数毎、複数の変換係数を構成要素とするブロックごとに自在な強度の量子化を可能とし、高画質な画像符号化技術を提供することにある。
また、本発明の目的は、複数の変換係数に同じ量子化幅で量子化を行う変換符号化技術において、ビットストリームに追加の情報を加えることなく、周波数領域での変換係数の視覚感度に応じた量子化を可能とし、より高画質な画像を提供することにある。
また、本発明の目的は、複数変換係数を構成要素とするブロックの集合に同じ量子化幅で量子化を行う画像の変換符号化技術において、ビットストリームに追加の情報を加えることなく、空間領域でのブロックの視覚感度に応じた量子化を可能とし、より高画質な画像を提供することにある。
本発明は、画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成するステップを備える画像符号化方法において、入力動画像を目標の画質で符号化するための理想量子化パラメータを計算するステップと、前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するステップと、評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化するステップとを備えることを特徴とするものである。
また、本発明は、画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成する変換手段を備える画像符号化装置において、入力動画像を目標の画質で符号化するための理想量子化パラメータを計算する量子化制御手段と、前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するデッドゾーンスケール生成手段と、評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化する量子化手段とを備えることを特徴とするものである。
また、本発明の画像符号化の制御プログラムは、コンピュータを、入力動画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成する変換手段、前記入力動画像を目標の画質で符号化するための理想量子化パラメータを計算する量子化制御手段、前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するデッドゾーンスケール生成手段と、評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化する量子化手段として機能させることを特徴とするものである。
本発明は画像の変換符号化技術において、変換係数の周波数領域での視覚感度、複数変換係数を構成要素とするブロックの空間領域での視覚感度に応じたデッドゾーン幅を設定する手段を具備し、これによって、変換係数の周波数領域での視覚感度および複数変換係数を構成要素とするブロックの空間領域での視覚感度に応じた量子化機能を提供する。
発明によって、量子化パラメータによって決定される量子化幅に依存することなく、周波数領域で視覚感度の低い変換係数、および空間領域で視覚感度の低いブロックに無駄に消費されていた符号量を削減できる。前記符号量の削減によって、画像フレーム全体の量子化が従来方式よりも細かくなり、周波数領域で視覚感度の高い変換係数および空間領域で視覚感度の高いブロックが高画質に符号化される。
図1は従来技術の構成を示す図である。 図2は画像フレーム(解像度がQCIFの場合で輝度信号のみ)を示す図である。 図3は参考例1の構成の一例を示す図である。 図4はデッドゾーン生成のフローチャートである。 図5はブロックデッドゾーンスケール生成のフローチャートである。 図6は一つの直交変換係数に対する量子化フローチャートである。 図7は従来方式の量子化特性(量子化ステップサイズq)を示す図である。 図8は本発明の量子化特性(量子化ステップサイズq、デッドゾーン幅dz=2q)を示す図である。 図9は従来方式の量子化特性(量子化ステップサイズq’=4q)を示す図である。 図10は本発明の効果を説明する為の図である。図中、aは各ブロックの複雑度(小さい値ほど平坦)を示し、bは従来技術での量子化強度を示し、cは本発明での量子化強度を示す。ただし、MBの量子化強度=20である。 図11は参考例2の構成の一例を示す図である。 図12は空間周波数デッドゾーンスケール生成装置の構成の一例を示す図である。 図13は空間周波数装置特性タイプ設定装置の動作フローチャートである。 図14は本発明の効果を説明する為の図である。図中、dはMB内部のブロック空間周波数特性タイプを示し、eは従来技術での量子化タイプを示し、fは本発明での量子化タイプを示す。ただし、「1」は双方向予測ブロック、「2」は非孤立動きブロック、「3」は通常動きブロックである。 図15はタイプ別の量子化強度特性(ブロック内横方向のみ)を示す図である。 図16は参考例3の構成の一例を示す図である。 図17はハイブリッドデッドゾーンスケール生成装置の構成の一例を示す図である。 図18は実施例1の構成の一例を示す図である。 図19はギャップ補正デッドゾーンスケール生成装置の動作フローチャートである。 図20は本発明を利用した情報処理装置の構成を示す図である。
本発明は、画像符号化において、例えば、図3に示される如く、デッドゾーン生成装置201、ブロックデッドゾーンスケール生成装置202用いて、復号時と同じ量子化幅でデッドゾーンを用いて各変換係数を量子化することにより、復号時の量子化特性と異なる量子化特性で、各変換係数を量子化する。
また、変換係数毎に、又は、複数の変換係数を構成要素とするブロック毎に、デッドゾーン幅を適応的に変化させることにより、変換係数の周波数領域での視覚感度および複数変換係数を構成要素とするブロックの空間領域での視覚感度に応じた量子化機能を提供し、更に、符号量を削減できる。
具体的には、周波数領域で視覚感度の高い変換係数、又は空間領域で視覚感度の高いブロックほど前記デッドゾーン幅が狭く、周波数領域で視覚感度の低い変換係数、又は空間領域で視覚感度の低いブロックほど前記デッドゾーン幅が広く設定する。また、デッドゾーンの幅を画像の平坦度によって適応的に変化させる。この際、画像の平坦度を、画像の予測モード、画像のフレーム内予測の方向、画像の動き、画像のフレーム間予測の方向、画像の平均絶対値誤差、画像の分散、画像の最大値と最小値の差分、画像の予測誤差信号の平均絶対値誤差、および、画像の予測誤差信号の分散の少なくとも1つから計算する。
以下、具体的な実施例を述べる。
[参考例1]
本発明の参考例1について説明する。
図3は参考例1の構成を示す一例である。
本参考例では、動画像を構成する画像フレ−ムを複数のマクロブロック(MB)とよばれる領域に分割し、さらに前記MBを細かく分割したブロックに対して符号化を行う。
前記MBは、過去に再構築された同一画像フレーム内から予測するフレーム内予測装置108、あるいは過去に再構築された過去の画像フレームから予測するフレーム間予測装置109が供給する予測値が減じられる。前記予測値が減じられたMBの信号を予測誤差信号と呼ぶ。
前記予測誤差信号は、さらに細かいブロック(以後に単純にブロックと呼ぶ)に分割されて、直交変換装置101によって空間領域から周波数領域に変換される。
前記周波数領域に変換されたブロックの直交変換係数は、量子化装置102によって、量子化パラメータに対応する量子化ステップサイズで量子化される。
量子化パラメータは、量子化制御装置103よりMB単位で量子化装置102に供給される。一般に前記量子化制御装置103は、発生符号量を監視して発生符号量が目標の符号量よりも多いようであれば量子化パラメータを大きくし、逆に発生符号量が目標の符号量よりも少ないようであれば量子化パラメータを小さくする。これによって動画像を目標符号量で符号化できる。
前記量子化された直交変換係数は量子化変換係数とよばれ、可変長符号化装置104によってエントロピー符号化されて出力される。
以降の符号化のために、前記量子化変換係数は、逆量子化装置105で逆量子化され、さらに逆直交変換装置106によって逆直交変換されて元の空間領域に戻される。
前記空間領域に戻されたブロックには、前記予測値が加えられフレームメモリ107に格納される。前記格納されたブロックで再構成される画像フレームを参照フレームと呼ぶ。
フレーム内予測装置108は、前記参照フレームから現MBの予測誤差信号を最小とする予測方向、一方のフレーム間予測装置109は、前記参照フレームから現MBの予測誤差信号を最小とする動きベクトルを検出する。予測判定スイッチ110は、前記フレーム内予測による予測誤差とフレーム間予測による予測誤差を比較し、予測誤差が小なる予測を選択する。
さらに、本参考例では、量子化装置102は、直交変換装置101から供給される直交変換係数を量子化する際に、デッドゾーンを用いる。デッドゾーンとは、0(ゼロ)に近い入力に対応する出力を0(ゼロ)にすることをいう。また、このような操作を行う入力の範囲をデッドゾーン幅という。ここでは、直交変換係数がデッドゾーン幅に含まれている場合に、量子化装置102は、直交変換係数を量子化した出力、すなわち量子化変換係数を0(ゼロ)とする。
デッドゾーン幅は、デッドゾーン生成装置201およびブロックデッドゾーンスケール生成装置202によって生成される。
ブロックデッドゾーンスケール生成装置202は、画像信号と予測誤差とを入力とし、対象ブロックの絵柄あるいは予測性能を解析し、前記ブロックの絵柄、予測性能に適したデッドゾーンスケールをデッドゾーン生成装置201に出力する。
デッドゾーン生成装置201は、ブロックデッドゾーンスケール生成装置202からのデッドゾーンスケールと量子化制御装置103からのMB量子化パラメータを入力とし、前記デッドゾーンスケールとMB量子化パラメータからデッドゾーン幅を計算して、このデッドゾーン幅を量子化装置102に出力する。具体的には、前記デッドゾーンスケールとMB量子化パラメータとを乗算してデッドゾーン幅を求める。したがって、前記デッドゾーンスケールとは、デッドゾーン幅を求める際のMB量子化パラメータの係数である。
尚、以下では、説明を具体化するために、画像フレームのサイズをQCIF(176×144)サイズ、MBのサイズを16×16サイズ、MBを構成するブロックのサイズを4×4サイズとする。ただし当然、その他のサイズでも本発明を適用できることは言うまでもない。
以下の説明では、本参考例の特徴であるデッドゾーン生成装置201、ブロックデッドゾーンスケール生成装置202、および前記デッドゾーン生成装置201によって内部動作の変更を伴う量子化装置102を説明する。
デッドゾーン生成装置201の入出力および動作を以下で説明する。
デッドゾーン生成装置201の入力は、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、量子化制御装置103から供給される量子化パラメータmb_qである。
デッドゾーン生成装置201の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックの直交変換係数cof(b,i,j)( 0≦b≦15、0≦i≦3、0≦j≦3)に対応するデッドゾーン幅dz(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
図4を参照してデッドゾーン生成装置201の動作を以下で説明する。
ステップS101では、量子化パラメータmb_qから基準デッドゾーンbase_ dz(i,j) (0≦i≦3、0≦j≦3)を計算する。基準デッドゾーンの計算方法は、本発明が接続される符号化器(以後、ベース符号化器と呼ぶ)が量子化マトリクスWM(i,j)(0≦i≦3、0≦j≦3)を利用する、しないによって異なる。量子化マトリクスとは、量子化での割り算および逆量子化での掛け算に空間周波数に応じた重み付けパラメータ(量子化付加情報)である。
前記量子化マトリクスを用いることで、空間周波数ごとの量子化幅を可変とすることができる。前記量子化マトリクスを利用する場合をステップS101A、そうでない場合をステップS101Bとして各ステップを以下で説明する。尚、以下で共通して利用する量子化ステップサイズmb_q_stepは、mb_q_step=q_step_table[q]で設定される。前記量子化ステップサイズq_step_table[q]は、ベース符号化器で定義される量子化パラメータqに対応する量子化ステップサイズである(Q_MIN≦p≦Q_MAX、Q_MINおよびQ_MAXもベース符号化器依存)。
ステップS101Aでは、式(1)によって基準デッドゾーンbase_dz(i,j)を計算する。
base_dz(i,j)=mb_q_step×WM(i,j) (1)
ステップS101Bでは、式(2)によって基準デッドゾーンbase_dz(i,j)を計算する。
base_dz(i,j)=mb_q_step (2)
ステップS102では、式(3)によって、基準デッドゾーンbase_dz(i,j)とデッドゾーンスケールdz_scale(b,i,j)からデッドゾーン幅dz(i,j)を計算する。
dz(b,i,j)=base_dz(i,j)×dz_scale(b,i,j) (3)
尚、ここで、デッドゾーンスケールdz_scale(b,i,j)の値によって任意にデッドゾーン幅dz(b,i,j)が設定できることを述べておく。
以上でデッドゾーン生成装置201の入出力および動作の説明を終わる。
デッドゾーンスケール生成装置202は、複数の変換係数を構成要素とするブロック毎に、そのブロックの絵柄あるいは予測性能に適した、デッドゾーンスケールを生成する。
ブロックデッドゾーンスケール生成装置202の入出力、動作を以下で説明する。
ブロックデッドゾーンスケール生成装置202への入力は、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応する入力画像信号org(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、予測誤差信号pd(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
ここで、入力信号のビット精度は符号なしnビットとする。
ブロックデッドゾーンスケール生成装置202の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
ブロックデッドゾーンスケール生成装置202が、デッドゾーンスケールを生成するために使用する信号を画像特徴量信号imf(b,i,j) (0≦b≦15、0≦i≦3、0≦j≦3)とする。
図5を参照して、ブロックデッドゾーンスケール生成装置202の動作を説明する。
ステップ301では、画像特徴量信号を選択する。以下3種類の選択がある。
1 (C301A)ベース符号化器の量子化制御装置102が、発生符号量以外に入力画像信号を用いて量子化パラメータを決定する場合には、画像特徴量信号imf(b,i,j)に入力画像信号org(b,i,j)を接続する。
2 (C301B)ベース符号化器の量子化制御装置102が、発生符号量と入力画像信号以外に予測誤差信号pdを用いて量子化パラメータを決定する場合には、画像特徴量信号imf(b,i,j)に予測誤差信号pd(b,i,j)を接続する。
3 (C301C) C301A、C301B以外の場合には、画像特徴量信号imf(b,i,j)に入力画像信号org(b,i,j)を接続する。
ステップ302では、各ブロック番号b(0≦b≦15)に対応する平均絶対値誤差L1AC(b) (0≦b≦15)を式(4)、(5)で計算する。
Figure 2010268508
ここでabs(x)は入力xの絶対値を返す関数とする。平均絶対値誤差L1AC (b)(1≦L1AC(b)≦n)は、ブロックbの内での画像特徴量信号の散らばりを示す。
ステップ303では、式(6)を用いて各ブロック番号b(0≦b≦15)に対応するブロック複雑度bcm(b) (0≦b≦15)を計算する。
Figure 2010268508
ここでmax(x,y)は入力x,yの値の大きい方の値を返す関数である。
ブロック複雑度bcm(b) (1≦bcm(b)≦n)が小さいほど、そのブロックは平坦であり人間の視覚感度は高い。また、ブロック複雑度bcm(b)が大きいほど、そのブロックは複雑であり人間の視覚感度は低い。
このことを利用して、ブロック複雑度が小さいブロックの量子化の強度を小さく、大きいほど量子化の強度を強くすることで、空間領域でのブロックの視覚感度(絵柄や予測性能)に応じた量子化強度を設定ができる。
ステップ304では、式(7)を用いて各ブロック番号b(0≦b≦15)に対応するブロックデッドゾーンスケールbdz_scale (b)(0≦b≦15)を計算する。
bdz_scale(b)=clip(bdz_limit,(bcm(b)/min_bcm)) (7)
min_bcm=min(bcm(b)) (8)
ここで、bdz_limitはnよりも小さいパラメータ、clip(x,y)は入力x,yの値の小さい方の値を返す関数、min(bcm(b))はbcm(b)(1≦bcm(b)≦n)の最小値を返す関数である。bdz_limitを小さくすればブロックごとの量子化強度の変更を小さくでき、bdz_limitを大きくすればダイナミックにブロックごとの量子化強度を変更することができる。
なお、ブロックの周囲の複雑度も考慮してブロックデッドゾーンスケールを計算するのであれば、式(7)の代わりに以下の式(7A)を用いてもよい。
bdz_scale(b)=clip(bdz_limit,(local_bcm(b)/min_local_bcm)) (7A)
min_local_bcm=min(local_bcm(b)) (8A)
ここでlocal_bcm(b)は対象ブロックbとその周辺ブロックの最小のbcm値を返す関数、min(local_bcm(b))はlocal_bcm(b)(1≦bcm(b)≦n)の最小値を返す関数である。
ステップ305では、式(9)を用いて各ブロック番号b(0≦b≦15)に対応するデッドゾーンスケールdz_scale (b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)に、ブロックデッドゾーンスケールbdz_scale(b)を設定する。
dz_scale(b,i,j)=bdz_scale(b)…(0≦i≦3,0≦j≦3) (9)
以上のブロックデッドゾーンスケール生成装置202の動作により、空間領域で視覚感度の高いブロックのデッドゾーンスケールdz_scaleは小さく、空間領域で視覚感度の低いブロックのデッドゾーンスケールdz_scaleは大きくなる。
なお画像特徴量信号f(b,i,j)に入力画像信号org(b,i,j)が接続されている場合、平均絶対値誤差でなく、ブロックの画素レンジ(最大画素値と最小画素値の差)を利用してもよい。ようは、ブロックの複雑度が得られる情報であればよい。
以上で、ブロックデッドゾーンスケール生成装置202の入出力、動作の説明を終了する。
量子化装置102の入出力および動作を以下で説明する。
量子化装置102の入力は、デッドゾーン生成装置201から供給されるデッドゾーン幅dz(b,i,j)( 0≦b≦15、0≦i≦3、0≦j≦3)、直交変換装置101から供給される直交変換係数cof(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、量子化制御装置103から供給される量子化パラメータmb_qである。
量子化装置102の出力は、量子化変換係数q_cof (b,i,j) (0≦b≦15、0≦i≦3、0≦j≦3)である。
従来の構成に追加となる入出力は、入力のデッドゾーン幅dz(b,i,j)( 0≦b≦15、0≦i≦3、0≦j≦3)のみである。しかし、以下で説明する動作の影響によって、量子化変換係数q_cof(b,i,j) の出力値が従来方式と異なる。
図6を参照して発明での量子化装置102の動作を以下で説明する。
ステップS201では、直交変換係数cof(b,i,j)の絶対値abs_cofが、デッドゾーン幅dz(b,i,j)よりも小さいか比較する。小さければステップS202、そうでなければステップS203を続いて実行する。
ステップS202では、量子化変換係数q_cof (b,i,j)を0とする。
ステップS203では、以下の計算方法によって量子化変換係数q_cof (b,i,j)を求める。
量子化変換係数の計算方法は、ベース符号化器が量子化マトリクスWM (i,j)(0≦i≦3、0≦j≦3)を利用する、しないによって異なる。量子化マトリクスを利用する場合をステップS203A、そうでない場合をステップS203Bとして各ステップを以下で説明する。
以下で共通して利用する量子化ステップサイズmb_q_stepは、mb_q_step=q_step_table[q]で設定される。前記量子化ステップサイズq_step_table[q]は、ベース符号化器で定義される量子化パラメータqに対応する量子化ステップサイズである(Q_MIN≦p≦Q_MAX、Q_MINおよびQ_MAXもベース符号化器依存)。
ステップS203Aでは式(10A)によって量子化変換係数q_cof (b,i,j)を計算する。
Figure 2010268508
ここでabs(x)は入力xの絶対値を返す関数、fはベース符号器に依存する1未満のパラメータであり四捨五入であれば0.5、切捨てであれば0となる。
ステップS203Bでは式(10B)によって量子化変換係数q_cof (b,i,j)を計算する。
Figure 2010268508
ここでabs(x)は入力xの絶対値を返す関数、fはベース符号器に依存する1未満のパラメータであり四捨五入であれば0.5、切捨てであれば0となる。
以上の処理をMB内のすべての直交変換係数cof(b,i,j) (0≦b≦15、0≦i≦3、0≦j≦3)に適用することで1つのMBに対しての量子化が終了する。
以上で量子化装置102の入出力および動作の説明を終わる。
本発明の効果を以下で説明する。
まず、デッドゾーンを可変とすることで量子化強度も可変とする原理を述べる。
図7,8,9を参照して、デッドゾーンdzによる量子化特性の違いを比較する(ベース符号化器に量子化マトリクスがなく、fが0.5である場合)。量子化特性とは、量子化装置102への入力cofと、逆量子化装置105の出力icofの関係を意味する。
図7は量子化ステップサイズqの従来の量子化特性、図8は量子化ステップサイズqでデッドゾーン幅dz=2qの発明方式の量子化特性、図9は量子化ステップサイズq’=4qの従来の量子化特性である。(図7,9の例はデッドゾーン幅dz=0の発明の量子化特性とも呼べる。) 図7と図8とを比較すると、デッドゾーン幅dzによってdz=2qよりも小さい入力cofの出力i_cofが0なる。一方、図9では量子化ステップサイズ4倍の量子化によって2qよりも小さい入力cofの出力i_cofが0になる。
このことは“発明によって、デッドゾーン幅dz以下の入力に対して、量子化ステップサイズqを変更することなく量子化ステップサイズq’=4qの量子化を行った”ことを意味する。
またデッドゾーン幅は、動画像ビットストリームに付加して伝送する必要性がない。
つまり、変換係数ごとに前記デッドゾーン幅dzを可変とすることで“量子化付加情報追加することなく、変換係数ごとに自由に量子化できる”ことを意味する。
前記デッドゾーン幅dzを、単純にブロックの予測モードだけでなく、ブロックの絵柄、ブロックの予測性能あるいはブロック内の直交変換係数の分布も考慮して制御することによって、ブロックの視覚感度あるいはブロック内の変換係数の視覚感度に最適な量子化を実現できる。
本発明の参考例1のブロックデッドゾーンスケール生成装置202が供給するデッドゾーンスケールdz_scale によって、量子化付加情報追加することなく、ブロックの絵柄/ブロックの予測性能を考慮して制御できる。つまり、図10に示される如く、空間領域でのブロックの視覚感度に応じた量子化強度設定を可能とする。
本発明により、空間領域でのブロックの視覚感度に適した量子化強度設定が可能となり、前記視覚感度の低いブロックでの余分な発生符号量を削減できる。これにより、画像フレーム全体の発生符号量も削減され、画像フレーム全体の量子化パラメータが小さくなる。この結果、空間領域で視覚感度の高いブロックの量子化が従来方式よりも細かくなり、より高画質に符号化される。
以上で、参考例1の説明を終わる。
[参考例2]
本発明の参考例2について説明する。
図11に本発明の参考例2の構成を示す。参考例2の構成は、参考例1の構成におけるブロックデッドゾーンスケール生成装置202の代わりに、空間周波数デッドゾーンスケール生成装置203を備える。空間周波数デッドゾーンスケール生成装置203は、画像フレームのラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)をデッドゾーン生成装置201に供給する。
尚、以下の説明では、説明を具体化するために、画像フレームのサイズをQCIF(176×144)サイズ、MBのサイズを16×16サイズ、MBを構成するブロックのサイズを4×4サイズとする。ただし当然、その他のサイズでも本発明を適用できることは言うまでもない。
また、以下では、参考例2における特徴である空間周波数デッドゾーンスケール生成装置203を説明する。なお、参考例1の構成と同様なものについては詳細な説明は省略する。
空間周波数デッドゾーンスケール生成装置203は、MBを構成する各ブロックの直交変換係数の分布に適したデッドゾーンスケールを生成する。
空間周波数デッドゾーンスケール生成装置203の入出力を以下で説明する。
空間周波数デッドゾーンスケール生成装置203への入力は、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応する入力画像信号org(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応する予測モードmode(b)(0≦b≦15)、動きベクトルmv(b,dir)(0≦b≦15, 0≦dir≦1)である。ここでdirは動きベクトルの方向を示し0で横方向、1で縦方向とする。
予測モードには、同一画像フレーム内から予測するフレーム内予測モード(動きベクトル0本)、過去または未来の画像フレーム1枚から予測するフレーム間予測モード(動きベクトル1本)、未来および過去の2枚のフレームから予測する双方向フレーム間予測モード(動きベクトル2本)がある。
空間周波数デッドゾーンスケール生成装置203の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
以上で、空間周波数デッドゾーンスケール生成装置203の入出力の説明を終わる。
次に、空間周波数デッドゾーンスケール生成装置203の内部構成を図12に示し、その動作を説明する。
空間周波数デッドゾーンスケール生成装置203は、空間周波数特性設定装置2031と特性タイプ別デッドゾーンスケール装置2032によって構成される。
空間周波数特性設定装置2031は入力された画像、予測モードおよび動きベクトルを用いて、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックの直交変換係数の分布に応じた特性タイプtype(b)(0≦b≦15、0≦type(b)≦3)を出力する。
図13を参照して、空間周波数特性設定装置2031の動作を説明する。
ステップS4101では、ブロックbの予測モードがフレーム内予測かを判定する。
フレーム内予測であればステップS41011を実行する。
ステップS4101では、式(12)の値が予め決めた閾値edge_thよりも大きければブロックbをブロックbの特性タイプtype(b)=4として終了する。そうでなければブロックbの特性タイプtype(b)=0として終了する。
Range=max_v(b,i,j)-min_v(b,i,j) (12)
ここでmax_v(b,i,j)は、ブロックbの最大の画素値org(b,i,j)(0≦i≦3、0≦j≦3)を返す関数、min_v(b,i,j)は、ブロックbの最小の画素値org(b,i,j)(0≦i≦3、0≦j≦3)を返す関数である。
フレーム内予測ブロックは、フレーム間予測よりも予測性能が低く、大きな予測誤差が発生する。
ブロックが平坦あるいはテクスチャであれば、ブロック内の低周波数成分の変換係数を細かく量子化し、高周波成分の変換係数の粗く量子化するのが望ましい。
一方、ブロックがエッジであれば高周波数にも主観的に重要な係数が発生するので、各周波数の変換係数を一様な強度で量子化するのがよい。
ステップS4102では、ブロックbの予測モードが双方向予測モードかを判定する。
双方向予測モードであればブロックbの特性タイプtype(b)=1として終了する。そうでなければステップS4103を実行する。
双方向予測ブロック内は、パン領域あるいは静止領域であり視覚感度が高い。ただし、小さいパワーの予測誤差信号は、未来あるいは過去のフレームの圧縮で発生したノイズであるから、パワーの小さい予測誤差信号を落とす量子化強度の設定がよい。
ステップS4103では、式(13)によってブロックbの動きベクトルmv(b,dir)(0≦b≦15, 0≦dir≦1)の散らばりmsvを計算する。前記動きベクトルの散らばりが、予め決めた動きベクトル散らばり閾値mvs_thresよりも小さければ、ブロックbの特性タイプtype(b)=2として終了する。そうでなければステップS4104を実行する。
mvs=abs(mv(b,0)-u_mv(b,0))+abs(mv(b,1)-u_mv(b,1))
+abs(mv(b,0)-1_mv(b,0))+abs(mv(b,1)-1_mv(b,1)) (13)
ここでabs(x)は入力xの絶対値を返す関数、u_mv(b,dir)はブロックbの上側に隣接するブロックのdir方向の動きベクトルmvを返す関数、l_mv(b,dir)はブロックbの左側に隣接するブロックのdir方向の動きベクトルmvを返す関数である。
非孤立動きブロックは、パン領域あるいは静止領域であり視覚感度が高い。ただし、小さいパワーの予測誤差信号は、未来あるいは過去のフレームの圧縮で発生したノイズであるから、パワーの小さい予測誤差信号を落とす量子化強度の設定がよい。
ステップS4104では、ブロックbの縦および横の動きベクトル長mv(b,dir)(0≦b≦15, 0≦dir≦1)が、予め決めた高速動きベクトル長閾値hs_mv_thresよりも大きいか(高速動きブロックか)、小さいか(通常動きブロック)を判定する。高速動きブロックであればブロックbの特性タイプtype(b)=0、そうでなければ特性タイプtype(b)=3として終了する。
高速動きブロックは、動き予測が当たらず、フレーム内予測と同様に大きな予測誤差が発生する。しかし、動きが極端に速く人間の目には追従困難であるので、フレーム内予測と同様に、高周波成分の変換係数の量子化強度を強く設定するのがよい。
通常動きブロックは、フレーム内予測よりも予測誤差が小さくなる傾向がある。よって、高周波成分の変換係数の量子化強度設定をフレーム内予測よりも緩やかにするのがよい。
ステップS4101からS4104までの処理によって、各ブロックの変換係数の特性を分類することができる。
以上で、空間周波数特性設定装置2031の動作説明を終了する。
次に特性タイプ別デッドゾーンスケール装置2032の動作を説明する。
特性タイプ別デッドゾーンスケール装置2032は、空間周波数特性設定装置2031が供給する量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応する特性タイプtype(b)より、前記b番目ブロックのデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)を計算する。特性タイプ別(type0から3)に応じたブロックbのデッドゾーンスケールの計算方法を以下に示す。
type0(フレーム内予測ブロックでかつ非エッジあるいは高速動きブロック)
dz_scale(b,i,j)=B0(i,j) (14)
type1(双方向予測ブロック)
dz_scale(b,i,j)=B1 (15)
type2(非孤立動きブロック)
dz_scale(b,i,j)=B2 (16)
type3(通常動きブロック)
dz_scale(b,i,j)=B3(i,j) (17)
type4(フレーム内予測ブロックでかつエッジ)
dz_scale(b,i,j)=B4 (18)
ここでB0、B1, B2, B3、B4は、予め決められたパラメータである。B0(i,j)={{0, 1.1, 1.3, 1.6}, {1.1, 1.3, 1.6, 1.8}, {1.3, 1.6, 1.8, 2.0}, {1.6, 1.8, 2.0,2.8}}、B3(x)={{0, 1.1, 1.3, 1.4},{ 1.1, 1.3, 1.4, 1.6} ,{1.3, 1.4, 1.6, 1.8}, {1.4, 1.6, 1.8, 2.0}}であり、B4>B1>B2>1の関係がある。なおブロックの幅bwが本参考例の4以外の数値であれば、B0やB3の値は、式(19)によって算出できることを示しておく。
B(i,j)=K(i,j)×(i2+j2)0.25 (19)
ただし、K(i,j)は空間周波数(i,j)に依存した1よりも大きな値とする 尚、フレーム内予測モードでかつ予測方向pred_dirが予測判定110から供給可能であれば、前記予測方向pred_dirの向き(縦、横、斜め、その他)によってtype(0)の傾斜を変えるのがよい。例えば、予測の向きが横方向なのであれば、ブロック内部の絵柄は横方向には平坦であり、横方向iの周波数に対応する変換係数の量子化係数を縦方向jの周波数の変換係数よりも細かく量子化するデッドゾーンスケールdz_scaleを生成するのがよい。
以上で、特性タイプ別デッドゾーンスケール装置2032およびの空間周波数デッドゾーンスケール生成装置203の動作説明を終わる。
本発明の参考例2により、空間周波数デッドゾーンスケール生成装置203が供給するデッドゾーンスケールdz_scale によって、各ブロックの変換係数の分布に応じたデッドゾーン幅を設定できる。つまり、図14、15に示される如く、量子化付加情報追加することなく、各変換係数の周波数領域での視覚感度を考慮した量子化を可能とする。
本発明は、各ブロックの変換係数の分布に応じたデッドゾーンが設定され、この結果周波数領域で視覚感度が低い変換係数の発生符号量を削減できる。これにより、画像フレーム全体の発生符号量も削減され、画像フレーム全体の量子化パラメータが小さくなる。この結果、周波数領域で視覚感度が高い変換係数が従来方式よりも細かく量子化され、より高画質に符号化可能となる。
以上で、参考例2の説明を終わる。
[参考例3]
本発明の参考例3について説明する。
本発明の参考例3の構成を図16に示す。参考例3の構成は、参考例1の構成におけるブロックデッドゾーンスケール生成装置202の代わりに、ハイブリッドデッドゾーンスケール生成装置204を備える。空間周波数デッドゾーンスケール生成装置203は、画像フレームのラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)をデッドゾーン生成装置201に供給する。
尚、以下では、説明を具体化するために、画像フレームのサイズをQCIF(176×144)サイズ、MBのサイズを16×16サイズ、MBを構成するブロックのサイズを4×4サイズとする。ただし当然、その他のサイズでも本発明を適用できることは言うまでもない。
また、以下の説明では、参考例3における特徴であるハイブリッドデッドゾーンスケール生成装置204を説明する。尚、参考例1と同様な構成のものについては詳細な説明は省略する。
ハイブリッドデッドゾーンスケール生成装置204は、各ブロックの絵柄、各ブロックの予測性能、各ブロックの直交変換係数の分布に適したデッドゾーンスケールを生成する。
ハイブリッドデッドゾーンスケール生成装置204の入出力、動作を以下で説明する。
ハイブリッドデッドゾーンスケール生成装置204への入力は、量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックに対応する予測モードmode(b)(0≦b≦15)、動きベクトルmv(b,dir)(0≦b≦15, 0≦dir≦1)、入力画像信号org(b,i,j) (0≦b≦15、0≦i≦3、0≦j≦3)、予測誤差信号pd(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
ハイブリッドデッドゾーンスケール生成装置204の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
ハイブリッドデッドゾーンスケール生成装置204の内部構成を図17に示し、その動作を以下で説明する。
図17に示される如く、ハイブリッドデッドゾーン生成装置204は、ブロックデッドゾーンスケール生成装置202、空間周波数デッドゾーンスケール生成装置203、および混合器2041によって構成される。
ブロックデッドゾーンスケール生成装置202は参考例1、空間周波数デッドゾーンスケール生成装置203は参考例2で説明したものである。
よって以下では、混合器2041の入出力および動作のみを以下で説明する。
混合器2041への入力は、ブロックデッドゾーン装置202が供給する量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケール1dz_scale 1(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、空間周波数デッドゾーン装置203が供給する量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケール2dz_scale 2(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)、空間周波数デッドゾーン装置203が供給する量子化装置102が現在対象とするMBのラスタスキャン順でb番目のブロックの変換係数の分布を示す特性タイプtype(b)(0≦b≦15、0≦type(b)≦3)である。
混合器2041の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
混合器2041は、前記ブロックbの特性タイプtype(b)に応じてデッドゾーンスケールdz_scale (b,i,j)を計算する。
type0(フレーム内予測ブロックでかつ非エッジあるいは高速動きブロック)
dz_scale(b,i,j)=dz_scale1(b,i,j)×dz_scale2(b,i,j) (20)
type1(双方向予測ブロック)
dz_scale(b,i,j)=max(dz_scale1(b,i,j),dz_scale2(b,i,j)) (21)
type2(非孤立動きブロック)
dz_scale(b,i,j)=max(dz_scale1(b,i,j),dz_scale2(b,i,j)) (21)
type3(通常動きブロック)
dz_scale(b,i,j)=dz_scale1(b,i,j)×dz_scale2(b,i,j) (20)
type4(フレーム内予測ブロックでかつエッジ)
dz_scale(b,i,j)=max(dz_scale1(b,i,j),dz_scale2(b,i,j)) (21)
以上で、混合器2041およびハイブリッドデッドゾーンスケール生成装置204の動作説明を終了する。
本発明によって、ブロックの空間領域での視覚感度(絵柄、予測性能)、およびに変換係数の周波数領域での視覚感度(分布)に適した量子化を可能とする。これにより、画像フレーム全体の発生符号量も削減され、画像フレーム全体の量子化パラメータが小さくなる。この結果、空間領域で視覚感度の高いブロックおよび周波数領域で視覚感度の高い変換係数が従来方式よりも細かく量子化され、より高画質に符号化可能となる。
以上で参考例3の説明を終わる。
[実施例1]
本発明の実施例1について説明する。
本発明の実施例1の構成を図18に示す。実施例1の構成は、参考例1の構成におけるブロックデッドゾーンスケール生成装置202の代わりに、ギャップ補正デッドゾーンスケール生成装置205を備える。前記ギャップ補正デッドゾーンスケール生成装置205は、画像フレームのラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)をデッドゾーン生成装置201に供給する。
尚、以下の説明では、説明を具体化するために、画像フレームのサイズをQCIF(176×144)サイズ、MBのサイズを16×16サイズ、MBを構成するブロックのサイズを4×4サイズとする。ただし当然、その他のサイズでも本発明を適用できることは言うまでもない。
ギャップ補正デッドゾーンスケール生成装置205の入出力と動作を以下で説明する。
ギャップ補正デッドゾーンスケール生成装置205への入力は、量子化制御装置103から供給される量子化装置102が現在対象とするMBの実量子化パラメータmb_q、量子化制御装置103から供給される量子化装置102が現在対象とするMBの理想量子化パラメータideal_qである。
ギャップ補正デッドゾーンスケール生成装置205の出力は、量子化装置102が現在対象とするMB内のラスタスキャン順でb番目のブロックに対応するデッドゾーンスケールdz_scale(b,i,j)(0≦b≦15、0≦i≦3、0≦j≦3)である。
次に、図19を参照して、ギャップ補正デッドゾーンスケール生成装置205の動作を説明する。
ステップS501では、式(22)を用いて実量子化パラメータmb_qと理想量子化パラメータideal_qのギャップ量子化幅qstep_gapを計算する。なお、以下で共通して利用する量子化ステップサイズmb_q_stepは、mb_q_step=q_step_table[q]で設定される。前記量子化ステップサイズq_step_table[q]は、ベース符号化器で定義される量子化パラメータqに対応する量子化ステップサイズである(Q_MIN≦p≦Q_MAX、Q_MINおよびQ_MAXもベース符号化器依存)。
Figure 2010268508
ステップS502では、式(23)を用いてギャップ量子化幅qstep_gapからデッドゾーンスケールdz_scale(b,i,j)を計算する。
dz_scale(b,i,j)=qstep_gap (23)
以上で、ギャップ補正デッドゾーンスケール生成装置205の入出力と動作の説明を終了する。
ギャップ補正デッドゾーンスケール生成装置205の効果により、ベース符号化器の以下の2つ問題が発生した場合に、理想MB量子化強度と実MB量子化強度のギャップを補正することができる。
一つは、ベース符号化器の予測判定110が選択したMBの予測モードが現MBの量子化パラメータあるいは前MBの量子化パラメータとの差分が伝送不可能であり、かつベース符号化器の量子化制御装置103の理想MB量子化パラメータが実MB量子化パラメータよりも大きい場合である。
また、もう一つは、ベース符号化器に、MB毎に伝送可能な前MBの量子化パラメータとの差分delta_mb_Qに制限があり(例えば-2≦delta_mb_Q≦2)、かつベース符号化器の量子化制御装置103の理想MB量子化パラメータが実MB量子化パラメータよりも大きい場合である。
上記量子化強度のギャップの補正によって、視覚感度の低いMBで無駄に消費されていた符号量を削減することが可能となる。前記符号量の削減により、画像フレーム全体の量子化パラメータが小さくなり、視覚感度の高いMBをより細かく量子化される。これにより、本発明によって、画像を従来方式よりも高画質に符号化できる。
以上で実施例1の説明を終わる。
[実施例2]
本発明の実施例2について説明する。
本発明による画像符号化装置は、以上の説明からも明らかなように、ハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。
図20は、本発明による動画像符号化装置をインプリメントした情報処理システムの一般的ブロック構成図である。
図20に示す情報処理システム(コンピュータ)は、プロセッサA1001,プログラムメモリA1002,記憶媒体A1003およびA1004からなる。記憶媒体A1003およびA1004は、別個の記憶媒体であってもよいし、同一の記憶媒体からなる記憶領域であってもよい。記憶媒体としては、ハードディスク等の磁気記憶媒体を用いることができる。
以上の如く、本発明は、発明は画像の変換符号化技術において、変換係数の周波数領域での視覚感度、複数変換係数を構成要素とするブロックの空間領域での視覚感度に応じたデッドゾーン幅を設定する手段を具備し、これによって、変換係数の周波数領域での視覚感度および複数変換係数を構成要素とするブロックの空間領域での視覚感度に応じた量子化機能を提供することが可能である。
また、本発明は、量子化パラメータによって決定される量子化幅に依存することなく、周波数領域で視覚感度の低い変換係数、および空間領域で視覚感度の低いブロックに無駄に消費されていた符号量を削減でき、符号量の削減によって、画像フレーム全体の量子化が従来方式よりも細かくなり、周波数領域で視覚感度の高い変換係数および空間領域で視覚感度の高いブロックが高画質に符号化される。

Claims (3)

  1. 画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成するステップを備える画像符号化方法において、
    入力動画像を目標の画質で符号化するための理想量子化パラメータを計算するステップと、
    前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するステップと、
    評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化するステップとを備えることを特徴とする画像符号化方法。
  2. 画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成する変換手段を備える画像符号化装置において、
    入力動画像を目標の画質で符号化するための理想量子化パラメータを計算する量子化制御手段と、
    前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するデッドゾーンスケール生成手段と、
    評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化する量子化手段とを備えることを特徴とする画像符号化装置。
  3. コンピュータを、
    入力動画像をブロック単位に空間領域から周波数領域に変換することによりブロック単位の変換係数を生成する変換手段、
    前記入力動画像を目標の画質で符号化するための理想量子化パラメータを計算する量子化制御手段、
    前記理想量子化パラメータに対応する量子化幅と符号化出力に用いる量子化パラメータに対応する量子化幅との関係を評価するデッドゾーンスケール生成手段と、
    評価した関係に対応してデッドゾーン幅を設定して前記変換係数を量子化する量子化手段として機能させることを特徴とする画像符号化の制御プログラム。
JP2010164660A 2004-02-20 2010-07-22 画像符号化方法、その装置及びその制御プログラム Expired - Fee Related JP4952828B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010164660A JP4952828B2 (ja) 2004-02-20 2010-07-22 画像符号化方法、その装置及びその制御プログラム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2004044011 2004-02-20
JP2004044011 2004-02-20
JP2010164660A JP4952828B2 (ja) 2004-02-20 2010-07-22 画像符号化方法、その装置及びその制御プログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2006510197A Division JP4613909B2 (ja) 2004-02-20 2005-02-15 画像符号化方法、その装置及びその制御プログラム

Publications (2)

Publication Number Publication Date
JP2010268508A true JP2010268508A (ja) 2010-11-25
JP4952828B2 JP4952828B2 (ja) 2012-06-13

Family

ID=34879326

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2006510197A Expired - Fee Related JP4613909B2 (ja) 2004-02-20 2005-02-15 画像符号化方法、その装置及びその制御プログラム
JP2010164660A Expired - Fee Related JP4952828B2 (ja) 2004-02-20 2010-07-22 画像符号化方法、その装置及びその制御プログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2006510197A Expired - Fee Related JP4613909B2 (ja) 2004-02-20 2005-02-15 画像符号化方法、その装置及びその制御プログラム

Country Status (7)

Country Link
US (1) US8743956B2 (ja)
EP (3) EP2611157A1 (ja)
JP (2) JP4613909B2 (ja)
KR (1) KR100860147B1 (ja)
CN (1) CN1922886B (ja)
TW (1) TWI255651B (ja)
WO (1) WO2005081540A1 (ja)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8743956B2 (en) 2004-02-20 2014-06-03 Nec Corporation Image encoding method, device thereof, and control program thereof
US8422546B2 (en) * 2005-05-25 2013-04-16 Microsoft Corporation Adaptive video encoding using a perceptual model
JP2007151075A (ja) * 2005-10-31 2007-06-14 Seiko Epson Corp 印刷装置、印刷方法、画像処理装置、画像処理方法、印刷プログラム、画像処理プログラム、及び記録媒体
US8059721B2 (en) 2006-04-07 2011-11-15 Microsoft Corporation Estimating sample-domain distortion in the transform domain with rounding compensation
US20070237237A1 (en) * 2006-04-07 2007-10-11 Microsoft Corporation Gradient slope detection for video compression
US8503536B2 (en) 2006-04-07 2013-08-06 Microsoft Corporation Quantization adjustments for DC shift artifacts
US7995649B2 (en) 2006-04-07 2011-08-09 Microsoft Corporation Quantization adjustment based on texture level
US8711925B2 (en) 2006-05-05 2014-04-29 Microsoft Corporation Flexible quantization
US8238424B2 (en) 2007-02-09 2012-08-07 Microsoft Corporation Complexity-based adaptive preprocessing for multiple-pass video compression
US8498335B2 (en) * 2007-03-26 2013-07-30 Microsoft Corporation Adaptive deadzone size adjustment in quantization
US20080240257A1 (en) * 2007-03-26 2008-10-02 Microsoft Corporation Using quantization bias that accounts for relations between transform bins and quantization bins
US8243797B2 (en) 2007-03-30 2012-08-14 Microsoft Corporation Regions of interest for quality adjustments
US8442337B2 (en) 2007-04-18 2013-05-14 Microsoft Corporation Encoding adjustments for animation content
US8331438B2 (en) * 2007-06-05 2012-12-11 Microsoft Corporation Adaptive selection of picture-level quantization parameters for predicted video pictures
US20090060027A1 (en) * 2007-08-30 2009-03-05 Tektronix, Inc. Compressed Signal Subjective Quality Ratings Prediction
JP5055078B2 (ja) * 2007-10-01 2012-10-24 キヤノン株式会社 画像処理装置及びその方法
KR101385957B1 (ko) * 2007-10-04 2014-04-17 삼성전자주식회사 복호화기에서의 양자화 계수 조정 방법 및 장치
EP2046053A1 (en) * 2007-10-05 2009-04-08 Thomson Licensing Method and device for adaptively quantizing parameters for image coding
KR100939917B1 (ko) 2008-03-07 2010-02-03 에스케이 텔레콤주식회사 움직임 예측을 통한 부호화 시스템 및 움직임 예측을 통한부호화 방법
US8189933B2 (en) 2008-03-31 2012-05-29 Microsoft Corporation Classifying and controlling encoding quality for textured, dark smooth and smooth video content
US20090262801A1 (en) * 2008-04-17 2009-10-22 Qualcomm Incorporated Dead zone parameter selections for rate control in video coding
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
CN101742323B (zh) * 2008-11-05 2013-05-01 上海天荷电子信息有限公司 无再损视频编码和解码的方法和装置
JP5158003B2 (ja) * 2009-04-14 2013-03-06 ソニー株式会社 画像符号化装置と画像符号化方法およびコンピュータ・プログラム
JP5484083B2 (ja) * 2010-01-14 2014-05-07 株式会社メガチップス 画像処理装置
BR112013008313A2 (pt) * 2010-10-05 2020-09-15 Empire Technology Devolopment Llc método de geração de dados de profundidade, dispositivo de geração de dados de profundidade e sistema para geração de dados de profundidade
CA2909259C (en) 2011-03-09 2020-01-14 Nec Corporation Video encoding and decoding device and method in which the granularity of the quantization is controlled
JP6265414B2 (ja) 2011-06-28 2018-01-24 日本電気株式会社 映像符号化装置及び映像復号装置
US20130188691A1 (en) 2012-01-20 2013-07-25 Sony Corporation Quantization matrix design for hevc standard
WO2015045301A1 (ja) * 2013-09-27 2015-04-02 日本電気株式会社 映像符号化装置、映像符号化方法および映像符号化プログラム
US10356428B2 (en) * 2015-04-13 2019-07-16 Qualcomm Incorporated Quantization parameter (QP) update classification for display stream compression (DSC)
EP3364655A4 (en) * 2015-11-11 2018-10-10 Samsung Electronics Co., Ltd. Method and apparatus for decoding video, and method and apparatus for encoding video
US20180041870A1 (en) * 2016-08-05 2018-02-08 Wymond Choy Detection Using NFC Open Circuit
KR102636100B1 (ko) 2016-12-16 2024-02-13 삼성전자주식회사 데드존에 기초하여 양자화를 수행하는 인코더 및 이를 포함하는 비디오 처리 시스템

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6146685A (ja) * 1984-08-13 1986-03-06 Nec Corp 動画像信号の予測符号化装置
JPS62209984A (ja) * 1986-03-10 1987-09-16 Nec Corp 画像信号の符号化方法およびその装置
JPH02105792A (ja) * 1988-10-14 1990-04-18 Nippon Telegr & Teleph Corp <Ntt> 直交変換係数量子化回路
JPH0440118A (ja) * 1990-06-05 1992-02-10 Matsushita Electric Ind Co Ltd 量子化器
JPH05308629A (ja) * 1992-05-01 1993-11-19 Olympus Optical Co Ltd 動画像符号化方式
JPH07236142A (ja) * 1993-10-18 1995-09-05 Mitsubishi Electric Corp 高能率符号化装置及び復号化装置
JPH1066079A (ja) * 1996-08-22 1998-03-06 Nec Corp 適応量子化制御装置
JP2003230142A (ja) * 2001-11-30 2003-08-15 Sony Corp 画像情報符号化方法及び装置、並びにプログラム及び記録媒体
WO2005081540A1 (ja) * 2004-02-20 2005-09-01 Nec Corporation 画像符号化方法、その装置及びその制御プログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1066079A (en) * 1906-06-30 1913-07-01 Ashton Valve Company Signal for trains.
CA1277416C (en) * 1984-08-13 1990-12-04 Akihiro Furukawa Inter-frame predictive coding apparatus for video signal
JPH06146685A (ja) * 1992-10-30 1994-05-27 Oi Seisakusho Co Ltd 自動車用ドアロックの操作装置
US5724097A (en) * 1993-10-18 1998-03-03 Mitsubishi Denki Kabushiki Kaisha Adaptive quantization of video based on edge detection
JP3788823B2 (ja) * 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置
US6434196B1 (en) * 1998-04-03 2002-08-13 Sarnoff Corporation Method and apparatus for encoding video information
US6408026B1 (en) * 1999-08-06 2002-06-18 Sony Corporation Deadzone quantization method and apparatus for image compression
US7003038B2 (en) * 1999-09-27 2006-02-21 Mitsubishi Electric Research Labs., Inc. Activity descriptor for video sequences
US6963609B2 (en) * 2000-01-12 2005-11-08 Koninklijke Philips Electronics N.V. Image data compression
US7280700B2 (en) * 2002-07-05 2007-10-09 Microsoft Corporation Optimization techniques for data compression
KR101233236B1 (ko) 2002-07-29 2013-02-14 퀄컴 인코포레이티드 디지털 이미지 인코딩
US6853318B1 (en) * 2003-12-30 2005-02-08 Eastman Kodak Company Digital image compression utilizing shrinkage of subband coefficients
EP1564997A1 (en) * 2004-02-12 2005-08-17 Matsushita Electric Industrial Co., Ltd. Encoding and decoding of video images based on a quantization with an adaptive dead-zone size

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6146685A (ja) * 1984-08-13 1986-03-06 Nec Corp 動画像信号の予測符号化装置
JPS62209984A (ja) * 1986-03-10 1987-09-16 Nec Corp 画像信号の符号化方法およびその装置
JPH02105792A (ja) * 1988-10-14 1990-04-18 Nippon Telegr & Teleph Corp <Ntt> 直交変換係数量子化回路
JPH0440118A (ja) * 1990-06-05 1992-02-10 Matsushita Electric Ind Co Ltd 量子化器
JPH05308629A (ja) * 1992-05-01 1993-11-19 Olympus Optical Co Ltd 動画像符号化方式
JPH07236142A (ja) * 1993-10-18 1995-09-05 Mitsubishi Electric Corp 高能率符号化装置及び復号化装置
JPH1066079A (ja) * 1996-08-22 1998-03-06 Nec Corp 適応量子化制御装置
JP2003230142A (ja) * 2001-11-30 2003-08-15 Sony Corp 画像情報符号化方法及び装置、並びにプログラム及び記録媒体
WO2005081540A1 (ja) * 2004-02-20 2005-09-01 Nec Corporation 画像符号化方法、その装置及びその制御プログラム

Also Published As

Publication number Publication date
EP2611157A1 (en) 2013-07-03
KR20060118593A (ko) 2006-11-23
JP4613909B2 (ja) 2011-01-19
CN1922886A (zh) 2007-02-28
TWI255651B (en) 2006-05-21
US20070140333A1 (en) 2007-06-21
JPWO2005081540A1 (ja) 2008-03-06
WO2005081540A1 (ja) 2005-09-01
EP2290986A1 (en) 2011-03-02
CN1922886B (zh) 2012-08-01
EP1718080A1 (en) 2006-11-02
KR100860147B1 (ko) 2008-09-24
TW200529672A (en) 2005-09-01
US8743956B2 (en) 2014-06-03
JP4952828B2 (ja) 2012-06-13
EP1718080A4 (en) 2011-01-12

Similar Documents

Publication Publication Date Title
JP4952828B2 (ja) 画像符号化方法、その装置及びその制御プログラム
JP4747975B2 (ja) 画像処理装置および方法、プログラム、並びに、記録媒体
JP4187405B2 (ja) 符号化方式におけるオブジェクトベースのレート制御装置及びその方法
US8498335B2 (en) Adaptive deadzone size adjustment in quantization
US8331449B2 (en) Fast encoding method and system using adaptive intra prediction
US6690833B1 (en) Apparatus and method for macroblock based rate control in a coding system
KR20060072070A (ko) 이미지 또는 픽쳐 시퀀스를 인코딩하는데 사용될 수 있는양자화 매트릭스를 발생하는 방법 및 장치
US7885341B2 (en) Spatial filtering for improving compression efficiency of motion compensated interframe coding
CN105379269A (zh) 兴趣区域感知的视频编码
US7430329B1 (en) Human visual system (HVS)-based pre-filtering of video data
JP2004254274A (ja) データ圧縮のための改良された最適化技術
US7016413B2 (en) Adaptively encoding a picture of contrasted complexity having normal video and noisy video portions
JP2003037843A (ja) 画像処理装置および方法、記録媒体、並びにプログラム
KR102171227B1 (ko) 비트율 제어 방법 및 이의 장치
KR970073152A (ko) 적응적인 양자화 조절 기능을 갖는 개선된 영상 부호화 시스템 및 그 양자화 제어방법(improved image coding system using adaptive quantizatio technique and adaptive quantization control method thereof)
KR100708182B1 (ko) 동영상 부호화기의 비트율 제어 장치 및 방법
JP6946979B2 (ja) 動画像符号化装置、動画像符号化方法、及び動画像符号化プログラム
JP4532607B2 (ja) ブロック・ベースのコード化システムにおいてコード化モードを選択するための装置および方法
JP2023530630A (ja) ビデオ符号化のための適応量子化器設計
JP2002534864A (ja) ビデオデータの帯域幅スケーラビリティのための適応バッファ及び量子化調整スキーム
JPH05219496A (ja) 画像符号化装置及び動画像符号化装置
JP2022070176A (ja) 符号化装置及びプログラム
Tun et al. An efficient rate control algorithm for a wavelet video codec
JP2015008367A (ja) 画像処理装置、符号化装置、復号装置、及びプログラム
KR20100002413A (ko) 차영상 에이씨 신호의 조건적 누락을 이용한 동영상 부호량조정 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120214

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120227

R150 Certificate of patent or registration of utility model

Ref document number: 4952828

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150323

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees