JP2013121045A - 画像符号化装置及び画像符号化方法 - Google Patents
画像符号化装置及び画像符号化方法 Download PDFInfo
- Publication number
- JP2013121045A JP2013121045A JP2011267675A JP2011267675A JP2013121045A JP 2013121045 A JP2013121045 A JP 2013121045A JP 2011267675 A JP2011267675 A JP 2011267675A JP 2011267675 A JP2011267675 A JP 2011267675A JP 2013121045 A JP2013121045 A JP 2013121045A
- Authority
- JP
- Japan
- Prior art keywords
- sub
- block
- quantization
- step size
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000013139 quantization Methods 0.000 claims abstract description 112
- 230000015556 catabolic process Effects 0.000 claims description 29
- 238000006731 degradation reaction Methods 0.000 claims description 29
- 238000011156 evaluation Methods 0.000 claims description 17
- 230000000007 visual effect Effects 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【課題】視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像符号化装置を使った量子化方法を提供する。
【解決手段】入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に異なる量子化パラメータで符号化処理を行う。この結果、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像復号化装置が提供可能となる。
【選択図】図５
【解決手段】入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に異なる量子化パラメータで符号化処理を行う。この結果、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像復号化装置が提供可能となる。
【選択図】図５
Description
本発明は、画素相関を利用して映像データを圧縮する画像符号化技術、また圧縮された符号化データを映像データに伸張する画像復号化技術に関し、特に情報量削減に用いる量子化技術に関する。
ＭＰＥＧ−２、ＭＰＥＧ−４などで知られる画像符号化技術では、入力ピクチャを１６×１６画素のマクロブロック（以降、マクロブロックをＭＢと称する）と呼ばれる基本処理単位に分割して符号化処理を行う。
ＭＢ単位に行う符号化処理には、予測処理、変換処理、量子化処理、及びエントロピー符号化処理がよく知られている。
このうち、本発明に関わる量子化処理では、入力ブロックの各係数を、任意の量子化ステップサイズに基づいて、量子化を行う。
量子化ステップサイズをＱｓｔｅｐ、入力係数をＣ、量子化結果をＺとして、一般的な量子化処理の演算式（式（１））を次に示す。
ＭＢ単位に行う符号化処理には、予測処理、変換処理、量子化処理、及びエントロピー符号化処理がよく知られている。
このうち、本発明に関わる量子化処理では、入力ブロックの各係数を、任意の量子化ステップサイズに基づいて、量子化を行う。
量子化ステップサイズをＱｓｔｅｐ、入力係数をＣ、量子化結果をＺとして、一般的な量子化処理の演算式（式（１））を次に示す。
量子化ステップサイズＱｓｔｅｐを大きくすれば圧縮率は向上する。しかし、情報の欠落が多くなる。
ただし、情報の欠落が画質劣化に与える影響は、対象とするＭＢの絵柄によって異なる。具体的には、空や壁のように絵柄が単純な領域や、動きの少ない領域は画質劣化を知覚し易く、逆に絵柄が複雑な領域や、動きの激しい領域の画質劣化は知覚し難い傾向にある。
このような視覚特性を利用し、画質劣化を知覚し難い領域では、量子化ステップサイズを大きく設定し、逆に知覚し易い領域では、量子化ステップサイズを小さく設定することにより、主観品質を向上させることができる（特許文献１〜特許文献３参照。）。
ただし、情報の欠落が画質劣化に与える影響は、対象とするＭＢの絵柄によって異なる。具体的には、空や壁のように絵柄が単純な領域や、動きの少ない領域は画質劣化を知覚し易く、逆に絵柄が複雑な領域や、動きの激しい領域の画質劣化は知覚し難い傾向にある。
このような視覚特性を利用し、画質劣化を知覚し難い領域では、量子化ステップサイズを大きく設定し、逆に知覚し易い領域では、量子化ステップサイズを小さく設定することにより、主観品質を向上させることができる（特許文献１〜特許文献３参照。）。
図１によって、従来の量子化ステップサイズの制御について説明する。図１は、従来の符号化処理装置の処理ブロック構成を示す図である。１００は符号化処理装置、１０１はＭＢ分割部、１０２は劣化コスト評価部、１０３は量子化ステップサイズ判定部、１０４は予測処理部、１０５は変換処理部、１０６は量子化処理部、１０７はエントロピー符号化部、１０８は逆量子化部、１０９は逆変換処理部、１１０は再構成処理部である。
図１において、符号化処理部１００は、まず、入力画像をＭＢ分割部１０１に入力する。ＭＢ分割部１０１は、入力画像を１６×１６画素のＭＢと呼ばれるブロックに分割して、ＭＢを劣化コスト評価部１０２と予測処理部１０４に出力する。
劣化コスト評価部１０２は、入力したＭＢの画質劣化コスト値を算出し、量子化ステップサイズ判定部１０３に出力する。例えば、劣化コスト評価部１０２は、画素値の変化量を画質劣化コストとする場合には、次の式（２）及び式（３）を用いて画質劣化コスト値を算出する。
劣化コスト評価部１０２は、入力したＭＢの画質劣化コスト値を算出し、量子化ステップサイズ判定部１０３に出力する。例えば、劣化コスト評価部１０２は、画素値の変化量を画質劣化コストとする場合には、次の式（２）及び式（３）を用いて画質劣化コスト値を算出する。
量子化ステップサイズ判定部１０３は、まず、外部から入力された目標ビットレートに従い、基準となる量子化ステップサイズを決定する。続いて、劣化コスト評価部１０２から入力した画質劣化コスト値に基づき、画質が均一になるよう量子化ステップサイズを求める。
入力した画質劣化コスト値に基づいて量子化ステップサイズを決定するには、例えば、図１０に示すようなテーブル１０を用意する。テーブル１０中のＱｓｔｅｐは、基準となる量子化ステップサイズを示す。
量子化ステップサイズ判定部１０３は、決定した量子化ステップサイズを量子化処理部１０６に出力する。なお、量子化ステップサイズは、ＭＢ毎に設定される。
入力した画質劣化コスト値に基づいて量子化ステップサイズを決定するには、例えば、図１０に示すようなテーブル１０を用意する。テーブル１０中のＱｓｔｅｐは、基準となる量子化ステップサイズを示す。
量子化ステップサイズ判定部１０３は、決定した量子化ステップサイズを量子化処理部１０６に出力する。なお、量子化ステップサイズは、ＭＢ毎に設定される。
予測処理部１０４は、ＭＢ近傍画素との相関や、時間的に前後するフレームとの相関を利用して予測画像を生成し、予測画像とＭＢの差分画像を変換処理部１０５に出力する。
変換処理部１０５は、入力した差分画像を２次元ＤＣＴ変換などで知られる直交変換を利用して、４×４ブロック、または８×８ブロック単位に変換し、量子化処理部１０６に出力する。
量子化処理部１０６は、入力した変換係数を、量子化ステップサイズ判定部１０３から入力した量子化ステップサイズに基づいて量子化し、エントロピー符号化部１０７と逆量子化部１０８に出力する。
変換処理部１０５は、入力した差分画像を２次元ＤＣＴ変換などで知られる直交変換を利用して、４×４ブロック、または８×８ブロック単位に変換し、量子化処理部１０６に出力する。
量子化処理部１０６は、入力した変換係数を、量子化ステップサイズ判定部１０３から入力した量子化ステップサイズに基づいて量子化し、エントロピー符号化部１０７と逆量子化部１０８に出力する。
エントロピー符号化部１０７は、入力した量子化係数及び量子化ステップサイズなどの符号化制御情報を変換して、ビットストリームとして出力する。また、エントロピー符号化部１０７は、ビットストリームに変換する時に発生した符号量（発生符号量）を量子化ステップサイズ判定部１０３に出力する。
量子化ステップサイズ判定部１０３は、発生符号量が目標ビットレートに一致するかを監視し、一致しない場合には基準となる量子化ステップサイズを微調整して、発生符号量が目標ビットレートに一致させるよう制御を行う。
また量子化係数は、逆量子化部１０８による逆量子化、逆変換処理部１０９による逆変換、及び再構成処理部１１０による再構成によって再構成画像を生成し、予測処理部１０４に出力する。
量子化ステップサイズ判定部１０３は、発生符号量が目標ビットレートに一致するかを監視し、一致しない場合には基準となる量子化ステップサイズを微調整して、発生符号量が目標ビットレートに一致させるよう制御を行う。
また量子化係数は、逆量子化部１０８による逆量子化、逆変換処理部１０９による逆変換、及び再構成処理部１１０による再構成によって再構成画像を生成し、予測処理部１０４に出力する。
ＭＰＥＧ−２やＭＰＥＧ−４などの画像符号化技術では、量子化ステップサイズをＭＢ単位で制御する。
しかし、符号化対象となる画像は、ＭＢ境界とは無関係な画像である。そのため画像内に存在するオブジェクトの境界部分に位置するＭＢでは、複雑な領域と単純な領域が混在する場合がある。こうしたオブジェクト境界のＭＢに、低い量子化ステップサイズを設定すると、複雑な領域の符号量が大きくなり圧縮率が低下する。逆に高い量子化ステップサイズを設定すると、単純な領域の画質劣化が目立つという問題があった。
しかし、符号化対象となる画像は、ＭＢ境界とは無関係な画像である。そのため画像内に存在するオブジェクトの境界部分に位置するＭＢでは、複雑な領域と単純な領域が混在する場合がある。こうしたオブジェクト境界のＭＢに、低い量子化ステップサイズを設定すると、複雑な領域の符号量が大きくなり圧縮率が低下する。逆に高い量子化ステップサイズを設定すると、単純な領域の画質劣化が目立つという問題があった。
例えば、図２は、符号化前の原画像を示す図であり、図３は符号化後の画像を示す図である。図２及び図３における符号化処理では、ＭＢ内で画素値の変化が大きい場合には高い量子化ステップサイズで量子化処理を行い、変化が小さい場合には低い量子化ステップサイズで量子化処理を行っている。
符号化後の画像を見ると、木の葉部分の劣化が目立たないが、木の葉と空の境界部分（破線の楕円で囲んだ部分）で符号化処理特有のブロックノイズが確認することができる。
符号化後の画像を見ると、木の葉部分の劣化が目立たないが、木の葉と空の境界部分（破線の楕円で囲んだ部分）で符号化処理特有のブロックノイズが確認することができる。
本発明の目的は、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像符号化方法を提供することである。
上記の目的を達成するために、本発明の画像符号化装置は、入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に異なる量子化パラメータで符号化処理を行うことを第１の特徴とする。また本発明の復号化処理装置は、ビットストリームに多重されたサブブロック単位の量子化ステップサイズ情報を抽出する手段を有し、さらに抽出した量子化ステップサイズ情報に従ってサブブロック単位に逆量子化処理をおこなう手段を有する。
上記本発明の第１の特徴の画像符号化装置において、前記サブブロック毎に劣化コストを評価する評価手段と、前記評価手段に基づいて前記サブブロックの画像領域について量子化ステップサイズを決定する決定手段と、前記決定した量子化ステップサイズに基づいて前記画像領域を量子化する量子化手段を備えたことを本発明の第２の特徴とする。
上記本発明の第１の特徴または第２の特徴の画像符号化装置において、前記サブブロック毎に異なる量子化パラメータで符号化した制御情報をビットストリームに多重する手段を備えたことを本発明の第３の特徴とする。
また、上記の目的を達成するために、本発明の画像符号化方法は、入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に劣化コストを評価し、前記評価に基づいて前記サブブロックの画像領域について量子化ステップサイズを決定し、前記決定した量子化ステップサイズに基づいて前記画像領域を量子化することによって、前記サブブロック毎に異なる量子化パラメータで符号化処理を行うことを本発明の第４の特徴とする。
上記本発明の第４の特徴の画像符号化方法において、前記サブブロック毎に異なる量子化パラメータで符号化した制御情報をビットストリームに多重することを本発明の第５の特徴とする。
本発明によれば、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像復号化装置が提供可能となる。
本発明における符号化処理装置では、ＭＢを、例えば、８×８画素のサブブロック単位に量子化ステップサイズを設定し、量子化処理を行う手段を有する。さらに設定されたサブブロック単位の量子化ステップサイズをビットストリームに多重する手段を有する。なお、復号化処理部では、ビットストリームに多重されたサブブロック単位の量子化ステップサイズ情報を抽出する手段を有し、さらに抽出した量子化ステップサイズ情報に従ってサブブロック単位に逆量子化処理を行う手段を有する。
以下に本発明の一実施形態を図面等を用いて説明する。なお、以下の説明は、本発明の一実施形態を説明するためのものであり、本願発明の範囲を制限するものではない。従って、当業者であればこれらの各要素若しくは全要素をこれと均等なものに置換した実施形態を採用することが可能であり、これらの実施形態も本願発明の範囲に含まれる。
また、既に説明した図面を含め、以降の各図の説明において、共通な機能を有する構成要素には同一の参照番号を付し、説明を省略する。
以下に本発明の一実施形態を図面等を用いて説明する。なお、以下の説明は、本発明の一実施形態を説明するためのものであり、本願発明の範囲を制限するものではない。従って、当業者であればこれらの各要素若しくは全要素をこれと均等なものに置換した実施形態を採用することが可能であり、これらの実施形態も本願発明の範囲に含まれる。
また、既に説明した図面を含め、以降の各図の説明において、共通な機能を有する構成要素には同一の参照番号を付し、説明を省略する。
本発明における符号化処理装置の一実施例を図５によって説明する。図５は、本発明の符号化処理装置の処理ブロックの構成の一実施例を示す図である。５００は符号化処理装置、５０２はサブブロック劣化コスト評価部、５０３はサブブロック量子化ステップサイズ判定部、５０７はエントロピー符号化部、５１１はサブブロック量子化情報多重部である。
本発明における符号化処理装置５００は、従来の符号化処理装置１００の構成に対し、サブブロック単位に劣化コストを評価するサブブロック劣化コスト評価部５０２と、サブブロック単位に量子化ステップサイズ判定を行うサブブロック量子化ステップサイズ判定部５０３と、エントロピー符号化部５０７内に設けたサブブロック単位の量子化情報を多重するサブブロック量子化情報多重部５１１を備える。
本発明における符号化処理装置５００は、従来の符号化処理装置１００の構成に対し、サブブロック単位に劣化コストを評価するサブブロック劣化コスト評価部５０２と、サブブロック単位に量子化ステップサイズ判定を行うサブブロック量子化ステップサイズ判定部５０３と、エントロピー符号化部５０７内に設けたサブブロック単位の量子化情報を多重するサブブロック量子化情報多重部５１１を備える。
図５において、サブブロック劣化コスト評価部５０２は、入力したＭＢを、例えば８×８画素サイズのサブブロックに分割し、下記式（４）及び式（５）を用いて、サブブロック単位の劣化コストを評価し、サブブロック量子化ステップサイズ判定部５０３に出力する。即ち、サブブロック劣化コスト評価部５０２は、マクロブロック内を８×８画素サイズのサブブロックに分割し、サブブロック毎に異なる量子化パラメータで符号化処理を行い、サブブロック量子化ステップサイズ判定部５０３に出力する。
サブブロック量子化ステップサイズ判定部５０３は、入力したサブブロック単位の劣化コスト値から、サブブロック単位の量子化ステップサイズを判定し、量子化処理部１０６に出力する。サブブロック単位の劣化コスト値と、サブブロック単位の量子化ステップサイズの対応付けは、図１１に示すテーブル１１で求める。図１１のテーブル１１で使用する閾値は、従来例（図１０）で示した閾値Ｔｈの４分の１程度であるのが望ましい。なお、サブブロック単位の量子化ステップサイズは、各ＭＢのサブブロック毎に設定される。
量子化処理部１０６は、入力した変換係数を、サブブロック量子化ステップサイズ判定部５０３から入力したサブブロック単位の量子化ステップサイズに基づいて量子化し、エントロピー符号化部５０７と逆量子化部１０８に出力する。
量子化処理部１０６は、入力した変換係数を、サブブロック量子化ステップサイズ判定部５０３から入力したサブブロック単位の量子化ステップサイズに基づいて量子化し、エントロピー符号化部５０７と逆量子化部１０８に出力する。
エントロピー符号化部５０７は、入力した量子化係数及び量子化ステップサイズなどの符号化制御情報を変換して、ビットストリームとして出力する。また、エントロピー符号化部５０７は、ビットストリームに変換する時に発生した符号量（発生符号量）を量子化ステップサイズ判定部１０３に出力する。
即ち、エントロピー符号化部５０７は、サブブロック毎に異なる量子化パラメータで符号化した制御情報をビットストリームに多重して出力する。
即ち、エントロピー符号化部５０７は、サブブロック毎に異なる量子化パラメータで符号化した制御情報をビットストリームに多重して出力する。
続いて、エントロピー符号化部５０７のサブブロック量子化情報多重部５１１について説明する。
サブブロック量子化情報多重部５１１では、復号化処理において正しく復号できるように、量子化ステップサイズに対する△値、ＭＢ内のどのサブブロックに△値を適用するか、という２つの情報を多重する。
まず量子化ステップサイズに対する△値は、ピクチャヘッダに多重し、ピクチャ内毎に固定とするのが望ましい。
Ｈ．２６４符号化標準への拡張実施例としては、ピクチャパラメータセット（図８参照）に、図６のようなsecond_qp_delta_mode_flag、及びsecond_qp_deltaシンタクスを追加する。
second_qp_delta_mode_flagは、サブブロック単位の△値による量子化制御のモード情報を示す。また、second_qp_deltaシンタクスは、ピクチャ内の基準ＱＰに対する△値を示す。
サブブロック量子化情報多重部５１１では、復号化処理において正しく復号できるように、量子化ステップサイズに対する△値、ＭＢ内のどのサブブロックに△値を適用するか、という２つの情報を多重する。
まず量子化ステップサイズに対する△値は、ピクチャヘッダに多重し、ピクチャ内毎に固定とするのが望ましい。
Ｈ．２６４符号化標準への拡張実施例としては、ピクチャパラメータセット（図８参照）に、図６のようなsecond_qp_delta_mode_flag、及びsecond_qp_deltaシンタクスを追加する。
second_qp_delta_mode_flagは、サブブロック単位の△値による量子化制御のモード情報を示す。また、second_qp_deltaシンタクスは、ピクチャ内の基準ＱＰに対する△値を示す。
続いて、ＭＢ内のどのサブブロックに△値を適用するか、という情報は、ＭＢヘッダに多重するのが望ましい。Ｈ．２６４符号化標準への拡張実施例を図９に示す。
ＭＢヘッダには、図７のようなsecond_qp_delta_flagとsecond_qp_delta_mapの２種類のシンタクスを追加する（図９参照）。
second_qp_delta_flagは、前述したピクチャヘッダのecond_qp_delta_modeが０でない場合に多重される。second_qp_delta_flagが０の時は、ＭＢ内は全て共通のＱＰで量子化されていることを示し、１のときは、後述するsecond_qp_delta_mapが示すサブブロックの量子化パラメータにsecond_qp_delta値を補正して量子化されることを示す。
second_qp_delta_mapは、ＱＰ＋△値となるサブブロックの位置を示すシンタクスであり、３bitまたは４bit符号長を有する。
ピクチャヘッダのsecond_qp_delta_modeが１のとき、second_qp_delta_mapは、３bitのシンタクスとなり、マッピングは図６のようになる。
ＭＢヘッダには、図７のようなsecond_qp_delta_flagとsecond_qp_delta_mapの２種類のシンタクスを追加する（図９参照）。
second_qp_delta_flagは、前述したピクチャヘッダのecond_qp_delta_modeが０でない場合に多重される。second_qp_delta_flagが０の時は、ＭＢ内は全て共通のＱＰで量子化されていることを示し、１のときは、後述するsecond_qp_delta_mapが示すサブブロックの量子化パラメータにsecond_qp_delta値を補正して量子化されることを示す。
second_qp_delta_mapは、ＱＰ＋△値となるサブブロックの位置を示すシンタクスであり、３bitまたは４bit符号長を有する。
ピクチャヘッダのsecond_qp_delta_modeが１のとき、second_qp_delta_mapは、３bitのシンタクスとなり、マッピングは図６のようになる。
ピクチャヘッダのsecond_qp_delta_modeが２のとき、second_qp_delta_mapは、４bitのシンタクスとなり、マッピングは図７に示すようになる。
ここまで説明した本発明の実施形態を用いることにより、サブブロック単位に量子化パラメータの制御が可能となり、オブジェクト境界に位置するＭＢの高品質な符号化が可能となる。
図４は、本発明による符号化画像を示す。本例における符号化処理では、ＭＢを８×８画素のサブブロックに分割し、サブブロック単位に画素値の変化量を評価して、量子化ステップサイズを制御している。
その結果、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像符号化方法を実現した。
図４は、本発明による符号化画像を示す。本例における符号化処理では、ＭＢを８×８画素のサブブロックに分割し、サブブロック単位に画素値の変化量を評価して、量子化ステップサイズを制御している。
その結果、視覚特性に応じてサブブロック毎の量子化処理を行うことにより、高効率な画像符号化装置及び画像符号化方法を実現した。
１００：符号化処理装置、 １０１：ＭＢ分割部、 １０２：劣化コスト評価部、 １０３：量子化ステップサイズ判定部、 １０４：予測処理部、 １０５：変換処理部、 １０６：量子化処理部、 １０７：エントロピー符号化部、 １０８：逆量子化部、 １０９：逆変換処理部、 １１０：再構成処理部、 ５００：符号化処理装置、 ５０２：サブブロック劣化コスト評価部、 ５０３：サブブロック量子化ステップサイズ判定部、 ５０７：エントロピー符号化部、 ５１１：サブブロック量子化情報多重部。
Claims (3)
- 入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に異なる量子化パラメータで符号化処理を行うことを特徴とする画像符号化装置。
- 請求項１記載の画像符号化装置において、前記サブブロック毎に劣化コストを評価する評価手段と、前記評価手段に基づいて前記サブブロックの画像領域について量子化ステップサイズを決定する決定手段と、前記決定した量子化ステップサイズに基づいて前記画像領域を量子化する量子化手段を備えたことを特徴とする画像符号化装置。
- 入力画像を所定の第１のサイズのマクロブロックに分割し、分割された前記マクロブロック毎に所定の第２のサイズのサブブロックに分割し、前記サブブロック毎に劣化コストを評価し、前記評価に基づいて前記サブブロックの画像領域について量子化ステップサイズを決定し、前記決定した量子化ステップサイズに基づいて前記画像領域を量子化することによって、前記サブブロック毎に異なる量子化パラメータで符号化処理を行うことを特徴とする画像符号化方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011267675A JP5917117B2 (ja) | 2011-12-07 | 2011-12-07 | 画像符号化装置及び画像符号化方法 |
| PCT/JP2012/080882 WO2013084781A1 (ja) | 2011-12-07 | 2012-11-29 | 画像符号化装置及び画像符号化方法 |
| US14/363,109 US9503754B2 (en) | 2011-12-07 | 2012-11-29 | Image encoding device and image encoding method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011267675A JP5917117B2 (ja) | 2011-12-07 | 2011-12-07 | 画像符号化装置及び画像符号化方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2013121045A true JP2013121045A (ja) | 2013-06-17 |
| JP2013121045A5 JP2013121045A5 (ja) | 2015-01-15 |
| JP5917117B2 JP5917117B2 (ja) | 2016-05-11 |
Family
ID=48574151
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011267675A Active JP5917117B2 (ja) | 2011-12-07 | 2011-12-07 | 画像符号化装置及び画像符号化方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9503754B2 (ja) |
| JP (1) | JP5917117B2 (ja) |
| WO (1) | WO2013084781A1 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140328406A1 (en) | 2013-05-01 | 2014-11-06 | Raymond John Westwater | Method and Apparatus to Perform Optimal Visually-Weighed Quantization of Time-Varying Visual Sequences in Transform Space |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05145773A (ja) * | 1991-05-24 | 1993-06-11 | Internatl Business Mach Corp <Ibm> | ビデオ画像の符号化装置と方法 |
| JPH0670311A (ja) * | 1991-11-08 | 1994-03-11 | American Teleph & Telegr Co <Att> | 量子化パラメータ生成方法および装置 |
| JPH08289294A (ja) * | 1995-04-05 | 1996-11-01 | Internatl Business Mach Corp <Ibm> | 適応量子化による動画像圧縮システム |
| JP2011130050A (ja) * | 2009-12-16 | 2011-06-30 | Canon Inc | 画像符号化装置 |
| JP2011135269A (ja) * | 2009-12-24 | 2011-07-07 | Fujitsu Semiconductor Ltd | 量子化制御回路、量子化パラメータ変更方法、及び符号化回路 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4146444B2 (ja) | 2005-03-16 | 2008-09-10 | 株式会社東芝 | 動画像符号化の方法及び装置 |
| WO2008126135A1 (ja) * | 2007-03-20 | 2008-10-23 | Fujitsu Limited | 動画像符号化方法及び装置並びに動画像復号装置 |
| JP4768779B2 (ja) | 2008-06-02 | 2011-09-07 | 株式会社東芝 | 動画像符号化／復号化の方法及び装置 |
| WO2011064926A1 (ja) | 2009-11-30 | 2011-06-03 | 三菱電機株式会社 | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
-
2011
- 2011-12-07 JP JP2011267675A patent/JP5917117B2/ja active Active
-
2012
- 2012-11-29 WO PCT/JP2012/080882 patent/WO2013084781A1/ja active Application Filing
- 2012-11-29 US US14/363,109 patent/US9503754B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05145773A (ja) * | 1991-05-24 | 1993-06-11 | Internatl Business Mach Corp <Ibm> | ビデオ画像の符号化装置と方法 |
| JPH0670311A (ja) * | 1991-11-08 | 1994-03-11 | American Teleph & Telegr Co <Att> | 量子化パラメータ生成方法および装置 |
| JPH08289294A (ja) * | 1995-04-05 | 1996-11-01 | Internatl Business Mach Corp <Ibm> | 適応量子化による動画像圧縮システム |
| JP2011130050A (ja) * | 2009-12-16 | 2011-06-30 | Canon Inc | 画像符号化装置 |
| JP2011135269A (ja) * | 2009-12-24 | 2011-07-07 | Fujitsu Semiconductor Ltd | 量子化制御回路、量子化パラメータ変更方法、及び符号化回路 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20140376620A1 (en) | 2014-12-25 |
| WO2013084781A1 (ja) | 2013-06-13 |
| US9503754B2 (en) | 2016-11-22 |
| JP5917117B2 (ja) | 2016-05-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5806219B2 (ja) | ビデオ符号化及び復号化における埋め込み量子化パラメータ調整方法及び装置 | |
| EP2678944B1 (en) | Methods and devices for data compression using offset-based adaptive reconstruction levels | |
| US7738716B2 (en) | Encoding and decoding apparatus and method for reducing blocking phenomenon and computer-readable recording medium storing program for executing the method | |
| KR101394153B1 (ko) | 양자화 방법 및 장치, 역양자화 방법 및 장치 | |
| US10075725B2 (en) | Device and method for image encoding and decoding | |
| US10178391B2 (en) | Methods and devices for data compression using a non-uniform reconstruction space | |
| US9942550B2 (en) | Image encoding device, image encoding method and program, image decoding device, and image decoding method and program | |
| KR101599561B1 (ko) | 비디오 인코딩 및 디코딩에서 레이트 제어 정밀도를 위한 방법 및 장치 | |
| US10218974B2 (en) | Residual transformation and inverse transformation in video coding systems and methods | |
| JP2007184800A (ja) | 画像符号化装置、画像復号化装置、画像符号化方法及び画像復号化方法 | |
| EP2252059B1 (en) | Image encoding and decoding method and device | |
| KR20120018906A (ko) | 컬러 영상과 깊이 영상의 모션 벡터 공유를 이용한 부호화/복호화 장치 및 방법 | |
| Yang et al. | A high bitrate information hiding algorithm for digital video content under H. 264/AVC compression | |
| JP2011172137A (ja) | 符号化装置、符号化方法、およびプログラム | |
| Naccari et al. | Intensity dependent spatial quantization with application in HEVC | |
| JP2006295449A (ja) | レート変換方法及びレート変換装置 | |
| Zhu et al. | Information hiding algorithm for H. 264 based on the motion estimation of quarter-pixel | |
| KR101490686B1 (ko) | 비디오 인코딩 장치 및 방법 | |
| JP5917117B2 (ja) | 画像符号化装置及び画像符号化方法 | |
| KR20130078569A (ko) | 관심영역 기반의 화질 향상을 위한 스크린 콘텐츠 비디오 부호화/복호화 방법 및 그 장치 | |
| JP6577426B2 (ja) | トランスコードシステム、トランスコード方法、コンピュータ可読記録媒体、復号装置および符号化装置 | |
| KR20090064914A (ko) | 미세 입자 화소 스케일러빌리티 부호화/복호화 방법 및장치 | |
| US20060181650A1 (en) | Encoding method and device | |
| GB2503234B (en) | Video coding and decoding | |
| WO2014196118A1 (ja) | 画像符号化装置、画像解析装置、画像符号化方法及び画像解析方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141121 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150728 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150917 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151124 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160120 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160329 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160406 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5917117 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |