TW202333497A - 圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法 - Google Patents

圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法 Download PDF

Info

Publication number
TW202333497A
TW202333497A TW112111348A TW112111348A TW202333497A TW 202333497 A TW202333497 A TW 202333497A TW 112111348 A TW112111348 A TW 112111348A TW 112111348 A TW112111348 A TW 112111348A TW 202333497 A TW202333497 A TW 202333497A
Authority
TW
Taiwan
Prior art keywords
quantization matrix
size
aforementioned
quantization
elements
Prior art date
Application number
TW112111348A
Other languages
English (en)
Other versions
TWI833620B (zh
Inventor
悟
Original Assignee
日商佳能股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商佳能股份有限公司 filed Critical 日商佳能股份有限公司
Publication of TW202333497A publication Critical patent/TW202333497A/zh
Application granted granted Critical
Publication of TWI833620B publication Critical patent/TWI833620B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

從具有N×N(N為正的整數)的尺寸之第1量化矩陣，生成具有P×Q的尺寸(P、Q為符合P＜N＜Q或Q＜N＜P的正的整數)之第2量化矩陣。就與P×Q的尺寸對應之尺寸的子塊內的變換係數使用第2量化矩陣進行量化。

Description

圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法
本發明涉及圖像的編碼技術及解碼技術。
動態圖像的壓縮記錄的編碼方式方面，已知HEVC(High Efficiency Video Coding)編碼方式(以下，記為HEVC)。在HEVC方面，為了編碼效率提升，採用比歷來的大區塊(16像素×16像素)大的尺寸的基本塊。此大的尺寸的基本塊稱為CTU(Coding Tree Unit)，其尺寸最大為64像素×64像素。CTU進一步被分割為子塊，該子塊為用於執行預測、變換的單元。
此外，於HEVC，使用稱為量化矩陣的為了對實施正交變換後的係數(以下，記為正交變換係數)依頻率成分進行加權用的矩陣。透過進一步削減人類的視覺上劣化不明顯的高頻成分的資料，從而可一面維持畫質一面提高壓縮效率。於專利文獻1，已揭露對如此的量化矩陣進行編碼的技術。
近年來，作為HEVC的後繼，已展開進行更高效率的編碼方式的國際標準化之活動。在ISO/IEC與ITU-T之間設立JVET(Joint Video Experts Team)，在VVC(Versatile Video Coding)編碼方式(以下，VVC)方面標準化正在進展。為了編碼效率提升，除歷來的正方形子塊基底的畫格內正交變換法以外，正在檢討長方形子塊基底的畫格內正交變換法。 [先前技術文獻] [專利文獻]
[專利文獻1]日本特開2013-38758號公報
[發明所欲解決之問題]
於VVC，亦如同HEVC般正在檢討量化矩陣的導入。再者，在VVC，不僅正方形，正在檢討長方形的子塊分割及與其對應的正交變換的形狀。個別的正交變換係數的分布因正交變換的形狀而異，故優選上依正交變換的形狀應用最佳的量化矩陣。然而，對全部的正交變換形狀定義個別的量化矩陣時，量化矩陣的代碼量不必要地增大。在本發明，提供一種量化矩陣的生成技術，應對於長方形的正交變換。 [解決問題之技術手段]
本發明的一方案為一種圖像編碼裝置，其為就圖像進行編碼者，具備：生成手段，其從具有N×N(N為正的整數)的尺寸之第1量化矩陣，生成具有P×Q的尺寸(P、Q為符合P＜N＜Q或Q＜N＜P的正的整數)之第2量化矩陣；和量化手段，其就與前述P×Q的尺寸對應之尺寸的子塊內的變換係數使用前述第2量化矩陣進行量化。 [對照先前技術之功效]
依本發明的構成，可提供與長方形的正交變換對應的量化矩陣的生成技術。
本發明的其他特徵及優點將透過參照圖式下的以下的說明而明朗化。另外，圖式中，對相同或同樣的構成，標注相同的參考符號。
以下，參照圖式，就本發明的實施方式進行說明。另外，以下說明的實施方式為示出在具體實施本發明的情況下的一例者，為記載於申請專利範圍的構成的具體的實施方式之一。
[第1實施方式] 首先，就本實施方式相關的圖像編碼裝置的功能構成例，利用圖1的方塊圖進行說明。控制部199進行圖像編碼裝置整體的動作控制。區塊分割部102將輸入圖像(構成動態圖像之各畫格的圖像或靜態圖像)分割為複數個基本塊，輸出該分割的個別的基本塊(分割圖像)。
生成部103使具有N×N的尺寸的量化矩陣(列方向具有N個要素且行方向具有N個要素的量化矩陣)為原始量化矩陣。然後，生成部103從此原始量化矩陣，生成成為正交變換單位之具有子塊的像素份的尺寸(P×Q)之量化矩陣。於此，P、Q為正的整數且P≠Q。
預測部104按基本塊將該基本塊分割為複數個子塊(分割圖像)。然後，預測部104按子塊進行畫格內預測(intra prediction)、畫格間預測(inter prediction)等而生成預測圖像，求出輸入圖像與該預測圖像的差分作為預測誤差。此外，預測部104生成顯示將基本塊如何分割為子塊的資訊、預測模式、動態向量等的預測所需的資訊作為預測資訊。
變換兼量化部105將每個子塊的預測誤差進行正交變換，從而生成每個子塊的變換係數。並且，變換兼量化部105就個別的子塊，從生成部103取得與該子塊的尺寸對應的量化矩陣，使用該量化矩陣就該子塊內的變換係數進行量化從而生成該子塊的量化係數。
反量化兼逆變換部106將透過變換兼量化部105生成的個別的子塊的量化係數，使用用於該子塊的量化的量化矩陣進行反量化而生成變換係數，將該變換係數進行逆正交變換而生成預測誤差。
圖像再生部107根據預測部104生成的預測資訊，從儲存於圖框記憶體108的編碼的處理完畢的圖像資料生成預測圖像，從該預測圖像和反量化兼逆變換部106生成的預測誤差再生成圖像。並且，圖像再生部107將該再生成的圖像儲存於圖框記憶體108。儲存於圖框記憶體108的圖像資料成為在預測部104就現畫格或下個畫格的圖像進行預測之際參照的圖像資料。
迴圈式濾波器部109對儲存於圖框記憶體108的圖像，進行去區塊濾波器、取樣自適應偏移等的迴圈式濾波器處理。
編碼部110將透過變換兼量化部105生成的量化係數、和透過預測部104生成的預測資訊進行編碼而生成編碼資料。量化矩陣編碼部113將原始量化矩陣進行編碼而生成編碼資料。
統合編碼部111使用透過量化矩陣編碼部113生成的編碼資料而生成標頭代碼資料，生成一位元流而加以輸出，該位元流包含由編碼部110生成的編碼資料和該標頭代碼資料。
接著，就涉及本實施方式的圖像編碼裝置的動作進行說明。另外，在本實施方式，雖為了使說明容易，就輸入圖像的畫格內預測編碼處理進行說明，惟不限定於此，亦可應用於輸入圖像的畫格間預測編碼處理。此外，在本實施方式，雖使基本塊的量化矩陣的尺寸為具有16×16的要素的尺寸，惟基本塊的尺寸不限於16×16。在本實施方式，於上述的編碼處理，在透過變換兼量化部105、反量化兼逆變換部106之處理的開始時需要已準備量化矩陣。
首先，就量化矩陣的生成及編碼進行說明。將原始量化矩陣的一例示於圖8。圖8的原始量化矩陣800為與8×8的正交變換係數對應的量化矩陣的一例。構成原始量化矩陣的各要素的要素值的決定方法不特別限定。例如，構成原始量化矩陣的各要素的要素值方面可使用規定的初始值，亦可個別設定該各要素的要素值。此外，原始量化矩陣亦可依圖像的特性而生成。
在本實施方式，生成部103從如此的原始量化矩陣800，生成與其他的正交變換的大小(亦即分割的子塊的尺寸)對應的量化矩陣。在本實施方式，生成部103從圖8的原始量化矩陣800，生成分別示於圖9A、9B、圖10A、10B的長方形形狀的量化矩陣901、902、1001、1002。另外，圖9B、圖10B的量化矩陣902、1002在使原始量化矩陣的尺寸為NXN時生成的量化矩陣的尺寸PXQ的情況下，P、Q為符合P＜N＜Q或Q＜N＜P的正的整數。
示於圖9A的量化矩陣901為與8×16的正交變換係數對應的量化矩陣。量化矩陣901為在該量化矩陣901中(量化矩陣中)的位置(列,行)＝(2m,n)及位置(列,行)＝(2m＋1,n)配置原始量化矩陣800中的位置(列,行)＝(m,n)的要素者。於此，m、n為0以上的整數。
示於圖10A的量化矩陣1001為與16×8的正交變換係數對應的量化矩陣。量化矩陣1001為在該量化矩陣1001中的位置(列,行)＝(m,2n)及位置(列,行)＝(m,2n＋1)，配置原始量化矩陣800中的位置(列,行)＝(m,n)的要素者。
示於圖9B的量化矩陣902為與4×16的正交變換係數對應的量化矩陣。量化矩陣902為在該量化矩陣902中的位置(列,行)＝(2m,n)及位置(列,行)＝(2m＋1,n)，配置原始量化矩陣800中的位置(列,行)＝(m,2n)的要素者。
示於圖10B的量化矩陣1002為與16×4的正交變換係數對應的量化矩陣。量化矩陣1002為在該量化矩陣1002中的位置(列,行)＝(m,2n)及位置(列,行)＝(m,2n＋1)配置原始量化矩陣800中的位置(列,行)＝(2m,n)的要素者。
如此，在本實施方式，生成部103從原始量化矩陣800生成量化矩陣901、902、1001、1002而保存。藉此，分割的長方形形狀的子塊的尺寸為8×16、16×8、16×4、4×16中的任一個尺寸，皆由於已生成完對應的尺寸的量化矩陣，故可進行該子塊的量化/反量化。尤其，就圖9B、圖10B的量化矩陣902、1002，從原始量化矩陣在一方向上擴大並在另一方向上縮小(隔1列/1行而抽出)而加以生成。此可比從原始量化矩陣單純縮小而生成的情況削減原始量化矩陣的資料量，且可比從原始量化矩陣單純擴大而生成的情況抑制畫質的劣化。然而，可期待取得rate-distortion的平衡之結果。
然後，生成部103將如此般生成的原始量化矩陣800及量化矩陣901、902、1001、1002以二維的形狀保存。另外，亦可透過使用後述的預測方法如畫格內預測或畫格間預測，或依編碼對象為亮度塊與色差塊，從而對於相同的大小的正交變換保存複數個量化矩陣。一般而言，量化矩陣是為了實現因應於人類的視覺特性下的量化處理，如示於圖8、9A、9B、10A、10B，量化矩陣的相當於左上部分之低頻部分的要素小，相當於右下部分之高頻部分的要素大。
量化矩陣編碼部113從生成部103取得以二維形狀保存的量化矩陣，掃描各要素而計算差分，生成按計算順序將該差分一維地排列的一維的矩陣(差分矩陣)。並且，量化矩陣編碼部113將該生成的差分矩陣進行編碼而生成編碼資料。
在本實施方式，示於圖9A、9B、10A、10B的量化矩陣可從原始量化矩陣800如上述般生成，故量化矩陣編碼部113僅將原始量化矩陣800進行編碼。具體而言，依以在圖11A以箭頭表示的順序將各要素進行掃描的掃描方法，對每個原始量化矩陣800的要素計算與在掃描順序上緊接著之前的要素的差分。例如，原始量化矩陣800雖被依以圖11A示出的對角線掃描進行掃描，位於左上角的最初的要素「6」的下個為位於緊臨著的下面的要素「9」被掃描，計算出為差分的「＋3」。此外，於原始量化矩陣800的最初的要素(本實施方式中為「6」)的編碼，雖作成計算與既定的初始值(例如「8」)的差分，惟不限於此，可使用與任意的值的差分，亦可使用最初的要素的值本身作為差分。
作成如此，在本實施方式，量化矩陣編碼部113使用圖11A的掃描方法從原始量化矩陣800生成示於圖11B的差分矩陣1000。並且，量化矩陣編碼部113將差分矩陣1000進行編碼而生成編碼資料。在本實施方式雖使用示於圖12A的編碼表進行編碼，惟編碼表不限定於此，亦可使用例如示於圖12B的編碼表。
在本實施方式，原始量化矩陣800及量化矩陣901、902、1001、1002之中僅使用原始量化矩陣800進行編碼，故可削減對於長方形形狀的量化矩陣之代碼量。此外，無論生成的量化矩陣的形狀為何，僅使用示於圖11A的1種類的掃描方法進行編碼，從而將為了實施圖11A的掃描方法用的表限定為僅一個，可節約記憶體。
統合編碼部111將後述的圖像的解碼所需的標頭資訊進行編碼，將該標頭資訊和透過量化矩陣編碼部113生成的量化矩陣的編碼資料進行統合。
接著，就輸入圖像的編碼進行說明。區塊分割部102將輸入圖像分割為複數個基本塊，輸出該分割的個別的基本塊。預測部104決定將基本塊分割為複數個子塊之分割方法。於圖7A～7F示出將基本塊分割為複數個子塊之分割方法的一例。
圖7B示出子塊分割方法(四元樹分割)。亦即，圖7B示出將基本塊700在水平方向及垂直方向上2等分從而將該基本塊700分割為4個子塊(一個子塊的尺寸為8×8像素份的尺寸)的分割方法(分割模式)。另一方面，圖7C～7F示出將基本塊700分割為長方形的子塊之子塊分割方法。
圖7C示出將基本塊700在垂直方向上分割為2等分從而將該基本塊700分割為兩個縱長的子塊(一個子塊的尺寸為8×16像素份的尺寸)之分割方法。
圖7D示出將基本塊700在水平方向上分割為2等分從而將該基本塊700分割為兩個橫寬的子塊(一個子塊的尺寸為16×8像素份的尺寸)的分割方法。
圖7E示出將基本塊700在垂直方向上分割而獲得的3個縱長的子塊(從左4×16像素份的子塊、8×16像素份的子塊、4×16像素份的子塊)(三元樹分割)。
圖7F示出將基本塊700在水平方向上分割而獲得的3個橫寬的子塊(從上16×4像素份的子塊、16×8像素份的子塊、16×4像素份的子塊)(三元樹分割)。
在本實施方式，雖作成使用示於圖7B～7F的分割方法(分割模式)中的任一者，惟不限於圖7B～7F。另外，如示於圖7A，不分割基本塊700而使基本塊700為子塊亦無妨。
此外，預測部104例如以子塊單位決定水平預測、垂直預測等的畫格內預測模式。並且，預測部104按基本塊依決定的分割方法將該基本塊分割為複數個子塊。然後，預測部104按子塊使用圖框記憶體108內的圖像，依決定的畫格內預測模式進行預測從而生成預測圖像，求出輸入圖像與該預測圖像的差分作為預測誤差。此外，預測部104生成顯示子塊分割方法(分割模式)之資訊、畫格內預測模式、動態向量等的預測所需的資訊作為預測資訊。
變換兼量化部105將每個子塊的預測誤差進行正交變換，從而生成每個子塊的變換係數。並且，變換兼量化部105就個別的子塊，從生成部103取得與該子塊的尺寸對應的量化矩陣，使用該量化矩陣就該子塊的變換係數進行量化從而生成該子塊的量化係數。
變換兼量化部105在進行8像素×8像素的子塊的變換係數的量化之情況下，從生成部103取得原始量化矩陣800，使用該取得的原始量化矩陣800進行該變換係數的量化。
變換兼量化部105在進行8像素×16像素的子塊的變換係數的量化之情況下，從生成部103取得量化矩陣901，使用該取得的量化矩陣901進行該變換係數的量化。
變換兼量化部105在進行16像素×8像素的子塊的變換係數的量化之情況下，從生成部103取得量化矩陣1001，使用該取得的量化矩陣1001進行該變換係數的量化。
變換兼量化部105在進行4像素×16像素的子塊的變換係數的量化之情況下，從生成部103取得量化矩陣902，使用該取得的量化矩陣902進行該變換係數的量化。
變換兼量化部105在進行16像素×4像素的子塊的變換係數的量化之情況下，從生成部103取得量化矩陣1002，使用該取得的量化矩陣1002進行該變換係數的量化。
反量化兼逆變換部106將透過變換兼量化部105生成的個別的子塊的量化係數，使用用於該子塊的量化的量化矩陣進行反量化而生成變換係數，將該變換係數進行逆正交變換而生成預測誤差。
圖像再生部107根據預測部104生成的預測資訊，從儲存於圖框記憶體108的處理完畢的圖像生成預測圖像，從該預測圖像和反量化兼逆變換部106生成的預測誤差再生成圖像。並且，圖像再生部107將該再生成的圖像儲存於圖框記憶體108。
迴圈式濾波器部109對儲存於圖框記憶體108的圖像，進行去區塊濾波器、取樣自適應偏移等的迴圈式濾波器處理。
編碼部110將透過變換兼量化部105生成的量化係數(被量化的變換係數)和透過預測部104生成的預測資訊進行熵編碼而生成編碼資料。熵編碼的方法不限於特定的方法，可使用哥倫布編碼、算術編碼、霍夫曼編碼等。
統合編碼部111使用透過量化矩陣編碼部113生成的編碼資料而生成標頭代碼資料，將由編碼部110生成的編碼資料和該標頭代碼資料多工化而生成位元流。然後，整合編碼部111輸出該生成的位元流。
將位元流的構成例示於圖6A。於序列標頭，包含與原始量化矩陣800對應的代碼資料，被以各要素的編碼結果而構成。其中，編碼的位置不限定於此，亦可構成為編碼於圖像標頭、其他標頭的構成。此外，在一個序列之中進行量化矩陣的變更的情況下，亦可將量化矩陣重新編碼從而更新。此情況下，可改寫全部的量化矩陣，亦可就改寫的量化矩陣的變換區塊尺寸進行指定從而變更其一部分。
就以上說明的透過圖像編碼裝置之輸入圖像及量化矩陣的編碼處理，依圖3的流程圖進行說明。在步驟S301，生成部103生成原始量化矩陣800，從該原始量化矩陣800生成上述的量化矩陣901、902、1001、1002。
在步驟S302，量化矩陣編碼部113就原始量化矩陣800的各要素依圖11A的掃描方法進行掃描而計算差分，將依計算順序將該差分一維地排列後的一維的矩陣生成為差分矩陣1000。並且，量化矩陣編碼部113將該生成的差分矩陣1000進行編碼而生成編碼資料。
在步驟S303，統合編碼部111將圖像的編碼所需的標頭資訊進行編碼，將該標頭資訊和透過量化矩陣編碼部113生成的量化矩陣的編碼資料進行統合。
在步驟S304，區塊分割部102將輸入圖像分割為複數個基本塊。
在步驟S305，預測部104選擇在步驟S304分割的個別的基本塊之中未選擇的一個作為選擇基本塊。然後，預測部104決定子塊分割方法(分割模式)，依該決定的子塊分割方法將選擇基本塊分割為複數個子塊。此外，預測部104以子塊單位決定畫格內預測模式。然後，預測部104按子塊使用圖框記憶體108內的圖像，依決定的畫格內預測模式進行預測從而生成預測圖像，求出輸入圖像與該預測圖像的差分作為預測誤差。此外，預測部104生成顯示子塊分割方法的資訊、畫格內預測模式、動態向量等的預測所需的資訊作為預測資訊。
在步驟S306，變換兼量化部105將每個子塊的預測誤差進行正交變換，從而生成每個子塊的變換係數。並且，變換兼量化部105就個別的子塊，使用在步驟S301生成的量化矩陣之中與該子塊的尺寸對應的量化矩陣而將該子塊的變換係數進行量化，生成該子塊的量化係數。
在步驟S307，反量化兼逆變換部106就在步驟S306生成的個別的子塊的量化係數，使用在該子塊的量化使用的量化矩陣進行反量化而生成變換係數。然後，反量化兼逆變換部106將該生成的變換係數進行逆正交變換而生成預測誤差。
步驟S308中，圖像再生部107根據預測部104生成的預測資訊，從儲存於圖框記憶體108的處理完畢的圖像生成預測圖像。並且，圖像再生部107從該預測圖像和反量化兼逆變換部106生成的預測誤差，再生成圖像。並且，圖像再生部107將該再生成的圖像儲存於圖框記憶體108。
在步驟S309，編碼部110將透過變換兼量化部105生成的量化係數、和透過預測部104生成的預測資訊進行熵編碼而生成編碼資料。統合編碼部111使用透過量化矩陣編碼部113生成的編碼資料而生成標頭代碼資料，將由編碼部110生成的編碼資料和該標頭代碼資料多工化而生成位元流。
在步驟S310，控制部199判斷全部的基本塊是否被編碼。此判斷的結果，全部的基本塊被編碼的情況下，處理進至步驟S311，剩餘尚未被編碼的基本塊的情況下，處理進至步驟S305。
在步驟S311，迴圈式濾波器部109對儲存於圖框記憶體108的圖像進行去區塊濾波器、取樣自適應偏移等的迴圈式濾波器處理。
依以上說明的本實施方式時，尤其在步驟S301從一個量化矩陣生成複數個量化矩陣，在步驟S302僅將一個量化矩陣進行編碼，從而可削減量化矩陣的代碼量。其結果，削減生成的位元流整體的資料量，故可使壓縮效率提升。此外，尤其就圖9B、圖10B的量化矩陣，從原始量化矩陣在一方向上擴大並在另一方向上縮小而加以生成。此可比從原始量化矩陣單純縮小而生成的情況削減原始量化矩陣的資料量，且可比從原始量化矩陣單純擴大而生成的情況抑制畫質的劣化。然而，可期待取得rate-distortion的平衡之結果。
另外，在本實施方式，作成從一個量化矩陣生成複數個量化矩陣。然而，亦可構成為，選擇按量化矩陣從別的量化矩陣生成或將各要素進行編碼，將顯示該選擇結果的識別符編碼於標頭內。例如，亦可構成為，將顯示從其他量化矩陣生成量化矩陣的各要素或個別進行編碼之資訊，作為量化矩陣編碼方法資訊代碼而編碼於標頭，生成示於圖6B的位元流。藉此，可選擇性生成以依照子塊的大小下之畫質控制為優先的位元流、量化矩陣的代碼量較少的位元流。
此外，在本實施方式，說明從原始量化矩陣800生成量化矩陣901、902、1001、1002之方法。然而，從正方形的量化矩陣生成長方形的量化矩陣之方法不限於在第1實施方式說明的方法。
例如，亦可採用從原始量化矩陣800生成分別示於圖13A、13B及圖14A、14B的長方形形狀的量化矩陣1201～1204的方法。
示於圖13A的量化矩陣1201為與8×16的正交變換係數對應的量化矩陣。原始量化矩陣800的各列配置於量化矩陣1201的偶數列。於量化矩陣1201的奇數列，排列從夾著該奇數列之偶數列進行插值的要素。例如，於量化矩陣1201在(列,行)＝(1,2)的位置的要素「14」被求出為從其正上方的偶數列的要素「13」與其正下方的偶數列的要素「15」進行插值後的值者。
示於圖13B的量化矩陣1202為與4×16的正交變換係數對應的量化矩陣。量化矩陣1202為除去來自如上述般從原始量化矩陣800生成的量化矩陣1201的奇數行之僅由偶數行所成者。
示於圖14A的量化矩陣1203為與16×8的正交變換係數對應的量化矩陣。原始量化矩陣800的各行配置於量化矩陣1203的偶數行。於量化矩陣1203的奇數行，排列從夾著該奇數行之偶數行進行插值的要素。例如，於量化矩陣1203在(列,行)＝(2,1)的位置的要素「14」被求出為從鄰接於左的行的要素「13」與鄰接於右的行的要素「15」進行插值後的值者。
示於圖14B的量化矩陣1204為與16×4的正交變換係數對應的量化矩陣。量化矩陣1204為除去來自如上述般從原始量化矩陣800生成的量化矩陣1203的奇數列之僅由偶數列所成者。
如此，將原始量化矩陣800在列方向或行方向上擴大或縮小從而生成其他量化矩陣。透過如此的生成方法，可進行與頻率成分對應下之更細緻的量化控制，結果可提高畫質。
此外，在本實施方式，在生成量化矩陣902、量化矩陣1002之際，使用原始量化矩陣800的偶數行、偶數列的要素。然而，亦可使用原始量化矩陣800的奇數行、奇數列的要素而生成量化矩陣。
例如，亦可生成如示於圖15A之與4×16的正交變換係數對應的量化矩陣1601、如示於圖15B之與16×4的正交變換係數對應的量化矩陣1602。
量化矩陣1601為在該量化矩陣1601中的位置(列,行)＝(2m,n)及位置(列,行)＝(2m＋1,n)，配置原始量化矩陣800中的位置(列,行)＝(m,2n＋1)的要素者。
量化矩陣1602為在該量化矩陣1602中的位置(列,行)＝(m,2n)及位置(列,行)＝(m,2n＋1)，配置原始量化矩陣800中的位置(列,行)＝(2m＋1,n)的要素者。
如此，可從一個原始量化矩陣生成為相同的形狀且具有不同的要素之複數個量化矩陣。亦可顯示原始量化矩陣的偶數行或奇數行的選擇之旗標、顯示偶數列或奇數列的選擇之旗標被分別編碼。
再者，依使用的正交變換法的種類，亦可構成為，切換如此般生成的相同的形狀的複數個量化矩陣。例如，正交變換為基於離散餘弦變換者的情況下，生成量化矩陣902、量化矩陣1002，正交變換為基於離散正弦變換者的情況下，生成量化矩陣1601、量化矩陣1602。藉此，可使用與使用的正交變換的性質對應的量化矩陣。
此外，使用的正交變換的尺寸方面存在限制的情況下，亦可省略一部分的量化矩陣的生成、編碼。例如，不進行對於4×16尺寸、16×4尺寸的子塊的像素之正交變換的情況下，亦可省略量化矩陣902、量化矩陣1002的生成。再者，不進行對於8×8、16×8、8×16、16×4、4×16中的任一個尺寸的子塊的像素之正交變換的情況下，亦可省略原始量化矩陣800的編碼本身。此情況下，量化矩陣901、902、1001、1002的生成亦當然被省略。其中，即使不使用對於8×8的子塊的像素之正交變換的情況，進行對於16×8、8×16、16×4、4×16中的至少任一者的尺寸的子塊的像素之正交變換的情況下，原始量化矩陣800被編碼，生成與正交變換對應的量化矩陣。藉此，僅將使用的量化矩陣加以編碼兼生成，可削減不使用量化矩陣的情況下的多餘的代碼量。
[第2實施方式] 在本實施方式，說明有關將透過涉及第1實施方式的圖像編碼裝置而編碼的輸入圖像進行解碼的圖像解碼裝置。在以下就與第1實施方式的差別部分進行說明，在以下只要未特別提即與第1實施方式相同。就涉及本實施方式的圖像解碼裝置的功能構成例，使用圖2的方塊圖進行說明。
控制部299進行圖像解碼裝置整體的動作控制。分離解碼部202取得由圖像編碼裝置生成的位元流，從該位元流分離為與解碼處理相關的資訊、與係數相關的編碼資料，將存在於位元流的標頭的編碼資料進行解碼。在本實施方式，分離解碼部202將量化矩陣的編碼資料從位元流分離。亦即，分離解碼部202進行與上述的統合編碼部111相反的動作。
量化矩陣解碼部209取得透過分離解碼部202從位元流分離的量化矩陣的編碼資料，將該取得的編碼資料進行解碼從而生成量化矩陣。
解碼部203將透過分離解碼部202從位元流分離的編碼資料進行解碼，從而取得量化係數及預測資訊。反量化兼逆變換部204進行與上述的圖像編碼裝置具有之反量化兼逆變換部106同樣的動作。反量化兼逆變換部204根據透過量化矩陣解碼部209解碼的量化矩陣而進行對於量化係數之反量化從而取得變換係數，對該變換係數進行逆正交變換從而取得預測誤差。
圖像再生部205根據透過解碼部203而解碼的預測資訊，參照儲存於圖框記憶體206的圖像，從而生成預測圖像。並且，圖像再生部205使用該生成的預測圖像和透過反量化兼逆變換部204而獲得的預測誤差，生成再生圖像，將該生成的再生圖像儲存於圖框記憶體206。
迴圈式濾波器部207對儲存於圖框記憶體206的再生圖像，進行去區塊濾波器等的迴圈式濾波器處理。儲存於圖框記憶體206的再生圖像被酌情透過控制部299輸出。再生圖像的輸出目的地不限於特定的輸出目的地，例如，可在顯示器等的顯示裝置的顯示畫面顯示再生圖像，亦可對投影機等的投影裝置輸出該再生圖像。
接著，就具有上述的構成的圖像解碼裝置的動作(位元流的解碼處理)進行說明。在本實施方式，輸入至分離解碼部202的位元流雖為每個動態圖像中的畫格的位元流，惟亦可為靜態圖像的位元流。此外，在本實施方式雖為了使說明容易，僅說明畫格內預測解碼處理，惟不限定於此，亦可適用於畫格間預測解碼處理。
分離解碼部202取得透過圖像編碼裝置生成的1畫格份的位元流，從該位元流分離為與解碼處理相關的資訊、與係數相關的編碼資料，將存在於位元流的標頭的編碼資料進行解碼。分離解碼部202從圖6A的位元流的序列標頭抽出量化矩陣代碼資料(量化矩陣的編碼資料)，將該量化矩陣代碼資料對量化矩陣解碼部209送出。此外，分離解碼部202將圖像資料的基本塊單位的編碼資料輸出至解碼部203。
量化矩陣解碼部209將透過分離解碼部202從位元流分離的量化矩陣的編碼資料進行解碼，從而生成一維的差分矩陣。於量化矩陣的編碼資料的解碼，使用在編碼側使用的編碼表(第1實施方式中，圖12A的編碼表及圖12B的編碼表之中在編碼側使用的編碼表)。並且，量化矩陣解碼部209將生成的一維的差分矩陣進行反向掃描，從而生成二維的量化矩陣(原始量化矩陣)。此處理為與在第1實施方式說明的量化矩陣編碼部113相反的處理。亦即，在本實施方式，圖11B的差分矩陣1000使用圖11A的掃描方法，生成圖8的原始量化矩陣800。並且，量化矩陣解碼部209從該生成的原始量化矩陣800，與第1實施方式同樣地生成量化矩陣901、902、1001、1002。此情況下，依需求進行上述的顯示原始量化矩陣的偶數行或奇數行的選擇之旗標、顯示偶數列或奇數列的選擇之旗標的解碼。並且，依此旗標進行從原始量化矩陣的生成。
解碼部203將透過分離解碼部202從位元流分離的編碼資料進行解碼，從而取得量化係數及預測資訊。反量化兼逆變換部204在透過量化矩陣解碼部209生成的原始量化矩陣800及量化矩陣901、902、1001、1002之中，根據顯示子塊的分割模式之資訊(預測資訊之一)而選擇與被解碼的子塊的尺寸對應的量化矩陣。然後，反量化兼逆變換部204使用該選擇的量化矩陣，進行對於作為解碼對象的子塊的量化係數之反量化從而取得變換係數，對該變換係數進行逆正交變換從而取得預測誤差。
圖像再生部205根據透過解碼部203而解碼的預測資訊，參照儲存於圖框記憶體206的圖像，從而生成預測圖像。並且，圖像再生部205使用該生成的預測圖像和透過反量化兼逆變換部204而獲得的預測誤差，生成再生圖像，將該生成的再生圖像儲存於圖框記憶體206。迴圈式濾波器部207對儲存於圖框記憶體206的再生圖像，進行去區塊濾波器等的迴圈式濾波器處理。
就以上說明的透過圖像解碼裝置之1畫格份的位元流的解碼處理，依圖4的流程圖進行說明。在步驟S401，分離解碼部202取得透過圖像編碼裝置生成的1畫格份的位元流。然而，分離解碼部202從該位元流分離為與解碼處理相關的資訊、與係數相關的編碼資料，將存在於位元流的標頭的編碼資料進行解碼。
在步驟S402，量化矩陣解碼部209將透過分離解碼部202從位元流分離的量化矩陣的編碼資料進行解碼，從而生成一維的差分矩陣。並且，量化矩陣解碼部209將該生成的一維的差分矩陣進行反向掃描而生成二維的原始量化矩陣800。並且，量化矩陣解碼部209從該生成的原始量化矩陣800如同第1實施方式般生成量化矩陣901、902、1001、1002。尤其，就圖9B、圖10B的量化矩陣902、1002，從原始量化矩陣在一方向上擴大並在另一方向上縮小而加以生成。此可比從原始量化矩陣單純縮小而生成的情況削減原始量化矩陣的資料量，且可比從原始量化矩陣單純擴大而生成的情況抑制畫質的劣化。然而，可期待取得rate-distortion的平衡之結果。
另外，圖9B、圖10B的量化矩陣902、1002在使原始量化矩陣的尺寸為NXN時生成的量化矩陣的尺寸PXQ的情況下，P、Q為符合P＜N＜Q或Q＜N＜P的正的整數。另外，在從區塊往子塊分割之際，亦可依顯示使用圖7B～7F之中何種類的模式之分割資訊而適應地生成。
步驟S403～S406的處理是就在輸入圖像之個別的基本塊進行。在步驟S403，解碼部203將透過分離解碼部202從位元流分離的編碼資料進行解碼，從而取得量化係數及預測資訊。
在步驟S404，反量化兼逆變換部204在透過量化矩陣解碼部209生成的量化矩陣之中，選擇與作為解碼對象的子塊的尺寸及形狀對應的量化矩陣。然後，反量化兼逆變換部204使用該選擇的量化矩陣，進行對於作為該解碼對象的子塊的量化係數之反量化從而取得變換係數，對該變換係數進行逆正交變換從而取得預測誤差。
在步驟S405，圖像再生部205根據透過解碼部203而解碼的預測資訊，參照儲存於圖框記憶體206的圖像，從而生成預測圖像。並且，圖像再生部205使用該生成的預測圖像和透過反量化兼逆變換部204而獲得的預測誤差，生成再生圖像，將該生成的再生圖像儲存於圖框記憶體206。
在步驟S406，控制部299判斷含於位元流中之全部的基本塊的解碼是否完成。此判斷的結果，含於位元流中的全部的基本塊的解碼完成的情況下，處理進至步驟S407。另一方面，含於位元流中的全部的基本塊之中留有解碼尚未完成的子塊的情況下，就該解碼尚未完成的子塊重複步驟S403之後的處理。
在步驟S407，迴圈式濾波器部207對儲存於圖框記憶體206的再生圖像，進行去區塊濾波器等的迴圈式濾波器處理。
依以上說明的本實施方式時，僅在第1實施方式生成的原始量化矩陣被編碼，故可將削減了量化矩陣的代碼量的位元流進行解碼。此外，用於量化矩陣的解碼之要素的掃描方法限定於圖11A的1種類，故將為了實施圖11A的掃描方法用的表限定為僅一個，可節約記憶體。
另外，在本實施方式，作成從一個量化矩陣生成複數個量化矩陣。然而，亦可構成為，按量化矩陣從標頭解碼選擇從別的量化矩陣衍生而生成或將與別的量化矩陣獨立而編碼的各要素進行解碼的識別符。例如，亦可構成為，將顯示從其他量化矩陣生成量化矩陣的各要素或個別進行解碼之資訊，從圖6B的位元流的標頭解碼為量化矩陣編碼方法資訊代碼。藉此，可解碼選擇以與子塊的大小對應的畫質控制為優先、或減少量化矩陣的代碼量下的位元流。
此外，在本實施方式，說明從原始量化矩陣800生成量化矩陣901、902、1001、1002之方法。然而，如同圖像編碼裝置側，從正方形的量化矩陣生成長方形的量化矩陣之方法不限於在第1實施方式說明的方法。例如，亦可採用從原始量化矩陣800生成分別示於圖13A、13B及圖14A、14B的量化矩陣1201～1204的方法。藉此，進行與頻率成分對應下之更細緻的量化控制，結果可解碼提高了畫質之位元流。
此外，使用的正交變換的尺寸方面存在限制等使得不使用一量化矩陣的尺寸的情況下，可省略不使用的量化矩陣的解碼、生成。例如，不進行對於4×16、16×4的像素尺寸的子塊之正交變換的情況下，亦可省略量化矩陣902、量化矩陣1002的生成。再者，不進行對於8×8、16×8、8×16、16×4、4×16的像素尺寸的子塊之正交變換的情況下，亦可省略原始量化矩陣800的解碼本身。此情況下，量化矩陣901、902、1001、1002的生成亦當然被省略。其中，即使不進行對於8×8像素尺寸的子塊之正交變換的情況，對於16×8、8×16、16×4、4×16的長方形形狀中至少一尺寸的子塊進行正交變換的情況下，原始量化矩陣800被解碼，生成與正交變換對應的量化矩陣。藉此，僅將使用的量化矩陣加以解碼兼生成，可進行削減了不使用量化矩陣的情況下的多餘的代碼量之位元流的解碼。
另外，在本實施方式，雖說明為圖像解碼裝置與涉及第1實施方式的圖像編碼裝置為個別的裝置，惟亦可將圖像解碼裝置與涉及第1實施方式的圖像編碼裝置統合為一個裝置。此情況下，此裝置可將輸入圖像進行編碼，依所需將該編碼的輸入圖像進行解碼。
[第3實施方式] 示於圖1、圖2的各功能部可全部以硬體實施，亦可將一部分以軟體(電腦程式)實施。此情況下，具有圖框記憶體108、圖框記憶體206作為記憶體裝置，可執行該電腦程式的電腦裝置可應用於上述的圖像編碼裝置、圖像解碼裝置。可應用於上述的圖像編碼裝置、圖像解碼裝置的電腦裝置的硬體構成例方面，利用圖5的方塊圖進行說明。
CPU501利用儲存於RAM502、ROM503的電腦程式、資料而執行各種的處理。據此CPU501進行電腦裝置整體的動作控制，同時作為上述的圖像編碼裝置、圖像解碼裝置進行者而執行或控制上述的各處理。
RAM502具有為了儲存從ROM503、外部記憶裝置506加載的電腦程式、資料、經由I/F(介面)507從外部接收的資料(例如上述的動態圖像、靜態圖像的資料)用的區域。再者，RAM502具有CPU501在執行各種的處理之際使用的工作區。如此般，RAM502可酌情提供各種的區域。於ROM503，儲存電腦裝置的設定資料、啟動程序等。
操作部504為鍵盤、滑鼠、觸控面板等的使用者介面，使用者進行操作，從而可對CPU501輸入各種的指示。
顯示部505由液晶畫面、觸控面板畫面等構成，可將CPU501所為的處理結果顯示為圖像、文字等。例如，亦可使透過上述的圖像解碼裝置進行解碼的再生圖像顯示於此顯示部505。另外，顯示部505亦可為就圖像、文字進行投影的投影機等的投影裝置。
外部記憶裝置506為硬碟裝置等的大容量資訊記憶裝置。於外部記憶裝置506，保存為了使CPU501執行或控制上述的各種的處理作為OS(作業系統)、上述的圖像編碼裝置、圖像解碼裝置所進行者用的電腦程式、資料。於保存在外部記憶裝置506的電腦程式，包含為了使CPU501實現上述的圖框記憶體108、圖框記憶體206以外的各功能部的功能用的電腦程式。此外，於保存於外部記憶裝置506的資料，包含示於圖12A、圖12B的編碼表等編碼、解碼所需的各種的資訊。
保存於外部記憶裝置506的電腦程式、資料是酌情依CPU501所為的控制而加載於RAM502，成為CPU501的處理對象。另外，上述的圖框記憶體108、圖框記憶體206可透過RAM502、ROM503、外部記憶裝置506等的記憶體裝置而實施。
I/F507作用為為了進行與外部的機器之間的資料通信用的介面。例如，可從外部的伺服器裝置、攝像裝置經由I/F507取得動態圖像、靜態圖像至RAM502、外部記憶裝置506。
CPU501、RAM502、ROM503、操作部504、顯示部505、外部記憶裝置506、I/F507皆連接於匯流排508。另外，示於圖5的構成僅為可應用於上述的圖像編碼裝置、圖像解碼裝置的電腦裝置的硬體構成的一例，可進行各種的變更/變形。
[第4實施方式] 於上述的說明中使用的數值是為了進行具體的說明而使用者，未意圖使上述的各實施方式限定於使用的數值。例如，量化矩陣的尺寸、量化矩陣的各要素不限於上述的數值。
此外，亦可酌情將以上說明的各實施方式的一部分或全部組合而使用。此外，亦可選擇性使用以上說明的各實施方式、各變形例的一部分或全部。
(其他實施例) 本發明亦可將實現上述的實施方式的一個以上的功能的程式，透過網路或記憶媒體而提供至系統或裝置，以該系統或裝置的電腦中的一個以上的處理器將程式讀出並執行的處理從而實現。此外，亦可透過實現一個以上的功能的電路(例如，ASIC)而實現。
本發明不限制於上述實施方式，在不從本發明的精神及範圍脫離之下，可進行各種的變更及變形。因此，提供申請專利範圍以公開本發明的範圍。
102:區塊分割部 103:生成部 104:預測部 105:變換兼量化部 106:反量化兼逆變換部 107:圖像再生部 108:圖框記憶體 109:迴圈式濾波器部 110:編碼部 111:統合編碼部 113:量化矩陣編碼部
圖式含於說明書中，構成其一部分，示出本發明的實施方式，與其記述一起用於說明本發明的原理。 [圖1]就圖像編碼裝置的功能構成例進行繪示的方塊圖。 [圖2]就圖像解碼裝置的功能構成例進行繪示的方塊圖。 [圖3]輸入圖像及量化矩陣的編碼處理的流程圖。 [圖4]位元流的解碼處理的流程圖。 [圖5]就電腦裝置的硬體構成例進行繪示的方塊圖。 [圖6A]就位元流的構成例進行繪示的圖。 [圖6B]就位元流的構成例進行繪示的圖。 [圖7A]就分割方法的一例進行繪示的圖。 [圖7B]就分割方法的一例進行繪示的圖。 [圖7C]就分割方法的一例進行繪示的圖。 [圖7D]就分割方法的一例進行繪示的圖。 [圖7E]就分割方法的一例進行繪示的圖。 [圖7F]就分割方法的一例進行繪示的圖。 [圖8]就原始量化矩陣的一例進行繪示的圖。 [圖9A]就量化矩陣的一例進行繪示的圖。 [圖9B]就量化矩陣的一例進行繪示的圖。 [圖10A]就量化矩陣的一例進行繪示的圖。 [圖10B]就量化矩陣的一例進行繪示的圖。 [圖11A]就掃描方法進行繪示的圖。 [圖11B]就差分矩陣1000進行繪示的圖。 [圖12A]就編碼表的構成例進行繪示的圖。 [圖12B]就編碼表的構成例進行繪示的圖。 [圖13A]就量化矩陣的一例進行繪示的圖。 [圖13B]就量化矩陣的一例進行繪示的圖。 [圖14A]就量化矩陣的一例進行繪示的圖。 [圖14B]就量化矩陣的一例進行繪示的圖。 [圖15A]就量化矩陣的一例進行繪示的圖。 [圖15B]就量化矩陣的一例進行繪示的圖。
102:區塊分割部
103:生成部
104:預測部
105:變換兼量化部
106:反量化兼逆變換部
107:圖像再生部
108:圖框記憶體
109:迴圈式濾波器部
110:編碼部
111:統合編碼部
113:量化矩陣編碼部
199:控制部

Claims (12)

  1. 一種圖像解碼裝置，對被編碼的圖像進行解碼， 具備： 生成手段，其從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合P＜N＜Q的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣；以及 反量化手段，其對和前述P×Q的尺寸對應的尺寸的子塊內的被量化的變換係數，使用前述第2量化矩陣進行反量化； 前述生成手段，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行放大，針對該第1量化矩陣的該水平方向進行縮小，從而生成前述第2量化矩陣， 前述生成手段，將前述第1量化矩陣中的m列2n行(m、n為整數)的要素，設定為前述第2量化矩陣中的2m列n行的要素及2m+1列n行的要素，從而生成前述第2量化矩陣。
  2. 一種圖像解碼裝置，對被編碼的圖像進行解碼， 具備： 生成手段，其從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合Q＜N＜P的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣；以及 反量化手段，其對和前述P×Q的尺寸對應的尺寸的子塊內的被量化的變換係數，使用前述第2量化矩陣進行反量化； 前述生成手段，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行縮小，針對該第1量化矩陣的該水平方向進行放大，從而生成前述第2量化矩陣， 前述生成手段，將前述第1量化矩陣中的2m列n行(m、n為整數)的要素，設定為前述第2量化矩陣中的m列2n行的要素及m列2n+1行的要素，從而生成前述第2量化矩陣。
  3. 如請求項2的圖像解碼裝置，其中， 前述生成手段，從前述第1量化矩陣，生成前述第2量化矩陣及第3量化矩陣雙方， 前述生成手段，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該水平方向進行縮小，針對該第1量化矩陣的該垂直方向進行放大，從而生成前述第3量化矩陣， 前述生成手段，將前述第1量化矩陣中的m列2n行的要素(m、n為整數)，設定為前述第3量化矩陣中的2m列n行的要素及2m+1列n行的要素，從而生成前述第3量化矩陣。
  4. 如請求項3的圖像解碼裝置，其中， 前述第2量化矩陣，用於對於前述圖像中或對於透過對於區塊之水平方向上的3分割從而獲得的子塊之反量化， 前述第3量化矩陣，用於對於前述圖像中或對於透過對於區塊之垂直方向上的3分割從而獲得的子塊之反量化。
  5. 一種圖像解碼方法，對被編碼的圖像進行解碼， 具備： 生成程序，其為從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合P＜N＜Q的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣者；以及 反量化程序，其為對和前述P×Q的尺寸對應的尺寸的子塊內的被量化的變換係數，使用前述第2量化矩陣進行反量化者； 於前述生成程序，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行放大，針對該第1量化矩陣的該水平方向進行縮小，從而生成前述第2量化矩陣， 於前述生成程序，將前述第1量化矩陣中的m列2n行(m、n為整數)的要素，設定為前述第2量化矩陣中的2m列n行的要素及2m+1列n行的要素，從而生成前述第2量化矩陣。
  6. 一種圖像解碼方法，對被編碼的圖像進行解碼， 具備： 生成程序，其為從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合Q＜N＜P的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣者；以及 反量化程序，其為對和前述P×Q的尺寸對應的尺寸的子塊內的被量化的變換係數，使用前述第2量化矩陣進行反量化者； 於前述生成程序，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行縮小，針對該第1量化矩陣的該水平方向進行放大，從而生成前述第2量化矩陣， 於前述生成程序，將前述第1量化矩陣中的2m列n行(m、n為整數)的要素，設定為前述第2量化矩陣中的m列2n行的要素及m列2n+1行的要素，從而生成前述第2量化矩陣。
  7. 一種圖像編碼裝置，對圖像進行編碼， 具備： 生成手段，其從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合P＜N＜Q的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣；以及 量化手段，其對和前述P×Q的尺寸對應的尺寸的子塊內的變換係數，使用前述第2量化矩陣進行量化； 前述生成手段，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行放大，針對該第1量化矩陣的該水平方向進行縮小，從而生成前述第2量化矩陣， 前述生成手段，將前述第1量化矩陣中的m列2n行(m、n為整數)的要素，設定為前述第2量化矩陣中的2m列n行的要素及2m+1列n行的要素，從而生成前述第2量化矩陣。
  8. 一種圖像編碼裝置，對圖像進行編碼， 具備： 生成手段，其從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合Q＜N＜P的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣；以及 量化手段，其對和前述P×Q的尺寸對應的尺寸的子塊內的變換係數，使用前述第2量化矩陣進行量化； 前述生成手段，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行縮小，針對該第1量化矩陣的該水平方向進行放大，從而生成前述第2量化矩陣， 前述生成手段，將前述第1量化矩陣中的2m列n行(m、n為整數)的要素，設定為前述第2量化矩陣中的m列2n行的要素及m列2n+1行的要素，從而生成前述第2量化矩陣。
  9. 一種圖像編碼方法，對圖像進行編碼， 具備： 生成程序，其為從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合P＜N＜Q的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣者；以及 量化程序，其為對和前述P×Q的尺寸對應的尺寸的子塊內的變換係數，使用前述第2量化矩陣進行量化者； 於前述生成程序，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行放大，針對該第1量化矩陣的該水平方向進行縮小，從而生成前述第2量化矩陣， 於前述生成程序，將前述第1量化矩陣中的m列2n行(m、n為整數)的要素，設定為前述第2量化矩陣中的2m列n行的要素及2m+1列n行的要素，從而生成前述第2量化矩陣。
  10. 一種圖像編碼方法，對圖像進行編碼， 具備： 生成程序，其為從具有N×N(N為正的整數)的尺寸的第1量化矩陣，生成具有P×Q的尺寸(P、Q，為符合Q＜N＜P的正的整數，前述P×Q的尺寸，在水平方向表示P的尺寸，在垂直方向上表示Q的尺寸)的第2量化矩陣者；以及 量化程序，其為對和前述P×Q的尺寸對應的尺寸的子塊內的變換係數，使用前述第2量化矩陣進行量化者； 於前述生成程序，將在水平方向為N的尺寸且在垂直方向為N的尺寸的前述第1量化矩陣，針對該第1量化矩陣的該垂直方向進行縮小，針對該第1量化矩陣的該水平方向進行放大，從而生成前述第2量化矩陣， 於前述生成程序，將前述第1量化矩陣中的2m列n行(m、n為整數)的要素，設定為前述第2量化矩陣中的m列2n行的要素及m列2n+1行的要素，從而生成前述第2量化矩陣。
  11. 一種電腦可讀取記憶媒體，其為包含程式碼的非暫時性電腦可讀取記錄媒體，該程式碼使電腦作用為如請求項1至4中任一項的圖像解碼裝置的各手段。
  12. 一種電腦可讀取記憶媒體，其為包含程式碼的非暫時性電腦可讀取記錄媒體，該程式碼使電腦作用為如請求項7或8的圖像編碼裝置的各手段。
TW112111348A 2018-12-17 2019-11-26 圖像編碼裝置、圖像編碼方法、圖像解碼裝置及圖像解碼方法 TWI833620B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-235909 2018-12-17
JP2018235909A JP2020098983A (ja) 2018-12-17 2018-12-17 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法

Publications (2)

Publication Number Publication Date
TW202333497A true TW202333497A (zh) 2023-08-16
TWI833620B TWI833620B (zh) 2024-02-21

Family

ID=71101208

Family Applications (2)

Application Number Title Priority Date Filing Date
TW112111348A TWI833620B (zh) 2018-12-17 2019-11-26 圖像編碼裝置、圖像編碼方法、圖像解碼裝置及圖像解碼方法
TW108142867A TWI800695B (zh) 2018-12-17 2019-11-26 圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW108142867A TWI800695B (zh) 2018-12-17 2019-11-26 圖像編碼裝置、圖像編碼方法、圖像解碼裝置、圖像解碼方法

Country Status (7)

Country Link
US (1) US11930178B2 (zh)
EP (1) EP3902256A4 (zh)
JP (2) JP2020098983A (zh)
KR (1) KR20210100172A (zh)
CN (6) CN113196759B (zh)
TW (2) TWI833620B (zh)
WO (1) WO2020129498A1 (zh)

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR122014031521B1 (pt) * 2011-02-10 2022-08-23 Velos Media International Limited Dispositivo e método de processamento de imagem
US9641840B2 (en) * 2011-05-20 2017-05-02 Sony Corporation Processing device and image processing method for encoding and decoding image
WO2013005386A1 (en) * 2011-07-01 2013-01-10 Panasonic Corporation Method and apparatus for encoding and decoding video using adaptive quantization matrix for square and rectangular transform units
JP2013038758A (ja) 2011-07-13 2013-02-21 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US9560347B2 (en) * 2011-08-23 2017-01-31 Hfi Innovation Inc. Method and system of transform block processing according to quantization matrix in video coding
CN103096052B (zh) * 2011-11-04 2015-11-25 华为技术有限公司 一种图像编码、解码的方法和装置
US10277915B2 (en) * 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
JP2013146038A (ja) * 2011-12-13 2013-07-25 Canon Inc 画像量子化装置、画像量子化方法及びプログラム、画像逆量子化装置、画像逆量子化方法及びプログラム
WO2013094385A1 (ja) * 2011-12-19 2013-06-27 ソニー株式会社 画像処理装置および方法
CN111147852B (zh) * 2012-04-16 2022-05-31 韩国电子通信研究院 图像解码方法和图像编码方法
KR102071580B1 (ko) * 2014-11-03 2020-01-30 삼성전자주식회사 이미지 재부호화 방법 및 그 장치
EP3484151A1 (en) * 2017-11-13 2019-05-15 Thomson Licensing Method and apparatus for generating quantization matrices in video encoding and decoding

Also Published As

Publication number Publication date
JP2023139325A (ja) 2023-10-03
CN113196759A (zh) 2021-07-30
WO2020129498A1 (ja) 2020-06-25
CN117956152A (zh) 2024-04-30
EP3902256A1 (en) 2021-10-27
TW202029760A (zh) 2020-08-01
TWI800695B (zh) 2023-05-01
US11930178B2 (en) 2024-03-12
TWI833620B (zh) 2024-02-21
KR20210100172A (ko) 2021-08-13
CN117956154A (zh) 2024-04-30
CN117956153A (zh) 2024-04-30
CN117956155A (zh) 2024-04-30
EP3902256A4 (en) 2022-11-23
CN117956156A (zh) 2024-04-30
JP2020098983A (ja) 2020-06-25
CN113196759B (zh) 2023-12-19
US20210377533A1 (en) 2021-12-02

Similar Documents

Publication Publication Date Title
JP2023105156A (ja) 画像符号化装置、画像符号化方法、及びプログラム
TWI833620B (zh) 圖像編碼裝置、圖像編碼方法、圖像解碼裝置及圖像解碼方法
JP2020010320A (ja) 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
JP7267785B2 (ja) 画像復号装置、画像復号方法、及びプログラム
TWI791959B (zh) 圖像解碼裝置、圖像解碼方法及程式
TWI803709B (zh) 圖像編碼裝置、圖像解碼裝置、其等之控制方法及程式
US11985352B2 (en) Image coding apparatus, image coding method, and storage media
JP7090490B2 (ja) 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法
US20240163439A1 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
US20240163442A1 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
US20240163440A1 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
WO2020183859A1 (ja) 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、及びプログラム