TWI781416B - 具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式 - Google Patents

具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式 Download PDF

Info

Publication number
TWI781416B
TWI781416B TW109119881A TW109119881A TWI781416B TW I781416 B TWI781416 B TW I781416B TW 109119881 A TW109119881 A TW 109119881A TW 109119881 A TW109119881 A TW 109119881A TW I781416 B TWI781416 B TW I781416B
Authority
TW
Taiwan
Prior art keywords
block
quantization accuracy
encoder
decoder
quantization
Prior art date
Application number
TW109119881A
Other languages
English (en)
Other versions
TW202106018A (zh
Inventor
班傑明 布洛斯
法恩 Ｈ Ｔ 尼古彥
希可 史瓦茲
迪特利夫 馬皮
湯瑪士 威剛德
Original Assignee
弗勞恩霍夫爾協會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 弗勞恩霍夫爾協會 filed Critical 弗勞恩霍夫爾協會
Publication of TW202106018A publication Critical patent/TW202106018A/zh
Application granted granted Critical
Publication of TWI781416B publication Critical patent/TWI781416B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本文提供一種用於使用變換解碼對一經編碼圖像信號進行基於區塊之解碼的解碼器，其經組配以：針對一預定區塊選擇一選定變換模式；對來自一資料串流的一待解量化區塊進行熵解碼，該待解量化區塊根據該選定變換模式與該預定區塊相關聯；以及使用一量化準確度解量化該待解量化區塊以獲得一經解量化區塊，該量化準確度係視該選定變換模式而定。

Description

具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式
發明領域
根據本發明實施例係有關於一種具有基於尺度之改良變換的編碼器、解碼器、方法及電腦程式。 引言：
在下文中，不同發明實施例及態樣將得以描述。此外，其他實施例將由所附申請專利範圍界定。
應注意，由申請專利範圍界定之任何實施例可藉由以下不同發明實施例及態樣中所描述之細節(特徵及功能性)中之任一者進行補充。
此外，應注意，本文所描述之個別態樣可個別地或組合地使用。因此，細節可添加至該等個別態樣中之各者，而不將細節添加至該等態樣中之另一者。
亦應注意，本揭露內容明確地或隱含地描述可用於編碼器(用於提供輸入信號之經編碼表示形態的設備)及解碼器(用於基於經編碼表示形態提供信號之經解碼表示形態的設備)中之特徵。因此，本文所描述之特徵中之任一者可用於編碼器之上下文及解碼器之上下文中。
此外，本文所揭露之與方法相關之特徵及功能性亦可用於設備(經組配以執行此類功能性)中。此外，本文中關於設備所揭露之任何特徵及功能性亦可用於對應方法中。換言之，本文所揭露之方法可藉由關於設備所描述之特徵及功能性中之任一者進行補充。
此外，本文所描述之特徵及功能性中之任一者可實施於硬體或軟體中，或使用硬體與軟體之組合加以實施，如將在章節「實施替代方案」中所描述。
發明背景
在目前先進技術有損視訊壓縮中，編碼器使用特定量化步長
Figure 02_image001
來量化預測殘餘或經變換預測殘餘。步長愈小，量化愈精細且原始信號與重建構信號之間的誤差愈小。最新視訊寫碼標準(諸如H.264及H.265)使用所謂的量化參數(QP)之指數函數推導彼量化步長
Figure 02_image001
，例如：
Figure 02_image003
量化步長與量化參數之間的指數關係允許更精細地調整所得位元率。解碼器需要知曉量化步長以執行經量化信號之正確縮放。儘管量化不可逆，但此階段有時被稱作「逆量化」。此為解碼器自位元串流剖析縮放因數之原因。QP傳信通常以階層式執行，亦即基礎QP在位元串流中之較高層級，例如在圖像層級進行傳信。在圖像可由多個圖塊、圖案塊或方塊(brick)組成的子圖像層級，僅傳信基礎QP之增量。為了以更精細粒度調整位元率，增量QP甚至可每區塊或區塊區域被傳信，例如在HEVC中於寫碼區塊之N×N區域內的中變換單元中被傳信。編碼器通常將增量QP技術用於主觀最佳化或速率控制演算法。在不損失一般性的情況下，在下文中假定，本發明中之基礎單元為圖像，且因此，藉由編碼器針對由單一圖塊組成之各圖像傳信基礎QP。除此基礎QP (亦稱作圖塊QP)以外，可針對各變換區塊(或變換區塊之任何併集，亦稱作量化群組)傳信增量QP。
諸如高效視訊寫碼(HEVC)之目前先進技術視訊寫碼流程或即將進行之通用視訊寫碼(VVC)標準藉由允許超出廣泛使用的II類離散餘弦變換(DCT-II)之整數近似值的額外變換來最佳化各種殘餘信號類型之能量壓縮。HEVC標準進一步使用特定框內定向模式針對4×4變換區塊指定VII類離散正弦變換(DST-VII)之整數近似值。歸因於此固定映射，不需要傳信是使用DCT-II抑或DST-VII。除此之外，可針對4×4變換區塊選擇恆等變換。在此，編碼器需要傳信應用DCT-II/DST-VII抑或恆等變換。由於恆等變換為等效於乘以1之矩陣，其亦稱作變換跳過。此外，當前VVC發展允許編碼器選擇用於殘餘的DCT/DST系列之更多變換以及在DCT/DST變換之後於編碼器處應用及在逆DCT/DST之前於解碼器處應用的額外不可分離變換。經擴展DCT/DST變換集合及額外不可分離變換皆需要每變換區塊進行額外傳信。
圖1b繪示混合視訊寫碼方法，其中在編碼器10處正向變換且隨後量化殘餘信號24，且縮放經量化變換係數，之後針對解碼器36進行逆變換。突出顯示相關區塊28/32及52/54之變換及量化。
因此，期望提供可在圖像及/或視訊之寫碼時使用的量化及/或縮放之概念，從而產生改良之壓縮效率。
此係藉由本申請案之獨立請求項之主題來達成。
根據本發明之其他實施例係由本申請案之附屬請求項之主題界定。
發明概要
根據本發明之第一態樣，本申請案之本發明人意識到，在量化變換係數及縮放經量化變換係數時遇到之一個問題源於不同變換模式及/或區塊大小會產生不同縮放因數及量化參數之事實。一個變換模式下之量化準確度會引起另一變換模式下之失真增加。根據本申請案之第一態樣，藉由視用於待量化區塊之變換模式而選擇量化準確度來克服此困難。因此，可針對不同變換模式及/或區塊大小選擇不同量化準確度。
因此，根據本申請案之第一態樣，一種用於使用變換寫碼對圖像信號進行基於區塊之編碼的編碼器經組配以針對預定區塊，例如視訊信號或圖像信號中之區塊區域中之一區塊選擇選定變換模式，例如恆等變換或非恆等變換。該恆等變換可理解為變換跳過。此外，編碼器經組配以使用一量化準確度量化待量化區塊以獲得經量化區塊，該待量化區塊根據選定變換模式與預定區塊相關聯，該量化準確度係視選定變換模式而定。待量化區塊例如為經歷選定變換模式之預定區塊，及/或在選定變換模式為非恆等變換之情況下藉由將構成選定變換模式之基礎之變換應用於預定區塊及在選定變換模式為恆等變換之情況下藉由均衡預定區塊而獲得的區塊。舉例而言，量化準確度係由量化參數(QP)、縮放因數及/或量化步長界定。待量化區塊之值例如被除以量化參數(QP)、縮放因數及/或量化步長以得到經量化區塊。另外，編碼器經組配以將經量化區塊熵編碼至資料串流中。
類似地，根據本申請案之第一態樣，一種用於使用變換解碼對經編碼圖像信號進行基於區塊之解碼的解碼器經組配以針對預定區塊，例如經解碼圖像信號或視訊信號中之區塊區域中之一區塊選擇選定變換模式，例如恆等變換或非恆等變換。恆等變換可理解為變換跳過。非恆等變換可為由編碼器應用的變換之反/逆變換。此外，解碼器經組配以對來自資料串流之待解量化區塊進行熵解碼，該待解量化區塊根據選定變換模式與預定區塊相關聯。待解量化區塊例如為經歷選定變換模式之前的預定區塊。另外，解碼器經組配以使用量化準確度解量化待解量化區塊以獲得經解量化區塊，該量化準確度係視選定變換模式而定。量化準確度例如係由量化參數(QP)、縮放因數及/或量化步長界定。區塊之值例如乘以量化參數(QP)、縮放因數及/或量化步長以得到經解量化區塊。舉例而言，量化準確度界定待解量化區塊之解量化準確度。量化準確度可理解為縮放準確度。
根據一實施例，量化準確度部分地係視選定變換模式為恆等變換抑或非恆等變換而定。應注意，可視預測模式及/或區塊大小及/或區塊形狀而進行其他調適。對變換模式之相依性係基於非恆等變換可增加殘餘信號之精確度，從而亦可增加動態範圍的概念。然而，恆等變換之情況並非如此。對於非恆等變換而言與低失真相關聯之量化準確度在變換模式為恆等變換的情況下可引起較高失真。因此，區分恆等變換與非恆等變換是有利的。
若選定變換模式為恆等變換，則編碼器及/或解碼器可經組配以判定用於預定區塊之初始量化準確度且檢查初始量化準確度是否比預定臨界值精細。儘管比預定臨界值精細之量化準確度在選定變換模式為非恆等變換之情況下可減少失真，但對於選定變換模式為恆等變換之情況並非如此。若初始量化準確度比預定臨界值精細，則編碼器及/或解碼器可經組配而在選定變換模式為恆等變換之情況下將量化準確度設定為例如對應於預定臨界值之預設量化準確度。因此，可避免對於預設量化準確度不存在之額外失真。
另外，編碼器及/或解碼器可經組配以在初始量化準確度不比預定臨界值精確時，使用初始量化準確度作為量化準確度。在此情況下，初始量化準確度不會引入額外失真，由此在無改變或調整之情況下使用初始量化準確度係沒有問題的。
根據一實施例，初始量化準確度係藉由在編碼器之情況下自量化參數清單及在解碼器情況下自解量化參數清單判定索引而加以判定。舉例而言，該索引指向量化參數清單，例如用於解碼器之解量化參數清單內的量化參數，例如用於解碼器之解量化參數或縮放參數，且經由對於量化參數清單中之所有量化參數相等之函數與量化步長相關聯。編碼器可經組配以例如藉由將待量化區塊之值除以量化步長來量化，且解碼器可經組配以藉由將待解量化區塊之值乘以量化步長來解量化。該索引可等於量化參數(QP)，且量化參數清單及/或解量化參數清單可由
Figure 02_image005
[]={40, 45, 51, 64, 72}界定。量化步長(
Figure 02_image001
(QP))可使用索引(QP)之指數函數推導，例如
Figure 02_image007
，其中
Figure 02_image005
[]={40, 45, 51, 64, 72}。
根據一實施例，編碼器及/或解碼器經組配以藉由檢查索引，亦即量化參數清單中之索引是否小於預定索引值來檢查初始量化準確度是否比預定臨界值精細。預定索引值界定例如索引4，亦即索引等於4。編碼器及/或解碼器可經組配以在選定變換模式為恆等變換時將索引，例如量化參數QP削減至最小值4。編碼器及/或解碼器可經組配以禁止量化參數(QP)小於4。編碼器及/或解碼器可經組配以在QP小於4時將QP設定為4，且在QP為4或更大時，維持QP，例如QP為TrafoSkip? Max(4, QP) : QP。因此，變換跳過模式避免或不允許產生小於1之縮放因數的例如QP 0、1、2及3之索引，其可在變換跳過模式中引入失真。應注意，以上實例係關於8位元視訊信號且需要視輸入視訊信號位元深度而進行調整。位元深度增加1使得臨界值減小-6。傳信可為直接或間接的，諸如經由內部位元深度相對於輸入深度之差值的指定、輸入位元深度之直接傳信及/或臨界值之傳信。間接組配之實例如下。sps _internal _bit _depth _minus _input _bit _depth 如下指定用於變換跳過模式之最小允許量化參數： QpPrimeTsMin = 4 + 6 * sps_internal_bit_depth_minus_input_bit_depth
sps_internal_bit_depth_minus_input_bit_depth之值將在0至8之範圍內(包括端點)。 -   否則(transform_skip_flag[ xTbY ][ yTbY ][ cIdx ]等於1)，以下適用： qP = Clip3( QpPrimeTsMin, 63 + QpBdOffset, qP + QpActOffset )
根據一實施例，由編碼器執行的待量化區塊之量化包含縮放，繼之以整數量化，例如量化至最接近整數值。類似地，由解碼器執行的待解量化區塊之解量化包含縮放，例如再縮放，繼之以整數解量化例如解量化至最接近整數值。另外，編碼器及/或解碼器經組配而使得預定臨界值及/或預設量化準確度與縮放因數1相關，例如在解碼器之情況下與再縮放因數1相關。編碼器可經組配以使用縮放因數量化待量化區塊，且解碼器可經組配以使用縮放因數解量化待解量化區塊。編碼器可經組配以藉由將待量化區塊之值除以縮放因數來量化待量化區塊，且解碼器可經組配以藉由將待解量化區塊之值乘以縮放因數來解量化待解量化區塊。舉例而言，編碼器及/或解碼器經組配以藉由檢查縮放因數，例如量化步長
Figure 02_image001
(QP)是否小於預定縮放因數來檢查初始量化準確度是否比預定臨界值精細。預定縮放因數界定例如縮放因數1。編碼器及/或解碼器可經組配以在選定變換模式為恆等變換時將縮放因數削減至最小值1。編碼器及/或解碼器可經組配以禁止縮放因數小於1。若選定變換模式為恆等變換，則編碼器經組配以在
Figure 02_image001
(QP)小於1時將
Figure 02_image001
(QP)設定為1，且在
Figure 02_image001
(QP)為1或更大時維持
Figure 02_image001
(QP)，例如從而產生至少為1之縮放因數。
根據一實施例，編碼器及/或解碼器經組配以判定用於以下各者之初始量化準確度：包含預定區塊之若干區塊，例如相鄰區塊，諸如包含預定區塊之整個圖像；包含預定區塊之若干圖像；或包含預定區塊之圖像之圖塊。在若干圖像之情況下，圖像中之至少一者或僅一者必須包含預定區塊。在編碼器之情況下，該等圖像為要編碼之圖像信號或視訊信號之圖像，且該等若干區塊為例如該圖像信號或視訊信號之圖像中的區塊。在解碼器之情況下，該等區塊為例如經解碼圖像信號或經解碼視訊信號之殘餘圖像中的預測殘餘區塊。
編碼器可經組配以例如針對諸如整個圖像之若干區塊、針對若干圖像或針對圖像之圖塊在資料串流中傳信初始量化準確度。解碼器可經組配以例如針對諸如整個圖像之若干區塊、針對若干圖像或針對圖像之圖塊自資料串流讀取初始量化準確度。
根據一實施例，編碼器經組配以在資料串流中傳信量化準確度及/或選定變換模式。舉例而言，解碼器經組配以自資料串流讀取量化準確度及/或選定變換模式。
根據一實施例，在編碼器之情況下，預定區塊表示要進行基於區塊之編碼的圖像信號之預測殘餘之區塊。在解碼器之情況下，舉例而言，預定區塊表示要進行基於區塊之解碼的圖像信號之預測殘餘之區塊。舉例而言，在解碼器之情況下，預定區塊表示經解碼殘餘區塊。
根據一實施例，編碼器及/或解碼器經組配以判定預定區塊之初始量化準確度且視選定變換模式而修改初始量化準確度。初始量化準確度例如包含索引，亦即QP，及/或縮放因數，亦即
Figure 02_image001
(QP)。因此，可增加壓縮效率。此係基於如下概念，初始量化準確度可針對區塊群組或針對若干圖像在資料串流中傳信，且對於各待編碼或解碼區塊而言，可視各別區塊之變換模式而個別地調適此初始量化準確度。
初始量化準確度之修改可藉由視選定變換模式而使用偏移值使初始量化準確度偏移。偏移量可經選擇，使得例如藉由最大化感知視覺品質或最小化如給定位元率之方誤差的物鏡失真，或藉由降低給定品質/失真之位元率來增加壓縮效率。根據一實施例，編碼器及/或解碼器經組配以判定各變換模式之偏移值。此可針對各圖像信號或視訊信號個別地執行。替代地，偏移值係針對較小實體而判定，諸如若干圖像、一個圖像、圖像之一或多個圖塊、區塊群組或個別區塊。或者或另外，對於各變換模式，偏移值可自偏移值清單獲得。
如前述，編碼器可經組配以藉由自量化參數清單判定索引來判定初始量化準確度。類似地，解碼器可經組配以藉由自解量化參數清單判定索引來判定初始量化準確度。根據一實施例，編碼器及/或解碼器經組配以藉由將偏移值相加至索引或藉由自索引減去偏移值來修改初始量化準確度。舉例而言，索引，亦即量化參數(QP)被減小或增大該偏移值。
如前述，在編碼器情況下，待量化區塊之量化可包含縮放，繼之以整數量化，例如量化至最接近整數值。編碼器可經組配以藉由將待量化區塊之值除以縮放因數來執行縮放。類似地，在解碼器之情況下，待解量化區塊之解量化可包含縮放，例如再縮放，繼之以整數解量化，例如解量化至最接近整數值，且解碼器可經組配以藉由將待解量化區塊之值乘以縮放因數，例如在縮放因數來執行縮放。另外，解碼器及/或解碼器可經組配以藉由將偏移值相加至縮放因數或藉由自縮放因數減去偏移值來修改初始量化準確度。舉例而言，縮放因數等於量化步長
Figure 02_image001
(QP)。量化步長
Figure 02_image001
(QP)可被減小或增大該偏移值。
根據一實施例，編碼器及/或解碼器經組配以視選定變換模式為恆等變換抑或非恆等變換而提供經修改初始量化準確度。換言之，編碼器及/或解碼器可經組配以視選定變換模式為恆等變換抑或非恆等變換而定修改初始量化準確度。
根據一實施例，編碼器及/或解碼器經組配以在選定變換模式為恆等變換時判定用於預定區塊之初始量化準確度及檢查初始量化準確度是否比預定臨界值粗略，且另外在初始量化準確度比預定臨界值粗略時，編碼器及/或解碼器經組配以視選定變換模式而使用偏移值修改初始量化準確度，使得經修改初始量化準確度比預定臨界值精細。舉例而言，若索引(QP)大於10、20、30、35、40或45，則初始量化準確度比預定臨界值粗略。換言之預定臨界值可由索引10、20、30、35、40或45表示。因此，在位元率範圍之第二端，亦即針對低位元率，索引或縮放因數被減小該偏移值。位元率範圍之第二端例如與位元率範圍之第一端相對的一位元率範圍末端相關聯，與為4或更低之QP相關聯。
根據一實施例，編碼器及/或解碼器經組配以在初始量化準確度比預定臨界值粗略時，視選定變換模式而不使用偏移值修改初始量化準確度。
根據一實施例，編碼器及/或解碼器經組配以在選定變換模式為非恆等變換時不使用偏移值修改初始量化準確度。因此，舉例而言，該偏移量僅用於變換模式為恆等變換之情況。
根據一實施例，編碼器及/或解碼器經組配以藉由使用率失真最佳化來判定該偏移量。因此，可視將用於偏移經判定之預定區塊的變換模式而達成僅產生較小失真或沒有失真之高壓縮效率。
根據一實施例，編碼器經組配以針對以下各者在資料串流中傳信偏移量，例如偏移值或指向偏移值集合中之該偏移值之索引：包含預定區塊之若干區塊，例如相鄰區塊，諸如包含預定區塊之整個圖像；包含預定區塊之若干圖像；或包含預定區塊之圖像之圖塊。該等圖像例如為要編碼之圖像信號或視訊信號之圖像，且該等若干區塊為例如該圖像信號或視訊信號之圖像中的區塊。
根據一實施例，解碼器經組配以針對以下各者自資料串流讀取偏移量，例如偏移值或指向偏移值集合中之該偏移值之索引：包含預定區塊之若干區塊，諸如包含預定區塊之整個圖像；包含預定區塊之若干圖像；或包含預定區塊之圖像之圖塊。經組配以針對以下各者自資料串流讀取偏移量：包含預定區塊之若干區塊，諸如包含預定區塊之整個圖像；包含預定區塊之若干圖像；或包含預定區塊之圖像之圖塊。
在編碼器之情況下，待量化區塊之量化任擇地包含全區塊縮放(例如用於區塊之所有值的一個縮放因數)及用區塊內變化縮放矩陣之縮放，繼之以整數量化，例如量化至最接近整數值。區塊內變化縮放矩陣例如為具有多個縮放因數，例如多個量化參數(QP)或多個量化步長大小
Figure 02_image001
(QP)之矩陣。例如由編碼器在縮放之前藉由將選定變換應用於預定區塊而獲得之各變換係數按該縮放矩陣之多個縮放因數中之一者被縮放。用區塊內變化縮放矩陣之縮放會導致頻率相依性加權或空間相依性加權。另外，編碼器可經組配以視選定變換模式而判定區塊內變化縮放矩陣。
在解碼器之情況下，待解量化區塊之解量化可包含用於區塊之所有值的全區塊縮放，亦即全區塊再縮放(例如一個縮放因數，亦即再縮放因數)及用區塊內變化縮放矩陣(亦即區塊內變化再縮放矩陣)之縮放，例如再縮放，繼之以整數解量化，例如解量化至最接近整數值。區塊內變化縮放矩陣例如為具有多個縮放因數(亦即再縮放因數)之矩陣，例如具有多個量化參數(QP)或多個量化步長大小
Figure 02_image001
(QP)之矩陣。區塊之各值例如係藉由縮放矩陣之多個縮放因數中之一者個別地被縮放。藉由區塊內變化縮放矩陣進行之縮放例如導致頻率相依性加權或空間相依性加權。另外，解碼器可經組配以視選定變換模式而判定區塊內變化縮放矩陣。
根據一實施例，編碼器及/或解碼器經組配以判定區塊內變化縮放矩陣，使得該判定針對大小及形狀相同的不同待量化或解量化區塊產生不同區塊內變化縮放矩陣。因此，用於第一區塊之第一區塊內變化縮放矩陣及用於第二區塊之第二區塊內變化縮放矩陣可不同，其中第一區塊及第二區塊可具有相同大小及形狀。
另外，判定任擇地使得針對不同待量化區塊或針對不同待解量化區塊所判定之區塊內變化縮放矩陣視選定變換模式而定，該等不同區塊之大小及形狀相同，且選定變換模式不等同於恆等變換。此係基於如下概念，在選定變換模式為恆等變換之情況下，頻率加權縮放無益處。對於恆等變換，舉例而言，可使用全區塊縮放或空間加權縮放矩陣。然而，對於等同於非恆等變換之變換模式，個別地縮放待量化或解量化區塊之每一變換係數係有益的。對於不同非恆等變換模式，區塊內變化縮放矩陣可不同。
根據一實施例，編碼器經組配以在選定變換模式為非恆等變換時，將對應於選定變換模式之變換應用於預定區塊以獲得待量化區塊，且在選定變換模式為恆等變換時，該預定區塊為待量化區塊。
根據一實施例，解碼器經組配以在選定變換模式為非恆等變換時，將對應於選定變換模式之逆變換應用於經解量化區塊以獲得預定區塊，且在選定變換模式為恆等變換時，該經解量化區塊為預定區塊。
一實施例係有關於一種用於使用變換寫碼對圖像信號進行基於區塊之編碼的方法，其包含針對預定區塊，例如視訊信號或圖像信號中之區塊區域中的一區塊選擇選定變換模式，例如恆等變換或非恆等變換。舉例而言，恆等變換被理解為變換跳過。另外，該方法包含使用量化準確度量化待量化區塊以獲得經量化區塊，該待量化區塊根據選定變換模式與預定區塊相關聯，該量化準確度係視選定變換模式而定。待量化區塊例如為經歷選定變換模式之預定區塊，及/或在選定變換模式為非恆等變換之情況下藉由將構成選定變換模式之基礎之變換應用於預定區塊及在選定變換模式為恆等變換之情況下均衡預定區塊而獲得的區塊。量化準確度例如係由量化參數(QP)、縮放因數及/或量化步長界定。舉例而言，區塊之值除以量化參數(QP)、縮放因數及/或量化步長以得到經量化區塊。此外，該方法包含將經量化區塊熵編碼至資料串流中。
一實施例係有關於一種用於使用變換解碼對經編碼圖像信號進行基於區塊之解碼的方法，其包含針對預定區塊，例如經解碼殘餘圖像信號或殘餘視訊信號中之相鄰殘餘區塊區域中之一殘餘區塊選擇選定變換模式，例如恆等變換或非恆等變換。恆等變換例如被理解為變換跳過，且非恆等變換例如為由編碼器應用之變換的反/逆變換。另外，該方法包含自資料串流熵解碼待解量化區塊，該待解量化區塊根據選定變換模式與預定區塊相關聯；及使用量化準確度解量化待解量化區塊以獲得經解量化區塊，該量化準確度係視選定變換模式而定。量化準確度例如係由量化參數(QP)、縮放因數及/或量化步長界定。區塊之值可乘以量化參數(QP)、縮放因數及/或量化步長以得到經解量化區塊。舉例而言，量化準確度界定待解量化區塊之解量化準確度。
如上文所描述之方法係基於與上文所描述之編碼器及/或解碼器相同的考慮因素。順便一提，該等方法可藉由亦關於編碼器及/或解碼器描述之所有特徵及功能性完成。
一實施例係有關於一種電腦程式，其具有當在電腦上運行時執行本文所描述之方法的程式碼。
一實施例係有關於一種資料串流，其藉由用於對圖像信號進行基於區塊之編碼的方法獲得。
較佳實施例之詳細說明
即使具有相同或等效功能性之相同或等效的一或多個元件出現於不同圖式中，以下描述中仍藉由相同或等效參考數字來標示該一或多個元件。
在以下描述中，闡述多個細節以提供對本發明之實施例的更透徹解釋。然而，熟習此項技術者將顯而易見，本發明之實施例可在無此等特定細節之情況下被實踐。在其他情況下，熟知結構及裝置以方塊圖形式而非詳細地示出，以免混淆本發明之實施例。另外，除非另外特定地指出，否則本文所描述之不同實施例的特徵可彼此組合。
諸圖之以下描述以呈現基於區塊之預測性編碼解碼器的編碼器及解碼器之描述開始，基於區塊之預測性編碼解碼器用於寫碼視訊之圖像以便形成可建置本發明之實施例之寫碼框架的實例。關於圖1a至圖3描述各別編碼器及解碼器。儘管本發明概念之本文所描述實施例可分別建置至圖1a、圖1b及圖2之編碼器及解碼器中，但關於圖4至圖7所描述之實施例亦可用於形成並不根據構成圖1a、圖1b及圖2之編碼器及解碼器之基礎的寫碼框架操作的編碼器及解碼器。
圖1a示出用於例示性地使用基於變換之殘餘寫碼將圖像12預測性地寫碼至資料串流14中的設備(例如，視訊編碼器及/或圖像編碼器)。使用參考符號10指示設備或編碼器。圖1b亦示出用於將圖像12預測性地寫碼至資料串流14中的該設備，其中可能之預測模組44更詳細被示出。圖2示出對應的解碼器20，亦即經組配以亦使用基於變換之殘餘解碼對來自資料串流14之圖像12'進行預測性解碼之設備20，其中撇號用於指示依據由預測殘餘信號之量化引入之寫碼損失，如由解碼器20重建構之圖像12'與最初藉由設備10編碼之圖像12偏離。圖1a、圖1b及圖2例示性地使用基於變換之預測殘餘寫碼，但本申請案之實施例不限於此種預測殘餘寫碼。對於關於圖1a、圖1b及圖2所描述之其他細節亦如此，如將在下文所概述。
編碼器10經組配以使預測殘餘信號經歷空間至頻譜變換且將由此獲得之預測殘餘信號編碼至資料串流14中。同樣，解碼器20經組配以自資料串流14解碼預測殘餘信號且使由此獲得之預測殘餘信號經歷頻譜至空間變換。
根據本發明之一實施例，編碼器10在內部可包含預測殘餘信號形成器22，該預測殘餘信號形成器22產生預測殘餘24以便量測預測信號26與原始信號，亦即與圖像12之偏離，其中預測信號26可解譯為一或多個預測器區塊之集合的線性組合。預測殘餘信號形成器22可例如為自原始信號，亦即自圖像12減去預測信號的減法器。編碼器10隨後進一步包含變換器28，該變換器28使預測殘餘信號24經歷空間至頻譜變換以獲得譜域預測殘餘信號24'，該譜域預測殘餘信號24'隨後經歷藉由亦由編碼器10包含之量化器32進行之量化。因此，經量化預測殘餘信號24''經寫碼至位元串流14中。為此，編碼器10可任擇地包含熵寫碼器34，該熵寫碼器34將經變換及量化之預測殘餘信號熵寫碼至資料串流14中。
預測信號26由編碼器10之預測級36基於編碼至資料串流14中且可自該資料串流解碼的預測殘餘信號24''產生。為此，如圖1a中所示，預測級36可在內部包含：解量化器38，其解量化預測殘餘信號24''以便獲得譜域預測殘餘信號24'''，該信號除量化損失以外對應於信號24'；繼之以反變換器40，其使後一預測殘餘信號24'''經受反變換，亦即頻譜至空間變換，以獲得除量化損失以外對應於原始預測殘餘信號24之預測殘餘信號24''''。預測級36之組合器42隨後諸如藉由相加來重組合預測信號26與預測殘餘信號24''''，以便獲得經重建構信號46，亦即原始信號12之重建構。經重建構信號46可對應於信號12'。如圖1b中更詳細地示出，預測級36之預測模組44隨後藉由使用例如空間預測(亦即圖像內預測)及/或時間預測(亦即圖像間預測)基於信號46產生預測信號26。
同樣，如圖2中所示，解碼器20可在內部由對應於預測級36並以對應於該預測級36之方式互連的組件組成。詳言之，解碼器20之熵解碼器50可對來自資料串流之經量化譜域預測殘餘信號24''進行熵解碼，接著以上文關於預測級36之模組描述的方式互連及協作的解量化器52、反變換器54、組合器56及預測模組58基於預測殘餘信號24''恢復經重建構信號以使得如圖2中所示，組合器56之輸出產生經重建構信號，亦即圖像12'。
儘管上文未特定描述，但容易明確，根據某一最佳化方案，諸如以最佳化某一速率及失真相關準則(亦即寫碼成本)之方式，編碼器10可設定一些寫碼參數，包括例如預測模式、運動參數及類似者。舉例而言，編碼器10及解碼器20以及對應模組44、58可分別支援不同預測模式，諸如框內寫碼模式及框間寫碼模式。編碼器及解碼器藉以在此等預測模式類型之間切換的粒度可對應於圖像12及12'分別分成寫碼片段或寫碼區塊之細分。在此等寫碼片段之單元中，舉例而言，圖像可細分為經框內寫碼之區塊及經框間寫碼之區塊。
經框內寫碼區塊係基於各別區塊(例如，當前區塊)之空間已寫碼/解碼鄰域(例如，當前模板)而預測，如下文更詳細地概述。若干框內寫碼模式可存在並經選擇用於各別經框內寫碼片段，包括定向或角度框內寫碼模式，各別片段根據定向或角度框內寫碼模式藉由沿著對各別定向框內寫碼模式具專一性的某一方向將鄰域之取樣值外推至各別經框內寫碼片段中來填充。框內寫碼模式可例如亦包含一或多個其他模式，諸如：DC寫碼模式，各別經框內寫碼區塊之預測根據該模式將DC值指配至各別經框內寫碼片段內之所有樣本；及/或平面框內寫碼模式，各別區塊之預測根據該模式經估算或判定為由二維線性函數相對於各別經框內寫碼區塊之樣本位置描述之樣本值的空間分佈，該等樣本位置具有由二維線性函數基於相鄰樣本界定的平面之驅動傾斜及偏移量。
與其比較，可例如在時間上預測經框間寫碼區塊。對於經框間寫碼區塊，運動向量可在資料串流14內傳信，該等運動向量指示圖像12所屬之視訊的先前經寫碼圖像(例如，參考圖像)之部分的空間移位，在該空間移位處，對先前經寫碼/經解碼圖像進行取樣以便獲得各別經框間寫碼區塊之預測信號。此意謂除由資料串流14包含的殘餘信號寫碼，諸如表示經量化譜域預測殘餘信號24''之經熵寫碼變換係數層級以外，資料串流14可能已在其中編碼用於將寫碼模式指配至各種區塊的寫碼模式參數；用於區塊中之一些的預測參數，諸如用於經框間寫碼片段之運動參數；及任擇之其他參數，諸如用於控制及傳信圖像12及12'分別分成片段的細分之參數。解碼器20使用此等參數以與編碼器相同之方式細分圖像，從而將相同預測模式指配給片段，且執行相同預測以產生相同預測信號。
圖3繪示一方面經重建構信號，亦即該重建構圖像12'，與另一方面如在資料串流14中傳信之預測殘餘信號24''''及預測信號26之組合之間的關係。如上文已指示，該組合可為相加。預測信號26在圖3中繪示為圖像區域分成使用陰影線例示性指示之經框內寫碼區塊及非陰影例示性指示的經框間寫碼區塊之細分。該細分可為任何細分，諸如圖像區域分成多列及多行正方形區塊或非正方形區塊的常規細分或來自樹根區塊之圖像12分成多個具有不同大小之葉區塊之多叉樹細分，諸如四叉樹細分等等，其中圖3中繪示其混合，在圖3中，圖像區域首先細分成多列及多行樹根區塊，該等樹根區塊隨後根據遞歸多叉樹細分而進一步細分成一或多個葉區塊。
再次，資料串流14可針對經框內寫碼區塊80而在其中寫碼框內寫碼模式，其將若干所支援框內寫碼模式中之一者指配給各別經框內寫碼區塊80。對於經框間寫碼區塊82，資料串流14可具有寫碼於其中之一或多個運動參數。一般而言，經框間寫碼區塊82並不受限於在時間上寫碼。替代地，經框間寫碼區塊82可為自超出當前圖像12自身之先前經寫碼部分預測的任何區塊，先前經寫碼部分諸如圖像12所屬之視訊的先前經寫碼圖像，或在編碼器及解碼器分別為可縮放編碼器及解碼器之情況下，另一視圖或階層式下層之圖像。
圖3中之預測殘餘信號24''''亦經繪示為圖像區域分成區塊84之細分。此等區塊可被稱作變換區塊，以便將其與寫碼區塊80及82區分開。實際上，圖3繪示編碼器10及解碼器20可使用圖像12及圖像12'分別分成區塊之二個不同細分，亦即分成寫碼區塊80及82之一個細分及分成變換區塊84之另一細分。二種細分可能相同，亦即，各寫碼區塊80及82可同時形成變換區塊84，但圖3繪示如下情況：其中例如分成變換區塊84之細分形成分成寫碼區塊80、82之細分的擴展，使得區塊80及82之二個區塊之間的任何邊界與二個區塊84之間的邊界重疊，或者各區塊80、82與變換區塊84中之一者重合或與變換區塊84之叢集重合。然而，亦可獨立於彼此判定或選擇細分，使得變換區塊84可替代地跨越區塊80、82之間的區塊邊界。就細分成變換區塊84而言，如關於細分成區塊80、82所提出之彼等陳述，類似陳述因此成立，亦即，區塊84可為圖像區域分成區塊(具有或不具有成列及行之配置)之常規細分的結果、圖像區域之遞歸多叉樹細分的結果，或其組合，或任何其他類別之分塊。順便指出，應注意，區塊80、82及84不限於正方形、矩形或任何其他形狀。
圖3進一步繪示預測信號26與預測殘餘信號24''''之組合直接產生經重建構信號12'。然而，應注意，多於一個預測信號26可根據替代實施例與預測殘餘信號24''''組合以產生圖像12'。
在圖3中，變換區塊84應具有以下重要性。變換器28及反變換器54以此等變換區塊84為單位執行其變換。舉例而言，許多編解碼器將某種離散正弦變換(DST)或離散餘弦變換(DCT)用於所有變換區塊84。一些編解碼器允許跳過變換，使得對於變換區塊84中之一些，預測殘餘信號直接在空間域中被寫碼。然而，根據下文描述之實施例，編碼器10及解碼器20以使得其支援若干變換之方式進行組配。舉例而言，由編碼器10及解碼器20支援之變換可包含： ●    DCT-II (或DCT-III)，其中DCT代表離散餘弦變換 ●    DST-IV，其中DST代表離散正弦變換 ●    DCT-IV ●    DST-VII ●    恆等變換(IT)
當然，雖然變換器28將支援此等變換之所有正變換版本，但解碼器20或反變換器54將支援其對應的後向或反向版本： ●    反DCT-II (或反DCT-III) ●    反DST-IV ●    反DCT-IV ●    反DST-VII ●    恆等變換(IT)
後續描述提供關於編碼器10及解碼器20可支援哪些變換之更多細節。在任何情況下，應注意，所支援變換之集合可僅包含一個變換，諸如一個頻譜至空間或空間至頻譜變換，但亦有可能編碼器或解碼器根本不使用變換或變換不用於單一區塊80、82、84。
如上文已概述，圖1a至圖2已呈現為一實例，其中本文所描述之本發明概念可經實施以形成根據本申請案之編碼器及解碼器的特定實例。就此而言，圖1a、圖1b及圖2之編碼器及解碼器可分別表示上文所描述之編碼器及解碼器的可能實施。然而，圖1a、圖1b及圖2僅為實例。然而，根據本申請案之實施例之編碼器可使用上文或下文更詳細概述之概念執行對圖像12之基於區塊之編碼，且與圖1a或圖1b之編碼器之不同之處諸如在於以不同於圖3中所例示之方式執行分成區塊80之細分，及/或在於根本不使用變換(例如變換跳過/恆等變換)或不將變換用於單一區塊。同樣，根據本申請案之實施例的解碼器可使用下文進一步概述之寫碼概念執行圖像12'自資料串流14之基於區塊之解碼，但與圖2之解碼器20的不同之處可例如在於該解碼器以不同於關於圖3所描述之方式將圖像12'細分成區塊，及/或在於該解碼器不在變換域中而例如在空間域中自資料串流14導出預測殘餘，及/或在於該解碼器根本不使用任何變換或不將變換用於單一區塊。
根據一實施例，之前描述的本發明概念可實施於編碼器之量化器32中或解碼器之解量化器38、52中。因此，根據一實施例，量化器32及/或解量化器38、52可經組配以視變換器28所應用或反變換器54將應用之選定變換而將不同縮放應用至待量化區塊。因此，量化器32及/或解量化器38、52經組配以不僅針對所有變換模式(亦即，變換類型)使用一個預定義縮放，而且針對各選定變換模式使用一不同縮放。
目前先進技術混合視訊寫碼技術採用與所用變換及區塊大小無關的同一縮放因數來進行反量化。本發明描述允許視選定變換及區塊大小而使用不同縮放因數的方法。自編碼器視角而言，量化步長視選定變換及變換區塊大小而不同。藉由組合取決於變換類型及變換區塊大小之不同量化步長大小，編碼器可達成較高壓縮效率。
圖4示出用於使用變換寫碼對圖像信號進行基於區塊之編碼的編碼器10。輸入圖像12之預測殘餘24之預定區塊18由編碼器10執行。
編碼器10經組配以針對預定區塊18選擇選定變換模式130。舉例而言，選定變換模式130係基於預定區塊18之內容或基於輸入圖像12之預測殘餘24之內容或基於輸入圖像12之內容而選擇。編碼器可自變換模式128選擇選定變換模式130，該等變換模式128可劃分成非恆等變換1281 及恆等變換1282 。
根據一實施例，非恆等變換1281 包含DCT-II、DCT-III、DCT-IV、DST-IV及/或DST-VII變換。
另外，編碼器10經組配以使用量化準確度140量化待量化區塊18'以獲得經量化區塊18''，該待量化區塊18'根據選定變換模式130與預定區塊18相關聯，該量化準確度140係視選定變換模式130而定。
根據一實施例，待由量化器32量化之區塊18'可由編碼器藉由一或多個應用於預定區塊18之處理步驟獲得，其中編碼器10可經組配以在步驟中之一者中使用選定變換模式130。待量化區塊18'為例如預定區塊18之經處理版本。舉例而言，待量化區塊18'係藉由對預定區塊18應用選定變換模式130而獲得，其中恆等變換可對應於變換跳過。
待量化區塊18'係以某一量化準確度140經量化。量化準確度140可基於針對預定區塊18選擇之選定變換模式130而判定，該預定區塊18與待量化區塊18'相關聯。使用最佳化量化準確度140，可減少量化導致之失真。相同量化準確度針對不同變換模式128會導致不同量之失真。因此，有利的是使個別量化準確度140與不同變換模式128相關聯。
舉例而言，編碼器10經組配以判定待量化區塊18'之量化參數，從而界定量化準確度140。舉例而言，量化準確度140係由量化參數(QP)、縮放因數及/或量化步長界定。
藉由以個別量化準確度140量化區塊18'而產生之經量化區塊18''由編碼器10之熵編碼器34經熵編碼至資料串流14中。
任擇地，編碼器10可包含類似於圖7或如關於圖7所描述之額外特徵。
圖5示出用於使用變換解碼對經編碼圖像信號進行基於區塊之解碼的解碼器20。解碼器20可經組配以自資料串流14重建構輸出圖像，其中預定區塊118可表示輸出圖像之預測殘餘之區塊。
解碼器20經組配以針對預定區塊118選擇選定變換模式130。舉例而言，選定變換模式130係基於資料串流14中之信令而選擇。解碼器可自變換模式128選擇選定變換模式130，該等變換模式128可劃分成非恆等變換1281 及恆等變換1282 。
非恆定變換1281 可表示由編碼器應用之變換的反/逆變換。根據一實施例，非恆等變換1281 包含反DCT-II、反DCT-III、反DCT-IV、反DST-IV及/或反DST-VII變換。
另外，解碼器20經組配以藉由熵解碼器50對來自資料串流14之待解量化區塊118'進行熵解碼，該待解量化區塊118'根據選定變換模式130與預定區塊118相關聯。根據一實施例，待解量化區塊118'可藉由一或多個由解碼器20執行之步驟處理，從而產生預定區塊118，其中解碼器20可經組配以在步驟中之一者中使用選定變換模式130。舉例而言，預定區塊118為待解量化區塊118'之經處理版本。待解量化區塊118'例如為經歷選定變換模式130之前的預定區塊118。如圖5中所示，任擇地，解碼器20經組配以使用反變換器54以便使用選定變換模式130獲得預定區塊118。
另外，解碼器20經組配以使用量化準確度140解量化待由解量化器52解量化之區塊118'，以獲得經解量化區塊118''，該量化準確度140係視選定變換模式130而定。
待解量化區塊118'係以某一量化準確度140經解量化。量化準確度140可基於針對預定區塊118選擇之選定變換模式130而判定，該預定區塊118與待解量化區塊118'相關聯。使用最佳化量化準確度140，可減少量化導致之失真。相同量化準確度針對不同變換模式128會導致不同量之失真。因此，有利的是使個別量化準確度140與不同變換模式128相關聯。
舉例而言，解碼器20經組配以針對待解量化區塊118'判定量化參數，亦即解量化參數，從而界定量化準確度140。舉例而言，量化準確度140係由量化參數(QP)、縮放因數及/或量化步長界定。
任擇之變換器54可經組配以使用選定變換模式130變換經解量化區塊118''以獲得預定區塊118。
本發明使得能夠視選定變換及變換區塊大小而改變量化步長，亦即量化準確度。以下描述係自解碼器視角書寫，其使用量化步長之解碼器側縮放52 (相乘)可視為除以步長之編碼器側劃分之反向(非可逆)。
在解碼器側，如H.265/HEVC之當前視訊寫碼標準中的(經量化)變換係數層級之縮放52，亦即解量化，係針對變換係數而設計，從而產生如圖6中所示具有較高精確度之DCT/DST整數變換。在此，變數bitDepth 指定影像樣本之位元深度，例如8或10位元。變數log2TbW 及log2TbH 分別指定變換區塊寬度及高度之二進位對數。圖6示出諸如H.265/HEVC之近期視訊寫碼標準中之解碼器側縮放52及反變換54。
應注意，在解碼器處，二個基於1D DCT/DST之整數變換1281 引入額外因數
Figure 02_image009
，其需要藉由反向縮放來補償。對於具有奇數log2TbH +log2TbW 之非方形區塊，縮放包括因數
Figure 02_image011
。此可藉由加上比例因數181/256或使用針對此情況併入彼因數的不同levelScale 值集合來進行考慮，該集合例如
Figure 02_image013
。對於恆等變換或變換跳過情況1282 ，此方式不適用。
可見，步長大小或縮放因數(
Figure 02_image015
)對於小於4之QP而言變得小於1，因為此等QP之levelScale 小於64=26 。對於該等變換係數，由於整數正變換1281 增加殘餘信號之精確度且因此增大動態範圍，此情況不會有問題。然而，對於在恆等變換或變換跳過1282 情況下之殘餘信號，動態範圍未增大。在此情況下，針對QP＜4，小於1之縮放因數可引入失真，對於具有縮放因數1之QP 4而言，不存在該失真。此與降低QP將減少失真之量化器設計意圖相對立。
視選定變換，例如變換跳過抑或未跳過而改變量化步長，可用以推導用於變換跳過1282 之不同量化步長。尤其對於最低QP 0、1、2及3而言，此將解決最低QP具有小於1之量化步長/縮放因數的問題。在圖7中所示之一個實施例中，解決方案可為將量化參數削減53至最小允許值4(QP ' )，從而產生不可能低於1之量化步長。除此之外，以bdShift1 進行之大小相依性正規化541 及以bdShift2 最終捨入542 至變換所需的該位元深度可經移動至變換路徑54。此將藉由捨入使變換跳過縮放以10位元降低至下移位置。在另一實施例中，位元串流限制可經界定而不允許編碼器使用導致針對變換跳過之縮放因數小於1的QP值，而非將QP值消減至4。圖7示出根據本發明之改良解碼器側縮放52及反變換54。
在位元率範圍之另一端，亦即對於較低位元率，用於恆等變換1282 之量化步長可被減小一偏移量，從而產生不應用變換或應用恆等變換1282 之區塊之較高保真度。此將使得編碼器能夠針對變換跳過區塊選擇適當QP值以達成較高壓縮效率。此態樣不限於恆等變換/變換跳過1282 ，其亦可用以將用於其他變換類型1281 之QP修改一偏移量。舉例而言，編碼器將以例如藉由最大化感知視覺品質或最小化如給定位元率之方誤差的物鏡失真，或藉由降低給定品質/失真之位元率而增加壓縮效率之方式判定此偏移量。自圖塊QP之此(就所應用準則而言)最佳推導取決於例如內容、位元率或複雜度操作點以及諸如選定變換及變換區塊大小之其他因數。本發明描述用於針對多個變換之情況傳信QP偏移量的方法。在不損失一般性之情況下，給定二個替代性變換，固定QP偏移量可由編碼器針對二個替代性變換中之各者在高層級語法結構(諸如序列參數集、圖像參數集、圖案塊群組標頭、圖塊標頭或類似者)中進行傳輸。替代地，當編碼器已選擇替代性變換時，QP偏移量係例如由編碼器針對各變換區塊進行傳輸。二個方法之組合為在高層級語法結構中傳信基礎QP偏移量及針對使用替代性變換之各變換區塊傳信額外偏移量。該偏移量可為與基礎QP相加或自其減去的值或至偏移值集合之索引。彼集合可在高層級語法結構中預定義或傳信。
●    在本發明之一較佳實施例中，針對恆等變換，QP相對於基礎QP的偏移量係在高層級語法結構中，例如在序列、圖像、圖案塊群組、圖案塊或圖塊層級上傳信的。 ●    在本發明之另一較佳實施例中，針對恆等變換，QP相對於之基礎QP的量係針對各寫碼單元或預定義寫碼單元集合而傳信的。 ●    在本發明之另一較佳實施例中，針對恆等變換，QP相對於基礎QP之偏移量係針對應用恆等變換之各變換單元而傳信的。
本發明之另一態樣為不同縮放矩陣針對不同變換類型，例如恆等變換/變換跳過之使用。縮放矩陣允許以不同方式縮放每一變換係數。由於變換係數通常與殘餘信號之不同空間頻率相關，此可解譯為頻率相依性加權。由於由不同變換類型產生之係數之分佈可能不同，因此建議針對不同變換類型使用不同縮放矩陣。此情形之特殊情況為恆等變換，其中係數對等於與空間頻率無關之殘餘樣本。在彼情況下，頻率加權縮放無益，且可應用獨立的空間加權縮放矩陣或不應用基於矩陣之縮放。
此外，圖8及圖9示出基於上文關於編碼器及/或解碼器描述之原理的方法。
圖8示出用於使用變換寫碼對圖像信號進行基於區塊之編碼的方法800，其包含針對預定區塊選擇810選定變換模式，例如恆等變換或非恆等變換，其中該恆等變換可理解為變換跳過。另外，方法800包含使用例如由量化參數(QP)、縮放因數及/或量化步長界定之量化準確度量化820待量化區塊，例如經歷選定變換模式之預定區塊以獲得經量化區塊，該待量化區塊根據選定變換模式與預定區塊相關聯，該量化準確度係視選定變換模式而定。待量化區塊可藉由在選定變換模式為非恆等變換之情況下將構成選定變換模式之基礎的變換應用於預定區塊及在選定變換模式為恆等變換之情況下均衡預定區塊而獲得。量化820可藉由將區塊之值除以量化參數(QP)、縮放因數及/或量化步長以得到經量化區塊來執行。另外，方法800包含將經量化區塊熵編碼830至資料串流中。
圖9示出用於使用變換解碼對經編碼圖像信號進行基於區塊之解碼的方法900，其包含針對預定區塊，例如經解碼殘餘圖像信號或殘餘視訊信號中之相鄰殘餘區塊區域中之殘餘區塊，選擇910選定變換模式，例如恆等變換或非恆等變換。恆等變換可理解為變換跳過，且非恆等變換可為由編碼器應用或供編碼方法使用之變換的反/逆變換。另外，方法900包含自資料串流熵解碼920待解量化區塊，例如經歷選定變換模式之前的預定區塊，該待解量化區塊根據選定變換模式與預定區塊相關聯。此外，方法900包含使用量化準確度解量化930待解量化區塊以獲得經解量化區塊，該量化準確度係視選定變換模式而定。量化準確度可界定待解量化區塊之解量化930的準確度。量化準確度例如係由量化參數(QP)、縮放因數及/或量化步長界定。舉例而言，解量化930係藉由將區塊之值乘以量化參數(QP)、縮放因數及/或量化步長以得到經解量化區塊來執行。 實施替代方案：
儘管已在設備之上下文中描述一些態樣，但顯然，此等態樣亦表示對應方法之描述，其中區塊或裝置對應於方法步驟或方法步驟之特徵。類似地，方法步驟之上下文中所描述的態樣亦表示對應設備之對應區塊或項目或特徵的描述。可由(或使用)硬體設備(例如微處理器、可規劃電腦或電子電路)執行方法步驟中之一些或全部。在一些實施例中，可由此類設備執行最重要之方法步驟中之一或多者。
視某些實施要求而定，本發明之實施例可在硬體或軟體中實施。實施可使用數位儲存媒體來執行，該媒體例如軟碟、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體，該媒體上儲存有電子可讀控制信號，該電子可讀控制信號與可規劃電腦系統協作(或能夠與其協作)，從而執行各別方法。因此，數位儲存媒體可為電腦可讀的。
根據本發明之一些實施例包含具有電子可讀控制信號之資料載體，其能夠與可規劃電腦系統協作，從而執行本文所描述之方法中的一者。
一般而言，本發明之實施例可實施為具有程式碼之電腦程式產品，程式碼操作性地用於在電腦程式產品於電腦上運行時執行該等方法中之一者。程式碼可例如儲存於機器可讀載體上。
其他實施例包含儲存於機器可讀載體上，用於執行本文所描述之方法中之一者的電腦程式。
因此，換言之，本發明方法之實施例為電腦程式，其具有用於在電腦程式於電腦上運行時執行本文所描述之方法中之一者的程式碼。
因此，本發明方法之另一實施例為資料載體(或數位儲存媒體，或電腦可讀媒體)，該資料載體包含記錄於其上的用於執行本文所描述之方法中之一者的電腦程式。資料載體、數位儲存媒體或所記錄媒體通常為有形的及/或非暫時性的。
因此，本發明方法之另一實施例為表示用於執行本文所描述之方法中之一者的電腦程式的資料串流或信號序列。資料串流或信號序列可例如經組配以經由資料通訊連接，例如經由網際網路而傳送。
另一實施例包含處理構件，例如經組配以或經調適以執行本文所描述之方法中之一者的電腦或可規劃邏輯裝置。
另一實施例包含電腦，該電腦具有安裝於其上之用於執行本文所描述之方法中之一者的電腦程式。
根據本發明之另一實施例包含經組配以將用於執行本文所描述之方法中之一者的電腦程式傳送(例如，用電子方式或光學方式)至接收器的設備或系統。舉例而言，接收器可為電腦、行動裝置、記憶體裝置或類似者。設備或系統可例如包含用於將電腦程式傳送至接收器之檔案伺服器。
在一些實施例中，可規劃邏輯裝置(例如，場可規劃閘陣列)可用以執行本文所描述之方法的功能性中之一些或全部。在一些實施例中，場可規劃閘陣列可與微處理器協作，以便執行本文所描述之方法中的一者。一般而言，該等方法較佳由任何硬體設備執行。
本文所描述之設備可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來實施。
本文所描述之設備或本文所描述之設備的任何組件可至少部分地以硬體及/或以軟體予以實施。
本文所描述之方法可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來執行。
本文所描述之方法或本文所描述之設備的任何組件可至少部分地由硬體及/或由軟體進行。
上文所描述之實施例僅說明本發明之原理。應理解，對於熟習此項技術者而言，對本文所描述之配置及細節的修改及變化將顯而易見。因此，意欲僅受接下來之申請專利範圍之範疇限制，而不受藉助於本文實施例之描述及解釋所呈現的特定細節限制。
10:編碼器 12,12':圖像 14:資料串流 18,118:預定區塊 18':待量化區塊 18'':經量化區塊 20:解碼器 22:預測殘餘信號形成器 24:預測殘餘 24',24''':譜域預測殘餘信號 24'':經量化預測殘餘信號 24'''':預測殘餘信號 26:預測信號 28:變換器 32:量化器 34:熵寫碼器/熵編碼器 36:預測級 38,52:解量化器 40,54:反變換器 42,56:組合器 44,58:預測模組 46:經重建構信號 50:熵解碼器 52:解碼器側縮放 53,541 ,542 ,810,820,830,910,920,930:步驟 80:經框內寫碼區塊 82:經框間寫碼區塊 84:變換區塊 118':待解量化區塊 118'':經解量化區塊 128:變換模式 1281 :非恆等變換 1282 :恆等變換 130:選定變換模式 140:量化準確度 800,900:方法
圖式未必按比例繪製，實際上重點一般放在說明本發明之原理上。在以下描述中，參看以下圖式描述本發明之各種實施例，其中： 圖1a 示出編碼器之示意圖； 圖1b 示出替代性編碼器之示意圖； 圖2   示出解碼器之示意圖； 圖3   示出基於區塊之寫碼的示意圖； 圖4   示出根據一實施例之編碼器的示意圖； 圖5   示出根據一實施例之解碼器的示意圖； 圖6   示出近期視訊寫碼標準中之解碼器側縮放及反變換的示意圖； 圖7   示出根據一實施例之解碼器側縮放及反變換的示意圖； 圖8   示出根據一實施例的用於進行基於區塊之編碼之方法的方塊圖；且 圖9   示出根據一實施例之用於進行基於區塊之解碼之方法的方塊圖。
14:資料串流
20:解碼器
50:熵解碼器
52:解碼器側縮放
54:反變換器
118:預定區塊
118':待解量化區塊
118":經解量化區塊
128:變換模式
1281:非恆等變換
1282:恆等變換
130:選定變換模式
140:量化準確度

Claims (62)

  1. 一種用以使用變換寫碼對一圖像信號進行基於區塊之編碼的編碼器，該編碼器經組配來進行下列動作：針對一預定區塊選擇一選定變換模式；使用一量化準確度量化一待量化區塊以獲得一經量化區塊，該待量化區塊根據該選定變換模式與該預定區塊相關聯，該量化準確度係視該選定變換模式而定，其中該量化準確度係由一量化參數(QP)、一縮放因數及/或一量化步長定義；以及將該經量化區塊熵編碼入一資料串流。
  2. 如請求項1之編碼器，其中該量化準確度係視該選定變換模式為一恆等變換或一非恆等變換而定。
  3. 如請求項2之編碼器，其經組配來進行下列動作，在該選定變換模式為該恆等變換時，判定用於該預定區塊之一初始量化準確度且檢查該初始量化準確度是否比一預定臨界值精細，在該初始量化準確度比該預定臨界值精細時，將該量化準確度設定為一預設量化準確度。
  4. 如請求項3之編碼器，其經組配以在該初始量化準確度不比該預定臨界值精細時，使用該初始量化準確度作為該量化準確度。
  5. 如請求項3之編碼器，其經組配以藉由自一量化參數清單判定一索引來判定該初始量化準確度。
  6. 如請求項5之編碼器，其中該索引指向該量化參數清單內之一量化參數且經由對於該量化參數清單中之所有量化參數相等之一函數與一量化步長相關聯。
  7. 如請求項5之編碼器，其經組配以藉由檢查該索引是否小於 一預定索引值來檢查該初始量化準確度是否比該預定臨界值精細。
  8. 如請求項3之編碼器，其中該待量化區塊之該量化包含一縮放，繼之以一整數量化，且其中該編碼器經組配以使得該預定臨界值及/或該預設量化準確度與一縮放因數1相關。
  9. 如請求項3之編碼器，其經組配以判定用於以下各者之該初始量化準確度：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  10. 如請求項2之編碼器，其經組配以在該資料串流中傳信該量化準確度及/或該選定變換模式。
  11. 如請求項3之編碼器，其經組配以在該資料串流中傳信該初始量化準確度。
  12. 如請求項1之編碼器，其中該預定區塊表示要進行基於區塊之編碼的該圖像信號之一預測殘餘的一區塊。
  13. 如請求項1之編碼器，其經組配以判定用於該預定區塊之一初始量化準確度且視該選定變換模式而修改該初始量化準確度。
  14. 如請求項13之編碼器，其經組配以視該選定變換模式而藉由使用一偏移值使該初始量化準確度偏移來執行該初始量化準確度之該修改。
  15. 如請求項13之編碼器，其經組配以藉由自一量化參數清單判定一索引來判定該初始量化準確度。
  16. 如請求項15之編碼器，其中該索引指向該量化參數清單內之一量化參數且經由對於該量化參數清單中之所有量化參數相等之一函數與一量化步長相關聯。
  17. 如請求項15之編碼器，其經組配以藉由將該偏移值相加至該 索引、或藉由自該索引減去該偏移值來修改該初始量化準確度。
  18. 如請求項13之編碼器，其中該待量化區塊之該量化包含一縮放，繼之以一整數量化，且其中該編碼器經組配以藉由將該偏移值相加至該縮放因數、或藉由自該縮放因數減去該偏移值來修改該初始量化準確度。
  19. 如請求項13之編碼器，其經組配以視該選定變換模式為一恆等變換或一非恆等變換而提供該經修改初始量化準確度。
  20. 如請求項13之編碼器，其經組配以在該選定變換模式為該恆等變換時，判定用於該預定區塊之一初始量化準確度且檢查該初始量化準確度是否比一預定臨界值粗略，在該初始量化準確度比該預定臨界值粗略時，視該選定變換模式而使用一偏移值修改該量化準確度，使得一經修改初始量化準確度比該預定臨界值精細。
  21. 如請求項20之編碼器，其經組配來進行下列動作：在該初始量化準確度不比該預定臨界值粗略時，不進行視該選定變換模式而使用該偏移值對該量化準確度之修改。
  22. 如請求項20之編碼器，其經組配以在該選定變換模式為一非恆等變換時，不使用該偏移值修改該初始量化準確度。
  23. 如請求項13之編碼器，其經組配以判定用於以下各者之該初始量化準確度：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  24. 如請求項13之編碼器，其經組配以藉由使用一率失真最佳化來判定該偏移量。
  25. 如請求項14之編碼器，其經組配以針對以下各者在該資料串流中傳信該偏移量：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  26. 如請求項1之編碼器，其中該待量化區塊之該量化包含一全區塊縮放及用一區塊內變化縮放矩陣之一縮放，繼之以一整數量化，且其中該編碼器經組配以視該選定變換模式而判定該區塊內變化縮放矩陣。
  27. 如請求項26之編碼器，其經組配以判定該區塊內變化縮放矩陣，使得該判定針對大小及形狀相同的不同待量化區塊產生不同區塊內變化縮放矩陣。
  28. 如請求項27之編碼器，其中該判定使得針對大小及形狀相同之該等不同待量化區塊所判定的該等區塊內變化縮放矩陣視該選定變換模式而定，且該選定變換模式不等同於一恆等變換。
  29. 如請求項1之編碼器，其經組配以在該選定變換模式為一非恆等變換時，將對應於該選定變換模式之一變換應用於該預定區塊以獲得該待量化區塊；以及在該選定變換模式為一恆等變換時，該預定區塊為該待量化區塊。
  30. 一種用以使用變換解碼對一經編碼圖像信號進行基於區塊之解碼的解碼器，該解碼器經組配來進行下列動作：針對一預定區塊選擇一選定變換模式；對來自一資料串流之一待解量化區塊進行熵解碼，該待解量化區塊根據該選定變換模式與該預定區塊相關聯；使用一量化準確度解量化該待解量化區塊以獲得一經解量化區塊，該量化準確度係視該選定變換模式而定；其中該量化準確度係由一量化參數(QP)、一縮放因數及/或一量化步長定義。
  31. 如請求項30之解碼器，其中該量化準確度係視該選定變換模式為一恆等變換或一非恆等變換而定。
  32. 如請求項31之解碼器，其經組配來進行下列動作，在該選定變換模式為該恆等變換時，判定用於該預定區塊之一初始量化準確度且檢查該初始量化準確度是否比一預定臨界值精細，在該初始量化準確度比該預定臨界值精細時，將該量化準確度設定為一預設量化準確度。
  33. 如請求項32之解碼器，其經組配以在該初始量化準確度不比該預定臨界值精細時，使用該初始量化準確度作為該量化準確度。
  34. 如請求項32之解碼器，其經組配以藉由自一解量化參數清單判定一索引來判定該初始量化準確度。
  35. 如請求項34之解碼器，其中該索引指向該解量化參數清單內之一量化參數且經由對於該解量化參數清單中之所有量化參數相等之一函數與一量化步長相關聯。
  36. 如請求項34之解碼器，其經組配以藉由檢查該索引是否小於一預定索引值來檢查該初始量化準確度是否比該預定臨界值精細。
  37. 如請求項32之解碼器，其中該待解量化區塊之該解量化包含一縮放，繼之以一整數解量化，且其中該解碼器經組配以使得該預定臨界值及/或該預設量化準確度與一縮放因數1相關。
  38. 如請求項32之解碼器，其經組配以判定用於以下各者之該初始量化準確度：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  39. 如請求項31之解碼器，其經組配以自該資料串流讀取該選定 變換模式。
  40. 如請求項32之解碼器，其經組配以自該資料串流讀取該初始量化準確度。
  41. 如請求項30之解碼器，其中該預定區塊表示要進行基於區塊之解碼的該圖像信號之一預測殘餘之一區塊。
  42. 如請求項30之解碼器，其經組配以判定用於該預定區塊之一初始量化準確度且視該選定變換模式而修改該初始量化準確度。
  43. 如請求項42之解碼器，其經組配以視該選定變換模式而藉由使用一偏移值使該初始量化準確度偏移來執行該初始量化準確度之該修改。
  44. 如請求項42之解碼器，其經組配以藉由自一解量化參數清單判定一索引來判定該初始量化準確度。
  45. 如請求項44之解碼器，其中該索引指向該解量化參數清單內之一量化參數且經由對於該解量化參數清單中之所有量化參數相等之一函數與一量化步長相關聯。
  46. 如請求項44之解碼器，其經組配以藉由將該偏移值相加至該索引、或藉由自該索引減去該偏移值來修改該初始量化準確度。
  47. 如請求項42之解碼器，其中該待解量化區塊之該解量化包含一縮放，繼之以一整數解量化，且其中該解碼器經組配以藉由將該偏移值相加至該縮放因數、或藉由自該縮放因數減去該偏移值來修改該初始量化準確度。
  48. 如請求項42之解碼器，其經組配以視該選定變換模式係一恆等變換或一非恆等變換而提供該經修改初始量化準確度。
  49. 如請求項42之解碼器，其經組配以在該選定變換模式為該恆等變換時， 判定用於該預定區塊之一初始量化準確度且檢查該初始量化準確度是否比一預定臨界值粗略，在該初始量化準確度比該預定臨界值粗略時，視該選定變換模式而使用一偏移值修改該量化準確度，使得一經修改初始量化準確度比該預定臨界值精細。
  50. 如請求項49之解碼器，其經組配來進行下列動作：在該初始量化準確度不比該預定臨界值粗略時，不進行視該選定變換模式而使用該偏移值對該量化準確度之修改。
  51. 如請求項49之解碼器，其經組配以在該選定變換模式為一恆等變換時，不使用該偏移值修改該初始量化準確度。
  52. 如請求項42之解碼器，其經組配以判定用於以下各者之該初始量化準確度：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  53. 如請求項42之解碼器，其經組配以藉由使用一率失真最佳化來判定該偏移量。
  54. 如請求項43之解碼器，其經組配以針對以下各者自該資料串流讀取該偏移量：包含該預定區塊之若干區塊，諸如包含該預定區塊之一完整圖像；包含該預定區塊之若干圖像；或包含該預定區塊之一圖像之一圖塊。
  55. 如請求項30之解碼器，其中該待解量化區塊之該解量化包含一全區塊縮放及用一區塊內變化縮放矩陣之一縮放，繼之以一整數解量化，且其中該解碼器經組配以視該選定變換模式而判定該區塊內變化縮放矩陣。
  56. 如請求項55之解碼器，其經組配以判定該區塊內變化縮放矩陣，使得該判定針對大小及形狀相同的不同待解量化區塊產生不同區塊內變化縮放矩陣。
  57. 如請求項56之解碼器，其中該判定使得針對大小及形狀相同之該等不同待解量化區塊所判定的該等區塊內變化縮放矩陣視該選定變換模式而定，且該選定變換模式不等同於一恆等變換。
  58. 如請求項30之解碼器，其經組配以在該選定變換模式為一非恆等變換時，將對應於該選定變換模式之一逆變換應用於該經解量化區塊以獲得該預定區塊；以及在該選定變換模式為一恆等變換時，該經解量化區塊為該預定區塊。
  59. 一種用以使用變換寫碼對一圖像信號進行基於區塊之編碼的方法，其包含：針對一預定區塊選擇一選定變換模式；使用一量化準確度量化一待量化區塊以獲得一經量化區塊，該待量化區塊根據該選定變換模式與該預定區塊相關聯，該量化準確度係視該選定變換模式而定，其中該量化準確度係由一量化參數(QP)、一縮放因數及/或一量化步長定義；以及將該經量化區塊熵編碼入一資料串流。
  60. 一種用以使用變換解碼對一經編碼圖像信號進行基於區塊之解碼的方法，其包含：針對一預定區塊選擇一選定變換模式；對來自一資料串流之一待解量化區塊進行熵解碼，該待解量化區塊根據該選定變換模式與該預定區塊相關聯；使用一量化準確度解量化該待解量化區塊以獲得一經解量化區塊，該量化準確度係視該選定變換模式而定；其中該量化準確度係由一量化參數(QP)、一縮放因數及/或一量化步長定義。
  61. 一種具有程式碼之電腦程式，該程式碼在一電腦上運行時執 行如請求項59或60之方法。
  62. 一種資料串流，其藉由如請求項59或60之方法獲得。
TW109119881A 2019-06-14 2020-06-12 具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式 TWI781416B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19180322 2019-06-14
EP19180322.0 2019-06-14

Publications (2)

Publication Number Publication Date
TW202106018A TW202106018A (zh) 2021-02-01
TWI781416B true TWI781416B (zh) 2022-10-21

Family

ID=66867055

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109119881A TWI781416B (zh) 2019-06-14 2020-06-12 具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式

Country Status (9)

Country Link
US (1) US20220103820A1 (zh)
EP (1) EP3984220A1 (zh)
JP (1) JP2022536376A (zh)
KR (1) KR20220030999A (zh)
CN (1) CN114009028A (zh)
BR (1) BR112021025017A2 (zh)
MX (1) MX2021015312A (zh)
TW (1) TWI781416B (zh)
WO (1) WO2020249762A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2020224256A1 (en) 2019-02-24 2021-09-09 Beijing Bytedance Network Technology Co., Ltd. Independent coding of palette mode usage indication
JP7359936B2 (ja) * 2019-07-20 2023-10-11 北京字節跳動網絡技術有限公司 パレットモードの使用の指示の条件依存符号化
CN117221536A (zh) 2019-07-23 2023-12-12 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
JP2022543009A (ja) 2019-07-29 2022-10-07 北京字節跳動網絡技術有限公司 予測処理におけるパレットモードの符号化
WO2021182432A1 (ja) * 2020-03-12 2021-09-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法、および復号方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015194187A1 (en) * 2014-06-20 2015-12-23 Sharp Kabushiki Kaisha Harmonized palette coding

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002311996A (ja) * 2001-02-09 2002-10-25 Sony Corp コンテンツ供給システム
WO2010023808A1 (ja) * 2008-09-01 2010-03-04 日本電気株式会社 画像同一性尺度算出システム
KR20100027384A (ko) * 2008-09-02 2010-03-11 삼성전자주식회사 예측 모드 결정 방법 및 장치
JP6041554B2 (ja) * 2012-06-27 2016-12-07 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
AU2013311185B2 (en) * 2012-09-06 2017-06-22 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, image coding and decoding apparatus
US9253483B2 (en) * 2012-09-25 2016-02-02 Google Technology Holdings LLC Signaling of scaling list
CN104662901B (zh) * 2012-09-28 2018-06-22 索尼公司 图像处理装置及方法
EP2843949B1 (en) * 2013-06-28 2020-04-29 Velos Media International Limited Methods and devices for emulating low-fidelity coding in a high-fidelity coder
GB2518823A (en) * 2013-09-25 2015-04-08 Sony Corp Data encoding and decoding
WO2015045736A1 (ja) * 2013-09-30 2015-04-02 日本放送協会 画像符号化装置、画像復号装置及びそれらのプログラム
JP6287035B2 (ja) * 2013-10-11 2018-03-07 ソニー株式会社 復号装置および復号方法
US20150215621A1 (en) * 2014-01-30 2015-07-30 Qualcomm Incorporated Rate control using complexity in video coding
US9958840B2 (en) * 2015-02-25 2018-05-01 Mitsubishi Electric Research Laboratories, Inc. System and method for controlling system using a control signal for transitioning a state of the system from a current state to a next state using different instances of data with different precisions
US10277896B2 (en) * 2016-01-22 2019-04-30 Apple Inc. Intra-frame prediction systems and methods
EP3417617A4 (en) * 2016-02-17 2019-02-27 Telefonaktiebolaget LM Ericsson (publ) METHOD AND DEVICES FOR CODING AND DECODING VIDEO IMAGES
KR102531124B1 (ko) * 2016-07-14 2023-05-10 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 변환 기반 잔차 코딩을 이용한 예측 화상 코딩
JPWO2018061837A1 (ja) * 2016-09-30 2019-07-11 ソニー株式会社 画像処理装置および方法
EP3685578A1 (en) * 2017-09-21 2020-07-29 Fraunhofer Gesellschaft zur Förderung der Angewand Concept for varying a coding quantization parameter across a picture, coding quantization parameter adjustment, and coding quantization parameter adaptation of a multi-channel picture
EP3484151A1 (en) * 2017-11-13 2019-05-15 Thomson Licensing Method and apparatus for generating quantization matrices in video encoding and decoding
US10616585B2 (en) * 2017-11-22 2020-04-07 Arm Limited Encoding data arrays

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015194187A1 (en) * 2014-06-20 2015-12-23 Sharp Kabushiki Kaisha Harmonized palette coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
期刊 M. Wang, W. Xie, J. Xiong, D. Wang, and J. Qin, ‘‘Joint optimization of transform and quantization for high efficiency video coding,’’ IEEE Access, vol. 7, pp. 62534–62544 , 2019. *

Also Published As

Publication number Publication date
CN114009028A (zh) 2022-02-01
EP3984220A1 (en) 2022-04-20
WO2020249762A1 (en) 2020-12-17
MX2021015312A (es) 2022-02-03
BR112021025017A2 (pt) 2022-02-22
KR20220030999A (ko) 2022-03-11
TW202106018A (zh) 2021-02-01
US20220103820A1 (en) 2022-03-31
JP2022536376A (ja) 2022-08-15

Similar Documents

Publication Publication Date Title
TWI781416B (zh) 具有基於尺度之改良變換之編碼器、解碼器、方法及電腦程式
CN110393010B (zh) 视频译码中的帧内滤波旗标
CN111345040B (zh) 用于在视频编码和解码中生成量化矩阵的方法和装置
US9264722B2 (en) Methods and devices for encoding and decoding transform domain filters
US8934543B2 (en) Adaptive quantization with balanced pixel-domain distortion distribution in image processing
KR101260157B1 (ko) 인트라코딩된 이미지 또는 프레임에 대한 인루프 디블로킹
US9787989B2 (en) Intra-coding mode-dependent quantization tuning
TW201340717A (zh) 在變換單元內之多符號位元隱藏
US20180324441A1 (en) Method for encoding/decoding image and device therefor
US11109024B2 (en) Decoder side intra mode derivation tool line memory harmonization with deblocking filter
KR20140124448A (ko) 인트라 예측을 이용한 비디오 부호화/복호화 방법 및 장치
KR20200128587A (ko) 비디오 인코딩 및 디코딩에서의 크로마 양자화 파라미터 조정
US20210112272A1 (en) Contour mode prediction
US11297338B2 (en) Selective quantization parameter transmission
EP2830308B1 (en) Intra-coding mode-dependent quantization tuning
TWI771705B (zh) 用於改良式無損壓縮之編碼器、解碼器、方法及電腦程式
JP6917718B2 (ja) 予測装置、符号化装置、復号装置、及びプログラム
TW202137761A (zh) 用於樣本區塊之經變換表示型態的寫碼概念
KR101477772B1 (ko) 비트 심도 증가를 통한 복호화 방법을 실행하기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent