TW201637444A - 包括用於影像處理的編碼器之方法、系統及裝置 - Google Patents

包括用於影像處理的編碼器之方法、系統及裝置 Download PDF

Info

Publication number
TW201637444A
TW201637444A TW104144462A TW104144462A TW201637444A TW 201637444 A TW201637444 A TW 201637444A TW 104144462 A TW104144462 A TW 104144462A TW 104144462 A TW104144462 A TW 104144462A TW 201637444 A TW201637444 A TW 201637444A
Authority
TW
Taiwan
Prior art keywords
value
block
spatial domain
values
domain block
Prior art date
Application number
TW104144462A
Other languages
English (en)
Other versions
TWI688260B (zh
Inventor
鄭詠凡
張爀在
Original Assignee
三星電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三星電子股份有限公司 filed Critical 三星電子股份有限公司
Publication of TW201637444A publication Critical patent/TW201637444A/zh
Application granted granted Critical
Publication of TWI688260B publication Critical patent/TWI688260B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)

Abstract

提供一種操作一編碼器之方法。本方法包括有產生用於目前空間域區塊像素值之預測空間域區塊值、基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異產生殘餘空間域區塊值、計算該等殘餘空間域區塊值之一代表值、從複數個量化參數選擇出對應於該代表值之一量化參數、以及使用該選擇之量化參數把該等殘餘空間域區塊值量化。

Description

包括用於影像處理的編碼器之方法、系統及裝置 相關申請案交互參照
本申請案依據35 U.S.C.§ 119(a)主張2015年1月5日提出申請之韓國專利申請案第10-2015-0000521號的優先權，其完整揭露係以參考方式併入本文。
本發明係有關於包括用於影像處理的編碼器之方法、系統及裝置。
編碼器是一種為了標準化、保密、提升處理速度、節省記憶體空間等等目的而轉換一種資訊形式或格式的裝置或方法。量化參數是一種用於在編碼器中調整量化程度的數值。編碼器可使用量化參數把輸入資料量化。
習知的編碼器在量化參數範圍內藉由比較所有可能候選者之成本，使用率失真最佳化(RDO)判定最佳編碼量化參數。然而，進行RDO之編碼器可能使用相當大量的運算資訊才能判定最佳編碼量化參數，但仍無法確定編碼器所判定的量化參數是否為最佳者。
根據本發明概念之一些實施例，提供有一種操作一編碼器之方法。本方法包括有產生用於目前空間域區塊像素值之預測空間域區塊值、基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異產生殘餘空間域區塊值、計算該等殘餘空間域區塊值之一代表值、從複數個量化參數選擇出對應於該代表值之一量化參數、以及使用該選擇之量化參數把該等殘餘空間域區塊值量化。
該計算該代表值可包括有把該等殘餘空間域區塊值分組成複數個群組、計算一已分組值最大公因數、以及把該最大公因數判定為該代表值。把該等殘餘空間域區塊值分組可包括有把小於一參考值之值從該等殘餘空間域區塊值排除。
在一些實施例中，該計算該代表值可包括有計算該等殘餘空間域區塊值之一標準差，並且把該標準差判定為該代表值。計算該代表值可包括有計算該等殘餘空間域區塊值之一絕對差的平均(MAD)，並且把該MAD判定為該代表值。該複數個量化參數可儲存於一表格中。
在一些實施例中，該計算該代表值可包括有計算該等目前空間域區塊像素值之一絕對差的總和(SAD)及推導自該等目前空間域區塊像素值之頻域值的一絕對轉換差的總和(SATD)、比較該SAD與該SATD並且在該SAD等於或小於該SATD時產生一控制信號、以及回應於該控制信號計算該等殘餘空間域區塊值之該代表值。本方法可更包括有回應於該控制信號，使用該選擇之量化參數把經量化的區 塊值逆量化。
根據本發明概念之一些實施例，提供有一種系統晶片，該系統晶片包括有一組配來把一第一格式之第一資料轉換成一第二格式之第二資料的影像信號處理器電路、及一組配來編碼該第二格式之該第二資料的編碼器。
該編碼器可包括有一模式決策塊，該模式決策塊係組配來產生一具有一第一狀態或一第二狀態任一者之控制信號，並且產生用於對應於該第二資料之目前空間域區塊像素值之預測空間域區塊值，可包括有一減法器，該減法器係組配來基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異，產生殘餘空間域區塊值，及/或可包括有一轉換與量化塊，該轉換與量化塊係組配來回應於具有該第一狀態之該控制信號，計算該等殘餘空間域區塊值之一代表值，用以從複數個量化參數選擇出對應於該代表值之一量化參數，並且用以使用該選擇之量化參數把該等殘餘空間域區塊值量化。
該轉換與量化塊可略過把該等殘餘空間域區塊值轉換成頻域值之一轉換運算，並且回應於具有該第一狀態之該控制信號計算該等殘餘空間域區塊值之該代表值。該轉換與量化塊可回應於具有該第二狀態之該控制信號進行該轉換運算，並且使用率失真最佳化或一給定量化參數把該轉換運算轉換出的殘餘區塊量化。
該模式決策塊可包括有一轉換控制信號產生器，該轉換控制信號產生器係組配來使用該等目前空間域區塊 像素值產生一第一值、使用推導自該等目前空間域區塊像素值之頻域值產生一第二值、比較該第一值與該第二值、在該第一值等於或小於該第二值時產生具有該第一狀態之該控制信號、及/或產生具有該第二狀態之該控制信號。該第一值可以是該等目前空間域區塊像素值之一SAD，而該第二值可以是推導自該等目前空間域區塊像素值之該等頻域值之一SATD。
根據本發明概念之進一步實施例，提供有一種行動運算裝置，該行動運算裝置包括有一相機、一組配來把輸出自該相機之一第一格式之第一資料轉換成一第二格式之第二資料的影像信號處理器電路、及一組配來編碼該第二格式之該第二資料的編碼器。
該編碼器可包括有一模式決策塊，該模式決策塊係組配來產生一具有一第一狀態與一第二狀態任一者之控制信號，並且產生用於對應於該第二資料之目前空間域區塊像素值之預測空間域區塊值；一減法器，該減法器係組配來基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異，產生殘餘空間域區塊值；以及一轉換與量化塊，該轉換與量化塊係組配來回應於具有該第一狀態之該控制信號，計算該等殘餘空間域區塊值之一代表值，用以從複數個量化參數選擇出對應於該代表值之一量化參數、及/或用以使用該選擇之量化參數把該等殘餘空間域區塊值量化。
該轉換與量化塊可略過把該等殘餘空間域區塊 值轉換成頻域值之一轉換運算，並且回應於具有該第一狀態之該控制信號計算該等殘餘空間域區塊值之該代表值。該轉換與量化塊可回應於具有該第二狀態之該控制信號進行該轉換運算，並且使用率失真最佳化或一給定量化參數把該轉換運算轉換出的殘餘區塊量化。
在一些實施例中，該轉換與量化塊可把該等殘餘空間域區塊值分組成複數個群組、計算一已分組值最大公因數、把該最大公因數判定為該代表值、以及把小於一參考值之值從該等殘餘空間域區塊值排除。在一些實施例中，該轉換與量化塊可計算該等殘餘空間域區塊值之一標準差，並且把該標準差判定為該代表值。
在一些實施例中，該轉換與量化塊可計算該等殘餘空間域區塊值之一MAD，並且把該MAD判定為該代表值。
本發明概念之一些實施例係針對一種組配來處理目前空間域區塊像素值之編碼器電路。該編碼器電路可包括有一記憶體電路、及一處理器電路，該處理器電路係組配來執行來自該記憶體電路之電腦程式指令以進行各種運算。該等藉由該編碼器之該處理器電路所進行的運算可包括有基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的各別差異判定殘餘空間域區塊值、基於一轉換判定與該等殘餘空間域區塊值相關聯之一代表值、基於該代表值判定一量化間距大小、基於該量化間距大小選擇一量化參數、及/或基於該量化參數把該等殘餘空間域區塊 值量化。
在一些實施例中，該轉換可包括有基於該等目前空間域區塊像素值判定一絕對差的總和(SAD)值、以及基於推導自該等目前空間域區塊像素值之頻域值判定一絕對轉換差的總和(SATD)值。可回應於該SAD值大於該SATD值，進行該等殘餘空間域區塊值之時域對頻域轉換。該轉換可包括有回應於該SAD值小於或等於該SATD值，略過該等殘餘空間域區塊值之時域對頻域轉換。
在一些實施例中，該轉換可包括有判定一組包括有該等殘餘空間域區塊值中超出一臨界值者之殘餘空間域區塊值、以及選擇該代表值當作該組殘餘空間域區塊值之一最大公因數。在一些實施例中，該轉換可包括有判定該等殘餘空間域區塊值之一標準差值、以及選擇該代表值當作該標準差值。在一些實施例中，該轉換可包括有判定該等殘餘空間域區塊值之一絕對差的平均(MAD)值、以及選擇該代表值當作該MAD值。在一些實施例中，基於該量化間距大小選擇該量化參數可包括有從複數個量化參數選擇出值最接近該所判定量化間距大小之一量化參數。該量化參數可選自於儲存在該記憶體電路中之複數個量化參數。
應知，本揭露針對一項實施例所述之態樣可併入一不同實施例，但沒有對此作具體說明。也就是說，所有實施例及/或任何實施例之特徵可用任何方式來組合及/或可以是任何組合。本說明書下文詳述本發明之這些及其他目的及/或態樣。
10A~30A,10B-30B,10C~30C, 41-1~41-3,43-1~43-3, B10~B30‧‧‧區塊
100‧‧‧資料處理系統
200‧‧‧控制器
201‧‧‧匯流排架構
210‧‧‧中央處理單元
220‧‧‧影像信號處理器
230‧‧‧編碼器
231‧‧‧減法器
233‧‧‧模式決策塊
233-1‧‧‧轉換控制信號產生器
233-2‧‧‧預測區塊判定電路
235‧‧‧轉換與量化塊
237‧‧‧逆量化塊
239‧‧‧加法器
241‧‧‧解塊濾波器
243‧‧‧樣本適應偏移(SAO)濾波器
245‧‧‧碼框緩衝區
247‧‧‧移動估計塊
249‧‧‧移動補償塊
251‧‧‧框內預測塊
253‧‧‧熵編碼器
260~261‧‧‧記憶體控制器
270‧‧‧顯示控制器
300‧‧‧相機
400~401‧‧‧記憶體
500‧‧‧顯示器
501‧‧‧觸控螢幕
S110~S130,S210~S250‧‧‧操作
本發明概念之以上及其他特徵及優點藉由其具體實現之詳細說明並參考附圖將會顯而易見，在圖式中：圖1係根據本發明概念之一些實施例之資料處理系統的方塊圖；圖2係圖1中所示編碼器的方塊圖；圖3係圖2中所示模式決策塊的方塊圖；圖4係根據本發明概念之一些實施例包括有對應於代表值之量化參數之表格的一覽圖；圖5係用於說明圖2中所示減法器運算的概念圖；圖6係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之一些實施例及量化係數計算之代表值；圖7係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之一些實施例及量化係數計算之代表值；圖8係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之進一步實施例及量化係數計算之代表值；圖9係根據本發明概念之一些實施例使用分組判定代表值之方法的概念圖；圖10係根據本發明概念之一些實施例使用分組判定代表值之方法的概念圖； 圖11係根據本發明概念之進一步實施例使用分組判定代表值之方法的概念圖；圖12係根據本發明概念之一些實施例控制轉換略過模式之方法的流程圖；以及圖13係根據本發明概念之一些實施例操作編碼器之方法的流程圖。
本發明概念現將參照附圖在下文作更完整的說明，本發明之實施例係於附圖中展示。然而，本發明可用許多不同形式具體實現，並且不應視為受限於本發明所提的實施例。反而，提供這些實施例是為了讓本揭露可讓人透徹且完全地理解，並且傳達本發明之範疇予所屬技術領域中具有通常知識者。在圖式中，層與區域的大小及相對大小可為求清楚而放大。全文中相似的數字符號意指為相似的元件。
將會瞭解的是，當一元件意指為「連接」或「耦合」至另一元件時，該元件可直接連接或耦合至該另一元件或可存在中介元件。相比之下，當一元件意指為「直接連接」或「直接耦合」至另一元件時，不存在有中介元件。「及/或」一詞於本文中使用時，包括有相關所列用語中一或多者任一個及全部組合，並且可簡寫為「/」。
將會瞭解的是，雖然第一、第二等用語可在本文中用於說明各種元件，這些元件仍不應該受限於這些用語。 這些用語僅用於區別一個元件與另一元件。舉例而言，第一信號可取詞為第二信號，而且類似的是，第二信號可取詞為第一信號，但不會脫離本揭露之教示。
本文中使用的術語目的僅在於說明特定實施例而非意欲限制本發明。單數形式的「一」及「該」於本文中使用時，係意欲同時包括有複數形式，除非內容另有清楚指示。將會進一步瞭解的是，「包含有」及/或其詞性變化、或「包括有」及/或其詞性變化在本說明書中使用時，規定所述特徵、區域、整體、步驟、運算、元件、及/或組件的存在，但未排除一或多個其他特徵、區域、整體、步驟、運算、元件、組件、及/或其群組的存在或新增。
本文中用到的所有用語(包括有技術及科學用語)除非另有界定，都與本發明所屬技術領域中具有通常知識者通常瞭解者具有相同的意義。將會進一步瞭解的是，諸如常用字典中所界定之用語應解讀為意味著與其在相關技術領域及/或本申請案之內容中的意義一致，並且不會解讀成理想化或過度形式化概念，除非本文中有如此明確界定。
習知的影像處理使用可能需要重複計算的率失真最佳化(RDO)。本發明概念源自於認知這些重複的計算可能屬於運算密集，但不一定可保證量化參數值事實上屬於最佳。本發明概念之實施例係有關於一種編碼器，並且更特別的是，係有關於一種操作一編碼器的方法，該編碼器係組配來在轉換略過模式下判定一最佳編碼量化參數，該 最佳編碼量化參數對應於儲存於一表格內之量化參數中一空間域殘餘區塊之一代表值，而且此等實施例係有關於包括有該編碼器之裝置。
圖1係根據本發明概念之一些實施例之影像處理及/或資料處理系統100的方塊圖。請參照圖1，資料處理系統100可包括有控制器200、相機300、至少一個記憶體400及/或401、以及顯示器500。資料處理系統100亦可包括有觸控螢幕501。顯示器500、記憶體400、及相機200在圖1中雖然是繪示成外接至控制器200，這些組件之一或多者仍可與控制器200及/或控制器200之此等組件中任何一者整合。舉例而言，記憶體400可與編碼器230整合。圖1中之任何或所有組件可封裝在一起。
資料處理系統100可實施成個人電腦(PC)或諸如膝上型電腦之行動運算裝置、行動電話、智慧型手機、平板電腦、個人數位助理器(PDA)、企業數位助理器(EDA)、數位相機、數位攝影機、可攜式多媒體播放器(PMP)、個人導航裝置或可攜式導航裝置(PND)、手持式遊戲主控台、行動上網裝置(MID)、穿戴式電腦、物聯網(IoT)裝置、萬物聯網(IoE)裝置、或電子書。
控制器200可控制相機300、至少一個記憶體400及/或401、以及顯示器500之操作。控制器200亦可控制觸控螢幕501之操作。控制器200可實施成積體電路(IC)、主機板、系統晶片(SoC)、應用處理器(AP)、或行動AP。
控制器200可包括有匯流排架構201、中央處理單 元(CPU)210、影像信號處理器(ISP)220、編碼器230、至少一個記憶體控制器260及/或261、及顯示控制器270。匯流排架構201可實施成先進微控制器匯流排架構(AMBA®)、先進高效能匯流排(AHB)、先進週邊匯流排(APB)、先進可擴充介面(AXI)、或先進系統匯流排(ASB)，但本發明概念不受限於這些實例。
CPU 210可透過匯流排架構201控制下列至少一者之操作：ISP 220、編碼器230、至少一個記憶體控制器260及/或261、以及顯示控制器270。
ISP 220可控制輸出自相機300之影像資料的格式轉換、該影像資料之雜訊降低、及一影像之影像增強。詳言之，220可把已輸出自相機300之第一格式的第一資料轉換成與該第一格式不同之第二格式的第二資料。舉例而言，第一格式可以是拜耳(Bayer)格式，而第二格式可以是YUV格式、YCbCr格式、或RGB格式。相機可包括有互補式金屬氧化物半導體(CMOS)影像感測器晶片。
雖然ISP 220在圖1所示的實施例中係於控制器200內形成，在其他實施例，ISP 220仍可在介於控制器200與相機300之間的獨立晶片中形成。ISP 220可置放在相機300內，而在進一步實施例中，CMOS影像感測器晶片及ISP 220可封裝成單一封裝。
編碼器及/或編碼器電路230可產生用於目前空間域區塊像素值之預測空間域區塊值、可基於此等目前空間域區塊像素值與此等預測空間域區塊值之間的差異產生 殘餘空間域區塊值、可計算此等殘餘空間域區塊值之代表值、可從複數個量化參數中選擇出對應於該代表值之量化參數、以及可使用選擇之量化參數把此等殘餘空間域區塊值編碼或量化。編碼器230可支援高效率視訊編碼(HEVC)標準，但本發明概念不受限於這項實例。編碼器230之結構及操作將會參照圖2至圖13於下文詳細說明。
編碼器230可編碼輸出自ISP 220之影像資料(例如位元流)。經編碼之影像資料(例如經編碼之位元流)可基於至少一個記憶體控制器260及/或261所進行之運算而儲存於至少一個記憶體400及/或401中。
此至少一個記憶體控制器260及/或261可從此至少一個記憶體400及/或401讀取經編碼之影像資料(例如經編碼之位元流)。輸出自此至少一個記憶體控制器260及/或261之經編碼之影像資料(例如經編碼之位元流)可藉由解碼器(圖未示)來解碼。經編碼之影像資料可透過顯示控制器270傳送至顯示器500。
編解碼器可包括有編碼器230及解碼器，但這裡將會說明的是該編解碼器中所包括之編碼器230的運算。編碼器230可作用為壓縮器，而解碼器可作用為解壓縮器。
此至少一個記憶體控制器260及/或261可根據CPU 210之控制來對此至少一個記憶體400及/或401之資料存取運算進行控制。資料存取運算可包括有用於把資料寫入記憶體400或401之寫入運算、及/或用於從記憶體400或401讀取資料之讀取運算。
此至少一個記憶體400及/或401可包括有依電性記憶體及/或非依電性記憶體。依電性記憶體可以是隨機存取記憶體(RAM)、動態RAM(DRAM)、靜態RAM(SRAM)、及/或緩衝記憶體。非依電性記憶體可以是快閃記憶體、磁性RAM(MRAM)、自旋轉移磁矩MRAM、鐵電RAM(FeRAM)、相變RAM(PRAM)、及/或磁阻RAM(RRAM)。快閃記憶體可以是儲存至少一個位元之NAND型或NOR型快閃記憶體。
記憶體400可由DRAM構成，而記憶體401可由基於快閃技術之記憶體構成。此時，記憶體控制器260可以是DRAM控制器，而記憶體控制器261可以是基於快閃技術之記憶體控制器。基於快閃技術之記憶體可實施成固態驅動機或固態硬碟(SSD)、多媒體卡(MMC)、嵌入式MMC(eMMC)、或通用快閃儲存器(UFS)。
顯示控制器270可根據CPU 210所執行的運算，把資料從CPU 210或編碼器230傳送至顯示器500。
相機300可包括有CMOS影像感測器晶片。CMOS影像感測器晶片可把對應於物件光學影像的影像資料輸出至ISP 220。相機300可透過行動產業處理器介面(MIPI®)相機串列介面(CSI)，把影像資料輸出至ISP 220。
顯示器500可顯示從顯示控制器270接收到的資料。觸控螢幕501可當作影像及/或資料處理系統100之使用者介面，並且可用於選擇或啟動顯示器500上顯示的圖形使用者介面(GUI)。觸控螢幕501可產生用於對控制器200之操 作進行控制的使用者觸碰輸入，並且可把該使用者觸碰輸入發送至CPU 210進行處理。顯示器500上可根據CPU 210所執行應用程式的控制顯示GUI。
圖2係圖1中所示編碼器230的方塊圖。請參照圖2，編碼器230可包括有減法器231、模式決策塊233、轉換與量化塊235、逆轉換與逆量化塊237、加法器239、解塊濾波器241、樣本適應偏移(SAO)濾波器243、碼框緩衝區245、移動估計塊247、移動補償塊249、框內預測塊251、及熵編碼器253。圖1的記憶體400可耦合至轉換與量化塊235，並且可用於儲存包括有複數個量化參數及相關聯量化間距大小之量化表(TABLE)。
減法器231可計算針對目前要在複數個空間域區塊進行處理之目前空間域區塊輸入框(IFR)的值(下文稱為「目前空間域區塊像素值」)與輸出自模式決策塊233之預測空間域區塊PBL的值(下文稱為「預測空間域區塊值」)之間的差異，並且可產生對應於計算結果之殘餘空間域區塊RESIDUAL的值(下文稱為「殘餘空間域區塊值」)。輸入框可以是YUV格式的碼框、YCbCr格式的碼框、及/或RGB格式的碼框，但本發明概念不受限於這些實例。一區塊可包括有m*n個像素，其中「m」及「n」可以是至少為2的自然數，並且m=n或m≠n。
如上述，像素可以是YUV格式的資料、YCbCr格式的資料、或RGB格式的資料，但不受限於此。舉例而言，一區塊可包括有16*16個像素、32*32個像素、或64*64 個像素，但本發明概念不受限於這些實例。
減法器231可計算各計算塊的差異並輸出各區塊的此等差異。舉例而言，計算塊的大小可小於該區塊的大小。舉例而言，當計算塊包括有4*4個像素時，該區塊可包括有16*16個像素，但本發明概念不受限於這項實例。
模式決策塊233可接收目前空間域區塊IFR、第一預測區塊EBL1、及第二預測區塊EBL2。模式決策塊233可輸出第一預測區塊EBL1或第二預測區塊EBL2當作預測空間域區塊PBL。另外，模式決策塊233可決定殘餘空間域區塊RESIDUAL進行轉換相較於未進行此轉換是否有效率，並且可根據比較結果的決策來產生控制信號TCS。控制信號TCS可以是用於指示要進行或不要進行此轉換的指令信號。控制信號TCS可以是具有第一狀態或第二狀態之旗標，但本發明概念不受限於這項實例。
仍請參照圖2，在一些實施例中，圖2的編碼器電路可包括有記憶體電路及處理器電路。處理器電路可以是圖1的CPU 210及/或ISP 220，或可以是不同專用處理器。與編碼器電路相關聯之處理器電路可進行例如下列的運算：基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異判定殘餘空間域區塊值、基於一轉換判定與該等殘餘空間域區塊值相關聯之一代表值、基於該代表值判定一量化間距大小、基於該量化間距大小選擇一量化參數、及/或基於該量化參數把該等殘餘空間域區塊值量化。該轉換可包括有基於此等目前空間域區塊像素值比較一絕對差 的總和(SAD)值與一絕對轉換差的總和(SATD)值。若該SAD值大於該SATD值，則進行該等殘餘空間域區塊值之時域對頻域轉換。該轉換可包括有：若該SAD值小於或等於該SATD值，則略過該等殘餘空間域區塊值之時域對頻域轉換。
在一些實施例中，該轉換可包括有判定一組包括有該等殘餘空間域區塊值中超出一臨界值者之殘餘空間域區塊值、以及選擇該代表值當作該組殘餘空間域區塊值之一最大公因數。在一些實施例中，該轉換可包括有判定該等殘餘空間域區塊值之一標準差值、以及選擇該代表值當作該標準差值。在一些實施例中，該轉換可包括有判定該等殘餘空間域區塊值之一絕對差的平均(MAD)值、以及選擇該代表值當作該MAD值。在一些實施例中，基於該量化間距大小選擇該量化參數可包括有從複數個量化參數選擇出值最接近該所判定量化間距大小之一量化參數。該量化參數可選自於儲存在該記憶體電路中之複數個量化參數。下文將對照圖4至圖12進一步詳述各種轉換。
圖3係圖2中所示模式決策塊233的方塊圖。請參照圖2及圖3，模式決策塊233可包括有轉換控制信號產生器233-1及預測區塊判定電路233-2。
轉換控制信號產生器233-1可使用目前空間域區塊IFR之目前空間域區塊像素值產生第一值，並且可使用推導自目前空間域區塊像素值之頻域值產生第二值。轉換控制信號產生器233-1可比較第一值與第二值，而且可在第一 值小於第二值時產生具有第一狀態之控制信號TCS，以及在第一值等於或大於第二值時產生具有第二狀態之控制信號TCS。
第一值可以是目前空間域區塊像素值的絕對差的總和(SAD)。第二值可以是推導自(或對應於)目前空間域區塊像素值之頻域值的絕對轉換差的總和(SATD)。SAD及SATD將會在下文參照圖12詳細說明。
轉換與量化塊235可回應於具有第一狀態之控制信號TCS略過一區塊之轉換。逆轉換與逆量化塊237亦可回應於具有第一狀態之控制信號TCS略過一區塊之轉換。在這裡，轉換意指為轉換運算。然而，轉換與量化塊235可回應於具有第二狀態之控制信號TCS在一區塊上進行轉換。逆轉換與逆量化塊237亦可回應於具有第二狀態之控制信號TCS在一區塊上進行轉換。
第一狀態可以是一種介於低位準與高位準之間的狀態，而第二狀態可以是介於該兩種位準之間的另一種狀態。低位準可意指為資料「0」或邏輯「0」，而高位準可意指為資料「1」或邏輯「1」。
預測區塊判定電路233-2可輸出第一預測區塊EBL1或第二預測區塊EBL2當作預測空間域區塊PBL。詳言之，當藉由編碼第一預測區塊EBL1所取得之編碼結果與想要的結果值之間的第一差異小於藉由編碼第二預測區塊EBL2所取得之編碼結果值與想要的結果值之間的第二差異時，預測區塊判定電路233-2可輸出第一預測區塊EBL1 當作預測空間域區塊PBL。然而，當第一差異等於或大於第二差異時，預測區塊判定電路233-2可輸出第二預測區塊EBL2當作預測空間域區塊PBL。轉換與量化塊235可根據控制信號TCS的狀態略過或進行一區塊之轉換。
如上述，當控制信號TCS具有第一狀態時，轉換與量化塊235可計算殘餘空間域區塊值之代表值，但不用在殘餘空間域區塊RESIDUAL上進行時域對頻域轉換。
轉換與量化塊235可從複數個量化參數選擇出一與計算之代表值對應的量化參數，並且可使用該選擇出之量化參數把殘餘空間域區塊值量化，藉此產生一量化區塊QV。代表值之計算將會參照圖5至圖11詳細說明。略過模式可在控制信號TCS具有第一狀態時予以界定。
圖2之轉換與量化塊235可包括有圖4所示儲存複數個量化參數及相關聯量化間距大小的表格TABLE。雖然表格TABLE在圖2所示的實施例中係包括於轉換與量化塊235中，表格TABLE仍可在系統中可藉由轉換與量化塊235存取之任何位置予以實施。舉一例來說，表格TABLE可包括於圖1及圖2的記憶體400中。
藉由轉換與量化塊235所進行之轉換可意指為把一空間坐標從一時域轉換成到一頻域。此轉換可以是離散餘弦轉換(DCT)但不限於此。
當控制信號TCS具有第二狀態時，轉換與量化塊235可在殘餘空間域區塊RESIDUAL上進行時域對頻域轉換，並且可使用率失真最佳化(RDO)或一給定量化參數把經 過轉換之殘餘區塊量化，藉此產生量化區塊QV。此時，殘餘空間域區塊值之代表值不在轉換與量化塊235中進行計算。
逆轉換與逆量化塊237可根據控制信號TCS之狀態，略過或進行一區塊之轉換。當控制信號TCS具有第一狀態時，逆轉換與逆量化塊237可使用逆量化參數把量化區塊QV逆量化以產生逆量化區塊，但不需對量化區塊QV進行逆轉換(例如：頻域對時域轉換)。逆轉換可以是逆DCT(IDCT)，但不受限於此。
在一些實施例中，逆量化參數可基於及/或等效於藉由轉換與量化塊235所選擇的量化參數QP。轉換與量化塊235可把量化參數QP傳送至逆轉換與逆量化塊237。在一些實施例中，逆轉換與逆量化塊237可從轉換與量化塊235讀取量化參數QP。
加法器239可把輸出自逆轉換與逆量化塊237之逆量化區塊(但尚未進行逆轉換)與輸出自模式決策塊233之預測空間域區塊PBL相加以產生重構塊RBL。可把重構塊RBL傳送至解塊濾波器241及框內預測塊251。
當控制信號TCS具有第二狀態時，逆轉換與逆量化塊237可使用RDO或給定之逆量化參數，對量化區塊QV進行逆轉換(例如：頻域對時域轉換)並且把逆轉換之區塊逆量化以產生逆量化區塊。
加法器239可把輸出自逆轉換與逆量化塊237之逆量化區塊(亦即逆轉換及逆量化之區塊)與輸出自模式 決策塊233之預測空間域區塊PBL相加以產生重構塊RBL。可把重構塊RBL傳送至解塊濾波器241及框內預測塊251。
解塊濾波器241可對接收自加法器239的重構塊RBL進行解塊操作。SAO濾波器243對輸出自解塊濾波器241之已解塊的區塊進行SAO濾波。
碼框緩衝區245可接收及/或儲存輸出自SAO濾波器243經過SAO濾波之區塊。碼框緩衝區245可把先前碼框儲存成參考碼框。
移動估計塊247可接收目前空間域區塊IFR，並且可基於碼框緩衝區245中儲存之先前碼框，以區塊接著區塊的方式處理目前碼框區塊。詳言之，移動估計塊247可把碼框緩衝區245中儲存之先前碼框中包括之先前區塊中最匹配目前空間域區塊IFR之區塊的位置資訊PI傳送至移動補償塊249。
移動補償塊249可接收位置資訊PI，可從碼框緩衝區245讀取對應於位置資訊PI之區塊，並且可把該區塊傳送至模式決策塊233當作第二預測區塊EBL2。第二預測區塊EBL2可基於先前碼框來預測。
框內預測塊251可接收目前空間域區塊IFR與重構塊RBL，並且可把已使用重構塊FBL預測之區塊傳送至模式決策塊233當作第一預測區塊EBL1。因此，第一預測區塊EBL1可使用已在碼框中編碼之區塊來預測。熵編碼器253可編碼從轉換與量化塊235接收到的量化區塊QV，並且輸出經編碼之位元流BS。
圖4係根據本發明概念之一些實施例包括有對應於代表值之量化參數之表格的一覽圖。請參照圖1至4，可在表格中儲存對應於代表值的量化參數QP。此表格可儲存在至少一個記憶體400及/或401中。
當控制器200啟動時，可把儲存於至少一個記憶體400及/或401中的表格儲存於儲存媒體(例如依電性記憶體或緩衝記憶體)中，該儲存媒體可藉由編碼器230來存取。儲存媒體可包括於轉換與量化塊235中。在一些實施例中，表格可儲存在可藉由編碼器230存取之儲存媒體中，而此儲存媒體可以是非依電性記憶體。儲存此表格的儲存媒體可置於控制器200的任何地方。請參照圖4中所示的表格，各量化參數QP可對應於量化間距大小QSS。
在這裡，代表值可以是殘餘空間域區塊值的一群組代表值、殘餘空間域區塊值的標準差、或殘餘空間域區塊值的絕對差的平均(MAD)，但本發明概念不受限於這些實例。MAD可以是把SAD除以一區塊中包括之像素數所取得之值。
圖5係根據一些實施例，用於說明圖2中所示減法器231運算的例示性概念圖。請參照圖1至5，減法器231可把目前空間域區塊IFR(=B10)中包括之目前空間域區塊像素值減去預測空間域區塊PBL(=B20)中包括之預測空間域區塊值，藉此產生殘餘空間域區塊RESIDUAL(=B30)中包括之殘餘空間域區塊值。各區塊B10、B20及B30中包括的數字只是為了清楚說明所提供的實例。假設區塊B10、B20 及B30包括有代表影像的4*4個像素。
圖6係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之一些實施例及量化係數計算之代表值。請參照圖5及6，轉換與量化塊235可在第一方法METHOD1中，使用殘餘空間域區塊RESIDUAL(=B30)中包括之殘餘空間域區塊值的群組代表值，從圖4所示表格中儲存之複數個量化參數選擇出一量化參數。
請參照圖5，殘餘空間域區塊RESIDUAL(=B30)中包括之殘餘空間域區塊值為「0」及「90」。此時，轉換與量化塊235可排除值「0」並估計值「90」為代表值，並且可從圖4所示表格中的量化參數選擇出對應於此代表值(亦90)的量化參數QP(=43)。
在一些實施例中，若假設量化間距大小QSS與代表值(即90)一樣，則區塊41-1中包括之量化係數可以是「0」及「1」，如圖6所示。換句話說，在此非限制實例中，殘餘值可以是90及/或代表值可以是90。逆轉換與逆量化塊237可使用與量化參數QP(=43)一樣的逆量化參數把量化區塊QV逆量化。圖6所示的區塊43-1是輸出自加法器239的重構塊RBL。
圖7係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之其他實施例及量化係數計算之代表值。請參照圖5及7，轉換與量化塊235可計算殘餘空間域區塊RESIDUAL(=B30)中包括之殘餘空間域區塊值的MAD，並且可在第二方法METHOD2中，使用此MAD從圖4所示表格 中儲存的量化參數選擇出一量化參數。
殘餘空間域區塊RESIDUAL(=B30)中包括的殘餘空間域區塊值為「0」及「90」。此時，轉換與量化塊235可計算殘餘空間域區塊值的MAD當作一代表值，並且可從圖4所示表格中的量化參數選擇出對應於MAD(即22.5)的量化參數QP(=31)。
根據一些實施例，若假設量化間距大小QSS與MAD(即22.5)一樣，則區塊41-2中包括的量化係數可以是「0」及「4(=90/22.5)」，即圖4中選擇之QP=31的殘餘值等於90且QSS=22.5，如圖7所示。逆轉換與逆量化塊237可使用與量化參數QP(=31)一樣的逆量化參數把量化區塊QV逆量化。圖7所示的區塊43-2是輸出自加法器239的重構塊RBL。
圖8係展示量化參數之一覽圖，該量化參數對應於根據本發明概念之進一步實施例及量化係數計算之代表值。請參照圖5及8，轉換與量化塊235可計算殘餘空間域區塊RESIDUAL(=B30)中包括之殘餘空間域區塊值的標準差，並且可在第三方法METHOD3中，使用此標準差從圖4所示表格中儲存的量化參數選擇出一量化參數。
殘餘空間域區塊RESIDUAL(=B30)中包括的殘餘空間域區塊值為「0」及「90」。此時，轉換與量化塊235可計算殘餘空間域區塊值的標準差當作一代表值，並且可從圖4所示表格中的量化參數選擇出對應於此標準差(即10)的量化參數QP(=24)。
若假設量化間距大小QSS與標準差(即10)一樣，則區塊41-3中包括的量化係數可以是「0」及「9(=90/10)」，即圖4中選擇之QP=24的殘餘值等於90且QSS=10，如圖8所示。逆轉換與逆量化塊237可使用與量化參數QP(=24)一樣的逆量化參數把量化區塊QV逆量化。圖8所示的區塊43-3是輸出自加法器239的重構塊RBL。
圖9係根據本發明概念之一些實施例使用分組判定代表值之方法的概念圖。請參照圖1、2及9，減法器231可把目前空間域區塊IFR(=10A)中包括之目前空間域區塊像素值減去預測空間域區塊PBL(=20A)中包括之預測空間域區塊值，藉此產生殘餘空間域區塊RESIDUAL(=30A)中包括之殘餘空間域區塊值。各區塊10A、20A及30A中包括的數字只是為了清楚說明所提供的實例。假設區塊10A、20A及30A包括有4*4個像素。轉換與量化塊235可在第一方法METHOD1中，使用殘餘空間域區塊RESIDUAL(=30A)中包括之殘餘空間域區塊值的群組代表值，從圖4所示表格中儲存之量化參數選擇出一量化參數。
請參照圖9，殘餘空間域區塊RESIDUAL(=30A)中包括之殘餘空間域區塊值為「0」、「10」及「90」。此時，轉換與量化塊235可把「0」分組到第一群組，「10」分組到第二群組，而「90」則分組到第三群組。轉換與量化塊235可計算分組到第二群組之「10」與分組到第三群組之「90」的最大公因數(即10)，但第一群組的「0」排除在外，此轉換與量化塊還判定該最大公因數(即10)當作代表值。 在一些實施例中，轉換與量化塊235可排除具有「0」值的群組。轉換與量化塊235可從圖4所示表格中儲存之量化參數選擇出一對應於代表值(即10)的量化參數QP(=24)。
圖10係根據本發明概念之其他實施例使用分組判定代表值之方法的概念圖。請參照圖1、2及10，減法器231可把目前空間域區塊IFR(=10B)中包括之目前空間域區塊像素值減去預測空間域區塊PBL(=20B)中包括之預測空間域區塊值，藉此產生殘餘空間域區塊RESIDUAL(=30B)中包括之殘餘空間域區塊值。各區塊10B、20B及30B中包括的數字只是為了清楚說明所提供的實例。假設區塊10B、20B及30B包括有4*4個像素。轉換與量化塊235可在第一方法METHOD1中，使用殘餘空間域區塊RESIDUAL(=30B)中包括之殘餘空間域區塊值的群組代表值，從圖4所示表格中儲存之量化參數選擇出一量化參數。
請參照圖10，殘餘空間域區塊RESIDUAL(=30B)中包括之殘餘空間域區塊值為「0」、「9」、「10」、「11」及「90」。在一些實施例中，一群組可由超出一臨界值及/或介於不同臨界值之間的值所構成。「超出一臨界值」於本文中使用時，可包括有所有大於一給定值的值或所有小於一給定值的值。舉例而言，轉換與量化塊235可把「0」分組到第一群組；可把「9」、「10」及「11」分組到第二群組；並且可把「90」分組到第三群組。在此非限制實例中，可套用臨界值5及20當作第二群組的下限。在這種狀況中，「9」、「10」及「11」係介於上與下臨界值5與20之 間，藉此把兩者包括在第二群組中。轉換與量化塊235可判定「10」當作第二群組的代表值「9」、「10」及「11」。
轉換與量化塊235可計算最大公因數「10」，即第二群組的代表值與分組到第三群組之「90」的最大公因數(即10)，但第一群組的「0」排除在外，此轉換與量化塊還判定該最大公因數(即10)當作代表值。在一些實施例中，轉換與量化塊235可排除包括有「0」值的群組。轉換與量化塊235可從圖4所示表格中儲存之量化參數選擇出一對應於代表值(即10)的量化參數QP(=24)。
轉換與量化塊235可把諸如「9」、「10」及「11」等類似值分組到一個群組，並且可判定「9」、「10」及「11」之諸如平均的代表當作此群組之代表值。在另一實例中，轉換與量化塊235可把諸如「10」、「12」及「14」等類似值分組到一個群組，並且可判定「10」、「12」及「14」之諸如平均的代表當作此群組之代表值。
圖11係根據本發明概念之進一步實施例使用分組判定代表值之方法的概念圖。請參照圖1、2及11，減法器231可把目前空間域區塊IFR(=10C)中包括之目前空間域區塊像素值減去預測空間域區塊PBL(=20C)中包括之預測空間域區塊值，藉此產生殘餘空間域區塊RESIDUAL(=30C)中包括之殘餘空間域區塊值。各區塊10C、20C及30C中包括的數字只是為了清楚說明所提供的實例。假設區塊10C、20C及30C包括有一影像的4*4個像素。
轉換與量化塊235可在第一方法METHOD1中， 使用殘餘空間域區塊RESIDUAL(=30C)中包括之殘餘空間域區塊值的群組代表值，從圖4所示表格中儲存之量化參數選擇出一量化參數。請參照圖11，殘餘空間域區塊RESIDUAL(=30C)中包括之殘餘空間域區塊值為「0」、「1」、「2」、「3」、「10」及「90」。此時，轉換與量化塊235可把「0」、「1」、「2」及「3」分組到第一群組；可把「10」分組到第二群組；並且可把「90」分組到第三群組。
轉換與量化塊235可計算分組到第二群組之「10」與分組到第三群組之「90」的最大公因數(即10)，但排除包括有「0」、「1」、「2」及「3」的第一群組，此轉換與量化塊還判定該最大公因數(即10)當作代表值。換句話說，轉換與量化塊235可排除包括有小於一參考值之值的第一群組。雖然圖11所示實施例中的參考值為「4」，但參考值可隨著實施例而變。在一些實施例中，轉換與量化塊235可排除包括有「0」的群組。轉換與量化塊235可從圖4所示表格中儲存之量化參數選擇出一對應於代表值(即10)的量化參數QP(=24)。
圖12係根據本發明概念之一些實施例控制轉換略過模式之方法的流程圖。請參照圖2及12，在操作S110中，轉換控制信號產生器233-1比較目前空間域區塊像素值的SAD與推導自目前空間域區塊像素值之頻域值的SATD。
操作S110中若SAD等於或小於SATD(即「是」的情況)，轉換控制信號產生器233-1可產生具有第一狀態的 控制信號TCS。轉換與量化塊235可回應於具有第一狀態之控制信號TCS略過時域對頻域轉換。逆轉換與逆量化塊237可回應於具有第一狀態之控制信號TCS略過頻域對時域轉換。換句話說，在操作S120中，轉換與量化塊235及逆轉換與逆量化塊237可在轉換略過模式下操作。
然而，操作S110中若SAD大於SATD(即「否」的情況)，轉換控制信號產生器233-1可產生具有第二狀態的控制信號TCS。轉換與量化塊235可回應於具有第二狀態之控制信號TCS進行時域對頻域轉換。逆轉換與逆量化塊237可回應於具有第二狀態之控制信號TCS進行頻域對時域轉換。換句話說，在操作S130中，轉換與量化塊235及逆轉換與逆量化塊237可在正常操作模式下操作。4*4個像素的SAD在對應於時域的空間域中為4，而4*4個像素的SATD在對應於空間域的頻域中為16。
圖13係根據本發明概念之一些實施例操作編碼器230之方法的流程圖。請參照圖1至13，減法器231可在轉換略過模式下產生包括於殘餘空間域區塊RESIDUAL中的殘餘空間域區塊值。
在操作S210中，轉換與量化塊235可在空間域中計算包括於殘餘空間域區塊RESIDUAL中之殘餘空間域區塊值的代表值。代表值的計算方法已在上文參照圖5至11說明。在操作S220中，轉換與量化塊235可使用計算之代表值，從圖4所示表格中包括的量化參數選擇出一最佳量化參數。
在操作S230中，轉換與量化塊235可使用此最佳量化參數把殘餘空間域區塊RESIDUAL量化以輸出量化區塊QV。在操作S240中，逆轉換與逆量化參數237可使用藉由轉換與量化塊235選擇的最佳量化參數把量化區塊QV逆量化。在操作S250中，加法器239可把輸出自逆轉換與逆量化塊237之逆量化區塊與預測空間域區塊PBL相加以產生重構塊RBL。
如上述，根據本發明概念之一些實施例，一編碼器可不在轉換略過模式下進行RDO，藉此降低判定編碼量化參數所需的運算量。另外，此編碼器可從一表格中儲存的量化參數選擇出一與殘餘空間域區塊值之代表值對應的最佳編塊量化參數。
所屬技術領域中具有通常知識者在檢閱圖式及詳細說明時，根據本發明概念之具體實現的其他裝置、方法、及/或系統將會是顯而易見或變為顯而易見。所有此類包括於本說明內附加裝置及/或系統意欲在本發明概念的範疇內，並且受到隨附申請專利範圍保護。此外，本文中揭示的所有實施例意欲可採用任何方式及/或組合予以分開實施或組合。本文中所述的實施成可實施成軟體、硬體、及/或以上的組合。再者，在一些實施例中，本文中所示的。流程圖程序塊對應於進行此等流程圖程序塊中所示操作的各別模組(其可具有對應的電路系統)。舉例而言，本文中所述圖1之影像處理及/或資料處理系統100可任選地具有組 配來進行圖12及13所示操作的模組。
在圖式及說明書中，已揭示有典型的實施例，而且，雖然有運用特定用語，這些用語只用在一般及敘述性概念，目的不在於限制。本發明概念已參照其例示性實施例具體展示並且說明，所屬技術領域中具有通常知識者將會瞭解的是，可於其中進行各種形式及細節方面的改變，但不會脫離如以下請求項所界定本發明概念之精神與範疇。
S210~S250‧‧‧操作

Claims (25)

  1. 一種操作編碼器電路之方法，該方法包含有：產生用於目前空間域區塊像素值之預測空間域區塊值；基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異來產生殘餘空間域區塊值；計算該等殘餘空間域區塊值之一代表值；基於該代表值，從複數個量化參數之中選擇出一量化參數；以及使用該量化參數把該等殘餘空間域區塊值量化。
  2. 如請求項1之方法，其中該計算該代表值包含有：把該等殘餘空間域區塊值分組成複數個群組；計算已分組值之一最大公因數；以及把該最大公因數判定為該代表值。
  3. 如請求項2之方法，其中該把該等殘餘空間域區塊值分組包含有把小於一參考值之值從該等殘餘空間域區塊值排除。
  4. 如請求項1之方法，其中該計算該代表值包含有：計算該等殘餘空間域區塊值之一標準差；以及把該標準差判定為該代表值。
  5. 如請求項1之方法，其中該計算該代表值包含有：計算該等殘餘空間域區塊值之一絕對差的平均(MAD)；以及 把該MAD判定為該代表值。
  6. 如請求項1之方法，其中該等複數個量化參數係儲存於一表格中。
  7. 如請求項1之方法，其中該計算該代表值包含有：計算該等目前空間域區塊像素值之一絕對差的總和(SAD)及推導自該等目前空間域區塊像素值之頻域值的一絕對轉換差的總和(SATD)；比較該SAD與該SATD；當該SAD係等於或小於該SATD時，產生一控制信號；以及回應於該控制信號而計算該等殘餘空間域區塊值之該代表值。
  8. 如請求項7之方法，其更包含有回應於該控制信號而使用該選擇之量化參數來把經量化的區塊值逆量化。
  9. 一種系統晶片，其包含有：一組配來把以一第一格式之第一資料轉換成以一第二格式之第二資料的影像信號處理器電路；以及一組配來把以該第二格式之該第二資料編碼的編碼器電路，其中該編碼器電路包含有：一模式決策塊，其被組配來產生包含有一第一狀態或一第二狀態之一控制信號，並且被組配來產生用於對應於該第二資料之目前空間域區塊像素值的預測空間域區塊值； 一減法器，其被組配來基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異來產生殘餘空間域區塊值；以及一轉換與量化塊，其被組配來回應於具有該第一狀態之該控制信號而計算該等殘餘空間域區塊值之一代表值、用以從複數個量化參數之中選擇出對應於該代表值之一量化參數、並且用以使用該選擇之量化參數把該等殘餘空間域區塊值量化。
  10. 如請求項9之系統晶片，其中該轉換與量化塊略過把該等殘餘空間域區塊值轉換成頻域值之一轉換運算，並且回應於具有該第一狀態之該控制信號而計算該等殘餘空間域區塊值之該代表值；以及其中該轉換與量化塊回應於具有該第二狀態之該控制信號而進行該轉換運算，並且使用率失真最佳化或一給定之量化參數來把從該轉換運算產生的經轉換殘餘區塊量化。
  11. 如請求項10之系統晶片，其中該模式決策塊包含有一轉換控制信號產生器，其被組配來使用該等目前空間域區塊像素值而產生一第一值、使用推導自該等目前空間域區塊像素值之頻域值而產生一第二值、比較該第一值與該第二值、回應於該第一值係等於或小於該第二值而產生具有該第一狀態之該控制信號、以及回應於該第一值係大於該第二值而產生具有該第二狀態之該控制信號。
  12. 如請求項11之系統晶片，其中該第一值係該等目前空間域區塊像素值之一絕對差的總和(SAD)，而該第二值係推導自該等目前空間域區塊像素值之該等頻域值的一絕對轉換差的總和(SATD)。
  13. 如請求項9之系統晶片，其中該轉換與量化塊把小於一參考值之值排除後的該等殘餘空間域區塊值分組成複數個群組、計算已分組值之一最大公因數、以及把該最大公因數判定為該代表值。
  14. 如請求項9之系統晶片，其中該轉換與量化塊計算該等殘餘空間域區塊值之一標準差，並且選擇該標準差當作該代表值。
  15. 如請求項9之系統晶片，其中該轉換與量化塊計算該等殘餘空間域區塊值之一絕對差的平均(MAD)，並且把該MAD判定為該代表值。
  16. 如請求項9之系統晶片，其更包含有一組配來儲存一表格之記憶體，該表格包括有該等複數個量化參數，其中該轉換與量化塊從被包括於該表格中之該等複數個量化參數之中選擇出對應於該代表值之該量化參數。
  17. 一種行動運算裝置，其包含有：一相機；一影像信號處理器電路，其被組配來把輸出自該相機的以一第一格式之第一資料轉換成以一第二格式之第二資料；以及一組配來把以該第二格式之該第二資料編碼的編 碼器電路，其中該編碼器電路包含有：一模式決策塊，其被組配來產生包含有一第一狀態或一第二狀態之一控制信號，並且被組配來產生用於對應於該第二資料之目前空間域區塊像素值的預測空間域區塊值；一減法器，其被組配來基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的差異來產生殘餘空間域區塊值；以及一轉換與量化塊，其被組配來回應於具有該第一狀態之該控制信號而計算該等殘餘空間域區塊值之一代表值、用以從複數個量化參數之中選擇出對應於該代表值之一量化參數、並且用以使用該選擇之量化參數把該等殘餘空間域區塊值量化，其中該轉換與量化塊略過把該等殘餘空間域區塊值轉換成頻域值之一轉換運算，並且回應於具有該第一狀態之該控制信號而計算該等殘餘空間域區塊值之該代表值；以及其中該轉換與量化塊回應於具有該第二狀態之該控制信號而進行該轉換運算，並且使用率失真最佳化或一給定之量化參數來把從該轉換運算產生的經轉換殘餘區塊量化。
  18. 如請求項17之行動運算裝置，其中該轉換與量化塊把小於一參考值之值排除後的該等殘餘空間域區塊值分組 成複數個群組、計算已分組值之一最大公因數、以及把該最大公因數判定為該代表值。
  19. 如請求項17之行動運算裝置，其中該轉換與量化塊計算該等殘餘空間域區塊值之一標準差，並且把該標準差判定為該代表值。
  20. 如請求項17之行動運算裝置，其中該轉換與量化塊計算該等殘餘空間域區塊值之一絕對差的平均(MAD)，並且把該MAD判定為該代表值。
  21. 一種被組配來處理目前空間域區塊像素值之編碼器電路，該編碼器電路包含有：一記憶體電路；以及一處理器電路，其被組配來執行來自該記憶體電路之電腦程式指令以進行運算，該等運算包含有：基於該等目前空間域區塊像素值與該等預測空間域區塊值之間的各別差異來判定殘餘空間域區塊值；基於一轉換來判定與該等殘餘空間域區塊值相關聯之一代表值；基於該代表值來判定一量化間距大小；基於該量化間距大小來選擇一量化參數；以及基於該量化參數來把該等殘餘空間域區塊值量化。
  22. 如請求項21之編碼器電路，其中該轉換包含有：基於該等目前空間域區塊像素值來判定一絕對差 的總和(SAD)值；基於推導自該等目前空間域區塊像素值之頻域值來判定一絕對轉換差的總和(SATD)值；以及回應於該SAD值係大於該SATD值而進行該等殘餘空間域區塊值之時域對頻域的轉換。
  23. 如請求項22之編碼器電路，該轉換更包含有：回應於該SAD值係小於或等於該SATD值而略過該等殘餘空間域區塊值之時域對頻域的轉換。
  24. 如請求項21之編碼器電路，其中該轉換包含有：判定一組包含有該等殘餘空間域區塊值中超出一臨界值者之殘餘空間域區塊值；以及選擇該代表值當作該組殘餘空間域區塊值之一最大公因數。
  25. 如請求項21之編碼器電路，其中該轉換包含有：判定該等殘餘空間域區塊值之一標準差值；以及選擇該代表值當作該標準差值。
TW104144462A 2015-01-05 2015-12-30 包括用於影像處理的編碼器之方法、系統及裝置 TWI688260B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0000521 2015-01-05
KR1020150000521A KR102365685B1 (ko) 2015-01-05 2015-01-05 인코더의 작동 방법과 상기 인코더를 포함하는 장치들

Publications (2)

Publication Number Publication Date
TW201637444A true TW201637444A (zh) 2016-10-16
TWI688260B TWI688260B (zh) 2020-03-11

Family

ID=56133214

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104144462A TWI688260B (zh) 2015-01-05 2015-12-30 包括用於影像處理的編碼器之方法、系統及裝置

Country Status (5)

Country Link
US (1) US10271050B2 (zh)
KR (1) KR102365685B1 (zh)
CN (1) CN105763879B (zh)
DE (1) DE102016200001B4 (zh)
TW (1) TWI688260B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3062011B1 (fr) * 2017-01-17 2020-01-10 Stmicroelectronics (Grenoble 2) Sas Procede et dispositif d'encodage dynamique controle d'un signal numerique multidimensionnel, en particulier un signal d'image et procede et dispositif correspondant de decodage
CN108322742B (zh) * 2018-02-11 2019-08-16 北京大学深圳研究生院 一种基于帧内预测的点云属性压缩方法
CN108335335B (zh) * 2018-02-11 2019-06-21 北京大学深圳研究生院 一种基于增强图变换的点云属性压缩方法
KR102666666B1 (ko) 2018-06-01 2024-05-20 삼성전자주식회사 이미지 부호화 장치 및 이미지 복호화 장치
CN114208181A (zh) * 2019-06-28 2022-03-18 Lg 电子株式会社 用于色度量化参数数据的图像解码方法及其装置
KR102644970B1 (ko) 2019-06-28 2024-03-08 엘지전자 주식회사 영상 디코딩 방법 및 그 장치
WO2020262909A1 (ko) 2019-06-28 2020-12-30 엘지전자 주식회사 크로마 양자화 파라미터 테이블을 사용하는 영상 디코딩 방법 및 그 장치

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1182888A3 (en) 1996-04-25 2004-11-03 Matsushita Electric Industrial Co., Ltd. Video coding with bit rate dependent quantisation
US6810083B2 (en) * 2001-11-16 2004-10-26 Koninklijke Philips Electronics N.V. Method and system for estimating objective quality of compressed video data
FR2893808A1 (fr) * 2005-11-22 2007-05-25 Thomson Licensing Sas Procede et dispositif de codage d'une image video
KR100781524B1 (ko) 2006-04-04 2007-12-03 삼성전자주식회사 확장 매크로블록 스킵 모드를 이용한 인코딩/디코딩 방법및 장치
US8331438B2 (en) * 2007-06-05 2012-12-11 Microsoft Corporation Adaptive selection of picture-level quantization parameters for predicted video pictures
KR101350723B1 (ko) 2008-06-16 2014-01-16 돌비 레버러토리즈 라이쎈싱 코오포레이션 비디오 코딩을 위한 슬라이스 종속성에 기초한 레이트 제어 모델 적응 방법
KR101377660B1 (ko) 2008-09-30 2014-03-26 에스케이텔레콤 주식회사 복수 개의 움직임 벡터 추정을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US8279924B2 (en) 2008-10-03 2012-10-02 Qualcomm Incorporated Quantization parameter selections for encoding of chroma and luma video blocks
EP2249571A1 (en) 2009-05-04 2010-11-10 Thomson Licensing SA Method and device for encoding an image frame comprising macroblocks
WO2011043793A1 (en) * 2009-10-05 2011-04-14 Thomson Licensing Methods and apparatus for embedded quantization parameter adjustment in video encoding and decoding
KR101457894B1 (ko) * 2009-10-28 2014-11-05 삼성전자주식회사 영상 부호화 방법 및 장치, 복호화 방법 및 장치
KR101813189B1 (ko) 2010-04-16 2018-01-31 에스케이 텔레콤주식회사 영상 부호화/복호화 장치 및 방법
KR101249346B1 (ko) 2011-01-31 2013-04-01 국방과학연구소 적응적 양자화 계수 탐색을 이용한 영상 부호화/복호화 방법 및 장치, 상기 방법을 기록한 컴퓨터로 판독 가능한 기록매체
CA2819401C (en) * 2011-02-10 2020-02-11 Sony Corporation Image processing device and image processing method
GB2492333B (en) 2011-06-27 2018-12-12 British Broadcasting Corp Video encoding and decoding using transforms
US8792550B2 (en) * 2011-08-04 2014-07-29 Qualcomm Incorporated Color/gray patch prevention for video coding
PL3402199T3 (pl) 2011-10-24 2020-08-24 Innotive Ltd Sposób dekodowania obrazu
KR101830352B1 (ko) 2011-11-09 2018-02-21 에스케이 텔레콤주식회사 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치
US9749633B2 (en) * 2012-01-19 2017-08-29 Vid Scale, Inc. System and method of video coding quantization and dynamic range control
JP5748225B2 (ja) 2012-01-26 2015-07-15 日本電信電話株式会社 動画像符号化方法，動画像符号化装置および動画像符号化プログラム
WO2013123632A1 (en) * 2012-02-20 2013-08-29 Thomson Licensing Component sorting based encoding for 3d mesh compression
US9131210B2 (en) * 2012-03-16 2015-09-08 Texas Instruments Incorporated Low-complexity two-dimensional (2D) separable transform design with transpose buffer management
US9426466B2 (en) 2012-06-22 2016-08-23 Qualcomm Incorporated Transform skip mode
GB2503875B (en) * 2012-06-29 2015-06-10 Canon Kk Method and device for encoding or decoding an image
US9591329B2 (en) * 2012-09-28 2017-03-07 Sony Corporation Image processing device and method for encoding and decoding image
US9560361B2 (en) * 2012-12-05 2017-01-31 Vixs Systems Inc. Adaptive single-field/dual-field video encoding
US20140169452A1 (en) * 2012-12-14 2014-06-19 Electronics And Telecommunications Research Institute Video encoding method and apparatus using the same
EP2941872B1 (en) * 2013-01-02 2018-09-26 Dolby Laboratories Licensing Corporation Backward-compatible coding for ultra high definition video signals with enhanced dynamic range
US9866840B2 (en) * 2013-01-10 2018-01-09 Thomson Licensing Method and apparatus for vertex error correction
KR20150000521A (ko) 2013-06-24 2015-01-05 한송본 인터넷 쇼핑몰을 이용한 상품 제공 및 기부금 적립방법
JP6100904B2 (ja) * 2013-07-22 2017-03-22 ルネサスエレクトロニクス株式会社 動画像符号化装置およびその動作方法
US9142016B2 (en) * 2013-09-27 2015-09-22 Varian Medical Systems, Inc. Methods for image processing
KR20150045819A (ko) * 2013-10-21 2015-04-29 삼성전자주식회사 움직임 보상을 수행하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
CN105264888B (zh) * 2014-03-04 2018-09-14 微软技术许可有限责任公司 用于对色彩空间、色彩采样率和/或比特深度自适应切换的编码策略
US9807410B2 (en) * 2014-07-02 2017-10-31 Apple Inc. Late-stage mode conversions in pipelined video encoders
EP3198869A1 (en) * 2014-09-23 2017-08-02 Intel Corporation Intra-prediction complexity reduction using a reduced number of angular modes and subsequent refinement
US9386265B2 (en) * 2014-09-30 2016-07-05 Intel Corporation Content adaptive telecine and interlace reverser

Also Published As

Publication number Publication date
CN105763879B (zh) 2020-06-02
TWI688260B (zh) 2020-03-11
CN105763879A (zh) 2016-07-13
KR102365685B1 (ko) 2022-02-21
US20160198156A1 (en) 2016-07-07
US10271050B2 (en) 2019-04-23
DE102016200001B4 (de) 2023-02-02
DE102016200001A1 (de) 2016-07-07
KR20160084072A (ko) 2016-07-13

Similar Documents

Publication Publication Date Title
TWI688260B (zh) 包括用於影像處理的編碼器之方法、系統及裝置
US9473778B2 (en) Skip thresholding in pipelined video encoders
US9106888B2 (en) Reducing quantization artifacts using neighbor-based weighted dithering
US9762919B2 (en) Chroma cache architecture in block processing pipelines
US9215472B2 (en) Parallel hardware and software block processing pipelines
US20150092833A1 (en) Parallel encoding of bypass binary symbols in cabac encoder
CN106604036B (zh) 数据编码设备和数据编码方法
KR102503900B1 (ko) 양자화 파라미터를 적응적으로 결정하는 인코더 및 이를 포함하는 애플리케이션 프로세서
CN109672890B (zh) 视频编码器件及编码器
KR102423880B1 (ko) 인코더의 작동방법과 상기 인코더를 포함하는 시스템 온 칩의 작동 방법
TW201914303A (zh) 視訊編碼裝置
US10313683B2 (en) Video encoder with context switching
US10609388B2 (en) Method and apparatus for encoding and decoding image
US10097830B2 (en) Encoding device with flicker reduction
TWI785073B (zh) 多重轉碼器編碼器及多重轉碼器編碼系統
US8655088B2 (en) Image encoder, image decoder and method for encoding original image data
US20200137402A1 (en) Embedded codec circuitry for sub-block based entropy coding of quantized-transformed residual levels
KR102636100B1 (ko) 데드존에 기초하여 양자화를 수행하는 인코더 및 이를 포함하는 비디오 처리 시스템