TW202333114A - 用於處理影像感測器之影像資料的方法及影像處理器單元 - Google Patents

用於處理影像感測器之影像資料的方法及影像處理器單元 Download PDF

Info

Publication number
TW202333114A
TW202333114A TW111143889A TW111143889A TW202333114A TW 202333114 A TW202333114 A TW 202333114A TW 111143889 A TW111143889 A TW 111143889A TW 111143889 A TW111143889 A TW 111143889A TW 202333114 A TW202333114 A TW 202333114A
Authority
TW
Taiwan
Prior art keywords
pixel
current pixel
image
gradient
pixels
Prior art date
Application number
TW111143889A
Other languages
English (en)
Inventor
弗里茲 勒柏斯基
馬汀 菲德勒
Original Assignee
德商夢想芯片技術股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 德商夢想芯片技術股份有限公司 filed Critical 德商夢想芯片技術股份有限公司
Publication of TW202333114A publication Critical patent/TW202333114A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

描述了一種用於處理影像資料之方法，其中影像包含像素矩陣。方法包含以下步驟： a) 判定當前像素值與在多個梯度方向上的各別相鄰像素的像素值之間的差值；以及 b )藉由用具有在步驟a)中為當前像素判定的最小梯度差值的梯度方向替換當前像素對當前像素進行編碼。 因此，梯度方向明確編碼至輸出影像資料串流中。

Description

用於處理影像感測器之影像資料的方法及影像處理器單元
本發明係關於一種用於處理影像資料的方法，其中影像包括像素矩陣。
本發明進一步係關於一種用於處理影像感測器的影像資料的影像處理器單元，該影像感測器包括像素矩陣的感測器區域，該像素矩陣提供包含像素資料矩陣的影像。
此外，本發明係關於一種經佈置以用於執行上文所述方法的電腦程式。
為了處理來自連接至控制器的影像感測器的影像資料，必須以高速處理有限的硬體資源來傳輸影像資料。例如，當汽車應用中的多個攝影機連接至中央控制器時，可經由頻寬有限的高速串行鏈路進行連接。期望在保證高影像品質的同時降低鏈路上的資料速率。
簡單量化(亦即，減小影像資料的位元深度)的實施很簡單，但是會導致影像品質明顯下降。
基於變換的編碼(例如，JPEG、MPEG)提供良好的影像品質，但是實施非常複雜並且難以保持位元速率穩定。
小波編碼(例如，JPEG2000或類似的)是要求訊框緩衝器的基於變換的編碼。這會導致延遲，而延遲在汽車應用等特定應用中可能至關重要。
塊編碼(例如，用於GPU紋理的bc7格式)提供了良好的影像品質以及固定的位元速率。這是一個相對簡單的解碼過程。然而，編碼非常困難以及複雜。
F. Lebowsky, M. Bona的受結構張量分析啟發的低成本、實時彩色影像壓縮中卓越的感知色彩穩定性(Extraordinary Perceptual Colour Stability in Low Cost, Realtime Color Image Compression Inspired by Structure Tensor Analysis)描述了一種應用於影像壓縮的非線性方法，其中在幾個互補的差分域中處理誤差量，從而實現高級視覺掩蔽策略。藉由跨整個影像自左上至右逐列的依序光柵掃描次序，為影像中的每個像素估計結構量以及幅度量。在中心像素的所有區域相鄰像素中，最小梯度幅度與其在垂直方向上的最大梯度幅度一起判定。最小梯度幅度由最小梯度幅度以及最大梯度幅度的和正規化。結構量在正規化梯度域中分為三個主要類別，即等高線(軌線)、區域(同質區域)以及極值(局部最小值或最大值)。對於每個類別而言，運行一個完整的誤差控制迴路，並且主要類別按照等高線、區域以及極值給定的優先次序排列。
US 8,958,635 B2揭示了一種用於處理數位影像的方法及裝置，其中每個像素具有至少一個比色分量。修改對應的比色分量的值以便獲得位於與對應的比色分量相關聯的比色範圍之內或之外的修改值。因此，藉由指派位於比色範圍內並且不同於位於比色空間之外的影像的修改值的限制的唯一參考值，使用者可查看色度空間的違反。
本發明的目的是提供一種用於處理影像資料的改進方法、改進的影像處理器單元以及用於處理影像感測器的影像資料的電腦程式。
目的藉由包含請求項1所述的特徵的方法、包含請求項8所述的特徵的影像處理器以及包含請求項10所述的特徵的電腦程式來實現。在從屬請求項書中描述了較佳實施例。
方法包含以下步驟： a) 判定當前像素值與在多個梯度方向上的各別相鄰像素的像素值之間的梯度差值，以及 b) 藉由用具有在步驟a)中為當前像素判定的最小梯度差值的梯度方向替換當前像素對當前像素進行編碼。
因此，影像處理器單元經佈置以用於執行這些步驟a)及b)，例如藉由硬體實現至影像資料處理器中，例如FPGA，或藉由包含指令的合適的電腦程式，以藉由使用資料處理器對像素資料或像素資料串流執行上述步驟。
根據本發明，梯度方向明確編碼至輸出資料串流中。
方法提供了良好的影像品質並且可容易地實現視覺上無損的影像處理。方法要求最少量的計算資源。無需訊框緩衝器。其要求最少量的行緩衝器以及最少量的處理能力。結果是可預測的，並且在理想情況下能夠提供固定的資料速率。可根據需要選擇壓縮比。
可在梯度方向中包括增量標誌，該增量標誌在步驟b)中用於對當前像素進行編碼，以便指示像素資料反映當前像素的預測符。因此，增量標誌的使用允許提供原始像素資料並且替代地藉由增量標誌預測符資料進行指示。
當前像素可藉由用梯度方向替換當前像素來進行編碼。梯度方向包括對應於在步驟a)中判定的最小梯度差值的資料，並且在當前像素的最小梯度差值超過閾值的情況下，包括在步驟a)中為當前像素判定的梯度差值的編碼值。
因此，如在當前像素的預測之間的差值不超過特定閾值的情況下判定的在輸出處提供梯度方向。否則，若差值超過某個閾值，使得梯度差值的值的位元長度要求更高的位元數，則藉由進一步編碼梯度差值，亦即增量向量，減少用於梯度差值的位元。這允許在輸出處提供具有特定位元長度的像素資料。
可對影像矩陣中的每個像素執行方法，像素視為要與一組周圍像素進行比較的當前像素。例如，影像可由像素的矩形網格組成。影像可形成為具有單個矩陣的灰度，亦即，像素單聯體，或高階影像，例如包含RGB或YUV色空間中的三元組像素的色編碼影像，每個分量(通常)例如為8位元。影像可按照正常的英語讀取次序(亦即，自左至右以及自上至下)編碼以及解碼為像素串流。
可對一組N個相鄰像素中的僅一個當前像素執行方法。因此，N個連續像素的每串形成組，其中組不重疊。組大小N是編碼品質參數。僅對組中的像素中的一個，編碼梯度差值(增量或「更新」)。組內像素索引(更新選擇器索引)可編碼為上限(log 2(N))位元值。
對梯度差值的值進行編碼可藉由將值指派給代碼表的預定代碼來執行。例如，梯度差值，亦即，增量代碼可使用非線性量化。增量代碼可利用二進制補碼包裝。
第1圖示出影像處理器單元2的方塊圖，該影像處理器單元經佈置以用於處理影像感測器1 (例如，至少一個攝影機)的影像資料PA IN。該影像感測器1包含像素矩陣的感測器區域，該像素矩陣在影像感測器1的輸出處提供包含像素資料PA IN矩陣的影像，例如呈像素資料串流的形式。
影像處理器單元2可以以微處理器以及包含指令的電腦程式的形式來設計，當微處理器執行電腦程式時，該等指令致使處理單元執行判定傳入像素資料PA IN的當前像素值的梯度差值的步驟，並且藉由用梯度方向替換當前像素來對當前像素進行編碼。可對影像的像素資料串流的像素資料PA IN的每個當前像素，或者一組N個像素中的所選當前像素，執行處理。
第2圖示出當前像素X以及四個相鄰像素A、B、C、D。
如自當前像素X至X、Y位置3，2處的右側相鄰像素的箭頭所示，以自左至右以及自上至下的次序讀取視為用於處理的當前像素X。讀取自第一列開始，對行中的每個像素繼續進行，並且一旦當前像素到達相應行的最後一列，就移回至第一列位置處的下一行。
在所包圍的實例中，對於每個當前像素X，預測方向編碼為例如2位元值。四個可能的方向是「左」(藉由左像素A與當前像素X之間的箭頭指示)、「左上」(藉由相鄰像素B與當前像素X之間的箭頭指示)、「上」(藉由相鄰像素C與當前像素X之間的箭頭指示)以及「右上」(藉由像素D與當前像素X指示)。如圖所示，影像由像素的矩形網格組成，該等像素可以是例如RGB、YUV或YCrCg色空間中的三元組，每個分量(通常)為8個位元。因此，所示的每個像素由用於各別色彩RGB或YUV或任何其他合適色彩方案的三個像素值的矩陣組成。
作為所述實施例的替代，矩陣的像素中的每個像素可形成為灰度影像的單聯體，或者可根據各別的色彩編碼方案由任何高階的數字組成。所描述的實例基於每個像素的三個分量代碼。
為每種色彩各別地判定當前像素X與各別相鄰像素A、B、C、D的像素值之間的差值。根據梯度差值的值判定最小梯度方向，以將最小梯度方向量化為左、左上、上以及右上四個方向。這可以例如藉由2位元值00 (對於左(A))、01 (對於左上(B))、10 (對於上(C))以及11 (對於右上(D))來編碼，指定在為所有這四個方向判定的梯度差值集合中具有最小差值的梯度方向。
不是將當前像素的值保持在輸出像素資料，而是可用最小梯度方向以及指示替換的指示符(增量標誌)來替換當前像素。因此，梯度方向編碼在像素資料串流中。接收器可使用指示的梯度方向上的相鄰像素資料的樣本作為當前像素的預測符，對於該當前像素，像素值缺少資料串流。
在預測與當前像素X之間的差值超過某個閾值的情況下，當前像素值與對當前像素X具有最小梯度方向的相鄰像素值之間的差值可在形成增量向量時進行編碼。因此，當前像素值由梯度方向的指示符以及增量標誌以及用於每種色彩RGB、YUV等的三個增量向量來替換。
雖然當前像素的資料集將包括對於具有三種色彩的像素值，例如3 x 8位元，但是對於當前像素值而言，位元長度可減少至3個位元，或者與增量向量一起減少至每當前像素21個位元。
例如，藉由使用對數曲線的分段線性近似，可執行將增量向量的位元長度減少至每像素6個位元。
這種方法允許極其簡單的實施並且提供良好的色彩品質。然而，它往往會在平滑的梯度中產生「條帶」人工痕跡。位元速率是可變的，並且取決於內容的每個像素。這難以控制並且需要速率控制算法並且難以在硬體中實施。因此，由於需要為每個梯度選擇器傳輸2個位元，並且為增量標誌傳輸1個位元，位元速率的下限(例如，3 bpp)是有益的。
第4圖呈現一組N個像素的輸出像素資料的資料結構。影像中的像素組不重疊。組大小N可根據需要選擇並且形成編碼品質參數。
對於組中的一個所選的當前像素X，對增量或更新進行編碼。提供組內所選當前像素X的索引作為更新的選擇器，該選擇器包含log 2(N)的位元長度。
增量，亦即，各別色彩RGB或YUV或YCgCo的當前像素的像素值與具有最小梯度差值的最近相鄰像素之間的差值被添加至受影響的當前像素。因此，當前像素X不再是相鄰像素的直接複製。相反，在連續編碼/解碼之前，對其應用增量向量。
增量向量本身編碼為三個Q位元值，一個用於每個色彩分量(例如，RGB/YUV/YCgCo等)。Q是編碼品質參數，並且每個分量可不同。
對於包含N個像素的組中的N個像素中的每個像素，判定梯度方向並且將其提供在增量集中。
較佳地，算法可容易地轉換為提供每個像素固定位元數的固定速率壓縮器。這可藉由對每組N個相鄰像素中的一個像素的增量進行編碼來實現。這僅將增量位元信令的開銷自N (全位元)減少至[log 2N)]索引。
可應用查找表來判定添加至來自增量代碼的預測的值。可構造該查找表，使得較低的差值比較高的差值量化得更少。可利用加法可能會導致整數溢出的效果來構造更高效的代碼。
例如，對於所有分量，Q = 6，第4圖中例示的資料集將對N像素組進行編碼。
可看出，對於N個以及Q個參數的任何選擇組合，為一組編碼的像素數量是恆定的，從而導致每個像素的位元數固定，亦即，完美恆定的位元速率。
這導致預測方向經明確編碼的像素預測編碼方案。使用增量代碼修改對組中像素中的一個的預測。增量代碼使用非線性量化。增量代碼可利用例如二分量包裝。在Q = 6位元以及三個分量影像色碼(例如，RGB/YUV/YCgCo)的情況下，組大小的數目N的選擇如下判定位元速率：
組大小 位元速率 組大小 位元速率
2像素 11.5 bpp 7像素 5.00 bpp
3像素 8.67 bpp 8像素 4.63 bpp
4像素 7.00 bpp 9像素 4.45 bpp
5像素 6.20 bpp 10像素 4.20 bpp
6像素 5.50 bpp 11像素 4.00 bpp
此修改允許易於控制的固定位元速率。它解決了影像品質問題。平滑梯度中的強制增量消除了條帶。
每組N個像素的處理要求相當複雜的編碼器實施。需要計算以及比較每個N像素組的所有N個編碼變體。原因是對當前像素X的增量進行編碼改變了所有其他像素的梯度以及預測符。編碼器複雜度取決於位元速率以及組大小。位元速率越低，組越大，並且編碼器複雜度越高。藉由合理的工作量，較佳以1:4的壓縮(6 bpp)或更低的壓縮運行方法。
可以為每個色彩分量(例如，RGB或YUV)選擇不同的組大小，彼此不同。
對於非常大的組大小，可達到位元速率的下限，例如2 bpp。
增量組的構造可藉由對梯度差值(亦即，值)進行編碼來執行。例如，與傳統的帶符號代碼相反，包裝代碼利用二進制補碼算法。
這在第5圖中示出，示例性的5位元帶符號代碼用於8位元色深的帶符號+/- 256值範圍，以及5位元包裝代碼。
對於接收增量更新的像素，預測的(自相鄰像素複製的)以及實際的(接地二的)像素值之間的差值可具有-255至+255的值範圍(假設8位元色深)。這需要編碼成Q個位元。
顯然，若Q小於9，這始終是一個有損過程。然而，Q的典型值約為3至6。自Q位元增量代碼至加/減差值的映射查找表LUT對於影像品質非常重要。
由於預測像素以及實際像素之間的差值通常較小，所以增量查找表自較小的差值中指派的條目比自較大的差值中指派的條目多。例如，如第5圖所示的一個有用的5位元查找表可含有值[0, 1, 2, 3, 4, 8, 12, 16, 20, 36, 52, 68, 84, 148, 212, 255]及其負的對應值。
然而，諸如「帶符號」的查找表是最有效的網格表示，因為根據像素值，僅查找表的部分有意義。在極值情況下，預測符為0或255，僅使用查找表的正或負的一半，亦即，浪費了一半空間。
為了解決這個問題，可將查找表進行包裝，其中負值代替二進制補碼正值，如第5圖所示的5位元包裝代碼。當將解碼的增量添加至預測的像素整數溢出時並且所得的最高有效位元的截斷明確地用作工具。
例如，有用的3位元「包裝」查找表可包含值[0, 3, 6, 36, 128, 220, 250, 253]。現在，若預測符為100並且實際值為97，則將對差值253的代碼進行編碼。當添加100 + 253時，結果為353，該結果無法用8位元表示。藉由丟棄第8位元，餘數是97，這正是目標值。對於預測符0以及255的極值情況，「包裝」查找表不再浪費一半的代碼空間。值範圍的另一端附近的像素值肯定有不必要的精確表示，但是根據定義無不可達到的值。
「完全」最高品質的編碼器需要嘗試組中所有可能的增量像素位置，並且挑選與原始影像示出最小視覺差值的編碼。到目前為止，這種模式具有最好的品質，但是非常慢，尤其是對於大的組。對於組大小，每個像素的複雜度是O(N)。避免多次編碼嘗試的簡單編碼器實施使用試探法來預先選擇增量像素索引，從而產生可能的次優決策(並且因此非最優影像品質)，但時間要少得多。每個像素的複雜度是常數，亦即，O(1)。
更簡單的編碼器不僅預先決定增量像素索引，還決定預測方向。這導致品質進一步降低，而速度又小幅提高。
解碼器不受此影響。它幾乎可單獨解碼每個像素，而無需前瞻。
增量代碼的編碼可藉由任何合適的方法來執行。例如，值在-255至+255 (「有符號」)或0至255 (「包裝」)之間的任何二進制補碼餘元素查找表都是可能的，或者對於較低較高位元數的各別值也是可能的。
方法可對任意數量的色彩分量執行，例如對於單色影像的一種色彩分量或多光譜影像的三種以上色彩分量。
藉由允許更新選擇器具有值N，亦即，不涉及組中任何像素的無效索引，並且在這種情況下不對增量進行編碼，可將算法轉換成可變速率編碼方案。然後，編碼器可選擇在影像的均勻區域中根本不發送增量。
方法要求低計算複雜度，尤其是在解碼器中。編碼以及解碼僅要求一個行緩衝器。有損壓縮保留結構以及物件輪廓。不會出現阻塞或振鈴偽影痕跡。直接編碼在增量串流中的預測方向是粗略量化的結構張量，並且可用作要求那種資訊的後續影像處理操作集的輸入。
由於組中僅一個像素可具有增量的事實，所以對於非常嘈雜的內容，會出現非常特定的圖案，該圖案不規則地形成具有完全相同色彩的像素簇。
1:處理影像感測器 2:影像處理器單元 A:像素 B:像素 C:像素 D:像素 X:像素
本發明藉由帶有附圖的示例性實施例來解釋。在附圖中：
第1圖-連接至影像感測器的影像處理器單元的方塊圖；
第2圖-影像像素陣列的示意性當前像素以及相鄰像素；
第3圖-當前像素X的編碼資料集；
第4圖-N像素組的編碼資料集；
第5圖-帶符號的查找表，該查找表用於使用5位元帶符號代碼以及5位元包裝代碼對梯度不同位元進行編碼。
國內寄存資訊(請依寄存機構、日期、號碼順序註記) 無 國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記) 無
A:像素
B:像素
C:像素
D:像素
X:像素

Claims (10)

  1. 一種用於處理影像資料的方法，其中一影像包含一像素矩陣，其特徵在於以下步驟： a) 判定一當前像素值與在多個梯度方向上的一各別相鄰像素的像素值之間的差值；以及 b) 藉由用具有在步驟a)中為該當前像素判定的最小梯度差值的該梯度方向替換該當前像素對該當前像素進行編碼。
  2. 如請求項1所述之方法，其特徵在於，包括步驟b)中用於對該當前像素進行編碼的該梯度方向的一增量標誌，以便指示該像素資料是該當前像素的一預測符。
  3. 如請求項1或2所述之方法，其特徵在於，在該當前像素的最小梯度差值超過一閾值的情況下，藉由用具有在步驟a)中判定的該最小梯度差值的該梯度方向以及在步驟a)中為該當前像素判定的該梯度差值的編碼值替換該當前像素來對該當前像素進行編碼。
  4. 如前述請求項中的一項所述之方法，其中對視為各別當前像素的一影像的矩陣中的每個像素執行該方法。
  5. 如請求項1至3中的一項所述之方法，其特徵在於藉由將一組N個相鄰像素中的僅一個像素視為當前像素來執行該方法。
  6. 如前述請求項中的一項所述之方法，其特徵在於藉由將值指派給一代碼表的預定代碼來對該梯度差值的該等值進行編碼。
  7. 如請求項6所述之方法，其特徵在於藉由使用二進制補碼正值而不是負值來包裝該代碼表。
  8. 一種用於處理一影像感測器的影像資料的影像處理器單元，該影像感測器包含一像素矩陣的一感測器區域，該像素矩陣提供包含一像素資料矩陣的一影像，其特徵在於該影像處理器單元經佈置以用於 a) 判定一當前像素值與在多個梯度方向上的一各別相鄰像素的像素值之間的差值；以及 b) 藉由用具有在步驟a)中為該當前像素判定的最小梯度差值的該梯度方向替換該當前像素對該當前像素進行編碼。
  9. 如請求項8所述之影像處理器單元，其特徵在於該影像處理器單元經佈置以用於藉由執行請求項1至7中的一項所述之方法步驟來處理影像資料。
  10. 一種包含指令之電腦程式，當該程式由一處理單元執行時，該等指令致使該處理單元執行請求項1至7中的一項所述之方法的步驟。
TW111143889A 2022-02-03 2022-11-17 用於處理影像感測器之影像資料的方法及影像處理器單元 TW202333114A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/EP2022/052563 2022-02-03
PCT/EP2022/052563 WO2023147860A1 (en) 2022-02-03 2022-02-03 Gradient based pixel by pixel image spatial prediction

Publications (1)

Publication Number Publication Date
TW202333114A true TW202333114A (zh) 2023-08-16

Family

ID=80623855

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111143889A TW202333114A (zh) 2022-02-03 2022-11-17 用於處理影像感測器之影像資料的方法及影像處理器單元

Country Status (5)

Country Link
US (1) US20240015299A1 (zh)
EP (1) EP4248653A1 (zh)
CN (1) CN116897538A (zh)
TW (1) TW202333114A (zh)
WO (1) WO2023147860A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3884172B2 (ja) * 1997-10-02 2007-02-21 株式会社東芝 可変長復号化装置および復号化方法
JP2007074592A (ja) * 2005-09-09 2007-03-22 Sony Corp 画像処理装置および方法、プログラム、並びに記録媒体
FR2961368B1 (fr) 2010-06-09 2013-05-03 St Microelectronics Grenoble 2 Procede et dispositif de traitement d'une image numerique
CN112702603A (zh) * 2019-10-22 2021-04-23 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
WO2023147860A1 (en) 2023-08-10
CN116897538A (zh) 2023-10-17
EP4248653A1 (en) 2023-09-27
US20240015299A1 (en) 2024-01-11

Similar Documents

Publication Publication Date Title
US10742984B2 (en) Method and apparatus for multi-table based context adaptive binary arithmetic coding
EP2348734A1 (en) Image encoding device and image decoding device
JP2018137796A (ja) 適応パレットプレディクタを用いる、パレット符号化モードにおいて、動画コンテンツの符号化ユニットを符号化または復号する方法および装置
JPH06511361A (ja) アダプティブ・ブロックサイズイメージ圧縮方法およびシステム
US7668383B2 (en) Image processing, compressing, decompressing, transmitting, sending and receiving devices and methods, programs thereof and displaying device
WO2015194185A1 (en) Efficient palette coding for screen content codings
US10652541B2 (en) Method and device for encoding video data
US11509901B2 (en) Method for colour component prediction, encoder, decoder and storage medium
WO2009155468A2 (en) Layered texture compression architecture
JP2005354684A (ja) ブロック適応時空間分散型ディザを用いる固定バジェットフレームバッファ圧縮
US6614942B1 (en) Constant bitrate algorithm for block based image compression
KR20030036021A (ko) 인코딩 방법 및 배열
CA2376720C (en) Coding method, coding apparatus, decoding method and decoding apparatus using subsampling
KR20220019221A (ko) 영상 압축 및 저장 시스템과 영상 압축 및 해제 방법
TW202333114A (zh) 用於處理影像感測器之影像資料的方法及影像處理器單元
US20190191162A1 (en) Method and device for encoding video data
KR20220119316A (ko) 부호화 방법 및 부호기
EP1316219A1 (en) Method for reducing code artifacts in block coded video signals
KR20200079186A (ko) 표시 장치의 표시 스트림 코덱 및 표시 데이터의 부호화 방법
WO2023138391A1 (zh) 系数解码方法、装置、图像解码器及电子设备
Crinon Picture compression based on two-dimensional adaptive sampling and adaptive quantization
JP2952007B2 (ja) 画像符号化装置
Papathanassiadis Image block partitioning: a compression technique suitable for parallel processing
CN116389722A (zh) 一种图像解码方法及装置
JP2021118450A (ja) 復号化装置、及び、符号化装置