TWI495349B - 用於可縮放調整視訊編碼之位元深度強化技術 - Google Patents

用於可縮放調整視訊編碼之位元深度強化技術 Download PDF

Info

Publication number
TWI495349B
TWI495349B TW097139340A TW97139340A TWI495349B TW I495349 B TWI495349 B TW I495349B TW 097139340 A TW097139340 A TW 097139340A TW 97139340 A TW97139340 A TW 97139340A TW I495349 B TWI495349 B TW I495349B
Authority
TW
Taiwan
Prior art keywords
video signal
encoded video
bit depth
values
pixels
Prior art date
Application number
TW097139340A
Other languages
English (en)
Other versions
TW200926828A (en
Inventor
Yi-Jen Chiu
Hong Jiang
Ying Ta Yeh
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of TW200926828A publication Critical patent/TW200926828A/zh
Application granted granted Critical
Publication of TWI495349B publication Critical patent/TWI495349B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)

Description

用於可縮放調整視訊編碼之位元深度強化技術 發明領域
本發明大體關於用於可調整視訊編碼之位元深度強化技術。
 發明背景
一特定視訊可以被許多的使用各種不同裝置及連接的不同觀眾觀看。例如，一特定網際網路網站可以廣播一視訊串流，其可透過各種有線及無線網路藉由可能具有不同性能及與網站的連接之行動裝置、桌上型電腦、電視等觀看。為了適應此異質環境，可以使用一個稱作可調整(可縮放調整)視訊編碼的概念。
在可調整視訊編碼中，提供一多層壓縮視訊串流，該視訊串流允許每一終端裝置擷取與該裝置之性能相匹配的資訊，並忽略剩餘的資訊。該壓縮視訊串流可以經編碼以適應許多不同的可調整特徵，諸如一可調整解析度、可調整訊框率，或者可調整信號雜訊比(SNR)。
為了產生該可調整視訊串流，源視訊串流經一編碼器處理，該編碼器產生包括一基線層及至少一個強化層的一壓縮視訊串流。正如基線層的名稱所意味的，基線層構成了關於該視訊的最小資訊。一終端裝置可以利用強化層的特徵來調整已接收到的視訊串流以匹配該終端裝置的性能。
可調整視訊編碼的過程典型地包括將基線層的位元深度轉換為一更高的位元深度用於強化層。在此脈絡中，該“位元深度”意思是用來表示每一特定像素值的位元的個數。例如，與基線層相關聯的一壓縮視訊串流可能具有一8位元深度，因為該串流的每一像素值由8位元表示。強化層串流可能具有每一個都由10位元表示的像素值。因此，該位元深度轉換包括將基線層串流的8位元像素值轉換成相對應的強化層的10位元像素值。傳統的位元深度調整技術包括基於區塊的映射或者色調映射。然而，站在編碼的立場看，這些技術可能是相對效率較低的。
依據本發明之一實施例，係特地提出一種方法，其包含以下步驟：接收一第一經編碼視訊信號，該第一經編碼視訊信號表示針對多個像素的多個第一值，該等第一值與一第一位元深度相關聯；對每一像素，分析針對位於包含該每一像素的一鄰域中的該等像素之該等第一值；及至少部分地基於該分析，產生一第二經編碼視訊信號，該第二經編碼視訊信號表示針對該等像素的多個第二值，該等第二值與不同於該第一位元深度的一第二位元深度相關聯。
圖式簡單說明
第1圖及第4圖是習知的可調整視訊編碼解碼(SVC)系統的方塊圖。
第2圖是根據本發明的一實施例的一內容自適應位元深度強化器的一方塊圖。
第3圖及第5圖是根據本發明的不同實施例的可調整視訊編碼解碼(SVC)系統的方塊圖。
第6圖是根據本發明的一實施例的一局部像素鄰域之一說明。
 較佳實施例之詳細說明
參見第1圖，一習知的可調整視訊編碼解碼(SVC)系統10包括一視訊源20，其獲取影像資料的連續訊框以產生一視訊信號21，該視訊信號21的像素值具有一M位元深度(如一非限制性的範例，一10位元深度)。換句話說，該視訊源20所獲取的視訊影像具有每一個均由具有M位元的像素值定義的像素(即，對每一像素而言，每一顏色空間成分一個M位元像素值)。
該SVC系統10對該M位元視訊信號21進行處理以產生經編碼的基線層及強化層視訊串流。較特定的，為產生一個經編碼的基線層視訊串流(本文中叫做“BL視訊串流30”)，該SVC系統10包括一色調映射單元22及一基線層編碼器24。該色調映射單元22從該M位元視訊信號21中產生一個較低位元深度信號(叫做一“N位元視訊信號23”)，該N位元視訊信號23具有少於M的N位元深度(如一非限制性的範例，一8位元深度)。該基線層編碼器24將該N位元視訊信號23壓縮以產生BL視訊串流30。為了產生該經編碼的強化層視訊串流(本文中叫做“EL視訊串流32”)，該SVC系統10包括一反色調映射單元26及一強化層編碼器28。反色調映射單元26將由基線層編碼器24提供的一經壓縮的N位元視訊串流轉換為一經壓縮的M位元視訊串流27。強化層編碼器28將經壓縮的M位元視訊串流27與M位元視訊信號21一起處理以產生EL視訊串流32。
該BL 30及EL 32視訊串流可被傳送給一視訊傳輸網路(一無線網路、一蜂巢式網路、網際網路、一廣播網路等等)及/或傳送給視訊儲存裝置，如參考數字40所指出的。該儲存裝置可以是一碟片、硬碟機、CD-ROM、儲存區域網路(SAN)、網站伺服器、伺服器場等等。不管是特定的傳輸網路或儲存裝置，最終，BL 38及EL 39視訊串流可以被一終端裝置從傳輸網路/儲存裝置40接收/檢索，且被解碼(例如，被解壓縮)以產生用於一較低位元深度顯示器44之一N位元視訊信號43，或者產生用於一較高位元深度顯示器49之一M位元視訊信號48。
較特定地，該BL視訊串流38可以被一基線層解碼器42所解碼，該基線層解碼器42產生用於該較低位元深度顯示器44的該N位元視訊信號43。該EL視訊串流39可以被一強化層解碼器47所解碼，該強化層解碼器47可以一起接收該EL視訊串流39及由一反色調映射單元46所提供的一M位元視訊串流47。該反色調映射單元46根據該基線層解碼器42提供的一N位元經解壓縮視訊串流而產生該M位元視訊串流47。接著，強化層解碼器47向該較高位元深度顯示器49提供該M位元視訊信號48。
色調映射是一種經常用於將一較高位元深度視訊轉換為一較低位元深度視訊的技術。該技術包括線性調整、分段內插，且包括產生及使用一詢查表。色調映射背後的原理是提供從較高位元深度像素值到較低位元深度像素值的像素間的映射。用視訊編碼器提供的映射的資訊，該視訊解碼器能夠從該經解碼的較低位元深度視訊構造一個較高位元深度視訊。
然而，已經被發現的是，在編碼之脈絡中，色調映射可能相對地效率低下，因為色調映射未考慮到每一被映射的像素值的局部鄰域中的該等像素值。較特定地，考慮到每一經轉換的像素值的較低N位元深度信號中的局部像素鄰域之位元深度轉換技術在本文中被描述。
該像素鄰域可以由目前圖像中的像素組成，該些像素最靠近其像素值被轉換為一較高位元深度的像素。該像素鄰域可以可選擇地是時間上先前圖像中的目標像素的共置鄰域或時間上未來圖像中的目標像素的共置鄰域。根據本發明的一些實施例，該像素鄰域的邊界可由使用者定義。參見第6圖，作為非限制性特定例子，該像素鄰域可以是一3x3的鄰域100，其包括在其中心的一目標像素110(該像素的值將被轉換為一較高位元深度)，及8個相鄰像素120(特定的相鄰像素120a-h會在下面描述)。在這個例子中，目標像素110是該3x3鄰域100的中心，有4個相鄰的像素120a、120c、120f及120h位於目標像素110之對角，2個相鄰像素位於目標像素110的左面(像素120d)及右面(像素120e)，及2個相鄰像素位於目標像素110的上面(像素120b)及下面(像 素120g)。如上所述，該鄰域100可以是目前圖像中的目標像素的鄰域(即，目前由N位元深度信號表示的該圖像)、時間上先前圖像的目標像素的共置鄰域或者是時間上未來圖像的目標像素的共置鄰域。
為了提高一可調整視訊編碼解碼系統中位元深度可調整性的編碼效率，根據本發明的一些實施例，如第2圖中所描述的一內容自適應位元深度強化器50可被使用。如下文所述，位元深度強化器50逐步跟蹤經壓縮的N位元信號串流的像素值並以收集的關於每一個像素之鄰域的資訊為每一位元深度轉換的基礎。如上面所討論，該等鄰域可與目前、時間上先前及/或時間上未來圖像相關聯。
參見第2圖，大體上，該位元深度強化器50接收到一經壓縮的N位元視訊串流52，其經由強化器50的一內容分析器54及一局部鄰域統計量分析器分析。對於每一個局部鄰域而言，該內容分析器54對該鄰域中的邊緣之存在(即，水平的、垂直的及/或對角的邊緣)進行檢測。如下文中進一步說明的，如果該內容分析器54在一鄰域中檢測到邊緣，該位元深度強化器50將該特定鄰域視為異質的；並且，在這種情況下，該位元深度強化器50可預設由該系統的另一組件所提供的一位元深度轉換，如下文中進一步說明的。
否則，如果在該鄰域中未檢測到邊緣，該位元深度強化器50以對該鄰域的內容之一分析為基礎判定位元深度轉換的偏移量及縮放調整因數值。
該局部鄰域統計量分析器58判定該鄰域的各種統計 量。基於分析器54及58的處理結果，該位元深度強化器50的一局部內容自適應位元深度預測器64將經壓縮的N位元視訊串流52轉換為一經壓縮的較高位元深度M位元視訊串流65。
根據本發明的一些實施例，該內容分析器54可以應用一邊緣檢測度量以檢測該鄰域中的垂直的、水平的或對角的邊緣之存在。經檢測出的該鄰域中之一邊緣之存在可被用作認為該鄰域不夠充分地同質以用於基於該等局部鄰域像素值的位元深度預測之基礎，如下文中進一步說明的。相反的，在該鄰域中未檢測到一邊緣可被用以認為該鄰域足夠充分地同質以用於基於該等局部鄰域像素值的位元深度預測。
舉個較特定的例子，在使用3x3鄰域的情況下，內容分析器54可對該3x3鄰域施加一索貝爾(Sobel)邊緣運算子。該索貝爾運算子可被如下方程式1、2、3及4描述：
方程式1是該邊緣運算子中針對檢測一水平邊緣的分量；方程式2是該邊緣運算子中針對檢測一垂直邊緣的分量；方程式3是該邊緣運算子中針對檢測一正45度邊緣的分量；及方程式4是該邊緣運算子中針對檢測一負45度邊緣的分量。
鑑於以上定義的邊緣運算子，稱作“EM(x)”的一邊緣度量，可以被公式化為一3x3鄰域(以下稱為“NH9(x)”)中以方程式1、2、3及4為加權的卷積，如下：EM(x)=|NH9(x) * E_h|+|NH9(x) * E_v|+|NH9(x) * E_P45|+|NH9(x) * E_N45|. 方程式5
在方程式5中，“x”表示該N位元信號中的目標像素值。
根據本發明的一些實施例，該內容分析器54判定邊緣度量EM(x)，而局部內容自適應位元深度預測器64將該檢測度量EM(x)與一預定義的臨界值相比較以判定在該鄰域中一邊緣是否已被檢測到。因此，如果該邊緣檢測度量EM(x)高於預定義臨界值，該位元深度預測器64假定一邊緣已被檢測到。否則，該位元深度預測器64假定無邊緣被檢測到。
需要指出的是，除了該索貝爾邊緣運算子以外的其他邊緣運算子可以依據本發明的其他實施例被使用。另外，在依據本發明的其他實施例中，水平(方程式1)及垂直(方程式2)邊緣運算子分量的使用對邊緣檢測而言可能已經足 夠，而不需使用對角(方程式3及4)邊緣分量。因此，很多變化被考量，並在後附申請專利範圍裏面。
該鄰域包含k個像素，且k的值取決於所使用的鄰域。舉例來說，在第6圖中的3x3鄰域100這個例子中，k等於9。如另一個例子，在一個5x5鄰域中，k個鄰近像素的個數可以是25。如再一個例子，在目標像素上方及下方的兩個像素以及目標像素左邊及右邊的兩個像素被考慮之一鄰域的情況中，k個鄰近像素的個數可以是5。因此，很多變化被考量，並在後附申請專利範圍裏面。
依據本發明的一些實施例，局部鄰域統計量分析器58收集如下的鄰域統計量：k個鄰近像素的一總和，稱為“sum_k”，及k個鄰近像素的變異數，稱為“var_k”。被位元深度預測器64使用(進一步討論如下)的一參數被定義為距離，稱為“dist_x”，可被描述如下：dist_x=(k*x-sum_k)/(var_k+C) 方程式6
其中，“C”代表一預定義的常數值。
大體上，該位元深度預測器64根據如下關係將來自該N位元信號之一特定的N位元目標像素值x轉換為一M位元目標像素值(稱為“y”)：y=a*x Θ b, 方程式7 其中，“a”代表一縮放調整因數值，“b”代表一偏移值，而“Θ”代表一符號運算子。該a縮放調整因數值及b偏移值是該相對應的鄰域中的像素值的函數，如下所述。大體上，該a縮放調整因數值遵循一非線性函數，因為如果沒有邊緣 被檢測到(即該邊緣度量EM(x)小於預定義的臨界值)，位元深度預測器64設定該a縮放調整因數值等於M減去N(如一非限制性的範例)，而如果檢測到一邊緣，則修改該a縮放調整因數值。
較特定地，舉個例子，M可能等於10(對應於每一像素值10位元)，且N可能等於8(對應於每一像素值8位元)。因此，M具有一1024(210 )的範圍，4倍於N的範圍256(28 )。當一邊緣被檢測出，該位元深度預測器64可忽略局部像素鄰域(歸因於鄰域的異質本質)，並設定a縮放調整因數值為4(歸因於該等範圍的相對比例)，且設定b偏移值為0。然而，當沒有邊緣被檢測到時，該位元深度預測器64透過設定a縮放調整因數值為M-N(或另一預設值)及設定b偏移值為一個由局部鄰域像素內容判定的值，基於局部鄰域對位元深度轉換進行調整，如下文進一步描述的。在本發明的其他實施例中，當一邊緣被檢測到時，位元深度預測器64允許另一位元深度技術(舉個例子，諸如一色調映射或者一基於區塊的位元深度縮放調整技術)來判定該經轉換的像素值，如下文進一步描述的。
依據本發明的一些實施例，當沒有邊緣被檢測到時(即當邊緣度量EM(x)低於預定的臨界值時)，位元深度預測器64如下設定偏移值b：b=d * dist_x, 方程式8 其中，“dist_x”定義在方程式6中，而“d”代表一預定義的常數值。依據本發明的一些實施例，如果邊緣度量EM(x) 高於預定的臨界值，那麼假設一異質像素環境，且因此，偏移值b可以被設定。
該符號運算子Θ可以是加號或減號運算子，這可以基於由視訊編碼器提供的一信號。可選擇地，該符號運算子可以在解碼器端導出或者可以根據使用者定義指定。因此，很多變化被考量，並在後附申請專利範圍裏面。
如第3圖顯示，根據本發明的一些實施例，內容自適應位元深度強化器50可以被併入一可調整視訊編碼解碼(SVC)系統100的編碼器端及解碼器端兩者。在這點上，該SVC系統100與SVC系統10相似(見第1圖)，其中相同的參考數字被用以代表相同的元件。然而，與SVC系統10不同的是，該SVC系統100包括一在反色調映射單元26及強化層編碼器28之間的位元深度強化器50a(與第2圖的位元深度強化器50具有相同的設計)。在這點上，根據本發明的一些實施例，該位元深度強化器50a接收到來自反色調映射單元26的該M位元視訊串流27。該位元深度強化器50a還接收到由基線層編碼器24提供的該N位元視訊串流。
當該像素鄰域中的一邊緣被檢測到時，該位元深度強化器50a使用來自於該反色調映射單元26的該位元深度轉換結果。否則，該位元深度強化器50a對由基線層編碼器24提供的該N位元信號進行處理，並對該像素執行位元深度轉換。如此，該位元深度強化器50a對反色調映射單元26的操作進行補充。
在解碼端，該系統100包括一內容自適應深度強化器 50b(與第2圖的位元深度強化器50具有相同的設計)，與編碼端相似，其耦接在該反色調映射單元46及該強化層解碼器47之間，來對由單元46提供的位元深度轉換進行補充。
參看第4圖，另一習知的SVC系統200可以被使用，作為第1圖中描述的該習知SVC系統10之一可選擇的替代。該SVC系統200的設計與SVC系統10相似，除了將反色調映射單元26及46分別替換為反基於區塊縮放調整單元206及208以外。與在色調映射中使用的像素間的映射相比，該基於區塊的位元深度縮放調整方法將圖像分割成像素區塊，並對在該區塊中的像素採用相同的縮放調整因數值及偏移值。即，該等視訊編碼器為每一區塊判定一組縮放調整因數值及偏移值，且該等視訊解碼器利用該組已判定的縮放調整因數值及偏移值，以BL視訊中的較低位元深度的經解碼之像素來重建EL視訊中的較高位元深度的像素。該區塊的大小可以與巨集區塊大小(一16x16像素區塊大小)對齊，或者子巨集區塊大小(諸如，與目前的可調整視訊編碼解碼(SVC)標準相容的8x8、16x8、8x16、8x4、4x8，或者4x4)對齊。
參見第5圖，為了提高編碼效率，依據本發明的一些實施例，一SVC系統250可被用到。該SVC系統250與系統200具有相似的設計，其中相同的參考數字被用以代表相同的元件，除了該SVC系統250包括內容自適應位元深度強化器50a及50b，每一個都共用了內容自適應位元強化器50(見第2圖)的設計。在這點上，如第5圖中描述的，該位元深度強化器50a位於反基於區塊縮放調整單元206及強化層編碼器28之間。該位元深度強化器50a使用鄰域分析的資訊來對帶有更細緻的細節的較高位元深度像素的預測進行補充，以達到更好的編碼效率。第5圖中也描述到，位元強化器50b可以位於反基於區塊縮放調整單元208及強化層解碼器47之間。當檢測到邊緣時，由該等基於區塊的單元206及208提供的該等位元深度轉換結果被使用。否則，該等位元深度強化器50a及50b提供基於該等元素鄰域之內容的位元深度轉換。
需要指出的是，依據本發明的另一些實施例，該等內容自適應位元深度強化器50可以在沒有反色調映射單元26及46(系統100中)或者反基於區塊縮放調整單元206及208(系統250中)時使用。因此，很多變化被考量，並在後附申請專利範圍裏面。
根據本發明的該特定實施例，本文中所描述的位元深度解碼技術的優點包括以下的一或多個。該內容自適應位元深度強化器透過利用低位元深度中的目標像素的局部內容之特徵，使位元深度可調整視訊達到了高效的編碼效率。該內容自適應位元深度強化器透過利用低位元深度中的目標像素的局部內容之特徵，使組合的BL視訊及EL視訊達到了高效的編碼效率。該內容自適應位元深度強化器透過由較低位元深度信號導出的特徵，從較低位元深度信號預測較高位元深度信號，且該內容自適應位元深度強化器繼承了由於在位元流中無額外負擔需被運輸之自我構建的優良特性。該內容自適應位元深度強化器透過從BL視訊中的較低位元深度的信號導出的特徵，從BL視訊中的較低位元深度的信號預測EL視訊中的較高位元深度的信號。該內容自適應位元深度強化器透過該鄰域統計量及局部內容的特性，從BL視訊中的較低位元深度信號預測EL視訊中的較高位元深度信號。該內容自適應位元深度強化器透過利用對低位元深度信號的局部邊緣檢測以改變高位元深度信號之建構，提高像素間之色調映射轉換高/低位元深度視訊的編碼效率。該內容自適應位元深度強化器透過利用對低位元深度信號的局部邊緣檢測以改變較高位元深度信號之建構，提高基於區塊縮放調整轉換高/低位元深度視訊的編碼效率。
儘管本發明已經針對有限數目個實施例予以描述，但獲益於此揭露之該技藝中具有通常知識者將了解據此而得的許多修改及變化。意圖是後附申請專利範圍涵蓋所有落入本發明的真實精神及範圍內的這些修改及變化。
20‧‧‧視訊源
21、48‧‧‧M位元視訊信號
22‧‧‧色調映射單元
23、43‧‧‧N位元視訊信號
24‧‧‧基線層編碼器
26、46‧‧‧反色調映射單元
27‧‧‧M位元視訊串流
28‧‧‧強化層編碼器
30、38‧‧‧BL視訊串流
32、39‧‧‧EL視訊串流
40‧‧‧視訊傳輸網路/視訊存儲裝置
42‧‧‧基線層解碼器
44‧‧‧較低位元深度顯示器
47‧‧‧M位元視訊串流/強化層解碼器
49‧‧‧較高位元深度顯示器
50、50a、50b‧‧‧內容自適應位元深度強化器
52‧‧‧N位元視訊串流
54‧‧‧內容分析器
58‧‧‧局部鄰域統計量分析器
64‧‧‧局部內容自適應位元深度預測器
65‧‧‧M位元視訊串流
100‧‧‧3x3鄰域、可調整視訊編碼解碼(SVC)系統
110‧‧‧目標像素
120a~h‧‧‧相鄰像素
206、208‧‧‧反基於區塊縮放調整單元
250‧‧‧可調整視訊編碼解碼(SVC)系統
第1圖及第4圖是習知的可調整視訊編碼解碼(SVC)系統的方塊圖。
第2圖是根據本發明的一實施例的一內容自適應位元深度強化器的一方塊圖。
第3圖及第5圖是根據本發明的不同實施例的可調整視訊編碼解碼(SVC)系統的方塊圖。
第6圖是根據本發明的一實施例的一局部像素鄰域之一說明。
50．．．位元深度強化器
52．．．N位元視訊串流
54．．．內容分析器
58．．．局部鄰域統計量分析器
64．．．局部內容自適應位元深度預測器
65．．．M位元視訊串流

Claims (20)

  1. 一種用於位元深度強化的方法，其包含以下步驟：接收一第一經編碼視訊信號，該第一經編碼視訊信號表示數個像素的第一值，該等第一值係與一第一位元深度相關聯；針對各個像素，判定位於包含該各個像素的一鄰域中之該等像素的該等第一值之相關聯的一異質程度；以及基於相關聯的所判定之該等異質程度而選擇性地縮放調整該等第一值，以產生表示該等像素之第二值的一第二經編碼視訊信號，該等第二值係與不同於該第一位元深度的一第二位元深度相關聯。
  2. 如申請專利範圍第1項所述之方法，其進一步包含以下步驟：產生該第一經編碼視訊信號，包含使用一基線編碼器或一基線解碼器。
  3. 如申請專利範圍第1項所述之方法，其進一步包含以下步驟：進一步使該第二經編碼視訊信號之產生係奠基於對該第一經編碼視訊信號進行反基於區塊縮放調整所獲得的結果。
  4. 如申請專利範圍第1項所述之方法，其進一步包含以下步驟：進一步使該第二經編碼視訊信號之產生係奠基於 對該第一經編碼視訊信號進行反色調映射所獲得的結果。
  5. 如申請專利範圍第1項所述之方法，其中該等鄰域包含與一時間上先前圖像相關聯的數個共置鄰域、與一時間上未來圖像相關聯的數個共置鄰域、及/或與一目前圖像相關聯的數個鄰域。
  6. 如申請專利範圍第1項所述之方法，其進一步包含以下步驟：其中分析之步驟包含：處理位於該鄰域中之該等像素的該等第一值，以檢測一邊緣。
  7. 如申請專利範圍第6項所述之方法，其中產生該第二經編碼視訊信號之步驟包含：基於是否檢測到一邊緣而調整一縮放調整因數及一偏移其中至少一者。
  8. 如申請專利範圍第1項所述，其中分析之步驟包含：處理位於該鄰域中之該等像素的該等第一值，以判定關於經處理之該等第一值的一統計量。
  9. 如申請專利範圍第8項所述之方法，其中處理之步驟包含：判定經處理之該等第一值的一變異數及一總和其中至少一者。
  10. 一種包含電腦可存取非過渡性儲存媒體以儲存指令之物品，該等指令在被執行時會使一基於處理器之系統執行以下動作： 接收一第一經編碼視訊信號，該第一經編碼視訊信號表示數個像素的第一值，該等第一值係與一第一位元深度相關聯；針對各個像素，判定位於包含該各個像素的一鄰域中之該等像素的該等第一值之一異質程度；以及基於相關聯的所判定之該等異質程度而選擇性地縮放調整該等第一值，以產生一第二經編碼視訊信號，該第二經編碼視訊信號表示該等像素的第二值，該等第二值係與高於該第一位元深度的一第二位元深度相關聯。
  11. 如申請專利範圍第10項所述之物品，該儲存媒體儲存在被執行時會使該基於處理器之系統執行以下動作的指令：進一步使該第二經編碼視訊信號之產生係奠基於對該第一經編碼視訊信號進行反基於區塊縮放調整所獲得的結果。
  12. 如申請專利範圍第10項所述之物品，該儲存媒體儲存在被執行時會使該基於處理器之系統執行以下動作的指令：進一步使該第二經編碼視訊信號之產生係奠基於對該第一經編碼視訊信號進行反色調映射所獲得的結果。
  13. 如申請專利範圍第10項所述之物品，該儲存媒體儲存在被執行時會使該基於處理器之系統執行以下動作的指 令：處理位於該局部鄰域中之該等像素的該等第一值，以判定關於經處理之該等第一值的一統計量，以及使該分析至少部分係奠基於所判定之該統計量。
  14. 如申請專利範圍第10項所述之物品，其中該等鄰域包含與一時間上先前圖像相關聯的個共置鄰域、與一時間上未來圖像相關聯的數個共置鄰域、及/或與一目前圖像相關聯的數個鄰域。
  15. 一種視訊系統，其包含：一分析器，用以：接收一第一經編碼視訊信號，該第一經編碼視訊信號表示數個像素的第一值，該等第一值係與一第一位元深度相關聯；以及針對各個像素，判定位於包含該各個像素的一鄰域中之該等像素的該等第一值之相關聯的一異質程度；以及一位元深度預測器，用以基於相關聯的所判定之該等異質程度而選擇性地縮放調整該等第一值，以產生一第二經編碼視訊信號，該第二經編碼視訊信號表示該等像素的第二值，該等第二值係與不同於該第一位元深度的一第二位元深度相關聯。
  16. 如申請專利範圍第15項所述之視訊系統，其進一步包含：一基線層編碼器，用以提供該第一經編碼視訊信 號。
  17. 如申請專利範圍第16項所述之視訊系統，其進一步包含：一強化層編碼器，用以接收該第二經編碼視訊信號。
  18. 如申請專利範圍第15項所述之視訊系統，其進一步包含：一反色調映射單元，用以至少部分地產生該第二經編碼視訊信號。
  19. 如申請專利範圍第15項所述之視訊系統，其進一步包含：一反基於區塊縮放調整單元，用以至少部分地產生該第二經編碼視訊信號。
  20. 如申請專利範圍第15項所述之視訊系統，其中該分析器包含：一內容分析器，用以處理位於該局部鄰域中之該等像素的該等第一值，以檢測該局部鄰域中之一邊緣的存在；以及一統計量分析器，用以判定關於經處理之該等第一值的至少一個統計量。
TW097139340A 2007-10-15 2008-10-14 用於可縮放調整視訊編碼之位元深度強化技術 TWI495349B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/974,686 US8208560B2 (en) 2007-10-15 2007-10-15 Bit depth enhancement for scalable video coding

Publications (2)

Publication Number Publication Date
TW200926828A TW200926828A (en) 2009-06-16
TWI495349B true TWI495349B (zh) 2015-08-01

Family

ID=40490484

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097139340A TWI495349B (zh) 2007-10-15 2008-10-14 用於可縮放調整視訊編碼之位元深度強化技術

Country Status (5)

Country Link
US (1) US8208560B2 (zh)
JP (1) JP4883456B2 (zh)
CN (2) CN102082953B (zh)
DE (1) DE102008051562A1 (zh)
TW (1) TWI495349B (zh)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8204333B2 (en) 2007-10-15 2012-06-19 Intel Corporation Converting video and image signal bit depths
US8184693B2 (en) 2008-04-11 2012-05-22 Intel Corporation Adaptive filtering for bit-depth scalable video codec
US9338475B2 (en) * 2008-04-16 2016-05-10 Intel Corporation Tone mapping for bit-depth scalable video codec
WO2012122423A1 (en) 2011-03-10 2012-09-13 Dolby Laboratories Licensing Corporation Pre-processing for bitdepth and color format scalable video coding
BRPI1008372A2 (pt) * 2009-02-11 2018-03-06 Thomson Licensing métodos e aparelho para codificação e decodificação de vídeo escalável com profundidade de bit utilizando mapeamento de tons e mapeamento inverso de tons
JP5589006B2 (ja) * 2009-03-13 2014-09-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 高ダイナミックレンジ、視覚ダイナミックレンジ及び広色域のビデオの階層化圧縮
JP2012060261A (ja) 2010-09-06 2012-03-22 Sony Corp 画像処理装置および方法
WO2012086203A1 (ja) * 2010-12-22 2012-06-28 パナソニック株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
EP2684365A1 (en) * 2011-03-10 2014-01-15 Dolby Laboratories Licensing Corporation Bitdepth and color scalable video coding
CN107105229B9 (zh) 2011-04-14 2020-03-31 杜比实验室特许公司 图像解码方法、视频解码器和非暂态计算机可读存储介质
WO2012148883A1 (en) * 2011-04-25 2012-11-01 Dolby Laboratories Licensing Corporation Non-linear vdr residual quantizer
JP5973434B2 (ja) 2011-06-23 2016-08-23 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． 画像フィルタ装置、フィルタ方法および動画像復号装置
KR101855975B1 (ko) * 2011-06-24 2018-05-09 가부시키가이샤 엔.티.티.도코모 모션 보상 예측을 위한 방법 및 장치
US9055304B2 (en) * 2011-07-01 2015-06-09 Qualcomm Incorporated Reduced resolution pixel interpolation
KR101979379B1 (ko) * 2011-08-25 2019-05-17 삼성전자주식회사 영상의 부호화 방법 및 장치, 및 영상의 복호화 방법 및 장치
EP2584779A1 (en) * 2011-10-20 2013-04-24 Thomson Licensing Method and device for encoding a video frame, method and device for decoding a video frame and storage medium
US9621890B2 (en) * 2011-10-20 2017-04-11 Thomson Licensing Method and device for encoding a video frame, method and device for decoding a video frame and storage medium
WO2013106190A1 (en) 2012-01-09 2013-07-18 Dolby Laboratories Licensing Corporation Hybrid reference picture reconstruction method for single and multiple layered video coding systems
US9313497B2 (en) 2012-01-25 2016-04-12 Intel Corporation Systems, methods, and computer program products for transform coefficient sub-sampling
CN102724553A (zh) * 2012-06-12 2012-10-10 华为技术有限公司 图像编码方法、图像解码方法及图像编码器和图像解码器
US10623759B2 (en) 2012-06-13 2020-04-14 Sony Corporation Decoupling enhancements in sample adaptive offset (SAO) for high efficiency video encoder (HEVC)
WO2014000125A1 (en) * 2012-06-29 2014-01-03 Intel Corporation Systems, methods,and computer program products for scalable video coding based on coefficient sampling
KR102077980B1 (ko) * 2012-07-02 2020-02-14 소니 주식회사 고효율 비디오 인코더를 위한 샘플 적응성 오프셋에서의 디커플링 강화
US9124899B2 (en) 2012-09-28 2015-09-01 Sharp Laboratories Of America, Inc. Motion derivation and coding for scaling video
US9324137B2 (en) * 2012-10-24 2016-04-26 Marvell World Trade Ltd. Low-frequency compression of high dynamic range images
CN105284116B (zh) * 2013-04-19 2019-05-21 麦克赛尔株式会社 摄像方法和摄像装置
JP6328759B2 (ja) * 2013-07-15 2018-05-23 寰發股▲ふん▼有限公司ＨＦＩ Ｉｎｎｏｖａｔｉｏｎ Ｉｎｃ． ビデオ符号化のサンプル適応オフセット処理の方法
US10516898B2 (en) 2013-10-10 2019-12-24 Intel Corporation Systems, methods, and computer program products for scalable video coding based on coefficient sampling
US9948916B2 (en) 2013-10-14 2018-04-17 Qualcomm Incorporated Three-dimensional lookup table based color gamut scalability in multi-layer video coding
US9756337B2 (en) 2013-12-17 2017-09-05 Qualcomm Incorporated Signaling color values for 3D lookup table for color gamut scalability in multi-layer video coding
US10531105B2 (en) 2013-12-17 2020-01-07 Qualcomm Incorporated Signaling partition information for 3D lookup table for color gamut scalability in multi-layer video coding
EP2958329B1 (en) 2014-06-16 2018-12-05 Thomson Licensing Method for encoding and decoding an image block based on dynamic range extension, encoder and decoder
GB2554667B (en) * 2016-09-30 2021-10-20 Apical Ltd Image processing
US20180146019A1 (en) * 2016-11-21 2018-05-24 International Business Machines Corporation Light-weight resolution switching for online video streaming
US10187584B2 (en) * 2016-12-20 2019-01-22 Microsoft Technology Licensing, Llc Dynamic range extension to produce high dynamic range images
US11178204B1 (en) * 2017-02-23 2021-11-16 Cox Communications, Inc. Video processor to enhance color space and/or bit-depth
WO2021108719A1 (en) * 2019-11-27 2021-06-03 Dolby Laboratories Licensing Corporation Rate-control-aware reshaping in hdr imaging
US11838551B2 (en) 2020-12-30 2023-12-05 Ofinno, Llc Adaptive block level bit-depth prediction

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5327502A (en) * 1991-01-17 1994-07-05 Sharp Kabushiki Kaisha Image coding system using an orthogonal transform and bit allocation method suitable therefor
US6038576A (en) * 1997-12-02 2000-03-14 Digital Equipment Corporation Bit-depth increase by bit replication
FR2805429B1 (fr) * 2000-02-21 2002-08-16 Telediffusion Fse Procede de controle de la qualite numeriques distribuees par detection de faux contours
US20070057955A1 (en) * 2005-08-31 2007-03-15 Mckay Brent T Display panels and methods and apparatus for driving the same
US7215831B2 (en) * 2001-04-26 2007-05-08 Georgia Tech Research Corp. Video enhancement using multiple frame techniques
US7308146B2 (en) * 2002-09-30 2007-12-11 Canon Kabushiki Kaisha Digital video compression
JP4649108B2 (ja) * 2003-01-16 2011-03-09 パナソニック株式会社 画像表示装置および画像表示方法
KR100925195B1 (ko) * 2003-03-17 2009-11-06 엘지전자 주식회사 대화형 디스크 플레이어의 이미지 데이터 처리장치 및처리방법
JP2005024717A (ja) * 2003-06-30 2005-01-27 Fujitsu Hitachi Plasma Display Ltd ディスプレイ装置およびディスプレイの駆動方法
JP4639037B2 (ja) * 2003-07-18 2011-02-23 キヤノン株式会社 画像処理方法および装置
JP2005051337A (ja) 2003-07-30 2005-02-24 Fuji Photo Film Co Ltd 画像処理方法、画像処理装置およびプログラム
US7440633B2 (en) * 2003-12-19 2008-10-21 Sharp Laboratories Of America, Inc. Enhancing the quality of decoded quantized images
US7424166B2 (en) * 2003-12-24 2008-09-09 Sharp Laboratories Of America, Inc. Enhancing the quality of decoded quantized images
US7424168B2 (en) * 2003-12-24 2008-09-09 Sharp Laboratories Of America, Inc. Enhancing the quality of decoded quantized images
US7400779B2 (en) * 2004-01-08 2008-07-15 Sharp Laboratories Of America, Inc. Enhancing the quality of decoded quantized images
US8503542B2 (en) * 2004-03-18 2013-08-06 Sony Corporation Methods and apparatus to reduce blocking noise and contouring effect in motion compensated compressed video
JP4814217B2 (ja) * 2004-04-15 2011-11-16 ドルビー ラボラトリーズ ライセンシング コーポレイション 画像を低ダイナミックレンジから高ダイナミックレンジに変換するシステム及びコンピュータプログラム
KR101014667B1 (ko) * 2004-05-27 2011-02-16 삼성전자주식회사 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
KR100763178B1 (ko) * 2005-03-04 2007-10-04 삼성전자주식회사 색 공간 스케일러블 비디오 코딩 및 디코딩 방법, 이를위한 장치
US7420570B2 (en) * 2005-04-14 2008-09-02 Samsung Electronics Co., Ltd. Methods and systems for video processing using super dithering
KR101108435B1 (ko) * 2005-05-31 2012-02-16 서강대학교산학협력단 의사윤곽 제거 방법 및 이 방법이 적용되는 디스플레이장치
KR100679046B1 (ko) * 2005-10-10 2007-02-05 삼성전자주식회사 이미지의 지역적 정보를 이용한 비트 해상도 확장 방법 및장치
US7650042B2 (en) * 2006-02-27 2010-01-19 Lsi Corporation Sign coring for contour reduction
JP2007266749A (ja) 2006-03-27 2007-10-11 Sanyo Electric Co Ltd 符号化方法
US8090210B2 (en) * 2006-03-30 2012-01-03 Samsung Electronics Co., Ltd. Recursive 3D super precision method for smoothly changing area
WO2007116551A1 (ja) * 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
WO2008071037A1 (en) * 2006-12-14 2008-06-19 Thomson Licensing Method and apparatus for encoding and/or decoding video data using enhancement layer residual prediction for bit depth scalability
US20080263621A1 (en) * 2007-04-17 2008-10-23 Horizon Semiconductors Ltd. Set top box with transcoding capabilities
US8085852B2 (en) * 2007-06-26 2011-12-27 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding
US8204333B2 (en) * 2007-10-15 2012-06-19 Intel Corporation Converting video and image signal bit depths
US9338475B2 (en) * 2008-04-16 2016-05-10 Intel Corporation Tone mapping for bit-depth scalable video codec

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Segall, A., et al., "System for bit-depth scalable coding," ITU Study Group 16 - Video Coding Experts Group - ISO/IEC MPEG & ITU-T VCEG (ISO/IEC JTC1/SC29/WG11 and ITU-T SG16 Q6), XX, XX, no. JVT-W113, 25 April 2007, XP030007073. *

Also Published As

Publication number Publication date
TW200926828A (en) 2009-06-16
US20090097561A1 (en) 2009-04-16
JP2009100472A (ja) 2009-05-07
CN101459845A (zh) 2009-06-17
CN102082953B (zh) 2014-12-10
US8208560B2 (en) 2012-06-26
DE102008051562A1 (de) 2009-04-30
CN102082953A (zh) 2011-06-01
CN101459845B (zh) 2011-04-13
JP4883456B2 (ja) 2012-02-22

Similar Documents

Publication Publication Date Title
TWI495349B (zh) 用於可縮放調整視訊編碼之位元深度強化技術
Li et al. Efficient reversible data hiding based on multiple histograms modification
KR101033065B1 (ko) 비디오 및 이미지 신호 비트 심도 변환
Cedillo-Hernandez et al. Transcoding resilient video watermarking scheme based on spatio-temporal HVS and DCT
KR102497153B1 (ko) 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩
CN107318022B (zh) 一种基于h.265标准无失真漂移的视频隐写方法
Fernández et al. Complexity reduction in the HEVC/H265 standard based on smooth region classification
WO2022261838A1 (zh) 残差编码和视频编码方法、装置、设备和系统
US20240202978A1 (en) Method for image processing and apparatus for implementing the same
JP6065613B2 (ja) 動画像符号化装置
JP2016506201A (ja) デジタルビデオストリーム中の圧縮ノイズを低減する方法および装置
Velazquez-Garcia et al. Imperceptible–visible watermarking for copyright protection of digital videos based on temporal codes
CN1650635A (zh) 对低速率应用的数字图像进行处理的方法
CN101360235B (zh) 视频图像预处理方法
Tomé et al. Low delay distributed video coding with refined side information
US11483590B2 (en) Method for image processing and apparatus for implementing the same
JP2010278519A (ja) 動きベクトル検出装置
JP2007067552A (ja) 階層間予測処理方法，階層間予測処理装置，階層間予測処理プログラムおよびその記録媒体
Chiu et al. Universal intra coding for arbitrary RGB color filter arrays in HEVC
Shinde et al. Background foreground boundary aware efficient motion search for surveillance videos
US11240521B2 (en) Method for image processing and apparatus for implementing the same
Lopez-Rubio et al. An adaptive system for compressed video deblocking
Seirafian et al. Video Steganography in HEVC Using Intra-Prediction Modes
Shilpa et al. Pixelwise improvised blend of predictors in HEVC lossless mode
Wei et al. Design and implementation of H. 264/AVC reverse biorthogonal Wavelet-based flexible macroblock ordering

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees