TWI527466B - 低延遲圖像編碼技術 - Google Patents

低延遲圖像編碼技術 Download PDF

Info

Publication number
TWI527466B
TWI527466B TW102113267A TW102113267A TWI527466B TW I527466 B TWI527466 B TW I527466B TW 102113267 A TW102113267 A TW 102113267A TW 102113267 A TW102113267 A TW 102113267A TW I527466 B TWI527466 B TW I527466B
Authority
TW
Taiwan
Prior art keywords
segment
slice
image
context
decoder
Prior art date
Application number
TW102113267A
Other languages
English (en)
Other versions
TW201349878A (zh
Inventor
湯瑪士 夏以爾
維雷瑞 喬治
阿納斯塔沙 亨凱爾
迪特利夫 馬皮
卡斯登 古寧貝格
羅伯特 史庫濱
Original Assignee
Ge影像壓縮有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=48141968&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TWI527466(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Ge影像壓縮有限公司 filed Critical Ge影像壓縮有限公司
Publication of TW201349878A publication Critical patent/TW201349878A/zh
Application granted granted Critical
Publication of TWI527466B publication Critical patent/TWI527466B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98Adaptive-dynamic-range coding [ADRC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Color Television Systems (AREA)
  • Communication Control (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Description

低延遲圖像編碼技術 發明領域
本發明係關於圖像之低延遲寫碼。
發明背景
在當前HEVC設計片中,包含熵片(從前的輕量片)瓦片及WPP(波前並行處理)作為並行化工具。
對於視訊編碼器及解碼器之並行化,圖像級分割與其他方法相比具有若干優勢。在先前的視訊編解碼器中,如H.264/AVC[1],圖像分區僅對在寫碼效率方面具有高成本的規則片為可能。對於可縮放並行H.264/AVC解碼,有必要將用於圖像重構之巨集區塊級並行化與用於熵解碼之圖框級並行化組合。然而,此方法提供圖像潛時的有限減少以及較高的記憶體使用率。為了克服此等限制,已在HEVC編解碼器中包含新的圖像分區策略。當前參考軟件版本(HM-6)含有4個不同方法:規則或正常片、熵片、波前並行處理(WPP)子串流以及瓦片。通常,彼等圖片分區包括一組最大寫碼單元(LCU),或同義地,寫碼樹單元(CTU),如HEVC中所定義,或甚至彼等單元之子集。
圖1展示為圖像898,其按照圖像中之LCU或巨集區塊的列902示範性地定位至規則片900中。規則或正常片(如H.264[1]中所定義)具有最大寫碼損失,因為其打破了熵解碼及預測依賴性。熵片(類似於片)打破熵解碼依賴性,但允許預測(及濾波)越過片邊界。
在WPP中,圖像分區經列交錯,但允許熵解碼及預測兩者使用來自其他分區中之區塊的資料。以此方式,寫碼損失得以最小化,同時波前並行化可得到利用。然而,交錯違反了位元串流因果性,因為前一分區需要下一分區來解碼。
圖2示範性地展示出圖像898,其分為水平分區瓦片906之兩個列904、904b。瓦片界定水平邊界908及垂直邊界910,其將圖像898分割為瓦片行912a、912b、912c,以及列904a、904b。類似於規則片900,瓦片906打破熵解碼及預測依賴性,但不需要用於每一瓦片的標頭。
對於此等技術中之每一者,編碼器可自由選擇分區之數目。一般而言,具有較多分區導致較高的壓縮損失。然而,在WPP中,損失傳播並非如此高,且因此甚至可將圖像分區之數目固定為每列一個。此亦產生若干優勢。第一,對於WPP位元串流,因果性得以保證。第二,解碼器實施方案可假定某一量的並行化為可用,該量亦隨解析度而增加。並且,最後,當以波前次序解碼時,不必打破上下文選擇及預測依賴性兩者,從而產生相對較低的寫碼損失。
然而,迄今為止,變換概念中之所有並行寫碼均無法提供結合使延遲保持較低而達成高壓縮效率。對於WPP概念,亦為如此。在寫碼管線中,片為最小輸送單位,且若干WPP子串流仍必須串行輸送。
發明概要
因此,本發明的目標為提供一種圖像寫碼概念,其允許根據例如波前並行處理以增加的效率(例如通過進一步減小端至端延遲,或藉由減小將要花費之寫碼負擔而增加寫碼效率)來進行並行解碼。
此目標由獨立申請專利範圍項之標的物達成。
本發明之基本發現為,若放棄片據此完全獨立於圖像在該個別地片外部之區域,且至少獨立於在該個別地片外部遠至熵寫碼與之有關的區域而寫碼/解碼之普通片概念而有利於不同模式之片,即例如稱為從屬片之片(其允許跨片邊界之相互依賴性),以及不允許跨片邊界之相互依賴性的稱為正常片之其他片,則可以減小的端至端延遲實現例如波前並行處理之並行處理概念。
本發明之可與第一基本發現組合或個別地使用的進一步基本發現為,若片之開始語法部分用以定位WPP進入點,則可較高效地進行WPP處理概念。
5‧‧‧解碼器
10‧‧‧圖像
12‧‧‧資料串流
14、141~146‧‧‧片區段
16‧‧‧片次序
18‧‧‧語法元素部分
20‧‧‧第一模式
22‧‧‧第二模式
24‧‧‧熵解碼器
26‧‧‧解量化及逆變換模組
27‧‧‧加法器
28‧‧‧預測器/組合器
30‧‧‧寫碼區塊
32‧‧‧寫碼樹區塊/最大寫碼區 塊/代碼樹區塊
34‧‧‧鄰域
36‧‧‧掃描次序
38、40‧‧‧箭頭
42‧‧‧第三模式
50、501、502‧‧‧瓦片
70‧‧‧預測器
72‧‧‧減法器
74‧‧‧變換及量化模組
76‧‧‧熵寫碼器
200、204、206‧‧‧檢查
202、208、210、212、214、300、302、304、306‧‧‧步驟
400‧‧‧開始語法部分
898‧‧‧圖像
900‧‧‧規則片
900a、900b‧‧‧片
902‧‧‧LCU或巨集區塊的列
904a、904b‧‧‧列
906‧‧‧水平分區瓦片
908‧‧‧水平邊界
910‧‧‧垂直邊界
912a~912c‧‧‧瓦片行
914‧‧‧瓦片/WPP子串流
916‧‧‧片段
918‧‧‧寫碼樹區塊
920‧‧‧從屬片
下文關於各圖來描述本申請案之較佳實施例,其中有利實施例為從屬申請專利範圍項之標的。圖中: 圖1展示出示範性地按照圖像中之LCU或巨集區塊之列分割為規則片的圖像;圖2展示出示範性地分為水平分割瓦片之兩個列的圖像;圖3示範性地展示出將並行編碼分區指派給片或網路輸送區段;圖4展示出例示使用瓦片寫碼方法對圖框進行一般分段來獲得最小端至端延遲的示意圖;圖5展示出例示使用WPP寫碼方法對圖框進行示範性分段來獲得最小端至端延遲的示意圖;圖6顯示出例示使用視訊服務之對話之場景的示意性方塊圖;圖7示意性地例示出用具有最小端至端延遲之一般子集對瓦片進行編碼、發射及解碼之可能時間排程;圖8示意性地展示出通常達成端至端延遲之時序排程表;圖9例示出示範性地具有11x9個寫碼樹區塊之圖像,該圖像分割為兩個片;圖10例示出示範性地具有13x8個寫碼樹區塊之圖像,該圖像分割為三個瓦片;圖11展示出序列參數組語法之實例;圖12展示出圖像參數組語法之實例;圖13展示出片標頭語法之實例;圖14例示圖像之用於WPP處理為規則片且用於低延遲 處理為從屬片的分區;圖15展示出圖像參數組語法內之一部分的實例;圖16展示出可能的片標頭語法;圖17示意性地例示出正常片(及從屬片)之寫碼相互依賴性;圖18展示出比較用於瓦片之低延遲輸送的編碼(使用從屬片之波前並行處理)的示意圖;圖19例示出一時序排程表,其例示出在使用利用如圖18之右手側處所示之從屬片的波前並行處理時具有管線低延遲發射的示範性WPP寫碼;圖20展示出例示藉由使用規則片作為錨點之穩健性改良的示意圖;圖21展示出片標頭語法之另一實施例;圖22展示出圖像參數組語法之另一實施例;圖23展示出例示在一左圖像邊界開始之情況下對從屬片之符號機率初始化過程的示意圖;圖24展示處解碼器之示意圖;圖25示意性地展示出解碼器之方塊圖,並且示意性地例示出將圖像分割為寫碼塊及片;圖26示意性地展示出編碼器之方塊圖;圖27示意性地展示出分割為正常及從屬片(此處稱為片區段)之圖像;圖28a及28b示意性地展示出分割為正常及從屬片(此處一方面稱為片區段,且另一方面稱為瓦片)之圖像; 圖29展示出例示使用從屬片之上下文初始化過程的流程圖;圖30展示出例示用於使用從屬片之上下文儲存過程的流程圖;以及圖31示意性地展示出發信WPP進入點之不同可能性。
較佳實施例之詳細說明
在下文中,描述以如今的分別用於達成並行圖像處理及低延遲寫碼的概念的描述來開始。當希望概述兩種能力時,問題出現了。明確而言,如自以下論述將出來,目前所教示之WPP子串流概念以某種方式與具有低延遲的願望衝突,因為有必要藉由將WPP子串流分組為一個片來傳達該WPP子串流。以下實施例提出並行處理概念,例如WPP概念,其藉由擴大片概念,即藉由引入另一類型的片(後面稱為從屬片)來適用於需要更少延遲的應用。
最小化自擷取至顯示的端至端視訊延遲為諸如視訊會議等應用中的主要目的之一。
用於數位視訊發射之信號處理鏈由相機、擷取裝置、編碼器、封裝、發射、解多工器、解碼器、渲染器(renderer)及顯示器組成。此等級中之每一者均藉由在影像資料串行發射至後續級之前緩衝該影像資料來為端至端延遲作貢獻。
一些應用要求最小化此延遲,例如對有害區域中之對象的遠程處置,而無需直接看到所處置之對象,或微 創手術。甚至較短延遲均可導致恰當處置之嚴重困難,或甚至導致災難性的錯誤。
在許多情況下,在處理級內緩衝整個視圖框,例如來允許框內處理。一些級搜集資料,以便形成可進送至下一級的封包。一般而言,存在因本地處理之要求而導致的延遲之下部邊界。下文較詳細地針對每一個別級來分析此邊界。
相機內的處理不一定需要框內信號處理,因此最小延遲由感測器之整合時間給出,該整合時間受框速率以及硬體製造商之一些設計選擇限制。相機輸出通常與掃描次序有關,掃描次序通常開始左上角中的處理,移至右上角,且繼續逐行至右下角。因此,在所有資料均自感測器傳送至相機輸出之前,花費約一個圖框持續時間。
擷取裝置可在接收之後立即進送相機資料;然而,其將通常緩衝一些資料並產生叢發,以便最佳化對記憶體或儲存裝置之資料存取。此外,相機/擷取器與電腦之記憶體之間的連接通常限制將所擷取之影像資料進送至記憶體以供進一步處理(編碼)的位元率。通常,相機經由USB 2.0或很快與USB 3.0連接,USB 2.0或USB 3.0將總是包含影像資料向編碼器的部分輸送。此舉限制了極低延遲場景中編碼器側上的可並行化性,亦即當資料變為自相機可用時,編碼器將嘗試盡可能快地開始編碼,例如以光柵掃描次序自影像之頂部至底部。
在編碼器中,存在一些自由度,其允許依據某一 視訊保真度所需之資料速率來權衡編碼效率,來減少處理延遲。
編碼器使用已經發送之資料來預測隨後將要編碼之影像。一般而言,可用比無預測之情況下所需之位元少的位元來編碼實際影像與預測之間的差異。此預測值需要在解碼器處可用,因此預測為基於同一影像之先前解碼部分(框內預測),或基於早先已經處理之其他影像(框間預測)。預HEVC視訊編碼標準僅使用上方或同一線中但在左側的影像(其先前已編碼)的部分來進行框內預測、運動向量預測及熵寫碼(CABAC)。
除預測結構之最佳化之外,可考慮並行處理之影響。並行處理要求識別可獨立處理之圖像區域。出於實踐原因,選擇諸如水平或垂直矩形之連續區,其通常稱為「瓦片」。在低延遲約束的情況下,彼等區應允許自擷取器傳入至記憶體的盡可能快的並行化寫碼。假定光柵掃描記憶體傳送,原始資料之垂直分區有意義,以便立即開始編碼。在此等瓦片內,其將影像分為垂直分區(參看下文的圖),框內預測、運動向量預測及熵寫碼(CABAC)可引起合理的寫碼效率。為了最小化延遲,圖像之僅部分(自頂部開始)將傳送至編碼器之圖框記憶體,且並行處理應在垂直瓦片中開始。
允許並行處理之另一方式為在規則片內使用WPP,規則片將與瓦片(包含於單一片中的一「列」瓦片)進行比較。該瓦片內的資料可亦使用該片內的WPP子串流 來並行編碼。圖3/1中以實例形式展示將圖像分為片900及瓦片/WPP子串流914。
因此,圖3展示出將經並行編碼之分區(例如906或914)指派給片或網路輸送區段(單一網路封包或多個網路900封包)。
在發射之前或在編碼過程期間將經編碼資料包封至網路抽象化層(NAL)單元中(如H.264或HEVC中所界定)將某一標頭添加至資料區塊,此舉允許識別每一區塊,並在適用情況下對區塊進行重新排序。在標準情況下,不需要額外發信,因為寫碼元素之次序總是為解碼次序,其為瓦片或一般寫碼片段之位置為給定的隱含指派。
若並行處理被視為具有額外輸送層用於低延遲並行輸送,亦即輸送層可對用於瓦片之圖像分區進行重新排序,以便允許低延遲發射,則意味著在片段被編碼時將其發送出,如圖4中所示。彼等片段亦可為非完全編碼片,其可為片之子集,或可包含於從屬片中。
在創建額外片段之情況下,存在效率(其對於大資料區塊將為最高,因為標頭資訊為添加恆定數目個位元組)與延遲之間的折衷,因為並行編碼器之大資料區塊在發射之前將需要緩衝。若垂直瓦片906之經編碼表示被分為若干個片段916(其在片段一完成編碼時就發射),則可減小總延遲。可依據固定影像區(例如巨集區塊)、LCU或依據最大資料來判定每一片段之大小,如圖4中所示。
因此,圖4展示出使用瓦片寫碼方法對圖框進行 一般分段來獲得最小端至端延遲。
類似地,圖5展示出使用WPP寫碼方法對圖框進行分段來獲得最小端至端延遲。
該發射可增加進一步延遲,例如若應用以額外區塊為導向之處理,則例如正向錯誤校正碼增加發射之穩健性。此外,網路基礎結構(路由器等)或實體鏈接可增加延遲,此通常被稱為連接之潛時。除潛時之外,發射位元率決定在如圖6中所示的使用視訊服務之對話中將資料自a方傳送至b方的時間(延遲)。
若無序發射經編碼資料區塊,則必須考慮重新排序延遲。
資料單元一到達,就可開始解碼,假定必須在此之前解碼的其他資料單元為可用。
在瓦片之情況下,瓦片之間無依賴性,因此可立即解碼瓦片。若片段已產生為具有瓦片,例如每一片段若干個單獨片,如圖4中所示,則片段一分別被編碼(其所含有的LCU或CU已被編碼),就可直接輸送該等片段。
渲染器組合併行解碼引擎之輸出,並將經組合圖像逐行進送至顯示器。
顯示器不一定添加任何延遲,但在實踐中,可在影像資料實際顯示之前,可進行某一框內處理。此由硬體製造商之設計選擇決定。
總之,可影響級編碼、封裝、發射及解碼,以便達成最小端至端延遲。若使用並行處理、瓦片及瓦片內的 分段,則與如圖8中所示在此等級中之每一者處增加約一圖框延遲的通常使用之處理鏈相比,總延遲可顯著減小,如圖7中所示。
明確而言,雖然圖7展示以最小端至端延遲對具有一般子集之瓦片的編碼、發射及解碼,但圖8例示出通常達成之端至端延遲。
HEVC允許使用片分區、瓦片分區,且以如下方式。
瓦片:共同出現於一個行及一個列中的整數數目個樹區塊,其在瓦片之樹區塊光柵掃描中連續排序。將每一圖像分為若干瓦片為分區。圖像中之瓦片在該圖像之瓦片光柵掃描中連續排序。儘管片含有在瓦片之樹區塊光柵掃描中連續的樹區塊,但此等樹區塊在圖像之樹區塊光柵掃描中不一定為連續的。
片:光柵掃描中連續排序的整數數目個樹區塊。將每一圖像分為若干片為分區。自片中的第一樹區塊地址(如在片標頭中表示)得出樹區塊地址。
光柵掃描:將矩形二維圖案映射至一維圖案,使得該一維圖案中之第一條目來自自左至右掃描之二維圖案的第一頂部列,類似地接以該圖案之第二、第三等列(下降),其各自為自左至右掃描。
樹區塊:具有三個樣本陣列之圖像的亮度樣本之NxN區塊以及色度樣本之兩個對應區塊,或單色圖像或使用三個單獨色彩平面寫碼之圖像的NxN樣本區塊。將片分 為若干樹區塊為分區。
分區:將一組分為若干子集,使得該組之每一元素正好為該等子集中之一者。
四元樹:其中母節點可分為四個子節點的樹。子節點可成為再次分為四個子節點的母節點。
在下文中,闡釋圖像、片及瓦片之空間細分。明確地說,以下描述指定圖像如何分割為片、瓦片及寫碼樹區塊。將圖像分為片及瓦片。片為寫碼樹區塊序列。同樣地,瓦片為寫碼樹區塊序列。
以寫碼樹區塊為單位來處理樣本。樣本中之每一樹區塊在寬度及高度上的亮度陣列大小為Ctb大小(CtbSize)。每一寫碼樹區塊之色度陣列的寬度及高度分別為Ctb寬度C(CtbWidthC)及Ctb高度C(CtbHeightC)。舉例而言,可將圖像分為兩個片,如下一圖中所示。作為另一實例,可將圖像分為三個瓦片,如接下來第二個圖中所示。
不同於片,瓦片總是為矩形,且總是在寫碼樹區塊光柵掃描中含有整數數目個寫碼樹區塊。瓦片可由一個以上片中所含有的寫碼樹區塊組成。類似地,片可包括一個以上瓦片中所含有的寫碼樹區塊。
圖9例示出分割為兩個片900a、900b的具有11乘9個寫碼樹區塊918的圖像898。
圖10例示出分割為三個瓦片的具有13乘8個寫碼樹區塊918的圖像。
為每一寫碼898樹區塊918指派一分區信令,以識 別區塊大小進行框內或框間預測且進行變換寫碼。分區為遞歸四元樹分區。四元樹之根部與寫碼樹區塊相關聯。分裂四元樹,直至達到葉為止,該葉稱為寫碼區塊。寫碼區塊為兩個樹(預測樹及變換樹)之根節點。
預測樹指定預測區塊之位置及大小。預測區塊及相關聯的預測資料稱為預測單元。
圖11展示出示範性序列參數組RBSP語法。
變換樹指定變換區塊之位置及大小。變換區塊及相關聯的變換資料稱為變換單元。
亮度及色度之分裂資訊對於預測樹來說為相同的,且對於變換樹可或可不為相同的。
寫碼區塊、相關聯的寫碼資料以及相關聯的預測及變換單元一起形成寫碼單元。
將寫碼樹區塊光柵次序之寫碼樹區塊地址轉換為瓦片掃描次序的過程可為如下:此過程之輸出為
- 陣列CtbAddrTS[ctbAddrRS],具有在0至PicHeightInCtbs*PicWidthInCtbs-1(包含0及PicHeightInCtbs*PicWidthInCtbs-1)中的ctbAddrRS。
- 陣列TileId[ctbAddrTS],具有在0至PicHeightInCtbs*PicWidthInCtbs-1(包含0及PicHeightInCtbs*PicWidthInCtbs-1)中的ctbAddrTS。
陣列CtbAddrTS[]如下得出:
陣列TileId[]如下得出:
圖11、12及13中展示對應的示範性語法,其中圖12具有示範性圖像參數組RBSP語法。圖13展示示範性片標頭語法。
在語法實例中,以下語義可適用:等於1的entropy_slice_flag指定推斷不存在的片標頭語法元素的值等於前一片中的片標頭語法元素的值,其中將前一片界定為含有具有位置(SliceCtbAddrRS-1)的寫碼樹區塊的片。當SliceCtbAddrRS等於0時,entropy_slice_flag將等於0。
等於0的tiles_or_entropy_coding_sync_idc指定經寫碼視訊序列中的每一圖像中僅存在一個瓦片,且在解碼一列寫碼樹區塊之第一寫碼樹區塊之前,不調用上下文變數之特定同步過程。
等於1的tiles_or_entropy_coding_sync_idc指定經寫碼視訊序列中的每一圖像中可存在一個以上瓦片,且在解碼 一列寫碼樹區塊之第一寫碼樹區塊之前,不調用上下文變數之特定同步過程。
等於2的tiles_or_entropy_coding_sync_idc指定經寫碼視訊序列中之每一圖像中僅存在一個瓦片,在解碼一列寫碼樹區塊之第一寫碼樹區塊之前,調用上下文變數之特定同步過程,且在解碼一列寫碼樹區塊之兩個寫碼樹區塊之後,調用上下文變數之特定記誦過程。
tiles_or_entropy_coding_sync_idc的值將在0至2(包含0及2)的範圍內。
num_tile_columns_minus1加1指定分割圖像之瓦片行的數目。
num_tile_columns_minus1加1指定分割圖像之瓦片列的數目。
當num_tile_columns_minus1等於0時,num_tile_rows_minus1將不等於0。
對於每一片及瓦片,將滿足以下條件中的一者或兩者:
- 片中之所有經寫碼區塊均屬於同一瓦片。
- 瓦片中之所有經寫碼區塊均屬於同一片。
注意-在同一圖像內,可存在含有多個瓦片之片以及含有多個片之瓦片。
等於1的uniform_spacing_flag指定行邊界且同樣地列邊界在圖像上均勻地分佈。等於0的uniform_spacing_flag指定行邊界且同樣地列邊界不在圖像 上均勻地分佈,而是使用語法元素column_width[i]及row_height[i]來明確地發信。
column_width[i]指定以寫碼樹區塊為單位之第i個瓦片行的寬度。
row_height[i]指定以寫碼樹區塊為單位之第i個瓦片列的高度。
如下得出行寬度[i]的值,其指定以寫碼樹區塊為單位之第i個瓦片行的寬度,以及ColumnWidthInLumaSamples[i]的值,其指定以亮度樣本為單位的第i個瓦片行的寬度:
如下得出RowHeight[i]的值,其指定以寫碼樹區塊為單位之第i個瓦片列的高度:
如下得出ColBd[i]的值,其指定以寫碼樹區塊為單位之第i個瓦片行的左行邊界的位置:
如下得出RowBd[i]的值,其指定以寫碼樹區塊為 單位之第i個瓦片列的頂部列邊界的位置:
當tiles_or_entropy_coding_sync_idc等於2時,num_substreams_minus1加1指定包含於片中之子集的最大數目。當不存在時,推斷num_substreams_minus1的值等於0。
num_entry_point_offsets指定片標頭中的entry_point_offset[i]語法元素的數目。當tiles_or_entropy_coding_sync_idc等於1時,num_entry_point_offsets的值將在0至(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1(包含0及(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1)的範圍內。當tiles_or_entropy_coding_sync_idc等於2時,num_entry_point_offsets的值將在0至num_substreams_minus1(包含o及num_substreams_minus1)的範圍內。當不存在時,推斷num_entry_point_offsets的值等於0。
offset_len_minus1加1指定entry_point_offset[i]語法元素之以位元為單位的長度。
entry_point_offset[i]指定以位元組為單位的第i個進入點偏移,且將由offset_len_minus1加1個位元表示。經寫碼片NAL單元由num_entry_point_offsets+1個子集組成,其中子集索引值的範圍為自0至 num_entry_point_offsets,包含0及num_entry_point_offsets。子集0由經寫碼片NAL單元之位元組0至entry_point_offset[0]-1(包含0及entry_point_offset[0]-1)組成,子集k(其中k在1至num_entry_point_offsets-1(包含1及num_entry_point_offsets-1)的範圍內)由經寫碼片NAL單元之位元組entry_point_offset[k-1]至entry_point_offset[k]+entry_point_offset[k-1]-1(包含entry_point_offset[k-1]及entry_point_offset[k]+entry_point_offset[k-1]-)組成,且最後一個子集(具有等於num_entry_point_offsets的子集索引)由經寫碼片NAL單元之其餘位元組組成。
注意-經寫碼片NAL單元之NAL單元標頭及片標頭總是包含於子集0中。
當tiles_or_entropy_coding_sync_idc等於1且num_entry_point_offsets大於0時,每一子集將含有一個或多個完整瓦片之所有經寫碼位元,且子集之數目將等於或小於片中之瓦片的數目。
當tiles_or_entropy_coding_sync_idc等於2且num_entry_point_offsets大於0時,對於所有可能k個值中之每一者,子集k將含有將在當前位元串流指針k之初始化過程期間使用的所有位元。
關於片資料語義,以下可適用。
等於0的end_of_slice_flag指定片中隨後為另一 巨集區塊。等於1的end_of_slice_flag指定片之結尾,且後面無進一步巨集區塊。
entry_point_marker_two_3bytes為等於0x000002之3個位元組的固定值序列。此語法元素稱為條目標記前綴。
tile_idx_minus_1指定光柵掃描次序中之TileID。圖像中之第一瓦片將具有TileID 0。tile_idx_minus_1的值將在0至(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1的範圍內。
對片資料之CABAC剖析過程可為如下:當以描述符ae(v)剖析語法元素時,調用此過程。
此過程之輸入為對語法元素之值以及先前剖析之語法元素之值的請求。
此過程之輸出為語法元素之值。
當開始剖析片之片資料時,調用CABAC剖析過程之初始化過程。當tiles_or_entropy_coding_sync_idc等於2且num_substreams_minus1大於0時,如下得出具有指定將用於稍後的當前位元串流指針導出之位元串流指針表的num_substreams_minus1+1個條目的映射表BitStreamTable(位元串流表)。
- 使BitStreamTable[0]初始化以含有位元串流指針。
- 對於大於0且小於num_substreams_minus1+1的所有索引i,BitStreamTable[i]含有指向BitStreamTable[i-1] 之後的entry_point_offset[i]個位元組的位元串流指針。
- 將當前位元串流指針設定為BitStreamTable[0]。
例如如下使用當前寫碼樹區塊之左上亮度樣本之位置(x0,y0)來得出含有空間相鄰區塊T之寫碼樹區塊的最小寫碼區塊地址ctbMinCbAddrT。
x=x0+2<<Log2CtbSize-1
y=y0-1
ctbMinCbAddrT=MinCbAddrZS[x>>Log2MinCbSize][y>>Log2MinCbSize]
藉由調用以ctbMinCbAddrT作為輸入適當的寫碼區塊可用性導出過程來獲得變數availableFlagT。
當開始剖析寫碼樹,並且tiles_or_entropy_coding_sync_idc等於2,且num_substreams_minus1大於0時,以下適用。
- 若CtbAddrRS%PicWidthInCtbs等於0,則以下適用。
- 當availableFlagT等於1時,調用CABAC剖析過程之同步過程,如分單元「上下文變數之同步過程」中所指定。
- 在算術解碼引擎之初始化過程之後,調用終止之前的對二元決策的解碼過程。
- 設定當前位元串流指針,來指示具有如下得出之索引i的BitStreamTable[i]。
i=(CtbAddrRS/PicWidthInCtbs)%(num_substreams_minus1+1)
- 否則,若CtbAddrRS%PicWidthInCtbs等於2,則調用CABAC剖析過程之記誦過程,如分單元「上下文變數之記誦過程」中所指定。
初始化過程可為如下:此過程之輸出為經初始化的CABAC內部變數。
當開始剖析片之片資料時,或當開始剖析寫碼樹之資料且寫碼樹為瓦片中的第一寫碼樹時,調用其特殊過程。
上下文變數之記誦過程可為如下:此過程之輸入為由ctxIdx索引之CABAC上下文變數。
此過程之輸出為變數TableStateSync及TableMPSSync,其含有指派給除片結尾旗標之外的語法元素的上下文變數之初始化過程中所使用的變數m及n的值。
對於每一上下文變數,使表TableStateSync及TableMPSSync之對應條目n及m初始化為對應的pStateIdx及valMPS。
上下文變數之同步過程可為如下:此過程之輸入為變數TableStateSync及TableMPSSync,其含有指派給除片結尾旗標之外的語法元素的上下文變數之記誦過程中所使用的變數n及m的值。
此過程之輸出為由ctxIdx索引之CABAC上下文變數。
對於每一上下文變數,使對應的上下文變數pStateIdx及valMPS初始化為表TableStateSync及TableMPSSync之對應條目n及m。
在下文中,闡釋使用WPP之低延遲寫碼及輸送。明確而言,以下論述揭示如圖7中所描述的低延遲輸送如何亦可應用於WPP。
首先,重要的是可在整個圖像完成之前,發送該圖像的子集。通常,此可使用片來達成,如圖5中已經展示。
為了減小與瓦片相比之延遲,如以下圖中所示,需要按照LCU的列應用單一WPP子串流,且進一步允許彼等列中之每一者的單獨發射。為了使寫碼效率保持較高,不可使用每一列/子串流的片。因此,在下文中,引入如下一部分中所界定之所謂的從屬片。舉例而言,此片不具有完整HEVC片標頭之所有欄位,但具有用於熵片之欄位。此外,可存在開關,以斷開列之間的CABAC的中斷。在WPP之情況下,將允許使用CABAC上下文(圖14中的箭頭)及列之預測,以保持WPP在瓦片上的寫碼效率增益。
明確而言,圖14例示用於WPP為規則片900(稱為SL)且用於低延遲處理為從屬片(OS)920的圖像10。
目前,即將出現的HEVC標準提供兩種類型的依據片的分割。存在規則(正常)片及熵片。規則片為除某一依賴性之外完全獨立的圖像分區,其可歸因於片邊界上的解塊濾波過程而可用。熵片亦為獨立的,但僅在熵寫碼方面獨立。圖14之理念為概括切片概念。因此,即將出現的HEVC標準應提供兩種一般類型的片:獨立(規則)或從屬。因此,引入一種新類型的片,從屬片。
從屬片為對先前片具有依賴性的片。依賴性為可 在熵解碼過程及/或像素重構過程中的片之間利用的特定資料。
在圖14中,示範性地呈現從屬片之概念。舉例而言,圖像總是以規則片開始。注意,在此概念中,規則片行為稍稍概念。通常,在如H264/AVC或HEVC之標準中,規則片為完全獨立的分區,且除用於解塊濾波過程之一些資料外,在解碼之後不必保持任何資料。但即將出現的從屬片920之處理僅藉由參考以上片(此處為第一列中):規則片900之資料而為可能的。為了建立此,規則片900應保持最後一個CU列之資料。此資料包括:-CABAC寫碼引擎資料(一個CU之上下文模型狀態,從屬片之熵解碼過程可自其初始化),-從屬CU之規則CABAC解碼過程之CU的所有經解碼語法元素,-框內及運動向量預測之資料。
因此,每一從屬片920將進行同一程序一保持同一圖像中之即將出現的從屬片的資料。
實際上,此等額外步驟不應成為問題,因為一般而言總是迫使解碼過程儲存如語法元素等一些資料。
在以下部分中,呈現達成從屬片之概念所需的對HEVC標準語法之可能改變。
舉例而言,圖5例示出圖像參數組RBSP語法中之可能改變。
用於從屬片之圖像參數組語義可為如下: 等於1的dependent_slices_present_flag指定圖像含有從屬片,且每一(規則或從屬)片之解碼過程將儲存熵解碼之狀態以及可為從屬片(其亦可在規則片之後)之下一片的框內及運動向量預測的資料。以下從屬片可參考該所儲存之資料。
圖16展示出具有相對於HEVC之當前狀態的改變的可能slice_header語法。
等於1的dependent_slice_flag指定推斷不存在的片標頭語法元素的值等於前一(規則)片中的片標頭語法元素的值,其中將前一片界定為含有具有位置(SliceCtbAddrRS-1)的寫碼樹區塊的片。當SliceCtbAddrRS等於0時,dependent_slice_flag將等於0。
等於1的no_cabac_reset_flag指定自先前解碼之片(且不具有初始值)之所保存狀態的CABAC初始化。否則,亦即若no_cabac_reset_flag等於1,則指定獨立於先前經解碼片(亦即具有初始值)之任何狀態的CABAC初始化。
等於1的last_ctb_cabac_init_flag指定自(例如用於總是等於1之瓦片的)先前解碼之片之最後寫碼之樹區塊的所保存狀態的CABAC初始化。否則(等於0),若當前片之第一寫碼之樹區塊為列中之第一經寫碼樹區塊(亦即,WPP模式),則自先前解碼之片的最後(相鄰)ctb列之第二經寫碼樹區塊之所保存狀態參考初始化資料,否則自先前解碼之片的最後經寫碼樹區塊的所保存狀態執行CABAC初始化。
下文提供從屬片與其他分區方案(資訊性)的比 較。
在圖17中,展示正常片與從屬片之間的差異。
如相對於圖18所例示的從屬片(DS)中之WPP子串流的可能寫碼及發射比較瓦片(左)與WPP/DS(右)之低延遲輸送的編碼。圖18中的粗體連續繪製交叉展示兩種方法的時間的同一時間點,假定WPP列之編碼與單一瓦片之編碼花費相同時間。歸因於寫碼依賴性,在所有瓦片均已編碼之後,僅WPP之第一線為就緒。但一旦第一列被編碼,就使用從屬片方法允許WPP方法來發送出該第一列。此不同於早先的WPP子串流指派,針對WPP將「子串流」界定為將要由同一解碼器執行緒(亦即,同一核/處理器)進行WPP解碼的片的CU列的序連連接。儘管每列及每熵片子串流在以前亦將可能,但熵片破壞熵寫碼依賴性,且因此具有較低的寫碼效率,亦即喪失WPP效率增益。
另外,在假定如圖19中所示的發射的情況下,兩種方法之間的延遲差異可為相當低。明確而言,圖19說明具有管線化低延遲發射的WPP寫碼。
假定圖18中之WPP方法中之DS #1.1的後兩個CU的編碼不花費比第一列SL #1之發射長的時間,在低延遲情況下,瓦片與WPP之間不存在差異。但WP/DS之寫碼效率勝過瓦片概念。
為了增加WPP低延遲模式之穩健性,圖20例示出穩健性改良係藉由使用規則片(RS)作為錨點來達成。在圖20所示的圖像中,(規則)片(RS)之後為從屬片(DS)。此處, (規則)片充當錨點以打破對先前片之依賴性,因此在(規則)片之此插入點處提供較多穩健性。原則上,此無論自什麼角度均與插入(規則)片相同。
亦可如下實施從屬片之概念。
此處,圖21展示可能的片標頭語法。
片標頭語義如下:等於1的dependent_slice_flag指定推斷不存在的每一片標頭語法元素的值等於含有寫碼樹區塊地址為SliceCtbAddrRS-1之寫碼樹區塊的先前片中之對應片標頭語法元素的值。當不存在時,推斷dependent_slice_flag的值等於0。當SliceCtbAddrRS等於0時,dependent_slice_flag的值將等於0。
slice_address指定片於其中開始的片粒度解析度中的地址。slice_address語法元素之長度為(Ceil(Log2(PicWidthInCtbs*PicHeightInCtbs))+SliceGranularity)個位元。
如下得出指定片在其中以寫碼樹區塊光柵掃描次序開始的寫碼樹區塊。
SliceCtbAddrRS=(slice_address>>SliceGranularity)
如下得出指定片中之第一寫碼區塊在z形掃描次序中的最小寫碼區塊粒度中的地址的變數SliceCbAddrZS。
SliceCbAddrZS=slice_address
<<((log2_diff_max_min_coding_block_size-SliceGranularity)<<1)
片解碼以片開始座標處的可能最大寫碼單元或換言之CTU開始。
first_slice_in_pic_flag指示該片是否為圖像之第一片。若first_slice_in_pic_flag等於1,則將SliceCbAddrZS及SliceCtbAddrRS均設定為0,且解碼以圖像中之第一寫碼樹區塊開始。
pic_parameter_set_id指定使用中的圖像參數組。pic_parameter_set_id的值將在0至255(包含0及255)的範圍內。
num_entry_point_offsets指定片標頭中的entry_point_offset[i]語法元素的數目。當tiles_or_entropy_coding_sync_idc等於1時,num_entry_point_offsets的值將在0至(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1(包含0及(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1)的範圍內。當tiles_or_entropy_coding_sync_idc等於2時,num_entry_point_offsets的值將在0至PicHeightInCtbs-1(包含0及PicHeightInCtbs-1)的範圍內。當不存在時,推斷num_entry_point_offsets的值等於0。
offset_len_minus1加1指定entry_point_offset[i]語法元素之以位元為單位的長度。
entry_point_offset[i]指定以位元組為單位的第i個進入點偏移,且將由offset_len_minus1加1個位元表示。 片標頭之後的經寫碼片資料由num_entry_point_offsets+1個子集組成,其中子集索引值的範圍為自0至num_entry_point_offsets,包含0及num_entry_point_offsets。子集0由經寫碼片資料之位元組0至entry_point_offset[0]-1(包含0及entry_point_offset[0]-1)組成,子集k(其中k在1至num_entry_point_offsets-1(包含1及num_entry_point_offsets-1)的範圍內)由經寫碼片資料之位元組entry_point_offset[k-1]至entry_point_offset[k]+entry_point_offset[k-1]-1(包含entry_point_offset[k-1]及entry_point_offset[k]+entry_point_offset[k-1]-1)組成,且最後一個子集(具有等於num_entry_point_offsets的子集索引)由經寫碼片資料之其餘位元組組成。
當tiles_or_entropy_coding_sync_idc等於1,且num_entry_point_offsets大於0時,每一子集將含有恰好一個瓦片之所有經寫碼位元,且子集之數目(亦即,num_entry_point_offsets+1的值)將等於或小於片中之瓦片的數目。
注意,當tiles_or_entropy_coding_sync_idc等於1時,每一片必須包含一個瓦片之子集(在此情況下,進入點之發信為不必要的),或完整瓦片之整數數目。
當tiles_or_entropy_coding_sync_idc等於2且num_entry_point_offsets大於0時,每一子集k(其中k在0至num_entry_point_offsets-1的範圍內,包含0及 num_entry_point_offsets-1)將含有正好一列寫碼樹區塊之所有經寫碼位元,最後一個子集(具有等於num_entry_point_offsets的子集索引)將含有包含於片中的其餘寫碼區塊的所有經寫碼位元,其中其餘寫碼區塊由正好一列寫碼樹區塊或一列寫碼樹區塊之子集組成,且子集之數目(亦即,num_entry_point_offsets+1的值)將等於片中之寫碼樹區塊之列的數目,其中亦對片中之一列寫碼樹區塊的子集進行計數。
注意,當tiles_or_entropy_coding_sync_idc等於2時,片可包含若干列寫碼樹區塊以及一列寫碼樹區塊之子集。舉例而言,若片包含兩個半列寫碼樹區塊,則子集的數目(亦即,num_entry_point_offsets+1的值)將等於3。
可如圖22中所示選擇對應的圖像參數組RBSP語法。
圖像參數組RBSP語義可為如下:等於1的dependent_slice_enabled_flag指定參考圖像參數組之經寫碼圖像之片標頭中語法元素dependent_slice_flag的存在。等於0的dependent_slice_enabled_flag指定參考圖像參數組之經寫碼圖像之片標頭中語法元素dependent_slice_flag的不存在。當tiles_or_entropy_coding_sync_idc等於3時,dependent_slice_enabled_flag的值將等於1。
等於0的tiles_or_entropy_coding_sync_idc指定參考圖像參數組之每一圖像中將僅存在一個瓦片,在解碼參考該 圖像參數組之每一圖像中之一列寫碼樹區塊之第一寫碼樹區塊之前,將不調用對上下文變數的特定同步過程,且參考該圖像參數組之經寫碼圖像之cabac_independent_flag及dependent_slice_flag的值將不兩者均等於1。
注意,當cabac_independent_flag及depedent_slice_flag兩者對於一片均等於1時,該片為熵片。
等於1的tiles_or_entropy_coding_sync_idc指定參考圖像參數組之每一圖像中可存在一個以上瓦片,在解碼參考該圖像參數組之每一圖像中之一列寫碼樹區塊之第一寫碼樹區塊之前,將不調用對上下文變數的特定同步過程,且參考該圖像參數組之經寫碼圖像之cabac_independent_flag及dependent_slice_flag的值將不兩者均等於1。
等於2的tiles_or_entropy_coding_sync_idc指定參考圖像參數組之每一圖像中將僅存在一個瓦片,在解碼參考該圖像參數組之每一圖像中之一列寫碼樹區塊之第一寫碼樹區塊之前,將調用對上下文變數之特定同步過程,且在解碼參考該圖像參數組之每一圖像中之一列寫碼樹區塊之兩個寫碼樹區塊之後,將調用對上下文變數之特定記誦過程,且參考該圖像參數組之經寫碼圖像之cabac_independent_flag及dependent_slice_flag的值將不兩者均等於1。
等於3的tiles_or_entropy_coding_sync_idc指定參考圖像參數組之每一圖像中將僅存在一個瓦片,在解碼參 考該圖像參數組之每一圖像中之一列寫碼樹區塊之第一寫碼樹區塊之前,將不調用對上下文變數的特定同步過程,且參考該圖像參數組之經寫碼圖像之cabac_independent_flag及dependent_slice_flag的值可兩者均等於1。
當dependent_slice_enabled_flag將等於0時,tiles_or_entropy_coding_sync_idc將不等於3。
位元串流一致性的要求為tiles_or_entropy_coding_sync_idc的值對於在經寫碼視訊序列內啟動之所有圖像參數組均將為相同。
對於參考圖像參數組的每一片,當tiles_or_entropy_coding_sync_idc等於2且片中之第一寫碼區塊並非一列寫碼樹區塊之第一寫碼樹區塊中的第一寫碼區塊時,片中之最後一個寫碼區塊將屬於與該片中之第一寫碼區塊相同的寫碼樹區塊列。
num_tile_columns_minus1加1指定分割圖像之瓦片行的數目。
num_tile_columns_minus1加1指定分割圖像之瓦片行的數目。
當num_tile_columns_minus1等於0時,num_tile_rows_minus1將不等於0。等於1的uniform_spacing_flag指定行邊界且同樣地列邊界在圖像上均勻地分佈。等於0的uniform_spacing_flag指定行邊界且同樣地列邊界不在圖像上均勻地分佈,而是使用語法元素 column_width[i]及row_height[i]來明確地發信。
column_width[i]指定以寫碼樹區塊為單位的第i個瓦片行的寬度。
row_height[i]指定以寫碼樹區塊為單位之第i個瓦片列的高度。
向量colWidth[i]指定以CTB為單位的第i個瓦片行的寬度,其中行i的範圍為0至num_tile_columns_minus1,包含0及num_tile_columns_minus1。
向量CtbAddrRStoTS[ctbAddrRS]指定自光柵掃描次序之CTB地址至瓦片掃描次序之CTB地址的轉換,其中索引ctbAddrRS的範圍自0至(picHeightInCtbs*picWidthInCtbs)-1,包含0及(picHeightInCtbs*picWidthInCtbs)-1。
向量CtbAddrTStoRS[ctbAddrTS]指定自瓦片掃描次序之CTB地址至光柵掃描次序之CTB地址的轉換,其中索引ctbAddrTS的範圍自0至(picHeightInCtbs*picWidthInCtbs)-1,包含0及(picHeightInCtbs*picWidthInCtbs)-1。
向量TileId[ctbAddrTS]指定自瓦片掃描次序之CTB地址至瓦片id的轉換,其中ctbAddrTS的範圍自0至(picHeightInCtbs*picWidthInCtbs)-1,包含0及(picHeightInCtbs*picWidthInCtbs)-1。
藉由調用以PicHeightInCtbs及PicWidthInCtbs作為輸入且輸出被指派給colWidth、CtbAddrRStoTS及TileId 之CTB光柵及瓦片掃描轉換過程來得出colWidth、CtbAddrRStoTS、CtbAddrTStoRS及TileId的值。
將ColumnWidthInLumaSamples[i]的值(其指定以亮度樣本為單位的第i個瓦片行的寬度),設定為等於colWidth[i]<<Log2CtbSize。
藉由調用以Log2MinCbSize、Log2CtbSize、PicHeightInCtbs、PicWidthInCtbs及向量CtbAddrRStoTS作為輸入,且輸出被指派給MinCbAddrZS的Z形掃描次序陣列初始化過程來得出指定自以最小CB為單位的位置(x,y)至z形掃描次序的最小CB地址的轉換的陣列MinCbAddrZS[x][y],其中x的範圍自0至picWidthInMinCbs-1,包含0及picWidthInMinCbs-1,且y的範圍自0至picHeightInMinCbs-1,包含0及picHeightInMinCbs-1。
等於1的loop_filter_across_tiles_enabled_flag指定越過瓦片邊界執行迴路內濾波操作。等於0的loop_filter_across_tiles_enabled_flag指定不越過瓦片邊界執行迴路內濾波操作。迴路內濾波操作包含解塊濾波器、樣本適應偏移以及適應迴路濾波器操作。當不存在時,推斷loop_filter_across_tiles_enabled_flag的值等於1。
等於1的cabac_independent_flag指定片中之寫碼區塊的CABAC解碼獨立於先前解碼之片的任何狀態。等於0的cabac_independent_flag指定片中之寫碼區塊的CABAC解碼依賴於先前解碼之片的狀態。當不存在時,推 斷cabac_independent_flag的值等於0。
具有最小寫碼區塊地址的寫碼區塊的可用性的導出過程可為如下:此過程的輸入為
- z形掃描次序中的最小寫碼區塊地址minCbAddrZS
- z形掃描次序中的當前最小寫碼區塊地址currMinCBAddrZS
此過程之輸出為具有z形掃描次序中的最小寫碼區塊地址cbAddrZS的寫碼區塊的可用性cbAvailable。
注意1,當調用此過程時,判定可用性之意義。
注意2,任何寫碼區塊(不管其大小如何)均與最小寫碼區塊地址相關聯,該地址為具有z形掃描次序中之最小寫碼區塊大小的寫碼區塊的地址。
- 若以下條件中之一或多者為真,則將cbAvailable設定為假。
- minCbAddrZS小於0
- minCbAddrZS大於currMinCBAddrZS
- 具有最小寫碼區塊地址minCbAddrZS的寫碼區塊屬於與具有當前最小寫碼區塊地址currMinCBAddrZS之寫碼區塊不同的片,且含有具有當前最小寫碼區塊地址currMinCBAddrZS之寫碼區塊的片的dependent_slice_flag等於0。
- 具有最小寫碼區塊地址minCbAddrZS的寫碼區塊包含於與具有當前最小寫碼區塊地址 currMinCBAddrZS的寫碼區塊不同的瓦片中。
- 否則,將cbAvailable設定為真。
對片資料之CABAC剖析過程可為如下:當以描述符ae(v)剖析某些語法元素時,調用此過程。
此過程之輸入為對語法元素之值以及先前剖析之語法元素之值的請求。
此過程之輸出為語法元素之值。
當開始剖析片之片資料時,調用CABAC剖析過程之初始化過程。
圖23例示出如何使用空間相鄰者T來調用相對於當前寫碼樹區塊(資訊性)的寫碼樹區塊可用性導出過程。
如下使用當前寫碼樹區塊之左上亮度樣本之位置(x0,y0)來得出含有空間相鄰區塊T(圖23)之寫碼樹區塊的最小寫碼區塊地址ctbMinCbAddrT。
x=x0+2<<Log2CtbSize-1
y=y0-1
ctbMinCbAddrT=MinCbAddrZS[x>>Log2MinCbSize][y>>Log2MinCbSize]
藉由調用以ctbMinCbAddrT作為輸入的寫碼區塊可用性導出過程來獲得變數availableFlagT。
當開始如所指定之寫碼樹的剖析時,以下經排序步驟適用。
如下初始化算術解碼引擎。
若CtbAddrRS等於slice_address, dependent_slice_flag等於1且entropy_coding_reset_flag等於0,則以下適用。
以TableStateIdxDS及TableMPSValDS作為輸入調用CABAC剖析過程的同步過程。
在算術解碼引擎之初始化過程之後,調用終止之前的對二元決策的解碼過程。
否則,若tiles_or_entropy_coding_sync_idc等於2,且CtbAddrRS%PicWidthInCtbs等於0,則以下適用。
當availableFlagT等於1時,以TableStateIdxWPP及TableMPSValWPP作為輸入調用CABAC剖析過程的同步過程。
在算術解碼引擎之過程之後,調用終止之前的對二元決策的解碼過程。
當cabac_independent_flag等於0且dependent_slice_flag等於1時,或當tiles_or_entropy_coding_sync_idc等於2時,如下應用記誦過程。
當tiles_or_entropy_coding_sync_idc等於2且CtbAddrRS%PicWidthInCtbs等於2時,以TableStateIdxWPP及TableMPSValWPP作為輸入調用CABAC剖析過程的記誦過程。
當cabac_independent_flag等於0、dependent_slice_flag等於1且end_of_slice_flag等於1時,以TableStateIdxDS及TableMPSValDS作為輸入調用CABAC剖 析過程的記誦過程。
語法元素的剖析如下進行:對於語法元素之每一所請求值,導出二元化。
語法元素及所剖析頻率區間序列之二元化決定解碼過程串流。
對於語法元素之二元化的每一頻率區間(其由變數binIdx索引),導出上下文索引ctxIdx。
對於每一ctxIdx,調用算術解碼過程。
將所剖析頻率區間之所得序列(b0..bbinIdx)與在每一頻率區間之解碼之後由二元化過程給出的頻率區間串組進行比較。當該序列與給定組中之頻率區間串匹配時,將對應值指派給語法元素。
若處理對語法元素之值的請求以獲得語法元素pcm旗標,且pcm_flag的經解碼值等於1,則在解碼任何pcm_alignment_zero_bit、num_subsequent_pcm以及所有pcm_sample_luma及pcm_sample_chroma資料之後,初始化解碼引擎。
因此,以上描述揭示如圖24中所示的解碼器。此解碼器大體上由參考符號5指示,此解碼器自資料串流12重構圖像10,圖像10以圖像10所分割為的片14為單位寫碼至資料串流12中,其中解碼器5經組配來根據片次序16解碼來自資料串流12的片14。自然地,解碼器5不限於串行解碼片14。相反,解碼器5可使用波前並行處理來解碼片14,假定圖像10分割為片14對於波前並行處理而言為合適。因此, 解碼器5可(例如)為能夠藉由考慮片次序16以便允許如上文已描述且下文亦將描述之波前處理,來以錯列方式與開始片14之解碼並行地解碼片14。
解碼器5響應片14中之當前片內的語法元素部分18,以便根據至少兩個模式20及22中之一者來解碼當前片。根據至少兩種模式中的第一者,即模式20,使用包含越過片邊界(亦即,越過圖24中的虛線)導出上下文的上下文適應熵解碼,亦即藉由使用起源於其他「按片次序16在前片」之寫碼/解碼的資訊,來自資料串流12解碼當前片。另外,使用第一模式20自資料串流12解碼當前片包括連續更新編解碼器之符號機率,以及在解碼當前片之開始初始化符號機率,其取決於先前解碼之片的符號機率的所保存狀態。上文例如結合「編解碼器變數之同步過程」描述此依賴性。最後,第一模式20亦涉及越過片邊界之預測性解碼。此越過片邊界之預測性解碼可(例如)涉及越過片邊界之框內預測,亦即基於「按片次序16」之已經重構之樣本值、在前片或越過片邊界之寫碼參數的預測(例如運動向量、預測模式、寫碼模式等的預測),來預測當前片內的樣本值。
根據第二模式22,解碼器5使用上下文適應熵解碼來解碼來自資料串流12的當前片,亦即當前將要解碼之片,然而,將上下文之導出限制為不越過片邊界。舉例而言,若用於導出與當前片內之區塊有關的某一語法元素的上下文的相鄰位置的模板延伸至相鄰片中,藉此越過當前片之片邊界,則將相鄰片之個別地部分的對應屬性(例如相 鄰片之此相鄰部分的對應語法元素的值)設定為預設值,以便抑制當前片與相鄰片之間的相互依賴性。雖然上下文之符號機率的聯繫更新可發生,正如第一模式20中之情況一樣,但第二模式22中之符號機率的初始化獨立於任何先前解碼之片。另外,藉由將預測性解碼限制為不越過片邊界來執行預測性解碼。
為了容易理解圖24之描述以及以下描述,參考圖25,其展示出與圖24相比更具結構意義的解碼器5的可能實施方案。作為圖24中的情況,解碼器5為使用上下文適應熵解碼來解碼資料串流以便獲得(例如)預測殘餘及預測參數的預測性解碼器。
如圖25中所示,解碼器5可包括熵解碼器24、解量化及逆變換模組26、組合器28,其如圖25中所示例如實施為加法器與預測器28。熵解碼器24、模組26及加法器27按其提及次序串聯連接於解碼器5之輸入與輸出之間,且預測器28連接於加法器28之輸出與其另一輸入之間,以便連同組合器27形成預測迴路。因此,解碼器24之輸出額外連接至預測器28之寫碼參數輸入。
儘管圖25提供解碼器串行解碼當前圖像之印象,但解碼器5可(例如)實施為並行解碼圖像10。解碼器5可例如包括多個核,每一核根據圖25中之元件24至28來操作。然而,串行處理為任擇的,且串行操作之解碼器5亦能夠解碼在熵解碼器24之輸入處入站的資料串流。
為了高效地達成串行或並行解碼當前圖像10之 剛剛提及之能力,解碼器5以寫碼區塊30為單位來操作以便解碼圖像10。寫碼區塊30為例如葉區塊,藉由諸如四元樹分割等遞歸多樹分割來將寫碼樹區塊或最大寫碼區塊32分割為頁區塊。代碼樹區塊32又可規則地佈置成行及列,以便形成圖像10分為此等代碼樹區塊32的規則分割。在圖25中,展示代碼樹區塊32具有連續線,而展示寫碼區塊30具有虛線。出於例示目的,僅展示一個代碼樹區塊32將進一步分割為寫碼區塊30,而代替地展示其他代碼樹區塊32不進一步分割以便直接形成寫碼區塊資料串流12可包括關於如何將圖像10分割為代碼區塊30的語法部分信令。
資料串流12為每一寫碼區塊30傳達語法元素,其揭露關於模組24至28將如何恢復該寫碼區塊30內的圖像內容。舉例而言,此等語法元素包括:
1)任擇地,分割資料進一步將寫碼區塊30分割為預測區塊,
2)任擇地,分割資料進一步將寫碼區塊30分割為殘餘及/或變換區塊,
3)關於將使用哪一預測模式來為寫碼區塊30導出預測信號的預測模式信令,其中發信此預測模式之粒度可取決於寫碼區塊30及/或預測區塊。
4)可按寫碼區塊或(若存在)按具有例如取決於預測模式而發送之一種預測參數的預測區塊來發信預測參數。可能的預測模式可例如包括框內預測及/或框間預測。
5)亦可存在其他語法元素,例如用於在寫碼區塊30處 對圖像10進行濾波以便獲得預測信號及/或將要再製之經重構信號的濾波資訊。
6)最後,尤其呈變換係數之形成的殘餘資訊可包括於用於寫碼區塊30的資料串流中;以殘餘區塊為單位,可發信殘餘資料;按殘餘區塊,若存在,則譜分解可例如以前面提及之變換區塊為單位來執行。
熵解碼器24負責自資料串流獲得剛剛提及之語法元素。為此,熵解碼器24使用上下文適應熵解碼。亦即,熵解碼器24提供若干上下文。為了自資料串流12導出某一語法元素,熵解碼器24在可能的上下文之中選擇某一上下文。依據當前語法元素所屬之圖像10的部分的鄰域的屬性來執行可能上下文之中的選擇。對於可能上下文中之每一者,熵解碼器24管理符號機率,亦即熵解碼器24基於其操作的符號字母表的每一可能符號的機率估計。「管理」涉及上下文之符號機率的前面提及之連續更新,以便使與每一上下文相關聯之符號機率適應實際圖像內容。藉此,符號機率適於符號之實際機率統計。
鄰域之屬性影響圖像10之當前部分(例如當前寫碼區塊30)之重構的另一情況為預測器28內的預測性解碼。預測不僅限於當前寫碼區塊30內的預測內容,而且可包含用於當前寫碼區塊30之資料串流12內所含之參數(例如預測參數、分割資料或甚至變換係數)的預測。亦即,預測器28可自前面提及之鄰域預測圖像內容或此等參數,以便獲得書面信號,其接著與如由模組26自資料串流12獲得 的預測殘餘組合。在預測參數之情況下,預測器28可使用資料串流內所含的語法元素作為預測殘餘來獲得預測參數之實際值。預測器28使用後者預測參數值來獲得剛剛提及之預測信號,其將在組合器27中與預測殘餘組合。
前面提及之「鄰域」主要涵蓋當前將要熵解碼之語法元素或當前將要預測之語法元素所屬之當前部分的周邊的左上部。在圖25中,在34處示範性地例示出一個寫碼區塊30的此鄰域。
在寫碼區塊30之中界定寫碼/解碼次序:在最粗糙等級處,以掃描次序36掃描圖像10之代碼樹區塊32,掃描次序36此處例示為自上而下逐列進行的光柵掃描。在每一代碼樹區塊內,以深度第一遍歷次序來掃描寫碼區塊30,使得在每一層級中,亦大體上以自上而下逐列進行的光柵掃描來掃描代碼樹區塊32。
寫碼區塊30之中所界定之寫碼次序與用於導出鄰域中之屬性以便選擇上下文且/或執行空間預測的鄰域34的界定一致,因為鄰域34主要涵蓋圖像10之已經根據寫碼次序經受解碼的部分。每當鄰域34之一部分涵蓋圖像10之非可用部分時,例如替代地使用預設資料。舉例而言,鄰域模板34可延伸到圖像10之外。然而,另一可能性為鄰域34延伸至相鄰片中。
舉例而言,片沿沿寫碼區塊30界定之寫碼/解碼次序來劃分圖像10,亦即每一片為寫碼區塊30沿前面提到之寫碼區塊次序之連續非中斷序列。在圖25中,以點劃線 14指示片。在片14之中界定的次序由其如上文概述之循序寫碼區塊30之游程的成分產生。若某一片14之語法元素部分18指示其將以第一模式解碼,則熵解碼器24允許上下文適應熵解碼來越過片邊界導出上下文。亦即,使用空間鄰域34,以便在關於當前片14之熵解碼資料中選擇上下文。在圖25之情況下,例如片編號3可為當前解碼之片,且在與寫碼區塊30或其中所含之某一部分有關的熵解碼語法元素中,熵解碼器24可使用起源於例如片編號1等相鄰片內之解碼部分的屬性。預測器28表現相同:對於正為第一模式20的片,預測器28越過環繞當前片之片邊界使用空間預測。
然而,對於具有與之相關(亦即,語法元素部分18指示第二模式22)的第二模式22的片,熵解碼器24及預測器28將熵上下文之導出及預測性解碼限制為取決於與位於僅當前片內之部分有關的屬性。顯然,寫碼效率遭受此限制。另一方面,第二模式22之片允許瓦解該序列之片之間的相互依賴性。因此,第二模式22之片可散佈在圖像10內或圖像10所述之視訊內,以便允許再同步點。然而,每一圖像10在第二模式22下具有至少一個片係不必要的。
如上文已經提及,第一及第二模式20及22亦在其符號機率之初始化方面不同。第二模式22中寫碼之片導致熵解碼器24重新初始化機率,而與任何先前解碼之片(亦即先前在片之中界定之次序的意義上解碼)無關。舉例而言,將符號機率設定為編碼器及解碼器側均已知的預設值,或初始化值包含於在第二模式22下寫碼之片內。
亦即,對於正在第二模式22下寫碼/解碼之片,符號機率之適應總是自此等片之開頭立即開始。因此,適應準確度在此等片之開頭對此等片而言較差。
在第一模式20下寫碼/解碼之片中,情況不同。對於後者片,由熵解碼器24執行之符號機率的初始化取決於先前解碼之片的符號機率的所保存狀態。每當在第一模式20下寫碼/解碼之片的開頭例如並非位於圖像10之左手側,亦即不在光柵掃描36從其開始逐列運行之後向底部進行至下一列的側時,採用在熵解碼緊接在前片結束時所得的符號機率。舉例而言,此在圖2中由4號片之箭頭38例示。4號片之開頭在圖像10之右手側與左手側之間的某處,因此,在初始化符號機率時,熵解碼器24在初始化符號機率時採用在熵解碼緊接在前片(亦即,3號片)時所獲得之符號機率,直至其結束為止,亦即在片3之熵解碼期間包含符號機率之連續更新,直至其結束為止。
具有與之相關聯的第二模式22的片(然而,其開頭位於圖像10之左手側,例如5號片)不適應如在結束緊接在前之4號片的熵解碼之後獲得的符號機率,因為此將阻止解碼器5藉由使用波前處理來並行解碼圖像10。相反,如上文所概述,熵解碼器24適應如在結束如由箭頭40例示熵解碼緊接在前(以編碼/解碼次序36)代碼樹區塊列中之第二(以編碼/解碼次序36)代碼樹區塊32之後獲得的符號機率。
在圖25中,例如,圖像10示範性地分割為三列代碼樹區塊以及四行寫碼樹根區塊32,且每一代碼樹區塊列 再分為兩個片14,使得每第二個片之開頭與個別地代碼樹根區塊列之寫碼單元次序中的第一寫碼單元重合。因此,熵解碼器24將能夠藉由並行解碼每一代碼樹跟區塊列、藉由開始以錯列方式解碼此等代碼樹跟區塊列、以第一或最上代碼樹跟區塊列、接著第二且接著第三來在解碼圖像10時使用波前處理。
自然,以遞歸方式將區塊32分割為進一步的寫碼區塊30為任擇的,且因此在較一般意義上,區塊32亦可稱為「寫碼區塊」。亦即,較一般而言,可將圖像10分割為佈置成列及行且具有彼此之間界定之光柵掃描次序36的寫碼區塊32,且可將解碼器5視為使每一片14與光柵掃描次序36中之寫碼區塊32之連續子集相關聯,使得該等子集根據片次序沿光柵掃描次序36彼此相隨。
如自以上論述亦清楚,解碼器5或更具體而言熵解碼器24可經組配來保存如在根據光柵掃描次序36上下文適應熵解碼任何片直至寫碼區塊列中之第二寫碼區塊時所獲得之符號機率。在為上下文適應熵解碼具有與之相關的第一模式20之當前片初始化符號機率時,解碼器5或更具體而言熵解碼器24根據光柵掃描次序36檢查與當前片相關聯之寫碼區塊32之連續子集的第一寫碼區塊32是否為寫碼區塊列中之第一寫碼區塊32。若是,則如相對於箭頭40所闡釋來初始化當前片之上下文適應熵解碼之符號機率,亦即取決於如在根據光柵掃描次序36上下文熵解碼先前解碼之片直至寫碼區塊列中之第二寫碼區塊時所獲得的所保存符 號機率。若否,則依據如在上下文適應熵解碼先前解碼之片直至先前解碼之片之結尾(亦即,根據箭頭38)時所獲得之符號機率來執行為當前片之上下文適應熵解碼初始化符號機率。並且,在根據38初始化的情況下,熵解碼片次序36中之緊接在前片之結束時的所保存狀態被表示,而在初始化40之情況下,先前解碼之片包括區塊次序36中之緊接在前區塊32列之第二區塊的結尾。
如由圖24中之虛線所例示,解碼器可經組配來響應片14中之當前片內的語法元素部分18,以便根據至少三種模式中的一者解碼當前片。亦即,除其他模式20及22之外,可存在第三模式42。第三模式42與第二模式22之不同之處可在於允許越過片邊界之預測,而熵寫碼/解碼仍被限制為不越過片邊界。
上文呈現關於語法元素部分18的兩個實施例。下表概述此等兩個實施例。
在該實施例中,語法元素部分18由dependent_slice_flag個別地形成,而在另一實施例中,dependent_slice_flag與no_cabac_reset_flag之組合形成語法元素部分。參考上下文變數之同步過程,直至關係到取決於先前解碼之片的符號概率的所保存狀態來初始化符號機率。明確而言,解碼器可經組配來在last_ctb_cabac_init_flag=0且tiles_or_entropy_coding_sync_idc=2之情況下,保存如在根據光柵掃描次序上下文適應熵解碼先前解碼之片直至列中之第二寫碼區塊時且在為根據第一模式為當前片之上下文適應熵解碼初始化符號機率時所獲得的符號機率,檢查與當前片相關聯之寫碼區塊之連續子集的第一寫碼區塊是否為根據光柵掃描次序之列中的第一寫碼區塊,且若是,依據如在根據光柵掃描次序上下文適應熵解碼先前解碼之片直至列中之第二寫碼區塊時所獲得之所保存符號機率為當前片之上下文適應熵解碼初始化符號機率,且若否,則依據如在上下文適應熵解碼先前解碼之片直至先前解碼之片之結尾時所獲得之符號機率來為當前片之上下文適應熵解碼初始化符號機率。
因此,換言之,根據語法之第二實施例,解碼器將自圖像以圖像(10)所分割為的片14為單位寫碼至的資料串流12重構圖像10,其中解碼器經組配來根據片次序16自資料串流12解碼片14,且解碼器響應語法元素部分18,亦即該等片中之當前片內的dependent_slice_flag,以便根據至 少兩個模式20、22中之一者解碼當前片。根據至少兩個模式中的第一者20,亦即若dependent_slice_flag=1,則解碼器使用上下文適應熵解碼24來自資料串流12解碼當前片,上下文適應熵解碼24包含越過片邊界之上下文的導出、上下文之符號機率的連續更新,以及依據先前解碼之片的符號機率的所保存狀態對符號機率之初始化38、40,以及越過片邊界的預測性解碼,且根據至少兩種模式中的第二者22,亦即dependent_slice_flag=0,解碼器使用:上下文適應熵解碼及預測性解碼來自資料串流12解碼當前片,該上下文適應熵解碼具有將上下文之導出限制為不越過片邊界、上下文之符號機率的連續更新,以及與任何先前解碼片無關之符號機率的初始化,且該預測性解碼具有將預測性解碼限制為不越過片邊界。可將圖像10分割為佈置成列及行且具有彼此之間界定之光柵掃描次序36的寫碼區塊32,且解碼器經組配來使每一片14與光柵掃描次序36中之寫碼區塊32之連續子集相關聯,使得該等子集根據片次序沿光柵掃描次序36彼此相隨。解碼器可經組配來亦即響應於tiles_or_entropy_coding_sync_idc=2之情況下,保存如在根據光柵掃描次序36上下文適應熵解碼先前解碼之片直至列中之第二寫碼區塊32時且在為根據第一模式為當前片之上下文適應熵解碼初始化符號機率時所獲得的符號機率,檢查與當前片相關聯之寫碼區塊32之連續子集的第一寫碼區塊是否為根據光柵掃描次序之列中的第一寫碼區塊32,且若是,依據如在根據光柵掃描次序36上下文適應熵解碼先 前解碼之片直至列中之第二寫碼區塊時所獲得之所保存符號機率為當前片之上下文適應熵解碼初始化40符號機率,且若否,則依據如在上下文適應熵解碼先前解碼之片直至先前解碼之片之結尾時所獲得之符號機率來為當前片之上下文適應熵解碼初始化38符號機率。解碼器可經組配來響應片14中之當前片內的語法元素部分(18),以便根據至少三種模式中的一者(亦即第一模式20及第三模式42或第二模式22中的一者)解碼當前片,其中解碼器經組配來根據第三模式42,亦即在dependent_slice_flag=1且tiles_or_entropy_coding_sync_idc=3的情況下,使用上下文適應熵解碼來自資料串流解碼當前片,該上下文適應熵解碼具有將上下文之導出限制為不越過片邊界,上下文之符號機率的連續更新,以及與任何先前解碼片無關之符號機率的初始化,以及越過片邊界之預測性解碼,其中依據語法元素(亦即cabac_independent_flag)選擇第一及第三模式中的一者。解碼器可進一步經組配來,亦即在tiles_or_entropy_coding_sync_idc=0、1及3(當cabac_independent flag=0時為「3」)的情況下,保存如在上下文適應熵解碼先前解碼之片直至先前解碼之片的結尾時以及根據第一模式為當前片之上下文適應熵解碼初始化符號機率時所獲得的符號機率,依據所保存之符號機率為當前片之上下文適應熵解碼初始化符號機率。解碼器可經組配來,亦即在tiles_or_entropy_coding_sync_idc=1的情況下,在第一及第二模式下,將預測性解碼限制於圖像再分 為的瓦片內。
自然地,編碼器能夠個別地地設定上文所呈現之語法,以便使解碼器能夠獲得上文概述之優勢。編碼器可為並行處理(例如多核)編碼器,但無需為並行處理(例如多核)編碼器。對於以片14為單位將圖像10編碼至資料串流12中,編碼器將經組配來根據片次序16將片14編碼至資料串流12中。編碼器將為片中之當前片判定語法元素部分18,並將其寫碼至當前片中,使得該語法元素部分發信將要根據至少兩種模式20、22中之一者寫碼的當前片,且若將根據至少兩種模式中的第一者20來寫碼當前片,則使用上下文適應熵編碼24來將當前片編碼至資料串流12中,上下文適應熵編碼24包含越過片邊界之上下文的導出、上下文之符號機率的連續更新及取決於先前編碼之片的符號機率的所保存狀態對符號機率之初始化38、40,以及越過片邊界之預測性編碼,且若將根據至少兩種模式中的第二者22來寫碼當前片,則使用上下文適應熵編碼以及預測性編碼來將當前片編碼至資料串流12中,該上下文適應熵編碼具有將上下文之導出限制為不越過片邊界,上下文之符號機率的連續更新及與任何先前編碼之片無關的符號機率的初始化,且該預測性編碼具有將預測性編碼限制為不越過片邊界。雖然可將圖像10分割為佈置成列及行且具有彼此之間界定之光柵掃描次序36的寫碼區塊32,但編碼器可經組配來使每一片14與光柵掃描次序36中之寫碼區塊32之連續子集相關聯,使得該等子集根據片次序沿光柵掃描次序36彼 此相隨。編碼器可經組配來保存如在根據光柵掃描次序36上下文適應熵解碼先前編碼之片直至列中之第二寫碼區塊32時且在為根據第一模式為當前片之上下文適應熵編碼初始化符號機率時所獲得的符號機率,檢查與當前片相關聯之寫碼區塊32之連續子集的第一寫碼區塊是否為根據光柵掃描次序之列中的第一寫碼區塊32,且若是,依據如在根據光柵掃描次序36上下文適應熵編碼先前編碼之片直至列中之第二寫碼區塊時所獲得之所保存符號機率為當前片之上下文適應熵解碼初始化40符號機率,且若否,則依據如在上下文適應熵編碼先前編碼之片直至先前編碼之片之結尾時所獲得之符號機率來為當前片之上下文適應熵解碼初始化38符號機率。編碼器可經組配來將語法元素部分(18)寫碼至片(14)中之當前片中,使得發信息給當前片以根據至少三種模式中的一者(亦即第一模式(20)及第三模式(42)或第二模式(22)中的一者)寫碼至其中,其中編碼器經組配來根據第三模式(42),使用上下文適應熵編碼來將當前片編碼至資料串流中,該上下文適應熵編碼具有將上下文之導出限制為不越過片邊界,上下文之符號機率的連續更新及與任何先前解碼片無關之符號機率的初始化,以及越過片邊界之預測性寫碼,其中編碼器在第一及第三模式中之一者之間的差別為使用語法元素,例如亦即cabac_independent_flag。編碼器可經組配來判定一般語法元素(例如dependent_slices_present_flag),並藉由依據該一般語法元素在至少兩種一般操作模式中之一者下操作來將 其寫入至資料串流中,亦即,根據第一一般操作模式,執行寫碼每一片之語法元素部分,且根據第二一般操作模式,必然地使用至少兩種模式中不同於第一模式的不同模式。編碼器可經組配來根據第一及第二模式,自當前片之開頭至結尾,必然且不間斷地繼續連續更新符號機率。編碼器可經組配來保存如在上下文適應熵編碼先前編碼之片直至先前編碼之片的結尾時以及根據第一模式為當前片之上下文適應熵編碼初始化符號機率時所獲得的符號機率,依據所保存之符號機率為當前片之上下文適應熵編碼初始化符號機率。並且,在第一及第二模式下,編碼器可將預測性編碼限制於圖像再分為的瓦片內。
為了完整起見,圖26中描繪編碼器之可能結構。預測器70幾乎與預測器28操作相同,亦即執行預測,但亦藉由例如最佳化來判定包含預測參數及模式的寫碼參數。模組26及27亦出現於解碼器中。減法器72判定無損預測殘餘,其接著藉由使用量化且任擇地使用譜分解變換,在變換及量化模組74中有損寫碼。熵寫碼器76執行上下文適應熵編碼。
除以上具體語法實例之外,下文藉由呈現後文使用之術語與上文所使用之術語之間的一致性來概述不同實例。
明確而言,上文尚未明確概述,從屬片不僅為「從屬」的,因為其允許利用自其邊界外部已知的知識,例如如上文所概述,具有較快適應的熵上下文,或歸因於允許 越過其邊界而達成較佳的空間預測。相反,為了節約藉由將圖像分為若干片來界定片標頭所必須花費之速率成本,從屬片採用來自先前片之片標頭語法的一部分,亦即此片語法標頭部分不會為了從屬片而再次發射。此例如在圖16中在100處且在圖21中在102處展示,根據此,例如採用來自先前片之片類型。藉此,將圖像再分為若干片(例如獨立片及從屬片)在位元消耗昂貴方面較便宜。
在下文概述之實例中,剛剛提及之依賴性導致稍微不同的措辭:將片定義為圖像之可個別設定片標頭語法的單位部分。因此,片由一個(使用上文之命名法)獨立/規則/正常片(現稱為獨立片區段)且無一或多個(使用上文之命名法)從屬片(現稱為從屬片區段)組成。
舉例而言,圖27展示出將要分割為兩個片之圖像,一個片由片區段141至143形成,且另一僅由片區段144形成。索引1至4以寫碼次序展示片次序。圖28a及28b展示出在將圖像10再分為兩個瓦片之情況下的不同實例,其中在圖28a之情況下,一個片由全部五個片區段14(涵蓋501及502兩者)形成,索引在此以寫碼次序升高,且在圖28a之情況下,兩個片分別由再分瓦片501之片區段141及142及143及144形成,且另一片由涵蓋瓦片502之片區段145至146形成。
定義可為如下:從屬片區段:片區段標頭之一些語法元素的值係自在解碼次序中在前獨立片區段(在上文實施例中,先前稱為從屬片)的值推斷的片區段。
獨立片區段:片區段標頭之語法元素的值並非自在前片區段(在上文實施例中,先前稱為正常片)的值推斷的片區段。
:在同一存取單元/圖像內之一個獨立片區段及下一獨立片區段(若存在)之前的所有後續從屬片區段(若存在)中所含有的整數數目個寫碼樹單元。
片標頭:作為當前片區段或作為在當前從屬片區段之前的獨立片區段的獨立片區段的片區段標頭。
片區段:在瓦片掃描中連續排序且包含於單一NAL單元中的整數數目個寫碼樹單元;將每一圖像分為若干片區段為分區。
片區段標頭:經寫碼片區段之含有與片區段中所表示的第一或所有寫碼樹單元有關的資料元素的部分。
「模式」20及22之發信,亦即「從屬片區段」及「獨立片區段」可為如下:在例如PPS等一些額外NAL單元中,可使用語法元素來發信是否對甚至某些圖像之序列中的某一圖像使用從屬片:等於1的dependent_slice_segments_enabled_flag指定片區段標頭中語法元素dependent_slice_segment_flag的存在。等於0的dependent_slice_segments_enabled_flag指定片區段標頭中語法元素dependent_slice_segment_flag的不存在。
dependent_slice_segments_enabled_flag在範圍上類似 於先前描述之dependent_slices_present_flag
類似地,dependent_slice_flag可稱為dependent_slice_segment_flag,以便考慮相對於片的不同命名法。
等於1的dependent_slice_segment_flag指定不存在於當前片區段之標頭中的每一片區段標頭語法元素的值被推斷為等於在前獨立片區段之片標頭(亦即片區段標頭)中之對應片區段標頭語法元素的值。
在同一等級(例如圖像等級)中,可包含以下語法元素:等於1的entropy_coding_sync_enabled_flag指定在解碼包含涉及PPS之每一圖像中之每一瓦片中之一列寫碼樹區塊中之第一寫碼樹區塊的寫碼樹單元之前,調用對上下文變數的特定同步過程,且在解碼包含涉及PPS之每一圖像中之每一瓦片中之一列寫碼樹區塊中之第二寫碼樹區塊的寫碼樹單元之後,調用對上下文變數之特定儲存過程。等於0的entropy_coding_sync_enabled_flag指定在解碼包含涉及PPS之每一圖像中之每一瓦片中之一列寫碼樹區塊中之第一寫碼樹區塊的寫碼樹單元之前,無需調用對上下文變數之特定同步過程,且在解碼包含涉及PPS之每一圖像中之每一瓦片中之一列寫碼樹區塊中之第二寫碼樹區塊的寫碼樹單元之後,無需調用對上下文變化之特定儲存過程。
位元串流一致性的要求為entropy_coding_sync_enabled_flag的值對於在CVS內啟動 之所有PPS均將相同。
當entropy_coding_sync_enabled_flag等於1且片中之第一寫碼樹區塊並非瓦片中之一列寫碼樹區塊中之第一寫碼樹區塊,則位元串流一致性的要求為片中之最後一個寫碼樹區塊將屬於與片中之第一寫碼樹區塊相同的寫碼樹區塊列。
當entropy_coding_sync_enabled_flag等於1且片區段中之第一寫碼樹區塊並非瓦片中之一列寫碼樹區塊中之第一寫碼樹區塊,則位元串流一致性的要求為片區段中之最後一個寫碼樹區塊將屬於與片區段中之第一寫碼樹區塊相同的寫碼樹區塊列。
如已經描述,CTB 30之中的寫碼/解碼次序以光柵方式逐列自上而下,以掃描第一瓦片開始,接著訪問下一瓦片,若圖像中存在一個以上瓦片。
解碼器5且因此編碼器在熵解碼(寫碼)圖像之片區段14時如下作用:
A1)每當當前解碼/寫碼之語法元素synEl為瓦片50、片區段14或CTB列之第一語法元素時,開始圖29之初始化過程。
A2)否則,此語法元素之解碼使用當前熵上下文發生。
A3)若當前語法元素為CTB 30中的最後一個語法元素,則開始如圖30中所示之熵上下文儲存過程。
A4)該過程在A1)處以下一語法元素繼續。
在初始化過程中,檢查(200)synEI是否為片區段 14或瓦片50之第一語法元素。若是,則在步驟202中,獨立於任何先前片區段初始化上下文。若否,則檢查(204)synEI是否為CTB 30之列的第一語法元素,且entropy_coding_sync_enabled_flag是否等於一。若是,則檢查(206)在相等瓦片之前一列CTB 30中,第二CTB 30是否可用(見圖23)。若可用,則在步驟210中,使用針對類型40採用的當前儲存之上下文機率來執行根據40之上下文採用。若不可用,則在步驟202中,獨立於任何先前片區段初始化上下文。若檢查204揭示否,則在步驟212中檢查synEl是否為從屬片區段14之第一CTB中的第一語法元素,且dependent_slice_segement_flag是否等於一,且若是,則在步驟214中,使用針對類型38採用的當前所儲存上下文機率,來執行根據38之上下文採用。在步驟214、212、210及202中的任一者之後,實際上開始解碼/寫碼。
具有等於一的dependent_slice_segement_flag的從屬片區段因此有助於在幾乎不具有寫碼效率懲罰之情況下進一步減小寫碼/解碼延遲。
在圖30之儲存過程中,在步驟300中,檢查經寫碼/解碼synEl是否為一列CTB 30之第二CTB 30之最後一個語法元素,且entropy_coding_sync_enabled_flag是否等於一。若是,在步驟302中將當前熵上下文(亦即上下文之熵寫碼機率)儲存於特別用於按照40之採用的儲存裝置中。類似地,除步驟300或302之外,在步驟304中,檢查經寫碼/解碼synEl是否為片區段14之最後一個語法元素,且 dependent_slice_segement_flag是否等於一。若是,則在步驟306中將當前熵上下文(亦即,上下文之熵寫碼機率)儲存於特定用於按照38之採用的儲存裝置中。
注意,查詢語法元素是否為CTB列之第一synEl的任何檢查例如利用片區段之標頭內的語法元素slice_adress 400,亦即揭示個別地片區段之開始沿解碼次序的位置的開始語法元素。
在使用WPP處理自資料串流12重構圖像10時,解碼器能夠恰好利用後者開始語法部分400來擷取WPP子串流進入點。由於每一片區段包括一指示個別地片區段之解碼開始在圖像10內的位置的開始語法部分400,因此解碼器能夠藉由使用片區段之開始語法部分400識別在圖像之左手側開始之片區段來識別片區段分組為的WPP子串流的進入點。解碼器可接著以與根據片次序循序開始WPP子串流之解碼錯列的方式並行地解碼WPP子串流。片區段可甚至小於一個圖像寬度,以及一列CTB,使得其發射可在WPP子串流之中交錯,來進一步減小總的發射端至端延遲。編碼器提供具有指示個別地片之寫碼開始在圖像(10)內的位置的開始語法部分(400)的每一片(14),且將該等片分組為若干WPP子串流,使得對於每一WPP子串流,片次序中的第一片在圖像之左手側開始。編碼器可甚至在編碼圖像時自行使用WPP處理:編碼器可以與根據片次序循序開始WPP子串流之編碼錯列的方式並行地編碼WPP子串流。
藉此,使用片區段之開始語法部分作為用於定位 WPP子串流之進入點的構件的後者態樣可在無從屬片概念之情況下使用。
藉由如下設定以上變數,對於並行處理圖像10而言均將為可行的:
將WPP與瓦片分割混合將更加可行。在此情況下,可將瓦片視為個別圖像:使用WPP之每一瓦片將由具有一或多個從屬片區段之片組成,且步驟300及208中之檢查將涉及同一瓦片中之上方CTB列中的第二CTB,正如步驟204一樣,且A1將涉及當前瓦片之CTB 30列中之第一CTB 30!在此情況下,上表可擴展:
作為簡要介紹,後者擴展對於實施例2已將為可能。實施例2允許以下處理:
但對於以下擴展,將得出下表:添加至圖像參數組之語義:若tiles_or_entropy_coding_sync_idc等於4,除第一列CTB之外的每一CTB均將包含於從屬片旗標設定為1的不同片中。不同列之CTB不得存在於同一片中。每CTB列可存在一個以上片。
若tiles_or_entropy_coding_sync_idc等於5,則除第一瓦片之外的每一瓦片之CTB必須包含於不同片中。不同瓦片之CTB不得存在於同一片中。每瓦片可存在一個以上片。
見圖31,進行進一步闡釋。
亦即,上表可擴展:
關於以上實施例,應注意,解碼器可經組配來例如響應於tiles_or_entropy_coding_sync_idc=1、2,在第一及第二模式下,自當前片讀取揭示將當前片再分為並行子部分的資訊,其中並行子部分可為WPP子串流或瓦片;在第一並行子部分之結尾處停止上下文適應熵解碼;且在任一後續並行子部分之開頭處重新恢復上下文適應熵解碼,其包含:在第一模式下,依據在前並行子部分之符號機率的所保存狀態來初始化符號機率;且在第二模式下,獨立於任何先前解碼之片及任何先前解碼之並行子部分來初始化符號機率。
因此,以上描述揭示了用於如由新HEVC寫碼標準提供之結構化視訊資料(例如以瓦片結構化)、波前並行處 理(WPP)子串流、片或熵片的低延遲編碼、解碼、封裝及發射的方法。
尤其已界定如何在對話場景中輸送經並行編碼之資料以便獲得編碼、解碼及發射過程中的最小潛時。因此,已描述了一種管線化並行寫碼、發射及解碼方法,以便允許如遊戲、遠程手術等最小延遲應用。
此外,以上實施例縮小了波前並行處理(WPP)之差距,來使其可在低延遲發射場景中使用。因此,已呈現用於WPP子串流[2]的新封裝格式,從屬片。此從屬片可含有熵片資料、WPP子串流、一整列LCU、片的僅一片段,其中先前發射之片標頭亦適用於所含有之片段資料。在子片標頭中發信所包含之資料。
最後注意,新片之命名亦可為「子集/輕量片」,但已發現名稱「從屬片」為較佳。
已呈現信令,其描述寫碼與輸送中的並行化等級。
儘管在設備之上下文中已描述了一些態樣,但清楚的是,此等態樣亦表示對應方法之描述,其中一區塊或裝置對應於一方法步驟或一方法步驟之一特徵。類似地,方法步驟之上下文中所描述之態樣亦表示對應設備之對應區塊或項目或特徵的描述。一些或所有方法步驟可由(或使用)硬體設備來執行,例如微處理器、可規劃電腦或電子電路。在一些實施例中,最重要方法步驟中之一或多者可由此設備執行。
取決於某些實施要求,本發明之實施例可在硬體中或軟體中實施。可使用上面儲存有電子可讀控制信號之數位儲存媒體(例如,軟磁碟、DVD、藍光、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體)來執行該實施方案,該數位儲存媒體與可規劃電腦系統協作(或能夠與之協作),使得執行個別地方法。因此,數位儲存媒體可為電腦可讀的。
根據本發明之一些實施例包括具有電子可讀控制信號的資料載體,其能夠與可規劃電腦系統協作,使得執行本文所述方法中之一者。
通常,本發明之實施例可實施為具有程式代碼之電腦程式產品,當該電腦程式產品在電腦上運行時,該程式代碼操作以用於執行該等方法中之一者。該程式代碼可例如儲存於機器可讀載體上。
其他實施例包括儲存於機器可讀載體上之用於執行本文所述方法中之一者的電腦程式。
換言之,本發明之方法的實施例因此為具有程式代碼之電腦程式,當該電腦程式在電腦上運行時,該程式代碼用於執行本文所述之方法中的一者。
本發明之方法的另一實施例因此為資料載體(或數位儲存媒體,或電腦可讀媒體),其上面記錄有用於執行本文所述方法中之一者的電腦程式。該資料載體、該數位儲存媒體或該所記錄媒體通常為有形且/或非暫時的。
本發明之方法的另一實施例因此為表示用於執 行本文所述方法中之一者的電腦程式的資料串流或信號序列。該資料串流或信號序列可例如經組配來經由資料通信連接(例如經由網際網路)傳送。
另一實施例包括一種處理構件,例如電腦或可規劃邏輯裝置,其經組配來或適於執行本文所述方法中的一者。
另一實施例包括一種電腦,其上面安裝有用於執行本文所述方法中之一者的電腦程式。
根據本發明之另一實施例包括一種設備或一種系統,其經組配來傳送(例如,以電子方式或光學方式)用於執行本文所述方法中之一者的電腦程式至接收器。該接收可例如為電腦、行動裝置、記憶體裝置等。該設備或系統可例如包括用於將電腦程式傳送至接收器的檔案伺服器。
在一些實施例中,一種可規劃邏輯裝置(例如,現場可規劃門陣列)可用以執行本文所述方法之功能性中的一些或全部。在一些實施例中,現場可規劃門陣列可與微處理器協作,以便執行本文所述方法中之一者。通常,該等方法較佳由任何硬體設備執行。
上文所述之實施例僅例示本發明之原理。應理解,熟習此項技術者將明白對本文所述佈置及細節的修改及變化。因此,本發明之意圖僅由隨附之申請專利範圍之範疇限制,且不受藉助於描述及闡釋本文之實施例而呈現的具體細節限制。
參考文獻
[1]托馬斯.維甘德(Thomas Wiegand)、加里J.沙利文(Gary J. Sullivan)、吉賽爾.瓊特高(Gisle Bjontegaard)、阿賈伊.魯思拉(Ajay Luthra), 「H.264/AVC視訊寫碼標準綜述(Overview of the H.264/AVC Video Coding Standard)」, IEEE電路系統視訊技術學報,第N7期,第13卷,2003年7月。
[2]JCT-VC,「高效視訊寫碼(HEVC)本文規範工作草案6(High-Efficiency Video Coding (HEVC) text specification Working Draft 6)」, JCTVC-H1003,2012年2月。
[3]ISO/IEC 13818-1:MPEG-2系統規範。
200、204、206‧‧‧檢查
202、208、210、212、214‧‧‧步驟

Claims (23)

  1. 一種用以自資料串流重構圖像的解碼器,該資料串流(12)係將該圖像(10)以該圖像(10)分割成單位片段(14)而編碼而成,其中該解碼器係組配來根據一片段次序(16)自該資料串流(12)解碼該等片段(14),且該解碼器係響應於該等片段中之一當前片段內的一語法元素部分(18),以根據至少兩種模式(20,22)中之一者解碼該當前片段,且根據該等至少兩種模式中之一第一者(20),使用上下文適應熵解碼(24)自該資料串流(12)解碼該當前片段,該上下文適應熵解碼包括越過該等片段邊界之上下文之一導出、該等上下文之符號機率之一連續更新、以及依據一先前解碼片段之符號機率之已保存狀態之該等符號機率之一初始化(38,40),且根據該等至少兩種模式中之一第二者(22),使用上下文適應熵解碼自該資料串流(12)解碼該當前片段,該上下文適應熵解碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前解碼片段之該等符號機率的一初始化。
  2. 如申請專利範圍第1項之解碼器,其中將該圖像(10)分割呈以多列及多行佈置且具有彼此之間界定之一光柵掃描次序(36)的編碼區塊(32),且該解碼器係組配來使每 一片段(14)與該光柵掃描次序(36)中之該等編碼區塊(32)之一連續子集相關聯,使得該等子集根據該片段次序沿該光柵掃描次序(36)彼此相隨。
  3. 如申請專利範圍第2項之解碼器,其中該解碼器係組配來保存如在根據該光柵掃描次序(36)上下文適應熵解碼該先前解碼之片段直至一列中之一第二編碼區塊(32)時且在根據該第一模式為該當前片段之該上下文適應熵解碼初始化該等符號機率時所獲得的符號機率,檢查與該當前片段相關聯之編碼區塊(32)之該連續子集的一第一編碼區塊(32)根據該光柵掃描次序是否為一列中的一第一寫碼區塊,且若是,即依據如在根據該光柵掃描次序(36)上下文適應熵解碼該先前解碼之片段直至一列中之一第二編碼區塊時所獲得之該等所保存符號機率為該當前片段之該上下文適應熵解碼初始化(40)該等符號機率,且若否,則依據如在上下文適應熵解碼該先前解碼之片段直至該先前解碼之片段之結尾時所獲得之符號機率來為該當前片段之該上下文適應熵解碼初始化(38)該等符號機率。
  4. 如申請專利範圍第1至3項中任一項之解碼器,其中該解碼器係組配來響應於該等片段(14)中之該當前片段內的該語法元素部分(18),以根據至少三種模式中之一者,亦即以該第一模式(20)及一第三模式(42)中之一者或該第二模式(22)解碼該當前片段,其中該解碼器係組配來:根據該第一模式(20),使用越過該等片段邊界之預 測性解碼將該當前片段解碼,根據該第二模式(22),使用獲限制為不越過該等片段邊界之預測性解碼將該當前片段解碼,以及根據該第三模式(42),使用上下文適應熵解碼及預測性解碼自該資料串流解碼該當前片段,該上下文適應熵解碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前解碼片段之該等符號機率的一初始化,且該預測性解碼越過該等片段邊界,其中該等第一及第三模式中之該一者係依據一語法元素來選擇。
  5. 如申請專利範圍第1至3項中任一項之解碼器,其中該解碼器係組配來響應於該資料串流中之一一般語法元素以便在至少兩種一般操作模式中之一者下操作,其中根據一第一一般操作模式,執行對每一片段之該語法元素部分的響應性,且根據一第二一般操作模式,必然地使用該等至少兩種模式中不同於該第一模式的一不同模式。
  6. 如申請專利範圍第2項之解碼器,其中該解碼器係組配來根據該等第一及第二模式,自該當前片段之開頭至結尾,必然且不間斷地繼續連續更新該等符號機率。
  7. 如申請專利範圍第2項之解碼器,其中該解碼器係組配來保存如在上下文適應熵解碼該先前解碼之片段直至該先前解碼之片段的結尾時所獲得的符號機率,以及在 根據該第一模式為當該前片段之該上下文適應熵解碼初始化該等符號機率時,依據所保存之符號機率為該當前片段之該上下文適應熵解碼初始化該等符號機率。
  8. 如申請專利範圍第4項之解碼器,其中該解碼器係組配來在該等第一及第二模式下將該預測性解碼限制於該圖像所再細分成的瓦片內。
  9. 如申請專利範圍第1至3項中任一項之解碼器,其中該解碼器係組配來在該等第一及第二模式下,自當前片段讀取揭示將該當前片段再細分為並行子部分的資訊;在第一並行子部分之結尾處停止該上下文適應熵解碼;且在任一後續並行子部分之一開頭處重新恢復該上下文適應熵解碼,其包括:在該第一模式下,依據在前並行子部分之符號機率的所保存狀態對該等符號機率之一初始化;以及在該第二模式下,獨立於任何先前解碼之片段及任何先前解碼之並行子部分對該等符號機率之一初始化。
  10. 如申請專利範圍第1至3項中任一項之解碼器,其中該解碼器係組配來根據該等至少兩種模式中之該第一者(20),為該當前片段拷貝來自在該第二模式下解碼之一在前片段的一片段標頭語法的一部分。
  11. 如申請專利範圍第1至3項中任一項之解碼器,其中該解碼器係組配來使用WPP處理程序自該資料串流(12)重構該圖像(10),其中每一片段(14)包含一開始語法部分(400),該開始語法部分指出個別片段之一解碼開頭在該 圖像(10)內之位置,且其中該解碼器係組配來:藉由使用該等片段之開始語法部分識別在該圖像之左手側處開始的片段來識別該等片段分組成的WPP子串流的進入點,以及以一與根據該片段次序循序著手該等WPP子串流之解碼錯列的方式並行地解碼該等WPP子串流。
  12. 一種用以將圖像(10)以該圖像(10)分割成單位片段(14)而編碼至一資料串流(12)中的編碼器,其中該編碼器係組配來根據一片段次序(16)將該等片段(14)編碼至該資料串流(12)中,且該編碼器係組配來:為該等片段中之一當前片段決定一語法元素部分(18)並將其編碼至該當前片段中,使得該語法元素部分發信表示將根據至少兩種模式(20,22)中之一者來編碼之該當前片段,以及若該當前片段將根據該等至少兩種模式中之一第一者(20)來編碼,則使用上下文適應熵編碼(24)來將該當前片段編碼至該資料串流(12)中,該上下文適應熵編碼包括越過片段邊界之上下文之一導出、該等上下文之符號機率之一連續更新、以及依據一先前解碼片段之符號機率之所保存狀態之該等符號機率之一初始化(38,40),且若該當前片段將根據該等至少兩種模式中之一第二者(22)來編碼,則使用上下文適應熵編碼將該當前片段編碼至該資料串流(12)中,該上下文適應熵編碼具有 將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前編碼片段之該等符號機率的一初始化。
  13. 如申請專利範圍第12項之編碼器,其中將該圖像(10)分割呈以多列及多行佈置且具有彼此之間界定之一光柵掃描次序(36)的編碼區塊(32),且該編碼器係組配來使每一片段(14)與該光柵掃描次序(36)中之該等寫碼區塊(32)之一連續子集相關聯,使得該等子集根據該片段次序(36)沿該光柵掃描次序彼此相隨。
  14. 如申請專利範圍第13項之編碼器,其中該編碼器係組配來保存如在根據該光柵掃描次序(36)上下文適應熵編碼該先前編碼之片段直至一列中之一第二編碼區塊(32)時且在根據該第一模式為該當前片段之該上下文適應熵編碼初始化該等符號機率時所獲得的符號機率,檢查與該當前片段相關聯之編碼區塊(32)之該連續子集的一第一編碼區塊(32)根據該光柵掃描次序是否為一列中的一第一編碼區塊,且若是,即依據如在根據該光柵掃描次序(36)上下文適應熵編碼該先前編碼之片段直至一列中之一第二編碼區塊時所獲得之該等所保存符號機率為該當前片段之該上下文適應熵編碼初始化(40)該等符號機率,且若否,則依據如在上下文適應熵編碼該先前編碼之片段直至該先前編碼之片段之結尾時所獲得之符號機率來為該當前片段之該上下文適應熵編碼初始化(38)該等符號機率。
  15. 如申請專利範圍第12至14項中任一項之編碼器,其中該編碼器係組配來將該語法元素部分編碼至該等片段(14)中之該當前片段中,使得該當前片段係被發信表示將根據至少三種模式中之一者,亦即以該第一模式(20)及一第三模式(42)中之一者或該第二模式(22)而編碼至其中,其中該編碼器係組配來:根據該第一模式(20),使用越過該等片段邊界之預測性編碼將該當前片段予以編碼,根據該第二模式(22),使用獲限制為不越過該等片段邊界之預測性編碼將該等當前片段予以編碼,以及根據該第三模式(42),使用上下文適應熵編碼及預測性編碼將該當前片段編碼至該資料串流中,該上下文適應熵編碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前編碼片段之該等符號機率的一初始化,且該預測性解碼越過該等片段邊界,其中該編碼器使用一語法元素在該等第一及第三模式中之一者之間區分。
  16. 如申請專利範圍第12至14項中任一項之編碼器,其中該編碼器係組配來判定一一般語法元素,並以根據該一般語法元素在至少兩種一般操作模式中之一者下操作來將其寫入至該資料串流中,亦即,根據一第一一般操作模式,執行將每一片段之該語法元素部分編碼,且根據一第二一般操作模式,必然地使用該等至少兩種模式中 不同於該第一模式的一不同模式。
  17. 如申請專利範圍第13項之編碼器,其中該編碼器係組配來根據該等第一及第二模式,自該當前片段之開頭至結尾,必然且不間斷地繼續連續更新該等符號機率。
  18. 如申請專利範圍第13項之編碼器,其中該編碼器係組配來保存如在上下文適應熵編碼該先前編碼之片段直至該先前編碼之片段的結尾時所獲得的該等符號機率,以及在根據該第一模式為該當前片段之該上下文適應熵編碼初始化符號機率時,依據所保存之符號機率為該當前片段之該上下文適應熵編碼初始化該等符號機率。
  19. 如申請專利範圍第15項之編碼器,其中該編碼器係組配來在該等第一及第二模式下將該預測性編碼限制於該圖像所再細分成的瓦片內。
  20. 一種用以自資料串流重構圖像的方法,該資料串流(12)係將該圖像以該圖像(10)分割成單位片段(14)而編碼形成,其中該方法包含根據一片段次序(16)自該資料串流(12)解碼該等片段(14),且該方法係響應於該等片段中之一當前片段內的一語法元素部分(18),以便根據至少兩種模式(20,22)中之一者解碼該當前片段,其中:根據該等至少兩種模式中之一第一者(20),該當前片段係使用上下文適應熵解碼(24)而自該資料串流(12)解碼,該上下文適應熵解碼包括越過片段邊界之上下文之一導出、該等上下文之符號機率之一連續更新、以及依據一先前解碼片段之符號機率之所保存狀態之該等 符號機率之一初始化(38,40),且根據該等至少兩種模式中之一第二者(22),該當前片段係使用上下文適應熵解碼而自該資料串流(12)解碼,該上下文適應熵解碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前解碼片段之該等符號機率的一初始化。
  21. 一種用以將圖像(10)以該圖像(10)分割成單位片段(14)而編碼至資料串流(12)中的方法,其中該方法包含根據一片段次序(16)將該等片段(14)編碼至該資料串流(12)中,且該方法包含:為該等片段中之一當前片段決定一語法元素部分(18)並將其編碼至該當前片段中,使得該語法元素部分發信表示將根據至少兩種模式(20,22)中之一者來編碼該當前片段,以及若該當前片段將根據該等至少兩種模式中之一第一者(20)來編碼,則使用上下文適應熵編碼(24)來將該當前片段編碼至該資料串流(12)中,該上下文適應熵編碼包括越過片段邊界之上下文之一導出、該等上下文之符號機率之一連續更新、以及依據一先前編碼片段之符號機率之所保存狀態之該等符號機率之一初始化(38,40),且若該當前片段將根據該等至少兩種模式中之一第二者(22)來編碼,則使用上下文適應熵編碼將該當前片 段編碼至該資料串流(12)中,該上下文適應熵編碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下文之符號機率之一連續更新、以及獨立於任何先前編碼片段之該等符號機率的一初始化。
  22. 一種電腦程式,其具有在運行於一電腦上時用以執行如申請專利範圍第20或21項之方法的一程式代碼。
  23. 一種載有資料串流之機器可存取媒體,該資料串流係有一圖像(10)以該圖像(10)分割成單位片段(14)而編碼入其中,其中該等片段係根據一片段次序(16)而可自該資料串流(12)解碼出來,及該資料串流包含該等片段中之一當前片段內的語法元素部分(18),用以指示一解碼器以便根據至少兩種模式(20,22)中之一者解碼該當前片段,其中:根據該等至少兩種模式中之一第一者(20),該當前片段係使用上下文適應熵解碼(24)以及越過片段邊界之預測性解碼而自該資料串流(12)解碼出來,該上下文適應熵解碼包括越過該等片段邊界之上下文之一導出、該等上下文之符號機率之一連續更新、以及依據一先前解碼片段之符號機率之已保存狀態之該等符號機率之一初始化(38,40),且根據該等至少兩種模式中之一第二者(22),該當前片段係使用上下文適應熵解碼及預測性解碼而自該資料串流(12)解碼出來,該上下文適應熵解碼具有將該等上下文之該導出限制為不越過該等片段邊界、該等上下 文之符號機率之一連續更新、以及獨立於任何先前解碼片段之該等符號機率的一初始化,且該預測性解碼具有將該預測性解碼限制為不越過該等片段邊界。
TW102113267A 2012-04-13 2013-04-15 低延遲圖像編碼技術 TWI527466B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201261624098P 2012-04-13 2012-04-13
US201261666185P 2012-06-29 2012-06-29

Publications (2)

Publication Number Publication Date
TW201349878A TW201349878A (zh) 2013-12-01
TWI527466B true TWI527466B (zh) 2016-03-21

Family

ID=48141968

Family Applications (9)

Application Number Title Priority Date Filing Date
TW102113267A TWI527466B (zh) 2012-04-13 2013-04-15 低延遲圖像編碼技術
TW102113268A TWI544803B (zh) 2012-04-13 2013-04-15 可縮放資料串流及網路實體
TW107125227A TWI711298B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW105103542A TWI586179B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW110145622A TWI816249B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW112131708A TW202349949A (zh) 2012-04-13 2013-04-15 用以自資料串流解碼資訊以重構圖像之解碼器及方法、用以將圖像編碼入資料串流之編碼器、及相關非暫時性電腦可讀媒體
TW109136256A TWI752680B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW105118950A TWI575940B (zh) 2012-04-13 2013-04-15 可縮放資料串流及網路實體
TW106110824A TWI634794B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體

Family Applications After (8)

Application Number Title Priority Date Filing Date
TW102113268A TWI544803B (zh) 2012-04-13 2013-04-15 可縮放資料串流及網路實體
TW107125227A TWI711298B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW105103542A TWI586179B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW110145622A TWI816249B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW112131708A TW202349949A (zh) 2012-04-13 2013-04-15 用以自資料串流解碼資訊以重構圖像之解碼器及方法、用以將圖像編碼入資料串流之編碼器、及相關非暫時性電腦可讀媒體
TW109136256A TWI752680B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
TW105118950A TWI575940B (zh) 2012-04-13 2013-04-15 可縮放資料串流及網路實體
TW106110824A TWI634794B (zh) 2012-04-13 2013-04-15 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體

Country Status (29)

Country Link
US (10) US10045017B2 (zh)
EP (6) EP3793200B1 (zh)
JP (7) JP5993083B2 (zh)
KR (13) KR20220164077A (zh)
CN (10) CN104620584B (zh)
AU (7) AU2013246828B2 (zh)
BR (2) BR122020007621B1 (zh)
CA (2) CA2870039C (zh)
CL (2) CL2014002739A1 (zh)
DK (5) DK2842318T3 (zh)
ES (5) ES2937793T3 (zh)
FI (1) FI3793200T3 (zh)
HK (3) HK1205839A1 (zh)
HU (5) HUE033604T2 (zh)
IL (5) IL301488B2 (zh)
LT (1) LT3793200T (zh)
MX (3) MX344485B (zh)
MY (1) MY173763A (zh)
PH (7) PH12014502303B1 (zh)
PL (4) PL3174295T3 (zh)
PT (5) PT3174295T (zh)
RS (1) RS64003B1 (zh)
RU (3) RU2603531C2 (zh)
SG (2) SG10201702988RA (zh)
SI (1) SI3793200T1 (zh)
TW (9) TWI527466B (zh)
UA (2) UA115240C2 (zh)
WO (2) WO2013153227A2 (zh)
ZA (1) ZA201407815B (zh)

Families Citing this family (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2972588A1 (fr) 2011-03-07 2012-09-14 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
FR2977111A1 (fr) * 2011-06-24 2012-12-28 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
SG10201606621XA (en) 2012-01-20 2016-09-29 Ge Video Compression Llc Coding Concept Allowing Parallel Processing, Transport Demultiplexer and Video Bitstream
CN104620584B (zh) 2012-04-13 2019-10-18 Ge视频压缩有限责任公司 可缩放数据流及网络实体
KR20130116782A (ko) * 2012-04-16 2013-10-24 한국전자통신연구원 계층적 비디오 부호화에서의 계층정보 표현방식
JP6376719B2 (ja) * 2012-06-29 2018-08-22 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
SG11201408612TA (en) 2012-06-29 2015-01-29 Fraunhofer Ges Forschung Video data stream concept
US9621905B2 (en) * 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
JP6080405B2 (ja) * 2012-06-29 2017-02-15 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US9635369B2 (en) * 2012-07-02 2017-04-25 Qualcomm Incorporated Video parameter set including HRD parameters
US10116947B2 (en) 2012-07-06 2018-10-30 Samsung Electronics Co., Ltd. Method and apparatus for coding multilayer video to include scalable extension type information in a network abstraction layer unit, and method and apparatus for decoding multilayer video
MX341067B (es) * 2012-09-26 2016-08-05 Panasonic Ip Corp America Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
AU2013322008B2 (en) * 2012-09-26 2016-10-27 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
RU2608465C1 (ru) * 2013-01-04 2017-01-18 Самсунг Электроникс Ко., Лтд. Способ энтропийного кодирования сегмента слайса и устройство для него и способ энтропийного декодирования сегмента слайса и устройство для него
US10419778B2 (en) * 2013-01-04 2019-09-17 Sony Corporation JCTVC-L0227: VPS_extension with updates of profile-tier-level syntax structure
KR102284110B1 (ko) * 2013-01-17 2021-07-30 삼성전자주식회사 디코더 설정을 위한 비디오 부호화 방법 및 그 장치, 디코더 설정에 기초한 비디오 복호화 방법 및 그 장치
EP2983364A4 (en) * 2013-04-05 2016-12-07 Samsung Electronics Co Ltd MULTILAYER VIDEO PROCESSING AND DEVICE AND MULTILAYER VIDEO DECODING PROCESS AND DEVICE
US9973748B1 (en) * 2013-04-26 2018-05-15 Mediatek Inc. Multi-core video decoder system for decoding multiple coding rows by using multiple video decoder cores and related multi-core video decoding method
JP2015005939A (ja) * 2013-06-24 2015-01-08 ソニー株式会社 画像処理装置および方法、プログラム、並びに撮像装置
JP6445552B2 (ja) 2013-07-15 2018-12-26 ジーイー ビデオ コンプレッション エルエルシー 拡張機構を使用している層idの信号
US9912943B2 (en) * 2013-07-15 2018-03-06 Qualcomm Incorporated Signaling of bit rate information and picture rate information in VPS
US10264261B2 (en) * 2013-08-27 2019-04-16 Integrated Device Technology, Inc. Entropy encoding initialization for a block dependent upon an unencoded block
US10110910B2 (en) * 2013-10-21 2018-10-23 Vid Scale, Inc. Parallel decoding method for layered video coding
WO2015100731A1 (en) * 2014-01-03 2015-07-09 Mediatek Singapore Pte. Ltd. Methods for determining the prediction partitions
US9402083B2 (en) * 2014-04-24 2016-07-26 Vidyo, Inc. Signaling conformance points using profile space
US10827178B2 (en) 2014-05-28 2020-11-03 Arris Enterprises Llc Content aware scheduling in a HEVC decoder operating on a multi-core processor platform
CA2951009A1 (en) 2014-06-20 2015-12-23 Sony Corporation Image encoding device and method, and image decoding device and method
US20160014415A1 (en) * 2014-07-08 2016-01-14 Mediatek Inc. Method and apparatus for performing wave-front parallel encoding procedure with constraint on coding mode and/or quantization parameter selection
US10080019B2 (en) 2014-09-19 2018-09-18 Intel Corporation Parallel encoding for wireless displays
US9516147B2 (en) 2014-10-30 2016-12-06 Microsoft Technology Licensing, Llc Single pass/single copy network abstraction layer unit parser
US10148969B2 (en) * 2015-02-11 2018-12-04 Qualcomm Incorporated Of sample entry and operation point signalling in a layered video file format
CN105323586B (zh) * 2015-04-07 2016-11-09 佛山世寰智能科技有限公司 一种用于多核并行视频编码和解码的共享内存接口
US10027989B2 (en) * 2015-05-06 2018-07-17 Integrated Device Technology, Inc. Method and apparatus for parallel decoding
JP2016219913A (ja) * 2015-05-15 2016-12-22 富士通株式会社 画像符号化装置、画像符号化方法および画像符号化プログラム
US10574993B2 (en) * 2015-05-29 2020-02-25 Qualcomm Incorporated Coding data using an enhanced context-adaptive binary arithmetic coding (CABAC) design
US10834444B2 (en) * 2015-08-25 2020-11-10 Sony Corporation Transmitting apparatus, transmission method, receiving apparatus, and reception method
WO2017091023A1 (ko) * 2015-11-24 2017-06-01 삼성전자 주식회사 비디오 복호화 방법 및 장치, 그 부호화 방법 및 장치
US10575007B2 (en) 2016-04-12 2020-02-25 Microsoft Technology Licensing, Llc Efficient decoding and rendering of blocks in a graphics pipeline
US10291923B2 (en) * 2016-05-24 2019-05-14 Qualcomm Incorporated Mapping of tile grouping and samples in HEVC and L-HEVC file formats
US10157480B2 (en) 2016-06-24 2018-12-18 Microsoft Technology Licensing, Llc Efficient decoding and rendering of inter-coded blocks in a graphics pipeline
US20180020228A1 (en) * 2016-07-12 2018-01-18 Mediatek Inc. Video processing system with multiple syntax parsing circuits and/or multiple post decoding circuits
US10523973B2 (en) 2016-09-23 2019-12-31 Apple Inc. Multiple transcode engine systems and methods
US11197010B2 (en) 2016-10-07 2021-12-07 Microsoft Technology Licensing, Llc Browser-based video decoder using multiple CPU threads
EP3590259A4 (en) * 2017-02-23 2020-08-19 RealNetworks, Inc. STRUCTURE AND SYNTAX OF CODING BLOCK BINARY FLOWS IN VIDEO CODING SYSTEMS AND METHODS
JP6957638B2 (ja) * 2017-03-20 2021-11-02 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 高度なビデオデータストリーム抽出および多重解像度ビデオ伝送
US11212529B2 (en) 2017-08-23 2021-12-28 Sony Semiconductor Solutions Corporation Image processing apparatus and image processing method
CN109587478B (zh) * 2017-09-29 2023-03-31 华为技术有限公司 一种媒体信息的处理方法及装置
GB2569107B (en) * 2017-11-29 2022-04-06 Displaylink Uk Ltd Managing display data
US10659781B2 (en) * 2018-04-02 2020-05-19 Tencent America LLC Concatenated coding units in flexible tree structure
RU2767601C1 (ru) * 2018-07-02 2022-03-17 Нокиа Текнолоджиз Ой Способ и устройство для связанной с тайлом адресации при кодировании видеосигнала
CN110891180B (zh) 2018-09-10 2023-11-17 华为技术有限公司 视频解码方法及视频解码器
SI3846467T1 (sl) 2018-10-04 2024-02-29 Lg Electronics Inc. Postopki za kodiranje slik na podlagi zgodovine
CN113196757B (zh) * 2018-12-20 2024-04-26 瑞典爱立信有限公司 用于使用图片中的均匀片段分割进行视频编码的方法和装置
WO2020125738A1 (en) * 2018-12-21 2020-06-25 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods using history based motion vector prediction
RU2751552C1 (ru) * 2019-01-16 2021-07-14 Телефонактиеболагет Лм Эрикссон (Пабл) Кодирование видео, содержащее равномерное мозаичное разделение с остатком
WO2020190715A1 (en) * 2019-03-15 2020-09-24 Beijing Dajia Internet Information Technology Co., Ltd. Signaling of lossless coding in video coding
JP2022526023A (ja) * 2019-04-10 2022-05-20 ホアウェイ・テクノロジーズ・カンパニー・リミテッド エンコーダ、デコーダ、および対応する方法
CN112789860A (zh) 2019-04-17 2021-05-11 株式会社 Xris 用于对图像信号进行编码/解码的方法及其装置
EP3981157A4 (en) * 2019-07-11 2022-07-06 Huawei Technologies Co., Ltd. MOTION FIELD STORAGE OPTIMIZATION FOR LINE BUFFER
BR112022005293A2 (pt) 2019-09-19 2022-09-20 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
US11356685B2 (en) * 2019-09-23 2022-06-07 Qualcomm Incorproated Signaling number of sub-pictures in high-level syntax for video coding
KR20220070437A (ko) 2019-10-05 2022-05-31 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩 툴의 레벨 기반 시그널링
EP4042678A4 (en) 2019-10-12 2023-01-18 Beijing Bytedance Network Technology Co., Ltd. USE AND REPORTING OF REFINEMENT VIDEO CODING TOOLS
KR20220073834A (ko) 2019-11-05 2022-06-03 엘지전자 주식회사 영상/비디오 코딩을 위한 상위 레벨 신택스 시그널링 방법 및 장치
CA3163400A1 (en) * 2019-11-28 2021-06-03 Lg Electronics Inc. Image/video coding method and apparatus
CN114868399A (zh) 2019-12-26 2022-08-05 字节跳动有限公司 条带类型和视频层的信令通知
KR20220120566A (ko) 2019-12-26 2022-08-30 바이트댄스 아이엔씨 비디오 비트스트림들에서의 가상 참조 디코더 파라미터들의 시그널링에 대한 제약들
CN115152230A (zh) * 2019-12-27 2022-10-04 抖音视界有限公司 视频图片标头中的条带类型的信令
WO2021134054A1 (en) 2019-12-27 2021-07-01 Bytedance Inc. Subpicture signaling in video coding
CN114946174A (zh) * 2020-01-09 2022-08-26 字节跳动有限公司 层间参考图片的存在的信令通知
WO2021164783A1 (en) 2020-02-21 2021-08-26 Beijing Bytedance Network Technology Co., Ltd. Signaling of slice and tile picture partitions
JP7393267B2 (ja) * 2020-03-25 2023-12-06 株式会社ソニー・インタラクティブエンタテインメント 画像データ転送装置、画像表示システム、および画像データ転送方法
KR102359367B1 (ko) * 2020-04-07 2022-02-07 주식회사 엔씨소프트 게임 스트리밍을 위한 방법 및 장치
CN117834916A (zh) * 2020-05-22 2024-04-05 字节跳动有限公司 访问单元中图片信息的信令
US11206415B1 (en) 2020-09-14 2021-12-21 Apple Inc. Selectable transcode engine systems and methods
US11375242B1 (en) 2021-01-27 2022-06-28 Qualcomm Incorporated Compression of bitstream indexes for parallel entropy coding
CN113873253B (zh) * 2021-10-29 2023-03-10 龙思云(北京)科技有限公司 基于rdp的云应用打开优化方法及设备
CN116112683A (zh) * 2021-11-10 2023-05-12 腾讯科技(深圳)有限公司 视频压缩方法、装置、计算机设备和存储介质
EP4220561A1 (en) * 2022-02-01 2023-08-02 Beijing Xiaomi Mobile Software Co., Ltd. Method and apparatus of encoding/decoding a slice of point cloud data

Family Cites Families (145)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5020121A (en) 1990-08-16 1991-05-28 Hewlett-Packard Company Neighborhood block prediction bit compression
US5786858A (en) * 1993-01-19 1998-07-28 Sony Corporation Method of encoding image signal, apparatus for encoding image signal, method of decoding image signal, apparatus for decoding image signal, and image signal recording medium
RU2093968C1 (ru) 1995-08-02 1997-10-20 Закрытое акционерное общество "Техно-ТМ" Способ кодирования-декодирования изображений и устройство для его осуществления
JP3409552B2 (ja) 1995-12-27 2003-05-26 三菱電機株式会社 ディジタル情報符号化装置、ディジタル情報復号化装置、及びディジタル情報符号化・復号化装置
JPH09298668A (ja) 1996-05-07 1997-11-18 Mitsubishi Electric Corp ディジタル情報符号化装置、ディジタル情報復号化装置、ディジタル情報符号化・復号化装置、ディジタル情報符号化方法、及びディジタル情報復号化方法
EP0861001B1 (en) 1997-02-07 2012-05-23 Texas Instruments Incorporated Error resilient video encoding
HUP0001273A3 (en) * 1998-01-20 2000-09-28 Interactic Holdings Llc New Yo A scalable low-latency switch, interconnect apparatus, interconnect structure and method
US6754271B1 (en) * 1999-04-15 2004-06-22 Diva Systems Corporation Temporal slice persistence method and apparatus for delivery of interactive program guide
US7093028B1 (en) * 1999-12-15 2006-08-15 Microsoft Corporation User and content aware object-based data stream transmission methods and arrangements
TW488155B (en) * 2000-01-27 2002-05-21 Hewlett Packard Co Task-partitioned hybrid codec
US6493388B1 (en) 2000-04-19 2002-12-10 General Instrument Corporation Rate control and buffer protection for variable bit rate video programs over a constant rate channel
GB2377573B (en) 2001-07-11 2004-03-31 Motorola Inc Video transmission system, video tranmission unit and methods of encoding/decoding video data
US7206501B2 (en) * 2001-10-12 2007-04-17 The Directv Group, Inc. Method and apparatus for identifying MPEG picture coding types
WO2003043345A1 (en) * 2001-11-16 2003-05-22 Ntt Docomo, Inc. Image encoding method, image decoding method, image encoder, image decode, program, computer data signal, and image transmission system
JP3807342B2 (ja) * 2002-04-25 2006-08-09 三菱電機株式会社 デジタル信号符号化装置、デジタル信号復号装置、デジタル信号算術符号化方法、およびデジタル信号算術復号方法
US7305036B2 (en) 2002-05-14 2007-12-04 Broadcom Corporation System and method for entropy code preprocessing
US6646578B1 (en) * 2002-11-22 2003-11-11 Ub Video Inc. Context adaptive variable length decoding system and method
US8661496B2 (en) 2002-12-10 2014-02-25 Ol2, Inc. System for combining a plurality of views of real-time streaming interactive video
CN1751518B (zh) 2003-02-18 2010-12-01 诺基亚有限公司 图像编码方法
US20070036215A1 (en) 2003-03-03 2007-02-15 Feng Pan Fast mode decision algorithm for intra prediction for advanced video coding
US7447369B2 (en) 2003-03-07 2008-11-04 Ricoh Co., Ltd. Communication of compressed digital images
US6894628B2 (en) * 2003-07-17 2005-05-17 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and methods for entropy-encoding or entropy-decoding using an initialization of context variables
US20050185541A1 (en) * 2004-02-23 2005-08-25 Darren Neuman Method and system for memory usage in real-time audio systems
US7586924B2 (en) 2004-02-27 2009-09-08 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream
EP1754378A1 (en) 2004-05-25 2007-02-21 Koninklijke Philips Electronics N.V. Method and device for encoding digital video data
EP1624610B1 (en) * 2004-08-06 2006-12-27 Matsushita Electric Industrial Co., Ltd. Feedback control for multicast or broadcast services
US7440626B2 (en) 2004-12-02 2008-10-21 Mitsubishi Electric Research Laboratories, Inc. Image transcoding
KR101138392B1 (ko) 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
JP4680608B2 (ja) 2005-01-17 2011-05-11 パナソニック株式会社 画像復号装置及び方法
US7664041B2 (en) * 2005-05-26 2010-02-16 Dale Trenton Smith Distributed stream analysis using general purpose processors
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
GB2429593A (en) 2005-08-26 2007-02-28 Electrosonic Ltd Data compressing using a wavelet compression scheme
CN102271249B (zh) 2005-09-26 2014-04-09 韩国电子通信研究院 用于可伸缩视频的感兴趣区域信息设置方法和解析方法
KR101255226B1 (ko) 2005-09-26 2013-04-16 한국과학기술원 스케일러블 비디오 코딩에서 다중 roi 설정, 복원을위한 장치 및 방법
JP4950206B2 (ja) 2005-10-11 2012-06-13 ノキア コーポレイション 効率的なスケーラブルストリーム適応のためのシステム及び方法
EP1947862B1 (en) 2005-10-14 2016-04-27 NEC Corporation Method for re-encoding image blocks, device using the same, and computer program
JP4211780B2 (ja) * 2005-12-27 2009-01-21 三菱電機株式会社 デジタル信号符号化装置、デジタル信号復号装置、デジタル信号算術符号化方法、およびデジタル信号算術復号方法
CA2845591C (en) 2006-01-05 2015-12-08 Nippon Telegraph And Telephone Corporation Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
WO2007081139A1 (en) 2006-01-09 2007-07-19 Lg Electronics Inc. Inter-layer prediction method for video signal
RU2384970C1 (ru) * 2006-01-09 2010-03-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ межслойного предсказания для видеосигнала
KR20070074453A (ko) 2006-01-09 2007-07-12 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
US8619865B2 (en) 2006-02-16 2013-12-31 Vidyo, Inc. System and method for thinning of scalable video coding bit-streams
WO2007107170A1 (en) * 2006-03-22 2007-09-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Coding scheme enabling precision-scalability
US8848789B2 (en) 2006-03-27 2014-09-30 Qualcomm Incorporated Method and system for coding and decoding information associated with video compression
WO2007114612A1 (en) * 2006-03-30 2007-10-11 Lg Electronics Inc. A method and apparatus for decoding/encoding a video signal
KR100828404B1 (ko) * 2006-05-08 2008-05-08 한국과학기술원 경계관찰질의를 이용한 데이터 스트림 처리 방법
JP2008017331A (ja) 2006-07-07 2008-01-24 Toshiba Corp パケットストリーム送信装置
US7840078B2 (en) 2006-07-10 2010-11-23 Sharp Laboratories Of America, Inc. Methods and systems for image processing control based on adjacent block characteristics
BRPI0714127A2 (pt) * 2006-07-13 2012-12-25 Qualcomm Inc codificaÇço de vÍdeo com escalabilidade de granularidade fina utilizando fragmentos alinhados por ciclo.
ES2348686T3 (es) 2006-07-13 2010-12-10 Qualcomm Incorporated Codificaciã“n de video con escalabilidad granular fina mediante fragmentos alineados con ciclos.
JP4129694B2 (ja) 2006-07-19 2008-08-06 ソニー株式会社 情報処理装置および方法、プログラム、並びに記録媒体
US7554468B2 (en) * 2006-08-25 2009-06-30 Sony Computer Entertainment Inc, Entropy decoding methods and apparatus using most probable and least probable signal cases
JP5143829B2 (ja) 2006-09-07 2013-02-13 エルジー エレクトロニクス インコーポレイティド スケーラブルビデオコーディングされたビットストリームのデコーディング方法及び装置
CN101150719B (zh) * 2006-09-20 2010-08-11 华为技术有限公司 并行视频编码的方法及装置
EP2080383A4 (en) * 2006-10-20 2009-12-09 Nokia Corp GENERIC INDICATION OF ADJUSTMENT GUIDE FOR SCALABLE MULTIMEDIA
US8218640B2 (en) 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture decoding using same-picture reference for pixel reconstruction
US8218641B2 (en) 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture encoding using same-picture reference for pixel reconstruction
US7778277B2 (en) 2006-11-03 2010-08-17 Mediatek Inc. Timing recovery method and system thereof
US7675549B1 (en) 2006-12-08 2010-03-09 Itt Manufacturing Enterprises, Inc. Imaging architecture for region and time of interest collection and dissemination
US8345767B2 (en) 2006-12-14 2013-01-01 Nec Corporation Video encoding method, video encoding device, and video encoding program
TWI328199B (en) * 2006-12-15 2010-08-01 Via Tech Inc Method for image rendering
US9179157B2 (en) 2007-01-05 2015-11-03 Thomson Licensing Hypothetical reference decoder for scalable video coding
US20080247459A1 (en) 2007-04-04 2008-10-09 General Instrument Corporation Method and System for Providing Content Adaptive Binary Arithmetic Coder Output Bit Counting
US20100142613A1 (en) * 2007-04-18 2010-06-10 Lihua Zhu Method for encoding video data in a scalable manner
WO2008129516A2 (en) 2007-04-24 2008-10-30 Nokia Corporation Signaling of multiple decoding times in media files
TWI330987B (en) * 2007-05-18 2010-09-21 Via Tech Inc Method and apparatus for determining whether adjacent macroblocks are located in the same slice
US8180029B2 (en) 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
WO2009003885A2 (en) 2007-06-29 2009-01-08 Thomson Licensing Video indexing method, and video indexing device
KR20090004658A (ko) 2007-07-02 2009-01-12 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
KR20090004659A (ko) 2007-07-02 2009-01-12 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
CN100534186C (zh) 2007-07-05 2009-08-26 西安电子科技大学 基于码率预分配的jpeg2000自适应率控制系统及方法
US8873625B2 (en) * 2007-07-18 2014-10-28 Nvidia Corporation Enhanced compression in representing non-frame-edge blocks of image frames
WO2009027606A1 (fr) * 2007-08-24 2009-03-05 France Telecom Codage/decodage par plans de symboles, avec calcul dynamique de tables de probabilites
CA2700448A1 (en) 2007-09-28 2009-04-02 Pin-Han Ho A robust system and method for wireless data multicasting using superposition modulation
US20090097704A1 (en) 2007-10-10 2009-04-16 Micron Technology, Inc. On-chip camera system for multiple object tracking and identification
US8938009B2 (en) * 2007-10-12 2015-01-20 Qualcomm Incorporated Layered encoded bitstream structure
US20090141809A1 (en) 2007-12-04 2009-06-04 Sony Corporation And Sony Electronics Inc. Extension to the AVC standard to support the encoding and storage of high resolution digital still pictures in parallel with video
KR101291196B1 (ko) 2008-01-25 2013-07-31 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US9357233B2 (en) 2008-02-26 2016-05-31 Qualcomm Incorporated Video decoder error handling
CN101552924B (zh) * 2008-03-31 2011-08-03 深圳市融创天下科技发展有限公司 一种用于视频编码的空间预测方法
CN101568037B (zh) * 2008-04-21 2010-12-15 展讯通信(上海)有限公司 一种dvb-h手机电视流式修复的方法、终端与系统
JP4962400B2 (ja) 2008-04-30 2012-06-27 ソニー株式会社 算術復号装置
US20090316793A1 (en) * 2008-06-20 2009-12-24 Yang Zhijie Michael Method and system for adaptive deblocking for avs1-p2
US8908763B2 (en) 2008-06-25 2014-12-09 Qualcomm Incorporated Fragmented reference in temporal compression for video coding
CN101320371A (zh) * 2008-07-07 2008-12-10 华南师范大学 一种基于可放缩矢量图形的空间信息分析方法
JP5449162B2 (ja) 2008-07-31 2014-03-19 三菱電機株式会社 映像符号化装置、映像符号化方法、映像再生装置、及び映像再生方法
EP2338278B1 (en) 2008-09-16 2015-02-25 Intel Corporation Method for presenting an interactive video/multimedia application using content-aware metadata
KR101007381B1 (ko) 2008-10-06 2011-01-13 주식회사 아이엠케이네트웍스 관심 영역을 고려한 영상 부호화 장치
JP5345149B2 (ja) 2008-10-10 2013-11-20 パナソニック株式会社 画像復号化装置および画像復号化方法
US7932843B2 (en) * 2008-10-17 2011-04-26 Texas Instruments Incorporated Parallel CABAC decoding for video decompression
KR20110096118A (ko) * 2008-10-30 2011-08-29 톰슨 라이센싱 이미지 인코딩 장치, 이미지 인코딩 방법, 및 이미지 인코딩 프로그램
US9467699B2 (en) * 2008-12-03 2016-10-11 Hfi Innovation Inc. Method for performing parallel coding with ordered entropy slices, and associated apparatus
WO2010067505A1 (ja) * 2008-12-08 2010-06-17 パナソニック株式会社 画像復号化装置および画像復号化方法
US20120014451A1 (en) * 2009-01-15 2012-01-19 Wei Siong Lee Image Encoding Methods, Image Decoding Methods, Image Encoding Apparatuses, and Image Decoding Apparatuses
KR20110106465A (ko) 2009-01-28 2011-09-28 노키아 코포레이션 비디오 코딩 및 디코딩을 위한 방법 및 장치
JP5516843B2 (ja) 2009-01-29 2014-06-11 コマニー株式会社 3ウェイ方式のパネル連結構造及び連結金具
TWI387314B (zh) 2009-03-10 2013-02-21 Univ Nat Central Image processing apparatus and method thereof
US8514931B2 (en) 2009-03-20 2013-08-20 Ecole Polytechnique Federale De Lausanne (Epfl) Method of providing scalable video coding (SVC) video content with added media content
JP5072893B2 (ja) 2009-03-25 2012-11-14 株式会社東芝 画像符号化方法および画像復号化方法
US20100246683A1 (en) * 2009-03-27 2010-09-30 Jennifer Lois Harmon Webb Error Resilience in Video Decoding
US9112618B2 (en) 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
US8948241B2 (en) * 2009-08-07 2015-02-03 Qualcomm Incorporated Signaling characteristics of an MVC operation point
US20110096828A1 (en) * 2009-09-22 2011-04-28 Qualcomm Incorporated Enhanced block-request streaming using scalable encoding
US8718149B2 (en) 2009-10-29 2014-05-06 Panasonic Corporation Image coding method and image decoding method
JP2011109469A (ja) * 2009-11-18 2011-06-02 Canon Inc コンテンツ受信装置及びコンテンツ受信装置の制御方法
KR101495724B1 (ko) 2010-02-02 2015-02-25 삼성전자주식회사 계층적 데이터 단위의 스캔 순서에 기반한 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
US20110196673A1 (en) * 2010-02-11 2011-08-11 Qualcomm Incorporated Concealing lost packets in a sub-band coding decoder
US8487791B2 (en) 2010-02-18 2013-07-16 Research In Motion Limited Parallel entropy coding and decoding methods and devices
US9973768B2 (en) * 2010-03-16 2018-05-15 Texas Instruments Incorporated CABAC decoder with decoupled arithmetic decoding and inverse binarization
JP2011217044A (ja) * 2010-03-31 2011-10-27 Sony Corp 画像処理装置、画像処理方法および画像処理プログラム
JP5914962B2 (ja) * 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
BR122020007923B1 (pt) 2010-04-13 2021-08-03 Ge Video Compression, Llc Predição interplano
US20110280314A1 (en) * 2010-05-12 2011-11-17 Texas Instruments Incorporated Slice encoding and decoding processors, circuits, devices, systems and processes
US9661338B2 (en) * 2010-07-09 2017-05-23 Qualcomm Incorporated Coding syntax elements for adaptive scans of transform coefficients for video coding
US9591320B2 (en) * 2010-07-15 2017-03-07 Texas Instruments Incorporated Context and bypass encoding video
US20120014433A1 (en) * 2010-07-15 2012-01-19 Qualcomm Incorporated Entropy coding of bins across bin groups using variable length codewords
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US20120014429A1 (en) 2010-07-15 2012-01-19 Jie Zhao Methods and Systems for Parallel Video Encoding and Parallel Video Decoding
US9131033B2 (en) 2010-07-20 2015-09-08 Qualcomm Incoporated Providing sequence data sets for streaming video data
US8930562B2 (en) * 2010-07-20 2015-01-06 Qualcomm Incorporated Arranging sub-track fragments for streaming video data
US20120063515A1 (en) * 2010-09-09 2012-03-15 Qualcomm Incorporated Efficient Coding of Video Parameters for Weighted Motion Compensated Prediction in Video Coding
US8344917B2 (en) 2010-09-30 2013-01-01 Sharp Laboratories Of America, Inc. Methods and systems for context initialization in video coding and decoding
US9313514B2 (en) 2010-10-01 2016-04-12 Sharp Kabushiki Kaisha Methods and systems for entropy coder initialization
US8902988B2 (en) 2010-10-01 2014-12-02 Qualcomm Incorporated Zero-out of high frequency coefficients and entropy coding retained coefficients using a joint context model
US20120082235A1 (en) * 2010-10-05 2012-04-05 General Instrument Corporation Coding and decoding utilizing context model selection with adaptive scan pattern
WO2012048053A2 (en) * 2010-10-05 2012-04-12 Massachusetts Institute Of Technology System and method for optimizing context-adaptive binary arithmetic coding
CN102476550B (zh) 2010-11-24 2015-09-30 上海宝信软件股份有限公司 刻印控制方法
US20120163457A1 (en) 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
US9215473B2 (en) 2011-01-26 2015-12-15 Qualcomm Incorporated Sub-slices in video coding
FR2972588A1 (fr) * 2011-03-07 2012-09-14 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
US9325999B2 (en) 2011-03-10 2016-04-26 Sharp Kabushiki Kaisha Video decoder for slices
MX352139B (es) 2011-03-10 2017-11-10 Velos Media Int Ltd Método de decodificación de video.
GB2491164B (en) 2011-05-25 2013-09-11 Canon Kk Method and device for compression of video data
US8995523B2 (en) 2011-06-03 2015-03-31 Qualcomm Incorporated Memory efficient context modeling
EP2719182B1 (en) 2011-06-07 2018-05-02 Thomson Licensing Method for encoding and/or decoding images on macroblock level using intra-prediction
US10298939B2 (en) 2011-06-22 2019-05-21 Qualcomm Incorporated Quantization in video coding
US9398307B2 (en) 2011-07-11 2016-07-19 Sharp Kabushiki Kaisha Video decoder for tiles
US9584819B2 (en) 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US9247258B2 (en) 2011-10-26 2016-01-26 Qualcomm Incorporated Unified design for picture partitioning schemes
WO2013077236A1 (en) 2011-11-21 2013-05-30 Canon Kabushiki Kaisha Image coding apparatus, image coding method, image decoding apparatus, image decoding method, and storage medium
US9578326B2 (en) 2012-04-04 2017-02-21 Qualcomm Incorporated Low-delay video buffering in video coding
CN104620584B (zh) 2012-04-13 2019-10-18 Ge视频压缩有限责任公司 可缩放数据流及网络实体
CA2870989C (en) 2012-04-23 2018-11-20 Panasonic Intellectual Property Corporation Of America Encoding method, decoding method, encoding apparatus, decoding apparatus, and encoding and decoding apparatus
SG11201408612TA (en) 2012-06-29 2015-01-29 Fraunhofer Ges Forschung Video data stream concept
US9930562B2 (en) 2016-02-05 2018-03-27 Arris Enterprises Llc Utilization based control of wireless network services

Also Published As

Publication number Publication date
EP2842318A2 (en) 2015-03-04
IL295693B1 (en) 2023-04-01
EP3481068A1 (en) 2019-05-08
JP2015516747A (ja) 2015-06-11
TW201349878A (zh) 2013-12-01
TWI634794B (zh) 2018-09-01
AU2013246828B2 (en) 2016-08-25
JP6560170B2 (ja) 2019-08-14
CN108337526B (zh) 2020-10-30
IL268801A (en) 2019-10-31
CN104620584A (zh) 2015-05-13
US20200275109A1 (en) 2020-08-27
CN104641647A (zh) 2015-05-20
TWI544803B (zh) 2016-08-01
KR102472481B1 (ko) 2022-11-30
AU2022268403B2 (en) 2023-06-15
FI3793200T3 (fi) 2023-03-01
SG11201406493RA (en) 2014-11-27
RS64003B1 (sr) 2023-03-31
US11876985B2 (en) 2024-01-16
AU2023229505A1 (en) 2023-09-28
AU2022201459A1 (en) 2022-03-24
WO2013153227A3 (en) 2013-12-19
KR20150020538A (ko) 2015-02-26
PH12017501900A1 (en) 2018-06-25
IL301488B1 (en) 2023-11-01
KR20190057419A (ko) 2019-05-28
JP7140870B2 (ja) 2022-09-21
JP6133400B2 (ja) 2017-05-24
US20220224920A1 (en) 2022-07-14
CN115442610A (zh) 2022-12-06
PH12017501899B1 (en) 2018-06-25
PH12017501902A1 (en) 2018-06-25
MX344485B (es) 2016-12-16
PL3174295T3 (pl) 2019-05-31
CN108540814B (zh) 2021-03-05
RU2710908C2 (ru) 2020-01-14
EP4192012A1 (en) 2023-06-07
IL261381B (en) 2019-09-26
RU2019141081A (ru) 2021-06-16
JP2024050612A (ja) 2024-04-10
US20150023434A1 (en) 2015-01-22
HK1258728A1 (zh) 2019-11-15
KR102096566B1 (ko) 2020-04-02
RU2019141081A3 (zh) 2021-06-16
KR101981270B1 (ko) 2019-05-23
IL301488B2 (en) 2024-03-01
PH12017501900B1 (en) 2018-06-25
CN108337526A (zh) 2018-07-27
SI3793200T1 (sl) 2023-03-31
KR102330153B1 (ko) 2021-11-23
PT3793200T (pt) 2023-02-06
MX2023001435A (es) 2023-03-06
MY173763A (en) 2020-02-19
PL3793200T3 (pl) 2023-06-12
TW202130175A (zh) 2021-08-01
DK3793200T3 (da) 2023-02-13
US11259034B2 (en) 2022-02-22
TWI711298B (zh) 2020-11-21
EP2842318B1 (en) 2016-12-28
CN108540814A (zh) 2018-09-14
CN104620584B (zh) 2019-10-18
CN115442611A (zh) 2022-12-06
KR101981267B1 (ko) 2019-05-23
DK3481068T3 (da) 2020-11-16
US10674164B2 (en) 2020-06-02
MX2014012255A (es) 2014-12-05
TW201408074A (zh) 2014-02-16
AU2013246828A1 (en) 2014-12-11
CL2014002739A1 (es) 2015-04-10
IL261381A (en) 2018-10-31
AU2022201459B2 (en) 2022-08-18
US11122278B2 (en) 2021-09-14
KR102171208B1 (ko) 2020-10-28
KR20170140433A (ko) 2017-12-20
UA125468C2 (uk) 2022-03-23
AU2016259446B2 (en) 2019-01-17
US20190342560A1 (en) 2019-11-07
CN108462880B (zh) 2021-04-09
WO2013153226A2 (en) 2013-10-17
US20190045201A1 (en) 2019-02-07
EP3174295B1 (en) 2018-12-12
IL295693B2 (en) 2023-08-01
KR20200020012A (ko) 2020-02-25
PT3174295T (pt) 2019-03-25
AU2016259446A1 (en) 2016-12-08
TW201705765A (zh) 2017-02-01
PH12014502303A1 (en) 2014-12-22
HUE060889T2 (hu) 2023-04-28
KR101667341B1 (ko) 2016-10-18
EP3793200B1 (en) 2022-11-09
TWI816249B (zh) 2023-09-21
KR20160145843A (ko) 2016-12-20
PL2842313T3 (pl) 2017-06-30
ES2607438T3 (es) 2017-03-31
BR122020007621B1 (pt) 2023-03-07
CN108322752B (zh) 2021-04-09
EP2842313A2 (en) 2015-03-04
KR101809591B1 (ko) 2017-12-18
HUE042951T2 (hu) 2019-07-29
TWI752680B (zh) 2022-01-11
MX2023001434A (es) 2023-03-06
TW201742452A (zh) 2017-12-01
US10123006B2 (en) 2018-11-06
KR20190057417A (ko) 2019-05-28
US20200221105A1 (en) 2020-07-09
PT2842318T (pt) 2017-03-31
US10045017B2 (en) 2018-08-07
TW202349949A (zh) 2023-12-16
IL307660A (en) 2023-12-01
RU2758037C2 (ru) 2021-10-25
CL2016001115A1 (es) 2017-04-07
KR20170140432A (ko) 2017-12-20
KR20200123289A (ko) 2020-10-28
KR101686088B1 (ko) 2016-12-13
DK2842313T3 (en) 2017-01-23
KR101981272B1 (ko) 2019-05-23
JP5993083B2 (ja) 2016-09-14
CA2870039C (en) 2019-10-08
CN108322752A (zh) 2018-07-24
KR20170140434A (ko) 2017-12-20
JP2022184904A (ja) 2022-12-13
PH12017501899A1 (en) 2018-06-25
EP3793200A1 (en) 2021-03-17
HUE033604T2 (en) 2017-12-28
SG10201702988RA (en) 2017-05-30
JP2015516748A (ja) 2015-06-11
CA3056122A1 (en) 2013-10-17
AU2021201682B2 (en) 2022-07-07
RU2016141337A3 (zh) 2018-12-18
US20240155141A1 (en) 2024-05-09
PH12014502303B1 (en) 2014-12-22
EP3481068B1 (en) 2020-08-12
KR102080085B1 (ko) 2020-02-24
RU2603531C2 (ru) 2016-11-27
KR102080835B1 (ko) 2020-02-25
PH12017500992A1 (en) 2018-06-25
PH12019501219A1 (en) 2019-11-11
LT3793200T (lt) 2023-02-27
US20150023409A1 (en) 2015-01-22
WO2013153227A2 (en) 2013-10-17
TWI586179B (zh) 2017-06-01
ZA201407815B (en) 2016-01-27
ES2937793T3 (es) 2023-03-31
AU2022268403A1 (en) 2022-12-15
JP2017022724A (ja) 2017-01-26
RU2014145559A (ru) 2016-06-10
KR20190057418A (ko) 2019-05-28
TW201921932A (zh) 2019-06-01
BR112014025496A2 (pt) 2017-09-19
EP3174295A1 (en) 2017-05-31
DK2842318T3 (en) 2017-04-10
US20180309997A1 (en) 2018-10-25
CN115426496A (zh) 2022-12-02
RU2016141337A (ru) 2018-12-18
CN110809160A (zh) 2020-02-18
HUE051172T2 (hu) 2021-03-01
KR20220164077A (ko) 2022-12-12
IL301488A (en) 2023-05-01
DK3174295T3 (en) 2019-04-01
KR20150013521A (ko) 2015-02-05
ES2831415T3 (es) 2021-06-08
UA115240C2 (uk) 2017-10-10
HK1258819A1 (zh) 2019-11-22
WO2013153226A3 (en) 2013-12-19
IL295693A (en) 2022-10-01
PT2842313T (pt) 2016-12-22
TW202220443A (zh) 2022-05-16
KR20210144928A (ko) 2021-11-30
JP6864425B2 (ja) 2021-04-28
PT3481068T (pt) 2020-11-19
CN108462880A (zh) 2018-08-28
PH12017501901B1 (en) 2018-06-25
IL268801B (en) 2022-09-01
US11343517B2 (en) 2022-05-24
HK1205839A1 (zh) 2015-12-24
JP2021106415A (ja) 2021-07-26
CA3056122C (en) 2021-05-04
CN104641647B (zh) 2018-05-04
US20220264127A1 (en) 2022-08-18
PL2842318T3 (pl) 2017-06-30
CN110809160B (zh) 2022-09-16
JP2019208250A (ja) 2019-12-05
AU2019202551B2 (en) 2020-12-17
BR112014025496B1 (pt) 2023-03-07
AU2019202551A1 (en) 2019-05-09
PH12017501901A1 (en) 2018-06-25
TWI575940B (zh) 2017-03-21
PH12017501902B1 (en) 2018-06-25
HUE031183T2 (en) 2017-06-28
EP2842313B1 (en) 2016-10-19
TW201633777A (zh) 2016-09-16
ES2715107T3 (es) 2019-05-31
US10694198B2 (en) 2020-06-23
AU2021201682A1 (en) 2021-04-08
CA2870039A1 (en) 2013-10-17
ES2620707T3 (es) 2017-06-29

Similar Documents

Publication Publication Date Title
JP7140870B2 (ja) 低遅延画像符号化