TW200904197A - Efficient video block mode changes in second pass video coding - Google Patents

Efficient video block mode changes in second pass video coding Download PDF

Info

Publication number
TW200904197A
TW200904197A TW097107409A TW97107409A TW200904197A TW 200904197 A TW200904197 A TW 200904197A TW 097107409 A TW097107409 A TW 097107409A TW 97107409 A TW97107409 A TW 97107409A TW 200904197 A TW200904197 A TW 200904197A
Authority
TW
Taiwan
Prior art keywords
video
mode
block
encoding
channel
Prior art date
Application number
TW097107409A
Other languages
English (en)
Inventor
Pei-Song Chen
Phanikumar Bhamidipati
Sitaraman Ganapathy Subramanian
Amit Rohatgi
Seyfullah Halit Oguz
Scott T Swazey
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW200904197A publication Critical patent/TW200904197A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • H04N19/194Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive involving only two passes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

200904197 九、發明說明: 【發明所屬之技術領域】 本發明係關於數位視訊編碼,且f 上 x ^ 且更特疋δ之,係關於多 通道視訊編碼,其中第—通道用以編碼視訊區塊且第二通 道改進該編碼以滿足位元速率約束或達到其他目的。 本申請案主張2007年3月2曰申請之美國臨時申請案第 6〇/m,_號之權利,該案之全文以引用的方式併入本文 中。 【先前技術】 數位視訊性能可併入廣泛多種設備t,此等設備包括數 位電視、數位直播系統、無線通信設備'無線廣播系統、 個人數位助理(PDA)、膝上型或桌上電腦、數位相機、數 位記錄設備、視訊遊戲設備、視訊遊戲控制台、蜂巢式或 衛生無線電電話及類似物。數位視訊設備實施諸如MpEG_ 2、MPEG-4,或H.264/MPEG-4,第1〇部分,進階視訊編 碼(AVC)之視§fL壓縮技術,以更高效地傳輸及接收數位視 訊。視§fl壓縮技術執行空間及時間預測以減少或移除視訊 序列所固有的冗餘。 在視§K編瑪中’視訊壓縮經常包括空間預測、運動估計 及運動補償。内部編碼(intra_c〇ding)依賴於空間預測以減 少或移除給定視訊圖框内的視訊區塊之間的空間冗餘。中 間編碼(inter-coding)依賴於時間預測以減少或移除視訊序 列之連續視訊圖框之視訊區塊之間的時間冗餘。對於中間 、編石馬’視訊編碼器執行運動估計以追縱兩個或兩個以上鄰 129545.doc 200904197 近圖框之間的匹配視訊區塊之移動。運動估計產生運動向 量,其指示視訊區塊相對於一或多個參考圖框中之相應預 測視訊區塊之移位。運動補償使用運動向量自參考圖框或 片段產生預測視訊區塊。在運動補償之後,藉由自二:二 之原始視訊區塊減去預測視訊區塊而產生殘餘資訊(諸如 殘餘視訊區塊)。視訊編碼器通常應用變換、量化及變換 係數編碼過程以進一步減小與殘钤區換夕、s j / 4 /、饮珎匕巩之通仏相關聯的位 元速率。 有時’視訊編碼使用多個通道。在多通道視訊編碼中, 第-視訊編碼通道用以編碼視訊區塊,且第二視訊編碼通 道改變且改進該編碼。多通道視訊編碼可用以調整與視訊 編碼相關聯之位元速率。習知地’第二通道視訊編碼可再 執行第一視訊編碼通道之所有編碼步驟,但可應用不同位 準之a:化。然而,第二編碼通道期間的所有視訊區塊之完 全重編碼為計算密集的。 【發明内容】 大體而言,本發明描述用於在一多通道視訊編碼情形下 進行第二通道視訊編碼之技術。第二編碼通道改進第一通 道中所執行之編碼(例如)以滿足位元速率約束、採用未使 用頻寬及/或達到其他目的。根據本發明,在第二通道期 間、’扁碼的些視讯區塊之編碼模式可相對於第一通道中之 用於該等視訊區塊之編碼模式而改變。然而,對於具有改 麦之模式之彼專視汛區塊而言,運動資訊不改變。作為一 實例’雙向預測⑻片段(或圖框)可支援所謂,,跨越,,模式及 \29545.doc 200904197 所渭’直接”模式下的視訊區塊編碼。在跨越模式及直接模 式兩者下,運動資訊係(例如)基於相鄰視訊區塊之運動資 訊以相同方式於解碼器處導出。然而,跨越模式與直接模 式之間的差異在於,直接模式視訊區塊包括殘餘資訊,而 跨越模式視訊區塊不包括殘餘資訊。 根據本發明’第二通道編碼可將—些區塊之視訊區塊模 式(例如)在跨越模式或直接模式之間改變,而不改變定義 供該等區塊用之運動資訊的方式。舉例而言,視訊區塊可 自直接模式變為跨越模式或自跨越模式變為直接模式,而 T改變於解碼器處導出運動資訊的方式。可對自跨越模式 變為直接模式之任何視訊區塊添加殘餘資訊,且可對自直 接模式變為跨越模式之任何視訊區塊消除殘餘資訊。對於 預測(p)片段或圖框,自跨越模式至中間16xl6模式的第二 通道模式改變亦可獲益於本㈣m通道編碼技 術亦可包括量化參數調整,且該等模式改變可使該等量化 參數調整對第:編碼通道之編碼改進有比無模式改變所達 成之改進更深遠的效應。 在一實例中,本發明提供一種視訊編碼方法,其包含: 在-第-編碼通道巾編碼視訊區塊,丨中該第—編碼通道 為該等視訊區塊選擇定義供該等視訊區塊用之運動資訊的 視I編碼模式,及在—第二編碼料巾編碼該等視訊區 塊,其中該苐二編碼通道調整與該等視訊區塊相關聯之— 或夕個量化參數’且基於該等經調整量化參數改變與該等 視訊區塊相關聯之視訊編碼模式中的至少一些,其中該等 129545.doc 200904197 改變的視訊編碼模式不改變運動資訊。 :另—實例中’本發明提供-種裝置,其包含一在—第 '碼通道中_視訊區塊的視訊編碼器,其中 :通道為該等視訊區塊選擇定義供該等視訊區塊用之運: 貝訊的視i編碼模式,且在一第二編碼通道中編碼該 訊區塊,其中該第-迫说、8、苦袖私 見 甲4-、.扁碼通道凋整與該等視訊區塊 之一或多個量化參數,且美於兮望 9 η、 纟基於5亥荨經§周整量化參數改變盥 ㈣視訊區塊相關聯之視訊編碼模式令的至少一些,盆中、 該等改變的視訊編碼模式不改變該運動資訊。 〃、 一在另-實例中,本發明提供—種設備,其包含:用於在 -第-編碼通道中編碼視訊區塊的構件,其中用於在該第 一編碼通道中編碼視訊區塊的構件包括用於為該等視訊區 塊選擇定義供該等視訊區塊用之運動資訊的視訊編碼模 式’及用於在-第二編碼通道中編碼該等視訊區塊的構 件’其中用於在該第二編碼通道令編碼該等視訊區塊的構 件包括用於調整與該等視訊區塊相關聯之一或多個量化灸 數的構件’及用於基於該等經調整量化參數改變與該等視 訊區塊相關聯之視訊編碼模式中的至少一些的構件,其中 該等改變的視訊編碼模式不改變該運動資訊。 八 本發明中所描述之技術可實施於硬體、軟體、動體或其 任何組合巾。若實施於軟體巾1軟體可在諸如㈣理 斋、特殊應用積體電路(ASIC)、場可程式化閘陣列_句 或數位信號處理器(DSP)之一或多個處理器中執行。執行 該等技術之軟體最初可儲存於電腦可讀媒體中且載入並= 129545.doc 200904197 行於處理器中。 :由本發明亦涵蓋一種電腦可讀媒體,其包含在於- 二/ 時使該處理器進行以下操作之指♦:在一第 編碼通道中編碼視 見π e塊,其中該第一編碼通道為該等 視讯區塊選擇定義供該等視_㈣之運動資訊的視訊編 及在1二編碼通道中編碼該等視訊區塊,其中 /扁馬通道β周整與該等視訊區塊相關聯之—或多個量 ^ ^'基於°亥等經調整量化參數改變與該等視訊區塊 相關聯之該等視訊編碼模式中的至少-些,其中該等改變 的視訊編碼模式不改變該運動資訊。 在一些狀況下,該電腦可讀媒體可形成-可售給製造者 及/或用於-視訊編碼設備中的電腦程式產品之部分。該 電腦程式產品可包括該電腦可讀媒體,且在一些狀況下, 亦可包括封裝材料。 =iw附圖式及下文描述中陳述本發明之__或多個態樣的 、、、田即。本發明中所描述之技術之其他特徵、目標及優點將 自描述及圖式及自申請專利範圍顯而易見。 【實施方式】 本發明描述用於在多通道視訊編碼情形下進行第二通道 視訊編碼之技術。第二視訊編碼通道改進在第—通道中所 執行之視訊編碼以滿足位元速率約束、採用未使用頻寬或 達到其他目的。在本發明中,第二編碼通道大體指代在一 第一編碼通道之後的任何後續編碼通道。因此,除第二通 道係在第一編碼通道之後執行之外,短語”第二編碼通道" 129545.doc •10- 200904197 中之術語”第二”並不睥_ % # , ^ a不/、/、他編碼通道的任何排序關 係。如本文中所述,笫_ 第一編碼通道實際上可為任何後續編 碼通道’諸如第一編碼通道之後的第三或第四編碼通道。 根據本發明’在第二編碼通道中用於一些視訊區塊之編 碼模式可相對於第一通道中所用之編碼模式改變。然而, 對於,、有模式改變之視訊區塊,運動資訊保持相同(亦 即,運動資訊係以相同方式於解碼器處導出)。在一些狀 況下,第二編碼通道可再使用在第—編科道期間所執行 之任何基於運動之計算,因為對於具有模式改變之彼等視 訊區塊,運動資訊不變。 一在多通道視訊編碼中,第一通道用以編碼視訊區塊且第 二通道改進在第一通道期間所執行之編碼。在—些狀況 :,第-通道編碼可完全重編碼資訊。然而,為了效率及 簡單起見更希望第二通道編碼採用在第—通道中所形成 :貝λ中的-些’且改進在第一通道期間所產生之經編碼 資=的其他部分。舉例而言’可將為第一通道中之視訊區 塊定義之運動向量資訊指派給第二通道中之相同視訊區 塊’而無需重新計算運動向量以確保不引入傳播效應。然 而,用於第二通道之量化參數可相對於用於第—通道之量 化參數改變。 根據本發明’第二通道編碼可改變視訊區塊模式(例 如’在跨越模式或直接模式之間)。直接模式及跨越模式 為定義:於視訊區塊之運動資訊之視訊編碼模式的兩個實 例。詳言之,直接模式視訊區塊及跨越模式視訊區塊未經 !29545^〇ι 200904197 編碼而包括運動資訊,但實情 訊係基於相鄰視訊區塊之運動資為十於:寻模式,運動資 ^ ^ 遇動貝5fl而於解碼器處導出。作 為一實例,本發明提出在第二 通道編碼中在跨越模式與直 = 改變的能力。舉例而言,-自跨越模式至直接 ==可幫靖量化參數改變將對第二通道 冰遢的品質增強效應。或者,— 目罝接杈式至跨越模式之 、*τ在弟一通道中不執行完全曹總踩+ _ 重編碼之情況下提供減小 位70速率之簡單方式。 可對自跨越模式變為直接模式之 次 彳了視讯&塊添加殘餘 貝成,且可對自直接模式變為跨 认& 5越杈式之任何視訊區塊消 除殘餘資訊。結合此等模式改變, 欠里化參數改變可在第二 、,扁碼通道中達成比在無模式改
Sg # Μ π 匱况下可達成之情況更 奴乃所/函蓋之特定模式改變不 q入任何傳播效應,諸如歸因 *夂連動向Ϊ之改變而傳播之 視訊圖框的改變,因為直接模式及跨越模式以類似方式 (亦即’基於相鄰視訊區塊之運動向量)指派運動向量。第 —編碼通道中的計算複雜性亦 货 ;J J相對於習知技術(諸如在 弟-編碼通道期間執行完全重編碼之技術)降低。 ^同類型之視訊編碼單元(諸如,視訊區塊之圖框或視 :區塊之片段)可具有可用以編竭該類型之視訊編瑪單元 m區塊的不同編碼模式。舉例而言,在ITU H264 中’存在内部(I)圖框或片段、預 益、, 桷剎(P)圖框或片段及雙向 預剩(B)圖框或片段。雖縛可在 訊编r 或片段階層上定義視 Λ編碼早元,但為簡單起見, 卜揭不内容將僅提及I片 I29545.doc -12- 200904197 •k p # &及b片段D然而’若可在圖框階層上或以不同方 式定義視訊編碼單元,則亦可應用本發明之技術。 I片段具有經由空間預測及内部編碼而編碼之視訊區 塊。在此狀況下,比較該等視訊區塊與同一片段之其他視 訊區塊以採用空間冗餘。對於u段之視訊區塊,使用同 -片段内之預測區塊以定義殘餘資訊,該殘餘資訊指示經 編碼之視訊區域與同—片段内之預測區塊之間的差異。] 片& L系展現最J量之壓縮(例如,在】片段、p片段及B片 多又田中)❻固有地比其它片段更穩健,因為!片段不依賴 於其他片段中之資訊進行預測。 p片段具有相對於“編碼之片段之視訊區塊而經由運 動估計及運動補償編碼之視訊區塊以採用時間冗餘。對於 P片段之視訊區塊,可使用先前編瑪之片段中之預測區塊 以定義殘餘資訊。X,該殘餘資訊指代指示經編碼之視訊 區塊與預測區塊之間之差異的資訊,對於,該殘餘 資訊駐留於一先前編碼之片段内以採用時間冗餘。 B片段具有相對於駐留於先前編碼之片段及/或隨後編碼 之片段中之視㈣塊而經由運動估計及運動補償編碼之視 訊區塊。對於B片段之視訊區塊,不同片段中之預測區塊 (在一視訊序列之正時間方向或負時間方向上)可用以定義 殘餘資訊。 Ϊ片段可充當其他P«片段之視訊區塊之中間預測的參 考。因此’ P或B片段之視訊區塊可定義返回提及z片段之 視訊區塊的運動資訊。類似地’ p片段可充當其他p片段或 J29545.doc 200904197 雖然對ITU Η.264之一些 但通常不使用Β片段作為 B片段之中間預測之參考。然而 改進允許一些Β片段充當參考 參考。 每一類型之片段(例如,1片段、Ρ片段或Β片段)可定義 若干可能模式’其可用以編碼不同視訊區塊。舉例而古, 1片段之視訊區塊可定義内部模式,諸如内部16χ16、„ W内部8χ16、内部8χ8、内部8Μ、内部4心⑽ 4x4等。Ρ片段之視訊區塊可使用該等内部模式,且亦可定 義各種中間模式,諸如中間16χ16、中間、中門 8X16、中間8X8、中間㈣、中間㈣、中間4χ4等。另 外,Ρ片段可定義一所謂的”路拍^ 旳跨越权式。以該跨越模式編 碼之視訊區塊基於相鄰視訊區塊之運動向量定義運動向量 且不包括任何殘餘資訊。在解碼器處,基於相鄰視訊區塊 之運動向量導出用於跨越模式視訊區塊之運動向量。因 此,對於跨越模式視訊區塊,無需編碼或輸送運動向量資 訊。 、 B片段之視訊區塊可支援如片段之各種模式,且運動 向量可指向-視訊序列之先前或後續片段。❿片段之視 afl £塊 '一樣,B片段之補旬pr 气視訊區塊可定義跨越模式。另外, B片段亦支援被稱為”直接模式, 七.,.^ v 模式。該直接模式 == 越模式,但以該直接模式編碼之視訊 二1 。詳言之’以該直接模式編碼之視訊區 塊可^具任何㈣向量,因為直接料視崎塊基於相 鄰視訊區塊之運動向量定義運動向量。“,直接模式視 129545.doc •14- 200904197 訊區塊包括指示由運動向量識別之視訊區塊與經編碼之視 訊區塊之間的差異之殘餘資訊。 根據本發明,第二通道編碼可在跨越模式或直接模式之 間改1B片^又之視訊區塊之模式,而不改變為該等視訊區 塊定義之運動資訊(例如,運動向量)。可為自跨越模式變 為直接模式之任何視訊區塊添加殘餘資訊,且可為自直接 模式變為跨越模式之任何視訊區塊消除殘餘資訊。類似技 /. 術亦可應用於P片段之視訊區塊以自跨越模式變為中間 16x16模式。由於p片段可能不支援直接模式,故利用一基 於針對跨越模式視訊區塊之運動向量計算導出的所指派運 動向里,可使用一中間16xl6模式之使用以替代直接模 式在此狀况下,在第二通道中將為在跨⑼ 一編碼通道期間所選擇的)下之N段之視訊區較義的運 動向量指派給中間16X16模式下之視訊區塊。接著產生殘 餘資訊以作為預測視訊區塊與經編碼之區塊之間的差異。 在此狀況下’雖然視訊區塊可定義為中間ΐ6χΐ6模式區 塊’但其運動向量實際上被計算為已由第一編碼通道之跨 越模式定義之運動向量。編碼^將已由[編碼通道之 跨越桓式定義之運動向量指派為中間16川料下的第二 通道之運動向量。中間16x16模式允許包括詩P片段之視 訊區塊之殘餘資訊。 編碼中所用之量化參數 此〇二 双J在第二編碼通道中相對於第一 編瑪通道而調整。然而, 曰 白知地,置化參數之減小(此應 產生較佳品質)尤其對B片與 &了此不具有非常顯著的效應, 129545.doc 200904197 因為跨越模式下之視訊區塊不具殘餘資訊。藉由在 t將跨越模式變為直接模式,量化 又 參數之減小可相對於習 ^扁碼技術對視訊區塊達成—顯著得多的效應。此係因為 篁化參數改變表明殘餘資 ’··、 殘餘貝訊之改變。由於殘餘資訊包括於 直接模式視訊區塊中而在跨越模式下不包括,故需要模式 改變以較好地採用量化參數改變對此殘餘資訊之效應。同 時,此等特定模式改變將不引入任何不當之傳播效應或盘 運動資訊之改變失配’因為直接模式視訊區塊及跨越模式 視訊區塊以相同方式定義運動向量。 圖1為說明視訊編碼及解碼系統1〇的方塊圖。如圖〗所 示’系統ίο包括-源設備2,源設備2經由一通信通道】5將 經編碼視訊傳輸至一接收設備源設備2可包括一視訊源 11、視訊編碼器12及一調變器/傳輸器14。接收設備6可包 括一接收/解調變器16、視訊解碼器18及顯示設備2〇。 如本文中所述,系統10可經組態以應用雙通道編碼技術, 其中關於視訊區塊執行量化參數改變及模式改變,但在第 二通道中不改變任何運動向量資訊。 在圖1之實例中,通信通道15可包含任何無線或有線通 信媒體,諸如射頻(RF)頻譜或一或多個實體傳輸線路,或 無線媒體與有線媒體之任何組合。通信通道1 5可形成一基 於封包之網路(諸如,區域網路、廣域網路或諸如網際網 路之全球網路)之部分。通信通道丨5大體表示任何適合之 通信媒體或不同通信媒體之集合,用於將來自源設備2之 視訊資料傳輸至接收設備6。 129545.doc -16 · 200904197 源設備2產生經編碼視訊資料以傳輸至接收設備6。然 而’在-些狀況下’設備2、6可以一實質上對稱之方式操 作舉例而。,δ又備2、6中之每一者可包括視訊編碼及解 碼組件。因此,系統1()可支援視訊設備2、6之間的單向或 雙向視訊傳輸’例如,用於視訊串流、視訊廣播或視訊電 話0 視sfl捕獲設備,諸如一視 之視訊檀案,或一來自一 源設備2之視訊源11可包括— 訊相機、一含有先前捕獲之視訊 視訊内容提供者之視訊饋送。作為另一替代,視訊源丨丨可 產生作為源視訊之基於電腦圖形之資料,或現場視訊與電 腦產生之視訊的組合。在一些狀況下,若視訊源11為一視 訊相機,則源設備2及接收設備6可形成所謂的照相手機 (camera phone)或視訊電話。在每一狀況下,捕獲的、預 先捕獲的或電腦產生的視訊可由視訊編碼器丨2編碼以經由 調變器/傳輸器14、通信通道15及接收器/解調變器16而 視訊源設備2傳輸至視訊接收設備6之視訊解碼器18。視訊 編碼器12包括-第—通道編碼器2 2及―第三通道編碼器2 4 以支援本發明之多通道編碼技術。在接收及解碼視訊資料 後,接收設備6即使用顯示設備2〇向使用者顯示經解碼視 訊資料。顯示設備20可包含諸如陰極射線管、液晶顯示器 (LCD)、電漿顯示器、有機發光二極體(0LED)顯示器之多 種顯示設備中的任一者,或另一類型之顯示設備。 在一些狀況下,雖然本發明之技術並不限於可縮放視訊 編碼(SVC),但為了空間、時間及/或信雜比(SNR)可縮放 129545.doc -17- 200904197 性,視訊編碼器1 2及視訊解碼器1 8可經組態以支援SVC。 在一些態樣中,視訊編碼器12及視訊解碼器18可經組態以 支援SVC之精細顆粒SNR可縮放性(FGS)編碼。編碼器12及 解碼器1 8可藉由支援一基礎層及一或多個可縮放增強層之 編碼、傳輸及解碼來支援各種程度之可縮放性。對於 SVC,基礎層載運具有基線品質位準之視訊資料。一或多 個增強層載運額外資料以支援較高空間、時間及/或SNR位 準。基礎層可以一比增強層之傳輸更可靠的方式經傳輸。 舉例而言,調變信號之最可靠部分可用以傳輸基礎層,而 調變信號之較不可靠部分可用以傳輸增強層。然而,可以 許多其他方式定義SVC方案之不同層。 視訊編碼器12及視訊解碼器18可根據視訊壓縮標準(諸 如,MPEG-2、MPEG-4、ITU-T H.263 或 ITU-T H.264/MPEG-4,第10部分,進階視訊編碼(AVC))操作。雖然圖2中未展 示,但在一些態樣中,視訊編碼器12及視訊解碼器18可各 自分別與一音訊編碼器及解碼器整合,且可包括適當的 MUX-DEMUX單元或其他硬體及軟體,以處置一共同資料 流或單獨資料流中之音訊及視訊兩者之編碼。若可應用, 則MUX-DEMUX單元可遵守ITU H.223多工器協定或諸如 使用者資料報協定(UDP)之其他協定。 H.264/MPEG-4(AVC)標準被ITU-T視訊編碼專家群 (VCEG)連同ISO/IEC動晝專家群(MPEG)—起闡明為被稱為 聯合視訊小組(JVT)之集體合作之產品。在一些態樣中, 本發明中所描述之技術可應用於大體遵守H.264標準之設 129545.doc •18· 200904197 備。1^.264標準係於由1丁1;_1>研究群指定且於2〇〇5年3月開 始的用於一般視聽服務之ITU_T建議案H 264進階視訊編碼 中描述’ 3亥標準在本文中可被稱為η·264標準或η.264規 範,或H.264/AVC標準或規範。該等技術亦可應用於其他 標準或視訊編碼協定。 若用於視訊廣播,則本發明中所描述之技術可應用於增 強型Η.264視訊編碼以用於使用待作為技術標準ΤΙΑ_丨〇99 ("FLO規範")出版之僅前向鏈路(FL〇)空中介面規範"F〇rward
Link Only Air Interface Specification for Terrestrial Mobile Multimedia Multicast”來在陸上行動多媒體多播(TM3)系統 中傳遞即時視訊服務。亦即,通信通道丨5可包含一用以根 據FLO規範或類似者廣播無線視訊資訊之無線資訊通道。 FLO規範包括定義位元流語法及語義之實例及適於空 中介面之解碼過程。或者,可根據諸如DVB_H(數位視訊 廣播-掌上型)、ISDB-T(整合服務數位廣播_陸上)或DMB (數位媒體廣播)之其他標準廣播視訊。因此,源設備2可為 一行動無線終端機、一視訊串流伺服器或一視訊廣播伺服 °。 “、、:而,本發明中所描述之技術並不限於任何特定類型 之廣播、多播或點對點系統。在廣播之狀況下,源設備2 可將視訊資料之若干通道廣播至多個接收設備,該等接收 設備中之每一者可類似於圖1之接收設備6。 在其他實例中,調變器/傳輸器14、通信通道15及接收 『解調變器!6可經組態以用於根據任何有線或無線通信系 統進行通信’㈣統包括下列各者中之—或多者:乙太網 129545.doc -19- 200904197 路、電話(例如,POTS)、電纜、電力線及光纖系統,及/ 或包含下列各者中之一或多者的無線系統:分碼多重存取 (CDMA或CDMA2000)通信系統、分頻多重存取(FDMA)系 統、正交分頻多重(OFDM)存取系統、分時多重存取(TDMA) 系統(諸如,GSM(全球行動通信系統)、GpRS(通用封包無 線電服務)或EDGE(增強型資料gsm環境)、TETRA(陸上中 繼無線電)行動電話系統)、寬頻分碼多重存取(WCDMA)系 統、高資料速率lxEV-DO(第一代僅演進資料)或
lxEV-DO
金多播系統、IEEE 802.1 1系統' MediaFL〇TM系統、DMB 系統、DVB-Η系統,或用於在兩個或兩個以上設備之間進 行資料傳遞之另一方案。 視訊編碼器12及視訊解碼器18各自可實施為一或多個微 處理裔、數位信號處理器(Dsp)、特殊應用積體電路 (ASIC)、場可程式化閘陣列(FpGA)、離散邏輯、軟體、硬 體初體或其任何組合。視訊編碼器12及視訊解碼器1 §中 之每一者可包括於一或多個編碼器或解碼器中,可整合其 中任一者以作為各別行動設備、用戶設備、廣播設備、伺 服器或類似物中之一經組合的編碼器/解碼器(c〇dec)之 邛刀。另外,如可應用,源設備2及接收設備6各自可包括 用於傳輸及接收經編碼視訊的適當調變、解調變、頻率轉 換、遽波及放大器組件,其包括足以支援無線通信之射頻 (RF)無線組件及天線。然而,為了說明容易起見,在圖2 中將該等組件概述為源設備2之調變器/傳輸器14及接收設 備6之接收器/解調變器16。調變器/傳輸器丨*及接收器/解 129545.doc -20- 200904197 調變器16可各自包含單獨或整合組件。 一視訊序列包括一系列視訊圖框。 視訊圖框内之像素的區塊進行操作^ =碼器12對個別 、 、局碼硯訊資料。該等 視訊區塊可具有固定或變化之大小, m ..,., 且了根據一規定編碼 準而在大小上不同。在一些狀 〇〇 母'視訊圖框為一 編碼單元’而在其他狀況下,每一 母視汛圖框可分為形成編 碼單元之一系列片段。每一片段可包 ° ^ 糸列巨集區塊, 其可排列為子區塊。作為一實例,Ιτ K J H.264標準支援 各種區塊大小(諸如用於亮度分量之16><16或4χ4,及用於 色度分量之8x8)中的内部預測,以及各種區塊大小(諸如 用於亮度分量之16><16、16χ8、8χ16、8χ8、8χ4、4χ8 及 4x4及用於色度分量之相應經縮放大小)中的中間預測。 較小的視訊區塊可提供較好解析度,且可用於一視訊圖 框内之位置,該等位置包括較高等級之細節。大體而言, 巨集區塊(MB)及各種子區塊可被看作為視訊區塊。另外, 一片段可被看作為一系列視訊區塊,諸如MB及/或子區 塊。如所提,每一片段可為一視訊圖框之一獨立可解碼單 元。 緊接於基於内部或中間之預測編碼之後,額外編碼技術 可應用於所傳輸的位元流。此等額外編瑪技術可包括變換 技術(諸如H.264/AVC中所用之4x4或8x8整數變換或離散 餘弦變換DCT)及變換係數編碼(諸如變換係數之可變長度 編碼)。變換係數之區塊可被稱為視訊區塊。換言之,術 語"視訊區塊"指代視訊資料之一區塊,而不管資訊之域。 129545.doc •21 - 200904197 口此,視訊區塊可在像素域或— 谏〜鈹變換的係數域中。 視矾編碼器12包括一第— 碼通道編碼器22及一第二通道編 。,其可為單獨組件或過程,或可敕人$ 哎過鉬i Λ* Α 了正〇至—共同組件 一.中。弟一通道編碼器。執 一湳1广 弟一編碼通道以編碼 視5孔序列之各種圖框或片 月杈之視汛區塊。第二通道編碼 ^接者改進在該第一通道期間所執行之編碼。詳古之, 為了效率及簡單起見,第二通道 " 道中形+ . 、道、,扁碼盗24採用在該第一通 生之r之貝Λ中的一些,且改進在該第一通道期間所產 ::編碼資訊的其他部分。舉例而言,可將在該第一通 =中,任何中間編碼視訊區塊定義之運動資訊(例如,運 向畺)指派給第二通道中之相同視 呌曾^ U祝汛£塊,而無需重新 “運動資訊’以確保不引入傳播誤差。然而,用於第二 通道之量化參數可相對於用於第一通道之量化參數改變。- 根據本發明,第二通道編碼器24可改變視訊區塊模 (例如’在跨越模式或直接模式之間),而不引起運動資^ 或於解碼ϋ 18或接收設備6處導出該運㈣訊之方式的任 何改變。可針對自跨越模式變為直接模式之任何視訊區塊 添加殘餘資訊’且可針對自直接模式㈣跨越模式之任☆ 視訊區塊消除殘餘資訊。結合此等模式改變,量化參數^ 又可在該第二編碼通道中達成比無模式改變之情況下。、 成之情況更顯著的編碼增強或調整。本發明所涵蓋之可j 模式改變;^丨人任何傳減應,因為直接模式及跨越= 以類似方式(亦即,基於相鄰視訊區塊之運動 , 動向量。 里)#日派運 Ϊ 29545.doc •22- 200904197 圖2為說明根據本發明之.却μ 个贫月之視讯編碼技術的流 所示,第一通道編碼器22在 _如圖2 ^ ^ 弟編碼通道中編碼視訊區 塊(3 1)。在该第一編碼通道期 J 第—通道編媽器22可定 義用於不同視訊區塊之詈仆炎 里化參數’且可基於該等量化來數 選擇編碼模式。該等量化參 " 妖'J界疋編碼中所用之量化之 位準。舉例而言,較低量化參 /数導致比較咼量化參數高的 品質及低的壓縮。篦一桶洁Λ 旦 斤用之編碼模式可視所選的 I化參數而定。舉例而士 ^ 牛例而5 ,一拉格朗日乘數(λ λ=2侧或h训,其中” …疋義為 少、 不自,、、、:對數函數之底數(例 如,e=2.7職1828459)且识表示所選的量化參數。因 此,對QP之調整可用以縮放拉格朗日乘數。不同之拉格朗 曰乘數(λ)值可引起不同的模式選擇。以此方式,可基於量 化參數選擇編碼模式。 在選擇了適田的編碼模式後,第—通道編碼器^即根據 所選的編碼模式編碼視訊區塊。舉例而言,若為—視訊區 鬼k擇内#編碼核式,則第—通道編碼器執行空間估計 内。P、’扁碼以編碼視訊區塊。若為—視訊區塊選擇中間編 =核式貝第-通道編碼器22執行運動估計預測及運動補 償U編碼視區塊。若為—視訊區塊選擇直接編碼模式, 則第一通道編碼器22基於相鄰視訊區塊之運動向量確定該 視Λ區塊之運動向4,且I生殘餘資訊以編碼該視 兩 此狀況下’對於使用直接模式編碼之視訊區塊,無 : '扁碼運動向里資訊,因為該資訊可基於相鄰視訊區塊之 ,動向里於解碼器處導出。若為一視訊區塊選擇跨越編碼 129545.doc -23- 200904197 模式,則第一通道編碼器22不編碼任何運動或殘餘資氕 對於使用跨越模式編碼之視訊區塊,同使用直接模式編, 之視訊區塊一樣,可基於相鄰視訊區塊之運動向量於 器處導出運動向量資訊。因&,經由直接模式編碼之視: 區塊與經由跨越模式編碼之視訊區塊之間的唯—差異在 於,經由直接模式編碼之視訊區塊包括殘餘資訊,而經由 跨越模式編碼之視訊區塊不具任何殘餘資訊。 一旦在第一通道中編碼視訊區塊(31),則第二通道編碼 器24凋整用於第二編碼通道之量化參數(32)。在此狀況 下,若在第一編碼通道中產生之資料量相對於可用頻寬而 言過多,則該等量化參數可增加以在該第二通道中引起較 夕里化及較少貧料。或者,若在第一編碼通道中產生之資 料里相對於可用頻寬而言較低,則該等量化參數可減少以 在該第二通道中引起較少量化及較多資料。 另外,第二通道編碼器24改變一或多個視訊區塊之編碼 模式(3)舉例而言,如下文將更詳細地描述,跨越視訊 區塊可變為直接視訊區塊(針對B片段)或變為中間16x16視
相同方式用於運動向量計算 個視訊區塊之運動向量改 使得可在不改變運動向量的情況下 ^之殘餘資訊。在此狀況下,結合量 !可對第二通道編碼有比單獨利用量 Η兄更有用的品質增強。同時,模式 L或傳播效應,因為所改變的模式將 :計算。舉例而言,傳播效應可在一 [改變時顯現,且該視訊區塊亦被用 129545.doc -24- 200904197 作為一參考區塊以用 — μ 、 不同視訊區塊之編碼。在此狀況 下,第一區塊之, 連動向罝之改變可影響第二視訊區塊。若 假設第一(參考)視訊區 、 尼I連勳向Ϊ為X,則第二視訊區 塊可能已被編石馬。名:遥乱二 右運動向量變為γ,則在第二視訊區塊 依賴於作為其預測參考筮— 弟 視成區塊的範圍内,此不僅 對第一視訊區塊且右对處 ,、有放應’而且對第二視訊區塊具有效 應。此等效應在本文可祐盒 j被%為傳播效應、傳播誤差或失 配。 若需要更多資料麗縮,則可將直接模式視訊區塊(針對β 片段)變為跨越模式視訊區塊。此;肖除詩該等視訊區塊 之殘餘資訊,i因此減少視訊編碼所需之資料量。然而, 此亦降低口π質,其對達成一所要位元速率而言可能是必要 、X所要位元速率可由一服務提供者設定、由服務品質 位準設定、由實體頻寬約束設定或大體以任何方式設定。 在任何狀况下’第二通道編碼器24僅可改變規定視訊區塊 之模式(自直接至跨越)的資訊,且消除在第-編碼通道期 間所產生之殘餘資訊以編碼直接視訊區塊。 若需要品質增強且存在過多頻寬,則可將跨越模式視訊 區塊(針對Β片段)變為直接模式視訊區塊。在此狀況下, 產生並包㈣於該等視訊區塊之殘餘資訊,此增加視訊編 碼所需之資料的量且允許比單獨利用量化參數調整可達成 之情況更深遠的基於量化參數減小之品質增強。在此狀況 下’第二通道編碼器24可僅改變規定視訊區塊之模式(自 接至跨越)之> α孔,且產生編碼直接視訊區塊所需之殘 129545.doc -25- 200904197 餘資訊。 使用經調整量仆& i < μ 在第二通道中二t 的模式’第二通道編物4 中執Jr 塊(34)。又’此改進在第-通道 中執仃之視訊編碼以滿足位元、 或達到其他目的。第1、… 頻寬 調整(32)… 4可同時執行量化參數 “改k(33)及第二通道編碼(34),以便以—可 ^所要位元速率增加或減小之方式共 整及模式改變之赘變。$辦 …… 變益傳輪器14可根據-實體層 "周1方木。十异經編碼資訊且經由诵位、n ^ _ 傳輸至接收設彳f6(35)。 將經編碼資訊 圖3為自跨越模式巨集區塊38變為直接模式巨集區㈣ 的Β片段之視訊區塊的概念說明。圖4為說明藉以將Β片段 之視訊區塊自跨越模式變為直接模式之第二通道編石馬技術 的流程圖。為了將一給定視訊區塊自跨越模式巨集區塊% 轉換至直接模式巨集區塊39’第二通道編碼器抑直接模 式下產生用於給定視訊區塊之殘餘資訊。由於跨越巨集區 塊及直接S集區塊以相g方式(基於相鄰£集區塊之運動 資訊)於解碼器處導出運動資訊,故跨越模式至直接模式 之改變無需包括任何運動估計。僅改變指定編碼模式之資 訊以反映模式改變’且產生與直接模式巨集區塊相關聯之 殘餘資訊。 更特定言之,如圖4所示,第二通道編碼器以為所編碼 之視訊區塊選擇新的量化參數(QP)(41)。在此狀況下,該 等新的QP可比在第一編碼通道期間編碼視訊區塊時所用之 129545.doc -26- 200904197 彼等QP低’此可產生較少量化及較佳解析度。使用該等新 的QP ’第二通道編碼器24計算新的拉格朗曰乘數(42)。舉 例而言,拉格朗曰乘數可計算為λ=2·((3Ρ)或he-(QP),其中 e表示自然對數函數之底數(例如,e=2.7 1 828 1 828459)且 QP表示所選的量化參數。因此,對Qp之調整可用以根據 上述方程式Ifg放拉格朗日乘數。拉格朗日乘數(χ)之不同值 可引起不同的模式選擇。 基於該等經縮放之拉格 一或多個跨越巨集區塊轉換為直接巨集區塊(43)。詳言 之,可基於拉格朗日乘數值計算成本函數,且若直接巨集 區塊在編碼速率及/或失真方面提供優勢,則可用直接巨 集區塊替代跨越巨集區塊。舉例而言,跨越模式至直接模 式轉換可基於由拉格朗日乘數加權之率失真(r_d)成本。 或者,提供跨越模式至直接模式轉換之另一簡單方式為量 化每-跨越巨㈣塊之錢部分,且若在量化後存在非零 係數,則宣告其為直接巨集區塊。在一或多個跨越巨集區 塊至直接巨集區塊之轉換之後,第二通道編碼器Μ接著編 碼用於經轉換巨集區塊之殘餘資訊(4 道編碼器24可基於相鄰視訊區塊之運 : 、里產生由該等運動向量識別之預測區塊,且編碼指示預 測區塊與已編碼為直接巨集區塊 尾之間的差異之殘餘 貝讯。然而’運動向量資訊可自經編碼之位 、 為此資訊可於解碼器處產生。 机彳*,因 圖5為自直接模式巨集區塊58變 #鵡模式巨集區塊59 129545.doc -27- 200904197 的B片段之視訊區塊的概念說明。圖6為說明藉以將B月段 之視訊區塊自直接模式變為跨越模式之第二通道編媽技: 的流程圖。為了將-給定視訊區塊自直接模式巨集區塊58 轉換為跨越模式巨集區塊59,第二通道編石馬器以基本上改 變模式且在跨越模式下消除用於給定視訊區塊之殘餘資 訊0 '、 又由於跨越巨集區塊及直接巨集區塊以相同方式(基 於相鄰巨集區塊之運動資訊)於解碼器處導出運動資訊, 故自直接模式至跨越模式之改變無需包括任何運動估計。 僅改變指定編碼模式之資訊以反映模式改變,且丟棄與直 接模式巨集區塊相關聯之殘餘資訊。 斤示第一通道編碼器24為所編碼之視訊區塊選 擇新的量化參數(QP)。在此狀況下,該等新的(^>可比在第 編碼通道期間編碼視訊區塊所用之Qp高,此可導致較多 里化及較低品質。使用該等新的Qp,第二通道編碼器 24^如)藉由使用上述方程式中之一者縮放拉格朗日乘數 來汁开新的拉格朗日乘數(62)。拉格朗日乘數“)之不同值 可引起不同的模式選擇。 一基:該等經縮放之拉格朗日乘數,第二通道編碼器24將 或夕個直接巨集區塊轉換為跨越巨集區塊。可基於 拉格朗日乘數值計算成本函數,且若跨越巨集區壤提供較 低成本’職以跨越巨集區塊替代直接巨㈣塊者, 可僅士主 八, I旦。不具任何殘餘資訊(或不具殘餘資訊之臨限位準) 的直接巨集區塊為跨越巨集區塊。第二通道編碼器24接著 129545.doc -28- 200904197 消除用於經轉換巨集區塊之殘餘資訊(64)。 圖7為自跨越模式巨集區塊78變為中間16><16巨集區塊79 的P片段之視訊區塊的概念說明圖。圖8為說明藉以將p片 段之視訊區塊自跨越模式變為中間16;^16模式之第二通道 編碼技術的流程圖。不同於B片段,p片段可能不支援直接 模式。然而,在此狀況下,可修改p片段之自跨越模式至 中間1 6 X 1 6模式之模式改變以提供一類似於b片段中的自跨 越模式至直接模式之模式改變的效應。 為了將一給定視訊區塊自一跨越模式巨集區塊78轉換為 =中間16 X ! 6巨集區塊7 9,第二通道編碼器2 4將該給定視 孔區塊自%越模式視訊區塊變為一中間模式視訊區塊, 基於一針對該跨越模式視訊區塊之運動向量計算將一運動 向里I曰派給中間模式視訊區力,且在中間模式下產生用於 3亥給定視訊區塊之殘餘資訊。 -疋》之,如圖8所示,第二通道編碼器24為所編碼 ,視訊區塊選擇新的量化參數(Qp)(8i)。在此狀況下,該 等新的QP可低於在第—編碼通道期間編碼視訊區塊時所用 之QP,此可導致較少量化及較佳品質。使用該等新的 Q々第一通道編碼器24計算新的拉格朗曰乘數⑻)。又, 該等拉格朗曰乘數可計算為(例如)λ=2,。)或h—(QP),其甲 表示自然對數函數之底數(例如,e=2 7i828i828459)且 QP表示所選的量介炎叙 /數。可基於拉格朗日乘數值計算成本 ===料具有最小成本之模式。該等新的砂根據 ,L ’放°亥等拉格朗日乘數,且經縮放之拉格朗日 129545.doc -29- 200904197 乘數用以選擇編碼模式, 151於笙# 4、.扁碼杈式可能或可能不是不 冋於弟一編碼通道之彼等模式。 疋不 基於該等經縮放之拉格朗 -或多個跨越巨集區塊 帛-通道編碼器24將 尾轉換為中間1 6X 1 6且隹冋撿、 可基於拉格朗日乘數“ % 巨紅塊(83)。 集區塊提供較低成本,則應以中間 := 越巨集區塊。舉例而▲ & W巨J塊替代跨 ^,跨越模式至中間16X16模式轉換 ==曰乘數加權之率失真㈣成本。或: 化每=式至中間16X16模式轉換之另-簡單方式為量 化母一跨越巨集區塊 里 數,則…為中門〗:^且右量化後存在非零係 …,、為中間16X16巨集區塊。第二通道編碼器24 基於相應跨越^ ^ /4 動&塊之運動向量將運動資訊⑼如,運 動向幻指派給經轉換之中間…加 然第二通道編碼器24扑干厂⑹ 尾換。之’雖 經編碼,運動… 在中間16X16模式下 -運動向S實際上與由跨越模式定義之原始運動 24:=:使用運動向量識別預測區塊,第二通道編碼器 餘資訊。 碼用於經轉換之中間16X16巨集區塊之殘 即使第二通道編碼器24使用按照慣例僅用於跨越巨集區 广:算來計算用於中間16χ_式巨集區塊之運動向 =圖8之技術亦保持標準順應性(例如,遵守ιτυ ’ ’因為所使用之編碼方案不為解碼器所知。因此, 碼該等中間16x16模式巨集區塊,且將不探 扁碼益如何計算該等運動向量。 129545.doc -30- 200904197 本文中所描述之技術可實施於硬體、軟體、韌體或其任 何組合中。被描述為模組或組件之任何特徵可—起實施於 一整合邏輯設備中或單獨實施為離散但可交互運作之邏輯 設備。若實施於軟體t,則可藉由一包含在經執行時=行 上述方法中之一或多者之指令的電腦可讀媒體至少部分地 實現該等技術。該電腦可讀媒體可形成一可包括封農^料 之電腦程式產品的部分。該電腦可讀媒體可包含諸如同步 動態隨機存取記憶體(SDRAM)之隨機存取記憶體(ram/ 唯讀記憶體(ROM)、非揮發性隨機#取記憶體(nvram)、 電可擦可程式化唯讀記憶體(eeprom)、快閃記憶體、磁 性或光學資料儲存媒體及類似物。另外或其他,該等技術 可藉由一以指令或資料結構形式載運或傳達可由電腦存7 取、讀取及/或執行之程式碼的電腦可讀通信媒體至 分地實現。 σ 該程式碼可由一或多個處理器(諸如,一或多個數位信 號處理il(DSP)、利微處理器、—特殊應用積體電路 (ASIC)、場可程式化邏輯陣列(FpGA),或其他等效積體或 離散邏輯電路)執行。因此,術語”處理器”如本文中所用可 指代適於實施本文中所描述之技術的前述結構中之任一者 或任何其他結構。另外,在一些態樣中,本文中所描述之 功此性可提供於為編碼及解碼而組態之專用軟體模組或硬 體模組A ’或#入一、經組合的視訊編石馬器-解碼器 (CODEC)中。 已描述本發明之各種實施例。此等及其他實施例在下文 129545.doc • 31 - 200904197 的申請專利範圍之範嘴内。 【圖式簡單說明】 圖1為說明根據本發明之視訊編碼及解碼系統的例示性 方塊圖。 圖2為說明根據本發明之多通道編碼技術的流程圖。 ,圖3為自跨越模式變為直接模式的雙向預測⑻片段之視 訊區塊的概念說明。 *圖4為說明藉以將^段之視訊區塊自跨越模式變為直接 模式之第二通道編碼技術的流程圖。 圖5為自直接模式變為跨越模式的3片段之視訊區塊的 念說明。 ★圖6為說明藉以將Β片段之視訊區塊自直接模式變為跨越 模式之第二通道編碼技術的流程圖。 圖7為自跨越模式變為中間16χ 16模式的預測片段之 視訊區塊的概念說明。 6 1 6松式之第二通道編碼技術的流程圖。 【主要元件符號說明】 2 源設備 6 接收設備 10 視訊編碼及解碼系統 11 視訊源 12 視訊編碼器 14 調變器/傳輪器 圖8為說明藉以將ρ片段之視訊區塊自跨越模式變為中間 129545.doc -32. 200904197 15 通信通道 16 接收器/解調變器 18 視訊解碼器 20 顯示設備 \ 22 第一 通道 編 碼 器 24 第二 通道 編 碼 器 38 跨越 模式 巨 集 區 塊 39 直接 模式 巨 集 塊 58 直接 模式 巨 集 塊 59 跨越 模式 巨 集 區 塊 78 跨越 模式 巨 集 區 塊 79 中間 16x16巨集區塊 129545.doc -33-

Claims (1)

  1. 200904197 十、申請專利範圍: 1 · 一種視说編瑪方法,直包含· 在第一編碼通道中編碼視訊區塊,其中該第一編碼 通道為該等視訊區塊選擇定A供該等視訊區塊用之運動 資訊的視訊編碼模式;及 在一第二編碼通道中編碼該等視訊區塊,其中該第二 編馬通道调整與3亥等視訊區塊相_聯之一或多個量化參 數,且基於邊等經調整量化參數改變與該等視訊區塊相 關如之該專視讯編碼模式中的至少一些’其中該等改變 的視訊編碼模式不改變該運動資訊。 2. 如請求項1之方法,其中該第二編碼通道: 基於該等經調整量化參數縮放拉格朗日乘數值;及 基於忒等經縮放拉格朗日乘數值改變與該等視訊區塊 相關聯之§亥等視訊編碼模式中的至少一些。 3. 如。月求項1之方法,其中該等視訊編碼模式中的至少一 些自跨越模式變為直接模式;且 該第二編碼通道將一給定視訊區塊自一跨越模式視訊 區塊變為一直接模式視訊區塊,且在該直接模式下產生 用於該給定視訊區塊之殘餘資訊。 4. 如π月求項1之方法,其中該等視訊編碼模式中的至少一 些自直接模式變為跨越模式;且 該第二編碼通道將一給定視訊區塊自一直接模式視訊 區塊麦為一跨越模式視訊區塊,且在該跨越模式下消除 用於該給定視訊區塊之殘餘資訊。 129545.doc 200904197 5.如清求項〗之方法,其中該等視訊編碼模式中的至少一 些·自跨越模式變為中間模式;且 。该第二編碼通道將一給定視訊區塊自一跨越模式視訊 區塊變為一中間模式視訊區塊,基於—對該跨越模式視 汛區塊之運動向量計算,將一運動向量指派給該中間模 式視訊區塊,且在該令間模式下產生用於該給定視訊區 塊之殘餘資訊。
    如請求項】之方法’進一步包含將在該第二編碼通道中 、·’扁碼之§亥等視訊區塊傳輸至另一設備。 月東員6之方法,其中該第二編碼通道調整該等量化 參數且改變該等視訊編碼模式中的至少一些,以共同調 整一與傳輸該等視訊區塊相關聯之位元速率。 。月长項1之方法,其中在該第二通道中編碼該等視訊 品免I括編碼預測(p)片段或圖框及雙向預測⑻片段或 圖框之16x16巨集區塊’ ^其中改變該等視訊編碼模式 中的至少一些包含·· 自一跨越巨 自一跨越巨 針對B片段或圖框的至少一些視訊區塊, 集區塊模式變為一直接巨集區塊模式,及 針對p片段或圖框的至少一些視訊區塊, 集區塊模式變為一中間16x16巨集區塊模式 9. 一種包含一視訊編碼器之裝置,其: 在一第-編石馬通道中編碼視訊區塊,其中該第一編瑪 ^為該等視訊區塊選擇定義供該等視訊區塊用之運動 貝訊的視訊編碼模式;及 129545.doc 200904197 在「第二編碼通道中編碼該等視訊區塊,其中該第二 編碼通道調整與該等視訊區塊相關聯之—或多個量化參 數且基於3亥等經調整量化參數改變與該等視訊區塊相 關如之δ亥等視訊編碼模式中的至少—些,其中該等改變 的視訊編碼模式不改變該運動資訊。 10. 如請求項9之裝置,其中該第二編碼通道: 基於該等經調整量化參數縮放拉格朗日乘數值;及 基於該等經縮放拉格朗日乘數值,改變與該等視訊區 塊相關聯之§亥荨視訊編碼模式中的至少一此。 11. 如請求項9之裝置’其中該等視訊編碼模式中的至少一 些自跨越模式變為直接模式;且 。該第二編碼通道將—給定視訊區塊自—跨越模式視訊 區鬼4為直接模式視訊區塊,且在該直接模式下產生 用於该給定視訊區塊之殘餘資訊。 1 2. 士响求項9之裝置,其中該等視訊編碼模式中的至少一 些自直接模式變為跨越模式;且 該第二編碼通道將-給定視訊區塊自—直接模式視訊 區塊變為-跨越模式視訊區塊,且在該跨越模式下消除 用於§亥給定視訊區塊之殘餘資訊。 13.如請求項9之裝置,《中該等視訊編碼模式中的至少— 些自跨越模式變為中間模式;且 該第二編碼通道將一給定視訊區塊自-跨越模式視訊 品鬼瓷為中間模式視訊區塊,基於一對該跨越模式視 訊區塊之運動向量計算,將-運動向量指派給該中間模 129545.doc 200904197 式視訊區塊’且在該中間模式下產生用於該給定視訊區 塊之殘餘資訊。 ,月长項9之裝置,進一步包含一調變器/傳輸器,該調 I器/傳輪器調變在該第二編碼通道_編碼之該等視訊區 塊且將該等視訊區塊傳輸至另一設備。 15.如請求項14之裝置,其中該第二編碼通道調整該等量化 參數且改變該等視訊編碼模式中的至少一些,以共同調 整一與傳輸該等視訊區塊相關聯之位元速率。 =θ长項9之裝置,其中在該第二通道中編碼該等視訊 區塊包括編碼預測(P)片段或圖框及雙向預測(B)片段或 圖框之16x16巨集區塊,且其中改變該等視訊編碼模式 中的至少一些包含: 針對B片段或圖框的至少一些視訊區塊,自一跨越巨 集區塊模式變為一直接巨集區塊模式,及 針對P片段或圖框的至少一些視訊區塊,自一跨越巨 集區塊模式變為一中間16 X 16巨集區塊模式。 17. -種電腦可讀媒體,#包含在一處理器中執行時使該處 理器進行以下操作之指令: 在一第一編碼通道中編碼視訊區塊,其中該第—編碼 通道為該等視訊區塊選擇定義供該等視訊區塊用之運動 資訊的視訊編碼模式;及 在一第二編碼通道中編碼該等視訊區塊,其中該第二 編碼通道調整與該等視訊區塊相關聯之—或多個量化參 數,且基於該等經調整量化參數改變與該等視訊區塊相 129545.doc 200904197 關聯之該等視訊編碼模式中 果八甲的至少一些,其中該等改變 的視訊編碼模式不改變該運動資訊。 18.如請求項17之電腦可讀《,其中該第二編碼通道: 基於該等經調整量化參數縮放拉格朗曰乘數值;及 基於該等經縮放拉格朗g乖叙 徂裕朗日乘數值’改變與該等視訊區 塊相關聯之該等視訊編碼模式中的至少一些。 19 ·如請求項1 7之電腦可靖搓鞅 甘 自』項媒體,其中該等視訊編碼模式中 的至少一些自跨越模式變為直接模式;且 該第二編碼通道將一給定視訊區塊自一跨越模式視訊 區塊變為-直接模式視訊區塊,且在該直接模式下產生 用於该給定視訊區塊之殘餘資訊。 20.如請求項17之電腦可讀媒體,其中該等視訊編碼模式甲 的至少一些自直接模式變為跨越模式;且 該第二編碼通道將一給定視訊區塊自一直接模式視訊 區龙支為冑越模式視訊區塊,且在該跨越模式下消除 用於該給定視訊區塊之殘餘資訊。 •如請求項17之電腦可讀媒體,其令該等視訊編碼模式令 的至少一些自跨越模式變為中間模式;且 該第二編碼通道將—給定視訊區塊自-跨越模式視訊 區終為巾間模式視訊區塊,基於—對該跨越模式視 訊區塊之運動向量計算’將一運動向量指派給該中間模 式視訊區塊,且在該中間模式下產生用於該給定視訊區 塊之殘餘資訊。 22.如請求項17之電腦可讀媒體’進一步包含使得在該第 129545.doc 200904197 編碼 令。 通道中編 碼之該等視 訊區塊傳輸至另 一設備的指 23. 如知求項22之電腦可 某體,其甲該第二編碼通道調整 忒4里化參數且改變 以共同調单一ώ欠以4視汛編碼模式中的至少一些, 文优°tL b塊相關聯之位元速率。 24. 如凊求項17之電 疋干 ® J喝媒體,其中在該第二 該等視訊區塊包括绝庶π , 、、f編碼 μ 括編碼預測(ρ)片段或圖框及雙向預測 (Β)片段或圖框之、 編碼模式中的至少一些包含: 6巨集區塊,且其中改 编石馬槿4击ΛΑ π .丨、 . ^ ^ 〇tL 針對B片段或圖框的至少一些視訊區塊,自一跨越巨 集區塊模式變為一直接巨集區塊模式,及 針對P片段或圖框的至少一些視訊區塊,自-跨越巨 集區塊模式變為一中間16><16巨集區塊模式。 2 5. —種設備,其包含: 用於在一第一編碼通道中編碼視訊區塊的構件,其中 用於在該第一編碼通道中編碼視訊區塊的構件包括用於 為該等視訊區塊選擇定義供該等視訊區塊用之運動資訊 之視訊編碼模式的構件;及 用於在一第二編碼通道中編碼該等視訊區塊的構件, 其中用於在該第二編碼通道中編碼該等視訊區塊的構件 包括用於調整與該等視訊區塊相關聯之一或多個量化參 數的構件’及用於基於該等經調整量化參數,改變與古亥 等視訊區塊相關聯之該等視訊編碼模式中之至少__ 、 乂 些的 構件’其中該專改變的視訊編碼模式不改變該運動^ 129545.doc 200904197 訊。 26. 如請求項25之設備,其中該用於在該第二編碼通道中編 碼該等視訊區塊的構件包括用於基於該等經調整量化參 數縮放拉格朗日乘數值的構件,且其中該用於改變的構 件包含用於基於該等經縮放拉格朗曰乘數值,改變Μ 等視訊區塊相關聯之該等視訊編碼模式中之至少 X 構件。 、 27. 如請求項25之設備,其令該等視訊編碼模式中的至少一 些自跨越模式變為直接模式;且 用於在該第二編碼通道中结_ m #從、。 、甲編碼该等視訊區塊的構件包 括用於將-給定視訊區塊自一跨越模式視訊區塊變為— 直接模式視訊區塊的構件,及用於在該直接模式下產生 用於該給定視訊區塊之殘餘資訊的構件。 沈如請求項25之設備,其中該等視訊編碼模式中的至少一 些自直接模式變為跨越模式;且 用於在該第二編碼通道中編碼該等視訊區塊的構件包 括用於將-給定視訊區塊自一直接模式視訊區塊變為一 跨越模式視訊區塊的構件’及用於在該跨越模式下消除 用於該給定視訊區塊之殘餘資訊的構件。 29.如請求項25之設備,其中該等視訊編碼模式中的至少一 些自跨越模式變為中間模式;且 用於在該第二編碼通道中編碼該等視訊區塊的構件勺 括用於將一給定視訊區塊自-跨越模式視訊區塊變為: 中間模式視訊區塊的構件,詩基於—對該跨越模式視 129545.doc 200904197 訊區塊之運動向量計算將一運動向量指派給該中間模式 :訊區塊的構件,及用於在該中間模式下產生用於該給 定視訊區塊之殘餘資訊的構件。 30 31. 32. .如 道 包含用於將在該第二編碼通 輸至另一設備的構件。 請求項25之設備,進一步 中編碼之該等視訊區塊傳 如請求項30之設備’其中該用於在該第:編碼通道中編 碼該等視訊區塊的構件包括用於調整該等量化參數的構 件’及用於改變該等視訊編碼模式令的至少一些以共同 調整一與傳輸該等視訊區塊相關聯之位元速率的'構件、/ =求項25之設備’其μ於在該第:編碼通道中編碼 〇專視矾區塊的構件包括用於編碼預測(ρ)片段或圖框及 雙向預測(Β)片段或圖框之16><16巨集區塊的構件,且其 中用於改變該等視訊編碼模式中之至少一些的構件包 用^針對Β片段或圖框的至少一些視訊區塊自—跨越 集區塊枳式變為一直接巨集區塊模式的構件,及 用於針對Ρ片段或圖框的至少一些視訊 FAr?仏, 及目—跨越 ” 拉式變為一中間16x10巨集區塊模式的構件。 129545.doc
TW097107409A 2007-03-02 2008-03-03 Efficient video block mode changes in second pass video coding TW200904197A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US89280407P 2007-03-02 2007-03-02
US11/777,395 US8594187B2 (en) 2007-03-02 2007-07-13 Efficient video block mode changes in second pass video coding

Publications (1)

Publication Number Publication Date
TW200904197A true TW200904197A (en) 2009-01-16

Family

ID=39733048

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097107409A TW200904197A (en) 2007-03-02 2008-03-03 Efficient video block mode changes in second pass video coding

Country Status (7)

Country Link
US (1) US8594187B2 (zh)
EP (1) EP2132938B1 (zh)
JP (1) JP5611601B2 (zh)
KR (1) KR101058758B1 (zh)
CN (1) CN101622880B (zh)
TW (1) TW200904197A (zh)
WO (1) WO2008109471A1 (zh)

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1829027A1 (en) * 2004-12-15 2007-09-05 Telefonaktiebolaget LM Ericsson (publ) Method and device for encoding mode changing of encoded data streams
CN101496387B (zh) 2006-03-06 2012-09-05 思科技术公司 用于移动无线网络中的接入认证的系统和方法
WO2008156548A1 (en) * 2007-06-12 2008-12-24 Thomson Licensing Methods and apparatus supporting multi-pass video syntax structure for slice data
US20090074075A1 (en) * 2007-09-14 2009-03-19 The Hong Kong University Of Science And Technology Efficient real-time rate control for video compression processes
US8077772B2 (en) * 2007-11-09 2011-12-13 Cisco Technology, Inc. Coding background blocks in video coding that includes coding as skipped
US8797377B2 (en) 2008-02-14 2014-08-05 Cisco Technology, Inc. Method and system for videoconference configuration
US8355041B2 (en) 2008-02-14 2013-01-15 Cisco Technology, Inc. Telepresence system for 360 degree video conferencing
US8319819B2 (en) 2008-03-26 2012-11-27 Cisco Technology, Inc. Virtual round-table videoconference
US8390667B2 (en) 2008-04-15 2013-03-05 Cisco Technology, Inc. Pop-up PIP for people not in picture
CN102165772B (zh) * 2008-09-16 2013-07-24 杜比实验室特许公司 自适应视频编码器控制
US8694658B2 (en) 2008-09-19 2014-04-08 Cisco Technology, Inc. System and method for enabling communication sessions in a network environment
US8477175B2 (en) 2009-03-09 2013-07-02 Cisco Technology, Inc. System and method for providing three dimensional imaging in a network environment
US8659637B2 (en) 2009-03-09 2014-02-25 Cisco Technology, Inc. System and method for providing three dimensional video conferencing in a network environment
US8659639B2 (en) 2009-05-29 2014-02-25 Cisco Technology, Inc. System and method for extending communications between participants in a conferencing environment
EP2285111A1 (en) * 2009-08-07 2011-02-16 Canon Kabushiki Kaisha Method for sending compressed data representing a digital image and corresponding device
US9082297B2 (en) 2009-08-11 2015-07-14 Cisco Technology, Inc. System and method for verifying parameters in an audiovisual environment
ES2681209T3 (es) 2009-09-10 2018-09-12 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Técnicas de aceleración para una cuantificación optimizada de tasa de distorsión
US8532169B2 (en) * 2009-12-23 2013-09-10 General Instrument Corporation Rate control for two-pass encoder using adaptive quantization parameters
US8681858B2 (en) * 2009-12-23 2014-03-25 General Instrument Corporation Rate control for two-pass encoder
US20120314768A1 (en) * 2010-02-23 2012-12-13 Samsung Electronics Co., Ltd. Method and device for encoding/decoding a prediction image in a layered coding structure
US9225916B2 (en) 2010-03-18 2015-12-29 Cisco Technology, Inc. System and method for enhancing video images in a conferencing environment
US9313452B2 (en) 2010-05-17 2016-04-12 Cisco Technology, Inc. System and method for providing retracting optics in a video conferencing environment
US8553763B2 (en) 2010-06-10 2013-10-08 Sony Corporation Iterative computation of adaptive interpolation filter
US8896655B2 (en) 2010-08-31 2014-11-25 Cisco Technology, Inc. System and method for providing depth adaptive video conferencing
US8599934B2 (en) 2010-09-08 2013-12-03 Cisco Technology, Inc. System and method for skip coding during video conferencing in a network environment
US8599865B2 (en) 2010-10-26 2013-12-03 Cisco Technology, Inc. System and method for provisioning flows in a mobile network environment
US8699457B2 (en) 2010-11-03 2014-04-15 Cisco Technology, Inc. System and method for managing flows in a mobile network environment
US9338394B2 (en) 2010-11-15 2016-05-10 Cisco Technology, Inc. System and method for providing enhanced audio in a video environment
US8730297B2 (en) 2010-11-15 2014-05-20 Cisco Technology, Inc. System and method for providing camera functions in a video environment
US8902244B2 (en) 2010-11-15 2014-12-02 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US9143725B2 (en) 2010-11-15 2015-09-22 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US8542264B2 (en) 2010-11-18 2013-09-24 Cisco Technology, Inc. System and method for managing optics in a video environment
US8723914B2 (en) 2010-11-19 2014-05-13 Cisco Technology, Inc. System and method for providing enhanced video processing in a network environment
US9111138B2 (en) 2010-11-30 2015-08-18 Cisco Technology, Inc. System and method for gesture interface control
USD678894S1 (en) 2010-12-16 2013-03-26 Cisco Technology, Inc. Display screen with graphical user interface
USD678307S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD678320S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682864S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen with graphical user interface
USD678308S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682293S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
USD682294S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
USD682854S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen for graphical user interface
US8692862B2 (en) 2011-02-28 2014-04-08 Cisco Technology, Inc. System and method for selection of video data in a video conference environment
EP2509315B1 (en) * 2011-04-04 2016-08-17 Nxp B.V. Video decoding switchable between two modes of inverse motion compensation
US8670019B2 (en) 2011-04-28 2014-03-11 Cisco Technology, Inc. System and method for providing enhanced eye gaze in a video conferencing environment
US8786631B1 (en) 2011-04-30 2014-07-22 Cisco Technology, Inc. System and method for transferring transparency information in a video environment
US8934026B2 (en) 2011-05-12 2015-01-13 Cisco Technology, Inc. System and method for video coding in a dynamic environment
US9781449B2 (en) * 2011-10-06 2017-10-03 Synopsys, Inc. Rate distortion optimization in image and video encoding
US9338463B2 (en) 2011-10-06 2016-05-10 Synopsys, Inc. Visual quality measure for real-time video processing
US8947493B2 (en) 2011-11-16 2015-02-03 Cisco Technology, Inc. System and method for alerting a participant in a video conference
US8682087B2 (en) 2011-12-19 2014-03-25 Cisco Technology, Inc. System and method for depth-guided image filtering in a video conference environment
CN103327284B (zh) * 2012-12-18 2018-11-06 南京中兴软件有限责任公司 无损视频的传输方法、装置及视频通讯系统
US9843621B2 (en) 2013-05-17 2017-12-12 Cisco Technology, Inc. Calendaring activities based on communication processing
US20140362927A1 (en) * 2013-06-07 2014-12-11 Apple Inc. Video codec flashing effect reduction
BR102015001999A2 (pt) * 2015-01-28 2019-02-26 De Souza Leite Pinho Mauro instrumento para comunicação virtual interativa
US10313675B1 (en) 2015-01-30 2019-06-04 Google Llc Adaptive multi-pass video encoder control
US11496747B2 (en) * 2017-03-22 2022-11-08 Qualcomm Incorporated Intra-prediction mode propagation
US10778938B2 (en) * 2018-12-20 2020-09-15 Hulu, LLC Video chunk combination optimization
CN109862362A (zh) * 2018-12-29 2019-06-07 深圳市网心科技有限公司 一种视频的mpeg2编码方法、系统、介质及设备
WO2021063308A1 (en) * 2019-10-03 2021-04-08 Huawei Technologies Co., Ltd. Coding process for geometric partition mode
CN113132757B (zh) * 2021-04-21 2022-07-05 北京汇钧科技有限公司 数据处理方法和装置
WO2022222988A1 (en) * 2021-04-21 2022-10-27 Beijing Bytedance Network Technology Co., Ltd. Method, device, and medium for video processing

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5144424A (en) * 1991-10-15 1992-09-01 Thomson Consumer Electronics, Inc. Apparatus for video data quantization control
US6160846A (en) * 1995-10-25 2000-12-12 Sarnoff Corporation Apparatus and method for optimizing the rate control in a coding system
JP2001086512A (ja) 1999-09-14 2001-03-30 Nec Corp 可変ビットレート符号化装置
US20030215011A1 (en) * 2002-05-17 2003-11-20 General Instrument Corporation Method and apparatus for transcoding compressed video bitstreams
AU2003280512A1 (en) * 2002-07-01 2004-01-19 E G Technology Inc. Efficient compression and transport of video over a network
US7280700B2 (en) * 2002-07-05 2007-10-09 Microsoft Corporation Optimization techniques for data compression
CN1206864C (zh) 2002-07-22 2005-06-15 中国科学院计算技术研究所 结合率失真优化的码率控制的方法及其装置
BRPI0411765A (pt) 2003-06-25 2006-08-08 Thomson Licensing codificação de decisão modal rápida para inter-quadros
JP2006080925A (ja) 2004-09-09 2006-03-23 Toshiba Corp 動画符号化装置、動画符号化方法および動画符号化プログラム
CA2508428A1 (fr) 2005-05-20 2006-11-20 Hydro-Quebec Detection, localisation et interpretation de decharge partielle

Also Published As

Publication number Publication date
CN101622880B (zh) 2013-09-25
JP2010520714A (ja) 2010-06-10
CN101622880A (zh) 2010-01-06
EP2132938B1 (en) 2015-06-10
EP2132938A1 (en) 2009-12-16
JP5611601B2 (ja) 2014-10-22
US20080212677A1 (en) 2008-09-04
US8594187B2 (en) 2013-11-26
KR20090123914A (ko) 2009-12-02
KR101058758B1 (ko) 2011-08-24
WO2008109471A1 (en) 2008-09-12

Similar Documents

Publication Publication Date Title
TW200904197A (en) Efficient video block mode changes in second pass video coding
RU2372743C2 (ru) Масштабируемое видеокодирование с двухуровневым кодированием и одноуровневым декодированием
TWI357766B (en) Variable length coding table selection based on vi
JP5384694B2 (ja) 多層ビデオ設計のためのレート制御
CA2644605C (en) Video processing with scalability
JP5795416B2 (ja) スケーラブルビット深度のためのスケーラブルビデオコーディング手法
TWI501648B (zh) 層狀編碼位元流結構
JP5484902B2 (ja) サイクルを整列したフラグメントを使用する微細粒度スケーラビリティを備えた映像符号化
JP5108026B2 (ja) 空間スケーラビリティーのための拡張されたレイヤ間符号化
TWI425837B (zh) 用於編碼區塊樣式之可變長度編碼技術
CN1193622C (zh) 视频信号编码/解码方法和装置及对应的无线电电信装置
JP4981927B2 (ja) Svccgs拡張層コーディングに関するcavlc拡張
TW200840370A (en) Variable length coding table selection based on block type statistics for refinement coefficient coding
RU2406254C2 (ru) Видеообработка с масштабируемостью
TW201004357A (en) Rate-distortion quantization for context-adaptive variable length coding (CAVLC)
TW201031211A (en) Video coding with large macroblocks
TWI408965B (zh) 可調節視訊編碼之改良加強層編碼之方法、設備及電腦可讀媒體
JP2008533850A5 (zh)
TW201108743A (en) 4x4 transform for media coding
CN105191318B (zh) 画面块的编码和解码方法、对应的设备和数据流
CN117813819A (zh) 用于在流式传输场景中处置运动矢量的视频编码概念
Logeswaran Improved Moving Picture Compression Using H. 264/AVC and Run-Level Coding