TW201639363A - 用於顯示串流壓縮之速率受限回退模式 - Google Patents

用於顯示串流壓縮之速率受限回退模式 Download PDF

Info

Publication number
TW201639363A
TW201639363A TW105111395A TW105111395A TW201639363A TW 201639363 A TW201639363 A TW 201639363A TW 105111395 A TW105111395 A TW 105111395A TW 105111395 A TW105111395 A TW 105111395A TW 201639363 A TW201639363 A TW 201639363A
Authority
TW
Taiwan
Prior art keywords
current block
tile
block
prediction mode
midpoint value
Prior art date
Application number
TW105111395A
Other languages
English (en)
Inventor
納坦 海姆 雅各布森
維賈伊拉加哈萬 提拉魯馬萊
瑞珍 雷克斯曼 喬許
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201639363A publication Critical patent/TW201639363A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/026—Control of mixing and/or overlay of colours in general
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/06—Colour space transformation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/12—Frame memory handling
    • G09G2360/127—Updating a frame memory using a transfer of data from a source area to a destination area

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Discrete Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本文揭示一種用於寫碼視訊資訊之方法及裝置。在一項實例中，該方法可涉及：識別用於一固定速率編解碼器之一或多個預測模式，每一預測模式具有一速率失真成本；及針對一當前區塊自並非先前所選之該再一個預測模式中選擇具有該最低速率失真成本之一預測模式。該方法可涉及：(i)判定該所選擇預測模式是否將導致該固定速率編解碼器之一緩衝器之上溢或下溢；及(ii)判定該所選擇預測模式是否將導致該圖塊中之剩餘位元不足以寫碼該圖塊之剩餘區塊。該方法可涉及回應於該所選擇的一或多個預測模式中之每一者導致條件(i)及(ii)中之至少一者為真而利用一回退模式來寫碼該當前區塊。

Description

用於顯示串流壓縮之速率受限回退模式
本發明係關於視訊寫碼及壓縮的領域，且特定而言，係關於用於顯示連結上之傳輸的視訊壓縮，諸如顯示串流壓縮(DSC)。
數位視訊性能可併入至廣泛範圍之顯示器中，包括數位電視、個人數位助理(PDA)、膝上型電腦、桌上型監視器、數位攝影機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲控制台、蜂巢式或衛星無線電電話、視訊電話會議器件及其類似者。顯示連結用於將顯示器連接至適合的源器件。顯示連結的頻寬要求與顯示的解析度成正比，且因此，高解析度顯示器需要大頻寬顯示連結。一些顯示連結不具有支援高解析度顯示器的頻寬。視訊壓縮可用於減小頻寬要求以使得更低頻寬顯示連結可用於將數位視訊提供至高解析度顯示器。
其他人已經嘗試利用對像素資料的影像壓縮。然而，此類方案有時在視覺上無損或在習知的顯示器件中實施可為困難的並且昂貴的。
視訊電子元件標準協會(VESA)已經開發顯示串流壓縮(DSC)作為顯示連結視訊壓縮的標準。此外，顯示連結視訊壓縮技術(諸如DSC)應提供視覺上無損的圖片品質(亦即，具有使得使用者無法區分壓縮 在作用中之品質之位準的圖片)。顯示連結視訊壓縮技術亦應提供用習知的硬體即時實施起來簡易並便宜之方案。
本發明之系統、方法及器件各自具有若干創新態樣，其中無單一者單獨負責本文中所揭示之合乎需要的屬性。
在一項態樣中，提供用於寫碼與影像之圖塊相關之視訊資訊的方法，其中該圖塊包括一或多個區塊。該方法可涉及用於識別固定速率編解碼器之一或多個預測模式，其中每一預測模式已與其速率失真成本相關聯。該方法可涉及針對當前區塊自並非先前所選之再一個預測模式中選擇具有最低速率失真成本之預測模式。該方法可涉及判定所選擇預測模式是否將導致固定速率編解碼器之緩衝器之上溢或下溢。該方法可涉及判定所選擇預測模式是否將導致圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊。該方法可涉及回應於所選擇的一或多個預測模式中之每一者導致以下情況中之至少一者而利用回退模式來寫碼當前區塊：(i)緩衝器之上溢或下溢及(ii)圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊。在相關態樣中，回退模式可涉及判定當前區塊之中點值及自該中點值預測當前區塊樣本。
在另一態樣中，提供一種可包括記憶體之器件，該記憶體經組態以儲存與影像之圖塊相關之視訊資訊，其中該圖塊包括一或多個區塊。該器件可包括至少一個處理器電路，其經耦接至記憶體並經組態以：識別用於固定速率編解碼器之一或多個預測模式，每一預測模式具有速率失真成本；針對當前區塊自並非先前所選擇之再一個預測模式中選擇具有最低速率失真成本之預測模式；判定所選擇預測模式是否將導致固定速率編解碼器之緩衝器之上溢或下溢；判定所選擇預測模式是否將導致圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊；並回應於所選擇之一或多個預測模式中之每一者導致以下情況中之至少一 者而利用回退模式來寫碼當前區塊：(i)緩衝器之上溢或下溢及(ii)圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊，其中該回退模式可包括判定當前區塊之中點值及自該中點值預測當前區塊樣本。
10‧‧‧視訊寫碼系統
10'‧‧‧視訊寫碼系統
11‧‧‧器件
12‧‧‧源器件
13‧‧‧處理器/控制器器件
14‧‧‧目的地器件
16‧‧‧連結
18‧‧‧視訊源
20‧‧‧視訊編碼器
22‧‧‧輸出介面
28‧‧‧輸入介面
30‧‧‧視訊解碼器
31‧‧‧儲存器件
32‧‧‧顯示器件
105‧‧‧色彩空間轉化器
110‧‧‧緩衝器
115‧‧‧平度偵測器
120‧‧‧速率控制器
125‧‧‧預測器、量化器及重建構器組件
130‧‧‧線緩衝器
135‧‧‧索引色彩歷史
140‧‧‧熵編碼器
145‧‧‧子串流多工器
150‧‧‧速率緩衝器
155‧‧‧速率緩衝器
160‧‧‧子串流解多工器
165‧‧‧熵解碼器
170‧‧‧速率控制器
175‧‧‧預測器、量化器及重建構器組件
180‧‧‧索引色彩歷史
185‧‧‧線緩衝器
190‧‧‧色彩空間轉化器
300‧‧‧曲線圖
400‧‧‧方法
410‧‧‧區塊
420‧‧‧區塊
430‧‧‧區塊
460‧‧‧區塊
470‧‧‧區塊
480‧‧‧區塊
490‧‧‧區塊
500‧‧‧方法
510‧‧‧區塊
520‧‧‧區塊
530‧‧‧區塊
540‧‧‧區塊
550‧‧‧區塊
圖1A為說明可利用根據本發明中描述之態樣的技術之實例視訊編碼及解碼系統之方塊圖。
圖1B為說明可執行根據本發明中描述之態樣的技術之另一實例視訊編碼及解碼系統之方塊圖。
圖2A為說明可實施根據本發明中描述之態樣的技術之視訊編碼器之實例之方塊圖。
圖2B為說明可實施根據本發明中描述之態樣的技術之視訊解碼器之實例的方塊圖。
圖3展示判定量化參數(QP)調整值之實例方法。
圖4為說明根據本發明中描述之態樣的用於基於固定速率編解碼器之速率失真準則而寫碼圖塊之當前區塊之實例方法的流程圖。
圖5為說明根據本發明中描述之態樣的用於寫碼視訊資訊之實例方法的流程圖。
大體而言，本發明係關於改良視訊壓縮技術(諸如，顯示串流壓縮(DSC))之技術。更具體而言，本發明係關於用於偵測自平坦或平滑區域至待寫碼影像之複合區域之過渡的系統及方法。本文描述在視訊壓縮技術(諸如DSC)之上下文中用於視訊資料之複合區域偵測的技術。本發明之態樣係關於確保避免在寫碼期間速率緩衝器之下溢或上溢。
儘管本文在DSC標準之上下文中描述某些實施例，但一般熟習此項技術者將理解，本文所揭示之系統及方法可適用於任何合適的視訊 寫碼標準。舉例而言，本文所揭示之實施例可適用於以下標準中之一或多者：國際電信聯盟(ITU)電信標準化部門(ITU-T)H.261、國際標準化組織/國際電工委員會(ISO/IEC)動畫專家群-1(MPEG-1)Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual、ITU-T H.264(亦稱為ISO/IEC MPEG-4 AVC)、高效率視訊寫碼(HEVC)及此類標準之任何擴展。本文所描述之技術可特別適用於併入固定位元速率(CBR)緩衝器模型之標準。又，本發明中描述之技術可成為將來開發的標準之一部分。換言之，本發明中描述之技術可適用於先前開發之視訊寫碼標準、當前正在開發之視訊寫碼標準及即將出現的視訊寫碼標準。
本發明之概念可整合於包括針對編碼/解碼具有大致上視覺上無損效能之各種類型之內容的若干元件及/或模式之編解碼器(例如，DSC)中或成為該編解碼器之一部分。本發明提供偵測自平滑/平坦區域(例如，易於寫碼之區域)至複合區域(例如，相對難以寫碼或需要更高數目個位元來寫碼之區域)之過渡的複合區域偵測演算法。當偵測到此過渡時，用於編解碼器中之量化參數(QP)增大到高值以便減小所預期的寫碼當前區塊所需要的速率。此為合乎需要的，係因為複合區域中之視覺資訊之複雜度可遮蔽比將出現在平滑/平坦區域中更多的假影。另外，低速率係合乎需要的，以防止寫碼器花費過多位元(例如，遠超過目標位元速率)在複合區塊上。
視訊寫碼標準
諸如視訊影像、TV影像、靜態影像或由視訊記錄器或電腦產生之影像的數位影像可包括按水平線及垂直線排列之像素或樣本。單一影像中的像素之數目通常有數萬個。每一像素通常含有明度及色度資訊。在不壓縮之情況下，待自影像編碼器傳送至影像解碼器的資訊之絕對數量將致使即時影像傳輸不切實際。為了減少待傳輸的資訊之 量，已開發許多不同壓縮方法，諸如，JPEG、MPEG及H.263標準。
視訊寫碼標準包括ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual、ITU-T H 264(亦稱為ISO/IEC MPEG-4 AVC)，及包括此類標準之擴展的HEVC。
另外，視訊寫碼標準(亦即DSC)已由VESA開發。DSC標準為可壓縮用於在顯示連結上傳輸之視訊的視訊壓縮標準。隨著顯器示之解析度增大，視訊資料驅動顯示器所需要的頻寬相應地增大。一些顯示連結可不具有將所有視訊資料傳輸至此類解析度之顯示器的頻寬。因此，DSC標準指定壓縮標準為顯示連結上之可互操作的、視覺上無損的壓縮。
DSC標準與其他視訊寫碼標準(諸如，H.264及HEVC)不同。DSC包括框內壓縮，但不包括框間壓縮，意謂時間資訊可不由DSC標準用於寫碼視訊資料。對比而言，其他視訊寫碼標準可採用其視訊寫碼技術中之框間壓縮。
視訊寫碼系統
在下文中參考隨附圖式更完整地描述新穎系統、裝置及方法之各種態樣。然而，本發明可以許多不同形式來體現，且不應將其解釋為限於貫穿本發明所呈現之任何具體結構或功能。實情為，提供此等態樣，使得本發明將為透徹且完整的，且將向熟習此項技術者充分傳達本發明之範疇。基於本文中之教示，熟習此項技術者應瞭解，本發明之範疇意欲涵蓋本文所揭示之新穎系統、裝置及方法之任何態樣，不管係獨立於本發明之任何其他態樣或與本發明之任何其他態樣組合地實施。舉例而言，可使用本文中所闡明之任何數目個態樣來實施裝置或實踐方法。另外，本發明之範疇意欲涵蓋使用其他結構、功能性或除本文中所闡明的本發明之各種態樣之外或不同於本文中所闡明的 本發明之各種態樣的結構與功能性來實踐的此類裝置或方法。應理解，可藉由申請專利範圍之一或多個要素來體現本文所揭示之任何態樣。
雖然本文中描述特定態樣，但此等態樣之許多變化及排列屬於本發明之範疇內。儘管提及了較佳態樣之一些益處及優點，但本發明之範疇不欲限於特定益處、用途或目標。相反地，本發明之態樣意欲廣泛適用於不同無線技術、系統組態、網路及傳輸協定，其中一些以實例之方式在諸圖中及對較佳態樣之以下描述中加以說明。詳細描述及圖式僅說明本發明而非限制本發明，本發明之範疇由所附申請專利範圍及其等效物來定義。
隨附圖式說明實例。由隨附圖式中之參考數字指示之元件對應於在以下描述中由相同參考數字指示之元件。在本發明中，名稱以序數詞(例如，「第一」、「第二」、「第三」等等)開始的元件未必暗示該等元件具有特定次序。相反，此等序數詞僅用以指代相同或類似類型之不同元件。
圖1A為說明可利用根據本發明中描述之態樣的技術之實例視訊寫碼系統10之方塊圖。如本文所使用，術語「視訊寫碼器」或「寫碼器」一般係指視訊編碼器及視訊解碼器兩者。在本發明中，術語「視訊寫碼」或「寫碼」一般可係指視訊編碼及視訊解碼。除了視訊編碼器及視訊解碼器外，本申請案中描述之態樣可擴展至其他相關器件，諸如，轉碼器(例如，可解碼位元串流且重新編碼另一位元串流之器件)及中間框(例如，可修改、變換及/或另外操縱位元串流之器件)。
如圖1A中所展示，視訊寫碼系統10包括源器件12，其產生在稍後時間由目的地器件14解碼的經編碼視訊資料。在圖1A的實例中，源器件12和目的地器件14構成獨立器件。然而，應注意，源器件12與目的地器件14可在同一器件上或為同一器件之部分，如在圖1B之實 例中所展示。
再次參考圖1A，源器件12及目的地器件14可分別包含廣泛範圍之器件中之任一者，包括桌上型電腦、筆記型(例如，膝上型)電腦、平板電腦、機上盒、電話手持機(諸如，所謂的「智慧型」電話、所謂的「智慧型」平板)、電視、攝影機、顯示器件、數位媒體播放器、視訊遊戲控制台、車載電腦、視訊串流器件、可由實體(例如，人、動物及/或另一可控的器件)穿戴(或可移動地可附接)至該實體的器件(諸如，護目鏡及/或可穿戴電腦)、可用於、嵌入或放置於實體內之器件或裝置及/或類似者。在各種實施例中，源器件12及目的地器件14可經裝備以用於無線通信。
目的地器件14可經由連結16接收待解碼之經編碼視訊資料。連結16可包含能夠將經編碼視訊資料自源器件12移動至目的地器件14之任何類型之媒體或器件。在圖1A之實例中，連結16可包含使得源器件12能夠即時將經編碼視訊數據傳輸至目的地器件14的通信媒體。經編碼視訊資料可根據通信標準(諸如，無線通信協定)調變，且傳輸至目的地器件14。通信媒體可包含任何無線或有線通信媒體，諸如，射頻(RF)頻譜或一或多個實體傳輸線。通信媒體可形成基於封包之網路(諸如，區域網路、廣域網路或諸如網際網路之全球網路)的一部分。通信媒體可包括路由器、交換器、基地台或任何其他可適用於有助於自源器件12至目的地器件14的通信之設備。
在圖1A之實例中，源器件12包括視訊源18、視訊編碼器20及輸出介面22。在一些情況下，輸出介面22可包括調變器/解調器(數據機)及/或傳輸器。在源器件12中，視訊源18可包括諸如視訊擷取器件(例如，視訊攝影機)、含有先前所擷取視訊之視訊存檔、自視訊內容提供者接收視訊之視訊饋入介面及/或用於產生電腦圖形資料作為源視訊的電腦圖形系統之源，或此等源之組合。作為一項實例，若視訊源 18為視訊攝影機，則源器件12及目的地器件14可形成所謂的「攝影機電話」或「視訊電話」，如在圖1B之實例中所說明。然而，本發明中所描述之技術可大體上適用於視訊寫碼，且可應用於無線及/或有線應用。
可由視訊編碼器20對所擷取、預擷取或電腦產生之視訊進行編碼。經編碼視訊資料可經由源器件12之輸出介面22傳輸至目的地器件14。亦可(或替代地)將經編碼視訊資料儲存至儲存器件31上以供稍後由目的地器件14或其他器件存取以用於解碼及/或重放。圖1A及圖1B中說明的視訊編碼器20可包含圖2A中說明的視訊編碼器20或本文所描述之任何其他視訊編碼器。
在圖1A之實例中，目的地器件14包括輸入介面28、視訊解碼器30及顯示器件32。在一些情況下，輸入介面28可包括接收器及/或數據機。目的地器件14的輸入介面28可經由連結16及/或從儲存器件31接收經編碼視訊資料。經由連結16傳達或在儲存器件31上提供之經編碼視訊資料可包括由視訊編碼器20產生之多種語法元素，用於由諸如視訊解碼器30之視訊解碼器在解碼視訊資料過程中使用。此等語法元素可與在通信媒體上傳輸、儲存於儲存媒體上或儲存於檔案伺服器上之經編碼視訊資料包括在一起。圖1A及圖1B中說明的視訊解碼器30可包含圖2B中說明的視訊解碼器30或本文所描述之任何其他視訊解碼器。
顯示器件32可與目的地器件14整合或在目的地器件14外部。在一些實例中，目的地器件14可包括整合顯示器件，且亦經組態以與外部顯示器件介接。在其他實例中，目的地器件14可為顯示器件。大體而言，顯示器件32向使用者顯示經解碼視訊資料，且可包含多種顯示器件中的任一者，諸如，液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示器件。
在相關態樣中，圖1B展示實例視訊寫碼系統10'，其中源器件12及目的地器件14在器件11上或為器件11的部分。器件11可為電話手持機，諸如「智慧型」電話或類似者。器件11可包括與源器件12及目的地器件14可操作通信的處理器/控制器器件13(視情況地存在)。圖1B之視訊寫碼系統10'及其組件另外類似於圖1A之視訊寫碼系統10及其組件。
視訊編碼器20及視訊解碼器30可根據視訊壓縮標準(諸如，DSC)來操作。替代地，視訊編碼器20及視訊解碼器30可根據其他專屬或工業標準(諸如，ITU-T H.264標準，替代地被稱作MPEG-4第10部分，AVC，HEVC)或此類標準之擴展而操作。然而，本發明之技術並不限於任何特定寫碼標準。視訊壓縮標準之其他實例包括MPEG-2及ITU-T H.263。
雖未在圖1A及圖1B之實例中展示，但視訊編碼器20及視訊解碼器30可各自與音訊編碼器及解碼器整合，且可包括適當MUX-DEMUX單元或其他硬體及軟體以處置在共同資料串流或獨立資料串流中的音訊及視訊兩者之編碼。若適用，則在一些實例中，MUX-DEMUX單元可符合ITU H.223多工器協定或其他協定，諸如使用者資料報協定(UDP)。
視訊編碼器20及視訊解碼器30各自可實施為多種合適編碼器電路中的任一者，諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當該等技術部分地在軟體中實施時，器件可將用於軟體之指令儲存於合適的非暫時性電腦可讀媒體中，且在硬體中使用一或多個處理器來執行該等指令以執行本發明之技術。視訊編碼器20及視訊解碼器30中之每一者可包括在一或多個編碼器或解碼器中，編碼器或解碼器中的任一者可整合為各別器件中之組合式 編碼器/解碼器的部分。
視訊寫碼程序
如以上簡要提及，視訊編碼器20編碼視訊資料。視訊資料可包含一或多個圖像。圖像中之每一者為形成視訊之部分的靜態影像。在一些情況下，圖像可被稱作視訊「圖框」。當視訊編碼器20編碼視訊資料時，視訊編碼器20可產生位元串流。位元串流可包括形成視訊資料之經寫碼表示之一連串位元。位元串流可包括經寫碼圖像及相關聯資料。經寫碼圖像為圖像之經寫碼表示。
為了產生位元串流，視訊編碼器20可對視訊資料中之每一圖像執行編碼操作。當視訊編碼器20對圖像執行編碼操作時，視訊編碼器20可產生一系列經寫碼圖像及相關聯資料。相關聯資料可包括寫碼參數(諸如，QP)之集合。為了產生經寫碼圖像，視訊編碼器20可將圖像分割成相等大小之視訊區塊。視訊區塊可為樣本之二維陣列。寫碼參數可定義視訊資料之每一區塊之寫碼選項(例如，寫碼模式)。可選擇寫碼選項以便實現所要的速率失真效能。
在一些實例中，視訊編碼器20可將圖像分割成複數個圖塊。圖塊中之每一者可包括可在無來自影像或圖框中之剩餘區域之資訊的情況下獨立解碼的影像(例如，圖框)中之空間相異區域。每一影像或視訊圖框可在單個圖塊中編碼或每一影像或視訊圖框可在若干圖塊中編碼。在DSC中，經分配以編碼每一圖塊之目標位元可實質上係固定的。作為對圖像執行編碼操作之部分，視訊編碼器20可對圖像之每一圖塊執行編碼操作。當視訊編碼器20對圖塊執行編碼操作時，視訊編碼器20可產生與圖塊相關聯之經編碼資料。與圖塊相關聯之經編碼資料可被稱作「經寫碼圖塊」。
DSC視訊編碼器
圖2A為說明可實施根據本發明中描述之態樣的技術的視訊編碼 器20之實例的方塊圖。視訊編碼器20可經組態以執行本發明之技術中的一些或全部。在一些實例中，本發明中描述之技術可在視訊編碼器20的各種組件之間共用。在一些實例中，另外或替代地，處理器(未展示)可經組態以執行本發明中描述之技術中之一些或全部。
出於解釋之目的，本發明在DSC寫碼的上下文中描述視訊編碼器20。然而，本發明之技術可適用於其他寫碼標準或方法。
在圖2A之實例中，視訊編碼器20包括複數個功能組件。視訊編碼器20之功能組件包括色彩空間轉化器105、緩衝器110、平度偵測器115、速率控制器120、預測器、量化器及重建構器組件125、線緩衝器130、索引色彩歷史135、熵編碼器140、子串流多工器145及速率緩衝器150。在其他實例中，視訊編碼器20可包括較多、較少或不同之功能組件。
色彩空間轉化器105可將輸入色彩空間轉化成用於寫碼實施方案的色彩空間。舉例而言，在一個例示性實施例中，輸入視訊資料之色彩空間為紅色、綠色及藍色(RGB)色彩空間，且寫碼經實施於明度Y、綠色色度Cg及橙色色度Co(YCoCg)色彩空間中。色彩空間轉化可由包括移位並添加至視訊資料之方法執行。應注意，其他色彩空間中之輸入視訊資料可經處理，且亦可執行對其他色彩空間的轉化。
在相關態樣中，視訊編碼器20可包括緩衝器110、線緩衝器130及/或速率緩衝器150。舉例而言，緩衝器110可在其由視訊編碼器20之其他部分使用之前保持經色彩空間轉化之視訊資料。在另一實例中，視訊資料可儲存於RGB色彩空間中，且色彩空間轉化可按需要執行，因為經色彩空間轉化之資料可需要更多位元。
速率緩衝器150可充當視訊編碼器20中之速率控制機構之一部分，其在下文將結合速率控制器120得以更詳細地描述。編碼每-一區塊所花費的位元可實質上基於區塊之性質而極大地變化。速率緩衝器 150可平緩經壓縮視訊中之速率變化。在一些實施例中，採用其中以固定位元速率自緩衝器獲得位元之CBR緩衝器模型。在CBR緩衝器模型中，若視訊編碼器20添加過多位元至位元串流，則速率緩衝器150可上溢。另一方面，視訊編碼器20必須添加足夠位元以便防止速率緩衝器150之下溢。
在視訊解碼器側，可以固定位元速率將位元添加至視訊解碼器30之速率緩衝器155(見下文更詳細地描述之圖2B)，且視訊解碼器30可移除用於每一區塊之可變數目個位元。為了確保恰當的解碼，視訊解碼器30之速率緩衝器155不應在經壓縮位元串流之解碼期間「下溢」或「上溢」。
在一些實施例中，緩衝器滿度(BF)可基於表示當前在緩衝器中之位元數目之值BufferCurrentSize及表示速率緩衝器150之大小之BufferMaxSize(亦即，可在任何時間點儲存於速率緩衝器150中之最大位元數目)來定義。BF可計算為：BF=((BufferCurrentSize * 100)/BufferMaxSize)
應注意，上文計算BF之方法僅為例示性的，且可取決於特定實施或上下文以任何數目個不同方式來計算BF。
平度偵測器115可偵測自視訊資料中之複合(亦即，非平坦)區域到視訊資料中之平坦(亦即，簡單或均勻)區域的變化，及/或反之亦然。術語「複合」及「平坦」將在本文中用以大體上指代視訊編碼器20編碼視訊資料之各別區域的難度。因此，如本文所使用之術語「複合」大體上將視訊資料區域描述為視訊編碼器20難以對其進行編碼，且可(例如)包括紋理化視訊資料、高空間頻率及/或難以編碼之其他特徵。如本文所使用之術語「平坦」大體上將視訊資料區域描述為視訊編碼器20容易對其進行編碼，且可(例如)包括視訊資料中之平滑梯度、低空間頻率及/或容易編碼的其他特徵。自複合區域至平坦區域 之過渡可由視訊編碼器20使用以減小經編碼視訊資料中之量化假影。具體而言，速率控制器120及預測器、量化器及重建構器組件125可減小當識別到自複合區域至平坦區域之過渡時的此類量化假影。類似地，自平坦至複合區域之過渡可由視訊編碼器20使用以增加QP以便減小所預期的寫碼當前區塊所需要的速率。
速率控制器120判定寫碼參數(例如QP)之集合。可由速率控制器120基於速率緩衝器150之緩衝器滿度及視訊資料之影像活動(例如，自複合區域至平坦區域之過渡或平坦區域至複合區域之過渡)來調整QP，以便將確保速率緩衝器150不上溢或下溢的目標位元速率之圖像品質。速率控制器120亦針對視訊資料之每一區塊選擇特定寫碼選項(例如，特定模式)以便實現最佳速率失真效能。速率控制器120將經重建構影像之失真最小化以使得其滿足位元率約束條件(亦即，整體實際寫碼速率適應目標位元速率)。因此，速率控制器120之一個目的係判定寫碼參數(諸如，QP、寫碼模式等)之集合以滿足對速率的瞬時及平均約束，同時最大化速率失真效能。
預測器、量化器及重建構器組件125可執行視訊編碼器20之至少三個編碼操作。預測器、量化器及重建構器組件125可在多個不同模式中執行預測。一個實例預測模式為中值自適應預測的經修改版本。中值自適應預測可由無損JPEG標準(JPEG-LS)實施。可由預測器、量化器及重建構器組件125執行的中值自適應預測的經修改版本可允許三個連續樣本值之平行預測。另一實例預測模式為區塊預測。在區塊預測中，根據線中之經先前重建構像素預測在同一線上方或左邊的樣本。在一些實施例中，視訊編碼器20及視訊解碼器30可均對經重建構像素執行相同的搜尋以判定區塊預測使用，且因此不需要在區塊預測模式中發送位元。在其他實施例中，視訊編碼器20可在位元串流中執行搜尋及信號區塊預測向量，使得視訊解碼器30不必執行獨立搜尋。 亦可實施中點預測模式，其中使用組件範圍之中點來預測樣本。中點預測模式可使得能夠限定甚至係最壞樣本中之經壓縮視訊所需要的位元數目。
預測器、量化器及重建構器組件125亦執行量化。舉例而言，可經由可使用移位器實施之2冪量化器執行量化。應注意，可實施其他量化技術以代替2冪量化器。由預測器、量化器及重建構器組件125執行的量化可基於由速率控制器120判定的QP。最終，預測器、量化器及重建構器組件125亦執行包括將經反量化之殘餘添加至經預測值及確保結果不超出樣本值之有效範圍的重建構。
應注意，上文所描述的由預測器、量化器及重建構器組件125執行的預測、量化及重建構之實例方法僅為說明性的且可實施其他方法。亦應注意，預測器、量化器及重建構器組件125可包括用於執行預測、量化及/或重建構之子組件。應進一步注意，可由若干獨立編碼器組件代替預測器、量化器及重建構器組件125執行預測、量化及/或重建構。
線緩衝器130保持來自預測器、量化器及重建構器組件125之輸出以使得預測器、量化器及重建構器組件125及索引色彩歷史135可使用經緩衝的視訊資料。索引色彩歷史135儲存最近使用的像素值。此等最近使用之像素值可直接由視訊編碼器20經由專用語法參考。
熵編碼器140基於索引色彩歷史135及由平度偵測器115識別的平度過渡編碼預測殘餘及自預測器、量化器及重建構器組件125接收之任何其他資料(例如，由預測器、量化器及重建構器組件125識別之索引)。在一些實例中，熵編碼器140可每時脈每子串流編碼器編碼三個樣本。子串流多工器145可基於無標頭封包多工方案而多工位元串流。此允許視訊解碼器30並行地執行運行三個熵解碼器，從而促進每時脈三個像素之解碼。子串流多工器145可使封包次序最佳化以使得 封包可由視訊解碼器30有效地解碼。應注意，可實施不同的熵寫碼方法，其可有助於每時脈2冪像素(例如，2個像素/時脈或4個像素/時脈)之解碼。
DSC視訊解碼器
圖2B為說明可實施根據本發明中描述之態樣的技術之視訊解碼器30之實例的方塊圖。視訊解碼器30可經組態以執行本發明之技術中的一些或全部。在一些實例中，本發明中描述之技術可在視訊編碼器30的各種組件之間共用。在一些實例中，另外或替代地，處理器(未展示)可經組態以執行本發明中描述之技術中之一些或全部。
出於解釋之目的，本發明在DSC寫碼的上下文中描述視訊解碼器30。然而，本發明之技術可適用於其他寫碼標準或方法。
在圖2B之實例中，視訊解碼器30包括複數個功能組件。視訊解碼器30之功能組件包括速率緩衝器155、子串流解多工器160、熵解碼器165、速率控制器170、預測器、量化器及重建構器組件175、索引色彩歷史180、線緩衝器185及色彩空間轉化器190。所說明的視訊解碼器30之組件類似於上文結合圖2A中之視訊編碼器20所描述的相對應組件。因此，視訊解碼器30之組件中之每一者可以與上文所描述之視訊編碼器20之對應組件類似的方式操作。
QP計算
在一種方法中，可基於以下方程式導出或計算當前區塊之QP(表示為currQP)：currQP=prevQ+QpAdj * (diffBits>0？1：-1)，其中prevQP為與前一區塊相關聯之QP，diffBits表示previousBlockBits與targetBits之間的差，QpAdj為基於diffBits之量值所計算的QP偏移值(例如，QP調整值)，previousBlockBits表示用於寫碼前一區塊之位元數目，且targetBits表示寫碼當前區塊之目標位元數 目。當previousBlockBits>targetBits時，diffBits為正，且可藉由將偏移值QpAdj添加至prevQP值而導出當前區塊QP。換言之，當diffBits為正時，QP值在值方面不自prevQP值中減小。當previousBlockBitstargetBits時，diffBits為負或零，且currQP不自prevQP值增大。應注意，可(例如)以QpAdj隨著diffBits之量值增大而單調增大的方式計算作為diffBits函數之偏移值QpAdj。
在本文中被稱作預設技術的用於計算QP調整值QpAdj的一個技術現將參考圖3來描述。圖3提供包括其上繪製以零開始的diffBits之值的軸線的曲線圖300。在預設技術中，當diffBits>0時，diffBits可使用K臨限值分級至K+1範圍。此等臨限值由標記臨限值1、臨限值2、臨限值3、…及臨限值K說明，且範圍由標記範圍1、範圍2、範圍3、…及範圍K+1說明。在圖3之預設技術中，展示使用K臨限值將diffBits分段成K+1範圍的一個方法。每一範圍可與特定QpAdj值相關聯，其中QpAdj值隨著範圍索引的增大而增大。當diffBits0時，可使用J臨限值(未說明)將diffBits之絕對值分級成J+1範圍，且可存在為J+1範圍中之每一者指定的特定QpAdj值。
在其他態樣中，可基於緩衝器之滿度調整currQP值(可以緩衝器滿度BF表示)，以便防止緩衝器之下溢及/或上溢。特定而言，當BF超出某一臨限值(例如，P1)時，currQP可按固定偏移值(例如，p1)遞增。舉例而言，currQP可調整如下：currQP+=p1。此外，當BF下降到低於某一臨限值(例如，Q1)時，currQP可按q1遞減，例如，currQP-=q1。在某些態樣中，可採用複數個臨限值，且對於每一臨限值，可存在相對應的偏移值以調整currQP。
當識別複合區域至平坦區域的過渡時或當識別平坦區域時，currQP可設定成低值(例如，低於所定義的currQP值的值)，如下文進一步詳細描述。
用於寫碼影像區域之回退預測模式
根據本發明之一或多個態樣，提供用於具有多種預測/寫碼模式之基於區塊之編解碼器的回退模式，每一者旨在寫碼內容類型。在一個實施中，可利用速率控制機制以經由考慮每一預測模式之速率及失真兩者在用於影像中之每一區塊之預測模式中進行選擇。
舉例而言，可針對預測模式中之每一者計算速率失真成本，且當考慮可用預測模式時可考慮各別速率失真成本。速率控制機制可由(例如)假想參考解碼器(HRD)緩衝器模型支援，且其可為編解碼器之設計要求，該要求為緩衝器從不處於下溢(例如，緩衝器中少於零位元)或上溢(例如，緩衝器大小已經增加超過設定的最大大小)之狀態。此類技術適用於利用其中應防止緩衝器下溢/上溢之速率緩衝器的任何編解碼器，對於固定速率編解碼器(例如，DSC)為典型的。
參考圖4，展示涉及基於速率失真準則選擇用於寫碼圖塊之當前區塊之預測模式的實例方法400之流程圖。在區塊410處，方法400可涉及計算每一預測模式之速率失真成本。舉例而言，可根據以下方程式計算速率失真成本：Cmode=Dmode+λ Rmode
Dmode指示預測模式之失真。在一項實例中，Dmode可經計算為YCoCg或另一色彩空間之絕對差之總和(或為絕對差之加權總和)。然而，應注意，除了此類度量之外或代替此類度量，可基於絕對差之總和或絕對差之加權總和而使用其他失真度量。Rmode指示用於預測模式之位元速率。λ指示拉格朗日(Lagrangian)參數。拉格朗日參數可為位元速率與緩衝器滿度之函數。
在區塊420處，方法400可涉及基於其各別速率失真成本分類或分級預測模式。開始於區塊430處，方法400可涉及在可用預測模式(並非先前所選)中選擇具有最小速率失真成本之預測模式m以判定所選擇的模式是否滿足特定條件/準則。在圖4之實例中，該等條件/準則 為條件A(區塊440處)及條件B(區塊450處)。
決策區塊440處之條件A為預測模式m之選擇是否確保緩衝器不以固定速率編解碼器之上溢及/或下溢狀態結束。決策區塊450處之條件B為預測模式m之選擇是否在圖塊中產生充足的剩餘位元來寫碼圖塊之剩餘區塊。
若滿足決策區塊440處之條件A(亦即，預測模式m之選擇確保緩衝器不以固定速率編解碼器之上溢及/或下溢狀態結束)，則方法400可前進至決策區塊450以判定是否滿足條件B(亦即，預測模式m之選擇在圖塊中產生充足的剩餘位元來寫碼圖塊之剩餘區塊)。若滿足條件B，則方法400可前進至區塊460以中斷或結束。
若未滿足決策區塊440處之條件A或決策區塊450處之條件B，則方法400可前進至區塊470，其中針對當前區塊禁用預測模式m，且隨後前進至決策區塊480，其中該方法可判定是否剩餘用於當前區塊之剩餘預測模式。
若在決策區塊480處判定剩餘更多預測模式以用於當前區塊，則方法400可返回至區塊430以在剩餘預測模式中選擇具有最小速率失真成本之下一預測模式。隨後測試此所選擇的預測模式以判定此所選擇的預測模式是否滿足條件A及B。
若在決策區塊480處判定不再剩餘預測模式以用於當前區塊，則方法400可前進至區塊490，其中選擇中點預測(MPP)回退模式。MPP回退模式可縮寫為MPPF模式。
使用該MPPF模式，可自預定義中點值預測區塊中之每一樣本。可以若干不同方式計算此中點值，如下文進一步詳細解釋。在相關態樣中，用於當前區塊之中點值可為固定的，或可取決於相鄰像素值(例如，可至少部分地基於相鄰像素值來計算)。舉例而言，計算中點值可涉及基於與當前區塊相鄰之像素值之平均值來計算中點值。
在一項態樣中，計算中點值可涉及回應於當前區塊為圖塊中之第一區塊而預設為當前區塊之色彩空間分量之動態範圍的一半。在一項實例中，對於RGB888內容，中點可為1≪(8-1)=128。在另一實例中，對於具有9位元每色度分量之YCoCg內容，中點可等於256。在此，若色度在範圍[0,511]內，則中點值可預設為256，或若色度在範圍[-256,255]內，則中點值可預設為0。
在另一態樣中，中點之選擇或計算可部分地基於當前區塊係在圖塊之第一線內(FLS)抑或不在圖塊中之第一線內(NFLS)。舉例而言，若當前區塊在FLS內但並非圖塊中之第一區塊，則自當前線之前一經重建構區塊可用於計算中點。在另一實例中，若當前區塊在NFLS內，則前一經重建構線可用於計算中點。
由此，計算中點值可涉及基於前一經重建構區塊及前一經重建構線中之至少一者而計算中點值。舉例而言，回應於當前區塊在圖塊之第一線內，計算中點值可基於前一經重建構區塊。在另一實例中，回應於當前區塊不在圖塊之第一線內，計算中點值可基於前一經重建構線。
在又一態樣中，可基於當前區塊之當前樣本之動態範圍及/或回退模式之量化器之步長計算中點。在一個實施中，可根據以下方程式計算中點：
DR指示當前樣本之動態範圍，且stepSize指示量化器之當前步長。值x可取決於(例如)當前區塊係在FLS中抑或NFLS中而基於前一經重建構區塊或前一經重建構線。
舉例而言，x可經計算為前一經重建構區塊之平均值。在此情境 下，可使用簡單的2冪量化器，以使得步長判定待截斷之位元平面之數目。此中點將在以下範圍中：
上述範圍偏向正值，因為由於2的補數算術中之附加碼，經量化殘餘將在負區域中相比在正區域中具有一個額外碼。在下表中提供2位元2的補數值的實例碼字。應注意，此範圍[-2,1]具有一個額外負值碼。
在另一實施中，可忽略偏移。亦即，可僅自動態範圍之一半預測每一樣本。在又一實施中，可利用其中編碼器決定每區塊是否將偏移添加至中點預測的動態方法。可(例如)藉由將一個位元傳輸至解碼器而傳信此類資訊。
在再一實施中，可利用為隱式而非明確的動態方法。亦即，編碼器及解碼器兩者可基於來自前一經重建構區塊或前一經重建構線之資料而作出是否將偏移添加至中點的決策。
在另一實施中，用於計算中點之相鄰者可來自前一經重建構區塊(同一線)，而非前一經重建構線。在又一實施中，可基於以下方程式計算中點(MP)值，其中%指示x關於(1≪stepSize)之模數：
在再一實施中，中點值可經計算為相鄰像素值之平均值，但不藉由計算當前位元深度之模數而剪切。
一旦已經針對當前區塊計算了中點值，則可自該中點值預測當前區塊樣本，且殘餘可經量化並傳信至解碼器。應注意，針對當前區塊所計算之中點值在編碼器與解碼器之間將為相同的。
由於MPPF模式可意欲在隨機雜訊區域中使用，其中無空間相關性係可供使用的且速率高度受限，可使用每樣本固定數目個位元來寫碼經量化殘餘。此亦具有確保MPPF模式之最壞行為之效應。
在一項態樣中，經量化殘餘可經分組並經熵寫碼，或使用替代的可變長度碼(諸如，指數哥倫布、霍夫曼表等)來寫碼。
在另一態樣中，當前區塊可經分割成子區塊之集合。舉例而言，2×8區塊可經分割成四個1×4子區塊。可針對每一子區塊計算單獨的中點值。可自其與之相交的中點預測當前區塊中之每一樣本。舉例而言，在給定1×4大小之子區塊的情況下，可自同一中點值(例如，MP 0)預測當前區塊中之前四個像素。將可自MP1預測下四個樣本，等等。
在又一態樣中，可部分地基於所要之應用選擇用於MPPF模式之每樣本之位元數目。在一個所建議的方法中，用於MPPF區塊之位元總數可小於編碼器之目標位元速率。舉例而言，若源內容為RGB888(24位元/像素)，區塊大小為2×8，且壓縮速率為4：1，則可根據以下方程式計算目標位元速率：
在以上實例中，MPPF區塊之總速率應嚴格小於96個位元。在以上實例之變體中，小於或等於()符號可用於代替小於(<)符號，以使得每一MPPF區塊應小於或等於96個位元。
應注意，所提出MPPF模式可經調諧以具有每區塊最壞速率。其係合乎需要的，係因為編解碼器可事先確保給定數目個位元大致上可供用於當前圖塊內的任何區塊。在一項實例中，僅有的要求可為MPPF模式速率小於目標壓縮之位元速率以便防止緩衝器上溢。
應進一步注意，所提出的回退模式極適合於編碼隨機雜訊區域，該等隨機雜訊區域可具有最大熵值。由於空間相關性在此等情況下可為零，預測可不提供任何速率節省。因此，僅自隨機分佈之平均 值預測可為最佳的。舉例而言，所有殘餘可針對位元深度N在[-2N-1,2N-1-1]之間均勻地分佈。對於在[0,2N-1]中並不均勻的雜訊，MPPF模式之預測部分可進一步涉及減小所預期速率。
用於速率受限回退模式之實例流程圖
參考圖5，將描述用於寫碼視訊資訊之實例程序。視訊資訊可包括影像之圖塊，且圖塊可包括一或多個區塊。
圖5為說明根據本發明之實施例的用於寫碼視訊資訊之方法500之流程圖。圖5中說明的步驟可藉由以下各者執行：視訊編碼器(例如，圖2A中之視訊編碼器20)、視訊解碼器(例如，圖2B中之視訊解碼器30)或其組件，諸如(例如)速率控制器120、預測器、量化器及重建構器組件125、熵編碼器140及速率緩衝器150。為方便起見，方法500經描述為由視訊寫碼器(亦簡稱為寫碼器)執行，該視訊寫碼器可為視訊編碼器20、視訊解碼器30或另一組件。
寫碼器或其組件可實施於包括由包括緩衝器之複數個可程式化計算單元共用之整合式全域記憶體的器件上，其中該緩衝器可包括先進先出(FIFO)緩衝器。該器件可進一步包括積體電路(IC)，其包含包括圖形處理單元(GPU)，其中該GPU可包括一或多個可程式化計算單元。
方法500開始於區塊510。在區塊510處，寫碼器識別用於固定速率編解碼器之一或多個預測模式，每一預測模式具有速率失真成本。一或多個預測模式可包括(例如)DCT模式、區塊預測模式及圖案預測模式中之一或多者。在區塊520處，寫碼器針對當前區塊自並非先前所選之再一個預測模式中選擇具有最低速率失真成本之預測模式。
在區塊530處，寫碼器判定所選擇預測模式是否將導致固定速率編解碼器之緩衝器之上溢或下溢。在區塊540處，寫碼器判定所選擇預測模式是否將導致圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊。
在區塊550處，回應於所選擇的一或多個預測模式中之每一者導致以下中之至少一者：(i)緩衝器之上溢或下溢及(ii)圖塊中之剩餘位元不足以寫碼圖塊之剩餘區塊，寫碼器利用回退模式以寫碼當前區塊。回退模式可涉及判定當前區塊之中點值及自該中點值預測當前區塊樣本。
在一項實例中，區塊550可涉及：寫碼器回應於當前區塊為圖塊中之第一區塊藉由預設為當前區塊之色彩空間分量之動態範圍之一半而判定中點值。在另一實例中，區塊550可涉及：寫碼器基於與當前區塊相鄰之像素值之平均值而判定中點值。
在另一實例中，區塊550可涉及：寫碼器基於前一經重建構區塊及前一經重建構線中之至少一者而判定中點值。舉例而言，寫碼器可回應於當前區塊在圖塊之第一線內基於前一經重建構區塊而演算(calculate)或計算中點值。在另一實例中，寫碼器可回應於當前區塊不在圖塊之第一線內基於前一經重建構線而演算或計算中點值。
在再一實例中，寫碼器可基於當前區塊之當前樣本之動態範圍及回退模式之量化器之步長而判定中點。
其他考慮因素
應注意，已經自編碼器(諸如，圖2A中之視訊編碼器20)之視角描述了本發明之態樣。然而，熟習此項技術者將瞭解，與上文所描述之彼等操作相反的操作可應用於解碼由(例如)圖2B中之視訊解碼器30產生的位元串流。
可使用多種不同技術及技藝中之任何者來表示本文中揭示之資訊及信號。舉例而言，可由電壓、電流、電磁波、磁場或磁粒子、光場或光粒子或其任何組合表示遍及以上描述可能參考的資料、指令、命令、資訊、信號、位元、符號及碼片。
結合本文中所揭示之實施例而描述之各種說明性邏輯區塊及演 算法步驟可被實施為電子硬體、電腦軟體或兩者之組合。為了清楚地說明硬體與軟體之此可互換性，上文已大體在其功能性方面描述了各種說明性組件、區塊及步驟。此功能性被實施為硬體抑或軟體取決於特定應用及強加於總體系統之設計約束。熟習此項技術者可針對每一特定應用而以不同方式來實施所描述功能性，但此等實施決策不應被解釋為導致脫離本發明之範疇。
因此，本文中描述之技術可以硬體、軟體、韌體或其任何組合實施。此類技術可以多種器件中之任一者實施，諸如，通用電腦、無線通信器件手持機、或積體電路器件，該等積體電路器件具有包括無線通信器件手持機、汽車、電氣設備、可穿戴器件及/或其他器件中之應用的多個用途。可將描述為器件或組件之任何特徵一起實施於整合式邏輯器件中或分開來實施為離散但可互操作之邏輯器件。若以軟體實施，則該等技術可至少部分地由包含包括當經執行時執行以上描述的方法中之一或多者之指令之程式碼的電腦可讀資料儲存媒體實現。電腦可讀資料儲存媒體可形成電腦程式產品之部分，該電腦程式產品可包括封裝材料。電腦可讀媒體可包含記憶體或資料儲存媒體，諸如，隨機存取記憶體(RAM)，諸如，同步動態隨機存取記憶體(SDRAM)、唯讀記憶體(ROM)、非揮發性隨機存取記憶體(NVRAM)、電可抹除可程式化唯讀記憶體(EEPROM)、快閃記憶體、磁性或光學資料儲存媒體及其類似者。另外或替代地，該等技術可至少部分地由電腦可讀通信媒體實現，該電腦可讀通信媒體載送或傳達呈指令或資料結構之形式且可由電腦存取、讀取及/或執行的程式碼，諸如，傳播之信號或波。
程式碼可由可包括一或多個處理器之處理器執行，諸如，一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效整合式或離散邏輯 電路。此處理器可經組態以執行本發明中所描述的技術中之任何技術。通用處理器可為微處理器；但在替代方案中，處理器可為任何習知處理器、控制器、微控制器或狀態機。處理器亦可實施為計算器件之組合，例如，DSP與微處理器之組合、複數個微處理器、一或多個微處理器結合DSP核心或任何其他此類組態。因此，如本文中所使用之術語「處理器」可係指前述結構、前述結構之任何組合或適合於實施本文中描述之技術的任何其他結構或裝置中之任一者。此外，在一些態樣中，本文中描述之功能性可提供於經組態用於編碼及解碼之專用軟體或硬體內，或併入於組合式視訊編碼器-解碼器(編解碼器)中。又，該等技術可完全實施於一或多個電路或邏輯元件中。
本發明之技術可實施於各種器件或裝置中，包括無線手持機、IC或IC之集合(例如，晶片集合)。在本發明中描述各種組件或單元以強調經組態以執行所揭示技術之器件的功能態樣，但未必需要藉由不同硬體單元實現。實情為，如上文所描述，各種單元可組合於編解碼器硬體單元中，或結合合適軟體及/或韌體藉由互操作性硬體單元(包括如上所述之一或多個處理器)之集合來提供。
雖然已經結合各種不同實施例描述了前文，但可在不脫離本發明之教示的情況下將來自一項實施例之特徵或元件與其他實施例組合。然而，各別實施例之間的特徵之組合未必限於此。已描述了本發明之各種實施例。此等及其他實施例在以下申請專利範圍之範疇內。
500‧‧‧方法
510‧‧‧區塊
520‧‧‧區塊
530‧‧‧區塊
540‧‧‧區塊
550‧‧‧區塊

Claims (30)

  1. 一種用於寫碼與一影像之一圖塊相關之視訊資訊之方法，該圖塊包含一或多個區塊，該方法包含：識別用於一固定速率編解碼器之一或多個預測模式，每一預測模式具有一速率失真成本；針對一當前區塊自並非先前所選之該再一個預測模式中選擇具有該最低速率失真成本之一預測模式；判定該所選擇預測模式是否將導致該固定速率編解碼器之一緩衝器之上溢或下溢；判定該所選擇預測模式是否將導致該圖塊中之剩餘位元不足以寫碼該圖塊之剩餘區塊；及回應於該所選擇的一或多個預測模式中之每一者導致以下情況中之至少一者而利用一回退模式來寫碼該當前區塊：(i)該緩衝器之上溢或下溢及(ii)該圖塊中之剩餘位元不足以寫碼該圖塊之該等剩餘區塊，其中該回退模式包含判定該當前區塊之一中點值及自該中點值預測當前區塊樣本。
  2. 如請求項1之方法，其中判定該中點值包含回應於該當前區塊為該圖塊中之該第一區塊而預設為該當前區塊之一色彩空間組件之一動態範圍之一半。
  3. 如請求項1之方法，其中該中點值之該判定係基於與該當前區塊相鄰之經重建構像素值之一平均值。
  4. 如請求項1之方法，其中該中點值之該判定係基於一前一經重建構區塊及一前一經重建構線中之至少一者。
  5. 如請求項4之方法，回應於該當前區塊在一圖塊之一第一線內，該中點值之該判定進一步基於該前一經重建構區塊。
  6. 如請求項4之方法，回應於該當前區塊不在一圖塊之一第一線內，該中點值之該判定進一步基於該前一經重建構線。
  7. 如請求項1之方法，其中該中點值之該判定係基於該當前區塊之一當前樣本之一動態範圍及該回退模式之一量化器之一步長。
  8. 如請求項1之方法，其中該一或多個預測模式包含一離散餘弦變換(DCT)模式、一區塊預測模式及一圖案預測模式中之一或多者。
  9. 一種器件，其包含：一記憶體，其經組態以儲存與一影像之一圖塊相關之視訊資訊，該圖塊包含一或多個區塊；及至少一個處理器電路，其經耦接至該記憶體且經組態以：識別用於一固定速率編解碼器之一或多個預測模式，每一預測模式具有一速率失真成本；針對一當前區塊自並非先前所選之該再一個預測模式中選擇具有該最低速率失真成本之一預測模式；判定該所選擇預測模式是否將導致該固定速率編解碼器之一緩衝器之上溢或下溢；判定該所選擇預測模式是否將導致該圖塊中之剩餘位元不足以寫碼該圖塊之剩餘區塊；及回應於該所選擇之一或多個預測模式中之每一者導致以下情況中之至少一者而利用一回退模式寫碼該當前區塊：(i)該緩衝器之上溢或下溢及(ii)該圖塊中之剩餘位元不足以寫碼該圖塊之該等剩餘區塊，其中該回退模式包含判定該當前區塊之一中點值及自該中點值預測當前區塊樣本。
  10. 如請求項9之器件，其中該至少一個處理器經進一步組態以經由回應於該當前區塊為該圖塊中之該第一區塊而預設為該當前區 塊之一色彩空間組件之一動態範圍之一半來判定該中點值。
  11. 如請求項9之器件，其中該至少一個處理器經進一步組態以基於與該當前區塊相鄰之經重建構像素值之一平均值而判定該中點值。
  12. 如請求項9之器件，其中該至少一個處理器經進一步組態以基於一前一經重建構區塊及一前一經重建構線中之至少一者而判定該中點值。
  13. 如請求項12之器件，其中該至少一個處理器經進一步組態以回應於該當前區塊在一圖塊之一第一線內基於該前一經重建構區塊而判定該中點值。
  14. 如請求項12之器件，其中該至少一個處理器經進一步組態以回應於該當前區塊不在一圖塊之一第一線內基於該前一經重建構線而判定該中點值。
  15. 如請求項9之器件，其中該至少一個處理器進一步經配置以基於該當前區塊之一當前樣本之一動態範圍及該回退模式之一量化器之一步長而判定該中點值。
  16. 如請求項9之器件，其中該一或多個預測模式包含一離散餘弦變換(DCT)模式、一區塊預測模式及一圖案預測模式中之一或多者。
  17. 一種用於寫碼與一影像之一圖塊相關之視訊資訊之裝置，該圖塊包含一或多個區塊，該裝置包含：用於識別用於一固定速率編解碼器之一或多個預測模式之構件，每一預測模式具有一速率失真成本；用於針對一當前區塊自並非先前所選之該再一個預測模式中選擇具有該最低速率失真成本之一預測模式之構件；用於判定該所選擇預測模式是否將導致該固定速率編解碼器 之一緩衝器之上溢或下溢之構件；用於判定該所選擇預測模式是否將導致該圖塊中之剩餘位元不足以寫碼該圖塊之剩餘區塊之構件；及用於回應於該所選擇的一或多個預測模式中之每一者導致以下情況中之至少一者而利用一回退模式來寫碼該當前區塊之構件：(i)該緩衝器之上溢或下溢及(ii)該圖塊中之剩餘位元不足以寫碼該圖塊之該等剩餘區塊，其中用於利用該回退模式之該構件包含用於判定該當前區塊之一中點值及自該中點值預測當前區塊樣本之構件。
  18. 如請求項17之裝置，其中用於判定該中點值之該構件包含用於回應於該當前區塊為該圖塊中之該第一區塊而預設為該當前區塊之一色彩空間組件之一動態範圍之一半的構件。
  19. 如請求項17之裝置，其中用於判定之該構件包含用於基於與該當前區塊相鄰之經重建構像素值之一平均值而計算該中點值之構件。
  20. 如請求項17之裝置，其中用於判定之該構件包含用於基於一前一經重建構區塊及一前一經重建構線中之至少一者而計算該中點值之構件。
  21. 如請求項20之裝置，其中用於計算之該構件包含用於回應於該當前區塊在一圖塊之一第一線內基於該前一經重建構區塊而計算該中點值之構件。
  22. 如請求項20之裝置，其中用於計算之該構件包含用於回應於該當前區塊不在一圖塊之一第一線內基於該前一經重建構線而計算該中點值之構件。
  23. 如請求項17之裝置，其中用於判定之該構件包含用於基於該當前區塊之一當前樣本之一動態範圍及該回退模式之一量化器之 一步長而計算該中點之構件。
  24. 如請求項17之裝置，其中該一或多個預測模式包含一離散餘弦變換(DCT)模式、一區塊預測模式及一圖案預測模式中之一或多者。
  25. 一種在其上儲存有與一影像之一圖塊相關之視訊資訊之非暫時性電腦可讀儲存媒體，該圖塊包含一或多個區塊，其中該儲存媒體進一步在其上儲存有指令，該等指令當經執行時使得一器件之一處理器進行以下操作：識別用於一固定速率編解碼器之一或多個預測模式，每一預測模式具有一速率失真成本；針對一當前區塊自並非先前所選之該再一個預測模式中選擇具有該最低速率失真成本之一預測模式；判定該所選擇預測模式是否將導致該固定速率編解碼器之一緩衝器之上溢或下溢；判定該所選擇預測模式是否將導致該圖塊中之剩餘位元不足以寫碼該圖塊之剩餘區塊；及回應於該所選擇之一或多個預測模式中之每一者導致以下情況中之至少一者而利用一回退模式寫碼該當前區塊：(i)該緩衝器之上溢或下溢及(ii)該圖塊中之剩餘位元不足以寫碼該圖塊之該剩餘區塊，其中該回退模式包含判定該當前區塊之一中點值及自該中點值預測當前區塊樣本。
  26. 如請求項25之非暫時性電腦可讀儲存媒體，進一步在其上儲存有指令，該等指令當經執行時使得該處理器基於回應於該當前區塊為該圖塊中之該第一區塊預設為該當前區塊之一色彩空間組件之一動態範圍之一半而判定該中點值。
  27. 如請求項25之非暫時性電腦可讀儲存媒體，進一步在其上儲存 有指令，該等指令當經執行時使得該處理器基於與該當前區塊相鄰之經重建構像素值之一平均值判定該中點值。
  28. 如請求項25之非暫時性電腦可讀儲存媒體，進一步在其上儲存有指令，該等指令當經執行時使得該處理器基於一前一經重建構區塊及一前一經重建構線中之至少一者來判定該中點值。
  29. 如請求項28之非暫時性電腦可讀儲存媒體，進一步在其上儲存有指令，該等指令當經執行時使得該處理器(i)回應於該當前區塊在一圖塊之一第一線內基於該前一經重建構區塊或(ii)回應於該當前區塊不在一圖塊之一第一線內基於該前一經重建構線而判定該中點值。
  30. 如請求項25之非暫時性電腦可讀儲存媒體，進一步在其上儲存有指令，該等指令當經執行時使得該處理器基於該當前區塊之一當前樣本之一動態範圍及該回退模式之一量化器之一步長而判定該中點。
TW105111395A 2015-04-13 2016-04-12 用於顯示串流壓縮之速率受限回退模式 TW201639363A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562146911P 2015-04-13 2015-04-13
US15/078,792 US10244255B2 (en) 2015-04-13 2016-03-23 Rate-constrained fallback mode for display stream compression

Publications (1)

Publication Number Publication Date
TW201639363A true TW201639363A (zh) 2016-11-01

Family

ID=57112951

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105111395A TW201639363A (zh) 2015-04-13 2016-04-12 用於顯示串流壓縮之速率受限回退模式

Country Status (7)

Country Link
US (1) US10244255B2 (zh)
EP (1) EP3284253B1 (zh)
JP (1) JP2018516491A (zh)
KR (1) KR20170137090A (zh)
CN (1) CN107409219B (zh)
TW (1) TW201639363A (zh)
WO (1) WO2016167935A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI538480B (zh) * 2014-05-27 2016-06-11 敦泰電子股份有限公司 藉由偵測鄰近像素複雜度來動態調整壓縮參數的影像壓縮系統
US9936203B2 (en) 2015-04-13 2018-04-03 Qualcomm Incorporated Complex region detection for display stream compression
US10356428B2 (en) 2015-04-13 2019-07-16 Qualcomm Incorporated Quantization parameter (QP) update classification for display stream compression (DSC)
US10284849B2 (en) 2015-04-13 2019-05-07 Qualcomm Incorporated Quantization parameter (QP) calculation for display stream compression (DSC) based on complexity measure
US20170310969A1 (en) * 2016-04-20 2017-10-26 Mediatek Inc. Image encoding method and apparatus with color space transform performed upon predictor and associated image decoding method and apparatus
US20170339423A1 (en) * 2016-05-23 2017-11-23 Mediatek Inc. Image encoder using shared mean value calculation circuit and/or shared clipping circuit and associated image encoding method
US10706779B2 (en) 2017-02-23 2020-07-07 Synaptics Incorporated Device and method for image data processing
US10368079B2 (en) * 2017-03-31 2019-07-30 Ati Technologies Ulc Method and apparatus for image compression that employs multiple indexed color history buffers
US10567803B2 (en) 2017-04-12 2020-02-18 Qualcomm Incorporated Midpoint prediction error diffusion for display stream compression
US10970881B2 (en) 2018-12-21 2021-04-06 Samsung Display Co., Ltd. Fallback modes for display compression
US11244476B2 (en) * 2020-04-06 2022-02-08 Samsung Display Co., Ltd. Systems and methods for low-complexity near lossless fixed-rate hybrid data compression codecs
CN116527942A (zh) * 2022-07-27 2023-08-01 杭州海康威视数字技术股份有限公司 一种图像编解码方法及装置
CN117579839B (zh) * 2024-01-15 2024-03-22 电子科技大学 一种基于率失真优化色彩空间转换矩阵的图像压缩方法

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4922273A (en) 1987-04-02 1990-05-01 Konica Corporation Compression method of halftone image data
JP2507215B2 (ja) 1991-09-02 1996-06-12 松下電器産業株式会社 画像符号化装置
US5398078A (en) 1991-10-31 1995-03-14 Kabushiki Kaisha Toshiba Method of detecting a motion vector in an image coding apparatus
JP3152765B2 (ja) 1991-10-31 2001-04-03 株式会社東芝 画像符号化装置
JPH06245199A (ja) 1993-02-19 1994-09-02 Sharp Corp 画像符号化装置
US5933451A (en) 1994-04-22 1999-08-03 Thomson Consumer Electronics, Inc. Complexity determining apparatus
US5619341A (en) * 1995-02-23 1997-04-08 Motorola, Inc. Method and apparatus for preventing overflow and underflow of an encoder buffer in a video compression system
US6160846A (en) 1995-10-25 2000-12-12 Sarnoff Corporation Apparatus and method for optimizing the rate control in a coding system
US7016413B2 (en) 1998-03-20 2006-03-21 International Business Machines Corporation Adaptively encoding a picture of contrasted complexity having normal video and noisy video portions
FI116819B (fi) * 2000-01-21 2006-02-28 Nokia Corp Menetelmä kuvien lähettämiseksi ja kuvakooderi
DE10048735A1 (de) 2000-09-29 2002-04-11 Bosch Gmbh Robert Verfahren zur Codierung und Decodierung von Bildsequenzen sowie Einrichtungen hierzu
US8054880B2 (en) 2004-12-10 2011-11-08 Tut Systems, Inc. Parallel rate control for digital video encoder with multi-processor architecture and picture-based look-ahead window
KR100540655B1 (ko) * 2003-01-23 2006-01-10 삼성전자주식회사 비디오 코딩시의 비트율 제어 방법 및 장치
US20050030944A1 (en) * 2003-05-27 2005-02-10 General Instrument Corporation Method and apparatus for reducing packet size employing payload header suppression (PHS)
JP4074868B2 (ja) * 2004-12-22 2008-04-16 株式会社東芝 画像符号化制御方法及びその装置
US7751478B2 (en) * 2005-01-21 2010-07-06 Seiko Epson Corporation Prediction intra-mode selection in an encoder
US8363717B2 (en) 2005-05-17 2013-01-29 Canon Kabushiki Kaisha Image processing apparatus
US20060280242A1 (en) 2005-06-13 2006-12-14 Nokia Corporation System and method for providing one-pass rate control for encoders
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
KR101348365B1 (ko) 2006-08-02 2014-01-10 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
US8787445B2 (en) 2007-03-15 2014-07-22 Nvidia Corporation Allocation of available bits to represent different portions of video frames captured in a sequence
KR101172430B1 (ko) 2007-08-17 2012-08-08 삼성전자주식회사 비트율 제어 방법 및 그 장치
WO2009045683A1 (en) 2007-09-28 2009-04-09 Athanasios Leontaris Video compression and tranmission techniques
US8363719B2 (en) 2007-10-29 2013-01-29 Canon Kabushiki Kaisha Encoding apparatus, method of controlling thereof, and computer program
JP5111128B2 (ja) 2008-01-22 2012-12-26 キヤノン株式会社 符号化装置、符号化装置の制御方法及びコンピュータプログラム
KR100952340B1 (ko) 2008-01-24 2010-04-09 에스케이 텔레콤주식회사 시공간적 복잡도를 이용한 부호화 모드 결정 방법 및 장치
WO2010005691A1 (en) 2008-06-16 2010-01-14 Dolby Laboratories Licensing Corporation Rate control model adaptation based on slice dependencies for video coding
WO2010036772A2 (en) 2008-09-26 2010-04-01 Dolby Laboratories Licensing Corporation Complexity allocation for video and image coding applications
KR20110091000A (ko) 2008-11-07 2011-08-10 미쓰비시덴키 가부시키가이샤 화상 부호화 장치 및 화상 복호 장치
US8897365B2 (en) 2008-11-19 2014-11-25 Nvidia Corporation Video rate control processor for a video encoding process
US8867613B2 (en) 2008-12-29 2014-10-21 Thomson Licensing Method and apparatus for rate control for compression of video frames
US9473792B2 (en) 2009-11-06 2016-10-18 Texas Instruments Incorporated Method and system to improve the performance of a video encoder
KR101282193B1 (ko) 2009-11-10 2013-07-04 한국전자통신연구원 칼만 필터와 ｆｉｒ 필터를 사용한 동영상 인코더에서의 비트율 제어 방법
KR20110060181A (ko) 2009-11-30 2011-06-08 한국전자통신연구원 무손실/준무손실 영상 압축 장치 및 방법
KR101464423B1 (ko) 2010-01-08 2014-11-25 노키아 코포레이션 비디오 프로세싱을 위한 장치, 방법 및 컴퓨터 프로그램
US20120026394A1 (en) 2010-07-30 2012-02-02 Emi Maruyama Video Decoder, Decoding Method, and Video Encoder
MX2013003868A (es) * 2010-10-05 2013-06-24 Gen Instrument Corp Metodo y aparatoo para codificacion de video basado en las caracteristicas.
PL2661892T3 (pl) 2011-01-07 2022-08-16 Nokia Technologies Oy Przewidywanie ruchu w kodowaniu wideo
WO2012170910A1 (en) 2011-06-10 2012-12-13 Bytemobile, Inc. Macroblock-level adaptive quantization in quality-aware video optimization
JP5988577B2 (ja) 2011-12-28 2016-09-07 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム
RU2607998C9 (ru) 2012-03-28 2017-07-07 ДжейВиСи КЕНВУД КОРПОРЕЙШН Устройство кодирования изображения, способ кодирования изображения и программа кодирования изображения, а также устройство декодирования изображения, способ декодирования изображения и программа декодирования изображения
US9451250B2 (en) * 2012-10-03 2016-09-20 Broadcom Corporation Bounded rate compression with rate control for slices
US9299166B2 (en) 2012-12-13 2016-03-29 Qualcomm Incorporated Image compression method and apparatus for bandwidth saving
US9538190B2 (en) 2013-04-08 2017-01-03 Qualcomm Incorporated Intra rate control for video encoding based on sum of absolute transformed difference
US9565440B2 (en) 2013-06-25 2017-02-07 Vixs Systems Inc. Quantization parameter adjustment based on sum of variance and estimated picture encoding cost
CN104346132B (zh) * 2013-08-08 2017-06-09 上海复旦微电子集团股份有限公司 应用于智能卡虚拟机运行的控制装置及智能卡虚拟机
GB2523736B (en) 2014-02-19 2020-03-25 Advanced Risc Mach Ltd Rate control in video encoding
US9661329B2 (en) 2014-04-30 2017-05-23 Intel Corporation Constant quality video coding
US10356428B2 (en) 2015-04-13 2019-07-16 Qualcomm Incorporated Quantization parameter (QP) update classification for display stream compression (DSC)
US9936203B2 (en) 2015-04-13 2018-04-03 Qualcomm Incorporated Complex region detection for display stream compression
US10284849B2 (en) 2015-04-13 2019-05-07 Qualcomm Incorporated Quantization parameter (QP) calculation for display stream compression (DSC) based on complexity measure

Also Published As

Publication number Publication date
WO2016167935A1 (en) 2016-10-20
US10244255B2 (en) 2019-03-26
EP3284253B1 (en) 2020-06-03
KR20170137090A (ko) 2017-12-12
US20160301950A1 (en) 2016-10-13
CN107409219B (zh) 2020-02-21
CN107409219A (zh) 2017-11-28
JP2018516491A (ja) 2018-06-21
EP3284253A1 (en) 2018-02-21

Similar Documents

Publication Publication Date Title
CN107409219B (zh) 译码视频信息的方法、设备、装置和计算机可读存储媒体
US10574988B2 (en) System and methods for reducing slice boundary visual artifacts in display stream compression (DSC)
CN108028925B (zh) 用于显示流压缩(dsc)的块预测模式的可变分区大小
US10284849B2 (en) Quantization parameter (QP) calculation for display stream compression (DSC) based on complexity measure
TWI634778B (zh) 用於顯示串流壓縮之複合區域偵測
JP6449329B2 (ja) ディスプレイストリーム圧縮（ｄｓｃ）において量子化パラメータ（ｑｐ）を選択するためのシステムおよび方法
US10631005B2 (en) System and method for coding in block prediction mode for display stream compression (DSC)
JP6464192B2 (ja) ディスプレイストリーム圧縮（ｄｓｃ）のための平坦度検出のためのシステムおよび方法
TW201703522A (zh) 用於顯示串流壓縮之量化參數更新分類
KR102175662B1 (ko) 디스플레이 스트림 압축 (dsc) 에서의 왜곡을 계산하기 위한 시스템 및 방법들
TW201737706A (zh) 用於顯示串流壓縮之基於向量之熵寫碼的裝置及方法
KR102112942B1 (ko) 디스플레이 스트림 압축에 대한 지각적 양자화 파라미터 (qp) 가중을 위한 장치 및 방법들
US9843816B2 (en) System and method for coding in pattern mode for display stream compression (DSC)