TWI739382B - 位元率控制方法與視訊處理裝置 - Google Patents

位元率控制方法與視訊處理裝置 Download PDF

Info

Publication number
TWI739382B
TWI739382B TW109111998A TW109111998A TWI739382B TW I739382 B TWI739382 B TW I739382B TW 109111998 A TW109111998 A TW 109111998A TW 109111998 A TW109111998 A TW 109111998A TW I739382 B TWI739382 B TW I739382B
Authority
TW
Taiwan
Prior art keywords
coding tree
target bit
bit
video
tree units
Prior art date
Application number
TW109111998A
Other languages
English (en)
Other versions
TW202137769A (zh
Inventor
曾偉民
志宏 蔡
何晴西
奚曉華
張容
Original Assignee
瑞昱半導體股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞昱半導體股份有限公司 filed Critical 瑞昱半導體股份有限公司
Application granted granted Critical
Publication of TWI739382B publication Critical patent/TWI739382B/zh
Publication of TW202137769A publication Critical patent/TW202137769A/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

位元率控制方法包含下列操作：接收欲編碼的視訊的第一目標位元；根據第一目標位元對視訊的多個編碼樹單元中之多個第一編碼樹單元一起計算一第二目標位元；根據多個編碼樹單元中之至少一第二編碼樹單元的實際位元與多個編碼樹單元中之至少一第三編碼樹單元的一第三目標位元計算多個編碼樹單元中之至少一第四編碼樹單元的第四目標位元，其中至少一第二編碼樹單元已編碼完成，至少一第三編碼樹單元尚未編碼完成，且至少一第四編碼樹單元尚未開始編碼；以及依序根據第二目標位元、第三目標位元以及第四目標位元調整用於編碼視訊的至少一編碼參數。

Description

位元率控制方法與視訊處理裝置
本案是關於視訊處理裝置，更明確地說，是關於對視訊的編碼樹單元層級進行編碼的視訊處理裝置與位元率控制方法。
視訊的位元率控制可通過調節視訊編碼器的編碼參數，以讓輸出的視訊串流可以滿足有限與時變的頻寬限制。近年來，高效率視訊編碼(High Efficiency Video Coding)的視訊編碼標準被提出，以提升影像品質與高資料壓縮率。然而，在現有做法中，需針對每個可編碼的最小區塊進行運算並據以調節編碼參數。如此，將使得運算複雜度過高，造成硬體實現不易。另外，由於硬體中可能存在線路延遲，導致在實際的編碼過程中會耗費更多的處理時間。
於一些實施例中，位元率控制方法包含下列操作：接收欲編碼的視訊的第一目標位元；根據第一目標位元對視訊的多個編碼樹單元中之多個第一編碼樹單元一起計算一第二目標位元；根據多個編碼樹單元中之至少一第 二編碼樹單元的實際位元與多個編碼樹單元中之至少一第三編碼樹單元的第三目標位元計算多個編碼樹單元中之至少一第四編碼樹單元的第四目標位元，其中至少一第二編碼樹單元已編碼完成，至少一第三編碼樹單元尚未編碼完成，且至少一第四編碼樹單元尚未開始編碼；以及依序根據第二目標位元、第三目標位元與第四目標位元決定用於編碼視訊的至少一編碼參數。
於一些實施例中，視訊處理裝置包含記憶體電路與處理電路。記憶體電路用以儲存至少一程式碼。處理電路用以執行至少一程式碼，以執行下列操作：根據欲編碼的視訊的第一目標位元對視訊的複數個編碼樹單元中之複數個第一編碼樹單元一起計算第二目標位元；根據該些編碼樹單元中之至少一第二編碼樹單元的實際位元以及該些編碼樹單元中之至少一第三編碼樹單元的第三目標位元計算該些編碼樹單元中之至少一第四編碼樹單元的第四目標位元，其中至少一第二編碼樹單元已編碼完成，至少一第三編碼樹單元尚未編碼完成，且至少一第四編碼樹單元尚未開始編碼；以及依序根據第二目標位元、第三目標位元與第四目標位元決定用於編碼該視訊的至少一編碼參數。
有關本案的特徵、實作與功效，茲配合圖式作詳細說明如下。
100:位元率控制方法
S110,S120,S130:操作
200:位元率控制方法
S210,S220,S230,S240:操作
C0~C17:編碼樹單元
M1:圖像區間
P:圖像
S3-1~S3-16:步驟
S4-1,S4-2:步驟
600:視訊處理裝置
610:處理電路
620:記憶體電路
630:輸入/輸出介面
Rtar:視訊的目標位元
SV:視頻
〔圖1〕為根據本案一些實施例所繪製的一種位元率(bit rate)控制方法的流程圖；〔圖2〕為根據本案一些實施例所繪製的一種用於視訊編碼的位元率控制方法的流程圖； 〔圖3A〕為根據相關文獻的R-λ模型對編碼樹單元計算目標位元的示意圖〔圖3B〕為根據本案一些實施例示出圖2之部分操作的示意圖；〔圖3C〕為根據本案一些實施例示出圖2之一操作的示意圖；〔圖4〕為根據本案一些實施例示出圖2的另一操作的示意圖；〔圖5〕為根據本案一些實施例示出位元率控制的實驗結果圖；以及〔圖6〕為根據本案一些實施例示出一種視訊處理裝置的示意圖。
本文所使用的所有詞彙具有其通常的意涵。上述之詞彙在普遍常用之字典中之定義，在本案的內容中包含任一於此討論的詞彙之使用例子僅為示例，不應限制到本案之範圍與意涵。同樣地，本案亦不僅以於此說明書所示出的各種實施例為限。
關於本文中所使用之『耦接』或『連接』，均可指二或多個元件相互直接作實體或電性接觸，或是相互間接作實體或電性接觸，亦可指二或多個元件相互操作或動作。如本文所用，用語『電路』可為由至少一個電晶體與/或至少一個主被動元件按一定方式連接以處理訊號的裝置。
如本文所用，用語『與/或』包含了列出的關聯項目中的一個或多個的任何組合。在本文中，使用第一、第二與第三等等之詞彙，是用於描述並辨別各個元件。因此，在本文中的第一元件也可被稱為第二元件，而不脫離本案的本意。為易於理解，於各圖式中的類似元件將被指定為相同標號。
以下內容將提及多個關於視訊編碼的技術用語。本領域具有通常知識者應當可理解這些技術用語與視訊編碼的關聯性與/或相關設定。
圖1為根據本案一些實施例所繪製的一種位元率(bit rate)控制方法100的流程圖。於一些實施例中，位元率控制方法100為基於R-λ模型的視訊編碼位元率控制方法。於一些實施例中，R-λ模型的概念可參照相關文獻『B.Li,H.Li,L.Li,and J.Zhang,“Rate control by R-lambda model for HEVC,”document JCTVC-K0103,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC,11th Meeting：Shanghai,China,10-19 Oct.2012』。以下內容將簡述R-λ模型的相關概念，其技術細節可參照上述文獻。
在R-λ模型中，假定被編碼的視訊之位元率R與拉格朗日乘數(Lagrange multiplier)λ存在以下關係：R=α．λ β …(1)其中α、β為關聯於視訊編碼的參數。
基於上述式(1)，位元率控制方法100可包含多個操作。於操作S110，對欲編碼視訊的多個層級分配位元。於一些實施例中，上述的多個層級由上至下可為圖像群組(group of pictures,GOP)層級、圖像層級以及編碼樹單元(coding tree unit,CTU)層級。GOP層級可為視訊中在一幀(frame)內的多張連續圖像。圖像層級可為上述多張連續圖像中之一者。CTU層級可為單一圖像中處理單元處理的區塊大小。在一些實施例中，CTU層級可為單一圖像中處理單元處理的最小區塊。對於上述多個層級的位元率控制將於後述段落依序說明。
假設視訊的目標位元為Rtar且幀率為f，可以得到視訊的每一幀之平均位元率RPicAvg為下式(2)：
Figure 109111998-A0305-02-0006-1
 若已編碼的幀個數為Ncoded，且已耗費的位元為Rcoded，則針對當前GOP層級所分配到的目標位元TGOP可推估為：
Figure 109111998-A0305-02-0007-2
T GOP =T AvgPic ．N GOP …(4)其中SW為平滑視窗的尺寸，其用於讓位元率變化更加平順。TAvgPic為平滑視窗在每張圖像所消耗的位元量。NGOP為在當前圖像群組層級的圖像數。
假設當前GOP層級中的已編碼位元數為CodedGOP，且ωCurrPic為在當前GOP層級中的每張圖像之權重，則對於當前編碼的圖像的目標位元TCurrPic可推估如下：
Figure 109111998-A0305-02-0007-3
 其中式(5)的分母為尚未被編碼的所有圖像之權重總和，其中權重ωCurrPic的計算方式可參考上述相關文獻。
當針對CTU層級的位元率控制啟動時，對於每一CTU的目標位元TCurrCTU可推估為：
Figure 109111998-A0305-02-0007-4
 其中式(6)的分母為尚未被編碼的所有CTU之權重總和，Bitheader可為圖像中所有標頭(header)的預估位元量。上述的標頭可包含切片標頭(slice header)、視訊參數集(video parameter set,VPS)、序列參數集(sequence parameter set,SPS)、圖像參數集(picture parameter set,PPS)等等。Bitheader可根據先前已編碼的圖像中之標頭的實際位元量來預測。CodedPic為視訊(或圖像)中已編碼的位元數。對於CTU的權重ωCurrCTU之計算方式可參考上述相關文 獻。於一些實施例中，CTU的權重ωCurrCTU可由先前已編碼的圖像中的預估誤差來預測。上述的預估誤差可由平均絕對離差(mean absolute difference,MAD)之運算決定。於一些實施例中，當CTU所對應的圖像紋理或色彩較為複雜時，此CTU的權重ωCurrCTU會較高。
於操作S120，決定用於視訊編碼的編碼參數。舉例來說，為了達到視訊的位元率R，需決定對應的拉格朗日乘數λ。在位元率R已知為目標位元Rtar的條件下，可參考式(1)來推估預測的拉格朗日乘數λpred：
Figure 109111998-A0305-02-0008-5
 其中T可為圖像的目標位元TCurrPic(或是CTU的目標位元TCurrCTU)，w與h分別是當前圖像(或是當前CTU)的寬與高。於一些實施例中，藉由一定數量的實驗測試，可以得到量化參數QP如下式(8)：QP=4.2005lnλ+13.7122…(8)量化參數QP為用於視訊編碼的編碼參數，其反映出視訊的壓縮程度。若量化參數QP越小，視訊的位元率越高，故圖像的品質越好。
上述式(8)的數值僅用於示例，且本案並不以此為限。於一些實施例中，在執行圖2的位元率控制方法200時，式(8)可進一步修正為：QP=4.8005lnλ+13.7122
於操作S130，更新R-λ模型的參數。當對一個CTU進行編碼後，可以根據編碼後的實際位元與拉格朗日乘數λ更新先前R-λ模型中的參數α與參數β，以利對剩餘的視訊進行編碼。舉例而言，在得到已編碼圖像(或是已編 碼CTU)的實際位元Tactual後，可透過下式運算得到更新的拉格朗日乘數λ以及更新後的參數αupdate與參數βupdate：
Figure 109111998-A0305-02-0009-6
α update =α+δ α ．(logλ pred -logλ actual )．α…(10)
Figure 109111998-A0305-02-0009-8
於一些實施例中，參數α的初始值可為3.2003，且其範圍為0.05至20之間。於一些實施例中，參數β的初始值可為-1.367，且其範圍為-3至-0.1之間。於一些實施例中，參數δα與參數δβ為與目標位元Rtar有關的固定值。例如，參數δα與參數δβ可根據視訊中一圖像內每個像素的目標位元(target bits per pixel)設定。若每個像素的目標位元小於0.03，參數δα可約為0.01且參數δβ可約為0.005。若每個像素的目標位元大於或等於0.03並小於0.08，參數δα可約為0.05且參數δβ可約為0.025。若每個像素的目標位元大於或等於0.03並小於0.2，參數δα可約為0.1且參數δβ可約為0.05。若每個像素的目標位元大於或等於0.2並小於0.5，參數δα可約為0.2且參數δβ可約為0.1。若每個像素的目標位元大於0.5，參數δα可約為0.4且參數δβ可約為0.2。上述數值用於示例，且本案並不以此為限。
圖2為根據本案一些實施例示出一種用於視訊編碼的位元率控制方法200的流程圖。於一些實施例中，位元率控制方法200的操作可進一步降低硬體的處理時間，以降低硬體實現的複雜度。應當理解，位元率控制方法200可為位元率控制方法100中之部分操作的改良。
於操作S210，接收欲編碼的視訊之目標位元。於操作S220，根據目標位元對視訊的多個CTU中之數者一起計算一目標位元。操作S210與操作 S220之部分細節可參考圖1的操作S110，於此不再重複贅述。於一些實施例中，視訊的目標位元Rtar可為使用者指定的數值。於一些實施例中，使用者可依據當前環境的頻寬要求與/或視頻解析度的要求設定目標位元Rtar的數值。
為理解操作S220，參照圖3A與圖3B，圖3A為根據相關文獻的R-λ模型對CTU計算目標位元的示意圖，且圖3B為根據本案一些實施例示出圖2之操作S220與操作S240的示意圖。如圖3A所示，視訊中的圖像P可被拆分為多個CTU C1~C17。在相關文獻的R-λ模型中，可利用式(6)依序決定各個CTU C0~C17的目標位元(即步驟S3-1、S3-3、S3-5與S3-7)。在每個CTU C0~C17的目標位元被決定時，可利用式(7)至式(11)、先前決定的多個目標位元與/或已編碼的CTU的實際位元依序調整編碼參數與更新R-λ模型中的參數(即步驟S3-2、S3-4、S3-6與S3-8；其操作相當於圖1的操作S120與S130)。如此，在編碼過程中會耗費更多處理時間。
相較於圖3A，於圖3B中，考量到鄰近的多個CTU之間的相關性較高或是圖像紋理相似，可將此些CTU視為同個圖像區間M1，並可參考上式(6)決定此圖像區間M1中的多個CTU之目標位元。舉例而言，鄰近的CTU C0與CTU C1可組成為一個圖像區間M1，且此圖像區間M1的目標位元TmCTU可根據下式被決定：
Figure 109111998-A0305-02-0010-9
圖像區間M1的目標位元TmCTU可做為CTU C0與CTU C1每一者的目標位元。如此一來，可減少計算CTU的目標位元的次數。於一些實施例中，權重ωmCTU為圖像區間M1所包含的CTU的權重總和。例如，對於第1個圖像 區間M1而言，權重ωmCTU為CTU C0的權重ωCurrCTU與CTU C1的權重ωCurrCTU的總和。依此類推，可利用上式(12)依序決定多個圖像區間M1每一者的目標位元(即步驟S3-9、S3-11與S3-13；可對應於圖2的操作S220)。在每次圖像區間M1的目標位元被決定時，可利用前述式(7)至式(11)以及先前決定的圖像區間M1的目標位元與/或已編碼的CTU之實際位元依序調整編碼參數與更新R-λ模型中的參數(即步驟S3-10、S3-12與S3-14；可對應於圖2的操作S240)。相較於圖3A，此種計算方式可以在編碼過程降低處理時間，以降低硬體規格要求。
上述例子以圖像區間M1包含2個CTU為例，但本案並不以此為限。於一些實施例中，圖像區間M1所包含的CTU個數可設定為在一預定範圍內。換言之，圖像區間M1所包含的CTU個數為可變動的。圖3C為根據本案一些實施例示出圖2的操作S220之示意圖。於此例中，在計算圖像區間M1的目標位元TmCTU前，可進一步分析各個CTU之間的關聯性，以決定圖像區間M1內的CTU個數。如圖3C所示，可計算多個CTU C0~C17之間的絕對誤差和(sum of absolute differences,SAD)(即步驟S3-15)。若多個CTU C0~C17中之數者的SAD小於預定數值Q，代表這些CTU之間具有高關聯性，故可將該些CTU組合為一圖像區間M1(即步驟S3-16)。舉例來說，CTU C0與CTU C1之間的SAD小於預定數值Q，故CTU C0與CTU C1可組合為第1個圖像區間M1。CTU C2至CTU C5之間的SAD小於預定數值Q，故CTU C2至CTU C5可組合為第2個圖像區間M1。依此類推，可將圖像P內的多個CTU C0~CTU C17分別組合為多個圖像區間M1。
繼續參照圖2，於操作S230，根據視訊中已編碼完成的至少一個CTU的實際位元以及尚未編碼完成的至少一個CTU的目標位元計算視訊中未開始編碼的至少一個CTU之目標位元。
如先前所述，在式(12)(或式(6))中，CodedPic為圖像中已編碼的位元數。一般而言，CodedPic為視訊中已編碼完成的多個CTU之實際位元的總和。在硬體存在管線延遲的情形下，部分CTU尚未編碼完成而無法得知該部分CTU的實際位元。如此，無法即時地更新已編碼位元數CodedPic而無法計算尚未開始編碼的CTU之目標位元。在此情形下，將需要更高的硬體規格或是更多處理時間來完成視訊編碼。
為理解操作S230，參照圖4，圖4為根據本案一些實施例示出圖2的操作S230的示意圖。如圖4所示，CTU C0至CTU C7為已編碼完成的CTU。CTU C8與CTU C9為編碼中但尚未編碼完成的CTU(即CTU C8與CTU C9經編碼後的實際位元仍為未知)。CTU C10至CTU C17為尚未開始編碼的多個CTU。於此例中，在計算包含CTU C10與CTU C11的圖像區間M1的目標位元TmCTU時，式(12)中的已編碼的位元CodedPic可由已編碼的CTU C0至CTU C7的實際位元Tacutal(C0-C7)以及尚未編碼完成的CTU C8與C9的目標位元TmCTU(C8,C9)的總和來預測。例如，已編碼的實際位元CodedPic可表達為：Coded Pic =T acutal(C0-C7)+T mCTU(C8,C9)…(13)
在式(13)中，尚未編碼完成的圖像區間M1(其包含CTU C8與CTUC9)的目標位元TmCTU(C8,C9)可由先前的式(12)預先計算(即步驟S4-1)。藉由使用預估的目標位元來取代尚未編碼完成的CTU之實際位元，可即時地更新(或預測)視訊中已編碼位元數(即CodedPic的數值)，以計算尚未 開始編碼的圖像區間M1的目標位元(即步驟S4-2)。如此，可改善上述管線延遲的問題。
繼續參照圖2，於操作S240，依序根據多個CTU的目標位元(與/或實際位元)決定用於視訊編碼的編碼參數。操作S240可參照圖1的操作S120與操作S130以及圖3B的步驟S3-10、S3-12與S3-14之說明，故於此不再重複贅述。
上述位元率控制方法200的多個操作僅為示例，並非限定需依照此示例中的順序執行。在不違背本案的各實施例的操作方式與範圍下，在位元率控制方法200下的各種操作當可適當地增加、替換、省略或以不同順序執行。或者，在位元率控制方法200下的一或多個操作可以是同時或部分同時執行。
圖5為根據本案一些實施例示出位元率控制的實驗結果圖。於一實驗例中，在目標位元率設定為1715千位元每秒(kbps)且幀率(frame per second,FPS)設定為60的條件下，藉由執行前述的位元率控制方法200，每個幀的圖像經編碼後的實際位元率可穩定地位於目標位元率的鄰近範圍。換言之，位元率控制方法200可在降低硬體要求下有效地達成視訊的位元率控制。
圖6為根據本案一些實施例示出一種視訊處理裝置600的示意圖。於一些實施例中，視訊處理裝置600可為視訊處理晶片、視訊編碼器電路系統、顯示卡等圖像處理裝置，並可執行前述圖1的位元率控制方法100與/或圖2的位元率控制方法200。
視訊處理裝置600包含處理電路610、記憶體電路620以及一或多個輸入/輸出(Input/Output,I/O)介面630。處理電路610耦接至記憶體電路620 以及多個I/O介面630。於各個實施例中，處理電路610可為中央處理單元(CPU)、特殊應用積體電路(Application-specific integrated circuit,ASIC)、多處理器、管線式的處理器、分散式處理系統、與/或圖像處理電路。用來實施處理電路610的各種電路或單元皆為本揭示內容所涵蓋的範圍。於一些實施例中，處理電路610可操作為一或多個視訊編碼器，並藉由分析視訊SV以獲取前述R-λ模型中所需的多個參數或數值以對視訊SV進行位元率控制。
於一些實施例中，記憶體電路620可操作為資料緩衝器，以暫存處理電路610執行位元率控制方法200時所產生的各種資料。於一些實施例中，記憶體電路620儲存一個或多個程式碼，其用以對視訊SV進行編碼。例如，程式碼可由多個指令集所編碼而成，其中多個指令集用以視訊SV進行編碼，並控制經編碼後之視訊SV的位元率。處理電路610可執行儲存於記憶體電路620的程式碼，以執行對視訊SV之位元率控制的多個操作(如圖2中的多個操作)。
於一些實施例中，記憶體電路620為非暫態電腦可讀取儲存媒介，其用以儲存用以對視訊SV進行位元率控制的多個指令集。例如，記憶體電路620儲存有用以執行圖2中多個操作的多個可執行指令。於一些實施例中，電腦可讀取儲存媒介為電性、磁性、光學、紅外線與/或半導體裝置。例如，電腦可讀取儲存媒介包含半導體或固態記憶體、磁帶、可移除式電腦磁碟、隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬磁碟與/或光學磁碟。在使用光學磁碟的實施例中，電腦可讀取儲存媒介可包含唯讀記憶光碟(CD-ROM)、可重複錄寫光碟(CD-R/W)與/或數位影音光碟(DVD)。
多個I/O介面630自各種控制裝置接收多個輸入或命令，其中控制裝置可由使用者操控。據此，處理電路610可由多個I/O介面130的輸入或命令 被操控。例如，使用者可經由多個I/O介面630輸入視訊SV的目標位元Rtar，以供處理電路610執行位元率控制方法200的操作。於一些實施例中，多個I/O介面630可接收視訊SV，並將視訊SV傳輸至處理電路610進行後續處理。
於一些實施例中，多個I/O介面630包含螢幕，其可顯示視訊SV經編碼後的內容。於一些實施例中，多個I/O介面630包含圖形化用戶介面(GUI)。於一些實施例中，多個I/O介面630包含鍵盤、數字鍵盤、滑鼠、軌跡球、觸控螢幕、游標方向鍵或其上述之組合，以溝通資訊與多個命令至處理電路610。
綜上所述，本案一些實施例所提供的位元率控制方法與視訊處理裝置可藉由對多個CTU計算目標位元並利用目標位元預估已編碼的實際位元，以降低硬體複雜度。此種位元率控制方式有利於降低硬體規格，故易於硬體實現。
雖然本案之實施例如上所述，然而該些實施例並非用來限定本案，本技術領域具有通常知識者可依據本案之明示或隱含之內容對本案之技術特徵施以變化，凡此種變化均可能屬於本案所尋求之專利保護範疇，換言之，本案之專利保護範圍須視本說明書之申請專利範圍所界定者為準。
200:位元率控制方法
S210,S220,S230,S240:操作

Claims (10)

  1. 一種位元率控制方法，包含： 接收欲編碼的一視訊的一第一目標位元； 根據該第一目標位元對該視訊的複數個編碼樹單元（coding tree unit）中之複數個第一編碼樹單元一起計算一第二目標位元； 根據該些編碼樹單元中之至少一第二編碼樹單元的一實際位元以及該些編碼樹單元中之至少一第三編碼樹單元的一第三目標位元計算該些編碼樹單元中之至少一第四編碼樹單元的一第四目標位元，其中該至少一第二編碼樹單元已編碼完成，該至少一第三編碼樹單元尚未編碼完成，且該至少一第四編碼樹單元尚未開始編碼；以及 依序根據該第二目標位元、該第三目標位元以及該第四目標位元調整用於編碼該視訊的至少一編碼參數。
  2. 如請求項1之位元率控制方法，其中計算該第二目標位元包含： 組合該些第一編碼樹單元為一圖像區間；以及 根據該些第一編碼樹單元每一者的一權重計算該圖像區間的一目標位元，其中該圖像區間的該目標位元為該些第一編碼樹單元每一者的該第二目標位元。
  3. 如請求項2之位元率控制方法，其中計算該圖像區間的該目標位元包含： 加總該些第一編碼樹單元每一者的該權重，以決定對應於該圖像區間的一權重；以及 根據該第一目標位元以及對應於該圖像區間的該權重計算該圖像區間的該目標位元。
  4. 如請求項2之位元率控制方法，其中組合該些第一編碼樹單元為該圖像區間包含： 計算該些第一編碼樹單元之間的一絕對誤差和；以及 若該絕對誤差和小於一預定數值，組合該些第一編碼樹單元為該圖像區間。
  5. 如請求項1之位元率控制方法，其中在該圖像區間的該些第一編碼樹單元的個數為可變動的。
  6. 如請求項1之位元率控制方法，其中計算該第四目標位元包含： 計算該至少一第三編碼樹單元的該第三目標位元； 加總該實際位元以及該第三目標位元，以更新該視訊中的一已編碼位元數；以及 根據更新後的該已編碼位元數計算該第四目標位元。
  7. 一種視訊處理裝置，包含： 一記憶體電路，用以儲存至少一程式碼；以及 一處理電路，用以執行該至少一程式碼，以執行下列操作： 根據欲編碼的一視訊的一第一目標位元對該視訊的複數個編碼樹單元中之       複數個第一編碼樹單元一起計算一第二目標位元； 根據該些編碼樹單元中之至少一第二編碼樹單元的一實際位元以及該些編       碼樹單元中之至少一第三編碼樹單元的一第三目標位元計算該些編碼 樹單元中之至少一第四編碼樹單元的一第四目標位元，其中該至少一第二編碼樹單元已編碼完成，該至少一第三編碼樹單元尚未編碼完成，且該至少一第四編碼樹單元尚未開始編碼；以及 依序根據該第二目標位元、該第三目標位元以及該第四目標位元調整用    於編碼該視訊的至少一編碼參數。
  8. 如請求項7之視訊處理裝置，其中該處理電路用以組合該些第一編碼樹單元為一圖像區間，並根據該些第一編碼樹單元每一者的一權重計算該圖像區間的一目標位元，其中該圖像區間的該目標位元為該些第一編碼樹單元每一者的該第二目標位元。
  9. 如請求項8之視訊處理裝置，該處理電路用以計算該些第一編碼樹單元之間的一絕對誤差和，其中若該絕對誤差和小於一預定數值，該處理電路更用以組合該些第一編碼樹單元為該圖像區間。
  10. 如請求項7之視訊處理裝置，其中該處理電路用以計算該第三目標位元，並加總該實際位元以及該第三目標位元以更新該視訊中的一已編碼位元數，且該處理電路更根據更新後的該已編碼位元數計算該第四目標位元。
TW109111998A 2020-03-26 2020-04-09 位元率控制方法與視訊處理裝置 TWI739382B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010224026.X 2020-03-26
CN202010224026.XA CN113453020B (zh) 2020-03-26 2020-03-26 位元率控制方法与视频处理装置

Publications (2)

Publication Number Publication Date
TWI739382B true TWI739382B (zh) 2021-09-11
TW202137769A TW202137769A (zh) 2021-10-01

Family

ID=77807153

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109111998A TWI739382B (zh) 2020-03-26 2020-04-09 位元率控制方法與視訊處理裝置

Country Status (3)

Country Link
US (1) US11272222B2 (zh)
CN (1) CN113453020B (zh)
TW (1) TWI739382B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466189B (zh) * 2021-12-27 2024-05-28 浙江大华技术股份有限公司 码率控制方法、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110069754A1 (en) * 2008-05-31 2011-03-24 Xiaoyang Wang Transcoder, method and device for controlling code rate
TW201737707A (zh) * 2016-04-07 2017-10-16 晨星半導體股份有限公司 位元率控制方法及視訊編碼裝置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7697608B2 (en) * 2004-02-03 2010-04-13 Sony Corporation Scalable MPEG video/macro block rate control
JP4485996B2 (ja) * 2005-06-13 2010-06-23 株式会社日立製作所 画像符号化装置及び画像符号化プログラム
US9955168B2 (en) * 2015-02-11 2018-04-24 Arris Enterprises Llc Constraining number of bits generated relative to VBV buffer
JP6194334B2 (ja) * 2015-06-10 2017-09-06 日本電信電話株式会社 映像符号化装置、映像符号化方法及び映像符号化プログラム
CN108235016B (zh) * 2016-12-21 2019-08-23 杭州海康威视数字技术股份有限公司 一种码率控制方法及装置
JP6914722B2 (ja) * 2017-05-11 2021-08-04 キヤノン株式会社 動画像符号化装置、動画像符号化方法及びプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110069754A1 (en) * 2008-05-31 2011-03-24 Xiaoyang Wang Transcoder, method and device for controlling code rate
TW201737707A (zh) * 2016-04-07 2017-10-16 晨星半導體股份有限公司 位元率控制方法及視訊編碼裝置

Also Published As

Publication number Publication date
CN113453020A (zh) 2021-09-28
CN113453020B (zh) 2023-12-19
TW202137769A (zh) 2021-10-01
US11272222B2 (en) 2022-03-08
US20210306677A1 (en) 2021-09-30

Similar Documents

Publication Publication Date Title
US10841583B2 (en) Coding unit depth determining method and apparatus
CN101507277B (zh) 图像编码/解码方法和设备
US20190297327A1 (en) Video encoding processing method, computer device and storage medium
US10097821B2 (en) Hybrid-resolution encoding and decoding method and a video apparatus using the same
CN110741640B (zh) 用于视频代码化中的运动补偿预测的光流估计
RU2600530C2 (ru) Кодирование и декодирование видео с повышенной устойчивостью к ошибкам
EP3282701B1 (en) Prediction mode selection method, apparatus and device
JP2003533142A (ja) ビデオ情報を符号化し復号化する方法、動き補償ビデオ符号器及び対応する復号器
US9883200B2 (en) Method of acquiring neighboring disparity vectors for multi-texture and multi-depth video
US20240298005A1 (en) Method and apparatus for determining video bitrate, computer device, and storage medium
US7697610B2 (en) Variable block size early termination for video coding
US10542277B2 (en) Video encoding
US20120027091A1 (en) Method and System for Encoding Video Frames Using a Plurality of Processors
WO2021238546A1 (zh) 视频编码方法、视频播放方法、相关设备及介质
CN114793282A (zh) 带有比特分配的基于神经网络的视频压缩
TWI739382B (zh) 位元率控制方法與視訊處理裝置
JP2008125058A (ja) 画像データスキップを使用するビデオコード化方法
RU2587412C2 (ru) Управление скоростью передачи видео на основе гистограммы коэффициентов преобразования
WO2018205781A1 (zh) 一种实现运动估计的方法及电子设备
JP2007110409A (ja) 画像処理装置及び画像処理方法をコンピュータに実行させるためのプログラム
KR101035746B1 (ko) 동영상 인코더와 동영상 디코더에서의 분산적 움직임 예측 방법
CN108769675B (zh) 基于两阶多假设预测的分布式视频自适应重构方法
WO2024212826A1 (zh) 基于ai的编码驱动策略调整方法、装置、设备和存储介质
JP7222421B2 (ja) 動画像符号化装置、動画像圧縮装置、動画像符号化方法、及びプログラム
US20240314357A1 (en) Computer-implemented method and system for video coding