TW527832B - Video encoding apparatus that adjusts code amount by skipping encoding of image data - Google Patents

Video encoding apparatus that adjusts code amount by skipping encoding of image data Download PDF

Info

Publication number
TW527832B
TW527832B TW090109417A TW90109417A TW527832B TW 527832 B TW527832 B TW 527832B TW 090109417 A TW090109417 A TW 090109417A TW 90109417 A TW90109417 A TW 90109417A TW 527832 B TW527832 B TW 527832B
Authority
TW
Taiwan
Prior art keywords
image
picture
image data
amount
encoding
Prior art date
Application number
TW090109417A
Other languages
English (en)
Inventor
Nobuhiko Yamada
Masahiro Morishita
Tsuyoshi Isomura
Original Assignee
Matsushita Electric Ind Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Ind Co Ltd filed Critical Matsushita Electric Ind Co Ltd
Application granted granted Critical
Publication of TW527832B publication Critical patent/TW527832B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

527832 A7 B7 經濟部智慧財產局員工消費合作社印製 五、發明說明(1 ) 發明背景 (1) 發明領域 本發明係關於一種視訊編碼裝置,且尤關於藉跳躍影 像貢料的編碼調整碼I的視訊編碼裝置。 (2) 相關技藝 根據MPEG標準的視訊編碼技術中,碼量係藉預測待 被累加於一解碼裝置之接收緩衝器中之圖像的量而受到控 制。此係指藉視訊緩衝查證器(VBV)模型來進行的碼 量控制。 第1 A圖顯示接收緩衝器之預測的累加量的變化。 如圖所示,圖像係以一預定的位元速率被輸入接收緩種ί 器。在DTS (解碼時間標記)所指示的時間上,一圖像從 接收緩衝器輸出供被解碼之用。倘若解碼裝置中有一採用 NTSC (國家電視系統委員會)格式的顯示器單元,當一 圖框被配置給一圖像時,DTS被設定在每1/30秒,且當一 圖場被配置給一圖像時,DTS被設定在每1/60秒。此外, 倘若該解碼裝置贊有一採用PAL (相位交替線)格式的顯 示器單元,當一圖框被配置給一圖像時,DTS被設定在每 1/25秒,且當一圖場被配置給一圖像時,DTS被設定在每 1/50 秒。 一般而言,當D1表示產生供在DTS1對一圖框解碼的 位元量時,在DTS1從VI減少至VI*之接收緩衝器的預測 累加量(=VI —D1)如第1 A圖所示。 VBV模型控制碼量以致於接收缓衝器的預測累加量 Γ _ (請先閱讀背面之注意事 寫本頁) -I線· 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 527832
五、發明說明(2 ) 不會造成一溢位或下溢。 在某些情況下,例如於景象改變期間,接收緩衝器的 下溢可能會因一序列各需要大量位元的圖像而產生,如第 1 B圖所示。當D3表示產生供在DTS3對一圖像解碼的位 元量時,由於V3 —D3<0,在DTS3的接收緩衝器的預測 累加量低於零。此現象的發生乃因為待在〇1^3解碼的圖 像需輸入接收緩衝器。為避免接收緩衝器的此一下溢,量 化的規模被增加以便減少產生位元量。 另一方面,接收緩衝器的溢位可能會因為一序列各需 要小量位元的圖像而產生,如第丄c圖所示。當在dts3 解碼前接收緩衝器之預測累加量為V3 ( =V2* + R,其中 R為輸入解碼裝置之接收緩衝器的位元量,換言之,從編 碼裝置傳送到接收緩衝器的位元量,於DTS的各時間間隔 期間(對二連續圖像解碼動作之間的時間間隔),乂3超 過接收緩衝器的儲存容量。為避免接收緩衝器的此一溢 位,量化的規模被減少以便增加產生位元量。 凰 經濟部智慧財產局員工消費合作社印製 然而,當產生位元量因增加量化規模以防止下溢而顯 著地減少時,影像品質將會被惡化。為防止此種惡化/_ 般和調整量化規模一起採用以下方法。 第一種方法使用所謂跳躍巨集塊。根據mpeg標準, 編碼係基於-巨集塊來進行,巨集塊為一塊16><16的像 素。-跳躍巨集塊為—由指出顯示與在該位置之參考影像 完全相同的影像之特殊碼所組成的巨集,且其資料量相當 小。因此,當好像要發生下溢時,跳躍巨集塊會被傳送: 發明說明(3) 一進行原始影像的一般編碼。 然而’上述方法仍有問題,因為不是一跳躍巨集塊的 ^木塊會顯不一部分的原始影像,而一跳躍巨集塊顯示一 P刀的參考影像,使得重建的影像缺少整體一致性。 第2 A圖顯示顯示於一般情況下之影像的例子。 第2 B圖顯示於使用一跳躍巨集塊時所顯示之影像的 例子。於第2B圖中,因為並未使用一跳躍巨集供第二圖 勺上巨木塊,第二圖框之一部分的原始影像係顯示於上 巨集塊中。另一方面,因為使用一跳躍巨集塊供第一圖框 的下巨集塊,顯示於第一圖框之下巨集塊中一部分的影像 亦顯示於第二圖框的下巨集塊中。此使得在第二圖框中的 重建的影像缺少整體一致性。 第二種方法為編碼虛擬影像資料。虛擬影像資料係一 種像素值’為可#像素值的中間值的—種影像資料。以一 個例子來說’當-像素值以八位元來表示時,其中間值為 128。根據MPEG標準,影像資料的各像素值與其中間值 之間的差被編碼’所以對像素值為中間值的此種影像資料 編碼後的資料量變成最小值。由是,當有可能會發生下、、兴 時’基於-巨集塊,像素㈣巾間值的㈣塊的影像資: 可以被編碼而非在巨集塊進行一般的編碼。 然而,上述方法的問題在於像素值是中間值的影像資 料已被編碼的地方會顯示灰色的影像。 示於上巨集塊, 527832
經濟部智慧財產局員工消費合作社印製
五、發明說明(4 ) 因為已在上面進行過-般的編碼。另-方面,一灰色的影 純顯示於虛擬影像資料已被編碼的下巨錄上。此使得 在第二圖框中重建的影像缺乏整體一致性。 順便-提,日本專利第2871316揭示一種圖場或圖框 =影像資料的跳躍編碼的方法(下文指“跳躍圖像“)。 弟3圖顯示揭示於日本專利第期316中之一種視訊編碼 的結構。參照此視訊編碼I置,輸人移動影像資料係受制 於由正交轉換電路6及其它單元所進行的一編碼步驟,而 所產生的圖像被儲存於—緩衝記憶體2()。#—傳送速率超 過判斷電㈣判斷出各圖像的傳送速率超過—預定的臨界 值時,-儲存於一SKIP碼儲存記憶體22中的sKip碼被輸 出’或當該傳送速率超過判斷電路24為負時,健存於緩衝 記憶體20中的圖像被輸出。 根據上述之方法,當一圖像要被跳躍時,不僅是佔用 邛分圖像的巨集塊而是除了在各切割層中之一第一及最 後巨集塊的所有的巨集塊被跳躍的巨集塊取而代之。此使 得解碼裝錢示-完全與先前解碼過㈣像相同,避免了 顯示此種如上述之缺乏一致性的影像。 然而,上述方法具有以下問題。 第-個問題為,顯示於第3圖的緩衝記憶體對於暫時 性儲存產生的圖像供判斷各產生的圖像^ 率而言是必要的。更詳而言之,當關於對各巨集二:; 編碼是否要如上述被跳躍的該判斷是在各巨集塊上― 時,可以設置一具小容量的緩衝器用以儲存基於—巨= 本紙張尺二適用中國國豕標準(CNS)A4規格(2】〇 X 297公爱) II— tr--------- 線丨—t (請先閱讀背面之注意事填寫本頁) 527832 A7 _ 1 — B7 五、發明說明(5 ) ~~~ · ^、扁碼的貝料。然而’以本方法’各圖像整體而言係受制 於,於圖像是否要被跳躍的判斷,其需要一具大容量的緩 衝阳t、儲存包括於該圖|中之所有巨集塊的被編碼的資 料。 第二個問題在於當有些圖像被跳躍時,於一種一圖框 分配於一圖像(圖框結構)的情形中,會有以交錯掃描格 ! 式顯示之影像的順序會相反的情形。 第4 A圖顯示於沒有圖像被跳躍的_般情形中所顯示 ❹像^考標號_lb分別代表第_圖框的—頂圖場及 底圖场。於該圖框結構中,一編碼步驟係基於一圖框來 進行,各圖框由-頂圖場及—底圖場組成。於此例中,解 碼裝每咖秒對-圖框騎—解碼㈣。於交祕式施加 於其顯不時,—圖場以每·秒顯示。亦即,圖場…化、 2t 2b 3t、3b、4t及4b係以所述的順序顯示。 第4 B圖顯示在—圖像被跳躍的情形中所顯示的影 ¥跳躍發生於圖框2中的—輯B (3)時,一盘圖 經濟部智慧財產局員工消費合作社印製 :B (3)相關之圖像工⑴完全相同的影像被顯示於 原始影像被編碼成圖像B ( 3 )的圖框2。 由是,圖框2的頂圖場顯示與圖框χ之頂圖仙相同 的影像。圖框2的底圖場顯示與圖框i 心抵圖% lb相同的 衫像。於其等以交錯格式顯示時,圖場lt、lb 此方式,圖場It被顯示於圖場lb之後, k成顯示順序的顛 A7
經濟部智慧財產局員工消費合作社印
倒。 發明概述 有鏗於上述問題,本發明 穿罟,制i一《 ^ 目的在牷供一種視訊編碼 :“-特殊緩衝器供判斷整體圖像是否要會被不必 要地跳躍以及於-整體圖像被跳 順序的顛倒。 +曰仏风〜像之顯不 =目的可以以一視訊編竭裝置達成,其於預測—解 石i衣ί旦衝器的累加量時對—序列的影像資料編 二各衫像貝料形成一圖框或_圖場,該視訊編碼裝 二-在對各影像資料編碼之前比較—預測累加量與—預 =界值的比較單元’該預測累加量係預測於藉對影像資 料編碼而獲得之資料被解 、 解馬之時要被累加到接收緩衝器中 以及_單^以⑻料對影像資料的編碼 報、…代理碼作為在解碼時間從接收緩衝器取得的資 U:貝料里低於預定的臨界值時’代理碼指出顯示盘 先珂被解碼之影像資料完全相同的影像。 /、 以此結構,對於各影像資料的編碼是否要被跳躍 對影像資料編碼之前進行,所以—供暫時储存 1=器的預測累加量是否低於臨界值之影像資料的編碼 的特殊緩衝器變得不需要。 _此處,視訊編碼裝置可進-步包括-臨界值設定單 —用乂。又定t、由對影像貧料編碼所得之圖像的圖像型能 的臨界值,該圖像型態為—!圖像、_p圖像、以及 圖像。 閱 言i 背 面 之 注 意 事 f 寫 頁 訂
本紙張尺度適用中國國家標準(CNS)A4規格 (210 X 297 公釐) 527832 A7
以此架構,一供各圖像型態的適合的臨界值可以考量 因I圖像、P圖像、以及B圖像各不同的編碼方法而產生 的不同碼量來設定。 此處,跳躍單元⑷當圖像型態為圖像時,使用 一全跳躍B圖像作為代理碼,該全跳躍B圖像為B圖框, 其中在所有切割層中除了在各切割層中之一第一巨集塊及 隶後巨集塊的巨集塊為跳躍巨集塊,且(b)當圖像型態為 一 I圖像或P圖像時,使用一全跳躍p圖像作為代理碼, 该全跳躍P圖像為P圖框,其中在所有切割層中除了在各 切割層中之-第-巨集塊及最後巨集塊以外的巨集塊為跳 躍巨集塊。 以此架構,使用MPEG的跳躍巨集塊,指出顯示與先 前被解碼之影像資料完全相同的影像資料的代理碼可被產 生。 此處,臨界值為圖像的一預測碼量。 根據此一架構,一 I圖像、一 P圖像、及B圖像的各 圖像的預測碼量被設定為圖像的臨界值。此確使接收緩衝 器的一下溢可被防止。 此處,臨界值設定單元計算出影像資料的像素值的異 動,並設定一較高的臨界值給一較高的計算出的異動。 以此架構,一般包含於影像資料中之像素的異動兪 南’影像資料的碼量愈大。因此,藉設定一較高的臨界值 給一較高的異動,更進一步地確使接收緩衝器下溢的防 止0 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) i , SI (請先閱讀背面之注咅^事 訂 線 經濟部智慧財產局員工消費合作社印制衣 527832
此處L界值設定單元設定—較高的臨界值給一原始 =像的-較高的活動似,該活動似為所有包括於原^ 衫像中巨集塊之活動的總和,一活動⑽以等式 五、發明說明( (請先閱讀背面之注意事^^寫本頁) ⑽广/+%來表示,其中叫為形成—巨集塊尺八塊中 各個的原始影像的像素值之異動中的最小值,該八塊由以 -圖框DCT模式的四塊及以一圖場DCT模式的四塊所組 成,且係巨集塊y·的一活動。 曰以此架構,影像資料的活動力愈高,一般影像資料的 碼里愈大。因此,藉設定一較高的臨界值給一較高活動力 的影像資料,能進一步確保防止接收緩衝器的下溢。 此處,臨界值設定單元設定各丨圖像及p圖像的一預 測碼量為各I圖像及p圖像的臨界值,並設定一大於6圖 像之一預測碼量的值作為一 B圖像的臨界值。 以此結構,B圖像的臨界值被設定為一大於B圖像之 預測碼量的值。此使得3圖像可能被跳躍,且因而其使得 被其它圖像所指的I圖像或p圖像較不可能被跳躍。此能 防止相同的影像被連續顯示。 經濟部智慧財產局員工消費合作社印製 此處,當2時,Μ表示I圖像或p圖像的一個出 現週期,該臨界值設定單元設定:j圖像的臨界值^為 乃-沿,P圖像的臨界值為办=办;以一編碼順序緊接 在Ϊ圖像之前之Β圖像的臨界值乃⑺當「沿-幻坌〇時為
Tb(i)=Eb + (Ei-R),it(Ei-R)<〇_,Tb(i)=Eb.,^ — $^ 碼順序緊接在P圖像之前之B圖像的臨界值當「母 20時爲 Tb(p)=Eb + (Ep-R),1當(Ep-R) <〇時,Tb(p)二Eb, 本紙張尺度適用中國國家標準(CNS)A4規格(2]〇 X 297公釐) -11- 527832 A7 B7 經¾部智慧財產局員工消費合作社印製 五、發明說明(9 ) 其中五/為I圖像之預測碼量,办為p圖像之預測碼量,现 為B圖像之預測碼量,及R為各解碼時間間隔期間的傳送 位元量。 以此結構,以一編碼順序緊接在I圖像或P圖像之前 的B圖像的臨界值,係基於I圖像或B圖像的預測碼量設 定,以防止I圖像或P圖像被跳躍。 此處,當3時,Μ表示I圖像或P圖像的一個出 現週期’該臨界值設定單元設定:I圖像的臨界值乃·為 77-£7,Ρ圖像的臨界值办為⑪二母;以一編碼順序緊接 在I圖像之前之Β圖像B2(i)的臨界值⑺當仏7-及」>〇 時爲 Tb2(i)=Eb + (Ei-R),〈叫,n2 ⑴·, 以一編碼順序緊接在B圖像B2(i)之前之B圖像B1(i)的臨 界值 Tbl⑴當(Tb2(i)-R) -〇時為 Tbl⑴=Eb + (Tb2(i)_R),瓦 智(Tb2(i)-R) <〇時,Tb2(i)=Eb ·,以一編碼順序繁接在·ρ 圖像之前之Β圖像Β2(ρ)的臨界值當(你-幻坌0時為 Tb2(p)=Eb + (Ep_R),當(Ep-R) <〇時,Tb2(p)=Eb •,以一編 碼順序緊接在B圖像B2(p)之前之B圖像B1(p)的臨界值 Tbl(p)t (Tb2(p)-R)-〇時為 Tbl(p卜Eb + (Tb2(p) R),i 當 時,加,其中价為工圖像之預測碼 里,邱為P圖像之預測碼量,现為B圖像之預測碼量, 及R為各解碼時間間隔期間的傳送位元量。 以此結構,以一編碼順序緊接在j圖像或?圖像之前 的B圖像以及以-編碼順序緊接在B圖像之前的B圖像的 臨界值,係基於I圖像或B圖像的預測碼量設定,以
J. --------------i, ·"-* (請先閱讀背面之注意事^^填寫本頁) 訂--- -線-
-H ϋ H ϋ 1 - -12- 527832 經¾部智慧財產局員工消費合作社印製 A7 B7 五、發明說明(W) I圖像或P圖像被跳躍。 此處’當時’M表示丨圖像或Μ像之一 周期,臨界值設定單元以-編碼順序緊接在j圖像之前Β 圖像Β 2的臨界值設定為高於以編碼順序緊接在β圖^ ^ 之前的Β圖像的臨界值。 ° 以此結構,跳躍Β圖像以防止j圖像或ρ圖像可能會 馬上在I圖像或Ρ圖像之前發生。結果,Β圖像在高度不 確定I圖像或Ρ圖像是否要被跳躍的一點上,亦即,在解 碼時間接收缓衝器中累加的預測涉及一些預測的一點上的 不必要的跳躍,可以避免。 此處,當M2 J時,Μ表示I圖像或Ρ圖像的一出現 周期,臨界設定單元設定:丨圖像之一臨界值為τ卜玢; P圖像之臨界值7>為7>=办;以一編碼順序緊接在j圖像 之兩之B圖像B2(i)的臨界值罚]⑺當及」$ ο時為 Tb2(i)=Eb + (Ei-R),I 當(Ei,R)<0時,Tb2⑴=Eb •,以一編 碼順序緊接在B圖像B2(i)之前之B圖像Bl(i)的臨界值 Tbl⑴ 當 Dbskip七(Tb2(i)-R) 坌 价時為
Tbl(i)=Dbskip + (Tb2(i)-R),i 鶯 Dbskip + (Tb2(i)-R) < Eb 時,⑺βΖ);以一編碼順序緊接在P圖像之前之B圖 像 Β2(Ρ)的臨界值 Tb2(p)當(Ep-R) g 〇 時爲 Tb2(p)=Eb + (Ep-R) ’ i當(Ep-R) <〇時,τ^2(ρ)=ΕΙ? ·,以反以一編碼順序緊 接在Β圖像Β2(ρ)之前之Β圖像Β1(ρ)的臨界值7^7(凡)當 Dbskip + (Tb2(p)-R) - Eb 時為 Tbl(p)=Dbskip + (Tb2(p)-R), It Dbskip + (Tb2(p) - R) <Eb 時,Tbl(p)=Eb,其午 Ei 爲 l 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公f ) -13-
527832 A7 B7 五、發明說明(13) 料之一頂圖場及一底圖場編碼而獲得的資料。 通常,當影像資料的編碼被跳躍時,圖像的配置被轉 換至圖場結構,所以被跳躍之影像資料的各圖場能指向一 頂圖場或一底圖場。然而,根據上述架構,即使當影像資 料的編碼被跳躍時,圖框結構被維持著,且因此,影像的 顯示順序的顛倒可被防止。 此處,跳躍單元使用代理碼指示出顯示各與依顯示順 序最接近各個已被取消要被在圖框結構中編碼的影像資料 的頂圖場與底圖場的圖場相同的二個圖場,該圖場從先前 被解碼的影像資料的頂圖場與底圖場中被選出。 以此架構,在編碼已被跳躍的影像貧料中的各個圖场 使用依顯示順序最接近的圖場作為一參考圖場。作為編碼 已被跳躍的影像資料中頂圖場的一參考圖場從未在被跳躍 的影像資料中底圖場的一參考圖場之後被顯示,影像的顯 示順序的顛倒可被防止。 此處,當已被取消要在圖框結構中編碼的影像資料被 編碼成一 B圖像時,跳躍單元使用二個各係除了在各切割 層中之一第一巨集塊及一最後巨集塊以外之在所有切割層 中的巨集塊為跳躍巨集塊的一 B圖像的全跳躍B圖像作為 代理碼,且當已被取消要在圖框結構中被編碼的影像資料 被編碼成I圖像或P圖像時,跳躍單元使用二個各係除了 在各切割層中之一第一巨集塊及一最後巨集塊以外之在所 有切割層中的巨集塊為跳躍巨集塊的一 P圖像的全跳躍P 圖像作為代理碼。 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事填寫本頁) 訂·- -線· 經濟部智慧財產局員工消費合作社印製 -16- 527832 經濟部智慧財產局員工消費合作社印製 A7 ___ B7 __ 五、發明說明(I4) 以此架構,使用MPEG之被跳躍的巨集塊,可產生一 指示出示與先前被解碼之影像資料完全相同的影像資料的 代理碼。 此處,(a)於已被取消要在圖框結構中被編碼的影像 資料被編碼成I圖像或一 p圖像時,被跳躍單元使用的各 全跳躍P圖像使用先前被顯示之I圖像與P圖像的一底圖 場作為一參考圖場,(b)於已被取消要在圖框結構中被編 碼的影像資料被編碼成B圖像B1時,被跳躍單元使用的 各全跳躍B圖像使用先前被顯示之I圖像與p圖像的一頂 圖場作為一參考圖場,以及(c)於已被取消要在圖框結構 中被編碼的影像資料被編碼成B圖像B2時,被跳躍單元 使用的各全跳躍B圖像使用相繼被顯示之I圖像與p圖像 的一頂圖場作為一參考圖場。 以此架構,一標出一適合的參考圖場的全跳躍圖像依 圖像型式被選出,且所以可以輕易並恰當地防止顯示順 序的顛倒。 此處,當已被取消要在圖框結構中編碼的影像資料被 編碼成一 I圖像或一P圖像時,跳躍單元取消將被編碼成 一依顯示順序緊接在I圖像或P圖像之後之B圖像的影像 資料的編碼動作,並以各使用先前被顯示之圖像的一底圖 場作為一參考圖場的二個全跳躍B圖像代替以對影像資料 的頂圖場與底圖場編碼而獲得的資料。 以此架構,當發生跳躍P圖像或一 !圖像時,在指向 P圖像或I圖像的影像資料中的各圖場指向被跳躍的影像
-17-
五、發明說明( f料中圖場所指之相同的圖場。於是,可防止 顛倒。 圖式簡述 顯 示順序的 說明====' 優點與_從以下連同 中: 特疋貫施例的附圖的說明設得清楚。圖式 示一接收緩衝器之-預測累加量的變化; ; 貝不接收緩衝器之預測累加量的下溢的例 子 經濟部智慧財產局員工消費合作社印製 子;第1C圖顯示接收緩衝器之預測累加量的溢位的例 f 2 A圖顯示顯示於一般情況中的影像的例子; 像的圖顯示顯示於—跳躍巨集被使用之情況中的影 第2 C圖顯示顯示於虛擬影像被使用之情 的例子; 第3圖顯不揭示於曰本第2871316 編碼裝置的結構; 』中之-視訊 的影像 II---------AT (請先閱讀背面之注咅W事^^填寫本頁) _ 4. 像; 第4 A圖顯示顯示於無圖像被跳躍的一般情形中 第4 B圖顯示顯示於有一圖像被跳躍的一 影像; 之影 般情形中之 第5圖顯示與本發明之一第一實施例有關之_視訊編 碼裝置的結構; 本紙張尺度翻中關家標準 527832 A7 五、發明說明(1δ 第6 A圖顯示於第一實施例中之視訊影像的原始順 序; 第6 B圖顯不要被在第一實施例中編碼的視訊影像的 順序; 第7A圖顯示於無圖像被在第一實施例中跳躍的一般 情形中一接收緩衝器的預測累加量; 第7 B圖顯示於有一圖像被在第一實施例中跳躍的一 般情形中一接收緩衝器的預測累加量; 第8圖顯不設於第—實施例中之臨界值的例子; /第9A圖顯示當ϊ圖像於第一實施例中被跳躍時接收 緩衝器的預測累加量; 第9 B圖顯示#Β1圖像於第一實施例中被跳躍時接 收緩衝器的預測累加量; /第9 C圖顯示當B2圖像於第—實施例中被跳躍時接 收緩衝器的預測累加量; 第9 D圖顯示當P圖像於第一實施财被跳躍時接收 緩衝器的預測累加量; *第10A圖顯示於第一實施例中被於一般情形中之解碼 裝置顯示的影像的例子; 第10B圖顯示當-圖像於第一實施例中被跳躍時被解 碼裝置顯示之影像的例子;
第11圖係-顯示關於第一實施例之視訊編碼 作步驟的流程圖; I 第12圖顯示設於本發明第二實施例中臨界值的例子; (請先閱讀背面之注意事 經濟部智慧財產局員工消費合作社印製
tr----- IT/填寫本頁) •線丨1#
本紙張尺度翻 t @ g (CNS)A4 a# (210^297 527832
五、發明說明(17) 第13圖係—用以說明於第二實施例中緊接在Ρ圖像之 前的一Β圖像的臨界值的圖; 第ΗΑ圖顯不第一實施例中臨界值被採用之接收緩衝 器的預測累加量; 第14Β圖顯不第二實施例中臨界值被採用之接收緩衝 器的預測累加量; 第15 Α圖顯示以被第二實施例中一般情形中解碼裝置 所顯示之影像的例子; 第15B圖顯示當一圖像被判斷基於第一實施例所採用 之臨界值要被跳躍時被解碼裝置顯示之影像的例子; 第15C圖顯示當一圖像被判斷基於第二實施例所採用 之臨界值要被跳躍時被解碼裝置顯示之影像的例子; 第16圖顯示被設於第二實施例之修正形式中臨界值的 例子; (請先閱讀背面之注意事^^填寫本頁) 0 經濟部智慧財產局員工消費合作社印製 第17圖係一用以說明於第二實施例之修正形式中緊接 在P圖像之前之一B圖像的一臨界值的圖; 第18圖顯示於本發明一第三實施例中一全跳躍b圖像 的一圖像層中圖像編碼延伸的圖像標頭; 第19A圖顯示M=1 (其中μ表示I圖像或p圖像之_ 出現周期)的情形; 第19Β圖顯示Μ=2 (其中Μ表示I圖像或Ρ圖像之_ 出現周期)的情形; 第19C圖顯(其中μ表示I圖像或ρ圖像之一 出現周期)的情形; 國國家^ 公釐) -20- 線 527832 A7
經濟部智慧財產局員工消費合作社印製 早70120、-視訊記憶體122、-動作補償預測單元 3、一加法器111與112、-開關118、-接收緩衝器累加 預,單元124、—比較/判斷單⑽、-咖圖像儲存 圯fe體126、以及一臨界值設定單元127。 影像排列單元U0根據圖像型式以一編碼順序排列与 像。第6A圖顯示視訊影像的原始順序,亦即,待被―: t褒置顯示之視訊影像的順序。第6B圖顯示待被編碼的 “影像的順序,亦即,待被輸入解碼褒置内之視訊圖像 的順序。當B圖像參照最近之先前/以下之工圖像或 像被編辦,B圖像係在—未來p圖像之後被編碼。θ DCT單元113根據一巨集塊進行離散餘弦轉換⑽τ) 計算,以便輸出DCT係數給各巨集塊。此處,π”當係 以供一内部編碼圖像(J圖像)之—内部編碼模式進 計算仙㈣編顯式或—動作補償預測模式進 订核式被遥擇供各巨集塊、供一預測編碼圖像(p圖像) 及一雙向預測編碼圖像(B圖像)之用。於内部編碼模式 中,DCT計㈣基於輸人原始影像進行,而於動作 測模式中,DCT計算係基於輸人原始影像與—被動作補償 預測皁兀123得到之預測影像之間的差進行。 量化單元U4利用適合各巨集塊的量化等級將 塊的DCT係數量化。 〃 可變長度編碼單元116基於被量化的DCT係數以及一 動作向量及編碼預測模式資訊進行可變長度編碼,以產生 影像資料的編碼資料。
n I n H I I H I 一 一 f請先閱讀背面之注音?事填寫本頁) 訂----- •線-»
本紙張尺度適用中國國家標準(CNS)A4規格(210; 297公釐) 527832
五、發明說明(2〇 緩衝器117儲存影像資料或一全跳躍圖像的編碼資 料。 、 當一 I圖像或一 P圖像之一原始影像需要被用作為動 作補償預測中的一參考影像時,反量化單元119及反〇<^丁 單元120使I圖像或p圖像之被量化的DCT係數受到與量 化單元114及DCT單元113進行的處理動作相反的處理動 作’並輸出儲存的原始影像給視訊記憶體122。 視訊記憶體122儲存I圖像或p圖像之原始影像為一 參考影像。 動作補償預測單元123利用動作向量基於儲存於視訊 记憶體122中之參考影像形成一預測影像,以及輸出用以 對一 P圖像或一 B圖像編碼的預測影像。 速率控制單元115指導量化單元114根據接收緩衝器之 預測累加2:改變量化等級。詳而言之,速率控制單元11 $ 於接收緩衝器之預測累加量超過一預定量時,指導量化單 兀114增加量化等級,並於接收緩衝器之預測累加量低於 一預定量時,降低量化等級。 SKIP圖像儲存記憶體126儲存一 p圖像或一 b圖像的 全跳躍圖像。應注意的是,一全跳躍圖像係一除了在各切 割層中一第一與一最後巨集塊以外之所有巨集塊為跳躍巨 集塊的圖像。取代一 B圖像或一 P圖像的是,除了在各切 割層中一第一與一最後巨集塊以外之所有巨集塊為跳躍巨 集塊一 I圖像或一 P圖像被輸出,且此等分別指為一全跳 躍B圖像及全跳躍P圖像。當一 I圖像不能被跳躍時(其 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐)
經濟部智慧財產局員工消費合作社印製 -23- 527832 A7 B7 經濟部智慧財產局員工消費合作社印製 五、發明說明(2!) 巨集塊無法以跳躍的巨集塊取代),一全跳躍?圖像被輸 出而非I圖像。此等全跳躍圖像被輸出而非影像資料的編 碼資料,亦即,其等為影像資料之被編碼之資料的“代理碼,,。 接收緩衝器累加預測單元124計算,每次一圖像被輸 出,在解碼之前對下一個圖像解碼的時間上接收緩衝器之 預測累加量。 第7 A圖顯示於無圖像被跳躍的一般情形中接收緩衝 器之預測累加量。假設在解碼之前在DTSn接收緩衝器之 預測累加量為VBN(n),在DTSn被解碼之一 b圖像之產生 位元量為Db,以及於DTS時間間隔期間的傳送位元量為 R,得到一等式 “VBN(n+l)=VBN(n)-Db+R” 。 第7B圖顯示當B圖像被跳躍時接收緩衝器之預測累 加量。假設在解碼之前在DTSn接收緩衝器之預測累加量 為VBN(n),在DTSn待被解碼之一全跳躍B圖像之產生位 元量為Dbskip,以及於DTS時間間隔期間的傳送位元量為 R ’ 得到一等式 “VBN(n+l)=VBN(n)-Dbskip+R” 。 臨界值設定單元127設定臨界值Ti、Tp、Tbl、及Tb2 分別給圖像型“I” 、“p” 、“ΒΓ 、及“B2” 。 第8圖顯示分別設定給圖像型式之臨界值的例子。由 經驗得知之各個圖像型式的碼量Ei、Ερ、及Eb (本文指 “預測碼量”)設定為臨界值Ti、Tp、Tbl、及Tb2。 Ti=Ei Τρ=Ερ 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -24- 請 先 閱 讀 背 面 之 注 意 事 寫 本 頁 527832 A7 五、發明說明(23 經濟部智慧財產局員工消費合作社印製 DTSn+l被跳躍。 於第9 C圖中 DTSn+2被跳躍。 於第9 D圖中 DTSn+3被跳躍。 當比較/判斷單元125判斷一圖像要被跳躍時,比較 /判斷單元125令DCT單元Π3取消編碼步驟,並自SKIp 圖像儲存記憶體126輸出—適合之圖像的圖像型式的全跳 躍圖像。 第10A圖顯示在一般情形中由解碼裝置所顯示之影像 的例子。於此圖式中,-第-圖框、-第二圖框、一第三 圖框、及一第四圖框分別顯示一 I圖像(1)、一 β圖像(3)、 - Β圖像⑷、及-ρ圖像⑺的原始影像。圓括號内的參 考標號指出諸影像被編碼的順序。 第10Β圖顯示當一圖像被跳躍時由解碼裝置所顯示的 影像的例子。第1〇Α圖中第二圖框的Β圖像(3)指j圖像(1) 及Ρ圖像(2)的原始影像,且當β圖像(3)被跳躍時,第 圖中第二圖框顯示I圖像(1)的原始影像,因為其就編碼 順序而言較接近Β圖像(3)。(操作) 以下為關於由本實施例中之視訊編碼裝置進行的一跳 躍步驟的說明。 第11圖係一顯示由視訊編碼裝置進行之操作步驟的流 “VBV<Tb2” ,一B2 圖像在 由於 “ VBV < Tp Ρ圖像在 (請先閱讀背面之注意事寫本頁) --線· 圖。
527832
發明說明(24 首先,臨界值設定單元127設定臨界值Ti、Tp、丁Μ 及Tb2,用以判斷各圖像是否被跳躍(步驟S5〇i)。 s 原始影像被編碼成一 I圖像時,比較/判斷如 125比較接收緩衝器VBV的預測累加量VBV及臨界值卩兀 當“VBVgTi”時,DCT單元113、量化單元叫、1及=變 長度編碼單元116基於原始影像進行一丨圖像的編碼步驟 (步驟S502、S503、S504)。 ' 接收緩衝器累加預測單元124基於I圖像之產生位一 量及各DTS時間間隔期間的傳送位元量R,計算在下個 (步驟S505)時解碼之前的接收緩衝器的預測累加量。 當有下個影像資料時,處理過程移向下個影像資料, 或是當沒有影像資料剩下時,處理過程結束(步驟Μ%)。 或者是,當在步驟S503判斷出“VBV<Ti,,時,比較 /判斷單兀125比較接收緩衝器的預測累加量VBv與臨界 值Tp。f “VBV-Tp”時,p圖像的編碼步驟基:原:始 貝料進打,或當“VBV<Tp”時,一全跳躍p圖像從SKip 圖像記憶體輸出。接下來,接收緩衝器累加預測單元124 基於全跳躍P圖像的產生位元量及各⑽時間間隔期間的 傳送位元量R,計算在下個DTS接收緩衝器的預測累加量 VBV (步驟S508、S509、S510、S505 )。 當原始影像被編碼成一 P圖像時,比較/判斷單元125 比較接收緩衝器之預測累加量VBV與臨界值办。當“VBv 時,DCT單元113、量化單元114、及可變長度編 碼早70 116基於原始影像以—般的方式進行—p (請先閱讀背面之注意事^!^填寫本頁) 訂: 經濟部智慧財產局員工消費合作社印製
-27- 527832
五、發明說明(25) 碼步驟。當“VBV<Tp”時,—全跳躍p圖像自队㈣ 像儲存記憶體126輸出。接下來,接收緩衝器累加預測單 元124基於(a)P圖像之產生位元量與全跳躍p圖像之產生 位το量二者其中之一,以及〇3)於各1)丁3時間間隔期間的 傳位元1 R,在下個DTS解碼之前計算接收緩衝器的預 測累加量VBV (步驟S507、S508、S509、S510、S505 )。 葛原始影像被編碼成一 B1圖像時,比較/判斷單元 125比較接收緩衝器的預測累加量vBv與臨界值ΤΜ。當 VBV—Tbl時,DCT單元113、量化單元114、以及可 麦長度編碼單元116基於原始影像以一般方式進行一 b圖 像的編碼步驟。當“VBV<Tbl,,時,一全跳躍B圖像自 SKIP圖像儲存記憶體126輸出。接下來,接收緩衝器累加 預測單元124基於(a) B圖像之產生位元量與全跳躍b圖像 之產生位元量二者其中之一,以及(b)於各〇1^時間間隔 期間的傳送位元量R,在下個DTS解碼之前計算接收緩衝 為的預測累加量VBV (步驟S511、S512、S513、S514、 S505) 〇 當原始影像被編碼成一 B2圖像時,比較/判斷單元 U5比較接收緩衝器的預測累加量VBV與臨界值Tb2。當 “VBV^Tbl”時,DCT單元113、量化單元114、以及可 變長度編碼單元116基於原始影像以一般方式進行一 B圖 像的編碼步驟。當“VBV<Tb2”時,一全跳躍b圖像自 SKIP圖像儲存記憶體126輸出。接下來,接收緩衝器累加 預測單元124基於(a) B圖像之產生位元量與全跳躍b圖像 本紙張尺度適用中國國家標準(CNS)A4規格(21〇 x 297公釐) (請先閱讀背面之注意事^^填寫本頁) 0 經濟部智慧財產局員工消費合作社印製 -28- 景;像的:考I: 圖像的原始影像被用來作為其它 二:“ ’跳躍-1圖像及-P圖像對其它圖像 ;a、將說明於後。於是,可以採用以下方法的任 ==)僅跳躍特定型式的圖像;以及⑻在已進行DCT 後僅利用Dc元件,或對虛擬影像資料編碼,於藉著增 加-量化等級而控制碼量之際進行編碼。 曰 牛例"兒月,® 一圖像之預測碼量超過接收緩衝器之 預測累加量的圖像的制碼量時,圖像可以僅在其為一 B 圖像時被跳躍。當圖像為-I圖像或-P圖像時,可以進 行控制碼量的編碼動作。或者是,圖像可以僅在其為—b 圖像或- P圖像時被跳躍,圖像為—i圖像時,可以 進行控制碼量的編碼動作。 (修改3 ) 於本貫施例中,在大部分的情形中可以防止接收緩衝 态的下溢。然而,為確使接收緩衝器不會下溢,可採用以 下方法。於一圖像之預測碼量低於接收緩衝器之預測累加 量的情形中,包含於圖像中的各巨集塊的碼量可以與接收 緩衝為之預測累加碼量作一比較,在基於一上述之巨集對 圖像編碼之後,以及當接收緩衝器被發現到下溢,巨集塊 可以以一跳躍的巨集塊取代。 <第二實施例> 本實施例關於B圖像可能較p圖像及I圖像更可能被 跳躍的一種視訊編碼裝置。 (結構) 2 3 8 27 5 經濟部智慧財產局員工消費合作社印製 五 A7 __ R7____ 發明說明(奴) 第二實施例中之視訊編碼裝置具有與第一實施例相同 的結構,僅有的差異在於以臨界值設定單元127設定臨界 值的方式。以下說明臨界值設定單元127設定臨界值的方 式。 臨時值設定單元127分別設定Ti、Tp、Tbl、Tb2給圖 像型式 “ I ” 、“P” 、 “B1” 、及 “ B2” 。 第12圖顯示分別設定給圖像型式的臨界值的例子。臨 界值Ti及Tp設定成等於預測碼量Ei及Ep,如第一實施例中 如以下等式。 Ti=Ei Tp=Ep 當一 I圖像或一 P圖像被跳躍時,一指被跳躍之圖像 的B圖像顯示與被跳躍之圖像相同的影像。於此情形中, 舉例來說,當M=3時(Μ表示一 I圖像或B圖像的一出現 周期),四個連續的圖框顯示相同影像。於是,為使緊接 在一 Ρ圖像之前跳躍一 Β圖像的變化最小,Β圖像的臨界 值設定成高於第一實施例中的臨界值。 第13圖係一用以說明緊接在一 Ρ圖像之前的Β圖像的 臨界值的圖。 假設在DTSn+Ι之接收緩衝器的預測累加量VBV為 VBV(n+l), 則 在 DTSn+2 可得到 等 式 “ VBV(n+2)=VBV(n+l)-Eb+R” 。倘若 “ VBV(n+2) -Tp” ,則可預測到一 P圖像不會在DTSn+2跳躍。該等表 示式可轉換成一表示式“ VBV(n+2)=VBV(n+l)-Eb+R g 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -32- 請 先 閱 讀 背 之 注 意 事 1 ί 頁 訂 線 527832 A7 ^___ _____ 經濟部智慧財產局員工消費合作社印製 發明說明( 30 TP=Ep ” ,故發現到需要滿足表示式“ vBV(n+l) g Eb+(Ep-R)” 〇 此外,需要滿足如第一實施例中之“ VBV(n+l) -Eb” ,而因此需要滿足表示式“ VBV(n+l) g MAX(Eb, Eb+(Ep-R),,。 於是,臨界值Tb2被設為“Tb2=MAX(Eb,Eb+(Ep-R))” ,且當接收緩衝器的預測累加量VBV低於在DTSn+1 的臨界值Tb2時,一 B2圖像要被跳躍,所以P圖像預測不 會被跳躍。 此表示如下。當“(Ep-R)-O”時,一值“(Ep-R)” (一對等於第13圖中之①的值)加到一原始臨界值Tb2以 便得到一新的臨界值Tb2。當“(Rp-R)<0”時,使用原始 臨界值Tb2。 以相同的方式,假設接收緩衝器在DTSn的預測累加 量為VBV(n), 故在DTSn+2得到一表示式 “ VBV(n+2)=VBV(n)-Eb+R-Eb+R=VBV(n)-Eb-(Eb- 2R) ” 。該等表示式被轉換成一表示式 “VBV(n+2)=VBV(n)-Eb-(Eb-2R) g Tp=Ep” 。結果,需 要滿足一個表示式 “ VBV(n) 2 Eb+(Ep+Eb-2R)=Eb+(Ep-R)+(Eb-R)=Eb+(Tb2-R)”。 此外,如第一實施例,需要滿足表示式“VBV(n)^ Eb ” ,且於是需要滿足表示式“ VBV(n) - MAX(Eb, Eb+(Tb2-R)),’ 〇 因此,臨界值Tbl被設定為“Tbl=MAX(Eb,Eb+(Tb2· 請 先 閱 讀 背 面 之 注 意 事 « 寫 本 頁 訂 線 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -33- 527832 A7 B7 五、發明說明(31) R))” ,且當接收緩衝器之預測累加量低於在DTSn的臨界 值Tbl,一 B1圖像被跳躍,故P圖像預測不會被跳躍。 此表示以下。當“(Tb2-R)^0”時,一值“(Ep-R)” (一對等於第13圖中之①的值)加到一原始臨界值Tbl以 便得到一新的臨界值Tbl。當“(Tb2-R)<〇”時,使用原 始臨界值Tbl。 一緊接在一 I圖像之前的B圖像能以上述相同方式設 定,使用Ei而非Ep。就區分一 I圖像及一 P圖像而言,緊 接在一 P圖像之前的一B1圖像的臨界值指為“Tb2(p)” , 一緊接在一 P圖像之前的B2圖像的臨界值係指為 “ Tbl(p) ” ,一緊接在I圖像之前的B2圖像係指為 “ Tb2(i) ” 一緊接在I圖像之前的B2圖像係指為 “Tbl(i)” ,故可得到以下等式。
Tb2(p)=MAX(Eb,Eb+(Ep-R)
Tbl(p)=MAX(Eb,Eb+(Tb2(p)-R))
Tb2(i)=MAX(Eb,Eb+(Ei-R)
Tb2(i)=MAX(Eb5 Eb+(Tb2(i)-R) 第14圖顯示在第一實施例中接收緩衝器的預測累加量 的變化。在DTSn及DTSn+ ;1,接收緩衝器的預測累加量VBV 超過臨界值Tbl及Tb2,故B圖像沒有被跳躍。然而,在 DTSn+2,接收緩衝器的預測累加量VBV低於臨界值Tp, 故Ρ圖像被跳躍。 第14Β圖顯示接收緩衝器的預測累加量的變化,在本 實施例中的臨界值被採用。如圖式所示,臨界值Tb 1被設 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 請 先 閱 讀 背 面 之 注 意 事 寫 本 頁 訂 經濟部智慧財產局員工消費合作社印製 -34- 527832 A7 B7 五、發明說明(32 ’ 得高,故在DTSn發生跳躍Bi圖像。由於此,接收緩衝器 的預測累加量V B V增加一個B1圖像之產生位元量與一全 跳躍B圖像之產生位元量之間的差(DM_Dskip),故接收 緩衝器的預測累加量VBV在DTSn+2至少是臨界值Tp。因 此’在DTSn+2不會發生ρ圖像的跳躍。 第15A圖顯示藉解碼裝置以一般方式所示的影像的例 子。一第一圖框、一第二圖框、一第三圖框、及一第四圖 框分別顯示I圖像(1)、— B圖像(3)、_B圖像(4)、及一 P圖像(2)的原始影像。圓括號内的參考標號指出影像被 編碼的順序。 第15B圖顯示當一圖被判斷要基於第一實施例中所採 用之臨界值要被跳躍時以解碼裝置所顯示之影像的例子。 因為在第一實施例中的臨界值不會以此方式設定以致於一 在P圖像之前的B圖像較P圖像更可能被跳躍。在此情 况下,§ P圖像(2)被跳躍時,I圖像的一原始影像被顯 示於第四圖框中因為其係p圖像(2)的參考影像。因為B 圖像(3)與B圖像(4)指ρ圖像(2)的原始影像,j圖像的原 始影像亦顯示於第二圖框及第三圖框中。 第15C圖顯示當一圖被判斷要基於本實施例中所採用 之臨界值要被跳躍時以解碼裝置所顯示之影像的例子。因 為本實施例中的臨界值係以此一方式設定以致於一緊接在 P圖之荊的B圖像較一 ρ圖像更可能被跳躍。在此情況 下:當B圖像(3)被跳躍時,工圖像的一原始影像被顯示 於第二圖框中因為1圖像(1)及P圖像(2)係B圖像(3)的參 請 先 閱 讀 背 Sj 之 注 意 事 ί 頁 訂 經濟部智慧財產局員工消費合作社印製
527832
發明說明( 經濟部智慧財產局員工消費合作社印製 !影像,且1圖像⑴就編碼嘴序而言較接近B圖像(3)。 式顯示。 ⑷其匕圖像的原始影像以一般方 田第15D圖顯示當一圖像被判斷要基於本實施例中所採 用之臨界值要被_時轉料置賴*之影像的例子。 在此情況下’ #在第三固框的B圖像(4)被跳躍時,p圖 像⑺的-原始影像被顯示於第三圖框中因為丨圖像⑴及 P时(2)係B圖像(4)的參考影像,且p圖像⑺就編碼順 序而言較接近B ®像(4)。由於無圖像指B圖像⑺,其它 圖像的原始影像像往常一般方式顯示。 (操作) 於本實施例之視訊編碼裝置的操作與顯示於第u圖之 第一實施例者相同,僅有的差別在於步驟85〇1,所以操 作步驟不予說明。 (結論) 如上述,本實施例之視訊編碼裝置設定臨界以便滿足 此等預測條件,以致於不會造成一 P圖像的跳躍。因此, 在一 P圖像正常地被跳躍的例子中,反而是一緊接在p圖 像之前的B圖像被跳躍,所以可避免p圖像被跳躍。 (修改1 ) 本實施例之視訊編碼裝置具有獨特的特性防止一 P圖 像被跳躍’其並未在第一實施例中提供。因此,即使當本 實施例之視訊編碼裝置被建構在產生圖像之後暫時儲存各 圖像於一緩衝器記憶體内,如日本專利第2871316號所示 «1. -- (請先閱讀背面之注意^寫本頁) · •線· 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -36- 527832 A7 B7 五、發明說明(34) 者,本實施例之視訊編碼裝置能產生與上述專利揭示内容 不同的功效。 詳而言之,視訊編碼裝置可以被建構以對影像資料編 碼以便產生一圖像,暫時地儲存被產生的的圖像於緩衝記 憶體内,並根據該圖像之一圖像型式設定一臨界值,以此 方式以致於一 P圖像基於圖像的產生位元量如下述不會被 跳躍,且以此方式設定的臨界值可以用來判斷圖像是否被 跳躍。 用於影像資料被編碼以產生一I圖像的例子中的臨界 值Ti可以根據以下等式設定,其中Di表示該I圖像的產生 位元量。
Ti=Di 此外,用於影像資料被編碼以產生一 P圖像的例子中 的臨界值Tp可以根據以下等式設定,其中Dp表示該P圖 像的產生位元量。
Tp=Dp 此外,用於影像資料被編碼以產生一緊接在I圖像之 前的B圖像的例子中的臨界值Tb(i)可以根據以下等式來 防I圖像被跳躍。等式中,Db表示B圖像的產生位元量, Ei表示I圖像的預測碼量,以及R表示各解碼時間間隔期 間内傳送位元量。
Tb(i)=MAX(Db,Db+(Ei-R)) 此外,用於影像資料被編碼以產生一緊接在一 P圖像 之前的B圖像的情形中的臨界值Tb(p)可以根據以下等式 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事寫本頁) 經濟部智慧財產局員工消費合作社印製 -37- 527832 Α7 Β7 五、發明說明(35) 經濟部智慧財產局員工消費合作社印製 設定以防止P圖像被跳躍。等式中,Db表示B圖像的產 生位元量,Ep表示P圖像的預測碼量,以及R表示各解決 時間間隔期間内的傳送位元量。 Tb(p)=MAX(Db5 Db+(Ep-R))(修改2 ) 第16圖顯示設定諸臨界值的其它例子。 臨界值Ti、Tp、Tb2(p)、及Tb2(i)以與第二實施例相 同的方式利用以下等式設定。 Ti=Ei Tp=Ep Tb2(p)=MAX(Eb,Eb+(Ep-R)) Tb2(i)=MAX(Eb,Eb+(Ei-R)) 於第二實施例中,由於B1圖像的臨界值設得高如上 述,B1圖像可能被跳躍。然而,在確實產生給一B1圖像 的位元量的情形中,一B2圖像及一 P圖像較其預測碼量 小,P圖像相對於預測不會被跳躍。於是,最好延遲判斷 是否要跳躍圖像直到緊接在P圖像之前的B2圖像,來視 是否跳躍真的必要。藉此動作,可以避免不必要的跳躍。 另一方面,當判斷延遲如上述且B2圖像被判斷要跳 躍時,倘若接收緩衝器的預測累加量相當小,跳躍B2圖 像可能不會產生足夠防止P圖像被跳躍的效用。 於是,B1圖像僅在即使B2圖像已被跳躍而P圖像的 跳躍仍發生時。B1圖像的臨界值被判定要使此發生。 第17圖係一用以說明一緊接在一 P圖像之前的B圖像 請 先 閱 讀 背 面 之 注 意 事 ί 頁 訂 線 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -38- 527832 A7 B7 經濟部智慧財產局員工消費合作社印製 五、發明說明(36) 的臨界值的圖。 假設在DTSn的接收緩衝器的預測累加量VBV為 VBV(n),在DTSn+2的接收緩衝器的預測累加量VBV為 “ VBV(n+2)=VBV(n)-Eb+R-Dbskip+R=VBV(n)-Eb- (Dbskip-2R)” 。此處,“ Dbskip “表示一全跳躍B圖像 的產生位元量。當“VBV(n+2)^Tp “時,P圖像不會在 DTSn+2被跳躍。上述表示式被轉換成一個表示式 “VBV(n+2)=VBV(n)-Eb_(Dbskip-2R)^Tp=Ep “,故發現 到需要滿足一表示式 “ VBV(n) g Eb+(Ep+Dbskip-2R)=Eb+(Ep-R)+(Dbskip-R)=Dbskip+(Tb2-R),,。 此外,如第一實施例,需要滿足一表示式“VBV(n) -Eb “,故需要滿足一表示式“ VBV(n) - MAX(Eb, Dbskip+(Tb2-R)) “。 於是,臨界值Tbl被設定為 “ Tbl=MAX(Eb, Dbskip+(Tb2-R)) “。當接收緩衝器的預測累加量VBV低 於在DTSn的臨界值Tbl,一 B1圖像被跳躍,所以P圖像 不會在預測中被跳躍。 此表示如下。當“ Dbskip+(Tb2-R) - 〇 “時,一值 “(Ep-R) “(一對等於第17圖中之①的值)加到一原始臨 界值Tbl,而從結果值減去一值“(R-Dbskip) “( 一對等 於第17圖中之②的值)以便得到一新的臨界值Tbl,如第 Π圖所示。當“Dbskip+(Tb2-R)<0”時,使用原始臨界 值Tbl。 一緊接在一 I圖像之前的B圖像能以上述相同方式設 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -39- (請先閱讀背面之注意事/ 狀,丨 | 填寫本頁) ί線· 經濟部智慧財產局員工消費合作社印製 527832 A7 B7 五、發明說明(37) 定,使用Ei而非Ep,故可得到以下等式。
Tb 1 (p)=MAX(Eb? Dbskip+(Tb2(p)-R))
Tbl(i)=MAX(Eb,Dbskip+(Tb2(i)-R) <第三實施例> 本實施例關於一種視訊編碼裝置,其一圖框配置給一 圖像(圖框結構)的情形中,於編碼影像資料被跳躍時, 不會造成交錯掃描格式中顯示之影像順序的顛倒。 (結構) 關於本實施例的視訊編碼裝置具有大約與上述諸實施 例中之結構相同的結構,故以下說明著重於其中的差異 處。 影像排列單元110以一圖框為基礎排列影像資料。 DCT單元113以一圖框為基礎對影像資料編碼。 比較/判斷單元12 5當接收緩衝器之預測累加量低於 一臨界值時,叫DCT單元113取消對下一個圖框之影像資 料的編碼步驟並從S KIP圖像儲存記憶體12 6輸出一全跳躍 圖像,如第一實施例。 SKIP圖像儲存記憶體126儲存二種型式之全跳躍P圖 像及二種型式的全跳躍B圖像的圖結構,該二種型式之全 跳躍P圖像與二種型式的全跳躍B圖像分別指一正向圖像 之一底圖場(一顯示順序緊接在前之圖場)及一反向圖像 之一頂圖場(一顯示順序緊接在後之圖場)。比較/判斷 單元125從該二種型式中選出一全跳躍圖像,其指就顯示 順序而言一最接近被跳躍影像資料之圖場的圖場,且被選 本紙張尺度適用中國國家標準(CNS)A4規格(2]0 X 297公釐) -40- --------------^_wl — - I (請先閱讀背面之注意事填寫本頁) · 線· 527832
、發明說明(38) 經濟部智慧財產局員工消費合作社印制衣 出之全跳躍圖像被傳送。 第18圖顯示一全跳躍b圖傻 口诼之圖像層中的一圖像標頭 :二:編碼延伸。如圖式中的參考標號①所顯示,全跳 %Β圖像的圖像結構係標示為一頂圖場。 第19A 19B、19C圖各顯示得被指為何時圖框2被跳 躍的圖場。 桃 第19A圖顯示M=1 (M表示I圖像或一 P圖像之_ 出現周期)的情形。因為圖框M_p圖像,能作為參考 圖場的圖場為圖場1t 。因為圖場lb就顯示順 序而言較接近圖框1的圖場2 t&2b二者,圖場11^為 圖場2 t及2 b的一個參考圖場。 於是,不是對圖場1 t及1 b編碼,反而是各指為 正向圖框的底圖場的二個全跳躍P圖像被輸出。 第19B圖顯示M=2 (M表示I圖像或一 p圖像之一 出現周期)的情形。因為圖框2為一B圖像,能作為參考 圖場的圖場為圖場It 、lb、3t、及3b。因為圖 場1 b就顯示順序而言最接近圖場2 t,圖場1 b為圖場 2 t的一個參考圖場。此外,因為圖場3 t就顯示順序而 言最接近圖場2b,圖場3 t為圖場2b的一個參考圖 場。 於疋’不是對圖場2 t編碼,反而是各指為正向圖框 的底圖場的一全跳躍B圖像被輸出。 不是對圖場2 b編碼,反而是各指為反向圖框的頂圖 場的一全跳躍B圖像被輸出。 (請先閱讀背面之注意事填寫本頁) . -丨線· 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -41- 527832 A7 五、發明說明(39 ) (請先閱讀背面之注咅?事寫本頁) 第19C圖顯示m=3 (M表示I圖像或一 P圖像之一 出現周期)的情形。因為圖框2為一 B圖像,能作為參考 圖場的圖場為圖場lt 、ib、4t、及4b。因為圖 場1 b就顯示順序而言最接近圖場21:及21),圖場ib 為圖場2 t及2 b的一個參考圖場。 於是’不是對圖場2 t及2 b編碼,反而是各指為正 向圖框的底圖場的二個全跳躍B圖像被輸出。 第20A、20B、及20C圖各顯示待被指為何時圖框3被 跳躍的圖場。 第20A圖顯示M=1 (M表示I圖像或一 P圖像之一 出現周期)的情形。因為圖框3為一B圖像,能作為參考 圖場的圖場為圖場2 t 、及2 b。因為圖場2 b就顯示 順序而言較接近圖框3的圖場3 t及3b,圖場2b為圖 場3 t及3b的一個參考圖場。 丨線· 於是,不是對圖場3 t及3b編碼,反而是各指為正 向圖框的底圖場的二個全跳躍B圖像被輸出。 經濟部智慧財產局員工消費合作社印製 第20B圖顯示m=2 (M表示I圖像或一 p圖像之一 出現周期)的情形。因為圖框3為一B圖像,能作為參考 圖場的圖場為圖場1 t 、及1 b。因為圖場1 b就顯示 順序而言最接近圖場3 t及3b,圖場lb為圖場3七及 3 b的一個參考圖場。 於是’不是對圖場3 t及3 b編碼,反而是各指為正 向圖框的底圖場的二個全跳躍B圖像被輸出。 再者’由於圖場1 b被顯示而非3 t,圖場2 t及2 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -42- 發明說明(4〇) b亦利用圖%1 b作為—參圖場被跳躍以防止顯示順序被 顛U於此|f形中’同樣地,各指為正向圖像之頂圖場的 一全跳躍圖像被輸出。 第20C圖顯賴=3 (M表示工圖像或一?圖像之一 出現周期)的情形。因為圖框3為_6圖像,能作為參考 圖場的圖場為圖場lt、lb、4t、及4b。因為圖 場4 t就顯示順序而言最接近圖場3 t及3 b,圖場4七 為圖場3 t及3 b的一個參考圖場。 ;疋不疋對圖% 3 t及3 b編碼,反而是各指為反 向圖框的底圖場的二個全跳躍B圖像被輸出。 第21圖顯示m=3 (M表示I圖像或一 p圖像之一出 關期)的情形。因為圖框4為—p圖像,能作為參考圖 場的圖場為圖場1 1、及1 b。因為圖場1 b就顯示順 序而言最接近圖場4 t及4b,圖場lb為圖場4七及4 b的一個參考圖場。 於是,不是對圖場4 t及4 b編碼,反而是各指為正 向圖框的底圖場的二個全跳躍P圖像被輸出。 再者’由於圖場1 b被顯示而非4 t,圖場2 t、2 b、3 t及3 b亦利用圖場1 b作為一參圖場被跳躍以防 止顯示順序被顛倒。於此情形中,同樣地,各指為正向圖 像之頂圖場的4全跳躍圖像被輸出。 (操作) 以下係關於本實施例之視訊編碼裝置的操作的說明。 第22圖係一顯示以關於本實施例之視訊編碼裝置進 527832 A7 B7 五、發明說明(w 經濟部智慧財產局員工消費合作社印製 之操作程序的流程圖。 有關設定臨界值的操作程序(步驟S501 ),關於圖 像是否要被跳躍的判斷(步驟S502、S503、S507、S508、 S511、S512及S515)、一 I圖像的編碼步驟(步驟S504)、 一 P圖像的編碼步驟(步驟S509 ) 、一 B圖像的編碼步 驟(步驟S513)因與第一實施例者相同故未於此處說明。 本實施例與第一實施例差異處在於顯示於步驟S801 至S810之用以跳躍圖像的方法,故以下說明該等差異。 於本實施例中,當對影像資料的編碼被跳躍時,圖像 的配置從圖框結構改變為圖場結構,故分別為組成該影像 資料的頂圖場與底圖場的二個全跳躍圖像被輸出。亦即, 一圖像的跳躍被進行兩次。 當步驟S512中的“VBVCTbl”時,一關於正向圖像 之底圖場的全跳躍B圖像於步驟S807及S808被輸出兩次 (參考例見第19C圖)。 當步驟S515中的“VBV<Tb2”時,一關於反向圖像 之底圖場的全跳躍B圖像於步驟S809及S810被輸出兩次 (參考例見第20C圖)。 當步驟S508中的“VBV<Tp”時,一關於正向圖像 之底圖場的全跳躍B圖像於步驟S801及S802被輸出兩次 (參考例見第21圖)。 於步驟S803至S806,不是一在^一 P圖像與一 I圖之 間的B圖像關與P圖像關連,各係指正向圖像之底圖場的 二個全跳躍B圖像被輸出(參考例見第21圖)。 請 先 閱 讀 背 面 之 注 意 事 « 寫 本 頁 Φ 訂 線 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -44- 527832 A7 B7 五、發明說明(43) 經濟部智慧財產局員工消費合作社印製 元件標號說明 2 編碼控制電路 6 正交轉換電路 10 輸出緩衝記憶體 13 反向正交轉換電路 15 標頭資訊產生電路 17 碼量控制電路 20 緩衝記憶體 22 跳躍碼儲存記憶體 23 開關控制電路 24 傳輸速率超量判斷電路 25 影像品質判斷電路 100 視訊編碼裝置 110 影像排列單元 111, 112 加法器 113 DCT單元 114 量化單元 115 速率控制單元 116 可變長度編碼單元 117 緩衝器 119 反量化單元 120 反DCT單元 122 視訊記憶體 123 補償動作預測單元 124 接收緩衝器累加預測單元 125 比較/判斷單元 126 跳躍圖像儲存記憶體 127 臨界值設定單元 (請先閱讀背面之注意事^填寫本頁) 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -46-

Claims (1)

  1. 申請專利範圍 •:種視訊編碼裝置,其於預測一解碼裝置内之接收緩 衝器的累加量而對一序列的影像資料編碼,各影像資 料形成一圖框或一圖場,該視訊編碼裴置包含: 比較裝置,用以於對各影像資料編碼之前,比較 一預測累加量與一預定的臨界值,該預測的累加量為 預測在對衫像資料編碼獲得之資料被解碼之時待被累 加於接收緩衝器内的一資料量;以及 、 、跳躍裝置,用以(a)取消影像資料的編碼及(b)利用 一代理碼作為從接收緩衝器在解碼時間取得的資料, 倘若該資料量低於預定的臨界值,代理碼指示出顯示 與先岫被解碼之影像資料完全相同的影像資料。 2·如申請專利範圍第1項所述之視訊編碼裝置,其更包 含: ° 臨界值設定裝置,用以設定一臨界值給一藉對影 像資料編碼得到之圖像的一圖像型式,該圖像型式為 I圖像、一p圖像、一B圖像的其中之一。 3·如申請專利範圍第2項所述之視訊編碼裝置, 其中該跳躍裝置(a)當圖像型式為一6圖像時利 用一全跳躍B圖像作為代理碼,該全跳躍B圖像為一 B圖像,其中除了在各切割層中之一第一巨集塊與一 取後巨集塊以外之在所有切割層中的巨集塊全為跳躍 巨集塊,以及(b)當圖像型式為丨圖像或一 p圖像時利 用一全跳躍P圖像作為代理碼,該全跳躍p圖像為一 P圖像,其中除了在各切割層中之一第一巨集塊與一 ^27832 is8 C8 ^----—D8 _ 六、申請專利範圍 ~ "— 最後巨集塊以外之在所有切割層中的巨集塊全為跳躍 巨集塊。 (請先閱讀背面之注意事\
    ^填寫本頁) 女申明專利範圍第3項所述之視訊編碼裝置, 其中该臨界值為圖像之一預測碼量。 如申明專利範圍第3項所述之視訊編碼裝置, 其中該臨界值設定裝置計算該影像資料的像素變 化並σ又疋較雨的臨界值給一較高之計算出的變化。 6·如申請專利範圍第3項所述之視訊編碼裝置, 其中忒界值設定一較高的臨界值給一原始影像 之一較高的活動力ACT,該活動力ACT為包括於該 等原始影像中之所有巨集之活動力作用的總和,一活 動力作用以等式表示 actj^l + VARj 其中+ 為來自一巨集塊y之八塊中各個之原 始影像的像素值設化中的一最小值,該八塊係由四塊 以一圖框DCT模式及四塊以一圖場DCT模式組成, 且aci為巨集塊y·的一活動力。 經濟部智慧財產局員工消費合作社印製 7·如申請專利範圍第3項所述之視訊編碼裝置, 其中该β品界值設定裝置設定一預測的碼量給各個 I圖像及Ρ圖像作為各個I圖像及ρ圖像的臨界值, 並設定一大於Β圖像之預測碼量的值作為β圖像的臨 界值。 8.如申請專利範圍第7項所述之視訊編碼裝置, 其中當Μ之2時,Μ表示I圖像或一 ρ圖像之一 -48- 本紙張尺度適用中國國家標準(CNS)A4規格(210 χ 297公釐) )27832
    出現周期,該臨界值設定裝置設定: 一 I圖像之一臨界值Π為; 一 P圖像之一臨界值7>為7^=办; 一以一編碼順序緊接在一 Z圖像之前的B圖像的 ^ 界後 Tb(i) f (Ei-R) 時為 Tb⑴=Eb + (Ei R),當 (E“R) <〇 時 Tb(i)=Eb ·,以反 一以一編碼順序緊接在一 p圖像之前的B圖像的 爸品界 I Tb(p)當(Ep-R)-0 時為 Tb(p)=Eb + (Ep_R), it (Ep-R) <〇 時 Tb(p)=Eb, 其中五z為一 I圖像之預測碼量,办為一 p圖像 之預測碼量,為一 B圖像之預測碼量,且及為各解 碼時間間隔期間内一傳送位元量。 9.如申凊專利範圍第7項所述之視訊編碼裝置, 其中當Μ-3時,从表示I圖像或一 Ρ圖像之一 出現周期,該臨界值設定裝置設定: 一 I圖像之一臨界值Π為; 一 Ρ圖像之一臨界值為办; 一以一編碼順序緊接在一 I圖像之前的Β圖像 52(%)的一臨界值加⑺當⑻,坌ο時為 Tb2(i)=Eb + (Ei_R),當(m) <〇 時 Tb2⑴二Eb ·, 一以一編碼順序緊接在一 P圖像之前的B圖像 Β1(ι)的一臨界值Tbl⑴當(Tb2(t) R) $ 〇時爲 Tbl(i)=Eb + (Tb(i)-R) , t (Tb(i)-R) <〇 ^ Tbl(i)=Eb ; 一以一編碼順序緊接在一 P圖像之前的B圖像 (請先閱讀背面之注意事 填寫本頁) 經濟部智慧財產局員工消費合作社印彻农 本紙張尺度適用中國國家標準(CNS)A4規格(21〇 297公釐) -49- 六、申請專利範圍 β2(ρ)的一臨界值Tb2(p)當(办七g 〇時為 Tb2(p)=Eb + (Ep-R),1當(Ep-R) <0 時 n2(p)=Eb ·,以 及 一以一編碼順序緊接在一 p圖像之前的B圖像 B1(P)的一臨界值 Tbl(p)鶯(Tb2(p)-R) - 〇 時爲 ThHp)-Eb^(Tb2(p)-R) , t (Tb2(p)-R) < 〇 時 Tbl(p)^Eb ; 其中五/為一 I圖像之預測碼量,办為一 p圖像 之預測碼量,為一 B圖像之預測碼量,且Λ為各解 碼時間間隔期間内一傳送位元量。 10·如申凊專利範圍第7項所述之視訊編碼裝置, 其中當3時,Μ表示I圖像或一 ρ圖像之一 出現周期,該臨界值設定裝置設定一以一編碼順序緊 接在一 I圖之前的Β圖像Β2的臨界值,高於_以二 編碼順序緊接在一 Β圖像Β2之前的Β圖像扪的臨界 值。 11.如申叫專利範圍第10項所述之視訊編碼裝置, 經濟部智慧財產局員工消費合作社印别衣 其中當Μ坌3時,Μ表示I圖像或一 ρ圖像之一 出現周期,該臨界值設定裝置設定: 一:[圖像之一臨界值77為7Υ=&·; 一 Ρ圖像之一臨界值:Γρ為办; 一以一編碼順序緊接在一〗圖像之前的Β圖像 5抑的一臨界值Tb2(i)當⑹,-0時為 Tb2(i)=Eb + (Ei-R),(Ei_R) <〇 時加⑴二虾· C8 D8 六、申請專利範圍 (請先閱讀背面之注意事填寫本頁) 一以一編碼順序緊接在一 B圖像52(%)之前的B圖 像 Bl(i)的一臨界後 Tbl(i)當 Dbskip + (Tb2(i)-R)-Eb 時為 Tbl(i卜Dbskip~\~(Tb2(i)-R),If Dbskip + (Tb2(i)-R) <Eb 時 Tbl(i卜Eb ·, 一以一編碼順序緊接在一 P圖像之前的B圖像 们⑻的一臨界值 Tb2(p)當(Ep-R) 2 〇時爲 Tb2(p)=Eb + (Ep-R),I 當(EP-R)<〇 時 Tb2(p)=Eb ·,以 及 一以一編碼順序緊接在一 B圖像B2(p)之前的B 圖像Bl(p)的一臨界值77^⑻當仍 Eb 時為 Tbl (p)二Dbskip + (Tb2(p)-R),且當 Dbskip + (Tb2(p)-R) <Eb 時 Tbl(p)=Eb ·, 其中五ζ·為一 I圖像之預測碼量,办為一 P圖像 之預測碼量,五6為一 B圖像之預測碼量,且穴為各解 碼日守間間隔期間内一傳送位元量。 0 12· 種視Λ編碼裝置,其於預測《—解碼裝置中之接收緩 衝器的累加量時對一序列的影像資料編碼,各影像資 料形成一圖框或一圖場,該視訊編碼裝置包含: 經濟部智慧財產局員工消費合作社印制π 臨界值設定裝置,用以於對各影像資料編碼之後, 根據在Μ坌2時,Μ表示I圖像或一 ρ圖像之一出現 周期的情形中被編碼之影像資料的圖框型式,設定一 S品界值,如下述, 一在影像資料被編碼成I圖像的情形中的臨界值 77被設定為77=识,其中识為I圖像之預測碼量, 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -51- w/832
    六、申請專利 較農置用以在對各影像資料編碼之前,比較(&) 解碼I置内之接收緩衝器的一預測累加量,以及(b) 一輪出緩衝器之一累加詈—去Α由 糸里一者其中之一與一預定的標 、:值,該預測累加量為預測要被累加到接收緩衝哭的 資料量; 跳躍裝置,用以(a)取消於圖框結構中之影像資料 的、扁碼,及(b)用一指示顯示各與先前被解碼之影像資 7之-頂圖場與一底圖場其中之一完全相同的二個圖 场的代理碼取代由對影像資料之一頂圖場與一底圖場 編碼所獲得之資料,倘若資料量低於該預定的標準值。 14·如申請專利範圍第13項所述之視訊編碼裝置, 其中該跳躍裝置利用代理碼指示顯示各與依顯示 順序最接近已被取消要被在圖框結構中編碼之影像資 料之各頂圖場及底圖場的圖場完全相同的二個圖場, 該圖場自先前被解碼之影像資料的頂圖場及底圖場選 出。 ' 15·如申請專利範圍第14項所述之視訊編碼裝置, /、中g已被取消要被在圖框結構中編碼之影像資 料被編碼成B圖像時,該跳躍裝置利用各為除了於各 切割層之一第一巨集塊與一最後巨集塊以外之所有切 吾1J層中之巨集塊的B圖像的二個全跳躍B圖像作為代 里馬且^已被取消要被在圖框結構中編碼之影像資 料被編碼成一 I圖像或一 p圖像時,該跳躍裝置利用 除了於各切割層之一第一巨集塊與一最後巨集塊以外 (請先閱讀背面之注意事填寫本頁) 句: •線- 經濟部智慧財產局員工消費合作社印製 *53- 527832 C8 ----— D8 六、申請專利範圍 ^~ 之所有切割層中之巨集塊的p圖像的二個全跳躍p圖 像作為代理碼。 ° (請先閱讀背面之注意事填寫本頁) 16·如申請專利範圍第15項所述之視訊編碼裝置, 其中0)當已被取消要被在圖框結構中編碼之影像 貧料被編碼成一〗圖像或一 p圖像時,被該跳躍裝置 利用之各全跳躍P圖像利用一先前被顯示I圖像或p 圖像的底圖場作為一參考圖場,(b)當已被取消要被 在圖框結構中編碼之影像資料被編碼成一B圖像扪 時,被該跳躍裝置利用之各全跳躍3圖像利用一先前 被顯示I圖像或P圖像的頂圖場作為一參考圖場,以 及(c)當已被取消要被在圖框結構中編碼之影像資料被 編碼成一 B圖像B2時,被該跳躍裝置利用之各全跳 躍B圖像利用一先前被顯示j圖像或p圖像的頂圖場 作為一參考圖場。 17 ·如申请專利範圍第16項所述之視訊編碼裝置, 經濟部智慧財產局員工消費合作社印制衣 其中當已被取消要在圖框結構中被編碼的影像資 料被編碼成I圖像或一 p圖像時,該跳躍裝置取消對 被編碼成一以編碼順序緊接在該I圖像或p圖像之後 的B圖像的影像資料的編碼,並以各利用先前顯示之 圖像的一底圖場作為一參考圖場的二個全跳躍B圖像 取代以對該影像資料之頂圖場及底圖場編碼所得到之 資料。 18.—種視訊編碼裝置,其於預測一解碼裝置中接收緩衝 器之一累加量時對一序列的影像資料編碼,各影像資 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -54- 527832 C8 --------— D8 六、申請專利範圍 料心成圖框或一圖場,該視訊編碼裝置包含: 車乂衣置,用以在對各影像資料編碼之前,比較 (請先閱讀背面之注意事寫本頁) 預測累加里與_臨界值,該預測累加量為預測在以對 〜像貝料編碼所得到之資料被解碼之時要被累加到接 收緩衝器的:貝料1,該臨界值係被設定給一以對該影 像資料編碼所得到之圖像的圖像型式;以及 控制裝置,用以(a)取消該影像資料的編碼,以及 (^)利用-代理碼料在解碼時間自純緩衝器取得的 貝料,倘右食料量低於該臨界值且圖像型式為一 B圖 像代理碼指不顯示與先前被解碼之影像資料完全相 同的影像資料。 19.;種視訊編碼裝置,其於預測_解碼裝置中接收緩衝 =之累加里日寸對一序列的影像資料編碼,各影像資 料形成一圖框或一圖場,該視訊編碼裝置包含: 經濟部智慧財產局員工消費合作社印剩衣 比較裝置’用以在對各影像資料編碼之前,比較 預測累加量與一臨界值,該預測累加量為預測在以對 影像資料編碼所得到之資料被解碼之時要被累加到接 收緩衝器的資料i,該臨界值係被設定給一以對該影 像資料編碼所得到之圖像的圖像型式;以及 控制裝置’用以⑷取消該影像資料的編碼,以及 (2)利用-代理碼作為在解碼時間自接收緩衝器取得的 資料,倘若資料量低於該臨界值且圖像型式為圖 像或一 P圖像,代理碼指示顯示與先前被解碼之影像 資料完全相同的影像資料。 本紙張尺度細標準(CNS)A4規格(21〇 X 297公爱)— -55- 527832 申請專利範圍 種視λ、、扁碼方法,用以於預測_解碼裝置中接收緩 衝器之一累加量時對一序列的影像資料編碼,各影像 貧料形成-圖框或一圖場,該視訊編碼方法包含: 比幸乂步驟’用以在對各影像資料編碼之前,比較 預測累加量與—臨界值,該預測累加量為預測在以對 影像資料編碼所得到之資料被解碼之時要被累加到接 收緩衝器的資料t,該臨界值係被設定給一以對該影 像貢料編碼所得到之圖像的圖像型式;以及 跳躍步驟’用以(a)取消該影像資料的編碼,以及 (b)利用一代理碼作為在解碼時間自接收缓衝器取得的 貧料,倘若資料量低於該預定的標準臨界值,該代理 碼指不顯示與先前被解碼之影像資料完全相同的影像 資料。 21· —種視訊編碼方法,用以對圖框結構内一序列的影像 資料編碼,各影像資料形成一圖框,該方法包含: 比較步驟’用以在對各影像資料編碼之前,比較(a) 一解碼裝置内之接收緩衝器的一預測累加量,以及(b) 一輸出緩衝器之一累加量二者其中之一與一預定的標 --------------— (請先閱讀背面之注意事寫本頁} 訂_· -線!LF 經濟部智慧財產局員工消費合作社印剩衣 準值,該預測累加量為預測要被累加到接收緩衝器 資料量; 跳躍步驟,用以(a)取消於圖框結構中之影像資 的編碼,及(b)以一指示顯示各與先前被解碼之影像 料之一頂圖場與一底圖場其中之一完全相同的二個 場的代理碼取代由對影像資料之一頂圖場與一底圖 的 料 資 圖 場 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -56-
TW090109417A 2000-04-20 2001-04-19 Video encoding apparatus that adjusts code amount by skipping encoding of image data TW527832B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000118982 2000-04-20

Publications (1)

Publication Number Publication Date
TW527832B true TW527832B (en) 2003-04-11

Family

ID=18630035

Family Applications (1)

Application Number Title Priority Date Filing Date
TW090109417A TW527832B (en) 2000-04-20 2001-04-19 Video encoding apparatus that adjusts code amount by skipping encoding of image data

Country Status (2)

Country Link
US (1) US6819714B2 (zh)
TW (1) TW527832B (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030112366A1 (en) * 2001-11-21 2003-06-19 General Instrument Corporation Apparatus and methods for improving video quality delivered to a display device
EP2262269B1 (en) 2001-12-17 2018-01-24 Microsoft Technology Licensing, LLC Skip macroblock coding
JP4007594B2 (ja) * 2002-09-26 2007-11-14 株式会社東芝 動画像符号化装置及び方法、動画像符号化方式変換装置及び方法
JP4240283B2 (ja) * 2002-10-10 2009-03-18 ソニー株式会社 復号装置及び復号方法
FR2849331A1 (fr) * 2002-12-20 2004-06-25 St Microelectronics Sa Procede et dispositif de decodage et d'affichage en marche avant acceleree d'images mpeg, circuit pilote video et boitier decodeur incorporant un tel dispositif
JP2005072742A (ja) * 2003-08-21 2005-03-17 Sony Corp 符号化装置及び符号化方法
US7092576B2 (en) * 2003-09-07 2006-08-15 Microsoft Corporation Bitplane coding for macroblock field/frame coding type information
JP4838253B2 (ja) * 2004-10-07 2011-12-14 パナソニック株式会社 画像符号化装置、画像符号化方法、画像復号化装置、画像復号化方法、および記録方法
TWI284855B (en) * 2005-04-29 2007-08-01 Sunplus Technology Co Ltd Image processing method and method for detecting difference between different image macro-blocks
US9077960B2 (en) 2005-08-12 2015-07-07 Microsoft Corporation Non-zero coefficient block pattern coding
US8654858B2 (en) * 2005-08-25 2014-02-18 Comtech Ef Data Corp. Methods and apparatus for differential encoding
JP2008005163A (ja) * 2006-06-21 2008-01-10 Matsushita Electric Ind Co Ltd 画像符号化装置および画像符号化方法
JP2008022405A (ja) * 2006-07-14 2008-01-31 Sony Corp 画像処理装置および方法、並びに、プログラム
KR100790150B1 (ko) * 2006-07-28 2008-01-02 삼성전자주식회사 비디오 부호화기 및 비디오 데이터 프레임 부호화 방법
KR101375669B1 (ko) * 2006-11-07 2014-03-19 삼성전자주식회사 인터 예측 부호화, 복호화 방법 및 장치
TWI339073B (en) * 2006-11-13 2011-03-11 Univ Nat Chiao Tung Video coding method using image data skipping
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
JP5079589B2 (ja) * 2008-04-30 2012-11-21 パナソニック株式会社 表示制御装置及び表示制御方法
US7925774B2 (en) 2008-05-30 2011-04-12 Microsoft Corporation Media streaming using an index file
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US8379728B2 (en) * 2009-04-17 2013-02-19 Texas Instruments Incorporated Adaptive real-time video prediction mode method and computer-readable medium and processor for storage and execution thereof
JP5396302B2 (ja) * 2010-02-08 2014-01-22 パナソニック株式会社 映像信号符号化装置及び映像信号符号化方法
JP5521940B2 (ja) * 2010-09-22 2014-06-18 富士通株式会社 符号化方法、復号化方法、符号化装置及び復号化装置
EP2624554B1 (en) * 2010-09-30 2019-09-18 Fujitsu Limited Dynamic image encoding device, dynamic image encoding method, and computer program for dynamic image encoding
US9210434B2 (en) 2013-06-12 2015-12-08 Microsoft Technology Licensing, Llc Screen map and standards-based progressive codec for screen content coding
JP5789004B2 (ja) * 2013-08-09 2015-10-07 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、符号化装置および符号化方法
US10298925B2 (en) * 2017-06-22 2019-05-21 International Business Machines Corporation Multiple image storage compression tree
CN109168083B (zh) * 2018-10-23 2021-05-28 海信视像科技股份有限公司 一种流媒体实时播放方法及装置
US11567767B2 (en) * 2020-07-30 2023-01-31 Marvell Asia Pte, Ltd. Method and apparatus for front end gather/scatter memory coalescing

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2871316B2 (ja) 1992-07-10 1999-03-17 日本ビクター株式会社 動画像符号化装置
US6031937A (en) * 1994-05-19 2000-02-29 Next Software, Inc. Method and apparatus for video compression using block and wavelet techniques
JP3157101B2 (ja) * 1996-03-08 2001-04-16 沖電気工業株式会社 画像符号化方法及び画像符号化装置
JPH1042295A (ja) 1996-07-19 1998-02-13 Sony Corp 映像信号符号化方法および映像信号符号化装置
JP3748717B2 (ja) * 1998-08-31 2006-02-22 シャープ株式会社 動画像符号化装置
US6490324B1 (en) * 1998-12-08 2002-12-03 Stmicroelectronics, Inc. System, method and apparatus for a variable output video decoder
US6414996B1 (en) * 1998-12-08 2002-07-02 Stmicroelectronics, Inc. System, method and apparatus for an instruction driven digital video processor

Also Published As

Publication number Publication date
US20010046263A1 (en) 2001-11-29
US6819714B2 (en) 2004-11-16

Similar Documents

Publication Publication Date Title
TW527832B (en) Video encoding apparatus that adjusts code amount by skipping encoding of image data
KR950011200B1 (ko) 인터레이스 동화상 신호의 압축 장치
JP3365771B2 (ja) ビデオ信号圧縮装置
TW301098B (zh)
JP3957915B2 (ja) フェード検出装置及び情報符号化装置
JPH1075457A (ja) 動画像内の移動物体検出装置
JP4236654B2 (ja) 動画像符号化装置及びその方法
JPH07112284B2 (ja) 予測符号化装置及び復号化装置
WO1993013626A1 (en) Image data coding method, image data decoding method, image data coding device, image data decoding device, and image recording medium
JP2007507128A (ja) 参照ピクチャのリフレッシュを遅延させて行うビデオ画像の符号化および復号化
US9036918B2 (en) Image processing apparatus and image processing method
JPH10336672A (ja) 符号化方式変換装置およびその動きベクトル検出方法
JP2006246277A (ja) 再符号化装置、再符号化方法、および再符号化用プログラム
KR101606931B1 (ko) 키프레임 정지영상 저장 및 재생 장치 및 그 동작 방법
JP2007067526A (ja) 画像処理装置
JP2009218965A (ja) 画像処理装置、それを搭載した撮像装置、および画像再生装置
JP2000261809A (ja) 画像特徴に応じた画像符号化装置
JPH1023420A (ja) 動き検出方法および動き検出装置
JP2830881B2 (ja) インタレース画像信号の予測符号化方法
WO2017104011A1 (ja) 画像符号化装置
JP3240737B2 (ja) 画像信号符号化方法、装置、復号化方法及び装置
JP2007324685A (ja) 動画像処理装置及び方法
JP2010239230A (ja) 画像符号化装置
JP3645249B2 (ja) 電子スチルカメラ
JP6867763B2 (ja) 符号化装置及びプログラム

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent
MM4A Annulment or lapse of patent due to non-payment of fees