TWI324338B - Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus - Google Patents

Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus Download PDF

Info

Publication number
TWI324338B
TWI324338B TW94113458A TW94113458A TWI324338B TW I324338 B TWI324338 B TW I324338B TW 94113458 A TW94113458 A TW 94113458A TW 94113458 A TW94113458 A TW 94113458A TW I324338 B TWI324338 B TW I324338B
Authority
TW
Taiwan
Prior art keywords
image
information
images
unit
random access
Prior art date
Application number
TW94113458A
Other languages
English (en)
Other versions
TW200601281A (en
Inventor
Tadamasa Toma
Shinya Kadono
Tomoyuki Okada
Hiroshi Yahata
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW200601281A publication Critical patent/TW200601281A/zh
Application granted granted Critical
Publication of TWI324338B publication Critical patent/TWI324338B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4332Content storage operation, e.g. storage operation in response to a pause request, caching operations by placing content in organized collections, e.g. local EPG data repository
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/85406Content authoring involving a specific file format, e.g. MP4 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • H04N5/783Adaptations for reproducing at a rate different from the recording rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

九、發明說明: 【發明所屬 發明領域 之於—種產生編碼動晝串流褒置以及其類似 尤其疋關於-種產生串流之裝置及其類似裝置, 而特技播放(例如,跳 * 心土、 哪播放又速播放、反向播放以及其 類似者)可於其上被進行。 【先前技冬好】 發明背景 最近’多媒體時代已來到,其中聲音、圖像以及其他 像素值被整合於-媒體,並且f見的資訊㈣,如_於 報紙、雜諸、TV、收音機以及電話的通訊卫具被認為是多 媒體目標。一般,多媒體不僅僅是一種文字,而同時也是 圖示、聲音並且特別是圖像的同時表示之形式。為了處理 上述之習見的資訊媒體為多媒體,需要數位地表示該資訊。 但是’直接數位地使用上述習見的資訊媒體以處理龐 大數量的資訊是不切實際的,因為,當如數位資料量計算 上述之各資訊媒體資料量時,每字元之資料量是〗至2位元 組而同時每秒聲音資料量是不少於64K位元(電話語音品質) 且每秒動晝資料量是不少於100M位元(目前TV接收品 質)。例如,由於64kbps至1.5Mbps發送速率的整合服務數 位網路(ISDN),TV電話早已成為商業上實用,但是,仍不 可能發送使用ISDN之TV攝影機之動晝。 那是為什麼資訊壓縮技術是必須的。例如’國際電信 聯盟-電信標準化部門(ITU-T)推薦動畫壓縮技術標準H.261 或乩263,以供使用於TV電話中。同時,使用MPEG-1標準 之貢訊壓縮技術’也可將影像資訊與聲音資訊一起儲存於 一般之音樂CD(小型碟片)中。 此處,動畫專家團隊(MPEG)是數位地壓縮動晝信號之 一國際標準’並且已被ISO/IEC(國際標準化機構/國際工程 集團)所標準化。MPEG-1是一種標準’其壓縮動畫信號下 至1.5Mbps ’亦即’壓縮TV信號資訊至大約為百分之一。 同時,滿足MPEG-1標準之品質是媒體位準,其可以大約為 1.5Mbps之發送率而被實現。MpEG_2因此被標準化,以便 滿足較尚圖像品質的需要,並且其壓縮動晝信號為2至 15Mbps。目前,工作團隊(is〇/iecjtc1/SC29/wgu),其 將MPEG-1和MPEG-2標準化,已具有較高壓縮率的標準化 MPEG-4。MPEG-4標準⑴達成較高於那些MpEG1標準和 MPEG-2標準的壓縮率’(ii)能夠依據物件接著物件方式而 編碼、解碼且進行操作,並且(iii)實現這多媒體年代所必須 的新功能。MPEG-4標準之啟始目的是標準化具有低位元率 之圖像編碼方法,但是該目的被延伸至具有高位元率的交 錯圖像之一般目的編碼方法。其後,IS〇/m(^〇ITU_T,組 合地,將MPEG-4 AVC(先進視訊編碼)標準化作為具有高壓 縮率之圖像下-代圖像編碼方法。這將預估地被使用於下 一代光碟相關裝置中或用於機動式终端之廣播中。 -般,於動畫編碼中,資訊數量藉由減低時間和空間 的冗餘量而被壓縮。於針對降低時間冗餘量的框間圖像預 2碼,移動估計以及預估圖像產生參考—前向圖像或— 而㈣塊㈣塊方式而被進行,且編碼被進行於 1 亥被獲得的預估圖像和該將被編碼的圖像之間的差量數 ^在此,於此處被使狀“圖像,,是代表-個圖像之稱啤。 ==圖像中’一圖像表示—像框,但是於一交錯式 Ώ像中,其表示一像框或—傻揚 -_ , 哲。上述之“交錯式圖像,,表 ==由具有少量的時間遲滞量之二個像場所構成。 像碼和料處理程料,可能處理如兩個 像%之像框,或於像框中 或像場接著像場方式纽。4之像轉著像框方式 供用於進行框内預估編碼而不必參考任何參考圖像之 圖像被稱為框内編碼圖像(1 / 固像)问時,僅參考一組圖像 =間預估編碼之圖像被稱為預估 =稱為雙預估性編·像(Β圖像)。 被選擇作為之-前向圖像和-反向圖像的任 :圖像。此二组參考圖像可依據區塊接著區塊之方 式被指定,肺塊Μ糾解碼之基本單元。料參考圖 像彼此如Τ所示地被區分:於編碼位元串流中Μ所述之 參考圖像被稱為第-參考圖像,且稍後所述之其他參考圖 像破稱為第二參考圖像。注意到,此參考圖像必須已先前 地被編碼或被解碼錢編碼或料Ρ®像和Β圖像。 移動補償框間預估編碼被使用於ρ圖像和Β圖像之編 種框内預估編碼方法。移動補償是利用估計各圖像區 移動數量(之後被稱為移動向量)以及利用考虏到哆二鬼, 量而進行預估編碼以改善預估精確性且降低資料量向 法。例如,資料量藉由估計將被編碼之圖像的移動方 及藉由編碼在被移位各移動向量數量的各預估數值和里M 前將被編碼之圖像之間的各預估殘餘值而被降低。於這= 法之情況中,因為移動向量資訊是解碼所需要的,移= 量同時也被編碼’且被記錄或被發送。 ° 移動向量依據巨區塊接巨區塊之方式而被估計。” 確地說,移動向量藉由固定將被編碼之圖像的巨區塊、移 動在搜尋範圍内之參考圖像巨區塊、以及尋得最接近標準 區塊之參考區塊的位置而被估計。 第1A和測分別地是習見MPEG_2串流之結構圖。如 於第卿之展示,酬叫流具有如同將於下面被說明之 化匕級體系結構。-串流是由—圖像族群(之後被稱為G〇p) 所構成。於編碼處理中使用G〇p作為基本單元使得能夠編 輯動里或進行隨機存取。一G0P是由工圖像、P圖像以 及B圖像所構成。-串流,_G〇p以及—圖像進—步地包含 指不早元邊界之同步信號(syne)以及指示共用於該單元中 之資料的檔頭,料單元於此處分職是―串流、一⑽ 以及一圖像。 M ^ 2B圖刀別地展示指示如何進行被使用於 =巾之框關像職編刺_。《找角陰影圖 像疋將被其他圖像所參考_些圖像4第湖之展示, 於MPEG-2之預估編碼中,p圖像(p〇、p6、P9、P12以及P15) 可參考僅一個別的圖像,其被選擇以作為顯示時之一即4 地前向I圖像或P圖像。同時,B圖像(Bl、B2、B4、B5、B7、 B8、BIO、Bll、、B14、B16、B17、B19、以及B20) 可參考二組圖像,其被選擇以作為一即時地前向I圖像或P 圖像以及一即時地反向丨圖像或P圖像之組合。進一步地, 將被安置於串流中之圖像順序被決定。I圖像和一P圖像以 顯示時間順序被安置,並且各B圖像即時地被安置在將即時 地在B圖像之後或即時地在一p圖像之後被顯示之一I圖像 之後。如一G〇p結構範例,如第2B圖之展示’自13至B14 之圖像被群集成為一個別的GOP。 第3 A圖是一 MPEG-4 AVC串流之、结構圖。沒有等於 MPEG-4 AVC中之一G0P的概念。但是,因為可依據一可被 解碼之特別圖像而不必依據其他圖像利用切割資料而構成 等於一 GOP之隨機可存取單元,之後該單元將被稱為 RAU(隨機存取單元)。換言之,一隨機存取單元RAU是一 編碼圖像族群,其開始於可被解碼之一框内編碼圖像而不 必取決於任何圖像。 接著,下面將說明存取單元,其是處理一串流之—基 本單元(之後將簡單地被稱為AU”AU是用以儲存等於—個 圖像之編碼資料的單元,並且包含一參數集PS、分切資料 以及其類似者。有二種型式之參數集PS。其中之一 β θ & 疋圖像 參數集PPS(此後簡單地被稱為PPS),其是等於各圖像檐頭 之資料》另一者是序列參數集SPS(此後簡單地被稱為
Sps) ’其是等於被包含於GOP之一單元中或更多的MPEG-2 中之標頭。一SPS包含最大數量的參考圖像、圖像大小以及 其類似者。另一方面,一PPS包含一可變長度編碼型式、量 化步驟之啟始數值、參考圖像數量以及其類似者。各個圖 像被指定一確認符’指示上述之PPS和SPS何者被參考。同 時,一像框數目FN是一辨識數目,其用以辨識被包含於分 切資料中之圖像。注意到,一序列開始於一特別的圖像, 在其中解碼需要的所有狀態被重置,將如下面之說明,並 且其是由一群圖像所構成,該群圖像開始於一特別的圖像 並且結束於被安置在即時地下一個特別圖像之前的一圖 像。 於MPEG-4AVC中有二種型式之I圖像。它們是即時解 碼器更新(IDR)以及其餘者。一IDr圖像是一種I圖像,其可 依解碼順序解碼在ID R圖像之後被安置的所有圖像,而不必 參考依解碼順序在IDR圖像之前被安置的圖像,換言之,其 是一種I圖像’在其中解碼所需的狀態被重置。一IDR圖像 對應至MPEG-2相關之GOP的頂部I圖像。MPEG-4 AVC中之 —序列開始於一IDR圖像。於ϊ圖像不是一IDR圖像之情況 中,依解碼順序被安置在I圖像之後的一圖像可能相關於依 20解碼順序被安置在I圖像之前的圖像。該分別的圖像型式將 在下面被定義。一IDR圖像和―丨圖像是僅由I分切圖像所構 成之圖像。一P圖像是可以由p分切圖像和I分切圖像所構成 之圖像。一B圖像是可以由B分切圖像、P分切圖像以及I分 切圖像所構成之圖像。注意到,圖像之分切圖像被儲 10 存於一NAL單元中,其型式是不同於其中非IDR圖像之分切 圖像被儲存的NAL單元。此處,一NAL單元是一子圖像單 元。 於MPEG-4 AVC之一AU中,不僅是包含用於解碼所需 之資料’同時也包含AU之增補資訊及邊緣資訊。此增補資 訊被稱為增補強化資訊(SEI),並且其不是用於解碼分切資 料之所需。所有的資料,例如,一參數集PS、分切資料、 —SEI皆被儲存於網路提取層(Nal)單元中,亦即,NALU。 一NAL單元是由一檔頭和一酬載所構成。一檔頭包含一個 欄’其指示將被儲存之資料型式(此後稱為NAL單元型式)。 NAL單元型式數值分別地對於資料型式,例如,一分切資 料或一SEI而被定義。參考此NAL單元型式數值使能夠辨識 將被儲存於NAL單元中之資料型式❶NAL單元檔頭包含被 稱為nal_j:ef一idc之欄。一nal_ref_idc欄被定義為一個2-位元 攔並且依據NAL單元型式而採用〇、1或更多之數值。例如, 一 SPS或PPS之NAL單元採用1或更多之數值。於此一分切 之NAL單元情況中,供其他分切參考之一分切採用1或更多 之數值,而不供參考之分切則採用〇之數值。同時,5扭之 NAL單元也經常採用〇之數值。 一個或多個SEI訊息可被儲存於一SEI之NAL單元中。 一SEI訊息是由一檔頭和一酬載所構成,並且將被儲存於該 酬載中之資訊的型式藉由該檔頭中指示之一 SEI訊息的型 式而被辨識。此後,解碼一AU意指解碼一AU中之分切資 料,並且顯示一 AU意指顯示該Αϋ中其分切資料之解碼結 此處,因為一NAL單元不包含用以辨識一nal單元邊 緣之資訊,可能在儲存一NAL單元之時增加邊緣資訊至各 NAL單元之頂部作為一Au。當處理一MPEG-2傳輸串流(TS) 或一MPEG-2節目串流(PS)中之一MPEG-4 AVC串流時,如 所展示之3位元組的0x000001開始編碼前綴被添加至一 NAL單元頂部。同時,也定義指示一AU邊緣之一NAL單元 必須被塞進入一 MPEG-2 TS或PS中之一MJ頂部,此一 Αϋ 被稱為存取單元定界符號。 習見地,各種類似於這相關動畫編碼之技術已經被提 出(例如’參看專利文件”。 專利文件1 :日本公開專利序號2003_18549公告案。 第4圖是習見之動畫編碼裝置的方塊圖。 動晝編碼裝置1是一種裝置,其輸出一編碼串流Str,該 串流Str’經由壓縮編碼,藉由轉換一將被輸入之輸入視訊 信號Vin成為一可變長度編碼串流或其類似者之位元串流 而被獲得。該動畫編碼裝置包含—預估結構決定單元 PTYPE、-移動向量估計單元ME、—移動補償單元mc、 -減算單元Sub、-正交轉換單π、—量化單元q、一反 向量化單元IQ、-反向正交轉換單元Ιτ、—加算單元墟、 一圖像記憶體PicMem、_開關以及—可變長度編碼單元 VLC。 輸入視訊信號Vin被輪進入減算單元灿以及該移動向 量估計單元ME 1減算單元Sub計算在該被輸人之輸入視 訊信號Vin和預估圖像之間的差量數值,並且將其輪出至該 正交轉換單元。該正交轉換單元T轉換該差量數值成為頻率 係數,並且將其輸出至量化單元Q。該量化單元Q進行關於 該被輸入之頻率係數的量化,並且輸出一量化數值(^0# 至該可變長度編蝎單元。 反向量化單元IQ進行關於該量化數值Qc〇efi反向量 化以重建該頻率係數,並且將其輸出至該反向正交轉換單 πϊτ。該反向正交轉換單元IT進行反向頻率轉換以轉換該 頻率係數成為一像素差量數值,並且將其輸出至加算單元 Add。該加算單元Add添加該像素差量數值至將自該移動補 4貝單元MC被輸出之預估圖像以產生一被解碼之圖像。當該 被解碼圖像之儲存被指示時,該開關§”被導通,並且該被 解碼之圖像被儲存於該圖像記憶體picMem中。 另一方面’該移動向量估計單元ME ’於其中一輸入視 讯k號Vin依據巨區塊接著巨區塊方式被輸入,搜尋被儲存 於圖像記憶體PicMem中之該被解碼之圖像,並且估計最接 近該輪入圖像信號之圖像區域,且因此決定指示該位置之 移動向量MV。移動向量估計依據區塊接著區塊方式被進 行’忒區塊是一巨區塊之被分割部份。因為多數圖像可在 這%被使用作為參考圖像’用以依據區塊接著區塊方式而 才曰定將供參考之圖像的辨識數目(相對指標)是所需要的。其 可此藉由計算被相對指標所指示之圖像數目而指定參考圖 像,此圖像數目被指定至圖像記憶體picMem之分別圖像 中。 1324338 移動補償單元MC自被儲存於該圖像記憶體PicMem中 之被解碼圖像選擇圖像區域,其是最佳之預估圖像。 預估結構決定單元ptype指示該移動向量估計單元me 以及該於其中一隨機存取單元開始圖像RAUin指示該隨機 5存取單兀RAU開始於目前圖像之情況中,移動補償單元厘(: 以使用其圖像型式Ptype而如可隨機地存取之特別圖像的 目標圖像上進行框内圖像編碼,並且指示該可變長度編碼 單元VLC編碼該圖像型式ptype。 可變長度編碼單元VLC依量化數值Qcoef、該相對指標 10 Index、該圖像型式Ptype以及該移動向量厘¥以進行可變長 度編碼而產生一編碼串流Str。 第5圖是習見的動畫解碼裝置2之方塊圖。這動畫解碼 裝置2包含一可變長度解碼單元vld、一圖像記憶體 PicMem、一移動補償單元厘(:、一加算單元Add、一反向正 15交轉換單元1T以及一反向量化單元IQ。應注意到,於圖形 中,14些處理單元,其進行相同於如第4圖展示之方塊圖的 習見動畫編碼裝置中那些處理單元之操作,將被指定相同 參考數目,並且它們之說明將被省略。 可變長度解碼單元VLD解碼一被編碼之串流Str,並且 20輸出量化數值Qcoef'相對指標Index、圖像型式卩啡⑶及 移動向里ΜV。a玄里化數值Qcoef、該相對指標in(jex以及該 移動向量MV分別地被輸進入圖像記憶體picMem、移動補 償單元MC以及反向量化單元IQ中,並且接著進行它們之解 碼處理。此習見動畫編碼裝置之操作已使用第4圖方塊圖被 14 說明》 隨機存取單元RAU展示解碼可被進行而開始於隨機存 取單元中之頂部AU。但是,因習見的MPEG-4 AVC串流允 許非常有彈性的預估結構,具有光碟或硬碟之儲存裝置不 5忐在變速播放或反向播放時獲得用以決定將被解碼或被顯 示之AU的資訊。 第6A和6B圖是AU之預估結構的範例。此處,一圖像 被儲存於各AU中。第6A圖是被使用於一 MPEG-2串流中之 AU的預估結構。圖形中之對角陰影圖像是供其他au參考 1〇的圖像。於ΜΡΕ〇-2中,P圖像(P4和P7)之AU可僅參考於被 選擇作為顯示時即時地前向〗圖像或p圖像之AU的個別au 而進行預估編碼。同時,B圖像(B1、B2、B3、B5以及B6) 之AU也可僅參考被選擇作為顯示時即時地前向τ圖像或p 圖像以及即時地反向Ϊ圖像或P圖像之AU組合的二組AU而 15進仃預估編碼。進一步地,將被安置於一串流中的圖像順 序如下所示地被預定:一〖圖像和P圖像之AU以顯示時間順 序被安置;且各B圖像之AU即時地被安置在I圖像或即時地 被安置在各B圖像之AU之後的該等P圖像之一圖像的AUi 後。因此,解碼可以下面的三種方式被進行:(1)所有的圖 20像被解碼;(2)僅I圖像和P圖像之AU被解碼且被顯示;以及 (3)僅I圖像之AU被解碼且被顯示。因此,下面三種型式的 播放可容易地被進行,其使用:(1)正常播放,(2)媒體速度 播放,以及(3)高速播放。 於MPEG-4 AVC中,其中B圖像之AU參考於B圖像之 15 1324338 AU的預估可被進行。第6B圖是一 MpEG4AVC串流中之預 估結構範例,並且B圖像之au(BH〇B3)參考該b圖像之 AU(B2)〇於這範例中,下面四種解碼或顯示型式可被實現·· (1)所有的圖像被解碼;(2)僅供參考之一j圖像、p圖像以及 5 B圖像的AU被解碼且被顯示;(3)僅一〗圖像和p圖像之八1]被 解碼且被顯示;(4)僅一I圖像之AU被解碼且被顯示。 此外,於該MPEG-4AVC中,一P圖像之AU可參考B圖 像之AU。如第7圖之展示,一p圖像(p7)2AU可參考B圖像 之AU(B2)。於此情況中,一p圖像(p7)之au可僅在b圖像之 10 AU(B2)被解碼之後被解碼。因此,下面三種型式的解碼或 顯示可被實現:(1)所有的圖像被解碼;(2)僅供參考之一工 圖像、P圖像以及B圖像之AU被解碼且被顯示;⑶僅一;[圖 像之AU被解碼且被顯示。 以此方式’因各種預估結構被允許於MPEg-4AVC中, 15分切資料之分析和預估結構之判斷必須被達成,以便了解 在AU之間的參考關係。這必須承受一個問題,將被解碼或 被顯不之AU不能依據一法則被決定,該法則是依據在不同 於MPEG-2情況中進行跳躍播放、變速播放以及反向播放時 之播放速率而被預定的法則。 20 【明内穷】 發明概要 本發明之一目的是提供(i)一動晝串流產生裝置、一動 畫編碼裝置以及—產生動畫串流之動晝多工裝置,該動晝 串流可進行特技播放,例如,跳躍播放、變速播放以及反 16 5 =放’即使在類似於允許彈性預估結構之
的編碼方法情況中亦然, °'4 AVC 動畫串流之類似裝置。 U —動畫解碼裝置和解碼此 為了達成上面說明之目的 置,產生包含構成—動畫之_的“二產生裝 增補資訊產生單元,其可操作以於機存取- 各個隨機存取單:取 10 單元’其藉由添加該增補資以及-串流產生 .., 貝Λ至各對應的隨機存取I ; rff· 生匕含該被產生之增補資訊和該等圖像法 隨機存取單元之頂邻,$ "丨L在各個 成夕矿由 個不必依據任何圖像而被解 碼之框内編像,並域增婦訊包含 = 機存取單元中之圖像以料枯躲姑匕3於各Ik 像特技播放被重播時指定將被解妈之 15 圖像的資訊。以此方式’在特技播放被進行於被包含於隨 機存取單元中的圖像之情況中’各個隨機存取單元RAU包 含指定將被解碼之圖像的資訊。參考在播放時之增補資訊 使其可能立即決定特技播放所需要的圖像,而不必分析— 複雜之預估結構。因此,可能進行特技播放,例如,變速 播放以及反向播放,即使在類似於各種預估結構被允許的 20 MPEG-4 AVC之蝙碼方法的情況中亦然。 此處,於本發明第一論點中,在動畫串流產生裝置中, 特技播放包含下列各項之至少一項:跳躍播放·,變速播放; 以及反向播放。同時,於本發明第二論點中,在動畫串流 產生裝置中,各圖像是由子圖像單元所構成,並且用以儲 17 存4增補I訊進人第—子圖像單元之串流產生單元是不同 於用以儲存各圖像之像素數值的第二子圖像單元。此時, 於本發明第二論點中,最好是,於該動畫串流產生裝置中, 各個隨機存取單认—個或多個圖像,並且該串流產生單 讀存騎補育訊進人被包含於各個隨機存取單元之頂 圖像中。 注意到,於本發明第四論點中,在動畫串流產生裝置 中,該增補資訊可包含指定以特定速率在各個隨機存取單 10 兀之播放時將被解碼之圖像的資訊。於本發明第四 中,在動畫争流產生裝置中,該增補資訊可包含指示依據 ^重^各軸存取單元之时優先順序資訊。於本發明 四=中’在動畫串流產生裝置中,該增補資訊可包含 ^所有被包含於各個隨機麵單元中的圖像之圖像 的貧讯片段,該資訊片段以對 式 15 置放。此處,於本發明第七論:中,在象 卜圖像型式包含一1圖像,於其中框内編碼裝置 P圖像,於其巾框間編财考每區狀 進订,- 區塊是編碼時的基本單元;一彔 ?進仃,該 20 〆圓像,於其中框間編碼 參考耗塊之—圖像㈣進行,該區塊是編碼 元,並且該參考B圖像是供另—圖像參考 土本早 參考關像,於其中框間編碼參考每區圖 行,該區塊是編碼時的基本單元象而破進 供另一圖像所參考之圖像。 轉參考B圖像是不 同時’於本發明第四論點中’於該動畫串流產生裝置 18 5 中,該增補資訊也可包含指示被包含於各個隨機存取單元 中所有圖像之圖像結構型式之資訊片段,該資訊片段以對 應於圖像解碼順序之順序而被置放。此處’至少一像場結 構和一像框結構被包含於各個圖像結構中。此外,於一圖 像具有一像框結構之情況中,指示該圖像是否具有等於二 個圖像之—顯示像場或該圖像是否具有等於三個圖像之一 顯示像場的資訊可被包含於各該等圖像結構型式中。 10 同時’於本發明第十論點中,於該動晝串流產生裝置 中,該圖像結構型式也可進一步地包含,於該圖像具有一 像框結構之情況中,具有指示資訊之一像框結構,其中該 貝訊指示一圖像是否具有等於二個圖像之一顯示像場或該 圖像是否具有等於三個圖像之一顯示像場。更明確地說, 於本發明第一論點中,該動晝串流產生裝置可進一步地包 3 一序列參數集加算單元,其用以添加關於一個或多個圖 15 像之一群參數的序列參數集至各個隨機存取單元中,於該 裝置中,該序列開始於一特別圖像,在其中解碼所需的所 有狀態被重置,並且結束於即時地被安置在下—個特別圖 像之前的—圖像。以此方式…序列參數集不僅可展示序 20 列資訊,但同時也可被使用作為隨機存取單元之邊緣資 汛。此處,一序列開始於一特別圖像, 任其中解碼所需的 斤有狀態被重置,並且其是由多個圖像所構成,其是開始 於^特別的圖似結束於即時地被安置在下—個特別圖像 之前的圖像。 注意到,本發明不僅可被實現為上述<動畫串流產生 19 1324338 裝置,同時也可被實現為具有除了下列這些單元之外的編 碼單元之動畫編碼裝置’這些單元如將—被編碼之串流封 包化且將該被編碼之串流與增補資訊一起多工化的一動畫 多工裝置,以及如一動畫解碼裝置,其解碼此一被編碼之 5串流且進行該被編碼之串流的特技播放。進一步地,本發 明同時也可被實現如包含分別地對應至上述說明之各裝置 中的處理單元之步驟的方法’如一將被電腦執行之程式’ 如藉由動畫串流產生裝置而被產生之一資料串流,如記錄 媒體,例如,電腦-可讀取CD-ROM,並且進一步地,如半 10 導體1C,例如,LSI。 如本發明上述之論點,將在特技播放時’例如’變速 播放和反向播放’被解碼之AU ’可藉由參考於隨機存取單 元RAU之頂部AU中一特定NAL單元而被決定。因此’一具 有傑出特技播放功能之動畫解碼裝置可容易地被貫現# 15 且因此本發明是非常實用的。 關於本申請技術背景之進一步資訊 關於建檔於2004年4月28日之日本專利申請序& 2004-134212案的揭示,其所包含之說明、圖形以及申請專 利範圍將整體地配合此處以為參考。 20 建檔於2004年6月2日之日本專利申請序5虎 2004-165005案的揭示,其所包含之說明、圖形以及申請專 利範圍將整體地配合此處以為參考。 建檔於2004年8月31日之日本專利申請序號 2004-251871案的揭示,其所包含之說明、圖形以及申請專 20 1324338 利範圍將整體地配合此處以為參考。 圖式簡單說明 本發明這些以及其他目的、優點和特點將配合下面展 示本發明特定實施例之相關附圖的說明而成為更明顯。於 5 圖形中: 第1A和1B圖是分別地展示背景技術之MPEG-2串流結 構的圖形, 第2A和2B圖是分別地展示背景技術之MPEG-2 GOP結 構的圖形, 10 第3A和3B圖是分別地展示背景技術之MPEG-4串流結 構的圖形, 第4圖是展示習見編碼裝置結構之方塊圖; 第5圖是展示習見解碼裝置結構之方塊圖; 第6A和6B圖是分別地展示習見MPEG-4 AVC串流之預 15 估結構範例的圖形; 第7圖是展示習見MPEG-4 AVC串流之另一預估結構範 例的圖形; 第8A和8B圖是分別地展示MPEG-4 AVC串流結構之圖 形; 20 第9A至9D圖是展示隨機存取單元RAU中將被解碼之 AU的第一範例圖形; 第10A至10D圖是展示隨機存取單元RAU中將被解碼 之AU的第二範例圖形; 第11A至11C圖是展示隨機存取單元RAU中將被解碼 21 之AU的第三範例圖形; 第12A至12F圖是展示指定在隨機存取單元RAU中將 被解碼之AU的方法之範例圖形; 第13A圖是展示一指示變速播放資訊的列表之語法範 例圖形,且第13B圖是展示一資料儲存單元之圖形; 第14圖是指示變速播放資訊之列表的延伸範例圖形; 第15A至15C圖是展示隨機存取單元RAU中I圖像和p 圖像的AU作為變速播放資訊之範例圖形; 第16A至16C圖是在使用AU之優先順序作為變速播放 資訊時其中緩衝器延遲時間被使用作為優先順序指示器之 範例圖形; 第17A和17B圖是分別地展示共存於分別的RAU中之 像框結構AU和像場結構AU的範例之圖形;第17C圖是一種 圖形’其展示RAU中各AU之結構之第一映圖(RAU_mapl) 的語法範例;第HD圖是一種圖形,其展示第17B圖之RAU 的RAU_mapl ;第17E圖是一種圖形,其展示關於第17B圖 之隨機存取單元RAU的RAU_map ;第17F圖是一種圖形, 其展示一像場組對之各個像框或各個圖像的編碼型式之第 二映圖(RAU一map2)之語法範例; 第18A圖至第18C圖是展示另一映圖範例作為播放資 訊之圖形; 第19圖是用以指示隨機存取單元RAU中邊緣資訊之方 法的圖形; 第20A圖和第20B圖是展示隨機存取單元rAu中之圖 1324338 像的預估結構範例之圖形; 第21圖是展示本發明之動畫編碼裝置結構的方塊圖; 第22圖是一動畫編碼方法之流程圖; 第23圖是展示本發明一動畫多工裝置結構之方塊圖; 5 第24A圖和第24B圖是展示支援資訊HLP範例内容之圖 .形; 第25圖是展示一 NAL單元範例之圖形,於其中,特技 播放資訊被儲存於該支援資訊HLP中; • 第26圖是展示動畫多工裝置操作之流程圖; 10 第27圖是展示本發明動晝解碼裝置結構之方塊圖; 第28圖是習見圖像解碼方法的流程圖; 第29圖是決定將以本發明動畫解碼方法被解碼之AU 的流程圖; 第30圖是一種流程圖,其展示在將被解碼之AU不匹配 15 於將以本發明動畫解碼方法被顯示之AU的情況中所被進 行之處理; ® 第31圖是展示HD-DVD之資料階系的圖形; 第32圖是HD-DVD上之邏輯空間的結構圖; 第33圖是VOB資訊檔案之結構圖; 20 第34圖是時間映圖之圖形; 第35圖是播放列表檔案之結構圖; 第36圖是對應於播放列表之程式檔案的結構圖; 第37圖是展示整體BD碟片之管理資訊檔案的結構圖; 第38圖是用以記錄一廣域事件處理器之檔案的結構 23 圖; 第39圖是展示HD-DVD播放器概要之方塊圖;以及 第40A至40C圖之圖形展示用以儲存實現本發明動畫 編碼方法和動晝解碼方法之程式的記錄媒體。 5 【實施方式】 實行本發明之最佳模式 下面將參考圖形而說明本發明之實施例。 (AVC串流結構) 首先,藉由本發明之動畫串流產生裝置、動晝編碼裝 ίο置以及動晝多工裝置而產生之AVC串流結構換言之將 被輸入本發明動畫解碼裝置中之AVC串流,將被說明。 第8A圖和第8B圖分別地展示本發明AVC串流結構。注 意到’將被添加至NAL單元頂部之邊緣資訊未被展示於圖 形中。該AVC串流不同於被添加特技播放資訊之習見的 15 AVC串流,該特技播放資訊指示將在特技播放(例如,跳躍 播放、變速播放以及反向播放)時被解碼之Al^該特技播放 資訊被儲存於用以儲存播放資訊之NAL單元中(第8八圖)。 於MPEG-4 AVC中’在將被儲存資訊以及特定NAL單元之 NAL單元型式之間的關係可藉由應用而被設定。更明確地 2〇 說,數值〇和24至31可被使用’並且這些NAL單元型式被稱 為使用者可設定之NAL單元型式。結果,特技播放資訊被 儲存於具有此類使用者可設定NAL單元型式之NAL單元 中。此處’在其中特定NAL單元型式被保留以便儲存除了 特技播放資訊之外的資訊之情況中,不同於該NAL單元型 24 式的MAL單元型式被指定至該特技播放資訊。該特技播放 資訊之NAL單元被儲存於隨機存取單元RAU之頂部AU 中。此一NAL早元即時地被安置在一pps NAL單元之後, 如果其呈現的話,在一AU中,但是其可能被安置於另一位 置中,只要該順序滿足MPEG-4 AVC或另一標準之需要。同 時,於不可能詮釋特技播放資訊之NAL單元的情況中,NAL 單元之資料也可被躍過並且自下一個NAL單元頂部而重新 開始解碼。因此’即使不能詮釋特技播放資訊之NAL單元 的终端機亦可進行解碼處理而不至於失效。 注意到,此一特技播放資訊之NAL單元可能不被包含 於隨機存取單元RAU之頂部AU中,但是可被包含於另一 AU中,例如’最後的AU中。同時,此特技播放資訊之一 NAL單元也可被包含於構成一隨機存取單元RAU之各個 AU中。 第9圖至第Π圖展示在變速播放時將被解碼之au的範 例。第9A圖展示AU之顯示順序。此處,該對角陰影之AU 是供其他AU參考的那些AU,並且箭號展示被參考之圖 像。負的參考數目被指定至將在10之前被顯示的AU,並且 正的參考數目被指定至將在B15之後被顯示的AU。第9B圖 展示第9A圖所展示之AU的解碼順序,並且1〇至bu構成一 隨機存取單元RAU。此時,1〇、-B14、P4、B2、P8、P6、 P12以及B10被解碼,以便進行雙倍速度播放(第9C圖),而 同時I0、P4、P8以及P12被解碼,以便進行四倍速度播放(第 9D圖)。第9C和9D圖展示具有一*符號之AU,其將在雙重 1324338 速度播放和四倍速度播放之時被解碼,並且這些資訊片段 被儲存於特技播放資訊之NAL單元中。於第1()A圖至第 圖之範例中,依解碼順序自1〇至B11之圖像構成—隨機存取 单元RAU。此處,1〇、_b13 ' P3、Bl、P6、B4、P9、B7、 5 P12以及B10被解碼,以便進行1·5倍速度播放,而同時1〇、 Ρ3、Ρ6、Ρ9和Ρ12被解碼,以便進行三倍速度播放。同時, 於第11Α至11C圖之範例中,1〇、Ρ3、Ρ6、ρ9以及Ρ12也被 解碼’以便進行三倍的速度播放。 此處,播放速率是不需要精球的,因為它們被說明作 10為播放速率之引導。例如,於第11C圖之範例中,於所有 AU被展示如將以三倍速度播放時被解碼之aυ的情況中, 該速度是自表示式:16+5中所被獲得的3.2倍速度,換言 之’其不是精確地為三倍速度。同時’在Μ倍速度之播放 時’於被展示為特技播放資訊之播放速率是超過Μ之最小 15 數值是Ν的情況中’其也可能將需以Ν倍速度播放時被解碼 之AU解碼,並且決定其餘的AU應該依據解碼裝置之製作 而如何被解碼。同時,其也可能於播放速率是快的情況中, 安排高優先順序於需要被解碼之AU,並且依據該優先順序 而決定將被解碼之AU。 20 注意到,—些AU,在變速播放時將被解碼之AU之中, 可能不被顯示。例如’第Ν個AU在雙重速度播放時被顯示, 但是第Μ個AU則不被顯示。在此時,於其中需要解碼第μ 個AU以便解碼第Ν個AU之情況中,第Μ個AU在雙重速度播 放時被解碼,但是不被顯示。 26 接著,將參考第12A至12F圖以說明指定將在變速播放 時被解碼之AU的方法。第12A至12F圖展示如第9圖指定之 於相同隨機存取單元RAU中將被解碼的AU之範例。如第 12D圖之展示’ Ι〇、·Β14、η、B2、P8、P6、P12、B10在 雙倍速度播放時被解碼。當以隨機存取單元RAU之頂部AU 開始什數AU時,這些AU是第一、第二 '第五、第六、第 九、第十、第十三以及第十四個AU。以此方式,可能藉由 展示隨機存取單元RAU中之AU序數而唯一地指定將在變 速播放時被解碼之AU。一存取單元定界符號無疑地藉由 MPEG-2輸送串流(TS)而在多工化一 AVe串流之時被置放 於AU頂部。當在變速播放時獲得將被解碼之料時, 該存取單元定界符號依序地被搜尋以了解AU邊界。這尋找 處理方法消除分析NAL單元之酬載,例如,分切資料,之 需求’並且因此其是更容易的。 /主思到’藉由決定供其他AU(例如,一I圖像和p圖像之 AU)所參考的au(此被參考之AU被稱為參考AU)在變速播 放時間被解碼以及藉由指定隨機存取單元RAU中參考AU 之序數,可能指定將被解碼之AU。於第12B圖之隨機存取 單元RAU中’如第12C圖之展示,1〇、_b14、P4、B2、P8、 P6、P12、B10是參考AU。同時,在雙倍速度播放時,1〇、 •B14、P4、B2、P8、P6、P12、B10也被解碼,但是當依參 考AU順序指示這些au時,它們對應於第一、第二、第三、 第四、第五、第六、第七和第八參考AU,如第12F圖之展 示。一AU是否為一參考AU可藉由參考至分切部分中Nal 1324338 單元檔頭的一特定攔而被判定。更明確地說,於nal__ref_idc 攔之數值不是0之情況中,則AU是一參考AU。注意到,將 被解碼之一參考AU可以依據一像框數目被指定,因為可依 據一像框數目而辨識一參考AU。 5 進一步地,可能藉由指定等於自隨機存取單元RAU之 頂部A U的開始位置至將被解碼之A U的開始位置之位元組 長度之偏移數值而指定將被解碼之AU。例如,於第12A至 12F圖中,於其中1〇開始於遠離串流頂部10000位元組之位 置並且P4開始於遠離P4有20000位元組位置之情況中,則於 10 P4之偏移數值是自表示式:20000-10000被獲得的1〇〇〇〇位 元組。於其中一多工化之串流被使用於一MPEG 2 TS之情 况中’可能指定包含一 TS封裝封包或一 PES封裝封包(被封 包化之基本串流)的檔頭經常資訊之一偏移數值,或可能在 藉由利用應用而進行資料填塞之時而指定包含這些的偏移 15數值。同時,也可能藉由一像框數FN而指定一Αυ-β 注意到’於使用於MPEG-2TS中被多工化之串流的情況 中,可能依據TS封包數而指定AU,其是自⑴用以儲存供辨 識包含將被解碼之AU頂部資料或隨機存取單元RAU頂部 資料的一TS封包之索引數目和位址資訊的丁$封包至(⑴目 前之TS封包。此處,可能使用被用於藍碟⑽)的記錄格式 之來源封包而取代TS封包上之資訊。來源封包藉由添加— 包含TS封包時間資訊 '複製控制資訊以及其類似者之4位 元組檔頭至TS封包而被獲得》 第13A圖是指示用於變速播放資訊之列表的語法範 28 1324338 例。於該語法中,num_pic_in_RAU展示構成一隨機存取單 元RAU之AU數目,num_speed展示將被解碼之AU的播放速 率數目,play_speed展示播放速率 ,num_dec_pic展示以 play_speed所展示之播放速率重播時將被解碼之AU數目, 5 dec_pic展示於計數開始於隨機存取單元RAU中之頂部AU 的AU情況中將被解碼之AU序數。第13B圖是一範例,其儲 存在雙倍速度播放和四倍速度播放時,第9A至9D圖展示之 隨機存取單元RAU中將被解碼之AU上的資訊。注意到, num-pic_in_R AU被使用依據將被解碼之AU數和隨機存取 10 單元RAU中之AU總數而計算一確切的播放速率時間或於 序列中以隨機存取單元RAU為基礎而躍過。但是, num_pic_in_RAU可以被省略,因為相同資訊可利用尋找隨 機存取單元RAU之頂部AU而被獲得。同時,指示列表大小 之棚也可被添加至該列表中。注意到,於第i3A圖之語法範 15例中,將被解碼之AU的序數,自隨機存取單元RAU之頂部 開始計數,直接地被展示,但是是否有需要解碼各個AU, 則可能藉由導通或中斷對應於各個AU的位元而被展示。例 如’一隨機存取單元RAU是由第9A至9D圖範例之16個AU 所構成,當排定1位元至一個AU時則需要16位元。在四倍 20速度播放時,所展示之第一、第五 '第九以及第十三個AU 利用排定被表示為〇bl〇〇〇l〇〇〇l〇〇〇1〇〇〇(〇b展示一個二進 位數)之16位元資訊而被解碼。此處,頂部位元和最後位元 分別地對應至隨機存取單元RAU之頂部au和最後AU。 注意到,第13A圖之語法範例中之列表大小是可變的。 29 於構成隨機存取單元RAU之AU數最大數值及num_speed 最大數值被規定之情況中,該列表尺寸之最大數值被決 疋°結果’可能固定該列表尺寸於該被決定之最大數值, 並且’於變速播放之資訊大小不達到該最大數值的情況 中’可此進行填塞。以此方式固定列表尺寸,使得當獲得 變速播放資訊時可經常獲得@定尺寸之資料,其能夠加速 4資訊獲得處理程序。注意到,列表尺寸或用以儲存該列 表之NAL單元大小被展示如管理資訊。同時,也可能預定 用以儲存特技播放資訊之NAL單元大小,並且’於資訊不 能被儲存於一個別的NAL單元之情況中,可能分別地儲存 供用於變速播放之資訊進入多數的NAL單元中。在此時, 填塞被進行於最後NAL單元的酬載上,因而NAL單元大小 成為預定之大小。同時,一些預定的數值也被決定作為列 表尺寸數值,並且指示預定列表尺寸數值的指標可被展示 於列表中或使用其應用之管理資訊。 同時,也可能展示取代列表上所有以各播放速率將被 解碼的AU之差量資訊。如在M(<N)倍速度播放時之資訊, 除了將在N倍速度播放時被解碼的AU之外,僅需要將被解 碼之AU被展示。於第13B圖範例中,除了將在四倍速度播 放時被解碼的AU之外,因第二、第六、第十和第十四個au 在雙倍速度播放時被解碼’可能僅展示第二、第六、第十 以及第十四個AU作為雙倍速度播放之資訊。 注意到,上面之說明展示需要在變速播放之時被解碼 的AU,但是進一步地,可能展示指示需要被解碼之八1;的 1324338 顯示順序之資訊。例如,第9A至9D圖展示以雙倍速度播放 和四倍速度播放時之資訊範例,但是此處是以三倍速率重 播這隨機存取單元RAU之範例。在雙倍速度播放之時被顯 示的顯示部份AU ’除了在四倍速度播放時被顯示的AU之 5 外,能夠實現三倍速度播放。此處’當考慮一種情況,其 中當多於一個AU在四倍速度播放時被顯示的10和P4之間 被顯示時,供用於雙倍速度播放之資訊展示其候補者是 -B14、B2、B6以及B10。但是’這四個AU之顯示順序僅可 於其中分切之檔頭資訊被分析的情況中被獲得。此處,因 10 顯示順序上之資訊展示僅-B14在10和P4之間被顯示,可能 決定-B14被解碼。第14圖是指示顯示順序上之一語法資訊 之範例,並且其藉由添加顯示順序上之資訊至第13A圖之語 法上被獲得。此處’ Pts_dts_flag展示將在播放速率被解碼 之AU的解碼順序是否匹配於該等AU之顯示順序,並且僅 15 於該解碼順序不匹配該顯示順序之情況中,顯示順序之資 訊被展示於一 display_order欄中。 注意到,在不利用變速播放資訊被展示之播放速率的 播放情況中,可能依據終端機預定之規則而決定將被解瑀 之AU和將被顯示之AU。例如,於第9圖在三倍速度播放1 20 範例情況中’除了將在四倍速度播放時被顯示的AU之外’ 可能顯示10、B3、B6、B9以及P12,以取代顯示在雙倍速 度播放時將被顯示之部份AU。此處’關於B圖像,參考 之B圖像可以優先地被解碼或被顯示。 同時,有一種情況,其中特技播放,例如,變速播放’ 31 1324338 藉由僅重播一I圖像之AU或僅重播一I圖像和P圖像之八11而 被實現。因此’一 I圖像和p圖像之列表可以被儲存作為特 技播放資訊。第15A至15C圖展示另一範例。此處,自10至 B14之圖像被包含於隨機存取單元RAU中,如第15B圖之展 5 示,並且在那些之間,一I圖像和p圖像之AU是I0、P3、P6、 P9、P12以及P15,如第15C圖之展示。因此,用以辨識10、 P3 ' P6、P9、P12以及P15之資訊被儲存。在此時,可能增 加用以自一P圖像之AU辨認一I圖像之AU的資訊。同時,也 可能展示用以彼此地辨認下面圖像的資訊’該等圖像包 10含:一I圖像、P圖像、供參考之B圖像(此後被稱為參考丑圖 像)、以及不供參考之B圖像(此後稱為非參考B圖像)。 進一步地,可能儲存分別的AU之優先序資訊作為特技 播放資訊,並且依據在變速播放時的優先順序而解碼或顯 示該等AU。可能使用圖像型式作為優先序資訊。例如,au 15之優先序可以下面所列順序被指定:⑴一I圖像;(ii)p圖像; (iii)參考B圖像;以及(iv)非參考B圖像。同時,也可能以下 面的方式設定其優先順序資訊:在一AU被解碼後時和該 AU被顯示時之間的時間愈長,則優先序成為愈高。第16八 至16C圖展示依據緩衝延遲時間而設定該優先順序之範 20例。第16A圖展示AU之預估結構,並且P3也供Bm〇P9所^ 考。在此時,於其中該隨機存取單元RAU是由自扣至^^ 之AU所構成之情況中(第16B圖),各AU之緩衝延遲時間是 相同於第16C圖之展示。此處,該緩衝延遲時間依據像框數 目被展示。例如,P3是被需要直至p9被解碼為止,並且唁 32 1324338 緩衝延遲時間必須是等於六個圖像。因此’解碼緩衝延遲 時間是3或更多之AU亦即解碼所有的I圖像和p圖像,並且 三倍速度播放被實現。此處,P3之緩衝延遲時間是較長於 10之缓衝延遲時間’但是可能增加一偏移數值至I圖像之 5 AU,以便安置最高優先順序於I圖像之AU上。同時,也可 能安置高的優先序於需要在高速播放時被解碼之AU上,並 且使用需要在N倍速度播放時被解碼之AU中的N作為優先 順序資訊。注意到’於其令一AU在其被解碼或被顯示之後 是供其他AU所參考的情況中,可能展示在其中該AU被參 10 考的期間之時間週期。 注意到’該特技播放資訊可被儲存於一 SEI訊息中(第 8B圖)。於此情況中’ SEI訊息之型式被定義以供用於特技 播放資訊’並且該特技播放資訊被儲存於被定義之型式的 SEI訊息中。用於特技播放資訊之SEI訊息單獨地被儲存於 15 SEINAL單元中或與其他的SEI訊息一起被儲存。注意到, 可此儲存特技播放資訊於user_data_registered_itu_t_t35 SEI訊息中或於user_data—unregistered SEI訊息中,其是用以 儲存被使用者所定義之資訊的SEI訊息。在使用這些SEI之 時’可能藉由添加被儲存之資訊的辨識資訊而展示將被儲 20存之特技播放資訊或SEI酬載部件中之特技播放資訊型式。 /主思到’除了隨機存取單元RAU中頂部AU之外,亦可 能儲存特技播放資訊於AUt。同時,也可能預定用以辨識 *要在一特定播放速率的播放時被解碼之AU的數值並且 增加對於各個AU被決定之數值。例如,關於將以n倍速度 33 或較小之播放速率被解,AU,馳給予作為播放速率資 訊。同時’也可能展示下列者於—分切部份的綠單元之 naLref_ide以及其類似者:―奶中之圖像結構該結構是 -像框結構或-像場結構’並且進一步地,於該圖像具有 ’ 5 —像場結構之情況中’可能展示該像場型式,其是-頂部 ,㈣或-底部像場。例如,因於交錯顯示情況中需要輪流 地顯示頂部像場和底部像場,需要的是,接著將被解碼之 像場是否為頂部像場或底部像場,其可利用在高速播放時 # M過一些像場而容易地在解碼像場之時被判定。於像場 1〇型式可自NAL單狀__定之情況巾,财需要分析 該分切棺頭,並且用於此判斷所需要的處理數量可被降低。 注意到’指示構成-隨機存取單元RAU之各個au是否 為-像場或-像框的資訊可被健存進入隨機存取單元_ 之頂。PAU巾1¾時’也可谷易地藉由储存此資訊進入隨機 15存取單元之頂部AU而決定將在特技播放時被解碼之au, 較於其卜像場結構和—像框結财叙情況中亦然。 第17A和17B圖是其中具有一像框結構之Au以及具有一像 場結構之AU共存顿財料巾之制,並且它們 分別地展示AU之顯示順'序和⑹之解碼财。下面的圖像 2〇也分別地被編碼作為像場組對:幻和幻;14和?5 ;則和 BIO ; B11 和B12 ; P13和PM ; B15和Β16 ; Β1>Β18 ;以及 P19和P2G ’其他的AU被編碼作為具有—像框結構之 AU。在此時,於僅重播一[圖像和p圖像之au情況中,下列 者可被解碼並且以下面列表的順序被重播:14和P5之像場 34 1324338 組對;P8之像框;P13和P14之像場組對;以及Pl9和p2〇之 像場組對。但是,添加此資訊是有效益的,因為需要判斷 各個AU是否為構成一像場組對之一個像場或各個AU是否 為在決定將被解碼之AU時的一像框。 5 10 15 第17C圖是第一映圖(RAU一mapl)之語法範例,其指示 隨機存取單元RAU巾之-AU是衫―像框或―像場。'構成 一 IW機存取單元之AU數目被展示於num—Au_in rau中, 並且於各AU上之資訊依解碼順序被展示於下面迴路中。此 處,frame—fiekLflag(像框_像場_旗幟)展示將被儲存於一 AU中之圖像是否為—像框或—像場。同時κ咖也展 示於圖像編碼型式之資訊。可被展示之編碼型式包含:一】 圖像;-滕圖像;- P圖像;一參考B圖像;_非參考B圖 像;以及其類似者。因此,可能藉由參考於這映圖而決定 將在特技播放時被解碼之圖像。注意到,可能指示各頂像 和各P圖像是否供作參考。進—步地,可能指示供判斷是否 預定需求被施加至預估結構之資訊。 第17D圖展示關於第17B圖之隨機存取單元議的 —mapl。此處,一I圖像、pfgj後 曰像、參考B圖像、以及非 20 ^圖像之Pic」ype分別地是〇、1、2以及3。此處,可能 依4上列基礎而儲存指示圖像 分祕你1 尘式之貧訊,因為圖像 依據像框接著像框方式而被重 場組對接著像場組财心被重播Μ特技減時依據像 著像!二是依據像框接著像框方式或依據像場組對接 者像每組對方式而指示圖像編碼型式的第二映圖 35 1324338 (RAU_map2)之語法範例。此處 ’ num_frame_in_RAU展示 構成一隨機存取單元RAU之像框數目以及像場組對數目。 同時,frame_falg也展示一圖像是否為一像框,並且於其是 一像框之情況中,1被設定。在1被設定於frame_falg之情況 5 中,像框編碼型式上之資訊以像框_型式被展示。在0被設 定於frame_falg之情況中,換言之,該圖像是像場組對中之 一個像場,構成該像場組對之各像場的編碼型式以 field_pair_type(像場_組對_型式)被展示。 第17E圖展示關於第17B圖之隨機存取單元RAU的 10 RAU_map2。於第17E圖中,指示一I圖像、P圖像、參考B 圖像、以及非參考B圖像之像框_型式的數值分別地是0、卜 2以及3。同時’ field_pair_type依解碼順序展示各個像場之 型式。像場型式是如下所示:I代表I圖像;P代表P圖像; Br代表參考B圖像;並且Bn代表非參考圖像。例如,在第 15 —像場是一 I圖像和第二像場是一P圖像之情況被展示為 Ip ’並且在第一像場和第二像場是非參考B圖像之情況中其 破展示為ΒηΒη。此處,供用於指示IP、PP、PI、BrBr、BnBn 以及其類似者之組合的數值先前地被設定。注意到,下面 的資訊可被使用作為指示像場組對之編碼型式的資訊:關 ;像%組對是否包令—I圖像或一個或多個P圖像之資訊; 關於像場組對是否包含一個或多個參考B圖像之資訊;以及 關於像場組對是否包含一個或多個非參考B圖像之資訊。 例如’特技播放資訊可以是類似於第18A圖所展示之語 法的隨機存取單元RAU的映圖。這映圖包含指示被包含於 36 1324338 隨機存取單元RAU中各該等圖像之結構的 picture_structure(圖像結構)以及指示該圖像型式之 picture_type(圖像—型式)。如第ι8Β圖之展示, picture_structure展示各個圖像結構,亦即,一像場結構或 5 一像框結構’以及其類似者。同時’也如第18C圖之展示, picture一type展示各個圖像之圖像型式,亦即,一I圖像,一 參考B圖像’一非參考b圖像,和一P圖像。以此方式,接 收這映圖之動晝解碼裝置可容易地辨識A U,特技播放藉由 參考於這映圖而被進行於其上。作為一範例,除了一 I圖像 10 和P圖像之外,可能以高速播放而僅解碼和重播一I圖像和P 圖像或參考B圖像。 注意到,於其中指示圖像結構,例如,被包含於構成 一隨機存取單元RAU之一 AU中的3-2拉降之資訊之情況 中’可能包含指示上述說明之第一或第二映圖中的圖像結 15 構之資訊。例如,可能展示是否各個圖像具有等於三個圖 像之顯示像場或各個圖像具有等於二個圖像之顯示像場。 進一步地,於其中具有等於三個圖像之顯示像場之情況 中,可此展示指示該第一像場是否重複地被顯示之資訊或 指示該第一像場是否為一頂部像場的資訊。同時,於其中 20具有等效於二組圖像之顯示像場之情況中,可能展示該第 一像場是否為一頂部像場之資訊。此處,於MpEG 4 AVC 中,是否具有一圖像結構,例如,3_2拉降之一圖像’可藉 由使用下列二情況被展示,⑴一序列參數集(sps)之 pic一struct_presem—flag 或(ii)以該 AVC 時序以及依 MPEG-2 37 1324338 系統才示準被疋義之HRD描述付號中picture」o_display _conversion_flag和其類似者。進一步地,各個圖像之結構 利用一圖像時序SEI之一pic一struct欄而被展示。因此,可能 僅於其中一pic_struct欄具有一特定數值(例如,一圖像具有 5等於三圖像之顯示像場)之情況中藉由設定旗幟而展示圖 像結構。換言之,指示關於各個圖像之下面三種資訊型式 是有效,(1)於其中跳躍播放是在一隨機存取單元RAU中間 被進行的情況中以及(ii)在決定將在特定時間被顯示之像 場或一像場被儲存於其中之像框時。其可以說是在決定將 10在變速播放期間被顯示之圖像之相同情況。該三組型式資 訊是: ⑴像場 (11)像框(其在不使用3-2拉降時被使用,或其同時也在 使用3-2拉降時被使用。於後面情況中,像框具有等於二組 15 圖像顯示像場。) (ill)像框,其在使用3-2拉降時,具有等於三組圖像之 顯示像場。 注意到,這些資訊之型式可以第18A圖展示之RAU映 圖的picture_structure(圖像_結構)被指示。 20 以此方式構成RAU之分別圖像的圖像型式而指示列表 資訊,使得可能容易地決定在進行特技播放(例如,變速播 放、跳躍播放、以及反向播放)時將被解碼或被顯示之圖 像。這於下面的情況中尤其是有效的: ⑴其中僅一 I圖像和P圖像被重播; 38 進行⑼以Γ速播放中―1圖像、p圖像1及參考b圖像被 型圖像依據圖像 =辨識’需要在特技播放時被解碼之圖像被選擇,並 且該被選擇之圖像以特技播放方式被重播 存賴減資訊之1定數值於一 ==同於AVC串流’例如,在應用位準之管理 放資訊於—隨機存取單元讀中, 10 其=其中特技播放資訊是不同於利用原定數值所展 不之特技播放資訊之情況中。 15 &關於變速播放之特技播放資訊已於上面敛述,但是可 此在反向播放時使用相似資訊作為增補資訊。於所有被顯 不的圖像可被儲存於記紐之情財,可能在反向播放時 一次完成解碼’心解碼所需的處理負财餅低。考慮 以第9Α至9D圖範例中所列順序ρΐ2、Ρ8、Ρ4㈣而進行反 向播放之情況,在這些四個AU_有解騎果被儲存之情 中可此人以這順序而解碼10、P4、P8以及pi2並且進 行反向播^:因此’可能依據在N倍速度播放時將被解碼或 破顯示之A U數目而判斷該等a u所有被解碼的資料是否可 20 被健存’並且依據該判斷結果而決定在進行反向播放時將 被顯示之該等AU。 同樣地’特技播放資訊可在跳躍播放時被使用作為增 補資訊°此處’桃躍播放意指動畫之快速向前並且於隨機 判疋之位置開始進行動畫之正常播放。使用此增補資訊決 39 疋破快速向前之圖像’即使在跳躍播 定跳躍播放被開始之圖像。 “吏得可能決 注意到,構成-隨機存取單元之各 可直接地被展示於特技播放資訊。於 情況中,它們所有皆被展示。此處,在數參考心之 T取早疋之情況中,Μ該隨機存取單元不同於包含夫 考於轉考觀-_隨機存取單元,可以下面 特疋的方式被指‘該隨機存取單元之第_ 10 15 N個隨機存取單元之前或在其之後,或該Μ可以下面^ 的方式被指不:屬於被安置在N個隨機存取單元之前或在盆 之後的隨機存取翠元之AU。注意到,在計數參考於該參考 AU之AU的情況中,可能依參考蝴解碼順序而展示序數 數碼。在這時,AU依據下面各方式之其—而被計數:所有 的AU;參考AU;—特定圖像型式(例如,^以及b)之初。 同時’也可能展示各個AU可能依解碼順序僅參考於之前和 在其之後高至州固奶之仙。注意到,於依解碼順序參考於 不被包含在之前和在其之後高至N個AU之一 Au時則可能 增加指示該事實之資訊。 /主思到,可施以相似方式使用上面說明之特技播放資 20訊於多工格式,例如,MP4,於其中NAL單元之尺寸被使 用而取代使用一開始編碼字首作為NAL單元之邊緣資訊。 注意到,在接收和記錄使用一MPEG_2TS(輸送串流)封 包或一RTP(即時傳輸協定)被封包化之編碼串流時,一封包 損失發生。以此方式’於記錄在一封包損失發生之環境中 40 1324338 所被接收的資料之情況中,可能儲存因為封包損失而指示 串流中之資料被遺失的資訊,進入一編碼串流作為增補資 訊,或作為管理資訊。可能藉由嵌入指示串流資料是否遺 失或用以通知該遺失部分之一特別的錯誤通知碼之旗幟資 5訊而展示因為封包遺失之一資料遺失。注意到,當在資料 被遺失時進行錯誤隱藏處理之情況中,可能儲存指示該存 在/不存在之辨識資訊或錯誤隱藏處理方法。 上面已說明用以在特技播放時決定將被解碼或被顯示 AU的特技播放資訊。此處,將參考第19圖而說明能夠引動 10 隨機存取單元RAU之邊緣檢測的資料結構。
於隨機存取單元RAU之頂部AU中,將供構成一隨機存 取單元RAU之AU所參考的SPS之NAL單元經常被儲存。另 一方面’於MPEG-4 AVC標準中,可依解碼順序而儲存將依 解碼順序供第N個AU所參考的SPS之NAL單元進入任意地 15選自第1^個AU或被安置在第N個AU之前的AU間之一 AU 中。此NAL單元被儲存,因而當在通訊或廣播發送一串流 之時’因為封包損失而SPS之NAL單元被遺失的情況中,一 SPS之NAL單元可重複地被發送。但是,下面的法則對於儲 存應用之使用是有效的。僅供利用所有隨機存取單元RAU 20的AUm參考的spS之一個別的NAL單元被儲存進入隨機存 取單元RAU之頂部AU,並且該SPS之NAL單元不被儲存進 入隨機存取單元之下面的AU中。實行這事使得可能保證該 AU是隨機存取單元raij之頂部Alj,如果其包含一 SPS之 NAL單元。該隨機存取單元RAU之開始可藉由尋找該SPS 41 1324338 串流之管理資訊 映圖不保證提供關於所有隨機存取單元 因此’例如’於進行被安置於存取資詔 訊不被提供的隨機存
NAL單元而被獲得’其是特別有效的。 之NAL單元而被發現。 理資訊,例如,一時間 單元RAU的存取資訊。 此處,於其中隨機存取單元RAU之頂部奶是一⑽圖 像-組MJ之情況中,該隨機存取單元副之他不參考於 早先依解碼順序被安置之隨機存取單元RAU中的au。這隨 10機存取單元RAU之型式被稱為關閉-型式之隨機存取單元 RAU。另一方面 於其中—隨機存取單元RAU之頂部AU是 為不是一IDR圖像之一I圖像的AU2情況中,該隨機存取單 元RAU之AU可參考於早先依解碼順序被安置的隨機存取 單元RAU中之AU。這隨機存取單元RAU型式被稱為開放_ 15型式隨機存取單元RAU。在當於一光碟或其類似者中之播 放期間被切換角度時,切換自關閉-型式隨機存取單元RAU 被進行。因此,關於一隨機存取單元RAU是否為一開放型 式或一關閉型式之判斷可於該隨機存取單元ratj之頂部部 份中被達成是有效的。例如,可能展示用以判斷該型式之 旗幡賀訊’亦即’於一SPS之NAL單元的一 nal一refjdc欄中 之一打開型式或一關閉型式。當nal_ref_idc之數值在一 sps 之NAL單元中被定義為1或更多時,高階位元是經常被設定 為1且旗幟資訊藉由低階位元被展示。注意到,一隨機存取 單元RAU中之一 AU可不用參考於早先依解竭順序被安置 42 之隨機存取單元RAU中之一 AU,即使於其中該頂部AU是 不為一 IDR之一 I圖像的AU之情況亦然。這型式之隨機存取 單元RAU可以被考慮為一關閉-型式隨機存取單元RAIJ。注 意到,旗峨資訊可使用除了 nal_ref_idc之外的爛被展示。 注意到’可能依據除了僅將被儲存於隨機存取單元 RAU之頂部AU中的一SPS外之NAL單元而指定隨機存取單 元RAU之開始位置。同時,可能使用各個隨機存取單元rau 之nal_ref_idc攔而展示型式,亦即,各個隨機存取單元rau 之開放型式或關閉型式。 最後’第20A和20B圖展示構成一隨機存取單元rau的 AU之預估結構的範例。第20A圖以一顯示順序而展示該AU 位置’並且第20B圖依該解媽順序而展示該等au位置。如 圖形之展示,B1和B2是在隨機存取單元RAU之頂部AU的13 之前被顯示,其可參考於將在Π之後被顯示的AU。圖形中, B1參考於P6。此處,為了保證13及下面顯示順序的圖像之 AU可正確地被解碼’禁止13和下面顯示順序的圖像之AU 在該顯示順序的13之前參考於AU。 (動晝編碼裝置) 第21圖是實現本發明動畫編碼方法之動畫編碼裝置 100的方塊圖。這動晝編碼裝置100產生一編碼串流,其被 展示於第8圖至第20圖,其中動晝可使用特技播放(例如, 跳躍播放、變速播放、以及反向播放)被重播。除了第4圖 展示之習見的動畫編碼裝置1單元之外,該動畫編碼裝置 100還包含一特技播放資訊產生單元TrickPlay。注意到,圖 。。-4行如第4圖方塊圖展示之習見動畫編碼裝置的處理 —_之相同操作的處理單元被指定相同的參考數目,並且 匕們之說明將被省略。 5 特技播放貢訊產生單元TrickPlay是一單元範例,其依 據I3 ~個或多個圖像之隨機存取單元而在重播隨機存 取單疋時產生將被供參考之增補資訊。該特技播放資訊產 生單疋TrickPlay,依據圖像型式ρ型式(ptype)而產生特技播 放貝訊,並且將該特技播放資訊通知至可變長度編碼單元 VLC 〇 1〇 ^該可變長度編碼單元VLC是一串流產生單元範例,其 藉由添加該被產生之增補資訊至各個對應的隨機存取單元 而產生包含增補資訊和圖像之串流。該可變長度編碼單元 VLC編碼且安置該NAL單元以供儲存特技播放資訊於隨機 存取單元RAU之頂部AU中。 15 第22圖是一流程圖,其展示第21圖所展示之動畫編碼 裝置1 〇〇(主要為該特技播放資訊產生單元TrickPlay)如何進 4亍包含特技播放資訊之編碼串流的產生步驟,亦即,本發 明之動晝編碼方法流程圖。 首先,於步驟10中,動晝編碼裝置1〇〇判斷將被編碼之 20 AU是否為隨機存取單元RAU之頂部AU。於其是頂部au之 情況,前進至步驟11,同時於其不是頂部AU之情況,前進 至步驟12。於步驟11中,該動畫編碼裝置1〇〇進行用以產生 隨機存取單元RAU之特技播放資訊的啟始處理,並且同 時,其也確保用以儲存該特技播放資訊進入隨機存取單元 44 1324338 RAU之頂部AU的區域。於步驟12中,該動晝編碼裝置loo 編碼AU貪料,並且接著前進至步驟13。於步驟13中,該動 畫編碼裝置100獲得在產生特技播放資訊時所需要的資 訊》此貢訊是:AU之圖像型式,亦即,一Ϊ圖像、一ρ圖像、 5 一參考B圖像,或一非參考B圖像;或是否需要在進行N倍 數速度播放時解碼該AU。在那之後,該動晝編碼裝置1〇〇 前進至步驟14。於步驟μ中,該動畫編碼裝置1〇〇判斷該AU 是否為該隨機存取單元RAlJ之最後的Au。於其是最後的 AU之情況’該動畫編碼裝置100前進至步驟15,而同時於 10 其不是最後的AU之情況,其前進至步驟16。於步驟15中, 動畫編碼裴置1〇〇決定特技播放資訊,產生用以儲存該特技 播放資訊之NAL單元,且儲存該被產生之NAL單元進入於 步驟11中被確保的區域。在完成步驟15之處理程序後,動 晝編碼裝置1〇〇前進至步驟16。於步驟16中,該動畫編碼裝 15置100判斷接著是否將有一AU被編碼。於有一AU將被編碼 之情況’其重複步驟1〇以及下面的步驟,同時於沒有AU將 被編碼之情況,其完成該處理程序。此處,在步驟16中, 當動畫編碼裝置1〇〇判斷沒有AU將被編碼之情況,其儲存 最後的隨機存取單元RAU之特技播放資訊,並且接著完成 20 該處理程序。 例如’當動畫編碼裝置100產生第18A圖展示之特技播 放資訊時,其於13步驟中獲得下面各項:圖像型式;該圖 像是否具有一像場結構或該圖像是否具有一像框結構;或/ 及在關於3-2拉降之資訊被包含於編碼串流中的情況,指示 45 5 "玄圖像之顯示像場的資訊是否等於二組圖像或等效於三組 圖像。於步驟15中,該動畫編碼裝置100依-解碼順序設定 X Ik機存取單元RAU中所有圖像的圖像—結構和圖像 式。 注思到’於用於儲存特技播放資訊之NAL單元的大小 不疋在開始隨機存取單元RAU之頂部八^的編碼時已知的 兄中於步驟11中,用於破保儲存該特技播放資訊之區 -戈的處理將被H於此情況中在步驟15中該被產生 10 j儲存特技播放資訊之NAL單元被塞進入頂部AU中。 同時儲存或不儲存特技減資訊也可依據編碼串流 而被城。特财’於構成—隨機存取單元的AU間之預估 °構藉由應用破描述之情況中,可能決定特技播放資訊不 .s子例如’於其中—編碼串流具有如於一⑽EG』串流 15 :、、相同預估結構情況中,不需要儲存特技播放資 訊。這是因為可能決定在特技播放時需要被解歇au而不 需^放資訊。注意到,此切換可以在一隨機存取單元 RAU基礎上被進行。 (動畫多工裝置) 20 第是方塊圖,其展示本發明動畫多工裝置1〇8之結 構。這動晝多工裝置108輸入動畫資料'編碼該動畫資料以 產生MPEG 4 AVC串流、多工化具有該存取資訊之串流為該 等AUU構成該串流以及包含用以決定在特技播放時所進 行之操作的增«訊之管理資訊)、並且記錄該被多工化之 串流。該動畫多工裝置⑽包含-串流屬性決定單元101、 46 1324338 一編碼單元102、一管理資訊產生單元1〇3、一多工單元ι〇6 以及一儲存單元107。此處,該編碼單元1〇2具有—功能供 用於添加特技播放資訊於第21圖展示之動畫編碼裴置ι〇〇 中。 5 该串流屬性決定單元101決定關於在編碼一mpeg-4 AVC串流時被進行之特技播放的需求,並且將它們輸出至 編碼單元102以及該播放支援資訊產生單元1〇5作為屬性資 訊TYPE。此處,關於特技播放之需求包含資訊,其指示. 供用於構成一隨機存取單元之需求是否被施加至一 10 MPEG_4 AVC串流;在變速播放或反向播放時將被解碼或被 顯示之AU的資訊是否被包含於該串流中;在Al^a1之預估 結構上的需求是否被設定。該串流屬性決定單元1〇1進一步 地輪出用以產生管理資訊(例如,壓縮格式或解析度)所需的 資訊之一般管理資訊,至一般管理資訊產生單元1〇4。該編 15碼單元102依據該屬性資訊TYPE而編碼該被輸入之視訊資 料成為MPEG-4AVC串流,輪出該被編碼之資料至該多工單 元106 ’並且輸出該串流中之存取資訊至一般管理資訊產生 單元104。此處,於其中該屬性資訊丁丫1>]£展示供指示將在 變速播放或反向播放時被解碼或被顯示之AU的資訊不被 2〇包含於該串流之情況中,則特技播放資訊不被包含於該編 碼串流中。注意到,该存取資訊指示存取該串流的基本單 元之存取單元資讯,並且包含存取單元中之頂部AU之開始 位址、顯示時間以及類似者。一般管理資訊產生單元104依 據該存取資訊以及一般管理資訊而產生在存取一串流時供 47 1324338 參考之列表資料以及儲存屬性資訊(例如,壓縮格式)之列表 資料,並且輸出該列表資料至多工單元106作為管理資訊 INFO。播放支援資訊產生單元1〇5產生支援資訊HLP,其依 據該被輸入之屬性資訊型式而指示該串流是否具有一隨機 5 存取結構,並且輸出該支援資訊HLP至多工單元1〇6。該多 工單元106產生經由編碼單元102被輸入之編碼資料、管理 資訊INFO、以及藉由多工化該支援資訊HLP之多工化資 料’並且接著輸出它們至儲存單元107。儲存單元1〇7記錄 經由多工單元106被輸入之該多工化資料於記錄媒體中,例 10 如,—光碟、一硬碟以及一記憶體。注意到’該編碼單元 102可將MPEG-4 AVC串流封包化為,例如,一 MPEG-2 TS(輪送串流)或一MPEG-2 PS(程式串流),並且接著輸出該 被封包化之MPEG-2 TS或PS。同時,該編碼單元1〇2也可使 用應用的格式(例如,BD)而封包化該串流。 15 注意到,該管理資訊内容不需取決於該特技播放資訊 是否被儲存於編碼串流中。在此時,支援資訊HLP可被省 略。同時,該動畫多工裝置108也可能具有該結構,而不需 播放支援資訊產生單元105。 第24A和24B圖展示藉由支援資訊HLP所展示之資訊範 2〇例。該支援資訊HLP包含直接地指示如第24A圖展示之串流 資訊的方法’以及指示該串流是否滿足特定應用標準所描 述的需求,如第24B圖之展示。 第24 A圖展示如下面關於一串流的資訊:關於串流是否 具有一隨機存取結構之資訊;關於在被儲存於一AU中的圖 48 像間之預估結構上是否有需求之資訊;以及關於是否有資 訊指示在特技播放時將被解碼或被顯示之初的資訊。 此處’關於在特技播放時將被解碼或被顯示之AU的資 • 料直接地指示將被解碼或被顯示之初或指示在解碼或 • 5 _示時之優摘序。例如,其可被指示,依據—隨機存取 早元基礎而純解碼或被顯示之处时訊被儲存於具有 错由應用、-SEI訊息或其類似者所描述之—特別NAL單元 • 型式的一NAL單元中。注意到,可能指示是否有指示在構 成-隨機存取單元之AU間的預估結構之資訊。同時,關於 10在特技播放時將被解碼或被顯示之AU的資訊也可依據- 個或多個隨機存取單元基礎被添加至構成隨機存取單元之 各個AU。 進一步地,於其中指示將被解碼或被顯示之AU的資訊 被健存進入具有-特別型式的魏單元之情況中,可能展 vdNAL早το之NAL單元型式。於第25圖範例中,在該支
• I資訊黯中,關於將在特技播放時被解碼或被顯示之AU 的資訊被包含於NAL單元中,其單元型式是〇。在此 時’可能藉由解多工其NAL單元型式是〇之單元而自該 串机之AU資料獲知關於該特技播放之資訊。於其中關於特 技播放使用SEIsfl息被健存之資訊之情況中,可能指示用 以辨識該SEI訊息之資訊。 同時’關於預估結構上之需求,也可能指示一個或多 個預定需求是否被滿足,或可能指示下面分別的需求是否 獨立地被滿足: 49 1324338 ⑴關於-!圖像和P圖像之AU,其解碼順序應該匹配 該顯示順序; (11) 一P圖像之AU不能參考3圖像之AU; ㈣在一隨機存取單元中依顯示順序地在頂部AU之 5後的AU僅可參考被包含於隨機存取單元中之au ;並且 (iv)各個AU僅可參考依解碼順序之前和之後被置放 局至N個之AU。於此情;;兄中,所有的―一起地被計算或… 依據-參考AU基礎被計算,並且社值可被展示於支援資 訊HLP中。 10 注意到,於MPEG_4 AVC中,可能使用,在解碼之後, 用以移除區塊失真之過濾處理(解方塊效應)被進行之圖像 作為參考圖像’以便改進圖像品質,並且可能使用在該解 方塊效應之前的該等圖像,作為用以顯示之圖像。於此情 況中’該動畫解碼裝置需要在該解方塊效應之前以及其之 15後保持該圖像資料。因此’可能儲存,指示是否有需要在 該供顯示使用之解方塊效應之前保持該等圖像的資訊於該 支援資訊HLP中。該MPEG-4 AVC標準定義用以儲存參考圖 像或將被顯示之圖像作為解碼結果所需的緩衝器(Dpb :被 解碼之圖像緩衝器)最大尺寸。 2〇 因此’藉由一具有最大尺寸2DpB緩衝器或一具有應 用所描述的隶大尺寸之缓衝器’可能指示解碼處理是否可 被進行而不會失敗’即使於儲存供用於參考圖像顯示之圖 像的情況中亦然。注意到’為了在參考圖像之解方塊效應 前儲存該等圖像,除了如DPB所需要的大小之外,可能使 50 1324338 用位元組數量或像框數量,以指示需要被確保之緩衝器尺 寸。此處,解方塊效應是否於各個圖像上被進行可自串流 中之資λ或串流之外的資訊(例如,管理資訊)被獲得。於獲 得串流中之資訊的情況中,例如,其可自一SEI被獲得。進 5 一步地,於解碼一1^1^0-4 AVC串流之情況中,可能依據可 被使用於解碼單元和上述資訊中之緩衝器尺寸而判定在參 考圖像之解方塊效應則該等圖像是否可被使用於顯示或可 能不被判定,並且接著可決定如何顯示該等圖像。 注意到,所有的資訊或部份資訊可被包含作為支援資 10訊HLP。同時,也可能依據預定情況而包含必需的資訊, 例如,包含僅於其中不需要關於預估結構之情況中關於特 技播放資訊之存在或不存在的資訊。同時,除了上述資訊 之外的資訊也可被包含於該支援資訊HLP中。 第24B圖不直接地指示關於串流結構之資訊,但是指示 15 一串流是否滿足藉由藍碟標準(BD-ROM)標準或用以儲存 高清晰度圖像於DVD中之高清晰度(HD)DVD標準而定之 串流結構的需求。同時,也於其中多數的模式被定義為應 用才示準(例如,BD-ROM標準或其類似者)中之串流需求之情 況中,則指示被應用之模式的資訊可被儲存。例如,下面 20的模式被使用:指示沒有需求之模式1 ;指示該串流具有— 隨機存取結構並且包含用以指定在特技播放時將被解碼之 AU資訊的模式2 ;以及其類似者。注意到,可指示該串流 是否滿足通訊服務(例如,下載或串流、或廣播標準)中的緊 述需求。 51 1324338 注意到,可能指示第24A圖所展示和第24B圖所展示之 資訊。同時,也於習知之串流滿足特定應用標準需求的情 況中’可藉由轉換串流結構成為用以指示如第24A圖展示之 直接說明的格式而儲存該應用標準之需求,以取代指示該 5 串流是否滿足該應用標準。 注意到,可能儲存指示在特技播放時將被解碼或被顯 示之AU的資訊作為管理資訊。同時,也於其中支援資訊HLp 之内谷於串流中被切換的情況中,支援資訊HLp可依據部 份-接-部份基礎被指示。 10 第%圖是流程圖,其展示動晝多工裝置jog之操作。於 步驟51中,串流屬性決定單元1〇1依據使用者設定或預定情 況而決定屬性資訊型式。於步驟52中,編碼單元1〇2依據該 屬性> sil型式而編碼一串流。於步驟5 3中,該播放支援資 訊產生單元105依據該屬性資訊型式而產生支援資訊 15 HLP。結果,於步驟54中,編碼單元1〇2依據編碼串流之一 存取單元而產生存取資訊,並且一般管理資訊產生單元川4 藉由添加該存取資訊至其他必需之資訊(一般管理資訊)而 產生管理資訊INFO。於步驟55中,多工單元1〇6多工化一 串流 '支援資訊HLP以及管理資訊INFO。於步驟56中,儲 20存單元記錄該被多工化之資料。注意到,步驟53可以在 步驟52之前,或在步驟54之後被進行。 注意到,編碼單元102可以儲存於支援資訊HLP中所展 示之資訊成為一串流。於此情况中’於支援資訊HLP中被 展示之資訊被儲存進入用以儲存特技播放之NAL單元中。 52 1324338 例如,於其中P圖像不參考B輯之料中,可能在變速播 放之時僅解碼-1圖像和P圖像。因此,指示是否僅一【圖像 和P圖像可被解碼和被顯示之賴f訊被料。同時,也有 -情況’其中在變速時將被解碼之—些从不能自應該 5供分別的AU所參考之AU而獲得一SPS或一PPS。那是其中 供-P圖像所參考之PPS僅被儲存於僅解碼一 1圖像和p圖像 情況中之B圖像的AU中之情況。於此情況中,需要自8圖像 之AU以獲得用以解碼p圖像所需要的PPS。因此,可能包含 旗幟> 訊,S亥資訊指示供將在變速播放時被解碼之各所 10參考的SPS或PPS是否可確實自將在變速播放時被解碼之 其他AU的一 AU而被獲得。執行這處理,使得其可進行操 作,例如’僅於一旗幟不被設定之情況中,自將不在變速 播放時被解碼之圖像AU檢測一SPS或一PPS之操作。同時, 在當其僅展示一 I圖像和P圖像可被解碼且被顯示之時,其 15同時也可能藉由解碼B圖像(特別是供其他圖像參考的參考 B圖像)而調整播放速率。 同時’也可能儲存該旗幟資訊進入另一NAL單元之檔 頭中,例如,一SPS、一PPS或一切片部分,以取代使用以 儲存特技播放之任何NAL單元。例如’於其中供構成隨機 20存取單元RAU之AU所參考的一 SPS被儲存進入該隨機存取 單元RAU之頂部AU之情況中’一 SPS的NAL單元之 nal_ref_idc欄可指示旗幟資訊。當nal—ref_idc數值於一sps 之NAL單元中被定義為1或更多時,可能永遠設定高階位元 為1並且以低階位元指示旗幟資訊。 53 1324338 注意到,支援資訊HLP之内容可被儲存進入一串流或 管理資訊中,或其兩者中。例如,於其中支援資訊HLp内 容被固定於一串流之情況中,該内容可被展示於管理資訊 中,而於其中内容是可變的情況中,該内容可以一串流形 5式被展示。同時,也可能儲存指示該支援資訊HLP是否被 固定或不在管理資訊中之旗幟資訊。同時,於其中支援資 訊HLP以一應用標準形式(例如,一 BD-ROM或一 RAM)被預 定之情況中,或於其中支援資訊HLP藉由通訊或廣播而分 別地被提供之情況中’則支援資訊HLP可能不被儲存。 10 (動畫解碼裝置) 第27圖是貫現本發明動晝解碼方法之動畫解碼裝置 200方塊圖。這動晝解碼裝置200重播第8八和8]8圖至第2〇圖 所展示之編碼串流。其不僅可進行正常播放,同時也進行 特技播放’例如’跳躍播放、變速播放以及反向播放。除 15 了第5圖展示之習見的解碼裝置2單元之外,動書解碼裝置 200進一步地包含一串流抽取單元EXT及一 AU解碼選擇單 元AUsel。注意到’進行相同於第5圖方塊圖所展示之習見 解碼裝置2之分別處理單元的操作之處理單元被指定相同 之參考數目並且它們之說明將被省略。 20 AU解碼選擇單元AUsel,依據自外部輸入之一特技播 放指令,以決定依據於可變長度解碼單元VLD中被解碼之 特技播放資訊Grplnf而需要被解碼之AU。此處,指示特技 播放之特技播放指令自該AU解碼選擇單元AUSel被輸入。 進一步地,該AU解碼選擇單元AUsel通知串流抽取單元 54 EXT關於}曰不该AU是被判定為需要被解妈之au的資气 DecAU。該串流抽取單元ext僅抽取對應至利用該AU解碼 選擇單元AUsel而被判定為需要被解碼之AU的AU之串 流,並且接著發送該串流至該可變長度解碼單元VLD。 第28圖是一流程圖,其展示第27圖展示之動畫解碼裝 置2〇〇(主要是AU解碼選擇單元AUsel)如何在進行特技播放 h進行包含特技播放資訊之串流的解碼步驟,亦即,為本 發明動畫解碼方法之流程圖。 首先,於步驟20中,該AU解碼選擇單元AUsel藉由檢 測該串流中之一SPS或其類似者而判斷該Au是否為隨機存 取單元RAU之頂部AU。於其中該AU是頂部AU之情況中, 其刖進至步驟21,而同時於其中該AU不是頂部八11之情況 中,其前進至步驟22。此處,隨機存取單元RAU之開始位 置可自管理資訊(例如,時間映圖)而被獲得。尤其是於其中 在跳躍播放時之播放開始位置被決定之情況中,或僅隨機 存取單元RAU之頂部圖像被選擇並且高速播放於該被選擇 之頂部圖像上被進行之情況中,可能決定參考至該時間映 圖之15¾•機存取單元RAU的開始位置。於步驟21中,該au解 碼選擇單元AUsel自該AU資料而獲得該特技播放資訊、分 析該AU資料並且在抵達步驟22之前決定將被解碼之au。 於步驟22中,該Au解碼選擇單元AUsel判斷該AU*否為於 步驟21中被決定作為將被解碼之au&au。於其是該被決 疋之AU的情況中,該動晝解碼裝置2〇〇於步驟23中解碼該 AU,而同時於其不是被決定之au情況中,其前進至步驟 24。於步驟24中’該動晝解碼裝置200判斷其是否保持任何 將被解碼之AU。於其中有一AU之情況中,該動晝解褐裝 置200重複步驟20和下面步驟之處理程序,而同時於其中沒 有AU之情況中,其完成該處理程序。注意到,可能省略步 驟21和步驟22之處理程序,或省略步驟21中之決定處理程 序,並且輸出指示在正常播放時所有被解碼AU之資訊,於 其中所有的AU依序地被解碼並且被顯示。
第29圖是指示於步驟21中之該處理程序(該AU解偶選 擇單元AUsel之處理程序)的流程圖。首先,該AU解碼選擇 單元AUsel藉由尋找AU資料中之開始碼前綴資訊而檢測構 成一 AU之NAL單元之開始位置,於步驟30中開始於頂部位 元組,並且前進至步驟31。注意到,可能搜尋開始於不是 AU資料之頂部位元組之一開始碼前綴資訊,而是開始於另 一位置,例如’一存取單元定界符號之末尾位置^於步驟 31中,該AU解碼選擇單元AUsel獲得NAL單元之NAL單元 型式,並且前進至步驟32。於步驟32中,該AU解碼選擇單 元AUsel判斷於步驟31中被獲得之NAL單元型式是否為用 以儲存特技播放資訊之NAL單元型式。於其中特技播放資 訊被儲存之情況中,其前進至步驟33,而於其中特技播放 資訊不被儲存之情況中,其重複步驟3〇以及下面的步驟之 處理程序。此處,於其中特技播放資訊被儲存於SEI訊息中 之*丨月況中,該AU解碼選擇單元AUsel首先獲得該SEI之NAL 單元’並且進一步地,其判斷用以儲存該特技播放資訊之 SEI訊息是否被包含於該NAl單元中。於步驟33中,該AU a 解碼選擇單元AUsd獲得特技播放資訊,並且其前進至步驟 34。於步驟34中,該AU解碼選擇單元她d決定需要在進 行-指定之特技播放操作時被解碼之圖像。例如,假設雙 • 料度減《I於其巾特技_資减河能藉由僅 .5 _和重播—爾、p圖像以及參考b圖像而實現雙倍速度 播^之情況中’其判定這三組型式圖像被解碼且被重播。 ’主思到’於其中特技播放貢訊不在自步驟3〇至步驟Μ之隨 • 機存取單元RAU頂部圖像的處理程序中被檢測之情況中, 該等圖像需要被解碼,以便進行依據預定方法被決定之指 10 $的特技播放操作。作為-範例’可藉由參考於指示存取 單元定界符號中-圖像之圖像型式攔,或藉由檢查nal^ 元之檔頭的naUef一idc而判斷圖像是否為—參考圖像。例 如,可藉由參考於料圖像料之欄以及㈣―晚也兩者而 辨認參考B圖像與非參考b圖像。 15 第_是流程圖,其指示於所有被解碼的AU不是經常 % 被顯不之情況中的處理程序(Au解碼選擇單元AUsel之處 理程序)。用以進行相同於第28圖流程圖步驟之處理程序的 步驟被指定相同之參考數目,並且它們之說明將被省略。 於步驟41中,AU解碼選擇單元八^^^獲得且分析特技播放 〇資訊,決定一指定特技播放操作中將被解碼之AU以及將被 顯示之AU,並且其前進至步驟42。於步驟42中,該八1;解 碼選擇單元AUsel判斷將被解碼iAU是否完全地匹配將被 顯示之AU。於其中有一完全匹配之情況,其前進至步驟 22,而於其中沒有完全匹配之情況,其前進至步驟“。於 57 步驟43中,該AU解碼選擇單元AUsel輸出將被顯示之AU的 列表貧訊,並且其前進至步驟22。該被輸出的AU2列表資 讯被使用於用以決定來自被解碼的AU中將被顯示之八·^的 步驟(未被展示於圖形中)。 10 15 20 立忍到’於MPEG-4AVC中,可能使用在解碼之後過濾 處理(解應)於該等圖像上被進行以移除區塊失真之 圖像作為參考圖像,以便改進圖像品f,並且可能使用在 解方塊效應之前的圖像作為顯示之圖像。於此情況中,動 畫解馬裝置2G(U要在該解方塊效應之前和之後保持圖像 資料°此處’於動晝解料置2⑻具有可儲料於四組圖像 的解碼«料之記憶體情況中,於其在解方塊效應之前和 之後儲存該圖像資料進人記憶體中之情況中,該記憶體需 要儲存等於二組輯之資料,以便在參相像_方塊效 應之前⑽圖像。叫,如上料,妓向播放時需要儘 可能多地保持圖像於-記憶體中。於動畫_裝置同時 也使用在解方塊效應之後的圖像供顯示所用之情況中其 可㈣四_像資料於_記憶體中’因為不需要儲存在解 方塊效應前之圖像。因此,顯示在解方塊效應之前圖像以 便改進在標準方向播放時圖像品肢且在反向播放時顯干 解方塊效應之後圖像使得可能料更多圖像於—記憶體 中,並且降低在反向播放時的處理數量。例如,於第 至15C圖之範例中,其展示作為特技播放資訊之—圖像和p 圖像之AU列表,四组圖像的所有龍可在反向播放時被保 持於-記憶體中,而同時下面之二組圖像的集合:職 58 p3和P6 ;以及P6和P9,其是任意地選自ΙΟ、P3、P6以及P9 之間,可在正常方向播放時在相同時間被保持於記憶體中。 (光碟中特技播放之記錄格式範例) 特技播放功能於重播一封裝媒體之光碟裝置中尤其是 5 重要的。此處,下面接著將說明記錄上述之特技播放資訊 進入下一代光碟之藍碟(BD)的範例。 首先,將說明一BD-ROM之記錄格式。 第31圖是一圖形,其指示BD-ROM之結構,尤其是碟 片媒體之BD藍碟114的結構,以及被儲存於該碟片中之資 10 料111、112以及113。被儲存於該BD碟片114中之資料包含 AV資料113、BD管理資訊112(例如,關於該AV資料和AV重 播序列之管理資訊)、以及一實現互動作用的BD播放程式 111。此處,為方便起見,該BD碟片之說明將集中於供用 於重播影片音訊和視覺内容之AV應用上,但是相似之說明 15 可被用於其他使用上。 第32圖是展示被儲存於上述BD碟片中之邏輯資料目 錄檔案結構的圖形。一BD碟片具有自其之内徑至其之外徑 之記錄區域’其類似於,例如,DVD ' CD以及其類似者, 並且具有邏輯位址空間以供在内徑的讀入和在外徑的讀出 20之間儲存邏輯資料。同時’在讀入内部,也有一特別的區 域,其僅可藉由被稱為燒錄區(BCA)之驅動而被讀出β因' 區域不能自應用中被讀出時’其可被使用於,例如,複制 權利保護技術。 楼案糸統賓sil (谷積)被儲存於邏輯位址空間頂部中,* 59 1324338 且應用資料,例如,視訊資料同時也被儲存在那裡。如於 背景技術中之說明,一檔案系統是,例如,UDF或ISO9660, 並且其能夠於類似一般PC之情況中使用一目錄結構或一檔 案結構而讀取出被儲存之邏輯資料。 5 於這實施例中,作為BD碟片上之目錄結構和檔案結 構,該BDVIDEO目錄即時地被安置在一徑由目錄(root) 之下。這目錄是儲存資料例如,於BD中被處理之AV内容或 管理資訊(已於第32圖中被說明之101、1〇2以及1〇3)之目錄。 在BDVIDEO目錄之下,下面七個檔案被記錄。 10 ⑴BD.INFO(檔案名稱被固定),其是“Bd管理資訊” 之一部分並且是儲存關於全部BD碟片之資訊的檔案。BD 播放機首先讀出這檔案。 (ii) BD.PROG(檔案名稱被固定),其是“bd播放程式” 之一並且是儲存關於全部BD碟片之播放控制資訊的檔案。 15 (iii) XXX.PL(“XXX”是可變的,並且該延伸部分“pl” 被固定)’其是“BD管理資訊”之一部分並且是儲存情節(播 放序列)之播放列表資訊的檔案。各個播放列表具有一檔 案。 (iv) XXX.PROG(“XXX”是可變的,並且該延伸部分 20 “PROG”被固定),其是“BD播放程式,,之一並且是儲存依據 播放列表被備妥之播放控制資訊的檔案。對應的播放列表 依據檔案個體名稱(依據一“XXX”之匹配)而被辨識。 (v) YYY.VOB(“YYY”是可變的,和該延伸部分“v〇B” 被固定),其是“AV資料”之一並且是儲存ν〇Β(相同於背景 60 技術中所說明之VOB)的檔案。各個v〇B具有一檔案。 (vi) YYY.VOBI(“YYY”是可變的,且該延伸部分 “V〇Bl”被固定),其是“BD管理資訊,,之—部分並且是儲存 關於為AV資料之VOB的串流管理資訊之檔案。該對應的播 5放列表依據一檔案個體名稱(依據“YYY”之一匹配)被辨識。 (vii) ZZZ.PNG(“ZZZ”是可變的,並且該延伸部分 “pNG”被固定)’其是“AV資料”之一並且是儲存用以構成子 標題和選單之影像資料PNG(其是利用W3C被標準化之— 圖像格式並且被稱為“ping”)的檔案❶各個png影像具有— 10 檔案。 BD導航資料(BD管理資訊)之結構將參考第33圖至第 38圖而被說明。 第33圖是展示VOB管理資訊檔案(“γγγ.νΟΒΙ”)之内 部結構的圖形。該VOB管理資訊具有VOB之串流屬性資訊 15 (Attribute)以及一時間映圖(TMAP)。該串流屬性分別地具 有視訊屬性(Video)以及音訊屬性(Audio#0至Audio#m)。尤 其是於音訊串流之情況中,因一VOB在相同時間具有多數 音訊串流,資料欄之存在或不存在利用音訊串流數目 (Number)被指示。 2〇 下面是分別地被儲存於攔中之視訊屬性(Video)以及分 別攔可具有的數值。 ⑴壓縮格式(編碼):MPEG-1 ; MPEG-2 ; MPEG-4 ; 以及MPEG-4 AVC(先進視訊編碼)。 (ii)解析度:1920x1080 ; 1440x1080 ; 1280x720 ; 61 1324338 720x480 ;以及720x565。 (iii) 長寬比率(Aspect) : 4比3 ;以及16比9。 (iv) 像框率(Framerate) : 60 ; 59.94(60/1.001) ; 50 ; 30 ; 29。97(30/1.001) ; 25 ; 24 ;以及23.976(24/1.001)。 5 下面是分別地被儲存於欄中之音訊屬性(Audio)以及該 分別欄可具有的數值。 ⑴壓縮格式(編碼):AC3 ; MPEG-1 ; MPEG-2 ;以及 LPCM。 • (ii)頻道數(Ch) : 1至8 10 (iii)語言屬性(語言): 時間映圖(TMAP)是用以依據VOBU而儲存資訊之列 表,並且具有VOB所具有之VOBU數目以及VOBU資訊之分 別的片段(VOBU#l至VOBU#n)。該VOBU資訊之分別的片 段包含一 VOBU之頂部TS封包的位址(I圖像之開始位址)之 15 1_開始(I_start) '和一關於I圖像之結束位址的偏移位址 (I_end)、以及I圖像之播放開始時間(PTS)。 ® 第34圖是展示VOBU資訊之詳細說明的圖形。如廣泛 地所習知,因變量位元率壓縮可被進行於MPEG視訊串流上 以便記錄高品質之視訊串流,在播放時間和資料大小之間 20 沒有比例性。另一方面,因一固定之位元率壓縮被進行於 一音訊壓縮標準之AC3中,在時間和位址之間的關係可自 一主要的表示式被獲得。但是,於MPEG視訊資料之情況 中,各個像框具有一固定之顯示時間,例如,於NTSC之情 況中,一像框具有1/29.97秒的顯示時間,但是在壓縮各個 62 像框之後的資料大小’依據影像特點、或被使用於壓縮中 之圖像型式(例如’ I圖像、p圖像或B圖像)而大大地改變。 因此’於一MPEG視訊串流之情況中,其是不可能使用一主 要表不式代表在時間和位址之間的關係。 可被預期,不可能使用在其中MPEG視訊資料被多工化 之一MPEG系統串流,亦即’ 一VOB,中主要表示式代表在 時間和資料大小之間的關係。因此,一時間映圖(TMAP)連 結時間與VOB中之位址。 以此方式,於其中給予時間資訊之情況中,時間所屬 之VOBU首先被搜尋(依序地利用VOBU的PTS),即時地在 此時之前的PTS跳躍進入TMAP具有之VOBU中(利用I_start 被指定之位址),解碼開始於VOBU之頂部I圖像,並且顯示 開始於對應至該時間之圖像。 接著,將參考第35圖說明播放列表資訊(“XXX.PL”)之 内部結構。該播放列表資訊包含一胞元列表(CellList)以及 一事件列表(EventList)。 該胞元列表(CellList)是播放列表中之一播放胞元序 列,並且該等胞元依這列表中指示之說明順序而被重播。 胞元列表(CellList)之内容是胞元數目(Number)以及各個胞 元(胞元#1至胞元#n)之資訊。 胞元資訊(Cell#)具有一 VOB檔案名稱(VOBName)、 VOB中之開始時間(in)和結束時間(〇ut)、以及子標題 (SubtitleTable)。開始時間(in)和結束時間(Out)被表示為各 個VOB中之像框數。可藉由使用上述之時間映圖(TMAP) 1324338 而獲得供播放所需要的VOB資料位址。 該子標題列表(SubtitleTable)是一列表,其儲存與v〇B 同步被重播之子標題資訊。相同於音訊之情況,多數語言 被包含於子標題中。該子標題列表(SubtitleTable)之第一資 5 訊包含語言數目(Number)以及下面依據語言基礎被備妥的 列表(Language#l 至Language#k) ° 各語言列表(Language#)包含語言資訊(Lang),將分別 地被顯示之子標題的子標題資訊>!段數目(Number)、以及 將分別地被顯不之子標題的子標題資訊(Speech# 1至 10 Speech#』)。該子標題資訊(Speech#)包含一影像資料檔案名 稱(Name)、子標題顯示開始時間(In)、子標題顯示結束時間 (Out)以及一子標題顯示位置(Position)。 事件列表(EventList)是定義發生於播放列表中之各事 件的列表。該事件列表包含事件數目(Number)和分別的事 15 件(Event# 1至Event#m)。各個事件(Event#)包含一事件型式 (Type)、一事件ID(ro)、一事件發生時間(Time)以及一事件 持續(Duration) 〇 第36圖是一事件管理器列表(“XXX pR〇G”),其具有依 據播放列表被備妥之事件管理器(其是用於選單選擇之時 20間事件以及使用者事件)。該事件管理器列表包含被定義之 事件管理器/程式之數目(Number)以及分別事件管理器/程 式(Program#l至Program#n)。各個事件管理器/程式 (Program#)之内谷疋一事件營理器(<event_handier>tag)和 與早先說明的事件ID成對之事件管理器ID(ID)之定義,並 64 且接著是,說明於跟隨函數(Function)之“U”中之程式。被 儲存於早先說明之“XXX PL”的事件列表(EventList)中之事 件出乂6111#1至£乂611诂1^1)使用“父又乂.?尺〇〇,,事件管理器之一 ID(ID)被指定。 接著,關於該全部BD碟片之資訊(“BD.INFO”)的内部 結構將參考第37圖被說明。關於全部BD碟片之資訊包含一 標題列表(TitleList)和用於總體事件的一事件列表 (EventList)。 標題列表(TitleList)包含碟片標題數目(Number)以及接 在標題數目之後的標題資訊(Title#i至Title#n)片段。該分別 的標題資訊(Title#)片段包含被包含於標題中之一播放列表 (PLTable)以及該標題中之一章節列表(ChapterList)。該播放 列表(PLTable)包含該標題中之播放列表數目(Number)以及 為播放列表檔案名稱之播放列表名稱(Name)。 章節列表(ChapterList)包含被包含於標題中之章節數 目(Number)以及章衰[i資訊(Chapter#l至Chapter#n)之片段。 章節資訊(Chapter#)之各個片段包含被包含於章節中之一 胞元列表(CellTable) ’並且該胞元列表(CellTable)包含胞元 數目(Number)以及胞元項目資訊(CellEntry#l至CellEntry#k) 之片段。該胞元項目資訊(CellEntry#)包含有含該等胞元之 播放列表名稱以及該播放列表中之胞元數目。 事件列表(EventList)包含總體事件數目(Number)以及 總體事件資訊之片段。應注意到,首先被定義之總體被稱 為第一事件(FirstEvent),並且是被稱為在61:)碟片被塞進入 播放機之後的第一事件。對於總體事件之事件資訊僅具有 一事件型式(Type)和一事件ID(ID)。 第38圖是總體事件管理器程式(“BD.PROG”)之列表。 这列表之内容是相同於上述第36圖之事件管理器列表的内 5 容。 於以上述所提之BD-ROM格式而儲存上述特技播放資 。凡之h況中’考慮一包含一個或多個隨機存取單元RAU之 V〇BU,並且特技播放資訊被包含於VOBU頂部AU中。注 思到,於該MPEG-4 AVC中,其包含有特技播放資訊被儲存 10 於其中之NAL單元。 注意到,特技播放資訊可被儲存於BD管理資訊中。例 如,可能利用延伸VOB管理資訊之時間映圖而儲存依據 VOBU被備妥之特技播放資訊。同時,也可能定義用以儲存 該特技播放資訊之新的映圖。 15 同時’也可能儲存該特技播放資訊進入VOBU或BD管 理資訊中。
同時’也可能僅儲存該特技播放資訊原定值進入該BD 官理貢訊中’並且僅於其中關於v〇BU之特技播放資訊是不 同於該原定數值之情況中,可能儲存該特技播放資訊進入 20 VOBU 中。
同時,也可能儲存一組或多組片段特技播放資訊之其 中-組進入該BD官理資訊作為_般在申流之間的資訊。該 VOBU可參考於祕存在該BD管理資訊中之特技播放資訊 片段之間的特技播放資訊之一片段。於此情況中,供v〇BU 66 1324338 所參考之特技播放資訊的索引資訊被儲存進入v〇BU單元 或該VOBU之管理資訊中。 (用於播放光碟之播放機) 第39圖概略地展示播放第31圖展示之BD碟片和其類 5似者的播放機之功能結構方塊圖。BD碟片201上之資料經 由光學拾取器202被讀取。該被讀取之資料依據其分別之資 料型式被發送至一專用的記憶體。該BD播放程式 (“BD.PROG”或“XXX.PROG”之内容)被發送至一程式記憶 體203。同時,該BD管理資訊(“BD.INFO”,“XXX.PL”或 10 “YYY.VOBI”)被發送至管理資訊記憶體204。同時,該AV 資料(“YYY.VOB”或“ZZZ.PNG”)也被發送至一 AV記憶體 205。 被記錄於程式記憶體203中之BD播放程式被程式處理 單元206所處理。同時’被記錄於管理資訊記憶體2〇4中之 15 BD管理資訊也被管理資訊處理單元207所處理。同時,被 記錄於AV記憶體205中之AV資料也被呈現處理單元2〇8所 處理。 程式處理單元206接收將利用管理資訊處理單元2〇7被 播放之播放列表的資訊以及事件資訊(例如,程式執行時 20序)’並且進行該程式之處理。同時,可能動態地改變將利 用該程式被播放之播放列表。這可藉由發送播放列表之播 放指令至官理資訊處理單元2〇7而被實現。程式處理單元 206自使用者接收-事件,換言之,經由遠處控制器而接收 一要求,並且於其中有對應至該使用者事件的一程式之情 67 1324338 況中,其執行該程式。 管理資訊處理單元207自程式處理單元206接收一指 令、分析該播放列表和對應至該播放列表的VOB之管理資 訊、並且指示該呈現處理單元208播放該目標AV資料。同 5 時,該管理資訊處理單元2〇7也自該呈現處理單元208接收 標準時間資訊、依據時間資訊以指示該呈現處理單元2 〇 8停 止播放該AV資料。同時,該管理資訊處理單元207也產生 一事件以通知程式處理單元206有關該程式之執行時序。 呈現處理單元208具有一編碼器’其可分別地處理視 10訊、音訊、子標題/影像(靜態圖像)。其依據來自管理資訊 處理單元207之指令而解碼且輸出該AV資料。於視訊資 料、和子標題/影像之情況中,它們被解碼且接著於分別的 專用平面(亦即,視訊平面210和影像平面209)中被產生。在 那之後,综合處理單元211進行視訊之綜合處理,並且輸出 15 該視訊至一顯示裝置,例如,TV。 在特技播放(例如,跳躍播放、可變速播放以及反向播 放)之時,該呈現處理單元208詮釋使用者所要求之特技播 放操作,並且通知管理資訊處理單元2〇7關於該資訊(例 如,播放速率)。該管理資訊處理單元2〇7分析被儲存於 2〇 V〇BU頂部AU中之特技播放資訊並且決定將被解碼和被顯 示之AU,因而被使用者所指定之特技播放操作可確實被進 行。注意到,該管理資訊處理單元2〇7可獲得該特技播放資 訊,將它輸出至該呈現處理單元208並且決定呈現處理單元 208中將被解碼之AU和將被顯示之AU。 68 1324338 注意到,一獨立電腦系統可容易地執行這實施例所展 示之處理程序,其藉由記錄用以實現這實施例中所展示之 動畫編碼方法和動畫解碼方法的程式進入一記錄媒體(例 如’軟碟)中而執行5玄處理程序。 5 第4〇A至40C圖是展示電腦系統如何使用被記錄於記 錄媒體(例如,軟碟)中之程式以執行這實施例之動畫編碼方 法和動畫解碼方法。 第40A圖展示作為記錄媒體之軟碟的實際格式之範 例。第40B圖展示一軟碟和前視圖以及軟碟外觀之截面圖。 10軟碟(FD)被包含於一框盒F中,多數個軌線(Tr)同軸地自碟 月外徑進入内徑地被形成於碟片表面上,並且各個軌線於 角度方向被分割成為16區段(se)。因此,於儲存上述程式之 軟碟的情況中,該程式被記錄於於軟碟(FD)上被分配供其 儲存之區域中0 15 时,第4QC®展示供用於記錄和播放在軟碟上之程式 的結構。於重編碼上面用於實現動晝編碼方法和動畫解碼 方法之程式於軟碟FD上之情況中,—電腦系統Cs經由一軟 碟驅動器而將該程式寫入於軟碟上。同時,於使用軟碟中 之程式以構成上面用於實現該動晝編碼方法和該動畫解碼 20方法之動晝編碼裝置和動畫解碼裝置的情況中,該程式自 該軟碟^由軟碟驅動器被讀取,並且被傳送至該電腦系統。 /主思到,上面已說明使用軟碟作為記錄媒體但是程 式可被記錄於光碟上。同時,記錄媒體也不受此限制只 要其可C錄該程式之其他的記_體(例如,—忙卡一 69 R0M卡亦可被使用。 枣至目如為止,本發明之動畫串流產生裝置、動畫編碼 動晝多工裝置以及動畫解碼裝置已依據實施例而被 呪明,作β 士 v 5 ^ 一疋本發明是不受限制於這實施例。熟習本技術者 愿明1^5 > jj 依據這實施例本發明將可包含許多變化,並且此 —遂化皆在本發明主題範圍之内。 丨如,本發明這實施例包含下列裝置:⑴一動畫串流 產生罗番. 、》、,具有動晝編碼裝置和動晝解碼裝置之一者的一 10置碟。己錄裝置;一動晝傳送裝置;一數位電視廣播發送裝 ,網路伺服器;一通訊裝置;一移動式資訊终端機; 及其類似者;以及⑼具有動晝解碼裝置之動畫接收裝置; 數位電視廣播接收裝置;一通訊裝置;-移動式資訊終 端機;以及其類似者。 注意到,第21圖、第23圖、第27圖以及第39圖所展示 15之分別的功能方塊一般被實現而作為LSI,其是一大尺度積 體電路。各功能方塊可被構成於一個別的晶片,或功能方 塊之一部份或全部可被整合於一單一晶片(例如,除了記憶 體之外的功能方塊可被構成於一單一晶片)。該積體電路於 此被稱為LSI,但是其亦可依據該整合位準而被稱為1(:、系 20統LSI、特級LSI'或超級LSI。同時,形成它們於積體電路 之方法也是不受限制於將它們形成於LSI之方法,其可藉由 專用電路或一般的處理器而被實現。同時,也可能使用⑴ 一可重組處理器,於其中電路胞元之連接或設定可被重 組,或使用(ii)一可程控之FPGA(場可程式閘陣列),在將它 70 們形成於一LSI之後。進一步地,當半導體技術進一步地被 發展或任何衍生技術出現時’其中將它們形成於一積體電 路以取代將它們形成於一LSI之技術出現之情況中,則功能 方塊將可使用這樣的新技術而形成於一積體電路。生物技 5術應用是很可能地。同時’在分別的功能方塊之中,將被 編碼或被解碼之圖像資料所儲存之一儲存單元(一圖像記 憶體)可分別地被組態,以取代被包含於一個別晶片中。 雖然,僅本發明一實施例範例被詳細地說明,熟習本 技術者應明白,本發明實施例範例可有許多的修改,而不 10 脫離本發明之新穎技術和優點。因此,所有此等修改將被 包含於本發明範圍之内。 工業應用性 本發明是可應用於,例如:一動晝串流產生裝置,其 產生以特技播放被播放之動畫;一動畫編碼裝置,其藉由 15 編碼而產生將以特技播放被播放之動畫;一動畫多工裝 置’其藉由封包多工化而產生將以特技播放被播放之動 晝;以及一動晝解碼裝置,其以特技播放播放該動晝,並 且尤其是,作為構成一系統之裝置,該系統是用以使用一 特技播放模式(例如,可變速播放和反向播放)而播放 20 MPEG-4AVC串流,此一裝置是,例如,一光碟相關裝置, 其是特技播放功能一般所聚焦之裝置。 I:圖式簡單説明】 第1A和1B圖是分別地展示背景技術之MPEG-2串流結 構的圖形, 71 1324338 第2A和2B圖是分別地展示背景技術之MPEG-2 GOP結 構的圖形; 第3A和3B圖是分別地展示背景技術之MPEG-4串流結 構的圖形, 5 第4圖是展示習見編碼裝置結構之方塊圖; 第5圖是展示習見解碼裝置結構之方塊圖; 第6A和6B圖是分別地展示習見MPEG-4 AVC串流之預 估結構範例的圖形; 第7圖是展示習見MPEG-4 AVC串流之另一預估結構範 10 例的圖形; 第8 A和8B圖是分別地展示MPEG-4 AVC串流結構之圖 形; 第9A至9D圖是展示隨機存取單元RAU中將被解碼之 AU的第一範例圖形; 15 第1〇A至10〇圖是展示隨機存取單元RAU中將被解碼 之AU的第二範例圖形; 第11A至11C圖是展示隨機存取單元RAU中將被解碼 之AU的第三範例圖形; 第12A至12F圖是展示指定在隨機存取單元RAU中將 20 被解碼之AU的方法之範例圖形; 第13A圖是展不一指不變速播放資訊的列表之語法範 例圖形,且第13B圖是展示一資料儲存單元之圖形; 第14圖是指示變速播放資訊之列表的延伸範例圖形; 第15A至15C圖是展不隨機存取單元尺八11中1圖像和p 72 圖像的AU作為變速播放資訊之範例圖形; 第16A至16C圖是在使用AU之優先順序作為變速播放 資訊時其中緩衝器延遲時間被使用作為優先順序指示器之 範例圖形; 第17A和17B圖是分別地展示共存於分別的RAU中之 像框結構AU和像場結構AU的範例之圖形;第17C圖是一種 圖形’其展示RAU中各AU之結構之第一映圖(RAU_mapl) 的語法範例;第17D圖是一種圖形,其展示第17B圖之RAU 的RAU_mapl ;第17E圖是一種圖形,其展示關於第17B圖 之隨機存取單元RAU的RAU_map;第17F圖是一種圖形, 其展示一像場組對之各個像框或各個圖像的編碼型式之第 二映圖(RAU_map2)之語法範例; 第18A圖至第18C圖是展示另一映圖範例作為播放資 訊之圖形; 第19圖是用以指示隨機存取單元RAU中邊緣資訊之方 法的圖形; 第20A圖和第20B圖是展示隨機存取單元RAU中之圖 像的預估結構範例之圖形; 第21圖是展示本發明之動畫編碼裝置結構的方塊圖; 第22圖是一動畫編碼方法之流程圖; 第23圖是展示本發明一動晝多工裝置結構之方塊圖; 第24A圖和第24B圖是展示支援資訊hlp範例内容之圖 形; 第25圖是展示一 NAL單元範例之圖形,於其中,特技 1324338 播放資訊被儲存於該支援資訊HLP中; 第26圖是展示動晝多工裝置操作之流程圖; 第27圖是展示本發明動畫解碼裝置結構之方塊圖; 第28圖是習見圖像解碼方法的流程圖;
5 第29圖是決定將以本發明動晝解碼方法被解碼之AU 的流程圖; 第30圖是一種流程圖,其展示在將被解碼之AU不匹配 於將以本發明動晝解碼方法被顯示之AU的情況中所被進 行之處理; 10 第31圖是展示HD-DVD之資料階系的圖形; 第32圖是HD-DVD上之邏輯空間的結構圖; 第33圖是VOB資訊檔案之結構圖; 第34圖是時間映圖之圖形; 第35圖是播放列表檔案之結構圖; 15 第36圖是對應於播放列表之程式擋案的結構圖; 第37圖是展示整體BD碟片之管理資訊檔案的結構圖; 第3 8圖是用以記錄一廣域事件處理器之擋案的結構 圖; 第39圖是展示HD-DVD播放器概要之方塊圖;以及 20 第40A至40C圖之圖形展示用以儲存實現本發明動晝 編碼方法和動畫解碼方法之程式的記錄媒體。 【主要元件符號說明】 1…動晝編碼裝置 100…動畫編碼裝置 2…動畫解碼裝置 101…串流屬性決定單元 74 1324338 102…編碼單元 200…動晝解碼裝置 103…管理資訊產生單元 201...BD 碟片 104…一般管理資訊產生單元 202…光學撿選機 105···播放支援資訊產生單元 203…程式記錄記憶體 106···多工單元 204…管理資訊記錄記憶體 107…儲存單元 205…AV記錄記憶體 108···動畫多工裝置 206…程式處理單元 111-_BD播放程式 207…管理資訊處理單元 112".BD管理資訊(情節,AV 208…呈現處理單元 管理資訊) 209…影像平面 113 …AV 資料(MPEG/PNG) 210···視訊平面 114...BD 碟片 211…綜合處理單元 75

Claims (1)

1324338 第94113458號專利申請 ”申吻專利範圍修正本修正曰期:98玍 , Λ攻由 ; ---------- 亍U月16日 十、甲請專利範固:月★沒正六 1. 一種動畫串流產 一 一: 製成之隨機存^ 係用以產生包含―由數個圖像 -在解碼順序中Γ之一動畫争流’該等數個圖像包含 為—起始圖像之I圖像,該動晝串流產 生裝置包含有: A 一第、扁碼單元,係組構以將包含於該隨機存取 元之第一増補瓷 ^17 Μ 訊編碼,該第一增補資訊係為該等數個 圖像^自的圖像型式資訊的片段,且該等圖像型式資訊 的片段被依—對應於該等數個圖像之該解碼順序之順 > 序放置; 产第一編碼單疋,係組構以將包含於該隨機存取單 兀之第—增補貝§fL編碼該第二增補資訊係為該等數個 圖像各自的圖像結構資訊的片段且該等圖像結構資訊 的片段被依-對應於該等數_狀該解碼順序之順 序放置;及 產生單元,係組構以藉由將該經編碼的第一及第 二增補資訊添加至該1圖像而產生-動畫串流, ,、中4等數個圖像各自的該圖像型式資訊指出下 列之-者:執行框内編碼之叫圖像;就編碼之一基本 單元之每—區塊參照1 _像執行框間編碼之- P圖 像;就編碼之-基本單^之每—區塊參照2賴像執行 框間編碼之—參照B圖像,且該參照B圖像可被其他 圖像參照;及就編碼之—基本單元之每—區塊來照2傾 圖像執行框間編碼之_非參照B圖像,且該非參照B 76 1324338 圖像無法被其他圖像參照,及 該等數個圖像各自的該圖像結構資訊包含下列之 一者:指出該圖像具有一像場結構的資訊;指出該圖像 具有一用於以二個顯示場的形式來顯示該圖像的第一 5 像框結構的資訊;及指出該圖像具有一用於以三個顯示 場的形式藉由在使用3-2拉降時重複地顯示一第一顯示 場來顯示該圖像的第二像框結構的資訊。 2. —種動晝串流產生方法,係用以產生包含一由數個圖像 製成之隨機存取單元之一動晝串流,該等數個圖像包含 10 一在解碼順序中為一起始圖像之I圖像,該動畫串流產 生方法包含: 將包含於該隨機存取單元之第一增補資訊編碼,該 第一增補資訊係為該等數個圖像各自的圖像型式資訊 的片段,且該等圖像型式資訊的片段被依一對應於該等 15 數個圖像之該解碼順序之順序放置; 將包含於該隨機存取單元之第二增補資訊編碼,該 第二增補資訊係為該等數個圖像各自的圖像結構資訊 的片段,且該等圖像結構資訊的片段被依一對應於該等 數個圖像之該解碼順序之順序放置;及 20 藉由將該經編碼的第一及第二增補資訊添加至該I 圖像而產生一動畫串流, 其中該等數個圖像各自的該圖像型式資訊指出下 列之一者:執行框内編碼之一I圖像;就編碼之一基本 單元之每一區塊參照1幀圖像執行框間編碼之一P圖 77 1324338 像,就編碼之—基本單 框間編碼之-參照B圖像,且圖像執行 像參照;及就編碼之—基其他圖 像執行框間編碼之一非灸叫圖傻母^參照圖 無法被其他圖像參照,及…、且該非參照B圖像 —該,數個圖像各自的該圖像結構資訊包含下列之 —者·指出該圖像具有一像埸 1右用私、 構的資訊;指出該圖像 /、有-用於L個顯示場的形式來顯示該圖像的第一 ίο :框結構的資訊;及指出該圖像具有一用於以三個顯示 %的形式藉由在使用3_2拉降時重複地顯示一第一顯示 場來顯示該圖像的第二像框結構的資訊。 , 15 3. -種動畫解碼裝置’係用以將包含—由數個圖像製成之 隨機存取早π之-動畫串流予以解褐及播放該經解碼 的動畫串流,該等數個圖像包含—在解碼順序中為一起 始圖像之1圖像,該動畫解碼裝置包含有: -指示取得單元’係組構以取得—指出應被執行的 特技播放指示; -分析單元,係組構以藉由解多工自該頂像之第 一及第二增補資訊來分析每一隨機存取單元之該第一 及第-增補資訊,該第-及第二増補資訊係包含於該隨 機存取單it中且分別為該等數個圖像各自的圖像型式 資訊的片段及為該等數個Η像各自的圖像結構資訊的 片段;及該圖像型式資訊的片段及該圖像結構資訊的片 段被依一對應於該等數個圖像之解碼順序之順序放置; 78 1324338 一播放圖像規格單元,係組構以根據該分析單元所 執行的分析之一結果,在包含於該隨機存取單元的圖像 之中,指定該特技播放所需的圖像;及 一解碼單元,係組構以將該播放圖像規格單元所指 5 定之該等圖像解碼及播放該經解碼的圖像, 其中該等數個圖像各自的該圖像型式資訊指出下 列之一者:執行框内編碼之一 I圖像;就編碼之一基本 單元之每一區塊參照1幀圖像執行框間編碼之一 P圖 像;就編碼之一基本單元之每一區塊參照2幀圖像執行 10 框間編碼之一參照B圖像,且該參照B圖像可被其他圖 像參照;及就編碼之一基本單元之每一區塊參照2幀圖 像執行框間編碼之一非參照B圖像,且該非參照B圖像 無法被其他圖像參照,及 該等數個圖像各自的該圖像結構資訊包含下列之 15 一者:指出該圖像具有一像場結構的資訊;指出該圖像 具有一用於以二個顯示場的形式來顯示該圖像的第一 像框結構的資訊;及指出該圖像具有一用於以三個顯示 場的形式藉由在使用3-2拉降時重複地顯示一第一顯示 場來顯示該圖像的第二像框結構的資訊。 20 4. —種動畫解碼方法,係用以將包含一由數個圖像製成之 隨機存取單元之一動畫串流予以解碼及播放該經解碼 的動畫串流,該等數個圖像包含一在解碼順序中為一起 始圖像之I圖像,該動晝解碼方法包含: 取得一指出應被執行的特技播放指示; 79 1324338 藉由解多工自該〗圖像之第一及第二增補資訊來分 析每一隨機存取單元之該第-及第二增補資訊,該第一 及第二增補資訊係包含於該隨機存取單元中且分別為 該等數個圖像各自的圖像型式資訊的片段及為該等數 個圖像各自的圖像結構資訊的片段;及該圖像型式資訊 的片段及該圖像結構資訊的片段被依__對應於該等數 個圖像之δ亥解碼順序之順序放置; 根據該分析步驟中所執行的分析之—結果,在包含 ίο 於該隨機存取單元的®像之中,狀該特㈣放所需的 圖像;及 將遠指定步驟中所指定之該等圖像解碼及播放該 經解碼的圖像, 其中該等數個圖像各自的該圖像型式資訊指出下 列之-者:執行框内編碼之叫圖像;就編碼之〆基本 15 單元之每—區塊參照〗_像執行框間編碼之-Ρ圖 像;就編碼之—基本單元之每-區塊參照2t貞圖像執行 框間編碼之一參照B圖像,且該參照B圖像可被其他圖 像參照,·及就編碼之_基本單^之每—區塊參照⑽圖 20 像執行框間編碼之—非參則圖像,且該非參照B圖像 無法被其他圖像參照,及 4等數個圖像各自的軸像結構資訊包含下列之 —者.指出該圖像具有-像場結構的資訊;指出該圖像 :有-用於以二個顯示場的形式來顯示該圖像的第一 框結構的資訊;及指出該圖像具有一用於以三個顯示 80 1324338 場的形式藉由在使用3·2拉降時重複地顯示一第一顯示 場來顯示該圖像的第二像框結構的資訊。 5. —種記錄方法,係用於將包含一由數個圖像製成之隨機 存取單元之一動畫串流記錄到一記錄媒體之上,該等數 5 個圖像包含一在解碼順序中為一起始圖像之I圖像,該 記錄方法包含: 將包含於該隨機存取單元之第一增補資訊編碼,該 第一增補資訊係為該等數個圖像各自的圖像型式資訊 的片段,且該等圖像型式資訊的片段被依一對應於該等 10 數個圖像之該解碼順序之順序放置; 將包含於該隨機存取單元之第二增補資訊編碼,該 第二增補資訊係為該等數個圖像各自的圖像結構資訊 的片段,且該等圖像結構資訊的片段被依一對應於該等 數個圖像之該解碼順序之順序放置; 15 藉由將該經編碼的第一及第二增補資訊添加至該I 圖像而產生一動晝串流;及 將該動晝串流記錄到該記錄媒體之上, 其中該等數個圖像各自的該圖像型式資訊指出下 列之一者:執行框内編碼之一 I圖像;就編碼之一基本 20 單元之每一區塊參照1幀圖像執行框間編碼之一 Ρ圖 像;就編碼之一基本單元之每一區塊參照2幀圖像執行 框間編碼之一參照Β圖像,且該參照Β圖像可被其他圖 像參照;及就編碼之一基本單元之每一區塊參照2幀圖 像執行框間編碼之一非參照Β圖像,且該非參照Β圖像 81 無法被其他圖像參照,及 該等數個圖像各自的該圖像結構資訊包含下列之 者.指出該圖像具有一像場結構的資訊;指出該圖像 5 具有用於以二個顯示場的形式來齡該圖像的第- ,框結構的資訊;及指出該圖像具有—用於以三個顯示 昜的幵/式藉由在使用3_2拉降時重複地顯示一第一顯示 場來顯示該圖像的第二像框結構的資訊。 6.—種動畫解碼系統,其包括: 1〇 —記錄媒體’係組構以儲存包含-由數個圖像製成 之隨機存取單%之—動晝串流,該等數個圖像包含一在 解碼順序中為"起始圖像之I圖像;及 —從該記錄媒體讀出職晝㈣且將該動畫申流 解碼之動晝解碼裝置, 15 其中該動畫串流係'記錄在該記錄媒體之上, 15 、…包含於該隨機存取單元之第-增補資訊及第二增 補資訊係添加至該1圖像,該第一增補資訊係為該等數 個圖像各自的圖像型式資訊的片段,該第二增補資訊係 為該:數個圖像各自的圖像結構資訊的片段且該圖像 型式資訊的片段及該圖像結構資訊的片段被依一對應 2〇 ⑽等數_像之該解碼順序之順序放置, 該等數個圖像各自的該圖像型式資訊指出下列之 一者:執行框内編碼之-I圖像;就編碼之一基本單元 之每:區塊亡照u貞圖像執行框間編碼之一 Ρ圖像;就編 碼之一基本單元之每—區塊參照2㈣像執行框間編瑪 82 1324338 之一參照B圖像,且該參照B圖像可被其他圖像參照; 及就編碼之一基本單元之每一區塊參照2幀圖像執行框 間編碼之一非參照B圖像,且該非參照B圖像無法被其 他圖像參照’及 5 該等數個圖像各自的該圖像結構資訊包含下列之 一者:指出該圖像具有一像場結構的資訊;指出該圖像 具有一用於以二個顯示場的形式來顯示該圖像的第一 像框結構的資訊;及指出該圖像具有一用於以三個顯示 場的形式藉由在使用3-2拉降時重複地顯示一第一顯示 10 場來顯示該圖像的第二像框結構的資訊, 其中該動晝解碼裝置包含: 一指示取得單元,係組構以取得一指出應被執行的 特技播放指示; 一分析單元,係組構以藉由解多工自該I圖像之該 15 第一及第二增補資訊來分析每一隨機存取單元之該第 一及第二增補資訊; 一播放圖像規格單元,係組構以根據該分析單元所 執行的分析之一結果,在包含於該隨機存取單元的圖像 之中,指定該特技播放所需的圖像;及 20 一解碼單元,係組構以將該播放圖像規格單元所指 定之該等圖像解碼及播放該經解碼的圖像。 83
TW94113458A 2004-04-28 2005-04-27 Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus TWI324338B (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2004134212 2004-04-28
JP2004165005 2004-06-02
JP2004251871 2004-08-31

Publications (2)

Publication Number Publication Date
TW200601281A TW200601281A (en) 2006-01-01
TWI324338B true TWI324338B (en) 2010-05-01

Family

ID=34971443

Family Applications (2)

Application Number Title Priority Date Filing Date
TW98125882A TWI395207B (zh) 2004-04-28 2005-04-27 動畫串流產生裝置及方法、動畫解碼裝置及方法、在記錄媒體上記錄動畫串流之記錄方法及動畫解碼系統
TW94113458A TWI324338B (en) 2004-04-28 2005-04-27 Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW98125882A TWI395207B (zh) 2004-04-28 2005-04-27 動畫串流產生裝置及方法、動畫解碼裝置及方法、在記錄媒體上記錄動畫串流之記錄方法及動畫解碼系統

Country Status (13)

Country Link
US (5) US7843994B2 (zh)
EP (8) EP2182521A1 (zh)
JP (5) JP4071811B2 (zh)
KR (1) KR101148765B1 (zh)
CN (5) CN101697576B (zh)
AT (7) ATE555473T1 (zh)
CA (2) CA2542266C (zh)
DE (2) DE602005021926D1 (zh)
ES (7) ES2383654T3 (zh)
MY (2) MY144441A (zh)
PL (6) PL2207181T3 (zh)
TW (2) TWI395207B (zh)
WO (1) WO2005106875A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9264727B2 (en) 2011-06-29 2016-02-16 Panasonic Intellectual Property Corporation Of America Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US9271002B2 (en) 2011-06-24 2016-02-23 Panasonic Intellectual Property Corporation Of America Coding method and coding apparatus
US9363525B2 (en) 2011-06-28 2016-06-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9462282B2 (en) 2011-07-11 2016-10-04 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
TWI562592B (zh) * 2011-06-23 2016-12-11 Sun Patent Trust
US9525881B2 (en) 2011-06-30 2016-12-20 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9591311B2 (en) 2011-06-27 2017-03-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9794578B2 (en) 2011-06-24 2017-10-17 Sun Patent Trust Coding method and coding apparatus
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
US10439637B2 (en) 2011-06-30 2019-10-08 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus

Families Citing this family (94)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4002878B2 (ja) * 2003-01-17 2007-11-07 松下電器産業株式会社 画像符号化方法
ES2400955T3 (es) * 2004-10-07 2013-04-15 Panasonic Corporation Aparato de codificación de imágenes y aparato de decodificación de imágenes
DE602006013272D1 (de) 2005-01-10 2010-05-12 Hewlett Packard Development Co Bildcodierungsvorrichtung und bilddecodierungsvorrichtung
JP2006211274A (ja) * 2005-01-27 2006-08-10 Toshiba Corp 記録媒体、この記録媒体を再生する方法並びにその再生装置及び記録媒体に映像データを記録する記録装置並びにその記録方法
KR100770704B1 (ko) 2005-08-04 2007-10-29 삼성전자주식회사 픽쳐 스킵 방법 및 장치
US8670437B2 (en) 2005-09-27 2014-03-11 Qualcomm Incorporated Methods and apparatus for service acquisition
US8229983B2 (en) 2005-09-27 2012-07-24 Qualcomm Incorporated Channel switch frame
CN101300834A (zh) * 2005-11-03 2008-11-05 汤姆逊许可证公司 数字视频录制装置和方法
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
US9516326B1 (en) * 2005-12-09 2016-12-06 Nvidia Corporation Method for rotating macro-blocks of a frame of a video stream
FR2894739A1 (fr) * 2005-12-12 2007-06-15 Thomson Licensing Sa Procede de codage, procede de decodage, dispositif de codage et dispositif de decodage de donnees video
JP4736918B2 (ja) * 2006-04-11 2011-07-27 パナソニック株式会社 デジタル再生装置または再生プログラム
US8699583B2 (en) * 2006-07-11 2014-04-15 Nokia Corporation Scalable video coding and decoding
US20080068993A1 (en) * 2006-09-08 2008-03-20 Edgeware Ab Method and an apparatus for data streaming
US8826345B2 (en) * 2006-09-08 2014-09-02 Edgeware Ab Method and an apparatus for data streaming
US20080062869A1 (en) * 2006-09-08 2008-03-13 Edgeware Ab Method and an apparatus for data streaming
JP4947349B2 (ja) * 2006-11-10 2012-06-06 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
US8155207B2 (en) 2008-01-09 2012-04-10 Cisco Technology, Inc. Processing and managing pictures at the concatenation of two video streams
US20080115175A1 (en) * 2006-11-13 2008-05-15 Rodriguez Arturo A System and method for signaling characteristics of pictures' interdependencies
US8875199B2 (en) 2006-11-13 2014-10-28 Cisco Technology, Inc. Indicating picture usefulness for playback optimization
US8416859B2 (en) * 2006-11-13 2013-04-09 Cisco Technology, Inc. Signalling and extraction in compressed video of pictures belonging to interdependency tiers
AU2007319261B2 (en) * 2006-11-14 2010-12-16 Qualcomm Incorporated Systems and methods for channel switching
RU2009122503A (ru) 2006-11-15 2010-12-20 Квэлкомм Инкорпорейтед (US) Системы и способы для приложений, использующих кадры переключения каналов
CA2675955C (en) 2007-01-18 2013-07-23 Nokia Corporation Carriage of sei messages in rtp payload format
KR101396364B1 (ko) * 2007-01-24 2014-05-19 삼성전자주식회사 컨텐츠를 저장한 정보저장매체, 재생 방법 및 장치
US7995640B2 (en) * 2007-04-30 2011-08-09 Texas Instruments Incorporated Dynamic interpolation location
JP2008294638A (ja) * 2007-05-23 2008-12-04 Sony Corp 伝送システム、記録装置、伝送方法、記録方法、およびプログラム
US8804845B2 (en) 2007-07-31 2014-08-12 Cisco Technology, Inc. Non-enhancing media redundancy coding for mitigating transmission impairments
US8958486B2 (en) 2007-07-31 2015-02-17 Cisco Technology, Inc. Simultaneous processing of media and redundancy streams for mitigating impairments
US8718388B2 (en) 2007-12-11 2014-05-06 Cisco Technology, Inc. Video processing with tiered interdependencies of pictures
KR100951008B1 (ko) * 2007-12-17 2010-04-02 한국전자통신연구원 인터레이스 부호화에서의 실시간 비트율 제어 방법 및시스템
US8731065B2 (en) 2008-01-24 2014-05-20 Nec Corporation Dynamic image stream processing method and device, and dynamic image reproduction device and dynamic image distribution device using the same
US8416858B2 (en) 2008-02-29 2013-04-09 Cisco Technology, Inc. Signalling picture encoding schemes and associated picture properties
JP4577409B2 (ja) * 2008-06-10 2010-11-10 ソニー株式会社 再生装置、再生方法、プログラム、及び、データ構造
WO2009152450A1 (en) 2008-06-12 2009-12-17 Cisco Technology, Inc. Picture interdependencies signals in context of mmco to assist stream manipulation
US8699578B2 (en) 2008-06-17 2014-04-15 Cisco Technology, Inc. Methods and systems for processing multi-latticed video streams
US8705631B2 (en) 2008-06-17 2014-04-22 Cisco Technology, Inc. Time-shifted transport of multi-latticed video for resiliency from burst-error effects
US8971402B2 (en) 2008-06-17 2015-03-03 Cisco Technology, Inc. Processing of impaired and incomplete multi-latticed video streams
US20090323822A1 (en) * 2008-06-25 2009-12-31 Rodriguez Arturo A Support for blocking trick mode operations
ES2546091T3 (es) 2008-11-12 2015-09-18 Cisco Technology, Inc. Procesamiento de un programa de vídeo que tiene representaciones procesadas plurales de una señal de vídeo única para reconstrucción y emisión
FR2940737A1 (fr) * 2008-12-31 2010-07-02 Thomson Licensing Generation de flux de paquets de donnees video contenant des informations d'acceleration pour le decodage
JP4560143B2 (ja) * 2009-01-19 2010-10-13 パナソニック株式会社 符号化方法、復号方法、符号化装置、復号装置、プログラム、及び集積回路
WO2010096767A1 (en) * 2009-02-20 2010-08-26 Cisco Technology, Inc. Signalling of decodable sub-sequences
US20100218232A1 (en) * 2009-02-25 2010-08-26 Cisco Technology, Inc. Signalling of auxiliary information that assists processing of video according to various formats
US8782261B1 (en) 2009-04-03 2014-07-15 Cisco Technology, Inc. System and method for authorization of segment boundary notifications
US8949883B2 (en) 2009-05-12 2015-02-03 Cisco Technology, Inc. Signalling buffer characteristics for splicing operations of video streams
US8279926B2 (en) 2009-06-18 2012-10-02 Cisco Technology, Inc. Dynamic streaming with latticed representations of video
US9300969B2 (en) 2009-09-09 2016-03-29 Apple Inc. Video storage
WO2011068807A1 (en) * 2009-12-01 2011-06-09 Divx, Llc System and method for determining bit stream compatibility
TWI410135B (zh) * 2009-12-08 2013-09-21 Alticast Corp 在數位廣播系統中傳送/接收傳輸流的裝置與方法
US20110176611A1 (en) * 2010-01-15 2011-07-21 Yu-Wen Huang Methods for decoder-side motion vector derivation
US8254453B2 (en) * 2010-01-20 2012-08-28 Himax Media Solutions, Inc. Multi-format video decoder and related decoding method
JP5387430B2 (ja) * 2010-01-28 2014-01-15 株式会社Jvcケンウッド 動画像再生装置、動画像再生方法、及び、プログラム
US20110222837A1 (en) * 2010-03-11 2011-09-15 Cisco Technology, Inc. Management of picture referencing in video streams for plural playback modes
US8259808B2 (en) * 2010-03-25 2012-09-04 Mediatek Inc. Low complexity video decoder
TWI815295B (zh) 2010-04-13 2023-09-11 美商Ge影像壓縮有限公司 樣本區域合併技術
CN106412608B (zh) 2010-04-13 2019-10-08 Ge视频压缩有限责任公司 用于解码、生成数据流的方法和解码器
CN106358045B (zh) 2010-04-13 2019-07-19 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
BR112012026391B1 (pt) 2010-04-13 2020-12-15 Ge Video Compression, Llc Herança em amostra de arranjo em subdivisão multitree
JP5805991B2 (ja) * 2010-05-07 2015-11-10 トムソン ライセンシングThomson Licensing ピクチャ・シーケンスを符号化する方法、それに対応する再構築方法、および当該シーケンスを表す符号化データのストリーム
JP2011259110A (ja) * 2010-06-07 2011-12-22 Panasonic Corp 動画再生方法および動画再生装置
JP2012018727A (ja) * 2010-07-08 2012-01-26 Sony Corp 情報処理装置、および情報処理方法、並びにプログラム
JP5589654B2 (ja) * 2010-08-04 2014-09-17 三菱電機株式会社 映像音声再生装置、および映像音声再生方法
SG188199A1 (en) 2011-02-22 2013-04-30 Panasonic Corp Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
KR102112241B1 (ko) 2011-02-22 2020-05-19 타지반 투 엘엘씨 필터 방법, 동화상 부호화 장치, 동화상 복호 장치 및 동화상 부호화 복호 장치
US9516379B2 (en) 2011-03-08 2016-12-06 Qualcomm Incorporated Buffer management in video codecs
KR101803970B1 (ko) * 2011-03-16 2017-12-28 삼성전자주식회사 컨텐트를 구성하는 장치 및 방법
JP5341952B2 (ja) 2011-05-30 2013-11-13 株式会社東芝 ビデオサーバ及びデータ収録再生方法
PT2728861T (pt) * 2011-07-02 2017-10-17 Samsung Electronics Co Ltd Método e aparelho para multiplexar e desmultiplexar dados de vídeo para identificar o estado de reprodução de dados de vídeo
US8767824B2 (en) 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
RU2606304C2 (ru) 2011-07-19 2017-01-10 ТАГИВАН II ЭлЭлСи Способ фильтрации, способ декодирования и способ кодирования
CN103369314B (zh) * 2012-04-01 2018-02-16 中兴通讯股份有限公司 帧场信息的编码方法及解码方法、编码器和解码器
KR102094503B1 (ko) * 2012-04-15 2020-03-30 삼성전자주식회사 다계층 비디오 부호화 방법 및 장치, 다계층 비디오 복호화 방법 및 장치
US9979959B2 (en) 2012-04-20 2018-05-22 Qualcomm Incorporated Video coding with enhanced support for stream adaptation and splicing
KR102215438B1 (ko) * 2012-09-13 2021-02-15 엘지전자 주식회사 영상 부호화/복호화 방법 및 장치
US8989508B2 (en) * 2012-09-28 2015-03-24 Sharp Kabushiki Kaisha Electronic device for signaling a sub-picture buffer parameter
CN105340277B (zh) * 2013-08-22 2019-02-15 索尼公司 编码装置、编码方法、传输装置、解码装置、解码方法以及接收装置
US10230999B2 (en) 2013-12-16 2019-03-12 Lg Electronics Inc. Signal transmission/reception device and signal transmission/reception method for providing trick play service
JP6224522B2 (ja) * 2014-05-22 2017-11-01 日本電信電話株式会社 映像配信装置、映像配信方法及び映像配信プログラム
US9838697B2 (en) 2014-06-25 2017-12-05 Qualcomm Incorporated Multi-layer video coding
KR101528269B1 (ko) * 2014-09-04 2015-06-16 (주)브레인키즈 동영상 재생 방법
WO2016111199A1 (ja) * 2015-01-09 2016-07-14 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム、並びに記録媒体
KR101868203B1 (ko) * 2015-01-28 2018-07-20 한국전자통신연구원 스트림 처리 방법 및 장치
JP6883214B2 (ja) * 2015-09-15 2021-06-09 ソニーグループ株式会社 受信装置および方法、送信装置および方法
CN106792078A (zh) * 2016-07-12 2017-05-31 乐视控股(北京)有限公司 视频处理方法及装置
US10412383B2 (en) * 2017-08-15 2019-09-10 Google Llc Compressing groups of video frames using reversed ordering
TWI659647B (zh) * 2017-11-21 2019-05-11 晶睿通訊股份有限公司 影像播放設備及其影像播放方法
TWI665663B (zh) * 2018-08-22 2019-07-11 張維中 影音倒轉播放裝置與系統及其方法
CN109618186B (zh) * 2018-11-15 2021-01-01 中国航空工业集团公司洛阳电光设备研究所 一种采用fpga实现的h264/avc视频辅助增强信息封装电路
CN115136604A (zh) * 2019-12-23 2022-09-30 Lg电子株式会社 基于nal单元类型的图像或视频编码
US11792432B2 (en) * 2020-02-24 2023-10-17 Tencent America LLC Techniques for signaling and identifying access unit boundaries
KR20220156831A (ko) 2020-03-20 2022-11-28 바이트댄스 아이엔씨 서브픽처의 레퍼런스 픽처 목록에 대한 제약
KR20230002395A (ko) 2020-04-20 2023-01-05 바이트댄스 아이엔씨 레퍼런스 픽처 목록에 대한 제약
CN115943627A (zh) 2020-06-08 2023-04-07 字节跳动有限公司 对编解码视频图片中条带计数的约束

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL180006B1 (pl) 1994-02-28 2000-11-30 Sony Corp Sposób i urzadzenie do zapisu danych na nosniku zapisu PL PL PL PL PL PL
JP3365109B2 (ja) * 1994-12-28 2003-01-08 ソニー株式会社 データ再生装置及びデータ再生方法
JP3604186B2 (ja) 1995-02-16 2004-12-22 三菱電機株式会社 記録媒体の記録方法及び再生方法
JP3329979B2 (ja) * 1995-02-24 2002-09-30 株式会社日立製作所 光ディスク及び光ディスク再生装置
JPH08280009A (ja) 1995-04-06 1996-10-22 Matsushita Electric Ind Co Ltd 画像符号化装置および画像復号化装置および光ディスク
JP3146937B2 (ja) * 1995-07-13 2001-03-19 日本ビクター株式会社 高能率符号化された動画像情報から早送り,早戻し画像を再生する再生方法
JP3484834B2 (ja) * 1995-07-28 2004-01-06 ソニー株式会社 データ符号化/復号化方法および装置
US5757435A (en) * 1995-12-08 1998-05-26 C-Cube Microsystems, Inc. MPEG-2 inverse telecine circuit
JP4434326B2 (ja) 1997-03-19 2010-03-17 ソニー株式会社 映像再生方法及び映像再生装置
WO1999011063A1 (fr) 1997-08-21 1999-03-04 Sony Corporation Procede et dispositif d'enregistrement sur disque, procede et dispositif de lecture de disque et support d'enregistrement
CA2289958C (en) * 1998-11-19 2003-01-21 Tomoyuki Okada Information recording medium, apparatus and method for recording or reproducing data thereof
JP2000354224A (ja) * 1999-01-01 2000-12-19 Hitachi Ltd 画像データ記録方法および光ディスク再生方法
JP3805985B2 (ja) * 1999-02-18 2006-08-09 株式会社東芝 ストリームデータの情報記憶媒体、その記録方法、再生方法、記録装置および再生装置
CN1159917C (zh) * 1999-10-07 2004-07-28 汤姆森特许公司 在数字视频系统中生成特技模式的方法和设备
EP1148727A1 (en) * 2000-04-05 2001-10-24 THOMSON multimedia Method and device for decoding a digital video stream in a digital video system using dummy header insertion
KR100878926B1 (ko) 2001-01-16 2009-01-19 파나소닉 주식회사 정보기록장치, 정보기록방법 및 기록매체
JP3820155B2 (ja) 2001-01-16 2006-09-13 松下電器産業株式会社 情報記録装置および方法、情報記録プログラム、および情報記録プログラムを記録した記録媒体
JP2003009085A (ja) * 2001-06-20 2003-01-10 Mitsubishi Electric Corp デジタル信号記録装置および方法、デジタル信号再生装置および方法
US20030044166A1 (en) * 2001-08-31 2003-03-06 Stmicroelectronics, Inc. System for multiplexing video data streams in a digital video recorder and method of operating the same
US7218635B2 (en) * 2001-08-31 2007-05-15 Stmicroelectronics, Inc. Apparatus and method for indexing MPEG video data to perform special mode playback in a digital video recorder and indexed signal associated therewith
US6707984B2 (en) 2001-10-31 2004-03-16 Thomson Licensing S.A. Changing a playback speed for video presentation recorded in a modified film format
JP4423972B2 (ja) * 2002-04-02 2010-03-03 ソニー株式会社 データ記録装置および方法、データ再生装置および方法、プログラム格納媒体、並びにプログラム
US8406301B2 (en) * 2002-07-15 2013-03-26 Thomson Licensing Adaptive weighting of reference pictures in video encoding
US7376186B2 (en) 2002-07-15 2008-05-20 Thomson Licensing Motion estimation with weighting prediction
US7903742B2 (en) * 2002-07-15 2011-03-08 Thomson Licensing Adaptive weighting of reference pictures in video decoding
JP4477295B2 (ja) 2002-10-10 2010-06-09 古河電気工業株式会社 自動車ワイヤハーネス用アルミ電線
JP3975889B2 (ja) 2002-11-13 2007-09-12 松下電器産業株式会社 照光つまみ及びその製造方法
JP3718499B2 (ja) * 2002-11-29 2005-11-24 シャープ株式会社 動画像記録方法
JP4318478B2 (ja) 2002-12-27 2009-08-26 原子燃料工業株式会社 沸騰水型軽水炉用燃料集合体
CN1692654A (zh) * 2003-01-17 2005-11-02 松下电器产业株式会社 动态图像编码方法和动态图像解码方法
JP2003303476A (ja) 2003-03-03 2003-10-24 Pioneer Electronic Corp 情報記録媒体、その記録装置及び記録方法並びにその再生装置及び再生方法
EP1704720A1 (en) * 2004-01-16 2006-09-27 General Instrument Corporation Method, protocol, and apparatus for transporting advanced video coding content
US8391672B2 (en) * 2004-02-06 2013-03-05 Panasonic Corporation Recording medium, reproduction device, program, and reproduction method
TW200845724A (en) * 2004-06-02 2008-11-16 Matsushita Electric Ind Co Ltd Multiplexing apparatus and demultiplexing apparatus

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
USRE49906E1 (en) 2011-06-23 2024-04-02 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
USRE48810E1 (en) 2011-06-23 2021-11-02 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
USRE47547E1 (en) 2011-06-23 2019-07-30 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
TWI562592B (zh) * 2011-06-23 2016-12-11 Sun Patent Trust
USRE47537E1 (en) 2011-06-23 2019-07-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
US9794578B2 (en) 2011-06-24 2017-10-17 Sun Patent Trust Coding method and coding apparatus
US9271002B2 (en) 2011-06-24 2016-02-23 Panasonic Intellectual Property Corporation Of America Coding method and coding apparatus
US11758158B2 (en) 2011-06-24 2023-09-12 Sun Patent Trust Coding method and coding apparatus
US11457225B2 (en) 2011-06-24 2022-09-27 Sun Patent Trust Coding method and coding apparatus
US9635361B2 (en) 2011-06-24 2017-04-25 Sun Patent Trust Decoding method and decoding apparatus
US11109043B2 (en) 2011-06-24 2021-08-31 Sun Patent Trust Coding method and coding apparatus
US10182246B2 (en) 2011-06-24 2019-01-15 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10200696B2 (en) 2011-06-24 2019-02-05 Sun Patent Trust Coding method and coding apparatus
US10638164B2 (en) 2011-06-24 2020-04-28 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9591311B2 (en) 2011-06-27 2017-03-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9912961B2 (en) 2011-06-27 2018-03-06 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10687074B2 (en) 2011-06-27 2020-06-16 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9363525B2 (en) 2011-06-28 2016-06-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10154264B2 (en) 2011-06-28 2018-12-11 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10750184B2 (en) 2011-06-28 2020-08-18 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10237579B2 (en) 2011-06-29 2019-03-19 Sun Patent Trust Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US9264727B2 (en) 2011-06-29 2016-02-16 Panasonic Intellectual Property Corporation Of America Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US10652584B2 (en) 2011-06-29 2020-05-12 Sun Patent Trust Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US10903848B2 (en) 2011-06-30 2021-01-26 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10382760B2 (en) 2011-06-30 2019-08-13 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9794571B2 (en) 2011-06-30 2017-10-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10165277B2 (en) 2011-06-30 2018-12-25 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10439637B2 (en) 2011-06-30 2019-10-08 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9525881B2 (en) 2011-06-30 2016-12-20 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11792400B2 (en) 2011-06-30 2023-10-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10595022B2 (en) 2011-06-30 2020-03-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11356666B2 (en) 2011-06-30 2022-06-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11343518B2 (en) 2011-07-11 2022-05-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9854257B2 (en) 2011-07-11 2017-12-26 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9462282B2 (en) 2011-07-11 2016-10-04 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11770544B2 (en) 2011-07-11 2023-09-26 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10154270B2 (en) 2011-07-11 2018-12-11 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10575003B2 (en) 2011-07-11 2020-02-25 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus

Also Published As

Publication number Publication date
ES2383655T3 (es) 2012-06-25
CN1950907A (zh) 2007-04-18
ATE555474T1 (de) 2012-05-15
EP2207181A1 (en) 2010-07-14
ATE555476T1 (de) 2012-05-15
CN101697576A (zh) 2010-04-21
CN1950907B (zh) 2011-04-13
WO2005106875A1 (en) 2005-11-10
EP2207183B1 (en) 2012-04-25
CA2542266C (en) 2012-07-17
CN101778235B (zh) 2013-06-19
DE602005016663D1 (de) 2009-10-29
TW200601281A (en) 2006-01-01
JP4071811B2 (ja) 2008-04-02
ATE471562T1 (de) 2010-07-15
ES2383652T3 (es) 2012-06-25
EP1968063A1 (en) 2008-09-10
PL2207181T3 (pl) 2012-09-28
CA2542266A1 (en) 2005-11-10
US8254446B2 (en) 2012-08-28
US20080131079A1 (en) 2008-06-05
EP1743338B1 (en) 2009-09-16
CN101707723A (zh) 2010-05-12
US20080117988A1 (en) 2008-05-22
MY145551A (en) 2012-02-29
EP2182520A1 (en) 2010-05-05
ATE555473T1 (de) 2012-05-15
EP2182520B1 (en) 2012-04-25
US20080219393A1 (en) 2008-09-11
CN101778235A (zh) 2010-07-14
EP2182519B1 (en) 2012-04-25
MY144441A (en) 2011-09-15
ES2347385T3 (es) 2010-10-28
ATE555475T1 (de) 2012-05-15
JP4763824B2 (ja) 2011-08-31
EP2207182B1 (en) 2012-04-25
JP2007325289A (ja) 2007-12-13
PL1743338T3 (pl) 2010-04-30
PL2207182T3 (pl) 2012-09-28
EP2182521A1 (en) 2010-05-05
JP4910065B2 (ja) 2012-04-04
PL2182520T3 (pl) 2012-09-28
TWI395207B (zh) 2013-05-01
ES2383654T3 (es) 2012-06-25
EP2207181B1 (en) 2012-04-25
EP2207182A1 (en) 2010-07-14
JP2008295055A (ja) 2008-12-04
ES2388397T3 (es) 2012-10-15
CN101697576B (zh) 2012-07-11
KR101148765B1 (ko) 2012-05-25
EP1743338A1 (en) 2007-01-17
ES2330864T3 (es) 2009-12-16
JP2011019270A (ja) 2011-01-27
US20080118224A1 (en) 2008-05-22
CN101697575B (zh) 2012-05-30
US7809060B2 (en) 2010-10-05
KR20070007028A (ko) 2007-01-12
EP1968063B1 (en) 2010-06-16
US7843994B2 (en) 2010-11-30
US8130843B2 (en) 2012-03-06
TW200949824A (en) 2009-12-01
DE602005021926D1 (de) 2010-07-29
JP2007535187A (ja) 2007-11-29
ATE443327T1 (de) 2009-10-15
JP4614991B2 (ja) 2011-01-19
JP2010028860A (ja) 2010-02-04
EP2182519A1 (en) 2010-05-05
CA2811897A1 (en) 2005-11-10
JP4185567B1 (ja) 2008-11-26
US8254447B2 (en) 2012-08-28
CA2811897C (en) 2014-06-03
PL2207183T3 (pl) 2012-09-28
PL2182519T3 (pl) 2012-09-28
ATE555477T1 (de) 2012-05-15
US20080118218A1 (en) 2008-05-22
CN101697575A (zh) 2010-04-21
ES2383656T3 (es) 2012-06-25
EP2207183A1 (en) 2010-07-14
EP2207183B8 (en) 2012-08-08

Similar Documents

Publication Publication Date Title
TWI324338B (en) Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus
JP4138840B2 (ja) 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、および記録方法
KR100891397B1 (ko) 스트림 생성 장치, 스트림 생성 방법, 및 기록 매체
KR20060136399A (ko) 스트림 생성 장치, 스트림 생성 방법, 코딩 장치, 코딩방법, 기록 매체 및 그 프로그램