TW201108747A - Moving image coding method, moving image coding device, moving image recording method, recording medium, moving image playback method, moving image playback device, and moving image playback system - Google Patents

Moving image coding method, moving image coding device, moving image recording method, recording medium, moving image playback method, moving image playback device, and moving image playback system Download PDF

Info

Publication number
TW201108747A
TW201108747A TW99136494A TW99136494A TW201108747A TW 201108747 A TW201108747 A TW 201108747A TW 99136494 A TW99136494 A TW 99136494A TW 99136494 A TW99136494 A TW 99136494A TW 201108747 A TW201108747 A TW 201108747A
Authority
TW
Taiwan
Prior art keywords
image
management information
information
moving image
unit
Prior art date
Application number
TW99136494A
Other languages
English (en)
Inventor
Tadamasa Toma
Hiroshi Yahata
Wataru Ikeda
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW201108747A publication Critical patent/TW201108747A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

201108747 六、發明說明:
發明領域 本發明係有關一種在依據亮度之閾值而生成前景與背 景可分離之編碼流時,可切換閾值而編碼動態影像之動態 影像編碼方法、動態影像記錄方法、動態影像再生方法及 用以記錄編碼流之記錄媒體等。 【先前技術:j 發明背景 以下,就習知技術之DVD-VIDEO磁碟(以下略稱為 「DVD」)加以說明。 第1圖係顯示DVD之構造者。如第1圖之下段所示,DVD 磁碟上自讀入部至讀出部間設有邏輯位址空間,自邏輯位 址空間之始端開始記錄有檔案格式之磁卷資訊,接著並記 錄有映像音效等程式資料。 檔案格式係指IS〇9660或UDF(universal disc format), • 而為以所謂目錄或檔案之單位呈現磁碟上之資料之結構。 曰常使用之PC(個人電腦)亦藉使用所謂FAT或NTFS之檔案 格式,而以所謂目錄或檔案之構造在電腦上呈現記錄於硬 碟中之資料,而提昇了優越使用性。 DVD則使用了 UDF及ISO9660雙方(亦可將雙方合稱為 「UDF-bridge」),使用UDF或ISO9660之檔案格式驅動器 皆可讀取資料。當然,抹寫型之DVD磁碟之 DVD-RAM/R/RW亦可藉該等檔案格式而進行物理性的資 201108747 料讀寫、刪除。 記錄於DVD之資料可藉UDF_bddge而表達為第丨圖左 上所示之目錄或檔案。根目錄(圖中之「R〇〇T」)之下方設 有稱為「VIDEO—TS」之目錄,其中記錄有DVD之程式資 料。程式資料記錄成複數檔案,主要之標案如下。 VIDEO_TS. IFO 磁碟再生控制資訊檔
VTS_01_0. IFO VTS 01 0. VOB 視訊標題組#1再生控制資訊樓 視訊標題組#1串流檔 副檔名則規定有2種’「IFO」係記錄有再生控制資訊之 檔案’「VOB」係記錄有AV資料之MPEG串流之檔案。再生 控制資訊係DVD所採用之互動性(可配合使用者之操作而 使再生動態地變化之技術)之實現所需之資訊、背景資訊等 檔名或AV串流之附屬資訊等。又,DVD一般皆將再生控制 資訊稱為導覽資訊。 再生控制資訊檔可分為用以管理磁碟整體之 「VIDEO_TS. IFO」,以及個別視訊標題組(DVD可將複數 檔名,換言之,可將不同影片及不同版本之影片記錄於 磁碟中)之再生控制資訊之「VTS_〇l—0. IF0」e在此,檔案 主檔名之「01」表示視訊標題組之編號,舉例言之,視訊 標題組#2即為「VTS_02_0. IFO」。 第1圖之右上部係DVD之程式層中之dvd導覽空間,亦 即前述之再生控制資訊所展開之邏輯構造空間。 「VIDEO—TS. IFO」内之資訊係作為 VMGI(vide〇 manager information),「VTS_01_0. IFO」或個別存在於其它視訊標 201108747 題組之再生控制資訊係作為VTSI(video title set information),而展開於DVD導覽空間内。 VTSI中。己錄有所謂pGc(program chain)之再生順序資 讯之PGCI(program chain information)。PGCI係由CELL之集 合與稱為指令之一種編程資訊所構成。CELL本身係 VOB(V1de〇〇bject之略稱,意指]^1>£(}串流)之一部分區間或 全部區間之集合’ CELL之再生則意指再生前述v〇B之 CELL所指定之區間。 鲁 指令係意DVD之假設機器所處理者,類似於瀏覽器上 所執行之JAVA(登錄商標)腳本編程等。然而,JAVA(登錄商 標)腳本編程除邏輯演算以外,並執行視窗及瀏覽器之控制 . (諸如打開新瀏覽器之視窗),而DVD之指令除邏輯演算以 • 外,僅可執行八¥檔名之再生控制,諸如指定欲再生之章節 專’而有所不同。 CELL包含記錄於磁碟上之v〇B之開始及結束位址(磁 碟上之邏輯記錄位址)作為其内部資訊,播放器則使用記錄 _ 於CELL之V0B之開始及結束位址資Ifl而讀出資料,而進行 再生。 第2圖係說明内設於Av串流中之導覽資訊之概略圖。 DVD之特徵之互動性並非僅藉前述之VIDE〇—TS IF〇或 VTS_01_〇. iF0等所記錄之導覽資訊即可實現’另有若干重 要資訊係使用稱為導覽封包(亦稱為navipack或NV_PCK)之 專用載波而於VOB内與映像、音效資料等共同經過多工轉 換處理。 201108747 以下,說明選單以為簡單之互動性例示。選單畫面上 出現若干按鍵,各按鍵皆定義有選擇執行該按鍵時之處 理。又,選單上已選擇一按鍵(藉色框方式而於選擇按鍵2 重疊半透明色’以告知使用者該按鍵已為選定狀態卜使用 者則可使用遙控之上下左右鍵,而使選定狀態之按鍵移動 至上下左右之任一按鍵。使用搖控之上下左右鍵即可將 色框移動至欲選擇執行之按鍵上,再藉決定(按下決定鍵) 而執行對應之指令之程式。一般,對應之檔名或章節之再 生係依指令而執行。 第2圖之左上部已顯示NV_PCK内所儲存之控制資訊 之概要。 NV—PCK内包含色框顏色資訊與個別按鍵資訊等。色 框顏色資訊中記錄有調色盤資訊,而可指定重疊顯示之色 框之半透明色。按鍵資訊中則記錄有個別按鍵之位置資訊 之矩形領域資讯、自該按鍵朝其它按鍵之移動資訊(個別對 應使用者之上下左右鍵操作之移動標的按鍵之指定)、按鍵 指令資说(該按鍵被選定時所執行之指令)。 選單上之色框一如第2圖之中央右上部所示,係作為重 疊影像而產生。重疊影像係對按鍵資訊之矩形領域資訊加 上調色盤資訊之顏色而成者。該重疊影像係與第2圖之右部 所示之背景影像合成而顯示於畫面上。 如上所述,DVD已實現選單功能。又,使用NV_pCK 作為導覽資料之一部分而加以内設於串流中,係為與串流 同步動態更新選單資訊(舉例言之,僅於影片再生中途5〜1〇 201108747 分鐘内顯示選單等)’且使即便同步時間容易出錯之程式亦 可執行無礙之故。又,另一更重要理由則係欲於NV_pCK 儲存支援特殊再生之資訊,以於DVD再生時之快轉、倒轉 等非一般再生時,亦可順暢地解碼AV資料而加以再生等, 而提昇使用者之操作性。 第3圖係顯示DVD之串流之V0B者。如圖所示,映像、 音效、字幕等資料(第3圖之a段)係依MpE(3系統規格 (ISO/IEC13818-1)而封包及軟包化(第3圖之b段),個別多工 轉換而形成1條MPEG程式串流(第3圖之0段)。又,一如前 述’包含用以實現互動性之按鍵指令之Nv_pck亦已共同 經過多工轉換。 MPEG系統之多工轉換之特徵於多工轉換之個別資料 係依其解碼次序而形成位元列,但多工轉換之資料間,即, 映像、音效、字幕間並非必依再生次序而形成位元列。此 則係業經多工轉換之MPEG系統串流之解碼模式(一般稱為 system target decoder或STD)(第3圖之d段)在多工解除後具 有對應個別基礎串流之解碼緩衝部,在解碼時間之前皆暫 時儲存資料所導致。舉例言之,DVD-VIDE0所規定之解碼 緩衝部可就個別之基礎串流而為不同大小,而對映像與音 效、字幕各保有232KB、4KB及52KB之大小。 即,與映像資料共同多工轉換之字幕資料並不必然以 同—時間解碼或再生。 另,尚有次世代DVD規格之BD(BLU-RAYDISC)。 DVD係對於標準晝質(standard definition畫質)之映像 7 201108747 以封包傳播(DVD-VIDEO規格)或類比傳播之記錄(DVD VIDEO RECORDING規格)為目的而產生者,但BD則可直接 記錄高精度晝質(high definition畫質)之數位傳播 (BLU-RAY DISC REWRITABLE規格,以下稱為BD-RE)。
然而’ BD-RE規格係以廣泛記錄數位傳播為目的,故 並未使特殊再生之支援資訊等最適化。未來,考量將以更 高比率進行高精度映像之封包傳播甚於數位傳播(BD-RQM 規格),則非一般再生時亦需要不致對使用者造成困擾之設 計。 φ 又’ BD之動態影像之編碼方式之一係採用MPEG-4 AVC(advanced video coding)。MPEG-4 AVC係 ISO/IEC(國際 標準化機構/國際電氣標準會議)之JTC1/SC29/WG11與 ITU-T(國際電子通訊聯盟/電子通訊標準化部門)共同制定 之高壓縮率之次世代編碼方式。 一般而言’動態影像之編碼係藉減少時間方向及空間 方向之冗長性而進行資訊量之壓縮。因此,以時間上之冗 長性之減少為目的之畫面間預側編碼可參照前方或後方之 鲁 畫面而以磁段為單位進行動作之檢出及預測影像之作成, 並對所得之預測影像與編碼對象畫面之差分值進行編碼。 在此,所謂畫面係表示1晝面之用語,若為連續掃瞄影像則 意指圖幀,若為交錯掃瞄影像則意指圖幀或圖場。在此, 所謂交錯掃瞄影像係指由時間不同之2個圖場構成單—圖 幀而成之影像。交錯掃瞄影像之編碼及解碼處理時,可就工 幀進行單幀處理,或視作2個圖場而處理,或者就圖幀内之 8 201108747 各磁段視作_構造或圖場構造而加以處理u
敎影像而進行畫面内賴編碼者稱為1畫面。又, 面而進行晝面内預測編碼者稱為P晝面。另, 同時參照2張晝面而進行畫面内預測編碼者則稱為B畫面。 B畫面可參照2張晝面’而顯示時間則不限前方或後方皆可 任意組合。倾影像(參照晝面)可就編碼物碼之基本單位 之磁段侧指定,但t經編碼之位元流巾已先記錄之參照 晝面為第1參照晝面’之後記錄者則為第2參照畫面須予 區別。然而’該等畫面之編碼及解碼時之條件,則以所參 照之晝面業經編碼或解碼為必要。 由欲編碼之影像減去由畫面内預測或畫面間預測所得 之預測汛號而得之殘差訊號在經頻率轉換而量子化後,將 再經可變長編碼而形成編碼串流輸出。MPEG-4 AVC作為可 變長編碼方式而可分為CAVLC(C〇ntext-adaPtive variable length coding :脈絡適應型可變長編碼)與 CABAC(context-adaptive binary arithmetic coding :脈絡適 應型二元算數編碼)2種,而可以畫面為單位進行切換。在 此’脈絡適應型係指可對應周圍狀況而適當地選擇效率較 佳之編碼方式之方式。 其次,說明混合有不同之編碼方式(或不同屬性之動態 影像)之串流,以及接收上述串流之解碼裝置之解碼處理。 在此,將說明二個例子’亦即’混合有可變長編碼方式 (CAVLC/CABAC)之第1例’以及混合有進行子母晝面之亮 度鍵所控制之透明處理時所使用之亮度之閾值之第2例。 201108747 首先’說明混合有不同編碼方式(或不同屬性之動態影 像)之串流之第1例’亦即,混合有可變長編碼方式 (CAVLC/CABAC)之例。第4圖係顯示在MPEG-4 AVC之串流 中構成可隨機讀取之單位之畫面所適用之可變長編碼方式 之例者。在此,MPEG-4 AVC雖不包含與MPEG-2影片之 GOP(group of pictures)相當之概念,但若以不依存於其它畫 面即可解碼之特別畫面單位分割資料,則可構成相當於 GOP之可隨機讀取之單位,故稱之為隨機讀取單位(RAU)。 如第4圖所示,可變長編碼之方式採用cabaC或CAVLC係 以晝面為單位而切換。 其次,由於cabac與cavlc之可變長解碼時之處理不同, 故參照第5 A〜5C圖說明其等個別之可變長解碼處理。第5a 圖係用以進行藉C A B A C而業經可變長編碼之資料之解碼 處理之 CABAD(context-adaptive binary arithmetic decoding:脈絡適應型二元算數解碼),以及藉CAVLC而業 ”1可變長編碼之資料之解碼處理之 CAVLD(c〇ntext_adaptive variabie 丨沈她加〇出叩:脈絡適應 型可變長解碼)之影像解碼裝置之功能區圖。 伴隨CABAD之影像解碼處理係進行如下。首先,適用 CABAC之編碼資料Vm將輸入串流緩衝區5〇〇1。接著,算 數解碼部5 0 〇 2則由串流緩衝區讀出編碼資料w而進行算數 解碼,並將二元資料Binl輸入二元資料緩衝區5〇〇3。二元 資料解碼處理部5004則由二元資料緩衝區5〇〇3取得二元資 料Bm2 ’並解碼二元資料,再將解碼後之二元資料以以輸 10 201108747
入像素復原部5005。像素復原部5005則對二元資料^^進 行逆量子化、逆轉換及動態補償等處理而復原像素,並輸 出解碼資料Vout。第5B圖係顯示適用CABAC之編碼資料之 解碼開始後至像素復原處理之實施為止之動作之流程圖。 首先,於步驟5001中’對適用CABAC之編碼資料Vin進行 算數解碼,以生成二元資料。其次,於步驟5002中,判定 是否齊備1個以上之晝面等預定之資料單位量之二元資 料,若已齊備則續行步驟S5003,若未齊備則重複步驟S5001 # 之處理。在此,所以進行二元資料之緩衝,係因於CABAC 時各畫面或各巨集塊之二元資料之編碼量可能明顯增大, 而伴隨產生之算數解碼之處理負擔亦可能明顯增加,故為 實現最差情況下之無中斷再生,必須預先進行一定量之算 數解碼處理之故。步驟S5003中,則解碼二元資料,並於步 驟S5004中實施像素復原處理。如上所述’ CABAD時,由 於在步驟S5001及步驟S5002中若未齊備預定之資料單位量 之二元資料即不可開始像素復原處理,故解碼開始時將發 φ 生延遲。 伴隨CAVLD之像素復原處理則進行如下。首先,適用 CAVLC之編碼資料Vin將輸入串流緩衝區5001。接著’ CAVLD部5006則進行可變長解碼處理,並朝像素復原部 5005輸入VLD解碼資料Din2。像素復原部5005則進行逆量 子化、逆轉換及動態補償等而復原像素,並輸出解碼資料 Vout。第5C圖係顯示適用CAVLC之編碼資料之解碼開始至 像素復原處理之實施為止之動作之流程圖。首先’於步驟 201108747 S5005中進行CAVLD,料,在步驟測4中實施像素復原 處里如上所述,CAVLD時與CABAD不同’在開始像素復 =處理前’無須等待敎之資料單位量之資料齊備,且不 需要如二元資料緩衝區测般之可變長解碼處理之中間緩 衝處理。 ' 第6圖係如第4圖之例,亦為顯示串流中途切換可變長 編碼之方式之串流之解碼所使用之習知之解碼裝置之動作 之流程圖。另,本說明書中,解碼裝置及解碼方法各為動 態影像再生裝置及動態影像再生方法之一例。 首先,於步驟S5101中,取得顯示適用於畫面之可變長 編碼方式之資訊,再續行至步驟S5102。步驟S5102中,則 判斷疋否已依解碼次序而就先前之畫面與現時之畫面切換 可變長編碼之方式。由於CABAD與CAVLD之可變長解碼處 理時之緩衝之管理方法不同,故切換可變長編碼方式時, 將進入步驟S5103而進行緩衝管理之切換處理,若未切換可 變長編碼之方式則續行至步驟S5104。步驟S5104中則判定 可變長編碼方式是否為CAVLC,若是,則續行至步驟551〇5 而進行CAVLD處理,若為CABAC,則續行至步驟S51〇6。 步驟S5106中則判定是否已依解碼次序而就先前之畫面與 現時之畫面切換可變長編碼之方式,若已切換則續行至步 驟S5107,而如第5圖之步驟S5001與步驟S5002所示,進行 算數解碼至預定之資料單位量之二元資料齊備為止,並解 碼二元資料。於步驟S5106中判定並未切換可變長編碼之方 式時,則續行至步驟S5108 ’而進行一般之CABAD處理。 12 201108747 在此,所謂一般之CAB AD處理係指不進行由CAVLC切換至 CABAC或適用CABAC之串流之解瑪開始時所需之二元資 料之緩衝之處理。最後’則於步驟S5109中實施像素復原處 理。 其次’說明混合有不同編碼方式(或不同屬性之動態影 像)之串流之第2例,亦即,混合有進行子母畫面之亮度鍵 所控制之透明處理時所使用之亮度之閾值(動態影像之屬 性)之例。BD-ROM等套裝軟體媒體中,包含對劇院版映像 • 重疊而表達之隨片解說版(導演之解說映像)等與劇院版不 同之映像之程式,上述程式即稱為子母畫面。第7圖係說明 子母畫面者。第7a圖顯示影像之顯示平面,平面2則重疊於 平面1上而顯示。第7b圖與第7c圖則分別顯示平面1與平面2 所顯示之影像,平面2之顯示影像則重疊於平面丨之顯示影 像上而顯示(第7d圖)。子母畫面之情形下,平面丨所顯示者 係劇院版映像,平面2所顯示者則為與劇院版不同之映像。 在此,若直接重疊平面2所顯示之映像,則將完全覆蓋平面 # 1之影像,故平面2之影像將經過亮度鍵所控制之透明處 理。以下,即就亮度鍵所控制之透明處理加以說明。透明 處理時,係對應影像内各像素之亮度值而切換是否使該像 素透明而顯不。具體而g,係處理如下。 1·凴度值為0以上,且為預定閾值YL以下時,使該像素 完全透明(透光率為1)。 2·亮度值超過預定閾值YL時,則使該像素不透明(透光 率為0),而依亮度值所示進行顯示。 13 201108747 第7c圖中,塗黑之領域係亮度值為前述預定閾值YL以 下,其它領域若為亮度值超過前述預定閾值YL者’則如第 7d圖所示,平面2之影像重疊於平面1上時,塗黑之領域將 為透明者,其外之領域則不透明而顯示。亦即,平面2之影 像中,僅有亮度超過閾值YL之領域(像素)與平面1之影像重 疊而顯示。藉此,平面2即可依據亮度之閾值而分離成前景 與背景,並僅有前景與平面1重疊顯示,而實現子母畫面。 【專利文獻1】特開2000-228656號公報 【非專利文獻 1 】Proposed SMPTE Standard for Television : VC-1 Compressed Video Bitstream Format and Decoding Process, Final Committee Draft Revision 6, 2005.7.13 L發明内容1 發明概要 發明所欲解決之問題 如上所述’接收混合有不同編碼方式(或不同屬性之動 態影像)之串流之解碼裝置必須於解碼處理時進行切換處 理’故有處理負擔增大之問題。第8圖係說明習知之多工轉 鲁 換裝置所產成之實現習知之記錄媒體中亮度鍵所控制之透 明處理時之問題者。第8圖顯示有進行亮度鍵所控制之透明 處理之映像連續再生之區間,而區間1、區間2、區間3則依 序進行再生。在此’由於透光率為丨而透明顯示之像素之亮 度值之閾值在區間1為20、在區間2為4〇、在區間3則為3〇, 故切換區間時’必須改變透明顯示之像素之亮度值之閾 值。亮度值之閾值一旦改變,則勢必改變合成平面時之動 14 201108747 作’而將發生動作變更所導致之延遲。結果,應不中斷而 再生之各區間之切換部分將發生再生中斷之問題。 如上*所述’習知之影像編碼方式所產生之串流在再生 業經多工轉換之習知之記錄媒體時,將就各再生區間改變 党度鍵之閣值’故伴隨著前述閾值之切換,再生時之亮度 值之閾值處理時將發生延遲之問題。 本發明之目的即在提供一種不致增加再生時之處理負 擔且可避免發生再生中斷之記錄媒體、動態影像編碼方 _ &、動態影像編碼|置、動態影像記錄方法、動態影像再 生方法、動態影像再生裝置及動態影像再生系統。 解決問題之方法 本發明係為解決上述問題而作成者。 本發明之動態影像編碼方法可於作為連續再生之對象 之區間(連續再生區間)内’預先編碼動態影像而無須切換編 碼方式(或動態影像之屬性),且可預先作成包含顯示上述區 間内編碼為固定之旗標資訊之管理資訊。 • 更具體而言’本發明係對應子母晝面之應用者,即, 本發明之動態影像編碼方法係將包含第i動態影像及用以 與前述第1動態影像重疊之第2動態影像的映像流編碼者, 且前述重4時僅前述第2動態影像中具有超過預定間值之 亮度之影像領域與前述第1動態影像重疊,前述動態影像編 碼方法包含:連續再生區間決定步驟,決定前述映像流中 作為部分區間之組合,即,作為連續再生對象之區間的連 續再生區間;編碼步驟,將構成前述連續再生區間之複數 15 201108747 部分區間中之前述第1動態影像及第2動態影像編碼,以使 前述連續再生區間決定步驟所決定之連續再生區間符合不 改變前述閾值之限制;管理資訊作成步驟,作成包含顯示 在前述連續再生區間之前述閾值為固定之旗標資訊的管理 資訊;及結合步驟,結合業經前述編碼步驟所編碼之前述 第1及第2動態影像與前述管理資訊作成步驟所作成之管理 資訊並加以輸出。 又,本發明之動態影像編碼裝置係將包含第1動態影像 及用以與前述第1動態影像重疊之第2動態影像之映像流編 碼者,且前述重疊時僅前述第2動態影像中具有超過預定閾 值之亮度之影像領域與前述第1動態影像重疊,前述動態影 像編碼裝置包含:連續再生區間決定部,係決定前述映像 流中作為部分區間之組合,即,作為連續再生對象之區間 之連續再生區間者;編碼部,係將構成前述連續再生區間 之複數部分區間中之前述第1動態影像及第2動態影像編 碼,以使前述連續再生區間決定部所決定之連續再生區間 符合不改變前述閾值之限制者;管理資訊作成部,係作成 包含顯示在前述連續再生區間之前述閾值為固定之旗標資 訊的管理資訊者;及結合部,係結合業經前述編碼部所編 碼之前述第1及第2動態影像與前述管理資訊作成部所作成 之管理資訊並加以輸出者。 又,本發明之動態影像記錄方法係將包含第1動態影像 及用以與前述第1動態影像重疊之第2動態影像之映像流編 碼,再記錄於記錄媒體中者,且前述重疊時僅前述第2動態 201108747 影像中具有超過預定閾值之亮度之影像領域與前述第1動 態影像重疊,前述動態影像記錄方法包含:連續再生區間 決定步驟,決定前述映像流中作為部分區間之組合,即, 作為連續再生對象之區間之連續再生區間;編碼步驟,將 構成前述連續再生區間之複數部分區間中之前述第1動態 影像及第2動態影像編碼,以使前述連續再生區間決定步驟 所決定之連續再生區間符合不改變前述閾值之限制;管理 資訊作成步驟,作成包含顯示在前述連續再生區間之前述 閾值為固定之旗標資訊之管理資訊;及結合步驟,結合業 經前述編碼步驟所編碼之前述第1及第2動態影像與前述管 理資訊作成步驟所作成之管理資訊,並記錄於記錄媒體中。 又,本發明之記錄媒體記錄有可由電腦讀取之資料, 前述資料包括含有第1動態影像及用以與前述第1動態影像 重疊之第2動態影像的映像流、以及作為用以管理前述映像 流之資訊的管理資訊,且前述重疊時,僅前述第2動態影像 中具有超過預定閾值之亮度之影像領域與前述第1動態影 像重疊。又,前述映像流中,構成前述連續再生區間之複 數之部分區間之前述第1及第2動態影像業經編碼,以使作 為部分區間之組合,即,作為連續再生之對象之區間的連 續再生區間符合不改變前述閾值之限制,且前述管理資訊 包含顯示在前述連續再生區間之前述閾值為固定之旗標資 訊。 又,本發明之動態影像再生方法係將包含業經編碼之 第1及第2動態影像之映像流解碼,並將前述第2動態影像重 17 201108747 疊於前述第1動態影像上而加以顯示者。前述動態影像再生 方法包含:管理資訊處理步驟,取得對應前述映像流之管 理資訊,並解釋所取得之管理資訊;解碼步驟,依據前述 管理資訊處理步驟之解釋,解碼前述第1及第2動態影像; 及顯示步驟,僅將業經解碼之前述第2動態影像中具有超過 預定之閾值之亮度之影像領域重疊業經解碼之前述第1動 態影像上,並加以顯示。前述管理資訊處理步驟中,判斷 前述管理資訊中是否包含顯示前述閾值為固定之旗標資 訊,且前述顯示步驟中,在前述管理資訊處理步驟已判斷 φ 前述管理資訊含有前述旗標資訊後,使用與先前之部分區 間之閾值相同之閾值,進行現時之部分區間的前述重疊顯 示。 又,本發明之動態影像再生裝置係將包含業經編碼之 第1及第2動態影像之映像流解碼,並將前述第2動態影像重 疊於前述第1動態影像上而加以顯示者,前述動態影像再生 裝置包含:管理資訊處理部,係取得對應前述映像流之管 理資訊,並解釋所取得之管理資訊者;解碼部,係依據前 · 述管理資訊處理部之解釋,解碼前述第1及第2動態影像 者;及顯示部,係僅將業經解碼之前述第2動態影像中具有 超過預定之閾值之亮度的影像領域重疊於業經解碼之前述 第1動態影像上,並加以顯示者。前述管理資訊處理部判斷 前述管理資訊中是否包含顯示前述閾值為固定之旗標資 訊,且前述顯示部在前述管理資訊處理部已判斷前述管理 資訊包含有前述旗標資訊後,使用與先前之部分區間之閾 18 201108747 值相=之:值’進行現時之部分區間的前述重曼顯示· 圍第>‘=態影像再生系統包含有:申請專利範 讀媒體中所記錄之資料並加以再生者f㈣出刚迷 生裝置包含in Γ 再生者° _動態影像再 理資心 處理部,係自前述記錄媒體讀出管 二::者广部,係依據前述管理資訊處理 並加^及^出前述第1及第2動態影像,
則迷第1動態影像上,並加以顧千去 資訊處理部判斷前述管理資二二:。而,前述管理 固定之旗俨眘却 °中疋否。3顯示前述閾值為 判斷前料理示部在前述管理資訊處理部已 分區間之閾值相同=訊後’使用與先前之部 重疊顯示。 間值,而進行現時之部分區間的前述 動離=本發日林僅可實現為上述之㈣影像編碼方法' =像編碼裝置、動·晴記錄方法、記錄媒體、動態 動4像再生裝置及動態影像再生系統, Γ為可藉電腦執行上述各方輯包含之步驟之程式而 實現,或作為記錄有上述程式之DVD等電腦可讀取之記錄 媒體而實現,或者以LSI科導磁卷體電路實現上述各裝 置。 發明之效果 如上所述,依據本發明之動態影像編褐方法等,即可 19 201108747 於作為連續再生之對象之區間内,編碼動態影像而無須切 換編碼方式(或動態影像之屬性),且可作成包含顯示上述區 間内編碼方式為固定之旗標資訊之管理資訊。藉此,接收 上述資料構造之動態影像及管理資訊(或由記錄媒體讀出) 之再生裝置即無須編碼方式或動態影像之屬性之切換之監 視處理,而可減輕處理負擔。 亦即,就子母畫面而言,連續再生區間内之動態影像 之編碼資料中,是否使各像素透明顯示之判斷所使用之亮 度值之閾值為固定,故可避免因閾值之切換而發生再生之 延遲,而可實現無縫之再生。因此,可提昇對動態影像、 製圖或靜態影像等重疊動態影像而顯示之套裝軟體媒體、 傳播程式等之再生品質。又,由於可減輕用以實現前述程 式之再生裝置之處理負擔,故其實用價值甚高。 圖式簡單說明 第1圖係DVD之構造圖。 第2圖係色框之構造圖。 第3a〜3d圖係顯示DVD之多工轉換之例者。 第4圖係顯示習知之MPEG-4 AVC串流中適用於畫面單 位之可變長編碼方式之例者。 第5A圖係顯示適用CABAC與CAVLC之編碼串流之解 碼所使用之解碼裝置之構造之功能區圖。 第5B圖係顯示適用CABAC之編碼串流之解碼動作之 流程圖。 第5C圖係顯示適用CAVLC之編碼串流之解碼動作之 20 201108747 流程圖。 第6圖係顯示習知之解碼裝置之動作之流程圖。 第7a〜7d圖係說明子母畫面之顯示例者。 第8圖係說明亮度鍵之閾值在連續再生區間内切換而 導致之問題者。 第9a〜9e圖係顯示第1實施例之記錄媒體所儲存之 MPEG-4 AVC串流中適用於晝面單位之可變長編碼方式之 例者。 φ 第10圖係顯示記錄媒體中顯示可變長編碼方式為固定 之單位之旗標資訊之儲存例者。 第11圖係顯示再生記錄媒體之解碼裝置之動作之流程 圖。 、 第12圖係顯示多工裝置之構造之功能區圖。 ' 第13圖係顯示多工裝置之動作之流程圖。 第14圖係顯示第13圖中之S5201之具體例之流程圖。 第15圖係顯示第13圖中之S5202之具體例之流程圖。 φ 第16圖係顯示第13圖中之S5204及S5205之其它具體例 之流程圖。 第17圖係顯示第13圖中之S5202之具體例之流程圖。 第18圖係BD之資料階層圖。 第19圖係BD上之邏輯空間之構造圖。 第20圖係BD播放器之概要功能區圖。 第21圖係BD播放器之構造功能區圖。 第22圖係BD之程式空間之說明圖。 21 201108747 第23圖係MPEG串流(VOB)之構造圖。 第24圖係封包之構造圖。 第25圖係說明AV串流與播放器構造之關係者。 第26圖係對磁軌緩衝區之AV資料連續供給模式圖。 第27圖係VOB資訊檔構造圖。 第28圖係時間對映之說明圖。 第29圖係播放清單檔之構造圖。 第30圖係對應播放清單之程式檔之構造圖。 第31圖係BD磁碟整體管理資訊檔之構造圖。 · 第32圖係記錄全域事件管控器之檔案之構造圖。 第33圖係說明時間事件之例者。 第34圖係說明使用者事件之例者。 第35圖係說明全域事件管控器之例者。 第36圖係假設機器之構造圖。 第37圖係播放器變數表。 第38圖係顯示事件管控器(時間事件)之例者。 第39圖係顯示事件管控器(使用者事件)之例者。 鲁 第40a〜40b圖係播放器基本處理之流程圖。 第41圖係播放清單再生處理之流程圖。 第42a~42b圖係事件處理之流程圖。 第43圖係字幕處理之流程圖。 第44圖係說明使亮度鍵之閾值在連續再生區間内為固 定之例者。 第45a〜45b圖係說明無縫再生區間中亮度鍵之值為固 22 201108747 定者。 第46a〜46b圖係說明保證亮度鍵之閾值為固定之旗標 者。 第47a〜47g圖係說明本發明之記錄媒體之子母畫面動 作者。 第48a〜48b圖係說明主視訊與副視訊之多工轉換者。 第49圖係顯示實現本發明第2實施例之子母晝面動作 之多工方法之動作之流程圖。 第5 0圖係說明實現本發明第2實施例之子母畫面動作 之多工方法中生成管理資訊之動作之流程圖。 第51圖係顯示本發明第2實施例之多工裝置之構造之 功能區圖。 第52圖係顯示子母畫面之背景資訊所包含之顯示屬性 資訊之例者。 第53a~53b圖係顯示多工裝置5200所生成之管理資訊 之資料構造者。第53a圖係顯示管理資訊之一之播放清單之 資料要素者;第53b圖係顯示無縫連接之再生區間之播放清 單之例。 第54圖係顯示進行本發明第2實施例之子母晝面動作 之播放器之動作之流程圖。 第55A圖係顯示第3實施例之記錄媒體本體之軟碟之物 理格式之例者。 第55B圖係顯示軟碟之正面外觀、截面構造及軟碟者。 第55C圖係顯示用以在軟碟FD上進行上述程式之記錄 23 201108747 再生之構造者。 【資施冷式】 實施發明之最佳形態 本發明之動態影像編碼方法係於作為連續 之區間(連續再生區間)内,朗切換編碼 =象 之屬性)即可預先編碼動態影像,且可預先作成=偉 述區間内編碼方式為固定之旗標資訊之管理資訊。.‘'不前 以下,參照附圖說明本發明之實施例。 (第1實施例)
首先,以混合有不同編碼方式(或不同屬性之動態 之串流之第1例,~,以混合有可變長編碼 (CAVLC/CABAC)之例為本發明之第i實施例而加以說明:
本實施例中,係說明BD_R0M等套裝軟體媒體等内解 碼動態影像之編碼資料時,可抑制可變長編财式切換而 導致解碼動作延遲’及有同時進行必要之緩衝管理方法之 切換所導致之處理負擔之增加之記錄媒體及其再生裝置。 以下,動態影像之編碼方式為MPEG_4AVC,但亦可為可於 串流中途切換可變長編碼方式之其它編碼方式。 本實施例之記錄媒體中儲存之MPEG_4 AVC串流中,可 切換可變長編碼方式之單位已受限,且於管理資訊中儲存 有顯示切換單位受限或受限之切換單位之資訊。 第9圖係顯示MPEG-4 AVC之串流之可變長編碼方式之 切換單位之限制例者。BD_R0M等套裝軟體媒體中,係藉 播放清單等顯示連續再生動態影像之編碼資料之單位(以 24 201108747 下稱為「連續再生單位」)’若使連續再生單位之可變長編 碼方式固定’則連續再生之區間内,將不發生可變長編碼 方式之切換所導致解碼動作之延遲及緩衝管理方法之切換 所致處理負擔之增加。因此’本實施例中令連續再生單位 之可變長編碼方式為固定。第9a及第9b圖係分別顯示連續 再生單位中可變長編碼方式僅限於CAVLC、CABAC之例 者。進而,連續再生之片段之連接條件可為無縫之連接及 非無縫之連接二種。在此所謂連接,係包含同一片段内之 鲁 複數區間相連接之情形在内。非無縫之連接時,舉例言之, 可能如對開放GOP連接時般發生解碼動作之間斷,故亦容 許切換可變長編碼方式,無縫之連接之連續再生單位之可 變長編碼方式則亦可為固定。 另,亦可在片段或隨機讀取單位(RAU)等與連續再生 單位不同之單位下固定可變長編碼方式。第9c及第9d圖係 顯示以片段為單位之固定例’第9e圖係顯示隨機讀取單位 單位下之固定例者。 • 其次,管理資訊中,包含有MPEG-4 AVC之串流中顯示 可變長編碼方式之切換已受限之旗標資訊。在此,係以編 碼方式之識別資訊作為旗標使用。第10圖係顯示BD-ROM 之旗標之儲存例者。BD-ROM中,可由播放清單參照之各 片段之編碼方式係儲存於管理資訊内之所謂 StreamCodinglnfo領域中’故在此顯示編碼方式為MpEG 4 AV C時,則使連續再生早位中可變長編碼方式為固定。另, 可變長編碼方式為CABAC或CAVLC亦可另行顯示。 25 201108747 此外’顯示可變長編碼方式之切換單位受限之旗標亦 可另行規定而加以儲存,進而,亦可儲存顯示切換單位之 資訊。又’該等資訊亦可儲存於MPEG-4 AVC之串流内。舉 例言之’顯示隨機讀取單位内之晝面中可變長編碼方式係 固定之資訊可儲存於隨機讀取單位之始端畫面之 SEI(supplemental enhancement information)或具有 Unspecified之形態之NAL(network abstraction layer)單元 内。 另’ MPEG-4 AVC中’顯示晝面單位之初始化資訊之 φ PPS(picture parameter set)内之 Entropy_coding—mode_flag 内’顯示有可變長編碼方式為CAVLC或CABAC。 因此’當一定區間内之可變長編碼方式係固定者,則 該區間之晝面所參照之全部pps中,
Entropy_c〇ding一mode_flag之圖場值將為固定者。MPEG-4 AVC中’不依解碼次序由存在於一定區間之畫面所參照之 PPS亦可儲存於前述一定區間内,但不由區間内之畫面所參 照之PPS之Entropy_coding_mode_flag之圖場值則無必要特 籲 別加以限制。舉例言之,隨機讀取單位㊉八切内之畫面所參 照之pps雖保證全部存在隨機讀取單位(RAU)内,但不由隨 機讀取單位(RAU)内之畫面所參照之pps亦可存在於隨機 讀取單位内。此時,不受參照之pps不會影響解碼,故 Entropy—c〇(jing_m〇(je_fiag之圖場值亦可不加以限制。然 而’一疋區間所包含之PPS之Entropy_coding_mode_flag之 圖場值若可專定,則處理較為簡單,故亦可使不受參照之 26 201108747 PPS之圖場值亦為固定者。 第11圖係顯示本實施例之記錄媒體之連續再生單位之 解碼動作之流程圖。連續再生單位中可變長編碼方式係固 定者,故與第6圖之習知之解碼動作不同,無須解碼中途之 二元資料之緩衝處理及緩衝管理方法之切換。各步驟之動 作則與第6圖所附同一標號之步驟相同,故省略其說明。 進而,新編碼方式則刻正由SMPTE(the society of motion picture and television engineers)制定一種VC-1(非專 • 利文獻1)之規格。VC-1中’定義有顯示巨圖塊(包含16χ16 像素大小之單位)之編碼方法之各種旗標。旗標則有諸如顯 示是否為略過模式巨圖塊、圖場模式/圖幀模式之任一種、 是否為直接模式巨圖塊等者。 已放大之編碼工具之一係位元平面編碼。位元平面編 碼係使用於顯示顯示上述之巨圖塊之編碼方法之旗標時 者。位元平面編碼可將前述該等旗標匯整為1晝面量,再以 畫面標頭加以顯示。一般而言,鄰接之巨圖塊之相關較高, ® 故旗標之相關亦較高。故而,藉匯整鄰接之複數之巨圖塊 之旗標而加以編碼,即可減少用以呈現旗標之編碼量。 位元平面編碼規定有7種編碼方法。其中之—係藉巨圖 塊標頭編碼各旗標之方法,該方法稱為原始模式(RAW MODE),而為與MPEG_2視訊方式&MpEG_4視覺方式相同 之方法。其餘6種方法皆係將1畫面量之旗標滙整而加以編 碼之方法,視如何匯整鄰接之巨圖塊之旗標而加以編碼之 不同,而定義成不同之方法。前述6種方法則有諸如匯整左 27 201108747 右鄰接之2魅圖塊之旗標而加以編碼之方法、若朝水平方 向排列之一列巨圖塊之旗標全為「〇」則以u立元之「〇」表 :=Γ圆塊之旗標内出現、,則直接編碼各 立疋、’面、為碼右·使用上述7種中任—方法,則可就各與 仏個別獨立以畫面為單位而加以變更。 各旗^之二=平面編碼時,以僅使用藉巨圖塊標頭編胡 各純之方法時為模式卜並以僅使用轉i畫面量之旗轉
:加以編碼之方法時為模式2,而模式_式2之解碼時動 作不同’故模式切換時處理負擔將增大,而可能發生延遲 故而’與上述可變長編碼之切換單位之受限情形相同位 元平面編碼亦可限制模式1與模式2之切換單位。舉例言 之’連續再生單位或無縫而連接之連續再生單位中,可使 模式為固定者。又,亦可於管理資訊巾包含顯示位元平面 編碼之模式於預定單財為固定者之。舉例言
之,可MSt_C〇dingInf。所*之編财式作為旗標資 Λ ’當編碼方式顯^VCM時,則可使預定單㈣位元平 面編碼之模式為固定者。 進而,藉巨圖塊標頭編碼各旗標之方法與匯整i畫面量 而編碼之方法同時使㈣為模式3,則配合可使用期之環 境’亦可區職賴式1與模A舉例言之,處理能力較 差之終端可使用模式丨,處理能力較高之終端則可使用模式 3。上述情形在預定之再生單位固定使賴幻或模式3之任 -方較有效。進而,顯示料為模式i或模式3之任一方之 28 201108747 ,旗標資訊或顯賴定為任—賴式之:纽謂存於管理 貧訊或編碼串流内。另,模式2與模式3亦可區隔而使用。 第12圖係顯示實現本實施例之多工方法之多工裴置 5100之構造之功能區圖。多m觸包含有_單位決 定部5101、切換資訊生成部5102、編碼部5103、系統多工 部5HM、管理資訊作成部51〇5、結合部鳩。以下則就 各部動作加以說明。
切換單位決定部51〇1可決定受切換可變長編碼方式之 單位,並對切換資訊生成部51〇2及編碼部51〇3輸入已決定 之切換單位unit。切換單位可為預先設定者,或由外部加以 設定者。切換資訊生成部51〇2可依據切換單位unit而生成顯 示可切換可變長編碼方式之切換資訊8你111£,並加以輸入至 管理資訊作成部5105。編碼部5103則可編碼各片段之資料 以符合切換單位unit之限制,並朝系統多工部5丨〇4輸入編碼 資料Cdata 1。系統多工部51 〇4可就編碼資料Cdata丨進行系統 多工’並朝管理資訊作成部5105輸入串流資訊StrInfl,並 朝結合部5106輸入多工資料Mdatal。BD-ROM所使用之系 統多工方式稱為資源封包’係採用對MPEG-2之傳輸流附加 4位元組之標頭之方式。又,串流資訊strlnfl則包含時間對 映等有關多工資料Mdatal之管理資訊生成所需之資訊。管 理資訊作成部510 5則可生成包含依據串流資訊S t rl n fl而生 成之時間對映及切換資訊Swlnf等之管理資訊Ctrlnfl,再加 以輸入至結合部5106。結合部5106則可結合管理資訊 Ctrlnfl與多工資料Mdatal而構成記錄資料Doutl並加以輸 29 201108747 出。 另,藉編輯工具等作成資料時,雖可能以個別裝置進 行編碼資料之生成與系統多工或管理資訊之作成,但即便 如此,各裝置之動作僅須與多工裝置5100之各部相同即可。 第13圖係顯示本實施例之記錄媒體中儲存之多工資料 之作成所需之多工方法之動作之流程圖。本實施例之多工 方法包含有決定可切換可變長編碼方式之單位之步驟 (S5201)、依據已決定之單位而編碼片段之步驟(S5202)及生 成顯示可變長編碼方式之切換單位之旗標資訊之步驟 籲 (S5204),而與習知之多工方法不同。 首先,步驟S5201中,將決定可切換可變長編碼方式之 單位。即,決定可以連續再生單位、片段或隨機讀取單位 之任一單位進行切換。接著,步驟S5202中,則依據步驟 S5201中已決定之切換單位編碼MPEG-4 AVC之片段之資 料。步驟S5203中,則判定是否結束了最終片段之編碼,若 判定已結束,則續行至步驟S5204,若判定尚未結束,則返 回步驟S5202而重複片段之編碼作業。步驟S5204中,則生 鲁 成顯示可變長編碼之切換單位之旗標資訊,並續行至步驟 S5205。步驟S5205中,則作成包含步驟S5204中已生成之旗 標資訊之管理資訊,再對管理資訊與片段之資料進行多工 轉換而加以輸出。 第14圖係顯示第13圖甲之決定可變長編碼方式之切換 單位之步驟(S5201)之具體例之流程圖。該圖中,可切換可 變長編碼方式之最小單位係第9c及第9d圖所示之片段。在 30 201108747 :,所謂片段係於記錄媒體上作為Av資料之檔案而儲存
,舉例言之,係指*存有MPEG-4 AVC之-φ流或VCM 之—串流之一標案。又,片段係指在傳輸流上藉TS封包之 記號而被特定之串流。 第4圖巾切換單位決定部51Q1可判定編碼對象之晝 面衫為片段之開始晝面(S52〇la),若非開始畫面,亦即係 又中途之畫面時’則決定該片段之編碼不可切換可變長 編碼方式(s5201f)。 、
右未無縫而連接’則切換單位決定部5101可判定開奸 畫面之片段是否為構成多角度之角度所對應之片^ (S5201e)’若是,則_晝面之諸之編碼將蚊為不可切 換構成該多角度之角度間之可變長編碼方式购_。在 此’可對各角度無縫而連接之無縫多角度内,各角度之可 變長編碼方式將決定為與多角度區間之先前之片段相同之 方式二另’不保證可與各肢無縫而連接之非無縫多角度 内’若各角度之可變長編碼方式相同,則前述方式亦可與 多角度區間之先前之片段不同。 又’切換單位決定部5101在編碼對象之畫面係片段之 開始畫面’而並不符合85〜说仏之任—時_),則決 定f相對於編碼完成之先前之諸切換開始畫面之片段之 可變長編碼方式(S5201e)。 如上所述,第14圖之流程圖中,已於切換單位決定部 5101中^不切換之片段將決定為⑷藉傳輸流之封包記號 而被特定之片段、(b)作為無縫之連接對象之複數片段、(c) 31 201108747 構成多角度之各角度所對應之複數片段。另, S5201a S5201c之判定可依任何順序進行。又,多角度時亦 可僅於無縫多角度時決定不切換可變長編碼方式。又片 段亦可藉標名等與封包記號不同之資訊進行識別。又,第 14圖中,雖κ可切換可變長編碼方式之最小單位為第% 及第9d圖所示之片段之情形加以說明但亦可如第%圖所 示’以RAU為最小單位。此時,可將圖十之「片段」改寫 為「RAU」。 第15圖係顯示第13圖中之片段編碼步驟(s52〇2)之具 體例之流程圖。第15圖中,顯示有進行MpEG_4 AVC之編碼 之情形。s亥圖中,編碼部51〇3可在開始片段之編碼前,判 定是否可切換該片段之可變長編碼方式(S52〇2a)。該判定則 依據第14圖之決定。編碼部51〇3在判定可切換時,可任意 決定該片段之可變長編碼方式(S52〇2b),若判定不可切換, 則依相互無縫而連接之先前或同一多角度之構成成分之其 它片段相同之方式決定該片段之可變長編碼方式 (S5202c)。進而’編碼部51〇3可對晝面參數組pps設定顯示 已決定之可變長編碼方式之旗標(S5202d),並依已決定之可 變長編碼方式而編碼前述片段(S5202e)。前述旗標在 MPEG-4 AVC上則稱為Entropy_coding—mode_flag。 如上所述,編碼部5103可不對已判定不可切換之連續 再生區間之片段切換可變長編碼方式,而藉編碼動態影像 生成編碼資料Cdatal。 第16圖係顯示第13圖中旗標資訊生成步驟(S5204)及 32 201108747 管理資訊生成步驟(S5205)之具體例之流程圖。 該圖中’切換資訊生成部5102可判定業經編碼部51〇3 編碼之片段是否為已判定為可切換可變長編碼方式之片段 (S5204a),若是’則生成顯示可變長編碼方式非固定之旗標 資訊’並使之與該片段對應而將旗標資訊儲存於記憶體之 工作領域(S5204b)’若非,則生成顯示可變長編碼方式為固 定之旗標資訊,並使之與該片段對應而將旗標資訊儲存於 記憶體之工作領域(S5204c)。進而,切換資訊生成部51 可判定前述片段是否為業經編碼部5103所編碼之最後之片 段(S5204d)’若非,則重複進行上述S5204a〜S5204c,若是, 則以儲存於記憶體之工作領域之旗標資訊為切換資訊 Swlnf而加以輸出至管理資訊作成部5105。 進而,管理資訊作成部5105可生成包含播放清單之管 理資訊(S5205a),並參照切換資訊Swlnf而對播放清單所包 含之播放項目附加顯示可變長編碼方式為固定之旗標=身m (S5205b)。另,旗標資訊亦可為顯示為先前之播放項目所參 照之再生區間與可變長編碼方式是否相同者。在此,播放 清單顯示1個以上之播放項目之再生次序。播放項目係指定: 應再生之片段之資訊,可指定單一片段之全部或一部分為 再生區間。又,上述旗標資訊亦可兼用作為對播放項目附 加之其它參數。此時,舉例言之,片段可與上述旗標資訊 兼用作為意指無縫而連接之參數(諸如 “connection一condition=5”)。其原因則在於第14圖中,決定 不可切換之連續再生區間(可變長編瑪方式為固定之區間) 33 201108747 係(a)藉傳輸流之封包記號而被特定之片段、(b)作為無縫之 連接對象之複數片段、(c)構成多角度之各角度所對應之複 數片段,而其中(b)係以無縫而連接為前提。又,是否為多 角度區間可以所謂“is_multi-angle”之旗標顯示之,故本旗 標亦可與顯示可變長編碼方式為固定之旗標兼用。藉此, 即可減少管理資訊之資料量。 第17圖係顯示第13圖之片段編碼步驟(S52〇2)之其它 具體例之流程圖。第17圖中,顯示有進行vc_l之編碼之情 形。該圖中’編碼部5103可在開始片段之編碼前,判定該 片段之可變長編碼方式是否可在原始模式與其外之模式間 切換(S5202a)。該判定則依據第14圖之決定。編碼部“⑽ 在判定可切換時,可任意決定該片段之位元平面編碼之方 式(S5202f),若判定不可切換,則依先前之片段之相同方式 決定該片段之位元平面編碼方式(S52〇2g)。編碼部5丨〇3將判 定已決定之位元平面編碼方式是否為原始模式(RAw M0DE)或其它方式(S5202h)。編碼部5103若對晝面單位附 加顯示模式之資訊,而判定為原始模式(RAW M〇DE),則 於各巨圖塊内編碼各巨圖塊MB之預定資訊(S52〇2i),若判 定非原始模式(RAW MODE),則將各巨圖塊MB之預定資訊 匯整於晝面始端而加以設定,並編碼該片段(S52〇2j)。另, 顯示前述模式之資訊可藉VCM上稱為IM〇DE之圖場顯示 之。 如上所述,編碼部5103可不對已判定為不可切換之連 續再生區間之片段切換位元平面編碼之方式,而藉編碼動 34 201108747 態影像生成編碼資料Cdatal。 另,上述播放清單不限於使用於光碟,經網路而接收 串流時,亦可接收播放清單並加以解析,在決定接收之串 流後’乃開始實際接收串流。又,將串流封包為 RTP(real-time transport protocol)之封包或TS封包等,再藉 IP(internet protocol)網路傳送時,亦可作為再生控制資訊而 藉諸如SDP(session description protocol)等,顯示再生區間 内可變長編碼方式是否固定。 • 以下’就儲存有本實施例之動態影像編碼方法所生成 之資料之BD-ROM磁碟之資料構造及該磁碟再生所用之播 放器之構造加以說明。 (磁碟上之邏輯資料構造) 第18圖係顯示BD-ROM之構造,特別是作為磁碟媒體 ' 之BD磁碟104、記錄於磁碟之資料1(Π、102、103之構造者。
BD磁碟1〇4所記錄之資料係AV資料103、有關AV資料之管 理資訊及AV再生順序等BD管理資訊102、實現互動性之BD • 再生程式101。本實施例中,為求說明方便,僅就用以再生 影片之AV内容之AV程式為主而說明BD磁碟,就其它用途 使用時亦當然相同。 第19圖係顯示上述之BD磁碟所記錄之邏輯資料之目 錄檔案構造者。BD磁碟具有與其它光碟諸如DVD或CD等 相同由内周朝外周形成螺旋狀之記錄領域,内周之讀入與 外周之讀出間設有可記錄邏輯資料之邏輯位址空間。又, 讀入之内側設有僅可由稱為BCA(burst cutting area)之驅動 35 201108747 器讀出之特別領域。該領域不可為程式所讀出,故可利用 於諸如著作權保護技術等方面。 邏輯位址空間内以檔案格式資訊(磁卷)為始端而記錄 有映像資料等之程式資料。所謂檔案格式_如習知技術中 之說明,係指UDF及ISO9660等,可使用目錄、檔案構造讀 出與一般PC相同方式記錄之邏輯資料。 本實施例中’ BD磁碟上久目錄、檔案構造於根目錄 (ROOT)之下設有BDVIDE0目錄。該目錄係儲存有bd所處 理之AV内容及管理資訊等資料(第18圖所說明之ι〇ι、丨〇2、 103)之目錄。 BDVIDEO目錄之下記錄有以下7種檔案。 BD.INFO(檔名固定) 「BD管理-貝讯」之一,係記錄有關於bd磁碟整體之資 訊之樓案。BD播放器起始將讀出該槽案。 BD.PROG(檔名固定) 「BD再生程式」之一,係記錄有關於磁碟整體之再 生控制資訊之檔案。 xxx.pl(「XXX」可變、副檔名「PL」則固定) 「BD管理資訊」之-,係記錄有腳本(再生順序)之播 放清單資訊之檔案。各播放清單皆為丨個樓案。 XXX.PROG(「XXX」可變,副檔名「pR〇Gj則固定) 「BD再生程式」之一,係記錄有前述播放清單個別之 再生控制資訊之檔案。與播放清單之對應則藉檔案主檔名 (「XXX」一致)進行識別。 36 201108747 YYY.VOB(「YYY」可變,副稽名「v〇B」則固定) 「AV資料」之一,係記錄有v〇B(與習知例已說明之 VOB相同)之檔案。各VOB皆為一個檔案。 YYY_VOBI(「YYY」可變,副檔名「v〇BI」則固定)
「BD官理資訊」之一,係記錄有作為AV資料之v〇B 之相關串流管理資訊之檔案。與VOB之對應可藉檔案主檔 名(「YYY」一致)而識別。 ZZZ.PNG(「ZZZ」可變’副檔名r png」則固定) • 「AV資料」之一,係記錄有構成字幕及選單所需之影 像資料PNG(藉W3C而標準化之影像格式,讀作「ping」) 之檔案。1個PNG影像各為1個檔案。 (播放器之構造) 其-人,參照第20及第21圖說明前述之bd磁碟再生所用 之播放器之構造。 第20圖係顯示播放器之大略功能構造之功能區圖。 BD磁碟201上之資料可藉光學讀取器2〇2而讀出。讀出 之^料則配合各資料種類之不同而傳送至專用之記憶體。 BD再生程式(「BD.PROG」或「XXX.prog」檔案之内容) 將傳送至程式記錄記憶體203,BD管理資訊(「bD.inf〇」、 「XXX.PL」或「YYY.VOBI」)則傳送至管理資訊記錄記憶 體204,AV資料(「YYY.VOB」或「ZZZ.PNG」)則傳送至 AV記錄記憶體205。 程式記錄記憶體203所記錄之BD再生程式可藉程式處 理部206、管理資訊記錄記憶體204所記錄之BD管理資訊則 37 201108747 可藉皆理資訊處理部207、AV記錄記憶體205所記錄之AV資 料則可藉表達處理部208而分別進行處理。 程式處理部206可接收藉管理資訊處理部2〇7而再生之 播放清單之資訊及程式執行時間等事件資訊而進行程式之 處理。又,程式再生之播放清單亦可動態變更,此時對管 理資Λ處理部207傳送播放清單之再生命令即可實現。程式 處理部206可接收來自使用者之事件即來自遙控 鍵之要 求,而在具備對應使用者事件之程式時加以執行。 官理資訊處理部207可接收程式處理部2〇6之指示而解 析對應之播放清單及播放清單所對應之ν〇Β之管理資訊, 並對表達處理部208指示作為對象之AV資料之再生。又, 官理貝讯處理部207並可自表達處理部2〇8接收基準時刻資 sfL,並依據時刻資訊對表達處理部208進行AV資料再生之 停止彳a示且,對程式處理部生成顯示程式執行時間之 事件。 表達處理部208具有分別對應映像、音效、字幕/影像(靜 U)之解碼器’而可依據來自管理資訊處理部之指 不’進仃AV㈣之解碼及輸出。映像㈣ '字幕/影像可於 解碼後^纟會於個別之專用平面、視訊平面2⑴及影像平面 2〇9上#藉合成處理部211進行映像之合成處理而朝Η等 顯示裝置輸出。 如上所述’如第2〇圖所示,Β〇播放器係採用第^圖所 不之BD磁碟所記錄之資料構造基礎下之機器構造。 圖係前述播放器構造之細節之功能區圖。第以圆 38 201108747 中,AV記錄記憶體2〇5可向影像記憶體3〇8與磁執緩衝區 3〇9心式處理部206可向程式處理器302與UOP管理部 303、管理資訊處理部2〇7可向腳本處理器3〇5與表達控制器 6表達處理部2〇8可向時鐘307、多工解訊器31 〇、影像 處理器31卜*訊處理器312及音效處理器313分別對應/展 開。 由BD磁碟201讀出之VOB資料(MPEG串流)可記錄於 磁轨緩衝㈣9,f彡像㈣(PNG)則可記錄㈣像記憶體 3<08。多工解訊器31〇則可依據時鐘3〇7之時刻,而抽出磁轨 ,衝區309所3己錄之v〇B資料,並分別朝視訊處理器312與 曰效處理器313傳送映像資料及音效資料。視訊處理器312 ,音效處理器313則分別依MPEG系統規格之規定,由解碼 羡衝區與解碼器分別構成。即,由多工解訊器31G送入之映 像、音效個別之資料將暫時記錄於個別之解碼緩衝區,再 依時鐘307而藉個別之解碼器進行解碼處理。 影像記憶體308中記錄之PNG則有以下2種處理方法。 右影像資料係用於字幕者,則藉表達控制器3〇6指示解 馬寺間。腳本處理器3〇5 —旦接收來自時鐘3〇7之時刻資 ’為進彳了適當之字幕顯* ’即須於字幕顯示時刻(開始及 結束)對表達控制器3〇6發出字幕之顯示、不顯示之指示。 表達控制器306接收解碼/顯示之指示之影像處理器3 j i &由影像記憶體3G8抽出對應之pNG資料,加以解瑪,再予 以描繪於影像平面314。 其次’若影像資料係用於選單者,則藉程式處理器3〇2 39 201108747 指示解碼時間。程式處理器302何時指示影像之解碼則受程 式處理器302刻正處理之BD程式之影響,無法—概決定。 影像資料及映像資料一如第20圖之說明般,在分別解 碼後,將分別輸出至影像平面314、視訊平面315 ,並藉合 成處理部316合成再輸出。 曰口 由BD磁碟201讀出之管理資訊(腳本、Αν管理資訊)將 儲存於管理資訊記錄記憶體3〇4,但腳本資訊(「Bdjnf〇」 及「XXX.PL」)則將讀入腳本處理器3〇5而進行處理。又, AV官理資訊(「γγγν〇ΒΙ」)則將藉表達控制器遍所讀出 並進行處理。 腳本處理器305可解析播放清單之資訊,並對表達控制 器306指*為減清單所參照之VQB與其再生位置,表達控 制器306則可解析作為對象之v〇B之管理資2 (「YYY.VOBI」),再對驅動控制器317發出指示,以讀出 作為對象之VOB。 驅動控制器317將依據表達控制器3〇6之指示,移動光 學讀取器,而進行作為對象之AV資料之讀出。讀出之^資 料則一如前述,讀出至影像記憶體3〇8或磁軌緩衝區3〇9。 又,腳本處理器3〇5可監視時鐘3〇7之時刻,而於管理 資訊所設定之時間朝程式處理器3〇2送出事件。 程式έ己錄§己憶體3〇1中記錄之程式(「BD pR〇G」或 「XXX.PROG」)可藉程式處理器302加以執行處理。程式 處理器302對BD程式之處理係在由腳本處理器送入事 件時或由UOP管理部303送入事件時β u〇p管理部3〇3在由 40 201108747 使用者藉遙控鍵而送入要求時,將生成對程式處理器302送 出之事件。 ° ' (裎式空間) 第22圖係顯示BD之程式空間者。 BD之程式空間中,播放清單(PLAYLIST)已形成一再生 早位。播放清單包含由C:ELL之連結而由連結之順序決定之 再生順序之靜態腳本,以及藉程式記述之動態腳本。若無 藉耘式形成之動態腳本,則播放清單僅限於依序再生個別 LL且,將在結束全部CELL時結束播放清單之再生。 弋可因超過播放清單之再生記述或使用者選擇、播 =益之狀態而動態改變再生對象。典型之例子即為選單。 :為BD ’則選單係定義賴使歸之選擇而再生之腳本, 可藉程式而動態選擇播放清單。 〜在此所謂之程式,係指依時間事件或使用者事件而執 行之事件管控器。 時間事件係依據内設於播放清單中之時刻資訊而生成 之事件。第圖所說明之由腳本處理器奶朝程式處理器 送出之事件即疋。一旦送出時間事件,則程式處理器搬 將執行處理已_㈣成對應之事件管控器。如前所述, 執行之程式可指示其它播放清單之再生,此時,將中止現 再生中之播放^單之再生,而改為指定之播放清單之再 生。 使用者事件係藉使用者之遙控鍵操作而生成之事件。 使用者事件可大分為2種類型。第一種,藉方向鍵(「上」、 201108747 下」、「左」、「右」鍵)或「決定」鍵之操作而生成之選單 選擇之事#選單選擇之事件所對應之事件管控器僅限於 播放清單内之有限期間内有效(作為播放清單之資訊而設 =有個別事件管控器之有效期間),遙控之「上」、「下」、 「左」、「右」鍵或「決定」鍵按壓時,將檢索有效之事件 管㈣’若存在有效之事件管控器,則執行處理該事件管 控器。其它情形則將忽略選單選擇之事件。 第-種使用者事件係藉「選單」鍵之操作而生成之選 單呼叫事件。選單呼叫之事件一旦生成,則稱為全域事# 籲 官控益。全域事件管控器不受播放清單之影響,係常保有 效之事件官控器。藉使用此功能,可安裝DVD之選單功能 (標題再生中呼叫音效、字幕選單等,並於變更音效或字幕 後由中斷處執行標題再生之功能等)。 播放清單中構成靜態腳本之單位之CELL係參照 VOB(MPEG串流)之全部或一部分之再生區間而成者。 CELL係以VOB内之再生區間作為開始、結束時刻之資訊之 用。與各VOB成對之VOB管理資訊(VOBI)於内部包含對應 籲 資料之再生時刻之記錄位址之圖表資訊之時間對映(time map或TMAP) ’而可藉該時間對映由VOB内(即作為對象之 檔案「YYY.VOB」内)之讀出開始位址及結束位址導出前述 之VOB之再生、結束時刻。另,時間對映之細節則留待後 述。 (VOB之詳情) 第23圖係本實施例所使用之MPEG串流(VOB)之構造 42 201108747 圖 如第23圖所示,VOB係由複數之VOBU(video object unit)所構成。VOBU係以MPEG視訊流上所謂之GOP(group of pictures)為基準,作為包含音效資料之多工串流之一再生 單位者。VOBU具有1.0秒以下之視訊再生時間,一般皆具 有〇·5秒程度之再生時間。 VOBU始端之TS封包(MPEG-2 transport stream packet) 包含順序標頭、接續其後之GOP標頭與I晝面(intra-coded), # 而可由該I晝面開始解碼。又,該VOBU始端之包含I晝面之 始端之TS封包之位址(開始位址)與該開始位址至包含〗畫面 之最後之TS封包為止之位址(結束位址),以及該I畫面之再 生開始時刻(PTS),皆由時間對映所管理。因此,時間對映 之款目(entry)已附加於VOBU始端之各TS封包。 VOBU於内部包含視訊封包(v_PKT)與音訊封包 (Α_ΡΚΤ)。各封包皆為188位元組,雖未圖示於第23圖,但 各T S封包之前皆附加有與該T s封包相對之解碼器供給開 鲁 始時刻之ATS(arrival time stamp)。 對各TS封包附加ATS,係因該TS串流之系統比率並非 固定比率,而為可變比率。一般使系統比率為固定時,將 插入稱為NULL封包之虛设之TS封包’但受限之記錄容量中 記錄高畫質須適用可變比率,BD中則作為附有ATS之TS串 流而記錄。 第24圖係顯示TS封包之構造者。 如第24圖所示,TS封包係由TS封包標頭、適用圖場、 43 201108747 酬載部所構成。TS封包標頭中包含PID(packet identifier), 因此,可識別TS封包包含何種資訊。適用圖場則包含 PCR(program clock reference)。PCR係解碼串流之機器之參 考時脈(system time clock,稱為STC)之參照值。機器係典 型以PCR之時間對系統串流進行多工解訊,並重建視訊串 流等各種串流。酬載中則包含PES封包。 PES 封包標頭包含 DTS(decoding time stamp)與 PTS(presentation time stamp)。DTS表示該PES封包中包含之 晝面/音頻框之解碼時間’ PTS則表示映像音效輸出等之表 達時間。視訊資料及音訊資料等基本資料係自所謂PES封包 酬載(PES packet payload)之封包(PES packet)之資料儲存領 域之始端依序輸入者。PES封包標頭中亦記錄有可識別酬載 内儲存之資料係何種串流之ID(stream_id)。 TS串流之詳情已*IS〇/IEC13818 ]^規定,之特徵 則在對各丁S封包附加ATS。 (VOB之交錯式記錄) 其次,參照第25及第26圖說明V〇B檔之交錯式記錄。 第25圖上段係前述之播放器構造圖之一部分。如圖所
示,BD磁碟上之資料可經光學讀取器判定為V0B(即MPEG 串流)而加以輪入至磁軌緩衝區,若為pNG(即影像資料)則 加以輸入至影像記憶體。 磁軌緩衝區係FIFQ,已輸人之糊之㈣將依輸入次 序而送至多工解訊器。此時,各包將依前述之ats而 由磁軌緩衝區抽出並經多讀訊器而將資料送至視訊處理 44 201108747 或曰效處理ϋ。另’若絲像資料,應描狀影像係依 —、工,ϋ之指定決定。又,描♦時所使用之影像資料係 字幕:々像貝料時,將同時自影像記憶體加以刪除,但若 為選單用之影像資料,則描繪該選單時將仍然留在影像記 隐體内在匕係因選翠之描繪係依賴使用者之操作,而依據 使用者之操作重示選單之一部分或置換為不同之影像,而 使此時重示之部分之影像資料容易解碼之故。
第25圖下段係顯示BD磁碟上之v〇B檔及PNg檔之交 φ 錯式^己錄者。—般而言,,諸如CD-ROM或DVD-ROM 中,作為一連串之連續再生單位之八¥資料係連續記錄者。 此係因凡採連續記錄方式,驅動器即可依序讀出資料,並 加以送至解碼器’若連續資料分離而散置於磁碟上,則將 於各連續再生區間之間加入尋執操作,此間將暫停資料之 讀出,而可能造成資料之供給停止。BD亦同,雖宜於連續 領城§己錄VOB檔,但仍有與諸如字幕資料般記錄於v〇B之 映像資料同步而再生之資料,而與V〇B檔相同,字幕資料 ^ 亦必須藉某種方法而自BD磁碟讀出。 字幕資料之讀出方法之一,係於VOB之再生開始前一 概地讀出字幕用之影像資料(PNG檔)之方法。然而,此時將 需要大量之記憶體,而不實用。 因此’本發明將VOB檔分為若干磁段’並使用影像資 料與交錯式記錄方式。第25圖下段係說明前述交錯式記錄 者。 適當地將VOB檔與影像資料交錯配置’即無須上述之 45 201108747 大量之暫存記憶體’即可在必要之時間將影像資料儲存於 影像記憶體中。然而’讀出影像資料時,v〇B資料之讀入 即當然停止。 之 第26圖係說明使用可解決上述問題之磁軌緩衝區 VOB資料連續供給模式者。 如以上之說明,VOB資料將暫存於磁軌緩衝區。如 軌緩衝區之資料輸人率(Va)與來自磁軌緩衝區之資料輸^ 率(Vb)間若設有差(Va > Vb),則繼續由肋磁碟進行 讀出,磁軌緩衝區之資料存量即不斷増加。'
如第26圖之上段所示’ v〇B之—連續記錄領域係由$ 輯位址之” al”至” a2,,為h,,a2 ”至” a3”間則記錄有影 料’並係V0B資料之讀出無法進行之區門。 第26圖之下段_示磁轨緩衝區之㈣者。橫轴& :門:示磁軌緩衝區内部所_ =^之1續記錄領域之開始點” μ,,之讀出之β 刻。该時刻以後,礤軌繰 M -irf-t-t· 、衝區將開始依比率Va-Vb而儲存$ 科。該比率則無庸明兮
時刻” t2”則為-連續之輸出人比率之差 _ 11嶸湏域之結束點”a2”之資料之讀/ 時刻。即,時刻”tl,,至 内之資物加,軌咖 以求出。 U之資科存量B(t2)則可由下式水 ,B(i2H Va〜Vb)x(t2、(式” 此後,影像資料將延 ,,” 故對磁軌緩衝區之舲 > 碟上之位址”a3”為止, 之輪八為〇,輸出比率之”―vb,,可使磁軌緩 46 201108747 衝區内之資料量減少。此則維持至讀出位置”a3”為止時 刻上則至”t3”為止。 此處之重點在於,若時刻” t3”以前儲存於磁轨緩衝區之 資料量為〇,則將無可對解碼器供給之V0B資料,而可能使 VOB之再生停止。然而’時刻”t3”時磁軌緩衝區中尚存有資 料時,則可連續進行VOB之再生而不致停止。 上述條件可以下式表示。 B(t2)^ Vbx(t3 —12) (式 2) φ 即,僅須配置影像資料(非V〇B資料)以符合式2即可β (導覽資料構造) 以下參照第27〜第33圖,說明BD之導覽資料(BD管理資 訊)構造。 第27圖係顯示VOB管理資訊標(“γγγ νοΒΓ,)之内部 構造者。 VOB管理資訊包含該VOB之串流屬性資訊(attribute) 與時間對映。串流屬性則分為視訊屬性(vide〇)、音訊屬性 φ (audio#0〜audio#m)。尤其,音訊流之v〇B可同時包含複數 之音訊流,故音訊串流數(number)可表示資料圖場之有無。 以下為視訊屬性(video)所具有之圖場與其等個別之可 得值。 壓縮方式(coding): MPEG1 MPEG2 MPEG4 47 201108747 MPEG4-AVC(advanced video coding) 解析度(resolution): 1920x1080 1440x1080 1280x720 720x480 720x565 長寬顯示比(aspect): 4:3 · 16 : 9 巾貞頻(framerate): 60 59.94(60/1.001) 50 30 29.97(30/2.001) 25 « 24 23.976(24/1.001) 以下則為音訊屬性(audio)所具有之圖場與其等個別之 可得值。 壓縮方式(coding): AC3 MPEG1 48 201108747 MPEG2 LPCM 通道數(ch): 1〜8 語言屬性(language): 時間對映(TMAP)係包含各VOBU之資訊之圖表,而包 含前述VOB所具有之VOBU數(number)與各VOBU資訊 (VOBU#l~VOBU#n)。各VOBU資訊係由VOBU始端TS封包 (I畫面開始)之位址I_start、該I畫面之結束位址為止之偏移 位址(I—end)及該I畫面之再生開始時刻(PTS)所構成。 另,I_end值係偏移值,即,亦可非為I畫面之大小,而 為實際之I晝面之結束位址。 第28圖係說明VOBU資訊之詳情者。 一如周知’ MPEG視訊流可為記錄高晝質而進行可變位 元率壓縮,其再生時間與資料大小間並無單純之相關。反 之,音效之壓縮規格之AC3則進行固定位元率之壓縮,故 時間與位址之關係可由1次式求得。然而,MPEG視訊資料 之各圖幀皆有固定之顯示時間,諸WNTSCti圖幀設有 1/29.97秒之顯示時間,各圖幀之壓縮後之資料大小將隨使 用於圖特性及壓縮之之晝面類型(即所謂丨/p/B晝面)而大幅 改變。因此,MPEG視訊之時間與位址之關係無法藉一次式 之形式表示。 备然,可對MPEG視訊資料進行多工轉換之⑽阳系統 串流(即VOB)亦紐藉-次式之形絲科間與位址之關 49 201108747 係。故而’ VOB内之時間與位址之關係之聯結者係時間對 映(ΤΜΑΡ) 如上所述,若接收某時刻資訊,則先檢索該時刻屬於 何種VOBU(調查各VOBU之PTS) ’再跳至於ΤΜΑΡ具有該時 刻之前之PTS之VOBU(I_start所指定之位址),而自VOBU始 端之I畫面開始進行解碼’並由該時刻之畫面開始顯示。 以下,參照第29圖說明播放清單資訊(“xxx.pl”)之内 部構造。 播放清單資訊係由圖格清單(celllist)與事件清單 (eventlist)所構成。 圖格清單(celllist)係播放清單内之再生圖格順序,圖格 將依本清單之記述次序而再生。圖格清單(celllist)之内容係 圖格數(number)與各圖格資訊(cell#l〜cell#n)。 圖格資訊(cell#)則包含VOB標名(VOBname)、該VOB 内之開始時刻(in)及結束時刻(out)、字幕表(subtitletable)。 開始時刻(in)及結束時刻(out)分別以該VOB内之圖幀編號 表示,並可使用前述之時間對映而取得再生所需之VOB資 料之位址。 字幕表(subtitletable)係包含可與前述VOB同步再生之 字幕資訊之圖表。字幕與音效同樣可有多種語言版本,字 幕表(subtitletable)係由初始之資訊之語言數(number)與接 續其後之各種語言之圖表(language#l〜language#k)所構成。 各種語言之圖表(language#)包含語言資訊(lang)、個別 顯示之字幕之字幕資訊數(number)、個別顯示之字幕之字 50 201108747 幕資訊(speech#l〜Speech#j),字幕資訊(speech#)則包含對應 之影像資料檔名(name)、字幕顯示開始時刻(in)、字幕顯示 結束時刻(out)及字幕之顯示位置(p〇siti〇n)。 事件清單(eventlist)係定義有該播放清單内所發生之事 件之圖表。事件清單在事件數(number)以外並由個別事件 (event#l〜event#m)所構成,個別(event#)則包含事件種類 (type)、事件之id(ID)、事件發生時刻(time)、有效期間 (duration) ° # 第30圖係包含個別播放清單之事件管控器(時間事件 與選單選擇用之使用者事件)之事件管控器表 (“XXX.PROG”)。 事件管控器表包含已定義之事件管控器/程式數 (number)與個別事件管控器/程式(pr〇gram#1〜pr〇g_#n)。 各事件管控器/程式(Program#)内之記述則包含事件管控器 開始之定義(< event—handler〉旗標)以及與前述之事件m 成對之事件管控器之ID(ID),然後前述程式亦記述於 • funCti〇n之後之括弧“Γ與,,},’之間。前述之“xxx.pl”之事 件清單(eventlist)中儲存之事件(evem#1〜event#m)則可使用 “XXX.PROG”之事件管控器之山叩)來特定。 以下參照第31圖說明有關bd磁碟整體之資訊 (“BD.INFO”)之内部構造。 BD磁碟之整體資訊包含標題清單(titlelist)、全域事件 用之事件清單(eventlist)。 標題清單(titlelist)包含磁碟内之標題數(mjmber)、接續 51 201108747 其後之各標題資訊(title#l〜title#n)。個別標題資訊(title#) 則包含標題所含之播放清單之圖表(PLTable)、標題内之章 節清單(chapterlist)。播放清單之圖表(PLTable)則包含標題 内之播放清單數(number)及播放清單名(name),即,播放清 單之檔名。 章節清單(chapterlist)包含前述標題所含之章節數 (number)及個別之章節資訊(Chapter#l〜chapter#n),個別章 節資訊(chapter#)則包含前述章節所含之圖格之圖表 (celltable) ’圖格之圖表(celltable)則包含圖格數(number)、 個別圖格之款目資訊(cellentry#l〜cellentry#k)。圖格之款目 資訊(cellentry# 1〜cellentry#k)則包含含有前述圖格之播放 清單名與播放清單内之圖格編號。 事件清單(eventlist)包含全域事件數(number)與個別全 域事件之資sfl。在此應注意者’係初始定義之全域事件稱 為初始事件(firstevent) ’其係將BD磁碟插入播放器時,初 始呼叫之事件。全域事件用之事件資訊則僅包含事件類型 (type)與事件之ID(ID)。 第32圖係全域事件管控器之程式之圖表 (“BD.PROG”)。 本圖表内容與第30圖已說明之事件管控器圖表相同。 (事件發生之機制) 以下,參照第33〜第35圖說明事件發生之機制。 第33圖係時間事件之例。 如前所述,時間事件係以播放清單資訊(“χχχ pL”)之 52 201108747 事件清單(evenUist)加以定義者。定義為時間事件之事件, 亦即事件類型(type)為” timeevent”時’若事件生成時刻(“t 1,,) 屆至’具有ID”Exl,,之時間事件即可自腳本處理器送至程式 處理器。程式處理器則可搜尋具有事件ID,,Exl”之事件管控 器,並執行處理對象之事件管控器。舉例言之,本實施例 中,可進行2個按鍵影像之描繪。 第34圖係進行選單操作之使用者事件之例。 一如前述’進行選單操作之使用者事件亦以播放清單 資Λ( XXX.PL”)之事件清單(eventiist)加以定義。定義為使 用者事件之事件,即,事件類型(type)為”Userevent,,時,若 事件生成時刻(“U”)屆至,則該使用者事件為陰性。此時, 事件本身尚未生成。該事件可於有效期間資訊(durati〇n)所 記錄之期間内維持陰性狀態。 如第34圖所示,使用者按壓遙控鍵之「上」、「下」、 「左」、「右」鍵或「決定」鍵時,將先藉11〇1>管理部生成 UOP事件,再送至程式處理器。程式處理器則對腳本處理 器送入uop事件,腳本處理器接收1)01>事件時即檢索是否 存在有效之使用者事件,若存在作為對象之使用者事件, 則生成使用者事件,並送入程式處理器。程式處理器則搜 尋具有事件ID”Evl”之事件管控器,並執行處理對象之事件 管控器。舉例言之,本實施例中,可開始再生播放清單#2。 生成之使用者事件並不包含使用者所按下之遙控鍵為 何之資訊。已選擇之遙控鍵之資訊係藉u〇p事件告知程式 處理器,而記錄於假設播放器所包含之暫存器SpRM(8)
C 53 201108747 中。事件音控器之程式則可調查該暫存器之值而執行分支 處理。 第35圖係全域事件之例。 如前所述,全域事件係以有關BD磁碟整體之資訊 (“BD.INFQ”)之事件清單(evemH嗔義者。定義為全域事件 之事件即,事件類型(type)為”globalevent”時,僅於使用 者有發生遙控鍵操作時乃生成事件。 、 使用者按下,,選單”時,將先藉UOP管理部生成u〇p事 件’再傳送至程式處理^程式處理㈣對腳器送入卿 事件’腳本處則生仙符之全域事件,並傳送至程式 處理器。程式處理器則搜尋具有事件ID,,menu,,之事件管控 器,再執行處理對象之事件管控器。舉例言之本實施例 中’已開始再生播放清單#3。 本實施例中,雖僅稱,,選單,,鍵,但亦可如dvd段具有 複數之選單鍵。各選單鍵之對應_可藉個別定義而形成 對應。 (假設播放機器) 以下,參照第36圖說明程式處理器之功能構造。 程式處理器係於内部具有假設播放機器之處理模組。 假設播放機器係定義為BD之功能模組,並不需要各BD播放 器之安裝。即,可保證在任何BD播放器上皆可執行相同功 能。 假設播放機器大致具備2種功能。即,程式設計函數與 播放器變數(暫存器)。程式設計函數係以JAVA(登錄商 54 201108747 標)script為基礎,而定義以下之功能為BD固有函數者。 連結函數:停止目前之再生,而開始指定之播放清單、 圖格、時刻之再生。
Link(PL#,Cell#,time) PL# :播放清單名
Cell# :圖格編號
Time :圖格内之再生開始時刻 PNG描繪函數:於影像平面描繪指定PNG資料
Draw(file,X,Y)
File : PNG檔名 X : X座標位置 Y : Y座標位置 影像平面清除函數:清除影像平面之指定領域 Clear(X,Y,W,H) X : X座標位置 Y : Y座標位置 W : X方向寬 H : Y方向寬 播放器變數包含顯示播放器狀態之系統參數(SPRM) 與作一般用途使用之一般參數(GPRM)。 第37圖係系統參數(SPRM)之一覽表。 SPRM(O):語言碼 SPRM(l):音效流編號 SPRM(2):字幕流編號 55 201108747
SPRM(3):角度編號 SPRM(4):標題編號 SPRM(5):章節編號 SPRM(6):程式編號 SPRM(7):圖格編號 SPRM(8):選擇鍵資訊 SPRM(9):導向定時器 SPRM(10):再生時刻資訊 SPRM(ll):卡拉OK用混合模式 SPRM(12):家長分級用國家資訊 SPRM(13):家長分級 SPRM(14):播放器設定值(視訊) SPRM(15):播放器設定值(音訊) SPRM(16):音效流用語言碼 SPRM(17):音效流用語言碼(擴充) SPRM(18):字幕流用語言碼 SPRM(19) ··字幕流用語言碼(擴充) SPRM(20):播放器區碼 SPRM(21):預備 SPRM(22):預備 SPRM(23):再生狀態 SPRM(24):預備 SPRM(25):預備 SPRM(26):預備 56 201108747 SPRM(27) 預備 SPRM(28) 預備 SPRM(29) 預備 SPRM(30) 預備 SPRM(31) 預備 另,本實施例中’假設播放器之程式設計函數係以 JAVA(登錄商標)script為基礎,但亦可不使用jaVA(登錄商 標)script ’而使用UNIX(登錄商標)〇S等所使用之 • B_SHELL、erl scriPt等其它程式設計函數,換言之,本發明 並不限於使用JAVA(登錄商標)script。 (程式之例) 第38及第39圖係事件管控器之程式之例。 第38圖係具有2個選擇鍵之選單之例。 於圖格(playlist#'.cell#l)始端可使用時間事件而執行 第38圖左側之程式。在此,初始係對一般參數之一GPRM(O) 設定”1”。GPRM(O)係於該程式中用以識別已選擇之按鍵 • 者。初始之狀態下,選擇配置於左側之按鍵1係設定為初始 值。 其次,使用作為描繪函數之DRAW分別就按鍵1、按鍵 2進行PNG之描繪。按鍵1係以座標(10,200)為起點(左端)而 描繪PNG影像“lblack.png”。按鍵2則以座標(330,200)為起 點(左端)而描繪PNG影像”2white.png”。 又,本圖格最後使用時間事件執行第38圖右側之程 式。在此,係使用LINK函數而指定由該圖格之始端再度再 57 201108747 生0 第39圖係選單選擇之使用者事件之事件管控器之例。 「左」鍵、「右」鍵、「決定」鍵之任一遙控鍵受按壓 時,分別對應之程式已寫入於事件管控器。使用者按壓遙 控鍵時,則如第34圖之說明,將生成使用者事件,並啓動 第39圖之事件管控器。本事件管控器可使用可識別選擇按 鍵之GPRM(O)之值與可識別已選擇之遙控鍵之SpRM(8)而 進行分支處理。 條件1)已選按鍵1,且,選擇鍵為「右」鍵 將GPRM(O)重設為2,並使選擇狀庇下之按鍵改為右鍵 分別改寫按鍵1、按鍵2之影像。 條件2)選擇鍵為「決定(〇k)j時,已選按鍵1 開始再生播放清單#2。 條件3)選擇鍵為「決定(0K)」時,已選按鍵2 開始再生播放清單#3。 如上所述,即可進行執行處理。 (播放器處理流程) 以下,參照第40〜第43圖說明播放器之處理流程。 第40圖係至AV再生為止之基本處理流程。 如第40a圖所示,一旦插入BD磁碟(sl〇1),則bd播放 器將讀入BD.INFO檔並解析之(1〇2),再讀入 BD.PR〇G(l 03)。BD.INFO及BD PR〇G皆暫存於管理資訊記 錄記憶體中,而可藉腳本處理器加以解析。 58 201108747 接者,腳本處理器則依bd.info檔内之初始事件 (fkstevem)資訊,生成初始事件(顯)。生成之初始事件則 為程式處理器所接收,而執行處理對應該事件之事件管控 器(S105)。 二 對應初始事件之事件管控器可期待記錄有初始應再生 之播放清單資訊。假定,未指示播放清單再生,則如第40b 圖所示,播放器將不進行再生,而僅等待接收使用者事件
(f〇1)°BD播放器—旦接收來自使用者之遙控操作,則U〇p 管理部將對程式處理器送入UOP事件(S202)。 程式處理㈣咖u〇p事件為選單鍵(伽),若 選單鍵,則對聊本處理器送入u〇p事件,腳本處理器則生 成使用者事件(S204)。程式處理器則執行處理對應已生成之 使用者事件之事件管控器(S205)。 第4!圖係PL再生開始至卿再生開始為止之處 程0 如前所述,初始事件管控器或全域事件管控器可開始 再生播放清單(S30I)。腳本處理器則進行播放清 訊™”之讀人與解析(夠,以及對應播放清單之程 式資訊”獄.PROG”之讀入_,以作為再生對象之播放 清皁再生所需之資訊。其次,腳本處理器將依據播放清單 尹已款目之圖格資訊指示圖格之再生⑽)。圖格再生音# 由腳本處理器向表達控制器提出要求,而令表達控制^ 始AV再生(305)。 ° -旦開始再生AV(姻)’則表達控制器將讀入並解析對 59 201108747 應再生圖格之VOB資訊檔(YYY.VOBI)(S402)。表達控制器 並將使用時間對映而指定開始再生之v〇BU與其位址,並對 驅動控制器指示讀出位址,驅動控制器則讀出作為對象之 VOB資料(S403) ’再朝解碼器送入VOB資料而開始再生 (5404) 。 VOB再生將持續至該VOB之再生區間結束為止 (5405) ,一旦結束’即續行次一圖格再生開始步驟S304。 若無次一圖格,則停止再生(406)。 第42圖係AV再生開始後之事件處理流程。 φ BD播放器係事件驅動型之播放器機型。一旦開始再生 播放清單,即分別啓動時間事件類' 使用者事件類、字幕 顯示類之事件處理過程,且平行地執行事件處理。 S500類之處理(第42a圖)係時間事件類之處理流程。 開始再生播放清單後(S501),則經確認播放清單再生 是否結束之步驟(S502),再由腳本處理器確認是否已為時間 事件發生時刻(S503)。時間事件發生時刻屆至時,腳本處理 器則生成時間事件(S504) ’再由程式處理器接收時間事件而 鲁 執行處理事件管控器(S505)。 步驟S503中若未屆至時間事件發生時刻,或,步驟S5〇5 中在事件管控器執行處理後,將再度返回步驟S5〇2,而重 複進行上述之處理。又,步驟S5〇2中一旦確認播放清單再 生已結束,則強制結束時間事件類之處理。 S600類之處理(第42b圓)則係使用者事件類之處理流 程。 60 201108747 開始再生播放清單後(S6〇1),再經播放清單再生結束 確'^驟(S6G2),而續行收確認步驟之處理(S603)。 若已接收UOP’則υ〇ρ管理部將生成⑽卩事件⑼⑽),已接 收uop事件之程核理㈣確認UQp事件是否為選單呼叫 (S605) ’若是’則程式處理器將生成事件於腳本處理器 (S607) ’程式處理||並將執行處理事件管㈣(s6〇8)。 步驟S605中若判斷u〇p事件並非選單呼叫,則顯示 UOP事件係方向鍵或「決定」鍵之事件。此時,由腳本處 理器判斷現在時刻是否在使用者事件有效期間内(_6),若 是,則腳本處理器將生成使用者事件(S607),程式處理器則 執行處理對象之事件管控器(S6〇8)。 步驟S603中若未接收u〇p,且步驟S6〇6中現在時刻非 於使用者事件有效期間内,或,步驟S6〇8中在事件管控器 執行處理後,將再度返回步驟S602,而重複進行上述之處 理。又’步驟S602中一旦確認播放清單再生已結束,則強 制結束使用者事件類之處理。 第43圖係字幕處理之流程。 開始再生播放清單後(S701),則經播放清單再生結束 確認步驟(S702),而續行字幕描繪開始時刻確認步驟 (S703)。字幕描繪開始時刻屆至時,腳本處理器將對表達控 制器指示字幕描繪’表達控制器則對影像處理器指示字幕 描繪(S704)。步驟S7〇3中若判斷並非字幕描繪開始時刻, 則確認是否字幕描繪結束時刻(S705)C>若判斷為字幕描繪結 束時刻,則表達控制器即對影像處理器指示消去字幕,而 61 201108747 由影像處理器消去描繪中之字幕(S706)。 字幕描繪步驟S704結束後 '字幕消去步驟37〇6結束後 或字幕顯示結束時刻罐認步驟S705中,若判斷並非前述時 刻,則返回步驟S702,以重複進行上述之處理。又,步驟 S702中一旦確認播放清單再生已結束,則強制結束字幕顯 示類之處理。 (第2實施例) 其次’就混合有不同編碼方式(或不同屬性之動態影像) 之串流之第2例,亦即,混合有子母畫面中藉亮度鍵進行透 明處理時所使用之亮度之閾值(動態影像之屬性)之例,作為 本發明第2實施例,而加以說明。 本實施例中,將說明BD-ROM等套裝軟體媒體等中, 進行再生子母畫面時,可切換顯示是否進行透明處理之亮 度值之閾值而消除再生動作之延遲之記錄媒體、多工方 法、多工裝置及其再生裝置。 本發明之記錄媒體係於管理資訊中儲存有實施亮度鍵 所控制之透明處理之串流内之連續再生單位中,顯示影像 時判定是否進行透明處理之亮度值之閾值已受限或顯示已 受限之資訊者。 本實施例之記錄媒體、多工方法、多工裝置及其再生 裝置之動作與構成要素之基本部分與第1實施例之記錄媒 體之資料構造、多工方法或再生裝置相同,故以下僅就本 實施例之特徵部分加以說明。 第44圖係顯示本實施例之記錄媒體中儲存之串流之亮 62 201108747 度鍵之閾值之例者。第44圖之例φ 丄 ,由於無縫而連接之各 區間之亮度鍵之閾值全部固定為2〇,从 # ’故不致因亮度鍵之閾 值切換而發生延遲,而可實現無縫之連接。 又,本實施例之記錄媒體中,盖 …、綠而連接之再生區間 之亮度鍵之相關資訊係儲存於管理資訊中。第·係將亮 度鍵之相關資訊作為子母晝面之背景資訊之—部分而儲存 之例。第45a圖係顯示表示亮度铋β U没鍵疋否有效之旗標資訊
Luma_key_Valld者。亮度鍵若為有效呦v顧為 D,則依據亮度鍵之閾值而對影像進行透明處理而加以顯 示,若亮度鍵並非有效者(Luma_key_vaHd為〇),則不予透 明處理即加以顯示。如圖所示,無縫而連接之各區間之 Luma—key一valid之值係固定者。亦即,無縫而連接之各再 生區間之&度鍵;%否有效係固定為·_種。第45b圖係顯示適 用冗度鍵時’可决疋進行透明處理而顯示之亮度值之間值 LUma_key_upper_limit者。舉例言之,若LumaJcey_upperJimit 為20,則亮度值20以下之像素將透明顯示,亮度值超過2〇之 像素則不透明顯示。如圖所示’無縫而連接之各再生區間 之 Luma_key—upper_limit 值皆相同。在此,
Luma_key_upper一limit之資訊在亮度鍵有效時將被參照,故 亦可僅於亮度鍵有效時,設定顯示亮度鍵之閾值之資訊。 實施亮度鍵所控制之透明處理之播放器中,若保證亮 度鍵之閾值為固定,則無須亮度鍵之閾值處理中之閾值變 更,故宜可預先判定亮度鍵之閾值為固定。第46圖係說明 用以保證亮度鍵之閾值為固定之旗標者。第46圖之例中, 63 201108747 顯示亮度鍵之閾值為固定之旗標資訊L_uma_key_fixed_flag 係作為各再生區間之屬性資訊之一部分而儲存者。 Luma_key_fixed_flag顯示前述再生區間之亮度鍵之閾值與 先前之再生區間之亮度鍵之閾值是否相同。第46a圖係顯示 亮度鍵之閾值為固定(Luma_key_fixed_flag為1)之例者。該 例中,各再生區間係無縫而連接,並保證該等再生區間之 亮度鍵之閾值為固定。第46b圖係未保證亮度鍵之閾值為固 定(Luma_key_fixed_flag為0)之例。各再生區間並非無縫之 連接對象,各再生區間之亮度鍵之閾值係可變者。另, Luma_key_fixed_flag可對連續再生之區間整體設定,亦可 對構成連續再生區間之各再生區間設定。進而’就各再生 區間設定時,各再生區間顯示播放項目所指定之再生區 間,而亦可將再生區間内之亮度鍵之閾值是否固定之資訊 儲存於以播放項目為單位而設定之再生資訊中。在此,亮 度鍵之閾值是否固定亦可與顯示現時播放項目與先前之播 放項目所指定之再生區間是否無縫而連接之資訊等兼用, 而匯整於1旗標内。又,顯示亮度鍵是否適用之資訊亦可同 樣進行儲存。 在此,無縫之連接已有與第1實施例相同之種類,但亦 可包含可與不同角度之串流無縫而連接之無縫多角度等方 式。無縫多角度方式下,各角度之亮度鍵可為有效或非有 效,或亮度鍵之閾值皆相同。又,無縫之連接之種類已有 以下複數種類,即,(1)連接之前後之MPEG-2系統規格之 STC(system time clock)等參考時脈之值並不連續之情形(類 64 201108747 縫之連接)’以及(2)連接之前後之MPEG-2系統規格 型2之無縫之連接)等種類。因此, f之情形(類 之無縫之連接,或為類型2之無縫之連妙否二否為類型1 示無縫連接之事實,職該”訊,即可顯_=,而顯 生區間之亮度鍵之閾值為固定。 之2個再 第47圖係說明子母畫面適用亮度鍵之例者 中’稱為主視訊之主映像上將重疊顯㈣為 母晝面
像。此時,若對副視訊之亮度鍵所控制之透明處=副映 則實施透明處理’若無效,則不實施透明處理。第$政’ 顯示視訊之顯示平面者,如第47bgl與第47e圆所示7竭係 係用以顯示主視訊者,平面2係用以顯示副視訊者^如平面1 圖所示,將對主視訊重疊顯示副視訊。本例中,細第47d 示之塗黑部分係藉亮度鍵所控制之透明處理而透明=圖所 副視訊雖可切換複數之串流,但第47e、47f、 員不。 4 / g圖中, 示有存在2個副視訊之情形,第4以圖中顯示有主視$ ,列 再生區間之顯示之時間序列,第47f圖中顯示有第之各 之各再生區間之顯示時間序列’第47g圖中顯示有第訊 訊之各再生區間之顯示時間序列。舉例言之, 紉硯 7f圖中p 間1-1與區間1-2—旦無縫而連接(圖中(1)),則區間^ 处 間1-2中亮度鍵所控制之透明處理是否有效, 〜區 -Λ 久有致時之 凴度鍵之閾值將分別改為相同。又,第1副視兮 D之區間1 至第2副視訊之區間2-3之連接若為無縫之連接(圖中(2)) 區間1-2與區間2-3之亮度鍵之相關資訊亦將相同。 則 。進而’為 65 201108747 確保各再生區間之連接部分以外之連接(圖中(3))之連續 性,亦可使區間1-3與區間2_3之間之亮度鍵之相關資訊相 同。 其次,主視訊與副視訊將多工轉換而記錄於傳輪流等 中,而第48圖則顯示多工方法。第48a圖係將主視訊與副視 訊多工轉換成同一傳輸流之例,第48b圖係將主視訊與副視 訊多工轉換至不同傳輸流之例。如上所述,主視訊與副視 訊可多工成為同一傳輸流,亦可多工成為不同傳輸流。 第4 9圖係顯示用以作成本實施例之記錄媒體中儲存之 多工資料之多工方法之動作之流程圖。本實施例之多工方 法包含有決定是否可切換亮度鍵為有效與否之單位之步驟 (55301) 、依據已決定之單位而編碼片段之動態影像之步驟 (55302) 、就預定之各再生區間生成有關亮度鍵之旗標資訊 之步驟(S5304)及生成包含步驟%3〇4中已生成之有關亮度 鍵之旗標資訊之管理資訊之步驟(S5305),而與習知之多工 方法不同。 亦即,本實施例之多工方法係可編碼包含第丨動態影像 與用以重疊於第1動態影像上之第2動態影像之映像流之動 態影像編碼方法,其可決定映像流中作為部分區間之組合 且為連續再生對象之區間之連續再生區間,並可編碼各再 生區間之映像流,以使前述連續再生區間内亮度鍵之有效 與否固定,或亮度鍵所控制之透明處理所使用之閾值之任 一方或雙方所定義之亮度鍵屬性固定(S5301〜S5303),又, 可就單一或複數之各再生區間生成前述亮度鍵屬性 66 201108747 (S5304),且’可作成包含顯示連續再生區間之前述亮度鍵 屬吐為固定之旗標資訊之管理資tK(S53〇5)。以下,則詳細 說明該等步驟。 首先,步驟S5301中,將決定可切換是否使亮度鍵有效 之單位° gP ’決定可以連續再生單位、片段或隨機讀取單 位之任一單位進行切換。接著,步驟s53〇2中則依據步驟 S5301中已決定之切換單位而編碼片段之資料。另,步驟 S5301中,亦可就是否切換亮度鍵之閾值進行判定,並依據 判定結果,於步驟S5302中編碼片段之資料。步驟S53〇3中, 則判定是否已結束最終片段之編碼,若是,則續行至步驟 S5304,若否,則返回步驟S53〇2而重複進行片段之編碼。 步驟S 5 3 G 4中,則就預定之各再生區間作成有關亮度鍵之屬 性資訊,再續行至步驟S5305。預定之再生區間則為播放清 單所指定之再生區間,但亦可為片段或隨機讀取單位。步 驟S5305中,則作成包含步驟S53〇4中已生成之屬性資訊之 官理資訊’並就管理資訊與諸之資料加以乡轉換並予 輸出在此亦可於管理資訊中包含連結之2個再生區間是 否可以無縫而連接之資訊。無縫而連接之各再生區間之亮 度鍵是否有效係屬固定,故步驟S5301中,將決定無縫而連 接之各再生區間之亮度鍵是否有效係不可切換者。進而, 步驟S53G2中’在無縫而連接之各再生區間之亮度鍵為有效 時,將使進行亮度鍵之透明處理時之閾值為相同者而進行 編碼。另,步驟S53〇lt,決定可切換亮度鍵是否有效之單 位時之詳細動作,則可適用與第14圖所示之第1實施例之多 67 201108747 工方法相同之動作。 第50圖係顯示第49圖中之旗標資訊生成步驟(S5304) 及管理資訊生成步驟(S5305)之具體例之流程圖。步驟 S5304a中,將判定業經編碼之片段是否為判定為可切換亮 度鍵是否有效之片段,若是,則生成顯示亮度鍵是否有效 並非固定之旗標資訊,並與該片段形成對應而將旗標資訊 儲存於記憶體之工作領域(S5304b),若否,則生成顯示亮度 鍵是否有效為固定之旗標資訊,並與該片段形成對應而將 旗標資訊儲存於記憶體之工作領域(S5304c)。在此,旗標資 訊包含顯示播放清單所指定之再生區間等預定之各再生區 間之亮度鍵是否有效之資訊,以及亮度鍵為有效時之亮度 鍵之閾值。步驟S5304d中,將判定前述片段是否為業經編 碼之最後片段,若非,則重複進行上述S5304a〜S5304c,若 是,則續行至步驟S5304e。步驟S5304e中,則生成包含各 播放清單之亮度鍵之相關資訊之子母晝面用之背景資訊, 並於步驟S5305f中,生成包含子母晝面用之背景資訊、播 放清單、隨機讀取所需之資訊等之管理資訊。播放清單則 包含顯示連續之2個再生區間是否可無縫而連接,以及無縫 而連接之類型之資訊。 另,管理資訊内包含有用以識別副視訊之傳輸流或編 碼串流之索引資訊,故亦可僅對藉索引編號而顯示其為副 視訊之傳輸流或編碼串流,於管理資訊内包含亮度鍵之相 關資訊。 又,以上雖已說明子母晝面動作之副視訊之亮度鍵所 68 201108747 =明處理’但本發明並不僅限於此,若存在複數之 =面’則可全面適用於預定之平面之前方顯示之平面 =之顯示。舉例言之,可於靜態影像或電腦製圖等上 重痛讀態影像或動態影像。進而,亦可對顯示於不同 顯不平面之複數影像實施亮度鍵所控制之透明處理。 又,亦可對應亮度鍵之閾值等,而以半透明或靡以 外之透光率進行顯示。
子母晝面中’亦可限制與亮度鍵所控制之透明處理不 同之再生動作。舉例言之,進行無縫而連接之再生區間之 間之高速再生或逆向再生等特殊再生時,亦可使副視訊是 否顯示為固定方式十特殊再生時,可維持顯示副視訊, 或’不予顯示’而固定於其中之—種方式。又,特殊再生 時,若顯示副視訊’财u定亮度鍵之閾值,以使亮度鍵 所控制之透明處理與特殊再生形成相關。此時’亦可藉顯 示特殊再生時之副視訊之顯示與否之旗標資訊之值為固 定,或顯示前述旗標值為固定者之旗標資訊等之旗標資 訊,而保證子母晝面之特殊再生時之限制。 另,主視訊與副視訊之編碼方式可為諸如MPEG4 AVC、MPEG-2視sfl、VC-1等。在此,若主視訊採用MpEG_4 AVC ’則副視訊可採亦為MPEG-4 AVC之方式等,為減少播 放器之應組合,亦可限制主視訊與副視訊之編碼方式之組 合0 第51圖係顯示用以實施本實施例之多工方法之多工裝 置5200之構造之功能區圖。多工裝置5200係可編碼包含第 69 201108747 1動態影像與用以重疊於第1動態影像上之第2動能與像之 映像流之動態影像編碍裝置 .一 W ’包含有切換單位決定 部㈣、切換資訊生成部遍、編碼部测、系統多工部 5204、管理資訊作成部·、結合物6。在此,重叠時, 第2動態影像中僅有具有超過預"值之亮度之影像領域 可重疊於第1錢影像上。以下,職各部動作加以說明。 切換單位決定部通係可決定映像流中作為部分區間
之組合且為連續再生之對象之區間之連續再生區間之處理 部,在此,將決定可切換亮度鍵之單位,並朝切換資訊生 成部5202及編碼部5203輸入已決定之切換單位111^2。切換 單位則可為預先設定者,或由外部設定者。 切換資訊生成部5202可依據切換單位Unit2而生成顯 示播放清單所指定之各再生單位之亮度鍵之屬性資訊之亮 度鍵資訊Lumalnf2,並加以輸入至管理資訊作成部5205。 舉例言之,可生成顯示連續再生區間内之上述閾值為固定 之旗標資訊。
另,切換資訊生成部5202可生成用以指定重疊時之各 種顯示處理之複數之顯示屬性資訊,但上述複數之顯示屬 性資訊之生成時,須使複數之顯示屬性資訊中構成連續再 生區間之複數之部分區間中可切換内容之顯示屬性資訊之 個數為預定之一定值以下。具體而言,如第52圖所示,切 換資訊生成部5202可生成⑴顯示上述閾值,即,適用亮度 鍵時透光率視為1之亮度值之閾值在先前之再生區間與現 時之再生區間内是否相同(1)或不同(〇)之旗標,或亮度鍵之 70 201108747 明乂念
’(…顯示對主視訊影像重疊之副視訊影像之顯示位置 在先前之再生區間與現時之再生區間内是否相同(U或不同 (0)之旗標,或顯示位置之座標資訊,以及(iii)顯示對主視 。像重疊之副視訊影像之縮放(放大率)在先前之再生區 間與現時之再生區間内是否相同⑴或不同⑼之旗標,或用 以指定縮放方法之資訊等之顯示屬性資訊,作為子母畫面 者尽> δίΐ,但生成上述複數之顯示屬性資訊時,應使複 數之顯示屬性資訊中可切換之顯示屬性資訊之個數為預定 之—定值(諸如2個)町。藉上述關,即可保證連續再生 區間之可切換數值之顯示屬性資訊之個數㈣在—定數量 以下’以減輕再生裝置之切換處理所導致之處理負擔。 編碼部5203係可編碼構成連續再生區間之複數之部分 品1之第1及第2動態影像之處理部,而可符合切換單位決 定部伽已蚊之連續再生_之上述閾值不改變之限 制’在此’可編碼各諸之資料而符合城單位之限 制,並對系統多工部5204輸入編碼資料Cdata2。具體而古, 2碼部伽可修正(細純,或加上偏移量)構__ 影像之像素之亮度值’以使連續再生區間之第2動態影像中 用於重疊之影像領域之亮度超過上述間值,且使不重 施透明處理⑽彡㈣域之亮度在上述閾值以下。 ^ 业个限聆切換單位決定部5201已決 定之連續再生區間,而亦可就依解碼賴式而無縫連接^ 複數之部分區間編碼複數部分區間之第丨及第2動態 而符合不改變上述閾值之限制1即,上述之解喝器模式 71 201108747 下,已規定2個部分區間應無縫而連接之情形,故上述2個 部分區間宜預先編碼第1及第2動態影像,以符合不改變上 述閾值之限制。 糸統多工部5204可就編碼資料Cdata2進行系統多工, 並對管理資訊作成部5205輸入串流資訊Strlnf2,並對結合 部5206輸入多工資料Mdata2。BD-ROM中之系統多工方法 係採用稱為資源封包,對MPEG-2之傳輸流附加4位元組之 標頭之方式。又,串流資訊Strlnf2則包含時間對映等用以 生成有關多工資料Mdata2之管理資訊之資訊。另,系統多 工部5204亦可進行多工轉換,以使構成連續再生區間之複 數之部分區間可藉傳輸流之封包記號而被特定。藉此,即 可藉封包記號特定上述閾值為固定之片段。 管理資訊作成部5205係可依據來自切換資訊生成部 5202之指示,作成包含顯示連續再生區間之上述閾值為固 定之旗標資訊及上述顯示屬性資訊之管理資訊之處理部之 一例’在此,可生成包含依據串流資訊Strlnf2而生成之時 間對映及亮度鍵資訊Lumalnf2等之管理資訊ctrllnf2,並加 以輸入至結合部5206。 結合部5206係可結合已於編碼部5203中編碼之第1及 第2動態影像與管理資訊作成部5205所作成之管理資訊而 加以輸出之處理部,在此,可結合管理資訊Ctrllnf2與多工 資料]V4data2而構成記錄資料Dout2,並加以輸出。 具有以上構造之多工裝置5200並可進行第49、50圖所 示之流程圖之多工動作’結果則可生成第44〜48圖所示之管 72 201108747 理資訊及編碼串流。 第53圖係顯示該多工裝置5200所生成之管理資訊之資 料構造者。第53a圖係顯示管理資訊之一之播放清單之資料 要素者,第53b圖係顯示無縫連接(connection_condition=5) 之再生區間之播放清單之例。多工裝置5200則如第53a圖所 示’可作成「播放項目」、「次播放項目」及「子母晝面之 背景資訊」作為播放清單。在此,如第53b圖所示,「播放 項目」顯示主視訊之各再生區間之資訊(片段之再生開始時 刻與再生結束時刻等)及再生區間之間之連接條件等,「次 播放項目」則顯示副視訊之各再生區間之資訊(片段之再生 開始時刻與再生結束時刻等)及再生區間之間之連接條件 等,「子母畫面之背景資訊」則顯示再生子母畫面時之副視 訊之顯示屬性資訊(亮度鍵、顯示位置、縮放等)。另,對應 播放項目及次播放項目之主視訊之片段可藉播放項目之索 引編號而形成相關。 如上所述,多工裝置5200可生成顯示上述閾值為固定 之旗標資訊,作為構成連續再生區間之複數之部分區間(圖 中之「再生區間」)個別所對應之再生資訊(圖中之「背景資 訊」)。具體而言,可生成上述旗標資訊作為播放清單所包 含之播放項目所對應之再生資訊(圖中之「背景資訊」)。 另,以編輯工具等作成資料時,雖可能以個別裝置進 行編碼資料之生成與系統多工或管理資訊之作成,但即便 如此,各裝置之動作僅須與多工裝置5200之各部相同即可。 又,該多工裝置5200不僅可適用作為用以生成編碼串 73 201108747 流之動態影像編碼裝置,亦可適用作為可對6〇等光碟、 SD(securedigital)卡等快閃記憶體、或硬碟等記錄媒體記錄 編碼串流之動態影像記錄裝置。因此,多工裝置湖所具 備之輸出段之結合部5206具有結合已於編碼部52〇3編碼後 之第1及第2動態影像與管理資訊作成部湖所作成之管理 資机並加以記錄於記錄媒體之記錄功能即可。上述之動態 〜像„己錄裝置(或動態影像記錄方法)即可作成本說明書所 揭露之記錄媒體。 第5 4圖係顯示再生本實施例之記錄媒體中儲存之多工 資料之播放H (動態影像再生裝置)中,進行再生區間之切換 夺貫施兜度鍵所控制之透明處理之動作之流程圖。 首先,步驟S5401中,播放器將判定播放項目所指定之 見時之再生區間與次_再生區間是否無縫而連接,若是, 則續行至步驟S5405,若否,則續行至步驟S54〇2 。具體之 判斷例如下,gp,播放器可取得對應映像流之管理資訊, 並判斷所取得之管理資訊是否包含顯示上述閾值為固定之 旗軚身訊(S5401)。若是,則判斷現時再生區間與次一再生 區間係無縫而連接者(S54〇1為YES),若否,則判斷現時再 生區間與次一再生區間非無縫而連接者(S5401為NO)。 步驟S5402中,播放器可判定次一再生區間之亮度鍵是 否有效,若是,則續行至步驟S54〇3,若否,則續行至步驟 S5406。步驟S5403中,將取得亮度鍵之閾值,步驟S54〇4 中,則依據步驟S5403中已取得之亮度鍵之閾值而對副視訊 實施透明處理。 74 201108747 '驟5405中’播放器可依據與現時之再生區間相同之 條件(上述閾朗—)而制視訊實輯明處理。具體而言, 係對田4視成中亮度為上述閾值以下之像素實施完全透明之 處理。此時,若現時之再生區間之亮度鍵非為有效者,則 不對副視訊實施透明處理。 步驟S54G6中’播放器^判定步驟S54G4或步驟S5405 之輸出結果’或者步驟S54G2之亮賴並非核者,則於主 視況上重㈣示未實施透日歧理之副視訊之解碼結果。 另第54圖已說明之動作可藉再生第工實施例之第2〇 圖及第21圖已說明之BD磁碟之播放器而實現。舉例言之, 可於第2G®之表達處理部進行亮度鍵之透明處理。 又,播放器亦可依據預定之再生順序而決定再生之播 放員目之順序。舉例吕之,連續再生複數播放項目時,可 優先選擇亮度鍵之閾值為-定之播放項目。此時,若由使 用者藉遙控動作而要求特定項目之再生,則亦可連續再生 冗度鍵之閾值不同之播放項目。進而,本第2實施例之多工 方法及夕工裝置亦可使依預定之再生順序連續再生之播放 項目間之⑨度鍵之閾值為-定。在此,丨個播放項目係對應 1個再生單位。 (第3實施例) 進而,可藉將可實現上述各實施例所示之記錄媒體、 其再生方法及記錄方法之程式記錄於軟碟等記錄媒體中, 而以獨立之電腦系統簡易實現上述各實施例所示之處理。 第55A〜55C圖係使用軟碟等記錄媒體中所記錄之程式 75 201108747 而藉電腦系統實施上述各實施例之再生方法及記錄方法之 說明圖。 第55B圖係顯示軟碟之正面外觀、截面構造及軟碟者, 第55A圓係顯示作為^己錄媒體本體之軟碟之物理格式之例 者。軟碟FD内設於外殼F内,該磁碟之表面上形成有同心 圓狀之自外周朝内周而形成之複數磁軌Tr,各磁軌皆朝角 度方向分割為16個磁區Se。因此,儲存上述程式之軟碟中, 在上述軟碟FD上分配之領域,記錄有上述程式。 又,第55C圖係顯示用以對軟碟FD進行上述程式之記 錄再生之構造。將可實現再生方法及記錄方法之上述程式 圮錄於軟碟FD時,係由電腦系統Cs藉軟碟機FDD寫入上述 程式。又,於電腦系統内設可藉軟碟内之程式實現再生方 法及記錄方法之再生方法及記錄方法時,則藉軟碟機而由 軟碟讀出程式,再傳送至電腦系統中。 另,上述說明中,已以軟碟為記錄媒體而說明,但使 用光碟亦可同樣進行處理。又,記錄媒體不僅限於此,亦 可為1C卡、R0M磁帶等,凡可記錄程式者,皆可為相同之 實施。 另,第12、20、2卜25、51圖等所示之功能區圖之各 功能區可實現為典型之積體電路裝置之LSI。該LSI可單晶 片化,亦可複晶片化(諸如記憶體以外之功能區亦可單晶片 化)。在此,雖稱LSI,但依積體程度之不同,亦可稱為1(:、 系統LSI、特大型LSI、極大型LSI。 積體電路化之方法並不限於LSI,亦可藉專用電路或泛 76 201108747 用處理器實現之。亦可利用LSI製造後,可重建可執行程式 之FPGA(field programmable gate array)或LSI内部之電路元 件之連接及設定之可重組處理器。 進而’因半導體技術之進步或衍生之其它技術,可置 換L SI之積體電路化技術一旦出現,當然亦可使用該技術而 進行功能區之積體化。生物技術之適用等亦為可能性之一。 又,各功能區中,亦可僅有儲存資料之單元未單晶片 化,而如本實施例之記錄媒體般為其它構造。
以上,已就本發明之動態影像編碼方法等,依據實施 例加以說明,但本發明並限於該等實施例,同業所構思可 對該等實施例進行之變更而實現之其它實施例及實施例中 各構要素之任意組合而實現之其它形態等,亦包含於本發 明之内。 另第12、20、21、25、51圖等所示之功能區圖之各 功能區及第U、13〜17、40〜43、49 ' 5〇、54圖等所示之流 程圖中,核心部分亦可藉處理器及程式而實現。 几 藉 如上所述,上述實施例所示之動態影像編碼方法或動 態影像解碼方法可使用於上述之任何機器、系統之上, 此,即可得到上述實施例所說明之效果。 產業上之利用可能性 本發明之動態影像編碼方法可藉使由管理資訊所顯示 之構成連續再生單位之動離影像 " 像之蝙碼貪料中,藉亮度值 錢像素透⑽料之料時之_定,而實 縫之再生並避侧值之切換所導致解剌之延遲,故 77 201108747 適用於可對動態影像、製圖或靜態影像等重疊顯示動態影 像之套裝軟體媒體或傳播程式等,舉例言之,其可利用作 為動態影像編碼用LSI、攝影機、動態影像錄影機、動態影 像記錄功能之電視、電腦程式等。 I;圖式簡單說明3 第1圖係DVD之構造圖。 第2圖係色框之構造圖。 第3a〜3d圖係顯示DVD之多工轉換之例者。 第4圖係顯示習知之MPEG-4 AVC串流中適用於畫面單 位之可變長編碼方式之例者。 第5A圖係顯示適用CABAC與CAVLC之編碼串流之解 碼所使用之解碼裝置之構造之功能區圖。 第5B圖係顯示適用CABAC之編碼串流之解碼動作之 流程圖。 第5C圖係顯示適用CAVLC之編碼串流之解碼動作之 流程圖。 第6圖係顯示習知之解碼裝置之動作之流程圖。 第7a〜7d圖係說明子母畫面之顯示例者。 第8圖係說明亮度鍵之閾值在連續再生區間内切換而 導致之問題者。 第9a〜9e圖係顯示第1實施例之記錄媒體所儲存之 MPEG-4 AVC串流中適用於晝面單位之可變長編碼方式之 例者。 第10圖係顯示記錄媒體中顯示可變長編碼方式為固定 78 201108747 之單位之旗標資訊之儲存例者。 第11圖係顯示再生記錄媒體之解碼裝置之動作之流程 圖。 第12圖係顯示多工裝置之構造之功能區圖。 第13圖係顯示多工裝置之動作之流程圖。 第14圖係顯示第13圖中之S5201之具體例之流程圖。 第15圖係顯示第13圖中之S5202之具體例之流程圖。 第16圖係顯示第13圖中之S5204及S5205之其它具體例 之流程圖。 第17圖係顯示第13圖中之S5202之具體例之流程圖。 第18圖係BD之資料階層圖。 第19圖係BD上之邏輯空間之構造圖。 第20圖係BD播放器之概要功能區圖。 第21圖係BD播放器之構造功能區圖。 第22圖係BD之程式空間之說明圖。 第23圖係MPEG串流(VOB)之構造圖。 第24圖係封包之構造圖。 第25圖係說明AV串流與播放器構造之關係者。 第26圖係對磁軌緩衝區之AV資料連續供給模式圖。 第27圖係VOB資訊檔構造圖。 第28圖係時間對映之說明圖。 第29圖係播放清單檔之構造圖。 第30圖係對應播放清單之程式檔之構造圖。 第31圖係BD磁碟整體管理資訊檔之構造圖。 79 201108747 第32圖係記錄全域事件管控器之檔案之構造圖。 第33圖係說明時間事件之例者。 第34圖係說明使用者事件之例者。 第35圖係說明全域事件管控器之例者。 第36圖係假設機器之構造圖。 第37圖係播放器變數表。 第38圖係顯示事件管控器(時間事件)之例者。 第39圖係顯示事件管控器(使用者事件)之例者。 第40a〜40b圖係播放器基本處理之流程圖。 第41圖係播放清單再生處理之流程圖。 第42a〜42b圖係事件處理之流程圖。 第43圖係字幕處理之流程圖。 第4 4圖係說明使亮度鍵之閾值在連續再生區間内為固 定之例者。 第45a〜45b圖係說明無縫再生區間中亮度鍵之值為固 定者。 第46a〜46b圖係說明保證亮度鍵之閾值為固定之旗標 者。 第47a〜47g圖係說明本發明之記錄媒體之子母畫面動 作者。 第48a〜48b圖係說明主視訊與副視訊之多工轉換者。 第49圖係顯示實現本發明第2實施例之子母晝面動作 之多工方法之動作之流程圖。 第50圖係說明實現本發明第2實施例之子母晝面動作 80 201108747 之多工方法中生成管理資訊之動作之流程圖。 第51圖係顯示本發明第2實施例之多工裝置之構造之 功能區圖。 第52圖係顯示子母晝面之背景資訊所包含之顯示屬性 資訊之例者。 第53a〜53b圖係顯示多工裝置5200所生成之管理資訊 之資料構造者。第53a圖係顯示管理資訊之一之播放清單之 資料要素者;第53b圖係顯示無縫連接之再生區間之播放清 單之例。 第54圖係顯示進行本發明第2實施例之子母晝面動作 之播放器之動作之流程圖。 第55A圖係顯示第3實施例之記錄媒體本體之軟碟之物 理格式之例者。 第55B圖係顯示軟碟之正面外觀、截面構造及軟碟者。 第55C圖係顯示用以在軟碟FD上進行上述程式之記錄 再生之構造者。
【主要元件符號說明】 101—BD再生程式 102"*BD管理資訊 103".AV 資料 104、2(Π···Βϋ磁碟 202···光學讀取器 203…程式記錄記憶體 204·.·管理資訊記錄記憶體 205···Αν記錄記憶體 206···程式處理部 207···管理資訊處理部 208…表達處理部 209···影像平面 210···視訊平面 211···合成處理部 301…程式記錄記憶體 302···程式處理器 303".UOP管理部 304…管理資訊記錄記憶體 81 201108747 305···腳本處理器 5005…像素復原部 306···表達控制器 5006...CAVLD 部 307…時鐘 5100…多工裝置 308…影像記憶體 5101…切換單位決定部 309···磁軌緩衝區 5102…切換資訊生成部 310···多工解訊器 5103…編碼部 311···影像處理器 5104…系統多工部 312."視訊處理器 5105…管理資訊作成部 313···音效處理器 5106…結合部 314···影像平面 5200…多工裝置 315···視訊平面 5201…切換單位決定部 316…合成處理部 5202…切換資訊生成部 317…驅動控制器 5203…編碼部 5001…争流緩衝區 5204…系統多工部 5003…二元資料緩衝區 5205…管理資訊作成部 5004…二元資料解碼處理部 5206…結合部
82

Claims (1)

  1. 201108747 七、申請專利範圍: 1. 一種動態影像編碼方法,係將包含第1動態影像及用以 與前述第1動態影像重疊之第2動態影像的映像流編碼 者, 前述重疊時,僅前述第2動態影像中具有超過預定 閾值之亮度之影像領域與前述第1動態影像重疊, 前述動態影像編碼方法包含:
    連續再生區間決定步驟,決定前述映像流中作為部 分區間之組合,即,作為連續再生對象之區間的連續再 生區間; 編碼步驟,將構成前述連續再生區間之複數部分區 間中之前述第1動態影像及第2動態影像編碼,以使前述 連續再生區間決定步驟所決定之連續再生區間符合不 改變前述閾值之限制; 管理資訊作成步驟,作成包含旗標資訊之管理資 訊,該旗標資訊顯示前述閾值在前述連續再生區間為固 定;及 結合步驟,結合前述編碼步驟所編碼之前述第1及 第2動態影像與前述管理資訊作成步驟所作成之管理資 訊並加以輸出; 又,在前述連續再生區間決定步驟中,將無縫連接 之對象的部分區間之組合決定為前述連續再生區間。 2. —種動態影像編碼裝置,係將包含第1動態影像及用以 與前述第1動態影像重疊之第2動態影像之映像流編碼 83 201108747 者, 前述重疊時,僅前述第2動態影像中具有超過預定 閾值之亮度之影像領域與前述第1動態影像重疊, 前述動態影像編碼裝置包含: 連續再生區間決定部,係決定前述映像流中作為部 分區間之組合,即,作為連續再生對象之區間之連續再 生區間者, 編碼部,係將構成前述連續再生區間之複數部分區 間中之前述第1動態影像及第2動態影像編碼,以使前述 修 連續再生區間決定部所決定之連續再生區間符合不改 變前述閾值之限制者; 管理資訊作成部,係作成包含旗標資訊之管理資訊 者,該旗標資訊顯示前述閾值在前述連續再生區間為固 定;及 結合部,係結合前述編碼部所編碼之前述第1及第2 動態影像與前述管理資訊作成部所作成之管理資訊並 加以輸出者; 鲁 又,在前述連續再生區間決定部中,將無縫連接之 對象的部分區間之組合決定為前述連續再生區間。 3. —種動態影像記錄方法,係將包含第1動態影像及用以 與前述第1動態影像重疊之第2動態影像之映像流編 碼,並記錄於記錄媒體中者, 前述重疊時,僅前述第2動態影像中具有超過預定 閾值之亮度之影像領域與前述第1動態影像重疊, 84 201108747 前述動態影像記錄方法包含: 連續再生區間決定步驟,決定前述映像流中作為部 分區間之組合,即,作為連續再生對象之區間之連續再 生區間, 編碼步驟,將構成前述連續再生區間之複數部分區 間中之前述第1動態影像及第2動態影像編碼,以使前述 連續再生區間決定步驟所決定之連續再生區間符合不 改變前述閾值之限制; φ 管理資訊作成步驟,作成包含旗標資訊之管理資 訊,該旗標資訊顯示前述閾值在前述連續再生區間為固 定;及 結合步驟,結合前述編碼步驟所編碼之前述第1及 第2動態影像與前述管理資訊作成步驟所作成之管理資 訊,並記錄於記錄媒體中; 又,在前述連續再生區間決定步驟中,將無縫連接 之對象的部分區間之組合決定為前述連續再生區間。 # 4. 一種記錄媒體,係記錄有可由電腦讀取之資料者, 前述資料包括含有第1動態影像及用以與前述第1 動態影像重疊之第2動態影像的映像流、以及作為用以 管理前述映像流之資訊的管理資訊, 前述重疊時,僅前述第2動態影像中具有超過預定 閾值之亮度之影像領域與前述第1動態影像重疊, 又,前述映像流中,構成前述連續再生區間之複數 之部分區間之前述第1及第2動態影像係經編碼,以使作 85 201108747 為部分區間之組合,即,作為連續再生之對象之區間的 連續再生區間符合不改變前述閾值之限制, 前述管理資訊包含旗標資訊,該旗標資訊顯示前述 閾值在前述連續再生區間為固定; 且,前述連續再生區間由作為無縫連接之對象的部 分區間之組合構成。 5. —種動態影像再生方法,係將包含經編碼之第1及第2動 態影像之映像流解碼,並將前述第2動態影像重疊於前 述第1動態影像上而加以顯示者, 馨 前述動態影像再生方法包含: 管理資訊處理步驟,取得對應前述映像流之管理資 訊,並解釋所取得之管理資訊; 解碼步驟,依據前述管理資訊處理步驟之解釋,解 碼前述第1及第2動態影像;及 顯示步驟,僅將經解碼之前述第2動態影像中具有 超過預定之閾值之亮度之影像領域,重疊於經解碼之前 述第1動態影像上而加以顯示, 鲁 前述管理資訊處理步驟中,判斷前述管理資訊中是 否包含顯示前述閾值為固定之旗標資訊, 且,前述顯示步驟中,在前述管理資訊處理步驟已 判斷前述管理資訊含有前述旗標資訊後,使用與先前之 部分區間中之閾值相同之閾值,進行現時之部分區間的 前述重疊顯示,並無縫顯示先前之部分區間與現時之部 分區間。 86 201108747 6. —種動態影像再生裝置,係將包含經編碼之第1及第2動 態影像之映像流解碼,並將前述第2動態影像重疊於前 述第1動態影像上而加以顯示者, 前述動態影像再生裝置包含: 管理資訊處理部,係取得對應前述映像流之管理資 訊,並解釋所取得之管理資訊者; 解碼部,係依據前述管理資訊處理部之解釋,解碼 前述第1及第2動態影像者;及 φ 顯示部,係僅將經解碼之前述第2動態影像中具有 超過預定之閾值之亮度的影像領域,重疊於經解碼之前 述第1動態影像上而加以顯示者, 前述管理資訊處理部判斷前述管理資訊中是否包 . 含顯示前述閾值為固定之旗標資訊, * 且,前述顯示部在前述管理資訊處理部已判斷前述 管理資訊含有前述旗標資訊後,使用與先前之部分區間 中之閾值相同之閾值,進行現時之部分區間的前述重疊 # 顯示,並無縫顯示先前之部分區間與現時之部分區間。 87
TW99136494A 2006-12-14 2007-12-14 Moving image coding method, moving image coding device, moving image recording method, recording medium, moving image playback method, moving image playback device, and moving image playback system TW201108747A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006337426 2006-12-14

Publications (1)

Publication Number Publication Date
TW201108747A true TW201108747A (en) 2011-03-01

Family

ID=39511686

Family Applications (2)

Application Number Title Priority Date Filing Date
TW96147969A TWI446794B (zh) 2006-12-14 2007-12-14 A motion picture coding method, a motion picture coding apparatus, a motion picture recording method, a recording medium, a motion picture reproduction method, a motion picture reproduction apparatus, and a motion picture reproduction system
TW99136494A TW201108747A (en) 2006-12-14 2007-12-14 Moving image coding method, moving image coding device, moving image recording method, recording medium, moving image playback method, moving image playback device, and moving image playback system

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW96147969A TWI446794B (zh) 2006-12-14 2007-12-14 A motion picture coding method, a motion picture coding apparatus, a motion picture recording method, a recording medium, a motion picture reproduction method, a motion picture reproduction apparatus, and a motion picture reproduction system

Country Status (12)

Country Link
US (4) US8023804B2 (zh)
EP (1) EP2079241B1 (zh)
JP (3) JP4718616B2 (zh)
KR (1) KR101362653B1 (zh)
CN (5) CN101800896B (zh)
AR (1) AR064274A1 (zh)
BR (2) BRPI0722391A2 (zh)
CA (1) CA2671557C (zh)
RU (2) RU2475997C2 (zh)
TW (2) TWI446794B (zh)
WO (1) WO2008072669A1 (zh)
ZA (1) ZA200903806B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI510060B (zh) * 2011-10-18 2015-11-21 Ntt Docomo Inc Dynamic image predictive coding method, dynamic image predictive coding device, dynamic image predictive coding program, dynamic image prediction decoding method, dynamic image prediction decoding device and dynamic image prediction decoding program
TWI513283B (zh) * 2012-07-06 2015-12-11 Ntt Docomo Inc Dynamic image predictive coding device, dynamic image predictive coding method, dynamic image predictive coding program, dynamic image prediction decoding device, dynamic image prediction decoding method and dynamic image prediction decoding program
TWI574551B (zh) * 2015-06-08 2017-03-11 財團法人工業技術研究院 使用適應性調色盤預估單元在調色盤編碼模式中對影像內容的編碼單元進行編碼或解碼之方法與裝置
TWI583184B (zh) * 2011-12-15 2017-05-11 Tagivan Ii Llc Image coding method, image coding apparatus
TWI586146B (zh) * 2011-06-20 2017-06-01 Jvc Kenwood Corp An image decoding apparatus, an image decoding method, and a recording medium

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8472792B2 (en) 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
US7519274B2 (en) 2003-12-08 2009-04-14 Divx, Inc. File format for multiple track digital data
JP5200204B2 (ja) 2006-03-14 2013-06-05 ディブエックス リミテッド ライアビリティー カンパニー 高信頼性システムを含む連合型デジタル権限管理機構
AR064274A1 (es) 2006-12-14 2009-03-25 Panasonic Corp Metodo de codificacion de imagenes en movimiento, dispositivo de codificacion de imagenes en movimiento, metodo de grabacion de imagenes en movimiento, medio de grabacion, metodo de reproduccion de imagenes en movimiento, dispositivo de reproduccion de imagenes en movimiento, y sistema de reproducci
KR20100106327A (ko) 2007-11-16 2010-10-01 디브이엑스, 인크. 멀티미디어 파일을 위한 계층적 및 감소된 인덱스 구조
US8997161B2 (en) * 2008-01-02 2015-03-31 Sonic Ip, Inc. Application enhancement tracks
CN102549557B (zh) 2009-01-07 2015-09-09 索尼克Ip股份有限公司 针对在线内容的媒体指南的特定化、集中式、自动化创建
EP2434769B1 (en) 2009-05-19 2016-08-10 Panasonic Intellectual Property Management Co., Ltd. Recording method and playback method
JP5723888B2 (ja) 2009-12-04 2015-05-27 ソニック アイピー, インコーポレイテッド 基本ビットストリーム暗号材料伝送システムおよび方法
KR101721261B1 (ko) * 2010-08-20 2017-03-30 엘지디스플레이 주식회사 액정표시장치와 그의 데이터전송방법
JP2012060238A (ja) * 2010-09-06 2012-03-22 Sony Corp 動画像処理装置、動画像処理方法およびプログラム
US9247312B2 (en) 2011-01-05 2016-01-26 Sonic Ip, Inc. Systems and methods for encoding source media in matroska container files for adaptive bitrate streaming using hypertext transfer protocol
JP2013038766A (ja) * 2011-07-12 2013-02-21 Sharp Corp 送信装置、送信装置の制御方法、制御プログラム、及び記録媒体
US9467708B2 (en) 2011-08-30 2016-10-11 Sonic Ip, Inc. Selection of resolutions for seamless resolution switching of multimedia content
KR101928910B1 (ko) 2011-08-30 2018-12-14 쏘닉 아이피, 아이엔씨. 복수의 최대 비트레이트 레벨들을 사용하여 인코딩된 비디오를 인코딩하고 스트리밍하기 위한 시스템들 및 방법들
US8818171B2 (en) 2011-08-30 2014-08-26 Kourosh Soroushian Systems and methods for encoding alternative streams of video for playback on playback devices having predetermined display aspect ratios and network connection maximum data rates
US8909922B2 (en) 2011-09-01 2014-12-09 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US9049496B2 (en) * 2011-09-01 2015-06-02 Gracenote, Inc. Media source identification
US8964977B2 (en) 2011-09-01 2015-02-24 Sonic Ip, Inc. Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US20130179199A1 (en) 2012-01-06 2013-07-11 Rovi Corp. Systems and methods for granting access to digital content using electronic tickets and ticket tokens
US9197685B2 (en) * 2012-06-28 2015-11-24 Sonic Ip, Inc. Systems and methods for fast video startup using trick play streams
US9143812B2 (en) 2012-06-29 2015-09-22 Sonic Ip, Inc. Adaptive streaming of multimedia
US10452715B2 (en) 2012-06-30 2019-10-22 Divx, Llc Systems and methods for compressing geotagged video
EP2875417B1 (en) 2012-07-18 2020-01-01 Verimatrix, Inc. Systems and methods for rapid content switching to provide a linear tv experience using streaming content distribution
US8997254B2 (en) 2012-09-28 2015-03-31 Sonic Ip, Inc. Systems and methods for fast startup streaming of encrypted multimedia content
US8914836B2 (en) 2012-09-28 2014-12-16 Sonic Ip, Inc. Systems, methods, and computer program products for load adaptive streaming
JP6094126B2 (ja) * 2012-10-01 2017-03-15 富士通株式会社 動画像復号装置
TWI456985B (zh) * 2012-10-17 2014-10-11 Vivotek Inc 多攝影機的整合處理系統及其方法
US9191457B2 (en) 2012-12-31 2015-11-17 Sonic Ip, Inc. Systems, methods, and media for controlling delivery of content
US9264475B2 (en) 2012-12-31 2016-02-16 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US9313510B2 (en) 2012-12-31 2016-04-12 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9344517B2 (en) 2013-03-28 2016-05-17 Sonic Ip, Inc. Downloading and adaptive streaming of multimedia content to a device with cache assist
US9247317B2 (en) 2013-05-30 2016-01-26 Sonic Ip, Inc. Content streaming with client device trick play index
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
WO2015012227A1 (ja) * 2013-07-22 2015-01-29 ソニー株式会社 情報処理装置および方法
US9343112B2 (en) 2013-10-31 2016-05-17 Sonic Ip, Inc. Systems and methods for supplementing content from a server
JP6070524B2 (ja) * 2013-12-04 2017-02-01 ソニー株式会社 表示パネル、駆動方法、および電子機器
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
JP6410495B2 (ja) * 2014-07-07 2018-10-24 ルネサスエレクトロニクス株式会社 画像符号化装置、画像復号装置、および画像通信システム
CN111899770B (zh) * 2014-09-12 2022-07-08 松下电器(美国)知识产权公司 非暂时性计算机可读介质、再现装置以及再现方法
CN104735385B (zh) * 2015-03-31 2018-10-12 小米科技有限责任公司 播放控制方法及装置、电子设备
US10075292B2 (en) 2016-03-30 2018-09-11 Divx, Llc Systems and methods for quick start-up of playback
US10148989B2 (en) 2016-06-15 2018-12-04 Divx, Llc Systems and methods for encoding video content
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
JP7077812B2 (ja) * 2018-06-19 2022-05-31 セイコーエプソン株式会社 画像処理装置および画像処理プログラム
CN112640442A (zh) * 2018-08-24 2021-04-09 奥林巴斯株式会社 图像记录再现装置和内窥镜系统
KR20220032520A (ko) 2019-07-20 2022-03-15 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 팔레트 모드 사용 지시의 조건 종속적인 코딩
TWI784446B (zh) * 2021-03-18 2022-11-21 圓展科技股份有限公司 顯示系統、顯示方法及影像擷取裝置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MY115648A (en) * 1995-08-23 2003-08-30 Sony Corp Encoding/decoding fields of predetermined field polarity apparatus and method
FR2749116B1 (fr) * 1996-05-24 1998-06-19 Thomson Multimedia Sa Camera a effets speciaux
JP3058870B1 (ja) 1999-02-05 2000-07-04 株式会社次世代デジタルテレビジョン放送システム研究所 Afc回路
JP2002108325A (ja) 2000-09-26 2002-04-10 Fuji Film Microdevices Co Ltd 画像処理装置及び画像処理方法
CN1364033A (zh) * 2000-11-28 2002-08-14 国枝博昭 动态图像信息的高性能编码压缩系统
JP4622141B2 (ja) * 2001-04-13 2011-02-02 ソニー株式会社 画像処理装置および画像処理方法、記録媒体、並びにプログラム
US7187785B2 (en) * 2001-08-28 2007-03-06 Nippon Telegraph And Telephone Corporation Image processing method and apparatus
JP2003111094A (ja) 2001-10-01 2003-04-11 Megafusion Corp 合成撮影システム、合成画像生成法および画像合成装置
MXPA04007357A (es) 2002-02-01 2004-11-26 Koninkl Philips Electronics Nv Aparato, portador de registro y metodo para registrar una secuencia de senales de datos de video.
JP4240283B2 (ja) * 2002-10-10 2009-03-18 ソニー株式会社 復号装置及び復号方法
JP2004172862A (ja) * 2002-11-19 2004-06-17 Megachips System Solutions Inc 画像合成方法および合成画像配信システム
KR20030051545A (ko) * 2003-06-04 2003-06-25 경민규 동영상 씨디롬 제작장치
JP2005123775A (ja) * 2003-10-15 2005-05-12 Sony Corp 再生装置、再生方法、再生プログラムおよび記録媒体
KR100561404B1 (ko) 2003-10-30 2006-03-16 삼성전자주식회사 재생 모드 정보가 설정된 동영상 재생 장치, 저장 매체 및그 재생방법
US7660516B2 (en) 2004-02-17 2010-02-09 Panasonic Corporation Recording medium, reproduction device, program, and reproduction method
US7577340B2 (en) * 2004-07-21 2009-08-18 Panasonic Corporation Device and method for recording real-time data
WO2006025388A1 (ja) * 2004-08-31 2006-03-09 Matsushita Electric Industrial Co., Ltd. 動画像符号化方法及び装置
AR064274A1 (es) 2006-12-14 2009-03-25 Panasonic Corp Metodo de codificacion de imagenes en movimiento, dispositivo de codificacion de imagenes en movimiento, metodo de grabacion de imagenes en movimiento, medio de grabacion, metodo de reproduccion de imagenes en movimiento, dispositivo de reproduccion de imagenes en movimiento, y sistema de reproducci

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI586146B (zh) * 2011-06-20 2017-06-01 Jvc Kenwood Corp An image decoding apparatus, an image decoding method, and a recording medium
TWI510060B (zh) * 2011-10-18 2015-11-21 Ntt Docomo Inc Dynamic image predictive coding method, dynamic image predictive coding device, dynamic image predictive coding program, dynamic image prediction decoding method, dynamic image prediction decoding device and dynamic image prediction decoding program
TWI583184B (zh) * 2011-12-15 2017-05-11 Tagivan Ii Llc Image coding method, image coding apparatus
TWI513283B (zh) * 2012-07-06 2015-12-11 Ntt Docomo Inc Dynamic image predictive coding device, dynamic image predictive coding method, dynamic image predictive coding program, dynamic image prediction decoding device, dynamic image prediction decoding method and dynamic image prediction decoding program
TWI574551B (zh) * 2015-06-08 2017-03-11 財團法人工業技術研究院 使用適應性調色盤預估單元在調色盤編碼模式中對影像內容的編碼單元進行編碼或解碼之方法與裝置
US10225556B2 (en) 2015-06-08 2019-03-05 Industrial Technology Research Institute Method and apparatus of encoding or decoding coding units of a video content in a palette coding mode using an adaptive palette predictor

Also Published As

Publication number Publication date
JP4718616B2 (ja) 2011-07-06
US7974521B2 (en) 2011-07-05
US20100040351A1 (en) 2010-02-18
US20100040348A1 (en) 2010-02-18
BRPI0722391A2 (pt) 2012-06-12
JP2011103669A (ja) 2011-05-26
US20110299831A1 (en) 2011-12-08
RU2475997C2 (ru) 2013-02-20
US8526797B2 (en) 2013-09-03
CN101815213A (zh) 2010-08-25
US8023804B2 (en) 2011-09-20
KR101362653B1 (ko) 2014-02-13
CA2671557A1 (en) 2008-06-19
US20100054710A1 (en) 2010-03-04
JP4841688B2 (ja) 2011-12-21
CN101815214A (zh) 2010-08-25
EP2079241A1 (en) 2009-07-15
CN101848384A (zh) 2010-09-29
JP2011097612A (ja) 2011-05-12
RU2483467C2 (ru) 2013-05-27
EP2079241A4 (en) 2011-11-09
CN101815213B (zh) 2013-01-09
KR20090098802A (ko) 2009-09-17
JPWO2008072669A1 (ja) 2010-04-02
TW200845761A (en) 2008-11-16
AR064274A1 (es) 2009-03-25
TWI446794B (zh) 2014-07-21
ZA200903806B (en) 2010-05-26
CN101554057A (zh) 2009-10-07
CN101800896B (zh) 2012-08-29
BRPI0719335A2 (pt) 2011-05-10
RU2010145129A (ru) 2012-05-10
CA2671557C (en) 2016-01-12
EP2079241B1 (en) 2012-10-31
CN101815214B (zh) 2012-11-21
CN101554057B (zh) 2011-07-20
JP4841689B2 (ja) 2011-12-21
RU2009120317A (ru) 2010-12-10
CN101800896A (zh) 2010-08-11
WO2008072669A1 (ja) 2008-06-19

Similar Documents

Publication Publication Date Title
TWI446794B (zh) A motion picture coding method, a motion picture coding apparatus, a motion picture recording method, a recording medium, a motion picture reproduction method, a motion picture reproduction apparatus, and a motion picture reproduction system
JP4201213B2 (ja) 動画像符号化方法および装置、動画像復号化方法および装置、記録方法並びに動画像復号化システム
JP6625094B2 (ja) 記録媒体