201026018 六、發明說明： 【發明所屬之技術領域】 本發明係關於一種提供一三維[3D]視訊信號之方法，該 方法包括藉由包含以下方式產生3D視訊信號：代表待顯示 於一觀看者之左眼的一左影像的一第一主要資料串流及代 表待顯示於觀看者之右眼的一右影像的一第二主要資料串 流，以用於呈現展現一標稱深度範圍的3D視訊資料。 本發明進一步係關於一種處理一 3D視訊信號之方法、 3D源裝置、一種3D處理裝置、一種3D視訊信號、一種記 錄載體及一種電腦程式產品。 本發明係關於組合輔助資料（諸如副標題、標誌或進一 步3D影像資料）在一 3D顯示裝置上呈現3D視訊資料之領 域。 【先前技術】 已知用於產生2D視訊資料之裝置（例如視訊伺服器、廣 播或製作裝置）。當前提議用於提供三維（3D)視訊資料之 3D增強裝置。同樣提議用於呈現3D視訊資料之3D處理裝 置（諸如用於光碟之播放器（舉例來說藍光光碟；BD)或呈 現經接收之數位視訊信號之機上盒）。處理裝置將耦接至 諸如一電視機或監視器之一裝置。可經由一適當介面（較 佳的是諸如HDMI之一高速數位介面）將視訊資料傳送至一 3D顯示器。3D顯示器亦可與3D處理裝置整合，舉例來說 具有一接收部分或一儲存部分之一電視機（TV)。 對於3D内容（諸如3D電影或電視廣播），額外輔助資料可 144664.doc 201026018 組合影像資料（例如副標題、一標誌、一遊戲得分、用於 金融新聞或其他公告或新聞之一電報紙帶）顯示。 文件WO 2008/115222描述用於組合文字與3D内容之一 系統。系統以相同於最近之深度值的程度，將文字插入於 3D内容中。3D内容之一實例係一二維影像及一相關聯之 深度圖。在此案例中，插入文字的深度值經調整以匹配於 給定深度圖的最近深度值。3D内容之另一實例係複數個二 維影像及相關聯深度圖。在此案例中，插入文字的深度值 經連續調整，以匹配於一給定深度圖的最近深度值。3D内 容之一進一步實例係具有一右眼視圖及一左眼視圖的立體 内容。在此案例中，左眼視圖及右眼視圖之一者中的文字 經位移，以匹配於立體影像中的最近視差值。結果，系統 產生與3D内容組合的文字，其中文字並不阻礙3D内容中 的3D效果。 【發明内容】 文件WO 2008/115222描述輔助圖形資料係待顯示於影像 資料的最近部分之前。當辅助資料需要與具有一大深度範 圍之3D視訊資料組合時，發生一問題。以深度範圍中之一 選定輔助深度定位輔助影像資料將導致衝突或偽影，而將 輔助影像資料定位為靠近觀看者可能使觀看者變得不舒服 或引起視覺疲勞。 本發明之一目的係提供一用於以一更方便的方式組合輔 助資料及3D視訊内容的系統。 為此，根據本發明之一第一態樣，如在首段中描述之方 144664.doc 201026018 法包括·為了在標稱深度範圍中之一輔助深度下實現在3D 視訊貢料上上覆輔助影像資料，包含一次要資料_流，該 次要資料串流取代各自之主要資料串流顯示於一個眼睛， 以用於呈現3〇視訊資料，該3D視訊資料展現比輔助深度 更加遠離觀看者之一經修改的深度範圍。 為此’根據本發明之一第二態樣，處理一 3D視訊信號之 一方法包括：自該3D視訊信號擷取一代表待顯示於一觀看 者之左眼之一左影像的第一主要資料争流與一代表待顯示 於該觀看者之右眼之—右影像的第二主要資料串流，用於 呈現展現一標稱深度範圍3D視訊；自該3D視訊信號擷取 取代各自之主要資料串流而待顯示於該等眼睛之一之一次 要資料串流，用於呈現3D視訊，該3D視訊展現比一輔助 冰度更加遠離該觀看者之一經修改的深度範圍；提供輔助 資料，及基於次要資料串流而在一比辅助深度更接近於觀 看者的深度下，在該3D視訊資料上上覆輔助影像資料。 為此，根據本發明之一進一步態樣，用於提供3D視訊信 號之一3D源裝置包括處理構件’該等處理構件用於藉由以 下產生該3D視訊信號：包含代表待顯示於一觀看者之左眼 的-左影像的-第-主要資#串流及代表待顯示於一觀看 者之右眼的一右影像的一第二主要資料串、流，以用於呈現 展現-標稱深度範圍之3〇視訊資料，及為了在該標稱深度 範圍中之一輔助深度下實現在該31)視訊資料上上覆辅助影 像資料’包含-次要資料串^欠要資料串流取代各自 主要資料串流而待顯示於該等眼睛之—，以用於呈現扣視 144664.doc -6- 201026018 Λ資料，該3D視訊資料展現比辅助深度更加遠離觀看者之 一經修改的深度範圍。
為此，根據本發明之一進一步態樣，用於接收一3D視訊 L號之一 3D處理裝置包括用於接收該3£)視訊信號之接收 構件及處理構件’該等處理構件用於：自該扣視訊信號操 取代表待顯示於一觀看者之左眼的一左影像之一第一主要 資料串机與代表待顯示於觀看者之右眼的—右影像之一第 二主要資料串流’以用於呈現展現-標稱深度範圍之3D視 訊:自該3D視訊信號擷取取代各自主要資料串流而待顯示 / ’等眼睛之一之一次要資料串流，以用於呈現3D視訊’ 該3D視訊展現比一辅助深度更加遠離該觀看者之—經修改 的深度範圍；提供輔助資料；及基於該次要資料串流而在 ^該輔助深度更接近於該觀看者的—深度下，在該3d視訊 資料上上覆該辅助影像資料。 為此，根據本發明之—進_步態樣，—扣視訊信號包 括：代表待顯示於-觀看者之該左眼的—左影像的一第一 主要貝料串流及代表待顯示於觀看者之該右眼的一右影像 的-第二主要資料串流’以用於呈現展現一標稱深度範圍 之3D視訊資料，及為了在該標稱深度㈣巾之—輔助深度 下實現在該3D視訊資料上上覆輔助影像資料，一次要資料 串流取代各自主要資料串流而待顯示於一個眼睛，以用於 士現3D視訊資料，該3D視訊資料展現比該輔助深度更加 遠離該觀看者之一經修改的深度範圍。 一記錄載體攜帶上 為此，根據本發明之—進一步態樣 I44664.doc 201026018 一電腦程式執行 述3D視訊信號且當運行於—處理器上時 上述方法之各自步驟。 在向後位移的丨景視訊之前感知輔助影像資料時該等 方法生效。為了在適#深度下實現輔助影像資料之上覆， 使一選定深度範圍隨意起始於輔助深度且延伸為更接近於 觀看者。通常使用敎深度㈣之观㈣㈣修改以比 輔助深度更加祕觀看者。另外，產生次㈣流，該次要 串流包含於3D視訊信號中及其從3D視訊信號擷取且其取 代主要串流而顯示。次要_流含有相同3D視訊，但是其處 於一減少或經位移之深度範圍。取代各自主要資料串流而 顯示於-個眼睛之次要宰流可與用於另一眼睛之其他主要 串流一起顯示。或者可包含兩個次要串流以代替兩個主要 串流。有利的{，現在觀看者在上覆輔助資料期間感知用 於相同3D視訊内容之經修改的深度範圍。特定而言，避免 因任何鄰近視訊資料使輔助資料模糊及避免在輔助資料之 邊界處的干擾效應。當輔助資料定位為遠離一較近物件， 但仍將顯示輔助資料時，發生此等乾擾效應。 一進一步優點在於輔助資料並不要求在源裝置處可用， 但輔助資料可動態地提供於處理裝置，該處理裝置藉由將 輔助資料定位於一適當深度（即在該辅助深度處或該輔助 /米度之如）的同時選定用於顯示之次要串流而產生一組人 之3D視訊信號。 在一實施例中，方法包括··提供3D視訊信號之時間片 丰又以用於實現輔助影像資料之該上覆；及僅在時間片段 144664.doc 201026018 期間包含該次要資料串流。為了顯示諸如選單之動態輔助 資料或諸如遊戲角色之經產生的輔助圖形物件，可基於時 間片段選定3D視訊資料之一適當部分。有利的是，系統容 許3D視訊之製作者設定時間片段且如此選擇性地容許在里 .現裝置處之任何輔助資料的上覆。 在實施例中，方法包括包含於3D視訊信號中之以下至 少一者： φ _上覆標記，該上覆標記指示次要串流之存在； -控制資料，該控制資料用於在該上覆期間控制輔助影像 資料之上覆及呈現次要串流； _ 一深度指示符，該深度指示符指示輔助深度。 有利的是，上覆標記指示對於接收3D裝置之次要率流的 可用性。現在此裝置可上覆辅助影像資料，舉例來說，上 覆可延遲至串流之存在或當次要串流結束時暫停。 有利的是，控制資料直接控制上覆，且在上覆之同時顯 參示次要串流。因此，可使戰訊信號之建立者或發送者控 制該上覆及該修改之深度背景視訊。 土有利的是’因為次要串流之效果細視訊藉由向後位移 (遠離觀看者）而調適，所以深度指示符指示至多達到特定 深度值之深度範圍將不會上覆。因此，一深度範圍容許在 經位移之三維視訊之前的深度方向上隨意定位輔助資料。 因深度指示符特定指示辅助深度，所以戰訊之製作者控 制實際上覆。 ' 在-實施例中，取決於相對應之主要串流、其他主要串 144664.doc 201026018 流之至少一者而編碼次要_流。 有利的是，減少必須經由扣視訊信號傳送之編碼資料 量。因僅需要向後位移鄰近物件，額外次要串流具有鱼相 對應之主要串流的一大相對應性。同樣，其他主要串流之 資訊可用於相關性地編碼次要串流。 在附加申請專利範圍中給定根據本發明之方法、3〇裝置 及信號的進一步較佳實施例，該等進一步較佳實施例之内 容以應用之方式併入本文中。 【實施方式】 本發明之此等及其他態樣將從進—步參考藉由下文描述 之實例而描述的實施例及參考㈣而變得明顯及進一步參 考藉由下w之實例㈣述的實_及參相圖而得以 闡明。 在圖式中’相對應於已經描述之元件的元件具有相同參 考數字。 / 圖1緣示用於顯示三維（3D)影像資料（諸如視訊、圖形或 其他視覺資料）之-系統。— 3D源裝置4Q傳送—3D視訊信 號4!至-3D處理裝置5〇，該扣處理裝置抑接至一扣顯 不裝置60以用於傳送一 3〇顯示信號％ ^ 3d處理裝置具有 一輸入單元51以用於接收視訊信號。例如，該裝置可包 含麵接至輸人單元之—光碟單元58以用於自—光學記錄载 體54(諸如一 DVD或藍光光碟）擷取3D視訊資訊。或者，裝 置可包含一網路介面單元5 9以用於耦接至一網路4 5 (例如 網際網路或一廣播網路），此處理裝置通常稱作一機上 144664.doc 201026018 盒。可自-遠程媒體伺服器（舉例來說源裝置4〇)糊取3〇視 訊信號。該處理裝置亦可為—衛星接收器或—媒體播放 器。 3D源裝置具有-處理單元42以用於處理扣視訊資料 3〇。3D視訊資料可自儲存器，自扣相機等獲得。如下， 3〇視訊信號41係由處理器42產生。代表待顯示於一觀看者 之左眼的一左影像的_繁一士 φ次_丨丨山 ^ 豕旳弟主要資料串流及代表待顯示於 觀看者之右眼的一右影後的—_ V Λ ^ 石灸像的一第一主要資料串流係包含於 3D視訊信號中。主要資料串流通常係用於呈現展現一標稱 深度範圍之職訊資料。此外，在如下標稱深度範圍中之 一輔助深度下實現在3D視訊資料上上覆輔助影像資料。取 代各自主要資料串流而待顯示於該等眼睛之一之一次要資 料串流被產生且亦包含於3D視訊信號中，以用於呈現扣 視訊資料，該3D視訊資料展現比輔助深度更加遠離觀看者 之一經修改的深度範圍。 ❹ 藉由修改在3D視訊資料中之物件的深度（舉例來說藉由 修改視差、藉由處理來自不同相機之3D源材料或藉由基於 具有一深度圖之源材料產生額外資料串流），產生次要串 流。因而，已知產生用於立體顯示之資料串 深度範圍。 巧兩 次要串流係經配置以在上覆期間取代各自主要資料争流 :示於—個眼睛，而其他主要資料串流顯示於另—個:； 目月。例如，組合來自次要串流之一右影像顯示原始左影 像或者，兩個次要串流可被產生及包含於戰訊信號 144664.doc 201026018 中ο 3D源裝置可為一伺服器、—廣播、一記錄裝置或用於製 造記錄載體（諸如藍光光碟）之一製作/或生產系統。藍光光 碟支援内容建立者之一互動式平臺。該藍光光碟支援兩層 圖形上覆及兩組可程式化環境以供製作者從中選擇。對於 3D立體視訊，存在許多格式。可自藍光光碟協會獲得關於 藍光光碟格式之更多資訊，舉例來說可在1^印://以1^你15111_ raydisc.com/Assets/Downloadablefile/2b_bdrom_audiovisua
Implication一0305_12955_15269 pdf上獲得關於視聽應用程 式格式的文件《可包含輔助資料以在重顯之不同階段加入 (舉例來說）播放器或3D顯示器中。光學記錄載體之生產步 驟進一步包括以下步驟：導出在軌道中之標記的實體型 樣，該實體型樣體現包含主要及次要資料串流之3D視訊信 號；且隨後將記錄載體之材料塑形以將標記軌道提供於至 少一儲存層上。 3D處理裝置具有耦接至輸入單元S1之一處理單元52以用 於處理3D資訊來產生-3D顯示信號56(舉例來說根據 HDMI標準之一顯示信號），該3D顯示信號％將經由一輸出 介面單元55傳送至顯示裝置，參見可在hUp://hdmi 〇rg/ manufaCturer/specificati〇n.aspx獲得之 rHigh Definiti〇n Multimedia Interface ; 2006年 11 月 l〇 日之規格版本 13a」。 處理單元52係經配置用於產生包含於3D顯示信號56中之影 像資料來顯示於顯示裝置6〇上。 3D視訊信號係由接收單元51、58、59接收。3D視訊信 144664.doc 12- 201026018 號包括3D視訊資料，該3D視訊資料包含如上文定義之主 要及次要資料串流。如上文關於3D源裝置之描述，處理器 52係經配置自3D視訊信號擷取代表一左影像之一第一主要 .資料串流與代表一右影像之一第二主要資料串流及次要資 • 料_流。處理器係經配置用於在產生平常顯示信號（無輔 助資料情況下）及3D視訊之一顯示信號的同時，藉由次要 S料串流取代各自主要資料_流顯示於眼睛之一以呈現展 φ 現一經修改之深度範圍的3D視訊資料而上覆輔助資料。該 經修改之深度範圍比一辅助深度更加遠離觀看者。 處理裝置具有一辅助處理單元53以用於將待與3D視訊資 料組合之輔助資料提供於3D顯示器上。輔助資料可為待本 端（即處理裝置中）與3D視訊内容（諸如副標題、廣播之一 標遠、一選單或系統訊息、錯誤編碼、新聞快送、電報紙 條、一進一步3D流（諸如評論等））組合之一額外圖形影像 資料。輔助資料可包含於3D視訊信號中，或可經由一分離 〇 通道提供，或可本端產生。在下文中，副標題通常用作指 示每一類型辅助資料。
最後，處理器52組合輔助資料及各自第—與第二資料串 . 流以用於在比輔助深度更接近於觀看者之一深度下，在3D 視訊資料上上覆輔助影像資料。因而，舉例來說，從該 WO 20G8/U5222可知組合_3D視訊流及輔助資料。 糊示裝置60用於顯示3D影像資料。該裝置具有一輸 入”面單元61以用於接收3D顯示信號％，該顯示信號 56包含自處理裝置5G傳送之3D視訊資料及輔助資料。在處 144664.doc 13- 201026018 單το 62中處理經傳送之3d視訊
顯示器63(例如—雙重㈣# 用於顯不於—3D 重或透鏡LCD)上。顯示裝置60可a# 何類型立體顯示器（亦魈υ了為任 不之一顯示深度範圍。 只04知 或者，用於提供及定位辅助資料之 置之-實施例令。轨仃π顯不裝 俨號56㈣μ 見讯資料及可選辅助資料係經由顯示 輔助資料(舉例來說一選單)亦可本端產生於 ’ 丁 現在處理單元62執行在3D顯示器上組合輔助 資料及3D視訊資料之功 慝理早兀62可經配置以用作如 上文描述之處理裝置的相對應之功能。在—進一步實施例 中’處理裝置及顯示裝置係整合於一單個裝置中，其中單 組處理構件執行該等功能。 圖1進一步緣示作為3D信號之一載體的記錄載體54。記 錄載體係呈光碟狀且其具有-執道及-中央孔。根據在一 資汛層上組成大體上平行軌道之—螺旋或同心圈型樣配置 由-系列物理上可偵測標記組成之軌道。記錄載體可為光 學上可讀，％作—光碟（舉例來說一 cd、DVD或BD(藍光 光碟））。藉由沿著軌道（舉例來說凹洞及平面）之光學上可 偵測‘ 5己，在貢訊層上呈現資訊。軌道結構亦包括位置資 訊（舉例來說標頭及位址）以用於指示通常稱作資訊區塊之 資訊單元的位置。記錄載體54攜帶具有一預定記錄格式 (諸如DVD或BD格式）之代表數位編碼（例如根據MpEG2或 MPEG4編碼系統編碼）之3〇視訊資料的資訊。藉由在軌道 中之標記編碼包含該次要資料串流及如下文定義之進一步 144664.doc -14- 201026018 額外控制資料的如上文描述之3D視訊信號。 提議提供3D視訊資料之額外、次要串流以提供一背景至 動態輔助資料，使得（舉例來說）即時產生之圖形可合成於 在辅助深度之前的此視訊背景上。例如，藉由使用一交插 機構交插主要及次要串流作為在一儲存媒體上之兩種類型 視訊’次要串流可包含於3D視訊信號中。 在一實施例中，3D視§fU§號包含指示輔助深度之一深度 指示符。例如，對於每一圖框或圖像群組（G〇p)，添加指 示符至3D視訊信號。指示符可包含一單個位元組資料，藉 此，該值基於次要資料串流指示介於立體視訊之左視圖與 右視圖之間的最近視差。或者，此深度值可指示任何圖像 上覆之視差，使得若播放器合成即時產生之圖形，則應在 元資料中所指示的-視差下定位圖形。提供指示符可使3D 視訊建立者控制深度’在此深度下’任何辅助資料可基於
次要串流而定位於經位移之背景視訊之前。現在描述包含 深度指示符之若干方法。 處理裝置將裝備有-所謂之「z」合成器，該合成器可 在立體視訊上上覆立體圖形。例如，豸「z 於處理早7〇52中^該「z」合成器在解譯輔助卿制資料 且從此決定在3D空間中之視訊之頂部±的_㈣的定位 的同時，應用額外次要争流。在一實際實施例中，在副標 題或選單上覆於扣内容上的同時’臨時顯示取代主要串流 之次要串流。 在一實施例中 基於次要串流之視訊背景的深度指示符 144664.doc -15- 201026018 包含於根據一預定義標準傳輪格式（諸如MPEG4)之一使用 者育料訊息中（舉例來說，一反264編碼串流之一傳訊基本 串流資訊[SEI]訊息）。本方法具有與相關於H 264/AVC編 碼標準（參見舉例來說ITU_T h.264及ISO/IEC MPEG-4 八乂(：，即18〇/正(：14496-10標準）之所有系統相容的優點。 新編碼器/解碼器可實施新SEI訊息及解碼次要串流，而現 有之編碼器/解碼器會簡單忽視該等SEI訊息及次要串流。 在3D視訊信號之一實施例中，在視訊流中之控制資料封 包包括3D輔助控制資料。控制資料可包含一資料結構以提 _ 供3D視訊栺號之時間片段來實現輔助資料之該上覆。現 在，控制資料指示僅在時間片段期間包含該次要資料串 流。實際上’（舉例來說）對於彈出式選單及爪哇（java)圖 形視上下文而疋，上覆將與同時顯示於背景中之視訊内 容相關聯。因此’有把握假設彈出式選單或互動式bd-爪 哇圖形上覆將大部分在電影中之某些片段中發生。為了提 供片段’在藍光光碟標準中之進入標記及多角度機制可經 延伸以在電影之某一片段期間提供兩種類型視訊背景，在 @ 此情況下，立體圖像可上覆於在背景中之視訊内容上。— 種類型片段將含有由一左視圖及右視圖組成之標準立體視 訊内各。其他類型片段將由具有一改變之左視圖及/或右 視圖之立體視訊（即該次要串流）組成。在製作期. 準備變化之左視圖/或右視圖，使得立體視訊 在頂部上上覆立㈣形。以此方式，内容製作者可ί = k程期間竭盡全力完全控制視訊及視訊與圖形上覆之出 144664.doc • 16 * 201026018 現，且因此可確保當 上時，無偽影出現。 立體圖形上覆於立體視訊背景之 項部
可播放視訊項目，即預定a視訊格式定義 放項目°根據—播放項目資料結構的播 放項目減項目資料結構提供有—指轉 播 示該可播放視訊項目包括次 目期間實現上覆。 壮茨播放項 在一實施例中，3D輔助控制資料包含指示 在的上覆標記。標記可指示次要串流之開始」^ 間、持續時間及/或位置。赤本 、、，°束時 或者，用於控制輔助影像資料 及在上覆期間呈現次要串流之控制資料可包含於3d 視訊信號中。例如’可包含在—預定時間顯示_選翠之— 指令，或包含取決於多種事件（諸如—爪唾應用程式）控制 產生辅助資料之一應用程式。 在-記錄載體(諸如藍光光碟)上之一 3D視訊信號中的一 進一=資料結構係、-進人點圖。該圖指示進人點，該等進 入點合許呈現在進入點處開始之視訊。可藉由添加(舉例 來兒）在特定進人點指示次要串流之存在的輔助控制資 料及/或（例如）有效至下—進入點之深度指示符而延伸進入 點圖資料結構。 或者’辅助3D控制資料提供為基於描述之一 xml，此 描述係在一MPEG_2運輸串流之資料傳送帶中運輸。亦在 此mpeg運輪串流中傳輸之一互動式τν應用程式可利用基 144664.doc -17- 201026018 於描述之此XML以在使用次要串流之同時決定如何將輔助 圖形合成於立體視訊上。或者’輔助3D控制資料可提供為 播放列表之一延伸。 對於上文之辅助3D控制資料，處理器52及辅助處理單元 53係經配置用於取決於各自控制資料之該上覆。明確言 之，偵測到包含該次要資料串流之3D視訊信號之時間片段 及偵測到在3D視訊信號中指示次要資料串流之存在的上覆 標記且偵測到在3D視訊信號中用於控制輔助影像資料之上 覆的控制資料及/或偵測到指示辅助深度之深度指示符。 根據該偵測到之3D輔助控制資料執行上覆。 在-實施例中，取決於相對應之主要資料串流及/或其 他主要串流而編碼次要串流。因而，已知相關性地編碼一 視訊資料串流對一可用資料_流具有很強相對應性。例 如，僅可編碼與相對應主要串流之差異。因為僅需要位移 鄰近之物件以用於調適視差，即減少視差以向後位移物 件，所以此差異將較小。在-特定實施例中，次要串流之 編碼資料亦可含有位移資料，該位移資料指示相對於相對 應主要串流之位移量。應注意，其他主要串流亦可用於該 相^編碼。事實上’因為其㈣流將含有由於該視差位 移而去閉塞（de-_luded)之視訊資料，所以次要串流亦可 使用其他串流以用於在位移物件之相提供資料。對 一相關性編碼次要串流，處理器52具有—解碼器520以用 於取決於相對應主要串流及/或其他 用 串流。 $要串流而編碼次要 -J8- 144664.doc 201026018 在一實施例中，用連結clip Av串流檔案二者之一新機 制延伸藍光光碟標準，該Clip AV串流檔案係含有呈現音 訊及視訊所需之所有基本串流之一運輸串流的一片段，其 中彈出式選單之Epoch開始及合成逾時係在藍光光碟互動 式圖形規範中。此外，可用傳訊延伸藍光光碟A/ν格式之 BD-爪》圭應用程式介面（Αρι)，使得當含有視訊内容之部分 的某一片段達到時，可通知一 BD_爪哇應用程式，在該片 φ 段達到期間BD-爪哇可在視訊之頂部上繪製圖形。 圖2緣示包含視訊資料之一次要串流的一 3D視訊信號。 一 3D視訊信號21係沿著一時間軸丁示意性地繪示。信號含 有一運輸率流，該運輸串流係由用於左視圖之一基本串流 及用於右視圖之一額外串流組成，在此文件中該等基本串 流及額外串流稱作主要串流。主要串流含有標準視訊内 容。 3D視訊信號亦含有如上文描述之一次要串流23，該次要 ❹ _流23含有特定經調適以在深度方向上供應—些空間來容 s午立體圖形之上覆而無之任何品質損耗的立體視訊内容。 在上覆模式中，在經調適之背景視訊上的該深度空間中上 覆任何輔助資料。 在本圖式中存在兩種類型片段：一第一類型片段Μ，該 第類^片·^又24含有呈現標準立體視訊内容之標準運輸串 八 第一類型片段27具有以一交插方式包含於信號中之 主要串流22及次要串流23二者。交插可使一接收裝置（諸 如光碟播放器)重顯主要串流或次要串流而不會跳至光碟 144664.doc •19- 201026018 之不同部分。同樣，—或更多個音訊流及其他輔助資料串 流可包含於3D視訊信號中（未繪示）且其等可用於在標準模 式或上覆模式中基於次要串流重顯。 本圖式進一步繪示一開始標記25及一結束標記26，舉例 來說在各自_流之封包標頭中之指示符位元或旗標。開始 標記25指示具有該次要串流以用於調適背景視訊之片段η 的開始，且結束標記26指示片段27之結束，或一標準片段 24之開始。 為了將本發明實施於一實際系統（舉例來說BD系統）令， 需要以下四個步驟。改變光碟資料格式以提供如下之該片 段類型。3D視訊内容之一部分稱作£{)〇(;11。介於一互動式 圖形。成之一 Epoch開始與一合成逾時呈現時間戳記（pTs) 值之間，光碟含有交插於光碟上之立體視訊的該等主要及 次要串流。次要串流係經調適使得在投影之前建立空間以 容許立體圖形之上覆。具有主要及次要串流之視訊信號的 一片段應符合關於如在B D系統中定義之多角度片段之編 碼及光碟分配的相同約束。 其次，改變光碟資料格式以具有元資料，該元資料在含 有用於彈出式選單之立體圖形的一互動式合成期間指向播 放器，當啟用彈出式選單時，應解碼及呈現在光碟上之交 插串流的-不同申流。A 了實現此，格式應經調適以含有 該等標記25、26。 圖3繪示包含扣上覆標記之—資料結構。該圖式緣示一 表格31，該表格31基於在BD系統中之播放列表定義在一 144664.doc -20· 201026018 3D視訊信號中之標記的語法（稱作PlaylistMark)。 PlaylistMark的語意係如下。Length係編碼為一 32位元無符 號整數（uimbsf)之32位元欄位，該32位元欄位指示 PlayListMark()緊跟此長度欄位及直至PlayListMark()結束 之位元組的數量。number_of_PlayList_marks係給定儲存 於PlayListMark()中之標記進入的數量。PL_mark_id值係 由在自零開始之PL_mark_id之for迴圈中描述的順序定義。 mark_type係指示標記類型之8位元欄位（bslbf)。 ref_to_PlayItem_id為在其上放置標記之一播放項目指示 Playltem_id值。Playltem_id值在一播放列表槽案之一 PlayList()中給定。mark_time_stamp係含有時間戳記之32 位元欄位，該時間戳記指示標記放置之點。 mark_time_stamp應指向由 ref_to_PlayItem—id指出之從播 放項目之IN_time直至OUT_time的時間間隔内的一呈現時 間，該呈現時間係以45 kHz時脈為單位測量。若 φ entry_ES_PID設定為OxFFFF，則標記係共同於由播放列表 使用之所有基本流的時間線的一指標。若entry JES_PID並 不設定為OxFFFF，則此欄位指示運輸封包之PID的一值， 該等運輸封包含有由標記指向之基本串流。duration係以 一 45 kHz時脈為單位測量。 mark_type之多種值係在BD系統中預定義。現在為如上 文描述之該等開始及結束標記25、26預定額外標記類型且 額外標記類型包含於表格中，該等額外標記類型指示何時 一爪哇應用程式可使立體圖形上覆於立體視訊背景之頂部 144664.doc -21 · 201026018 上。或者，標記可為一進入標記以指 自身指示為具有可上覆類型。 而該片段 可定義指上覆功能性之—新標記類型，舉例來說， 在肋系統中之一「立體圖形上覆標記」或一特定 C_ark，其中ClipMark傳統上係在短片資訊標宰㈤^ 内容之-片段相關聯的元資料)中之—保留攔位。現在包 含特定C1ipMark以用作指示Clip具有可上覆類型之意圖。 此外，可在-索引表格中指定光碟格式使得標題係—互動 式標題。此外，倘若在光碟上之格式含有bd_爪哇應用程 式，BD-J標題重播類型可定義為一互動式標題。 此外BD-格式播放列表結構可延伸為指示電影之某一 片段含有經調適用於立體圖形上覆之特定立體視訊内容。 BD格式播放列表結構定義所需之元資料，使得播放器可 識別亦稱作播放項目之視訊内容的某些片段。播放項目攜 帶在電影内容之該片段期間應解碼及呈現何種基本流之資 訊。播放項目亦指示參數，使得播放器可無縫解碼及呈現 音訊及視訊内容之連續片段。用一 iS-Stere〇—〇veHay進入 延伸播放項目資料結構，該is_stereo—overlay指向播放器 以在此播放項目期間，存在立體視訊之該等交插主要及次 要串流。 圖4繪示至一播放項目之一額外進入。該圖式繪示一表 格32 ’該表格32定義在BD系統中用於播放項目之一 3D視 訊信號中的相關性視圖部分的語法，稱作 SS_dependent_view_block。該表格係用一 is stereo 144664.doc -22· 201026018 overlay_entry延伸之一播放項目部分的一實例。若播放項 目已延伸，則包含以下元素。Clip—information—file_ ⑽咖：當啟用立體圖形上覆時，由播放項目使用之短片_ ， （視訊片段）的CHP資訊檔案的名稱。Clip_coded_ , identlfier .此進入應具有編碼為在iso 046中定義之值 M2TS」。ref—to—STC〜id :在短片中之此序列之Clip資訊 中用於一系統時間時脈參考的指示符。 φ 此外’傳統上意欲保持關於多角度視訊之資訊的-額外 結構(舉例來說多短片進入結構)可在短片(視訊及音訊内容 之片段）上攜帶識別資訊以用於具有及不具有圖形上覆之 立體視訊。 在可上覆類型中，指示可播放視訊項目包括次要資料串 流以用於實現上覆之指示符可代替在一播放項目中之多角 度資訊。 一播放項目則將支援多角度或多立體。可藉由在播放項 Φ 目中複製多短片結構，使得該多短片結構含有用於多角度 及多立體的兩種進入以解除此限制。可設置關於容許之角 度量的限制，以確保約束係在BD系統中定義關於在光碟 - 上交插片段之量及大小的限定内。 - 第三’延伸BD_爪哇API，使得其提供一上覆功能至光 碟上之一爪哇應用程式。該功能可使應用程式在重播期 間’於達到視訊中之含有立體視訊之次要串流的位置時， 暫存及接收一時間。此可經由新定義播放列表標記或經由 當播放器自動從一片段至其他片段改變重播時產生之一事 144664.doc -23· 201026018 件來達成。第一方法係較佳 ..^ ^ M J1定用邊第一方法以在 特疋片I又開始之前通知應用程式 ΜΛ m r,, . φ 吏付可藉由分配繪製立 體圖形上覆所需的資源來準 (如先前提及…一 新標記類型 Α及或一類似指示符)提供立體圖形標記及控制， 以容許應用程式敎播放哪些料立體視訊Μ。該功能 性類似於當前對多角度視訊的控制。可添加另㈣控制泉 數以容許-爪啥應用程式通知播放器其希望開始或已完成 =立體圖形上覆，使得播放器可自動切換重播返回至 「標準」立體視訊内容。此控制或方法可(例如)稱作彈出 式立體圖形控制。該彈出式立體圖形控制具有一開啟及關 閉狀態。當在開啟狀態中時’播放器應解碼及呈現含有特 別準備之立體視訊内容的彼等視訊短片。當在關閉狀態中 時’播放器解碼及呈現標準視訊短片。 第四，播放器經調適使得，在播放器遇到含有 is—Stereo_over〗ay項目之一播放項目結構時，當啟用一彈 出式選單或當爪錢用程式已經由相關新定義A p t指示其 希望上覆立體圖形’該播放器自動切換至含有用於圖形上 覆之立體視訊的短片。 雖然已主要藉由基於藍光光碟系統之實施例來解釋本發 明，但本發明亦適於任何3D信號、傳送或儲存格式，舉例 來說，經格式化用於經由網路分佈。本發明可實施於包含 硬體、軟體、韌體或此等之任何組合之任何適當的形式 中。本發明可視需要在（舉例來說）一製作或顯示設置中實 施為方法，或至少部分實施為在一或更多個資料處理器 144664.doc •24· 201026018 及/或數位信號處理器上運行的電腦軟體。 應瞭解，為了清楚起見，上文描述已參考不同功能單元 及處理器來描述本發明之實施例。但是，本發明並不限於 該等實施例，且本發明體現於每個新賴特徵或描述之特徵 的組合。可使用在不同功能單元或處理器之間之功能性的 任何適當分佈。例如，可藉由相同處判或控㈣執行緣 示為藉由分離單元、處理器或控制器執行的功能性。因 此，特定功能單元之參考僅將視為用於提供所描述之功能 性的適當構件，而㈣示—嚴格邏輯或實體結構或組織。 此外，雖然個別列出，但可藉由（舉例來說）一單個單元 或處理器實施複數個構件、元件或方法步驟。此外，雖然 個別特徵包含^不同請求項中，但可有利地組合此等個別 :徵’且在不同請求項中之包含物並不意謂著特徵之一組 二並不可行及/或有利。„，在請求項之—_中之一 特Γ不意謂著限制此類別，而是指示該特徵勝任於適當 之其他請求項類別。此外，在往本 y n h 在明求項中之順序並不意謂著 必須運作特徵之任何特定順序， .s 且将疋而言，在一方法請 ί項令之個別步驟的順序並不意謂著步驟必須以此順序執 !'。相反，可以任何適當順序執行步驟。此外，單數參考 科排除複數。如此，「-」、「m一 二 等之參考並不排除複數個。在 」 」 Λ BH.衣項中的參考符號僅提供 為—明確實例，且不應視為以任 嘴。翠詞「包括」並不排除除τ:等:式限制請求項之範 外的其他元件或步驟之存在。^所列出元件或步驟之 144664.doc •25- 201026018 【圖式簡單說明】 圖1繪示用於顯示3D影像資料之一系統， 圖2繪示包含要視訊資料之一次要串流的一 3D視訊信 號， 圖3繪示包含3D上覆標記之一資料結構，及 圖4繪示至一播放項目之一額外進入。 【主要元件符號說明】 21 3D視訊信號 22 主要串流 23 次要串流 24 第一類型片段 25 開始標記 26 結束標記 27 第二類型片段 30 3D視訊資料 31 表格 32 表格 40 3D源裝置 41 3D視訊信號 42 處理器 45 網路 50 3D處理裝置 51 輸入單元/接收構件 52 處理單元/處理構件 144664.doc -26- 201026018 53 處理構件 54 記錄載體 55 輸出介面單元 56 3D顯示信號 58 接收構件 59 接收構件 60 3D顯示裝置 61 輸出介面單元 62 處理單元 63 3D顯示器/3D顯示構件 64 箭頭 520 解碼次要串流之構件 T 時間轴 144664.doc - 27 -