TW201123841A - Recording medium, playback device, integrated circuit - Google Patents

Recording medium, playback device, integrated circuit Download PDF

Info

Publication number
TW201123841A
TW201123841A TW99105012A TW99105012A TW201123841A TW 201123841 A TW201123841 A TW 201123841A TW 99105012 A TW99105012 A TW 99105012A TW 99105012 A TW99105012 A TW 99105012A TW 201123841 A TW201123841 A TW 201123841A
Authority
TW
Taiwan
Prior art keywords
stream
view
section
sub
graphic
Prior art date
Application number
TW99105012A
Other languages
English (en)
Inventor
Wataru Ikeda
Tomoki Ogawa
Taiji Sasaki
Hiroshi Yahata
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW201123841A publication Critical patent/TW201123841A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Description

201123841 六、發明說明: 【發明所屬之技術領域】 發明領域 本發明係關於—種3D影像及2D影像之再生技術之技 術領域的發明。 t先前老椅】 發明背景 2D影像係指將顯示裝置之顯示畫面掌握作χ_γ平面, 以該Χ—Υ平面上之像素表現的圖像,亦稱為平面視覺圖像。 相對地,3D影像係指於顯示裝置畫面之Χ-Υ平面上之 像素,加入Z軸方向景深之圖像。3D影像同時再生應以左 眼收視之左視㈣像、與應財眼收視之右影像,以 該等左視㈣像、右視圖影像發揮立體視覺絲,以供使 用者進行收視。3D影像之像素中,使用者感到具有正紅 由座^之像素較顯示褒置畫面位於面前具有負的Z轴座標 之像素較顯示裝置畫面位於深處。 於光碟片儲存3D影像的情況下,要求與僅可再生 有扣影像之光碟片之再生裝置(以下稱為「2〇再生裝置 具再生相容性。2D再生裝置無法將3D影 」 :儲存有3D影像之光碟片時,須將相同内容製二^ ”2D用碟片2種碟片,成本因而升高。故 ’、 之光碟片被要求於2D再生裝置,作為卿:有3〇影像 再生2㈣像⑽影像之再生裝置(以下^ :生’於可 罢、 2〇/3〇再生奘 置」),可作為2D影像或3D影像而再生 201123841 作為在儲存有3D影像之光碟片確保再生相容性的技術 之先行技術,包括以下專利文獻丨所記載的技術。 [先行技術文獻] [專利文獻]
專利文獻1:日本專利第3935507號公報 【明内J 發明概要 發明欲解決之課題 立體視覺狀左視圖、右視目之影像鋪由採3D攝影 機拍攝而獲得。該3D攝影機之2個鏡頭係僅以與人雙眼視差 相應的_關而存在。經由該鏡頭拍攝的左視圖影像及 右視圖影像’可藉由交替再生而創造出人雙眼視差。 然而,字幕或選單係於攝影結束後之編輯階段所做 成,並非藉由3D攝频之攝影行為所絲,料係一面觀 看立體視覺影像-面以附加的方式做出。此時,於立體視 覺再生時一面思考字幕或選單看似如何,—面分別針對 左視圖、右視®做成字幕或選單,這對於編輯X作人員而 言耗費龐大勞力,在製作附字幕/選單之立體視覺内容時, 期待讓其做成作業效率化β χ,由於動態圖像看似位於面 前的程度魏各圖巾貞期間不時地變化,因此若固定字幕或 選單的景Ί幕或選單报有可能與影像中的人物像在位 置上重疊。嚴重時’選單的矩形外框看似插到人物像,亦 可能招致使用者不禁失笑’因此為了避免再生此類不自然 的立體視«彡像,奴未料於投人編輯人力。 4 201123841 在此’事先於圖形串流内,儲存用以使得字幕或選單 看似立體的㈣資訊,並自㈣”料景深,也許在某 程度上可減輕編輯人力。然而,表示字幕或選單之圖形串 流存在達32個,依裝置之動作模式或裝置狀態、使用者選 擇,有時受到解碼亦或未受解碼。如此一來,難免發生為 了取得立體視覺再Μ㈣資訊,特意存取儲存有該控制 資訊之圖形串流的多餘處理。 本發明的目的在於提供一種記錄媒體,係不令編輯人 力增加,即可再生高品質之讀視覺影像者。 用以解決課題之手段 可解決上述課題之記錄媒體係記錄有主視圖視訊串 流、子視圖視訊串流及圖形串流者,其特徵在於: 則述主視圖視訊串流包含構成立體視覺影像之主視圖 之圖片資料; 刚述子視圖視訊串流包含構成立體視覺影像之子視圖 之圖形資料、及元資料; 月1J述圖形串流包含圖形資料;描繪前述圖形資料之圖 形截面係與如下截面合成:主視圖視訊截面,係描繪構成 刖述主視圖之圖片資料者;及子視圖視訊截面,係描繪構 成前述子視圖之圖片t料者; 月1元資料係規定偏移控制之控制資訊,而前述偏移 前述圖形截面給予水平座標之右方及左方之偏 移’刀別與前述主視圖視訊截面及前述子視圖視訊截面合 成; 201123841 月1j述圖形截面之偏移 前述控制資訊包含以像素數表示 值之資訊。 發明效果
的作業。由於控制資訊係規定再生裝置 的作業。 以一截面動作時之 偏移控制,因此即便左右的字幕或選單不存在,只要有^固 字幕或選單,即可實現立體視覺再生。不僅減輕分別針對 主視圖、子視圖做成字幕或選單的人力,還可實現立體視 覺再生,因此可實現兼顧編輯之效率化與再生裝置之低成 本化。 在此’前述主視圖視訊串流之圖片資料及前述子視圖 視訊串流之圖片資料,係分別構成複數個圖片群組; 前述複數個圖片群組之各圖片群組係分別構成複數個 圖t貞’具有對應於前述複數個圖幀之各圖幀之控制資訊作 為參數序列亦可。參數序列可就視訊串流時間軸之圖片群 組之各圖幀’逐一定義圖形的景深,因此可將從任意圖幀 時間t,導出對應於該圖幀時間之景深Z之函數Z(t),定義為 1個參數序列。 該函數Z(;t)係若以圖幀時刻作為變數之拋物線函數,則 201123841 再生裝置係藉由將對應於該函數z (t)之參數序列用於移位 控制,可實現富於真實感的圖像演出,諸如表現棒球的圖 形從遠處靠近到眼前亦或遠離。 可伴隨著視訊串流時間軸之再生時點推進而即時地令 景深變化,因此即使是對應雙眼的圖形素材不存在的情 況,仍可實現富於變化性的圖形之立體視覺再生。 圖式簡單說明 第1(a)〜(c)圖係關於記錄媒體、再生裝置、顯示裝置、 眼鏡之使用行為之形態。 第2圖係於左側描繪使用者臉部,於右側表示從左眼觀 看作為對象物之恐龍骨骼之情況之例,及從右眼觀看作為 對象物之恐龍骨骼之情況之例。 第3圖係表示立體視覺用之左視圖視訊串流、右視圖視 訊串流之内部構成之一例。 第4(a)、(b)圖係表示於1截面+偏移模式下,對於截面 記憶體之層模型進行何種偏移控制。 第5(a)、(b)圖係表示藉由第4圖之偏移控制再生何種立 體視覺影像。 第6(a)〜(d)圖係表示1截面+偏移模式之立體視覺之實 現方式。 第7圖係表示具備1截面+偏移模式用之控制資訊之相 依視圖串流之内部構成。 第8(a)〜(c)圖係表示使用者資料容器之内部構成之 201123841 第9圖係表示用以描述偏移元資料之語法。 第10(a)、(b)圖係表示正與負的截面偏移之觀看效果的 差異之一例之圖。 第11圖係以橫軸作為時間軸’以縱細作為截面偏移值 (Plane_offset_value)[j]之圖。 第12圖係以橫轴作為時間軸’以縱軸作為截面偏移值 (Plane_offset_value)[j]之圖。 第13圖係表示藉由偏移序列id (〇ffset_sequenee叫 =1、2、3、4之偏移序列定義何種景深之_例。 第14(a)〜(c)圖係表示關於第1實施形態之記錄媒體之 内部構成。 第15(a)、(b)圖係進一步詳細表示視訊串流如何儲存於 PES封包串。 第16圖係模式性地表示主TS如何受到多工之圖。 第17(a)、(b)圖係表示主TS及子TS之内部構成。 第18(a)〜(d)圖係表示播放串列資訊之内部構成。 第19(a)、(b)圖係表示基本串流選擇表之一例。 第20圖係表示延伸串流選擇表之内部構成。 第2Ua)〜⑷圖係表示延伸串流選擇表之串流登錄串。 第22圖係表示依據基本串流選擇表、延伸串流選擇 表,從主TS、子TS將何種ES解多工。 第23圖係表示進行如第22圖之解多工時,如何參考基 本串流選擇表、延伸串流選擇表之串流登錄串。土 第24圖係表不模式之串流號石馬之分配變化。 201123841 第2 5圖係表示用以利用物件導向編譯器語言來描述延 伸串流選擇表之語法。 第26圖係表示再生裝置之内部構成。 第27(a)〜(c)圖係表示藉由結合串流登錄串輸出何種 封包識別符至解多工部。 第28(a)〜(c)圖係表示藉由結合串流登錄串輸出何種 封包識別符至解多工部。 第29圖係表示再生裝置設定為B -D呈現模式,且B-D 能力存在時之封包識別符之參考及封包輸出。 第30圖係表示再生裝置設定為1截面+偏移模式時之封 包識別符之參考及封包輸出。 第31圖係表示再生裝置設定為2D呈現模式時之封包識 別符之參考及封包輸出。 第32圖係表示於再生裝置不存在B-D呈現模式之能力 時之封包識別符之參考及封包輸出。 第33圖係表示播放串列再生程序。 第34圖係表示串流選擇手續之處理程序。 第35圖係表示對應於串流號碼之封包識別符之輸出處 理之程序。 第36圖係表示PG截面移位之處理程序之流程圖。 第37圖係表示文本字幕串流為再生對象時之PG截面移 位之處理程序之流程圖。 第38圖係表示IG截面之載面移位之流程圖。 第39圖係表示STN表SS之彈出期間固定偏移 9 201123841 (Fixed_offset_during_Popup)為開啟時之IG截面之截面移位 之處理程序之流程圖。 第40圖係表示延伸區與檔案2D/檔案庫、檔案相依之對 應關係。 第41 (a)〜(c)圖係表示立體視覺交插串流檔案與檔案 2D/檔案庫之關係。 第42圖係表示立體視覺交插串流檔案、檔案2D、檔案 庫之相互關係。 第43圖係表示2D播放串列、3D播放串列。 第44圖係表示於第43圖之3G播放串列再加入一個子路 徑之播放串列。 第45(a)、(b)圖係表示基礎視圖指示器。 第46圖係表示依據播放串列資訊之串流檔案之載入程 序。 第47(a)、(b)圖係表示剪輯資訊檔案之内部構成之圖。 第48圖係表示延伸區起點資訊之語法。 第49(a)、(b)圖係表示剪輯資訊檔案之分錄圖表。 第5 0圖係表示程式資訊之串流屬性資訊。 第51圖係表示依據分錄圖之分錄點之登錄。 第5 2圖係表示如何從構成立體視覺交插串流檔案之資 料塊復原ATC序列。 第53(a)、(b)圖係表示ATC序列之復原之圖。 第54係表示ATC序列復原程序。 第55(a)、(b)圖係表示解多工部及視訊解碼器之内部構 10 201123841 成。 第56(a)、(b)圖係表示PG串流之圖形解碼器之内部構 成。 第57(a)、(b)圖係表示文本字幕解碼器之内部構成。 第58(a)、(b)圖係表示IG解碼器之解碼器模型。 第59圖係表示用以合成解碼器模型之輸出、以3D-LR 方式輸出之電路構成。 第60圖係表示用以合成解碼器模型之輸出、以1截面+ 偏移模式方式輸出之電路構成。 第61圖係表示經多層化之光碟片之内部構成。 第62圖係表示以檔案系統為前提之光碟片之應用程式 格式。 第63(a)、(b)圖係表示記錄媒體之記錄方法。 第64圖係表示編輯階段之處理程序之流程圖。 第65圖係表示AV檔案寫入階段之處理程序。 第66圖係表示記錄裝置之内部構成。 第67圖係表示2D/3D再生裝置之構成。 第68圖係表示系統目標解碼器4及截面記憶體組5a之 内部構成。 第69圖係描繪暫存器組10之内部構成及再生控制引擎 7b之圖。 第70圖係表示輸出模式之選擇模型之狀態變遷。 第71圖係表示初始化之處理程序。 第72圖係表示回放條件改變手續(Procedure when 11 201123841 playback condition is changed)之處理程序。 器設 第73(a)〜(d)圖係表示3D再生模式實現用 定暫存器之位元指派。 放 制用之 第74(a)〜(e)圖係表示巨集塊之景深與移位和 參數之關係。 二 第7 5圖係表示與視訊串流之編碼並行地執v _ 列之定義程序之流㈣。 了之偏移序 第76(a)、(b)圖係表示字幕串流之視窗定義區^ 資訊之圖。 °又、控制 第77(a)〜(c)圖係表示DS之PCS之描述例之圖。 第78圖係表示於組成物件(comp〇siton_object)内;ja·以 利用3d_形偏移(3d_graphics_offset)之内插時與未施以内 插時’偏移隨時間如何變化。 第79圖係表示由晝面之每分割區域之偏移所構成的偏 移序列。 第80圖係表示畫面内之物體之景深與偏移之關係。 第81圖係表示再生裝置中之視訊解碼器、基礎視圖視 5孔截面、相依視圖視訊截面記憶體、PG/IG截面。 第82圖係表示圖形截面之内容與偏移之關聯性。 第83(a)〜(d)圖係表示深度視圖方式之一例。 第84圖係表示於3D-深度模式下所生成的立體視覺圖 像。 第85(a)、(b)圖係表示用以實現3D-深度模式之記錄媒 體之構成例。 12 201123841 第86圖係表示藉由目錄名及檔案副檔名,區別於2D與 3D的情況下再生之串流檔案之機制,或以LR形式與深度形 式再生之串流擋案之機制。 第87圖係表示包含基本檔案之尺寸資訊之播放項目資 訊。 第88圖係表示已追加景深資訊之3D元資料。 第89圖係利用積體電路實現2D/3D再生裝置之構成例。 第90圖係表示串流處理部之代表性構成之功能方塊 圖。 第91圖係切換部為D M A C時之切換部6 5 3周邊之概念 圖。 第92圖係表示AV輸出部之代表性構成之功能方塊圖。 第9 3圖係詳細表示AV輸出部或再生裝置之資料輸出 部分之構成例。 第94圖係表示圖像重疊處理中之記憶體與各截面之關 係之圖。 第95圖為圖像重疊部之圖像重疊處理之概念圖。 第96圖為圖像重疊部之圖像重疊處理之概念圖。 第97圖為圖像重疊部之圖像重疊處理之概念圖。 第98圖為圖像重疊部之圖像重疊處理之概念圖。 第99圖係表示積體電路之控制匯流排及資料匯流排之 配置圖。 第100圖係表示積體電路之控制匯流排及資料匯流排 之配置圖。 13 201123841 第101圖係簡單表示再生裝置之動作程序之流程圖。 第102圖係詳細表示再生裝置之動作程序之流程圖。 第103(a)〜(d)圖係表示基礎視圖視t代串流之剪輯資訊 之延伸區起點資訊之一例、及相依視圖串流之剪輯資訊之 延伸區起點資訊之一例。 第104(a)〜(c)圖係用以說明ATC序列1、2之任意資料塊 之來源封包號碼之圖》 I:實施冷式3 用以實施發明之形態 一面參考圖式,一面說明關於具備上述課題解決手段 之記錄媒體及再生裝置之實施形態。首先,一開始簡單敘 述關於立體視覺的原理。 一般而言,右眼與左眼係起因於其位置差,從右眼所 看到的像與從左眼所看到的像在觀看敦果上會有些許差 異。利用該差異,人們可將雙眼所看到的像辨識作立體。 進行立體顯示時’即是利用人的視差,使得平面圖像彷彿 看似立體。 具體而言,於平面顯示之圖像,右眼用圖像與左眼用 圖像會有相當於人的視差之觀看效果差異的程度之差異, 藉由以短時間間隔切換顯示該等圖像,以彷彿看似進行立 體顯示。 該短時間間隔若為藉由切換顯示,以使得人們產生看 似立體之錯覺雜度之時間即可。作為㈣視覺之實現法 包括利用全像技術之方法與利用視差圖像之方式。 201123841 首先,作為第1種技術之全像技術之特徵,可將物體與 人們一般所辨識的物體完全同樣地重現,但關於動畫生成 方面,雖已確立技術性理論,但需要伴隨有即時生成全像 用動畫之龐大運算量之電腦、及於lmm之間拉出數千條線 之解像度之顯示裝置,在現今技術下非常難以實現,幾乎 尚無作為商業用而實用化的例子。 第2種技術為利用視差圖像之方式。該方式之優點在於 最夕不過僅準備右眼用與左眼用之2個視點的影像,即可實 現立體視覺,在技術上而言,從如何將對應於左右各眼的 畫,僅讓相對應的那眼看到的觀點考量,以連續分離方式 為首之數種技術已實用化。 連續分離方式係指令左眼用影像及右眼用影像在時間 軸方向父替顯示’藉由雙眼的殘影反應,使左右場景在腦 内疊合而_作為立Μ像的方法。 於上述任—方式中,立體視覺影像至少由2個視點影像 斤構成視點W像係指具有某種偏向性之影像,至少2個視 ”"占如像係由主視圖影像及子視圖影像所構成。然、後,主視 見圖刀別藉由視訊串流而從記錄媒體供給時,於記 錄媒體錢有供給主視圖之視訊串流之主視圖視訊串流、 子視圖之視矾串流之子視圖視訊串流。以下說明中所 出見的°己錄媒體係適宜用以記錄該等主視圖視訊串流、子 視圖視訊串流。 ^本中錢明書之再生裝置係具備2D再生模式、3D 再生Μ式之2種再料式,用以再生上述魏圖視訊串流、 15 201123841 子視圖視訊串流’並可進行該等之相互切換之2D/3D再生裝 置(播放器)。 第1圖係關於§己錄媒體、再生裝置、顯示裝置、眼鏡之 使用行為之形態。如同圖(a)所示,作為記錄媒體之一例之 記錄媒體100、再生裝置200係與電視300、3D眼鏡400、遙 控器500 —同構成家庭劇院系統,並供作使用者來使用。 記錄媒體100係對上述家庭劇院系統,供給例如電影作 品0 再生裝置200係與顯示裝置300連接而再生記錄媒體 100。 顯示裝置300為電視,其藉由顯示電影作品之再生影像 或顯示選單等,對使用者提供對話性之操作環境。本實施 形態之顯示裝置300係藉由使用者配戴3D眼鏡400而實現立 體視覺,但顯示裝置300若為柱狀透鏡方式之裝置,則不需 要3D眼鏡400。柱狀透鏡方式之顯示裝置3〇〇係於畫面中之 縱向’同時父替排列左眼用圖片(picture)與右眼用圖片,於 顯示裝置之畫面顯示,透過稱為柱狀透鏡之半圓柱狀的透 鏡,使得構成左眼用圖片之像素僅於左眼成像,構成右眼 用圖片之像素僅於右眼成像,藉此讓左右眼看到具視差之 圖片而實現立體視覺。 3 D眼鏡40 0具備液晶快門,讓收視者收視藉由連續分離 方式或偏光眼鏡方式所形成的視差圖像,視差圖像係指由 進入右眼之影像與進入左眼之影像所構成的一組影像,僅 使對應於各眼之圖片進入使用者的雙眼而進行立體視覺。 16 201123841 同圖(b)係表示左眼用影像之顯示時。於畫面上顯示左眼用 影像的瞬間,前述3D眼鏡4〇〇係使得對應於左眼之液晶快門 穿透’對應於右眼之液晶快門則遮光。同圖(c)係表示右眼 用影像之顯示時。於畫面上顯示右眼用影像的瞬間,與先 前相反’使得對應於右眼之液晶快門穿透,將對應於左眼 之液晶快門遮光。 遙控器500係用以接受AV再生用之操作項目之機器。 又’遙控器500係從使用者’受理對於經階層化之GUI之操 作’為了受理該操作,遙控器500具備:選單鍵,係叫出構 成GUI之選單者;箭頭鍵’係使構成選單之GUI元件之焦點 移動者;決定鍵,係對於構成選單之GUI元件進行確定操作 者;返回鍵,係使得經階層化之選單返回到更高位選單者; 及數值鍵。 於第1圖之家庭劇院系統,令顯示裝置3〇〇進行3D顯示 模式下之圖像顯示之再生裝置之輸出模式,稱為“3d輸出模 式”。令顯示裝置300進行2D顯示模式下之圖像顯示之再生 裝置之輸出模式’稱為“2D輸出模式”。 以上係關於記錄媒體及再生裝置之使用形態的說明。 (第1實施形態) 第 开八I、之特徵點在於:於記錄媒體100,記錄用 以實現立體視f再生之域隨訊串流、子視圖視訊串流 之組配,並供給至再生裝置時,於子·視訊串流内之 元資料嵌人規定偏移控制之控制資訊。 在此之偏移控制係指於圖形截面之水平座標之右方及 17 201123841 左方給予偏移,與描繪構成主視圖之圖片資料之主視圖視 訊截面及描繪構成子視圖之圖片資料之子視圖視訊截面合 成。 進而言之,上述移位控制用之控制資訊係作為參數序 列而發揮功能,而前述參數序列係將表示前述偏移值之資 訊及規定前述偏移方向之資訊,與複數個圖幀之各圖幀建 立對應而規定。 於以後說明中,主視圖及子視圖係實現視差圖像方 式。視差圖像方式(稱為3 D-L R模式)係各自準備進入右眼之 影像與進入左眼之影像,並僅讓對應於各眼之圖片進入而 進行立體視覺的方法。第2圖係於左側描繪使用者臉部,於 右側表示從左眼觀看作為對象物之恐龍骨骼之情況之例, 及從右眼觀看作為對象物之恐龍骨骼之情況之例。若從右 眼及左眼之透光、遮光重複,則於使用者腦内,藉由雙眼 的殘影反應而進行左右場景的重合,可辨識作在臉中央的 延長線上存在立體影像。 視差圖像中,進入左眼之圖像稱為左眼圖像(L圖像), 進入右眼之圖像稱為右眼圖像(R圖像)。然後,各個圖片成 為L圖像之動態圖像稱為左視圖視訊,各個圖片成為R圖像 之動態圖像稱為左視圖視訊。然後,藉由將左視圖視訊、 右視圖視訊予以數位化、壓縮編碼而獲得之視訊串流,稱 為左視圖視訊串流、右視圖視訊串流。 除了藉由利用時間方向之相關特性之圖片間預測編碼 以外,還藉由利用視點間之相關特性之圖片間預測編碼來 18 201123841 壓縮該等左視圖視訊串流、右視圖視訊串流。右視圖視訊 串流之圖片係參考左視圖視訊串流之相同時刻之圖片而壓 縮。作為利用視點間之相關特性之視訊壓縮方法,包括稱 為多視圖視訊編碼(MVC)之MPEG-4 AVC/H.264的修正規 格。ISO/IEC MPEG及ITU-T VCEG之共同計畫,即共同視 訊小組(JVT)係於2008年7月完成制訂稱為多視圖視訊編碼 (MVC)之MPEG-4 AVC/H.264的修正規格。MVC係匯總複數 視圖之影像而編碼的規格,不僅是影像之時間方向之類似 性’視點間之類似性亦利用於預測編碼,藉此而比複數視 點獨立的壓縮更提升壓縮效率。 然後,藉由MVC所壓縮編碼的左視圖視訊串流及右視 圖視訊串流中,可單獨解碼者稱為“基礎視圖視訊串流”。 由後述的基礎視圖指示器,來決定要將左視圖視訊串流及 右視圖視訊串流之何者指定為基礎視圖視訊串流。又,左 視圖視訊串流及右視圖視訊串流中,根據與構成基礎視圖 視訊串流之各個圖片資料之圖幀間相關特性而被壓縮編 碼,並於基礎視圖視訊串流被解碼後才可解碼之視訊串 流’稱為“相依視圖視訊串流,,。 根據視點間之相關性而被壓縮編碼之左視圖視訊串流 及右視圖視訊串流,並可單獨解碼者,稱為“基礎視圖視訊 串流”。由播放項目資訊内之基礎視圖指示器來決定要將 左視圖視料流及右視圖視訊$紅何者指^為基礎視圖 視訊串流。 現狀下之域視覺影像編碼,據觸由該Mvc方式為 19 201123841 最佳,因此以下說明中,“主視圖視訊串流”設為“基礎視圖 視訊串流,,,“子視圖視訊串流”設為“相依視圖視訊串流”而 進行說明。 說明關於MVC視訊串流的基礎,即MPEG4-AVC形式 之串流。 MVC視訊串流具有GOP構造,由封閉GOP、開放GOP 所構成。封閉GOP係由IDR圖片、接續於該IDR圖片之B圖 片、及P圖片所構成。開放GOP係由Non-IDR I圖片、接續 於Non-IDR I圖片之B圖片、及P圖片所構成。
Non-IDR I圖片、P圖片、B圖片係根據與其他圖片之圖 幀相關性而被壓縮編碼。B圖片係指由雙向預測(B)形式之 片段資料所組成的圖片,P圖片係指由預測(P)形式之片段 資料所組成的圖片。B圖片包括傳址B(Br)圖片與非傳址B(B) 圖片。 封閉GOP係IDR圖片配置於開頭。於顯示順序中,IDR 圖片不會成為開頭,但IDR圖片以外的其他圖片(B圖片、P 圖片)無法與存在於較封閉GOP前方之GOP之圖片具有依存 關係。如此,封閉GOP具有令依存關係完整結束的作用》 接著,說明關於GOP之内部結構。開放G〇P、封閉g〇p t之各個圖片資料具有H.264編碼方式之視訊存取單元構 造。 視訊存取單元與圖片之關係係1圖片存取單元=1圖 片。又’於BD-ROM,限制為iPES封包=1圖幀。總言之, 若動畫為圖幀構造,則1PES封包=1圖片,若為圖場構造, 20 201123841 則1PES封包=2圖片。從該等可知,pES封包係以丨對丨的比 率而儲存圖片。 第3圖係表示立體視覺用之左視圖視訊串流、右視圖視 訊串流之内部構成之一例。 本圖之第2層表示左視圖視訊串流之内部構成。該串流 包含圖片資料II、P2、Br3、Br4、P5、Br6、Br7、P9之圖 片資料。該等圖片資料係按照解碼時間戳記(DTS)而被解 碼。第1層表示左眼圖像。按照PTS,以Br3、Br4、p2、 Br6、Br7、P5之順序再生如此解碼的圖片資料n、p2、Br3、 Br4、P5、Br6 ' Br7、P9 ’藉此再生左眼圖像β 第4層表不右視圖視訊串流之内部構成。該右視圖視訊 串流包含PI、Ρ2、Β3、Β4、Ρ5、Β6、Β7、Ρ8之圖片資料。 該等圖片資料係按照DTS而被解碼。第3層表示右眼圖像。 按照PTS,以π、Β3、Β4、Ρ2、Β6、Β7、ρ5之順序再生如 此解碼的圖片資料P1、Ρ2、Β3、Β4、ρ5、Β6、Β7、ρ8, 藉此再生右眼圖像。 第5層表示如何變化3D眼鏡_的狀態。如該第5層所 示’可知左眼圖像之收視時,關閉右眼快Η,右眼圖像之 收視時,關閉左眼快門。 於本圖中’例如右視圖視訊串流之開頭圖片係參考左 視圖視訊串流之1圖片,右視圖視訊串流之關片係參考左 視圖視4州之_片,右視圖視訊串流之第圖片係 參考左視圖視訊串流之阳片^㈣娜、之顯示週期中,以 “B”—“D”B”_“D”之方式交替輪出基礎視圖視訊串流之視 21 201123841 訊圖幀與相依視圖視訊串流之視訊圖幀的模式,稱為“B—D 呈現模式”。 不交替輸出基礎視圖視訊串流之視訊圖鴨與相依視圖 視訊串流之視訊圖幀,而將再生模式維持在31)模式下,並 進行重複輸出視訊圖幀2次以上的處理之再生類型,稱為 B-B呈現模式。於B-B呈現模式下,僅有可單獨再生之基礎 視圖視訊串流以‘取’-“珏”-“丑”-‘见’之方式重複輸出。 以上的B-D呈現模式、B-B呈現模式為再生裝置之基本 再生模式,但除了該等模式以外,再生裝置還存在有所謂i 截面+偏移模式之再生模式。 1戴面+偏移模式(亦稱為3 D -偏移模式)係於截面記憶 體之後段嵌入移位部,令移位部發揮功能以實現立體視覺 之再生模式。截面偏移部係於左視圖期間及右視圖期間之 各期間’令截面記憶體之線單位像素之座標往左方或右方 移位,使得右眼視線及左眼視線之成像點往面前方向或景 深方向變位’藉此變化景深感。具體而言,若於左視圖期 間往左方’於右視圖期間往右方變化像素座標,則兩眼視 線之成像點在面前’若於左視圖期間往右方,於右視圖期 間往左方變化像素座標,則兩眼視線之成像點在面前。 於該截面移位中’由於立體視覺用之截面記憶體若有1 戴面即足夠,因此最適於簡易地創作立體視覺影像。於該 戴面移位中,僅止於產生出平面的影像來到面前亦或拉入 深處之立體影像,因此雖適於選單或字幕之立體視覺效 果’但在角色或物體之立體視覺效果的實現上稍微不足。 22 201123841 此係由於其無法重現角色臉部的凹處或凹凸等所致。 支援1截面+偏移模式的情況下,再生裝置之構成如以
下。為了再生圖形,於再生裝置存在有截面記憶體及CLUT 部、合成部,於該CLUT部、合成部之間嵌入截面移位部。 然後,移位部係利用嵌入於相依視圖視訊串流之存取單元 構造之偏移序列中之偏移,實現如上述之像素之座標變 化。藉由如此,1截面+偏移模式下之像素之跳出程度係與 MVC視訊串流縝密地同步。於該丨截面+偏移模式中,包括 1截面+零偏移模式。1截面+零偏移模式係於彈出式選單開 啟時,將偏移值設為〇,僅對於彈出式選單給予立體視覺效 果之顯示模式。 作為依據偏移序列之移位控制對象之截面記憶體,係 構成特定層模型(layer· mGdel)之複數截面記歷。截面記憶 體係指以線單位,事先儲存藉由解碼ES所獲得的-晝面份 ^像素f料’按照水平同步訊號、垂直同步訊號而輸出該 =像素資料之記憶體。各個截面記憶體係儲存由視訊解碼 G解碼器、1G解碼器之解碼所獲得的【畫面份之像素 資料。 〃 特疋層模型係由基礎視圖視訊戴面及相依視圖視訊截 ^構成,其意圖依基礎視圖視訊戴面—pG截面—腿d 面的順序,將各階層之截面記憶體之儲存内容進行層合 成0 =層合成係藉由於截面記憶體之層模型,對於層模 個階層的全雜合,執行切存膚階層之截面記 23 201123841 憶體之像素像素值重叠 於各階層之截面記憶體。 的處理而進行 以下敘述關 訊串流之視圖紐件 子9由解碼構成基礎视圖視 記憶體。相依視 -面伤之像素資料之截面 圖視訊串流之视圖組件,而獲,1料稭由解碼構成相依視 截面記憶體。 件的—畫面份之像素資料之 解碼器,藉由進行解用於:存採管線式動作之圖形 IG_,面係指於二形之截面記憶體。 於別的動作模式下Γ 乍截面發揮功能, 體。互動圖猜、 购截面發揮功能之截面記憶 動作之圖增州爾理為前提而 憶體。叫截=行解碼而獲得的圖形之戴面記 嗜處理益 ㈣儲存物件導向程式化語言進行描 ’It此而獲得的描繪影像圖形之截面記憶體eiG截 ,、BD~J截面為互斥性截面’某一方被利用時,則另一方 不破利用’因此1(}裁面與BD_域面係兼用Μ截面記憶體。 於上述層模型,就視喊面而言,雖存在有基礎視圖 用的視訊戴面與相依視圖用的視訊截面,但就IG/BD-J戴 面、pG截面而言’並非針對基礎視圖用、相依視圖用之各 者存在有戴面記憶體。故,IG/BCKi截面、pG戴面為移位 控制的對象。 第4圖係表示於1戴面+偏移模式下,對於截面記憶體之 層模型進行何種偏移控制L戴面記憶體之層模型係 24 201123841 由IG截面' PG戴面、鉬π迚工 ^ 視afl截面、背景載面所構成。 如本圖⑷所示,於基礎視圖期間,PG截面及IG截面往 左方移位°此時,左方移位後之扣截面係於右側追加有透 明區域’左側端部被剪下。同樣地,左方移位後之⑴截面 係於右側追加有透明區域,左側端部被剪下。 如本圖⑻所示,於相依視圖期間,PG截面及IG截面往 右方移位。此時,右方移錢之pGm㈣於左側追加 明區域,右側端部被剪下。同樣地,右方移位後之犯戴面 係於左側追加有透明區域,右側端部被剪下。 第5圖係表示藉由第4圖之偏移控制再生何種立體視覺 影像。_面之儲存内容為⑽元件,係、受理往前—奸 的跨越(skip)、往下_章節的跨越者;ρ(}截面之儲存内容^ 表示標題『^』之字幕文字時,藉由如上述之丨截面+偏 移模式時之偏移控制,PG截面、IG截面之儲存内容會 ⑷、(b)。 ⑷係表示左移位時之戰面之儲存内容及右移位時之 IG截面之儲存内容。嶋㈣左移位時之m截面之儲存内 容及右移位時之之儲存内容。若如此進行偏移抑 制,會再生如⑷之立體視覺影像。於該⑷之立體視覺景: 像,由於對第2圖所示之恐龍合成Gm及字幕,因此伴隨= 現狀之BD-ROM内容所實現的字幕、GU;[之電影内容係 為立體視覺影像而再生。 第6圖係表示1截面+偏移模式之立體視覺之實現方弋 於1截面+偏移模式下輸出左視圖視訊時,僅以+偏移 25 201123841 :圖之t方向挪移儲存於稱為Ρ〇戴面之戴面記憶體 座標。然後’修耗面記,_使其不從左 =圖視訊超出後,提供與其他截面合成(參考以⑷圖上 層)〇 輸出右視圖視訊時,僅以偏移值,往x軸之負方向挪移 截面記憶體’修剪截面記憶體以使其不從左視圖視訊超出 後,提供與截面合成(參考第6(c)圖下層)。 第6(__式性絲示使用偏移值修剪重倾,如何 向使用者顯示之圖若使用偏移值挪移截面並修剪,由於 可就左眼與右眼用創作視差圖像,因此可對於平面的影像 加入深度。若存在該深度,則使用者可達成諸如平面影像 從顯示裝置之畫面浮起的表現(參考第6(d)圖)。 第7圖係表示具備1截面+偏移模式用之控制資訊之相 依視圖串流之内部構成。第1層為複數個G0P,第2層表示 構成GOP之複數個視訊存取單元。該等視訊存取單元相當 於視圖組件,於GOP之各個顯示圖幀(圖中之圖幀(1)〜圖幀 (GOP中顯示圖幀數))中顯示。 第3層係表示視訊存取單元之内部構成。視訊存取單元 係藉由排列視訊存取單元定界符、序列參數集合、圖片參 數集合、MVC可擴縮巢套SEI訊息、第1視圖組件、序列終 端碼、串流終端碼而構成。然後’於該MVC可擴縮巢套SEI 訊息之中存在使用者資料容器。 第8圖係表示使用者資料容器之内部構成之圖。 同圖(a)係表示使用者資料容器之内部構成。使用者資 26 201123841 料即未註冊使用者資料(未登錄使用者資料),包括隱藏字 幕、GOP構造圖、偏移元資料之3個種類。該等種類明示於 容器中之類型指示器(type_i.ncUc.ator)。 同圖(b)係表示偏移元資料。偏移元資料係pg截面' iG 截面、BD-J截面用之序列串列,於立體視覺再生模式中, 用於呈現圖形_文本字幕IG/BD-J截面以1截面+偏移模式再 生之期間之偏移設定。具體而言,表示以1戴面+偏移模式 再生應與圖片資料合成之圖形時,對於PG截面、IG截面、 BD-J截面之偏移控制。 元資料須儲存於相依視圖存取單元之編碼順序中之各 GOP開頭的視訊組件之MVC可擴縮巢套SEI訊息。包含 MVC可擴縮巢套SEI訊息之NAL單元不得包含元資料之使 用者資料容器以外的其他資料。 同圖(b)係表示偏移元資料(Offset_metadata)之内部構 成。 圖幀率(frame_rate)係描述包含偏移元資料之存取單元 之圖幀率。 呈現時間戳記(PTS)係以90KHZ描述GOP之最初的圖中貞 率。 偏移序列數(number_of_offset_sequence)係在 0 至 32 的 範圍内描述序列數。 GOP 中顯示圖幀數(number_of_displayec[ _frames_in_GOP)係表示包含元資料之GOP之顯示圖幀數。 序列數(number_of_sequence)個之偏移序列(偏移序列 27 201123841 [1 ]〜偏移序列[序列數])係對應於視訊串流之各個G〇p之偏 移序列的集合。 同圖(c)係表示偏移序列之内部構成。偏移序列係就圖 片群組織每圖幀期間,表示與屬於圖片群組之各圖片資料 合成時之控制參數之參數序列,由表示於GOP中顯示圖鴨 數之個數之控制參數所構成。該控制參數係由截面偏移方 向資訊及截面偏移值所構成。 截面偏移方向資訊(Plane_offset_direction)係指示截面 之偏移方向。值“0”為前方設定,亦即截面記憶體存在於τν 與收視者之間,於左視圖期間,截面往右方移位,於右視 圖期間,截面往左方移位。 值=1則為後方設定,亦即戴面記憶體存在於TV或螢幕 背後’於左視圖期間,截面往左方移位,於右視圖期間, 截面往右方移位。截面偏移方向資訊表示前方設定時,3次 元座標系統中之控制參數之Z軸座標為正座標。截面偏移方 向資訊表示後方設定時,3次元座標系統中之控制參數之z 轴座標為負座標。 截面偏移值(Plane—offset—value)係構成圖形之像素之 水平方向變位量之指定’以像素單位指示戴面之偏移值。 第9圖係表示用以描述偏移元資料之語法。以偏移序列 id作為控制變數之語句「for」係定義偏移序列數個之偏移 序列。 以i作為控制變數之語句「for」係僅以G〇p中顯示圖幀 數’定義戴面偏移方向與截面偏移值之組配。藉由如此利 28 201123841 用語句「for」,定義如上述之偏移序列。 第10圖係表示正與負的截面偏移之觀看效果的差異之 一例之圖。於同圖(a)、(b),面前係表示於右視圖輸出時, 利用已移位之移位後圖形截面所輸出的右視圖用之圖形影 像。深處係表示於左視圖輸出時,利用已移位之移位後圖 形截面所輸出的右視圖用之圖形影像。 本圖(a)係表示截面偏移之符號為正(左視圖用圖形影 像往右方挪移,右視圖用圖形影像往左方挪移)的情況。當 截面偏移為正值時,左視圖輸出時之字幕較右視圖輸出時 之字幕,看似位於右側位置。總言之,輻輳點(焦點位置) 來到較螢幕位於面前,因此字幕亦看似在面前。 本圖(b)係表示截面偏移之符號為負的情況。若為負 值,如第14圖所示,左視圖輸出時之字幕較右視圖輸出時 之字幕,看似位於左側位置。總言之,輻輳點(焦點位置) 去到較螢幕位於深處,因此字幕亦看似在深處。 以上結束說明關於藉由切換截面偏移的正與負,來變 化字幕較顯示畫面的位置跳出或往深處去之方法。 <偏移序列之技術性意義> 偏移序列係藉由具備上述資料構造,可就視訊举流時 間轴之各圖幀逐一定義圖形的景深,因此藉由利用任一個 偏移序列,可從任意圖幀時間t導出對應於該圖幀時間之景 深z之函數Z(t)。若該函數Z(t)係令景深對於圖幀時刻t呈線 性地變化,則再生裝置係藉由將對應於該函數Z(t)之偏移序 列,用於1截面+偏移模式中,可隨著再生進行而令圖形的 29 201123841 景深呈線性地變化。又,若,;、 刻t呈指數性地變化,則再生^數2_令景深對於圖巾貞時 之偏移序列,用於=係11由將對應於該函數z⑴ 令圖形的景深呈指料地 丨巾,可隨著再生進行而 再生時點的前進,令景深㈣=隨著視訊串料間轴之 化性之圖形之立體視覺再生。化’因此可實現富於變 m之圖。橫軸之時間車由係構=相:轴作”面_ GOP成為1個時間單位。縱 、視圖存取早元之各低 向m為叫之截面偏移值[n之正方向係表7F截面偏移力 移方向m為1時之截面偏移值轴中之負方向係表示截面信 係表示依據偏移相㈣、2、然後’ ®巾之曲線、直麟 方向ϋ]之時間性變位。該等 4之偏移序列之截面偏彩 序列係定義對於時叫,呈^偏移序列1d=卜4之偏彩 之偏移序列,偏移㈣\,生地變化之景深之線性函彰 軸,呈__變料列錢義對於邮 京冰之拋物線函數之偏移序列。 第12圖係以橫㈣為時間軸,以縱轴作為截面偏移信 □之圖。橫軸之—係構餘依視圖存取單元之G〇P《 各個_成為1個時間單位。故,可知糾圖所示之偏移片 列id=l、2、3之偏移序列若以圖幀之時間精度來表現,貝, 就每圖幀期間成為離散的值。各偏移序列係於每1秒可定義 24個離散的景深,因此能夠以每1秒24次的時間精度,令依 據各偏移序列之景深變化。故,能夠以與正編之動態圖像 之立體視覺影像相比較不遜色、真實感尚的景深變化,來 30 201123841 令3次元座標系統之圖形之2座標變化。 又’由於7G資料可儲存複數個偏移序列,因此藉由利 用複數個偏移序列1、2、3、4.._,可定義景深之時 Μ I化互異之複數個景深函數Z1⑴、Z2(t)、Z3(t)、 • .Zn(t)。在此,若諸如景深函數幻⑴係因應 ^而令景深變化之1次函數,咖為二次函數,Z3⑴為 4函數Z4(t)為四次函數,利用複數個偏移序列卜2小 η ’則可定義景深與圖巾貞時間之相關性不同的複 數個景深函數。 、由再生裝置進行動作時,若進行選擇複數個偏移序列 U、3、4· · · ·η之某"'者之動作,則可從複數個景深 函數z1(t)、Z2⑴、Ζ3⑴、Ζ4( · 景冰 · .Zn(t)中選擇最佳 者而利用於i截面+偏移模式。藉由如此,可 移模式之圖形景深之變化方式具有各種變化。 本實施形態所定義的複數個偏移序列 間性變化分別不_㈣位置,因此於再生裝置 串流選擇手續,於複數個偏移序列中 付疋 令圖形配置於適當位置。 以上係關於第1技術性意義的說 第2技術性意義的詳細。 。接下來’說明關於 作為第2技術性意義係可定義鱼金 -、里面中之移動體 部位相應之景深之點。於第2圖所示夕现扯a ^ 又心、龍骨骼,在頭邱 驅體、腳部、尾部各部位,其景深各自不同。進而於動: 圖像,該等頭部、驅體、腳部、尾部各 、心 邛位之景深隨時間 31 201123841 而變遷,因此於元資料,罝
料構造,以便可就咖之各_ ^複數㈣移序列之資 鲈、圖幀,逐—明示該等頭部、驅 體腳部、尾部各部位正好在面前位置之W 第13圖係麵藉自偏移 木 定義何種景深之—例。 2、3'4之偏移序列 在此,偏移序列id^、2夕伯必产 恐㈣,配置字幕•之 ;偏移:_«,後〜置字::=、; 冰然後,該等之中,偏移之適田尽 者附近定義錄,偏移序列㈣ ^相係於使用 的景深:=::: =係定義沿著恐龍腳邊 方,指以己置字幕/選單之用以於恐龍的相當後 可疋義-控制參數,係表示立體 部、尾部各部位正好在面前位置之景^、驅體、腳 G〇P之各,貞,逐-定義帅=冰者。又,由於可就 若利用第9圖之狂法所定義^制參數之時間性變位,因此 布《1爻。。法所疋義的資料構造, 度之1截面+偏移模式下之移位控制。 在、且高精 即便疋圖中恐龍在畫面内到處移動 景深會時時刻刻變化的情況 、早之適當 可於恐龍的她置吻幕偏移序列’仍 以上係關於第2技術性意義的說明。 第14圖係表示關於第1實施形態之記錄媒體之内部構 成。如本圖(a)所示,關於第1實施形態之記錄媒體記錄有°「索 32 201123841 播放串列資訊權 引表」、「動作模式物件之程式擋案 案」、串流資訊標案」、「串流槽案」。 <索引表檔案> 索引表稽㈣關於記錄雜全體之管理資訊,於對再 生裝置插人記錄媒體後,最初讀出索引表檔案’藉此於再 生裝置對一地辨識記錄媒體。 索引表檔㈣規定謂存於衫Μ之騎號碼暫存 器之複數㈣題_、與規定動作模叙動作模式物件之 對應關係。記錄於記錄媒體之標題係指藉由標題號碼所特 定出的動作模式物件、與從該動作模式物件再生之播放串 列之組配。電影作品與標題的_係電料品與其複數個 版本的關係。總言之,僅有i個版本之電影作品則成為「電 影作品=標題」之關係。電影作品包括劇院公開版、導演剪 片版、τν放映版料數個版本時,電影作品之各個版本成 為1個標題。 在此,標題號碼暫存器之標題號碼包括〇、丨〜999、不 定值(〇xFFFF)之號碼。標題號碼G係頂層選單標題之標題號 碼。頂層選單標題係使用者可藉由選單呼叫操作所叫出的 標題。不定值(OxFFFF)之標題號碼係最初播放標題之標題 號碼。最先播放標題係於記錄媒體剛裝載後,進行對收視 者之警告或内容提供者之標諸顯示等之標題。 索引表具有對應於各標題號碼之各者之分錄(索引表 分錄)’於各個索引表,藉由描述規定動作模式之動作模式 物件,以詳細規定各個標題以何種動作模式進行動作。索 33 201123841 引表分錄係採以下共通的資料構造定義。該共通的資料構 造包含:『物件類型』、『電影物件參考』及『物件樓案名資 说』。『物件類型』係表示與該標題建立襲之動作模式物 件’為電影物件亦或BD,件。『物件檔案名資訊』係表示 與標題建立關聯之BD,件之檔案名。『電影物件參考』係 表示與標題建立關之電f彡物件之識別符。 * «丨丁时尔π圯稣嫖體裝裁 =不定值〇xFFF W〇而變化。該標題號 化係於記錄媒體裝載時,開始最初播放標題的 =Γ生後’進行由1至999之標題號碼暫存器二 單:―所指,題 具有1〜999之桿題料T題等4使用者進行選擇。 器之標題號^有^之標财,與儲存於標題號碼暫存 象,亦SCS I號碼者,係成為現在的再“ 係《藉由對於頂層選單標何種㈣, 標題號碼暫存H之設定來決b 、/程切進行的 動作模式物件之程式檔案> 34 201123841 作。該指令基礎之動作模式稱為“hdmv_、 後者的動作模式物件係於物件導向型 礎之動作模式下,將_構造體之實例供給 ^基 根據該實例而令再生裝置動作。類別構造體之實例= 物件導向型編譯㈣ 式稱為“BD-J模式' 助彳乍模 <播放串列資訊檔案> 播放串列資訊檔案係儲存有用以令再生裝置再生播放 串列之資訊之㈣1放串㈣域由在傳輸串流(TS) 之時間軸上規定再生區間,並㈣輯性地指定該再生區間 彼此之再生順序而規定之再生路徑,具有蚊TS中,應將 何者僅再生何部分’以何種順序展開場㈣作用,播放串 列資訊定義該播放串列的“型”。由播放串列資訊所定義的 再生路徑賴謂“多路Π路徑伽集對於成為主體之 ts所定義的再生路徑(主路徑)、及對於成為從屬之ts所定 義的再生路徑(子路徑)。相對於主路徑為1道,子路徑可定 義複數道4等複數?路彳线藉由稱為?路徑①之識別符 來識別。於該多路徑之再生時間轴上,定義有章節位置。 藉由令再生裝置參考該章節位置,以使得再生裝置實現對 於多路控之時間軸之任意時點的隨機存取。於BD_J模式 下’再生控制用之java(TM)應用程式係向java(TM)虛擬機 器ίρ 7生成再生該播放串列資訊之jmf播放器實例,藉 此可開始藉由多路徑進行AV再生。JMF(JavaMedia Frame work)播放器實例係指以JMF播放器類別為基礎而於虛擬機 35 201123841 器之堆積記憶體上所生成的實際資料。於hdma^^式下, 藉由令再线置執行命令依職放_狀再生之導航指 令,可開始再生。於再生裝置,包含儲存現播放串列資訊 之號碼之《串_碼暫存器,於複數㈣放串列資訊 中’儲存於該播放串列號碼暫存器者係成為現在的再生對 象。 <串流資訊檔案> 串流-貝sfl檔案係與爭流檔案之各者以一對一的比率存 在之剪輯資訊樓案,其表示存在於串流權案内之來源封包 串構成何種STC序列、於其等ATC序列内嵌入有何種STC序 列、ATC序列為何種TS。 剪輯資訊檔案係闡明串列檔案之内涵,欲再生串流檔 案内之TS時,須職於記憶體讀出與該串流檔案相對應之 串流資訊標案。總言之,再生串流檔案時,採用預先於記 憶體讀出剪輯資訊樓案之前置主義。採用此類前置主義係 根據以下理由。儲存於串流檔案之丁8係成為與歐洲數位傳 播具相容性之資料構造,而用以作為傳播節目處理之 PMT、PCR、PAT該類資訊存在於串流内,因此每當再生時 就取出該等並不明智。此係由於每當再生串流時,即需要 存取低速的記錄媒體,讀出構成TS之封包,並解析該⑽ 包之承載區(Payl〇ad)的處理。因此,為了不解析構成乃封 包之承麟,料掌卵之各齡源,事域儲存有取 串流播案以一對一的比率設置f輯資訊,早於串流再生而 於記憶體讀出串流資訊檔案。 36 201123841 <串流檔案> 串流檔案儲存1或複數個來源封包串。來源封包係被附 加4位元組之丁卩額外標頭(TP_Extra一Header)之TS封包,前述 TP額外標頭係由2位元之複製許可指示器及3〇位元之 ATS(到達時刻:Arrival Time Stamp)所構成。TP額外標頭之 ATS係進行實時傳送,於確保等時性之狀態下之傳送稱為到 達時刻。 於該等來源封包串中’於到達時間時鐘(ATC)時間軸 上’時間戳記連續的複數個來源封包所構成者稱為“ATC序 列。ATC序列”係來源封包之排列,其指於該到達時間戳 記(Arrival—Time—Stamp)所參考的到達時間時鐘 (Arrival_Time_Clock)’ 不存在不連續點(no arrivai time_base discontiiuiity :無到達時基不連續)。換言之,於該到達時間 戳記所參考的到達時間時鐘,存在連續性之來源封包串, 稱為“ATC序列”。由於ATC序列係ATC之時間戳記連續的來 源封包串,因此於計時再生裝置之到達時間時鐘之時鐘計 數器進行計時的期間,構成ATC序列之各來源封包係供作 連續的來源封包解封包處理及連續的封包過濾處理。 相對於ATC序列為來源封包的排列,STC時間軸之時間 戳記連續的TS封包之排列,稱為81^序列。“STC序列,,係ts 封包的排列’其指不具有TS之系統基準時刻,即STC(System Time Clock.系統時間時鐘)之不連續點(Sysi;ern time-base discontinuity :系統時基不連續STC之不連續點係搬運解 碼器用以獲得STC而參考的pCR(Program Clock 37 201123841
Reference :節目時鐘參考)之PCR封包之不連續資兮凡 (discontinuity」ndicatior :不連續指示器)為開啟的點。由於 STC序列係STC之時間戳記連續的TS封包串,因此於計時再 生裝置之系統時間時鐘之時鐘計數器進行計時的期間,構 成STC序列之各TS封包係供作存在於再生裝置内之解碼器 之連續的解碼處理。 串流檔案之主TS、子TS係藉由對應於串流檔案之串流 資訊檔案内之剪輯資訊,作為1個“AV串流之碎片,,,亦即作 為“AV剪輯”而管理。 又,儲存於事流檔案之封包串具備歐洲數位傳播規格 所規定的封包管理資訊(PCR、PMT、PAT),作為用以管理· 控制複數類別之PES串流之資訊。 PCR(Program_Clock_Reference:節目時鐘參考)係為了 取得ATS之時間軸即ATC(Arrival Time Clock :到達時間時 鐘)與PTS . DTS之時間軸即STC(System Time Clock :系統 時間時鐘)之同步,而具有與該PCR封包被傳送至解碼器之 ATS相對應之STC時間之資訊。 PMT(Program_map_table :節目對應表)具有串流檔案 中所含的影像•聲音•圖形等之各串流之PID、及與各pID 相對應之串流之屬性資訊,或具有關於TS之各種目錄。於 目錄中,包括指示許可•不許可複製串流檔案之複製控制 資訊等。 PAT(Program Association Table :節目關聯表)係表示ts 中所利用的PMT之PID為何,以PAT本身之PID排列來登錄。 38 201123841 該等PCR、PMT、PAT係於歐洲數位傳播規格中,具有 規定一個傳播節目(Program)之部分TS的作用,再生裝置能 夠以在歐洲數位傳播規格中,處理構成一個傳播節目之部 分TS之方式’將TS供作由解碼器所進行的處理。此係意圖 達成歐洲數位傳播裝置之終端裝置與記錄媒體再生裝置之 相容性。TS中,稱為多路徑之主軸者稱為‘‘主ts”。又,成 為子路徑之主軸者稱為“子TS”。 第14(b)圖係表示主TS之内部構成,同圖⑷係表示子TS 之内部構成。如同圖(b)所示,主TS包含:1個基礎視圖視 訊串流、32個基礎視圖PG串流、32個基礎視圖IG串流及32 個音訊串流。如同圖(c)所示,子TS包含:1個相依視圖視 訊串流、32個相依視圖PG串流及32個相依視圖IG串流。 接著,說明關於TS之内部構成。 第15圖係更詳細表示視訊串流如何儲存於PES封包 串。本圖(a)之第1層係表示視訊串流之視訊圖幀串。第2層 係表示PES封包串。第3層係表示藉由轉換該等PES封包而 獲得之TS封包串。如本圖之箭頭yyl、yy2、yy3、yy4所示, 視訊串流之複數個視訊呈現單元即I圖片、B圖片、P圖片係 依每圖片被分割,並儲存於PES封包之承載區。各PES封包 具有PES標頭,於PES標頭,儲存有圖片之顯示時刻即 PTS(Presentation Time-Stamp:呈現時間戳記)或圖片之解碼 時刻即DTS(Decoding Time-Stamp :解碼時間戳記)。 <TS封包串〉 第15(b)圖係表示TS封包的形式。第1層係表示TS封包 39 201123841 串’第2層係表示來源封包串。 如第1層所示,ts封包係分成具有識別串流之PID等資 訊之4位元組之「TS標頭」、及儲存資料之184位元組之rTS 承載區」之固定長度的封包,前述所說明的PES封包係被分 割而儲存於TS承載區。 若依據第2層,在對TS封包賦予4位元組之τρ額外標 頭,轉換為192位元組之來源封包的狀態下構成ts。於TP 額外標頭記載有ATS(到達時間戳記)等資訊。ATS係表示該 TS封包對PID濾波器之傳送開始時刻。於TS,如第3層所示 排著來源封包,從TS開頭遞增的號碼稱為SPN(來源封包號 碼)。 <TS之多工〉 第16圖係模式性地表不主TS如何受到多工之圖。首 先,分別將左視圖視訊串流及音訊串流(第1層)轉換為PES 封包串(第2層)、來源封包串(第3層)。同樣分別將左視圖PG 串流及左視圖互動圖形(第7層)轉換為PES封包串(第6層), 並進一步轉換為來源封包串(第5層)。依其ATS的順序排列 如此所獲得之構成視訊、音訊、圖形之來源封包。此係由 於來源封包應按照其ATS而載入於讀緩衝器《如此按照ATS 排列來源封包,即可獲得主TS。 .受到多工而成為TS之基本串流 該等受到多工而成為TS之基本串流(ES)包括視訊串 流、音訊串流、呈現圖形串流、互動圖形串流。 •視訊串流 40 201123841 作為基礎視圖之視訊串流係構成子母畫面應用程式之 主要視訊串流。除了該主要視訊串流以外,子母晝面應用 程式還由次要視訊串流所構成。主要視訊串流係指在子母 晝面應用程式中,由作為母晝面之圖片資料所構成的視訊 串流。相對地,次要視訊串流係指在子母畫面應用程式中, 作為子晝面而由嵌入於母畫面的一部分之圖片資料所構成 的視訊串流。 構成主要視訊串流之圖片貧料、與構成次要視訊串流 之圖片資料,係於解碼後儲存於個別的截面記憶體。於儲 存構成次要視訊串流之圖片資料之截面記憶體之前段,存 在有進行構成次要視訊串流之圖片資料之縮放變更及顯示 座標之定位之構成要素(Scalling&Positioning:縮放&定位)。 •音訊串流 音訊串流有主要音訊串流、次要音訊串流2種。主要音 訊串流係於進行混音再生時,應成為主聲音之音訊串流, 次要音訊串流係於進行混音再生時,應成為副聲音之音訊 串流。次要音訊申流存在有為了該混音之降頻用之資訊、 增益控制用之資訊。 •呈現圖形串流(PG串流) P G串流可藉由於解碼時採用管線而實現與影像縝密的 同步,其為適合字幕顯示之圖形串流,包括2DPG串流及立 體視覺PG串流2個種類。立體視覺PG串流包括左視圖PG串 流及右視圖PG串流之二種串流。左視圖PG串流及右視圖PG 串流中’由基礎視圖指示Is所指定的串流係成為基礎視圖 41 201123841 PG串流,未由基礎視圖指示器所指定的串流係成為相依視 圖PG串流。 除了 2DPG串流以外,設置立體視覺PG串流係由於須使 得採2D所顯示從正面觀看的字幕文字、以3D—LR模式顯示 為左眼用之圖形、與顯示為右眼用之字幕文字不同所致。 因此,顯示1個採2D所顯示從正面觀看的字幕文字、於 3D-LR模式用顯示合計2個左視圖PG串流、右視圖pg串 流。同樣地,3D-深度模式的情況下’再生從正面觀看的影 像及表示深度資訊之灰階串流。2D+偏移(〇ffset)(2D相容串 流)與3D-LR串流不得使其混合。 2 D P G串流最多可定義3 2個,基礎視圖P G串流最多可定 義32個,相依視圖PG串流亦最大可定義32個。對該等PG串 流分別賦予各自的封包識別符,向多工分離部指示應再生 之封包識別符,藉此可將該等PG串流中所需要的串流供作 再生。 左視圖PG串流、右視圖PG串流係預先令語言屬性相互 一致,即使使用者切換顯示方式,仍會顯示相同内容的字 幕。作為前提係2D字幕與3D字幕須丨對丨地對應,並設置2D 所獨有的字幕及3D所獨有的字幕。此係為了防止切換時之 使用者混淆。藉由如此而以1個串流號碼,選擇對應於2D/3D 個別之顯不模式之串流。此情況下,丨個串流號碼時,語言 屬性等係相同,2D與LR之字幕内容相同。 藉由利用官線實現解碼動作,以實現與動態圖像縝密 的同步’ gUbPG串流的用途不限定於諸如字幕的文字再 42 201123841 生。顯示電影作品的代言角色,使其與動態圖像同步並同 時令其動作等,若是需要縝密同步之圖形再生,均可採用 作為利用PG串流之再生對象。 雖未受到多工而成為串流檔案,表現字幕的串流除了 PG串流外,還包括文本字幕(textST)串流。文本ST串流係 以角色碼表現字幕内容的串流。 PG串流、文本字幕串流不區別該等的種類而為相同的 串流類別,該等PG串流及文本字幕串流登錄於相同的串流 登錄串。然後,執行串流選擇的過程時,按照串流登錄串 之串流登錄的順位,決定應再生之PG串流或文本字幕串 流。PG-流、文本字幕串流不區別串流種類而供作_流選 擇的過程,因此將該等PG串流及文本字幕串流視為1個串流 類別,亦即視為所謂“PG_文本字幕串流(有時簡略稱為字幕 串流)’’。 2D用之PG_文本字幕串流係於1截面+偏移模式下再 生。於以下說明中,將20卩0_文本字幕串流說明作為1截面 +偏移卩0_文本字幕串流。 •互動圖形(IG)串流 IG串流係藉由具備對話操作之資訊,而可伴隨於視訊 串流之再生進行而顯示選單,或按照使用者操作顯示彈出 式選單之圖形串流。 IG串流亦與PG串流相同,包括2DIG串流及立體視覺IG 串流之2個種類。立體視覺IG串流包括左視圖IG串流及右視 圖IG串流之二種串流。左視圖IG串流及右視圖IG串流中, 43 201123841 由基礎視圖指示器所指定的串流係成為基礎視圖IG串流, 未由基礎視圖指示器所指定的串流係成為相依視圖IG串 流。2DIG串流最多可定義32個,基礎視圖IG串流最多可定 義32個,相依視圖ig串流亦最大可定義32個。對該等IG串 流分別賦予各自的封包識別符,向多工分離部指示應再生 之封包識別符,藉此可將該等IG串流中所需要的串流供作 再生。 IG串流之控制資訊(對話控制區段)具有規定使用者介 面模型之資訊(User一interface一model),編輯者藉由設定該使 用者介面模型資訊,可指定隨著視訊串流之再生進行來顯 不選單(稱為始終開啟(Always 〇n))、或按照使用者操作來 顯示彈出式選單(彈出式選單開啟)之任一者。 叫流具有對話操作資訊的意義如下。〗ava(註冊商標) 虛擬機㈣應來自應_式的要求,向再生㈣之主體I 再生控制引擎指示開始播放串列再生時,:ava虛擬機器係 向再生控制引擎命令再生後,將意在已開始播放•列再生 之回應送回應用程式。總言之,由再生控制引擎繼續再生 播放串列之期間’ Iava虛擬機器不會等待執行結束。此係 由於Java虛擬機H係所謂事件轉型之動作主體,即便於 再生控制引擎進行播放串列再生之顧仍可進行動作。 另,於HDMv模式下,指令解譯器向再生控制弓I擎命 令播放_列再生時’顺放Φ列結束為止彡貞料該播放串 列再生之執行結束《•由再生控制引擎繼續再生之期間,指 •7執行。卩無法執行對話性處理。圖形解碼器取代該指令解 44 201123841 澤窃而進行對話性動作。為 你上 使圖形解碼器進行對話性動 作,於IG串流中,嵌入規定利 控制資訊。 用按紐-件之對話性操作之 •各串流類別中所容許的顯示模式
容許卿示模式之何個模式係料流類職不同。於 主要視訊串流之3D顯示模式下,容許b_d呈現模式、B-B 呈現模式之2種再生模式。於主要視”流中,僅於彈出式 選單開啟的情況下容許B-B呈現模式。於B—D呈現模式下再 生時之主要視tfl申流之M,稱為“立體視覺b—d再生類 型”。於B-B呈現模式下再生時之主要視訊串流之類型,稱 為立體視覺B-B再生類型。 於PG串流之3D顯示模式下,容許B_B呈現模式、!截 面+偏移(lplane+Offset)模式、1截面 + 零偏移(lplane+Zer〇 Offset)模式之3種再生模式。於pg串流中,僅於彈出式選單 開啟的情況下容許1截面+零偏移模式。於B_D呈現模式下 再生時之PG串流之類型,稱為“立體視覺再生類型,’。於i 截面+偏移模式下再生時之P G串流、P G一文本字幕串流之類 型,稱為1截面+偏移類型。於1截面+零偏移模式下再生時 之PG串流、PG_文本字幕串流之類架,稱為1截面+零偏移 類型。 於文本字幕串流之3D顯示模式下’容許1截面+偏移模 式、1截面+零偏移之2種再生模式。於文本字幕串流中,僅 於彈出式選單開啟的情況下容許1截面+零偏移模式。 於IG串流之3D顯示模式下’容許B-D呈現模式、1截面 45 201123841 +偏移模式、1截面+零偏移模式之3種再生模式。於犯模式 下’僅於彈出式選單開啟的情況下容許丨截面+零偏移模 式。於以下說明中,只要未特別說明,於3D再生模式執行 時,均無法使用子母畫面。此係由於子母畫面及3D再生模 式均需要2個用以儲存非壓縮之圖片資料之視訊截面。又, 只要未特別說明,於3D再生模式下亦均無法使用聲音混八。 接下來’說明關於主TS及子TS之内部構成。第17圖係 表示主TS及子TS之内部構成。 同圖(a)係表示主TS之内部構成。主TS係由以下來源封 包所構成。 具有0x0100之封包ID之來源封包係構成節目對應表 (Program_Map_Table),具有0x1001之封包ID之TS封包係構 成PCR。 具有0x1011之封包ID之來源封包串係構成主要視訊串 流。 從具有0x1200至0xl21F之封包ID之來源封包串,係構 成32個2DPG串流。 從具有0x1400至0xl41F之封包ID之來源封包串’係構 成32個2DIG串流。 從具有0x1100之封包識別符之來源封包串至具有 Ox 111F之封包識別符之來源封包串’係構成主要音訊串流。 藉由向解多工部,指示該等來源封包之封包識別符, 可將受到多工而成為主TS之複數ES中分離出所需要部 分,並提供給解碼器。 46 201123841 同圖(b)係表示子ts之内部構成。子TS係由以下來源封 包所構成。 具有0x1012之封包識別符之來源封包串係構成相依視 圖視訊串流。 從具有0x1220之封包識別符之來源封包串至具有 0xl23F之封包ID之來源封包串,係構成32個基礎視圖pG串 流0 從具有Ox 1240之封包識別符之來源封包串至具有 0xl25F之封包識別符之來源封包串,係構成32個相依視圖 PG串流。 從具有0x1420之封包識別符之來源封包串至具有 0xl43F之封包ID之來源封包串,係構成32個基礎視圖沁串 流。 從具有Ox 1440之封包識別符之來源封包串至具有 0xl45F之封包識別符之來源封包串,係構成32個相依視圖 IG串流。 以上係關於串流檔案的說明。接下來,說明關於播放 串列資訊的詳細。 為了定義如上述之多路徑而具有如第18圖之内部構 成。本圖係表示播放串列資訊之内部構成。如同圖(a)所示, 播放串列資訊包含:「主路徑資訊」、「子路徑資訊」、「播放 串列標記資訊」及「延伸資料」。以下說明該等構成要素。 1)主路徑資訊係由1個以上之主體再生區間資訊所構 成。第18(b)圖係表示主路徑資訊及子路徑資訊之内部構成 47 201123841 之圖,如本圖所示,主路徑資訊係由丨個以上之主體再生區 間資訊所構成。子路徑資訊係由[個以上之從屬再生區間資 訊所構成》 主體再生區間資訊稱為播放項目資訊,係藉由定義Ts 之再生時間軸中,1個以上之作為進入時間(111—Time)的時點 與作為離開時間(Out一Time)的時點之組配,以定義邏輯上 之再生區間。於再生裝置包含播放項目號碼暫存器,係儲 存現播放項目之號碼者,複數播放串列資訊中,儲存於該 播放項目號碼暫存器者係成為現在的再生對象。 第18(c)圖係表示播放項目資訊之内部構成。如本圖所 不,其包含:「串流參考資訊」'「進入時間離開時間資訊」、 「連接狀態資訊」及「基本串流選擇表」。 串流參考資訊包含:「剪輯資訊檔案名資訊 (clip_information_file_name)」’係表示將構成播放項目之傳 輸串流’作為“AV剪輯,,管理之剪輯資訊檔案者;「剪輯蝙碼 方式識別符(Chp_c〇dec_indentifier)」,係表示該TS之編碼方 式者’及STC識別符參考(STC_ID_reference)」,係表示於 該ts之stc序列中’設定有進入時間及離開時間之STC序列 為何序列者。 再生區間之播放項目具有播放項目資訊-剪輯資 訊-AV剪輯之階層構造,關於AV剪輯及剪輯資訊之組配與 播放項目資訊之比率,係設為丨對多的關係,可從複數個播 放項目資訊多重參考丨個^剪輯。故,採用為了某標題而 做成的AV剪輯作為製片庫(banlc fUm),從複數個播放項目 48 201123841 資訊參考之,藉此可效率良好地做成電影作品的變化版(再 者’製片庫係《業界用語,即在複數個場景反覆使用之 影像内容;)。 作為製片庫之A1輯若受到許多播放項目f訊參考 時’會出現就受到參考的各播放項目資訊,令製片庫中應 再生之區間變化的要求。為達成就受到參考的各播放項目 資訊’令製片庫應再生之區間變化之目的,於播放項目資 訊中存在上述進人時間、_時間,錢可將串流再生時 間軸之任意時間作為再生區間之開始點、結束點來使用。 又,作為製片庫之AV剪輯若受到許多播放項目資訊參 考時,會出現就受到參考的各播放項目資訊,令所使用的 聲音或字幕、選單變化的要求。如此,為達成就受到參考 的各播放項目資訊,令所使用的聲音或字幕、選單變化之 目的,於播放項目資訊中存在上述串流選擇表。若使用該 串流選擇表,於受到多而成為被作為主路徑之播放項目 資訊所參考的A讀輯之基本串流、於受到多I而成為被作 為子路徑之子播放項目資訊所參考的八¥剪輯之基本串流 中,僅許可再生對於製片庫之引用對象而言最佳之基本串 流。 以上係關於播放項目資訊的說明。 2)從屬再生區間資訊稱為子路徑資訊,由複數個子播 放項目·貝讯所構成。第18(d)圖係表示子播放項目之内部構 成。如本圖所示,子播放項目資訊係藉由於STe序列之時 間軸,規定進入時間與離開時間之組配,以定義構成子路 49 201123841 徑之再生區間之資訊,其包含:「串流參考資訊」、「進入時 間離開時間資訊」、「同步播放項目參考」及「同步開始時 刻資訊」。 『串流參考資訊』係與播放項目資訊同樣包含:『剪輯 資訊檔案名資訊』、『剪輯編碼方式識別符』及『STC識別 符參考』。 『進入時間離開時間資訊(SubPlayltem—In_Time、 SubPlayItem_〇ut Time)』係表示STC序列時間軸之子播放 項目之起點、與STC序列時間軸上之子播放項目之終點。 「同步播放項目參考(Sync_PlayItem_Id)係於播放項目 中’一對一地指定本子播放項目所應同步者之資訊。子播 放項目進入時間存在於由該同步播放項目參考符所指定的 播放項目之再生時間軸上。 「同步開始時刻資訊(以11(:_81抓_?丁8_(^_]:>^以〇1)」 係表示於同步播放項目參考符所指定的播放項目之STC序 列之時間軸中,由子播放項目進人時間所指定的子播放項 目之起點被映射到何時點。 3)播放串列標記資訊係定義再生區間固有的標記點之 前述屬性資訊係表示藉 資訊,其包含:時間戳記,係、表邱記點位於何處者;及 屬性資訊,係表示標記點之屬性者; 標記點為鏈結點亦或分錄標兮己 鏈結點係可藉由鏈結指令 藉由播放串列標記資訊所定義的 行章節跨越操作時, 。日7進行鏈結’而在由使用者進 不成為選擇對象之標記點。 50 201123841 分錄點係可藉由鏈結指令進行鏈結,且在由使用者進 行章節跨越操作時,成為選擇對象之標記點。 嵌入於邮流之按紐資訊内之鏈結指令,係以經由播 放串列標記資訊之間接參考的形式,來指定提示(⑽位置。 〈基本串流選擇表(sTreamNumber_table)> 前述基本事流選擇表係就複數串列類別,逐一規定構 成播放串狀複數_放項目巾,包含該基林流選擇表 之播放項目成為現播放項目時,許可受到多I而成為被多 路徑之主路徑所參相AV剪l及受到多卫而成 多路徑之子路徑所參考的AV剪輯之ES中之何者的再生之 表。在此之串流類別係指子母畫面之主要視訊争流、子母 畫面之次要視訊串流、聲音混合之主要音訊串流、聲音混 合之次要音訊争流、PG_文本字幕串流、互動圖形_流等類 別’基本串流選擇表可就該等串流類別,逐一登錄應許可 再生之φ流。具體而言,基本_流選擇表係由串流登錄之 排列所構成。在此,串流登錄係於基本串流選擇表所歸屬 的播放項目成為現播放項目時,將應許可再生之ES為何種 串流與該串流號碼建立對應,串流登錄係成為對邏輯性串 流號碼,將串流分錄及串流屬性之組合建立對應之資料構 造。 串流登錄之串流號碼係以諸如1、2、3之整數值來表 現’串流號碼之最大數為相對應之串流類別之_流個數。 於再生裝置’就該串流類別各存在有串流號碼暫存 器’由儲存於此處之串流號碼所指示的ES成為現在再生對 51 201123841 象之ES,亦即成為現串流。 於》亥串流分錄内,描述有應再生之£§之識別符。由於 在串流分錄内’可㈣應再生之烈之封包識別符,因此於 再生裝置之串流號碼暫存器料串流登錄之串流號碼,根
據串,登錄之串流分_之封包識別符,於再生裝置之PID 慮波益,令再生裝置執行封包H藉由如此,於基本串 流選擇表許可再生之取卿包輸出至解碼器, 再生。 基本串流選擇表之該等串流登錄係按照串流號碼的順 序排列’根據串流號碼的順序之串流登錄的順位係於存在 有複數個符合“再线置可再生,,、“_流之語言屬性盘再生 裝置之語言設1致”條件的串流時,按照串流登錄串之串 流號碼的順位來決定選擇對象之_流。 藉由如此 ①承不選擇表之串流登錄中,存在$ 再生裝置無法再生之串流時’該串流被從再生剔除,又 存在複數個符合“再生裝置可再生,,、“$流之語言屬性與4 生裝置之語言設定-致,,條件的串流時,編輯者可向再^ 置傳達優先選擇其等中之何者之方針。 < 判斷是否存在符合“再生裝置可再生,,、“串流之語言」 性與再生裝置之語言設定一致”條件的串流,或選擇二 “再生裝置可再生”、“技之語言屬性與再生裝置之語t 定-致’’條件的串流中之何者之選擇程序,係_串_ 手續。串流選擇手續係、於現播放項目㈣___ 或由使用者要求切換串流時執行。 52 201123841 現播放項目切換為新播放項目等再生裂置產生狀態變 ^夺’進行如上述之判斷或選擇,於再生裝置之串流號碼 暫存器設定串流號碼之-連Φ程序,稱為“狀態變化時應執 仃之手續”。就㈣流類別存在有串錢邱,因此上 述手續係依各串流類別而執行。 由使用者進行_流切換要求時,進行如上述之判斷或 選擇’於再生裝置之串錢碼暫存器設以流號碼之一連 串程序,稱為“被要求狀態變化時之手續,,。 已裝載BD-RQM時’事切串流號碼暫存器設定為串 流登錄串之初始值之程序稱為“初始化,,。 基本串流選擇表之串流登錄串係對於藉由子播放項目 身訊所指定的串流、及藉由播放項目資訊所指定的串流, —概賦予同樣的優先順序,因此即便是未與視訊串流受到 多工之串流,若藉由子播放項目資訊指定,仍成為選擇應 與視訊串流同步再生之串流時之選擇對象。 然後’再生裝置可再生以子播放項目資訊所指定的串 流’且以子播放項目資訊所指定的串流之優先順序高於與 視訊串流受到多工之圖形串流之優先順序時,以子播放項 目資訊所指定的串流可取代與視訊串流受到多工之串流而 供作再生。 第19圖係表示基本串流選擇表之一例。同圖(a)係表示 於串流類別存在有主要視訊串流、次要視訊串流、PG串流、 IG串流、次要視訊串流、次要音訊串流等類別時’設於基 本串流選擇表之複數個串流登錄串。同圖(b)係表示係表示 53 201123841 康广串^選擇表’從主TS、子TS分離出何種烈。同圖 左側表示主TS4TS,正中央表示基本“ 工部。右财示«縣技選料所分 =訊•流,流,流、次要視訊:二: 接下來,說明關於延伸資料的詳細。 播放串列構成子母畫面應用程式時,子母畫面資料須 儲存於播放串列擋案之延伸㈣之資料塊1放串列資訊 參考MVC視訊串流時’延伸串流選擇表須儲存於播放串列 資訊檔案之延伸資料中之資料塊。 播放申列資訊參考碟片上之Mvc視訊串流、或立體視 覺K5串流再生選單中之MVC視訊串流時,子路徑資訊之延 伸資訊(子路徑塊延伸)須儲存於播放串列資訊槽案之延伸 資料之資料塊。 播放串列資訊之延伸資料之其他目的則受保留。 2D再生裝置在遭遇到播放串列檔案之延伸資料時須 忽視未知的延伸資料。 〈延伸奉流選擇表(STreamNumber_table_Stere〇Sc〇pic(ss))> 前述延伸串流選擇表係僅於立體視覺再生模式下,與 串流選擇表一同使用的串流選擇表,於播放項目再生或與 其相關聯之子路徑再生時,定義可選擇的ES。 前述延伸串流選擇表係表示僅於立體視覺再生模式 下,應許可再生之ES,其包含串流登錄串。串流登錄串之 各個串流登錄資訊包含:串流號碼、對應於該串流號碼之 54 201123841 串流分錄'及串流屬性。延伸事流選擇表係意味立體視覺 再生模式固有的延伸,因此於各播放項目資訊,延伸串流 選擇表(STN_table_SS)被建立關聯之播放串列稱為“3D播 放串列’’。 延伸串流選擇表之串流分錄係於再生裝置設定為立體 視覺再生模式的情況下,相對應之串流號碼設定於再生裝 置之串流號碼暫存器時,表示再生裝置應用於解多工之封 包識別符。在此,與基本串流選擇表之差異點在於,延伸 串流選擇表之串流登錄串不成為串流選擇手續的對象。總 言之,基本争流選擇表之串流登錄串之串流登錄資訊解釋 作各個ES之優先順序,某一串流登錄資訊内之串流號碼寫 入於串流號碼暫存器。然而,延伸串流選擇表之串流登錄 串不成為串流選擇手續的對象,延伸串流選擇表之串流登 錄資訊係於某一串流號碼儲存於串流號碼暫存器時,僅用 於取出對應於該串流號碼之串流分錄及串流屬性的目的。 當再生模式從2D再生模式切換為3D再生模式時,作為 對象之串流選擇表從基本串流選擇表切換為延伸串流選擇 表’因此若執行帛流選擇手續,難法__錢碼之同 一性,甚而可能喪失語言屬性之同一性。 從2D再生模式往3D再生模式切換時,為了維持以語言 屬性為首之串流屬性之同-性,因此亦將延伸串流選擇表 的用途保留有上述用途。 前述延伸串流選擇表係由相依視圖視訊串流之串流登 錄串、PG串流之串流登錄串、IG串流之串流登錄$所構成= 55 201123841 延伸串流選擇表之串流登錄串係結合於串流選擇表令 相同串列類別之串流登錄串。該結合係藉由於串流選擇表 之主要視訊串流之串流登錄串,結合延伸串流選擇表之相 依視圖視訊串流之串流登錄串,於串流選擇表之pG串流之 串流登錄串’結合延伸串流選擇表之扣串流之串流登錄 串於1G串流之串流登錄串,結合延伸串流選擇表之IG串 流之串流登錄串而進行。 若進行上述結合,則對於結合後之串流選擇表中之基 本串流選擇表之串流登錄串,進行上述手續。 第20圖係表示延伸串流選擇表之内部構成。延伸串流 選擇表係由延伸串流選擇表之全體長(丨ength)、彈出期間固 定偏移(Fixed_offset_during_Popup)、對應於各播放項目各 自之串流類別之串流登錄串所構成。 在此,存在有播放項目#1〜個播放項目時,對 應於播放項目#1〜#]\1之各者之串流登錄串設於延伸串流選 擇表。對應於各播放項目之串流登錄_為相依視圖串流登 錄串、PG串流登錄串、IG串流登錄串。 『Fixed_offset_during_Popup』為彈出期間固定偏移, IG串流之彈出式選單設定為開啟時,控制視訊或PG_文本 字幕串流之再生類型。於IG串流之使用者介面模型 (user_interface_model)欄位設定為開啟,亦即於彈出式選單 之使用者介面設定為開啟時,該『彈出期間固定偏移』欄 位設定為開啟。於IG串流之使用者介面模型欄位設定為關 閉,亦即設定為始終開啟之使用者介面時,其設定為關閉。 56 201123841 人彈出期間固定偏移設定為“〇”,亦即於IG串流之使用者 "面中彈出式選單設定為關閉時,視訊串流成為b-D呈 見模式纟體視覺?<3串流成為立體視覺再生類型。於丄裁面 +偏移核式之再生時,PG_文本字幕串流成為丨截面+偏移模 式。 彈出期間固定偏移設定為“1”,亦即於IG串流之彈出式 選單:為開啟時,視訊串流成為呈現模式。立體視 覺PG串流成⑸截面+偏移模式,丄截面+偏移用之pG串流係 作為1截面+零偏移再生類型而再生。 於1截面+偏移模式下,PG—文本字幕串流成為丨截面+ 零偏移模式。 偏移序歹Η固數為訊(圖中〇f_〇ffset-SeqUence)』 係表示相依視圖串流之偏移序列個數。 延伸串流選擇表中之該值係與相依視圖串流所含之偏 移序列的個數相同。 第21圖係表示延伸串流選擇表之串流登錄串。 第21(a)圖係表示相依視圖視訊串流之串流登錄串之内 部構成。相依視圖串流之串流登錄串係由V(XM@SS相依視 圖塊(SS—depent_view_block)所構成。在此,ν(χ)係於播放 項目資§fl#x之基本串流選擇表中,被許可再生之主要視訊 串流之個數。圖中之拉出線係將相依視圖串流之串流登錄 串之内部構成予以特寫表示。如拉出線所示,SS相依視圖 塊係由串流號碼、串流分錄、串流屬性及偏移序列數所構 成。 57 201123841 串流分錄包含·子路徑識別符參考 (ref_to一Subpath一id) ’係指定相依視圖視訊串流之再生路徑 所歸屬的子路徑者;串流檔案參考 (ref一to_SubClip一entry—id),係指定儲存有相依視圖視訊串 流之串流稽案者’及遠串流植案之相依視圖視訊串流之封 包識別符(ref—to—stream_PID—subclip)。 『串流屬性』包含相依視圖視訊争流之語言屬性。 『偏移序列數』係表示存在於相依視圖視訊串流内之 偏移的個數。 於第21 (a)圖中,相依視圖視訊串流之串流登錄串在資 料構造上,係設置關於複數個串流登錄串之串流登錄資 訊。一般而言,由於基礎視圖視訊串流的個數為丨個,因此 相依視圖視訊串流中之串流登錄資訊的個數亦為唯一丨個。 第21 (b)係表示PG串流之串流登錄串之内部構成。pG 串流之串流登錄串係由P(x)個串流登錄資訊所構成。在此, P(x)係於播放項目資§fL#x之基本串流選擇表中,被許可再生 之PG串流之個數。 圖中之拉出線係將串流登錄串共通之内部構成予以特 寫表示。 『PGtext_offset_sequence」d_ref』係PG文本字幕串流 偏移序列參考資訊’指示關於I截面+偏移模式之PG_文本 字幕串流之偏移序列。 偏移元資料係由相依視圖視訊串流之存取單元所供 給。再生裝置須令藉由該攔位所提供的偏移,適用於1截面 58 201123841 +偏移模式類型之呈現圖形(PG)截面。 該攔位為不定值(FF)時,再生裝置不對PG申流截面記 憶體適用該偏移。 『is_SS_PG』係指示PG串流之基礎視圖IG之串流分 錄、相依視圖IG之串流分錄、串流屬性之有效性及存在之 立體視覺呈現圖形存在與否旗標。立體視覺PG串流之構造 不存在時,該欄位須設為0。立體視覺PG串流之構造存在 時,該欄位須設為1。 『基礎視圖串流分錄(stream_entry_for_base_view)』包 含:子路徑識別符參考化〇〇_8\%>31:11叫,係指定基礎視 圖PG串流之再生路徑所歸屬的子路徑者;串流檔案參考 (ref_to_SubClip_entry」d),係指定儲存有基礎視圖PG串流 之串流檔案者;及該串流檔案之基礎視圖PG串流之封包識 別符(ref_to_stream_PID_subclip)。 『相依視圖串流分錄(stream_entry_f〇r_depentdent _view)』包含:子路徑識別符參考(ref_to_Subpath_id),係 指定相依視圖PG串流之再生路徑所歸屬的子路徑者;串流 檔案參考(ref_to_subClip_entry_id),係指定儲存有相依視圖 PG串流之串流檔案者,及該串流權案之基礎視圖串流之 封包識別符(ref—t0_stream一PID_subclip)。受到延伸串流選 擇表之串流登錄資訊中之相依視圖串流分錄所參考的串流 檔案,與受到基本串流選擇表之串流分錄所參考的串流檔 案不同時’須重新讀出儲存有相依視圖PG串流之串流檔案。 『串流屬性』包含基礎視圖PG串流及相依PG串流之語 59 201123841 言屬性。 『SS—PG—textST—offset—sequence_id一ref』係用以參考 PG_文本字幕串流用之偏移序列之參考資訊,其指示1>(3_文 本字幕串流用之偏移序列。再生裝置須將藉由該欄位所提 供的偏移適用於PG截面。 該欄位為不定值(FF)時,再生裝置不對pg串流截面記 憶體適用該偏移。 第21(c)圖係表示IG串流之串流登錄串之内部構成。π 串流之串流登錄串係由I(x)個串流登錄資訊所構成。在此, I(x)係於播放項目資訊#x之基本串流選擇表中,被許可再生 之IG串流之個數。圖中之拉出線係將串流登錄串共通之内 部構成予以特寫表示。 『IG_offset_sequence_id_ref』係互動圖形偏移序列參 考,其為1截面+偏移模式之IG串流之序列ID之參考。該值 係指示定義於偏移序列之偏移序列ID。如上述,偏移元資 料係由相依視圖視訊串流所供給。再生裝置須令藉由該棚 位所提供的偏移,適用於1截面+偏移模式類型之IG串流。 該欄位為不定值(FF)時,再生裝置不對互動圖形截面 適用該偏移。
『IG_Plane_offset_direction_during_BB_video』係 B-B 呈現模式下’彈出式選單之使用者介面,於再生IG串流的 期間,指示1截面+偏移模式之互動圖形(IG)截面之偏移方 向0 值“ 0 ”為前方設定,亦即截面記憶體存在於TV與收視者 60 201123841 之間,於左視圖期間,截面往右方移位,於右視圖期間, 截面往左方移位。 值=1為後方設定,亦即截面記憶體存在於Tv或螢幕背 後,左截面往左方移位,右截面往右方移位。 p IG—Plane_0ffset value_during—bb—vide〇』係指示於 B-B呈現模式下’由彈出式選單之使用者介面再生1(}串流 之期間,以像素單位指示1載面+偏移模式下之1〇}截面之偏 移值。 『is一SS_IG』係立體視覺呈現圖形存在與否旗標,指 示IG串流之基礎視圖ig之串流分錄、相依視圖1(3之串流分 錄、串流屬性之有效性及存在。立體視覺1(}串流之構造不 存在時,該攔位須設為被許可再生之1(}串流為立體視覺 IG串流時,該攔位須設為1。 『基礎視圖串流分錄(stream_entry_f〇r_base_view)』包 含.子路徑識別符參考(ref_to_Subpath_id),係指定基礎視 圖IG串流之再生路徑所歸屬的子路徑者;串流檔案參考 (ref_to_subClip_entry_id) ’係指定儲存有基礎視圖IG串流之 串流檔案者;及該串流檔案之基礎視圖IG串流之封包識別 符(ref_to_stream_PID_subclip) 〇 『相依視圖串流分錄(stream_entry一for depentdent _view)』包含:子路徑識別符參考(ref_to_Subpath_id),係 指定相依視圖IG串流之再生路徑所歸屬的子路徑者;串流 檔案參考(ref_to_subClip_entry_id),係指定儲存有相依視圖 IG串流之串流槽案者;及該串流檔案之基礎視圖ig串流之 61 201123841 封包識別符(ref_to一stream一PID_subclip)。受到延伸串流選 擇表之串流登錄資訊中之相依視圖串流分錄所參考的串流 檔案,與受到基本串流選擇表之串流分錄所參考的串流檔 案不同時,須重新讀出儲存有相依視圖ί G串流之串流檔案。 『串流屬性』包含基礎視圖IG串流及相依1(3串流之語 言屬性。 『SS_IG_offset_sequence_id_ref』係立體視覺類型之ig 串流用之偏移序列m之參考,其指示相依視圖視訊串流之 偏移元資料之偏移㈣。再线置須將藉由賴位所提供 的偏移適用於立體視覺類型之1(3截面。 該欄位為不定值㈣時,再生裝置不對IG亊流截面記 憶體適用該偏移。
•〜子举μ用之偏移序列之參考資訊、及IG 流用之偏移序狀參考資訊係對於串錢碼建立對應, 記載於串流登錄資訊,因此於狀g變化時或串流更新要 發生時,執行__擇手續,糾置狀語言設定相應 串流號碼串流號碼設定於串流號騎存器的情況下,藉 ,應於該新串流號碼之參考所指示的偏移序列,係從視 解鳴器供給至移位部。藉由如此,與再生裝置之語言設 =之最佳偏移序舰給歸料,因此可使得丨截面+ j式下之圖形之景深,絲與再生裝置之語言設定相> 之最佳景深。 說明關於延伸串流選擇表之限制。 立體視覺相依視圖塊之串产 甲叫分錄不得於播放串列變 62 201123841 化。 當立體視覺相依視圖塊之串流分錄之類型是由子路徑 所使用的ES類型(串流類型=2)時,子路徑仍參考及子剪輯 分錄ID參考(ref_t〇_SubdiP一entry—id)不於播放串列變化。 作為串流分錄、基礎視圖用之串流分錄、相依視圖用 之串流分錄之類型所容許的ES類型僅有以下兩種類型,即 由播放項目所使用的AV剪輯内之ES(串流類型=1)、由子路 徑所使用的AV剪輯内之ES(串流類型=2)。 立體視覺相依視圖塊之串流屬性之串流編碼方式設定 為“0x20” 。 第22圖係表示依據基本串流選擇表、延伸串流選擇 表,從主TS '子TS將何種ES解多工。 於本圖正中央表示解多工部,於其上側表示基本串流 選擇表與延伸串流選擇表之組配。於左側表示主TS、子 TS,右側表示受到解多工之基礎視圖視訊串流、相依視圖 視訊串流、基礎視圖PG串流。相依視圖PG串流、基礎視圖 IG串流、相依視圖IG串流、主要音訊串流。 第23圖係表示進行如第22圖之解多工時,如何參考基 本串流選擇表、延伸串流選擇表之串流登錄串。於本圖正 中央表示基本串流選擇表及延伸串流選擇表。 基本串流選擇表之左側係表示串流號碼暫存器,係於 再生裝置儲存現串流之串流號碼者。基本串流選擇表之右 側係表示再生裝置之語言設定。延伸串流選擇表之下側係 表示解多工部。箭頭hi係模式性地表示PG串流之語言設 63 201123841 定、與基本串流選擇表之PG牟流之串流登錄資訊χ之語言 屬性之一致。箭頭h2係模式性地表示pG串流對於串流號碼 暫存裔之串流號碼X之設定。 箭頭h3係模式性地表示IG串流之語言設定、與基本串 流選擇表之IG串流之串流登錄資訊γ之語言屬性一致。箭頭 h 4係模式性地表示對於ϊ G串流之串流號碼暫存器之串流號 碼Y的設定。 本圖之串流號碼的設定係象徵性表示因應對於基本串 流選擇表之串流選擇手續之結果,而決定供解多工之pG串 流、IG串流。 箭頭PD1係模式性地表示,在延伸串流選擇表内之ss 相依視圖塊之串流分錄所描述的封包識別符之輸出。藉由 。亥輸出進行解多工部之解多工,輸出相依視圖視訊串流。 箭頭PD2係模式性地表示延伸串流選擇表之pG串流之 串如·登錄資訊之串流分錄中,對應於串流號碼乂之_流分錄 之封包識別符。箭頭X1係表示箭頭PD1之封包識別符輸 出,與對於串流號碼暫存器之現串流號碼χ之設定連動。
箭頭PD3健式性絲料伸技表之犯串流之 串流登錄資訊之串流分錄中,對應於串流號碼γ之串流分錄 之封包識別符。箭頭Y1係表示箭頭咖之封包識別符輸 出’與對於串錢碼暫存器之現串錢敬之設定連動。 〃在此之連動係意味記載於延伸串流選擇表之封包識別 符之輪出,對於在基本串流選擇表之心ig串流之串流登 錄串所描述的串流號碼中,争流號碼χ、γ作為現pG、iG 64 201123841 串流號碼而設定於串流號碼暫存器乙事連動。 藉由該輸出進行解多工部之解多工,輸出PG4G串流。 第24圖係表示模式之串流號碼之分配變化。 縱欄係表示所稱視訊串流#1之φ流號碼、所稱音訊串 流#1、#2之串流號碼、所稱PG串流#1、#2之串流號碼。 僅由左側虛線外框所圍住的ES係僅於2D再生模式 下’成為解多工對象之ES。 僅由右側虛線外框所圍住的ES係僅於3D再生模式 下,成為解多工對象之ES。 由左側及右側虛線外框雙方所圍住的ES係於3D再生 模式下’成為解多工對象之ES » 若僅留意視訊串流#1之串流號碼,則由於2D視訊串流 係由左右雙方之虛線外框所圍住,因此可知於2d再生模式 及3D再生模式雙方成為再生對象。該2d視訊串流為左視圖 視sfl串流。然而’右視圖視訊串流僅由右側虛線外框所圍 住’因此可知僅於3D再生模式下再生。 右留意音sfl串流# 1、音訊串流#2之串流號碼,則由於 3讯串流係由左右雙方之虛線外框所圍住,因此可知於2D 再生模式及3D再生模式雙方成為再生對象。 若留意PG串流#1、PG串流#2之串流號碼,則由於2DPG 攀凉係由左側之虛線外框所圍住,因此可知僅於2D再生模 式成為再生對象。由於基礎視圖PG串流、相依視圖PG串流 僅由右側虛線外框所圍住,因此可知僅於3D再生模式下再 生。IG串流亦同。 65 201123841 根據以上’可知於3D再生模式下,於視訊串流之串流 類別中,相依視圖視訊串流被加入作為再生對象。 又,可知於3D再生模式下,於PG串流之串流類別中, 再生對象係從2DPG串流被置換為基礎視圖pG串流及相依 視圖PG串流。 前述延伸串流選擇表可藉由利用物件導向型編譯器語 言’進行如第19圖之描述以供編譯器用而做成。第25圖係 表示用以利用物件導向編譯器語言來描述延伸串流選擇表 之語法。 以播放項目id(PlayItem_id))作為控制變數之語句 「for」,係構成僅以播放項目的個數,重複彈出期間固定偏 移、相依視圖串流之串流登錄串、PG_文本字幕串流之串流 登錄串、IG串流之串流登錄串之描述的迴圈。 以主要視訊串流id(primasy_video_stream_id)作為控制 變數之語句「for」係定義相依視圖串流之串流登錄串;相 依視圖串流之串流登錄串係藉由僅以主要視訊串流分錄 數,描述SS相依視圖塊而定義’而前述SS相依視圖塊係由 串流分錄、串流屬性及偏移序列數所組成。 以PG文本ST串流id(PG_textST-Stream_id)作為控制變 數之語句「for」係定義卩〇_文本字幕串流之串流登錄串, 成為僅以PG文本ST串流數個之分錄數,重複PG文本偏移序 列id參考、is_SS __PG之描述的迴圈。存在於迴圈中以 is_SS_PG作為控制變數之語句「if」’係當is_SS_PG是lb時, 則定義基礎視圖串流分錄()、相依視圖串流分錄()、串流屬 66 201123841 性,依據該語句「if」’僅於is〜SS PG是lbd時,於串流登錄 串追加基礎視圖串流分錄()、相依視圖串流分錄()、串流屬 性。當is_SS—PG是Ob時,不追加基礎視圖串流分錄()、相依 視圖串流分錄()、宰流屬性。 以IG串流id(IG_stream」d)作為控制變數之語句「for」 係定義IG串流之串流登錄串,成為僅以IG串流分錄數,重 複IG偏移序列id參考、BB視訊期間ig截面偏移方向、BB視 訊期間IG截面偏移值、is_ss_jG之描述的迴圈。存在於迴 圈中以is一SS_IG作為控制變數之語句rif」,係當is_SS_IG 是lb時,則定義基礎視圖串流分錄()、相依視圖串流分錄 0、串流屬性,依據該語句「if」,僅於is_ss_IG是lbd時, 於串流登錄串追加基礎視圖串流分錄()、相依視圖串流分錄 ()、串流屬性。當is—SS—IG是〇b時,不追加基礎視圖串流分 錄0、相依視圖串流分錄()、串流屬性。 以上係關於記錄媒體的說明。接下來,說明再生裝置 的詳細。 第26圖係表示再生裝置之内部構成。如本圖所示,再 生裝置係由讀出部2〇1、記憶體2〇2、播放器號碼暫存器 203、解碼器204、解多工部2〇5、截面記憶體組2〇6、移位 、層合成部2〇8、收發部2〇9、再生控制部21〇、輪出 模式暫存器211及組態記憶體212所構成。本圖之内部構成 僅止於描述用以實施具備課題解決手段之再生裝置所必需 的最小限度之構成要素。關於更詳細之内部構成,則將說 明委由後段的實施形態。 67 201123841 讀出部2(Π係從記錄媒體, 之程式棺案、播放串列資訊 ,'物件 案。 串抓資5ί1檔案及串流檔 s己憶體肖存結合串流登錄串,係藉由姓 資訊所含之基本串流選擇表、與延伸串流選擇 每串流類別之播放器號满舶+ 于有 流之串流號碼之觀φ錢 “ =之PG㈣朗暫 5虎碼暫存器、及儲存音^ _ 器。 子曰ufln虎碼之音訊串流號石馬暫名 每串流類別之解碼器204係由視訊解碼器、PG解碼器’ 圯解碼器及音訊解碼器所構成。 解多工部2G5具備執行封包過瀘之piD攄波器,於讀出 自記錄媒體之複數個來源封包内之乃封包中,分離出藉由 讀於結合技登料之封包朗符所指示的ts封包,並 輸出至各解碼器。 戴面心IS體組2 G 6係由複數個截面記龍所構成。 該等截面記憶體係構成層模型,各個戴面記憶體之儲 存内容係供層合成用。 移位部207係執行像素座標的移位。 層合成部208係進行複數個截面記憶體之層合成。 連接a收發部2 G 9係在與家庭織线之其他㈣經由介面 夺、’左過相互s忍證相、談判相而轉移至資料傳送相, 進行資料傳送。 68 201123841 該談判相係掌握對方機器之能力(包含解碼能力、再生 能力、顯示頻率),事先設定於播放器設定暫存器,以決定 以後傳送用之傳送方式。經過該等相互認證相、談判相而 被進行層合成之圖片資料之一線份之非壓縮•明文形式之 像素資料,係按照顯示裝置之水平同步期間,以高傳輸率 傳輪至顯示裝置。另,顯示裝置之水平返驰期間及垂直返 馬也期間,對與再生裝置連接之其他裝置(不僅對顯示裝置, 亦包含放大器、揚聲器)’傳輸非壓縮•明文形式之音訊資 料。藉由如此,顯示裝置、放大器、揚聲器該類機器可收 取非壓縮.明文形式之圖片資料、非壓縮·明文形式之音 訊資料,可實現再生輸出。又,對方機器存在解碼能力時, 可進行視訊串流、音訊串流之通過(pass through)傳送。於 通過傳送,可將視訊串流、音訊串流維持在壓縮.加密形 式而傳送。 再生控制部210係控制讀出部2()1從記錄媒體,讀出來 ^錄媒^㈣、件、播物彳資訊、剪 貢訊及串流檔案,並且根據讀出自記_體之播放串列 Γ、剪财訊而執行再生控制。讀出串流_時可實現 來St即從串流檔案讀出相當於時間軸之任意時點之 輸出模式暫存器211係記憶再生模式。 組態記憶_記憶各截面記憶體之模式能力及現 模式之非揮發性記情體,+ — 由再生裝置之製造主體來設定其 。己憶内容。模式能力传矣_ . 表不晛訊截面、PG戴面、IG截面之 69 201123841 複數種截面§己憶體,是否可處理如上述之再生模式之各模 式。疋否可處理再生模式,係依據對應於截面記憶體之串 流類別為何,或用以處理該再生模式之硬體構成是否存在 於再生裝置而決定。 現模式係表示複數種截面記憶體之各者,設定為複數 種再生模式中之何者。 以上係關於再生裝置的說明。接下來,說明關於由本 貫施形態之再生裝置所進行的解多工處理的詳細。 第2 7圖係表示藉由結合串流登錄串輸出何種封包識別 符至解多工部。 同圖⑷係表示作為動作例之題材而利用之結合串流登 錄串。結合串流登錄串係由基本_流選擇表中之3個串流登 錄資訊、延伸串流選擇表中之3個串流登錄資訊所構成。基 本串流選擇表中之3個串流登錄資訊分別具有串流號碼 “1’’、“2”、“3”之串流號碼’ 3個串流登錄資訊之串流屬性具 有英文、曰文、中文之語言屬性。 延伸串流選擇表中之3個串流登錄資訊分別具有串流 唬碼1、2、3之串流號碼,3個串流登錄資訊之串流屬 性具有英文、日文、巾文之語n於基本串流選擇表 之串流登錄資訊與延伸φ流轉表之串流登錄資訊,其争 流分錄之封包識別符不同,延伸串流選擇表之串流登錄資 訊包含:B-D呈現模式用之基礎視圖阳串流用之封包識別 符及相依視圖PG串流用之封包識別符。 同圖⑻係表示對語言設定為中文,輸出模式設定為2〇 70 201123841 再生模式之再生裝置,供給該結合串流登錄串的情況下之 串流號碼之設定及封包識別符之輸出。 圖中附有al、a2、a3之箭頭係模式性地表示語言設定 之一致判斷、對串流號碼暫存器之串流號碼之設定、對解 多工部之封包識別符之輸出。 於手續中,於串流號碼=3之串流登錄資訊中,判斷再 生裝置側之語言設定與串流屬性一致,該串流號碼=3之串 流登錄資訊所含之串流號碼寫入於串流號碼暫存器。此 時,基本串流選擇表之串流分錄中之封包識別符輸出至解 多工部。藉由如此,由基本串流選擇表之串流號碼=3之串 流登錄資訊之串流分錄之封包識別符所特定出的TS封包, 係輸出至解碼器。 同圖(c)係表示對語言設定為中文,輸出模式設定為 B-D呈現模式之再生裝置,供給該結合串流登錄串的情況 下之串流號碼之設定及封包識別符之輸出。 圖中附有a4、a5、a6之箭頭係模式性地表示語言設定 之一致判斷、對串流號碼暫存器之串流號碼之設定、對解 多工部之封包識別符之輸出。 於手續中,於串流號碼=3之串流登錄資訊中,判斷再 生裝置側之語言設定與串流屬性一致,該串流號碼=3之串 流登錄資訊所含之串流號碼寫入於_流號碼暫存器。此 時,基本串流選擇表之串流分錄中之封包識別符輸出至解 多工部。藉由如此,由儲存於延伸串流選擇表之串流號碼 =3之串流登錄資訊之串流分錄之封包識別符的組配所特定 71 201123841 出2系統之TS封包,係輸出至解碼器。 第28圖係表示藉由結合串流登錄串輸出何種封包識別 符至解多工部。 同圖(a)係表示作為動作例之題材而利用之結合串流登 錄串。結合串流登錄串係由基本串流選擇表中之3個串流登 錄資訊、延伸串流選擇表中之3個串流登錄資訊所構成。基 本串流選擇表中之3個串流登錄資訊分別具有串流號碼 “1”、“2”、“3”之串流號碼,3個串流登錄資訊之串流屬性均 具有中文之語言屬性。 延伸串流選擇表中之3個串流登錄資訊分別具有串流 號碼“1”、“2”、“3”之串流號碼,3個串流登錄資訊之串流屬 性易具有中文之語言屬性。於基本串流選擇表之_流登錄 資訊與延伸串流選擇表之串流登錄資訊,其串流分錄之封 包識別符不同,延伸串流選擇表之串流登錄資訊包含:B-D 呈現模式用之基礎視圖PG串流用之封包識別符及相依視圖 PG串流用之封包識別符。 同圖(b)係表示對語言設定為中文,輸出模式設定為2D 再生模式之再生裝置,供給該結合串流登錄串的情況下之 串流號碼之設定及封包識別符之輸出。 圖中附有al、a2、a3之箭頭係模式性地表示語言設定 之一致判斷、串流號碼之設定、封包識別符之輸出。 於手續中,於串流號碼=3之串流登錄資訊中,判斷再 生裝置側之語言設定與串流屬性一致,該串流號碼=“1”係 寫入於串流號碼暫存器。此時,基本_流選擇表之串流分 72 201123841 錄中之封包識別符輸出至解多工部。藉由如此,由基本串 流選擇表之串流號碼“丨”之串流登錄資訊之串流分錄之封 包識別符所特定出的ts封包,係輸出至解碼器。 同圖(C)係表示對語言設定為中文,輸出模式設定為2D 再生模式之再生裝置,供給該結合串流登錄串的情況下之 串流號碼之設定及封包識別符之輸出。 圖中附有a4、a5、a6之箭頭係模式性地表示語言設定 之一致判斷、串流號碼之設定、封包識別符之輸出。 於手續中’於串流號碼=1之串流登錄資訊中,判斷再 生裝置側之語言設定與串流屬性一致,該串流號碼=1之串 流登錄資訊所含之串流號碼寫入於串流號碼暫存器。此 . 時,基本串流選擇表之串流分錄中之封包識別符輸出至解 _ 多工部。藉由如此,由儲存於延伸串流選擇表之串流號碼 ‘‘ 1 ’’之亊流登錄資訊之串流分錄之封包識別符的組配所特 定出2系統之TS封包,係輸出至解碼器。 第29圖係表示再生裝置設定為B_D呈現模式,且b d 能力存在時之封包識別符之參考及封包輸出。 結合串流登錄串與解多工部之間之箭頭,係表示妹人 串流登錄串之複數個串流登錄_中,何個串流分錄内' 包識別符受到參考。本圖中,可知基本串流選擇表内之封 礎視圖視訊串流登錄串之串流分錄内之封包識別符、^基 串流選擇表内之相依視圖串流登錄串之串流分錄^延伸 識別符、延伸串流選擇表内之%一文本字幕串流登錄2封包 流分錄内之封包識職、延伸串流選 、之串 串流登錄 73 201123841 串之串流分錄内之封包識別符係受到解多卫部參考。 解多工部與複數個解碼器之間之箭頭,係表示存在於 交插串流稽案之複數個來源封包中,何個Ts封包輸出至各 解碼器。如該箭頭’可知從解多工部往解碼器,構成基礎 視圖視。fl串"U^TS封包、構成相依視圖視訊串流之TS封 包、構成基礎視圖PG串流之Ts封包、構成相依視圖PG串流 之TS封包、構成基礎視圖1(}串流之TS封包、構成相依視圖 IG串流之TS封包係輸出至解碼器。 第30圖係表示再生裝置設定為1截面+偏移模式時之封 包識別符之參考及封包輸出。 結合串流登錄串與移位部之間之箭頭,係表示對應於 延伸串流選擇表之PG技之串流登錄串之偏移參考、及對 應於延伸串流選擇表之j G串流之串流登錄串之偏移參考, 在1截面+偏移模式下受到參考。 解多工部與複數個解碼器之間之箭頭,係表示存在於 交插率流檔案之複數個來源封包中,何個TS封包輸出至各 解馬益。如该箭頭’可知從解多工部往解碼器,構成基礎 2圖視叙Ts封包、構成PG_^TS封包、構成IG串 ^ ^構成音訊串流之TS封包係輸出至解碼器。 視戒解竭器與移位部之間之箭頭係表示根據如上述之 偏移參考’相依㈣視訊_叙偏移供給至針對PG串流之 移位部、針對叫叙移料。 ’ 第31圖係表示再生裝置設定為2〇呈現模式時之封包識 別符之參考及封包輸出。 74 201123841 結合串流登錄串與解多工部之間之箭頭,係表示结合 串流登㈣之複數個技登料巾,何個串流分錄内之封 包識別符受到參考。本圖中,可知基本串流選擇表内之基 礎視圖視訊串流登錄串之_流分_之封包朗符、基本 串流選擇表WPG—文本字幕串流登錄串之串流分錄内之 封包識別符、基本串流選擇表内之1(}串流登料之串流分 錄内之封包識別符係受到解多工部參考。 解多工部與複數個解碼器之間之箭頭,係表示存在於 串流標案之複數個來源封包中,何個TS封包輸出至各解碼 器。如該箭頭,可知從解多卫部往解碼器,構成基礎視圖 視訊串流之TS封包、構成PG_流$了8封包、構成IG串流之 TS封包、構成音訊串流之TS封包係輸出至解碼器。 第32圖係表不於再生裝置不存在B_D呈現模式之能力 時之封包識別符之參考及封包輸出。 結合串流登錄串與解多工部之間之箭頭,係表示結合 串流登錄串之複數個串流登錄串中,何個串流分錄内之封 包識別符受到參考。本圖中,可知基本串流選擇表内之基 礎視圖視訊串流登錄串之串流分錄内之封包識別符基本 率流選擇表内之PG_文本字幕串流登錄串之串流分錄内之 封包識別符、基本串流選擇表内之1(3串流登錄串之串流分 錄内之封包識別符係受到解多工部參考。 解多工部與複數個解碼器之間之箭頭,係表示存在於 交插串流檔案之複數個來源封包中,藉由基本串流選擇表 之串流登錄串之串流分錄所指示的TS封包是否輸出至各解 75 201123841 碼器。 以上的再生控制可藉由以物件導向型編譯器語言,描 述第3 3圖至第3 5圖之流程圖所示之處理程序,並令電腦執 行而實現。 第33圖係表示播放串列再生程序。本流程圖係構成一 迴圈,前述迴圈係於步驟S1,將現播放項目設定為丨之後, 重複步驟S2〜步顿S6的處理。於該迴圈,直到現播放項目 號碼成為最後號碼為止重複以下處理,即藉由串流選擇手 續來決定串流號碼(步驟S2),開啟儲存有對應於串流號碼之 ES之串流檔案,讀出來源封包串(步驟S3),指示所讀出的 來源封包串中之對應於,串號碼者之解多工(步驟S4),命令解 碼器,從播放項目之進入時間至離開時間、從子播放項目 之進入時間至離開時間,再生所讀出的來源封包(步驟S5) 的處理。在此,若非最後號碼(於步驟S6為「否」(No)),則 遞增現播放項目號碼,移到步驟S2。若為最後號碼,則結 束處理(於步驟S6為「是」(Yse))。 第34圖係表示串流選擇手續之處理程序。 於本流程圖,現播放項目資訊内之基本串流選擇表設 定為現基本串流選擇表(步驟S7)。然後,執行步驟S8〜步 驟S17的迴圈。步驟S8〜步驟S17係針對IG串流、次要視訊 串流、主要音訊串流、次要音訊串流之各者,重複步驟si〇 〜步驟S17之處理。步驟sl〇係現基本串流選擇表中,對應 於串流X之基本_流選擇表分錄數是否為〇之判斷:步驟 係判斷對應於現_流之串流χ之串流分錄數,是否為儲存於 76 201123841 串流號碼暫存器之串流號碼以上之判斷步驟。 步驟S10、步驟S11之某一者為「是」時,於步驟817, 維持儲存於串流號碼暫存器之-流號碼。 於步驟S10、步驟S11之某一者為「否」時,判斷心 於現基本串流選擇表之PES串流,符合複數個條件中之^條 件(步驟S12),判斷是否存在有複數個判斷作符合的條件” 組配為同一組配之PES串流(步驟S13)。 符合條件之PES串流為唯一 1個時,選擇符合條件之1 個PES串流(步驟S14)。 存在複數個符合條件之PES串流時,於判斷作符合相门 條件之PES串流中’選擇現基本串流選擇表之優先順序最高 者(步驟S15)。若如此選擇PES串流,則於PSR之串流號碼暫 存器’寫入對應於所選擇的PE S串流之争流分錄之串流號碼 (步驟S16)。 經過以上過程,若確定現播放項目中應再生之pES串 流’則須開始現播放項目的再生,而現播放項目再生之處 理程序係與藉由回放條件改變手續(Procedure when playback condition is changed)所確定的輸出模式相應。 第35圖係表示對應於串流號碼之封包識別符之輸出處 理之程序。其為執行步驟S17、步驟S18之判斷步驟的構造。 步驟S17係現輸出模式是否為2D再生模式之判斷,若為2D 再生模式’則於步驟S38,向解多工部指示根據基本串流選 擇表之串流登錄串中,對應於現串流號碼之串流登錄資訊 之串流分錄之解多工。 77 201123841 步驟S18係延伸串流選擇表之彈出期間固定偏移是否 開啟之判斷。步驟S17為「否」,步驟S18為「是」時,執行 步驟S19〜步驟S30。 步驟S17〜步驟S30係執行以下處理:將視訊串流設定 為立體視覺B-D類型,將視訊截面設定為B-D呈現模式(步 驟S19);指示根據SS相依視圖塊之串流分錄之封包識別符 之解多工(步驟S2〇):及步驟S21〜步驟S26。 步驟S21係現PG串流之串流登錄資訊之is_ss_PG是否 開啟之判斷,若開啟,則於步驟S22,將PG串流設定為立 體視覺再生類型,PG截面設為B-D呈現模式(步驟S23) ’指 示根據對應於現PG串流之$流登錄資訊之基礎視圖串流分 錄、相依視圖串流分錄之封包識別符之解多工。 若is_ss_PG關閉,則將pg串流設定為1截面+偏移再生 類型’將PG截面設定為1截面+偏移模式(步驟S24),從相依 視圖視訊串流’取得以現PG串流之串流登錄資訊tSSPG文 本 st 偏移序列 id 參考(ss_PG_textST_offset-Sequence
Jd_ref)所指示的偏移序列(步驟S25),根據所取得的偏移序 列執行截面移位(步驟S26)。 步驟S27係現IG串流之串流登錄資訊之丨3—ss—IG是否開 啟之判斷,若開啟,則於步驟S28,指示根據對應於現沿串 流之串流登錄資訊之基礎視圖串流分錄、相依視圖串流分 錄之封包識別符之解多工。 若is_ss_IG關閉,則從相依視圖視訊串流,取得以現工〇 串流之串流登錄資訊之SSIG文本訂偏移序列Μ參考 78 201123841 (SS__IG textST_offset—sequence」d_ref)所指示的偏移序列 (步驟S29) ’根據所取得的偏移序列執行戴面移位(步驟 S30)。 延伸串流選擇表之彈出期間固定偏移為開啟時,步驟 S17為「否」’步驟S18為「是」,執行步驟S31〜步驟S37。 步驟S31〜步驟S37係將視訊_流設定為立體視覺b-B 類型,將視訊截面設定為B—B呈現模式(步驟S31),執行步 驟S32〜步驟S37的處理。 步驟S32係現PG串流之_流登錄資訊之is_ss_pG是否 開啟之判斷,若開啟,則於步驟S33,將PG串流設定為1截 面+零偏移模式類型,PG截面設為1截面+偏移模式,從相 依視圖視訊串流’取得以現PG串流之串流登錄資訊之SSPG 文本 ST 偏移序列 id 參考(ss_PG_textST_offset_sequence •Jd—ref)所指示的偏移序列(步驟S34),根據所取得的偏移序 列執行戴面移位(步驟S35)。其後移到步驟S37。 若is_ss_PG關閉,則於步驟S36,將PG串流設定為1截 面+零偏移模式類型,將PG截面設定為1截面+零偏移模 式。其後移到步驟S37。 於步驟S37 ’對於藉由現ίο串流之串流登錄串之BB視 訊期間IG截面偏移方向所指示的方向,僅以藉由串流登錄 串之BB視訊期間IG截面偏移值所示的量’執行截面移位。 藉由以上處理,於彈出期間固定偏移設定開啟時,可供再 生對於平面的動態圖像合成有立體的字幕或選單之立體視 覺影像。 79 201123841 第36圖係表示PG截面移位之處理程序之流程圖。 步驟S60係PG亦或文本字幕之判斷。若為pG率流,則 移到步驟S6卜步驟S74的迴圈。該雙重迴圈係重複以下處 理:以1將變數i、j初始化(步驟S61),從視訊解碼器,於具 有現串流之PG文本ST偏移序列id參考 (PG_textST_〇ffset_sequence_id_ref)所指示的偏移序列 id之 偏移序列中,取得GOP⑴之截面偏移方向⑴及截面偏移值 [JK步驟S62),利用G0P⑴之截面偏移方向⑴及截面偏移值 ϋ] ’執行截轉^ 該變數丨的迴圈之終了條件係於步 驟S69判斷變如成為偏移序列數;重複於步驟請遞增變 數i ’並返回步驟S62之處理,直到符合該條件為止。 步驟S63〜步驟S68的迴圈係重複以下處理:等待〇〔 之圖幀之基礎視圖之水平顯示期間開始(步驟s63),若已丨 始,於步驟S64 ’僅以截面偏移值⑴之像素數將圖傾( 之圖片資料之各線之像素往X軸之截面偏移方⑽所示: 方向移位,其後等待G〇P之圖社相依視圖之水平顯示』 門開始(步驟S 6 5 )’若已開始’僅以截面偏移值⑴之像素數 將_⑴之圖片資料之各線之像素往與峰之截面偏移; 向ϋ]所不之方向相反的方向移位。利用該變數〗的迴圏之《 了條件係於步獅7 ’判斷變數』成為G〇p中顯*_數 =複於步驟S78遞增變數j,並返回步驟S63之處理,直㈣ δ ”亥條件為止。 第37圖係表示文本字幕串流為再生對象時之pG截面移 之處理程序之流程I本圖之處理構造基本上與第_ 80 201123841 為同一構造,而步驟S64置換為步驟S72、步驟S72,步驟S65 置換為步驟S73。 步驟S71係取得應用於截面之偏移之PG截面之每描繪 區域之内插值。步驟S72係僅以截面偏移值ϋ]+内插值之像 素數,令PG截面之各描繪區域之像素往X軸之戴面偏移方 向ϋ]所示之方向移位。 步驟S73係僅以戴面偏移值ϋ]+内插值之像素數,令PG 戴面之各描繪區域之像素往與X軸之截面偏移方向⑴所示 之方向相反的方向移位。 第38圖係表示IG截面之截面移位之流程圖。本圖之處 理構造基本上與第36圖為同一構造’其相異點在於步驟S6〇 置換為步驟S74,步驟S62置換為步驟S75,步驟S64置換為 步驟S76,步驟S66置換為步驟S77。 步驟S74係STN表SS之彈出期間固定偏移是否開啟的 判斷’若為「否」,則移到步驟S6卜若為「是」,則移到步 驟S78。 步驟S75係於具有由現串流之SSIG偏移序列泛參考所 指示的偏移序列id之偏移序列中,從視訊解碼器取得(}〇1>(〇 之截面偏移方向[j]及截面偏移值□]。 步驟S76係僅以截面偏移值山之像素數,令犯截面之各 線之像素往X軸之截面偏移方向U]所示之方向移位。 步驟S77係僅以截面偏移值山之像素數,令…截面之各 線之像素往與X軸之截面偏移方向U]所示之方向相反的方 向移位。 81 201123841 第3 9圖係表示S TN表S S之彈出期間固定偏移為開啟時 之1G截面之載面移位之處理程序之流程圖。本圖之處理構 造基本上與第36圖為同一構造,其相異點在於步驟S62置換 為步驟S78,步驟S64置換為步驟S79,步驟S66置換為步驟 S80 〇 步驟S78係取得STN表SS之現串流之BB視訊期間IG截 面偏移方向、BB視訊期間1G截面偏移值。 步驟S79係僅以BB視訊期間IG截面偏移值之像素數, 令1G截面之各線之像素往X軸之BB視訊期間截面偏移方 向所示之方向移位。 步驟S80係僅以BB視訊期間IG截面偏移值之像素數, 令1G截面之各線之像素往與X軸之BB視訊期間1(}截面偏移 方向所示之方向相反的方向移位。 如以上’若依據本實施形態,由於丨截面+偏移模式控 制用之控制資訊之放置處所規定於相依視圖串流内,因此 藉由根據3D攝f彡機在攝料所獲得的景深資訊、或用以生 之編在編碼過程所獲㈣視差資訊,生成 控制資sfl ’並作為元資料嵌入於相依視圖視訊串流,以簡 易地生成1截面+偏移模式下之偏移控制 用之控制資訊。如 來’大te省略編輯階段的作業。由於控制資訊規定1截 面偏移模式下之偏移控制,因此即便左右的字幕或選單不 存在’只要有1個字幕或選單,即可實現立體視覺再生。不 僅減7?別針對左視圖 '右視圖做成字幕或選單的人力, 還可實現立體視覺再生即便再生裝置之截面記憶體用之 82 201123841 記憶體規模為H仍可實現立體視覺再生,因此可實 現兼顧編輯之效率化與再生裝置之低成本化。 (第2實施形態) 於第1實麵S,由於好剪輯分細㈣,參考 相依視圖資料塊之子Ts,因此於子TS與主TS分開記錄的情 況下’從2D再生模式切換為31)再生模式時,唯恐發生子TS 的讀出,損及AV再生之無縫性。因此,本實_態係提案 保障主TS及子TS均載入於再生裝置的改良。具體而言提 案將主TS、子TS予以交插化,將2TS作為丨樓案而記錄。 作為前提事項,簡單說明關於UDF檔案系統中之檔 案。UDF巾之财係由檔案分騎管理的複數個延伸區所 構成。「檔案分錄」包含:「描述符標藏」、「ICB標籤」及「分 配描述符j。 「描述符標籤」係意在表示本身為職分錄的標籤。 標籤包括檔案分錄描述符、空間位元圖描述符等類別,於 檔案分錄的情況下,作為描述符標籤係描述有表示檔案分 錄之“261”。 「ICB標籤」係表示關於檔案分錄本身之屬性資訊。 「分配描述符」包含邏輯塊號碼(LBN),係表示構成位 於某目錄底下之低位檔案之延伸區之記錄位置者。分配描 述符包含表示延伸區長之資料、及表示延伸區之記錄位置 之邏輯塊號碼。其中,表示延伸區長之資料之高位2位元設 定為’藉此意在表示分派完畢且記錄完畢延伸區,設定 為“Γ,藉此意在表示分派完畢且未記錄延伸區。藉由設定 83 201123841 為0,以表示分配描述符後續之延伸區。位於某目的底下 之低位檔案被分割為複數個延伸區的情況下,檔案分錄係 就每延伸區而具有複數個分配描述符。 藉由參考如上述之檔案分錄之分配識別符,可得知構 成串流檔案之延伸區之位址。 接著’說明關於本實施形態所設想的檔案類別。 <立體視覺交插串流檔案(檔案ss)> 立體視覺交插串流檔案(檔案ss(FUeSS))係使得21^成 為交插形式之串流檔案(2TS交插檔案),藉由意在表示5位 數之整數值、及立體視覺再生用之交插形式檔案之副檔名 (SS1〇來識別。立體視覺交插串流檔案係由延伸區SS[n]所構 成。延伸區SS[n](EXTSS[n])係藉由索引號碼1!來特定。索引 號碼η係從立體視覺交插串流檔案的開頭逐一遞增的號碼。 延伸區SS[n]係作為相依視圖資料塊與基礎視圖資料 塊之組配而構成。 構成延伸區SS[n]之基礎視圖資料塊、相依視圖資料塊 為來自檔案2D、檔案庫、檔案相依之交又參考的對象。交 叉參考係指將記錄於記錄媒體之1個資料客體,作為複數個 標案之延伸區而事先登錄於樓案分錄。於本實施形態,於 檔案2D之檔案分錄、檔案庫之檔案分錄、檔案相依之檔案 分錄’登錄有基礎視圖資料塊 '相依視圖資料塊之開頭位 址及連續長。 〈樓案庫(FileBase)> 檔案庫(FileBase)為虛擬的串流檔案,其“儲存”藉由對 84 201123841 應於檔案2D之剪輯資訊之延伸區起點資訊所指示的主 ts,至少由1個延伸區i[i](稱為EXT1[i])所構成。延伸區叩] 係檔案庫之第1個延伸區,i為延伸區之索引號碼,將檔案庫 的開頭設為0而遞增。檔案庫係為了將2TS檔案之立體視覺 交插串流檔案,作為ITS檔案處理之虛擬的串流檔案,藉由 於再生裝置之記憶體上建構其檔案分錄而虛擬地生成。 在實際讀出時,檔案庫係藉由利用該立體視覺交插串 流檔案之檔案名進行檔案開啟而特定。具體來說,再生裝 置之中間軟體係於呼叫利用立體視覺交插串流檔案之檔案 名之稽案開啟時’於記憶體上’生成特定出檔案庫之延伸 區之檔案分錄,虛擬地開啟檔案庫。立體視覺交插串流檔 案可視為“僅包含ITS”,可將2TS之立體視覺交插串流檔 案,作為ITS之稽案庫而從記錄媒體讀出。 於B-B呈現模式下,若欲讀出基礎視圖資料塊時,僅 有構成該檔案庫之延伸區成為讀出對象。即便模式從b_b 呈現模式變更為B-D呈現模式’若將讀出範圍從構成槽案 庫之延伸區之記錄範圍,擴大到構成立體視覺交插串流檔 案之延伸區之記錄範圍,即可讀出基礎視圖資料塊、相依 視圖資料塊雙;ίΓ,因此不會讓;^案讀出的效率性降低。 〈檀案相依(FileDependent)〉 檔案相依(FileDependem)係“儲存,,子TS之串流擋案,由 延伸區所構成。延伸區2[⑽檔案相依之第;個 延伸區’ i為延伸區之索引號碼’將檔案相依的開頭設為〇 而遞增。樓案庫係為了將2TS檔案之立體視覺交插串流槽 85 201123841 案’作為儲存有子TS之ITS檔案處理之虛擬的串流檔案, 藉由於再生裝置之記憶體上建構其檔案分錄而虛擬地生 成。 於立體視覺交插串流檔案之檔案名之5位數號碼,加算 1之後的號碼,被作為檔案名而賦予相依視圖視訊牟流。利 用該檔案名來存取。於記錄媒體記錄有虛設檔案’相依視 圖視訊串流之識別號碼即「已加算i之號碼」被賦予該虛設 檔案。虛設檔案係指僅存在檔案名,不存在實體之延伸區 之檔案,相依視圖視訊串流係被處置為儲存於該虛設檔案。 〈檔案 2D(File2D)> 樓案2D係儲存在2D再生模式下再生之主TS之1TS之串 流檔案,由延伸區2D所構成。檔案2D係藉由5位數之整數 值、及意在表示立體視覺再生用之交插形式檔案之副檔名 (ssif)來識別。 以下說明關於檔案2D/檔案庫、檔案相依之相互關係。 第40圖係表示延伸區與檔案2D/檔案庫、檔案相依之對應關 係0 第1層係表示檔案2D/檔案庫、檔案相依之00001.m2ts、 〇〇〇〇2.m2tS,第2層係表示儲存有基礎視圖資料塊之延伸 區、儲存有相依視圖資料塊之延伸區。第3層係表示立體視 覺交插串流檔案之00001.ssif。 虛線箭頭Μ、112、113、114係表示延伸區£\丁1[丨]、£乂丁2[1] 歸屬於何檔案之依據分配識別符之歸屬關係。若依據箭頭 hi ' h2所示之歸屬關係,可知延伸區EXT1[i]、EXT1[i+1] 86 201123841 登錄作為檔案庫之00001.m2ts之延伸區。 若依據箭頭h3、h4所示之歸屬關係,可知延伸區 EXT2[i]、EXT2[i+l]登錄作為檔案相依之〇〇〇〇2.m2ts之延伸 區。 若依據箭頭h5、h6、h7、h8所示之歸屬關係,可知延 伸區EXTl[i] ' EXT2[i]、EXTl[i+l]、EXT2[i+l]登錄作為檔 案庫之OOOOl.ssif之延伸區。如以上,可知延伸區EXTl[i]、 EXTl[i+l]具有歸屬於00001.ssif ’同時歸屬於00001 m2tS2 雙重性。該“ssif’之副檔名係取StereoScopic Interleave File(立體視覺交插檔案)之開頭文字,其表示為了立體視覺 再生而成為交插形式。 第41圖係表示立體視覺交插串流檔案與檔案2D/檔案 庫之關係。 同圖(a)之第3層係表示交插串流檔案之内部構成。藉由 交替配置儲存有基礎視圖資料塊之延伸區Εχτι[丨]、 EXT1[2]之各者、與儲存有相依視圖資料塊之延伸區 EXT2[1]、EXT2[2]之各者而構成。 第1層係表示檔案2D及檔案庫之内部構成。檔案2D/檔 案庫係僅由構成第3層之交插串流檔案之延伸區中,儲存有 基礎視圖資料塊之EXT1[1]、EXT1[2]所構成。檔案2D之檔 案名係與交插串流檔案之檔案名相同,但副檔名不同。 第2層係表示髓相依之㈣構成。檔案相依係僅由構 成第3層之交插串流槽案之延伸區中,冑存有相依視圖資料 塊之找即]、EXT2[2]、EXT2[3]所構成。棺案相依之樓 87 201123841 案名係父插串讀案m加算丨之後之棺案名而副播 名不同。 •即便是包含3D影像之光碟片,由於未必所有的再生裝 置均支援3D再生方式,因此期待支援2D再生。但僅支援2D 再生之再生裝置無法辨別經3D延伸後之資料構造等。扣再 生裝置舰_持舊有的2D再生方式之制方法,僅存取 2D播放串列及2〇串流,關於左視圖視訊串流,則以2D方式 之再生裝置可辨識的檔案形式儲存。 第1種方法係使用如上述之播放串列資訊的參考 ,亦即 使用與2D再生方式相同的槽案名以便於2d再生中亦可利 用主TS ’而交插形式之串流檔案則改變副檔名。同圖⑼之 ◦麵德及咖1爾係-方面其-方為2〇方·式,另-方 為3D方式,同時—面藉由相同的檔案名“〇_,,而輛合。 由於播放串列僅參考主丁8之八乂剪輯,因此於既有的2〇 再生裝置僅再生㈣2D。支援3D之再生裝置僅參考播放串 机置入有主TS之檔案2D,但存在具有相同識別號碼、僅副 檔名不同的檔案時,找出該槽案’判斷其為3D影像用之交 插形式之_流檔案,並輸出主TS、子TS。 第2種方法係區分文件庫的方法。主丁8事先儲存於具有 既有文件庫名(例:STREAM)之文件庫内,子丁8事先於具 有3D特有的名稱之文件庫(例:SSIF),以相同檔案名 『00001』儲存》播放串列參考檔案時,於2D再生裝置僅參 考「STREAM」文件庫内之檔案,3D再生裝置的情況下, 則從「STREAM」及「SSIF」文件庫中,同時參考相同名 88 201123841 稱的檔案,藉此可將主TS與子TS建立關係。 第3種方法係依據識別號碼的方法。檔案2D/檔案庫之 識別號碼為“00001,,時,檔案相依之識別號碼係如同圖(c) 所示’賦予於該左視圖之識別號碼,加算“1”之後的號碼, 亦即賦予“00002”之識別號碼等,按照一定規則來進行關聯 建立之方法。然而,於記錄媒體之檔案系統,以上述規則 命名的檔案相依僅止於作為無實體的虛設檔案來處理。此 係依據檔案相依的實體只不過為立體視覺交插串流槽案的 理由。 如此建立關聯之檔案名事先描述於基本串流選擇表之 串流登錄資訊、及延伸串流選擇表之串流登錄資訊之串流 分錄之子剪輯分錄ID參考(ref_to_subclip_entry_id)。另,關 於再生裝置則執行以下處理:已於描述於子剪輯分錄山參 考之識別號碼加算1之識別號碼之檔案名,係認證作虛設檔 案之檔案名,虛擬地開啟檔案相依。如此一來,於串流選 擇手續中,從記錄媒體,確實地讀出已進行如上述關聯建 立之檔案相依。 以上係關於檔案2D、檔案庫、檔案相依的說明。 以下說明關於資料塊的詳細。 <基礎視圖資料塊〉 基礎視圖資料塊(B[i])係主TS之第i個資料塊。在此, 主TS係指透過現播放項目資訊之剪輯資訊檔案名(剪輯資 訊檔案名資訊),指定作為主路徑之主軸之TS。B[i]之“i”係 將檔案庫之開頭資料塊設為〇而遞增之索引號碼。 89 201123841 基礎視圖資料塊包括在檔案庫與檔案2D被共通化、及 在檔案庫與檔案2D未被共通化者。 在權案庫與檔案2D被共通化之基礎視圖資料塊、及檔 案2D固有的基礎視圖資料塊,係成為檔案2〇之延伸區,設 定為不發生再生裝置之緩衝器虧位之長度。然後,其開頭 的磁區位址係描述於檔案2 D之檔案分錄之分配描述符。 未與檔案2D共通化之檔案庫固有的基礎視圆資料塊不 成為稽案2D之延伸區,因此並非設定為不令再生裝置之單 一緩衝器發生虧位之長度。其設定為更小尺寸,亦即設定 為不令再生裝置之雙緩衝器發生虧位之長度。 又’檔案庫固有的基礎視圖資料塊係其開頭磁區描述 於檔案分錄之分配描述符。另一方面,基礎視圖資料塊之 開頭開源封包之來源封包係藉由對應於主T S之剪輯資訊檔 案之剪輯資訊内之延伸區起點資訊而指向(ρο+inting)。因 此,檔案庫固有的基礎視圖資料塊之開頭磁區位址,係須 利用立體視覺交插串流檔案之檔案分錄之分配描述符、及 剪輯資訊内之延伸區起點資訊來導出。 左視圖為基礎視圖的情況下,基礎視圖資料塊係儲存 有2D再生及左視圖再生用之複數類別之PES串流之分割部 分之來源封包之集合體,諸如儲存有左視圖視訊串流之分 割部分之來源封包、儲存有左視圖用之圖形串流之分割部 分之來源封包、儲存有應與該等一同再生之音訊串流之分 割部分之來源封包、歐洲數位傳播所規定的封包管理資訊 (PCR、ΡΜΤ、PAT)等。構成該基礎視圖視訊串流之封包係 90 201123841 ATC、STC、SPN連續,仅略甘—b ns 保障某一疋期間之無縫AV再生。 <相依視圖資料塊> 相依視圖資料塊①⑴)係子TS之第i個資料塊。子丁⑽ 指於對應於現播放項目資訊之延伸串流選擇表之串流登錄 串之串流分錄中,指定作為子路徑之主轴之TS。则之“i” 係將檔案庫之開頭資料塊設為〇而遞增之索引號碼。 相依視圖資料塊為檔案相依之延伸區,設定為不發生 再生裝置之雙緩衝器虧位之長度。 又,於記錄媒體之連續區域上,相依視圖資料塊係較 應於相同時間再生之基礎視圖資料塊,配置於更前面。因 此,於立體視覺交插串流檔案讀出時,相依視圖資料塊必 定較基礎視圖資料塊先被讀出》 相依視圖資料塊未與檔案2D共通化,因此其開頭磁區 位址未描述於檔案2D之檔案分錄之分配描述符。另一方 面,相依視圖資料塊之開頭開源封包之來源封包係藉由剪 輯資訊内之延伸區起點資訊而指向。因此,相依視圖資料 塊之開頭磁區位址,係須利用檔案2D之檔案分錄之分配描 述符、及剪輯資訊内之延伸區起點資訊來導出。 相依視圖為右視圖的情況下,相依視圖資料塊係儲存 有右視圖再生用之複數類別之PES串流之分割部分之來源 封包之集合體,諸如儲存有右視圖視訊串流之分割部分之 來源封包、儲存有左視圖及右視圖用之圖形串流之分割部 分之來源封包、儲存有應與該等一同再生之音訊串流之分 割部分之來源封包等。該等封包係ATC、STC、SPN連續, 91 201123841 保障某一定期間之無縫AV再生。於連續的基礎視圖資料塊 及相依視圖資料塊,構成基礎視圖資料塊之複數個來源封 包之ATS· SPN、及構成相依視圖資料塊之複數個來源封包 之ATS · SPN均為相同值。因此,構成基礎視圖資料塊之複 數個來源封包、及構成相依視圖資料塊之複數個來源封 包,係於相同ATC時刻到達PID濾波器。 <延伸區類型> 如上述,檔案2D之延伸區包括與檔案庫共通與非與檔 案庫共通者。 檔案2D之延伸區係由 B[0]、B[l]、B[2]、B[3]2D、B[4]2D 所構成,檔案庫之延伸區係由B[0]、B[l]、B[2]、B[3]ss、 B[4]ss所構成。B[0]、B⑴、b[2]係與檔案庫共通化之基礎 視圖資料塊。B[3]2D、B[4]2D係未與檔案庫共通化之檔案 2D固有的基礎視圖資料塊。 又,B[3]ss、B[4]ss係未與檔案庫共通化之檔案2D固有 的基礎視圖資料塊》 B[3]2D之資料與B[3]ss之資料具有位元單位 (bit-for-bit)之同一性。B[4]2D之資料與b[4]ss之資料具有 位元单位(bit-for-bit)之同一性。 泫等檔案2D之資料塊B[2] ' B[3]2D、B[4]2D係於即將 令長程跳躍發生前之處所,構成連續長較大之延伸區(大延 伸區)。檔案2D可於長程跳躍前形成大延伸區,因此即便在 以2D再生模式再生立體視覺交插串流樓案時,仍無須憂慮 讀緩衝器雇亏位。 92 201123841 檔案2D及檔案庫雖在延伸區有部分不同,但由於具有 同—性,因此將該等檔案2D及檔案庫一併稱為“檔案2〇/檔 案庫,,。 〈長程跳躍> 就一般論而言’記錄媒體採用光碟片時,令光拾取頭 暫時停止讀出動作,於其間用以將光拾取頭對於下一讀出 對象區域上定位之操作稱為「跳躍」。 除了使光碟片之A疋轉速度增減的操作以外,跳躍還包 括嵫軌跳躍及焦點跳躍。磁執跳躍係指令光拾取頭在碟片 之半徑方向移動的操作。焦點跳躍係指於光碟片為多層碟 片時,令光拾取頭的焦點從一記錄層移往別的記錄層的操 作。一般而言,該等跳躍之循執時間長,且藉由跳躍而跳 過讀出的磁區數多,因此特別稱為「長程跳躍」。於跳躍期 間中’停止藉由光拾取頭所進行的讀出操作。 於跳躍期間中’讀出操作被跳過部分的長度稱為「跳 躍距離」。跳躍距離通常以該部分之磁區數表示。上述長程 跳躍具體而言係定義作為跳躍距離超過特定臨限值之跳 躍。該臨限值係於例如BD-ROM規格下,按照碟片種類及 關於驅動器之讀出處理之性能而規定為40000磁區。 作為令長程跳躍發生的代表性處所,除了記錄層之交 界以外,還有播放項目間之1對n之多重連接所存在的處所。 在此,進行1對η之播放項目之多重連接時,構成η個播 放項目之η個TS中之第1個可配置於構成緊接於其前之播放 項目之TS後。然而,第2個以後之TS不得配置於緊接於其 93 201123841 前之播放項目之微。於存在有1對⑽重連接時,從緊 接於其前之播放項目’往_播放項目之第2個以後之播放 項目跳躍時,該跳躍須跳過讀出_以上之ts之記錄區域, 因此於存在有如之播放項目之多重連接的處所會發生長 程跳躍。 <各模式之再生路徑> 2D再生模式之再生路徑係由受到現播放項目資訊之剪 輯資訊樓案名資訊所參考的標案2D之延伸區所構成。 B_D呈現模式之再生路徑係由受到現播放項目資訊之 剪輯資訊财^資訊所參考的域視覺交㈣流標案之延 伸區所構成。 B-B呈現模式之再生路徑係由受到現播放項目資訊之 f輯資訊職名資訊所參考的㈣庫之延伸區所構成。 s亥等3個模式之再生路徑係藉由將描述於現播放項目 資訊之剪輯資訊職名資訊之棺案名,作為檔案2D之擋案 名利用而進行標案開啟’亦或作為檔案庫之㈣名利用而 進行檔案開啟,亦或作為立體視覺交插串流檔案之檔案名 利用而進行檔案開啟來切換。此類再生路徑之切換不會導 致現播放串列或現播放項目的變動,因此可維持再生模式 變更時之無縫性。 故’再生裝置可藉由根據開啟現播放項目資訊之剪輯 資訊檔案名資訊,開啟立體視覺交插串流檔案、檔案庫、 檔案2D之某一者,以從記錄媒體讀出適合各再生模式之資 料塊。 94 201123841 <EXT2D、ΕΧΤ1[η]、ΕΧΤ2[η]之具體值> EXT2D之下限值係決定為2D再生模式再生時,在從各 基礎視圖資料塊往下一基礎視圖資料塊之跳躍期間中,不 發生再生裝置之讀緩衝器之緩衝器虧位。 從第η個基礎視圖資料塊到第(n+1)個基礎視圖資料塊 之跳躍需要時間Tjump2D(n) ’以速度Ruf2D,於讀緩衝器讀 出各基礎視圖資料塊,且前述基礎視圖資料塊以平均速度 Rbext2D從讀緩衝器往視訊解碼器傳輸時,EXT2D之下限值 係由以下條件1之數式表示。 <條件1> EXT2D 之下限值 2 (Rud2DxRbext2D) /(Rud2D-Rbext2D;) xTjump2D(n) 對應於基礎視圖資料塊B[n]ss之延伸區設為ΕΧΤ1[η]。 該情況下’ ΕΧΤ1[η]之下限值係決定為經過b-D呈現模式再 生時’從各基礎視圖資料塊到下一相依視圖資料塊之跳躍 期間,及從該相依視圖資料塊到下一基礎視圖資料塊之跳 躍期間,不發生雙緩衝器虧位。 在此之雙緩衝器係由讀緩衝器1、讀緩衝器2所構成。 讀緩衝器1係與2D再生裝置之讀緩衝器為同一物。 於B-D呈現模式之再生中,從第η個基礎視圖資料塊到 第ρ個相依視圖資料塊之跳躍需要時間TFjump3D(n),從第ρ 個相依視圖資料塊到第(n+1)個基礎視圖資料塊之跳躍需 要時間 TBjump3D(n)。
然後,各基礎視圖資料塊對讀緩衝器1,以速度Rud3D 95 201123841 讀出’各相依視圖資料塊對讀緩衝器2,以速度Rud3D讀 出,且從讀緩衝器1對視訊解碼器,前述基礎視圖資料塊以 平均速度Rbext3 D傳輸時,EXT丨[n]之下限值係由以下條件2 之算式表示。大延伸區之連續長設定為該下限值或高於該 下限值的值。 <條件2> ΕΧΤ1[η]之下限值 2 (Rud3DxRbext3D)/(Rud3D-Rbext3D) x(TFjump3D(n)+EXT2[n]/(Rud3D+TBjump3D(n)) EXT2之下限值係決定為經過b-D呈現模式再生時,從 各相依視圖資料塊到下一基礎視圖資料塊之跳躍期間,及 從該基礎視圖資料塊到下一相依視圖資料塊之跳躍期間, 令再生裝置之雙緩衝器不發生虧位。 從第(n+1)個基礎視圖資料塊到第(p+i)個相依視圖資 料塊之跳躍需要時間TFjump3D(n+l),且從讀緩衝器2對解 碼器,前述相依視圖串流檔案以平均速度Rdext3D傳輸時, EXT2[n]之下限值係由以下條件3之算式表示。 <條件3> ΕΧΤ2 [η]之下限值 2 (Rud3 DxRbext3D)/(Rud3D-Rdext3 D) x(TBjump3D(n)+EXT 1 [n+1 ]/(Rud3D+TFjump3D(n+1)) <EXTSS之具體值〉 從某延伸區讀出往下一延伸區跳躍時,該跳躍前之緩 衝器佔有量須充分。如此一來’於立體視覺交插串流檔案 讀出時,讀緩衝器須由1個延伸區填充,須避免發生緩衝器 虧位。 96 201123841 然而,EXTSS不僅須根據從延伸區往延伸區之跳躍期 間Tjump,還須根據Tdiff來決定。在此,Tdiff係意味伴隨 於EXTSS之相依視圖資料塊之預載、及EXTssnexti相依視 圖資料塊之預載之延遲時間。以下說明關於丁出厅之含意, 於立體視覺交插串流檔案之讀出時,預載開頭的相依視圖 資料塊的期間無法開始再生。 於EXTss,再生僅延遲該相依視圖資料塊之預載所需要 的期間,因此於EXTss ’開頭的相依視圖之資料塊之預載所 需要的時間,係成為再生延遲該部分期間之“延遲期間”。 相反地,於EXTssnext,從EXTss往EXTssnext跳躍後, 立即進行開頭的相依視圖資料塊之預載,因此視訊解碼器 之再生開始亦可延遲該期間。總言之,於EXTssnext之再生 時,進行開頭的相依視圖資料塊之預載的期間係成為視訊 解碼器暫緩開始再生之“暫緩期間”。 承襲以上,Tdiff係作為從相依視圖資料塊之暫緩期間 減去延遲期間的值而導出。具體而言,符合以下算式而算 出。
Tdiff-ceil[((SlstEXTl[i]EXTSSnext]-SlstEXTl[i]EXT SS)xl000x8)/Rud72] 在此,Tdiff係意味SlstEXTl[i]EXTss之讀出期間與 SlstEXT2[i]EXTssnext之讀出期間之差分 , S1 stEXT2[i]EXTss係位於EXTss之最初之EXT2[i]的尺寸,
SlstEXT2[i]EXTssNEXT 係位於 EXTssNEXT 之最初之 EXT2[i]的尺寸。EXTssnext為立體視覺交插串流檔案之延 97 201123841 伸區,其位於緊接於EXTss之後,與EXTss無縫地再生。 若利用該Tdiff、及往EXTssnext之跳躍時間(Tjump), 根據各延伸區之平均位元率之最小延伸區尺寸之Sextss係 作為符合以下條件4的值而算出。 <條件4>
SextSS[Byte]^ceil[(Tjump+TdiffxRud72)/(l〇〇〇x8) x(Rextssx 192)/(Rud72x 188-Rextssx 192)]
在此,Rud72係來自立體視覺再生模式下之BD-ROM 驅動器之資料率。
Rextss係EXTss之平均位元率,從以下算出導出。
Rextss=ceil[Nspx 188x8/(ATCDextss/27000000)] ATCDextss=ATCstart_extssnext-ATCDextss/27000000)] ATCDextss=ATCDstart_extssnext-ATCstart_extss ATCDextss=ATClast_extss-ATCstart_extss +ceil(27000000xl88x8/min(Rtsl,Rts2)) ATCDextss 為 EXTss之 ATC期間。 ATCstart_EXTssnext係藉由EXTss之來源封包串之ATC 欄位所指示的最小ATC值。 ATCstart_EXTssnext係藉由EXTssnext之來源封包串之 ATC欄位所指示的最小ATC值。 ATClast_EXTSS係藉由EXTss之來源封包串之ATC欄 位所指示的最大ATC值。
Nsp為主TS、子TS之來源封包串,具有對應於ATCDexss 之範圍内之ATC之ATC值者之個數。 98 201123841
Rtsl為主TS之TS記錄率的值,其最大值為48Mbps。
Rts2為子TS之TS記錄率的值,其最大值為48Mbps。 存在有連續再生2個播放項目的情況,EXTss包含由前 播放項目(播放項目1)所使用的ATC序列之最初的資料位元 組。 • EXTss具有條件4所定義的最小延伸區以上之尺寸。 •EXTss為前播放項目所使用的ATC序列之最初的資料 位元組時,前播放項目之銜接條件資訊不設定為=5(於播放 項目交界伴隨有徹底切斷連接處理)' =6(播放項目交界與 GOP之邊界一致的連接處理)。該情況下,不符合EXTss的 尺寸亦可。 EXTss包含由現播放項目(播放項目2)所使用的ATC序 列之資料位元組。 • EXTss具有條件4所定義的最小延伸區以上之尺寸。 • EXTss為播放項目2所使用的ATC序列之最後的資料 位元組時,播放項目2之銜接條件資訊不設定為=5、=6。該 情況下,不符合EXTss的尺寸亦可。 第42圖係表示立體視覺交插串流檔案、檔案2D、檔案 庫之相互關係。第1層表示檔案2D,第2層表示記錄媒體上 之資料塊,第3層表示立體視覺交插串流檔案,第4層表示 檔案庫,第5層表示檔案相依。
第2層之資料塊為上述D[l]、B[l]、D[2]、B[2]、D[3]、 B[3]ss、D[4]、B[4]ss、B[3]2D、B[4]2D。然後,箭頭exl、 ex2、ex3、ex4係表示資料塊中,B[l]、B[2]、B[3]2D、B[4]2D 99 201123841 構成檔案2D之延伸區之歸屬關係。 箭頭ex5、ex6係表示資料塊中,D[! ]、B⑴、D[2]、B[2]、 D[3]、B[3]ss、D[4]、B[4]SS構成立體視覺交插串流檔案之 延伸區之歸屬關係。 第4層係表示於構成該立體視覺交插串流檔案之資料 塊中’ B[l]、B[2]、B[3]ss、B[4]ss成為檔案庫之延伸區, 第5層係表示於構成該立體視覺交插串流擋案之資料塊 中’ D[l]、D[2]、D[3]、D[4]成為檔案庫之延伸區。 第43圖係表示2D播放串列、3D播放串列。第i層表示 2D播放串列資訊,第2層表示資料庫,第3層表示3D播放串 列,第4層表示相依視圖資料塊。 箭頭rfl、rf2、rf3係表示藉由組合描述於2〇播放串列 資訊之播放項目資訊之剪輯資訊檔案名之檔案名〇〇〇〇卜與 副檔名m2ts而成之再生路徑。該情況下,藉由資料塊B[1]、 B[2]、B[3]2D構成基礎視圖側之再生路徑。 箭頭rf4、rf5、rf6、rf7係表示藉由3D播放串列資訊之 播放項目資訊所指定的再生路徑。該情況下,利用B[l]、 B[2]、B[3]ss、B[4]ss構成基礎視圖側之再生路徑。 箭頭rf8、rf9、rfl〇、rfll係表示藉由3D播放串列資訊 之播放項目資訊所指定的再生路徑。該情況下,利用D[ 1 ]、 D[2]、D[3]、D[4]構成相依視圖側之再生路徑。構成該等播 放項目資訊、子播放項目資訊所指定的再生路徑之資料 塊’可藉由組合描述於播放項目資訊之剪輯資訊檔案名之 檔案名與副檔名ssif來進行檔案開啟。 100 201123841 由於本圖之3D播放串列之剪輯資訊檔案名資訊、2D播 放串列之剪輯資訊檔案名資訊係描述共通的檔案名,因此 描述定義該等3D播放串列、2D播放串列之播放串列資訊 時,以共通的描述即足夠(參考符號dfh df2)。故,若事先 描述實現該3D播放串列之播放串列資訊,再生裝置之輸出 模式為立體視覺輸出模式時,則作為3D播放串列而發揮功 能,再生裝置之輸出模式為2D輸出模式時,則作為2D播放 串列而發揮功能。本圖的2D播放串列、3D播放串列係藉由 事先描述1個播放_列資訊,以便因應解釋此之再生裝置之 輸出模式而作為2D播放串列、3D播放串列來解釋,因此可 減輕進行編輯者的人力。 於立體視覺交插串流檔案儲存主TS、子TS時,2D播放 串列之播放項目資訊之剪輯資訊檔案名係描述檔案2D之檔 案名。3D播放串列之播放項目資訊之剪輯資訊檔案名係描 述檔案庫之檔案名。檔案庫為虛擬的檔案,其檔案名係與 立體視覺交插串流檔案相同,因此事先將立體視覺交插串 流檔案之檔案名描述於播放項目資訊之剪輯資訊檔案名即 可。延伸串流選擇表之串流登錄資訊之子剪輯分錄id參考 係描述檔案相依之檔案名。檔案相依之檔案名係於立體視 覺交插串流檔案之識別號碼加算1之後所得者。 第44圖係表示於第43圖之3G播放串列再加入一個子路 徑之播放串列。相對於第43圖之播放串列僅具備子路徑 ID=“1”之子路徑,第44圖之播放串列之第2個子路徑係藉由 子路徑Π)=“2”來識別,並參考別的資料塊。藉由設置2以上 101 201123841 之子路徑資訊所定義的複數個右視圖,係從右眼觀看被照 體的角度Μ之複數個右視圖,僅以該角度數,準備構成 右視圆之資料塊’依各角度設置子路徑。 藉由切換與由基礎視圖資料塊所構成的主Ts所規定的 主路徑同步再生之子轉,可利麟於❹者而言舒適的 視差圖像來顯示立體影像。 關於實現該3D播放串列之播放串列資訊,亦是再生裝 置之輸出模式為立體視覺輸出模式時,作為3D播放争列而 發揮功能,再生裝置之輸出模式為立體視覺輪出模式時, 作為2D播放串列而發揮功能。第43圖之2;〇播放串列、3〇播 放串列若事先描述1個播放串列資訊,則會因應解釋其之再 生裝置之輸出模式而作為2D播放串列、3D播放串列來解 釋,適宜地進行最佳的輸出模式,因此可減輕進行編輯者 的人力。 以下說明關於基礎視圖視訊串流之指定方式。 一般而言,於工作室係考慮將左視圖視訊作為2〇影像 而做成,但其中可能認為將左視圖作為2D影像而做成較 佳。由於存在該類可能性,因此於每播放項目資訊,可設 定表示左視圖及右視圖中之何者設定為基礎視圖之基礎視 圖指示器。藉由該播放項目資訊各個之基礎視圖指示器, 指示左視圖視訊串流及右視圖視訊串流中之何者設為基礎 視圖視訊串流、左視圖PG串流及右視圖PG串流中之何者設 為基礎視圖PG串流、左視圖IG串流及右視圖IG串流中之何 者設為基礎視圖IG串流。 102 201123841 如上述,由於相依視圖資料塊具有必定早於基礎視圖 資料塊而配置之規躲’因此若參考該基礎視圖指示器, 則可得知心再生右視圖之來源封包、心再生左視圖之 來源封包之何者,先供給至再生裝置。 依據該資訊,右視圖視訊串流被指定作為基礎視圖視 訊串流時,假若右《好路«訊指定,仍將該右視圖 視訊串流先放入視訊解碼器而獲得非壓縮的圖片資料。然 後,根據藉由解碼該右視圖視訊$流所獲得非壓縮的圖片 資料’進行移動補償。如此,可令能夠將何者作為基礎視 圖之選擇,具有靈活性。 第45⑷圖係於第43圖之戰放串列,添寫基礎視圖指 示器之圖。 t」45(_係表核據物件導向程式化語言之基礎視圖 才曰不益之%述。本圖係於定義播放項目之構造體中,如何 ㈣基礎視圖指示器之描述例。如本圖所示’藉由指定立 即值。’二將左視圖視訊串流指定作為基礎視圖視訊串 肌藉由心疋立即值T,可將左視圖視訊串流指定 礎視圖視訊串流。 可使用於對!員示裝置的輸出,顯示裝置側分別為了區 別2個串流而利用。於使用快門方式的眼鏡時等,若不知播 放項目所 > 考的I影像為左視圖亦或右視圖,則無
鏡與顯示裝置的鞀_ ^ & ‘''W 一 m”、、貝不同步,因此對眼鏡送出切換訊號,以 使其㈣4時讓快門方式眼鏡之左眼側的光穿 透於顯示右視-時,讓快門方式眼鏡之右眼側的光穿透。 103 201123841 又,即便是如柱狀透鏡,於顯示裝置的畫面嵌入稜鏡 之裸眼立體視覺方式,仍須區別右視圖與左視圖,因此利 用S亥-貝§fl進行區別。以上係關於基礎視圖指示器的說明。 β玄基礎視圖指示器係以左視圖或右視圖之某一者,可作為 平面視覺影像再生為前提。 第46圖係表示播放項目之再生程序。 步驟S41係現輸出模式是否為3D輸出模式之判斷,若現 輸出模式為2D輸出模式,則執行步驟S43〜步驟S46。 於步驟S43 ’開啟由描述於現播放項目之剪輯資訊標案 名之「ΧΧΧΧΧ」及副檔名「m2ts」所指定的串流檔案;於 步驟S44,利用對應於視訊串流之封包1:)之分錄點,將現播 放項目進入時間及現播放項目離開時間轉換為開始 SPN[i](Start_SPN[i])及結束SPN[i](End_SPN[i])。 於步驟S45 ’特定出屬於為了將封包10⑴之丁8封包⑴, 從開始SPN[i]到結束SPN[i]讀出之讀出範圍[丨]之延伸區;於 步驟S46,指示記錄媒體之驅動器,連續讀出屬於讀出範圍 [i]之延伸區。 若現輸出模式為立體視覺輸出模式,則移到步驟S50 〜步驟S60的迴圈。 於步驟S50’開啟由描述於現播放項目之剪輯資訊擋案 名之「XXXXX」及副檔名「ssif」所指定的串流檔案;於 步驟S51 ’將左視圖視訊串流、右視圖視訊串流中由現播放 項目資訊之基礎視圖指示器所指定者,設為基礎視圖視訊 串流。其以外者設為相依視圖視訊串流。 104 201123841 於步驟S52,利用對應於基礎視圖視訊串流之封包1D之 分錄點’將現播放項目進入時間及現播放項目離開時間轉 換為開始SPN[i]及結束SPN[i]。 於步驟S53 ,特定出屬於對應於相依視圖串流之子播放 項目,將利用對應於相依視圖視訊串流之封包ID之分錄 點,所特定出的子播放項目進入時間及子播放項目離開時 間,轉換為開始SPN[j]及結束SPN[j]。
特定出屬於為了將封包ID[i]之TS封包[i] ’從開始SPN[i] 到結束SPN[i]讀出之讀出範圍[i]之延伸區(步驟S55);特定 出屬於為了將封包ID[j]之TS封包[j],從開始SPN[j]到結束 SPN[j]讀出之讀出範圍之延伸區(步驟S56)。然後,於步驟 S57,依位址之升序’分類屬於讀出範圍[i]、[j]之延伸區, 於步驟S58,指示驅動器利用已分類的位址,連續讀出屬於 讀出範圍[i]、ϋ]之延伸區。其後,若已讀出來源封包串, 於步驟S59 ’分別復原基礎視圖之ATC序列、相依視圖之ATC
序列,並送入基礎視圖用之!>ID濾波器、相依視圖用之piD 遽波器。 如以上,若依據本實施形態,由於將基礎視圖資料塊 及相依視圖資料塊儲存於丨個立體視覺交插串流檔案,同時 將該等供給至,制频視_之肌序列及相 依視圖用之ATC序列,因此於解碼器側,可與—般的串流 稽案同樣也處理立體視覺交插串流檔案。&,可積極地將 基礎視圖視訊宰流、相依視圖視訊串流之儲存方式,弓丨進 到立體視覺交插串流槽案。 105 201123841 (第3實施形態) 本實施形態係說明關於剪輯資訊檔案的詳細。 第47圖係表示剪輯資訊職之内部構成。 同圖⑷係表示扣剪輯資訊樓案,同圖(b)係表示3D用之 煎輯資訊髓。該等剪輯資訊職包含:『剪輯:H、『序 列資訊』、『程式資訊』'『特徵點資訊』。 『剪輯資訊』係就每ATC序列,表示儲存於串流檐案 之來源封包串之各者為何種AV剪輯之資訊,其包含:由相 對應之AVIT輯所構成的助程式屬於電影、幻燈片展示等 何種類型(應用程式類型):相龍之AV剪輯屬於何種串流 的類型(串流類型);Av剪輯之TS封包之傳輸率(ts記錄 率)、與構成前一AV剪輯之ATC序列之ATC的差分(ATC差 夏)、及用於編碼之編碼方式之識別符。 『序列資訊』係就每八丁(:_列,表示儲存於串流檔案 之1或複數個來源封包_為何種ATC序列之資訊(ATC序列 資訊)之構成。ATC序列資訊係以來源封包號碼,表示作為 ATC開始點之來源封包位於何處之資訊’其包含:sTc序列 識別符-ATC序列識別符間之偏移,及關於複數個STC序列 各自之STC序列資訊。STC序列資訊包含:該STC序列中儲 存有PCR之來源封包之封包號碼;表示該ATC序列中,於何 處存在有作為STC序列之開始點之來源封包之資訊;及STC 序列中之再生開始時刻、再生結束時刻。 『程式資訊』係表示藉由剪輯資訊檔案,管理作“AV 剪輯”之主TS、子TS之程式構成之資訊,其表示AV剪輯將 106 201123841 何種ES予以多工。具體而言,其表示受到多工而成為^剪 輯之ES具有何種封包識別符、其為何種編碼方式於該程 式資訊内,明示有利用MPEG2-video、MPEG4-AVC等之中 之何個編碼方式,將視訊争流予以壓縮編碼。 『特徵點資訊』係就每ES,表示受到多工而成為AV剪 輯之複數個ES之特徵點存在於何處。表示每ES之特徵點之 資訊稱為分錄圖。 特徵點係依串流的每種類別而不同。基礎視圖視訊串 /’_<·、相依視圖視訊串流的情況下,位於開放G〇p、封閉G〇p 開頭之I圖片之存取單元定界符為特徵點。音訊_流的情況 下,表示存在於每隔1秒等、每隔一定期間之音訊圖幀開頭 位置之存取單元定界符為特徵點,PG串流、IG串流的情況 下:表示圖形串流之顯示集合中,顯示所必需的所有功能 區段者(紀元開始(epoch_start)之顯示集合、獲取點之顯示集 合)之開頭位置之存取單元定界符為特徵點。 ' 又,如何表示特徵點係於ATC序列、STC序列分別不 同。於ATC序列,特徵點係以來源封包號碼表現。於STc 序列’相同的特徵點係利用表示STC時間軸之時點之阳表 "、丄心左共 &刀一田银数個分錄點所 -而呂,構成分錄圖之各個分錄點係表示AT 列之特徵點所在之來源封 徵點所在之pts建立對應,= 不STC序列之特 角度切換之旗標(角戶改變 疋否可向該特徵點進行 又隻(IS—angie_change)旗標)。由於位 107 201123841 於構成多角度區間之交插單元的開頭之來源封包可切換角 度,因此指示交插單元之開頭來源封包之分錄點之角度改 變(is_angle_change)旗標,務必設定在開(〇Ν)〇又,指示交 插單元之開頭來源封包之分錄點係藉由分錄點,而與播放 項目資訊之進入時間建立對應。 每ES之分錄圖係將該等串流類別各自之特徵點之來源 封包號碼’與PTS建立對應而表示’因此藉由參考該分錄 圖’可從STC序列之任意時點,導出表示最接近該時點之 每ES之特徵點之來源封包號碼。 以上係關於2D用之剪輯資訊檔案的說明。接下來,說 明關於3D用之剪輯資訊檔案的詳細。3D用之剪輯資訊檔案 成為第41(b)圖之内部構成,除了一般的剪輯資訊(管理資訊) 之「檔案2D用之剪輯資訊」以外’還存在有檔案相依用之 剪輯資訊之「剪輯相依資訊(基礎視圖管理資訊)」、檔案庫 用之剪輯資訊之「剪輯庫資訊(基礎視圖管理資訊)」。此係 依據以下理由。如第2實施形態所述,為了避免立體視覺交 插串流檔案與一般的串流槽案混淆,立體視覺交插串流標 案係儲存在與串流權案不同的目錄。因此,於立體視覺交 插串流檔案,無法將剪輯資訊檔案建立對應。因此,剪輯 相依資訊及剪輯庫資訊係儲存在對應於檔案2D之剪輯資訊 檔案。 2D用之剪輯資訊與剪輯庫資訊及剪輯相依資訊之差異 點在於,於剪輯庫資訊及剪輯相依資訊内部,存在包含延 伸區起點串之元資料。 108 201123841 於第47(b)圖,剪輯相依資訊包含延伸區起點串,剪輯 庫資訊亦包含延伸區起點卜存在於剪輯相依資訊内之延 伸區起點_係由複數個延伸區起點資賴構成,各延伸區 起點資訊係表示構成檔案相依之複數個延伸區之開頭的來 源封包號碼。 存在於剪輯庫資訊内之延伸區起點串亦由複數個延伸 區起點資訊所構成,各延伸區起點資訊係表示構成檔案庫 之複數個延伸區之開頭的來源封包號碼。 敘述關於存在該等延伸區起點資訊之技術性意義。 儲存於串流檔案之TS原本為1個TS,ATC序列亦僅有1 個。故,若只參考剪輯資訊檔案之序列資訊,無法判斷分 割部为的開頭為何處。另一方面,由於分割部分的開頭亦 為延伸區的開頭,因此若參考檔案分錄或延伸區描述符等 檔案系統的資訊,可得知分割部分的開頭為何處,但由於 檔案系統的資訊係由中間軟體所管理的資訊,因此極難以 從應用程式參考該延伸區的資訊。因此,於本實施形態, 利用延伸區起點資訊,於剪輯資訊内表示延伸區為第幾封 包。 第103圖係表示基礎視圖剪輯資訊之延伸區起點資訊 之一例、及相依視圖剪輯資訊之延伸區起點資訊之一例。 (a)係表示基礎視圖剪輯資訊之延伸區起點資訊,(b)係表示 相依視圖剪輯資訊之延伸區起點資訊。 (b)係表示構成ATC序列1之基礎視圖資料塊B[〇]、 Β[1]、Β[2]· · · ·Β[η]、構成ATC序列2之基礎視圖資料 109 201123841 塊B[0]、B[1]、B[2]· · . .B[n]〇(c)係表示相依視圖資料 塊之來源封包數、基礎視圖資料塊之來源封包數。 (d)係表示立體視覺交插串流檔案所包含的複數個資料 塊。 如同圖(b)所示,ATC序列2若由相依視圖資料塊D[〇]、 D[l]、D[2] · · · · D[n]所構成’則ATC序列2之相依視圖 資料塊D[0]、D[1]、D[2]· . · ·ϋ[η]之相對來源封包數, 即0、1>1、132、133、04...1311係記載於檔案相依之延伸區 起點資訊之SPN_extent_start。 ATC序列1若由基礎視圖資料塊B[0]、B[1]、B[2]· · · · B[n]所構成,則ATC序列1之基礎視圖資料塊B[0]、B[l]、 B[2] · · · · B[n]之相對來源封包數,即0、al、a2、a3、 a4· · .an係記載於檔案庫之延伸區起點資訊之SPN延伸區 開始(SPN_extent_start)。 同圖(c)係立體視覺交插串流檔案之任意相依視圖資料 塊D[x]、任意基礎視圖資料塊b[x]之來源封包數。相依視圖 資料塊D[x]之開頭來源封包號碼為bx,相依視圖資料塊 D[x+1]之開頭來源封包號碼為bx+Ι時’構成D[x]之來源封 包數為bx+1-bx。 同樣地,基礎視圖資料塊B[x]之開頭來源封包號碼為 ax,基礎視圖資料塊B[x+1]之開頭來源封包號碼為ax+1 時’構成B[x]之來源封包數為ax+1-ax。 立體視覺交插串流檔案之最後的相依視圖資料塊B[n] 之開頭來源封包號碼為an,ATC序列1之來源封包個數為來 110 201123841 源封包 1 之數目(number_0f_S0urce-packetl)時,構成B[n]之 來源封包數為來源封包1之數目_an。 立體視覺交插串流檔案之最後的相依視圖資料塊D[n] 之開頭來源封包號碼為b n,AT c序列2之來源封包個數為來 源封包2之數目(number—0f—source一packet2)時,構成D[n]之 來源封包數為來源封包2之數目_bn。 如此一來,相依視圖資料塊之開頭來源封包號碼、基 礎視圖資料塊之來源封包號碼係如(句所示。 於立體視覺交插串流檔案中,D[0]之開頭SPN為“0,,, B[0]之開頭SPN為“bl”。 關於D[l]之開頭SPN,由於成為先行之D[〇]之來源封包 數bl、與B[0]之來源封包數al之和,因此為“bl+al”。 關於B[l]之開頭SPN,由於成為先行之D[〇]之來源封包 數bl、B[0]之來源封包數&1與先行之D⑴之來源封包數 b2-bl之和’因此為“b2+al(=bl+al+b2)”。 關於D[2]之開頭SPN,由於成為先行之D[〇]之來源封包 數bl、B[0]之來源封包數al、先行之d[i]之來源封包數b2_bl 與B[l]之來源封包數a2—ai之和,因此為 “b2+a2(=bl+al+b2+a2-al),,。 關於B[2]之開頭SPN ’由於成為先行之〇[〇]之來源封包 數bl、B[0]之來源封包數al、先行之d[i]之來源封包數 b2-bl、B[l]之來源封包數a2-al與D[2]之來源封包數b3-b2 之和’因此為“b2+a2(=bl+al+b2-bl+a2—al+b3-b2)”。 第104圖係用以說明ATC序列1、2之任意資料塊之來源 111 201123841 封包號碼之圖。 於同圖(a)之ATC序列2,考慮求出存在於bx之來源封包 號碼之D[x]之立體視覺交插串流檔案中之來源封包號碼的 情況。該情況下,D[x]之開頭來源封包號碼成為D[0]、B[〇]、 D[1]、B[1]、D[2]、B[2]· · · ·ϋ[χ-1]、Β[χ-1]之相對來 源封包數之來源封包數的總和,因此如同圖(b)所示為 “bx+ax” 。 於同圖(a)之ATC序列1,考慮求出存在於ax之來源封包 號碼之B [ X ]之立體視覺交插串流檔案中之來源封包號碼的 情況。該情況下,如同圖(b)所示,B[x]之開頭來源封包號 碼成為 D[0]、B[0]、D[1]、B[1]、D[2]、B[2]...,D[x-1]、 B[x-l]、D[x]之相對來源封包數之來源封包數的總和,因此 為 “bx+丨+ax”。 同圖(c)係表示以上述基礎視圖資料塊作為延伸區之檔 案庫、及以上述相依視圖資料塊作為延伸區之檔案相依。 如以下求出相當於B [X]之檔案庫之延伸區即EXT1 [X] 之開頭LBN及連續長、以及相當於D[x]之檔案相依之延伸 區即EXT2[x]之開頭LBN及連續長。 為了從D[x]之開頭來源封包號碼求出LBN,以 ((bx+ax)* 192/2048)的計算’將來源封包轉換為LBN。同樣 地,為了從B[x]之開頭來源封包號碼求出LBN,以 ((bx+1+ax)*l92/2048)的計算,將來源封包轉換為LBN。再 此,“192”係以位元組數表示來源封包尺寸,“2048”係以位 元組數表示磁區尺寸(邏輯塊尺寸)。最接近該等LBN之立體 112 201123841 視覺交插串流檔案之延伸區之LBN,係將藉由上述轉換所 獲得的LBN,用於函數SSIF_LBN(file_offset)之引數即 file_offset而算出。函數SSIF_LBN係從file_offset,追湖SSIF 之分配描述符,而送回該當於file_offset之LBN之函數。 藉由如此,EXT2[x]之開頭LBN成為SSIF_LBN ((bx+ax)* 192/2048),ΕΧΤ1[χ]之開頭 LBN 成為 SSIFJLBN ((bx+1+ax)* 192/2048)。 另 ’ EXT2[x]之連續長為(SSIF_LBN ((bx+1+ax)* 192/2048)-SSIF_LBN((bx+ax)* 192/2048))。ΕΧΤ1[χ]之連續 長為(SSIF_LBN((bx+,+ax+1)*192/2048) — SSIF_LBN((bx+l + ax)*192/2048))。若於記憶體上,生成表示該等開頭LBN及 連續長之檔案分錄,則可虛擬地獲得檔案庫、檔案相依。 第48圖係表示延伸區起點資訊之語法。延伸區單元數 (number_of_extent一units)係表示ATS區間相同之延伸區塊 (Extent Block)的數目。 以延伸區id作為控制變數之語句rfor」係僅就延伸區 單元數,定義基礎/相依視圖延伸區開始位址、交插基礎/ 相依視圖延伸區開始位址[延伸區id]。 基礎/相依視圖延伸區開始位址[延伸區id]係表示lr類 別檔案形式之各延伸區之開始位址。交插基礎/相依視圖延 伸區開始位址[延伸區i d ]係表示L R丨檔案形式之各延伸區之 開始位址。該等之中,基礎視圖延伸區開始位址[延伸區^] 係表不從檔案開頭之相對位址。該相對位址為192位元組 (SPN)單位’以32位元可對應到—OB。此係由於使用Ep圖 113 201123841 (EP_map)搜尋再生開始位置,因此採SPN單位較容易判 斷。由於延伸區為6KB對齊,因此採6KB單位亦可。由於 6KB=192位元組*32,因此能夠以5位元移位來對應。然後, 延伸區起點資tfl之構成要素、藉由來_包號碼表現延伸 區之開頭位址者,係稱為“SpN延伸區開始 (SPN_extent_start)”。 第49圖係表示剪輯資訊樓案之分錄圖表(entfy — table) 〇本圖⑷係表示分錄圖表之概略構成。拉出線ehi係 將分錄圖表之内部構成予以特寫表示。如該拉出線所示, 分錄圖表包含:『分錄_標頭f訊』、『延伸區開始類型』、『關 於PID=0xl011之分錄圖』、『關於piD=〇xl〇12之分錄圖』、 『關於PID=0xl220之分錄圖』及『關於piD=〇xl221之分錄 圖』。 刀錄圖心頭資讯』儲存有分錄圖所指之視訊串流之 PID或分錄點數等資訊。 延伸區開始類型』係表示左視圖視訊串流及右視圖 視sfl串流中,從何者之延伸區先配置延伸區。 『關於PID=〇xi〇n之分錄圖』、『關於ρΐΕ)=〇χ1〇12之分 錄圖』、『關於I>ID=〇xi220之分錄圖』及『關於PID=〇xi221 之分錄圖』,係關於由複數類別之來源封包所構成的pES串 /瓜各者之分錄圖。於分錄圖,成為〗對之1>丁8與81>]^之資訊 稱為“分錄點’,。又,開頭設為“〇,,,就各分錄點逐一遞增之 值稱為分錄點ID(以下作EP_ID)。藉由利用該分錄圖’再生 機件可特定出對應於視訊串流之時_上任意地點之來源 114 201123841 封包位置。例如快轉•倒帶之特殊再生時,藉由特定出登 錄於分錄圖之I圖片,選擇其而再生,可無須解析Av剪輯而 有效率地進行處理。又,分錄圖係就AV剪輯内受到多工之 各視訊串流而做出,並以PID來管理。 拉出線eh2係將PID=1011之分錄圖之内部構成予以特 寫表示。由對應於EP_ID=0之分錄點、對應於EP_ID= 1之分 錄點、對應於EP_ID=2之分錄點、對應於EP_ID=3之分錄點 所構成。對應於EP_ID=0之分錄點係表示設定為開啟之角 度改變旗標、SPN=3與PTS=80000之對應關係》對應於 EP_ID=1之分錄點係表示設定為關閉之角度改變旗標、 SPN=1500與PTS=270000之對應關係。 對應於EP_ID=2之分錄點係表示設定為關閉之角度改 變旗標、SPN=3200與PTS=360000之對應關係。對應於 EP_ID=3之分錄點係表示設定為關閉之角度改變旗標、 SPN=4800與PTS=450000之對應關係。角度改變旗標係表示 是否可從該分錄點獨立而解碼之旗標。視訊串流採MVC或 MPEG4-AVC編碼,且於分錄點存在有IDR圖片時,該旗標 設定為開啟。於分錄點存在有Non-IDR圖片時,該旗標設 定為關閉。 同圖(b)係表示藉由對應於(a)所示之PID= 1 〇 11之TS封 包之分錄圖内之複數個分錄圖,指示何個來源封包。對應 於EP一ID=0之分錄圖係指示SPN=3,將該來源封包號碼與 PTS=80000建立關係。對應於EP_ID=1之分錄圖係指示 SPN=1500,將該來源封包號碼與pts=270000建立關係。 115 201123841 對應於EP_ID=2之分錄圖係指示SPN=3200之來源封 包,將該來源封包號碼與PTS=360000建立關係。對應於 EP_ID=3之分錄圖係指示SPN=4800之來源封包,將該來源 封包號碼與PTS=450000建立關係。 第50圖係表示程式資訊之串流屬性資訊。 圖中之拉出線ahl係將串流屬性之内部構成予以特寫 表示。 如該拉出線所示,由複數類別之來源封包所構成的PES 串流具有何種屬性,係表示於該串流屬性,諸如由 PID=0X1 〇 12之TS封包所構成的右視圖視訊串流之串流屬 性、由PID=0xll00、PID=0xll01之TS封包所構成的音訊串 流之串流屬性、由PID=0xl220、0x1221之TS封包所構成的 PG串流之串流屬性。如該拉出線ahl所示,就每pid登錄關 於AV剪輯所含之各串流之屬性資訊。 第51圖係表示依據分錄圖之分錄點之登錄。第1層係表 示由s C序列所規定的時間軸。第2層係表示剪輯資訊之分錄 圖。第3層係表示剪輯相依資訊之延伸區起點資訊及剪輯基 礎資訊之延伸區起點資訊。第4層係表示構成ATC序列之來 源封包串。分錄圖指定ATC序列中=nl之來源封包時,於該 分錄圖之PTS,事先設定STC序列之PTS=U。如此一來,可 利用PTS=tl之時點,令再生裝置執行從ATC序列中=nl之隨 機存取。又,分錄圖指定ATC序列中=n21之來源封包時, 於該分錄圖之PTS,事先設定STC序列之PTS=t21。如此一 來’可利用PTS=t21之時點,令再生裝置執行從ATC序列中 116 201123841 =n21之隨機存取。 藉由利用該分錄圖,再生裝置可特定出對應於視訊串 流之時間軸上任意地點之來源封包。例如快轉•倒帶之特 殊再生時’藉由特定出登錄於分錄圖之j圖片,選擇其而再 生’可無須解析AV剪輯而有效率地進行處理。 又,第3層之剪輯相依資訊之延伸區起點[i]、剪輯庫資 訊之延伸區起點ϋ]係於第4層,表示構成相依視圖視訊串流 之延伸區、構成基礎視圖視訊串流之延伸區之開頭來源封 包號碼為何者。 藉此,若從藉由剪輯相依資訊之延伸區起點[i]所示之 來源封包,讀出至緊接於藉由剪輯庫資訊之延伸區起點U] 所示之來源封包前之來源封包,則可僅擷取構成相依視圖 視訊串流之來源封包。 若從藉由剪輯庫資訊之延伸區起點⑴所示之來源封 包’ a賣出至緊接於藉由剪輯相依資訊之延伸區起點[1+1]所 示之來源封包前之來_包’财僅#|取構成基礎視圖視 訊串流之來源封包串。 然後,若令構成基礎視圖視訊串流之來㈣包彼此、 構成相依視隨訊串流之來源封包彼此統合,則可復原構 成基礎視圖視訊串流之ATC序列、構成相㈣圖視訊$流 之ATC序列。 第52圖係表示如何從構成立體视覺交插串流標案之資 料塊復原ATC序列。 第4層係表示構成立體視覺交插串流擋案之複數個資 117 201123841 料塊;第3層係表示受到多工而成為主ts、子TS之來源封 包串。 第2層係表示構成相依視圖之stc序列2、分錄圖、構 成相依視圖之ATC序列2之組配;第1層係表示構成基礎視 圖之STC序列1、分錄圖、構成基礎視圖之ATC序列1之組 配。從第3層向第2層、第1層的箭頭係模式性地表示從受到 交插化而成為立體視覺交插串流檔案之2個TS(主TS、子TS) 之資料塊’復原ATC序列卜ATC序列h該等ATC序列係藉 由剪輯資訊之分錄圖,取得與STC序列之對應。 以上係關於本實施形態之記錄媒體的說明。接下來, 說明關於再生裝置的詳細。 本實施形態之再生裝置之讀出部係成為受理來自2個 記錄媒體之來源封包輸入之構成,其包含:2個驅動器,係 用以存取2個記錄媒體之各個者;及2個讀緩衝器,係用以 暫且儲存從該等2個驅動器輸入之來源封包,並輸出至解碼 器者。然後,於2個驅動器與2個讀緩衝器之間,存在ATC 序列復原部。該ATC序列復原部係從讀出自1個記錄媒體之 交插串流檔案内之來源封包,分離出構成基礎視圖之ATC 序列與構成相依視圖串流之ATC序列,並寫入於2個讀緩衝 器之各個。藉由如此,再生裝置可處理成構成基礎視圖串 流之ATC序列、構成相依視圖串流之ATC序列,彷彿分別從 不同的記錄媒體讀出。第53(a)圖係表示具備ATC序列復原 部之讀出部之内部構成。如上述,於2個驅動器與2個讀緩 衝器之間,介在有ATC序列復原部。圖中之箭頭B0 118 201123841 第53(b)係表示如何處理由ATC序列復原部所獲得的2 個ATC序列。於圖中正中央,表示存在於解多工部之PID滤 波器。左側係表示由ATC序列復原部所獲得的2個ATC序 列。右側係表示將該等2個ATC序列予以解多工而獲得的基 礎視圖視訊串流、相依視圖視訊串流、基礎視圖PG串流、 相依視圖PG串流、基礎視圖IG串流、相依視圖IG串流。由 該等2個PID濾波器所進行的解多工係依據第1實施形態所 示之基礎串流選擇表、延伸串流選擇表。該ATC序列復原 部係藉由做成令硬體資源,執行第54圖之處理之程式而實 現。第54係表示ATC序列復原程序。 步驟S91係將基礎視圖用之ATC序列設為ATC序列1, 將相依視圖用之ATC序列設為ATC序列2。於步驟S92,將變 數X予以初始化為1 ^該變數X係指示相依視圖資料塊、基礎 視圖資料塊。以後則重複步驟S94〜步驟S96的迴圈。 判斷藉由變數X所指示的來源封包號碼bx,是否為藉由 基礎視圖資料塊之最後的數值η所指示的來源封包號碼 bn(步驟S93),若是否定,於ATC序列2,追加從藉由來源封 包號碼bx+ax所指示的來源封包(bx+ax),到緊接於藉由 bx+i+ax所指示的來源封包(bx+1+ax)前之封包(步驟S94),於 ATC序列1 ’追加從來源封&(bx+i+ax),到緊接於來源封包 (bx+1+ax+l)前之封包(步驟S95),重複將變數x遞增(步驟s%) 的處理’直到步驟S93判斷為「是」為止。 若步驟S93判斷為「是」,於ATC序列2,追加從來源封 包號碼bn算起(來源封包2之數目-bn)個來源封包(步驟 119 201123841 S96),於ATC序列丨,追加從來源封包號碼⑽算起(來源封包 1之數目-bn)個來源封包(步驟S98)。 如以上,當ATC序列1 ' 2復原時,於記憶體上,生成 以磁區數表不基礎視圖資料塊之開頭L B N及連續長之檔案 分錄,虛擬地開啟檔案庫(步驟S99)。同樣地,於記憶體上, 生成以磁區數表示相依視圖資料塊之開頭LBN及連續長之 檔案分錄,虛擬地開啟檔案相依(步驟sl〇〇)e <開啟檔案庫之技術性意義> 在此進行從任意時點之隨機存取時,須進行串流稽 案之磁區㈣。磁隨尋係指進行從任斜狀隨機存取 時’特定出龍於該時點之來源封包之來關包號碼,從 包含該來源封包號碼之來源封包之磁區,進行檔案讀取的 處理。 由於立體視覺交插串流檔案之1個磁區甚大,因此磁區 搜尋的探f範_ ’被命令從任意_之_存取時,在 讀出對象磁區之特定上,有時需要相當長的處理時間。 此係根據以下理由:立體視覺交插串流檔案構成i個長 延伸區,其交插配置有構成基礎視圖視訊串流之資料塊' 構成相依視圖視訊串流之資料塊,交插串流檔案之檔案分 錄之分配描述符只不過表示該長延伸區之開頭位址。 相對於此,檔案庫係由長度短的複數個延伸區所構 成,各個延伸區之開頭位址表示於分配描述符,因此磁區 搜尋時之探索範圍窄,被命令從任意時點之隨機存取時, 在短時間即完成讀出對象磁區之特定。 120 201123841 總言之,構成基礎視圖視訊串流之資料塊被作為檔案 庫之延伸區管理,資料塊之開頭位址清楚記載於對應於檔 案庫之檔案分錄之分配描述符,因此若從包含隨機存取位 置之延伸區之開頭位址開始磁區搜尋,可於早期到達包含 作為隨機存取位置之來源封包之磁區。 如此’藉由將構成基礎視圖視訊串流之資料塊作為槽 案庫之延伸區管理,事先於關於檔案庫之檔案分錄之分配 描这符,表示各延伸區之開頭位址及連續長,從基礎視圖 視訊串流之任意時點之隨機存取會變得高速。 以下為具體的磁區搜尋程序。藉由利用對應於基礎視 圖視訊_流之分錄圖,導出對應於任意時點之隨機存取位 置之來源封包號碼。 接著’藉由利用對應於基礎視圖視訊_流之剪輯資訊 内之延伸區開始指向資訊,特定出包含作為隨機存取位置 之來源封包號碼之延伸區為何者。 ★ %—步若參考對應於檔案庫之檔案分錄之分配描述 待,可特定出包含作為隨機存取位置之來源封包號碼之延 伸區之開頭磁區位址。於該開頭磁區設定檔案點,進行浐 案"賣取,對於所讀出的來源封包執行封包解析,藉此特定 出作為隨機存取位置之來源封包號碼之來源封包。然後, "賣出所特定出的來源封包號碼之來源封包。藉此 也執行對於主TS之隨機存取。子TS亦同理。 率 ,以上,若依據本實施形態,由於根據延伸區起 整齊排列交插串流檔案之基礎視圖視訊奉节之k 121 201123841 區、相依視圖視訊串流之延伸區後,供給至解多工部、解 碼器,因此解碼器或程式可將儲存有基礎視圖視訊串流之 檔案庫、儲存有相依視圖視訊_流之檔案相依之2個檔案, 作為虛擬地存在於記錄媒體之檔案來處理。 可將立體視覺用之基礎視圖視訊串流、相依視圖視訊 串流作為交插串流檔案而製成記錄媒體,同時可達成基礎 視圖視訊串流及相依視圖視訊串流之單獨存取,因此可令 再生裝置之處理效率性提升。 再者’延伸區起點資訊雖亦能夠以1位元組為單位表示 延伸區的開頭,但延伸區對齊為諸如ECC塊之固定長之钱 取塊尺寸時’宜以固定長為單位來指定。藉由如此亦可 抑制用以識別位址所必需的資訊量。 (第4實施形態) 於本實施形態,說明關於解多工部、解碼器、截面 憶體之硬體規模。 ° 本實施形態之解多工部包含丨個以上之來源封包解封 包處理器與PID濾波器之組配。該來源封包解封包處理^ PID渡波器之組配僅存在有與串流輸入之系統數相應^數 目。 第55圖係表示解多工部及視訊解碼器之内部構成 同圖(a)係表示解多工部之解碼器模型。解多工部() 組配為2個。此係由於解多工部原本微處理來自 W δ己錄媒 體之2系統的串流輸入之構成。於2D再生模式下,可處理來 自2個記錄媒體之串流輸入,而於3D再生模式下,則产里 122 201123841 與R、2D與深度之2系統之串流輸入》 如同圖(a)所示’解多工部係由來源解封包處理器22、 PID濾波器23、來源解封包處理器27及PID濾波器28所構成。 來源解封包處理器2 2係於讀緩衝器2 a儲存有來源封包 時’於ATC計數器所生成的ATC之值與來源封包之ATS之值 成為同一值的瞬間’按照AV剪輯之記錄率,僅將該TS封包 傳輸至HD濾波器。該傳輸時,因應各來源封包之ATS調整 對解碼器之輸入時刻。 PID濾波器23係將輸出自來源解封包處理器22之TS封 包中,TS封包之PID與再生所必需之pid—致之TS封包,按 照輸出至各種解碼器。 來源解封包處理器2 6係於讀緩衝器2b儲存有來源封包 時’於ATC計數器所生成的ATC之值與來源封包之ATS之值 成為同一值的瞬間,按照AV剪輯之記錄率,僅將該TS封包 傳輸至PID濾波器。該傳輸時,因應各來源封包之ATS調整 對解碼器之輸入時刻。 PID濾波器27係將輸出自來源解封包處理器26之丁§封 包中,TS封包之PID與再生所必需之PID一致之ts封包,按 照PID輸出至各種解碼器。 接著,說明關於主要視訊解碼器31之内部構成。 第55(b)圖係表示主要視訊解碼器之内部構成。主要視 5孔解碼器 31係由 TB5 卜 MB52、EB53、TB54、MB55、EB56、 解碼器核心57、緩衝器切換器58、DPB59及圖片切換器60 所構成。 123 201123841 傳輸緩衝器(ΤΒ)51係於從PID濾波器23,輸出包含左視 圖視訊串流之TS封包時,暫且原樣累積TS封包之緩衝器。 多工緩衝器(MB)52係於從TB對EB輸出視訊串流時,用 以事先暫且累積PES封包之緩衝器。從TB對MB傳輸資料 時’去除TS封包之TS標頭。 基本緩衝器(E B ) 5 3係儲存處於編碼狀態之視訊存取單 元之緩衝器。從MB對EB傳輸資料時,去除PES標頭。 傳輸緩衝器(TB)54係於從PID濾波器,輸出包含右視圖 視矾串流之TS封包時,暫且原樣累積丁3封包之緩衝器。 多工緩衝器(MB)55係於從TB對EB輸出視訊_流時,用 以事先暫且累積PES封包之緩衝器。從TB對MB傳輸資料 時’去除TS封包之TS標頭。 基本緩衝器(EB)56係儲存處於編碼狀態之視訊存取單 元之緩衝器。從MB對EB傳輸f料時,去除pES標頭。 解碼器核心57係'於特定解碼時_TS),解碼視訊串滴 各個之視訊存取單it,藉此做成圖細場圖像。受到多工 而成為AV剪輯之視訊串流之壓縮編碼形式包括脱、 MPEG4AVC、VC1等’因此_流耻來切換視訊_ 器57之解碼方法。_構成基礎視圖視訊串流之圖片資剩 時,視訊解碼器57係、利用存在於未來方向或過去方區 片資料作為參考圖片,谁;® 進仃移Μ償。然後,解碼 依視圖視訊串紅各個圈片f料時,視訊解碼器 構成基礎視圖概串流之資料作為參考圖片,、 動補償。如此,若解碼圖片資料,則視訊解碼器57= 124 201123841 解碼之圖幀/圖場圖像傳輸至DPB59,將在顯示時刻(PTS) 之時序相對應的圖幀/圖場傳輸至圖片切換器。
緩衝器切換器5 8係使用視訊解碼器5 7解碼視訊存取單 元時,所取得的解碼切換資訊,決定從EB53、EB56之何者 抽出下一存取單元,在分派給視訊存取單元之解碼時刻 (DTS)之時序,將存於EB53、啦6之圖片傳輸至視訊解碼 器5 7。左視圖視訊串流與右視圖視訊牟流之D T S係設定成 夺,輛上,以圖片為單位交替出現,因此例如忽視DTS 提早解碼時,宜以圖片為單位將視訊存取單元傳輸至 視訊解碼器57。 解^圖片緩衝器(DpB)59係事先暫且保持已解碼之圖 測編器。視訊解碼器57係於解碼經圖片間預 解等視贿料科,為了參考已經 的圖:=ΓΓ將傳輸自視訊解碼器_^ 為左視料=面視喊㈣,料h去處切換 疋也m面、右視圖視訊截面。 非壓m左視圖的串流時, 串流時,視圖視訊截面,右視_ 敎述關圖片資料瞬間寫出到右視圖視訊截面。 情況下,僅切2 視訊解碼器之動作°LR方式的 情況下,停止處:、=輸出,成為 換物顯示。其/度貝訊’若未附加深度資訊 ’則可切 不同,因此進行二由於以方式與深度方式所需要的資料 相互切換時,須再選擇所解,串流。 125 201123841 接著,說明關於再生裝置之解碼器及戴面記憶體的規 模。 裝置構成採1解码器亦或2解碼器、採i截面亦或2截 面’係依串流類別與立體視覺方式之纪合而改變。 採用3D-LR方式時,若MVC視訊串流為再生對象,則 成為1解碼器+2截面構成。 M3D-冰度方柄,亦成為丨解竭器+2截面構成,並 需要視差圖像生成b於主要視訊串流、次要視訊串流, 此亦同理。 於MVdfl串流’裝置構成採i解碼器,此係由於實現 各個壓縮圖片資料之巨集塊之移動補償時,利用非壓縮之 左視圖視tfim面及非壓縮之域圖視喊面作為參考圖 像於解碼圖片緩衝器,儲存有作為參考圖像之非壓縮之 左視圖11 >}資料及非壓縮之右視圖圖片資料。 以上係關於視訊解碼H、視訊截面的說明。 PG串机之再生裝置之構成係於採用i截面+偏移方式 時’成為1解碼器+1截面構成。採用3D-LR方式、3D-深度 方式時,成為2解碼器+2截面構成。 同樣地,串流之再生裝置構成係於3D_LR方式時,成 為2解碼α+2截面構成。另,於採w戴面+偏移方式時,成 為1解碼器+1截面構成。 於文本字幕串流之再生裝置構成,不存在3D_LR方 $於1截面+偏移模式時,成為1解碼器+1截面構成。於3D-冰度方式時,成為1解碼器+2截面構成。 126 201123841 接著’說明關於PG_流之内部構成、及解碼PG串流之 PG解碼器之内部構成。 左視圖PG串流、右視圖PG串流均包含複數個顯示集 σ。顯示集合係指構成1個畫面顯示之功能區段的集合體。 功能區段係儲存於約2Κ位元組之PES封包之承載區,並供 給至解碼器’利用DTs、PTS進行再生控制之處理單位。 顯示集合包括以下類型。 Α·紀元開始(eP〇ch-start)之顯示集合 紀元開始之顯示集合係重設圖形解碼器之組成緩衝 器碼資料緩衝器、圖形截面,令記憶體管理開始之功能 區'^之集合體,包含晝面構成所必需的所有功能區段。 Β· 一般案例之顯示集合 …Γ般案例之顯示集合係指維持繼續圖形解碼器之組成 二衝裔4資料緩衝器、圖形截面之記憶體管理,並進行 :面構成之顯不集合,包含作為與先行顯示集合之差分之 C.獲取點之顯示集合 顯示點之顯示隹人a hτ 區段人、3構朗必需的所有功能 資且係不令圖形解碼器之組成緩衝器、碼 顯示集合不同内容 :=二I —管理重設之顯示集合。於 X取點之顯7^集合’亦可存在與前一 之功能區段。 紀元延續之顯示集合 紀凡延續之顯示集合係於許可阳串流再生之播放項 127 201123841 a 、與緊接於其前之播放項目之連接狀態為伴隨有徹底切 斷之無縫連接(〇>5)時’意在表示令再生裝置“成缓衝 裔、碼以梭衝11、物件緩脑、圖職面之記憶體管理 維持繼續。此時,於物件緩衝器、圖形截面上所獲得的圖 形物件不被棄置而存續於物件緩肺、圖形截面上。 於左視圖與右視圆,對STC序列之再生時間轴之同一 時點,分派該等顯示集合之起點·終點。然後於左視圖 PG串流、右視圖pg争流,存在於時間軸上相同時點之顯示 集合的類型係成為同-類型。總言之,若左視圖側之顯示 集合為紀元開始之顯示集合,則於STC序列之時間軸,相 同時點之右視圖側之顯示集合成為紀元開始之顯示集合 又,若左視圖側之顯示集合為獲取點之顯示集合,則 於STC序列之時間軸,相同時點之右視圖側之獲取點亦成 為獲取點之顯示集合。 各顯示集合包含複數個功能區段。該複數個功能區段 包括以下區段。 (1) 物件定義區段 物件定義區段係定義圖形物件之功能區段。圖形定義 區段係藉由利用碼值及該碼值的長度,來定義圖形物件。 (2) 色盤定義區段 色盤定義區段包含色盤資料,係表示各碼值與亮度、 紅色差•藍色差之對應關係者。於左視圖圖形_流之色盤 定義區段與右視圖圖形串流之色盤定義區段,碼值與亮度 及色差之對應關係設定為同一内容。 128 201123841 (3)視窗定義區段 視窗定義區段传 物件之、、以在晝面上,展開非壓縮之圖形 籾忏之戠面δ己憶體,定 段。圖形物件的騎J為視"之矩形外框之功能區 視窗外部,益法進行:該戴面記憶體之内部,於該 套進仃圖形物件的描繪。 窗二=Γ記憶體之—部分,作為圖形顯示用之視 、置無須進行截面全體之圖形描繪。僅對於 某t小有限的視窗’進行圖形描繪即可。可省略顯示用平 面中之視窗以外部分之描繪,因此再生襄置側之軟體負擔 大為減輕。 (4) 晝面構成區段 畫面構成區段係規定利用圖形物件之晝面構成之功能 區段’包含對於圖形解碼器之組成控制器之複數個控制項 目。晝面構成區段係規定圖形串流之顯示集合的詳細,成 且規定利額形物件之晝面構成之功“段。該畫面構成 包括剪入/f出、淡入/淡出、色彩改變、捲動、擦入/擦出, 藉由伴隨著利用畫面構成區段之畫面構成,可實現逐漸抹 除某字幕,同時令下個字幕顯示之顯示效果。 (5) 結束區段 位於屬於1個顯示集合之複數個功能區段之最尾端之 功能區段。再生裝置係將畫面構成區段至該結束區段,作 為構成1個顯示集合之功能區段來解釋。 於PG串流’顯示集合之開始時點係藉由儲存有畫面構 成區段之PES封包之DTS來特定’顯示集合之終了時點係料 201123841
由儲存有晝面構成區段之pES封包之PTS來特定U 左視圖圖形串流及右視圖圖形串流為封包化基本串流 (PES),畫面構成區段儲存於pES封包,儲存有畫面構成區 段之PES封包之pTS係表示,何時執行利用晝面構成區段之 顯示集合所進行的顯示。 儲存有畫面構成區段之PES封包之PTS的值,係於左視 圖視訊串流及右視圖視訊串流成為同一内容。 • PG解碼器之解碼器模型 PG解碼器包含:r編碼資料緩衝器」,係儲存從串流 讀出之功能區段者;「串流圖形處理器」’係解碼晝面構成 區段而獲得圖形物件者;「物件緩_」,係儲^由 所獲得的圖形物件者;「組成緩衝器」,係儲存畫=構成區 段者;及「組成控制器」’係解讀儲存於組成緩衝器之晝: 構成區段’根據該等畫面構成區段之控制項目, 件緩衝器所獲得的圖形物件,於圖 ; ^ „ 上進仃晝面構成 月b區段之TS封包之輸入速度 於圖形解碼II後段存在有:圖形截面;CLu 據色盤定義區段,將構成儲存於_戴面之圖 : ::部轉換為亮度.色差者;及移位部’係截面移位用 理:解碼於具圖形 於物件緩衝器寫入圖 p G串流之管線可同時執行以下處 解碼器之顯示集合之物件定義區段, 130 训123841 /物件之處理;及從物件緩衝器對^ 由解碼屬於先行顯示集合之物件義錢體,寫入糟 件之處理。 物件夂義區段所獲得的圖形物 第56圖係表示PG串流之圖形解 ⑷係用以採i截面+偏移方式顯示之解:構:圖: 顯示〈解碼賴型。同圖(b)係 乂方式之資料的情況下之解碼器模型。 於本:中’相當於圖形解瑪器主體的部分係由黑外框 目:於圖形解碼器後段的部分係由一點短劃線圍住。 、圖⑷圖形解碼益為1解碼器構成,圖形截面亦為 自八μ成然而’圖械面之輸出係於左視圖、右視圖各 刀开對於各個左視圖輸出、右視圖輸出附加有移位部。 ;同圖(b) ’傳輸緩衝器一圖形解碼器—圖形截面_cLuT 有1組,可分別獨立處理左視圖串流、右視圖串流。 由於偏移序列包含於相依視圖視訊串流,因此於截面 偏,形式下’圖形解碼器成為i解碼器構成,該"固圖形解 碼器的輸th係於左簡與右視圖切換。 PG解碼器之2D/3D切換時之動作如下。 1. 1戴面+偏移模式與2D模式之相互切換時 ,無縫地切 換。此係藉由讓偏移無效而進行。 131 1 於3D-LR模式與2D模式,由於伴隨有i>ID切換 ,因此 字幕暫時消失。此係與串流切換相同。 3_於3D-LR模式與L模式,切換為僅有L(基礎視圖側) 的顯示。雖可無縫地切換,但顯示位置可能偏離。 於3D-深度模式及2D模式,即便於2D顯示中,若事先 201123841 於背景解碼麵於灰階之深度資訊,生成左㈣之圖形物 件、右視圖之圖形物件,仍可無縫地進行圖形物件的切換。 以PG解碼器值行模式切換時,容易從深度模式、1截面 +偏移模式切換為2D模式。然而,3D_LR方式的情況下由於 立體視覺之Η形物件與2D之_物件列,因此須變更切 換時所處理的PG串流,有發生到供給下—pG$流前未顯示 圖形物件之可能性。 在不欲設置不顯示圖形物件之期間的情況下亦可不 切換為從正峨权则義件而僅城為基礎視圖之圖 形物件。此情況下’㈣有看_偏左㈣像之可能性。 將立體視覺PG切換S2DPG時,亦可事先於管理資料設定利 用何種方法。 •文枣子綦解碼器之解碼器模型。 文本=幕串流係由複數個字幕描述資料所構成。 - 字幕解碼器包含:「字幕處理^」,係從字幕指 資料^離出文本碼與控制f訊者;「管理資訊緩衝器 係儲子财幕描述資料分離的文本碼者;「文本轉列器 係利用字型資料’將其审。 去·「 < B資汛緩衝器内之文本碼展開為 Γι「h件緩衝益」,係儲存藉由展開所獲得的位元 1 *㈣部」L從字幕描述資料分離的控 #執仃沿著時間轴之文本字幕再生的控制者。 於文本字幕解碼㈣段 係進行字型資料之㈣4㈣駿衝( 字幕串流之仰包=^帽」」係調整構成文 雨速度者,及「子幕預載緩衝器 132 201123841 係用以早於播放項目再生而事先將文本字幕串流預載者。 於圖形解碼器後段存在有:「圖形截面」;「CLUT部」, 係根據色盤定義區段,將構成儲存於圖形截面之圖形物件 之像素碼,轉換為亮度•色差者;及移位部,係截面移位 用之移位部。 第57圖係表示文本字幕解碼器之内部構成。同圖(a)係 表示1截面+偏移模式之文本字幕解碼器之解碼器模型;同 圖(b)係表示3D-LR方式之文本字幕解碼器之解碼器模型。 於本圖中,相當於文本字幕解碼器主體的部分係由黑外框 圍住,相當於文本字幕解碼器後段的部分係由一點短劃線 圍住。相當於文本字幕解碼器前段的部分係由虛線外框圍 住。 於同圖(a),圖形截面之輸出係於左視圖、右視圖各自 分開,對於各個左視圖輸出、右視圖輸出附加有移位部。 於同圖(b),存在有左視圖用之圖形截面及右視圖用之 圖形截面,由文本字幕解碼器所展開的位元圖寫入於該等 各自之圖形截面。於3D-LR方式之文本字幕解碼器,色彩 色盤資訊受到延伸,加入字幕用之文字/背景/邊框3色,於 深度用追加3色。然後,轉列引擎可描繪字幕。 文本字幕串流係與PG串流不同,不送出圖形資料作為 位元圖,藉由送出字型資料及文字碼而於轉列引擎生成字 幕,因此字幕之立體視覺係藉由1截面+偏移模式來實現。 以1截面+偏移模式顯示文本字幕時,模式切換係藉由切換 字型集合或切換轉列方式而進行。亦有藉由定義L/R字型集 133 201123841 合或開放GL字型集合來進行模式切換的方法。轉列引擎亦 有可能進行3D顯示。 於3D-LR模式,藉由定義於基礎視圖與相依視圖獨立 之字型集合或開放GL字型集合,來實現立體視覺再生。 又,轉列引擎亦可藉由描繪3D字型來實現立體視覺再生。 3D-深度模式的情況下,則以轉列引擎生成深度影像。 以上係關於文本字幕串流及文本字幕解碼器的說明。 接下來,說明關於IG串流之内部構成及IG解碼器之構成。 .IG串流 左視圖IG串流、右視圖IG串流均包含複數個顯示集 合,各顯示集合包含複數個功能區段。與PG串流相同,於 顯示集合存在有紀元開始之顯示集合、一般案例之顯示集 合、獲取點之顯示集合、紀元延續之顯示集合》 屬於該等顯示集合之複數個功能區段包括以下種類。 (1) 物件定義區段 該物件定義區段係與PG串流相同,而IG串流之圖形物 件係定義按钮元件之一般狀態、選擇狀態、有效狀態。物 件定義區段係定義按鈕元件之相同狀態者彼此、構成相同 效果影像者彼此被群組化。聚集定義相同狀態之物件定義 區段之群組稱為圖形資料集合體。 (2) 色盤定義區段 色盤定義區段係與PG串流相同。 (3) 對話控制區段 對話控制區段包含複數個頁資訊;複數個頁資訊係規 134 201123841 定多頁選單之晝面構成之資訊;各頁資訊包含:效果序列 複數個按鈕資訊及色盤識別符之參考值。 按I丑資訊係令圖形物件顯示作為按鈕元件之—狀離, 藉此於構成多頁選單之各頁上’實現對話性晝面構成之資 訊。 效果序列係利用圖形物件,構成早於顯示對應於頁資 訊之頁而再生之進入效果、或於顯示該頁後而再生之離開 效果,其包含效果資訊。 效果資sfl係規定再生進入效果或離開效果時之各個書 面構成之資訊,其包含:畫面構成物件,係規定於圖形截 面上之視窗定義區段所定義的視窗(部分區域),應進行何種 晝面構成者;及效果期間資訊,係表示與同區域之下一畫 面構成之時間間隔者。 效果序列之畫面構成物件係規定與1>(3串流之畫面構成 區段相同的控制内容《物件定義區段中,定義用於前述進 入效果之圖形物件者,係於圖形資料串中,較定義用於按 鈕元件之圖形物件之物件定義區段配置於更前方。 頁資訊之各按紐資訊係藉由令圖形物件作為按鈕元件 之一狀態而顯示,以便於構成多頁選單之各頁上,實現對 話性畫面構成之資訊。前述按鈕資訊包含設定按鈕頁指 令;設定按鈕頁指令係於相對應之按鈕元件成為有效狀態 時,令再生裝置進行將第1頁以外之其他頁設定作為現頁之 處理之指令。 於IG串流再生時,若欲於每頁變更截面移位之偏移, 135 201123841 則事先於按钮資訊嵌入變更偏移之導航指令, 訊,事先規定導航指令之自動有效頁。藉此可::鈕資 規定於IG串流之串流登錄資訊之偏移的值或方向。動變更 (4)結束區段 ° 位於屬於1個顯示集合之複數個功能區段之 ☆ 功能區段。料控寵段至該結束區段 力而之 示集合之功能區段來解釋。 ' 成1個顯 於左視圖圖形串流、右視圖圖形串 區段之控制項目包括:按㈣近資訊、選擇逾_=/ 使用者逾時刪除、組成逾時資訊。 ° 1.按鈕接近資訊 按純近資訊係某按紐成為選擇狀態有指示上下左 右方向之任—者之按鍵操作時,應料何個按紐成為選ί 狀態之資訊。 2. 選擇逾時時間戳記 選擇逾時時間戳記係表示自動啟用現頁之按紐元件, 用以令再生裝置執行設定按钮頁指令之逾時時間。 3. 使用者逾時刪除 使用者逾時刪除係用以使現頁回到第ιπ,以成為僅顯 示第1頁之狀態之逾時時間。 4. 組成逾時資訊 組成逾時資訊係表示令對話控制區段之對話性畫面顯 示終了的時間。於IG串流,顯示集合之開始時點係:由儲 存有對話控制區段之PES封包之DTS來特定,顯示集合之終 136 201123841 了時間係藉由對话控制區段之組成逾時時刻來特^。於左 視圖、右視圖,該等DTS與組成逾時時刻設定為同—時點= • IG解碼器之解碼器模型 ;IG解碼益包含:「編碼資料緩衝器」,係儲存從a串流 "貝出之功趣段者;「串流圖形處理器」,係解碼晝面構成 區=獲得圖形物件者;「物件緩衝器」,係儲存 =付的_物件者;「組錢肺」,係儲存晝面構成區 又及組成控制器」,係解讀儲存於組成緩衝器之晝面 構成區段’根據該等晝面構航段之控制項目,利用 件緩衝器所獲得的、物 很㈣圖轉件,於圖形截面上進行畫面構成 者0 於該圖形截面前段存在「傳輸緩衝器 用以調整構成 功能區段之TS封包之輪入速度 於圖形解碼ϋ後段存在有:「圖職面」;「咖 係根據色盤定義區段,將構A 邛」’ ㈣成儲存於圖職面之圖形物件 之像素碼,轉換為亮度•色# 明仵 位用之移位部。 者,及移位部」,係截面移 解碼^之解抑模型。於本圖中,相 碼器後段的部分係由_$短劃田於圖形解 段的部分係、由虛線外_住。 解碼㈣ 第58⑷圖係表示用以藉由i戴面 形式顯示聊式㈣串紅 偏賴式方式,以以 + 解碼斋模型。同圖(b)係表干雜 為IG串流之解碼賴 f表不雖 具不LR方式之資料時之解碼 137 201123841 器模型》 «解碼n包含為了從程式控制選單 訊數之值反映於偏移之電路^ 同圖(b)為2解碼器模型’可藉由指令來變更偏移值。 故,此夠以指令改變選單之深度資訊。偏移值亦被賦予左 右不同的值。另’深度方柄情況下,偏移無效。 來碼器之組合控制器係利用對應於選擇狀態之圖 二體之圆形資料’顯示存在於對話晝面之按鈕元 中成為現按紐者,並利用對應於—般狀態之圖形資料集 合體,顯示其以外夕垃知-y、 、 知7°件’藉此實現對話畫面之初始 顯示。 意在指定上下左右4方向之某一方向之使用者操作出 =時:於按峨碼暫抑,寫化於現按㈣邊之一= ^之按紐辑中’存在於藉由使用者操作所指定方向之按 ㈣碼,11㈣寫心令新•雜蚁按紐元件 從一般狀態變化為選擇狀態。 牛 7話畫面中,意在令成為選擇狀態之触元 態之使用者操作出現時,從圖形資料集合體取出 =该有效狀態之圖形資料以供顯示,藉此實現對話畫面 該等對話晝面更新須於左視圖、右視圆共通地 用賴型,宜在左視_之圖轉碼器、右視圖 用之圖轉碼H,肋成㈣器予以共通化。 該情況下,立體視覺iG串流之左視圖、右視圖之導航 138 201123841 指令同一化 為同—構成 藉由使则與2D用之_物件之按紐構成成 以實現相互切換。 於2DiG技與立體視覺iG串流,若導航指令及她資 戒之屬性•數目等相同,則可僅切換圖形物件之顯示。從 3D-LR模式切換為僅有L圖像時,雖可無再載人而切換,伸 顯示位置可能偏離。宜以於旗標表示要採用何者之一 製作者意圖,再生裝置根據該旗標進行切換。 以下整理出模式切換時之留意事項。 .於1截面+偏移模式與2D模式之切換中,科生再載入。 此係由於不職人1(}φ流’僅使得偏移無效化。 •於3D-LR模式與2D模式之切換中,由於串流不同,因此 發生再載入。 •於3D-深度模式與鞭間,若預載時已完成深度資訊解 碼,則不發生再載入。 •即便採用於AV再生開始前,於記憶體載人之預載模型, 若伴隨於2D模式/3D模式之切換而發生^流之再载入, 則會發生不保證無縫再生之案例。 以上係關於IG串流及IG解碼器的說明。接下來,說明 關於截面記憶體之詳細。 説明關於1截面+偏移模式方式之截面記憶體構成。 截面記憶體之層合成係藉由對於層模型之階層間所有 組合’執行令财於階和^面記Μ之像素資料之像 素值重㈣處理而進行。合成部之層合成係藉由對於層 模型之2撕層之所有組合,執行令儲存於2個階層之截面 139 201123841 。己隐體之像素資料之像素值重疊的處理而進行。 階層間之重疊係對位於某階層之截面記憶體之線單位 之像素值’作為權重而細穿透率α,並且對位於其低位階 層之截面記憶體之線單位之像素值,作為權重而乘以(1_穿 _α) ’加算該等撕加有亮«重之像素值彼此,將加 舁結果設為該階層之線單位之像素之像素值的處理。藉由 在位於於層模型相鄰接之2個階層之線單位之像素彼此 間,重複該階層間之重疊,藉此實現上述層合成。 么除了如上述之CLUT部、移位部以外,截面記憶體後段 係為了實現層合賴包含:用以對各個像素值乘 之乘算部、用以進行像素彼此之加算之加算部、及用以進 行次要視訊之定位•縮放變更之縮放&定位部。 第59圖係表示用以合成解碼器模型之輸出、以3d_lr =式輪出之電路構成。主要視訊截面、pG載面、i(}戴面、 次要視訊戴面之層模係由黑外框圍住,相當於戴面記憶 體後段之部分係由一點短劃線圍住。從本圖可知,如上述 之層模型存在有2組。又,可知相當於截面記憶體後段之部 位亦存在有2組。 由於層模型、截面記憶體後段存在有2組,因此 方式之截面記憶體構成係主要視訊截面、PG戴面、ig截 面、次要視訊戴面之各者分別區分為左視圖用與右視圖 用,該等截面記憶體之輸出之層合成分別針對左視圖、右 視圖而執行》 於次要視訊截面係與主要視訊截面相同,能夠以 140 201123841 3D-LR模式或3D-深度模式顯士 4 φ
任。伙顿可知,如上述之層模龍存在 截面s己憶體後段之部位存在有2組。 由一點短劃線圍 1組。又,相當於 右視圖僅存在共通的1個截面記,Μ。然後,對於該等左視 於1截面+偏移模式方式,主要視訊載面係準備有左視 圖與右視圖之主要視訊截面。關於次要視喊面、截面、 IG截面,則未區分為左視圖、右視圖之㈣,於左視圖、 圖輸出、右視圖輸出之各者,進行如上述之層合成。 由於再生裝置須支援B_D呈現模式、丨截面+偏移模式 雙方,因此作為再生裝置之硬體構成,基本上為2解碼器+2 截面的構成,再生裝置切換1截面+偏移模式、2D再生模式 時,使得1解碼器+1截面之組配中之一方無效而成為1解碼 器+ 1截面之構成。 發生從3D再生模式切換為2D再生模式之再生裝置之 構成’從2解碼器+2截面構成變化為1解碼器+ 1截面時,解 多工的對象僅有構成L圖像之TS封包。如此一來,透過3D 眼鏡收視L圖像、r圖像之使用者會在從3D再生模式切換為 141 201123841 2D再生模式時,突然僅可看到[圖像。 此情況下’由兩眼所進行的TV收視切換為單眼所進行 的TV收視’眼部負擔變大,亦出現感到冷顏的使用者。因 此,本實施形態係於切換時,將卿慮波器之對象從構成L 圖像之TS封包、構成R圖像之TS封包,切換為構成L圖像之 TS封包,並且重關形解碼器之記憶體管理。然後,於切 換中,暫且抹除子幕,以使上述冷顫不會發生。 如以上,若依據本實卿態,由於將解碼輯成從2解 碼器構成切換為1解碼⑽成時,暫且重設截面記憶體之字 幕,因此可緩和兩眼進行TV收視切換為單眼進行τν收視所 造成的眼部負擔。 (第5實施形態) 於本實施形態,說明關於用以製造到目前的實施形態 所說明的記錄媒體之形態,亦即記錄媒體之生產行為之形 態。 / 到目前的實施形態所說明的記錄媒體,可製作成經多 層化之光碟片之BD-ROM碟片、與bD_r〇m具再生相容性 之BD-RE碟片、BD-R碟片、AVC-HD媒體。 第61圖係表示經多層化之光碟片之内部構成。 第1層係表示經多層化之光碟片之一例之bd_r〇m碟 片,第2層係將存在於各記錄層上之螺旋磁軌往水平方向拉 長而描繪之圖。該等記錄層之螺旋磁軌被視為丨個連續的冊 (volume)區域。冊區域係由位於最内周之引入、位於最外周 142 201123841 之引出、存在於其間之第1記錄層之記錄區域、第2記錄層 之記錄區域、第3記錄層之記錄區域所構成。該等第1記錄 層之記錄區域、第2記錄層之記錄區域、第3記錄層之記錄 區域構成1個連續的邏輯位址空間。 冊區域係從開頭’以存取光碟的單位編上連號’該號 碼稱為邏輯位址。從光碟讀出資料係藉由指定邏輯位址而 進行。在此,如BD-ROM等讀取專用碟片的情況下,基本 上邏輯位置連續的磁區在光碟上之物理性配置亦連續。亦 即,邏輯位址連續的磁區之資料可不進行尋軌而讀出。但 於記錄層交界,即便邏輯位址連續,仍無法連續讀出。因 此,層交界之邏輯位址係預先登錄於記錄裝置。 冊區域係於引入區之後,緊接著記錄有檔案系統管理 資訊,接續於此而存在有檔案系統管理資訊所管理的分割 區域。檔案系統係以稱為目錄或檔案之單位,來表現碟片 上資料的機制,BD-ROM的情況下則藉由uDF(Universal Disc Format :通用碟片格式)來記錄。日常所使用的pc(個 人電腦)的情況下,亦透過稱為FAT或NTFS之檔案系統,於 電腦上表現採目錄或檔案的構造而記錄於硬碟上之資料, 提高使用性。藉由該檔案系統,可使用目錄、檔案構造來 讀出與一般PC同樣地記錄的邏輯資料。 第4層係表示以檔案系統管理之分割區域之記錄内 容。檔案系統區域中’於内周側存在非AV資料記錄區域。 於非AV資料記錄區域後,存在AV資料記錄區域。第5層係 表示該等非AV資料記錄區域及AV資料記錄區域之記錄内 143 201123841 容。於AV資料記錄區域,存在有構成Av檔案之延伸區。於 非AV資料記錄區域,存在有構成AV檔案以外之非AV檔案 之延伸區。 第62圖係表示以檔案系統為前提之光碟片之應用程式 格式。 BDMV目錄係記錄有bd-ROM所處理的TS或管理資訊 等資料之目錄。於BDMV目錄底下’存在有稱為 「PLAYLIST(播放串列)目錄」、r ClipinF(剪輯資訊)目 錄」、「STREAM(串流)目錄」、「BDj〇目錄」及「JAR目錄」 之5個子目錄,於BDMV目錄,配置有「index.bdmv」、 「MovieObject.bdmv」2種標案。 「index.bdmv(檔案名固定)」係儲存有索引表。 「MovieObject.bdmv(稽案名固定)」係儲存〖個以上之 電影物件。電影物件係在將指令解譯器作為控制主體之動 作模式(HDMV模式)下,規定應進行再生裝置之控制程序之 程式擋案,包含遮罩旗標,其係由使用者發出1個以上之指 令、對於GUI之選單呼叫、標題呼叫時,規定是否將該等呼 叫予以遮罩。 於「BDJO目錄」’存在被賦予副檔名bdj〇之程式槽案 (xxxxx.bdj〇[“xxxxx”為可變,副檔名“為固定])。該程 式檔案儲存有BD_j物件,係規定於BD_j模式下,再生裝置 所應進行的控制程序。該BD-J物件包含「應用程式管理 表」。BD〜J物件内之「應用程式管理表」係令再生裝置,進 仃以標題作為生存區間之應用程式訊號化的表。應用程式 144 201123841 S理表包含:『應用程式識別符』,係於對應於BD-J物件之 私題成為現標題時,特定出應令其動作之應用程式者;及 『控制碼』。藉由應用程式管理表規定生存區間之BD-J應用 程式’特別稱為『BD—j應用程式』。控制碼係於設定為自動 執仃(Am〇Run)時,意在表示將該應用程式載入至堆積記憶 體,然後自動啟動,並於設定為現狀(Present)時,意在表示 將该應用程式載入至堆積記憶體,然後應等待來自其他應 用程式的呼叫才啟動。另,於BD_;應用程式中,包括即使 軚題已結束,但其動作仍不結束之應用程式。該應用程式 稱為“非標題定界應用程式”。 儲存於BDMV目錄底下之JAR目錄之Java(註冊商標)歸 構構案(YYYY.jar),係相當於該Java(註冊商標)應用程 實體。 應用程式為例如Java(註冊商標)應用程式,由載入至虛 擬機器之堆積區域(亦稱為工作記憶體)之i個以上的幻的程 式所組成。由載入至該工作記憶體之xkt程式、及資料而構 戍應用程式。 於「PLAYLIST目錄」存在有被賦予副檔名mpls之播放 串列資訊檔案(xxxxX_mPls[‘‘xxxxx,,為可變,副檔名“市⑴广 為固定])。 於「CLIPINF目錄」,存在有被賦予副檔名dpi之剪輯 資訊檔案(xxxxx. dpi rxxxxx”為可變,副檔名“dpi,,為固 定])。 「STREAM目錄」係儲存有串流檔案之目錄,於本目 145 201123841 錄,以xxxxx.m2ts([“xxxxx”為可變’副檔名“m2ts”為固定]) 及xxxxx.ssif([“xxxxx”為可變,副檔名“sslf’為固定])的形式 儲存串流檔案。 如上述之;f當案係於分割區域中,形成在物理上連續之 磁區上。分割區域係由「記錄有檔案集合描述符之區域」、 「記錄有终端描述符之區域」、「ROOT(根)目錄區域」' 「BDMV目錄區域」、「JAR目錄區域」、「BDJO目錄區域」、 「PLAYLIST(播放串列)目錄區域」、「CLIPINF(剪輯資訊) 目錄區域」及「STREAM(串流)目錄區域」所構成,其係藉 由檔案系統所存取的區域。以下說明關於該等區域。 「檐案集合描述符」包含目錄區域中’指示記錄有 ROOT目錄之檔案分錄之磁區之邏輯塊號碼(LBN)。「終端 描述符」係表示擋案集合描述符的終端。 接著’說明各目錄區域的詳細。如上述之複數個目錄 區域每個均具有共通的内部構成。總言之,「目錄區域」係 由標案分錄」、「目錄檔案」及「關於低位槽案之樓案記 錄區域」所構成。 「檔案分錄」包含「描述符標籤」、「丨CB標籤」及「分 配描述符」。 「^述符彳錢」係意在表示本身城案分錄的標籤。 ICB‘籤」係表示關於權案分錄本身之屬性資訊。 刀配&述#」包含表示目錄檔案之記錄位置之邏輯 鬼°虎%( BN)卩上係關於標案分錄的說明。接下來說明 關於目錄樓案的詳細。 146 201123841 目錄檔案」包含「關於低位檔案之檔案識別描述符」 及「低位檔案之檔案識別描述符」。 「關於低位檔案之檔案識別描述符」係用以存取位於 本身底下之低位分錄之參考資訊,由表示該低位目錄之識 別資訊、該低位目錄之目錄名之長度、表示低位目錄之檔 案分錄記錄於何個邏輯塊號碼之檔案分錄位址、及該低位 目錄之目錄名所構成。 「低位檔案之檔案識別描述符」係用以存取位於本身 底下之檔案之參考資訊,由表示該低位檔案之識別資訊、 該低位檔案名之長度、關於低位檔案之㈣分錄記錄於何 個邏輯塊號碼之標案分錄位址、及低位構案之㈣名所構 由於在各目錄之目錄檔案之檔案識別描述符表示有 低位目錄及低位槽案之稽案分錄記錄於何個邏輯塊,因此 若追溯該檔案識別描述符,則可從R 〇 Ο τ目錄之檔案八錄到 達BDMV目錄之檔案分錄,或可&BDMVg錄之檔S分錄 到達PLAYLIST目錄之檔案分錄。同樣地,亦可到達 錄、BDJO目錄、CLIPINF目錄、STREAM目錄之擋案分錄目。 「關於低位㈣之㈣記魄域」,制旨^有=於某 目錄底下之低位檔案的實體之區域,复#技+ ' μ '、5己錄有關於該低位 檔案之「檔案分錄」、及藉由檔案分錄辭理的丨個以上 「延伸區」。 之 本申請案之著眼點之串流標案係存在於該檔案所歸屬 的分錄之分錄區域内之檔案記錄區域,开^」 丁韁由追溯目錄檔 147 201123841 案之檔案識別描述符、及檔案分錄之分配插述符來存取。 以上係關於記錄媒體之内部構成的說明。接下來說 明關於第61®及第62®所示之記錄媒體之製作方式,亦即 說明關於記錄方法的形態。 關於本實施形態之記錄方法不僅包含即時地做成如上 述之AV樓案、非AV檔案,直接寫入於AV資料記錄區域、 非AV資料記錄區域之即時記錄,亦包含事前做成應記錄於 冊區域之位元串流之全貌’依據該位元串流做成母盤碟 片’壓製該母盤碟片以量產光碟片之預設格式記錄。關於 本發明之記錄媒體係藉由即時記錄之記錄方法,亦是藉由 預設格式之記錄方法而特定。 藉由即使記錄技術實現記錄方法時,執行該記錄方法 之記錄裝置係即時地做成Av剪輯,並記錄於 BD-R、硬碟、半導體記憶卡。 該情況下’ AV剪輯係記錄m卩時編碼類比輸入訊號 所獲得的ts ’或記錄《置將數位輸人之以部分化所獲 得TS均可。執行即時記錄之記錄裝置包含:視訊編碼器, 係編碼視訊訊號以獲得視訊_流者;音訊編碼器,係編碼 音訊訊號以獲得音訊串流者;多工器,係將視訊串流、音 Λ串流等予以多工,以獲得^[1>£(}2_1^者;及來源解封包 處理器,係將構成MPEG2-TS形式之數位串流之TS封包, 轉換為來源封包者。轉換為來源封包形式2MPEG2數位串 /爪儲存於AV剪輯檔案,並寫入於BD一RE、BD_R等。在寫 入數位串流的同時,記錄裝置之控制部係於記憶體上,進 148 201123841 行生成剪輯資訊或播放串㈣朗處理。具體而言,由使 用者要求錄影處理時,控制部係、於BD_RE、BD—R上,請求 AV剪輯之串流檔案及剪輯資訊檔案。 然後,若從輸入自裝置外部之TS檢測到視訊串流之 GOP之開頭位置’或由編碼器生成視訊串流之G〇p,則記 錄裝置之控制部係於該G〇P,取得位於開頭之框内圖片之 PTS、及儲存有該(3〇15之開頭部分之來源封包之封包號碼, 將遠PTS及封包號碼之組配,作為EP_PTS分錄及EP_SPN分 錄之組配’追加記錄於剪輯資訊檔案之分錄圖。以後每當 生成GOP時’即於剪輯資訊檔案之分錄圖,追加記錄 EP_PTS分錄及EP_SPN分錄之組配。此時,GOP之開頭為 IDR圖片時,於EP_PTS分錄及EP_SPN分錄之組配,追加記 錄設定為“開啟”之角度改變旗標。若GOP之開頭非為IDR圖 片時,則於EP_PTS分錄及EP_SPN分錄之組配,追加記錄 設定為“關閉’’之角度改變旗標。 又,關於剪輯資訊檔案之串流之屬性資訊,係按照應 記錄之串流的屬性來設定。如以上生成AV剪輯、剪輯資訊 並寫入於於BD-RE、BD-R,則經由該剪輯資訊内之分錄 圖,生成定義再生路徑之播放串流資訊並寫入於BD-RE、 BD-R。藉由於即時記錄技術中執行該類處理,可於 BD—RE、BD—R上獲得AV剪輯一剪輯資訊一播放串列資訊之 階層構造。 以上係執行即時記錄之記錄方法之記錄裝置。接下 來,說明關於預設格式記錄之記錄方法。 149 201123841 預设格式記錄之記錄方法係如包含編輯階段之光碟片 之製造方法。 第63圖係表示光碟片之§己錄方法。同圖(a)係表示預設 格式έ己錄之記錄方法之流程圖,其表示光碟片之製造方法 之處理程序。光碟片之製造方法包含:編輯步驟、簽名步 驟、媒體鍵取得步.驟、媒體鍵加密步驟、物理格式化步驟、 識別符嵌入步驟、刻版步驟及壓片步驟。 編輯步驟S201係做成表示光碟片之冊區域全貌之位元 串流。 簽名步驟S202係於製造光碟片時’對於AACSLa進行 簽名要求。具體而言,抽出位元串流之一步驟並送交AACS LA。在此,AACS LA係管理下一代數位家電機器之著作物 保護技術之授權的團體。利用編輯裝置進行光碟片之編輯 之編輯側、及利用刻版裝置執行刻版之刻版側,係從AACS LA接受授權提供。又,管理媒體鍵、無效化資訊。然後, 取得由AACS LA簽名的位元串流之一部分。 媒體鍵取得步驟S203係從AACS LA取得媒體鍵。媒體 鍵並非始終使用固有的媒體鍵,當迄今所製造的光碟片片 數達到一定片數時’即更新為新的媒體鍵。藉由更新媒體 鍵’可排除特定製造者或機器’即便萬一密碼鍵被破解, 藉由利用無效化資訊’仍可使得其本身無效化。 媒體鍵加密步驟S204係利用藉由媒體鍵取得步驟所取 得的媒體鍵,加密用於位元串流加密的鍵。 物理格式化步驟S205係對於位元串流執行物理格式 150 201123841 化。 識別符後入步職06係於收錄在光碟片之位元串流, 嵌入-般機器無法檢測之唯—的識別符作為電子浮水印。 藉此,可防止不法刻版所進行的盜版量產。 刻版步驟·係製作光碟片之母盤。首先,於玻璃基 板上形成綠触層,對於該光抗_,以對應於所需溝槽 或凹坑的方式,照射雷射光而曝光,施以顯影處理。該^ 槽或凹坑係、表示受到8-16調變之位元串流之各位元值。其 後,依據藉由此類雷射切㈣形成有對應於溝槽或凹坑^ 凹凸之光抗蝕,製作光碟片之母盤。 大量生產作為其 壓片步驟S208係利用光碟片之母盤 複製之光碟片。 第63(b)圖係表示不大量生產光碟片,一般使用者利用 PC ’於BD一RE、BD—R等,記錄到目前的實施形態所述之 各種檔案時之預設格式記錄之記錄方法的處理程序。若盘 同圖⑷比較,同圖⑻之記錄方法中不存在物理格式化(步驟 S205)、刻版(步驟S207)、壓片(步驟S2〇8)而存在有各檔案 之寫入階段(步驟S209) 〇 田’、 接著,說明關於編輯階段。 第64圖係表示編輯階段之處理程序之流程圖。 於步驟議,定義關於主TS及子TS之卷集合。“卷”㈣) 係指健存有作為基本技的素材之㈣之财於編輯系 統中’存在於區域網路上之驅動器上。由3D攝影機所拍攝 之L圖像或R圖像、攝影時錄音的聲音、或其後配音所收錄 151 201123841 的聲音、每種語言的字幕、選單經資料化者,係相當於該 等卷。“卷集合,,係對於素材標案之鏈結群,其表示應受到 多工而成為1個TS之基本串流之集合體。在此,針對主TS、 子TS之各者定義卷集合。 於步驟S102,定義播放項目、子播放項目之原型,定 義播放項目、子播放項目之再生順序,藉此定義主路徑、 路彳二之原型。播放項目之原型的定義係於平面視覺再生 模式中’ Μ透過GUI,受理就_放項目應許可再生之卷 之才曰疋、及進入時間/離開時間之指定而進行。子播放項目 之原型的疋義係於立體視覺再生模式中,藉由透過Gui,受 理就該子_項目料可再生之卷之指定、及進人時間/離 開時間之指定而進行。 應許可再生之卷之指定係由在核取方塊,勾選卷集合 中之素材職之鍵結中應許可再生者之⑶丨所構成^此時, 與各卷相對應而顯示數值輸入攔。然後,藉由該數值輸入 攔,文理關於各卷之優先順位,將其設為對應於卷之優先 順位。從以上應許可再生之卷之設定及優先順位之設定, 生成串流選擇表、延伸串流選擇表。 進入時間及離開時間之指定係由記錄裝置執行以下處 理而進行,即於GIJI上,將基礎視圖視訊串流或相依視圖視 吼串流之時間軸予以圖形化而顯示,於已圖形化之時間軸 上,令滑動桿移動,從使用者受理該滑動桿之位置設定的 處理。 於步驟S103,由卷集合所指定的素材檔案予以編碼’ 152 201123841 藉此獲得複數個基本n料複數個基本_流包括:基 礎視圖視料流、相依視圖视訊串流' 應與該等基礎視^ 視訊串流、相依視圖視訊串流受到多工之音訊串流、?(}串 流、IG串流。 於步驟讀,由編碼所獲得的基本串流中,將與基本
視圖視訊_制於相同卷集合者,跟職礎視圖視訊串流 進行多工,藉此獲得1個主TS。 U 於步驟S105,由編碼所獲得的基本串流中,將與相依 視圖視訊串流屬於相同卷集合者,跟該相依視圖視訊串流 進行多工,藉此獲得1個子TS。 於步驟嶋,依據編碼及多工時所設定的參數, 剪輯資訊檔案之原型。 定義播放串流資訊 於步卿7’依據播放項目之原型,生成播放項目資 訊、子播放項目資訊,於該等播放項目資訊、子播放項目 資訊定義再生順序,藉衫成主路徑資訊、子路徑資气,
於播放項目資訊之做成中,為使受到多工而成為主TS 之基本串流中’㈣放項目之基本構造上應規定為在平面 視覺再生模式下再生者設定為可再生,而_放項目資訊 内生成核襲表。又嘴了規定基魏圖軸串流之再 生區間’於播放項目資訊記載由上述編輯作業賴定的進 入時間、離開時間。 TS之基本W ’於播放項: = 153 201123841 而於播放項目資 面視覺再生模式下再生者設定為可再生 訊之延伸資料时歧料流_表1放項目資訊、子 播放項目資訊係依據剪輯資訊檔案内之資訊而定義,因此 依據剪輯資訊檔案之原型來設定。 於步驟S108,將主TS、子Ts、剪輯資訊檔案之原型、 播放串流資訊之原型,轉換為按照特定應用格式之目錄擋 案群》 若經過以上過程生成主TS、子以、剪輯資訊播放項 目資訊、子播放項目資訊,藉由將主Ts、子ts轉換為各自 獨立之技㈣’將剪料訊轉換為剪輯資訊健,將播 放項目資訊及子播放項目資訊轉料播放串流資訊樓案, 以獲得應記錄於記錄媒體之一連串檔案集合。 從線性函數、拋物線函數之函數式’算出各圖鳩之景 深時’事先於記錄裝置之應用程式介面,定義從視訊串流 之圖巾貞時㈣出每狀景深,制函數給予基礎視 圖視訊串流之關時刻,算出錢㈣刻之景深。然後, 將所算出的各個景深’轉換為截面偏移值、偏移方向資訊。 其後,於視訊串流之編碼階段執行時,若將藉由上述 轉換所獲得的截面偏移值、偏移方向資訊,記載於各G〇p 之7L資料’即可事先於編碼的過程中做成偏移序列。 第65圖係表示AV檔案寫入階段之處理程序。於即時記 ’令之。己錄方法、或伴隨著刻版、壓片之記錄方法的實施中, 藉由本圖之流程圖來實現Av擋案之寫入。 於步驟S401,請求xxxxx ssif,於記錄裝置之記憶體上 154 201123841 做成檔案分錄。於步驟⑽,判斷是否可確保空白的連續 磁區區域’若可確保,則於步驟酬,於空白的連續礎區 區域,將構成相依視圖資料塊之來源封包串僅寫入於 ΕΧΤ2[ι] ’其後執行步驟s·〜步驟⑽8。未能確保時則 於步驟S409進行例外處理後,終了記錄方法。 ^步驟S404〜步驟S408係直到步驟S4〇7判斷為「否」之 刖,構成重複步驟S404〜步驟S406、步驟S4〇8之處理之迴 圈0 步驟S405係於空白的連續磁區,將構成基礎視圖資料 塊之來源封包串僅寫入於EXT1[i]。步驟S4〇6係於檔案分 錄,追加記錄表示被寫入來源封包串之開頭位址及連續長 之分配識別符,登錄作為延伸區。伴隨於此,於剪輯庫資 Λ、剪輯相依資訊内之元資料,追加記錄指示所寫入的來 源封包串之開頭來源封包號碼之延伸區起點資訊。 步驟S407係規定迴圈之終了條件,進行於基礎視圖資 料塊、相依視圖資料塊是否存在未寫入之來源封包的判 斷。若存在,則移到步驟S408,繼續迴圈。若不存在,則 移到步驟S410。 步驟S408係是否存在有連續磁區區域的判斷,若存 在’則移到步驟S403,若不存在,則回到步驟S402 » 於步驟S410,封閉xxxxx.ssif,於記錄媒體寫入檔案分 錄。於步驟S411,請求xxxxx.m2ts,於記憶體生成xxxxx.m2ts 之檔案分錄。於步驟S412,於xxxxx.m2ts之檔案分錄,追 加記錄表示檔案2 D所固有的基礎視圖資料塊之開頭位址及 155 201123841 連續長之分配描述符xxxxx.m2ts之槽案分錄。於步驟 S413 ’封閉xxxxx.m2ts,寫入檔案分錄。 步驟S404係於EXTSS+EXT2D之範圍内,是否存在有長 程跳躍之發生地點的判斷◦在此之長程跳躍之發生地點為 層交界。於EXTSS+EXT2D之範圍内存在有層交界時,於步 驟S420,複製基礎視圖資料塊,寫入基礎視圖資料塊 B[i]ss、基礎視圖資料塊b⑴2D,直到長程跳躍發生地點前 為止’其後,移到步驟S406。該等為檔案2D之延伸區、檔 案庫之延伸區。 接著,說明關於用在編輯步驟的作業之記錄裝置。在 此所說明之記錄裝置係設置於發行電影内容用之製作工作 至,供編輯工作人員使用。按照來自編輯工作人員的操作, 生成按照MPEG規格受到壓縮編碼之數位串流及記有如何 再生電影標《I之情境,生成包含該等資料之Bd_r〇m用之 冊位元串流,記錄於為了交付給刻版側之記錄媒體,此係 依據本發明之記錄裝置之使用形態。 第66圖係表示記錄裝置之内部構成。如本圖所示,記 錄裝置係由視訊編碼器501、素材製作部5〇2、情境生成部 503、BD程式製作部5〇4、多工處理部5〇5及格式處理部5〇6 所構成。 視訊編碼器501係從左視圖之非壓縮之位元圖等圖像 影像、右視圖之非壓縮之位元圖等圖像影像,按照 MPEG4-胤或MPEG2等壓縮編瑪方式編碼,做成左視圖 視訊串流及右視圖視訊串流。此時,右視圖視訊串流係藉 156 201123841 由在左視圖視訊串流之顯示時刻相對應之圖幀及圖片間預 測編碼而編碼。於該圖片間預測編碼之處理過程中,從左 視圖之移動向量,擷取3D影像時之景深資訊,並寫入於圖 幀景深資訊儲存部501a。視訊編碼器501係為了進行利用圖 片間之相關特性之圖像壓縮,以8)<8或16><16之巨集塊為單 位’擷取移動向量而進行圖像壓縮。 於擷取巨集塊之移動向量的處理中,將背景存在有 豕、則不存在有人之動態圖像作為移動向量操取之對象。 該情況下,於左眼圖像與右眼圖像進行圖片間預測。如此 一來,於「家」的影像所在處未檢測到移動向量,而於「人」 所在處檢測到移動向量。 p棟取所檢測_移動向量,做賴示3D影像時之圖幢 單位之景深資訊。景深資訊可考慮採用例如與具有8位元深 度之圖幀之解像度相同的影像。 素材製作部502係製作音訊串流、PG串流、IG串流等 各串流’並寫入於音訊串流儲存部⑽、沿串流儲存部 502b、PG串流儲存部502c。 製作音訊攀流時,素材製作部5〇2係藉由按照AC3等壓 縮方式,編碼非壓社LinearPCM聲音“製作音訊串流。 此外’素材製作部5〇2亦依據包含字幕影像、顯示時序 '及 淡入/淡出等字幕效果之字幕資訊檔案,製作遵循肋-顧 規格之PG· A格式之pG串流。素材製作部繼係依據記載 有使用於選單之位元彡像、及配置於選單之按钮的變遷 或貝不政果之選單檔案,做成依循bd_r〇M規格之選單畫 157 201123841 面格式之IG串流。 月兄生成。p 5〇3係按照由素材製作部5〇2所做成的各串 仙·之資讯、或從編輯工作人員經由GUI的操作,以bD-R〇m 格式製作情境^在㈣錢境係相當於“丨職、電影物 件檔案、播放串列檑案等樓案。又,情境生成部5〇3做成參 數檔案’係描述用以實現多工處理之^剪輯由何個串流所 構成。在此所做成的索引檔案、電影物件檔案、播放串列 檔案等檔案,係成為第1實施形態及第2實施形態所說明的 資料構造。 BD程式製作部504係透過GUI等使用者介面,按照來自 使用者的要求而做成BD程式檔案之來源碼,做成BD程式。 此時,BD程式檔案之程式為了設定gFX截面的景深,可利 用視訊編碼器5〇1所輸出的景深資訊。 多工處理部505係將描述於BD-ROM情境資料之左視 圖视訊串流、右視圖視訊串流、視訊、音訊、字幕、按鈕 等之複數個串流予以多工,做成MPEG2-TS形式之AV剪 輯。此時,與AV剪輯成對之剪輯資訊檔案亦同時做成。 夕工處理部505係將本身所生成的分錄圖、與表示AV 剪輯所含之每串流之聲音屬性、影像屬性等之屬性資訊配 對’做成剪輯資訊檔案《剪輯資訊檔案之構成係成為到目 前在各實施形態所說明的資料構成。 格式處理部506係將情境生成部503所生成的BD-ROM 情境資料、BD程式製作部504所製作的BD程式檔案、多工 處理部505所生成的AV剪輯或剪輯資訊檔案,以遵循 158 201123841 BD-ROM規格之格式配置檔案或目錄,以遵循BD-ROM規 格之檔案系統即UDF之格式,做成碟片影像,於BD-ROM 位元串流儲存部507,寫入表示碟片影像之位元串流。 又,此時,利用視訊編碼器501所輸出的景深資訊,做 成PG、IG、次要視訊串流之3D元資料。以不與3D影像之物 體重疊的方式,自動設定影像之晝面上配置,亦或調整偏 移值’以使得景深不重疊。如此所做成的碟片影像之檔案 配置係以到目前所說明的檔案配置之資料構造來設定。將 所生成的碟片影像轉換為BD-ROM壓製用資料,對於該資 料進行壓製製程而可製造BD-ROM。 (第6實施形態) 於本實施形態,說明關於統合到目前的實施形態所說 明的再生裝置之功能之2D/3D再生裝置之内部構成。 第67圖係表示2D/3D再生裝置之構成。2D/3D再生裝置 係由BD-ROM驅動器1、讀緩衝器以、讀緩衝器2b、切換器 3、系統目標解碼器4、戴面記憶體組5a、截面合成部5b、 HDMI收發部6、再生控制部7、管理資訊記憶體9、暫存器 組10、程式執行部11、程式記憶體12、HDMI模組13、BD-J 平台14、中間軟體15、模式管理模組16、使用者事件處理 部Π、局部儲存器18及非揮發記憶體19所構成。 BD-ROM驅動器丨係與2D再生裝置同樣依據來自再生 控制部7之要求,從bd_r〇m碟片讀出資料,而從bd_r〇m 碟片讀出之AV剪輯係從讀緩衝器2a傳輸至讀缓衝器2b。 再生3D影像時,從再生控制部7送出讀出要求,其意在 159 201123841 指示以延伸區為單位’交替讀出基礎視圖資料塊與相依視 圖資料塊。B D-ROM驅動器1係將構成基礎視圖資料塊之延 伸區,讀出至讀緩衝器2s,將構成相依視圖資料塊之延伸 區,讀出至讀緩衝器2b。於再生3D影像時,須同時載入基 礎視圖資料塊與相依視圊資料塊,因此要求2D再生裝置之 BD-ROM驅動器以上之速度性能。 讀緩衝器2a係由儲存BD-ROM驅動器1所載入的基礎 視圖資料塊之資料之雙埠記憶體等構成。 讀緩衝器2b係由儲存BD-ROM驅動器1所載入的相依 視圖資料塊之資料之雙埠記憶體等構成。 切換器3係用以將對於讀緩衝器之輸入源,切換為 BD-ROM驅動器1或局部儲存器18之某一者之切換器。 系統目標解碼器4係對於讀出至讀緩衝器2a之來源封 包及讀出至讀緩衝器2b之來源封包’進行解多工處理’進 行串流之解碼處理。 截面記憶體組5a係由複數個截面記憶體所構成。截面 記憶體包括左視圖截面、右視圖截面、次要視訊截面、IG 截面、PG截面。 截面合成部5b係進行到目前的實施形態所說明的截面 合成。對於電視專輸出時,配合3d方式進行輸出。須利用 快門眼鏡交替再生左眼影像•右眼影像時,則直接輸出, 例如輸出至柱狀透鏡的電視時,則準備暫時的緩衝器,先 傳輸的左眼影像儲存於暫時緩衝器’於右眼影像傳輸後再 同時輸出。 160 201123841 HDMI收發部6係於例如HDMI規格(ΗΓ)ΜΙ : High-Definition Multimedia Interface(高解像度多媒體介 面)),執行第1實施形態所述之認證相、談判相。於談判相, 可從電視收取是否支援立體視覺顯示之相關資訊、可進行 平面顯示之解像度之相關資訊、可進行立體顯示之解像度 之相關資訊。 丹玍控制邵/a含再生引擎7a、再生控制引擎几,若從 程式執行部11等命令再生3D播放串列時,特定出31)播放串 J中作為再生對象之播放項目之基礎視圖資料塊,特定出 與該播放項目同步再生之侧之子路徑之子播放項目之相 依視圖資料塊。其後,解釋相對應之剪輯f訊檔案之分錄 圖,根據表示從何個延伸區先配置延伸區之延伸區開始類 HDIR〇M驅動器1要求從再生開始地點,交替讀出基 •貝料塊之延伸區與相依視圖資料塊之延伸區。再生 後最初的延伸區完全讀至讀緩衝器2a或讀緩衝器2b 傳輪Γ緩衝器&及讀緩衝器2b,開始向系統目標解碼器4 DVD再生裝^執仃AV再生功能。AV再生功能係承襲自 停止、暫時^CD再生裝置之功能群,係、再生開始、再生 即值hi 解除暫時停止、解除靜止圖功能、以立 帶、聲音切拖速f之^轉 '以立即值指料生速度之倒 類的處^。、切視_之圖片資料切換、角度切換等 再生控則擎應來自HD贈模狀動作主體即 161 201123841 指令解譯器、BD-J模式之動作主體即Java平台之函數叫 出,執行播放串列之再生功能。播放_列再生功能係指上 述AV再生功能中,按照構成現播放串列之現播放串列資 訊、現剪輯資訊,進行再生開始或再生停止。 管理資訊記憶體9係用以事先儲存現播放串列資訊或 現剪輯資訊之記憶體。現播放串列資訊係可從BD_R〇M或 内建媒體驅動器、可移除式媒體驅動器存取之複數播放串 列資訊中,成為現在處理對象者。現剪輯資訊係可從 BD-ROM或内建媒體驅動器、可移除式媒體驅動器存取之 複數剪輯資訊中,成為現在處理對象者。 再生狀態/設定暫存器(Player Status/Setting Register)組 10係除了到目前之實施形態所述之再生狀態暫存器、再生 設定暫存器以外’還包含可儲存程式標案所利用的任意資 訊之泛用暫存器。 程式執行部11係執行儲存於BD程式檔案之程式之處 理器。按照所儲存的程式進行動作,進行如下控制。⑴對 於再生控制部7命令減串列再生。(2)對於系統目標解碼 器’傳輸選單或遊戲之圖形用之PN(WpEG而顯示於畫面。 該等可因應程式編寫而自由地進行,如何㈣_由編輯 階段之BD-J應用程式之程式化階段來決定。 程式記憶體12係事先儲存現動態情境,以供由肋雨 模式之動作主體即HDMV模組、BD_增式之動作主體即 平台進行處理之記憶體。現動態情境係指記錄於 BD-ROM之Index.bdmv、BD—增#、電影物件中成為現在 162 201123841 執行對象者。又,程式記憶體12包含堆積記憶體。 堆積記憶體係配置有系統應用程式之位元組碼、BD-J 應用程式之位元組碼、系統應用程式所利用的系統參數、 BD-J應用程式所利用的應用程式參數之堆憂區域。 HDMV模組13係作為HDMV模式之動作主體之DVD虛 擬播放器’其為HDMV模式之執行主體。本模組具備指令 解譯器,藉由解讀並執行構成電影物件之導航指令,以執 行HDMV模式之控制。導航指令係採與DVD_Video相似之 語法描述,因此藉由執行該導航指令,可實現類似 DVD-Video之再生控制。 BD-J平台14係BD-J模式之動作主體即java平台,完整 女裝有 Java2Micro_Edition (J2ME) Personal Basis Profile (PBP1.0)、及 Globally Executable MHP specification (GEM1.0.2) for package medis targets (套裝媒體標的用全球 可執行MHP規格(GEM1.0.2)) ’由類別載入器、位元組碼解 譯器、應用程式管理員所構成。 類別載入器系統應用程式的一種,從存在於jar歸檔檔 案讀出位元組碼,儲存於堆積記憶體31,藉此進行BD一】應 用程式之載入。 位元組碼解譯器係所謂java虛擬機器,將構成儲存於 堆積記憶體之BD-〗應用程式之位元組碼、構成系統應用程 式之位元組碼轉換為本機碼,並$MPU執行。 應用程式管理員為系統應用程式之—種,根據bd—j物 件内之應用程式管理表,啟動BD_j應用程式,亦或終了 163 201123841 BD~J應用程式等,進行BD-J應用程式之應用程式訊號化。 以上結束關於Bd_j平台部之内部構成的說明。 中間軟體15係嵌入軟體用之作業系統,由核心 (kernd)、裝置驅動器所構成。核心係因應來自BD-J應用程 式之應用程式化介面(API)之呼叫,將再生裝置特有的功能 kt、至BD J應用程式。又,實現藉由插入訊號,啟動插入 處理器等硬體控制。 模式管理模組丨6係保持從BD_R〇M或内建記憶體驅動 器 了移除式媒體驅動器所讀出的Index.bdmv,進行模式 官理及分支控制。模式管理模組所進行的模式管理係指模 組的分派,係令BD-J平台22、HDMV模組之任一方執行動 態情境者。 使用者事件處理部17係回應透過遙控器之使用者操 作’像程式執行部16或再生控制部7請託執行處理。例如以 遙控益按下按㈣’向程式執行部16請託執行該按紐所含 之指令。例如以遙控器按下快轉•倒帶按鈕時,向再生控 制7命令執行對於現在再生之播放串列之AV剪輯之快轉· 倒帶處理。 局部儲存器18係用以存取硬碟之内建媒體驅動器,具 備用以存取半導敎針之可移除式雜驅動H,用於保 存下載之追加内容或使用應用程式之資料等。&加内容之 保存區域係依每BD_R〇M而區分,而應用程式可使用於保 持資料之區域係依每應用程式而區分。 非揮發記憶體19係可讀寫之記憶體等記錄媒體,係未 164 201123841 供’、.σ電源仍可保持記錄内容之媒體,例如快閃記憶體、 FeROM等。此係用於暫存器組1()之記憶内容之備份。 接著,說明關於系統目標記憶體4及截面記憶體組兄之 内部構成。第6 8圖係表示系統目標解碼器4及截面記憶體組 P構成如本圖所示,系統目標解碼器4係由八丁匸計 數益21、來源解封包處理器22、PID滤波器23、STC計數器 24、ATC計數器25 '來源解封包處理器26、PID濾波器27、 主要視訊解碼器31、左視圖視訊截面32、右視圖視訊載面 33、次要視訊解碼器34、次要視訊截面35、PG解碼器36、 PG截面37、IG解碼器38、IG截面39、主要音訊解碼器4〇、 次要音訊解碼器41、混合器42、轉譯引擎43、gfx截面44 所構成。 主要視訊解碼器31係解碼左視圖視訊截面、於左視圖 視訊截面寫入解碼結果之非壓縮之視訊圖巾貞。 左視圖視訊解碼器32係可依據例如 1920x2160(1280x1440)之解像度,儲存圖片資料之截面記 憶體。 左視圖視訊解碼器33係可依據例如 【920x2聊28〇xl44G)之解像度’儲存圖片資料之截面記 憶體。 次要視轉碼1134具有與主錢轉碼㈣樣的構 成,進行輸人之次要視訊串流之_,於顯示時刻(pTs)之 時序’將圖片寫出至次要視訊解碼器。 次要視訊戴面35係從系統目標解馬器4,輸出次要視訊 165 201123841 串流經解碼的次要視訊用之圖片資料用資料。 PG解碼器36係從輸人自來源解封包處理器之複數個 TS封包’擷取PG串流而解碼,於顯示時刻(pTs)之時序, 將非壓縮之圖片資料寫出至PG截面。 於PG截面37,儲存藉由解碼pG串流所獲得的非壓 圖形物件。 犯解碼器38係從輸入自來源解封包處理器之複數個^ 封包,掏取IG串济L而解碼,於顯示時刻(pTS)之時序,將非 壓縮之圖片資料寫出至1(5截面。 於IG截面39 ’儲存藉由解碼IG串流所獲得的非壓 圖形資料。 主要音訊解碼器40係解碼主要音訊解碼器。 _人要音訊解碼器41係解碼次要音訊解碼器。 立’見合器42係合成主要音訊解碼器4〇之解碼結果、與次 要音訊解碼器41之解碼結果。 轉澤引擎43具備Java2D、OPEN—GL之基礎軟體’按照 Λ自BD—J應用程式之要求進行JPEG資料/PNG資料之解 $獲得影像或介面工具集,並寫入於戰面及背景圖形 紙面、。藉由解碼jPEGf料所獲得的圖像f料成為⑽的壁 並裝在背景圖形截面。藉由解碼觸資料所獲得的像 二寫人於m截面’可實現伴隨有動畫之按紐顯示。 精解碼該等JPEG資料/PNG資料所獲得的影像 …、’糸於BD-;應用程式顯示標題選擇或字幕選擇、聲音 選擇用之選單,亦或令串流再生連動型之遊戲動作時,為 166 201123841 了構成GUI元件而使用。此外,BD-J應用程式存取WWW網 頁時’為了構成該WWW網頁之劉覽器晝面而利用。 GFX截面44係於JPEG、PNG等圖形資料解碼後被寫入 的記憶體。 轉列記憶體45係載入應由轉列引擎解碼之pNG資料、 JPEG^料之記憶體。於該影像記憶體,在BD_j應用程式執 行現場再生模式時,確保有快取記憶體。現場再生模式係 組合存在於網路上之www網頁之瀏覽器畫面、與藉由 BD-ROM之串流再生之組合;快取區域係用以事先快取現 場再生模式時之現在的戦"面、及緊接於其前之劇覽 器畫面之快取記憶體’此處儲存有非壓縮之pNG資料或非 壓縮之JPEG資料、且構成前述劉覽器畫面之資料。 如以上’若依據本實施形態,可作為BD—R〇M而實現 包含到目前的實施形態所述特徵之記錄媒體。&,可作為 BD-ROM再生裝置而實現包含到 a 匕3到目刖的貫施形態所述特徵 (第7實施形態) 於本實施形態,說明關於暫存器組的詳細。 =組係由複數個播放器狀態暫存器、複數個播放 = 又二暫存器所構成。各個播放器狀態暫存器、播放器設 疋暫存器均為字長32位元之暫存器,⑽位元長之暫存器 之各者給予暫存益號碼,利用 之暫存器。 臀存15號碼特定出應存取 構成各暫存ϋ之-字(处元)之各位㈣料之位元位 167 201123841 置稱為b0〜b31。最高位位元稱為⑻’最低位稱為b〇。然 後’ 32位元中,從第bx位元之位元位置到第^位元之位元 位置之位it範圍係以[bx: by]之標示來表現。 儲存於特定暫存器號碼之播放器狀態暫存 器之32位元 長之位tl串、幻壬意位元範圍[bx:㈣者之值,係視為程式 進^ίΤ動作時之動作系統之環境變數(系統參數或播放器變 數)進行再生控制之程式可透過系統性質或應用程式化介 面(ΑΠ)而取得系統參數。又,只要未特別禁止程式可重 寫。亥等播放H狀態暫存器、播放^設定暫存㈣值。關於 D J應用程式,就系統參數之取得或重寫而言,其要件係 由JAR歸檔;^案之許可管理表給予正當權限。 播放器狀態暫存n係再线置之MPU進行算術運算或 jTC運算時,以事絲存料雜運算符之數值之硬體 ·:原於裝載光⑼時設定初始值或於;見播放項目變更 等再生1錄_化時,朗其料狀枝性。作為該 儲存值包括現標題號碼、現減串舰碼、現播放項目號 見串叫號碼、現章節號碼等。由於在光碟片裝載時儲 存初始值,因此該料值為料值,當光碟#彈出或再生 裝置的電源斷開時,該儲存值喪失有效性。 播放器认疋暫存器係與播放器狀態暫存器在施以電源 策方面相異。由於施以電源對策,因此於再生裝置之電 原遮斷時,其儲存值退避至非揮發性之記憶體於再生農 ,之電源導人時,其儲存值餘歸位。於播放^設定暫存 ⑽存有.再生裝置之製造主體(製造商)在#生裝置出貨時 168 201123841 所設定的再生裝置之各種組態或按照使用者啟用程序所設 定的各種組態;以及再生裝置與τν電視或音響、放大器等 豕庭劇Ik系統之機器連接時,與作為連接對象之機器談判 所知悉的對手側機器之能力。 第69圖係描繪暫存器組10之内部構成及再生控制引擎 7b之圖。 於本圖左側表示暫存器組10之内部構成。於右側表示 再生控制引擎7b之内部構成。 表示被分派各暫存器號碼之播放器狀態暫存器、播放 器设疋暫存器為何種暫存器。 PSR1為音訊串流用之串流號碼暫存器,儲存現音訊串 流號碼。 PSR2為PG串流用之串流號碼暫存器,儲存現pG串流 號碼。 PSR4設定為1〜1〇〇的值,藉此表示現標題號碼。 PSR5設定為1〜999的值,藉此表示現章節號碼,藉由 設定為OxFFFFF以表示於再生裝置中,章節號碼無效。 PSR6設定為0〜999的值’藉此表示現播放串列的號碼。 PSR7設定為0〜255的值,藉此表示現播放項目的號碼。 PSR8設定為〇〜OxFFFFFFFF的值,藉此利用45KHz之 時間精度表示現在之再生時點(現PTM)。以上係關於psR的 說明。 PSR10係IG串流用之串流號碼暫存器,儲存現犯串流 號碼。 169 201123841 PSR21係表示使用者是否意圖執行立體視覺再生。 PSR22係表示輸出模式值。 PSR23為“視訊顯示能力”之設定。此係表示於裝置連接 對象之顯示裝置,是否存在執行立體視覺再生之能力。 PSR24為“3D播放器能力”之設定。此係表示於再生裝 置是否存在執行立體視覺再生之能力。 另,於再生控制引擎7b之内部具備手續執行部8,係參 考暫存器組10之PSR4、PSR5、PSR21、p§R23及管理資兮fl δ己憶體9之現播放_列資訊之串流選擇表,唯一地決定播放 串列之輸出模式之手續執行部8。之3D播放器能力係意味關 於再生裝置之3D再生之整體能力,因此有時簡單標示為 “3D-能力’,。 PSR23係規定輸出模式,該狀態變遷之選擇模型係規定 如第70圖。 第7〇圖係表示輸出模式之選擇模型之狀態變遷。該選 擇模式存在有2個一般狀態。橢圓係模式性地描繪該—般狀 態’亦即輸出模式值可取定的值之“無效(Invalid)”、“有效 (valid)’’。無效意在表示輸出模式為無效,,有效意在表示 輸出模式為有效。 八要未引起狀態變遷,均維持一般狀態。狀態變遷包 括·播放串列再生開始、由導航指令或BD-J應用程式所要 的輸itj模式變化、對於BD_;標題的跳躍。發生狀態變遷 時,執行用以獲得輪出模式預參考之手續。 圖中之箭頭jml、jm2、jm3· · · .jml2係模式性地表 170 201123841 示作為狀態變遷之觸發之現象。本圖之狀態變遷包括以下。 『載入一碟片』係意味裝載有BD-ROM之狀態。 『開始呈現』係於HDMV模式中,表示播放串列之再 生開始(開始播放串列回放)。於BD-J模式下,意味對BD-J 標題的分支。此係由於在BD-J模式下,分支為BD-J標題時 未必僅限於開始再生播放串列。 『跳到BD-J標題』係意味對BD-J標題之分支。具體而 言’於索引表中’其指對應於BD-J應用程式之標題(BD-J 標題)成為現標題。 『開始播放串列回放』係指意味某播放串列之播放號 碼設定為PSR,播放串列資訊作為現播放串列資訊而讀出至 記憶體。 『改變輸出模式』係指藉由BD-J應用程式呼叫API而 變化輸出模式。 『終結呈現』係於HDMV模式時,表示播放串列之再 生終了,於BD-J模式時,其指從BD_j標題,跳到索引表中 對應於電影物件之標題(HDMV標題)。 載入碟片時’輸出模式的狀態變遷至暫時的狀態‘‘初始 化’’。輸出模式選擇狀態暫時變遷到“初始化狀態”後,變遷 至無效狀態。 輸出模式選擇的狀態維持於無效,直到再生開始(Satrt Presentation :開始呈現)成為有效為止。於HDMV模式下, ‘‘開始呈現”係意味開始再生播放串列。於BD-J模式下,“開 始呈現”係意味BD-J標題開始再生,BD_j應用程式開始某 171 201123841 動作。未必限於意味開始再生播放串列。 開始呈現成為有效時’輸出模式變遷至暫時狀随之‘‘ 放條件改變手續”。 回 輸出模式按照回放條件改變手續的結果變遷至無―文 若輸出模式有效,開始呈現終了時,狀態變遷至無效> 電影物件之導航指令係由於内容提供者設定為輪出_ 式預參考,因此須早於播放争列再生開始前執行。執^電 影物件之導航指令時,該模型成為無效。 第71圖係表示初始化之處理程序。 步驟S501係碟片無約束之BD-J應用程式是否在動作 中之判斷;步驟S502係PSR23之立體視覺顯示能力是否表 示“有能力”’且Index.bdmv之初始輸出模式資訊是否表示 “立體視覺輸出模式”之判斷。 若步驟S501為「是」,則於步驟S503,維持現輸出模式。 若步驟S501為「否」,步驟S502為「是」,則於步驟S504 , 將PSR22設定為立體視覺輸出模式。若步驟S501為「否」, 步驟S502為「否」,則於步驟S5055,將PSR22之輸出模式 設定為2D輸出模式。 第72圖係表示回放條件改變手續(procedure when playback condition is changed)之處理程序。步驟S511係 PSR22之輸出模式是否為2D輸出模式之判斷;步驟S513係 PSR23之立體視覺顯示能力是否表示“有能力”,且於播放串 列是否存在延伸串流選擇表之判斷。 若步驟S511為「是」’於步驟S512,令現輸出模式不變。 172 201123841 若於步驟S5U為「否」,於步驟加為「是」,則令現輸出 模式不變(步驟S512)。若於步獅川為「否」,於步驟加 為「否」,料現輸出模式變化為扣輸出模式(步驟如4)。 開始播放串列時應留意各個播放串列可再生之pEs串 流’由各個播放項目之串流選擇表所規定之點。故,開始 再生現播放串列時,首先—開始須從現播放串列之串流選 擇表所許可再生之PES串流中,選擇對播放項目之再生最佳 者。該選擇的程序稱為“串流選擇手續,,。 以下說明關於3D再生模式實現用之播放器設定暫存器 ,位元指派。為了實現3D再生模式·之暫存器為第^ 说、第22號、第23號、第24號之暫存器,第7〇圖表示該等 暫存器之位元指派。第73圖係表示31)再生模式實現用之播 放器設定暫存器之位元指派。 同圖⑷係表示PSR21之位元指派。於本圖中,最低位 位元b〇為輸出模式預參考,藉由設定細,意在表示扣輸 出模式’藉由設定為lb,意在表示立體視覺輸出模式。導 航指令或BD-J應用程式無法重寫該pSR21之值。 同圖(b)係表示PSR22之位元指派。 PSR22之b0係表示現輸出模式。若輸出模式變化,則再 生裝置之視汛輸出須相對應地變化。輸出模式之值須由選 擇模式控制。 同圖(0係表示PSR23之位元指派。如本圖所示,pSR23 之b〇係表料接之TV系統之立龍覺顯示能力。具心 言,藉由設定為“0”,意在表示是否連接之丁卩系統不能進行 173 201123841 立體視覺再生,藉由設定為“1”,意在表示是否可進行立體 視覺再生。 與顯示裝置進行談判之某介面在再生裝置受到支援 時,於開始再生前,自動設定該等值。未自動設定該等值 時,則由使用者設定。 同圖(d)係表示PSR24之位元指派。如本圖所示,PSR24 之b0係表示再生裝置之立體視覺顯示能力。立體視覺顯示 能力設定為0,藉此意在表示立體視覺再生類型為不能顯 示,設定為以表示可顯示。 如以上,若依據本實施形態,即便有再生裝置之狀態 變化或來自使用者之串流切換要求,仍可保持輸出模式之 有效性。 (第8實施形態) 於第1實施形態,於子視圖視訊串流之元資料,嵌入規 定偏移控制之資訊,而於本實施形態,於圖形串流内之元 資料嵌入規定偏移控制之控制資訊。偏移控制用之控制資 訊係對圓形截面之水平座標之右方及左方,給予偏移,與 描繪構成子視圖之圖形資料之主視圖視訊截面及描繪構成 子視圖之圖形資料之子視圖視訊截面合成。 以下說明關於移位控制用之參數及用以内插該參數之 資料。 第74圖係表示巨集塊之景深與移位控制用之參數之關 係。 表示第2圖之L圖像、R圖像之圖片資料係由同圖(a)之 174 201123841 巨集塊、同圖(b)之巨集塊所構成。本圖中之該等四角外框 表示1個巨集塊。然後,被附加影線之巨集塊係表示構成L 圖像、R圖像之巨集塊中,由立體物所佔有的巨集塊。 同圖(c)係從上述L圖像、R圖像所獲得的立體物,與第 2圖所示相同。同圖(d)係由圖(a)、(b)之巨集塊所表現的立 體物。同圖(a)、( b)之巨集塊係具有根據L圖像與R圖像之間 之相關性之景深,若按照該景深,於Z轴方向配置巨集塊, 則如圖(d)。該等巨集塊具有立體物之恐龍之頭部、驅體、 手腳、尾部之景深,因此如圖(e)規定應用於移位控制之景 深。總言之,對於具有對應於立體視覺之巨集塊之景深, 於Z轴方向僅偏位α之位置設為應用於移位控制之景深。藉 由如此’可規定用以於恐龍頭部的面前顯示圖形之景深、 用以於驅體的面前顯示圖形之景深、用以於手腳的面前顯 不圖形之景深、用以於尾部的面前顯示圖形之景深。 该等4個景深若定義作為4個偏移序列,則於丨截面+偏 移杈式下,可適當地選擇恐龍的頭部、驅體、手腳、尾部 之某一者作為顯示圖形之景深。 於MPEG4-MVC之編碼中,利用L圖像、R圖像之相關 性進行編碼’因此生成構成L圖像之巨集塊與構成R圖像之 巨集塊之移動向量。若彻該移動向量,可檢測每巨集塊 之厅、冰’從該每巨集塊之景深,可獲得對應於巨集塊之各 者之移位控制參數。 X偏移序歹J之生成係藉由與視訊串流之編碼並行’執 行偏移序列之定義程序而進行。第75圖係表示與視訊串流 175 201123841 之編碼並行地執行之偏移序列之定義程序之流程圖。 步驟S110係GOP之編碼是否已開始的判斷,若開始, 則於步驟Sill,於GOP之開頭視訊存取單元之開頭的MVC 可擴縮巢套SEI訊息,生成對應於開頭視訊存取單元之圖片 中之移動體各個之巨集塊之偏移序列。此係為了對應開頭 視訊存取單元之圖片資料之各個巨集塊,生成X軸方向之移 位寬、Z軸方向之移位方向該類之1截面+偏移模式之控制參 數。 步驟S112係每當屬於GOP之L圖像、R圖像進行編碼 時’畫面中之移動體之移動向量是否以巨集塊為單位算出 之判斷。若算出移動向量,則算出景深資訊。於本實施形 態,於步驟S113,以將每巨集塊之移動向量之水平方向之 純量值轉換為移位值,將每巨集塊之移動向量之移動方向 之水平成分轉換為移位方向之簡易處理,算出景深資訊。 藉由如此,求出每圖幀期間之移位寬、移位方向之約略值。 於步驟S114,於就圖幀期間之每巨集塊所獲得的移位 寬,加算Z軸方向之偏位量。此係由於作為上述轉換的基礎 之水平方向之純量值,係表示對應於巨集塊之立體物之景 深本身,因此藉由事先加算該偏位量,可將立體物之稍微 面前的景深明示作為1截面+偏移模式之移位寬。 於步驟S115,於各偏移序列,作為新的截面偏移方向、 截面偏移值,追加記錄加算有偏位量之各圖幀之每巨集塊 之移位寬及移位方向。 步驟S116係視訊串流之G〇p之編碼是否繼續的判斷, 176 201123841 若繼續則返回步驟。只要編瑪仍繼續,則繼續對上述 偏移序列追加截面偏移方向、截面偏移值。 〜若GOP之編碼終了,結束生成·該⑽之視訊存取 單元之偏移元資料,返回步驟S11〇。 再者’ 3D攝影機之攝影時,或基礎視圖視訊串流及相 依視圖視訊串流之編碼時,若料就每G Q p,將該等巨集 塊各自之移位寬、移位方向予以資料庫化,於該移位寬、 移位方向施以適當轉換,並儲存於相當於G0P開頭之存取 單元内之MVC可擴縮巢套SEI訊息,則可定義複數偏移序 列’而前述複數偏移序列定義複數個景深。再者,3D攝影 機具備MPEG-MVC時,應於3D攝影機執行上述偏移序列之 定義。 以上係關於1截面+偏移模式之移位控制之參數之做出 方式。接著,說明關於内插此類過程所生成的控制參數之 内插參數。此類内插參數存在於字幕串流内部之元資料。 第76圖係表示子幕串流之視窗定義區段、控制資訊之 圖。 『視窗定義區段』係用以定義圖形截面之矩形區域之 功能區段。以經說明於紀元中,僅有於圖形截面之某矩形 區域内進行清除及再描繪時’於記憶體管理會產生連續 性。該圖形截面之矩形區域稱為“視窗”,由該WDS所定 義。第76(a)圖係表示WDS之資料構造之圖。如本圖所示, Wt)S係利用於圖形截面唯一地識别視窗之『視窗 ld(wincjow」d)』、表示圖形截面之左上像素之水平位置之 177 201123841 視向水平位置(window_horizantal一position)』、表示圖形 截面之視窗之橫寬『視窗寬度(window_width)』、及表示圖 升^截面之縱寬之『視窗高度(window_height)』來表現。 說明關於視窗水平位置、視窗垂直位置、視窗寬度及 視窗高度。該等所設想的座標系統為圖形截面之内部區 域’於該圖形截面之内部區域,視窗具有縱:視訊高度、 橫:視訊寬度之二次元狀大小。 視窗水平位置係圖形截面之左上像素之水平位址,因 此取定0〜視訊寬度-1的值;視窗垂直位置係圖形截面之左 上像素之垂直位址,因此取定〇〜視訊高度_1的值。 視窗寬度係圖形截面之視窗之橫寬,因此取定〇〜视訊 寬度-視窗水平位置-1的值;視窗高度係圖形截面之視窗之 縱寬,因此取定0〜視訊高度一視窗垂直位置—1的值。 可藉由WDS之視窗水平位置、視窗垂直位置、視窗寬 度、視窗高度,就每紀元規定於圖形截面之何處配置視窗, 視窗設定為何大小。因此,於屬於某紀元之圖片之顯示期 間’為了不對圖片内之圖案造成妨礙,於相當於圖片上留 白的位置出現視窗,以便事先編輯時調整。藉此,可容易 觀看圖形之字幕顯示。WDS可就每紀元來定義,因此即便 圖片之圖案有時間上的變動,仍可因應該變動而容易觀看 地顯示圖形。因此,作為結果,可將電影作品的品質提高 到與字幕嵌入影像主體般的同等層級。 第76(b)係表示於1截面+偏移模式用追加襴位後之 PSC(Presentation Composition Segment:呈現組成區段)之構 178 201123841 造。 如本圖所不,pcs係由『區段類变』、『組成號碼』、『組 成狀‘%'』、&盤更新模榡』、『色盤id參考』、『組成物件數』、 及『組成物件⑴〜⑻』所紅成。 組成$碼』係⑽〇至65 5 3 5的數值來識別顯示集合 之圖形更新。其識別方法係若從紀元開頭至㈣存在有圖形 更新’則以每當經由其等圖形更新時則遞增之迴圈來設定 組成號瑪。 『組成狀態』係表示從本pcs開始的顯示集合為一般案 例、獲取點亦或紀元開始。 『色盤更新旗標』係表示於本PCS是否進行僅色盤顯示 更新。僅色盤顯示更新係指僅將緊接於前之色盤切換為新 色盤,藉此所進行的更新。若無在本PCS之更新,則本欄位 設定為“Γ。 後面的『3d圖形偏移方向』、『3D圖形偏移』係圖形串 流之元資料。 『3d圖形偏移方向』係用以決定往左右何方挪移偏移 份之方向之圖場。 『3d圖形偏移』係用以決定往左右方向具體移動多少 的圖場。 『色盤id參考』係表示應用於僅色盤顯示更新之色盤。 『組成物件(1)〜(n)』係表示如何控制應於該PCS所屬 之顯示集合内顯斧之物件之資訊。同圖虛線c 01係將任意組 成物件⑴之内部構成予以特寫。如該虛線c〇l所示,組成物 179 201123841 :=:考』、『視㈣參考』、『物件修剪旗標』、 矩形資訊⑴(2)·. · · (f』、物件垂直位置』、『修煎 ; · · (η)』所組成。 〇默:編峨_之應參考 一『視窗κΐ參考』係表示於本pcs,應分派給圖形物件之 視窗。1個視窗最多被分派2個圖形物件。 物件0剪旗標』係切換顯示於物件緩㈣修剪 形物件、或顯示未修剪之圖形物件之旗標。設定為“ Γ,時, 顯示於物件緩_修剪之圖形物件,設定為Τ時,圖形物 件纽修剪而顯示。『旗標強制』躲表示播放器之設定 中’子幕^又疋為關閉時’仍應強制顯示之字幕之圖形物件 的情況下成為1。 物件水平位置』係表示圖形截面之圖形物件之左上 像素之水平位置。 物件垂直位置』絲示圖形截面之左上像素之垂直 位置》 、 『修剪矩形資訊⑴⑺.....⑻』係」『物件修剪 旗標』设定為1時有效之資訊要素。虛線wd2係將任意之修 剪矩形資訊⑴之内部構成予以特寫。如該虛線所示,修剪 矩形資訊⑴係由『物件修剪水平位置』、『物件修剪垂直位 址』、『物件修剪寬度』、F物件修剪高度』所組成。 『物件修剪水平位置』係表示圖形截面之修剪矩形之 左上像素之水平位置。修剪矩形係用以切出圖形物件之一 180 201123841 部分之外框,相當於ETSI EN 3〇〇 743標準規格之 “Region(區)’’。 『物件修剪垂直位址』係表示圖形截面之修剪矩形之 左上像素之垂直位置。 物件修剪寬度』係表示圖形截面之修煎矩形之橫寬。 物件修剪鬲度』係表示圖形截面之修剪矩形之縱寬。 以上為PCS之資料構造。 以3d圖形偏移所示之單位定義作以畫面上之丄像素(晝 素)為單位,往左右挪移的量,或為了節省定義3d圖形偏: 之位元數’作為例如以2像素(晝素)為單位移動的量均可。 例如3d圖形偏移方向構成作^位元之搁位於〇時, 對字f從顯示器往面前《之方法(亦即於左目 面重疊圖形截面時’往右方挪移偏移份而重 :偏:’於丨時’從畫面往景深方向凹下的方向給予:: 圖形偏移若設為6位元,則對於左右之視訊戴面重遇 之爲移可往左右方向移動各64畫素(偏移則 二 動量表示時)。 干祖之移 此時,由於在左右方向以64像素無法獲得充分的3卜 幕(跳出),因此該攔位的值係利用作為與相依予 移序列之内一而…件内之偏::::: 視圖串流内之偏移序列組合則之内插值其表依 繪區域之字幕時,將相依視訊串流之偏移序_^顯不描 進行多少程度之内插較佳之内插值。 、偏移 接著,說明如何描述各個PC%於第77(a)〜⑷圖表_ 181 201123841 第77圖係表示DS1 屬於顯示集合之WDS、PCS之描述例 之PCS之描述例之圖。 於第77⑷’麵之視窗水平位置、視_位置係表 示圖形,面之視窗之左上座標LP1,視窗寬度、視窗高度係 表示視窗之顯示外框之橫寬、縱宽。 第77⑷圖之修剪資訊之物件修剪水平位置、物件修剪 垂直位置係在以物件緩衝器之圖形物件之左上座桿作為原 點之座標系統中’表示修f範圍之基準m。然:後,從基準 點到物件修剪寬度、物件修剪高度料之範圍(圖中料框 之範圍)係成為修剪範圍。經修剪之_物件係於圖形截面 之座標系統中,配置在以物件水平位置、物件垂直位置為 基準點(左上)之虛線範圍ep卜藉由如此,『其實』被寫入於 圖形截面之視窗内。藉此’字幕『其實』係與動態圓像合 成顯示。 第77(b)係表示DS2之PCS之描述例之圖。本圖之她 之描述係與⑷相同’因此省略說明。修剪f訊之描述係與 ⑷不同。第77(b)圖之修剪資蚊物件修剪水平位置物件 修剪垂直位置係表示物件緩衝器上之字幕『其實是謊古。 你』中之『射』之左上座標,物件修剪高度 '物件修剪 寬度係表示『謊言』之橫宽、縱寬。藉由如此,『蔬言』被 寫入於圖形截面之視窗内。藉此,字幕ϊ·謊言』係與動態 圖像合成顯示。 第77(c)圖係表示DS3之PCS之描述例之圖。本圖之 WDS之描述係與第77(a)圖相同,因此省略說明。剪輯資訊 182 201123841 =描述係與第77⑷圖不同。第77⑷圖之修剪資訊之物件修 月’水平位置、物件修剪垂直位置係表示物件緩衝器上之字 幕『其霄是說言。你』中之『你』之左上座標,物件修剪 南度、物件修剪寬度係表示『你』之橫寬、縱寬。藉由如 此,『你』被寫入於圖形截面之視窗内。藉此,字幕『你 係與動態圖像合成顯示。 』 藉由如以上描述DSI ' 2、3之PCS,可實現字幕之顯示 效果。 、 第78圖係表示於組成物件内施以利用3d圖形偏移之内 插時與未細•以内插時,偏移隨時間如何變化。實線表示於 組成物件内施以利用3d圖形偏移之内.插時之偏移之時間性 變化’虛線表示於組成物件内未施以利用3d圖形偏移之内 插時之偏移之時間性變化。 於圖形截面内有2個描繪區域,該等之中,於第1個區 域表示台詞,於第2個區域有時欲顯示導演講評。然後,關 於講評若較台詞配置於深處而欲呈現字幕的立體感時,若 於第2個區域設定内插值,可加深講評的景深。 由於截面移位以線單位進行,因此設置在1線不得定義 複數個描繪區域之迴圈,或於1線設置複數個描繪區域時, 應設置將偏移值設定為相同值之迴圈。 (第9實施形態) 本實施形態係關於視訊偏移資訊具有藉由分割晝面所 獲得的各區域之偏移值之改良。 第79圖係表示由畫面之每分割區域之偏移所構成的偏 183 201123841 移序列。(a)係由9個偏移所構成的偏移序列^ (的係表示偏 移序列之各個偏移值相當於被分割為9之晝面中之何個部 分。偏移J表示左上,偏移_2表示左,偏移_3表示左下, 偏移一4表示上,偏移—5表示中心,偏移_6表示下,偏移一7 表示右上,偏移_8表示右,偏移_9表示右下區域之偏移值。 該等之偏移值係由視訊串流之各圖幀之視訊之景深資訊決 定。 第80圖係表示畫面内之物體之景深與偏移之關係。同 圖左側係表示圖片資料之一例,右側係表示9分割之偏移序 列。於左側,圓形物體係拉入深處,三角物體係往前跳出。 該情況下,包含圓形物體之區域所對應的偏移丨之該值 ,J、0 對應於二角物體所含區域之偏移5、6、8、9之該值設 疋較大。如此,偏移資§fl係依據各圖巾貞之場景所含之物體 的景深做成。 接著,說明關於3D再生裝置。3D再生裝置之構成之基 本部分係與到目前的貫施形態所說明再生3d影像之3D再 生裝置相同’因此以延伸或不同的部分為中心來說明。 第81圖係、表示再生裝置中之視訊解碼器、基礎視圖視 訊截面 '相依視圖視訊截面記憶體、pG/IG截面。 首先,3D影像視訊解碼器係在與於2D/左眼影像截面, 於PTS之時序寫出圖幀之解碼圖像相同的時序,向截面合成 部通知該圖幀所含之視訊偏移資訊。 又,用以表示於視訊偏移資訊之9分割區域之偏移中, 184 201123841 將何個偏移之最大值使用於截面挪移之資訊,儲存於播放 器變數中之SPRM(25)。SPRM(25)係表示偏移—i、偏移一2、 偏移_3、偏移_4、偏移_5、偏移_6、偏移—7、偏移少偏 移_9中之何個值為最大值。 SPRM(25)係於執行BD程式檔案之程式時以指令或 API等設定。SPRM(25)有例如9位元的資訊,各個!位元表 示各偏移值為有效/無效。 截面合成部係藉由取定傳輸自3D影像視訊解碼 器之視 訊偏移資訊 '與從SPRM(25)的值利用之偏移值之最大值, 來決定截面挪移值,進行截面挪移&修剪處理,進行與截 面記憶體之重疊。 . 於同圖的例中,各偏移的值為偏移—1=_3、偏移_2=_3、 偏移-3=_卜偏移-4=_2、偏移—5=3、偏移_6=5、偏移_7=1、 偏移-8=4、偏移-9=-5。於SPRM(25),偏移_1 '偏移_4及 偏移_7為有效,設定該等之最大值使用於截面挪移。 移位部係從視訊偏移資訊中,從SPRM(25)中視為有效 之偏移_1、偏移_4及偏移_7中計算最大值(該情況為 ΜΑΧ(·3,-2,1)=1) ’執行截面挪移&修剪處理,進行與影像 截面之重疊。 藉由如此地構成,於視訊串流中置入視訊偏移資訊, 藉此可刪減3D再生裝置所具有的記憶體尺寸β <偏移的適用> 於S P RM (2 5)不僅儲存指示有效的9分割之偏移值之資 訊’亦可儲存基礎的偏移值。然後,截面合成部亦可於得 185 201123841 出9刀割内之有效的偏移值之最大值後,加算該基礎的偏移 值。例如若9分割内之有效的偏移值為3,基礎的偏移值為 2 ’則挪移截面之偏移值設為3+2之5亦可。 〈視窗的適用> 於本實施形態,使用SPRM(25)來決定9分割内之有效 偏移值,但依據圖形截面所含之圖形的矩形區域來決定有 效的偏移值亦可。 第8 2圖係表示圖形截面之内容與偏移之關聯性。 例如應顯示之圖形之圖形影像若為同圖下層的圓形, 則有效的偏移值為偏移_5&偏移_6&偏移—8&偏移_9。此 係不僅於IG/PG等之_,在將隱藏字幕等資訊予以扣再 生時亦同。 <偏移資訊的位置> 視訊偏移資訊不僅就各圖幀儲存,僅儲存於G〇p開頭 亦可。又’於G㈣社存取單元,亦可儲存G〇p所含之 圖幀份之視訊偏移資訊。 再者’視訊偏移資訊亦可於視訊編碼時,從左眼圖像 與右眼圖像之移動向量之差異算出。 <變更> 視訊偏移資訊係於從各圖幀之場景所含物體之景深算 出的情況下,景深資訊在景深激烈變化時,圖形之景深間 亦激烈變化,因此亦可於圖幀間透過低通濾波器而設定值。 <每戴面記憶體的適用> 於本實施形態,將視訊偏移資訊設定為將視訊的晝面 186 201123841 分割為9的值,但具有各截面之偏移值亦可。該情況下截 面合成部係因應截面而改變偏移值,進行戴面挪移&修剪。 <儲存位置> 於本實施形態,說明於2D/左眼影像視訊串流儲存偏移 值,但當然亦可儲存於右眼影像視訊串流。 (第10實施形態) 於本實施形態,除了利用L圖像' R圖像實現立體視覺 效果之3D-LR方式以外,還導入利用2D圖像及深度圖像實 現立體視覺效果之3D-深度方式。 3 D - /木度方式係於視訊解碼器之後段,喪入視差影像生 成器,從該圖片資料之各個像素之深度資訊,做出左視圖 圖片資料及右視圖圖片資料之模式。 δ亥深度資訊可作為以濃淡表現像素深度之灰階之圖片 貝料(稱為深度資訊圖片資料)而構成。 第83圖係表示深度視圖方式之一例。同圖(3)為2]:)圖 2同圖(b)係對於(a)所示之2D所做成的灰階。灰階係僅由 :成刀的像素來表現。灰階的像素中,亮度越高(越白) 表不衣越淺,亮度越低(越黑)表示景深越深。同圖(C)、(d) 係表不利用灰階而生成之左眼影像、右眼影像。第84圖係 表不於3D〜深度模式下所生成的立體視覺圖像。若就2D之 各"圖ψ自1¾ —* it —生成左眼影像、右眼影像,則藉由透過護目鏡 來觀看左眼影像、右眼影像,使用者可欣賞立體視覺。 於3Γ)·~深度模式下’可進行2D再生之視訊串流成為基 礎視圖电、;* , μ °由灰階之圖片資料所構成的視訊串流成為相 187 201123841 依視圖視訊串流。 於3 D-深度模式與3 D-LR模式下,基礎視圖視訊串流可 予以共通化,因此若令應組合於基礎視圖視訊串流之視訊 串流變化’則可生成3D-LR模式、3D-深度模式之影像。從 資料管理構造來處理該等組合,並配合播放器及所連接的 電視端之特性來切換顯示方法。3D-深度模式由於在再生裝 置需要專用的硬體’因此只要未特別說明’本說明書所述 之記錄媒體、再生裝置不支援3D-深度模式。 第85圖係表示用以實現3D-深度模式之記錄媒體之構 成例。同圖(a)係表示對應於3D-深度模式之目錄及槽案。 包含3D再生用之基礎視圖視訊串流之串流檔案係於 STREAM(串流)目錄下,做成BASE子目錄而儲存,與2D再 生用串流檔案區別。 包含3D再生用Lg形式之相依視圖視訊串流之串流檔 案’係於STREAN(串流)目錄以下,做成LR子目錄而儲存, 與2D再生用串流檔案區別。 包含3 D再生用深度形式之基礎視圖視訊串流之串流檔 案,係於STREAN目錄以下,做成深度子目錄而儲存,與 2D再生用串流檔案區別。 同樣地,以LR形式再生時所需要的串流檔案之串流管 理資訊係於CLIPINF目錄以下,做成LR子目錄並儲存,與 2D再生用之管理區別。 以深度形式再生時所需要的串流檔案之_流管理資訊 係於CLIPINF目錄以下,做成深度子目錄並儲存’與2D再 188 201123841 生用之管理區別。亦依檔案的形式而令副檔名變化。 能夠僅以1個串流檔案再生之檔案係與2D再生用之串 流檔案同樣利用副檔名。 不包含基礎視圖視訊串流’無法單獨再生(無法解碼視 讯)’若未與包含基礎視圖視訊串流之串流檔案再生,則無 法解碼的檔案,係與“.3dts”等分開副檔名而區別。 基礎視圖視訊串流與相依視圖視訊争流交插配置,單 純從檔案開頭連續載入仍無法再生之檔案,係與Uts(交插 TS)等分開副檔名而區別。 同圖(b)係表示用以對應於3D-深度模式之延伸串流選 擇表之語法。於同圖(b)的s吾法中’於串流分錄()追加類型 =4之類型。類型=4的情況下’包含指定3D用檔案之串流之 3D剪輯串流PID參考。 LR相依視圖ES可用性、LR交插檔案可用性、深度相依 視圖ES可用性、深度交插檔案可用性係於供給利用 Out-of-MUX之相依視圖視訊串流時,表示不需要交插形式 之檔案之旗標。 3D基礎視圖塊()係一定存在的塊,在2D用與3D用所參 考的延伸區不同時,藉由類型=4之串流分錄參考 STREAM/BASE/xxxxx.m2ts。 在2D用與3D用所參考的延伸區為同一延伸區時,或 ITS的情況時,藉由類型=1之串流分錄參考 STREAM/BASE/xxxxx.m2ts。 LR相依視圖ES可用性設定為開啟時,利用類型=4之串 189 201123841 流分錄指定STREAM/LR/xxxxx.3dts。利用LR交插檔案時, 深度相依視圖ES可用性設定為開啟時’在2D用與3D用 所參考的延伸區不同時,利用類型=4之奉流分錄指定串流 STREAM/DEPTH/xxxxx.3dts。利用深度交插棺案時,則指 定STREAM/DEPTH/xxxxx.ilts。 第86圖係表示播放項目與串流之對應關係。同圖左側 之第1排包含由第85(b)圖所描述之延伸串流選擇表之播放 項目’其相鄰之第2排係第85(a)圖之串流檔案内之TS。第3 排係表示各種類型之再生裝置,第4排係表示受到該再生裝 置參考的剪輯資訊檔案。 圖中左側之播放項目中,存在可對應剪輯資訊檔案名 (clip」nformation_file_name)、串流選擇表(STN_table)、可 對應於3D-深度方式之延伸串流選擇表 (STN_table_extention)。串流選擇表、延伸串流選擇表中之 小框係表示串流選擇表、延伸串流選擇表之串流登錄資訊 之串流分錄為何種類型。串流選擇表之串流分錄的類型為 類型=1。 對照而言,延伸串流選擇表之基礎視圖視訊串流之串 流分錄(基礎視圖串流)、3D-LR形式之相依視圖視訊串流之 串流分錄(LR相依視圖串流)、3D-LR形式之立體視覺串流 之串流分錄(LR交插串流)、3D-深度形式之相依視圖視訊串 流之串流分錄(深度相依視圖串流)、3D-深度形式之立體視 覺交插串流之串流分錄(深度交插串流)均為類型=4。 190 201123841 第2排之最上層係表示立體視覺交插串流檀案 (00001.ssif)之内部構成。框内之“D”、“R”、“L”、“L2D” 中, “D”表示深度形式基礎視圖視訊串流之延伸區,“R”表示右 視圖視訊串流之延伸區’ “L”表示左視圖視訊串流之延伸 區,“L2D”係表示左視圖視訊串流之延伸區中之2d再生用 延伸區。 從播放項目資訊之剪輯資訊檔案名,於 STREAM/00001.m2ts之檔案路徑,串流播案受到2d播放器 參考時,上述立體視覺交插串流檔案之延伸區中,“L”、 “L2D”係受到2D播放器參考。 從播放項目資訊之剪輯資訊檔案名,於 STREAM/BASE/00001.m2ts之檔案路徑,串流檔案受到以 3D-LR模式進行再生之31)播放器參考時,上述立體視覺交 插串流槽案之延伸區中,“L”、“L3D”係受到3D播放器參考。 從播放項目資訊之剪輯資訊檔案名,於 STREAM/LR/00001.3dts之檔案路徑,串流檔案受到以 3D LR模式進行再生之;3D播放器參考時,上述立體視覺交 插串流檔案之延伸區中,“R”、“R”、“R”、“R”係受到扣播 放器參考。 從播放項目資訊之剪輯資訊檔案名,於 STREAM/LR/_ults之標案路徑串流槽案受到以 模式進行再生之3〇播放器參考時,上述立體視覺交 插串流檔案之延伸區中,“R”、“L”、T、“uD,,係受到3D 播放器參考。 191 201123841 從播放項目資訊之剪輯資訊檔案名,於 STREAM/DEPTH/00001.3dts之檔案路徑,串流檔案受到以 3D-深度模式進行再生之3D播放器參考時,上述立體視覺 交插串流檔案之延伸區中,“D”、“D”、“D”係受到3D播放 器參考。 從播放項目資訊之剪輯資訊檔案名,於 STREAM/DEPTH/OOOOl.ilts之樓案路徑,串流檔案受到以 3D-深度模式進行再生之3D播放器參考時,上述立體視覺 父插串流槽案之延伸區中,“D”、“L”、“D”、“L3D”、“L” 係受到3D播放器參考。 若依據第4排’可知CLIPINF/0〇〇〇i.cipi係受到2D播放 器、進行3D-LR再生之3D播放器、進行深度再生之3D播放 器所參考。可知CLIPINF/LR/00001.clip係受到進行3D-LR 再生之3D播放器所參考。可知CLIPINF/DEPTH/OOOOl.clpi 係受到進行深度再生之3D播放器所參考。 如以上’串流分錄為類型=4時,從再生之3D類型(LR 形式、深度形式)及播放器之對應檔案形式(基礎/相依類別 檔案形式、1檔案形式),判斷應載入之串流檔案。 於2D用串流檔案與3D用串流檔案,實現同一延伸區之 交叉鏈結時,藉由設定為基礎視圖串流之類型:=1之串流分 錄,可與2D用串流檔案參考同一串流檔案。予以多工而成 為ITS時,基礎視圖視訊串流、相依視圖串流之串流類型均 設為類型=1之串流分錄,可參考與2D用串流檔案相同的檔 案。 192 201123841 (第11實施形態) 於本實施形態,說明關於用以刪減本發明之30再生妒 置所必需的視訊解碼之所需緩衝器尺寸之:#料構造及 生裝置。 如先前的實施形態所示,3D影像視訊解碼器具有: EB(1) ’係儲存有依據2D/左視圖視訊串流之編碼狀態之視 訊存取單元之緩衝器;及EB(2) ’係儲存有依據右視圖視訊 串流之編碼狀態之視訊存取單元之緩衝器。 該緩衝器尺寸係於MPEG-4 AVC規格中,相當sCpB, 其因應特定規格而設定,而一般為因應位元率之大小所設 定的值。位元率若變大’則需要更多所需緩衝器尺寸,位 疋率若變小,則所需緩衝器尺寸亦變少。在此所謂位元率 係從MB對ΕΒ之傳輸率,若以MPEG-4 AVC規格來說,其意 味儲存於HRD參數資料之位元率。 例如於2D/左視圖視訊串流之位元率為4〇Mbps時,所需 緩衝器尺寸若為4MB ’則以相同編碼方式編碼的位元串流 中’ 30Mbps所必需的緩衝器尺寸為4MBx 30Mbps/40Mbps =3 MB 〇 在此’ 2D/左視圖視訊串流與右視圖視訊串流之合計位 疋率係根據從驅動器之傳輸率等,而規定作為固定值。在 此,視訊串流之合計位元率為60Mbps。 5亥情況下’若合計的位元率為60Mbps,而2D/左視圖視 訊串流之位元率為40Mbps,則右視圖視訊串流之位元率為 2〇Mbps。又,若2D/左視圖視訊串流之位元率為30Mbps, 193 201123841 則右視圖視訊串流之位元率為30Mbps。 該情況下’若考慮位元率之最大值,則2D/左視圖視訊 串流之最大位元率為40Mbps,右視圖視訊串流之最大位元 率為30Mbps。若從各位元率之最大值定義eb之尺寸,則2D/ 左視圖視訊串流用之EB(1)為4M】3x40Mbps/ 4〇Mbps=4MB,右視圖視訊串流用之EB(2)為4MBx30Mbps/ 40Mbps=3MB。若如此定義,則3D再生裝置儲存 4MB+3MB=7MB之緩衝器,各視訊串流做成以在此所定義 的緩衝器尺寸不虧位或溢位,則可保證3D影像的再生。 然而’由於2D/左視圖視訊串流與右視圖視訊串流之合 計位元率為60Mbps,因此不存在2D/左視圖視訊串流之最大 位元率=40Mbp與右視圖視訊串流之最大位元率=3 0Mbps之 組合。因此,為了3D再生裝置用而從各位元率之最大值決 定緩衝器尺寸時(4MB+3MB),會累積超過需要之大緩衝器 尺寸。 因此’說明關於3D再生裝置積存所必需之最低限度之 EB(1)、EB(2)之緩衝器尺寸之資料構造及3D再生裝置。 首先,說明關於資料構造。 資料構造之基本部分係與用以儲存到目前之實施形態 所說明的3D影像之資料構造相同,因此以延伸或不同的部 分為中心來說明。 本實施形態之資料構造係播放項目之構造成為第87圖 所示之構造’相異點在於追加有EB(1)尺寸及EB(2)尺寸之 欄位。第87圖係表示包含基本檔案之尺寸資訊之播放項目 194 201123841 資訊。 ()尺寸係儲存有用以解碼從播放項目所參考的扣/ 左視圖視訊串流所必需的EB〇)之尺寸資訊。 EB(2)尺寸係儲存有用以解碼與上述播放項目同時再 生之右視圖視訊串流所必需的£叫2)之尺寸資訊。 在此’ EB⑴尺寸與呵2)尺寸之合計尺寸係從2〇/左視 圖視訊串流與右視圖視訊串流之合計位科來決定。例如 於2D/左視圖視訊串流與右視圖視訊_流之合計位元率為 60Mbps時,其為4MBx60Mbps/40Mbps=6MB。 又’從播放項目所參考的2D/左視圖視訊串流,係做成 以EB(1)尺寸所定義的緩衝器不齡位、不溢位而可解碼,與 播放項目同時再生之2D/左視圖視訊串流,係做成以四⑴ 尺寸所定義的緩衝器不虧位、不溢位而可解碼。 接著,說明關於3D再生裝置。 3D再生裝置之構成之基本部分係與到目前的實施形態 所說明再生3D影像之3D再生裝置相同,因此以延伸或不同 的部分為中心來說明。 本實施形態之3D再生裝置之相異點在於,因應所再生 的播放項目,變更3D影像視訊解碼器内之基礎視圖用之 EB、相依視圖用之EB之尺寸(記憶體之分派尺寸)。 再生控制部係於進行播放項目再生前,取得播放項目 所含之EB(1)尺寸及EB(2)尺寸之資訊,通知系統目標解碼 器,系統目標解碼器變更3D影像視訊解碼器之EB(1)與EB(2) 之尺寸。再生控制部係於EB(1)與EB(2)之尺寸變更完成 195 201123841 後,開始該播放項目的再生。 3D再生裝置將播放項目#1再生作為3D影像時,特定出 從播放項目#1所參考的2〇/左視圖視訊串流、及與播放項目 #1同時再生之右視圖視訊串流,進行再生處理,3D再生裝 置係從播放項目#1所含之EB(1)尺寸及EB(2)尺寸,變更系 統目標解碼器内之影像視訊解碼器之四⑴及EB⑵之尺 寸。於此例中,EB⑴尺寸設定為4MB,EB(2)尺寸設定為 2MB,進行視訊串流的再生。再生播放項目#2時亦同樣, 3D再生裝置係從播放項目#2所含之eb(i)尺寸及eb(2)尺 寸,變更系統目標解碼器内之影像視訊解碼器之£]8(1)及 EB(2)之尺寸。於此例中’ eB(1)尺寸設定為3MB,EB(2)尺 寸設定為3MB,進行視訊串流的再生。 藉由如此地構成,可因應視訊串流之位元率,適當控 制3D再生裝置所必需的EB⑴及EB(2)之尺寸,可從2D/左視 圖視訊串流與右視圖視訊串流之合計位元率,定義所必需 的緩衝器尺寸。藉此,與具有以各個位元率之最大值所定 義的緩衝器尺寸的情況相比,可刪減所必需的EB(1)與EB(2) 之合計緩衝器尺寸。 再者,於播放項目間進行無縫連接時,若緩衝器尺寸 變更時,當因播放項目間之變遷,某一方之EB之尺寸變小 時,可能無法保障無縫連接,因此禁止此亦可。總言之, 於銜接條件為5、6之播放項目中’無法設定EB(1)尺寸及 EB(2)尺寸,或予以忽視亦可。又,於銜接條件為5、6之播 放項目中,EB(1)尺寸及EB(2)尺寸之值亦可須與前播放項 196 201123841 目之EB(1)尺寸、EB(2)尺寸成為相同值。 又’由於2D/左視圖視訊串流與右視圖視訊串流之合計 位元率係固定地決定,因此僅存在EB(1)尺寸之欄位,EB(2) 尺寸作為EB之合計緩衝器尺寸_EB(1)尺寸而算出亦可。 進而言之,EB(1)尺寸與EB(1)尺寸之攔位若可算出緩 衝器尺寸即可。例如寫有視訊串流之位元率,由此算出, 或EB(1)尺寸與EB(2)尺寸之組合定義作為表,設定其1〇均 "5J- 〇 (第12實施形態) 本實施形態係關於對剪輯資訊之3D元資料、呈現圖形 串流、互動圖形串流、副影像視訊串流之2D影像,追加景 深資訊之改良。 第88圖係表示已追加景深資訊之3D元資料。3D元資料 係如同圖上層所示’就AV串流内所含之呈現圖形串流、互 動圖形串流、副影像視訊串流之每PID,記載有表示3D影 像之顯示時刻之PTS、表示右視圖左眼之畫素偏離之偏移值 之表資訊。偏移值係往X軸方向之晝素數,亦容許負值。在 此,以表的1列之成對的PTS與偏移值之資訊,稱為偏移分 錄。偏移分錄之有效區間係從該偏移分錄之PTS到下一偏移 分錄之PTS為止。例如偏移分錄#1之PTS為180000,偏移分 錄#2之PTS為270000時’偏移分錄#1之偏移值係從180000 到270000為有效。再生裝置之截面合成部係根據該資訊 值,一面將PG截面、IG截面、副影像截面往左右挪移偏移 值,一面進行截面合成。藉此,可做出視差圖像,可對於2 197 201123841 次元影像附加立體的景深。 再者’在此係就每PID設定3D元資料,但例如就各截 面逐—設定亦可。藉此可簡化2D/3D再生裝置之3D元資料 之解析處理。再者,承襲2D/3D再生裝置之合成處理性能, 對偏移分錄之間隔加上例如丨秒以上等限制。 說明關於視訊串流屬性資訊。於3D-LR模式下,2D/ 基礎視圖視訊串流之PID為0x1011之視訊串流屬性資訊之 編碼譯碼器、圖幀率、縱橫比、解像度,須與相對應之右 視圖AV串流之pid為0x1012之視訊串流屬性資訊之編碼譯 碼器、圖幀率、縱橫比、解像度一致。又’於3D-深度模式 下,2D/基礎視圖視訊串流之pid為0x1011之視訊串流屬性 資訊之編碼譯碼器、圖幀率、縱橫比、解像度,須與相對 應之深度圖AV串流之PID為Ox 1013之視訊串流屬性資訊之 編碼譯碼器、圖幀率、縱橫比、解像度一致《此係由於在 蝙碼譯碼器不同時,於視訊串流間之參考關係不成立,而 為了與顯示器同步再生3D影像,若圖幀率、縱橫比、解像 度不一致,則會對使用者給予不調和感。 又,右視圖AV串流之視訊串流屬性資訊,加入表示視 訊串流為參考2D/基礎視圖視訊串流之視訊串流之旗標亦 可。又,亦可包含參考去處之AV串流之資訊。藉由此類構 成,驗證所做成的資料是否按照規定格式製作之工具,可 判斷視訊串流之對應關係。 於2D/基礎視圖視訊串流之剪輯資訊檔案,扯+ 罈存有2D/ 左視圖視訊串流之分錄圖。於2D/左視圖視訊_流 〈各分錄 198 201123841 點,登錄有2D/左視圖視訊串流之G〇p開頭之j圖片之pTS及 SPN。同樣地,於右視圖視訊串流之剪輯資訊檔案,儲存 有右視圖視訊串流之分錄圖。右視圖視訊串流之各分錄點 係登錄有右視圖視訊串流之右視圖G〇p開頭之圖片之pTS 及 SPN。 (第13實施形態) 於本實施形態,就再生前述實施形態所說明的構造之 寊料之再生裝置,說明利用積體電路6〇3所實現的構成例。 媒體IF部601係從媒體接收資料(讀出),並傳輸至積體 電路603。再者,媒體IF部601係從媒體,接收前述實施形 態中所說明的構造之資料。媒體Ϊ F部6 〇丨係例如媒體為光碟 片或硬碟時,則為碟片驅動器,媒體為81:)卡或USB記憶體 等半導體記憶體時,則為卡片IF,媒體為包含CATV等之傳 播波時,則為CAN調階器或Si調階器,媒體為Ethernet(註冊 商標)、無線LAN、無線公共線路等網路時,則為網路π等。 記憶體602係暫時儲存接收(讀出)自媒體之資料,或暫 時儲存積體電路603在處理中途之資料之記憶體,使用例如 SDRAM(Synchronous Dynamic Random Access Memory :同 步動態隨機存取記憶體)、DDRx SDRAM (Double—Data—Ratex Synchronous Dynamic Random Access Memory (雙倍資料率同步動態隨機存取記憶體):X=1、2、 3 ···)等。再者,記憶體602具備任意個數即可,因應需 要而為單一數目或複數個均無妨。 積體電路603係對於從媒體IF部601傳輸的資料,施以 199 201123841 影像•聲音處理之系統LSI,由主控制部6〇6、串流處理部 6〇5、訊號處理部607、記憶體控制部6〇9、AV輸出部6〇8等 所構成。 主控制部606具有計時器功能或插入功能之處理器核 心,處理器核心按照儲存於程式記憶體等之程式,進行積 體電路6G3全體的控制。再者,於程式記憶體等,預先儲存 有OS等基本軟體。 串流處理部605係於主控制部6〇6之控制下,接收從媒 體經由媒體IF部601而傳輸的資料,並經由積體電路6〇3内 之資料區流排而儲存於記憶體602,或將所接收的資料分離 為影像類資料(視訊/圖形(PG、IG))、聲音類資料。如前述, l 3左視圖視訊串流之2D/L用AV剪輯、與包含右視圖視訊 串流之R用AV剪輯’係於分別分割為數個延伸區之狀態下 配置於媒體上。因此’主控制部6〇6係進行控制,以便於接 欠到包含左視圖視訊串流之左眼用資料時,於記憶體6〇2之 =1區域儲存資料,於接收到包含右視圖視訊串流之右眼用 j料時於§己憶體602之第2區域儲存資料。在此,左眼用 資料屬於左眼用延伸區,右眼用資料屬於右眼用延伸區。 再者,記憶體602之第1、第2區域係單一記憶體在邏輯上受 】區域分割之物,或物理上不同之記憶體均可。又 ,於本 貫鈿形態争,包含左視圖視訊串流之左眼用資料設為主視 圖資料,包含左視圖視訊串流之左眼用資料設為主視圖資 料而持續說明,但右眼用資料為主視圖資料,左眼用資料 為子視圖資料亦無妨。 200 201123841 訊號處理部607係於主控制部嶋的㈣下,對於串流 處理部6G5所分離的影像類資料、聲音類資料,以適當方式 解碼。影像類資料係使用MPEG_2、MpEG—4 AM、 MPEG4-MVC:、SMPTE V㈡等方式μ編航錄,而聲音 類資料係以杜比AC-3、Dolby Digital Plus、MLp、謂、 DTS-HD、線性PCM等方式壓縮•編碼記錄,因此訊號處 理部607係以龍料的方式解碼4者,訊號處理部6〇7 的模型相當於例如第9實施形態之第65圖之各種解碼器。 記憶體控制部609係調停從積體電路6 〇 3内之各功能方 塊塊,對於記憶體602之存取。 AV輸出部608係於主控制部6〇6的控制下,重疊訊號處 理部607所解碼的影像類資料,或進行影像類及資料之格式 轉換等,並往積體電路603外輸出。 第90圖係表示串流處理部6〇5之代表性構成之功能方 塊圖。串流處理部605具備:裝置串流汙部651、解多工部 652及切換部653等。 裝置串流IF部651係媒體IF部601與積體電路603間之 資料傳輸用介面’例如媒體為光碟片或硬碟時,其為 SATA(Serial Advanced Technology Attachment :序列進階技 術附加裝置)、ATAPI(Advanced Technology Attachment Packet Interface :進階技術附加封包介面)、PATA(Parallei Advanced Technology Attachment :並歹1j 進階技術附力口裝 置)’媒體為SD卡或USB記憶體等半導體記憶體時,其為卡 片IF ’媒體為包含CATV等之傳播波時,則為調階器IF,媒 201 201123841 體為網際網路、無線LAN、無線公共線路等網路時,則為 網路IF等。再者,視媒體的種類,裝置串流iw5i取代媒 體_之一部分功能,或媒體㈣咖内建於積體電路舶 均無妨。 解多工部652係將傳g自媒體之包含影像•聲音之再生 資料’分離為影像類詩與聲音類諸。前述各延伸區係 由影像•聲音.PG(字幕).IG(選單)等之各來源封包所構成 (其中,子視圖資料有時不含聲音),按照各來源封包所含之 PID(識別符),分離為影像類•聲音類之各封包並傳輸至 訊號處理部6G7。處理完畢之資料直接或暫讀存於記憶體 6〇2之後’傳輸至訊號處理部術。再者,解多工部奶的模 型相當於例如第9實施形態之第65圖之來源解封包處理 器、PID濾波器。 切換部6S3係切換輸出去處(儲存去處),以便於裝置串 流1F部651接收到纽用資料時,儲存於記憶體602之第鳩 域,於接收到右眼用資料時,儲存於記憶體602之第2區域。 在此,切換部653為例如DMAC(Direct C〇咖11 :直接記憶體存取控制器)。第圖係切換部653為 DMAC時之切換部653周邊之㈣圖。dmac係於主控制部 606的控制下’對於記憶體控制部_,傳送裝置串流仔部 所接收到的資料及其資料健存去處位址。具體而言,裝置 串流1F部接收到左眼用資料時,傳送位址咖儲存區域), 接受到右眼用資料時,傳送位址2(第2儲存區域)至記憶體控 制4609依接收資料來切換其輸出去處⑽存去處)。記憶 202 201123841 體控制部609係按照從DMAC送來之儲存去處位址,於記情 體602儲存資料。再者,取代主控制部6〇6而設置控制切換 部653之專用電路亦可。 ' 在此,作為串流處理部605之代表性構成係說明裝置串 流IF部65卜解多工部652、切換部653,但亦可進一步具備 解碼所接收到的加密資料或鍵資料等之密碼引擎部、保持 :體〜再生裝置間之機器認證協定等之執行控制或保持秘 在鍵之女王I·生s理部、直接§己憶體存取用之控制器等。到 此係說明於記憶體602 ’儲存從媒體所接收到的資料時,切 換部⑹依左眼用資料、右眼„料來切換儲存去處的情 況’但暫時於記憶體鎖儲存接收自媒體的資料後,在對解 多工部652傳輸資料時’分成左眼用資料•右眼用資料亦可。 第92圖係表示AV輸出部_之代表性構成之功能方塊 圖。AV輸出部刪具備:圖像重疊部681、視訊輸出格式轉 換部682及音訊•視訊輸出ip部683等。 圖像重疊部681係重紅解碼的影像類⑽。1體而 言,以圖片為單位,重疊左視圖視訊資料或右視圖視訊資 料、與PG(字幕)及罐單)。圖像重疊部68ι之模型為例如 第11實施形態、第92圖等。 圖像重疊部681係重叠左視圖截面與圖形截面、右視圖 戴面與圖形截面。第94圖係、表示圖像重#處理中之記憶體 與各截面之關係之圖。㈣憶购2,具備儲存解碼完畢之 ㈣且描繪於各截面之資料之區域(對應於左視圖之截面 貝料儲存區域、對應於右視儲存區域、對應 203 201123841 於圖形之截面資料儲存區域)。在此,截面為記憶體6〇2中 之區域’亦為虛擬的空間。記憶體602進-步具備儲存圖像 重且後之資料之_像重疊後資料儲存區域。第95®、第96 圖為圖像重疊之概念圖。在此為了簡化,以-截面偏移模 式為月j提來說明,前述__截面偏移模式係圖像截面為1張, 與左視圖截面重4時,對_截面給予+χ之偏移,與右視 圖截面重㈣’給予'X之偏移而進行重疊處理。再者,準 備兩張圆形截面作為左視圖重疊用、右視圖重#用,分別 給予偏移值而進行重疊處理亦無妨。於第95圖,將令圖形 截面在紙面上往右僅平行移動偏移值者,與左視圖截面重 疊於第96圖將令圖形截面在紙面上往左僅平行移動偏 移值者,與右視圖截面重®。此時,如圖示,將紙面上左 右°彳下相同之相對應的像素彼此重疊,於記憶體602 之圖像重疊後資料儲存區域,儲存重疊後之資料。再者, 圖形截面之偏移㈣如前述,包含於右視圖視訊串流(子視 圖視訊串流)或播放,列。第97圖係表示圖像重疊之別的方 法之概念圖。於記憶體6G2,進—步具備對應於偏移完畢圖 形之截面資料儲存區域(左視圖重4用、右視圖重疊用),預 先於-己隨6G2,準備與左視賊面、右視圖截面重疊的資 料,圖像重疊部681從記憶體602載入所必需的資料而重 φ ’於記憶體6G2之圖像重疊後f料儲存區_存重疊後之 資料。又’第98圆為關於文本字幕(有別於?咖)之重疊之 概念圖。文本字幕係如前述’受❹W絲文本字幕串 流’描繪於圖形截面而重疊,將左視圖載面重疊時及右視 204 201123841 圖重疊時分別僅挪移偏移值而描繪者,與左視圖截面、右 視圖截面重疊。再者,如第98圖所示,記憶體6〇2進一步具 備對應於文本字幕之截面資料儲存區域。 視訊輸出格式轉換部682係對於已解瑪的影像類資 料,因應需要而進行放大或縮小的重調大小處理、將掃描 方式從漸近方式及交插方式之一方轉換為另一方之斤轉換 處理、去除雜訊之雜訊減少處理、轉換圖巾貞率之圖巾貞率轉 換處理等。 音訊•視訊輸出IF部683係對於經圖像重疊或格式轉換 之影像類資料、及已解碼的聲音類資料,配合資料發送形 式而進行編碼等。再者,如後述,音訊•視訊輸出11?部683 之—部分設於積體電路603外亦無妨。 第93圖係更詳細表示AV輸出部608或再生裝置之資料 輸出部分之構成例。本實施形態之積體電路6〇3及再生裝置 係對應複數個影像類資料、聲音類資料之資料發送形式。 第92圖之音訊•視訊輸出IF部683係對應類比視訊輸出IF部 683a、類比音訊輸出IF部683c、數位音訊•視訊輸出IF部 683b 〇 類比視訊輸出IF部683a係將經圖像重疊處理或輸出格 式轉換處理之影像類資料,轉換•解碼為類比影像訊號形 式而輪出。例如對應NTSC、PAL、SECAN之3方式之某一 方式之複合視訊解碼器' S影像訊號(Y/C分離)用編碼器、 成分影像訊號用編碼器或D A C (D / A轉換器)等則相當於其。 數值音訊•視訊輸出IF部683b係將已解碼的聲音類資 205 201123841 料、與經圖像重疊處理或輸出格式轉換之影像類資料予以 一體化,進一步加密後,配合資料發送規格而編碼旅輸出。 例如HDMl(High-Definition Multimedia Interface :高解像度 多媒體介面)等即相當於其。 類比音訊輸出IF部683c係將已解碼的聲音類資料,予 以D/A轉換而輸出類比聲音資料,音訊DAC等即相當於其。 該等影像類資料及聲音類資料之發送形式,可取決於 顯示裝置·揚聲器604側所支援的資料接收裝置(資料輸入 端子)而切換’或按照使用者的選擇來切換發送形式。進而 s之’不僅採單一發送形式’亦可並行地採複數種發送形 式來發送對應於同一内容之資料。 在此’作為AV輸出部608之代表性構成,說明關於圖 像重疊部681、視訊輸出格式轉換部682、音訊•視訊輸出 IF部683,但亦可進一步具備進行濾波器處理、晝面合成、 曲線描繪、3D顯示等圖形處理之圖形引擎部等。 以上係關於本實施形態之再生裝置之構成的說明。再 者’前述積體電路603所含之各功能方塊並非全部内建亦 可,相反地,第89圖之記憶體602内建於積體電路6〇3亦可。 又,於本實施形態,說明主控制部606與訊號處理部6〇7為 不同的功能方塊’但主控制部606進行訊號處理部6〇7之一 部分處理亦無妨。 又,積體電路603之控制匯流排或資料匯流排之路徑係 依據各處理方塊之處理程序或處理内容而任意配置,但例 如第99圖所示,直接連結各處理方塊而配置資料匯流排, 206 201123841 或如第100圖所示,以經由記憶體602(記憶體控制部609)連 結各處理方塊之方式配置資料匯流排均可。 又’積體電路603亦可為多晶片模組,係於丨個封裝體 密封複數個晶片’並在外觀上製成1個LSI者。 又’亦可利用於LSI製造後,可編程之FPGA(Field Programmable Gate Array :現場可編程閘極陣列),或可再 構成LSI内部之電路胞之連接或設定之可重組處理器。 接著,說明關於如以上構成之再生裝置之動作。 第101圖係簡單表示從媒體接收(讀出)資料,於解碼後 作為影像訊號及聲音訊號輸出之再生動作程序之流裎圖。 S601 :從媒體接收資料(讀出)(媒體汗部卜串流處理邹 S602:於讀接收到(讀出)的資料,分離為各種 像類資料.聲音類資料)(串流處理部6〇5)。 ,(影 S603 .於S602分離的各種資料,以適當 號處理部607)。 的形式解碼 (訊 S6〇4 :於S603經解碼處理的各種資料中,* | 資料進行重疊處理(AV輸出部6〇8)。 十對影像類 :輸出在顯〜S6G5中處理的影像 類資料(AV輸出部608)。 負料及聲音 第102圖係更詳細表示再生動作程序之流。 作•處理係於主控制部6的控制下進行。 秩圖。各動 謂2··串流處理觸5之裝置串流㈣ 媒體IF部601儲存於媒體之再生的資料以 係接收透過 之用以再生資 207 201123841 料所必需的資料(playlist(播放串列)、CLIPiNF等),並儲 存於記憶體602(媒體IF部601、裝置IF部51、記憶體控制部 609、記憶體602)。 S 702 :主控制部6係從包含於所接收到的CLIpiNF之串 々'L屬性 > 讯,辨識儲存於媒體之影像資料及聲音資料之壓 縮也式,並進行机说處理部607之初始化,以便可進行相對 應之解碼處理(主控制部606)。 S7〇3 :串流處理部605之裝置串流吓部651係接收(讀出) 透過媒體IF部601儲存於媒體之影像·聲音等再生的資料, 並經由切換部653、記憶體控制部609而儲存於記憶體6〇2。 再者,資料係以延伸區為單位接收(讀出),主控制部_控 制切換部6M,以便於接收到(讀丨)左眼用資料時儲存於 第1區域,於接收到(讀出)右眼用資料時,儲存於第2區域; 切換部M3切換資料的輸出去處(儲存去處)(媒體脱陳、 裝置串流IF部51、主控制部_、切換部⑹、記憶體控制 部609、記憶體602)。 S704 :儲存於記憶體6〇2之資料係傳輸至串流處理部 605之解多部652,解多卫部松係按照構成串流資料之來 、'、子匕所3之PID’辨識其為影像類(主影像、副影像、(字 幕IG(選單))、聲音峨音、鱗音)之何者,以TS封包 為早位傳送至訊號處理部607之相對應的解碼器(解多工部 652)。 。 208 201123841 S706 : 於訊號處理部6G7解觸影_資射,將對應 於左視圖視訊串流及右視圖視訊串流之資料,配合顯示^ 置4重調大小(視訊輸出格式轉換部682)。 乂 S707 :㈣屬重調大小之視訊串流與PG(字幕)· IG(選 單)重疊(圖像重疊部681)。 通:對於在⑽重疊之影像資料,進行掃描方式的 轉換即IP轉換(視訊輸出格式轉換部682)。 S709 :對於已進行糊目前為止之影像類資料及聲音 類資料’按照顯示裝置·揚聲器6〇4之資料輸出方式或頻示 裝置·揚聲器604之資料發送方式,進行編碼或d/a轉換。 例如將影像類資料•聲音類資料分別進行處理,以對應類 比或數位輸出。作為影像類資料之類比輸出係支援複合影 像汛唬、S影像訊號或成分影像訊號。又,影像類·聲音類 皱料之數位輸出係支援HDMI(音訊.視訊輸出11?部683)。 S110 :將S709所處理的影像類資料及聲音類資料,傳 送、輸出至顯示裝置·揚聲器6〇4(音訊•視訊輸出11;部683、 顯示裝置·揚聲器604)。 以上係本實施形態之再生裝置之動作程序的說明。再 者,就各處理,於記憶體602暫時儲存處理結果亦無妨。又, 於本動作程序,說明在視訊輸出格式轉換部682進行重調尺 寸處理及IP轉換處理的情況,但亦可因應需要省略處理, 或進行其他處理(雜訊減少處理、圖巾貞率轉換處理)均無妨。 進而對可能的處理,變更處理程序亦無妨。 (備考) 209 201123841 以上係說明關於在本申請案之申請時點,申請人可得 知最佳的實施形態’關於以下所示之技術性題材,可加以 進V改良或變更實施。請留意如各實施形態所示而實 施,或是否施以該等改良•變更均為任意,交付實施者的 主觀來決定。 (複數個偏移序列的分派) 於複數個偏移序列之各者,儲存圖像之每巨集塊之景 深,此僅止於一例。 又,表示各者各差異+10或·10之景深資訊設定作為 各偏移序列之截Φ偏移方向f訊及截面偏移移位值亦可。 (檔案彼此之對應關係) 於第3實施形態,於利用識別資訊之對應建立之具體例 中,對左視圖之識別號碼加算“丨”者設為右視圖之識別號 碼。然而,採用對左視圖之識別號碼加算“ 1〇〇〇〇”者作為 右視圖之識別號碼亦可。 藉由檔案名之耦合方式實現檔案之對應建立時,需要 用以找出再生裝置側被耦合的檔案之機制,需要找出如上 述附上規則之檔案,未被播放串列參考的檔案亦予以再生 之機制。利用該等方法時,3D對應再生裝置需要上述機制, 但不須於2D影像與3D影像區分播放串列,亦可於自以往普 及的2D再生裝置安全地動作。 如深度方式用之灰階,關於以1個無法再生立體視覺影 像之串流,改變副檔名而區別,以使得機器不會誤將該檔 案單獨再生。為了識別無法單獨再生之檔案,防止從既有 210 201123841 機器經由 DLAN(Digital Living Network Alliance :數位生活 網路聯盟)參考3 D對應檔案時等之使用者混淆。使得檔案號 碼相同,區別副檔名,藉此僅以檔案名亦可表現配對鏈結 資訊。 (立體視覺方式) 第1實施形態中作為說明前提之視差圖像方式係為了 於時間軸方向,交替顯示左右影像,例如若為一般的2次元 電影’須於1秒顯示24張的電影,相對於此,須配合左右影 像而於1秒顯示24張電影。因此,本方式係於一畫面之重寫 較快之顯示裝置較適宜。利用該視差圖像之立體視覺已經 一般性地使用於遊樂園的遊樂器具等,技術上亦已確立, 因此可謂最接近在家庭内實用化的技術。除此之外,利用 視差圖像之立體視覺用的方法亦已提案2色分離方式等各 種技術。本實施形態已利用繼時分離方式或偏光眼鏡方式 為例來說明’但只要利用視差圖像均可,不限定於該等2方 式。 關於顯示裝置3GG,不僅止於柱狀透鏡,亦可使用具同 樣功此的裝置例如液晶元件。又,對左眼用像素設置縱 偏光遽H對右㈣像素設4橫偏総光H,收視者利 用左眼用設有縱偏域光器、右眼用設有橫偏光渡光器之 偏光眼鏡’觀看顯示裝置的晝面,藉此實現立體視覺。 (左視圖、右視圖之適用對象) 準備左視圖及右視圖不僅是關於正編之視訊串流,亦 可適用於縮圖圖像。與視訊串流的情況相同,於2D再生裝 211 201123841 置顯示以往的2D用縮圖,於3〇再生裝置,配合3D顯示方式 而輸出為3D用而準備的左眼縮圖及右眼縮圖。 同樣地,亦可應用於選單圖像或章節搜尋用之場景類 別縮圖圖像、場景類別縮小晝面。 (程式之實施形態) 各實施形態所示之應用程式可如以下編寫t,首先,各 實施形態所示之應用程式可如以下編寫。首先,最初軟體 開發者利用程式化語言,撰寫實現各流程圖或功能性構成 要素之來源程式。軟體開發者在撰寫時,按照程式化語言 的句法,並利用類別構造體或變數、排列變數、外部函數 的呼叫’撰寫使得各流程圖或功能性構成要素具體化的來 源程式。 撰寫的來源程式係作為檔案而給予編譯器。編譯器翻 譯該等來源程式而生成物件程式。 由編譯器所進行的翻譯係由句法解析、最佳化、資源 分配、碼生成等類過程所組成。於句法解析中,進行來源 程式之字句解析、句法解析及含意解析,將來源程式轉換 為中間程式。於最佳化中,對於中間程式進行基本區塊化、 控制流程解析、資料流程解析的作業。於資源分配中,為 了謀求對於目標處理器之命令設定的配合,將中間程式中 的變數分配給目標處理器之處理器所具有的暫存器或^憶 體。於碼生成中,將中間程式内之各中間命令轉換為程^ 碼,獲得物件程式。 在此所生成的物件程式係、由⑽以上之程式碼所構 212 201123841 成,而前述程式碼係令電腦執行各實施形態所示之流程圖 之各步驟、或功能性構成要素之各程序,在此,程式碼有 各種種類,諸如處理!I之原生碼、MVA位元組碼^藉由程 式瑪實現各步驟時,存在有各種II樣。可利科部函數實 現各步驟時’呼叫該外部函數之吵叫文即為程式碼。又, 實現1個步驟之程式碼有時亦歸屬於不同的物件程式。於命 令種類受到限制之RISC處理器,亦可藉由組合算術運算命 令或邏輯運算命令、分支命令等,來實現流程圖之各步驟。 當物件程式生成時,程式設計師對於該等啟動鏈接 器。鏈接n係將該等物件程式或相義的程式庫分派給記 憶體空間’將料結合為1個而生絲人魅。如此所生成 的載入模組係以電腦讀取為前提,令電腦執行各流程圖所 示之處理程序或功祕構成要素之處理㈣。於電腦可讀 取的記錄媒體記錄該程式,並提供給使用者亦可。 (光碟片的再生) BD-ROM驅動器具備光學頭,其具備半導體雷射、準 直透鏡、分光器、物鏡、聚光透鏡及光檢測器。從半導體 雷射所射出的光束係、通過準直透鏡、分光器、物鏡而聚光 於光碟片之資訊面。 被聚光之光束係於光碟片上反射/繞射,通過物鏡、分 光器、聚光透鏡而聚光於光檢測器。因應由光檢測器所聚 光的光之光量,生成再生訊號。 (記錄媒體的變化) 各實施形態之記錄媒體包含光碟片、半導體記憶卡 213 201123841 等、封裝媒體全部。本實施形態之記錄媒體係以事先記錄 有所需資料之光碟片(例如BD-ROM、DVD-ROM等既有的 可讀取光碟只)為例來說明,但未必要限定於此,本發明的 實施亦可於能夠利用具有對光碟片寫入功能之終端裝置 (例如於再生裝置嵌入上述功能,或與再生裝置為不同的裝 置均可)來寫入的光碟片(例如BD-RE、DVD-RAM等既有的 可寫入光碟片)’記錄經由放送或網路而發送、包含本發明 實施所需資料之3D内容,並將該已記錄的光碟片適用於本 發明之再生裝置。 (半導體記憶卡記錄裝置及再生裝置之實施形態) 說明關於在半導體記憶體記錄各實施形態所說明的資 料構造之記錄裝置、及予以再生之再生裝置之實施形態。 首先,作為前提技術,說明關於記錄於BD-ROM的資 料之著作權保護機制。 記錄於BD-ROM的資料中,從例如著作權保護、資料 隱密性提升的觀點考量,會有資料的一部分已因應需要而 加密的情況。 例如記錄於BD-ROM的資料中,已加密的資料為例如 對應於視訊串流的資料、對應於音訊串流的資料、或對應 於包含該等之串流的資料。 以下說明關於記錄於BD-ROM之資料中已加密資料之 解讀。 於半導體記憶卡再生裝置中,對應於用以解讀 BD-ROM内已加密資料所需的金鑰之資料(例如裝置密 214 201123841 錄),預先記憶於再生裝置。 另,於BD-ROM,記錄有對應於用以解讀已加密資料 所需的金鑰之資料(例如對應於上述褒置金錄之MKB(媒體 密鑰區塊))、及加密用以解讀已加密資料之金鑰本身之資料 (例如對應於上述裝置密鑰及MKB之加密標題密錄)。在 此’裝置密鑰、MKB及加密標題密鑰係成對,進一步亦與 寫入於BD-ROM上之一般無法複製的區域(稱為bca的區 域)之識別符(例如卷ID)被賦予對應。該組合若不正確,則 無法解讀密碼。僅在組合正確時,可導出密碼解讀所需的 金鑰(例如依據上述裝置密鑰、MKB及卷ID,解碼加密標題 在、输所獲得的標題密錄)’利用該密碼解讀所必需的金鑰, 可解讀已加密的資料。 於再生裝置再生已裝入的BD-ROM時,若於再生裝置 内未有例如BD-ROM内之加密標題密錄、MKB成對(或相對 應)之裝置密鑰’則已加密的資料不會再生。此係由於解讀 已加密資料所需的金鑰(標題密鑰)係金鑰本身被加密(加密 標題密鑰)而記錄於BD_ROM上,若MKB與裝置密鑰的組合 不正確’則無法導出解讀密碼所需的金鑰。 反言之,若加密標題密鑰、MKB、裝置密鑰及卷山的 組合正確,例如依據上述密碼解讀所需的金鑰(裝置密鑰、 MBK及卷iD),解碼加密標題密鑰,利用所獲得的標題密 鑰,於解碼器解碼視訊串流,於音訊解碼器解碼音訊串流, 再生裝置構成如上。 以上係記錄於BD-ROM之資料之著作權保護機制,該 215 201123841 機制未必限定於BD-ROM,例如於適用在可载入/寫入之半 導體記憶體(例如SD卡等具有可搬運性之半導體記憶卡)的 情況下亦可實施。 說明關於半導體記憶卡再生裝置之再生程序。光碟片 係構成例如經由光碟片驅動器讀出資料,相對於此,於使 用半導體記憶卡的情況下’構成如經由用以讀出半導體記 憶卡内資料之I/F而讀出資料即可。 更詳言之,當於再生裝置的插槽插入半導體記憶卡 時,經由半導體記憶卡I/F,再生裝置與半導體記憶卡會電 連接。記錄於半導體記憶卡之資料係構成如經由半導體記 憶卡I/F而讀出即可。 (作為接收裝置之實施形態) 各實施形態所說明的再生裝置,亦可作為從電子配送 服務之配送伺服器,接收對應於本實施形態所說明的資料 之資料(配送資料)’並記錄於半導體記憶卡之終端裝置而實 現0
I 該終端裝置構成如各實施形態所說明的再生裝置可進 行該類動作,或有別於本實施形態之再生裝置,以在半導 體S己憶體進行配送資料記憶之專用終端裝置來進行的形態 均可。在此說明由再生裝置進行的例子。又,作為記錄去 處之半導體記憶體,舉例說明SD卡。 於插入於再生裝置所具備的插槽之SD記憶卡,記錄配 送資料時,首先對積存配送資料之配送伺服器,要求發送 配送資料。此時,再生裝置係從81)記憶卡,讀出唯一地識 216 201123841 別插入tSD記憶卡之識別資訊(例如各個SD記憶卡所固有 的識別號碼,更具體而言為例如SD記憶卡之序列號碼等), 要求配送所讀出的識別資訊,並且發送給配送伺服器。 該唯一地識別S D記憶卡之識別資訊係與例如上述之冊 ID相同。 另,於配送伺服器,配送之資料中所必需的資料係以 玎利用密碼解讀所必需的鍵(例如標題金鑰),來解除密碼之 方式受到加密’並儲存於伺服器上。 例如配送伺服器係構成如保持有秘密鍵,可對於半導 體記憶卡固有的識別號碼之各者,動態地生成不同的公開 鍵資訊。 又,配送伺服器係構成如可對於已加密之資料解讀所 必需的鍵(標題金鑰)本身,進行加密(亦即構成如可生成加 密標題金鑰)° 所生成的公開鍵包含例如相當於上述MKB、冊ID及加 密標題金錄之資訊。已加密的資料若例如半導體記憶體固 有的識別號碼、後述之公開鍵資訊所含之公開鍵主體、及 預先記錄於再生裝置之裝置金鑰的組合正確,則可獲得密 碼解讀所必需的鍵(例如裝置金鑰、M K B及依據半導體記憶 體固有的識別號碼解碼加密標題鍵所獲得的標題金鑰),利 用該獲得的密碼解讀所必需的鍵(標題鍵),可解讀已加密的 資料。 接著’再生裝置係於插入於插槽之半導體記憶卡之記 憶區域’記錄所接收的公開鍵資訊及配送資料。 217 201123841 接著,說明關於記錄於半導體記憶卡之記錄區域之公 開鍵資訊、及解碼配送資料所含之資料中已加密之資料而 再生之方法之一例。 所接收之公開鍵資訊記錄有例如公開鍵主體(例如上 述MKB及加密標題金鑰)、簽名資訊、半導體記憶卡固有的 識別號碼、及表示關於應使其無效之裝置之資訊之裝置串 列。 簽名資訊包含例如公開鍵資訊之散列值。 於裝置串列,記載有關於可能進行不法再生之裝置之 資訊。此係例如預先記錄於再生裝置之裝置金鑰、再生裝 置之識別號碼、或再生裝置所具備的解碼器之識別號碼, 用以唯一地特定出可能進行不法再生之裝置、裝置所含之 元件或功能(程式)。 說明關於記錄於半導體記憶卡之記錄區域之配送資料 中,已加密之資料的再生。 首先,利用公開鍵主體解碼已加密的資料前,進行是 否可令解碼鍵主體發揮功能的檢查。具體而言進行如下檢 查:(1)公開鍵資訊所含之半導體記憶體固有之識別資訊, 是否與預先記憶在半導體記憶卡之固有識別號碼一致之檢 查;(2)於再生裝置内算出之公開鍵資訊之散列值,是否與 包含於簽名資訊之散列值一致之檢查;(3)根據公開鍵資訊 所含之裝置串列所示的資訊,進行再生之再生裝置是否可 進行不法再生之檢查(例如公開鍵資訊所含之裝置串列所 示之裝置金鑰、與預先記憶於再生裝置之裝置金鑰是否一 218 201123841 致之檢查)。 進行該等檢查之順序採任何順序進行均可。 於上述檢查(1)-(3)中,公開鍵資訊所含之半導體記憶 體固有之識別資訊,與預先記憶在半導體記憶卡之固有識 別號碼不一致,或於再生裝置内算出之公開鍵資訊之散列 值,與包含於簽名資訊之散列值不一致,或判斷進行再生 之再生裝置可能進行不法再生,若符合以上某一項,則再 生裝置控制為不進行已解碼之資料的解碼。 又,,公開鍵資訊所含之半導體記憶體固有之識別資 訊,與預先記憶在半導體記憶卡之固有識別號碼一致,且 於再生裝置内算出之公開鍵資訊之散列值,與包含於簽名 資訊之散列值一致,且判斷進行再生之再生裝置不可能進 行不法再生時,判斷半導體記憶體固有之識別號碼、公開 鍵資訊所含之公開鍵主體、及預先記錄於再生裝置之裝置 金鑰的組合正確,依據密碼解讀所必需的鍵(依據裝置金 鑰、MKB及半導體記憶體固有的識別號碼,解碼加密標題 金鑰所獲得的標題金鑰),進行已加密之資料的解讀。 例如已加密的資料為視訊串流、音訊串流時,視訊解 碼器利用上述密碼解度所必需的鍵(解碼加密標題金鑰所 獲得標題金鑰),解碼(decode)視訊串流,音訊解碼器利用 上述密碼解度所必需的鍵,解碼(decode)音訊串流。 藉由如此地構成,於電子配送時,已經得知有不法使 用之可能性之再生裝置、零件及功能(程式)等時,若用以識 別該等之資訊表示於裝置串列而配送,則於再生裝置側包 219 201123841 含於裝置串列所示之裝置時,可抑制利用公開鍵資訊(公開 鍵主體)之解碼,因此即便半導體記憶固有的識別號碼、公 開鍵資訊所含之公開鍵主體、及預先記錄於再生裝置之裝 置金錄的組合正確,由於可控制為不解讀經加密之資料, 因此可抑制在不法裝置上利用配送資料。 又’宜採用預先記錄於半導體記憶卡之半導體記憶卡 固有的識別符,儲存於隱密性高的記錄區域之構成。此係 由於若預先記錄於半導體記憶卡之固有的識別號碼(例如 以SD記憶卡為例’則是SD記憶卡之序列號碼等)受到竄改 時’可容易進行違法複製。此係由於對複數個半導體記憶 卡,分派有分別不同的固有的識別號碼,但若被竄改為該 固有的識別號碼變成同一號碼,則上述判斷(1)喪失意義, 因可能進行相當於被竄改數之違法複製。 因此,半導體記憶卡之固有的識別號碼該類資訊,宜 採用記錄於隱密性高的記錄區域之構成。 為了實現此類構成,例如半導體記憶卡係構成如於設 置與健存一般資料之記錄區域(以下稱為第1記錄區域)有別 的記錄區域(以下稱為第2記錄區域),設置用以記錄半導體 記憶卡之固有的識別符該類隱密性高的資料之記錄區域, 以及設置用以存取該第2記錄區域之控制電路,並且設置用 以存取該第2記錄區域之控制電路,並且僅可經由控制電 路,來存取該第2記錄區域。 例如a己錄於第2記錄區域之資料受到加密而記錄,控制 電路嵌入有例如用以解瑪已加密的資料之電路。對控制電 220 2〇ll2384l 路有對第2記錄區域之資料存 * 的資料而構成即可 ’碼密碼,送回已解碼 域之資料之料場所的係保持記錄於幻記錄區 出相對應之資料之儲存處所,::=要求時,特定 取的資料而構成亦可。 〜特疋出的儲存處所讀 於再生裝置上動作之廊 導體記憶卡料崎之 …且_料配送於半 電路,發行對二 若經由記憶卡W向控制 發仃對5己錄於第2記錄區域之資 體固有的識別號碼)之存取要求 ^ 托夺,接艾要求的控制電路係 ^貝出記錄於第2記錄區域之資料,並送回在再生裝置上動作 之應用程式。向配送舰器要求該半導體記憶卡之固有的 識別號碼以及所必需的資料之配送,於第说錄區域記錄送 自配达飼服器之公開鍵資訊及相對應之配送資料而構成即 可0 又,於再生裝置上動作之應用程式、且利用電子配送 於半導體§己憶卡要求記錄之應用程式,宜於經由記憶卡j/F 向控制電路,發行對記錄於第2記錄區域之資料(例如半導 體記憶體固有的識別號碼)之存取要求前,事前檢查應用程 式是否受到竄改。竄改的檢查亦可利用例如用到遵循既有 的X.509規格之數位證書之檢查等。 又,對於記錄於半導體記憶卡之第1記錄區域之配送資 料的存取,未必要經由半導體記憶卡所具有的控制電路來 存取。 產業之可利用性 221 201123841 關於本發明之資訊記錄媒體係儲存有3D影像,而由於 可於再生2D影像之裝置及再生3D影像之裝置之任一者再 生,因此無須意識到相容性,即可將儲存有3D影像之電影 標題等動畫内容提供給市場,可活化電影市場或民生機器 市場。因此,本發明之記錄媒體、再生裝置係於電影產業 或民生機器產業具有高度的可利用性。 【圖式簡單說明3 第1(a)〜(c)圖係關於記錄媒體、再生裝置、顯示裝置、 眼鏡之使用行為之形態。 第2圖係於左側描繪使用者臉部,於右側表示從左眼觀 看作為對象物之恐龍骨骼之情況之例,及從右眼觀看作為 對象物之恐龍骨骼之情況之例。 第3圖係表示立體視覺用之左視圖視訊串流、右視圖視 訊串流之内部構成之一例。 第4(a)、(b)圖係表示於1截面+偏移模式下,對於截面 記憶體之層模型進行何種偏移控制。 第5(a)、(b)圖係表示藉由第4圖之偏移控制再生何種立 體視覺影像。 第6(a)〜(d)圖係表示1截面+偏移模式之立體視覺之實 現方式。 第7圖係表示具備1截面+偏移模式用之控制資訊之相 依視圖串流之内部構成。 第8(a)〜(c)圖係表示使用者資料容器之内部構成之 圖。 222 201123841 第9圖係表示用以描述偏移元資料之語法。 第10(a)、(b)圖係表示正與負的截面偏移之觀看+欠果的 差異之一例之圖。 第11圖係以橫軸作為時間軸,以縱轴作為截面偏移值 (Plane_offset_value)[j]之圖。 第12圖係以橫軸作為時間軸,以縱轴作為截面偏移值 (Plane一offset_Value)[j]之圖。 第13圖係表示藉由偏移序列id(offset_sequenee⑷ =1、2、3、4之偏移序列定義何種景深之—例。 第14(a)〜(c)圖係表示關於第1實施形態之記錄媒體之 内部構成。 第15(a)、(b)圖係進一步詳細表示視訊串流如何儲存於 PES封包串。 第16圖係模式性地表示主ts如何受到多工之圖。 第17(a)、(b)圖係表示主TS及子TS之内部構成。 第18(a)〜(d)圖係表示播放串列資訊之内部構成。 第19(a)、(b)圖係表示基本串流選擇表之一例。 第2〇圖係表示延伸串流選擇表之内部構成。 第21(a)〜(c)圖係表示延伸串流選擇表之串流登錄串。 第22圖係表示依據基本串流選擇表、延伸串流選擇 表’從主TS、子TS將何種ES解多工。 第23圖係表示進行如第22圖之解多工時,如何參考基 本串流選擇表、延伸串流選擇表之串流登錄串。 第24圖係表示模式之串流號碼之分配變化。 223 201123841 第2 5圖係表示用以利用物件導向編譯器語言來描述延 伸串流選擇表之語法。 第26圖係表示再生裝置之内部構成。 第27(a)〜(c)圖係表示藉由結合串流登錄串輸出何種 封包識別符至解多工部。 第28(a)〜(c)圖係表示藉由結合串流登錄串輸出何種 封包識別符至解多工部。 第29圖係表示再生裝置設定為B-D呈現模式,且B-D 能力存在時之封包識別符之參考及封包輸出。 第30圖係表示再生裝置設定為1截面+偏移模式時之封 包識別符之參考及封包輸出。 第3 1圖係表示再生裝置設定為2D呈現模式時之封包識 別符之參考及封包輸出。 第32圖係表示於再生裝置不存在B-D呈現模式之能力 時之封包識別符之參考及封包輸出。 第33圖係表示播放串列再生程序。 第34圖係表示串流選擇手續之處理程序。 第35圖係表示對應於串流號碼之封包識別符之輸出處 理之程序。 第3 6圖係表示P G截面移位之處理程序之流程圖。 第37圖係表示文本字幕串流為再生對象時之PG截面移 位之處理程序之流程圖。 第38圖係表示IG截面之截面移位之流程圖。 第39圖係表示STN表SS之彈出期間固定偏移 224 201123841 (Fixed_offset_during_Popup)為開啟時之IG截面之截面移位 之處理程序之流程圖。 第40圖係表示延伸區與檔案2D/檔案庫、檔案相依之對 應關係。 第41(a)〜(c)圖係表示立體視覺交插串流檔案與檔案 2D/檔案庫之關係。 第42圖係表示立體視覺交插串流檔案、檔案2D、檔案 庫之相互關係。 第43圖係表示2D播放串列、3D播放串列。 第44圖係表示於第43圖之3G播放串列再加入一個子路 徑之播放串列。 第45(a)、(b)圖係表示基礎視圖指示器。 第46圖係表示依據播放串列資訊之串流檔案之載入程 序。 第47(a)、(b)圖係表示剪輯資訊檔案之内部構成之圖。 第48圖係表示延伸區起點資訊之語法。 第49(a)、(b)圖係表示剪輯資訊檔案之分錄圖表。 第50圖係表示程式資訊之串流屬性資訊。 第51圖係表示依據分錄圖之分錄點之登錄。 第5 2圖係表示如何從構成立體視覺交插串流檔案之資 料塊復原ATC序列。 第53(a)、(b)圖係表示ATC序列之復原之圖。 第54係表示ATC序列復原程序。 第55(a)、(b)圖係表示解多工部及視訊解碼器之内部構 225 201123841 成。 第56(a)、(b)圖係表示PG串流之圖形解碼器之内部構 成。 第57(a)、(b)圖係表示文本字幕解碼器之内部構成。 第58(a)、(b)圖係表示IG解碼器之解碼器模型。 第59圖係表示用以合成解碼器模型之輸出、以3D-LR 方式輸出之電路構成。 第60圖係表示用以合成解碼器模型之輸出、以1截面+ 偏移模式方式輸出之電路構成。 第61圖係表示經多層化之光碟片之内部構成。 第6 2圖係表示以檔案系統為前提之光碟片之應用程式 格式。 第63(a)、(b)圖係表示記錄媒體之記錄方法。 第6 4圖係表示編輯階段之處理程序之流程圖。 第65圖係表示AV檔案寫入階段之處理程序。 第66圖係表示記錄裝置之内部構成。 第67圖係表示2D/3D再生裝置之構成。 第68圖係表示系統目標解碼器4及截面記憶體組5a之 内部構成。 第69圖係描繪暫存器組10之内部構成及再生控制引擎 7b之圖。 第70圖係表示輸出模式之選擇模型之狀態變遷。 第71圖係表示初始化之處理程序。 第72圖係表示回放條件改變手續(Procedure when 226 201123841 playback condition is changed)之處理程序。 第73(a)〜(d)圖係表示3D再生模式實現用之播放器設 定暫存器之位元指派。 第7 4 (a)〜(e)圖係表示巨集塊之景深與移位控制用之 參數之關係。 第75圖係表示與視訊串流之編碼並行地執行之偏移序 列之定義程序之流程圖。 第76(a)、(b)圖係表示字幕串流之視窗定義區段、控制 資訊之圖。 第77(a)〜(c)圖係表示ds之PCS之描述例之圖。 第78圖係表示於組成物件(comp〇siton_object)内施以 寿J用3d圖开》偏移(3d_graphics_offset)之内插時與未施以内 插時,偏移隨時間如何變化。 第79圖係表示由晝面之每分割區域之偏移所構成的偏 移序列。 第80圖係表示晝面内之物體之景深與偏移之關係。 第81圖係表示再生裝置中之視訊解碼器、基礎視圖視 截面、相依視圖視訊截面記憶體、PG/IG截面。 第82圖係表示圖形截面之内容與偏移之關聯性。 第83(a)〜(d)圖係表示深度視圖方式之一例。 第84圖係表示於3D_深度模式下所生成的立體視覺圖 像。 第85(a)、(b)圖係表示用以實現3D—深度模式之記錄媒 體之構成例。 227 201123841 第86圖係表示藉由目錄名及檔案副檔名,區別於2D與 3D的情況下再生之串流檔案之機制,或以LR形式與深度形 式再生之串流檔案之機制。 第87圖係表示包含基本檔案之尺寸資訊之播放項目資 訊。 第88圖係表示已追加景深資訊之3D元資料。 第89圖係利用積體電路實現2D/3D再生裝置之構成例。 第90圖係表示串流處理部之代表性構成之功能方塊 圖。 第91圖係切換部為DMAC時之切換部653周邊之概念 圖。 第92圖係表示AV輸出部之代表性構成之功能方塊圖。 第93圖係詳細表示AV輸出部或再生裝置之資料輸出 部分之構成例。 第94圖係表示圖像重疊處理中之記憶體與各截面之關 係之圖。 第95圖為圖像重疊部之圖像重疊處理之概念圖。 第96圖為圖像重疊部之圖像重疊處理之概念圖。 第97圖為圖像重疊部之圖像重疊處理之概念圖。 第98圖為圖像重疊部之圖像重疊處理之概念圖。 第99圖係表示積體電路之控制匯流排及資料匯流排之 配置圖。 第100圖係表示積體電路之控制匯流排及資料匯流排 之配置圖。 228 201123841 第101圖係簡單表示再生裝置之動作程序之流程圖。 第102圖係詳細表示再生裝置之動作程序之流程圖。 第103(a)〜(d)圖係表示基礎視圖視訊串流之剪輯資訊 之延伸區起點資訊之一例、及相依視圖串流之剪輯資訊之 延伸區起點資訊之一例。 第104(a)〜(c)圖係用以說明ATC序列1、2之任意資料塊 之來源封包號碼之圖。 【主要元件符號說明】 100…記錄媒體 400...3D眼鏡 200…再生裝置 500...遙控器 300...顯示裝置 229

Claims (1)

  1. 201123841 七、申請專利範圍: 1. 一種記錄媒體,係記錄有主視圖視訊串流、子視圖視訊 串流及圖形串流者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片資料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料、及元資料; 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面係與如下截面合成:主視圖視訊截面,係描繪 構成前述主視圖之圖片資料者;及子視圖視訊截面,係 描繪構成前述子視圖之圖片資料者; 前述元資料係規定偏移控制之控制資訊,而前述偏 移控制係對於前述圖形截面給予水平座標之右方及左 方之偏移,分別與前述主視圖視訊截面及前述子視圖視 訊截面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊。 2. 如申請專利範圍第1項之記錄媒體,其中 前述控制資訊進一步包含: 規定前述圖形戴面之偏移方向之資訊。 3. 如申請專利範圍第2項之記錄媒體,其中 前述主視圖視訊串流之圖片資料及前述子視圖視 訊串流之圖片資料,係分別構成複數個圖片群組; 前述複數個圖片群組之各圖片群組係分別構成複 230 201123841 數個圖Ψ貞(frame),具有與前述複數個圖貞之各圖Ί1貞對應 之控制資訊作為參數序列。 4. 一種再生裝置,係再生記錄有主視圖視訊串流、子視 圖視訊串流及圖形串流之記錄媒體者,其特徵在於: 前述主視圖視訊_流包含構成立體視覺影像之主 視圖之圖片育料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料、及元資料; 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面與如下截面合成:主視圖視訊截面,係描繪構 成前述主視圖之圖片資料者;及子視圖視訊截面,係描 繪構成前述子視圖之圖片資料者; 前述元資料係規定偏移控制之控制資訊,而前述偏 移控制係對於前述圖形截面給予水平座標之右方及左 方之偏移,分別與前述主視圖視訊截面及前述子視圖視 訊截面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊; 前述再生裝置具備: 視訊解碼器,係藉由解碼前述主視圖視訊串流及前 述子視圖視訊串流,以獲得構成主視圖之圖片資料及構 成子視圖之圖片資料者, 圖形解碼器,係藉由解碼前述圖形申流以獲得圖形 資料者; 231 201123841 主視圖視訊截面,係描繪構成前述主視圖之圖片資 料者; 子視圖視訊截面,係描繪構成前述子視圖之圖片資 料者; 圖形截面,係描繪前述圖形資料者;及 合成部,係合成前述主視圖視訊截面及前述子視圖 視訊截面、與前述圖形截面者; 前述合成部係根據前述控制資訊,對於前述圖形截 面給予水平座標之右方及左方之偏移,分別與前述主視 圖視訊截面及前述子視圖視訊截面合成。 5. 如申請專利範圍第4項之再生裝置,其中 前述控制資訊進一步包含規定前述圖形截面之偏 移方向之資訊; 前述合成部係根據前述控制資訊,對於前述圖形截 面給予水平座標之右方及左方之偏移,分別與前述主視 圖視訊截面及前述子視圖視訊截面合成。 6. 如申請專利範圍第5項之再生裝置,其中 前述主視圖視訊串流之圖片資料及前述子視圖視 訊串流之圖片資料係分別構成複數個圖片群組; 前述複數個圖片群組之各圖片群組係分別構成複 數個圖幀,具有與前述複數個圖幀之各圖幀對應之控制 資訊作為參數序列; 前述合成部係根據前述參數序列之各個控制資 訊,對於前述圖形截面給予水平座標之右方及左方之偏 232 201123841 移,分別與前述主視圖視訊截面及前述子視圖視訊截面 合成。 7. —種半導體積體電路,係對於從記錄媒體接收到之資料 進行影像訊號處理,且前述記錄媒體記錄有主視圖視訊 串流、子視圖視訊串流及圖形串流者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片貢料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料、及元資料; 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面,係與描繪構成前述主視圖之圖片資料之主視 圖視訊截面、及描繪構成前述子視圖之圖片資料之子視 圖視訊截面重疊; 前述元資料係規定偏移控制之控制資訊,而前述偏 移控制係對於前述圖形截面給予水平座標之右方及左 方之偏移,分別與前述主視圖視訊截面及前述子視圖視 訊載面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊; 前述主視圖視訊串流係多工作為主視圖傳輸串流 後,分割為複數個主視圖資料群; 前述子視圖視訊串流係多工作為子視圖傳輸串流 後,分割為複數個子視圖資料群; 前·述主視圖資料群與前述子視圖資料群係作為交 233 201123841 替配置之資料而記錄; 前述圖形串流係多工於前述主視圖傳輸串流及前 述子視圖傳輸串流中之任一方或雙方;前述主視圖資料 群與前述子視圖資料群之至少某一者包含前述圖形資 料; 前述半導體積體電路具備: 主控制部,係進行前述半導體積體電路之控制者; 串流處理部,係從前述記錄媒體,接收前述主視圖 資料群與前述子視圖資料群交替配置之資料,暫且儲存 於設置在前述半導體積體電路之内部或外部之記憶體 後,予以解多工而成為前述圖片資料與前述圖形資料 者; 訊號處理部,係分別解碼前述圖片資料與前述圖形 資料者;及 AV輸出部,係輸出已解碼之前述圖片資料者; 前述串流處理部具備切換部,係於將所接收的前述 資料儲存於前述記憶體時,切換儲存去處者; 前述記憶體具有:第1區域、第2區域、第3區域、 第4區域及第5區域; 前述主控制部係控制前述切換部,以使前述主視圖 資料群儲存於前述第1區域,並控制前述切換部,以使 前述子視圖資料群儲存於前述第2區域; 前述已解碼之圖片資料中屬於前述主視圖資料群 之資料,係儲存於前述第3區域;前述第3區域係對應於 234 201123841 主視圖視訊截面; 前述已解碼之圖片資料中屬於前述子視圖資料群 之資料,係儲存於前述第4區域;前述第4區域係對應於 子視圖視訊截面; 前述已解碼之圖形資料係儲存於前述第5區域;前 述第5區域係對應於圖形截面; 前述AV輸出部具備圖像重疊部,係重疊前述已解碼 之圖片資料與前述已解碼之圖形資料者; 前述圖像重疊部係根據前述控制資訊,對於前述圖 形截面給予水平座標之右方及左方之偏移,分別與前述 主視圖視訊截面及前述子視圖視訊截面重疊; 前述AV輸出部係輸出已將前述已解碼之圖形資料 重疊之前述已解碼之圖片資料。 8. —種記錄媒體,係記錄有主視圖視訊串流、子視圖視訊 串流及圖形串流者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片資料; 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料, 前述圖形串流包含:圖形資料;及座標資訊,係表 示將前述圖形資料描繪於圖形截面時之描繪位置者; 前述圖形截面係與如下截面合成:主視圖視訊截 面,係描繪構成前述主視圖之圖片資料者;及子視圖視 訊截面,係描繪構成前述子視圖之圖片資料者; 235 201123841 前述圖形串流進一步包含規定偏移控制之控制資 訊,而前述偏移控制係對於前述圖形資料給予對於藉由 前述座標資訊所示之描繪位置的水平座標之右方及左 方之偏移,而描繪於圖形截面; 前述控制資訊包含以像素數表示前述圖形資料之 偏移值之資訊。 9. 如申請專利範圍第8項之記錄媒體,其中 前述控制資訊進一步包含: 規定前述圖形資料之偏移方向之資訊。 10. 如申請專利範圍第9項之記錄媒體,其中 前述控制資訊為第1控制資訊;前述子視圖視訊串 流進一步包含元資料; 前述元資料係規定偏移控制之第2控制資訊,而前 述偏移控制係對於前述圖形截面,給予水平座標之右方 及左方之偏移,分別與前述主視圖視訊截面與前述子視 圖視訊截面合成; 前述第2控制資訊包含:以像素數表示前述圖形截 面之偏移值之資訊、及規定偏移方向之資訊; 前述圖形截面係根據前述第2控制資訊進行偏移控 制。 11. 如申請專利範圍第10項之記錄媒體,其中 前述圖形資料為字幕資料。 12. —種再生裝置,係再生記錄有主視圖視訊串流、子視圖 236 201123841 視訊串流及圖形串流之記錄媒體者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片貢料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片貢料, 前述圖形串流包含:圖形資料;及座標資訊,係表 示將前述圖形資料描繪於圖形截面時之描繪位置者; 前述圖形截面係與如下截面合成:主視圖視訊截 面,係描繪構成前述主視圖之圖片資料者;及子視圖視 訊截面,係描繪構成前述子視圖之圖片資料者; 前述圖形串流進一步包含規定偏移控制之控制資 訊,而前述偏移控制係對於前述圖形資料給予對於藉由 前述座標資訊所示之描繪位置的水平座標之右方及左 方之偏移,而描繪於圖形截面; 前述控制資訊包含以像素數表示前述圖形資料之 偏移值之資訊; 前述再生裝置具備: 視訊解碼器,係藉由解碼前述主視圖視訊串流及前 述子視圖視訊串流,以獲得構成主視圖之圖片資料及構 成子視圖之圖片資料者; 圖形解碼器,係藉由解碼前述圖形串流以獲得圖形 資料者; 主視圖視訊截面,係描繪構成前述主視圖之圖片資 料者; 237 201123841 子視圖視訊戴面 料者; 係描螬·構成前述子視圖之圖& 貝 w 保描繪前述圖形 視:部:=:=視—圖 座 則述圖形資料係根據前述控制資顺給予 标之右方及左方之偏移,而描繪於前述圖形截面。 13.如申請專利範圍第12項之再生裝置,其中 前述控制資訊進一步包含: 規定前述圖形資料之偏移方向之資訊; 前述圖形資料係根據前述控制資訊被給予水平座 祆之右方及左方之偏移,而描繪於前 Η.如”專·_13奴再生裝置,其巾 刖述控制資訊為第i控制資訊;前述子視圖視訊串 流進一步包含元資料; 前述元資料係規定偏移控制之第2控制資訊,而前 述偏移控制係胁前„職面,㈡水钱標之右方 及左方之偏移’分難前述主視圖視訊截面與前述子視 圖視訊裁面合成; 刚述第2控制資訊包含:以像素數表示前述圖形截 面之偏移值之資訊、及規定偏移方向之資訊; 前述合成部係根據前述第2控制資訊,對於前述圖 形截面料水平座標之右方及左方之偏移,分別與前述 主視圖視訊截面及前述子視圖視訊截面合成。 238 201123841 15. 如申請專利範圍第14項之再生裝置,其中 前述圖形資料為字幕資料。 16. —種半導體積體電路,係對於從記錄有主視圖視訊串 流、子視圖視訊串流及圖形串流之記錄媒體接收到之資 料,進行影像訊號處理者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片資料; 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料; 前述圖形串流包含··圖形資料;及座標資訊,係表 示將前述圖形資料描繪於圖形截面時之描繪位置者; 前述圖形截面係與描繪構成前述主視圖之圖片資 料之主視圖視訊截面、及描繪構成前述子視圖之圖片資 料之子視圖視訊載面重疊; 前述圖形串流進一步包含規定偏移控制之控制資 訊,而前述偏移控制係對於前述圖形資料給予對於藉由 前述座標資訊所示之描繪位置的水平座標之右方及左 方之偏移,而描繪於圖形截面; 前述控制資訊包含以像素數表示前述圖形資料之 偏移值之資訊; 前述主視圖視訊串流係多工作為主視圖傳輪串流 後’分割為複數個主視圖資料群; 前述子視圖視訊串流係多工作為子視圖傳輸串流 後,分割為複數個子視圖資料群; 239 201123841 前述主視圖資料群與前述子視圖資料群係作為交 替配置之資料而記錄; 前述圖形串流係多工作為圖形傳輸串流; 前述半導體積體電路具備: 主控制部,係進行前述半導體積體電路之控制者; 串流處理部,係從前述記錄媒體,接收前述主視圖 資料群與前述子視圖資料群交替配置之資料、及前述圖 形傳輸串流,暫且儲存於設置在前述半導體積體電路之 内部或外部之記憶體後,予以解多工而成為前述圖片資 料與前述圖形資料者; 訊號處理部,係分別解碼前述圖片資料與前述圖形 資料者;及 AV輸出部,係輸出已解碼之前述圖片資料者; 前述串流處理部具備切換部,係於將所接收的前述 主視圖資料群與前述子視圖資料群交替配置之資料儲 存於前述記憶體時,切換儲存去處者; 前述記憶體具有:第1區域、第2區域、第3區域、 第4區域及第5區域; 前述主控制部係控制前述切換部,以使前述主視圖 資料群儲存於前述第1區域,並控制前述切換部,以使 前述子視圖資料群儲存於前述第2區域; 前述已解碼之圖片資料中屬於前述主視圖資料群 之資料,係儲存於前述第3區域;前述第3區域係對應於 主視圖視訊截面; 240 201123841 前述已解碼之圖片資料中屬於前述子視圖資料群 之資料,係儲存於前述第4區域;前述第4區域係對應於 子視圖視訊截面; 前述已解碼之圖形資料係儲存於前述第5區域;前 述第5區域係對應於圖形截面; 前述AV輸出部具備圖像重疊部,係重疊前述已解碼 之圖片資料與前述已解碼之圖形資料者; 前述圖像重疊部係將根據前述控制資訊給予前述 圖形資料水平座標之右方及左方之偏移而描繪之前述 圖形截面,與前述主視圖視訊截面及前述子視圖視訊截 面重疊; 前述AV輸出部係輸出已將前述已解碼之圖形資料 重疊之前述已解碼之圖片資料。 17. —種記錄媒體,係記錄有主視圖視訊串流、子視圖視 訊串流、圖形串流及管理資訊者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片貢料, 前述子視圖視訊争流包含構成立體視覺影像之子 視圖之圖片貢料, 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面係與如下截面合成:主視圖視訊截面,係描繪 構成前述主視圖之圖片資料者;及子視圖視訊截面,係 描繪構成前述子視圖之圖片資料者; 前述管理資訊包含規定偏移控制之控制資訊,而前 241 201123841 述偏移控制係對於前述圖形截面給予水平座標之右方 及左方之偏移,分別與前述主視圖視訊截面及前述子視 圖視訊截面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊。 18. 如申請專利範圍第17項之記錄媒體,其中 前述控制資訊進一步包含: 規定前述圖形截面之偏移方向之資訊。 19. 如申請專利範圍第18項之記錄媒體,其中 立體視覺再生模式包括:主-子再生模式,係利用 主視圖及子視圖進行立體視覺影像再生者;及主-主再 生模式,係僅利用主視圖進行平面視覺影像再生者; 前述控制資訊係規定在前述圖形為彈出式選單、立 體視覺再生模式為主-主再生模式的情況下之前述圖形 截面之偏移控制。 20. 如申請專利範圍第19項之記錄媒體,其中 前述管理資訊係規定主視圖視訊串流及子視圖視 訊串流之再生區間的播放_列資訊之串流選擇表; 前述串流選擇表係表示可再生之基本串流之串流 號碼;前述控制資訊係於串流選擇表中,被與串流號碼 建立對應。 21. —種再生裝置,係再生記錄有主視圖視訊串流、子視圖 視訊串流、圖形串流及管理資訊之記錄媒體者,其特徵 在於: 242 201123841 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片貢料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片貪料, 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面係與如下截面合成:主視圖視訊截面,係描繪 構成前述主視圖之圖片資料者;及子視圖視訊截面,係 描繪構成前述子視圖之圖片資料者; 前述管理資訊包含規定偏移控制之控制資訊,而前 述偏移控制係對於前述圖形截面給予水平座標之右方 及左方之偏移,分別與前述主視圖視訊截面及前述子視 圖視訊截面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊; 前述再生裝置具備: 視訊解碼器,係藉由解碼前述主視圖視訊串流及前 述子視圖視訊串流,以獲得構成主視圖之圖片資料及構 成子視圖之圖片資料者; 圖形解碼器,係藉由解碼前述圖形串流以獲得圖形 資料者; 主視圖視訊截面,係描繪構成前述主視圖之圖片資 料者; 子視圖視訊截面,係描繪構成前述子視圖之圖片資 料者; 243 201123841 圖形截面,係描繪前述圖形資料者;及 合成部,係合成前述主視圖視訊截面及前述子視圖 視訊截面、與前述圖形截面者; 前述合成部係根據前述控制資訊,對於前述圖形截 面給予水平座標之右方及左方之偏移,分別與前述主視 圖視訊截面及前述子視圖視訊截面合成。 22. 如申請專利範圍第21項之再生裝置,其中 前述控制資訊進一步包含: 規定前述圖形資料之偏移方向之資訊; 前述合成部係根據前述控制資訊,對於前述圖形截 面給予水平座標之右方及左方之偏移,分別與前述主視 圖視訊截面及前述子視圖視訊截面合成。 23. 如申請專利範圍第22項之再生裝置,其中 立體視覺再生模式包括:主-子再生模式,係利用 主視圖及子視圖進行立體視覺影像再生者;及主-主再 生模式,係僅利用主視圖進行平面視覺影像再生者; 前述控制資訊係規定在前述圖形為彈出式選單、立 體視覺再生模式為主-主再生模式的情況下之前述圖形 截面之偏移控制; 前述合成部係於前述圖形為彈出式選單、立體視覺 再生模式為主-主再生模式的情況下,根據前述控制資 訊,對於前述圖形截面給予水平座標之右方及左方之偏 移,分別與前述主視圖視訊截面及前述子視圖視訊截面 合成。 244 201123841 24. 如申請專利範圍第23項之再生裝置,其中 前述管理資訊係規定主視圖視訊_流及子視圖視 訊串流之再生區間的播放串列資訊之串流選擇表; 前述串流選擇表係表示可再生之基本串流之串流 號碼;前述控制資訊係於串流選擇表中,被與串流號碼 建立對應; 前述再生裝置具備串流號碼暫存器; 串流號碼儲存於串流號碼暫存器時,前述合成部係 根據與儲存在前述串流號碼暫存器之串流號碼對應之 控制資訊,對於前述圖形截面給予水平座標之右方及左 方之偏移,分別與前述主視圖視訊截面及前述子視圖視 訊截面合成。 25. —種半導體積體電路,係對於從記錄有主視圖視訊串 流、子視圖視訊串流、圖形申流及管理資訊之記錄媒體 接收到之資料,進行影像訊號處理者,其特徵在於: 前述主視圖視訊串流包含構成立體視覺影像之主 視圖之圖片育料, 前述子視圖視訊串流包含構成立體視覺影像之子 視圖之圖片資料, 前述圖形串流包含圖形資料;描繪前述圖形資料之 圖形截面,係與描繪構成前述主視圖之圖片資料之主視 圖視訊截面、及描繪構成前述子視圖之圖片資料之子視 圖視訊截面重疊; 前述管理資訊包含規定偏移控制之控制資訊,而前 245 201123841 述偏移控制係對於前述圖形截面給予水平座標之右方 及左方之偏移,分別與前述主視圖視訊截面及前述子視 圖視訊截面合成; 前述控制資訊包含以像素數表示前述圖形截面之 偏移值之資訊; 前述主視圖視訊串流係多工作為主視圖傳輸串流 後,分割為複數個主視圖資料群; 前述子視圖視訊串流係多工作為子視圖傳輸串流 後,分割為複數個子視圖資料群; 前述主視圖資料群與前述子視圖資料群係作為交 替配置之資料而記錄; 前述圖形串流係多工作為圖形傳輸串流; 前述半導體積體電路具備: 主控制部,係進行前述半導體積體電路之控制者; 串流處理部,係從前述記錄媒體,接收前述主視圖 資料群與前述子視圖資料群交替配置之資料、及前述圖 形傳輸串流,暫且儲存於設置在前述半導體積體電路之 内部或外部之記憶體後,予以解多工而成為前述圖片資 料與前述圖形資料者, 訊號處理部,係分別解碼前述圖片資料與前述圖形 資料者;及 AV輸出部,係輸出已解碼之前述圖片資料者; 前述串流處理部具備切換部,係將所接收的前述主 視圖資料群與前述子視圖資料群交替配置之資料儲存 246 201123841 於於前述記憶體時,切換儲存去處者; 前述記憶體具有:第1區域、第2區域、第3區域、 第4區域及第5區域; 前述主控制部係控制前述切換部,以使前述主視圖 資料群儲存於前述第1區域,並控制前述切換部,以使 前述子視圖資料群儲存於前述第2區域; 前述已解碼之圖片資料中屬於前述主視圖資料群 之資料,係儲存於前述第3區域;前述第3區域係對應於 主視圖視訊截面; 前述已解碼之圖片資料中屬於前述子視圖資料群 之資料,係儲存於前述第4區域;前述第4區域係對應於 子視圖視訊截面; 前述已解碼之圖形資料係儲存於前述第5區域;前 述第5區域係對應於圖形截面; 前述AV輸出部具備圖像重疊部,係重疊前述已解碼 之圖片資料與前述已解碼之圖形資料者; 前述圖像重疊部係根據前述控制資訊,對於前述圖 形截面給予水平座標之右方及左方之偏移,分別與前述 主視圖視訊截面及前述子視圖視訊截面重疊; 前述AV輸出部係輸出已將前述已解碼之圖形資料 重疊之前述已解碼之圖片資料。 247
TW99105012A 2009-02-19 2010-02-22 Recording medium, playback device, integrated circuit TW201123841A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009037225 2009-02-19
JP2009066885 2009-03-18

Publications (1)

Publication Number Publication Date
TW201123841A true TW201123841A (en) 2011-07-01

Family

ID=42633700

Family Applications (1)

Application Number Title Priority Date Filing Date
TW99105012A TW201123841A (en) 2009-02-19 2010-02-22 Recording medium, playback device, integrated circuit

Country Status (14)

Country Link
US (3) US8712215B2 (zh)
EP (6) EP2521363B1 (zh)
JP (8) JP4588120B2 (zh)
KR (1) KR20110126518A (zh)
CN (6) CN102017641B (zh)
AU (1) AU2010216963A1 (zh)
BR (1) BRPI1001265A2 (zh)
DK (1) DK2521364T3 (zh)
ES (3) ES2491067T3 (zh)
MX (1) MX2010011683A (zh)
RU (1) RU2522304C2 (zh)
TW (1) TW201123841A (zh)
WO (1) WO2010095411A1 (zh)
ZA (3) ZA201007461B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9936196B2 (en) 2012-10-30 2018-04-03 Qualcomm Incorporated Target output layers in video coding
TWI790600B (zh) * 2021-04-21 2023-01-21 宏芯科技股份有限公司 區域式視訊影像插補裝置及其方法

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2496157C2 (ru) * 2008-09-30 2013-10-20 Панасоник Корпорэйшн Носитель записи, на котором записано 3d видео, устройство воспроизведения для воспроизведения 3d видео и большая интегральная схема системы
JP4984195B2 (ja) * 2009-04-07 2012-07-25 ソニー株式会社 再生装置、再生方法、および記録方法
JP4984183B2 (ja) 2009-04-07 2012-07-25 ソニー株式会社 再生装置、再生方法、および記録方法
JP2010244630A (ja) * 2009-04-07 2010-10-28 Sony Corp 情報処理装置、情報処理方法、プログラム、及び、データ構造
JP5267886B2 (ja) * 2009-04-08 2013-08-21 ソニー株式会社 再生装置、記録媒体、および情報処理方法
JP4985807B2 (ja) * 2009-04-15 2012-07-25 ソニー株式会社 再生装置および再生方法
JP2010268431A (ja) * 2009-04-15 2010-11-25 Sony Corp データ構造、記録媒体、再生装置および再生方法、並びにプログラム
JP4985892B2 (ja) * 2009-04-15 2012-07-25 ソニー株式会社 再生装置および再生方法、並びに記録方法
RU2538307C2 (ru) * 2009-05-12 2015-01-10 Сони Корпорейшн Структура данных и носитель данных, воспроизводящее устройство, способ воспроизведения, программа и носитель для хранения программы
JP2011041249A (ja) 2009-05-12 2011-02-24 Sony Corp データ構造および記録媒体、並びに、再生装置、再生方法、プログラム、およびプログラム格納媒体
US8208790B2 (en) * 2009-05-19 2012-06-26 Panasonic Corporation Recording medium, reproducing device, encoding device, integrated circuit, and reproduction output device
JP2011107589A (ja) * 2009-11-20 2011-06-02 Sony Corp 立体表示装置
CN102812711B (zh) * 2010-02-25 2016-11-02 汤姆森特许公司 利用视差估计和视差时间变化限制的立体字幕加载
US8817072B2 (en) * 2010-03-12 2014-08-26 Sony Corporation Disparity data transport and signaling
JP5604173B2 (ja) * 2010-04-30 2014-10-08 三洋電機株式会社 再生装置、表示装置、記録装置及び格納媒体
KR20120017228A (ko) * 2010-08-18 2012-02-28 엘지전자 주식회사 이동 단말기 및 상기 이동 단말기의 영상 표시 방법
KR102126910B1 (ko) * 2010-09-13 2020-06-25 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 부가기능의 관리
JP5594045B2 (ja) 2010-10-14 2014-09-24 ソニー株式会社 再生装置、再生方法、プログラム、および記録媒体
JP2012099986A (ja) * 2010-10-29 2012-05-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2012100102A (ja) * 2010-11-02 2012-05-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20120120050A1 (en) * 2010-11-12 2012-05-17 Nokia Corporation Dual-mode two-dimensional/three-dimensional display
US8705946B2 (en) 2010-11-19 2014-04-22 Sony Corporation 3D authoring tool ensuring no buffer underrun upon jumps
KR101831775B1 (ko) * 2010-12-07 2018-02-26 삼성전자주식회사 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
CN103348694A (zh) 2010-12-07 2013-10-09 三星电子株式会社 发送用于构成内容的数据的发射机、接收和处理该数据的接收机及其方法
JP2012151663A (ja) * 2011-01-19 2012-08-09 Toshiba Corp 立体音響生成装置及び立体音響生成方法
JP5685969B2 (ja) * 2011-02-15 2015-03-18 ソニー株式会社 表示制御方法、表示制御装置
US20120236114A1 (en) * 2011-03-18 2012-09-20 Te-Hao Chang Depth information generator for generating depth information output by only processing part of received images having different views, and related depth information generating method and depth adjusting apparatus thereof
CN103503449B (zh) 2011-04-28 2016-06-15 松下知识产权经营株式会社 影像处理装置及影像处理方法
US20120293636A1 (en) * 2011-05-19 2012-11-22 Comcast Cable Communications, Llc Automatic 3-Dimensional Z-Axis Settings
WO2012160812A1 (ja) * 2011-05-25 2012-11-29 パナソニック株式会社 映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路
CN103181172B (zh) * 2011-08-24 2015-11-25 松下电器产业株式会社 记录介质、再现装置、记录装置及记录方法
KR20130024504A (ko) * 2011-08-31 2013-03-08 삼성전기주식회사 삼차원 카메라 시스템 및 주시각 조정 방법
KR101287786B1 (ko) * 2011-09-22 2013-07-18 엘지전자 주식회사 3차원 입체영상 표시 방법 및 그를 이용한 영상 표시 장치
CN102427542B (zh) * 2011-09-28 2014-07-30 深圳超多维光电子有限公司 一种立体图像处理方法、图像处理装置和相应的终端设备
CN103931200A (zh) * 2011-11-14 2014-07-16 摩托罗拉移动有限责任公司 Mvc立体视图与用于3dtv的左或右眼显示器的关联
US8762452B2 (en) 2011-12-19 2014-06-24 Ericsson Television Inc. Virtualization in adaptive stream creation and delivery
AU2013210580A1 (en) * 2012-01-18 2013-11-28 Panasonic Corporation Transmission device, video display device, transmission method, video processing method, video processing program, and integrated circuit
KR101699367B1 (ko) * 2012-05-16 2017-02-14 한국전자통신연구원 3dtv 다중화 방법 및 그 장치
KR102051798B1 (ko) * 2013-07-30 2019-12-04 돌비 레버러토리즈 라이쎈싱 코오포레이션 장면 안정 메타데이터를 발생하기 위한 시스템 및 방법들
WO2015016913A1 (en) * 2013-07-31 2015-02-05 Empire Technology Development Llc Encoding scheme
US9648348B2 (en) * 2013-10-23 2017-05-09 Qualcomm Incorporated Multi-layer video file format designs
US9503705B2 (en) * 2013-12-12 2016-11-22 Lenovo (Singapore) Pte. Ltd. Stereoscopic image generation
US10298546B2 (en) * 2014-03-07 2019-05-21 Toshiba Memory Corporation Asymmetrical encryption of storage system to protect copyright and personal information
US10750198B2 (en) 2014-05-22 2020-08-18 Qualcomm Incorporated Maximum palette parameters in palette-based video coding
US9674099B2 (en) * 2014-09-25 2017-06-06 Microsoft Technology Licensing, Llc Network classification for applications
SG11201706531UA (en) * 2015-02-16 2017-09-28 Hfi Innovation Inc Method and apparatus for palette predictor initialization for palette coding in video and image compression
CN106296781B (zh) * 2015-05-27 2020-09-22 深圳超多维科技有限公司 特效图像生成方法及电子设备
EP3099081B1 (en) * 2015-05-28 2020-04-29 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US9520002B1 (en) * 2015-06-24 2016-12-13 Microsoft Technology Licensing, Llc Virtual place-located anchor
DE112016002868T5 (de) * 2015-06-25 2018-03-08 Mitsubishi Electric Corporation Videowiedergabevorrichtung und Videowiedergabeverfahren
US11095869B2 (en) 2015-09-22 2021-08-17 Fyusion, Inc. System and method for generating combined embedded multi-view interactive digital media representations
US11006095B2 (en) 2015-07-15 2021-05-11 Fyusion, Inc. Drone based capture of a multi-view interactive digital media
US10147211B2 (en) 2015-07-15 2018-12-04 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US10242474B2 (en) 2015-07-15 2019-03-26 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US10222932B2 (en) 2015-07-15 2019-03-05 Fyusion, Inc. Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations
US11783864B2 (en) * 2015-09-22 2023-10-10 Fyusion, Inc. Integration of audio into a multi-view interactive digital media representation
US9507241B1 (en) 2015-11-17 2016-11-29 Lenovo (Singapore) Pte, Ltd. Adjustable camera field of view
CN105635620A (zh) * 2016-01-18 2016-06-01 北京优祥智恒科技有限公司 一种支持音频透传sdi输出的装置和方法
US10511882B2 (en) * 2016-01-26 2019-12-17 Sony Corporation Reception apparatus, reception method, and transmission apparatus
US11202017B2 (en) 2016-10-06 2021-12-14 Fyusion, Inc. Live style transfer on a mobile device
GB2558236B (en) * 2016-12-22 2021-03-31 Apical Ltd Image data comprising encoded image data and additional data for modification of image
CN106791795A (zh) * 2017-01-03 2017-05-31 京东方科技集团股份有限公司 3d视频流的发送方法及发送装置、接收方法及接收装置
US10437879B2 (en) 2017-01-18 2019-10-08 Fyusion, Inc. Visual search using multi-view interactive digital media representations
US10313651B2 (en) 2017-05-22 2019-06-04 Fyusion, Inc. Snapshots at predefined intervals or angles
US11069147B2 (en) 2017-06-26 2021-07-20 Fyusion, Inc. Modification of multi-view interactive digital media representation
CN107231516A (zh) * 2017-07-27 2017-10-03 重庆万建电子工程有限责任公司重庆第分公司 带刮灰结构的半球型摄像机
US10592747B2 (en) 2018-04-26 2020-03-17 Fyusion, Inc. Method and apparatus for 3-D auto tagging
FR3086831A1 (fr) * 2018-10-01 2020-04-03 Orange Codage et decodage d'une video omnidirectionnelle
KR102201763B1 (ko) * 2018-10-02 2021-01-12 엘지전자 주식회사 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치
US11347788B2 (en) * 2019-01-16 2022-05-31 Toyota Research Institute, Inc. Systems and methods for generating a requested image view
CN110231905B (zh) * 2019-05-07 2021-02-09 华为技术有限公司 一种截屏方法及电子设备
CN111626049B (zh) * 2020-05-27 2022-12-16 深圳市雅阅科技有限公司 多媒体信息的标题修正方法、装置、电子设备及存储介质

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR930010608A (ko) * 1991-11-04 1993-06-22 이승 카 메 라
US6052100A (en) 1994-03-16 2000-04-18 The United States Of America Represented By The Secertary Of The Navy Computer controlled three-dimensional volumetric display
TW436777B (en) 1995-09-29 2001-05-28 Matsushita Electric Ind Co Ltd A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
US6502199B2 (en) 1995-09-29 2002-12-31 Matsushita Electric Industrial Co., Ltd. Method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
EP0888018B1 (en) * 1996-02-28 2006-06-07 Matsushita Electric Industrial Co., Ltd. Optical disk having plural streams of digital video data recorded thereon in interleaved manner, and apparatuses and methods for recording on, and reproducing from, the optical disk
WO1998025413A1 (en) 1996-12-04 1998-06-11 Matsushita Electric Industrial Co., Ltd. Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device
JPH10234058A (ja) * 1997-02-18 1998-09-02 Ikegami Tsushinki Co Ltd 立体映像への文字付加装置及びその装置を備えたカラオケ装置
US6925250B1 (en) 1997-08-29 2005-08-02 Matsushita Electric Industrial Co., Ltd. Optical disc for recording high resolution and normal image, optical disc player, optical disc recorder, and playback control information generator
JPH11289555A (ja) 1998-04-02 1999-10-19 Toshiba Corp 立体映像表示装置
US6956964B2 (en) * 2001-11-08 2005-10-18 Silicon Intergrated Systems Corp. Apparatus for producing real-time anaglyphs
US20050248561A1 (en) * 2002-04-25 2005-11-10 Norio Ito Multimedia information generation method and multimedia information reproduction device
JP2004104742A (ja) * 2002-09-11 2004-04-02 Remedia:Kk 立体映像データの発生方法と装置
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
EP1635297B1 (en) 2003-05-30 2012-06-13 Lattice Technology, Inc. 3-dimensional graphics data display device
JP4988340B2 (ja) * 2003-07-07 2012-08-01 サムスン エレクトロニクス カンパニー リミテッド マルチアングルデータを記録した情報記録媒体、その記録方法及び再生装置
JP3746506B2 (ja) * 2004-03-08 2006-02-15 一成 江良 立体視化パラメータ埋込装置及び立体視画像再生装置
US7519278B2 (en) 2004-06-18 2009-04-14 Panasonic Corporation Playback apparatus, program, playback method
US7609947B2 (en) * 2004-09-10 2009-10-27 Panasonic Corporation Method and apparatus for coordinating playback from multiple video sources
KR100657322B1 (ko) 2005-07-02 2006-12-14 삼성전자주식회사 로컬 3차원 비디오를 구현하기 위한 인코딩/디코딩 방법 및장치
JP4476905B2 (ja) * 2005-08-31 2010-06-09 株式会社東芝 立体表示画像データの構造、立体表示画像データの記録方法、表示再生方法、記録プログラム、および表示再生プログラム
MX2008012382A (es) * 2006-03-29 2008-11-18 Thomson Licensing Metodos y aparatos para usarse en un sistema de codificacion de video de multiples vistas.
CN101523924B (zh) * 2006-09-28 2011-07-06 皇家飞利浦电子股份有限公司 3d菜单显示
EP2105032A2 (en) * 2006-10-11 2009-09-30 Koninklijke Philips Electronics N.V. Creating three dimensional graphics data
JP4930320B2 (ja) * 2006-11-30 2012-05-16 ソニー株式会社 再生方法及び装置、プログラム並びに記録媒体
JP5100746B2 (ja) * 2007-03-22 2012-12-19 三菱電機株式会社 映像再生装置および映像再生方法
JP2008244835A (ja) 2007-03-27 2008-10-09 Toshiba Corp 立体表示装置および立体画像表示方法
JP2009135686A (ja) 2007-11-29 2009-06-18 Mitsubishi Electric Corp 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
CN102150433B (zh) 2008-09-18 2014-04-09 松下电器产业株式会社 立体视觉影像再现装置及立体视觉影像显示装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9936196B2 (en) 2012-10-30 2018-04-03 Qualcomm Incorporated Target output layers in video coding
TWI790600B (zh) * 2021-04-21 2023-01-21 宏芯科技股份有限公司 區域式視訊影像插補裝置及其方法

Also Published As

Publication number Publication date
EP2521367A1 (en) 2012-11-07
JP2010288290A (ja) 2010-12-24
EP2400773A1 (en) 2011-12-28
EP2521365A1 (en) 2012-11-07
CN102017641B (zh) 2012-08-22
JPWO2010095411A1 (ja) 2012-08-23
WO2010095411A1 (ja) 2010-08-26
EP2521367B1 (en) 2014-05-14
DK2521364T3 (da) 2014-10-20
BRPI1001265A2 (pt) 2016-02-16
CN102833572B (zh) 2013-09-25
JP4588120B2 (ja) 2010-11-24
EP2521366A1 (en) 2012-11-07
CN102790902A (zh) 2012-11-21
ES2467149T3 (es) 2014-06-12
RU2522304C2 (ru) 2014-07-10
CN102833572A (zh) 2012-12-19
JP2010288289A (ja) 2010-12-24
EP2521365B1 (en) 2014-05-14
JP5038543B2 (ja) 2012-10-03
EP2521363B1 (en) 2014-05-14
RU2010144544A (ru) 2013-03-27
EP2400773A4 (en) 2012-11-07
US20110033170A1 (en) 2011-02-10
EP2521364B1 (en) 2014-07-23
CN102685515A (zh) 2012-09-19
CN102017641A (zh) 2011-04-13
JP2012178847A (ja) 2012-09-13
JP4629805B2 (ja) 2011-02-09
CN102685514A (zh) 2012-09-19
JP5027952B2 (ja) 2012-09-19
JP5027953B2 (ja) 2012-09-19
CN102833573B (zh) 2013-09-25
JP2012157069A (ja) 2012-08-16
EP2400773B1 (en) 2013-11-20
ZA201007461B (en) 2012-01-25
US20120293614A1 (en) 2012-11-22
JP2011097595A (ja) 2011-05-12
ZA201106914B (en) 2012-05-30
ZA201106913B (en) 2012-05-30
US8712215B2 (en) 2014-04-29
ES2491067T3 (es) 2014-09-05
CN102790902B (zh) 2014-04-30
US8705935B2 (en) 2014-04-22
CN102685514B (zh) 2014-02-19
EP2521366B1 (en) 2014-09-17
EP2521363A1 (en) 2012-11-07
MX2010011683A (es) 2010-11-30
JP2012178848A (ja) 2012-09-13
JP5416073B2 (ja) 2014-02-12
JP2010246157A (ja) 2010-10-28
EP2521364A1 (en) 2012-11-07
US20120287127A1 (en) 2012-11-15
CN102833573A (zh) 2012-12-19
ES2439316T3 (es) 2014-01-22
CN102685515B (zh) 2013-11-20
AU2010216963A1 (en) 2010-08-26
JP4634534B2 (ja) 2011-02-16
KR20110126518A (ko) 2011-11-23
JP4654320B2 (ja) 2011-03-16

Similar Documents

Publication Publication Date Title
TW201123841A (en) Recording medium, playback device, integrated circuit
JP4588118B1 (ja) 記録媒体、再生装置
JP5451667B2 (ja) 3d映像を再生するための半導体集積回路
JP4564107B2 (ja) 記録媒体、再生装置、システムlsi、再生方法、記録方法、記録媒体再生システム
WO2010095410A1 (ja) 記録媒体、再生装置、集積回路
WO2010038409A1 (ja) 再生装置、記録媒体、及び集積回路
WO2010095381A1 (ja) 記録媒体、再生装置、集積回路
TW201112233A (en) Playback device, integrated circuit, recording medium
JPWO2010032403A1 (ja) 映像コンテンツを立体視再生する再生装置、再生方法、および再生プログラム