TWI444042B - A recording apparatus, recording method, reproducing apparatus, reproducing method, recording medium and program - Google Patents

A recording apparatus, recording method, reproducing apparatus, reproducing method, recording medium and program Download PDF

Info

Publication number
TWI444042B
TWI444042B TW99108725A TW99108725A TWI444042B TW I444042 B TWI444042 B TW I444042B TW 99108725 A TW99108725 A TW 99108725A TW 99108725 A TW99108725 A TW 99108725A TW I444042 B TWI444042 B TW I444042B
Authority
TW
Taiwan
Prior art keywords
data
stream
view video
header
video
Prior art date
Application number
TW99108725A
Other languages
English (en)
Other versions
TW201041390A (en
Inventor
Shinobu Hattori
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201041390A publication Critical patent/TW201041390A/zh
Application granted granted Critical
Publication of TWI444042B publication Critical patent/TWI444042B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

記錄裝置、記錄方法、再生裝置、再生方法、記錄媒體及程式
本發明係關於一種記錄裝置、記錄方法、再生裝置、再生方法、記錄媒體及程式,本發明特別是關於一種使記錄有以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之基本圖像串流與擴展圖像串流的BD(Blu-ray Disc,藍光光碟)等記錄媒體,於不支持複數個視點之影像資料之再生之裝置中亦可再生的記錄裝置、記錄方法、再生裝置、再生方法、記錄媒體及程式。
作為電影等之內容,二維圖像之內容係主流,但最近,可立體視之立體視圖像之內容備受關注。
立體視圖像之顯示需要專用之設備,作為此種立體視用設備,例如有NHK(Nippon Hoso Kyokai,日本廣播公司)所開發之IP(Integral Photography,立體照相)立體圖像系統。
立體視圖像之圖像資料包含複數個視點之圖像資料(自複數個視點所拍攝之圖像之圖像資料),可實現視點數較多、且視點範圍越廣便能自越多方向觀察被攝體之、所謂的「立體電視」。
立體視圖像中視點數最少之立體視圖像係視點數為2個視點之立體圖像(所謂3D(3 Dimension,3維)圖像)。立體圖像之圖像資料包含以左眼觀察之圖像即左側圖像之資料、及以右眼觀察之圖像即右側圖像之資料。
另一方面,電影等之高解像度圖像之內容之資料量較多,因此為記錄如此大資料量之內容而必須有大容量之記錄媒體。
作為此種大容量之記錄媒體,有BD(Blu-Ray(註冊商標))-ROM(Read Only Memory,唯讀記憶體)等Blu-Ray(註冊商標)Disc(以下亦稱為BD(Blu-Ray Disc,藍光光碟))。
[先前技術文獻] [專利文獻]
[專利文獻1]日本專利特開2005-348314號公報
但是,BD之標準中並未規定以何種方式將包含立體圖像之立體視圖像之圖像資料記錄於BD中,且未規定以何種方式再生。
立體圖像之圖像資料包含左圖像之資料之串流與右圖像之資料之串流的2條資料串流。假設僅將2條資料串流直接記錄於BD中,則存在於已普及之BD播放器中無法再生之虞。
本發明係鑒於此種狀況研究而成者,其使記錄有以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之基本圖像串流與擴展圖像串流的BD等記錄媒體,於不支持複數個視點之影像資料之再生的裝置中亦可再生。
本發明之一方面之記錄裝置包括編碼機構,該編碼機構以特定之編碼方式對複數個視點之影像資料進行編碼,並輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、以及包含附加含有表示係擴展視點之資料之上述識別資訊之上述資料標頭之資料的擴展圖像串流。
於上述編碼機構中,可自以特定之編碼方式對複數個視點之影像資料進行編碼而獲得的包含附加有上述資料標頭之資料之上述基本圖像串流中去除上述資料標頭,而輸出包含未附加上述資料標頭之資料的上述基本圖像串流。
於上述編碼機構中,可於上述資料標頭中設定1以上之值來作為表示係擴展視點之資料之上述識別資訊,並輸出上述擴展圖像串流。
本發明之一方面之記錄方法包括如下步驟:以特定之編碼方式對複數個視點之影像資料進行編碼,輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、以及包含附加含有表示係擴展視點之資料之上述識別資訊的上述資料標頭之資料之擴展圖像串流。
本發明之一方面之程式係使電腦執行包含如下步驟之處理:以特定之編碼方式對複數個視點之影像資料進行編碼,輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、以及包含附加含有表示係擴展視點之資料之上述識別資訊的上述資料標頭之資料之擴展圖像串流。
本發明之一方面之記錄媒體記錄有:以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之基本圖像串流及擴展圖像串流,該基本圖像串流係包含未附加含有視點之識別資訊之資料標頭之資料,該擴展圖像串流係包含附加含有表示係擴展視點之資料之上述識別資訊的上述資料標頭之資料之擴展圖像串流。
本發明之另一方面之再生裝置包括:讀出機構,其自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料之擴展圖像串流;以及解碼機構,其係自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理者,其將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值來作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
本發明之另一方面之再生方法包括如下步驟:自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料之擴展圖像串流,且於自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理之情形時,將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值來作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
本發明之另一方面之程式係使電腦執行包含如下步驟之處理:自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料之擴展圖像串流,且於自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理之情形時,將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值來作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本串流之資料進行解碼。
於本發明之一方面中,係以特定之編碼方式對複數個視點之影像資料進行編碼,並輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、以及包含附加含有表示係擴展視點之資料之上述識別資訊的上述資料標頭之資料之擴展圖像串流。
於本發明之另一方面中,係自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料之擴展圖像串流,且於自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理之情形時,將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值來作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
根據本發明,使記錄有以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之基本圖像串流與擴展圖像串流的BD等記錄媒體,於不支持複數個視點之影像資料之再生的裝置中亦可再生。
<第1實施形態> [再生系統之構成例]
圖1係表示包含應用本發明之再生裝置1之再生系統之構成例的圖。
如圖1所示,該再生系統係藉由以HDMI(High Definition Multimedia Interface,高清晰度多媒體介面)纜線等連接再生裝置1與顯示裝置3而構成。於再生裝置1中安裝有BD等光碟2。
於光碟2中記錄有為顯示視點數為2個之立體圖像(所謂之3D圖像)所必需之串流。
再生裝置1係與光碟2中所記錄之串流之3D再生相對應的播放器。再生裝置1將光碟2中所記錄之串流加以再生,並使再生後所得之3D圖像顯示於包含電視接收器等之顯示裝置3。聲音同樣亦藉由再生裝置1而再生,且自顯示裝置3中所設置之揚聲器等輸出。
作為3D圖像之顯示方式提出有各種方式。此處,作為3D圖像之顯示方式,係採用以下之類型1之顯示方式與類型2之顯示方式。
類型1之顯示方式係如下者:藉由以左眼觀察之圖像(L圖像)之資料、與以右眼觀察之圖像(R圖像)之資料來構成3D圖像之資料,並交替顯示L圖像與R圖像,藉此顯示3D圖像。
類型2之顯示方式係如下者:顯示使用源圖像之資料與Depth之資料而生成之L圖像與R圖像,藉此顯示3D圖像,該源圖像係作為生成3D圖像之來源之圖像。類型2之顯示方式中所使用之3D圖像之資料包括源圖像之資料、及藉由提提供源圖像而生成L圖像與R圖像之Depth之資料。
類型1之顯示方式係於視聽時需要眼鏡之顯示方式。類型2之顯示方式係無需眼鏡便可視聽3D圖像之顯示方式。
於光碟2中記錄有如藉由類型1與2之任一顯示方式均可顯示3D圖像之串流。
作為用以將此種串流記錄於光碟2之編碼方式,可採用例如H.264 AVC(Advanced Video Coding,進階視訊編碼)/MVC(Multi-view Video coding,多視點視訊編碼)。
[H.264 AVC/MVC Profile]
於H.264 AVC/MVC中,定義有被稱作Base view video(基本視點視訊)之圖像串流與被稱作Dependent view video(擴展視點視訊)之圖像串流。以下,適當地將H.264 AVC/MVC簡稱為MVC。
圖2係表示拍攝之例之圖。
如圖2所示,將相同之被攝體作為對象,利用L圖像用之相機與R圖像用之相機進行拍攝。將利用L圖像用之相機與R圖像用之相機所拍攝之影像之基本串流輸入至MVC編碼器中。
圖3係表示MVC編碼器之構成例之方塊圖。
如圖3所示,MVC編碼器11係由H.264/AVC編碼器21、H.264/AVC解碼器22、Depth計算部23、Dependent view video編碼器24、以及多工器25構成。
利用L圖像用之相機所拍攝之影像#1之串流係輸入至H.264/AVC編碼器21與Depth計算部23中。又,利用R圖像用之相機所拍攝之影像#2之串流係輸入至Depth計算部23與Dependent view video編碼器24中。亦可將影像#2之串流輸入至H.264/AVC編碼器21與Depth計算部23中,將影像#1之串流輸入至Depth計算部23與Dependent view video編碼器24中。
H.264/AVC編碼器21將影像#1之串流作為例如H.264 AVC/High Profile(高級規範)視訊串流進行編碼。H.264/AVC編碼器21將編碼後所獲得之AVC視訊串流作為Base view video串流而輸出至H.264/AVC解碼器22與多工器25中。
H.264/AVC解碼器22對自H.264/AVC編碼器21所提供之AVC視訊串流進行解碼,並將解碼後所獲得之影像#1之串流輸出至Dependent view video編碼器24中。
Depth計算部23根據影像#1之串流與影像#2之串流而計算Depth,並將計算出之Depth之資料輸出至多工器25中。
Dependent view video編碼器24對自H.264/AVC解碼器22所提供之影像#1之串流與自外部所輸入之影像#2之串流進行編碼,並輸出Dependent view video串流。
於Base view video中,不允許將其他串流作為參照圖像之預測編碼,但如圖4所示,於Dependent view video中,允許將Base view video作為參照圖像之預測編碼。例如於將L圖像作為Base view video並將R圖像作為Dependent view video而進行編碼之情形時,結果所獲得之Dependent view video串流之資料量與Base view video串流之資料量相較變少。
再者,由於係以H.264/AVC進行編碼,因此對Base view video進行時間方向之預測。又,對於Dependent view video,亦於view間之預測之同時進行時間方向之預測。為了對Dependent view video進行解碼,必須先結束在該Dependent view video編碼時作為參照目標之、對應之Base view video的解碼。
Dependent view video編碼器24將亦利用此種view間之預測進行編碼所獲得之Dependent view video串流輸出至多工器25中。
多工器25將自H.264/AVC編碼器21所提供之Base view video串流與自Depth計算部23所提供之Dependent view video串流(Depth之資料)、以及自Dependent view video編碼器24所提供之Dependent view video串流,作為例如MPEG2 TS(motion picture experts group2 Transport Stream,動畫專家群2傳送串流)而進行多工。Base view video串流與Dependent view video串流有時多工於1條MPEG2 TS中,有時亦包含於不同之MPEG2 TS中。
多工器25輸出所生成之TS(MPEG2 TS)。自多工器25所輸出之TS與其他管理資料一併由記錄裝置記錄於光碟2中,並以記錄於光碟2中之形式被提供給再生裝置1。
於必須區分類型1之顯示方式中與Base view video一併使用之Dependent view video、及類型2之顯示方式中與Base view video一併使用之Dependent view video(Depth)之情形時,將前者稱作D1 view video,將後者稱作D2 view video。
又,將使用Base view video與D1 view video進行之、類型1之顯示方式之3D再生稱作B-D1再生。將使用Base view video與D2 view video進行之、類型2之顯示方式之3D再生稱作B-D2再生。
再生裝置1於根據使用者之指示等而進行B-D1再生之情形時,自光碟2讀出Base view video串流與D1 view video串流並加以再生。
又,再生裝置1於進行B-D2再生之情形時,自光碟2讀出Base view video串流與D2 view video串流並加以再生。
進而,再生裝置1於進行通常之2D圖像之再生的情形時,僅自光碟2讀出Base view video串流並加以再生。
Base view video串流係以H.264/AVC進行編碼之AVC視訊串流,只要是與BD之格式相對應之播放器,便可再生該Base view video串流而顯示2D圖像。
以下,主要對Dependent view video為D1 view video之情形進行說明。當僅表述為Dependent view video時,係表示D1 view video。關於D2 view video,亦與D1 view video同樣地將其記錄於光碟2中並自光碟2中再生。
[TS之構成例]
圖5係表示TS之構成例之圖。
於圖5之Main TS(Main Transport Stream,主傳送串流)中多工有Base view video、Dependent view video、Primary audio(主音訊)、Base PG(Base Presentation Graphic,基本表達圖形)、Dependent PG(Dependent Presentation Graphic,擴展表達圖形)、Base IG(Base Interactive Graphic,基本交互圖形)、Dependent IG(Dependent Interactive Graphic,擴展交互圖形)之各串流。如此,亦存在Dependent view video串流與Base view video串流一併包含於Main TS中之情形。
於光碟2中記錄有Main TS與Sub TS(Sub Transport Stream,子傳送串流)。Main TS係至少包含Base view video串流之TS。Sub TS係包含Base view video串流以外之串流且與Main TS一併使用之TS。
對於下述PG、IG亦準備有Base view與Dependent view之各串流,以能夠與視訊同樣地進行3D顯示。
將對各個串流進行解碼所獲得之PG、IG之Base view的平面與對Base view video串流進行解碼所獲得之Base view video之平面合成而顯示。同樣地,將PG、IG之Dependent view之平面與對Dependent view video串流進行解碼所獲得之Dependent view video之平面合成而顯示。
例如,於Base view video串流為L圖像之串流,Dependent view video串流為R圖像之串流之情形時,關於PG、IG亦為其Base view之串流成為L圖像之圖形之串流。又,Dependent view之PG串流、IG串流成為R圖像之圖形之串流。
另一方面,於Base view video串流為R圖像之串流,Dependent view video串流為L圖像之串流的情形時,關於PG、IG亦為其Base view之串流成為R圖像之圖形之串流。又,Dependent view之PG串流、IG串流成為L圖像之圖形之串流。
圖6係表示TS之另一構成例之圖。
於圖6之Main TS中多工有Base view video、Dependent view video之各串流。
另一方面,於Sub TS中多工有Primary audio、Base PG、Dependent PG、Base IG、Dependent IG之各串流。
如此,亦存在將視訊串流多工於Main TS中,將PG、IG之串流等多工於Sub TS中之情形。
圖7係表示TS之又一構成例之圖。
於圖7A之Main TS中多工有Base view video、Primary audio、Base PG、Dependent PG、Base IG、Dependent IG之各串流。
另一方面,於Sub TS中包含Dependent view video串流。
如此,亦存在Dependent view video串流與Base view video串流包含於不同之TS中之情形。
於圖7B之Main TS中多工有Base view video、Primary audio、PG、IG之各串流。另一方面,於Sub TS中多工有Dependent view video、Base PG、Dependent PG、Base IG、Dependent IG之各串流。
Main TS中所包含之PG、IG係2D再生用之串流。Sub TS中所包含之串流係3D再生用之串流。
如此,亦可於2D再生與3D再生中不共用PG之串流與IG之串流。
如上所述,存在Base view video串流與Dependent view video串流包含於不同之MPEG2 TS中之情形。對將Base view video串流與Dependent view video串流包含於不同之MPEG2 TS中進行記錄之情形的優點加以說明。
例如考慮可多工為1條MPEG2 TS之位元率受到限制之情形。該情形時,當將Base view video串流與Dependent view video串流兩者包含於1條MPEG2 TS中時,為滿足該限制而必須降低各串流之位元率。其結果為畫質下降。
藉由包含於各個不同之MPEG2 TS中,無需降低位元率,且可不使畫質下降。
[應用格式]
圖8係表示利用再生裝置1之AV串流之管理之例的圖。
如圖8所示,AV串流之管理係使用PlayList(播放清單)與Clip之2層來進行。AV串流不僅記錄於光碟2中,有時亦記錄於再生裝置1之局部儲存器中。
此處,將1個AV串流與其附帶之資訊Clip Information(片斷資訊)之對視作1個目標,將該等目標總稱為Clip。以下,將儲存有AV串流之檔案稱為AV串流檔案。又,亦將儲存有Clip Information之檔案稱為Clip Information檔案。
將AV串流於時間軸上展開,各Clip之存取點主要係按照時間戳記於PlayList中予以指定。Clip Information檔案係用以查找應開始AV串流中之解碼之位址等。
PlayList係AV串流之再生區間之集合。AV串流中之1個再生區間稱作PlayItem。PlayItem係以時間軸上之再生區間之IN點與OUT點之對而表示。如圖8所示,PlayList係由1個或複數個PlayItem構成。
圖8之自左側起第1個PlayList係由2個PlayItem構成,藉由該2個PlayItem而分別參照左側之C1ip中所包含之AV串流之前半部分與後半部分。
自左側起第2個PlayList係由1個PlayItem構成,藉由該PlayItem而參照右側之Clip中所包含之AV串流整體。
自左側起第3個PlayList係由2個PlayItem構成,藉由該2個PlayItem而分別參照左側之Clip中所包含之AV串流之某部分、以及右側之Clip中所包含之AV串流之某部分。
例如,於藉由光碟瀏覽程式而指定自左側起第1個PlayList中所含之左側PlayItem作為再生位置之情形時,進行該PlayItem所參照之左側之Clip中所包含的AV串流之前半部分之再生。如此,PlayList可作為用以管理AV串流之再生之再生管理資訊而使用。
於PlayList之中,將由1個以上之PlayItem之排列所形成之再生路徑稱為主路徑(Main Path)。
又,於PlayList之中,將與Main Path平行且由1個以上之SubPlayItem之排列所形成的再生路徑稱為子路徑(Sub Path)。
圖9係表示Main Path與Sub Path之結構之圖。
PlayList可具有1個Main Path與1個以上之Sub Path。
上述Base view video串流係作為構成Main Path之PlayItem所參照之串流而加以管理。又,Dependent view video串流係作為構成Sub Path之 SubPlayItem所參照之串流而加以管理。
圖9之PlayList包含由3個PlayItem之排列所形成之1個Main Path與3個Sub Path。
於構成Main Path之PlayItem中,自前導起依序分別設定有ID(Identification,標識符)。於Sub Path中,亦自前導起依序設定有Subpath_id=0、Subpath_id=1、及Subpath_id=2之ID。
於圖9之例中,於Subpath_id=0之Sub Path中包含1個SubPlayItem,於Subpath_id=1之Sub Path中包含2個SubPlayItem。又,於Subpath_id=2之Sub Path中包含1個SubPlayItem。
於1個PlayItem所參照之Clip AV串流中至少包含視訊串流(主圖像資料)。
又,於Clip AV串流中,以與Clip AV串流中所含之視訊串流相同之時序(同步)再生之音訊串流可含有1個以上,亦可不含有。
於Clip AV串流中,與Clip AV串流中所含之視訊串流同步再生之位元映射之字幕資料(PG(Presentation Graphic))之串流可含有1個以上,亦可不含有。
於Clip AV串流中,與Clip AV串流檔案中所含之視訊串流同步再生之IG(Interactive Graphic)之串流可含有1個以上,亦可不含有。IG之串流係用以顯示由使用者操作之按鈕等之圖形。
於1個PlayItem所參照之Clip AV串流中,多工有視訊串流、及與該視訊串流同步再生之0個以上之音訊串流、0個以上之PG串流及0個以上之IG串流。
又,1個SubPlayItem參照與PlayItem所參照之Clip AV串流不同之串流(其他串流)之視訊串流、音訊串流或PG串流等。
關於使用此種PlayList、PlayItem、SubPlayItem之AV串流之管理,例如記載於日本專利特開2008-252740號公報、日本專利特開2005-348314號公報中。
[目錄結構]
圖10係表示光碟2中所記錄之檔案之管理結構之例的圖。
如圖10所示,檔案係藉由目錄結構分級地管理。於光碟2上作成有1個root目錄。root目錄之下係1個記錄再生系統所管理之範圍。
於root目錄之下設有BDMV目錄。
於BDMV目錄之下直接儲存設定有「Index.bdmv」之名稱之檔案即Index檔案、及設定有「MovieObject.bdmv」之名稱之檔案即MovieObject檔案。
於BDMV目錄之下設有BACKUP目錄、PLAYLIST目錄、CLIPINF目錄、STREAM目錄等。
於PLAYLIST目錄中儲存描述PlayList之PlayList檔案。於各PlayList檔案中係設定5位數之數字與擴展名「.mpls」組合而成之名稱。於圖10所示之1個PlayList檔案係設定「00000.mpls」之檔案名。
於CLIPINF目錄中儲存Clip Information檔案。於各Clip Information檔案中係設定5位數之數字與擴展名「.clpi」組合而成之名稱。
於圖10之3個Clip Information檔案中,分別設定有「00001.clpi」、「00002.clpi」、「00003.clpi」之檔案名。以下,適當地將Clip Information檔案稱為clpi檔案。
例如,「00001.clpi」之clpi檔案係對與Base view video之Clip相關之資訊進行描述的檔案。
「00002.clpi」之clpi檔案係對與D2 view video之Clip相關之資訊進行描述的檔案。
「00003.clpi」之clpi檔案係對與D1 view video之Clip相關之資訊進行描述的檔案。
於STREAM目錄中儲存串流檔案。於各串流檔案中設定5位數之數字與擴展名「.m2ts」組合而成之名稱、或者設定5位數之數字與擴展名「.ilvt」組合而成之名稱。以下,適當地將設定有擴展名「.m2ts」之檔案稱為m2tS檔案。又,將設定有擴展名「.ilvt」之檔案稱為ilvt檔案。
「00001.m2ts」之m2ts檔案係2D再生用之檔案,藉由指定該檔案而進行Base view video串流之讀出。
「00002.m2ts」之m2ts檔案係D2 view video串流之檔案,「00003.m2ts」之m2ts檔案係D1 view video串流之檔案。
「10000.ilvt」之ilvt檔案係B-D1再生用之檔案,藉由指定該檔案而進行Base view video串流與D1 view video串流之讀出。
「20000.ilvt」之ilvt檔案係B-D2再生用之檔案,藉由指定該檔案而進行Base view video串流與D2 view video串流之讀出。
除圖10所示者以外,於BDMV目錄之下,亦設有儲存音訊串流之檔案之目錄等。
[各資料之語法]
圖11係表示PlayList檔案之語法之圖。
PlayList檔案係儲存於圖10之PLAYLIST目錄中且設有擴展名「.mpls」之檔案。
圖11之type_indicator表示「xxxxx.mpls」之檔案之類型。
version_number表示「xxxx.mpls」之版次號碼。version_number係由4位數之數字構成。例如,於3D再生用之PlayList檔案中設定表示係「3D Spec version」之「0240」。
PlayList_start_address係以自PlayList檔案之前導位元組起之相對位元組數為單位而表示PlayList()之前導位址。
PlayList Mark_start_address係以自PlayList檔案之前導位元組起之相對位元組數為單位而表示PlayListMark()之前導位址。
ExtensionData_start_address係以自PlayList檔案之前導位元組起之相對位元組數為單位而表示ExtensionData()之前導位址。
於ExtensionData_start_address之後包含160bit之reserved_for_future_use。
於AppInfoPlayList()中儲存再生限制等與PlayList之再生控制相關之參數。
於PlayList()中儲存與Main Path或Sub Path等相關之參數。PlayList()之內容於下文說明。
於PlayListMark()中儲存PlayList之標記資訊,即指示章跳躍等之使用者操作或指令等之與作為跳躍目的地(跳躍點)之標記相關之資訊。
於ExtensionData()中可插入私有資料。
圖12係表示PlayList檔案之描述之具體例的圖。
如圖12所示,於PlayList檔案中描述有2bit之3D_PL_type與1bit之view_type。
3D_PL_type表示PlayList之類型。
view_type表示藉由PlayList而管理再生之Base view video串流是L圖像(L view)之串流還是R圖像(R view)之串流。
圖13係表示3D_PL_type之值之含義的圖。
3D_PL_type之值之00表示係2D再生用之PlayList。
3D_PL_type之值之01表示係3D再生中之B-D1再生用的PlayList。
3D_PL_type之值之10表示係3D再生中之B-D2再生用之PlayList。
例如,於3D_PL_type之值為01或10之情形時,於PlayList檔案之ExtenstionData()中登錄有3DPlayList資訊。例如,登錄與Base view video串流與Dependent view video串流之自光碟2之讀出相關的資訊作為3DPlayList資訊。
圖14係表示view_type之值之含義的圖。
就view_type之值之0而言,於進行3D再生之情形時表示Base view video串流為L view之串流。於進行2D再生之情形時表示Base view video串流為AVC視訊串流。
view_type之值之1表示Base view video串流為R view之串流。
藉由於PlayList檔案中描述view_type,再生裝置1可識別出Base view video串流是L view之串流還是R view之串流。
例如,於經由HDMI纜線而將視訊信號輸出至顯示裝置3中之情形時,一般認為再生裝置1需要將L view之信號與R view之信號分別加以區分後再輸出。
藉由可識別Base view video串流為L view之串流還是R view之串流,再生裝置1可將L view之信號與R view之信號加以區分後輸出。
圖15係表示圖11之PlayList()之語法的圖。
length係表示自該length場之後至PlayList()之最後為止之位元組數之32位元的無符號整數。即,length係表示自reserved_for_future_use起直至PlayList之最後為止之位元組數。
於length之後準備16位元之reserved_for_future_use。
number_of_PlayItems係表示位於PlayList之中之PlayItem的數量之16位元之場。於圖9之例之情形時,PlayItem之數量為3。針對PlayItem_id之值,按照PlayList中 PlayItem()出現之順序而依序自0起分配。例如,分配圖9之PlayItem_id=0、1、2。
number_of_SubPathss係表示位於PlayList之中之Sub Path的數量之16位元之場。於圖9之例之情形時,Sub Path之數量為3。針對SubPath_id之值,按照PlayList中SubPath()出現之順序依序自0起分配。例如,分配圖9之Subpath_id=0、1、2。於其後之for語句中,以PlayItem之數量參照PlayItem(),以Sub Path之數量參照SubPath()。
圖16係表示圖15之SubPath()之語法的圖。
length係表示自該length場之後至Sub Path()之最後為止之位元組數的32位元之無符號整數。即,length表示自reserved_for_future_use至PlayList之最後為止之位元組數。
於length之後準備16位元之reserved_for_future_use。
SubPath-type係表示Sub Path之應用程式之類型的8位元之場。SubPath_type用以例如表示Sub Path為音訊、為位元映射字幕、還是為文本字幕等之類型之情形。
於SubPath_type之後準備15位元之reserved_for_future_use。
is_repeat_SubPath係指定Sub Path之再生方法之1位元之場,其表示於Main Path之再生之間重複進行Sub Path之再生、或者僅進行1次Sub Path之再生。例如,用於Main Path所參照之Clip與Sub Path所參照之Clip之再生時序不同之情形(將Main Path設為靜態圖像之放映之路徑、與將Sub Path設為作為BGM(Background Music,背景音樂)之音訊之路徑而使用之情形等)。
於Is_repeat_SubPath之後準備8位元之reserved_for_future_use。
number_of_SubPlayItems係表示位於1個 Sub Path之中之SubPlayItem的數量(入口數)之8位元之場。例如,圖9之SubPath_id=0之SubPlayItem的number_of_SubPlayItems為1,SubPath_id=1之SubPlayItem之number_of_SubPlayItems為2。於其後之for語句中,以SubPlayItem之數量參照SubPlayItem()。
圖17係表示圖16之SubPlayItem(i)之語法的圖。
length係表示自該length場之後至SubplayItem()之最後為止之位元組數的16位元之無符號整數。
圖17之SubPlayItem(i)係分為SubPlayItem參照1個Clip之情形與參照複數個Clip之情形來描述。
對SubPlayItem參照1個Clip之情形進行說明。
Clip_Information_file_name[0]表示所參照之Clip。
Clip_codec_identifier[0]表示Clip之編解碼方式。於Clip_codec_identifier[0]之後包含reserved_for_future_use。
is_multi_Clip_entries係表示有無多片段之登錄之旗標。於設立is_multi_Clip_entries之旗標之情形時,以SubPlayItem參照複數個Clip之情形之語法作為參照。
ref_to_STC_id[0]係與STC非連續點(系統時基之非連續點)相關之資訊。
SubPlayItem_IN_time表示SubPath之再生區間之開始位置,SubPlayItem_OUT_time表示結束位置。
sync_PlayItem_id與sync_start_PTS_of_PlayItem表示MainPath之時間軸上SubPath開始再生之時刻。
SubPlayItem_IN_time、SubPlayItem_OUT_time、sync_PlayItem_id、sync_start_PTS_of_PlayItem係於SubPlayItem所參照之Clip中共通地使用。
對「if(is_multi_Clip_entries=1b」,且SubPlayItem參照複數個Clip之情形進行說明。
num_of_Clip_entries表示所參照之Clip之數量。Clip_Information_file_name[SubClip_entry_id]之數量指定除Clip_Information_file_name[0]以外之Clip之數量。
Clip_codec_identifier[Sub Clip_entry_id]表示Clip之編解碼方式。
ref_to_STC_id[SubClip_entry_id]係與STC非連續點(系統時基之非連續點)相關之資訊。於ref_to_STC_id[SubClip_entry_id]之包含reserved_for_future_use。
圖18係表示圖15之PlayItem()之語法的圖。
length係表示自該length場之後至PlayItem()之最後為止之位元組數的16位元之無符號整數。
Clip_Information_file_name[0]表示PlayItem所參照之Clip之Clip Information檔案之名稱。再者,於包含Clip之mt2s檔案之檔案名、及與其對應之Clip Information檔案之檔案名中包含相同之5位數之數字。
Clip_codec_identifier[0]表示Clip之編解碼方式。於Clip_codec_identifier[0]之後包含reserved_for_future_use。於reserved_for_future_use之後包含is_multi_angle、connection_condition。
ref_to_STC_id[0]係與STC非連續點(系統時基之非連續點)相關之資訊。
IN_time表示PlayItem之再生區間之開始位置,OUT_time表示結束位置。
於OUT_time之後包含UO_mask_table()、PlayItem_random_access_mode、still_mode。
於STN_table()中包含對象之PlayItem所參照之AV串流的資訊。又,於與對象之PlayItem產生關聯而再生之Sub Path存在之情形時,亦包含構成該Sub Path之SubPlayItem所參照之AV串流的資訊。
圖19係表示圖18之STN_table()之語法的圖。
STN_table()係作為PlayItem之屬性而設定。
length係表示自該length場之後至STN_table()之最後為止之位元組數的16位元之無符號整數。於length之後準備16位元之reserved_for_future_use。
number_of_video_stream_entries表示在STN_table()中登入(登錄)之提供video_stream_id之串流的數量。
video_stream_id係用以識別視訊串流之資訊。例如,藉由該video_stream_id而特別指定Base view video串流。
關於Dependent view video串流之ID,可於STN_table()內定義,亦可藉由於Base view video串流之ID上加上特定值等而計算求出。
video_stream_number係用以視訊切換之使用者可見之視訊串流編號。
number_of_audio_stream_entries表示STN_table()中登入之提供audio_stream_id之第1個音訊串流的串流之數量。audio_stream_id係用以識別音訊串流之資訊,audio_stream_number係用以聲音切換之使用者可見之音訊串流編號。
number_of_audio_stream2_entries表示STN_table()登入中之提供audio_stream_id2之第2個音訊串流的串流之數量。audio_stream_id2係用以識別音訊串流之資訊,audio_stream_number係用以聲音切換之使用者可見之音訊串流編號。於該例中係設為可切換再生之聲音。
number_of_PG_txtST_stream_entries表示STN_table()中登入之提供PG_txtST_stream_id之串流的數量。登入有對位元映像字幕進行運行長度編碼之PG串流與文本字幕檔案(txtST)。PG_txtST_stream_id係用以識別字幕串流之資訊,PG_txtST_stream_number係用於字幕切換之使用者可見之字幕串流編號。
number_of_IG_stream_entries表示STN_table()中登入之提供IG_stream_id之串流的數量。其中登入有IG串流。IG_stream_id係用以識別IG串流之資訊,IG_stream_number係用於圖形切換之使用者可見之圖形串流編號。
Main TS、Sub TS之ID亦登錄於STN_table()中。stream_attribute()中描述有上述ID並非基本串流而是TS之ID之內容。
[再生裝置1之構成例]
圖20係表示再生裝置1之構成例之方塊圖。
控制器51執行預先準備之控制程式,控制再生裝置1之整體之動作。
例如,控制器51控制光碟驅動器52,讀出3D再生用之PlayList檔案。又,控制器51根據STN_table中所登錄之ID而讀出Main TS與Sub TS,並將其提供給解碼部56。
光碟驅動器52依照控制器51之控制自光碟2中讀出資料,並將所讀出之資料輸出至控制器51、記憶體53或解碼部56。
記憶體53適當儲存控制器51執行各種處理所必需之資料等。
局部儲存器54例如由HDD(Hard Disk Drive,硬碟驅動器)構成。於局部儲存器54中記錄有自伺服器72所下載之Dependent view video串流等。記錄於局部儲存器54中之串流亦適當提供給解碼部56。
網際網路介面55依照來自控制器51之控制,經由網路71而與伺服器72進行通訊,並將自伺服器72所下載之資料提供給局部儲存器54。
自伺服器72下載對記錄於光碟2中之資料進行更新之資料。可將下載之Dependent view video串流與記錄於光碟2中之Base view video串流一併使用,藉此可實現與光碟2之內容不同之內容之3D再生。於下載Dependent view video串流時,PlayList之內容亦可適當地更新。
解碼部56對自光碟驅動器52或局部儲存器54所提供之串流進行解碼,並將所獲得之視訊信號輸出至顯示裝置3。音訊信號亦經由特定之路徑而輸出至顯示裝置3。
操作輸入部57係由按鈕、按鍵、觸控面板、旋控鈕、滑鼠等輸入設備及接收自特定之遙控器所傳送之紅外線等信號的接收部構成。操作輸入部57檢測使用者之操作,並將表示所檢測之操作之內容的信號提供給控制器51。
圖21係表示解碼部56之構成例之圖。
圖21中表示進行視訊信號之處理之構成。於解碼部56中,亦進行音訊信號之解碼處理。以音訊信號為對象所進行之解碼處理之結果係經由未圖示之路徑而輸出至顯示裝置3。
PID(Proportional Intergral Derivative,比例-積分-微分)濾波器101根據構成TS之封包之PID或串流之ID等,識別自光碟驅動器52或局部儲存器54所提供的TS是Main TS還是Sub TS。PID濾波器101將Main TS輸出至緩衝器102,並將Sub TS輸出至緩衝器103。
PID濾波器104依序讀出緩衝器102中所儲存之Main TS之封包,並根據PID進行分配。
例如,PID濾波器104將構成Main TS中所包含之Base view video串流之封包輸出至B video緩衝器106,並將構成Dependent view video串流之封包輸出至開關107。
又,PID濾波器104將構成Main TS中所包含之Base IG串流之封包輸出至開關114,並將構成Dependent IG串流之封包輸出至開關118。
PID濾波器104將構成Main TS中所包含之Base PG串流之封包輸出至開關122,並將構成Dependent PG串流之封包輸出至開關126。
如參照圖5所說明般,存在Base view video、Dependent view video、Base PG、Dependent PG、Base IG、Dependent IG之各串流多工於Main TS中之情形。
PID濾波器105依序讀出緩衝器103中所儲存之Sub TS之封包,並根據PID進行分配。
例如,PID濾波器105將構成Sub TS中所包含之Dependent view video串流之封包輸出至開關107。
又,PID濾波器105將構成Sub TS中所包含之Base IG串流之封包輸出至開關114,並將構成Dependent IG串流之封包輸出至開關118。
PID濾波器105將構成Sub TS中所包含之Base PG串流之封包輸出至開關122,並將構成Dependent PG串流之封包輸出至開關126。
如參照圖7所說明般,Dependent view video串流有時包含於Sub TS中。又,如參照圖6所說明般,Base PG、Dependent PG、Base IG、Dependent IG之各串流有時多工於Sub TS中。
開關107將自PID濾波器104或PID濾波器105所提供之構成Dependent view video串流之封包輸出至D video緩衝器108。
開關109依照規定解碼時序之時刻資訊而依序讀出B video緩衝器106中所儲存之Base view video之封包、以及Dvideo緩衝器108中所儲存之Dependent view video之封包。於儲存有Base view video之某畫面之資料的封包、以及儲存有與其對應之Dependent view video之畫面之資料的封包中例如設定有相同之時刻資訊。
開關109將自B video緩衝器106或D video緩衝器108所讀出之封包輸出至視訊解碼器110。
視訊解碼器110對自開關109所提供之封包進行解碼,並將藉由解碼所獲得之Base view video或Dependent view video之資料輸出至開關111。
開關111將對Base view video之封包進行解碼所獲得之資料輸出至B video平面(plane)生成部112,並將對Dependent view video之封包進行解碼所獲得之資料輸出至D video平面生成部113。
B video平面生成部112根據自開關111所提供之資料生成Base view video之平面,並將其輸出至合成部130。
D video平面生成部113根據自開關111所提供之資料生成Dependent view video之平面,並將其輸出至合成部130。
開關114將自PID濾波器104或PID濾波器105所提供之構成Base IG串流之封包輸出至BIG緩衝器115。
B IG解碼器116對B IG緩衝器115中所儲存之構成Base IG串流之封包進行解碼,並將解碼後所獲得之資料輸出至BIG平面生成部117。
BIG平面生成部117根據自BIG解碼器116所提供之資料生成Base IG之平面,並將其輸出至合成部130。
開關118將自PID濾波器104或PID濾波器105所提供之構成Dependent IG串流之封包輸出至D IG緩衝器119。
D IG解碼器120對D IG緩衝器119中所儲存之構成Dependent IG串流之封包進行解碼,並將解碼後所獲得之資料輸出至D IG平面生成部121。
D IG平面生成部121根據自D IG解碼器120所提供之資料生成Dependent IG之平面,並將其輸出至合成部130。
開關122將自PID濾波器104或PID濾波器105所提供之構成Base PG串流之封包輸出至B PG緩衝器123。
B PG解碼器124對BPG緩衝器123中所儲存之構成Base PG串流之封包進行解碼,並將解碼後所獲得之資料輸出至B PG平面生成部125。
B PG平面生成部125根據自B PG解碼器124所提供之資料生成Base PG之平面,並將其輸出至合成部130。
開關126將自PID濾波器104或PID濾波器105所提供之構成Dependent PG串流之封包輸出至D PG緩衝器127。
D PG解碼器128對D PG緩衝器127中所儲存之構成Dependent PG串流之封包進行解碼,並將解碼後所獲得之資料輸出至D PG平面生成部129。
D PG平面生成部129根據自D PG解碼器128所提供之資料生成Dependent PG之平面,並將其輸出至合成部130。
合成部130藉由將自B video平面生成部112所提供之Base view video之平面、自B IG平面生成部117所提供之Base IG之平面、以及自BPG平面生成部125所提供之Base PG之平面以特定之順序重疊而合成,生成Base view之平面。
又,合成部130藉由將自D video平面生成部113所提供之Dependent view video之平面、自D IG平面生成部121所提供之Dependent IG之平面、以及自D PG平面生成部129所提供之Dependent PG之平面以特定之順序重疊而合成,生成Dependent view之平面。
合成部130輸出Base view之平面與Dependent view之平面之資料。將自合成部130所輸出之視訊資料輸出至顯示裝置3,並使Base view之平面與Dependent view之平面交替地顯示,藉此進行3D顯示。
[T-STD(Transport stream-System. Target Decoder,傳送串流系統目標解碼器)之第1例]
此處,對圖21所示之構成中之解碼器及其周邊之構成進行說明。
圖22係表示進行視訊串流之處理之構成的圖。
於圖22中,對與圖21所示之構成相同之構成附上相同之符號。於圖22中表示了PID濾波器104、B video緩衝器106、開關107、D video緩衝器108、開關109、視訊解碼器110、以及DPB(Decoded Picture Buffer,已解碼畫面暫存器)151。圖21中雖未圖示,但於視訊解碼器110之後段設置有儲存已解碼之畫面之資料的DPB 151。
PID濾波器104將構成Main TS中所包含之Base view video串流之封包輸出至B video緩衝器106,並將構成Dependent view video串流之封包輸出至開關107。
例如,於構成Base view video串流之封包中,將PID=0作為PID之固定值進行分配。又,於構成Dependent view video串流之封包中,將0以外之固定之值作為PID進行分配。
PID濾波器104將標頭中描述有PID=0之封包輸出至B video緩衝器106,並將標頭中描述有0以外之PID之封包輸出至開關107。
輸出至B video緩衝器106之封包經由TB(Transport Buffer,傳送緩衝器)1 、MB(Multiplexing Buffer,多工緩衝器)1 而儲存於VSB1 中。於VSB1 中儲存Base view video之基本串流之資料。
對於開關107,不僅提供自PID濾波器104所輸出之封包,亦由圖21之PID濾波器105提供構成自Sub TS所提取之Dependent view video串流的封包。
開關107於自PID濾波器104提供有構成Dependent view video串流之封包之情形時,將其輸出至D video緩衝器108。
又,開關107於自PID濾波器105提供有構成Dependent view video串流之封包之情形時,將其輸出至D video緩衝器108。
輸出至D video緩衝器108之封包經由TB2 、MB2 而儲存於VSB2 中。於VSB2 中儲存Dependent view video之基本串流之資料。
開關109依序讀出B video緩衝器106之VSB1 中所儲存之Base view video的封包、以及D video緩衝器108之VSB2 中所儲存之Dependent view video的封包,並將其輸出至視訊解碼器110。
例如,開關109以輸出某時刻之Base view video之封包之後立即輸出相同時刻之Dependent view video之封包的方式,向視訊解碼器110中連續地輸出相同時刻之Base view video之封包與Dependent view video之封包。
於儲存Base view video之某畫面之資料的封包、及儲存與其對應之Dependent view video之畫面之資料的封包中,設定有編碼時確保PCR(Program Clock Reference,節目時鐘參考)同步之相同時刻資訊。即便於Base view video串流與Dependent view video串流分別包含於不同之TS中之情形時,亦於儲存有相對應之畫面之資料的封包中設定相同時刻資訊。
時刻資訊係DTS(Decoding Time Stamp,解碼時間戳記)、PTS(Presentation Time Stamp,顯示時間戳記),其設定於各PES(Packetized Elementary Stream,封包化之基本串流)封包中。
即,於將各個串流之畫面按編碼順序/解碼順序排列時位於相同時刻之Base view video之畫面與Dependent view video之畫面成為對應的畫面。於儲存某Base view video之畫面之資料的PES封包、以及儲存以解碼順序與該畫面對應之Dependent view video之畫面之資料的PES封包中,設定有相同之DTS。
又,於將各個串流之畫面按顯示順序排列時位於相同時刻之Base view video的畫面與Dependent view video之畫面亦成為相對應的畫面。於儲存某Base view video之畫面之資料的PES封包、以及儲存以顯示順序與該畫面對應之Dependent view video之畫面之資料的PES封包中,設定有相同之PTS。
於如下述般Base view video串流之GOP(Group Of Pictures,畫面群)結構與Dependent view video串流之GOP結構為相同結構之情形時,以解碼順序而對應之畫面成為顯示順序亦對應之畫面。
於串列傳送封包之情形時,於某個時序自B video緩衝器106之VSB1 所讀出之封包的DTS1 、與於隨後之時序自D video緩衝器108之VSB2 所讀出之封包的DTS2 如圖22所示,成為表示相同時刻者。
開關109將自B video緩衝器106之VSB1 所讀出之Base view video的封包、或自D video緩衝器108之VSB2 所讀出之Dependent view video的封包輸出至視訊解碼器110。
視訊解碼器110對自開關109所提供之封包依序進行解碼,並使解碼後所獲得之Base view video之畫面之資料、或Dependent view video之畫面之資料儲存於DPB 151中。
DPB 151中所儲存之已解碼之畫面的資料以特定之時序由開關111讀出。又,DPB 151中所儲存之已解碼之畫面的資料係由視訊解碼器110用於其他畫面之預測。
於串列傳送資料之情形時,於某個時序所輸出之Base view video之畫面之資料的PTS與於隨後之時序所輸出之Dependent view video之畫面之資料的PTS成為表示相同時刻者。
如參照圖5等所說明般,Base view video串流與Dependent view video串流有時係多工於1條TS中,如參照圖7所說明般,有時分別包含於不同之TS中。
藉由安裝圖22之解碼器模型,即便於Base view video串流與Dependent view video串流多工於1條TS中之情形時,或者分別包含於不同之TS中之情形時,再生裝置1亦可對應。
例如,如圖23所示假設僅提供1條TS之狀況之情形時,無法對應Base view video串流與Dependent view video串流分別包含於不同之TS中之情形。
又,根據圖22之解碼器模型,由於具有相同之DTS,因此即便於Base view video串流與Dependent view video串流包含於不同之TS中之情形時,亦可以準確之時序將封包提供給視訊解碼器110。
亦可將Base view video用之解碼器與Dependent view video用之解碼器分別並列設置。該情形時,將相同時刻之封包以相同之時序而分別提供給Base view video用之解碼器與Dependent view video用之解碼器。
[第2例]
圖24係進行視訊串流之處理之另一構成的圖。
於圖24中,除圖22之構成以外,還表示了開關111、L video平面生成部161、以及R video平面生成部162。又,PID濾波器105亦表示於開關107之前段。適當地省略重複之說明。
L video平面生成部161係生成L view video之平面者,其代替圖21之B video平面生成部112而設置。
R video平面生成部162係生成R view video之平面者,其代替圖21之D video平面生成部113而設置。
於該例中,開關111需要對L view之視訊資料與R view之視訊資料進行識別後輸出。
即,開關111需要識別對Base view video之封包進行解碼所獲得之資料是L view與R view中之哪一者的視訊資料。
又,開關111需要識別對Dependent view video之封包進行解碼所獲得之資料是L view與R view中之哪一者的視訊資料。
為識別L view與R view而使用參照圖12與圖14所說明之view_type。例如,控制器51將PlayList檔案中所描述之view_type輸出至開關111。
於view_type之值為0之情形時,開關111將DPB151中所儲存之資料之中,對由PID=0所識別之Base view video之封包進行解碼所獲得的資料輸出至L video平面生成部161。如上所述,view_type之值之0表示Base view video串流為L view之串流。
該情形時,開關111將對由0以外之PID所識別之Dependent view video之封包進行解碼所獲得的資料輸出至R video平面生成部162。
另一方面,於view_type之值為1之情形時,開關111將DPB151中所儲存之資料之中,對由PID=0所識別之Base view video之封包進行解碼所獲得的資料輸出至R video平面生成部162。view_type之值之1表示Base view video串流為R view之串流。
該情形時,開關111將對由0以外之PID所識別之Dependent view video之封包進行解碼所獲得的資料輸出至L video平面生成部161。
L video平面生成部161根據自開關111所提供之資料而生成L view video之平面,並將其輸出至合成部130。
R video平面生成部162根據自開關111所提供之資料而生成R view video之平面,並將其輸出至合成部130。
於以H.264 AVC/MVC進行編碼之Base view video、Dependent view video之基本串流內不存在表示係L view或R view的資訊(場)。
因此,藉由預先於PlayList檔案中設定view_type,記錄裝置可使再生裝置1識別Base view video串流與Dependent view video串流分別為L view與R view之哪一者之串流。
再生裝置1可識別Base view video串流與Dependent view video串流分別為L view與R view之哪一者之串流,並對應於識別結果切換輸出目的地。
於對IG、PG之平面亦分別準備有L view與R view之情形時,因可區分視訊串流之L view與R view,故再生裝置1可容易地進行L view彼此、R view彼此之平面之合成。
如上所述,於經由HDMI纜線輸出視訊信號之情形時,要求於分別區分L view之信號與R view之信號之後將該等輸出,再生裝置1可應對該要求。
對DPB 151中所儲存之Base view video之封包進行解碼所獲得的資料與對Dependent view video之封包進行解碼所獲得之資料的識別亦可不根據PID、而根據view_id來進行。
於以H.264 AVC/MvC之編碼時,於構成編碼結果之串流之Access Unit(存取單元)中設定有view_id。根據view_id可識別各Access Unit為哪一個view component之單元。
圖25係表示Access Unit之例之圖。
圖25之Access Unit#1係包含Base view video之資料之單元。Access Unit#2係包含Dependent view video之資料之單元。Access Unit係以可按照畫面單位進行存取之方式對例如1個畫面之資料加以匯總之單元。
藉由以H.264 AVC/MVC進行編碼,將Base view video與Dependent view video之各畫面之資料儲存於上述Access Unit中。於以H.264 AVC/MVC進行編碼時,如Access Unit#2內所示般,於各個view component中附加有MVC標頭。MVC標頭中包含view_id。
於圖25之例之情形時,對於Access Unit#2而言,可根據view_id識別儲存於該Access Unit中之view component為Dependent view video。
另一方面,如圖25所示,於作為Access Unit#1中所儲存之view component之Base view video中並未附加MVC標頭。
如上所述,Base view video串流係亦用於2D再生之資料。因此,為確保與其之互換性,Base view video於編碼時未附加MVC標頭。或者將曾經附加之MVC標頭去除。利用記錄裝置之編碼於下文說明。
再生裝置1中定義(設定)為如下:未附加MVC標頭之view component之view_id為0,將view component識別為Base view video。對於Dependent view video,於編碼時設定0以外之值作為view_id。
藉此,再生裝置1可根據識別為0之view_id而可識別Base view video,並可根據實際上所設定之0以外之view_id而識別出Dependent view video。
於圖24之開關111中,對Base view video之封包進行解碼所獲得之資料與對Dependent view video之封包進行解碼所獲得之資料的識別亦可根據此種view_id來進行。
[第3例]
圖26係表示進行視訊串流之處理之又一構成的圖。
於圖26之例中,代替圖24之L video平面生成部161而設置有B video平面生成部112,且代替R video平面生成部162而設置有D video平面生成部113。於B video平面生成部112與D video平面生成部113之後段設置有開關171。於圖26所示之構成中,亦根據view_type而切換資料之輸出目的地。
開關111將DPB 151中所儲存之資料之中,對Base view video之封包進行解碼所獲得之資料輸出至B video平面生成部112。又,開關111將對Dependent view video之封包進行解碼所獲得之資料輸出至Dvideo平面生成部113。
如上所述,Base view video之封包進行解碼所獲得之資料與對Dependent view video之封包進行解碼所獲得之資料,係根據PID或view_id而識別。
B video平面生成部112根據自開關111所提供之資料生成Base view video之平面,並將其輸出。
D video平面生成部113根據自開關111所提供之資料生成Dependent view video之平面,並將其輸出。
自控制器51對開關171提供PlayList檔案中所描述之view_type。
於view_type之值為0之情形時,開關171將自B video平面生成部112所提供之Base view video之平面作為L view video之平面輸出至合成部130。view_type之值之0表示Base view video串流為L view之串流。
又,該情形時,開關171將自D video平面生成部113所提供之Dependent view video之平面作為R view video之平面輸出至合成部130。
另一方面,於view_type之值為1之情形時,開關171將自D video平面生成部113所提供之Dependent view video之平面作為L view video之平面輸出至合成部130。view_type之值之1表示Base view video串流為R view之串流。
又,該情形時,開關171將自B video平面生成部112所提供之Base view video之平面作為R view video之平面輸出至合成部130。
藉由圖26之構成,再生裝置1亦可識別L view與R view,並根據識別結果而切換輸出目的地。
[平面合成模型之第1例]
圖27係表示圖21所示之構成中之合成部130與其前段之構成的圖。
於圖27中,亦對與圖21所示之構成相同之構成附上相同之符號。
將構成Main TS或Sub TS中所包含之IG串流之封包輸入至開關181中。於輸入至開關181中之構成IG串流之封包中包含Base view之封包與Dependent view之封包。
將構成Main TS或Sub TS中所包含之PG串流之封包輸入至開關182中。於輸入至開關182中之構成PG串流之封包中包含Base view之封包與Dependent view之封包。
如參照圖5等所說明般,對於IG、PG亦準備有用以進行3D顯示之Base view之串流與Dependent view之串流。
藉由將Base view之IG與Base view video合成而進行顯示,並將Dependent view之IG與Dependent view video合成而進行顯示,使用者不僅以3D地看到視訊,且3D地看到按鈕或圖符等。
又,藉由將Base view之PG與Base view video合成而進行顯示,並將Dependent view之PG與Dependent view video合成而進行顯示,使用者不僅3D地看到視訊,且3D地看到字幕之文本等。
開關181將構成Base IG串流之封包輸出至B IG解碼器116,並將構成Dependent IG串流之封包輸出至D IG解碼器120。開關181具有圖21之開關114與開關118之功能。於圖27中,省略各緩衝器之圖示。
B IG解碼器116對自開關181所提供之構成Base IG串流之封包進行解碼,並將解碼後所獲得之資料輸出至B IG平面生成部117。
B IG平面生成部117根據自B IG解碼器116所提供之資料而生成Base IG之平面,並將其輸出至合成部130。
D IG解碼器120對自開關181所提供之構成Dependent IG串流之封包進行解碼,並將解碼後所獲得之資料輸出至D IG平面生成部121。亦可利用1個解碼器對Base IG串流與Dependent IG串流進行解碼。
D IG平面生成部121根據自D IG解碼器120所提供之資料而生成Dependent IG之平面,並將其輸出至合成部130。
開關182將構成Base PG串流之封包輸出至B PG解碼器124,並將構成Dependent PG串流之封包輸出至D PG解碼器128。開關182具有圖21之開關122與開關126之功能。
B PG解碼器124對自開關182所提供之構成Base PG串流之封包進行解碼,並將解碼後所獲得之資料輸出至B PG平面生成部125。
BPG平面生成部125根據自BPG解碼器124所提供之資料而生成Base PG之平面,並將其輸出至合成部130。
D PG解碼器128對自開關182所提供之構成Dependent PG串流之封包進行解碼,並將解碼後所獲得之資料輸出至D PG平面生成部129。亦可利用1個解碼器對Base PG串流與Dependent PG串流進行解碼。
D PG平面生成部129根據自D PG解碼器128所提供之資料而生成Dependent PG之平面,並將其輸出至合成部130。
視訊解碼器110對自開關109(圖22等)所提供之封包依序進行解碼,並將解碼後所獲得之Base view video之資料或Dependent view video之資料輸出至開關111。
開關111將對Base view video之封包進行解碼所獲得之資料輸出至B video平面生成部112,並將對Dependent view video之封包進行解碼所獲得之資料輸出至D video平面生成部113。
B video平面生成部112根據自開關111所提供之資料而生成Base view video之平面,並將其輸出。
D video平面生成部113根據自開關111所提供之資料而生成Dependent view video之平面,並將其輸出。
合成部130係由加算部191至194、以及開關195構成。
加算部191將自D PG平面生成部129所提供之Dependent PG之平面以重疊於自D video平面生成部113所提供之Dependent view video之平面之上的方式合成,並將合成結果輸出至加算部193。對自D PG平面生成部129提供給加算部191之Dependent PG之平面實施色彩資訊的轉換處理(CLUT(Color Look Up Table,彩色圖形查表)處理)。
加算部192將自B PG平面生成部125所提供之Base PG之平面以重疊於自B video平面生成部112所提供之Base view video之平面之上的方式合成,並將合成結果輸出至加算部194。對自B PG平面生成部125提供給加算部192之Base PG之平面實施色彩資訊的轉換處理或使用偏移值之修正處理。
加算部193將自D IG平面生成部121所提供之Dependent IG之平面以重疊於由加算部191所獲得之合成結果之上的方式合成,並將合成結果作為Dependent view之平面輸出。對自D IG平面生成部121提供給加算部193之Dependent IG之平面實施色彩資訊的轉換處理。
加算部194將自B IG平面生成部117所提供之Base IG之平面以重疊於由加算部192所獲得之合成結果之上的方式合成,並將合成結果作為Base view之平面輸出。對自D IG平面生成部121提供給加算部194之Base IG之平面實施色彩資訊的轉換處理或使用偏移值之修正處理。
根據以上述方式生成之Base view之平面與Dependent view之平面而顯示之圖像,成為如於前面可看見按鈕或圖符,於按鈕或圖符下(縱深方向)可看見字幕之文本,於字幕之文本下可看見視訊之圖像。
開關195於view_type之值為0之情形時,將Base view之平面作為L view之平面而輸出,並將Dependent view之平面作為R view之平面而輸出。自控制器51將 view_type提供給開關195。
又,開關195於view_type之值為1之情形時,將Base view之平面作為R view之平面而輸出,並將Dependent view之平面作為L view之平面而輸出。所提供之平面中之哪一個平面是Base view之平面,哪一個平面是Dependent view之平面,係根據PID或view_id來進行識別。
如此,於再生裝置1中進行Base view之平面彼此,Dependent view之平面彼此,video、IG、PG之各平面之合成。
於video、IG、PG之所有平面之合成完成之階段,根據view_type而判斷將Base view之平面彼此合成之結果是L view或者是R view,並分別輸出R view之平面與L view之平面。
又,於video、IG、PG之所有平面之合成完成之階段,根據view_type而判斷將Dependent view之平面彼此合成之結果為L view、或者為R view,並分別輸出R view之平面與L view之平面。
[第2例]
圖28係表示合成部130與其前段之構成的圖。
對圖28所示之構成之中,對與圖27所示之構成相同之構成附上相同之符號。於圖28中,合成部130之構成與圖27之構成不同。又,開關111之動作與圖27之開關111之動作不同。代替B video平面生成部112而設置有L video平面生成部161,且代替D video平面生成部113而設置有R video平面生成部162。省略重複之說明。
自控制器51對開關111與合成部130之開關201及開關202提供相同之view_type之值。
與圖24之開關111同樣地,開關111根據view_type切換對Base view video之封包進行解碼所獲得之資料、以及對Dependent view video之封包進行解碼所獲得之資料的輸出目的地。
例如,於view_type之值為0之情形時,開關111將對Base view video之封包進行解碼所獲得之資料輸出至L video平面生成部161。該情形時,開關111將對Dependent view video之封包進行解碼所獲得之資料輸出至R video平面生成部162。
另一方面,於view_type之值為1之情形時,開關111將對Base view video之封包進行解碼所獲得之資料輸出至R video平面生成部162。該情形時,開關111將對Dependent view video之封包進行解碼所獲得之資料輸出至L video平面生成部161。
L video平面生成部161根據自開關111所提供之資料而生成L view video之平面,並將其輸出至合成部130。
R video平面生成部162根據自開關111所提供之資料而生成R view video之平面,並將其輸出至合成部130。
合成部130係由開關201、開關202、加算部203至206構成。
開關201根據view_type而切換自B IG平面生成部117所提供之Base IG之平面與自D IG平面生成部121所提供之Dependent IG之平面的輸出目的地。
例如,於view_type之值為0之情形時,開關201將自B IG平面生成部117所提供之Base IG之平面作為L view之平面輸出至加算部206。該情形時,開關201將自D IG平面生成部121所提供之Dependent IG之平面作為R view之平面輸出至加算部205。
另一方面,於view_type之值為1之情形時,開關201將自D IG平面生成部121所提供之Dependent IG之平面作為L view之平面而輸出至加算部206。該情形時,開關201將自B IG平面生成部117所提供之Base IG之平面作為R view之平面而輸出至加算部205。
開關202根據view_type而切換自B PG平面生成部125所提供之Base PG之平面與自D PG平面生成部129所提供之Dependent PG之平面的輸出目的地。
例如,於view_type之值為0之情形時,開關202將自B PG平面生成部125所提供之Base PG之平面作為L view之平面而輸出至加算部204。該情形時,開關202將自D PG平面生成部129所提供之Dependent PG之平面作為R view之平面而輸出至加算部203。
另一方面,於view_type之值為1之情形時,開關202將自D PG平面生成部129所提供之Dependent PG之平面作為L view之平面而輸出至加算部204。該情形時,開關202將自B PG平面生成部125所提供之Base PG之平面作為R view之平面而輸出至加算部203。
加算部203將自開關202所提供之R view之PG之平面以重疊於自R video平面生成部162所提供之R view video之平面之上的方式合成,並將合成結果輸出至加算部205。
加算部204將自開關202所提供之L view之PG之平面以重疊於自L video平面生成部161所提供之L view video之平面之上的方式合成,並將合成結果輸出至加算部206。
加算部205將自開關201所提供之R view之IG之平面以重疊於由加算部203所獲得之合成結果之平面之上的方式合成,並將合成結果作為R view之平面輸出。
加算部206將自開關201所提供之L view之IG之平面以重疊於由加算部204所獲得之合成結果之平面之上的方式合成,並將合成結果作為L view之平面輸出。
如此,於再生裝置1中,對於video、IG、PG之各自之Base view之平面與Dependent view之平面,在與其他平面之合成之前判斷哪一個平面為L view、或者為R view。
於進行該判斷之後,以合成L view之平面彼此、R view之平面彼此之方式進行video、IG、PG之各平面之合成。
[記錄裝置之構成例]
圖29係表示軟體製作處理部301之構成例之方塊圖。
視訊編碼器311具有與圖3之MVC編碼器11相同之構成。視訊編碼器311依照H.264 AVC/MVC而對複數個影像資料進行編碼,藉此生成Base view video串流與Dependent view video串流,並將其輸出至緩衝器312。
例如,視訊編碼器311於編碼時,以相同之PCR為基準設定DTS、PTS。即,視訊編碼器311於儲存某Base view video之畫面之資料的PES封包、以及儲存以解碼順序與該畫面對應之Dependent view video之畫面之資料的PES封包中設定有相同之DTS。
又,視訊編碼器311於儲存某Base view video之畫面之資料的PES封包、以及儲存以顯示順序與該畫面對應之Dependent view video之畫面之資料的PES封包設定有相同之PTS。
如下所述,視訊編碼器311於以解碼順序而對應之Base view video之畫面與Base view video之畫面中,分別設定相同之資訊作為與解碼相關之輔助資訊即附加資訊。
進而,如下所述,視訊編碼器311於以顯示順序而對應之Base view video之畫面與Base view video之畫面中,分別設定相同之值作為表示畫面之輸出順序的POC(Picture Order Count,圖像序列號)之值。
又,如下所述,視訊編碼器311以使Base view video串流之GOP結構與Dependent view video串流之GOP結構一致之方式進行編碼。
音訊編碼器313對所輸入之音訊串流進行編碼,並將所獲得之資料輸出至緩衝器314。將Base view video、Dependent view video串流與記錄於碟片中之音訊串流一併輸入至音訊編碼器313中。
資料編碼器315對PlayList檔案等之視訊、音訊以外之上述各種資料進行編碼,並將編碼後所獲得之資料輸出至緩衝器316。
資料編碼器315根據視訊編碼器311之編碼,而於PlayList檔案中設定表示Base view video串流是L view之串流,還是R view之串流的view_type。亦可不設定Base view video串流之類型,而是設定表示Dependent view video串流是L view之串流還是R view之串流的資訊。
又,資料編碼器315將下述EP_map分別設定於Base view video串流之Clip Information檔案、以及Dependent view video串流之Clip Information檔案中。作為解碼開始位置而設定於EP_map中之Base view video串流之畫面與Dependent view video串流之畫面成為相對應的畫面。
多工部317將各個緩衝器中所儲存之視訊資料、音訊資料、以及串流以外之資料與同步信號一併進行多工,並將其輸出至糾錯編碼部318。
糾錯編碼部318將糾錯用之編碼附加於藉由多工部317而多工之資料。
調變部319對自糾錯編碼部318所提供之資料實施調變,並將其輸出。調變部319之輸出成為可於再生裝置1中再生之光碟2中所記錄的軟體。
將具有此種構成之軟體製作處理部301設置於記錄裝置中。
圖30係表示包含軟體製作處理部301之構成之例的圖。
亦存在將圖30所示之構成之一部分設置於記錄裝置內之情形。
藉由軟體製作處理部301所生成之記錄信號係於母盤前期製作處理部331中進行母盤製作處理,生成可記錄於光碟2中之格式之信號。將所生成之信號提供給母盤記錄部333。
於記錄用母盤製作部332中準備包含玻璃等之母盤,於其上塗佈包含光阻劑等之記錄材料。藉此,製作記錄用母盤。
於母盤記錄部333中,對應於自母盤前期製作處理部331所提供之記錄信號而使雷射光束調變,並將其照射於母盤上之光阻劑。藉此,母盤上之光阻劑對應於記錄信號而曝光。其後,對該母盤進行顯影,而使母盤上出現訊坑。
於金屬母盤製作部334中,對母盤實施電鑄等處理,製作轉印有玻璃母盤上之訊坑之金屬母盤。利用該金屬母盤進而製作金屬壓模,並將其作為成形用模具。
於成形處理部335中,利用注射等將PMMA(polymethyl methacrylate,聚甲基丙烯酸甲酯)或PC(polycarbonate,聚碳酸酯)等材料注入至成形用模具中,並使其固定化。或者,於金屬壓模上塗佈2P(紫外線固化樹脂)等後,照射紫外線而使其固化。藉此,可將金屬壓模上之訊坑轉印至包含樹脂之印模上。
於成膜處理部336中,藉由蒸鍍或濺鍍等於印模上形成反射膜。或者,藉由旋塗而於印模上形成反射膜。
於後加工處理部337中,對該碟片實施內外徑之加工,並實施將2片碟片貼合等必要之處理。進而,貼附標籤或安裝盤芯後,將其插入至盒匣中。如此,記錄有可藉由再生裝置1而再生之資料之光碟2的製作完成。
<第2實施形態>
[H.264 AVC/MVC Profile視訊串流之運用1]
於作為光碟2之標準之BD-ROM標準中,如上所述,係藉由採用H.264 AVC/MVC Profile而實現3D影像之編碼。
又,於BD-ROM標準中,係將Base view video串流作為L view之影像之串流,將Dependent view video串流作為R view之影像之串流。
藉由將Base view video作為H.264 AVC/High Profile視訊串流進行編碼,於先前之播放器或僅支持2D再生之播放器中,亦可再生作為3D對應之碟片之光碟2。即,可確保反向相容性。
具體而言,亦可於H.264 AVC/MVC非對應解碼器中僅對Base view video之串流進行解碼(再生)。即,Base view video串流成為即便於現有之2D之BD播放器中,亦必定可再生之串流。
又,藉由於2D再生與3D再生中共通地使用Base view video串流,可實現製作時之負荷之減輕。於製作側,關於AV串流,除先前進行之作業以外,只要準備Dependent view video串流,便可製作3D對應之碟片。
圖31係表示記錄裝置中所設置之3D video TS生成部之構成例的圖。
圖31之3D video TS生成部係由MVC編碼器401、MVC標頭去除部402、以及多工器403構成。如參照圖2所說明般,將所拍攝之L view之影像#1之資料與R view之影像#2之資料輸入至MVC編碼器401中。
與圖3之MVC編碼器11同樣地,MVC編碼器401係以H.264/AVC對L view之影像#1之資料進行編碼,並將編碼後所獲得之AVC視訊資料作為Base view video串流而輸出。又,MVC編碼器401根據L view之影像#1之資料與R view之影像#2之資料而生成Dependent view video串流,並將其輸出。
自MVC編碼器401所輸出之Base view video串流包含儲存有Base view video之各畫面之資料的Access Unit。又,自MVC編碼器401所輸出之Dependent view video串流包含儲存有Dependent view video之各畫面之資料的Access Unit。
於構成Base view video串流之各Access Unit與構成Dependent view video串流之各Access Unit中,包含描述有用以識別所儲存之view component之view_id的MVC標頭。
作為Dependent view video之MVC標頭中所描述之view_id的值,可使用1以上之固定值。於圖32、圖33之例中亦相同。
即,MVC編碼器401與圖3之MVC編碼器11不同,其係以附加有MVC標頭之形式而生成並輸出Base view video與Dependent view video之各串流的編碼器。於圖3之MVC編碼器11中,僅於以H.264 AVC/MVC進行編碼之Dependent view video中附加有MVC標頭。
將自MVC編碼器401所輸出之Base view video串流提供給MVC標頭去除部402,將Dependent view video串流提供給多工器403。
MVC標頭去除部402去除構成Base view video串流之各Access Unit中所包含之MVC標頭。MVC標頭去除部402將由已去除MVC標頭之Access Unit所構成的Base view video串流輸出至多工器403。
多工器403生成包含自MVC標頭去除部402所提供之Base view video串流、以及自MVC編碼器401所提供之Dependent view video串流的TS,並將其輸出。於圖31之例中,分別輸出包含Base view video串流之TS與包含Dependent view video串流之TS,但亦存在如上所述般將該等串流多工於相同之TS後輸出之情形。
如此,根據安裝之方式,亦可考慮將L view之影像與R view之影像作為輸入,並輸出帶有MVC標頭之Base view video與Dependent view video之各串流的MVC編碼器。
再者,亦可如圖3所示般於MVC編碼器之中包含圖31所示之構成整體。於圖32、圖33所示之構成亦相同。
圖32係表示記錄裝置中所設置之3D video TS生成部之另一構成例的圖。
圖32之3D video TS生成部係由混合處理部411、MVC編碼器412、解交錯部413、MVC標頭去除部414、以及多工器415構成。L view之影像#1之資料與R view之影像#2之資料係輸入至混合處理部411中。
混合處理部411將L view之各畫面與R view之各畫面按編碼順序排列。Dependent view video之各畫面係參照所對應之Base view video之畫面來進行編碼,因此按編碼順序排列之結果係L view之畫面與R view之畫面交替地排列。
混合處理部411將按編碼順序排列之L view之畫面與R view之畫面輸出至MVC編碼器412。
MVC編碼器412以H.264 AVC/MVC對自混合處理部411所提供之各畫面進行編碼,並將編碼後所獲得之串流輸出至解交錯部413。於自MVC編碼器412所輸出之串流中,多工有Base view video串流與Dependent view video串流。
自MVC編碼器412所輸出之串流中所包含之Base view video串流包含儲存有Base view video之各畫面之資料的Access Unit。又,自MVC編碼器412所輸出之串流中所包含之Dependent view video串流包含儲存有Dependent view video之各畫面之資料的Access Unit。
於構成Base view video串流之各Access Unit與構成Dependent view video串流之各Access Unit中,包含描述有用以識別所儲存之view component之view_id的MVC標頭。
解交錯部413將自MVC編碼器412所提供之串流中經多工之Base view video串流與Dependent view video串流解交錯,並將其輸出。將自解交錯部413所輸出之Base view video串流提供給MVC標頭去除部414,將Dependent view video串流提供給多工器415。
MVC標頭去除部414去除構成自解交錯部413所提供之Base view video串流之各Access Unit中所包含的MVC標頭。MVC標頭去除部414將由已去除MVC標頭之Access Unit所構成之Base view video串流輸出至多工器415。
多工器415生成包含自MVC標頭去除部414所提供之Base view video串流、以及自解交錯部413所提供之Dependent view video串流的TS,並將其輸出。
圖33係表示記錄裝置中所設置之3D video TS生成部之又一構成例的圖。
圖33之3D video TS生成部係由AVC編碼器421、MVC編碼器422、以及多工器423構成。L view之影像#1之資料係輸入至AVC編碼器421中,R view之影像#2之資料係輸入至MVC編碼器422中。
AVC編碼器421以H.264 AVC/MVC對L view之影像#1之資料進行編碼,並將編碼後所獲得之AVC視訊串流作為Base view video串流輸出至MVC編碼器422與多工器423。於構成自AVC編碼器421所輸出之Base view video串流之各Access Unit中未包含MVC標頭。
MVC編碼器422對自AVC編碼器421所提供之Base view video串流(AVC視訊串流)進行解碼,而生成L view之影像#1之資料。
又,MVC編碼器422根據解碼後所獲得之L view之影像#1之資料與自外部所輸入之R view之影像#2之資料而生成Dependent view video串流,並將其輸出至多工器423。於構成自MVC編碼器422所輸出之Dependent view video串流之各Access Unit中包含MVC標頭。
多工器423生成包含自AVC編碼器421所提供之Base view video串流與自MVC編碼器422所提供之Dependent view video串流的TS,並將其輸出。
圖33之AVC編碼器421具有圖3之H.264/AVC編碼器21之功能,MVC編碼器422具有圖3之H.264/AVC解碼器22與Dependent view video編碼器24之功能。又,多工器423具有圖3之多工器25之功能。
藉由將具有此種構成之3D video TS生成部設置於記錄裝置內,可禁止對於儲存Base view video之資料之Access Unit的MVC標頭之編碼。又,可於儲存Dependent view video之資料之Access Unit中包含設定有1以上之view_id的MVC標頭。
圖34係包含對Access Unit進行解碼之再生裝置1側之構成的圖。
於圖34中表示了參照圖22等所說明之開關109與視訊解碼器110。自緩衝器中讀出包含Base view video之資料之Access Unit#1與包含Dependent view video之資料之Access Unit#2,並將其提供給開關109。
由於係參照Base view video而進行編碼,故為了準確地對Dependent view video進行解碼,首先需要對相對應之Base view video進行解碼。
於H.264/MVC標準中,解碼器側利用MVC標頭中所包含之view_id而計算各Access Unit之解碼順序。又,於Base view video中規定於其編碼時始終將最小值設定為view_id之值。解碼器自包含設定有最小之view_id之MVC標頭之Access Unit開始解碼,藉此可按準確之順序對Base view video與Dependent view video進行解碼。
但是,於提供給再生裝置1之視訊解碼器110之儲存有Base view video的Access Unit中禁止MVC標頭之編碼。
因此,於再生裝置1中,關於無MVC標頭之Access Unit中所儲存之view component,係以將其view_id視作0之方式來定義。
藉此,再生裝置1可根據視作0之view_id來識別Base view video,且可根據實際上所設定之0以外之view_id來識別Dependent view video。
圖34之開關109首先將識別為設定最小值之0作為view_id之Access Unit#1輸出至視訊解碼器110,並對其進行解碼。
又,開關109於Access Unit#1之解碼結束之後,將設定大於0之固定值Y作為view_id之Access Unit#2輸出至視訊解碼器110,並對其進行解碼。Access Unit#2中所儲存之Dependent view video之畫面係與Access Unit#1中所儲存之Base view video之畫面相對應的畫面。
如此,藉由禁止對於儲存有Base view video之Access Unit之MVC標頭的編碼,可使光碟2中所記錄之Base view video串流成為於先前之播放器中亦可再生之串流。
即便於規定如於先前之播放器中亦可再生之串流之條件來作為將BD-ROM標準擴展而成之BD-ROM 3D標準之Base view video串流的條件時,亦可滿足該條件。
例如,如圖35所示,於Base view video與Dependent view video中分別附加MVC標頭,並自Base view video起首先進行解碼之情形時,該Base view video成為於先前之播放器中無法再生者。對於先前之播放器所搭載之H.264/AVC解碼器而言,MVC標頭係未定義之資料。於輸入有此種未定義之資料之情形時,存在因解碼器無法忽視該未定義之資料,從而導致處理失敗之虞。
再者,於圖35中,Base view video之view_id為X,Dependent view video之view_id為大於X之Y。
又,即便於禁止MVC標頭之編碼之情形時,藉由以將Base view video之view_id視作0之方式來定義,亦可於再生裝置1中先進行Base view video之解碼,其後進行相對應之Dependent view video之解碼。即,可按準確之順序進行解碼。
[運用2]
關於GOP結構
於H.264/AVC標準中,未定義MPEG-2視訊標準中之GOP(Group Of Pictures)結構。
因此,於處理H.264/AVC視訊串流之BD-ROM標準中,定義H.264/AVC視訊串流之GOP結構,實現隨機存取等之利用GOP結構之各種功能。
於作為以H.264 AVC/MVC進行編碼所獲得之視訊串流之Base view video串流與Dependent view video串流中,亦與H.264/AVC視訊串流同樣地不存在GOP結構之定義。
Base view video串流為H.264/AVC視訊串流。因此,Base view video串流之GOP結構成為與BD-ROM標準中所定義之H.264/AVC視訊串流之GOP結構相同的結構。
關於Dependent view video串流之GOP結構,亦係作為與Base view video串流之GOP結構、即BD-ROM標準中所定義之H.264/AVC視訊串流之GOP結構相同的結構來定義。
BD-ROM標準中所定義之H.264/AVC視訊串流之GOP結構具有如下特徵。
1. 關於串流結構之特徵
(1) Open GOP/Closed GOP結構
圖36係表示Closed GOP結構之圖。
圖36之各畫面係構成H.264/AVC視訊串流之畫面。於Closed GOP中包含IDR(Instantaneous Decoding Refresh,瞬間解碼重新更新)畫面。
IDR畫面為I畫面,其於包含IDR畫面之GOP內最先被解碼。於IDR畫面之解碼時,重置參照畫面緩衝器(圖22之DPB 151)之狀態、及至此為止所管理之幀編號或POC(Picture Order Count)等之與解碼相關的所有資訊。
如圖36所示,於作為Closed GOP之當前GOP中,禁止上述當前GOP之畫面中之按顯示順序較IDR畫面更靠前面(之前)的畫面參照前一個GOP之畫面。
又,禁止當前GOP之畫面中之按顯示順序較IDR畫面更靠後面(之後)的畫面越過IDR畫面而參照前一個GOP之畫面。於H.264/AVC中,亦允許自按顯示順序位於I畫面之後之P畫面起,參照較該I畫面更靠前之畫面。
圖37係表示Open GOP結構之圖。
如圖37所示,於作為Open GOP之當前GOP中,允許上述當前GOP之畫面中之按顯示順序較non-IDR I畫面(並非IDR畫面之I畫面)更靠前之畫面參照前一個GOP之畫面。
又,禁止當前GOP之畫面中之按顯示順序較non-IDR I畫面更靠後之畫面越過non-IDR I畫面而參照前一個GOP之畫面。
(2) 於GOP之前導之Access Unit中,必定對SPS、PPS進行編碼。
SPS(Sequence Parameter Set,序列參數集)係包含與序列整體之編碼相關之資訊之序列的標頭資訊。於某序列之解碼時,首先需要包含序列之識別資訊等之SPS。PPS(Picture Parameter Set,畫面參數集)係包含與畫面整體之編碼相關之資訊之畫面的標頭資訊。
(3) 於GOP之前導之Access Unit中,可對最多30個之PPS進行編碼。當於前導之Access Unit中對複數個PPS進行編碼時,各PPS之id(pic_parameter_set_id)不能一樣。
(4) 於GOP之前導以外之Access Unit中,可對最多1個之PPS進行編碼。
2. 關於參照結構之特徵
(1) 要求I‧P‧B畫面分別為僅由I‧P‧B片層構成之畫面。
(2) 要求按顯示順序位於參照畫面(I或P畫面)前面之B畫面必須按編碼順序而於上述參照畫面之後立即進行編碼。
(3) 要求維持參照畫面(I或P畫面)之編碼順序與顯示順序(使其等相同)。
(4) 禁止自P畫面起參照B畫面。
(5) 按編碼順序,當非參照B畫面(B1)位於非參照畫面(B2)之前時,要求顯示順序亦為B1在前。
非參照B畫面係不被按編碼順序位於後面之其他畫面參照之B畫面。
(6) 參照B畫面可參照按顯示順序位於其前面或後面之參照畫面(I或P畫面)。
(7) 非參照B畫面可參照按顯示順序位於其前面或後面之參照畫面(I或P畫面)、或者參照B畫面。
(8) 要求使連續之B畫面之數量最多為3張。
3.關於GOP內之最大幀場數之特徵
GOP內之最大幀場數如圖38所示,係根據視訊之幀頻來規定。
如圖38所示,例如於以幀頻為29.97幀/秒進行交錯顯示之情形時,能夠以1GOP之畫面顯示之最大場數為60。又,於以幀頻為59.94幀/秒進行漸進顯示之情形時,能夠以1GOP之畫面顯示之最大場數為60。
亦將具有如上所述之特徵之GOP結構作為Dependent view video串流之GOP結構來定義。
又,規定使Base view video串流之某GOP之結構與對應之Dependent view video串流之GOP的結構一致,來作為限制。
圖39表示以上述方式定義之Base view video串流或Dependent view video串流之Closed GOP結構。
如圖39所示,於作為Closed GOP之當前GOP中,禁止上述當前GOP之畫面中之按顯示順序較IDR畫面或錨畫面更靠前(之前)的畫面參照前一個GOP之畫面。關於錨畫面於下文說明。
又,禁止當前GOP之畫面中之按顯示順序較IDR畫面或錨畫面更靠後(之後)的畫面越過IDR畫面或錨畫面而參照前一個GOP之畫面。
圖40係表示Base view video串流或Dependent view video串流之Open GOP結構之圖。
如圖40所示,於作為Open GOP之當前GOP中,允許上述當前GOP之畫面中之按顯示順序較non-IDR錨畫面(並非IDR畫面之錨畫面)更靠前之畫面參照前一個GOP之畫面。
又,禁止當前GOP之畫面中之按顯示順序較non-IDR錨畫面更靠後之畫面越過non-IDR錨畫面而參照前一個GOP之畫面。
藉由以上述方式定義GOP結構,例如Base view video串流之某GOP與相對應之Dependent view video串流之GOP之間是Open GOP,還是Closed GOP之類的串流結構之特徵變得一致。
又,如與Base view video之非參照B畫面對應之Dependent view video的畫面必定成為非參照B畫面般,畫面之參照結構之特徵亦變得一致。
進而,於Base view video串流之某GOP與相對應之Dependent view video串流之GOP之間,幀數、場數亦變得一致。
如此,藉由將Dependent view video串流之GOP結構作為與Base view video串流之GOP結構相同之結構來定義,可使串流間之相對應之GOP彼此具有相同的特徵。
又,即便於如自串流之中途進行解碼之情形時,亦可無問題地進行解碼。自串流之中途之解碼例如於隨時點播或隨機存取時進行。
於如幀數不同般,串流間之相對應之GOP彼此之結構不同的情形時,有可能產生其中一串流可正常地再生,而另一串流無法再生之情形,但該情形可得到防止。
於使串流間之相對應之GOP彼此之結構不同而自串流之中途開始解碼的情形時,亦有可能產生於Dependent view video之解碼所必需之Base view video之畫面未被解碼之情形。該情形時,作為結果,無法對Dependent view video之畫面進行解碼,而無法進行3D顯示。又,根據安裝之方法,存在Base view video之圖像亦無法輸出之可能性,但該等不良情況亦可避免。
關於EP_map
藉由利用Base view video串流與Dependent view video串流之GOP結構,可於EP_map中設定隨機存取或隨時點播時之解碼之開始位置。EP_map係包含於Clip Information檔案中。
作為解碼開始位置而可設定於EP_map中之畫面之限制,規定有如下2個。
1. 將可設定於Dependent view video串流中之位置,作為後接SubsetSPS而配置之錨畫面之位置、或後接SubsetSPS而配置之IDR畫面之位置。
錨畫面係由H.264 AVC/MVC所規定之畫面,且係不進行時間方向之參照、而進行view間之參照並經編碼之Dependent view video串流之畫面。
2. 於將Dependent view video串流之某畫面作為解碼開始位置而設定於EP_map中之情形時,相對應之Base view video串流之畫面亦作為解碼開始位置而設定於EP_map中。
圖41係表示滿足上述2個限制之EP_map中設定之解碼開始位置之例的圖。
於圖41中,按解碼順序而表示構成Base view video串流之畫面與構成Dependent view video串流之畫面。
Dependent view video串流之畫面中之附上顏色而表示之畫面P1 為錨畫面或IDR畫面。於包含畫面P1 之資料之Access Unit之前的Access Unit中包含SubsetSPS。
於圖41之例中,如由中空箭頭#11所示般,畫面P1 係於Dependent view video串流之EP_map中作為解碼開始位置而設定。
與畫面P1 對應之作為Base view video串流之畫面的畫面P11 為IDR畫面。如由中空箭頭#12所示般,作為IDR畫面之畫面P11 亦於Base view video串流之EP_map中作為解碼開始位置而設定。
於因指示隨機存取或隨時點播,而自畫面P1 與畫面P11 開始解碼之情形時,首先進行畫面P11 之解碼。由於係IDR畫面,故可不參照其他畫面而對畫面P11 進行解碼。
於畫面P11 之解碼結束時,接下來對畫面P1 進行解碼。於畫面P1 之解碼時參照已解碼之畫面P11 。由於為錨畫面或IDR畫面,因此只要畫面P11 之解碼結束,便可進行畫面P1 之解碼。
其後,按Base view video之畫面P1 之下一個畫面、Dependent view video之畫面P11 之下一個畫面、…之順序進行解碼。
由於相對應之GOP之結構相同,且自相對應之位置開始解碼,因此無論是Base view video還是Dependent view video,均可無問題地對EP_map中所設定之畫面之後的畫面進行解碼。藉此可實現隨機存取。
圖41之垂直方向所示之排列於較虛線更靠左側之畫面係非解碼之畫面。
圖42係表示於不定義Dependent view video之GOP結構之情形時所產生之問題的圖。
於圖42之例中,附上顏色來表示之Base view video之IDR畫面即畫面P21 係作為解碼開始位置而設定於EP_map中。
於自Base view video之畫面P21 開始解碼之情形時,考慮與畫面P21 對應之Dependent view video之畫面即畫面P31 並非錨畫面的情形。於未定義GOP結構之情形時,不保證與Base view video之IDR畫面對應之Dependent view video的畫面為IDR畫面或錨畫面。
該情形時,即便於Base view video之畫面P21 之解碼結束時,亦無法對畫面P31 進行解碼。於畫面P31 之解碼時亦需要時間方向之參照,垂直方向所示之較點線更靠左側(按解碼順序為前面)之畫面未被解碼。
由於無法對畫面P31 進行解碼,因此亦無法對參照畫面P31 之Dependent view video之其他畫面進行解碼。
藉由預先定義Dependent view video串流之GOP結構,可避免此種情況。
不僅對於Base view video,而且對於Dependent view video亦於EP_map中預先設定解碼開始位置,藉此再生裝置1可容易地確定解碼之開始位置。
於僅將Base view video之某畫面作為解碼開始位置預先設定於EP_map中之情形時,再生裝置1必須藉由計算而確定與解碼開始位置之畫面對應之Dependent view video之畫面,從而導致處理變得複雜。
即便相對應之Base view video與Dependent view video之畫面彼此具有相同的DTS/PTS,當視訊之位元率不同時,無法達到使TS中之位元組排列一致之程度,因此該情形時處理變得複雜。
圖43係表示進行以包含Base view video串流與Dependent view video串流之MVC串流為對象之隨機存取或隨時點播時成為必需的畫面查找之概念之圖。
如圖43所示,於進行隨機存取或隨時點播時,查找non-IDR錨畫面或IDR畫面,而決定解碼開始位置。
此處,對EP_map進行說明。對將Base view video之解碼開始位置設定於EP_map中之情形進行說明,但關於Dependent view video之解碼開始位置,亦同樣地將其設定於Dependent view video之EP_map中。
圖44係表示光碟2上所記錄之AV串流之結構的圖。
包含Base view video串流之TS係由具有6144個位元組之尺寸之整數個對準單元(Aligned Unit)構成。
對準單元包含32個源包(Source Packet)。源包具有192個位元組。1個源包包含4個位元組之傳送包額外標頭(TP_extra header)與188個位元組之傳送包(Transport Packet)。
將Base view video之資料封包化為MPEG2 PES封包。於PES封包之資料部附加PES封包標頭而形成PES封包。於PES封包標頭中包含確定PES封包所傳送之基本串流之類型的串流ID。
將PES封包進而封包化為傳送包。即,將PES封包分割成傳送包之有效負載之尺寸,於有效負或中附加傳送包標頭而形成傳送包。傳送包標頭包含作為有效負載中所儲存之資料之識別資訊的PID。
再者,於源包中,將Clip AV串流之前導例如設為0,賦予對應每個源包而每次增加1之源包編號。又,對準單元係自源包之第1個位元組開始。
EP_map用以當提供有Clip之存取點之時間戳記時,檢索應於Clip AV串流檔案之中開始資料之讀出的資料位址。EP_map係自基本串流及運輸串流所提取之入口點之清單。
EP_map具有用以檢索應在AV串流之中開始解碼之登入點之位址資訊。EP_map中之1個EP資料係由PTS、以及與PTS對應之Access Unit之於AV串流中的位址所組成之對而構成。於AVC/H.264中,1個Access Unit中儲存1個畫面之資料。
圖45係表示Clip AV串流之例之圖。
圖45之Clip AV串流係包含以PID=x識別之源包之視訊串流(Base view video串流)。視訊串流係對應每個源包而藉由源包內之傳送封包之標頭所含的PID來加以區分。
於圖45中,對視訊串流之源包中之包含IDR畫面之前導位元組的源包附上顏色。未附上顏色之四角表示包含並非隨機存取點之資料的源包、或包含其他串流之資料之源包。
例如,包含以PID=x而區分之視訊串流之可隨機存取之IDR畫面之前導位元組之源包編號為X1的源包,於Clip AV串流之時間軸上係配置於PTS=pts(x1)之位置處。
同樣地,接下來將包含可隨機存取之IDR畫面之前導位元組的源包設定為源包編號為X2之源包,並將其配置於PTS=pts(x2)之位置處。
圖46係概念性地表示與圖45之Clip AV串流相對應之EP_map之例的圖。
如圖46所示,EP_map係由stream_PID、PTS_EP_start、以及SPN_EP_start構成。
stream_PID表示傳送視訊串流之傳送包之PID。
PTS_EP_start表示自可隨機存取之IDR畫面起開始之Access Unite之PTS。
SPN_EP_start表示包含藉由PTS_EP_start之值而參照之Access Unite之第1位元組之源包的位址。
將視訊串流之PID儲存於stream_PID中,生成作為表示PTS_EP_start與SPN_EP_start之對應關係之表格資訊的EP_map_for_one_stream_PID()。
例如,於PID=x之視訊串流之EP_map_for_one_stream_PID[0]中,PTS=pts(x1)與源包編號X1、PTS=pts(x2)與源包編號X2、...、PTS=pts(xk)與源包編號Xk分別對應地描述。
針對多工於相同之Clip AV串流之各個視訊串流亦生成此種表格。將包含所生成之表格之EP_map儲存於與該Clip AV串流相對應之Clip Information檔案中。
圖47係表示SPN_EP_start所指之源包之資料結構之例的圖。
如上所述,源包係以於188個位元組之傳送包中附加有4個位元組之標頭的形式而構成。傳送包部分包含標頭部(TP header)與有效負載部。SPN_EP_start表示包含自IDR畫面起開始之Access Unite之第1位元組之源包的源包編號。
於AVC/H.264中,Access Unit即畫面係自AU定界符(Access Unit Delimiter,存取單元定界符)起開始。於AU定界符之後接有SRS與PPS。於其後儲存IDR畫面之片層之資料的前導部分或整體。
位於傳送包之TP標頭之payload_unit_start_indicator的值為1表示自該傳送封包之有效負載起開始新的PES封包。自該源包起開始Access Unite。
針對Base view video串流與Dependent view video串流分別準備此種EP_map。
[運用3]
於構成Base view video串流與Dependent view video串流之各畫面中,在編碼時設定有POC(Picture Order Count)。POC係表示畫面之顯示順序之值。
於AVC/H.264中,將POC規定為「A variable having a value that is non-decreasing with increasing picture position in output order relative to the previous IDR picture in decoding order or relative to the previous picture containing the memory management control operation that marks all reference pictures as "unused for reference".」。
於編碼時,將Base view video串流之畫面中所設定之POC與Dependent view video串流之畫面中所設定之POC統一後加以運用。
例如,於按Base view video串流之顯示順序在第1個畫面中設定POC=1,其後,每次將值增加1而於各畫面中設定POC。
又,於按Dependent view video串流之顯示順序在第1個畫面中設定與Base view video串流之第1個畫面中所設定者相同之POC=1,其後,每次將值增加1而於各畫面中設定POC。
如上所述,Base view video串流之GOP結構與Dependent view video串流之GOP結構相同,因此於Base view video串流與Dependent view video串流之各畫面中,在顯示順序上相對應之畫面彼此係設定相同之POC。
藉此,再生裝置1可將設定有相同之POC之view component作為於顯示順序上相對應之view component來處理。
例如,再生裝置1可將Base view video串流之畫面中之設定有POC=1的畫面、以及Dependent view video串流之畫面中之設定有POC=1的畫面作為相對應之畫面來處理。
又,於構成Base view video串流與Dependent view video串流之各畫面中設定有Picture Timing SEI(Supplemental Enhancement Information,補充增強資訊)。SEI係由H.264/AVC所規定之包含與解碼相關之輔助資訊的附加資訊。
作為SEI之一的Picture Timing SEI中,包含編碼時之自CPB(Coded Picture Buffer,編碼畫面緩衝器)之讀出時刻、解碼時之自DPB(圖22之DPB 151)之讀出時刻等時刻資訊。又,包含顯示時刻之資訊、畫面結構之資訊等。
於編碼時,將Base view video串流之畫面中所設定之Picture Timing SEI與Dependent view video串流之畫面中所設定之Picture Timing SEI統一後加以運用。
例如,當於按Base view video串流之編碼順序為第1個畫面中設定T1作為自CPB之讀出時刻時,於按Dependent view video串流之編碼順序為第1個畫面中亦設定T1作為自CPB之讀出時刻。
即,於Base view video串流與Dependent view video串流之各畫面中,於編碼順序或解碼順序上相對應之畫面彼此係設定相同內容之Picture Timing SEI。
藉此,再生裝置1可將設定有相同之Picture Timing SEI之view component作為於解碼順序上相對應之view component來處理。
POC、Picture Timing SEI係包含於Base view video與Dependent view video之基本串流中,並在再生裝置1中被視訊解碼器110參照。
視訊解碼器110可根據基本串流中所包含之資訊,來識別相對應之view component。又,視訊解碼器110可根據Picture Timing SEI以準確之解碼順序而進行解碼處理,又,能夠以根據POC成為準確之顯示順序之方式而進行解碼處理。
由於不需要為識別相對應之view component而參照PlayList等,故可應對於System Layer(系統層)或其以上之Layer(層)上產生問題之情形。又,亦可實現不依賴於已出現問題之Layer之解碼器安裝。
上述一系列之處理可藉由硬體執行,亦可藉由軟體執行。於藉由軟體執行一系列之處理之情形時,構成該軟體之程式係自程式記錄媒體而安裝至專用硬體中所組裝之電腦、或通用之個人電腦等中。
圖48係表示利用程式而執行上述一系列之處理之電腦的硬體之構成例的方塊圖。
CPU(Central Processing Unit,中央處理單元)501、ROM(Read Only Memory,唯讀記憶體)502、RAM(Random Access Memory,隨機存取記憶體)503係藉由匯串流排504而相互連接。
於匯串流排504上進而連接有輸入輸出介面505。於輸入輸出介面505上連接有包含鍵盤、滑鼠等之輸入部506,包含顯示器、揚聲器等之輸出部507。又,於匯串流排504上連接包含硬碟或非揮發性之記憶體等之儲存部508、包含網路介面等之通訊部509、驅動可移除式媒體511之驅動器510。
於以上述方式所構成之電腦中,CPU 501例如將儲存部508中所儲存之程式經由輸入輸出介面505及匯串流排504而加載至RAM 503中並執行,藉此進行上述一系列之處理。
CPU 501所執行之程式例如記錄於可移除式媒體511中,或者經由區域網路、網際網路、數位廣播之類之有線或無線之傳送媒體而提供,並安裝於儲存部508中。
再者,電腦所執行之程式可為依照本說明書中所說明之順序而時間序列地進行處理之程式,亦可為並列地或以進行調用時等必要時序而進行處理之程式。
本發明之實施形態並不限定於上述實施形態,可於不脫離本發明之主旨之範圍內進行各種變更。
1...再生裝置
2...光碟
3...顯示裝置
11...MVC編碼器
21...H.264/AVC編碼器
22...H.264/AVC解碼器
23...Depth計算部
24...Dependent view video編碼器
25...多工器
51...控制器
52...光碟驅動器
53...記憶體
54...局部儲存器
55...網際網路介面
56...解碼部
57...操作輸入部
圖1係表示包含應用本發明之再生裝置之再生系統之構成例的圖。
圖2係表示拍攝之例之圖。
圖3係表示MVC編碼器之構成例之方塊圖。
圖4係表示參照圖像之例之圖。
圖5係表示TS之構成例之圖。
圖6係表示TS之另一構成例之圖。
圖7A、B係表示TS之又一構成例之圖。
圖8係表示AV串流之管理之例之圖。
圖9係表示Main Path與Sub Path之結構之圖。
圖10係表示光碟中所記錄之檔案之管理結構之例的圖。
圖11係表示PlayList檔案之語法之圖。
圖12係表示圖11中之reserved_for_future_use之用法之例的圖。
圖13係表示3D_PL_type之值之含義的圖。
圖14係表示view_type之值之含義的圖。
圖15係表示圖11之PlayList()之語法的圖。
圖16係表示圖15之SubPath()之語法的圖。
圖17係表示圖16之SubPlayItem(i)之語法的圖。
圖18係表示圖15之PlayItem()之語法的圖。
圖19係表示圖18之STN_table()之語法的圖。
圖20係表示再生裝置之構成例之方塊圖。
圖21係表示圖20之解碼部之構成例的圖。
圖22係表示進行視訊串流之處理之構成的圖。
圖23係表示進行視訊串流之處理之構成的圖。
圖24係表示進行視訊串流之處理之另一構成的圖。
圖25係表示Access Unit之例之圖。
圖26係表示進行視訊串流之處理之又一構成的圖。
圖27係表示合成部與其前段之構成之圖。
圖28係表示合成部與其前段之構成之圖。
圖29係表示軟體製作處理部之構成例之方塊圖。
圖30係表示包含軟體製作處理部之各構成之例的圖。
圖31係表示記錄裝置中所設置之3D video TS生成部之構成例的圖。
圖32係表示記錄裝置中所設置之3D video TS生成部之另一構成例的圖。
圖33係表示記錄裝置中所設置之3D video TS生成部之又一構成例的圖。
圖34係表示對Access Unit進行解碼之再生裝置側之構成的圖。
圖35係表示解碼處理之圖。
圖36係表示Close GOP結構之圖。
圖37係表示Open GOP結構之圖。
圖38係表示GOP內之最大幀場數之圖。
圖39係表示Close GOP結構之圖。
圖40係表示Open GOP結構之圖。
圖41係表示EP_map中所設定之解碼開始位置之例的圖。
圖42係表示於不定義Dependent view video之GOP結構之情形時所產生之問題的圖。
圖43係表示畫面查找之概念之圖。
圖44係表示光碟上所記錄之AV串流之結構的圖。
圖45係表示Clip AV串流之例之圖。
圖46係概念性地表示與圖45之Clip AV串流相對應之EP_map的圖。
圖47係表示SPN_EP_start所指之源包之資料結構之例的圖。
圖48係表示電腦之硬體之構成例的方塊圖。
109...開關
110...視訊解碼器

Claims (9)

  1. 一種記錄裝置,其包括編碼機構,該編碼機構以特定之編碼方式對複數個視點之影像資料進行編碼,並輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之上述識別資訊之上述資料標頭之資料的擴展圖像串流。
  2. 如請求項1之記錄裝置,其中上述編碼機構自以特定之編碼方式對複數個視點之影像資料進行編碼而獲得的包含附加有上述資料標頭之資料之上述基本圖像串流中去除上述資料標頭,並輸出包含未附加上述資料標頭之資料的上述基本圖像串流。
  3. 如請求項1之記錄裝置,其中上述編碼機構於上述資料標頭中設定1以上之值作為表示係擴展視點之資料之上述識別資訊,並輸出上述擴展圖像串流。
  4. 一種記錄方法,其包含如下步驟:以特定之編碼方式對複數個視點之影像資料進行編碼,並輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之上述識別資訊之上述資料標頭之資料的擴展圖像串流。
  5. 一種使電腦執行包含如下步驟之處理之程式:以特定之編碼方式對複數個視點之影像資料進行編碼,並輸出包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之上述識別資訊之上述資料標頭之資料的擴展圖像串流。
  6. 一種記錄媒體,其記錄有以特定之編碼方式對複數個視點之影像資料進行編碼而獲得之基本圖像串流及擴展圖像串流,該基本圖像串流係包含未附加含有視點之識別資訊之資料標頭之資料,該擴展圖像串流係包含附加含有表示係擴展視點之資料之上述識別資訊之上述資料標頭之資料。
  7. 一種再生裝置,其包括:讀出機構,其自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得的包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料的擴展圖像串流;以及解碼機構,其係自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理者,其將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
  8. 一種再生方法,其包含如下步驟:自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得的包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料的擴展圖像串流;於自作為上述識別資訊而設定於上述資料標頭中之值較小之視點之資料起依序進行處理之情形時,將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
  9. 一種使電腦執行包含如下步驟之處理之程式:自記錄媒體中讀出以特定之編碼方式對複數個視點之影像資料進行編碼而獲得的包含未附加含有視點之識別資訊之資料標頭之資料的基本圖像串流、及包含附加含有表示係擴展視點之資料之1以上之值的上述識別資訊之上述資料標頭之資料的擴展圖像串流;於自作為上述識別資訊而設定於上述資料標頭中之值較小之視點的資料起依序進行處理的情形時,將未附加上述資料標頭之上述基本圖像串流之資料作為於上述資料標頭中設定0之值作為上述識別資訊之資料,並於上述擴展圖像串流之資料之前,對上述基本圖像串流之資料進行解碼。
TW99108725A 2009-04-08 2010-03-24 A recording apparatus, recording method, reproducing apparatus, reproducing method, recording medium and program TWI444042B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009094254A JP4962525B2 (ja) 2009-04-08 2009-04-08 再生装置、再生方法、およびプログラム

Publications (2)

Publication Number Publication Date
TW201041390A TW201041390A (en) 2010-11-16
TWI444042B true TWI444042B (zh) 2014-07-01

Family

ID=42936181

Family Applications (1)

Application Number Title Priority Date Filing Date
TW99108725A TWI444042B (zh) 2009-04-08 2010-03-24 A recording apparatus, recording method, reproducing apparatus, reproducing method, recording medium and program

Country Status (15)

Country Link
US (1) US9088775B2 (zh)
EP (1) EP2285127B1 (zh)
JP (1) JP4962525B2 (zh)
KR (1) KR20120006431A (zh)
CN (2) CN102625122B (zh)
AU (1) AU2010235599B2 (zh)
BR (1) BRPI1002816A2 (zh)
CA (1) CA2724974C (zh)
ES (1) ES2526578T3 (zh)
HK (1) HK1157551A1 (zh)
MX (1) MX2010013210A (zh)
MY (1) MY156159A (zh)
RU (1) RU2525483C2 (zh)
TW (1) TWI444042B (zh)
WO (1) WO2010116895A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8885709B2 (en) 2008-09-18 2014-11-11 Panasonic Corporation Image decoding device, image coding device, image decoding method, image coding method, and program
JP2011199396A (ja) * 2010-03-17 2011-10-06 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム
KR101831775B1 (ko) 2010-12-07 2018-02-26 삼성전자주식회사 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
US9491437B2 (en) 2010-12-07 2016-11-08 Samsung Electronics Co., Ltd. Transmitter for transmitting data for constituting content, receiver for receiving and processing data, and method therefor
JPWO2012169204A1 (ja) * 2011-06-08 2015-02-23 パナソニック株式会社 送信装置、受信装置、送信方法及び受信方法
US20140160238A1 (en) * 2011-07-29 2014-06-12 University-Industry Cooperation Group Of Kyung Hee University Transmission apparatus and method, and reception apparatus and method for providing 3d service using the content and additional image seperately transmitted with the reference image transmitted in real time
US10447990B2 (en) 2012-02-28 2019-10-15 Qualcomm Incorporated Network abstraction layer (NAL) unit header design for three-dimensional video coding
US9014255B2 (en) * 2012-04-03 2015-04-21 Xerox Corporation System and method for identifying unique portions of videos with validation and predictive scene changes
PL2843945T3 (pl) 2012-04-23 2020-07-27 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów, urządzenie do dekodowania obrazów oraz urządzenie do kodowania/dekodowania obrazów

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US429072A (en) * 1890-05-27 Machine for cutting circular plates
US353144A (en) * 1886-11-23 Table-corner
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
WO1998025413A1 (en) * 1996-12-04 1998-06-11 Matsushita Electric Industrial Co., Ltd. Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device
EP1011268B1 (en) 1997-08-29 2010-03-03 Panasonic Corporation Optical disk having hierarchically encoded digital video recorded thereon, reproducing and recording apparatuses therefor
JP4051841B2 (ja) * 1999-12-01 2008-02-27 ソニー株式会社 画像記録装置および方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
AU2003231508A1 (en) * 2002-04-25 2003-11-10 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
JP3707685B2 (ja) * 2002-05-08 2005-10-19 ソニー株式会社 光ディスク装置、光ディスクの記録方法、光ディスクの記録方法のプログラム及び光ディスクの記録方法のプログラムを記録した記録媒体
JP2003333505A (ja) * 2002-05-14 2003-11-21 Pioneer Electronic Corp 記録媒体、映像記録装置、映像再生装置及び映像記録再生装置
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
EP1713276B1 (en) * 2004-02-06 2012-10-24 Sony Corporation Information processing device, information processing method, program, and data structure
JP4608953B2 (ja) 2004-06-07 2011-01-12 ソニー株式会社 データ記録装置、方法およびプログラム、データ再生装置、方法およびプログラム、ならびに、記録媒体
JP2006238373A (ja) * 2005-02-28 2006-09-07 Sony Corp 符号化装置および方法、復号装置および方法、画像処理システムおよび画像処理方法、記録媒体、並びにプログラム
KR100931871B1 (ko) * 2005-04-13 2009-12-15 노키아 코포레이션 비디오 데이터의 효과적인 fgs 부호화 및 복호화를 위한방법, 장치, 시스템
WO2007010779A1 (ja) * 2005-07-15 2007-01-25 Matsushita Electric Industrial Co., Ltd. パケット送信装置
JP4638784B2 (ja) * 2005-07-19 2011-02-23 オリンパスイメージング株式会社 画像出力装置及びプログラム
EP1806930A1 (en) * 2006-01-10 2007-07-11 Thomson Licensing Method and apparatus for constructing reference picture lists for scalable video
WO2007081176A1 (en) * 2006-01-12 2007-07-19 Lg Electronics Inc. Processing multiview video
US8767836B2 (en) * 2006-03-27 2014-07-01 Nokia Corporation Picture delimiter in scalable video coding
MX2008012382A (es) * 2006-03-29 2008-11-18 Thomson Licensing Metodos y aparatos para usarse en un sistema de codificacion de video de multiples vistas.
EP2005752A4 (en) * 2006-03-30 2010-06-09 Lg Electronics Inc METHOD AND APPARATUS FOR DECODING / ENCODING A VIDEO SIGNAL
KR101137347B1 (ko) * 2006-05-11 2012-04-19 엘지전자 주식회사 이동통신 단말기 및 그 단말기를 이용한 이미지 표출 방법
CN101578884B (zh) * 2007-01-08 2015-03-04 诺基亚公司 提供和使用译码的媒体流的互操作点的预定信令的系统和方法
KR101396948B1 (ko) * 2007-03-05 2014-05-20 경희대학교 산학협력단 하이브리드 다시점 및 계층화 비디오 코딩 방법과 장치
JP2008252740A (ja) 2007-03-30 2008-10-16 Sony Corp リモートコマンダおよびコマンド発生方法、再生装置および再生方法、プログラム、並びに、記録媒体
SI3264780T1 (sl) * 2007-04-18 2020-08-31 Dolby International Ab Kodirni sistemi, pri katerih se uporablja dodatni niz sekvenčnih parametrov za skalabilno kodiranje videa ali večpogledno kodiranje
WO2008140190A1 (en) * 2007-05-14 2008-11-20 Samsung Electronics Co, . Ltd. Method and apparatus for encoding and decoding multi-view image
JP4720785B2 (ja) * 2007-05-21 2011-07-13 富士フイルム株式会社 撮像装置、画像再生装置、撮像方法及びプログラム
KR101388265B1 (ko) * 2007-06-11 2014-04-22 삼성전자주식회사 2d 영상 미디어 표준을 기반으로 3d 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법
US20080317124A1 (en) * 2007-06-25 2008-12-25 Sukhee Cho Multi-view video coding system, decoding system, bitstream extraction system for decoding base view and supporting view random access
CN101222630B (zh) * 2007-11-30 2010-08-18 武汉大学 一种实现实时双帧参考的时域可分级视频编码方法
KR101506217B1 (ko) * 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
US8565576B2 (en) * 2008-05-01 2013-10-22 Panasonic Corporation Optical disc for reproducing stereoscopic video image
RU2502214C2 (ru) 2008-09-30 2013-12-20 Панасоник Корпорэйшн Носитель записи, устройство воспроизведения, системная бис, способ воспроизведения, очки и устройство отображения для трехмерных изображений
US8947504B2 (en) * 2009-01-28 2015-02-03 Lg Electronics Inc. Broadcast receiver and video data processing method thereof
JP2010244630A (ja) * 2009-04-07 2010-10-28 Sony Corp 情報処理装置、情報処理方法、プログラム、及び、データ構造
CA2718447C (en) * 2009-04-28 2014-10-21 Panasonic Corporation Image decoding method, image coding method, image decoding apparatus, and image coding apparatus
US20120212579A1 (en) * 2009-10-20 2012-08-23 Telefonaktiebolaget Lm Ericsson (Publ) Method and Arrangement for Multi-View Video Compression
PL2596637T3 (pl) * 2010-07-21 2021-12-13 Dolby Laboratories Licensing Corporation Systemy i sposoby dostarczania wielowarstwowego wideo zgodnego z ramką
US20120219069A1 (en) * 2011-02-28 2012-08-30 Chong Soon Lim Methods and apparatuses for encoding and decoding images of a plurality of views using multiview video coding standard and mpeg-2 video standard

Also Published As

Publication number Publication date
JP4962525B2 (ja) 2012-06-27
MX2010013210A (es) 2010-12-21
KR20120006431A (ko) 2012-01-18
EP2285127A1 (en) 2011-02-16
CA2724974C (en) 2014-08-19
MY156159A (en) 2016-01-15
EP2285127B1 (en) 2014-11-19
CN102625122B (zh) 2016-05-04
JP2010245968A (ja) 2010-10-28
TW201041390A (en) 2010-11-16
ES2526578T3 (es) 2015-01-13
RU2010149262A (ru) 2012-06-10
CN102047673B (zh) 2016-04-13
HK1157551A1 (zh) 2012-06-29
BRPI1002816A2 (pt) 2016-02-23
WO2010116895A1 (ja) 2010-10-14
US9088775B2 (en) 2015-07-21
RU2525483C2 (ru) 2014-08-20
AU2010235599A1 (en) 2010-10-14
AU2010235599B2 (en) 2015-03-26
CA2724974A1 (en) 2010-10-14
CN102625122A (zh) 2012-08-01
US20110081131A1 (en) 2011-04-07
EP2285127A4 (en) 2013-03-13
CN102047673A (zh) 2011-05-04

Similar Documents

Publication Publication Date Title
TWI428016B (zh) A playback device, a playback method, and a recording method
TWI458337B (zh) Information processing apparatus, information processing method, reproducing apparatus, and reproducing method
JP4957823B2 (ja) 再生装置および再生方法
TWI444042B (zh) A recording apparatus, recording method, reproducing apparatus, reproducing method, recording medium and program
JP5267886B2 (ja) 再生装置、記録媒体、および情報処理方法
JP2010245970A (ja) 再生装置、再生方法、およびプログラム
TWI444034B (zh) Reproducing apparatus and reproducing method
JP4984192B2 (ja) 記録方法
JP4984193B2 (ja) 再生装置、再生方法、および記録方法
JP4993233B2 (ja) 記録方法
JP4993234B2 (ja) 再生装置、再生方法、および記録方法
JP4985882B2 (ja) 記録方法
JP4993044B2 (ja) 再生装置、再生方法、および記録方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees