CN101803394A - 存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法 - Google Patents

存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法 Download PDF

Info

Publication number
CN101803394A
CN101803394A CN200880025524A CN200880025524A CN101803394A CN 101803394 A CN101803394 A CN 101803394A CN 200880025524 A CN200880025524 A CN 200880025524A CN 200880025524 A CN200880025524 A CN 200880025524A CN 101803394 A CN101803394 A CN 101803394A
Authority
CN
China
Prior art keywords
information
int
unsigned
content
square frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200880025524A
Other languages
English (en)
Inventor
尹国镇
曹叔嬉
许南淏
金镇雄
李寿寅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of CN101803394A publication Critical patent/CN101803394A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components

Abstract

提供一种存储立体内容的方法。所述方法包括：将与立体内容的片段信息相关的立体视频媒体信息存储为再现该立体内容所需的元数据信息，并存储立体内容的基本流。

Description

存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法
技术领域
本发明涉及一种存储和再现立体数据的元数据结构以及使用该元数据存储立体内容文件的方法；更具体地，涉及一种当二维(2D)和三维(3D)内容被一起提供时所需的元数据结构(控制信息)，以及使用该元数据存储立体内容的方法。
本工作由MIC/IITA[2005-S-403-02，“超级智能多媒体随时随地真实感电视(SmarTV)技术的开发”]的ITR&D计划支持。
背景技术
基于移动电话、数字相机、数字化视频盘(DVD)和PDP，国内和国际性地使用立体内容和相关装置的应用服务的市场已经形成。因此，需要定义用于对立体内容进行采集、存储和再现的系统信息或控制信息(元数据)的标准及包括该标准的文件格式。
第2006-0056070号韩国专利公开(题目：使用MPEG-4对象描述符和结构来处理3D运动图像的设备和方法；以下将称作第一专利)公开了具有新信息(诸如3D运动图像的类型、各种显示类型以及视点)的3D运动图像对象描述符。第2006-0100258号韩国专利公开(题目：传输立体图像数据的方法；以下将称作第二专利)为了用于立体内容的解码的视频数据，提供一种文件格式，所述文件格式为包括视频数据单元(包括立体图像信息)和头单元(包括用于对立体图像信息进行解码和再现的元数据)的文件格式。
然而，所述第一和第二专利没有介绍：当2D内容或3D内容被一起组织和提供时(即，当2D内容或3D内容被一起使用时)用于识别内容的方法，当3D内容具有不同的立体相机和显示信息时提供立体相机和显示信息的方法以及当3D内容由两个基本流形成时提供立体轨迹(track)参考信息的方法。
发明内容
技术问题
本发明的实施例旨在提供一种存储立体内容的方法。
本发明的另一实施例旨在提供一种当在各种3D终端环境中对2D内容和3D内容进行下载和再现来识别2D和3D内容并通过自动地开启/关闭视差栅来对识别的2D内容和3D内容进行显示时，存储立体内容的方法。
本发明的另一实施例还旨在提供一种当立体内容具有不同的立体相机和显示信息时，通过片段来存储立体相机/显示信息的方法。
本发明的另一实施例还旨在提供一种存储立体内容的方法，所述方法用于当立体内容具有两个基本流时识别主要/附加轨迹；并且在与典型的2D终端保持兼容性的同时去除每个轨迹中包括和使用的立体相机/显示信息的冗余。
本发明的其他目的和优点可通过参考下面的描述来理解，并且通过参考本发明的实施例变得清楚。此外，对本发明所属领域的技术人员显而易见的是，本发明的目的和优点可通过如权利要求及其组合的方式来实现。
技术方案
根据本发明的一方面，提供一种存储立体内容的方法，包括：将与立体内容的片段信息相关的立体视频媒体信息存储为再现该立体内容所需的元数据信息，并存储所述立体内容的基本流。
根据本发明的另一方面，提供一种存储立体内容的文件格式结构，包括：媒体数据方框，用于存储立体内容的基本流；以及用于存储与立体内容的片段信息相关的立体视频媒体信息的方框。
有益效果
根据本发明，可方便地存储和提供由2D内容和3D内容形成的立体内容。用户可通过2D内容和3D内容定界符信息自动地将视差栅由2D显示变成3D显示来方便地欣赏立体内容。
附图说明
图1是示出提供立体内容的各种内容构成类型的示图。
图2是示出当存在MPEG-4系统信息时根据本发明实施例的立体视频应用格式的基本文件格式的示图。
图3是示出当不存在MPEG-4系统信息时根据本发明实施例的立体视频应用格式的基本文件格式的示图。
图4是示出当存在MPEG-4系统信息时根据本发明第一实施例的立体视频应用格式的示图。
图5是示出当不存在MPEG-4系统信息时根据本发明第一实施例的立体视频应用格式的示图。
图6是示出根据本发明实施例的具有包括在“moov”方框中的“ishd”方框的存储格式的示图。图6中，示图(a)示出由一个源形成的3D内容的格式，示图(b)示出由两个源形成的3D内容的格式。
图7是示出根据本发明实施例的具有包括在“mdat”方框中的“ishd”方框的存储格式的示图。图7中，示图(a)示出由一个源形成的3D内容，示图(b)示出由两个源形成的3D内容。
图8是示出根据本发明实施例的包括“ishd”和“meta”的存储格式的示图。图8中，示图(a)示出由一个源形成的3D内容，示图(b)示出由两个源形成的3D内容。
图9是示出根据本发明实施例的包括“ishd”方框和LASeR的格式的示图。图9中，示图(a)示出包括“ishd”方框和包括在“moov”方框中的LASeR的格式，示图(b)示出包括包括在“moov”方框中的“ishd”方框和包括在“mdat”方框中的LASeR的格式，示图(c)具有包括在“meta”方框中的“ishd”和LASeR。
图10是根据本发明实施例的当ES＝1时包括“ishd”方框和“iloc”方框的SS-VAF的示图。
图11是根据本发明实施例的包括“ishd”方框和“iloc”方框的SS-VAF的示图。
图12(a)示出AVC中的SEI的基本结构中包括“立体视频信息SEI”和“reserved_sei_message”的部分，图12(b)示出AVC流中SEI的位置。
图13是示出根据本发明实施例的使用“立体视频信息SEI”和“reserved_sei_message”的SS-VAF的示图。
图14是示出当ES＝2时在内容仅由单一格式立体流形成的情况下根据本发明实施例的具有“tref”、“ishd”和“iloc”方框的SS-VAF的示图。
图15是示出根据本发明实施例的具有“tref”、“ishd”和“iloc”方框的SS-VAF的示图。
图16是示出根据本发明实施例的存储立体内容的方法的流程图。
图17是示出根据本发明另一实施例的存储立体内容的方法的流程图。
图18是示出根据本发明另一实施例的存储立体内容的方法的流程图。
具体实施方式
图1是示出提供立体内容的各种内容构成的示图。图1的示图(a)示出具有一个基本流ES(ES＝1)的内容的格式，图1的示图(b)示出具有两个基本流ES(ES＝2)的内容的格式。单一格式是当立体图像形成方案相同时并且当仅包括一个相机参数和一个显示信息时的内容的格式。多重格式是当立体图像形成方案不同时，或当虽然立体图像形成方案相同但是相机参数不同时，或当包括多个显示信息或其他信息时的格式。
立体内容类型包括：(i)诸如双眼3D视频服务的立体视频内容；(ii)诸如双眼3D静止图像服务(例如，放映幻灯片)、2D(单像mono)视频和3D数据服务(预定的场景或部分)的组合的立体图像内容；(iii)诸如2D(单像)视频和3D视频(预定的场景或部分)的组合的单像和立体混合的内容。
图2和图3示出根据本发明实施例的立体视频应用格式(SS-VAF)的基本结构。
图2是包括MPEG-4系统信息的文件格式结构。图3是不包括MPEG-4系统信息的文件格式结构。如图所示，SS-VAF包括“ftyp”方框、“moov”方框和“mdat”方框。以下，将描述SS-VAF的多个方框的语法和语义。根据本实施例的方框被包括在SS-VAF的结构中，可根据其类型来改变其位置，可独立使用方框中包括的信息。
1.“scty”(立体内容类型)
“scty”表示内容的基本类型。也就是说，通过“scty”将内容分类为单像内容或立体内容。这里，单像内容表示普通2D图像。表1示出“scty”的语法。“scty”中的“Stereoscopic_Content_Type”可包括在“ftyp”方框或其他方框中。
表1
 Aligned(8)class StereoscopicContentTypeBox extendBox(′sfty′){
  unsigned int(2)Stereoscopic_Content_Type：unsigned int(6)reserved；}
表1中，“Stereoscopic_Content_Type”表示立体内容类型并具有表2的含义。
表2
  值   描述
  00   立体内容(3D)
  01   单像/立体混合内容(2D+3D)
  10～11   保留
2.“sovf”(立体对象视觉格式)
“sovf”表示立体内容(或视觉格式)的图像构成格式。表3示出“sovf”的语法。“sovf”包括“Stereoscoic_Object_VisualFormat”。可将“Stereoscoic_Object_VisualFormat”包括在典型的其他方框或用于存储立体内容的新定义的方框中。
表3
Aligned(8)class StereoscopicObjectDataVisualFormatextend Box(′sovf){unsigned int(4)Stereoscopic_Object_VisualFormat：unsigned int(4)reserved；}
表3中，“Stereoscopic_Object_VisualFormat”表示立体内容的图像构成信息并具有表4的含义。
表4
  值   描述
  0000   并排
  0001   自顶向下
  0010   基于水平的场顺序
  0011   基于垂直的场顺序
  0100   帧顺序
  0101～0111   保留
  值   描述
  1000   主+附加(全尺寸)
  1001   主+附加(垂直的一半)
  1010   主+附加(水平的一半)
  1011   主+附加(垂直/水平的一半)
  1100   主+深度图
表4中，“全尺寸”表示辅助图像的大小与主图像的大小完全相同。“垂直的一半”表示辅助图像的大小是主图像的大小的垂直一半。“水平的一半”表示辅助图像的大小是主图像的大小的水平一半。“垂直/水平的一半”表示辅助图像的大小是主图像的大小的水平和垂直的一半。
3.“ssci”(立体内容信息)
“ssci”表示关于立体内容的最小/最大深度或视差的信息。“ssci”使3D终端能够再现适于3D显示的3D图像。表5表示“ssci”的语法。可将“ssci”中包括的最小/最大深度信息包括在其他典型方框或用于存储立体内容的新定义的方框中。表5中，“Max_of_depth(disparity)”表示最大深度/视差信息(像素单元)，“Min_of_depth(disparity)”表示最小深度/视差信息(像素单元)。
表5
Aligned(8)class StereoscopicObjectContentInformationextend Box(′ssci′){unsigned int(32)Max_of_depth or disparity；unsigned int(32)Min_of_depth or disparity；}
4.“scpi”(立体相机参数信息)
“scpi”表示由立体相机采集或由相关工具创建的立体内容的相机参数信息。表6示出“scpi”的语法。此外，可将“scpi”中包括的每个字段包括在其他典型方框或用于存储立体内容的新定义的方框中。
表6
Aligned(8)class StereoscopicCameraParameterInformationextend Box(′scpi′){unsigned int(32)Baseline；unsigned int(32)Focal_Length；unsigned int(32)Convergence_point_distnace；unsigned int(1)StereoscopicCamera_setting；unsigned int(7)Reserved；}
表6中，“Baseline”表示左相机和右相机之间的距离，“Focal_Length”表示图像平面(CCD传感器)和相机中心之间的距离，“Convergence_point_distnace”表示汇合点和基线之间的距离。这里，汇合点表示左相机和右相机的视轴的交叉点。“StereoscopicCamera_setting”表示立体摄影/数据的相机排列，并具有表7的含义。
表7
  值   描述
  0   平行排列
  1   交叉排列
5.“iods”(对象描述方框)
“iods”表示关于初始对象描述符(IDO)的信息，当包括诸如BIFS或LASeR的场景信息时，所述IDO用于表示BIFS流或OD流的位置。表8示出“iods”的语法。
表8
Aligned(8)class ObjectDescriptoratBox extend Box(′iods′){ObjectDescriptor OD；}
6.“soet”(立体单ES类型方框)
当编码器输出单ES流时，“soet”表示基本流(ES)的类型。表9示出“soet”的语法。
表9
Aligned(8)class StereoscopicOnesTypeBox extendBox(′soet′){unsigned int(3)Stereoscopic_OneES_Type：unsigned int(5)Rreserved；}
表9中，“Stereoscopic_OneES_Type”表示由单ES形成的立体数据的图像构成格式的实施例，并具有表10的含义。
表10
  值   描述
  000   并排
  001   自顶向下
  010   基于水平的场顺序
  011   基于垂直的场顺序
  100   帧顺序
  101   单像/立体混合数据
  110   基于辅助数据形成的参考图像/立体数据
  111   保留
7.“stet”(立体双ES类型方框)
当编码器输出双ES时，“stet”表示每个基本流(ES)的类型。表11表示“stet”的语法。
表11
Aligned(8)class StereoscopicTwoesTypeBox extendBox(′stet′){unsigned int(2)Stereoscopic_TwoES_Type：}
表11中，“Stereoscopic_TwoES_Type”表示由双ES形成的立体数据的图像构成格式的实施例，并具有表12的含义。
表12
  值   描述
  000   参考图像
  001   辅助数据(具有与参考图像相同大小的图像)
  010   辅助数据(具有与参考图像的垂直一半大小的图像)
  011   辅助数据(具有与参考图像的水平一半大小的图像)
  100   辅助数据(具有与参考图像的水平和垂直一半大小的图像)
  101   辅助数据(深度图)
  110   辅助数据(视差图)
  111   保留
8.“sstt”(立体时间表方框)
当单像内容和立体内容被一起使用时，“sstt”表示关于场景中的单像内容和立体内容的开始和结束的信息。表13示出根据本发明第一实施例的“sstt”的语法。可将“sstt”的每个字段包括在其他典型方框或用于存储立体内容的新定义的方框中。
表13
Aligned(8)class StereoscopicTimeTable Box extendBox(′sstt′){int i；unsigned int(8)Mono/stereoscopic_Scene count；for(i＝0；i＜＝Mono/stereoscopic_Scene_count；i++){unsigned int(4)Mono/stereoscopic_identifier；unsigned int(4)Reserved；unsigned int(32)Start_Time；}
表13中，当由2D内容和3D内容一起形成立体内容时，“Mono/stereoscopic_Scene_count”表示单像/立体的场景改变的数目。也就是说，如果立体内容由2D→3D→2D形成，则将“Mono/stereoscopic_Scene_count”设置为2。此外，如果立体内容仅由3D内容形成而不具有2D内容，则将“Mono/stereoscopic_Scene_count”设置为2。可将这样的信息用于3D终端中的2D/3D显示自动改变。
“Mono/stereoscopic_identifier”通过时间表示内容类型并具有表14的含义。此外，可将“Mono/stereoscopic_identifier”用于识别2D内容或3D内容。例如，将1比特分配给“Mono/stereoscopic_identifier”。如果“Mono/stereoscopic_identifier”是“0”，则“Mono/stereoscopic_identifier”表示2D内容。如果“Mono/stereoscopic_identifier”是“1”，则“Mono/stereoscopic_identifier”表示3D内容。“Start_Time”通过时间表示内容开始时间。
表14
  值   描述
  0000   单像
  0001   并排
  0010   自顶向下
  0011   基于水平的场顺序
  0100   基于垂直的场顺序
  0101   帧顺序
  0110～0111   保留
  1000   主+附加(全尺寸)
  1001   主+附加(垂直的一半)
  1010   主+附加(水平的一半)
  1011   主+附加(垂直/水平的一半)
  1100   主+深度图
  1101   主+视差图
表15示出根据本发明第二实施例的“sstt”的语法。表15中，“Start_Time”表示立体内容的开始时间，“End_Time”表示立体内容的结束时间。
表15
Aligned(8)class StereoscopicTimeTable Box extendBox(′sstt′){int i；unsigned int(8)Stereoscopic_Scene_count；
  for(i＝0；i＜＝Stereoscopic_Scene_count；i++){unsigned int(32)Start_Time；unsigned int(32)End_Time；}
表16示出根据本发明第三实施例的“sstt”的语法。“Start_Sample_number”表示单像/立体内容开始采样的号码或采样的数量。也就是说，采样的数量表示与单像或立体相应的全部采样的数量。这里，采样表示视频的单个帧和多个视频帧的时间连续序列。
表16
Aligned(8)class StereoscopicTimeTable Box extendBox(′sstt′){int i；unsigned int(16)Mono/stereoscopic_Scene_count；for(i＝0；i＜＝Mono/stereoscopic_Scene_count；i++){unsigned int(4)Mono/stereoscopic_identifier；unsigned int(32)Start_Sample_number；}
表17示出根据本发明第三实施例的“sstt”的语法。
表17
Aligned(8)class StereoscopicTimeTable Box extendBox(′sstt′){int i；unsigned int(8)Stereoscopic_Scene_count；for(i＝0；i＜＝Stereoscopic_Scene_count；i++){unsinged int(4)Stereoscopic_compositiontype；unsigned int(32)Start_sample_number；unsigned int(32)End_sample_number；}
表17中，当“Stereoscopic_compositiontype”由各种立体构成类型形成时，“Stereoscopic_compositiontype”通过时间来表示内容类型，并具有表18的含义。“End_sample_number”表示立体内容结束采样数量或采样的数目。
表18
  值   描述
  0000   并排
  0001   自顶向下
  0010   基于水平的场顺序
  0011   基于垂直的场顺序
  0100   帧顺序
  0101～0111   保留
  1000   主+附加(全尺寸)
  1001   主+附加(垂直的一半)
  1010   主+附加(水平的一半)
  1011   主+附加(垂直/水平的一半)
  1100   主+深度图
  1101   主+视差图
9.“sesn”(立体ES数量方框)
“sesn”表示从编码器输出的基本流的数量。表19示出“sesn”的语法。表19中，“stereoscopic_ESNum”表示从立体内容的编码操作输出的基本流的数量。
表9
Aligned(8)class StereoscopicESNumbBox extend Box(′seen′){unsigned int(16)stereoscopic_ESNum；}
10.“tref”(轨迹参考方框)
“tref”是在基于ISO的文件格式中定义的，提供用于使一个轨迹能够参考其他轨迹的信息的方框。“tref”被包括在“track”(轨迹方框)中。表20示出根据本发明实施例的“tref”的语法。这里，“track_ID”表示将被参考的轨迹的标识。“reference_type”具有表21的含义。
表20
aligned(8)class TrackReferenceBox extends Box(′tref′){}aligned(8)class TrackReferenceTypeBox(unsigned int(32)reference_type)extends Box(reference_type){unsigned int(32)track_IDs[]；}
表21
  hint   参考轨迹包含用于该提示轨迹的原始媒体
  cdsc   该轨迹描述参考轨迹
svdp   该轨迹依靠参考轨迹作为它的主视图轨迹，并且其可包含用于参考轨迹的立体相关的“meta”信息。
具有双基本流(ES)的立体视频包括两个轨迹，如现有LASeR一样，作为场景描述与相关于LASeR中的视频的两个节点连接。也就是说，根据现有技术，具有两个ES的立体视频被识别为两个对象。然而，因为立体视频最终被转换为一个3D视频格式并在终端中再现，所以立体视频被识别为一个对象。也就是说，因为立体视频被转换为一个3D视频格式以再现场景，所以虽然使用两个轨迹来形成立体视频，但是应该仅使用一个节点来连接立体视频。如果立体视频包括两个ES，则需要具有关于两个轨迹之间的关系的信息，并且立体轨迹参考信息在如表22所示的“tref”中的“svdp”中被定义和使用。虽然没有使用LASeR，但是需要使用诸如“svdp”的立体轨迹参考信息以存储具有两个ES的立体内容。
如果立体内容包括两个基本流，则“tref”使两个轨迹能够被识别为主轨迹和附加轨迹。此外，“tref”使附加轨迹能够参考主轨迹并且将立体视频相关的立体相机和显示信息仅存储在轨迹之一中。因此，可去除信息冗余。此外，虽然立体内容包括两个轨迹，但是可将轨迹之一与LASeR的一个视频节点连接。
在本发明中，为了使立体内容能够支持各种立体图像构成格式和相机参数，介绍初始立体头(ishd)的结构。根据本发明实施例，可独立使用初始立体头(ishd)中包括的信息。
在具有各种立体格式和相机参数的立体流的情况下，通过“iloc”来识别每个立体流以及每个立体流的开始和长度，并且对每个片段分配item_ID。因此，初始立体头(ishd)必须基于item_ID提供关于每个立体格式或相机参数的信息。这里，当立体流包括立体片段和单像片段两者作为一个序列时，item表示一个立体片段。
如果立体流包括三个立体片段并且每个立体片段包括不同ishd信息，则通过item_ID和其描述信息来识别立体片段。然而，如果三个立体片段具有相同的ishd信息，则第二和第三立体片段包括字段，该字段示出第二和第三立体片段包括与第一立体片段相同的ishd信息。这样的结构可有利地去除初始立体头(ishd)中包括的信息冗余。
图4是示出根据本发明实施例的具有MPEG-4系统信息的立体视频应用格式(SS-VAF)的示图，图5是示出根据本发明实施例的不具有MPEG-4系统信息的立体视频应用格式(SS-VAF)的示图。
当一起使用单像内容和立体内容时，需要定界符信息来确定单像内容或立体内容何时开始或结束。可根据单像/立体内容、采样的2D/3D识别和单像内容和立体内容中包括的采样(AU)的数量来识别单像内容和立体内容。
图6到图8示出支持如图1的各种内容构成格式的存储格式的概念性结构。其中的基本结构包括“ftyp”方框、“moov”方框和“mdat”方框。“ftyp”方框定义文件类型。也就是说，“ftyp”方框通过包括代表其是立体内容文件还是单像/立体内容文件的字段来代表3D内容文件。“moov”方框包括用于再现媒体数据的全部系统(元)信息，并且“mdat”方框包括真实媒体数据。需要基于所示格式的用于立体内容的新的辅助信息，并且根据辅助信息的位置来改变存储格式的结构。
图6示出包括具有关于形成3D内容的源的数量的信息和新辅助信息的初始立体头(ishd)的存储格式的结构，ishd包括在“moov”方框中。图6的示图(a)示出具有一个源的3D内容的存储格式。如示图(a)所示，一个帧包括左图像信息和右图像信息(例如，并排)。图6的示图(b)示出具有两个源的3D内容的存储格式。如示图(b)所示，左图像信息和右图像信息中的每一个被单个地包括在相应帧中。根据包括的媒体数据的数量来改变“moov”方框中的轨迹的数量。“moov”方框的轨迹包括用于再现包括在“mdat”方框中的媒体数据的全部系统信息(元信息)。
这样的存储格式需要用于新的辅助信息并支持新的辅助信息的结构。在本发明中，新定义了初始立体头(ishd)并将其包括在“moov”方框的轨迹中。在“moov”方框或存储格式中，可改变初始立体头(ishd)的位置。
图7示出具有“mdat”方框的存储格式结构，所述“mdat”方框具有关于新定义的初始立体头的信息。图7的示图(a)示出由一个源形成的3D内容的存储格式，图7的示图(b)示出由两个源形成的3D内容的存储格式。如图所示，可通过包括信息来实现存储格式，所述信息是：在“mdat”方框中包括“ishd”流，而维持“moov”方框的典型结构。
图8是示出包括具有ishd信息的“meta”方框的存储格式。图8的示图(a)示出由一个源形成的3D内容的存储格式，图8的示图(b)示出由两个源形成的3D内容的存储格式。
表22示出用于通知“mdat”方框中包括ishd信息的结构。“stsd”(采样描述)方框中包括这样的结构。
表22
//ishd SequencesClass ishdsampleEntry(codingname)extends SampleEntry(′ishd′){}
图9示出基于图6到图8所示结构的具有关于场景描述符的信息的存储格式。场景描述符用于各种多媒体的场景构成以及与用户的交互。在本实施例中，LASeR被用作场景描述符。
图9的示图(a)示出在“moov”方框中包括用于存储场景描述符流的附加方框的存储格式。图9的示图(b)示出的存储格式包括：“mdat”方框，具有场景描述符流；“moov”方框，具有用于通知场景描述符流被包括在“mdat”方框中的附加轨迹；以及“stsd”方框，具有关于场景描述符流的信息。也就是说，是关于在轨迹中搜索“stsd”方框，分析哪个信息(场景描述符/视频/音频)是通过轨迹来代表的，以及基于分析结果使用存储在“mdat”方框中的信息来进行解码。图9的示图(c)示出包括具有关于定义的场景描述符的信息的“meta”方框的存储格式结构。
表23到表25示出支持图1的全体3D内容构成的ishd结构的实施例。
表23
  Class ishd{unsigned int(16)num MonoStereo_scene；if(num_MonoStereo_scene){for(i＝0；i＜num_MonoStereo_scene；i++)unsigned int(16)start_sample_index；unsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；unsigned int(3)Reserved；}}elseunsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；stereoscopicCameraInfo[0...1]；stereoscopicContentsInfo[0...1]；}
表24
 Class ishd{unsigned int(16)num_MonoStereo_scene；if(num_MonoStereo_scene){for(i＝0；i＜num_MonoStereo_scene；i++)unsigned int(16)start_sample_index；unsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；unsigned int(3)Reserved；
   }}elseunsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；}
表25
 Class ishd{unsigned int(16)num_MonoStereo_scene；if(num_MonoStereo_scene){for(i＝0；i＜num_MonoStereo_scene；i++)unsigned int(16)start_sample_index；unsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；stereoscopicCameraInfo[0...1]；stereoscopicContentsInfo[0...1]；unsigned int(3)Reserved；}}elseunsigned int(3)Composition_type；unsigned int(1)numofES；unsigned int(1)LR_first；stereoscopicCameraInfo[0...1]；stereoscopicContentsInfo[0...1]；}
表23到表25中，“num_MonoStereo_scene”表示当立体内容由2D内容和3D内容一起形成时，场景的数量。“num_MonoStereo_scene”还表示当立体内容由各种3D内容形成时的场景数量。例如，立体内容由2D内容、3D内容和2D内容((2D)(3D)(2D))形成，num_MonoStereo_scene变成3(num_MonoStereo_scene＝3)。如果以并排形式(场顺序)形成立体内容，则num_MonoStereo_scene变成2(num_MonoStereo_scene＝2)。此外，如果由单一格式中的3D内容形成立体内容，则num_MonoStereo_scene变成1(num_MonoStereo_scene＝1)。
可将“start_sample_index”用作每个内容的开始采样标号(即，通用帧标号)或根据每个内容类型而包括的采样的标号。“numofES”表示“mdat”方框中包括的视频编码流的数量。
“Composition_type”表示用于识别2D内容和3D内容的格式的信息。可将“start_sample_index”和“Composition_type”用作用于在支持2D/3D显示模式的各种3D终端中自动显示开启/关闭的基本信息。“Composition_type”具有表26的含义。
表26
Figure G2008800255249D00181
“LR_first”表示左图像和右图像中具有较高优先权的一个。也就是说，“LR_first”通知左图像和右图像中首先编码的图像。
“stereoscopicCameraInfo”对象表示用于3D内容的相机参数信息。表27示出“stereoscopicCameraInfo”对象的实施例。根据本发明实施例，可在其他典型方框或新定义的方框中包括根据本实施例的相机参数信息。表27中，当3D内容被产生或摄影时，“StereoscopicCamera_setting”表示相机排列。也就是说，“StereoscopicCamera_setting”表示“平行”和“交叉”中的一个。“Baseline”表示立体相机之间的距离，“Focal_Length”表示从镜头到图像平面的距离。此外，“ConvergencePoint_distance”表示从连接左相机和左相机的基线到汇合点的示图。
表27
  StereoscopicCameraInfo{unsigned int(1)StereoscopicCamera_setting；unsigned int(7)Reserved＝1111；unsigned int(16)Baseline；unsigned int(16)Focal_Length；unsigned int(16)ConvergencePoint_distance；}
“StereoscopicCameraInfo”对象表示用于显示3D内容的最小信息。表28示出“StereoscopicCameraInfo”对象的实施例。根据本实施例，可将“StereoscopicCameraInfo”中包括的信息包括在其他典型方框或新定义的方框中。“Max_disparity”表示3D内容的最大视差大小，“Min_disparity”表示3D内容的最小视差大小。
表28
  StereoscopicContentsinfo{unsigned int(16)Max_disparity；unsigned int(16)Min_disparity；}
“StereoscopicCameraInfo”和“StereoscopicContentsinfo”中的信息可被表示为附加描述(诸如MPEG-7元数据)并被存储。
图10是示出根据本发明实施例的当ES＝1时的SS-VAF的示图。
“ftyp”方框表示是否包括立体内容。当整个基本流都是3D时，并且当由2D/3D混合流形成基本流时，其被认作立体内容。
当立体内容由2D/3D流形成时，需要2D/3D流的开始信息和长度信息。对于开始信息和长度信息，使用“iloc”方框，该“iloc”方框是基于ISO的文件格式(11496-12)的典型方框。在立体内容的情况下，“iloc”方框提供存储文件中立体片段的位置。
通过“ishd”方框获得与区分2D流和3D流相关的信息。如果在2D/3D混合流的情况下虽然包括多个3D流，但是多个3D流是相同的信息(即，如果是单一格式)，则通过参考一个“ishd”信息获得与3D流相关的信息。
在仅由单一格式的3D流形成的立体内容中，可使用“ishd”方框而不使用“iloc”方框来表示立体数据。此外，当ES＝1时，如果3D流由多重格式形成，则通过“ishd”方框来获得格式信息，并且可使用“iloc”方框来检测每个格式的偏移/长度值。
图11是示出根据本发明实施例的当ES＝2时的SS-VAF的示图。在ES＝2的情况下，在相应的“trak”方框中包括左流信息和右流信息。由于将立体数据转换为预定格式并如上所述进行显示，所以将左流信息和右流信息形成为两个轨迹。然而，需要示出左流信息和右流信息之间的关系以使该两个轨迹被识别为一个对象。例如，如果左图像是主图像，右图像是附加图像，则可通过表示具有右图像流信息的“trak”方框和具有左图像流信息的“trak”方框之间的关系的来去除“ishd”方框中的冗余信息。如果包括在右图像流信息中的“ishd”中的相机参数和显示信息与包括在左图像流信息中的“ishd”中的相机参数和显示信息完全一样，则可使用包括在左图像流信息中的“ishd”中的信息而不利用附加描述。为了表示这样的关系，在本发明中引入“tref”方框和“svdp”方框。
在存储为左流和右流的3D流上，当由多重格式的3D流形成时，需要检测与每个格式相关的3D流的定界符、开始和长度。通过“iloc”方框来获得开始和长度信息，所述“iloc”方框是基于ISO的文件格式(14496-12)的典型方框。此外，通过“ishd”方框获得与多重格式的3D流的定界符相关的信息。表29示出根据本发明的实施例的单一格式的“ishd”方框的语法。
表29
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(8)Stereoscopic_Composition_Type；unsigned int(1)LR_first；unsigned int(1)Is_camParams；unsigned int(1)Is_disInfo；unsigned int(5)Reserved；//allthe following are optional fieldsif(Is_CamParams){
     unsigned int(32)Baseline；unsigned int(32)focallength；unsigned int(32)convergence_distance；unsigned int(1)Is_camera_cross}if(Is_camera_cross){unsigned int(32)rotation[]；unsgiend int(32)translation[]；unsigned int(7)reserved；}if(Is_disInfo){Int(16)MinofDisparity；Int(16)MaxofDisparity；}
“Is_camParams”表示是否存在相机参数，“Is_disInfo”表示是否存在立体内容显示信息，“Baseline”表示左相机和右相机之间的距离，“focallength”表示从镜头到图像平面(胶片)的距离，并且“convergence_distance”表示从基线的中心到汇合点的距离。基线连接左相机和右相机，汇合点是左相机和右相机的视轴的交叉点。在平行轴相机的情况下，“convergence_distance”具有无限值。为了表示该值，将1分配给所有比特。
此外，当“Is_camera_cross”是“1”时，“Is_camera_cross”表示交叉轴相机，当“Is_camera_cross”是“0”时，“Is_camera_cross”表示平行轴相机。“rotation”表示相机对于对象的位置角度。“translation”表示立体相机是否移动(当所有比特都为0时，没有立体相机运动)。“MinofDisparity”表示左图像和右图像的最小视差大小，“MaxofDisparity”表示左图像和右图像的最大视差大小。
表30示出多重格式的“ishd”方框的语法。在多重格式的情况下，“Item_count”表示多个格式的信息的描述的数量。“Item_ID”表示每个格式的整数名称并且用于识别立体内容中的各种立体格式。这里，“Item_ID”与“iloc”方框的item_ID一起使用。
表30
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(16)item_count；for(i＝0；i＜item_count；i++){unsigned int(16)item_ID；unsigned int(8)Stereoscopic_Composition_Type；unsigned int(1)LR_first；unsigned int(1)Is_camparams；unsigned int(1)Is_disInfo；unsigned int(5)Reserved；//all the following are optional fieldsif(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(32)convergence_distance；unsigned int(1)Is_camera_cross}if(Is_camera_cross){unsigned int(32)rotation[]；unsigend int(32)translation[]；unsigned inet(7)reserved；}if(Is_disInfo){Int(16)MinofDisparity；Int(16)MaxofDisparity；}//other additional infprmationif(other_flag){}}
以下，将描述高级视频编码(AVC)和补充增强信息(SEI)。SEI包括具有与解码和显示相关的消息信息的“立体视频信息SEI”，SEI消息在AVC流内传输。
图12是包含NAL单元的单个视频基本流的流程图。图12的示图(a)示出包括“立体视频信息SEI”和“reserved_sei_message”的部分，图12的示图(b)示出AVC流中SEI的位置。表31示出“立体视频信息SEI”消息。
表31
  stereo_video_info(payloadSize){   C   描述符
    field_views_flag   5   u(1)
    if(field_views_flag)
      top_field_is_left_view_flag   5   u(1)
    else{
      current_frame_is_left_view_flag   5   u(1)
      next_frame_is_second_view_flag   5   u(1)
    }
    left_view_self_contained_flag   5   u(1)
    right_view_self_contained_flag   5   u(1)
  }
“field_views_flag”表示是否存在基于场的立体流。当“top_field_is_left_view_flag”是“1”时，表示垂直交织格式(左视图优先)中形成的立体内容，“top_field_is_left_view_flag”是“0”时，表示垂直行交织格式(右视图优先)中形成的立体内容。当“current_frame_is_left_view_flag”是“1”时，表示当前帧代表左视图，当“current_frame_is_left_view_flag”是“0”时，表示当前帧示出右视图。当“next_frame_is_second_view_flag”是“1”时，表示立体图像由当前帧和下一帧形成，当“next_frame_is_second_view_flag”是“0”时，表示立体图像由当前帧和先前帧形成。当“left_view_self_contained_flag”是“1”时，表示流被包成独立流而不与右视图相关，当“left_view_self_contained_flag”是“0”时，表示流基于与右视图相关而被包装。当“right_view_self_contained_flag”是“1”时，表示流被包成独立流而不与左视图相关，当“right_view_self_contained_flag”是“0”时，表示流基于与左视图相关而被包装。
“立体视频信息SEI”信息包括“stereoscopic_composition_type”中表32的格式。
表32
  1   垂直交织格式
  2   帧顺序格式
  3   场顺序格式
  4   单像左图像
  1   垂直交织格式
  5   单像右图像
以下，将介绍用于服务立体内容的使用典型AVC SEI信息的方法和存储格式。仅当立体内容通过AVC编码时可用。
介绍使用“reserved_sei_message”的SS-VAF，SS-VAF作为添加基于典型“立体视频信息SEI”的每个立体流所需的相机参数和显示信息。此外，可如表33来扩展和使用“立体视频信息SEI”。当“Side_by_side_flag”是“1”时，在左图像优先的情况下在一个帧中形成为左图像和右图像。当“Side_by_side_flag”是“0”时，在右图像优先的情况下在一个帧中形成为左图像和右图像。表33中，“C”表示语法的种类，“u(1)”表示使用1比特的“无符号整数”。
表33
  stereo_video_info(payloadSize){   C   描述符
    field_views_flag   5   u(1)
    if(field_views_flag)
      top_field_is_left_view_flag   5   u(1)
    else{
      current_frame_is_left_view_flag   5   u(1)
      next_frame_is_second_view_flag   5   u(1)
    }
    else {
    left_view_self_contained_flag   5   u(1)
    right_view_self_contained_flag   5   u(1)
    }
    side_by_side_flag   5   u(1)
  }
表34定义AVC的SEI信息中使用“reserved_sei_message(playloadSize)”的立体相机信息。这里，可添加其它相机信息。可独立使用添加的信息。基于此，可获得用于立体内容的相机参数信息。
表34
    stereo_camera_info(payloadSize){if(Is_CamParams){baseline；focallength；convergence_distance；if(Is_camera_cross){rotation[]；translation[]；}} C55555   描述符U(32)U(32)U(32)U(32)U(32)
表35定义AVC的SEI信息中使用“reserved_sei_message(playloadSize)”以用于显示立体内容的信息。基于表35中定义的信息，可提取立体内容视差值。
表35
  stereo_display_info(payloadSize){if(Is_disInfo){MinofDisparity；MaxotDisparity；}   C55   DescriptorU(16)U(16)
然而，可通过将上述信息组合为一个SEI_message来提供立体相机和显示信息。
图13是示出使用立体视频信息和保留SEI的SS-VAF的示图。LASeR被有选择地包括在所示应用格式中。
在立体内容由2D/3D混合流形成的情况下，通过“iloc”方框在3D流片段期间获得AVC流SEI消息中定义的3D流信息。这里，3D流信息可包括“立体视频信息SEI”、“立体相机信息SEI”和“立体显示信息SEI”。在立体内容仅由单一格式的3D流形成的情况下，可使用AVC流SEI消息中定义的3D流信息来表示立体内容。这里，3D流信息可包括“立体视频信息SEI”、“立体相机信息SEI”和“立体显示信息SEI”。
图14是示出在ES＝2的情况下，当立体内容包括两个基本流(ES)并且仅由单一格式立体流形成时的SS-VAF的视图。在ES＝2的情况下，在每个相应的“trak”方框中包括左流信息和右流信息。这里，有必要示出左流和右流之间的关系。例如，如果左图像是主图像并且右图像是辅助图像，则可通过示出包括右图像流信息的“trak”方框和包括左图像流信息的另一“trak”方框之间的关系来去除“ishd”信息的冗余。这样的关系使用包括在基于ISO文件格式中的“tref”方框。允许描述再现所需的所有trak_ID。因此，利用右图像流(辅助图像)中的“trak”中的“tref”来描述所有trak_ID。
表36示出根据本发明实施例的支持各种立体构成格式和相机参数的情况下“ishd”方框的语法。“item_ID”表示定义下一信息的项目的ID，并具有大于1的值。当“current_indicator”是“1”时，表示下一个描述的信息的有效性，当“current_indicator”是“0”时，表示先前描述的信息与下一个描述的信息完全一样。然而，如果item_ID＝1，则表示没有信息将被下一个描述。也就是说，终端基于“current_indicator”来确定将被下一个描述的信息的有效性，并当“current_indicator”是“0”时确定将被下一个描述的信息与先前描述的“ishd”信息完全一样。
此外，“LR_first”表示左图像和右图像的参考位置选择。“Is_camParams”表示是否存在相机参数。“Is_displaySafeInfo”表示是否存在立体内容显示信息。“Baseline”表示左相机和右相机之间的距离。“focallength”表示CCD到图像平面(胶片)的距离。当“Is_camera_cross”是“1”时，表示交叉轴相机，当“Is_camera_cross”是“0”时，表示平行轴相机。
表36
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(16)item_ID；
          unsigned int(1)  current_indicatior；unsigned int(8)  Stereoscopic_Composition_Type；unsigned int(1)  LR_first；unsigned int(1)  Is_camParams；unsigned int(1)  Is_displaySafeInfo；unsigned int(4)  Reserved；//all the following are optional fieldsif(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossif(Is_camera_cross){unsigned int(32)   convergence_distance；unsigned int(32)  rotation[]；unsgiend int(32)translation[]；unsigned int(7)   reserved；}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)  VerticalDisparity；int(16)  MinofDisparity；Int(16)  MaxofDisparity；}//other additional informationif(other_flag){}aligned(8)class Initial Stereoscopic Header box extend FullBox(′ishd′，version＝0，0){unsigned int(16)item_count；ishdEntry[item_count]ishds；}
此外，“convergence_distance”表示从基线的中心到汇合点之间的距离(在平行相机的情况下“convergence_distance”具有无限值。当所有比特是1时，表示无限距离)。“rotation”表示对于对象的相机位置角度，“translation”表示立体相机的运动(当所有比特是0时，表示没有立体相机运动)。此外，“VerticalDisparity”表示左图像和右图像的垂直视差大小，“MinofDisparity”表示左图像和右图像的最小水平视差大小，“MaxofDisparity”表示左图像和右图像的最小水平视差大小，“item_count”表示下一阵列中入口的数量。
表37示出根据本发明第一实施例的用于支持各种相机参数的“ishd”方框的语法。这里，如果立体构成格式相同，则直接参考先前“ishd”信息。此外，可将“ishd”中包括的相机参数和显示信息分到多个附加方框并存储。
表37
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(16)item_ID；unsigned int(8) Stereoscopic_Composition_Type；unsigned int(1) LR_first；unsigned int(1) current_indicatior；unsigned int(1) Is_camParams；unsigned int(1) Is_displaySafeInfo；unsigned int(4) Reserved；//all the following are optional fieldsif(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossif(Is_camera_cross){unsigned int(32)convergence_distance；unsigned int(32)rotation[]；unsgiend int(32)translation[]；{unsigned int(7)reserved；}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)VerticalDisparity；int(16)MinofDisparity；int(16)MaxofDisparity；
         }//other additionalinformationif(other_flag){}aligned(8)class  Initial  Stereoscopic  Header  box  extend  FullBox(′ishd′，version＝0，0){unsigned int(16)item_count；ishdEntry[item_count]ishds；}
表38示出根据本发明第二实施例的支持各种相机参数的“ishd”方框的语法。假设立体构成格式相同，则直接参考先前“ishd”。
表38
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(8)Stereoscopic_Composition_Type；unsigned int(1)LR_first；unsigned int(7)Reserved；unsigned int(16)item_count；for(i＝0；i＜item_count；i++){unsigned int(16)item_ID；unsigned int(1)current_indicatior；unsigned int(1)Is_camParams；unsigned int(1)Is_displaySafeInfo；unsigned int(5)Reserved；//all the following are optional fieldsif(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossunsigned int(7)reserved；if(Is_camera_cross){unsigned int(32)convergence_distance；unsigned int(32)rotation[]；
          unsgiend int(32)translation[]；}}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)VerticalDisparity；int(16)MinofDisparity；int(16)MaxofDisparity；}//other additional informationif(other_flag){}}
表39示出根据本发明第三实施例的支持各种相机参数的“ishd”方框的语法。假设立体构成格式相同，则参考预定Item_ID(诸如“cameParams”和“displaysafeInfo”)。
表39中，当“Is_ref”是“0”时，表示没有参考的相机参数和显示信息，当“Is_ref”是“1”时，表示存在参考的Item_ID。“current_efIndex”表示参考的Item_ID。
表39
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(8)Stereoscopic_Composition_Type；unsigned int(1)LR_first；unsigned int(7)Reserved；unsigned int(16)item_count；for(i＝0；i＜item count；i++){unsigned int(16)item_ID；unsigned int(1)Is_camParams；unsigned int(1)Is_displaySafeInfo；unsigned int(1)Is_ref；unsigned int(5)Reserved；//all the following are optional fields
  If(Is_ref){unsigned int(16)current_refIndex；}else{if(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossunsigned int(7)reserved；}if(Is_camera_cross){unsigned int(32)convergence_distance；unsigned int(32)rotation[]；unsgiend int(32)translation[]；}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)  VerticalDisparity；int(16)  MinofDisparity；int(16)  MaxofDisparity；}}//other additional informationif(other_flag){}}
表40示出根据本发明第四实施例的支持各种相机参数的“ishd”方框的语法。假设立体构成格式相同，则“cameParams”和“displaysafeInfo”参考不同Item_ID。
表40
Aligned(8)class Initial Stereoscopic Header box extendFullBox(′ishd′，version＝0，0)unsigned int(8)Stereoscopic_Composition_Type；unsigned int(1)LR_first；unsigned int(7)Reserved；
  unsigned int(16)  item_count；for(i＝0；i＜item_count；i++){unsigned int(16)item_ID；unsigned int(1)Is_camparams；unsigned int(1)Is_displaySafeInfo；unsigned int(1)Is_camparamsref；unsigned int(1)Is_displaySafeInforef；unsigned int(4)Reserved；//allthe following are optional fieldsIf(Is_camParamsref ||Is_displaySafeInforef){unsigned int(16)current_camrefIndex；unsigned int(16)current_displayrefIndex；}else{if(Is_CamParams){unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossunsigned int(7)reserved；if(Is_camera_cross){unsigned int(32)convergence_distance；unsigned int(32)rotation[]；unsgiend int(32)translation[]；}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)  VerticalDisparity；int(16)  MinofDisparity；int(16)  MaxofDisparity；}}//other additional informationif(other_flag){}}
表40中，当“Is_camParamsref”是“0”时，表示不存在参考的相机参数信息，当“Is_camParamsref”是“1”时，表示存在Item_ID。当“Is_displaySafeInforef”是“0”时，表示不存在参考的显示安全信息，当“Is_displaySafeInforef”是“1”时，表示存在Item_ID。“current_cameraIndex”表示参考的Item_ID，“Current_displayIndex”表示参考的Item_ID。
可将“ishd”方框划分成用于记录立体视频媒体信息的“svmi”方框(立体视频媒体信息方框)和用于记录相机参数和显示信息的“scdi”方框(立体相机和显示信息方框)。由于“svmi”方框是强制性的而“scdi”方框不是强制性的，所以，将“ishd”方框划分成“svmi”方框和“scdi”方框以去除不必要的信息是有利的。
“svmi”方框提供立体视觉类型和片段信息。更详细地，立体视频媒体信息包括关于立体图像构成类型的信息、关于左图像和右图像之中首先编码的图像的信息、当立体内容的基本流从立体片段变为单像片段或从单像片段变为立体片段时关于片段的数量的信息、关于连续采样的数量或开始采样标号的计数的信息以及关于当前采样是否是立体的信息。
“scdi”方框包括关于是否存在相机参数、左相机和右相机之间的距离、左相机和右相机的排列、从主视图相机到子视图相机的相对角度以及左图像和右图像之间的最大视差和最小视差的信息。表41示出根据本发明实施例的“scdi”方框的语法。
表41
unsigned int(16)item_count；for(i＝0；i＜item_count；i++){unsigned int(16)itern_ID；unsigned int(1)Is_camParams；unsigned int(1)Is_displaySafeInfo；unsigned int(1)Is_ref；unsigned int(5)Reserved；//all the following are optional fieldsIf(Is_ref){unsigned int(16)current_refIndex；}else{if(Is_CamParams){
  unsigned int(32)baseline；unsigned int(32)focallength；unsigned int(1)Is_camera_crossunsigned int(7)reserved；}if(Is_camera_cross){unsigned int(32)convergence_distance；unsigned int(32)rotation[]；unsgiend int(32)translation[]；}if(Is_displaySafeInfo){unsigned int(16)ViewingDisatance；int(16)   VerticalDisparity；int(16)   MinofDi sparity；int(16)   MaxofDisparity；}}
如上所示，可通过“tref”方框(轨迹参考方框)来去除包括在每个轨迹中的“scdi”信息的冗余。当ES＝2时，每个轨迹的“iloc”方框划分立体片段以提供“scdi”信息。这里，每个轨迹的立体片段具有相同的item_ID和完全一样的相机参数以及显示信息。通过“svdp”和“tref”将基本流划分为主/辅助轨迹。虽然仅在一个轨迹中包括“iloc”方框，但是当执行3D显示时可通过利用立体片段同步“iloc”方框来再现“iloc”方框。
还可通过“tref”方框来去除包括在每个轨迹中的相同立体视频媒体信息(“svmi”)的冗余。在通过“ftyp”方框识别出立体内容后，通过“tref”方框的“svdp”方框来划分主/辅助轨迹。如果一个轨迹包括“svmi”方框，则可自动识别另一轨迹。由于“svmi”方框是强制性的，所以可将其包括在主/辅助轨迹。可将“svmi”方框仅包括在主轨迹。
图15是示出根据本发明实施例的当ES＝2时的SS-VAF的示图。如图15所示，SS-VAF包括“svmi”方框和“scdi”方框。
当立体内容包括两个基本流(ES)时，包括两个轨迹(“trak”)。可将其划分成主轨迹和辅助轨迹。因此，使用辅助轨迹中的“tref”的“svdp”来参考主轨迹，并提供相关的“scdi”信息中包括的信息。这样的结构具有的优点是能够去除包括在每个轨迹中的相同“scdi”信息的冗余。这里，track_ID表示参考轨迹的ID。如果参考类型是“svdp”，则也可表示轨迹包括用于参考轨迹的立体相机和显示信息。
在用户利用3D显示模式观看预定图像的同时，当用户将3D显示模式改变为2D显示模式时，可通过在终端显示与主轨迹相关的图像来满足2D显示模式。同时，可在具有两个基本流的轨迹中的基本流的中间呈现相同的单像数据。单像数据中，在两个轨迹中存储相同的内容。因此，单像数据是不能作为3D来显示的数据。在这种情况下，终端必须决定两个轨迹中的一个以显示其单像数据。终端对与根据本实施例划分的主轨迹相关的图像进行显示。
当立体视频的基本流是两个时，呈现两个轨迹。通过诸如现有LASeR的场景描述符将立体视频识别为两个对象，并且立体视频被连接到LASeR中的两个视频相关节点。然而，必须将立体视频转换为一个3D视频格式并且最终在终端中进行再现。因此，必须通过LASeR将立体视频识别为一个对象。也就是说，由于需要将立体视频转换为一个3D视频格式以再现立体视频的场景，所以立体视频与使用的一个节点连接。根据本发明，使用“tref”中的“svdp”将立体视频划分成主/辅助轨迹，并且LASeR中的视频相关节点仅链接与主轨迹或媒体流相应的“trak”ID。
图16是示出根据本发明实施例的将立体内容存储为基于ISO的媒体文件格式的方法的流程图。首先，在步骤S1602中，将目标立体内容存储在基于ISO的媒体文件格式的“mdat”方框。随后，在步骤S1604和S1606中，将立体视频媒体信息以及立体内容的立体相机和显示信息存储在“moov”方框中作为立体内容的元数据。
图17是示出根据本发明另一实施例的将立体内容存储在基于ISO的媒体文件格式中的方法的流程图。首先，在步骤S1702中，将目标立体内容存储在基于ISO的媒体文件格式的“mdat”方框。随后，在步骤S1704中，如果立体内容包括两个基本流，则用于将基本流划分成主轨迹和辅助轨迹的信息被存储在基于ISO的媒体文件格式的“tref”方框中。随后，在步骤S1706中，存储用于立体内容的LASeR，该LASeR具有仅与主轨迹链接的视频相关节点。这里，未使用与LASeR链接的部分，仅使用“tref”。
图18是示出根据本发明另一实施例的存储立体内容的方法的流程图。这里，使用上述AVC SEI存储立体内容。首先，在步骤S1802中，存储通过AVC编码的立体内容。随后，在步骤S1804中，使用“reserved_sei_message”存储立体内容的每个流所需的相机参数和显示信息。
这里，“立体视频信息SEI”附加地包括表示立体图像构成是“并排”类型的信息。相机参数包括下述中的至少一个：左相机和右相机之间的距离、左和右相同的焦点长度(focal_length)、基线到汇合点之间的距离、当左相机和右相机互相交叉时左相机和右相机的旋转和平移(translation)。显示信息包括左图像和右图像之间的最大视差和最小视差。
发明模式
如上所述，可将本发明的技术实现为程序并存储在计算机可读记录介质中，诸如CD-ROM、RAM、ROM、软盘、硬盘和磁-光盘。由于本发明领域中的技术人员能容易地实现所述过程，所以将不在此进行进一步的描述。
虽然关于特定实施例描述了本发明，但是本领域技术人员应该清楚，在不脱离由权利要求限定的本发明的精神和范围的情况下，可对其进行各种改变和调整。

Claims (15)

1.一种存储立体内容的方法，包括：
将与立体内容的片段信息相关的立体视频媒体信息存储为现该立体内容所需的元数据信息；以及
存储所述立体内容的基本流。
2.如权利要求1所述的方法，其中，将立体视频媒体信息定义为媒体文件格式的附加方框并加以存储。
3.如权利要求1所述的方法，还包括：
将立体内容的立体相机和显示信息存储为现该立体内容所需的元数据信息，
其中，将所述立体相机和显示信息定义为媒体文件格式的附加方框并加以存储。
4.如权利要求1所述的方法，其中，所述立体视频媒体信息包括立体图像构成类型信息。
5.如权利要求4所述的方法，其中，所述立体图像构成类型信息包括表示“并排”、“帧顺序”和“左/右图像序列”中的至少一个的信息。
6.如权利要求1所述的方法，其中，当立体内容的基本流从立体片段变为单像片段时以及当立体内容的基本流从单像片段变为立体片段时，立体视频媒体信息包括关于改变的片段的数量的信息。
7.如权利要求1所述的方法，其中，立体视频媒体信息包括对连续单像或立体采样的数量进行计数的信息。
8.如权利要求1所述的方法，其中，立体视频媒体信息包括对连续单像或立体开始采样的数量进行计数的信息。
9.如权利要求1所述的方法，其中，立体视频媒体信息包括关于当前采样是否是立体的信息。
10.如权利要求3所述的方法，其中，立体相机和显示信息包括关于如下中的至少一个的信息：相机参数是否存在、左相机和右相机之间的距离、左相机和右相机的排列、左/右相同焦点长度、基线到汇合点的距离以及左/右相机平移。
11.如权利要求3所述的方法，其中，立体相机和显示信息包括左图像和右图像之间的最大视差和最小视差。
12.如权利要求1所述的方法，其中，使用基于国际标准化组织的媒体文件以执行所述方法。
13.如权利要求12所述的方法，其中，在立体相机和显示信息中，用于识别立体片段的项目ID与项目位置方框联动使用。
14.一种存储立体内容的文件格式结构，包括：
媒体数据方框，用于存储立体内容的基本流；以及
用于存储与立体内容的片段信息相关的立体视频媒体信息的方框。
15.如权利要求14所述的文件格式结构，还包括：
轨迹参考方框，当立体内容包括多于两个基本流时，用于将基本流划分成主轨迹和辅助轨迹。
CN200880025524A 2007-06-19 2008-06-19 存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法 Pending CN101803394A (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
KR20070059709 2007-06-19
KR10-2007-0059709 2007-06-19
KR10-2007-0061362 2007-06-22
KR20070061362 2007-06-22
KR10-2007-0096267 2007-09-21
KR20070096267 2007-09-21
KR20070098665 2007-10-01
KR10-2007-0098665 2007-10-01
PCT/KR2008/003481 WO2008156318A2 (en) 2007-06-19 2008-06-19 Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata

Publications (1)

Publication Number Publication Date
CN101803394A true CN101803394A (zh) 2010-08-11

Family

ID=40156803

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200880025524A Pending CN101803394A (zh) 2007-06-19 2008-06-19 存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法

Country Status (6)

Country Link
US (1) US20100161686A1 (zh)
EP (3) EP2757788B1 (zh)
JP (1) JP2010530702A (zh)
KR (2) KR101276605B1 (zh)
CN (1) CN101803394A (zh)
WO (1) WO2008156318A2 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103339945A (zh) * 2011-11-11 2013-10-02 索尼公司 图像数据发送装置、图像数据发送方法和图像数据接收装置
US9693033B2 (en) 2011-11-11 2017-06-27 Saturn Licensing Llc Transmitting apparatus, transmitting method, receiving apparatus and receiving method for transmission and reception of image data for stereoscopic display using multiview configuration and container with predetermined format
CN108605168A (zh) * 2016-02-17 2018-09-28 高通股份有限公司 在媒体文件中虚拟现实视频的存储
CN110198451A (zh) * 2013-01-04 2019-09-03 高通股份有限公司 在多视图译码文件格式中当前视图对参考视图的相依性的指示
CN115037920A (zh) * 2016-10-12 2022-09-09 弗劳恩霍夫应用研究促进协会 空间不均等流媒体化

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0823512A2 (pt) 2007-04-12 2013-11-26 Thomson Licensing Ladrilhamento em codificação e decodificação de vídeo
WO2009048216A1 (en) * 2007-10-10 2009-04-16 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
KR101521655B1 (ko) 2007-10-13 2015-05-20 삼성전자주식회사 ＬＡＳｅＲ 기반의 단말을 위한 스테레오스코픽 입체 영상 컨텐츠 제공 장치 및 방법
JP5231563B2 (ja) * 2007-10-19 2013-07-10 サムスン エレクトロニクス カンパニー リミテッド 立体映像データを記録する方法
WO2009075495A1 (en) * 2007-12-10 2009-06-18 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
KR101506217B1 (ko) * 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
KR101530713B1 (ko) * 2008-02-05 2015-06-23 삼성전자주식회사 영상 파일을 생성하고 표시하기 위한 장치 및 방법
US20090199100A1 (en) * 2008-02-05 2009-08-06 Samsung Electronics Co., Ltd. Apparatus and method for generating and displaying media files
KR20100040640A (ko) 2008-10-10 2010-04-20 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
CN104768032B (zh) 2009-01-26 2018-06-01 汤姆森特许公司 用于视频解码的装置
KR101626486B1 (ko) 2009-01-28 2016-06-01 엘지전자 주식회사 방송 수신기 및 비디오 데이터 처리 방법
JP2010212948A (ja) 2009-03-10 2010-09-24 Sony Corp 再生装置、再生方法、記録装置、記録方法、プログラム、及び、データ構造
US8948247B2 (en) * 2009-04-14 2015-02-03 Futurewei Technologies, Inc. System and method for processing video files
WO2010126221A2 (en) * 2009-04-27 2010-11-04 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
US9942558B2 (en) 2009-05-01 2018-04-10 Thomson Licensing Inter-layer dependency information for 3DV
US8289374B2 (en) 2009-08-25 2012-10-16 Disney Enterprises, Inc. Method and system for encoding and transmitting high definition 3-D multimedia content
CA2772927C (en) 2009-09-03 2017-03-14 Lg Electronics Inc. Cable broadcast receiver and 3d video data processing method thereof
JP5343785B2 (ja) 2009-09-17 2013-11-13 ソニー株式会社 画像信号処理装置、送信装置、画像信号処理方法、プログラム、および画像信号処理システム
CN102783158A (zh) * 2010-01-03 2012-11-14 森西欧技术公司 用于在数字视频信号中检测压缩立体帧的方法及系统
US8743178B2 (en) 2010-01-05 2014-06-03 Dolby Laboratories Licensing Corporation Multi-view video format control
US9215445B2 (en) 2010-01-29 2015-12-15 Thomson Licensing Block-based interleaving
WO2011136621A2 (en) 2010-04-30 2011-11-03 Lg Electronics Inc. An apparatus of processing an image and a method of processing thereof
WO2011155776A2 (ko) 2010-06-09 2011-12-15 삼성전자 주식회사 프래그먼트 기반의 멀티미디어 스트리밍 서비스 제공 방법과 그 장치, 그리고 프래그먼트 기반의 멀티미디어 스트리밍 서비스 수신 방법과 그 장치
US20110304706A1 (en) * 2010-06-09 2011-12-15 Border John N Video camera providing videos with perceived depth
US9485492B2 (en) 2010-09-14 2016-11-01 Thomson Licensing Llc Compression methods and apparatus for occlusion data
GB2485532A (en) * 2010-11-12 2012-05-23 Sony Corp Three dimensional (3D) image duration-related metadata encoding of apparent minimum observer distances (disparity)
JP5668466B2 (ja) * 2010-12-28 2015-02-12 ソニー株式会社 画像処理装置、その制御方法およびプログラム
KR20120106157A (ko) * 2011-03-17 2012-09-26 삼성전자주식회사 실감 미디어 통합 데이터 파일을 구성 및 재생하는 방법과 그 장치
CN103959769B (zh) * 2012-02-02 2016-12-14 太阳专利托管公司 用于使用视差信息的3d媒体数据产生、编码、解码和显示的方法和装置
KR20150045349A (ko) 2013-10-18 2015-04-28 명지대학교 산학협력단 실감 효과 미디어 데이터 파일 구성 방법 및 장치, 실감 효과 미디어 데이터 파일 재생 방법 및 장치 및 실감 효과 미디어 데이터 파일 구조
WO2015056842A1 (ko) * 2013-10-18 2015-04-23 명지대학교 산학협력단 실감 효과 미디어 데이터 파일 구성 방법 및 장치, 실감 효과 미디어 데이터 파일 재생 방법 및 장치 및 실감 효과 미디어 데이터 파일 구조

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPN732395A0 (en) * 1995-12-22 1996-01-25 Xenotech Research Pty Ltd Image conversion and encoding techniques
EP0888018B1 (en) * 1996-02-28 2006-06-07 Matsushita Electric Industrial Co., Ltd. Optical disk having plural streams of digital video data recorded thereon in interleaved manner, and apparatuses and methods for recording on, and reproducing from, the optical disk
US6031564A (en) * 1997-07-07 2000-02-29 Reveo, Inc. Method and apparatus for monoscopic to stereoscopic image conversion
WO2000068946A1 (fr) * 1999-05-07 2000-11-16 Kabushiki Kaisha Toshiba Structure de donnees pour donnees en continu, et procede d'enregistrement et de reproduction de donnees en continu
JP2000350156A (ja) * 1999-06-09 2000-12-15 Hitachi Ltd 動画像情報の記憶方法及びこれを記録した記録媒体
US6831677B2 (en) * 2000-02-24 2004-12-14 Yissum Research Development Company Of The Hebrew University Of Jerusalem System and method for facilitating the adjustment of disparity in a stereoscopic panoramic image pair
WO2002076107A1 (en) * 2001-01-12 2002-09-26 Vrex, Inc. Method and apparatus for stereoscopic display using column interleaved data with digital light processing
JP2002318807A (ja) * 2001-04-19 2002-10-31 Matsushita Electric Ind Co Ltd メタデータ作成装置およびメタデータ作成方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
US7319720B2 (en) * 2002-01-28 2008-01-15 Microsoft Corporation Stereoscopic video
US6914526B2 (en) * 2002-03-22 2005-07-05 Trw Inc. Intrusion detection system using linear imaging
US7679616B2 (en) * 2002-04-25 2010-03-16 Sharp Kabushiki Kaisha Image data generation apparatus for adding attribute information regarding image pickup conditions to image data, image data reproduction apparatus for reproducing image data according to added attribute information, and image data recording medium related thereto
US20050248561A1 (en) * 2002-04-25 2005-11-10 Norio Ito Multimedia information generation method and multimedia information reproduction device
US7054888B2 (en) * 2002-10-16 2006-05-30 Microsoft Corporation Optimizing media player memory during rendering
JP4118146B2 (ja) * 2003-01-09 2008-07-16 三洋電機株式会社 立体画像処理装置
JP4259913B2 (ja) * 2003-05-08 2009-04-30 シャープ株式会社 立体画像処理装置、立体画像処理プログラムおよびそのプログラムを記録した記録媒体
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
JP2005026800A (ja) * 2003-06-30 2005-01-27 Konica Minolta Photo Imaging Inc 画像処理方法、撮像装置、画像処理装置及び画像記録装置
JP2005094168A (ja) * 2003-09-12 2005-04-07 Sharp Corp ファイル構造及びそれを用いる画像記録装置並びに画像再生装置
JP4529556B2 (ja) * 2004-06-24 2010-08-25 パナソニック株式会社 立体視用の画像ファイルを生成する電子機器、３次元画像データを生成する電子機器、画像ファイル生成方法、３次元画像データ生成方法および画像ファイルのファイル構造
KR101295471B1 (ko) * 2004-07-30 2013-08-09 익스트림 리얼리티 엘티디. 이미지 프로세싱을 기반으로 한 3ｄ 공간 차원용 시스템 및 방법
KR100590560B1 (ko) 2004-11-19 2006-06-19 에스케이 텔레콤주식회사 휴대 단말기에서 운용되는 애플리케이션 플랫폼과 휴대단말기 운영 체제 간의 인터페이스 방법 및 장치
JP4580787B2 (ja) * 2005-03-16 2010-11-17 株式会社東芝 半導体記憶装置およびその形成方法
KR100785013B1 (ko) * 2005-04-11 2007-12-12 삼성전자주식회사 3ｄ 압축 데이터 생성, 복원 방법 및 그 장치
KR100657322B1 (ko) * 2005-07-02 2006-12-14 삼성전자주식회사 로컬 3차원 비디오를 구현하기 위한 인코딩/디코딩 방법 및장치
KR100747598B1 (ko) * 2005-12-09 2007-08-08 한국전자통신연구원 디지털방송 기반의 3차원 입체영상 송수신 시스템 및 그방법
GB2439578B (en) * 2006-06-30 2011-11-09 Data Equation Ltd Data processing
KR100716142B1 (ko) * 2006-09-04 2007-05-11 주식회사 이시티 스테레오스코픽 영상 데이터의 전송 방법

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103339945A (zh) * 2011-11-11 2013-10-02 索尼公司 图像数据发送装置、图像数据发送方法和图像数据接收装置
US9693033B2 (en) 2011-11-11 2017-06-27 Saturn Licensing Llc Transmitting apparatus, transmitting method, receiving apparatus and receiving method for transmission and reception of image data for stereoscopic display using multiview configuration and container with predetermined format
CN108471546A (zh) * 2011-11-11 2018-08-31 索尼公司 图像数据发送装置和方法、图像数据接收装置
CN110198451A (zh) * 2013-01-04 2019-09-03 高通股份有限公司 在多视图译码文件格式中当前视图对参考视图的相依性的指示
CN110198451B (zh) * 2013-01-04 2023-04-07 高通股份有限公司 一种处理视频数据的方法、装置及存储媒体
CN108605168A (zh) * 2016-02-17 2018-09-28 高通股份有限公司 在媒体文件中虚拟现实视频的存储
CN108605168B (zh) * 2016-02-17 2020-11-03 高通股份有限公司 一种处理虚拟现实数据的方法、装置以及非暂时性计算机可读媒体
CN115037920A (zh) * 2016-10-12 2022-09-09 弗劳恩霍夫应用研究促进协会 空间不均等流媒体化
CN115037916A (zh) * 2016-10-12 2022-09-09 弗劳恩霍夫应用研究促进协会 空间不均等流媒体化

Also Published As

Publication number Publication date
WO2008156318A3 (en) 2009-02-05
WO2008156318A2 (en) 2008-12-24
EP2168384A2 (en) 2010-03-31
EP2168384A4 (en) 2013-11-06
EP2757788A1 (en) 2014-07-23
KR20080112149A (ko) 2008-12-24
KR20130004207A (ko) 2013-01-09
KR101276605B1 (ko) 2013-06-19
EP2757788B1 (en) 2020-03-11
JP2010530702A (ja) 2010-09-09
US20100161686A1 (en) 2010-06-24
KR101310214B1 (ko) 2013-09-24
EP2914000A1 (en) 2015-09-02

Similar Documents

Publication Publication Date Title
CN101803394A (zh) 存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法
KR101398168B1 (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
US9781403B2 (en) Method and apparatus for generating stereoscopic file
KR101530713B1 (ko) 영상 파일을 생성하고 표시하기 위한 장치 및 방법
US20090199100A1 (en) Apparatus and method for generating and displaying media files
WO2008054100A1 (en) Method and apparatus for decoding metadata used for playing stereoscopic contents
JP2011523285A (ja) カメラ・パラメータを利用したステレオスコピック映像データ・ストリーム生成方法及びその装置、並びにステレオスコピック映像復元方法及びその装置
KR20080039797A (ko) 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치
KR101480186B1 (ko) 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
KR101434674B1 (ko) 스테레오스코픽 파일을 생성하기 위한 장치 및 방법
KR101176065B1 (ko) 스테레오스코픽 영상에 관한 데이터를 전송하는 방법, 스테레오스코픽 영상을 재생하는 방법, 및 스테레오스코픽 영상 데이터의 파일 생성 방법
KR101591085B1 (ko) 영상 파일 생성 및 재생 장치 및 방법
KR101382618B1 (ko) 콘텐츠 정보 생성 방법 및 콘텐츠 정보를 이용한 콘텐츠처리 장치
KR20080092810A (ko) 미디어 표준 기반의 입체영상 파일 생성 장치 및 방법과이를 구현하기 위한 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100811