CN102347046A - 数据产生装置和方法、以及数据处理装置和方法 - Google Patents

数据产生装置和方法、以及数据处理装置和方法 Download PDF

Info

Publication number
CN102347046A
CN102347046A CN201110209390XA CN201110209390A CN102347046A CN 102347046 A CN102347046 A CN 102347046A CN 201110209390X A CN201110209390X A CN 201110209390XA CN 201110209390 A CN201110209390 A CN 201110209390A CN 102347046 A CN102347046 A CN 102347046A
Authority
CN
China
Prior art keywords
data
track
information
group
combination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201110209390XA
Other languages
English (en)
Other versions
CN102347046B (zh
Inventor
胜股充
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102347046A publication Critical patent/CN102347046A/zh
Application granted granted Critical
Publication of CN102347046B publication Critical patent/CN102347046B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4856—End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/912—Applications of a database
    • Y10S707/913—Multimedia

Abstract

本发明涉及一种数据产生装置和数据产生方法、以及数据处理装置和数据处理方法。该数据产生装置包括：编码部分，对多种数据进行编码并且产生编码数据；信息产生部分，产生指示多种数据的组合的多条组信息；以及文件产生部分，产生包括多种数据的编码数据和多条组信息的编码数据存储文件。

Description

数据产生装置和方法、以及数据处理装置和方法
技术领域
本发明涉及一种数据产生装置和数据产生方法、以及数据处理装置和数据处理方法，具体地讲，本发明涉及一种允许容易地选择多种数据的期望组合作为再现目标的数据产生装置和数据产生方法、以及数据处理装置和数据处理方法。
背景技术
MP4是用于存储由MPEG-4(运动图像专家组阶段4)系统等编码的数据的文件格式，并且在ISO/IEC 14496中被定义。例如，在JP-T-2006-507553、JP-T-2005-524128、JP-T-2005-527885、JP-T-2005-525627、日本专利特开No.2004-227633(下文中分别称作专利文献1到5)中描述MP4。
在过去，诸如主图像(视频)、音频(声音)、副图像(字幕)等的AV(音视频)数据逐个轨道地被存储在MP4文件中。顺便说一句，轨道是能够独立地管理的AV数据的单位。此外，在MP4文件中能够对同一种类(例如，主图像、音频、副图像等)的轨道进行分组。
发明内容
然而，还不能对不同种类的轨道进行分组。因此，还不能对多种轨道进行分组。结果，当设置为再现目标的初始值的各种类的轨道不是用户期望的轨道时，用户需要选择每一种类的期望轨道，由此改变作为再现目标的轨道。
例如，当用户希望聆听英语音频，与作为主图像的电影一起观看作为副图像的日语字幕，并且电影和日语音频的轨道被设置为再现目标的初始值时，用户需要选择英语音频轨道作为再现目标的音频的轨道，并且选择日语字幕的轨道作为再现目标的副图像的轨道，这是麻烦的。因此，希望能够容易地选择多种轨道的期望组合作为再现目标。
鉴于这种情形作出了本发明。希望能够容易地选择多种数据的期望组合作为再现目标。
根据本发明的第一实施例，提供了一种数据产生装置，该数据产生装置包括：编码部分，对多种数据进行编码，并且产生编码数据；信息产生部分，产生指示多种数据的组合的多条组信息；和文件产生部分，产生包括多种数据的编码数据和多条组信息的编码数据存储文件。
根据本发明的第一实施例的数据产生方法对应于根据本发明的第一实施例的数据产生装置。
在本发明的第一实施例中，对多种数据进行编码，产生编码数据，产生指示多种数据的组合的多条组信息，并且，产生包括多种数据的编码数据和多条组信息的编码数据存储文件。
根据本发明的第二实施例，提供了一种数据处理装置，该数据处理装置包括：获得部分，获得包括多种数据的编码数据和指示多种数据的组合的多条组信息的编码数据存储文件；显示控制部分，基于多条组信息显示用于选择由组信息指示的组合的画面；选择部分，根据用户对画面的输入从由多条组信息指示的组合选择作为再现目标的数据的组合；以及解码部分，对包括在由选择部分选择的组合中的所有数据的编码数据进行解码。
根据本发明的第二实施例的数据处理方法对应于根据本发明的第二实施例的数据处理装置。
在本发明的第二实施例中，获得包括多种数据的编码数据和指示多种数据的组合的多条组信息的编码数据存储文件；基于多条组信息显示用于选择由组信息指示的组合的画面；根据用户对画面的输入从由多条组信息指示的组合选择作为再现目标的数据的组合；并且，对包括在选择的组合中的所有数据的编码数据进行解码。
根据本发明的第一实施例，可以产生能够容易地选择多种数据的期望组合作为再现目标的文件。
根据本发明的第二实施例，能够容易地选择多种数据的期望组合作为再现目标。
附图说明
图1是示出作为应用本技术的数据产生装置的记录装置的一个实施例的配置的例子的框图；
图2是示出MP4文件的配置的例子的示图；
图3是示出呈示轨道组框(presentation track group box)的描述的例子的示图；
图4是示出轨道的第一例子的示图；
图5是示出记录了图4所示的轨道的情况下的组信息的例子的示图；
图6是示出轨道的第二例子的示图；
图7是示出在记录了图6所示的轨道的情况下的组信息的例子的示图；
图8是示出轨道的第三例子的示图；
图9是帮助解释画面的黑带部分的示图；
图10是示出在记录了图8所示的轨道的情况下的组信息的例子；
图11是帮助解释记录处理的流程图；
图12是示出作为应用本技术的数据处理装置的再现装置的一个实施例的配置的例子的框图；
图13是示出菜单画面的例子的示图；
图14是示出当选择主部分按钮时显示的画面的例子的示图；
图15是示出当选择呈示按钮时显示的画面的例子的示图；
图16是帮助解释再现处理的流程图；
图17是帮助解释轨道改变处理的流程图；以及
图18是示出计算机的一个实施例的配置的例子的示图。
具体实施方式
[记录装置的实施例的配置的例子]
图1是示出作为应用本技术的数据产生装置的记录装置的实施例的配置的例子的框图。
图1的记录装置10包括记录处理部分11、记录介质12、用户输入部分13和控制部分14。记录装置10产生并记录AV数据的MP4文件。
具体地讲，记录处理部分11包括数据输入部分21、数据编码部分22和记录部分23。
记录处理部分11中的数据输入部分21从记录装置10的外部获得以轨道为单位的AV数据。AV数据包括2D主图像、3D主图像、用于从2D主图像到3D主图像的转换的图像(用于转换的图像在下文中称作转换图像)、各种语言的音频、各种语言的2D副图像、各种语言的3D副图像等。
顺便说一句，例如，3D主图像包括用于左眼的主图像和用于右眼的主图像。这同样适合于3D副图像。转换图像是用于左眼的主图像和用于右眼的主图像中的一个。在再现转换图像时，2D主图像用作另一个图像。副图像包括字幕、注释图像、菜单画面等。
数据输入部分21(信息产生部件)根据来自控制部分14的指示产生指示主图像、音频和副图像的至少两种轨道的组合的组信息。数据输入部分21将AV数据和组信息提供给数据编码部分22。
数据编码部分22包括预处理部分31、编码部分32和文件产生部分33。数据编码部分22产生MP4文件。
具体地讲，数据编码部分22中的预处理部分31对作为从数据输入部分21提供的3D图像的3D主图像和3D副图像的以轨道为单位的AV数据应用预定系统的预处理。预定系统包括帧连续系统(frame sequentialsystem)、并排系统(side by side system)、顶底系统(top and bottomsystem)等。
帧连续系统的预处理是交替地输出形成3D图像的用于左眼的图像和用于右眼的图像的AV数据的处理。并排系统的预处理是从3D图像的AV数据产生下述图像的AV数据并且输出所述图像的AV数据的处理：在所述图像中，形成3D图像的用于左眼的图像设置于画面上的左区域和右区域中的一个区域中，用于右眼的图像设置于另一个区域中。顶底系统的预处理是从3D图像的AV数据产生下述图像的AV数据并且输出所述图像的AV数据的处理：在所述图像中，形成3D图像的用于左眼的图像设置于画面上的上区域和下区域中的一个区域中，用于右眼的图像设置于另一个区域中。
此外，预处理部分31向编码部分32原样地提供除3D主图像和3D副图像的AV数据以外的AV数据和组信息。
编码部分32(编码部件)通过根据MP4的系统对以轨道为单位的AV数据(即，从预处理部分31提供的AV数据)进行编码。例如，编码部分32通过MPEG-1系统、MPEG-2系统、MPEG-4系统等对主图像的AV数据进行编码，并且通过JPEG(联合图像专家组)系统、PNG(便携式网络图像)系统等对副图像的AV数据进行编码。此外，编码部分32通过AAC(先进音频编码)系统、MP3(运动图像专家组音频层-3)系统等对音频的AV数据进行编码。
编码部分32向文件产生部分33提供以轨道为单位的AV流(即，作为编码的结果而获得的AV流)。编码部分32还向文件产生部分33原样地提供组信息。
文件产生部分33(文件产生部件)使用从编码部分32提供的以轨道为单位的AV流和组信息、以及关于每个轨道的管理信息(即，从控制部分14提供的管理信息)产生MP4文件。文件产生部分33将产生的MP4文件提供给记录部分23。
记录部分23将从文件产生部分33提供的MP4文件提供给记录介质12以将MP4文件记录在记录介质12上。
由闪存、HDD(硬盘驱动器)、DVD(数字多功能盘)等形成记录介质12。
用户输入部分13包括操作按钮等。用户输入部分13接收来自用户的指示，并且将指示提供给控制部分14。
控制部分14对记录处理部分11的每个部分执行诸如控制等的处理。例如，控制部分14根据来自用户输入部分13的指示为每个轨道确定编码系统，并且控制编码部分32以通过编码系统对每个轨道进行编码。此外，控制部分14根据来自用户输入部分13的指示产生包括轨道ID(即，对于每个轨道唯一的ID)、指示轨道的内容的信息、编码系统等的管理信息，并且将管理信息提供给文件产生部分33。
[MP4文件的配置的例子]
图2是示出由文件产生部分33产生的MP4文件的配置的例子的示图。
如图2所示，MP4文件具有面向对象数据结构。每个对象称作框(Box)。
图2的MP4文件包括文件类型框(ftyp)、电影框(moov)和实际数据框(mdat)。
关于文件类型的信息设置于文件类型框中。
关于以轨道为单位的AV流(即，设置于实际数据框中的AV流)的管理信息设置于电影框中。具体地讲，电影框包括设置组信息的呈示轨道组框(PTGP)、设置关于每个轨道的管理信息的关于每个轨道的框(trak)等。
AV流以轨道为单位设置于实际数据框中。
[呈示轨道组框的描述的例子]
图3是示出呈示轨道组框的描述的例子的示图。
图3所示的呈示轨道组框的描述的第三行中的描述“for(i＝1；i≤number_of_presentations；i++)”指示：第四到第九行中的描述被重复其数目等于组信息的条数的次数。即，第四到第九行中的描述是组信息。
具体地讲，第四行中的描述“presentation_unit_size”指示组信息的数据大小。第五行中的描述“number_of_track_IDs”指示包括在由组信息指示的组合中的轨道的轨道ID的数目。第六行中的描述“for(j＝1；j≤number_of_track_IDs；j++)”指示：第七行中的描述被重复其数目等于包括在由组信息指示的组合中的轨道的轨道ID的数目的次数。第七行中的描述“track_ID”指示包括在由组信息指示的组合中的轨道的轨道ID。第九行中的描述“metadata”指示包括在由组信息指示的组合中的轨道的内容的元数据。例如，这个元数据是由UTF16BE系统编码的字符数据，并且是以NULL字符结尾的数据。
如上所述，对于呈示轨道组框中的每条组信息，描述组信息的大小、包括在由组信息指示的组合中的所有轨道的数目和这些轨道的轨道ID、以及元数据。
[轨道和组信息的例子]
图4到图10是帮助解释在记录介质12上记录的轨道和组信息的例子的示图。
图4是示出记录在记录介质12上的轨道的第一例子的示图。
在图4的例子中，轨道ID为1到6的六个轨道记录在记录介质12上。轨道ID为“1”的轨道是主图像的轨道，并且由2D美国电影的图像数据形成。轨道ID为“2”的轨道是第一音频轨道，并且由日语的5.1-ch音频的音频数据形成。轨道ID为“3”的轨道是第二音频轨道，并且由日语的2-ch音频的音频数据形成。轨道ID为“4”的轨道是第三音频轨道，并且由英语的5.1-ch音频的音频数据形成。
轨道ID为“5”的轨道是第一副图像的轨道，并且由日语的2D字幕的图像数据形成。轨道ID为“6”的轨道是第二副图像的轨道，并且是日语的2D注释图像的图像数据。例如，这个注释图像是示出由2D美国电影的导演执行的注释的日语翻译的图像。
图5是示出在图4所示的轨道被记录在记录介质12上的情况下的组信息的例子的示图。
在图5的例子中，5条组信息被记录在记录介质12上。第一组信息包括轨道ID“1”和“2”以及元数据“日语配音(5.1ch)”。即，第一组信息指示轨道ID为“1”的2D美国电影的图像的轨道与轨道ID为“2”的日语5.1-ch音频的轨道的组合。基于这个第一组信息再现的图像和音频是2D美国电影的5.1-ch日语配音版本。
第二组信息包括轨道ID“1”和“3”以及元数据“日语配音(2ch)”。即，第二组信息指示轨道ID为“1”的2D美国电影的图像的轨道与轨道ID为“3”的日语2-ch音频的轨道的组合。基于这个第二组信息再现的图像和音频是2D美国电影的2-ch日语配音版本。
第三组信息包括轨道ID“1”和“4”以及元数据“英语(5.1ch)”。即，第三组信息指示轨道ID为“1”的2D美国电影的图像的轨道与轨道ID为“4”的英语5.1ch音频的轨道的组合。基于这个第三组信息再现的图像和音频是2D美国电影。
第四组信息包括轨道ID“1”、“4”和“5”以及元数据“英语(5.1ch，日语字幕)”。即，第四组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“4”的英语5.1-ch音频的轨道和轨道ID为“5”的日语2D字幕的轨道的组合。基于这个第四组信息再现的图像和音频是2D美国电影的日语字幕版本。
第五组信息包括轨道ID“1”、“4”和“6”以及元数据“英语(5.1ch，日语注释)”。即，第五组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“4”的英语5.1-ch音频的轨道和轨道ID为“6”的日语的2D注释图像的轨道的组合。基于这个第五组信息再现的图像和音频是具有日语注释的2D美国电影。
图6是示出记录在记录介质12上的轨道的第二例子的示图。
在图6的例子中，轨道ID为1到5的5个轨道被记录在记录介质12上。轨道ID为“1”的轨道是主图像的轨道，并且由2D美国电影的图像数据形成。轨道ID为“2”的轨道是第一音频轨道，并且由日语的2-ch音频的音频数据形成。轨道ID为“3”的轨道是第二音频轨道，并且由英语的2-ch音频的音频数据形成。
轨道ID为“4”的轨道是第一副图像的轨道，并且由日语音频的2D强迫字幕的图像数据形成。顺便说一句，该强迫字幕是这样的主语言的字幕：当作为再现目标的音频包括与主语言不同的音频时要显示该字幕，并且，该字母对应于不同语言的音频。例如，该强迫字幕是这样的日语字幕，当作为再现目标的音频是日语音频并且除日语以外的语言的音频被包括在日语音频的中间时要显示该字幕，并且，该字幕对应于除日语以外的语言的音频。此外，日语音频的2D强迫字幕是当日语音频被设置为再现目标时要显示的日语的2D强迫字幕。
轨道ID为“5”的轨道是第二副图像的轨道，并且是日语的2D字幕和日语的2D强迫字幕的图像数据。
图7是示出在图6所示的轨道被记录在记录介质12上的情况下的组信息的例子的示图。
在图7的例子中，两条组信息被记录在记录介质12上。第一组信息包括轨道ID“1”、“2”和“4”以及元数据“日语配音(强迫字幕)”。即，第一组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“2”的日语2-ch音频的轨道和轨道ID为“4”的日语音频的2D强迫字幕的轨道的组合。基于这个第一组信息再现的图像和音频是具有强迫字幕的2D美国电影的日语配音版本。
第二组信息包括轨道ID“1”、“3”和“5”以及元数据“英语音频(日语字幕+强迫字幕)”。即，第二组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“3”的英语2-ch音频的轨道、以及轨道ID为“5”的日语2D字幕和日语2D强迫字幕的轨道的组合。基于这个第二组信息再现的图像和音频是具有强迫字幕的2D美国电影的日语字幕版本。
图8是示出记录在记录介质12上的轨道的第三例子的示图。
在图8的例子中，轨道ID为1到7的七个轨道被记录在记录介质12上。轨道ID为“1”的轨道是第一主图像的轨道，并且由2D美国电影的图像数据形成。轨道ID为“2”的轨道是第二主图像的轨道，并且由美国电影的转换图像的图像数据形成。
轨道ID为“3”的轨道是第一音频轨道，并且由日语的2-ch音频的音频数据形成。轨道ID为“4”的轨道是第二音频轨道，并且由英语2-ch音频的音频数据形成。
轨道ID为“5”的轨道是第一副图像的轨道，并且由日语2D字幕的图像数据形成。轨道ID为“6”的轨道是第二副图像的轨道，并且由日语3D字幕的图像数据形成。轨道ID为“7”的轨道是第三副图像的轨道，并且由在画面的黑带部分中显示的日语的3D字幕的图像数据形成(在下文中这些字幕将称作3D日语黑带字幕)。
如图9所示，画面的黑带部分是当主图像是电影宽银幕大小的电影等时设置在画面的上部或下部中的黑色显示区域40。
图10是示出在图8所示的轨道被记录在记录介质12上的情况下的组信息的例子的示图。
在图10的例子中，5条组信息被记录在记录介质12上。第一组信息包括轨道ID“1”和“3”以及元数据“[2D]日语配音”。即，第一组信息指示轨道ID为“1”的2D美国电影的图像的轨道和轨道ID为“3”的日语2-ch音频的轨道的组合。基于这个第一组信息再现的图像和音频是2D美国电影的日语配音版本。
第二组信息包括轨道ID“1”、“4”和“5”以及元数据“[2D]英语音频和日语字幕”。即，第二组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“4”的英语2-ch音频的轨道和轨道ID为“5”的日语2D字幕的轨道的组合。基于这个第二组信息再现的图像和音频是2D美国电影的日语字幕版本。
第三组信息包括轨道ID“1”、“2”和“3”以及元数据“[3D]日语配音”。即，第三组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“2”的美国电影的转换图像的轨道和轨道ID为“3”的日语2-ch音频的轨道的组合。基于这个第三组信息再现的图像和音频是3D美国电影的日语配音版本。
第四组信息包括轨道ID“1”、“2”、“4”和“6”以及元数据“[3D]英语音频和日语字幕”。即，第四组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“2”的美国电影的转换图像的轨道、轨道ID为“4”的英语2-ch音频的轨道和轨道ID为“6”的日语3D字幕的轨道的组合。基于这个第四组信息再现的图像和音频是3D美国电影的日语字幕。
第五组信息包括轨道ID“1”、“2”、“4”和“7”以及元数据“[3D]英语音频和日语字幕2”。即，第五组信息指示轨道ID为“1”的2D美国电影的图像的轨道、轨道ID为“2”的美国电影的转换图像的轨道、轨道ID为“4”的英语2-ch音频的轨道和轨道ID为“7”的3D日语黑带字幕的轨道的组合。基于这个第五组信息再现的图像和音频是3D美国电影的日语黑带字幕版本。
如上所述，仅仅指示预定组合的组信息而非指示所有组合的组信息被记录在记录介质12上。
例如，图5中的组信息没有包括指示轨道ID为“1”、“2”和“5”的轨道的组合的组信息。即，由于很少有用户希望聆听日语音频并与2D美国电影的图像一起观看日语2D字幕，所以指示2D美国电影的图像的轨道、日语音频的轨道和日语2D字幕的轨道的组合的组信息没有被记录在记录介质12上。
此外，图7中的组信息没有包括指示没有包括轨道ID为“4”或“5”的轨道的组合的组信息。即，由于很少有用户不需要强迫字幕，所以指示没有包括包含强迫字幕的轨道的组合的组信息没有被记录在记录介质12上。
因此，当用户指定组信息作为指示作为用于再现记录介质12的再现装置(以后描述该再现装置)上的再现目标的轨道的组合的信息时，与指示所有组合的组信息被记录在记录介质12上的情况相比较，用户能够快速地选择并指定期望的组信息。
[数据产生装置的处理的描述]
图11是帮助解释由图1的记录装置10执行的记录处理的流程图。
在步骤S11中，数据输入部分21从记录装置10的外部获得AV数据，例如，2D主图像、3D主图像、转换图像、各种语言的音频、各种语言的2D副图像、各种语言的3D副图像等。数据输入部分21向数据编码部分22提供AV数据。
在步骤S12中，数据输入部分21根据来自控制部分14的指示产生组信息，并且将组信息提供给数据编码部分22。
在步骤S13中，数据编码部分22中的预处理部分31对作为从数据输入部分21提供的3D图像的3D主图像和3D副图像的以轨道为单位的AV数据执行预定系统的预处理。此外，预处理部分31将从数据输入部分21提供的除3D主图像和3D副图像的AV数据之外的AV数据和组信息原样地提供给编码部分32。
在步骤S14中，编码部分32通过根据MP4的系统对从预处理部分31提供的以轨道为单位的AV数据进行编码。编码部分32将作为编码的结果而获得的以轨道为单位的AV流提供给文件产生部分33。此外，编码部分32将组信息原样地提供给文件产生部分33。
在步骤S15中，文件产生部分33使用从编码部分32提供的以轨道为单位的AV流和组信息、以及从控制部分14提供的关于每个轨道的管理信息产生MP4文件。文件产生部分33将产生的MP4文件提供给记录部分23。
在步骤S16中，记录部分23将从文件产生部分33提供的MP4文件提供给记录介质12，以在记录介质12上记录MP4文件。该处理然后结束。
如上所述，记录装置10在MP4文件中设置组信息。因此，以后描述的再现装置能够向用户呈示组信息。结果，仅仅通过从呈示的组信息选择期望的组信息，用户能够容易地指定由组信息指示的轨道的组合作为再现目标。此外，记录装置10的用户能够使得以后描述的再现装置的用户识别由记录装置10的用户所期望的合适轨道的组合。
[再现装置的实施例的配置的例子]
图12是示出作为应用本技术的数据处理装置的再现装置的实施例的配置的例子的框图。
图12的再现装置50包括记录介质12、再现处理部分51、用户输入部分52和控制部分53。再现装置50从由图1的记录装置10记录了MP4文件的记录介质12再现MP4文件。
具体地讲，再现处理部分51包括读出部分61、数据解码部分62、显示部分63和扬声器64。
再现处理部分51中的读出部分61(获得部件)读取并获得记录在记录介质12上的MP4文件。读出部分61将MP4文件提供给数据解码部分62。
数据解码部分62包括文件分析部分71、解码部分72和显示信息产生部分73。
数据解码部分62中的文件分析部分71分析从读出部分61提供的MP4文件，并且获得设置在文件类型框和电影框中的每一个中的信息。文件分析部分71然后向控制部分53提供设置在电影框的呈示轨道组框中的组信息和设置在关于每个轨道的框中的关于每个轨道的管理信息。此外，根据来自控制部分53的指示，文件分析部分71分析MP4文件，获得轨道的AV流作为设置于实际数据框中的再现目标，并且将AV流提供给解码部分72。
解码部分72(解码部件)在控制部分53的控制之下通过与图1中的编码系统32的编码系统对应的系统对从文件分析部分71提供的AV流进行解码。解码部分72将作为解码的结果而获得的AV数据提供给显示信息产生部分73。
显示信息产生部分73根据来自控制部分53的指示基于从解码部分72提供的菜单画面的AV数据实现在显示部分63上显示菜单画面。此外，显示信息产生部分73(显示控制部件)基于从控制部分53提供的管理信息或组信息实现在显示部分63上显示用于选择要设置成再现目标的轨道的画面。
显示信息产生部分73对作为从解码部分72提供的3D图像的3D主图像和3D副图像的AV数据应用与图1中的预处理部分31对应的系统的后处理，并且产生用于左眼的图像和用于右眼的图像的AV数据。此外，显示信息产生部分73使用从解码部分72提供的2D主图像和转换图像的AV数据来产生用于左眼的图像和用于右眼的图像的AV数据。
基于产生的用于左眼的图像和用于右眼的图像的AV数据，显示信息产生部分73实现在显示部分63上显示与AV数据对应的3D主图像和3D副图像。此外，基于除从解码部分72提供的3D主图像、3D副图像和转换图像以外的图像的AV数据，显示信息产生部分73实现在显示部分63上显示与该AV数据对应的2D主图像和2D副图像。此外，基于音频的AV数据，显示信息产生部分73向扬声器64输出与AV数据对应的音频。
用户输入部分52包括操作按钮等。用户输入部分52接收来自用户的指示，并且将指示提供给控制部分53。
控制部分53对再现处理部分51的每个部分执行诸如控制等的处理。例如，控制部分53根据来自用户输入部分52的指示向显示信息产生部分73提供管理信息或组信息。此外，控制部分53基于来自用户输入部分52的指示和管理信息或组信息确定作为再现目标的轨道。控制部分53然后指示文件分析部分71获得作为再现目标的轨道的AV流。
[在显示部分上进行显示的画面的例子]
图13到图15是示出在显示部分63上进行显示的画面的例子的示图。
顺便说一句，图13到图15是示出在图8所示的轨道和图10所示的组信息被记录在记录介质12上的情况下的画面的例子的示图。
图13是示出菜单画面的例子的示图。
如图13所示，菜单画面100包括主部分按钮101、音频按钮102、字幕按钮103和呈示按钮104。
选择主部分按钮101以显示用于选择美国电影的图像的轨道作为再现目标的画面。选择音频按钮102以显示用于选择音频的轨道作为再现目标的画面。选择字幕按钮103以显示用于选择字幕的轨道作为再现目标的画面。选择呈示按钮104以显示用于选择指示作为再现目标的轨道的组合的组信息的画面。
当用户通过操作用户输入部分52给出指示以选择图13的菜单画面100上的主部分按钮101时，显示部分63显示图14所示的画面110。
具体地讲，控制部分53根据从用户输入部分52提供的选择主部分按钮101的指示向显示信息产生部分73提供关于主图像的轨道的管理信息。基于包括在从控制部分53提供的关于主图像的轨道的管理信息中的指示轨道的内容的信息，显示信息产生部分73实现了指示轨道ID为“1”的轨道的内容的2D再现按钮111和指示轨道ID为“2”的轨道的内容的3D再现按钮112的显示。
选择2D再现按钮111以设置轨道ID为“1”的2D美国电影的图像的轨道作为再现目标。选择3D再现按钮112以显示具有轨道ID为“1”的2D美国电影的图像的轨道和轨道ID为“2”的美国电影的转换图像的轨道的3D美国电影的图像作为再现目标。
顺便说一句，尽管附图中没有示出，但是与选择主部分按钮101的情况一样，当选择音频按钮102或字幕按钮103时，基于包括在关于音频或副图像的轨道的管理信息中的指示轨道的内容的信息，显示指示音频或副图像的各个轨道的内容的按钮。
另一方面，当用户通过操作用户输入部分52给出选择图13的菜单画面100上的呈示按钮104的指示时，显示部分63显示图15所示的画面120。
具体地讲，控制部分53根据从用户输入部分52提供的选择呈示按钮104的指示向显示信息产生部分73提供组信息。基于包括在从控制部分53提供的组信息中的元数据，显示信息产生部分73实现了与第一组信息的元数据对应的“[2D]日语配音”按钮121、与第二组信息的元数据对应的“[2D]英语音频和日语字幕”按钮122、与第三组信息的元数据对应的“[3D]日语配音”按钮123、与第四组信息的元数据对应的“[3D]英语音频和日语字幕”按钮124、以及与第五组信息的元数据对应的“[3D]英语音频和日语字幕2”按钮125的显示。
选择“[2D]日语配音”按钮121以设置由第一组信息指示的轨道即轨道ID为“1”和“3”的轨道的组合作为再现目标。选择“[2D]英语音频和日语字幕”按钮122以设置由第二组信息指示的轨道即轨道ID为“1”、“4”和“5”的轨道的组合作为再现目标。选择“[3D]日语配音”按钮123以设置由第三组信息指示的轨道即轨道ID为“1”、“2”和“3”的轨道的组合作为再现目标。
选择“[3D]英语音频和日语字幕”按钮124以设置由第四组信息指示的轨道即轨道ID为“1”、“2”、“4”和“6”的轨道的组合作为再现目标。选择“[3D]英语音频和日语字幕2”按钮125以设置由第五组信息指示的轨道即轨道ID为“1”、“2”、“4”和“7”的轨道的组合作为再现目标。
[再现装置的处理的描述]
图16是帮助解释由图12的再现装置50执行的再现处理的流程图。例如，当用户通过操作用户输入部分52给出再现记录介质12的指示时，这个再现处理开始。
在图16中的步骤30中，根据与来自用户的再现指示对应的来自控制部分53的指示，读出部分61读取记录在记录介质12上的MP4文件，并且将MP4文件提供给数据解码部分62。
在步骤S31中，文件分析部分71分析从读出部分61提供的MP4文件，并且确定在MP4文件的电影框中是否存在呈示轨道组框。
当在步骤S31中确定存在呈示轨道组框时，文件分析部分71向控制部分53提供设置于呈示轨道组框中的组信息。文件分析部分71还向控制部分53提供设置于电影框中的关于每个轨道的框中的关于每个轨道的管理信息。
然后，在步骤S32中，控制部分53从由文件分析部分71提供的组信息选择预定组信息。
例如，第一组信息选择方法是选择第一位置处的组信息的方法。在这种情况下，记录装置10的用户(记录介质12的制造者)将记录装置10的用户所期望的组信息设置于第一位置处。由此，能够在再现记录介质12时选择记录装置10的用户所期望的组信息。
例如，第二组信息选择方法是选择包括使用再现装置50的国家的语言的音频的轨道的组信息的方法。当使用这个方法时，控制部分53识别包括在每条组信息中的轨道ID并且从关于轨道的管理信息识别具有轨道ID的轨道的内容。控制部分53然后选择包括其内容是使用再现装置50的国家的语言的音频的轨道的轨道ID的组信息。顺便说一句，例如，当存在包括其内容是使用再现装置50的国家的语言的音频的轨道的轨道ID的多条组信息时，选择首先检测的组信息。
例如，第三组信息选择方法是选择包括使用再现装置50的国家的语言的字幕的轨道的组信息的方法。当使用这个方法时，控制部分53识别包括在每条组信息中的轨道ID，并且从关于轨道的管理信息识别具有轨道ID的轨道的内容。控制部分53然后选择包括其内容是使用再现装置50的国家的语言的字幕的轨道的轨道ID的组信息。顺便说一句，当存在包括其内容是使用再现装置50的国家的语言的字幕的轨道的轨道ID的多条钮信息时，例如，选择首先检测的组信息。
顺便说一句，例如，用户经由用户输入部分52指定由第二选择方法和第三选择方法使用的使用再现装置50的国家的语言。
在步骤S33中，控制部分53设置包括在步骤S32中选择的组信息中的所有轨道ID作为用作再现目标的轨道的轨道ID。然后，控制部分53指示文件分析部分71获得具有轨道ID的轨道的AV流，然后使得该处理进入步骤S35。
另一方面，当在步骤S31中确定不存在呈示轨道组框时，文件分析部分71向控制部分53提供设置于电影框中的关于每个轨道的框中的关于每个轨道的管理信息。
然后，在步骤S34中，控制部分53将预先设置为轨道ID的初始值的预定轨道ID设置为用作再现目标的轨道的轨道ID。轨道ID的初始值例如设置于电影框中，并且经由文件分析部分71提供给控制部分53。在步骤S34的处理以后，控制部分53指示文件分析部分71获得具有设置的轨道ID的轨道的AV流，然后使得该处理进入步骤S35。
在步骤S35中，根据来自控制部分53的指示，文件分析部分71分析MP4文件，获得作为设置于实际数据框中的再现目标的轨道的AV流，并且将AV流提供给解码部分72。
在步骤S36中，解码部分72在控制部分53的控制之下通过与图1中的编码部分32的编码系统对应的系统对从文件分析部分71提供的AV流进行解码。解码部分72将作为解码的结果而获得的AV数据提供给显示信息产生部分73。
在步骤S37中，基于从解码部分72提供的AV数据，显示信息产生部分73实现了在显示部分63上显示与AV数据对应的主图像和副图像，并且将与AV数据对应的音频输出到扬声器64。该处理然后结束。
图17是帮助解释用于由图12中的再现装置50执行的改变作为再现目标的轨道的轨道改变处理的流程图。例如，当用户通过操作用户输入部分52给出显示菜单画面的指示时，这个轨道改变处理开始。
顺便说一句，尽管将参照图17描述在图8所示的轨道和图10所示的组信息被记录在记录介质12上的情况下的轨道改变处理，但是还可以在其它轨道和其它组信息被记录在记录介质12上的情况下执行类似的处理，仅仅显示的按钮的类型不同。
在图17中的步骤S51中，根据与用户的显示菜单画面100的指示对应的来自控制部分53的指示，显示信息产生部分73基于从解码部分72提供的菜单画面的AV数据实现了在显示部分63上显示菜单画面100。
在步骤S52中，控制部分53确定是否选择了菜单画面100内的呈示按钮104。当在步骤S52中确定选择了呈示按钮104，则控制部分53将组信息提供给显示信息产生部分73。
然后，在步骤S53中，显示信息产生部分73基于包括在从控制部分53提供的组信息中的元数据实现了图15中的“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、和“[3D]英语音频和日语字幕2”按钮125的显示。
在步骤S54中，控制部分53确定是否选择了“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、和“[3D]英语音频和日语字幕2”按钮125中的一个。
当在步骤S54中确定没有选择“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、和“[3D]英语音频和日语字幕2”按钮125中的一个时，控制部分53等待直到选择了“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、和“[3D]英语音频和日语字幕2”按钮125中的一个。
当在步骤S54中确定选择了“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、和“[3D]英语音频和日语字幕2”按钮125中的一个时，该处理进入步骤S55。
在步骤S55中，控制部分53将设置为再现目标的轨道的轨道ID改变成包括在与选择的“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、或“[3D]英语音频和日语字幕2”按钮125对应的组信息内的轨道ID。
即，控制部分53选择由与选择的“[2D]日语配音”按钮121、“[2D]英语音频和日语字幕”按钮122、“[3D]日语配音”按钮123、“[3D]英语音频和日语字幕”按钮124、或“[3D]英语音频和日语字幕2”按钮125对应的组信息指示的组合作为用作再现目标的轨道的组合。该处理然后结束。
另一方面，当在步骤S52中确定没有选择呈示按钮104时，控制部分53在步骤S56中确定是否选择了主部分按钮101。
当在步骤S56中确定选择了主部分按钮101时，控制部分53向显示信息产生部分73提供关于主图像的轨道的管理信息。
然后，在步骤S57中，显示信息产生部分73基于指示主图像的轨道的内容的信息实现了图14中的2D再现按钮111和3D再现按钮112的显示，该信息被包括在从控制部分53提供的关于主图像的轨道的管理信息中。
在步骤S58中，控制部分53确定是否选择了2D再现按钮111和3D再现按钮112中的一个。当在步骤S58中确定没有选择2D再现按钮111和3D再现按钮112中的一个时，控制部分53等待直到选择了2D再现按钮111和3D再现按钮112中的一个。
当在步骤S58中确定选择了2D再现按钮111和3D再现按钮112中的一个时，该处理进入步骤S59。
在步骤S59中，控制部分53将设置为再现目标的主图像的轨道的轨道ID改变成与选择的2D再现按钮111或3D再现按钮112对应的主图像的轨道的轨道ID。该处理然后结束。
另一方面，当在步骤S56中确定没有选择主部分按钮101时，步骤S60中的控制部分53确定是否选择了音频按钮102。
当在步骤S60中确定选择了音频按钮102时，步骤S61中的控制部分53向显示信息产生部分73提供关于音频的轨道的管理信息。
然后，在步骤S61中，显示信息产生部分73基于指示音频的轨道的内容的信息实现了各种按钮的显示，该信息被包括从控制部分53提供的关于音频的轨道的管理信息中。
在步骤S62中，控制部分53确定是否选择了在步骤S61中显示的按钮中的一个。当在步骤S62中确定没有选择在步骤S61中显示的按钮中的一个时，控制部分53等待直到选择了在步骤S61中显示的按钮中的一个。
当在步骤S62中确定选择了在步骤S61中显示的按钮中的一个时，该处理进入步骤S63。在步骤S63中，控制部分53将设置为再现目标的音频的轨道的轨道ID改变成与选择的按钮对应的音频的轨道的轨道ID。该处理然后结束。
另一方面，当在步骤S60中确定没有选择音频按钮102时，控制部分53在步骤S64中确定是否选择了字幕按钮103。
当在步骤S64中确定没有选择字幕按钮103时，该处理返回到步骤S52以重复步骤S52、S56、S60和S64的处理，直到选择了呈示按钮104、主部分按钮101、音频按钮102或字幕按钮103。
另一方面，当在步骤S64中确定选择了字幕按钮103时，控制部分53在步骤S65中将关于字幕的轨道的管理信息提供给显示信息产生部分73。
然后，在步骤S65中，显示信息产生部分73基于指示字幕的轨道的内容的信息实现了各种按钮的显示，该信息被包括在从控制部分53提供的关于字幕的轨道的管理信息中。
在步骤S66中，控制部分53确定是否选择了在步骤S65中显示的按钮中的一个。当在步骤S66中确定没有选择在步骤S65中显示的按钮中的一个时，控制部分53等待直到选择了在步骤S65中显示的按钮中的一个。
当在步骤S66中确定选择了在步骤S65中显示的按钮中的一个时，该处理进入步骤S67。在步骤S67中，控制部分53将设置为再现目标的字幕的轨道的轨道ID改变成与选择的按钮对应的字幕的轨道的轨道ID。该处理然后结束。
如上所述，再现装置50获得设置有组信息的MP4文件，并且基于该组信息显示用于选择指示作为再现目标的轨道的组合的组信息的画面120。因此，通过仅仅选择画面120上的与期望的组信息对应的按钮，用户能够容易地选择由组信息指示的轨道的组合作为再现目标。
顺便说一句，在本实施例中，MP4文件被记录在记录介质12上。然而，MP4文件可以经由预定网络被发送。
[应用本技术的计算机的描述]
接下来，上述的一系列处理不仅可以由硬件执行，还可以由软件执行。当由软件执行这一系列处理时，构成软件的程序被安装到通用计算机等上。
图18示出了安装有用于执行上述的一系列处理的程序的计算机的一个实施例的配置的例子。
程序能够预先被记录在作为包括在计算机中的记录介质的存储部分208或ROM(只读存储器)202中。
可替换地，该程序能够被存储(记录)在可移动介质211上。能够作为所谓的封装软件提供这种可移动介质211。在这种情况下，例如，可移动介质211包括软盘、CD-ROM(压缩盘只读存储器)、MO(磁光)盘、DVD(数字多功能盘)、磁盘和半导体存储器。
顺便说一句，该程序不仅仅能够经由驱动器210从上述的可移动介质211安装到计算机上，还能够经由通信网络或广播网络下载到计算机，并且被安装到内置存储部分208中。具体地讲，例如，该程序能够经由用于数字卫星广播的人造卫星通过无线电从下载网址转移到计算机，或者经由例如LAN(局域网)、互联网等的网络通过导线转移到计算机。
计算机包括CPU(中央处理单元)201。CPU 201经由总线204与输入输出接口205进行连接。
当用户等通过操作输入部分206经由输入输出接口205向CPU 201输入命令时，CPU 201根据该命令执行存储在ROM 202中的程序。可替换地，CPU 201将存储在存储部分208中的程序加载到RAM(随机存取存储器)203中，然后执行该程序。
CPU 201由此根据上述流程图执行处理或者执行由上述框图的配置执行的处理。然后，例如，根据需要，CPU 201经由输入输出接口205从输出部分207输出处理的结果，经由输入输出接口205从通信部分209发送处理的结果，或者经由输入输出接口205将处理的结果记录在存储部分208中。
顺便说一句，输入部分206包括键盘、鼠标、麦克风等。输入部分206对应于用户输入部分13和用户输入部分52。输出部分207包括LCD(液晶显示器)、扬声器等。例如，输出部分207对应于显示部分63和扬声器64。记录介质12可以经由附图中未示出的驱动器插入计算机中，或者可以作为存储部分208的一部分被包括在计算机中。
在本说明书中，由计算机根据程序执行的处理不必一定按照在流程图中描述的顺序以时序执行。即，由计算机根据程序执行的处理还包括并行或单独执行的处理(例如，并行处理或根据目标的处理)。
此外，该程序可由一个计算机(处理器)进行处理，或者可以由多个计算机执行分布式处理。另外，该程序可以转移到远程计算机以进行执行。
请注意：在本说明书中，描述存储在程序记录介质上的程序的步骤不仅包括按照描述的顺序以时序执行的处理，还包括不必一定以时序执行的、且并行或独立地执行的处理。
此外，本发明的实施例不限于上述实施例，并且在不脱离本发明的精神的情况下可以执行各种改变。
本发明包含与于2010年8月2日提交到日本专利局的日本在先专利申请JP 2010-173600中公开的主题相关的主题，该日本在先专利申请的全部内容以引用方式并入本文。

Claims (12)

1.一种数据产生装置，包括：
编码部分，对多种数据进行编码并且产生编码数据；
信息产生部分，产生指示多种所述数据的组合的多条组信息；以及
文件产生部分，产生包括多种所述数据的所述编码数据和多条所述组信息的编码数据存储文件。
2.根据权利要求1所述的数据产生装置，
其中，所述编码数据存储文件是MP4文件，并且
所述文件产生部分将多条所述组信息设置于所述MP4文件的电影框中。
3.根据权利要求1所述的数据产生装置，
其中，所述组信息包括指示包括在由组信息指示的组合中的所述数据的内容的元数据。
4.根据权利要求1所述的数据产生装置，
其中，所述多种数据是主图像的图像数据、副图像的图像数据和音频数据。
5.根据权利要求1所述的数据产生装置，
其中，所述多种数据是三维主图像的图像数据、三维副图像的图像数据和音频数据。
6.一种由数据产生装置执行的数据产生方法，包括：
对多种数据进行编码并且产生编码数据；
产生指示多种所述数据的组合的多条组信息；以及
产生包括多种所述数据的所述编码数据和多条所述组信息的编码数据存储文件。
7.一种数据处理装置，包括：
获得部分，获得包括多种数据的编码数据和指示多种所述数据的组合的多条组信息的编码数据存储文件；
显示控制部分，基于多条所述组信息显示用于选择由所述组信息指示的组合的画面；
选择部分，根据用户对所述画面的输入从由多条所述组信息指示的组合选择作为再现目标的数据的组合；以及
解码部分，对包括在由所述选择部分选择的所述组合中的所有的所述数据的所述编码数据进行解码。
8.根据权利要求7所述的数据处理装置，
其中，所述编码数据存储文件是MP4文件，并且
多条所述组信息被设置于所述MP4文件的电影框中。
9.根据权利要求7所述的数据处理装置，
其中，所述组信息包括指示包括在由组信息指示的组合中的所述数据的内容的元数据，并且
所述显示控制部分基于包括在多条所述组信息中的所述元数据显示所述画面。
10.根据权利要求7所述的数据处理装置，
其中，所述多种数据是主图像的图像数据、副图像的图像数据和音频数据。
11.根据权利要求7所述的数据处理装置，
其中，所述多种数据是三维主图像的图像数据、三维副图像的图像数据和音频数据。
12.一种由数据处理装置执行的数据处理方法，包括：
获得包括多种数据的编码数据和指示多种所述数据的组合的多条组信息的编码数据存储文件；
基于多条所述组信息显示用于选择由所述组信息指示的组合的画面；
根据用户对所述画面的输入从由多条所述组信息指示的组合选择作为再现目标的数据的组合；以及
对包括在通过所述选择选择的所述组合中的所有的所述数据的所述编码数据进行解码。
CN201110209390.XA 2010-08-02 2011-07-26 数据产生装置和方法、以及数据处理装置和方法 Expired - Fee Related CN102347046B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-173600 2010-08-02
JP2010173600A JP5652642B2 (ja) 2010-08-02 2010-08-02 データ生成装置およびデータ生成方法、データ処理装置およびデータ処理方法

Publications (2)

Publication Number Publication Date
CN102347046A true CN102347046A (zh) 2012-02-08
CN102347046B CN102347046B (zh) 2016-08-17

Family

ID=44503581

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110209390.XA Expired - Fee Related CN102347046B (zh) 2010-08-02 2011-07-26 数据产生装置和方法、以及数据处理装置和方法

Country Status (4)

Country Link
US (2) US8504591B2 (zh)
EP (1) EP2416321B1 (zh)
JP (1) JP5652642B2 (zh)
CN (1) CN102347046B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103152607A (zh) * 2013-01-10 2013-06-12 上海思华科技股份有限公司 视频超快速粗编方法
CN106415711A (zh) * 2014-05-30 2017-02-15 索尼公司 信息处理装置和信息处理方法
CN106471574A (zh) * 2014-06-30 2017-03-01 索尼公司 信息处理装置和信息处理方法
CN106716524A (zh) * 2014-09-30 2017-05-24 索尼公司 发送装置、发送方法、接收装置和接收方法
JPWO2016060101A1 (ja) * 2014-10-16 2017-07-27 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN107615767A (zh) * 2015-06-02 2018-01-19 索尼公司 发送装置、发送方法、媒体处理装置、媒体处理方法以及接收装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6508206B2 (ja) * 2014-07-01 2019-05-08 ソニー株式会社 情報処理装置および方法
CN111951814A (zh) * 2014-09-04 2020-11-17 索尼公司 传输设备、传输方法、接收设备以及接收方法
CN106663435A (zh) 2014-09-08 2017-05-10 索尼公司 编码装置和方法、解码装置和方法、以及程序
HUE059748T2 (hu) * 2014-09-12 2022-12-28 Sony Group Corp Hangadatfolyamatok vételére szolgáló eszköz és eljárás
CN107210041B (zh) * 2015-02-10 2020-11-17 索尼公司 发送装置、发送方法、接收装置以及接收方法
JP7035401B2 (ja) * 2017-09-15 2022-03-15 ソニーグループ株式会社 画像処理装置およびファイル生成装置
US11818406B2 (en) * 2020-07-23 2023-11-14 Western Digital Technologies, Inc. Data storage server with on-demand media subtitles

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0987707A2 (en) * 1995-08-21 2000-03-22 Matsushita Electric Industrial Co., Ltd. Optical disc reproduction device and reproduction method which can achieve a dynamic switching of the reproduced content
CN1365110A (zh) * 1997-01-28 2002-08-21 三星电子株式会社 存储音频数据的数字多用途盘音频盘及再现方法
CN1574962A (zh) * 2003-06-14 2005-02-02 Lg电子有限公司 接收和传输数字多媒体广播的装置和方法
WO2010007513A1 (en) * 2008-07-16 2010-01-21 Nokia Corporation Method and apparatus for track and track subset grouping

Family Cites Families (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5850500A (en) * 1995-06-28 1998-12-15 Kabushiki Kaisha Toshiba Recording medium comprising a plurality of different languages which are selectable independently of each other
JP4059355B2 (ja) * 1996-04-04 2008-03-12 パイオニア株式会社 情報記録装置及び情報記録方法並びに情報再生装置及び情報再生方法
US20040268386A1 (en) * 2002-06-08 2004-12-30 Gotuit Video, Inc. Virtual DVD library
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6360234B2 (en) * 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
JPH11185463A (ja) * 1997-12-19 1999-07-09 Sony Corp データ記録媒体ならびにメニュー制御方法および装置
EP0926680A3 (en) * 1997-12-25 2001-10-04 Pioneer Electronic Corporation Information reproducing apparatus
US6721493B1 (en) * 1998-06-24 2004-04-13 Samsung Electronics Co., Ltd. Recording medium for storing information for still picture, recording and/or reproducing method and apparatus therefor
JP3199711B2 (ja) * 1999-04-02 2001-08-20 松下電器産業株式会社 光ディスクとその記録装置および再生装置
JP2001006330A (ja) * 1999-06-22 2001-01-12 Funai Electric Co Ltd 記録媒体再生装置
JP2002335491A (ja) * 2001-05-10 2002-11-22 Toshiba Corp デジタル録画再生装置
JP2003173625A (ja) * 2001-12-04 2003-06-20 Hitachi Ltd ファイル変換方法、ファイル変換装置、及びファイル生成装置
AU2003213555B2 (en) 2002-02-25 2008-04-10 Sony Electronics, Inc. Method and apparatus for supporting AVC in MP4
US20030163477A1 (en) 2002-02-25 2003-08-28 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
US7613727B2 (en) 2002-02-25 2009-11-03 Sont Corporation Method and apparatus for supporting advanced coding formats in media files
JP2006507553A (ja) 2002-02-25 2006-03-02 ソニー エレクトロニクス インク Ｍｐ４においてａｖｃをサポートするための方法及び装置
US20030221014A1 (en) * 2002-05-24 2003-11-27 David Kosiba Method for guaranteed delivery of multimedia content based on terminal capabilities
AU2003232637A1 (en) * 2002-05-28 2003-12-12 Matsushita Electric Industrial Co., Ltd. Moving picture data reproducing device with improved random access
AU2003268017A1 (en) * 2002-07-24 2004-02-09 General Instrument Corporation Method and apparatus for rapid capture of program identifier data in a broadband transcoder multiplexer
CN1695197B (zh) * 2002-09-12 2012-03-14 松下电器产业株式会社 播放设备、播放方法、以及记录介质的记录方法
JP3937223B2 (ja) 2003-01-21 2007-06-27 ソニー株式会社 記録装置、再生装置、記録方法及び再生方法
US20060210245A1 (en) * 2003-02-21 2006-09-21 Mccrossan Joseph Apparatus and method for simultaneously utilizing audio visual data
WO2005011273A1 (ja) * 2003-06-18 2005-02-03 Matsushita Electric Industrial Co., Ltd. 再生装置、記録媒体、プログラム、再生方法
US7650036B2 (en) * 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding
JP2005196893A (ja) * 2004-01-08 2005-07-21 Toshiba Corp 情報記録媒体、情報記録方法、情報再生方法、情報記録装置、情報再生装置
WO2005076273A1 (en) * 2004-02-10 2005-08-18 Lg Electronic Inc. Recording medium having a data structure for managing font information for text subtitles and recording and reproducing methods and apparatuses
TWI302802B (en) * 2004-05-10 2008-11-01 Via Tech Inc Multiplexer dvd player
JP2006004486A (ja) * 2004-06-16 2006-01-05 Toshiba Corp 情報記録媒体及び情報再生装置
EP1758121B1 (en) * 2004-06-18 2010-09-01 Panasonic Corporation Reproduction device, program, and reproduction method
US8473475B2 (en) * 2004-09-15 2013-06-25 Samsung Electronics Co., Ltd. Information storage medium for storing metadata supporting multiple languages, and systems and methods of processing metadata
BRPI0517365B1 (pt) * 2004-09-23 2019-12-17 Interdigital Madison Patent Holdings inserção de metadados para controle de reprodução em fluxo de transporte de vídeo
WO2006041260A1 (en) * 2004-10-13 2006-04-20 Electronics And Telecommunications Research Institute Extended multimedia file structure and multimedia file producting method and multimedia file executing method
KR100677601B1 (ko) * 2004-11-11 2007-02-02 삼성전자주식회사 메타 데이터를 포함하는 영상 데이터를 기록한 저장매체,그 재생장치 및 메타 데이터를 이용한 검색방법
JP5035583B2 (ja) * 2004-12-06 2012-09-26 ソニー株式会社 記録装置および記録方法、再生装置および再生方法、記録再生装置および記録再生方法、並びにプログラム
WO2006079368A1 (en) * 2005-01-25 2006-08-03 Nero Ag Method for preparing dvd-video formatted data, method for reconstructing dvd-video data and dvd-video data structure
JP4968506B2 (ja) * 2005-03-04 2012-07-04 ソニー株式会社 再生装置、再生方法、およびプログラム
US7634727B2 (en) * 2005-04-26 2009-12-15 Microsoft Corporation System for abstracting audio-video codecs
KR20070022580A (ko) * 2005-08-22 2007-02-27 엘지전자 주식회사 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치
JP4598627B2 (ja) * 2005-08-24 2010-12-15 富士通株式会社 コンテンツ編集装置及びその再生装置
JP2007179591A (ja) * 2005-12-26 2007-07-12 Toshiba Corp 動画像再生装置
US20090208190A1 (en) * 2006-05-18 2009-08-20 Pioneer Corporation Information reproducing apparatus and method, managing apparatus and method, information reproducing system, and computer program
US8966371B2 (en) * 2006-09-11 2015-02-24 Apple Inc. Metadata for providing media content
WO2008035022A1 (en) * 2006-09-20 2008-03-27 John W Hannay & Company Limited Methods and apparatus for creation, distribution and presentation of polymorphic media
US8452801B2 (en) * 2006-10-19 2013-05-28 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
US20080129864A1 (en) * 2006-12-01 2008-06-05 General Instrument Corporation Distribution of Closed Captioning From a Server to a Client Over a Home Network
JP5022025B2 (ja) * 2006-12-27 2012-09-12 インターナショナル・ビジネス・マシーンズ・コーポレーション コンテンツのデータ・ストリームとメタデータを同期するための方法および装置。
BRPI0807703B1 (pt) * 2007-02-26 2020-09-24 Dolby Laboratories Licensing Corporation Método para aperfeiçoar a fala em áudio de entretenimento e meio de armazenamento não-transitório legível por computador
US20080219641A1 (en) * 2007-03-09 2008-09-11 Barry Sandrew Apparatus and method for synchronizing a secondary audio track to the audio track of a video source
WO2008114595A1 (ja) * 2007-03-22 2008-09-25 Mitsubishi Electric Corporation 映像再生装置および映像再生方法
US20080252719A1 (en) * 2007-04-13 2008-10-16 Samsung Electronics Co., Ltd. Apparatus, method, and system for generating stereo-scopic image file based on media standards
US20080294691A1 (en) * 2007-05-22 2008-11-27 Sunplus Technology Co., Ltd. Methods for generating and playing multimedia file and recording medium storing multimedia file
KR101451239B1 (ko) * 2007-08-13 2014-10-15 삼성전자 주식회사 미디어 파일 포맷에서 메타데이터의 생성 방법, 접근 방법및 그 장치
US20090094113A1 (en) * 2007-09-07 2009-04-09 Digitalsmiths Corporation Systems and Methods For Using Video Metadata to Associate Advertisements Therewith
WO2009048309A2 (en) * 2007-10-13 2009-04-16 Samsung Electronics Co., Ltd. Apparatus and method for providing stereoscopic three-dimensional image/video contents on terminal based on lightweight application scene representation
US8922621B2 (en) * 2007-10-19 2014-12-30 Samsung Electronics Co., Ltd. Method of recording three-dimensional image data
KR101530713B1 (ko) * 2008-02-05 2015-06-23 삼성전자주식회사 영상 파일을 생성하고 표시하기 위한 장치 및 방법
US20100015339A1 (en) * 2008-03-07 2010-01-21 Evonik Degussa Gmbh Silane-containing corrosion protection coatings
US20090276402A1 (en) * 2008-05-01 2009-11-05 Mobitv, Inc. Search system using media metadata tracks
WO2010038365A1 (ja) * 2008-09-30 2010-04-08 パナソニック株式会社 3d映像に係る記録媒体、再生装置、システムlsi、再生方法、眼鏡、表示装置
KR101547557B1 (ko) * 2008-11-14 2015-08-26 삼성전자주식회사 컨텐츠 재생 장치 선정 방법 및 그 장치
KR20100061078A (ko) * 2008-11-28 2010-06-07 삼성전자주식회사 메타 데이터를 이용하는 컨텐츠 소비 방법 및 그 장치
US8265450B2 (en) * 2009-01-16 2012-09-11 Apple Inc. Capturing and inserting closed captioning data in digital video
JP5369727B2 (ja) 2009-02-02 2013-12-18 日本電気株式会社 運行状況通知方法
KR20100113266A (ko) * 2009-04-13 2010-10-21 삼성전자주식회사 휴대용 단말기에서 3차원 영상 메시지 제작 방법 및 장치
US20110020774A1 (en) * 2009-07-24 2011-01-27 Echostar Technologies L.L.C. Systems and methods for facilitating foreign language instruction
US20110026899A1 (en) * 2009-07-31 2011-02-03 Paul Lussier Systems and Methods for Viewing and Editing Content Over a Computer Network in Multiple Formats and Resolutions
US8566393B2 (en) * 2009-08-10 2013-10-22 Seawell Networks Inc. Methods and systems for scalable video chunking
US8719437B1 (en) * 2009-08-13 2014-05-06 Avvasi Inc. Enabling streaming to a media player without native streaming support
US8976871B2 (en) * 2009-09-16 2015-03-10 Qualcomm Incorporated Media extractor tracks for file format track selection
US20110164859A1 (en) * 2010-01-05 2011-07-07 Kuang-Tsai Hao Electronic audio/video story construction method
US8631047B2 (en) * 2010-06-15 2014-01-14 Apple Inc. Editing 3D video
US8782268B2 (en) * 2010-07-20 2014-07-15 Microsoft Corporation Dynamic composition of media
US8655854B2 (en) * 2010-07-27 2014-02-18 Avid Technology, Inc. Hierarchical multimedia program composition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0987707A2 (en) * 1995-08-21 2000-03-22 Matsushita Electric Industrial Co., Ltd. Optical disc reproduction device and reproduction method which can achieve a dynamic switching of the reproduced content
CN1365110A (zh) * 1997-01-28 2002-08-21 三星电子株式会社 存储音频数据的数字多用途盘音频盘及再现方法
CN1574962A (zh) * 2003-06-14 2005-02-02 Lg电子有限公司 接收和传输数字多媒体广播的装置和方法
WO2010007513A1 (en) * 2008-07-16 2010-01-21 Nokia Corporation Method and apparatus for track and track subset grouping

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103152607A (zh) * 2013-01-10 2013-06-12 上海思华科技股份有限公司 视频超快速粗编方法
CN106415711A (zh) * 2014-05-30 2017-02-15 索尼公司 信息处理装置和信息处理方法
CN106471574A (zh) * 2014-06-30 2017-03-01 索尼公司 信息处理装置和信息处理方法
CN106716524A (zh) * 2014-09-30 2017-05-24 索尼公司 发送装置、发送方法、接收装置和接收方法
CN106716524B (zh) * 2014-09-30 2021-10-22 索尼公司 发送装置、发送方法、接收装置和接收方法
JPWO2016060101A1 (ja) * 2014-10-16 2017-07-27 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN107615767A (zh) * 2015-06-02 2018-01-19 索尼公司 发送装置、发送方法、媒体处理装置、媒体处理方法以及接收装置
CN107615767B (zh) * 2015-06-02 2021-05-25 索尼公司 发送装置、发送方法、媒体处理装置、媒体处理方法以及接收装置
CN113242448A (zh) * 2015-06-02 2021-08-10 索尼公司 发送装置和方法、媒体处理装置和方法以及接收装置
US11956485B2 (en) 2015-06-02 2024-04-09 Sony Group Corporation Transmission device, transmission method, media processing device, media processing method, and reception device

Also Published As

Publication number Publication date
US20130287364A1 (en) 2013-10-31
US20120030253A1 (en) 2012-02-02
US8504591B2 (en) 2013-08-06
EP2416321B1 (en) 2020-02-19
CN102347046B (zh) 2016-08-17
JP2012033243A (ja) 2012-02-16
EP2416321A1 (en) 2012-02-08
JP5652642B2 (ja) 2015-01-14

Similar Documents

Publication Publication Date Title
CN102347046A (zh) 数据产生装置和方法、以及数据处理装置和方法
Nack et al. Everything you wanted to know about MPEG-7. 1
Pea et al. Video workflow in the learning sciences: Prospects of emerging technologies for augmenting work practices
US20090240736A1 (en) Method and System for Creating a Personalized Multimedia Production
CN101540847A (zh) 字幕制作系统及字幕制作方法
JP2004531184A (ja) デジタル情報の効率的な伝送および再生
CN1755823A (zh) 数据记录装置
US9812169B2 (en) Operational system and architectural model for improved manipulation of video and time media data from networked time-based media
CN101501775A (zh) 媒体时间线处理基础结构
US9928876B2 (en) Recording medium recorded with multi-track media file, method for editing multi-track media file, and apparatus for editing multi-track media file
WO2008118183A1 (en) System and method for autogeneration of long term media data from networked time-based media
CN103455539A (zh) 信息处理设备、信息处理方法、和程序
US20110160886A1 (en) Method for file formation according to freeview av service
CN101681661B (zh) 编辑装置和编辑方法
JP4017290B2 (ja) 自動番組制作装置および自動番組制作プログラムを記録した記録媒体
CN1918909B (zh) 文件记录设备、文件记录方法、文件重放设备、文件重放方法
CN106790558B (zh) 一种影片多版本整合存储和提取系统
CN1574055B (zh) 记录介质中的数据的管理方法及装置
WO2020201297A1 (en) System and method for performance-based instant assembling of video clips
US8843961B2 (en) Multiple resolution audio and video systems, methods of production, delivery and uses thereof
CN101803378B (zh) 用于访问媒体文件格式的元数据的方法
US20090088879A1 (en) Audio reproduction device and method for audio reproduction
CN101395910A (zh) 用于记录对媒体内容的编辑的方法和系统
CN105468711A (zh) 一种音频处理方法及装置
CN103310815B (zh) 再现装置和再现装置的控制方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160817

Termination date: 20200726

CF01 Termination of patent right due to non-payment of annual fee