CN109690674A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN109690674A
CN109690674A CN201780054241.6A CN201780054241A CN109690674A CN 109690674 A CN109690674 A CN 109690674A CN 201780054241 A CN201780054241 A CN 201780054241A CN 109690674 A CN109690674 A CN 109690674A
Authority
CN
China
Prior art keywords
data
information
mmt
file
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780054241.6A
Other languages
English (en)
Other versions
CN109690674B (zh
Inventor
内村幸一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN109690674A publication Critical patent/CN109690674A/zh
Application granted granted Critical
Publication of CN109690674B publication Critical patent/CN109690674B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实现了一种能够将MPEG介质传输(MMT)格式数据作为BDAV或SPAV格式数据可再现地记录到记录介质中的结构。经由广播波等输入MMT格式数据,并遵循BDAV格式或SPAV格式创建记录数据。数据处理单元创建存储MMT格式数据作为再现数据的MMT格式流文件,并进一步创建存储MMT格式流文件和剪辑信息文件的再现控制信息的播放列表文件。

Description

信息处理装置、信息处理方法和程序
技术领域
本公开涉及一种信息处理装置、一种信息处理方法和一种程序。更具体地,本公开涉及一种信息处理装置、一种信息处理方法和一种程序,其能够接收作为广播波等中的未来数据传输标准而标准化的MPEG介质传输(MMT)格式数据,将MMT格式数据记录在介质中,并且能够再现MMT格式数据。
背景技术
目前,已经进行了用于实现高质量图像的数据传输的标准化,例如,4K图像、8K图像等的广播,并且使用MPEG介质传输(MMT)格式的数据传输方案正在作为其中的一个进行审查。
MMT格式是指定用于经由广播波或网络传输构成诸如视频、音频或字幕等内容的编码数据的数据传输方案(传输格式)的格式。
MMT格式计划用于例如广播下一代内容,例如,4K图像、高动态范围(HDR)图像等。
同时,MPEG-2 TS格式正广泛用作视频、音频、字幕等的传输格式或介质的数据记录格式。
例如,根据MPEG-2 TS格式的数据通常记录在蓝光(注册商标)光盘(BD)中,该光盘是用于记录/再现内容的信息记录介质(媒介)、闪存、硬盘(HD)等。
将来,在诸如电视等信息处理装置根据从广播台等传输的MMT格式接收传送数据的情况下,并且信息处理装置将接收的数据记录在BD、闪存或HD中,在诸如视频、音频或字幕数据等再现目标内容的情况下,执行将MMT格式转换成MPEG-2 TS格式然后记录该内容的处理或者以MMT格式记录该内容而不改变的处理。
然而,在从诸如蓝光(注册商标)光盘(BD)、闪存、HD等介质再现诸如视频、音频或字幕等内容的情况下,用于执行再现内容的处理的再现控制信息和索引信息是必要的。再现控制信息和索引信息通常称为数据库文件。
再现控制信息和索引信息根据执行在介质中再现记录数据的处理的再现应用程序而不同。
例如,具有BDMV和BDAV标准(格式),作为当前记录/再现应用程序标准(格式)。应用标准主要建立为使用蓝光(注册商标)光盘(BD)的数据记录/再现应用程序标准。
此外,BDMV和BDAV是主要使用BD的数据记录/再现应用程序标准,但是这些标准不限于BD,并且可以应用于使用BD以外的介质(例如,闪存或HD)的数据记录/再现。
在例如专利文献1(日本专利申请公开2011-023071)等中描述了使用BD的数据记录/再现处理配置。
BDMV是为BD-ROM开发的应用标准,其中,例如,电影内容等预先记录,并且主要广泛用于诸如分组内容等不可重写BD-ROM中。
另一方面,BDAV是被开发为主要应用于使用可重写BD-RE型盘、其中的记录只能执行一次的BD-R型盘等的数据记录/再现处理的标准。例如,BDAV用于记录和再现用户使用摄像机等捕获的视频,或者记录和再现电视广播。
为了将遵循MMT格式的传送内容记录在信息记录介质(媒介)中,并使用BDAV格式兼容的再现应用程序从介质执行内容再现处理,需要遵循BDAV格式执行数据记录。
如上所述,在BDAV格式中,诸如播放列表文件和剪辑信息文件等数据库文件被指定为再现控制信息的记录文件,并且BDAV兼容的再现应用程序参考诸如再现控制信息文件(数据库文件)等记录信息来记录数据再现处理。
然而,诸如以BDAV格式指定的播放列表文件或剪辑信息文件的数据库文件最初是指定为可以基于MPEG-2 TS格式的传送数据生成的文件的文件。
根据与MPEG-2 TS格式不同的MMT格式的传送数据记录在播放列表文件或以当前BDAV格式指定的剪辑信息文件中,但是存在这样的情况,即,该数据是当前BDAV兼容再现应用程序不能使用的数据。
因此,为了能够在介质中记录MMT格式数据并使用BDAV格式兼容应用程序执行内容再现,当执行在介质中记录MMT格式数据的处理时,需要生成与MMT格式数据相对应的播放列表文件或剪辑信息文件。
此外,当再现记录在介质中的MMT格式数据时,需要使用播放列表文件或与MMT格式数据相对应的剪辑信息文件来执行再现。
然而,目前还没有体现这些处理。
现有技术文献
专利文献
专利文献1:日本专利申请公开号2011-023071。
发明内容
本发明要解决的问题
本公开是根据例如上述问题做出的,并且目的在于,提供一种信息处理装置、一种信息处理方法和一种程序,其能够接收遵循MMT格式的传送数据,生成以BDAV格式指定的数据库文件,将数据库文件记录在介质中,并且能够使用数据库文件再现介质记录的内容。
问题的解决方案
本公开的第一方面是一种信息处理装置,包括:
数据处理单元,接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,
其中,数据处理单元:
生成MMT格式流文件,其中,MMT格式流文件将MMT格式数据作为再现数据来存储,并且
还生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
此外,本公开的第二方面是一种信息处理装置,包括:
数据处理单元,执行信息记录介质的记录数据的再现处理,
其中,所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,并且
数据处理单元在执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
此外,本公开的第三方面是一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,所述信息处理方法包括:
通过数据处理单元生成MMT格式流文件,其中,MMT格式流文件存储MMT格式数据以作为再现数据,并且
该通过数据处理单元生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
此外,本公开的第四方面是一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,该数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,所述信息处理方法包括:
所述数据处理单元,在执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
此外,本公开的第五方面是一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,该数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,
所述程序促使数据处理单元:
生成MMT格式流文件,其中,MMT格式流文件存储MMT格式数据以作为再现数据,并且
还生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
此外,本公开的第六方面是一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,该数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,
所述程序促使数据处理单元:
当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
此外,本公开的程序是例如可以借助于以计算机可读格式提供的存储介质或通信介质来提供给信息处理装置或计算机系统的程序,该信息处理装置或计算机系统可以执行各种程序代码。由于这种程序以计算机可读格式提供,因此在信息处理装置或计算机系统上实现了与该程序相对应的处理。
根据基于稍后描述的本公开实施方式的实施方式和附图的进一步详细描述,本公开的其他目的、特征和优点将变得显而易见。此外,在本说明书中,系统指的是多个装置的逻辑集合配置,而不限于各个组件的装置在单个外壳内的配置。
本发明的效果
根据本公开的一个实施方式,实现了能够将MPEG介质传输(MMT)格式数据作为BDAV或SPAV格式数据记录在介质中并且能够再现MMT格式数据的配置。
具体地,输入经由广播波等输入的MMT格式数据,并且生成遵循BDAV格式或SPAV格式的记录数据。数据处理单元生成MMT格式流文件,MMT格式流文件将MMT格式数据作为再现数据存储,并进一步生成存储MMT格式流文件和剪辑信息文件的再现控制信息的播放列表文件。
利用本配置,实现了能够将MMT格式数据作为BDAV或SPAV格式数据记录在介质中并且能够再现MMT格式数据的配置。
此外,在本说明书中描述的效果仅仅是示例而非限制,并且可以包括额外效果。
附图说明
图1是用于描述执行本公开的处理的信息处理装置的使用配置示例的示图。
图2是用于描述MMT格式的示图。
图3是用于描述根据MMT格式的视频数据存储配置的示例的示图。
图4是用于描述BDAV格式的示图。
图5是用于描述遵循BDAV格式的数据再现处理示例的示图。
图6是用于描述MPEG-2 TS格式的示图。
图7是用于描述MMT格式的示图。
图8是用于描述SPAV格式的示图。
图9是用于描述MMT格式数据被记录为BDAV格式数据的情况下的处理示例的示图。
图10是用于描述MMT格式数据被记录为BDAV格式数据的情况下的处理示例的示图。
图11是用于描述播放列表文件的数据配置的示图。
图12是用于描述EP图的示图。
图13是用于描述EP图的示图。
图14是用于描述EP图的示图。
图15是用于描述播放列表文件的CPI类型记录数据的示图。
图16是用于描述播放列表文件的播放项的数据配置的示图。
图17是用于描述播放列表文件的播放项记录数据的示图。
图18是示出MMT封装表(MPT)的数据配置(语法)的示图。
图19是用于描述记录在MMT封装表(MPT)中的资产类型(asset_type)的具体示例的示图。
图20是示出记录在MMT封装表(MPT)中的MPU时间戳描述符的数据配置(语法)的示图。
图21是用于描述作为播放列表文件的组成部分的播放列表标记的示图。
图22是用于描述播放列表标记信息的记录数据的示图。
图23是示出剪辑信息文件的数据配置(语法)的示图。
图24是示出剪辑信息文件的剪辑信息[ClipInfo()]的数据配置(语法)的示图。
图25是用于描述记录在剪辑信息文件的剪辑信息[ClipInfo()]中的应用类型的记录示例的示图。
图26是用于描述记录在剪辑信息文件的剪辑信息[ClipInfo()]中的剪辑流类型的记录示例的示图。
图27是示出剪辑信息文件的序列信息[SequenceInfo()]的数据配置(语法)的示图。
图28是用于描述记录在剪辑信息文件的序列信息[SequenceInfo()]中的ATC和STC的示图。
图29是示出剪辑信息文件的节目信息[ProgramInfo()]的数据配置(语法)的示图。
图30是示出剪辑信息文件的CPI信息[CPI()]的数据配置(语法)的示图。
图31是用于描述记录在剪辑信息文件的CPI信息[CPI()]中的EP图的数据配置的示图。
图32是用于描述记录在剪辑信息文件的CPI信息[CPI()]中的EP图的数据配置的示图。
图33是用于描述构成EP图的两个表的数据配置的示图。
图34是用于描述记录在剪辑信息文件的CPI信息[CPI()]中的MMT格式数据兼容的EP图的数据配置的示图。
图35是用于描述记录在剪辑信息文件的CPI信息[CPI()]中的MMT格式数据兼容的EP图的数据配置的示图。
图36是用于描述记录在剪辑信息文件的CPI信息[CPI()]中的MMT格式数据兼容的EP图的数据配置的示图。
图37是用于描述MMT封装表(MPT)的数据配置的示图,用于获取生成MMT格式数据兼容的EP图所需的随机访问点信息。
图38是用于描述获取生成MMT格式数据兼容的EP图所需的随机访问点信息的过程的示图。
图39是示出剪辑信息文件的剪辑标记[ClipMark()]的数据配置(语法)的示图。
图40是用于描述记录在剪辑AV流文件中的MMT格式数据的示例的示图。
图41是用于描述记录在剪辑AV流文件中的MMT格式数据的示例的示图。
图42是用于描述记录在剪辑AV流文件中的MMT格式数据的示例的示图。
图43是用于描述作为记录在剪辑AV流文件中的MMT格式数据中的控制信息的MMT封装表(MPT)的数据的示图。
图44是用于描述作为记录在剪辑AV流文件中的MMT格式数据中的控制信息的MMT封装表(MPT)的数据的示图。
图45是用于描述作为要记录在剪辑AV流文件中的MMT封装表(MPT)格式数据中的控制信息的MPT的数据的示图。
图46是用于描述对信息记录介质(媒介)执行数据记录过程的信息处理装置的配置示例的示图。
图47是用于描述对信息记录介质(媒介)的数据记录过程的处理顺序的流程图。
图48是用于描述对信息记录介质(媒介)的数据记录过程的处理顺序的流程图
图49是用于描述对信息记录介质(媒介)的数据记录过程的处理顺序的流程图
图50是用于描述执行来自信息记录介质(媒介)的数据再现处理的信息处理装置的配置示例的示图
图51是用于描述来自信息记录介质(媒介)的数据再现处理的处理序列的流程图。
图52是用于描述来自信息记录介质(媒介)的数据再现处理的处理序列的流程图。
图53是用于描述应用于本公开处理的信息处理装置的硬件配置示例的示图。
具体实施方式
在下文中,将参考附图详细描述本公开的信息处理装置、信息处理方法和程序。此外,将根据以下项目进行描述。
1、通信系统的配置示例
2、MPEG介质传输(MMT)格式
3、BDAV格式和SPAV格式
4、遵循BDAV格式记录MMT格式数据的情况下的处理
5、对应于MMT格式数据的播放列表文件
6、对应于MMT格式数据的剪辑信息文件
7、MMT格式数据的完整记录和部分记录
8、对信息记录介质执行数据记录过程的信息处理装置的配置和处理
9、执行来自信息记录介质的数据再现处理的信息处理装置的配置和处理
10、信息处理装置的配置示例
11、本公开的配置的结论
[1、通信系统的配置示例]
首先,将参考图1描述作为执行本公开的处理的信息处理装置的使用配置示例的通信系统的示例。
图1所示的信息处理装置30包括安装在其中的诸如蓝光(注册商标)光盘(BD)、闪存、硬盘(HDD)等介质,并且对安装的介质执行数据记录处理或者从安装的介质执行数据再现处理。
信息处理装置30记录在介质中的数据例如是由诸如广播台(广播服务器)21和数据传送服务器22等传输装置20提供的传输内容。具体地,该数据是由电视台等提供的广播节目。
传输内容经由广播波或诸如互联网等网络从传输装置20传输到信息处理装置30。
信息处理装置30是例如BD播放器31、电视机32、PC 33、移动终端34等,并且这些信息处理装置包括安装在其中的各种介质,例如,蓝光盘(注册商标)41、HDD 42和闪存43,并且对这些介质执行数据记录处理和从这些介质执行数据再现处理。
遵循MPEG介质传输(MMT)格式执行从传输装置20到信息处理装置30的数据传输。
MMT格式是当经由广播波或网络传输编码数据时指定数据传输方案(传输端口格式)的格式,编码数据是诸如视频、音频或字幕等内容配置数据。
传输装置20编码内容数据,生成包括编码数据和编码数据的元数据的数据文件,将生成的编码数据存储在MMT中指定的MMT协议(MMTP)分组中,并经由广播波或网络传输MMTP分组。
除了诸如视频、音频或字幕等再现目标数据之外,从传输装置20提供给信息处理装置30的数据还由诸如节目指南、通知信息、控制信息等指南信息构成。
[2、MMT格式]
如上所述,根据MMT格式执行从传输装置20到信息处理装置30的数据传输。
将参考图2和随后的附图描述MMT格式。
图2是示出MMT格式堆栈模型的示图。
在图2所示的MMT堆栈模型中,具有物理层(PHY),作为最下层。物理层被分成执行广播系统的处理的广播层和执行网络系统的处理的宽带层。
MMT支持使用两个通信网络的处理,即,广播系统和网络系统。
作为高于物理层(PHY)的层,具有类型长度值(TLV)层。TLV是指定IP分组的多路复用方案的格式指定层。多个IP分组作为TLV分组多路复用并传输。TLV-SI是遵循TLV格式的信令信息的传输层。
信令信息由信息处理装置30侧接收内容(节目)所需的设置信息、诸如节目指南的指南信息、通知信息、控制信息等构成。
存储在由TLV层中的处理生成的TLV分组中的信令信息是TLV-SI,存储在MMTP分组中的信令信息是顶层所示的MMT-SI,该MMTP分组是根据MMT协议(MMTP)生成的分组。
UDP/IP层设置在TLV层之上。
详细地说,UDP/IP层可以分为IP层和UDP层,并且是指定传输的层,其中,UDP分组存储在IP分组的有效载荷中。
MMT层和文件传送方法层设置在UDP/IP层之上。
这是一种设置,其中,可以使用MMTP分组存储在IP分组中并被传输的方案以及使用文件传送方法传输作为IP分组的数据的方案,该文件传送方法是不使用MMTP分组的数据传输方案。
以下层设置在MMT图层之上:
视频数据,是根据作为图像编码标准的高效视频编码(HEVC)编码的视频数据;
音频数据,是根据作为音频编码标准的高级音频编码(AAC)编码的音频数据;
字幕数据,是根据作为字幕编码标准的定时文本标记语言(TTML)编码的字幕数据;
使用MMTP分组传输的信令信息(MMT-SI);和
此外,根据超文本标记语言5(HTML 5)描述的各种应用。
这些数据中的每一个都存储在MMTP分组中并被传输。
信令信息(MMT-SI)是通过MMTP分组传输的信令信息,并且通过信息处理装置30侧接收内容(节目)所需的设置信息、诸如节目指南等指南信息、通知信息、控制信息等来构成。
此外,时间信息(网络时间协议(NTP))是绝对时间信息,直接存储在UDP数据包中并传输。
传送其他数据、内容下载等的数据服务可以使用与MMT不同的文件传送方法来执行。
如图2所示,通过MMTP分组传输视频、音频、字幕、包括各种通知信息或控制信息的信令信息(MMT-SI)或应用程序。
将参考图3描述MMTP分组的具体配置示例。
图3示出了以下四种类型的数据配置示例。
(a)介质呈现单元(MPU);
(b)MMTP有效载荷;
(c)MMTP分组;和
(d)TLV分组。
(d)TLV分组是经由广播波或网络传输的分组,并且UDP报头、IP报头和TLV报头中的每一个的报头信息设置在TLV分组中。TLV分组被设置为每种数据类型的单独分组。
换言之,一种类型的数据存储在一个TLV分组的TLV有效载荷中。具体地,任何一种类型的数据,例如,视频(V)、音频(A)、字幕(S)、存储在MMTP分组中的信令信息(MMT-SI)、通过TLV分组传输的信令信息(TLV-SI),存储在单独的TLV分组中。
作为TLV分组的有效载荷的TLV有效载荷的示例是图3中(c)所示的MMTP分组。
图3中(c)所示的MMTP分组由MMTP报头和MMTP有效载荷构成。
一种类型的数据存储在一个MMTP分组的MMTP有效载荷中。具体地,任何一种类型的数据,例如,视频(V)、音频(A)、字幕(S)以及存储在MMTP分组中的信令信息(MMT-SI),存储在单独的MMTP分组中。
图3中(a)和图3中(b)示出了存储在图3中(c)所示的MMTP分组的MMTP有效载荷中的视频数据的详细配置。
图3中(b)仅示出了MMTP有效载荷是图3中(c)所示的MMTP分组中的视频数据(V)的部分。
图3中(b)所示的MMTP有效载荷由报头和数据单元构成。
如图3中(a)所示,视频数据和以下各种参数存储在数据单元中:
访问单元定界符(AU定界符);
序列参数集(SPS);
图片参数集(PPS);和
补充增强信息(SEI)。
这些参数是用于图像显示的参数。
图3中(a)所示的介质呈现单元(MPU)是MMT格式的一个数据处理单元。图3中(a)中示出的示例是视频数据的MPU的示例,该MPU是与用作所谓的编码和解码处理单元的图像组(GOP)相同的单元。
如上所述,例如,如图3中(a)所示,视频数据被划分成以MMT格式规定的参数和图像配置数据,存储在图3中(b)所示的MMTP有效载荷中,并且被配置为图3中(c)所示的MMTP分组。
此外,MMTP分组被设置为图3中(d)所示的TLV分组的有效载荷,并且TLV分组经由广播波或网络传输。
此外,对于诸如音频或字幕等每条数据以及MMT-SI的每条数据,设置并传输每个数据类型单元的MMTP分组和TLV分组。
TLV-SI存储在TLV分组中并传输,代替MMTP分组。
[3、BDAV格式和SPAV格式]
接下来,将参考图4和随后的附图描述BDAV格式和SPAV格式,这些格式是在遵循MMT格式的传送内容记录在诸如蓝光(注册商标)光盘(BD)、闪存或HD等介质中并再现的情况下的记录数据格式。
在从诸如蓝光(注册商标)光盘(BD)、闪存或HD等介质再现诸如视频、音频或字幕等内容的情况下,用于执行再现这种内容的处理的再现控制信息和索引信息是必要的。再现控制信息和索引信息通常称为数据库文件。
再现控制信息和索引信息根据执行在介质中再现记录数据的处理的再现应用程序而不同。
如上所述,具有BDMV和BDAV标准(数据记录格式),作为当前记录/再现应用程序标准(=数据记录格式)。应用标准主要被建立为使用蓝光(注册商标)光盘(BD)的数据记录/再现应用程序标准。
此外,BDMV和BDAV是主要使用BD的数据记录/再现应用程序标准和数据记录格式(标准),但是这些标准不限于BD,并且可以应用于使用BD以外的介质(例如,闪存)的数据记录/再现。
BDMV是为BD-ROM开发的应用标准,其中,例如,电影内容等被预先记录,并且主要广泛用于诸如分组内容等不可重写BD-ROM中。
另一方面,BDAV是被开发为主要应用于使用可重写BD-RE型盘、其中的记录只能执行一次的BD-R型盘等的数据记录/再现处理的标准。例如,BDAV用于记录和再现用户使用摄像机等捕获的视频,或者记录和再现电视广播。
为了利用BDAV格式兼容的再现应用程序从记录了遵循MMT格式的传送内容的介质执行内容再现处理,需要执行遵循BDAV格式的数据记录。
如上所述,在BDAV格式中,播放列表文件、剪辑信息文件等被指定为再现控制信息的记录文件,并且BDAV兼容再现应用程序使用诸如再现控制信息文件(数据库文件)等记录信息来记录数据再现处理。
图4是示出遵循BDAV格式记录在信息记录介质(媒介)40中的数据的目录配置示例的示图。
各种管理信息、再现控制信息和再现目标数据的存储文件设置在如图4所示的目录中。
管理信息文件例如由图4所示的信息文件(info)、菜单文件(menu)、标记文件(mark)等构成。这些文件主要存储显示给用户的标题等的管理信息。
此外,例如,记录以下文件,作为再现控制信息文件:
播放列表文件(playlist);
剪辑信息文件(clipinf)。
此外,剪辑AV流文件(流)作为再现数据存储文件而记录。
播放列表文件是例如根据由标题指定的再现节目的节目信息指定内容的再现顺序的文件,并且包括例如记录再现位置信息等的剪辑信息文件的指定信息等。
剪辑信息文件是由播放列表文件指定的文件,并且包括剪辑AV流文件等的再现位置信息。
剪辑AV流文件是存储用作再现目标的AV流数据的文件。剪辑AV流文件由存储作为再现目标的每条数据(例如,视频、音频或字幕等)的分组构成。
此外,现有技术的广播数据和网络传送信息是由传输流(TS)分组构成的MPEG-2TS格式数据,但是将来包括诸如4K图像、8K图像等高清晰度图像的数据预期是由MMTP分组构成的MMT格式数据。
在图4中,以下两种类型的流文件示出为剪辑AV流文件(流):
流文件(nnnnn.m2ts),包括由TS分组构成的MPEG-2 TS格式数据;和
由MMTP分组构成的MMT格式数据(nnnnn.mmtv)。
图4所示的目录示例是具有如下设置的目录示例,其中,在接收数据是MPEG-2 TS格式数据的情况下,信息处理装置30接收的数据作为MPEG-2 TS格式数据记录在介质中,而没有变化,并且在接收数据是MMT格式数据的情况下,接收数据作为MMT格式数据记录在介质中。
该目录示例是示例,并且例如,在信息处理装置30具有格式转换功能的情况下,可以执行以下处理。
在接收数据是MMT格式数据的情况下,要记录在介质中的所有剪辑AV流文件转换成MPEG-2 TS格式数据,并通过将MMT格式转换成MPEG-2 TS格式来记录。
另一方面,当执行从MPEG-2 TS格式到MMT格式的格式转换时,可以执行将记录在介质中的所有剪辑AV流文件转换成MMT格式数据的处理。
这些处理将在将来进行回顾。
诸如管理信息文件、播放列表文件和剪辑信息文件等数据文件是应用于视频、音频、字幕等的存储管理信息、再现控制信息和再现处理的再现数据属性信息的文件,所述视频、音频、字幕等是存储在剪辑AV流文件中并称为数据库文件的再现数据。
记录在信息记录介质中的再现内容的序列如下。
(a)首先,再现应用程序从管理信息文件中指定特定标题。
(b)选择与指定标题相关联的播放列表。
(c)根据在所选播放列表中指定的剪辑信息,读出用作实际内容数据的AV流或命令,执行AV流的再现或命令执行处理。
图5是用于描述记录在信息记录介质(媒介)40中的以下数据的对应关系的示图:
播放列表文件;
剪辑信息文件;和
剪辑AV流文件。
,包括作为实际再现目标数据的诸如视频、音频或字幕等再现目标数据的AV流记录为剪辑AV流(剪辑AV流)文件,并且播放列表(Playlist)文件和剪辑信息(ClipInformation)文件被指定为AV流的管理信息和再现控制信息文件。
如图5所示,多个类别的文件分为以下两层:
播放列表层,包括播放列表(Playlist)文件;和
剪辑层,包括剪辑AV流(ClipAVSteam)文件和剪辑信息(Clip Information)文件;
此外,一个剪辑信息(Clip Information)文件与一个剪辑AV流(Clip AV Steam)文件相关联,这一对被视为一个对象,并且这些统称为剪辑或剪辑文件。
在剪辑信息文件中记录诸如EP图等管理信息,其中,记录包括在剪辑AV流文件中的数据的详细信息,例如,MPEG数据的I图片位置信息等。
此外,剪辑AV流(Clip AV Steam)文件在该文件是MPEG-2 TS格式数据的情况下由TS分组构成。
此外,剪辑AV流(Clip AV Steam)文件在该文件是MMT格式数据的情况下由MMTP分组构成。
例如,剪辑信息(Clip Information)文件存储管理信息,用于获取剪辑AV流文件等的存储数据的再现开始位置等,例如,剪辑AV流文件的字节串数据的数据位置和再现时间位置的对应数据,例如,在时间轴上展开的情况下作为再现起始点的入口点(EP)。
播放列表包括指示访问点的信息,该访问点对应于带有时间戳的剪辑(Clip)的再现开始位置或再现结束位置,时间戳是时间轴上的信息。
例如,可以基于指示从内容的起始点开始的再现时间流逝位置的时间戳,获取剪辑AV流文件的数据读取位置,即,用作参考剪辑信息文件的再现起始点的地址。
剪辑信息文件(Clip Information file)用于查找地址信息,以便从时间戳开始对剪辑AV流文件中的流进行解码。
如上所述,播放列表(Playlist)文件包括剪辑(=剪辑信息文件+剪辑AV流文件)层中包含的可再现数据的再现间隔的指定信息。
在播放列表(Playlist)文件中设置至少一个播放项(PlayItem),并且每个播放项包括剪辑(=剪辑信息文件+剪辑AV流文件)层中包含的可再现数据的再现间隔的指定信息。
此外,如上所述,在存储再现目标数据的剪辑AV流(Clip AV Stream)文件是现有技术的MPEG-2 TS格式数据的情况下,该文件由TS分组构成
此外,在预计在将来越来越多地使用的诸如4K图像或8K图像等高清晰度视频数据的情况下,在作为MMT格式数据的情况下由MMTP分组构成。
将参考图6和7描述MMT格式和MPEG-2 TS格式。
首先,将参考图6描述MPEG-2 TS格式。
当作为诸如视频、音频或字幕等内容配置数据的编码数据存储在记录介质(媒介)中或经由广播波或网络传输时,MPEG-2 TS格式是指定编码数据等的数据存储格式(容器格式)的格式。
MPEG-2 TS格式是ISO 13818-1中标准化的格式,用于例如蓝光(注册商标)光盘(BD)中的数据记录、数字广播等。
图6中(a)至图6中(c)是示出MPEG-2 TS格式数据的配置的示图。
在底部示出的图6中(a)是示出MPEG-2 TS格式数据的总体配置的示图。
如图6中(a)所示,MPEG-2 TS格式数据由多个基本流(基本流)构成。
基本流(基本流)是被设置为一个诸如例如视频、音频或字幕的单元的单元。
如图2中(b)所示,一个基本流(基本流)由一个或多个分组化基本流(PES)分组构成。
具体地,一个基本流(基本流)由一个或多个PES分组构成,所述PES分组具有有效载荷类型(Payload_type)=0x0和相同的分组标识符(Packet_id)。
如图6中(c)所示,一个PES分组由一个或多个TS分组构成。
具体地,一个PES分组由一个或多个TS分组构成,该TS分组具有有效载荷类型(Payload_type)=0x0并且具有相同的分组标识符(Packet_id)。
与MMTP分组不同,TS分组具有固定长度,并且一个TS分组的分组大小固定为188字节。
接下来,将参考图7描述MMT格式。
上面已经参考图3描述了MMT格式,但是图7所示的MMT格式的说明图是描述与参考图6描述的MPEG-2 TS格式的对应关系的示图,以便于理解。
如上所述,MMT格式是当经由广播波或网络传输编码数据时指定数据传输方案(传输格式)的格式,编码数据是诸如视频、音频或字幕等内容配置数据。
图7是用于描述MMT格式的示图,MMT格式是ISO/IEC 23008-1中指定的文件格式。
图7中(a)至7中(c)示出MMT格式数据的配置。
底部示出的图7中(a)是示出MMT格式数据的总体配置的示图。
如图7中(a)所示,MMT格式数据由多个介质呈现单元(MPU)构成。
MPU是被设置为诸如例如视频、音频、字幕等的一个单元的单元。例如,在图像的情况下,一个MPU对应于一个GOP,该GOP是一个MPEG压缩的图像单元。
如图7中(b)所示,一个MPU由一个或多个介质片段单元(MFU)构成。
具体地,一个MPU由一个或多个MFU构成,所述MFU具有有效载荷类型(Payload_type)=0x0(MPU)和相同分组标识符(Packet_id)。
如图7中(c)所示,一个MFU由一个或多个MMTP分组构成。
具体地,一个MFU由一个或多个MMTP分组构成,所述MMTP分组具有有效载荷类型(Payload_type)=0x0(MPU)和相同分组标识符(Packet_id)。
MMTP分组具有可变长度,可以设置为各种分组大小。
每个MMTP分组由存储属性信息等的报头(MMTP报头)和存储编码图像等的实际数据的有效载荷(MMPT有效载荷)构成。
此外,作为类似于BDAV格式的格式,存在SPAV格式。如上所述,BDMV和BDAV是主要使用BD的数据记录/再现应用程序标准。另一方面,SPAV格式是主要用于硬盘的数据记录/再现应用程序标准。
在此处,BDAV格式和SPAV格式都是可以使用诸如BD、闪存和HD等各种介质进行记录/再现的格式。
可以使用类似于BDAV格式的数据记录/再现处理的处理,对SPAV格式的数据执行数据记录/再现。在此处,SPAV格式在文件名设置上与BDAV格式部分不同。
图8示出了SPAV格式的目录配置示例。
各种管理信息、再现控制信息和再现目标数据的存储文件设置在图8所示的SPAV格式的目录中,类似于上面参考图4描述的BDAV格式。
管理信息文件例如由图8所示的信息文件(INFO)、菜单文件(MENU)、标记文件(MARK)等构成。这些文件主要存储显示给用户的标题等的管理信息。
此外,例如,以下文件被记录为再现控制信息文件:
播放列表文件(PLAYLIST);和
剪辑信息文件(CLIPINF)。
此外,剪辑AV流文件(STREAM)作为再现数据存储文件来记录。
如图8所示,目录名的扩展名或SPAV格式的每个文件的设置不同于上面参考图4描述的BDAV格式。
在此处,存储在每个文件中的数据和每个文件的作用与BDAV格式的相似。
在下面的实施方式中,将描述将MMT格式数据记录为BDAV格式数据并将其再现的处理示例,但是下面将要描述的实施方式也可以应用于将MMT格式数据记录为SPAV格式数据并将其再现的处理。
[4、在遵循BDAV格式记录MMT格式数据的情况下的处理]
接下来,将描述遵循BDAV格式记录MMT格式数据的情况下的处理。
如上所述,MMT格式是数据传送格式,该格式是根据上面参考图3描述的堆栈的格式。
另一方面,BDAV格式是用于介质的数据记录格式,并且如上参考图4所述,指定了包括诸如播放列表文件或剪辑信息文件的再现控制信息文件的数据库文件。
此外,BDAV格式是数据记录格式,并且也与数据记录/再现应用程序标准兼容,并且使用BDAV格式兼容的再现应用程序来执行遵循BDAV格式再现记录在介质中的数据的处理。
因此,为了遵循MMT格式将传送内容记录在介质中,并使用BDAV格式兼容的再现应用程序从记录的介质执行内容再现处理,需要遵循BDAV格式记录数据。
期望用作再现目标数据的视频、音频、字幕等中的每一个的数据被记录为MMT格式,而不改变,或者可以如上所述转换成MEG-2 TS文件并被记录为剪辑AV流文件。
然而,BDAV格式指定专用于BDAV格式的数据库文件,例如,播放列表文件或剪辑信息文件,这些文件是再现控制信息文件,并且BDAV兼容的再现应用程序使用再现控制信息文件(数据库文件)的记录信息来执行数据再现处理。
如上所述,数据库文件(例如,以BDAV格式指定的播放列表文件或剪辑信息文件)最初是指定为可以基于MPEG-2 TS格式的传送数据生成的文件的文件。
根据与MPEG-2 TS格式不同的MMT格式的传送数据记录在播放列表文件或以当前BDAV格式指定的剪辑信息文件中,但是存在这样的情况,即,该数据是当前BDAV兼容再现应用程序不能使用的数据。
因此,为了能够在介质中记录MMT格式数据并使用BDAV格式兼容应用程序执行内容再现,当执行在介质中记录MMT格式数据的处理时,需要生成对应于MMT格式数据的播放列表文件或剪辑信息文件并将其记录在介质中。
此外,当再现记录在介质中的MMT格式数据时,需要使用与MMT格式数据相对应的播放列表文件或剪辑信息文件来执行再现。
图9是用于描述基于遵循MMT格式的传送数据生成用于介质记录的BDAV格式数据的处理示例的示图。
如图9所示,用作再现目标的视频、音频或字幕中的每一个的数据被记录为剪辑AV流文件。可以执行各种处理,例如,记录MMT格式而不改变的处理以及将MMT格式转换成TS格式并将其记录在再现目标数据上的处理。
另一方面,以BDAV格式指定的管理信息文件、诸如播放列表文件或剪辑信息文件等数据库文件不包括在MMT格式中。
如上参考图2所述,MMT格式数据包括接收内容所需的设置信息、诸如节目指南等指南信息、通知信息、控制信息等。
通过TLV层中的处理生成的TLV分组中存储的信令信息是TLV-SI,并且作为根据MMTP生成的分组的MMTP分组中存储的信令信息是MMT-SI。
在接收MMT格式数据并将接收的数据记录在介质中的信息处理装置30中,需要从包括在MMT格式中的诸如TLV-SI和MMT-SI等信令信息中选择要记录在BDAV格式的数据库文件中的信息,并生成以BDAV格式指定的播放列表文件、剪辑信息文件等。
各种数据记录在播放列表文件或以BDAV格式指定的剪辑信息文件中,作为剪辑AV流文件的再现控制信息。例如,记录存储在剪辑AV流文件中的内容的属性信息。
如上参考图4所述,在存储诸如视频和音频等再现目标数据的剪辑AV流文件(流)中包括以下两种类型的流文件:
流文件(nnnnn.m2ts),包括由TS分组构成的MPEG-2 TS格式数据;和
由MMTP分组构成的MMT格式数据(nnnnn.mmtv)。
如上参考图4所述,图4所示的目录示例是具有如下设置的目录示例,其中,在接收数据是MPEG-2 TS格式数据的情况下,信息处理装置30接收的数据作为MPEG-2 TS格式数据记录在介质中,而没有变化,并且在接收数据是MMT格式数据的情况下,接收数据作为MMT格式数据记录在介质中。
如上所述,例如,在根据图4所示的BDAV格式记录构成从广播台接收的节目内容的MMT格式数据的情况下,由图4所示的MMTP分组构成的MMT格式数据(nnnnn.mmtv)被记录为剪辑AV流文件(流)。
如上参考图3至图7所述,MMT格式数据(nnnnn.mmtv)是具有与MPEG-2 TS格式数据不同的格式的数据。
因此,作为应用于再现MMT格式数据(nnnnn.mmtv)的生成控制信息文件的播放列表文件或剪辑信息文件需要具有用于实现再现MMT格式数据(nnnnn.mmtv)的数据配置。应用于再现相关技术的MPEG-2 TS格式数据(nnnnn.m2ts)的播放列表文件或剪辑信息文件不能在没有改变的情况下使用。
例如,在从诸如广播服务器(广播台)21等传输装置20传输的构成节目内容的MMT格式数据接收并记录在诸如BD、闪存或HD等介质(信息记录介质)中的情况下,诸如图1所示的电视32等信息处理装置30执行记录过程,用于MMT格式数据存储的剪辑AV流文件(nnnnn.mmtv)71在图10所示的BDAV目录中存储作为剪辑AV流文件的根据MMT格式的数据。
与MMT格式数据存储的剪辑AV流文件(nnnnn.mmtv)71的记录过程并行,诸如电视机32等信息处理装置30需要记录再现控制信息,以便能够使用BDAV记录/再现应用程序来再现MMT格式数据存储的剪辑AV流文件(nnnnn.mmtv)71。
具体地,需要生成与图10所示的MMT格式数据存储的剪辑AV流文件71相对应的剪辑信息文件(nnnnn.clpi)72和播放列表文件(nnnnn.rpls)73,并将其记录在介质(BD、闪存、HD等)中。
在再现记录在介质中的MMT格式数据存储的剪辑AV流文件71的情况下,可以使用与该MMT格式数据存储的剪辑AV流文件71相对应的剪辑信息文件(nnnnn.clpi)72和播放列表文件(nnnnn.rpls)73来执行再现处理。
然而,如上所述,作为广播台的传送数据并且根据MMT格式传送的数据不包括以BDAV格式指定的播放列表文件和剪辑信息文件的所有记录数据。
此外,MMT格式数据存储的剪辑AV流文件71具有不同于MPEG-2TS格式数据的数据格式,并且具有不能使用播放列表文件或剪辑信息文件来执行适当的再现处理的问题,该播放列表文件或剪辑信息文件在与MPEG-2 TS格式数据相对应的播放列表文件或剪辑信息文件中具有相同格式的数据。
因此,为了在介质中记录MMT格式数据并使用BDAV格式兼容应用程序执行内容再现,需要生成播放列表文件或剪辑信息文件,该播放列表文件或剪辑信息文件具有能够对MMT格式数据存储的剪辑AV流文件71执行再现控制的MMT格式数据特有的数据格式,并且需要将生成的播放列表文件或剪辑信息文件记录在介质中。
下面将描述具体的处理。
[5、对应于MMT格式数据的播放列表文件]
首先,将参考图11和随后的附图描述与MMT格式数据相对应的播放列表文件。
如上所述,与通过应用播放列表再现的数据相关的信息记录在播放列表文件中。具体地,例如,包括与应用于内容再现处理的播放项相关的信息以及记录有再现位置信息等的剪辑信息文件的进一步指定信息等。
图11是示出记录在一个播放列表(PlayList)文件中的[PlayList]的数据配置(语法)的示图。
将描述图11所示的[PlayList]的主要记录数据。
版本号(version_number)表示播放列表的版本号。
长度表示从长度字段之后的字节到播放列表文件配置数据的末尾的字节数。
PL_CPI类型(PL_CPI_type)101是指示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型的信息。
播放项的数量(number_of_PlayItems)102表示播放列表文件中指定的播放项(PlayItem)的数量。
子播放项的数量(number_of_SubPlayItems)103表示在该播放列表文件中指定的播放项(PlayItem)的数量。
每个播放项和子播放项的详细信息记录在播放项信息(PlayItem())104中。
稍后将描述播放项信息(PlayItem())104的细节(语法)。
如上所述,PL_CPI类型(PL_CPI_type)101是指示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型的信息。
特征点信息(CPI)是剪辑信息文件的记录数据,并且是例如用于获取可以开始随机访问再现的再现起始点的数据地址的数据。
此外,作为BDAV格式中指定的CPI,具有不同类型的地图,例如,EP图(EP_map)和TU图(TU_map)。
这两个地图都是例如用作随机访问点的再现时间信息(呈现时间戳(PTS))的对应数据以及源分组号(SPN),该源分组号是该位置处的分组的分组标识符并且是可以用于获取存储随机访问点的再现数据的分组的地图信息。
EP图和TU图都是记录随机访问点信息的地图数据,但是EP图是记录更精细的随机访问点信息的地图数据,TU图是记录比EP图更粗糙的随机访问点信息的地图数据。
在BDAV格式中,指定了EP图和TU图这两种类型的地图,但目前,TU图很少使用,仅使用EP图。
EP_map和TU_map包括地址信息,用于查找AV流中开始解码的入口点(EP)的位置。
将参考图12和随后的附图描述EP图。
如上参考图5所述,播放列表包括指示与带有时间戳的剪辑(Clip)的再现开始位置或再现结束位置相对应的访问点的信息,该时间戳是时间轴上的信息。
剪辑信息文件(剪辑信息文件)用于查找地址信息,以便从时间戳开始对剪辑AV流文件中的流进行解码。
此外,剪辑信息文件(clip information file)具有图12所示的EP图(EP_map)。
存储在剪辑AV流文件中的再现数据中与可以开始随机再现的再现开始位置或再现结束位置相对应的访问点信息存储在EP图中。
换言之,指示时间轴上的再现开始位置的时间戳和用于获取与分组位置信息相对应的分组的地址信息的对应数据记录在EP图中。
具体地,包括以下对应信息:
(a)表示时间轴上访问点的呈现时间戳(PTS);和
(b)对应于指示剪辑AV流文件中的分组位置的地址的源分组号(SPN)。
可以参考具有这种对应信息的EP图,基于时间戳获取对应的地址(SPN),并根据地址(SPN)找到例如作为AV流中的再现开始位置的决定起始点等。
图13是用于描述EP图(EP_map)的具体配置和使用示例的示图。在图13中(A)所示的剪辑AV流(剪辑AV流)中,多路复用包括由分组标识符(PID)标识的源分组的视频流。通过包含在源分组中的传输分组的报头中的PID来区分每个源分组的视频流。
视频流的源分组包括构成MPEG数据的IPB图片,即,I(帧内)图片、P(预测)图片和B(双向预测)图片。I图片是可以独立解码的图片数据,并且在解码P图片和B图片的情况下,需要参考其之前和之后的I图片。例如,通过随机访问的再现起始点被设置为具有可以独立解码的I图片的分组位置。
EP图将I图片的位置信息保存为随机可访问的再现起始点位置信息,作为上述PTS和SPN的对应数据。换言之,包括以下对应信息:
(a)在时间轴上指示访问点的时间戳(PTS);和
(b)对应于指示剪辑AV流文件中的分组位置的地址的源分组号(SPN)。
可以参考如上所述设置的EP图获得I图片的位置,该位置是随机可访问的再现开始位置。EP图(EP_map)是剪辑信息文件中包含的数据。
将参考图13描述基于EP图的I图片位置的检测。图13中(A)示出了剪辑AV流,并且每个矩形指示192字节的源分组。
在图13中,包括I(帧内)图片的第一字节的源分组由阴影矩形表示。未画阴影线的白色方形表示包括非随机访问点的数据的源分组或者包括另一流的数据的源分组。
例如,包括由PID=x区分的视频流的随机可访问I图片的第一字节的源分组号X1的源分组放置在剪辑AV流的时间轴上的PTS=pts(x1)的位置。类似地,包括下一随机可访问I图片的第一字节的源分组是源分组号X2的源分组,并且放置在PTS=pts(x2)的位置。
如图13中(B)所示,源分组被配置为将4字节报头(TP_extra_header)添加到188字节传输分组。传输分组部分包括报头部分(TP报头)和有效载荷部分。
作为图13中(C2)所示的EP图的注册数据的SPN_EP_start表示包括从序列报头(SQH)开始的包括I图片的访问单元(访问单元)的第一字节的源分组的源分组号(SPN)。
此外,剪辑AV流文件中所有分组中设置的一系列数字是源分组号(SPN)。在剪辑AV流文件中,第一源分组的源分组号为零,下一分组的源分组号为1,此后,对于每个下一分组,源分组号递增1。
如图13中(C2)所示,以下数据记录在EP图(EP_map)中:
流PID(Stream_PID);
EP条目的数量(number_of_EP_entries);
呈现时间戳EP开始(PTS_EP_start);和
源分组号EP开始(SPN_EP_start)。
流PID(Stream_PID)是用于传输视频流的传输分组的分组标识符(PID)。
EP条目的数量(number_of_EP_entries)是EP_map中包括的一对PTS_EP_start和SPN_EP_start的条目的数量。
呈现时间戳EP开始(PTS_EP_start)指示从随机可访问I图片开始的访问单元的呈现时间戳(PTS)。
源分组号EP开始(SPN_EP_start)表示源分组号(SPN),包括由PTS_EP_start值引用的访问单元的第一字节。
视频流的PID(分组标识符)值存储在stream_PID中,并且生成EP_map(),该EP_map()是指示PTS_EP_start和SPN_EP_start之间的对应关系的表信息。
例如,在PID=x的视频流的EP图中描述了包括以下PTS和以下SPN的对应数据的表:
PTS=pts(x1)和源分组号(SPN)X1;
PTS=pts(x2)和源分组号(SPN)X2;
...,以及
PTS=pts(xk)和源分组号(SPN)Xk。
包括该表的EP图(EP_map)存储在对应于一个剪辑AV流的剪辑信息文件中。
参考包括这种数据的EP图(EP_map),以便指定解码开始位置,例如,当执行随机访问等时。
将参考图14描述当从剪辑中的时间轴上的时间x开始再现时,使用EP_map计算在剪辑AV流文件中开始流解码的地址信息的方法。
如图14所示,在播放列表(Playlist)包括指定从剪辑中的时间轴上的时间x开始再现的信息的情况下,指定小于x并且具有最接近值的时间戳[PTS_EP_start[m]]。
基于根据播放列表信息指定的时间戳[PTS_EP_start[m]]参考剪辑信息文件中的EP图,指定对应于时间戳[PTS_EP_start[m]]的源分组号[SPN_EP_start[m]]。
如上所述,从PTS获取SPN,SPN是对应于PTS的分组位置信息,即,[SPN_EP_start[m]],PTS是使用EP图根据播放列表信息确定的再现时间信息。
可以获取分组位置[SPN_EP_start[m]],作为剪辑AV流文件中的再现起始点,即,开始解码的地址信息,执行解码处理,并执行再现。
参考图12至图14描述的EP图的使用示例是对应于使用MPEG-2 TS格式数据的随机访问点的分组获取处理示例。如上所述,在MPEG-2 TS格式数据中,从PTS获取SPN,该SPN是对应于PTS的分组位置信息,即,[SPN_EP_start[m]],该PTS是使用EP图根据播放列表信息确定的再现时间信息。
然而,由于MMT格式数据具有不同于MPEG-2 TS格式数据的格式,因此不能通过执行与该MPEG-2 TS格式数据的处理类似的处理来获取随机访问点对应分组。
换言之,在再现目标数据是MMT格式数据的情况下,需要执行不同于上述处理的与MMT格式数据相对应的数据处理。
在剪辑信息文件中指定EP图,并且需要将MMT格式数据兼容的EP图记录在与MMT格式数据相对应的剪辑信息文件中,用于执行与MMT格式数据相对应的随机访问点获取处理。
换言之,需要将MMT格式数据兼容的EP图记录在与图10所示的MMT格式数据存储的剪辑AV流文件71相对应的剪辑信息文件(nnnnn.clpi)72中。将在后面描述这个具体的示例。
如上所述,对应于MPEG-2 TS格式数据的EP图和对应于MMT格式数据的EP图是不同的数据。
如上参考图11所述,记录在图11所示的播放列表文件中的PL_CPI类型(PL_CPI_type)是指示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型的信息。
CPI是剪辑信息文件的记录数据,并且是用于记录指示EP图或TU图的类型的数据的区域,用于获取再现起始点(随机访问点)的数据地址。
MPEG-2 TS格式数据兼容的EP图或TU图的识别信息记录在相关技术的PL_CPI类型(PL_CPI_type)中。
然而,对应于MMT格式数据的EP图是与相关技术的MPEG-2 TS格式数据兼容的EP图不同的地图。
因此,也需要在播放列表文件的PL_CPI类型(PL_CPI_type)中设置一个识别符来区分。
图15示出了以下CPI类型记录数据:
(1)相关技术的CPI类型记录数据(仅记录MPEG-2 TS兼容数据);和
(2)新的CPI类型记录数据(记录MPEG-2 TS兼容数据和MMT兼容数据)。
图15中的“(1)相关技术的CPI类型记录数据(仅记录MPEG-2 TS兼容数据)”中所示的数据是指定为相关技术的播放列表文件的PL_CPI类型(PL_CPI_type)的数据。
PL_CPI类型(PL_CPI_type)=1表示播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MPEG-2 TS兼容的EP图。
PL_CPI类型(PL_CPI_type)=2表示播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MPEG-2 TS兼容的TU图。
如上所述,只有MPEG-2 TS兼容数据记录在相关技术的CPI类型记录数据中。
图15的“(2)新CPI类型记录数据(记录MPEG-2 TS兼容数据和MMT兼容数据)”具有这样的配置,其中,以下比特值=3的设置添加到上述设置中:
PL_CPI类型(PL_CPI_类型)=3。
PL_CPI类型(PL_CPI_type)=3表示播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MMT兼容的EP图。
如上所述,由于可以定义PL_CPI类型(PL_CPI_type)=1至3的三种CPI类型,因此可以识别三种CPI类型。
接下来,将参考图16和随后的附图描述上面参考图11描述的播放项信息(PlayItem())104的细节(语法)。
如上所述,每个播放项和每个子播放项的详细信息记录在播放项信息(PlayItem())104中。
图16是示出播放项信息(PlayItem())104的数据配置(语法)的示图。
要应用于使用播放项的再现处理的剪辑信息文件的文件名记录在剪辑信息文件名(Clip_Information_file_name)111中。
参考STC标识符(ref_to_STC_id)112指示将由播放项引用的系统时钟(STC)连续间隔的STC标识符。
STC是AV流再现时的参考时钟,并且在连续再现间隔中使用一个STC。例如,在再现一个播放项的连续再现间隔中使用一个STC,并且通过切换播放项来引用不同的STC。
指定由播放项引用的STC的信息记录在引用STC标识符(ref_to_STC_id)112中。
开始时间(IN_time)113是播放项的再现开始时间的记录区域。
结束时间(OUT_time)114是播放项的再现结束时间的记录区域。
在再现目标是相关技术的MPEG-2 TS格式数据的情况下,与对应于由参考STC标识符(ref_to_STC_id)112指定的播放项的STC的开始时间的差值时间信息(45KHzh时钟)记录在开始时间信息和结束时间信息中。
此外,45KHz时钟是用于记录/再现MPEG-2 TS格式数据的通用时钟。
然而,在再现目标数据是MMT格式数据的情况下,与MPEG-2 TS格式数据不同,没有获得单独STC与对应于播放项的每条再现目标数据(MMT格式数据)相关联的配置。
因此,需要使记录在以MMT格式数据作为特定于MMT格式数据的再现目标的播放列表的播放项信息(PlayItem())中的开始时间(IN_time)113和结束时间(OUT_time)114。
将参考图17描述该修改示例。
图17示出了以下数据示例:
(1)相关技术的播放项信息记录数据(MPEG-2 TS兼容播放列表);和
(2)新播放项信息记录数据(MMT兼容播放列表)。
图17中(1)所示的“(1)相关技术的播放项信息记录数据(MPEG-2TS兼容播放列表)”表示在再现目标数据是MPEG-2 TS格式数据的情况下,记录在播放项信息(PlayItem())中的开始时间(IN_time)和结束时间(OUT_time)的记录数据。
开始时间(IN_time)是播放项(PlayItem)再现起始点的再现开始时间信息,并且如上所述,记录从应用于使用播放项的再现处理的STC[系统时钟(45KHz时钟)]起始点的经过时间信息。STC是由以上参考图16描述的参考STC标识符(ref_to_STC_id)112指定的STC。
此外,结束时间(OUT_time)是播放项(PlayItem)再现结束点的再现结束时间信息,并且如上所述,记录从应用于使用播放项的再现处理的STC[系统时钟(45KHz时钟)]结束点的经过时间信息。STC是由以上参考图16描述的参考STC标识符(ref_to_STC_id)112指定的STC。
图17中(2)所示的“(2)新播放项信息记录数据(MMT兼容播放列表)”表示在再现目标数据是MMT格式数据的情况下,记录在播放项信息(PlayItem())中的开始时间(IN_time)和结束时间(OUT_time)的记录数据。
开始时间(IN_time)是播放项(PlayItem)再现起始点的再现开始时间信息。在再现目标数据是MMT格式数据的情况下,记录根据NTP的时间信息。
结束时间(OUT_time)是播放项(PlayItem)再现结束点的再现结束时间信息。在再现目标数据是MMT格式数据的情况下,记录根据NTP的时间信息。
例如,根据NTP的时间信息与MMT格式数据一起传输,MMT格式数据包括由诸如图1所示的广播服务器(广播台)21等传输装置20传输的广播内容等。
诸如电视(TV)32等信息处理装置30根据传输装置20传输的NTP获取时间信息,并将时间信息记录在播放列表中。
传输装置20传输例如控制信息,其中,作为上述参考图3描述的MMT格式的一个数据处理单元的MPU单元的再现时间信息与再现目标数据(节目内容)一起记录为根据NTP的时间信息。
将参考图18和随后的附图描述具体示例。
例如,在通过MMT格式数据从诸如图1所示的广播服务器(广播台)21等传输装置20接收传送内容(节目)并将接收的内容记录在信息记录介质(媒介)中的信息处理装置30中,需要从接收的数据中提取各种信息并生成播放列表文件或剪辑信息文件。
如上参考图2和其他附图所述,MMT格式数据包括由信息处理装置30侧接收内容(节目)所需的设置信息、诸如节目指南等指南信息、通知信息、控制信息等构成的信令信息。
作为由MMT格式指定的信令信息,具有通过MMTP分组传输的信令信息(MMT-SI)和通过TLV分组传输的信令信息(TLV-SI)。
例如,接收MMT格式数据并将接收的数据记录在介质中的信息处理装置30从包括在MMT格式中的诸如TLV-SI或MMT-SI等信令信息中提取各种信息,并生成播放列表文件或剪辑信息文件。
MMT封装表(MPT)是通过MMTP分组传输的一个信令信息(MMT-SI)。MMT封装表(MPT)是这样一种表,其中,针对每种数据类型(资产类型),例如,视频、音频或字幕等,详细记录数据的属性信息(资产描述符)。
此外,MMT封装表(MPT)存储在封装ID=0x0000的MMTP分组中,并且信息处理装置可以基于封装ID来确定存储MMT封装表(MPT)的分组。
将参考图18描述MMT封装表(MPT)的配置。
图18是示出MMT封装表(MPT)的数据配置(语法)的示图。
如上所述,MMT格式中指定的MMT封装表(MPT)是这样一种表,其中,针对每种数据类型(资产类型),例如,视频、音频或字幕等,详细记录数据的属性信息(资产描述符)。
MMT封装表(MPT)包括以下数据记录区域,如图18所示:
资产类型(asset_type);和
资产描述符(asset_descriptors_byte)。
资产类型(asset_type)是记录每个数据类型的标识符的区域,例如,视频、音频或字幕。资产是具有公共属性的数据处理单元,并且视频、音频或字幕等被设置为不同的资产。
在图19中示出记录在MMT封装表(MPT)中的资产类型(asset_type)的具体示例。
例如,作为MPT中记录的资产类型(asset_type),如图19所示,具有以下类型:
hvc 1:HEVC图像;
mp4a:音频;
stpp:字幕等;和
aapp:应用程序。
例如,上述类型信息中的任何一个记录在图18所示的MPT的资产类型(asset_type)记录字段中。
在图18中的MPT下部所示的以下字段中:
资产描述符(asset_descriptors_byte),
记录各种资产类型(例如,视频、音频或字幕)和对应于数据类型的各种属性信息。
视频、音频等的再现时间信息包括在记录为资产描述符(asset_descriptors_byte)的一条信息中。
根据NTP,再现时间信息记录为时间信息。
图20示出MPU时间戳描述符的数据配置(语法),其中,记录了记录在MMT封装表(MPT)中的MPU单元的再现时间信息(时间戳),作为资产描述符(asset_descriptors_byte)。
此外,如上参考图3所述,MPU是图3中(a)所示的MPU,并且是MMT格式的一个数据处理单元。图3中(a)所示的示例是作为所谓的编码和解码处理单元的与GOP相同的单元的视频数据的MPU的示例。
记录在MMT封装表(MPT)中的MPU时间戳描述符对应于MPU单元的再现时间信息。
如图20所示,以下数据记录在MPU时间戳描述符中:
MPU序列号(MPU_sequenc_number);和
MPU再现时间(MPU_presentation_time)。
MPU的标识符记录在MPU序列号(MPU_sequenc_number)中。
MPU的再现时间(呈现时间)记录在MPU再现时间(MPU_presentation_time)中,作为根据NTP的时间信息。
此外,NTP时间(NTP时间戳)是例如64位数据的绝对时间信息,即,表示从预先指定的参考时间起经过的时间的绝对时间信息。1秒或更长的时间信息(经过时间信息)由高32位表示,1秒或更短的时间信息(经过时间信息)由低32位表示。
此外,使用短长度格式的NTP时间信息的设置也是可能的,其中,NTP时间信息总共有32位,1秒或更长的时间信息由高16位表示,1秒或更短的时间信息由低16位表示。
如上所述,作为MPU单元的再现时间信息(时间戳)的MPU时间戳作为资产描述符(asset_descriptors_byte)记录在MMT封装表(MPT)中。
如上所述,图1所示的传输装置20将作为MMT格式的一个数据处理单元的MPU单元的再现时间信息作为NTP时间信息记录在MMT封装表(MPT)中,并将得到的MMT封装表(MPT)传输到诸如电视等信息处理装置30。
信息处理装置30获取时间信息并将时间信息记录在播放列表中。
换言之,在作为剪辑AV流文件记录在信息记录介质(媒介)中的数据是MMT格式数据的情况下,信息处理装置30将从MMT封装表(MPT)获取的NTP时间信息记录在作为再现控制信息文件的播放列表文件中。
如上参考图17中(2)所述,在作为剪辑AV流文件记录在信息记录介质(媒介)中的再现目标数据是MMT格式数据的情况下,信息处理装置30根据NTP记录时间信息,作为播放列表文件的播放项信息(PlayItem())的开始时间(IN_time)和结束时间(OUT_time)。
接下来,将参考图21描述作为记录在播放列表文件中的另一元素的播放列表标记(PlayListMark)。
首先,将描述标记(Mark)。该标记是可以记录在播放列表文件或剪辑信息文件中的数据,例如,作为存储在剪辑AV流文件中的视频数据的特征场景的章节定界符、场景改变点、书签、高亮或时间指定信息。
通过记录指示标记时间的时间戳的过程,该标记记录在播放列表文件或剪辑信息文件中。
图21是示出作为播放列表文件的元素的播放列表标记(PlayListMark)的数据配置(语法)的示图。
播放列表标记的数量(PlayListMark_number_PlayListMark)121表示存储在播放列表标记(PlayListMark)中的标记的数量。
标记类型(mark_type)122是指示标记类型的字段。例如,记录指示诸如播放列表的代表性图像位置、章节开始位置、章节结束位置、场景改变位置或编辑位置等每个标记记录到的标记类型的信息。
标记时间戳(mark_time_stamp)123是记录指示设置了标记的点的时间戳的字段。
基本流封装ID条目(entry_ES_PID)124是记录设置了标记的分组的标识符的字段。
持续时间125是记录相邻标记之间的时间间隔的字段,例如,章节的长度。
指定了在相关技术的MPEG-2 TS格式数据记录为剪辑AV流文件的情况下的图21所示的播放列表标记(PlayListMark)的记录数据,但是在MMT格式数据记录为剪辑AV流文件的情况下,没有特别指定。
因此,在MMT格式数据记录为剪辑AV流文件的情况下,需要指定播放列表标记(PlayListMark)的记录数据。
图22示出了以下数据示例:
(1)相关技术的播放列表标记信息记录数据(MPEG-2 TS兼容播放列表);和
(2)新播放列表标记信息记录数据(MMT兼容播放列表)。
图22中(1)所示的“(1)播放列表标记信息记录数据”表示在再现目标数据是MPEG-2 TS格式数据的情况下记录在播放列表标记(PlayListMark)中的记录数据。
标记时间戳(mark_time_stamp)是记录了指示标记设置点的时间戳的字段。在再现数据是MPEG-2 TS格式数据的情况下,在此处记录标记设置位置处的时间戳。时间戳记录为45KHz时钟数据,这是用于记录/再现MPEG-2 TS格式数据的通用时钟。
基本流数据封装ID条目(entry_ES_PID)是记录设置了标记的分组的标识符的字段。在再现数据是MPEG-2 TS格式数据的情况下,在此处记录在标记设置位置的TS分组的封装ID(PID)。
持续时间是记录相邻标记之间的时间间隔的字段,例如,章节的长度。在再现数据是MPEG-2 TS格式数据的情况下,在此处,相邻标记之间的时间间隔记录为45KHz时钟数据,该时钟数据是用于记录/再现MPEG-2TS格式数据的通用时钟。
图22所示的“(2)新播放列表标记信息记录数据(MMT兼容播放列表)”表示在再现目标数据是MMT格式数据的情况下记录在播放列表标记(PlayListMark)中的记录数据。
在再现目标数据是MMT格式数据的情况下,在标记设置位置处的时间戳记录在标记时间戳(mark_time_stamp)中,作为根据NTP的时间信息。
从例如参考图18和其他附图描述的MPT中,即,从以MMT格式指定的MMT封装表(MPT)中,获取根据NTP的时间信息。
此外,基本流封装ID条目(entry_ES_PID)是记录设置了标记的分组的标识符的字段,并且在再现数据是MMT格式数据的情况下,MMT分组的ID记录为标记设置位置处的封装ID。
持续时间是记录相邻标记之间的时间间隔的字段,例如,章节的长度。即使在再现数据是MMT格式数据的情况下,与MPEG-2 TS格式数据类似,相邻标记之间的时间间隔也作为45KHz时钟数据记录在该字段中。标记之间的时间间隔可以在数据记录时计算,并且被设置为与相关技术的MPEG-2 TS格式数据的数据记录格式一起记录。
[6、对应于MMT格式数据的剪辑信息文件]
接下来,将参考图23和随后的附图描述与MMT格式数据相对应的剪辑信息文件。
如上所述,与通过应用剪辑信息文件而再现的数据相关的信息记录在剪辑信息文件中。具体地,例如,包括剪辑AV流文件等的再现位置信息。
图23是示出一个剪辑信息文件的数据配置(语法)的示图。
与剪辑信息相关联的再现数据相关的信息记录在剪辑信息文件中。例如,如图23所示,记录以下信息:
剪辑信息[ClipInfo()]201;
序列信息[SequenceInfo()]202;
节目信息[ProgramInfo()]203;和
CPI信息[CPI()]204。
剪辑信息[ClipInfo()]201记录与剪辑信息文件相对应的AV流文件的属性信息。
序列信息[SequenceInfo()]202记录与存储在对应于剪辑信息文件的AV流文件中的再现目标数据的再现序列相关的信息。
节目信息[ProgramInfo()]203记录与包括由剪辑信息文件等再现的剪辑AV流的再现间隔或时间间隔的定义信息的节目相关的信息。
CPI信息[CPI()]204例如是用于获取再现起始点的数据地址的数据,并且记录上面参考图12至14描述的EP_map和TU_map。
如上参考图11所述,CPI类型(CPI_type)记录在播放列表文件中。CPI类型(CPI_type)是指示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型的信息。
接下来,将参考图24描述记录在剪辑信息文件中的剪辑信息[ClipInfo()]201的数据配置(语法)。
如上所述,剪辑信息[ClipInfo()]201是记录与剪辑信息文件相对应的AV流文件的属性信息的区域。
如图24所示,以下数据记录在剪辑信息[ClipInfo()]201中:
(a)应用类型(应用类型)211;
(b)剪辑流类型(Clip_stream_type)212;
(c)转码模式标志(transcode_mode_flag)213;
(d)TS平均速率(TS_average_rate)214;
(e)TS记录速率(TS_recording_rate)215;和
(f)源分组的数量(num_of_source_packets)216。
应用类型(应用类型)211是指示剪辑信息文件再现应用程序的类型的信息,具体地,指定了正常图像再现类型、幻灯片放映的再现处理类型等。
剪辑流类型(Clip_stream_type)212是指示存储在剪辑AV流文件中的数据类型的信息,该剪辑AV流文件是剪辑信息文件的再现目标数据。作为MPEG-2 TS格式数据,除了正常的MPEG-2 TS流之外,还有一种流类型,其中,在流之间插入黑色图像,并且记录这些类型的识别信息。
转码模式标志(transcode_mode_flag)213是指示作为剪辑信息文件的再现目标数据的存储在剪辑AV流文件中的数据(即,记录在信息记录介质(媒介)中的再现目标数据)是通过无改变地记录接收的数据(例如,广播)而获得的数据还是通过执行转换处理(例如,预定压缩处理)并记录结果数据而获得的数据的标志。
特别地,记录了以下设置的标志:
标志值=0:记录时没有转换(透明)
标志值=1:记录时有转换(转码)
TS平均速率(TS_average_rate)214和
TS记录速率(TS_recording_rate)215
指示剪辑AV流文件的传输流的平均比特率和记录速率,作为以字节或秒为单位的剪辑信息文件的再现目标数据。
源分组的数量(num_of_source_packets)216是剪辑AV流文件的文件大小信息,该信息是剪辑信息文件的再现目标数据,并且在MPEG-2 TS格式数据的情况下,记录源分组的数量。
如上所述,以下数据被指定为要记录在图24所示的剪辑信息[ClipInfo()]201中的数据:
(a)应用类型(应用类型)211;
(b)剪辑流类型(Clip_stream_type)212;
(c)转码模式标志(transcode_mode_flag)213;
(d)TS平均速率(TS_average_rate)214;
(e)TS记录速率(TS_recording_rate)215;和
(f)源分组的数量(num_of_source_packets)216。
然而,在假设作为剪辑信息文件的再现目标数据的剪辑AV流文件中存储的数据是MPEG-2 TS格式数据的情况下,指定数据,并且不假设剪辑AV流文件中存储的数据是MMT格式数据的情况。
因此,在剪辑AV流文件中存储的数据是MMT格式数据的情况下,需要指定数据记录形式。
图25是示出记录在图24所示的剪辑信息[ClipInfo()]中的应用类型(应用类型)211的以下数据的示图:
(1)相关技术的剪辑信息(ClipInfo)记录数据(MPEG-2 TS兼容的剪辑信息文件);和
(2)新剪辑信息(ClipInfo)记录数据(MPEG-2 TS/MMT兼容的剪辑信息文件)。
图25中(1)所示的“(1)相关技术的剪辑信息(ClipInfo)记录数据(MPEG-2 TS兼容的剪辑信息文件)”表示在再现目标数据是MPEG-2 TS格式数据的情况下,记录在剪辑信息(ClipInfo)中的应用类型(应用类型)的设置值的对应数据及其含义。
在再现目标数据是MPEG-2 TS格式数据的情况下,执行以下设置。
在应用类型(应用类型)=1的情况下,指示剪辑信息文件的再现应用程序的类型是“电影的主路径的主TS”,即,对应于图像主路径的主TS的再现应用程序。
此外,可以将诸如主路径和子路径等多个再现路径设置为图像再现路径,并且可以使用不同的播放项来执行再现。
此外,在应用类型(应用类型)=2的情况下,指示剪辑信息文件的再现应用程序的类型是“基于时间的幻灯片放映的主路径的主TS”,即,对应于基于时间的幻灯片放映的主路径的主TS的再现应用程序。
如上所述,在相关技术中,仅MPEG-2 TS格式数据是再现目标数据,并且使用图25中(1)所示的设置。
图25中(2)所示的“(2)新剪辑信息(ClipInfo)记录数据(MPEG-2TS/MMT兼容的剪辑信息文件)”表示在假设两个不同格式数据的情况下,即,在再现目标数据是MPEG-2 TS格式数据或MMT格式数据及其含义的情况下,记录在剪辑信息(ClipInfo)中的应用类型(应用类型)的设置值的对应数据。
在该设置中,除了图25中(1)中描述的应用类型(应用类型)=1和2之外,还添加了以下设置:
应用程序类型(应用程序类型)=3。
在应用类型(应用类型)=3的情况下,指示剪辑信息文件的再现应用程序的类型是“电影的主路径的主MMT”,即,对应于图像主路径的主MMT的再现应用程序。
由于添加了这样的设置,所以再现装置可以基于剪辑信息文件的记录数据检查记录在信息记录介质(媒介)中的剪辑AV流中存储的数据是MMT格式数据,并执行与MMT格式数据相对应的再现处理。
接下来,将参考图26描述关于记录在图24所示的剪辑信息[ClipInfo()中的剪辑流类型(Clip_stream_type)212的以下数据:
(1)相关技术的剪辑信息(ClipInfo)记录数据(MPEG-2 TS兼容的剪辑信息文件);和
(2)新剪辑信息(ClipInfo)记录数据(MPEG-2 TS/MMT兼容的剪辑信息文件)。
图26中(1)所示的“(1)相关技术的剪辑信息(ClipInfo)记录数据(MPEG-2 TS兼容的剪辑信息文件)”表示在再现目标数据是MPEG-2 TS格式数据的情况下,记录在剪辑信息(ClipInfo)中的剪辑流类型(Clip_stream_type)的设置值的对应数据及其含义。
在再现目标数据是MPEG-2 TS格式数据的情况下,执行以下设置。
在剪辑流类型(Clip_stream_type)=1的情况下,指示作为剪辑信息文件的再现目标数据的剪辑AV流文件中存储的数据的类型是“BDAV MPEG-2 TS的剪辑AV流”,即,BDAVMPEG-2 TS格式的剪辑AV流。
此外,在剪辑流类型(Clip_stream_type)=2的情况下,指示剪辑信息文件的再现数据的类型是“BDAV MPEG-2 TS的桥接剪辑AV流”,即,BDAV MPEG-2 TS格式的桥接类型剪辑AV流。
此外,桥接类型剪辑AV流是一种类型的流,其中,在流之间插入黑色图片。
如上所述,在相关技术中,仅MPEG-2 TS格式数据是再现目标数据,并且使用图26中(1)所示的设置。
图26中(2)所示的“(2)新剪辑信息(ClipInfo)记录数据(MPEG-2TS/MMT兼容的剪辑信息文件)”表示在假设两个不同格式数据的情况下,即,在再现目标数据是MPEG-2 TS格式数据或MMT格式数据及其含义的情况下,记录在剪辑信息(ClipInfo)中的剪辑流类型(Clip_stream_type)的设置值的对应数据。
在该设置中,除了图26中(1)中描述的剪辑流类型(Clip_stream_type)=1和2之外,还添加了以下设置:
剪辑流类型(Clip_stream_type)=3
在剪辑流类型(Clip_stream_type)=3的情况下,指示作为剪辑信息文件的再现目标数据的剪辑AV流文件中存储的数据的类型是“BDAV MMT的剪辑AV流”,即,BDAV MMT格式的剪辑AV流。
由于添加了这样的设置,所以再现装置可以基于剪辑信息文件的记录数据检查记录在信息记录介质(媒介)中的剪辑AV流中存储的数据是MMT格式数据,并执行与MMT格式数据相对应的再现处理。
以下两块数据已经被描述为要记录在图24所示的剪辑信息[ClipInfo()]201中的数据的修改示例:
(a)应用类型(应用类型)211;和
(b)剪辑流类型(Clip_stream_type)212。
接下来,将描述对应于将记录在图24所示的剪辑信息[ClipInfo()]201中的以下数据的MMT格式数据的数据记录示例:
(c)转码模式标志(transcode_mode_flag)213;
(d)TS平均速率(TS_average_rate)214;
(e)TS记录速率(TS_recording_rate)215;和
(f)源分组的数量(num_of_source_packets)216。
如上所述,转码模式标志(transcode_mode_flag)213是指示剪辑AV流文件存储的数据(其是剪辑信息文件的再现目标数据)是通过无改变地记录接收的数据(例如,广播)而获得的数据还是通过执行转换处理(例如,预定压缩处理)并记录结果数据而获得的数据的标志。
特别地,记录了以下设置的标志:
标志值=0:记录时没有转换(透明)
标志值=1:记录时有转换(转码)
该设置可用于具有类似设置的MMT格式数据。
TS平均速率(TS_average_rate)214和
TS记录速率(TS_recording_rate)215
如上所述,指示剪辑AV流文件的传输流的平均比特率和记录速率,作为以字节或秒为单位的剪辑信息文件的再现目标数据。
假设基于TS分组计算比特率信息,并且在再现目标数据是具有MMT分组的MMT格式的情况下,需要记录与MMT格式相对应的比特率。或者,在再现目标数据是MMT格式的情况下,可以执行这样的设置,其中,无效值记录在该字段中,不能使用使得比特率信息。
此外,在记录与MMT格式对应的比特率的情况下,通过以下方法中的一种,获取并记录与MMT格式对应的比特率:
(示例1)通过将文件大小除以STC序列之间的时间来计算比特率并记录;
(示例2)基于在数据记录和被记录时在压缩处理中获取的记录数据信息来计算比特率;和
(示例3)获取并记录从传输装置接收的信息中包括的内容复制控制描述符中包括的比特率信息,例如,作为控制信息的信令信息(SI)。
此外,(示例1)中的STC序列是由一个STC连续再现的源分组序列。可以通过将文件大小除以STC序列之间的时间来计算比特率,并记录比特率。
一个STC是基于一个节目时钟参考(PCR)指定的时钟,属于一个STC序列的源分组由一个STC(例如,45KHz)进行再现控制。
此外,将参考图27和随后的附图详细描述STC,描述序列信息[SequenceInfo()]。
作为(示例3)中的控制信息的信令信息(SI)例如是根据以上参考图2描述的MMT格式数据中的TLV格式的信令信息(TLV-SI)或存储在MMTP分组中的信令信息(MMT-SI)。
可以从信令信息中的内容复制控制描述符获取并记录比特率信息。
此外,源分组的数量(num_of_source_packets)216是剪辑AV流文件的文件大小信息,剪辑AV流文件是剪辑信息文件的再现目标数据。
如上所述,在再现目标数据是MPEG-2 TS格式数据的情况下,记录源分组的数量。
如上参考图6所述,TS分组具有与MMTP分组不同的固定长度,并且一个TS分组的分组大小固定为188字节。
因此,具有可以基于分组的数量来检测数据大小的特征。
然而,在再现目标数据是MMT格式数据的情况下,用作MMT格式数据的配置分组的MMTP分组具有可变长度,并且可以被设置为如上参考图7所述的各种分组大小。
因此,即使分组的数量记录在源分组的数量(num_of_source_packets)216的字段中,也无法检测数据大小。
在再现目标数据是MMT格式的情况下,获取并记录根据MMT格式的MMTP分组的文件大小,即,图7中(c)或图3中(c)所示的MMTP分组的文件大小。
或者,在再现目标数据是MMT格式的情况下,无效值可以记录在该字段中,使得用作未使用的字段。
接下来,将参考图27描述记录在上面参考图23描述的剪辑信息文件中的序列信息[SequenceInfo()]202的数据配置(语法)。
如上所述,与存储在对应于剪辑信息文件的AV流文件中的再现目标数据的再现序列相关的信息记录在序列信息[SequenceInfo()]202中。
如图27所示,以下数据记录在序列信息[SequenceInfo()]202中:
(a)ATC开始位置SPN(SPN_ATC_start)221;
(b)STC序列的数量(num_of_STC_sequence)222;
(c)节目时钟参考封装ID(PCR_PID)223;
(d)STC开始位置SPN(SPN_STC_start)224;
(e)显示开始时间(presentation_start_time)225;和
(f)显示结束时间(presentation_end_time)226。
在描述上述数据之前,将参考图28描述存储再现目标数据的剪辑AV流文件的分组配置和再现处理示例。
图28示出了存储在(a)剪辑AV流文件中的分组序列。在MPEG-2 TS格式数据的情况下,一个矩形对应于一个TS分组。
在图28的示例中,分组号0至nn是一个剪辑AV流文件的配置数据。
一个剪辑AV流的分组是根据一个到达时间时钟(ATC)排列的分组序列。
根据一个ATC排列的分组序列称为ATC序列。
一个或多个STC序列包括在图28所示的一个剪辑信息文件的分组0到nn中。在图28所示的示例中,包括三个STC序列。是STC序列#0到#2。
一个STC是基于一个PCR指定的时钟,属于一个STC序列的源分组由一个STC(例如,45KHz)进行再现控制。
图28所示的STC序列#0是可以根据STC连续再现的分组序列,STC是基于存储在PCR存储的分组a中的PCR指定的时钟
STC序列#1是可以根据STC连续再现的分组序列,STC是基于存储在PCR存储的分组b中的PCR指定的时钟。
此外,STC序列#2是可以根据基于存储在PCR存储的分组C中的每个PCR指定的STC连续再现的分组序列
此外,在图28所示的示例中,三个STC序列包括在一个ATC序列中,但是包括在一个ATC序列中的STC序列的数量可以不同地设置。
回到图27,将描述记录在剪辑信息文件中的序列信息[SequenceInfo()]202的记录数据。
(a)ATC开始位置SPN(SPN_ATC_start)221是记录用作剪辑信息文件的再现目标的剪辑AV流文件的ATC开始位置的SPN的区域。
在参考图28描述的示例中,ATC开始位置SPN(SPN_ATC_start)=0。
(b)用作剪辑信息文件的再现目标的剪辑AV流文件中包括的STC序列的数量记录在STC序列的数量(num_of_STC_sequence)222中。
在参考图28描述的示例中,STC序列的数量(num_of_STC_sequence)=3。
(c)在节目时钟参考封装ID(PCR_PID)223中记录存储PCR的分组的分组标识符,该PCR对应于用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列。
(d)用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列的开始位置的SPN记录在STC开始位置SPN(SPN_STC_start)224中。
用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列的显示开始时间和显示结束时间记录在以下字段中:
(e)显示开始时间(presentation_start_time)225;和
(f)显示结束时间(presentation_end_time)226。
此外,STC时间信息(stc_id)和ATC时间信息(atc_id)都被记录为时间信息。
以上描述是在剪辑信息文件的再现目标数据是MPEG-2 TS格式数据的情况下的记录数据的示例。
接下来,将描述在剪辑信息文件的再现目标数据是MMT格式数据的情况下的每条记录数据。
(a)ATC开始位置SPN(SPN_ATC_start)221是如上所述记录用作剪辑信息文件的再现目标的剪辑AV流文件的ATC开始位置的SPN的区域。
如上参考图6所述,TS分组具有与MMTP分组不同的固定长度,并且一个TS分组的分组大小固定为188字节。
因此,具有可以基于分组的数量来检测数据大小的特征。
然而,在再现目标数据是MMT格式数据的情况下,用作MMT格式数据的配置分组的MMTP分组具有可变长度,并且可以被设置为如上参考图7所述的各种分组大小。
因此,即使分组号记录在ATC开始位置SPN(SPN_ATC_start)221的字段中,也不能检测数据大小。
因此,在再现目标数据是MMT格式数据的情况下,在MMT格式数据兼容的剪辑信息文件的ATC开始位置SPN(SPN_ATC_start)221中,记录从AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数。例如,字节数记录有64位。
(b)STC序列的数量(num_of_STC_sequence)222是记录用作剪辑信息文件的再现目标的剪辑AV流文件中包括的STC序列的数量的区域。
在再现目标数据是MMT格式数据的情况下,STC序列的数量(num_of_STC_sequence)=1。
换言之,执行一个ATC序列中仅包括一个STC序列的设置。
(c)节目时钟参考封装ID(PCR_PID)223是这样一个区域,其中,记录了存储PCR的分组的分组标识符,该PCR对应于用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列。
在再现目标数据是MMT格式数据的情况下,由于无法指定来自分组标识符的数据位置,因此执行在该字段中记录无效值以使其不被使用的设置。
(d)STC开始位置SPN(SPN_STC_start)224是记录用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列的开始位置的SPN的区域。
在再现目标数据是MMT格式数据的情况下,类似于(a)上述ATC开始位置SPN(SPN_ATC_start)221,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数。例如,字节数记录具有64位。
以下字段是记录用作剪辑信息文件的再现目标的剪辑AV流文件中包括的每个STC序列的显示开始时间和显示结束时间的区域:
(e)显示开始时间(presentation_start_time)225;和
(f)显示结束时间(presentation_end_time)226。
在再现目标数据是MMT格式数据的情况下,根据NTP的时间信息被记录为时间信息。
例如,从参考图18和其他附图描述的MPT中获取根据NTP的时间信息,即,以MMT格式指定的MMT封装表(MPT)。
接下来,将参考图29描述记录在上面参考图23描述的剪辑信息文件中的节目信息[ProgramInfo()]203的数据配置(语法)。
如上所述,节目信息[ProgramInfo()]203记录与包括由剪辑信息文件等再现的剪辑AV流的再现间隔或时间间隔的定义信息的节目相关的信息。
将描述记录在图29所示的节目信息[ProgramInfo()]中的主要数据。
(a)剪辑信息文件中包括的节目序列(program_sequence)的数量记录在节目序列的数量[num_of_program_sequence]231中。
(b)在AV流文件上开始节目序列的位置的相对地址记录在SPN节目序列开始地址[SPN_program_sequence_start[i]]232中。
(c)节目序列(program_sequence)的地图的存储位置信息记录在节目地图PID[program_map_PID[i]]233中。
此外,节目序列指剪辑AV流文件中包括的AV流中的编码信息是连续的间隔。
例如,以一种图像编码模式编码的视频数据间隔、以一种音频编码模式编码的音频数据间隔等被指定为单独的节目序列。
指定图29所示的节目信息[ProgramInfo()]的记录数据,即,
(a)节目序列的数量[num_of_program_sequences]231,
(b)SPN节目序列开始地址[SPN_program_sequence_start[i]]232,以及
(c)程序图PID[program_map_PID[i]]233,
用于剪辑信息文件的再现目标数据是MPEG-2 TS格式的情况,但是在再现目标数据是MMT格式数据的情况下没有指定数据,因此需要重新指定。
(a)对于节目序列的数量[num_of_program_sequences]231,希望在再现目标数据是MPEG-2 TS格式或MMT格式中的任一种的情况下记录节目序列的数量。
(b)对于SPN节目序列开始地址[SPN_program_sequence_start[i]]232,在再现目标数据是MPEG-2 TS格式的情况下,记录SPN节目序列的起始位置的SPN。
另一方面,在再现目标数据是MMT格式数据的情况下,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数。例如,字节数记录有64位。
(c)对于节目地图PID[program_map_PID[i]]233,在再现目标数据是MPEG-2 TS格式的情况下,记录存储节目序列(program_sequence)的地图的分组的标识符(PID)。
另一方面,在再现目标数据是MMT格式数据的情况下,执行记录无效值以使其不被使用的设置。
接下来,将参考图30和随后的附图描述记录在上面参考图23描述的剪辑信息文件中的CPI信息[CPI()]204的数据配置(语法)。
CPI信息[CPI()]204例如是用于获取再现起始点的数据地址的数据,并且记录上面参考图12至图14描述的EP_map和TU_map。
如上所述,CPI是剪辑信息文件的记录数据,并且例如是用于获取再现起始点的数据地址的数据。
如图30所示,在CPI类型=1的情况下,记录EP图,在CPI类型=2的情况下,记录TU图。
此外,在图30所示的示例中,再现目标数据是MPEG-2 TS格式数据。如上参考图15所述,在再现目标数据是MPEG-2 TS格式数据的情况下,具有CPI类型=1、2并且EP图和TU图都被设置为可用的设置。
另一方面,在再现目标数据是MMT格式数据的情况下,如上参考图15所述,执行CPI类型=3的设置,并且可以仅使用EP图。
如上参考图12至图14所述,EP图是这样一种地图,其中,记录了与随机再现可以开始的再现开始位置或存储在剪辑AV流文件中的再现数据中的再现结束位置相对应的访问点信息。
换言之,指示时间轴上的再现开始位置和获取对应于分组位置信息的分组的地址信息(SPN)的时间戳(PTS)的对应数据记录在EP图中。
通过使用EP图,再现装置可以基于与随机可访问数据位置相对应的时间戳(PTS),获取存储与数据位置相对应的数据的分组的分组号(SPN),获取所获取的SPN的设置分组,并执行再现。
将参考图31和随后的附图描述EP图的数据配置(语法)。
图31是示出存储在剪辑信息文件中的EP图的数据配置(语法)的示图。
如上参考图13中(A)所述,在剪辑AV流(剪辑AV流)中,多路复用由分组标识符(PID)标识的源分组构成的视频流。通过包含在源分组中的传输分组的报头中的PID来区分每个源分组的视频流。
EP图被设置为由每个PID识别的一个流PID(one_stream_PID)单元。
换言之,一个流PID(one_stream_PID)单元的EP图(EP_map_for_one_stream_PID)记录在图31的EP图记录区域242中。
在图32中示出EP图记录区域242的具体数据示例。
如图32所示,EP图具有以下数据记录区域:
(1)精细EP图参考数据(ref_to_EP_fine)251;
(2)粗EP图的PTS(PTS_EP_coarse)252;
(3)粗EP图的SPN(SPN_EP_coarse)253;
(4)精细EP图的PTS(PTS_EP_fine)254;和
(5)精细EP图的SPN(SPN_EP_fine)255。
EP图由两个表组成,以减少数据量并实现从PTS中高效搜索SPN的处理。
将参考图33描述这两个表配置。
如图33所示,EP图由以下两个表构成:
(a)粗EP图(EP_coarse);
(b)精细EP图(EP_fine)。
(a)粗EP图(EP_coarse)存储对应数据,仅包括PTS的比特数据和SPN的比特数据中的每个的高位。
这是(PTS_EP_coarse)252和(SPN_EP_coarse)253的对应数据。
另一方面,(b)精细EP图(EP_fine)存储仅包括PTS的比特数据和SPN的比特数据的低位的对应数据。
这是(PTS_EP_fine)254和(SPN_EP_fine)255的对应数据。
此外,精细EP图参考数据(ref_to_EP_fine)251与每条PTS-SPN对应数据相关联地存储在粗EP图(EP_coarse)中。
希望基于PTS获取SPN的再现装置首先基于PTS的高位获取参考粗EP图(EP_coarse)的对应条目,进一步获取在获取的条目中设置的精细EP图参考数据(ref_to_EP_fine)251,访问对应于参考位置的精细EP图(EP_fine)的数据位置,并且基于PTS的低位获取详细SPN。
使用参考图33描述的两个表执行处理的以下数据记录在图32所示的EP图数据中:
(1)精细EP图参考数据(ref_to_EP_fine)251;
(2)粗EP图的PTS(PTS_EP_coarse)252;
(3)粗EP图的SPN(SPN_EP_coarse)253;
(4)精细EP图的PTS(PTS_EP_fine)254;和
(5)精细EP图的SPN(SPN_EP_fine)255。
然而,EP数据是在再现目标数据是MPEG-2 TS格式数据的情况下适用的数据,并且EP数据可以在再现目标数据是MMT格式数据的情况下无改变地使用。
因此,需要在与MMT格式数据相对应的剪辑信息文件中记录MMT格式数据兼容的EP图。
将参考图34和随后的附图描述该具体示例。
作为MMT格式数据兼容的EP图的具体示例,下面将描述多个具体示例。依次描述以下四个具体的示例:
(a)MMT格式数据兼容的EP图示例1;
(b)MMT格式数据兼容的EP图示例2(压缩示例);
(c)MMT格式数据兼容的EP图示例3(分割示例);和
(d)MMT格式数据兼容的EP图示例4(分割和压缩示例)。
首先,将参考图34描述以下两个具体示例:
(a)MMT格式数据兼容的EP图示例1;和
(b)MMT格式数据兼容的EP图示例2(压缩示例)。
(a)图34所示的MMT格式数据兼容的EP图示例1具有以下字段,作为数据记录字段:
NTP时间记录区域(NTP_time)261;和
MMT字节地址记录区域(MMT_byte_adress)262。
64位NTP时间记录在NTP时间记录区域(NTP_time)261中。
从例如上面参考图18和其他附图描述的MPT中获取根据NTP的时间信息,即,以MMT格式指定的MMT封装表(MPT)。
从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数记录在MMT字节地址记录区域(MMT_byte_adress)262中。例如,字节数记录有64位。
上面参考图32和33描述的MPEG-2 TS格式兼容的EP图具有记录PTS(呈现时间戳)和SPN的对应数据的配置。
另一方面,MMT格式具有这样的配置,其中,使用网络时间协议(NTP)时间代替PTS,并且使用MMT字节地址代替SPN。
如上所述替换数据的原因在于,在根据MMT格式从广播台等传输的数据中没有与MPEG-2 TS格式中指定的PTS或SPN一致的数据。此外,这是因为MPEG-2 TS格式的TS分组的大小是固定的(188字节),而根据MMT格式的MMTP分组是不固定的可变长度分组。
此外,上面参考图32和33描述的MPEG-2 TS兼容的EP图具有以下两个地图的配置:
(a)粗EP图(EP_coarse);和
(b)精细EP图(EP_fine),
但是图34中(a)所示的MMT格式数据兼容的EP图具有由一个地图构成的设置。
在选择其作为存储MMT格式数据的存储的剪辑AV流再现目标的情况下,例如,执行应用图34中(a)所示的EP图记录的剪辑信息文件的再现处理,具体地,随机访问再现处理。
再现装置使用34中(a)中所示的EP图,即,具有以下数据的对应信息的EP图,检测用作随机访问点的数据位置:
NTP时间记录区域(NTP_time)261;和
MMT字节地址记录区域(MMT_byte_adress)262。
再现装置可以基于EP图获取与用作随机访问点的NTP时间相对应的MMT字节地址,并从由获取的地址信息指定的数据位置执行随机访问再现处理。
接下来,将描述图34所示的以下具体示例:
(b)MMT格式数据兼容的EP图示例2(压缩示例)
与图34中(a)所示的示例1类似,图34中(b)所示的示例2具有以下字段,作为数据记录字段:
NTP时间记录区域(NTP_time)263;和
MMT字节地址记录区域(MMT_byte_adress)264。
与图34中(a)所示的示例1类似,在图34中(b)所示的示例2中,64位NTP时间记录在NTP时间记录区域(NTP_time)263中。
另一方面,在MMT字节地址记录区域(MMT_byte_adress)264中,对于第一条目,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数,并且对于第二或更晚的条目,记录对应于与前一条目的差异的字节数。
通过该设置,MMT字节地址记录区域(MMT_byte_adress)264重新记录区域减少到32位数据。
在示例1中,字节数以64字节记录在MMT字节地址记录区域中,但是在示例2中,这是以32位记录的配置,并且EP图的数据量可以减少。
接下来,将参考图35描述以下具体示例:
(c)MMT格式数据兼容的EP图示例3(分割示例)
图35中所示的EP图是具有两个地图的设置,即,以下两个地图的配置,类似于参考图32和33描述的MPEG-2 TS兼容的EP图:
(a)粗EP图(EP_coarse);和
(b)精细EP图(EP_fine)。
图35所示的MMT格式数据兼容的EP图示例3(分割示例)具有以下数据:
(1)粗EP图的NTP时间(NTP_coarse)265;
(2)粗EP图的MMT字节地址(MMT_byte_coarse)266;
(3)精细EP图参考数据(ref_to_fine_id)267;
(4)精细EP图的NTP时间(NTP_fine)268;和
(5)精细EP图的MMT字节地址(MMT_byte_fine)269。
此外,
(1)粗EP图的NTP时间(NTP_coarse)265是构成参考图34中(a)描述的64位NTP时间的高32位数据,即,第二单元的数据。
(2)粗EP图的MMT字节地址(MMT_byte_coarse)266是从存储在流文件中的第一MMTP分组开始的字节地址,类似于参考图34中(a)描述的MMT字节地址,并且是指示与粗EP图(NTP_coarse)265的NTP时间相对应的数据位置的64位字节地址信息。
(3)精细EP图参考数据(ref_to_fine_id)267是指示精细EP图的特定条目的参考数据,类似于参考图32和33描述的用于MPEG-2 TS格式兼容的EP图的精细EP图参考数据(ref_to_EP_fine)251。
(4)精细EP图的NTP时间(NTP_fine)268是构成参考图34中(a)描述的64位NTP时间的低32位数据,即,第二单元或更少的数据。
(5)精细EP图的MMT字节地址(MMT_byte_fine)269是从存储在流文件(剪辑AV流文件)中的第一MMTP分组开始的字节地址,类似于参考图34中(a)描述的MMT字节地址,并且是指示对应于精细EP图的NTP时间(NTP_fine)268的数据位置的64位字节地址信息。
该数据对应于上面参考图33描述的两个EP图的配置数据。
换言之,
(1)用粗EP图的NTP时间(NTP_coarse)265替换图33所示的粗EP图的PTS(PTS_EP_coarse)252。
(2)用粗EP图的MMT字节地址(MMT_byte_coarse)266替换图33所示的粗EP图的SPN(SPN_EP_coarse)253。
(3)用精细EP图参考数据(ref_to_fine_id)267代替图33所示的粗EP图的精细EP图参考数据(ref_to_EP_fine)251。
此外,
(4)用精细EP图的NTP时间(NTP_fine)268代替图33所示的精细EP图的PTS(PTS_EP_fine)254。
(5)用精细EP图的MMT字节地址(MMT_byte_fine)269替换图33所示的精细EP图的SPN(SPN_EP_fine)255。
通过这样的变化,构成包括对应于MMT格式数据的两个表的EP图。
接下来,将参考图36描述以下具体示例:
(d)MMT格式数据兼容的EP图示例4(分割和压缩示例)
图36所示的EP图是(c)参考图35描述的MMT格式数据兼容的EP图示例3(分割示例)和(b)参考图34中(b)描述的MMT格式数据兼容的EP图示例2(压缩示例)的组合。
图36所示的MMT格式数据兼容的EP图示例4(分割和压缩示例)包括以下数据:
(1)粗EP图的NTP时间(NTP_coarse)271;
(2)粗EP图的MMT字节地址(MMT_byte_coarse)272;
(3)精细EP图参考数据(ref_to_fine_id)273;
(4)精细EP图的NTP时间(NTP_fine)274;和
(5)精细EP图的MMT字节地址(MMT_byte_fine)275。
数据配置类似于上面参考图35描述的MMT格式数据兼容的EP图示例3(分割示例)。
在此处,在图36所示的(d)MMT格式数据兼容的EP图示例4(分割和压缩示例)中,以下数据中的每一个压缩为32位数据。
(2)粗EP图的MMT字节地址(MMT_byte_coarse)272;和
(5)精细EP图的MMT字节地址(MMT_byte_fine)275。
与上面参考图34中(2)描述的压缩示例类似,每个数据被设置为32位数据。
具体地,类似于上面参考图34中(2)描述的压缩示例,对于第一条目,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数,并且对于第二或更晚的条目,记录对应于与前一条目的差异的字节数。
换言之,执行以下设置。
在(2)粗EP图的MMT字节地址(MMT_byte_coarse)272中,类似于参考图34中(b)描述的MMT字节地址,对于第一条目,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数,对于第二或更晚的条目,记录32位字节信息,该信息是对应于与前一条目的差异的字节数并且指示对应于粗EP图的NTP时间(NTP_coarse)的数据位置。
在(5)精细EP图的MMT字节地址(MMT_byte_fine)275中,类似于参考图34中(b)描述的MMT字节地址,对于第一条目,记录从剪辑AV流文件的开始(=存储在文件中的第一MMTP分组的开始)起的字节数,对于第二或更晚的条目,记录32位字节信息,该信息是对应于与前一条目的差异的字节数并且指示对应于精细EP图的NTP时间(NTP_fine)的数据位置。
通过该设置,可以减少整个EP图的数据量。
在以上参考图32和图33描述的MPEG-2 TS格式兼容的EP图中,记录PTS和SPN之间的对应数据,但是如参考图34至36描述的,NTP时间、MMT字节地址信息及其对应数据记录在MMT格式数据兼容的EP图中。
记录在EP图中的NTP时间或MMT字节地址信息必须是用作随机访问点的时间或地址(数据位置)。
例如,在从诸如广播台等传输装置20接收MMT格式数据、生成EP图并将EP图记录在信息记录介质(媒介)中的信息处理装置30中,需要获取可以是随机访问点的位置信息。
将参考图37和随后的附图描述该过程示例。
图37是示出构成从诸如广播台等传输装置20传输到例如信息处理装置30的MMT格式数据的MMTP分组的数据配置(语法)的示图。
如上参考图3所述,MMTP分组由MMTP报头和MMTP有效载荷构成。一种类型的数据存储在一个MMTP分组的MMTP有效载荷中。具体地,在单独的MMTP分组中存储在MMTP分组中存储的任何一种类型的数据,例如,视频(V)、音频(A)、字幕(S)和信令信息(MMT-SI)。
图37示出了由报头部分281和有效载荷部分282构成的一个MMTP分组的数据配置。
诸如存储在有效载荷部分282中的数据类型等信息记录在报头部分281中。随机访问点信息标志(RAP_flag)283被记录为报头部分281的一个记录数据。
随机访问点信息标志(RAP_flag)283是指示MMTP分组是否是存储用作随机访问点的数据的分组的标志,并且记录以下设置的标志:
1,在MMTP分组是存储用作随机访问点的数据的分组的情况下;和
0,在MMTP分组不是存储用作随机访问点的数据的分组的情况下。
例如,从诸如广播台等传输装置20接收MMT格式数据、生成EP图、并将EP图记录在信息记录介质(媒介)中的信息处理装置30检查随机访问点信息标志(RAP_flag),并获取可以是随机访问点的位置信息。
图38示出了具体的处理示例。
诸如广播台等传输装置20传输构成MMT格式数据的MMTP分组序列,信息处理装置30接收该MMTP分组序列。
信息处理装置30检查存储在每个MMTP分组的报头信息中的RAP_flag的设置值,并检测RAP_flag=1的设置分组。
在图38所示的示例中,MMTP分组291和292正在设置RAP_flag=1的分组。
信息处理装置30获取或计算与RAP_flag=1的设置分组291和292相对应的以下信息:
NTP时间;和
MMT字节地址信息,
将所获取或计算的信息记录在与MMT格式数据相对应的剪辑信息文件中的EP图中,并将其记录在信息记录介质(媒介)中。
此外,如上所述,可以从例如参考图18和其他附图描述的MPT中获取NTP时间,即,MMT格式中指定的MMT封装表(MPT)。
当执行生成包括MMTP分组的剪辑信息文件的处理时,可以通过计算从存储在流文件(剪辑AV流文件)中的第一MMTP分组开始的字节数来获取MMT字节地址信息。
接下来,将参考图39描述作为记录在剪辑信息文件中的另一元素的剪辑标记(ClipMark)。
如上参考图21所述,标记是可以记录在播放列表文件或剪辑信息文件中的数据,例如,作为存储在剪辑AV流文件中的视频数据的特征场景的章节定界符、场景改变点、书签、高亮或时间指定信息。
通过记录指示标记时间的时间戳的过程,该标记记录在播放列表文件或剪辑信息文件中。
图39是示出作为剪辑信息文件的元素的剪辑标记(ClipMark)的数据配置(语法)的示图。
剪辑标记号(number_of_Clip_marks)294表示存储在剪辑标记(ClipMark)中的标记数。
标记类型(mark_type)295是指示标记类型的字段。例如,指示记录诸如章节开始位置、章节结束位置、场景改变位置或编辑位置等每个标记的标记类型的信息。
标记时间戳(mark_time_stamp)296是记录了指示设置标记的点的时间戳的字段。
基本流封装ID条目(entry_ES_PID)297是记录设置了标记的分组的标识符的字段。
代表性图片时间戳(representative_picture_time_samp)298是表示代表该标记的图像点的时间戳信息。
持续时间299是记录相邻标记之间的时间间隔的字段,例如,章节的长度。
指定了在相关技术的MPEG-2 TS格式数据被记录为剪辑AV流文件的情况下图39所示的剪辑标记(ClipMark)的记录数据,但是在MMT格式数据被记录为剪辑AV流文件的情况下,没有特别指定。
因此,在MMT格式数据被记录为剪辑AV流文件的情况下,需要指定剪辑标记(ClipMark)的记录数据。
具体地,如图39所示,根据64位NTP的时间信息记录在以下时间信息记录字段中:
标记时间戳(mark_time_stamp)296;和
代表图片时间戳(representative_picture_time_samp)298。
在作为剪辑AV流文件记录在信息记录介质(媒介)中的数据是MMT格式数据的情况下,信息处理装置30获取记录在MMT封装表(MPT)中的NTP时间信息,并将NTP时间信息记录在作为再现控制信息文件的剪辑信息文件的剪辑标记(ClipMark)的时间信息记录字段中。
[7、MMT格式数据的完整记录和部分记录]
接下来,将描述MMT格式数据的完整记录和部分记录。
上述处理是生成播放列表文件或剪辑信息文件的处理,该播放列表文件或剪辑信息文件存储与以图4所示的BDAV格式或图8所示的SPAV格式存储在剪辑AV流文件中的MMT格式数据相关的再现控制信息、属性信息等。
接下来,将描述存储在剪辑AV流文件中的数据。
例如,图1所示的信息处理装置30执行将从诸如图1所示的广播服务器(广播台)21等传输装置20传输的MMT格式数据记录在诸如BD、HD的信息记录介质(媒介)中的处理。
当记录数据时,信息处理装置30生成存储MMT格式数据的剪辑AV流文件。例如,这是图10所示的MMT格式数据存储的剪辑AV流文件71。
此外,在以上参考图9描述的处理示例中,已经描述了记录在根据MMT格式的传送数据中包括的控制信息(MMT-SI和TLV-SI)中的所有信息记录在诸如播放列表文件或剪辑信息文件的数据库文件中的设置,但是一些控制信息存储在剪辑AV流文件中的配置也是可能的。
下面描述的示例是生成包括如上所述的控制信息的剪辑AV流文件的情况下的处理示例。
假设以下两种数据记录形式是MMT格式数据存储的剪辑AV流文件71的数据记录过程形式。
(1、完整记录过程)
将接收到的MMT格式数据中包括的所有视频、音频、字幕、其他各种控制信息和其他应用程序存储在剪辑AV流文件中并记录在介质中的完整记录过程。
(2、部分记录过程)
将接收到的MMT格式数据中包括的一些视频、音频、字幕、其他各种控制信息和其他应用程序存储在剪辑AV流文件中并记录在介质中的部分记录过程。
这两个数据记录过程是可能的。
例如,完整记录过程是将图40所示的记录数据区域A中包括的所有视频、音频、字幕、控制信息(MMT-SI)和应用程序存储在剪辑AV流文件中并将其记录在介质中的过程。
同时,部分记录过程是仅将图41所示的记录数据区域B中包括的视频、音频、字幕和控制信息(MMT-SI)存储在剪辑AV流文件中并将其记录在介质中的过程。
此外,还可以执行将一些视频、音频、字幕和控制信息(MMT-SI)存储在剪辑AV流文件中并将其记录在介质中的过程。
将参考图42描述特定的部分记录过程示例。
图42是用于描述部分记录过程的特定示例的变化的示图。
例如,(1)对于视频,记录至少一个视频流。
(2)对于音频,
(2a)记录至少一个音频流。
(2b)记录对应于多种语言的多个音频流。
(3)对于字幕,
(3a)最多记录两个字幕流,
(3b)不记录字幕流。
(4)对于控制信息(MMT-SI)
(4a)只记录MPT(见图18),
(4b)根据记录的视频、音频或字幕选择必要的信息并进行记录。
例如,如上所述,根据数据类型选择记录数据的过程是可能的。
作为记录控制信息的示例,图42示出了以下两个示例。
(4a)只记录MPT(见图18),
(4b)根据记录的视频、音频或字幕选择必要的信息并进行记录。
图43示出了MPT。
如上参考图18所述,图43所示的MPT是通过MMTP分组传输的一个信令信息(MMT-SI)。
各种控制信息或属性信息记录在MPT中。
定义对应于控制信息类型的描述符,并且为每个定义的描述符记录控制信息或属性信息。
作为描述符,具有以下两种类型的描述符:
MPT描述符(MPT_descriptor);和
资产描述符(asset_descriptor)。
在资产描述符的数据记录区域中,针对诸如视频、音频、字幕等每个数据类型(资产类型)记录数据的控制信息或属性信息。
在MPT描述符的记录区域中,记录所有资产共有的控制信息或属性信息,而与资产类型无关。
此外,在MMT格式中,几十种类型的描述符被指定为要记录在MPT中的描述符类型。
在执行上述完整记录过程的情况下,与所有描述符相关的控制信息记录在介质中。
然而,在执行部分记录过程的情况下,执行从MPT中记录的描述符中仅选择在从介质再现数据时非常可能使用的数据并记录所选择的数据的过程。
将参考图44描述要选择和记录的描述符的示例。
图44示出以下描述符,作为要选择和记录的目标描述符的示例。
(A)MPT描述符
(a1)MH-亲本速率描述符
(a2)内容复制控制描述符
(a3)内容使用控制描述符
(B)资产描述符
(b1)MPU时间戳描述符
(b2)MPU时间戳扩展描述符
(b3)MH-MPEG-4音频描述符
(b4)MH-MPEG-4音频扩展描述符
(b5)MH-HEVC视频描述符
(b6)视频分量描述符
(b7)MH流识别描述符
(b8)MH-音频分量描述符
(b9)MH数据编码方案描述符
描述符是包括控制信息的描述符,当再现记录在信息记录介质(媒介)中的MMT格式数据时,必须或非常可能使用该控制信息。
将在下面描述这些描述符。
(a1)(A)MPT描述符的MH-亲本速率描述符是根据年龄指示亲本控制信息的描述符。
(a2)内容复制控制描述符是指示内容的再现控制信息的描述符。
(a3)内容使用控制描述符是指示内容的使用控制信息的描述符。
(b1)(B)资产描述符的MPU时间戳描述符指示MPU的第一访问单元的呈现时间。
(b2)MPU时间戳扩展描述符指示MPU的访问单元的解码时间。
(b3)MH-MPEG-4音频描述符描述了用于指定ISO/IEC 14496-3(MPEG-4音频)的音频流的编码参数的基本信息。
(b4)MH-MPEG-4音频扩展描述符描述MPEG-4音频流的简档和级别以及特定于编码方案的设置。
(b5)MH-HEVC视频描述符描述了ITU-T建议H.265|ISO/IEC23008-2的视频流(HEVC流)的基本编码参数。
(b6)视频分量描述符指示与视频分量相关的参数的描述,并且还用于以字符格式表示基本流。
(b7)MH流识别描述符用于指由MH-EIT(作为控制信息(MMT-SI)传输的事件信息表)中的视频分量描述符通过分配给服务的分量流的标签指示的描述内容(例如,某个服务的分量流是“垂直方向上的像素数是4320,纵横比是16:9,有平移矢量,帧速率是60/1.001”)。
(b8)MH音频分量描述符指示音频基本流的每个参数,并且还用于以字符格式表示基本流。
(b9)MH数据编码方案描述符用于识别数据编码方案。
例如,每个描述符是信息记录介质(媒介)中记录的内容的再现处理所必需或可能必需的控制信息,并且期望从MTP中选择描述符并将其记录在信息记录介质(媒介)中的设置。
此外,需要根据MMT格式记录MPT,控制信息表可以被遵循BDAV格式执行数据再现处理的BDAV格式数据再现应用程序理解。
将参考图45描述记录在信息记录介质中的控制信息表的记录形式。
图45是示出在信息处理装置30接收从诸如广播台等传输装置20传输的MPT并将MPT存储在要记录在信息记录介质(媒介)中的剪辑AV流文件中的情况下要注意的项目的示图。
下面将描述这些项目。
MPT中描述的表ID(table_id)是表的标识符,其固定值为(0x20)。
MPT模式(MPT_mode)是在MPT分成多个子集的情况下指定处理顺序的信息记录区域。假设该值为值(00),指示根据子集的顺序执行该过程。
MMT封装ID长度(MMT_packege_id_length)表示封装ID的字节长度,并且具有2字节的固定值。
MMT封装ID字节(MMT_packege_id_byte)表示封装ID,并记录MPT中记录的数据,没有改变。
资产数量(number_of_assets)是记录在以下区域中的资产数量,并记录与要记录的资产数量一致的数值。
标识符类型(identifier_type)是MMTP分组流的ID系统,并且具有值(0x00),表示这是指示资产ID的ID系统。
资产ID方案(asset_id_scheme)是资产ID的一种格式,记录在MPT中记录的数据,没有变化。
资产ID(asset_id_byte)是资产ID记录区域,记录在MPT中记录的数据,没有变化。
资产时钟信息标志(asset_clock_relation_flag)是指示资产的时钟信息字段存在与否的信息,并且被设置为指示资产没有时钟信息字段的值(0)。
位置计数(location_count)是资产位置的数量,固定为1。
位置信息(MMT_general_location_info)是资产的位置信息,记录在MPT中记录的数据,没有变化。
如上所述,执行从诸如广播台等传输装置20接收MMT格式数据并将MMT格式数据记录在信息记录介质中的过程的信息处理装置30记录在MPT中记录的数据,作为控制信息表,该控制信息表可由遵循BDAV格式执行数据再现处理的BDAV格式数据再现应用程序理解。
当执行这样的记录过程时,可以通过应用由传输装置20提供的控制信息或属性信息来执行再现记录在信息记录介质中的数据的处理。
[8、对信息记录介质执行数据记录过程的信息处理装置的配置和处理]
接下来,将参考图46和随后的附图描述对信息记录介质执行数据记录过程的信息处理装置的配置和处理。
如上所述,本公开的信息处理装置将遵循MMT格式的输入数据作为BDAV格式数据记录在诸如BD、HD或闪存等信息记录介质中。
此外,当执行数据记录处理时,对应于MMT格式数据的控制信息、属性信息等记录在诸如播放列表等或剪辑信息文件的数据库文件中。
例如,从构成TLV-SI或MMT-SI的各种信息记录表中获取信息,该信息是遵循MMT格式包括在输入数据中的控制信息。信息处理装置从所接收的数据中获取各种信息,并将与记录在介质中的内容相对应的信息记录在数据库文件中,例如,以BDAV格式指定的播放列表或剪辑信息文件中。
下面将描述信息处理装置的配置和处理顺序,该信息处理装置执行生成记录播放列表或剪辑信息文件的信息记录介质的处理,具体地,对诸如BD等信息记录介质执行数据记录过程。
图46是示出对诸如BD的信息记录介质执行数据记录处理的信息处理装置300的配置的示图。
信息处理装置300将剪辑AV流文件以及诸如播放列表或剪辑信息文件等数据库文件记录在信息记录介质(记录介质)320中。
数据输入单元301接收信息记录介质320的MMT格式数据331,即,包括视频数据、音频数据、字幕数据等的MMT格式数据331。
数据输入单元301由接收单元、介质读取单元等构成,接收单元从传输MMT格式数据331的例如广播台、内容服务器等接收传输数据,介质读取单元从存储MMT格式数据331的介质读取数据。
从数据输入单元301输入的MMT格式数据331是根据以上参考图2描述的数据格式的数据,并且包括高清晰度视频数据,例如,HEVC图像。
MMT格式数据331在控制单元303的控制下存储在存储单元304中。
用户输入单元302接收例如开始向信息记录介质320记录数据的请求等。
当从用户输入单元302接收到数据记录开始请求时,存储在存储单元304中的MMT格式数据331使用该输入作为触发,来输入到多路分用器(DeMUX)305。
多路分用器(DeMUX)305从MMT格式数据331获取存储视频、音频、字幕等中的每一个的数据的分组以及存储通知信息、控制信息等的辅助信息,例如,信令信息(TLV-SI和MMT-SI),将分组分类为数据类型的分组,并根据数据类型,将分组输入到记录数据生成单元306的字幕数据生成单元311、视频数据生成单元312、音频数据生成单元313和辅助信息生成单元314。
字幕数据生成单元311从由数据输入单元301输入并存储在存储单元304中的MMT格式数据331获取字幕数据,并生成以BDAV格式指定的流文件存储数据。
视频数据生成单元312从由数据输入单元301输入并存储在存储单元304中的MMT格式数据331获取视频数据,并生成以BDAV格式指定的流文件存储数据。
音频数据生成单元313从由数据输入单元301输入并存储在存储单元304中的MMT格式数据331获取音频数据,并生成以BDAV格式指定的流文件存储数据。
辅助信息生成单元314从由数据输入单元301输入并存储在存储单元304中的MMT格式数据331获取存储通知信息、控制信息等的辅助信息,例如,信令信息(TLV-SI和MMT-SI),并生成要存储在用作数据库文件的播放列表文件或剪辑信息文件中或存储在以BDAV格式指定的剪辑AV流文件中的数据。
多路复用器(MUX)315接收由字幕数据生成单元311、视频数据生成单元312和音频数据生成单元313转换的字幕、视频和音频数据中的每一个的数据以及由辅助信息生成单元314从MMT格式数据331的信令信息(TLV-SI和MMT-SI)等获取的各种信息,并生成存储该数据的流文件。
数据库文件生成单元316生成诸如播放列表文件或剪辑信息文件的数据库文件,数据库文件中记录了辅助信息生成单元314从MMT格式数据331的信令信息(TLV-SI和MMT-SI)获取的各种信息。
在控制单元303的控制下,包括由记录数据生成单元306生成的流文件数据和诸如播放列表文件、剪辑信息文件等的数据库文件的记录数据332经由驱动器307通过记录单元306输出到信息记录介质320并记录在信息记录介质320中。
接下来,将参考图47所示的流程图描述由图46所示的信息处理装置300执行的对信息记录介质320的数据记录过程的序列。
例如,根据图47所示的流程的处理可以在数据处理单元(控制单元)的控制下执行,该数据处理单元包括根据存储在信息处理装置的存储单元中的程序具有程序执行功能的CPU。
下面将依次描述图47的流程中所示的各个步骤的处理。
(步骤S101)
首先,在步骤S101中,信息处理装置300经由数据输入单元301接收正在记录数据的MMT格式数据。
此外,记录数据包括视频数据、音频数据、字幕数据,并且还包括存储通知信息、控制信息等的信令信息(TLV-SI和MMT-SI)等。
(步骤S102)
然后,在步骤S102中,信息处理装置300对输入的MMT格式数据执行多路分用处理,即,数据类型单元的数据分离处理。执行视频、音频、字幕、控制信息等的分离处理。
(步骤S103)
然后,在步骤S103中,信息处理装置300将在步骤S102中分离的控制信息(例如,信令信息(TLV-SI和MMT-SI))存储在存储器中。
(步骤S104)
然后,在步骤S104中,信息处理装置300执行对在步骤S102中分离的视频、音频或字幕中的至少一个的数据进行重新编码的处理。
此外,这样的处理是在要记录在信息记录介质中的数据的编码形式改变的情况下执行的处理,并且在没有改变地记录接收的数据的情况下,不必重新编码处理。
(步骤S105)
然后,在步骤S105中,信息处理装置300执行多路复用包括视频、音频或字幕的数据以及进一步包括在步骤S103中的编码数据的再现控制信息等的处理。换言之,执行生成剪辑AV流文件的处理。
此外,要存储在剪辑AV流文件中的再现控制信息是例如从参考图40至45描述的MPT获取的信息等。
(步骤S106)
然后,在步骤S106中,信息处理装置300通过使用输入MMT格式数据的配置数据来生成剪辑信息文件。
例如,生成参考图23至39描述的剪辑信息文件,即,对应于存储MMT格式数据的剪辑AV流文件的剪辑信息文件。
此外,稍后将参考图48所示的流程详细描述步骤S106中生成剪辑信息文件的处理的详细顺序。
(步骤S107)
然后,在步骤S107中,信息处理装置300使用输入的MMT格式数据的配置数据生成播放列表文件。
例如,生成以上参考图11至22描述的播放列表文件,即,对应于存储MMT格式数据的剪辑AV流文件的播放列表文件。
此外,稍后将参考图49详细描述步骤S107的播放列表文件生成处理。
(步骤S108)
然后,在步骤S108中,信息处理装置300使用输入的MMT格式数据生成其他数据库文件。
(步骤S109)
然后,在步骤S109中,信息处理装置300使用生成的AV流文件和数据库文件生成BDAV格式数据。
(步骤S110)
然后,在步骤S110中,信息处理装置300将在步骤S109中生成的BDAV格式数据记录在信息记录介质(媒介)中。
接下来,将参考图48所示的流程图描述在步骤S106中执行的剪辑信息文件生成处理的详细序列。
此外,图48所示的流程图是生成用于控制存储MMT格式数据的剪辑AV流文件的剪辑信息的序列。
将依次描述图48所示的流程的各个步骤的过程。
(步骤S121)
首先,在步骤S121中,信息处理装置300检查MMTP分组的随机访问点(RAP)标志,该MMTP分组是存储在剪辑AV流文件中的MMT格式数据。
这个处理是上面参考图38描述的处理。
设置RAP标志=1的MMTP分组是包括随机访问点的数据。
(步骤S122)
然后,在步骤S122中,信息处理装置300生成包括设置了RAP标志=1的MMTP分组的分组位置和时间信息(NTP时间)的对应数据的EP图。
该过程是生成上面参考图34至38描述的MMT格式数据兼容的EP图的过程。从剪辑AV流文件开始的字节位置(=存储在文件中的第一MMTP分组的开始)用作分组位置信息。此外,NTP时间用作时间信息。
(步骤S123)
然后,在步骤S123中,信息处理装置300将剪辑信息文件的应用类型(Application_type)和剪辑流类型(Clip_stream_type)的值设置为[3]。
该处理是以上参考图24至26描述的处理,并且是记录用于识别用作剪辑信息文件的控制目标数据的剪辑AV流文件的存储数据是MMT格式数据的设置值的处理。
(步骤S124)
然后,在步骤S124中,信息处理装置300记录剪辑信息文件的记录速率(recording_rate)和平均速率(average_rate)。
该处理是以上参考图24描述的以下信息的数据记录处理:
TS平均速率(TS_average_rate)214;和
TS记录速率(TS_recording_rate)215。
如上所述,以字节或秒为单位表示作为剪辑信息文件的再现目标数据的剪辑AV流文件的传输流的平均比特率和记录速率。
假设基于TS分组计算该比特率信息,并且在再现目标数据是具有MMT分组的MMT格式的情况下,计算并记录与MMT格式相对应的比特率。或者,在再现目标数据是MMT格式的情况下,可以执行将无效值记录在字段中使得不使用比特率信息的设置。
(步骤S125)
然后,在步骤S125中,信息处理装置300生成作为剪辑信息文件的配置信息的以下数据:
剪辑信息(ClipInfo);
序列信息(SequenceInfo);
节目信息(ProgramInfo);
CPI信息(CPI);和
剪辑标记(ClipMark)。
此外,在再现目标数据是在生成每条数据的处理中的MMT格式数据的情况下,例如,获取NTP时间信息并将其记录为时间信息,并且获取指示从存储在流文件(剪辑AV流文件)中的第一MMTP分组的开始起的字节数的数据并将其记录为分组位置。
通过这些处理,生成与MMT格式数据相对应的剪辑信息文件。
此外,在控制目标是存储MPEG-2 TS格式数据的剪辑AV流文件的情况下,可以执行与现有技术的处理类似的剪辑信息文件生成处理。
接下来,将参考图49所示的流程图描述在图47所示的流程中的步骤S107中执行的播放列表文件生成处理的详细顺序。
此外,图49所示的流程图是用于控制存储MMT格式数据的剪辑AV流文件的播放列表的生成序列。
将依次描述图49所示的流程的各个步骤的处理。
(步骤S131)
首先,在步骤S131中,信息处理装置300将要记录在播放列表文件中的CPI类型(PL_CPI_type)的值设置为[3]。
该过程对应于上面参考图11至图15描述的过程。
如上参考图15的“(2)新的CPI类型记录数据(记录MPEG-2 TS兼容数据和MMT兼容数据)”所述,PL_CPI类型(PL_CPI_type)=3意味着播放列表文件中指定的播放项(PlayItem)所引用的剪辑信息文件中的CPI类型是MMT兼容EP图。
(步骤S132)
然后,在步骤S132中,信息处理装置300将记录在播放列表文件中的每个播放项的时间信息(IN_time和OUT_time)记录为NTP时间信息。
该处理对应于上面参考图16和图17描述的处理。
如图17的(2)的“(2)新播放项信息记录数据(MMT兼容播放列表)”所示,开始时间(IN_time)是播放项(PlayItem)再现起始点的再现开始时间信息。在再现目标数据是MMT格式数据的情况下,记录根据NTP的时间信息。
结束时间(OUT_time)是播放项(PlayItem)再现结束点的再现结束时间信息。在再现目标数据是MMT格式数据的情况下,记录根据NTP的时间信息。
例如,根据NTP的时间信息与MMT格式数据一起传输,MMT格式数据包括由诸如图1所示的广播服务器(广播台)21等传输装置20传输的广播内容等。
诸如电视(TV)32的信息处理装置30根据传输装置20传输的NTP获取时间信息,并将时间信息记录在播放列表中。
(步骤S133)
然后,在步骤S133中,信息处理装置300生成以下数据,该数据是播放列表文件的配置数据:
播放项(PlayItem);和
播放列表标记(PlayListMark)。
此外,在生成每条数据的过程中,在再现目标数据是MMT格式数据的情况下,例如,获取NTP时间信息并将其记录为时间信息,并且获取指示从存储在流文件(剪辑AV流文件)中的第一MMTP分组的开始起的字节数的数据并将其记录为分组位置。
通过这些处理,生成对应于MMT格式数据的播放列表文件。
此外,在控制目标是存储MPEG-2 TS格式数据的剪辑AV流文件的情况下,可以执行与现有技术的处理类似的播放列表文件生成处理。
信息处理装置300通过执行根据参考图47至图49描述的流程的处理,可以遵循BDAV格式将输入的MMT格式数据记录和再现为播放列表文件、剪辑信息文件和剪辑AV流文件。
[9、执行来自信息记录介质的数据再现处理的信息处理装置的配置和处理]
接下来,将参考图50和随后的附图描述执行来自信息记录介质的数据再现处理的信息处理装置的配置和处理。
执行再现处理的信息处理装置执行记录在安装在装置中的信息记录介质中的数据的读取处理和再现处理。
图50是示出执行记录在诸如BD的信息记录介质510中的数据的再现处理的信息处理装置400的配置的示图。
信息处理装置400读取记录在图50所示的信息记录介质(记录介质)510中的数据,并将读取的数据输出到输出装置(显示单元+扬声器)520。此外,输出装置520例如是电视机等,并且是包括显示器、扬声器等的显示装置。
此外,信息处理装置400可以是与执行以上参考图46描述的数据记录的信息处理装置300相同的装置。换言之,信息处理装置400是具有数据记录/再现这两种功能的信息处理装置。
信息记录介质(记录介质)510是记录通过参考图46至图49描述的处理生成的AV流文件和诸如播放列表或剪辑信息文件的数据库文件的记录介质。
控制单元401例如基于来自用户输入单元402的再现指令信息的输入,经由记录/再现单元404和驱动器403读取信息记录介质510的记录数据,将记录数据存储在用作数据缓冲器的存储单元405中,并将存储数据输出到再现处理单元406。
在控制单元401的控制下,再现处理单元406从存储从信息记录介质510读取的再现数据的剪辑AV流文件中获取每条数据,即,视频、音频、字幕等中的每一个的数据,并生成再现数据。
多路分用器(DeMUX)411获取存储诸如视频、音频、字幕、播放列表文件、剪辑信息文件等的每条数据的存储数据分组,将分组分类为数据类型的分组,并将分组输入到字幕数据生成单元412、视频数据生成单元413、音频数据生成单元414和辅助信息生成单元415。
字幕数据生成单元412、视频数据生成单元413和音频数据生成单元414执行对存储在分组等中的数据进行解码的处理,并将解码的数据输出到输出数据生成单元416。
输出数据生成单元416经由输入/输出接口407将字幕、视频和音频的每条数据输出到输出装置(显示单元+扬声器)520。
此外,信息记录介质510可以存储以下文件,作为存储再现目标数据的流文件:
存储MPEG-2 TS格式数据的流文件;和
存储MMT格式数据的流文件。
在这种情况下,信息处理装置400可以通过应用以BDAV格式指定的播放列表文件或剪辑信息文件来执行再现存储MPEG-2 TS格式数据的流文件和存储MMT格式数据的流文件的处理。
辅助信息生成单元415获取例如存储在播放列表文件或剪辑信息文件中的记录内容列表显示数据,生成记录内容列表,并将生成的列表输出到输出装置(显示单元+扬声器)520。
输出装置(显示单元+扬声器)520经由输出装置(显示单元+扬声器)520输出从信息处理装置400输入的字幕、视频、音频等中的每一个的数据。
此外,信息记录介质510存储遵循BDAV格式记录MMT格式数据的数据,并且信息处理装置400获取作为以BDAV格式指定的数据库文件的播放列表文件或剪辑信息文件的记录信息,并且执行再现控制处理。
接下来,将参考图51所示的流程图描述由图50所示的信息处理装置400执行的来自信息记录介质510的数据再现处理的序列。
例如,可以在数据处理单元(控制单元)的控制下执行根据图51所示的流程的处理,该数据处理单元具有CPU,该CPU根据存储在信息处理装置400的存储单元中的程序具有程序执行功能。
此外,根据图51所示的流程执行处理的信息处理装置是图50所示的信息处理装置400,信息记录介质(记录介质)510安装在信息处理装置中,并且信息处理装置读取记录在安装的信息记录介质510中的数据,并将数据输出到输出装置(显示单元+扬声器)520。此外,输出装置520例如是电视机等,并且是包括显示器、扬声器等的显示装置。
信息记录介质(记录介质)510是记录介质,其中,记录通过参考图46至图49描述的处理生成的AV流和诸如播放列表或剪辑信息文件的数据库文件。
下面将依次描述图51的流程中所示的各个步骤的处理。
(步骤S201)
首先,在步骤S201中,例如,信息处理装置400的控制单元401从信息记录介质(媒介)读取存储与根据用户输入的再现数据指定信息指定的再现数据相对应的再现控制信息的播放列表文件。
(步骤S202)
然后,在步骤S202中,信息处理装置400的控制单元401读取记录在播放列表文件中的PL_CPI类型(PL_CPI_type)。
如上参考图11至图15所述,PL_CPI类型(PL_CPI_type)是指示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型的信息。
此外,CPI是剪辑信息文件的记录数据,并且例如是用于获取再现起始点的数据地址的数据。
如图15所示,PL_CPI类型(PL_CPI_type)=1表示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MPEG-2TS兼容的EP图。
PL_CPI类型(PL_CPI_type)=2表示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MPEG-2 TS兼容的TU图。
PL_CPI类型(PL_CPI_type)=3表示由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是MMT兼容的EP图。
如上所述,由于可以定义PL_CPI类型(PL_CPI_type)=1至3的三种CPI类型,因此可以识别三种CPI类型。
(步骤S203)
然后,在步骤S203中,信息处理装置400的控制单元401确定在步骤S202中读取的PL_CPI类型(PL_CPI_type)的设置值是否是[3]。
换言之,确定由播放列表文件中指定的播放项(PlayItem)所引用的剪辑信息文件中的CPI类型是否是MMT兼容的EP图。
在PL_CPI类型(PL_CPI_type)=3的情况下,步骤S203的确定为是,并且处理进行到步骤S205。
另一方面,在PL_CPI类型(PL_CPI_type)不是3的情况下,步骤S203的确定为否,并且处理进行到步骤S204。
(步骤S204)
在PL_CPI类型(PL_CPI_type)不是3的情况下,执行步骤S204的处理。
在PL_CPI类型不是3的情况下,由播放列表文件中指定的播放项(PlayItem)引用的剪辑信息文件中的CPI类型是1或2,并且再现目标数据是MPEG-2 TS格式数据。
在这种情况下,信息处理装置400通过应用相关技术的再现处理技术来执行MPEG-2 TS格式数据的再现处理
(步骤S205)
另一方面,在PL_CPI类型(PL_CPI_type)为3的情况下,在步骤S205中,确定播放列表文件的再现目标数据是MMT格式数据。
(步骤S206)
然后,在步骤S206中,信息处理装置400通过应用与MMT格式数据相对应的播放列表和剪辑信息文件来执行存储MMT格式数据的剪辑信息文件的存储数据的再现处理。
接下来,作为MMT格式数据的再现处理的具体示例,将参考图52所示的流程图描述记录在剪辑信息文件中的MMT格式数据兼容的EP图所应用的随机访问再现处理的序列。
此外,MMT格式数据兼容的EP图是例如具有以上参考图34至图36描述的一个配置的EP图,即,EP图由对应于随机可访问数据位置的时间信息和从存储在流文件(剪辑AV流文件)等中的第一MMTP分组开始的字节位置信息的对应数据构成。
将描述图52所示的流程图的各个步骤的处理。
(步骤S211)
首先,在步骤S211中,信息处理装置400从应用于随机访问再现的播放列表的播放项信息中读取剪辑信息文件名(Clip_information_file_name)。
这是上面参考图16描述的播放列表文件中的播放项(PlayItem)信息中记录的数据。
(步骤S212)
然后,在步骤S212中,信息处理装置400从信息记录介质(媒介)读取具有在步骤S211中从播放列表文件读取的剪辑信息文件名(Clip_information_file_name)的剪辑信息文件。
(步骤S213)
然后,在步骤S213中,信息处理装置400从剪辑信息文件的序列信息(SequenceInfo)指定作为用于再现的时钟信息的ATC和STC。此外,在再现目标数据是MMT格式数据的情况下,时间信息被记录为NTP时间信息。
此外,剪辑信息文件的序列信息(SequenceInfo)具有以上参考图27描述的数据配置,并且指定了与ATC和STC相关的信息。
ATC和STC已经在上面参考图28进行了描述,并且是应用于数据再现的时钟信息。
(步骤S214)
然后,在步骤S214中,信息处理装置400从剪辑信息文件的序列信息(SequenceInfo)获取再现开始位置(SPN_STC_Start)和再现开始时间(presentation_start_time)。
在再现目标数据是MMT格式数据的情况下,再现开始位置信息是例如从存储在流文件(剪辑AV流文件)中的第一MMTP分组开始起的字节数,并且再现开始时间是NTP时间信息。该信息被记录为剪辑信息文件的序列信息(SequenceInfo)。
(步骤S215)
然后,在步骤S215中,信息处理装置400根据记录在剪辑信息文件的剪辑信息(ClipInfo)中的记录速率(recording_rate),读取存储在剪辑AV流文件中的MMT格式数据。
记录速率(recording_rate)信息记录在如参考图24所述的剪辑信息文件的剪辑信息(ClipInfo)中,并且根据该信息读取记录在信息记录介质(媒介)中的剪辑AV流文件中存储的MMT格式数据。
此外,虽然TS_recording_rate在图24中被描述为记录速率信息,但是在再现目标数据是具有MMT分组的MMT格式的情况下,在此处记录与MMT格式相对应的比特率。
(步骤S216)
然后,在步骤S216中,信息处理装置400执行从信息记录介质(媒介)读取的剪辑AV流文件中存储的MMT格式数据的多路分用处理、解码处理和再现处理。
[10、信息处理装置的配置示例]
接下来,将参考图53描述可用作信息处理装置的信息处理装置的硬件配置示例,该信息处理装置执行对信息记录介质的数据记录并执行来自信息记录介质的数据再现。
中央处理单元(CPU)601用作根据存储在只读存储器(ROM)602或存储单元608中的程序执行各种处理的数据处理单元。例如,执行根据上述实施方式中描述的序列的处理。随机存取存储器(RAM)603存储由CPU 601执行的程序、数据等。CPU 601、ROM 602和RAM 603经由总线604彼此连接。
CPU 601经由总线604连接到输入/输出接口605,并且包括各种开关、键盘、鼠标、麦克风等的输入单元606和包括显示器、扬声器等的输出单元607连接到输入/输出接口605。例如,CPU 601根据从输入单元606输入的命令执行各种处理,并将处理结果输出到输出单元607。
连接到输入/输出接口605的存储单元608包括例如硬盘等,并且存储由CPU 601执行的程序和各种数据。通信单元609用作经由诸如互联网或局域网(LAN)等网络进行数据通信的收发单元以及广播波收发单元,并且执行与外部装置的通信。
连接到输入/输出接口605的驱动器610驱动可移动介质611,例如,磁盘、光盘、磁光盘或诸如存储卡的半导体存储器,,并执行数据的记录或读取。
[11、本公开的配置的结论]
上面已经参考具体示例详细描述了本公开的实施方式。然而,显而易见的是,本领域技术人员可以对实施方式进行修改或替换,而不背离本公开的主旨。换言之,本发明已经以示例的形式公开,并不旨在限制性地解释。为了确定本公开的主旨,应该考虑下面提出的权利要求。
此外,在说明书中公开的技术可以具有以下配置。
(1)一种信息处理装置,包括:
数据处理单元,接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,
其中,所述数据处理单元:
生成MMT格式流文件,其中,MMT格式流文件将MMT格式数据作为再现数据来存储,并且
还生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
(2)根据(1)所述的信息处理装置,其中,所述数据处理单元生成播放列表文件和剪辑信息文件以作为MMT格式兼容的再现控制信息文件。
(3)根据(2)所述的信息处理装置,其中,所述数据处理单元将指示与所述MMT格式数据相对应的控制信息文件的标识符记录在作为所述MMT格式兼容的再现控制信息文件生成的所述播放列表文件和剪辑信息文件中。
(4)根据(1)至(3)中任一项所述的信息处理装置,其中,所述数据处理单元使用与所述MMT格式数据一起接收的信令信息来获取或生成所述MMT格式兼容的再现控制信息文件的记录数据。
(5)根据(1)至(4)中任一项所述的信息处理装置,其中,所述数据处理单元记录与所述MMT格式数据一起接收的网络时间协议(NTP)时间信息以作为记录在所述MMT格式兼容的再现控制信息文件中的时间信息。
(6)根据(5)所述的信息处理装置,其中,所述数据处理单元从与所述MMT格式数据一起接收的MMT封装表(MPT)中获取网络时间协议(NTP)时间信息。
(7)根据(1)至(6)中任一项所述的信息处理装置,其中,所述数据处理单元计算并记录从以MMT格式规定的MMTP分组的开始位置开始的字节信息以作为要记录在MMT格式兼容的再现控制信息文件中的数据位置信息。
(8)根据(1)至(7)中任一项所述的信息处理装置,其中,所述数据处理单元:
生成播放列表文件以作为MMT格式兼容的再现控制信息文件,并且
记录指示对MMT格式数据兼容的EP图进行使用的类型的标识符以作为要记录在播放列表文件中的CPI类型标识符。
(9)根据(1)至(8)中任一项所述的信息处理装置,其中,所述数据处理单元:
生成剪辑信息文件以作为MMT格式兼容的再现控制信息文件,
被配置为生成包括随机访问点的再现时间信息和再现位置信息的对应数据的EP图以作为剪辑信息文件的记录数据,
使用网络时间协议(NTP)时间信息作为再现时间信息,并且
生成EP图,其中,该EP图将从以MMT格式规定的MMTP分组的起始位置开始的字节信息用作再现位置信息。
(10)一种信息处理装置,包括:
数据处理单元,执行信息记录介质的记录数据的再现处理,
其中,所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,并且
所述数据处理单元:当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
(11)根据(10)所述的信息处理装置,其中,数据处理单元通过应用作为MMT格式兼容的再现控制信息文件的播放列表文件和剪辑信息文件来执行再现控制。
(12)根据(10)或(11)所述的信息处理装置,其中,数据处理单元通过应用记录了标识符的播放列表文件和剪辑信息文件来执行再现控制,其中,该标识符指示与MMT格式数据相对应的控制信息文件。
(13)根据(10)至(12)中任一项所述的信息处理装置,其中,数据处理单元使用记录在MMT格式兼容的再现控制信息文件中的网络时间协议(NTP)时间信息来执行再现控制。
(14)根据(10)至(13)中任一项所述的信息处理装置,其中,所述数据处理单元将从以MMT格式规定的MMTP分组的开始位置开始的字节信息作为要记录在MMT格式兼容的再现控制信息文件中的数据位置信息使用来执行再现控制。
(15)根据(10)至(14)中任一项所述的信息处理装置,其中,所述数据处理单元通过应用MMT格式兼容的播放列表文件来执行再现控制,其中,MMT格式兼容的播放列表文件中记录了CPI类型标识符,CPI类型标识符指示对MMT格式数据兼容的EP图进行使用的类型。
(16)根据(10)至(15)中任一项所述的信息处理装置,其中,所述数据处理单元被配置为使用MMT格式兼容的剪辑信息文件来执行再现控制,其中,MMT格式兼容的剪辑信息文件是MMT格式兼容的再现控制信息文件,
所述MMT格式兼容的剪辑信息文件具有记录包括随机访问点的再现时间信息和再现位置信息的对应数据的EP图的配置,并且
EP图是包括网络时间协议(NTP)时间信息和从以MMT格式规定的MMTP分组的起始位置开始的字节信息的对应数据的EP图。
(17)一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,所述信息处理方法包括:
通过所述数据处理单元生成MMT格式流文件,其中,MMT格式流文件存储MMT格式数据以作为再现数据,并且
还通过所述数据处理单元生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
(18)一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,所述信息处理方法包括:
通过所述数据处理单元:当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
(19)一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,
所述程序促使数据处理单元:
生成MMT格式流文件,其中,MMT格式流文件存储MMT格式数据以作为再现数据,并且
还生成存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
(20)一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,该数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,
所述程序促使数据处理单元:
当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,通过应用存储MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
此外,说明书中描述的一系列过程可以通过硬件、软件或其组合配置来执行。在执行软件处理的情况下,可以将其中记录有处理序列的程序安装在包含在专用硬件内的计算机中的存储器中,并且执行该程序或者将该程序安装在可以执行各种处理并执行该程序的通用计算机中。例如,程序可以预先记录在记录介质中。并非将程序从记录介质安装到计算机,可以经由诸如LAN、互联网等网络接收程序,并将程序安装在诸如内部硬盘等记录介质中。
此外,说明书中描述的各种处理不仅根据描述按时间顺序执行,还可以根据执行该处理的装置的处理能力或根据需要并行或单独执行。此外,在本说明书中,系统指的是多个装置的逻辑集合配置,而不限于各个组件的装置在单个外壳内的配置。
工业适用性
如上所述,根据本公开的一个实施方式的配置,实现了能够将MMT格式数据作为BDAV或SPAV格式数据记录在介质中并且能够再现MMT格式数据的配置。
具体地,输入经由广播波等输入的MMT格式数据,并且生成遵循BDAV格式或SPAV格式的记录数据。数据处理单元生成MMT格式流文件,MMT格式流文件将MMT格式数据作为再现数据来存储,并进一步生成存储MMT格式流文件的再现控制信息的播放列表文件和剪辑信息文件。
利用本配置,实现了能够将MMT格式数据作为BDAV或SPAV格式数据记录在介质中并且能够再现MMT格式数据的配置。
符号说明20传输装置
21 广播服务器
22 数据传送服务器
30 信息处理装置
31 BD播放器
32 TV
33 PC
34 移动终端
40 信息记录介质(媒介)
41 BD
42 HDD
43 闪存
300 信息处理装置
301 数据输入单元
302 用户输入单元
303 控制单元
304 存储单元
305 多路分用器
306 记录数据生成单元
307 记录单元
308 驱动器
311 字幕数据生成单元
312 视频数据生成单元
313 音频数据生成单元
314 辅助信息生成单元
315 多路复用器
316 数据库文件生成单元
320 信息记录介质
400 信息处理装置
401 控制单元
402 用户输入单元
403 驱动器
404 记录/再现单元
405 存储单元
406 再现处理单元
407 输入/输出I/F
411 多路分用器
412 字幕数据生成单元
413 视频数据生成单元
414 音频数据生成单元
415 辅助信息生成单元
416 输出数据生成单元
510 信息记录介质
520 输出装置(显示器+扬声器)
601 CPU
602 ROM
603 RAM
604 总线
605 输入/输出接口
606 输入单元
607 输出单元
608 存储单元
609 通信单元
610 驱动器
611 可移动介质。

Claims (20)

1.一种信息处理装置,包括:
数据处理单元,接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,
其中,所述数据处理单元:
生成MMT格式流文件,所述MMT格式流文件将MMT格式数据作为再现数据来存储,并且
还生成存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
2.根据权利要求1所述的信息处理装置,其中,所述数据处理单元生成播放列表文件和剪辑信息文件以作为所述MMT格式兼容的再现控制信息文件。
3.根据权利要求2所述的信息处理装置,其中,所述数据处理单元将指示与所述MMT格式数据相对应的控制信息文件的标识符记录在作为所述MMT格式兼容的再现控制信息文件生成的所述播放列表文件和所述剪辑信息文件中。
4.根据权利要求1所述的信息处理装置,其中,所述数据处理单元使用与所述MMT格式数据一起接收的信令信息来获取或生成所述MMT格式兼容的再现控制信息文件的记录数据。
5.根据权利要求1所述的信息处理装置,其中,所述数据处理单元记录与所述MMT格式数据一起接收的网络时间协议(NTP)时间信息以作为记录在所述MMT格式兼容的再现控制信息文件中的时间信息。
6.根据权利要求5所述的信息处理装置,其中,所述数据处理单元从与所述MMT格式数据一起接收的MMT封装表(MPT)中获取所述网络时间协议(NTP)时间信息。
7.根据权利要求1所述的信息处理装置,其中,所述数据处理单元计算并记录从以MMT格式规定的MMTP分组的开始位置开始的字节信息以作为记录在所述MMT格式兼容的再现控制信息文件中的数据位置信息。
8.根据权利要求1所述的信息处理装置,其中,所述数据处理单元:
生成播放列表文件以作为所述MMT格式兼容的再现控制信息文件,并且
记录指示对MMT格式数据兼容的EP图进行使用的类型的标识符以作为要记录在所述播放列表文件中的CPI类型标识符。
9.根据权利要求1所述的信息处理装置,其中,所述数据处理单元:
生成剪辑信息文件以作为所述MMT格式兼容的再现控制信息文件,
被配置为生成包括随机访问点的再现时间信息和再现位置信息的对应数据的EP图以作为所述剪辑信息文件的记录数据,
使用网络时间协议(NTP)时间信息作为再现时间信息,并且生成EP图,其中,所述EP图将从以MMT格式规定的MMTP分组的起始位置开始的字节信息用作所述再现位置信息。
10.一种信息处理装置,包括:
数据处理单元,执行信息记录介质的记录数据的再现处理,
其中,所述信息记录介质是存储数据的信息记录介质,其中,所述数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,并且
所述数据处理单元:
当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,
通过应用存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
11.根据权利要求10所述的信息处理装置,其中,所述数据处理单元通过应用作为所述MMT格式兼容的再现控制信息文件的播放列表文件和剪辑信息文件来执行所述再现控制。
12.根据权利要求10所述的信息处理装置,其中,所述数据处理单元通过应用记录了标识符的播放列表文件和剪辑信息文件来执行再现控制,其中,所述标识符指示与MMT格式数据相对应的控制信息文件。
13.根据权利要求10所述的信息处理装置,其中,所述数据处理单元使用记录在所述MMT格式兼容的再现控制信息文件中的网络时间协议(NTP)时间信息来执行所述再现控制。
14.根据权利要求10所述的信息处理装置,其中,所述数据处理单元将从以MMT格式规定的MMTP分组的开始位置开始的字节信息作为要记录在所述MMT格式兼容的再现控制信息文件中的数据位置信息使用来执行所述再现控制。
15.根据权利要求10所述的信息处理装置,其中,所述数据处理单元通过应用MMT格式兼容的播放列表文件来执行所述再现控制,其中,所述MMT格式兼容的播放列表文件中记录了CPI类型标识符,所述CPI类型标识符指示对MMT格式数据兼容的EP图进行使用的类型。
16.根据权利要求10所述的信息处理装置,其中,所述数据处理单元被配置为使用MMT格式兼容的剪辑信息文件来执行所述再现控制,其中,所述MMT格式兼容的剪辑信息文件是所述MMT格式兼容的再现控制信息文件,
所述MMT格式兼容的剪辑信息文件具有记录包括随机访问点的再现时间信息和再现位置信息的对应数据的EP图的配置,并且所述EP图是包括网络时间协议(NTP)时间信息和从以MMT格式规定的MMTP分组的起始位置开始的字节信息的对应数据的EP图。
17.一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,所述数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式的BDAV格式或SPAV格式的记录数据,所述信息处理方法包括:
通过所述数据处理单元生成MMT格式流文件,其中,所述MMT格式流文件将MMT格式数据作为再现数据存储,并且
还通过所述数据处理单元生成存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
18.一种在信息处理装置中执行的信息处理方法,
所述信息处理装置包括数据处理单元,所述数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,所述数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,所述信息处理方法包括:
通过所述信息处理装置:
在执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,
通过应用存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
19.一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,所述数据处理单元接收MPEG介质传输(MMT)格式数据,并生成遵循作为信息记录介质的数据记录格式BDAV格式或SPAV格式的记录数据,
所述程序促使所述数据处理单元:
生成MMT格式流文件,其中,所述MMT格式流文件将MMT格式数据作为再现数据存储,并且
还生成存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件。
20.一种促使在信息处理装置中执行信息处理的程序,
所述信息处理装置包括数据处理单元,所述数据处理单元执行信息记录介质的记录数据的再现处理,
所述信息记录介质是存储数据的信息记录介质,其中,所述数据是遵循BDAV格式或SPAV格式来记录MPEG介质传输(MMT)格式数据而得到的数据,
所述程序促使数据处理单元:
当执行使用存储MMT格式数据的MMT格式流文件的数据再现处理时,
通过应用存储所述MMT格式流文件的再现控制信息的MMT格式兼容的再现控制信息文件来执行再现控制。
CN201780054241.6A 2016-09-08 2017-08-07 信息处理装置、信息处理方法和程序 Expired - Fee Related CN109690674B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016175899 2016-09-08
JP2016-175899 2016-09-08
PCT/JP2017/028554 WO2018047558A1 (ja) 2016-09-08 2017-08-07 情報処理装置、および情報処理方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN109690674A true CN109690674A (zh) 2019-04-26
CN109690674B CN109690674B (zh) 2021-05-11

Family

ID=61562815

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780054241.6A Expired - Fee Related CN109690674B (zh) 2016-09-08 2017-08-07 信息处理装置、信息处理方法和程序

Country Status (5)

Country Link
US (1) US11259074B2 (zh)
EP (1) EP3511939A1 (zh)
JP (1) JP7056566B2 (zh)
CN (1) CN109690674B (zh)
WO (1) WO2018047558A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018221292A1 (ja) * 2017-05-31 2018-12-06 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
KR20200107616A (ko) * 2019-03-08 2020-09-16 삼성전자주식회사 방송 수신 장치 및 그 동작방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050196146A1 (en) * 2004-02-10 2005-09-08 Yoo Jea Y. Method for reproducing text subtitle and text subtitle decoding system
WO2006121049A1 (ja) * 2005-05-10 2006-11-16 Matsushita Electric Industrial Co., Ltd. データ処理装置
US20080130885A1 (en) * 2005-05-23 2008-06-05 Masaya Yamamoto Reproducing Device, Recording Device, Recording Medium, Data Processing Method, Data Processing Program, Data Recording Method, Data Recording Program, and Integrated Circuit
JP2012023734A (ja) * 2010-07-16 2012-02-02 Hon Hai Precision Industry Co Ltd ファイル位置高速検索方法
US20160099026A1 (en) * 2013-07-22 2016-04-07 Panasonic Intellectual Property Corporation Of America Storage method, playback method, storage apparatus, and playback apparatus
CN105612755A (zh) * 2013-11-08 2016-05-25 松下电器(美国)知识产权公司 发送方法、接收方法、发送装置及接收装置
JP2016103745A (ja) * 2014-11-28 2016-06-02 ソニー株式会社 送信装置及び送信方法、並びに、受信装置並びに受信方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX2010002147A (es) * 2007-08-24 2010-04-07 Lg Electronics Inc Sistema de radiodifusion digital y metodo de procesamiento de datos en el sistema de radiodifusion digital.
CA2746156A1 (en) * 2008-09-30 2010-04-08 Panasonic Corporation Reproduction device, recording medium, and integrated circuit
ES2801698T3 (es) * 2009-03-16 2021-01-12 Koninklijke Kpn Nv Sincronización de flujo modificado
JP5418030B2 (ja) * 2009-07-15 2014-02-19 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
JP5652021B2 (ja) * 2010-07-08 2015-01-14 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
FR3005820B1 (fr) * 2013-05-17 2015-05-29 Envivio France Procede de gestion de listes de lecture personnalisees du type comprenant un gabarit d'uri et une liste d'identifiants de segments.

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050196146A1 (en) * 2004-02-10 2005-09-08 Yoo Jea Y. Method for reproducing text subtitle and text subtitle decoding system
WO2006121049A1 (ja) * 2005-05-10 2006-11-16 Matsushita Electric Industrial Co., Ltd. データ処理装置
US20080130885A1 (en) * 2005-05-23 2008-06-05 Masaya Yamamoto Reproducing Device, Recording Device, Recording Medium, Data Processing Method, Data Processing Program, Data Recording Method, Data Recording Program, and Integrated Circuit
JP2012023734A (ja) * 2010-07-16 2012-02-02 Hon Hai Precision Industry Co Ltd ファイル位置高速検索方法
US20160099026A1 (en) * 2013-07-22 2016-04-07 Panasonic Intellectual Property Corporation Of America Storage method, playback method, storage apparatus, and playback apparatus
CN105612755A (zh) * 2013-11-08 2016-05-25 松下电器(美国)知识产权公司 发送方法、接收方法、发送装置及接收装置
JP2016103745A (ja) * 2014-11-28 2016-06-02 ソニー株式会社 送信装置及び送信方法、並びに、受信装置並びに受信方法

Also Published As

Publication number Publication date
EP3511939A4 (en) 2019-07-17
EP3511939A1 (en) 2019-07-17
JP7056566B2 (ja) 2022-04-19
WO2018047558A1 (ja) 2018-03-15
US11259074B2 (en) 2022-02-22
US20210289254A1 (en) 2021-09-16
JPWO2018047558A1 (ja) 2019-06-24
CN109690674B (zh) 2021-05-11

Similar Documents

Publication Publication Date Title
CN100394791C (zh) 信息处理方法和装置
CN102292992B (zh) 信息处理设备、信息处理方法、回放设备、回放方法及记录介质
CN101315804B (zh) 编辑装置和方法以及数据处理装置和方法
CN102047672B (zh) 记录设备、记录方法、回放设备和回放方法
CN106605265B (zh) 信息处理装置、信息记录介质、信息处理方法与程序
US7571386B2 (en) Recording medium having a data structure for managing reproduction of text subtitle data and methods and apparatuses associated therewith
US20060039255A1 (en) Method for configuring composite file structure for data reproduction, and method and apparatus for reproducing data using the composite file structure
CN109478412B (zh) 信息处理设备、信息处理方法和程序
AU2003243049B2 (en) Recording medium having data structure for managing recording and reproduction of multiple path data recorded thereon and recording and reproducing methods and apparatus
KR20130066570A (ko) 정보 처리 장치, 정보 기록 매체 및 정보 처리 방법, 및 프로그램
KR102344751B1 (ko) 정보 처리 장치, 정보 기록 매체 및 정보 처리 방법, 그리고 프로그램
CN109690674A (zh) 信息处理装置、信息处理方法和程序
CN110235198A (zh) 信息处理设备、信息记录介质、信息处理方法和程序
JP7070432B2 (ja) 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
RU2625519C2 (ru) Устройство обработки информации, способ обработки информации, программа и носитель записи
CN110663250B (zh) 信息处理设备、信息记录介质和信息处理方法
EP3605538B1 (en) Information processing device, information recording medium, information processing method, and program
CN102918851A (zh) 信息处理装置、信息记录介质、信息处理方法以及程序
KR20130044216A (ko) 정보 처리 장치, 정보 기록 매체 및 정보 처리 방법, 및 프로그램
JP7070433B2 (ja) 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
KR20130066569A (ko) 정보 처리 장치, 정보 기록 매체 및 정보 처리 방법, 및 프로그램
JP4821689B2 (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210511

CF01 Termination of patent right due to non-payment of annual fee