CN105308974B - 传输装置、传输方法、再现装置、再现方法以及接收装置 - Google Patents

传输装置、传输方法、再现装置、再现方法以及接收装置 Download PDF

Info

Publication number
CN105308974B
CN105308974B CN201480033952.1A CN201480033952A CN105308974B CN 105308974 B CN105308974 B CN 105308974B CN 201480033952 A CN201480033952 A CN 201480033952A CN 105308974 B CN105308974 B CN 105308974B
Authority
CN
China
Prior art keywords
data packet
transmission
transmission data
transport stream
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480033952.1A
Other languages
English (en)
Other versions
CN105308974A (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105308974A publication Critical patent/CN105308974A/zh
Application granted granted Critical
Publication of CN105308974B publication Critical patent/CN105308974B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25816Management of client data involving client authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Time-Division Multiplex Systems (AREA)

Abstract

本申请的目标是提高技巧再现的速度。传输的是传输流,在所述传输流中,连续布置第一传输数据包,每个第一传输数据包是在高层内具有多路复用的传送数据包的多层数据包。在传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包都具有插入其报头的识别信息,并且也具有包括用于随机接入点开始的接入单元的初始字节的数据的多路复用传送数据包。此外,在传输流中,在相应的特定的第一传输数据包之后布置的第二传输数据包,每个第二传输数据包具有插入其报头的识别信息,并且也具有对应于当下前一个和当下随后的特定的第一传输数据包的接入位置信息。

Description

传输装置、传输方法、再现装置、再现方法以及接收装置
技术领域
本技术涉及一种传输装置、一种传输方法、一种再现装置、一种再现方法以及一种接收装置,更具体地,涉及一种传输装置等,其传输连续布置传输数据包的传输流。
背景技术
在IP数据包上提供服务流时,具有以下情况,提供封装层(capsule layer),作为在调制传输信道的物理层与包格式化数据的IP数据包层之间的界面(例如,参照专利文档1)。在相关技术中,假设在时间管理或文件下载上没有限制的数据适合作为包含在封装层内的信息。
引用列表
专利文档
专利文档1:日本专利申请公开号2012-015875
发明内容
本发明要解决的问题
在提供共享使用广播波的服务和IP分布服务的服务的情况下,除了文件下载的传统使用以外,还可以考虑通过封装层(capsule layer,胶囊层)传输实时服务,其中,将广播波的服务数据包载入IP数据包内,并且引入封装层,用于使用广播波传输IP数据包。由于封装层被配置为没有固定长度,但是具有可变长度,所以上层的传输目标可以有效地传输。例如,在视频或音频的情况下,执行通过一个接入单元或更大的尺寸封装。
在技巧再现(例如,快进再现或快退再现)时,分析具有可变长度的胶囊、分析多路复用的传送、以及解码压缩数据,以便到达显示处理。在这种情况下,为了高速执行技巧再现,需要分析可变长度的数据包,其通过快速的方式在多层之上扩展。
例如,类型长度值(TLV)被视为封装层。在这种情况下,基于插入传输帧内的TMCC,TLV的开始可以检测,作为传输时隙的偏移位置。然后,执行IP/UDP和IP/TCP进行分析,并且分析传送数据包的有效载荷,因此,最后可以获取显示为技巧再现的随机接入点(RAP)的图片的存在。
本技术的一个目标在于,提高技巧再现的速度。
问题的解决方案
本技术的一个概念在于:
一种传输装置,包括:
传输单元,传输传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包,
其中,在传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包,并且具有插入识别信息的报头,以及在特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
在本技术中,传输传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包。在传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头。此外,在传输流中,在特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
例如,第一传输数据包可以是通过封装具有包括多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,并且第二传输数据包可以是通过封装接入位置信息所获得的封装层的数据包。在这种情况下,例如,封装层的数据包可以是TLV数据包或GSE数据包。
此外,例如,第一传输数据包可以是具有包括多路复用的传送数据包的有效载荷的IP数据包,并且,第二传输数据包可以是包括接入位置信息的IP数据包。而且,例如,多路复用的传送数据包可以是MMT数据包、RTP数据包或FLUTE数据包。
如上所述,在本技术中,在传输流中,特定的第一传输数据包以预定的间隔布置为可识别,并且在特定的第一传输数据包之后,布置包括接入位置信息的第二传输数据包。为此,在接收侧,在存储介质内储存这个传输流之后,在技巧再现(例如,快进再现或快退再现)中,可以有效地获取技巧再现所需要的随机接入点的接入单元的数据,并且可以高速执行技巧再现。
此外,本技术的另一个概念在于:
一种再现装置,包括:
获取单元,通过接入本地连接的存储介质或通信网络连接的服务器获取传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由获取单元获取的传输流,来获取再现数据;以及
接入控制单元,基于从所获取的传输流中提取的特定的第一传输数据包的识别信息和包含在第二传输数据包中的接入位置信息,控制获取单元接入存储介质或服务器,
其中,在传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,并且在特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
在本技术中,获取单元通过接入连接的存储介质或服务器,获取传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包。而且,处理单元通过处理由获取单元获取的传输流,获取再现数据。
在这个传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头。而且,在传输流中,在特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
例如,可以配置为使第一传输数据包是通过封装具有包括多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,并且第二传输数据包是通过封装接入位置信息所获得的封装层的数据包。在这种情况下,封装层的数据包可以是TLV数据包或GSE数据包。
此外,例如,可以配置为使第一传输数据包是具有包括多路复用的传送数据包的有效载荷的IP数据包,并且,第二传输数据包是包括接入位置信息的IP数据包。而且例如,多路复用的传送数据包可以是MMT数据包、RTP数据包或FLUTE数据包。
由接入控制单元,基于从所获取的传输流中提取的第一特定的第一传输数据包的识别信息以及包含在第二传输数据包内的接入位置信息,控制获取单元接入存储介质或服务器。
为此,根据本技术,在技巧再现(例如,快进再现或快退再现)中,可以有效地获取技巧再现所需要的随机接入点的接入单元的数据,并且可以高速执行技巧再现。
此外,本技术的一个概念在于:
一种接收装置,包括:
接收单元,接收传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由接收单元获取的传输流,来获取接收数据,
其中,在传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
本发明的技术效果
根据本技术,实现提高技巧再现的速度。在此处,在本说明书中描述的有利效应仅仅是示例,而非用于限制的目的,并且可以获取额外效应。
附图说明
图1是示出根据一个实施方式的显示系统的配置的一个示例的方框图;
图2是示出传输协议栈的示图;
图3是示出在传输帧内的TMCC信息的结构的一个示例的示图;
图4(a)和图4(b)是示出在传输帧内的TMCC信息的结构的一个示例的主要内容的示图;
图5是示出在传输帧内的每个时隙的数据区域内容纳TLV数据包的一个示例的示图;
图6(a)和图6(b)是示出TLV数据包的布置与每个传输帧的开始不同步的一个示例以及该布置与每个传输帧的开始同步的一个示例的示图;
图7是示出传输协议栈的数据包配置的示意图;
图8是示出具有树形式的MMT数据包的配置的示图;
图9是示出MMT数据包的类型的示图;
图10是示出MMT有效载荷报头(mmtp_payload_header())的结构的一个示例的示图;
图11是示出传输包含在MMT有效载荷报头(MPU有效载荷报头)内的时间信息的情况的MMT有效载荷报头扩展的结构的一个示例的示图;
图12是示出TLV数据包(TLV packet())的结构的一个示例的示图;
图13是示出TLV数据包的一个更详细的结构的一个示例的示图;
图14是示出用于识别插入TLV数据包的报头内的数据包是否是要通过高优先级处理的数据包的识别信息的示图;
图15是示出TLV数据包的数据包类型的示图;
图16是示出布置在TLV数据包的有效载荷内的信令数据包的结构的一个示例的示图;
图17是示出信令数据包的结构的示例的主要信息的内容的示图;
图18(a)到图18(c)是示出由广播站传输的传输流(TLV数据包流)的示图;
图19(a)到图19(c)是示意性示出各种TLV数据包的结构的示图;
图20是示出在广播站内的广播波的传输系统的一个示例的示图;
图21是示出互联网协议(IP)报头的结构的一个示例的示图;
图22是示出IP报头的结构的示例的主要信息的内容的示图;
图23是示出包含在IP报头内部的“选项(Options)”的结构的一个示例的示图;
图24是示出包含在IP报头内部的“选项”的结构的示例的主要信息的内容的示图;
图25是示出在包含在IP报头内部的“选项”中定义的优先级数据包识别信息的示图;
图26是示出在包含在IP报头内部的“选项”中定义的接入位置信息及其优先级数据包识别信息的示图;
图27(a)到图27(c)是示出由分发服务器传输的传输流(IP数据包流)的示图;
图28是示出在接收器内的广播波的接收系统的一个示例的示图;
图29是示出在频道之间执行切换时(在执行随机接入时)的显示延迟的示图;
图30是示出从正常再现模式过渡到技巧再现(快进再现或快退再现)模式的情况的接收器的处理的一个示例的流程图;
图31是示出上层分析例程的处理的一个示例的流程图;
图32是示出从正常再现模式过渡到技巧再现(快进再现或快退再现)模式的情况的接收器的处理的一个示例的流程图。
具体实施方式
在后文中,描述本发明的实施方式(在后文中称为“实施方式”)。按照以下顺序显示描述。
1、实施方式
2、修改示例
<1、实施方式>
【显示系统的配置示例】
图1示出了显示系统10的配置的一个示例。在这个显示系统10中,广播站110和分发服务器120布置在传输侧上,并且接收器20布置在接收侧上。
广播站110将连续布置作为传输数据包的类型长度值(TLV)数据包的传输流载入广播波内,并且通过RF传输信道给接收侧传输广播波。TLV数据包是具有多层配置的数据包,其在上层包括多路复用的传送数据包以及媒体数据,例如,视频和音频数据,并且TLV数据包是在有效载荷内包含多路复用的传送数据包的IP数据包或者通过封装传输控制信号(TLV-NIT、AMT)所获得的封装层的数据包。
图2示出了传输协议栈。传输信道调制层存在于底部。传输时隙存在于这个传输信道调制层上,TLV数据包存在于传输时隙内,并且IP数据包存在于TLV数据包上。包含视频、音频以及控制系统数据的多路复用的传送数据包通过未显示的UDP数据包或TCP数据包存在于IP数据包上。
在一个传输帧内,根据调制系统,包含最多120个传输时隙。将传输和多路复用配置控制(TMCC)信息加入每个传输时隙中。这个TMCC信息由涉及传输控制的信息构成,例如,给每个传输时隙分配传输流以及与传输系统的关系。包括表示在传输时隙内的TLV数据包的位置的指针信息,作为一个这种TMCC信息。参照这种指针信息,可以从TLV数据包的开头开始,正确地分析。
用于传输TMCC信息的区域由每个传输帧的9,422位配置。在进行传输系统等的切换时,TMCC信息比实际的切换时间早两个帧,并且在切换之后传输信息。例如,TMCC信息的最小更新间隔布置为一个帧。图3是示出在传输帧内的TMCC信息的结构的一个示例(语法)的示图。
在高级宽带卫星数字广播系统中,一个卫星转发器可以传输最多16个流。在“相对流/时隙信息”中,给每个时隙分配从0到15的相对流数量,并且具有相同的相对流数量的时隙的数据表示一个流。
此外,在“相对流/传输流ID信息”中,给具有在从0到15的范围内的相对流数量的每个相对流分配传输流ID。例如,在相对流是MPEG2-TS的情况下,假设传输流ID是“TS_ID”。另一方面,在相对流是TLV的情况下,假设传输流ID是“TLV流ID”。此外,如在图4(a)中所示,“相对流/流类型信息”表示每个相对流数量的流类型。例如,如在图4(b)中所示,“0×01”表示MPEG2-S,而“0×02”表示TLV。
此外,“指针/时隙信息”由每个时隙的顶部指针和最后的指针配置,并且主要用于数据包同步和数据包失效。图5示出了在每个时隙的数据区域内容纳TLV数据包的一个示例。顶部指针表示在容纳在每个时隙内的数据包之中的第一数据包的第一字节的位置。最后的指针表示在容纳在每个时隙内的数据包之中的“最终数据包的最终字节的位置+1”。
在顶部指针“0×FFFF”的情况下,表示没有在时隙内的第一TLV数据包的第一字节。这表示在时隙内的第一TLV数据包从前一个时隙继续。此外,在最后一个指针“0×FFFF”的情况下,表示没有在时隙内的最终TLV数据包的最终字节。这表示在时隙内的最后TLV数据包继续进入下一个时隙。
图6(a)表示TLV数据包的布置与每个传输帧的开始不同步的一个示例。在传输帧中独特地确定每个时隙的开始。TLV数据包独立于时隙存在。在TLV数据包在多个传输帧之上继续的情况下,具有分成两个传输帧的TLV数据包。
图6(b)表示TLV数据包的布置与每个传输帧的开始同步的一个示例。在传输帧内独特地确定每个时隙的开始。虽然每个TLV数据包不必与时隙同步,但是传输帧的开始对应于TLV数据包的开始。换言之,每个传输帧的第一时隙(时隙1)的开始对应于TLV数据包的开始。
在图6(b)的情况下,通常在传输帧的端部生成无效(空)区域,并且与在图6(a)中显示的情况相比,传输效率降低。为了简化示图,在图中显示的示例中,表示在每个传输帧内具有三个时隙。实际上,如上所述,根据调制系统,允许包含最多120个时隙。
图7示意性示出了传输协议栈的数据包配置。传输时隙由时隙报头和传输时隙数据构成。在传输时隙数据中,包含TLV数据包。TLV数据包由报头和数据构成,并且包括IP数据包或传输控制数据,作为该数据。传输控制数据是“TLV-NIT”或“AMT”。“TLV-NIT”是调制频率或与广播的另一个节目相关联的信息。“AMT”是与广播服务相关的IP地址。
IP数据包由作为数据的IP报头以及UDP数据包或TCP数据包构成。在此处,UDP数据包由UDP报头和数据构成,而TCP数据包由TCP报头和数据构成。包含多路复用的传送数据包,作为UDP数据包或TCP数据包的数据。这个多路复用的传送数据包由数据包报头、有效载荷报头以及传送报头构成。
包含传输媒体的编码流的预定数量的接入单元(例如,视频或音频),作为多路复用的传送数据包的传送数据。在视频的情况下,1个接入单元表示1个图片数据。在音频的情况下,1个接入单元表示由预定数量(例如,1,024个样本)的样本的成团数据获取的音频的接入单元。在编码流内,具有变成随机接入点的帧内图片的编码数据。对于随机接入,首先解码帧内图片的编码数据。
在这个实施方式中,假设多路复用的传送数据包是具有MPEG媒体传输(MMT)结构(参照ISO/IEC CD 23008-1)的传送数据包,换言之,MMT数据包。图8是示出具有树形式的MMT数据包的配置的示图。
MMT数据包由MMT数据包报头、MMT有效载荷报头以及MMT有效载荷构成。在MMT有效载荷内,包含消息、媒体处理单元(MPU)、FEC修复符号等,并且根据包含在MMT有效载荷报头内的有效载荷类型(payload_type),执行这种信令。
在此处,消息配置关于传输媒体的信息。各种类型的消息内容通过表格形式插入这个消息内。MPU可以分片并且细分成MMT片单元(MFU)。在这种情况下,将MFU报头加入每个MFU的开始中。在包含在MMT有效载荷内的MPU内,具有与媒体数据(例如,视频、音频以及副标题)相关联的MPU以及与元数据相关联的MPU。由在MMT数据包报头内存在的数据包ID(Packet_ID),可识别包含每个MPU的MMT数据包。
图9示出了MMT数据包的类型。在图中显示的示例中,MMT数据包基于插入有效载荷内的数据或信息的分类。在此处,传送消息信息是在有效载荷内包含消息(关于传输媒体的信息)的MMT数据包。传送元数据包是在有效载荷内包含元数据的MMT数据包。在此处,例如,元数据是MMT文件(MP4文件)内的每个方框“styp”、“sidx”、“mmpu”、“moov”以及“moof”的数据。传送媒体数据包是在有效载荷内包含媒体数据(例如,视频、音频以及副标题)的MMT数据包。
在MMT有效载荷报头内,布置标志信息,表示在MMT有效载荷内是否具有变成随机接入点的帧内图片的编码数据。图10示出了MMT有效载荷报头(mmtp_payload_header())的结构的一个示例(语法)。
虽然在本文中未详细描述,但是在这个MMT有效载荷报头内,包含有效载荷长度(payload_length)、有效载荷类型(payload_type)、片类型(fragment_type)、片计数(fragment_count)、聚合信息标志(aggregation_info_flag)、RAP标志(random_access_point_flag)、数据偏移(data_offset)、数据单位数目(numDU)、数据单位偏移(DU_offset)、有效载荷序数(payload_seq_number)、报头扩展字段标志(header_extension_field_flag)等。
此外,在报头扩展字段标志是“1”时,在这个MMT有效载荷报头内,进一步包含MMT有效载荷报头扩展(mmtp_payload_header_extension())。图11示出了这种情况的MMT有效载荷报头扩展的语法的一个示例(语法)。结构的这个示例对应于传输包含在MMT有效载荷报头内的时间信息(定时信息)的情况。
“payload_header_extension_type”的16位字段表示MMT有效载荷报头扩展的类型。例如,“0×01”表示供应具有NTP短时间格式的显示时间戳(显示时间)。“0×02”表示供应具有NTP短时间格式的显示时间戳以及解码时间戳(解码时间)。“0×03”表示供应具有90KHz精确度的显示时间戳。“0×04”表示供应具有90KHz的显示时间戳以及解码时间戳。
“payload_header_extension_length”的16位字段表示MMT有效载荷报头扩展的尺寸。“presentation_timestamp”的32位字段表示显示时间戳(显示时间)的值。“decoding_timestamp”的32位字段表示解码时间戳(解码时间)的值。
在这个实施方式中,在广播站110中,在TLV数据包内,插入用于识别该数据包是否是通过高优先级处理的数据包的识别信息,并且插入用于识别该数据包是否是包括接入位置信息的数据包的识别信息。在这个意义上,广播站110配置信息插入单元,其插入识别信息。图12示出了TLV数据包(TLV数据包())的结构的一个示例(语法)。这个TLV数据包由32位TLV报头(TLV_header)以及具有可变长度的TLV有效载荷(TLV_payload)构成。
图13示出了TLV数据包(TLV数据包())的一个更详细的结构的一个示例(语法)。32位TLV报头(TLV_header)由“01”的2位字段、“non_priority_bit1”的1位字段、“non_priority_bit2”的1位字段、“non_priority_bit3”的1位字段、“reserved_future_use”的3位字段、“packet_type”的8位字段、以及“length”的16位字段构成。
表示数据包是否是优先级TLV type1数据包的标志信息最近定义为“non_priority_bit1”的1位字段。如图14中所示,“1”表示数据包是非优先级TLV数据包,换言之,数据包不包含随机接入点的接入单元的第一字节(第一个字节)开始的数据。另一方面,“0”表示数据包是优先级TLV type1数据包,换言之,数据包包含随机接入点的接入单元的第一字节(第一个字节)开始的数据。
表示数据包是否是优先级TLV type2数据包的标志信息最近定义为“non_priority_bit2”的1位字段。如图14中所示,“1”表示数据包是非优先级TLV数据包,换言之,数据包不包含定时信息或在显示随机接入点时的属性信息的起始部分。另一方面,“0”表示数据包是优先级TLV type2数据包,换言之,数据包包含定时信息或在显示随机接入点时的属性信息的起始部分。
表示数据包是否是优先级TLV type3数据包的标志信息最近定义为“non_priority_bit3”的1位字段。如图14中所示,“1”表示数据包是非优先级TLV数据包,换言之,数据包不包含朝着优先级TLV数据包的字节偏移值。另一方面,“0”表示数据包是优先级TLVtype3数据包,换言之,数据包包含朝着优先级TLV数据包的字节偏移值。
布置为优先级TLV数据包的TLV数据包不仅仅针对包括传送媒体数据包的TLV数据包,作为包含视频、音频或其他媒体数据的MMT数据包。包括包含传送消息信息的MMT数据包或传输元数据数据包的TLV数据包必要时也布置为优先级TLV数据包。
此外,布置为优先级TLV数据包的TLV数据包不仅仅具有包括传送媒体数据包的TLV数据包,该传送媒体数据包是包括作为目标的媒体数据(例如,视频和音频)的MMT数据包。包括传送媒体数据包的TLV数据包或者传送媒体数据包的MMT数据包必要时也布置为优先级TLV数据包。
返回图13,“packet_type”的8位字段表示TLV数据包的数据包类型(参照图15)。“0×01”表示数据包包含IPv4数据包。“0×02”表示数据包包含IPv6数据包。“0×03”表示数据包包含报头压缩的IP数据包。“0×FF”表示数据包包含传输控制信息。“0×FE”表示数据包是空数据包。“length”的16位字段表示在TLV报头(TLV_header)之后的可变长度的TLV有效载荷(TLV_payload)的尺寸。
布置为“non_priority_bit1=0”、“non_priority_bit2=1”以及“non_priority_bit3=1”的TLV数据包是通过封装在有效载荷内包括传送媒体数据包(参照图9)的IP数据包所获得的数据包,并且“packet_type”是“0x01”、“0x02”或“0x03”。而且,在“packet_type”是“0x01”、“0x02”或“0x03”的TLV数据包中,在其内不包括随机接入点的接入单元的第一字节开始的数据的情况下,设置位以使“non_priority_bit1=0”、“non_priority_bit2=1”以及“non_priority_bit3=1”。
设置为“non_priority_bit1=1”、“non_priority_bit2=0”以及“non_priority_bit3=1”的TLV数据包是通过封装在有效载荷内包括传送消息信息或传送媒体数据包(参照图9)的IP数据包所获得的数据包,并且“packet_type”是“0x01”、“0x02”或“0x03”。
设置为“non_priority_bit1=1”、“non_priority_bit2=1”以及“non_priority_bit3=0”的TLV数据包是通过封装作为传输控制信号的接入位置信息所获得的数据包,并且“packet_type”是“0xFE”。在这种情况下,在TLV数据包的有效载荷内,布置信令数据包(signaling_packet)。图16示出了信令数据包的结构的一个示例(语法)。图17示出了结构的示例的主要信息的内容(语义)。例如,这种结构是与传输控制信号TLV_NIT匹配的结构。
“Pointer_previous TLV_priority packet”的16位字段表示朝着前一个优先级数据包(反面)的字节偏移值。此外,“Pointer_next TLV_priority packet”的16位字段表示朝着下一个优先级数据包(前面)的字节偏移值。
在此处,优先级数据包是设置为使“non_priority_bit1=0”的TLV数据包或者设置为使“non_priority_bit2=0”的TLV数据包。在设置为使“non_priority_bit1=0”的TLV数据包独立存在的情况下,字节偏移值是朝着这个TLV数据包的字节偏移值。另一方面,在设置为使“non_priority_bit2=0”的TLV数据包并且设置为使“non_priority_bit1=0”的TLV数据包按照这个顺序连续存在的情况下,字节偏移值是朝着设置为使“non_priority_bit2=0”的TLV数据包的字节偏移值。
在由广播站110传输的传输流(TLV数据包流)内,如图18(a)中所示,以预定的间隔布置均包括MMT数据包的TLV数据包(PCT PRO 1),MMT数据包包括布置随机接入点的接入单元的第一字节的数据。图19(a)示意性示出了这种TLV数据包(PCT PRO 1)的结构。
在这个TLV数据包(PCT PRO 1)中,“non_priority_bit1”设置为“0”,并且“non_priority_bit2”和“non_priority_bit3”均设置为“1”。此外,这个TLV数据包(PCT PRO 1)是通过封装在有效载荷内包括传送媒体数据包(参照图9)的IP数据包所获得的数据包,并且“packet_type”是“0x01”、“0x02”或“0x03”。
此外,如图18(a)中所示,直接在TLV数据包(PCT PRO 1)之前,具有存在TLV数据包(PCT PRO 2)的情况。虽然在图中未显示,但是在这个TLV数据包(PCT PRO 2)中,“non_priority_bit2”设置为“0”,并且“non_priority_bit1”和“non_priority_bit3”均设置为“1”。此外,这个TLV数据包(PCT PRO 2)是通过封装在有效载荷内包括传送消息信息或传送媒体数据包(参照图9)的IP数据包所获得的数据包,并且“packet_type”是“0x01”、“0x02”或“0x03”。
此外,如图18(a)中所示,直接在TLV数据包(PCT PRO 1)之后,具有TLV数据包(PCTPRO 3)。图19(b)示意性示出了这种TLV数据包(PCT PRO 3)的结构。在这个TLV数据包(PCTPRO 3)中,“non_priority_bit3”设置为“0”,并且“non_priority_bit1”和“non_priority_bit2”均设置为“1”。此外,这个TLV数据包(PCT PRO 3)是通过封装作为传输控制信号的接入位置信息所获得的数据包,并且“packet_type”是“0xFE”。
在这个TLV数据包(PCT PRO 3)的有效载荷中,包括信令数据包(信令数据包)(参照图16),其包括“Pointer_previous TLV_priority packet”和“Pointer_next TLV_priority packet”。如上所述,“Pointer_previous TLV_priority packet”表示朝着前一个优先级数据包(反面)的字节偏移值,并且“Pointer_next TLV_priority packet”表示朝着下一个优先级数据包(前面)的字节偏移值。
此外,虽然这个TLV数据包是通过封装在有效载荷内包括传送媒体数据包(参照图9)的IP数据包所获得的数据包,但是显然,具有TLV数据包不包括随机接入点的接入单元的第一字节开始的数据的情况。在图18(a)中,这个TLV数据包简单地表示为“PCT”。图19(c)示意性示出了这种TLV数据包(PCT)的结构。
在这个TLV数据包(PCT)中,“non_priority_bit1”、“non_priority_bit2”以及“non_priority_bit3”均设置为“1”。此外,这个TLV数据包(PCT)是通过封装在有效载荷内包括传送媒体数据包(参照图9)的IP数据包所获得的数据包,并且与TLV数据包(PCT PRO1)一样,“packet_type”是“0x01”、“0x02”或“0x03”。
通过这种方式,在由广播站110传输的传输流中,TLV数据包(PCT PRO 1)布置为以预定的间隔可识别,并且包括接入位置信息的TLV数据包(PCT PRO 3)布置在每个TLV数据包(PCT PRO 1)之后。为此,在接收侧,在存储介质内储存这个传输流之后,在技巧再现(例如,快进再现或快退再现)中,可以有效地获取技巧再现所需要的随机接入点的接入单元的数据,并且可以高速执行技巧再现。
图18(b)示出了对应于在图18(a)中显示的传输流的快进再现的概述。在这种情况下,基于快进再现的用户指令,首先,从存储介质中依次提取的TLV数据包中,例如,基于识别信息找出周期T1的TLV数据包(PCT PRO 2)、TLV数据包(PCT PRO 1)以及TLV数据包(PCTPRO3)的数据包组中的第一个TLV数据包(PCT PRO 2)。对于这个TLV数据包(PCT PRO 2),依次执行报头分析,直到上层,并且获取用于解码媒体数据等所需要的信息。
接下来,从存储介质提取TLV数据包(PCT PRO 1),依次执行报头分析,直到上层,并且将媒体编码的数据解码,据此,获取包括随机接入点的接入单元的第一字节的数据的媒体数据(视频和音频的数据)。接下来,从存储介质提取TLV数据包(PCT PRO 3),并且获取接入位置信息(朝着前一个优先级数据包的字节偏移值以及朝着下一个优先级数据包的字节偏移值)。
随后,在获取对应于所需要的数量的接入单元的数据之前,从存储介质依次提取TLV数据包(PCT),依次执行报头分析,直到上层,并且将媒体编码的数据解码。在此处,对应于所需要的数量的接入单元可以由仅仅随机接入点的I图片的接入单元配置,或者可以进一步包括在这些接入单元之后的B图片或P图片的接入单元。虽然接入单元的数量由再现应用确定,但是与快进再现的速度相关。
接下来,基于从TLV数据包(PCT PRO 3)中获取的接入位置信息(朝着下一个优先级数据包的字节偏移值),从存储介质中提取周期T2的TLV数据包(PCT PRO 1)和TLV数据包(PCT PRO 3)的数据包组中的第一个TLV数据包(PCT PRO 1)。然后,对于这个TLV数据包(PCT PRO 1),依次执行报头分析,直到上层,并且将媒体编码的数据解码,据此,获取包括随机接入点的接入单元的第一字节的数据的媒体数据(视频和音频的数据)。
接下来,从存储介质提取TLV数据包(PCT PRO 3),并且获取接入位置信息(朝着前一个优先级数据包的字节偏移值以及朝着下一个优先级数据包的字节偏移值)。随后,在获取对应于所需要的数量的接入单元的数据之前,从存储介质依次提取TLV数据包(PCT),依次执行报头分析,直到上层,并且将媒体编码的数据解码。
接下来,基于从TLV数据包(PCT PRO 3)中获取的接入位置信息(朝着下一个优先级数据包的字节偏移值),从存储介质中提取周期T3的TLV数据包(PCT PRO 2)、TLV数据包(PCT PRO 1)以及TLV数据包(PCT PRO 3)的数据包组中的第一个TLV数据包(PCT PRO 2)。然后,同样重复该处理,据此,执行快进再现。
图18(c)示出了对应于在图18(a)中显示的传输流的快退再现的概述。在这种情况下,基于快退再现的用户指令,首先,从存储介质中依次提取的TLV数据包中,例如,基于识别信息找出周期T3的TLV数据包(PCT PRO 2)、TLV数据包(PCT PRO 1)以及TLV数据包(PCTPRO3)的数据包组中的第一个TLV数据包(PCT PRO 2)。对于这个TLV数据包(PCT PRO 2),依次执行报头分析,直到上层,并且获取用于解码媒体数据等所需要的信息。
接下来,从存储介质提取TLV数据包(PCT PRO 1),依次执行报头分析,直到上层,并且将媒体编码的数据解码,据此,获取包括随机接入点的接入单元的第一字节的数据的媒体数据(视频和音频的数据)。接下来,从存储介质提取TLV数据包(PCT PRO 3),并且获取接入位置信息(朝着前一个优先级数据包的字节偏移值以及朝着下一个优先级数据包的字节偏移值)。随后,在获取对应于所需要的数量的接入单元的数据之前,从存储介质依次提取TLV数据包(PCT),依次执行报头分析,直到上层,并且将媒体编码的数据解码。
接下来,基于从TLV数据包(PCT PRO 3)中获取的接入位置信息(朝着前一个优先级数据包的字节偏移值),从存储介质中提取周期T2的TLV数据包(PCT PRO 1)和TLV数据包(PCT PRO 3)的数据包组中的第一个TLV数据包(PCT PRO 1)。然后,对于这个TLV数据包(PCT PRO 1),依次执行报头分析,直到上层,并且将媒体编码的数据解码,据此,获取包括随机接入点的接入单元的第一字节的数据的媒体数据(视频和音频的数据)。
接下来,从存储介质提取TLV数据包(PCT PRO 3),并且获取接入位置信息(朝着前一个优先级数据包的字节偏移值以及朝着下一个优先级数据包的字节偏移值)。随后,在获取对应于所需要的数量的接入单元的数据之前,从存储介质依次提取TLV数据包(PCT),依次执行报头分析,直到上层,并且将媒体编码的数据解码。
接下来,基于从TLV数据包(PCT PRO 3)中获取的接入位置信息(朝着前一个优先级数据包的字节偏移值),从存储介质中提取周期T1的TLV数据包(PCT PRO 2)、TLV数据包(PCT PRO 1)以及TLV数据包(PCT PRO 3)的数据包组中的第一个TLV数据包(PCT PRO 2)。然后,同样重复该处理,据此,执行快退再现。此外,在这个反向再现中,虽然在每个周期内获取在正向的预定数量的接入单元的数据,但是在显示时,在反向上对准和使用接入单元的数据。
图20是示出在广播站110内的广播波的传输系统111的一个示例的示图。传输系统111包括编码器单元112、多路复用器单元113、成帧单元114、以及调制器/发射单元115。编码器单元112将媒体数据(例如,视频和音频)编码,从而获得编码的数据。例如,对于视频数据,执行编码,例如,MPEG4-AVC或高效视频编码(HEVC)等。
此外,编码器单元112将视频、音频等的编码数据包格式化,从而生成每个媒体的多路复用的传送数据包。如上所述,例如,在这个实施方式中,假设多路复用的传送数据包是MMT数据包。此外,如上所述,在实际上传输的MMT数据包中,除了在有效载荷内包括媒体数据(例如,视频和音频)的传送媒体数据包以外,还具有传送消息信息和传输元数据数据包(参照图9)。
而且,编码器单元112将多路复用的传送数据包包格式化为UDP或TCP,并且在其中加入IP报头,从而生成包含多路复用的传送数据包的IP数据包。编码器单元112将每个IP数据包传输给多路复用器单元113。多路复用器单元113多路复用这种IP数据包。
此外,多路复用器单元113根据包含视频、音频等的编码数据的IP数据包,确定是否包含配置随机接入点的接入单元(帧内图片)的第一字节的数据。交替地,在从编码器单元112中供应包含视频、音频等的编码数据的IP数据包时,如在图中的虚线所示,同时给多路复用器单元113供应配置随机接入点的接入单元(帧内图片)的信息。
而且,多路复用器单元113将IP数据包的多路复用流供应给成帧单元114。此时,如在图中的虚线所示,对应于包含视频、音频等的编码数据的IP数据包的供应,多路复用器单元113也给成帧单元114供应信息,表示是否包含配置随机接入点的接入单元(帧内图片)的第一字节的数据。
成帧单元114生成通过封装多路复用的IP数据包所获取的TLV数据包。此外,成帧单元114生成通过封装传输控制信号(TLV-NIT、AMT)所获取的TLV数据包。在执行封装处理时,成帧单元114布置包含在TLV报头内的优先级数据包识别信息,换言之,设置“non_priority_bit1”的1位字段、“non_priority_bit2”的1位字段以及“non_priority_bit3”的1位字段(图13和14)。
在TLV数据包内包含随机接入点的接入单元的第一字节开始的数据时,成帧单元114将“non_priority_bit1”的1位字段设置为“0”,以便显示优先级TLV type1数据包。此外,在包含定时信息或在显示随机接入点时的属性信息的起始部分时,成帧单元114进一步将“non_priority_bit2”的1位字段设置为“0”,以便显示优先级TLV type2数据包。而且,在包含朝着优先级TLV数据包的字节偏移值时,成帧单元114将“non_priority_bit3”的1位字段设置为“0”,以便显示优先级TLV type3数据包。
此外,成帧单元114执行成帧处理,其中,在传输帧的时隙内储存每个TLV数据包。成帧单元114将所生成的传输帧供应给调制器/发射单元115。调制器/发射单元115执行传输帧的RF调制处理,以便产生广播波,并且通过RF传输信道,将广播波传输给接收侧。
返回图1,例如,分发服务器120通过多播通过通信网络300将传输流分布给接收侧,其中,连续布置IP数据包,作为均包含由上述广播站10处理的MMT数据包的传输数据包。交替地,基于从接收侧中接收的再现命令,分发服务器120根据再现模式通过通信网络300将传输流传输给接收侧,作为视频点播服务,在传输流中,连续布置预定的IP数据包,作为均包括MMT数据包的传输数据包。在再现模式中,除了普通再现模式以外,还包括技巧再现,例如,快进再现和快退再现。
在这个实施方式中,在作为储存在分发服务器120内的传输数据包的IP数据包内,插入用于识别该数据包是否是通过高优先级处理的数据包的识别信息,并且插入用于识别该数据包是否是包括接入位置信息的数据包的识别信息。图21示出了互联网协议(IP)报头的结构的一个示例(语法)。图22示出了该结构的示例的主要信息的内容(语义)。
“Version”的4位字段表示IP报头的版本。“IHL=Hdr Len”的4位字段表示以32位为单位的IP报头的长度。在没有选项的情况下,IP报头的长度是20个字节。“TOS/DSCP/ECN”的8位字段是服务型字段。“Total Length”的16位字段表示在多个字节中的IP数据包的总长度。
“Flags”的3位字段的第一位不使用。第二位表示是否允许分片。此外,在分片的情况下,第三位表示片在原始的IP数据包的中间还是在末端。在IP数据包分片的情况下,“Fragment Offset”的3位字段表示指示片序列的位置。
“Time To Live”的8位字段表示在IP数据包可以存在于互联网的期间中的最大时间段。其目的在于阻止没有找到目的地的IP数据包继续在网络上循环。“Protocol”的8位字段是用于识别高位协议的标识符。例如,“1”表示“ICMP”,“2”表示“IGMP”,“3”表示“TCP”,“17”表示“UDP”,“41”表示“IPv6”,并且“89”表示“OSPF”。
“Header Checksum”的16位字段是用于核查IP报头的CRC。“Source Address”的32位字段表示传输源IP地址。“Destination Address”的32位字段表示目的地IP服务。
图23示出了“选项”的结构的一个示例(语法)。图24示出了结构的示例的主要信息的内容(语义)。“type_copy”的1位字段表示在“type_copy”具有值“1”时在第一片内执行复制。在“type_copy”具有值“0”时,表示在所有片内执行复制。“type_copy”表示应用目标的类型。“type_number”的5位字段表示类型数量。例如,“01111”最近定义为类型数量,表示媒体接入优先级信息。此外,例如,“01110”最近定义为类型数量,表示媒体接入偏移位置。“length”的8位字段表示在多个字节中在其后的尺寸。
例如,如图25中所示,通过布置“type_number=‘01111’”以及“length=2”,例如,定义用于识别是否包括随机接入点的接入单元的第一字节的信息等。此时,在2个字节的“信息”中,“0×0001”表示包括随机接入点的接入单元的第一字节(第一字节)。另一方面,“0×0002”表示在显示包括时间信息或在显示随机接入时的属性信息的开始部分。此外,“0×0000”表示包括其他信息。
如图26中所示,通过布置“type_number='01110'”以及“length=4”,例如,定义用于为特殊再现供应随机接入点或数据包位置的信息。此时,在4个字节的“信息”中,在“媒体接入偏移位置向前(16位)”之后,传输“媒体接入偏移位置向后(16位)”。
在此处,与包含在上述信令数据包(信令)(参照图16)内的“Pointer_previousTLV_priority packet”的16位字段相似,“媒体接入偏移位置向后(16位)”表示朝着前一个优先级数据包(反面)的字节偏移值。此外,与包含在上述信令数据包内的“Pointer_nextTLV_priority packet”的16位字段相似,“媒体接入偏移位置向前(16位)”表示朝着下一个优先级数据包(前面)的字节偏移值。
在由分发服务器传输的传输流(IP数据包流)内,如图27(a)中所示,以预定的间隔布置均包括传送媒体数据包(参照图9)的IP数据包(PCT PRO 1),IP数据包包括随机接入点的接入单元的第一字节开始的数据。在这个IP数据包(PCT PRO 1)内,通过布置“type_number='01111'”以及“length=2”,将两个字节的“information”布置为“0x0001”。
此外,如图27(a)中所示,直接在IP数据包(PCT PRO 1)之前,具有存在IP数据包(PCT PRO 2)的情况。这个IP数据包(PCT PRO 2)是包括传送消息信息或传送媒体数据包(参照图9)的IP数据包。布置这个IP数据包(PCT PRO 2),以便“type_number='01111'”以及“length=2”,并且两个字节的“information”是“0x0001”。
如图27(a)中所示,直接在IP数据包(PCT PRO 1)之后,具有IP数据包(PCT PRO3)。这个IP数据包(PCT PRO 3)是包括接入位置信息的IP数据包。在这个IP数据包(PCT PRO2)中,“type_number='01110'”以及“length=4”,并且在4个字节的“信息”中,布置“媒体接入偏移位置向前(16位)”和“媒体接入偏移位置向后(16位)”。
此外,虽然IP数据包是有效载荷内包括传送媒体数据包(参照图9)的IP数据包,但是显然,具有IP数据包不包括随机接入点的接入单元的第一字节开始的数据的情况。在图27(a)中,这个IP数据包简单地表示为“PCT”。
通过这种方式,在由分发服务器120传输的传输流中,IP数据包(PCT PRO 1)布置为以预定的间隔可识别,并且包括接入位置信息的IP数据包(PCT PRO 3)布置在每个IP数据包(PCT PRO 1)之后。为此,在接收侧,例如,在存储介质内储存这个传输流之后,在技巧再现(例如,快进再现或快退再现)中,可以有效地获取技巧再现所需要的随机接入点的接入单元的数据,并且可以高速执行技巧再现。
图27(b)示出了对应于在图27(a)中显示的传输流的快进再现的概述。此外,图27(c)示出了对应于在图27(a)中显示的传输流的快退再现的概述。虽然未显示其详细描述,但是该再现与在图18(b)和图18(c)中显示的TLV数据包流的情况的再现的概述相似。
返回图1,接收器200包括调谐器201、多路分用器202、解码器203、显示器204、网关/网络路由器205、中央处理单元(CPU)206以及用户操作单元207。
CPU 206控制接收器200的每个单元的操作。用户可以使用用户操作单元207执行各种输入。这个用户操作单元207是远程控制单元、通过接近/触摸执行指令输入的触摸面板单元、鼠标、键盘、使用摄像头检测指令输入的姿势输入单元、使用音频提供指令的音频输入单元等。用户可以使用用户操作单元207执行指令输入,例如,快进再现或快退再现。
调谐器201和网关/网络路由器205配置获取单元或接收单元。调谐器201接收通过RF传输信道从传输侧中传输的广播波,通过执行RF解调来获得传输帧,执行去帧处理和解封,并且输出IP数据包。此外,调谐器201将由TLV数据包的解封所获得的传输控制信号(TLV-NIT和AMT)供应给未显示的CPU(控制单元)206。在这些控制信号中,还包括在执行技巧再现(例如,快进再现或快退再现)时使用的接入位置信息。
此外,位于接收器200外面的存储介质210(例如,HDD)与调谐器201连接,并且可以记录和再现由调谐器201获得的传输流。在再现时,调谐器201将再现命令传输给存储介质210,以从存储介质210中接收再现的传输流,执行其解封,并且输出IP数据包。在这种情况下,根据在再现命令中表示的再现模式,除了普通再现以外,还可以执行技巧再现(例如,快进再现或快退再现)。
调谐器201将输出的IP数据包供应给多路分用器202。此时,根据每个IP数据包的供应,调谐器201也将从TLV数据包的报头中提取的优先级数据包识别信息供应给多路分用器202。多路分用器202执行用于从调谐器201中供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频、音频、元数据、消息等)的处理。多路分用器202将每种类型的IP数据包以及优先级数据包识别信息供应给相应的解码器203。
解码器203执行拆包处理,并且必要时,执行解码处理,用于每种类型的IP数据包。解码器203将消息和元数据供应给未显示的控制单元。此外,解码器203将视频数据供应给作为显示单元的显示器204,并且将音频数据供应给在图中未显示的音频输出单元,例如,扬声器。
图28示出了接收器200的接收/再现系统211的一个示例。这个接收/再现系统211包括调谐器/解调器单元212、去帧单元213、多路分用器单元214、解码器单元215以及媒体界面216。调谐器/解调器单元212通过RF传输信道接收广播波,并且执行其RF解调处理,从而获得在传输时隙内包含TLV数据包的传输帧。调谐器/解调器单元212将这些传输帧供应给去帧单元213。
去帧单元213从传输帧中提取包含在每个时隙内的TLV数据包。此外,去帧单元213执行解封处理,用于每个提取的TLV数据包,从而获得IP数据包或传输控制信号(TLV-NIT和AMT)。
去帧单元213将所获得的传输控制信号供应给CPU 206。此外,去帧单元213将所获得的IP数据包供应给多路分用器单元214。此时,如虚线所示,根据每个IP数据包的供应,去帧单元213还将包含在TLV报头内的优先级数据包识别信息供应给多路分用器单元214。如上所述,这个优先级数据包识别信息由“non_priority_bit1”的1位字段和“non_priority_bit2”的1位字段构成(参照图13)。
多路分用器单元214执行为包含在有效载荷内的每种数据提前从去帧单元213中供应的IP数据包的处理。多路分用器单元214将每种类型的提取的IP数据包供应给相应的解码单元215。此时,如虚线所示,根据每个IP数据包的供应,多路分用器单元214也将优先级数据包识别信息供应给解码器单元215。
解码器单元215执行拆包处理,并且必要时,进一步执行解码处理,用于每种类型的IP数据包。解码器单元215将消息和元数据供应给在图中未显示的控制单元。此外,解码器单元215将视频数据供应给在图中未显示的显示单元,并且将音频数据供应给在图中未显示的音频输出单元。
在CPU 206的控制下,媒体界面216执行记录存储介质210的传输流(TLV数据包流),并且再现从存储介质210中供应的传输流(TLV数据包流)。媒体界面216将由去帧单元213获得的传输流(TLV数据包流)传输给存储介质210,以便在记录时,储存(记录)在其内。
媒体界面216接入存储介质210,提取储存的传输流(TLV数据包流),并且在再现时,将传输流传输给去帧单元213。去帧单元213执行所提取的传输流(TLV数据包流)的每个TLV数据包的解封处理,从而获取IP数据包和传输控制信号(TLV-NIT和AMT)。
在再现时,去帧单元213将通过解封处理获得的传输控制信号(TLV-NIT和AMT)供应给CPU 206。在这些控制信号中,还包括包含在TLV数据包(PCT PRO 3)内的接入位置信息(“Pointer_previous TLV_priority packet”、“Pointer_next TLV_priority packet”)。此外,去帧单元213还将通过解封处理获得的TLV数据包的识别信息(“non_priority_bit1”、“non_priority_bit2”以及“non_priority_bit3”)供应给CPU 206。此外,在再现时,解码器215将解码信息供应给CPU 206。
CPU 206基于如上所述供应的各种信息,控制从媒体界面216中接入存储介质210。通过这种方式,在技巧再现(例如,快进再现或快退再现)中,媒体界面216可以从存储介质210中有效地提取包括技巧再现所需要的接入单元的数据的TLV数据包。
返回图1,网关/网络路由器单元205通过通信网络300从分发服务器120中接收通过多播分布的服务的传输流,并且输出IP数据包,与上述调谐器201的输出相似。此外,在这个IP数据包的每个报头中,插入用于识别该数据包是否是通过高优先级处理的数据包的识别信息,并且插入用于识别该数据包是否是包括接入位置信息的数据包的识别信息(参照图23到图26)。
此外,位于接收器200外面的存储介质220(例如,HDD)通过局域网与网关/网络路由器单元205连接,并且可以记录和再现由网关/网络路由器单元205接收的传输流。在再现时,网关/网络路由器单元205将再现命令传输给存储介质220,接收从存储介质220中再现的传输流(IP数据包流),并且输出配置传输帧的IP数据包。在这种情况下,根据由再现命令引导的再现模式,除了普通再现,还可以执行特殊再现(例如,快进再现或快退再现)。
在再现时,将插入IP数据包内的用于识别该数据包是否是通过高优先级处理的数据包的识别信息、用于识别该数据包是否是包括接入位置信息的数据包的识别信息以及接入位置信息(“媒体接入偏移位置向前”以及“媒体接入偏移位置向后”)供应给CPU 206。此外,在再现时,将解码信息从解码器215中供应给CPU 206。
与在再现上述广播系统的传输流(TLV数据包流)时执行的处理相似,CPU 206基于所供应的各种信息,控制接入存储介质220。通过这种方式,在技巧再现(例如,快进再现或快退再现)中,可以从存储介质220中有效地提取包括技巧再现所需要的接入单元的数据的IP数据包。
交替地,网关/网络路由器单元205将再现命令传输给分发服务器120,通过通信网络300从分发服务器120中接收视频点播服务的传输流,并且输出IP数据包,以上述多播分布的情况相似。在这种情况下,从分发服务器120中传输的传输流对应于在再现命令中表示的再现模式。在再现模式中,除了普通再现模式,还包括技巧再现,例如,快进再现和快退再现。
CPU 206可以执行通过网关/网络路由器单元205对分发服务器120的接入控制,与上述存储介质220的接入控制相似。通过这种方式,在技巧再现(例如,快进再现或快退再现)中,可以从分发服务器120中有效地提取包括技巧再现所需要的接入单元的数据的IP数据包。
网关/网络路由器单元205将输出的IP数据包供应给多路分用器202。多路分用器202执行用于从网关/网络路由器单元205中供应的IP数据包中提取包含在有效载荷内的每种类型的数据(例如,视频、音频、元数据以及消息)的处理。多路分用器202将为每种类型提取的IP数据包供应给相应的解码器203。
解码器203执行拆包处理,并且必要时,进一步执行解码处理,用于每种类型的IP数据包。解码器203将消息和元数据供应给CPU(控制单元)206。此外,解码器203将视频数据供应给作为显示单元的显示器204,并且将音频数据供应给在图中未显示的音频输出单元,例如,扬声器。
简单描述在图1中显示的显示系统10的操作。首先,描述接收器200的调谐器201从广播站110中接收的广播波并且执行该处理的情况。在这种情况下,通过RF传输信道将传送传输流的广播波从广播站110中传输给接收侧,在传输流中,连续布置TLV数据包,作为传输数据包。接收器200的调谐器201接收这个广播波。
调谐器201通过执行用于所接收的广播波的RF解调处理来获取传输帧,执行去帧处理和解封,并且输出IP数据包。在此处,将通过解封TLV数据包所获得的传输控制信号(TLV-NIT和AMT)供应给CPU 206。
将从调谐器201中输出的IP数据包供应给多路分用器202。此时,根据每个IP数据包的供应,还将从TLV数据包的报头中提取的优先级数据包识别信息从调谐器201中供应给多路分用器202。多路分用器202执行用于从调谐器201中依次供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频、音频、元数据、消息等)的处理。
将由多路分用器202提取的每种类型的IP数据包以及优先级数据包识别信息供应给相应的解码器203。解码器203执行拆包处理,并且必要时,进一步执行解码处理,用于每种类型的IP数据包。在此处,由解码器203获得的视频数据供应给作为显示单元的显示器204,并且显示图像。此外,由解码器203获得的音频数据供应给在图中未显示的音频输出单元,例如,扬声器,并且输出声音。而且,由解码器203获得的消息和元数据供应给CPU 206。
在此处,描述在根据用户操作发生广播的频道切换(随机接入)的情况下执行的操作。在这种情况下,在接收器200内,显示供应的目标在频道切换之后从传输流的初始随机接入点(RAP)开始。作为这个随机接入点,仅仅由非预测性组分(I图片、IDR图片)配置的接入单元的开始或者与这个接入单元相关联的消息信息的起始点是目标。
图29示出了在服务切换时间点SSP从频道A(CH-A)切换到频道B(CH-B)的情况的一个示例。在这种情况下,从时间点SSP到时间点RAP至少发生延迟t1。此外,在时间点RAP之后具有参考按照显示顺序放在I图片之前的图片的预测差异图片(P图片或B图片)的情况下,也发生由其造成的延迟t2。
根据这个实施方式,根据包含在TLV数据包的报头内的优先级数据包识别信息,适当地可省略用于在传输流内的每个数据包的报头的分析处理,直到第一随机接入点(RAP),并且在第一随机接入点的图片的解码和显示之前的延迟减小,因此,在初始显示之前的响应时间缩短。
接下来,描述在根据用户操作传输给存储介质210的再现命令的情况下执行的操作,并且执行技巧再现(例如,快进再现或快退再现)。在这种情况下,CPU 206控制接入存储介质210,并且例如,选择性提取包括随机接入点(RAP)的接入单元的TLV数据包,并且包含TLV数据包的传输流返回调谐器201,作为再现传输流。
调谐器201执行包含在从存储介质210中供应的传输流内的TLV数据包的解封,并且输出IP数据包。在此处,将通过TLV数据包的解封所获得的传输控制信号(TLV-NIT和AMT)供应给CPU 206。
将从调谐器201中输出的IP数据包供应给多路分用器202。多路分用器202执行用于从调谐器201中依次供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频或音频)的数据的处理。由多路分用器202执行的每种类型的IP数据包以及优先级数据包识别信息供应给相应的解码器203。
解码器203执行拆包处理,并且必要时,进一步执行解码处理,用于每种类型的IP数据包。在此处,将由解码器203获得的视频数据供应给作为显示单元的显示器204,因此,显示技巧再现的图像。此外,将由解码器203获得的音频数据供应给在图中未显示的音频输出单元,例如,扬声器,因此,输出对应于显示图像的音频。
图30示出了根据用户操作从正常再现模式过渡到技巧再现(快进再现或快退再现)模式的情况的接收器200的处理的一个示例。接收器200根据过渡到技巧再现模式,在步骤ST1中开始处理,然后,促使该处理继续进入步骤ST2的处理中。在这个步骤ST2中,接收器200接入在存储介质210内的下一个TLV数据包的储存位置,并且获取TLV数据包。
接下来,在步骤ST3中,接收器200分析获取的TLV数据包的报头,并且识别“non_priority_bit1”、“non_priority_bit2”以及“non_priority_bit3”的布置。然后,在步骤ST4中,接收器200确定“non_priority_bit2”是否设为“0”。在“non_priority_bit2”设为“0”时,接收器200促使处理继续进入步骤ST50,执行上层分析例程的处理,并且并行返回步骤ST2的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
在“non_priority_bit2”在步骤ST4中不设为“0”的情况下,在步骤ST5中,接收器200确定“non_priority_bit1”是否设为“0”。在“non_priority_bit1”设为“0”时,接收器200促使处理继续进入步骤ST50,执行上层分析例程的处理,并且并行返回步骤ST2的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
在“non_priority_bit1”在步骤ST5中不设为“0”时,在步骤ST6中,接收器200确定“non_priority_bit3”是否设为“0”。在“non_priority_bit3”设为“0”时,接收器200在步骤ST7中从TLV数据包中获取接入位置信息,然后,在步骤ST8中,确定是否完成目标接入单元的解码处理。根据从解码器203中供应的目标接入单元的解码状态信息,执行这个确定。作为目标接入单元,可以考虑仅仅包括随机接入点的I图片的接入单元的情况或者包括I图片的接入单元以及在其后的B图片和P图片的预定数量的接入单元的情况。
在“non_priority_bit3”在步骤ST6中不设为“0”的情况下,在步骤ST8中,接收器200确定是否完成目标接入单元的解码处理。根据从解码器203中供应的目标接入单元的解码状态信息,执行这个确定。作为目标接入单元,可以考虑仅仅包括随机接入点的I图片的接入单元的情况或者包括I图片的接入单元以及在其后的B图片和P图片的预定数量的接入单元的情况。
在完成目标接入单元的解码处理时,在步骤ST9中,接收器200根据在上述步骤ST7中获取的接入位置信息接入在存储介质210的跳入的TLV数据包的储存位置,获取TLV数据包,然后,将处理返回步骤ST3。另一方面,在完成目标接入单元的解码处理时,接收器200促使处理继续进入步骤ST50中,执行上层分析例程的处理,并且并行返回步骤ST2的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
在图31中表示的流程图示出了在上述步骤50中的上层分析例程的处理的示例。接收器200在步骤ST10中开始处理。然后,接收器200在步骤11中分析IP报头,并且在步骤ST12中分析UDP报头或TCP报头。此外,接收器200在步骤ST13中分析MMT有效载荷报头。
然后,在步骤ST14中,接收器200确定“random_access_point_flag”是否表示RAP。在表示RAP时,接收器200在步骤ST15中执行解码处理。在媒体数据(例如,视频)解码时,接收器200在步骤ST16中执行显示处理(例如,图像显示)和音频输出,然后,在步骤ST17中结束处理。此外,解码器203通知CPU 206目标接入单元的处理状态。因此,可以在上述图30中表示的流程图中执行步骤ST8的确定。此外,解码器单元215设置包含在TLV数据包内的元数据信息,其中,必要时,“non_priority_bit2”设置为“0”。
此外,在“random_access_point_flag”在步骤ST14中不表示RAP时,接收器200在步骤ST18中确定是否执行解码处理。例如,在完成目标接入单元的解码处理时,确定执行解码。此外,对于包括元信息的MMT数据包,确定执行解码。在步骤ST18中确定不执行解码时,接收器200在步骤ST17中立即结束处理。例如,在找出第一随机接入点之前,直接在技巧再现模式的开始之后,包含在MMT数据包内的元数据等对应于确定不执行解码的情况。
接下来,描述以下情况:接收器200的网关/网络路由器205接收通过通信网络300从分发服务器120中传输的传输流,并且执行处理。在这种情况下,从网关/网络路由器205中输出包含在所接收的传输流内的IP数据包。此外,在IP数据包的报头内,包含优先级数据包识别信息以及用于确定是否包括接入位置信息的识别信息。
将从网关/网络路由器205中输出的IP数据包供应给多路分用器202。多路分用器202执行用于从调谐器201中依次供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频、音频、元数据、消息等)的处理。
将由多路分用器202提取的每种类型的IP数据包以及优先级数据包识别信息供应给相应的解码器203。解码器203执行拆包处理,并且必要时,执行解码处理,用于每种类型的IP数据包。由解码器203获得的视频数据供应给作为显示单元的显示器204,因此,显示图像。此外,由解码器203获得的音频数据供应给在图中未显示的音频输出单元,例如,扬声器,因此,输出声音。而且,由解码器203获得的消息和元数据供应给CPU 206。
在此处,描述根据用户操作发生的多播分布的服务切换(随机接入)的情况的操作。在这种情况下,在接收器200中,显示处理的目标是在服务切换之后的传输流的第一随机接入点(RAP)。作为这个随机接入点的目标,具有仅仅由非预测性组分(I图片和IDR图片)构成的接入单元的开始以及与这个接入单元相关联的消息信息的起始点。
在这种情况下,虽然在本文中未详细解释,但是与上述广播频道切换的情况一样,根据包含在IP数据包的报头内的优先级数据包识别信息,适当地可省略用于在第一随机接入点(RAP)之前的传输流内分析每个数据包的报头的处理(参照图25)。因此,在初始随机接入点的图片的解码和显示之前的延迟减小,因此,在初始显示之前的响应时间减少。
接下来,描述在根据用户操作给存储介质220传输再现命令的情况下时执行的操作,并且执行技巧再现(例如,快进再现或快退再现)。在这种情况下,控制接入存储介质220,并且例如,选择性提取包含随机接入点(RAP)的接入单元的IP数据包,并且包含IP数据包的传输流返回网络/网络路由器205,作为再现传输流。
从网络/网络路由器205中输出包含在从存储介质220中供应的传输流内的IP数据包。多路分用器202执行用于从网络/网络路由器205中依次供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频或音频)的处理。由多路分用器202执行的每种类型的IP数据包供应给相应的解码器203。
解码器203执行拆包处理,并且执行解码处理,用于每种类型的IP数据包。在此处,将由解码器203获得的视频数据供应给作为显示单元的显示器204,因此,显示技巧再现的图像。此外,将由解码器203获得的音频数据供应给在图中未显示的音频输出单元,例如,扬声器,因此,输出对应于显示图像的音频。
图32示出了根据用户操作从正常再现模式过渡到技巧再现(快进再现或快退再现)模式的情况的接收器200的处理的一个示例。接收器200根据过渡到技巧再现模式,在步骤ST31中开始处理,然后,促使该处理继续进入步骤ST32的处理中。在这个步骤ST32中,接收器200接入在存储介质220内的下一个TLV数据包的储存位置,并且获取IP数据包。
接下来,在步骤ST33中,接收器200分析获取的IP数据包的报头,并且识别选项等的布置。然后,在步骤ST34中,接收器200确定是否“Type_number=0x1F”以及“MPI=0x1”。在此处,“MPI”表示“媒体优先级信息”。在“Type_number=0x1F”并且“MPI=0x1”时,接收器200促使处理继续进入步骤ST60,执行上层分析例程的处理,并且并行返回步骤ST12的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
另一方面,在步骤ST34中不满足“Type_number=0x1F”并且“MPI=0x1”的情况下,在步骤ST35中,接收器200确定是否“Type_number=0x1F”并且“MPI=0x2”。在“Type_number=0x1F”并且“MPI=0x2”时,接收器200促使处理继续进入步骤ST60,执行上层分析例程的处理,并且并行返回步骤ST12的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
在步骤ST35中不满足“Type_number=0x1F”并且“MPI=0x2”时,在步骤ST36中,接收器200确定是否“Type_number=0x1E”。在设置“Type_number=0x1E”时,接收器200在步骤ST37中从IP数据包中获取接入位置信息,然后,在步骤ST38中,确定是否结束目标接入单元的解码。根据从解码器203中供应的目标接入单元的解码状态信息,执行这个确定。作为目标接入单元,可以考虑仅仅包括随机接入点的I图片的接入单元的情况或者包括I图片的接入单元以及在其后的B图片和P图片的预定数量的接入单元的情况。
在步骤ST6中不设置“Type_number=0x1E”时,在步骤ST38中,接收器200确定是否结束目标接入单元的解码。作为目标接入单元,可以考虑仅仅包括随机接入点的I图片的接入单元的情况或者包括I图片的接入单元以及在其后的B图片和P图片的预定数量的接入单元的情况。
在完成目标接入单元的解码处理时,在步骤ST39中,接收器200根据在上述步骤ST37中获取的接入位置信息接入在存储介质220的跳动的IP数据包的储存位置,获取IP数据包,然后,将处理返回步骤ST33。另一方面,在完成目标接入单元的解码处理时,接收器200促使处理继续进入步骤ST60中,执行上层分析例程的处理,并且并行返回步骤ST32的处理并且执行从存储介质210中获取下一个TLV数据包的处理。
虽然未详细描述上述步骤ST60的上层分析例程的处理的示例,但是与在图30中表述的流程图的步骤ST50的上层分析例程一样。然而,在步骤ST60的上层分析例程中,由于最低层的数据包是IP数据包,所以在图31中显示的上层分析例程中,不包括步骤ST11。
接下来,描述在根据用户操作给分发服务器120传输再现命令的情况下时执行的操作,接收传输流,并且执行技巧再现(例如,快进再现或快退再现)。在这种情况下,控制接入分发服务器120,并且例如,基于包含在IP数据包的报头内的优先级数据包识别信息以及接入位置信息,选择性提取包含随机接入点(RAP)的接入单元的IP数据包,并且包含IP数据包的传输流返回网络/网络路由器205。
从网络/网络路由器205中输出包含在从分发服务器120中供应的传输流内的IP数据包。多路分用器202执行用于从网络/网络路由器205中依次供应的IP数据包中提取包含在有效载荷内的每种类型的数据(视频或音频)的处理。由多路分用器202执行的每种类型的IP数据包以及优先级数据包识别信息供应给相应的解码器203。
解码器203执行拆包处理,并且执行解码处理,用于每种类型的IP数据包。在此处,将由解码器203获得的视频数据供应给作为显示单元的显示器204,因此,显示技巧再现的图像。此外,将由解码器203获得的音频数据供应给在图中未显示的音频输出单元,例如,扬声器,因此,输出对应于显示图像的音频。
如上所述,在图1中显示的显示系统10中,在传输流中,包括随机接入点的接入单元的第一字节的数据的传输数据包(TLV数据包或IP数据包)以预定的间隔布置为可识别,并且在这个传输数据包之后,布置包括接入位置信息的传输数据包(TLV数据包或IP数据包)。
因此,在接收侧,例如,在存储介质内储存这个传输流之后,在技巧再现(例如,快进再现或快退再现)中,基于识别信息或接入位置信息,执行控制接入存储介质210或220,并且可以有效地获取技巧再现所需要的随机接入点的接入单元的或者在接入单元之后的预定数量的接入单元的数据,因此,可以实现提高执行技巧再现的速度。
<2、修改示例>
在上述实施方式中,示出了一个示例,其中,TLV数据包在广播中用作封装层的数据包。然而,封装层的数据包不限于TLV数据包。例如,封装层的数据包可以是通用流封装(GSE)数据包或者实现与这种数据包相同类型的作用的其他数据包。此外,同样,多路复用的传送数据包不限于MMT数据包。例如,多路复用的传送数据包可以是实时传送协议(RTP)数据包、通过单向传送协议的文件传输(FLUTE)数据包等。
此外,在上述实施方式中,在广播系统中,示出了一个示例,其中,使用TLV数据包,在调谐器201与存储介质210之间执行数据交换。然而,可以使用TLV数据包,执行这种交换。交替地,可以考虑能够指定其中的一个的配置。而且,在如上所述使用TLV数据包交换数据的情况下,例如,由于在IP数据包内包括优先级数据包识别信息、接入位置信息的额外信息、接入位置信息等,所以可以实现提高执行技巧再现的速度。
而且,在上述实施方式中,接收器200显示为包括输出单元(显示单元),换言之,输出单元,例如,显示器或扬声器。然而,接收器200的输出单元等可以被配置为单独提供。这种情况的接收器具有机顶盒配置。
此外,本技术可以使用以下配置。
(1)一种传输装置,包括:
传输单元,传输传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在所述特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
(2)根据(1)所述的传输装置,
其中,所述第一传输数据包是通过封装具有包括所述多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,并且
所述第二传输数据包是通过封装所述接入位置信息所获得的封装层的数据包。
(3)根据(2)所述的传输装置,其中,所述封装层的数据包是TLV数据包或GSE数据包。
(4)根据(1)所述的传输装置,
其中,所述第一传输数据包是具有包括所述多路复用的传送数据包的有效载荷的IP数据包,并且,
所述第二传输数据包是包括所述接入位置信息的IP数据包。
(5)根据(1)到(4)中任一项所述的传输装置,其中,所述多路复用的传送数据包是MMT数据包、RTP数据包或FLUTE数据包。
(6)一种传输方法,包括:
传输传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在所述特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
(7)一种再现装置,包括:
获取单元,通过接入本地连接的存储介质或通信网络连接的服务器获取传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由所述获取单元获取的传输流获取再现数据;以及
接入控制单元,基于从所获取的传输流中提取的特定的第一传输数据包的识别信息和包含在所述第二传输数据包中的接入位置信息,控制所述获取单元接入存储介质或服务器,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在所述特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
(8)根据(7)所述的再现装置,进一步包括:
接收单元,通过预定的传输信道接收传输流并且在将所接收的传输流存储在所述存储介质中,
其中,所述预定的传输信道是RF传输信道或通信网络传输信道。
(9)根据(7)或(8)所述的再现装置,
其中,所述第一传输数据包是通过封装具有包括所述多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,并且
所述第二传输数据包是通过封装所述接入位置信息所获得的封装层的数据包。
(10)根据(9)所述的再现装置,其中,所述封装层的数据包是TLV数据包或GSE数据包。
(11)根据(7)所述的再现装置,
其中,所述第一传输数据包是具有包括所述多路复用的传送数据包的有效载荷的IP数据包,并且,
所述第二传输数据包是包括所述接入位置信息的IP数据包。
(12)根据(7)到(9)中任一项所述的再现装置,其中,所述多路复用的传送数据包是MMT数据包、RTP数据包或FLUTE数据包。
(13)一种再现方法,包括:
通过接入本地连接的存储介质或通信网络连接的服务器获取传输流的获取步骤,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包;
通过处理在所述获取步骤获取的传输流,获取再现数据的处理步骤;以及
基于从所获取的传输流中提取的特定的第一传输数据包的识别信息和包含在第二传输数据包中的接入位置信息,控制在所述获取步骤接入存储介质或服务器,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在所述特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
(14)一种接收装置,包括:
接收单元,接收传输流,其中,连续布置作为多层配置数据包的第一传输数据包,每个数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由所述接收单元获取的传输流,来获取接收数据,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及在所述特定的第一传输数据包之后,布置第二传输数据包,每个第二传输数据包包括对应于前一个和下一个特定的第一传输数据包的接入位置信息并且具有插入识别信息的报头。
本技术的特征主要在于,通过插入用于识别通过高优先级处理的数据包的识别信息、用于识别是否包括用于技巧再现的接入位置信息的信息、以及在通过封装在有效载荷内包括多路复用的传送数据包的IP数据包所获得的封装层的数据包(传输数据包)内的接入位置信息,提高技巧再现(例如,快进再现和快退再现)的速度(参照图1、13以及18)。
参考符号列表
10:显示系统
110:广播站
111:传输系统
112:编码器单元
113:多路复用器单元
114:成帧单元
115:调制器/发射单元
120:分发服务器
200:接收器
201:调谐器
202:多路分用器
203:解码器
204:显示器
205:网关/网络路由器
206:CPU
207:用户操作单元
210:存储介质
211:接收/再现系统
212:调谐器/解调器
213:去帧单元
214:多路分用器单元
215:解码器单元
216:媒体界面
220:存储介质。

Claims (14)

1.一种传输装置,包括:
传输单元,传输传输流,在所述传输流中,连续布置作为多层配置数据包的第一传输数据包,每个多层配置数据包在上层内具有多路复用的传送数据包,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包,并且具有插入识别信息的报头,以及布置第二传输数据包,每个第二传输数据包紧随在相同间隔中的特定的第一传输数据包之后,并且包括与前一间隔中的特定的第一传输数据包和在下一间隔中的特定的第一传输数据包对应的接入位置信息,并且具有插入识别信息的报头。
2.根据权利要求1所述的传输装置,
其中,所述第一传输数据包是通过封装具有包括所述多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,以及
所述第二传输数据包是通过封装所述接入位置信息所获得的封装层的数据包。
3.根据权利要求2所述的传输装置,其中,所述封装层的数据包是TLV数据包或GSE数据包。
4.根据权利要求1所述的传输装置,
其中,所述第一传输数据包是具有包括所述多路复用的传送数据包的有效载荷的IP数据包,并且,
所述第二传输数据包是包括所述接入位置信息的IP数据包。
5.根据权利要求1所述的传输装置,其中,所述多路复用的传送数据包是MMT数据包、RTP数据包或FLUTE数据包。
6.一种传输方法,包括:
传输传输流,在所述传输流中,连续布置作为多层配置数据包的第一传输数据包,每个多层配置数据包在上层内具有多路复用的传送数据包,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及布置第二传输数据包,每个第二传输数据包紧随在相同间隔中的特定的第一传输数据包之后,并且包括与前一间隔中的特定的第一传输数据包和在下一间隔中的特定的第一传输数据包对应的接入位置信息,并且具有插入识别信息的报头。
7.一种再现装置,包括:
获取单元,通过接入本地连接的存储介质或通过通信网络连接的服务器获取传输流,在所述传输流中,连续布置作为多层配置数据包的第一传输数据包,每个多层配置数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由所述获取单元获取的传输流获取再现数据;以及
接入控制单元,基于从所获取的传输流中提取的特定的第一传输数据包的识别信息和包含在第二传输数据包中的接入位置信息,控制所述获取单元接入存储介质或服务器,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及布置第二传输数据包,每个第二传输数据包紧随在相同间隔中的特定的第一传输数据包之后,并且包括与前一间隔中的特定的第一传输数据包和在下一间隔中的特定的第一传输数据包对应的接入位置信息,并且具有插入识别信息的报头。
8.根据权利要求7所述的再现装置,进一步包括:
接收单元,通过预定的传输信道接收所述传输流并且将所接收的传输流存储在所述存储介质中,
其中,所述预定的传输信道是RF传输信道或通信网络传输信道。
9.根据权利要求7所述的再现装置,
其中,所述第一传输数据包是通过封装具有包括所述多路复用的传送数据包的有效载荷的IP数据包所获得的封装层的数据包,以及
所述第二传输数据包是通过封装所述接入位置信息所获得的封装层的数据包。
10.根据权利要求9所述的再现装置,其中,所述封装层的数据包是TLV数据包或GSE数据包。
11.根据权利要求7所述的再现装置,
其中,所述第一传输数据包是具有包括所述多路复用的传送数据包的有效载荷的IP数据包,并且,
所述第二传输数据包是包括所述接入位置信息的IP数据包。
12.根据权利要求7所述的再现装置,其中,所述多路复用的传送数据包是MMT数据包、RTP数据包或FLUTE数据包。
13.一种再现方法,包括:
通过接入本地连接的存储介质或通过通信网络连接的服务器获取传输流的获取步骤,在所述传输流中,连续布置作为多层配置数据包的第一传输数据包,每个多层配置数据包在上层内具有多路复用的传送数据包;
通过处理在所述获取步骤获取的传输流,获取再现数据的处理步骤;以及
基于从所获取的传输流中提取的特定的第一传输数据包的识别信息和包含在第二传输数据包中的接入位置信息,控制在所述获取步骤接入存储介质或服务器,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及布置第二传输数据包,每个第二传输数据包紧随在相同间隔中的特定的第一传输数据包之后,并且包括与前一间隔中的特定的第一传输数据包和在下一间隔中的特定的第一传输数据包对应的接入位置信息,并且具有插入识别信息的报头。
14.一种接收装置,包括:
接收单元,接收传输流,在所述传输流中,连续布置作为多层配置数据包的第一传输数据包,每个多层配置数据包在上层内具有多路复用的传送数据包;
处理单元,通过处理由所述接收单元获取的传输流获取接收数据,
其中,在所述传输流中,以预定的间隔布置特定的第一传输数据包,每个特定的第一传输数据包包括包含随机接入点的接入单元的第一字节开始的数据的多路复用的传送数据包并且具有插入识别信息的报头,以及布置第二传输数据包,每个第二传输数据包紧随在相同间隔中的特定的第一传输数据包之后,并且包括与前一间隔中的特定的第一传输数据包和在下一间隔中的特定的第一传输数据包对应的接入位置信息,并且具有插入识别信息的报头。
CN201480033952.1A 2013-06-21 2014-06-16 传输装置、传输方法、再现装置、再现方法以及接收装置 Active CN105308974B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013131147 2013-06-21
JP2013-131147 2013-06-21
PCT/JP2014/065947 WO2014203871A1 (ja) 2013-06-21 2014-06-16 送信装置、送信方法、再生装置、再生方法および受信装置

Publications (2)

Publication Number Publication Date
CN105308974A CN105308974A (zh) 2016-02-03
CN105308974B true CN105308974B (zh) 2019-09-24

Family

ID=52104603

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480033952.1A Active CN105308974B (zh) 2013-06-21 2014-06-16 传输装置、传输方法、再现装置、再现方法以及接收装置

Country Status (6)

Country Link
US (1) US10104406B2 (zh)
EP (1) EP3013059A4 (zh)
JP (1) JP6625431B2 (zh)
CN (1) CN105308974B (zh)
RU (1) RU2652091C2 (zh)
WO (1) WO2014203871A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10530828B2 (en) * 2014-03-31 2020-01-07 Samsung Electronics Co., Ltd. Method and apparatus for signaling and operation of low delay consumption of media data in MMT
KR102191878B1 (ko) * 2014-07-04 2020-12-16 삼성전자주식회사 멀티미디어 시스템에서 미디어 패킷을 수신하는 방법 및 장치
JP2016048912A (ja) * 2014-08-27 2016-04-07 パナソニックIpマネジメント株式会社 復号装置、逆多重化装置、復号方法及び逆多重化方法
JP6300116B2 (ja) * 2014-10-10 2018-03-28 パナソニックIpマネジメント株式会社 送信方法、送信装置及びシステム
JP6811613B2 (ja) * 2014-11-21 2021-01-13 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP6489581B2 (ja) * 2015-03-11 2019-03-27 日本放送協会 送信装置、プログラム、及び集積回路
JP6215898B2 (ja) 2015-11-16 2017-10-18 株式会社Pfu 映像処理装置、映像処理システム、および、映像処理方法
JP6529900B2 (ja) * 2015-12-15 2019-06-12 株式会社東芝 多重化装置および多重化方法
WO2018043142A1 (ja) * 2016-08-31 2018-03-08 ソニーセミコンダクタソリューションズ株式会社 データ処理装置、及び、データ処理方法
JP7070433B2 (ja) * 2017-01-17 2022-05-18 ソニーグループ株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
WO2018135258A1 (ja) * 2017-01-17 2018-07-26 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP7017029B2 (ja) * 2017-05-08 2022-02-08 ソニーグループ株式会社 送信装置、及び送信方法
JP6744262B2 (ja) * 2017-08-22 2020-08-19 株式会社東芝 電子装置及び方法
JP6848797B2 (ja) * 2017-10-03 2021-03-24 住友電気工業株式会社 放送再送信装置、放送受信装置、放送再送信方法、放送受信方法、放送再送信プログラムおよび放送受信プログラム
JP6517905B2 (ja) * 2017-10-30 2019-05-22 株式会社東芝 送信システム、伝送スロット化装置、及び伝送スロット作成方法
JP6976284B2 (ja) * 2017-10-30 2021-12-08 株式会社東芝 送信システム、伝送スロット化装置、及び伝送スロット作成方法
CN110290413B (zh) * 2019-07-02 2021-12-10 广东清汇信息科技股份有限公司 一种多媒体数据录制方法、播放方法及录制分享系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1152243A (zh) * 1995-08-02 1997-06-18 索尼公司 用于对数字视频数据进行编码和解码的设备和方法
CN105264846A (zh) * 2013-06-07 2016-01-20 索尼公司 发送装置、传输流的发送方法以及处理装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0822061B2 (ja) * 1993-03-02 1996-03-04 エヌ・ティ・ティ・データ通信株式会社 画像音声符号化デ−タ多重化装置および多重化デ−タ読み込み装置
CA2168327C (en) * 1995-01-30 2000-04-11 Shinichi Kikuchi A recording medium on which a data containing navigation data is recorded, a method and apparatus for reproducing a data according to navigationdata, a method and apparatus for recording a data containing navigation data on a recording medium.
JP4005691B2 (ja) * 1998-03-19 2007-11-07 株式会社東芝 動画像符号化方法および動画像符号化装置
CN1169150C (zh) * 1998-10-12 2004-09-29 松下电器产业株式会社 用于记录或再现信息记录介质中的数据的装置和方法
US6460086B1 (en) * 1998-12-01 2002-10-01 Sun Microsystems, Inc. Method and apparatus for delivery of a bytecode embedded within a transport stream
EP1134583A1 (en) * 2000-03-17 2001-09-19 Nederlandse Organisatie voor toegepast-natuurwetenschappelijk Onderzoek TNO Measuring metabolic rate changes
EP1143722B1 (en) * 2000-04-07 2008-11-05 Irdeto Access B.V. Data scrambling and descrambling system
AU2000248144A1 (en) 2000-05-02 2002-02-25 General Instrument Corporation Method and apparatus for enabling random access to individual pictures in an encrypted video stream
JP4399998B2 (ja) * 2001-03-22 2010-01-20 株式会社日立製作所 デジタル放送用ストリームの蓄積方法
JP3995207B2 (ja) * 2003-02-26 2007-10-24 日本放送協会 コンテンツ送信装置、コンテンツ送信方法、コンテンツ送信プログラムおよびコンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム
JP2005064556A (ja) * 2003-08-08 2005-03-10 Fujitsu Ltd 地上波デジタル放送のデータ放送素材伝送システム
US7430222B2 (en) * 2004-02-27 2008-09-30 Microsoft Corporation Media stream splicer
BRPI0609951A2 (pt) * 2005-04-25 2010-05-11 Sharp Kk aparelho de gravação, aparelho de reprodução, aparelho de gravação/reprodução, programa de gravação e meio de armazenamento dos mesmos e programa de reprodução e meio de armazenamento dos mesmos
US20080225892A1 (en) * 2007-03-15 2008-09-18 Nokia Corporation Using Forward Error Correction with Generic Stream Encapsulation in a Digital Broadcast Network
US20100135646A1 (en) * 2007-04-04 2010-06-03 Gun Bang Storage/playback method and apparatus for mpeg-2 transport stream based on iso base media file format
JP2009100265A (ja) * 2007-10-17 2009-05-07 Panasonic Corp データ処理装置、データ処理方法、データ処理プログラム、およびそのデータ処理プログラムを記録した記録媒体、並びに集積回路
EP2086237B1 (en) * 2008-02-04 2012-06-27 Alcatel Lucent Method and device for reordering and multiplexing multimedia packets from multimedia streams pertaining to interrelated sessions
KR101777348B1 (ko) * 2010-02-23 2017-09-11 삼성전자주식회사 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치
CN107257326B (zh) * 2010-04-20 2021-04-23 三星电子株式会社 用于传送和接收媒体数据的接口装置和方法
JP5357839B2 (ja) 2010-07-02 2013-12-04 日本放送協会 送信装置及び送信プログラム
EP2652958B1 (en) * 2010-12-15 2019-10-23 Telefonaktiebolaget LM Ericsson (publ) Methods, a client and a server for handling an mpeg transport stream
KR20120084234A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 Mpeg media transport(mmt)에서 mmt au를 전송하는 방법
US20130094518A1 (en) 2011-10-13 2013-04-18 Electronics And Telecommunications Research Institute Method for configuring and transmitting mmt payload
KR20130090824A (ko) * 2012-02-06 2013-08-14 한국전자통신연구원 이종망 네트워크에서 부호화된 미디어 데이터를 전송하는 시스템에 랜덤 액세스를 지원하는 엠엠티 애셋의 구조, 생성 방법 및 생성 장치
KR20140002447A (ko) * 2012-06-29 2014-01-08 삼성전자주식회사 멀티미디어 시스템에서 적응적 미디어 구조 송수신 방법 및 장치
CA2911498C (en) * 2013-05-22 2018-05-01 Woosuk Kwon Method and apparatus for processing signaling data between layers in ip-based digital broadcasting system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1152243A (zh) * 1995-08-02 1997-06-18 索尼公司 用于对数字视频数据进行编码和解码的设备和方法
CN105264846A (zh) * 2013-06-07 2016-01-20 索尼公司 发送装置、传输流的发送方法以及处理装置

Also Published As

Publication number Publication date
CN105308974A (zh) 2016-02-03
WO2014203871A1 (ja) 2014-12-24
BR112015031130A2 (pt) 2017-07-25
US10104406B2 (en) 2018-10-16
JP6625431B2 (ja) 2019-12-25
EP3013059A1 (en) 2016-04-27
RU2015153626A (ru) 2017-06-20
US20160088321A1 (en) 2016-03-24
JPWO2014203871A1 (ja) 2017-02-23
EP3013059A4 (en) 2017-03-22
RU2652091C2 (ru) 2018-04-25

Similar Documents

Publication Publication Date Title
CN105308974B (zh) 传输装置、传输方法、再现装置、再现方法以及接收装置
JP6330804B2 (ja) 送信装置、伝送ストリームの送信方法および処理装置
US11665384B2 (en) Method and apparatus for transmitting media data in multimedia transport system
US11178436B2 (en) Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
KR101781873B1 (ko) 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
KR101789633B1 (ko) 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신장치
KR101842201B1 (ko) 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
US10349095B2 (en) Transmission device for processing video data related to HDR/SDR and method for controlling the same
US10666549B2 (en) Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method and broadcast signal reception method
KR101790526B1 (ko) 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
KR101790525B1 (ko) 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
KR102626634B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
BR112015031130B1 (pt) Aparelho e método de transmissão, e, aparelho e método de reprodução

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant