CN108347492B - 再现装置以及再现方法 - Google Patents
再现装置以及再现方法 Download PDFInfo
- Publication number
- CN108347492B CN108347492B CN201810460987.3A CN201810460987A CN108347492B CN 108347492 B CN108347492 B CN 108347492B CN 201810460987 A CN201810460987 A CN 201810460987A CN 108347492 B CN108347492 B CN 108347492B
- Authority
- CN
- China
- Prior art keywords
- packet
- unit
- transmission order
- transmission
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000005540 biological transmission Effects 0.000 claims abstract description 302
- 238000001514 detection method Methods 0.000 claims abstract description 13
- 238000009877 rendering Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 26
- 238000004891 communication Methods 0.000 description 17
- 238000012545 processing Methods 0.000 description 11
- 238000012986 modification Methods 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 230000015654 memory Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000000638 solvent extraction Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008034 disappearance Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/34—Flow control; Congestion control ensuring sequence integrity, e.g. using sequence numbers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
- H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
- H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
- H04L69/324—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the data link layer [OSI layer 2], e.g. HDLC
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
Abstract
本发明提供一种再现装置以及再现方法。再现装置具备:接收单元,接收分组;检测单元,基于所述分组检测在包中包含的多个有效载荷中的一个有效载荷、表示所述有效载荷包括媒体单元的有效载荷类型、表示所述包中的所述有效载荷的传输顺序的第一传输顺序信息、表示所述包的部分集合中的所述有效载荷的传输顺序的第二传输顺序信息以及表示是否包括所述第一传输顺序信息的标记;解码单元,在由所述有效载荷类型表示所述有效载荷包括所述媒体单元的情况下,对所述媒体单元进行解码;以及再现单元,对所述媒体单元进行再现,在所述标记为1时,所述检测单元检测所述第一传输顺序信息。
Description
本申请是国际申请日为2013年1月28日、国际申请号为PCT/JP2013/051708、国家申请号为201380007329.4、发明名称为“再现装置、生成装置及系统”的发明专利申请的分案申请。
技术领域
本发明涉及用于对由一个以上的分量(component)构成的内容进行发布的数据结构等。
背景技术
近年来,正在进行影像、声音、文本等的各种内容的发布,也正在推进用于发布这样的内容的传输格式的标准化。尤其,MPEG MMT(MPEG Media Transport:MPEG媒体传输协议)的标准化受到关注。
在该MPEG MMT中,正在进行用于将影像、声音、文本等的多个分量在分别不同的路径中发布(混合发布)所有效的传输格式等的标准化。
MPEG MMT的内容打包(MMT Package)而存储,除了包括多个分量(MMT Asset)之外,至少包括表示各分量的显示位置、大小等的布局或能否进行组合等的再现条件结构信息(Composition Information:CI)、以及用于判断最佳发布路径的各分量的必要频带或容许延迟等的与传输特性信息(Transport Characteristics:TC)有关的数据。
在这样的内容中包含的分量能够分割为分组并通过单一的网络而传输,此外,也能够通过多个网络(混合)而传输。对此,基于图14进行说明。图14是表示内容的传输方式的图,图14的(a)表示基于单一网络的传输的例,图14的(b)表示基于多个网络的混合传输的例。另外,在该图中,将一个传输分组记载为一个模块。
在图14的(a)的例中,在结构信息的传输分组CI和传输特性信息的传输分组TC之后,接续多个传输分组(A1,1、A2,1、…)。在该A1,1以后的传输分组(Ai,j:i=1,2,…、j=1,2,…)中,分别包括构成资源的媒体单元。这些媒体单元经由基于TC决定的网络而发送到接收机,接收机基于CI而再现这些媒体单元。
在图14的(a)的例中,这些传输分组都经由一个网络,通过一个路径而从发送机发布到接收机。
另一方面,在图14的(b)的例中,将包括构成第2个资源的媒体单元的传输分组A2,j分割为两个的传输分组(A2,1、A2,3、…)以及(A2,2、A2,4、…)和包括构成第1个资源的媒体单元的传输分组(A1,1、A1,2、…)分别经由不同的网络通过不同的路径而传输。另外,关于混合传输,在下述的专利文献1中也进行记载。
现有技术文献
专利文献
专利文献1:日本国公开专利公报“特开平10-173612号公报”(1998年6月26日公开)
发明内容
发明要解决的课题
对如上述的多个传输分组分别赋予顺序信息(序列号:sequence number)。此时,接收机为了检测分量的重构或者分组损失等,需要在接收侧识别构成分量的各分组的顺序关系。但是,在将一个分量(资源)分割为多个部分集合(子资源)并分别通过不同的网络传输的情况下,存在在接收侧不能判断子资源间的分组顺序的问题。此外,还存在在接收侧不能判断有无子资源内的分组遗失的问题。
参照图15,说明这个问题。图15是表示现有技术的传输分组的一例的图,图15的(a)表示以子资源单位对各传输分组赋予了序列号时的传输分组的例,图15的(b)表示通过整个资源对各传输分组赋予了序列号时的传输分组的例。
如图15的(a)所示,资源由子资源1以及子资源2构成。此外,设为子资源1和子资源2通过不同的网络传输。
此外,子资源1以及子资源2的各传输分组设为对有效载荷(Payload)附加了报头的传输分组(Transport Packet)的形式。对各报头按每个子资源赋予了序列号(16比特)。如图15的(a)所示,对子资源1的各传输分组按传输顺序赋予了0x0000、0x0001、0x0002、……的序列号。同样地,对子资源2的各传输分组按传输顺序赋予了0x0000、0x0001、0x0002、……的序列号。
在传输了这样的资源的情况下,接收机接收被赋予了相同的序列号的传输分组。具体而言,接收机接收包括赋予了例如0x0001的序列号的传输分组的子资源1和子资源2。此时,接收机可知赋予了0x0001的序列号的子资源1的传输分组为子资源1的第2个分组,可知赋予了0x0001的序列号的子资源2的传输分组为子资源2的第2个分组。但是,接收到这样的传输分组的接收机不能判断赋予了0x0001的序列号的子资源1的传输分组和赋予了0x0001的序列号的子资源2的传输分组的分组顺序。这样,在图15的(a)所示的传输分组中,接收机虽然能够判断接收到的传输分组的每个子资源的分组顺序,但不能判断子资源间的分组顺序。
此外,与图15的(a)的资源相同地,图15的(b)的资源由子资源1以及子资源2构成。在各报头中,通过整个资源对各传输分组赋予了序列号。如图15的(b)所示,由于序列号是通过整个资源而赋予,所以没有相同的序列号。对子资源1的各传输分组按传输顺序赋予了0x0000、0x0002、0x0004、……的序列号,对子资源2的各传输分组按传输顺序赋予了0x0001、0x0003、0x0005、……的序列号。
在这样的子资源1以及子资源2通过不同的网络传输、接收机只接收到来自一个网络的子资源的情况下,例如只接收到子资源1的情况下,接收机接收被赋予了0x0000、0x0002、0x0004、……的序列号的传输分组。此时,接收机不能判断被赋予了0x0001、0x0003、0x0005、……的序列号的传输分组是否包含在其他的子资源中,是否发生了分组损失。
本发明是鉴于上述的问题点而完成的,其目的在于,提供一种生成对接收侧的再现装置通知各分组的适当的传输顺序的同时在发生了分组损失的情况下能够使其容易地检测分组损失的分组群的生成装置等。
为了解决课题的手段
为了解调上述的课题,本发明的生成装置,为了发送由一个以上的分量构成的内容,生成包括构成所述分量的多个单元中的一个单元的分组,其特征在于,所述生成装置包括:第一传输顺序分配单元,对所述多个单元分别将表示所述分量中的该单元的传输顺序的第一传输顺序信息分配给包括该单元的分组;第二传输顺序分配单元,对于构成所述内容的各单元,将表示该单元的传输顺序的第二传输顺序信息分配给包括该单元的分组;以及分组生成单元,对于所述多个单元的各个单元,作为包括该单元的分组而生成包括通过所述第一传输顺序分配单元而分配给该分组的所述第一传输顺序信息和通过所述第二传输顺序分配单元而分配给该分组的所述第二传输顺序信息的分组。
此外,本发明的生成装置,为了发送由一个以上的分量构成的内容,生成包括将所述分量进行分割而生成的多个单元中的一个单元的分组,其特征在于,所述生成装置包括:分割单元,将由所述多个单元构成的集合分割为多个部分集合;第一传输顺序分配单元,对所述多个单元分别将表示所述分量中的该单元的传输顺序的第一传输顺序信息分配给包括该单元的分组;第二传输顺序分配单元,对通过所述分割单元而被分割的每个所述部分集合,对于构成该部分集合的各单元,将表示该部分集合中的该单元的传输顺序的第二传输顺序信息分配给包括该单元的分组;分组生成单元,对于所述多个单元的各个单元,作为包括该单元的分组而生成包括通过所述第一传输顺序分配单元而分配给该分组的所述第一传输顺序信息和通过所述第二传输顺序分配单元而分配给该分组的所述第二传输顺序信息的分组。
此外,为了解决上述课题,本发明的生成方法是生成装置生成分组的生成方法,在所述生成装置中,为了发送由一个以上的分量构成的内容,生成包括对所述分量进行分割而生成的多个单元中的一个单元的分组,其特征在于,所述生成方法包括:分割步骤,将由所述多个单元构成的集合分割为多个部分集合;第一传输顺序分配步骤,对所述多个单元分别将表示所述分量中的该单元的传输顺序的第一传输顺序信息分配给包括该单元的分组;第二传输顺序分配步骤,对在所述分割步骤中被分割的每个所述部分集合,对于构成该部分集合的各单元,将表示该部分集合中的该单元的传输顺序的第二传输顺序信息分配给包括该单元的分组;以及分组生成步骤,对于所述多个单元的各个单元,作为包括该单元的分组而生成包括在所述第一传输顺序分配步骤中分配给该分组的所述第一传输顺序信息和在所述第二传输顺序分配步骤中分配给该分组的所述第二传输顺序信息的分组。
根据上述的结构,对多个单元分别生成包括表示分量中的该单元的传输顺序的第一传输顺序信息和对构成该部分集合的各单元表示该部分集合中的该单元的传输顺序的第二传输顺序信息的分组。
因此,在接收到该分组的再现装置中,能够根据上述分量中的该单元的传输顺序和上述部分集合中的该单元的传输顺序,以分量单位以及部分集合单位识别该单元的传输顺序。因此,起到能够容易地判断哪个分组没有被传输,能够容易地检测分组损失的效果。
此外,为了解决上述课题,本发明的再现装置,将由一个以上的分量构成的内容作为分组而接收并再现,在所述分组中,作为所述分量进行了分割的单元而包含所述内容,其特征在于,所述再现装置包括:检测单元,检测在接收到的分组中包括表示所述分量中的单元的传输顺序的第一传输顺序信息以及表示由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息的情况;以及再现单元,在所述检测单元检测到在所述分组中包括所述第一传输顺序信息以及所述第二传输顺序信息时,根据所述分量中的该单元的传输顺序以及所述部分集合中的该单元的传输顺序,对在该分组中包含的所述单元进行处理。
此外,为了解决上述课题,本发明的再现方法是再现装置的再现方法,在所述再现装置中,将由一个以上的分量构成的内容作为分组而接收并再现,在所述分组中,作为所述分量进行了分割的单元而包含所述内容,其特征在于,所述再现方法包括:检测步骤,检测在接收到的分组中包括表示所述分量中的单元的传输顺序的第一传输顺序信息以及表示由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息的情况;以及再现步骤,在所述检测步骤中检测到在所述分组中包括所述第一传输顺序信息以及所述第二传输顺序信息时,根据所述分量中的该单元的传输顺序以及所述部分集合中的该单元的传输顺序,对在该分组中包含的所述单元进行处理。
根据上述结构,在接收到的分组中包括上述分量中的该单元的传输顺序和上述部分集合中的该单元的传输顺序的情况下,能够容易地判断有无没有接收的分组,并且,能够降低由消失的分组的重发请求所引起的传输延迟。
此外,为了解决上述课题,本发明的数据结构是用于发送由一个以上的分量构成的内容的分组的数据结构,其特征在于,包括:对所述分量进行分割而生成的单元、表示所述分量中的该单元的传输顺序的第一传输顺序信息以及表示由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息。
上述数据结构的分组包括对所述分量进行分割而生成的单元、表示所述分量中的该单元的传输顺序的第一传输顺序信息以及表示由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息。因此,在接收到该数据结构的分组的再现装置中,能够根据第一传输顺序信息以及第二传输顺序信息来确定该单元在分量中的传输顺序和部分集合中的传输顺序。
因此,在再现装置中,能够以分量单位以及部分集合单位识别该单元的传输顺序。因此,能够容易地判断哪个分组没有被传输,能够容易地检测分组损失。
另外,上述生成装置以及上述再现装置既可以通过计算机实现,此时,通过使计算机作为上述生成装置以及上述再现装置的各单元动作,从而通过计算机实现上述生成装置以及上述再现装置的控制程序、以及记录了该控制程序的计算机可读取的记录介质也属于本发明的范围。
发明效果
如以上所述,本发明的生成装置包括:分割单元,将由多个单元构成的集合分割为多个部分集合;第一传输顺序分配单元,对所述多个单元分别将表示所述分量中的该单元的传输顺序的第一传输顺序信息分配给包括该单元的分组;第二传输顺序分配单元,对通过所述分割单元而被分割的每个所述部分集合,对于构成该部分集合的各单元,将表示该部分集合中的该单元的传输顺序的第二传输顺序信息分配给包括该单元的分组;分组生成单元,对于所述多个单元的各个单元,作为包括该单元的分组而生成包括通过所述第一传输顺序分配单元而分配给该分组的所述第一传输顺序信息和通过所述第二传输顺序分配单元而分配给该分组的所述第二传输顺序信息的分组。
此外,本发明的生成方法包括:分割步骤,将由多个单元构成的集合分割为多个部分集合;第一传输顺序分配步骤,对所述多个单元分别将表示所述分量中的该单元的传输顺序的第一传输顺序信息分配给包括该单元的分组;第二传输顺序分配步骤,对在所述分割步骤中被分割的每个所述部分集合,对于构成该部分集合的各单元,将表示该部分集合中的该单元的传输顺序的第二传输顺序信息分配给包括该单元的分组;以及分组生成步骤,对于所述多个单元的各个单元,作为包括该单元的分组而生成包括在所述第一传输顺序分配步骤中分配给该分组的所述第一传输顺序信息和在所述第二传输顺序分配步骤中分配给该分组的所述第二传输顺序信息的分组。
此外,本发明的再现装置包括:检测单元,检测在接收到的分组中包括表示所述分量中的单元的传输顺序的第一传输顺序信息以及由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息的情况;以及再现单元,在所述检测单元检测到在所述分组中包括所述第一传输顺序信息以及所述第二传输顺序信息时,根据所述分量中的该单元的传输顺序以及所述部分集合中的该单元的传输顺序,对在该分组中包含的所述单元进行处理。
此外,本发明的再现方法包括:检测步骤,检测在接收到的分组中包括表示所述分量中的单元的传输顺序的第一传输顺序信息以及由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息的情况;以及再现步骤,在所述检测步骤中检测到在所述分组中包括所述第一传输顺序信息以及所述第二传输顺序信息时,根据所述分量中的该单元的传输顺序以及所述部分集合中的该单元的传输顺序,对在该分组中包含的所述单元进行处理。
此外,本发明的数据结构包括对分量进行分割而生成的单元、表示所述分量中的该单元的传输顺序的第一传输顺序信息以及表示由包括该单元的多个单元构成的部分集合中的该单元的传输顺序的第二传输顺序信息。
因此,起到在再现装置中,能够容易地判断哪个分组没有被传输,能够容易地检测分组损失的效果。
附图说明
图1是表示构成本发明的一实施方式的内容发送系统的发送机以及接收机的主要部分结构的框图。
图2是表示在上述内容发送系统中处理的内容的数据结构的一例的图。
图3是表示上述内容的传输形式的一例的图。
图4是表示包括分组顺序信息的传输分组的一例的图。
图5是表示图4的传输分组的传输分组报头的构造(语法)的一例的图。
图6是表示包括分组顺序信息的传输分组的另一例的图。
图7是表示图6的传输分组的传输分组报头的构造(语法)的一例的图。
图8是表示结构信息的一例的图。
图9是表示上述发送机执行的传输分组生成处理的一例的流程图。
图10是表示上述接收机执行的再现处理的一例的流程图。
图11是表示在多个子资源中包括相同的传输分组的情况下的传输分组的一例的图。
图12是表示在多个子资源中作为传输分组而包括编码数据的情况下的传输分组的一例的图。
图13是表示在将多个资源分割为多个子资源时的传输分组的一例的图。
图14是表示从以往使用的内容的传输方式的图,该图(a)表示通过单一网络的传输的例,该图(b)表示通过多个网络的混合传输的例。
图15是表示现有技术的传输分组的一例的图,该图(a)表示以子资源单位对各传输分组赋予了序列号时的传输分组的例,该图(b)表示通过整个资源对各传输分组赋予了序列号时的传输分组的例。
具体实施方式
以下,基于图1~图13详细说明本发明的实施方式。
〔系统结构〕
首先,基于图1说明本实施方式的内容发送接收系统的结构。图1是表示构成内容发送接收系统3的发送机(生成装置)1以及接收机(再现装置)2的主要部分结构的框图。
如图所示,内容发送接收系统3是发送机1和接收机2经由网络而连接的结构,在内容发送接收系统3中,接收机2对发送机1发送的内容进行接收并再现。
另外,在图示的例中,发送机1和接收机2直接通信,但并不限定于此。例如,既可以是中继机对发送机1和接收机2的通信进行中继,也可以是从发送机1对其他的发布服务器发布内容,并从该发布服务器对接收机2发布内容。
此外,这里,说明了连接发送机1和接收机2的网络是互联网的例子,但该网络只要发送机1和接收机2能够发送接收内容即可,并不限定于此。例如,作为上述网络,既可以应用广播网,也可以采用并用互联网和广播网的混合发布。
发送机1是发布内容的装置,包括统一控制发送机1的功能的发送机控制部10、存储发送机1发送的数据的发送机存储部11以及用于发送机1与外部的装置进行通信的发送机通信部12。
此外,发送机控制部10包括内容分割部(分割单元)13、报头生成部(分组生成单元)14以及传输顺序分配部(第一传输顺序分配单元、第二传输顺序分配单元)15,在发送机存储部11中存储有内容16。
内容分割部13为了发布而分割内容16。具体而言,将内容的分量以例如媒体单元单位进行分割而生成媒体单元。此外,内容分割部13将分量分割为多个部分集合。具体而言,内容分割部13将由多个媒体单元构成的集合(资源)分割为多个部分集合(子资源)。此外,从内容16确定并提取结构信息(Composition Information:CI,再现用信息)或传输特性信息(Transport Characteristics:TC)等。另外,关于媒体单元、结构信息以及传输特性信息的细节,在后面叙述。
传输顺序分配部15对通过内容分割部13而生成的多个媒体单元分别将表示分量中的该媒体单元的传输顺序的信息(第一传输顺序信息)分配给包括该媒体单元的分组。
此外,传输顺序分配部15按每个子资源,将对构成该子资源的各媒体单元表示该子资源中的该媒体单元的传输顺序的信息(第二传输顺序信息)分配给包括该媒体单元的分组。
传输顺序分配部15将分配给各分组的第一传输顺序信息和第二传输顺序信息提供给报头生成部。
报头生成部14生成要对内容分割部13生成的数据附加的报头。具体而言,生成至少包括表示有效载荷类型(payload type)的信息的有效载荷格式报头(Payload FormatHeader),并将其分别附加到媒体单元、结构信息以及传输特性信息而生成有效载荷。
此外,对要发布的分组分别生成传输分组报头(Transport Packet Header),对有效载荷附加该传输分组报头而生成传输分组。在传输分组报头中,包括从传输顺序分配部15提供的第一传输顺序信息和第二传输顺序信息。另外,以下,将第一传输顺序信息和第二传输顺序信息称为分组顺序信息。
内容16是发送机1发布的内容。如上所述,内容16通过内容分割部13而被分割、通过报头生成部14被附加报头,作为传输分组而发布。
另一方面,接收机2是对内容进行接收并再现的装置,包括统一控制接收机2的功能的接收机控制部20、存储接收机2接收的数据的接收机存储部21、接收机2用于与外部的装置进行通信的接收机通信部22、显示图像的显示部23以及输出声音的声音输出部24。
此外,接收机控制部20包括报头分析部(检测单元)25、解码器26以及再现控制部(再现单元)27。
报头分析部25对接收到的传输分组的报头进行分析,执行对应于其分析结果的处理。具体而言,报头分析部25在分组顺序信息(后述的内序列号和/或外序列号)中有不连续等、检测到分组损失的情况下,对接收机通信部22指示重发请求。此外,报头分析部25在进行了分析的报头表示作为有效载荷而包括媒体单元的情况下,将该有效载荷发送到解码器26中进行解码。另一方面,在进行了分析的报头表示作为有效载荷而包括结构信息的情况下,将该有效载荷发送到再现控制部27。
解码器26对在接收到的传输分组中包含的媒体单元进行解码。解码后的数据根据再现控制部27的控制,从显示部23以及声音输出部24输出。
再现控制部27根据结构信息而再现分量。具体而言,再现控制部27使解码器26解码后的媒体单元根据结构信息,从显示部23以及声音输出部24输出。
〔内容的数据结构〕
接着,基于图2说明内容16的数据结构。图2是表示内容16的数据结构的一例的图。
内容16作为包括报头、结构信息(CI)、传输特性信息(TC)以及多个资源(Asset)的包(Package)而存储在发送机存储部11中。
资源是影像、声音、文本等的分量,由报头和多个媒体单元(M-Unit:MU)构成。此外,媒体单元是成为随机接入或赋予时戳的单位的单元,由报头和多个媒体片段单元(Media Fragment Unit:MFU)构成。
结构信息表示分量的再现方式。具体而言,结构信息表示各分量的显示位置、显示大小等的布局、能否进行分量间的组合(能否进行与其他的分量进行同时再现)等。各媒体单元参照结构信息而再现。
传输特性信息表示各分量的传输特性。具体而言,传输特性信息表示用于判断最佳发布路径的各分量的必要频带或容许延迟等。
〔内容的传输形式〕
接着,基于图3说明内容16的传输形式。图3是表示内容16的传输形式的一例的图。
在通过TCP/IP、UDP/IP等传输的情况下,将内容16设为对有效载荷(Payload)附加了报头的传输分组(Transport Packet)的形式。在该有效载荷的报头中记述上述的分组顺序信息。
此外,如图所示,发布内容16的包时的有效载荷格式是对媒体单元(MU)、结构信息(CI)以及传输特性信息(TC)分别附加了报头的形式。
另外,在图3的有效载荷格式中,将一个媒体单元作为一个有效载荷,但并不限定于此。例如,在传输分组的大小上有限制的情况下,既可以将媒体单元进一步分割而分别作为不同的有效载荷而传输,也可以将多个媒体单元汇集作为一个有效载荷而传输。此时,也可以在有效载荷格式报头中,记述表示是否包括构成媒体单元的最初的媒体片段单元的标记、表示是否包括构成媒体单元的最后的媒体片段单元的标记等。
〔分组顺序信息的细节〕
接着,基于图4~图7说明分组顺序信息的细节。
(分组顺序信息的具体例1)
图4是表示包括分组顺序信息的传输分组的一例的图。在图4中,表示在由子资源1以及子资源2构成的资源中包含的传输分组。各传输分组对有效载荷赋予了16比特的报头。在报头中,作为分组顺序信息包括对每个子资源表示该子资源内的各传输分组的传输顺序的8比特的内序列号(Intra sequence number;第二传输顺序信息)、表示资源内的各传输分组的传输顺序的8比特的外序列号(Inter sequence number;第一传输顺序信息)。
如图4所示,在子资源1中,包括内序列号为0x00、0x01、0x02、……的传输分组。此外,在子资源2中,包括内序列号为0x00、0x01、0x02、……的传输分组。接收机2通过对内序列号进行分析,能够检测在子资源内的序号的遗失(分组遗失)。
此外,在子资源1中,包括外序列号为偶数序号(0x00、0x02、0x04、……)的传输分组,在子资源2中,包括外序列号为奇数序号(0x01、0x03、0x05、……)的传输分组。接收机2通过对这样的外序列号进行分析,能够判断该资源的各传输分组应以什么顺序传输。
图5是表示图4的传输分组的传输分组报头的构造(语法)的一例的图。
在图5的传输分组报头构造中,在1比特的标记inter_flag之后为inter_flag==‘1’的情况下,接续表示内序列号的8比特的值intra_sequence_number和表示外序列号的8比特的值inter_sequence_number。此外,在不是inter_flag==‘1’的情况下,接续表示与以往相同的序列号的16比特的值sequence_number。
由此,报头生成部14能够生成分别独立地包括内序列号和外序列号的传输分组。
由此,接收到该传输分组的接收机2能够识别该传输分组的资源中的传输顺序和子资源中的传输顺序。
(分组顺序信息的具体例2)
图6是表示包括分组顺序信息的传输分组的另一例的图。在图6中,表示在由子资源1以及子资源2构成的资源中包含的传输分组。各传输分组对有效载荷赋予了16比特的报头。在报头中,作为分组顺序信息而记载16比特的连接序列号(Concatenated sequencenumber)。在连接序列号的低位8比特中,包括对每个子资源表示该子资源内的各传输分组的传输顺序的内序列号(Intra sequence number)。此外,在连接序列号的高位8比特中,包括表示资源内的各传输分组的传输顺序的外序列号(Inter sequence number)。
如图6所示,在子资源1中,包括连接序列号的低位8比特(内序列号)为00、01、02、……的传输分组。此外,在子资源2中,包括连接序列号的低位8比特(内序列号)为00、01、02、……的传输分组。接收机2通过对连接序列号的低位8比特(内序列号)进行分析,能够检测在子资源内的序号的遗失(分组遗失)。
此外,在子资源1中,包括连接序列号的高位8比特(外序列号)为偶数序号(0x00、0x02、0x04、……)的传输分组,在子资源2中,包括连接序列号的高位8比特(外序列号)为奇数序号(0x01、0x03、0x05、……)的传输分组。接收机2通过对这样的外序列号进行分析,能够判断该资源的各传输分组应以什么顺序传输。
图7是表示图6的传输分组的传输分组报头的构造(语法)的一例的图。
在图7的传输分组报头构造中,在1比特的标记concatenated_flag之后为concatenated_flag==‘1’的情况下,接续表示连接序列号的16比特的值concatenated_sequence_number。此外,在不是concatenated_flag==‘1’的情况下,接续表示与以往相同的序列号的16比特的值sequence_number。
由此,报头生成部14能够生成包括将内序列号和外序列号进行汇集的连接序列号的传输分组。
由此,接收到该传输分组的接收机2能够识别该传输分组的资源中的传输顺序和子资源中的传输顺序。
另外,在上述中,说明了将外序列号为偶数序号的传输分组包含在子资源1中、将外序列号为奇数序号的传输分组包含在子资源2的情况,但传输分组包含在哪个子资源中并不限定于此,是任意的。
〔结构信息的具体例〕
接着,基于图8说明结构信息的具体例。图8是表示结构信息的一例的图。
在图8所示的结构信息中,通过<layout>标签而定义了区域r1(对应于全画面显示)以及区域r2(对应于将显示画面进行了纵横4分割的左上区域)。并且,通过指定对构成资源的子资源进行合并的<union>标签,对区域r1相关联了子资源a11和子资源a12。此外,通过指定资源的相互排他性(Mutually Exclusive)显示的<excl>标签,定义了能够进行是将子资源a21显示在区域r2中还是将子资源a22显示在区域r2中的任一个。此外,包括表示从时刻0s开始应用该布局的记述(start="0s")。
因此,接收机2与包括子资源a11、a12、a21以及a22的内容的再现开始同时(从0s开始),如该图所示,合并子资源a11以及a12而设为全画面显示,将子资源a21或者a22缩小为1/4而显示在画面的左上。
另外,在图8中,表示了通过SMIL(Synchronized Multimedia IntegrationLanguage,同步多媒体集成语言)而记述了结构信息的例,但结构信息只要表示资源的显示方式即可,其记述形式并不特别限定。
〔传输分组生成处理的流程〕
接着,基于图9说明发送机1执行的传输分组生成处理(分组生成方法)的流程。图9是表示传输分组生成处理的一例的流程图。另外,进行传输分组生成处理的定时并不特别限定。例如在随选发布中,从接收机2接收到内容的发送请求时,在实时发布中编码内容时进行即可。
首先,内容分割部13读出在发送机存储部11中存储的内容16,生成有效载荷(严格地说,在图3中的传输分组的有效载荷部分中存储的数据)。具体而言,内容分割部13从如图2所示那样打包而存储的内容16取得资源,对取得的资源进行分割而生成多个有效载荷(S91)。并且,内容分割部13将如上所述那样生成的多个有效载荷输出到报头生成部14。
另外,对于有效载荷的分割单位并不限定于媒体单元。例如,在有效载荷的大小上有限制的情况下,也可以将媒体单元以规定的大小进一步分割后的单元作为有效载荷。此外,在尽可能减小分割的开销的情况下等,也可以将多个媒体单元汇集而作为一个有效载荷。此外,内容分割部13还从内容16提取在包中包含的结构信息(CI)、传输特性信息(TC),并输出到报头生成部14。
接着,报头生成部14根据被输入的多个有效载荷,生成包括表示有效载荷类型的信息的有效载荷格式(S92)。具体而言,报头生成部14生成记述了表示有效载荷类型为媒体单元的信息(payload_type=MU)的有效载荷格式报头,并将该有效载荷格式报头附加到各媒体单元,生成如图3所示的有效载荷格式。
另外,设为有效载荷格式的有效载荷类型是对应于从内容分割部13接收到的数据的类型。例如,在从内容分割部13被输入了结构信息的情况下,生成记述了表示有效载荷类型为结构信息的信息(payload_type=CI)的有效载荷格式报头。同样地,在被输入了传输特性信息(TC)的情况下,生成记述了表示是传输特性信息的信息(payload_type=TC)的有效载荷格式报头。
接着,内容分割部13将取得的资源分割为子资源(部分集合)。具体而言,将在S91中生成的多个有效载荷分别分割为多个子资源(S93、分割步骤)。
接着,传输顺序分配部15对内容分割部13分割后的多个有效载荷分别分配表示该有效载荷在内容(资源)内的传输顺序的信息(外序列号)(S94、第一传输顺序分配步骤)。此外,传输顺序分配部15对内容分割部13分割后的多个有效载荷分别分配表示该有效载荷在子资源内的传输顺序的信息(内序列号)(S95、第二传输顺序分配步骤)。
之后,报头生成部14生成包括在S94以及S95中分配给各有效载荷的外序列号以及内序列号的传输分组报头,并将该传输分组报头附加到在S92中生成的有效载荷格式,生成如图3所示的传输分组(S96、分组生成步骤)。
并且,报头生成部14将生成的传输分组输出到发送机通信部12(S97),结束传输分组生成处理。由此,如上所述那样生成的传输分组经由网络发送到接收机2。
由此,本发明中的发送机1对多个有效载荷分别生成包括表示资源中的该有效载荷的传输顺序的外序列号和表示子资源中的该有效载荷的传输顺序的内序列号的传输分组。
因此,在接收到该传输分组的接收机2中,能够根据资源中的有效载荷的传输顺序和子资源中的该有效载荷的传输顺序,以资源单位以及子资源单位识别该有效载荷的传输顺序。因此,起到能够容易地判断哪个传输分组没有被传输,能够容易地检测分组损失的效果。
〔再现处理的流程〕
接着,基于图10说明接收机2执行的再现处理(再现方法)的流程。图10是表示再现处理的一例的流程图。另外,在图10中,对一个传输分组表示从其接收到输出为止的处理。传输分组报头构造使用图5所示的构造。
接收机通信部22经由网络接收从发送机1的发送机通信部12发送的传输分组(S100),并将该传输分组输出到报头分析部25。并且,报头分析部25对接收到的传输分组的报头(传输分组报头)进行分析(S101),判断是否为inter_flag==‘1’(S102、检测步骤)。
在该分析的结果确认为是inter_flag==‘1’的情况下(S102中“是”),报头分析部25取得在传输分组报头中包含的外序列号以及内序列号(S103)。另一方面,在不是inter_flag==‘1’的情况下(S102中“否”),报头分析部25取得在传输分组报头中包含的序列号(S104)。
接着,基于在S103或者S104中取得的序列号和过去接收到的传输分组的序列号,检测有无分组损失(S105、检测步骤)。在检测到分组损失的情况下(S105中“是”),报头分析部25对接收机通信部22指示所消失的分组的重发请求(S106)。尤其,在inter_flag==‘1’的情况下,在检测到多个分组的消失的情况下,从外序列号小的分组开始先进行重发请求。由此,能够降低重发所引起的传输延迟。
在S105或者S106结束后,报头分析部25分析有效载荷格式报头(S107),判断是否为payload_type==MU(S108)。在为payload_type==MU的情况下(S108中“是”),将在附加了该有效载荷格式报头的传输分组中包含的媒体单元输出到解码器26(S109)。
由此,该媒体单元进行解码,并通过再现控制部27的控制,根据结构信息而从显示部23和/或声音输出部24输出(再现步骤),再现处理结束。
另一方面,在S107的分析的结果不是payload_type==MU的情况下(S108中“否”),根据payload_type而将有效载荷输出到各处理部(S110)。例如,若为payload_type==CI,则由于有效载荷包括结构信息,所以使该有效载荷发送到再现控制部27而进行设定。由此,再现处理结束。
由此,本发明中的接收机2在接收到的传输分组中包括资源中的有效载荷的传输顺序和子资源中的该有效载荷的传输顺序的情况下,能够容易地判断有无没有接收的传输分组,并且,能够降低由消失的分组的重发请求所引起的传输延迟。
〔变形例:关于外序列号以及内序列号的分配比特〕
在上述中,说明了外序列号和内序列号分别被赋予8比特的情况,但外序列号以及内序列号的比特分配并不限定于此。外序列号以及内序列号的比特分配既可以是均等的,也可以将任一方的比特数较大地分配。
例如,在子资源的分割数增加的情况下,也可以对外序列号分配多于内序列号的比特。例如,也可以对外序列号分配10比特、对内序列号分配6比特。
或者,也可以通过将表示外序列号以及内序列号的分配模式的信息附加到传输分组报头等,从而动态地改变比特数。此时,接收机2侧通过对附加了表示分配模式的信息的传输分组报头进行分析,能够确认对外序列号以及内序列号分配了多少比特。
〔变形例:关于传输分组对于子资源的分割〕
在上述中,说明了将资源分割为两个子资源的情况,但资源能够分割的子资源的数并不限定于2,是任意的。此外,说明了传输分组包含在子资源中的任一个的情况,但传输分组也可以包含在多个子资源中。对此,参照图11进行说明。
图11是表示在多个子资源中包括相同的传输分组的情况下的传输分组的一例的图。如图11所示,资源由子资源1和子资源2构成。在子资源1中,包括内序列号为0x00、0x01、0x02、……且外序列号为0x00、0x02、0x04、……的传输分组。此外,在子资源2中,包括内序列号为0x00、0x01、0x02、0x03、……且外序列号为0x01、0x02、0x03、0x05、……的传输分组。
如图11所示,在子资源1以及子资源2中,包括被赋予了相同的外序列号(在图11的例中为0x02)的传输分组。由于外序列号表示资源内的各传输分组的传输顺序,所以可知外序列号为相同的序号的传输分组是相同的分组。
由此,通过具有将相同的传输分组包含在多个子资源中这样的传输分组的冗余性,起到提高抗分组损失性的效果。
〔变形例:关于子资源分割的变化1〕
内容分割部13也可以将内容分割为内编码数据(在帧内进行了压缩编码的数据)和外编码数据(在帧间进行了压缩编码的数据),并分别包含在不同的子资源中进行传输。对此,参照图12进行说明。
图12是表示在多个子资源中作为传输分组而包括编码数据的情况下的传输分组的一例的图。如图12所示,资源由子资源1和子资源2构成。在子资源1中,包括内编码数据的传输分组。此外,在子资源2中,包括外编码数据的传输分组。在子资源1以及子资源2中包含的传输分组是包括上述的外序列号以及内序列号的传输分组。另外,在图12的例中,表示了外序列号和内序列号分别独立地附加到有效载荷的例,但也可以是如图6所示那样外序列号和内序列号进行了汇集的连接序列号附加到有效载荷。发送机1发送这样的资源。
在用户视听内容时,进行了快进等的特技播放的情况下,接收机2只接收子资源1即可,即使是在子资源2的传输分组中检测到分组损失的情况下,也不需要进行该分组的重发请求。此外,在用户通过普通再现视听内容的情况下,接收机2需要接收子资源1以及子资源2的双方,但在检测到分组损失的情况下,通过对子资源1的传输分组优先进行重发请求,从而能够抑制整体的质量降低。
此外,通过对内序列号以及外序列号进行分析,接收机2能够容易地确认哪个分组没有被传输。
由此,在本变形例中的资源是并用多个预测方式(例如,内编码以及外编码)而进行了预测编码的资源。内容分割部13能够分割为各子资源由使用相同的预测方式而进行了编码的单元构成的多个子资源。
〔变形例:关于子资源分割的变化2〕
内容分割部13也可以对内容进行层次编码(例如,时间可扩展性(timescalability)),将基层数据(低帧率影像)和增强层数据(高帧率用差分影像)分别包含在不同的子资源中进行传输。
例如,如图12所示,在子资源1中包括基层数据的传输分组,在子资源2中包括增强层数据的传输分组。在子资源1以及子资源2中包含的传输分组是包括了上述的外序列号以及内序列号的传输分组。另外,在图12的例中,表示了外序列号和内序列号分别独立地附加到有效载荷的例,但也可以是如图6所示那样将外序列号和内序列号进行了汇集的连接序列号附加到有效载荷。发送机1发送这样的资源。
在用户视听内容时,低帧率影像再现内容的情况下,用户视听内容的时接收机2只接收子资源1即可,即使是在子资源2的传输分组中检测到分组损失的情况下,也不需要进行该分组的重发请求。此外,在用户以高帧率影像再现内容的情况下,接收机2需要接收子资源1以及子资源2的双方,但在检测到分组损失的情况下,通过对子资源1的传输分组优先进行重发请求,从而能够抑制整体的质量降低。
此外,通过对内序列号以及外序列号进行分析,接收机2能够容易地确认哪个分组没有被传输。
由此,本变形例中的多个有效载荷由帧率等的质量不同的多个层次的有效载荷构成。内容分割部13能够分割为各子资源由相同层次的有效载荷构成的多个子资源。
〔变形例:关于子资源分割的变化3〕
在上述中,说明了生成包括对构成内容的一个资源进行分割而生成的多个媒体单元中的一个媒体单元的分组的发送机1,但发送机1也可以生成包括对构成内容的多个资源的各个进行分割而生成的多个媒体单元中的一个媒体单元的分组。对此,参照图13进行说明。
图13是表示将多个资源分割为多个子资源时的传输分组的一例的图。如图13所示,对有效载荷赋予了连接序列号。连接序列号的高位8比特表示外序列号,接下来的6比特表示内序列号,低位2比特表示资源ID(Asset ID;分量信息)。资源1(Asset ID=1)是影像数据和声音数据进行了复用的分量。具体而言,在资源1中,包括影像数据(V)和英语声音数据(A)。此外,资源2(Asset ID=2)是由包括日语字幕数据(T)的多个语言的字幕数据构成的分量。此外,在子资源1中包括资源1的影像数据(V),在子资源2中包括资源1的英语声音数据(A)和资源2的日语字幕数据(T)。发送机1发送这样的资源。
接收机2在为普通再现(使用了影像数据和声音数据的再现)的情况下,需要接收子资源1和子资源2。但是,在不显示字幕的情况下、即不使用资源2的分组的情况下,通过参照连接序列号的低位2比特,丢弃包括字幕数据的分组。另外,图13所示的资源2的数据中,连接序列号的高位8比特(外序列号)成为0x01、0x03、……,不接收0x00、0x02的分组。但是,由于资源2是不使用的数据,所以即使是在检测到资源2的数据的分组损失的情况下,接收机2也可以不对发送机1请求上述传输分组的重发。
由此,在本变形例中,分割为在某一子资源(例如,子资源2)中包括多个资源的多个有效载荷。分割后的有效载荷生成包括表示多个资源中的该有效载荷的传输顺序的信息(外序列号)、表示子资源2中的该有效载荷的传输顺序的信息(内序列号)、在多个资源中表示该有效载荷的资源的资源ID的传输分组。
因此,在接收到该传输分组的接收机2中,通过参照资源ID,只接收必要的资源(例如,资源1)的传输分组即可,能够省略在没有接收其他的资源(例如,资源2)的传输分组时对发送机1请求该传输分组的重发的处理。
〔关于进行传输分组的发布的主体〕
在上述中,说明了传输分组的生成和发布都由发送机1进行的例,但也可以由其他的装置进行传输分组的生成和发布。此外,也可以分别由多个装置进行传输分组的生成和发布。例如,也可以在某一装置中生成广播发布用内容的传输分组,在其他的装置中生成随选发布用(例如通信发布用)内容的传输分组。此时,在某一装置和其他的装置的任一个装置中,生成包括分组顺序信息的传输分组即可。
本发明并不限定于上述的实施方式,在权利要求所示的范围内能够进行各种变更。即,将在权利要求所示的范围内适当变更的技术手段进行组合而获得的实施方式也包含在本发明的技术范围中。
〔基于软件的实现例〕
最后,发送机1以及接收机2的各模块、尤其发送机控制部10以及接收机控制部20既可以通过在集成电路(IC芯片)上形成的逻辑电路以硬件方式实现,也可以使用CPU(Central Processing Unit,中央处理器)以软件方式实现。
在后者的情况下,发送机1以及接收机2包括执行实现各功能的程序的命令的CPU、存储了上述程序的ROM(Read Only Memory,只读存储器)、展开上述程序的RAM(RandomAccess Memory,随机存取存储器)、存储上述程序以及各种数据的存储器等的存储装置(记录介质)等。并且,通过将作为实现上述的功能的软件的发送机1以及接收机2的控制程序的程序代码(执行形式程序、中间代码程序、源程序)以计算机可读取地记录的记录介质提供给发送机1以及接收机2,其计算机(或者CPU或MPU)读出并执行在记录介质中记录的程序代码,也能够实现本发明的目的。
作为上述记录介质,例如可以使用磁带或卡带等的带类、包括软盘(注册商标)/硬盘等磁盘以及CD-ROM/MO/MD/DVD/CD-R等光盘的盘类、IC卡(包括存储卡)/光卡等的卡类、掩膜ROM/EPROM/EEPROM/闪存ROM等的半导体存储器类、或者PLD(Programmable logicdevice,可编程逻辑驱动器)或FPGA(Field Programmable Gate Array,现场可编程门阵列)等的逻辑电路类等。
此外,也可以将发送机1以及接收机2构成为能够与通信网络进行连接,通过通信网络而提供上述程序代码。该通信网络只要能够传输程序代码即可,没有特别限定。例如,可以利用互联网、内联网、外联网、LAN、ISDN、VAN、CATV通信网、虚拟专用网(virtualprivate network)、电话线路网、移动通信网、卫星通信网等。此外,构成该通信网络的传输介质,也只要是能够传输程序代码的介质即可,不限定于特定的结构或者种类。例如,也可以利用IEEE1394、USB、电力线传输、电缆TV线路、电话线、ADSL(Asymmetric DigitalSubscriber Line,非对称数字用户环路)线路等的有线,也可以利用IrDA或遥控那样的红外线、蓝牙(Bluetooth(注册商标))、IEEE802.11无线、HDR(High Data Rate,高数据速率)、NFC(Near Field Communication,近距离无线通信)、DLNA(Digital Living NetworkAlliance,数字生活网络联盟)、移动电话网、卫星线路、地面波数字网等的无线。另外,通过上述程序代码以电子化传输而具体化的、嵌入载波的计算机数据信号的方式也能够实现本发明。
〔有关本发明的备注〕
优选地,本发明的生成装置的所述分组生成单元将所述第一传输顺序信息和所述第二传输顺序信息分别独立地包含在所述分组中。此外,也可以构成为,本发明的生成装置的所述分组生成单元将所述第一传输顺序信息和所述第二传输顺序信息汇集而包含在所述分组中。
根据上述结构,生成装置能够生成上述第一传输顺序信息和上述第二传输顺序信息分别独立地包含在该分组中的分组或者汇集而包含在该分组中的分组。
因此,即使是上述第一传输顺序信息和上述第二传输顺序信息分别独立地包含的分组或者即使是上述第一传输顺序信息和上述第二传输顺序信息汇集而包含的分组,接收到该分组的再现装置也能够识别该单元在上述分量中的该单元的传输顺序和上述部分集合中的该单元的传输顺序。
此外,也可以构成为,本发明的生成装置的所述分量是并用多个预测方式而进行了预测编码的分量,所述分割单元将由所述多个单元构成的集合分割为各部分集合由使用相同的预测方式而进行了预测编码的单元构成的多个部分集合。
根据上述结构,生成装置将例如进行了帧内压缩编码的数据和进行了帧间压缩编码的数据分割为不同的部分集合。
因此,再现装置能够选择是只接收预测方式不同的数据的一方还是接收双方。
此外,也可以构成为,本发明的生成装置的所述多个单元由质量不同的多个层次的单元构成,所述分割单元将由所述多个单元构成的集合分割为各部分集合由相同层次的单元构成的多个部分集合。
根据上述结构,生成装置将通过例如层次编码进行了编码的基层数据和增强层数据分割为不同的部分集合。
因此,再现装置能够选择是只接收这样层次不同的数据的一方还是接收双方。
此外,也可以构成为,本发明的生成装置的所述生成装置是生成包括对构成内容的多个分量的各个分量进行分割而生成的多个单元中的一个单元的分组的生成装置,所述第一传输顺序分配单元对所述多个单元分别将表示所述多个分量中的该单元的传输顺序的信息作为所述第一传输顺序信息分配给包括该单元的分组,所述分组生成单元生成包括所述第一传输顺序信息、所述第二传输顺序信息以及表示包括该单元的分量的分量信息的分组。
根据上述结构,分割为在某一部分集合中包括多个分量的多个单元。分割后的单元生成包括多个分量中的该单元的传输顺序、上述部分集合中的该单元的传输顺序、在多个分量中表示该单元的分量的分量信息的分组。
因此,在接收到该分组的再现装置中,通过参照所述分量信息,只接收必要的分量的分组即可,能够省略在没有接收其他的分量的分组时对生成装置请求该分组的重发的处理。
产业上的可利用性
本发明能够用于经由网络发送内容的发送机以及经由网络接收内容的接收机。
符号说明
1 发送机(生成装置)
10 发送机控制部
11 发送机存储部
12 发送机通信部
13 内容分割部(分割单元)
14 报头生成部(分组生成单元)
15 传输顺序分配部(第一传输顺序分配单元、第二传输顺序分配单元)
16 内容
2 接收机(再现装置)
20 接收机控制部
21 接收机存储部
23 显示部
24 声音输出部
25 报头分析部(检测单元)
26 解码器
27 再现控制部(再现单元)
3 内容发送接收系统
Claims (2)
1.一种再现装置,其特征在于,具备:
接收单元,接收分组;
检测单元,基于所述分组检测在包中包含的多个有效载荷中的一个有效载荷、表示所述有效载荷包括媒体单元的情况的有效载荷类型、表示所述包中的所述有效载荷的传输顺序的第一传输顺序信息、表示所述包的部分集合中的所述有效载荷的传输顺序的第二传输顺序信息以及表示是否包括所述第一传输顺序信息的标记;
解码单元,在由所述有效载荷类型表示所述有效载荷包括所述媒体单元的情况下,对所述媒体单元进行解码;以及
再现单元,对所述媒体单元进行再现,
在所述标记为1时,所述检测单元检测所述第一传输顺序信息。
2.一种再现方法,其特征在于,包括以下步骤:
接收分组的步骤;
基于所述分组检测在包中包含的多个有效载荷中的一个有效载荷、表示所述有效载荷包括媒体单元的情况的有效载荷类型、表示所述包中的所述有效载荷的传输顺序的第一传输顺序信息、表示所述包的部分集合中的所述有效载荷的传输顺序的第二传输顺序信息以及表示是否包括所述第一传输顺序信息的标记的步骤;
在由所述有效载荷类型表示所述有效载荷包括所述媒体单元的情况下,对所述媒体单元进行解码的步骤;以及
对所述媒体单元进行再现的步骤,
在所述检测步骤中,在所述标记为1时,检测所述第一传输顺序信息。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012-019155 | 2012-01-31 | ||
JP2012019155 | 2012-01-31 | ||
CN201380007329.4A CN104106247B (zh) | 2012-01-31 | 2013-01-28 | 再现装置、生成装置及系统 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380007329.4A Division CN104106247B (zh) | 2012-01-31 | 2013-01-28 | 再现装置、生成装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108347492A CN108347492A (zh) | 2018-07-31 |
CN108347492B true CN108347492B (zh) | 2021-03-05 |
Family
ID=48905160
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380007329.4A Expired - Fee Related CN104106247B (zh) | 2012-01-31 | 2013-01-28 | 再现装置、生成装置及系统 |
CN201810460987.3A Expired - Fee Related CN108347492B (zh) | 2012-01-31 | 2013-01-28 | 再现装置以及再现方法 |
CN201810460618.4A Pending CN108347491A (zh) | 2012-01-31 | 2013-01-28 | 生成装置以及生成方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380007329.4A Expired - Fee Related CN104106247B (zh) | 2012-01-31 | 2013-01-28 | 再现装置、生成装置及系统 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810460618.4A Pending CN108347491A (zh) | 2012-01-31 | 2013-01-28 | 生成装置以及生成方法 |
Country Status (5)
Country | Link |
---|---|
US (3) | US9813350B2 (zh) |
EP (1) | EP2811705B1 (zh) |
JP (5) | JP5661206B2 (zh) |
CN (3) | CN104106247B (zh) |
WO (1) | WO2013115121A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2811705B1 (en) * | 2012-01-31 | 2019-06-26 | Sharp Kabushiki Kaisha | Generation device and generation method for data packets |
CN105075281B (zh) * | 2013-06-05 | 2019-01-01 | 太阳专利托管公司 | 数据解码方法、数据解码装置及数据发送方法 |
WO2015029401A1 (ja) | 2013-08-29 | 2015-03-05 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 送信方法および受信方法ならびに送信装置および受信装置 |
KR102131699B1 (ko) * | 2013-11-07 | 2020-07-08 | 삼성전자주식회사 | 컨텐츠 송신기 및 컨텐츠 수신기와, 컨텐츠 송신 방법 및 컨텐츠 수신 방법 |
CN103634229B (zh) * | 2013-11-26 | 2017-09-29 | 华为技术有限公司 | 一种片间通讯方法及控制装置 |
KR20160004858A (ko) * | 2014-07-04 | 2016-01-13 | 삼성전자주식회사 | 멀티미디어 통신 시스템에서 패킷 송/수신 장치 및 방법 |
WO2016125654A1 (ja) * | 2015-02-02 | 2016-08-11 | 日立マクセル株式会社 | 放送受信装置、放送受信方法及びコンテンツ出力方法 |
US10271094B2 (en) * | 2015-02-13 | 2019-04-23 | Samsung Electronics Co., Ltd. | Method and device for transmitting/receiving media data |
US10439949B2 (en) | 2015-05-08 | 2019-10-08 | Sony Corporation | Transmission control device, transmission control method, reception control device, and reception control method |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1984299A (zh) * | 2005-12-12 | 2007-06-20 | Lg电子株式会社 | 在视频设备中再现传输流的方法及使用该方法的视频设备 |
CN101042914A (zh) * | 2006-03-01 | 2007-09-26 | 索尼株式会社 | 数据处理装置及方法、数据结构、再现装置及方法 |
Family Cites Families (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63306740A (ja) * | 1987-06-08 | 1988-12-14 | Nippon Telegr & Teleph Corp <Ntt> | パケット通信方式 |
JP3887856B2 (ja) | 1996-12-13 | 2007-02-28 | 株式会社日立製作所 | 端末装置 |
JPH11215192A (ja) | 1998-01-29 | 1999-08-06 | Matsushita Electric Ind Co Ltd | 可変長パケット通信方法およびパケット通信装置 |
US20060117340A1 (en) * | 2000-05-05 | 2006-06-01 | Ictv, Inc. | Interactive cable television system without a return path |
US7103669B2 (en) | 2001-02-16 | 2006-09-05 | Hewlett-Packard Development Company, L.P. | Video communication method and system employing multiple state encoding and path diversity |
JP3600189B2 (ja) * | 2001-06-19 | 2004-12-08 | 松下電器産業株式会社 | パケット送受信装置及びパケット伝送方法 |
JP3931595B2 (ja) * | 2001-07-10 | 2007-06-20 | 株式会社日立製作所 | データ修正装置及びデータ修正方法 |
JP2003152626A (ja) | 2001-11-14 | 2003-05-23 | Nippon Telegr & Teleph Corp <Ntt> | マルチキャストされたストリームコンテンツを受信する端末装置 |
JP4301559B2 (ja) * | 2002-03-22 | 2009-07-22 | パイオニア株式会社 | 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造 |
CN100568964C (zh) * | 2003-02-18 | 2009-12-09 | 诺基亚有限公司 | 图像解码方法 |
US7627184B2 (en) * | 2003-11-21 | 2009-12-01 | Nec Corporation | Content distribution/reception device, content transmission/reception method, and content distribution/reception program |
KR100710290B1 (ko) * | 2003-11-29 | 2007-04-23 | 엘지전자 주식회사 | 비디오 디코딩 장치 및 방법 |
KR100556911B1 (ko) * | 2003-12-05 | 2006-03-03 | 엘지전자 주식회사 | 무선 동영상 스트리밍 서비스를 위한 동영상 데이터의 구조 |
US7567584B2 (en) * | 2004-01-15 | 2009-07-28 | Panasonic Corporation | Multiplex scheme conversion apparatus |
US8018850B2 (en) * | 2004-02-23 | 2011-09-13 | Sharp Laboratories Of America, Inc. | Wireless video transmission system |
JP4007331B2 (ja) * | 2004-02-24 | 2007-11-14 | ソニー株式会社 | 再生装置および方法 |
US8356327B2 (en) * | 2004-10-30 | 2013-01-15 | Sharp Laboratories Of America, Inc. | Wireless video transmission system |
KR100651486B1 (ko) * | 2004-12-07 | 2006-11-29 | 삼성전자주식회사 | 네트워크를 통해 멀티미디어 컨텐츠를 전송하는 장치 및방법 |
JP4198741B2 (ja) * | 2005-01-28 | 2008-12-17 | シャープ株式会社 | 通信機器、通信システム、通信方法、通信プログラム、通信回路 |
JP4430597B2 (ja) * | 2005-08-26 | 2010-03-10 | 日本電信電話株式会社 | ネットワークシステム、送信側振分装置、パケット通信方法、および、パケット通信プログラム |
KR20070052650A (ko) * | 2005-11-17 | 2007-05-22 | 엘지전자 주식회사 | 기록매체 재생방법 및 재생장치, 기록매체와 기록매체기록방법 및 기록장치 |
JP2007300630A (ja) * | 2006-04-27 | 2007-11-15 | Asustek Computer Inc | 無線通信システムにおいてsduの分割及び番号付けを行う方法及び装置 |
JP4142068B2 (ja) * | 2006-06-16 | 2008-08-27 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置およびアクセス制御方法 |
JP4352079B2 (ja) * | 2007-03-28 | 2009-10-28 | 株式会社東芝 | 分散データベースから情報を検索するシステム、装置、および方法 |
JP5355546B2 (ja) * | 2007-04-17 | 2013-11-27 | コーニンクレッカ フィリップス エヌ ヴェ | パケットヘッダ構造 |
WO2008156257A2 (en) * | 2007-06-18 | 2008-12-24 | Samsung Electronics Co., Ltd. | Method and apparatus for transporting mobile broadcasting service, and method and apparatus for receiving mobile broadcasting service |
JP2009004444A (ja) | 2007-06-19 | 2009-01-08 | Panasonic Corp | 半導体装置及びその製造方法 |
CN101459598B (zh) * | 2007-12-14 | 2011-03-16 | 华为技术有限公司 | 实现分组交换的方法及其系统 |
JP2009239444A (ja) | 2008-03-26 | 2009-10-15 | Mitsubishi Electric Corp | パケット順序制御方法、受信装置、送信装置および通信システム |
WO2010036154A1 (en) | 2008-09-23 | 2010-04-01 | Telefonaktiebolaget L M Ericsson (Publ) | Rlc segmentation for carrier aggregation |
CN101686236B (zh) * | 2008-09-27 | 2012-07-25 | 中国移动通信集团公司 | 并发关联类业务的同步方法及其装置 |
MX2011001210A (es) * | 2009-02-27 | 2011-03-04 | Panasonic Corp | Medio de grabacion, dispositivo de reproduccion, y circuito integrado. |
EP2242273A1 (en) * | 2009-04-14 | 2010-10-20 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Transmission scheme for text-based information |
JP2011060338A (ja) * | 2009-09-04 | 2011-03-24 | Sony Corp | 情報処理装置、および情報処理方法、並びにプログラム |
JP5738865B2 (ja) | 2009-09-14 | 2015-06-24 | トムソン ライセンシングThomson Licensing | Mpeg−2ts多重化マルチメディアストリームのエレメンタリパケットの選択による、mpeg−2ts多重化マルチメディアストリームの配信 |
KR101750049B1 (ko) * | 2009-11-13 | 2017-06-22 | 삼성전자주식회사 | 적응적인 스트리밍 방법 및 장치 |
KR20120083820A (ko) * | 2011-01-18 | 2012-07-26 | 삼성전자주식회사 | 컨텐츠 전송 시스템에서 컨텐츠 전송 방법 및 장치 |
US9553912B2 (en) * | 2011-01-19 | 2017-01-24 | Electronics And Telecommunications Research Institute | Method and apparatus for transmitting media content via a single port or multiple ports |
KR20120084237A (ko) * | 2011-01-19 | 2012-07-27 | 삼성전자주식회사 | 엠엠티(mmt)에서 엠엠티 인캡슐레이터를 전송하는 방법 |
KR20120084234A (ko) * | 2011-01-19 | 2012-07-27 | 삼성전자주식회사 | Mpeg media transport(mmt)에서 mmt au를 전송하는 방법 |
KR101857416B1 (ko) * | 2011-06-13 | 2018-05-16 | 한국전자통신연구원 | 오버헤드를 최소화한 헤더를 가지는 패킷 기반의 미디어 데이터 전송 방법 |
KR20120138604A (ko) * | 2011-06-14 | 2012-12-26 | 삼성전자주식회사 | 멀티미디어 시스템에서 복합 미디어 컨텐츠를 송수신하는 방법 및 장치 |
KR101946861B1 (ko) * | 2011-09-21 | 2019-02-13 | 삼성전자주식회사 | 멀티미디어 방송 서비스의 미디어 데이터 동기화 방법 및 장치 |
US9319721B2 (en) * | 2011-10-13 | 2016-04-19 | Electronics And Telecommunications Research Institute | Method of configuring and transmitting an MMT transport packet |
KR20130040132A (ko) * | 2011-10-13 | 2013-04-23 | 한국전자통신연구원 | 이종 ip 네트워크를 통한 미디어 코덱에 독립적인 미디어 데이터 전송 방법 |
KR101933465B1 (ko) * | 2011-10-13 | 2019-01-11 | 삼성전자주식회사 | 이동 통신 시스템에서 패킷 송수신 장치 및 방법 |
KR20130040151A (ko) * | 2011-10-13 | 2013-04-23 | 한국전자통신연구원 | 콤포지션 정보 및 전송 특성 정보가 연동된 미디어 데이터를 이종 ip 네트워크를 통하여 전송하는 방법 |
KR20130040090A (ko) * | 2011-10-13 | 2013-04-23 | 삼성전자주식회사 | 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법 |
JP2015503281A (ja) * | 2011-11-23 | 2015-01-29 | エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute | スケーラビリティ及びビュー情報を提供するストリーミングサービスのための方法及び装置 |
KR101995221B1 (ko) * | 2011-11-24 | 2019-07-16 | 삼성전자주식회사 | 통신 시스템에서 패킷 송수신 장치 및 방법 |
US9414123B2 (en) * | 2011-11-25 | 2016-08-09 | Humax Co., Ltd. | Method for hybrid delivery of MMT package and content and method for receiving content |
WO2013077698A1 (ko) * | 2011-11-25 | 2013-05-30 | (주)휴맥스 | Mmt 미디어와 dash 미디어와의 연동 방법 |
WO2013081414A1 (en) * | 2011-11-30 | 2013-06-06 | Samsung Electronics Co., Ltd. | Apparatus and method of transmiting/receiving broadcast data |
KR20130085987A (ko) * | 2012-01-20 | 2013-07-30 | 한국전자통신연구원 | 이종망 네트워크에서 미디어 프래그먼트 유닛으로 나누어진 액세스 유닛을 가지는 미디어 데이터를 전송하는 방법 |
US9848217B2 (en) * | 2012-01-20 | 2017-12-19 | Korea Electronics Technology Institute | Method for transmitting and receiving program configuration information for scalable ultra high definition video service in hybrid transmission environment, and method and apparatus for effectively transmitting scalar layer information |
WO2013112027A1 (ko) * | 2012-01-26 | 2013-08-01 | 한국전자통신연구원 | 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법 |
EP2811705B1 (en) | 2012-01-31 | 2019-06-26 | Sharp Kabushiki Kaisha | Generation device and generation method for data packets |
-
2013
- 2013-01-28 EP EP13743705.9A patent/EP2811705B1/en active Active
- 2013-01-28 CN CN201380007329.4A patent/CN104106247B/zh not_active Expired - Fee Related
- 2013-01-28 US US14/375,352 patent/US9813350B2/en active Active
- 2013-01-28 CN CN201810460987.3A patent/CN108347492B/zh not_active Expired - Fee Related
- 2013-01-28 JP JP2013556382A patent/JP5661206B2/ja not_active Expired - Fee Related
- 2013-01-28 WO PCT/JP2013/051708 patent/WO2013115121A1/ja active Application Filing
- 2013-01-28 CN CN201810460618.4A patent/CN108347491A/zh active Pending
-
2014
- 2014-12-01 JP JP2014242880A patent/JP6078046B2/ja not_active Expired - Fee Related
-
2016
- 2016-12-28 JP JP2016255345A patent/JP6247376B2/ja not_active Expired - Fee Related
- 2016-12-28 JP JP2016255346A patent/JP2017098987A/ja not_active Ceased
-
2017
- 2017-10-02 US US15/722,809 patent/US10637791B2/en active Active
- 2017-11-21 JP JP2017223820A patent/JP2018067932A/ja active Pending
-
2020
- 2020-03-24 US US16/827,962 patent/US20200228456A1/en not_active Abandoned
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1984299A (zh) * | 2005-12-12 | 2007-06-20 | Lg电子株式会社 | 在视频设备中再现传输流的方法及使用该方法的视频设备 |
CN101042914A (zh) * | 2006-03-01 | 2007-09-26 | 索尼株式会社 | 数据处理装置及方法、数据结构、再现装置及方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2017098987A (ja) | 2017-06-01 |
EP2811705A1 (en) | 2014-12-10 |
CN108347492A (zh) | 2018-07-31 |
US9813350B2 (en) | 2017-11-07 |
JP2018067932A (ja) | 2018-04-26 |
US20200228456A1 (en) | 2020-07-16 |
CN104106247B (zh) | 2018-06-15 |
JPWO2013115121A1 (ja) | 2015-05-11 |
JP2015109649A (ja) | 2015-06-11 |
JP6247376B2 (ja) | 2017-12-13 |
EP2811705B1 (en) | 2019-06-26 |
JP5661206B2 (ja) | 2015-01-28 |
JP6078046B2 (ja) | 2017-02-08 |
US10637791B2 (en) | 2020-04-28 |
US20150023355A1 (en) | 2015-01-22 |
JP2017103789A (ja) | 2017-06-08 |
WO2013115121A1 (ja) | 2013-08-08 |
CN108347491A (zh) | 2018-07-31 |
US20180041441A1 (en) | 2018-02-08 |
CN104106247A (zh) | 2014-10-15 |
EP2811705A4 (en) | 2015-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108347492B (zh) | 再现装置以及再现方法 | |
KR102127702B1 (ko) | 미디어 데이터를 송수신하기 위한 인터페이스 장치 및 방법 | |
EP2987330B1 (en) | Method and apparatus for transmitting media data in multimedia transport system | |
US20220217427A1 (en) | Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method | |
US9967582B2 (en) | Hybrid delivery method and reception method for MMT packaged SVC video contents | |
US9848217B2 (en) | Method for transmitting and receiving program configuration information for scalable ultra high definition video service in hybrid transmission environment, and method and apparatus for effectively transmitting scalar layer information | |
EP2784954A1 (en) | Method for linking mmt media and dash media | |
CN104350760A (zh) | 通过mmt包格式扩展的混合传输方法 | |
US10587852B2 (en) | Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method | |
TW201039578A (en) | Multimedia broadcast forwarding systems and methods | |
JP2012532540A (ja) | モバイルマルチメディア放送システムにおける階層送信方法、階層受信方法、階層送信装置、及び階層受信装置 | |
US10666549B2 (en) | Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method and broadcast signal reception method | |
KR101697385B1 (ko) | 채널 적응형 계층적 방송 장치 및 방법 | |
WO2012034441A1 (zh) | 实现可伸缩视频编码业务协同传输的方法及系统 | |
CN103024369B (zh) | 分级编码复用的发送端、终端、系统及方法 | |
US20190268082A1 (en) | Data processing apparatus and data processing method | |
KR102424932B1 (ko) | 수신 장치 및 데이터 처리 방법 | |
TWI673999B (zh) | 供視聽內容及/或資料傳輸的方法 | |
KR20100118822A (ko) | 아이피티브이 단말 시스템 | |
JP2016171358A (ja) | 情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210305 |