CN101401373A - 经编码流传输器 - Google Patents

经编码流传输器 Download PDF

Info

Publication number
CN101401373A
CN101401373A CNA2007800086937A CN200780008693A CN101401373A CN 101401373 A CN101401373 A CN 101401373A CN A2007800086937 A CNA2007800086937 A CN A2007800086937A CN 200780008693 A CN200780008693 A CN 200780008693A CN 101401373 A CN101401373 A CN 101401373A
Authority
CN
China
Prior art keywords
encoded stream
frame boundaries
receiver
information
control information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800086937A
Other languages
English (en)
Other versions
CN101401373B (zh
Inventor
小山和广
小泽一范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lotte Group Co ltd
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN101401373A publication Critical patent/CN101401373A/zh
Application granted granted Critical
Publication of CN101401373B publication Critical patent/CN101401373B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00Arrangements for synchronising receiver with transmitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/28Timers or timing mechanisms used in protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/02Details
    • H04J3/06Synchronising arrangements
    • H04J3/062Synchronisation of signals having the same nominal but fluctuating bit rates, e.g. using buffers
    • H04J3/0632Synchronisation of packets and cells, e.g. transmission of voice via a packet network, circuit emulation service [CES]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

提高了在分组中设置的时间信息的精度。时间信息计算单元(24)利用控制信息接收单元(23)接收的编码信息和经编码流接收单元(21)接收的经编码流来计算时间信息。如果无效,则时间信息计算单元(24)对时间信息进行校正并输出经校正的时间信息。经编码流分组化单元(22)通过将时间信息计算单元(24)输出的时间信息设置到头部部分中来对经编码流进行分组化。

Description

经编码流传输器
技术领域
本发明涉及用于按分组方式(packetwise)传输经编码流(encodedstream)的经编码流传输器。
背景技术
经由诸如IP网络等的通信网络按分组方式传输经编码运动图片数据(经编码流)的通信系统已变得日益广泛。作为用于通过分组传输诸如经编码流等的多媒体数据的通信协议,存在一种被称为RTP(实时传送协议)的协议。RTP被用作UDP(用户数据报协议)更上层协议的通信协议,UDP是属于比IP(因特网协议)层更高的层的通信协议。
RTP中的分组(RTP分组)例如如图1所示由RTP头部部分和RTP有效载荷部分构成(例如,见专利文献1)。RTP头部部分包括时间戳和标记比特(M)。
时间戳指示分组(具体而言是第一八位字节)被传输的时间。时间戳被用于安排在分组接收方一侧的分组重构。
标记比特指示经编码流中的重要事件(例如,经编码流的最后一个分组和帧边界)。在分组接收方一侧,标记比特被用于判定经编码流中的重要事件。
时间戳和标记比特的参数(时间和代表事件的值)是由经编码流计算出的。
作为用于传输经编码流的编码信息(例如时间分辨率)的方案,存在两种方法;一种是与经编码流一同传输编码信息的方案,另一种是与经编码流分开地传输编码信息的方案。这些方案例如在专利文献2中有所描述。这里,经编码流的编码信息是与经编码流的编码有关的信息,例如时间分辨率。
专利文献1:日本专利申请早期公开2005-328131(第0011段,图2)
专利文献2:日本专利申请早期公开2006-13583(第0007段,图2)
发明内容
本发明要解决的问题
存在一种经编码流传输器,该经编码流传输器经由传输路径接收经编码流,对所接收的经编码流进行分组化并发送到分组通信网络。对于这种经编码流传输器,存在如上所述的从经编码流中计算出时间戳和标记比特的参数的情况。
在这种情况下,存在如下问题:如果接收到在传输路径上发生比特错误的经编码流或者如果在传输路径上发生数据丢失,则不能正确地设置分组的时间戳。还存在如下问题:如果接收到在传输路径上发生比特错误的经编码流或者如果在传输路径上发生数据丢失,则不能正确地设置分组的标记比特。
本发明是用于解决以上问题的发明,因此本发明的一个目的是提供一种能够提高为分组设置的诸如时间戳等的时间信息和代表分组边界的诸如标记比特等的信息中的至少一种的精度的经编码流传输器。
用于解决以上问题的手段
为了实现以上目的,本发明的经编码流传输器是一种用于按分组方式传输经编码流的经编码流传输器,包括:经编码流接收器,该经编码流接收器接收所述经编码流;控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;时间信息计算器,该时间信息计算器利用所述控制信息接收器接收的编码信息和所述经编码流接收器接收的经编码流来计算时间信息的值,并且当计算值相关时输出计算出的时间信息值,而当所述计算值不相关时对所述计算值进行校正并输出经校正的时间信息值;以及经编码流分组化器,该经编码流分组化器通过将所述时间信息计算器输出的时间信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
根据以上发明,如果时间信息值不相关,则该值被校正。因此,即使例如在传输路径中发生了比特错误或数据丢失,也可以在分组中设置相关的时间信息。结果,可以提高在分组中设置的时间信息的精度。
另外,本发明的经编码流传输器是一种用于按分组方式传输经编码流的经编码流传输器,包括:经编码流接收器,该经编码流接收器接收所述经编码流;控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;帧边界提取器,该帧边界提取器利用所述控制信息接收器接收的编码信息来从所述经编码流接收器接收的经编码流中提取出帧边界,并且当所提取的帧边界相关时输出代表所提取的帧的信息,而当所提取的帧边界不相关时对所述帧边界进行校正并输出代表经校正的帧边界的信息;以及经编码流分组化器,该经编码流分组化器通过将从所述帧边界提取器输出的代表所述帧边界的信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
根据以上发明,如果帧边界不相关,则帧边界被校正。因此,即使例如在传输路径中发生了比特错误或数据丢失,也可以在分组中设置相关的帧边界。结果,可以提高在分组中设置的代表帧边界的信息的精度。
本发明的经编码流传输器是一种用于按分组方式传输经编码流的经编码流传输器,包括:经编码流接收器,该经编码流接收器接收所述经编码流;控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;时间信息计算器,该时间信息计算器利用所述控制信息接收器接收的编码信息和所述经编码流接收器接收的经编码流来计算时间信息的值,并且当计算值相关时输出计算出的时间信息值,而当所述计算值不相关时对所述计算值进行校正并输出经校正的时间信息值;帧边界提取器,该帧边界提取器利用所述控制信息接收器接收的编码信息来从所述经编码流接收器接收的经编码流中提取出帧边界,并且当所提取的帧边界相关时输出代表所提取的帧的信息,而当所提取的帧边界不相关时对所述帧边界进行校正并输出代表经校正的帧边界的信息;以及经编码流分组化器,该经编码流分组化器通过将所述时间信息计算器输出的时间信息和从所述帧边界提取器输出的代表所述帧边界的信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
根据以上发明,如果时间信息值不相关,则该值被校正。另外,如果帧边界不相关,则帧边界被校正。因此,即使例如在传输路径中发生了比特错误或数据丢失,也可以设置相关的时间信息和帧边界。结果,可以提高在分组中设置的时间信息和代表帧边界的信息的精度。
另外,优选地,所述经编码流接收器接收基于MPEG-4的经编码流,并且所述时间信息计算器利用所述经编码流接收器接收的经编码流中包含的以下值“modulo_time_base”和“vop_time_increment”中的至少一个来计算所述时间信息。
另外,优选地,所述经编码流接收器接收基于MPEG-4的经编码流,并且所述帧边界提取器利用所述经编码流接收器接收的经编码流中包含的开始代码来提取所述帧边界。
另外,优选地,所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息,并且从所述DCI中提取出“vop_time_increment_resolution”;并且所述时间信息计算器利用所述控制信息接收器提取出的所述“vop_time_increment_resolution”和所述经编码流接收器接收的经编码流来计算所述时间信息。
另外,优选地,所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息,并且从所述DCI中提取出“profile_and_level_indication”;并且所述帧边界提取器利用所述控制信息接收器提取出的所述“profile_and_level_indication”来从所述经编码流接收器接收的经编码流中提取出所述帧边界。
另外,优选地,所述控制信息接收器接收基于IETF推荐RFC2327(SDC)的编码信息作为所述编码信息。
另外,优选地,所述控制信息接收器接收基于ITU-T推荐H.245的编码信息作为所述编码信息。
另外,优选地,所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息。
本发明的效果
根据本发明,可以提高在分组中设置的时间信息和代表帧边界的信息中的至少一种的精度。
附图说明
图1是示出RTP分组配置的一个示例的说明图。
图2是示出包括作为根据本发明的经编码流传输器的分组传输器的通信系统的一个示例的系统配置图。
图3是示出第一示例性实施例的分组传输器的配置示例的框图。
图4是示出第二示例性实施例的分组传输器的配置示例的框图。
图5是示出第三示例性实施例的分组传输器的配置示例的框图。
具体实施方式
图2是示出通信系统的一个示例的系统配置图,该通信系统包括作为根据本发明的经编码流传输器的分组传输器100。在图2中,分组传输器100连接到传输路径101和102。
传输路径101将由用于输出经编码流的设备(未示出)传输的经编码流和用于经编码流的编码信息传输到分组传输器100。传输路径102将被分组传输器100分组化的经编码流传输到用于接收经编码流的设备(未示出)。下文中,用于输出经编码流的设备被称为经编码流输出设备,而用于接收分组化的经编码流的设备被称为分组接收器。
下文中,MPEG-4被用作编码方案的一个示例。另外,基于RTP的分组(RTP分组)被用作分组的一个示例。
另外,尽管经编码流输出设备可以传输包括作为编码信息的DCI(解码器配置信息)的经编码流,但是下面的描述将以经编码流输出设备与经编码流分开地传输编码信息的情况作为示例。
(示例性实施例1)
图3是示出第一示例性实施例的分组传输器2的配置示例的框图。图3中所示的分组传输器2对应于图2中所示的分组传输器100。
分组传输器2包括经编码流接收器21、经编码流分组化器22、控制信息接收器23和时间信息计算器24。
在编码流开始被传输等时,应当传输至少包含以下信息的编码信息。
(1)时间分辨率(vop_time_increment_resolution)
另外,经编码流输出设备以VOP(video_object_plane)单元传输经编码流。这里,VOP的头部例如包含以下信息。
(2)时间基准(modulo_time_base)
(3)经过时间(例如vop_time_increment)
“modulo_time_base”是基于第二单位的信息,而“vop_time_increment”是基于比第二单位小的单位的信息。“modulo_time_base代表从第二单位的前一VOP值到第二单位的当前VOP值的改变。“vop_time_increment”是由“vop_time_increment_resolution”给出的精度,并且代表基于比第二单位小的单位的关于变化的信息。下文中,“modulo_time_base”和“vop_time_increment”可以称为时间增量。
经编码流接收器21通过传输路径101接收来自经编码流输出设备的经编码流111。另外,经编码流接收器21输出经编码数据212。
控制信息接收器23通过传输路径101接收来自经编码流输出设备的经编码流111的编码信息131。另外,控制信息接收器23输出时间分辨率232。
时间信息计算器24基于从控制信息接收器23输出的时间分辨率232和从经编码流接收器21输出的经编码数据212来计算时间信息241的值。时间信息计算器24还输出具有该值的时间信息241。
经编码流分组化器22将从时间信息计算器24输出的时间信息241设置到RTP头部部分中,并且还将由经编码流接收器21输出的经编码数据设置到RTP有效载荷部分中,从而对经编码流111进行RTP分组化。另外,经编码流分组化器22向传输路径102发送出经RTP分组化的经编码流111作为RTP分组121。RTP分组121经由传输路径102被传输到分组接收器。
接下来,将参考图2和3描述分组传输器2的操作。
当通过传输路径101接收到来自经编码流输出设备的编码信息131时,控制信息接收器23从编码信息131中提取出“vop_time_increment_resolution”。控制信息接收器23将所提取出的“vop_time_increment_resolution”作为时间分辨率232输出到时间信息计算器24。
经编码流接收器21当通过传输路径101接收到来自经编码流输出设备的经编码流111时,从经编码流111中删除已被提供以通过传输路径101传输的头部信息等。经编码流接收器21将已删除其头部信息等的经编码流111作为经编码数据212输出到经编码流分组化器22和时间信息计算器24。
时间信息计算器24接收来自经编码流接收器21的经编码数据212,并且还接收来自控制信息接收器23的时间分辨率232。
时间信息计算器24从经编码数据212中提取出时间增量。然后,时间信息计算器24基于所提取出的时间增量和时间分辨率232来计算时间信息241的值。
具体而言,首先,时间信息计算器24利用时间分辨率232来检查“vop_time_increment”的单位,以确认时间增量的精度。然后,时间信息计算器24利用以下计t算式来计算时间信息241的值。
(由先前计算的时间信息给出的值)+(时间增量)=(时间信息241的值)
时间信息计算器24在每次计算时间信息241的值时都存储时间信息241的计算值。这里,时间信息计算器24使用“modulo_time_base”和“vop_time_increment”的组合作为时间增量。然而,时间信息计算器24可以使用“modulo_time_base”和“vop_time_increment”中的至少一个作为时间增量。
时间信息计算器24还执行以下处理。
时间信息计算器24判定时间信息241的计算值是否是相关的。
当时间信息241的值是不相关的时,时间信息计算器24校正该值。例如,如果时间信息241的值导致负值,则时间信息计算器24增大“modulo_time_base”的接收值,直到时间信息241的值达到取正值。另外,当时间信息241的计算值异常时(例如相比于先前计算的时间信息的值时间信息241的值太大的情况),优选地,时间信息计算器24通过将由先前计算出的时间信息代表的值加上一个适当的值,来校正到时间信息241的值。
当在传输路径中发生比特错误或数据丢失时,执行该校正提高了在RTP头部部分中设置的时间戳的精度。
当时间信息241的值已被校正时,时间信息计算器24将校正后的时间信息241的值输出到经编码流分组化器22。
另一方面,当时间信息241的值是相关的时,时间信息计算器24将时间信息241的计算值输出到经编码流分组化器22。
经编码流分组化器22接收来自经编码流接收器21的经编码数据212,并且接收来自时间信息计算器24的时间信息241。
经编码流分组化器22对经编码数据212进行RTP分组化。在该处理中,经编码流分组化器22将时间信息241设置到RTP分组的RTP头部部分中的时间戳内,并且将经编码数据212设置到RTP有效载荷部分中。然后,经编码流分组化器22向传输路径102发送出经RTP分组化的经编码数据212作为RTP分组121。
尽管第一实施例是采用经编码流输出设备与经编码流分开地输出编码信息的情况作为示例来描述的,但是经编码流输出设备也可在经编码流中包括编码信息并传输编码信息。
但是,当利用在与经编码流111分开传输的编码信息131中包含的信息(vop_time_increment_resolution)来计算时间信息241的值时,与利用经编码流中包含的信息来计算时间信息241的值的情况相比,可以预期时间信息241的精度的提高。换句话说,当在传输路径中发生比特错误或数据丢失时,当利用与经编码流111分开传输的编码信息131中包含的信息来计算时间信息241的值时,与利用经编码流中包含的信息来计算时间信息241的值的情况相比,可以降低时间信息241的值取错误值的概率。
另外,以上示例是利用MPEG-4作为编码方案来描述的,但是也可使用其他编码方案,并不限于MPEG-4。
另外,在传输路径101是电路交换网络并且ITU-T推荐H.245被用于呼叫控制的系统中,控制信息接收器23可以接收ITU-T推荐H.245的编码信息(例如,利用开放逻辑信道描述的编码信息)。在这种情况下,可以利用H.245的编码信息所包含的信息(对应于前述的时间基准和时间增量)来计算时间戳。即,当传输路径101是电路交换网络时,可以利用H.245处理器来实现控制信息接收器23。
或者,在传输路径101是分组交换网络并且诸如编码信息等的控制信息被利用IETF推荐C2327(SDP:会话描述协议)进行交换的系统中,控制信息接收器23可以接收SDP的编码信息(例如,利用“config=”描述的编码信息)。在这种情况下,可以利用SDP的编码信息所包含的信息(对应于前述的时间基准和时间增量)来计算时间戳。即,当传输路径101是分组交换网络时,可以利用SDP处理器来实现控制信息接收器23。
另外,在传输路径101是电路交换网络的情况下,可以使用ITU-T推荐H.223中的编码信息,而不是ITU-T推荐H.245的编码信息。即,当传输路径101是电路交换网络时,可以利用ITU-T推荐H.223处理器来实现经编码流接收器21。
或者,在传输路径101是分组交换网络的情况下,可以使用包含RTP分组的编码信息,而不是SDP的编码信息。即,当传输路径101是分组交换网络时,可以利用RTP分组接收器来实现经编码流接收器21。
根据本示例性实施例,时间信息计算器24利用由控制信息接收器23接收的控制信息和由经编码流接收器21接收的经编码流来计算时间信息的值。时间信息计算器24对时间信息的值进行校正(当该值不相关时)并输出经校正的时间信息。经编码流分组化器22通过将从时间信息计算器24输出的时间信息设置到头部部分中来对经编码流进行分组化。
在这种情况下,如果时间信息是不相关的,则时间信息被校正。因此,即使例如在传输路径中发生了比特错误或数据丢失,也可以在分组中设置相关的时间信息。结果,可以提高在分组中设置的时间信息的精度。
(示例性实施例2)
图4是示出第二示例性实施例的分组传输器的配置示例的框图。图4中所示的分组传输器3对应于图2中所示的分组传输器100。
分组传输器3包括经编码流接收器21、经编码流分组化器32、控制信息接收器33和帧边界提取器34。
应当注意,在编码流开始被传输等时,经编码流输出设备传输至少包含以下信息的编码信息。
(4)概要和级别(profile_and_level_indication)
“profile_and_level_indication”是指定编码工具和图像大小、比特率等(级别)的组合(概要)的信息。
经编码流接收器21经由传输路径101接收来自经编码流输出设备的经编码流111。另外,经编码流接收器21输出经编码数据212。
控制信息接收器33通过传输路径101接收来自经编码流输出设备的编码信息131。另外,控制信息接收器23输出概要332。
帧边界提取器34利用从控制信息接收器33输出的概要332从由经编码流接收器21输出的经编码数据212中提取出帧边界(经MPEG编码的流中的帧之间的边界)。帧边界提取器34输出指示帧边界的信息作为帧边界信息341。
经编码流分组化器32将从帧边界提取器34输出的帧边界信息341设置到该RTP头部部分中,并将从经编码流接收器21输出的经编码数据212设置到RTP有效载荷部分中,以RTP分组化经编码流111。经编码流分组化器32输出经RTP分组化的经编码流111作为RTP分组121。RTP分组121经由传输路径102被传输到分组接收器。
接下来,将参考图2和4描述分组传输器3的操作。
当经由传输路径101从经编码流输出设备接收到编码信息131时,控制信息接收器33从编码信息131中提取出“profile_and_level_indication”。控制信息接收器33将所提取的“profile_and_level_indication”作为概要332输出到帧边界提取器34。
经编码流接收器21在经由传输路径101从经编码流输出设备接收到经编码流111时,从经编码流111中删除已被提供以通过传输路径101传输的头部信息等。经编码流接收器21将已删除其头部信息等的经编码流111作为经编码数据212输出到经编码流分组化器32和帧边界提取器34。
帧边界提取器34接收来自经编码流接收器21的经编码数据212,并且还接收来自控制信息接收器33的概要332。
帧边界提取器34利用概要332来从经编码数据212中提取出帧边界。
例如,首先,帧边界提取器34判定要被用作帧边界的开始代码。这里,开始代码可以是“vop_start_code”,或者可以使用任何其他开始代码。
随后,帧边界提取器34检测在经编码数据212中是否存在所判定的开始代码。如果帧边界提取器34检测到在经编码数据212中存在开始代码,则开始代码被提取出作为帧边界。帧边界提取器34输出代表帧边界的帧边界信息341(具有有效值(例如“1”)的帧边界信息341)。如果否,则其输出代表无帧边界的帧边界信息341(例如为“0”的帧边界信息341)。
帧边界提取器34还执行以下处理。
例如,当帧边界提取器34已提取出作为帧边界的开始代码时,其分析跟着的经编码数据212(具体而言是经编码数据212的编码类型)以检查帧边界是否是相关的。
如果帧边界是不相关的,则帧边界提取器34校正帧边界。例如,帧边界提取器34输出为“0”的帧边界信息341。
或者,帧边界提取器34可以基于已被给出以通过传输路径101传输的头部信息等来检查帧边界是否是相关的。
当在传输路径中发生错误或数据丢失时,如上所述进行校正能够提高在RTP头部部分中设置的标记比特的精度。
经编码流分组化器32接收来自经编码流接收器21的经编码数据212,并且还接收来自帧边界提取器34的帧边界信息。
经编码流分组化器32对经编码数据212进行RTP分组化。在该处理中,经编码流分组化器32将帧边界信息341设置到RTP头部部分中的标记比特内,并且还将经编码数据212设置到RTP有效载荷部分中。然后,经编码流分组化器32向传输路径102发送出作为RTP分组121的经RTP分组化的经编码数据212。
尽管第二实施例是采用经编码流输出设备与经编码流分开地输出编码信息的情况作为示例来描述的,但是经编码流输出设备也可以与经编码流一同传输编码信息。
但是,当利用在与经编码流111分开传输的编码信息131中包含的信息(profile_and_level_indication来生成帧边界信息341时,与利用经编码流中包含的信息来生成帧边界信息341的情况相比,可以预期帧边界信息341的精度的提高。换句话说,当在传输路径中发生比特错误或数据丢失时,与利用经编码流111中包含的信息来生成帧边界信息341的情况相比,可以降低帧边界信息341变为错误值的概率。
另外,以上示例是利用MPEG-4作为编码方案来描述的,但是也可使用其他编码方案,并不限于MPEG-4。
另外,在传输路径101是电路交换网络并且ITU-T推荐H.245被用于呼叫控制的系统中,控制信息接收器33可以接收H.245的编码信息。在这种情况下,可以利用与H.245的编码信息的概要332相对应的信息来判定标记比特。即,当传输路径101是电路交换网络时,可以利用H.245处理器来实现控制信息接收器33。
或者,在传输路径101是分组交换网络并且诸如编码信息等的控制信息被利用IETF推荐C2327(SDP)进行交换的系统中,控制信息接收器23可以接收SDP的编码信息。在这种情况下,可以利用与SDP的编码信息的上述概要332相对应的信息来判定标记比特。即,当传输路径101是分组交换网络时,可以利用SDP处理器来实现控制信息接收器33。
根据本示例性实施例,帧边界提取器34利用由控制信息接收器33接收的编码信息从由经编码流接收器21接收的编码流中提取出帧边界。当帧边界是不相关的时,帧边界提取器34对帧边界进行校正。帧边界提取器34输出代表经校正的帧边界的信息。经编码流分组化器32通过将由帧边界提取器34输出的代表帧边界的信息设置到头部部分中来对经编码流进行分组化。
在这种情况下,如果帧边界是不相关的,则帧边界被校正。因此,即使例如在传输路径中发生比特错误或数据丢失,也可以在分组中设置相关的帧边界。即,可以提高在分组中设置的帧边界的精度。
(示例性实施例3)
图5是示出第三示例性实施例的分组传输器的配置示例的框图。图5中所示的分组传输器4对应于图2中所示的分组传输器100。
分组传输器4包括经编码流接收器21、时间信息计算器24、帧边界提取器34、经编码流分组化器42和控制信息接收器43。下面的描述将主要针对与第一和第二示例性实施例不同的配置。
应当注意,在编码流开始被传输等时,经编码流输出设备传输至少包含以下信息的编码信息。
(1)时间分辨率(vop_time_increment_resolution)
(2)概要和级别(profile_and_level_indication)
另外,经编码流输出设备以VOP(video_object_plane)单位传输经编码流。VOP中的VOP头部例如包含以下信息。
(2)时间基准(modulo_time_base)
(3)经过时间(例如,vop_time_increment)
当对经编码流11进行分组化时,经编码流分组化器42将从时间信息计算器24输出的时间信息241和从帧边界提取器34输出的帧边界信息341设置到RTP头部部分中。
当经由传输路径101从经编码流输出设备接收到编码信息131时,控制信息接收器43从编码信息131中提取出“vop_time_increment_resolution”和“profile_and_level_indication”。控制信息接收器43将所提取的“vop_time_increment_resolution”作为时间分辨率232输出到时间信息计算器24,并将232所提取的“profile_and_level_indication”作为概要332输出到帧边界提取器34。
除了经编码流分组化器42和控制信息接收器43以外的组件与第一或第二示例性实施例中的相同。
接下来,将参考图2和5描述分组传输器4的操作。
当经由传输路径101从经编码流输出设备接收到编码信息131时,控制信息接收器43从编码信息131中提取出“vop_time_increment_resolution”。控制信息接收器43将所提取的“vop_time_increment_resolution”作为时间分辨率输出到时间信息计算器24。
另外,控制信息接收器43从编码信息131中提取出“profile_and_level_indication”。控制信息接收器43将所提取的“profile_and_level_indication“作为概要输出到帧边界提取器34。
时间信息计算器24以与第一示例性3实32施例相同的方式操作。帧边界提取器34以与第二示例性实施例相同的操作方式。
经编码流分组化器42接收来自经编码流接收器21的经编码数据212,并且还接收来自帧边界提取器34的帧边界信息341。
经编码流分组化器42对经编码数据212进行RTP分组化。在该处理中,经编码流分组化器42将帧边界信息341设置到RTP头部部分中的标记比特内,并且还将经编码数据212设置到RTP有效载荷部分中。然后,经编码流分组化器42向传输路径102发送出作为RTP分组121的经RTP分组化的经编码数据212。
在该示例性实施例中,分组传输器4既具有第一示例性实施例的配置,又具有第二示例性实施例的配置。因此,可以获得第一示例性实施例和第二示例性实施例两者的效果。
这里,还允许使用其他的编码方案,而并不限于MPEG-4,因为这种情形与第一和第二示例性实施例相同。另外,在传输路径101是电路交换网络并且ITU-T推荐H.245被用于呼叫控制的系统中,可以利用H.245的编码信息来计算时间戳并判定标记比特。即,当传输路径101是电路交换网络时,可以利用H.245处理器来实现控制信息接收器43。
或者,在传输路径101是分组交换网络并且诸如编码信息等的控制信息被利用IETF推荐C2327(SDP)进行交换的系统中,可以利用SDP的编码信息来计算时间戳并判定标记比特。即,当传输路径101是分组交换网络时,可以利用SDP处理器来实现控制信息接收器43。
根据本示例性实施例,时间信息计算器24利用由控制信息接收器23接收的控制信息和由经编码流接收器21接收的经编码流来计算时间信息的值。时间信息计算器24对时间信息进行校正(当该值不相关时)并输出经校正的时间信息。帧边界提取器34利用由控制信息接收器33接收的编码信息来从由经编码流接收器21接收的编码流中提取出帧边界。当帧边界是不相关的时,帧边界提取器34对帧边界进行校正。帧边界提取器34输出代表经校正的帧边界的信息。经编码流分组化器22通过将由时间信息计算器24输出的时间信息和由帧边界提取器34输出的代表帧边界的信息设置到头部部分中来对经编码流进行分组化。
在这种情况下,即使例如在传输路径中发生比特错误或数据丢失,也可以设置相关的时间信息和代表帧边界的信息。结果,可以提高在分组中设置的时间信息和代表帧边界的信息的精度。
这里,上述实施例中的每一个都是以RTP分组作为分组示例来描述的。然而,在本发明的经编码流传输器中可以处理的分组并不限于RTP分组。经编码流传输器可以是创建其他种类分组的设备,只要分组可以设置有与时间戳和标记比特相对应的信息即可。
本发明可以应用于终端设备和媒体分发服务器等,这些设备连接到诸如电路交换网络或分组交换网络之类的传输路径,并且对经由传输路径接收的经编码流进行分组化并发送出经分组化的经编码流。

Claims (10)

1.一种用于经编码流的分组方式传输的经编码流传输器,包括:
经编码流接收器,该经编码流接收器接收所述经编码流;
控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;
时间信息计算器,该时间信息计算器利用所述控制信息接收器接收的编码信息和所述经编码流接收器接收的经编码流来计算时间信息的值,并且当计算值相关时输出计算出的时间信息值,而当所述计算值不相关时对所述计算值进行校正并输出经校正的时间信息值;以及
经编码流分组化器,该经编码流分组化器通过将所述时间信息计算器输出的时间信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
2.一种用于经编码流的分组方式传输的经编码流传输器,包括:
经编码流接收器,该经编码流接收器接收所述经编码流;
控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;
帧边界提取器,该帧边界提取器利用所述控制信息接收器接收的编码信息来从所述经编码流接收器接收的经编码流中提取出帧边界,并且当所提取的帧边界相关时输出代表所提取的帧的信息,而当所提取的帧边界不相关时对所述帧边界进行校正并输出代表经校正的帧边界的信息;以及
经编码流分组化器,该经编码流分组化器通过将从所述帧边界提取器输出的代表所述帧边界的信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
3.一种用于经编码流的分组方式传输的经编码流传输器,包括:
经编码流接收器,该经编码流接收器接收所述经编码流;
控制信息接收器,该控制信息接收器接收所述经编码流的编码信息;
时间信息计算器,该时间信息计算器利用所述控制信息接收器接收的编码信息和所述经编码流接收器接收的经编码流来计算时间信息的值,并且当计算值相关时输出计算出的时间信息值,而当所述计算值不相关时对所述计算值进行校正并输出经校正的时间信息值;
帧边界提取器,该帧边界提取器利用所述控制信息接收器接收的编码信息来从所述经编码流接收器接收的经编码流中提取出帧边界,并且当所提取的帧边界相关时输出代表所提取的帧的信息,而当所提取的帧边界不相关时对所述帧边界进行校正并输出代表经校正的帧边界的信息;以及
经编码流分组化器,该经编码流分组化器通过将所述时间信息计算器输出的时间信息和从所述帧边界提取器输出的代表所述帧边界的信息设置到头部部分中来对所述经编码流接收器接收的经编码流进行分组化。
4.如权利要求1或3所述的经编码流传输器,其中
所述经编码流接收器接收基于MPEG-4的经编码流,并且
所述时间信息计算器利用所述经编码流接收器接收的经编码流中包含的以下值“modulo_time_base”和“vop_time_increment”中的至少一个来计算所述时间信息。
5.如权利要求2或3所述的经编码流传输器,其中
所述经编码流接收器接收基于MPEG-4的经编码流,并且
所述帧边界提取器利用所述经编码流接收器接收的经编码流中包含的开始代码来提取所述帧边界。
6.如权利要求1、3或4所述的经编码流传输器,其中
所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息,并且从所述DCI中提取出“vop_time_increment_resolution”;并且
所述时间信息计算器利用所述控制信息接收器提取出的所述“vop_time_increment_resolution”和所述经编码流接收器接收的经编码流来计算所述时间信息。
7.如权利要求2、3或5所述的经编码流传输器,其中
所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息,并且从所述DCI中提取出“profile_and_level_indication”;并且
所述帧边界提取器利用所述控制信息接收器提取出的所述“profile_and_level_indication”来从所述经编码流接收器接收的经编码流中提取出所述帧边界。
8.如权利要求1至5中的任何一个所述的经编码流传输器,其中所述控制信息接收器接收基于IETF推荐RFC2327(SDC)的编码信息作为所述编码信息。
9.如权利要求1至5中的任何一个所述的经编码流传输器,其中所述控制信息接收器接收基于ITU-T推荐H.245的编码信息作为所述编码信息。
10.如权利要求1至5中的任何一个所述的经编码流传输器,其中所述控制信息接收器接收基于MPEG-4的DCI作为所述编码信息。
CN2007800086937A 2006-03-17 2007-01-17 经编码流传输器 Active CN101401373B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006074333 2006-03-17
JP074333/2006 2006-03-17
PCT/JP2007/050570 WO2007108222A1 (ja) 2006-03-17 2007-01-17 符号化ストリーム送信装置

Publications (2)

Publication Number Publication Date
CN101401373A true CN101401373A (zh) 2009-04-01
CN101401373B CN101401373B (zh) 2011-09-28

Family

ID=38522258

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800086937A Active CN101401373B (zh) 2006-03-17 2007-01-17 经编码流传输器

Country Status (6)

Country Link
US (1) US8243826B2 (zh)
EP (1) EP1998510B1 (zh)
JP (1) JP4947049B2 (zh)
KR (1) KR100989087B1 (zh)
CN (1) CN101401373B (zh)
WO (1) WO2007108222A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8045836B2 (en) * 2008-01-11 2011-10-25 Texas Instruments Incorporated System and method for recording high frame rate video, replaying slow-motion and replaying normal speed with audio-video synchronization
US9338483B2 (en) 2010-06-11 2016-05-10 Sony Corporation Camera system, video selection apparatus and video selection method
JP2011259365A (ja) * 2010-06-11 2011-12-22 Sony Corp カメラシステム、映像選択装置及び映像選択方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10336247A (ja) 1997-05-29 1998-12-18 Matsushita Electric Ind Co Ltd 時刻情報付与装置および時刻情報算出・付与方法
WO1999021367A1 (fr) 1997-10-20 1999-04-29 Mitsubishi Denki Kabushiki Kaisha Codeur et decodeur d'image
JPH11262001A (ja) 1998-03-16 1999-09-24 Hitachi Denshi Ltd 符号化伝送方式におけるタイムスタンプ値演算方法
JP4457506B2 (ja) * 2001-02-27 2010-04-28 ソニー株式会社 パケット化装置およびパケット化方法
JP2002359603A (ja) * 2001-05-31 2002-12-13 Mitsubishi Electric Corp ストリーム変換装置
JP3736396B2 (ja) * 2001-07-25 2006-01-18 日本電信電話株式会社 ストリーム送信装置および受信装置
US7508874B2 (en) * 2002-01-29 2009-03-24 Broadcom Corporation Error concealment for MPEG decoding with personal video recording functionality
JP3944845B2 (ja) 2001-09-27 2007-07-18 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
EP1472847A1 (en) 2002-01-30 2004-11-03 Koninklijke Philips Electronics N.V. Streaming multimedia data over a network having a variable bandwidth
JP3920125B2 (ja) * 2002-03-27 2007-05-30 三菱電機株式会社 復号装置及び復号方法
JP4135395B2 (ja) * 2002-04-26 2008-08-20 日本電気株式会社 符号化パケット伝送受信方法およびその装置ならびにプログラム
US7397822B2 (en) * 2002-08-26 2008-07-08 Bigband Network Inc. Method and system for compensating for timing violations of a multiplex of at least two media packet streams
JP3821086B2 (ja) 2002-11-01 2006-09-13 ソニー株式会社 ストリーミングシステム及びストリーミング方法、クライアント端末及びデータ復号方法、並びにプログラム
JP2004186840A (ja) * 2002-11-29 2004-07-02 Sony Corp 非初期化バッファモデルを用いた方法
JP2004297184A (ja) 2003-03-25 2004-10-21 Canon Inc 情報処理装置および情報処理方法ならびに記憶媒体、プログラム
US20070033609A1 (en) * 2003-09-12 2007-02-08 Hiroaki Dei Media stream multicast distribution method and apparatus
JP3920261B2 (ja) * 2003-12-08 2007-05-30 三菱電機株式会社 フレーム同期装置および光送受信器
JP2005328131A (ja) 2004-05-12 2005-11-24 Toshiba Corp リアルタイムデータ受信装置
JP4252017B2 (ja) * 2004-06-22 2009-04-08 日本電信電話株式会社 符号化ストリーム中継装置、その方法及びプログラム
JP4092705B2 (ja) * 2005-09-02 2008-05-28 日本電信電話株式会社 ストリーム送信装置および受信装置、ならびに送受信方法

Also Published As

Publication number Publication date
KR100989087B1 (ko) 2010-10-25
KR20080108533A (ko) 2008-12-15
EP1998510A1 (en) 2008-12-03
JP4947049B2 (ja) 2012-06-06
US20090060059A1 (en) 2009-03-05
JPWO2007108222A1 (ja) 2009-08-06
EP1998510B1 (en) 2011-10-26
EP1998510A4 (en) 2010-09-15
WO2007108222A1 (ja) 2007-09-27
US8243826B2 (en) 2012-08-14
CN101401373B (zh) 2011-09-28

Similar Documents

Publication Publication Date Title
KR101449710B1 (ko) 데이터 통신시스템, 데이터 송신장치, 데이터 송신방법 및패킷 사이즈 및 용장도 결정방법
CN101155311B (zh) 一种视频通信中的视频码流错误检测和处理方法
US11374681B2 (en) Video quality assessment method and device
KR101722719B1 (ko) 역방향의 강력한 헤더 압축 수신기
US9641588B2 (en) Packets recovery system and method
KR101122143B1 (ko) 수신기 버퍼 아키텍처를 나타내는 버퍼 파라미터의 시그널링
CN105072506B (zh) 教学直播视频的传输方法及系统
CN107517410B (zh) 视频业务质量评估的方法及装置
EP3020188B1 (en) Endpoint information for network vqm
EP2207354B1 (en) Method and device for ensuring reliability during transmission of television data in a television system based on internet protocol
CN101401373B (zh) 经编码流传输器
CN101123611B (zh) 一种流媒体数据的发送方法
WO2009099357A1 (en) Method and device for transport delay analysis
CN102065372B (zh) 以广播方式传输数据的方法及相关装置
KR20040084721A (ko) 동화상 압축 부호화 송수신장치
CN113301051A (zh) 数据的传输方法、装置、计算机存储介质和处理器
EP1802120B1 (en) Information presentation system, device and methods
CN100514963C (zh) 一种在网关上生成rtp时戳的方法
CN112601072B (zh) 视频业务质量评估的方法及装置
KR20150035857A (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: RAKUTEN INC.

Free format text: FORMER OWNER: NEC CORP.

Effective date: 20150629

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150629

Address after: Japan's Tokyo East Shinagawa Shinagawa district four chome 12 No. 3 140-0002

Patentee after: Rakuten Inc.

Address before: Tokyo, Japan

Patentee before: NEC Corp.

CP03 Change of name, title or address

Address after: Tokyo, Japan

Patentee after: Lotte Group Co.,Ltd.

Address before: Japan's Tokyo East Shinagawa Shinagawa district four chome 12 No. 3 140-0002

Patentee before: Rakuten, Inc.

CP03 Change of name, title or address