CN104811824A - 多媒体传输网络系统 - Google Patents

多媒体传输网络系统 Download PDF

Info

Publication number
CN104811824A
CN104811824A CN201410043887.2A CN201410043887A CN104811824A CN 104811824 A CN104811824 A CN 104811824A CN 201410043887 A CN201410043887 A CN 201410043887A CN 104811824 A CN104811824 A CN 104811824A
Authority
CN
China
Prior art keywords
media elements
network system
terminal
network
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410043887.2A
Other languages
English (en)
Other versions
CN104811824B (zh
Inventor
张文军
徐异凌
何大治
管云峰
徐洪亮
张震宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai National Engineering Research Center for Nanotechnology Co Ltd
Shanghai National Engineering Research Center of Digital Television Co Ltd
Original Assignee
Shanghai National Engineering Research Center of Digital Television Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai National Engineering Research Center of Digital Television Co Ltd filed Critical Shanghai National Engineering Research Center of Digital Television Co Ltd
Priority to CN201410043887.2A priority Critical patent/CN104811824B/zh
Publication of CN104811824A publication Critical patent/CN104811824A/zh
Application granted granted Critical
Publication of CN104811824B publication Critical patent/CN104811824B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种多媒体传输网络系统,包括网络端、用户终端以及缓存处理设备;其中,所述缓存处理设备适于对由网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。本技术方案解决了现有的多媒体传输网络系统中实现网络端与接收端之间的同步,对于接收端而言负担很大的技术问题。

Description

多媒体传输网络系统
技术领域
本发明涉及多媒体信息传输技术领域,特别涉及一种多媒体传输网络系统。
背景技术
在多媒体传输网络系统中,各种媒体源(例如音频和视频)之间的同步问题一直是媒体传输中的难题。特别是随着异构网的出现,如何让通过不同网络传输的媒体元素之间同步,是融合网中的一个重要课题。
现有技术中,可以通过适当调整不同网络延迟来实现通过不同传输的媒体元素间的同步。如图1所示,本方法中,流媒体同时通过广播网和宽带网进行传输,但是两种网络的传输延迟不一样,因此通过估算二者之间的差别,在此基础上适当调整发送延迟,实现媒体元素在接收端的同步。
MMT(MPEG Media Transport,ISO/IEC23008-1)则通过其中的CI(Composition Information)信息来实现不同媒体元素间的同步。如图2所示,MPU(Media Processing Unit)可以经由不同的传输网络(例如广播网或者宽带网到达接收端,接收端则根据CI信息,确定每个MPU何时在哪个终端的哪个位置呈现。基于这个方法,实现了经过不同传输方法的多个媒体元素之间的同步。
但是,无论是通过NTP协议,还是通过CI信息进行同步,都需要网络和终端的一一配合,对多媒体传输网络系统,特别是接收端而言是很大的负担。
发明内容
本发明解决的问题是现有的多媒体传输网络系统中实现网络端与接收端之间的同步,对于接收端而言负担很大。
为解决上述问题,本发明实施例提供了一种多媒体传输网络系统,包括网络端、用户终端以及缓存处理设备;其中,所述缓存处理设备适于对由网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
可选的,所述多媒体传输网络系统为包括一个网络端的单一传输网络系统;所述缓存处理设备适于对由该网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
可选的,所述多媒体传输网络系统为包括至少两个网络端的异构传输网络系统;所述缓存处理设备适于对由异构传输网络系统中的所有网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
可选的,所述异构传输网络系统包括两个网络端,分别为宽带网和广播网。
可选的,所述缓存处理设备包括第一同步装置,所述第一同步装置适于根据不同网络端的网络时延或者一个网络端传输不同媒体元素之间的传输时延来调整将各个媒体元素传送至用户终端的时间以实现同步。
可选的,所述缓存处理设备包括第二同步装置,所述第二同步装置适于根据MMT协议中的CI信息确定网络端传输的各个媒体元素之间的时间关系,并基于该时间关系实现它们的同步呈现。
可选的,所述缓存处理设备包括重传处理装置和发送装置;其中,所述重传处理装置适于在网络端传输媒体元素过程中出现丢包的情况下,分析MMT协议中的CI信息以确定丢失的数据包,并向网络端发送请求重传信息。所述发送装置适于在接收到网络端依照请求重传信息传输该丢失的数据包后,将完整的媒体元素发送至用户终端。
可选的,所述缓存处理设备包括元素标识装置和请求处理装置;其中,所述元素标识装置适于在CI信息中对已接收到由网络端传输的所有媒体元素进行标识;所述请求处理装置适于根据用户终端发出的请求信息分析CI信息;在找到相应的元素标识的情况下,向用户终端发送与该元素标识相应的媒体元素;在未找到相应的元素标识的情况下,向网络端发出媒体元素请求信息以获取到相应的媒体元素后再将其发送至用户终端。
可选的,所述缓存处理设备包括元素预取装置,所述元素预取装置适于根据CI信息以及用户终端的需求信息确定需要预存的预取媒体元素,并向网络端发出元素预取请求信息以获得该预取媒体元素。
可选的,所述CI信息包括媒体元素的呈现时间信息、呈现顺序信息以及各个媒体元素之间的关联关系。
与现有技术相比,本发明技术方案具有以下有益效果:
在多媒体传输网络系统中,在网络端和用户终端之间设置一个缓存处理设备,通过该缓存处理设备来先对网络端传输的各个媒体元素进行同步,再将同步后的媒体元素传送至用户终端。由于所有的用户终端都通过该缓存处理设备来进行媒体元素之间的同步处理,这样可以减轻用户终端的负担。
并且,该缓存处理设备可以适用于单一传输网络系统,也可以适用于异构传输网络系统。对于单一传输网络系统,该缓存处理设备将对在这个传输网络中传输的媒体元素进行同步,而对于异构传输网络系统,该缓存处理设备可以实现来自不同传输网络的媒体元素之间的同步。
进一步地,该缓存处理设备还可以处理丢失媒体元素的重取、媒体元素的标识和查找以及媒体元素的预取等处理,从而改善用户体验。
附图说明
图1是现有技术中通过适当调整宽带网/广播网延迟来实现不同网络传输的媒体元素间的同步的系统结构示意图;
图2是现有技术中基于CI信息来实现媒体元素之间同步的系统结构示意图;
图3是本发明的一种多媒体传输网络系统的结构示意图;
图4A是单一传输网络系统的结构示意图;
图4B是异构传输网络系统的结构示意图;
图5是网络端和缓存处理设备之间先基于NTP协议实现同步,缓存处理设备再将同步后的媒体元素发送给各个用户终端的结构示意图;
图6是网络端和缓存处理设备基于CI信息先进行媒体元素的同步,缓存处理设备再将同步后的媒体元素发送给各个用户终端的结构示意图;
图7是缓存处理设备通过CI信息检测丢失的数据包并重取的结构示意图;
图8是通过CI信息对缓存处理设备中有无媒体元素进行标识从而使得用户终端可以有效获取相应的媒体元素的结构示意图。
具体实施方式
发明人发现现有的多媒体传输网络系统中实现网络端与接收端之间的同步,对于接收端而言负担很大。
针对上述问题,发明人经过研究,提供了一种多媒体传输网络系统,在网络端和用户终端之间设置一个缓存处理设备,通过该缓存处理设备来先对网络端传输的各个媒体元素进行同步,再将同步后的媒体元素传送至用户终端。由于所有的用户终端都通过该缓存处理设备来进行媒体元素之间的同步处理,这样可以减轻用户终端的负担。进一步地,该缓存处理设备还可以处理丢失媒体元素的重取、媒体元素的标识和查找以及媒体元素的预取等处理,从而改善用户体验。
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。
如图3所示的是本发明的一种多媒体传输网络系统的结构示意图。参考图3,多媒体传输网络系统包括:网络端31、用户终端32以及缓存处理设备33。其中,所述缓存处理设备33适于对由网络端31传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端32。
需要说明的是,在本实施例中,所述缓存处理设备33是独立于网络端31和用户终端32的一个处理设备。通常在一个多媒体传输网络系统包括多个用户终端,这些用户终端都通过该缓存处理设备33来处理媒体元素之间的同步,这样可以减轻用户终端的成本和负担。
在本实施例中,所述多媒体传输网络系统可以为包括一个网络端的单一传输网络系统。在这种传输网络系统中,所述缓存处理设备适于对由该网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。例如,如图4A所示的是单一传输网络系统的结构示意图。参考图4A,在单一传输网络系统中,例如在广播网或者宽带网中,缓存处理设备对该网络端传输的媒体元素进行同步后发送至各个用户终端。
所述多媒体传输网络系统为包括至少两个网络端的异构传输网络系统。在这种传输网络系统中,所述缓存处理设备适于对由异构传输网络系统中的所有网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。例如,如图4B所示的是异构传输网络系统的结构示意图。参考图4B,在异构传输网络系统中,例如在广播网/宽带网中,缓存处理设备对来自不同网络端(广播网/宽带网)传输的媒体元素进行同步后发送至各个用户终端。
在本实施例中,所述缓存处理设备33可以通过两种方式来处理网络端传输的各个媒体元素之间的同步,第一种是基于NTP协议作同步,第二种是基于MMT协议中的CI信息作同步。
具体来说,依照第一种方法,所述缓存处理设备包括第一同步装置,所述第一同步装置适于根据不同网络端的网络时延或者一个网络端传输不同媒体元素之间的传输时延来调整将各个媒体元素传送至用户终端的时间以实现同步。除了NTP协议,对于其它方法可以估算该缓存处理设备接收媒体元素的延迟,消除延迟从而实现同步,也同样适用于该第一同步装置。具体实例可以参考如图5所示的网络端和缓存处理设备之间先基于NTP协议实现同步,缓存处理设备再将同步后的媒体元素发送给各个用户终端的结构示意图。
依照第二种方法,所述缓存处理设备包括第二同步装置,所述第二同步装置适于根据MMT协议中的CI信息确定网络端传输的各个媒体元素之间的时间关系,并基于该时间关系实现不同媒体元素的同步呈现。其中,CI信息可以在指定网络中传输,也可以在各个网络中同时都进行传输。具体实例可参考如图6所示的网络端和缓存处理设备基于CI信息先进行媒体元素的同步,缓存处理设备再将同步后的媒体元素发送给各个用户终端的结构示意图。
进一步地,所述缓存处理设备33还可以处理其他业务,例如,处理丢失媒体元素的重取、媒体元素的标识和查找以及媒体元素的预取。
1)丢失媒体元素的重取
具体地,所述缓存处理设备包括重传处理装置和发送装置。其中,所述重传处理装置适于在网络端传输媒体元素过程中出现丢包的情况下,分析MMT协议中的CI信息以确定丢失的数据包,并向网络端发送请求重传信息。所述发送装置适于在接收到网络端依照请求重传信息传输该丢失的数据包后,将完整的媒体元素发送至用户终端。
具体实例可以参考如图7所示的缓存处理设备通过CI信息检测丢失的数据包并重取的结构示意图。例如,缓存处理设备通过分析CI信息得知,在第二个时间段应该呈现的音频MPU丢失了,缓存处理设备可以请求server B重新发送一次,并将它们同步后传送给用户终端。
2)媒体元素的标识和查找
具体地,所述缓存处理设备包括元素标识装置和请求处理装置。其中,所述元素标识装置适于在CI信息中对已接收到由网络端传输的所有媒体元素进行标识。所述请求处理装置适于根据用户终端发出的请求信息分析CI信息;在找到相应的元素标识的情况下,向用户终端发送与该元素标识相应的媒体元素;在未找到相应的元素标识的情况下,向网络端发出媒体元素请求信息以获取到相应的媒体元素后再将其发送至用户终端。
具体实例可以参考如图8所示的通过CI信息对缓存处理设备中有无媒体元素进行标识从而使得用户终端可以有效获取相应的媒体元素的结构示意图。例如,缓存处理设备中有视频V-MPU#1,#2,#3,音频A-MPU#1,CI中都标识为有,A-MPU#2a没有,CI中标识为没有。这样当用户终端请求时,缓存处理设备通过分析CI信息可以知道哪些媒体元素有,可以直接给终端;哪些没有,通过请求网络端发送给缓存处理设备或者直接发送给相应的用户终端。
3)媒体元素的预取
具体地,所述缓存处理设备包括元素预取装置,所述元素预取装置适于根据CI信息以及用户终端的需求信息确定需要预存的预取媒体元素,并向网络端发出元素预取请求信息以获得该预取媒体元素。
在上述实施例中,所述CI信息包括媒体元素的呈现时间信息、呈现顺序信息以及各个媒体元素之间的关联关系。
综上所述,本技术方案在网络端和用户终端之间设置一个缓存处理设备,通过该缓存处理设备来先对网络端传输的各个媒体元素进行同步,再将同步后的媒体元素传送至用户终端。由于所有的用户终端都通过该缓存处理设备来进行媒体元素之间的同步处理,这样可以减轻用户终端的负担。进一步地,该缓存处理设备还可以处理丢失媒体元素的重取、媒体元素的标识和查找以及媒体元素的预取等处理,从而改善用户体验。
本发明虽然已以较佳实施例公开如上,但其并不是用来限定本发明,任何本领域技术人员在不脱离本发明的精神和范围内,都可以利用上述揭示的方法和技术内容对本发明技术方案做出可能的变动和修改,因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化及修饰,均属于本发明技术方案的保护范围。

Claims (10)

1.一种多媒体传输网络系统,其特征在于,包括:
网络端、用户终端以及缓存处理设备;
其中,所述缓存处理设备适于对由网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
2.如权利要求1所述的多媒体传输网络系统,其特征在于,所述多媒体传输网络系统为包括一个网络端的单一传输网络系统;
所述缓存处理设备适于对由该网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
3.如权利要求1所述的多媒体传输网络系统,其特征在于,所述多媒体传输网络系统为包括至少两个网络端的异构传输网络系统;
所述缓存处理设备适于对由异构传输网络系统中的所有网络端传输的各个媒体元素之间进行同步,并将经过同步后的媒体元素传送至用户终端。
4.如权利要求3所述的多媒体传输网络系统,其特征在于,所述异构传输网络系统包括两个网络端,分别为宽带网和广播网。
5.如权利要求1所述的多媒体传输网络系统,其特征在于,所述缓存处理设备包括第一同步装置,所述第一同步装置适于根据不同网络端的网络时延或者一个网络端传输不同媒体元素之间的传输时延来调整将各个媒体元素传送至用户终端的时间以实现同步。
6.如权利要求1所述的多媒体传输网络系统,其特征在于,所述缓存处理设备包括第二同步装置,所述第二同步装置适于根据MMT协议中的CI信息确定网络端传输的各个媒体元素之间的时间关系,并基于该时间关系实现不同媒体元素的同步呈现。
7.如权利要求1所述的多媒体传输网络系统,其特征在于,所述缓存处理设备包括重传处理装置和发送装置;其中,
所述重传处理装置适于在网络端传输媒体元素过程中出现丢包的情况下,分析MMT协议中的CI信息以确定丢失的数据包,并向网络端发送请求重传信息。
所述发送装置适于在接收到网络端依照请求重传信息传输该丢失的数据包后,将完整的媒体元素发送至用户终端。
8.如权利要求1所述的多媒体传输网络系统,其特征在于,所述缓存处理设备包括元素标识装置和请求处理装置;其中,
所述元素标识装置适于在CI信息中对已接收到由网络端传输的所有媒体元素进行标识;
所述请求处理装置适于根据用户终端发出的请求信息分析CI信息;在找到相应的元素标识的情况下,向用户终端发送与该元素标识相应的媒体元素;在未找到相应的元素标识的情况下,向网络端发出媒体元素请求信息以获取到相应的媒体元素后再将其发送至用户终端。
9.如权利要求1所述的多媒体传输网络系统,其特征在于,所述缓存处理设备包括元素预取装置,所述元素预取装置适于根据CI信息以及用户终端的需求信息确定需要预存的预取媒体元素,并向网络端发出元素预取请求信息以获得该预取媒体元素。
10.如权利要求6至9中任一项所述的多媒体传输网络系统,其特征在于,所述CI信息包括媒体元素的呈现时间信息、呈现顺序信息以及各个媒体元素之间的关联关系。
CN201410043887.2A 2014-01-29 2014-01-29 多媒体传输网络系统 Active CN104811824B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410043887.2A CN104811824B (zh) 2014-01-29 2014-01-29 多媒体传输网络系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410043887.2A CN104811824B (zh) 2014-01-29 2014-01-29 多媒体传输网络系统

Publications (2)

Publication Number Publication Date
CN104811824A true CN104811824A (zh) 2015-07-29
CN104811824B CN104811824B (zh) 2018-05-04

Family

ID=53696236

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410043887.2A Active CN104811824B (zh) 2014-01-29 2014-01-29 多媒体传输网络系统

Country Status (1)

Country Link
CN (1) CN104811824B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949879A (zh) * 2005-10-11 2007-04-18 华为技术有限公司 分组网络中多媒体实时传输的唇同步方法及其装置
JP2007110742A (ja) * 2006-11-20 2007-04-26 Hitachi Ltd ネットワークキャッシュ装置およびキャッシュ制御方法
CN101272199A (zh) * 2008-05-14 2008-09-24 中兴通讯股份有限公司 一种广播节目变速播放处理方法和终端
CN101335932A (zh) * 2007-06-27 2008-12-31 中国移动通信集团公司 基站间数据同步的方法、设备和系统
CN101686236A (zh) * 2008-09-27 2010-03-31 中国移动通信集团公司 并发关联类业务的同步方法及其装置
CN102057687A (zh) * 2008-06-11 2011-05-11 皇家飞利浦电子股份有限公司 媒体流成分的同步
CN102215418A (zh) * 2010-06-18 2011-10-12 威盛电子股份有限公司 3d影像显示方法及接口单元
CN102356619A (zh) * 2009-03-16 2012-02-15 皇家Kpn公司 已修改流同步
CN103023934A (zh) * 2011-09-23 2013-04-03 中兴通讯股份有限公司 虚拟终端系统和虚拟终端系统中的多流业务同步方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949879A (zh) * 2005-10-11 2007-04-18 华为技术有限公司 分组网络中多媒体实时传输的唇同步方法及其装置
JP2007110742A (ja) * 2006-11-20 2007-04-26 Hitachi Ltd ネットワークキャッシュ装置およびキャッシュ制御方法
CN101335932A (zh) * 2007-06-27 2008-12-31 中国移动通信集团公司 基站间数据同步的方法、设备和系统
CN101272199A (zh) * 2008-05-14 2008-09-24 中兴通讯股份有限公司 一种广播节目变速播放处理方法和终端
CN102057687A (zh) * 2008-06-11 2011-05-11 皇家飞利浦电子股份有限公司 媒体流成分的同步
CN101686236A (zh) * 2008-09-27 2010-03-31 中国移动通信集团公司 并发关联类业务的同步方法及其装置
CN102356619A (zh) * 2009-03-16 2012-02-15 皇家Kpn公司 已修改流同步
CN102215418A (zh) * 2010-06-18 2011-10-12 威盛电子股份有限公司 3d影像显示方法及接口单元
CN103023934A (zh) * 2011-09-23 2013-04-03 中兴通讯股份有限公司 虚拟终端系统和虚拟终端系统中的多流业务同步方法

Also Published As

Publication number Publication date
CN104811824B (zh) 2018-05-04

Similar Documents

Publication Publication Date Title
SG11201906092QA (en) Method and device for processing client end microphone-connection live broadcast
RU2634908C2 (ru) Способ и устройство для управления доставкой медиаданных
KR102301333B1 (ko) 브로드캐스트 채널을 통한 dash 콘텐츠 스트리밍 방법 및 장치
MX348574B (es) Metodo y aparato para transmitir datos de medios en un sistema de transporte de medios de comunicacion multiples.
MX2020004511A (es) Metodo y aparato para transmitir y recibir contenido de medios de comunicacion multiples.
US10742693B2 (en) Method and system for writing trajectory synchronization among multiple clients
EP4287750A3 (en) System information transmission method, terminal, and network device
FI2843955T3 (fi) Menetelmä datan lähettämiseksi multimedialähetysjärjestelmässä
AU2012270417A8 (en) Method and apparatus for transmitting/receiving media contents in multimedia system
CN103929427A (zh) 一种动态多线程下载装置及其下载方法
CN103401946B (zh) Http上传加速方法和系统
WO2014160709A3 (en) Systems and methods for scheduling of data packets based on delay tolerance of applications
MX2015010889A (es) Sistemas y metodos para la programacion de paquetes de datos con base en la deteccion de aplicacion en una estacion base.
WO2010033750A3 (en) Systems and methods for automatic detection and coordinated delivery of burdensome media content
CN102394880B (zh) 内容分发网络中的跳转响应处理方法和设备
WO2012099399A3 (ko) 방송통신 융합형 서비스를 위한 전송 방법 및 장치
WO2011155776A3 (ko) 프래그먼트 기반의 멀티미디어 스트리밍 서비스 제공 방법과 그 장치, 그리고 프래그먼트 기반의 멀티미디어 스트리밍 서비스 수신 방법과 그 장치
CN103957469A (zh) 基于实时转封装的互联网视频点播方法及系统
EP4336863A3 (en) Latency negotiation in a heterogeneous network of synchronized speakers
WO2012126421A3 (zh) 一种光传送网的数据处理方法、相关设备及系统
WO2019134370A8 (zh) 车联网中用于传输数据的方法、终端设备和网络设备
GB2499856A (en) Managed channel for asynchronous requests
CN103533395A (zh) 实现hls频道回看播放的方法及系统
MX2019015327A (es) Procedimiento de transmision de datos, dispositivo terminal y dispositivo de red.
EP4255102A3 (en) Method and terminal device for data transmission

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Room 1018, block B, No. three East Bridge Road, Pudong New Area, Shanghai, 200125, China

Applicant after: Shanghai NERC-DTV National Engineering Research Center Co., Ltd.

Address before: 200125 Shanghai East Road, Pudong New Area, No. three, No. 1018

Applicant before: Shanghai NERC-DTV National Engineering Research Center Co., Ltd.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant