CN107968950A - 一种基于异构网络的多媒体资源同步推送方法 - Google Patents

一种基于异构网络的多媒体资源同步推送方法 Download PDF

Info

Publication number
CN107968950A
CN107968950A CN201610916013.2A CN201610916013A CN107968950A CN 107968950 A CN107968950 A CN 107968950A CN 201610916013 A CN201610916013 A CN 201610916013A CN 107968950 A CN107968950 A CN 107968950A
Authority
CN
China
Prior art keywords
multimedia resource
resource
broadband
server
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610916013.2A
Other languages
English (en)
Inventor
徐异凌
张文军
冯姗
王成志
王延峰
孙军
管云峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201610916013.2A priority Critical patent/CN107968950A/zh
Priority to PCT/CN2017/099434 priority patent/WO2018041092A1/zh
Priority to KR1020187037923A priority patent/KR102271686B1/ko
Priority to CA3026535A priority patent/CA3026535C/en
Priority to JP2018567950A priority patent/JP6732970B2/ja
Publication of CN107968950A publication Critical patent/CN107968950A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26208Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26208Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
    • H04N21/26241Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints involving the time of distribution, e.g. the best time of the day for inserting an advertisement or airing a children program

Abstract

本发明公开了一种基于异构网络的多媒体资源同步推送方法,包括:步骤一:服务端获知不同用户所处的端到端宽带网络延时信息;步骤二:服务端在收到用户请求之后,根据不同用户所处的端到端宽带网络延时,计算出多媒体资源能够同步呈现的时刻;步骤三:服务端发送上述能同步呈现的时刻的多媒体资源,用户端根据媒体资源的起始呈现时间同步播放内容使得不同用户的宽带内容都能同步呈现。本发明解决了异构网络传输中因网路状况不同而导致广播和宽带用户媒体资源不同步的问题。

Description

一种基于异构网络的多媒体资源同步推送方法
技术领域
本发明涉及一种信息技术领域的异构媒体网络传输方法,特别是涉及一种基于异构网络的多媒体资源同步推送方法。
背景技术
随着网络技术的日新月异,媒体呈现方式发生了翻天覆地的变化,新的媒体形式层出不穷。传统电视已不再是人们获取信息和娱乐的主要途径,更多的终端设备出现在我们面前,如连接互联网的PC、几乎人手一台的手机以及越来越普及的移动平板电脑等,这些新的产品已经在慢慢侵蚀传统电视业务的市场。多媒体业务伴随变革的移动通信和宽带无线技术的发展日益成熟,大规模的媒体融合已经成为一种必然趋势,在这个过程中,新的思路和高端产品不断出现,使用户能够便捷地接入网络,轻松地享用更丰富的媒体内容和多样化的服务。
与此同时,媒体内容的呈现将不只是简单的视频,音频,字幕,媒体类型将会越来越丰富多样。媒体来源也不只是特定的内容提供商,越来越多的制作者参与其中,包括很多个人用户同时也是内容的提供和制作者。这些来自不同提供者的内容存在着各种关联关系,为了满足不同用户的个性化需求,这些关联内容往往需要同步呈现。在此环境下,异构网络融合作为下一代网络发展的必然趋势,充分说明了未来的通信不再是某种特定的接入技术,而是多种接入技术并存、协同工作。
在异构媒体网络的环境下,终端呈现的媒体内容可同时从多个传输通道传输过来,例如广播通道和宽带通道。广播通道的媒体资源具有延迟短(基本忽略不计),带宽高且稳定的特点,而对于不同的宽带通道(WIFI,3G/4G等),带宽和网络延时都有很大的差异性。
因此对于由广播和宽带构成的异构网络媒体资源服务中,由于宽带通道网络状况的差异性,会有以下三种不同步的案例:服务端通过广播向用户推送媒体内容,如果用户请求相同媒体内容的宽带资源,则由于宽带网络的延时和带宽,会造成客户端从广播和宽带接收的内容在时间线上的不同步;服务端通过广播和宽带向用户推送相同的媒体内容,如果用户请求更换宽带资源媒体流(如不同视角、不同音频等),切换媒体流时,由于不同宽带网络延时和带宽不同,会造成终端新带宽内容和广播内容不同步;服务端通过广播和宽带向用户推送相同的媒体内容,如果在某个时刻宽带网络状况变差造成宽带通道播放不流畅,等到视频再次流畅播放时,会造成不同用户间广播和宽带的资源不同步。
因此,在新一代异构网络传输系统下如何让服务端根据网络状况同步传输多媒体资源,成为一个亟待解决的问题。
发明内容
本发明所要解决的技术问题是提供一种基于异构网络的多媒体资源同步推送方法,实现异构网络传输下服务端广播媒体和宽带媒体内容同步的机制,解决了异构网络传输中因网络状况不同而导致广播和宽带用户媒体资源不同步的问题。
本发明是通过下述技术方案来解决上述技术问题的:一种基于异构网络的多媒体资源同步推送方法,包括以下步骤:
步骤一:服务端获知不同用户所处的端到端宽带网络延时信息;
步骤二:服务端在收到用户端请求之后,根据不同用户所处的端到端宽带网络延时信息,计算出多媒体资源能够同步呈现的时刻;
步骤三:服务端发送上述能同步呈现的时刻以后的多媒体资源,用户端根据媒体资源的起始呈现时间同步播放内容使得不同用户的宽带内容都能同步呈现。
优选地,所述步骤二中,针对用户所处的端到端宽带网络延时不同情况,服务端在t0时刻发送tini时刻的多媒体资源以保证同步,tini为ttmp之后的第一个完整MU的起始时刻,其中:
0≤tini-ttmp<MU_duration
ttmp=t0+△t
式中:t0为发送时刻,MU_duration为媒体单元时长,△t为下行端到端宽带网络延时,ttmp为计算所得用户端收到第一个MU的时刻。
优选地,所述步骤三中,起始发送的内容是tini时刻的多媒体资源,为使宽带和广播同步,宽带收到完整的第一个MU之后,并不立即播放,而是等到tini时刻再播放此刻的多媒体资源。
优选地,所述服务端发送多媒体资源给用户端,用户端根据媒体资源的起始呈现时间同步播放内容。
优选地,所述方法适用于异构网络媒体服务中不同的用户在某时刻向服务端请求同一个多媒体资源或者切换不同多媒体资源或者因网络多状况恶化而重新请求多媒体资源,为使该部分媒体资源内容同步呈现的情况。
本发明的积极进步效果在于:本发明服务端针对不同用户宽带网络的状况,采取同步推送媒体资源的方法,实现异构网络传输下服务端广播媒体和宽带媒体内容播放同步的机制,解决了因为不同网络状况不同带来的媒体资源不同步的问题。
附图说明
图1为本发明一实例的时序示意图。
具体实施方式
下面结合附图给出本发明较佳实施例,以详细说明本发明的技术方案。
如今,基于异构网络的多样化终端呈现方式已成为发展的趋势。在观看高质量广播视频节目的同时,人们对于多样化的网络媒体服务的诉求也越来越高。一般来说,由广播通道过来的媒体内容有很小并且固定的延时,因此对于媒体内容的同步影响不大;而从宽带过来的媒体内容如音视频、字幕、多媒体应用等内容易受当前IP网络影响,产生较大且抖动的延时,给内容同步带来了问题。
本发明通过在网络中的相应方法,获知不同用户所处的端到端宽带网络延时信息,用来改变服务端起始传输宽带资源的起始时间,实现了异构网络下多媒体资源的同步。具体的,本发明方法步骤包括:
首先,服务端可以根据一些方法,比如通过用户端反馈过来的信令信息、通过估算测量等,获知不同用户所处的端到端宽带网络延时信息。
其次,针对异构网络媒体服务中不同的用户在某时刻向服务端请求同一个多媒体资源或者切换不同多媒体资源或者因网络状况恶化而重新请求多媒体资源的情况,为保证该部分多媒体资源内容同步呈现,服务端在收到用户请求之后,根据不同用户所处网络的延时情况,计算出多媒体资源能够同步呈现的时刻。
最后,服务端发送上述能同步呈现的时刻以后的多媒体资源,客户端根据媒体内容播放起始时间同步播放内容,保证不同用户的宽带部分内容都能同步呈现。
如图1所示,在一具体实施例中,具体实施如下:
步骤一:已知服务端在t0时刻收到客户端请求,不同用户群体的下行端到端宽带网络延时△t,独立可解媒体单元MU(media unit)时长MU_duration;
步骤二:针对用户所处的端到端宽带网络延时不同情况,服务器在t0时刻发送tini时刻的多媒体资源以保证同步,tini为ttmp之后的第一个完整MU的起始时刻,其中如式(1)、式(2):
0≤tini-ttmp<MU_duration……(1)
ttmp=t0+△t……(2)
式(1)中MU_duration为媒体单元时长,式(2)中,t0为发送时刻,△t为下行端到端宽带网络延时,ttmp为计算所得客户端收到第一个MU的时刻;
在一优选实施方式中,上述的参数可以选择以下数值:
MU_duration:0~10s,较优值为0.5s;
△t:0~∞,较优值为2s。
步骤三:由于起始发送的内容是tini时刻及以后的多媒体资源,为保证宽带和广播同步,宽带收到完整的第一个MU之后,并不立即播放,而是等到tini时刻及以后再发送此刻的媒体内容。
下面给出多媒体资源同步的具体事例(用户端请求和服务端告知用户端方式不限,以下均以信令方式为例,信令基于MMT协议):
当用户正在观看奥运直播节目,由于精彩众多,观众口不一,因此节目方专为观众拍摄了多角度视频,供观众选择。
虽然此刻观众在看主节目的同时,还在小画面中观看某个运动员的特写表现,可是该运动员的比赛很快就结束了,观众想立刻更换角度收看另一运动员的身姿,于是观众向服务端发送请求,该请求信令应包含端到端网络延时fixed_end_to_end_delay,该字段在HRBM_message中可获得,如下表1:
表1
message_id–HRBM的消息标识
version–HRBM的消息版本
length–HRBM的消息长度
extension_fields_Byte–HRBM扩展性字段
max_buffer_size–HRBM最大缓存大小
fixed_end_to_end_delay–端到端网络延时
max_transmission_delay–最大传输延时
t0=18:00:00服务端收到了请求,其中fixed_end_to_end_delay=△t=2s。
独立可解媒体单元时长从视频资源中可获知,MU_duration=0.5s。
△t=2s
ttmp=t0+△t=18:00:02
tini=18:00:022
服务端在t0=18:00:00时刻发送tini=18:00:022的资源,客户端收到第一个媒体资源时间是18:00:02,根据收到第一个媒体资源的时间戳信息timestamp=18:00:022,缓存当前媒体单元,等到18:00:022再播放该资源。
至此,用户就能在广播和点播同步下看到不同视角的另一运动员的身姿了,从而很好地解决了异构网络传输中因网络状况不同而导致广播和宽带用户媒体资源不同步的问题。
以上所述的具体实施例,对本发明的解决的技术问题、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种基于异构网络的多媒体资源同步推送方法,其特征在于,其包括以下步骤:
步骤一:服务端获知不同用户所处的端到端宽带网络延时信息;
步骤二:服务端在收到用户端请求之后,根据不同用户所处的端到端宽带网络延时信息,计算出多媒体资源能够同步呈现的时刻;
步骤三:服务端发送上述能同步呈现的时刻以后的多媒体资源,用户端根据媒体资源的起始呈现时间同步播放内容使得不同用户的宽带内容都能同步呈现。
2.根据权利要求1所述的基于异构网络的多媒体资源同步推送方法,其特征在于,所述步骤二中,针对用户所处的宽带网络延时△t不同情况,服务端在t0时刻发送tini时刻的多媒体资源以保证同步,其中tini为ttmp之后的第一个完整独立可解媒体资源MU的起始时刻,其中:
0≤tini-ttmp<MU_duration
ttmp=t0+△t
式中:t0为发送时刻,MU_duration为媒体单元时长,△t为下行端到端宽带网络延时,ttmp为计算所得用户端收到第一个独立可解媒体资源MU的时刻。
3.根据权利要求2所述的基于异构网络的多媒体资源同步推送方法,其特征在于:
所述MU_duration取值为:0~10s;
所述Δt取值为:0~∞。
4.根据权利要求3所述的基于异构网络的多媒体资源同步推送方法,其特征在于:
所述MU_duration取值为:0.5s;
所述Δt取值为:2s。
5.根据权利要求2所述的基于异构网络的多媒体资源同步推送方法,其特征在于,所述步骤三中,服务端起始发送的内容是tini时刻以后的多媒体资源,为使宽带和广播同步,用户端通过宽带收到完整的第一个MU之后,并不立即播放,而是等到tini时刻再播放此刻的多媒体资源。
6.根据权利要求1所述的基于异构网络的多媒体资源同步推送方法,其特征在于,所述服务端发送多媒体资源给用户端,用户端根据媒体资源的起始呈现时间同步播放内容。
7.根据权利要求1-6任一项所述的基于异构网络的多媒体资源同步推送方法,其特征在于,所述方法适用于异构网络媒体服务中不同的用户在某时刻向服务端请求同一个多媒体资源或者切换不同多媒体资源或者因网络多状况恶化而重新请求多媒体资源,为使该部分媒体资源内容同步呈现的情况。
CN201610916013.2A 2016-08-29 2016-10-20 一种基于异构网络的多媒体资源同步推送方法 Pending CN107968950A (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201610916013.2A CN107968950A (zh) 2016-10-20 2016-10-20 一种基于异构网络的多媒体资源同步推送方法
PCT/CN2017/099434 WO2018041092A1 (zh) 2016-08-29 2017-08-29 一种基于异构网络的多媒体资源同步推送方法
KR1020187037923A KR102271686B1 (ko) 2016-08-29 2017-08-29 이종 네트워크 기반의 멀티미디어 자원 동기화 푸시 방법
CA3026535A CA3026535C (en) 2016-08-29 2017-08-29 Multimedia resource synchronous pushing method based on heterogeneous network
JP2018567950A JP6732970B2 (ja) 2016-08-29 2017-08-29 異種ネットワークに基づくマルチメディアリソースを同期に送る方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610916013.2A CN107968950A (zh) 2016-10-20 2016-10-20 一种基于异构网络的多媒体资源同步推送方法

Publications (1)

Publication Number Publication Date
CN107968950A true CN107968950A (zh) 2018-04-27

Family

ID=61997302

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610916013.2A Pending CN107968950A (zh) 2016-08-29 2016-10-20 一种基于异构网络的多媒体资源同步推送方法

Country Status (1)

Country Link
CN (1) CN107968950A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110996181A (zh) * 2019-08-14 2020-04-10 中国电子科技集团公司第七研究所 一种多源内容数据统一封装方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101889422A (zh) * 2007-12-05 2010-11-17 皇家Kpn公司 用于使终端的输出同步的方法及系统
CN102215224A (zh) * 2011-05-20 2011-10-12 深圳市金槌拍卖行有限公司 网络倒计时精确同步技术
CN102572611A (zh) * 2010-12-07 2012-07-11 中国电信股份有限公司 不同用户同步收看网络直播流的方法和系统
CN104244027A (zh) * 2014-09-30 2014-12-24 上海斐讯数据通信技术有限公司 音/视频数据实时传输并共享播放进程的控制方法及系统
CN105406955A (zh) * 2014-08-07 2016-03-16 西安Tcl软件开发有限公司 数据输出的控制方法和系统
CN105847926A (zh) * 2016-03-31 2016-08-10 乐视控股(北京)有限公司 一种多媒体数据的同步播放方法及装置
CN105991469A (zh) * 2015-02-06 2016-10-05 上海交通大学 一种异构网络传输下的动态时间窗口及缓存机制

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101889422A (zh) * 2007-12-05 2010-11-17 皇家Kpn公司 用于使终端的输出同步的方法及系统
CN102572611A (zh) * 2010-12-07 2012-07-11 中国电信股份有限公司 不同用户同步收看网络直播流的方法和系统
CN102215224A (zh) * 2011-05-20 2011-10-12 深圳市金槌拍卖行有限公司 网络倒计时精确同步技术
CN105406955A (zh) * 2014-08-07 2016-03-16 西安Tcl软件开发有限公司 数据输出的控制方法和系统
CN104244027A (zh) * 2014-09-30 2014-12-24 上海斐讯数据通信技术有限公司 音/视频数据实时传输并共享播放进程的控制方法及系统
CN105991469A (zh) * 2015-02-06 2016-10-05 上海交通大学 一种异构网络传输下的动态时间窗口及缓存机制
CN105847926A (zh) * 2016-03-31 2016-08-10 乐视控股(北京)有限公司 一种多媒体数据的同步播放方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110996181A (zh) * 2019-08-14 2020-04-10 中国电子科技集团公司第七研究所 一种多源内容数据统一封装方法

Similar Documents

Publication Publication Date Title
CN100429901C (zh) 音视频广播网络直播频道切换的方法及结构
US8627390B2 (en) Method and device for providing programs to multiple end user devices
JP6317872B2 (ja) 異なるネットワークを介して受信したコンテンツのレンダリングを同期するデコーダ及びそれにおける方法
US7817672B2 (en) Method and device for providing programs to multiple end user devices
US9237179B2 (en) Method and system for synchronizing the output of terminals
EP1694030A1 (en) Multimedia content delivery system
KR20080106517A (ko) 통신 네트워크를 통해 미디어 컨텐츠를 공급하기 위한 방법, 장치 및 시스템
CN106507186B (zh) 一种媒体信息的切换方法、服务器及存储介质
KR101200492B1 (ko) 멀티미디어 재생 장치 및 그 재생 방법
US20080271097A1 (en) System And Method For Receiving And Playing Network Television Programs
CN110113621B (zh) 媒体信息的播放方法和装置、存储介质、电子装置
CN106303682B (zh) 频道切换的方法、装置、终端及服务器
RU2656093C2 (ru) Устройство поставки контента, способ поставки контента, программа, оконечное устройство и система поставки контента
WO2010075743A1 (zh) 一种网络电视显示时间的方法及设备
US20060034341A1 (en) Method and device for receiving and providing programs
CN106488255B (zh) 一种切换媒体流的方法及装置
WO2008000114A1 (fr) Procédé de fusion d&#39;un système de conférence télévisuelle avec un système iptv et appareil correspondant
CN107968950A (zh) 一种基于异构网络的多媒体资源同步推送方法
KR102271686B1 (ko) 이종 네트워크 기반의 멀티미디어 자원 동기화 푸시 방법
CN107801103A (zh) 异构网络下基于网络状况的多媒体资源自适应同步方法
CN108632681B (zh) 播放媒体流的方法、服务器及终端
CN108737844A (zh) 信息传输方法及装置、存储介质、电子装置
KR20120139514A (ko) Dash 규격의 미디어 데이터와 mmt 전송 시스템과의 연동 방법 및 그 장치
CN111526390B (zh) 发送mmt包的方法及装置、接收mmt包的方法
KR101999235B1 (ko) Mmtp기반 하이브리드 브로드캐스트 브로드밴드 서비스 제공 방법 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180427