CN101123611B - 一种流媒体数据的发送方法 - Google Patents

一种流媒体数据的发送方法 Download PDF

Info

Publication number
CN101123611B
CN101123611B CN2007101224211A CN200710122421A CN101123611B CN 101123611 B CN101123611 B CN 101123611B CN 2007101224211 A CN2007101224211 A CN 2007101224211A CN 200710122421 A CN200710122421 A CN 200710122421A CN 101123611 B CN101123611 B CN 101123611B
Authority
CN
China
Prior art keywords
time
media data
media
rtp
timestamp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007101224211A
Other languages
English (en)
Other versions
CN101123611A (zh
Inventor
童登金
陈光亮
李加周
阮亚平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN2007101224211A priority Critical patent/CN101123611B/zh
Publication of CN101123611A publication Critical patent/CN101123611A/zh
Application granted granted Critical
Publication of CN101123611B publication Critical patent/CN101123611B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

一种流媒体数据的发送方法，预先选取作为所有媒体数据包的时间基准的统一标准时间点；根据接收到的媒体数据报文内容和媒体控制报文内容，确定各个媒体数据包所对应的相应统一标准时间点；根据各媒体数据包的统一标准时间点，确定各媒体数据包所对应的媒体单元的时间戳；将已确定的时间戳携带于相应的媒体单元中，并将媒体单元封装在帧结构中发送。由于本发明为媒体单元确定的时间戳的关键因素是为所有媒体数据包所选取的统一标准时间点，因此有时间关联的各媒体数据包可以很容易地实现时间同步，使得经过不同路径到达同一目的的媒体单元的时间先后顺序很容易识别，方便了接收端的处理，因而能够保证流媒体数据的同步性，进而有效提高用户满意度。

Description

一种流媒体数据的发送方法
技术领域
本发明涉及移动通信领域，具体涉及一种流媒体数据的发送方法。 
背景技术
在中国广播电影电视行业标准(CMMB)中，用于承载流媒体数据的媒体单元被要求打上时间戳，但目前还没有针对时间戳的具体操作方法。另外，流媒体通信要求有时间关联的各媒体保持时间上的同步。有同步关系的流媒体数据可能在同一个复用子帧里，也可能在一个网络节点里的不同复用子帧里，甚至可能在不同节点上。 
但由于没有针对时间戳的具体操作方法，导致流媒体通信的同步尚无法有效实现；在对发送流媒体数据的前端设备进行主备倒换的情况下，同步更是难以实现，这导致接收端无法确定接收到的流媒体数据在播放时的先后顺序，在降低流媒体数据播放质量的同时还降低了用户满意度。 
发明内容
有鉴于此，本发明的主要目的在于提供一种流媒体数据的发送方法，保证流媒体数据的同步性，提高用户满意度。 
为达到上述目的，本发明的技术方案是这样实现的： 
一种流媒体数据的发送方法，该方法包括： 
为独立运行的不同前端设备选取同一个网络时间协议(NTP)时间值： 
将所选取的NTP时间值作为表示所有媒体数据包的时间基准的统一标准时间点；根据接收到的媒体数据报文内容和媒体控制报文内容，确定各个媒体数据包所对应的相应统一标准时间点；根据各媒体数据包的统一标准时间点，确定各媒体数据包所对应的媒体单元的时间戳；将已确定的时间戳携带于相应  的媒体单元中，并将媒体单元封装在帧结构中发送； 
其中，所述所有媒体数据包在同一复用子帧、或不同复用子帧中发送。 
所述NTP时间值的取值范围为：从0至早于当前时间的非负的NTP时间。 
所述确定各个媒体数据包所对应的相应统一标准时间点的方法为： 
根据实时传输协议(RTP)/实时传输控制协议(RTCP)报文内容计算RTP包所对应的NTP时间。 
计算所述NTP时间的方法为： 
接收输入的RTP和RTCP流，并从收到的RTCP流所包含的RTCP报文中取出参考NTP时间和对应的参考RTP时间戳；查找收到的RTP包所对应的RTCP流，应用RTP包里的RTP时间戳与查找到的RTCP流里的参考RTP时间戳做差值运算，根据差值运算结果得到参考绝对时间差；应用所得到的参考绝对时间差加上所述参考NTP时间，得到所述RTP包所对应的NTP时间。 
确定的所述统一标准时间点为RTP包所对应的NTP时间；确定所述时间戳的方法为： 
用得到的RTP包对应的所述NTP时间减去NTP时间基准，得到绝对时间差值；应用所述绝对时间差值乘以时间单位，将乘得的值以2的32次方取模，将取模所得结果作为所述时间戳。 
所述媒体单元是中国广播电影电视行业标准媒体单元，所述时间戳是中国广播电影电视行业标准时间戳。 
所述帧结构是复用子帧/复用帧结构。 
所述统一标准时间点是格林威治时间。 
可见，本发明所提供的流媒体数据发送方法，由于为媒体单元确定的时间戳的关键因素是为所有媒体数据包所选取的统一标准时间点，因此有时间关联的各媒体数据包可以很容易地实现时间同步，使得经过不同路径到达同一目的的媒体单元的时间先后顺序很容易识别，方便了接收端的处理。本发明的流媒 体数据发送方法，能够保证流媒体数据的同步性，进而有效提高用户满意度。 
附图说明
图1为本发明一实施例的流媒体数据发送流程图。 
具体实施方式
下面结合附图对本发明技术详细描述。 
参见图1，图1为本发明一实施例的流媒体数据发送流程图，该流程包括以下步骤： 
步骤101：选取作为所有媒体数据包的时间基准的统一标准时间点。具体而言，可以预先为所有独立运行的前端设备选取同一个NTP时间值，将该NTP时间值作为表示所有媒体数据包的时间基准的统一标准时间点。表示所有媒体数据包的时间基准的所述统一标准时间点的取值范围为早于当前时间的一个非负的NTP时间，可以为0。 
步骤102：根据接收到的媒体数据报文内容和媒体控制报文内容，确定各个媒体数据包所对应的相应统一标准时间点。 
具体而言，所述媒体数据报文内容可以来自RTP媒体流中，所述媒体控制报文内容可以来自RTCP控制流中。在确定各个媒体数据包所对应的相应统一标准时间点时，可以根据RTP/RTCP报文内容计算RTP包所对应的NTP时间。 
比如：接收输入的RTP和RTCP流，并从收到的RTCP流所包含的RTCP报文中取出发送者报告(SR)里所携带的参考NTP时间和对应的参考RTP时间戳；之后，查找收到的RTP包所对应的RTCP流，应用RTP包里的RTP时间戳与查找到的RTCP流里的参考RTP时间戳做差值运算，并用差值运算结果除以其时间度量单位(timescale)，得到参考绝对时间差；接着，应用所得到的参考绝对时间差加上所述参考NTP时间，最终得到所述RTP包所对应的NTP时间。 
步骤103：根据各媒体数据包的统一标准时间点，确定各媒体数据包所对  应的媒体单元的时间戳。 
具体而言，可以根据得到的各RTP包对应的所述NTP时间为基准，计算得到各RTP包所对应的媒体单元的时间戳。所述媒体单元可以是CMMB媒体单元，所述时间戳可以是CMMB时间戳。 
比如：用得到的RTP包对应的所述NTP时间减去NTP时间基准，得到绝对时间差值；应用所述绝对时间差值乘以CMMB时间单位(22500/秒)，将乘得的值以2的32次方取模(因为CMMB时间戳是以32位值表示的)，将取模所得结果作为CMMB时间戳。 
步骤104：将已确定的时间戳携带于相应的媒体单元中，并将媒体单元封装在帧结构中发送。 
在实际应用中，可以将所述媒体单元封装在复用子帧/复用帧结构中发送。 
由图1可见，为媒体单元确定的时间戳的关键因素是为所有媒体数据包所选取的统一标准时间点，这使得有时间关联的各媒体数据包可以很容易地实现时间同步；经过不同路径到达同一目的的媒体单元的时间先后顺序很容易识别，方便了接收端的处理。显然，图1所示流程在保证流媒体数据同步性的同时，还能有效提高用户满意度。图1所示流程适用于媒体单元通过同一复用子帧、不同复用子帧、甚至独立运行的不同前端设备传送。 
另外，即便是在对发送流媒体数据的前端设备进行主备倒换的情况下，由于进行主备倒换的所有前端设备均以所选取的相同统一标准时间点作为时间基准，所以在发生主备倒换前后所分别发送的媒体数据包之间也具有正确的时间先后顺序；因此，接收端可以轻松确定接收到的流媒体数据在播放时的先后顺序，进而实现流媒体数据的正确连续播放。显然，即便是在对发送流媒体数据的前端设备进行主备倒换的情况下，图1所示流程仍能在保证流媒体数据同步性的同时，有效提高用户满意度。 
在实际应用时，所述统一标准时间点还可以是格林威治时间。 
由以上所述可见，本发明的流媒体数据发送方法，能够保证流媒体数据的同步性，进而有效提高用户满意度。 

Claims (8)

1.一种流媒体数据的发送方法，其特征在于，该方法包括：
为独立运行的不同前端设备选取同一个网络时间协议NTP时间值；
将所选取的NTP时间值作为表示所有媒体数据包的时间基准的统一标准时间点；根据接收到的媒体数据报文内容和媒体控制报文内容，确定各个媒体数据包所对应的相应统一标准时间点；根据所确定的各个媒体数据包所对应的相应统一标准时间点以及所述NTP时间值，确定各个媒体数据包所对应的媒体单元的时间戳；将已确定的时间戳携带于相应的媒体单元中，并将媒体单元封装在帧结构中发送；
其中，所述所有媒体数据包在同一复用子帧、或不同复用子帧中发送。
2.根据权利要求1所述的方法，其特征在于，所述NTP时间值的取值范围为：从0至早于当前时间的非负的NTP时间。
3.根据权利要求1所述的方法，其特征在于，所述确定各个媒体数据包所对应的相应统一标准时间点的方法为：
根据实时传输协议RTP和实时传输控制协议RTCP报文内容计算RTP包所对应的NTP时间。
4.根据权利要求3所述的方法，其特征在于，计算所述NTP时间的方法为：
接收输入的RTP和RTCP流，并从收到的RTCP流所包含的RTCP报文中取出参考NTP时间和对应的参考RTP时间戳；查找收到的RTP包所对应的RTCP流，应用RTP包里的RTP时间戳与查找到的RTCP流里的参考RTP时间戳做差值运算，根据差值运算结果得到参考绝对时间差；应用所得到的参考绝对时间差加上所述参考NTP时间，得到所述RTP包所对应的NTP时间。
5.根据权利要求1所述的方法，其特征在于，确定的所述各个媒体数据包所对应的相应统一标准时间点为RTP包所对应的NTP时间；确定所述时间戳的方法为：
用得到的RTP包对应的所述NTP时间减去NTP时间基准，得到绝对时间差值；应用所述绝对时间差值乘以时间单位，将乘得的值以2的32次方取模，将取模所得结果作为所述时间戳。
6.根据权利要求1至5任一项所述的方法，其特征在于，所述媒体单元是中国广播电影电视行业标准CMMB媒体单元，所述时间戳是CMMB时间戳。
7.根据权利要求1至5任一项所述的方法，其特征在于，所述帧结构是复用子帧或复用帧结构。
8.根据权利要求1所述的方法，其特征在于，所述统一标准时间点是格林威治时间。
CN2007101224211A 2007-09-25 2007-09-25 一种流媒体数据的发送方法 Expired - Fee Related CN101123611B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2007101224211A CN101123611B (zh) 2007-09-25 2007-09-25 一种流媒体数据的发送方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007101224211A CN101123611B (zh) 2007-09-25 2007-09-25 一种流媒体数据的发送方法

Publications (2)

Publication Number Publication Date
CN101123611A CN101123611A (zh) 2008-02-13
CN101123611B true CN101123611B (zh) 2012-05-23

Family

ID=39085789

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101224211A Expired - Fee Related CN101123611B (zh) 2007-09-25 2007-09-25 一种流媒体数据的发送方法

Country Status (1)

Country Link
CN (1) CN101123611B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101741701B (zh) * 2008-11-12 2012-01-11 中兴通讯股份有限公司 同步调度方法和装置
CN102196319A (zh) * 2010-03-17 2011-09-21 中兴通讯股份有限公司 一种流媒体直播业务系统及实现方法
WO2012094974A1 (zh) * 2011-01-11 2012-07-19 中兴通讯股份有限公司 一种多个媒体流同步的方法、装置及系统
WO2018170852A1 (zh) * 2017-03-23 2018-09-27 华为技术有限公司 多设备间唇音同步方法及设备
CN108156233A (zh) * 2017-12-20 2018-06-12 惠州Tcl家电集团有限公司 数据处理方法、装置及计算机可读存储介质
WO2021159329A1 (zh) * 2020-02-12 2021-08-19 深圳元戎启行科技有限公司 流媒体网络时延确定方法、装置、计算机设备、可读存储介质和远程驾驶系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1610558A2 (en) * 2004-06-22 2005-12-28 LG Electronics Inc. Synchronizing video/audio of mobile communication terminal
CN1960485A (zh) * 2006-08-29 2007-05-09 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1610558A2 (en) * 2004-06-22 2005-12-28 LG Electronics Inc. Synchronizing video/audio of mobile communication terminal
CN1738437A (zh) * 2004-06-22 2006-02-22 Lg电子株式会社 同步移动通信终端的视频/音频数据
CN1960485A (zh) * 2006-08-29 2007-05-09 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法

Also Published As

Publication number Publication date
CN101123611A (zh) 2008-02-13

Similar Documents

Publication Publication Date Title
CN102356619B (zh) 已修改流同步
CN102742249B (zh) 用于媒体流同步的方法、系统和装置
US7664057B1 (en) Audio-to-video synchronization system and method for packet-based network video conferencing
CN101889422B (zh) 用于使终端的输出同步的方法及系统
CN101123611B (zh) 一种流媒体数据的发送方法
US20080151885A1 (en) On-Demand Multi-Channel Streaming Session Over Packet-Switched Networks
US8774287B2 (en) Precise compensation of video propagation duration
TW201433129A (zh) 用於在媒體中繼會談中同步化音訊及視訊串流之方法及系統
KR20110098830A (ko) 외부 코프로세서를 포함하는 멀티플렉서에서의 전송 스트림 동기화를 위한 방법
CN102065060A (zh) 媒体流切换同步方法和流媒体服务器
US20090021639A1 (en) Audio and Video Communication
WO2013098809A1 (en) Media stream rate reconstruction system and method
US9918112B2 (en) System and method for multiplexed streaming of multimedia content
EP1998510B1 (en) Encoded stream sending device
Wagner et al. Towards an RTP Profile for IPTV
CN100474923C (zh) 用于实时流式传输服务的mpeg-4编码模式选择方法
US20060159122A1 (en) Providing TDM channels to locations connected by networks implemented on broadcast medium
Wagner et al. A comparison of transport protocols in IPTV systems
Chi et al. A PRECISE AUDIO/VIDEO SYNCHRONIZATION SCHEME FOR MULTIMEDIA STREAMING

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120523

Termination date: 20170925