CN102404650A - 在线视频的音视频同步控制方法 - Google Patents
在线视频的音视频同步控制方法 Download PDFInfo
- Publication number
- CN102404650A CN102404650A CN2011103887901A CN201110388790A CN102404650A CN 102404650 A CN102404650 A CN 102404650A CN 2011103887901 A CN2011103887901 A CN 2011103887901A CN 201110388790 A CN201110388790 A CN 201110388790A CN 102404650 A CN102404650 A CN 102404650A
- Authority
- CN
- China
- Prior art keywords
- video
- data
- packets
- audio
- audio data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种在线视频的音视频同步控制方法，其实施步骤如下：1）视频服务器将媒体文件拆分为视频数据包和音频数据包；2）视频服务器将每一个视频数据包和音频数据包中插入时间戳并分发给请求在线视频服务的客户端；3）客户端接收视频数据包和音频数据包，根据视频数据包预设的帧率播放视频数据包，同时通过声卡时钟同步播放音频数据包；4）客户端定时检测视频数据包和音频数据包中的时间戳是否一致，如果不一致则修改音频数据包的播放速度直至视频数据包和音频数据包中的时间戳达到一致。本发明具有多媒体音视频同步效果好、简单可靠、开销小的优点。
Description
技术领域
本发明涉及在线视频控制领域，具体涉及一种在线视频的音视频同步控制方法。
背景技术
目前，在各种网络视频、VCD、DVD、数字电视以及新涌现的IPTV、手机电视等等视频播放应用中，国际标准以及其它非标准方法都将视频与其伴音信号的压缩编码分开进行，在网络中也都分别通过不同的数据单元(包、分组或帧等)进行传输，而且音频与视频信号的压缩编码采用了完全不同的方法。由此，不可避免地要解决音视频的同步问题。
尤其是近年来，随着互联网的发展，基于在线视频的娱乐、交友、教学得到了日益广泛的应用，而在网络视频应用中，不同时刻网络的吞吐量、传输时延等是不断变化的，这就使传输视频信号的分组与传输其对应伴音的分组很难同时到达接收端，从而使视频信号的播放不能与其伴音同步的问题更加严重，产生“唇音不同步”的效果，极大地限制了，基于在线视频的娱乐、交友、教学的推广和应用。
发明内容
本发明要解决的技术问题是提供一种多媒体音视频同步效果好、简单可靠、开销小的在线视频的音视频同步控制方法。
为了解决上述技术问题，本发明采用的技术方案为：
一种在线视频的音视频同步控制方法，其实施步骤如下：
1）视频服务器将媒体文件拆分为视频数据包和音频数据包；
2）视频服务器将每一个视频数据包和音频数据包中插入时间戳并分发给请求在线视频服务的客户端；
3）客户端接收视频数据包和音频数据包，根据视频数据包预设的帧率播放视频数据包，同时通过声卡时钟同步播放音频数据包；
4）客户端定时检测视频数据包和音频数据包中的时间戳是否一致，如果不一致则修改音频数据包的播放速度直至视频数据包和音频数据包中的时间戳达到一致。
作为上述技术方案的进一步改进：
所述步骤2）的详细步骤包括：视频服务器在将媒体文件拆分为视频数据包和音频数据包时，为同时拆分得到的视频数据包和音频数据包添加一个相同的时间戳，然后将添加时间戳后的视频数据包和音频数据包分别分发给请求在线视频服务的客户端。
所述步骤3）中客户端接收视频数据包和音频数据包的详细步骤包括：客户端预先建立具有视频缓冲队列和音频缓冲队列的媒体缓冲池，然后每接收到一个数据包则检测其数据包类型，如果数据包类型为视频数据包则放入视频缓冲队列，如果数据包类型为音频数据包则放入音频缓冲队列。
所述步骤4）的详细步骤包括：客户端设定检测周期，在后在每一个检测周期触发时，首先将视频数据包和音频数据包中的时间戳进行比较，然后根据比较结果修改音频数据包的播放速度，如果音频数据包延迟则将音频播放速度加速，如果视频数据包延迟则将音频播放速度减速，如果视频数据包和音频数据包同步则将音频播放速度恢复为通过声卡时钟同步播放音频数据包。
本发明具有下述优点：
本发明的客户端接收视频数据包和音频数据包，根据视频数据包预设的帧率播放视频数据包，同时通过声卡时钟同步播放音频数据包，客户端定时检测视频数据包和音频数据包中的时间戳是否一致，如果不一致则修改音频数据包的播放速度直至视频数据包和音频数据包中的时间戳达到一致，通过及视频播放速度为基准、调节音频的播放速率来实现同步，算法简单、计算资源耗费低，具有多媒体音视频同步效果好、简单可靠、开销小的优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例的主要流程示意图。
具体实施方式
下面结合附图对本发明的优选实施例进行详细阐述，以使本发明的优点和特征能更易于被本领域技术人员理解，从而对本发明的保护范围做出更为清楚明确的界定。
如图1所示，本实施例的在线视频的音视频同步控制方法，其实施步骤如下：
1）视频服务器将媒体文件拆分为视频数据包和音频数据包；
2）视频服务器将每一个视频数据包和音频数据包中插入时间戳并分发给请求在线视频服务的客户端；
3）客户端接收视频数据包和音频数据包，根据视频数据包预设的帧率播放视频数据包，同时通过声卡时钟同步播放音频数据包；
4）客户端定时检测视频数据包和音频数据包中的时间戳是否一致，如果不一致则修改音频数据包的播放速度直至视频数据包和音频数据包中的时间戳达到一致。
步骤2）的详细步骤包括：视频服务器在将媒体文件拆分为视频数据包和音频数据包时，为同时拆分得到的视频数据包和音频数据包添加一个相同的时间戳，然后将添加时间戳后的视频数据包和音频数据包分别分发给请求在线视频服务的客户端。
步骤3）中客户端接收视频数据包和音频数据包的详细步骤包括：客户端预先建立具有视频缓冲队列和音频缓冲队列的媒体缓冲池，然后每接收到一个数据包则检测其数据包类型，如果数据包类型为视频数据包则放入视频缓冲队列，如果数据包类型为音频数据包则放入音频缓冲队列。
步骤4）的详细步骤包括：客户端设定检测周期，在后在每一个检测周期触发时，首先将视频数据包和音频数据包中的时间戳进行比较，然后根据比较结果修改音频数据包的播放速度，如果音频数据包延迟则将音频播放速度加速，如果视频数据包延迟则将音频播放速度减速，如果视频数据包和音频数据包同步则将音频播放速度恢复为通过声卡时钟同步播放音频数据包。
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (4)
1.一种在线视频的音视频同步控制方法，其特征在于其实施步骤如下：
1）视频服务器将媒体文件拆分为视频数据包和音频数据包；
2）视频服务器将每一个视频数据包和音频数据包中插入时间戳并分发给请求在线视频服务的客户端；
3）客户端接收视频数据包和音频数据包，根据视频数据包预设的帧率播放视频数据包，同时通过声卡时钟同步播放音频数据包；
4）客户端定时检测视频数据包和音频数据包中的时间戳是否一致，如果不一致则修改音频数据包的播放速度直至视频数据包和音频数据包中的时间戳达到一致。
2.根据权利要求1所述的在线视频的音视频同步控制方法，其特征在于，所述步骤2）的详细步骤包括：视频服务器在将媒体文件拆分为视频数据包和音频数据包时，为同时拆分得到的视频数据包和音频数据包添加一个相同的时间戳，然后将添加时间戳后的视频数据包和音频数据包分别分发给请求在线视频服务的客户端。
3.根据权利要求2所述的在线视频的音视频同步控制方法，其特征在于，所述步骤3）中客户端接收视频数据包和音频数据包的详细步骤包括：客户端预先建立具有视频缓冲队列和音频缓冲队列的媒体缓冲池，然后每接收到一个数据包则检测其数据包类型，如果数据包类型为视频数据包则放入视频缓冲队列，如果数据包类型为音频数据包则放入音频缓冲队列。
4.根据权利要求1或2或3所述的在线视频的音视频同步控制方法，其特征在于，所述步骤4）的详细步骤包括：客户端设定检测周期，在后在每一个检测周期触发时，首先将视频数据包和音频数据包中的时间戳进行比较，然后根据比较结果修改音频数据包的播放速度，如果音频数据包延迟则将音频播放速度加速，如果视频数据包延迟则将音频播放速度减速，如果视频数据包和音频数据包同步则将音频播放速度恢复为通过声卡时钟同步播放音频数据包。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2011103887901A CN102404650A (zh) | 2011-11-30 | 2011-11-30 | 在线视频的音视频同步控制方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2011103887901A CN102404650A (zh) | 2011-11-30 | 2011-11-30 | 在线视频的音视频同步控制方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102404650A true CN102404650A (zh) | 2012-04-04 |
Family
ID=45886354
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011103887901A Pending CN102404650A (zh) | 2011-11-30 | 2011-11-30 | 在线视频的音视频同步控制方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102404650A (zh) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103517044A (zh) * | 2012-06-25 | 2014-01-15 | 鸿富锦精密工业（深圳）有限公司 | 视频会议装置及其唇形同步的方法 |
| CN103747287A (zh) * | 2014-01-13 | 2014-04-23 | 合一网络技术(北京)有限公司 | 应用于flash的视频播放速度调整的方法及系统 |
| CN103873952A (zh) * | 2012-12-18 | 2014-06-18 | 风网科技（北京）有限公司 | 一种高效的视频播放丢帧控制系统及其方法 |
| CN104881766A (zh) * | 2015-05-07 | 2015-09-02 | 北京京东尚科信息技术有限公司 | 一种分布式仓储数据处理方法、设备和系统 |
| CN105516090A (zh) * | 2015-11-27 | 2016-04-20 | 刘军 | 媒体播放方法、设备及音乐教学系统 |
| CN105744334A (zh) * | 2016-02-18 | 2016-07-06 | 海信集团有限公司 | 一种音视频同步和同步播放的方法及设备 |
| CN105872699A (zh) * | 2016-04-28 | 2016-08-17 | 乐视控股（北京）有限公司 | 视频播放控制方法及装置 |
| CN107426627A (zh) * | 2017-06-19 | 2017-12-01 | 环球智达科技（北京）有限公司 | 播放装置 |
| CN107484009A (zh) * | 2017-09-12 | 2017-12-15 | 上海脉淼信息科技有限公司 | 一种适用于网络直播的流媒体播放方法和装置 |
| CN107801080A (zh) * | 2017-11-10 | 2018-03-13 | 普联技术有限公司 | 一种音视频同步方法、装置及设备 |
| CN110290143A (zh) * | 2019-07-01 | 2019-09-27 | 新华智云科技有限公司 | 视频在线编辑方法、装置、电子设备及存储介质 |
| CN110418183A (zh) * | 2019-08-05 | 2019-11-05 | 北京字节跳动网络技术有限公司 | 音视频同步方法、装置、电子设备及可读介质 |
| CN111064698A (zh) * | 2019-06-26 | 2020-04-24 | 三星电子（中国）研发中心 | 一种多媒体流数据的播放方法和装置 |
| CN112511886A (zh) * | 2020-11-25 | 2021-03-16 | 杭州当虹科技股份有限公司 | 一种基于音频伸缩的音视频同步播放方法 |
| CN114866830A (zh) * | 2022-03-30 | 2022-08-05 | 中国经济信息社有限公司 | 一种音视频同步的方法、装置及计算机可读存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1933594A (zh) * | 2005-09-14 | 2007-03-21 | 王世刚 | 多路音视频数据网络传输与同步播放的方法 |
| CN101047844A (zh) * | 2006-03-30 | 2007-10-03 | 华为技术有限公司 | 一种控制流媒体播放的方法及装置 |
| CN101207822A (zh) * | 2006-12-22 | 2008-06-25 | 上海晨兴电子科技有限公司 | 流媒体终端的音频视频同步的方法 |
| US20100295993A1 (en) * | 2009-05-20 | 2010-11-25 | Samsung Electronics Co., Ltd. | Apparatus and method for synchronization between video and audio in mobile communication terminal |
-
2011
- 2011-11-30 CN CN2011103887901A patent/CN102404650A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1933594A (zh) * | 2005-09-14 | 2007-03-21 | 王世刚 | 多路音视频数据网络传输与同步播放的方法 |
| CN101047844A (zh) * | 2006-03-30 | 2007-10-03 | 华为技术有限公司 | 一种控制流媒体播放的方法及装置 |
| CN101207822A (zh) * | 2006-12-22 | 2008-06-25 | 上海晨兴电子科技有限公司 | 流媒体终端的音频视频同步的方法 |
| US20100295993A1 (en) * | 2009-05-20 | 2010-11-25 | Samsung Electronics Co., Ltd. | Apparatus and method for synchronization between video and audio in mobile communication terminal |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103517044B (zh) * | 2012-06-25 | 2016-12-07 | 鸿富锦精密工业（深圳）有限公司 | 视频会议装置及其唇形同步的方法 |
| CN103517044A (zh) * | 2012-06-25 | 2014-01-15 | 鸿富锦精密工业（深圳）有限公司 | 视频会议装置及其唇形同步的方法 |
| CN103873952A (zh) * | 2012-12-18 | 2014-06-18 | 风网科技（北京）有限公司 | 一种高效的视频播放丢帧控制系统及其方法 |
| CN103873952B (zh) * | 2012-12-18 | 2017-10-20 | 风网科技（北京）有限公司 | 一种高效的视频播放丢帧控制系统及其方法 |
| CN103747287A (zh) * | 2014-01-13 | 2014-04-23 | 合一网络技术(北京)有限公司 | 应用于flash的视频播放速度调整的方法及系统 |
| CN104881766A (zh) * | 2015-05-07 | 2015-09-02 | 北京京东尚科信息技术有限公司 | 一种分布式仓储数据处理方法、设备和系统 |
| CN105516090B (zh) * | 2015-11-27 | 2019-01-22 | 刘军 | 媒体播放方法、设备及音乐教学系统 |
| CN105516090A (zh) * | 2015-11-27 | 2016-04-20 | 刘军 | 媒体播放方法、设备及音乐教学系统 |
| CN105744334A (zh) * | 2016-02-18 | 2016-07-06 | 海信集团有限公司 | 一种音视频同步和同步播放的方法及设备 |
| CN105872699A (zh) * | 2016-04-28 | 2016-08-17 | 乐视控股（北京）有限公司 | 视频播放控制方法及装置 |
| CN107426627A (zh) * | 2017-06-19 | 2017-12-01 | 环球智达科技（北京）有限公司 | 播放装置 |
| CN107484009A (zh) * | 2017-09-12 | 2017-12-15 | 上海脉淼信息科技有限公司 | 一种适用于网络直播的流媒体播放方法和装置 |
| CN107801080A (zh) * | 2017-11-10 | 2018-03-13 | 普联技术有限公司 | 一种音视频同步方法、装置及设备 |
| CN111064698A (zh) * | 2019-06-26 | 2020-04-24 | 三星电子（中国）研发中心 | 一种多媒体流数据的播放方法和装置 |
| US11870831B2 (en) | 2019-06-26 | 2024-01-09 | Samsung Electronics Co., Ltd. | Method and apparatus for playing multimedia streaming data |
| CN110290143A (zh) * | 2019-07-01 | 2019-09-27 | 新华智云科技有限公司 | 视频在线编辑方法、装置、电子设备及存储介质 |
| CN110290143B (zh) * | 2019-07-01 | 2021-12-03 | 新华智云科技有限公司 | 视频在线编辑方法、装置、电子设备及存储介质 |
| CN110418183A (zh) * | 2019-08-05 | 2019-11-05 | 北京字节跳动网络技术有限公司 | 音视频同步方法、装置、电子设备及可读介质 |
| CN112511886A (zh) * | 2020-11-25 | 2021-03-16 | 杭州当虹科技股份有限公司 | 一种基于音频伸缩的音视频同步播放方法 |
| CN114866830A (zh) * | 2022-03-30 | 2022-08-05 | 中国经济信息社有限公司 | 一种音视频同步的方法、装置及计算机可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102404650A (zh) | 在线视频的音视频同步控制方法 | |
| US9854284B2 (en) | Synchronizing program presentation | |
| CN101271720B (zh) | 一种手机流媒体音视频的同步方法 | |
| CN105656616B (zh) | 多设备间数据同步的方法、装置、发送端及接收端 | |
| CA2775318C (en) | Method and system for wireless communication of audio in wireless networks | |
| CN104205858A (zh) | 用于相关媒体呈现的同步的缓冲器管理的方法 | |
| CN103155584A (zh) | 同步多媒体流的方法和对应设备 | |
| CN103546662A (zh) | 一种网络监控系统中音视频同步方法 | |
| CN105453580A (zh) | 接收方法、发送方法、接收装置及发送装置 | |
| CN101902649A (zh) | 一种基于h.264标准的音视频同步控制方法 | |
| CN105992040A (zh) | 多声道音频数据发送方法、音频数据同步播放方法及装置 | |
| WO2012097643A1 (zh) | Iptv系统中直播媒体流的方法和装置 | |
| CN105376613A (zh) | 一种快速频道切换方法、服务器及iptv系统 | |
| CN103210642A (zh) | 在http流送期间发生表达切换时传送用于自然再现的可缩放http流的方法 | |
| CN102075803B (zh) | 一种播放音视频同步的方法 | |
| CN103731716A (zh) | 一种ts流播放中的音视频同步方法 | |
| JP2015520546A (ja) | マルチメディアビデオデータの送信、受信方法及び対応装置 | |
| CN103002354A (zh) | 一种消除视频数据传输网络抖动的方法及系统 | |
| CN103888815A (zh) | 一种音视频流实时分离处理及同步的方法及其系统 | |
| CN103607664A (zh) | 一种嵌入式多媒体播放系统的音视频同步方法 | |
| Huang et al. | Tsync: A new synchronization framework for multi-site 3d tele-immersion | |
| CN104683823A (zh) | 一种多屏联动音视频同步系统 | |
| CN106412646B (zh) | 一种实现同步播放的方法和装置 | |
| CN101964903A (zh) | 一种无线环境中的音视频流媒体同步播放方法 | |
| US20110088069A1 (en) | Network device, information processing apparatus, stream switching method, information processing method, program, and content distribution system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120404 |