CN102780930B - 一种传输流视音频同步的处理方法 - Google Patents
一种传输流视音频同步的处理方法 Download PDFInfo
- Publication number
- CN102780930B CN102780930B CN201210177022.6A CN201210177022A CN102780930B CN 102780930 B CN102780930 B CN 102780930B CN 201210177022 A CN201210177022 A CN 201210177022A CN 102780930 B CN102780930 B CN 102780930B
- Authority
- CN
- China
- Prior art keywords
- audio
- video
- files
- videovalidstartpts
- audiovalidstartpts
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Signal Processing For Digital Recording And Reproducing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种传输流视音频同步的处理方法，通过获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；分析所述TS文件，顺序获取所述TS文件中的音频ES；比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若否，丢弃所述音频ES；若是，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件，实现了传输流TS视频和音频的开始时间的同步，有效的规避了TS流文件开始处视频开始时间和音频开始时间不一致的问题，提高了节目质量，改善了用户体验。
Description
技术领域
本发明涉及视音频剪辑领域，尤其涉及一种传输流视音频同步的处理方法。
背景技术
随着计算机处理能力的增强，视音频处理技术也有了长足的发展。视音频处理的过程中，视音频剪辑是最常用到的技术。
在数字电视系统中，模拟视音频信号按照MPEG-2的标准，经过抽样、量化及压缩编码形成基本码流ES，基本码流ES是不分段的连续码流。把基本码流分割成段，并加上对应的头文件打包形成的打包基本码流PES，PES包和包之间可以是不连续的。在传输时将PES包再分段打成有固定长度的传送码流TS（TransportStream）或可变长度的节目流PS（ProgramStream）。TS和PS分别适用于不同的场合应用，节目流PS适合在相对出错较少的环境下使用，其长度是变化的，而传送流TS能够把多个节目在基于一个或多个时间表示的基础上构成一个流，TS适合于出错较多的场合下使用。
现有技术中，如果TS流文件的开始处视频和音频开始的时间不一致，且处理不好，就会导致码流拼接后的视音频不同步，影响最终节目播出的效果。
发明内容
为解决上述问题，本发明提供一种传输流视音频同步的处理方法，通过记录视频的开始时间标签，并通过该时间标签选择音频的开始时间，实现了传输流TS视频和音频的开始时间的同步，有效的规避了TS流文件开始处视频开始时间和音频开始时间不一致的问题，提高了节目质量，改善了用户体验。
为解决上述问题，本发明实施例提供了一种传输流视音频同步的处理方法，包括以下步骤：
接收传输流TS文件数据，所述TS文件包括多个基本码流ES；
分析所述TS文件，获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；
分析所述TS文件，顺序获取所述TS文件中的音频ES；
比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若否，丢弃所述音频ES；若是，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；
将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件。
本发明实施例的技术方案带来的有益效果如下：通过获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；分析所述TS文件，顺序获取所述TS文件中的音频ES；比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若否，丢弃所述音频ES；若是，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件，实现了传输流TS视频和音频的开始时间的同步，有效的规避了TS流文件开始处视频开始时间和音频开始时间不一致的问题，提高了节目质量，改善了用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是 本发明实施例一种传输流视音频同步的处理方法流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种传输流视音频同步的处理方法，如图1，包括以下步骤：
步骤101，接收传输流TS文件数据；
所述TS文件包括多个基本码流ES；
步骤102，分析所述TS文件，获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；
如果所述视频ES从I帧开始，且具有显示时间标签PTS和解码时间标签DTS，则判断所述视频ES能够处理。
步骤103，分析所述TS文件，顺序获取所述TS文件中的音频ES；
步骤104，比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若是，进入步骤106，若否，进入步骤105；
判断所述音频ES是否处理过头部数据，如果处理过，则不再处理所述音频ES；如果没有处理过，则进行后续处理。
步骤105，丢弃所述音频ES；
步骤106，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；
标记处理过头部数据。
步骤107，将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件。
还包括：记录所述AudioValidStartPTS和所述VideoValidStartPTS的偏差为：VideoAudioStartTimeDelta=AudioValidStartPTS-VideoValidStartPTS；
如所述VideoAudioStartTimeDelta大于零，则播放时用静音代替所述VideoAudioStartTimeDelta。
本发明实施例的技术方案带来的有益效果如下：通过获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；分析所述TS文件，顺序获取所述TS文件中的音频ES；比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若否，丢弃所述音频ES；若是，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件，实现了传输流TS视频和音频的开始时间的同步，有效的规避了TS流文件开始处视频开始时间和音频开始时间不一致的问题，提高了节目质量，改善了用户体验。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可以通过硬件实现，也可以可借助软件加必要的通用硬件平台的方式来实现，基于这样的理解，本发明的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质（可以是CD-ROM，U盘，移动硬盘等）中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述的方法。
总之，以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (4)
1.一种传输流视音频同步的处理方法，其特征在于，包括以下步骤：
接收传输流TS文件数据，所述TS文件包括多个基本码流ES；
分析所述TS文件，获取所述TS文件中能够处理的第一个视频ES，并记录所述视频ES的起始显示时间标签VideoValidStartPTS和起始解码时间标签VideoValidStartDTS；
分析所述TS文件，顺序获取所述TS文件中的音频ES；
比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS；若否，丢弃所述音频ES；若是，记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS；
将所述VideoValidStartPTS、VideoValidStartDTS、AudioValidStartPTS以及TS文件发送到TS合成器，生成目标TS文件。
2.如权利要求1所述方法，其特征在于，所述TS文件中能够处理的第一个视频ES具有如下特征：
所述视频ES从I帧开始；
所述视频ES具有显示时间标签PTS和解码时间标签DTS。
3.如权利要求1所述方法，其特征在于，所述比较所述音频ES的显示时间标签PTS是否大于或等于所述VideoValidStartPTS之前，还包括：判断所述音频ES是否处理过头部数据；
所述记录所述音频ES为第一个音频ES，记录所述PTS为AudioValidStartPTS之后，还包括：标志处理过头部数据。
4.如权利要求1所述方法，其特征在于，还包括：
记录所述AudioValidStartPTS和所述VideoValidStartPTS的偏差为：VideoAudioStartTimeDelta=AudioValidStartPTS-VideoValidStartPTS；
如所述VideoAudioStartTimeDelta大于零，则播放时用静音代替所述VideoAudioStartTimeDelta。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210177022.6A CN102780930B (zh) | 2012-05-31 | 2012-05-31 | 一种传输流视音频同步的处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210177022.6A CN102780930B (zh) | 2012-05-31 | 2012-05-31 | 一种传输流视音频同步的处理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102780930A CN102780930A (zh) | 2012-11-14 |
| CN102780930B true CN102780930B (zh) | 2018-05-04 |
Family
ID=47125667
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210177022.6A Expired - Fee Related CN102780930B (zh) | 2012-05-31 | 2012-05-31 | 一种传输流视音频同步的处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102780930B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101212671A (zh) * | 2007-12-21 | 2008-07-02 | 上海广电（集团）有限公司中央研究院 | 一种低延迟的实时复用传输流的方法 |
| CN101605252A (zh) * | 2009-07-17 | 2009-12-16 | 深圳创维数字技术股份有限公司 | 将节目流转换成传输流的方法和系统 |
| CN101729908A (zh) * | 2009-11-03 | 2010-06-09 | 上海大学 | 一种传输流视音频同步复用方法 |
| CN101820540A (zh) * | 2009-12-25 | 2010-09-01 | 北京惠信博思技术有限公司 | 一种mpeg-2编码复用的方法 |
| CN102447949A (zh) * | 2011-08-24 | 2012-05-09 | 上海文广科技（集团）有限公司 | 一种高效的精确到帧的ts流拼接方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4407007B2 (ja) * | 2000-05-02 | 2010-02-03 | ソニー株式会社 | データ送信装置及び方法 |
-
2012
- 2012-05-31 CN CN201210177022.6A patent/CN102780930B/zh not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101212671A (zh) * | 2007-12-21 | 2008-07-02 | 上海广电（集团）有限公司中央研究院 | 一种低延迟的实时复用传输流的方法 |
| CN101605252A (zh) * | 2009-07-17 | 2009-12-16 | 深圳创维数字技术股份有限公司 | 将节目流转换成传输流的方法和系统 |
| CN101729908A (zh) * | 2009-11-03 | 2010-06-09 | 上海大学 | 一种传输流视音频同步复用方法 |
| CN101820540A (zh) * | 2009-12-25 | 2010-09-01 | 北京惠信博思技术有限公司 | 一种mpeg-2编码复用的方法 |
| CN102447949A (zh) * | 2011-08-24 | 2012-05-09 | 上海文广科技（集团）有限公司 | 一种高效的精确到帧的ts流拼接方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102780930A (zh) | 2012-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8355433B2 (en) | Encoding video streams for adaptive video streaming | |
| US9014261B2 (en) | Method and system for media file compression | |
| WO2017063399A1 (zh) | 一种视频播放方法和装置 | |
| WO2016011823A1 (zh) | 获取直播视频切片的方法、服务器及存储介质 | |
| CN102215429B (zh) | 一种用于移动电视的录制方法 | |
| US8588578B2 (en) | Conversion of video data to playable format | |
| CN103929655B (zh) | 对音视频文件进行转码处理的方法和设备 | |
| CN108063970A (zh) | 一种处理直播流的方法和装置 | |
| KR101861941B1 (ko) | 완벽 스플라이싱을 위한 인코딩된 오디오의 전송 스트림에의 삽입 | |
| WO2003017671A2 (en) | Navigation for mpeg streams | |
| US20130232233A1 (en) | Systems and methods for client-side media chunking | |
| JP2007060286A (ja) | コンテンツ編集装置及びその再生装置 | |
| WO2013185514A1 (zh) | 一种播放流媒体的系统和方法 | |
| US9183837B2 (en) | Apparatus and method for determining bit rate for audio content | |
| WO2020215454A1 (zh) | 一种屏幕录制的方法、客户端和终端设备 | |
| WO2012071931A1 (zh) | 一种分段节目中动态插播节目的方法及系统 | |
| CN103491430A (zh) | 流媒体数据处理方法和电子设备 | |
| CN105992022A (zh) | 一种在线录制下载方法及系统 | |
| CN106060628A (zh) | 基于DirectShow支持可变编码的方法及系统 | |
| CN104753811B (zh) | 一种流媒体业务优化方法、设备及系统 | |
| US20070230898A1 (en) | Random access searching with frame accuracy and without indexing within windows media video | |
| JP5406185B2 (ja) | メディア客体基盤メタデータの生成方法、再生方法及びその装置 | |
| CN102780929A (zh) | 一种通过处理时码跳变以使视音频同步的方法 | |
| CN104822087B (zh) | 一种视频段的处理方法及装置 | |
| CN102780930B (zh) | 一种传输流视音频同步的处理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180504 Termination date: 20200531 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |