CN102857747B - 局部重编码方法和装置 - Google Patents

局部重编码方法和装置 Download PDF

Info

Publication number
CN102857747B
CN102857747B CN201110177629.XA CN201110177629A CN102857747B CN 102857747 B CN102857747 B CN 102857747B CN 201110177629 A CN201110177629 A CN 201110177629A CN 102857747 B CN102857747 B CN 102857747B
Authority
CN
China
Prior art keywords
audio
frame
cut
video
audio frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110177629.XA
Other languages
English (en)
Other versions
CN102857747A (zh
Inventor
周铭慧
刘百川
杨乐
高上
杨万岭
刘祥臻
刘岩
闫俊海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Peking University Founder Group Co Ltd
Beijing Founder Electronics Co Ltd
Original Assignee
Peking University Founder Group Co Ltd
Beijing Founder Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Peking University Founder Group Co Ltd, Beijing Founder Electronics Co Ltd filed Critical Peking University Founder Group Co Ltd
Priority to CN201110177629.XA priority Critical patent/CN102857747B/zh
Publication of CN102857747A publication Critical patent/CN102857747A/zh
Application granted granted Critical
Publication of CN102857747B publication Critical patent/CN102857747B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明提供了一种局部重编码方法,包括:将视频帧切分;确定视频帧的切分点;将处在切分点的音频帧切分,且切分位置与切分点对齐。本发明提供了一种局部重编码装置,包括:视频切分模块,用于将视频帧切分;确定模块,用于确定视频帧的切分点;音频切分模块,用于将处在切分点的音频帧切分,且切分位置与切分点对齐。本发明提高了影音的体验效果。

Description

局部重编码方法和装置
技术领域
本发明涉及数字视频编辑领域,具体而言,涉及局部重编码方法和装置。
背景技术
局部重编码是指在数字视频编辑领域,在对采用帧间预测编码技术的视频文件进行剪辑时,仅对改动的内容进行重新编解码,而对未改动的内容直接拷贝。
在相关技术的局部重编码方案中,当精确定位了视频帧,并在该帧进行切分后,音频帧一般并没有被精确处理,而是笼统地划分到前一段文件或者后一段文件。这样在切分后形成的新文件头部或者尾部会出现视音频不同步现象。
相关技术对视频的处理比较完善,能够帧精确定位。但是由于大部分多媒体文件中,视音频帧是交织在一起存放的,各自带有时间戳和时长信息,而且视频帧和音频帧的时间边界是无法保证时刻对齐的。如图1所示,视频帧的切分点落在音频帧A的中间,导致视频帧和音频帧的时间边界没有对齐。
发明人发现,在使用这种快速生成技术的过程中,如果改动的内容比较多,需要重新编解码的片段很多时,经常会出现视音频不同步的问题。
发明内容
本发明的目的是针对局部重编码技术的不足,提出了一种保证视音频同步的局部重编码方法和装置。
在本发明的实施例中,提供了一种局部重编码方法,包括:将视频帧切分;确定视频帧的切分点;将处在切分点的音频帧切分,且切分位置与切分点对齐。其中,确定所述视频帧的切分点包括:确定所述视频帧的切分位置的时间戳;将处在所述切分点的音频帧切分包括:确定处于所述切分点上的音频帧;将所述音频帧解码得到PCM数据;按照所述音频帧的时长和所述切分点的相对于所述音频帧头部的位置,将所述PCM数据切分成两段新的PCM数据;将所述两段新的PCM数据分别按照原音频压缩格式重新编码得到所述新的音频帧;将编码后的前一个所述新的音频帧写入到前一段音频流的尾部;将编码后的后一个所述新的音频帧写入到后一段音频流的头部。
在本发明的实施例中,提供了一种局部重编码装置,包括:视频切分模块,用于将视频帧切分;确定模块,用于确定视频帧的切分点;音频切分模块,用于将处在切分点的音频帧切分,且切分位置与切分点对齐。其中,所述确定模块用于确定所述视频帧的切分位置的时间戳。所述音频切分模块包括:第一模块,用于确定处于所述切分点上的音频帧;第二模块,用于将所述音频帧解码得到PCM数据;第三模块,用于按照所述音频帧的时长和所述切分点的相对于所述音频帧头部的位置,将所述PCM数据切分成两段新的PCM数据;第四模块,用于将所述两段新的PCM数据分别按照原音频压缩格式重新编码得到所述新的音频帧;第五模块,用于将编码后的前一个所述新的音频帧写入到前一段音频流的尾部;第六模块,用于将编码后的后一个所述新的音频帧写入到后一段音频流的头部。
本发明上述实施例的局部重编码方法和装置因为对音频帧也进行了同步切分,所以克服了相关技术的视音频不同步的问题,提高了影音的体验效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1示出了根据相关技术的视音频处理的数据结构图;
图2示出了根据本发明实施例的局部重编码方法的流程图;
图3示出了根据本发明实施例的视音频处理的数据结构图;
图4示出了根据本发明实施例的局部重编码装置的示意图。
具体实施方式
下面将参考附图并结合实施例,来详细说明本发明。
图2示出了根据本发明实施例的局部重编码方法的流程图,包括:
步骤S10,将视频帧切分;
步骤S20,确定视频帧的切分点;
步骤S30,将处在切分点的音频帧切分,且切分位置与切分点对齐。
在相关技术中,视频帧和音频帧的时间边界是无法保证时刻对齐的。而本实施例的局部重编码方法因为对音频帧也进行了同步切分,所以能够保证局部重编码之后,视频帧和音频帧的时间边界是时刻对齐的,因此克服了相关技术的视音频不同步的问题,提高了影音的体验效果。
优选地,步骤S20包括:确定视频帧的切分位置的时间戳。
图3示出了根据本发明实施例的视音频处理的数据结构图,如图所示,将处在切分点的音频帧A,进一步切分成更小的两个音频帧B和C,使得B和C的帧边界和切分点对齐。在最终形成切分后的文件过程中,音频帧B和C分别写入到文件1和文件2中,保证视音频同步。
根据图3的实施例,步骤S30包括:
确定处于切分点上的音频帧;
将音频帧解码得到PCM数据;
按照音频帧的时长和切分点的相对于音频帧头部的位置,将PCM数据切分成两段新的PCM数据;
将两段新的PCM数据分别按照原音频压缩格式重新编码得到新的音频帧B和C;
将编码后的前一个新的音频帧B写入到前一段音频流的尾部;
将编码后的后一个新的音频帧C写入到后一段音频流的头部。
图4示出了根据本发明实施例的局部重编码装置的示意图,包括:
视频切分模块10,用于将视频帧切分;
确定模块20,用于确定视频帧的切分点;
音频切分模块30,用于将处在切分点的音频帧切分,且切分位置与切分点对齐。
本局部重编码装置保证了视音频的时刻同步。
优选地,确定模块20用于确定视频帧的切分位置的时间戳。
优选地,音频切分模块30包括:
第一模块,用于确定处于切分点上的音频帧;
第二模块,用于将音频帧解码得到PCM数据;
第三模块,用于按照音频帧的时长和切分点的相对于音频帧头部的位置,将PCM数据切分成两段新的PCM数据;
第四模块,用于将两段新的PCM数据分别按照原音频压缩格式重新编码得到新的音频帧;
第五模块,用于将编码后的前一个新的音频帧写入到前一段音频流的尾部;
第六模块,用于将编码后的后一个新的音频帧写入到后一段音频流的头部。
从以上的描述中可以看出,本发明上述的实施例达到了保证视音频同步的效果。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (2)

1.一种局部重编码方法,其特征在于,包括:
将视频帧切分;
确定所述视频帧的切分点;
将处在所述切分点的音频帧切分,且切分位置与所述切分点对齐;
其中,确定所述视频帧的切分点包括:
确定所述视频帧的切分位置的时间戳;
将处在所述切分点的音频帧切分包括:
确定处于所述切分点上的音频帧;
将所述音频帧解码得到PCM数据;
按照所述音频帧的时长和所述切分点的相对于所述音频帧头部的位置,将所述PCM数据切分成两段新的PCM数据;
将所述两段新的PCM数据分别按照原音频压缩格式重新编码得到所述新的音频帧;
将编码后的前一个所述新的音频帧写入到前一段音频流的尾部;
将编码后的后一个所述新的音频帧写入到后一段音频流的头部。
2.一种局部重编码装置,其特征在于,包括:
视频切分模块,用于将视频帧切分;
确定模块,用于确定所述视频帧的切分点;
音频切分模块,用于将处在所述切分点的音频帧切分,且切分位置与所述切分点对齐;
其中,所述确定模块用于确定所述视频帧的切分位置的时间戳;
所述音频切分模块包括:
第一模块,用于确定处于所述切分点上的音频帧;
第二模块,用于将所述音频帧解码得到PCM数据;
第三模块,用于按照所述音频帧的时长和所述切分点的相对于所述音频帧头部的位置,将所述PCM数据切分成两段新的PCM数据;
第四模块,用于将所述两段新的PCM数据分别按照原音频压缩格式重新编码得到所述新的音频帧;
第五模块,用于将编码后的前一个所述新的音频帧写入到前一段音频流的尾部;
第六模块,用于将编码后的后一个所述新的音频帧写入到后一段音频流的头部。
CN201110177629.XA 2011-06-27 2011-06-27 局部重编码方法和装置 Expired - Fee Related CN102857747B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110177629.XA CN102857747B (zh) 2011-06-27 2011-06-27 局部重编码方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110177629.XA CN102857747B (zh) 2011-06-27 2011-06-27 局部重编码方法和装置

Publications (2)

Publication Number Publication Date
CN102857747A CN102857747A (zh) 2013-01-02
CN102857747B true CN102857747B (zh) 2015-02-25

Family

ID=47403890

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110177629.XA Expired - Fee Related CN102857747B (zh) 2011-06-27 2011-06-27 局部重编码方法和装置

Country Status (1)

Country Link
CN (1) CN102857747B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150062353A1 (en) * 2013-08-30 2015-03-05 Microsoft Corporation Audio video playback synchronization for encoded media

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1344106A (zh) * 2000-09-15 2002-04-10 北京算通数字技术研究中心有限公司 基于mpeg-2码流的非线性编辑系统编辑方法
CN101022561A (zh) * 2006-02-15 2007-08-22 中国科学院声学研究所 实现mxf视频文件与pcm音频文件同步播放的方法
CN101352038A (zh) * 2006-07-26 2009-01-21 索尼株式会社 记录装置、记录方法和记录程序、以及摄像装置、摄像方法和摄像程序
CN101635848A (zh) * 2008-07-22 2010-01-27 北大方正集团有限公司 一种视频文件的编辑方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1344106A (zh) * 2000-09-15 2002-04-10 北京算通数字技术研究中心有限公司 基于mpeg-2码流的非线性编辑系统编辑方法
CN101022561A (zh) * 2006-02-15 2007-08-22 中国科学院声学研究所 实现mxf视频文件与pcm音频文件同步播放的方法
CN101352038A (zh) * 2006-07-26 2009-01-21 索尼株式会社 记录装置、记录方法和记录程序、以及摄像装置、摄像方法和摄像程序
CN101635848A (zh) * 2008-07-22 2010-01-27 北大方正集团有限公司 一种视频文件的编辑方法和装置

Also Published As

Publication number Publication date
CN102857747A (zh) 2013-01-02

Similar Documents

Publication Publication Date Title
CN107211164B (zh) 用于解码媒体信号的解码器和用于编码包含主要媒体数据的元数据或控制数据的辅助媒体数据的编码器
EP2752023B1 (en) Method to match input and output timestamps in a video encoder and advertisement inserter
CN107113462A (zh) 发送方法、接收方法、发送装置以及接收装置
RU2013158084A (ru) Способы и системы синхронизации и переключения для системы адаптивного звука
CN104410807A (zh) 一种多路视频同步回放方法及装置
JP2009525685A (ja) コンテンツ置換エディタ
CN107431845A (zh) 发送方法、接收方法、发送装置以及接收装置
CN102075803B (zh) 一种播放音视频同步的方法
CN105898500A (zh) 网络视频播放方法及装置
CN103208298A (zh) 一种摄像方法及系统
CN103718563A (zh) 接收装置及其接收方法
US10021433B1 (en) Video-production system with social-media features
CN107566889A (zh) 音频流流速误差处理方法、装置、计算机装置及计算机可读存储介质
JP2016522601A (ja) コンテナフォーマットでのメディアファイルの構文を意識した操作
CN109769142B (zh) 一种城市媒体墙灯光秀的视频切割方法及系统
CN105280205A (zh) 非线性编辑软件音视频同步处理方法及装置
WO2012102522A3 (ko) 디지털 방송 신호 송/수신 방법 및 장치
CN103581730A (zh) 在数字机顶盒上实现音视频同步的方法
CN101290790B (zh) 一种音视频同步播放的方法和装置
CN104079958B (zh) 一种视频与多声道音频同步播出的方法
CN102857747B (zh) 局部重编码方法和装置
CN103841451A (zh) 多媒体播放方法、装置及终端
CN104822087B (zh) 一种视频段的处理方法及装置
WO2021209044A1 (zh) 多媒体数据收发方法、系统、处理器和播放器
CN106911941B (zh) 一种自适应视频切片方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150225

Termination date: 20170627

CF01 Termination of patent right due to non-payment of annual fee