CN102271280A - 一种数字音视频变速播放的方法和装置 - Google Patents
一种数字音视频变速播放的方法和装置 Download PDFInfo
- Publication number
- CN102271280A CN102271280A CN2011102042039A CN201110204203A CN102271280A CN 102271280 A CN102271280 A CN 102271280A CN 2011102042039 A CN2011102042039 A CN 2011102042039A CN 201110204203 A CN201110204203 A CN 201110204203A CN 102271280 A CN102271280 A CN 102271280A
- Authority
- CN
- China
- Prior art keywords
- audio
- video
- speed
- video data
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明涉及数字音视频变速播放的方法和装置，该方法先接收并存储传输到本地的音视频数据，然后设备/网络状况及存储到本地的音视频数据，或对系统的缓存，或对系统的缓存及存储到本地的音视频数据进行处理分析，然后确定音视频变速的参数，从而对音视频数据进行变速处理，再对变速处理后的音视频数据进行同步处理，最后将同步处理后的音视频数据输出到播放设备或存储设备。该方法能够在不改变目前网络状况以及未增加网络成本的情况下，解决现在网络音视频播放时遇到的延时、断续、卡断等问题以及由此引起的音视频数据不同步问题。
Description
技术领域
本发明涉及一种数字音视频处理技术，特别是一种数字音视频变速播放的方法与装置。
背景技术
随着互联网技术的发展，音视频作为重要的信息载体可以通过网络进行快速、方便的传播，音视频通过互联网在线点播、直播等应用得到了广泛的发展。用户可以方便的通过个人电脑、手机、电视等终端接入互联网，观看电影、电视剧、新闻等音视频内容。现有技术在进行网络音视频点播、直播等应用的时候，并未考虑音视频终端所处网络的状况及音视频码流的情况，都是按照节目码率规定的原始速度播放音视频。网络音视频的播放质量由于受到网络带宽的限制通常不高，特别是在网络使用人数较多的时候，网络会发生拥堵，因此用户在网络上观看音视频节目的时候经常出现延时、断续、卡断等情况，而且容易导致音视频数据不同步等问题。如果连接音视频服务器的用户过多，造成服务器的负载过大，也会因为服务器的响应不及时而导致上述的一些问题。特别是随着用户需求的提高，在线音视频节目的清晰度越来越高，相应的码率也越来越高，观看的音视频节目码率高于用户的带宽或者与之比较接近的时候，更容易在观看的时候发生上述的一些问题，极大影响了用户的观看体验。单纯的增加带宽也不能完全解决上述问题，受网络病毒、其他用户占用带宽、用户突发数据请求、音视频码率不平均、突发码率过高等影响，终端用户总是或多或少的碰到这些问题。
发明内容
本发明针对现有的网络观看音视频节目时出现的延时、断续、卡断等情况，及由此导致的音视频数据不同步等问题，提供一种数字音视频变速播放的方法，能够在不改变目前网络状况以及未增加网络成本的情况下，解决上述各种网络音视频播放时遇到的问题，本发明还涉及一种数字音视频变速播放装置。
本发明的技术方案如下：
一种数字音视频变速播放的方法，其特征在于，包括下述步骤：
A、接收并存储传输到本地的音视频数据；
B、对设备/网络状况及存储到本地的音视频数据进行处理分析，得到设备/网络状态参数和音视频参数；或对系统的缓存进行处理分析，得到缓存状态参数；或对系统的缓存及存储到本地的音视频数据进行处理分析，得到缓存状态参数和音视频参数；
C、根据步骤B中得到的参数确定音视频变速的参数，从而对音视频数据进行变速处理，所述对音视频数据进行变速处理包括对音频数据进行变速处理和对视频数据进行变速处理，所述音频数据的变速处理是指保持音频的音调不变同时改变音频的播放速度；
D、对变速处理后的音视频数据进行同步处理，保持音视频同步；
E、将同步处理后的音视频数据输出到播放设备或存储设备。
所述传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。
所述步骤B中，当对设备/网络状况及存储到本地的音视频数据进行处理分析时，所述设备状况为提供音视频数据的设备的状况，所述网络状况为音视频终端所处网络的状况，得到的设备/网络状态参数包括实时带宽和/或平均带宽和/或带宽的变化趋势和/或带宽的变化率和/或响应时间，音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率；当对系统的缓存进行处理分析时，所述系统的缓存包括音视频解码之前、音视频解码之后以及未经音视频编解码处理的原始音视频数据的缓存，得到的缓存状态参数包括缓存的音视频数据量的大小和/或数据量的变化；当对系统的缓存及存储到本地的音视频数据进行处理分析时得到的缓存状态参数包括缓存的音视频数据量的大小和/或数据量的变化，音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率。
步骤C所述的音视频变速的参数是指相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始速度；和/或，在步骤C中还设置手工改变或选择音视频变速的参数的窗口，根据需要通过所述窗口手工改变或选择音视频变速的参数，再对音视频数据进行变速处理。
根据步骤B中得到的参数，将步骤C所述的音视频变速的参数设置为不同的等级。
一种数字音视频变速播放的装置，其特征在于，包括依次连接的音视频数据接收模块、监控模块、速度判决模块、音视频变速模块、音视频同步模块和输出模块，所述音视频数据接收模块与音视频变速模块相连，所述音视频数据接收模块接收并存储传输到本地的音视频数据，监控模块对设备/网络状况或对系统的缓存状态进行处理分析，并将处理分析后得到的参数传输至速度判决模块，所述速度判决模块根据收到的参数确定音视频变速的参数，并由音视频变速模块对音视频数据进行变速处理，所述音视频变速模块对音视频数据进行变速处理包括对音频数据进行变速处理和对视频数据进行变速处理，所述音频数据的变速处理是指保持音频的音调不变同时改变音频的播放速度，音视频变速模块将变速处理后的音视频数据传输至音视频同步模块，音视频同步模块对变速处理后的音视频数据进行同步处理，最终由输出模块将同步处理后的音视频数据输出到播放设备或存储设备。
所述音视频数据接收模块接收并存储的传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。
所述监控模块包括设备/网络状态监控模块和码流监控模块，所述设备/网络状态监控模块对提供音视频数据的设备或者是音视频终端所处的网络的状况进行处理分析，得到设备/网络状况参数，所述码流监控模块对音视频的码流进行处理分析，得到音视频参数，所述设备/网络状态监控模块和码流监控模块分别将设备/网络状况参数和音视频参数发送至速度判决模块；
或所述监控模块包括缓存状态监控模块，所述缓存状态监控模块分别与音视频数据接收模块和速度判决模块相连，所述缓存状态监控模块对系统的缓存状态进行处理分析，得到缓存状态参数，并将缓存状态参数发送至速度判决模块；
或所述监控模块包括缓存状态监控模块和码流监控模块，所述缓存状态监控模块分别与音视频数据接收模块和速度判决模块相连，所述缓存状态监控模块对系统的缓存状态进行处理分析，得到缓存状态参数，所述码流监控模块对音视频的码流进行处理分析，得到音视频参数，所述缓存状态监控模块和码流监控模块分别将缓存状态参数和音视频参数发送至速度判决模块。
当监控模块包括设备/网络状态监控模块和码流监控模块时，所述设备/网络状况参数包括实时带宽和/或平均带宽和/或带宽的变化趋势和/或带宽的变化率和/或响应时间，所述音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率；当监控模块包括缓存状态监控模块时，所述系统的缓存包括音视频解码之前、音视频解码之后以及未经音视频编解码处理的原始音视频数据缓存中的数据量的大小和/或数据量的变化。
所述速度判决模块确定的音视频变速的参数是指相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始速度；和/或，所述音视频变速模块还连接有手工改变或选择音视频变速的参数的窗口，根据需要通过所述窗口手工改变或选择音视频变速的参数，再通过音视频变速模块对音视频数据进行变速处理。
本发明的技术效果如下：
本发明提供的数字音视频变速播放的方法，在接收并存储传输到本地的音视频数据后，通过对提供音视频数据的设备状况或音视频终端所处的网络状况及存储到本地的音视频数据，或者是对系统的缓存状态等进行处理分析，得到设备/网络状况参数、音视频参数、缓存状态参数，再根据得到的设备/网络状况参数、音视频参数、缓存状态参数确定音视频变速的参数，从而对音视频数据进行变速处理，并将变速处理后的音视频数据进行音视频同步处理后输出到播放设备或存储设备。通过处理分析设备/网络状况、存储到本地的音视频数据以及系统的缓存，对音视频播放的速度进行实时调整，在不改变目前网络状况以及未增加网络成本的情况下，适量的改变音视频的播放速度不会对用户的观看感觉产生影响，但是会大幅的改善现有的数字音视频播放时并未考虑数字音视频终端所处的网络的状况、音视频码流及系统的缓存等情况，按照节目码率规定的原始速度播放会因为网络原因造成的音视频卡断、延时等不流畅现象。使用户可以流畅的观看数字音视频节目，极大提高了用户的观看体验。同时相对于现有技术应用本发明的数字音视频变速播放方法可以减小音视频数据缓存大小，节省软硬件的成本。
本发明所述的数字音视频变速播放的方法所针对的传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。该方法既适用于需要在终端采用音视频解码器解码的数字音视频数据的变速播放，还适用于无需编解码的数字音视频数据的变速播放。
本发明提供的数字音视频变速播放的装置，包括依次连接的音视频数据接收模块、监控模块、速度判决模块、音视频变速模块和输出模块，通过设置监控模块对设备/网络状况或对系统的缓存状态进行处理分析，处理分析后得到的参数输入至速度判决模块，并由速度判决模块根据收到的参数确定音视频变速的参数，音视频变速模块接收音视频变速的参数然后对传输到本地的音视频数据进行变速处理，再由音视频同步模块对变速处理后的音视频数据进行同步处理，最终由输出模块将同步处理后的音视频数据输出到播放设备或存储设备。本发明的该装置根据设备/网络状况以及传输到本地的音视频数据或对系统的缓存状态进行处理分析，最终对音视频播放的速度进行实时调整，适量的改变音视频的播放速度，能够大幅的改善因为网络原因造成的音视频卡断、延时等不流畅现象，使用户可以流畅的观看数字音视频节目。
附图说明
图1为本发明数字音视频变速播放的方法第一种优选流程图。
图2为本发明数字音视频变速播放的方法第二种优选流程图。
图3为本发明数字音视频变速播放的方法第三种优选流程图。
图4为本发明数字音视频变速播放的装置的第一种优选结构示意图。
图5为本发明数字音视频变速播放的装置的第二种优选结构示意图。
图6为本发明数字音视频变速播放的装置中优选的监控模块工作原理图。
具体实施方式
下面结合附图对本发明进行说明。
图1为本发明数字音视频变速播放的方法第一种优选流程图，该方法包括下述步骤：
A、接收并存储传输到本地的音视频数据；该传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。
B、对设备/网络状况及存储到本地的音视频数据进行处理分析，得到设备/网络状况参数、音视频参数；具体地，对提供音视频数据的设备的状况或音视频终端所处网络的状况进行处理分析得到设备/网络状况参数，所述设备/网络状况参数可以包括设备/网络的实时带宽、平均带宽、带宽的变化趋势、带宽的变化率、响应时间等一种或多种带宽参数，对存储到本地的音视频数据进行处理分析得到音视频参数，所述音视频参数包括音视频的码率、音频的采样率、视频的帧率等一种或多种码流参数。
C、根据得到的设备/网络状况参数、音视频参数确定音视频变速的参数；例如，可以通过设备/网络的实时带宽与音视频的码率(可以理解为节目源码率)来确定音视频变速的参数，音视频变速的参数是指相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始播放速度。如果实时带宽＞节目源码率，则音视频保持原始播放速度或者可以快放；如果带宽＜节目源码率，则音视频慢放，根据节目源码率与带宽的比值结果，可以将播放速度设置为固定的数值，或者根据节目源码率与带宽的比值将播放速度设置为不同的等级，比值越大，播放的速度越慢，使当前的带宽满足音视频播放所需要的带宽。还可以设置手工改变或选择音视频变速的参数的窗口，根据需要，通过所述窗口直接手工改变或选择音视频变速的参数。
C’、对音视频数据进行变速处理；其中，对音视频数据进行变速处理包括对音频数据进行变速处理以及对视频数据进行变速处理。具体实施方法可采用现有的变速方式，例如视频变速可以采用对视频帧的复制、插帧、删除等操作改变视频的播放速度，音频变速是指保持音频的音调不变同时改变音频的播放速度，可采用已知方式如基于SOLA(SynchronizedOverlap-Add)同步叠加算法的变速方式，或基于WSOLA(Waveform similarity basedsynchronized overlap-add)波形相似的同步叠加算法等变速方式。
D、由于同时存在音频数据和视频数据，故变速以后的音视频还要经过音视频同步技术进行同步处理，使音视频保持同步。
E、将同步处理后的音视频数据输出到播放设备或存储设备。
图2为本发明数字音视频变速播放的方法第二种优选流程图。该方法包括下述步骤：
A、接收并存储传输到本地的音视频数据；
B、对系统的缓存进行处理分析，得到缓存状态参数。具体地，对音视频解码之前的缓存、音视频解码之后的缓存以及未经音视频编解码处理的原始音视频数据的缓存进行处理分析，得到的缓存状态参数包括数据量的大小和/或数据量的变化。
C、根据得到的缓存状态参数确定音视频变速的参数，从而对音视频数据进行变速处理；例如，对于终端采用音视频解码器解码的数字音视频数据，通过某时刻音视频编解码器缓存中音视频数据量的变化来确定播放速度的参数：如果T1时刻缓存的音视频数据量大小为A，T2(T2为当前时刻)时刻缓存的音视频数据量大小为B，如果A＜B，则说明T2-T1时刻(当前时刻)输入的音视频数据大于消耗的数据，则播放速度可以保持正常或者快速播放(即保持原始播放速度或快放)，如果A＞B，则说明T2-T1时刻输入的数据小于消耗的数据，则降低音视频的播放速度(即慢放)，将播放速度设置为一个固定的值，或者动态变化音视频变速的参数(如A-B在某一范围时，确定音视频变速的参数为0.9倍原始播放速度，而A＜B在另一范围时，确定音视频变速的参数为0.8倍原始播放速度)直至使缓存中输入数据的速度大于等于数据消耗的速度。
D、将变速处理后的音视频数据同步处理，再输出到播放设备或存储设备。
图3为本发明数字音视频变速播放的方法第三种优选流程图。该方法包括下述步骤：
A、接收并存储传输到本地的音视频数据；
B、对系统的缓存及存储到本地的音视频数据进行处理分析，得到缓存状态参数、音视频参数，该缓存状态参数、音视频参数可以包括缓存的音视频数据量的大小、数据量的变化、音视频的码率、音频的采样率、视频的帧率等参数。
C、根据得到的缓存状态参数、音视频参数确定音视频变速的参数，从而对音视频数据进行变速处理；例如，通过对音视频编解码器(前或者后)缓存中音视频的数据量的大小来确定音视频变速的参数：如果缓存中音视频的数据量大于一定的阈值，则音视频按照正常的速度播放或者快速播放，如果缓存中音视频的数据量小于一定的阈值，则可以将播放的速度根据缓存中音视频数据量的大小设置为不同的数值，使音视频慢速播放，也可以根据缓存的情况，将音视频的播放速度分为不同的等级，缓存越小播放速度越慢。如设定缓存中音视频的数据量为S，阈值为音视频码流30秒传送的数据量时，当S＞30秒传送的数据量时，则音视频按照正常的速度播放或者快速播放；当20秒传送的数据量＜S≤30秒传送的数据量时，确定音视频变速的参数为0.9倍原始播放速度；当10S传送的数据量＜S≤20秒传送的数据量时，确定音视频变速的参数为0.8倍原始播放速度。
D、将变速处理后的音视频数据同步处理，再输出到播放设备或存储设备。
图4为本发明数字音视频变速播放的装置的第一种优选结构示意图。该装置包括依次连接的音视频数据接收模块、监控模块、速度判决模块、音视频变速模块、音视频同步模块和输出模块，音视频数据接收模块与音视频变速模块相连。其中，音视频数据接收模块用于接收并存储传输到本地的音视频数据，该实施例中的传输到本地的音视频数据包括音视频解码之前的音视频数据和音视频解码以后的音视频数据，如图4所示，音视频数据流先输入至未解码音视频缓存器，再经音视频解码器进行解码，解码后的音视频数据缓存在解码后音视频缓存器中，故该实施例中的音视频数据接收模块包括未解码音视频缓存器和解码后音视频缓存器。
监控模块对设备/网络状况或对系统的缓存状态进行处理分析，该监控模块可以包括设备/网络状态监控模块和码流监控模块，或者是包括缓存状态监控模块，或者是包括缓存状态监控模块和码流监控模块，图4所示的实施例中的监控模块包括设备/网络状态监控模块、码流监控模块和缓存状态监控模块，该监控模块的工作原理图如图6所示：设备/网络状态监控模块的输入端输入音视频数据流，输出端连接速度判决模块，该设备/网络状态监控模块可以对提供音视频数据的设备或者是音视频终端所处网络的状况进行处理分析，能够得到实时带宽、平均带宽、响应时间、带宽的变化趋势、带宽的变化率等带宽参数或其它设备/网络状况参数，可以将得到的一种或多种带宽参数传输至速度判决模块；码流监控模块的输入端与音视频解码器的输出端相连，码流监控模块的输出端连接速度判决模块，该码流监控模块用于对音视频的码流进行处理分析，能够得到音视频的码率、音频的采样率、视频的帧率等码流参数或其它音视频参数，可以将一种或多种码流参数传输至速度判决模块；缓存状态监控模块的输入端分别与未解码音视频缓存器和解码后音视频缓存器输出端相连，缓存状态监控模块的输出端连接速度判决模块，该缓存状态监控模块对音视频解码之前、音视频解码之后的缓存状态进行处理分析，得到缓存的音视频数据量的大小和数据量的变化等缓存的音视频数据量参数或其它缓存状态参数，可以将一种或多种缓存的音视频数据量参数传输至速度判决模块。
速度判决模块接收设备/网络状态监控模块、码流监控模块、缓存状态监控模块发送过来的参数信息，可以综合考虑设备/网络的实时带宽、平均带宽、响应时间、带宽的变化、音视频的码率、音视频缓存中数据量的大小、音视频缓存中数据量的变化等参数，根据需要选择特定的参数或某些参数的组合来确定音视频变速的参数，即确定相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始速度。例如：如果当前的网络实时带宽小于音视频的码率，则对音视频进行慢放操作，如果当前网络的实时带宽大于音视频的码率，则对音视频保持原始速度进行正常的播放或者快放操作。
速度判决模块将确定的音视频变速的参数输入至音视频变速模块，解码后的音视频数据也输入至音视频变速模块，音视频变速模块可以采用现有的变速方式对音频数据进行变速处理和对视频数据进行变速处理，其中，对音频数据的变速处理是指保持音频的音调不变同时改变音频的播放速度。音视频同步模块对变速处理后的音视频数据进行同步处理，以保持音视频同步，最终由输出模块将同步处理后的音视频数据输出到播放设备或存储设备。
本发明的数字音视频变速播放的装置适用于需要在终端采用音视频解码器解码的数字音视频数据的变速播放，还适用于无需编解码的数字音视频数据的变速播放，如图5所示的本发明数字音视频变速播放的装置的第二种优选结构示意图。该实施例中的传输到本地的音视频数据为未经音视频编解码处理的原始音视频数据，音视频数据流直接输入至音视频缓存器，故该音视频缓存器即为音视频数据接收模块，音视频缓存器的输出端与缓存状态监控模块的输入端相连。此外，与图4所示的实施例不同的是，图5所示装置未显示码流监控模块，由于无需编解码处理，如设置码流监控模块，其输入端可直接连接提供音视频数据的设备，输出端与速度判决模块相连。当然，针对监控模块，即使不设置码流监控模块和设备/网络状态监控模块，仅设置缓存状态监控模块；或不设置缓存状态监控模块，仅设置码流监控模块和设备/网络状态监控模块，都能够将所需的音视频参数输入至速度判决模块，最终由本发明的装置完成数字音视频变速播放。此外，音视频变速模块还可以连接能够手工改变或选择音视频变速的参数的窗口，根据需要通过所述窗口手工改变或选择音视频变速的参数，再通过音视频变速模块对音视频数据进行变速处理。
应当指出，以上所述具体实施方式可以使本领域的技术人员更全面地理解本发明创造，但不以任何方式限制本发明创造。因此，尽管本说明书参照附图和实施例对本发明创造已进行了详细的说明，但是，本领域技术人员应当理解，仍然可以对本发明创造进行修改或者等同替换，总之，一切不脱离本发明创造的精神和范围的技术方案及其改进，其均应涵盖在本发明创造专利的保护范围当中。
Claims (10)
1.一种数字音视频变速播放的方法，其特征在于，包括下述步骤：
A、接收并存储传输到本地的音视频数据；
B、对设备/网络状况及存储到本地的音视频数据进行处理分析，得到设备/网络状态参数和音视频参数；或对系统的缓存进行处理分析，得到缓存状态参数；或对系统的缓存及存储到本地的音视频数据进行处理分析，得到缓存状态参数和音视频参数；
C、根据步骤B中得到的参数确定音视频变速的参数，从而对音视频数据进行变速处理，所述对音视频数据进行变速处理包括对音频数据进行变速处理和对视频数据进行变速处理，所述音频数据的变速处理是指保持音频的音调不变同时改变音频的播放速度；
D、对变速处理后的音视频数据进行同步处理，保持音视频同步；
E、将同步处理后的音视频数据输出到播放设备或存储设备。
2.根据权利要求1所述的数字音视频变速播放的方法，其特征在于，所述传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。
3.根据权利要求2所述的数字音视频变速播放的方法，其特征在于，所述步骤B中，当对设备/网络状况及存储到本地的音视频数据进行处理分析时，所述设备状况为提供音视频数据的设备的状况，所述网络状况为音视频终端所处网络的状况，得到的设备/网络状态参数包括实时带宽和/或平均带宽和/或带宽的变化趋势和/或带宽的变化率和/或响应时间，音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率；当对系统的缓存进行处理分析时，所述系统的缓存包括音视频解码之前、音视频解码之后以及未经音视频编解码处理的原始音视频数据的缓存，得到的缓存状态参数包括缓存的音视频数据量的大小和/或数据量的变化；当对系统的缓存及存储到本地的音视频数据进行处理分析时得到的缓存状态参数包括缓存的音视频数据量的大小和/或数据量的变化，音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率。
4.根据权利要求1至3之一所述的数字音视频变速播放的方法，其特征在于，步骤C所述的音视频变速的参数是指相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始速度；和/或，在步骤C中还设置手工改变或选择音视频变速的参数的窗口，根据需要通过所述窗口手工改变或选择音视频变速的参数，再对音视频数据进行变速处理。
5.根据权利要求4所述的数字音视频变速播放的方法，其特征在于，根据步骤B中得到的参数，将步骤C所述的音视频变速的参数设置为不同的等级。
6.一种数字音视频变速播放的装置，其特征在于，包括依次连接的音视频数据接收模块、监控模块、速度判决模块、音视频变速模块、音视频同步模块和输出模块，所述音视频数据接收模块与音视频变速模块相连，所述音视频数据接收模块接收并存储传输到本地的音视频数据，监控模块对设备/网络状况或对系统的缓存状态进行处理分析，并将处理分析后得到的参数传输至速度判决模块，所述速度判决模块根据收到的参数确定音视频变速的参数，并由音视频变速模块对音视频数据进行变速处理，所述音视频变速模块对音视频数据进行变速处理包括对音频数据进行变速处理和对视频数据进行变速处理，所述音频数据的变速处理是指保持音频的音调不变同时改变音频的播放速度，音视频变速模块将变速处理后的音视频数据传输至音视频同步模块，音视频同步模块对变速处理后的音视频数据进行同步处理，最终由输出模块将同步处理后的音视频数据输出到播放设备或存储设备。
7.根据权利要求6所述的数字音视频变速播放的装置，其特征在于，所述音视频数据接收模块接收并存储的传输到本地的音视频数据包括音视频解码之前的音视频数据、音视频解码以后的音视频数据和/或未经音视频编解码处理的原始音视频数据。
8.根据权利要求7所述的数字音视频变速播放的装置，其特征在于，所述监控模块包括设备/网络状态监控模块和码流监控模块，所述设备/网络状态监控模块对提供音视频数据的设备或者是音视频终端所处的网络的状况进行处理分析，得到设备/网络状况参数，所述码流监控模块对音视频的码流进行处理分析，得到音视频参数，所述设备/网络状态监控模块和码流监控模块分别将设备/网络状况参数和音视频参数发送至速度判决模块；
或所述监控模块包括缓存状态监控模块，所述缓存状态监控模块分别与音视频数据接收模块和速度判决模块相连，所述缓存状态监控模块对系统的缓存状态进行处理分析，得到缓存状态参数，并将缓存状态参数发送至速度判决模块；
或所述监控模块包括缓存状态监控模块和码流监控模块，所述缓存状态监控模块分别与音视频数据接收模块和速度判决模块相连，所述缓存状态监控模块对系统的缓存状态进行处理分析，得到缓存状态参数，所述码流监控模块对音视频的码流进行处理分析，得到音视频参数，所述缓存状态监控模块和码流监控模块分别将缓存状态参数和音视频参数发送至速度判决模块。
9.根据权利要求8所述的数字音视频变速播放的装置，其特征在于，当监控模块包括设备/网络状态监控模块和码流监控模块时，所述设备/网络状况参数包括实时带宽和/或平均带宽和/或带宽的变化趋势和/或带宽的变化率和/或响应时间，所述音视频参数包括音视频的码率和/或音频的采样率和/或视频的帧率；当监控模块包括缓存状态监控模块时，所述系统的缓存包括音视频解码之前、音视频解码之后以及未经音视频编解码处理的原始音视频数据缓存中的数据量的大小和/或数据量的变化。
10.根据权利要求6所述的数字音视频变速播放的装置，其特征在于，所述速度判决模块确定的音视频变速的参数是指相对于音视频码流规定的原始播放速度，当前播放速度发生的变化，包括快放、慢放或者保持原始速度；和/或，所述音视频变速模块还连接有手工改变或选择音视频变速的参数的窗口，根据需要通过所述窗口手工改变或选择音视频变速的参数，再通过音视频变速模块对音视频数据进行变速处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2011102042039A CN102271280A (zh) | 2011-07-20 | 2011-07-20 | 一种数字音视频变速播放的方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2011102042039A CN102271280A (zh) | 2011-07-20 | 2011-07-20 | 一种数字音视频变速播放的方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102271280A true CN102271280A (zh) | 2011-12-07 |
Family
ID=45053416
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011102042039A Pending CN102271280A (zh) | 2011-07-20 | 2011-07-20 | 一种数字音视频变速播放的方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102271280A (zh) |
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103475927A (zh) * | 2012-06-08 | 2013-12-25 | 腾讯科技（深圳）有限公司 | 在线视频实时变速播放方法及系统 |
| CN103856819A (zh) * | 2012-11-30 | 2014-06-11 | 腾讯科技（深圳）有限公司 | 播放速度调整装置及方法 |
| CN104254007A (zh) * | 2014-09-03 | 2014-12-31 | 海信集团有限公司 | 一种音频处理方法及装置 |
| CN104636138A (zh) * | 2011-12-29 | 2015-05-20 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
| CN104702975A (zh) * | 2015-03-24 | 2015-06-10 | 北京中熙正保远程教育技术有限公司 | 用于远程授课的Flash视频变速播放方法 |
| CN105208426A (zh) * | 2015-09-24 | 2015-12-30 | 福州瑞芯微电子股份有限公司 | 一种音视频同步变速的方法及系统 |
| CN106331841A (zh) * | 2016-09-19 | 2017-01-11 | 海信集团有限公司 | 网速信息指示方法及装置 |
| WO2017124904A1 (zh) * | 2016-01-22 | 2017-07-27 | 广州视睿电子科技有限公司 | 一种音频播放方法及装置 |
| CN107005725A (zh) * | 2014-12-08 | 2017-08-01 | 罗伯特·博世有限公司 | 用于重现媒体流的方法 |
| CN107193841A (zh) * | 2016-03-15 | 2017-09-22 | 北京三星通信技术研究有限公司 | 媒体文件加速播放、传输及存储的方法和装置 |
| WO2017190346A1 (zh) * | 2016-05-06 | 2017-11-09 | 华为技术有限公司 | 音视频数据同步方法和装置 |
| CN107484009A (zh) * | 2017-09-12 | 2017-12-15 | 上海脉淼信息科技有限公司 | 一种适用于网络直播的流媒体播放方法和装置 |
| CN108282689A (zh) * | 2017-12-07 | 2018-07-13 | 上海悠络客电子科技股份有限公司 | 一种互联网监控在网络抖动下做到最小延时并能流畅播放的方法 |
| CN109194975A (zh) * | 2018-11-02 | 2019-01-11 | 深圳市云威物联科技有限公司 | 音视频直播追流方法及装置 |
| CN109309870A (zh) * | 2018-10-19 | 2019-02-05 | 成都品果科技有限公司 | 一种调节视频播放速度的方法及装置 |
| CN109963184A (zh) * | 2017-12-14 | 2019-07-02 | 阿里巴巴集团控股有限公司 | 一种音视频网络播放的方法、装置以及电子设备 |
| CN110012267A (zh) * | 2019-04-02 | 2019-07-12 | 深圳市即构科技有限公司 | 无人机控制方法及音视频数据传输方法 |
| CN110166805A (zh) * | 2019-04-30 | 2019-08-23 | 广州微算互联信息技术有限公司 | 云手机音频传输控制方法、系统及存储介质 |
| CN110248247A (zh) * | 2019-06-12 | 2019-09-17 | 深圳市大数据研究院 | 基于网络吞吐量的嵌入式动态视频播放控制方法及装置 |
| CN110892731A (zh) * | 2018-07-25 | 2020-03-17 | 深圳市大疆创新科技有限公司 | 视频播放速度控制方法及系统、控制终端和可移动平台 |
| CN110971935A (zh) * | 2019-11-27 | 2020-04-07 | 福建天泉教育科技有限公司 | 自适应清晰度的视频播放方法、存储介质 |
| CN111372125A (zh) * | 2020-03-18 | 2020-07-03 | 浩云科技股份有限公司 | 一种解码器的视频缓存处理方法、装置及存储介质 |
| CN111586529A (zh) * | 2020-05-08 | 2020-08-25 | 北京三体云联科技有限公司 | 音频数据处理方法、装置、终端和计算机可读存储介质 |
| WO2021082642A1 (zh) * | 2019-10-30 | 2021-05-06 | 上海哔哩哔哩科技有限公司 | 视频播放控制方法和系统 |
| CN112954376A (zh) * | 2021-02-04 | 2021-06-11 | 海信电子科技(武汉)有限公司 | 一种视频播放方法及显示设备 |
| CN113597756A (zh) * | 2019-03-26 | 2021-11-02 | 索尼集团公司 | 信息处理终端、信息处理方法和程序 |
| CN114945075A (zh) * | 2022-07-26 | 2022-08-26 | 中广智诚科技(天津)有限公司 | 一种视频内容同步新配音音频内容的方法及装置 |
| CN115442661A (zh) * | 2021-06-01 | 2022-12-06 | 北京字跳网络技术有限公司 | 视频处理方法、设备、存储介质及计算机程序产品 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1359231A (zh) * | 2000-12-19 | 2002-07-17 | 株式会社考斯默坦 | 快速或慢速重放模式下不造成音调变化的音频信号重现方法及其重现装置 |
| JP2006085843A (ja) * | 2004-09-16 | 2006-03-30 | Kenwood Corp | 記録装置及び方法 |
| CN101047844A (zh) * | 2006-03-30 | 2007-10-03 | 华为技术有限公司 | 一种控制流媒体播放的方法及装置 |
| CN101453655A (zh) * | 2007-11-30 | 2009-06-10 | 深圳华为通信技术有限公司 | 用户可控的音视频同步调节的方法、系统和设备 |
| CN101902475A (zh) * | 2010-07-22 | 2010-12-01 | 工业和信息化部电信研究院 | 一种下一代网络可变速率流媒体的传输控制方法和装置 |
-
2011
- 2011-07-20 CN CN2011102042039A patent/CN102271280A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1359231A (zh) * | 2000-12-19 | 2002-07-17 | 株式会社考斯默坦 | 快速或慢速重放模式下不造成音调变化的音频信号重现方法及其重现装置 |
| JP2006085843A (ja) * | 2004-09-16 | 2006-03-30 | Kenwood Corp | 記録装置及び方法 |
| CN101047844A (zh) * | 2006-03-30 | 2007-10-03 | 华为技术有限公司 | 一种控制流媒体播放的方法及装置 |
| CN101453655A (zh) * | 2007-11-30 | 2009-06-10 | 深圳华为通信技术有限公司 | 用户可控的音视频同步调节的方法、系统和设备 |
| CN101902475A (zh) * | 2010-07-22 | 2010-12-01 | 工业和信息化部电信研究院 | 一种下一代网络可变速率流媒体的传输控制方法和装置 |
Cited By (41)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104636138A (zh) * | 2011-12-29 | 2015-05-20 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
| CN104636138B (zh) * | 2011-12-29 | 2018-05-04 | 北京奇虎科技有限公司 | 变速软件实现方法与装置 |
| CN103475927B (zh) * | 2012-06-08 | 2015-04-08 | 腾讯科技（深圳）有限公司 | 在线视频实时变速播放方法及系统 |
| CN103475927A (zh) * | 2012-06-08 | 2013-12-25 | 腾讯科技（深圳）有限公司 | 在线视频实时变速播放方法及系统 |
| CN103856819A (zh) * | 2012-11-30 | 2014-06-11 | 腾讯科技（深圳）有限公司 | 播放速度调整装置及方法 |
| CN104254007B (zh) * | 2014-09-03 | 2017-11-03 | 海信集团有限公司 | 一种音频处理方法及装置 |
| CN104254007A (zh) * | 2014-09-03 | 2014-12-31 | 海信集团有限公司 | 一种音频处理方法及装置 |
| CN107005725A (zh) * | 2014-12-08 | 2017-08-01 | 罗伯特·博世有限公司 | 用于重现媒体流的方法 |
| CN104702975A (zh) * | 2015-03-24 | 2015-06-10 | 北京中熙正保远程教育技术有限公司 | 用于远程授课的Flash视频变速播放方法 |
| CN105208426A (zh) * | 2015-09-24 | 2015-12-30 | 福州瑞芯微电子股份有限公司 | 一种音视频同步变速的方法及系统 |
| CN105208426B (zh) * | 2015-09-24 | 2018-07-06 | 福州瑞芯微电子股份有限公司 | 一种音视频同步变速的方法及系统 |
| WO2017124904A1 (zh) * | 2016-01-22 | 2017-07-27 | 广州视睿电子科技有限公司 | 一种音频播放方法及装置 |
| CN107193841A (zh) * | 2016-03-15 | 2017-09-22 | 北京三星通信技术研究有限公司 | 媒体文件加速播放、传输及存储的方法和装置 |
| WO2017190346A1 (zh) * | 2016-05-06 | 2017-11-09 | 华为技术有限公司 | 音视频数据同步方法和装置 |
| CN107710754A (zh) * | 2016-05-06 | 2018-02-16 | 华为技术有限公司 | 音视频数据同步方法和装置 |
| CN107710754B (zh) * | 2016-05-06 | 2020-02-21 | 华为技术有限公司 | 音视频数据同步方法和装置 |
| CN106331841A (zh) * | 2016-09-19 | 2017-01-11 | 海信集团有限公司 | 网速信息指示方法及装置 |
| CN107484009A (zh) * | 2017-09-12 | 2017-12-15 | 上海脉淼信息科技有限公司 | 一种适用于网络直播的流媒体播放方法和装置 |
| CN108282689A (zh) * | 2017-12-07 | 2018-07-13 | 上海悠络客电子科技股份有限公司 | 一种互联网监控在网络抖动下做到最小延时并能流畅播放的方法 |
| CN109963184A (zh) * | 2017-12-14 | 2019-07-02 | 阿里巴巴集团控股有限公司 | 一种音视频网络播放的方法、装置以及电子设备 |
| CN109963184B (zh) * | 2017-12-14 | 2022-04-29 | 阿里巴巴集团控股有限公司 | 一种音视频网络播放的方法、装置以及电子设备 |
| CN110892731A (zh) * | 2018-07-25 | 2020-03-17 | 深圳市大疆创新科技有限公司 | 视频播放速度控制方法及系统、控制终端和可移动平台 |
| CN110892731B (zh) * | 2018-07-25 | 2022-01-25 | 深圳市大疆创新科技有限公司 | 视频播放速度控制方法及系统、控制终端和可移动平台 |
| CN109309870A (zh) * | 2018-10-19 | 2019-02-05 | 成都品果科技有限公司 | 一种调节视频播放速度的方法及装置 |
| CN109194975A (zh) * | 2018-11-02 | 2019-01-11 | 深圳市云威物联科技有限公司 | 音视频直播追流方法及装置 |
| CN109194975B (zh) * | 2018-11-02 | 2021-04-20 | 深圳市云威物联科技有限公司 | 音视频直播追流方法及装置 |
| CN113597756A (zh) * | 2019-03-26 | 2021-11-02 | 索尼集团公司 | 信息处理终端、信息处理方法和程序 |
| CN110012267A (zh) * | 2019-04-02 | 2019-07-12 | 深圳市即构科技有限公司 | 无人机控制方法及音视频数据传输方法 |
| CN110166805A (zh) * | 2019-04-30 | 2019-08-23 | 广州微算互联信息技术有限公司 | 云手机音频传输控制方法、系统及存储介质 |
| CN110248247A (zh) * | 2019-06-12 | 2019-09-17 | 深圳市大数据研究院 | 基于网络吞吐量的嵌入式动态视频播放控制方法及装置 |
| CN110248247B (zh) * | 2019-06-12 | 2021-08-17 | 深圳市大数据研究院 | 基于网络吞吐量的嵌入式动态视频播放控制方法及装置 |
| US11863841B2 (en) | 2019-10-30 | 2024-01-02 | Shanghai Bilibili Technology Co., Ltd. | Video playing control method and system |
| WO2021082642A1 (zh) * | 2019-10-30 | 2021-05-06 | 上海哔哩哔哩科技有限公司 | 视频播放控制方法和系统 |
| CN110971935A (zh) * | 2019-11-27 | 2020-04-07 | 福建天泉教育科技有限公司 | 自适应清晰度的视频播放方法、存储介质 |
| CN111372125A (zh) * | 2020-03-18 | 2020-07-03 | 浩云科技股份有限公司 | 一种解码器的视频缓存处理方法、装置及存储介质 |
| CN111586529A (zh) * | 2020-05-08 | 2020-08-25 | 北京三体云联科技有限公司 | 音频数据处理方法、装置、终端和计算机可读存储介质 |
| CN112954376A (zh) * | 2021-02-04 | 2021-06-11 | 海信电子科技(武汉)有限公司 | 一种视频播放方法及显示设备 |
| CN115442661A (zh) * | 2021-06-01 | 2022-12-06 | 北京字跳网络技术有限公司 | 视频处理方法、设备、存储介质及计算机程序产品 |
| CN115442661B (zh) * | 2021-06-01 | 2024-03-19 | 北京字跳网络技术有限公司 | 视频处理方法、设备、存储介质及计算机程序产品 |
| CN114945075A (zh) * | 2022-07-26 | 2022-08-26 | 中广智诚科技(天津)有限公司 | 一种视频内容同步新配音音频内容的方法及装置 |
| CN114945075B (zh) * | 2022-07-26 | 2022-11-04 | 中广智诚科技(天津)有限公司 | 一种视频内容同步新配音音频内容的方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102271280A (zh) | 一种数字音视频变速播放的方法和装置 | |
| US20210035608A1 (en) | Variable Speed Playback | |
| CN104113777B (zh) | 一种音频流解码方法及装置 | |
| WO2020001536A1 (zh) | 一种信息处理方法、装置和系统 | |
| AU2008202703B2 (en) | Apparatus and method for providing multimedia content | |
| CN101375604A (zh) | 用于编码装置内的速率控制的方法及系统 | |
| CN106791956A (zh) | 网络直播卡顿的处理方法及装置 | |
| CN101296158A (zh) | 一种流媒体数据传输方法及其数据传输装置 | |
| CN111225209B (zh) | 视频数据推流方法、装置、终端及存储介质 | |
| MX2013004481A (es) | Ajuste de configuracion de codigo dinamico. | |
| CN106792154B (zh) | 视频播放器的跳帧同步系统及其控制方法 | |
| CN104394484A (zh) | 一种无线实时流媒体传输方法 | |
| RU2427043C1 (ru) | Система и способ обеспечения синхронизации для адаптивной многоскоростной широкополосной прерываемой передачи | |
| CN112312137A (zh) | 一种视频传输方法、装置、电子设备及存储介质 | |
| CN111372138A (zh) | 一种播放器端的直播低延迟技术方案 | |
| MX2011005782A (es) | Metodo y aparato para controlar la reproduccion de datos de video-audio. | |
| CN104113778B (zh) | 一种视频流解码方法及装置 | |
| CN105791735A (zh) | 用于视频通话码流动态调整的方法和系统 | |
| US20140362291A1 (en) | Method and apparatus for processing a video signal | |
| CN112752117A (zh) | 一种视频缓存方法、装置、设备及存储介质 | |
| CN113891132A (zh) | 一种音视频同步监控方法、装置、电子设备及存储介质 | |
| CN108810468B (zh) | 一种优化显示效果的视频传输装置及方法 | |
| CN114786055A (zh) | 一种预加载方法、装置、电子设备及介质 | |
| CN113079386B (zh) | 一种视频在线播放方法、装置、电子设备及存储介质 | |
| CN115767146A (zh) | 数据流控制方法、系统、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20111207 |
|
| C20 | Patent right or utility model deemed to be abandoned or is abandoned |