CN107333163A - 一种视频处理方法及装置、一种终端及存储介质 - Google Patents

一种视频处理方法及装置、一种终端及存储介质 Download PDF

Info

Publication number
CN107333163A
CN107333163A CN201710518818.6A CN201710518818A CN107333163A CN 107333163 A CN107333163 A CN 107333163A CN 201710518818 A CN201710518818 A CN 201710518818A CN 107333163 A CN107333163 A CN 107333163A
Authority
CN
China
Prior art keywords
video
frame
caching
processing
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201710518818.6A
Other languages
English (en)
Inventor
眭世晨
王刚
麦砚
赵叶娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jun Chong Information Technology Co Ltd
Original Assignee
Shanghai Jun Chong Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jun Chong Information Technology Co Ltd filed Critical Shanghai Jun Chong Information Technology Co Ltd
Priority to CN201710518818.6A priority Critical patent/CN107333163A/zh
Publication of CN107333163A publication Critical patent/CN107333163A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请提供一种视频处理方法及装置、一种终端及存储介质，所述方法包括：采集缓存中的视频帧的时间戳；根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。

Description

一种视频处理方法及装置、一种终端及存储介质
技术领域
本发明涉及计算机软件的音视频处理的技术领域，特别涉及一种视频处理方法及装置、一种终端及存储介质。
背景技术
目前，在直播领域中观看直播视频的质量依赖于网络带宽、传输协议或编码标准等。主流互联网移动直播系统使用H.264和AAC作为音视频编码标准，使用hls、rtmp或rtp作为传输协议，所需带宽从200Kbps至2Mbps不等。能提供不同流畅度和清晰度的直播服务。
播放端一般支持上述技术，会充分使用手机平台的硬件计算能力。但是移动直播时由于网络抖动，网络环境不稳定，会造成视频数据传输阻塞或延迟，使得播放端和主播端的视频数据时间相差越来越远，影响直播的互动体验。
发明内容
有鉴于此，本申请提供一种解决移动直播造成视频数据传输阻塞或延迟的视频处理方法及装置、一种终端及存储介质。
一方面，本申请提供一种视频处理方法，包括：
采集缓存中的视频帧的时间戳；
根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；
若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
可选地，所述预定的降低视频延迟处理策略包括：
将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效；
对标记无效的视频帧不进行解码和播放。
可选地，所述预定的降低视频延迟处理策略包括：
对所述缓存中的视频帧以预设解码速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率大于等于50帧/秒。
可选地，所述方法还包括：
将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效；
对标记无效的音频帧不进行解码和播放。
另一方面，本申请提供一种视频处理装置，包括：
采集模块，用于采集缓存中的视频帧的时间戳；
计算模块，用于根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；
处理模块，用于若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
可选地，所述处理模块包括：
第一标记模块，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效；
第一无效模块，用于对标记无效的视频帧不进行解码和播放。
可选地，所述处理模块包括：
第一快放模块，用于对所述缓存中的视频帧以预设解码速率进行解码和
播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率大
于等于50帧/秒。
可选地，所述装置还包括：
第二标记模块，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效；
第二无效模块，用于对标记无效的音频帧不进行解码和播放。
另一方面，本申请提供一种终端，包括处理器和存储器，所述存储器存储有计算机指令，所述处理器调用所述计算机指令并执行上述视频处理方法。
另一方面，本申请提供一种存储介质，存储有计算机指令，所述计算机指令执行上述视频处理方法。
本发明申请提供的一种视频处理方法及装置、一种终端及存储介质，通过检测缓存中视频数据的时间差值判断延迟，可以根据当前使用设备的性能选择视频降低视频延迟处理策略，达到降低视频延迟的效果，以解决因网络抖动造成的直播画面延迟问题。
附图说明
图1为本申请一实施例提供的一种视频处理方法的流程图；
图2为本申请一实施例提供的一种视频处理方法的流程图；
图3为本申请一实施例提供的一种视频处理方法的流程图；
图4为本申请一实施例提供的一种视频处理装置的结构示意图；
图5为本申请一实施例提供的处理模块的结构示意图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本申请内涵的情况下做类似推广，因此本申请不受下面公开的具体实施的限制。
在本申请中，提供了一种视频处理方法及装置、一种终端及存储介质，在下面的实施例中逐一进行详细说明。
参见图1，本申请一实施例提供一种视频处理方法，包括步骤101至步骤103。
步骤101：采集缓存中的视频帧的时间戳。
本实施例中，采集缓存中的视频帧每一帧的时间戳，根据所述时间戳确定每一视频帧的时间。
步骤102：根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值。
本实施例中，所述最晚的视频帧为当前缓存接收到的最后一帧的视频帧，所述最早的视频帧为当前缓存中接收到的第一帧视频帧。
步骤103：若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
本实施例的视频处理方法，通过检测缓存中的视频帧的时间差值确定延迟，根据当前使用设备的性能选择视频降低视频延迟处理策略，达到降低视频延迟的效果，以解决因网络抖动造成直播画面延迟的问题。
参见图2，本申请一实施例提供一种视频处理方法，包括步骤201至步骤206。
步骤201：采集缓存中的视频帧的时间戳。
步骤202：根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值。
步骤203：判断所述时间差值是否大于预设时间阈值，如果是，执行步骤204；如果否，则执行步骤206。
步骤204：将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效。
本实施例中，将当前缓存中接收到的第一帧开始到当前缓存中接收到的时间最晚的关键帧之间的视频帧全部标记无效，但不包括关键帧。
实际应用中，可以每隔25帧设置一个关键帧或每1秒的视频帧内设置一个关键帧，本申请对此不作限定。
步骤205：对标记无效的视频帧不进行解码和播放。
本实施例中，被标记无效的视频帧不进行解码和播放，并且会被后面新进入缓存中的视频帧覆盖，无需做额外的删除处理。
步骤206：不需要对视频进行处理，直接进行解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时为视频帧设置无效标记的方式，对被标记无效的视频帧不进行解码和播放，从而达到降低延迟的目的，以解决移动直播时网络不稳定产生抖动造成的直播画面延迟问题。
参见图3，本申请一实施例提供一种视频处理方法，包括步骤301至步骤305。
步骤301：采集缓存中的视频帧的时间戳。
步骤302：根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值。
步骤303：判断所述时间差值是否大于预设时间阈值，如果是，执行步骤304；如果否，则执行步骤305。
步骤304：对所述缓存中的视频帧以预设解码速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率等于50帧/秒。
步骤305：以普通解码速率对视频帧进行解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时采用提高视频解码速度的方式，达到降低视频延迟的效果，以解决移动直播时网络不稳定产生抖动对直播画面造成延迟的问题。
本申请一实施例，用户可以根据对视频帧的敏感度和使用的设备的CPU性能自主选择是采用设置无效标记的方式或快速解码的方式降低视频画面的延迟，但是若设备的CPU主频大于等于2千兆赫兹并且CPU包含的核心数大于等于4个时才可以实现采用快速解码的方式来降低直播中视频画面的延迟。
实际应用中，本申请实施例提供的视频处理方法可以应用于电子设备中，所述电子设备可以是一种终端，例如可以是手机、平板电脑、台式电脑、笔记本电脑等，下面以手机为例对本申请实施例提供的视频处理方法进行说明。
使用CPU主频小于2千兆赫兹并且CPU包含的核心数小于4个的手机观看直播时，手机播放端从播放开始，始终检测缓存区中的视频帧的时间戳，根据检测的时间戳确定缓存区中每一视频帧对应的时间；计算当前缓存区中接收的最近的视频帧的时间，即最晚的视频帧的时间，和最早的视频帧的时间之间的时间差值，若所述时间差值大于预设时间阈值，如时间差值大于6秒时，缓存区中的视频从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效，本实施例中，可以每隔25个视频帧设置一个关键帧，手机播放端对标记无效的视频帧不进行解码和播放。
同时，将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效，对标记无效的音频帧也不进行解码和播放，如被标记无效的视频帧的时间段是从第50毫秒至第500毫秒，则音频帧被标记无效的时间段也是从第50毫秒至第500毫秒。
本实施例中，视频帧和音频帧可以不一一对应，视频帧的时间戳可能是50毫秒、90毫秒、130毫秒等，而音频帧的时间戳可能是50毫秒、75毫秒、100毫秒、125毫秒等。
对未被标记无效的视频帧和音频帧进行正常的解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时采用对视频帧设置无效标记，对被设置无效标记的视频帧不进行解码和播放的方式，达到降低视频延迟的效果。
实际应用中，本申请实施例提供的视频处理方法可以应用于电子设备中，所述电子设备可以是一种终端，例如可以是手机、平板电脑、台式电脑、笔记本电脑等，下面以手机为例对本申请实施例提供的视频处理方法进行说明。
使用CPU主频等于2千兆赫兹并且CPU包含的核心数等于4的手机观看直播时，手机播放端从播放开始，始终检测缓存区中的视频帧的时间戳，根据检测的时间戳确定缓存区中每一视频帧对应的时间；计算当前缓存区中接收的最近的视频帧的时间，即最晚的视频帧的时间，和最早的视频帧的时间之间的时间差值，若所述差值大于预设时间阈值，如时间差值大于6秒时，所述缓存中的视频帧以50帧/秒的速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放。
同时，将所述缓存中的音频帧也以50帧/秒的速率进行解码和播放直至所述缓存中的音频帧被全部解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时采用提高视频解码速率的方式，解决移动直播时因网络抖动造成直播画面延迟不流畅的问题。
本申请实施例提供的视频处理方法可以应用于电子设备中，所述电子设备可以是一种终端，例如可以是手机、平板电脑、台式电脑、笔记本电脑等。
具体地，本申请实施例提供的视频处理方法可以应用于电子设备中安装的任一应用程序，所述应用程序可以包括音视频直播软件、游戏软件等。
参见图4，本申请一实施例提供一种视频处理装置，包括：
采集模块401，用于采集缓存中的视频帧的时间戳；
计算模块402，用于根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；
处理模块403，用于若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
本实施例的视频处理装置，通过检测缓存中的视频帧的时间差值确定延迟，根据当前使用设备的性能选择视频降低视频延迟处理策略，达到降低视频延迟的效果，当移动直播处于较差的网络环境中时，直播画面延迟的时间不会超过6秒。
参见图5，所述处理模块403包括：
第一标记模块501，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效；
第一无效模块502，用于对标记无效的视频帧不进行解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时为视频帧设置无效标记的方式，对被标记无效的视频帧不进行解码和播放，从而达到降低延迟的目的，以解决移动直播时网络不稳定产生抖动造成的直播画面延迟问题。
可选地，所述处理模块403包括：
第一快放模块，用于对所述缓存中的视频帧以预设解码速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率大于等于50帧/秒。
可选地，所述装置还包括：
第二标记模块，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效；
第二无效模块，用于对标记无效的音频帧不进行解码和播放。
本实施例中，通过检测缓存中的视频帧的时间差值确定延迟，在视频帧播放延迟时采用提高视频解码速度的方式，达到降低视频延迟的效果，以解决因网络环境较差造成直播画面的延迟问题。
实际应用中，视频处理装置可以是手机、平板电脑、台式电脑、笔记本电脑等终端，下面以平板电脑为例对本申请实施例提供的视频处理装置进行说明。
使用CPU主频小于2千兆赫兹并且CPU包含的核心数小于4个的平板电脑观看游戏直播，平板电脑播放端从播放开始，采集模块始终检测缓存区中的视频帧的时间戳，根据检测的时间戳确定缓存区中每一视频帧对应的时间；然后计算模块计算当前缓存区中接收的最近的视频帧的时间(即最晚的视频帧的时间)和最早的视频帧的时间之间的时间差值，所述时间差值传递到处理模块，所述处理模块确定当时间差值大于预设时间阈值，如时间差值大于6秒时，开始工作，所述处理模块中的第一标记模块将缓存区中的视频从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效，第一无效模块开始工作，所述第一无效模块确定平板电脑播放端对标记无效的视频帧不进行解码和播放。
同时，第二标记模块将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效，第二无效模块对标记无效的音频帧也不进行解码和播放，如被标记无效的视频帧的时间段是从第50毫秒至第500毫秒，则音频帧被标记无效的时间段也是从第50毫秒至第500毫秒。
本实施例中，通过检测缓存中的视频帧的时间差确定延迟，在视频帧播放延迟时采用对视频帧设置无效标记的方式，达到降低视频延迟的效果，以解决移动直播时因网络抖动造成的延迟问题；对音频和视频进行同步处理，避免播放端出现播放视频画面与语音不一致的问题。
上述为本实施例的视频处理装置的示意性方案。需要说明的是，该视频处理装置的技术方案与上述的视频处理方法的技术方案属于同一构思，视频处理装置的技术方案未详细描述的细节内容，均可以参见上述视频处理方法的技术方案的描述。
本申请实施例提供的视频处理方法可以应用于电子设备中，所述电子设备可以是一种终端，例如可以是手机、平板电脑、台式电脑、笔记本电脑等。
具体地，本申请实施例提供的视频处理方法可以应用于电子设备中安装的任一应用程序，所述应用程序可以包括音视频直播软件、游戏软件等。
本申请一实施例提供一种终端，包括处理器和存储器，所述存储器存储有计算机指令，所述处理器调用所述计算机指令并执行上述视频处理方法。
上述为本实施例的终端的示意性方案。需要说明的是，该终端的技术方案与上述的视频处理方法的技术方案属于同一构思，终端的技术方案未详细描述的细节内容，均可以参见上述视频处理方法的技术方案的描述。
需要说明的是，所述终端可以为桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。本领域技术人员可以理解的是，终端为用于接收数据并进行处理后输出结构的设备。上述举例并非是对终端的限定，为在某些场合，终端还可以包括输入输出设备、网络接入设备、总线等。
所述处理器可以为中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述终端的控制中心，利用各种接口和线路连接整个终端的各个部分。
所述存储器主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
本申请一实施例提供一种存储介质，存储有计算机指令，所述计算机指令执行上述视频处理方法。
上述为本实施例的一种存储介质的示意性方案。需要说明的是，该存储介质的技术方案与上述的视频处理方法的技术方案属于同一构思，存储介质的技术方案未详细描述的细节内容，均可以参见上述视频处理方法的技术方案的描述。
所述计算机指令包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
需要说明的是，对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本发明所必须的。
在本申请所提供的多个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的检测装置的实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信链接可以是通过一些接口，模块的间接耦合或通信链接，可以是电性，机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
以上公开的本发明优选实施例只是用于帮助阐述本发明。可选实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。

Claims (10)

1.一种视频处理方法，其特征在于，包括：
采集缓存中的视频帧的时间戳；
根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；
若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
2.根据权利要求1所述的方法，其特征在于，
所述预定的降低视频延迟处理策略包括：
将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效；
对标记无效的视频帧不进行解码和播放。
3.根据权利要求1所述的方法，其特征在于，
所述预定的降低视频延迟处理策略包括：
对所述缓存中的视频帧以预设解码速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率大于等于50帧/秒。
4.根据权利要求2所述的方法，其特征在于，所述方法还包括：
将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效；
对标记无效的音频帧不进行解码和播放。
5.一种视频处理装置，其特征在于，包括：
采集模块，用于采集缓存中的视频帧的时间戳；
计算模块，用于根据所述时间戳确定缓存中最晚的视频帧与最早的视频帧之间的时间差值；
处理模块，用于若所述时间差值大于预设时间阈值，则按照预定的降低视频延迟处理策略处理缓存中的视频帧。
6.根据权利要求5所述的装置，其特征在于，
所述处理模块包括：
第一标记模块，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧均标记为无效；
第一无效模块，用于对标记无效的视频帧不进行解码和播放。
7.根据权利要求5所述的装置，其特征在于，
所述处理模块包括：
第一快放模块，用于对所述缓存中的视频帧以预设解码速率进行解码和播放直至所述缓存中的视频帧被全部解码和播放，所述预设解码速率大于等于50帧/秒。
8.根据权利要求6所述的装置，其特征在于，所述装置还包括：
第二标记模块，用于将缓存中从最早的视频帧开始至最晚的关键帧之前的视频帧对应的时间段内的音频帧标记无效；
第二无效模块，用于对标记无效的音频帧不进行解码和播放。
9.一种终端，其特征在于，包括处理器和存储器，所述存储器存储有计算机指令，所述处理器调用所述计算机指令并执行权利要求1-4任意一项所述的视频处理方法。
10.一种存储介质，其特征在于，存储有计算机指令，所述计算机指令执行权利要求1-4任意一项所述的视频处理方法。
CN201710518818.6A 2017-06-29 2017-06-29 一种视频处理方法及装置、一种终端及存储介质 Withdrawn CN107333163A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710518818.6A CN107333163A (zh) 2017-06-29 2017-06-29 一种视频处理方法及装置、一种终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710518818.6A CN107333163A (zh) 2017-06-29 2017-06-29 一种视频处理方法及装置、一种终端及存储介质

Publications (1)

Publication Number Publication Date
CN107333163A true CN107333163A (zh) 2017-11-07

Family

ID=60199133

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710518818.6A Withdrawn CN107333163A (zh) 2017-06-29 2017-06-29 一种视频处理方法及装置、一种终端及存储介质

Country Status (1)

Country Link
CN (1) CN107333163A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495177A (zh) * 2018-03-30 2018-09-04 北京三体云联科技有限公司 一种音频变速处理方法及装置
CN109144858A (zh) * 2018-08-02 2019-01-04 腾讯科技（北京）有限公司 流畅度检测方法、装置、计算设备及存储介质
CN110113621A (zh) * 2018-02-01 2019-08-09 腾讯科技（深圳）有限公司 媒体信息的播放方法和装置、存储介质、电子装置
CN111083520A (zh) * 2018-10-19 2020-04-28 杭州海康威视系统技术有限公司 存储视频数据的方法和装置
CN111246178A (zh) * 2020-02-05 2020-06-05 浙江大华技术股份有限公司 视频处理方法和装置、存储介质及电子装置
CN112822503A (zh) * 2020-12-30 2021-05-18 腾讯科技（深圳）有限公司 直播视频流的播放方法、装置、设备及存储介质
CN113453054A (zh) * 2021-06-30 2021-09-28 深圳市斯博科技有限公司 音视频丢帧方法、装置、计算机设备及存储介质
CN114071224A (zh) * 2020-07-31 2022-02-18 腾讯科技（深圳）有限公司 视频数据处理方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101232455A (zh) * 2008-02-04 2008-07-30 中兴通讯股份有限公司 一种拥塞控制方法及装置
US20100014594A1 (en) * 2008-07-17 2010-01-21 Cisco Technology, Inc. Splicing of Encrypted Video/Audio Content
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法
CN106658113A (zh) * 2016-09-30 2017-05-10 腾讯科技（北京）有限公司 多媒体数据处理方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101232455A (zh) * 2008-02-04 2008-07-30 中兴通讯股份有限公司 一种拥塞控制方法及装置
US20100014594A1 (en) * 2008-07-17 2010-01-21 Cisco Technology, Inc. Splicing of Encrypted Video/Audio Content
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法
CN106658113A (zh) * 2016-09-30 2017-05-10 腾讯科技（北京）有限公司 多媒体数据处理方法及装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110113621A (zh) * 2018-02-01 2019-08-09 腾讯科技（深圳）有限公司 媒体信息的播放方法和装置、存储介质、电子装置
CN108495177B (zh) * 2018-03-30 2021-07-13 北京世纪好未来教育科技有限公司 一种音频变速处理方法及装置
CN108495177A (zh) * 2018-03-30 2018-09-04 北京三体云联科技有限公司 一种音频变速处理方法及装置
CN109144858A (zh) * 2018-08-02 2019-01-04 腾讯科技（北京）有限公司 流畅度检测方法、装置、计算设备及存储介质
CN109144858B (zh) * 2018-08-02 2022-02-25 腾讯科技（北京）有限公司 流畅度检测方法、装置、计算设备及存储介质
CN111083520A (zh) * 2018-10-19 2020-04-28 杭州海康威视系统技术有限公司 存储视频数据的方法和装置
CN111083520B (zh) * 2018-10-19 2021-08-17 杭州海康威视系统技术有限公司 存储视频数据的方法和装置
CN111246178B (zh) * 2020-02-05 2021-06-18 浙江大华技术股份有限公司 视频处理方法和装置、存储介质及电子装置
CN111246178A (zh) * 2020-02-05 2020-06-05 浙江大华技术股份有限公司 视频处理方法和装置、存储介质及电子装置
CN114071224A (zh) * 2020-07-31 2022-02-18 腾讯科技（深圳）有限公司 视频数据处理方法、装置、计算机设备及存储介质
CN114071224B (zh) * 2020-07-31 2023-08-25 腾讯科技（深圳）有限公司 视频数据处理方法、装置、计算机设备及存储介质
CN112822503A (zh) * 2020-12-30 2021-05-18 腾讯科技（深圳）有限公司 直播视频流的播放方法、装置、设备及存储介质
CN113453054A (zh) * 2021-06-30 2021-09-28 深圳市斯博科技有限公司 音视频丢帧方法、装置、计算机设备及存储介质
CN113453054B (zh) * 2021-06-30 2022-11-29 深圳万兴软件有限公司 音视频丢帧方法、装置、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
CN107333163A (zh) 一种视频处理方法及装置、一种终端及存储介质
CN109168078B (zh) 一种视频清晰度切换方法及装置
CN110996134B (zh) 视频播放方法、装置及存储介质
US9473548B1 (en) Latency reduction in streamed content consumption
CN109257631B (zh) 视频轮播播放方法、装置、计算机设备及存储介质
WO2021012665A1 (zh) 一种交互式音视频播放的方法及装置
CN109120963B (zh) 一种基于单个显示屏的分屏显示方法、存储介质及系统
WO2017148442A1 (zh) 一种音视频处理方法和装置、计算机存储介质
US10929460B2 (en) Method and apparatus for storing resource and electronic device
WO2019214371A1 (zh) 图像的显示方法、生成方法、装置、存储介质及电子装置
CN103327410B (zh) 移动终端浏览器中视频的播放方法、系统和移动终端
US9908047B2 (en) User save data migration based on location information
CN112771881B (zh) 弹幕处理方法、装置、电子设备及计算机可读取存储介质
CN108769816B (zh) 一种视频播放方法、装置及存储介质
CN111510755A (zh) 音视频的切换方法、装置、计算机设备及可读存储介质
US20150268808A1 (en) Method, Device and System for Multi-Speed Playing
CN106470353B (zh) 一种多媒体数据处理方法及其装置、电子设备
CN109040773A (zh) 一种视频改进方法、装置、设备及介质
US9930412B2 (en) Network set-top box and its operating method
CN106162357A (zh) 获取视频内容的方法及装置
CN110267093A (zh) 直播视频推送方法、装置、存储介质、终端及直播镜
CN107027064A (zh) 无线传屏中视频文件的处理方法及装置
CN112383794B (zh) 直播方法、直播系统、服务器和计算机存储介质
CN109982120B (zh) 一种多媒体播放方法及装置
CN110582024A (zh) 一种播放视频的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20171107