CN110149555A - 视频处理方法和视频接收装置 - Google Patents

视频处理方法和视频接收装置 Download PDF

Info

Publication number
CN110149555A
CN110149555A CN201810921661.6A CN201810921661A CN110149555A CN 110149555 A CN110149555 A CN 110149555A CN 201810921661 A CN201810921661 A CN 201810921661A CN 110149555 A CN110149555 A CN 110149555A
Authority
CN
China
Prior art keywords
video
frame
receiving apparatus
occupancy
algorithm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810921661.6A
Other languages
English (en)
Other versions
CN110149555B (zh
Inventor
汪青
李凯
夏珍
郭莎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201810921661.6A priority Critical patent/CN110149555B/zh
Publication of CN110149555A publication Critical patent/CN110149555A/zh
Application granted granted Critical
Publication of CN110149555B publication Critical patent/CN110149555B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种视频处理方法和视频接收装置。视频处理方法包括：视频发送装置获取视频发送装置与视频接收装置之间的当前网络状态；视频发送装置在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据，第一编码帧率小于在当前网络状态满足预定条件时视频发送装置编码视频数据所采用的第二编码帧率；视频发送装置通过当前网络传输第一编码帧率的视频数据；视频接收装置接收并解码第一编码帧率的视频数据；视频接收装置通过倍帧算法提高视频数据的视频帧率；和视频接收装置显示通过倍帧算法提高视频帧率后的视频数据。本发明实施方式的视频处理方法在当前网络状态较差时，可以同时保证图像的显示分辨率和视频帧率，显著提升用户体验。

Description

视频处理方法和视频接收装置
技术领域
本发明涉及视频处理技术领域，特别涉及一种视频处理方法和视频接收装置。
背景技术
在播放视频时，每秒播放的图像的帧数越高，人眼在视觉上就会觉得越自然，用户体验越好。然而，在观看线上视频、视频聊天、查看动态图片或其他需要通过网络进行图像传输的时候，若网络传输状况不好，由于数据传输量变小，一般情况下会降低图像的分辨率，导致用户观看的视频出现块效应、模糊，甚至卡顿等现象，十分影响用户的体验。
发明内容
本发明实施方式提供一种视频处理方法和视频接收装置。
本发明实施方式的视频处理方法包括：视频发送装置获取所述视频发送装置与视频接收装置之间的当前网络状态；所述视频发送装置在所述当前网络状态不满足预定条件时采用第一编码帧率编码所述视频数据，所述第一编码帧率小于在所述当前网络状态满足所述预定条件时所述视频发送装置编码所述视频数据所采用的第二编码帧率；所述视频发送装置通过所述当前网络传输所述第一编码帧率的所述视频数据；所述视频接收装置接收并解码所述第一编码帧率的所述视频数据；所述视频接收装置通过倍帧算法提高所述视频数据的视频帧率；和所述视频接收装置显示通过所述倍帧算法提高视频帧率后的所述视频数据。
本发明实施方式的视频处理方法包括：接收并解码第一编码帧率的视频数据，所述第一编码帧率为在视频发送装置与视频接收装置之间的当前网络状态不满足预定条件时所述视频发送装置编码所述视频数据所采用的帧率；通过倍帧算法提高所述视频数据的视频帧率；和显示通过所述倍帧算法提高视频帧率后的所述视频数据。
本发明实施方式的视频接收装置包括主处理器和显示屏；所述主处理器用于：接收并解码第一编码帧率的视频数据，所述第一编码帧率为在视频发送装置与所述视频接收装置之间的当前网络状态不满足预定条件时所述视频发送装置编码所述视频数据所采用的帧率；和通过倍帧算法提高所述视频数据的视频帧率；其中，所述主处理器根据所述当前网络状态、编码分辨率、编码帧率中的至少一种确定所述倍帧算法的插帧数量；所述显示屏用于显示通过所述倍帧算法提高视频帧率后的所述视频数据。
本发明实施方式的视频处理方法和视频接收装置在当前网络状态较差时，降低视频发送装置编码视频数据所采用的编码帧率，再通过视频接收装置采用倍帧算法提高视频帧率后显示，可以同时保证图像的显示分辨率和视频帧率，显著提升用户体验。
本发明实施方式的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点可以从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：
图1是本发明某些实施方式的视频处理方法的流程示意图；
图2是本发明某些实施方式的视频处理系统的模块示意图；
图3及图4是本发明某些实施方式的视频处理方法的流程示意图；
图5是本发明某些实施方式的视频处理方法的工作过程示意图；
图6至图14是本发明某些实施方式的视频处理方法的流程示意图；
图15是本发明某些实施方式的视频处理系统的模块示意图；
图16及图17是本发明某些实施方式的视频处理方法的流程示意图；
图18是本发明某些实施方式的视频接收装置的模块示意图；
图19至图26是本发明某些实施方式的视频处理方法的流程示意图。
具体实施方式
以下结合附图对本发明的实施方式作进一步说明。附图中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。
另外，下面结合附图描述的本发明的实施方式是示例性的，仅用于解释本发明的实施方式，而不能理解为对本发明的限制。
在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
请一并参阅图1和图2，本发明实施方式提供一种视频处理方法。以视频发送装置10作为步骤的执行对象，视频处理方法包括：
S11：获取视频发送装置10与视频接收装置50之间的当前网络状态；
S12：在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据，第一编码帧率小于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码帧率；和
S13：通过当前网络传输第一编码帧率的视频数据，以供视频接收装置50接收并解码后通过倍帧算法提高视频帧率后显示。
请参阅图2，本发明实施方式提供一种视频发送装置10。视频发送装置10包括处理电路11。本发明实施方式的视频处理方法可由本发明实施方式的视频发送装置10实现。例如，处理电路11可用于执行S11、S12和S13中的方法。也即是说，处理电路11可以用于：获取视频发送装置10与视频接收装置50之间的当前网络状态；在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据，第一编码帧率小于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码帧率；和通过当前网络传输第一编码帧率的视频数据，以供视频接收装置50接收并解码后通过倍帧算法提高视频帧率后显示。
请一并参阅图2和图3，本发明实施方式提供一种视频处理方法。以视频接收装置50作为步骤的执行对象，视频处理方法包括：
S51：接收并解码第一编码帧率的视频数据，第一编码帧率为在视频发送装置10与视频接收装置50之间的当前网络状态不满足预定条件时视频发送装置10编码视频数据所采用的帧率；
S52：通过倍帧算法提高视频数据的视频帧率；和
S53：显示通过倍帧算法提高视频帧率后的视频数据。
请参阅图2，本发明实施方式提供一种视频接收装置50。视频接收装置50包括主处理器51和显示屏53。本发明实施方式的视频处理方法可由本发明实施方式的视频接收装置50实现。例如，主处理器51可用于执行S51和S52中的方法，显示屏53可用于执行S53中的方法。也即是说，主处理器51可以用于：接收并解码第一编码帧率的视频数据，第一编码帧率为在视频发送装置10与视频接收装置50之间的当前网络状态不满足预定条件时视频发送装置10编码视频数据所采用的帧率；通过倍帧算法提高视频数据的视频帧率。显示屏53可以用于显示通过倍帧算法提高视频帧率后的视频数据。
请一并参阅图2和图4，本发明实施方式提供一种视频处理方法。以视频处理系统100作为步骤的执行对象，视频处理方法包括：
S71：视频发送装置10获取视频发送装置10与视频接收装置50之间的当前网络状态；
S72：视频发送装置10在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据，第一编码帧率小于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码帧率；
S73：视频发送装置10通过当前网络传输第一编码帧率的视频数据；
S74：视频接收装置50接收并解码第一编码帧率的视频数据；
S75：视频接收装置50通过倍帧算法提高视频数据的视频帧率；和
S76：视频接收装置50显示通过倍帧算法提高视频帧率后的视频数据。
请参阅图2，本发明实施方式提供一种视频处理系统100。视频处理系统100包括视频发送装置10和视频接收装置50。其中，视频发送装置10可为前述实施方式的视频发送装置10，视频接收装置50可为前述实施方式的视频接收装置50，在此不再赘述。本发明实施方式的视频处理方法可由本发明实施方式的视频处理系统100实现。例如，处理电路11可用于执行S71、S72和S73中的方法，主处理器51可用于执行S74和S75中的方法，显示屏53可用于执行S76中的方法。
本发明实施方式的视频处理方法、视频发送装置10、视频接收装置50和视频处理系统100，在当前网络状态较差时，降低视频发送装置10编码视频数据所采用的编码帧率，再通过视频接收装置50采用倍帧算法提高视频帧率后显示，可以同时保证图像的显示分辨率和视频帧率，显著提升用户体验。
具体地，当前网络状态主要指网络速度或网络带宽，当前网络状态不满足预定条件，即当前网络状态较差或者说当前网络速度小于预定速度；当前网络状态满足预定条件，即当前网络状态较好或者说当前网络速度大于预定速度。请结合图5，视频发送装置10在对视频数据进行编码前，先获取视频发送装置10与视频接收装置50之间的当前网络状态。在当前网络状态不满足预定条件时，视频发送装置10采用第一编码帧率编码视频数据，然后通过当前网络传输第一编码帧率的视频数据。视频接收装置50接收并解码第一编码帧率的视频数据，然后通过倍帧算法提高视频数据的视频帧率，再显示通过倍帧算法提高视频帧率后的视频数据。在当前网络状态满足预定条件时，视频发送装置10采用第二编码帧率编码视频数据，然后通过当前网络传输第二编码帧率的视频数据。视频接收装置50接收并解码第二编码帧率的视频数据，然后显示该视频数据。其中，视频发送装置10编码的视频数据可以是视频发送装置10采集的视频数据，或者是视频发送装置10内部已存储的视频数据。在对视频数据进行编码前，视频发送装置10还可以对视频处理进行前处理(例如美颜处理等)。在通过倍帧算法提高视频数据的视频帧率前(或后)，视频接收装置50还可以对视频数据进行后处理(例如图像降噪、画质增强等)。
以手机QQ双人视频通话为例，其中一个手机(下称：主叫手机)作为视频发送装置10，另外一个手机(下称：被叫手机)作为视频接收装置50。采用本发明实施方式的视频处理方法前，当主叫手机与被叫手机之间的当前网络状态不满足预定条件时，主叫手机一般会降低编码分辨率以减少数据传输量。例如，在主叫手机与被叫手机之间的当前网络状态满足预定条件时，编码分辨率为1280*720，编码帧率为20fps；在主叫手机与被叫手机之间的当前网络状态不满足预定条件时，编码分辨率为480*360，编码帧率为20fps。编码分辨率的降低导致视频接收装置显示的视频变得模糊，十分影响用户的体验。
采用本发明实施方式的视频处理方法后，在视频发送装置10(主叫手机)与视频接收装置50(被叫手机)之间的当前网络状态满足预定条件时，编码分辨率为1280*720，编码帧率为20fps；在视频发送装置10(主叫手机)与视频接收装置50(被叫手机)之间的当前网络状态不满足预定条件时，编码分辨率为640*480(相较于480*360稍微降低，当然，编码分辨率也可保持为1280*720)，编码帧率为10fps，此时的视频数据传输量为640*480*10，与未采用本发明实施方式的视频处理方法之前的视频数据传输量480*360*20几乎一致，甚至采用本发明实施方式的视频处理方法后，视频数据传输量变小。视频发送装置10接收并解码视频数据后，通过倍帧算法提高视频帧率，将每秒10帧图像插帧为每秒20帧、每秒30帧或每秒更多帧。如此，能够同时保证图像的显示分辨率和视频帧率，即让用户清晰而流畅的观看视频，用户体验明显提高。
本发明实施方式的视频处理方法的应用场景并不限于为上述手机QQ视频通话，还可以应用在PC QQ视频通话、手机/PC微信视频通话、手机/PC视频客户端等等。
请参阅图6，在某些实施方式中，以视频发送装置10作为步骤的执行对象，在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据的步骤(即S12)包括：
S121：在当前网络状态不满足预定条件时，采用第一编码帧率和第一编码分辨率编码视频数据，第一编码分辨率小于或等于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码分辨率。
在某些实施方式中，处理电路11可用于执行S121中的方法。也即是说，处理电路11可以用于在当前网络状态不满足预定条件时采用第一编码帧率和第一编码分辨率编码视频数据，第一编码分辨率小于或等于在当前网络状态满足预定条件时处理电路11编码视频数据所采用的第二编码分辨率。
请参阅图3，在某些实施方式中，以视频接收装置50作为步骤的执行对象，S51接收并解码的第一编码帧率的视频数据为采用第一编码分辨率编码的，第一编码分辨率小于或等于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码分辨率。
在某些实施方式中，主处理器51接收并解码的第一编码帧率的视频数据为采用第一编码分辨率编码的，第一编码分辨率小于或等于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码分辨率。
请参阅图7，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频发送装置10在当前网络状态不满足预定条件时采用第一编码帧率编码视频数据的步骤(即S72)，包括：
S721：视频发送装置10在当前网络状态不满足预定条件时采用第一编码帧率和第一编码分辨率编码视频数据，第一编码分辨率小于或等于在当前网络状态满足预定条件时视频发送装置10编码视频数据所采用的第二编码分辨率。
在某些实施方式中，处理电路11可用于执行S721中的方法。
具体地，在当前网络状态满足预定条件时，视频发送装置10采用第二编码帧率和第二编码分辨率编码视频数据；在当前网络状态不满足预定条件时，视频发送装置10采用第一编码帧率和第一编码分辨率编码视频数据。例如，在上述示例中，第一编码分辨率为640*480，第一编码帧率为10fps，第二编码分辨率为1280*720，第二编码帧率为20fps。如此，有利于在当前网络状态较差时减小视频数据传输量。可以理解，本发明实施方式中的第一编码分辨率等于或略小于第二编码分辨率，不会对视频的清晰度造成较大影响。
请参阅图8，在某些实施方式中，以视频发送装置10作为步骤的执行对象，获取视频发送装置10与视频接收装置50之间的当前网络状态的步骤(即S11)，包括：
S111：接收视频接收装置50发送的当前网络状态；
视频处理方法还包括：
S14：根据当前网络状态调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，处理电路11可用于执行S111和S14中的方法。也即是说，处理电路11可以用于：接收视频接收装置50发送的当前网络状态；和根据当前网络状态调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图9，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S54：实时检测当前网络状态；和
S55：发送当前网络状态，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S54和S55中的方法。也即是说，主处理器51可以用于：实时检测当前网络状态；和发送当前网络状态，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图10，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法包括：
S77：视频接收装置50实时检测当前网络状态；和
S78：视频接收装置50将当前网络状态发送至视频发送装置10；
视频发送装置10获取视频发送装置10与视频接收装置50之间的当前网络状态的步骤(即S71)，包括：
S711：视频发送装置10接收视频接收装置50发送的当前网络状态；
视频处理方法还包括：
S79：视频发送装置10根据当前网络状态调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S77和S78中的方法，处理电路11可用于执行S711和S79中的方法。
具体地，本发明实施方式中，视频发送装置10获取当前网络状态的方式为接收视频接收装置50发送的当前网络状态。由于视频接收装置50是实时检测当前网络状态的，因此，视频发送装置10可以实时地判断当前网络状态是否满足预定条件，以便根据当前网络状态实时地调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。也即是说，视频发送装置10可以根据当前网络状态调整采集帧率；或者根据当前网络状态调整采集分辨率；或者根据当前网络状态调整编码帧率；或者根据当前网络状态调整编码帧率；或者根据当前网络状态调整采集帧率和采集分辨率；或者根据当前网络状态调整采集帧率、采集分辨率、编码帧率和编码分辨率等等，在此不一一列举。
可以理解，当前网络状态较差时，需要减少视频数据传输量。因此，视频发送装置10可在当前网络状态不满足预定条件时，降低采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种；而在当前网络状态满足预定条件时，保持当前采集帧率、采集分辨率、编码帧率、编码分辨率，或者增大采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图11，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S56：检测视频接收装置50的硬件条件；
通过倍帧算法提高视频数据的视频帧率的步骤(即S52)，包括：
S521：在硬件条件处于第一级别时，采用第一倍帧算法对视频数据进行插帧处理；
S522：在硬件条件处于第二级别时，采用第二倍帧算法对视频数据进行插帧处理；和
S523：在硬件条件处于第三级别时，采用第三倍帧算法对视频数据进行插帧处理，其中，第一倍帧算法、第二倍帧算法、第三倍帧算法的复杂度依次增加。
在某些实施方式中，主处理器51可用于执行S56、S521、S522和S523中的方法。也即是说，主处理器51可以用于：检测视频接收装置50的硬件条件；在硬件条件处于第一级别时，采用第一倍帧算法对视频数据进行插帧处理；在硬件条件处于第二级别时，采用第二倍帧算法对视频数据进行插帧处理；和在硬件条件处于第三级别时，采用第三倍帧算法对视频数据进行插帧处理，其中，所述第一级别、所述第二级别、所述第三级别的级别依次增高，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
请参阅图7，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S80：视频接收装置50检测视频接收装置50的硬件条件；
视频接收装置50通过倍帧算法提高视频数据的视频帧率的步骤(即S75)，包括：
S751：视频接收装置50在硬件条件处于第一级别时，采用第一倍帧算法对视频数据进行插帧处理；
S752：视频接收装置50在硬件条件处于第二级别时，采用第二倍帧算法对视频数据进行插帧处理；和
S753：视频接收装置50在硬件条件处于第三级别时，采用第三倍帧算法对视频数据进行插帧处理，其中，所述第一级别、所述第二级别、所述第三级别的级别依次增高，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
在某些实施方式中，主处理器51可用于执行S80、S751、S752和S753中的方法。
本发明实施方式中，主处理器51可以根据硬件条件选择对应复杂度的倍帧算法对视频数据进行插帧处理，倍帧算法的复杂度与硬件条件成正相关。
具体地，当视频接收装置50为手机时，硬件条件包括机型或中央处理器(CentralProcessing Unit，CPU)及图形处理器(Graphics Processing Unit，GPU)的型号、处理能力等。算法的复杂度包括时间复杂度和空间复杂度，时间复杂度用来度量算法需要耗费的时间，空间复杂度是用来度量算法需要耗费的存储空间。时间复杂度小说明算法需要耗费的时间少，空间复杂度小说明算法需要耗费的存储空间小。
当视频接收装置50的硬件条件较好时，视频接收装置50可以选择复杂度高的倍帧算法对视频数据进行插帧处理，以得到较好的插帧效果；当视频接收装置50的硬件条件较差时，视频接收装置50可以选择复杂度低的倍帧算法对视频数据进行插帧处理，以使得减少插帧处理所需要的时间，使得用户也能获得顺滑的视频体验。
第一倍帧算法例如可以是在原始视频的相邻两帧图像之间插入一全黑或者灰色的视频帧。第二倍帧算法例如可以是在原始视频的相邻两帧图像之间插入一视频帧，该视频帧由相邻两帧图像线性融合而成。第三倍帧算法例如可以是在原始视频的相邻两帧图像之间插入一视频帧，该视频帧为采用深度学习法或先运动估计法(全搜索法、光流法、钻石搜索法等)进行运动补偿形成。
当然，第一倍帧算法、第二倍帧算法、第三倍帧算法的具体算法并不限于上述举例，只需要满足第一倍帧算法、第二倍帧算法、第三倍帧算法的复杂度依次增加即可。
请参阅图12，在某些实施方式中，以视频发送装置10作为步骤的执行对象，视频处理方法还包括：
S15：接收视频接收装置50发送的硬件条件；和
S16：根据硬件条件调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，处理电路11可用于执行S15和S16中的方法。也即是说，处理电路11可以用于：接收视频接收装置50发送的硬件条件；和根据硬件条件调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图13，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S57：发送硬件条件，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S57中的方法。也即是说，主处理器51可以用于发送硬件条件，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图14，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S81：视频接收装置50发送硬件条件至视频发送装置10；
S82：视频发送装置10接收视频接收装置50发送的硬件条件；和
S83：视频发送装置10根据硬件条件调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S81中的方法，处理电路11可用于执行S82和S83中的方法。
具体地，视频接收装置50发送硬件条件至视频发送装置10，视频发送装置10可以根据硬件条件调整采集帧率；或者根据硬件条件调整采集分辨率；或者根据硬件条件调整编码帧率；或者根据硬件条件调整编码帧率；或者根据硬件条件调整采集帧率和采集分辨率；或者根据硬件条件调整采集帧率、采集分辨率、编码帧率和编码分辨率等等，在此不一一列举。
若当前网络状态较差，而视频接收装置50的硬件条件较好时，视频发送装置10可以降低采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种，然后视频接收装置50采用复杂度高、效果更好的倍帧算法，以使得显示的视频具有较好的显示分辨率和视频帧率。
请参阅图15，在某些实施方式中，以视频发送装置10作为步骤的执行对象，视频处理方法还包括：根据后台控制装置70的控制调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种；其中，后台控制装置70用于接收视频接收装置50发送的硬件条件并根据硬件条件控制视频发送装置10。
在某些实施方式中，处理电路11可以用于根据后台控制装置70的控制调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。其中，后台控制装置70用于接收视频接收装置50发送的硬件条件并根据硬件条件控制视频发送装置10。
请参阅图15，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：发送硬件条件，以供后台控制装置70接收后调整视频接收装置50的采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可以用于发送硬件条件，以供后台控制装置70接收后调整视频接收装置50的采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请一并参阅图15和图16，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S84：视频接收装置50发送硬件条件至后台控制装置70；
S85：后台控制装置70接收视频接收装置50发送的硬件条件；
S86：后台控制装置70根据硬件条件控制视频发送装置10；和
S87：视频发送装置10根据后台控制装置70的控制调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图15，在某些实施方式中，视频处理系统100还包括后台控制装置70。主处理器51可用于执行S84中的方法，后台控制装置70可用于执行S85和S86中的方法，处理电路11可用于执行S87中的方法。
具体地，视频接收装置50发送硬件条件至后台控制装置70，后台控制装置70可以根据硬件条件控制视频发送装置10，以调整采集帧率；或者调整采集分辨率；或者调整编码帧率；或者调整编码帧率；或者调整采集帧率和采集分辨率；或者调整采集帧率、采集分辨率、编码帧率和编码分辨率等等，在此不一一列举。
若当前网络状态较差，而视频接收装置50的硬件条件较好时，后台控制装置70可以控制视频发送装置10降低采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种，然后视频接收装置50采用复杂度高、效果更好的倍帧算法，以使得显示的视频具有较好的显示分辨率和视频帧率。
在某些实施方式中，主处理器51根据当前网络状态、编码分辨率、编码帧率中的至少一种确定倍帧算法的插帧数量。
具体地，倍帧算法的插帧数量与当前网络状态、编码分辨率、编码帧率存在一定的对应关系。该对应关系可以如下表所示：
编码分辨率 编码帧率(fps) 当前网络状态 插帧数量
192*144 fps≤8 网络带宽≤80kbps 每2帧插帧到4帧
320*240 8＜fps≤10 80kbps＜网络带宽≤100kbps 每2帧插帧到3帧
320*240 10＜fps≤12 100kbps＜网络带宽≤150kbps 每2帧插帧到3帧
…… …… …… ……
也即是说，编码分辨率越低，插帧数量越高；编码帧率越小，插帧数量越高；当前网络状态越差，插帧数量越高。
请一并参阅图17和图18，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S58：实时检测视频接收装置50的图形处理器55的第一占用率；
通过倍帧算法提高视频数据的视频帧率的步骤(即S52)，包括：
S524：在第一占用率小于预定占用率时，通过图形处理器55采用第三倍帧算法对视频数据进行插帧处理。
请参阅图18，在某些实施方式中，视频接收装置50还包括图形处理器55。主处理器51可用于执行S58中的方法，图形处理器55可用于执行S524中的方法。也即是说，主处理器51可以用于实时检测视频接收装置50的图形处理器55的第一占用率。图形处理器55可以用于在第一占用率小于预定占用率时，采用第三倍帧算法对视频数据进行插帧处理。
请一并参阅图18和图19，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S88：视频接收装置50实时检测视频接收装置50的图形处理器55的第一占用率；
视频接收装置50通过倍帧算法提高视频数据的视频帧率的步骤(即S75)，包括：
S754：在第一占用率小于预定占用率时，图形处理器55采用第三倍帧算法对视频数据进行插帧处理。
在某些实施方式中，主处理器51可用于执行S88中的方法，图形处理器55可用于执行S754中的方法。
具体地，视频接收装置50包括图形处理器55和中央处理器57(主处理器51可以为图形处理器55或中央处理器57，或者主处理器51为不同于图形处理器55和中央处理器57的元件)。由于图形处理器55为并行运行，处理速度比中央处理器57更快，因此，视频接收装置50可以优先选择图形处理器55对视频数据进行插帧处理。
本发明实施方式中，视频接收装置50在图形处理器55的第一占用率较小，即图形处理器55处于较为空闲的状态时，选择图形处理器55采用复杂度较高的第三倍帧算法对视频数据进行插帧处理。由于视频接收装置50是实时检测图形处理器55的第一占用率的，因此，视频接收装置50可以实时根据图形处理器55的第一占用率来选择图形处理器55或中央处理器57，以及合适的倍帧算法对视频数据进行插帧处理。例如，在开始的时候，用户使用了占用图形处理器55资源较多的软件，则视频接收装置50不选择图形处理器55对视频数据进行插帧处理；过一段时间后，用户关闭了占用图形处理器55资源较多的软件，使得图形处理器55的第一占用率小于预定占用率，则视频接收装置50切换为采用图形处理器55对视频数据进行插帧处理。
请参阅图20，在某些实施方式中，以视频发送装置10作为步骤的执行对象，视频处理方法还包括：
S17：接收视频接收装置50发送的图形处理器55的第一占用率；和
S18：在第一占用率小于预定占用率时，根据第一占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，处理电路11可用于执行S17和S18中的方法。也即是说，处理电路11可以用于：接收视频接收装置50在图形处理器55的第一占用率小于预定占用率时发送的第一占用率；和根据第一占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图17，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S59：在第一占用率小于预定占用率时发送第一占用率，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S59中的方法。也即是说，主处理器51可以用于在第一占用率小于预定占用率时发送第一占用率，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图21，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S89：视频接收装置50在第一占用率小于预定占用率时发送第一占用率至视频发送装置10；
S90：视频发送装置10接收视频接收装置50发送的第一占用率；和
S91：视频发送装置10根据第一占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S89中的方法，处理电路11可用于执行S90和S91中的方法。
具体地，本发明实施方式中，由于视频接收装置50是实时检测图形处理器55的第一占用率的，因此，视频发送装置10可以实时根据图形处理器55的第一占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。也即是说，视频发送装置10可以根据图形处理器55的第一占用率调整采集帧率；或者根据图形处理器55的第一占用率调整采集分辨率；或者根据图形处理器55的第一占用率调整编码帧率；或者根据图形处理器55的第一占用率调整编码帧率；或者根据图形处理器55的第一占用率调整采集帧率和采集分辨率；或者根据图形处理器55的第一占用率调整采集帧率、采集分辨率、编码帧率和编码分辨率等等，在此不一一列举。
若当前网络状态较差，而图形处理器55的第一占用率较小时，视频发送装置10可以降低采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种，然后视频接收装置50采用图形处理器55及复杂度高、效果更好的倍帧算法，以使得显示的视频具有较好的显示分辨率和视频帧率。
请参阅图22，在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：
S60：在第一占用率大于或等于预定占用率时，检测视频接收装置50的中央处理器57的第二占用率；
通过倍帧算法提高视频数据的视频帧率的步骤(S52)，包括：
S525：在第二占用率小于预设占用率时，通过中央处理器57采用第二倍帧算法对视频数据进行插帧处理；和
S526：在第二占用率大于或等于预设占用率时，通过中央处理器57采用第一倍帧算法对视频数据进行插帧处理，其中，第一倍帧算法、第二倍帧算法、第三倍帧算法的复杂度依次增加。
请参阅图18，在某些实施方式中，视频接收装置50还包括中央处理器57。主处理器51可用于执行S60中的方法，中央处理器57可用于执行S525和S526中的方法。也即是说，主处理器51可以用于在第一占用率大于或等于预定占用率时，检测视频接收装置50的中央处理器57的第二占用率。中央处理器57可以用于：在第二占用率小于预设占用率时，采用第二倍帧算法对视频数据进行插帧处理；和在第二占用率大于或等于预设占用率时，采用第一倍帧算法对视频数据进行插帧处理，第一倍帧算法、第二倍帧算法、第三倍帧算法的复杂度依次增加。
请参阅图19，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S92：视频接收装置50在第一占用率大于或等于预定占用率时，检测视频接收装置50的中央处理器57的第二占用率；
视频接收装置50通过倍帧算法提高视频数据的视频帧率的步骤(即S75)，包括：
S755：在第二占用率小于预设占用率时，中央处理器57采用第二倍帧算法对视频数据进行插帧处理；和
S756：在第二占用率大于或等于预设占用率时，中央处理器57采用第一倍帧算法对视频数据进行插帧处理，其中，第一倍帧算法、第二倍帧算法、第三倍帧算法的复杂度依次增加。
在某些实施方式中，主处理器51可用于执行S92中的方法，中央处理器57可用于执行S755和S756中的方法。
本发明实施方式中，视频接收装置50在图形处理器55的第一占用率较大，即图形处理器55处于较为繁忙的状态时，检测中央处理器57的第二占用率。当中央处理器57的第二占用率较小时，视频接收装置50选择中央处理器57采用复杂度中等的第二倍帧算法对视频数据进行插帧处理；当中央处理器57的第二占用率也较大时，视频接收装置50选择中央处理器57采用复杂度低的第一倍帧算法对视频数据进行插帧处理。由于视频接收装置50是实时检测图形处理器55的第一占用率和中央处理器57的第二占用率的，因此，视频接收装置50可以实时根据图形处理器55的第一占用率和中央处理器57的第二占用率来选择图形处理器55或中央处理器57，以及合适的倍帧算法对视频数据进行插帧处理。
例如，在开始的时候，用户使用了占用图形处理器55资源较多的软件而中央处理器57较为空闲时，则视频接收装置50选择中央处理器57采用第二倍帧算法对视频数据进行插帧处理；过一段时间后，中央处理器57也变得繁忙时，视频接收装置50选择中央处理器57采用第一倍帧算法对视频数据进行插帧处理；再过一段时间，用户关闭了占用图形处理器55资源较多的软件，使得图形处理器55的第一占用率小于预定占用率，则视频接收装置50切换为选择图形处理器55采用第三倍帧算法对视频数据进行插帧处理。
请参阅图23，在某些实施方式中，以视频发送装置10作为步骤的执行对象，视频处理方法还包括：
S19：接收视频接收装置50在第一占用率大于或等于预定占用率时，发送的中央处理器57的第二占用率；和
S20：根据第二占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，处理电路11可用于执行S19和S20中的方法。也即是说，处理电路11可以用于：接收视频接收装置50在第一占用率大于或等于预定占用率时，发送的中央处理器57的第二占用率；和根据第二占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，以视频接收装置50作为步骤的执行对象，视频处理方法还包括：在第一占用率大于或等于预定占用率时发送第二占用率，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可以用于在第一占用率大于或等于预定占用率时发送第二占用率，以供视频发送装置10接收后调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
请参阅图24，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S93：视频接收装置50在第一占用率大于或等于预定占用率时发送第二占用率至视频发送装置10；
S94：视频发送装置10接收视频接收装置50在第一占用率大于或等于预定占用率时，发送的中央主处理器513的第二占用率；和
S95：视频发送装置10根据第二占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
在某些实施方式中，主处理器51可用于执行S93中的方法，处理电路11可用于执行S94和S95中的方法。
具体地，本发明实施方式中，由于视频接收装置50是实时检测中央处理器57的第二占用率的，因此，视频发送装置10可以实时根据中央处理器57的第二占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。也即是说，视频发送装置10可以根据中央处理器57的第二占用率调整采集帧率；或者根据中央处理器57的第二占用率调整采集分辨率；或者根据中央处理器57的第二占用率调整编码帧率；或者根据中央处理器57的第二占用率调整编码帧率；或者根据中央处理器57的第二占用率调整采集帧率和采集分辨率；或者根据中央处理器57的第二占用率调整采集帧率、采集分辨率、编码帧率和编码分辨率等等，在此不一一列举。
若当前网络状态较差，而中央处理器57的第二占用率较小时，视频发送装置10可以稍微降低采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种，然后视频接收装置50采用中央处理器57及复杂度中等、效果中等的倍帧算法，以使得显示的视频具有合适的显示分辨率和视频帧率。
在某些实施方式中，以视频接收装置50作为步骤的执行对象，通过倍帧算法提高视频数据的视频帧率的步骤(即S52)，包括：根据用户选择的视频接收装置50的硬件和/或倍帧算法对视频数据进行插帧处理。
在某些实施方式中，主处理器51可以用于根据用户选择的视频接收装置50的硬件和/或倍帧算法对视频数据进行插帧处理。
在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频接收装置50通过倍帧算法提高视频数据的视频帧率的步骤(即S75)，包括：视频接收装置50根据用户选择的视频接收装置50的硬件和/或倍帧算法对视频数据进行插帧处理。
可以理解，有的用户希望将视频帧率为30fps的视频插帧为60fps观看；有的用户希望将视频帧率为30fps的视频插帧为45fps观看；有的用户希望采用中央处理器57进行插帧处理；有的用户希望采用图形处理器55进行插帧处理。本发明实施方式中，视频接收装置50可以根据用户的需求选择对应的硬件和/或倍帧算法对视频数据进行插帧处理，以提升用户体验。
当然，视频发送装置10也可以根据用户选择的硬件和/或倍帧算法对视频数据进行插帧处理，并在视频发送装置10上显示插帧处理后的视频数据。
请参阅图25，在某些实施方式中，以视频发送装置10作为步骤的执行对象，视频处理方法还包括：
S21：在当前网络状态不满足预定条件时，降低视频数据的采集帧率；
S22：通过倍帧算法提高降低采集帧率后的视频数据的视频帧率；和
S23：显示通过倍帧算法提高视频帧率后的视频数据。
请参阅图2，在某些实施方式中，视频发送装置10还包括显示器13。处理电路11可用于执行S21和S22中的方法，显示器13可用于执行S23中的方法。也即是说，处理电路11可以用于：在当前网络状态不满足预定条件时，降低视频数据的采集帧率；和通过倍帧算法提高降低采集帧率后的视频数据的视频帧率。显示器13可以用于显示通过倍帧算法提高视频帧率后的视频数据。
请参阅图26，在某些实施方式中，以视频处理系统100作为步骤的执行对象，视频处理方法还包括：
S96：视频发送装置10在当前网络状态不满足预定条件时，降低视频数据的采集帧率；
S97：视频发送装置10通过倍帧算法提高降低采集帧率后的视频数据的视频帧率；和
S98：视频发送装置10显示通过倍帧算法提高视频帧率后的视频数据。
在某些实施方式中，处理电路11可用于执行S96和S97中的方法，显示器13可用于执行S98中的方法。
本发明实施方式中，视频发送装置10也可以采用倍帧算法提高视频数据的视频帧率，以在视频发送装置10上显示插帧处理后的视频数据。
需要指出的是，除了省略了视频数据的编码和解码过程，视频发送装置10采用倍帧算法对视频数据进行插帧处理的过程与视频接收装置50采用倍帧算法对视频数据进行插帧处理的过程类似，在此不再详细说明。
本发明实施方式的视频处理方法不仅可以应用于客户端，还可以应用于服务器端、云端等。例如，当视频处理方法应用于服务器端时，用户上传视频数据，服务器端作为视频接收装置50对视频数据进行插帧处理。本发明实施方式的视频处理方法可以适应具有各种性能不同的硬件的情况，并结合当前网络状态、硬件的占用率等，动态地切换各种倍帧算法，使得用户具有最佳的视觉体验。
当然，本发明实施方式的视频处理方法也可以在当前网络状态好、硬件条件好的情况下，用于提高视频帧率，以为用户提高更好的视觉体验。
在本说明书的描述中，参考术语“某些实施方式”、“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个所述特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个，除非另有明确具体的限定。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。

Claims (15)

1.一种视频处理方法，其特征在于，所述视频处理方法包括：
视频发送装置获取所述视频发送装置与视频接收装置之间的当前网络状态；
所述视频发送装置在所述当前网络状态不满足预定条件时采用第一编码帧率编码所述视频数据，所述第一编码帧率小于在所述当前网络状态满足所述预定条件时所述视频发送装置编码所述视频数据所采用的第二编码帧率；
所述视频发送装置通过所述当前网络传输所述第一编码帧率的所述视频数据；
所述视频接收装置接收并解码所述第一编码帧率的所述视频数据；
所述视频接收装置通过倍帧算法提高所述视频数据的视频帧率；和
所述视频接收装置显示通过所述倍帧算法提高视频帧率后的所述视频数据。
2.根据权利要求1所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置检测所述视频接收装置的硬件条件；
所述视频接收装置通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
所述视频接收装置在所述硬件条件处于第一级别时，采用第一倍帧算法对所述视频数据进行插帧处理；
所述视频接收装置在所述硬件条件处于第二级别时，采用第二倍帧算法对所述视频数据进行插帧处理；和
所述视频接收装置在所述硬件条件处于第三级别时，采用第三倍帧算法对所述视频数据进行插帧处理，其中，所述第一级别、所述第二级别、所述第三级别的级别依次增高，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
3.根据权利要求2所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置发送所述硬件条件至所述视频发送装置；
所述视频发送装置接收所述视频接收装置发送的所述硬件条件；和
所述视频发送装置根据所述硬件条件调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种；
或者，所述视频处理方法还包括：
所述视频接收装置发送所述硬件条件至后台控制装置；
所述后台控制装置接收所述视频接收装置发送的所述硬件条件；
所述后台控制装置根据所述硬件条件控制所述视频发送装置；和
所述视频发送装置根据所述后台控制装置的控制调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
4.根据权利要求1所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置实时检测所述视频接收装置的图形处理器的第一占用率；
所述视频接收装置通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
在所述第一占用率小于预定占用率时，所述图形处理器采用第三倍帧算法对所述视频数据进行插帧处理。
5.根据权利要求4所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置在所述第一占用率小于所述预定占用率时发送所述第一占用率至所述视频发送装置；
所述视频发送装置接收所述视频接收装置发送的所述第一占用率；和
所述视频发送装置根据所述第一占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
6.根据权利要求4所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置在所述第一占用率大于或等于所述预定占用率时，检测所述视频接收装置的中央处理器的第二占用率；
所述视频接收装置通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
在所述第二占用率小于预设占用率时，所述中央处理器采用第二倍帧算法对所述视频数据进行插帧处理；和
在所述第二占用率大于或等于所述预设占用率时，所述中央处理器采用第一倍帧算法对所述视频数据进行插帧处理，其中，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
7.根据权利要求6所述的视频处理方法，其特征在于，所述视频处理方法还包括：
所述视频接收装置在所述第一占用率大于或等于所述预定占用率时发送所述第二占用率至所述视频发送装置；
所述视频发送装置接收所述视频接收装置在所述第一占用率大于或等于所述预定占用率时，发送的中央处理器的第二占用率；和
所述视频发送装置根据所述第二占用率调整采集帧率、采集分辨率、编码帧率、编码分辨率中的至少一种。
8.一种视频处理方法，其特征在于，所述视频处理方法包括：
接收并解码第一编码帧率的视频数据，所述第一编码帧率为在视频发送装置与视频接收装置之间的当前网络状态不满足预定条件时所述视频发送装置编码所述视频数据所采用的帧率；
通过倍帧算法提高所述视频数据的视频帧率；和
显示通过所述倍帧算法提高视频帧率后的所述视频数据。
9.根据权利要求8所述的视频处理方法，其特征在于，所述视频处理方法还包括：
检测所述视频接收装置的硬件条件；
所述通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
在所述硬件条件处于第一级别时，采用第一倍帧算法对所述视频数据进行插帧处理；
在所述硬件条件处于第二级别时，采用第二倍帧算法对所述视频数据进行插帧处理；和
在所述硬件条件处于第三级别时，采用第三倍帧算法对所述视频数据进行插帧处理，其中，所述第一级别、所述第二级别、所述第三级别的级别依次增高，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
10.根据权利要求8所述的视频处理方法，其特征在于，所述视频处理方法根据所述当前网络状态、编码分辨率、编码帧率中的至少一种确定所述倍帧算法的插帧数量。
11.根据权利要求8所述的视频处理方法，其特征在于，所述视频处理方法还包括：
实时检测所述视频接收装置的图形处理器的第一占用率；
所述通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
在所述第一占用率小于预定占用率时，通过所述图形处理器采用第三倍帧算法对所述视频数据进行插帧处理。
12.根据权利要求11所述的视频处理方法，其特征在于，所述视频处理方法还包括：
在所述第一占用率大于或等于所述预定占用率时，检测所述视频接收装置的中央处理器的第二占用率；
所述通过倍帧算法提高所述视频数据的视频帧率的步骤，包括：
在所述第二占用率小于预设占用率时，通过所述中央处理器采用第二倍帧算法对所述视频数据进行插帧处理；和
在所述第二占用率大于或等于所述预设占用率时，通过所述中央处理器采用第一倍帧算法对所述视频数据进行插帧处理，其中，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
13.一种视频接收装置，其特征在于，所述视频接收装置包括主处理器和显示屏；
所述主处理器用于：
接收并解码第一编码帧率的视频数据，所述第一编码帧率为在视频发送装置与所述视频接收装置之间的当前网络状态不满足预定条件时所述视频发送装置编码所述视频数据所采用的帧率；和
通过倍帧算法提高所述视频数据的视频帧率；
其中，所述主处理器根据所述当前网络状态、编码分辨率、编码帧率中的至少一种确定所述倍帧算法的插帧数量；
所述显示屏用于显示通过所述倍帧算法提高视频帧率后的所述视频数据。
14.根据权利要求13所述的视频接收装置，其特征在于，所述主处理器还用于：
检测所述视频接收装置的硬件条件；
在所述硬件条件处于第一级别时，采用第一倍帧算法对所述视频数据进行插帧处理；
在所述硬件条件处于第二级别时，采用第二倍帧算法对所述视频数据进行插帧处理；和
在所述硬件条件处于第三级别时，采用第三倍帧算法对所述视频数据进行插帧处理，其中，所述第一级别、所述第二级别、所述第三级别的级别依次增高，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
15.根据权利要求13所述的视频接收装置，其特征在于，所述视频接收装置还包括图形处理器和中央处理器；
所述主处理器用于实时检测所述图形处理器的第一占用率；
所述图形处理器用于在所述第一占用率小于预定占用率时，采用第三倍帧算法对所述视频数据进行插帧处理；
所述主处理器还用于在所述第一占用率大于或等于所述预定占用率时，检测所述中央处理器的第二占用率；
所述中央处理器用于：
在所述第二占用率小于预设占用率时，采用第二倍帧算法对所述视频数据进行插帧处理；和
在所述第二占用率大于或等于所述预设占用率时，采用第一倍帧算法对所述视频数据进行插帧处理，所述第一倍帧算法、所述第二倍帧算法、所述第三倍帧算法的复杂度依次增加。
CN201810921661.6A 2018-08-14 2018-08-14 视频处理方法和视频接收装置 Active CN110149555B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810921661.6A CN110149555B (zh) 2018-08-14 2018-08-14 视频处理方法和视频接收装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810921661.6A CN110149555B (zh) 2018-08-14 2018-08-14 视频处理方法和视频接收装置

Publications (2)

Publication Number Publication Date
CN110149555A true CN110149555A (zh) 2019-08-20
CN110149555B CN110149555B (zh) 2022-07-22

Family

ID=67589279

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810921661.6A Active CN110149555B (zh) 2018-08-14 2018-08-14 视频处理方法和视频接收装置

Country Status (1)

Country Link
CN (1) CN110149555B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110881136A (zh) * 2019-11-14 2020-03-13 腾讯科技（深圳）有限公司 视频帧率控制方法、装置、计算机设备及存储介质
CN112135081A (zh) * 2020-09-11 2020-12-25 Oppo广东移动通信有限公司 模式控制方法、装置、插帧芯片以及电子设备
CN112633236A (zh) * 2020-12-31 2021-04-09 深圳追一科技有限公司 图像处理方法、装置、电子设备及存储介质
CN112788235A (zh) * 2020-12-31 2021-05-11 深圳追一科技有限公司 图像处理方法、装置、终端设备及计算机可读取存储介质
CN112929704A (zh) * 2021-01-26 2021-06-08 游密科技(深圳)有限公司 数据传输方法、装置、电子设备以及存储介质
CN113422983A (zh) * 2021-08-24 2021-09-21 腾讯科技（深圳）有限公司 数据处理方法、计算机设备和存储介质
CN113473228A (zh) * 2021-06-11 2021-10-01 深圳锐取信息技术股份有限公司 8k录播视频的传输控制方法、装置、存储介质及设备
CN113570992A (zh) * 2020-04-29 2021-10-29 三星电子株式会社 显示装置及其控制方法
CN115278308A (zh) * 2022-07-28 2022-11-01 北京字跳网络技术有限公司 媒体流处理方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6370198B1 (en) * 1997-04-07 2002-04-09 Kinya Washino Wide-band multi-format audio/video production system with frame-rate conversion
US20040081437A1 (en) * 2000-11-07 2004-04-29 Ryoji Asada Video signal producing system and video signal recording/ reproducing device in that system
US20080123743A1 (en) * 2006-11-28 2008-05-29 Kabushiki Kaisha Toshiba Interpolated frame generating method and interpolated frame generating apparatus
US20110078722A1 (en) * 2009-09-25 2011-03-31 Nagravision Sa Method for displaying enhanced video content
CN105828106A (zh) * 2016-04-15 2016-08-03 山东大学苏州研究院 一种基于运动信息的非整数倍帧率提升方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6370198B1 (en) * 1997-04-07 2002-04-09 Kinya Washino Wide-band multi-format audio/video production system with frame-rate conversion
US20040081437A1 (en) * 2000-11-07 2004-04-29 Ryoji Asada Video signal producing system and video signal recording/ reproducing device in that system
US20080123743A1 (en) * 2006-11-28 2008-05-29 Kabushiki Kaisha Toshiba Interpolated frame generating method and interpolated frame generating apparatus
US20110078722A1 (en) * 2009-09-25 2011-03-31 Nagravision Sa Method for displaying enhanced video content
CN105828106A (zh) * 2016-04-15 2016-08-03 山东大学苏州研究院 一种基于运动信息的非整数倍帧率提升方法

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110881136A (zh) * 2019-11-14 2020-03-13 腾讯科技（深圳）有限公司 视频帧率控制方法、装置、计算机设备及存储介质
CN110881136B (zh) * 2019-11-14 2021-11-02 腾讯科技（深圳）有限公司 视频帧率控制方法、装置、计算机设备及存储介质
CN113570992A (zh) * 2020-04-29 2021-10-29 三星电子株式会社 显示装置及其控制方法
CN112135081A (zh) * 2020-09-11 2020-12-25 Oppo广东移动通信有限公司 模式控制方法、装置、插帧芯片以及电子设备
CN112788235B (zh) * 2020-12-31 2022-01-28 深圳追一科技有限公司 图像处理方法、装置、终端设备及计算机可读取存储介质
CN112633236A (zh) * 2020-12-31 2021-04-09 深圳追一科技有限公司 图像处理方法、装置、电子设备及存储介质
CN112788235A (zh) * 2020-12-31 2021-05-11 深圳追一科技有限公司 图像处理方法、装置、终端设备及计算机可读取存储介质
CN112929704A (zh) * 2021-01-26 2021-06-08 游密科技(深圳)有限公司 数据传输方法、装置、电子设备以及存储介质
CN112929704B (zh) * 2021-01-26 2023-06-30 游密科技(深圳)有限公司 数据传输方法、装置、电子设备以及存储介质
CN113473228A (zh) * 2021-06-11 2021-10-01 深圳锐取信息技术股份有限公司 8k录播视频的传输控制方法、装置、存储介质及设备
CN113473228B (zh) * 2021-06-11 2022-12-27 深圳锐取信息技术股份有限公司 8k录播视频的传输控制方法、装置、存储介质及设备
CN113422983B (zh) * 2021-08-24 2021-11-23 腾讯科技（深圳）有限公司 数据处理方法、计算机设备和存储介质
CN113422983A (zh) * 2021-08-24 2021-09-21 腾讯科技（深圳）有限公司 数据处理方法、计算机设备和存储介质
CN115278308A (zh) * 2022-07-28 2022-11-01 北京字跳网络技术有限公司 媒体流处理方法、装置、设备及存储介质
CN115278308B (zh) * 2022-07-28 2023-12-01 北京字跳网络技术有限公司 媒体流处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN110149555B (zh) 2022-07-22

Similar Documents

Publication Publication Date Title
CN110149555A (zh) 视频处理方法和视频接收装置
CN107211193B (zh) 感知体验质量估计驱动的智能适应视频流传输方法和系统
CN105072345B (zh) 视频编码方法和装置
US20140292751A1 (en) Rate control bit allocation for video streaming based on an attention area of a gamer
CN109417624A (zh) 用于提供和显示内容的装置和方法
US20140198838A1 (en) Techniques for managing video streaming
US8988501B2 (en) Moving image distribution server, moving image playback apparatus, control method, and recording medium
JP2021521744A (ja) マルチセグメントリサンプリングを使用した関心領域高速符号化
Yuan et al. Spatial and temporal consistency-aware dynamic adaptive streaming for 360-degree videos
Wang et al. Research on subjective stereoscopic image quality assessment
CN110049324A (zh) 视频编码方法、系统、设备及计算机可读存储介质
CN110493600B (zh) 图像编码方法、装置、计算机设备及存储介质
US11627369B2 (en) Video enhancement control method, device, electronic device, and storage medium
CN103747077A (zh) 一种传输机制调整方法和服务端、客户端
CN111182300B (zh) 编码参数的确定方法、装置、设备及存储介质
CN112188282B (zh) 图像数据的显示方法及装置，图像数据显示系统
CN114554211A (zh) 内容自适应视频编码方法、装置、设备和存储介质
US11212537B2 (en) Side information for video data transmission
CN108200470A (zh) 一种视频码率调整方法及设备
CN113301355A (zh) 视频传输、直播与播放方法、设备及存储介质
CN113286146B (zh) 媒体数据处理方法、装置、设备以及存储介质
CN110740316A (zh) 数据编码方法及装置
CN113747160A (zh) 视频编码配置方法、装置、设备及计算机可读存储介质
CN109120979B (zh) 视频增强控制方法、装置以及电子设备
CN115883877A (zh) 一种超高清视频流的传输方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant