CN111586433A - 码率调整方法、装置、设备及存储介质 - Google Patents

码率调整方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111586433A
CN111586433A CN202010508118.0A CN202010508118A CN111586433A CN 111586433 A CN111586433 A CN 111586433A CN 202010508118 A CN202010508118 A CN 202010508118A CN 111586433 A CN111586433 A CN 111586433A
Authority
CN
China
Prior art keywords
code rate
preset
image quality
video data
quality parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010508118.0A
Other languages
English (en)
Other versions
CN111586433B (zh
Inventor
何思远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Fanxing Huyu IT Co Ltd
Original Assignee
Guangzhou Fanxing Huyu IT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Fanxing Huyu IT Co Ltd filed Critical Guangzhou Fanxing Huyu IT Co Ltd
Priority to CN202010508118.0A priority Critical patent/CN111586433B/zh
Publication of CN111586433A publication Critical patent/CN111586433A/zh
Application granted granted Critical
Publication of CN111586433B publication Critical patent/CN111586433B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种码率调整方法、装置、设备及存储介质,属于视频处理领域。该方法包括:基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将第一直播视频数据及第二直播视频数据发送给第二进程;基于第二进程,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数,将第一图像质量参数发送给第一进程,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。该方法基于第一进程进行直播,基于第二进程获取图像质量参数,进行直播和获取图像质量参数是异步进行的,获取图像质量参数的过程不会影响直播,提高了直播流畅性,使直播过程更加稳定。

Description

码率调整方法、装置、设备及存储介质
技术领域
本申请实施例涉及视频处理领域,特别涉及一种码率调整方法、装置、设备及存储介质。
背景技术
随着互联网的普及和多媒体技术的发展,越来越多的用户在网络上进行直播,人们对直播的图像质量要求也日益提升。
相关技术中,在进行直播的过程中,会对直播视频数据进行编码,还可以根据编码后的直播视频数据的图像质量,对直播视频数据的码率进行调整,以提升直播视频数据的图像质量。这种方式需要同时实现直播功能及获取图像质量的功能,容易影响直播流畅性。
发明内容
本申请实施例提供了一种码率调整方法、装置、设备及存储介质,提高直播流畅性,所述技术方案如下:
一方面,提供了一种码率调整方法,所述方法包括:
基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将所述第一直播视频数据及所述第二直播视频数据发送给第二进程;
基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,将所述第一图像质量参数发送给所述第一进程,所述第一图像质量参数用于表示所述第二直播视频数据的图像质量;
基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
在一种可能实现方式中,所述基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,得到第一图像质量参数,包括:
基于所述第二进程,将所述第一直播视频数据中每个视频帧与所述第二直播视频数据中相同的视频帧进行对比处理,得到所述每个视频帧对应的第一图像质量参数。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第一预设参数时,基于所述第一进程降低所述第一码率,得到降低后的第二码率;
当所述第一图像质量参数小于第二预设参数时,基于所述第一进程提高所述第一码率,得到提高后的第二码率,所述第一预设参数大于所述第二预设参数。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第三预设参数,且所述第一码率小于第一预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率大于第二预设码率,所述第二预设码率小于所述第一预设码率;
当所述第一图像质量参数小于第四预设参数,且所述第一码率小于所述第一预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第一预设码率,所述第三预设参数大于所述第四预设参数;
当所述第一图像质量参数大于第五预设参数,且所述第一码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于所述第一预设码率;
当所述第一图像质量参数小于第六预设参数,且所述第一码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第三预设码率,所述第五预设参数大于所述第六预设参数。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程,根据所述第一图像质量参数及所述第一直播视频数据的丢帧率,对所述第一码率进行调整,得到所述调整后的第二码率。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数及所述第一直播视频数据的丢帧率,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第七预设参数,且所述丢帧率不小于预设丢帧率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于第二预设码率。
在另一种可能实现方式中,所述方法还包括:
当所述第一图像质量参数小于所述第七预设参数,且所述丢帧率不小于所述预设丢帧率时,基于所述第一进程输出告警信息,所述告警信息用于指示当前直播卡顿。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程,根据所述第一图像质量参数,按照预设调整码率,对所述第一码率进行调整,得到所述第二码率。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,按照预设调整码率,对所述第一码率进行调整,得到所述第二码率之后,所述方法还包括:
基于所述第一进程,根据所述第二码率对所述第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,将所述第三直播视频数据及所述第四直播视频数据发送给所述第二进程;
基于所述第二进程,根据所述第三直播视频数据及所述第四直播视频数据,获取第二图像质量参数,将所述第二图像质量参数发送给所述第一进程,所述第二图像质量参数用于表示所述第四直播视频数据的图像质量。
在另一种可能实现方式中,所述将所述第二图像质量参数发送给所述第一进程之后,所述方法还包括:
当所述第二图像质量参数大于第三预设参数,且所述第二码率小于第一预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
当所述第二图像质量参数小于第四预设参数,且所述第二码率小于所述第一预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率;
当所述第二图像质量参数大于第五预设参数,且所述第二码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
当所述第二图像质量参数小于第六预设参数,且所述第二码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率。
在另一种可能实现方式中,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程调用码率调整模型,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
另一方面,提供了一种码率调整装置,所述装置包括:
视频数据获取模块,用于基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将所述第一直播视频数据及所述第二直播视频数据发送给第二进程;
质量参数获取模块,用于基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,将所述第一图像质量参数发送给所述第一进程,所述第一图像质量参数用于表示所述第二直播视频数据的图像质量;
码率调整模块,用于基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
在一种可能实现方式中,所述质量参数获取模块,用于基于所述第二进程,将所述第一直播视频数据中每个视频帧与所述第二直播视频数据中相同的视频帧进行对比处理,得到所述每个视频帧对应的第一图像质量参数。
在另一种可能实现方式中,所述码率调整模块,包括:
第一调整单元,用于当所述第一图像质量参数大于第一预设参数时,基于所述第一进程降低所述第一码率;
第二调整单元,用于当所述第一图像质量参数小于第二预设参数时,基于所述第一进程提高所述第一码率,所述第一预设参数大于所述第二预设参数。
在另一种可能实现方式中,所述码率调整模块,还包括:
第三调整单元,用于当所述第一图像质量参数大于第三预设参数,且所述第一码率小于第一预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率大于第二预设码率,所述第二预设码率小于所述第一预设码率;
第四调整单元,用于当所述第一图像质量参数小于第四预设参数,且所述第一码率小于所述第一预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第一预设码率,所述第三预设参数大于所述第四预设参数;
第五调整单元,用于当所述第一图像质量参数大于第五预设参数,且所述第一码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于所述第一预设码率;
第六调整单元,用于当所述第一图像质量参数小于第六预设参数,且所述第一码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第三预设码率,所述第五预设参数大于所述第六预设参数。
在另一种可能实现方式中,所述码率调整模块,用于基于所述第一进程,根据所述第一图像质量参数及所述第一直播视频数据的丢帧率,对所述第一码率进行调整,得到所述调整后的第二码率。
在另一种可能实现方式中,所述码率调整模块,用于当所述第一图像质量参数大于第七预设参数,且所述丢帧率不小于预设丢帧率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于第二预设码率。
在另一种可能实现方式中,所述装置还包括:
告警模块,用于当所述第一图像质量参数小于所述第七预设参数,且所述丢帧率不小于所述预设丢帧率时,基于所述第一进程输出告警信息,所述告警信息用于指示当前直播卡顿。
在另一种可能实现方式中,所述码率调整模块,用于根据所述第一图像质量参数,按照预设调整码率,对所述第一码率进行调整,得到所述第二码率。
在另一种可能实现方式中,所述装置包括:
所述视频数据获取模块,还用于基于所述第一进程,根据所述第二码率对所述第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,将所述第三直播视频数据及所述第四直播视频数据发送给所述第二进程;
所述质量参数获取模块,还用于基于所述第二进程,根据所述第三直播视频数据及所述第四直播视频数据,获取第二图像质量参数,将所述第二图像质量参数发送给所述第一进程,所述第二图像质量参数用于表示所述第四直播视频数据的图像质量。
在另一种可能实现方式中,所述码率调整模块,包括:
第三调整单元,还用于当所述第二图像质量参数大于第三预设参数,且所述第二码率小于第一预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
第四调整单元,还用于当所述第二图像质量参数小于第四预设参数,且所述第二码率小于所述第一预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率;
第五调整单元,还用于当所述第二图像质量参数大于第五预设参数,且所述第二码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
第六调整单元,还用于当所述第二图像质量参数小于第六预设参数,且所述第二码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率。
在另一种可能实现方式中,所述码率调整模块,用于基于所述第一进程调用码率调整模型,根据第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
另一方面,提供了一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行,以实现如所述码率调整方法中所执行的操作。
另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行,以实现如所述码率调整方法中所执行的操作。
本申请实施例提供的技术方案带来的有益效果至少包括:
本申请实施例提供的方法、装置、设备及存储介质,进行直播和获取图像质量参数的过程基于不同的进程异步进行,基于第一进程进行直播的过程中,按照第一码率对采集的第一直播视频数据进行编码后再进行解码,得到的第二直播视频数据能够体现直播视频数据的图像质量,则将第一直播视频数据及第二直播视频数据发送给第二进程,基于第二进程进行处理以获取图像质量参数,返回给第一进程。获取图像质量参数的过程不会影响直播过程,提高了直播流畅性,使直播过程更加稳定,并且,基于第一进程根据第一图像质量参数,对第一码率进行调整,从而提高了直播的图像质量。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请实施例的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种码率调整方法的流程图。
图2是本申请实施例提供的另一种码率调整方法的流程图。
图3是本申请实施例提供的一种参数关系和码率关系的示意图。
图4是本申请实施例提供的另一种参数关系和码率关系的示意图。
图5是本申请实施例提供的另一种参数关系和码率关系的示意图。
图6是本申请实施例提供的另一种参数关系和码率关系的示意图。
图7是本申请实施例提供的一种码率调整过程的示意图。
图8是本申请实施例提供的一种码率调整装置的结构示意图。
图9是本申请实施例提供的另一种码率调整装置的结构示意图。
图10是本申请实施例提供的一种终端的结构示意图。
图11是本申请实施例提供的一种服务器的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种概念,但除非特别说明,这些概念不受这些术语限制。这些术语仅用于将一个概念与另一个概念区分。举例来说,在不脱离本申请的范围的情况下,可以将第一码率称为第二码率,将第二码率称为第一码率。
图1是本申请实施例提供的一种码率调整方法的流程图。本申请实施例的执行主体为计算机设备。参见图1,该方法包括:
101、基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将第一直播视频数据及第二直播视频数据发送给第二进程。
102、基于第二进程,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数,将第一图像质量参数发送给第一进程,第一图像质量参数用于表示第二直播视频数据的图像质量。
103、基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
本申请实施例提供的方法,进行直播和获取图像质量参数的过程基于不同的进程异步进行,基于第一进程进行直播的过程中,按照第一码率对采集的第一直播视频数据进行编码后再进行解码,得到的第二直播视频数据能够体现直播视频数据的图像质量,则将第一直播视频数据及第二直播视频数据发送给第二进程,基于第二进程进行处理以获取图像质量参数,返回给第一进程。获取图像质量参数的过程不会影响直播过程,提高了直播流畅性,使直播过程更加稳定,并且,基于第一进程根据第一图像质量参数,对第一码率进行调整,从而提高了直播的图像质量。
在一种可能实现方式中,基于第二进程,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数,得到第一图像质量参数,包括:
基于第二进程,将第一直播视频数据中每个视频帧与第二直播视频数据中相同的视频帧进行对比处理,得到每个视频帧对应的第一图像质量参数。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率,包括:
当第一图像质量参数大于第一预设参数时,基于第一进程降低第一码率,得到降低后的第二码率;
当第一图像质量参数小于第二预设参数时,基于第一进程提高第一码率,得到提高后的第二码率,第一预设参数大于第二预设参数。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率,包括:
当第一图像质量参数大于第三预设参数,且第一码率小于第一预设码率时,基于第一进程降低第一码率,以使降低后的第二码率大于第二预设码率,第二预设码率小于第一预设码率;
当第一图像质量参数小于第四预设参数,且第一码率小于第一预设码率时,基于第一进程提高第一码率,以使提高后的第二码率等于第一预设码率,第三预设参数大于第四预设参数;
当第一图像质量参数大于第五预设参数,且第一码率大于第一预设码率且小于第三预设码率时,基于第一进程降低第一码率,以使降低后的第二码率等于第一预设码率;
当第一图像质量参数小于第六预设参数,且第一码率大于第一预设码率且小于第三预设码率时,基于第一进程提高第一码率,以使提高后的第二码率等于第三预设码率,第五预设参数大于第六预设参数。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率,包括:
基于第一进程,根据第一图像质量参数及第一直播视频数据的丢帧率,对第一码率进行调整,得到调整后的第二码率。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数及第一直播视频数据的丢帧率,对第一码率进行调整,得到调整后的第二码率,包括:
当第一图像质量参数大于第七预设参数,且丢帧率不小于预设丢帧率时,基于第一进程降低第一码率,以使降低后的第二码率等于第二预设码率。
在另一种可能实现方式中,方法还包括:
当第一图像质量参数小于第七预设参数,且丢帧率不小于预设丢帧率时,基于第一进程输出告警信息,告警信息用于指示当前直播卡顿。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率,包括:
基于第一进程,根据第一图像质量参数,按照预设调整码率,对第一码率进行调整,得到第二码率。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,按照预设调整码率,对第一码率进行调整,得到第二码率之后,方法还包括:
基于第一进程,根据第二码率对第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,将第三直播视频数据及第四直播视频数据发送给第二进程;
基于第二进程,根据第三直播视频数据及第四直播视频数据,获取第二图像质量参数,将第二图像质量参数发送给第一进程,第二图像质量参数用于表示第四直播视频数据的图像质量。
在另一种可能实现方式中,将第二图像质量参数发送给第一进程之后,方法还包括:
当第二图像质量参数大于第三预设参数,且第二码率小于第一预设码率时,基于第一进程按照预设调整码率,降低第二码率;
当第二图像质量参数小于第四预设参数,且第二码率小于第一预设码率时,基于第一进程按照预设调整码率,提高第二码率;
当第二图像质量参数大于第五预设参数,且第二码率大于第一预设码率且小于第三预设码率时,基于第一进程按照预设调整码率,降低第二码率;
当第二图像质量参数小于第六预设参数,且第二码率大于第一预设码率且小于第三预设码率时,基于第一进程按照预设调整码率,提高第二码率。
在另一种可能实现方式中,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率,包括:
基于第一进程调用码率调整模型,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
图2是本申请实施例提供的一种码率调整方法的流程图。本申请实施例的执行主体为终端,参见图2,该方法包括:
201、终端基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据。
本申请实施例中,终端设置有两个进程,第一进程用于实现直播功能,第二进程用于实现对直播视频数据进行处理,得到图像质量参数,以避免由同一进程实现直播功能及获取图像质量参数功能而影响直播流畅性。
在直播过程中,主播终端生成直播视频数据,由该主播终端对直播视频数据进行采集,并对采集的直播视频数据进行编码,将编码后的直播视频数据通过直播服务器发送给观众终端,由观众终端对编码后的直播视频数据进行解码,得到解码后的直播视频数据,并播放解码后的直播视频数据。其中,在对直播视频数据进行编码时,根据当前的码率对直播视频数据进行编码,码率越大,编码再解码得到的直播视频数据的图像质量越高;码率越小,编码再解码得到的直播视频数据的图像质量越差。
但是,在对直播视频数据进行传输的过程中,码率越大,需要传输的数据量越大,从而占用的网络带宽越多,对直播流畅性造成影响。因此,本申请中需要对码率进行调整,使编码再解码得到的直播视频数据具有较高的图像质量的同时,不会占用过多的网络带宽,影响直播流畅性。本申请实施例仅是以第一直播视频数据、第二直播视频数据及第一码率为例进行说明。
在一种可能实现方式中,终端设置有预设触发方式,根据预设触发方式,采集第一直播视频数据,并根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据。其中,预设触发方式至少包括定时轮询触发和码率变化触发中的一种,采集的第一直播视频数据和第二直播视频数据中包括的视频帧的数量相同。
可选地,终端采用定时轮询触发方式时,每隔预设时长采集一次直播视频数据,得到第一直播视频数据,并通过编码和解码得到第二直播视频数据。其中,预设时长可以为任意时长,例如10分钟、15分钟等时长。
可选地,终端采用码率变化触发方式时,终端实时获取当前的码率,如果码率发生了变化,则采集直播视频数据,得到第一直播视频数据,并通过编码和解码得到第二直播视频数据。
采用上述两种方式触发对直播视频数据的采集时,定时轮询触发方式和码率变化触发方式相比较,定时轮询触发方式采集两次直播视频数据之间间隔的时长是固定的,而码率变化触发方式采集两次直播视频数据之间间隔的时长是随机的,则采用这两种触发方式每次采集的视频帧的数量可以相同,也可以不同,例如,采用定时轮询触发每次可以采集连续的5个视频帧,而采用码率变化触发每次可以采集连续的10个视频帧。
在一种可能实现方式中,终端为采集的第一直播视频数据中连续的多个视频帧设置对应的视频帧标识,对第一直播视频数据进行编码时,根据视频帧标识,将第一个具有视频帧标识的视频帧作为IDR(Instantaneous Decoding Refresh,即时解码刷新)帧,即进行编码的第一个视频帧,如果在IDR帧之前还有其他视频帧的话,则不对其他视频帧进行编码。
在一种可能实现方式中,终端根据第一码率对第一直播视频数据进行编码,得到编码后的直播视频数据,再对编码后的直播视频数据进行解码,得到第二直播视频数据。终端保存第一直播视频数据、编码后的直播视频数据及第二直播视频数据。其中,第一直播视频数据的数据格式与第二直播视频数据的视频格式相同,与编码后的直播视频数据的数据格式不同。其中,第一直播视频数据和第二直播视频数据的数据格式可以为yuv格式(一种数据格式)或者其他格式,本申请对比不做限制。
在一种可能实现方式中,终端得到第一直播视频数据和第二直播视频数据之后,获取第一直播视频数据和第二直播视频数据对应的json文件信息,该json文件信息至少包括每一帧的宽度和高度、视频帧中的目标区域、采集时间点、视频帧标识等信息。
202、终端将第一直播视频数据及第二直播视频数据发送给第二进程。
终端采用IPC(Inter-Process Communication,进程间通信)的通信方式,将第一直播视频数据和第二直播视频数据发送给第二进程。
在一种可能实现方式中,终端除了将第一直播视频数据和第二直播视频数据发送给第二进程之外,还可以将第一进程标识、任务标识、第一直播视频数据及第二直播视频数据的存储地址以及json文件等信息发送给第二进程,以便于第二进程根据接收到的信息获取图像质量参数。
其中,第一进程标识用于表示当前进行直播的第一进程的标识;由于第二进程可以同时对多个进程对应的直播视频数据进行处理,因此通过第一进程标识来区分第一进程与其他进程。任务标识用于表示第二进程对第一直播视频数据和第二直播视频数据进行处理时建立的任务的标识。
需要说明的是,第二进程可以为专门用于进行画质评估,获取图像质量参数的进程,终端中可以运行多个第一进程,每个第一进程均可在直播过程中,与该第二进程进行交互,基于第二进程来获取图像质量参数,以减轻该多个第一进程的处理压力。
203、终端基于第二进程,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数。
本申请实施例中,第二进程用于对第一直播视频数据及第二直播视频数据进行处理,得到第一图像质量参数。其中,进行处理的方式可以包括多种,例如,采用vmaf算法获取第一图像质量参数。
其中,第一图像质量参数用于表示第二直播视频数据的图像质量,第一图像质量参数越大,表示第二直播视频数据的图像质量越好,第二直播视频数据的图像质量与第一直播视频数据的图像质量差异越小,即第二直播视频数据的失真越小。
在一种可能实现方式中,终端设置一种图像质量的评分标准,将图像质量分为第一等级、第二等级、第三等级及第四等级,第一等级表示图像质量最好,第四等级表示图像质量最差,每个等级有对应的参数范围。
例如,图像质量参数的总参数范围为(0,100),其中第一等级对应参数范围(95,100),第二等级对应参数范围(85,95),第三等级对应参数范围(65,85),第四等级对应参数范围(0,65)。
需要说明的是,本申请实施例仅是将图像质量划分为四个等级为例进行说明,在另一实施例中,可以将图像质量划分为其他数量的等级,例如,划分为三个等级、五个等级或其他等级。
在一种可能实现方式中,终端基于第二进程,将第一直播视频数据中每个视频帧与第二直播视频数据中相同的视频帧进行对比处理,得到每个视频帧对应的第一图像质量参数,采用每个视频帧对应的第一图像质量参数表示第二直播视频数据的图像质量参数。其中,终端通过对比每个相同的视频帧,得到两者之间图像质量差异,图像质量差异与图像质量参数呈负相关关系,即差异越小,表示第二直播视频数据的失真越小,得到的第一图像质量参数越大,差异越大,表示第二直播视频数据的失真越大,得到的第一图像质量参数越小。
在一种可能实现方式中,基于第二进程,获取第一图像质量参数的过程中,如果基于第一进程的直播关闭且还未获取第一图像质量参数,则停止获取第一图像质量参数,如果已经获取了第一图像质量参数,则不需要将第一图像质量参数发送给第一进程。
在一种可能实现方式中,调用质量获取模型,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数。
可选地,在调用该质量获取模型之前,需要先对质量获取模型进行训练,获取初始的质量获取模型,或者经过一次或多次训练后的质量获取模型,再获取第一样本视频数据及第二样本视频数据,并且已经获取该第二样本视频数据的样本质量参数,则根据该第一样本视频数据、第二样本视频数据及样本质量参数对质量获取模型进行训练,得到训练后的质量获取模型。
在训练过程中,将第一样本视频数据及第二样本视频数据输入到质量获取模型中,获取预测质量参数,然后根据预测质量参数和样本质量参数之间的误差,对质量获取模型的参数进行修正,以使修正后的质量获取模型的误差收敛,得到训练后的质量获取模型。
204、终端将第一图像质量参数发送给第一进程。
终端根据第一进程标识,确定第一图像质量参数所属的第一进程,将第一图像质量参数发送给该第一进程。
205、终端基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
本申请实施例中,终端对第一码率进行调整的过程中,可以只对比第一图像质量参数与预设参数,根据对比结果,对第一码率进行调整;或者,也可以对比第一图像质量参数与预设参数、对比第一码率与预设码率,根据对比结果,对第一码率进行调整;或者,也可以对比第一图像质量参数与预设参数、对比第一码率与预设码率、对比丢帧率与预设丢帧率,根据对比结果,对第一码率进行调整。
在一种可能实现方式中,终端根据第一图像质量参数和预设参数,对第一码率进行调整,得到调整后的第二码率。其中,预设参数包括第一预设参数和第二预设参数。对第一码率进行调整时,包括以下三种情况:
(1)当第一图像质量参数大于第一预设参数时,降低第一码率,得到降低后的第二码率。其中,第一预设参数可以为任一数值。第一预设参数为第二直播视频数据当前的图像质量满足质量要求时的最大的图像质量参数,如果第一图像质量参数大于第一预设参数,表示第二直播视频数据的图像质量已经超过了当前的质量要求,造成了码率的浪费,可以降低第一码率。
在一种可能实现方式中,终端按照预设调整码率,降低第一码率,即第一码率减去预设调整码率,得到降低后的第二码率。其中,预设调整码率可以为任一数值,例如,预设调整码率为10、20或其他数值。
(2)当第一图像质量参数小于第二预设参数时,提高第一码率,得到提高后的第二码率。其中,第一预设参数大于第二预设参数,第二预设参数为第二直播视频数据当前的图像质量满足质量要求时的最小的图像质量参数,如果第一图像质量参数小于第二预设参数,表示第二直播视频数据的图像质量已经不满足当前的质量要求,可以提高第一码率。
在一种可能实现方式中,终端按照预设调整码率,提高第一码率,即第一码率加上预设调整码率,得到提高后的第二码率。其中,降低第一码率时的预设调整码率和提高第一码率时的预设调整码率可以相同,也可以不同。
(3)当第一图像质量参数大于第二预设参数且小于第一预设参数时,表示第二直播视频数据当前的图像质量满足质量要求,不需要对第一码率进行调整。
在一种可能实现方式中,终端对第一码率进行多次调整,得到最终的码率。即终端得到第二码率之后,根据第二码率,对第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,采用上述步骤202的实施方式,得到第四直播视频数据对应的第二图像质量参数。如果第二图像质量参数大于第一预设参数,则降低第二码率,直至得到的图像质量参数不大于第一预设参数;如果第二图像质量参数小于第二预设参数,则提高第二码率,直至得到的图像质量参数不小于第二预设参数。
例如,第一预设参数为65,第二预设参数为95,当第一图像质量参数小于65时,可以提高第一码率,当第一图像质量参数大于95时,可以降低第一码率。如果根据提高后的第二码率,得到第二图像质量参数仍小于65,则继续提高第二码率,如果根据降低后的第二码率,得到第二图像质量参数仍大于95,则继续降低第二码率,直至当前采集的直播视频数据对应的图像质量参数位于65与95之间。
在另一种可能实现方式中,终端根据第一图像质量参数、预设参数和预设码率,对第一码率进行调整。其中,预设参数包括第三预设参数、第四预设参数、第五预设参数和第六预设参数,预设码率包括第一预设码率、第二预设码率和第三预设码率。对第一码率进行调整,包括以下两种情况:
第一种情况:在第一码率小于第一预设码率的情况下,根据第一图像质量参数,对第一码率进行调整,包括以下三种情况:
(1)当第一图像质量参数大于第三预设参数,且第一码率小于第一预设码率时,降低第一码率,以使降低后的第二码率大于第二预设码率。其中,第二预设码率小于第一预设码率,第一预设码率为预设的常态码率,即适用于很多直播过程中的码率,第二预设码率为最小码率,即直播过程中允许设置的最小码率,如果当前的码率小于该最小码率,则编码后再进行解码得到的直播视频数据的图像质量不满足要求。
(2)当第一图像质量参数小于第四预设参数,且第一码率小于第一预设码率时,提高第一码率,以使提高后的第二码率等于第一预设码率。其中,第三预设参数大于第四预设参数。
(3)当第一图像质量参数大于第四预设参数且小于第三预设参数,且第一码率小于第一预设码率时,表示第二直播视频数据当前的图像质量满足质量要求,不需要对第一码率进行调整。
例如,第三预设参数为t3,第四预设参数为t4,第一预设码率为y1,第二预设码率为y2,第一码率为z1,第一图像质量参数为x1,各个参数和各个码率之间的关系如图3所示。或者,第三预设参数为t3,第四预设参数为t4,第一预设码率为y1,第二预设码率为y2,第一码率为z2,第一图像质量参数为x2,各个参数和各个码率之间的关系如图4所示。
又例如,第三预设参数为95,第四预设参数为90,第一码率为150,第一预设码率为200,第二预设码率为100,此时第一码率小于第一预设码率,当第一图像质量参数为98大于95时,降低第一码率,得到第二码率为125,大于第二预设码率100;当第一图像质量参数为85小于90时,提高第一码率,得到第二码率为200。
第二种情况:在第一码率大于第一预设码率且小于第三预设码率的情况下,根据第一图像质量参数,对第一码率进行调整,包括以下三种情况:
(1)当第一图像质量参数大于第五预设参数,且第一码率大于第一预设码率且小于第三预设码率时,降低第一码率,以使降低后的第二码率等于第一预设码率。其中,第三预设码率为最大码率,即直播过程中允许设置的最大码率,如果当前的码率大于该最大码率,则根据当前的码率进行编码时占用的带宽过多,影响直播流畅性。
(2)当第一图像质量参数小于第六预设参数,且第一码率大于第一预设码率且小于第三预设码率时,提高第一码率,以使提高后的第二码率等于第三预设码率,第五预设参数大于第六预设参数。
(3)当第一图像质量参数大于第六预设参数且小于第五预设参数,且第一码率大于第一预设码率且小于第三预设码率时,表示第二直播视频数据当前的图像质量满足质量要求,不需要对第一码率进行调整。
例如,第五预设参数为t5,第六预设参数为t6,第一图像质量参数为x3,第一预设码率为y1,第三预设码率为y3,第一码率为z3,第一图像质量参数为x3,各个参数和各个码率之间的关系如图5所示。或者,第五预设参数为t5,第六预设参数为t6,第一图像质量参数为x3,第一预设码率为y1,第三预设码率为y3,第一码率为z4,第一图像质量参数为x4,各个参数和各个码率之间的关系如图6所示。
又例如,第五预设参数为90,第六预设参数为80,第一码率为250,第一预设码率为200,第三预设码率为300,此时第一码率小于第三预设码率且大于第一预设码率,当第一图像质量参数为95大于90时,降低第一码率,得到第二码率为200;当第一图像质量参数为75小于80时,提高第一码率,得到第二码率为300。
对于第一种情况和第二种情况,在上述可能实现方式中,终端将第一码率提高或降低至某一预设码率,对第一码率调整一次,实现对第一码率的调整,不需要考虑根据调整后的码率,得到的第二图像质量参数的大小是否满足要求,后续还可以根据之后采集的直播视频数据的图像质量参数继续进行调整。
在另一种可能实现中,终端可以按照预设调整码率,对第一码率进行调整,得到调整后的第二码率,基于第一进程,根据调整后的第二码率对第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,采用上述步骤202的实施方式,基于第二进程,根据第三直播视频数据及第四直播视频数据,获取第四直播视频数据对应的第二图像质量参数,根据第二图像质量参数,确定第二码率是否满足要求,如果不满足要求,则继续对第二码率进行调整。对第二码率进行调整,包括以下两种情况:
第一种情况:在第二码率小于第一预设码率的情况下,根据第二图像质量参数,对第二码率进行调整,包括以下三种情况:
(1)当第二图像质量参数大于第三预设参数,且第二码率小于第一预设码率时,按照预设调整码率,降低第二码率,直至根据降低后的码率,对直播视频数据进行编码后再解码得到的直播视频数据的第三图像质量参数不大于第三预设参数。
(2)当第二图像质量参数小于第四预设参数,且第二码率小于第一预设码率时,按照预设调整码率,提高第一码率,直至根据提高后的码率,对直播视频数据进行编码后再解码得到的直播视频数据的第三图像质量参数不小于第三预设参数。
(3)当第二图像质量参数大于第四预设参数且小于第三预设参数,且第二码率小于第一预设码率时,表示第四直播视频数据当前的图像质量满足质量要求,不需要对第二码率进行调整。
例如,第五预设参数为90,第六预设参数为80,第一码率为250,第一预设码率为200,第三预设码率为300,此时第一码率小于第三预设码率且大于第一预设码率,当第一图像质量参数大于90时,降低第一码率,得到第二码率为200;当第一图像质量参数小于80时,提高第一码率,得到第二码率为300。第三预设参数为95,第四预设参数为90,预设调整码率为10,第一码率为150,第一预设码率为200,第二预设码率为100,此时第一码率小于第一预设码率,当第一图像质量参数大于95时,降低第一码率,得到降低后的第二码率140,如果根据降低后的第二码率140,得到第二图像质量参数仍大于95,则继续降低第二码率,直至图像质量参数为90与95之间;当第一图像质量参数小于90时,提高第一码率,得到提高后的第二码率为160,如果根据提高后的第二码率160,得到第二图像质量参数仍小于90,则继续提高第二码率,直至图像质量参数为90与95之间。
第二种情况:在第二码率大于第一预设码率且小于第三预设码率的情况下,根据第二图像质量参数,对第二码率进行调整,包括以下三种情况:
(1)当第二图像质量参数大于第五预设参数,且第二码率大于第一预设码率且小于第三预设码率时,按照预设调整码率,降低第二码率,直至根据降低后的码率,对直播视频数据进行编码后再解码得到的直播视频数据的第三图像质量参数不大于第五预设参数。
(2)当第二图像质量参数小于第六预设参数,且第二码率大于第一预设码率且小于第三预设码率时,按照预设调整码率,提高第二码率,直至根据提高后的码率,对直播视频数据进行编码后再解码得到的直播视频数据的第三图像质量参数不大于第六预设参数。
(3)当第二图像质量参数大于第六预设参数且小于第五预设参数,且第二码率大于第一预设码率且小于第三预设码率时,表示第四直播视频数据当前的图像质量满足质量要求,不需要对第二码率进行调整。
例如,第五预设参数为90,第六预设参数为80,预设调整码率为10,第一码率为250,第一预设码率为200,第三预设码率为300,此时第一码率小于第三预设码率且大于第一预设码率,当第一图像质量参数大于90时,降低第一码率,得到降低后的第二码率240,如果根据降低后的第二码率240,得到第二图像质量参数仍大于90,则继续降低第二码率,直至图像质量参数为80与90之间;当第一图像质量参数小于80时,提高第一码率,得到提高后的第二码率为260,如果根据提高后的第二码率260,得到第二图像质量参数仍小于80,则继续提高第二码率,直至图像质量参数80与90之间。
另外,在另一种可能实现方式中,可以结合上述两种可能实现方式,调整后的第二码率需要满足要求,对应得到的第二图像质量参数也需要满足要求,在两者均满足要求的情况下,才完成对第一码率的调整。
另外,上述第三预设参数和第五预设参数可以相同,也可以不同,第四预设参数和第六预设参数可以相同,也可以不同。
在另一种可能实现方式中,终端基于第一进程,根据第一图像质量参数及第一直播视频数据的丢帧率,对第一码率进行调整,得到调整后的第二码率。在调整码率的过程中,考虑丢帧率的影响,如果丢帧率较大,导致直播的流畅性较差,即使码率很高,直播视频数据中每个视频帧的图像质量很高,但仍会导致直播视频数据的播放效果较差,需要降低码率,减少码率占用的带宽,减小丢帧率。对第一码率进行调整,包括以下三种情况:
(1)当丢帧率小于预设丢帧率时,终端可以采用与上述根据第一图像质量参数、预设参数和预设码率,对第一码率进行调整的实施方式类似的实施方式,对第一码率进行调整,在此不再赘述。
(2)当第一图像质量参数大于第七预设参数,且丢帧率不小于预设丢帧率时,降低第一码率,以使降低后的第二码率等于第二预设码率,即将第一码率降低,减少占用的。其中,第七预设参数为任一数值,预设丢帧率为允许的最大丢帧率。
在一种可能实现方式中,当第一图像质量参数大于第七预设参数,且丢帧率不小于预设丢帧率时,按照预设调整码率,降低第一码率,得到降低后的第二码率,根据第二码率,对第一直播视频数据之后的第三直播视频数据进行编码再进行解码,得到第四直播视频数据,采用上述步骤202的实施方式。如果第二图像质量参数大于第七预设参数,则继续降低第二码率,直至得到的图像质量参数不大于第七预设参数。
(3)当第一图像质量参数小于第七预设参数,且丢帧率不小于预设丢帧率时,不需要降低第一码率,直接输出告警信息,告警信息用于指示当前直播卡顿。
在一种可能实现方式中,终端根据输出的告警信息,关闭其他应用,增加第一进程可用的带宽。如果关闭其他应用之后,丢帧率仍然大于预设丢帧率,则停止直播,并显示直播停止信息;如果关闭其他应用之后,丢帧率小于预设丢帧率,则不再输出告警信息。
在另一种可能实现方式中,终端关闭其他应用之后,获取预设时长内的丢帧率,如果在预设时长内,丢帧率均小于预设丢帧率,才会不再输出告警信息;如果在预设时长内,出现丢帧率大于预设丢帧率的情况,则停止直播,并显示直播停止信息。其中,预设时长可以为任一时长,例如,5分钟、10分钟或其他时长。
在一种可能实现方式中,终端实时检测直播视频数据的丢帧率,获取第一直播视频数据在单位时间内的丢帧数以及单位时间内的总帧数,将丢帧数与总帧数的比值作为丢帧率。
上述调整过程是根据预设的调整规则对第一码率进行调整,在另一种可能实现方式中,终端调用码率调整模型,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。其中,根据码率调整模型可以得到期望码率,在进行调整时,将第一码率调整至期望码率,该期望码率即为第二码率。
可选地,在调用该码率调整模型之前,需要先对码率调整模型进行训练,获取初始的码率调整模型,或者经过一次或多次训练后的码率调整模型,再获取第一样本码率及样本质量参数,并且已经获取期望的第二样本码率,则根据该第一样本码率、样本质量参数及第二样本码率对码率调整模型进行训练,得到训练后的码率调整模型。
在训练过程中,将该第一样本码率及样本质量参数输入到码率调整模型中,获取预测质量参数,然后根据预测码率和样本第二码率之间的误差,对码率调整模型的参数进行修正,以使修正后的码率调整模型的误差收敛,得到训练后的码率调整模型。
在一种可能实现方式中,码率调整过程参见图7,终端开始直播之后,第一进程701中的编码模块7011根据当前的第一码率,对第一直播视频数据进行编码,当满足预设触发条件时,对编码后的直播视频数据再进行解码,得到第二直播视频数据,将第一直播视频数据和第二直播视频数据发送给第二进程702,基于第二进程702得到第一图像质量参数之后,将第一图像质量参数发送给第一进程701中的码率调整模块7012,码率调整模块7012根据第一图像质量参数对第一码率进行调整,得到第二码率。在上述过程中,第一进程701中包括的丢帧率获取模块7013会实时检测当前的丢帧率。
另外,终端得到调整后的第二码率之后,如果该码率已经满足要求,则终端根据第二码率对第三直播视频数据之后采集的第五直播视频数据进行编码后,得到第六直播视频数据,将第六直播视频数据发送给观众终端,由观众终端对第六直播视频数据进行解码并播放,此过程中无需再对第二码率进行调整。
需要说明的是,本申请实施例仅是以执行主体为终端为例进行说明,在另一实施例中,执行主体可以为服务器,由服务器基于第一进程,获取第一直播视频数据和第二直播视频数据,基于第二进程,根据第一直播视频数据和第二直播视频,获取第一图像质量参数,基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
本申请实施例提供的方法,进行直播和获取图像质量参数的过程基于不同的进程异步进行,基于第一进程进行直播的过程中,按照第一码率对采集的第一直播视频数据进行编码后再进行解码,得到的第二直播视频数据能够体现直播视频数据的图像质量,则将第一直播视频数据及第二直播视频数据发送给第二进程,基于第二进程进行处理以获取图像质量参数,返回给第一进程。获取图像质量参数的过程不会影响直播过程,提高了直播流畅性,使直播过程更加稳定,并且,基于第一进程根据第一图像质量参数,对第一码率进行调整,从而提高了直播的图像质量。
并且,本申请进行直播和获取图像质量参数的过程基于不同的进程异步进行,两个进程相互独立互不干扰,避免了直播过程与获取图像质量参数的过程不兼容的问题。并且,本申请中可以根据图像质量需要,设置预设码率和预设参数的大小,提高了码率调节的灵活性。
图8是本申请实施例提供的一种码率调整装置的结构示意图。参见图8,该装置包括:
视频数据获取模块801,用于基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将第一直播视频数据及第二直播视频数据发送给第二进程;
质量参数获取模块802,用于基于第二进程,根据第一直播视频数据及第二直播视频数据,获取第一图像质量参数,将第一图像质量参数发送给第一进程,第一图像质量参数用于表示第二直播视频数据的图像质量;
码率调整模块803,用于基于第一进程,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
本申请实施例提供的装置,进行直播和获取图像质量参数的过程基于不同的进程异步进行,基于第一进程进行直播的过程中,按照第一码率对采集的第一直播视频数据进行编码后再进行解码,得到的第二直播视频数据能够体现直播视频数据的图像质量,则将第一直播视频数据及第二直播视频数据发送给第二进程,基于第二进程进行处理以获取图像质量参数,返回给第一进程。获取图像质量参数的过程不会影响直播过程,提高了直播流畅性,使直播过程更加稳定,并且,基于第一进程根据第一图像质量参数,对第一码率进行调整,从而提高了直播的图像质量。
在一种可能实现方式中,质量参数获取模块802,用于基于第二进程,将第一直播视频数据中每个视频帧与第二直播视频数据中相同的视频帧进行对比处理,得到每个视频帧对应的第一图像质量参数。
在另一种可能实现方式中,参见图9,码率调整模块803,包括:
第一调整单元8031,用于当第一图像质量参数大于第一预设参数时,基于第一进程降低第一码率;
第二调整单元8032,用于当第一图像质量参数小于第二预设参数时,基于第一进程提高第一码率,第一预设参数大于第二预设参数。
在另一种可能实现方式中,参见图9,码率调整模块803,还包括:
第三调整单元8033,用于当第一图像质量参数大于第三预设参数,且第一码率小于第一预设码率时,基于第一进程降低第一码率,以使降低后的第二码率大于第二预设码率,第二预设码率小于第一预设码率;
第四调整单元8034,用于当第一图像质量参数小于第四预设参数,且第一码率小于第一预设码率时,基于第一进程提高第一码率,以使提高后的第二码率等于第一预设码率,第三预设参数大于第四预设参数;
第五调整单元8035,用于当第一图像质量参数大于第五预设参数,且第一码率大于第一预设码率且小于第三预设码率时,基于第一进程降低第一码率,以使降低后的第二码率等于第一预设码率;
第六调整单元8036,用于当第一图像质量参数小于第六预设参数,且第一码率大于第一预设码率且小于第三预设码率时,基于第一进程提高第一码率,以使提高后的第二码率等于第三预设码率,第五预设参数大于第六预设参数。
在另一种可能实现方式中,码率调整模块803,用于基于第一进程,根据第一图像质量参数及第一直播视频数据的丢帧率,对第一码率进行调整,得到调整后的第二码率。
在另一种可能实现方式中,码率调整模块803,用于当第一图像质量参数大于第七预设参数,且丢帧率不小于预设丢帧率时,基于第一进程降低第一码率,以使降低后的第二码率等于第二预设码率。
在另一种可能实现方式中,参见图9,该装置还包括:
告警模块804,用于当第一图像质量参数小于第七预设参数,且丢帧率不小于预设丢帧率时,基于第一进程输出告警信息,告警信息用于指示当前直播卡顿。
在另一种可能实现方式中,码率调整模,803,用于根据第一图像质量参数,按照预设调整码率,对第一码率进行调整,得到第二码率。
在另一种可能实现方式中,视频数据获取模块802,还用于基于第一进程,根据第二码率对第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,将第三直播视频数据及第四直播视频数据发送给第二进程;
质量参数获取模块802,还用于基于第二进程,根据第三直播视频数据及第四直播视频数据,获取第二图像质量参数,将第二图像质量参数发送给第一进程,第二图像质量参数用于表示第四直播视频数据的图像质量。
在另一种可能实现方式中,参见图9,码率调整模块803,包括:
第三调整单元8033,还用于当第二图像质量参数大于第三预设参数,且第二码率小于第一预设码率时,基于第一进程按照预设调整码率,降低第二码率;
第四调整单元8034,还用于当第二图像质量参数小于第四预设参数,且第二码率小于第一预设码率时,基于第一进程按照预设调整码率,提高第二码率;
第五调整单元8035,还用于当第二图像质量参数大于第五预设参数,且第二码率大于第一预设码率且小于第三预设码率时,基于第一进程按照预设调整码率,降低第二码率;
第六调整单元8036,还用于当第二图像质量参数小于第六预设参数,且第二码率大于第一预设码率且小于第三预设码率时,基于第一进程按照预设调整码率,提高第二码率。
在另一种可能实现方式中,码率调整模块803,用于基于第一进程调用码率调整模型,根据第一图像质量参数,对第一码率进行调整,得到调整后的第二码率。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
需要说明的是:上述实施例提供的码率调整装置在调整码率时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将终端的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的码率调整装置与码率调整方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图10是本申请实施例提供的一种电子设备1000的结构示意图。该电子设备1000可以是便携式移动终端,比如:智能手机、平板电脑、MP3播放器(Moving Picture ExpertsGroup Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。电子设备1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,电子设备1000包括有:处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1001可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1001还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1002还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1002中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1001所执行以实现本申请中方法实施例提供的基于人机对话的来电代接方法。
在一些实施例中,电子设备1000还可选包括有:外围设备接口1003和至少一个外围设备。处理器1001、存储器1002和外围设备接口1003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1003相连。具体地,外围设备包括:射频电路1004、显示屏1005、摄像头组件1006、音频电路1007、定位组件1008和电源1009中的至少一种。
外围设备接口1003可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1001和存储器1002。在一些实施例中,处理器1001、存储器1002和外围设备接口1003被集成在同一芯片或电路板上;在一些其他实施例中,处理器1001、存储器1002和外围设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1004用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1004将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1004包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1004还可以包括NFC(Near FieldCommunication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1005用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时,显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时,显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1005可以为一个,设置在电子设备1000的前面板;在另一些实施例中,显示屏1005可以为至少两个,分别设置在电子设备1000的不同表面或呈折叠设计;在另一些实施例中,显示屏1005可以是柔性显示屏,设置在电子设备1000的弯曲表面上或折叠面上。甚至,显示屏1005还可以设置成非矩形的不规则图形,也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地,摄像头组件1006包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1001进行处理,或者输入至射频电路1004以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在电子设备1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或射频电路1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1007还可以包括耳机插孔。
定位组件1008用于定位电子设备1000的当前地理位置,以实现导航或LBS(Location Based Service,基于位置的服务)。定位组件1008可以是基于美国的GPS(Global Positioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源1009用于为电子设备1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,电子设备1000还包括有一个或多个传感器1010。该一个或多个传感器1010包括但不限于:加速度传感器1011、陀螺仪传感器1012、压力传感器1013、指纹传感器1014、光学传感器1015以及接近传感器1016。
加速度传感器1011可以检测以电子设备100建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1011可以用于检测重力加速度在三个坐标轴上的分量。处理器1001可以根据加速度传感器1011采集的重力加速度信号,控制显示屏1005以横向视图或纵向视图进行用户界面的显示。加速度传感器1011还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1012可以检测电子设备1000的机体方向及转动角度,陀螺仪传感器1012可以与加速度传感器1011协同采集用户对电子设备1000的3D动作。处理器1001根据陀螺仪传感器1012采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1013可以设置在电子设备1000的侧边框和/或显示屏1005的下层。当压力传感器1013设置在电子设备1000的侧边框时,可以检测用户对电子设备1000的握持信号,由处理器1001根据压力传感器1013采集的握持信号进行左右手识别或快捷操作。当压力传感器1013设置在显示屏1005的下层时,由处理器1001根据用户对显示屏1005的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1014用于采集用户的指纹,由处理器1001根据指纹传感器1014采集到的指纹识别用户的身份,或者,由指纹传感器1014根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1001授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1014可以被设置在电子设备1000的正面、背面或侧面。当电子设备1000上设置有物理按键或厂商Logo时,指纹传感器1014可以与物理按键或厂商Logo集成在一起。
光学传感器1015用于采集环境光强度。在一个实施例中,处理器1001可以根据光学传感器1015采集的环境光强度,控制显示屏1005的显示亮度。具体地,当环境光强度较高时,调高显示屏1005的显示亮度;当环境光强度较低时,调低显示屏1005的显示亮度。在另一个实施例中,处理器1001还可以根据光学传感器1015采集的环境光强度,动态调整摄像头组件1006的拍摄参数。
接近传感器1016,也称距离传感器,通常设置在电子设备1000的前面板。接近传感器1016用于采集用户与电子设备1000的正面之间的距离。在一个实施例中,当接近传感器1016检测到用户与电子设备1000的正面之间的距离逐渐变小时,由处理器1001控制显示屏1005从亮屏状态切换为息屏状态;当接近传感器1016检测到用户与电子设备1000的正面之间的距离逐渐变大时,由处理器1001控制显示屏1005从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图10中示出的结构并不构成对电子设备1000的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
图11是本申请实施例提供的一种服务器的结构示意图,该服务器1100可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(Central ProcessingUnits,CPU)1101和一个或一个以上的存储器1102,其中,存储器1102中存储有至少一条指令,该至少一条指令由处理器1101加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
服务器1100可以用于执行上述码率调整方法中服务器所执行的步骤。
本申请实施例还提供了一种计算机设备,该计算机设备包括处理器和存储器,存储器中存储有至少一条指令,该至少一条指令由处理器加载并执行,以实现上述实施例的码率调整方法中所执行的操作。
本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有至少一条指令,该至少一条指令由处理器加载并执行,以实现上述实施例的码率调整方法中所执行的操作。
本申请实施例还提供了一种计算机程序,该计算机程序中存储有至少一条指令,该至少一条指令由处理器加载并执行,以实现上述实施例的码率调整方法中所执行的操作。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上仅为本申请实施例的可选实施例,并不用以限制本申请实施例,凡在本申请实施例的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (14)

1.一种码率调整方法,其特征在于,所述方法包括:
基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将所述第一直播视频数据及所述第二直播视频数据发送给第二进程;
基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,将所述第一图像质量参数发送给所述第一进程,所述第一图像质量参数用于表示所述第二直播视频数据的图像质量;
基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,得到第一图像质量参数,包括:
基于所述第二进程,将所述第一直播视频数据中每个视频帧与所述第二直播视频数据中相同的视频帧进行对比处理,得到所述每个视频帧对应的第一图像质量参数。
3.根据权利要求1所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第一预设参数时,基于所述第一进程降低所述第一码率,得到降低后的第二码率;
当所述第一图像质量参数小于第二预设参数时,基于所述第一进程提高所述第一码率,得到提高后的第二码率,所述第一预设参数大于所述第二预设参数。
4.根据权利要求1所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第三预设参数,且所述第一码率小于第一预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率大于第二预设码率,所述第二预设码率小于所述第一预设码率;
当所述第一图像质量参数小于第四预设参数,且所述第一码率小于所述第一预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第一预设码率,所述第三预设参数大于所述第四预设参数;
当所述第一图像质量参数大于第五预设参数,且所述第一码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于所述第一预设码率;
当所述第一图像质量参数小于第六预设参数,且所述第一码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程提高所述第一码率,以使提高后的第二码率等于所述第三预设码率,所述第五预设参数大于所述第六预设参数。
5.根据权利要求1所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程,根据所述第一图像质量参数及所述第一直播视频数据的丢帧率,对所述第一码率进行调整,得到所述调整后的第二码率。
6.根据权利要求5所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数及所述第一直播视频数据的丢帧率,对所述第一码率进行调整,得到调整后的第二码率,包括:
当所述第一图像质量参数大于第七预设参数,且所述丢帧率不小于预设丢帧率时,基于所述第一进程降低所述第一码率,以使降低后的第二码率等于第二预设码率。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
当所述第一图像质量参数小于所述第七预设参数,且所述丢帧率不小于所述预设丢帧率时,基于所述第一进程输出告警信息,所述告警信息用于指示当前直播卡顿。
8.根据权利要求1所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程,根据所述第一图像质量参数,按照预设调整码率,对所述第一码率进行调整,得到所述第二码率。
9.根据权利要求8所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,按照预设调整码率,对所述第一码率进行调整,得到所述第二码率之后,所述方法还包括:
基于所述第一进程,根据所述第二码率对所述第一直播视频数据之后的第三直播视频数据进行编码后再进行解码,得到第四直播视频数据,将所述第三直播视频数据及所述第四直播视频数据发送给所述第二进程;
基于所述第二进程,根据所述第三直播视频数据及所述第四直播视频数据,获取第二图像质量参数,将所述第二图像质量参数发送给所述第一进程,所述第二图像质量参数用于表示所述第四直播视频数据的图像质量。
10.根据权利要求9所述的方法,其特征在于,所述将所述第二图像质量参数发送给所述第一进程之后,所述方法还包括:
当所述第二图像质量参数大于第三预设参数,且所述第二码率小于第一预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
当所述第二图像质量参数小于第四预设参数,且所述第二码率小于所述第一预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率;
当所述第二图像质量参数大于第五预设参数,且所述第二码率大于所述第一预设码率且小于第三预设码率时,基于所述第一进程按照所述预设调整码率,降低所述第二码率;
当所述第二图像质量参数小于第六预设参数,且所述第二码率大于所述第一预设码率且小于所述第三预设码率时,基于所述第一进程按照所述预设调整码率,提高所述第二码率。
11.根据权利要求1所述的方法,其特征在于,所述基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率,包括:
基于所述第一进程调用码率调整模型,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
12.一种码率调整装置,其特征在于,所述装置包括:
视频数据获取模块,用于基于第一进程,根据第一码率对采集的第一直播视频数据进行编码后再进行解码,得到第二直播视频数据,将所述第一直播视频数据及所述第二直播视频数据发送给第二进程;
质量参数获取模块,用于基于所述第二进程,根据所述第一直播视频数据及所述第二直播视频数据,获取第一图像质量参数,将所述第一图像质量参数发送给所述第一进程,所述第一图像质量参数用于表示所述第二直播视频数据的图像质量;
码率调整模块,用于基于所述第一进程,根据所述第一图像质量参数,对所述第一码率进行调整,得到调整后的第二码率。
13.一种计算机设备,其特征在于,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行,以实现如权利要求1至11任一权利要求所述的码率调整方法中所执行的操作。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行,以实现如权利要求1至11任一权利要求所述的码率调整方法中所执行的操作。
CN202010508118.0A 2020-06-05 2020-06-05 码率调整方法、装置、设备及存储介质 Active CN111586433B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010508118.0A CN111586433B (zh) 2020-06-05 2020-06-05 码率调整方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010508118.0A CN111586433B (zh) 2020-06-05 2020-06-05 码率调整方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111586433A true CN111586433A (zh) 2020-08-25
CN111586433B CN111586433B (zh) 2021-09-21

Family

ID=72119878

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010508118.0A Active CN111586433B (zh) 2020-06-05 2020-06-05 码率调整方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111586433B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153404A (zh) * 2020-09-23 2020-12-29 北京达佳互联信息技术有限公司 码率调整方法、检测方法、装置、设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101510998A (zh) * 2009-02-24 2009-08-19 山东大学 用于无线视频监控系统数据传输的自适应流量控制方法
US8743954B1 (en) * 2008-02-01 2014-06-03 Zenverge, Inc. Architecture for adjusting bit rate based on measured quality
CN104349178A (zh) * 2014-11-21 2015-02-11 赛特斯信息科技股份有限公司 实现按需实时转码和自适应码率流媒体播放的系统及方法
US20150067722A1 (en) * 2013-09-04 2015-03-05 Arris Enterprises, Inc. Averting Ad Skipping in Adaptive Bit Rate Systems
US10045055B1 (en) * 2013-01-07 2018-08-07 Cox Communications, Inc. Correlating video quality with video playback view
CN108769826A (zh) * 2018-06-22 2018-11-06 广州酷狗计算机科技有限公司 直播媒体流获取方法、装置、终端及存储介质
WO2019145202A1 (en) * 2018-01-26 2019-08-01 Net Insight Intellectual Property Ab Abr control
CN110121089A (zh) * 2019-06-10 2019-08-13 杭州米络星科技(集团)有限公司 一种rtmp直播码率自适应方法
CN110913245A (zh) * 2019-11-08 2020-03-24 网宿科技股份有限公司 一种控制视频转码码率的方法和装置
CN111010576A (zh) * 2019-12-18 2020-04-14 腾讯科技(深圳)有限公司 一种数据处理方法及相关设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8743954B1 (en) * 2008-02-01 2014-06-03 Zenverge, Inc. Architecture for adjusting bit rate based on measured quality
CN101510998A (zh) * 2009-02-24 2009-08-19 山东大学 用于无线视频监控系统数据传输的自适应流量控制方法
US10045055B1 (en) * 2013-01-07 2018-08-07 Cox Communications, Inc. Correlating video quality with video playback view
US20150067722A1 (en) * 2013-09-04 2015-03-05 Arris Enterprises, Inc. Averting Ad Skipping in Adaptive Bit Rate Systems
CN104349178A (zh) * 2014-11-21 2015-02-11 赛特斯信息科技股份有限公司 实现按需实时转码和自适应码率流媒体播放的系统及方法
WO2019145202A1 (en) * 2018-01-26 2019-08-01 Net Insight Intellectual Property Ab Abr control
CN108769826A (zh) * 2018-06-22 2018-11-06 广州酷狗计算机科技有限公司 直播媒体流获取方法、装置、终端及存储介质
CN110121089A (zh) * 2019-06-10 2019-08-13 杭州米络星科技(集团)有限公司 一种rtmp直播码率自适应方法
CN110913245A (zh) * 2019-11-08 2020-03-24 网宿科技股份有限公司 一种控制视频转码码率的方法和装置
CN111010576A (zh) * 2019-12-18 2020-04-14 腾讯科技(深圳)有限公司 一种数据处理方法及相关设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王艳: "Android系统中RTMP流媒体直播的设计与实现", 《电视技术》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153404A (zh) * 2020-09-23 2020-12-29 北京达佳互联信息技术有限公司 码率调整方法、检测方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN111586433B (zh) 2021-09-21

Similar Documents

Publication Publication Date Title
CN108401124B (zh) 视频录制的方法和装置
CN111372126B (zh) 视频播放方法、装置及存储介质
CN113542839B (zh) 电子设备的投屏方法和电子设备
CN115473957B (zh) 一种图像处理方法和电子设备
CN110543289B (zh) 控制音量的方法和电子设备
CN108966008B (zh) 直播视频回放方法及装置
CN110022489B (zh) 视频播放方法、装置及存储介质
CN110881136A (zh) 视频帧率控制方法、装置、计算机设备及存储介质
CN110769271B (zh) 调节多路码流的码率的方法和装置
CN111417006A (zh) 视频投屏方法、装置、终端及存储介质
CN111107389B (zh) 确定观看直播时长的方法、装置和系统
CN111586431B (zh) 进行直播处理的方法、装置、设备及存储介质
CN111586413B (zh) 视频调整方法、装置、计算机设备及存储介质
JP2023503281A (ja) エネルギー効率の良い表示処理方法およびデバイス
CN110989961A (zh) 一种声音处理方法及其装置
CN115016869A (zh) 帧率调整方法、终端设备及帧率调整系统
CN111813367A (zh) 调整音量的方法、装置、设备以及存储介质
CN111092991B (zh) 歌词显示方法及装置、计算机存储介质
CN111010588B (zh) 直播处理方法、装置、存储介质及设备
CN114461057A (zh) Vr显示控制方法、电子设备及计算机可读存储介质
CN111586444A (zh) 视频处理方法、装置、电子设备及存储介质
CN111083554A (zh) 直播礼物显示的方法和装置
CN107888975B (zh) 视频播放方法、装置及存储介质
CN108401194B (zh) 时间戳确定方法、装置和计算机可读存储介质
CN110113669B (zh) 获取视频数据的方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant