CN113347472A - 音视频质量调节方法、装置、电子设备及存储介质 - Google Patents
音视频质量调节方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113347472A CN113347472A CN202110486598.XA CN202110486598A CN113347472A CN 113347472 A CN113347472 A CN 113347472A CN 202110486598 A CN202110486598 A CN 202110486598A CN 113347472 A CN113347472 A CN 113347472A
- Authority
- CN
- China
- Prior art keywords
- audio
- client
- video data
- server
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 87
- 230000006854 communication Effects 0.000 claims abstract description 104
- 238000004891 communication Methods 0.000 claims description 83
- 230000008569 process Effects 0.000 claims description 23
- 239000003999 initiator Substances 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 abstract description 7
- 230000000875 corresponding effect Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 13
- 238000012545 processing Methods 0.000 description 13
- 230000009471 action Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44245—Monitoring the upstream path of the transmission network, e.g. its availability, bandwidth
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例提供了一种音视频质量调节方法、装置、电子设备及存储介质。音视频质量调节方法,包括:客户端在音视频群聊通信过程中,判断自身是否作为主讲方;在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。本发明实施例客户端基于自身是否为主讲方,自适应地向服务器上传对应质量参数的音视频数据,相比于始终上传高质量的因视频数据流来说,能够降低服务器的压力,节省带宽,减少数据流在传输过程中的质量损耗。
Description
技术领域
本发明涉及数据处理技术领域,特别是涉及一种音视频质量调节方法、装置、电子设备及存储介质。
背景技术
音视频通信是目前较为流行的通信方式,可以实现一对一、一对多、多对多的通信。近年来,音视频通信的应用,如聊天室,网络教育,应急指挥,远程医疗,数字电视等不断创新的成就更是全球关注的焦点。
在音视频通信中,参与通信的客户端各自向服务器上传数据流,服务器对多个客户端的数据流进行混流操作,之后向客户端输出混合数据流。通常情况下,在向服务器上传数据流时,各个客户端始终按照高质量的数据流进行上传,但是该种方式会导致服务器的压力增大,并且造成数据流在传输过程中的质量损耗。
发明内容
本发明实施例的目的在于提供一种音视频质量调节方法、装置、电子设备及存储介质,以降低服务器的压力,减少数据流在传输过程中的质量损耗。具体技术方案如下:
在本发明实施的第一方面,首先提供了一种音视频质量调节方法,执行于客户端,所述方法包括:
在音视频群聊通信过程中,判断自身是否作为主讲方;
在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,在向服务器上传第一质量参数的音视频数据之前,还包括:判断向所述服务器上传的音视频数据是否在主画面处显示;所述向服务器上传第一质量参数的音视频数据,包括:在判断出不在主画面处显示的情况下,向所述服务器上传所述第一质量参数的音视频数据;在判断出在主画面处显示的情况下,向所述服务器上传所述第二质量参数的音视频数据。
可选地,在判断自身是否作为主讲方之前,还包括:从所述服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件;所述预设条件基于主讲方切换频率与连接量的对应关系设定;所述判断自身是否作为主讲方包括:在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。
可选地,所述向服务器上传第一质量参数的音视频数据,包括:在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;基于所述客户端连接数,确定所述第一质量参数的目标级别;所述第一质量参数的目标级别与所述客户端连接数负相关;向所述服务器上传所述目标级别的第一质量参数的音视频数据。
可选地,所述判断自身是否作为主讲方,包括:在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方;在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件中包含的当前为主讲方的客户端的标识,判断自身是否作为主讲方;所述当前为主讲方的客户端的标识是所述服务器在接收到的音视频数据发生突变后,基于所述接收到的音视频数据确定的。
在本发明实施的第二方面,还提供了一种音视频质量调节方法,执行于服务器,所述方法包括:
在音视频群聊通信过程中,接收客户端上传的音视频数据;
针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,在所述针对每一所述客户端上传的音视频数据进行检测之前,该方法还包括:统计与本服务器建立通信连接的客户端的总数;所述针对每一所述客户端上传的音视频数据进行检测,具体包括:当统计的总数满足预设条件时,将针对每一所述客户端上传的音视频数据进行检测;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定。
在本发明实施的第三方面,还提供了一种音视频质量调节装置,应用于客户端,所述装置包括:
第一判断模块,用于在音视频群聊通信过程中,判断自身是否作为主讲方;
第一上传模块,用于在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
第二上传模块,用于在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,所述装置还包括:第二判断模块,用于判断向所述服务器上传的音视频数据是否在主画面处显示;所述第一上传模块,具体用于在所述第二判断模块判断出不在主画面处显示的情况下,向所述服务器上传所述第一质量参数的音视频数据;在所述第二判断模块判断出在主画面处显示的情况下,向所述服务器上传所述第二质量参数的音视频数据。
可选地,所述装置还包括:第三判断模块,用于从所述服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件;所述预设条件基于主讲方切换频率与连接量的对应关系设定;所述第一判断模块,具体用于在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。
可选地,所述第一上传模块包括:获取单元,用于在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;确定单元,用于基于所述客户端连接数,确定所述第一质量参数的目标级别,所述第一质量参数的目标级别与所述客户端连接数负相关;上传单元,用于向所述服务器上传所述目标级别的第一质量参数的音视频数据。
可选地,所述第一判断模块包括:第一判断单元,用于在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方;第二判断单元,用于在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件中包含的当前为主讲方的客户端的标识,判断自身是否作为主讲方;所述当前为主讲方的客户端的标识是所述服务器在接收到的音视频数据发生突变后,基于所述接收到的音视频数据确定的。
在本发明实施的第四方面,还提供了一种音视频质量调节装置,应用于服务器,所述装置包括:
接收模块,用于在音视频群聊通信过程中,接收客户端上传的音视频数据;
生成模块,用于针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
发送模块,用于向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,所述装置还包括:统计模块,用于统计与本服务器建立通信连接的客户端的总数;所述生成模块,具体用于当统计的总数满足预设条件时,将针对每一所述客户端上传的音视频数据进行检测;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定。
在本发明实施的又一方面,还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;存储器,用于存放计算机程序;处理器,用于执行存储器上所存放的程序时,实现上述任一由客户端执行的音视频质量调节方法,或者,实现上述任一由服务器执行的音视频质量调节方法。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机实现上述任一由客户端执行的音视频质量调节方法,或者,实现上述任一由服务器执行的音视频质量调节方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机实现上述任一由客户端执行的音视频质量调节方法,或者,实现上述任一由服务器执行的音视频质量调节方法。
本发明实施例提供的音视频质量调节方法、装置、电子设备及存储介质,客户端在音视频群聊通信过程中,判断自身是否作为主讲方;在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。由此可知,本发明实施例考虑到在音视频群聊通信过程中,客户端的角色不同会导致对客户端上传的音视频数据的质量需求不同,通常情况下对作为主讲方的客户端上传的音视频数据的质量要求较高,对不作为主讲方的客户端上传的音视频数据的质量要求较低,因此无需每个客户端均上传高质量的音视频数据。因此,客户端基于自身是否为主讲方,自适应地向服务器上传对应质量参数的音视频数据,相比于始终上传高质量的音视频数据来说,能够降低服务器的压力,节省带宽,减少数据流在传输过程中的质量损耗。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例中的一种客户端与服务器建立连接的示意图。
图2为本发明实施例中的一种客户端与服务器建立通道的示意图。
图3为本发明实施例中的一种客户端与服务器交互的示意图。
图4为本发明实施例中的一种服务器混流后的画面的示意图。
图5为本发明实施例中的一种音视频质量调节方法的步骤流程图。
图6为本发明实施例中的另一种音视频质量调节方法的步骤流程图。
图7为本发明实施例中的再一种音视频质量调节方法的步骤流程图。
图8为本发明实施例中的一种音视频质量调节装置的结构框图。
图9为本发明实施例中的另一种音视频质量调节装置的结构框图。
图10为本发明实施例中的一种电子设备的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
本发明实施例的音视频质量调节方法可以应用于音视频群聊场景下。音视频群聊场景可以包括但不限于:音视频会议,音视频电话,音视频聊天室,音视频网络教育,音视频应急指挥,音视频远程医疗,等等。在音视频群聊通信过程中,参与通信的客户端与服务器之间要建立连接,客户端与服务器基于该连接进行通信。图1为本发明实施例中的一种客户端与服务器建立连接的示意图。如图1所示,客户端与服务器之间建立WebSocket连接,通过WebSocket连接,客户端与服务器之间可以实现全双工通信,并且允许服务器主动发送信息给客户端。
在音视频群聊通信过程中,参与通信的客户端要向服务器上传音视频数据或者从服务器下载音视频数据,因此,参与通信的客户端与服务器之间还要建立通道,客户端基于通道向服务器上传音视频数据或者从服务器下载音视频数据。图2为本发明实施例中的一种客户端与服务器建立通道的示意图。如图2所示,客户端与服务器之间建立WebRTC(WebReal-Time Communication,网页实时通信)连接作为通道,其中包括上行发布通道和下行订阅通道。由于数据流可以包括音频数据流和视频数据流,因此一个WebRTC连接可以涵盖音频轨道和视频轨道这两个轨道。
在音视频群聊通信过程中,多个客户端可以参与通信,因此一个服务器可以与多个客户端进行交互。比如,图3为本发明实施例中的一种客户端与服务器交互的示意图。如图3所示,参与通信的客户端包括客户端1、客户端2、客户端3和客户端4,服务器分别与客户端1、客户端2、客户端3和客户端4进行交互,从而实现客户端1、客户端2、客户端3和客户端4同时进行多人音视频群聊通信。
本发明实施例中,为了避免由于每个客户端均按照高质量的音视频数据进行上传,导致服务器压力增大,造成数据流在传输过程中的质量损耗,客户端可以实时基于自身是否为主讲方,自适应地向服务器上传对应质量参数的音视频数据,从而降低服务器的压力,节省带宽,减少数据流在传输过程中的质量损耗。
本发明实施例中,客户端可以为具有音视频通信功能的APP(应用程序)客户端、网页客户端,等等。服务器可以为MCU(Multipoint Control Unit,多端控制器),等等。
图5为本发明实施例中的一种音视频质量调节方法的步骤流程图。图5所示的音视频质量调节方法执行于客户端。
如图5所示,音视频质量调节方法可以包括以下步骤:
步骤501,在音视频群聊通信过程中,判断自身是否作为主讲方。若否,则执行步骤502;若是,则执行步骤503。
步骤502,在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据。
步骤503,在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据。
在音视频群聊通信过程中,客户端的角色不同会导致对客户端上传的音视频数据的质量需求不同。在实现中,通常情况下对作为主讲方的客户端上传的音视频数据的质量要求较高,对不作为主讲方的客户端上传的音视频数据的质量要求较低。
因此,在音视频群聊通信过程中,客户端可以判断自身是否作为主讲方,进而根据判断结果确定上传的音视频数据的质量参数。客户端在自身不为主讲方时上传的音视频数据的质量,可以低于在自身为主讲方时上传的音视频数据的质量。因此,第一质量参数的音视频数据的质量低于第二质量参数的音视频数据的质量。其中,质量参数可以为码率、分辨率、帧率等参数任一或任意组合。
本发明实施例中,客户端基于自身是否为主讲方,自适应地向服务器上传对应质量参数的音视频数据,相比于始终上传高质量的音视频数据来说,能够降低服务器的压力,节省带宽,减少数据流在传输过程中的质量损耗。
图6为本发明实施例中的另一种音视频质量调节方法的步骤流程图。图6所示的音视频质量调节方法执行于客户端。
如图6所示,音视频质量调节方法可以包括以下步骤:
步骤601,从服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件。若是,则执行步骤602;若否,则不做处理。
服务器可以实时统计在当前的音视频群聊通信过程中,与本服务器建立通信连接的客户端连接数。比如,当监测到未参与该音视频群聊通信的客户端参与该音视频群聊通信后,服务器上的客户端连接数会增加;当监测到已参与该音视频群聊通信的客户端退出该音视频群聊通信后,服务器上的客户端连接数会减少。
可选地,客户端可以从服务器获取该服务器上的客户端连接数,并判断该客户端连接数是否满足预设连接数条件,以便确定是否需要执行本发明实施例的音视频质量调节方法。客户端在判断出客户端连接数满足预设连接数条件的情况下,可以继续执行后续步骤进行音视频质量的调节;在判断出客户端连接数不满足预设连接数条件的情况下,不进行音视频质量的调节。
其中,预设连接数条件可以基于所述服务器所能负载的连接量设定。
从服务器的处理能力角度考虑,在该服务器上的客户端连接数未超过该服务器所能负载的连接量的情况下,服务器的处理能力能够承担该客户端连接数的负载,因此可以无需进行后续的音视频质量的调节,从而避免对处理资源的不必要占用。在该服务器上的客户端连接数超过该服务器所能负载的连接量的情况下,服务器的处理能力不再能够承担该客户端连接数的负载,因此可以进行后续的音视频质量的调节,非主讲方客户端上传较低质量参数的音视频数据,从而降低服务器的压力。因此,预设条件可以设置为超过服务器所能负载的连接量。
从客户端的调节频率角度考虑,在该服务器上的客户端连接数较少的情况下,在音视频群聊通信过程中可能会频繁切换主讲方,也即主讲方的切换频率较高,相应地,客户端会因为频繁切换主讲方而频繁调节音视频质量参数,导致占用较多的处理资源,因此,在主讲方切换频率较高的情况下,可以无需进行后续的音视频质量的调节,从而避免对处理资源的过多占用。在该服务器上的客户端连接数较多的情况下,在音视频群聊通信过程中主讲方可能会相对固定,也即主讲方的切换频率较低,相应地,客户端也不会频繁调节音视频质量参数,因此,在主讲方切换频率较低的情况下,可以进行后续的音视频质量的调节。
可选地,在客户端连接数满足所述预设连接数条件的情况下,再判断该客户端切换为主讲方的切换频率是否满足预设切换条件,若客户端的切换频率满足所述预设切换条件的情况下,进一步再判断自身是否作为主讲方。其中,预设切换条件基于客户端的处理能力设定的,且客户端的处理能力能切换频率正相关。
可选地,还可以直接判断所述客户端连接数是否满足预设条件,此时,所述预设条件可以根据实际经验预先设置主讲方切换频率与连接量的对应关系,基于该对应关系设定预设条件。在实现中,可以设置第一主讲方切换频率对应的连接量为小于等于第一预设阈值,第二主讲方切换频率对应的连接量为大于第一预设阈值,第一主讲方切换频率高于第二主讲方切换频率。因此,预设条件可以设置为超过第一主讲方切换频率对应的最大连接量,也即预设条件为超过第一预设阈值。对于第一预设阈值的具体数值,可以根据实际经验设置任意适用的数值。比如,可以根据通常情况下在音视频群聊通信过程中存在频繁切换主讲方的情况时,参与通信的客户端的数量,设置该第一预设阈值。比如,设置第一预设阈值为2、3,等等,本发明实施例对此不做限制。
步骤602,在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。若是,则执行步骤605;若否,则执行步骤603。
可选地,客户端判断自身是否作为主讲方的过程,可以包括以下步骤A1~A2:
A1,在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方。
通常情况下,在初始通信时,音视频群聊通信的发起方一般作为主讲方。因此,在初始参与音视频群聊通信时,如果该客户端自身为通信发起方,则可以确定该客户端为主讲方;否则,确定该客户端不为主讲方。
A2,在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件判断自身是否作为主讲方。
在音视频群聊通信过程中,服务器会接收各客户端上传的音视频数据,并针对每一客户端上传的音视频数据进行检测。若服务器检测到客户端所上传的音视频数据发生突变,则服务器可以基于客户端所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方,并生成数据流更新事件(stream-update)。
可选地,客户端所上传的音视频数据发生突变的情况,可以包括但不限于:该客户端停止上传音视频数据,该客户端开始上传音视频数据,该客户端上传信息共享数据,该客户端上传的音视频数据的种类发生变化(比如由只上传视频数据变为上传音频数据和视频数据等)等等。
可选地,通常情况下,服务器可以将当前正在讲话的客户端确定为主讲方。因此,服务器基于客户端所上传的音视频数据,可以分析出该客户端上传的音视频数据是否包含音频数据,如果该客户端上传的音视频数据包含音频数据,则确定该客户端为主讲方。
在一种可选实施方式中,服务器可以生成携带当前为主讲方的客户端的标识(比如当前为主讲方的客户端的ID)的数据流更新事件,并将该数据流更新事件分别发送至各客户端。在实现中,服务器可以通过预先与客户端建立的WebSocket连接,将数据流更新事件发送至客户端。针对任意一个客户端来说,若该客户端接收到所述服务器发送的数据流更新事件,则通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否作为主讲方。如果当前为主讲方的客户端的标识为自身的标识,则该客户端可以确定自身为主讲方,否则,确定自身不为主讲方。
在另一种可选实施方式中,服务器可以针对一个客户端,生成一个该客户端对应的数据流更新事件,该数据流更新事件中携带该客户端是否为主讲方的标识(比如,标识为“是”或“否”),并将数据流更新事件分别发送至各自对应的客户端。针对任意一个客户端来说,若该客户端接收到所述服务器发送的数据流更新事件,则通过解析接收到数据流更新事件,得到自身是否为主讲方的标识,基于所述是否为主讲方的标识判断自身是否作为主讲方。如果是否为主讲方的标识为是,则该客户端可以确定自身为主讲方,如果是否为主讲方的标识为否,则该客户端可以确定自身不为主讲方。
在另一种可选实施方式中,服务器可以针对当前为主讲方的客户端生成携带该客户端为主讲方的标识的数据流更新事件,并将该数据流更新事件发送至当前为主讲方的客户端,以及针对前一次为主讲方的客户端生成携带该客户端不为主讲方的标识的数据流更新事件,并将该数据流更新事件发送至前一次为主讲方的客户端。若客户端接收到所述服务器发送的数据流更新事件,则通过解析接收到数据流更新事件,得到自身是否为主讲方的标识,基于所述是否为主讲方的标识判断自身是否作为主讲方。
可选地,客户端判断自身是否作为主讲方的过程,可以包括:在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件判断自身是否作为主讲方。在该种方式下,由于客户端能够动态调节向服务器上传的音视频数据的质量参数,因此在客户端初始参与音视频群聊通信时,可以默认向服务器上传第一质量参数的音视频数据。
步骤603,在不作为主讲方的情况下,判断向所述服务器上传的音视频数据是否在主画面处显示。若是,则执行步骤605;若否,则执行步骤604。
在音视频群聊通信过程中,若客户端均上传音视频数据,则服务器通过与各客户端建立的WebRTC连接,收集各客户端上传的音视频数据,对多路数据流进行混流,之后向客户端输出混合数据流。服务器在混流过程中,会根据客户端的角色信息,分配各客户端上传的数据流在混合数据流中的画面比例。比如,主讲方客户端的数据流占比大,参与方客户端的数据流以相同的宽高比占据较小部分。图4为本发明实施例中的一种服务器混流后的画面的示意图。如图4所示,主讲方的画面占比最大,作为主画面,参与方1、参与方2和参与方3这三者的画面占比小。
但是,如果某个客户端发起信息共享,则客户端上传的音视频数据(该种情况下的音视频数据为信息共享数据)将会在主画面处显示。该种情况下,发起信息共享的客户端可能为主讲方,也可能不为主讲方,但是即使不作为主讲方,发起信息共享的客户端也需要上传高质量的音视频数据。比如,由客户端A发起信息共享,上传信息共享数据,但客户端B是主讲方,在讨论时间段,客户端C可与客户端A和客户端B进行讨论。在该场景下,客户端A作为主画面的上传者,客户端B作为主讲方,应该均上传高质量的音视频数据,客户端C可以上传低质量的音视频数据。其中,信息共享可以包括但不限于:文件共享、程序共享、桌面共享,等等。因此,客户端在判断出自身不作为主讲方的情况下,还进一步判断向所述服务器上传的音视频数据是否在主画面处显示。
可选地,如果某个客户端发起信息共享,则该客户端与服务器之间建立新的WebRTC连接,该客户端通过该WebRTC连接向服务器上传信息共享数据。当服务器接收到该客户端上传的信息共享数据后,服务器与其他客户端之间分别建立新的WebRTC连接,其他客户端通过WebRTC连接从服务器下载信息共享数据。客户端发起信息共享后,服务器会检测到上传的音视频数据发生突变,因此服务器会基于客户端所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方,并生成数据流更新事件发送至客户端。服务器可以在数据流更新事件中携带当前在主画面处显示的客户端的标识。客户端接收到数据流更新时间后,解析得到当前在主画面处显示的客户端的标识,基于当前在主画面处显示的客户端的标识判断向服务器上传的音视频数据是否在主画面处显示。
可选地,通常情况下,信息共享的发起方上传的音视频数据(也即信息共享数据)会在主画面显示,因此,客户端可以基于自身是否为信息共享的发起方,判断向服务器上传的音视频数据是否在主画面处显示。如果自身为信息共享的发起方,则向服务器上传的音视频数据在主画面处显示。
步骤604,向服务器上传第一质量参数的音视频数据。
客户端在判断出自身不为主讲方,并且向服务器上传的音视频数据不在主画面处显示的情况下,向服务器上传第一质量参数的音视频数据。
服务器在混流过程中,通常会根据服务器上的客户端连接数设置特定的画面比例,客户端连接数越小,每个参与方的画面占比越大,参与方可以上传质量相对较高的音视频数据。可选地,可以预设第一质量参数包含多个级别。级别高的第一质量参数的音视频数据的质量,高于级别低的第一质量参数的音视频数据的质量。客户端可以根据服务器上的客户端连接数,选择对应级别的第一质量参数。
因此,向服务器上传第一质量参数的音视频数据的步骤,可以包括:在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;基于所述客户端连接数,确定所述第一质量参数的目标级别;向所述服务器上传所述目标级别的第一质量参数的音视频数据。其中,第一质量参数的目标级别与所述客户端连接数负相关。
比如,可以设置第一质量参数包含第一级别和第二级别,第一级别的音视频数据的质量,高于第二级别的音视频数据的质量。如果客户端连接数小于第二预设阈值,则可以选择第一级别作为目标级别,如果客户端连接数大于等于第二预设阈值,则可以选择第二级别作为目标级别。对于第二预设阈值的具体数值,可以根据实际经验设置任意适用的数值。比如,可以根据通常情况下参与方的画面占比发生明显变化时,参与通信的客户端的数量,设置该第二预设阈值。比如,设置第二预设阈值为6、8、10,等等,本发明实施例对此不做限制。
步骤605,向服务器上传第二质量参数的音视频数据。
客户端在判断出自身为主讲方的情况下,或者自身不为主讲方并且向服务器上传的音视频数据在主画面处显示的情况下,向服务器上传第二质量参数的音视频数据。
在一种可选实施方式中,第一质量参数和第二质量参数可以如下表一所示。其中,高级别表示第二质量参数、中级别和低级别表示两个级别的第一质量参数。
表一
本发明实施例中,在数据流通信模式下,客户端基于角色信息和服务器上的客户端连接数,对上传至服务器的音视频数据的质量参数进行调节,以及在信息共享场景下,基于对音视频数据的需求,对上传至服务器的音视频数据的质量参数进行调节,能够减少带宽消耗,降低服务器的处理压力,提高服务器的服务质量,提高音视频数据的质量,改善用户体验,同时达到节约资源成本的目的。
图7为本发明实施例中的再一种音视频质量调节方法的步骤流程图。图7所示的音视频质量调节方法执行于服务器。
如图7所示,音视频质量调节方法可以包括以下步骤:
步骤701,在音视频群聊通信过程中,接收客户端上传的音视频数据。
步骤702,针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件。
步骤703,向所述客户端下发所述数据流更新事件。
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
对于步骤701~703的具体过程,参照上述实施例中步骤602的相关描述即可,本发明实施例在此不再详细论述。
可选地,与上述实施例中的步骤601相对应,服务器在针对每一所述客户端上传的音视频数据进行检测之前,还可以统计与本服务器建立通信连接的客户端的总数,并判断统计的总数是否满足预设条件,以便确定是否需要针对每一所述客户端上传的音视频数据进行检测。当统计的总数满足预设条件时,将针对每一所述客户端上传的音视频数据进行检测。对于预设条件的具体说明,可以参照上述步骤601的相关描述,本发明实施例在此不再详细论述。
图8为本发明实施例中的一种音视频质量调节装置的结构框图。图8所示的音视频质量调节装置应用于客户端。
如图8所示,音视频质量调节装置可以包括以下模块:
第一判断模块801,用于在音视频群聊通信过程中,判断自身是否作为主讲方;
第一上传模块802,用于在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
第二上传模块803,用于在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,所述装置还包括:第二判断模块,用于判断向所述服务器上传的音视频数据是否在主画面处显示;所述第一上传模块802,具体用于在所述第二判断模块判断出不在主画面处显示的情况下,向所述服务器上传所述第一质量参数的音视频数据;在所述第二判断模块判断出在主画面处显示的情况下,向所述服务器上传所述第二质量参数的音视频数据。
可选地,所述装置还包括:第三判断模块,用于从所述服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定;所述第一判断模块801,具体用于在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。
可选地,所述第一上传模块802包括:获取单元,用于在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;确定单元,用于基于所述客户端连接数,确定所述第一质量参数的目标级别,所述第一质量参数的目标级别与所述客户端连接数负相关;上传单元,用于向所述服务器上传所述目标级别的第一质量参数的音视频数据。
可选地,所述第一判断模块801包括:第一判断单元,用于在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方;第二判断单元,用于在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件中包含的当前为主讲方的客户端的标识,判断自身是否作为主讲方;所述当前为主讲方的客户端的标识是所述服务器在接收到的音视频数据发生突变后,基于所述接收到的音视频数据确定的。
图9为本发明实施例中的另一种音视频质量调节装置的结构框图。图8所示的音视频质量调节装置应用于服务器。
如图9所示,音视频质量调节装置可以包括以下模块:
接收模块901,用于在音视频群聊通信过程中,接收客户端上传的音视频数据;
生成模块902,用于针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
发送模块903,用于向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,所述装置还包括:统计模块,用于统计与本服务器建立通信连接的客户端的总数;所述生成模块902,具体用于当统计的总数满足预设条件时,将针对每一所述客户端上传的音视频数据进行检测;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定。
本发明实施例中,在数据流通信模式下,客户端基于角色信息和服务器上的客户端连接数,对上传至服务器的音视频数据的质量参数进行调节,以及在信息共享场景下,基于对音视频数据的需求,对上传至服务器的音视频数据的质量参数进行调节,能够减少带宽消耗,降低服务器的处理压力,提高服务器的服务质量,提高音视频数据的质量,改善用户体验,同时达到节约资源成本的目的。
本发明实施例还提供了一种电子设备,如图10所示,包括处理器1001、通信接口1002、存储器1003和通信总线1004,其中,处理器1001,通信接口1002,存储器1003通过通信总线1004完成相互间的通信。
存储器1003,用于存放计算机程序;
处理器1001,用于执行存储器1003上所存放的程序。
在所述电子设备作为客户端时,处理器1001执行存储器1003上所存放的程序时,实现如下步骤:
在音视频群聊通信过程中,判断自身是否作为主讲方;
在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,在向服务器上传第一质量参数的音视频数据之前,还包括:判断向所述服务器上传的音视频数据是否在主画面处显示;所述向服务器上传第一质量参数的音视频数据,包括:在判断出不在主画面处显示的情况下,向所述服务器上传所述第一质量参数的音视频数据;在判断出在主画面处显示的情况下,向所述服务器上传所述第二质量参数的音视频数据。
可选地,在判断自身是否作为主讲方之前,还包括:从所述服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定;所述判断自身是否作为主讲方包括:在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。
可选地,所述向服务器上传第一质量参数的音视频数据,包括:在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;基于所述客户端连接数,确定所述第一质量参数的目标级别;所述第一质量参数的目标级别与所述客户端连接数负相关;向所述服务器上传所述目标级别的第一质量参数的音视频数据。
可选地,所述判断自身是否作为主讲方,包括:在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方;在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件中包含的当前为主讲方的客户端的标识,判断自身是否作为主讲方;所述当前为主讲方的客户端的标识是所述服务器在接收到的音视频数据发生突变后,基于所述接收到的音视频数据确定的。
在所述电子设备作为服务器时,处理器1001执行存储器1003上所存放的程序时,实现如下步骤:
在音视频群聊通信过程中,接收客户端上传的音视频数据;
针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
可选地,在所述针对每一所述客户端上传的音视频数据进行检测之前,该方法还包括:统计与本服务器建立通信连接的客户端的总数;所述针对每一所述客户端上传的音视频数据进行检测,具体包括:当统计的总数满足预设条件时,将针对每一所述客户端上传的音视频数据进行检测;所述预设条件基于所述服务器所能负载的连接量和/或主讲方切换频率与连接量的对应关系设定。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机实现上述实施例中任一由客户端执行的音视频质量调节方法,或者,实现上述实施例中任一由服务器执行的音视频质量调节方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机实现上述实施例中任一由客户端执行的音视频质量调节方法,或者,实现上述实施例中任一由服务器执行的音视频质量调节方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (10)
1.一种音视频质量调节方法,其特征在于,执行于客户端,所述方法包括:
在音视频群聊通信过程中,判断自身是否作为主讲方;
在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
2.根据权利要求1所述的方法,其特征在于,
在向服务器上传第一质量参数的音视频数据之前,还包括:判断向所述服务器上传的音视频数据是否在主画面处显示;
所述向服务器上传第一质量参数的音视频数据,包括:
在判断出不在主画面处显示的情况下,向所述服务器上传所述第一质量参数的音视频数据;
在判断出在主画面处显示的情况下,向所述服务器上传所述第二质量参数的音视频数据。
3.根据权利要求1所述的方法,其特征在于,
在判断自身是否作为主讲方之前,还包括:从所述服务器获取所述服务器上的客户端连接数,并判断所述客户端连接数是否满足预设条件;所述预设条件基于主讲方切换频率与连接量的对应关系设定;
所述判断自身是否作为主讲方包括:在所述客户端连接数满足所述预设条件的情况下,判断自身是否作为主讲方。
4.根据权利要求1所述的方法,其特征在于,所述向服务器上传第一质量参数的音视频数据,包括:
在所述第一质量参数包含多个级别的情况下,从所述服务器获取所述服务器上的客户端连接数;
基于所述客户端连接数,确定所述第一质量参数的目标级别;所述第一质量参数的目标级别与所述客户端连接数负相关;
向所述服务器上传所述目标级别的第一质量参数的音视频数据。
5.根据权利要求1所述的方法,其特征在于,所述判断自身是否作为主讲方,包括:
在初始参与所述音视频群聊通信时,基于自身是否为通信发起方,判断自身是否作为主讲方;
在参与所述音视频群聊通信的过程中,若接收到所述服务器发送的数据流更新事件,则基于所述数据流更新事件中包含的当前为主讲方的客户端的标识,判断自身是否作为主讲方;所述当前为主讲方的客户端的标识是所述服务器在接收到的音视频数据发生突变后,基于所述接收到的音视频数据确定的。
6.一种音视频质量调节方法,其特征在于,执行于服务器,所述方法包括:
在音视频群聊通信过程中,接收客户端上传的音视频数据;
针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
7.一种音视频质量调节装置,其特征在于,应用于客户端,所述装置包括:
第一判断模块,用于在音视频群聊通信过程中,判断自身是否作为主讲方;
第一上传模块,用于在不作为主讲方的情况下,向服务器上传第一质量参数的音视频数据;
第二上传模块,用于在作为主讲方的情况下,向所述服务器上传第二质量参数的音视频数据;
其中,所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
8.一种音视频质量调节装置,其特征在于,应用于服务器,所述装置包括:
接收模块,用于在音视频群聊通信过程中,接收客户端上传的音视频数据;
生成模块,用于针对每一所述客户端上传的音视频数据进行检测,若所上传的音视频数据发生突变,则基于所上传的音视频数据,确定上传该音视频数据的客户端当前是否为主讲方;生成携带当前为主讲方的客户端的标识的数据流更新事件;
发送模块,用于向所述客户端下发所述数据流更新事件;
其中,所述客户端通过解析接收到数据流更新事件,得到当前为主讲方的客户端的标识,基于所述当前为主讲方的客户端的标识判断自身是否为主讲方;若为主讲方,则向所述服务器上传第二质量参数的音视频数据;若不是主讲方,则向所述服务器上传第一质量参数的音视频数据,且所述第一质量参数的音视频数据的质量低于所述第二质量参数的音视频数据。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现如权利要求1-5任一所述的音视频质量调节方法,或者,实现如权利要求6所述的音视频质量调节方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5任一所述的音视频质量调节方法,或者,实现如权利要求6所述的音视频质量调节方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110486598.XA CN113347472A (zh) | 2021-04-30 | 2021-04-30 | 音视频质量调节方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110486598.XA CN113347472A (zh) | 2021-04-30 | 2021-04-30 | 音视频质量调节方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113347472A true CN113347472A (zh) | 2021-09-03 |
Family
ID=77469565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110486598.XA Pending CN113347472A (zh) | 2021-04-30 | 2021-04-30 | 音视频质量调节方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113347472A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003163906A (ja) * | 2001-11-27 | 2003-06-06 | Nippon Telegr & Teleph Corp <Ntt> | テレビ会議システム及びテレビ会議方法 |
CN107888866A (zh) * | 2016-09-30 | 2018-04-06 | 中兴通讯股份有限公司 | 多方视频会议控制方法、装置及会议视频服务器 |
US20180376108A1 (en) * | 2017-06-23 | 2018-12-27 | Cisco Technology, Inc. | Speaker anticipation |
CN112422879A (zh) * | 2019-08-20 | 2021-02-26 | 华为技术有限公司 | 媒体能力动态调整方法及装置 |
CN112422591A (zh) * | 2021-01-25 | 2021-02-26 | 北京拓课网络科技有限公司 | 一种传输视频流数据的方法、装置及电子设备 |
-
2021
- 2021-04-30 CN CN202110486598.XA patent/CN113347472A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003163906A (ja) * | 2001-11-27 | 2003-06-06 | Nippon Telegr & Teleph Corp <Ntt> | テレビ会議システム及びテレビ会議方法 |
CN107888866A (zh) * | 2016-09-30 | 2018-04-06 | 中兴通讯股份有限公司 | 多方视频会议控制方法、装置及会议视频服务器 |
US20180376108A1 (en) * | 2017-06-23 | 2018-12-27 | Cisco Technology, Inc. | Speaker anticipation |
CN112422879A (zh) * | 2019-08-20 | 2021-02-26 | 华为技术有限公司 | 媒体能力动态调整方法及装置 |
CN112422591A (zh) * | 2021-01-25 | 2021-02-26 | 北京拓课网络科技有限公司 | 一种传输视频流数据的方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6453336B1 (en) | Video conferencing with adaptive client-controlled resource utilization | |
CN111601118B (zh) | 直播视频的处理方法、系统、装置及终端 | |
CN111147893B (zh) | 一种视频自适应方法、相关设备以及存储介质 | |
WO2020220902A1 (zh) | 视频资源的传输参数分发方法及装置 | |
US20170155870A1 (en) | Priority of uplink streams in video switching | |
EP2798516A1 (en) | Video conferencing with unlimited dynamic active participants | |
CN109218653B (zh) | 一种视频会议的多窗口显示方法、装置、设备和系统 | |
US10812757B2 (en) | Communication system | |
CN113992883A (zh) | 视频会议处理方法、处理设备、会议系统以及存储介质 | |
CN109309805B (zh) | 一种视频会议的多窗口显示方法、装置、设备和系统 | |
CN115209189B (zh) | 一种视频流传输方法、系统、服务器及存储介质 | |
US11936698B2 (en) | Systems and methods for adaptive video conferencing | |
CN113347472A (zh) | 音视频质量调节方法、装置、电子设备及存储介质 | |
CN108347579B (zh) | 带宽控制方法和装置 | |
CN111314738A (zh) | 数据传输方法和装置 | |
US11463655B2 (en) | Mediation method and computer readable recording medium | |
WO2017085255A1 (en) | Communication system | |
CN114866520B (zh) | 通信的处理方法、系统、电子设备及存储介质 | |
CN114978935B (zh) | 服务质量资源申请方法、设备及存储介质 | |
CN111404908B (zh) | 数据交互方法、装置、电子设备及可读存储介质 | |
CN104410620B (zh) | 一种信息处理方法及服务器 | |
CN115052172B (zh) | 音视频数据传输方法、装置、电子设备和存储介质 | |
CN112738445A (zh) | 多线路推流方法、装置、存储介质及电子设备 | |
KR20160133255A (ko) | 영상회의 서비스를 위한 신호 처리 장치 및 신호 처리 방법 | |
CN118158138A (zh) | 数据分发控制方法、装置、服务器及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210903 |
|
RJ01 | Rejection of invention patent application after publication |