CN106488265A - 一种发送媒体流的方法和装置 - Google Patents

一种发送媒体流的方法和装置 Download PDF

Info

Publication number
CN106488265A
CN106488265A CN201610891373.1A CN201610891373A CN106488265A CN 106488265 A CN106488265 A CN 106488265A CN 201610891373 A CN201610891373 A CN 201610891373A CN 106488265 A CN106488265 A CN 106488265A
Authority
CN
China
Prior art keywords
media stream
video
target terminal
frame
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610891373.1A
Other languages
English (en)
Inventor
吕现广
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN201610891373.1A priority Critical patent/CN106488265A/zh
Publication of CN106488265A publication Critical patent/CN106488265A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/23805Controlling the feeding rate to the network, e.g. by controlling the video pump
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401Monitoring of the client buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content

Abstract

本发明公开了一种发送媒体流的方法和装置,属于计算机技术领域。所述方法包括:在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。采用本发明,可以提高视频直播的流畅性。

Description

一种发送媒体流的方法和装置
技术领域
本发明涉及计算机技术领域,特别涉及一种发送媒体流的方法和装置。
背景技术
随着终端技术的发展,终端的应用越来越广泛,功能也越来越强大,用户可以通过终端观看视频。其中,直播视频是用户经常观看的视频之一。
在直播的过程中,发布直播视频的终端(如主播终端)可以通过摄像部件拍摄直播视频,并可以将该直播视频的媒体流发送给服务器。其中,媒体流包括视频流和音频流。当观众想要观看该直播视频时,可以通过终端(可称为观众终端)向服务器发送视频请求,视频请求中可以携带有该直播视频的标识。服务器接收到该视频请求后,可以将接收到的该直播视频的媒体流实时转发给该终端,该终端接收到该媒体流后,可以对该媒体流进行编解码,然后进行播放,以使观众可以观看该直播视频。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
观众终端的网络环境各不相同,而且通常不太稳定,由于直播视频的清晰度通常较高,所以,当观众终端的网络环境较差时,容易出现视频卡顿的情况,导致视频直播的流畅性较差。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种发送媒体流的方法和装置。所述技术方案如下:
第一方面,提供了一种发送媒体流的方法,所述方法包括:
在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
可选的,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
可选的,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
可选的,所述方法还包括:
确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
可选的,所述方法还包括:
如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
第二方面,提供了一种发送媒体流的装置,所述装置包括:
获取模块,用于在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
第一发送模块,用于如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
可选的,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述第一发送模块,用于:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
可选的,所述第一发送模块,包括:
获取子模块,用于如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定子模块,用于确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
发送子模块,用于当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
可选的,所述装置还包括:
第一确定模块,用于确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
第二发送模块,用于确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
可选的,所述装置还包括:
第三发送模块,用于如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
本发明实施例提供的技术方案带来的有益效果是:
本发明实施例中,在向目标终端发送目标直播视频的第一媒体流的过程中,获取目标终端对应的发送状态信息,第一媒体流包括音频流和第一码率的第一视频流,如果发送状态信息满足预设的拥塞状态条件,则向目标终端发送目标直播视频的第二媒体流,第二媒体流包括音频流和第二码率的第二视频流,第二码率小于第一码率,这样,对于网络环境较差的终端,可以发送码率较低的媒体流,从而可以防止出现视频卡顿的情况,提高视频直播的流畅性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种系统框架图;
图2是本发明实施例提供的一种发送媒体流的方法流程图;
图3是本发明实施例提供的一种信息交互示意图;
图4是本发明实施例提供的一种发送媒体流的示意图;
图5是本发明实施例提供的一种发送媒体流的示意图;
图6是本发明实施例提供的一种发送媒体流的装置结构示意图;
图7是本发明实施例提供的一种发送媒体流的装置结构示意图;
图8是本发明实施例提供的一种发送媒体流的装置结构示意图;
图9是本发明实施例提供的一种流媒体服务器的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
本发明实施例提供了一种发送媒体流的方法,该方法的执行主体为流媒体服务器。其中,流媒体服务器可以某视频直播应用程序的后台服务器。该流媒体服务器可以包括处理器、存储器和收发器,其中,存储器可以用于对接收到的媒体流进行缓存;收发器可以用于向目标终端发送目标直播视频的媒体流(如第一媒体流),处理器可以用于获取目标终端对应的发送状态信息,并判断发送状态信息是否满足预设的拥塞状态条件,如果满足,则可以控制收发器向目标终端发送目标直播视频的码率较低的第二媒体流。流媒体服务器可以与转码服务器连接,也可以与其他流媒体服务器连接,如图1所示,为本发明实施例提供的系统框架图,其中包括发布直播视频的终端、转码服务器、多个流媒体服务器和播放直播视频的终端。
如图2所示,该方法的处理流程可以包括如下的步骤:
步骤201,在向目标终端发送目标直播视频的第一媒体流的过程中,获取目标终端对应的发送状态信息,第一媒体流包括音频流和第一码率的第一视频流。
在实施中,主播终端可以通过摄像部件拍摄直播视频,并可以将该直播视频的媒体流发送给某一流媒体服务器(可称为源流媒体服务器)。其中,媒体流可以包括视频流和音频流,视频流中可以包含多个图像帧,图像帧可以分为关键帧和非关键帧。其中,主播终端发送给源流媒体服务器的媒体流可称为原始媒体流,原始媒体流中的视频流的码率通常较高。源流媒体服务器接收到原始媒体流后,可以将原始媒体流中的视频流发送给转码服务器,转码服务器可以对该视频流进行实时转码,将该视频流转码成不同码率的视频流,转码后的视频流的码率可以小于原始媒体流中的视频流的码率。
例如,原始媒体流中的视频流的码率为V0,转码服务器对该视频流转码后,可以得到V0码率的视频流,以及V0码率的视频流。
另外,视频流中还可以包括每个图像帧的时间戳,图像帧的时间戳可以是该图像帧在直播视频中的时间信息,如0.00秒、0.01秒,或0.02秒等;音频帧流中也可以包括音频帧的时间戳,音频帧的时间戳可以是音频帧在直播视频中的时间信息,如0.00秒、0.01秒,或0.02秒等,流媒体服务器可以根据时间戳来确定待发送的图像帧和音频帧,从而保证音频和视频的同步。
转码服务器对视频流进行转码后,可以将转码后的视频流发送给各流媒体服务器(转码后视频帧的时间戳不变),各流媒体服务器中可以设置有视频接收缓存区,各流媒体服务器可以将接收到的图像帧缓存到本地;或者,转码服务器也可以将转码后的媒体流发送给部分流媒体服务器,其他流媒体也可以在需要时拉取媒体流,本实施例不做限定。同理,流媒体服务器可以设置音频接收缓存区,流媒体服务器可以从源流媒体服务器中,获取原始媒体流的音频流,并可以在接收到某用户的视频请求时,将音频流和视频流发送给用户的终端,以使用户可以观看该直播视频。
在用户观看直播视频(即目标直播视频)的过程中,与用户的目标终端连接的流媒体服务器可以向该目标终端发送目标直播视频的第一媒体流,其中,第一媒体流包括音频流和第一码率的第一视频流。在向目标终端发送第一媒体流的过程中,该流媒体服务器可以获取该目标终端对应的发送状态信息,发送状态信息可以包括目标终端对应的视频缓存数据量或音频缓存数据量,还可以包括目标终端当前的网络状态信息,如带宽和丢包率等。
需要说明的是,流媒体服务器接收到目标终端发送的视频请求后,可以先向目标终端发送原始媒体流,后续再根据目标终端对应的发送状态信息进行切换,本实施例中的第一媒体流可以是原始媒体流,也可以是切换后的其他码率的媒体流,流媒体服务器可以从源流媒体服务器获取原始媒体流中的视频流,也可以从转码服务器或其他流媒体服务器中获取原始媒体流中的视频流,本实施例不做限定。
步骤202,如果发送状态信息满足预设的拥塞状态条件,则向目标终端发送目标直播视频的第二媒体流。
其中,第二媒体流可以包括上述音频流和第二码率的第二视频流,第二码率可以小于第一码率。
在实施中,流媒体服务器可以接收转码服务器或其他流媒体服务器发送的目标直播视频的多个码率的视频流,并可以分别对应每个视频流设置视频接收缓存区。该流媒体服务器获取到目标终端对应的发送状态信息后,可以判断该发送状态信息是否满足预设的拥塞状态条件,如果该发送状态信息满足预设的拥塞状态条件,则可以停止向目标终端发送音频帧和第一视频流的图像帧,然后该流媒体服务器可以从第二视频流对应的视频接收缓存区中,获取接收时间离当前时间最近的第二视频流的图像帧,并可以从音频接收缓存区中,获取目标直播视频的音频帧,然后从获取到的第二视频流的图像帧和音频帧开始,向目标终端发送目标直播视频的第二媒体流。例如,流媒体服务器向目标终端发送的第一媒体流为音频流和码率为V0的视频流,当流媒体服务器检测到目标终端的发送状态信息满足预设的拥塞状态条件,则可以向目标终端发送音频流和码率为V0的视频流,如图3所示,其中,A0为音频流。
流媒体服务器切换媒体流后,可以执行上述步骤201的处理,如果目标终端的发送状态信息仍满足预设的拥塞状态条件,则可以由第二媒体流,切换至码率更低的媒体流。例如,可以从码率为V0的视频流切换至码率为V0的视频流。在发送预设的最低码率的视频流和音频流时,可以采用音频优先机制进行发送。也即,在每发送完一个图像帧后,流媒体服务器可以查询视频发送缓存区中是否接收到了新的关键帧,若接收到新的关键帧,则可以在视频发送缓存区中,删除该关键帧之前的所有图像帧(删除的图像帧中可能会包含关键帧),然后从该关键帧开始继续发送视频流,这样可以进一步降低视频流的码率,提高直播视频播放的流畅性,同时也可以尽可能保证音视频同步。
可选的,目标终端对应的发送状态信息可以包括目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,相应的,步骤202的处理过程可以如下:如果视频缓存数据量大于第一数据量阈值,或音频缓存数据量大于第二数据量阈值,则向目标终端发送目标直播视频的第二媒体流。
在实施中,该流媒体服务器与目标终端建立连接后,可以为该目标终端设置视频发送缓存区和音频发送缓存区,然后分别从视频接收缓存区和音频接收缓存区中,获取接收时间离当前时间最近的音频帧和图像帧,对应的存储到目标终端的音频发送缓存区和视频发送缓存区中,流媒体服务器可以按照存储顺序,对音频发送缓存区中的音频帧,以及视频发送缓存区中图像帧,依次进行发送,发送后,可以删除已发送的音频帧和图像帧。
该流媒体服务器可以确定预设时长内(如500毫秒内),该目标终端的音频发送缓存区中的音频缓存数据量,以及视频发送缓存区中的视频缓存数据量,如果视频缓存数据量大于第一数据量阈值,或者音频缓存数据量大于第二数据量阈值,则可以判定目标终端发生卡顿,然后可以向目标终端发送目标直播视频的第二媒体流。其中,第一数据量阈值和第二数据量阈值可以相同也可以不同。
可选的,转码后的视频流会滞后于未转码的音频流,为了使视频和音频保持同步,相应的,步骤202的处理过程可以如下:如果发送状态信息满足预设的拥塞状态条件,则停止向目标终端发送第一媒体流,并获取第二视频流;确定第一音频帧,第一音频帧为获取到第二视频流中的第一个图像帧时接收到的音频帧;当获取到第二视频流中的第一个关键帧时,从第一个关键帧和第一音频帧开始,向目标终端发送第二媒体流。
在实施中,如果该流媒体服务器判定发送状态信息满足预设的拥塞状态条件,则可以停止向目标终端发送第一媒体流,包括停止向目标终端发送音频帧和第一视频流中的图像帧,并可以清空目标终端的视频发送缓存区中的数据,以及音频发送缓存区中的数据。然后,该流媒体服务器可以获取第二视频流,对于流媒体服务器已经接收第二视频流的情况,媒体服务器可以从第二视频流的视频接收缓存区中,获取接收时间最近的第二视频流的图像帧(即获取到第二视频流中的第一个图像帧);对于流媒体服务器未接收第二视频流的情况,该流媒体服务器可以从其他流媒体服务器,或者转码服务器中,拉取第二视频流,并可以设置第二视频流的视频接收缓存区,将接收到的第二视频流的图像帧存储到该视频接收缓存区中。流媒体服务器可以从该第一个图像帧开始,将获取到的第一个图像帧、以及第二视频流中第一个图像帧之后的图像帧,添加到目标终端对应的音频发送缓存区中。
在上述过程中,流媒体服务器可以持续接收音频帧,并且可以确定获取到第二视频流中的第一个图像帧时接收到的音频帧(即第一音频帧)。该流媒体服务器可以从第一音频帧开始,将获取到的第一音频帧以及第一音频帧之后的音频帧添加到目标终端对应的音频发送缓存区中。流媒体服务器还可以实时检测获取到的图像帧是否为关键帧,当获取到第二视频流中的第一个关键帧时,从该第一个关键帧和第一音频帧开始,向目标终端发送第二媒体流,如图4所示,其中,音频发送缓存区中的音频帧,以及视频发送缓存区中的视频帧,都可以以队列的形式进行存储。
在实际中,由于第二视频流是转码得到的,转码处理会导致一定的时延,所以该流媒体服务器接收到的第二视频流的视频帧,会滞后于音频帧,也即,接收到的图像帧的时间戳的时间,会早于音频帧的时间戳的时间。基于上述处理,可以有效的减小音频帧和图像帧的时间差,提高音频和视频的同步性。
可选的,流媒体服务器还可以向目标终端发送预计等待时长,相应的处理过程可以如下:确定第一音频帧的时间戳和第一个图像帧的时间戳的时间差,并根据第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定第一个图像帧和第一个关键帧时间间隔;确定时间差和预计接收时间间隔的和值,得到预计等待时长,向目标终端发送缓冲通知消息,缓冲通知消息中携带有预计等待时长。
在实施中,流媒体服务器可以计算第一音频帧的时间戳和第一个图像帧的时间戳的时间差。流媒体服务器还可以根据第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定第一个图像帧和第一个关键帧时间间隔。其中,图像组为一个关键帧和该关键帧相关的非关键帧组成的图像组,并且,该图像组中的第一个图像帧一般为关键帧,图像组包含的帧数通常是固定的。例如,图像组包含的帧数为20,流媒体服务器获取到的第一个图像帧在所属图像组中的顺序为5,则流媒体服务器可以确定接收到15个图像帧后,第16个图像帧为关键帧,如果当前帧率为30帧/秒,则可以确定第一个图像帧和第一个关键帧时间间隔为(15/30)*1=0.5秒;如果第一个图像帧为关键帧,则该时间间隔为0。
流媒体服务器可以计算时间差和预计接收时间间隔的和值,得到预计等待时长,然后可以向目标终端发送缓冲通知消息,缓冲通知消息中携带有预计等待时长,目标终端接收到该缓冲通知消息后,可以显示对应的缓存提醒信息,缓存提醒信息中可以包含该预计等待时长。例如,预计等待时长为3秒,则可以显示“为保流畅正在拼命为您切流,请等待3秒”。目标终端还可以在接收到缓冲通知消息后开始计算,当达到该预计等待时长后,目标终端可以开始接收第二媒体流,并基于第二媒体流,显示目标直播视频。
可选的,如果目标终端不再发生卡顿,则可以由当前的媒体流,切换至码率较高的媒体流,相应的处理过程可以如下:如果发送状态信息满足预设的流畅状态条件,则向目标终端发送目标直播视频的第三媒体流,第三媒体流包括音频流和第三码率的第三视频流,第三码率大于第二码率。
在实施中,流媒体服务器切换至第二媒体流后,可以继续监控目标终端的发送状态信息,如果发送状态信息满足预设的流畅状态条件,则可以向目标终端发送目标直播视频的第三媒体流。其中,第三媒体流可以包括上述音频流和第三码率的第三视频流,第三码率大于第二码率。例如,可以从码率为V0的视频流切换至码率为V0的视频流,或者由码率为V0的视频流切换至码率为V0的视频流。
对于发送状态信息可以包括目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项的情况,流媒体服务器可以确定预设时长内(如500毫秒内),该目标终端的音频发送缓存区中的音频缓存数据量,以及视频发送缓存区中的视频缓存数据量,如果预设时长内视频缓存数据量持续小于第三数据量阈值,或者音频缓存数据量持续小于第四数据量阈值,则可以判定发送状态信息满足预设的流畅状态条件,然后可以向目标终端发送目标直播视频的第三媒体流。其中,第三数据量阈值和第四数据量阈值可以相同也可以不同,第三数据量阈值和第四数据量阈值可以大于等于零。
流媒体服务器在由第二媒体流,切换至第三媒体流的过程中,可以先清空目标终端对应的视频发送缓存区中的数据,同时可以正常发送音频流,然后再获取第三视频流。对于流媒体服务器已经接收第三视频流的情况,流媒体服务器可以从第三视频流的视频接收缓存区中,获取接收时间离当前时间最近的第三视频流的图像帧,并判断该图像帧是否为关键帧,如果该图像帧为关键帧,则可以将该关键帧,以及在该关键帧之后获取到的第三视频流的图像帧发送给目标终端,也即进行正常转发;如果该图像帧不是关键帧,则可以从第三视频流的视频接收缓存区中,获取接收时间离当前时间最近的关键帧,将该关键帧的时间戳修改为当前获取到的图像帧的时间戳,发送给目标终端,这样,虽然音频和视频的同步性较差,但是可以保证用户在听到音频的同时可以看到视频,提高用户体验。流媒体服务器可以判断再次接受到的图像帧是否为关键帧,如果为关键帧,则可以进行正常转发,如果不是关键帧,则可以将接收时间离当前时间最近的关键帧之的图像帧发送给目标终端,以此类推,直到流媒体服务器接收到关键帧为止。
另外,流媒体服务器切换至第三媒体流后,可以继续监控目标终端的发送状态信息,如果目标终端的发送状态信息仍满足预设的流畅状态条件,则可以由第三媒体流,切换至码率更高的媒体流。
本发明实施例中,在向目标终端发送目标直播视频的第一媒体流的过程中,获取目标终端对应的发送状态信息,第一媒体流包括音频流和第一码率的第一视频流,如果发送状态信息满足预设的拥塞状态条件,则向目标终端发送目标直播视频的第二媒体流,第二媒体流包括音频流和第二码率的第二视频流,第二码率小于第一码率,这样,对于网络环境较差的终端,可以发送码率较低的媒体流,从而可以防止出现视频卡顿的情况,提高视频直播的流畅性。
基于相同的技术构思,本发明实施例还提供了一种发送媒体流的装置,如图5所示,该装置包括:
获取模块510,用于在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
第一发送模块520,用于如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
可选的,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述第一发送模块520,用于:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
可选的,如图6所示,所述第一发送模块520,包括:
获取子模块521,用于如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定子模块522,用于确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
发送子模块523,用于当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
可选的,如图7所示,所述装置还包括:
确定模块530,用于确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
第二发送模块540,用于确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
可选的,如图8所示,所述装置还包括:
第三发送模块550,用于如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
本发明实施例中,在向目标终端发送目标直播视频的第一媒体流的过程中,获取目标终端对应的发送状态信息,第一媒体流包括音频流和第一码率的第一视频流,如果发送状态信息满足预设的拥塞状态条件,则向目标终端发送目标直播视频的第二媒体流,第二媒体流包括音频流和第二码率的第二视频流,第二码率小于第一码率,这样,对于网络环境较差的终端,可以发送码率较低的媒体流,从而可以防止出现视频卡顿的情况,提高视频直播的流畅性。
需要说明的是:上述实施例提供的发送媒体流的装置在发送媒体流时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的发送媒体流的装置与发送媒体流的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图9是本发明实施例提供的流媒体服务器的结构示意图。该流媒体服务器600可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(centralprocessing units,CPU)622(例如,一个或一个以上处理器)和存储器632,一个或一个以上存储应用程序642或数据644的存储介质630(例如一个或一个以上海量存储设备)。其中,存储器632和存储介质630可以是短暂存储或持久存储。存储在存储介质630的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对流媒体服务器中的一系列指令操作。更进一步地,中央处理器622可以设置为与存储介质630通信,在流媒体服务器600上执行存储介质630中的一系列指令操作。
流媒体服务器600还可以包括一个或一个以上电源626,一个或一个以上有线或无线网络接口650,一个或一个以上输入输出接口658,一个或一个以上键盘656,和/或,一个或一个以上操作系统641,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
流媒体服务器600可以包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:
在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
可选的,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
可选的,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
可选的,所述方法还包括:
确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
可选的,所述方法还包括:
如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
本发明实施例中,在向目标终端发送目标直播视频的第一媒体流的过程中,获取目标终端对应的发送状态信息,第一媒体流包括音频流和第一码率的第一视频流,如果发送状态信息满足预设的拥塞状态条件,则向目标终端发送目标直播视频的第二媒体流,第二媒体流包括音频流和第二码率的第二视频流,第二码率小于第一码率,这样,对于网络环境较差的终端,可以发送码率较低的媒体流,从而可以防止出现视频卡顿的情况,提高视频直播的流畅性。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种发送媒体流的方法,其特征在于,所述方法包括:
在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
2.根据权利要求1所述的方法,其特征在于,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
3.根据权利要求1所述的方法,其特征在于,所述如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,包括:
如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
6.一种发送媒体流的装置,其特征在于,所述装置包括:
获取模块,用于在向目标终端发送目标直播视频的第一媒体流的过程中,获取所述目标终端对应的发送状态信息,所述第一媒体流包括音频流和第一码率的第一视频流;
第一发送模块,用于如果所述发送状态信息满足预设的拥塞状态条件,则向所述目标终端发送所述目标直播视频的第二媒体流,所述第二媒体流包括所述音频流和第二码率的第二视频流,所述第二码率小于所述第一码率。
7.根据权利要求6所述的装置,其特征在于,所述目标终端对应的发送状态信息包括所述目标终端对应的视频缓存数据量和音频缓存数据量中的至少一项,所述第一发送模块,用于:
如果所述视频缓存数据量大于第一数据量阈值,或所述音频缓存数据量大于第二数据量阈值,则向所述目标终端发送所述目标直播视频的第二媒体流。
8.根据权利要求6所述的装置,其特征在于,所述第一发送模块,包括:
获取子模块,用于如果所述发送状态信息满足预设的拥塞状态条件,则停止向所述目标终端发送所述第一媒体流,并获取所述第二视频流;
确定子模块,用于确定第一音频帧,所述第一音频帧为获取到所述第二视频流中第一个图像帧时接收到的音频帧;
发送子模块,用于当获取到所述第二视频流中的第一个关键帧时,从所述第一个关键帧和所述第一音频帧开始,向所述目标终端发送所述第二媒体流。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第一确定模块,用于确定所述第一音频帧的时间戳和所述第一个图像帧的时间戳的时间差,并根据所述第一个图像帧在所属图像组中的顺序、预设的图像组包含的帧数和预设的帧率,确定所述第一个图像帧和所述第一个关键帧时间间隔;
第二发送模块,用于确定所述时间差和所述预计接收时间间隔的和值,得到预计等待时长,向所述目标终端发送缓冲通知消息,所述缓冲通知消息中携带有所述预计等待时长。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第三发送模块,用于如果所述发送状态信息满足预设的流畅状态条件,则向所述目标终端发送所述目标直播视频的第三媒体流,所述第三媒体流包括所述音频流和第三码率的第三视频流,所述第三码率大于所述第二码率。
CN201610891373.1A 2016-10-12 2016-10-12 一种发送媒体流的方法和装置 Pending CN106488265A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610891373.1A CN106488265A (zh) 2016-10-12 2016-10-12 一种发送媒体流的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610891373.1A CN106488265A (zh) 2016-10-12 2016-10-12 一种发送媒体流的方法和装置

Publications (1)

Publication Number Publication Date
CN106488265A true CN106488265A (zh) 2017-03-08

Family

ID=58269230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610891373.1A Pending CN106488265A (zh) 2016-10-12 2016-10-12 一种发送媒体流的方法和装置

Country Status (1)

Country Link
CN (1) CN106488265A (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107295395A (zh) * 2017-06-27 2017-10-24 武汉斗鱼网络科技有限公司 码率自适应调节方法、装置及电子设备
CN108259948A (zh) * 2018-03-30 2018-07-06 武汉斗鱼网络科技有限公司 一种直播音视频的播放方法、装置、计算机及存储介质
CN108632681A (zh) * 2017-03-21 2018-10-09 华为软件技术有限公司 播放媒体流的方法、服务器及终端
CN108769826A (zh) * 2018-06-22 2018-11-06 广州酷狗计算机科技有限公司 直播媒体流获取方法、装置、终端及存储介质
CN108769805A (zh) * 2018-06-11 2018-11-06 广州酷狗计算机科技有限公司 数据传输方法、装置、计算机设备及存储介质
CN109218759A (zh) * 2018-09-27 2019-01-15 广州酷狗计算机科技有限公司 推送媒体流的方法、装置、服务器及存储介质
WO2019019931A1 (zh) * 2017-07-28 2019-01-31 深圳岚锋创视网络科技有限公司 一种基于视频编码器的码率控制方法、装置及视频服务器
CN109862384A (zh) * 2019-03-13 2019-06-07 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统
CN109996094A (zh) * 2017-12-29 2019-07-09 杭州海康威视系统技术有限公司 视频播放方法、装置及系统
CN110062277A (zh) * 2019-03-13 2019-07-26 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统
CN110213308A (zh) * 2018-02-28 2019-09-06 杭州海康威视数字技术股份有限公司 一种解码视频数据的方法及装置
CN110290402A (zh) * 2019-07-31 2019-09-27 腾讯科技(深圳)有限公司 一种视频码率调整方法、装置、服务器及存储介质
CN110535810A (zh) * 2018-05-25 2019-12-03 视联动力信息技术股份有限公司 一种视频数据的处理方法和终端
CN111083094A (zh) * 2018-10-22 2020-04-28 中国移动通信有限公司研究院 一种流媒体的码流切换方法及装置、计算机存储介质
CN111083430A (zh) * 2018-10-18 2020-04-28 杭州海康威视系统技术有限公司 一种图像获取方法、装置、电子设备及存储介质
CN111083536A (zh) * 2019-12-31 2020-04-28 广州酷狗计算机科技有限公司 调节视频码率的方法和装置
CN111343412A (zh) * 2020-03-31 2020-06-26 联想(北京)有限公司 一种图像处理方法及电子设备
CN111405234A (zh) * 2020-04-17 2020-07-10 杭州大轶科技有限公司 一种云端和边缘计算融合的视频会议信息系统和方法
CN111601118A (zh) * 2020-05-13 2020-08-28 广州市百果园信息技术有限公司 直播视频的处理方法、系统、装置及终端
CN113079103A (zh) * 2021-03-19 2021-07-06 北京达佳互联信息技术有限公司 音频发送方法、装置、电子设备及存储介质
CN113452953A (zh) * 2020-03-26 2021-09-28 浙江宇视科技有限公司 一种视频流传输控制方法、装置、设备和介质
CN113473183A (zh) * 2021-06-29 2021-10-01 华夏城视网络电视股份有限公司 一种应用于融合媒体的动静态媒体流批处理方法
CN113572986A (zh) * 2021-09-26 2021-10-29 南昌宾果信息技术有限公司 课程录制导播方法、装置、可读存储介质及教学一体机
CN113747194A (zh) * 2021-03-18 2021-12-03 上海达龙信息科技有限公司 远程视频传输方法、传输装置、存储介质及电子设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11134804A (ja) * 1997-10-31 1999-05-21 Toshiba Corp 映像音声同期システム
CN101635848A (zh) * 2008-07-22 2010-01-27 北大方正集团有限公司 一种视频文件的编辑方法和装置
CN101854533A (zh) * 2010-06-10 2010-10-06 华为技术有限公司 频道切换方法、装置及系统
CN102347943A (zh) * 2010-07-29 2012-02-08 三星电子株式会社 基于rtsp会话发送和接收流传输数据的方法和设备
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
CN103561283A (zh) * 2013-10-30 2014-02-05 乐视致新电子科技(天津)有限公司 一种智能电视的码率切换方法及装置
CN103731720A (zh) * 2013-11-25 2014-04-16 乐视致新电子科技(天津)有限公司 一种智能电视的多媒体数据缓存方法及装置
CN104244083A (zh) * 2014-10-08 2014-12-24 联想(北京)有限公司 一种在线视频的下载方法及电子设备
CN104363409A (zh) * 2014-11-26 2015-02-18 苏州科达科技股份有限公司 实现视频会议与数据会议同步的方法及系统
CN104980818A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 增强的媒体质量管理
CN105338376A (zh) * 2014-08-15 2016-02-17 中国电信股份有限公司 一种流媒体码率的控制方法、系统及流媒体服务器
CN105612743A (zh) * 2013-08-30 2016-05-25 微软技术许可有限责任公司 编码的媒体的音频视频回放同步

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11134804A (ja) * 1997-10-31 1999-05-21 Toshiba Corp 映像音声同期システム
CN101635848A (zh) * 2008-07-22 2010-01-27 北大方正集团有限公司 一种视频文件的编辑方法和装置
CN101854533A (zh) * 2010-06-10 2010-10-06 华为技术有限公司 频道切换方法、装置及系统
CN102347943A (zh) * 2010-07-29 2012-02-08 三星电子株式会社 基于rtsp会话发送和接收流传输数据的方法和设备
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
CN105612743A (zh) * 2013-08-30 2016-05-25 微软技术许可有限责任公司 编码的媒体的音频视频回放同步
CN103561283A (zh) * 2013-10-30 2014-02-05 乐视致新电子科技(天津)有限公司 一种智能电视的码率切换方法及装置
CN103731720A (zh) * 2013-11-25 2014-04-16 乐视致新电子科技(天津)有限公司 一种智能电视的多媒体数据缓存方法及装置
CN104980818A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 增强的媒体质量管理
CN105338376A (zh) * 2014-08-15 2016-02-17 中国电信股份有限公司 一种流媒体码率的控制方法、系统及流媒体服务器
CN104244083A (zh) * 2014-10-08 2014-12-24 联想(北京)有限公司 一种在线视频的下载方法及电子设备
CN104363409A (zh) * 2014-11-26 2015-02-18 苏州科达科技股份有限公司 实现视频会议与数据会议同步的方法及系统

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108632681B (zh) * 2017-03-21 2020-04-03 华为技术有限公司 播放媒体流的方法、服务器及终端
CN108632681A (zh) * 2017-03-21 2018-10-09 华为软件技术有限公司 播放媒体流的方法、服务器及终端
CN107295395A (zh) * 2017-06-27 2017-10-24 武汉斗鱼网络科技有限公司 码率自适应调节方法、装置及电子设备
US11190773B2 (en) 2017-07-28 2021-11-30 Arashi Vision Inc. Video coder-based code rate control method and device, and video server
WO2019019931A1 (zh) * 2017-07-28 2019-01-31 深圳岚锋创视网络科技有限公司 一种基于视频编码器的码率控制方法、装置及视频服务器
CN109996094B (zh) * 2017-12-29 2021-08-13 杭州海康威视系统技术有限公司 视频播放方法、装置及系统
CN109996094A (zh) * 2017-12-29 2019-07-09 杭州海康威视系统技术有限公司 视频播放方法、装置及系统
CN110213308A (zh) * 2018-02-28 2019-09-06 杭州海康威视数字技术股份有限公司 一种解码视频数据的方法及装置
CN108259948A (zh) * 2018-03-30 2018-07-06 武汉斗鱼网络科技有限公司 一种直播音视频的播放方法、装置、计算机及存储介质
CN110535810A (zh) * 2018-05-25 2019-12-03 视联动力信息技术股份有限公司 一种视频数据的处理方法和终端
CN108769805A (zh) * 2018-06-11 2018-11-06 广州酷狗计算机科技有限公司 数据传输方法、装置、计算机设备及存储介质
CN108769805B (zh) * 2018-06-11 2021-05-07 广州酷狗计算机科技有限公司 数据传输方法、装置、计算机设备及存储介质
CN108769826A (zh) * 2018-06-22 2018-11-06 广州酷狗计算机科技有限公司 直播媒体流获取方法、装置、终端及存储介质
CN109218759A (zh) * 2018-09-27 2019-01-15 广州酷狗计算机科技有限公司 推送媒体流的方法、装置、服务器及存储介质
CN111083430A (zh) * 2018-10-18 2020-04-28 杭州海康威视系统技术有限公司 一种图像获取方法、装置、电子设备及存储介质
CN111083430B (zh) * 2018-10-18 2021-04-23 杭州海康威视系统技术有限公司 一种图像获取方法、装置、电子设备及存储介质
CN111083094A (zh) * 2018-10-22 2020-04-28 中国移动通信有限公司研究院 一种流媒体的码流切换方法及装置、计算机存储介质
CN110062277A (zh) * 2019-03-13 2019-07-26 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统
CN109862384A (zh) * 2019-03-13 2019-06-07 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统
CN110290402A (zh) * 2019-07-31 2019-09-27 腾讯科技(深圳)有限公司 一种视频码率调整方法、装置、服务器及存储介质
CN111083536A (zh) * 2019-12-31 2020-04-28 广州酷狗计算机科技有限公司 调节视频码率的方法和装置
CN113452953B (zh) * 2020-03-26 2022-06-14 浙江宇视科技有限公司 一种视频流传输控制方法、装置、设备和介质
CN113452953A (zh) * 2020-03-26 2021-09-28 浙江宇视科技有限公司 一种视频流传输控制方法、装置、设备和介质
WO2021189815A1 (zh) * 2020-03-26 2021-09-30 浙江宇视科技有限公司 视频流传输控制方法、装置、设备和介质
CN111343412A (zh) * 2020-03-31 2020-06-26 联想(北京)有限公司 一种图像处理方法及电子设备
CN111343412B (zh) * 2020-03-31 2021-08-17 联想(北京)有限公司 一种图像处理方法及电子设备
CN111405234A (zh) * 2020-04-17 2020-07-10 杭州大轶科技有限公司 一种云端和边缘计算融合的视频会议信息系统和方法
CN111601118A (zh) * 2020-05-13 2020-08-28 广州市百果园信息技术有限公司 直播视频的处理方法、系统、装置及终端
CN113747194A (zh) * 2021-03-18 2021-12-03 上海达龙信息科技有限公司 远程视频传输方法、传输装置、存储介质及电子设备
WO2022194140A1 (zh) * 2021-03-18 2022-09-22 上海达龙信息科技有限公司 远程视频传输方法、传输装置、存储介质及电子设备
CN113079103A (zh) * 2021-03-19 2021-07-06 北京达佳互联信息技术有限公司 音频发送方法、装置、电子设备及存储介质
CN113473183A (zh) * 2021-06-29 2021-10-01 华夏城视网络电视股份有限公司 一种应用于融合媒体的动静态媒体流批处理方法
CN113572986A (zh) * 2021-09-26 2021-10-29 南昌宾果信息技术有限公司 课程录制导播方法、装置、可读存储介质及教学一体机
CN113572986B (zh) * 2021-09-26 2021-12-28 南昌宾果信息技术有限公司 课程录制导播方法、装置、可读存储介质及教学一体机

Similar Documents

Publication Publication Date Title
CN106488265A (zh) 一种发送媒体流的方法和装置
US20230256345A1 (en) Game data processing method and apparatus, and storage medium
JP3658087B2 (ja) 端末装置及び端末装置の制御方法
CN107566918B (zh) 一种视频分发场景下的低延时取流秒开方法
US9924159B2 (en) Shared scene mesh data synchronization
KR20180031547A (ko) 서버에서 멀티 비트 레이트 스트림 미디어를 적응적으로 제공하기 위한 방법 및 장치
WO2016131223A1 (zh) 一种视频帧丢帧方法及视频发送装置
EP2863642B1 (en) Method, device and system for video conference recording and playing
CA2438194A1 (en) Live navigation web-conferencing system and method
CN113286184B (zh) 一种在不同设备上分别播放音频与视频的唇音同步方法
CN112291498B (zh) 音视频数据传输的方法、装置和存储介质
WO2014054325A1 (ja) 符号化制御装置および符号化制御方法
WO2021082642A1 (zh) 视频播放控制方法和系统
CN110166805A (zh) 云手机音频传输控制方法、系统及存储介质
CN108282685A (zh) 一种音视频同步的方法及监控系统
CN114546308A (zh) 应用界面投屏方法、装置、设备以及存储介质
US9832422B2 (en) Selective recording of high quality media in a videoconference
US20140099040A1 (en) Image processing device and image processing method
US20210227005A1 (en) Multi-user instant messaging method, system, apparatus, and electronic device
WO2021082479A1 (zh) 调整视频流的属性的方法和装置
US20160212180A1 (en) Shared Scene Object Synchronization
TW201608898A (zh) 視訊會議處理方法及系統
JP7164856B1 (ja) サーバ及び方法
CN112565670B (zh) 云会议多层视频快速平滑出图的方法
CN114554277B (zh) 多媒体的处理方法、装置、服务器及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 510660 Guangzhou City, Guangzhou, Guangdong, Whampoa Avenue, No. 315, self - made 1-17

Applicant after: Guangzhou KuGou Networks Co., Ltd.

Address before: 510000 B1, building, No. 16, rhyme Road, Guangzhou, Guangdong, China 13F

Applicant before: Guangzhou KuGou Networks Co., Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170308