CN111163330A - 直播视频的渲染方法、装置、系统、设备及存储介质 - Google Patents

直播视频的渲染方法、装置、系统、设备及存储介质 Download PDF

Info

Publication number
CN111163330A
CN111163330A CN202010033365.XA CN202010033365A CN111163330A CN 111163330 A CN111163330 A CN 111163330A CN 202010033365 A CN202010033365 A CN 202010033365A CN 111163330 A CN111163330 A CN 111163330A
Authority
CN
China
Prior art keywords
video
video stream
server
stream
rendering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010033365.XA
Other languages
English (en)
Inventor
郑伟成
黎鑫
曾文舟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Technology Co Ltd
Original Assignee
Guangzhou Huya Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Technology Co Ltd filed Critical Guangzhou Huya Technology Co Ltd
Priority to CN202010033365.XA priority Critical patent/CN111163330A/zh
Publication of CN111163330A publication Critical patent/CN111163330A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例公开了一种直播视频的渲染方法、装置、系统、设备及存储介质。所述方法由主播端执行，包括：向服务器发送开播请求；接收所述服务器返回的视频流地址；将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。本发明实施例提供的直播视频的渲染方法，由服务器对直播视频渲染后推送至观众端播放，可以降低直播对移动终端性能的要求，避免直播过程中卡顿现象的产生。

Description

直播视频的渲染方法、装置、系统、设备及存储介质
技术领域
本发明实施例涉及视频渲染技术领域，尤其涉及一种直播视频的渲染方法、装置、系统、设备及存储介质。
背景技术
随着互联网技术及智能移动终端设备的发展，各种互联网产品给人们的工作、生活带来了很多便利与娱乐，近年来，各类用于视频直播的直播平台层出不穷，视频直播给人们带来更实时的社交体验。用户通过移动终端观看直播视频，对移动终端的性能提出了更高的要求。
移动终端的图形处理器(Graphics Processing Unit，GPU)资源有限，当需要处理直播视频的渲染事件时(如：美颜、贴图、镜像、旋转等)，对移动终端的要求非常高。另外，移动终端的中央处理器(central processing unit，CPU)资源有限，除了要处理视频的渲染事件，还要处理很多直播间的业务逻辑。如果移动终端性能不足，势必会造成直播视频的卡顿，从而影响用户观看直播的体验。
发明内容
本发明实施例提供一种直播视频的渲染方法、装置、系统、设备及存储介质，由渲染服务器对直播视频渲染后推送至观众端播放，可以降低直播对移动终端性能的要求，避免直播过程中卡顿现象的产生。
第一方面，本发明实施例提供了一种直播视频的渲染方法，所述方法由主播端执行，包括：
向服务器发送开播请求；
接收所述服务器返回的视频流地址；
将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。
第二方面，本发明实施例还提供了一种直播视频的渲染方法，所述方法由服务器执行，包括：
接收主播端发送的开播请求，并根据所述开播请求生成视频流地址；
将所述视频流地址发送至主播端；
接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。
第三方面，本发明实施例还提供了一种直播视频的渲染装置，所述装置设置于主播端，包括：
开播请求发送模块，用于向服务器发送开播请求；
视频流地址接收模块，用于接收所述服务器返回的视频流地址；
视频流发送模块，用于将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。
第四方面，本发明实施例还提供了一种直播视频的渲染装置，所述装置设置于服务器中，包括：
开播请求接收模块，用于接收主播端发送的开播请求，并根据所述开播请求生成视频流地址；
视频流地址发送模块，用于将所述视频流地址发送至主播端；
视频流渲染模块，用于接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。
第五方面，本发明实施例还提供了一种直播视频的渲染系统，包括：主播端、服务器和观众端；
所述主播端向所述服务器发送开播请求；所述服务器根据所述开播请求生成视频流地址、音频流地址和混合流地址，并将所述视频流地址和音频流地址返回至所述主播端；
所述主播端将采集的音频流发送至所述服务器中所述音频流地址对应的存储位置；将采集的视频流和所述视频流地址发送至所述服务器；
所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置；
所述服务器将渲染后的视频流和音频流进行混合，获得音视频混合流，并将所述音视频混合流存储至所述混合流地址对应的存储位置；
所述观众端向所述服务器发送直播请求；
所述服务器根据所述直播请求确定混合流地址，根据所述混合流地址获取音视频混合流，并将所述音视频混合流发送至观众端；
所述观众端播放所述音视频混合流对应的内容。
第六方面，本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如本发明实施例所述的直播视频的渲染方法。
第七方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例所述的直播视频的渲染方法。
本发明实施例，向服务器发送开播请求；接收服务器返回的视频流地址；将采集的视频流和视频流地址发送至服务器；使得服务器对视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的位置。本发明实施例提供的直播视频的渲染方法，由服务器对直播视频渲染后推送至观众端播放，可以降低直播对移动终端性能的要求，避免直播过程中卡顿现象的产生。
附图说明
图1是本发明实施例一中的一种直播视频的渲染方法的流程图；
图2是本发明实施例二中的一种直播视频的渲染方法的流程图；
图3是本发明实施例三中的一种直播视频的渲染装置的结构示意图；
图4是本发明实施例四中的一种直播视频的渲染装置的结构示意图；
图5是本发明实施例五中的一种直播视频的渲染系统的结构示意图；
图6是本发明实施例五中的直播视频渲染系统的工作过程的信令图；
图7是本发明实施例六中的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种直播视频的渲染方法的流程图，本实施例可适用于对直播中的视频流进行渲染的情况，该方法可以由直播视频的渲染装置来执行，该装置设置于主播端。如图1所示，该方法具体包括如下步骤：
步骤110，向服务器发送开播请求。
其中，开播请求中携带有开播参数，可以包括主播的ID、开播时间及直播内容类型等。本实施例中，主播开始直播时，通过客户端(如移动终端、PC端)登录直播平台，选择将要直播的内容类型，并向直播业务服务器发起开播请求。
步骤120，接收服务器返回的视频流地址。
直播业务服务器接收主播端发送的开播请求后，根据开播请求申请视频流地址、音频流地址、混合流地址及渲染资源，并将视频流地址和音频流地址发送至主播端。其中，视频流地址、音频流地址和混合流地址为直播业务服务器数据库中所在的位置，且包含有主播的开播参数，分别用以唯一表征主播当前直播产生的视频流、音频流和混合流。
可选的，在向直播业务服务器发送开播请求之后，还包括：接收服务器返回的音频流地址；将采集的音频流发送至服务器中音频流地址对应的存储位置。
其中，音频流可以是主播端的麦克风采集主播的语音形成的，视频流可以是主播端的摄像头录制的主播画面形成的。本实施例中，将视频流发送至服务器进行渲染，将音频流直接发送至服务器中音频流地址对应的存储位置。
步骤130，将采集的视频流和视频流地址发送至服务器；使得服务器对视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的位置。
其中，服务器可以对直播视频流的渲染，如：美颜、贴图、镜像、旋转等操作。
可选的，服务器可以根据开播请求申请负载渲染的服务器的标识码，使得主播端与该渲染服务器建立通信连接。主播端与渲染服务器之间可以建立websocket连接。本实施例中，主播端接收到渲染服务器标识码后，根据渲染服务器标识码与渲染服务器之间重新开辟一个通信协议，使用websocket来互相发送消息，并在连接成功后，通过发送心跳数据包来维持通道的连通性，当出现弱网或者网络不通的情况下，对websocket进行三次重试，若三次重试连接都不成功，则直接断开连接，并提示用户渲染出错，停止音视频的推送。
可选的，还包括：获取主播选择的渲染方式；将渲染方式发送至服务器，使得服务器根据渲染方式对视频流进行渲染。
其中，渲染方式可以是直播平台提供的供主播选择的方式，如：添加特效、滤镜等。
可选的，服务器将渲染后视频流存储至视频流地址对应的位置后，向主播端发送推流成功的消息，使得主播端可以从服务器中拉取渲染后的视频流进行预览。
本实施例的技术方案，向服务器发送开播请求；接收服务器返回的视频流地址；将采集的视频流和视频流地址发送至服务器；使得服务器对视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的位置。本发明实施例提供的直播视频的渲染方法，由服务器对直播视频渲染后推送至观众端播放，可以降低直播对移动终端性能的要求，避免直播过程中卡顿现象的产生。
实施例二
图2为本发明实施例三提供的一种直播视频的渲染方法的流程图，本实施例可适用于对直播中的视频流进行渲染的情况，该方法可以由直播视频的渲染装置来执行，该装置设置于直播业务服务器中。以上述实施例为基础，如图2所示，该方法具体包括如下步骤：
步骤210，接收主播端发送的开播请求，并根据开播请求生成视频流地址。
其中，开播请求中携带有开播参数，包括主播的ID、开播时间及直播内容类型等。本实施例中，主播开始直播时，通过客户端(如移动终端、PC端)登录直播平台，并向服务器发起开播请求。服务器接收主播端发送的开播请求后，根据开播请求申请视频流地址、音频流地址、混合流地址以及渲染资源。
步骤220，将视频流地址发送至主播端。
具体的，直播业务服务器将视频流地址、音频流地址发送至主播端。使得主播端将采集的视频流和视频流地址发送至服务器，将采集的音频流根据音频流地址发送至直播业务服务器中。
步骤230，接收主播端发送的视频流及视频流地址，对视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的存储位置。
具体的，服务器对接收到的视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的存储位置，然后向主播端返回推流成功的消息。使得主播端可以从服务器中拉取渲染后的视频流进行预览。
可选的，在接收主播端发送的开播请求之后，还包括：接收主播端发送的渲染方式；相应的，对视频流进行渲染的过程可以是：根据渲染方式对视频流进行渲染。
其中，渲染方式可以是直播平台提供的供主播选择的方式，如：添加特效、滤镜等。
可选的，还包括如下步骤，服务器将渲染后的视频流和音频流进行混合，获得音视频混合流，并将所述音视频混合流存储至所述混合流地址对应的存储位置。
可选的，还包括如下步骤：接收观众端发送的直播请求；根据直播请求确定混合流地址；根据混合流地址获取音视频混合流；并将音视频混合流发送至观众端，使得观众端播放音视频混合流对应的内容。
观众端在拉取数据流时，直接拉取到渲染后的视频流，无需观众端进行渲染。
本实施例的技术方案，接收主播端发送的开播请求，并根据所述开播请求生成视频流地址；将所述视频流地址发送至主播端；接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。由于服务器中存储的是渲染后的视频流，从而推送给观众端的也是渲染后的视频流，无需客户端对直播视频流进行渲染，可以降低直播对移动终端性能的要求，避免直播过程中卡顿现象的产生。
实施例三
图3为本发明实施例三提供的一种直播视频的渲染装置的结构示意图。如图3所示，该装置设置于主播端，包括：开播请求发送模块310，视频流地址接收模块320和视频流发送模块330。
开播请求发送模块310，用于向服务器发送开播请求；
视频流地址接收模块320，用于接收服务器返回的视频流地址；
视频流发送模块330，用于将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。
可选的，还包括：音频流地址接收模块，用于：
接收服务器返回的音频流地址；
将采集的音频流发送至服务器中音频流地址对应的存储位置。
可选的，还包括：渲染方式获取模块，用于：
获取主播选择的渲染方式；
将渲染方式发送至服务器，使得服务器根据渲染方式对视频流进行渲染。
实施例四
图4为本发明实施例四提供的一种直播视频的渲染装置的结构示意图。如图4所示，该装置设置于服务器中，包括：开播请求接收模块410，视频流地址发送模块420和视频流渲染模块430。
开播请求接收模块410，用于接收主播端发送的开播请求，并根据开播请求生成视频流地址；
视频流地址发送模块420，用于将视频流地址发送至主播端；
视频流渲染模块430，用于接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。
可选的，还包括：渲染方式接收模块，用于：
接收主播端发送的渲染方式；
相应的，视频流渲染模块430，还用于：
根据所述渲染方式对所述视频流进行渲染。
可选的，还包括：音频流地址发送模块，用于：
根据开播请求生成音频流地址；并将音频流地址发送至主播端；
接收主播端发送的音频流，并将音频流存储至音频流地址对应的存储位置。
可选的，还包括：混合流地址生成模块，用于
根据开播请求生成混合流地址；
将渲染后的视频流和音频流进行混合，获得音视频混合流，并将音视频混合流存储至混合流地址对应的存储位置。
可选的，还包括：音视频混合流推送模块，用于：
接收观众端发送的直播请求；
根据直播请求确定混合流地址；
根据混合流地址获取音视频混合流；并将音视频混合流发送至观众端，使得观众端播放音视频混合流对应的内容。
上述装置可执行本发明前述所有实施例所提供的方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明前述所有实施例所提供的方法。
实施例五
图5为本发明实施例七提供的一种直播视频的渲染系统的结构示意图。如图5所示，该系统包括：主播端、服务器和观众端。图6是本实施例中直播视频渲染系统的工作过程的信令图，如图6所示，该信令的流程包括：所述主播端向服务器发送开播请求；服务器根据开播请求生成视频流地址、音频流地址和混合流地址，并将视频流地址和音频流地址返回至主播端；主播端将采集的音频流发送至服务器中音频流地址对应的存储位置；主播端将采集的视频流和视频流地址发送至服务器；服务器对视频流进行渲染，并将渲染后的视频流存储至视频流地址对应的位置；服务器将渲染后的视频流和音频流进行混合，获得音视频混合流，并将音视频混合流存储至混合流地址对应的存储位置；观众端向直播业务服务器发送直播请求；直播业务服务器根据直播请求确定混合流地址，根据混合流地址获取音视频混合流，并将音视频混合流发送至观众端；观众端播放音视频混合流对应的内容。
实施例六
图7为本发明实施例六提供的一种计算机设备的结构示意图。图7示出了适于用来实现本发明实施方式的计算机设备912的框图。图7显示的计算机设备912仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。设备912是典型的直播视频的渲染功能的计算设备。
如图7所示，计算机设备912以通用计算设备的形式表现。计算机设备912的组件可以包括但不限于：一个或者多个处理器916，存储装置928，连接不同系统组件(包括存储装置928和处理器916)的总线918。
总线918表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(Industry StandardArchitecture，ISA)总线，微通道体系结构(Micro Channel Architecture，MCA)总线，增强型ISA总线、视频电子标准协会(Video Electronics Standards Association，VESA)局域总线以及外围组件互连(Peripheral Component Interconnect，PCI)总线。
计算机设备912典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备912访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
存储装置928可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(Random Access Memory，RAM)930和/或高速缓存存储器932。计算机设备912可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统934可以用于读写不可移动的、非易失性磁介质(图7未显示，通常称为“硬盘驱动器”)。尽管图7中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如只读光盘(Compact Disc-Read Only Memory，CD-ROM)、数字视盘(Digital Video Disc-Read Only Memory，DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线918相连。存储装置928可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块926的程序936，可以存储在例如存储装置928中，这样的程序模块926包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块926通常执行本发明所描述的实施例中的功能和/或方法。
计算机设备912也可以与一个或多个外部设备914(例如键盘、指向设备、摄像头、显示器924等)通信，还可与一个或者多个使得用户能与该计算机设备912交互的设备通信，和/或与使得该计算机设备912能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口922进行。并且，计算机设备912还可以通过网络适配器920与一个或者多个网络(例如局域网(Local AreaNetwork，LAN)，广域网Wide Area Network，WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器920通过总线918与计算机设备912的其它模块通信。应当明白，尽管图中未示出，可以结合计算机设备912使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、磁盘阵列(Redundant Arrays of IndependentDisks，RAID)系统、磁带驱动器以及数据备份存储系统等。
处理器916通过运行存储在存储装置928中的程序，从而执行各种功能应用以及数据处理，例如实现本发明上述实施例所提供的直播视频的渲染方法。
实施例七
本发明实施例七还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例所提供的直播视频的渲染方法。
当然，本发明实施例所提供的一种计算机可读存储介质，其上存储的计算机程序不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的直播视频的渲染方法中的相关操作。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种直播视频的渲染方法，其特征在于，所述方法由主播端执行，包括：
向服务器发送开播请求；
接收所述服务器返回的视频流地址；
将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。
2.根据权利要求1所述的方法，其特征在于，在向服务器发送开播请求之后，还包括：
接收所述服务器返回的音频流地址；
将采集的音频流发送至所述服务器中所述音频流地址对应的存储位置。
3.根据权利要求1所述的方法，其特征在于，还包括：
获取主播选择的渲染方式；
将所述渲染方式发送至服务器，使得所述服务器根据所述渲染方式对所述视频流进行渲染。
4.一种直播视频的渲染方法，其特征在于，所述方法由服务器执行，包括：
接收主播端发送的开播请求，并根据所述开播请求生成视频流地址；
将所述视频流地址发送至主播端；
接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。
5.根据权利要求4所述的方法，其特征在于，在接收主播端发送的开播请求之后，还包括：
接收主播端发送的渲染方式；
相应的，对所述视频流进行渲染，包括：
根据所述渲染方式对所述视频流进行渲染。
6.根据权利要求4所述的方法，其特征在于，在接收主播端发送的开播请求之后，还包括：
根据所述开播请求生成音频流地址；并将所述音频流地址发送至主播端；
接收主播端发送的音频流，并将所述音频流存储至所述音频流地址对应的存储位置。
7.根据权利要求6所述的方法，其特征在于，在接收主播端发送的开播请求之后，还包括：
根据所述开播请求生成混合流地址；
将渲染后的视频流和音频流进行混合，获得音视频混合流，并将所述音视频混合流存储至所述混合流地址对应的存储位置。
8.根据权利要求7所述的方法，其特征在于，还包括：
接收观众端发送的直播请求；
根据所述直播请求确定混合流地址；
根据所述混合流地址获取音视频混合流；并将所述音视频混合流发送至观众端，使得所述观众端播放所述音视频混合流对应的内容。
9.一种直播视频的渲染装置，其特征在于，所述装置设置于主播端，包括：
开播请求发送模块，用于向服务器发送开播请求；
视频流地址接收模块，用于接收所述服务器返回的视频流地址；
视频流发送模块，用于将采集的视频流和所述视频流地址发送至所述服务器；使得所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置。
10.一种直播视频的渲染装置，其特征在于，所述装置设置于服务器中，包括：
开播请求接收模块，用于接收主播端发送的开播请求，并根据所述开播请求生成视频流地址；
视频流地址发送模块，用于将所述视频流地址发送至主播端；
视频流渲染模块，用于接收主播端发送的视频流及视频流地址，对所述视频流进行渲染，并将所述渲染后的视频流存储至所述视频流地址对应的存储位置。
11.一种直播视频的渲染系统，其特征在于，包括：主播端、服务器和观众端；
所述主播端向所述服务器发送开播请求；所述服务器根据所述开播请求生成视频流地址、音频流地址和混合流地址，并将所述视频流地址和音频流地址返回至所述主播端；
所述主播端将采集的音频流发送至所述服务器中所述音频流地址对应的存储位置；将采集的视频流和所述视频流地址发送至所述服务器；
所述服务器对所述视频流进行渲染，并将渲染后的视频流存储至所述视频流地址对应的位置；
所述服务器将渲染后的视频流和音频流进行混合，获得音视频混合流，并将所述音视频混合流存储至所述混合流地址对应的存储位置；
所述观众端向所述服务器发送直播请求；
所述服务器根据所述直播请求确定混合流地址，根据所述混合流地址获取音视频混合流，并将所述音视频混合流发送至观众端；
所述观众端播放所述音视频混合流对应的内容。
12.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-8任一所述的直播视频的渲染方法。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-8任一所述的直播视频的渲染方法。
CN202010033365.XA 2020-01-13 2020-01-13 直播视频的渲染方法、装置、系统、设备及存储介质 Pending CN111163330A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010033365.XA CN111163330A (zh) 2020-01-13 2020-01-13 直播视频的渲染方法、装置、系统、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010033365.XA CN111163330A (zh) 2020-01-13 2020-01-13 直播视频的渲染方法、装置、系统、设备及存储介质

Publications (1)

Publication Number Publication Date
CN111163330A true CN111163330A (zh) 2020-05-15

Family

ID=70562570

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010033365.XA Pending CN111163330A (zh) 2020-01-13 2020-01-13 直播视频的渲染方法、装置、系统、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111163330A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111669611A (zh) * 2020-06-19 2020-09-15 广州繁星互娱信息科技有限公司 图像处理方法、装置、终端及存储介质
CN112738540A (zh) * 2020-12-25 2021-04-30 广州虎牙科技有限公司 多设备直播切换方法、装置、系统、电子设备和可读存储介质
CN112929681A (zh) * 2021-01-19 2021-06-08 广州虎牙科技有限公司 视频流图像渲染方法、装置、计算机设备及存储介质
CN113473158A (zh) * 2021-06-30 2021-10-01 北京百度网讯科技有限公司 直播数据处理方法、装置、电子设备、介质及程序产品
CN114363652A (zh) * 2022-01-04 2022-04-15 阿里巴巴（中国）有限公司 视频直播方法、系统及计算机存储介质
CN114979688A (zh) * 2022-05-11 2022-08-30 北京大甜绵白糖科技有限公司 直播数据传输系统、方法及装置
WO2024104307A1 (zh) * 2022-11-17 2024-05-23 北京字跳网络技术有限公司 直播视频流渲染方法、装置、设备、存储介质及产品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131591A (zh) * 2016-06-30 2016-11-16 广州华多网络科技有限公司 直播方法、装置及终端
CN110267053A (zh) * 2019-06-27 2019-09-20 广州酷狗计算机科技有限公司 直播方法、装置及系统
CN110312169A (zh) * 2019-07-30 2019-10-08 腾讯科技（深圳）有限公司 视频数据处理方法、装置、终端及服务器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131591A (zh) * 2016-06-30 2016-11-16 广州华多网络科技有限公司 直播方法、装置及终端
CN110267053A (zh) * 2019-06-27 2019-09-20 广州酷狗计算机科技有限公司 直播方法、装置及系统
CN110312169A (zh) * 2019-07-30 2019-10-08 腾讯科技（深圳）有限公司 视频数据处理方法、装置、终端及服务器

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111669611A (zh) * 2020-06-19 2020-09-15 广州繁星互娱信息科技有限公司 图像处理方法、装置、终端及存储介质
CN111669611B (zh) * 2020-06-19 2022-02-22 广州繁星互娱信息科技有限公司 图像处理方法、装置、终端及存储介质
CN112738540A (zh) * 2020-12-25 2021-04-30 广州虎牙科技有限公司 多设备直播切换方法、装置、系统、电子设备和可读存储介质
CN112738540B (zh) * 2020-12-25 2023-09-05 广州虎牙科技有限公司 多设备直播切换方法、装置、系统、电子设备和可读存储介质
CN112929681A (zh) * 2021-01-19 2021-06-08 广州虎牙科技有限公司 视频流图像渲染方法、装置、计算机设备及存储介质
CN112929681B (zh) * 2021-01-19 2023-09-05 广州虎牙科技有限公司 视频流图像渲染方法、装置、计算机设备及存储介质
CN113473158A (zh) * 2021-06-30 2021-10-01 北京百度网讯科技有限公司 直播数据处理方法、装置、电子设备、介质及程序产品
CN113473158B (zh) * 2021-06-30 2024-01-30 北京百度网讯科技有限公司 直播数据处理方法、装置、电子设备、介质
CN114363652A (zh) * 2022-01-04 2022-04-15 阿里巴巴（中国）有限公司 视频直播方法、系统及计算机存储介质
CN114979688A (zh) * 2022-05-11 2022-08-30 北京大甜绵白糖科技有限公司 直播数据传输系统、方法及装置
WO2024104307A1 (zh) * 2022-11-17 2024-05-23 北京字跳网络技术有限公司 直播视频流渲染方法、装置、设备、存储介质及产品

Similar Documents

Publication Publication Date Title
CN111163330A (zh) 直播视频的渲染方法、装置、系统、设备及存储介质
CN112839250B (zh) 无线传屏方法及装置
EP2940940B1 (en) Methods for sending and receiving video short message, apparatus and handheld electronic device thereof
CN111629253A (zh) 视频处理方法及装置、计算机可读存储介质、电子设备
CN109947387B (zh) 音频采集方法、音频播放方法、系统、设备及存储介质
CN112261416A (zh) 基于云的视频处理方法、装置、存储介质与电子设备
US11323750B2 (en) Video system and video processing method, device and computer readable medium
KR20110007114A (ko) 원격 세션에서의 멀티미디어 동작을 관리하는 시스템 및 방법
KR101991188B1 (ko) 홍보 정보의 처리방법, 장치, 디바이스 및 비휘발성 컴퓨터 저장매체
CN113014854B (zh) 互动记录的生成方法、装置、设备及介质
CN113225577B (zh) 直播流处理方法、装置、系统、电子设备及存储介质
CN113766270B (zh) 视频播放方法、系统、服务器、终端设备、以及电子设备
CN105208406A (zh) 视频数据提供方法、视频播放方法、装置及系统
CN109510881A (zh) 文件分享的方法、装置、电子设备及可读存储介质
CN111818383B (zh) 视频数据的生成方法、系统、装置、电子设备及存储介质
WO2018161887A1 (zh) 数据交互方法、装置及存储介质
CN111327910A (zh) 应用程序的操作控制方法、装置、设备及存储介质
CN112235593A (zh) 直播处理方法及装置、电子设备和计算机可读存储介质
CN111629223A (zh) 视频同步方法及装置、计算机可读存储介质以及电子设备
CN111541905A (zh) 一种直播方法、装置、计算机设备和存储介质
CN113873288A (zh) 在直播过程中生成回放的方法和装置
CN109995543B (zh) 用于添加群成员的方法和设备
CN108134957A (zh) 一种投屏方法、终端和计算机存储介质
CN112714331B (zh) 信息提示方法和装置、存储介质、电子设备
CN110798700B (zh) 视频处理方法、视频处理装置、存储介质与电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200515

RJ01 Rejection of invention patent application after publication