CN112738638A - 一种连麦直播方法、装置、设备、存储介质及产品 - Google Patents

一种连麦直播方法、装置、设备、存储介质及产品 Download PDF

Info

Publication number
CN112738638A
CN112738638A CN202011559900.1A CN202011559900A CN112738638A CN 112738638 A CN112738638 A CN 112738638A CN 202011559900 A CN202011559900 A CN 202011559900A CN 112738638 A CN112738638 A CN 112738638A
Authority
CN
China
Prior art keywords
audience
video stream
live broadcast
microphone
live
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011559900.1A
Other languages
English (en)
Inventor
朱钦
步国超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202011559900.1A priority Critical patent/CN112738638A/zh
Publication of CN112738638A publication Critical patent/CN112738638A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/632—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing using a connection between clients on a wide area network, e.g. setting up a peer-to-peer communication via Internet for retrieving video segments from the hard-disk of other client devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种连麦直播方法、装置、设备、存储介质及产品，涉及计算机领域，尤其涉及人工智能和信息流技术领域，所述方法包括：响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；通过第一点对点直连通路，接收第一观众端的第一连麦视频流；根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将混合视频流提供给各观众端。本申请实施例的技术方案可以减少观众端的流量消耗，以及CPU的资源消耗，可以提高主播的直播体验。

Description

一种连麦直播方法、装置、设备、存储介质及产品
技术领域
本申请涉及计算机技术领域，尤其涉及人工智能和信息流技术领域，具体涉及一种连麦直播方法、装置、设备、存储介质及产品。
背景技术
网络直播是一种新兴的网络社交方式，观众可以选择自己喜欢的主播，并进入该主播的直播间进行观看。随着直播行业的发展，观众需求越来越高，为了吸引观众，主播可以和直播间中的观众进行连麦，通过连麦的方式与观众形成良好的互动。
目前，主播与观众进行连麦时，内容分发网络(Content Delivery Network，CDN)通常采用实时消息传输协议(Real Time Messaging Protocol，RTMP)传输数据，由于此协议的数据是单向流动的，观众端需要通过信令服务器向主播端发送连麦请求。主播端同意该连麦请求后，与连麦的观众端将各自发布的视频流上传至流媒体服务器(如图1a所示)，直播间中的观众端需要从流媒体服务器中同时拉取两路视频流，才可以观看该主播的连麦视频。
但是，现有连麦方法存在以下问题：观众端需要接收两路视频流才能分别看到主播和连麦者，导致客户端流量消耗比较高；同时，两路视频流解码时也比较消耗中央处理器(Central Processing Unit，CPU)的资源。
发明内容
本申请提供了一种连麦直播方法、装置、设备、存储介质及产品。
根据本申请的一方面，提供了一种连麦直播方法，由主播端执行，包括：
响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；
响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；
通过第一点对点直连通路，接收第一观众端的第一连麦视频流；
根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
根据本申请的另一方面，提供了一种连麦直播装置，由主播端执行，包括：
身份标识添加模块，用于响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；
第一通路建立模块，用于响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；
第一视频流接收模块，用于通过第一点对点直连通路，接收第一观众端的第一连麦视频流；
混合视频流生成模块，用于根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
根据本申请的另一方面，提供了一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本申请中任一实施例所述的方法。
根据本申请的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行本申请中任一实施例所述的方法。
根据本申请的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本申请中任一实施例所述的方法。
本申请实施例的技术方案可以减少观众端的流量消耗，以及CPU的资源消耗，可以提高主播的直播体验。
应当理解，本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征，也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本申请的限定。其中：
图1a是现有技术中一种连麦直播方法所适用的具体应用交互场景的示意图；
图1b是根据本申请实施例的一种连麦直播方法的流程示意图；
图1c是根据本申请实施例的一种连麦直播方法所适用的具体应用交互场景的示意图；
图2是根据本申请实施例的又一种连麦直播方法的流程示意图；
图3是根据本申请实施例的又一种连麦直播方法的流程示意图；
图4是根据本申请实施例的一种连麦直播装置的结构示意图；
图5是根据本申请实施例的连麦直播方法的电子设备的框图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
图1b是根据本申请实施例的一种连麦直播方法的流程示意图，本实施例适用于主播端与观众端进行连麦的情况，该方法可以通过主播端中的连麦直播装置来执行，该装置可以通过软件和/或硬件的方式实现，并集成于计算机以及所有包含程序运行功能的智能设备(例如，终端设备或者服务器)中。具体的，参考图1b，该方法具体包括如下步骤：
步骤110、响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
在本实施例中，主播开始直播后，如果直播间中的观众想要与主播进行连麦，则可以触发直播平台中的连麦指令。当观众端检测到连麦指令被触发后，则向直播服务器发送对应的直播间连麦请求，直播服务器接收到该请求后，将该请求发送至主播端。
其中，图1c是根据本申请实施例的一种连麦直播方法所适用的具体应用交互场景的示意图，如图1c所示，直播服务器具体可以为信令服务器。直播间连麦请求中可以包括观众端想要连麦的直播间的身份标识，该直播间的身份标识具体可以为直播平台分配给该直播间的身份标识号(Identity document，ID)。直播服务器接收到直播间连麦请求后，将该请求发送至与该直播间身份标识匹配的主播端。
在一个具体的实施例中，主播端获取到至少一个观众端发送的直播间连麦请求后，可以向直播服务器请求与各直播间连麦请求匹配的观众端的身份标识，然后将请求到的各观众端的身份标识加入至备选连麦队列中。其中，各身份标识可以包括与各观众端对应的观众的头像、名称、简介以及地址等信息。观众的简介信息可以包括该观众的爱好以及职业等信息。
在另一个具体的实施例中，直播间连麦请求中还可以包括观众端的身份标识，主播端获取到至少一个观众端发送的直播间连麦请求后，可以从各直播间连麦请求中提取出各观众端的身份标识，并将各观众端的身份标识加入至备选连麦队列中。
步骤120、响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦。
在本实施例中，主播端将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中后，由主播对备选连麦队列中的观众端进行选择。当检测到主播选择某一观众端时，将该观众端作为第一观众端(也即连麦观众端)，并建立主播端与第一观众端的点对点(peer-to-peer，P2P)直连通路，以与第一观众端进行连麦。
在本实施例中，主播可以根据各观众端的身份标识，对想要连麦的观众端进行选择。其中，主播可以根据各观众端对应简介信息，选择感兴趣的观众端作为要连麦的观众端；或者，可以根据各观众端对应的地址信息，选择同城的观众端作为要连麦的观众端。例如，假设主播为歌手，则可以选择简介信息中有“爱好唱歌”的观众端作为要连麦的观众端；假设主播为某个学术领域的专家，则可以选择简介信息与该领域匹配的观众端作为要连麦的观众端。
由此，通过将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，并由主播对备选连麦队列中的观众端进行选择，可以提高主播对连麦观众的选择自由度，实现主播与感兴趣的观众连麦，提高主播的直播体验。
在本实施例中，在确定出第一观众端后，可以根据主播端的地址信息，以及第一观众端的地址信息，建立主播端与第一观众端的点对点的直连通路。其中，地址信息可以包括互联网协议地址(Internet Protocol Address，IP地址)以及端口信息等。
步骤130、通过第一点对点直连通路，接收第一观众端的第一连麦视频流。
在此步骤中，第一观众端可以根据主播端的地址信息，将第一连麦视频流通过所述第一点对点直连通路，发送至所述主播端(如图1c所示)。其中，第一连麦视频流为第一观众端的摄像头采集的直播视频。
由此，通过建立第一点对点直连通路，可以降低主播端与连麦观众端之间的交互延迟，提高主播端与连麦观众端之间的交互效率。
步骤140、根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
其中，本地视频流为主播端的摄像头采集的直播视频。主播端获取到第一连麦视频流后，可以将第一连麦视频流与本地视频流进行合成，得到混合视频流，并将混合视频流发送至流媒体服务器。观众端只需从流媒体服务器中拉取一路混合视频流，即可看到主播和连麦者(如图1c所示)。由此，可以减少观众端的流量消耗，以及CPU的资源消耗。
本申请实施例的技术方案，通过响应于观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，然后响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，并通过第一点对点直连通路，接收第一观众端的第一连麦视频流，最后根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将混合视频流提供给各观众端的技术手段，可以减少观众端的流量消耗，以及CPU的资源消耗，可以提高主播的直播体验。
图2是根据本申请实施例的又一种连麦直播方法的流程示意图，本实施例是对上述技术方案的进一步细化，本实施例中的技术方案可以与上述一个或者多个实施方式结合。具体的，参考图2，该方法具体包括如下步骤：
步骤210、响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
步骤220、响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦。
步骤230、通过第一点对点直连通路，接收第一观众端的第一连麦视频流。
步骤240、根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
步骤250、在与第一观众端进行连麦的过程中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路。
在本实施例中，在主播端与第一观众端进行连麦的过程中，如果直播间中还有观众想要与主播进行连麦，则可以建立主播端与对应观众端(即第二观众端)的第二点对点直连通路。
这样设置的好处在于：可以实现主播端与多个观众端进行连麦，可以丰富连麦直播的互动形式。
在本发明实施例的一个实施方式中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路，包括：响应于第二观众端发送的直播间连麦请求，向直播服务器请求所述第二观众端的身份标识；响应于主播根据所述第二观众端的身份标识，触发的连麦指令，建立主播端与第二观众端的第二点对点直连通路。
其中，第二观众端的身份标识可以包括与第二观众端对应的观众的头像、名称、简介以及地址等信息。主播可以根据第二观众端的身份标识，确定是否与该第二观众端进行连麦。当主播想要与第二观众端进行连麦时，则可以触发连麦指令，主播端在该连麦指令下，建立主播端与第二观众端的第二点对点直连通路；当主播不想要与第二观众端进行连麦时，则可以触发拒绝连麦指令，主播端在该指令下，将主播拒绝连麦的消息发送至直播服务器，由直播服务器将该消息发送至第二观众端。
这样设置的好处在于：可以实现主播端与多个感兴趣的观众端进行连麦，提高主播的直播体验。
步骤260、通过第二点对点直连通路，接收第二观众端的第二连麦视频流。
在此步骤中，第二观众端可以根据主播端的地址信息，将第二连麦视频流通过所述第二点对点直连通路，发送至所述主播端。其中，第二连麦视频流为第二观众端的摄像头采集的直播视频。
由此，通过建立第二点对点直连通路，可以降低主播端与第二观众端之间的交互延迟，提高主播端与第二观众端之间的交互效率。
步骤270、根据第一连麦视频流、第二连麦视频流和主播端的本地视频流，形成新的混合视频流，并将新的混合视频流提供给各观众端。
其中，主播端可以将第一连麦视频流、第二连麦视频流与本地视频流进行合成，得到新的混合视频流，并将新的混合视频流发送至流媒体服务器。观众端只需从流媒体服务器中拉取一路新的混合视频流，即可观看主播的连麦视频。
这样设置的好处在于：可以减少观众端的流量消耗，以及CPU的资源消耗。
本申请实施例的技术方案，通过响应于观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，然后响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，通过第一点对点直连通路，接收第一观众端的第一连麦视频流，并将第一连麦视频流和本地视频流合成的混合视频流提供给各观众端，在与第一观众端进行连麦的过程中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路，并通过第二点对点直连通路，接收第二观众端的第二连麦视频流，最后将第一连麦视频流、第二连麦视频流和本地视频流合成的新的混合视频流，提供给各观众端的技术手段，可以实现主播端与多个观众端进行连麦，丰富连麦直播的互动形式，减少观众端的流量消耗，以及CPU的资源消耗。
本申请实施例是对上述实施例的进一步细化，与上述实施例相同或相应的术语解释，本申请实施例不再赘述。
图3为本申请实施例提供的一种连麦直播方法的流程图，所述连麦直播方法由主播端执行，本实施例的方法具体包括如下步骤：
步骤310、响应于主播的物品鉴定开始指令，向各观众端发送连麦使能信息，并设定预设的等待时长。
在本实施例中，所述主播端具体可以为物品鉴定类直播客户端，例如陶瓷鉴定直播客户端、书画鉴定直播客户端或者珠宝鉴定直播客户端等。相应的，所述主播可以为具体的物品鉴定领域的专家。
这样设置的好处在于：通过连麦直播的方式，即可实现对物品的鉴定，可以节省物品鉴定所消耗的时间，提高物品的鉴定效率。
其中，主播开始直播后，可以触发直播平台中的物品鉴定开始指令，主播端在该指令下向各观众端发送连麦使能信息，所述连麦使能信息用于使能各观众端发送直播间连麦请求。与此同时，主播端还设定了预设时长，并在等待所述时长之后，向各观众端发送连麦关闭信息，以禁止各观众端发送直播间连麦请求。
这样设置的好处在于：可以实现主播端与观众端快速连麦，避免连麦准备时间太久，导致直播间中观众的观看体验下降。
步骤320、在所述等待时长内，响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
在本实施例中，各观众端接收到连麦使能信息后，如果想要与主播进行连麦，则可以在所述等待时长内向直播服务器发送直播间连麦请求，由直播服务器将各直播间连麦请求发送至主播端。
步骤330、向直播服务器请求所述备选连麦队列中各观众端的用户描述信息。
在本实施例中，各观众端在发送直播间连麦请求后，还可以将各自对应的用户描述信息发送至直播服务器。其中，各观众端的用户描述信息，具体可以为各观众端对应的待鉴定的物品信息。
步骤340、对所述备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示。
步骤350、响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦。
在本实施例中，主播可以根据各观众端的身份标识以及用户描述信息，对想要连麦的观众端进行选择。例如，假设主播为瓷器鉴定领域的专家，则可以选择身份标识中有“瓷器收藏爱好者”，且用户描述信息中包括待鉴定的瓷器信息的观众端作为要连麦的观众端(也即第一观众端)。
由此，通过向直播服务器请求备选连麦队列中各观众端的用户描述信息，并对备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示，可以便于主播选择与所擅长领域匹配的观众端，提高主播端与连麦观众端的直播体验。
在本发明实施例的一个实施方式中，用户描述信息可以包括观众端对应的待鉴定的物品图像信息、以及物品视频信息。例如，假设观众端对应的待鉴定的物品为瓷器，则对应的用户描述信息可以为该瓷器的图像以及视频等信息。
这样设置的好处在于：可以将各观众端对应的待鉴定的物品信息直观地展示给主播，便于主播快速确定要连麦的观众，进而可以提高主播对物品的鉴定效率。
步骤360、通过第一点对点直连通路，接收第一观众端的第一连麦视频流。
步骤370、根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
在本实施例中，在主播端与第一观众端进行连麦的过程中，还响应于第二观众端发送的直播间连麦请求，并建立主播端与第二观众端的第二点对点直连通路，通过第二点对点直连通路，接收第二观众端的第二连麦视频流，由此，可以实现主播同时对多个观众端对应的物品进行鉴定，提高连麦观众端的直播体验。
本申请实施例通过响应于主播的物品鉴定开始指令，向各观众端发送连麦使能信息，并设定预设的等待时长，在等待时长内响应于观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，然后向直播服务器请求备选连麦队列中各观众端的用户描述信息，对备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示，最后响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，通过第一点对点直连通路，接收第一观众端的第一连麦视频流，根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将混合视频流提供给各观众端的技术手段，可以减少观众端的流量消耗，提高主播端与连麦观众端的直播体验。
图4为本申请实施例提供的一种连麦直播装置400的结构图，该装置包括：身份标识添加模块410、第一通路建立模块420、第一视频流接收模块430和混合视频流生成模块440。
其中，身份标识添加模块410，用于响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；
第一通路建立模块420，用于响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；
第一视频流接收模块430，用于通过第一点对点直连通路，接收第一观众端的第一连麦视频流；
混合视频流生成模块440，用于根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
本申请实施例的技术方案，通过响应于观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，然后响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，并通过第一点对点直连通路，接收第一观众端的第一连麦视频流，最后根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将混合视频流提供给各观众端的技术手段，可以减少观众端的流量消耗，以及CPU的资源消耗，可以提高主播的直播体验。
在上述各实施例的基础上，所述主播端为物品鉴定类直播客户端。
所述装置，还包括：
第二通路建立模块，用于在与第一观众端进行连麦的过程中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路；
第二视频流接收模块，用于通过第二点对点直连通路，接收第二观众端的第二连麦视频流；
视频流生成模块，用于根据所述第一连麦视频流、所述第二连麦视频流和主播端的本地视频流，形成新的混合视频流，并将新的混合视频流提供给各观众端。
所述第二通路建立模块，包括：
身份标识请求单元，用于响应于第二观众端发送的直播间连麦请求，向直播服务器请求所述第二观众端的身份标识；
通路建立单元，用于响应于主播根据所述第二观众端的身份标识，触发的连麦指令，建立主播端与第二观众端的第二点对点直连通路。
所述身份标识添加模块410，可以包括：
用户描述信息请求单元，用于向直播服务器请求所述备选连麦队列中各观众端的用户描述信息；
用户描述信息显示单元，用于对所述备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示；
其中，用户描述信息包括观众端对应的待鉴定的物品图像信息、以及物品视频信息；
使能信息发送单元，用于响应于主播的物品鉴定开始指令，向各所述观众端发送连麦使能信息，并设定预设的等待时长；
其中，所述连麦使能信息用于使能各所述观众端发送直播间连麦请求；
连麦请求响应单元，用于在所述等待时长内，响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
本申请实施例所提供的连麦直播装置可执行本申请任意实施例所提供的连麦直播方法，具备执行方法相应的功能模块和有益效果。
根据本申请的实施例，本申请还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图5示出了可以用来实施本申请的实施例的示例电子设备500的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本申请的实现。
如图5所示，设备500包括计算单元501，其可以根据存储在只读存储器(ROM)502中的计算机程序或者从存储单元508加载到随机访问存储器(RAM)503中的计算机程序，来执行各种适当的动作和处理。在RAM 503中，还可存储设备500操作所需的各种程序和数据。计算单元501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
设备500中的多个部件连接至I/O接口505，包括：输入单元506，例如键盘、鼠标等；输出单元507，例如各种类型的显示器、扬声器等；存储单元508，例如磁盘、光盘等；以及通信单元509，例如网卡、调制解调器、无线通信收发机等。通信单元509允许设备500通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元501可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元501的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元501执行上文所描述的各个方法和处理，例如连麦直播方法。例如，在一些实施例中，连麦直播方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元508。在一些实施例中，计算机程序的部分或者全部可以经由ROM 502和/或通信单元509而被载入和/或安装到设备500上。当计算机程序加载到RAM 503并由计算单元501执行时，可以执行上文描述的连麦直播方法的一个或多个步骤。备选地，在其他实施例中，计算单元501可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行连麦直播方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本申请的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本申请的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务中，存在的管理难度大，业务扩展性弱的缺陷。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本申请公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本申请保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等，均应包含在本申请保护范围之内。

Claims (17)

1.一种连麦直播方法，由主播端执行，包括：
响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；
响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；
通过第一点对点直连通路，接收第一观众端的第一连麦视频流；
根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
2.根据权利要求1所述的方法，其中，在根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端之后，还包括：
在与第一观众端进行连麦的过程中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路；
通过第二点对点直连通路，接收第二观众端的第二连麦视频流；
根据所述第一连麦视频流、所述第二连麦视频流和主播端的本地视频流，形成新的混合视频流，并将新的混合视频流提供给各观众端。
3.根据权利要求2所述的方法，其中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路，包括：
响应于第二观众端发送的直播间连麦请求，向直播服务器请求所述第二观众端的身份标识；
响应于主播根据所述第二观众端的身份标识，触发的连麦指令，建立主播端与第二观众端的第二点对点直连通路。
4.根据权利要求1所述的方法，所述主播端为物品鉴定类直播客户端。
5.根据权利要求4所述的方法，其中，在将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中之后，还包括：
向直播服务器请求所述备选连麦队列中各观众端的用户描述信息；
对所述备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示。
6.根据权利要求4所述的方法，其中，响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中，包括：
响应于主播的物品鉴定开始指令，向各所述观众端发送连麦使能信息，并设定预设的等待时长；
其中，所述连麦使能信息用于使能各所述观众端发送直播间连麦请求；
在所述等待时长内，响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
7.根据权利要求5所述的方法，其中，用户描述信息包括观众端对应的待鉴定的物品图像信息、以及物品视频信息。
8.一种连麦直播装置，由主播端执行，包括：
身份标识添加模块，用于响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中；
第一通路建立模块，用于响应于对备选连麦列队中第一观众端的选择，建立主播端与第一观众端的第一点对点直连通路，以与第一观众端进行连麦；
第一视频流接收模块，用于通过第一点对点直连通路，接收第一观众端的第一连麦视频流；
混合视频流生成模块，用于根据第一连麦视频流和主播端的本地视频流，形成混合视频流，并将所述混合视频流提供给各观众端。
9.根据权利要求8所述的装置，所述装置，还包括：
第二通路建立模块，用于在与第一观众端进行连麦的过程中，响应于第二观众端发送的直播间连麦请求，建立主播端与第二观众端的第二点对点直连通路；
第二视频流接收模块，用于通过第二点对点直连通路，接收第二观众端的第二连麦视频流；
视频流生成模块，用于根据所述第一连麦视频流、所述第二连麦视频流和主播端的本地视频流，形成新的混合视频流，并将新的混合视频流提供给各观众端。
10.根据权利要求9所述的装置，所述第二通路建立模块，包括：
身份标识请求单元，用于响应于第二观众端发送的直播间连麦请求，向直播服务器请求所述第二观众端的身份标识；
通路建立单元，用于响应于主播根据所述第二观众端的身份标识，触发的连麦指令，建立主播端与第二观众端的第二点对点直连通路。
11.根据权利要求8所述的装置，所述主播端为物品鉴定类直播客户端。
12.根据权利要求11所述的装置，其中，身份标识添加模块，包括：
用户描述信息请求单元，用于向直播服务器请求所述备选连麦队列中各观众端的用户描述信息；
用户描述信息显示单元，用于对所述备选连麦队列中各观众端的用户描述信息，分条目进行屏幕显示。
13.根据权利要求11所述的装置，其中，身份标识添加模块，还包括：
使能信息发送单元，用于响应于主播的物品鉴定开始指令，向各所述观众端发送连麦使能信息，并设定预设的等待时长；
其中，所述连麦使能信息用于使能各所述观众端发送直播间连麦请求；
连麦请求响应单元，用于在所述等待时长内，响应于至少一个观众端发送的直播间连麦请求，将与各直播间连麦请求匹配的观众端的身份标识加入至备选连麦队列中。
14.根据权利要求12所述的装置，其中，用户描述信息包括观众端对应的待鉴定的物品图像信息、以及物品视频信息。
15.一种电子设备，其中，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-7中任一项所述的方法。
16.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行权利要求1-7中任一项所述的方法。
17.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-7中任一项所述的方法。
CN202011559900.1A 2020-12-25 2020-12-25 一种连麦直播方法、装置、设备、存储介质及产品 Pending CN112738638A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011559900.1A CN112738638A (zh) 2020-12-25 2020-12-25 一种连麦直播方法、装置、设备、存储介质及产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011559900.1A CN112738638A (zh) 2020-12-25 2020-12-25 一种连麦直播方法、装置、设备、存储介质及产品

Publications (1)

Publication Number Publication Date
CN112738638A true CN112738638A (zh) 2021-04-30

Family

ID=75615902

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011559900.1A Pending CN112738638A (zh) 2020-12-25 2020-12-25 一种连麦直播方法、装置、设备、存储介质及产品

Country Status (1)

Country Link
CN (1) CN112738638A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113727183A (zh) * 2021-08-30 2021-11-30 北京百度网讯科技有限公司 直播推流方法、装置、设备、存储介质及计算机程序产品
CN113923470A (zh) * 2021-11-24 2022-01-11 上海哔哩哔哩科技有限公司 直播流处理方法及装置
CN113923529A (zh) * 2021-10-08 2022-01-11 北京百度网讯科技有限公司 直播连麦方法、装置、设备以及存储介质
CN115119010A (zh) * 2022-06-29 2022-09-27 北京奇艺世纪科技有限公司 连麦方法、装置、电子设备和存储介质
CN115484469A (zh) * 2021-06-15 2022-12-16 北京字节跳动网络技术有限公司 一种连麦系统、方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106303586A (zh) * 2016-08-18 2017-01-04 北京奇虎科技有限公司 一种网络直播的方法、主播端设备、观众端设备
CN107027048A (zh) * 2017-05-17 2017-08-08 广州市千钧网络科技有限公司 一种直播连麦及信息展示的方法及装置
CN109688419A (zh) * 2018-12-27 2019-04-26 北京潘达互娱科技有限公司 一种直播中的连麦方法、装置及服务器
US20190158889A1 (en) * 2016-09-18 2019-05-23 Tencent Technology (Shenzhen) Company Limited Live streaming method and system, server, and storage medium
CN111050185A (zh) * 2018-10-15 2020-04-21 武汉斗鱼网络科技有限公司 直播间连麦视频混流方法、存储介质、电子设备及系统
CN111385592A (zh) * 2018-12-29 2020-07-07 广州市百果园信息技术有限公司 跨房间直播连线方法、装置、存储介质和服务器
CN111836074A (zh) * 2020-07-23 2020-10-27 北京达佳互联信息技术有限公司 一种连麦直播方法、装置及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106303586A (zh) * 2016-08-18 2017-01-04 北京奇虎科技有限公司 一种网络直播的方法、主播端设备、观众端设备
US20190158889A1 (en) * 2016-09-18 2019-05-23 Tencent Technology (Shenzhen) Company Limited Live streaming method and system, server, and storage medium
CN107027048A (zh) * 2017-05-17 2017-08-08 广州市千钧网络科技有限公司 一种直播连麦及信息展示的方法及装置
CN111050185A (zh) * 2018-10-15 2020-04-21 武汉斗鱼网络科技有限公司 直播间连麦视频混流方法、存储介质、电子设备及系统
CN109688419A (zh) * 2018-12-27 2019-04-26 北京潘达互娱科技有限公司 一种直播中的连麦方法、装置及服务器
CN111385592A (zh) * 2018-12-29 2020-07-07 广州市百果园信息技术有限公司 跨房间直播连线方法、装置、存储介质和服务器
CN111836074A (zh) * 2020-07-23 2020-10-27 北京达佳互联信息技术有限公司 一种连麦直播方法、装置及系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115484469A (zh) * 2021-06-15 2022-12-16 北京字节跳动网络技术有限公司 一种连麦系统、方法、装置、设备及存储介质
CN115484469B (zh) * 2021-06-15 2024-01-09 北京字节跳动网络技术有限公司 一种连麦系统、方法、装置、设备及存储介质
CN113727183A (zh) * 2021-08-30 2021-11-30 北京百度网讯科技有限公司 直播推流方法、装置、设备、存储介质及计算机程序产品
CN113727183B (zh) * 2021-08-30 2023-09-15 北京百度网讯科技有限公司 直播推流方法、装置、设备、存储介质及计算机程序产品
CN113923529A (zh) * 2021-10-08 2022-01-11 北京百度网讯科技有限公司 直播连麦方法、装置、设备以及存储介质
CN113923470A (zh) * 2021-11-24 2022-01-11 上海哔哩哔哩科技有限公司 直播流处理方法及装置
CN115119010A (zh) * 2022-06-29 2022-09-27 北京奇艺世纪科技有限公司 连麦方法、装置、电子设备和存储介质
CN115119010B (zh) * 2022-06-29 2023-07-25 北京奇艺世纪科技有限公司 连麦方法、装置、电子设备和存储介质

Similar Documents

Publication Publication Date Title
CN112738638A (zh) 一种连麦直播方法、装置、设备、存储介质及产品
US9467650B2 (en) Method and apparatus for transmitting media stream in video conference
CN102883135B (zh) 屏幕共享及控制方法
US10320865B2 (en) Graphical indicator of presence, identity, and action for media sharing on a display
US20150032809A1 (en) Conference Session Handoff Between Devices
CN109391851B (zh) 视频直播方法、装置、计算机设备和存储介质
CN113225577B (zh) 直播流处理方法、装置、系统、电子设备及存储介质
CN112291502B (zh) 信息交互方法、装置、系统和电子设备
CN107734394B (zh) 显示动画信息的方法和装置
EP3026844B1 (en) Apparatus, system, and method of selecting relay device in conferencing system, and carrier medium
CN109788301B (zh) 一种流媒体的直播方法、终端设备、直播系统及计算机可读存储介质
CN108989836A (zh) 一种多媒体数据流的处理方法及装置
US10732806B2 (en) Incorporating user content within a communication session interface
EP3217596A1 (en) Communication terminal, communication system, and data transmission method
US20130016058A1 (en) Electronic device, display method and computer-readable recording medium storing display program
CN113542660A (zh) 一种实现会议多画面高清显示的方法、系统及存储介质
CN106411713B (zh) 一种状态通知方法及服务器
CN106792237B (zh) 一种消息显示方法和系统
CN108337556B (zh) 用于播放影音文件的方法和装置
EP3151481B1 (en) Communication terminal, communication system, and output method
CN111803924B (zh) 云游戏的多终端同步显示方法、装置及可读存储介质
CN115209189B (zh) 一种视频流传输方法、系统、服务器及存储介质
EP3029933B1 (en) Apparatus, system, and method of controlling session, and carrier means
CN112511884B (zh) 一种音视频流的混流控制方法、系统和存储介质
CN107222706B (zh) 一种视频预览方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210430

RJ01 Rejection of invention patent application after publication