CN108668151A - 音视频交互方法及装置 - Google Patents

音视频交互方法及装置 Download PDF

Info

Publication number
CN108668151A
CN108668151A CN201710209879.4A CN201710209879A CN108668151A CN 108668151 A CN108668151 A CN 108668151A CN 201710209879 A CN201710209879 A CN 201710209879A CN 108668151 A CN108668151 A CN 108668151A
Authority
CN
China
Prior art keywords
audio
terminal
video
management equipment
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710209879.4A
Other languages
English (en)
Other versions
CN108668151B (zh
Inventor
薛笛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710209879.4A priority Critical patent/CN108668151B/zh
Publication of CN108668151A publication Critical patent/CN108668151A/zh
Application granted granted Critical
Publication of CN108668151B publication Critical patent/CN108668151B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25816—Management of client data involving client authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种音视频交互方法及装置，属于网络技术领域。该方法包括：接收第一管理设备的第一终端携带第一路径信息的音视频交互请求消息；将音视频交互请求消息转发至与第二终端关联的第二管理设备；将第二管理设备返回的音视频交互确认消息转发至第一管理设备，该音视频交互确认消息携带第二路径信息，由第一管理设备和第二管理设备基于相应路径信息进行音视频交互。通过在第一管理设备和第二管理设备之间进行信令交互，使得第二管理设备和第一管理设备可以得到第一路径信息和第二路径信息，进而基于路径信息，将第一终端和第二终端的音视频数据发送给对方直播房间内的用户，从而实现了不同直播房间之间的互动，提高了互动性。

Description

音视频交互方法及装置
技术领域
本发明涉及网络技术领域，特别涉及一种音视频交互方法及装置。
背景技术
随着网络技术的发展，视频直播已经成为一种流行的网络互动形式，例如，直播系统会为需要进行直播的主播用户分配一个音视频标识，即房间号，其他用户可以加入到这个“房间”作为观众用户来与主播用户进行互动。
目前，一个“房间”内的观众用户所在的终端可以接收到主播用户的音视频数据，观众用户不仅可以通过文字、图片或动画信息来与主播用户进行互动，还可通过在房间内连麦与主播用户进行语音互动。
在实现本发明的过程中，发明人发现现有技术至少存在以下问题：
现有的视频直播仅限于房间内用户之间的互动，不同房间内的用户不能进行互动，互动性差。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种音视频交互方法及装置。所述技术方案如下：
第一方面，提供了一种音视频交互方法，应用于策略服务器，所述方法包括：
接收第一管理设备发送的第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
确定与所述第二终端关联的第二管理设备；
将所述音视频交互请求消息转发至所述第二管理设备，由所述第二管理设备返回音视频交互确认消息，所述音视频交互确认消息携带第二路径信息，所述第二路径信息用于指示通过从所述第二管理设备向所述第二终端进行音视频数据的转发；
将所述音视频交互确认消息转发至所述第一管理设备，由所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端进行音视频数据的交互。
第二方面，提供了一种音视频交互方法，应用于第一管理设备，所述方法包括：
向策略服务器发送第一终端的音视频交互请求消息，由所述策略服务器将所述音视频交互请求消息转发至与第二终端关联的第二管理设备，并返回所述第二管理设备的音视频交互确认消息，所述音视频交互请求消息用于请求与所述第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述音视频交互确认消息携带第二路径信息；
根据所述第二路径信息，将所述第一终端的音视频数据发送至所述第二管理设备，由所述第二管理设备将所述第一终端的音视频数据发送至与所述第二终端所关联的用户所在终端；
其中，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发。
第三方面，提供了一种音视频交互方法，应用于第二管理设备，所述方法包括：
从策略服务器接收第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过第一管理设备向所述第一终端进行音视频数据的转发；
获取第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，由所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
当接收到所述第二终端的音视频数据时，根据所述第一路径信息，将所述第二终端的音视频数据发送至所述第一管理设备，由所述第一管理设备将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端。
第四方面，提供了一种音视频交互方法，所述方法包括：
第一管理设备向策略服务器发送第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
所述策略服务器确定与所述第二终端关联的第二管理设备，将所述音视频交互请求消息转发至所述第二管理设备；
所述第二管理设备获取第二路径信息，向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端的音视频数据进行交互。
第五方面，提供了一种音视频交互装置，应用于策略服务器，所述装置包括：
接收模块，用于接收第一管理设备发送的第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
确定模块，用于确定与所述第二终端关联的第二管理设备；
第一发送模块，用于将所述音视频交互请求消息转发至所述第二管理设备，由所述第二管理设备返回音视频交互确认消息，所述音视频交互确认消息携带第二路径信息，所述第二路径信息用于指示通过从所述第二管理设备向所述第二终端进行音视频数据的转发；
第二发送模块，用于将所述音视频交互确认消息转发至所述第一管理设备，由所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端的音视频数据进行交互。
第六方面，提供了一种音视频交互装置，应用于第一管理设备，所述装置包括：
第一发送模块，用于向策略服务器发送第一终端的音视频交互请求消息，由所述策略服务器将所述音视频交互请求消息转发至与第二终端关联的第二管理设备，并返回所述第二管理设备的音视频交互确认消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述音视频交互确认消息携带第二路径信息；
第二发送模块，用于根据所述第二路径信息，将所述第一终端的音视频数据发送至所述第二管理设备，由所述第二管理设备将所述第一终端的音视频数据发送至与所述第二终端所关联的用户所在终端；
其中，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发。
第七方面，提供了一种音视频交互装置，应用于第二管理设备，所述装置包括：
接收模块，用于从策略服务器接收第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过第一管理设备向所述第一终端进行音视频数据的转发；
获取模块，用于获取第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
第一发送模块，用于向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，由所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
第二发送模块，用于当接收到所述第二终端的音视频数据时，根据所述第一路径信息，将所述第二终端的音视频数据发送至所述第一管理设备，由所述第一管理设备将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端。
第八方面，提供了一种音视频交互系统，所述系统包括第一管理设备、第二管理设备和策略服务器，
所述策略服务器用于执行上述第一方面所述的方法；
所述第一管理设备用于执行上第二方面所述的方法；
所述第二管理设备用于执行上述第三方面所述的方法。
本发明实施例提供的技术方案带来的有益效果是：
在建立音视频交互的过程中，通过策略服务器在第一管理设备和第二管理设备之间进行信令交互，使得第二管理设备可以得到第一终端的第一路径信息，第一管理设备可以得到第二终端的第二路径信息，进而第一管理设备和第二管理设备可以基于该第一路径信息和第二路径信息，将第一终端和第二终端的音视频数据发送至对方直播房间内的所有用户所在终端，从而实现了不同直播房间之间的互动，提高了互动性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种音视频交互系统的架构图；
图2A是本发明实施例提供的一种音视频交互方法的流程图；
图2B是本发明实施例提供的一种音视频交互方法的流程图；
图2C是本发明实施例提供的一种建立音视频交互过程中信令交互的示意图；
图2D是本发明实施例提供的一种音视频交互方法的流程图；
图2E是本发明实施例提供的一种音视频交互过程中数据转发的示意图；
图3是本发明实施例提供的一种音视频交互装置的框图；
图4是本发明实施例提供的一种音视频交互装置的框图；
图5是本发明实施例提供的一种音视频交互装置的框图；
图6是本发明实施例提供的一种音视频交互装置的框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明实施例提供的一种音视频交互系统的架构图，参见图1，该音视频交互系统包括策略服务器、多个管理设备和多个终端。
策略服务器用于在主播用户请求进行视频直播时，为主播用户所在终端分配音视频标识，该音视频标识可以用于唯一标识一个直播房间或直播频道，该音视频标识可以为房间号(Room ID)或频道号(Channel ID)，并根据多个管理设备的负载情况，为该直播房间分配管理设备。
每个管理设备用于对一个或多个直播房间的视频直播进行管理，比如，当一个直播房间创建时，如果策略服务器将该管理设备分配给该直播房间，该管理设备可以记录该直播房间的音视频标识，并在直播过程中，根据该音视频标识将直播房间的主播用户所在终端上传的音视频数据，发送至该直播房间内的观众用户所在终端。
在实际应用时，可以采用不同的功能单元来实现管理设备的不同功能，比如，一个管理设备可以包括流控单元(Center)和一个或多个中转单元(Access)。当然，管理设备的所有功能也可以由一个单元来实现，本实施例对此不作限定。
其中，每个管理设备还可以提供所管理直播房间的路径信息，该路径信息用于指示可以通过该管理设备将其他直播房间主播用户的音视频数据转发到本地直播房间，以实现不同直播房间的音视频交互。其中，该路径信息可以包括管理设备的地址信息，当管理设备包括流控单元和中转单元时，一个直播房间对应的路径信息可以包括该直播房间对应流控单元的地址信息和中转单元的地址信息。其中，流控单元的地址信息可以为流控单元的IP地址，中转单元的地址信息可以为中转单元的IP地址。
其中，流控单元用于管理一个或多个直播房间的直播信息，一个直播房间的直播信息可以包括该直播房间的音视频标识、以及该直播房间对应的中转单元列表等。其中，一个直播房间的中转单元列表用于记录该直播房间内的主播用户和观众用户的用户标识以及主播用户所在终端和观众用户所在终端接入的中转单元的地址信息。其中，用户的用户标识可以为该用户的用户名、注册手机号码等。流控单元还可以用于与策略服务器之间进行信令和消息的交互，比如，进行音视频交互请求消息以及音视频交互确认消息的交互。此外，流控单元还可以用于对用户的网络质量进行调控。
其中，一个流控单元可以对应一个或多个中转单元，一个中转单元可以连接一个或多个终端。终端可以为移动终端(如手机、平板电脑等)或台式电脑等。在某个用户需要参与某个直播房间的视频直播时，策略服务器会为该用户所在终端分配一个中转单元，并将该中转单元的地址信息注册到流控单元与相应音视频标识对应的中转单元列表中。其中，策略服务器可以根据地理位置向终端分配附近的中转单元。每个中转单元可以作为终端与流控单元的桥梁，用于在终端和流控单元之间转发信令或消息。对于一个直播房间内的直播来说，主播用户所对应的中转单元可以将主播用户的音视频数据，发送至观众用户所对应的中转单元，由观众用户所对应的中转单元将主播用户的音视频数据转发至观众用户所在终端。对于跨房间的直播来说，不同直播房间主播用户所对应的中转单元之间还可以进行主播用户的音视频数据的交互。也即是，本实施例中同一个直播房间所对应的中转单元之间可以进行音视频交互，不同直播房间所对应的中转单元之间也可以进行音视频交互。例如，一个直播房间A的主播A与另一个直播房间B的主播B进行音视频交互时，直播房间A的主播A所对应的中转单元用于将主播A所在终端的音视频数据发送至直播房间B所对应的中转单元，进而由直播房间B所对应的中转单元将主播A的音视频数据发送至主播B以及直播房间B的观众用户所在终端。
此外，视频直播系统还包括直播信息数据库，该直播信息数据库提供直播信息的查询服务，直播信息数据库用于存储视频直播系统中所有在线直播房间的基础信息，该基础信息包括直播房间的创建时间、音视频标识、管理该直播房间的流控单元的地址信息、以及该直播房间的中转单元列表。比如，策略服务器可以根据音视频标识向直播信息数据库查询与该音视频标识对应的流控单元以及中转单元，由该直播信息数据库返回查询结果。
另外，该视频直播系统中还可以包括消息单元和信令接入单元，消息单元用于管理和转发各个终端之间交互的即时消息，比如文字、图片等。终端可以通过信令接入单元与消息单元和策略服务器进行交互。
需要说明的是，图1仅以一个管理设备的架构为例示出，一个管理设备可以架设在一个或多个服务器上，也可以在一个服务器上架设多个管理设备。其中，一个管理设备的流控单元和中转单元可以假设在一个服务器上，也可以架设在多个服务器上，管理设备可以为具有相应功能的实体设备，也可以为实现相应功能的应用程序，本实施例对此均不作限定。
图2A是本发明实施例提供的一种音视频交互方法的流程图，参见图2A，涉及交互主体为第一管理设备、第二管理设备和策略服务器，其中，第一管理设备包括第一中转单元和第一流控单元，第二管理设备包括第二中转单元和第二流控单元，该方法流程包括以下步骤：
201、第一中转单元接收到第一终端的初始音视频交互请求消息时，将该初始音视频交互请求消息发送至第一流控单元。
在本发明实施例中，不同直播房间内的用户可以进行音视频数据的交互，也即是可以将不同直播房间的具有控制权限的用户的音视频数据进行交互，比如，该具有控制权限的用户可以为直播房间的主播用户。相比于直播房间内的直播，该音视频交互的过程可以看作是不同直播房间之间进行跨房间直播。本实施例中，进行音视频交互的直播房间的个数可以为两个也可以为两个以上，本发明实施例对此不作限定。以第一直播房间和第二直播房间该两个直播房间为例，该两个直播房间进行音视频交互是指，将第一直播房间的第一主播用户的音视频数据发送至第二直播房间所关联用户所在终端。将第二直播房间的第二主播用户的音视频数据发送至第一直播房间所关联用户所在终端。从第一直播房间所关联用户和第二直播房间所关联用户的角度来看，第一主播用户的音视频数据和第二主播用户的音视频数据会呈现在同一个画面中。
需要说明的是，本发明实施例所述的音视频交互，除了在不同直播房间之间对主播用户的音视频数据进行交互之外，交互的音视频数据还可以包括直播房间内观众用户的音视频数据。比如，交互的音视频数据包括第一主播用户和第一直播房间的第一观众用户的音视频数据，以及第二主播用户的音视频数据。再比如，交互的音视频数据包括第一主播用户的音视频数据，以及第二主播用户和第二直播房间的第二观众用户的音视频数据。再比如，交互的音视频数据包括第一主播用户和第一观众用户的音视频数据，以及，第二主播用户和第一观众用户的音视频数据。以交互的音视频数据包括第一主播用户和第一观众用户的音视频数据，以及第二主播用户的音视频数据为例，可以采用如下两种实施方式：第一种实施方式，在请求音视频交互的阶段，如果检测到第一主播用户所在的直播房间内除了播放有主播用户的音视频数据外，还播放有第一观众用户的音视频数据，则分别对第一主播用户和第一观众用户执行本发明实施例所提供的音视频交互方法。第二种实施方式，将第一主播用户和第一观众用户作为一个整体，可以理解为将这个整体虚拟成第一直播房间的主播用户，对该虚拟的主播用户执行本发明实施例提供的音视频交互方法，该第二种实施方式，由于将第一主播用户和第二主播用户看作一个整体，在音视频交互时只需向第二直播房间转发一份音视频数据，可以减少后台的处理流程，节省带宽。
本实施例中，第一终端为第一直播房间的主播用户所在终端，第一中转单元是指与第一终端对应的中转单元，例如，第一中转单元为与第一终端所属直播房间的音视频标识所对应的中转单元，该第一中转单元的个数可以为一个或多个。
当第一终端的主播用户希望与第二终端的主播用户进行音视频数据的交互时，第一终端的主播用户通过本地终端发起与第二终端初始音视频交互请求消息，该过程可以为：当第一终端检测到与第二终端进行音视频交互的操作时，获取第二终端的音视频标识，并向第一中转单元发送初始音视频交互请求消息，该初始音视频交互请求消息可以携带第二终端所属直播房间的音视频标识。其中，第二终端为第二直播房间的主播用户所在的终端，该初始音视频交互请求消息中还可以携带第一终端所属直播房间的音视频标识，以使得第一流控单元能够直接确定音视频交互的请求方。
第一流控单元为与第一中转单元对应的第一流控单元，用于管理该第一直播房间的直播信息，直播信息所包括的内容详见上述对流控单元的解释说明。
在本实施例中，第一中转单元在接收到初始音视频交互请求消息后，还可以检测本地是否存储有与第二终端对应的第二路径信息，其中与第二终端对应的第二路径信息是指与第二终端所属直播房间的音视频标识相对应的路径信息。如果存储有，则可以不执行步骤202至214的过程，直接根据存储的第二路径信息，确定与第二终端对应的第二中转单元，并将第一终端的音视频数据发送至第二中转单元。其中，第二路径信息的获取途径可以包括：(1)第一终端和第二终端之前进行过音视频交互，并在第一中转单元存储有该第二路径信息。(2)第一终端和第二终端互为直播好友，比如，第一终端的主播用户和第二终端的主播用户之间可以建立好友关系，策略服务器在检测到第一终端的主播用户和第二终端的主播用户之间建立好友关系链时，获取第二终端所对应的第二路径信息，将第二路径信息通过第二流控单元发送至第二中转单元，以使得第二中转单元获取到该第二路径信息。同理，第一中转单元也可以获取到第一终端的音视频标识所对应的第一路径信息。(3)第一终端和第二终端可以均定制有跨房间直播服务，以使得策略服务器将第二终端对应的第二路径信息配置到第一中转单元。
202、第一流控单元接收到该初始音视频交互请求消息后，向策略服务器发送第一终端的音视频交互请求消息，该音视频交互请求消息携带第一路径信息。
其中，音视频交互请求消息用于请求与第二终端进行音视频交互，也即是在第一终端所属直播房间和第二终端所属直播房间进行跨房间直播。第一路径信息用于指示可以通过第一流控单元和第一中转单元将其他直播房间主播用户的音视频数据发送到第一终端所属直播房间的主播用户和观众用户所在终端。
第一流控单元在初始音视频交互请求消息中添加第一流控单元的地址信息以及第一中转单元的地址信息。比如，第一流控单元将第一流控单元的IP地址和第一中转单元的IP地址添加到该初始音视频交互请求消息中，得到第一终端的音视频交互请求消息。其中，将第一流控单元的地址信息和第一中转单元的地址信息作为该第一路径信息。其中，当第一流控单元用于管理多个直播房间的直播信息时，第一流控单元还可以将第一终端所属直播房间的音视频标识携带在音视频交互请求消息中，以使得后续音视频交互过程中，第二中转单元在向第一中转单元发送音视频数据时，明确音视频数据的目标直播房间。
203、策略服务器接收到第一终端的音视频交互请求消息时，确定与第二终端关联的第二流控单元。
在本发明实施例中，音视频交互请求消息中还可以携带第二终端所属直播房间的音视频标识，策略服务器可以根据第二终端的音视频标识，确定与第二终端关联的第二流控单元，该过程可以为：策略服务器根据第二终端的音视频标识，从多组音视频标识与管理设备之间的对应关系中，查询与第二终端的音视频标识对应的第二流控单元，将与第二终端的音视频标识对应的流控单元作为第二流控单元。
其中，多组音视频标识与管理设备之间的对应关系可以存储在直播信息数据库，例如，将音视频标识和管理设备的地址信息(如IP地址)对应存储在直播信息数据库中，后续根据直播情况对该直播信息数据库进行不断更新。该多组音视频标识与管理设备之间的对应关系可以作为直播房间的基础信息。其中，管理设备的地址信息可以为流控单元的IP地址。该查询过程可以为：策略服务器可以向直播信息数据库发送查询请求，该查询请求中携带第二终端的音视频标识，由直播信息数据库根据该第二终端的音视频标识，查询存储的直播房间的基础信息，将与第二终端的音视频标识对应的流控单元作为第二流控单元，向策略服务器返回第二流控单元的的IP地址。
为了确保音视频交互的安全性，策略服务器在接收到第一终端的音视频交互请求消息后，对第一终端进行身份校验，该过程可以包括如下两种方式：
第一种方式、对第一终端进行身份校验；如果身份校验成功，则执行步骤203确定与第二终端关联的第二流控单元的步骤。
该种方式为对第一终端身份的真实性进行校验，对应该种方式，在步骤201中第一终端的初始音视频交互请求消息中还携带第一终端的签名信息。策略服务器根据该签名信息对第一终端进行身份验证，例如，该签名信息可以由第一终端根据预设算法，对第一终端的用户标识进行加密得到，策略服务器根据与该预设算法相应或相同的算法对该签名信息进行解密，如果解密成功，则确定身份校验成功，否则确定身份校验失败。
第二种方式、确定第一终端是否具有音视频交互权限；如果第一终端具有音视频交互权限，则执行步骤203确定与第二终端关联的第二流控单元的步骤。
该种方式中，策略服务器可以预先配置音视频交互规则，满足该音视频交互规则的终端即具有音视频交互权限。例如，音视频交互规则可以为用户为主播用户，或者为用户为直播等级高于预设等级的用户，或者用户定制了跨房间直播服务等。其中，预设直播等级可以由策略服务器进行预先配置或修改，本实施例对此不作限定。
第三种方式、确定第一终端是否具有音视频交互权限；如果第一终端具有音视频交互权限，确定第二终端是否具有音视频交互权限；如果第二终端也具有音视频交互权限，则执行步骤203确定与第二终端关联的第二流控单元的步骤。
需要说明的是，如果采用上述三种方式中的任一种对第一终端的身份校验失败，则拒绝第一终端进行音视频交互，建立音视频交互的流程到此结束。另外，实际应用过程中，还可以将第一种方式和第二种方式对第一终端进行联合校验，或者将第一种方式和第三种方式第一终端进行联合校验。
204、策略服务器向该第二流控单元发送该第一终端的音视频交互请求消息。
本实施例中，由策略服务器对第一终端的身份进行校验，并在第一流控单元和第二流控单元之间进行音视频交互请求消息的转发，使得视频直播系统的各个设备能够有机地配合工作，降低了其他设备的处理压力。
205、第二流控单元接收到该音视频交互请求消息后，存储第一终端的第一路径信息，获取第二路径信息。
其中，音视频交互请求消息可以携带第一终端所属直播房间的音视频标识，第二流控单元可以将该第一路径信息和第一终端的音视频标识进行对应存储。第二流控单元通过存储该第一路径信息可以便于后续通过该第一路径信息，确定与第一终端关联的第一流控单元和第一中转单元，进而能够向第一终端所在的直播房间的所有用户发送音视频数据。
在实际应用时，第二流控单元可以为所管理的直播房间维护一个音视频交互直播列表。以第一终端和第二终端的音视频交互为例，该音视频交互列表中包括第二终端所属直播房间的音视频标识、第一终端所属直播房间的音视频标识以及第一路径信息之间的对应关系。
其中，第二路径信息用于指示通过第二流控单元和第二中转单元向第二终端进行音视频数据的转发。该第二路径信息的获取过程可以为：第二流控单元可以根据第二终端所属直播房间的音视频标识，从维护的直播信息中获取与第二终端的音视频标识关联的第二中转单元，进而获取第二中转单元的地址信息和第二流控单元的地址信息。其中，音视频交互请求消息中可以携带第二终端所属直播房间的音视频标识，以使得第二流控单元从该音视频交互请求消息中获取该第二终端对应的音视频标识。第二路径信息中可以包括第二中转单元的地址信息和第二流控单元的地址信息。例如，第二路径信息中包括第二中转单元的IP地址和第二流控单元的IP地址。
本实施例中，第二流控单元可以通过第二中转单元将该音视频交互请求消息发送至第二终端，第二终端的主播用户如果同意进行音视频交互，可以通过第二终端触发音视频交互确认消息，比如，第二终端接收到音视频交互请求消息时，可以显示是否同意的提示消息，第二终端的主播用户可以通过点击确定选项，触发第二终端向第二流控单元发送确认消息，以使得第二流控单元执行步骤206。
206、第二流控单元向策略服务器发送音视频交互确认消息，该音视频交互确认消息中携带第二路径信息。
其中，当第二流控单元用于管理多个直播房间的直播信息时，第二流控单元还可以将第二终端的音视频标识携带在音视频交互确认消息中，以使得后续音视频交互过程中，第二中转单元在向第一中转单元发送音视频数据时，明确音视频数据的目标直播房间。
在另一个实施例中，第一终端还可以与第二终端预约进行音视频交互的时间，比如，预约在当天10点进行音视频交互，此时，第一终端向第一中转单元发送的初始音视频交互请求消息中还可以携带预约时间，以使得策略服务器都能够将携带该预设时间信息的音视频交互请求消息发送至第二流控单元，通过第二流控单元通知第二终端所关联的用户所在终端。其中，第二终端所关联的用户是指与第二终端所属直播房间的音视频标识所关联的用户，即归属于第二终端所属直播房间的用户。参与音视频交互的第一终端所对应直播房间和第二终端所对应直播房间的所有用户终端均可以显示该预约时间，以使得参与音视频交互的所有用户获知音视频交互开始的时间。相应地，第一中转单元和第二中转单元也在到达该预约时间时才对应采集第一终端的音视频数据或第二终端的音视频数据。
207、第二流控单元将音视频交互请求消息所携带的信息同步至第二中转单元。
第二流控单元将第一终端的音视频标识以及第一路径信息发送至第二中转单元，由第二中转单元对应存储第一终端的音视频标识以及第一路径信息。当然，第二流控单元还可以将与第二终端的音视频标识对应的音视频交互列表同步给第二中转单元，由第二中转单元存储该第二终端的音视频交互列表。
208、第二流控单元向第二中转单元发送音视频交互更新消息。
为了使第二直播房间的直播用户和观众用户获知当前处于与其他直播房间进行音视频交互的状态，第二流控单元向第二中转单元发送音视频交互更新消息，该音视频交互更新消息用于指示第二终端与第一终端进行音视频交互。该音视频交互更新消息中可以携带第一终端对应的音视频标识以及第一终端用户的用户标识。
209、第二中转单元将该音视频交互更新消息发送至第二终端所关联的用户所在终端。
该发送过程可以为：第二中转单元根据第二种终端的音视频标识，确定与该第二终端的音视频标识所关联的第一用户；向第一用户所在终端发送音视频交互更新消息。其中，第二终端所关联的用户是指第二终端所属直播房间所指示的主播用户以及观众用户。
在一种实施方式中，第一用户全部接受音视频交互，也即是，当一个直播房间参与音视频交互时，该直播房间内的所有用户均参与该音视频交互。例如，第一用户所在终端在接收到音视频交互更新消息时，将该第一终端的音视频标识直接添加至本地的直播列表中，以使得第二终端所属直播房间的主播用户或观众用户在本地终端的直播列表中既能够看到第二终端所指示主播用户的用户标识，又能够看到第一终端所指示主播用户的用户标识和第一终端的音视频标识。也即是，用户可以在本地终端的直播列表中看到本地直播房间的主播信息和进行音视频交互的其他直播房间的主播信息。
在另一种实施方式中，为了提高音视频交互的灵活性，第一用户也可以拒绝音视频交互，例如，如果第二用户拒绝参与音视频交互，可以通过第二用户所在终端向第二中转单元发送拒绝更新消息。如果第二中转单元接收到第二用户所在终端的拒绝更新消息，则为该第二用户添加指定标签。其中，第二用户为第一用户中的任一用户，指定标签用于指示该第二用户拒绝参与第一终端的音视频交互，以使在与第一终端进行音视频交互的过程中，第二中转单元仅向第二用户所在终端发送第二终端的音视频数据，而不将第一终端的音视频数据发送给第二用户所在终端。在这种情况下，第二用户所在终端便仅显示第二终端的音视频数据，也即是仅显示第二终端的主播用户的视频画面。
其中，指定标签可以由策略服务器预先配置到第二中转单元或第二流控单元，本实施例对此不作限定。在实际应用时，第二中转单元可以对应第一用户维护一个直播列表，该直播列表用于记录第一用户所在终端播放音视频数据的主播用户的用户信息。在与第二终端进行音视频交互时，如果第一用户接受第一终端的音视频交互，第二中转单元可以在第一用户的直播列表中添加第一终端所指示主播用户的用户信息，即第一终端的音视频标识以及第一终端用户的用户标识。如果第二用户拒绝音视频交互，第二中转单元则不在该第二用户的直播列表中添加该第一终端所指示主播用户的用户信息。
当两个直播房间进行音视频交互时，通过向两个直播房间的观众用户提供拒绝参与音视频交互的功能，提高了音视频交互过程中观众用户参与的灵活性。
210、策略服务器将第二流控单元的音视频交互确认消息发送至第一流控单元。
需要说明的是，该步骤可以在步骤206之后执行，本实施例对该步骤与步骤207至209之间的失序关系不作限定。
211、第一流控单元接收到该音视频交互确认消息后，存储第二终端的第二路径信息。
第一流控单元还可以通过第一中转单元向第一终端发送该音视频交互确认消息，以使得第一终端确定第二终端同意进行音视频交互，如果第一终端在发送初始音视频交互请求消息后预设时间内没有接收到音视频交互确认消息，则可以终止本次音视频交互的流程。
212、第一流控单元将该音视频交互确认消息携带的信息同步至第一中转单元。
213、第一流控单元向第一中转单元发送音视频交互更新消息。
214、第一中转单元将该音视频交互更新消息发送至与第一终端所关联的用户所在终端。
上述步骤211与步骤205同理，步骤212与步骤207同理，步骤213与步骤208同理，步骤214与步骤209同理，在此不做赘述。
下面从第一管理设备、第二管理设备和策略服务器的角度，对上述步骤201至步骤209进行归纳说明，相应的音视频交互方法的流程可参见图2B。
上述步骤201至202是第一管理设备向策略服务器发送第一终端的音视频交互请求消息的过程；
上述步骤203是策略服务器确定与第二终端关联的第二管理设备的过程，如果将管理设备进行功能性划分，此处第二管理设备是指第二流控单元；
上述步骤204是策略服务器将音视频交互请求消息转发至第二管理设备的过程；
上述步骤205是第二管理设备接收到第一终端的音视频交互请求消息后，获取第二路径信息的过程；
上述步骤206是第二管理设备向策略服务器发送音视频交互确认消息的过程，该音视频交互确认消息中携带第二路径信息；
上述步骤207至步骤209是第二管理设备向第二终端多关联的用户所在终端发送音视频交互更新消息，由第二终端所关联的用户所在终端在本地直播列表中添加第一终端的音视频标识的过程。
上述步骤210至步骤214是策略服务器将音视频交互确认消息转发至第一管理设备，第一管理设备存储第二路径信息，向第一终端所关联的用户所在终端发送音视频交互更新消息，由第一终端所关联的用户所在终端在本地直播列表中添加第二终端的音视频标识的过程。其中，第一终端所关联的用户是指与第一终端所属直播房间的音视频标识所关联的用户，即归属于第一终端所属直播房间的用户。
以上步骤201至214为第一终端发起与第二终端的音视频交互后，策略服务器、第一管理设备、第二管理设备之间通过信息交互，在第一终端对应的直播房间与第二终端对应的直播房间进行音视频交互的过程，为了更加清楚的描述上述过程，图2C示出了一种建立音视频交互过程中信令交互的示意图。在此基础上，第一终端与第二终端之间可以进行音视频数据的交互，下面以将第二终端的音视频数据发送至第一终端所关联的用户所在终端为例进行说明，参见图2D所示的音视频交互方法的流程图，包括以下步骤：
215、第二中转单元接收到第二终端的音视频数据时，将该第二终端的音视频数据中添加第一终端的音视频标识。
其中，为了明确终端所发送音视频数据的直播房间，终端所发送的音视频数据可以携带该终端的音视频标识，该音视频标识可以为该终端所属直播房间的音视频标识，用于唯一确定该音视频数据所属的直播房间。
为了简化第一中转单元确定该第二终端的音视频数据的目标直播房间的流程，第二中转单元在将该第二终端的音视频数据发送至中转单元之前，可以在该第二终端的音视频数据中添加第一终端的音视频标识，或者将第二终端的音视频数据中第二终端的音视频标识替换为第一终端的音视频标识，以使得第一中转单元可以直接将该第二终端的音视频数据转发至与第一终端所关联的用户所在终端。通过将第二终端“伪装”成第一终端所属直播房间的用户所在终端，简化了音视频交互的数据处理流程，降低了数据传输时延，增强了音视频交互的实时性。
需要说明的是，第二中转单元仍会将第二终端的音视频数据发送至与第二终端所关联的其他用户所在终端，以使得本直播房间内的观众能够观看到本直播房间的主播视频。
在另一实施例中，除了在第二终端的音视频数据中添加第一终端的音视频标识以外，还可以通过其他方式对第二终端的音视频数据进行伪装，例如，为了避免将一个直播房间的音视频数据直接引入到另一个直播房间，对另一个直播房间的音视频数据造成混淆，可以对数据传输协议进行改进，比如，在传输协议中增加一个新字段，用包含该新字段的包头来打包其他直播房间的音视频数据。例如，第二中转单元在接收到第二终端的音视频数据时，采用包含该新字段的包头来打包该第二终端的音视频数据，当第一中转单元检测到接收的数据包中包含该新字段，将该第二终端的音视频数据转发到第一终端所关联的用户所在终端。如果接收的数据包既不是第一终端的音视频数据，也不包含该新字段，则丢弃该第二终端的音视频数据。另外，还可以为音视频交互的多个直播房间预先设置不同的端口号，不同直播房间的音视频数据通过不同的端口进行转发，以避免混淆不同直播房间的音视频数据。
216、第二中转单元根据第一终端的第一路径信息将第二终端的音视频数据发送至第一中转单元。
在第二中转单元存储了第一终端的第一路径信息之后，如果第二中转单元接收到第二终端的音视频数据，可以根据该第一路径信息确定与第一终端对应的第一中转单元，将该第二终端的音视频数据发送至该第一中转单元。
217、第一中转单元接收到第二终端的音视频数据时，检测本地是否存储有第二终端的第二路径信息。
该检测本地是否存储有第二终端的第二路径信息的过程可以为：第一中转单元可以根据第二终端的音视频标识，确定本地是否存储有与该第二终端的音视频标识所对应的第二路径信息，例如，第一中转单元可以在与第一终端的音视频标识所对应的音视频交互列表中进行查询，将与第二终端的音视频标识对应的路径信息，确定为第二路径信息。
218、如果第一中转单元确定本地存储有第二终端的第二路径信息，第一中转单元确定与第一终端所关联的用户，将第二终端的音视频数据转发至与第一终端所关联的用户所在终端。
当然，第一中转单元仍会将第一终端的音视频数据发送至与第一终端所关联的用户所在终端。也即是，在第一终端和第二终端进行音视频交互的过程中，第一中转单元除了将第一终端的音视频数据发送到第一终端所属直播房间内其他用户的用户所在终端之外，还会将第二终端的音视频数据发送至第一终端所属直播房间内所有用户的用户所在终端。
如果第一中转单元本地没有存储第二终端的第二路径信息，第一中转单元丢弃该第二终端的音视频数据。需要说明的是，上述步骤201至步骤214的过程是一种在同直播房间建立并麦的过程，在不同直播房间之间建立并麦的过程中步骤205和步骤207是异步的过程，当第二中转单元存储了第一终端的第一路径信息后，可以直接将接收到的第二终端的音视频数据发送至第一中转单元，此时，第一中转单元可能还没有存储第二终端的第二路径信息，此时，将第二终端的音视频数据丢弃，不仅可以确保第一终端和第二终端的音视频交互正常进行，还减少了为了确保双方均存储有相应路径信息，第一中转单元与第二中转单元之间的信令交互，降低了音视频交互的时延。
此外，可选地，为了满足不同终端对视频码率的要求，第一中转单元在转发第二终端的音视频数据时，还可以对第二终端音视频数据进行转码，得到第二终端的至少两种码率的音视频数据；对于与第一终端所关联的每一个用户，根据该用户所在终端对应的码率规格，向该用户所在终端发送符合该码率规格的音视频数据。由于终端能够自由选择符合终端显示能力以及网络能力的视频码率，保证了参与音视频交互的各个终端的视频流畅性。
上述步骤215至218是以将第二终端的音视频数据发送至第一终端所关联的用户所在终端为例，第一管理设备和第二管理设备，基于第一路径信息以及第二路径信息，对第一终端和第二终端的音视频数据进行交互的过程，为了更加清楚的描述该过程，图2E示出了一种音视频交互过程中数据转发的示意图。需要说明的是，将第一终端的音视频数据发送至第二终端的音视频标识所关联的用户所在终端的过程同理，在此不做赘述。
需要说明的是，上述流程仅以两个直播房间的进行音视频交互为例进行介绍，本实施例对参与音视频交互的直播房间的数目不作限定，当参与音视频交互的直播房间数目大于2时，可以对两两直播房间采用上述流程即可实现2个以上直播房间的音视频交互。
本发明实施例提供的方法，在建立音视频交互的过程中，通过策略服务器在第一管理设备和第二管理设备之间进行信令交互，使得第二管理设备可以得到第一终端的第一路径信息，第一管理设备可以得到第二终端的第二路径信息，进而第一管理设备和第二管理设备可以基于该第一路径信息和第二路径信息，将第一终端和第二终端的音视频数据发送至对方直播房间内的所有用户所在终端，从而实现了不同直播房间之间的互动，提高了音视频交互的互动性。
另外，通过将第二终端“伪装”成第一终端所属直播房间内的用户所在终端，简化了音视频交互的数据处理流程，降低了数据传输时延，增强了视频直播的实时性。
另外，采用异步的方式在不同直播房间之间建立并麦，使得第一中转单元在没有存储第二终端的第二路径信息时，将接收到的第二终端的音视频数据丢弃，不仅可以确保第一终端和第二终端的音视频交互正常进行，还减少了为了确保双方均存储有相应路径信息，第一中转单元与第二中转单元之间的信令交互，降低了音视频交互的时延。
图3是本发明实施例提供的一种音视频交互装置的框图。参照图3，该装置包括接收模块301，确定模块302，第一发送模块303和第二发送模块304。
其中，接收模块301，用于接收第一管理设备发送的第一终端的音视频交互请求消息，该音视频交互请求消息用于请求与第二终端进行音视频交互，该音视频交互请求消息携带第一路径信息，该第一路径信息用于指示通过该第一管理设备向该第一终端进行音视频数据的转发；
确定模块302，用于确定与该第二终端关联的第二管理设备；
第一发送模块303，用于将该音视频交互请求消息转发至该第二管理设备，由该第二管理设备返回携带第二路径信息的音视频交互确认消息，该第二路径信息用于指示通过从该第二管理设备向该第二终端进行音视频数据的转发；
第二发送模块304，用于将该音视频交互确认消息转发至该第一管理设备，由该第一管理设备和该第二管理设备，基于该第一路径信息以及该第二路径信息，对该第一终端和该第二终端的音视频数据进行交互。
在一种可能的实现方式中，该确定模块用于根据该第二终端的音视频标识，从多组音视频标识与管理设备之间的对应关系中，查询与该第二终端的音视频标识对应的管理设备，将与该第二终端的音视频标识对应的管理设备作为该第二管理设备。
在一种可能的实现方式中，该装置还包括身份校验模块，用于：对该第一终端进行身份校验；如果身份校验成功，则执行确定与该第二终端关联的第二管理设备的步骤；或，对该第一终端进行身份校验；如果身份校验成功，且该第一终端和/或该第二终端具有音视频交互权限，则执行确定与该第二终端关联的第二管理设备的步骤。
图4是本发明实施例提供的一种音视频交互装置的框图。参照图4，该装置包括第一发送模块401和第二发送模块402。
其中，第一发送模块401，用于向策略服务器发送第一终端的音视频交互请求消息，由该策略服务器将该音视频交互请求消息转发至与第二终端关联的第二管理设备，并返回该第二管理设备的音视频交互确认消息，该音视频交互请求消息用于请求与该第二终端进行音视频交互，该音视频交互请求消息携带第一路径信息，该音视频交互确认消息携带第二路径信息；
第二发送模块402，用于根据该第二路径信息，将该第一终端的音视频数据发送至该第二管理设备，由该第二管理设备将该第一终端的音视频数据发送至与该第二终端所关联的用户所在终端；
其中，该第一路径信息用于指示通过该第一管理设备向该第一终端进行音视频数据的转发，该第二路径信息用于指示通过该第二管理设备向该第二终端进行音视频数据的转发。
在一种可能的实现方式中，该装置还包括：
接收模块，用于接收该第一终端的初始音视频交互请求消息，该初始音视频交互请求消息携带该第二终端的音视频标识；
添加模块，用于将该第一管理设备的标识添加至该初始音视频交互请求消息中，得到该第一终端的音视频交互请求消息。
在一种可能的实现方式中，该装置还包括：
检测模块，用于当接收到该第二管理设备发送的该第二终端的音视频数据时，检测本地是否存储有该第二路径信息；
确定模块，用于如果本地存储有该第二路径信息，确定与该第一终端所关联的用户；
第三发送模块，用于将该第二终端的音视频数据发送至与该第一终端所关联的用户所在终端；
丢弃模块，用于如果本地未存储有该第二路径信息，丢弃该第二终端的音视频数据。
在一种可能的实现方式中，该装置还包括：
转码模块，被配置为将该第二终端的音视频数据进行转码，得到至少两种码率的该第二终端的音视频数据；
该第三发送模块，被配置对于与该第一终端所关联的每一个用户，根据该用户所在终端对应的码率规格，向该用户所在终端发送符合该码率规格的音视频数据。
图5是本发明实施例提供的一种音视频交互装置的框图。参照图5，该装置包括接收模块501，获取模块502，第一发送模块503和第二发送模块504。
其中，接收模块501，用于从策略服务器接收第一终端的音视频交互请求消息，该音视频交互请求消息用于请求与第二终端进行音视频交互，该音视频交互请求消息携带第一路径信息，该第一路径信息用于指示通过第一管理设备向该第一终端进行音视频数据的转发；
获取模块502，用于获取第二路径信息，该第二路径信息用于指示通过该第二管理设备向该第二终端进行音视频数据的转发；
第一发送模块503，用于向该策略服务器发送音视频交互确认消息，该音视频交互确认消息携带该第二路径信息，由该策略服务器将该音视频交互确认消息转发至该第一管理设备；
第二发送模块504，用于当接收到该第二终端的音视频数据时，根据该第一路径信息，将该第二终端的音视频数据发送至该第一管理设备，由该第一管理设备将该第二终端的音视频数据发送至与该第一终端所关联的用户所在终端。
在一种可能的实现方式中，该装置还包括：
确定模块，用于确定与该第二终端所关联的第一用户；
第三发送模块，被配置为向该第一用户所在终端发送音视频交互更新消息，该音视频交互更新消息用于指示该第二终端与该第一终端进行音视频交互。
在一种可能的实现方式中，该装置还包括：
第一添加模块，用于在接收到第二用户所在终端的拒绝更新消息时，为该第二用户添加指定标签，该第二用户为该第一用户中的任一用户，该指定标签用于指示该第二用户拒绝参与该第一终端的音视频交互；
该第三发送模块，用于在与该第一终端音视频交互的过程中，向该第二用户所在终端发送该第二终端的音视频数据。
在一种可能的实现方式中，该装置还包括：
第二添加模块，用于将该第一终端的音视频标识添加至该第二终端的音视频数据中，以使该第一管理设备将该第二终端的音视频数据作为该第一终端的音视频数据转发至该第一终端所关联的用户所在终端。
需要说明的是：上述实施例提供的音视频交互装置在直播视频时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的音视频交互装置与音视频交互方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本实施例还提供了一种音视频交互系统，该系统包括第一管理设备、第二管理设备和策略服务器，
第一管理设备，用于向策略服务器发送第一终端的音视频交互请求消息，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
所述策略服务器，用于确定与所述第二终端关联的第二管理设备，将所述音视频交互请求消息转发至所述第二管理设备；
所述第二管理设备，用于获取第二路径信息，向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
所述策略服务器，还用于将所述音视频交互确认消息转发至所述第一管理设备；
所述第一管理设备和所述第二管理设备，还用于基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端进行音视频交互。
图6是本发明实施例提供的一种音视频交互装置的框图。例如，装置600可以被提供为一服务器。参照图6，装置600包括处理组件622，其进一步包括一个或多个处理器，以及由存储器632所代表的存储器资源，用于存储可由处理部件622的执行的指令，例如应用程序。存储器632中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件622被配置为执行指令，以执行上述音视频交互方法实施例中策略服务器、第一管理设备和第二管理设备所执行的方法。
装置600还可以包括一个电源组件626被配置为执行装置600的电源管理，一个有线或无线网络接口650被配置为将装置600连接到网络，和一个输入输出(I/O)接口658。装置600可以操作基于存储在存储器632的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器，上述指令可由服务器中的处理器执行以完成上述实施例中的音视频交互方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种音视频交互方法，其特征在于，应用于策略服务器，所述方法包括：
接收第一管理设备发送的第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
确定与所述第二终端关联的第二管理设备；
将所述音视频交互请求消息转发至所述第二管理设备，由所述第二管理设备返回音视频交互确认消息，所述音视频交互确认消息携带第二路径信息，所述第二路径信息用于指示通过从所述第二管理设备向所述第二终端进行音视频数据的转发；
将所述音视频交互确认消息转发至所述第一管理设备，由所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息对所述第一终端和所述第二终端的音视频数据进行交互。
2.根据权利要求1所述的方法，其特征在于，所述确定与所述第二终端关联的第二管理设备之前，所述方法还包括：
对所述第一终端进行身份校验；如果身份校验成功，则执行确定与所述第二终端关联的第二管理设备的步骤；或，
对所述第一终端进行身份校验；如果身份校验成功，且所述第一终端和/或所述第二终端具有音视频交互权限，则执行确定与所述第二终端关联的第二管理设备的步骤。
3.一种音视频交互方法，其特征在于，应用于第一管理设备，所述方法包括：
向策略服务器发送第一终端的音视频交互请求消息，由所述策略服务器将所述音视频交互请求消息转发至与第二终端关联的第二管理设备，并返回所述第二管理设备的音视频交互确认消息，所述音视频交互请求消息用于请求与所述第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述音视频交互确认消息携带第二路径信息；
根据所述第二路径信息，将所述第一终端的音视频数据发送至所述第二管理设备，由所述第二管理设备将所述第一终端的音视频数据发送至与所述第二终端所关联的用户所在终端；
其中，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发。
4.根据权利要求3所述的方法，其特征在于，所述向策略服务器发送第一终端的音视频交互请求消息之后，所述方法还包括：
当接收到所述第二管理设备发送的所述第二终端的音视频数据时，如果本地存储有所述第二路径信息，确定与所述第一终端所关联的用户；将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端；
如果本地未存储有所述第二路径信息，丢弃所述第二终端的音视频数据。
5.根据权利要求4所述的方法，其特征在于，所述将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端之前，所述方法还包括：
将所述第二终端的音视频数据进行转码，得到至少两种码率的所述第二终端的音视频数据；
相应地，将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端，包括：
对于与所述第一终端所关联的每一个用户，根据所述用户所在终端对应的码率规格，向所述用户所在终端发送符合所述码率规格的音视频数据。
6.一种音视频交互方法，其特征在于，应用于第二管理设备，所述方法包括：
从策略服务器接收第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过第一管理设备向所述第一终端进行数据转发；
获取第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，由所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
当接收到所述第二终端的音视频数据时，根据所述第一路径信息，将所述第二终端的音视频数据发送至所述第一管理设备，由所述第一管理设备将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端。
7.根据权利要求6所述的方法，其特征在于，所述从策略服务器接收第一终端的音视频交互请求消息之后，所述方法还包括：
确定与所述第二终端所关联的第一用户；向所述第一用户所在终端发送音视频交互更新消息，所述音视频交互更新消息用于指示所述第二终端与所述第一终端进行音视频交互；或，
如果接收到第二用户所在终端的拒绝更新消息，为所述第二用户添加指定标签，所述第二用户为所述第一用户中的任一用户，所述指定标签用于指示所述第二用户拒绝参与所述第一终端的音视频交互；在与所述第一终端进行音视频交互的过程中，向所述第二用户所在终端发送所述第二终端的音视频数据。
8.根据权利要求6所述的方法，其特征在于，所述将所述第二终端的音视频数据发送至所述第一管理设备之前，所述方法还包括：
将所述第一终端的音视频标识添加至所述第二终端的音视频数据中，以使所述第一管理设备将所述第二终端的音视频数据作为所述第一终端的音视频数据转发至所述第一终端所关联的用户所在终端。
9.一种音视频交互方法，其特征在于，所述方法包括：
第一管理设备向策略服务器发送第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
所述策略服务器确定与所述第二终端关联的第二管理设备，将所述音视频交互请求消息转发至所述第二管理设备；
所述第二管理设备接收到所述音视频交互请求消息后，获取第二路径信息，向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端进行音视频数据的交互。
10.一种音视频交互装置，其特征在于，所述装置包括：
接收模块，用于接收第一管理设备发送的第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发；
确定模块，用于确定与所述第二终端关联的第二管理设备；
第一发送模块，用于将所述音视频交互请求消息转发至所述第二管理设备，由所述第二管理设备返回音视频交互确认消息，所述音视频交互确认消息携带第二路径信息，所述第二路径信息用于指示通过从所述第二管理设备向所述第二终端进行音视频数据的转发；
第二发送模块，用于将所述音视频交互确认消息转发至所述第一管理设备，由所述第一管理设备和所述第二管理设备，基于所述第一路径信息以及所述第二路径信息，对所述第一终端和所述第二终端的音视频数据进行交互。
11.根据权利要求10所述的装置，其特征在于，所述装置还包括身份校验模块，用于：
对所述第一终端进行身份校验；如果身份校验成功，则执行确定与所述第二终端关联的第二管理设备的步骤；或，
对所述第一终端进行身份校验；如果身份校验成功，且所述第一终端和/或所述第二终端具有音视频交互权限，则执行确定与所述第二终端关联的第二管理设备的步骤。
12.一种音视频交互装置，其特征在于，所述装置包括：
第一发送模块，用于向策略服务器发送第一终端的音视频交互请求消息，由所述策略服务器将所述音视频交互请求消息转发至与第二终端关联的第二管理设备，并返回所述第二管理设备的音视频交互确认消息，所述音视频交互请求消息用于请求与所述第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述音视频交互确认消息携带第二路径信息；
第二发送模块，用于根据所述第二路径信息，将所述第一终端的音视频数据发送至所述第二管理设备，由所述第二管理设备将所述第一终端的音视频数据发送至与所述第二终端所关联的用户所在终端；
其中，所述第一路径信息用于指示通过所述第一管理设备向所述第一终端进行音视频数据的转发，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发。
13.根据权利要求12所述的装置，其特征在于，所述装置还包括：
转码模块，用于将所述第二终端的音视频数据进行转码，得到至少两种码率的所述第二终端的音视频数据；
所述第三发送模块，用于对于与所述第一终端所关联的每一个用户，根据所述用户所在终端对应的码率规格，向所述用户所在终端发送符合所述码率规格的音视频数据。
14.一种音视频交互装置，其特征在于，所述装置包括：
接收模块，用于从策略服务器接收第一终端的音视频交互请求消息，所述音视频交互请求消息用于请求与第二终端进行音视频交互，所述音视频交互请求消息携带第一路径信息，所述第一路径信息用于指示通过第一管理设备向所述第一终端进行音视频数据的转发；
获取模块，用于获取第二路径信息，所述第二路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
第一发送模块，用于向所述策略服务器发送音视频交互确认消息，所述音视频交互确认消息携带所述第二路径信息，由所述策略服务器将所述音视频交互确认消息转发至所述第一管理设备；
第二发送模块，用于当接收到所述第二终端的音视频数据时，根据所述第一路径信息，将所述第二终端的音视频数据发送至所述第一管理设备，由所述第一管理设备将所述第二终端的音视频数据发送至与所述第一终端所关联的用户所在终端。
15.根据权利要求14所述的装置，其特征在于，所述装置还包括：
第二添加模块，用于将所述第一终端的音视频标识添加至所述第二终端的音视频数据中，以使所述第一管理设备将所述第二终端的音视频数据作为所述第一终端的音视频数据转发至所述第一终端所关联的用户所在终端。
CN201710209879.4A 2017-03-31 2017-03-31 音视频交互方法及装置 Active CN108668151B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710209879.4A CN108668151B (zh) 2017-03-31 2017-03-31 音视频交互方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710209879.4A CN108668151B (zh) 2017-03-31 2017-03-31 音视频交互方法及装置

Publications (2)

Publication Number Publication Date
CN108668151A true CN108668151A (zh) 2018-10-16
CN108668151B CN108668151B (zh) 2020-12-25

Family

ID=63784276

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710209879.4A Active CN108668151B (zh) 2017-03-31 2017-03-31 音视频交互方法及装置

Country Status (1)

Country Link
CN (1) CN108668151B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392273A (zh) * 2019-07-16 2019-10-29 北京达佳互联信息技术有限公司 音视频处理的方法、装置、电子设备及存储介质
CN111970576A (zh) * 2020-08-28 2020-11-20 北京字节跳动网络技术有限公司 信息交互方法、装置及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101123618A (zh) * 2007-08-20 2008-02-13 阳术国 与计算机互通的音视频设备的调度方法
CN101938616A (zh) * 2010-08-23 2011-01-05 深圳市华曦达科技股份有限公司 远程录制电视节目的方法和网络服务器
CN102378401A (zh) * 2010-08-09 2012-03-14 中兴通讯股份有限公司 一种会话建立方法及系统
CN103095580A (zh) * 2011-10-27 2013-05-08 中兴通讯股份有限公司 一种位置信息查询方法、策略服务器、位置服务器及系统
CN103841353A (zh) * 2014-02-24 2014-06-04 广州华多网络科技有限公司 视频交互方法、终端、服务器及系统
CN104009872A (zh) * 2014-06-09 2014-08-27 中国联合网络通信集团有限公司 一种业务访问管控方法、系统、终端及运营商策略服务器
CN104053045A (zh) * 2014-06-23 2014-09-17 青岛海信电器股份有限公司 显示设备及其共享控制方法
US20150319472A1 (en) * 2014-05-01 2015-11-05 Verizon Patent And Licensing Inc. User feedback based content distribution area
TWI507872B (zh) * 2009-12-31 2015-11-11 Aten Int Co Ltd 遠端管理系統及方法
CN105721895A (zh) * 2014-12-02 2016-06-29 北京天籁传音数字技术有限公司 数据交互方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101123618A (zh) * 2007-08-20 2008-02-13 阳术国 与计算机互通的音视频设备的调度方法
TWI507872B (zh) * 2009-12-31 2015-11-11 Aten Int Co Ltd 遠端管理系統及方法
CN102378401A (zh) * 2010-08-09 2012-03-14 中兴通讯股份有限公司 一种会话建立方法及系统
CN101938616A (zh) * 2010-08-23 2011-01-05 深圳市华曦达科技股份有限公司 远程录制电视节目的方法和网络服务器
CN103095580A (zh) * 2011-10-27 2013-05-08 中兴通讯股份有限公司 一种位置信息查询方法、策略服务器、位置服务器及系统
CN103841353A (zh) * 2014-02-24 2014-06-04 广州华多网络科技有限公司 视频交互方法、终端、服务器及系统
US20150319472A1 (en) * 2014-05-01 2015-11-05 Verizon Patent And Licensing Inc. User feedback based content distribution area
CN104009872A (zh) * 2014-06-09 2014-08-27 中国联合网络通信集团有限公司 一种业务访问管控方法、系统、终端及运营商策略服务器
CN104053045A (zh) * 2014-06-23 2014-09-17 青岛海信电器股份有限公司 显示设备及其共享控制方法
CN105721895A (zh) * 2014-12-02 2016-06-29 北京天籁传音数字技术有限公司 数据交互方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392273A (zh) * 2019-07-16 2019-10-29 北京达佳互联信息技术有限公司 音视频处理的方法、装置、电子设备及存储介质
CN110392273B (zh) * 2019-07-16 2023-08-08 北京达佳互联信息技术有限公司 音视频处理的方法、装置、电子设备及存储介质
CN111970576A (zh) * 2020-08-28 2020-11-20 北京字节跳动网络技术有限公司 信息交互方法、装置及存储介质
US11843841B2 (en) 2020-08-28 2023-12-12 Beijing Bytedance Network Technology Co., Ltd. Information interaction method and apparatus, and storage medium

Also Published As

Publication number Publication date
CN108668151B (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
US9131026B2 (en) Method and system for establishing media channel based on relay
CN109120946B (zh) 收看直播的方法和装置
CN101026617B (zh) 一种ims网络中媒体资源调度方法
US20050002405A1 (en) Method system and data structure for multimedia communications
JP3524285B2 (ja) 通信装置及びその通信方法
CN110620896B (zh) 一种会议建立方法、系统及装置
CN109831548B (zh) 虚拟内容分发网络vCDN节点建立方法及服务器
CN108235042A (zh) 一种多人网络直播方法、装置、加入装置和系统
WO2021233093A1 (zh) 帐号接入方法和装置、存储介质及电子设备
CN106713819A (zh) 用于视频会议的数据传输方法、装置及系统
CN109922351B (zh) 一种发布直播业务的方法和装置
CN109743522B (zh) 基于视联网的通信方法和装置
CN104348627B (zh) 密钥下发方法、对ue进行授权检查的方法及相关设备
US20050002388A1 (en) Data structure method, and system for multimedia communications
CN111246151A (zh) 一种发言请求处理的方法、装置、设备及介质
CN108668151A (zh) 音视频交互方法及装置
CN109451001B (zh) 一种通讯方法和系统
CN104994067A (zh) Sip网络访问rtsp监控网络的系统及方法
CN105743922B (zh) 域间通信的方法、装置以及系统
CN111818171A (zh) 支持多方协同作业的信息交互方法、装置、服务器及平台
KR20140092630A (ko) 사용자장치, 통신서버 및 그 제어방법
CN106550159B (zh) VoIP通信系统
CN104135468A (zh) 支持多径中继传输的ims会话协商控制系统、装置及方法
WO2016197885A1 (zh) 一种媒体级联的管理方法及装置
CN105634911B (zh) 会话建立方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant