CN108668140A - 音视频交互状态同步方法及装置 - Google Patents

音视频交互状态同步方法及装置 Download PDF

Info

Publication number
CN108668140A
CN108668140A CN201710209976.3A CN201710209976A CN108668140A CN 108668140 A CN108668140 A CN 108668140A CN 201710209976 A CN201710209976 A CN 201710209976A CN 108668140 A CN108668140 A CN 108668140A
Authority
CN
China
Prior art keywords
terminal
video
audio
user
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710209976.3A
Other languages
English (en)
Other versions
CN108668140B (zh
Inventor
薛笛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710209976.3A priority Critical patent/CN108668140B/zh
Publication of CN108668140A publication Critical patent/CN108668140A/zh
Application granted granted Critical
Publication of CN108668140B publication Critical patent/CN108668140B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种音视频交互状态同步方法及装置，属于网络技术领域。方法包括：当检测到第一终端由正在交互状态切换至交互中断状态时，确定与第一终端进行音视频交互的第二终端；根据第二终端的第一路径信息，确定第二管理设备；向第二管理设备发送第一终端的状态切换通知，由第二管理设备将状态切换通知发送至与第二终端所关联的用户所在终端。第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，通过与第二管理设的交互，将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的状态同步。

Description

音视频交互状态同步方法及装置
技术领域
本发明涉及网络技术领域，特别涉及一种音视频交互状态同步方法及装置。
背景技术
随着网络技术的发展，视频直播已经成为一种流行的网络互动形式，例如，直播系统会为需要进行直播的直播用户分配一个音视频标识，即房间号，其他用户可以加入到这个“直播房间”作为观众用户来与直播用户进行互动。
目前，当一个“直播房间”内主播用户进行直播的过程中，主播用户所在终端可能由于网络中断等原因导致直播中断，此时，管理主播用户所在“房间”的设备可以向“房间”内的观众用户通知主播用户的当前状态，比如当前处于交互中断状态等，以使得观众用户所在终端能够同步主播用户的状态。而当多个“直播房间”的主播之间进行音视频交互时，由于不同“直播房间”由不同设备管理，如何保证不同“直播房间”之间的音视频交互状态的同步是需要解决的问题。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种音视频交互状态同步方法及装置。所述技术方案如下：
第一方面，提供了一种音视频交互状态同步方法，应用于第一管理设备，所述方法包括：
当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
向所述第二管理设备发送所述第一终端的状态切换通知，由所述第二管理设备将所述状态切换通知发送至与所述第二终端所关联的用户所在终端，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态。
第二方面，提供了一种音视频交互状态同步方法，应用于第二管理设备，所述方法包括：
从第一管理设备接收第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换为交互中断状态；
根据从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户，所述第二终端为与所述第一终端进行音视频交互的终端，所述第一用户为所述第二终端所关联的用户；
向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示，所述状态切换通知用于指示所述第一终端由正在交互状态转换为交互中断状态。
第三方面，提供了一种音视频交互状态同步方法，所述方法包括：
第一管理设备当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
所述第一管理设备根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行数据转发；
所述第一管理设备向所述第二管理设备发送所述第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态；
所述第二管理设备接收到所述状态切换通知后，从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户；
所述第二管理设备向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示。
第四方面，提供了一种音视频交互状态同步装置，应用于第一管理设备，所述装置包括：
第一确定模块，用于当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
第二确定模块，用于根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行数据转发；
第一发送模块，用于向所述第二管理设备发送所述第一终端的状态切换通知，由所述第二管理设备将所述状态切换通知发送至与所述第二终端所关联的用户所在终端，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态。
第五方面，提供了一种音视频交互状态同步装置，应用于第二管理设备，所述装置包括：
接收模块，用于从第一管理设备接收第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换为交互中断状态；
确定模块，用于从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户，所述第二终端为与所述第一终端进行音视频交互的终端，所述第一用户为所述第二终端所关联的用户；
第一发送模块，用于向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示，所述状态切换通知用于指示所述第一终端由正在交互状态转换为交互中断状态。
第六方面，提供一种音视频交互的状态同步系统，包括第一管理设备、第二管理设备，
所述第一管理设备用于执行上述第一方面所述的方法；
所述第二管理设备用于执行上述第二方面所述的方法。
本发明实施例提供的技术方案带来的有益效果是：
当第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间之间的状态同步。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种音视频交互系统的架构图；
图2是本发明实施例提供的一种音视频交互状态同步方法的流程图；
图3是本发明实施例提供的一种音视频交互状态同步方法的流程图；
图4是本发明实施例提供的一种音视频交互状态同步方法的流程图；
图5是本发明实施例提供的一种音视频交互状态同步过程中信令交互的示意图；
图6是本发明实施例提供的一种音视频交互状态同步装置的框图；
图7是本发明实施例提供的一种音视频交互状态同步装置的框图；
图8是本发明实施例提供的一种音视频交互状态同步装置的框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明实施例提供的一种音视频交互系统的架构图，参见图1，该音视频交互系统包括策略服务器、多个管理设备和多个终端。
策略服务器用于在主播用户请求进行视频直播时，为主播用户所在终端分配音视频标识，该音视频标识可以用于唯一标识一个直播房间或直播频道，该音视频标识可以为房间号(Room ID)或频道号(Channel ID)，并根据多个管理设备的负载情况，为该直播房间分配管理设备。
每个管理设备用于对一个或多个房间的视频直播进行管理，比如，以直播房间为例，当一个直播房间创建时，如果策略服务器将该管理设备分配给该直播房间，该管理设备可以记录该直播房间的音视频标识，并在直播过程中，根据该音视频标识将直播房间的主播用户所在终端上传的音视频数据发送至该直播房间内的观众用户所在终端。
在实际应用时，可以采用不同的功能单元来实现管理设备的不同功能，比如，一个管理设备可以包括流控单元(Center)和一个或多个中转单元(Access)。当然，管理设备的所有功能也可以由一个单元来实现，本实施例对此不作限定。
其中，每个管理设备还可以提供所管理直播房间的路径信息，该路径信息用于指示可以通过该管理设备将其他直播房间主播用户的音视频数据转发到本地直播房间，以实现不同直播房间的音视频交互。其中，该路径信息可以包括管理设备的地址信息，当管理设备包括流控单元和中转单元时，一个直播房间对应的路径信息可以包括该直播房间对应流控单元的地址信息和中转单元的地址信息。其中，流控单元的地址信息可以为流控单元的IP地址，中转单元的地址信息可以为中转单元的IP地址。
其中，流控单元用于管理一个或多个直播房间的直播信息，一个直播房间的直播信息可以包括该直播房间的音视频标识、以及该直播房间对应的中转单元列表等。其中，一个直播房间的中转单元列表用于记录该直播房间内的主播用户和观众用户的用户标识以及主播用户所在终端和观众用户所在终端接入的中转单元的地址信息。其中，用户的用户标识可以为该用户的用户名、注册手机号码等。流控单元还可以用于与策略服务器之间进行信令和消息的交互，比如，进行音视频交互请求消息以及音视频交互确认消息的交互。此外，流控单元还可以用于对用户的网络质量进行调控。
其中，一个流控单元可以对应一个或多个中转单元，一个中转单元可以连接一个或多个终端。终端可以为移动终端(如手机、平板电脑等)或台式电脑等。在某个用户需要参与某个直播房间的视频直播时，策略服务器会为该用户所在终端分配一个中转单元，并将该中转单元的地址信息注册到流控单元与相应音视频标识对应的中转单元列表中。其中，策略服务器可以根据地理位置向终端分配附近的中转单元。每个中转单元可以作为终端与流控单元的桥梁，用于在终端和流控单元之间转发信令或消息。对于一个直播房间内的直播来说，主播用户所对应的中转单元可以将主播用户的音视频数据，发送至观众用户所对应的中转单元，由观众用户所对应的中转单元将主播用户的音视频数据转发至观众用户所在终端。对于跨房间的直播来说，不同直播房间主播用户所对应的中转单元之间还可以进行主播用户的音视频数据的交互。也即是，本实施例中同一个直播房间所对应的中转单元之间可以进行音视频交互，不同直播房间所对应的中转单元之间也可以进行音视频交互。例如，一个直播房间A的主播A与另一个直播房间B的主播B进行音视频交互时，直播房间A的主播A所对应的中转单元用于将主播A所在终端的音视频数据发送至直播房间B所对应的中转单元，进而由直播房间B所对应的中转单元将主播A的音视频数据发送至主播B以及直播房间B的观众用户所在终端。
此外，视频直播系统还包括直播信息数据库，该直播信息数据库提供直播信息的查询服务，直播信息数据库用于存储视频直播系统中所有在线直播房间的基础信息，该基础信息包括直播房间的创建时间、音视频标识、管理该直播房间的流控单元的地址信息、以及该直播房间的中转单元列表。比如，策略服务器可以根据音视频标识向直播信息数据库查询与该音视频标识对应的流控单元以及中转单元，由该直播信息数据库返回查询结果。
另外，该视频直播系统中还可以包括消息单元和信令接入单元，消息单元用于管理和转发各个终端之间交互的即时消息，比如文字、图片等。终端可以通过信令接入单元与消息单元和策略服务器进行交互。
需要说明的是，图1仅以一个管理设备的架构为例示出，一个管理设备可以架设在一个或多个服务器上，也可以在一个服务器上架设多个管理设备。其中，一个管理设备的流控单元和中转单元可以假设在一个服务器上，也可以架设在多个服务器上，管理设备可以为具有相应功能的实体设备，也可以为实现相应功能的应用程序，本实施例对此均不作限定。
图2是本发明实施例提供的一种音视频交互状态同步方法的流程图，涉及交互主体为第一管理设备和第二管理设备，其中，第一管理设备包括第一流控单元和第一中转单元，第二管理设备包括第二流控单元和第二中转单元，参见图2，本发明实施例提供的方法流程包括：
201、当第一流控单元检测到第一终端由正在交互状态切换至交互中断状态时，确定与第一终端进行音视频交互的第二终端。
在本发明实施例中，不同直播房间内的用户可以进行音视频数据的交互，也即是可以将不同直播房间的具有控制权限的用户的音视频数据进行交互，比如，该具有控制权限的用户可以为直播房间的主播用户。相比于直播房间内的直播，该音视频交互的过程可以看作是不同直播房间之间进行跨房间直播。本实施例中，进行音视频交互的直播房间的个数可以为两个也可以为两个以上，本发明实施例对此不作限定。以第一直播房间和第二直播房间两个直播房间为例，该两个直播房间进行音视频交互是指，将第一直播房间的第一主播用户的音视频数据发送至第二直播房间所关联用户所在终端；将第二直播房间的第二主播用户的音视频数据发送至第一直播房间所关联用户所在终端。从第一直播房间所关联用户和第二直播房间所关联用户的角度来看，第一主播用户的音视频数据和第二主播用户的音视频数据会呈现在同一个画面中。其中，直播房间所关联的用户包括该直播房间内的主播用户和观众用户。
需要说明的是，本发明实施例所述的音视频交互，除了在不同直播房间之间对主播用户的音视频数据进行交互之外，交互的音视频数据还可以包括直播房间内观众用户的音视频数据。比如，交互的音视频数据包括第一主播用户和第一直播房间的第一观众用户的音视频数据，以及第二主播用户的音视频数据。再比如，交互的音视频数据包括第一主播用户的音视频数据，以及第二主播用户和第二直播房间的第二观众用户的音视频数据。再比如，交互的音视频数据包括第一主播用户和第一观众用户的音视频数据，以及，第二主播用户和第一观众用户的音视频数据。
在本发明实施例中，第一终端是指第一直播房间的主播用户所在终端，第二终端是指第二直播房间的主播用户所在终端。
在本发明实施例中，以第一终端和第二终端所在的两个直播房间为例，假设由第一终端发起建立与第二终端的音视频交互，该两个直播房间建立音视频交互的过程可以包括以下步骤a至步骤j：
步骤a：第一终端向第一中转单元发送初始音视频交互请求消息，第一中转单元将接收到的初始音视频交互请求消息发送至第一流控单元。
其中，初始音视频交互请求消息携带第二终端的音视频标识和第二终端用户的用户标识。其中，第二终端的音视频标识是指第二终端所属直播房间的音视频标识。当第二终端用户为主播用户时，该初始联合请求中还可以不携带第二终端用户的用户标识，而是对于每个直播房间来说，管理该直播房间的管理设备(比如流控单元或者中转单元)可以记录该直播房间所指示的音视频标识与主播用户的用户标识之间的对应关系，由管理设备根据音视频标识来确定相应主播用户的用户标识。
步骤b：第一流控单元在该初始音视频交互请求消息中添加第一终端的第二路径信息、第一终端的音视频标识以及第一终端用户的用户标识，得到第一终端的音视频交互请求消息。
其中，第一终端的音视频标识是指第一终端所属直播房间的音视频标识。该第二路径信息可以包括第一中转单元的地址信息和第一流控单元的地址信息，该第二路径信息用于指示可以通过第一中转单元和第一流控单元向第一终端进行音视频数据的转发。
步骤c：第一流控单元将该音视频交互请求消息发送至策略服务器。
步骤d：策略服务器根据该音视频交互请求消息中携带的第二终端的音视频标识，确定与第二终端相关联的第二流控单元，并将该音视频交互请求消息发送至第二流控单元。
步骤e：第二流控单元存储第二终端的音视频标识、第二终端用户的用户标识、第一终端的音视频标识、第一终端用户的用户标识和第二路径信息之间的对应关系，并向策略服务器返回音视频交互确认消息，该音视频交互确认消息携带第二终端的第一路径信息、第二终端的音视频标识和第二终端用户的用户标识。
其中，该第一路径信息可以包括与第二终端相关联的第二流控单元的地址信息和第二中转单元的地址信息，该第一路径信息用户指示通过第二流控单元和第二中转单元向第二终端进行音视频数据的转发，也即是，通过第二管理设备向第二终端进行音视频数据的转发。
步骤f：第二流控单元将该音视频交互请求消息携带的信息同步至第二中转单元，并向第二中转单元发送音视频交互更新消息。
步骤g：第二中转单元将该音视频交互更新消息发送至第二终端所关联的用户所在终端，以将第一终端的音视频交互请求消息通知给第二终端所在直播房间的用户，使得第二终端所在直播房间的用户所在终端能够将第一终端的音视频标识添加到本地的音视频交互列表中，从而完成第二终端侧的音视频交互建立过程。
步骤h：在步骤e之后，策略服务器将音视频交互确认消息发送至第一流控单元。
步骤i：第一流控单元存储第一终端的音视频标识、第一终端用户的用户标识、第二终端的音视频标识、第二终端用户的用户标识和第二终端的第一路径信息之间的对应关系，将该音视频交互确认消息所携带的信息同步给第一中转单元，并向第一中转单元发送音视频交互更新消息。
步骤j：第一中转单元将该音视频交互更新消息发送至第一终端所关联的用户所在终端，使得第一终端所在直播房间的用户所在终端能够将第二终端的音视频标识添加到本地的音视频交互列表中，从而完成第一终端侧的音视频交互建立过程。
由上述建立音视频交互的过程可知，当第一终端和第二终端建立音视频交互的过程中，第一流控单元可以存储第一终端的音视频标识、第二终端的音视频标识、第二终端用户的用户标识和第二终端的第一路径信息的对应关系。第一流控单元可以通过该对应关系确定当前与第一终端进行音视频交互的第二终端。另外，由于第一流控单元和第一中转单元均存储有第二终端的第一路径信息，第二流控单元和第二中转单元均存储有第一终端的第二路径信息，因此，可以通过第一流控单元、第一中转单元、第二流控单元和第二中转单元，在第一终端所在直播房间和第二终端所在直播房间进行音视频数据的转发，比如，进行音视频交互状态的相关信令的转发。
在本发明实施例中，音视频交互状态包括正在交互状态、交互中断状态和交互结束状态。为了保证音视频交互过程中各个直播房间的状态同步，以第一终端所在直播房间和第二终端所在直播房间进行音视频交互为例，第一流控单元和第二流控单元可以检测第一终端和第二终端的音视频交互状态是否发生变化，以第一流控单元检测第一终端的音视频交互状态为例，该检测过程可以包括以下两种方式：
第一种方式、第一流控单元如果接收到所述第一终端的状态切换指令，则确定第一终端由正在交互状态切换为交互中断状态
其中，该状态切换指令由第一终端进入到交互中断状态时触发。
在该种方式中，第一终端如果检测到网速低于预设阈值不足以流畅的传输音视频数据，或者检测到直播应用切换至后台运行等情况时，确定本地音视频交互状态为交互中断状态，向第一中转单元发送状态切换指令，由第一中转单元将该状态切换指令转发至第一流控单元。其中，预设阈值可以由终端进行预先设置或修改，本实施例对此不作限定。
第二种方式、第一流控单元如果检测到所述第一终端的音视频数据流中断，则确定所述第一终端由正在交互状态切换为交互中断状态。
该种方式下，在音视频交互的过程中，第一中转单元可以将第一终端的音视频数据转发至第二中转单元，由第二中转单元将该第一终端的音视频数据发送至第二终端所在直播房间的用户所在终端。其中，第一中转单元可以对第一终端的音视频数据流进行监控，当第一终端的音视频数据流的传输速率为0或者小于预设速率时，确定第一终端的音视频数据流中断。其中，预设速率可以由策略服务器或第一流控单元进行预先配置或修改，本实施例对此不作限定。
需要说明的是，上述建立音视频交互的流程仅为本发明提供的一种示例性的流程，本发明实施例中还可以基于图1所示的系统架构，采用其他的方式进行建立音视频交互的信令交互，本发明实施例对具体的信令交互流程不作限定。
该步骤201为第一管理设备检测到第一终端由正在交互状态切换至交互中断状态时，确定与第一终端进行音视频交互的第二终端的过程。
202、第一流控单元根据第二终端的第一路径信息，确定第二流控单元。
第一流控单元可以直接根据第二终端的第一路径信息，获取到第二流控单元的地址信息，也即是确定第二流控单元。该步骤202是第一管理设备根据第二终端的第一路径信息，确定第二管理设备过程。
203、第一流控单元向第二流控单元发送第一终端的状态切换通知。
在本发明实施例中，第一流控单元在检测到第一终端由正在交互状态切换为交互中断状态时，可以生成第一终端的状态切换通知，该状态切换通知用于指示第一终端由正在交互状态切换为交互中断状态。该状态切换通知可以携带状态切换的提示信息，由接收到该状态切换通知的终端，根据该提示信息进行提示。
需要说明的是，当第一流控单元检测到第一终端的音视频交互状态发生变化时，比如由正在交互状态切换为交互中断状态，第一流控单元还需要将该第一终端的音视频交互状态通知给第一中转单元，比如，向第一中转单元发送第一该终端的状态切换通知。由于第一中转单元用于管理第一终端所在“直播房间”的用户，因此，第一中转单元可以将该第一终端的状态切换通知发送给本地管理的所有用户所在终端，也即是发送给第一终端所关联的用户所在终端。接收到该状态切换通知的终端，可以对第一终端的音视频交互状态进行提示，比如根据提示信息进行提示，提示信息可以为文字提示或语音提示等，本实施例对此不作限定。例如，在音视频交互时，终端界面上会在不同的区域显示第一终端用户和第二终端用户的画面，当第一终端的音视频数据流中断时，可以在显示第一终端用户画面的区域内显示提示消息，提示消息的内容可以为诸如“该用户信号中断，请耐心等待”等。
当然，由于第一终端自身由于网络中断或者直播应用切换至后台运行等原因，导致直播中断，第一终端用户是知道的，因此，第一中转单元还可以不向第一终端发送该状态切换通知，也即是，向除第一终端以外的、与第一终端所关联的用户所在终端发送该状态切换通知。此时，如果第一终端为所在“直播房间”的主播用户，则第一中转单元便可以仅将第一终端的状态切换通知发送给“直播房间”的观众用户。
该步骤203是第一管理设备向第二管理设备发送第一终端的状态切换通知的过程。
204、当第二流控单元接收到第一终端的状态切换通知时，将该状态切换通知发送至第二中转单元。
第二流控单元可以将该状态切换通知转发至第二中转单元，以便第二中转单元可以将第一终端的音视频交互状态通知给第二终端所在直播房间的用户。
205、第二中转单元从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户。
其中，第二终端所关联的第一用户是指与第二终端的音视频标识所关联的所有用户，也即第二终端所属直播房间的主播用户和观众用户。第二用户为第一用户中参与和第一终端的音视频交互的用户，也即是，第二用户为第一用户中不具有指定标签的用户。该指定标签用于指示用户拒绝参与第一终端的音视频交互。
需要说明的是，本发明实施例中，当第一终端向第二终端发起音视频交互请求时，假如第二终端用户为主播用户，那么第二终端所在直播房间的观众用户可以选择参与该音视频交互，也可以拒绝参与该音视频交互。例如，在步骤g之后，对于第一用户中的任一用户，如果该用户拒绝参与音视频交互，可以通过本地终端向第二中转单元发送拒绝更新消息。如果第二中转单元接收到该用户所在终端的拒绝更新消息，则为该用户添加指定标签，以使在与第一终端进行音视频交互的过程中，第二中转单元仅向该用户所在终端发送第二终端的音视频数据，而不将第一终端的音视频数据发送给该用户所在终端。在这种情况下，该用户所在终端仅显示第二终端的音视频数据，也即是仅显示第二终端的主播用户的视频画面。其中，指定标签可以由策略服务器预先配置到第二中转单元或第二流控单元，本实施例对此不作限定。
当然，在默认情况下，第二终端所在直播房间的所有用户均参与和第一终端的音视频交互，则该步骤205中确定的第二用户即为第一用户。
上述步骤204和步骤205是第二管理设备从第一管理设备接收第一终端的状态切换通知，从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户的过程。
206、第二中转单元将该状态切换通知发送给第二用户所在终端，由第二用户所在终端对第一终端的音视频交互状态进行提示。
第二中转单元可以将该第二终端的状态切换通知发送给本地管理的第二用户所在终端。接收到该状态切换通知的第二用户所在终端，可以对第一终端的音视频交互状态进行提示，提示方式可以为文字消息提示、语音提示等，本实施例对此不作限定。例如，在音视频交互时，第二用户所在终端的界面上会在不同的区域呈现第一终端用户和第二终端用户的画面，当第一终端的直播中断时，可以在显示第一终端用户画面的区域内显示提示消息，提示消息的内容可以为诸如“该用户信号中断，请耐心等待”等。
该步骤206是第二管理设备向第二用户所在终端发送状态切换通知的过程。
需要说明的是，当第一流控单元检测到第一终端由交互中断状态恢复至正在交互状态时，向第二流控单元发送第一终端的状态恢复通知，该状态恢复通知用于指示第一终端由交互中断状态恢复至正在交互状态。第二流控单元将该状态恢复通知发送至第二中转单元，该第二中转单元将该状态恢复通知发送给第二用户终端，以使第二用户获知第一终端又重新进入了正在交互状态。当第一终端由交互中断状态恢复至正在交互状态时，第一中转单元可以采集到第一终端的音视频数据，可以将该第一终端的音视频数据转发至第二中转单元，第二中转单元将该第一终端的音视频数据发送至第二用户所在终端。此外，第一流控单元还会将该状态恢复通知发送给第一中转单元，由第一中转单元该状态恢复通知发送给第一终端所关联的用户所在终端。
需要说明的是，在第一终端处于交互中断状态的过程中，可能有多种情况发生，比如，第二终端侧的直播可能结束；或者第二终端主动退出了与第一终端的音视频交互；或者第一终端长时间处于交互中断状态时，默认第一终端退出音视频交互。因此，为了进一步保持各个直播房间的状态同步，本发明实施例还可以在第一终端长时间处于交互中断状态时及时退出音视频交互，并同步退出状态，也可以在第二终端退出音视频交互时，同步退出状态，包括以下两种情况：
第一种情况：根据第一终端的交互中断状态的持续时长及时退出音视频交互，并同步退出状态。
该种情况下，第一流控单元获取第一终端处于交互中断状态的持续时间，如果该持续时间超过预设时长，则控制第一终端退出当前音视频交互，并向第二流控单元发送第一终端的退出消息。第二流控单元如果接收到第一终端的退出消息，将该退出消息转发至第二中转单元，第二中转单元停止将第二终端的音视频数据转发给第一中转单元。第二中转单元还会将该退出消息发送给第二用户所在终端，以使得第二用户所在终端在本地音视频交互列表中删除第一终端的音视频标识，以表示退出与第一终端的音视频交互。另外，第一流控单元还会将该退出消息转发至第一中转单元，第一中转单元将该退出消息转发至第一终端所关联的用户所在终端，以提示第一终端所在直播房间的用户获知第一终端退出了当前的音视频交互。
第二种情况、根据第二终端的音视频交互结束消息同步退出状态。
在该种情况下，第二终端在确定第一终端处于交互中断状态时，可以主动退出与第一终端的音视频交互，或者第二终端直播结束后也可以退出与第一终端的音视频交互，此时，第二终端可以向第二中转单元发送音视频交互结束消息，由第二中转单元将该音视频交互结束消息发送至第二流控单元。第二流控单元将该音视频交互结束消息发送至第一流控单元。第一流控单元将该音视频交互结束消息通过第一中转单元转发至第一终端所在直播房间的用户所在终端，以使得第一终端所在直播房间的用户所在终端在本地直播列表中删除第二终端的音视频标识，以退出与第二终端的音视频交互。
本发明实施例提供的方法，当第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的音视频交互状态的同步。
图2所提供的实施例是在第一终端的音视频交互状态由正在交互状态切换至交互中断状态时，在第一终端和第二终端所在直播房间内，对该第一终端的音视频交互状态进行同步的过程，同步的过程中会对参与音视频交互的用户所在终端进行第一终端的音视频交互状态提示，图2所提供的实施例中采用文字、语音等提示信息的方式进行提示。本发明实施例中，为了增强提示的多样性，同时增强视频数据的转化率，还可以向参与音视频交互的用户所在终端发送指定视频数据，以对第一终端的音视频交互状态进行提示，详见图3和图4所提供的实施例。其中，图3所提供的实施例是由管理第一终端所在直播房间的第一流控单元来获取指定视频数据。
图3是本发明实施例提供的一种音视频交互状态同步方法的流程图，参见图3，本发明实施例提供的方法流程包括：
301、当第一流控单元检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端。
该步骤与步骤201同理，在此不做赘述。
302、第一流控单元根据第二终端的第一路径信息，确定第二流控单元。
该步骤与步骤202同理，在此不做赘述。
303、第一流控单元从视频数据库中，获取指定视频数据，该指定视频数据为与当前音视频交互匹配的视频数据。
在本发明实施例中，第一流控单元可以直接与视频数据库建立连接，以直接从视频数据库中获取视频数据。当然，在另一种实施方式中，为了对音视频交互系统的各个功能单元进行有效划分，降低第一流控单元的处理压力，第一流控单元也可以通过策略服务器从视频数据库中获取视频数据，比如，向策略服务器发送当前音视频交互的视频数据获取请求，策略服务器根据该视频数据获取请求，返回与当前音视频交互匹配的视频数据。
其中，从视频数据库中，获取指定视频数据的过程可以包括以下三种方式，下面仅以第一流控单元直接从视频数据库中获取指定视频数据为例介绍：
第一种方式、根据当前音视频交互的交互类型，获取指定视频数据。
该种方式对应的指定视频数据获取过程可以包括：第一流控单元确定当前音视频交互的交互类型，将所述视频数据库中与所述交互类型匹配的视频数据作为与当前音视频交互匹配的视频数据。
其中，本实施例的音视频交互可以为视频的直播交互，交互类型可以为直播类型，比如，直播类型可以包括秀场类直播、游戏类直播、生活类直播和教育类直播等几大类。其中秀场类直播可以包括歌曲类直播、语言表演类直播(如相声、小品等)等。生活类直播包括吃饭、化妆、烹饪等直播。需要说明的是，直播类型可以根据实际需要进行灵活划分，本实施例对此不作限定。
第一流控单元确定当前音视频交互的交互类型的过程可以为：
在一种实施方式中，为了使获取的指定视频数据更加符合第一终端用户的特点。第一流控单元可以根据当前音视频交互的用户终端所接入的视频交互平台的类型，确定当前音视频交互的交互类型。以视频交互平台为直播平台为例，如果当前音视频交互的用户终端所接入的直播平台为游戏直播平台，则确定当前音视频交互的交互类型为游戏类直播。
在另一种实施方式中，为了使获取的指定视频数据更加符合音视频交互的特点。第一流控单元还可以将第一终端用户的第一交互类型确定为当前音视频交互的交互类型，或者将第二终端用户的第二交互类型确定为当前音视频交互的交互类型；或者根据第一交互类型和第二交互类型确定当前音视频交互的交互类型，比如，以交互类型为直播类型为例，第一交互类型为歌曲类直播，第二交互类型为语言表演类直播，则可以将二者所属的上一层级的交互类型(即秀场类直播)确定为音视频交互的交互类型。
其中，视频数据库中对应不同的交互类型存储有不同的视频数据。对应每个交互类型可以存储有一个或多个视频数据。第一流控单元可以根据当前音视频交互的交互类型，从视频数据库中获取与该音视频交互的交互类型匹配的视频数据，并将该匹配的视频数据作为指定视频数据。需要说明的是，当视频数据库对应每个交互类型存储有多个视频数据时，第一流控单元可以随机获取一个视频数据作为该指定视频数据。
第二种方式、根据当前音视频交互用户的签约信息，获取指定视频数据。
该种方式对应的指定视频数据获取郭晨可以为：第一流控单元获取第一终端用户和第二终端用户中至少一方的签约信息；将视频数据库中与该至少一方的签约信息匹配的视频数据作为该指定视频数据。
其中，终端用户的签约信息可以包括终端用户所关联商户的商户标识，比如该商户标识可以为商户名称。其中，终端用户所关联商户可以包括与所属经纪公司、与终端用户之间具有合法合同的广告商和供应商等。
其中，视频数据库中可以对应商户标识存储视频数据。将视频数据库中与该至少一方的签约信息匹配的视频数据作为该指定视频数据的过程可以为：第一流控单元可以根据签约信息所包括的商户标识查询该视频数据库，将视频数据库中与该商户标识对应的视频数据作为该指定视频数据。需要说明的是，与商户标识对应的指定视频数据可以为该商户的广告视频，或者为该商户所承接的广告业务所对应的广告视频，或者该指定视频数据还可以为相应商户的宣传视频，或者由相应商户制作的视频等，本实施例对此不作限定。
在该种方式下，根据获取的签约信息的不同，该获取指定视频数据的过程可以包括以下三种情况：
第一种情况、第一流控单元单独获取第一终端用户的第一签约信息，将视频数据库中与该第一签约信息匹配的视频数据作为该指定视频数据。
第二种情况、第一流控单元单独获取第二终端用户的第二签约信息，将视频数据库中与该第二签约信息匹配的视频数据作为该指定视频数据。
第三种情况、第一流控单元获取第一终端第一签约信息和第二终端用户的第二签约信息，将视频数据库中与该第一签约信息和第二签约信息均匹配的视频数据作为该指定视频数据。例如，第一终端用户和第二终端用户所关联的商户存在交集，比如均包括指定商户，则该指定视频数据即为与该指定商户的商户标识对应的视频数据。需要说明的是，如果第一终端用户和第二终端用户所关联的商户不存在交集，则可以在与第一签约信息匹配的视频数据和第二签约信息匹配的视频数据中，随机获取一个视频数据作为该指定视频数据；或者可以根据第一终端用户和第二终端用户的用户等级，将等级高的终端用户的签约信息所匹配的视频数据作为该指定视频数据。
第三种方式、根据当前音视频交互用户的历史交互行为数据，获取指定视频数据。
该种方式对应的指定视频数据获取过程可以包括：第一流控单元获取所述第一终端用户和第二终端用户中至少一方的历史交互行为数据；对该至少一方的历史交互行为数据进行分析，得到行为关键字；将所述视频数据库中与该行为关键字匹配的视频数据作为所述指定视频数据。
其中，历史交互行为数据可以包括用户的直播时间区间、每次直播的时长、直播频率、直播收视率、用户所在地理位置等数据。比如，对于第一终端而言，第一流控单元可以记录该第一终端进行直播的直播行为数据，当需要获取指定视频数据时，可以获取记录的第一终端的历史交互行为数据。在实际应用时，可以维护一个历史交互行为数据库，该历史交互行为数据库用于记录用户的历史交互行为数据。比如，第一流控单元可以根据第一终端用户的用户标识，获取该第一终端用户的历史交互行为数据。
其中，第一流控单元可以根据预设分析规则，对第一终端用户和第二终端用户中至少一方的历史交互行为数据进行分析，得到符合第一终端用户和第二终端用户中至少一方的交互行为的特点的行为关键字。
基于上述过程，该种方式包括以下三种情况：
第一种情况、第一流控单元获取第一终端用户的第一历史交互行为数据；对该第一历史行为数据进行分析，得到第一行为关键字；从该视频数据库中获取与该第一行为关键字匹配的视频数据，将与该第一行为关键字匹配的视频数据作为该指定视频数据。
第二种情况、第一流控单元获取第二终端用户的第二历史交互行为数据；对该第二历史行为数据进行分析，得到第二行为关键字；从该视频数据库中获取与该第二行为关键字匹配的视频数据，将与该第二行为关键字匹配的视频数据作为该指定视频数据。
第三种情况、第一流控单元获取第一终端用户的第一历史交互行为数据和第二终端用户的第二历史交互行为数据；对该第一历史行为数据和该第二历史行为数据进行分析，得到第三行为关键字；从该视频数据库中获取与该第三行为关键字匹配的视频数据，将与该第三行为关键字匹配的视频数据作为该指定视频数据。
在本发明实施例中，在将视频数据存储到视频数据库中时，可以提取该视频数据的关键字，并在视频数据库中可以对应视频数据存储相应的关键字。第一流控单元可以将获取到的行为关键字与视频数据库中视频数据对应的关键字进行匹配，将匹配成功的关键字所对应的视频数据确定为指定视频数据。其中，行为关键字与视频数据库中关键字的匹配成功可以是指：行为关键字与视频数据库中的关键字所包含相同字符的个数超过行为关键字字符数的预设百分比，该预设百分比可以预先进行配置或修改，比如该预设百分比可以为80％以上等，本实施例对此不作限定。
第四种方式、根据当前音视频交互的交互内容，获取指定视频数据。
该种方式对应的指定视频数据获取过程可以包括：第一中转单元对当前音视频交互过程中第一终端和第二终端中至少一方的音视频数据进行分析，得到当前音视频交互过程中的交互关键字；第一中转单元将该交互关键字发送至第一流控单元，第一流控单元将根据该交互关键字，从视频数据库中获取与该交互关键字匹配的视频数据，将与该交互关键字匹配视频数据作为所述指定视频数据。
其中，第一中转单元在转发第一终端和第二终端的音视频数据时，可以对第一终端和第二终端中至少一方的音视频数据进行分析，比如，为了降低第一中转单元的处理压力，第一中转单元可以根据预设周期，第一终端和第二终端中至少一方的音视频数据进行分析，该预设周期可以进行预先设置或修改，本实施例对此不作限定。
其中，对音视频数据进行分析过程可以为：对音视频数据中的音频进行语音分析，得到语音关键字，将该语音关键字作为该交互关键字。或者，还可以按照预设周期抽取视频帧，对该视频帧进行图像分析，得到图像关键字，将图像关键字作为该交互关键字。或者可以将语音关键字和图像关键字均作为该交互关键字。
在本发明实施例中，在将视频数据存储到视频数据库中时，可以提取该视频数据的关键字，并在视频数据库中可以对应视频数据存储相应的关键字。第一流控单元可以将获取到的交互关键字与视频数据库中视频数据对应的关键字进行匹配，将匹配成功的关键字所对应的视频数据确定为指定视频数据。其中，交互关键字与视频数据库中关键字的匹配成功可以是指，交互关键字与视频数据库中的关键字所包含相同字符的个数超过交互关键字字符数的预设百分比，该预设百分比可以预先进行配置或修改，比如该预设百分比可以为80％以上等，本实施例对此不作限定。例如，当交互关键字为重口味饮食时，可以从直播数据库中获取与重口味饮食相匹配的关键字，比如为重口味食物，将该重口味食物对应的视频数据作为指定视频数据。
需要说明的是，视频数据库中存储的视频数据类型可以为普通娱乐视频，另外，还可以为广告类视频等，可以根据实际需求存储不同类型的视频数据，本实施例对此不作限定。
通过向音视频交互用户投放指定视频数据，在保证了音视频交互流畅性的同时，提高了指定视频数据的转化率，而且也优化了音视频交互的用户体验。
该步骤303是第一管理设备从视频数据库中，获取指定视频数据的过程。
304、第一流控单元将指定视频数据携带在状态切换通知中发送至第二流控单元。
在本发明实施例中，第一流控单元还会将携带该指定视频数据的状态切换通知发送至第一中转单元。第一中转单元向除第一终端以外的、与第一终端所关联的用户所在终端发送该状态切换通知。接收到该状态切换通知的终端，可以对第一终端的音视频交互状态进行提示，例如，在音视频交互时，终端界面上会在不同的区域显示第一终端用户和第二终端用户的画面，当第一终端的直播中断时，可以在显示第一终端用户画面的区域内播放该指定视频数据，以使观看音视频交互的用户不感到无聊。当然播放指定视频数据的同时也可以显示提示消息，该提示消息的内容可以为诸如“该用户信号中断，请耐心等待”等。
该步骤304是第一管理设备将指定视频数据携带在状态切换通知中发送至第二管理设备的过程。
305、第二流控单元将该状态切换通知发送至第二中转单元。
第二流控单元可以将该状态切换通知转发至第二中转单元，以便第二中转单元可以将第一终端的音视频交互状态通知给第二终端所在直播房间的用户。
306、第二中转单元从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户。
该步骤与步骤205同理，在此不做赘述。
上述步骤305和步骤306是从第一管理设备接收第一终端的状态切换通知，从第二终端所关联的第一用户中确定参与第一终端的音视频交互的第二用户的过程。
307、第二中转单元将该状态切换通知发送给第二用户所在终端，由第二用户所在终端对第一终端的音视频交互状态进行提示。
在本发明实施例中，第二中转单元可以将该第二终端的状态切换通知发送给本地管理的第二用户所在终端。接收到该状态切换通知的第二用户所在终端，在原第一终端的音视频数据播放区域内，播放该指定视频数据，以使观看音视频交互的用户不感到无聊，增强音视频交互的用户体验以及音视频交互的流畅度。当然，还可以在播放指定视频数据的同时，显示该指定视频数据的类型。比如当该指定视频数据为广告时，显示“广告”的字样。当然播放指定视频数据的同时也可以显示提示消息，该提示消息的内容可以为诸如“该用户信号中断，请耐心等待”等。
需要说明的是，第一流控单元在获取到指定视频数据之后，可以确定指定视频数据的播放时长，当第一流控单元检测到第一终端的交互中断状态的持续时长超过该播放时长时，继续获取下一个指定视频数据。其中，如果第一流控单元获取到的与当前音视频交互匹配的视频数据的个数为多个时，第一流控单元可以从剩余的匹配的视频数据中，随机选取一个视频数据作为下一个指定视频数据。在另一种实施方式中，第一流控单元还可以不选取下一个指定视频数据，而是由第二中转单元在检测到第一终端的交互中断状态的持续时长超过该播放时长时，重复播放获取到的指定视频数据。
该步骤307是第二管理设备向第二用户所在终端发送状态切换通知的过程。
需要说明的是，当第一流控单元检测到第一终端由交互中断状态恢复至正在交互状态时，向第二流控单元发送第一终端的状态恢复通知，该状态恢复通知用于指示第一终端由交互中断状态恢复至正在交互状态。第二流控单元将该状态恢复通知发送至第二中转单元，该第二中转单元停止向第二用户所在终端发送指定视频数据。当第一终端由交互中断状态恢复至正在交互状态时，第一中转单元可以采集到第一终端的音视频数据，可以将该第一终端的音视频数据转发至第二中转单元，第二中转单元将该第一终端的音视频数据发送至第二用户所在终端。此外，第一流控单元还会将该状态恢复通知发送给第一中转单元，由第一中转单元将该状态恢复通知发送给第一终端所关联的用户所在终端。当第一中转单元接收到状态恢复通知时，可以停止向第一终端所关联的用户所在终端发送该指定视频数据。
需要说明的是，本实施例中，在第一终端处于交互中断状态的过程中，可能有多种情况发生，比如，第二终端侧的直播可能结束；或者第二终端主动退出了与第一终端的音视频交互；或者第一终端长时间处于交互中断状态时，默认第一终端退出音视频交互。因此，为了进一步保持各个直播房间的状态同步，本发明实施例还可以在第一终端长时间处于交互中断状态时及时退出音视频交互，并同步退出状态，也可以在第二终端退出音视频交互时，同步退出状态，该过程与上述步骤206中对同步退出状态的过程同理，在此不做赘述。
本发明实施例提供的方法，当第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的音视频交互状态的同步。
另外，在不同直播房间同步音视频交互状态的过程中，可以采用指定视频数据替代第一终端的音视频数据，以达到对第一终端的直播中断的提示的目的，提高了提示方式的多样性，并且，提高了音视频交互的视频流畅性，同时，提高了指定视频数据的转换率，优化了音视频交互的用户体验。
图3所提供的实施例是由管理第一终端所在直播房间的第一流控单元来获取指定视频数据，本发明实施例中，还可由管理第二终端所在直播房间的第二流控单元来获取指定视频数据，详见图4所提供的实施例。
图4是本发明实施例提供的一种音视频交互状态同步方法的流程图，参见图4，本发明实施例提供的方法流程包括：
401、当第一流控单元检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端。
该步骤与步骤201同理，在此不做赘述。该步骤401为第一管理设备检测到第一终端由正在交互状态切换至交互中断状态时，确定与第一终端进行音视频交互的第二终端的过程。
402、第一流控单元根据所述第二终端的第一路径信息，确定第二流控单元。
该步骤与步骤202同理，在此不做赘述。该步骤402是第一管理设备根据第二终端的第一路径信息，确定第二管理设备过程。
403、第一流控单元向第二流控单元发送所述第一终端的状态切换通知。
该步骤与步骤203同理，在此不做赘述。该步骤403是第一管理设备向第二管理设备发送第一终端的状态切换通知的过程。
404、当第二流控单元接收到第一终端的状态切换通知时，从视频数据库中，获取指定视频数据，该指定视频数据为与当前音视频交互匹配的视频数据。
该步骤与上述步骤303同理，在此不做赘述。
该步骤404是第二管理设备从视频数据库中，获取指定视频数据的过程。
405、第二流控单元将指定视频数据携带在状态切换通知中发送至第二中转单元。
在本发明实施例中，第二流控单元可以将该指定视频数据发送至第一流控单元，由第一流控单元将该指定视频数据发送至第一中转单元。第一中转单元向除第一终端以外的、与第一终端所关联的用户所在终端发送该指定视频数据。接收到该指定视频数据的终端，在第一终端用户的音视频数据播放区域，播放该指定视频数据。当然，播放指定视频数据的同时也可以显示提示消息，该提示消息的内容可以为诸如“该用户信号中断，请耐心等待”等。
需要说明的是，第二流控单元还可以不将该指定视频数据发送至第一流控单元，第一流控单元可以仅向第一中转单元发送仅携带提示信息的状态切换通知，并由第一中转单元将该仅携带提示信息的状态切换通知发送给第一终端所在直播房间的用户所在终端。也即是，该种情况下，第一终端和第二终端所在直播房间，对第一终端的交互中断状态的提示方式是不同的，第一终端所在直播房间以提示信息进行提示，第二终端所在直播房间以指定视频数据进行提示，这样，提高了状态提示的灵活性。另外，由于无需在不同的直播房间之间发送指定视频数据，减少了对系统带宽的占用，提高了带宽利用率。
该步骤405是第二管理设备将指定视频数据携带在状态切换通知中发送至第二用户所在终端的过程。
406、第二中转单元从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户。
该步骤与步骤205同理，在此不做赘述。该步骤406是第二管理设备从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户的过程。
407、第二中转单元将接收到的状态切换通知发送给第二用户所在终端，由第二用户所在终端对第一终端的音视频交互状态进行提示。
该步骤与步骤307同理，在此不做赘述。该步骤407是第二管理设备向第二用户所在终端发送状态切换通知的过程。
本发明实施例提供的方法，当第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的音视频交互状态的同步。
另外，在不同直播房间同步音视频交互状态的过程中，可以采用指定视频数据替代第一终端的音视频数据，以达到对第一终端的直播中断的提示的目的，提高了提示方式的多样性，并且，提高了音视频交互的视频流畅性，同时，提高了指定视频数据的转换率，优化了音视频交互的用户体验。
另外，第一终端和第二终端所在直播房间，对第一终端的交互中断状态的提示方式可以是不同的，也即是，第一终端所在直播房间可以提示信息进行提示，第二终端所在直播房间可以指定视频数据进行提示，这样，提高了状态提示的灵活性。另外，由于无需在不同的直播房间之间发送指定视频数据，减少了对系统带宽的占用，提高了带宽利用率。
需要说明的是，为了更加清晰地对本发明实施例提供的音视频交互状态同步方法进行说明，图5给出了一种音视频交互状态同步过程中信令交互的示意图。上述图2，图3和图4所提供的实施例，仅以两个直播房间进行音视频交互，在音视频交互过程中进行音视频交互状态同步为例进行示例性说明，当有两个以上的直播房间进行音视频交互时，如果其中有一个终端的音视频交互状态由正在交互状态切换为交互中断状态，则可以在该终端所在直播房间与其他直播房间之间一一执行上述过程，便可实现两个以上直播房间的音视频交互状态的同步。
图6是本发明实施例提供的一种音视频交互状态同步装置的框图。参照图6，该装置包括第一确定模块601，第二确定模块602和第一发送模块603。
其中，第一确定模块601，用于当检测到第一终端由正在交互状态切换至交互中断状态时，确定与该第一终端进行音视频交互的第二终端；第二确定模块602，用于根据该第二终端的第一路径信息，确定第二管理设备，该第一路径信息用于指示通过该第二管理设备向该第二终端进行数据转发；第一发送模块603，用于向该第二管理设备发送该第一终端的状态切换通知，由该第二管理设备将该状态切换通知发送至与该第二终端所关联的用户所在终端，该状态切换通知用于指示该第一终端由正在交互状态切换至交互中断状态。
在一种可能的实现方式中，该第一发送模块603包括：
获取子模块，用于从视频数据库中，获取指定视频数据，该指定视频数据为与当前音视频交互匹配的视频数据；
发送子模块，用于将该指定视频数据携带在该状态切换通知中发送至该第二管理设备，由该第二管理设备将该指定视频数据作为该第一终端的音视频数据发送至与该第二终端所关联的用户所在终端。
在一种可能的实现方式中，该获取子模块用于：
确定当前音视频交互的直播类型；将该视频数据库中与该直播类型匹配的视频数据作为与当前音视频交互匹配的视频数据；或，
获取该第一终端用户和该第二终端用户中至少一方的签约信息；将该视频数据库中与该至少一方的签约信息匹配的视频数据作为该指定视频数据。
在一种可能的实现方式中，该获取子模块用于：
获取该第一终端用户和该第二终端用户中至少一方的历史交互行为数据；
对该至少一方的历史交互行为数据进行分析，得到行为关键字；
将该视频数据库中与该行为关键字匹配的视频数据作为该指定视频数据。
在一种可能的实现方式中，该获取子模块用于：
对当前音视频交互过程中该第一终端和该第二终端中至少一方的音视频数据进行分析，得到当前音视频交互过程中的交互关键字；
将该视频数据库中与该交互关键字匹配视频数据作为该指定视频数据。
在一种可能的实现方式中，该装置还包括：
第三确定模块，用于如果接收到该第一终端的状态切换指令，则确定该第一终端由正在交互状态切换为交互中断状态，该状态切换指令由该第一终端进入到交互中断状态时触发；或，
第四确定模块，用于如果检测到该第一终端的音视频数据流中断，则确定该第一终端由正在交互状态切换为交互中断状态。
在一种可能的实现方式中，该装置还包括：
第二发送模块，用于向策略服务器发送该第一终端的音视频交互请求消息，由该策略服务器确定该第二管理设备，并将该音视频交互请求消息发送至该第二管理设备，由该第二管理设备返回该第一路径信息；
其中，该音视频交互请求消息携带第二路径信息，该第二路径信息用于指示通过该第一管理设备向该第二终端进行音视频数据的转发。
在一种可能的实现方式中，该装置还包括：
获取模块，用于获取该第一终端处于交互中断状态的持续时间；第一退出模块，用于如果该持续时间超过预设时长，则控制该第一终端退出当前音视频交互，第三发送模块，用于向该第二管理设备发送该第一终端的退出消息；或，
第二退出模块，用于如果接收到该第二终端的音视频交互结束消息，则控制该第一终端退出当前音视频交互。
本公开实施例提供的装置，当检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的状态同步。
图7是本发明实施例提供的一种音视频交互状态同步装置的框图。参照图7，该装置包括接收模块701，确定模块702和第一发送模块703。
其中，接收模块701，用于从第一管理设备接收第一终端的状态切换通知，该状态切换通知用于指示该第一终端由正在交互状态切换为交互中断状态；确定模块702，用于从第二终端所关联的第一用户中确定参与该第一终端的音视频交互的第二用户，该第二终端为与该第一终端进行音视频交互的终端，该第一用户为该第二终端所关联的用户；第一发送模块703，用于向该第二用户所在终端发送该状态切换通知，由该第二用户所在终端对该第一终端的音视频交互状态进行提示，该状态切换通知用于指示该第一终端由正在交互状态转换为交互中断状态。
在一种可能的实现方式中，该发送模块，包括：
获取子模块，用于从视频数据库中，获取指定视频数据，该指定视频数据为与当前音视频交互匹配的视频数据；
发送子模块，用于将该指定视频数据携带在该状态切换通知中发送至该第二用户所在终端，由该第二用户所在终端播放该指定视频数据。
在一种可能的实现方式中，该获取子模块，用于：
确定当前音视频交互的直播类型；
将该视频数据库中与该直播类型匹配的视频数据作为与当前音视频交互匹配的视频数据。
在一种可能的实现方式中，该获取子模块，用于：
获取该第一终端用户和该第二终端用户中至少一方的历史交互行为数据；
对该至少一方的历史交互行为数据进行分析，得到行为关键字；
将该视频数据库中与该行为关键字匹配的视频数据作为该指定视频数据。
在一种可能的实现方式中，该获取子模块，用于：
对当前音视频交互过程中该第一终端和该第二终端中至少一方的音视频数据进行分析，得到当前音视频交互过程中的交互关键字；
将该视频数据库中与该交互关键字匹配视频数据作为该指定视频数据。
在一种可能的实现方式中，该装置还包括：
第二发送模块，用于当从策略服务器接收到该第一终端的音视频交互请求消息时，向该第一用户所在终端发送音视频交互更新消息，该音视频交互更新消息用于指示该第二终端与该第一终端进行音视频交互；
添加模块，用于对于该第一用户中的任一用户，如果接收到该用户的拒绝更新消息，为该用户添加指定标签，该指定标签用于指示用户拒绝参与该第一终端的音视频交互；
第三发送模块，用于在与该第一终端音视频交互的过程中，向具有该指定标签的用户所在终端发送该第二终端的音视频数据。
在一种可能的实现方式中，该装置还包括：
第四发送模块，用于如果接收到该第一终端的退出消息，停止将该第二终端的音视频数据发送给该第一管理设备，向该第二用户所在终端发送该退出消息；或，
第五发送模块，用于如果检测到该第二终端与该第一终端的音视频交互结束，则向该第一管理设备发送音视频交互结束消息。
本公开实施例提供的装置，当第一管理设备检测到第一终端由正在交互状态切换为交互中断状态时，能够根据第二终端的第一路径信息，确定第二终端的第二管理设备，并通过与第二管理设的交互，可以将第一终端的交互中断状态通知给第二终端所关联的用户所在终端，实现了音视频交互过程中，不同直播房间的音视频交互状态的同步。
需要说明的是：上述实施例提供的音视频交互状态同步装置在进行音视频交互状态的同步时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的音视频交互状态同步装置与音视频交互状态同步方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本实施例还提供了一种音视频交互状态同步系统，该系统包括第一管理设备、第二管理设备，
第一管理设备，用于当检测到第一终端由正在交互状态切换至交互中断状态时，确定与该第一终端进行音视频交互的第二终端；
该第一管理设备，还用于根据该第二终端的第一路径信息，确定第二管理设备，该第一路径信息用于指示通过该第二管理设备向该第二终端进行音视频数据的转发；
该第一管理设备，还用于向该第二管理设备发送该第一终端的状态切换通知，该状态切换通知用于指示该第一终端由正在交互状态切换至交互中断状态；
该第二管理设备，用于接收到该状态切换通知后，从第二终端所关联的第一用户中确定参与该第一终端的音视频交互的第二用户；
该第二管理设备，还用于向该第二用户所在终端发送该状态切换通知，由该第二用户所在终端对该第一终端的音视频交互状态进行提示。
图8是本发明实施例提供的一种音视频交互状态同步装置的框图。例如，装置800可以被提供为一服务器。参照图8，装置800包括处理组件822，其进一步包括一个或多个处理器，以及由存储器832所代表的存储器资源，用于存储可由处理部件822的执行的指令，例如应用程序。存储器832中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件822被配置为执行指令，以执行上述音视频交互状态同步方法实施例中第一管理设备和第二管理设备所执行的方法。
装置800还可以包括一个电源组件826被配置为执行装置800的电源管理，一个有线或无线网络接口850被配置为将装置800连接到网络，和一个输入输出(I/O)接口858。装置800可以操作基于存储在存储器832的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器，上述指令可由服务器中的处理器执行以完成上述实施例中的音视频交互状态同步方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种音视频交互状态同步方法，其特征在于，应用于第一管理设备，所述方法包括：
当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
向所述第二管理设备发送所述第一终端的状态切换通知，由所述第二管理设备将所述状态切换通知发送至与所述第二终端所关联的用户所在终端，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态。
2.根据权利要求1所述的方法，其特征在于，所述向所述第二管理设备发送所述第一终端的状态切换通知，包括：
从视频数据库中，获取指定视频数据，所述指定视频数据为与当前音视频交互匹配的视频数据；
将所述指定视频数据携带在所述状态切换通知中发送至所述第二管理设备，由所述第二管理设备将所述指定视频数据作为所述第一终端的音视频数据发送至与所述第二终端所关联的用户所在终端。
3.根据权利要求2所述的方法，其特征在于，所述从视频数据库中，获取指定视频数据，包括：
确定当前音视频交互的交互类型；将所述视频数据库中与所述交互类型匹配的视频数据作为所述指定视频数据；或，
获取所述第一终端用户和所述第二终端用户中至少一方的签约信息；将所述视频数据库中与所述至少一方的签约信息匹配的视频数据作为所述指定视频数据。
4.根据权利要求2所述的方法，其特征在于，所述从视频数据库中，获取指定视频数据，包括：
获取所述第一终端用户和所述第二终端用户中至少一方的历史交互行为数据；
对所述至少一方的历史交互行为数据进行分析，得到行为关键字；
将所述视频数据库中与所述行为关键字匹配的视频数据作为所述指定视频数据。
5.根据权利要求2所述的方法，其特征在于，所述从视频数据库中，获取指定视频数据，包括：
对当前音视频交互过程中所述第一终端和所述第二终端中至少一方的音视频数据进行分析，得到当前音视频交互过程中的交互关键字；
将所述视频数据库中与所述交互关键字匹配的视频数据作为所述指定视频数据。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
如果接收到所述第一终端的状态切换指令，则确定所述第一终端由正在交互状态切换为交互中断状态，所述状态切换指令由所述第一终端进入到交互中断状态时触发；或，
如果检测到所述第一终端的音视频数据流中断，则确定所述第一终端由正在交互状态切换为交互中断状态。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
向策略服务器发送所述第一终端的音视频交互请求消息，由所述策略服务器确定所述第二管理设备，并将所述音视频交互请求消息发送至所述第二管理设备，由所述第二管理设备返回所述第一路径信息；
其中，所述音视频交互请求消息携带第二路径信息，所述第二路径信息用于指示通过所述第一管理设备向所述第二终端进行音视频数据的转发。
8.一种音视频交互状态同步方法，其特征在于，应用于第二管理设备，所述方法包括：
从第一管理设备接收第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换为交互中断状态；
从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户，所述第二终端为与所述第一终端进行音视频交互的终端；
向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示，所述状态切换通知用于指示所述第一终端由正在交互状态转换为交互中断状态。
9.根据权利要求8所述的方法，其特征在于，所述方法还包括：
当从策略服务器接收到所述第一终端的音视频交互请求消息时，向所述第一用户所在终端发送音视频交互更新消息，所述音视频交互更新消息用于指示所述第二终端与所述第一终端进行音视频交互；
对于所述第一用户中的任一用户，如果接收到所述用户的拒绝更新消息，为所述用户添加指定标签，所述指定标签用于指示用户拒绝参与所述第一终端的音视频交互；
在与所述第一终端音视频交互的过程中，向具有所述指定标签的用户所在终端发送所述第二终端的音视频数据。
10.根据权利要求8至9所述的方法，其特征在于，所述方法还包括：
如果接收到所述第一终端的退出消息，停止将所述第二终端的音视频数据发送给所述第一管理设备，向所述第二用户所在终端发送所述退出消息；或，
如果检测到所述第二终端与所述第一终端的音视频交互结束，则向所述第一管理设备发送音视频交互结束消息。
11.一种音视频交互状态同步方法，其特征在于，所述方法包括：
第一管理设备当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
所述第一管理设备根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
所述第一管理设备向所述第二管理设备发送所述第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态；
所述第二管理设备接收到所述状态切换通知后，从所述第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户；
所述第二管理设备向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示。
12.一种音视频交互状态同步装置，其特征在于，应用于第一管理设备，所述装置包括：
第一确定模块，用于当检测到第一终端由正在交互状态切换至交互中断状态时，确定与所述第一终端进行音视频交互的第二终端；
第二确定模块，用于根据所述第二终端的第一路径信息，确定第二管理设备，所述第一路径信息用于指示通过所述第二管理设备向所述第二终端进行音视频数据的转发；
第一发送模块，用于向所述第二管理设备发送所述第一终端的状态切换通知，由所述第二管理设备将所述状态切换通知发送至与所述第二终端所关联的用户所在终端，所述状态切换通知用于指示所述第一终端由正在交互状态切换至交互中断状态。
13.根据权利要求12所述的装置，其特征在于，所述装置还包括：
获取模块，用于获取所述第一终端处于交互中断状态的持续时间；第一退出模块，用于如果所述持续时间超过预设时长，则控制所述第一终端退出当前音视频交互，第三发送模块，用于向所述第二管理设备发送所述第一终端的退出消息；或，
第二退出模块，用于如果接收到所述第二终端的音视频交互结束消息，则控制所述第一终端退出当前音视频交互。
14.一种音视频交互状态同步装置，其特征在于，应用于第二管理设备，所述装置包括：
接收模块，用于从第一管理设备接收第一终端的状态切换通知，所述状态切换通知用于指示所述第一终端由正在交互状态切换为交互中断状态；
确定模块，用于从第二终端所关联的第一用户中确定参与所述第一终端的音视频交互的第二用户，所述第二终端为与所述第一终端进行音视频交互的终端；
第一发送模块，用于向所述第二用户所在终端发送所述状态切换通知，由所述第二用户所在终端对所述第一终端的音视频交互状态进行提示，所述状态切换通知用于指示所述第一终端由正在交互状态转换为交互中断状态。
15.根据权利要求14所述的装置，其特征在于，所述装置还包括：
第四发送模块，用于如果接收到所述第一终端的退出消息，停止将所述第二终端的音视频数据发送给所述第一管理设备，向所述第二用户所在终端发送所述退出消息；或，
第五发送模块，用于如果检测到所述第二终端与所述第一终端的音视频交互结束，则向所述第一管理设备发送音视频交互结束消息。
CN201710209976.3A 2017-03-31 2017-03-31 音视频交互状态同步方法及装置 Active CN108668140B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710209976.3A CN108668140B (zh) 2017-03-31 2017-03-31 音视频交互状态同步方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710209976.3A CN108668140B (zh) 2017-03-31 2017-03-31 音视频交互状态同步方法及装置

Publications (2)

Publication Number Publication Date
CN108668140A true CN108668140A (zh) 2018-10-16
CN108668140B CN108668140B (zh) 2020-11-10

Family

ID=63784334

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710209976.3A Active CN108668140B (zh) 2017-03-31 2017-03-31 音视频交互状态同步方法及装置

Country Status (1)

Country Link
CN (1) CN108668140B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112447174A (zh) * 2019-08-29 2021-03-05 阿里巴巴集团控股有限公司 服务提供方法、装置和系统、计算设备和存储介质
CN112911368A (zh) * 2021-01-15 2021-06-04 北京字跳网络技术有限公司 互动方法、装置、电子设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101459729A (zh) * 2008-12-24 2009-06-17 联想移动通信科技有限公司 一种实现人机交互的移动终端和方法
US20120193434A1 (en) * 2011-01-31 2012-08-02 Bank Of America Corporation Mobile wallet with managed active and passive payment technology
US20130016078A1 (en) * 2011-07-14 2013-01-17 Kodali Nagendra B Multi-perspective imaging systems and methods
CN103841353A (zh) * 2014-02-24 2014-06-04 广州华多网络科技有限公司 视频交互方法、终端、服务器及系统
CN104836720A (zh) * 2014-02-12 2015-08-12 北京三星通信技术研究有限公司 交互式通信中进行信息推荐的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101459729A (zh) * 2008-12-24 2009-06-17 联想移动通信科技有限公司 一种实现人机交互的移动终端和方法
US20120193434A1 (en) * 2011-01-31 2012-08-02 Bank Of America Corporation Mobile wallet with managed active and passive payment technology
US20130016078A1 (en) * 2011-07-14 2013-01-17 Kodali Nagendra B Multi-perspective imaging systems and methods
CN104836720A (zh) * 2014-02-12 2015-08-12 北京三星通信技术研究有限公司 交互式通信中进行信息推荐的方法及装置
CN103841353A (zh) * 2014-02-24 2014-06-04 广州华多网络科技有限公司 视频交互方法、终端、服务器及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112447174A (zh) * 2019-08-29 2021-03-05 阿里巴巴集团控股有限公司 服务提供方法、装置和系统、计算设备和存储介质
CN112911368A (zh) * 2021-01-15 2021-06-04 北京字跳网络技术有限公司 互动方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN108668140B (zh) 2020-11-10

Similar Documents

Publication Publication Date Title
JP3172870U (ja) 双方向サービスを提供且つ管理するシステム
KR20070005690A (ko) 네트워크 채팅 환경에서의 채팅 부하 관리 시스템 및 방법
US8175582B2 (en) System and methods for delivering event-related multimedia content to wireless devices
CN106488169B (zh) 一种数据传输的方法、系统以及相关设备
CN103718528A (zh) 一种多终端协同播放多媒体文件的方法和相关装置及系统
CN110856011B (zh) 一种分组进行直播互动的方法、电子设备及存储介质
CN104333799B (zh) 一种频道切换的方法、装置和系统
CN104333775A (zh) 一种直播频道中虚拟物品互动方法、装置和系统
CN104363475A (zh) 一种观众分组关联的方法、装置和系统
CN102185856B (zh) 组队游戏中组队视频方法、装置及系统
US9402056B2 (en) Collaboration extension system
US11412278B1 (en) Streaming video trunking
CN109586929A (zh) 会议内容的传输方法及装置
CN104283847B (zh) 基于视频共享的社交业务实现方法及装置
CN108668140A (zh) 音视频交互状态同步方法及装置
US20220021715A1 (en) Live streaming method and apparatus, device and computer readable storage medium
JP6645762B2 (ja) 遠隔教育支援装置、遠隔教育支援方法、及び遠隔教育支援プログラム
JP2006202251A (ja) ストリーミング配信システム及びストリーミング配信方法
JP2001527720A (ja) 対話式表示システム
CN101410822B (zh) 服务器镜像方法及系统
US20130041491A1 (en) Communication system and communication method
CN108668151A (zh) 音视频交互方法及装置
CN115052032B (zh) 一种提供多用户服务的通信方法和系统
CN107172451A (zh) 视频播放控制方法及装置
US9351138B1 (en) System, method and apparatus for distributed content dissemination

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant