CN114866520A - 通信的处理方法、系统、电子设备及存储介质 - Google Patents

通信的处理方法、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN114866520A
CN114866520A CN202210405218.XA CN202210405218A CN114866520A CN 114866520 A CN114866520 A CN 114866520A CN 202210405218 A CN202210405218 A CN 202210405218A CN 114866520 A CN114866520 A CN 114866520A
Authority
CN
China
Prior art keywords
track
target
transmission
data transmission
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210405218.XA
Other languages
English (en)
Other versions
CN114866520B (zh
Inventor
徐凌珊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN202210405218.XA priority Critical patent/CN114866520B/zh
Publication of CN114866520A publication Critical patent/CN114866520A/zh
Application granted granted Critical
Publication of CN114866520B publication Critical patent/CN114866520B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00—Routing or path finding of packets in data switching networks
    • H04L45/24—Multipath
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供了一种通信的处理方法、系统、电子设备及计算机可读存储介质，属于计算机技术领域。该方法适用于通信系统，通信系统包括客户端与服务端，客户端与服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，该方法包括：所述客户端响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；所述服务端获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。

Description

通信的处理方法、系统、电子设备及存储介质
技术领域
本发明属于计算机技术领域，特别是涉及一种通信的处理方法、系统、电子设备及计算机可读存储介质。
背景技术
在音视频通信服务应用中，例如多人音视频群聊服务，客户端与服务端之间建立连接进行音视频数据的传输，服务端可以根据不同的场景需求创建多路连接，而在客户端与服务端之间进行通信的过程中，尤其是群聊会议室多人通信的情况下，若是客户端与服务端之间断开连接，或者客户端与服务端之间重新建立连接，如此频繁地与服务端之间发生建立连接、断开连接，容易给服务端造成很大的系统负担，增加服务端的资源消耗。
发明内容
本发明提供一种通信的处理方法、系统、电子设备及计算机可读存储介质，以便在一定程度上解决音视频通信服务应用中，服务端系统负担以及资源消耗较大的问题。
依据本发明的第一方面，提供了一种通信的处理方法，所述方法适用于通信系统，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述方法包括：
所述客户端响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
所述服务端获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则所述服务端在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
所述服务端将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态，包括：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则所述服务端将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则所述服务端将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
可选地，还包括：
所述客户端响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端；
所述服务端获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
所述服务端建立与所述客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
可选地，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态，包括：
所述服务端在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
可选地，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态，包括：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
依据本发明的第二方面，提供了一种通信的处理方法，应用于服务端，所述服务端与预设客户端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干个调数据传输轨道，所述方法包括：
获取目标客户端发送的模式切换请求；
确定与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态，包括：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
可选地，还包括：
获取目标客户端发送的终端通信请求；
确定与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
建立与所述目标客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
可选地，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态，包括：
在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
可选地，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态，包括：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
依据本发明的第三方面，提供了一种通信的处理方法，应用于客户端，所述客户端与预设服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述方法包括：
响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端，所述服务端用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态，并将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
可选地，还包括：
响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端，所述服务端用于获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态，并建立与所述客户端之间的所述多媒体传输链路，在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
依据本发明的第四方面，提供了一种通信系统，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述系统包括：
位于所述客户端的模式切换模块，用于响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
位于所述服务端的目标轨道信息获取模块，用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
位于所述服务端的轨道调整模块，用于将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述轨道调整模块具体用于：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则所述服务端在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
所述服务端将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述轨道调整模块具体用于：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
可选地，所述轨道调整模块具体用于：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则所述服务端将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则所述服务端将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
可选地，还包括：
位于所述客户端的通信请求模块，用于响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端；
位于所述服务端的初始轨道信息获取模块，用于获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
位于所述服务端的通信链路建立模块，用于建立与所述客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
可选地，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述通信链路建立模块具体用于：
所述服务端在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
可选地，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述通信链路建立模块具体用于：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
依据本发明的第五方面，一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行存储器上所存放的程序时，实现如上所述的方法步骤。
依据本发明的第六方面，一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述的通信的处理方法。
针对在先技术，本发明具备如下优点：
在本发明实施例中，适用于通信系统，在该通信系统中可以包括客户端与服务端，其中，在通信的过程中，客户端与服务端之间可以建立有多媒体传输链路，且该多媒体传输链路中包括若干条数据传输轨道，则在通信的过程中，当通信的用户触发模式切换操作时，客户端可以生成对应的模式切换请求，服务端获取与模式切换请求对应的目标通信模式，以及与目标通信模式对应的目标轨道信息，目标轨道信息中可以包括与目标通信模式对应的目标轨道标识以及目标轨道标识对应的目标轨道状态，然后服务端将多媒体传输链路中与目标轨道标识对应的数据传输轨道调整为目标轨道状态，从而在保持多媒体传输链路的情况下，调整数据传输轨道的轨道状态以执行与通信模式对应的数据传输，避免服务端与客户端之间反复建立、断开通信链路，有效降低了系统负担，减少服务端的资源消耗。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1是本发明实施例提供的一种通信的处理方法的步骤流程图；
图2是本发明实施例中设备连接的示意图；
图3是本发明实施例中设备连接的示意图；
图4是本发明实施例中数据传输轨道的示意图；
图5是本发明实施例中通信连接的示意图；
图6是本发明实施例提供的一种通信的处理方法的步骤流程图；
图7是本发明实施例提供的一种通信的处理方法的步骤流程图；
图8是本发明实施例提供的另一种通信的处理装置的框图；
图9是本发明实施例电子设备的框图。
具体实施方式
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。
图1是本发明实施例提供的一种通信的处理方法的步骤流程图，适用于通信系统，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，如图1所示，该方法可以包括：
步骤101，所述客户端响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
作为一种示例，在音视频通信服务应用中，多人音视频群聊服务，客户端和服务端之间建立WebRTC通信链路传输音视频流，客户端与MCU(MicroController Unit，微控制单元)服务端(下述服务端)的沟通包括发布本地音视频流、订阅混合视频流、订阅共享桌面流、发布共享桌面流、订阅其他客户端单一音视频流等等。其中，群聊服务可以提供多种复杂场景，包括两人、多人的纯语音通信、视频通信以及桌面共享通信等服务。服务端在根据每个场景的需求创建对应的连接的情况下，若客户端开关摄像头、开关声音输入输出、取消订阅、取消发布当前已建立连接的音频流、视频流等，则客户端和服务端会断开当前的连接，再重新建立新需求的连接，从而导致当群聊会议室多人通信情况下频繁开关设备、状态转换导致频繁和服务端建连断连，给服务端造成很大的负担，同时浪费宽带资源。因此，通过本发明实施例可以至少或部分解决上述问题。
需要说明的是，本发明实施例中以会议通信为例进行示例性说明，可以理解的是，对于会议通信，包括但不限于常规的会议通信，还可以包括会话通信，以及其他类型的终端通信等，本发明对此不作限制。
在实际中，处于会议通信下的客户端，往往存在即时改变通信模式的需求，例如，从视频通信模式切换至桌面通信模式，从双人视频通信模式切换至多人视频通信模式等等，若是频繁地断开、建立客户端与服务端之间的通信链路，无疑会增加服务端的系统开销，提高通信带宽消耗。对此，在本发明实施例中，在已经建立通信链路的情况下，客户端可以响应于模式切换操作，生成与模式切换操作对应的模式切换请求，并将该模式切换请求发送至服务端，以便服务端根据模式切换请求，在保持客户端与服务端之间的通信链路的情况下，进行通信模式的切换。
在进行通信模式切换之前，客户端与服务端之间可以建立会议通信连接，具体的，客户端响应于终端通信操作，将与终端通信操作对应的终端通信请求发送至服务端；服务端获取与终端通信请求对应的初始通信模式，以及初始通信模式对应的初始轨道信息，初始轨道信息包括与初始通信模式对应的初始轨道标识以及初始轨道标识对应的初始轨道状态；服务端建立与客户端之间的多媒体传输链路，并在多媒体传输链路中建立与初始轨道标识对应的数据传输轨道，以及将数据传输轨道调整初始轨道状态。
通信模式可以包括语音通信模式、视频通信模式以及桌面通信模式等，其中，语音通信模式可以为两个或两个以上客户端建立纯语音通信的通信模式；视频通信模式可以为两个或两个以上客户端建立音视频数据传输的通信模式；桌面通信模式可以为两个或两个以上客户端建立音视频数据、桌面流数据传输的通信模式，对于桌面通信模式，客户端可以分为主讲客户端，即上传桌面流数据的客户端；以及参与客户端，即获取桌面流数据的客户端。可选地，对于客户端可以从一个通信模式切换至另一个通信模式，服务端可以在保持与客户端已经建立的多媒体传输链路的情况下，对多媒体传输链路中的数据传输轨道进行媒体流传输的中断或开启操作，以实现相应通信模式的数据传输。可选地，在本发明实施例中，第一视频通信模式为双人视频通信模式，第二视频通信模式为两人以上视频通信模式。
在客户端进行会议通信的过程中，客户端与服务端之间的通信链路可以包括消息传输链路以及多媒体传输链路等。其中，消息传输链路可以为websocket连接，客户端可以通过该websocket连接向服务端发送指令消息，以便服务端执行对应的数据处理；多媒体传输链路可以为webRTC链路，webRTC链路可以用于传输数据流，如音视频数据流等，在客户端与服务端的通信连接中，多媒体传输链路包括上行webRTC链路与下行webRTC链路，并且，每一个webRTC链路中可以包括若干条数据传输轨道，例如音频传输轨道、视频传输轨道、混合流传输轨道(可以用于传输音频流、视频流以及音视频流)以及桌面流传输轨道等等。
其中，轨道信息可以包括与通信模式对应的轨道标识、传输方向标识以及轨道标识所对应的轨道状态，轨道标识可以用于标识webRTC链路中数据传输轨道为传输何种数据流类型，如频传输轨道、视频传输轨道、混合流传输轨道以及桌面流传输轨道等等；传输方向标识可以用于标识数据传输轨道为何种数据传输方式，如上行传输或下行传输等等；轨道状态可以为数据传输轨道中媒体流传输的状态，包括媒体流传输状态以及媒体流中断状态。则当客户端想要与其他客户端建立会议通信，则本地客户端可以响应用户操作，生成对应的终端通信请求，并将该终端通信请求发送至服务端，服务端根据终端通信请求获取对应的初始通信模式，确定客户端想要建立的是何种通信模式，并获取初始通信模式对应的轨道标识以及传输方向标识，接着采用轨道标识与传输方向标识，在与客户端之间的webRTC链路中创建与初始通信模式对应的数据传输轨道，然后基于所建立的数据传输轨道，实现不同客户端之间的会议通信。
具体的，在建立多媒体传输链路的过程中，由于数据传输轨道存在单媒体流传输轨道以及混合流传输轨道，前者只传输一种数据流，后者可以同时传输两种数据流，或传输一种数据流并中断另一种数据流的传输，则服务端在得到与初始通信模式对应的初始轨道标识、初始轨道标识对应的初始轨道状态以及传输方向标识后，若初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用传输方向标识将单媒体流传输轨道调整为媒体流传输状态；若初始轨道标识表征数据传输轨道为混合流传输轨道，则采用传输方向标识将混合流传输轨道中与初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
需要说明的是，在会议通信过程中，也可以只有一个客户端，在该场景下，客户端与服务端之间没有数据流的交互。此外，在本发明实施例中，以客户端为本地客户端为例进行示例性说明，可以理解的是，对于对端客户端，其与本地客户端基本相同或相似，相关通信过程可以相互参考，本发明对此不作限制。
在一种示例中，参考图2，示出了本发明实施例中设备连接的示意图，服务端可以作为业务服务端，通过信令服务器与客户端建立websocket连接，以便通过该连接实现客户端与服务端之间的指令消息传输。参考图3，示出了本发明实施例中设备连接的示意图，当两个客户端向服务端发起终端通信请求消息时，服务端可以分别建立与客户端之间的通信链路，对于两个客户端，可以由其中一个客户端作为会议发起客户端发起群聊会议室的建立，则另一个客户端通过会议室的标识(如会议室号码、会议室地址等)加入该群聊会议室，实现与另一个客户端之间的通信；当大于2个客户端向服务端发起终端通信请求时，其通信建立过程与两个客户端的通信建立过程相同或相似，在此不再赘述。
例如，针对本地客户端，初始通信模式为双人视频通信模式，视频通信模式对应的轨道标识至少包括音频轨道标识、视频轨道标识以及音视频轨道标识等，传输方向标识包括上行传输方向标识以及下行传输方向标识，则服务端在接收到客户端发送的终端通信请求后，可以采用双人视频通信模式对应的音频轨道标识与上行传输方向标识，在多媒体传输链路中建立与双人视频通信模式对应的第一上行音频传输轨道，采用视频轨道标识与上行传输方向标识，在多媒体传输链路中建立与双人视频通信模式对应的第一上行视频传输轨道以及第一下行视频传输轨道，采用音视频轨道标识与下行传输方向标识，在多媒体传输链路中建立与第一视频通信模式对应的混合流传输轨道，并中断混合流传输轨道中的视频流传输，以便在会议通信过程中，客户端可以通过第一上行音频传输轨道向服务端传输上行音频流，通过第一上行视频传输轨道向服务端传输上行视频流，通过第一下行视频传输轨道获取服务端发送的下行视频流，以及通过混合流传输轨道获取服务端发送的下行音频流。
又如，初始通信模式还可以为桌面通信模式，桌面通信模式的轨道标识还包括桌面流轨道标识，若客户端为桌面通信模式中的主讲客户端，则服务端可以采用音频轨道标识与上行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的第一上行音频传输轨道，采用桌面流轨道标识与上行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的上行桌面流传输轨道，以及采用音视频轨道标识与下行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的混合流传输轨道，并中断混合流传输轨道中的视频流传输。
再如，若客户端为桌面通信模式中的参与客户端，则服务端采用音频轨道标识与上行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的第一上行音频传输轨道，采用视频轨道标识与上行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的第一上行视频传输轨道，采用音视频轨道标识与下行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的混合流传输轨道，采用桌面流轨道标识与下行传输方向标识，在多媒体传输链路中建立与桌面通信模式对应的下行桌面流传输轨道。
服务端通过获取与通信模式对应的轨道信息，在与客户端之间的webRTC链路中建立对应的数据传输轨道，实现客户端之间的会议数据通信。
需要说明的是，各个数据传输轨道的数据传输过程可以相互参照，本发明实施例不再进行赘述。并且，在本发明实施例中，在进行双人视频通信的过程中，为了实现不同用户的同屏展示，通过对混合流传输轨道中的视频流进行限制，并建立一条下行视频流传输轨道，实现在客户端中对两个用户的视频进行分屏展示，保证用户的通信体验。
步骤102，所述服务端获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
服务端在接收到客户端发送的模式切换请求后，可以确定客户端当前处于何种通信模式，并确定客户端所要切换的目标通信模式，接着获取与目标通信模式对应的目标轨道信息，以便根据目标轨道信息对当前与客户端之间webRTC链路中的数据传输轨道进行处理，包括中断轨道数据传输、建立新的数据传输轨道以及开启数据传输轨道的数据传输等等。其中，目标轨道信息可以包括与目标通信模式对应的目标轨道标识以及目标轨道标识对应的目标轨道状态，对于目标轨道标识，其可以与初始轨道标识相同的标识，还可以包括初始轨道标识不同的标识，当包含与初始轨道标识不同的轨道标识时，表明在目标通信模式下需要建立新的数据传输轨道。
可选地，客户端与服务端所建立的多媒体传输链路中，可以建立与会议通信模式匹配的若干条数据传输轨道，每一条数据传输轨道可以用于传输至少一路数据流，并且每个数据传输轨道可以对应唯一的轨道标识。参考图4，示出了本发明实施例中数据传输轨道的示意图，客户端与服务端之间一个webRTC链路(PeerConnection，PC)可以为一路多媒体传输链路，在一路多媒体传输链路中可以包括若干条数据传输轨道，并且一路多媒体传输链路可以具有专属流标识stream ID，每一条数据传输轨道可以为音频轨道(audioTrack)，也可以为视频轨道(video Track)，还可以为音视频轨道，分别用于传输音频数据、视频数据以及音视频数据等，以及桌面流轨道等等，本发明对此不作限制。
服务端与客户端之间所建立的一个PC具有方向性，客户端向服务端发送数据为“推流”(即客户端输出数据流)，服务端向客户端下发数据为“拉流”(即向客户端输入数据流)，则客户端与服务端之间的数据流可以包括发布流和订阅流，对于发布流，客户端与服务端建立PC之后，将本地获取的音视频数据推流给服务端，即“publish”，推的流可以为“forward流”，方向为：客户端Out，例如，在群聊会议中，客户端推一路音视频流可以包括音频流audio track、视频流video track，桌面流(screen流)可以包括桌面数据的videotrack；对于订阅流，客户端向服务端订阅需要拉取的流，并在订阅成功之后，服务端向客户端推送对应的流，即“subscribe”，方向为：客户端In，客户端可以订阅一路包括audiotrack和video track的流(即一个PC内同时传输audio track和video track)，此外还可以只订阅audio track或video track的流。
在一种示例中，按照会议通信模式可以根据会议室人数、会议室通信方式、客户端角色进行模式分类，如表1所示：
会议室人数 会议室通信方式 客户端角色
两人 视频通信模式 主讲人(host)
两人以上 桌面通信模式 参与者(attendee)
表1
其中，主讲人可以为发起会议通信的客户端，参与者可以为加入该会议室的客户端，对于主讲人，其可以拥有会议室管理权限，对会议室的人数、通信方式等进行管理。在会议通信过程中，所涉及数据流可以包括：
Forward：表示客户端向服务端推送的流，正常发布一路流会有音频流和视频流；Subscribe：表示客户端向服务端订阅的流，正常订阅一路流会有音频流和视频流；Mix：表示服务端混合所有客户端上传的流，合成一路流，包括混流后的音频、视频流等等。
对于视频方式的会议室通信方式，数据流的传输可以如表2、表3所示：
Figure BDA0003601942840000151
表2
多人视频 发布流 订阅流
客户端A forward-A subscribe-mix
客户端B forward-B subscribe-mix
客户端C forward-C subscribe-mix
表3
其中，在两人通信过程中，客户端的订阅流可以为混合流以及对端的视频流，其中，可以对混合流中的视频流进行限制，只传输音频流，发布流可以包括音频流以及视频流；在多人通信过程中，客户端的订阅流为服务端对所有客户端上传的流进行混合之后下发的数据流，发布流可以包括音频流以及视频流。
对于桌面通信模式，数据流的传输可以如表4、表5所示：
Figure BDA0003601942840000161
表4
Figure BDA0003601942840000162
表5
其中，在两人桌面通信模式下，客户端A作为主讲人，除了要将相关的音频流上传至服务端，还需要将桌面共享的桌面数据流上传至服务端，客户端B作为参与者，可以订阅对端的桌面流与混合流，其中，混合流中可以限制视频流的传输，只传输音频流，客户端B的发布流可以包括音频流以及视频流。同理，在多人桌面通信模式下，可以参考两人桌面通信模式，在此不再赘述。
需要说明的是，在桌面通信模式下，可以通过对客户端所属用户终端的桌面或者对应的界面进行图像采集，从而得到对应的音视频数据，同时通过用户终端的摄像头/麦克风等对用户进行图像与音频的采集，进而将桌面流和用户对应的音视频流上传至服务端。
参考图5，示出了本发明实施例中通信连接的示意图，若会议通信涉及两个客户端之间的通信，则客户端与服务端之间建立PC连接之后，客户端A与客户端B之间分别可以包括两条数据传输轨道，一条用于发布流的数据传输，一条用于订阅流的传输。可以理解的是，当会议通信涉及两个客户端以上的通信时，对于订阅流所对应的数据传输轨道，则可以用于传输混合流，即可以将多个客户端推流至服务端的流进行混合，并将混流后的数据通过数据传输轨道下发至对应的客户端。
步骤103，所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
在具体实现中，不同通信模式对应的轨道标识不同，则客户端可以根据当前通信模式(对于当前通信模式，其可以为客户端与服务端之间当前通信所对应的通信模式，可以包括首次建立的通信模式，或通信过程中当前的通信模式等)对应的当前轨道标识与目标通信模式对应的目标轨道标识之间的比对结果，判断是否对当前已经建立的多媒体传输链路中的数据传输轨道进行媒体流传输中断或传输开启、建立新的数据传输轨道等处理操作，并结合判断结果生成目标轨道信息，然后将目标轨道信息发送至服务端。
在具体实现中，若目标轨道标识所对应的数据传输轨道不存在于多媒体传输链路中，则服务端可以在多媒体传输链路中建立目标轨道标识对应的目标数据传输轨道，并将目标数据传输轨道调整为媒体流传输状态，接着可以将多媒体传输链路中除目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态；若目标轨道标识所对应的数据传输轨道存在于多媒体传输链路中，则服务端将数据传输轨道调整为媒体流传输状态或媒体流中断状态。并且，对于上述轨道状态的调整，服务端可以根据数据传输轨道的轨道类型以及不同通信模式下数据传输轨道的传输内容进行调整，具体的，若目标轨道标识表征数据传输轨道为单媒体流传输轨道，则服务端将单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；若目标轨道标识表征数据传输轨道为混合流传输轨道，则服务端将混合流传输轨道中与目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态，从而在保持客户端与服务端之间多媒体传输链路的情况下，仅在多媒体传输链路中调整已有数据传输轨道的轨道状态或新建数据传输轨道，可以避免在发生通信模式切换的情况下，服务端与客户端之间反复建立、断开通信链路，有效地降低了系统负担，减少服务端的资源消耗，尤其是对通信链路反复建立的资源消耗。
可选地，服务端可以根据不同目标轨道标识所对应的数据传输轨道的目标轨道状态，生成对应的轨道控制指令。例如，在目标通信模式下，某一目标轨道标识所对应的数据传输轨道的目标轨道状态为媒体流传输状态，则服务端可以生成与媒体流传输状态对应的轨道开启指令，或者，某一目标轨道标识所对应的数据传输轨道在多媒体传输链路中不存在，则服务端可以生成与该目标轨道标识对应的轨道开启指令，以在多媒体传输链路中新建对应的数据传输轨道，并将数据传输轨道调整为对应的轨道状态；若目标轨道状态为媒体流中断状态，则服务端生成与媒体流中断状态对应的轨道中断指令。
需要说明的是，对于轨道开启指令与轨道中断指令，其可以用于开启或中断数据传输轨道中所有媒体流的传输，也可以用于开启或中断数据传输轨道中某一路媒体流的传输，例如，针对单媒体流传输轨道，轨道开启指令与轨道中断指令可以用于开启或中断该数据传输轨道的媒体流传输；针对混合流传输轨道，轨道开启指令与轨道中断指令可以用于开启或中断该数据传输轨道中某一路媒体流传输或全部媒体流传输等，本发明对此不作限制。
例如，轨道开启指令可以用于在webRTC链路中开启某一路数据传输轨道的数据流传输，或建立新的数据传输轨道；轨道中断指令可以用于在webRTC链路中中断某一路数据传输轨道的数据流传输，或结束某一路数据传输轨道。
在一种示例中，假设客户端当前处于双人视频通信模式，则当客户端切换至三人或三人以上的视频通信模式时，服务端可以接收客户端发送的模式切换请求，确定与模式切换请求对应的轨道控制指令，包括轨道开启指令以及轨道中断指令等，接着采用轨道开启指令，开启混合流传输轨道的视频流传输，以及采用轨道中断指令，中断第一下行视频传输轨道的视频流传输，然后服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过第一上行视频传输轨道接收客户端发送的上行视频流，以及通过混合流传输轨道传输向客户端发送下行音视频流。
在另一种示例中，假设客户端当前处于双人视频通信模式，则当客户端切换至桌面通信模式时，服务端可以接收客户端发送的模式切换请求，接着对客户端的身份进行识别，若客户端为桌面通信模式中的主讲客户端，则服务端采用轨道开启指令、桌面流轨道标识以及上行传输方向标识，在多媒体传输链路中建立与桌面通信模式匹配的上行桌面流传输轨道，以及采用轨道中断指令，中断第一上行视频传输轨道的上行视频流传输，与第一下行视频传输轨道的下行视频流传输，在数据传输轨道配置完成后，服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过上行桌面流传输轨道接收客户端发送的桌面数据流，通过混合流传输轨道向客户端发送下行音频流。此外，若所述客户端为所述桌面通信模式的参与客户端，则所述服务端可以采用所述轨道开启指令与所述桌面流轨道标识，在所述多媒体传输链路中建立与所述桌面通信模式匹配的下行桌面流传输轨道，以及开启所述混合流传输轨道的视频流传输，采用所述轨道中断指令，中断所述第一下行传输轨道的下行视频流传输，在数据传输轨道配置完成后，服务端可以通过所述第一上行音频传输轨道接收所述客户端发送上行音频流，通过所述第一上行视频传输轨道接收所述客户端发送的上行视频流，通过所述混合流传输轨道向所述客户端发送下行音视频流，通过所述下行桌面流传输轨道向所述客户端发送下行桌面流。
在另一种示例中，假设客户端当前处于桌面通信模式，且客户端为主讲客户端，则当客户端切换至双人视频通信模式时，服务端可以接收客户端发送的模式切换请求，接着采用轨道开启指令、视频轨道标识以及上行传输方向标识，在多媒体传输链路中建立与第一视频通信模式对应的第二上行视频传输轨道，采用轨道开启指令、视频轨道标识以及下行传输方向标识，在多媒体传输链路中建立与第一视频通信模式对应的第二下行视频传输轨道，采用轨道中断指令，中断上行桌面流传输轨道的桌面流传输，在数据传输轨道配置完成后，服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过第二上行视频传输轨道接收客户端发送上行视频流，通过混合流传输轨道向客户端发送下行音频流，通过第二下行视频传输轨道向客户端发送下行视频流。当客户端切换至三人或三人以上视频通信模式时，则服务端采用轨道开启指令，开启混合流传输轨道的视频流传输，接着采用轨道开启指令、视频轨道标识以及上行传输方向标识，在多媒体传输链路中建立与第二视频通信模式匹配的第二上行视频传输轨道，以及服务端采用轨道中断指令，终端上行桌面流传输轨道的上行桌面流传输，在数据传输轨道配置完成后，服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过第二上行视频传输轨道接收客户端发送上行视频流，通过混合流传输轨道向客户端发送音视频流。
在另一种示例中，假设客户端处于桌面通信模式，且客户端为参与客户端，则当客户端切换至双人视频通信模式时，服务端在接收到客户端发送的模式切换请求后，可以采用轨道开启指令、视频轨道标识以及下行传输方向标识，在多媒体传输链路中建立与第一视频通信模式对应的第二下行视频流传输轨道，以及采用轨道中断指令，中断下行桌面流传输轨道的桌面流传输，中断混合流传输轨道的视频流传输，在数据传输轨道配置完成后，服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过第一上行视频传输轨道接收客户端发送的上行视频流，通过混合流传输轨道向客户端发送下行音频流，通过第二下行视频流传输轨道向客户端发送下行视频流。当客户端切换至三人或三人以上视频通信模式时，服务端可以采用轨道中断指令，中断下行桌面流传输轨道的桌面流传输，在数据传输轨道配置完成后，服务端可以通过第一上行音频传输轨道接收客户端发送的上行音频流，通过第一上行视频传输轨道接收客户端发送的上行视频流，通过混合流传输轨道向客户端发送音视频流。
其中，在桌面通信模式下，同一身份的客户端在双人桌面通信模式与多人(大于或等于三人)桌面通信模式之间进行切换时，客户端与服务端之间的数据传输轨道保持不变，若客户端发生身份的转变时，如参与客户端转换为主讲客户端，或主讲客户端转换为参与客户端时，则发生对应的数据传输轨道的变化，相关过程可以参考上述示例，在此不再赘述。
需要说明的是，本发明实施例以本地终端发起模式切换请求，服务端进行相应的数据传输轨道处理为例进行示例性说明，可以理解的是，对端终端同样可以发起模式切换请求，或根据本地终端的请求，执行对应的数据传输轨道处理，本发明对此不作限制。
在本发明实施例中，适用于通信系统，在该通信系统中可以包括客户端与服务端，其中，在通信的过程中，客户端与服务端之间可以建立有多媒体传输链路，且该多媒体传输链路中包括若干条数据传输轨道，则在通信的过程中，当通信的用户触发模式切换操作时，客户端可以生成对应的模式切换请求，服务端获取与模式切换请求对应的目标通信模式，以及与目标通信模式对应的目标轨道信息，目标轨道信息中可以包括与目标通信模式对应的目标轨道标识以及目标轨道标识对应的目标轨道状态，然后服务端将多媒体传输链路中与目标轨道标识对应的数据传输轨道调整为目标轨道状态，从而在保持多媒体传输链路的情况下，调整数据传输轨道的轨道状态以执行与通信模式对应的数据传输，避免服务端与客户端之间反复建立、断开通信链路，有效降低了系统负担，减少服务端的资源消耗。
图6是本发明实施例提供的一种通信的处理方法的步骤流程图，应用于服务端，所述服务端与预设客户端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干个调数据传输轨道，如图6所示，该方法可以包括：
步骤601，获取目标客户端发送的模式切换请求；
步骤602，确定与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
步骤603，将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，所述将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态，包括：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，还包括：
获取目标客户端发送的终端通信请求；
确定与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
建立与所述目标客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
在一种可选实施例中，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态，包括：
在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
在一种可选实施例中，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态，包括：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
在本发明实施例中，在通信的过程中，客户端与服务端之间可以建立有多媒体传输链路，且该多媒体传输链路中包括若干条数据传输轨道，则在通信的过程中，当通信的用户触发模式切换操作时，客户端可以生成对应的模式切换请求，服务端获取与模式切换请求对应的目标通信模式，以及与目标通信模式对应的目标轨道信息，目标轨道信息中可以包括与目标通信模式对应的目标轨道标识以及目标轨道标识对应的目标轨道状态，然后服务端将多媒体传输链路中与目标轨道标识对应的数据传输轨道调整为目标轨道状态，从而在保持多媒体传输链路的情况下，调整数据传输轨道的轨道状态以执行与通信模式对应的数据传输，避免服务端与客户端之间反复建立、断开通信链路，有效降低了系统负担，减少服务端的资源消耗。
图7是本发明实施例提供的一种通信的处理方法的步骤流程图，应用于客户端，所述客户端与预设服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，如图7所示，该方法可以包括：
步骤701，响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端，所述服务端用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态，并将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
在一种可选实施例，所述方法还包括：
响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端，所述服务端用于获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态，并建立与所述客户端之间的所述多媒体传输链路，在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
在本发明实施例中，在通信的过程中，客户端与服务端之间可以建立有多媒体传输链路，且该多媒体传输链路中包括若干条数据传输轨道，则在通信的过程中，当通信的用户触发模式切换操作时，客户端可以生成对应的模式切换请求，服务端获取与模式切换请求对应的目标通信模式，以及与目标通信模式对应的目标轨道信息，目标轨道信息中可以包括与目标通信模式对应的目标轨道标识以及目标轨道标识对应的目标轨道状态，然后服务端将多媒体传输链路中与目标轨道标识对应的数据传输轨道调整为目标轨道状态，从而在保持多媒体传输链路的情况下，调整数据传输轨道的轨道状态以执行与通信模式对应的数据传输，避免服务端与客户端之间反复建立、断开通信链路，有效降低了系统负担，减少服务端的资源消耗。
图8是本发明实施例提供的一种通信的处理装置的框图，如图6所示，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，该装置可以包括：
位于所述客户端的模式切换模块801，用于响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
位于所述服务端的目标轨道信息获取模块802，用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
位于所述服务端的轨道调整模块803，用于将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述轨道调整模块803具体用于：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则所述服务端在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
所述服务端将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述轨道调整模块803具体用于：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，所述轨道调整模块803具体用于：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则所述服务端将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则所述服务端将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，还包括：
位于所述客户端的通信请求模块，用于响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端；
位于所述服务端的初始轨道信息获取模块，用于获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
位于所述服务端的通信链路建立模块，用于建立与所述客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
在一种可选实施例中，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述通信链路建立模块具体用于：
所述服务端在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
在一种可选实施例中，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述通信链路建立模块具体用于：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
综上所述，本发明实施例的技术效果为在保持服务端与客户端之间通信连接的情况下，通过数据传输轨道进行数据传输，避免服务端与客户端之间反复建立连接、断开连接，有效降低了服务端的系统负担，同时通过通信指令控制数据传输轨道的数据传输，可以减少宽带消耗，提高资源利用率。
对于上述装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
另外，本发明实施例还提供一种电子设备，如图9所示，包括处理器901、通信接口902、存储器903和通信总线904，其中，处理器901，通信接口902，存储器903通过通信总线904完成相互间的通信，
存储器903，用于存放计算机程序；
处理器901，用于执行存储器903上所存放的程序时，实现如下步骤：
响应于模式切换操作，确定与所述模式切换操作对应的模式切换请求；
获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态，包括：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
在一种可选实施例中，还包括：
响应于终端通信操作，确定与所述终端通信操作对应的终端通信请求；
获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
建立与之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
在一种可选实施例中，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态，包括：
在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
在一种可选实施例中，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态，包括：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的内容的预测方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的内容的预测方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (12)

1.一种通信的处理方法，其特征在于，所述方法适用于通信系统，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述方法包括：
所述客户端响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
所述服务端获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
2.根据权利要求1所述的方法，其特征在于，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道不存在于所述多媒体传输链路中，则所述服务端在所述多媒体传输链路中建立所述目标轨道标识对应的目标数据传输轨道，并将所述目标数据传输轨道调整为媒体流传输状态；
所述服务端将所述多媒体传输链路中除所述目标数据传输轨道之外的其他数据传输轨道调整为媒体流传输状态或媒体流中断状态。
3.根据权利要求1所述的方法，其特征在于，所述目标轨道状态包括媒体流传输状态以及媒体流中断状态，所述服务端将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态，包括：
若所述目标轨道标识所对应的数据传输轨道存在于所述多媒体传输链路中，则所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态。
4.根据权利要求3所述的方法，其特征在于，所述服务端将所述数据传输轨道调整为媒体流传输状态或媒体流中断状态，包括：
若所述目标轨道标识表征数据传输轨道为单媒体流传输轨道，则所述服务端将所述单媒体流传输轨道调整为媒体流传输状态或媒体流中断状态；
若所述目标轨道标识表征数据传输轨道为混合流传输轨道，则所述服务端将所述混合流传输轨道中与所述目标通信模式对应的至少一路数据流调整为媒体流传输状态或媒体流中断状态。
5.根据权利要求1所述的方法，其特征在于，还包括：
所述客户端响应于终端通信操作，将与所述终端通信操作对应的终端通信请求发送至所述服务端；
所述服务端获取与所述终端通信请求对应的初始通信模式，以及所述初始通信模式对应的初始轨道信息，所述初始轨道信息包括与所述初始通信模式对应的初始轨道标识以及所述初始轨道标识对应的初始轨道状态；
所述服务端建立与所述客户端之间的所述多媒体传输链路，并在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态。
6.根据权利要求5所述的方法，其特征在于，所述当前轨道信息至少包括与所述初始轨道状态对应的传输方向标识，所述在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，以及将所述数据传输轨道调整所述初始轨道状态，包括：
所述服务端在所述多媒体传输链路中建立与所述初始轨道标识对应的数据传输轨道，并采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态。
7.根据权利要求6所述的方法，其特征在于，所述初始轨道状态包括媒体流传输状态和媒体流中断状态，所述采用所述传输方向标识将所述数据传输轨道调整为所述初始轨道状态，包括：
若所述初始轨道标识表征数据传输轨道为单媒体流传输轨道，则采用所述传输方向标识将所述单媒体流传输轨道调整为媒体流传输状态；
若所述初始轨道标识表征数据传输轨道为混合流传输轨道，则采用所述传输方向标识将所述混合流传输轨道中与所述初始通信模式对应的至少一路数据流调整为媒体流传输状态，并将其余数据流调整为媒体流中断状态。
8.一种通信的处理方法，其特征在于，应用于服务端，所述服务端与预设客户端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干个调数据传输轨道，所述方法包括：
获取目标客户端发送的模式切换请求；
确定与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
9.一种通信的处理方法，其特征在于，应用于客户端，所述客户端与预设服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述方法包括：
响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端，所述服务端用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态，并将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
10.一种通信系统，其特征在于，所述通信系统包含客户端与服务端，所述客户端与所述服务端之间建立有多媒体传输链路，所述多媒体传输链路中包括若干条数据传输轨道，所述系统包括：
位于所述客户端的模式切换模块，用于响应于模式切换操作，将与所述模式切换操作对应的模式切换请求发送至所述服务端；
位于所述服务端的目标轨道信息获取模块，用于获取与所述模式切换请求对应的目标通信模式，以及与所述目标通信模式对应的目标轨道信息，所述目标轨道信息包括与所述目标通信模式对应的目标轨道标识以及所述目标轨道标识对应的目标轨道状态；
位于所述服务端的轨道调整模块，用于将所述多媒体传输链路中与所述目标轨道标识对应的数据传输轨道调整为目标轨道状态。
11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行存储器上所存放的程序时，实现如权利要求1至9任一项所述的方法步骤。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至10中任一所述的通信的处理方法。
CN202210405218.XA 2022-04-18 2022-04-18 通信的处理方法、系统、电子设备及存储介质 Active CN114866520B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210405218.XA CN114866520B (zh) 2022-04-18 2022-04-18 通信的处理方法、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210405218.XA CN114866520B (zh) 2022-04-18 2022-04-18 通信的处理方法、系统、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114866520A true CN114866520A (zh) 2022-08-05
CN114866520B CN114866520B (zh) 2024-01-30

Family

ID=82631274

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210405218.XA Active CN114866520B (zh) 2022-04-18 2022-04-18 通信的处理方法、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114866520B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070220573A1 (en) * 2006-03-20 2007-09-20 Chiussi Fabio M Unicasting and multicasting multimedia services
US20080075031A1 (en) * 2006-09-26 2008-03-27 Ohayon Rony Haim Remote transmission system
CN101742437A (zh) * 2009-12-11 2010-06-16 中兴通讯股份有限公司 移动视频的通信方法及服务端、服务器
US9451003B1 (en) * 2008-09-22 2016-09-20 Sprint Spectrum L.P. Method and system for advanced notification of availability of fast content switching
CN106549978A (zh) * 2016-12-19 2017-03-29 东软集团股份有限公司 一种会话模式切换方法及代理服务器
WO2019218474A1 (zh) * 2018-05-14 2019-11-21 平安科技（深圳）有限公司 一种视频通话服务的响应方法及系统
US10893087B1 (en) * 2019-09-21 2021-01-12 Mass Luminosity, Inc. Streaming and nonstreaming media transfer between devices
CN112929371A (zh) * 2021-02-08 2021-06-08 北京奇艺世纪科技有限公司 会话处理方法、装置、系统、电子设备及介质
CN113132376A (zh) * 2021-04-14 2021-07-16 腾讯科技（深圳）有限公司 媒体数据处理方法及装置、系统、电子设备和存储介质
CA3169090A1 (en) * 2020-02-24 2021-09-02 Jiaxi XIAHOU Interaction method and apparatus, and electronic device
CN114007036A (zh) * 2021-12-29 2022-02-01 广东睿江云计算股份有限公司 一种按需加载媒体流的通信方法以及通信系统
US20220094725A1 (en) * 2018-09-12 2022-03-24 Samsung Electronics Co., Ltd. Method and apparatus for controlling streaming of multimedia data in a network

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070220573A1 (en) * 2006-03-20 2007-09-20 Chiussi Fabio M Unicasting and multicasting multimedia services
US20080075031A1 (en) * 2006-09-26 2008-03-27 Ohayon Rony Haim Remote transmission system
US9451003B1 (en) * 2008-09-22 2016-09-20 Sprint Spectrum L.P. Method and system for advanced notification of availability of fast content switching
CN101742437A (zh) * 2009-12-11 2010-06-16 中兴通讯股份有限公司 移动视频的通信方法及服务端、服务器
CN106549978A (zh) * 2016-12-19 2017-03-29 东软集团股份有限公司 一种会话模式切换方法及代理服务器
WO2019218474A1 (zh) * 2018-05-14 2019-11-21 平安科技（深圳）有限公司 一种视频通话服务的响应方法及系统
US20220094725A1 (en) * 2018-09-12 2022-03-24 Samsung Electronics Co., Ltd. Method and apparatus for controlling streaming of multimedia data in a network
US10893087B1 (en) * 2019-09-21 2021-01-12 Mass Luminosity, Inc. Streaming and nonstreaming media transfer between devices
CA3169090A1 (en) * 2020-02-24 2021-09-02 Jiaxi XIAHOU Interaction method and apparatus, and electronic device
CN112929371A (zh) * 2021-02-08 2021-06-08 北京奇艺世纪科技有限公司 会话处理方法、装置、系统、电子设备及介质
CN113132376A (zh) * 2021-04-14 2021-07-16 腾讯科技（深圳）有限公司 媒体数据处理方法及装置、系统、电子设备和存储介质
CN114007036A (zh) * 2021-12-29 2022-02-01 广东睿江云计算股份有限公司 一种按需加载媒体流的通信方法以及通信系统

Also Published As

Publication number Publication date
CN114866520B (zh) 2024-01-30

Similar Documents

Publication Publication Date Title
US6453336B1 (en) Video conferencing with adaptive client-controlled resource utilization
JP5903533B1 (ja) マルチユーザー無線ドッキング
JP6389573B2 (ja) データ送信方法及びシステム並びに関連装置
KR20140098573A (ko) 영상 회의 서비스 제공 장치 및 방법
CN112929595B (zh) 一种网络会议融合系统及方法
CN112968898A (zh) 用于针对通信会话的端点控制的方法和系统
WO2013089423A1 (en) System, apparatus and method for utilizing a multimedia service
CN111131759B (zh) 一种实时多媒体传输系统及其使用方法
US9264662B2 (en) Chat preauthorization
US9013537B2 (en) Method, device, and network systems for controlling multiple auxiliary streams
US20200329083A1 (en) Video conference transmission method and apparatus, and mcu
US9936164B2 (en) Media control method and device
CN114866520B (zh) 通信的处理方法、系统、电子设备及存储介质
CN115379279B (zh) 多屏联动的交互方法及装置、系统、存储介质、电子设备
US20190098351A1 (en) Method for managing the access right to an item of digital content
US10250402B2 (en) Communication method and storage medium storing communication program
CN113259618B (zh) 一种音视频会话方法、装置、第一终端和会话服务器
CN113726534A (zh) 会议控制方法、装置、电子设备及存储介质
CN112929371A (zh) 会话处理方法、装置、系统、电子设备及介质
CN114079828A (zh) 流媒体数据的处理方法以及装置
US11444821B2 (en) Method for conducting an audio and/or video conference
CN115695387B (zh) 音视频会议实现方法、音视频会议系统及相关装置
CN116938897B (zh) 一种用于会议的实时通信的方法和装置
EP4322501A1 (en) Audio in audio-visual conferencing service calls
CN113347472A (zh) 音视频质量调节方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant