CN108881783A - 实现多人会话的方法和装置、计算机设备和存储介质 - Google Patents

Abstract

本发明提供一种实现多人会话的方法和装置、计算机设备和存储介质，该方法包括：基于终端发送的多人会话请求创建多人会话；接收多人会话的各成员标识对应的终端采集的音频数据，音频数据包括各终端对应的成员标识；对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据；将各成员标识对应的混音数据发送至该成员标识对应的终端。从而终端只需要接收一路由服务器端混音处理后的音频数据，无需分别接收服务器分发的各路其它终端的音频数据，降低了终端与服务器端的数据交互频次，节省了带宽和流量。

Description

实现多人会话的方法和装置、计算机设备和存储介质

技术领域

本发明涉及即时通信技术领域，特别是涉及一种实现多人会话的方法和装置、计算机设备和存储介质。

背景技术

多媒体信息技术和网络技术的发展，使人们之间的交流方式不再局限于语音和文字，产生了新的交流方式，例如基于终端进行的多人会话，应用较为广泛的为多人网络会议，网络会议的形式可以为视频会议或语音会议。

在基于终端进行多人网络会议时，由各终端采集语音信息，并通过服务器分发给参与会议的其它用户的终端。而由于涉及多人之间的语音，各终端需要同时播放其它终端采集的语音信息，因此终端在播放前，需要接收其它终端的音频数据，并将接收到的各路音频数据进行混音处理。终端通常自带有硬件混音，若无硬件混音可进行软件混音。而终端接受其它终端的多路音频数据需要占用较多的带宽和流量。

发明内容

基于此，有必要针对在多人会话时终端接收多路语音信息导致占用较多带宽和流量的问题，提供一种节省带宽和流量的实现多人会话的方法和装置、计算机设备和存储介质。

为达到上述目的，一个实施例采用以下技术方案：

一种实现多人会话的方法，包括：

基于终端发送的多人会话请求创建多人会话；

接收所述多人会话的各成员标识对应的终端采集的音频数据，所述音频数据包括各终端对应的成员标识；

对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据；

将各成员标识对应的混音数据发送至该成员标识对应的终端。

一种实现多人会话的装置，包括：信令模块、数据接收模块、混音模块和分发模块；

所述信令模块，用于基于终端发送的多人会话请求创建多人会话；

所述数据接收模块，用于接收所述多人会话的各成员标识对应的终端采集的音频数据，所述音频数据包括各终端对应的成员标识；

所述混音模块，用于对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据；

所述分发模块，用于将各成员标识对应的混音数据发送至该成员标识对应的终端。

一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述权利要求中所述的实现多人会话的方法。

一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述权利要求所述的实现多人会话的方法

上述的实现多人会话的方法和装置、计算机设备和存储介质，基于终端的多人会话请求时建立多人会话，通过接收各终端采集的音频数据，对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据，将各成员标识对应的混音数据发送至该成员对应的终端。各成员标识对应的混音数据包括多人会话中除该成员之外对应的所有终端的音频数据，从而终端只需要接收一路由服务器端混音处理后的音频数据，无需分别接收服务器分发的各路其它终端的音频数据，降低了终端与服务器端的数据交互频次，节省了带宽和流量。

附图说明

图1为一个实施例的实现多人会话的方法和装置的应用环境示意图；

图2为一个实施例的服务器的内部结构示意图；

图3为一个实施例的实现多人会话的方法的流程图；

图4为一个实施例的安装了即时通信应用程序的终端的操作界面示意图；

图5为一个实施例的对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据的步骤的流程图；

图6为一个实施例的混音处理过程的示意图；

图7为一个实施例的基于终端发送的多人会话请求创建多人会话的步骤的流程图；

图8为一个实施例的终端在会话过程中的显示界面示意图；

图9为另一个实施例的实现多人会话的方法的流程图；

图10为再一个实施例的实现多人会话的方法的流程图；

图11为一个实施例的实现多人会话的方法的时序图；

图12为一个实施例的实现多人会话的装置的结构框图；

图13为另一个实施例的实现多人会话的装置的结构框图。

具体实施方式

为使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步的详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不限定本发明的保护范围。

图1为一个实施例提供的实现多人会话的方法和装置的应用环境示意图。如图1所示，该应用环境包括多个用户终端101和服务器103，多个用户终端101分别与服务器103通信连接。其中一个用户终端101发起多人会话邀请，由服务器103将多人会话邀请发送至其它的用户终101。其它用户终端101接受多人会话邀请后，开始多人会话。各用户终端101采集音视频信息，通过服务器103将音视频信息分发至参与多人会话的其它用户终端。用户终端101可以为智能手机、平板电脑、笔记本电脑、台式计算机等，但并不局限于此。

图2为一个实施例中的服务器的内部结构示意图。如图2所示，服务器包括通过系统总线连接的处理器、存储介质、内存和网络接口。其中，该处理器用于提供计算和控制能力，支撑整个用户终端的运行。服务器的存储介质存储有操作系统以及一种实现多人会话的装置的计算机程序，该实现多人会话装置的计算机程序被处理器执行时，用于实现一种实现多人会话的方法。服务器中的内存为存储介质中的实现多人会话的装置的运行提供环境，网络接口用于与用户终端进行网络通信，例如，接收用户终端的音视频数据，将接收的音视频数据分发给其它用户终端等。

请参照图3，在一个实施例中，提供一种实现多人会话的方法，该方法运行在如图1所示的服务器103上，该方法包括以下步骤S302至S306。

S302：基于终端发送的多人会话请求创建多人会话。

终端的应用程序提供有多人会话功能选择，用户通过操作触发该多人会话功能选项，终端响应多人会话的操作指令发起多人会话请求。该应用程序可以是即时通信应用程序，也可以是网络会议应用程序。

图4为一个实施例的安装了即时通信应用程序的终端的操作界面示意图。终端的操作界面提供多人会话功能选项。多人会话功能选项包括语音功能选项和视频功能选项，即可以基于用户点击语音功能图标和视频功能图标发起有多人会话请求。进一步地，多人会话的操作可以基于群组聊天界面进行，向群组中的成员发送多人会话邀请。也可以基于应用程序的主界面进行，终端在接收到多人会话的操作指令后，显示好友列表供用户选择，并向用户所选择的好友发送多人会话邀请。

终端响应用户的多人会话的操作指令后，向服务器发送多人会话请求。服务器基于终端发送的多人会话请求创建多人会话。具体地多人会话为虚拟房间，在创建会话房间后，为会话房间分配唯一的房间标识。

S304：接收多人会话的各成员标识对应的终端采集的音频数据，音频数据包括各终端对应的成员标识。

多人会话的各成员标识可以为多人会话的各成员在系统上的用户ID，也可以基于房间标识分别为多人会话的每一成员分配的成员标识，建立成员标识与用户ID的对应关系。用户在终端登录后，用户ID和终端对应。成员标识对应的终端即用该成员标识进行登录的终端。

终端对应的成员标识即为用户ID在该终端成功接入服务器后，各终端开启终端的音频设备，调用终端的音频设备采集音频数据。进一步地，终端将采集的音频数据进行编码，并将编码后的音频数据发送至服务器，终端的音频数据包括各终端对应的成员标识。

S306：对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

混音处理是将多路音频数据叠加为一路数据，具体是指对多人会话的各成员标识，将服务器接收到的多路来自会议房间内其它成员标识对应的终端的音频数据混音处理成为一个音频数据包。从而终端无需分别接收服务器分发的各路其它终端的音频数据，降低了终端与服务器端的数据交互频次，节省了带宽和流量。

进一步地，服务器在接收各终端发送的音频数据后，先对音频数据进行解码处理，然后对解码后的音频数据进行混音处理，最后对混音处理后的音频数据再次进行编码以便于网络传输。

每一成员标识对应的混音数据，包括多人会话中除该成员标识之外其它成员标识对应的终端的音频数据。以多人会话的成员为三个为例进行说明，分别为：第一成员、第二成员和第三成员，分别对应第一成员标识、第二成员标识和第三成员标识。服务器通过对第二成员标识对应的终端的音频数据和第三成员标识对应的终端的音频数据进行混音处理，得到第一成员标识对应的混音数据。服务器通过对第一成员标识对应的终端的音频数据和第三成员标识对应的终端的音频数据进行混音处理，得到第二成员标识对应的混音数据。服务器通过对第一成员对应的终端的音频数据和第二成员标识对应的终端的音频数据进行混音处理，得到第三成员标识对应的混音数据。混音数据不包括该成员标识自身对应的终端的音频数据，避免在终端播放时产生用户声音的回响，影响用户体验。

S308：将各成员标识对应的混音数据发送至该成员标识对应的终端。

分别将每一成员标识对应的混音数据发送至该成员标识对应的终端，以在终端进行播放。可以理解的是，终端在播放前，对混音数据进行解码处理。

上述的实现多人会话的方法，基于终端的多人会话请求建立多人会话，通过接收各终端采集的音频数据，对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据，并将各成员标识对应的混音数据发送至该成员对应的终端。各成员标识对应的混音数据包括多人会话中除该成员之外对应的所有终端的音频数据，从而终端只需要接收一路由服务器端混音处理后的音频数据，无需分别接收服务器分发的各路其它终端的音频数据，降低了终端与服务器端的数据交互频次，节省了带宽和流量。

图5为一个实施例的对各终端的音频数据进行混音处理，生成多人会话的各成员标识对应的混音数据的步骤的流程图，图6为一个实施例的混音处理过程的示意图。如图5和图6所示，步骤S306包括：

S3062：根据多人会话标识和成员标识，确定多人会话的各成员标识的缓存通道。

多人会话标识可以为会话房间的房间标识。服务器为多人会话的的每一成员标识对应的终端维护一个缓存通道，用于缓存多人会话的除该成员标识之外的其它成员标识对应的终端的音频数据。

S3064：将各成员标识对应的终端的音频数据，存储在多人会话人成员中除该成员标识之外的其它成员标识的缓存通道中。

具体地，多人会话的成员数量为N，则服务器接收该多人会话各成员标识对应的终端发送的N路音频数据，服务器为该会员成员标识对应的终端维护有N个缓存通道。

其中，第一成员标识的缓存通道，用于存储除第一成员标识外其它成员标识对应的终端发送的音频数据。

第二成员标识的缓存通道，用于存储除第二成员标识外其它成员标识对应的终端发送的音频数据。

第三成员标识的缓存通道，用于存储除第三成员标识外其它成员标识对应的终端发送的音频数据。

依此类推。

第N成员标识的缓存通道，用于存储除第N成员标识外其它成员标识对应的终端发送的音频数据。

S3066：以设定的时间间隔从各成员标识的缓存通道中提取音频数据。

设定的时间间隔为采集频率，根据设定的采集频率从缓存通道中摘取音频数据。

S3068：对多人会话的各成员标识，分别将从除该成员标识之外的其它成员标识的缓存通道中提取的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

具体地，第一成员标识对应的混音数据包括会话房间内除第一成员标识外的其它成员标识对应的终端的音频数据，即第二成员标识至第N成员标识对应的终端的音频数据。依此类推，第N成员标识对应的混音数据包括第一成员标识至第N-1成员标识对应的终端的音频数据。

本实施例中，通过为每一成员标识维持有缓存通道，在接收到各终端的音频数据时，分别将各成员标识对应的终端的音频数据，存储在多人会话中除该成员标识之外的其它成员标识的缓存通道中，在进行混音处理时，从各通道中按照设置的采样频率从各通道中提取音频数据，从而提高混音处理的效率。

图7为一个实施例的基于终端发送的多人会话请求创建多人会话的步骤的流程图。如图7所示，步骤S102包括以下步骤：

S1022：当接收到发起方终端响应多人会话的操作指令发送的会话邀请时，建立多人会话。会话邀请包括发起方标识和第一邀请对象标识。

具体地，终端的应用程序提供有多人会话功能选择，用户通过操作触发该多人会话功能选项，终端响应多人会话的操作指令发起多人会话请求。

终端的操作界面提供多人会话功能选项。多人会话功能选项包括语音功能选项和视频功能选项，即可以基于用户点击语音功能图标和视频功能图标发起有多人会话请求。进一步地，多人会话的操作可以基于群组聊天界面进行，向群组中的成员发送多人会话邀请，则第一邀请对象标识包括群组中所有成员的用户标识。第一邀请对象也可以为群组标识，服务器根据群组标识和发起方标识查找对应群组的全部成员，获取群组的全部成员的用户标识。还可以在基于群组聊天界面进行多人会话的操作时，显示群组成员列表，获取发起方所选择的群组成员，则第一邀请对象标识包括所选择的群组成员的用户标识。还可以基于应用程序的主界面进行，终端在接收到多人会话的操作指令后，显示好友列表供用户选择，并向用户所选择的好友发送多人会话邀请，则第一邀请对象标识包括所选择的好友的用户标识。

终端响应用户的多人会话的操作指令后，向服务器发送多人会话请求。服务器基于终端发送的多人会话请求创建多人会话。多人会话为虚拟房间，在创建多人会话后，为会话房间分配唯一的房间标识。

S1024：将发起方标识添加至多人会话。接受方终端为第一邀请对象标识对应的终端。

S1026：向接受方终端发送会话邀请。

S1028：当接收到接受方终端响应会话邀请发送的应答指令时，将第一邀请对象标识添加至多人会话，成员标识包括发起方标识和第一邀请对象标识。

接受方终端在接收到会话邀请后，在终端的显示界面提供应答和拒绝选项。用户通过触发对应的功能选项接受邀请或拒绝邀请。应答选项对应接受该会话邀请，拒绝选项对应拒绝该会话邀请。在接收到接受方终端响应会话邀请发送的应答指令时，将该终端对应的对象标识添加至多人会话。可以理解的是，在多人会话结束前，接受方终端都可以对会话邀请进行应答。

在另一个实施例中，在步骤S102之后，还包括：建立与多人会话的各成员标识对应的各终端间的数据传输通道。

步骤S104包括：通过数据传输通道接收各终端采集的音频数据。

本实施例中，在客户端选择加入多人会话后，与服务器基于UDP(User DatagramProtocol，用户数据报协议)数据建立数据传输通道，即客户端与服务器之间基于数据传输通道收发音频数据。本实施例中，消息收发的信令数据通过TCP(传输控制协议)通道进行传输。

在另一个实施例，该方法还包括以下步骤S1和S2：

S1：接收各成员标识对应的终端采集的视频数据，视频数据包括各终端对应的成员标识。

在服务器与客户端连接，建立UDP数据传输通道后，终端根据多人会话的类型开启音频设备和/或视频设备。例如，若多人会话的类型为语音会话，则开启音频设备，若多人会话的类型为视频会话，则开启音频设备和视频设备。各终端对采集的音频数据进行编码压缩处理后，通过数据传输通道发送至服务器。

终端在多人会话的过程中可切换多人会话的类型。如图8所示，在与服务器连接进入多人会话后，根据终端的切换操作，例如，切换至语音会话，或切换至视频会话。终端响应切换操作，启动或关闭视频设备。

S2：分别将各终端的视频数据分发给多人会话中除该成员标识之外的其它成员标识对应的终端。

服务器在接收到终端的视频数据后进行分发，将接收到的视频数据发给多人会话的其它成员标识对应的终端。终端在接收到服务器分发的其它成员标识对应的终端后，对接收到的视频数据进行解码处理后，如图8所示，终端显示多人会话的所有成员的视频画面。

在另一个实施例中，服务器还对多人会话的成员进行管理，包括对多人会话的成员退出多人会话进行管理，对多人会话的新增成员进行管理。

具体地，如图9所示，一种实现多人会话的方法，还包括

S902：接收终端响应退出会话的操作指令发送的退出请求；退出请求携带有发送退出请求的终端对应的成员标识。

参与多人会话的各终端在会话过程中可退出多人会话。具体地，终端提供挂断会话的功能选项。当用户触摸该挂断会话的功能选项后，终端响应退出会话的操作指令发送退出请求至服务器，退出请求携带有对应的成员标识。终端在触发挂断会话的功能选项后，退出多人会话。

S904：根据退出请求，将发送退出请求的终端对应的成员标识从多人会话中删除。

服务器根据退出请求，将发送退出请求的终端对应的成员标识从房间内删除，断开与该成员标识对应的服务器的连接。

S906：向多人会话的各成员标识对应的终端发送刷新指令，由各终端根据刷新指令刷新会话成员列表，刷新指令包括删除的成员标识。

通过将包括删除的成员标识的刷新指令发送至多人会话的各成员标识对应的终端，能够将会话成员变化信息通知给当前多人会话的的其它成员，终端通过刷新会话成员列表显示最新成员列表。

在另一个实施例中，如图10所示，一种实现多人会议的方法，还包括：

S102：接收终端响应邀请操作指令发送的邀请请求，邀请请求包括第二邀请对象标识。

参与多人会话的各终端在会话过程中可邀请其它用户参与多人会话。具体地，终端提供会话邀请的功能选项。当用户触发该会话邀请的功能选项后，终端显示好友列表供用户选择。终端响应邀请操作指令发送邀请请求至服务器，邀请请求包括第二邀请对象标识。被邀请成员标识(第二邀请对象标识)对应的终端在接受该邀请后，加入多人会话。若被邀请成员标识对应的终端在设定的时间内未响应该会话邀请，则服务器与对应的客户端断开连接。

S104：将邀请请求发送至第二邀请对象标识对应的终端。

服务器在接收到邀请请求后，将邀请请求转发至第二邀请对象标识对应的终端。

S106：当接收到第二邀请对象标识对应的终端响应邀请请求发送的应答指令时，将第二邀请对象标识添加至多人会话。

第二邀请对象标识对应的终端在接收到邀请请求后，在终端的显示界面提供应答和拒绝选项，通过触发对应的功能选项接受邀请或拒绝邀请。应答选项对应接受该会话邀请，拒绝选项对应拒绝该会话邀请。服务器在接收到接受方终端响应会话邀请发送的应答指令时，将该终端对应的第二邀请对象标识添加至多人会话。可以理解的是，在多人会话结束前，接受方终端都可以对会话邀请进行应答。

S108：向多人会话的各成员标识对应的终端发送刷新指令，由各终端根据所述刷新指令刷新会话成员列表，刷新指令包括增加的成员标识。

通过将包括增加的成员标识的刷新指令发送至多人会话的各成员标识对应的终端，能够将会话成员变化信息通知给当前多人会话的的其它成员，终端通过刷新会话成员列表显示最新成员列表。

在具体的实施例中，信令服务和数据分发服务可根据实际需要部署在同一台服务器内，也可以分开部署，例如部署有信令服务器和数据服务器。信令服务器用于对服务器与客户端之间的信令数据进行分发，数据服务器用于对接收到的来自终端的音视频数据进行分发。一个实施例的实现多人会话的方法的时序图如图11所示，包括以下步骤：

S1：发起方终端(第一终端)响应多人会话的操作指令向服务器发送会话邀请，会话邀请包括发起方标识和第一邀请对象标识。

S2：信令服务器接收发起方终端的会话邀请，建立多人会话。

S3：信令服务器将发起方标识添加至多人会话。

S4：信令服务器向接受方终端(第二终端、……、第N终端)发送所述会话邀请；所述接受方终端为所述第一邀请对象标识对应的终端。

S5：信令服务器当接收到接受方终端响应所述会话邀请发送的应答指令时，将所述第一邀请对象标识添加至所述多人会话。

S6：数据服务器建立与所述多人会话的各成员标识对应的各终端间的数据传输通道。

S7：多人会话的各成员标识对应的终端启动音视频设备，采集音视频数据。

S8：各终端将采集的音视频数据进行编码压缩后发送至数据服务器。

S9：数据服务器对各终端的音频数据进行混音处理，生成所述多人会话的各成员标识对应的混音数据，各成员标识对应的混音数据包括所述多人会话中除该成员标识之外其它成员标识对应的终端的音频数据。

S10：数据服务器各成员标识对应的混音数据发送至该成员标识对应的终端。

S11：终端响应退出会话的操作指令发送退出请求至信令服务器。

S12：信令服务器接收退出请求，并根据所述退出请求，将所述成员标识从所述房间内删除。

S13：信令服务器将删除的所述成员标识发送至多人会话的各成员标识对应的终端。

S14：各终端刷新会话成员列表以显示最新会话成员列表。

图12为一个实施例的一种实现多人会话的装置的结构框图，如图12所示，一种实现多人会话的装置包括：信令模块121、数据接收模块122、混音模块123和分发模块124。

信令模块121，用于基于终端发送的多人会话请求创建多人会话。

数据接收模块122，用于接收多人会话的各成员标识对应的终端采集的音频数据，音频数据包括各终端对应的成员标识。

混音模块123，用于对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

分发模块124，用于将各成员标识对应的混音数据发送至该成员标识对应的终端。

上述的实现多人会话的装置，基于终端的多人会话请求时建立多人会话，通过接收各终端采集的音频数据，对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据，并将各成员标识对应的混音数据发送至该成员对应的终端。各成员标识对应的混音数据包括多人会话中除该成员之外对应的所有终端的音频数据，从而终端只需要接收一路由服务器端混音处理后的音频数据，无需分别接收服务器分发的各路其它终端的音频数据，降低了终端与服务器端的数据交互频次，节省了带宽和流量。

在另一个实施例中，音频数据还包括多人会话标识。图13为另一个实施例的一种实现多人会话的装置的结构框图。如图13所示，混音模块123包括：通道确定模块1231、存储模块1232、提取模块1233和混音处理模块1234。

通道确定模块1231，用于根据多人会话标识和成员标识，确定多人会话的各成员标识的缓存通道。

存储模块1232，用于将各成员标识对应的终端的音频数据，存储在多人会话中除该成员标识之外的其它成员标识的缓存通道中。

提取模块1233，用于以设定的时间间隔从各成员标识的缓存通道中提取音频数据。

混音处理模块1234，用于对多人会话的各成员标识，分别将从除该成员标识之外的其它成员标识的缓存通道中提取的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

请继续参阅图13，信令模块121包括：会话建立模块1211、信令处理模块1212、信令发送模块1213。

会话建立模块1211，用于当接收到发起方终端响应多人会话的操作指令发送的会话邀请时，建立多人会话；会话邀请包括发起方标识和第一邀请对象标识。

信令处理模块1212，用于将发起方标识添加至多人会话。

信令发送模块1213，用于向接受方终端发送会话邀请；接受方终端为第一邀请对象标识对应的终端。

信令处理模块1212，还用于当接收到接受方终端响应会话邀请发送的应答指令时，将第一邀请对象标识添加至多人会话，成员标识包括发起方标识和第一邀请对象标识。

在另一个实施例中，请继续参阅图13，一种实现多人会话的装置还包括传输通道建立模块125，用于建立与多人会话的各成员标识对应的各终端间的数据传输通道，通过数据传输通道接收各终端采集的音频数据。

在再一个实施例中，数据接收模块122，还用于接收各成员标识对应的终端采集的视频数据，视频数据包括各终端对应的成员标识。

分发模块124，还用于分别将各终端的视频数据分发给多人会话中除该成员标识之外的其它成员标识对应的终端。

请继续参与图13，信令模块还包括信令接收模块1214。信令接收模块1214，还用于接收成员标识对应的终端响应退出会话的操作指令发送的退出请求；退出请求携带有对应的成员标识。

信令处理模块1212，还用于根据退出请求，将成员标识从多人会话中删除。

信令发送模块1213，还用于将删除的成员标识发送至多人会话的各成员标识对应的终端，由各终端刷新会话成员列表。

在另一个实施例中，信令接收模块1214，还用于接收成员标识对应的终端响应邀请操作指令发送的邀请请求，邀请请求包括第二邀请对象标识。

信令发送模块1213，还用于将邀请请求发送至第二邀请对象标识对应的终端。

信令处理模块1212，还用于当接收到第二邀请对象标识对应的终端响应邀请请求发送的应答指令时，将第二邀请对象标识添加至多人会话。

信令发送模块1213，还用于将增加的成员标识发送至多人会话的各成员标识对应的终端，由各终端刷新会话成员列表。

为支持多种平台的应用，上述的实现多人会话的方法和系统可采用跨平台的方式开发。具体的，由于iOS/Android/Windows/macOS都支持C/C++实现，在开发过程对各种平台的终端的应用程序采用C/C++实现。

终端的基础逻辑管理，主要是实现即时通信应用所需要的一些基础逻辑，比如网络连接、消息收发、账号信息、数据存储等的管理。这些逻辑实现，也是多人会议实现的基础设施所需。

多人信令管理，主要是实现多人会议的房间、会话、通话状态、异常错误、数据上报等核心逻辑，以接口的方式暴露给接口适配层。

多人数据管理，主要是实现多人音视频数据的管理，包括音频数据编解码、视频数据编解码、数据通道管理等核心逻辑，同样以接口的方式暴露给接口适配层。

跨平台接口封装。主要是实现多人信令和数据部分，暴露的接口方式，主要有发起多人、加入多人、退出多人、发送音频/视频数据、状态变化等调用接口，以及收到多人邀请、音视频数据、成员变化、状态变化等回调接口。

在接口封装方式上，iOS/macOS平台主要以Obective C语言进行封装，Android平台以JNI的方式进行封装，Windows平台则直接以C++的方式封装。

基于如上所述的示例，在一个实施例中还提供一种计算机设备，该计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，处理器执行所述程序时实现如上述各实施例中的任意一种实现多人会话的方法。

一种存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如上述各实施例中的任意一种实现多人会话的方法。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性的计算机可读取存储介质中，如本发明实施例中，该程序可存储于计算机系统的存储介质中，并被该计算机系统中的至少一个处理器执行，以实现包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种实现多人会话的方法，其特征在于，包括：

基于终端发送的多人会话请求创建多人会话；

接收多人会话的各成员标识对应的终端采集的音频数据，所述音频数据包括各终端对应的成员标识；

对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据；

将各成员标识对应的混音数据发送至该成员标识对应的终端。

2.根据权利要求1所述的方法，其特征在于，所述音频数据还包括多人会话标识；对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据的步骤包括：

根据所述多人会话标识和所述成员标识，确定所述多人会话的各成员标识的缓存通道；

将各成员标识对应的终端的音频数据，存储在多人会话的成员中除该成员标识之外的其它成员标识的缓存通道中；

以设定的时间间隔从各成员标识的缓存通道中提取所述音频数据；

对多人会话的各成员标识，分别将从除该成员标识之外的其它成员标识的缓存通道中提取的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

3.根据权利要求1所述的方法，其特征在于：

所述基于终端发送的多人会话请求创建多人会话的步骤包括：

当接收到发起方终端响应多人会话的操作指令发送的会话邀请时，建立多人会话；所述会话邀请包括发起方标识和第一邀请对象标识；

将所述发起方标识添加至所述多人会话；

向接受方终端发送所述会话邀请；所述接受方终端为所述第一邀请对象标识对应的终端；

当接收到接受方终端响应所述会话邀请发送的应答指令时，将所述第一邀请对象标识添加至所述多人会话，所述成员标识包括所述发起方标识和所述第一邀请对象标识。

4.根据权利要求1所述的方法，其特征在于：

在所述基于终端发送的多人会话请求创建多人会话的步骤之后，还包括：建立与所述多人会话的各成员标识对应的各终端间的数据传输通道；

所述接收各终端采集的音频数据的步骤包括：通过所述数据传输通道接收各终端采集的音频数据。

5.根据权利要求1所述的方法，其特征在于，还包括：

接收各成员标识对应的终端采集的视频数据，所述视频数据包括各终端对应的成员标识；

分别将各终端的视频数据分发给所述多人会话中除该成员标识之外的其它成员标识对应的终端。

6.根据权利要求3所述的方法，其特征在于，还包括：

接收终端响应退出会话的操作指令发送的退出请求；所述退出请求携带有发送所述退出请求的终端对应的成员标识；

根据所述退出请求，将发送所述退出请求的终端对应的所述成员标识从所述多人会话中删除；

向所述多人会话的各成员标识对应的终端发送刷新指令，由各终端根据所述刷新指令刷新会话成员列表，所述刷新指令包括删除的所述成员标识；

或

接收终端响应邀请操作指令发送的邀请请求，所述邀请请求包括第二邀请对象标识；

将所述邀请请求发送至所述第二邀请对象标识对应的终端；

当接收到所述第二邀请对象标识对应的终端响应所述邀请请求发送的应答指令时，将所述第二邀请对象标识添加至所述多人会话；

向所述多人会话的各成员标识对应的终端发送刷新指令，由各终端根据所述刷新指令刷新会话成员列表，所述刷新指令包括增加的所述成员标识。

7.一种实现多人会话的装置，其特征在于，包括：信令模块、数据接收模块、混音模块和分发模块；

所述信令模块，用于基于终端发送的多人会话请求创建多人会话；

所述数据接收模块，用于接收多人会话的各成员标识对应的终端采集的音频数据，所述音频数据包括各终端对应的成员标识；

所述混音模块，用于对多人会话的各成员标识，分别将除该成员标识之外其它成员标识对应的终端的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据；

所述分发模块，用于将各成员标识对应的混音数据发送至该成员标识对应的终端。

8.根据权利要求7所述的装置，其特征在于，所述音频数据还包括多人会话标识；所述混音模块包括：通道确定模块、存储模块、提取模块和混音处理模块；

所述通道确定模块，用于根据所述多人会话标识和所述成员标识，确定所述多人会话的各成员标识的缓存通道；

所述存储模块，用于将各成员标识对应的终端的音频数据，存储在所述多人会话的成员中除该成员标识之外的其它成员标识的缓存通道中；

所述提取模块，用于以设定的时间间隔从各成员标识的缓存通道中提取所述音频数据；

所述混音处理模块，用于对多人会话的各成员标识，分别将从除该成员标识之外的其它成员标识的缓存通道中提取的音频数据进行混音处理成为一路混音数据，得到各成员标识对应的混音数据。

9.根据权利要求7所述的装置，其特征在于：

所述信令模块包括：会话建立模块会话建立模块、信令处理模块、信令发送模块；

所述会话建立模块，用于当接收到发起方终端响应多人会话的操作指令发送的会话邀请时，建立多人会话；所述会话邀请包括发起方标识和第一邀请对象标识；

所述信令处理模块，用于将所述发起方标识添加至所述多人会话；

所述信令发送模块，用于向接受方终端发送所述会话邀请；所述接受方终端为所述第一邀请对象标识对应的终端；

所述信令处理模块，还用于当接收到接受方终端响应所述会话邀请发送的应答指令时，将所述第一邀请对象标识添加至所述多人会话，所述成员标识包括所述发起方标识和所述第一邀请对象标识。

10.根据权利要求7所述的装置，其特征在于，还包括：传输通道建立模块，用于建立与所述多人会话的各成员标识对应的各终端间的数据传输通道，通过所述数据传输通道接收各终端采集的音频数据。

11.根据权利要求7所述的装置，其特征在于，

所述数据接收模块，还用于接收各成员标识对应的终端采集的视频数据，所述视频数据包括各终端对应的成员标识；

所述分发模块，还用于分别将各终端的视频数据分发给所述多人会话中除该成员标识之外的其它成员标识对应的终端。

12.根据权利要求9所述的装置，其特征在于，所述信令模块还包括信令接收模块；

所述信令接收模块，用于接收终端响应退出会话的操作指令发送的退出请求；所述退出请求携带有发送所述退出请求的终端对应的成员标识；

所述信令处理模块，还用于根据所述退出请求，将发送所述退出请求的终端对应的所述成员标识从所述多人会话中删除；

所述信令发送模块，还用于向所述多人会话的各成员标识对应的终端发送刷新指令，由各终端根据所述刷新指令刷新会话成员列表，所述刷新指令包括删除的所述成员标识；

或

所述信令接收模块，用于接收终端响应邀请操作指令发送的邀请请求，所述邀请请求包括第二邀请对象标识；

所述信令发送模块，还用于将所述邀请请求发送至所述第二邀请对象标识对应的终端；

所述信令处理模块，还用于当接收到所述第二邀请对象标识对应的终端响应所述邀请请求发送的应答指令时，将所述第二邀请对象标识添加至所述多人会话；

所述信令发送模块，还用于向所述多人会话的各成员标识对应的终端发送刷新指令，由各终端根据所述刷新指令刷新会话成员列表，所述刷新指令包括增加的所述成员标识。

13.一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1-6中任一项所述的实现多人会话的方法。

14.一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一项所述的实现多人会话的方法。