CN105120119A - 一种多方通话会议的界面交互控制方法与系统 - Google Patents

Abstract

本发明提供了一种多方通话会议的界面交互控制方法与系统。本发明的交互界面不借助菜单而是通过图标拖拽和点击实现交互操作，交互操作的结果通过图标状态进行显示反馈。图标拖拽和点击的交互操作能够即时产生发送至后台线程的指令，不需要专门的触发操作；反馈无需用户专门响应，而是采用默认响应机制。

Description

一种多方通话会议的界面交互控制方法与系统

技术领域

本发明属于多方通话领域，特别涉及一种多方通话会议的界面交互控制方法与系统。

背景技术

目前，随着经济社会的发展，能够实现多方、异地实时交流的多方通话技术，例如电话会议，正在蓬勃发展。传统的基于内部交换机和外部公共交换电话网的多方电话通话会议系统，由于设备价格较高，占用面积较大，需要单独的供电系统和专门的维修人员，仅仅适合于大型企业和政府部门使用。

随着移动互联网技术的发展，各种各样的移动通信软件纷纷出现在移动应用桌面上，例如微信、QQ、skype等等，上述这些软件都可以实现多方通话，然而都属于VOIP(VoiceOverInternetProtocol)的范畴，利用分组交换的数据传输实现通话，因此质量相对较低，受网络条件的影响较大，如果网络环境不太稳定，则可控性较差。

因此，很多公司已经开发了通过语音电话实现多方通话会议的专用APP(Application)，其脱离VOIP的范畴，从而不受数据传输网络环境的影响。这些电话会议APP都是将召开电话会议的请求发送给电话会议服务器，由电话会议服务器通过出局网关将参加电话会议的终端的电话号码提供给固定电话交换网络或者移动电话交换网络，例如PSTN网络等，从而发起对终端的语音电话呼叫，待呼叫接通后可以基于语音电话通话实现多方通话会议。由于多方通话是利用语音电话功能实现的，通话质量得到保障，中断、延迟等现象的发生概率显著降低。

例如，中国专利申请201510022186.5，其公开了一种通话质量高的电话会议系统，包括多个用户终端和电话会议服务器，用户终端通过通信网络与电话会议服务器连接，所述的用户终端包括非智能移动终端、智能移动终端、PC端和座机，智能移动终端和PC端上安装有电话会议APP，会议主持人能够通过电话会议APP自主发起同步语音电话会议或碎片化异步电话会议，所述的通信网络包括移动交换网络、互联网和固定电话交换网络。该电话会议系统能够利用电话会议APP通过移动交换网络、互联网和固定电话交换网络与各种用户终端进行高通过质量的电话会议。

在上述现有技术当中，电话会议APP设置有会议发起模块、会议结束模块、添加成员模块、挂断成员模块、重呼成员模块、踢出成员模块和修改角色模块；所述会议发起模块用于主持人发起同步或者碎片化电话会议，会议结束模块用于会议主持人结束电话会议，添加添加成员模块、挂断成员模块、重呼成员模块、踢出成员模块用于会议主持人添加成员、挂断成员、重呼成员、踢出成员，修改角色模块用于供主持人修改与会人员为发言人或者听众。

可见，在多方通话会议的进行过程当中，用户-特别是担任主持人的用户-需要与电话会议APP进行频繁的人机交互，以便实现发起会议、结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等操作。然而，目前一般以智能手机作为智能移动终端而进行多方通话会议，用户一边进行通话的同时，一边要操作电话会议APP的界面菜单实现人机交互，是比较不方便的。

例如，在添加成员的人机交互中，用户需要从电话会议APP的主界面中点击表示添加成员的菜单选项，该菜单选项有可能是主界面上的一级菜单选项，也有可能是某个一级菜单选项下面的二级菜单选项；用户点击了表示添加成员的菜单选项之后，电话会议APP会调用并打开手机通讯录，用户需要在手机通讯录中逐一选择希望添加的成员，然后还要进一步点击表示确认的菜单选项；电话会议APP根据用户的上述操作，会向电话会议服务器传送包含被添加成员的电话号码的添加成员请求；电话会议服务器响应该添加成员请求而通过出局网关向该请求中的所述电话号码发起语音电话呼叫；在这一过程中，电话会议APP会向用户展示一个表示等待的界面；直至电话会议服务器与被呼叫的所述电话号码建立了语音电话呼叫，并向电话会议APP作出添加成功反馈；电话会议APP会给予用户添加成功的提示，经用户确认后才会返回主界面并在主界面上增加显示被添加的成员；如果电话会议服务器与被呼叫的所述电话号码没有建立语音电话呼叫，电话会议服务器也会向电话会议APP作出添加失败反馈；电话会议APP会给予用户与添加失败相应的提示，经用户确认并且返回主界面。如果用户在通讯录中一次选择了多名希望添加的成员，则在等待期间，上述添加成功或者失败的确认操作可能需要反复进行多次。可见，整个添加成员的人机交互过程中，需要用户的反复操作若干次。

相类似地，在挂断成员、静音成员、重呼成员以及成员角色切换等人机交互过程中，用户需要从电话会议APP的主界面中点击表示某个参会成员的菜单选项，并且从弹出的二级菜单中选择与挂断成员、静音成员、重呼成员以及成员角色切换相关的菜单选项；电话会议APP根据用户的上述操作，会向电话会议服务器传送包含上述操作所涉及成员的电话号码的成员状态设置请求；电话会议服务器响应该成员状态设置请求而通过出局网关对该请求中的所述电话号码的语音电话呼叫进行必要的控制；在控制完成之后，电话会议服务器会向电话会议APP发送成员状态设置完成反馈；电话会议APP也会响应该反馈而给予用户成员状态设置完成的提示，经用户确认后，返回主界面并在主界面上变更被设置的成员的菜单选项的显示状态。同样，整个的人机交互过程中需要用户的反复操作若干次。

可见，现有技术中，多方通话会议进行过程中的人机界面交互延用传统APP的界面菜单交互方式，现有技术的APP由界面层、调度器层以及数据层构成。其中，界面层由用户可见并且可交互的控件元素构成，例如按钮、文本框、列表框、图片框、提示框等，控件元素可以向用户显示信息，并且接收用户输入的信息和请求，将用户输入传送给调度器层。调度器层建立主线程，主线程负责维护界面层与用户的交互，接收并且处理界面层传送过来的用户输入和请求，以及控制界面层显示对用户输入和请求的处理结果；调度器层还建立负责执行APP具体功能的业务线程，通过业务线程接收主线程转来的用户输入和请求，调用数据层提供的数据，并且产生相应的处理结果；处理结果由主线程返回界面层之后，通过控件元素显示给用户。数据层为业务线程的执行提供相关的数据。由于界面层由控件元素组合而成，与用户在界面层的人机交互都需要触发相应的交互控件或者对交互控件作出响应，因而形成了上述以界面菜单为载体的交互方式。

在多方通话会议进行过程中，由于通过对界面菜单的调取、选择、等待和响应实现交互，导致每次界面交互的延续时间比较长，操作步骤比较繁复，往往会打扰用户所正在进行的多方语音通话，特别是用户在没有耳机的情况下，直接面对智能移动终端的屏幕进行上述操作时，有可能根本无法听到多方语音通话的声音。

发明内容

针对现有技术中界面交互操作上的不便性，本发明提供了一种多方通话会议的界面交互控制方法与系统。本发明的交互界面实现了除主界面外没有任何菜单及下级界面，不借助菜单而是通过图标拖拽和点击实现交互操作，交互操作的结果通过图标状态进行显示反馈。图标拖拽和点击的交互操作能够即时产生发送至后台线程的指令，不需要专门的触发操作；反馈无需用户专门响应，而是采用默认响应机制。本发明还支持以组为单位的通话方操作。

本发明提供了多方通话会议的界面交互控制方法，其特征在于，包括以下步骤：

通过界面层提供由用户可见并且可交互的图标控件元素构成的交互界面，所述交互界面包括标识多方通话会议以及多方通话会议中的通话方的图标控件元素；

通过对图标控件元素的拖拽和点击操作，进行用户指令和信息的输入，并且由对图标控件元素的拖拽和点击操作即时触发图标控件元素向调度器层的交互请求发送；

通过调度器层建立的看守线程接收由图标控件元素发送的所述交互请求，将交互请求转发给业务线程；

通过业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果；并且，所述业务线程在对交互请求的处理过程中可以从数据层调用数据；

通过所述调度器层建立的看守线程，接收业务线程对交互请求的响应结果，向界面层发送更新相应图标控件元素的显示状态的控制指令；

根据调度器层的看守线程反馈的控制指令，在界面层即时更新图标控件元素的显示状态，以便提示界面交互操作的结果；

其中，图标控件元素的发送交互请求和图标件元素显示状态更新都不需要用户通过操作来进行触发和确认，而是伴随对图标控件元素的拖拽和点击操作以及控制指令的接收而自动即时实现。

优选的是，由对图标控件元素的拖拽和点击操作即时触发图标控件元素向调度器层的交互请求发送的步骤具体包括：

通过图标控件元素获得其自身在交互界面上的位置坐标，并且感知其自身接收的点击操作；通过图标控件元素响应其自身位置坐标的变化以及接收到的点击操作，而在位置坐标变化后或者接收到点击后即时向调度器层的看守线程发送交互请求，所发送的交互请求携带图标控件元素的位置坐标参数以及点击状态参数，所述点击状态参数可以设为“点击”和“未点击”，分别表示图标控件元素当前受到点击或者未受到点击操作。

优选的是，通过调度器层的看守线程将交互请求转发给业务线程的步骤具体包括：看守线程根据图标控件元素的标识符、位置坐标参数以及点击状态参数，确定该交互请求的请求类型；并且，根据请求类型，将该交互请求转发给负责处理该类型的交互请求的业务线程。

优选的是，图标控件元素向调度器层发送的交互请求为发起会议的交互请求时，则通过看守线程将该交互请求传输给会议发起线程；会议发起线程执行以下步骤：

首先，会议发起线程判断当前发起的多方通话会议是新建的多方通话会议还是已有的多方通话会议；

在新建多方通话会议的情况下，会议发起线程调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向会议发起线程传送添加成员的交互请求；

在发起已有的多方通话会议的情况下，会议发起进程调用历史记录文件，获取已有的多方通话会议的参会方的电话号码；

看守进程等待启动多方通话会议的交互请求，并且将该交互请求传送给会议发起线程；会议发起线程响应该交互请求而向通信接口模块提供通话方的电话号码，以便通信接口模块向会议服务器发送发起会议的请求。

优选的是，图标控件元素向调度器层发送的交互请求为结束会议的交互请求时，看守线程将该交互请求传送给会议结束线程；会议结束线程响应该交互请求而指示通信接口模块向会议服务器发送结束会议的请求。

优选的是，图标控件元素向调度器层发送的交互请求为管理参会成员的交互请求时，看守线程将该交互请求传送给成员管理线程，由成员管理线程执行以下步骤：

首先，成员管理线程判断交互请求的类型是以下类型中的哪一种：添加成员、挂断成员、静音成员、重呼成员以及成员角色切换；

如果交互请求的类型是添加成员，成员管理线程调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向成员管理线程传送被添加成员的交互请求；成员管理进程在获得被添加成员的电话号码后，立即将被添加成员的电话号码提供给通信接口模块，由通信接口模块生成并向会议服务器发送添加成员的成员管理请求；

如果交互请求的类型是挂断成员、静音成员、重呼成员以及成员角色切换，成员管理线程向通信接口模块提供涉及成员的电话号码，以便通信接口模块向会议服务器发送成员管理请求。

优选的是，通过调度器层的反馈处理线程从通信接口模块接收会议服务器传送的对发起会议请求、结束会议以及成员管理的反馈；并且，当反馈表明针对至少一个通话方的语音电话呼叫未接通时，反馈处理线程会针对该反馈而调用成员管理线程，执行针对呼叫失败的通话方的添加成员操作，从而重新发起对该通话方的呼叫，直至重新呼叫达到预定次数仍然没有接通，则反馈处理线程会将呼叫失败发送给看守线程，以便看守线程更新与该通话方对应的图标控件元素的显示状态。

本发明提供了一种多方通话会议的界面交互控制系统，其特征在于，包括：界面层、调度器层以及数据层；

界面层用于提供由用户可见并且可交互的图标控件元素构成的交互界面；所述交互界面包括标识多方通话会议以及多方通话会议中的通话方的图标控件元素；所述图标控件元素用于通过接受用户拖拽和点击操作来进行用户指令和信息的输入，并且即时触发向调度器层的交互请求发送；并且，界面层用于根据调度器层反馈的控制指令，即时更新图标控件元素的显示状态，以便提示界面交互操作的结果；

调度器层用于建立看守线程；看守线程负责维护界面层与用户的界面交互；看守线程接收并且处理来自界面层的由图标控件元素发送的交互请求，将交互请求转发给业务线程，以及根据业务线程对交互请求的响应结果，向界面层发送更新相应图标控件元素的显示状态的控制指令；

调度器层还用于建立业务线程；业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果；

数据层，用于向业务线程提供所需要的数据；

其中，图标控件元素的发送交互请求和图标件元素显示状态更新都不需要用户通过操作来进行触发和确认，而是伴随对图标控件元素的拖拽和点击操作以及控制指令的接收而自动即时实现。

优选的是，数据层提供临时数据接口、内部数据接口以及外部数据接口；其中，对于多方通话会议APP执行过程中产生的临时数据，数据层将其通过临时数据接口进行暂存、更新和读取；对于多方通话会议APP自身内部的数据，例如APP配置数据、功能设置数据等，数据层通过内部数据接口对其进行读取、更新以及长期性的存储；并且，数据层可以通过外部数据接口读取移动智能终端的操作系统或其它APP提供的数据，外部数据接口一般以只读的形式工作。

可见，通过本发明所述的多方通话会议的界面交互控制方法与系统，简化了会议通话进行过程中的交互操作步骤，实现了便捷和快速的操作，满足了用户特别是主席用户一边通话一边对会议进行交互控制的需要。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明所述实现多方通话会议的网络架构框图；

图2是本发明所述的界面交互控制系统的模块结构示意图；

图3是本发明所述的多方通话会议APP交互界面示意图；

图4是本发明所述的通过图标控件元素实现交互请求的流程示意图；

图5是本发明所述的调度器层线程结构示意图；

图6是本发明所述的多方通话会议APP发起多方通话过程中的交互界面示意图。

具体实施方式

下面结合附图对本发明作进一步详细的描述。

图1为本发明中实现多方通话会议的网络架构框图，所述多方通话会议的网络架构包括主席客户端，会议服务器，多方语音电话服务器，以及两个或两个以上的参会客户端。其中，主席和参会方共同构成本发明所述的多方通话会议的通话方。

所述主席客户端是多方通话会议的发起方，也是多方通话会议进行过程中需要执行结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等管理功能的控制者。该主席客户端上安装有用于实现上述管理功能的多方通话会议APP，该多方通话会议APP内部集成了本发明所述界面交互控制系统，可实现相应的界面交互控制方法。主席客户端为移动智能终端，在实际应用中一般为具有语音电话、分组数据传输以及触摸操作配置的智能手机。

所述主席客户端与所述会议服务器之间通过分组数据传输网络实现连接。例如，如果主席客户端是智能手机等移动终端，其可以利用WI-FI接入互联网，或者直接采用移动互联网的2G、3G或4G数据连接。当主席客户端运行所述多方通话会议APP时，即可以通过作为该APP后台的会议服务器建立双向的数据传输连接。主席客户端可以与多方语音电话服务器之间通过2G、3G或4G的蜂窝话务链接建立语音电话呼叫。通过该语音电话呼叫，主席客户端与多方语音电话服务器之间的双向语音传输。

参会客户端可以是智能手机等移动终端或座机等。参会客户端是移动终端的情况下，可以通过2G、3G或4G的蜂窝话务链接与所述多方语音电话服务器建立语音电话呼叫，参会客户端是座机的情况下，可以通过固话或者PSTN话务链接与所述多方语音电话服务器建立语音电话呼叫。

所述会议服务器通过出局网关与所述多方语音电话服务器之间建立连接，从而在两个服务器之间具有双向指令传输通道。

在以上架构的基础上，下面介绍实现多方通话会议的过程，以及多方通话会议过程中添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等管理功能的实现方法。

作为主席的用户(以下称为主席用户)通过安装在主席客户端上的多方通话会议APP发起一个多方通话会议。主席可以通过与多方通话会议APP进行界面交互，使该多方通话会议APP向会议服务器发送一个多方通话会议发起请求，该多方通话会议发起请求携带主席客户端以及受邀请参加多方通话会议的参会客户端的电话号码。会议服务器解析并处理该多方通话会议发起请求，通过出局网关向多方语音电话服务器传递主席客户端和参会客户端的电话号码。多方语音电话服务器根据这些电话号码对主席客户端和参会客户端发起语音电话呼叫；在与主席客户端以及至少一部分参会客户端的语音电话呼叫接通之后，对主席客户端和参会客户端进行语音信号的接收、合成和转发，从而实现多方通话会议；多方语音电话服务器接收到任一个通话方传输来的语音信号，会实时将该语音信号转发给其它各方的通话方；如果在特定会议模式下允许多人发言，就会同时接收到多个通话方传输来的语音信号，并进行语音信号的合成及转发。

在结束会议时，主席可以通过与多方通话会议APP进行界面交互，使该多方通话会议APP向会议服务器发送一个多方通话会议结束请求，会议服务器解析并处理该多方通话会议结束请求，根据该请求向多方语音电话服务器发出结束多方语音通话的指令，多方语音电话服务器根据会议服务器的指令切断与主席客户端以及当前接通的参会客户端的语音电话呼叫。

在多方通话会议的进行过程中，主席可以通过与多方通话会议APP进行界面交互，使该多方通话会议APP向会议服务器发送添加成员、挂断成员、静音成员、重呼成员以及成员角色切换的成员管理请求。会议服务器解析并处理成员管理请求，根据该请求向多方语音电话服务器发出成员操作的指令，该指令携带操作类型以及被操作成员的电话号码。例如，在添加成员的情况下，多方语音电话服务器会向被添加成员的电话号码发起语音电话呼叫，当呼叫接通后被添加成员会作为新的参会客户端实现多方通话；在挂断成员的情况下，多方语音电话服务器会切断与被挂断成员之间的语音电话呼叫，从而结束该参会客户端的多方通话；在静音成员的情况下，多方语音电话服务器会停止向其他通话方转发从被静音成员处接收的语音信号，也停止将从其他通话方收到的语音信号转发给该被静音成员，但是仍然保持与该被静音成员的语音电话呼叫链接；在重呼成员的情况下，多方语音电话服务器会基于所保持的语音电话呼叫链接，对先前的被静音成员恢复语音信号的转发；成员角色切换发生在同一时间只允许一个通话方作为发言方而其他通话方被视为听众的会议模式下，在这一会议模式下只有从发言方收到的语音信号会转发给其他通话方；多方语音电话服务器会根据会议服务器发来的成员角色切换的指令，该指令指定的通话方设为发言方，而把其他通话方设置为听众。

在多方语音电话服务器完成发起会议、结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等操作之后，会向会议服务器发送回复，会议服务器基于该回复而向多方通话会议APP进行对其多方通话会议发起请求、多方通话会议结束请求以及成员管理请求的反馈，以便多方通话会议APP更新其界面上的会议状态和会议成员状态。

通过上面的介绍，主席用户作为多方通话会议的发起者和控制者，其发起会议、结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等操作都是通过与多方通话会议APP进行界面交互控制而实现的，主席用户对会议状态以及会议成员状态的了解也要通过界面交互来获得。本发明主要的创新之处是提供一种流程简洁、操作方便、响应快速的界面交互控制技术，从而使得主席用户能够在多方通话会议过程当中进行持续和频繁的界面交互，而不影响其对多方语音通话的接听和发言。

图2是本发明所述的界面交互控制系统的模块结构示意图。该系统在多方通话会议APP当中负责实现该APP与用户之间的界面交互，从而在多方通话会议过程中进行发起会议、结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等用户交互控制操作的输入，并实现界面反馈显示。如图2所示，所述界面交互控制系统包括界面层201、调度器层202以及数据层203。

界面层201提供由用户可见并且可交互的控件元素构成的交互界面。在本发明中，不再采用现有APP交互界面上普遍应用的文本框、列表框、按钮等菜单式控件元素，而是采用标识多方通话会议以及多方通话会议中的通话方的图标作为控件元素，在支持触摸控制的界面交互方式下，通过对图标的拖拽和点击，来进行用户指令和信息的输入，并且即时触发图标控件元素向调度器层的交互请求发送，并且根据调度器层的反馈即时更新图标控件元素的显示状态，提示界面交互操作的结果，从而实现主席利用APP对多方通话会议的界面交互控制。其中，图标控件元素的发送交互请求和显示状态更新都不需要用户通过操作来进行触发和确认，而是伴随界面交互操作而自动即时实现。

调度器层202用于建立看守线程，看守线程负责维护界面层201与用户的界面交互。看守线程接收并且处理来自界面层201的、由图标控件元素发送的交互请求，将交互请求转发给业务线程，以及根据业务线程对交互请求的响应结果，向界面层发送更新相应图标控件元素的显示状态的控制指令。

调度器层202还建立了负责执行多方通话会议APP各种具体功能的业务线程，通过业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果。

调度器层202建立的业务线程在对交互请求的处理过程中，需要从数据层203调用数据。数据层203提供临时数据接口、内部数据接口以及外部数据接口，以便获得并向业务线程提供所需要的数据。其中，对于多方通话会议APP执行过程中产生的临时数据，数据层203将其通过临时数据接口进行暂存、更新和读取；对于多方通话会议APP自身内部的数据，例如APP配置数据、功能设置数据等，数据层203通过内部数据接口对其进行读取、更新以及长期性的存储；并且，数据层203可以通过外部数据接口读取移动智能终端的操作系统或其它APP提供的数据，外部数据接口一般以只读的形式工作。

下面具体介绍界面层201的布置及运行方式。图3示出了由界面层201提供的多方通话会议APP交互界面。该界面不采用基于一级或者多级菜单的交互方式，而是以将标识多方通话会议以及多方通话会议中的通话方的图标作为基本的控件元素。整个交互界面只包括一级的主界面，不需要多级子界面，没有界面之间的切换，也不设置弹出菜单和框体，而只通过图标控件元素的显示状态更新来提示界面交互操作的结果。交互界面划分为若干个区域，包括会议成员区301、静音成员区302、挂断成员区303、会议控制区304、信息显示区305。图标控件元素306表示作为多方通话会议主席的通话方，其在会议成员区301的固定位置坐标处显示、图标控件元素307、308、309、310分别表示作为多方通话会议各参会方的通话方，其可以视全部通话方数量的变化而在会议成员区301的适当位置坐标处显示，从而使通话方的图标控件元素排布均匀；会议控制区304内显示表示多方通话会议的图标控件元素，其中图标控件元素311表示当前正在发起或者正在进行过程的多方通话会议，图标控件元素312表示已有的多方通话会议记录，图标控件元素313表示通讯录。

在支持触摸控制的界面交互方式下，本发明通过对图标控件元素的拖拽和点击，来进行用户指令和信息的输入。图标控件元素能够获得自身在交互界面上的位置坐标，并且能够感知自身接收的点击操作，图标控件元素响应自身位置坐标的变化以及接收到的点击操作，而在位置坐标变化后或者接收到点击后即时向调度器层202发送交互请求，所发送的交互请求携带图标控件元素的位置坐标参数以及点击状态参数，所述点击状态参数可以设为“点击”和“未点击”，分别表示图标控件元素当前受到点击或者未受到点击操作。具体来说，如图4所示，步骤401中，任一图标控件元素都按照一定的周期循环检测自身是否接收到点击操作或者是自身位置坐标是否发生变化；如果未检测到点击操作或者位置坐标的变化，则返回步骤401进行下一周期的；相反，如果检测到该图标控件元素接收到了点击操作，则在步骤402中向调度器层202发送交互请求，该交互请求携带图标控件元素的标识符、位置坐标参数以及点击状态参数，其中点击状态参数取值为“点击”；如果检测到该图标控件元素的位置坐标发生了变化，步骤403中，进一步判断位置坐标的变化量(可以取X坐标变化量绝对值和Y坐标变化量绝对值之和)是否大于阈值，如果不大于阈值则视为无效的位置变化(可能是由于用户的无意触摸和拖拽)，则返回步骤401进行下一周期的检测；相反，如果检测到该图标控件元素位置坐标的变化量大于阈值，则步骤404中向调度器层202发送交互请求，该交互请求携带图标控件元素的标识符、位置坐标参数以及点击状态参数，其中点击状态参数取值是“未点击”。

如图5所示，调度器层202建立的看守线程用于接收并且处理图标控件元素发送的所述交互请求。对于由于点击操作或者位置坐标变化所触发的交互请求，看守线程根据图标控件元素的标识符、位置坐标参数以及点击状态参数，确定该交互请求的请求类型；并且，根据请求类型，将该交互请求转发给负责处理该类型的交互请求的业务线程。

调度器层202建立了负责执行多方通话会议APP各种具体功能的业务线程。业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果。如图5所示，调度器层202所建立的业务线程包括会议发起线程、会议结束线程、成员管理线程、反馈处理线程。

当看守线程确定当前交互请求的请求类型为建立多方通话会议请求时，则启动会议发起线程并将该交互请求传输给会议发起线程。会议发起线程执行以下步骤：

首先，会议发起线程判断当前发起的多方通话会议是新建的多方通话会议还是已有的多方通话会议。

进而，在新建多方通话会议的情况下，会议发起线程通过数据层的外部数据接口调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面的信息显示区305生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向会议发起线程传送添加成员的交互请求；从而，会议发起进程获得多方通话会议的参会方的电话号码；同时，会议发起进程也获得本智能手机的电话号码，即主席的电话号码。在发起已有的多方通话会议的情况下，会议发起进程通过数据层的内部数据接口调用多方通话会议APP的历史记录文件，获取已有的多方通话会议的参会方的电话号码，以及主席的电话号码。

进而，看守进程等待启动多方通话会议的交互请求，并且将该交互请求传送给会议发起线程；会议发起线程响应该交互请求而将通话方的电话号码提供给多方通话会议APP的通信接口模块，由该模块利用通话方的电话号码生成并向会议服务器发送多方通话会议发起请求。

当看守线程确定当前交互请求的请求类型为结束多方通话会议请求时，则将该交互请求传送给会议结束线程。会议结束线程响应该交互请求而指示通信接口模块向会议服务器发送多方通话会议结束请求。

当看守线程确定当前交互请求的请求类型为管理参会成员的交互请求时，将该交互请求传送给成员管理线程，由成员管理线程执行以下步骤：

首先，成员管理线程判断交互请求的类型是以下类型中的哪一种：添加成员、挂断成员、静音成员、重呼成员以及成员角色切换。

如果交互请求的类型是添加成员，成员管理线程通过数据层的外部数据接口调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面的信息显示区305生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向成员管理线程传送被添加成员的交互请求；成员管理进程在获得被添加成员的电话号码后，立即将被添加成员的电话号码提供给多方通话会议APP的通信接口模块，由该模块生成并向会议服务器发送添加成员的成员管理请求。

如果交互请求的类型是挂断成员、静音成员、重呼成员以及成员角色切换，成员管理线程在上述交互请求的指示下，向多方通话会议APP的通信接口模块提供涉及成员的电话号码，以便通信接口模块向会议服务器发送成员管理请求。

在完成发起会议、结束会议、添加成员、挂断成员、静音成员、重呼成员以及成员角色切换等操作之后，会议服务器会向多方通话会议APP传送对多方通话会议发起请求、多方通话会议结束请求以及成员管理请求的反馈。调度器层202的反馈处理线程从通信接口模块接收上述反馈。并且，本发明采用了反馈默认处理机制。例如，在发起多方通话会议时或者添加新的成员时，当反馈表明针对至少一个通话方的语音电话呼叫未接通时，该反馈不是立即造成在交互界面显示呼叫失败的信息以便提示用户，相反，反馈处理线程会针对该反馈而调用成员管理线程，执行针对呼叫失败的通话方的添加成员操作，从而重新发起对该通话方的呼叫，直至重新呼叫达到预定次数仍然没有接通，则反馈处理线程会将呼叫失败发送给看守线程，以便看守线程更新与该通话方对应的图标控件元素的显示状态。这样，本发明简化了多方通话会议APP针对语音电话呼叫执行结果而向用户进行的提示确认过程，避免了用户反复进行确认操作。

下面介绍在多方通话会议中具体的界面交互操作及其运行方式。

(一)发起和结束多方通话会议

参见图6，为了发起一个多方通话会议，作为主席的用户可以将代表新建多方通话会议的图标控件元素311拉入会议成员区301，或者点击该图标控件元素311，即触发了新建多方通话会议的交互请求。响应该图标控件元素311触发的交互请求，将在会议成员区301的固定位置坐标处显示表示主席的图标控件元素306。同时，由于是新建多方通话会议，信息显示区305内会生成并显示出一列新的图标控件元素314-317，表示通讯录中的联系人记录。用户可以点击表示联系人的图标控件元素314-317，则会议成员区301会显示图标控件元素307、308、309、310，分别对应被点击的联系人，从而用户完成了添加参会方的操作。

除了调用智能手机自带的通讯录之外，本发明还支持在通讯录上附加多方通话会议APP自定义的附加通讯录。附加通讯录支持以组为单位的批量添加成员的操作，例如，用户可以将某些联系人聚合为一个会议组，并且在调用通讯录时可以用信息显示区的至少一个图标控件元素(如318)表示该会议组，当用户点击该图标控件元素318时则将触发携带该会议组中的全部参会方的电话号码的添加成员的交互请求，并且将该组中联系人各自显示饿为会议成员区301中的一个图标控件元素。

此外，附加通讯录还可以包含一个公共通讯录。目前，一般APP需要调用通讯录时，实际同步的是手机本身自带的通讯录。公众通讯录可以保存“报警119”“急救120”之类的公共号码，无论用户同意或者不同意调用手机自身的通讯录，都可以提供公用通讯录中的电话号码作为参会方，以便满足用户的特殊需要。

此外，在发起多方通话会议时，还支持基于已有的多方通话会议记录而再次发起的交互。会议控制区304内的图标控件元素312表示已有的多方通话会议记录。如果用户希望再次召开与该已有的多方通话会议记录具有相同参会方的多方通话会议，则可以直接将该图标控件元素312拖拽到会议成员区301，此时会议成员区301会显示图标控件元素307、308、309、310，分别对应该已有的多方通话会议记录中保存的各个参会方，从而用户通过一步式操作就完成了批量添加参会方的操作。

在添加了全部参会方之后，用户可以再次点击表示多方通话会议的图标控件元素311或者312，从而触发启动多方通话会议，多方通话会议APP会向会议服务器发送多方通话会议发起请求。

在多方通话会议正在进行的过程中，用户可以通过点击表示多方通话会议的图标控件元素311或者312，触发结束多方通话会议的交互操作，多方通话会议APP会向会议服务器发送多方通话会议结束请求。

(二)多方通话会议过程中的成员管理交互操作

在多方通话会议的进行过程中，用户可以点击会议控制区304中表示通讯录的图标控件元素313，从而触发添加成员的交互。响应该交互，信息显示区305内会生成并显示出一列新的图标控件元素314-317，表示通讯录中的联系人记录。用户可以点击表示联系人的图标控件元素314-317，则会议成员区301会增加表示参会方的图标控件元素，并且随着点击联系人的图标控件元素，多方通话会议APP向会议服务器发送添加成员的成员管理请求。

在多方通话会议的进行过程中，用户可以将会议成员区301中表示参会方的图标控件元素拖拽到静音成员区302、从而触发静音成员的交互操作；或者拖拽到挂断成员区303，从而触发挂断成员的交互操作。多方通话会议APP响应这些交互操作而向会议服务器发送静音成员或者挂断成员的成员管理请求。如果需要对静音成员进行重呼，则可以将图标控件元素从静音成员区302重新拖拽回到会议成员区301，则多方通话会议APP响应该交互操作而向会议服务器发送重呼成员的成员管理请求。

在只允许一个通话方作为发言方而其他通话方被视为听众的会议模式下，用户可以点击会议成员区301中表示参会方的图标控件元素，从而指定被点击的通话方作为发言方，多方通话会议APP响应该交互操作而向会议服务器发送成员角色切换的成员管理请求。

在上述发起、结束多方通话会议以及成员管理交互操作过程中，图标控制元素的显示状态将根据看守线程的控制而即时更新，例如会议参会方被静音时可在图标控件元素上显示静音图标，会议参会方被挂断则在图标控件元素上显示挂断图标。图标控件元素显示状态的更新将根据看守线程的指令而即时自动完成，不需要用户确认，也不对用户进行显示形式的提示，从而适应了简化多方通话会议过程中用户操作步骤的需求。同时，看守线程能够根据业务线程的执行情况，调用智能手机的声音控件，向通话中的用户发送提示音，以表示某项业务功能的执行状态，例如，主席在通过界面交互确定添加成员的操作之后，就可以继续接听多方通话，无需再关注交互界面状态之变化；当与被添加参会方的语音电话呼叫接通之后，看守线程除了更新交互界面中图标控件元素的显示状态以外，还控制声音控件发出连续提示音，以提示主席用户添加已经成功。

应当理解的是，以上所述仅为本发明的较佳实施例而已，并不足以限制本发明的技术方案，对本领域普通技术人员来说，在本发明的精神和原则之内，可以根据上述说明加以增减、替换、变换或改进，而所有这些增减、替换、变换或改进后的技术方案，都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种多方通话会议的界面交互控制方法，其特征在于，包括以下步骤：

通过界面层提供由用户可见并且可交互的图标控件元素构成的交互界面，所述交互界面包括标识多方通话会议以及多方通话会议中的通话方的图标控件元素；

通过对图标控件元素的拖拽和点击操作，进行用户指令和信息的输入，并且由对图标控件元素的拖拽和点击操作即时触发图标控件元素向调度器层的交互请求发送；

通过调度器层建立的看守线程接收由图标控件元素发送的所述交互请求，将交互请求转发给业务线程；

通过业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果；并且，所述业务线程在对交互请求的处理过程中可以从数据层调用数据；

通过所述调度器层建立的看守线程，接收业务线程对交互请求的响应结果，向界面层发送更新相应图标控件元素的显示状态的控制指令；

根据调度器层的看守线程反馈的控制指令，在界面层即时更新图标控件元素的显示状态，以便提示界面交互操作的结果；

其中，图标控件元素的发送交互请求和图标件元素显示状态更新都不需要用户通过操作来进行触发和确认，而是伴随对图标控件元素的拖拽和点击操作以及控制指令的接收而自动即时实现。

2.根据权利要求1所述的界面交互控制方法，其特征在于，由对图标控件元素的拖拽和点击操作即时触发图标控件元素向调度器层的交互请求发送的步骤具体包括：

通过图标控件元素获得其自身在交互界面上的位置坐标，并且感知其自身接收的点击操作；通过图标控件元素响应其自身位置坐标的变化以及接收到的点击操作，而在位置坐标变化后或者接收到点击后即时向调度器层的看守线程发送交互请求，所发送的交互请求携带图标控件元素的位置坐标参数以及点击状态参数，所述点击状态参数可以设为“点击”和“未点击”，分别表示图标控件元素当前受到点击或者未受到点击操作。

3.根据权利要求2所述的界面交互控制方法，其特征在于，通过调度器层的看守线程将交互请求转发给业务线程的步骤具体包括：看守线程根据图标控件元素的标识符、位置坐标参数以及点击状态参数，确定该交互请求的请求类型；并且，根据请求类型，将该交互请求转发给负责处理该类型的交互请求的业务线程。

4.根据权利要求3所述的界面交互控制方法，其特征在于，图标控件元素向调度器层发送的交互请求为发起会议的交互请求时，则通过看守线程将该交互请求传输给会议发起线程；会议发起线程执行以下步骤：

首先，会议发起线程判断当前发起的多方通话会议是新建的多方通话会议还是已有的多方通话会议；

在新建多方通话会议的情况下，会议发起线程调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向会议发起线程传送添加成员的交互请求；

在发起已有的多方通话会议的情况下，会议发起进程调用历史记录文件，获取已有的多方通话会议的参会方的电话号码；

看守进程等待启动多方通话会议的交互请求，并且将该交互请求传送给会议发起线程；会议发起线程响应该交互请求而向通信接口模块提供通话方的电话号码，以便通信接口模块向会议服务器发送发起会议的请求。

5.根据权利要求3所述的界面交互控制方法，其特征在于，图标控件元素向调度器层发送的交互请求为结束会议的交互请求时，看守线程将该交互请求传送给会议结束线程；会议结束线程响应该交互请求而指示通信接口模块向会议服务器发送结束会议的请求。

6.根据权利要求3所述的界面交互控制方法，其特征在于，图标控件元素向调度器层发送的交互请求为管理参会成员的交互请求时，看守线程将该交互请求传送给成员管理线程，由成员管理线程执行以下步骤：

首先，成员管理线程判断交互请求的类型是以下类型中的哪一种：添加成员、挂断成员、静音成员、重呼成员以及成员角色切换；

如果交互请求的类型是添加成员，成员管理线程调用通讯录中的联系人记录，并且将联系人记录传送给看守线程；看守线程控制界面层在交互界面生成显示联系人记录的图标控件元素，并且根据用户对这些表示联系人的图标控件元素的点击或者拖拽操作，看守线程向成员管理线程传送被添加成员的交互请求；成员管理进程在获得被添加成员的电话号码后，立即将被添加成员的电话号码提供给通信接口模块，由通信接口模块生成并向会议服务器发送添加成员的成员管理请求；

如果交互请求的类型是挂断成员、静音成员、重呼成员以及成员角色切换，成员管理线程向通信接口模块提供涉及成员的电话号码，以便通信接口模块向会议服务器发送成员管理请求。

7.根据权利要求3所述的界面交互控制方法，其特征在于，通过调度器层的反馈处理线程从通信接口模块接收会议服务器传送的对发起会议请求、结束会议以及成员管理的反馈；并且，当反馈表明针对至少一个通话方的语音电话呼叫未接通时，反馈处理线程会针对该反馈而调用成员管理线程，执行针对呼叫失败的通话方的添加成员操作，从而重新发起对该通话方的呼叫，直至重新呼叫达到预定次数仍然没有接通，则反馈处理线程会将呼叫失败发送给看守线程，以便看守线程更新与该通话方对应的图标控件元素的显示状态。

8.一种多方通话会议的界面交互控制系统，其特征在于，包括：界面层、调度器层以及数据层；

界面层用于提供由用户可见并且可交互的图标控件元素构成的交互界面；所述交互界面包括标识多方通话会议以及多方通话会议中的通话方的图标控件元素；所述图标控件元素用于通过接受用户拖拽和点击操作来进行用户指令和信息的输入，并且即时触发向调度器层的交互请求发送；并且，界面层用于根据调度器层反馈的控制指令，即时更新图标控件元素的显示状态，以便提示界面交互操作的结果；

调度器层用于建立看守线程；看守线程负责维护界面层与用户的界面交互；看守线程接收并且处理来自界面层的由图标控件元素发送的交互请求，将交互请求转发给业务线程，以及根据业务线程对交互请求的响应结果，向界面层发送更新相应图标控件元素的显示状态的控制指令；

调度器层还用于建立业务线程；业务线程接收看守线程转来的交互请求，并且解析和处理该交互请求，将解析和处理结果提供给看守线程作为响应结果；

数据层，用于向业务线程提供所需要的数据；

其中，图标控件元素的发送交互请求和图标件元素显示状态更新都不需要用户通过操作来进行触发和确认，而是伴随对图标控件元素的拖拽和点击操作以及控制指令的接收而自动即时实现。

9.根据权利要求8所述的界面交互控制系统，其特征在于，数据层提供临时数据接口、内部数据接口以及外部数据接口；其中，对于多方通话会议APP执行过程中产生的临时数据，数据层将其通过临时数据接口进行暂存、更新和读取；对于多方通话会议APP自身内部的数据，例如APP配置数据、功能设置数据等，数据层通过内部数据接口对其进行读取、更新以及长期性的存储；并且，数据层可以通过外部数据接口读取移动智能终端的操作系统或其它APP提供的数据，外部数据接口一般以只读的形式工作。

10.根据权利要求8所述的界面交互控制系统，其特征在于，图标控件元素获得其自身在交互界面上的位置坐标，并且感知其自身接收的点击操作；图标控件元素响应其自身位置坐标的变化以及接收到的点击操作，而在位置坐标变化后或者接收到点击后即时向调度器层的看守线程发送交互请求，所发送的交互请求携带图标控件元素的位置坐标参数以及点击状态参数，所述点击状态参数可以设为“点击”和“未点击”，分别表示图标控件元素当前受到点击或者未受到点击操作。