CN1868164A - 用于集成即时消息和基于pstn的电话会议的方法和系统 - Google Patents

用于集成即时消息和基于pstn的电话会议的方法和系统 Download PDF

Info

Publication number
CN1868164A
CN1868164A CNA2004800297686A CN200480029768A CN1868164A CN 1868164 A CN1868164 A CN 1868164A CN A2004800297686 A CNA2004800297686 A CN A2004800297686A CN 200480029768 A CN200480029768 A CN 200480029768A CN 1868164 A CN1868164 A CN 1868164A
Authority
CN
China
Prior art keywords
videoconference
telephone
instant message
server
participant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2004800297686A
Other languages
English (en)
Other versions
CN1868164B (zh
Inventor
达拉·柯伦
迈克尔·德斯蒙德
马丁·哈里甘
特雷弗·约翰斯顿
森克·库朱卡
马克·E·华莱士
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN1868164A publication Critical patent/CN1868164A/zh
Application granted granted Critical
Publication of CN1868164B publication Critical patent/CN1868164B/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/42382—Text-based messaging services in telephone networks such as PSTN/ISDN, e.g. User-to-User Signalling or Short Message Service for fixed networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818—Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/247—Telephone sets including user guidance or feature selection means facilitating their use
    • H04M1/2478—Telephone terminals specially adapted for non-voice services, e.g. email, internet access
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M7/00—Arrangements for interconnection between switching centres
    • H04M7/0024—Services and arrangements where telephone services are combined with data services
    • H04M7/0042—Services and arrangements where telephone services are combined with data services where the data service is a text-based messaging service
    • H04M7/0045—Services and arrangements where telephone services are combined with data services where the data service is a text-based messaging service where the text-based messaging service is an instant messaging service
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M7/00—Arrangements for interconnection between switching centres
    • H04M7/12—Arrangements for interconnection between switching centres for working between exchanges having different types of switching equipment, e.g. power-driven and step by step or decimal and non-decimal
    • H04M7/1205—Arrangements for interconnection between switching centres for working between exchanges having different types of switching equipment, e.g. power-driven and step by step or decimal and non-decimal where the types of switching equipement comprises PSTN/ISDN equipment and switching equipment of networks other than PSTN/ISDN, e.g. Internet Protocol networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/253—Telephone sets using digital voice transmission
    • H04M1/2535—Telephone sets using digital voice transmission adapted for voice communication over an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/50—Aspects of automatic or semi-automatic exchanges related to audio conference
    • H04M2203/5063—Centrally initiated conference, i.e. conference server dials participants

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供了一种系统，包括多个即时消息客户应用(202、207、208、209)，其经由计算机网络(206)通信以便实时发送和接收消息，经由电话网络(216)与n路电话会议集成。该系统包括：多个即时消息客户应用(202、207、208、209)；即时消息服务器(204)；以及电话会议服务器(210)；全部经由计算机网络(206)连接。电话会议服务器(210)经由电话网络(216)启用n路电话连接。提供n路电话连接到即时消息客户应用的至少某些用户的电话装置，这些用户可以经由即时消息客户应用的图形用户界面(600)可视化电话会议。

Description

用于集成即时消息和基于PSTN的电话会议的方法和系统
技术领域
本发明涉及即时消息和电话会议领域。本发明尤其涉及即时消息和经由电话网络的电话会议的集成。
背景技术
即时消息(IM)使得用户能够实时地向和从其他用户发送和接收消息。第一个用户具有在他的计算机上运行的客户IM应用或软件。当该第一个用户连接到因特网时，客户IM应用打开与IM服务器的连接。客户IM应用发送用户标识和口令以便登录到IM服务器上。IM服务器使用考虑IM功能性的通信协议。
客户IM应用包括：联系人列表，其是第一个用户希望具有向其发送消息的能力的其他用户的列表。当在联系人列表中标识出的用户开始在线并且登录到IM服务器上时，第一个用户被告知，使得消息可以被发送和接收。消息被发送到IM服务器，接着该IM服务器将该消息路由到标识出的用户。IM应用主要被用于基于文本的聊天、屏幕共享和白板等。
发明内容
本发明涉及将电话特征和会议集成到IM应用。传统的电话网络转换声音为电信号或经由无线电波使用无线通信。广泛分布的电话网络被称作为公共交换电话网络(PSTN)。利用PSTN的音频电话会议是组通信的长久确立的手段。
在音频电话会议中，n个参与者在相同时间经由PSTN连接。电话会议常常要求音频桥接器(audio bridge)。音频桥接器具有相互连接多个电话信道的功能。桥接器提供了平滑的语音切换甚至对全部位置的音频信号的分布，并且控制传输质量。某些桥接器使用开关，其打开传输以响应语音消息，而其他的谈话者被阻塞，直到语音消息已经完成。其他形式的桥接器允许多于一个谈话者在相同时间被发送。桥接器可以具有拨入或拨出能力，这可由操作者或桥接器服务处理。
组通信的这种形式的优点是：具有好的声音质量，其中可区别参与者语音的音调，并且参与者可自发地讲话。而且，随着人们具有在他们的工作地、家里的电话以及移动电话，电话装置的应用非常普及。
电话会议的缺点是：在讲话之前，讲话者可能需要识别自己，并且如果多于一个人在相同时间说话，则可出现混淆。也可能难以通知所有参与者预期的会议，并且拨打所有适合的电话号码以连接所有的参与者对会议的组织者来说是耗时的。此最后一点特别正确，因为人们具有通常包括移动电话的多于一个的电话装置。
IP上的语音或因特网电话是在代替PSTN的因特网上进行电话呼叫的方法。这种形式的通信的缺点是，音频被数字化并且被转换成IP分组。VOIP典型地使用RTP(实时协议)通过UPD(用户数据报协议)传递。在呼叫的另一端，被数字化的语音数据被转换回音频信号。这种转换可导致不清楚和紊乱的语音再现。
存在3种主要的VIOP衰落(downfall)，即，分组延迟、分组丢失和抖动。抖动由于可变的分组间到达时间而产生；某些分组比在接收机引起抖动的其他分组用时更久。这些由因特网协议(IP)提供的最佳努力服务引起。
某些IM应用使得VOIP呼叫能够被建立并且和IM应用集成。随着会议规模增大，这遭受计算机到计算机VOIP的限制，如声音质量问题和可扩展性问题。VOIP，尤其是在公用因特网上，对高质量音频会议仍不够可靠。VOIP计算机到计算机会议的另一个衰落是麦克风装置不像电话装置那样对所有参与者同样地普及和立即可用。
某些现存的IM应用还允许已经与电话服务提供商签约的用户呼叫另一个用户，建立单个的一对一电话呼叫。这是基本的电话集成，但是不提供N路电话会议设施。某些形式的IM应用还可以发送SMS(短消息服务)文本给移动用户。
在此描述的发明利用传统的电话网络的高质量和可用性，并且集成音频电话会议到IM应用。该电话会议到IM应用的集成涉及结合电话网络上的电话会议和IM应用的简单性和实时获知特征。
根据本发明的第一个方面，提供了一种系统，包括多个即时消息客户应用，其经由计算机网络通信以便实时发送和接收消息，经由电话网络与n路电话会议集成。
在优选的实施例中，该系统包括：多个即时消息客户应用；即时消息服务器；以及电话会议服务器；全部经由计算机网络连接；其中电话会议服务器经由电话网络启用n路电话连接。
电话会议服务器最好包括：通信装置，用于在电话会议期间发送有关电话连接的状态的通知给即时消息服务器。
即时消息客户应用可包含图形用户界面，包括用于实时显示n路电话会议的参与者的详情和参与者的电话连接的状态的装置。
n路电话连接可以是到即时消息客户应用的用户的电话装置。附加的电话连接还可以是到非即时消息客户应用的用户的用户的电话装置。
图形用户界面可包括：用于指示电话会议中给定时间正在说话的参与者的装置；用于指示响应于来自电话会议服务器的通知而被激活的装置。图形用户界面还可包括：用户输入该用户想讲话的指示的装置。
电话会议服务器可使用与电话网络接口的桥接器，其解释有关电话会议的建立和控制命令。电话会议服务器可允许系统利用不同的网络接口。
电话会议服务器可包括允许即时消息客户应用建立和控制电话会议的接口。电话会议服务器还可包括：用于检索和存储电话概略的电话概略服务；以及用于管理包括政策信息、pin号和端口许可的电话会议概略的电话会议概略服务。
即时消息客户应用中的一个可以是电话会议的主持人，并且可具有包括用于控制电话会议的控制输入装置的图形用户界面。
图形用户界面可包括用于提供为电话会议能连接参与者的电话号码的装置。
根据本发明的第二方面，提供了一种方法，其中多个用户每个通过即时消息经由计算机网络利用即时消息客户应用实时通信，并且能够经由电话网络由n路电话会议同时连接。
在优选实施例中，该方法包括：多个即时消息应用在计算机网络上经由即时消息服务器利用即时消息通信；以及利用在计算机网络上的电话会议服务器经由电话网络建立n路电话连接。
即时消息客户应用的用户可利用与电话会议服务器的即时消息通信，建立和控制电话会议。发起电话会议的用户可以邀请的形式发送即时消息到建议的电话会议参与者。非即时消息应用用户通过他们自己拨入或由另一个参与者拨入也能够参与n路电话会议。
电话会议服务器可以通知即时消息服务器有关电话连接的状态。
所述方法可包括：为即时消息客户应用提供图形用户界面，包括实时显示n路电话会议的参与者的详情以及参与者的电话连接的状态。所述方法还可以包括：在电话会议中在给定时间正在讲话的参与者的图形用户界面中激活指示，以响应从电话会议服务器发送的通知。
所述方法可包括：用户在图形用户界面中输入电话号码，据此对建议的电话会议能够联系到他们。
根据本发明的第三方面，提供了一种计算机程序，存储在计算机可读存储介质上，包括：计算机可读程序代码装置，用于执行以下步骤：提供即时消息客户应用，用于通过在计算机网络上经由即时消息服务器传递的即时消息，和其他的即时消息客户应用通信；具有扩展的即时消息客户应用，用于利用经由电话网络使能n路电话连接的计算机网络上的电话会议服务器，使能电话会议。
根据本发明的第四方面，提供了一种在计算机可读存储介质上存储的计算机程序，包括计算机可读程序代码装置，用于执行以下步骤：提供在计算机网络(206)上经由即时消息服务器(204)利用即时消息通信的多个即时消息应用(202、207、208、209)；以及利用计算机网络(206)上的电话会议服务器(210)经由电话网络(216)建立n路电话连接。
利用电话会议与即时消息的集成，用户能够在与在n路文本聊天中那样相同的语义下(semantics)，使用他们的IM应用发起音频电话会议。
本发明扩展IM应用的范围到电话网络上的电话会议的领域，并且引入了新的可能性的主机。电话会议可以和文本聊天一样容易地以对等方式实时建立和消除。IM社区内的电话状态可被实时通信和显示，改善了电话获知。
集成IM和电话会议的另一个优点与参与者的经验有关。电话会议可以从IM应用可视化。当联系人正在被拨号、拾取、挂断、被丢弃、被静音、正在讲话时，这可以图形的形式显示给电话会议中的所有其他参与者。
在常规的电话会议中，因为没有用户界面，仅有电话听筒，参与者状态不可用。在IM集成的情况下，所有参与者能够观看所有其他参与者的状态，如谁正在讲话、他们的名字是什么、以及他们目前处于何处。还可能看到外部参与者，并且看到参与者什么时候已经拾取他们的电话以及他们什么时候已经决定挂断和离开。
其他非常有吸引力的特征是涉及其他用户的电话会议意识以及自动生成的有关联系人事务、时间、日期和持续期的电话会议摘要。
另一个特征是资源的智能应用，如果主持人邀请若干人到电话会议，并且发现仅仅一个人接受邀请，则系统可以降级电话会议为简单的电话呼叫并因此节约花费。
附图说明
现在参照附图，仅仅通过举例来描述本发明的实施例，附图中：
图1是如现有技术中所知的即时消息系统的框图；
图2是根据本发明的系统的框图；
图3是图2的系统的电话会议服务器的框图；
图4是根据本发明的即时消息图形用户界面的屏幕截图(shot)；
图5A和5B是作为图4的即时消息图形用户界面的扩展的电话会议设立对话框和请柬(invitation)的屏幕截图；以及
图6A至6D是根据本发明的电话会议图形用户界面的屏幕截图。
具体实施方式
在此描述了一种系统，其中即时消息和经由电话网络的电话会议集成。
图1示出了如现有技术中所示的即时消息系统。即时消息(IM)客户应用102在第一用户的计算机上运行。IM服务应用，也称作为IM服务器104，经由诸如因特网106的网络提供IM功能性。
当IM客户应用102登录到IM服务器104时，服务器检查屏幕名称和口令。这可以由分开的登录服务器完成。IM服务器104使用考虑IM功能性的通信协议。IM客户应用102具有图形用户界面，其显示即时消息功能。
IM客户应用102包括联系人列表能力(capablity)。将第一用户意欲向和从其发送和接收消息的人的列表存储在IM客户应用102中。各联系人的该屏幕名称列表与IM服务器104通信，使得当所列出的人在线时，由IM服务器104通知第一用户。
每个联系人具有其自己的IM客户应用107、108、109，其运行在其每个计算机中。当任何的联系人登录时，第一用户的IM客户应用102被通知它们在线。接着，即时消息可以实时地被发送和接收。每个消息去往IM服务器104，其路由该消息到期望的接受者。
参照图2，示出了根据本发明的系统200。用户具有IM客户应用202，带有提供电话会议功能性的扩展203。IM服务器204还具有提供电话会议集成特征的扩展205。其他用户每个都具有IM客户应用207、208、209，带有电话会议扩展(未示出)。
如上面相对图1描述的，用户登录到IM服务器204，以便实时地在联系人之间发送和接收即时消息。
提供了一个或多个电话会议服务应用，也被称作为电话会议服务器210，它是在IM服务器204和连接到电话网络216的网络接口或音频桥接器212之间的网关。电话会议服务器210连接到IM服务器204，还连接到所述网络/桥接器212。电话会议服务器210用作用于IM服务器204和网络/桥接器212的接口模块。
IM服务器204首先被配置来识别一个或多个电话会议服务器210，它是怎么发生的倒是无关紧要，只要IM服务器204知道设立和控制电话会议的任何客户请求去往电话会议服务器210。
按客户请求，电话会议服务器210使用本地会议设立/控制接口模块在PSTN(公共交换电话网络)216上设立和控制电话会议。接口模块是具有在电话网络上实现会议的设立、管理、控制和解构的接口的软件元件。会议设立/控制接口模块提供允许电话会议的设立和控制的一般接口给电话会议服务器210。该接口模块的重要性在于，电话会议服务器210可以和会议设立/控制接口的不同实现相互操作。
可以通过音频会议桥接器212提供会议设立/控制接口模块的实际实现。音频会议桥接器212是和可能使用一个或多个高容量ISDN连接(例如，ISDNPRI(主速率))的PSTN 216接口的设备。在基本的功能级，音频会议桥接器212能够在PSTN 216上建立连接，并且混合在若干连接上进入的声音并且发出混合的声音回到相同的连接(即，召开会议)。
还可以使用电话听筒(handset)拨打桥接器212，并且用户可以通过输入有效的pin号创建或加入会议。音频会议桥接器212解释与会议建立和控制有关的来自电话会议服务器210的消息，并且提供有关会议状态的反馈给电话会议服务器210。该消息和反馈经由在电话会议服务器210上运行的会议建立/控制接口模块发生。在此情况，桥接器212可以被认为实现网络接口。
允许电话会议服务器210建立会议的会议建立/控制接口的另一个可能的实现会使用诸如Parlay(Parlay集团的商标)的新兴网络API之一。Parlay是被设计来由依赖于电信网络的应用使用的接口。Parlay具有用于网络中实现的会议的规定。电话会议服务器210经由接入网络的会议建立/控制接口和Parlay网关通信。上面的情况要求实现Parlay接口的网络。
与允许会议的建立和控制一起，电话会议服务器210还使用IM服务器204的服务以便将会议的实时状态通信给参与的客户202、207、208、209。这通过解释和处理来自会议建立/控制模块的反馈实现。
电话会议服务器210被用来经由诸如PSTN的电话网络216与电话会议的每个参与者建立电话连接。在由参与者运行IM客户应用的情况下，接着可在参与者之间同时实现电话会议。
具有电话会议扩展的IM客户应用202、207、208、209中的每个还可直接与电话会议服务器210通信。电话会议服务器210允许IM用户作为主持人(moderator)建立和控制电话会议，并且还允许已经被邀请到电话会议的IM用户作为参与着参加。
有关与电话会议的每个参与者的电话连接的建立和状态的通知，由电话会议服务器210发送到IM服务器204。IM服务器204通知电话会议参与者的IM客户应用202、207、208、209有关电话连接的状态。
IM客户应用202、207、208、209的每个具有带有被添加的用于电话会议的功能性的图形用户界面。图形用户界面显示与电话会议有关的信息和如下面进一步显示的每个参与者的电话连接的状态。提供电话会议集成特征的IM服务器204的扩展205更新由IM客户应用的图形用户界面所显示的信息。
图3更详细地示出了电话会议服务器210的功能性。电话会议服务器210提供电话概略(profile)服务230，该电话概略(profile)服务230检索和存储来自目录231的IM用户电话概略。电话会议服务器210还提供允许IM用户作为主持人建立和控制电话会议的接口232，并且还允许已经被邀请到电话会议的IM用户作为参与者参加。电话会议服务器210还管理诸如政策信息、pin号、端口许可等的电话会议概略234。
为了与电话网络216接口，以便建立和管理电话连接，电话会议服务器210使用了解释与音频电话会议有关的标准建立和控制命令的网络接口插件236。所述插件架构236允许系统利用大量不同的网络接口，如音频会议桥接器238、基于Java(太阳微系统公司的商标)的网络API 240(JAIN(用于智能网络的Java API))和JTAPI(Java电话API)，或其他的网络接口242，如Parlay接口。电话会议服务器210经由音频桥接器或网络API实现建立与每个参与者的电话连接244。
下面是对所述系统的用户体验的描述，所述系统包括可以被使用的图形用户界面的例子的屏幕截图。电话会议的发起者建立电话会议并且邀请其他的参与者到电话会议。主持人控制所述电话会议。发起人和主持人往往可以是同一用户。然而，如果要求的话，主持人在电话会议过程期间可以改变。
IM客户应用202的用户和如图4所示的通常的IM图形用户界面(GUI)400一起呈现。在电话会议集成的IM客户应用202中，存在允许用户访问电话会议功能性的扩展。例如，这由在工具条404中画图的电话图标402图示。
用户可以点击他们的联系人列表408中的数个IM联系人406，并点击电话图标402以便开始在所选择的联系人之间的音频电话会议。当用户这么做时，如图5A所示的那样，他和电话会议建立对话框500一起被呈现。
在电话会议建立对话框500中，发起电话会议的用户可以选择当电话会议开始时他想要被拨号的位置501。发起用户还可以键入要被发送到预定参与者的电话会议502和消息503的描述。用户具有作为电话会议的主持人505和用户504的口令或个人识别号(PIN)。
用户可以通过点击“添加受邀人”按钮507添加受邀人。列表506示出了当前被选择的受邀人。当用户对受邀人列表满意时，他可以通过点击“发送”按钮508发送邀请。还提供了“取消”按钮509。
当点击“发送”按钮508时，对电话会议的邀请510被发送到预定参与者。对话框形式的邀请510在图5B中示出。邀请510包括主持人511和如由主持人提供的消息503和描述502的详情。
预定参与者选择要么接受要么拒绝电话会议的邀请。如果参与者接受邀请，他必须选择他希望被拨号的预先配置的电话位置512的一个。或者，他可以在拨号位置512中键入新的电话号码。
邀请510还示出了其它的受邀人513，和他们对邀请响应时的状态。当受邀人响应时，经由IM客户应用和IM服务器实时发送和接收受邀人的状态。在邀请510上提供了按钮514以便加入电话会议。还提供了按钮516以对邀请响应。
一旦参与者已经接受邀请并且加入电话会议，则如图6A至6D所示，他与具有电话会议GUI 600的形式的电话会议视图一起显示。
发起电话会议的主持人与电话会议GUI 600的更多特征视图一起显示。两幅视图显示为参与电话会议的参与者601和他们的状态602。电话会议的主持人由他的名字旁的键609示出。
在电话会议GUI 600的主持人的视图中，存在各种呼叫控制选项，如静音603、丢弃(drop)604、邀请605和邀请外部用户606。冠以“主持人”口哨图标607被提供来允许主持人将主持人权利传递给其他人。参与者的视图除了他们没有会议控制工具条外与主持人的视图一样。电话会议GUI 600包括用于指示诸如举手的手势610的输入按钮。
当电话会议开始时，按他们选择的号码对主持人拨号，并且，接受邀请的所有那些人也通过电话会议服务器按他们选择的号码被拨号。一旦参与者通过电话相连接，则当前讲话的用户由带有说话动画608的图标描述。有关谁正在说话的通知以及呼叫状态被从电话会议服务器发送到IM服务器，该IM服务器发送即时消息给IM客户应用，而该IM客户应用在电话会议GUI600以图形形式示出了所述状态。
图6B描述了参与由球体图标611描述的电话会议的拨号的入口。拨入联系人(dial in contact)没有IM概略，并且这是客人。
除了拨入，主持人可以拨出(dial out)不是IM用户的外部用户进入电话会议。这被示出在图6C中。通过选择“邀请外部”选项606，主持人可以选择某人以拨出进入电话会议。对话框612被显示给主持人，其中主持人可以输入被邀请人的详情。
图6D显示出已经拨出外部用户，并且现在在电话会议615中。该图也示出了一个参与者正在发信号以便讲话，因为他已经举起了他的标志613。
与如上所述的特征一起，系统通知用户什么时候参与者拾取和挂断电话会议。当参与者挂断时，他的姓名幻出(ghost out)，而他的图标消失。主持人可以通过选择停止614在任何时候停止电话会议。
现在提供有关集成有即时消息和电话会议的系统的应用的一般描述。IM客户应用用户能够从他的IM客户应用界面用他的联系人号建立音频电话会议。当IM用户选择IM联系人号并且经由他的界面指示他希望开始电话会议时，开始电话会议。联系人接收对电话会议的邀请并且可以选择在许多预先配置的电话“位置”的任何一处接受，“位置”如家、办公室、移动(mobile)或按要求定义新的位置。位置包括：电话号码和诸如(087-xxxxxxx移动)的描述符。使用该特征，使得用户不必经常拨打电话号码。
一旦参与者在他们选择的位置接受电话会议的邀请，他们就接收电话会议的图形描述。发起电话会议的用户被指定为会议的主持人，除非该用户另外指定。该主持人可以观看来自他的IM客户应用的电话会议的状态，并且一旦确信足够的成员存在，则他可以通过从图形用户界面选择开始，开始该电话会议。
开始电话会议涉及电话会议服务器使用他们选择的电话位置拨打电话会议中的所有用户。一旦参与电话会议的IM用户被物理地拨号进入电话会议，则即时消息应用可视化他们在电话网络上的实时状态变化。在电话网络上的任何状态变化的通知由电话会议服务器发送到IM服务器，并且这在IM客户应用的用户界面中实时地以图形形式示出。当参与者拾取他们的电话时，他们的虚拟状态以图形形式变化，如果他们讲话，则这也通过可见的状态变化发信号通知在该呼叫中涉及的所有参与者。
对于希望拨号进入电话会议而不是即时消息用户的参与者来说，存在两种情形。主持人可以使用电话会议控制图形用户界面拨出用户。或者，参与者可以拨号进入正在进行的电话会议。任一方式用户都在电话会议可视对话中表示为客人，并且继承了与可由所有其他的参与者可视化的其他参与者一样的状态。
在正在进行的电话会议期间，IM用户可以被邀请，并且可以参与到正在进行的电话会议中。一旦他们接受邀请，则他们接收电话会议图形用户界面组件，并且被拨号进入电话会议。
视频电话会议状态由参与者增加到参与者信令。参与者可使用IM应用，使用简单的2或者甚至n路文本聊天彼此用信号通知。与文本聊天一起，用户还可在电话会议中以图形形式用信号彼此通知。参与者可举起他们的虚拟手以用信号通知主持人他们想讲话；他们还可以进入线讲话；并且还用信号通知他们离开一会。这利用提供这种实时意识的IM应用扩展全部完成。
整个电话会议存在这样的主持人，其除了电话会议的图形显示外，还包含实现呼叫控制的电话会议控制图形用户界面组件。使用他的IM客户应用的主持人能够静音、非静音、丢弃、拨号和实现有关参与者的其他呼叫控制特征。主持人还可以从GUI控制会议本身，如使参与者旁线(sideline)进入子会议(sub-conference)、锁定会议、拨出外部用户、记录会议等等。
有关主持人权利的相关点是可转让的。在将即时消息集成到电话会议的情况下，用户能够转让主持人权利给其他参与者。如果主持人必须离开电话会议，代替让空闲的电话拾取(pick up)或摘机(off book)，以便不破坏电话会议，则主持人可以传递主持人权利给信任的联系人，并且离开电话会议。
为了结束IM集成的电话会议，主持人可以选择停止其中所有参与者被挂起的会议。主持人还可以选择从他们的电话会议联系人人列表中丢弃数个参与者或单个参与者。如果所有的参与者挂断，则电话会议也将终止。
通常在电话会议中，若干参与者从可能是带有扬声器电话的会议室的单个地方拨入。为了容纳该特征，系统按电话会议中的组表示具有相同拨号位置(物理电话)的用户。所述组具有诸如被静音的属性，并且当在所述组中的单个人讲话时，电话会议GUI发信号通知，讲话正在所述组内发生。
集成允许电话会议度量(metrics)由IM应用校准，如谁曾经或正说得最多、参与者的数量、会议长度、相对沉默的谈话时间等等。这些度量在电话会议期间或之后，可以实时图形或条形图可视化。
最后，在正在进行的电话会议期间，在IM社区中的其它用户可以意识到这样的事实：通过显示“电话会议中”状态以及正在被使用的电话位置，用户处于电话会议中。这意味着他们可能对聊天是可用的，而可能不想要被邀请到另一个电话会议，直到他们完成他们当前的电话会议。这允许其他用户关于联系预定用户作出有见识的决定。
本发明的各部分通常作为计算机程序产品实现，包括一组用于控制类似设备的计算机的程序指令。这些指令可以预先加载到系统或者被记录在诸如CD-ROM的存储介质上来提供，或在诸如因特网或移动电话网络的网络上下载得到。
在不偏离本发明的范围的情况下，可以对上文作出改进和修改。

Claims (25)

1.一种系统，包括多个即时消息客户应用(202、207、208、209)，其经由计算机网络(206)通信以便实时发送和接收消息，经由电话网络(216)与n路电话会议集成。
2.如权利要求1所述的系统，其中该系统包括：多个即时消息客户应用(202、207、208、209)；即时消息服务器(204)；以及电话会议服务器(210)；全部经由计算机网络(206)连接；其中电话会议服务器(210)经由电话网络(216)启用n路电话连接。
3.如权利要求2所述的系统，其中电话会议服务器(210)包括：通信装置，用于在电话会议期间发送有关电话连接的状态的通知给即时消息服务器(204)。
4.如权利要求1至3中任何一个所述的系统，其中即时消息客户应用(202、207、208、209)包含图形用户界面(400、600)，包括用于实时显示n路电话会议的参与者的详情和参与者的电话连接的状态的装置。
5.如前述任何一个权利要求所述的系统，其中n路电话连接是到即时消息客户应用(202、207、208、209)的用户的电话装置。
6.如权利要求5所述的系统，其中附加的电话连接是到非即时消息客户应用的用户的用户(611、615)的电话装置。
7.如权利要求4至6中的任何一个所述的系统，其中图形用户界面(600)包括：用于指示电话会议中给定时间正在说话(608)的参与者的装置；用于指示响应于来自电话会议服务器(210)的通知而被激活的装置。
8.如权利要求4至7中的任何一个所述的系统，其中图形用户界面(600)包括：用户输入该用户想讲话的指示(610)的装置。
9.如权利要求2至8中的任何一个所述的系统，其中电话会议服务器(210)使用与电话网络(216)接口的桥接器(212)，该桥接器解释有关电话会议的建立和控制命令。
10.如权利要求9所述的系统，其中电话会议服务器允许系统利用不同的网络接口(238、240、242)。
11.如权利要求2至10中的任何一个所述的系统，其中电话会议服务器(210)包括允许即时消息客户应用(202)建立和控制电话会议的接口(232)。
12.如权利要求2至11中的任何一个所述的系统，其中电话会议服务器(210)包括：用于检索和存储电话概略的电话概略服务(230)；以及用于管理包括政策信息、pin号和端口许可的电话会议概略的电话会议概略服务(234)。
13.如前述任何一个权利要求所述的系统，其中即时消息客户应用(202、207、208、209)中的一个是电话会议的主持人，并且含有包括用于控制电话会议的控制输入装置(605、606、607、603、604)的图形用户界面(400、600)。
14.如权利要求4至13中的任何一个所述的系统，其中图形用户界面(400)包括用于提供为电话会议能连接参与者的电话号码(501、512)的装置。
15.一种方法，其中多个用户每个通过即时消息经由计算机网络(206)利用即时消息客户应用(202、207、208、209)实时通信，并且能够经由电话网络(216)由n路电话会议同时连接。
16.如权利要求15所述的方法，其中该方法包括：多个即时消息应用(202、207、208、209)在计算机网络(206)上经由即时消息服务器(204)利用即时消息通信；以及利用在计算机网络(206)上的电话会议服务器(210)经由电话网络(216)建立n路电话连接。
17.如权利要求15或权利要求16所述的方法，其中即时消息客户应用(202)的用户利用与电话会议服务器(210)的即时消息通信，建立和控制电话会议。
18.如权利要求17所述的方法，其中发起电话会议的用户以邀请(510)的形式发送即时消息到建议的电话会议参与者。
19.如权利要求15至18的任何一个所述的方法，其中非即时消息应用用户通过他们自己拨入或由另一个参与者拨入(612)也能够参与n路电话会议。
20.如权利要求16至19的任何一个所述的方法，其中电话会议服务器(210)通知即时消息服务器(204)有关电话连接的状态。
21.如权利要求15至20的任何一个所述的方法，其中所述方法包括：为即时消息客户应用(202、207、208、209)提供图形用户界面(400、600)，包括实时显示n路电话会议的参与者的详情以及参与者的电话连接的状态。
22.如权利要求21所述的方法，其中所述方法包括：在电话会议中在给定时间正在讲话的参与者的图形用户界面(600)中激活指示(608)，以响应从电话会议服务器(210)发送的通知。
23.如权利要求21或权利要求22所述的方法，其中所述方法包括：用户在图形用户界面中输入电话号码(501、512)，据此对建议的电话会议能够联系到他们。
24.一种计算机程序，存储在计算机可读存储介质上，包括：计算机可读程序代码装置，用于执行以下步骤：提供即时消息客户应用(202)，用于通过在计算机网络(206)上经由即时消息服务器(204)传递的即时消息，和其他的即时消息客户应用(207、208、209)通信；提供对即时消息客户应用(202)的扩展，用于利用经由电话网络(216)使能n路电话连接的计算机网络(206)上的电话会议服务器(210)，使能电话会议。
25.一种在计算机可读存储器介质上存储的计算机程序，包括计算机可读程序代码装置，用于执行以下步骤：提供在计算机网络(206)上经由即时消息服务器(204)利用即时消息通信的多个即时消息应用(202、207、208、209)；以及利用计算机网络(206)上的电话会议服务器(210)经由电话网络(216)建立n路电话连接。
CN2004800297686A 2003-10-17 2004-09-27 用于集成即时消息和基于pstn的电话会议的方法和系统 Expired - Fee Related CN1868164B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB0324289.8 2003-10-17
GBGB0324289.8A GB0324289D0 (en) 2003-10-17 2003-10-17 Method and system for integration of instant messaging and teleconferencing via a telephone network
PCT/EP2004/052329 WO2005041086A1 (en) 2003-10-17 2004-09-27 Method and system for integration of instant messaging and pstn based teleconferencing

Publications (2)

Publication Number Publication Date
CN1868164A true CN1868164A (zh) 2006-11-22
CN1868164B CN1868164B (zh) 2011-04-20

Family

ID=29559439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2004800297686A Expired - Fee Related CN1868164B (zh) 2003-10-17 2004-09-27 用于集成即时消息和基于pstn的电话会议的方法和系统

Country Status (5)

Country Link
US (1) US7685235B2 (zh)
CN (1) CN1868164B (zh)
GB (1) GB0324289D0 (zh)
TW (1) TWI373252B (zh)
WO (1) WO2005041086A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101272358B (zh) * 2008-05-05 2010-09-22 中国移动通信集团公司 在即时通信中展示用户群通信能力的方法、设备及系统
CN101272264B (zh) * 2008-05-09 2010-10-13 上海华平信息技术股份有限公司 整合即时通讯、网络会议及监控系统的方法
CN101917466A (zh) * 2010-08-02 2010-12-15 杭州世导通讯有限公司 仿真动态会议桌面与itu-isup消息融合的系统及实施方法
CN102143289A (zh) * 2010-10-27 2011-08-03 华为软件技术有限公司 电话会议的处理方法及设备
CN102160330A (zh) * 2009-06-30 2011-08-17 上海贝尔股份有限公司 实现电话会议的方法
CN102413072A (zh) * 2011-11-25 2012-04-11 华为技术有限公司 网络会议中的即时消息处理方法及处理系统
CN102461141A (zh) * 2009-04-14 2012-05-16 思杰系统有限公司 用于在电话会议期间经由pstn电话传输计算机和语音会议音频的系统和方法
CN105187678A (zh) * 2014-06-04 2015-12-23 深圳市潮流网络技术有限公司 一种电话会议室桥接的方法及VoIP服务器
CN105991854A (zh) * 2014-09-29 2016-10-05 上海兆言网络科技有限公司 一种智能终端上VoIP电话会议可视化的系统及方法
CN109802913A (zh) * 2017-11-15 2019-05-24 腾讯科技（深圳）有限公司 融合会议实现方法及装置、电子设备、可读存储介质
CN113396576A (zh) * 2019-02-08 2021-09-14 微软技术许可有限责任公司 选择用于拨出的桥接电话号码
CN113810204A (zh) * 2020-06-12 2021-12-17 深圳兆日科技股份有限公司 线上会议的主持人确定方法、装置、设备及存储介质

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9002949B2 (en) 2004-12-01 2015-04-07 Google Inc. Automatically enabling the forwarding of instant messages
US8060566B2 (en) 2004-12-01 2011-11-15 Aol Inc. Automatically enabling the forwarding of instant messages
US7730143B1 (en) 2004-12-01 2010-06-01 Aol Inc. Prohibiting mobile forwarding
US9514441B2 (en) 2005-06-17 2016-12-06 Blackberry Limited Method and apparatus for switching between concurrent messaging sessions
ES2733916T3 (es) * 2005-06-17 2019-12-03 Blackberry Ltd Método y aparato para cambiar entre sesiones simultáneas de mensajes
GB2437785A (en) 2006-05-02 2007-11-07 Skype Ltd Voice over internet protocol (VOIP) group conference communication
US8266535B2 (en) 2006-09-11 2012-09-11 Broadnet Teleservices, Llc Teleforum apparatus and method
US20080183814A1 (en) * 2007-01-29 2008-07-31 Yahoo! Inc. Representing online presence for groups
US8265793B2 (en) * 2007-03-20 2012-09-11 Irobot Corporation Mobile robot for telecommunication
GB2460896A (en) * 2008-06-18 2009-12-23 Skype Ltd Indicating the participation status of members in a conference or group communication event
GB2460897A (en) 2008-06-18 2009-12-23 Skype Ltd Authorising and adding a user to a conference event by determining if a set up request received from the user is associated with the conference event
US8938677B2 (en) * 2009-03-30 2015-01-20 Avaya Inc. System and method for mode-neutral communications with a widget-based communications metaphor
US8635366B2 (en) * 2009-06-11 2014-01-21 International Business Machines Corporation Communication routing
US8356102B2 (en) * 2010-02-10 2013-01-15 Microsoft Corporation Selective connection between corresponding communication components involved in a teleconference
US20110225013A1 (en) * 2010-03-10 2011-09-15 Avaya Inc Conference productivity and thick client method
CN102624637B (zh) * 2011-01-27 2016-02-24 阿里巴巴集团控股有限公司 引用通知方法及装置
CN103703719B (zh) 2011-05-31 2018-06-05 谷歌有限责任公司 使通信会话中的参与者静音的方法及设备
EP3157205B1 (en) 2011-11-02 2019-03-27 BlackBerry Limited System and method for enabling voice and video communications using a messaging application
CN103391205B (zh) * 2012-05-08 2017-06-06 阿里巴巴集团控股有限公司 群组通信信息的发送方法、客户端
US8605882B1 (en) * 2012-05-18 2013-12-10 International Business Machines Corporation Adding a teleconference caller to a group instant messaging chat
US8638919B2 (en) * 2012-05-31 2014-01-28 International Business Machines Corporation External messaging during conference call
US8972061B2 (en) 2012-11-02 2015-03-03 Irobot Corporation Autonomous coverage robot
US11627173B2 (en) 2013-03-14 2023-04-11 Comcast Cable Communications, Llc Custom content insertion for user groups
JP6471451B2 (ja) * 2014-10-16 2019-02-20 株式会社リコー 伝送システム、通信制御装置、通信制御方法、通信方法、プログラム
US9704043B2 (en) 2014-12-16 2017-07-11 Irobot Corporation Systems and methods for capturing images and annotating the captured images with information
US10404646B2 (en) 2016-01-26 2019-09-03 Avaya Inc. Integration of real-time and non-real-time communications
CN108347337B (zh) * 2017-01-23 2022-03-01 腾讯科技（深圳）有限公司 会议通信方法和装置
US10528759B2 (en) 2017-10-17 2020-01-07 Aagey Holding, LLC Application programming interface bridge for transporting a local request from a local client system to a target server system, and method thereof
US10951738B1 (en) 2020-08-06 2021-03-16 Bank Of America Corporation Automatic API integration
US20220353217A1 (en) * 2021-04-29 2022-11-03 Microsoft Technology Licensing, Llc Online meeting phone and chat connectivity

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5916302A (en) * 1996-12-06 1999-06-29 International Business Machines Corporation Multimedia conferencing using parallel networks
US6564261B1 (en) * 1999-05-10 2003-05-13 Telefonaktiebolaget Lm Ericsson (Publ) Distributed system to intelligently establish sessions between anonymous users over various networks
US20020078150A1 (en) * 2000-12-18 2002-06-20 Nortel Networks Limited And Bell Canada Method of team member profile selection within a virtual team environment
US7085258B2 (en) * 2001-07-19 2006-08-01 International Business Machines Corporation Instant messaging with voice conversation feature
US6931113B2 (en) * 2002-11-08 2005-08-16 Verizon Services Corp. Facilitation of a conference call
US20040125932A1 (en) * 2002-12-27 2004-07-01 International Business Machines Corporation Conference calls augmented by visual information
US7139379B2 (en) * 2003-06-19 2006-11-21 International Business Machines Corporation Monitoring telephone conferences through a network of computer controlled display terminals, each associated with a telephone station and displaying a user-interactive monitoring page

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101272358B (zh) * 2008-05-05 2010-09-22 中国移动通信集团公司 在即时通信中展示用户群通信能力的方法、设备及系统
CN101272264B (zh) * 2008-05-09 2010-10-13 上海华平信息技术股份有限公司 整合即时通讯、网络会议及监控系统的方法
CN102461141A (zh) * 2009-04-14 2012-05-16 思杰系统有限公司 用于在电话会议期间经由pstn电话传输计算机和语音会议音频的系统和方法
CN102160330A (zh) * 2009-06-30 2011-08-17 上海贝尔股份有限公司 实现电话会议的方法
CN101917466A (zh) * 2010-08-02 2010-12-15 杭州世导通讯有限公司 仿真动态会议桌面与itu-isup消息融合的系统及实施方法
CN102143289A (zh) * 2010-10-27 2011-08-03 华为软件技术有限公司 电话会议的处理方法及设备
CN102143289B (zh) * 2010-10-27 2015-01-21 华为软件技术有限公司 电话会议的处理方法及设备
US9467404B2 (en) 2011-11-25 2016-10-11 Huawei Technologies Co., Ltd. Processing method and processing system for instant messages in network conference
CN102413072A (zh) * 2011-11-25 2012-04-11 华为技术有限公司 网络会议中的即时消息处理方法及处理系统
CN105187678A (zh) * 2014-06-04 2015-12-23 深圳市潮流网络技术有限公司 一种电话会议室桥接的方法及VoIP服务器
CN105187678B (zh) * 2014-06-04 2019-04-23 深圳市潮流网络技术有限公司 一种电话会议室桥接的方法及VoIP服务器
CN105991854A (zh) * 2014-09-29 2016-10-05 上海兆言网络科技有限公司 一种智能终端上VoIP电话会议可视化的系统及方法
CN105991854B (zh) * 2014-09-29 2020-03-13 上海兆言网络科技有限公司 一种智能终端上VoIP电话会议可视化的系统及方法
CN109802913A (zh) * 2017-11-15 2019-05-24 腾讯科技（深圳）有限公司 融合会议实现方法及装置、电子设备、可读存储介质
CN109802913B (zh) * 2017-11-15 2022-07-19 腾讯科技（深圳）有限公司 融合会议实现方法及装置、电子设备、可读存储介质
CN113396576A (zh) * 2019-02-08 2021-09-14 微软技术许可有限责任公司 选择用于拨出的桥接电话号码
CN113396576B (zh) * 2019-02-08 2023-06-23 微软技术许可有限责任公司 选择用于拨出的桥接电话号码
CN113810204A (zh) * 2020-06-12 2021-12-17 深圳兆日科技股份有限公司 线上会议的主持人确定方法、装置、设备及存储介质

Also Published As

Publication number Publication date
GB0324289D0 (en) 2003-11-19
WO2005041086A1 (en) 2005-05-06
US7685235B2 (en) 2010-03-23
TWI373252B (en) 2012-09-21
US20090006555A1 (en) 2009-01-01
TW200529640A (en) 2005-09-01
CN1868164B (zh) 2011-04-20

Similar Documents

Publication Publication Date Title
CN1868164B (zh) 用于集成即时消息和基于pstn的电话会议的方法和系统
US7603412B2 (en) System and method for collaborating using instant messaging in multimedia telephony-over-LAN conferences
EP2599291B1 (en) Method for transferring a collaboration session
KR101566180B1 (ko) 컨퍼런스 호출 스피드 다이얼링
EP1751965B1 (en) Method and System for establishing conference calls using user lists
US6584490B1 (en) System and method for providing call-handling services on a data network telephone system
US6754323B1 (en) Establishing a conference call from a call-log
CN103493465B (zh) 授权用户参与通过通信网络执行的会议
US8160223B2 (en) System and method for managing a conference call
EP2452487B1 (en) Controlling multi-party communications
US8611947B2 (en) Systems and methods for augmenting communications protocols
US8948060B2 (en) Methods and apparatus for timeslot teleconferencing
CN101926137B (zh) 管理用户之间的通信会话建立的方法和系统
AU2018208684A1 (en) User controlled call management
US7975073B2 (en) Middleware server for interfacing communications, multimedia, and management systems
US20030035381A1 (en) Network-based teleconferencing capabilities utilizing data network call set-up requests
WO2005101858A1 (en) Anonymous voice communication
JP2001298545A (ja) 電話利用型マルチメディア会議サービス提供システム
WO2001015423A1 (en) Systems and methods for providing unified multimedia communication services
US9094520B2 (en) Reconferencing capability for networked phones
CN1845501A (zh) 利用电话终端远程控制多点音/视频通信设备的方法
US8358763B2 (en) Camping on a conference or telephony port
CN100473147C (zh) 可视通信服务器及可视通信方法
US20080037446A1 (en) Facilitating connection to a conference call
US9071681B1 (en) Inbound telephony orchestrator for hangout-based contact center platform

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110420

Termination date: 20160927