CN102546994A - 一种多媒体会议成员实现消息交互的方法及系统 - Google Patents

一种多媒体会议成员实现消息交互的方法及系统 Download PDF

Info

Publication number
CN102546994A
CN102546994A CN2010106124565A CN201010612456A CN102546994A CN 102546994 A CN102546994 A CN 102546994A CN 2010106124565 A CN2010106124565 A CN 2010106124565A CN 201010612456 A CN201010612456 A CN 201010612456A CN 102546994 A CN102546994 A CN 102546994A
Authority
CN
China
Prior art keywords
client
conference
application server
request
instant message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010106124565A
Other languages
English (en)
Other versions
CN102546994B (zh
Inventor
许培华
陆剑峰
梁斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201010612456.5A priority Critical patent/CN102546994B/zh
Priority to PCT/CN2011/077650 priority patent/WO2012088880A1/zh
Publication of CN102546994A publication Critical patent/CN102546994A/zh
Application granted granted Critical
Publication of CN102546994B publication Critical patent/CN102546994B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明披露了一种多媒体会议成员实现消息交互的方法及系统,涉及参与多媒体会议业务的应用服务器和多个客户端,该方法包括:设置多媒体会议业务下的即时消息聊天功能;应用服务器创建多媒体会议成功,根据客户端发起的会场订阅请求将会议信息和会议成员信息返回给相应的客户端;应用服务器收到作为会议成员的客户端发送的即时消息聊天请求后,将客户端发送的即时消息向相应的其它客户端转发。本发明能够在多媒体会议系统中实现会议成员间的私人即时消息聊天、多人即时消息群聊的功能,从而丰富了多媒体会议业务的应用场景,提高了业务的用户体验。

Description

一种多媒体会议成员实现消息交互的方法及系统
技术领域
本发明涉及下一代通信网络(NGN,Next Generation Network)或IP多媒体子系统(IMS,IP Multimedia Subsystem)通信网络下多媒体会议成员实现消息交互的方法和系统。
背景技术
随着互联网的广泛普及,以及NGN和IMS通信网络的应用领域的不断扩大,相关的基于NGN和IMS的智能业务也越来越多;其中,即时消息(Instant Message)聊天和多媒体会议是二种比较典型的业务。在多媒体会议中,参与会议的成员可以直接通过音视频进行相互通信。在即时消息聊天应用中,用户通过定制PC客户端发起即时消息聊天,向指定的好友发送即时消息。这两种业务丰富和方便了人们对于通信的各类需求。
但是,目前大多数的多媒体会议业务,都比较侧重于音视频的功能,提供了丰富的音视频通信方式,却缺少一些私密性的通信方式;即会议中所有的用户均可以听到其中任意一个会议成员的发言或视频,而当会议成员想与会议中的某个或某些成员进行私下讨论,或发送一些私密性的东西,不便在会议中通过音频或视频表达时,就缺少一种适合此场景的通信方式。而在即时消息聊天业务中,提供了很好的隐私性,但在大多数即时消息聊天应用中,又缺少多媒体会议的通信方式。因此,无法将多媒体会议业务需要的通信方式运用在即时消息聊天业务,反之亦然。
所以,需要为多媒体会议业务提供即时消息聊天功能,从而为用户提供更多、更灵活的通信方式,这无疑会提高用户应用业务的体验。
发明内容
本发明所要解决的技术问题是提供一种多媒体会议成员实现消息交互的方法及系统,能够为多媒体会议业务提供即时消息聊天功能。
为了解决上述技术问题,本发明提供了一种多媒体会议成员实现消息交互的方法,涉及参与多媒体会议业务的应用服务器和多个客户端,该方法包括:
设置多媒体会议业务下的即时消息聊天功能;
应用服务器创建多媒体会议成功,根据客户端发起的会场订阅请求将会议信息和会议成员信息返回给相应的客户端;
应用服务器收到作为会议成员的客户端发送的即时消息聊天请求后,将客户端发送的即时消息向相应的其它客户端转发。
进一步地,客户端至少包括业务定制客户端,其中包括个人计算机客户端、可定制多媒体业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;
应用服务器收到作为会议成员的业务定制客户端发送的即时消息聊天请求后,将业务定制客户端发送的即时消息向相应的其它业务定制客户端转发。
进一步地,客户端还包括普通通信终端,该普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
进一步地,应用服务器创建对媒体会议成功,根据客户端发起的会场订阅请求将会议信息和会议成员信息返回给相应的客户端,具体包括:
会议创建者客户端发起多媒体会议创建请求,该请求中指定参加会议的会议成员客户端信息;
应用服务器根据请求创建会议成功后,向指定的客户端发起会议呼叫请求,并将响应会议呼叫请求的客户端添加到创建会议的会议成员记录中;
应用服务器收到会议成员客户端发起的会场订阅请求后,将会议信息和会议成员信息返回给会议成员客户端。
进一步地,
应用服务器向即时消息聊天请求中指定的一个或多个业务定制客户端转发即时消息;或者,应用服务器向所有的业务定制客户端转发即时消息。
为了解决上述技术问题,本发明提供了一种多媒体会议成员实现消息交互的系统,包括通过通信网络参与多媒体会议业务的应用服务器和多个客户端,其中:
客户端,用于在多媒体会议业务过程中向应用服务器发送会场订阅请求,并根据应用服务器返回的会议成员信息向应用服务器发送邀请其它客户端参加即时消息聊天请求;
应用服务器,用于收到即时消息聊天请求后,将客户端发送的即时消息向相应的其它客户端转发。
进一步地,
通信网络包括核心网、局域网或广域网中的一种或多种;其中核心网包括IP多媒体子系统核心网和/或软交换核心网;
客户端至少包括业务定制客户端,其中包括个人计算机客户端、可定制多媒体会议业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;向应用服务器发送即时消息聊天请求的客户端为业务定制客户端;
应用服务器将业务定制客户端发送的即时消息向相应的其它业务定制客户端转发。
进一步地,
客户端还包括普通通信终端,该普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
进一步地,
客户端还用于作为会议主持者发起多媒体会议创建请求,请求中指定参加会议的客户端信息;
应用服务器根据该创建请求创建会议成功后,向指定的客户端发起会议呼叫请求,将应答该会议呼叫请求的客户端添加到创建会议的会议成员记录中;在收到客户端发送的会场订阅请求后,将会议信息和会议成员信息发送给相应的客户端。
进一步地,
应用服务器向即时消息聊天请求中指定的一个或多个业务定制客户端转发即时消息;或者,向所有的业务定制客户端转发即时消息。
通过本发明提供的方法或系统的技术方案,能够在多媒体会议系统中实现会议成员间的私人即时消息聊天、多人即时消息聊天和会议即时消息群聊的功能,从而丰富了多媒体会议业务的应用场景,提高了业务的用户体验。
附图说明
图1是本发明的多媒体会议成员实现消息交互的系统实施例示意图;
图2是本发明的多媒体会议成员实现消息交互的方法实施例流程图;
图3是运用本发明的方法实施例在多媒体会议成员实现即时消息的信令交互流程图。
具体实施方式
以下结合附图和优选实施例对本发明的技术方案进行详细地描述。以下例举的实施例仅用于说明和解释本发明,而不构成对本发明技术方案的限制。
如图1所示,表示了本发明的多媒体会议业务实现消息交互的系统实施例,至少包括多个客户端和应用服务器,其中:
客户端,用于通过通信网络与应用服务器交互,实现多媒体会议业务;在会议过程中,根据从应用服务器获取到的会议成员信息向应用服务器发送邀请会议成员客户端参加IM聊天的请求,随后发送IM聊天消息;
应用服务器,用于根据收到的IM聊天的请求中携带的被邀请会议成员客户端信息,将客户端发出的IM聊天消息向相应的会议成员客户端转发。
在此实施例中,客户端至少包括业务定制客户端,也可以包括普通通信终端;其中,业务定制客户端包括PC客户端、可定制多媒体业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
在此实施例中,通信网络包括核心网、局域网或广域网中的一种或多种;其中核心网既可以是IMS核心网,也可以是软交换(SS,Soft switch)核心网。
在此实施例中,客户端与应用服务器交互实现多媒体会议业务:
会议主持者客户端发起多媒体会议创建请求,请求中指定参加会议的会议成员客户端信息;
应用服务器根据该请求创建会议成功后,向指定的客户端发起会议呼叫请求,将响应会议呼叫请求的客户端添加到创建会议的会议成员中;在收到客户端发起的会场订阅请求后,将会议信息和会议成员信息发送给相应的客户端。
针对上述系统实施例,本发明相应地还提供了多媒体会议业务实现消息通信的方法实施例,其流程如图2所示,包括如下步骤:
210:在设置多媒体会议业务的应用服务器和多个客户端的同时,设置该多媒体业务下的IM聊天功能;
客户端至少包括业务定制客户端,也可以包括普通通信终端;其中,业务定制客户端包括PC客户端、可定制多媒体业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
220:应用服务器创建对媒体会议成功,根据客户端发起的会场订阅请求将会议信息和会议成员信息发送给相应的会议成员客户端;
230:应用服务器收到会议成员客户端发送的IM聊天消息请求后,根据请求中携带被邀请参加IM聊天的客户端信息,将IM聊天消息向相应的会议成员客户端转发。
被邀请参加IM聊天的客户端信息包括客户端在通信网络上的IP地址;通信网络包括核心网、局域网或广域网中的一种或多种;其中核心网既可以是IMS核心网,也可以是SS核心网。
步骤220具体包括:
2201:会议主持者客户端发起多媒体会议创建请求,请求中指定参加会议的会议成员客户端信息;
2202:应用服务器根据该请求创建会议成功后,向指定的客户端发起会议呼叫请求,并将响应会议呼叫请求的客户端添加到创建会议的会议成员中;
2203:应用服务器收到客户端发起的会场订阅请求后,将会议信息和会议成员信息发送到相应的客户端。
图3表示的是运用本发明的方法实施例在多媒体会议中实现即时消息聊天的信令交互流程,包括:
步骤1:会议创建者(或会议主持者)向应用服务器发起创建IM多媒体会议请求;
步骤2:应用服务器根据该会议请求创建会议成功;
步骤3~6:应用服务器根据会议请求中携带的被邀请参见会议的客户端信息呼叫相应的客户端,将返回应答的客户端添加到创建会议的会议成员中;被呼叫的客户端参加到创建会议中进行会议业务;
会议成员至少包括业务定制客户端,也可以包括普通通信终端;其中定制客户端包括PC客户端、可定制多媒体业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
业务定制客户端可以与应用服务器通过标准协议进行通信,以便参与会议过程中进行即时消息聊天。
应用服务器向客户端发起的会议呼叫中带有多媒体会议的标识,以便业务定制客户端可以识别出此呼叫为一个多媒体会议呼叫,业务定制客户端接听后即主动向应用服务器发起对会场的订阅请求,以便获取到当前会议的成员记录信息。
步骤7~10:应用服务器收到客户端发起的会场订阅请求后,将会议信息和会议成员信息发送到相应的客户端;
应用服务器将会议成员信息发送给客户端时,会议成员信息中含有标识表示该会议成员为业务定制客户端还是普通通信终端,以便业务定制客户端可以识别出当前会议成员中哪些成员是有能力接收即时消息的。
步骤11:业务定制客户端在会议过程中向应用服务器发送IM聊天请求,并得到应用服务器的IM聊天响应;
步骤12、13:该业务定制客户端随后将IM聊天消息向应用服务器,由应用服务器根据IM聊天请求中携带的被邀请参加IM聊天的其它业务定制客户端信息,将IM聊天消息转发给相应的业务定制客户端;则业务定制客户端在应用服务器的控制下进行IM聊天业务。
业务定制客户端向应用服务器发起即时消息聊天请求时,可以指定一个或多个会议成员,则应用服务器只向指定的会议成员发送即时消息聊天消息;或者也可以不指定接收成员,应用服务器向所有的会议成员发送即时消息。
这样,在多媒体会议过程便中可以向会议成员同时提供私人即时消息聊天、多人即时消息聊天、会议即时消息群聊的功能。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种多媒体会议成员实现消息交互的方法,涉及参与多媒体会议业务的应用服务器和多个客户端,该方法包括:
设置所述多媒体会议业务下的即时消息聊天功能;
所述应用服务器创建多媒体会议成功,根据所述客户端发起的会场订阅请求将会议信息和会议成员信息返回给相应的客户端;
所述应用服务器收到作为会议成员的客户端发送的即时消息聊天请求后,将所述客户端发送的即时消息向相应的其它客户端转发。
2.按照权利要求1所述的方法,其特征在于,所述客户端至少包括业务定制客户端,其中包括个人计算机客户端、可定制多媒体业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;
所述应用服务器收到作为会议成员的业务定制客户端发送的即时消息聊天请求后,将业务定制客户端发送的即时消息向相应的其它业务定制客户端转发。
3.按照权利要求2所述的方法,其特征在于,所述客户端还包括普通通信终端,所述普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
4.按照权利要求1至3任一项所述的方法,其特征在于,所述应用服务器创建对媒体会议成功,根据所述客户端发起的会场订阅请求将会议信息和会议成员信息返回给相应的客户端,具体包括:
会议创建者客户端发起多媒体会议创建请求,请求中指定参加所述会议的会议成员客户端信息;
所述应用服务器根据所述请求创建所述会议成功后,向指定的客户端发起会议呼叫请求,并将响应会议呼叫请求的客户端添加到创建会议的会议成员记录中;
所述应用服务器收到会议成员客户端发起的会场订阅请求后,将会议信息和会议成员信息返回给所述会议成员客户端。
5.按照权利要求2所述的方法,其特征在于,
所述应用服务器向所述即时消息聊天请求中指定的一个或多个所述业务定制客户端转发所述即时消息;或者,应用服务器向所有的所述业务定制客户端转发所述即时消息。
6.一种多媒体会议成员实现消息交互的系统,包括通过通信网络参与多媒体会议业务的应用服务器和多个客户端,其中:
所述客户端,用于在所述多媒体会议业务过程中向所述应用服务器发送会场订阅请求,并根据所述应用服务器返回的会议成员信息向所述应用服务器发送邀请其它客户端参加即时消息聊天请求;
所述应用服务器,用于收到所述即时消息聊天请求后,将所述客户端发送的即时消息向相应的其它客户端转发。
7.按照权利要求6所述的系统,其特征在于,
所述通信网络包括核心网、局域网或广域网中的一种或多种;其中核心网包括IP多媒体子系统核心网和/或软交换核心网;
所述客户端至少包括业务定制客户端,其中包括个人计算机客户端、可定制多媒体会议业务的电视终端以及其它可进行网上多媒体业务的手机终端中的一种或多种;向所述应用服务器发送所述即时消息聊天请求的所述客户端为所述业务定制客户端;
所述应用服务器将业务定制客户端发送的即时消息向相应的其它业务定制客户端转发。
8.按照权利要求7所述的系统,其特征在于,
所述客户端还包括普通通信终端,所述普通通信终端包括普通的固定电话终端、移动电话终端中的一种或多种。
9.按照权利要求6至9任一项所述的系统,其特征在于,
所述客户端还用于作为会议主持者发起多媒体会议创建请求,请求中指定参加会议的客户端信息;
所述应用服务器根据所述创建请求创建会议成功后,向指定的客户端发起会议呼叫请求,将应答所述会议呼叫请求的客户端添加到创建会议的会议成员记录中;在收到所述客户端发送的所述会场订阅请求后,将会议信息和所述会议成员信息发送给相应的客户端。
10.按照权利要求7所述的系统,其特征在于,
所述应用服务器向所述即时消息聊天请求中指定的一个或多个所述业务定制客户端转发所述即时消息;或者,向所有的所述业务定制客户端转发所述即时消息。
CN201010612456.5A 2010-12-29 2010-12-29 一种多媒体会议成员实现消息交互的方法及系统 Expired - Fee Related CN102546994B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201010612456.5A CN102546994B (zh) 2010-12-29 2010-12-29 一种多媒体会议成员实现消息交互的方法及系统
PCT/CN2011/077650 WO2012088880A1 (zh) 2010-12-29 2011-07-27 多媒体会议成员实现消息交互的方法、系统及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010612456.5A CN102546994B (zh) 2010-12-29 2010-12-29 一种多媒体会议成员实现消息交互的方法及系统

Publications (2)

Publication Number Publication Date
CN102546994A true CN102546994A (zh) 2012-07-04
CN102546994B CN102546994B (zh) 2015-01-28

Family

ID=46352919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010612456.5A Expired - Fee Related CN102546994B (zh) 2010-12-29 2010-12-29 一种多媒体会议成员实现消息交互的方法及系统

Country Status (2)

Country Link
CN (1) CN102546994B (zh)
WO (1) WO2012088880A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104022941A (zh) * 2014-06-23 2014-09-03 国家电网公司 一种会议即时通讯系统及其实现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060023062A1 (en) * 2004-08-02 2006-02-02 Polycom, Inc. Method and system for handling video signals of conference
WO2007053286A2 (en) * 2005-10-12 2007-05-10 First Data Corporation Video conferencing systems and methods
CN1964475A (zh) * 2006-12-06 2007-05-16 杭州华为三康技术有限公司 视频会议的实现方法、控制设备与用户终端
CN101257395A (zh) * 2007-02-27 2008-09-03 中国移动通信集团公司 支持多媒体会议预约的系统及方法
CN101682617A (zh) * 2007-05-11 2010-03-24 艾利森电话股份有限公司 群呼叫能力查询

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060023062A1 (en) * 2004-08-02 2006-02-02 Polycom, Inc. Method and system for handling video signals of conference
WO2007053286A2 (en) * 2005-10-12 2007-05-10 First Data Corporation Video conferencing systems and methods
CN1964475A (zh) * 2006-12-06 2007-05-16 杭州华为三康技术有限公司 视频会议的实现方法、控制设备与用户终端
CN101257395A (zh) * 2007-02-27 2008-09-03 中国移动通信集团公司 支持多媒体会议预约的系统及方法
CN101682617A (zh) * 2007-05-11 2010-03-24 艾利森电话股份有限公司 群呼叫能力查询

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104022941A (zh) * 2014-06-23 2014-09-03 国家电网公司 一种会议即时通讯系统及其实现方法

Also Published As

Publication number Publication date
CN102546994B (zh) 2015-01-28
WO2012088880A1 (zh) 2012-07-05

Similar Documents

Publication Publication Date Title
CN104813655B (zh) 在视频会议会话中预览呼叫方的方法
CN101257395B (zh) 支持多媒体会议预约的系统及方法
US7983201B2 (en) Coordinated invitations to a conference call
US20210084083A1 (en) Cloud based multimedia services utilizing a locus to manage real-time communications between participants
EP2124399B1 (en) A method, a device and a system for converging ip message
US20080281971A1 (en) Network multimedia communication using multiple devices
JP4299320B2 (ja) グループ通信サーバ
US20050259803A1 (en) Managing a conference session
US7653013B1 (en) Conferencing systems with enhanced capabilities
US9832087B2 (en) Enterprise integration with cloud-based multimedia system
CN103475499A (zh) 一种基于网络电话会议的语音对讲方法及系统
JP2008523662A (ja) 画像ベースのプッシュ・ツー・トークのユーザインタフェース向き画像交換方法
JP2009521038A (ja) 演算装置における通信チャネルの選択
CN102422655B (zh) 多模会话保持和恢复的方法和系统
CN102934425A (zh) 基于统一通信的多屏幕视频系统
CN101771854A (zh) 一种无线终端主动建立视频会议的方法及系统
CN102307105A (zh) 一种群组发起会议的方法
JP2004178236A (ja) 分散型コミュニケーションシステム
KR20080013684A (ko) Pt 서비스의 자동 응답 모드에서의 프라이버시 확보 방법
US8391908B2 (en) Communication systems
CN110808946A (zh) 一种融合通信系统及融合通信方法
CN103200173A (zh) 基于网络视频会议系统和电话会议系统的融合方法
CN105556980B (zh) 用于在沉浸式社交中心会话中集成内容观看和通信的方法和系统
CN100581197C (zh) 一种获取媒体特征信息的方法和系统以及终端设备
CN101026812B (zh) 在多方通信系统中获得会话参与用户会话能力的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150128

Termination date: 20191229

CF01 Termination of patent right due to non-payment of annual fee