CN105578109B - 一种通过即时通信系统获取视频信息的视频输出设备 - Google Patents

一种通过即时通信系统获取视频信息的视频输出设备 Download PDF

Info

Publication number
CN105578109B
CN105578109B CN201510274921.1A CN201510274921A CN105578109B CN 105578109 B CN105578109 B CN 105578109B CN 201510274921 A CN201510274921 A CN 201510274921A CN 105578109 B CN105578109 B CN 105578109B
Authority
CN
China
Prior art keywords
communication system
output device
instantaneous communication
picture output
variable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510274921.1A
Other languages
English (en)
Other versions
CN105578109A (zh
Inventor
刘晓建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingyuan Jinke Network Technology Co Ltd
Original Assignee
Qingyuan Jinke Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingyuan Jinke Network Technology Co ltd filed Critical Qingyuan Jinke Network Technology Co ltd
Priority to CN201510274921.1A priority Critical patent/CN105578109B/zh
Publication of CN105578109A publication Critical patent/CN105578109A/zh
Application granted granted Critical
Publication of CN105578109B publication Critical patent/CN105578109B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Telephonic Communication Services (AREA)

Abstract

本发明提出一种通过公众网络即时通信系统获取视频信息的视频输出设备,包括用于访问所述公众网络即时通信系统的网络接口模块、用于向视频显示设备输出图像的视频适配模块和处理单元,其特征在于:(1)所述视频输出设备内置支持了所述公众网络即时通信系统的应用层协议;(2)当所述视频输出设备接收到所述公众网络即时通信系统传送过来的视频信息后,通过所述视频适配模块,将视频信息传输给所述视频显示设备。另外,本发明提出的所述视频输出设备还可包含音频输出设备,所述视频输出设备在收到所述公众网络即时通信系统传送来的视频信息后,将所述视频信息中的音频部分通过所述音频输出设备输出。

Description

一种通过即时通信系统获取视频信息的视频输出设备
技术领域
本发明涉及视频会议领域,特别涉及一种通过公众网络即时通信系统获取视频信息的视频输出设备。
背景技术
当前在进行视频会议时,需要有相应的视频会议服务器负责对视频信息进行分发传输,这造成视频会议产品有较高的使用成本。另一方面,公众网络即时通信系统已经能够实现用户间的视频聊天,但此时视频聊天的用户必须使用较小的手机或智能手持设备观看视频,不适合在会议室用于远程视频会议,也不适合用于视力不好的老人与其家人进行视频聊天。
发明内容
有鉴于此,本发明提出一种将原本只能在公众网络即时通信系统用户手机或平板电脑上显示的视频信息显示在投影仪或电视机等大型显示设备上的装置。
本发明提出一种通过公众网络即时通信系统获取视频信息的视频输出设备,包括用于访问所述公众网络即时通信系统的网络接口模块、用于向视频显示设备输出图像的视频适配模块和处理单元,其特征在于,
(1)所述视频输出设备内置支持了所述公众网络即时通信系统的应用层协议;
(2)当所述视频输出设备接收到所述公众网络即时通信系统传送过来的视频信息后,通过所述视频适配模块,将视频信息传输给所述视频显示设备。
本发明还提出一种通过公众网络即时通信系统视频会议设备,包括用于访问所述公众网络即时通信系统的网络接口模块、用于向视频显示设备输出图像的视频适配模块、用于采集用户图像信息的摄像头、用于采集用户音频信息的麦克风,和处理单元,其特征在于,
(1)所述视频会议设备内置支持了所述公众网络即时通信系统的应用层协议;
(2)当所述视频会议设备接收到所述公众网络即时通信系统传送过来的视频信息后,通过所述视频适配模块,将视频信息传输给所述视频显示设备;
(3)所述视频会议设备通过所述公众网络即时通信系统的应用协议,将所述摄像头采集到的信息发送给使用所述公众网络即时通信系统的其它用户或设备;
(4)所述视频会议设备通过所述公众网络即时通信系统的应用协议,将所述麦克风采集到的信息发送给使用所述公众网络即时通信系统的其它用户或设备。
附图说明
图1为本发明的一种可能的具体实施方式。在图示情形中,所述视频输出设备将来自微信的视频信息中的图像部分通过VGA接口传输给投影仪显示,使用内置的扬声器播放来自微信的视频信息中的音频部分。
图2为一种使用本发明所述视频输出设备的流程。在图示流程执行前,所述视频输出设备已经登录了所述即时通信系统,但用户与所述视频输出设备在所述即时通信系统中不存在任何形式的关联关系。
图3为一种使用本发明所述视频输出设备的流程。在图示流程执行前,所述视频输出设备已经登录了所述即时通信系统,且用户已与所述视频输出设备在所述即时通信系统中建立了某种形式(比如具体实施方式中所谈的“好友关系”)的关联关系。
具体实施方式
在本发明的一种典型实施方式中,本发明所公开的视频输出设备具有无线网卡、处理器、VGA显卡、声卡、扬声器、非易失性存储器和复位按钮。
所述视频输出设备底部表面上印有二维码,该二维码可被即时通信系统(如微信、易信等)识别为自身所支持的智能设备ID或用户名。所述非易失性存储器存储了变量wlanid、变量wlanpass、变量friends、变量apass、变量hotid和变量hotpass,其中wlanid记录了无线局域网编号,wlanpass记录了无线局域网访问密码,friends记录了所述视频输出设备在所述即时通信系统内的所有好友,apass记录了在所述即时通信系统内、用户请求成为所述视频输出设备的好友时、需要向所述即时通信系统提供的好友验证信息,变量hotid记录了所述视频输出设备所创建的无线局域网热点的编号,变量hotpass记录了本设备创建的无线局域网热点hotid的接入密码。
变量apass、变量hotid、变量hotpass的初始值还以用户可读的形式被印刷在所述视频输出设备底部表面。
在所述视频输出设备出厂时,其所述非易失性存储器存储的信息为:wlanid为无效值、wlanpass为无效值、friends为空集、apass为随机生成的文本串、变量hotid为所述视频输出设备的序列号、变量hotpass为随机生成的文本串。当用户按下复位按钮后,所述变量wlanid、wlanpass、friends、apass、hotid和hotpass全部恢复相应的出厂设置。
当所述视频输出设备被加电后,其控制模块执行包括如下步骤的初始化流程:
INIT1若所述变量wlanid为无效值,则转到步骤INIT2,否则转到步骤INIT6;
INIT2创建编号为所述变量hotid、接入密码为所述变量hotpass的无线局域网热点;
INIT3在预定网络通信地址监听网络报文;
INIT4睡眠,直到被通知继续执行;
INIT5取消在步骤INIT2创建的无线局域网热点;
INIT6根据所述变量wlanid和所述变量wlanpass,接入变量wlanid对应的无线局域网;
INIT7使用所述即时通信系统的协议,向所述即时通信系统发送登录命令;
INIT8等待所述即时通信系统返回“登录成功”后继续执行;
INIT9从所述即时通信系统中拉取好友信息,更新变量friends;
INIT10监听所述即时通信系统传送来的信息。
当所述视频输出设备监听到发送到所述预定网络通信地址上的报文后,执行包含如下步骤的流程:
SET1接收网络报文,记此报文为config;
SET2若所述config为配置无线局域网报文,则转到步骤SET3,否则转到步骤SET6;
SET3令所述变量wlanid的值为所述config报文中记录的无线局域网编号;
SET4令所述变量wlanpass的值为所述config报文中记录的无线局域网密码;
SET5唤醒所述初始化流程(使得其能从步骤INIT4的睡眠中醒来);
SET6处理结束。
当所述视频输出设备监听到所述即时通信系统传送来的信息时,执行包括如下步骤的流程:
MSG0接收来自所述即时通信系统的消息,记此消息为msg;
MSG1若msg为建立视频聊天请求,则通知所述即时通信系统“视频聊天被接受”,然后处理结束;
MSG2若msg包含视频信息video,则转到步骤MSG3,否则转到步骤MSG4;
MSG3通过所述VGA显卡,将视频信息video发送给与所述视频输出设备相连接的视频显示设备;
MSG4若msg包含音频信息audio,则转到步骤MSG5,否则转到步骤MSG6;
MSG5通过所述声卡,向所述扬声器,输出audio音频;
MSG6若msg包含所述即时通信系统定义的“添加好友请求”中请求方所提供的验证码passwd,则转到步骤MSG7,否则转到步骤MSG13;
MSG7若所述passwd与所述变量apass相同,则执行步骤MSG8,否则转到步骤MSG11;
MSG8向所述即时通信系统发送“好友添加成功”消息;
MSG9将通过所述即时通信系统向所述视频输出设备发送当前消息的用户的用户名添加到集合friends中;
MSG10处理结束;
MSG11向所述即时通信系统发送“好友添加失败”消息;
MSG12处理结束;
MSG13获得通过所述即时通信系统发送当前消息的用户的用户名,将其记入变量sender中(可能是所述即时通信系统中的用户标识,也可能是可以接入所述即时通信系统的智能硬件设备标识);
MSG14若所述变量friends中包含了sender,且msg是“修改好友验证密码命令”则转到步骤MSG15,否则转到步骤MSG16;
MSG15根据msg中的信息,更新所述变量apass;
MSG16处理结束。
用户在使用本发明所述视频输出设备后,采用包含如下步骤的流程,对所述视频输出设备进行初始化设置:
CONF1在智能手机上安装本发明所述视频输出设备的APP;
CONF2将所述智能手机联入所述视频输出设备正常工作时使用的无线局域网;
CONF3将所述视频输出设备加电;
CONF4将所述智能手机联入所述视频输出设备创建的无线局域网;
CONF5启动步骤CONF1所安装的APP;
CONF6操作步骤CONF5启动的APP,使得此APP将在步骤CONF2接入的无线局域网相关信息发送给所述视频输出设备;
CONF7处理结束。
当所述视频输出设备的变量apass未被修改时,用户执行包括如下步骤的流程,以便在所述即时通信系统中添加所述视频输出设备为好友:
ADD1使用所述即时通信系统客户端软件,扫描所述视频输出设备表面上印刷的二维码;
ADD2在所述即时通信系统客户端软件的“输入好友验证信息”界面,输入所述视频输出设备底部表面印刷的变量apass的值;
用户在已成为所述视频输出设备在所述即时通信系统中的好友后,可直接对此好友(即:所述视频输出设备)发起视频聊天。
用户也可以将此好友(即:所述视频输出设备)拉入所述即时通信系统所支持的一个用户聊天群中(这里的用户可能是真实的人,也可能是其它智能设备,如可以接入所述即时通信系统的摄像头),从而使得所述视频输出设备接收到此用户群中任意用户发出的视频信息。
在上述实施方式中,所述视频输出设备被视作即时通信系统的一个普通用户。而在有的即时通信系统中,所述视频输出设备被视作可与即时通信系统进行通信的智能设备,此时,所述视频输出设备可能从即时通信系统接收到与前述“添加好友请求”功能类似的“添加被管理的设备”请求,本领域内技术人员可在以上流程的启发下,自行得到所述视频输出设备在此情形下的执行流程。
在具体实施时,也可以在对所述视频输出设备进行初始化设置时,支持用户修改变量apass的值,而不支持用户通过所述即时通信系统对变量apass值进行修改,或者两种修改方式都支持。
在有的实施方式中,所述视频输出设备具有以太网接口,从而用户可以通过以太网对所述视频输出设备进行初始化配置。所述视频输出设备也可能通过此以太网接口访问所述即时通信系统,而没有无线网卡。
在有的实施方式中,所述视频输出设备可以不具有扬声器,而是把音频信息输出到音频信号线或S端子等;而在有的实施方式中,所述视频输出设备不支持输出音频信息。
在有的实施方式中,所述视频输出设备还具有麦克风和摄像头,且支持通过所述即时通信系统的应用层协议,将麦克风和摄像头采集到的信息传送给使用所述即时通信系统的其它用户和设备,从而成为一种视频会议设备。此时,所述视频会议设备在初始化完毕后,既监听所述即时通信系统传送来的信息,也监听所述麦克风和摄像头送来的信息,并按照所述即时通信系统的应用层协议,将所述麦克风和摄像头送来的信息进行编码和发送。
在有的实施方式中,所述视频输出设备使用HDMI、或DVI、或RGB、或分量、或S端子、或USB接口等输出视频信号,且所述视频输出设备包含了相应的支持模块。本领域内技术人员应明白,无论采用何种接口输出视频信号,均落在本发明的保护范围内。

Claims (2)

1.一种通过公众网络即时通信系统获取视频信息的视频输出设备,包括用于访问所述公众网络即时通信系统的网络接口模块、用于向视频显示设备输出图像的视频适配模块和处理单元,其特征在于,
(1)所述视频输出设备内置支持了所述公众网络即时通信系统的应用层协议;
(2)当所述视频输出设备接收到所述公众网络即时通信系统传送过来的视频信息后,通过所述视频适配模块,将视频信息传输给所述视频显示设备;
所述视频输出设备具有无线网卡、处理器、VGA显卡、声卡、扬声器、非易失性存储器和复位按钮;
所述视频输出设备底部表面上印有二维码,该二维码可被即时通信系统识别为自身所支持的智能设备ID或用户名;所述非易失性存储器存储了变量wlanid、变量wlanpass、变量friends、变量apass、变量hotid和变量hotpass,其中wlanid记录了无线局域网编号,wlanpass记录了无线局域网访问密码,friends记录了所述视频输出设备在所述即时通信系统内的所有好友,apass记录了在所述即时通信系统内、用户请求成为所述视频输出设备的好友时、需要向所述即时通信系统提供的好友验证信息,变量hotid记录了所述视频输出设备所创建的无线局域网热点的编号,变量hotpass记录了本设备创建的无线局域网热点hotid的接入密码;
当所述视频输出设备被加电后,其初始化流程包括如下步骤:
INIT1若所述变量wlanid为无效值,则转到步骤INIT2,否则转到步骤INIT6;
INIT2创建编号为所述变量hotid、接入密码为所述变量hotpass的无线局域网热点;
INIT3在预定网络通信地址监听网络报文;
INIT4睡眠,直到被通知继续执行;
INIT5取消在步骤INIT2创建的无线局域网热点;
INIT6根据所述变量wlanid和所述变量wlanpass,接入变量wlanid对应的无线局域网;
INIT7使用所述即时通信系统的协议,向所述即时通信系统发送登录命令;
INIT8等待所述即时通信系统返回“登录成功”后继续执行;
INIT9从所述即时通信系统中拉取好友信息,更新变量friends;
INIT10监听所述即时通信系统传送来的信息;
当所述视频输出设备监听到发送到所述预定网络通信地址上的报文后,执行包含如下步骤的流程:
SET1接收网络报文,记此报文为config;
SET2若所述config为配置无线局域网报文,则转到步骤SET3,否则转到步骤SET6;
SET3令所述变量wlanid的值为所述config报文中记录的无线局域网编号;
SET4令所述变量wlanpass的值为所述config报文中记录的无线局域网密码;
SET5唤醒所述初始化流程,使得其能从步骤INIT4的睡眠中醒来;
SET6处理结束;
当所述视频输出设备监听到所述即时通信系统传送来的信息时,执行包括如下步骤的流程:
MSG0接收来自所述即时通信系统的消息,记此消息为msg;
MSG1若msg为建立视频聊天请求,则通知所述即时通信系统“视频聊天被接受”,然后处理结束;
MSG2若msg包含视频信息video,则转到步骤MSG3,否则转到步骤MSG4;
MSG3通过所述VGA显卡,将视频信息video发送给与所述视频输出设备相连接的视频显示设备;
MSG4若msg包含音频信息audio,则转到步骤MSG5,否则转到步骤MSG6;
MSG5通过所述声卡,向所述扬声器,输出audio音频;
MSG6若msg包含所述即时通信系统定义的“添加好友请求”中请求方所提供的验证码passwd,则转到步骤MSG7,否则转到步骤MSG13;
MSG7若所述passwd与所述变量apass相同,则执行步骤MSG8,否则转到步骤MSG11;
MSG8向所述即时通信系统发送“好友添加成功”消息;
MSG9将通过所述即时通信系统向所述视频输出设备发送当前消息的用户的用户名添加到集合friends中;
MSG10处理结束;
MSG11向所述即时通信系统发送“好友添加失败”消息;
MSG12处理结束;
MSG13获得通过所述即时通信系统发送当前消息的用户的用户名,将其记入变量sender中;
MSG14若所述变量friends中包含了sender,且msg是“修改好友验证密码命令”则转到步骤MSG15,否则转到步骤MSG16;
MSG15根据msg中的信息,更新所述变量apass;
MSG16处理结束;
对所述视频输出设备进行初始化设置包含如下步骤:
CONF1在智能手机上安装所述视频输出设备的APP;
CONF2将所述智能手机联入所述视频输出设备正常工作时使用的无线局域网;
CONF3将所述视频输出设备加电;
CONF4将所述智能手机联入所述视频输出设备创建的无线局域网;
CONF5启动步骤CONF1所安装的APP;
CONF6操作步骤CONF5启动的APP,使得此APP将在步骤CONF2接入的无线局域网相关信息发送给所述视频输出设备;
CONF7处理结束;
当所述视频输出设备的变量apass未被修改时,用户执行包括如下步骤的流程,以便在所述即时通信系统中添加所述视频输出设备为好友:
ADD1使用所述即时通信系统客户端软件,扫描所述视频输出设备表面上印刷的二维码;
ADD2在所述即时通信系统客户端软件的“输入好友验证信息”界面,输入所述视频输出设备底部表面印刷的变量apass的值;
用户在已成为所述视频输出设备在所述即时通信系统中的好友后,可直接对此好友发起视频聊天。
2.如权利要求1所述的一种视频输出设备,其特征在于,
(1)所述视频输出设备包含音频输出设备;
(2)所述视频输出设备在收到所述公众网络即时通信系统传送来的视频信息后,将所述视频信息中的音频部分通过所述音频输出设备输出。
CN201510274921.1A 2015-05-27 2015-05-27 一种通过即时通信系统获取视频信息的视频输出设备 Expired - Fee Related CN105578109B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510274921.1A CN105578109B (zh) 2015-05-27 2015-05-27 一种通过即时通信系统获取视频信息的视频输出设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510274921.1A CN105578109B (zh) 2015-05-27 2015-05-27 一种通过即时通信系统获取视频信息的视频输出设备

Publications (2)

Publication Number Publication Date
CN105578109A CN105578109A (zh) 2016-05-11
CN105578109B true CN105578109B (zh) 2019-03-12

Family

ID=55887712

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510274921.1A Expired - Fee Related CN105578109B (zh) 2015-05-27 2015-05-27 一种通过即时通信系统获取视频信息的视频输出设备

Country Status (1)

Country Link
CN (1) CN105578109B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107800861B (zh) * 2016-08-29 2023-09-22 深圳脸网科技有限公司 一种信息直接传送的社交设备、系统及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201238354Y (zh) * 2008-07-25 2009-05-13 魏俊义 一种介于电视显示器和互联网间的音视频通讯转换盒
CN101662378A (zh) * 2009-09-07 2010-03-03 孙刚 跨平台融合通讯系统及其实现方法
CN102404548A (zh) * 2011-12-28 2012-04-04 北京华环电子股份有限公司 一种车载视频会议系统
CN102665005A (zh) * 2012-04-26 2012-09-12 网经科技(苏州)有限公司 无线多媒体终端
CN202602764U (zh) * 2012-04-26 2012-12-12 网经科技(苏州)有限公司 无线多媒体终端
CN103888341A (zh) * 2014-02-25 2014-06-25 周良文 与音乐网站中对象进行社交的系统、方法
CN103944806A (zh) * 2014-04-24 2014-07-23 天脉聚源(北京)传媒科技有限公司 一种基于微信平台的数据传输方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8405702B1 (en) * 2008-11-24 2013-03-26 Shindig, Inc. Multiparty communications systems and methods that utilize multiple modes of communication

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201238354Y (zh) * 2008-07-25 2009-05-13 魏俊义 一种介于电视显示器和互联网间的音视频通讯转换盒
CN101662378A (zh) * 2009-09-07 2010-03-03 孙刚 跨平台融合通讯系统及其实现方法
CN102404548A (zh) * 2011-12-28 2012-04-04 北京华环电子股份有限公司 一种车载视频会议系统
CN102665005A (zh) * 2012-04-26 2012-09-12 网经科技(苏州)有限公司 无线多媒体终端
CN202602764U (zh) * 2012-04-26 2012-12-12 网经科技(苏州)有限公司 无线多媒体终端
CN103888341A (zh) * 2014-02-25 2014-06-25 周良文 与音乐网站中对象进行社交的系统、方法
CN103944806A (zh) * 2014-04-24 2014-07-23 天脉聚源(北京)传媒科技有限公司 一种基于微信平台的数据传输方法和系统

Also Published As

Publication number Publication date
CN105578109A (zh) 2016-05-11

Similar Documents

Publication Publication Date Title
CN106488335B (zh) 直播控制方法及装置
US20190141135A1 (en) Method and terminal for controlling internet of things and controlled electronic device
JP6986513B2 (ja) 無線通信システムにおける偽広告者検出装置及び方法
CN108377410A (zh) 电视分屏中实现视频通话的方法、装置及电视
WO2018184266A1 (zh) 直播频道中的通信方法、装置及系统
CN101702690A (zh) 嵌入式设备通过互联网即时通讯系统进行人机交互的方法
CN105474653B (zh) 未配对设备
CN109391634A (zh) 建立通信的方法、终端和计算机可读存储介质
CN106358090B (zh) 虚拟现实视频播放方法和装置、视频投射方法和装置
WO2020133495A1 (zh) 一种智能设备管理方法、移动终端及系统
CN105610777B (zh) 远程直播方法和系统
CN103841466A (zh) 屏幕投影方法、计算机端和移动终端
US10327121B2 (en) Instrument and system
US20190089693A1 (en) Systems and methods for authenticating internet-of-things devices
CN107105339B (zh) 一种播放直播视频的方法、装置和系统
CN105453576B (zh) 已配对设备
TWI521825B (zh) Wisdom home control server
KR101710404B1 (ko) Qr코드를 이용한 ip 카메라 등록 방법
CN105578109B (zh) 一种通过即时通信系统获取视频信息的视频输出设备
CN104618987B (zh) 接入网络的方法及装置
JP6367145B2 (ja) 来客通知装置、来客通知装置の制御方法、端末装置、インターホン親機、制御プログラム、および来客通知システム
CN101616290A (zh) 一种家庭多媒体系统及其实现方法
WO2012113173A1 (zh) 一种信息交互方法及系统
CN106411835B (zh) 一种基于AllJoyn Control Panel的传输方法和装置
CN106302646B (zh) 远程操作方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20190212

Address after: 511500 Qingyuan Commercial and Cultural Center D1-073 and D1-075, No. 78 Lianjiang Road, Xincheng, Qingyuan City, Guangdong Province

Applicant after: Qingyuan Jinke Network Technology Co., Ltd.

Address before: 410008 Xiangzhang Garden, Sifangping Science and Technology University, Kaifu District, Changsha City, Hunan Province, 11 buildings 104

Applicant before: Liu Xiaojian

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190312

Termination date: 20210527

CF01 Termination of patent right due to non-payment of annual fee