CN101739742A - 联网式多通道门禁考勤系统 - Google Patents

联网式多通道门禁考勤系统 Download PDF

Info

Publication number
CN101739742A
CN101739742A CN200910218072A CN200910218072A CN101739742A CN 101739742 A CN101739742 A CN 101739742A CN 200910218072 A CN200910218072 A CN 200910218072A CN 200910218072 A CN200910218072 A CN 200910218072A CN 101739742 A CN101739742 A CN 101739742A
Authority
CN
China
Prior art keywords
holder
people
smart card
var
confirmed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910218072A
Other languages
English (en)
Other versions
CN101739742B (zh
Inventor
韩秋蕾
姚志军
沈湘衡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN2009102180722A priority Critical patent/CN101739742B/zh
Publication of CN101739742A publication Critical patent/CN101739742A/zh
Application granted granted Critical
Publication of CN101739742B publication Critical patent/CN101739742B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)

Abstract

本发明涉及一种联网式多通道门禁考勤系统,该系统的摄像机采集持卡人的人脸图像,智能读卡机采集持卡人的智能卡信息;数据转换模块将摄像机和智能读卡机采集的视频数据传输到中心控制计算机中;网络接口模块用来进行网络连接;中心控制计算机对持卡人的人脸图像和智能卡信息进行确认和分析识别,从而验证持卡人是否是智能卡的真实主人;本发明能够有效的防止冒充他人进入或代人打卡考勤的行为的发生。采用基于分块主成分分析的算法,对持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认,计算量较小,分析识别快,适用于海关监控系统,门禁系统,考勤系统等应用方向。

Description

联网式多通道门禁考勤系统
技术领域
本发明涉及一种门禁考勤系统,特别涉及一种联网式多通道门禁考勤系统。
背景技术
在信息化的今天,社会和个人对安全方便的身份认证技术的需求已变得越来越紧迫。传统的个人身份鉴别主要是通过钥匙、密码、个人身份证明等物理介质,这些的方法的缺陷是容易被窃取而丧失保密的意义。而更严密的安全性往往带来很多不便。在这种情况下,利用人体自身的生物特征进行身份识别成为大势所趋。在众多的生物识别技术中,人脸识别则不需要被识别者配合,适合不希望被鉴别人察觉的场合。而且人脸识别的过程与人类的生物习惯相似,易于被大众接受,所以人脸识别是目前应用最为广泛的生物特征识别技术之一,特别是在非接触环境和不惊动被检测人的情况下,人脸识别技术的优越性远远超过已有的虹膜、指纹等检测方法。
目前基于网络的门禁系统的基本组成为摄像机、智能卡读卡机、数据转换模块、网络连接器、中心控制计算机;摄像机采集持卡人的人脸图像,智能读卡机采集持卡人的智能卡信息;数据转换模块将摄像机和智能读卡机采集的视频数据传输到中心控制计算机中;网络接口模块用来进行网络连接;中心控制计算机对持卡人的人脸图像和智能卡信息进行确认和分析识别,从而验证持卡人是否是智能卡的真实主人。若验证持卡人不是智能卡的真实主人,则启动报警系统报警。
现有的门禁系统对人脸进行确认和分析识别的软件大多是基于主动形状模型、主动外观模型、主动轮廓模型、主成分分析方法和神经网络的人脸分析和识别算法,这些方法的特点是识别率较高,缺点是算法过于复杂,计算量庞大,分析时间长,若要取得较快的计算时间需要建立在并行计算的硬件系统之上,成本较高。
发明内容
本发明要解决的技术问题是提供一种成本低、分析识别快的联网式多通道门禁考勤系统。
为了解决上述技术问题,本发明的联网式多通道门禁考勤系统包括摄像机、智能卡读卡机、数据转换模块、网络接口模块、中心控制计算机;摄像机采集持卡人的人脸图像,智能读卡机采集持卡人的智能卡信息;数据转换模块将摄像机和智能读卡机采集的视频数据传输到中心控制计算机中;网络接口模块用来进行网络连接;中心控制计算机对持卡人的人脸图像和智能卡信息进行确认和分析识别,从而验证持卡人是否是智能卡的真实主人;
所述中心控制计算机的对持卡人的人脸图像和智能卡信息进行确认和分析识别的程序流程包括如下步骤:
用于系统上电以后进行自检的步骤;
用于采集持卡人的人脸图像和智能卡信息的步骤;
用于对采集来的持卡人的人脸图像进行颜色补偿的步骤;
用于利用基于肤色的人脸检测算法确定人脸的位置,进而截取出人脸图片的步骤;
用于将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认的子程序;
所述将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认的子程序包括下述步骤:
用于建立待确认人信息数据库的步骤:
存储每个持卡人的样本图片、智能卡信息和样本图片的投影向量
Figure G2009102180722D00021
所述投影向量
Figure G2009102180722D00022
按照下述方法得到的:
对存储的每个持卡人的N张人脸样本图片x1,x2,...,xi,...,xN进行Census变换去除光照影响;将变换后的每幅图像xi分为t个子块,分别求得各子块的特征向量和特征值;根据设定的各子块的权重,对各子块选取不同数量的特征向量和特征值,组成每幅图像xi的变换矩阵并计算相应的投影向量
Figure G2009102180722D00032
用于计算持卡人人脸图片投影向量Zvar的步骤:
将采集的持卡人人脸图片数据信息xvar进行Census变换去除光照影响;将变换后的图像xvar分为t个子块,分别求得各子块的特征向量和特征值;根据设定的各子块的权重,对各子块选取不同数量的特征向量和特征值,组成图像xvar的变换矩阵
Figure G2009102180722D00033
最后求得xvar的投影向量Zvar
用于人脸确认的步骤:
在待确认人信息数据库中找到与持卡人智能卡信息对应的样本图片xi的投影向量
Figure G2009102180722D00034
计算与Zvar之间的欧氏距离
D ( Z x i , Z var ) = ( Σ i = 1 M ( Z x i - Z var ) 2 ) 1 / 2
如果
Figure G2009102180722D00038
小于设定的阈值则认为持卡人为智能卡的真实主人。
本发明是一种双重验证安防系统,一方面通过非接触性智能卡验证持卡人身份,同时还能根据人脸特征进一步验证持卡人是否是卡的真实主人,这样能够有效的防止冒充他人进入或代人打卡考勤的行为的发生。系统采用基于分块主成分分析的算法,对持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认,计算量较小,分析识别快,适用于海关监控系统,门禁系统,考勤系统等应用方向。将持卡人样本图片和人脸图片分为多个子块,根据表情变化时眼睛、鼻子变化较小,脸部、嘴部变化较大的特点,设定各子块的权重,从而对不同的人脸区域提取不同数量的特征向量,可以有效地减少表情变换对人脸比对和确认的影响。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细说明。
图1为本发明的联网式多通道门禁考勤系统的结构框图。
图2为中心控制计算机的对持卡人的人脸图像和智能卡信息进行确认和分析识别的程序流程图。
图3为用于将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认的子程序流程图。
图4为人脸图片和样本图片子块划分示意图。
具体实施方式
如图1所示,本发明的联网式多通道门禁考勤系统包括门禁终端、数据转换模块、网络接口模块、中心控制计算机。
门禁终端主要包括摄像机和智能卡读卡机,是门禁系统的数据采集模块,所有申请进入的持卡人的面部信息以及智能卡信息都由摄像机和智能读卡机收集。门禁终端还可以包括液晶显示器,液晶显示器可显示采集的持卡人人脸图像,方便持卡人确认图像采集是否正常。
数据转换模块负责将摄像机的视频信号进行A/D转换,将采集的图像数据和智能卡信息进行编码、打包,并通过网络进行传输。人脸图像数据量极大,若系统同时监控几个入口,将采集的图像数据传输到中心控制计算机,则需要很高的网络带宽才能满足数据的实时传输要求,同时会给系统的正常工作带来隐患,所以,对图像数据编码是十分必要的。我们选用蛙视公司生产的VOX-XG2000多业务光传输平台。数据转换模块还可以采用国内其他公司生产的具有实时编码解码功能的视频传输设备。
网络接口模块:多个入口的图像数据都通过网络接口模块传送给中心控制计算机。网络接口模块的作用是利用网络交换机将多个入口的网络数据汇总,通过网线连接中心控制计算机,传输数据。网络模块采用VNX-8V-8A(D)-E系列数字光端机。其通过一根光纤能够同时传输八路视频、八路透明通道(双向音频、双向数据任选)、以太网信号以及电话信号。
中心控制计算机是本发明的联网式多通道门禁考勤系统的核心,它主要完成以下任务:
接收持卡人的图像数据、智能卡信息;
利用本领域公知的方法对采集来的持卡人的人脸图像进行颜色补偿,并利用公知的基于肤色的人脸检测算法确定人脸的位置,进而截取出人脸图片,
将持卡人的人脸图片与人脸数据库中对应的智能卡主人样本图片进行比对和确认。
中心控制计算机采用高性能工作站架构的计算机或其他普通的计算机。
当持卡人与卡主身份不相符时,系统立即发出警报,关闭入口,通知保安人员去往该入口进行处理。
如图2所示,门禁系统的软件流程主要包括如下步骤:系统首先进行初始化,设置各种设备的工作模式,进行自检,在自检正常的情况下开始工作,若发现自检出现故障,发送故障信息给管理人员,请求排除故障。开始工作的情况下,首先由要求进入门禁的持卡人提出进入申请;之后,采集持卡人的正面人脸图像和智能卡信息。对采集来的人脸图像进行颜色补偿,再利用基于肤色的人脸检测算法确定人脸的位置,进而截取出人脸图片。启动将持卡人的人脸图片与数据库中对应的智能卡主人样本图片进行比对和确认的子程序;若两幅人脸图片的相似度满足要求,则认为持卡人确为智能卡主人,开启门禁;若不满足要求,则认为有他人代打卡或冒充卡主的行为发生,立刻启动报警系统。
所述将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认的子程序包括下述步骤:
用于建立待确认人信息数据库的步骤:
存储每个持卡人的样本图片、智能卡信息和样本图片的投影向量
Figure G2009102180722D00061
投影向量
Figure G2009102180722D00062
采用下述方法得到:
对存储的每个持卡人的N张人脸样本图片x1,x2,...,xi,...,xN进行Census变换(Ramin Zabih,John Woodfill,《A non-parametric approach to visualcorrespondence》,IEEE Transactions on Pattern Analysis and Machine Intelligence,1996)去除光照影响;
利用分块的主成分分析算法计算投影向量
Figure G2009102180722D00063
将变换后的每幅图像xi分为t个子块,分别求得各子块的特征向量和特征值;如图4所示,设定黑色、灰色、白色子块的权重分别为1、2、4,分别提取黑色、灰色、白色子块的前k个、2k个和4k个特征向量和特征值以组成xi的变换矩阵
Figure G2009102180722D00064
计算相应的投影向量
Figure G2009102180722D00065
用于采集持卡人人脸图片和智能卡信息的步骤;
用于计算持卡人人脸图片投影向量Zvar的步骤:
将采集的持卡人人脸图片数据信息xvar进行Census变换去除光照影响;
利用分块的主成分分析算法计算投影向量Zvar:将变换后的图像xvar分为t个子块,分别求得各子块的特征向量和特征值;如图4所示,设定黑色、灰色、白色子块的权重分别为1、2、4,分别提取黑色、灰色、白色子块的前k个、2k个和4k个特征向量和特征值,组成图像xvar的变换矩阵
Figure G2009102180722D00066
最后求得xvar的投影向量Zvar
用于人脸确认的步骤:
在待确认人信息数据库中找到与持卡人智能卡信息对应的样本图片xi的投影向量
计算
Figure G2009102180722D00072
和Zvar的欧氏距离
Figure G2009102180722D00073
D ( Z x i , Z var ) = ( Σ i = 1 M ( Z x i - Z var ) 2 ) 1 / 2
如果
Figure G2009102180722D00075
小于设定的阈值则认为持卡人为智能卡的真实主人,否则,身份被拒绝;即
其中,N、t、k的选择没有严格限制,根据硬件能够达到的处理速度,处理能力越强,N、t、k值可以选择的越大。本发明根据硬件能够达到的处理速度可以选择N为4、6或10,t可以选择为3×5个,k可以选择为10或100。各子块权重的选取不限于上述方式,可以根据表情变化时人脸不同区域变化大小选取。在不考虑表情变换对人脸比对和确认影响的情况下,各子块的权重可以全部选择为1。

Claims (1)

1.一种联网式多通道门禁考勤系统,包括摄像机、智能卡读卡机、数据转换模块、网络接口模块、中心控制计算机;摄像机采集持卡人的人脸图像,智能读卡机采集持卡人的智能卡信息;数据转换模块将摄像机和智能读卡机采集的视频数据传输到中心控制计算机中;网络接口模块用来进行网络连接;中心控制计算机对持卡人的人脸图像和智能卡信息进行确认和分析识别,从而验证持卡人是否是智能卡的真实主人;其特征在于所述中心控制计算机的对持卡人的人脸图像和智能卡信息进行确认和分析识别的程序流程包括如下步骤:
用于系统上电以后进行自检的步骤;
用于采集持卡人的人脸图像和智能卡信息的步骤;
用于对采集来的持卡人的人脸图像进行颜色补偿的步骤;
用于利用基于肤色的人脸检测算法确定人脸的位置,进而截取出人脸图片的步骤;
用于将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样本图片进行比对和确认的子程序;
所述将持卡人的人脸图片与待确认人信息数据库中对应的智能卡主人样
本图片进行比对和确认的子程序包括下述步骤:
用于建立待确认人信息数据库的步骤:
存储每个持卡人的样本图片、智能卡信息和样本图片的投影向量
Figure F2009102180722C00011
;所述投影向量
Figure F2009102180722C00012
按照下述方法得到的:
对存储的每个持卡人的N张人脸样本图片x1,x2,...,xi,...,xN进行Census变换去除光照影响;将变换后的每幅图像xi分为t个子块,分别求得各子块的特征向量和特征值;根据设定的各子块的权重,对各子块选取不同数量的特征向量和特征值,组成每幅图像xi的变换矩阵
Figure F2009102180722C00013
,并计算相应的投影向量
Figure F2009102180722C00021
用于计算持卡人人脸图片投影向量Zvar的步骤:
将采集的持卡人人脸图片数据信息xvar进行Census变换去除光照影响;将变换后的图像xvar分为t个子块,分别求得各子块的特征向量和特征值;根据设定的各子块的权重,对各子块选取不同数量的特征向量和特征值,组成图像xvar的变换矩阵
Figure F2009102180722C00022
最后求得xvar的投影向量Zvar
用于人脸确认的步骤:
在待确认人信息数据库中找到与持卡人智能卡信息对应的样本图片xi的投影向量
Figure F2009102180722C00023
计算
Figure F2009102180722C00024
与Zvar之间的欧氏距离D
Figure F2009102180722C00025
D ( Z x i , Z var ) = ( Σ i = 1 M ( Z x i - Z var ) 2 ) 1 / 2
如果D
Figure F2009102180722C00027
小于设定的阈值则认为持卡人为智能卡的真实主人。
CN2009102180722A 2009-12-22 2009-12-22 联网式多通道门禁考勤系统 Expired - Fee Related CN101739742B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009102180722A CN101739742B (zh) 2009-12-22 2009-12-22 联网式多通道门禁考勤系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009102180722A CN101739742B (zh) 2009-12-22 2009-12-22 联网式多通道门禁考勤系统

Publications (2)

Publication Number Publication Date
CN101739742A true CN101739742A (zh) 2010-06-16
CN101739742B CN101739742B (zh) 2012-03-21

Family

ID=42463187

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009102180722A Expired - Fee Related CN101739742B (zh) 2009-12-22 2009-12-22 联网式多通道门禁考勤系统

Country Status (1)

Country Link
CN (1) CN101739742B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102063656A (zh) * 2010-12-23 2011-05-18 哈尔滨伟德大药房医药有限公司 图像考勤信息采集系统及基于该系统的人事管理系统
CN102385767A (zh) * 2011-09-13 2012-03-21 北京邮电大学 一种基于物联网与人脸检测技术相结合的智能门禁系统及检测方法
CN104183029A (zh) * 2014-09-02 2014-12-03 济南大学 一种便携式快速人群考勤方法
CN105844737A (zh) * 2015-01-15 2016-08-10 珠海汇金科技股份有限公司 一种基于摄像头的电子锁系统和使用方法
CN105957172A (zh) * 2016-04-22 2016-09-21 广东宜教通教育有限公司 智能拍照电子屏的拍照考勤应用系统
CN107025707A (zh) * 2017-03-14 2017-08-08 深圳市瑞荣创电子科技有限公司 一种门禁身份认证系统及其认证方法
CN107705404A (zh) * 2017-10-13 2018-02-16 成都驰通数码系统有限公司 一种基于身份证件的访客管理系统及方法
CN107845168A (zh) * 2017-10-26 2018-03-27 广州云从信息科技有限公司 一种基于人脸识别认证的vip识别方法
CN108135060A (zh) * 2017-12-15 2018-06-08 江苏坤发信息科技有限公司 一种具有人员定位功能的智能矿灯的实现技术
CN109117745A (zh) * 2018-07-23 2019-01-01 青岛理工大学 一种基于建筑信息模型的云端人脸识别与定位方法
CN109255537A (zh) * 2018-09-10 2019-01-22 珠海格力电器股份有限公司 一种劳动纪律考勤管理方法及系统
CN109376880A (zh) * 2018-11-20 2019-02-22 北京千丁互联科技有限公司 故障反馈方法、装置和门禁设备
CN116524635A (zh) * 2023-06-29 2023-08-01 广东征安科技有限公司 智能门锁控制方法、系统、设备及介质
CN117011963A (zh) * 2023-10-07 2023-11-07 四川金投科技股份有限公司 一种基于电子钥匙的智能锁及智能门控系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9201006D0 (en) * 1992-01-17 1992-03-11 Philip Electronic And Associat Classifying faces
TW265459B (zh) * 1994-06-09 1995-12-11 Texas Instruments Inc
CN1320476C (zh) * 2002-08-05 2007-06-06 北京中星微电子有限公司 面部识别式门控制装置和方法
CN101030244B (zh) * 2006-03-03 2010-08-18 中国科学院自动化研究所 基于人体生理图像中排序测度特征的自动身份识别方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102063656A (zh) * 2010-12-23 2011-05-18 哈尔滨伟德大药房医药有限公司 图像考勤信息采集系统及基于该系统的人事管理系统
CN102385767A (zh) * 2011-09-13 2012-03-21 北京邮电大学 一种基于物联网与人脸检测技术相结合的智能门禁系统及检测方法
CN104183029A (zh) * 2014-09-02 2014-12-03 济南大学 一种便携式快速人群考勤方法
CN105844737A (zh) * 2015-01-15 2016-08-10 珠海汇金科技股份有限公司 一种基于摄像头的电子锁系统和使用方法
CN105957172A (zh) * 2016-04-22 2016-09-21 广东宜教通教育有限公司 智能拍照电子屏的拍照考勤应用系统
CN107025707A (zh) * 2017-03-14 2017-08-08 深圳市瑞荣创电子科技有限公司 一种门禁身份认证系统及其认证方法
CN107705404A (zh) * 2017-10-13 2018-02-16 成都驰通数码系统有限公司 一种基于身份证件的访客管理系统及方法
CN107845168A (zh) * 2017-10-26 2018-03-27 广州云从信息科技有限公司 一种基于人脸识别认证的vip识别方法
CN108135060A (zh) * 2017-12-15 2018-06-08 江苏坤发信息科技有限公司 一种具有人员定位功能的智能矿灯的实现技术
CN109117745A (zh) * 2018-07-23 2019-01-01 青岛理工大学 一种基于建筑信息模型的云端人脸识别与定位方法
CN109117745B (zh) * 2018-07-23 2021-11-09 青岛理工大学 一种基于建筑信息模型的云端人脸识别与定位方法
CN109255537A (zh) * 2018-09-10 2019-01-22 珠海格力电器股份有限公司 一种劳动纪律考勤管理方法及系统
CN109376880A (zh) * 2018-11-20 2019-02-22 北京千丁互联科技有限公司 故障反馈方法、装置和门禁设备
CN116524635A (zh) * 2023-06-29 2023-08-01 广东征安科技有限公司 智能门锁控制方法、系统、设备及介质
CN116524635B (zh) * 2023-06-29 2023-10-13 广东征安科技有限公司 智能门锁控制方法、系统、设备及介质
CN117011963A (zh) * 2023-10-07 2023-11-07 四川金投科技股份有限公司 一种基于电子钥匙的智能锁及智能门控系统
CN117011963B (zh) * 2023-10-07 2023-12-08 四川金投科技股份有限公司 一种基于电子钥匙的智能锁及智能门控系统

Also Published As

Publication number Publication date
CN101739742B (zh) 2012-03-21

Similar Documents

Publication Publication Date Title
CN101739742B (zh) 联网式多通道门禁考勤系统
CN106803301A (zh) 一种基于深度学习的人脸识别门禁方法及系统
CN105427421A (zh) 基于人脸识别的门禁控制方法
CA3125055A1 (en) An operation determination method based on expression groups, apparatus and electronic device therefor
CN102629320B (zh) 基于特征层定序测量统计描述的人脸识别方法
CN108108711B (zh) 人脸布控方法、电子设备及存储介质
CN102902986A (zh) 自动性别识别系统及方法
CN104700094A (zh) 一种用于智能机器人的人脸识别方法及系统
CN111611849A (zh) 一种用于门禁设备的人脸识别系统
CN111126219A (zh) 一种基于人工智能的变电站人员的身份识别系统和方法
Huang et al. Attendance system based on dynamic face recognition
CN108846269A (zh) 一种面向多种特征的身份认证方法和身份认证装置
CN103246880A (zh) 基于多阶局部显著模式特征统计的人脸识别方法
CN202815870U (zh) 一种证件照片与人脸自动识别系统
CN113239739A (zh) 一种佩戴物的识别方法及识别装置
CN105184236A (zh) 机器人人脸识别系统
CN115171260A (zh) 一种基于人脸识别的智能门禁系统
CN105550642B (zh) 基于多尺度线性差分特征低秩表示的性别识别方法及系统
CN103294981A (zh) 智能人脸识别系统
CN112580531A (zh) 一种真假车牌的识别检测方法及系统
CN101739571A (zh) 基于分块主成分分析的人脸确认装置
CN205541026U (zh) 一种双路门禁装置
CN104915590A (zh) 一种用于计算机加密的人脸识别系统及方法
CN203324988U (zh) 指纹加静脉识别双重验证系统
Kalangi et al. Deployment of Haar Cascade algorithm to detect real-time faces

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120321

Termination date: 20131222