CN101673398B - 基于免疫稀疏谱聚类的图像分割方法 - Google Patents

基于免疫稀疏谱聚类的图像分割方法 Download PDF

Info

Publication number
CN101673398B
CN101673398B CN2009100243746A CN200910024374A CN101673398B CN 101673398 B CN101673398 B CN 101673398B CN 2009100243746 A CN2009100243746 A CN 2009100243746A CN 200910024374 A CN200910024374 A CN 200910024374A CN 101673398 B CN101673398 B CN 101673398B
Authority
CN
China
Prior art keywords
mrow
msub
munderover
antibody
affinity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2009100243746A
Other languages
English (en)
Other versions
CN101673398A (zh
Inventor
缑水平
焦李成
张佳
杨淑媛
钟桦
吴建设
田小林
庄雄
毛莎莎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN2009100243746A priority Critical patent/CN101673398B/zh
Publication of CN101673398A publication Critical patent/CN101673398A/zh
Application granted granted Critical
Publication of CN101673398B publication Critical patent/CN101673398B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开了一种基于免疫稀疏谱聚类的图像分割方法,主要解决谱聚类方法稳定性差和复杂度高的问题。其实现过程是:(1)对待分割图像提取特征;(2)对特征数据进行归一化以去除数据间量级影响;(3)对归一化后的特征数据,进行实属编码;(4)对编码后的数据,随机生成初始种群并进行亲和度计算;(5)根据抗体的亲和度大小进行克隆;(6)对克隆后的抗体种群进行高斯变异并选出亲和度最高的抗体作为下一轮的输入;(7)迭代设定的最大迭代次数,得到最终选出的样本子集;(8)对选出的样本子集进行贪婪谱降维,并对降维后的数据聚类,输出最终的图象分割结果。本发明与现有的技术相比具有不需要先验知识,准确度高,计算复杂度低的优点,可用于目标检测和目标识别。

Description

基于免疫稀疏谱聚类的图像分割方法
技术领域
本发明属于图像处理技术领域,涉及图像分割,可用于对纹理图像和SAR图像进行目标检测和目标识别。
背景技术
聚类是指把一个没有类别标记的样本集按某种准则划分成若干个子集或类别,使相似的样本尽可能归为一类,而不相似的样本尽量划分到不同的类中。聚类分析是多元统计分析的一种,也是非监督模式识别的一个重要分支。作为一种无监督分类方法,聚类分析已经被广泛地应用于模式识别、数据挖掘、计算机视觉和模糊控制等许多领域。传统的聚类算法,如k-means算法,EM算法等都是建立在凸球形的样本空间上,但当样本空间不为凸时,算法会陷入局部最优。
谱聚类方法能在任意形状的样本空间上聚类,且收敛于全局最优解。该算法具有实现简单,与维数无关,以及全局寻优的良好特性,因此得到了越来越广泛的应用。谱聚类方法仅仅考虑所有样本的权值矩阵,也叫相似性矩阵,它将聚类问题转化为无向图划分问题。但是,谱聚类方法需要计算一个n×n权值矩阵的主要特征向量,n是样本个数。这对于大规模数据,计算量是相当大的,这也成为了谱聚类方法的瓶颈问题。
Fowlkes等人提出了基于逼近的谱聚类方法。该方法首先从所有样本中随机选取一个样本子集作为代表求解特征问题,然后再将其特征向量扩展为整个样本集合权值矩阵的特征向量。然而,选取结果对聚类影响很大,聚类结果表现出不稳定性。2005年Marie Ouimet等人提出的贪婪谱聚类方法很好的解决了这个问题。贪婪谱聚类方法用贪婪选取替代随机选取选出代表全部样本的样本子集,并用包括所选的和未选的所有样本,来估计特征空间的协方差矩阵。这使得聚类结果的稳定性和准确率都大大提高。但是,与
Figure G2009100243746D00012
方法不同,贪婪谱聚类方法采用容差作为重要的输入参数。容差实际上直接决定了选取样本子集的大小。为了输入合适的容差来控制选取个数,需要预先知道容差和选取个数之间的关系。这在实践中无论是计算量上还是时间复杂度上都是有很大难度的。另一方面,即使找到了合适的容差,贪婪选取方式需要逐个依次计算用已选样本逼近当前候选样本的误差,当样本规模较大时,这个过程的计算量和时间花费很大,这就造成图象分割的速度非常慢。
发明内容
本发明的目的在于克服上述已有问题的缺点,提出了一种基于免疫稀疏谱聚类的图像分割方法,以避免贪婪谱聚类方法中合适容差的选取和所有样本误差的依次计算,降低计算复杂度,加快图像分割的速度。
为实现上述目的,本发明的具体实现过程包括如下:
(1)使用灰度共生矩阵对所待分割的图像进行特征提取;
(2)将所得的特征数据归一化到[0,1]之间,以去除数据间量级的影响;
(3)对归一化后的特征数据,使用免疫克隆选择方法选出具有代表性的样本子集:
3a)对归一化后的数据采用实数编码方式进行编码;
3b)随机生成初始种群A(k)=(A1,A2,…,Am),将k初始化为0,其中Ai=(v1,v2,...vn),i=1,2,..,n,vi是要选出的样本点,m是种群大小,n是选取个数,k表示迭代的次数;
3c)对所生成的初始种群,按照下式计算每个抗体的亲和度:
f(Ai)=s(Ai)×d(Ai)
其中, S ( A i ) = { Σ i = 1 n ( v i - v ‾ ) 2 / n } 1 / 2 d ( A i ) = Σ i = 1 n Σ j = 1 n | | r ij | |
v是所有选出样本的均值,‖rij‖是样本点vi,vj之间的欧氏距离;
3d)根据求得的亲和度按照下式计算每个抗体克隆的个数:
q i = Int { n c × f ( A i ) Σ j = 1 n f ( A j ) } , i = 1,2 , . . . n
其中,Int(x)表示大于x的最小整数,nc是设定的克隆规模;
克隆后的每个抗体变为 A i ′ ( k ) = { A i 1 ( k ) , · · · , A i q i ( k ) } , i=1,2,…m,整个种群变为Y(k)={A′1(k),A′2(k),…,A′m(k)};
3e)先随机确定t个变异位置,其中 t = 1 3 n , 然后在变异概率pm i下对变异位置的抗体进行高斯变异,比较变异后每个种群的抗体亲和度,并将每个种群亲和度最大的抗体取出,组成下一轮的初始值A(k+1);
3f)判断最大亲和度是否在连续三次迭代中是否有提高,如果没有提高,则从总样本中随机生成60%新的样本子集,取代种群中亲和度小的抗体,如果有提高,就不进行操作;
3g)对原迭代次数k重新赋值为k′,其中k′=k+1,并判断k′是否超过设定的最大迭代次数T,如果超过T,则输出亲和度最高的抗体作为最终选出的样本子集,如果没超过T,返回步骤3c);
(4)用贪婪谱嵌入方法对选出的样本子集进行降维;
(5)对降维后的数据进行k-means聚类,该聚类为图像的最终分割结果。
本发明与现有的技术相比具有以下优点:
1.与
Figure G2009100243746D00031
谱聚类方法相比,本发明由于利用亲和度关系选取样本子集,因此选取的样本子集更有代表性,分割结果有明显提高;
2.与贪婪谱聚类方法相比,一方面,本发明由于采用选取样本子集个数为输入,避免了容差的选取,另一方面,本发明由于从整体上选取和优化样本子集,避免了在所有样本上逐一进行误差计算的过程,从而降低计算复杂度,加快图像分割速度。
附图说明
图1是本发明基于免疫稀疏谱聚类的图像分割方法流程图;
图2是本发明中选取子集的主要操作子流程图;
图3是本发明应用于2分类(1)纹理图像的分割结果图;
图4是本发明应用于2分类(2)纹理图像的分割结果图;
图5是本发明应用于3分类纹理图像的分割结果图;
图6是本发明应用于SAR1图像的分割结果图;
图7是本发明应用于SAR2图像的分割结果图;
图8是本发明应用于SAR3图像的分割结果图。
具体实施方式
参照图1,本发明的具体实施过程如下:
步骤1.使用灰度共生矩阵对待分割图像进行特征提取。
对待分割的图象生成灰度共生矩阵pij(s,θ),其中s是样本点xi和xj之间的距离,θ的取值为4个离散的方向:0°,45°,90°,135°,每个方向上取三个统计量:角二阶矩,同质区,对比度,每个统计量按照以下公式进行计算:
角二阶矩: f 1 = Σ i = 0 N - 1 Σ j = 0 N - 1 p 2 ( i , j )
同质区: f 2 = Σ i = 0 N - 1 Σ j = 0 N - 1 p ( i , j ) / [ 1 + ( i - j ) 2 ] 2
对比度: f 3 = Σ i = 0 N - 1 Σ j = 0 N - 1 | i - j | p ( i , j )
其中,N是样本总数,p(i,j)是灰度共生矩阵pij(s,θ)第i行第j列的元素。在4个方向上分别计算上述统计量,得到特征数据v=(f1,,f2,…,f12)。
步骤2.对所提取的特征数据v=(f1,,f2,…,f12)进行归一化处理以去除数据间量级的影响:
f i ′ = f i - min ( v ) max ( v ) - min ( v ) , i=1,2,…12
其中,min(v)表示(f1,,f2,…,f12)之中的最小值,max(v)表示(f1,,f2,…,f12)之中的最大值,得到归一化后的特征数据v=(f′1,,f2′,…,f12′)。
步骤3.对归一化后的特征数据采用实数编码方式进行编码。
步骤4.随机生成初始种群A(k)=(A1,A2,…,Am),其中k表示迭代的次数,初始化为0,Ai=(v1,v2,...vn),i=1,2,...,n,vi是要选出的样本点,m是种群大小,n是选取个数。
步骤5.对所生成的初始种群,按照下式计算每个抗体的亲和度:
f(Ai)=s(Ai)×d(Ai)
其中, S ( A i ) = { Σ i = 1 n ( v i - v ‾ ) 2 / n } 1 / 2 d ( A i ) = Σ i = 1 n Σ j = 1 n | | r ij | |
v是所有选出样本的均值,‖rij‖是样本点vi,vj之间的欧氏距离。
步骤6.根据抗体的的亲和度大小,依次进行克隆,变异,选择操作。
参照图2,本步骤的具体实现如下:
6a)根据求得的亲和度按照下式计算每个抗体克隆的个数:
q i = Int { n c × f ( A i ) Σ j = 1 n f ( A j ) } , i = 1,2 , . . . n
其中,Int(x)表示大于x的最小整数,nc是设定的克隆规模;
克隆后的每个抗体变为 A i ′ ( k ) = { A i 1 ( k ) , · · · , A i q i ( k ) } , i=1,2,…m,整个种群变为Y(k)={A′1(k),A′2(k),…,A′m(k)};
6b)对克隆后的抗体种群,先随机确定t个变异位置,其中 t = 1 3 n , 然后在变异概率pm i下对变异位置的抗体进行高斯变异;
6c)比较变异后每个种群的抗体亲和度,并将每个种群亲和度最大的抗体取出,组成下一轮的初始值A(k+1);
步骤7.判断最大亲和度是否在连续三次迭代中有提高,如果没有提高,则从总样本中随机生成60%新的样本子集,取代种群中亲和度小的抗体,如果有提高,就不进行操作。
步骤8.对原迭代次数k重新赋值为k′,其中k′=k+1,并判断k′是否超过设定的最大迭代次数T,如果超过T,则输出亲和度最高的抗体作为最终选出的样本子集,如果没超过T,返回步骤5。
步骤9.用下式对选出的样本子集(v1,v2,...vn)进行降维:
P k ( v ) = n λ k Σ i = 1 n U ik K D ( v , v i )
其中v是待嵌入的坐标,Pk(v)是v降维后的第k维坐标,(Uk,λk)是整个权值矩阵KD(vi,vj)的第k个特征值和特征向量,Uik是Uk的第i个坐标, K D ( v , v i ) = exp ( - | | v - v i | | 2 σ 2 ) , 其中σ是核参数。
步骤10.对降维后的数据进行k-means聚类,该聚类为图像的最终分割结果。
本发明效果可以通过以下实验进一步证实:
1.实验条件和内容
实验仿真环境为:MATLAB 7.0.4,Intel(R)Pentium(R)4CPU 32GHz,WindowXP Professional。
实验内容包括:分别应用谱聚类方法,贪婪谱聚类方法和本发明三种方法对纹理图像和SAR图像进行分割。实验参数设置为:谱聚类方法随机选取100个样本点,贪婪谱聚类方法取得到100个样本点时的容差,本发明方法参数设置为,种群规模20,克隆规模为种群规模2.5倍,变异概率0.99,终止条件为最大迭代次数100。另外,实验中贪婪谱聚类方法的运行时间不包括找出合适容差的时间。这在实际中节约了大量反复实验的时间。
2.实验结果
1)将
Figure G2009100243746D00063
谱聚类方法,贪婪谱聚类方法和本发明三种方法应用于2分类纹理图像和3分类纹理图像的分割结果如图3,图4,图5所示,其中图3(a),图4(a),图5(a)是原纹理图像,图3(b),图4(b),图5(b)是模板,图3(c),图4(c),图5(c)是
Figure G2009100243746D00064
谱聚类方法的分割结果,图3(d),图4(d),图5(d)是贪婪谱聚类方法的分割结果,图3(e),图4(e),图5(e)是本发明的分割结果。
三种方法对纹理图象分割的时间和准确率统计见表1,其中运行时间和准确率分别用T和R表示。
表1三种方法对纹理图像分割的时间和准确率统计
Figure G2009100243746D00065
从图3,图4,图5和表1可以看到,一方面,本发明在区域一致性和错误划分上明显优于谱聚类方法,这是由于本发明方法有针对性的选取子集,选取的子集更有代表性;另一方面,本发明与贪婪谱聚类方法相比不需要找出合适容差,并且时间花费有所减少,这是由于在选取过程采用免疫克隆选择策略,以选取个数为输入,避免了容差的确定和每个样本逼近误差的计算。
2)将谱聚类方法,贪婪谱聚类方法和本发明三种方法应用于SAR图像的分割结果如图6,图7,图8所示,其中图6(a),图7(a),图8(a)是原SAR图像,图6(b),图7(b),图8(b)是谱聚类方法的分割结果,图6(c),图7(c),图8(c)是贪婪谱聚类方法的分割结果,图6(d),图7(d),图8(d)是本发明的分割结果,三种方法对SAR图像分割的时间统计见表2。
表2三种方法对SAR图像分割的时间统计
Figure G2009100243746D00071
从图6,图7,图8和表2可以看到,本发明在区域一致性和错误划分上明显优于
Figure G2009100243746D00072
谱聚类方法,这是由于本发明选取子集选取的样本子集更有代表性,从表2可以看到,本发明与贪婪谱聚类方法相比不需要找出合适容差,并且时间花费有所减少,这是由于本发明以选取个数为输入,避免了容差的确定和每个样本逼近误差的计算。
以上实验表明,本发明方法与
Figure G2009100243746D00073
谱聚类方法相比准确率有大幅度提高,与贪婪谱聚类方法相比计算复杂度减小,加快图像分割速度。

Claims (1)

1.一种基于免疫稀疏谱聚类的图像分割方法,包括如下步骤:
(1)使用灰度共生矩阵对所待分割的图像进行特征提取;
(2)将所得的特征数据归一化到[0,1]之间,以去除数据间量级的影响;
(3)对归一化后的特征数据,使用免疫克隆选择方法选出具有代表性的样本子集:
3a)对归一化后的数据采用实数编码方式进行编码;
3b)随机生成初始种群A(k)=(A1,A2,…,Am),其中k表示迭代的次数,初始化为0,Ai=(v1,v2,...vn),i=1,2,...,n,vi是要选出的样本点,m是种群大小,n是选取个数;
3c)对所生成的初始种群,按照下式计算每个抗体的亲和度:
f(Ai)=s(Ai)×d(Ai)
其中, S ( A i ) = { Σ i = 1 n ( v i - v ‾ ) 2 / n } 1 / 2 d ( A i ) = Σ i - n n Σ j = 1 n | | rij | |
Figure FSB00000508442600013
是所有选出样本的均值,‖rij‖是样本点vi,vj之间的欧氏距离;
3d)根据求得的亲和度按照下式计算每个抗体克隆的个数:
qi = Int { n c × f ( Ai ) Σ j = 1 n f ( Aj ) } , i = 1 , 2 , . . . n
其中,Int(x)表示大于x的最小整数,nc是设定的克隆规模;
克隆后的每个抗体变为,整个种群变为Y(k)={A′1(k),A′2(k),…,A′m(k)};
3e)先随机确定t个变异位置,其中
Figure FSB00000508442600016
然后在变异概率
Figure FSB00000508442600017
下对变异位置的抗体进行高斯变异,比较变异后每个种群的抗体亲和度,并将每个种群亲和度最大的抗体取出,组成下一轮的初始值A(k+1);
3f)判断最大亲和度是否在连续三次迭代中有提高,如果没有提高,则从总样本中随机生成60%新的样本子集,取代种群中亲和度小的抗体,如果有提高,就不进行操作;
3g)对原迭代次数k重新赋值为k′,其中k′=k+1,并判断k′是否超过设定的最大迭代次数T,如果超过T,则输出亲和度最高的抗体作为最终选出的样本子集,如果没超过T,返回步骤3c);
(4)用贪婪谱嵌入方法对选出的样本子集进行降维;
(5)对降维后的数据进行k-means聚类,该聚类为图像的最终分割结果。
CN2009100243746A 2009-10-16 2009-10-16 基于免疫稀疏谱聚类的图像分割方法 Expired - Fee Related CN101673398B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100243746A CN101673398B (zh) 2009-10-16 2009-10-16 基于免疫稀疏谱聚类的图像分割方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100243746A CN101673398B (zh) 2009-10-16 2009-10-16 基于免疫稀疏谱聚类的图像分割方法

Publications (2)

Publication Number Publication Date
CN101673398A CN101673398A (zh) 2010-03-17
CN101673398B true CN101673398B (zh) 2011-08-24

Family

ID=42020611

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100243746A Expired - Fee Related CN101673398B (zh) 2009-10-16 2009-10-16 基于免疫稀疏谱聚类的图像分割方法

Country Status (1)

Country Link
CN (1) CN101673398B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101853491B (zh) * 2010-04-30 2012-07-25 西安电子科技大学 基于并行稀疏谱聚类的sar图像分割方法
CN101840577B (zh) * 2010-06-11 2012-07-25 西安电子科技大学 基于图切割的图像自动分割方法
CN101866490B (zh) * 2010-06-30 2012-02-08 西安电子科技大学 基于差分免疫克隆聚类的图像分割方法
CN102024262B (zh) * 2011-01-06 2012-07-04 西安电子科技大学 利用流形谱聚类进行图像分割的方法
CN102436645B (zh) * 2011-11-04 2013-08-14 西安电子科技大学 基于mod字典学习采样的谱聚类图像分割方法
CN102542274A (zh) * 2011-12-13 2012-07-04 西安邮电学院 基于人工免疫网络聚类的车牌字符分割方法
CN102867305B (zh) * 2012-09-05 2015-12-02 天津光电高斯通信工程技术股份有限公司 一种铁路货运列车图像中装载平衡检测方法
CN106023221A (zh) * 2016-05-27 2016-10-12 哈尔滨工业大学 基于非负低秩稀疏关联制图的遥感图像分割方法
CN106558059B (zh) * 2016-11-30 2019-08-06 太原科技大学 一种免疫优化的活动轮廓图像分割方法及其分割装置
CN108921853B (zh) * 2018-06-22 2022-03-04 西安电子科技大学 基于超像素和免疫稀疏谱聚类的图像分割方法
CN110598740B (zh) * 2019-08-08 2022-03-01 中国地质大学(武汉) 一种基于多样性和一致性学习的谱嵌入多视图聚类方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101271572A (zh) * 2008-03-28 2008-09-24 西安电子科技大学 基于免疫克隆选择聚类的图像分割方法
CN101303764A (zh) * 2008-05-16 2008-11-12 西安电子科技大学 基于非下采样轮廓波的多传感器图像自适应融合方法
CN101320467A (zh) * 2008-05-16 2008-12-10 西安电子科技大学 基于自适应窗口固定及传播的多尺度纹理图像分割方法
CN101350099A (zh) * 2008-09-12 2009-01-21 西安电子科技大学 基于小波域隐马尔科夫树模型的图像分割方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101271572A (zh) * 2008-03-28 2008-09-24 西安电子科技大学 基于免疫克隆选择聚类的图像分割方法
CN101303764A (zh) * 2008-05-16 2008-11-12 西安电子科技大学 基于非下采样轮廓波的多传感器图像自适应融合方法
CN101320467A (zh) * 2008-05-16 2008-12-10 西安电子科技大学 基于自适应窗口固定及传播的多尺度纹理图像分割方法
CN101350099A (zh) * 2008-09-12 2009-01-21 西安电子科技大学 基于小波域隐马尔科夫树模型的图像分割方法

Also Published As

Publication number Publication date
CN101673398A (zh) 2010-03-17

Similar Documents

Publication Publication Date Title
CN101673398B (zh) 基于免疫稀疏谱聚类的图像分割方法
CN111860612A (zh) 无监督高光谱图像隐低秩投影学习特征提取方法
CN109815801A (zh) 基于深度学习的人脸识别方法及装置
CN101763514B (zh) 基于特征重要度排序谱聚类的图像分割方法
CN103914705B (zh) 一种基于多目标免疫克隆的高光谱图像分类和波段选择的方法
CN103886342B (zh) 基于光谱和邻域信息字典学习的高光谱图像分类方法
CN110705636B (zh) 一种基于多样本字典学习和局部约束编码的图像分类方法
CN107992818B (zh) 一种光学遥感图像海面船只目标的检测方法
CN106096517A (zh) 一种基于低秩矩阵与特征脸的人脸识别方法
CN110059625B (zh) 一种基于mixup的人脸训练与识别方法
CN102436645B (zh) 基于mod字典学习采样的谱聚类图像分割方法
CN112836671A (zh) 一种基于最大化比率和线性判别分析的数据降维方法
CN104239902A (zh) 基于非局部相似性和稀疏编码的高光谱图像分类方法
CN102663681B (zh) 基于排序k-均值算法的灰度图像分割方法
CN103020979A (zh) 基于稀疏遗传聚类的图像分割方法
CN108921853B (zh) 基于超像素和免疫稀疏谱聚类的图像分割方法
CN115984223A (zh) 基于PCANet及多分类器融合的图像溢油检测方法
CN113869454A (zh) 一种基于快速嵌入式谱分析的高光谱图像稀疏特征选择方法
CN104537660B (zh) 基于多目标智能体进化聚类算法的图像分割方法
CN105160666A (zh) 基于非平稳分析与条件随机场的sar图像变化检测方法
CN112381108A (zh) 一种基于图卷积神经网络深度学习的枪弹痕迹相似度识别方法和系统
CN105139422A (zh) 一种自解释目标跟踪方法及装置
CN104794497A (zh) 一种高光谱图像分类中多中心拟合方法
CN111429436B (zh) 一种基于多尺度注意力和标签损失的本质图像分析方法
CN106874920A (zh) 基于小波包分析和支持向量机的车牌字符识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110824

Termination date: 20171016

CF01 Termination of patent right due to non-payment of annual fee