CN103985093B - 基于多随机测量迭代像素判决的压缩感知稳健重构方法 - Google Patents
基于多随机测量迭代像素判决的压缩感知稳健重构方法 Download PDFInfo
- Publication number
- CN103985093B CN103985093B CN201410203223.8A CN201410203223A CN103985093B CN 103985093 B CN103985093 B CN 103985093B CN 201410203223 A CN201410203223 A CN 201410203223A CN 103985093 B CN103985093 B CN 103985093B
- Authority
- CN
- China
- Prior art keywords
- value
- sparse
- image
- imaging
- reconstruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Processing (AREA)
Abstract
本发明属于噪声条件下的压缩感知重构处理领域,具体涉及一种基于多随机测量迭代像素判决的压缩感知稳健重构方法,具体包括,获取成像区域图像,对成像区域图像进行成像网格划分,根据成像模型构造稀疏字典;生成初始测量矩阵,并从原始数据中获取初始观测数据;通过随机抽取初始测量矩阵若干行组成测量子矩阵,并计算获得观测子集,根据测量子矩阵、稀疏字典和观测子集计算正则化参数,进一步求解稀疏系数,根据TSC算法,得到稀疏系数的估计值,当稀疏系数满足初始化判决门限值后,即得到了压缩感知稳健重构的图像结果,本发明利用噪声的随机性通过多次随机测量及TSC处理,采用自适应迭代处理,有效改善了CS对含噪信号的重构质量。
Description
技术领域
本发明属于噪声条件下的压缩感知(Compressed Sensing,CS)重构处理领域,具体涉及一种基于多随机测量迭代像素判决的压缩感知稳健重构方法。
背景技术
CS是近几年发展起来建立在信号稀疏表示和逼近理论基础上的新的研究领域,它与传统奈奎斯特采样定理不同,理论指出:只要信号是可压缩的或在某个变换域是稀疏的,那么就可以用一个与变换基不相关的观测矩阵将变换所得高维信号投影到一个低维空间上,然后通过求解一个优化问题就可以从这些少量的投影中以高概率重构出原信号,可以证明这样的投影包含了重构信号的足够信息。CS理论的本质是一种非适应性的、非线性的信号(图像)重构方法,对于一个N×1维离散信号f在正交基Ψ=[ψ1,ψ2,…,ψn]下可以展开为式中s为f的展开系数,si=<f,ψi>。假设s中非零元素的个数K(K<<N),那么称s为K稀疏的。假设利用一个J×N维测量矩阵Φ采集数据,那么获取的数据为y=Φf=ΦΨs。通常情况下,为了从y中完全恢复s,J应该大于或等于N。但是如果s稀疏并且ΦΨ满足有限等距特性(Restricted Isometry Property,RIP)时,f则可以从J=cK log(NK)次测量值以高概率精确重建,只需求解下列凸规划问题
min||s||0 s.t.y=ΦΨs (1)
其中,c代表一个常数,s.t.表示满足约束条件的数学符号(本文下同),由于求解式(1)的数值计算极不稳定而且是NP(Nonconvex Programming)难题,而该最优化问题与信号的稀疏分解十分类似,所以有学者从信号稀疏分解的相关理论中寻找更有效的求解途径。由于||s||1最小范数下在一定条件下和||s||0最小范数具有等价性,那么就可以将上式转化为||s||1最小范数下的最优化问题:
min||s||1 s.t.y=ΦΨs (2)
但在实际环境中,重构信号通常会受到噪声的污染而不再稀疏,如果对含噪信号仍然采用单一的稀疏性约束条件则无法有效恢复原始信号。但CS理论仍然可以采用其他的信号恢复方法,不同之处在于恢复过程所使用的优化目标函数的形式及参数的设置不同。
为解决这一问题,现阶段研究较多的有CSDN算法、LASSO算法、算法、FOCUSS(FOCal Underdetermined System Solver)算法等。
(1)当噪声分布已知的情况,沿用BP方法对噪声的抑制方法,即CSDN(Compressed Sensing De-Noising)算法,修改式(2)约束条件为
min||s||1 s.t.||ΦΨs-y||2<σ (3)
其中σ是与噪声方差及数据长度N相关的常量。
(2)当已知信号的稀疏度(1-范数大小)时,则可以采用LASSO(Least AbsoluteShrinkage and Selection Operator)算法来对信号进行有效恢复
min||ΦΨs-y||2 s.t.||s||1<τ (4)
其中τ为稀疏度。
(3)当对信号和噪声都未知时,可把寻找稀疏解问题归结为带约束二次规划(Bound Constrained Quadratic programming,BCQP)问题,可以利用梯度投影(Gradient Projection,GP)算法来有效求解
min(||ΦΨs-y||2+λ||s||1) (5)
其中,λ称为正则化参数(regularization parameter),λ的选择是正则化处理的基本问题,可以利用测量数据通过一些算法进行有效估计估计,如Stein无偏风险估计(Stein’s Unbiased Risk Estimator,SURE)算法、广义交叉验证(GeneralizedCross-Validation,GCV)算法以及用于图像处理的L曲线(L-curve)算法(O.Batu,M.Cetin,Parameter selection in sparsity-driven SAR imaging,IEEE Transactions onAerospace and electronic systems,October2011,47(4):3040-3050.)。
尽管上述重构方法采取了不同的约束形式,但它们都采用2-范数对噪声进行抑制。由于无法体现信号的稀疏性,2-范数易于造成重构系数的幅度损失。幅度损失是大部分CS重构算法都很难解决的问题,近年来,为方便研究大部分研究人员甚至有意回避了该问题。显然,上述各式都是对含噪信号稀疏重构的有效形式,但由于噪声破坏了信号在基矩阵Ψ上的稀疏度,当信噪比较低且未知时,仅仅利用单次测量,即使通过式(5)也很难实现对原始信号的精确重构。
发明内容
本发明解决的技术问题是针对低信噪比条件下基于单次随机测量的CS算法重构含噪稀疏信号稳健性差的不足,提出了基于多随机测量迭代像素判决(Multiple Measurements Iterative Pixel Discrimination,MMIPD)的CS稳健重构方法;
本发明采用的技术方案是:
一种基于多随机测量迭代像素判决的压缩感知稳健重构方法,包括以下步骤:
(S1)获取成像区域图像,对成像区域图像进行成像网格划分,根据成像模型构造稀疏字典Ψ;生成初始测量矩阵Φ0,并从原始数据x中获取初始观测数据y0,即:y0=Φ0x;定义l表示重构序号,初始化l=1,l取值为自然数;初始化判决门限εS与εSD的值;
(S2)随机抽取Φ0若干行组成测量子矩阵Φl,计算获得观测子集yl,即
yl=Φly0;
(S3)若l等于1,则根据Φl、Ψ及yl的值和GCV算法计算正则化参数λ,若l值不等于1,则进入第(S4)步骤;
(S4)将Φl、Ψ、yl、λ代入min(||ΦlΨsl-yl||2+λ||sl||1)公式,求解得到稀疏系数sl;
(S5)若l等于1时,则l值增加1后,返回步骤(S2)进行迭代重构;
若l不等于1,根据时间序列聚类算法,得到稀疏系数s的估计值即:
计算当前图像稀疏度与前一次图像稀疏度两者差的对数值ΔIS,
其中,表示第l次重构得到的中所有元素值超过均值的个数;
计算当前图像标准差与前一次图像标准差两者之差的对数值ΔISD,
其中,其中,表示第l次重构得到的的标准差;
如果ΔIS≤εS且ΔISD≤εSD,迭代终止,所获取的即为压缩感知稳健重构的图像结果;
否则,则l值增加1后,返回步骤(S2)进行迭代重构。
优选地,所述判决门限εS与εSD的取值范围为-30dB~0dB。
本发明在单次观测数据的基础上,通过多次随机抽取和CS处理获得重构序列,再利用时间序列聚类(Time Series Clustering,TSC)算法完成对原信号的稳健重构,有效地抑制了重构杂波,提高了含噪信号的重构稳健性。
采用本发明可以达到以下技术效果:
本发明利用噪声的随机性通过多次随机测量及TSC处理,在遵循CS基本原理的基础上采用自适应迭代处理,有效改善CS对含噪信号的重构质量,为噪声条件下的稳健稀疏重构拓展了新思路。本发明的应用并不需要完备的原始数据集,具有良好的适用性,可用于实际工程中的信号处理。需要指出的是,本发明并非一种特定的含噪信号稳健重构方法,而是一个稳健重构框架,其所采用的CS重构算法和TSC算法均可利用相似的算法进行替代,因此具有更优的适用性和通用性。
附图说明
图1是本发明方法流程图;
图2是本发明仿真试验场景图;
图3是部分无噪声回波数据的CS重构处理结果图;
图4是部分含噪声回波数据的CS重构处理结果图;
图5是全部含噪声回波数据的CS重构处理结果图;
图6是不同迭代次数下的多次测量及相干处理结果图;
图7是不同迭代次数下的多次测量及时间序列聚类处理结果图;
图8是两种方法对实测数据处理后的结果图,图8-a是传统的CS方法处理后的结果图,图8-b是本发明处理后的结果图。
具体实施方式
为更加清楚阐明本发明原理过程,下面结合附图和实施例作进一步详细说明。
图1为本发明流程图,第一步:对成像区域图像进行成像网格划分,根据成像模型构造稀疏字典Ψ;生成初始测量矩阵Φ0,并依此从雷达获取的原始回波数据x(即满足Nyquist采样定理的完备数据集)中获取初始观测数据y。
具体步骤为:
步骤①:根据预先设定的成像分辨率(ρr与ρa分别为距离向与方位向分辨率)对长Lr米、宽La米的成像区域进行稀疏成像网格划分,得到Nr×Na成像空间矩阵,其中Nr=Lr/ρr,Na=La/ρa,然后根据信号体制、成像模型构造稀疏字典Ψ(GurbuzAli Cafer,McClellan James H.,Scott Waymond R.A compressive sensing dataacquisition and imaging method for stepped frequency GPRs[J].IEEE Transactionson Signal Processing,2009,57(7):2640-2650.);
步骤②:生成0、1随机矩阵作为初始测量矩阵Φ0(Gurbuz Ali Cafer,McClellan James H.,Scott Waymond R.A compressive sensing data acquisition andimaging method for stepped frequency GPRs[J].IEEE Transactions on SignalProcessing,2009,57(7):2640-2650.),并依此对原始数据x进行观测得到初始观测数据y0,如下式所示:
y0=Φ0x (6)
定义l表示重构序号,初始化l=1,l取值为自然数;
第二步:随机抽取初始测量矩阵Φ0的若干行构造成测量子矩阵Φl,然后对初始测量数据y0进行观测,获得观测子集yl,再利用GCV算法估计正则化参数λ。
具体步骤为:
随机抽取初始测量矩阵Φ0的M行(其中M要小于矩阵Φ0的最大行数)作为测量子矩阵Φl,其中l表示重构序号,l取值为自然数。然后利用Φl对y0进行子测量以获得测量子集yl,具体如下式所示:
yl=Φly0 (7)
第三步:若l等于1,根据Φl、Ψ及yl利用GCV算法估计正则化参数λ;若l值不等于1,则进入第第四步;
第四步:将Φl、Ψ、yl及λ代入公式min(||ΦlΨsl-yl||2+λ||sl||1)公式,求解得到稀疏系数sl;
第五步,若l等于1时,则l值增加1后,返回步骤(2)进行迭代重构;若l不等于1,利用TSC算法(Keogh E,Lin J,Truppel W,Clustering of time seriessubsequences is meaningless:implications for previous and future research[C],Proceedings of the IEEE International Conference on Data Mining,Melbourne,FL,2003:115-122.)对重构序列[s1,s2,…,sl]中相同位置的元素进行聚类处理,得到稀疏系数s的估计值即
本发明定义图像稀疏度表示第l次重构得到的中所有元素的值超过均值的个数;定义重构图像标准差表示第l次重构得到的的标准差。
为提高MMIPD方法的处理效率,在实际处理中通常采用变量IS与ISD各自当前值与前一次所得值的差值对数形式,即和并设定迭代终止判决门限εS与εSD(εS与εSD的取值可根据实际需求选取范围为-30dB~0dB之间值,通常选为-10dB)。
若满足条件:ΔIS≤εS且ΔISD≤εSD,则MMIPD方法处理结束,迭代终止,稀疏系数s的估计输出为:
所获取的即为压缩感知稳健重构的图像结果;
否则,重构序号l值增加1,返回至第二步,继续计算稀疏系数sl。
具体实施例结合附图进行说明如下:
图2为采用宽带步进频率体制的合成孔径雷达成像的场景图:以雷达航迹方向为方位向,设为X轴,垂直于航迹方向为距离向,设为Y轴,雷达孔径中点O为坐标原点,以包含目标和雷达孔径的平面为坐标平面建立直角坐标系。雷达孔径长度10米,方位采样间隔为0.1米,孔径中心距离成像区域中心径向距离为8米,成像区域为[-1~1]米×[7.5~9.5]米,共包含5个理想点目标,坐标分别为(0.3,9.2)、(-0.5,8.6)、(-0.2,7.8)、(0.6,8.0)、(0.4,8.2),设雷达发射的步进频率脉冲信号,其频率步进增量Δf=4MHz,频点总数Nf=300,利用Matlab仿真平台仿真全频带、全通道原始回波数据x;
根据图2设定的成像区域可知,成像区域长度Lr=2米、成像宽度La=2米,设定稀疏成像距离向与方位向的分辨率分别为ρr=0.1米、ρa=0.1米,那么成像空间矩阵大小为Nr×Na=201×201=40401,然后根据图2中步进频率信号的相关参数构造稀疏字典Ψ;
图3是利用随机测量的10%数据通过式(5)求解的重构结果图,具体过程是通过Matlab仿真软件来实现的,见参考文献“M Grant and S Boyd,CVX:MatlabSoftware for Disciplined Convex Programming(Web Page and Software)2008[online].Available:http://stanford.edu/boyd/cvx.”。
图4是对有噪数据(信噪比为-15dB)随机抽取10%利用式(5)所得的重构结果图,其中正则化参数λ是利用观测数据通过GCV算法估计得到的。可以得出:虽然5个目标点的稀疏系数均已重构出来(虚线圆圈所包围的点),但均存在不同程度的幅度损失(目标点的色度偏灰),而且重构图像中存在较多的杂波,其原因是噪声破坏了信号的稀疏性,增加了稀疏系数中非零值的个数。
图5是利用全部含噪数据通过求解式(5)所得的重构结果图,其中正则化参数λ同样是通过GCV算法估计所得,但利用了全部观测数据。可以得出:用以重构的输入数据量越大,目标信息量也越多,就越有利于重构质量的改善。与图4对比可知:基于全部数据的稀疏重构,其杂波数量较图4明显减少,并且目标稀疏系数幅度损失也相应减少(目标点的色度较亮)。
图6是采用多次测量及相干处理后的重构结果图,其中每次迭代重构均采用采用同分布的不同随机测量矩阵(用于重构的输入数据量为随机抽取10%),通过求解式(5)得图6所示结果,图6-a、图6-b、图6-c、图6-d分别对应的迭代次数为5、10、15、20。可以看出:相干处理虽然在常规雷达信号处理中具有较好处理效果,但是其平均加权的特性使得该方法很难有效提取目标或杂波的稳定序列聚类中心,虽然可以保证目标高概率的重构并减少幅度损失,但其杂波抑制能力有限(输出图像信噪比不高)。另外,在设定的判决门限下,利用相干处理方法即使迭代了20次,重构图像质量指标依然无法满足迭代终止条件,因此相干处理需要更多的迭代次数,增大了存储与计算的负担。
图7是采用多次测量及时间序列聚类处理后的重构结果,其中每次重构均采用与图6相同的测量矩阵并通过求解式(5)获得,图7-a、图7-b、图7-c、图7-d分别对应的迭代次数为5、10、15、20。对比各图可以看出:当迭代次数达到15时,目标稀疏系数基本重构处理,且幅度损失较小,杂波抑制效果较好。重构过程中,在设定的判决门限下,当迭代次数为17时满足终止条件,迭代重构结束。对比图6与图7可知:本发明在测量矩阵、正则化参数及迭代次数相同的情况下,更有效的提取了目标或杂波稳定的幅度聚类中心,改善了稀疏重构质量,提高了输出图像信噪比。
图8为实测浅埋金属圆柱体的处理结果图,金属圆柱体的双散射中心特性可参考文献“JIN Tian,LOU Jun,ZHOU Zhimin,Extraction of Landmine FeaturesUsing a Forward-Looking Ground Penetrating radar with MIMO Array,IEEETransactions on Geoscience and Remote Sensing,2012.10,50(10):4135-4144.”利用20%数据,图8-a给出了常规CS算法的重构结果,图8-b为本发明方法处理结果图,对比发现,本发明重构图像中的杂波较少,图像信杂比较高。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (2)
1.一种基于多随机测量迭代像素判决的压缩感知稳健重构方法,其特征在于包括以下步骤:
(S1)获取成像区域图像,对成像区域图像进行成像网格划分,根据成像模型构造稀疏字典Ψ;生成初始测量矩阵Φ0,并从原始数据x中获取初始观测数据y0,即:y0=Φ0x;定义l表示重构序号,初始化l=1,l取值为自然数;初始化判决门限εS与εSD的值;
(S2)随机抽取Φ0若干行组成测量子矩阵Φl,计算获得观测子集yl,即yl=Φly0;
(S3)若l等于1,则根据Φl、Ψ及yl的值和GCV算法计算正则化参数λ,若l值不等于1,则进入第(S4)步骤;
(S4)将Φl、Ψ、yl、λ代入min(||ΦlΨsl-yl||2+λ||sl||1)公式,求解得到稀疏系数sl;
(S5)若l等于1时,则l值增加1后,返回步骤(S2)进行迭代重构;
若l不等于1,根据时间序列聚类算法,得到稀疏系数s的估计值,即:
其中,TSC表示时间序列聚类算法;
计算当前图像稀疏度与前一次图像稀疏度两者差的对数值△IS,
其中,表示第l次重构得到的中所有元素的值超过均值的个数;
计算当前图像标准差与前一次图像标准差两者之差的对数值△ISD,
其中,表示第l次重构得到的的标准差;
如果△IS≤εS且△ISD≤εSD,迭代终止,所获取的即为压缩感知稳健重构的图像结果;
否则,则l值增加1后,返回步骤(S2)。
2.如权利要求1所述的基于多随机测量迭代像素判决的压缩感知稳健重构方法,其特征在于:所述判决门限εS与εSD的取值范围均为-30dB~0dB。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410203223.8A CN103985093B (zh) | 2014-05-14 | 2014-05-14 | 基于多随机测量迭代像素判决的压缩感知稳健重构方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410203223.8A CN103985093B (zh) | 2014-05-14 | 2014-05-14 | 基于多随机测量迭代像素判决的压缩感知稳健重构方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103985093A CN103985093A (zh) | 2014-08-13 |
CN103985093B true CN103985093B (zh) | 2015-04-22 |
Family
ID=51277051
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410203223.8A Expired - Fee Related CN103985093B (zh) | 2014-05-14 | 2014-05-14 | 基于多随机测量迭代像素判决的压缩感知稳健重构方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103985093B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105307266B (zh) * | 2015-10-12 | 2018-08-03 | 中国人民解放军理工大学 | 基于自适应空间格点的传感器网络压缩感知精确定位方法 |
CN110061790B (zh) * | 2019-04-03 | 2021-07-09 | 北京环境特性研究所 | 一种扫频rcs测试中抑制射频干扰的方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102722896A (zh) * | 2012-05-22 | 2012-10-10 | 西安电子科技大学 | 基于自适应压缩感知的自然图像非局部重构方法 |
CN103295198A (zh) * | 2013-05-13 | 2013-09-11 | 西安电子科技大学 | 基于冗余字典和结构稀疏的非凸压缩感知图像重构方法 |
CN103337087A (zh) * | 2013-07-04 | 2013-10-02 | 西北工业大学 | 一种基于伪逆自适应算法的压缩感知图像重构方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8666180B2 (en) * | 2009-12-04 | 2014-03-04 | Stc.Unm | System and methods of compressed sensing as applied to computer graphics and computer imaging |
-
2014
- 2014-05-14 CN CN201410203223.8A patent/CN103985093B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102722896A (zh) * | 2012-05-22 | 2012-10-10 | 西安电子科技大学 | 基于自适应压缩感知的自然图像非局部重构方法 |
CN103295198A (zh) * | 2013-05-13 | 2013-09-11 | 西安电子科技大学 | 基于冗余字典和结构稀疏的非凸压缩感知图像重构方法 |
CN103337087A (zh) * | 2013-07-04 | 2013-10-02 | 西北工业大学 | 一种基于伪逆自适应算法的压缩感知图像重构方法 |
Non-Patent Citations (1)
Title |
---|
一种改进的压缩感知重构算法研究;李博等;《现代电子技术》;20130201;第36卷(第3期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN103985093A (zh) | 2014-08-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103353989B (zh) | 基于先验和融合灰度与纹理特征的sar图像变化检测方法 | |
CN106875380B (zh) | 一种基于无监督深度神经网络的异质图像变化检测方法 | |
CN105844279A (zh) | 基于深度学习和sift特征的sar图像变化检测方法 | |
CN102882530B (zh) | 一种压缩感知信号重构方法 | |
CN106384092A (zh) | 面向监控场景的在线低秩异常视频事件检测方法 | |
CN108845316A (zh) | 一种基于压缩感知理论的雷达稀疏探测方法 | |
CN105353375A (zh) | 一种镜像综合孔径辐射计反演方法 | |
CN103985093B (zh) | 基于多随机测量迭代像素判决的压缩感知稳健重构方法 | |
Bi et al. | Radar change imaging with undersampled data based on matrix completion and Bayesian compressive sensing | |
CN106990392B (zh) | 一种基于随机步进频信号的空间目标微动信息获取方法 | |
Boissy et al. | Parameter estimates for fractional autoregressive spatial processes | |
Laparrcr et al. | Spatial/spectral information trade-off in hyperspectral images | |
Maskan et al. | Demixing sines and spikes using multiple measurement vectors | |
CN105931184B (zh) | 基于联合优化的sar图像超分辨率方法 | |
CN103760559A (zh) | 一种基于在线观测的稀疏微波成像方法 | |
Ji et al. | Bayesian sparse reconstruction method of compressed sensing in the presence of impulsive noise | |
CN113705335B (zh) | 一种低频稀疏线谱信号时频超分辨率提取方法 | |
Guan et al. | Data-driven simulation of two-dimensional cross-correlated random fields from limited measurements using joint sparse representation | |
Liu et al. | Radar target MTD 2D-CFAR algorithm based on compressive detection | |
Gurbuz et al. | Compressive sensing of parameterized shapes in images | |
He et al. | TDiffDe: A Truncated Diffusion Model for Remote Sensing Hyperspectral Image Denoising | |
Sanandaji et al. | Technical report: Observability with random observations | |
Xiao et al. | Effects of noise, sampling rate and signal sparsity for compressed sensing synthetic aperture radar pulse compression | |
CN106059971A (zh) | 一种信号相关性衰减情况下基于稀疏重构的相关检测方法 | |
Ren et al. | Four-dimensional SAR imaging algorithm using Bayesian compressive sensing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150422 Termination date: 20210514 |
|
CF01 | Termination of patent right due to non-payment of annual fee |