CN101782430A - 一种基于哈达玛变换成像光谱仪的光谱复原方法 - Google Patents
一种基于哈达玛变换成像光谱仪的光谱复原方法 Download PDFInfo
- Publication number
- CN101782430A CN101782430A CN 201010143697 CN201010143697A CN101782430A CN 101782430 A CN101782430 A CN 101782430A CN 201010143697 CN201010143697 CN 201010143697 CN 201010143697 A CN201010143697 A CN 201010143697A CN 101782430 A CN101782430 A CN 101782430A
- Authority
- CN
- China
- Prior art keywords
- matrix
- wavelength
- circular matrix
- value
- spectrum
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001228 spectrum Methods 0.000 title claims abstract description 28
- 238000003384 imaging method Methods 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims abstract description 11
- 239000011159 matrix material Substances 0.000 claims abstract description 68
- 238000011084 recovery Methods 0.000 claims description 16
- 230000003595 spectral effect Effects 0.000 claims description 16
- 239000004744 fabric Substances 0.000 claims description 15
- 230000000007 visual effect Effects 0.000 claims description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 abstract description 3
- 230000004907 flux Effects 0.000 abstract description 3
- 125000004122 cyclic group Chemical group 0.000 abstract 1
- 230000003287 optical effect Effects 0.000 description 6
- 239000006185 dispersion Substances 0.000 description 5
- 230000005855 radiation Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004611 spectroscopical analysis Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000002498 deadly effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000411 transmission spectrum Methods 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Images
Landscapes
- Spectrometry And Color Measurement (AREA)
Abstract
本发明涉及一种基于哈达玛变换成像光谱仪的光谱复原方法,包括以下步骤:步骤1:组装光谱仪:连接第一激光器、成像仪、采集卡和计算机,装调好激光器使其能照射进成像仪镜筒;步骤2:给数字微镜器件DMD进行4n-1(n为自然数)阶哈达玛编码,得到相应的当前循环矩阵;步骤3:采集数据等步骤。本发明解决了现有的光谱仪利用率低的技术问题,本发明具有多路传输、辐射通量大等优点。
Description
技术领域
本发明涉及一种基于哈达玛变换成像光谱仪的光谱复原方法。
背景技术
目前常见的成像光谱仪有色散型、滤光片型、干涉型和计算层析型等。应用于哈达码变换原理的光谱仪主要是色散型,色散型又可以分为基于棱镜和光栅等形式,其中以采用光栅的色散型成像光谱仪最为突出。作为光栅色散型成像光谱仪具有原理简洁、性能稳定等优点,但其能量利用率低的致命弱点严重阻碍着他们的进一步发展,而基于哈达码变换色散型成像光谱仪正是解决这一难题的有效手段。
本发明所涉及的哈达玛光谱仪是瞄准天基目标捕获系统开展的研究工作。其应用到太空中,主要实现对人造天体的捕获和对不同人造天体目标的辨识;应用到科学研究,主要能够完成对太空碎片分类。多谱段自适应光谱仪原型样机是在方案论证的基础上进一步开展的研究工作。参考专利《一种哈达玛变换成像光谱仪》,专利号:200910022956.0,公开号:CN101571421A。本专利对多谱段自适应光谱仪原型样机的光机系统设计、成像电路设计及光谱数据处理进行了详细说明。
发明内容
为了解决现有的光谱仪利用率低的技术问题,本发明目的是提供一种基于哈达玛变换成像光谱仪的光谱复原方法。
本发明的技术解决方案:
一种基于哈达玛变换成像光谱仪的光谱复原方法,其特殊之处在于:包括以下步骤:
步骤1]:组装光谱仪:连接第一激光器、成像仪、采集卡和计算机,装调好激光器使其能照射进成像仪镜筒;
步骤2]:给数字微镜器件DMD进行4n-1(n为自然数)阶哈达玛编码,得到相应的当前循环矩阵;
步骤3]:采集数据:包括以下步骤:
数字微镜器件DMD依次加载4n-1阶当前循环矩阵的第一行至第4n-1行,采集保存得到4n-1幅图像;
步骤4]:取采集到的4n-1幅图像的第一幅图像,取第一图像可视区域内水平平分线的任意一点(i,j)(i,j为自然数)值y1,然后依次取第二幅至4n-1幅图像的(i,j)点的值,依次排列形成一个4n-1行的列向量;即{[y1 y2y3 ……y(4n-1)]T}
步骤5]:用当前循环矩阵的逆矩阵乘以步骤4]所得到的列向量,得到一个光谱值列向量,光谱值列向量的元素值即为对应波长相对光谱强度;
步骤6]:以波长为横坐标,以相对光谱强度为纵坐标绘制光谱曲线,并找出波峰所对应的波长位置;
其中:y-所用激光器的波长,x-光谱曲线波峰所对应的波长位置,仪器最大最小波长是指所用成像仪所能覆盖的光谱波长上限与下限;
如果满足式1,则执行步骤8];
如果不满足式1,则执行步骤9];
步骤9]取循环矩阵第二行为首行,其它行依次排列,第一行换到最后一行,形成循环矩阵,以循环矩阵作为当前循环矩阵,重复步骤5],步骤6],步骤7];
步骤10:换波长不同的第二激光器(波长需在仪器覆盖波长范围之内),上述步骤中确定的备用矩阵为当前循环矩阵,重复步骤3]、4]、5]、6]、7];
步骤11]:取水平平分线上的另外一点重复步骤4]、5]、6]、7]直至得到该水平平分线上所有像素点所对应的复原矩阵。
由哈达码编码的原理知道编码后采集到的图像的同一列像素所用的复原矩阵相同,所以知道了水平平分线像素点的复原矩阵相当于知道了整幅图像的复原矩阵。这些复原矩阵就是光谱仪在工程实践中探测所需要的目标时,用于复原目标点的光谱所使用的矩阵即:X=S-1gY;其中X表示目标物光谱相对强度,S表示复原矩阵,Y表示采集的编码图像。
n=2。
所述步骤1】中装调好激光器使其能照射进成像仪镜筒之前,在成像仪镜筒前用晒图纸之类的东西稍稍挡一下激光。
本发明的技术效果:
1、多路传输:若光谱分辨单元总数为N,在常规光谱仪检测一个分辨单元,哈达玛变换光谱仪可检测N/2个分辨单元。由于探测器接收到的信息量增加,而噪音没有改变,根据统计学中的称量设计法则,哈达玛变换光谱仪的信噪比为常规光谱仪的倍。因此,在色散系统中,当模板的编码数N增加时,哈达玛变换光谱仪的信噪比有明显的改善。哈达玛变换光谱仪在弱照度情况下,信噪比近似于线性的增加,当光源的辐射强度超过70μW/m2,信噪比逐渐成为一个常数。
2、辐射通量大:哈达玛变换光谱仪因为是多路传输,所以辐射通量大。当入射和出射狭缝均为循环码编码模板时,辐射的利用率比常规光谱仪可提高百余倍。
3、空间成像:哈达玛变换光谱仪具有空间成像能力,这是其它多路传输光谱所不具备的。
4、经济简便:哈达玛变换光谱仪的编码、解码等信息处理方法简单,仪器加工制造比较容易,它是介于经典色散光谱与傅里叶变换光谱之间的技术,是一种空间的变换,而不是频率或时间域的变换,因此较经济简便。
5、本发明集中在于解决如何进行光谱复原,应用本文中所采用的光谱复原方法具有一定的普遍适用性,可以用于所有哈达玛变换光谱光谱仪的光谱复原,并且对其他一些光谱仪的实验室定标有一定的指导意义。
附图说明
图1是本发明系统的原理示意图;
图2是本发明原理的结构框图;
图3为本发明数据立方体形成;
图4为本发明实施例中的复原过程。
具体实施方式
哈达码变换成像光谱仪,包括前置成像系统、第一准直透镜、分光器件、第一会聚透镜、数字微镜器件、第二准直透镜、合光器件、第二会聚透镜、像面探测器;前置成像系统包括前置成像镜;前置成像镜用于将物体成像于一次像面位置;第一准直透镜、分光器件、第一会聚透镜和数字微镜器件构成分光调制系统,其中第一准直透镜和分光器件依次设置于前置成像系统的出射光路;第一会聚透镜和数字微镜器件依次设置于分光器件的出射光路;第二准直透镜、合光器件、第二会聚透镜和像面探测器构成合光成像系统,其中第二准直透镜和合光器件依次设置于分光调制系统的出射光路;第二会聚透镜和像面探测器依次设置于合光器件的出射光路;第一准直透镜和第一会聚透镜构成相同,第二准直透镜和第二会聚透镜构成相同;第一准直透镜用于将成像于一次像面位置的光准直成平行光;分光器件用于将第一准直透镜准直的平行光进行色散;第一会聚透镜用于将色散后的平行光进行聚焦;数字微镜器件用于实现光路通断/编码;第二准直透镜用于将编码后的光束准直;合光器件用于将第二准直透镜准直后的光束合成;第二会聚透镜用于将合成后的平行光在像面探测器上进行合光成像。
如图1、图2所示为本发明的系统的原理示意图,一种哈达玛变换成像光谱仪,它包括依次连接的激光器、成像仪、采集卡以及计算机,成像仪设置有数字微镜器件DMD。
本发明还包括基于这个哈达玛变换成像光谱仪的一种光谱复原方法,包括以下步骤:
步骤1]:组装光谱仪:连接第一激光器、成像仪、采集卡和计算机,装调好激光器使其能照射进成像仪镜筒;在成像仪镜筒前用晒图纸之类的东西稍稍挡一下激光。
步骤2]:给数字微镜器件DMD进行4n-1(n为自然数)阶哈达玛编码,得到相应的当前循环矩阵;哈达玛矩阵的首行是确定的,可以采用左移或右移得到相应的循环矩阵。我们采用左移的循环矩阵,主要因为左移矩阵是对称矩阵,逆变换相对简单一些。本发明举例n=2,也就是说7阶哈达玛编码,所得到的哈达玛矩阵如下:
步骤3]:采集数据:包括以下步骤:
步骤301]:数字微镜器件DMD加载7阶当前循环矩阵的第一行,即1110100,采集保存图像;
步骤302]:数字微镜器件DMD加载7阶当前循环矩阵的第二行,即1010011,采集保存图像;
......
步骤307]:数字微镜器件DMD加载7阶当前循环矩阵的第七行,即0111010,采集保存图像;依次加载矩阵的每一行值,对数字微镜器件DMD每一个微镜进行编码,1表示开启,0表示关闭,并采集图像依次得到7幅经过编码后的采集图象;
步骤4]:取采集到的7幅图像的第一幅图像,取第一图像可视区域内水平平分线的任意一点(i,j)(i,j为自然数)值y1,然后依次取第二幅至4n-1幅图像的(i,j)点的值,依次排列形成一个4n-1行的列向量;即{[y1 y2y3……y7]T}
步骤5]:用当前循环矩阵的逆矩阵去乘以步骤4]所得到的列向量,得到一个光谱值列向量{[x1 x2 x3……x7]T},光谱值列向量的元素值即为对应波长相对光谱强度;如图3所示,
步骤6]:以波长为横坐标,以相对光谱强度为纵坐标绘制光谱曲线,并找出波峰所对应的波长位置;也就是以所使用的成像仪的波长覆盖范围分成7段,使得(x1,x2,…,x7)每一个点都有对应的波长值。并且找出波峰对应波长位置。
其中:y-所用激光器的波长,x-光谱曲线波峰所对应的波长位置,仪器最大最小波长是指所用成像仪所能覆盖的光谱波长上限与下限;
如果满足式1,则执行步骤8];
如果不满足式1,则执行步骤9];
如果x值唯一,并且有那么当前循环矩阵就是复原矩阵,则执行步骤11];
步骤9】调整当前循环矩阵第二行为首行,其它行依次排列,第一行换到到最后一行,形成循环矩阵,以循环矩阵作为当前循环矩阵,重复步骤5],步骤6],步骤7];7阶为例第一次调整后,当前循环矩阵应为:
步骤10];换波长不同的第二激光器(波长需在仪器覆盖波长范围之内),上述步骤中确定的备用矩阵为当前循环矩阵,重复步骤3]、4]、5]、6]、7];
步骤11]:取水平平分线上的另外一点重复步骤4]、5]、6]、7]直至得到该水平平分线上所有像素点所对应的复原矩阵。这样用复原矩阵逆矩阵就可以复原整幅图像数据,即X=S-1gY;其中X表示光谱相对强度,S表示复原矩阵,Y表示采集的编码图像。
本发明在实际中的应用:
光谱成像仪可以应用于实践中。从本发明中我们得到了水平平分线上所有像素点的复原矩阵,也就是得到了整幅图像可视区域的所有复原矩阵,由于相同的列像素即...,(i-1,j),(i,j),(i+1,j),所对应的复原矩阵与(i,j)相同。此时对于该光谱成像仪采集任意要探测的目标,我们都可以将目标的光谱复原出来。
Claims (2)
1.一种基于哈达玛变换成像光谱仪的光谱复原方法,其特征在于:包括以下步骤:
步骤1]:组装光谱仪:连接第一激光器、成像仪、采集卡和计算机,装调好激光器使其能照射进成像仪镜筒;
步骤2]:给数字微镜器件DMD进行4n-1(n为自然数)阶哈达玛编码,得到相应的当前循环矩阵;
步骤3]:采集数据:包括以下步骤:
数字微镜器件DMD依次加载4n-1阶当前循环矩阵的第一行至第4n-1行,采集保存得到4n-1幅图像;
步骤4]:取采集到的4n-1幅图像的第一幅图像,取第一图像可视区域内水平平分线的任意一点(i,j)(i,j为自然数)值y1,然后依次取第二幅至4n-1幅图像的(i,j)点的值,依次排列形成一个4n-1行的列向量;即{[y1 y2y3……y(4n-1)]T}
步骤5]:用当前循环矩阵的逆矩阵乘以步骤4]所得到的列向量,得到一个光谱值列向量,光谱值列向量的元素值即为对应波长相对光谱强度;
步骤6]:以波长为横坐标,以相对光谱强度为纵坐标绘制光谱曲线,并找出波峰所对应的波长位置;
其中:y-所用激光器的波长,x-光谱曲线波峰所对应的波长位置,仪器最大最小波长是指所用成像仪所能覆盖的光谱波长上限与下限;
如果满足式1,则执行步骤8];
如果不满足式1,则执行步骤9];
步骤9]取循环矩阵第二行为首行,其它行依次排列,第一行换到最后一行,形成循环矩阵,以循环矩阵作为当前循环矩阵,重复步骤5],步骤6],步骤7];
步骤10:换波长不同的第二激光器上述步骤中确定的备用矩阵为当前循环矩阵,重复步骤3]、4]、5]、6]、7];
步骤11]:取水平平分线上的另外一点重复步骤4]、5]、6]、7]直至得到该水平平分线上所有像素点所对应的复原矩阵。
2.根据权利要求1所述的光谱复原方法,其特征在于:所述n=2。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010143697XA CN101782430B (zh) | 2010-04-12 | 2010-04-12 | 一种基于哈达玛变换成像光谱仪的光谱复原方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010143697XA CN101782430B (zh) | 2010-04-12 | 2010-04-12 | 一种基于哈达玛变换成像光谱仪的光谱复原方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101782430A true CN101782430A (zh) | 2010-07-21 |
CN101782430B CN101782430B (zh) | 2012-03-28 |
Family
ID=42522518
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010143697XA Expired - Fee Related CN101782430B (zh) | 2010-04-12 | 2010-04-12 | 一种基于哈达玛变换成像光谱仪的光谱复原方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101782430B (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103245416A (zh) * | 2013-04-19 | 2013-08-14 | 中国科学院长春光学精密机械与物理研究所 | 一种添加集光结构的哈达玛变换近红外光谱仪 |
CN104949755A (zh) * | 2015-06-02 | 2015-09-30 | 中国科学院上海技术物理研究所 | 一种成像光谱系统中多通道孔径编码方法 |
CN105761212A (zh) * | 2014-12-15 | 2016-07-13 | 南京理工大学 | 基于dmd编码的哈达码变换高灵敏成像的方法 |
CN106248209A (zh) * | 2016-07-14 | 2016-12-21 | 中国科学院光电研究院 | 一种基于仪器特征矩阵的干涉光谱仪光谱复原方法 |
CN107796788A (zh) * | 2016-08-29 | 2018-03-13 | 南京理工大学 | 基于变分贝叶斯期望最大算法的传感矩阵测量方法 |
CN109374131A (zh) * | 2018-09-03 | 2019-02-22 | 南京理工大学 | 一种基于dmd编码的瞬态哈达玛矩阵光谱仪 |
CN109556718A (zh) * | 2018-11-26 | 2019-04-02 | 中国科学院长春光学精密机械与物理研究所 | 基于dmd单镜元选通实现编码孔径色散光谱标定的方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004361201A (ja) * | 2003-06-04 | 2004-12-24 | Olympus Corp | 顕微分光装置 |
US6996292B1 (en) * | 2002-04-18 | 2006-02-07 | Sandia Corporation | Staring 2-D hadamard transform spectral imager |
US20070080290A1 (en) * | 2005-01-14 | 2007-04-12 | Parker Charles B | Coded mass spectroscopy methods, devices, systems and computer program products |
CN101556189A (zh) * | 2009-01-20 | 2009-10-14 | 天津大学 | 基于哈达码矩阵调制的信号处理电路 |
CN101571421A (zh) * | 2009-06-16 | 2009-11-04 | 中国科学院西安光学精密机械研究所 | 一种哈达码变换成像光谱仪 |
-
2010
- 2010-04-12 CN CN201010143697XA patent/CN101782430B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6996292B1 (en) * | 2002-04-18 | 2006-02-07 | Sandia Corporation | Staring 2-D hadamard transform spectral imager |
JP2004361201A (ja) * | 2003-06-04 | 2004-12-24 | Olympus Corp | 顕微分光装置 |
US20070080290A1 (en) * | 2005-01-14 | 2007-04-12 | Parker Charles B | Coded mass spectroscopy methods, devices, systems and computer program products |
CN101556189A (zh) * | 2009-01-20 | 2009-10-14 | 天津大学 | 基于哈达码矩阵调制的信号处理电路 |
CN101571421A (zh) * | 2009-06-16 | 2009-11-04 | 中国科学院西安光学精密机械研究所 | 一种哈达码变换成像光谱仪 |
Non-Patent Citations (2)
Title |
---|
《APPLIED OPTICS》 20030520 ATMA RAM GUPTA,ET AL SYNTHESIS OF HADAMARD TRANSFORMERS BY USE OF MULTIMODE INTERFERENCE OPTICAL WAVEGUIDS 2730-2738 1-2 第42卷, 第15期 2 * |
《现代科学仪器》 20090831 雷猛,等 阿达玛变换近红外光谱仪 44-46 1-2 , 第4期 2 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103245416A (zh) * | 2013-04-19 | 2013-08-14 | 中国科学院长春光学精密机械与物理研究所 | 一种添加集光结构的哈达玛变换近红外光谱仪 |
CN105761212A (zh) * | 2014-12-15 | 2016-07-13 | 南京理工大学 | 基于dmd编码的哈达码变换高灵敏成像的方法 |
CN104949755A (zh) * | 2015-06-02 | 2015-09-30 | 中国科学院上海技术物理研究所 | 一种成像光谱系统中多通道孔径编码方法 |
CN106248209A (zh) * | 2016-07-14 | 2016-12-21 | 中国科学院光电研究院 | 一种基于仪器特征矩阵的干涉光谱仪光谱复原方法 |
CN107796788A (zh) * | 2016-08-29 | 2018-03-13 | 南京理工大学 | 基于变分贝叶斯期望最大算法的传感矩阵测量方法 |
CN109374131A (zh) * | 2018-09-03 | 2019-02-22 | 南京理工大学 | 一种基于dmd编码的瞬态哈达玛矩阵光谱仪 |
CN109374131B (zh) * | 2018-09-03 | 2021-05-28 | 南京理工大学 | 一种基于dmd编码的瞬态哈达玛矩阵光谱仪 |
CN109556718A (zh) * | 2018-11-26 | 2019-04-02 | 中国科学院长春光学精密机械与物理研究所 | 基于dmd单镜元选通实现编码孔径色散光谱标定的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101782430B (zh) | 2012-03-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101782430B (zh) | 一种基于哈达玛变换成像光谱仪的光谱复原方法 | |
US8553222B2 (en) | Coded aperture snapshot spectral imager and method therefor | |
Gill et al. | Lensless ultra-miniature imagers using odd-symmetry spiral phase gratings | |
CN103743482B (zh) | 一种光谱成像装置及光谱成像反演方法 | |
EP3832359B1 (en) | Method and device for imaging of lensless hyperspectral image | |
US9900562B2 (en) | System and method for light-field imaging | |
US6295392B1 (en) | Super resolution methods for electro-optical systems | |
KR20200112825A (ko) | 깊이 획득을 위한 명시야 이미지 처리 방법 | |
US20220086372A1 (en) | Multi-Modal Computational Imaging via Metasurfaces | |
KR20130088852A (ko) | 각 감지 픽셀(asp)에 기초한 이미지 처리 시스템, 방법, 및 응용들 | |
CN104121990A (zh) | 基于随机光栅的压缩感知宽波段高光谱成像系统 | |
JP5822937B2 (ja) | 不可視スペクトル領域の画像を処理する方法、相応するカメラおよび測定装置 | |
WO2015157097A1 (en) | Low-power image change detector | |
CN113188660B (zh) | 一种多维度参数可调的新型快照式偏振光谱成像系统 | |
CN106872035A (zh) | 量子点光谱成像系统 | |
EP3997863B1 (en) | A method and system for performing high speed optical image detection | |
CN107436194A (zh) | 一种高光通量实时光谱成像装置 | |
US11199448B2 (en) | Spectroscopic measurement device and spectroscopic measurement method | |
CN114659634A (zh) | 微型快照式压缩光谱成像探测装置及探测方法 | |
Kim et al. | Aperture-encoded snapshot hyperspectral imaging with a lensless camera | |
EP4270941A1 (en) | Imaging device and optical element | |
CN103916600A (zh) | 编码模板多目标超分辨率成像系统及方法 | |
Rueda et al. | Compressive spectral imaging based on colored coded apertures | |
EP2948811A1 (en) | Wide field imaging using physically small detectors | |
O’Neill et al. | Portable COTS RGB wavefront sensor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120328 Termination date: 20170412 |