CN102750449A - 基于分步三维空间-特征域映射的点云直线特征提取方法 - Google Patents
基于分步三维空间-特征域映射的点云直线特征提取方法 Download PDFInfo
- Publication number
- CN102750449A CN102750449A CN2012102107733A CN201210210773A CN102750449A CN 102750449 A CN102750449 A CN 102750449A CN 2012102107733 A CN2012102107733 A CN 2012102107733A CN 201210210773 A CN201210210773 A CN 201210210773A CN 102750449 A CN102750449 A CN 102750449A
- Authority
- CN
- China
- Prior art keywords
- centerdot
- cloud
- point
- mrow
- mover
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
一种基于分步三维空间-特征域映射的点云直线特征提取方法,它主要适用于从三维点云中提取直线特征,方便目标相对姿态的测量,属于三维测量和机器视觉技术领域,共有六大步骤。该方法运用了Hough变换原理,分步对点云直线特征进行提取。首先对每个点进行邻域搜索,并用邻域点集确定某点的空间方向,通过在参数空间观察指向分布找出可能存在的直线方向。将原始点云按照提取的直线方向投影,在二维平面直线上的点理论上会汇聚于一个区域内,对投影点借用近邻函数准则算法原理进行分析,估计直线的投影点,从而得到各直线的全部参数。
Description
技术领域
本发明涉及基于分步三维空间-特征域映射的点云直线特征提取方法,它是空间点云处理及三维对象特征提取的一种方法,具体涉及一种空间点云直线的提取方法,从而方便实现对目标相对姿态的测量,属于三维测量及计算机视觉技术领域。
背景技术
三维点云数据的获取技术已经比较成熟,常见的方法有基于双目立体视觉获取高精度点云信息、通过激光扫描方式快速获得对象的点云信息,以及其他的三维点云获取技术。众多三维对象中,直线是常见的重要的特征,利用直线特征,可以直接实现点云目标的基本结构探测、姿态变化测量、固定长度度量等。
常见的直线特征提取方法是对空间局部点云直接进行空间直线拟合,将每个特征点计算所得直线参数在参数空间累加器计数,最终根据累加结果确定直线分布。但结果精度受特征点云的直线宽度、累加器分割方法等影响较大。
发明内容
技术问题:本发明提出了一种在特征点云中提取直线特征的方法,通过分步的三维空间-特征域映射分别将直线的方向与位置探测出来,从而对特征点云实现初步的理解,对后期的姿态测量与点云目标识别有重要意义。
技术方案:要从所给的特征点云中识别空间直线,本发明提供了一种基于分步三维空间-特征域映射的点云直线特征提取方法,用于从特征点云中探测存在的直线结构,从而加深对三维点云数据的理解。
首先介绍直线的表达,一条直线的一般表达形式为且向量(A,B,C)表示了直线的空间方向,但该表达式中有6个参数,实际上一条直线的自由度为4,因此还有两个约束条件存在。若用一般形式的直线方程表达式,数据处理会比较复杂。使用更有效的空间直线表示方法,用四个参数(α,β,ρ,θ)即可完整表示直线,其中α,β表示直线从(1,0,0)到所处方向经过的经纬方向的角度,ρ,θ为直线延α,β方向投影后在目标平面的极坐标信息。
一种基于分步三维空间-特征域映射的点云直线特征提取方法,主要适用于从三维点云中提取直线特征,该方法运用了Hough变换原理,分步对点云直线特征进行提取。首先对每个点进行邻域搜索,并用邻域点集确定某点的空间方向,通过在参数空间观察指向分布找出可能存在的直线方向。将原始点云按照提取的直线方向投影,在二维平面直线上的点理论上会汇聚于一个区域内,对投影点借用近邻函数准则算法原理进行分析,估计直线的投影点,从而得到各直线的全部参数。
本发明基于分步三维空间-特征域映射的点云直线特征提取方法,该方法具体步骤为:
步骤一:特征点云中某点邻域的确定。首先用KD-TREE算法构建全体点云的结构树,根据点云的坐标分布将原始点云细分到不同区域,由于细分过程是基于坐标信息的,可直接根据区域地址信息实现最近点的搜索,以大幅提高搜索速度。快速构建出指定点的临近点集。
步骤二:特征点云中某点方向的确定。某点方向的确定要根据该点邻域的点云的坐标分布来确定。如果某点属于直线特征,使用用邻域点集与该点坐标差所得向量表示。其邻域点集提供的方法如下:
计算点集坐标的平均值 将点集中离平均点较近的点排除,计算点集的平均距离d,若|pi-pj|<2·d则pj不予以考虑。用平均点同较远的点确定直线方向并将方向统一为向上,即如果 而该特征点的点云方向则为有效方向之均值。即
步骤三:特征点云中直线方向探测。将各点云方向向量归一化,映射到单位向量球中,点云集中地方为直线方向所在。
步骤四:点云的空间自动分割。通过自动识别的方法将单位向量球中密度较大的区域找出并计算出其中心作为特征点云中直线的方向估计。即在方向域中根据元素的集散程度确定直线的方向参数。借助于近邻函数准则算法原理可采用的点云聚类分割方法得到不同的点集。
步骤五:特征点云按照提取的直线方向投影。将特征点云按照步骤四提取的直线方向投影,获得平面内的点云投影图象。基于3DHough变换的直线识别算法第一步即通过方向参数域的处理确定直线的可能方向α,β。在步骤四中得出的直线方向则对应的直线方向
对于一条空间直线来说,自由度为4,因此固定其分布需要的参数为4个,确定了方向指向后,再加上直线垂直平面的位置固定即可获得直线的全部参数。所以本步要做的是将特征点云按照步骤四提取的直线方向投影,获得平面内的点云投影图象。与之前的映射规律类似,一条直线的投影会聚集与一个区域,即获得了平面内的点云分布图,并在某区域有密度较大的点汇聚,其他位置点离散分布,继续应用步骤四中所述点云聚类分割方法,可以得到不同直线对应的映射平面的位置分布。
则转换后的点云为P′=(R·PT)T=(x′,y′,z′),则投影平面数据为Pface{xi′,yi′}(i∈[0,n])
步骤六:在投影平面中确定直线全部参数。继续应用步骤四中所述点云聚类分割方法,提取平面点云分布图像中直线投影点,可以得到不同直线对应的映射平面的位置分布。
其中,步骤四所述的点云簇类分割方法,其具体实现过程如下:
1:计算特征点云总数n;
2:计算点云的平均距离d;
3:建立点云的相关矩阵:
4:根据相关矩阵计算不同点云间距,建立与相关矩阵元素相应的相关距离矩阵。
5:从i=1行开始分析,比较点p1与其余各点的距离,以平均距离d的k倍作为阈值,选择所有小于d k的非0点,组成聚类1,记录满足要求点的序号Q1(q1…qs)。并将所有聚类1元素的序号(q1,q2…,qs)对应的(q1+1,q2+1…,qs+1)行和(q1,q2…,qs)列置0。
6:对下一行继续讨论,若全为0则跳至Step6;否则遇到满足小于dk的非0元素则生成下一个聚类Qn,更新序号i=i+1,i=n-1时跳至Step7,否则重新跳至Step6。
7:分析各个聚类的元素个数length(Qn),少于10个元素的孤立聚类可认为是干扰点,予以剔除,则剩下的聚类为各直线特征点云方向映射。
8:对各个有效聚类计算中心点,即可获得直线的方向估计。
有益效果:基于特征点云分步三维空间-特征域映射的点云直线特征提取方法中,通过三维空间-特征域映射原理对直线方向与定位信息的分步求解,得到了确定直线的所有参数,为点云后续处理提供了便利条件。具体优点有:
1、用临近点集坐标关系计算某点方向,较大程度减少了由于线特征较宽时拟合带来的误差。
2、基于近邻函数准则算法原理的点云分割算法,从参数空间点云中准确找出了高密度区域,实现了直线方向及位置信息的准确定位。
3、基于提取方向的点云投影方法,将三维空间已知方向直线的探测问题转化为二维平面的点云聚类分割问题,方便使用相应算法对直线位置准确定位。
附图说明
图1为本发明流程框图。
图2为点云方向映射的单位向量球结构图。
图3为直线按提取方向映射得到的平面点云图。
具体实施方式
见图1,本发明基于分步三维空间-特征域映射的点云直线特征提取方法,该方法具体步骤如下:
步骤一:特征点云中某点邻域的确定。方法所需的原始数据是点云数据的线特征点云,即表示一个目标的棱或圆台边沿等结构特征的点云数据的集合。要对这样的特征点云某点进行邻域搜索,可以首先用KD-TREE算法构建全体点云的结构树。KD-TREE算法是二叉树原理在点云空间的应用,根据点云的坐标分布将原始点云分布细分到不同的区域,由于再分割过程中是基于坐标信息的,可以直接根据分组区域地址信息来实现最近点的搜索,以n个点为例时间上从n变成log2n,可以节约大量时间。根据KD-TREE算法指定一定的搜索区域即可快捷地搜索出指定点的临近点集。
步骤二:特征点云中某点方向的确定。某点方向的确定要根据该点邻域的点云的坐标分布来确定。如果某点属于直线特征,则其邻域点集提供的方法如下:
计算点集坐标的平均值 将点集中离平均点较近的点排除,计算点集的平均距离d,若|pi-pj|<2·d则pj不予以考虑。用平均点同较远的点确定直线方向并将方向统一为向上,即如果 而该特征点的点云方向则为有效方向之均值。即
步骤三:特征点云中直线方向探测。根据上步的方法,可以分别求出特征点云中每个点的方向由直线的空间特性可以知道,位于直线上的点的指向会相近,如图2所示。将所有的特征点云方向向量归一化观察,方向向量的末端组成了一个单位向量球。而属于直线的点云相应的向量末端所在区域会有较大的密度。其它曲线特征的在单位向量球中对应的区域比较扩散。即单位向量球中密度较大的区域接近于点云直线的方向,而要获得精度较高的直线方向,则可以通过将点云方向向量的单位向量球的密集区分割出来,计算其中心坐标作为点云中直线方向的估计值。
步骤四:点云的空间自动分割。点云方向形成的单位向量球中在直线方向处会有密集的点云分布,在其他地方点云相对比较稀疏,要通过自动识别的方法将密度较大的区域找出并计算出其中心作为特征点云中直线的方向估计。即在方向域中根据元素的集散程度确定直线的方向参数。借助于近邻函数准则算法原理可采用的点云聚类分割方法如下:
1:计算特征点云总数n;
2:计算点云的平均距离d;
3:建立点云的相关矩阵:
4:根据相关矩阵计算不同点云间距,建立与相关矩阵元素相应的相关距离矩阵。
5:从i=1行开始分析,比较点p1与其余各点的距离,以平均距离d的k倍作为阈值,选择所有小于dk的非0点,组成聚类1,记录满足要求点的序号Q1(q1…qs)。并将所有聚类1元素的序号(q1,q2…,qs)对应的(q1+1,q2+1…,qs+1)行和(q1,q2…,qs)列置0。
6:对下一行继续讨论,若全为0则跳至6;否则遇到满足小于dk的非0元素则生成下一个聚类Qn,更新序号i=i+1,i=n-1时跳至7,否则重新跳至6。
7:分析各个聚类的元素个数length(Qn),少于10个元素的孤立聚类可认为是干扰点,予以剔除,则剩下的聚类为各直线特征点云方向映射。
8:对各个有效聚类计算中心点,即可获得直线的方向估计。
对于一条空间直线来说,自由度为4,因此固定其分布需要的参数为4个,确定了方向指向后,再加上直线垂直平面的位置固定即可获得直线的全部参数。所以本步要做的是将特征点云按照步骤四提取的直线方向投影,获得平面内的点云投影图象。与之前的映射规律类似,一条直线的投影会聚集与一个区域,即获得了平面内的点云分布图,并在某区域有密度较大的点汇聚,其他位置点离散分布,继续应用步骤四中所述点云聚类分割方法,可以得到不同直线对应的映射平面的位置分布。
则转换后的点云为P′=(R·PT)T=(x′,y′,z′),则投影平面数据为Pface{xi′,yi′}(i∈[0,n])
步骤六:在投影平面中确定直线全部参数。与之前的映射规律类似,一条直线的投影点会聚集于一个较小区域,即获得了平面内的点云分布图,并在某区域有密度较大的点汇聚,其他位置点离散分布。首先应用点云滤波,将密度较小的点云去除,继续应用步骤四中所述点云聚类分割方法,可以得到不同直线对应的映射平面的位置分布,将位置坐标转换为极坐标(ρ,θ),即可获得直线的全部参数。图3为直线按提取方向映射得到的平面点云图。
Claims (2)
1.基于分步三维空间-特征域映射的点云直线特征提取方法,其特征在于:该方法具体步骤如下:
步骤一:特征点云中某点邻域的确定;首先用KD-TREE算法构建全体点云的结构树,根据点云的坐标分布将原始点云细分到不同区域,由于细分过程是基于坐标信息的,直接根据区域地址信息实现最近点的搜索,以大幅提高搜索速度,快速构建出指定点的临近点集;
步骤二:特征点云中某点方向的确定;某点方向的确定要根据该点邻域的点云的坐标分布来确定,如果某点属于直线特征,使用用邻域点集与该点坐标差所得向量表示;其邻域点集提供的方法如下:
计算点集坐标的平均值 将点集中离平均点较近的点排除,计算点集的平均距离d,若|pi-pj|<2·d则pj不予以考虑;用平均点同较远的点确定直线方向并将方向统一为向上,即如果 而该特征点的点云方向则为有效方向之均值,即
步骤三:特征点云中直线方向探测;将各点云方向向量归一化,映射到单位向量球中,点云集中地方为直线方向所在;
步骤四:点云的空间自动分割;通过自动识别的方法将单位向量球中密度较大的区域找出并计算出其中心作为特征点云中直线的方向估计,即在方向域中根据元素的集散程度确定直线的方向参数,借助于近邻函数准则算法原理可采用的点云聚类分割方法得到不同的点集;
步骤五:特征点云按照提取的直线方向投影;将特征点云按照步骤四提取的直线方向投影,获得平面内的点云投影图象;基于3DHough变换的直线识别算法第一步即通过方向参数域的处理确定直线的可能方向α,β;在步骤四中得出的直线方向则对应的直线方向
对于一条空间直线来说,自由度为4,因此固定其分布需要的参数为4个,确定了方向指向后,再加上直线垂直平面的位置固定即获得直线的全部参数;所以本步是将特征点云按照步骤四提取的直线方向投影,获得平面内的点云投影图象;与之前的映射规律类似,一条直线的投影会聚集与一个区域,即获得了平面内的点云分布图,并在某区域有密度较大的点汇聚,其他位置点离散分布,继续应用步骤四中所述点云聚类分割方法,得到不同直线对应的映射平面的位置分布;
则转换后的点云为P′=(R·PT)T=(x′,y′,z′),则投影平面数据为Pface{xi′,yi′}(i∈[0,n]);
步骤六:在投影平面中确定直线全部参数;继续应用步骤四中所述点云聚类分割方法,提取平面点云分布图像中直线投影点,得到不同直线对应的映射平面的位置分布。
2.根据权利要求1所述的基于分步三维空间-特征域映射的点云直线特征提取方法,其特征在于:步骤四所述的点云簇类分割方法,其具体实现过程如下:
1:计算特征点云总数n;
2:计算点云的平均距离d;
3:建立点云的相关矩阵:
4:根据相关矩阵计算不同点云间距,建立与相关矩阵元素相应的相关距离矩阵;
5:从i=1行开始分析,比较点p1与其余各点的距离,以平均距离d的k倍作为阈值,选择所有小于dk的非0点,组成聚类1,记录满足要求点的序号Q1(q1…qs),并将所有聚类1元素的序号(q1,q2…,qs)对应的(q1+1,q2+1…,qs+1)行和(q1,q2…,qs)列置0;
6:对下一行继续讨论,若全为0则跳至Step6;否则遇到满足小于dk的非0元素则生成下一个聚类Qn,更新序号i=i+1,i=n-1时跳至Step7,否则重新跳至Step6;
7:分析各个聚类的元素个数length(Qn),少于10个元素的孤立聚类认为是干扰点,予以剔除,则剩下的聚类为各直线特征点云方向映射;
8:对各个有效聚类计算中心点,即获得直线的方向估计。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210210773.3A CN102750449B (zh) | 2012-06-20 | 2012-06-20 | 基于分步三维空间-特征域映射的点云直线特征提取方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210210773.3A CN102750449B (zh) | 2012-06-20 | 2012-06-20 | 基于分步三维空间-特征域映射的点云直线特征提取方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102750449A true CN102750449A (zh) | 2012-10-24 |
CN102750449B CN102750449B (zh) | 2015-05-20 |
Family
ID=47030625
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210210773.3A Expired - Fee Related CN102750449B (zh) | 2012-06-20 | 2012-06-20 | 基于分步三维空间-特征域映射的点云直线特征提取方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102750449B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103438835A (zh) * | 2013-08-23 | 2013-12-11 | 中联重科股份有限公司 | 一种板材折弯角度检测装置和方法 |
CN107741234A (zh) * | 2017-10-11 | 2018-02-27 | 深圳勇艺达机器人有限公司 | 一种基于视觉的离线地图构建及定位方法 |
CN108805143A (zh) * | 2018-06-01 | 2018-11-13 | 苏州工业园区测绘地理信息有限公司 | 一种基于切片点云的数据特征提取方法 |
CN108833927A (zh) * | 2018-05-03 | 2018-11-16 | 北京大学深圳研究生院 | 一种基于删除量化矩阵中0元素的点云属性压缩方法 |
CN109409176A (zh) * | 2018-01-04 | 2019-03-01 | 北京星衡科技有限公司 | 一种用于遥感影像的地块提取的方法与装置 |
CN112053365A (zh) * | 2019-06-06 | 2020-12-08 | 武汉星源云意科技有限公司 | 一种基于线性特征的输电线路导线激光点云数据的提取方法 |
CN112415628A (zh) * | 2019-08-20 | 2021-02-26 | 核工业二一六大队 | 一种砂岩型铀矿取样平面分布图成图方法 |
CN115063497A (zh) * | 2022-08-19 | 2022-09-16 | 北京山维科技股份有限公司 | 一种点云数据处理方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101136008A (zh) * | 2006-08-29 | 2008-03-05 | 鸿富锦精密工业(深圳)有限公司 | 直线度分析系统及方法 |
CN101751695A (zh) * | 2008-12-10 | 2010-06-23 | 中国科学院自动化研究所 | 点云数据的主曲率和主方向估计方法 |
-
2012
- 2012-06-20 CN CN201210210773.3A patent/CN102750449B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101136008A (zh) * | 2006-08-29 | 2008-03-05 | 鸿富锦精密工业(深圳)有限公司 | 直线度分析系统及方法 |
CN101751695A (zh) * | 2008-12-10 | 2010-06-23 | 中国科学院自动化研究所 | 点云数据的主曲率和主方向估计方法 |
Non-Patent Citations (1)
Title |
---|
KARIM HAMMOUDI ETC AL.: "EXTRACTING BUILDING FOOTPRINTS FROM 3D POINT CLOUDS USINGTERRESTRIAL LASER SCANNING AT STREET LEVEL", 《STILLA U, ROTTENSTEINER F, PAPARODITIS N (EDS) CMRT09.IAPRS》 * |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103438835A (zh) * | 2013-08-23 | 2013-12-11 | 中联重科股份有限公司 | 一种板材折弯角度检测装置和方法 |
CN103438835B (zh) * | 2013-08-23 | 2016-06-08 | 中联重科股份有限公司 | 一种板材折弯角度检测装置和方法 |
CN107741234A (zh) * | 2017-10-11 | 2018-02-27 | 深圳勇艺达机器人有限公司 | 一种基于视觉的离线地图构建及定位方法 |
CN109409176A (zh) * | 2018-01-04 | 2019-03-01 | 北京星衡科技有限公司 | 一种用于遥感影像的地块提取的方法与装置 |
CN108833927A (zh) * | 2018-05-03 | 2018-11-16 | 北京大学深圳研究生院 | 一种基于删除量化矩阵中0元素的点云属性压缩方法 |
CN108805143A (zh) * | 2018-06-01 | 2018-11-13 | 苏州工业园区测绘地理信息有限公司 | 一种基于切片点云的数据特征提取方法 |
CN112053365A (zh) * | 2019-06-06 | 2020-12-08 | 武汉星源云意科技有限公司 | 一种基于线性特征的输电线路导线激光点云数据的提取方法 |
CN112053365B (zh) * | 2019-06-06 | 2022-06-14 | 武汉星源云意科技有限公司 | 一种基于线性特征的输电线路导线激光点云数据的提取方法 |
CN112415628A (zh) * | 2019-08-20 | 2021-02-26 | 核工业二一六大队 | 一种砂岩型铀矿取样平面分布图成图方法 |
CN112415628B (zh) * | 2019-08-20 | 2022-07-26 | 核工业二一六大队 | 一种砂岩型铀矿取样平面分布图成图方法 |
CN115063497A (zh) * | 2022-08-19 | 2022-09-16 | 北京山维科技股份有限公司 | 一种点云数据处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN102750449B (zh) | 2015-05-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102750449A (zh) | 基于分步三维空间-特征域映射的点云直线特征提取方法 | |
CN102136155B (zh) | 基于三维激光扫描数据的物体立面矢量化方法和系统 | |
CN107301648B (zh) | 基于重叠区域边界角度的冗余点云去除方法 | |
CN102798362B (zh) | 一种基于点云数据的铸件加工余量估计方法 | |
CN103729872B (zh) | 一种基于分段重采样和表面三角化的点云增强方法 | |
CN109816664B (zh) | 一种三维点云分割方法及装置 | |
CN102938066A (zh) | 一种基于多元数据重建建筑物外轮廓多边形的方法 | |
CN102799763B (zh) | 一种基于点云姿态标准化的点云线特征提取方法 | |
CN107862735B (zh) | 一种基于结构信息的rgbd三维场景重建方法 | |
CN102682477A (zh) | 一种基于结构先验的规则场景三维信息提取方法 | |
CN109186608A (zh) | 一种面向重定位的稀疏化三维点云地图生成方法 | |
CN105139379A (zh) | 基于分类分层的机载Lidar点云建筑物顶面渐进提取方法 | |
CN109241978A (zh) | 地基三维激光点云中平面片的快速提取方法 | |
CN102915558A (zh) | 一种快速提取机载LiDAR数据中建筑物三维轮廓信息的方法 | |
CN104504709A (zh) | 一种基于特征球的室外场景三维点云数据的分类方法 | |
CN101739683B (zh) | 基于图分割和多线索融合的单幅图深度估计方法及其系统 | |
CN107316328A (zh) | 一种基于二维激光扫描仪角点特征的闭环检测方法 | |
CN107993242B (zh) | 基于机载LiDAR点云数据缺失区域边界提取方法 | |
Tse et al. | 3D city modelling from LIDAR data | |
Hetti Arachchige | Automatic tree stem detection–a geometric feature based approach for MLS point clouds | |
CN104915988A (zh) | 一种摄影测量密集点云生成方法 | |
CN104200525A (zh) | 基于挤压物体图像的三维建模方法及系统 | |
CN116452764A (zh) | 一种融合地形信息的机载激光雷达点云分级抽稀方法 | |
CN105719272A (zh) | 保持空间结构的图像特征点匹配方法 | |
Mi et al. | Automatic road structure detection and vectorization Using Mls point clouds |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150520 Termination date: 20200620 |
|
CF01 | Termination of patent right due to non-payment of annual fee |