CN102518029B - 沥青路面损坏综合智能检测车 - Google Patents

沥青路面损坏综合智能检测车 Download PDF

Info

Publication number
CN102518029B
CN102518029B CN201110437157.7A CN201110437157A CN102518029B CN 102518029 B CN102518029 B CN 102518029B CN 201110437157 A CN201110437157 A CN 201110437157A CN 102518029 B CN102518029 B CN 102518029B
Authority
CN
China
Prior art keywords
pavement
laser
vehicle body
road surface
detector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110437157.7A
Other languages
English (en)
Other versions
CN102518029A (zh
Inventor
陈长
孙立军
李莉
王慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tongji University
Original Assignee
Tongji University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tongji University filed Critical Tongji University
Priority to CN201110437157.7A priority Critical patent/CN102518029B/zh
Publication of CN102518029A publication Critical patent/CN102518029A/zh
Application granted granted Critical
Publication of CN102518029B publication Critical patent/CN102518029B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Road Repair (AREA)

Abstract

本发明公开了一种沥青路面损坏综合智能检测车,包括车身、路面破损检测仪、路面变形检测仪、GPS装置和里程测距装置,路面破损检测仪安装于车身的前端,通过拍摄路面图像获得路面破损信息;路面变形检测仪安装于车身的尾端,通过两束成交叉图样的激光线投射于地面的变形确定路面变形信息;GPS装置安装于车身的顶部;里程测距装置安装于检测车的车轮轴上。本发明通过昼夜对路面进行连续或间隔拍摄;且通过结构光投影原理对路面三维变形进行检测,并有效克服白天太阳光的干扰;对路面损坏区域进行定位,并获得路面损坏相对于路线的准确桩号位置,在正常行驶速度下即可同时获得沥青路面的破损和变形数据。

Description

沥青路面损坏综合智能检测车
技术领域
本发明属于交通工程领域,涉及路面检测车,尤其是一种针对沥青路面损坏情况的检测车。
背景技术
随着高等级公路和高速公路里程的大幅增长以及交通量的逐年递增,在不干扰交通的前提下对路面损坏进行准确、快速的检测成为路面养护管理的迫切需求。沥青路面的主要损坏可分为表面破损类和变形类,这两类损坏的范围和程度通常是沥青路面维修的依据,已问世或处于研究阶段的路面检测设备也以检测这两类损坏为主。其中以图像处理为技术基础的无损检测是该领域研究的重要方向,但目前的技术水平仍不够成熟,特别是自动化检测方面,多数应用仍停留在试验阶段。
在路面损坏检测中,检测路面破损普遍采用外业拍照或摄影、内业识别的方式,较成熟的识别模式多为人工识别或半自动识别,全自动识别以及实时识别尚未有稳定成熟的应用。与破损检测相对单一的技术路线不同,路面变形检测呈现出多种技术形式,从早期的多激光传感器检测,到激光转镜扫描检测、光学干涉检测,以及激光结构光断面检测等,在技术上均可以实现对路面变形的快速、无损检测,自动化程度也较高。相比而言,激光转镜检测,由于结构复杂、造价昂贵在实践中应用不多;光学干涉检测由于对震动极其敏感从而不适合动态环境下的检测。如今应用最多的仍是相对传统的多激光传感器检测,虽然检测精度和方法均存在缺陷,但技术成熟、造价低廉。结构光检测路面变形的理念迄今已有超过20年的历史,但将激光作为结构光的时间并不长。目前多数激光结构光都存在只能在夜间检测或受震动影响检测精度不高的问题。此外,不论采用哪种技术,目前针对路面变形的检测都存在忽略路面三维变形的问题,所建立的路面三维形貌也不能准确反映路面工作状态。而目前集成的路面检测设备也都不同程度地存在下列问题:损坏定位技术仅采用GPS或仅采用里程控制器,具有GPS定位不够精确、里程控制又忽视全局的劣势;检测装置与车身不是一体性设计,难以忽略行驶过程中车身或检测装置震动对检测结果的影响。
鉴于上述原因,虽然已有多种基于图像处理的路面自动化检测设备问世,但其在实际生产实践中的应用仍然非常有限,该领域的研究仍存在很大空间。
发明内容
本发明的目的在于解决上述问题,提供一种沥青路面损坏综合智能检测车,其布置紧凑、车身与检测装置刚度协调、在正常行驶速度下即可同时检测路面破损和变形,并可获得损坏位置。
为达到以上目的,本发明所采用的解决方案是:
一种沥青路面损坏综合智能检测车,包括车身、路面破损检测仪、路面变形检测仪、GPS装置和里程测距装置,路面破损检测仪安装于车身的前端,通过拍摄路面图像获得路面破损信息;路面变形检测仪安装于车身的尾端,通过两束成交叉图样的激光线投射于地面的变形确定路面变形信息;GPS装置安装于车身的顶部;里程测距装置安装于检测车的车轮轴上。
进一步,所述路面破损检测仪包括CCD线扫描相机、照明激光器和第一棱镜,第一棱镜置于照明激光器前方,且第一棱镜和照明激光器并列布置于CCD线扫描相机的一侧。
所述照明激光器发射出的点激光经第一棱镜扩散后的线激光,宽度不小于7mm。
所述路面破损检测仪通过支架固定于车身上,支架包括4根连接杆,其中2根的一端焊接在车身顶部,另一端焊接在路面破损检测仪上;另外2根的一端焊接在车身前端,另一端焊接在路面破损检测仪上。
所述路面变形检测仪包括CCD面阵相机和大功率线型532nm激光器,大功率线型532nm激光器有2台,固定于安装架上,其中一台横向安装,即平行于路面横断面,另一台则侧向安装,即与横向成锐角夹角;安装架固定于车身顶部,且覆盖整个车顶并延伸至车身尾端外部,大功率线型532nm激光器位于车身尾端外部的安装架上,且其激光均向路面投射,CCD面阵相机安装于车身尾部的下端。
所述安装架包括横梁和纵梁,纵梁为两根,分别设于两端,横梁为四根,且两根为一组;横梁和纵梁之间滑动连接;每个大功率线型532nm激光器各自固定于其中一组的横梁上,大功率线型532nm激光器和横梁之间设有橡胶垫片。
所述大功率线型532nm激光器包括发射器和第二棱镜,发射器发射出的点激光经第二棱镜扩散成线激光投射于路面,覆盖一个车道宽度;CCD面阵相机拍摄激光投影区的图像,拍摄范围覆盖一个车道宽度。
所述CCD面阵相机上设有滤光元件组,滤光元件组包括宽带滤光片和窄带滤光片,其中宽带滤光片安装在CCD面阵相机的相机镜头前,窄带滤光片安装在相机镜头与CCD面阵相机的图像传感器之间。
由于采用了上述方案,本发明具有以下特点:1.利用2束激光线结构光对沥青路面进行投影,结构光形成交叉线状图样,可同时获得沥青路面的横向不平整程度和纵向不平整程度,也即二维平整度,解决了直接利用路面横断面信息构造路面三维形貌时无法准确描述路面纵向变形的问题;2.当2束激光线结构光呈交叉线状布置时,不需要额外增加相机即可通过图像计算得到路面的纵向变形程度;3.GPS对路面损坏进行区域级定位,里程测距装置获得路面损坏相对于路线的具体桩号位置,为道路的网级和项目级养护管理提供了便利。
附图说明
图1是本发明一种实施例的侧面布置示意图;
图2是图1所示实施例的车前布置示意图;
图3是图1所示实施例的车尾布置示意图;
图4是图1所示实施例安装2台大功率线型激光器时的车尾布置示意图;
图5是图2所示路面破损检测装置的工作原理图;
图6是图3所示路面变形检测装置的工作原理图;
图7是图3所示面阵相机上滤光元件组的安装图示;
图8是图4所示路面变形检测装置安装2台大功率线型激光器时的投影图示;
图9是图8所示投影图示的计算原理图。
具体实施方式
以下结合附图所示实施例对本发明作进一步的说明。
如图1所示,本发明的沥青路面损坏综合智能检测车,包括车身、路面破损检测仪1、路面变形检测仪、GPS装置3和里程测距装置8,路面破损检测仪1通过支架2安装于车身的前端;路面变形检测仪安装于车身的尾端;GPS装置3安装于车身的顶部;里程测距装置8安装于检测车的车轮轴上。路面破损检测仪1包括高速高清CCD线扫描相机16、照明激光器14和第一棱镜15,其中第一棱镜15放置在照明激光器14前方,二者均并列布置在CCD线扫描相机16一侧。路面变形检测仪包括2台大功率线型532nm激光器5、1台高速高清CCD面阵相机6及其配套的滤光元件组20,大功率线型532nm激光器5安装于钢架4上,钢架4通过焊接加螺栓锚固的方式固定于车身的顶部,钢架4的长度覆盖整个车顶一直延伸至车尾边缘外部,大功率线型532nm激光器5即位于该车尾边缘外部的钢架4上,其激光均向路面投射。其中,一台大功率线型532nm激光器5横向安装(平行于路面横断面,与车辆行驶方向垂直),另一台大功率线型532nm激光器5侧向安装(与前述横向成锐角夹角);高速高清CCD面阵相机6通过三角形支架7安装于车尾的下部,支架7采用焊接加螺栓锚固的方式固定在车身的尾部,与车身连成一体,如图3所示。
如图2所示,支架2由4根焊接在车身上的钢材构成,其中2根的一端焊接在车顶,另一端焊接在路面破损检测仪1上,另外2根的一端焊接在车前,另一端同样焊接在路面破损检测仪1上,分别各成一对三角形支架。支架2应具有足够的刚度,并与车身刚度协调,避免在车辆行驶时过度震动。
图4是大功率线型532nm激光器5的具体安装示意图。如图所示,钢架4包括横梁12和纵梁13,纵梁13为两根,分别设于两端,横梁12为四根,且两根为一组。每个大功率线型532nm激光器5分别通过锚固螺栓11固定于其中一组的横梁12上,大功率线型532nm激光器5和横梁12之间设有橡胶垫片10,使激光器与钢架的连接更加紧凑并减轻锚固压力对激光器的破坏;钢架4的横梁12和纵梁13采用滑动连接方式,用以调整激光器组的间距。
图5所示为路面破损检测装置的工作原理图。如图所示,照明激光器14发射出的点激光经第一棱镜15扩散成线激光,投射在路表17上,该线激光具有一定宽度(宽度一般不小于7mm),应覆盖高速高清CCD线扫描相机16的扫描范围。该路面破损检测仪1可昼夜对路面进行连续或间隔拍摄,CCD线扫描相机16和照明激光器14与车身的连接应牢固稳定,避免在车辆行驶过程中因震动导致拍照位置与照明位置错位。
图6所示是路面变形检测装置的工作原理图。如图所示,大功率线型532nm激光器5由发射器18和第二棱镜19组成,发射器18发射出的532nm点激光经第二棱镜19扩散成线激光投射于路面,覆盖一个车道宽度;高速高清CCD面阵相机6的相机和镜头上安装了滤光元件组20,以排除太阳光的干扰;高速高清CCD面阵相机6拍摄激光投影区的图像,拍摄范围可覆盖一个车道宽度。
图7所示是高速高清CCD面阵相机6上配套的滤光元件组20的安装示意图。滤光元件组20由宽带滤光片21和窄带滤光片22组成,其中宽带滤光片21安装在相机镜头23前,窄带滤光片22安装在镜头23与CCD图像传感器24之间。
图8是安装2台大功率线型激光器时的投影图示,2束线激光成交叉布置,其中一束线激光平行于车道横断面,另一束与车道横断面成10~45°角。该交叉激光图样可覆盖一个车道宽度。
本发明的工作原理是:车前安装的高速高清CCD线扫描相机16在照明激光器14辅助照明的情况下可连续或间隔地拍摄清晰的路面图像,从而获得路面表面破损信息,包括裂缝、坑槽等。车尾安装的2台大功率线型激光器5,将2束成交叉图样的激光线投射于路面,当路面存在变形时,2束激光线均呈曲线形状。其中,平行于车道横断面的激光线的弯曲图样反映路面的横向变形,从而可获得路面的车辙、拥包、沉陷等变形损坏信息;与车道横断面成一定角度的激光线的弯曲图样反映路面在该断面方向上的变形。由于2束激光线在同一幅图像中成像,因此便可利用其相对关系同时得到路面的横断面和纵断面高程,计算原理如图9所示:点A和点B位于同一束激光线,两点之间的高程差可由图像处理过程得到,同理,点A和点C也位于同一束激光线,高程差可计算得到,由此便可推算出点B和点C间的高程差,而位于线段
Figure BDA0000124060020000051
上的各点高程则可通过线性插值得到。利用相同的方法可以得出任意纵断面的高程变化曲线。若给定起始测点的绝对高程,并使线激光结构光图像连续覆盖路面,便可得到整个路面的绝对二维高程,并据此建立真实的路面三维模型。
本发明的沥青路面损坏智能检测车的路面破损检测仪1可昼夜对路面进行连续或间隔拍摄,其中照明用的线激光应具备一定宽度,高速高清CCD线扫描相机16和照明激光器14与车身的连接应牢固稳定,避免在车辆行驶过程中因震动导致拍照位置与照明位置错位;车辆尾部安装的路面变形检测仪,利用结构光投影原理对路面二维平整度(即三维变形)进行检测,并通过滤光元件组20有效克服白天太阳光的干扰;车内配备GPS装置3和里程测距装置8,可对路面损坏区域进行定位,并获得路面损坏相对于路线的准确桩号位置。高速高清CCD线扫描相机16、照明激光器14、大功率线型532nm激光器5、高速高清CCD面阵相机6,均与车内的车载电源和中央处理器连接。车前CCD线扫描相机16和车尾CCD面阵相机6将拍摄的图像通过以太网接口传输至设置在车内的中央存储器,待后续图像处理。综上所述,路面破损检测仪通过拍摄高清路面图像检测路面的破损状况,而路面变形检测仪通过拍摄特殊形式的结构光变形图样获取路面的变形特征。
上述的对实施例的描述是为便于该技术领域的普通技术人员能理解和应用本发明。熟悉本领域技术的人员显然可以容易地对这些实施例做出各种修改,并把在此说明的一般原理应用到其他实施例中而不必经过创造性的劳动。因此,本发明不限于这里的实施例,本领域技术人员根据本发明的揭示,不脱离本发明的范畴所做出的改进和修改都应该在本发明的保护范围之内。

Claims (6)

1.一种沥青路面损坏综合智能检测车,其特征在于:包括车身、路面破损检测仪、路面变形检测仪、GPS装置和里程测距装置,路面破损检测仪安装于车身的前端,通过拍摄路面图像获得路面破损信息;路面变形检测仪安装于车身的尾端,通过两束成交叉图样的激光线投射于地面的变形确定路面变形信息;GPS装置安装于车身的顶部;里程测距装置安装于检测车的车轮轴上;
所述路面破损检测仪包括CCD线扫描相机、照明激光器和第一棱镜,第一棱镜置于照明激光器前方,且第一棱镜和照明激光器并列布置于CCD线扫描相机的一侧;
所述路面破损检测仪通过支架固定于车身上,支架包括4根连接杆,其中2根的一端焊接在车身顶部,另一端焊接在路面破损检测仪上;另外2根的一端焊接在车身前端,另一端焊接在路面破损检测仪上。
2.如权利要求1所述的沥青路面损坏综合智能检测车,其特征在于:所述照明激光器发射出的点激光经第一棱镜扩散后的线激光,宽度不小于7mm。
3.如权利要求1所述的沥青路面损坏综合智能检测车,其特征在于:所述路面变形检测仪包括CCD面阵相机和大功率线型532nm激光器,大功率线型532nm激光器有2台,固定于安装架上,其中一台横向安装,即平行于路面横断面,另一台则侧向安装,即与横向成锐角夹角;安装架固定于车身顶部,且覆盖整个车顶并延伸至车身尾端外部,大功率线型532nm激光器位于车身尾端外部的安装架上,且其激光均向路面投射,CCD面阵相机安装于车身尾部的下端。
4.如权利要求3所述的沥青路面损坏综合智能检测车,其特征在于:所述安装架包括横梁和纵梁,纵梁为两根,分别设于两端,横梁为四根,且两根为一组;横梁和纵梁之间滑动连接;每个大功率线型532nm激光器各自固定于其中一组的横梁上,大功率线型532nm激光器和横梁之间设有橡胶垫片。
5.如权利要求3所述的沥青路面损坏综合智能检测车,其特征在于:所述大功率线型532nm激光器包括发射器和第二棱镜,发射器发射出的点激光经第二棱镜扩散成线激光投射于路面,覆盖一个车道宽度;CCD面阵相机拍摄激光投影区的图像,拍摄范围覆盖一个车道宽度。
6.如权利要求3所述的沥青路面损坏综合智能检测车,其特征在于:所述CCD面阵相机上设有滤光元件组,滤光元件组包括宽带滤光片和窄带滤光片,其中宽带滤光片安装在CCD面阵相机的相机镜头前,窄带滤光片安装在相机镜头与CCD面阵相机的图像传感器之间。
CN201110437157.7A 2011-12-23 2011-12-23 沥青路面损坏综合智能检测车 Expired - Fee Related CN102518029B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110437157.7A CN102518029B (zh) 2011-12-23 2011-12-23 沥青路面损坏综合智能检测车

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110437157.7A CN102518029B (zh) 2011-12-23 2011-12-23 沥青路面损坏综合智能检测车

Publications (2)

Publication Number Publication Date
CN102518029A CN102518029A (zh) 2012-06-27
CN102518029B true CN102518029B (zh) 2014-05-21

Family

ID=46289073

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110437157.7A Expired - Fee Related CN102518029B (zh) 2011-12-23 2011-12-23 沥青路面损坏综合智能检测车

Country Status (1)

Country Link
CN (1) CN102518029B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103485266B (zh) * 2013-10-09 2015-06-24 武汉武大卓越科技有限责任公司 一种高清晰路面图像采集方法
KR101456565B1 (ko) * 2014-05-28 2014-10-31 하상우 도로포장 손상 조사 및 분석 시스템, 그리고 도로포장 손상 조사 및 분석 방법
CN104005325B (zh) * 2014-06-17 2016-01-20 武汉武大卓越科技有限责任公司 基于深度和灰度图像的路面裂缝检测装置和方法
CN105113375B (zh) * 2015-05-15 2017-04-19 南京航空航天大学 一种基于线结构光的路面裂缝检测系统及其检测方法
CN105352475B (zh) * 2015-11-03 2017-08-18 长安大学 一种三维激光检测仪最佳水平架设夹角的确定方法
CN105869421A (zh) * 2016-06-13 2016-08-17 乐视控股(北京)有限公司 异常路况信息处理方法、装置及车辆
CN108507529B (zh) * 2017-05-16 2024-02-06 重庆大学 一种桥接坡沉降自动检测装置及车辆
CN107664599B (zh) * 2017-07-03 2023-10-17 交通运输部公路科学研究所 用于沥青拉伸断裂判断的方法和装置
CN108460767B (zh) * 2018-05-06 2023-05-09 吉林大学 车载路面裂纹检测系统路面单应主动解算装置与方法
CN110657754A (zh) * 2019-09-24 2020-01-07 华侨大学 一种金刚石绳锯形变的快速测量装置
RU2732728C1 (ru) * 2020-05-19 2020-09-22 Александр Алексеевич Семенов Устройство для оценки состояния дорожного покрытия
CN111664830A (zh) * 2020-06-01 2020-09-15 中公诚科(吉林)工程检测有限公司 一种基于三维激光扫描的道路纵断面高程和平整度测量方法
CN112304943A (zh) * 2020-09-18 2021-02-02 湖北高路公路工程监理咨询有限公司 一种高速公路工程质量自动检测装置
CN112267361B (zh) * 2020-10-15 2022-04-19 魏强 一种道路施工用路面水平检测装置
CN112432956A (zh) * 2020-10-31 2021-03-02 滁州市山坪机电设备有限公司 一种公路路面损坏检测装置及检测方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1073415A (ja) * 1996-08-30 1998-03-17 Tokimec Inc 遠赤外線撮像装置
CN2302499Y (zh) * 1997-05-05 1998-12-30 南京理工大学 便携式激光路面弯沉检测仪
CN1548653A (zh) * 2003-05-15 2004-11-24 南京理工大学 路面状况激光三维智能检测车
CN2658211Y (zh) * 2003-08-28 2004-11-24 武汉武大卓越科技有限责任公司 智能道路路面自动检测车
CN101487224A (zh) * 2009-02-27 2009-07-22 长安大学 高速路况检测车
CN201424620Y (zh) * 2009-01-20 2010-03-17 南京理工大学 绿激光路面车辙路形检测系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6473415A (en) * 1987-09-16 1989-03-17 Hitachi Ltd Optical disk sub-system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1073415A (ja) * 1996-08-30 1998-03-17 Tokimec Inc 遠赤外線撮像装置
CN2302499Y (zh) * 1997-05-05 1998-12-30 南京理工大学 便携式激光路面弯沉检测仪
CN1548653A (zh) * 2003-05-15 2004-11-24 南京理工大学 路面状况激光三维智能检测车
CN2658211Y (zh) * 2003-08-28 2004-11-24 武汉武大卓越科技有限责任公司 智能道路路面自动检测车
CN201424620Y (zh) * 2009-01-20 2010-03-17 南京理工大学 绿激光路面车辙路形检测系统
CN101487224A (zh) * 2009-02-27 2009-07-22 长安大学 高速路况检测车

Also Published As

Publication number Publication date
CN102518029A (zh) 2012-06-27

Similar Documents

Publication Publication Date Title
CN102518029B (zh) 沥青路面损坏综合智能检测车
CN102535316B (zh) 沥青路面损坏综合智能检测车
CN102518030B (zh) 改进的沥青路面损坏综合智能检测车
CN101694084B (zh) 地面车载移动检测系统
US11573090B2 (en) LIDAR and rem localization
CN104865578B (zh) 一种室内停车场高精细地图生成装置及方法
CN109635737B (zh) 基于道路标记线视觉识别辅助车辆导航定位方法
KR20200006556A (ko) 자율주행차 시스템을 위한 교차 시야
JP2018092501A (ja) 車載用画像処理装置
JP2021508815A (ja) 妨害物体の検出に基づいて高精細度マップを補正するためのシステムおよび方法
CN104005325A (zh) 基于深度和灰度图像的路面裂缝检测装置和方法
CN101845788B (zh) 基于结构光视觉的水泥混凝土路面错台检测装置及方法
CN105699985A (zh) 一种单线激光雷达装置
CN103871071A (zh) 一种用于全景泊车系统的摄像头外参标定方法
CN103938531B (zh) 激光道路错台检测系统和方法
US20180164157A1 (en) Street light detection
WO2019111498A1 (ja) 車線ネットワークデータ生成装置、車線ネットワークデータ生成プログラム及び記憶媒体
CN103674963A (zh) 一种基于数字全景摄像的隧道检测装置及其检测方法
US10190909B2 (en) Path detection system based on solar blind ultraviolet light signals
CN205557277U (zh) 一种路面裂缝病害检测系统
CN112985311B (zh) 一种车载便携轻量化智能巡检方法与系统
CN107190621B (zh) 一种路面裂缝病害检测系统和方法
US20230127230A1 (en) Control loop for navigating a vehicle
CN107677365B (zh) 一种公路隧道照明亮度快速检测装置及方法
KR101734867B1 (ko) 객체 검출 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140521

Termination date: 20211223