CN105469124A - 一种交通标志分类方法 - Google Patents

一种交通标志分类方法 Download PDF

Info

Publication number
CN105469124A
CN105469124A CN201510811639.2A CN201510811639A CN105469124A CN 105469124 A CN105469124 A CN 105469124A CN 201510811639 A CN201510811639 A CN 201510811639A CN 105469124 A CN105469124 A CN 105469124A
Authority
CN
China
Prior art keywords
invariant
traffic sign
image
combined
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510811639.2A
Other languages
English (en)
Inventor
刘晨曦
叶德焰
陈从华
许宁
汤益明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Yaxon Networks Co Ltd
Original Assignee
Xiamen Yaxon Networks Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Yaxon Networks Co Ltd filed Critical Xiamen Yaxon Networks Co Ltd
Priority to CN201510811639.2A priority Critical patent/CN105469124A/zh
Publication of CN105469124A publication Critical patent/CN105469124A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种交通标志分类方法,包括以下步骤:S1.通过车载摄像头对道路上方及两旁感兴趣区域采集用于识别的原始识别图像,将该原始识别图像输入车载交通标志检测系统;S2.将原始识别图像的感兴趣区域分成若干重叠块,并计算每块图像正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量;S3.将原始识别图像计算得到的组合不变量与交通标志模板图像进行匹配,识别出原始识别图像的感兴趣区域含有交通标志的位置和类别;本发明利用不变矩理论一次性解决交通标志旋转、扭曲和运动模糊的情况,具有模糊不变特性,且抗噪能力强,还不需要对图像进行滤波、复原等预处理,稳定性强,分类准确,误检率低,抗干扰能力强。

Description

一种交通标志分类方法
技术领域
本发明涉及图像处理及计算机视觉技术领域,特别是一种交通标志分类方法。
背景技术
随着计算机视觉技术的不断发展,基于计算机视觉的驾驶辅助系统是解决交通安全和运输效率问题的重要措施之一。交通标志包含许多保障交通安全的重要信息,如驾驶前方道路状况的改变、速度限制、驾驶行为限制等信息,保证了驾驶安全,避免交通事故的发生。因此车载交通标志检测系统具有很广阔的市场前景。
车载交通标志检测系统能够将摄像头获取的图像进行处理,以对图像中的交通标志进行识别及分类,在基于单目视觉的道路交通标志识别系统中,常用的图像处理方法一般可分为两类:一是传统图像处理方法;二是机器学习方法。
在传统图像处理方法中,首先对图像进行锐化、模糊、色彩空间变换等预处理,再基于形状的交通标志识别方法进行匹配与识别。基于形状的交通标志识别方法又可以分为(1)基于边缘轮廓的方法;(2)基于模板匹配的方法。
(1)基于边缘轮廓的方法,利用边缘检测或轮廓区域检测的方法,配合特定的形态学方法检测出可能存在交通标志的图像区域,然后通过几何不变特征轮廓不变特征进一步侦测出交通标志。(2)基于模板匹配的方法,则一般采用整幅交通标志图形或一部分交通标志的图形作为模板,通过对感兴趣区域的颜色特征或者形状特征等进行提取,再用模板进行匹配侦测出交通标志。
无论是基于边缘轮廓的方法还是基于模板匹配的方法,远远没有解决交通标志识别过程中必然会存在的如交通标志的扭曲、运动的模糊等特殊情况,并且受噪声影响较大,导致识别效果并不理想。如专利申请号201210245774.1“一种基于分类模板匹配的交通标志检测方法”,由于复杂的光照变化会导致交通标志图像的颜色分布产生较大偏移,从RGB空间转换到HSV空间也无法消除这种偏移,导致遗漏大部分不良照度条件下的交通标志,而降低交通标志的识别准确率。
对于交通标志的旋转、扭曲等情况,通过不变矩方法进行分析可以有效处理。Hu不变矩具有旋转,缩放和平移不变性,Hu矩在图像识别领域都有着很好的应用,但Hu矩无法消除因运动模糊带来的影响。如专利申请号201410222122.5“一种面向无人驾驶车的交通标志识别方法”,轮廓的模糊化会影响Hu不变矩特征的稳定性,降低检测可靠性。
发明内容
本发明为解决上述问题,提供了一种交通标志分类方法,利用不变矩理论一次性解决交通标志旋转、扭曲和运动模糊的情况,具有模糊不变特性,且抗噪能力强,还不需要对图像进行滤波、复原等预处理,稳定性强,分类准确,误检率低,抗干扰能力强。
为实现上述目的,本发明采用的技术方案为:
一种交通标志分类方法,包括以下步骤:
S1.通过车载摄像头对道路上方及两旁感兴趣区域采集用于识别的原始识别图像,将该原始识别图像输入车载交通标志检测系统;
S2.将采集到的原始识别图像根据交通标志在图像中可能出现的位置划分出感兴趣区域,再将原始识别图像的感兴趣区域分成若干重叠块,并计算每个重叠块图像正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量;
S3.将原始识别图像计算得到的组合不变量与交通标志模板图像进行匹配,识别出原始识别图像的感兴趣区域含有交通标志的位置和类别;
所述在步骤S2和步骤S3之间包括步骤S21,所述步骤S21具体为:建立一个模板库,对每个交通标志模板图像计算包括正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量,并将所有交通标志模板图像及其组合不变量存入模板库中。
所述步骤S3具体包括以下步骤:
S31.设定欧几里得距离阈值;
S32.将原始识别图像计算得到的组合不变量与模板库中的交通标志模板图像的组合不变量比较,通过欧几里得距离判断两个组合不变量的相似性,选取与原始识别图像的组合不变量最接近的交通标志模板图像的组合不变量;
S33.判断:当计算两个组合不变量的欧几里得距离小于给定阈值时,判定该原始识别图像的感兴趣区域含有与交通标志模板图像上相同的交通标志。
所述组合不变量的计算公式如下:
S I ( p , q ) = exp ( - j q θ ) Σ m = 0 p Σ k = m p Γ - ( k + 2 ) c p , k d k , m I m , q
式中,SI(p,q)为组合不变量,p为Fourier-Mellin矩的阶数,q为矩的重复度,j为虚部,m,k为索引号,cp,k为下三角矩阵,dk,m为cp,k的逆矩阵;
θ=arctan(I1,1), Γ = I 0 , 0 ;
c p , k = ( - 1 ) p + k p + 1 π · p + k + 1 ( p - k ) ! k ! ( k + 1 ) ! ;
d k , m = ( 2 m + 2 ) π m + 1 · k ! ( k + 1 ) ! ( k - m ) ! ( k + m + 2 ) ! ;
Im,q是图像的Fourier-Mellin矩的模糊不变量;
所述Im,q的表达式如下:
I m , q = F m , q - 1 F 0 , 0 Σ x = 0 m - 1 I x , q Σ y = 0 m - x F y , 0 A ( m , q , x , y ) ,
式中, A ( m , q , x , y ) = Σ k = x + y m Σ n = k ( k - q ) / 2 ( k + q ) / 2 n + q ( k - q ) / 2 n c p , k d 2 n + q , x d k - 2 n - q , y ,
模糊不变量Im,q中,Fa,q为图像的正交Fourier-Mellin矩,根据Fourier-Mellin的快速算法求得。
本发明的有益效果是:本发明充分考虑了交通标志的旋转、扭曲、模糊问题对交通标志分类的影像,提出了一种抗干扰能力强的交通标志分类方法,相比于传统分类方法,本发明不需要对图像进行滤波、复原等预处理,具有抵抗旋转、扭曲和模糊的能力,而且稳定性强,分类准确,误检率低,抗干扰能力强。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明一种交通标志分类方法的流程简图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚、明白,以下结合附图及实施例对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
如图1所示,本发明揭示的一种交通标志分类方法,其包括以下步骤:
S1.通过车载摄像头对道路上方及两旁感兴趣区域采集用于识别的原始识别图像,将该原始识别图像输入车载交通标志检测系统;
S2.将采集到的原始识别图像根据交通标志在图像中可能出现的位置划分出感兴趣区域,再将原始识别图像的感兴趣区域分成若干重叠块,并计算每个重叠块图像正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量;
图像的感兴趣区域分成若干重叠块:即将感兴趣区域图像分成矩形的子块,每个子块与其相邻的子块有着相同面积的重叠区域;
S3.将原始识别图像计算得到的组合不变量与交通标志模板图像进行匹配,识别出原始识别图像的感兴趣区域含有交通标志的位置和类别;
所述在步骤S2和步骤S3之间包括步骤S21,所述步骤S21具体为:建立一个模板库,对每个交通标志模板图像计算包括正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量,并将所有交通标志模板图像及其组合不变量存入模板库中。
所述步骤S3具体包括以下步骤:
S31.设定欧几里得距离阈值;
S32.将原始识别图像计算得到的组合不变量与模板库中的交通标志模板图像的组合不变量比较,通过欧几里得距离判断两个组合不变量的相似性,选取与原始识别图像的组合不变量最接近的交通标志模板图像的组合不变量;
S33.判断:当计算两个组合不变量的欧几里得距离小于给定阈值时,判定该原始识别图像的感兴趣区域含有与交通标志模板图像上相同的交通标志。
所述组合不变量的计算公式如下:
S I ( p , q ) = exp ( - j q θ ) Σ m = 0 p Σ k = m p Γ - ( k + 2 ) c p , k d k , m I m , q
式中,SI(p,q)为组合不变量,p为Fourier-Mellin矩的阶数,q为矩的重复度,j为虚部,m,k为索引号,cp,k为下三角矩阵,dk,m为cp,k的逆矩阵;
θ=arctan(I1,1), Γ = I 0 , 0 ;
c p , k = ( - 1 ) p + k p + 1 π · p + k + 1 ( p - k ) ! k ! ( k + 1 ) ! ;
d k , m = ( 2 m + 2 ) π m + 1 · k ! ( k + 1 ) ! ( k - m ) ! ( k + m + 2 ) ! ;
θ表示图像极坐标系下的方位角,Г表示图像0阶0重复度的模糊不变量的开根号(中间变量),Im,q是图像的Fourier-Mellin矩的模糊不变量;
所述Im,q的表达式如下:
I m , q = F m , q - 1 F 0 , 0 Σ x = 0 m - 1 I x , q Σ y = 0 m - x F y , 0 A ( m , q , x , y ) ,
式中, A ( m , q , x , y ) = Σ k = x + y m Σ n = k ( k - q ) / 2 ( k + q ) / 2 n + q ( k - q ) / 2 n c p , k d 2 n + q , x d k - 2 n - q , y ,
模糊不变量Im,q中,Fm,q为图像的正交Fourier-Mellin矩,根据Fourier-Mellin的快速算法求得,m、n、x、y等符号,表示一个自然数,属于计数的索引值。
本发明充分考虑了交通标志的旋转、扭曲、模糊问题对交通标志分类的影像,相比于传统分类方法,本发明不需要对图像进行滤波、复原等预处理,具有抵抗旋转、扭曲和模糊的能力,而且稳定性强,分类准确,误检率低,抗干扰能力强。
例如,在本发明应用于一个由摄像头、控制器、以及传感器组成的交通标志识别系统中,车前挡风玻璃下的一个摄像头时刻采集前方图像,识别道路交通标志,通过声音或影像的方式提醒驾驶员当前道路信息,减少因不明道路状况引发的交通事故。
具体处理中,控制器中的交通标志分类单元用于接收车辆前方影像数据,并解析出包含的交通标志,将交通标志送入预警决策单元进行分析(包括图形处理、技术过程)和判断,提醒驾驶员道路信息情况和超速情况,采用本发明的一种交通标志分类方法,具有抵抗旋转、扭曲和模糊的能力,稳定性强,分类准确,误检率低,达到对驾驶员有效预警的目的。
上述说明示出并描述了本发明的优选实施例,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文发明构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。

Claims (4)

1.一种交通标志分类方法,其特征在于,包括以下步骤:
S1.通过车载摄像头对道路上方及两旁感兴趣区域采集用于识别的原始识别图像,将该原始识别图像输入车载交通标志检测系统;
S2.将采集到的原始识别图像根据交通标志在图像中可能出现的位置划分出感兴趣区域,再将原始识别图像的感兴趣区域分成若干重叠块,并计算每个重叠块图像正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量;
S3.将原始识别图像计算得到的组合不变量与交通标志模板图像进行匹配,识别出原始识别图像的感兴趣区域含有交通标志的位置和类别。
2.根据权利要求1所述的一种交通标志分类方法,其特征在于:所述在步骤S2和步骤S3之间包括步骤S21,所述步骤S21具体为:建立一个模板库,对每个交通标志模板图像计算包括正交Fourier-Mellin矩的旋转不变量、缩放不变量及模糊不变量的组合不变量,并将所有交通标志模板图像及其组合不变量存入模板库中。
3.根据权利要求2所述的一种交通标志分类方法,其特征在于:所述步骤S3具体包括以下步骤:
S31.设定欧几里得距离阈值;
S32.将原始识别图像计算得到的组合不变量与模板库中的交通标志模板图像的组合不变量比较,通过欧几里得距离判断两个组合不变量的相似性,选取与原始识别图像的组合不变量最接近的交通标志模板图像的组合不变量;
S33.判断:当计算两个组合不变量的欧几里得距离小于给定阈值时,判定该原始识别图像的感兴趣区域含有与交通标志模板图像上相同的交通标志。
4.根据权利要求1或2所述的一种交通标志分类方法,其特征在于:所述组合不变量的计算公式如下:
式中,SI(p,q)为组合不变量,p为Fourier-Mellin矩的阶数,q为矩的重复度,j为虚部,m,k为索引号,cp,k为下三角矩阵,dk,m为cp,k的逆矩阵;
θ=arctan(I1,1),
Im,q是图像的Fourier-Mellin矩的模糊不变量;
所述Im,q的表达式如下:
式中,
模糊不变量Im,q中,Fm,q为图像的正交Fourier-Mellin矩。
CN201510811639.2A 2015-11-20 2015-11-20 一种交通标志分类方法 Pending CN105469124A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510811639.2A CN105469124A (zh) 2015-11-20 2015-11-20 一种交通标志分类方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510811639.2A CN105469124A (zh) 2015-11-20 2015-11-20 一种交通标志分类方法

Publications (1)

Publication Number Publication Date
CN105469124A true CN105469124A (zh) 2016-04-06

Family

ID=55606795

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510811639.2A Pending CN105469124A (zh) 2015-11-20 2015-11-20 一种交通标志分类方法

Country Status (1)

Country Link
CN (1) CN105469124A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105930791A (zh) * 2016-04-19 2016-09-07 重庆邮电大学 基于ds证据理论的多摄像头融合的路面交通标志识别方法
CN108022429A (zh) * 2016-11-04 2018-05-11 浙江大华技术股份有限公司 一种车辆检测的方法及装置
CN108242163A (zh) * 2016-12-23 2018-07-03 卢卡斯汽车股份有限公司 机动车的驾驶员辅助系统
CN109214434A (zh) * 2018-08-20 2019-01-15 上海萃舟智能科技有限公司 一种交通标志检测方法及装置
CN109558768A (zh) * 2017-09-25 2019-04-02 比亚迪股份有限公司 汽车及道路交通标志的检测方法、装置
CN111723625A (zh) * 2019-03-22 2020-09-29 上海海拉电子有限公司 交通灯图像识别处理方法、装置、辅助通行系统及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103971128A (zh) * 2014-05-23 2014-08-06 北京理工大学 一种面向无人驾驶车的交通标志识别方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103971128A (zh) * 2014-05-23 2014-08-06 北京理工大学 一种面向无人驾驶车的交通标志识别方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
BEIJING CHEN 等: "Combined Invariants to Similarity Transformation and to Blur Using Orthogonal Zernike Moments", 《IEEE TRANSACTIONS ON IMAGE PROCESSING》 *
QIAN LIU 等: "Object recognition by combined invariants of orthogonal Fourier-Mellin moments", 《INTERNATIONAL CONFERENCE ON INFORMATION, COMMUNICATIONS & SIGNAL PROCESSING》 *
刘家锋 等: "《模式识别》", 31 August 2014 *
戴修斌 等: "正交Fourier-Mellin矩模糊不变量的构造及应用", 《应用科学学报》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105930791A (zh) * 2016-04-19 2016-09-07 重庆邮电大学 基于ds证据理论的多摄像头融合的路面交通标志识别方法
CN108022429A (zh) * 2016-11-04 2018-05-11 浙江大华技术股份有限公司 一种车辆检测的方法及装置
CN108022429B (zh) * 2016-11-04 2021-08-27 浙江大华技术股份有限公司 一种车辆检测的方法及装置
CN108242163A (zh) * 2016-12-23 2018-07-03 卢卡斯汽车股份有限公司 机动车的驾驶员辅助系统
CN108242163B (zh) * 2016-12-23 2022-04-15 采埃孚主动安全股份有限公司 驾驶员辅助系统、机动车、输出交通信息的方法和介质
CN109558768A (zh) * 2017-09-25 2019-04-02 比亚迪股份有限公司 汽车及道路交通标志的检测方法、装置
CN109214434A (zh) * 2018-08-20 2019-01-15 上海萃舟智能科技有限公司 一种交通标志检测方法及装置
CN111723625A (zh) * 2019-03-22 2020-09-29 上海海拉电子有限公司 交通灯图像识别处理方法、装置、辅助通行系统及存储介质
CN111723625B (zh) * 2019-03-22 2023-08-08 上海海拉电子有限公司 交通灯图像识别处理方法、装置、辅助通行系统及存储介质

Similar Documents

Publication Publication Date Title
CN105469124A (zh) 一种交通标志分类方法
CN104951784B (zh) 一种车辆无牌及车牌遮挡实时检测方法
Greenhalgh et al. Recognizing text-based traffic signs
CN104008645B (zh) 一种适用于城市道路车道线预测及预警方法
Huang et al. Vehicle detection and inter-vehicle distance estimation using single-lens video camera on urban/suburb roads
CN202084185U (zh) 一种交通标志自动识别装置
CN105404857A (zh) 一种基于红外的夜间智能车前方行人检测方法
CN103903018A (zh) 一种复杂场景中对车牌进行定位的方法和系统
CN103530600A (zh) 复杂光照下的车牌识别方法及系统
CN104881661B (zh) 基于结构相似度的车辆检测方法
CN102411710A (zh) 一种基于车脸特征的车辆类型识别方法
CN112329623A (zh) 雾天能见度检测与能见度安全等级划分预警方法
Kim et al. Effective traffic lights recognition method for real time driving assistance systemin the daytime
CN105426863A (zh) 检测车道线的方法和装置
Yadav et al. Indian traffic signboard recognition and driver alert system using machine learning
Satzoda et al. Overtaking & receding vehicle detection for driver assistance and naturalistic driving studies
Bui-Minh et al. Two algorithms for detection of mutually occluding traffic signs
Chen et al. A novel lane departure warning system for improving road safety
Boumediene et al. Vehicle detection algorithm based on horizontal/vertical edges
CN112071079B (zh) 一种基于5g传输的机器视觉车辆远光灯检测预警系统
Tian et al. Robust traffic sign detection in complex road environments
Fleyeh et al. Traffic sign classification using invariant features and support vector machines
Chen et al. A forward collision avoidance system adopting multi-feature vehicle detection
Mohammad et al. Arabic license plate recognition system
CN113743226A (zh) 一种日间前车灯语识别及预警方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160406

WD01 Invention patent application deemed withdrawn after publication