CN106250835A - 基于特征识别的输电线路上的鸟巢识别方法 - Google Patents

基于特征识别的输电线路上的鸟巢识别方法 Download PDF

Info

Publication number
CN106250835A
CN106250835A CN201610592580.7A CN201610592580A CN106250835A CN 106250835 A CN106250835 A CN 106250835A CN 201610592580 A CN201610592580 A CN 201610592580A CN 106250835 A CN106250835 A CN 106250835A
Authority
CN
China
Prior art keywords
gray level
level image
pixel
image
bird
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610592580.7A
Other languages
English (en)
Inventor
戴礼豪
王庆华
林朝辉
王力群
许凌西
吴飞龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fuzhou Zpower Technology Development Co Ltd
State Grid Corp of China SGCC
State Grid Fujian Electric Power Co Ltd
Fuzhou Power Supply Co of State Grid Fujian Electric Power Co Ltd
Original Assignee
Fuzhou Zpower Technology Development Co Ltd
State Grid Corp of China SGCC
State Grid Fujian Electric Power Co Ltd
Fuzhou Power Supply Co of State Grid Fujian Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuzhou Zpower Technology Development Co Ltd, State Grid Corp of China SGCC, State Grid Fujian Electric Power Co Ltd, Fuzhou Power Supply Co of State Grid Fujian Electric Power Co Ltd filed Critical Fuzhou Zpower Technology Development Co Ltd
Priority to CN201610592580.7A priority Critical patent/CN106250835A/zh
Publication of CN106250835A publication Critical patent/CN106250835A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/13Satellite images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/28Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462Salient features, e.g. scale invariant feature transforms [SIFT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Astronomy & Astrophysics (AREA)
  • Remote Sensing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于特征识别的输电线路上的鸟巢识别方法,本发明通过引入具有人工智能意义的计算机视觉分析技术,使得现有的巡检系统将具备人眼的识别和人脑的分析能力,通过视觉分析,识别分析输电线路杆塔上的鸟巢等潜在威胁事件,并达到实时预警,降低事故发生率。

Description

基于特征识别的输电线路上的鸟巢识别方法
技术领域
本发明涉及一种输电线路上的鸟巢识别方法,特别是一种基于特征识别的输电线路上的鸟巢识别方法。
背景技术
输电线路在电力系统中起着非常重要的作用,直接关系到千家万户的用电问题,大规模断电将给国民经济带来不可估量的损失。因此,输电线路的安全性是电力部门高度关注的问题之一。鸟类的自然活动经常会干扰到输电线路的正常工作。它对输电线路的影响主要表现在:鸟巢常筑巢在输电线路杆塔上,其窝巢材料的掉落很容易引起杆塔周围线路的短路;另外鸟类在活动时,食物或粪便经常积攒在输电线路的瓷瓶上,会污染瓷瓶,从而降低瓷瓶串外绝缘强度,使输电线路短路,造成电力系统故障;还有,鸟类的幼崽或未孵化的卵是蛇等捕食类动物的食物,会招引更多动物攀爬输电线路杆塔,造成输电线路大面积短路。因此,为了保证电网的安全可靠运行,必须对鸟类在输电线路杆塔上的筑巢行为进行监测、预警和防护。
目前常用的方法是人工实地勘察,发现鸟巢,工作人员进行排险。但是,人工观察效率低、观察区域受到局限。传统的人工巡检方法不仅工作量大而且条件艰苦,特别是对多山区和跨越大江大河的输电线路的巡检,以及在冰灾、水灾、地震、滑坡、夜晚期间巡线检查,所花时间长、人力成本高、困难大、风险高。
近几年,采用无人直升机低空遥感方式实现地表观察、地质勘探、线路巡检的技术逐渐成熟,特别是无人机巡检以其高效、准确和安全等特点逐渐成为高压输电线路巡检的重要发展方向,通过对航拍巡检采集到的大量航拍图像进行处理和分析可以发现输电线路故障和缺陷,并对特殊地质环境中电力设施灾害监测与预警。但是,航拍巡检过程中获取的图像或者视频资料,数量非常大,如果采用事后人工筛查、人工分析和判断的方式,直接处理巨大的视频和图片信息,无疑是非常艰苦的工作,并且很容易遗漏关键信息;如果采用人工在线监视、实时判断和发现输变电线路的异常,是更加艰苦的工作、更容易遗漏和误报关键信息。
发明内容
本发明的目的在于克服现有技术的不足之处,而提供一种具备人眼的识别和人脑的分析能力,通过视觉分析,识别分析输电线路杆塔上的鸟巢威胁事件的基于特征识别的输电线路上的鸟巢识别方法。
一种基于特征识别的输电线路上的鸟巢识别方法,采用如下步骤实现:
(1)通过无人机从输电线路上拍摄大量RGB彩色图像,并将RGB彩色图像转换为灰度图像,转换公式表示如下:
Y=0.3R+0.59G+0.11B (1);
公式(1)中:Y表示灰度图像的像素点的灰度值;R、G、B分别表示RGB图像的像素点的红色分量、绿色分量、蓝色分量;
(2)灰度图像的LSD直线检测:首先将灰度图像缩小为原来的80%,并分别计算灰度图像的每个像素点的梯度值和梯度幅值,计算公式表示如下:
g x ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 g y ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 - - - ( 2 ) ;
G ( x , y ) = g x 2 ( x + y ) + g y 2 ( x , y ) - - - ( 3 ) ;
公式(2)、(3)中:gx(x,y)和gy(x,y)分别表示像素点在X方向和Y方向上的梯度值;G(x,y)表示像素点的梯度幅值;i(x,y)是坐标中心像素点[i,j]的灰度值;
然后将梯度幅值最大的像素点作为种子点,对灰度图像的每个像素点由小到大进行排序,由此得到排序列表;然后以排序列表中一个未使用的像素点作为种子点进行递归以进行区域增长,并对区域增长结果进行矩形估计,由此检测出灰度图像中局部的直的轮廓;
(3)灰度图像的形态学膨胀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为0,则对应的像素点为0,否则对应的像素点为1,由此得到膨胀后的灰度图像;
(4)灰度图像的Harris角点检测:首先计算灰度图像的每个像素点在X方向和 Y方向上的梯度值的乘积,并用高斯函数对乘积进行高斯加权形成矩阵元素;然后计算灰度图像的每个像素点的Harris响应值,并对小于阈值的Harris响应值进行忽略;然后在邻域内对Harris响应值进行最大值抑制,抑制得到的局部最大值即为灰度图像的Harris角点,由此检测出灰度图像的Harris角点;
(5)灰度图像的形态学腐蚀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为1,则对应的像素点为1,否则对应的像素点为0,由此得到腐蚀后的灰度图像;
(6)杆塔区域的识别:将膨胀后的灰度图像和腐蚀后的灰度图像进行与运算,由此得到新的灰度图像;然后从新的灰度图像中识别出杆塔区域;
(7)鸟巢位置的识别:首先对杆塔区域中疑似鸟巢的关键区域进行粗提取,并对粗提取后的关键区域进行HOG特征提取;然后通过SVM分类器对HOG特征提取后的关键区域进行精确提取,由此识别出鸟巢位置。
综上所述的,本发明相比现有技术如下优点:
本发明通过引入具有人工智能意义的计算机视觉分析技术,使得现有的巡检系统将具备人眼的识别和人脑的分析能力,通过视觉分析,识别分析输电线路杆塔上的鸟巢等潜在威胁事件,并达到实时预警,降低事故发生率。
具体实施方式
下面结合实施例对本发明进行更详细的描述。
实施例1
一种基于特征识别的输电线路上的鸟巢识别方法,采用如下步骤实现:
(1)对RGB彩色图像进行灰度化处理:通过无人机从输电线路上拍摄大量RGB彩色图像,并将RGB彩色图像转换为灰度图像,转换公式表示如下:
Y=0.3R+0.59G+0.11B (1);
公式(1)中:Y表示灰度图像的像素点的灰度值;R、G、B分别表示RGB图像的像素点的红色分量、绿色分量、蓝色分量;
(2)灰度图像的LSD直线检测:首先将灰度图像缩小为原来的80%,并分别计算灰度图像的每个像素点的梯度值和梯度幅值,计算公式表示如下:
g x ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 g y ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 - - - ( 2 ) ;
G ( x , y ) = g x 2 ( x + y ) + g y 2 ( x , y ) - - - ( 3 ) ;
公式(2)-(3)中:gx(x,y)和gy(x,y)分别表示像素点在X方向和Y方向上的梯度值;G(x,y)表示像素点的梯度幅值;i(x,y)是坐标中心像素点[i,j]的灰度值;
然后将梯度幅值最大的像素点作为种子点,对灰度图像的每个像素点由小到大进行排序,由此得到排序列表;然后以排序列表中一个未使用的像素点作为种子点进行递归以进行区域增长,并对区域增长结果进行矩形估计,由此检测出灰度图像中局部的直的轮廓;
(3)灰度图像的形态学膨胀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为0,则对应的像素点为0,否则对应的像素点为1,由此得到膨胀后的灰度图像;
(4)灰度图像的Harris角点检测:首先计算灰度图像的每个像素点在X方向和Y方向上的梯度值的乘积,并用高斯函数对乘积进行高斯加权形成矩阵元素;然后计算灰度图像的每个像素点的Harris响应值,并对小于阈值的Harris响应值进行忽略;然后在邻域内对Harris响应值进行最大值抑制,抑制得到的局部最大值即为灰度图像的Harris角点,由此检测出灰度图像的Harris角点;
(5)灰度图像的形态学腐蚀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为1,则对应的像素点为1,否则对应的像素点为0,由此得到腐蚀后的灰度图像;
(6)杆塔区域的识别:将膨胀后的灰度图像和腐蚀后的灰度图像进行与运算,由此得到新的灰度图像;然后从新的灰度图像中识别出杆塔区域;
(7)鸟巢位置的识别:首先对杆塔区域中疑似鸟巢的关键区域进行粗提取,并对粗提取后的关键区域进行HOG特征提取;然后通过SVM分类器对HOG特征提取后的关键区域进行精确提取,由此识别出鸟巢位置。 本实施例未述部分与现有技术相同。

Claims (1)

1.一种基于特征识别的输电线路上的鸟巢识别方法,其特征在于,采用如下步骤实现:
(1)对RGB彩色图像进行灰度化处理:通过无人机从输电线路上拍摄大量RGB彩色图像,并将RGB彩色图像转换为灰度图像,转换公式表示如下:
Y=0.3R+0.59G+0.11B (1);
公式(1)中:Y表示灰度图像的像素点的灰度值;R、G、B分别表示RGB图像的像素点的红色分量、绿色分量、蓝色分量;
(2)灰度图像的LSD直线检测:首先将灰度图像缩小为原来的80%,并分别计算灰度图像的每个像素点的梯度值和梯度幅值,计算公式表示如下:
g x ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 g y ( x , y ) = i ( x + 1 , y ) + i ( x + 1 , y + 1 ) - i ( x , y ) - i ( x , y + 1 ) 2 - - - ( 2 ) ;
G ( x , y ) = g x 2 ( x + y ) + g y 2 ( x , y ) - - - ( 3 ) ;
公式(2)、(3)中:gx(x,y)和gy(x,y)分别表示像素点在X方向和Y方向上的梯度值;G(x,y)表示像素点的梯度幅值;i(x,y)是坐标中心像素点[i,j]的灰度值;
然后将梯度幅值最大的像素点作为种子点,对灰度图像的每个像素点由小到大进行排序,由此得到排序列表;然后以排序列表中一个未使用的像素点作为种子点进行递归以进行区域增长,并对区域增长结果进行矩形估计,由此检测出灰度图像中局部的直的轮廓;
(3)灰度图像的形态学膨胀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为0,则对应的像素点为0,否则对应的像素点为1,由此得到膨胀后的灰度图像;
(4)灰度图像的Harris角点检测:首先计算灰度图像的每个像素点在X方向和Y方向上的梯度值的乘积,并用高斯函数对乘积进行高斯加权形成矩阵元素;然后计算灰度图像的每个像素点的Harris响应值,并对小于阈值的Harris响应值进行忽略;然后在邻域内对Harris响应值进行最大值抑制,抑制得到的局部最大值即为灰度图像的Harris角点,由此检测出灰度图像的Harris角点;
(5)灰度图像的形态学腐蚀运算:首先用3×3的结构元素扫描灰度图像的每个像素点,并用结构元素与其覆盖的二值图像进行与运算;如果运算结果为1,则对应的像素点为1,否则对应的像素点为0,由此得到腐蚀后的灰度图像;
(6)杆塔区域的识别:将膨胀后的灰度图像和腐蚀后的灰度图像进行与运算,由此得到新的灰度图像;然后从新的灰度图像中识别出杆塔区域;
(7)鸟巢位置的识别:首先对杆塔区域中疑似鸟巢的关键区域进行粗提取,并对粗提取后的关键区域进行HOG特征提取;然后通过SVM分类器对HOG特征提取后的关键区域进行精确提取,由此识别出鸟巢位置。
CN201610592580.7A 2016-07-26 2016-07-26 基于特征识别的输电线路上的鸟巢识别方法 Pending CN106250835A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610592580.7A CN106250835A (zh) 2016-07-26 2016-07-26 基于特征识别的输电线路上的鸟巢识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610592580.7A CN106250835A (zh) 2016-07-26 2016-07-26 基于特征识别的输电线路上的鸟巢识别方法

Publications (1)

Publication Number Publication Date
CN106250835A true CN106250835A (zh) 2016-12-21

Family

ID=57604088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610592580.7A Pending CN106250835A (zh) 2016-07-26 2016-07-26 基于特征识别的输电线路上的鸟巢识别方法

Country Status (1)

Country Link
CN (1) CN106250835A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108470140A (zh) * 2018-01-27 2018-08-31 天津大学 一种基于统计特征与机器学习的输电线路鸟巢识别方法
CN108537154A (zh) * 2018-03-28 2018-09-14 天津大学 基于hog特征和机器学习的输电线路鸟巢识别方法
CN109492450A (zh) * 2018-10-18 2019-03-19 成都中科信息技术有限公司 一种基于版面分析的条形码定位方法
CN109902647A (zh) * 2019-03-08 2019-06-18 成都国铁电气设备有限公司 一种便携式在线鸟巢智能识别方法及系统
CN110796050A (zh) * 2019-10-18 2020-02-14 国家电网有限公司 一种无人机巡检过程中目标物体的识别方法及相关装置
CN114219051A (zh) * 2022-02-23 2022-03-22 成都明途科技有限公司 图像分类方法、分类模型的训练方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831393A (zh) * 2012-07-19 2012-12-19 安徽工业大学 电力杆塔轮廓的快速图像识别方法
CN103047938A (zh) * 2013-01-05 2013-04-17 山西省电力公司大同供电分公司 输电线路覆冰厚度检测方法及检测装置
WO2014036813A1 (zh) * 2012-09-10 2014-03-13 华为技术有限公司 图像特征的提取方法及装置
CN104867134A (zh) * 2015-05-04 2015-08-26 国家电网公司 一种用于无人机巡检输电线路杆塔的识别方法
CN105095904A (zh) * 2015-07-28 2015-11-25 中国科学院自动化研究所(洛阳)机器人与智能装备创新研究院 一种输电线路杆塔鸟巢检测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831393A (zh) * 2012-07-19 2012-12-19 安徽工业大学 电力杆塔轮廓的快速图像识别方法
WO2014036813A1 (zh) * 2012-09-10 2014-03-13 华为技术有限公司 图像特征的提取方法及装置
CN103047938A (zh) * 2013-01-05 2013-04-17 山西省电力公司大同供电分公司 输电线路覆冰厚度检测方法及检测装置
CN104867134A (zh) * 2015-05-04 2015-08-26 国家电网公司 一种用于无人机巡检输电线路杆塔的识别方法
CN105095904A (zh) * 2015-07-28 2015-11-25 中国科学院自动化研究所(洛阳)机器人与智能装备创新研究院 一种输电线路杆塔鸟巢检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
段旺旺等: "基于关键区域HOG特征的铁路接触网鸟巢检测", 《中国铁路》 *
金立军等: "基于航拍图像的输电线路异物识别", 《同济大学学报(自然科学版)》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108470140A (zh) * 2018-01-27 2018-08-31 天津大学 一种基于统计特征与机器学习的输电线路鸟巢识别方法
CN108470140B (zh) * 2018-01-27 2021-12-07 天津大学 一种基于统计特征与机器学习的输电线路鸟巢识别方法
CN108537154A (zh) * 2018-03-28 2018-09-14 天津大学 基于hog特征和机器学习的输电线路鸟巢识别方法
CN108537154B (zh) * 2018-03-28 2021-09-28 天津大学 基于hog特征和机器学习的输电线路鸟巢识别方法
CN109492450A (zh) * 2018-10-18 2019-03-19 成都中科信息技术有限公司 一种基于版面分析的条形码定位方法
CN109902647A (zh) * 2019-03-08 2019-06-18 成都国铁电气设备有限公司 一种便携式在线鸟巢智能识别方法及系统
CN109902647B (zh) * 2019-03-08 2023-04-18 成都国铁电气设备有限公司 一种便携式在线鸟巢智能识别方法及系统
CN110796050A (zh) * 2019-10-18 2020-02-14 国家电网有限公司 一种无人机巡检过程中目标物体的识别方法及相关装置
CN114219051A (zh) * 2022-02-23 2022-03-22 成都明途科技有限公司 图像分类方法、分类模型的训练方法、装置及电子设备
CN114219051B (zh) * 2022-02-23 2022-05-06 成都明途科技有限公司 图像分类方法、分类模型的训练方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN106250835A (zh) 基于特征识别的输电线路上的鸟巢识别方法
CN109376605B (zh) 一种电力巡检图像防鸟刺故障检测方法
CN107392247B (zh) 一种电力线下方地物安全距离实时检测方法
CN106595551B (zh) 基于深度学习的输电线路覆冰图像中覆冰厚度检测方法
CN102590823B (zh) 一种机载lidar数据电力线快速提取及重构方法
WO2018028103A1 (zh) 一种基于人眼视觉特性的电力线路无人机巡检方法
CN110502965A (zh) 一种基于计算机视觉人体姿态估计的施工安全帽佩戴监测方法
CN110929592A (zh) 一种用于海上养殖区外边界的提取方法及系统
CN110070530A (zh) 一种基于深度神经网络的输电线路覆冰检测方法
CN108957240A (zh) 电网故障远程定位方法及系统
CN102446390A (zh) 一种对输电线路附近监控区域进行安全检测、预警的方法和系统
CN104715255B (zh) 一种基于sar图像的滑坡信息提取方法
CN106326808A (zh) 基于无人机图像的检测输电线路杆塔鸟窝的方法
CN111342391A (zh) 一种输电线路绝缘子和线路故障巡视方法及巡视体系
CN106250920A (zh) 基于多特征信息融合的绝缘子状态检测与诊断方法
CN103454556A (zh) 一种具有3d扫描功能的巡检装置及其检测方法
CN106156758B (zh) 一种sar海岸图像中海岸线提取方法
CN113469278B (zh) 一种基于深度卷积神经网络的强天气目标识别方法
CN112183472A (zh) 一种基于改进RetinaNet的试验现场人员是否穿着工作服检测方法
CN108898098A (zh) 基于监控平台的早期视频烟雾检测方法
CN113947555A (zh) 基于深度神经网络的红外与可见光融合的视觉系统及方法
CN109697410B (zh) 一种架空输电线路覆盖地区的遥感地物识别方法
CN106372566A (zh) 一种基于数字标牌紧急疏散系统及方法
CN114792405A (zh) 一种架空线路防异物入侵监测方法
CN112270234B (zh) 一种基于航拍图像的输电线路绝缘子目标识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161221

RJ01 Rejection of invention patent application after publication