CN105069788A - 一种古建墙壁题记受污毛笔文字图像聚类分割方法 - Google Patents
一种古建墙壁题记受污毛笔文字图像聚类分割方法 Download PDFInfo
- Publication number
- CN105069788A CN105069788A CN201510475968.4A CN201510475968A CN105069788A CN 105069788 A CN105069788 A CN 105069788A CN 201510475968 A CN201510475968 A CN 201510475968A CN 105069788 A CN105069788 A CN 105069788A
- Authority
- CN
- China
- Prior art keywords
- image
- pixel
- cluster
- writing brush
- segmentation method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种古建墙壁题记受污毛笔文字图像聚类分割方法,属于古建数字化修复领域。该方法首先构建偏微分模型对采集图像进行去噪处理,并根据题记图像的光照特征,进行分块增强;其次,利用最大类间方差法分割增强后图像,并作形态学处理;然后对处理后图像进行区域定位,得到文字区域的最小外接矩形,并在增强后图像中标出对应的文字区域;最后,对文字区域进行首次FCM聚类确定聚类中心矩阵,并利用平均灰度相似度和距离惩罚函数约束隶属度,进行NKFCM聚类和去模糊处理后,得到最终聚类分割图像。该方法既能有效的排除噪声对聚类的影响,又能保持分割的完整性,提取出质量较高的题记文字。本发明主要用于古建墙壁题记受污毛笔文字的聚类分割。
Description
技术领域
本发明属于古建数字化修复领域,具体为一种既可滤除污染带来的噪声,又能保证文字主体完整分割的古建墙壁题记受污毛笔文字图像聚类分割方法。
背景技术
古建墙壁题记毛笔文字承载着大量历史信息,有很大的书法和历史研究价值。然而由于自然风化和人为破坏,加之有些墨汁为动植物遗骸分解加工而成,易于霉变,题记文字受到了不同程度的污染,有些甚至难以辨识,传统的实体去污修复在去除污染的同时容易造成文字主体的损伤,带来不可逆的副作用。近年来,通过数字处理技术对采集的受污文字图像进行聚类分割,从而排除污染对文字书法研究的干扰,成为古建文字研究的重点,该处理技术可逆且具有非接触性,在提取文字、去除污染的同时,充分保证了题记实体的安全。为书法研究和文字拓本的数字化存储提供了有力的科学支持,也为题记的实体去污修复过程提供充足的科学指引和实验环境。
目前的文字聚类分割方法主要有基于阈值的算法、基于模型的算法和基于划分的算法等。基于阈值的聚类算法对阈值选取的依赖较强,而阈值的选取受噪声影响较大,算法鲁棒性较差;基于模型的聚类算法,可充分利用文字的特征信息,但训练模型所需样本数据量较大,且对先验样本要求较高,不适合小样本古建文字聚类;基于划分的聚类算法,如k-means算法,能较好的排除差异性噪声对文字分割的影响,但对于灰度相近的块状污染噪声滤除效果不佳,分割的文字主体不完整。上述方法对于文字区域污染较轻的题记图像聚类效果较好,但当污染严重影响文字主体时,聚类的文字或存在缺损,或含有较多噪点。
发明内容
本发明的目的在于提出一种结合区域定位和邻域核函数模糊C均值(neighborhoodkernelfuzzyc-means,NKFCM)算法的聚类分割方法,以滤除文字周围和文字区域存在的噪声,保证文字主体分割的完整性。
本发明的核心思想是通过去噪、增强预处理和文字区域定位操作滤除文字周围的噪声;利用邻域信息约束隶属度函数,滤除文字附近和文字内存在的噪声,保证文字主体分割的完整性;通过构造核函数增大类间差异,更好地区分噪声和文字主体,得到完整的文字区域。
本发明一种古建墙壁题记受污毛笔文字图像聚类分割方法包括以下具体步骤:
S1:利用数码相机采集题记毛笔文字图像,相机镜面与墙壁垂直放置,采集图像的分辨率至少200dpi、尺寸1080×720像素以上;
S2:构造偏微分扩散模型:ut=div(g(|G*Du|)*Du),对步骤S1获得的图像进行去噪处理,其中,g(x)=1/(1+(x/δ)^2)为边缘扩散抑制函数,δ为边缘参数,G为高斯函数,Du为原始图像梯度,div为散度算子;
S3:将步骤S2处理后图像进行分块处理,并对每一部分图像块进行灰度拉伸增强处理,将图像灰度值范围映射到[0,255],然后将图像块拼接为完整图像;
S4:利用最大类间方差法对步骤S3中图像进行阈值分割,并通过形态学算法滤除小面积噪声,连通文字,形成连通域;
S5:遍历步骤S4得到的连通域,确定各连通域的上下左右端点,并将端点所围矩形以白色像素进行填充标记,得到每个文字区域的最小外接矩形;
S6:在步骤S3处理后的图像中找到步骤S5定位的文字区域,利用FCM算法对文字区域进行首次聚类,得到聚类中心矩阵和聚类数;
S7:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口,计算窗口内像素与中心像素的平均灰度相似度以及像素点八邻域到聚类中心点的距离惩罚函数;
S8:将步骤S6得到的聚类中心和聚类数作为初始参数,通过步骤S7得到的平均灰度相似度和距离惩罚函数修正隶属度函数,并利用核函数求取像素点到聚类中心的距离,进行NKFCM聚类和去模糊操作后,得到最终聚类分割图像;
S9:将最终聚类分割结果保存或输出。
进一步地,本发明所述步骤S7中所述的平均灰度相似度和距离惩罚函数的计算按以下步骤进行:
S71:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口WD(k),w取2到10的整数,然后计算窗口内像素与中心像素的灰度相似度:其中,k表示中心像素点标志,j为窗口内像素点标志,i为类别标志,I为像素灰度值,通过求窗口内所有点的灰度相似度的平均值得到该点的平均灰度相似度uk;
S72:给定类内距离判定阈值θ,取值范围为[0,2552],求取每个像素八邻域点到聚类中心的欧式距离,记为其中p为邻域标志,根据下式计算距离惩罚函数γik,num为统计满足条件的邻域点数量的函数,N为满足条件的邻域点数量;
所述步骤S8中所述的目标函数的公式为:其中K(xk,vi)为核函数,μ′ik为修正后的隶属度函数:K(xk,vi)=exp(-||xk-vi||2/2σ2)。
本发明与现有技术相比具有以下优点:
1、本发明构造偏微分模型对图像进行去噪处理,滤除噪声并通过抑制函数减弱文字边缘的平滑;同时通过分块增强处理,解决了由于背景灰度不均造成的暗区域细节不明显的问题,利于后续聚类。
2、本发明通过区域定位处理,将聚类过程限定在文字区域进行,一方面能有效排除文字周围噪声的干扰,另一方面可以有效的提升聚类速度。
3、本发明从噪点归属和保证文字主体完整的角度提出了NKFCM聚类算法,通过构造灰度相似度和距离惩罚函数对FCM聚类的隶属度进行修正,利用邻域信息滤除文字附近噪点,并解决文字中噪点的归属问题,保持分割完整性;并通过高斯核函数增大类间差异,更好地分割污染和文字主体,得到完整的文字区域。
附图说明
图1为发明流程图;
图2为采集的题记毛笔文字图像;
图3为偏微分方程去噪图像;
图4为阈值分割后图像;
图5为形态学处理图像;
图6为文字区域定位图像;
图7最终聚类分割图像;
图8为文字轻度污染的聚类效果对比,图中(a)为题记文字图像,(b)为k-means聚类效果图,(c)为传统FCM聚类效果图,(d)为本发明方法聚类效果图;
图9为文字一般污染的聚类效果对比,图中(a)为题记文字图像,(b)为k-means聚类效果图,(c)为传统FCM聚类效果图,(d)为本发明方法聚类效果图;
图10为文字重度污染的聚类效果对比,图中(a)为题记文字图像,(b)为k-means聚类效果图,(c)为传统FCM聚类效果图,(d)为本发明方法聚类效果图。
具体实施方式
参照图1的流程图,以山西省晋祠博物院内八景题记文字为例,进行实验,具体实施步骤如下:
S1:利用数码相机采集题记毛笔文字图像,相机镜面与墙壁垂直放置,采集图像的尺寸为1074×720像素,图2为采集的一幅题记图像实例;
S2:构造偏微分扩散模型,对步骤S1获得的图像进行去噪处理,本发明构造的偏微分方程如式(1):
ut=div(g(|G*Du|)*Du)(1)
式中,g(x)=1/(1+(x/δ)^2)为边缘扩散抑制函数,δ为边缘参数,取值范围一般为[0,10],本例取δ=3,G为高斯函数,Du为原始图像梯度,div为散度算子,通过求解上述偏微分方模型,得到去噪图像,图3为去噪图像;
S3:将步骤S2处理后图像进行分块处理,并对每一部分图像块进行灰度拉伸增强处理,将图像灰度值范围映射到[0,255],然后将图像块拼接为完整图像;
S4:利用最大类间方差法对步骤S3中图像进行阈值分割,并通过形态学算法滤除小面积噪声,连通文字区域,形成连通域,图4为处理后图像;
S41:利用最大类间方差法对步骤S3中图像进行阈值分割,得到二值图像,阈值通过类间方差的最大化迭代自适应获得;
S42:利用形态学算法对步骤S41得到的二值图像进行处理,具体步骤为:首先,对二值图像中的连通域进行标记,灰度值为1的邻接像素组成标记区域,统计每一标记区域中像素点数目作为该区域面积,设定阈值T,将面积小于T的区域滤除,本例取T=10;然后通过形态学闭运算连通不连续文字区域:C=H·Q,H为二值图像,·表示形态学闭运算,Q为半径为r的圆形结构元素,r取1到10之间整数,本例取r=4;
S5:遍历步骤S4得到的连通域,确定各连通域的上下左右端点,并将端点所围矩形以白色像素进行填充标记,得到定位的文字区域,图5为文字定位图像;
S6:在步骤S3处理后的图像中找到步骤S5定位的文字区域,利用FCM算法对文字区域进行首次聚类,得到聚类中心矩阵和聚类数,聚类中心矩阵计算如式(2);
其中,Vi为第i类聚类中心矩阵,n为聚类空间样本数,m为加权指数,取值为大于1的整数,k表示中心像素点,μik为隶属度函数。
S7:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口,计算窗口内像素与中心像素的平均灰度相似度uk以及像素点八邻域到聚类中心点的距离惩罚函数γik;
S71:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口WD(k),w取2到10的整数,本例令w=5,然后根据式(3)计算窗口内像素与中心像素的灰度相似度uik;
其中,j为窗口内像素点标志,i为类别标志,I为像素灰度值,通过求窗口内所有点的灰度相似度的平均值得到该点的平均灰度相似度uk;
S72:给定类内距离判定阈值θ,取值范围为[0,2552],本例取θ=64,求取每个像素八邻域点到聚类中心的欧式距离,记为其中p为邻域标志,根据公式(4)计算距离惩罚函数γik,num为统计满足条件的邻域点数量的函数,N为满足条件的邻域点数量;
S8:将步骤S6得到的聚类中心和聚类数作为初始参数,通过步骤S7得到的平均灰度相似度和距离惩罚函数修正隶属度函数,并利用核函数求取像素点到聚类中心的距离,进行NKFCM聚类和去模糊操作后,得到最终聚类图像,图7为最终聚类图像;
S81:将步骤S6得到的聚类数c和聚类中心矩阵Vi作为模糊c均值的初始化参数;
S82:利用步骤S7得到的平均灰度相似度和距离惩罚函数修正隶属度函数: 其中s为算法迭代次数;
S83:利用核函数求取像素点到聚类中心的距离,本发明根据污染和文字区域的灰度分布特点选取高斯核作为聚类核函数:K(xk,vi)=exp(-||xk-vi||2/2σ2),其中xk为第i类中任一像素点灰度值,vi为第i个聚类中心的灰度值,σ为高斯核参数,范围为(0,∞),本例取σ=2;
S84:通过迭代求取式(5)目标函数的最小值,并利用最大隶属度函数法进行去模糊化后,得到最终聚类图像;
其中,J(U,v)为目标函数,U为隶属度矩阵,n为第i类像素点数。
S9:将步骤S8得到的最终聚类结果保存或输出。
为充分验证本发明方法的有效性和适用性,通过k-means算法、传统FCM算法和本发明方法对三幅题记毛笔文字图像进行对比性实验验证,其中组1图像如图8(a)所示,其文字污染较轻,文字主体和边缘信息保留较完好;组2图像如图9(a)所示,其笔墨产生霉变,文字周围的块状污染噪声较多;组3图像如图10(a)所示,其文字霉变较严重,主体不易辨识。由实验结果可以得出,FCM聚类对边缘模糊像素的聚类效果优于k-means聚类算法,其原因为题记文字受污染噪声的影响像素点存在不确定性;而从图9实验结果可以看出,对于污染噪声较多的文字图像,传统FCM不能很好的抑制噪声,分割出的文字不完整;由图10可知,本发明对污染和文字区域的区分度较好,能较好的保证分割后图像的完整性。
为从客观上对算法效果进行验证,本发明采用细小区域数Ec和最大连通域面积Ms对分割结果进行评价,Ec用来表征分割图像中噪点数量,Ms用来表征分割文字的完整性。具体结果见表1:
表1
由表1的指标对比可以看出,相比K-means算法和传统的FCM算法,本发明方法具有较小的细小区域数和较大的连通域面积,说明本发明方法聚类后噪点较少且文字主体较完整,综合来看,本发明方法既能较好排除污染影响,又能保证文字主体分割的完整性。
Claims (3)
1.一种古建墙壁题记受污毛笔文字图像聚类分割方法,其特征在于:
S1:利用数码相机采集题记毛笔文字图像,相机镜面与墙壁垂直放置,采集图像的分辨率至少200dpi、尺寸1080×720像素以上;
S2:构造偏微分扩散模型:ut=div(g(|G*Du|)*Du),对步骤S1获得的图像进行去噪处理,其中,g(x)=1/(1+(x/δ)^2)为边缘扩散抑制函数,δ为边缘参数,G为高斯函数,Du为原始图像梯度,div为散度算子;
S3:将步骤S2处理后图像进行分块处理,并对每一部分图像块进行灰度拉伸增强处理,将图像灰度值范围映射到[0,255],然后将图像块拼接为完整图像;
S4:利用最大类间方差法对步骤S3中图像进行阈值分割,并通过形态学算法滤除小面积噪声,连通文字,形成连通域;
S5:遍历步骤S4得到的连通域,确定各连通域的上下左右端点,并将端点所围矩形以白色像素进行填充标记,得到每个文字区域的最小外接矩形;
S6:在步骤S3处理后的图像中找到步骤S5定位的文字区域,利用FCM算法对文字区域进行首次聚类,得到聚类中心矩阵和聚类数;
S7:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口,计算窗口内像素与中心像素的平均灰度相似度以及像素点八邻域到聚类中心点的距离惩罚函数;
S8:将步骤S6得到的聚类中心和聚类数作为初始参数,通过步骤S7得到的平均灰度相似度和距离惩罚函数修正隶属度函数,并利用核函数求取像素点到聚类中心的距离,进行NKFCM聚类和去模糊操作后,得到最终聚类分割图像;
S9:将最终聚类分割结果保存或输出。
2.根据权利要求1所述的一种古建墙壁题记受污毛笔文字图像聚类分割方法,其特征在于:所述步骤S7中所述的平均灰度相似度和距离惩罚函数的计算按以下步骤进行:
S71:以文字区域每个像素点为中心构造尺寸为w×w像素的窗口WD(k),w取2到10的整数,然后计算窗口内像素与中心像素的灰度相似度:其中,k表示中心像素点标志,j为窗口内像素点标志,i为类别标志,I为像素灰度值,通过求窗口内所有点的灰度相似度的平均值得到该点的平均灰度相似度uk;
S72:给定类内距离判定阈值θ,取值范围为[0,2552],求取每个像素八邻域点到聚类中心的欧式距离,记为其中p为邻域标志,根据下式计算距离惩罚函数γik,num为统计满足条件的邻域点数量的函数,N为满足条件的邻域点数量;
3.根据权利要求1所述的一种古建墙壁题记受污毛笔文字图像聚类分割方法,其特征在于:所述步骤S8中所述的目标函数的公式为:其中K(xk,vi)为核函数,μ′ik为修正后的隶属度函数:K(xk,vi)=exp(-||xk-vi||2/2σ2)。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510475968.4A CN105069788B (zh) | 2015-08-05 | 2015-08-05 | 一种古建墙壁题记受污毛笔文字图像聚类分割方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510475968.4A CN105069788B (zh) | 2015-08-05 | 2015-08-05 | 一种古建墙壁题记受污毛笔文字图像聚类分割方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105069788A true CN105069788A (zh) | 2015-11-18 |
CN105069788B CN105069788B (zh) | 2017-11-21 |
Family
ID=54499145
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510475968.4A Expired - Fee Related CN105069788B (zh) | 2015-08-05 | 2015-08-05 | 一种古建墙壁题记受污毛笔文字图像聚类分割方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105069788B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106991667A (zh) * | 2017-03-08 | 2017-07-28 | 浙江大学 | 一种构建图像特征谱的对虾完整性判别方法 |
CN108154188A (zh) * | 2018-01-08 | 2018-06-12 | 天津大学 | 基于fcm的复杂背景下人工文本提取方法 |
CN108573258A (zh) * | 2018-04-24 | 2018-09-25 | 中国科学技术大学 | 一种快速的复杂背景图像中维语文字定位方法 |
CN111539409A (zh) * | 2020-04-09 | 2020-08-14 | 武汉大学 | 一种基于高光谱遥感技术的古墓题记文字识别方法 |
CN113284160A (zh) * | 2021-04-23 | 2021-08-20 | 北京天智航医疗科技股份有限公司 | 一种手术导航标记珠体识别的方法、装置和设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009009179A (ja) * | 2007-06-26 | 2009-01-15 | Univ Of Tokyo | 画像処理装置及び画像処理プログラム |
US20140079316A1 (en) * | 2012-09-17 | 2014-03-20 | Raytheon Bbn Technologies Corp. | Segmentation co-clustering |
CN104123417A (zh) * | 2014-07-22 | 2014-10-29 | 上海交通大学 | 一种基于聚类融合的图像分割的方法 |
CN104616308A (zh) * | 2015-02-12 | 2015-05-13 | 大连民族学院 | 一种基于核模糊聚类的多尺度水平集图像分割方法 |
CN104751469A (zh) * | 2015-04-02 | 2015-07-01 | 西安电子科技大学 | 基于核模糊c均值聚类的图像分割方法 |
-
2015
- 2015-08-05 CN CN201510475968.4A patent/CN105069788B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009009179A (ja) * | 2007-06-26 | 2009-01-15 | Univ Of Tokyo | 画像処理装置及び画像処理プログラム |
US20140079316A1 (en) * | 2012-09-17 | 2014-03-20 | Raytheon Bbn Technologies Corp. | Segmentation co-clustering |
CN104123417A (zh) * | 2014-07-22 | 2014-10-29 | 上海交通大学 | 一种基于聚类融合的图像分割的方法 |
CN104616308A (zh) * | 2015-02-12 | 2015-05-13 | 大连民族学院 | 一种基于核模糊聚类的多尺度水平集图像分割方法 |
CN104751469A (zh) * | 2015-04-02 | 2015-07-01 | 西安电子科技大学 | 基于核模糊c均值聚类的图像分割方法 |
Non-Patent Citations (1)
Title |
---|
李丛等: "基于非欧式距离的模糊核聚类算法在入侵检测的应用", 《计算机与数字工程》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106991667A (zh) * | 2017-03-08 | 2017-07-28 | 浙江大学 | 一种构建图像特征谱的对虾完整性判别方法 |
CN108154188A (zh) * | 2018-01-08 | 2018-06-12 | 天津大学 | 基于fcm的复杂背景下人工文本提取方法 |
CN108154188B (zh) * | 2018-01-08 | 2021-11-19 | 天津大学 | 基于fcm的复杂背景下人工文本提取方法 |
CN108573258A (zh) * | 2018-04-24 | 2018-09-25 | 中国科学技术大学 | 一种快速的复杂背景图像中维语文字定位方法 |
CN108573258B (zh) * | 2018-04-24 | 2020-06-26 | 中国科学技术大学 | 一种快速的复杂背景图像中维语文字定位方法 |
CN111539409A (zh) * | 2020-04-09 | 2020-08-14 | 武汉大学 | 一种基于高光谱遥感技术的古墓题记文字识别方法 |
CN111539409B (zh) * | 2020-04-09 | 2022-10-14 | 武汉大学 | 一种基于高光谱遥感技术的古墓题记文字识别方法 |
CN113284160A (zh) * | 2021-04-23 | 2021-08-20 | 北京天智航医疗科技股份有限公司 | 一种手术导航标记珠体识别的方法、装置和设备 |
CN113284160B (zh) * | 2021-04-23 | 2024-03-12 | 北京天智航医疗科技股份有限公司 | 一种手术导航标记珠体识别的方法、装置和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105069788B (zh) | 2017-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105069788A (zh) | 一种古建墙壁题记受污毛笔文字图像聚类分割方法 | |
CN107292311A (zh) | 一种基于神经网络的字符粘连验证码的识别方法 | |
CN106023220A (zh) | 一种基于深度学习的车辆外观部件图像分割方法 | |
CN101599124B (zh) | 一种从视频图像中分割字符的方法和装置 | |
CN101739548B (zh) | 人眼检测方法及系统 | |
CN110210413A (zh) | 一种基于深度学习的多学科试卷内容检测与识别系统及方法 | |
CN102054271B (zh) | 文本行检测方法和装置 | |
CN104392205A (zh) | 一种非正常车牌的识别方法和系统 | |
CN107122777A (zh) | 一种基于视频文件的车辆分析系统及分析方法 | |
Shaikh et al. | A novel approach for automatic number plate recognition | |
CN104504383A (zh) | 一种基于肤色和Adaboost算法的人脸检测方法 | |
CN104834890A (zh) | 一种对书法作品中文字神采信息的提取方法 | |
CN103425985B (zh) | 一种人脸抬头纹检测方法 | |
CN113673384A (zh) | Lm滤波器组引导纹理特征自主学习的甲骨文字检测方法 | |
CN105404885A (zh) | 一种二维字符图形验证码复杂背景噪音干扰去除方法 | |
Yang et al. | An efficient method for vehicle model identification via logo recognition | |
CN112686265A (zh) | 一种基于层级轮廓提取的象形文字分割方法 | |
Chakraborty | Image processing and image pattern recognition a programming tutorial | |
Adytia et al. | Indonesian license plate detection and identification using deep learning | |
CN104809733A (zh) | 一种古建墙壁受污题记文字图像边缘提取方法 | |
CN112200789B (zh) | 一种图像识别的方法及装置、电子设备和存储介质 | |
Farajian et al. | Algorithms for licenseplate detection: A survey | |
Tomar et al. | Ancient Indian scripts image pre-processing and dimensionality reduction for feature extraction and classification: a survey | |
CN108205678A (zh) | 一种含有亮斑干扰的铭牌文字识别处理方法 | |
CN112464852B (zh) | 一种车辆行驶证图片自适应矫正与识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20171121 Termination date: 20180805 |
|
CF01 | Termination of patent right due to non-payment of annual fee |