CN108734108B - 一种基于ssd网络的裂纹舌识别方法 - Google Patents
一种基于ssd网络的裂纹舌识别方法 Download PDFInfo
- Publication number
- CN108734108B CN108734108B CN201810371990.8A CN201810371990A CN108734108B CN 108734108 B CN108734108 B CN 108734108B CN 201810371990 A CN201810371990 A CN 201810371990A CN 108734108 B CN108734108 B CN 108734108B
- Authority
- CN
- China
- Prior art keywords
- tongue
- layer
- size
- convolutional
- crack
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/211—Selection of the most significant subset of features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
Abstract
一种基于SSD网络的裂纹舌识别方法,包括对采集到的舌象进行舌体分割的预处理操作、在训练过程中的数据增强操作、用于舌整体特征提取的深度卷积神经网络、用于对裂纹区域进行预测的候选框生成方法,完成对舌象中裂纹区域的确定,并通过置信度过滤判别其是否为裂纹舌。本发明无需手工定义特征,有效地提高了裂纹舌的识别正确率。
Description
技术领域
本发明涉及一种分析方法,具体涉及中医舌诊、计算机视觉、数字图像处理、模式识别、深度学习和深度卷积神经网络等技术在舌象识别领域的应用。
背景技术
舌诊是中医临床最直接、最基本的诊断方法之一,自古以来就受到众多医家的推崇,广泛应用于临床实践。舌象包含着人体丰富的生理和病理信息,通过对患者舌面苔迹、舌质相关属性,包括颜色、形态等进行观察,从而判断疾病所在,进行辨证论治,这对中医用药及判断疾病有重要的参考意义。但长期以来,由于舌诊结果完全依赖于医生的主观判断,诊断信息的正确与否受到医生的经验积累、环境因素的影响,导致舌诊缺乏客观的诊断方法与标准,且大多数舌象诊断经验不易于传授和保存,在一定程度上阻碍了舌诊的发展。因此,以中医理论为基础,将中医诊疗与图像分析技术相结合,对舌象进行定量分析,实现舌诊的客观化、标准化和定量化成为中医舌诊发展的必经之路。
随着人们日常生活习惯和身体状况的变化,舌面上可能会出现各种形状、深浅不一、多少不等的裂纹、裂沟。裂纹或裂沟中无舌苔覆盖者,多属病理性变化;若有舌苔覆盖,则多见于先天性裂纹。在中医理论中,裂纹舌是全身营养不良的一种表现,有精血亏虚,舌体失养,舌面乳头萎缩或组织破裂所致。
申请号为CN201410000707.2的中国专利申请公开了一种基于支持向量机的裂纹舌识别方法,包括如下步骤:(1)建立裂舌纹特征训练样本集;(2)构建基于支持向量机的裂纹舌分类器;(3)利用基于支持向量机的裂纹舌分类器进行识别,识别出待测舌裂纹特征样本集中的每一个待测样本是否属于裂纹舌象。该方法在检测出疑似舌裂纹区域的基础上,可以给出进一步的识别,是现有计算机舌裂纹检测方法的延拓,该方法利用一次性的样本集训练,即可完成识别工作,而且在识别过程中不需要任何的其它参数设置及人工因素干预,实现了全自动化识别裂纹舌。
申请号为CN201310656821.6的中国专利申请公开了一种舌部裂纹的获取方法,包括:获取舌部图像上的每个单位区域的特定能量参数的数值,以及所述特定能量参数在每个单位区域对应的关联区域内的最大数值;计算每个单位区域的特定能量参数的数值与对应的最大数值之间的相对数值关系;根据所述相对数值关系的数值所处的预设数值范围,确定相应的单位区域的类型为暗线类型或非暗线类型,其中,所有暗线类型的单位区域构成所述舌部图像上的舌部裂纹。
申请号为CN201010117453.4的中国专利申请公开了一种基于改进的最大类间方差法实现舌裂纹的方法,提出一种图像特征识别、去噪的方法,包括:得到标准舌图后,转为灰度图。复制图像,按照图像宽高大小将两张图像划分为小区域,并且使两张图像任何一个小区域不会和原图小区域重合;利用OSTU滤波方法对两幅图像的每个小区域单独滤波;根据两张图像的滤波结果按照一定规则,合并为一张图像;对滤波后的图像去噪,排除干扰。
发明内容
为了克服现有的舌象裂纹识别方法多依赖于图像灰度和梯度信息,在鲁棒性、实用性上的不足,本发明提供一种准确率较高的基于SSD网络的裂纹舌识别方法。
本发明解决其技术问题所采用的技术方案是:
一种基于SSD网络的裂纹舌识别方法,包括对采集到的舌象进行舌体分割的预处理操作、基于深度卷积神经网络的舌象整体特征提取和对裂纹区域进行预测的候选框生成方法,完成对舌象中裂纹区域的确定,并通过置信度过滤来判别其是否为裂纹舌;
所述的对采集到的舌象进行舌体分割的预处理操作,通过构建全卷积网络实现,所述全卷积网络由卷积层、池化层和反卷积层组成,卷积池化层将原始舌象从像素域映射到特征域,进行隐式的特征提取,反卷积层将上一步得到的特征图恢复到原图尺寸,进而对图像中的每个点进行分类实现分割;
所述的基于深度卷积神经网络的舌象整体特征提取,所述深度卷积神经网络由卷积层组成,将上述分割后的舌体作为输入,输入图像在网络中进行层层映射,得到不同的表示形式,提取其抽象特征,从而实现对舌象的深度表示;
所述的对裂纹区域进行预测的候选框生成方法,在不同层次的特征图上生成多种尺度、多种长宽比的默认盒子作为候选框,并将与真实框最吻合的候选框作为正样本,其余候选框都作为负样本。
进一步,所述的对采集到的舌象进行舌体分割的预处理操作中,分割网络选取VGG16的全卷积形式进行实现,其中包含五层堆叠的卷积池化层,经过五个池化层,输出的特征图尺寸依次变为原来的1/2,故采用了反卷积层将每层的特征图依次进行相应倍数的放大和融合,将特征图恢复到原图尺寸,并将真实分割图作为输入,训练softmax分类器对图像中的每个像素点进行分类,进而实现分割。
再进一步,所述的基于深度卷积神经网络的舌象整体特征提取中,网络使用VGG16-Atrous作为基础网络,再增加额外的特征提取层,附加网络的结构和参数如下所示:
第一个卷积层(conv6_1)有256个卷积核,核大小为1×1,步长为1,不填充像素;第二个卷积层(conv6_2)有512个卷积核,核大小为3×3,步长为2,填充一个像素;第三个卷积层(conv7_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第四个卷积层(conv7_2)有256个卷积核,核大小为3×3,步长为2,填充一个像素;第五个卷积层(conv8_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第六个卷积层(conv8_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;第七个卷积层(conv9_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第八个卷积层(conv9_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;
网络同时对裂纹所在区域及置信度进行预测,总的损失函数由公式(1)表示:
式中,类别损失函数由式(2)定义为:
位置回归损失函数由式(3)定义为:
R是鲁棒的损失函数smoothL1,由式(4)表示为:
式中,Ncls和Nreg是为避免过拟合的正则项,λ为权重系数,i是该候选框的类别索引值,ti是该候选框的预测坐标偏移量,t*i是该候选框的实际坐标偏移量,pi是预测候选框属于第i类的概率,p*i表示其真实类别,p*i=0表示背景类,p*i=1表示裂纹类。
更进一步,所述的对裂纹区域进行预测的候选框生成方法中,默认盒生成规则如下:
默认盒不需要与每一层的感受野对应,特征图中特定的位置负责图像中特定的区域,以及物体特定的尺寸。每个特征图中默认盒的尺寸大小计算如下,由式(5)表示:
其中,Smin取值0.2,Smax取值0.95,则最底层的尺度是0.2,最高层的尺度是0.95,再用不同的长宽比进行扩充,用ar表示,ar={1,2,3,1/2,1/3},则每一个默认盒的长、宽分别由式(6),(7)表示为:
本发明的有益效果为:识别裂纹舌的准确性较高,且若舌象为裂纹舌,可同时确定裂纹区域,有利于该裂纹舌的后续处理和分析。
附图说明
图1为对采集到的舌象进行分割处理及识别的结果图。其中,(a)为原图;(b)为舌体分割结果;(c)为裂纹舌识别结果;
图2为基于全卷积神经网络的舌体语义分割网络结构图;
图3为SSD神经网络结构图。
图4是一种基于SSD网络的裂纹舌识别方法的流程图。
具体实施方式
下面结合附图对本发明做进一步说明。
参照图1~图4,一种基于SSD网络的裂纹舌识别方法,包括对采集到的舌象进行舌体分割的预处理操作、基于深度卷积神经网络的舌象整体特征提取、对裂纹区域进行预测的候选框生成方法,完成对舌象中裂纹区域的确定,并通过置信度过滤来判别其是否为裂纹舌。本发明无需手工定义特征,有效地提高了裂纹舌的识别正确率;
所述的对采集到的舌象进行舌体分割的预处理操作,作为实现裂纹舌准确识别的前提,通过构建全卷积网络实现。网络主要由卷积层、池化层和反卷积层组成,卷积池化层将原始舌象从像素域映射到特征域,进行隐式的特征提取,反卷积层将上一步得到的特征图恢复到原图尺寸,进而对图像中的每个点进行分类实现分割;
所述的基于深度卷积神经网络的舌象整体特征提取,所述深度卷积神经网络由卷积层组成,将上述分割后的舌体作为输入,输入图像在网络中进行层层映射,得到不同的表示形式,提取其抽象特征,从而实现对舌象的深度表示;
所述的对裂纹区域进行预测的候选框生成方法,在不同层次的特征图上生成多种尺度、多种长宽比的默认盒子作为候选框,并将与真实框最吻合的候选框作为正样本,其余候选框都作为负样本。
进一步,所述的对采集到的舌象进行舌体分割的预处理操作,舌体分割通过构建全卷积网络实现。网络主要由卷积层、池化层和反卷积层组成,卷积池化层将原始舌象从像素域映射到特征域,进行隐式的特征提取,反卷积层将上一步得到的特征图恢复到原图尺寸,进而对图像中的每个点进行分类实现分割;
分割网络选取了VGG16的全卷积形式进行实现。其中包含五层堆叠的卷积池化层,经过五个池化层,输出的特征图尺寸依次变为原来的1/2,故采用了反卷积层将每层的特征图依次进行相应倍数的放大和融合,将特征图恢复到原图尺寸。并将真实分割图作为输入,训练softmax分类器对图像中的每个像素点进行分类,进而实现分割;
再进一步,所述的基于深度卷积神经网络的舌象整体特征提取,所述深度卷积神经网络即SSD神经网络,主要由卷积层组成,将上述分割后的舌体作为输入,输入图像在网络中进行层层映射,得到不同的表示形式,提取其抽象特征,从而实现对舌象的深度表示;
网络使用VGG16-Atrous作为基础网络,再增加额外的特征提取层,附加网络的结构和参数如下所示:
第一个卷积层(conv6_1)有256个卷积核,核大小为1×1,步长为1,不填充像素;第二个卷积层(conv6_2)有512个卷积核,核大小为3×3,步长为2,填充一个像素;第三个卷积层(conv7_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第四个卷积层(conv7_2)有256个卷积核,核大小为3×3,步长为2,填充一个像素;第五个卷积层(conv8_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第六个卷积层(conv8_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;第七个卷积层(conv9_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第八个卷积层(conv9_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;
网络同时对裂纹所在区域及置信度进行预测,总的损失函数由公式(1)表示:
式中,类别损失函数由式(2)定义为:
位置回归损失函数由式(3)定义为:
R是鲁棒的损失函数smoothL1,由式(4)表示为:
式中,Ncls和Nreg是为避免过拟合的正则项,λ为权重系数,i是该候选框的类别索引值,ti是该候选框的预测坐标偏移量,t*i是该候选框的实际坐标偏移量,pi是预测候选框属于第i类的概率,p*i表示其真实类别,p*i=0表示背景类,p*i=1表示裂纹类;
更进一步,所述的对裂纹区域进行预测的候选框生成方法,其特征在于:在不同层次的特征图上生成多种尺度、多种长宽比的默认盒作为候选框,并将与真实框最吻合的候选框作为正样本,其余候选框都作为负样本。具体的默认盒生成规则如下:
默认盒不需要与每一层的感受野对应,特征图中特定的位置负责图像中特定的区域,以及物体特定的尺寸。每个特征图中默认盒的尺寸大小计算如下,由式(5)表示:
其中,Smin取值0.2,Smax取值0.95,则最底层的尺度是0.2,最高层的尺度是0.95,再用不同的长宽比进行扩充,用ar表示,ar={1,2,3,1/2,1/3},则每一个默认盒的长、宽分别由式(6),(7)表示为:
Claims (2)
1.一种基于SSD网络的裂纹舌识别方法,其特征在于,所述方法包括对采集到的舌象进行舌体分割的预处理操作、基于深度卷积神经网络的舌象整体特征提取和对裂纹区域进行预测的候选框生成方法,完成对舌象中裂纹区域的确定,并通过置信度过滤来判别其是否为裂纹舌;
所述的对采集到的舌象进行舌体分割的预处理操作,通过构建全卷积网络实现,所述全卷积网络由卷积层、池化层和反卷积层组成,卷积池化层将原始舌象从像素域映射到特征域,进行隐式的特征提取,反卷积层将上一步得到的特征图恢复到原图尺寸,进而对图像中的每个点进行分类实现分割;
所述的基于深度卷积神经网络的舌象整体特征提取,所述深度卷积神经网络由卷积层组成,将上述分割后的舌体作为输入,输入图像在网络中进行层层映射,得到不同的表示形式,提取其抽象特征,从而实现对舌象的深度表示;
所述的对裂纹区域进行预测的候选框生成方法,在不同层次的特征图上生成多种尺度、多种长宽比的默认盒子作为候选框,并将与真实框最吻合的候选框作为正样本,其余候选框都作为负样本;
所述对采集到的舌象进行舌体分割的预处理操作中,分割网络选取VGG16的全卷积形式进行实现,其中包含五层堆叠的卷积池化层,经过五个池化层,输出的特征图尺寸依次变为原来的1/2,故采用了反卷积层将每层的特征图依次进行相应倍数的放大和融合,将特征图恢复到原图尺寸;并将真实分割图作为输入,训练softmax分类器对图像中的每个像素点进行分类,进而实现分割;
所述基于深度卷积神经网络的舌象整体特征提取中,网络使用VGG16-Atrous作为基础网络,再增加额外的特征提取层,附加网络的结构和参数如下所示:
第一个卷积层(conv6_1)有256个卷积核,核大小为1×1,步长为1,不填充像素;第二个卷积层(conv6_2)有512个卷积核,核大小为3×3,步长为2,填充一个像素;第三个卷积层(conv7_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第四个卷积层(conv7_2)有256个卷积核,核大小为3×3,步长为2,填充一个像素;第五个卷积层(conv8_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第六个卷积层(conv8_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;第七个卷积层(conv9_1)有128个卷积核,核大小为1×1,步长为1,不填充像素;第八个卷积层(conv9_2)有256个卷积核,核大小为3×3,步长为1,不填充像素;
网络同时对裂纹所在区域及置信度进行预测,总的损失函数由公式(1)表示:
式中,类别损失函数由式(2)定义为:
位置回归损失函数由式(3)定义为:
R是鲁棒的损失函数smoothL1,由式(4)表示为:
式中,Ncls和Nreg是为避免过拟合的正则项,λ为权重系数,i是该候选框的类别索引值,ti是该候选框的预测坐标偏移量,t*i是该候选框的实际坐标偏移量,pi是预测候选框属于第i类的概率,p*i表示其真实类别,p*i=0表示背景类,p*i=1表示裂纹类。
2.如权利要求1所述的基于SSD网络的裂纹舌识别方法,其特征在于:所述对裂纹区域进行预测的候选框生成方法中,默认盒生成规则如下:
默认盒不需要与每一层的感受野对应,特征图中特定的位置负责图像中特定的区域,以及物体特定的尺寸,每个特征图中默认盒的尺寸大小计算如下,由式(5)表示:
其中,Smin取值0.2,Smax取值0.95,则最底层的尺度是0.2,最高层的尺度是0.95,再用不同的长宽比进行扩充,用ar表示,ar={1,2,3,1/2,1/3},则每一个默认盒的长、宽分别由式(6),(7)表示为:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810371990.8A CN108734108B (zh) | 2018-04-24 | 2018-04-24 | 一种基于ssd网络的裂纹舌识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810371990.8A CN108734108B (zh) | 2018-04-24 | 2018-04-24 | 一种基于ssd网络的裂纹舌识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108734108A CN108734108A (zh) | 2018-11-02 |
CN108734108B true CN108734108B (zh) | 2021-08-03 |
Family
ID=63939185
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810371990.8A Active CN108734108B (zh) | 2018-04-24 | 2018-04-24 | 一种基于ssd网络的裂纹舌识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108734108B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110119815B (zh) * | 2019-05-21 | 2021-08-13 | 深圳市腾讯网域计算机网络有限公司 | 模型训练方法、装置、存储介质及设备 |
CN110210391A (zh) * | 2019-05-31 | 2019-09-06 | 合肥云诊信息科技有限公司 | 基于多尺度卷积神经网络的舌象纹理定量分析方法 |
CN110378353A (zh) * | 2019-06-06 | 2019-10-25 | 杭州云秒科技有限公司 | 一种舌象特征提取方法、系统和计算机可读存储介质 |
CN110826565B (zh) * | 2019-11-01 | 2023-07-14 | 北京中科芯健医疗科技有限公司 | 基于跨连接的卷积神经网络齿痕舌象分类方法及系统 |
CN112129777A (zh) * | 2020-10-19 | 2020-12-25 | 北京市地铁运营有限公司 | 基于计算机视觉的轨道列车维护检测装置 |
CN113781488A (zh) * | 2021-08-02 | 2021-12-10 | 横琴鲸准智慧医疗科技有限公司 | 舌象图像的分割方法、装置及介质 |
CN113744268B (zh) * | 2021-11-04 | 2022-04-22 | 深圳市城市交通规划设计研究中心股份有限公司 | 一种裂纹检测方法、电子设备及可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106683087A (zh) * | 2016-12-26 | 2017-05-17 | 华南理工大学 | 一种基于深度神经网络的舌苔体质辨别方法 |
CN107123123A (zh) * | 2017-05-02 | 2017-09-01 | 电子科技大学 | 基于卷积神经网络的图像分割质量评价方法 |
CN107610087A (zh) * | 2017-05-15 | 2018-01-19 | 华南理工大学 | 一种基于深度学习的舌苔自动分割方法 |
-
2018
- 2018-04-24 CN CN201810371990.8A patent/CN108734108B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106683087A (zh) * | 2016-12-26 | 2017-05-17 | 华南理工大学 | 一种基于深度神经网络的舌苔体质辨别方法 |
CN107123123A (zh) * | 2017-05-02 | 2017-09-01 | 电子科技大学 | 基于卷积神经网络的图像分割质量评价方法 |
CN107610087A (zh) * | 2017-05-15 | 2018-01-19 | 华南理工大学 | 一种基于深度学习的舌苔自动分割方法 |
Also Published As
Publication number | Publication date |
---|---|
CN108734108A (zh) | 2018-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108734108B (zh) | 一种基于ssd网络的裂纹舌识别方法 | |
CN107977671B (zh) | 一种基于多任务卷积神经网络的舌象分类方法 | |
US11842556B2 (en) | Image analysis method, apparatus, program, and learned deep learning algorithm | |
CN109154978B (zh) | 用于检测植物疾病的系统和方法 | |
CN107506761B (zh) | 基于显著性学习卷积神经网络的脑部图像分割方法及系统 | |
CN110136103A (zh) | 医学影像解释方法、装置、计算机设备及存储介质 | |
WO2022012110A1 (zh) | 胚胎光镜图像中细胞的识别方法及系统、设备及存储介质 | |
CN106295124B (zh) | 多种图像检测技术综合分析基因子图相似概率量的方法 | |
CN110675368B (zh) | 一种融合图像分割与分类的细胞图像语义分割方法 | |
CN112132166B (zh) | 一种数字细胞病理图像智能分析方法、系统及装置 | |
CN113723573B (zh) | 基于自适应比例学习的肿瘤组织病理分类系统及方法 | |
CN110648322A (zh) | 一种子宫颈异常细胞检测方法及系统 | |
CN110729045A (zh) | 一种基于上下文感知残差网络的舌图像分割方法 | |
CN112348059A (zh) | 基于深度学习的多种染色病理图像分类方法及系统 | |
CN110796661B (zh) | 基于卷积神经网络的真菌显微图像分割检测方法及系统 | |
CN111259808A (zh) | 一种基于改进ssd算法的交通标识的检测识别方法 | |
CN112819821A (zh) | 一种细胞核图像检测方法 | |
CN115965607A (zh) | 一种智能中医舌诊辅助分析系统 | |
Panda et al. | Glauconet: patch-based residual deep learning network for optic disc and cup segmentation towards glaucoma assessment | |
CN114140437A (zh) | 一种基于深度学习的眼底硬渗出物分割方法 | |
Huang et al. | HEp-2 cell images classification based on textural and statistic features using self-organizing map | |
CN117036288A (zh) | 一种面向全切片病理图像的肿瘤亚型诊断方法 | |
CN110910497B (zh) | 实现增强现实地图的方法和系统 | |
CN116468923A (zh) | 一种基于加权重采样聚类不稳定性的图像强化方法及装置 | |
CN112381767B (zh) | 角膜反射图像的筛选方法、装置、智能终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |