CN113596439A - 基于图像模糊评价的摄像头模组局部解析力失效检测方法 - Google Patents
基于图像模糊评价的摄像头模组局部解析力失效检测方法 Download PDFInfo
- Publication number
- CN113596439A CN113596439A CN202110808463.0A CN202110808463A CN113596439A CN 113596439 A CN113596439 A CN 113596439A CN 202110808463 A CN202110808463 A CN 202110808463A CN 113596439 A CN113596439 A CN 113596439A
- Authority
- CN
- China
- Prior art keywords
- camera module
- definition
- neighborhood
- local
- heat map
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种基于图像模糊评价的摄像头模组局部解析力失效检测方法,包括:使用待检测摄像头模组拍摄预设的测试图卡,并将拍摄的图片分割为多个矩形测试区域;对每个矩形测试区域的图像进行清晰度评价,得到所述摄像头模组的局部清晰度指标;根据所述局部清晰度指标绘制可视化热图,直观展示所述摄像头模组清晰度从中心位置到边缘位置的变化过程。本发明方法能够对任意摄像头模组区域的解析力进行检测,并能直观判断解析力局部失效的位置和程度。
Description
技术领域
本发明涉及摄像头解析力评价技术领域,特别涉及一种基于图像模糊评价的摄像头模组局部解析力失效检测方法。
背景技术
随着人工智能的发展,视频和图像已经大量的应用在生产制造中,例如:工业制造中对材料的识别分类、缺陷检测,各种零器件的缺陷检测,加工质量监控等。同时随着智能手机和数码相机的发展,使用图像和视频记录生活成为人们的常态。无论是工业制造中还是日常生活中,用户对拍照设备的成像能力关注度越来越高,对镜头质量要求也越来越高。为了保证成像的质量,对摄像头模组在出厂前的清晰度检测以及使用过程中的清晰度失效检测是十分有必要的。目前许多相机生产厂家对解析力的检测主要有三种方法即TVline检测,MTF检测,和SFR检测。当前也有许多测试标准,例如ISO/TC42摄影技术委员会在2017年发布了ISO12233:2017规定了适用于单色和彩色相机的测量相机分辨率和SFR的方法。BOG/CAG在2016年发布了P1858(CPIQ),它定义了一套用于测量照相手机图像质量属性的标准的客观和主观测试方法。
除了相机自身性能外,相机传感器和镜头在制造和组装过程中以及使用过程中会产生不同的损伤。在生产过程中,镜片玻璃可能存在含有气泡、涂层不均匀等问题;在使用过程中,镜片可能会出现划痕、雾化、发霉、脱膜等损伤,同时可能会有灰尘、镜片清洁过多出现磨损和涂层损失,这些损伤都会影响摄像头的整体成像质量或者局部成像质量。
相机镜头的解析力和清晰度,在相机组装完成的时候就已经确定了,其中日本主要以判断数字轴线的解析力变现为主,美国主要利用SFR计算标准来测定。因为考虑到生产效率的问题,大多数的解析力测试不会划分过多测试区域,通常情况下会分为5个区域:左上、左下、右上、右下和中心,分别对这5个区域进行水平和垂直解析力测试,通过这5个重点位置的解析力代表整体水平,通常边缘位置的解析力相对于中心位置会下降。但是当摄像头局部解析力出现问题时,采用当前的5个区域的检测方法,很难及时发现问题,因此找到可以直观判断摄像头整体解析力水平已及局部解析力是否出现失效的方法是十分有意义的。
发明内容
本发明的目的在于提供一种基于图像模糊评价的摄像头模组局部解析力失效检测方法,能够对任意摄像头模组区域的解析力进行检测,并能直观判断解析力局部失效的位置和程度。
为解决上述技术问题,本发明的实施例提供如下方案:
一种基于图像模糊评价的摄像头模组局部解析力失效检测方法,包括以下步骤:
S1、使用待检测摄像头模组拍摄预设的测试图卡,并将拍摄的图片分割为多个矩形测试区域;
S2、对每个矩形测试区域的图像进行清晰度评价,得到所述摄像头模组的局部清晰度指标;
S3、根据所述局部清晰度指标绘制可视化热图,直观展示所述摄像头模组清晰度从中心位置到边缘位置的变化过程。
优选地,所述测试图卡包括多个均匀分布且相切的圆形,每个圆形占16个像素以上;在拍摄时,选取的待检测区域包含至少一个圆形。
优选地,所述步骤S2中,对每个矩形测试区域的图像进行清晰度评价具体包括:
评价标准分为三个部分:像素强度、一阶梯度和8邻域二阶梯度;
第一步,计算待检测区域像素的均值:
其中MN为待检测区域的宽和高,f(x,y)为(x,y)位置的像素值,则待检测区域像素值的标准差为:
第二步,计算一阶梯度:
该梯度向量相对于x轴的角度为:
第三步,计算8邻域二阶梯度,分为水平垂直邻域和对角邻域两部分;
水平垂直4邻域,计算方法为:
对角4邻域,计算方法为:
将上述三个部分组合,同时考虑不同部分的像素标准差,得到待检测区域MN的清晰度为:
其中,C1,C2,C3为常数,L=N8(x,y)代表像素点(x,y)的8邻域,L1=N4(x,y)代表与像素点(x,y)相邻的水平和垂直的4邻域,L2=ND(x,y)代表与像素点(x,y)相邻的对角位置的4邻域,σL为L邻域内的像素标准差。
优选地,所述步骤S3中,绘制可视化热图的方法为:
根据步骤S2依次计算所有矩形测试区域的清晰度;
根据计算结果绘制可视化热图,其中不同的清晰度采用不同的颜色表示。
优选地,所述方法还包括:
采用无模糊点的图片作为标准图片,对所述标准图片进行分区域清晰度检测并绘制标准可视化热图;
采用预置模糊点的图片作为验证图片,对所述验证图片进行分区域清晰度检测并绘制可视化热图;
将所述验证图片的可视化热图与所述标准可视化热图进行对比,验证方法的有效性。
本发明实施例提供的技术方案带来的有益效果至少包括:
本发明针对摄像头模组在生产和使用中可能会出现局部解析力失效,以及在出产测试时无法对任意位置的解析力进行评价的问题,通过对拍摄的测试图卡图像进行图像清晰度评价并绘制可视化热图,从而直观展示出摄像头模组局部解析能力的大小。本发明方法可以对摄像头模组任意位置的解析力进行计算,对于局部解析力有问题的镜头可以定位到缺陷位置并且可以直观看到解析力从中心位置到边缘位置的变化。并且,所述方法对测试环境要求低且不受光照强度影响,适用范围广。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的基于图像模糊评价的摄像头模组局部解析力失效检测方法的流程图;
图2是本发明实施例提供的检测摄像头局部解析力失效的测试图卡的示意图;
图3是本发明实施例提供的摄像头局部解析力测试结果可视化热图;
图4是本发明实施例提供的预置模糊点的摄像头局部解析力测试结果可视化热图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
本发明的实施例提供了一种基于图像模糊评价的摄像头模组局部解析力失效检测方法,如图1所示,所述方法包括以下步骤:
S1、使用待检测摄像头模组拍摄预设的测试图卡,并将拍摄的图片分割为多个矩形测试区域;
S2、对每个矩形测试区域的图像进行清晰度评价,得到所述摄像头模组的局部清晰度指标;
S3、根据所述局部清晰度指标绘制可视化热图,直观展示所述摄像头模组清晰度从中心位置到边缘位置的变化过程。
图2是本发明实施例提供的一种测试图卡的示意图。所述测试图卡包括多个均匀分布且相切的圆形,因为圆形自身的特性,只要测试区域的边长大于圆的直径,在测试区域内便会有圆的边缘轮廓,而且当测试区域大小相同时,在不考虑图像畸变的情况下,无论测试区域在图像的哪个位置,所包含的圆的边长是近似相同的。在拍摄时,只要保证每个圆形占16个像素以上且选取的测试区域包含至少一个圆形即可。
进一步地,所述步骤S2中,对每个矩形测试区域的图像进行清晰度评价具体包括:
评价标准分为三个部分:像素强度、一阶梯度和8邻域二阶梯度;
第一步,计算待检测区域像素的均值:
其中MN为待检测区域的宽和高,f(x,y)为(x,y)位置的像素值,则待检测区域像素值的标准差为:
第二步,计算一阶梯度:
该梯度向量相对于x轴的角度为:
第三步,计算8邻域二阶梯度,分为水平垂直邻域和对角邻域两部分;
水平垂直4邻域,计算方法为:
对角4邻域,计算方法为:
将上述三个部分组合,同时考虑不同部分的像素标准差,得到待检测区域MN的清晰度为:
其中,C1,C2,C3为常数,L=N8(x,y)代表像素点(x,y)的8邻域,L1=N4(x,y)代表与像素点(x,y)相邻的水平和垂直的4邻域,L2=ND(x,y)代表与像素点(x,y)相邻的对角位置的4邻域,σL为L邻域内的像素标准差。
进一步地,所述步骤S3中,绘制可视化热图的方法为:
根据步骤S2依次计算所有矩形测试区域的清晰度;
根据计算结果绘制可视化热图,其中不同的清晰度采用不同的颜色表示。
进一步地,所述方法还包括:
采用无模糊点的图片作为标准图片,对所述标准图片进行分区域清晰度检测并绘制标准可视化热图;
采用预置模糊点的图片作为验证图片,对所述验证图片进行分区域清晰度检测并绘制可视化热图;
将所述验证图片的可视化热图与所述标准可视化热图进行对比,验证方法的有效性。
在一个具体的实施例中,使用三脚架固定相机(相机包含摄像头模组),调节为专业拍摄Raw图自动对焦模式,IOS为100,曝光为1/4,拍摄图片尺寸为4:3(1600万像素),图像分辨率为4624*3472。为了判断算法是否能检测到模糊位置,采用Gaussian模糊方式对Raw图预置五个模糊点。选取图像对角线位置,坐标为A(782,567),B(1731,1200),C(1200,2239),D(3345,692),E(2843,2045)。宽高均为300。
然后将图像分为80*60个感兴趣区域,每个感兴趣区域为62*58的矩形。对每个矩形测试区域进行清晰度评价。
以其中一个矩形测试区域为例,第一步,计算待检测区域像素的均值:
其中MN为待检测区域的宽和高,f(x,y)为(x,y)位置的像素值,则该待检测区域像素值的标准差为:
第二步,计算一阶梯度,对于该区域的每个像素的8邻域:
该梯度向量相对于x轴的角度为:
将该区域的所有的像素的8邻域的一节梯度相加后取平均。
第三步,计算二阶梯度,分为水平垂直邻域和对角邻域两部分,水平垂直4邻域,计算方法为:
对角4邻域,计算方法为:
将该区域的所有的像素的8邻域的二节梯度相加后取平均。
最终将三个部分组合得到局部清晰度测量标准,同时考虑不同部分的像素标准差,得到待检测区域MN的清晰度为:
依次计算所有待检测区域的清晰度,根据结果画出可视化热图,如图2所示。将预置模糊点的图像也分区域进行清晰度检测后画出可视化热图,如图3所示。可以看出,本发明所述方法可以反应摄像头模组在不同位置相较于中心点的解析力退化程度。通过对图像预置模糊点的方法可以看出本发明方法在一定程度上能够反应清晰度的变化,当摄像头出现局部解析力失效时,可以从可视化热图上直观的判断出失效位置以及程度。
综上所述,本发明针对摄像头模组在生产和使用中可能会出现局部解析力失效,以及在出产测试时无法对任意位置的解析力进行评价的问题,通过对拍摄的测试图卡图像进行图像清晰度评价并绘制可视化热图,从而直观展示出摄像头模组局部解析能力的大小。本发明方法可以对摄像头模组任意位置的解析力进行计算,对于局部解析力有问题的镜头可以定位到缺陷位置并且可以直观看到解析力从中心位置到边缘位置的变化。并且,所述方法对测试环境要求低且不受光照强度影响,适用范围广。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.一种基于图像模糊评价的摄像头模组局部解析力失效检测方法,其特征在于,包括以下步骤:
S1、使用待检测摄像头模组拍摄预设的测试图卡,并将拍摄的图片分割为多个矩形测试区域;
S2、对每个矩形测试区域的图像进行清晰度评价,得到所述摄像头模组的局部清晰度指标;
S3、根据所述局部清晰度指标绘制可视化热图,直观展示所述摄像头模组清晰度从中心位置到边缘位置的变化过程。
2.根据权利要求1所述的基于图像模糊评价的摄像头模组局部解析力失效检测方法,其特征在于,所述测试图卡包括多个均匀分布且相切的圆形,每个圆形占16个像素以上;在拍摄时,选取的待检测区域包含至少一个圆形。
3.根据权利要求1所述的基于图像模糊评价的摄像头模组局部解析力失效检测方法,其特征在于,所述步骤S2中,对每个矩形测试区域的图像进行清晰度评价具体包括:
评价标准分为三个部分:像素强度、一阶梯度和8邻域二阶梯度;
第一步,计算待检测区域像素的均值:
其中MN为待检测区域的宽和高,f(x,y)为(x,y)位置的像素值,则待检测区域像素值的标准差为:
第二步,计算一阶梯度:
该梯度向量相对于x轴的角度为:
第三步,计算8邻域二阶梯度,分为水平垂直邻域和对角邻域两部分;
水平垂直4邻域,计算方法为:
对角4邻域,计算方法为:
将上述三个部分组合,同时考虑不同部分的像素标准差,得到待检测区域MN的清晰度为:
其中,C1,C2,C3为常数,L=N8(x,y)代表像素点(x,y)的8邻域,L1=N4(x,y)代表与像素点(x,y)相邻的水平和垂直的4邻域,L2=ND(x,y)代表与像素点(x,y)相邻的对角位置的4邻域,σL为L邻域内的像素标准差。
4.根据权利要求3所述的基于图像模糊评价的摄像头模组局部解析力失效检测方法,其特征在于,所述步骤S3中,绘制可视化热图的方法为:
根据步骤S2依次计算所有矩形测试区域的清晰度;
根据计算结果绘制可视化热图,其中不同的清晰度采用不同的颜色表示。
5.根据权利要求1所述的基于图像模糊评价的摄像头模组局部解析力失效检测方法,其特征在于,所述方法还包括:
采用无模糊点的图片作为标准图片,对所述标准图片进行分区域清晰度检测并绘制标准可视化热图;
采用预置模糊点的图片作为验证图片,对所述验证图片进行分区域清晰度检测并绘制可视化热图;
将所述验证图片的可视化热图与所述标准可视化热图进行对比,验证方法的有效性。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110808463.0A CN113596439B (zh) | 2021-07-16 | 2021-07-16 | 基于图像模糊评价的摄像头模组局部解析力失效检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110808463.0A CN113596439B (zh) | 2021-07-16 | 2021-07-16 | 基于图像模糊评价的摄像头模组局部解析力失效检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113596439A true CN113596439A (zh) | 2021-11-02 |
CN113596439B CN113596439B (zh) | 2022-11-15 |
Family
ID=78247854
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110808463.0A Active CN113596439B (zh) | 2021-07-16 | 2021-07-16 | 基于图像模糊评价的摄像头模组局部解析力失效检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113596439B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114401393A (zh) * | 2021-11-30 | 2022-04-26 | 珠海视熙科技有限公司 | 一种镜头分辨率的测试方法以及测试装置 |
CN114418928A (zh) * | 2021-11-12 | 2022-04-29 | 中国科学院西安光学精密机械研究所 | 一种激光焦斑清晰度判别方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101840576A (zh) * | 2010-05-12 | 2010-09-22 | 浙江大学 | 一种可视化的测试数码相机各个成像区域分辨率的方法 |
CN103442247A (zh) * | 2013-08-15 | 2013-12-11 | 华南理工大学 | 一种摄像头图像清晰度评估方法及其评估系统 |
CN110519585A (zh) * | 2019-08-23 | 2019-11-29 | 凌云光技术集团有限责任公司 | 一种应用于图像采集设备的成像校准方法及装置 |
CN110730309A (zh) * | 2019-11-21 | 2020-01-24 | 深圳市圆周率软件科技有限责任公司 | 一种摄像模组的调焦方法 |
CN110930363A (zh) * | 2019-10-29 | 2020-03-27 | 北京临近空间飞行器系统工程研究所 | 曲面模糊图像清晰度评价值确定方法、设备及存储介质 |
CN111899243A (zh) * | 2020-07-28 | 2020-11-06 | 阳光保险集团股份有限公司 | 一种图像清晰度评价方法、设备和计算机可读存储介质 |
CN112508887A (zh) * | 2020-11-26 | 2021-03-16 | 西安电子科技大学 | 一种图像清晰度评价方法、系统、存储介质、设备及应用 |
-
2021
- 2021-07-16 CN CN202110808463.0A patent/CN113596439B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101840576A (zh) * | 2010-05-12 | 2010-09-22 | 浙江大学 | 一种可视化的测试数码相机各个成像区域分辨率的方法 |
CN103442247A (zh) * | 2013-08-15 | 2013-12-11 | 华南理工大学 | 一种摄像头图像清晰度评估方法及其评估系统 |
CN110519585A (zh) * | 2019-08-23 | 2019-11-29 | 凌云光技术集团有限责任公司 | 一种应用于图像采集设备的成像校准方法及装置 |
CN110930363A (zh) * | 2019-10-29 | 2020-03-27 | 北京临近空间飞行器系统工程研究所 | 曲面模糊图像清晰度评价值确定方法、设备及存储介质 |
CN110730309A (zh) * | 2019-11-21 | 2020-01-24 | 深圳市圆周率软件科技有限责任公司 | 一种摄像模组的调焦方法 |
CN111899243A (zh) * | 2020-07-28 | 2020-11-06 | 阳光保险集团股份有限公司 | 一种图像清晰度评价方法、设备和计算机可读存储介质 |
CN112508887A (zh) * | 2020-11-26 | 2021-03-16 | 西安电子科技大学 | 一种图像清晰度评价方法、系统、存储介质、设备及应用 |
Non-Patent Citations (1)
Title |
---|
潘雪娟等: "基于梯度计算的自动聚焦图像清晰度评价函数仿真分析", 《红外技术》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114418928A (zh) * | 2021-11-12 | 2022-04-29 | 中国科学院西安光学精密机械研究所 | 一种激光焦斑清晰度判别方法 |
CN114401393A (zh) * | 2021-11-30 | 2022-04-26 | 珠海视熙科技有限公司 | 一种镜头分辨率的测试方法以及测试装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113596439B (zh) | 2022-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113596439B (zh) | 基于图像模糊评价的摄像头模组局部解析力失效检测方法 | |
US20210281748A1 (en) | Information processing apparatus | |
US7206461B2 (en) | Digital image acquisition and processing system | |
JP5043755B2 (ja) | 樹脂材料検査装置およびプログラム | |
US7310450B2 (en) | Method of detecting and correcting dust in digital images based on aura and shadow region analysis | |
US20050078173A1 (en) | Determination of need to service a camera based on detection of blemishes in digital images | |
CN111031311B (zh) | 成像质量检测方法、装置、电子设备及可读存储介质 | |
US20190188832A1 (en) | Automatic Defective Digital Motion Picture Pixel Detection | |
CN112033965A (zh) | 基于差分图像分析的3d弧形表面缺陷检测方法 | |
CN116912233B (zh) | 基于液晶显示屏的缺陷检测方法、装置、设备及存储介质 | |
CN112881430A (zh) | 一种基于图像识别的显示屏缺陷监测系统及其检测方法 | |
CN110880184A (zh) | 一种基于光流场进行摄像头自动巡检的方法及装置 | |
JP5207057B2 (ja) | 撮影装置の汚れを検知する汚れ検知装置及び同検知方法 | |
CN114993614A (zh) | Ar头戴设备测试设备及其测试方法 | |
CN114565552A (zh) | 光学元件表面缺陷的检测方法、装置及电子设备 | |
CN115931912A (zh) | 一种菲涅尔透镜的外观缺陷检测方法、装置、设备和介质 | |
CN113570578A (zh) | 一种镜片鬼影现象检测方法、装置 | |
JP2012237585A (ja) | 欠陥検査方法 | |
JP3695120B2 (ja) | 欠陥検査方法 | |
US20060193497A1 (en) | Stain inspection method and apparatus | |
CN110443750A (zh) | 检测视频序列中的运动的方法 | |
CN112036401B (zh) | 一种基于车牌图像属性标定的车牌识别一体机评测方法及装置 | |
JP2005140655A (ja) | シミ欠陥の検出方法及びその検出装置 | |
Wang et al. | Local sharpness failure detection of camera module lens based on image blur assessment | |
CN114298995A (zh) | 一种图像缺陷元抑制方法、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |