CN113865488B - 一种距离测量方法、电子设备及计算机可读存储介质 - Google Patents
一种距离测量方法、电子设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN113865488B CN113865488B CN202111124542.6A CN202111124542A CN113865488B CN 113865488 B CN113865488 B CN 113865488B CN 202111124542 A CN202111124542 A CN 202111124542A CN 113865488 B CN113865488 B CN 113865488B
- Authority
- CN
- China
- Prior art keywords
- boundary
- measuring
- line
- length value
- measurement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000005259 measurement Methods 0.000 claims abstract description 182
- 238000012545 processing Methods 0.000 claims abstract description 22
- 238000003384 imaging method Methods 0.000 claims abstract description 17
- 239000004973 liquid crystal related substance Substances 0.000 claims description 23
- 238000000691 measurement method Methods 0.000 claims description 21
- 239000000945 filler Substances 0.000 claims description 19
- 238000004891 communication Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 11
- 230000008569 process Effects 0.000 description 7
- 238000012360 testing method Methods 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000004806 packaging method and process Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 239000004033 plastic Substances 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 239000012945 sealing adhesive Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
- G01B11/028—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring lateral position of a boundary of the object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30121—CRT, LCD or plasma display
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Geometry (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例提供了一种距离测量方法、电子设备及计算机可读存储介质，其中，上述方法用于测量第一边界与第二边界之间的距离，上述方法包括：对第一边界与第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应；在第一界线上选取多个测量点；以多个测量点为起点沿垂直于第一界线的方向作多条基准测量线，多条基准测量线的终点位于第二界线上；获取每一基准测量线的长度值，得到多条基准测量线的多个第一长度值；确定多个第一长度值中最小的长度值，作为目标长度值；根据目标长度值确定第一边界与第二边界之间的距离。
Description
技术领域
本发明涉及测量技术领域，特别是涉及一种距离测量方法、电子设备及计算机可读存储介质。
背景技术
由于技术成熟且成本较低，液晶面板被广泛应用于各种显示装置中。液晶面板的结构可以简单理解为在两片玻璃中设置流动的液晶层。为防止液晶层漏液及防止水氧进入液晶层，多通过胶框粘接两片玻璃以封装液晶面板。此外，还可以通过在两片玻璃的边缘之间设置封屏胶等填充物，以对液晶面板进行进一步的封装。因此，液晶面板内填充物的宽度是检测液晶面板的封装是否符合标准的一大因素。
相关技术中，多采用显微镜对填充物进行放大后，采用人工测量等方式测量填充物两侧边缘之间的距离，以获得填充物的宽度，测量效率较低切测量结果不够精确。
发明内容
本发明实施例的目的在于提供一种距离测量方法、电子设备及计算机可读存储介质，以提高距离测量的效率及精确度。具体技术方案如下：
本申请实施例的第一方面提供了一种距离测量方法，所述方法用于测量第一边界与第二边界之间的距离，所述方法包括：
对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应；
在第一界线上选取多个测量点，所述第一界线的平滑度大于所述第二界线的平滑度；
以所述多个测量点为起点沿垂直于所述第一界线的方向作多条基准测量线，所述多条基准测量线的终点位于所述第二界线上；
获取每一基准测量线的长度值，得到所述多条基准测量线的多个第一长度值；
确定所述多个第一长度值中最小的长度值，作为目标长度值；
根据所述目标长度值确定所述第一边界与所述第二边界之间的距离。
一些实施例中，所述方法还包括：
获取所述第一边界及第二边界与待测量图像的比例关系；
所述根据所述目标长度值确定所述第一边界与所述第二边界之间的距离，包括：
根据所述比例关系与所述目标长度值确定所述第一边界与所述第二边界之间的距离。
一些实施例中，在以所述多个测量点为起点沿垂直于所述第一界线的方向作多条基准测量线之后，所述方法还包括：
以至少一个所述测量点为起点在所述测量点对应的基准测量线的两侧作两条辅助测量线，每一辅助测量线与所述基准测量线之间的夹角均为第一预设角度；
获取每一辅助测量线测的长度值，得到至少两条所述辅助测量线的第二长度值；
所述确定所述多个第一长度值中最小的长度值，作为目标长度值，包括：
确定所述多个第一长度值及所述第二长度值中最小的长度值作为目标长度值。
一些实施例中，在以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线之后，所述方法还包括：
以至少一个测量点为起点在该测量点对应的基准测量线及辅助测量线之间以第二预设角度为间隔作多条中间测量线；
获取每一中间测量线测的长度值，得到所述多条中间测量线的第三长度值；
所述确定所述多个第一长度值及所述第二长度值中最小的长度值作为目标长度值，包括：
确定所述多个第一长度值、所述第二长度值及所述多个第三长度值中最小的长度值作为目标长度值。
一些实施例中，所述第一预设角度为3度至15度，所述第二预设角度为0.5度至2度。
一些实施例中，在对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像之后，所述方法还包括：
对所述待测量图像进行二值化处理。
一些实施例中，所述第一边界与所述第二边界为位于液晶面板的一侧边缘的填充物沿宽度方向上的两侧边界，所述填充物用于封装所述液晶面板。
一些实施例中，所述多个测量点包括所述第一界线的起点和终点。
一些实施例中，所述多个测量点之间的距离相等。
本申请实施例的第二方面提供了一种距离测量装置，所述距离测量装置用于测量第一边界与第二边界之间的距离，所述距离测量装置包括：
第一获取模块，用于对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应；
选取模块，用于在第一界线上选取多个测量点，所述第一界线的平滑度大于所述第二界线的平滑度；
第一确定模块，以所述多个测量点为起点沿垂直于所述第一界线的方向作多条基准测量线，所述多条基准测量线的终点位于所述第二界线上；
第二获取模块，用于获取每一基准测量线的长度值，得到所述多条基准测量线的多个第一长度值；
第二确定模块，用于确定所述多个第一长度值中最小的长度值，作为目标长度值；
第三确定模块，用于根据所述目标长度值确定所述第一边界与所述第二边界之间的距离。
一些实施例中，所述距离测量装置还包括：
第三获取模块，用于获取所述第一边界及第二边界与待测量图像的比例关系；
所述第三确定模块，具体用于根据所述比例关系与所述目标长度值确定所述第一边界与所述第二边界之间的距离。
一些实施例中，所述距离测量装置还包括：
第四确定模块，用于在以所述多个测量点为起点沿垂直于所述第一界线的方向作多条基准测量线之后，以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线，每一辅助测量线与所述基准测量线之间的夹角均为第一预设角度；
第四获取模块，用于获取每一辅助测量线测的长度值，得到至少两条所述辅助测量线的第二长度值；
所述第三确定模块，具体用于确定所述多个第一长度值及所述第二长度值中最小的长度值作为目标长度值。
一些实施例中，所述距离测量装置还包括：
第五确定模块，用于在以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线之后，以至少一个测量点为起点在该测量点对应的基准测量线及辅助测量线之间以第二预设角度为间隔作多条中间测量线；
第五获取模块，用于获取每一中间测量线测的长度值，得到所述多条中间测量线的第三长度值；
所述第三确定模块，具体用于确定所述多个第一长度值、所述第二长度值及所述多个第三长度值中最小的长度值作为目标长度值。
一些实施例中，所述距离测量装置还包括处理模块，用于在对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像之后，对所述待测量图像进行二值化处理。
本申请实施例的第三方面提供了一种电子设备，所述电子设备包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一所述的方法步骤。
本申请实施例第四方面提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任意所述的距离测量方法的步骤。
本申请实施例第五方面提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一所述的距离测量方法。
本发明实施例有益效果：
本发明实施例提供的方案中，对待测量的第一边界及第二边界进行图像化处理，使得第一边界及第二边界转换为二维的平面图像(待测量图像)，其中，待测量图像里具有第一边界图像化后形成的第一界线，以及第二边界图像化后形成的第二界线。在与第二界线相比平滑度较高的第一界线上选取多个测量点，然后以多个测量点为起点像第二边界作多条基准测量线，然后获取每一条基准测量线的第一长度值，第一长度值表示第一界线与第二界线在各测量点处的距离，然后选取多个第一长度值中最小的长度值作为目标长度值，然后根据目标长度值确定第一边界与第二边界之间的距离。上述距离测量方法中，通过将第一边界及第二边界图像化处理，然后确定图像中第一界线与第二界线之间的最短距离，进而根据第一界线与第二界线间的最短距离确定第一边界与第二边界之间的距离，实现了距离测量的自动化，提升了距离测量的效率。此外，在第一界线上选取多个测量点，获取到第一界线与第二界线之间在多个位置处的距离值，然后根据多个距离值确定目标距离值，降低了距离测量的运算复杂度及运算量，提高了距离测量的精确性，提升了距离测量的效率。
当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
图1为本申请一些实施例中一种距离测量方法的第一种方法流程图；
图2为本申请一些实施例中一种距离测量方法的一种示意图；
图3为本申请一些实施例中一种距离测量方法的第二种方法流程图；
图4为本申请一些实施例中一种距离测量方法的第三种方法流程图；
图5为本申请一些实施例中一种距离测量方法的第四种方法流程图；
图6为本申请一些实施例中一种距离测量方法的另一种示意图；
图7为本申请一些实施例中一种距离测量方法的第五种方法流程图；
图8为本申请一些实施例中一种距离测量装置的一种结构示意图；
图9为本申请一些实施例中一种电子设备的一种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员基于本申请所获得的所有其他实施例，都属于本发明保护的范围。
为提高距离测量的效率及精确度，本申请实施例提供了一种距离测量方法、电子设备及计算机可读存储介质。下面将结合附图对本申请实施例提供的距离测量方法、电子设备及计算机可读存储介质进行详细说明。
本申请实施例提供的距离测量方法可以用于测量第一边界与第二边界之间的距离。其中，当待测量结构为实物时，第一边界与第二边界可以为该物体的任意不存在交点的两侧，例如，当待测量结构为显示面板时，第一边界及第二边界可以为显示面板的相平行的两侧。进一步的，待测量结构还可以为用于封装液晶显示面板的胶框或填充物等，本申请实施例对此不作具体限定。
此外，本发明实施例所提供的一种距离测量方法可以应用于任意对图片进行处理及显示的电子设备，例如，可以为计算机、手机、终端等，在此不做具体限定。为了描述清楚，后续称为电子设备。
如图1所示，本申请实施例提供的距离测量方法包括以下步骤。
步骤S101，对第一边界与第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应。
本申请实施例中，可通过摄像机等拍摄设备对包含第一边界及第二边界的物体进行拍照得到包含第一界线与第二界线的待测量图像，也可以通过扫描设备对包含第一边界及第二边界的物体进行扫描得到待测量图像，本申请实施例对此不作具体限定。其中，第一界线及第二界线为分别对第一边界及第二边界进行图像化处理后得到的界线，基于此，第一界线及第二界线之间的距离与第一边界及第二边界之间的距离相对应。其中，通过对第一边界及第二边界进行图像化处理，将第一边界与第二边界之间的距离转化为二维的第一界线及第二界线之间的距离，能够降低第一边界及第二边界间距离的测量难度并便于距离的自动化测量。
一些实施例中，第一边界与第二边界为位于液晶面板的一侧边缘的填充物沿宽度方向上的两侧边界，填充物用于封装液晶面板。具体的，填充物可以为封屏胶等，填充物填充于液晶封装面板的各侧的边缘处，以对液晶面板进行封装，降低液晶面板漏液的概率。第一边界及第二边界可以为液晶面板的任一侧边缘处的填充物沿自身宽度方向上的两侧。
步骤S102，在第一界线上选取多个测量点，第一界线的平滑度大于第二界线的平滑度。
本申请实施例中，电子设备可以在与第二界线相比平滑度较高的第一界线上选取多个测量点。其中，平滑度为表示第一界线及第二界线表面的凹凸程度。具体的，如图2所示，第一界线为L1，第二界线为L2，第二界线L2的表面具有多个凸起，第二界线L2的表面的凹凸程度较大，因此第二界线L2的平滑度较小。由于第一界线的平滑度较大，在第一界线上选取多个测量点时，多个测量点之间的沿x轴方向上的坐标值的差值较小，在选取多个测量点时，多个测量点之间的沿x轴方向上的坐标值的影响对选取结果的影响较小，从而降低了由第一界线上选取多个测量点复杂程度。其中，第一界线的平滑度大于第二界线的平滑度，也就是第一边界的表面的平滑度大于第二边界的表面的平滑度。
具体的，电子设备在识别到待测量图像中的第一界线后，由第一界线上选取一个点作为起始测量点，然后获取到起始测量点的坐标值，以起始测量点为起点沿y轴负方向移动预设个坐标值获得起始测量点的下一测量点，重复上述步骤，直至获取目标数量个测量点。其中，电子设备在获取到第一界线上的多个测量点后，可将多个测量点与第二界线之间的距离作为第一界线与第二界线之间的距离。其中，多个测量点的数量及每相邻两个测量点之间的距离均可根据实际需求设定，本申请实施例对此不作具体限定。
一些实施例中，多个测量点之间的距离相等，即多个测量点均匀分布于第一界线上，降低了电子设备在获取多个测量点时的随机性，进一步增加了距离测量的精确性。
步骤S103，以多个测量点为起点垂直于第一界线的方向作多条基准测量线，多条基准测量线的终点位于第二界线上。
本申请实施例中，电子设备在第一界线上选取多个测量点后，以多个测量点为起点沿垂直于第一界线的方向上向第二界线做多条基准测量线，多个基准测量线相互平行。其中，垂直于第一界线的方向可以理解为大致垂直于第一界线的方向，而不是理想状态下的绝对垂直。
在本申请的实施例中，基准测量线可以是水平测量线，一般情况下，获取的待测图像为规则图像，即第一边界和第二边界大致位于竖直方向，因此只需基于测量点进行水平做线即可得到相对于第一界线垂直的基准测量线，由于水平测量线的纵坐标都相等，能够快速获得基准测量线，并保证与第一界线大致垂直，可减少运算复杂度和运算量，提高运算效率。在本申请的另一个实施例中，基准测量线可以是垂直测量线，即待测图像中第一边界和第二边界大致位于水平方向，因此只需基于测量点进行垂直做线即可得到相对于第一界线垂直的基准测量线，同理，由于水平测量线的横坐标都相等，能够快速获得基准测量线，并保证与第一界线大致垂直，可减少运算复杂度和运算量，提高运算效率。在本申请的其他实施例中，待测图像的第一边界和第二边界方向还可以是其他方向，获取大致方向的角度后快速获得垂直与该方向的基准测量线，本申请在此不作限定。基于上述方法，能够快速得到基准测量线，进而提高运算效率。
此外，由于每一基准测量线的起点位于第一界线上，且每一基准测量线的终点位于第二界线上，电子设备在获取到多条基准测量线后，可根据每一基准测量线的长度确定基准测量线对应的测量点处第一界线与第二界线之间的距离。
步骤S104，获取每一基准测量线的长度值，得到多条基准测量线的多个第一长度值。
本申请实施例中，每一基准测量线的第一长度值可以理解为，每一基准测量线的位于第一界线上的起点与位于第二界线上的终点之间的距离。
步骤S105，确定多个第一长度值中最小的长度值，作为目标长度值。
本申请实施例中，电子设备在获取到多个第一长度值后，按照由大到小的距离对多个第一长度值进行排序，将多个第一长度值中的最小长度值作为目标长度值。进一步的，电子设备在获取到目标长度值后，还可将目标长度值标注出来，以便于操作人员观察。
此外，电子设备在获取到多个第一长度值后，也可以计算得到多个第一长度值的平均长度值，将多个第一长度值的平均长度值作为目标长度值，本申请实施例对此不作具体限定。
步骤S106，根据目标长度值确定第一边界与第二边界之间的距离。
本申请实施例中，目标长度值也就是第一界线与第二界线间的距离值。由于第一界线为第一边界图像化处理后得到的界线，且第二界线为第二边界图像化处理后得到的界线，电子设备在获取到第一边界与第二边界之间的距离值后，便可根据第一边界与第二边界之间的距离值确定第一边界与第二边界之间的距离。
以第一边界及第二边界分别为液晶面板的填充物的两侧为例，在获取到第一界线与第二界线之间的距离值后，便可根据第一界线与第二界线之间的距离值确定填充物的两侧之间的距离值，从而确定了填充物的宽度。由于目标长度值为多个第一长度值中最小的长度值，目标长度值对应的距离值也就是第一界线与第二界线之间的最小距离，即获取到的为填充物的最小宽度。在获取到天填充物的最小宽度后，可判断填充物的最小宽度是否小于宽度阈值，若填充物的最小宽度小于宽度阈值，则表示液晶面板的封装不合格。其中，宽度阈值可根据对液晶面板的信赖性测试数据确定。
本申请实施例提供的距离测量方法中，通过将第一边界及第二边界图像化处理，然后确定图像中第一界线与第二界线之间的最短距离，进而根据第一界线与第二界线间的最短距离确定第一边界与第二边界之间的距离，实现了距离测量的自动化，提升了距离测量的效率。此外，在第一界线上选取多个测量点，获取到第一界线与第二界线之间在多个位置处的距离值，然后根据多个距离值确定目标距离值，降低了距离测量的运算复杂度及运算量，提高了距离测量的精确性，提升了距离测量的效率。当本申请实施例提供的距离测量方法应用于工业现场测量时，能够提升工业现场距离测量的效率。
下面将结合图2对本申请实施例提供的距离测量方法进一步说明。如图2所示，具有两条界线L1和L2，由图3可知，第二界线L2上具有多个凸起，第一界线L1的平滑度大于第二界线L2的平滑度。在L1上选取多个测试点P1至Pn，由多个测试点向第一界线L2作基准测量线l1至ln。分别获取l1至ln的多个第一长度值，然后将多个第一长度值中最小的长度值作为目标长度值，并根据目标长度值确定第一界线L1对应的第一边界及第二界线L2对应的第二边界之间的距离。
一些实施例中，多个测量点包括第一界线的起点和终点。以第一界线的起点作为第一个测量点，并以第一界线的终点作为最后一个测量点，基于此，除第一个测量点及最后一个测量点的其他测量点位于第一界线的起点与终点之间。因此电子设备在获取多个测量点时，多个测量点分布于第一界线的各个位置，从而使得由多个测量点为起始点的基准测量线的第一距离包括第一界线各个位置与第二界线之间的距离。基于此，由多个第一距离内选取出的目标距离更具有代表性且更为准确，在保持距离测量的低运算量的基础上进一步提高了距离测量的精确性。
一些实施例中，如图3所示，上述方法还可以包括：
步骤S107，获取第一边界及第二边界与待测量图像的比例关系。
基于此，步骤S106可以细化为以下步骤：
步骤S1061，根据比例关系与目标长度值确定第一边界与第二边界之间的距离。
本申请实施例中，第一边界及第二边界与待测量图像的比例关系在获取待测量图像后根据待测量图像的尺寸确定，然后将比例关系存储于电子设备中，即步骤S107可在步骤S101之后执行。在获取到第一边界及第二边界与待测量图像的比例关系后，便可以根据目标长度值与比例关系确定第一边界与第二边界间的实际距离。一个示例中，若第一边界及第二边界与待测量图像的比例关系为1:100，目标长度值为5cm时，第一边界与第二边界之间的距离即为0.5mm。
其中，确定第一边界及第二边界与待测量图像的比例关系的方法有多种，本申请实施例对此不作具体限定。一个示例中，可计算图片中第一界线的长度与第一边界沿第一界线的延伸方向的长度的比值，将第一界线与第一边界对应的比值作为第一边界及第二边界与待测量图像的比例关系。
一些实施例中，如图4所示，在步骤S103之后，上述距离测量方法还包括以下步骤。
步骤S108，以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线，每一辅助测量线与基准测量线之间的夹角均为第一预设角度。
本申请实施例中，电子设备在以多个测量点为起点朝向第二界线作多条基准测量线后，选取一个或多个测量点，以该测量点为起点在该测量点对应的基准测量线的两侧做边界测量线。其中，边界测量线与基准测量线之间的第一预设角度可根据实际情况设定，本申请实施例对此不作具体限定。
步骤S109，获取每一辅助测量线测的长度值，得到至少两条辅助测量线的第二长度值。
本申请实施例中，由于边界测量线的起点位于第一界线，且边界测量线的终点位于第二界线，边界测量线的第二长度值也可表示第一界线与第二界线之间的距离，进而表示第一边界与第二边界之间的距离。
基于此，步骤S105可以细化为以下步骤：
步骤S1051，确定多个第一长度值及第二长度值中最小的长度值作为目标长度值。
本申请实施例中，第一边界对应的第一界线及第二边界对应的第二界线之均可能存在一定角度的倾斜。当第一界线和第二界线存在倾斜时，由第一界线上的多个测量点为起点作的多条基准测量线均不垂直于第一界线。而由多个测量点为起始点且与第一界线呈任意角度作出的测量线中，垂直于第一界线的测量线的长度值最小。因此，在基准测量线的两侧，以该基准测量线对应的测量点为起始点朝向第二界线作出与基准测量线存在第一预设角度的两条边界测量线后，两条边界测量线的第二长度值可能会小于基准测量线的第一长度值，基于此，将第二长度值与多个第一长度值中的最小长度值作为目标长度值，降低了因第一界线或第二界线的倾斜角度产生误差的可能性，降低了第一界线及第二界线的倾斜对测量结果的影响，进一步增加了距离测量的精确性。
进一步的，为进一步增加距离测量的精确性，可在以多个测量点中的每一测量点为起点，在每一测量点对应的基准测量线的两侧均设置边界测量线。
一些实施例中，如图5所示，在步骤S108后，上述距离测量方法方法还包括以下步骤。
步骤S110，以至少一个测量点为起点在该测量点对应的基准测量线及辅助测量线之间以第二预设角度为间隔作多条中间测量线。
本申请实施例中，电子设备在以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线后，选取一个或多个测量点，以该测量点为起点在该测量点对应的基准测量线及两条边界测量线之间以第二预设角度为间隔做多条中间测量线。进一步的，每相邻两个中间测量线之间的夹角、中间测量线与边界测量线之间的夹角，以及中间测量线与基准测量线之间的夹角均可以为第二预设角度。
步骤S111，获取每一中间测量线测的长度值，得到多条中间测量线的第三长度值。
本申请实施例中，由于中间测量线的起点位于第一界线，且中间测量线的终点位于第二界线，中间测量线的第三长度值也可表示第一界线与第二界线之间的距离，进而表示第一边界与第二边界之间的距离。
基于此，步骤S105可以细化为以下步骤：
步骤S1052，确定多个第一长度值、第二长度值及多个第三长度值中最小的长度值作为目标长度值。
本申请实施例中，当第一界线和第二界线存在倾斜时，以某一测量点为起始点，在该测量点对应的两条边界测量线与基准测量线之间均设置多个中间测量线，每一中间测量线与第一界线的夹角、每一边界测量线与第一界线的夹角及基准测量线与第一界线的夹角均不相等，相应的，多条中间测量线的多个第三长度值、两条边界测量线的第二长度值及基准测量线的第一长度值均不相等，因此将多个第三长度值、多个第二长度值与多个第一长度值中的最小长度值作为目标长度值，进一步降低了因第一界线或第二界线的倾斜角度产生误差的可能性，从而进一步降低了第一界线及第二界线的倾斜对测量结果的影响，进一步增加了距离测量的精确性。
其中，边界测量线与基准测量线之间的第一预设角度，及相邻的中间测量线之间的第二预设角度的取值均可根据实际需求设定，本申请实施例对此不作具体限定。
一些实施例中，第一预设角度为3度至15度，第二预设角度为0.5度至2度。一个示例中，第一预设角度为5度，第二预设角度为1度。进一步的，第一预设角度还可以为8度、10度、12度、15等，第二预设角度还可以为0.5度、1.5度、2度等，本申请实施例对此不作具体限定。由于预设角度的设置，可弥补基准测量线大致垂直于第一界线的准确度不足的问题，得到准确的结果。
下面将结合图6对本申请实施例提供的距离测量方法进一步说明。如图6所示，具有两条界线L1和L2，由图6可知，第二界线L2上具有多个凸起，第一界线L1的平滑度大于第二界线L2的平滑度。在L1上选取多个测试点P1至Pn，由多个测试点向第一界线L2作基准测量线l1至ln。然后仍以多个测试点为起点，向第二界线L2作边界测量线a1至am，其中，每一边界测量线和与其相邻的基准测量线之间可以存第一预设角度α。然后仍以多个测试点为起点，向第二界线L2作中间测量线b1至bo，其中，多条中间测量线位于与其对应的边界测量线及基准测量线之间，每相邻的两条中间测量线之间、中间测量线与基准测量线之间，以及中间测量线与边界测量线之间均可以存在第二预设角度β。然后分别获取l1至ln的多个第一长度值、a1至am的多个第二长度值及b1至bo的多个第三长度值，然后将多个第一长度值、多个第二长度值及多个第三长度值中最小的长度值为目标长度值，并根据目标长度值确定第一界线L1对应的第一边界及第二界线L2对应的第二边界之间的距离。
一些实施例中，如图7所示，在步骤S101之后，上述距离测量方法还包括以下步骤。
步骤S112，对待测量图像进行二值化处理。
本申请实施例中，对待测量图像进行二值化处理，可将待测量图像中处第一界线及第二界线之外的非必要特征去除，使得待测量图像中的第一界线及第二界线更加清晰，降低电子设备的运算量及运算复杂度。此外，第一界线及第二界线更加清晰，使得由第一界线向第二界线作出的多条基准测量线、多条边界测量线及多条中间测量线的起点与终点更加清晰，从而使得获取到的多条基准测量线的第一长度值、多条边界测量线的第二长度值及多条中间测量线第三长度值更加准确，进一步增加了距离测量的精确性。
其中，对待测量图像进行二值化的方式有多种。一个示例中，获取待测量图像中的每一像素点的像素值，设定预设像素值阈值，将多个像素点中像素值大于像素值阈值的像素点设定为白色，且将多个像素点中像素值小于像素值阈值的像素点设定为黑色。其中，预设像素阈值可根据实际情况设定，如根据目标特征包括的像素点的像素值设定等，本申请实施例对此不作具体限定。
本申请实施例的第二方面提供了一种距离测量装置，如图8所示，距离测量装置包括：
第一获取模块801，用于对第一边界与第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应；
选取模块802，用于在第一界线上选取多个测量点，第一界线的平滑度大于第二界线的平滑度；
第一确定模块803，以多个测量点为起点沿基准方向作多条基准测量线，多条基准测量线的终点位于第二界线上；
第二获取模块804，用于获取每一基准测量线的长度值，得到多条基准测量线的多个第一长度值；
第二确定模块805，用于确定多个第一长度值中最小的长度值，作为目标长度值；
第三确定模块806，用于根据目标长度值确定第一边界与第二边界之间的距离。
一些实施例中，距离测量装置还包括：
第三获取模块，用于获取第一边界及第二边界与待测量图像的比例关系；
第三确定模块，具体用于根据比例关系与目标长度值确定第一边界与第二边界之间的距离。
一些实施例中，距离测量装置还包括：
第四确定模块，用于在以多个测量点为起点沿垂直于第一界线的方向作多条基准测量线之后，以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线，每一辅助测量线与基准测量线之间的夹角均为第一预设角度；
第四获取模块，用于获取每一辅助测量线测的长度值，得到至少两条辅助测量线的第二长度值；
第三确定模块，具体用于确定多个第一长度值及第二长度值中最小的长度值作为目标长度值。
一些实施例中，距离测量装置还包括：
第五确定模块，用于在以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线之后，以至少一个测量点为起点在该测量点对应的基准测量线及辅助测量线之间以第二预设角度为间隔作多条中间测量线；
第五获取模块，用于获取每一中间测量线测的长度值，得到多条中间测量线的第三长度值；
第三确定模块，具体用于确定多个第一长度值、第二长度值及多个第三长度值中最小的长度值作为目标长度值。
一些实施例中，距离测量装置还包括处理模块，用于在对第一边界与第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像之后，对待测量图像进行二值化处理。
本发明实施例的第三方面提供了一种电子设备，如图9所示，包括处理器901、通信接口902、存储器903和通信总线904，其中，处理器901，通信接口902，存储器903通过通信总线904完成相互间的通信，
存储器903，用于存放计算机程序；
处理器901，用于执行存储器903上所存放的程序时，实现上述第一方面的实施例中的任一距离测量方法的步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面的实施例的距离测量方法的步骤。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面的实施例的距离测量方法方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、电子设备、计算机可读存储介质及计算机程序而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。
Claims (10)
1.一种距离测量方法，其特征在于，所述方法用于测量第一边界与第二边界之间的距离，所述方法包括：
对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像，其中，第一界线与第一边界相对应，第二界线与第二边界相对应；
在第一界线上选取多个测量点，所述第一界线的平滑度大于所述第二界线的平滑度；
以所述多个测量点为起点沿垂直于所述第一界线的方向作多条基准测量线，所述多条基准测量线的终点位于所述第二界线上；
获取每一基准测量线的长度值，得到所述多条基准测量线的多个第一长度值；
以至少一个所述测量点为起点在所述测量点对应的基准测量线的两侧作两条辅助测量线，每一辅助测量线与所述基准测量线之间的夹角均为第一预设角度；
获取每一辅助测量线测的长度值，得到至少两条所述辅助测量线的第二长度值；
确定所述多个第一长度值及所述第二长度值中最小的长度值作为目标长度值；
根据所述目标长度值确定所述第一边界与所述第二边界之间的距离。
2.根据权利要求1所述的距离测量方法，其特征在于，所述方法还包括：
获取所述第一边界及第二边界与待测量图像的比例关系；
所述根据所述目标长度值确定所述第一边界与所述第二边界之间的距离，包括：
根据所述比例关系与所述目标长度值确定所述第一边界与所述第二边界之间的距离。
3.根据权利要求1所述的方法，其特征在于，在以至少一个测量点为起点在该测量点对应的基准测量线的两侧作两条辅助测量线之后，所述方法还包括：
以至少一个测量点为起点在该测量点对应的基准测量线及辅助测量线之间以第二预设角度为间隔作多条中间测量线；
获取每一中间测量线测的长度值，得到所述多条中间测量线的第三长度值；
所述确定所述多个第一长度值及所述第二长度值中最小的长度值作为目标长度值，包括：
确定所述多个第一长度值、所述第二长度值及所述多个第三长度值中最小的长度值作为目标长度值。
4.根据权利要求3所述的方法，其特征在于，所述第一预设角度为3度至15度，所述第二预设角度为0.5度至2度。
5.根据权利要求1所述的方法，其特征在于，在对所述第一边界与所述第二边界进行图像化处理，获取包含第一界线与第二界线的待测量图像之后，所述方法还包括：
对所述待测量图像进行二值化处理。
6.根据权利要求1所述的方法，其特征在于，所述第一边界与所述第二边界为位于液晶面板的一侧边缘的填充物沿宽度方向上的两侧边界，所述填充物用于封装所述液晶面板。
7.根据权利要求1所述的方法，其特征在于，所述多个测量点包括所述第一界线的起点和终点。
8.根据权利要求1所述的方法，其特征在于，所述多个测量点之间的距离相等。
9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1至8任一项所述的方法步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至8任一项所述的方法步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111124542.6A CN113865488B (zh) | 2021-09-24 | 2021-09-24 | 一种距离测量方法、电子设备及计算机可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111124542.6A CN113865488B (zh) | 2021-09-24 | 2021-09-24 | 一种距离测量方法、电子设备及计算机可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113865488A CN113865488A (zh) | 2021-12-31 |
| CN113865488B true CN113865488B (zh) | 2023-10-27 |
Family
ID=78994004
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111124542.6A Active CN113865488B (zh) | 2021-09-24 | 2021-09-24 | 一种距离测量方法、电子设备及计算机可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113865488B (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001121803A (ja) * | 1999-10-28 | 2001-05-08 | Printing Bureau Ministry Of Finance Japan | 画線寸法測定装置 |
| JP2013181774A (ja) * | 2012-02-29 | 2013-09-12 | Chuo Electronics Co Ltd | 計測装置及びその処理方法 |
| JP2018029154A (ja) * | 2016-08-19 | 2018-02-22 | 住友金属鉱山株式会社 | ウエハの異常を検査する装置及びその検査方法 |
| EP3335002A1 (en) * | 2015-08-10 | 2018-06-20 | WiseTech Global Limited | Volumetric estimation methods, devices,&systems |
| CN109255844A (zh) * | 2017-07-12 | 2019-01-22 | 通用电气公司 | 用于使用视频检查设备测量特征的尺寸的图形叠加层 |
| CN111985322A (zh) * | 2020-07-14 | 2020-11-24 | 西安理工大学 | 一种基于激光雷达的道路环境要素感知方法 |
| CN112686919A (zh) * | 2020-12-29 | 2021-04-20 | 上海闻泰信息技术有限公司 | 物体边界线确定方法、装置、电子设备及存储介质 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102005004321A1 (de) * | 2005-01-31 | 2006-08-10 | Robert Bosch Gmbh | Verfahren zur Vermessung der Länge einer Strecke sowie Vorrichtung zur Durchführung des Verfahrens |
| CN101685000B (zh) * | 2008-09-25 | 2012-05-30 | 鸿富锦精密工业（深圳）有限公司 | 影像边界扫描的计算机系统及方法 |
| US10074179B2 (en) * | 2013-05-07 | 2018-09-11 | Sharp Kabushiki Kaisha | Image measurement device |
| CN105205802B (zh) * | 2015-02-13 | 2017-04-12 | 比亚迪股份有限公司 | 纹线距离的计算方法和装置 |
-
2021
- 2021-09-24 CN CN202111124542.6A patent/CN113865488B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001121803A (ja) * | 1999-10-28 | 2001-05-08 | Printing Bureau Ministry Of Finance Japan | 画線寸法測定装置 |
| JP2013181774A (ja) * | 2012-02-29 | 2013-09-12 | Chuo Electronics Co Ltd | 計測装置及びその処理方法 |
| EP3335002A1 (en) * | 2015-08-10 | 2018-06-20 | WiseTech Global Limited | Volumetric estimation methods, devices,&systems |
| JP2018029154A (ja) * | 2016-08-19 | 2018-02-22 | 住友金属鉱山株式会社 | ウエハの異常を検査する装置及びその検査方法 |
| CN109255844A (zh) * | 2017-07-12 | 2019-01-22 | 通用电气公司 | 用于使用视频检查设备测量特征的尺寸的图形叠加层 |
| CN111985322A (zh) * | 2020-07-14 | 2020-11-24 | 西安理工大学 | 一种基于激光雷达的道路环境要素感知方法 |
| CN112686919A (zh) * | 2020-12-29 | 2021-04-20 | 上海闻泰信息技术有限公司 | 物体边界线确定方法、装置、电子设备及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 吴一全 ; 谢静 ; .基于特征点最小距离拟合的文档图像倾斜检测.光学技术.2009,(01),全文. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113865488A (zh) | 2021-12-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8184848B2 (en) | Liquid level detection method | |
| CN111612757B (zh) | 一种屏幕裂纹的检测方法、装置、设备及存储介质 | |
| CN111539943B (zh) | 基于多相机的锂电池极片堆叠位置测量方法、装置及系统 | |
| EP4411633A1 (en) | Method and device for detecting stability of vision system | |
| JP2008175549A (ja) | 欠陥検出装置および欠陥検出方法 | |
| TW201812255A (zh) | 液面高度檢測系統及其方法 | |
| CN109163888A (zh) | 光学中心测试方法、装置和设备 | |
| CN108924544A (zh) | 摄像头畸变测量方法与测试装置 | |
| CN111311671B (zh) | 一种工件测量方法、装置、电子设备及存储介质 | |
| CN113781392A (zh) | 胶路的检测方法、电子设备及存储介质 | |
| CN114495815A (zh) | 一种微型显示屏的Demura方法、计算设备及存储介质 | |
| CN117218062A (zh) | 一种缺陷检测方法、装置、电子设备和存储介质 | |
| CN113052912A (zh) | 摄像机标定方法和装置 | |
| CN113865488B (zh) | 一种距离测量方法、电子设备及计算机可读存储介质 | |
| CN118258570A (zh) | 映射关系确定方法、挠度测量方法、装置及电子设备 | |
| CN115511718A (zh) | Pcb图像校正方法、装置、终端设备和存储介质 | |
| CN111947607B (zh) | 平面度测量方法、装置、电子设备及存储介质 | |
| CN112465780B (zh) | 绝缘层膜厚异常监控方法及装置 | |
| CN113658345A (zh) | 一种样本标注方法及装置 | |
| CN117830251A (zh) | 缺陷分析方法、缺陷分析装置及电子设备 | |
| CN112504156A (zh) | 一种基于前景网格的结构表面应变测量系统及测量方法 | |
| CN116188599A (zh) | 标定板生成方法、相机标定方法、装置、设备及标定板 | |
| CN115222728A (zh) | 基于视觉技术的屏幕检测方法、装置和计算机设备 | |
| CN109916341B (zh) | 一种产品表面水平倾斜角度的测量方法及系统 | |
| CN116958104B (zh) | 物料表面图像处理方法、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |