CN112164032A - 一种点胶方法、装置、电子设备及存储介质 - Google Patents

一种点胶方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112164032A
CN112164032A CN202010959752.6A CN202010959752A CN112164032A CN 112164032 A CN112164032 A CN 112164032A CN 202010959752 A CN202010959752 A CN 202010959752A CN 112164032 A CN112164032 A CN 112164032A
Authority
CN
China
Prior art keywords
dispensing
image
pixel point
area
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010959752.6A
Other languages
English (en)
Other versions
CN112164032B (zh
Inventor
黄虎
周璐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huaray Technology Co Ltd
Original Assignee
Zhejiang Huaray Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huaray Technology Co Ltd filed Critical Zhejiang Huaray Technology Co Ltd
Priority to CN202010959752.6A priority Critical patent/CN112164032B/zh
Publication of CN112164032A publication Critical patent/CN112164032A/zh
Application granted granted Critical
Publication of CN112164032B publication Critical patent/CN112164032B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05CAPPARATUS FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05C11/00Component parts, details or accessories not specifically provided for in groups B05C1/00 - B05C9/00
    • B05C11/10Storage, supply or control of liquid or other fluent material; Recovery of excess liquid or other fluent material
    • B05C11/1002Means for controlling supply, i.e. flow or pressure, of liquid or other fluent material to the applying apparatus, e.g. valves
    • B05C11/1015Means for controlling supply, i.e. flow or pressure, of liquid or other fluent material to the applying apparatus, e.g. valves responsive to a conditions of ambient medium or target, e.g. humidity, temperature ; responsive to position or movement of the coating head relative to the target
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05CAPPARATUS FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05C5/00Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work
    • B05C5/02Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work the liquid or other fluent material being discharged through an outlet orifice by pressure, e.g. from an outlet device in contact or almost in contact, with the work
    • B05C5/0208Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work the liquid or other fluent material being discharged through an outlet orifice by pressure, e.g. from an outlet device in contact or almost in contact, with the work for applying liquid or other fluent material to separate articles
    • B05C5/0212Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work the liquid or other fluent material being discharged through an outlet orifice by pressure, e.g. from an outlet device in contact or almost in contact, with the work for applying liquid or other fluent material to separate articles only at particular parts of the articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05DPROCESSES FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05D1/00Processes for applying liquids or other fluent materials
    • B05D1/26Processes for applying liquids or other fluent materials performed by applying the liquid or other fluent material from an outlet device in contact with, or almost in contact with, the surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Abstract

本发明公开了一种点胶方法、装置、电子设备及存储介质,所述方法包括:获取镜头模组的第一图像;通过模板匹配算法确定所述第一图像中的每个待点胶区域;确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。本发明实施例中,通过机器视觉定位的方法确定点胶位置,具体的获取镜头模组的第一图像,通过模板匹配算法确定第一图像中的每个待点胶区域,然后确定每个待点胶区域中的目标点胶像素点。进而在每个目标点胶像素点处进行点胶。相较于人工点胶的方式,避免了由于人眼疲劳导致点胶不准确的问题,提高了点胶的准确性。

Description

一种点胶方法、装置、电子设备及存储介质
技术领域
本发明涉及图像处理技术领域,尤其涉及一种点胶方法、装置、电子设备及存储介质。
背景技术
镜头模组通常由镜头、马达、滤光片、图像传感器、印刷电路板PCB板等部件构成。其工作原理是:拍摄画面通过镜头在图像传感器上成像,通过图像传感器,光学图像被转换为电信号,通过模数转换器,电信号被转换为数字信号,再被送到图像信号处理器DSP中进行处理,最终呈现屏幕中所看到的图像。镜头作为相机的关键组成部件,属于高精密组件。在相机组装过程中,需要保证镜头的高精度点胶,避免出现溢胶、点胶不足的情况而影响相机的良率。
现有技术中一般通过人工点胶,存在的问题是人长时间的工作会导致人眼疲劳,人眼疲劳状态下进行点胶会影响点胶的精度,点胶精度不能保证也就增加了相机的不良率。因此,如何实现准确点胶是目前亟待解决的技术问题。
发明内容
本发明实施例提供了一种点胶方法、装置、电子设备及存储介质,用以解决现有技术中点胶不准确的问题。
本发明实施例提供了一种点胶方法,所述方法包括:
获取镜头模组的第一图像;
通过模板匹配算法确定所述第一图像中的每个待点胶区域;
确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
进一步地,所述获取镜头模组的第一图像之后,通过模板匹配算法确定所述第一图像中的每个待点胶区域之前,所述方法还包括:
确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
进一步地,所述通过模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
进一步地,所述通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;
保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;
根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
进一步地,所述确定所述每个待点胶区域中的目标点胶像素点包括:
将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
进一步地,所述确定所述每个待点胶区域中的目标点胶像素点之后,在每个目标点胶像素点处进行点胶之前,所述方法还包括:
对更新后的第一图像进行极化反变换处理,得到第三图像;
所述在每个目标点胶像素点处进行点胶包括:
在所述第三图像中的每个目标点胶像素点处进行点胶。
另一方面,本发明实施例提供了一种点胶装置,所述装置包括:
获取模块,用于获取镜头模组的第一图像;
第一确定模块,用于通过模板匹配算法确定所述第一图像中的每个待点胶区域;
第二确定模块,用于确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
进一步地,所述装置还包括:
更新模块,用于确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
进一步地,所述第一确定模块,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
进一步地,所述第一确定模块,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
进一步地,所述第二确定模块,具体用于确定将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
进一步地,所述装置还包括:
处理模块,用于对更新后的第一图像进行极化反变换处理,得到第三图像;
所述第二确定模块,具体用于在所述第三图像中的每个目标点胶像素点处进行点胶。
再一方面,本发明实施例提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一项所述的方法步骤。
再一方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的方法步骤。
本发明实施例提供了一种点胶方法、装置、电子设备及存储介质,所述方法包括:获取镜头模组的第一图像;通过模板匹配算法确定所述第一图像中的每个待点胶区域;确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
上述的技术方案具有如下优点或有益效果:
本发明实施例中,通过机器视觉定位的方法确定点胶位置,具体的获取镜头模组的第一图像,通过模板匹配算法确定第一图像中的每个待点胶区域,然后确定每个待点胶区域中的目标点胶像素点。进而在每个目标点胶像素点处进行点胶。相较于人工点胶的方式,避免了由于人眼疲劳导致点胶不准确的问题,提高了点胶的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例1提供的点胶过程示意图;
图2为本发明实施例2提供的镜头模组的第一图像示意图;
图3为本发明实施例2提供的镜头模组的第二图像示意图;
图4为本发明实施例6提供的点胶流程图;
图5为本发明实施例6提供的对每个待点胶区域以及每个目标点胶像素点进行调优流程图;
图6为本发明实施例7提供的点胶装置结构示意图;
图7为本发明实施例8提供的电子设备结构示意图。
具体实施方式
下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
实施例1:
图1为本发明实施例提供的点胶过程示意图,该过程包括以下步骤:
S101:获取镜头模组的第一图像。
S102:通过模板匹配算法确定所述第一图像中的每个待点胶区域。
S103:确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
本发明实施例提供的点胶方法应用于电子设备,该电子设备可以是PC、平板电脑等设备。
在本发明实施例中,采用图像采集设备采集包含镜头模组在内的图像,然后将采集到的图像发送至电子设备,电子设备基于模板匹配算法可以确定出图像中镜头模组的第一图像。具体的,电子设备中保存有镜头模组的基准图像,根据该基准图像在图像采集设备采集的包含镜头模组在内的图像中进行模板匹配,从而确定出镜头模组的第一图像。当然,也可以由图像采集设备保存镜头模组的基准图像,基于模板匹配算法确定出图像中镜头模组的第一图像,然后将第一图像发送至电子设备。
电子设备中还保存有点胶区域的基准图像,根据点胶区域的基准图像在第一图像中进行模板匹配,确定出第一图像中的每个待点胶区域。电子设备确定出每个待点胶区域之后,可以确定出每个待点胶区域中的目标点胶像素点,其中,可以将每个待点胶区域的中心像素点作为目标点胶像素点。较佳的,通过模板匹配算法确定第一图像中的每个待点胶区域时,在确定出每个待点胶区域之后,每个待点胶区域的匹配中心也就确定了,可以将每个待点胶区域中的匹配中心像素点作为目标点胶像素点。然后在每个目标点胶像素点处进行点胶。
本发明实施例中,通过机器视觉定位的方法确定点胶位置,具体的获取镜头模组的第一图像,通过模板匹配算法确定第一图像中的每个待点胶区域,然后确定每个待点胶区域中的目标点胶像素点。进而在每个目标点胶像素点处进行点胶。相较于人工点胶的方式,避免了由于人眼疲劳导致点胶不准确的问题,提高了点胶的准确性。
实施例2:
为了使通过模板匹配算法确定所述第一图像中的每个待点胶区域更便捷准确,在上述实施例的基础上,在本发明实施例中,所述获取镜头模组的第一图像之后,通过模板匹配算法确定所述第一图像中的每个待点胶区域之前,所述方法还包括:
确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
电子设备基于模板匹配算法确定出图像中镜头模组的第一图像,第一图像定位出之后,第一图像的中心位置,也就是第一图像的圆心坐标(x,y)也就可以确定出来。考虑到镜头模组的圆形结构,在基于模板匹配算法确定出图像中镜头模组的第一图像时,可以根据形状模板匹配算法确定镜头模组的第一图像,具体的,通过在图像中搜索匹配圆弧边缘特征,完成第一图像的确定。镜头模组的第一图像的半径R为圆心到圆弧的距离。图2中的圆形区域即为镜头模组的第一图像示意图,如图2所示,镜头模组的第一图像包括内环圆弧和外环圆弧,其半径可以是镜头模组的第一图像的半径为圆心到内环圆弧的距离,也可以是镜头模组的第一图像的半径为圆心到外环圆弧的距离。
电子设备确定出第一图像的圆心坐标(x,y)和半径R,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,具体的,通过极化变化处理将圆形的镜头模组变换到矩形,可以理解为将镜头模组的圆形展开。具体公式如下:
正向变换:dst(θ,ρ)=src(x,y);
反向变换:dst(x,y)=src(θ,ρ);
其中:
Figure BDA0002680062500000071
根据圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像如图3所示,将图3更新为第一图像进行后续的通过模板匹配算法确定所述第一图像中的每个待点胶区域的步骤。
图3中的小拱形区域即为每个待点胶区域,通过极化变换处理发现,每个待点胶区域在水平方向依次排列,在图3中通过模板匹配算法确定第一图像中的每个待点胶区域时,仅需保存于图3中的小拱形角度相同的点胶区域的基准图像,由于图3中每个待点胶区域不存在角度的差别,仅是在水平方向依次排开,因此在根据点胶区域的基准图像在第一图像中进行模板匹配,确定出第一图像中的每个待点胶区域时,不需对点胶区域的基准图像进行角度的旋转,因此可以使通过模板匹配算法确定第一图像中的每个待点胶区域更便捷准确,效率也更高。
实施例3:
为了使确定的第一图像中的每个待点胶区域更准确,在上述各实施例的基础上,在本发明实施例中,所述通过模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
NCC(Normalization cross correlation)模板匹配算法,相比较于形状模板匹配算法,NCC模板匹配算法更适用于背景纹理复杂、边缘轮廓不清晰的定位场景。从图3可以看出,待点胶区域形态一致性不是很好,如果使用形状模板匹配算法,很难稳定的实现匹配定位,即使能够实现,准确性也较差。因此在本发明实施例中选择更适用于背景纹理复杂、边缘轮廓不清晰的定位场景的NCC模板匹配算法确定第一图像中的每个待点胶区域,使得确定的待点胶区域更加准确。具体操作时,预先保存一个点胶区域的基准图像作为训练模板图像,用于匹配出第一图像中的每个待点胶区域,或者也可以在第一图像中选取其中一个待点胶区域作为训练模板区域,用于匹配其余的待点胶区域。
实施例4:
为了使确定每个待点胶区域更加准确,在上述各实施例的基础上,在本发明实施例中,所述通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;
保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;
根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域时,会确定出每个待点胶区域的可信度分数,当可信度分数较高时确定成功匹配出待点胶区域。在本发明实施例中,通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数。电子设备中保存有预设的分数阈值,针对每个待点胶区域的可信度分数,判断该可信度分数是否大于预设的分数阈值,如果是,保留该可信度分数的待点胶区域,如果否,滤除该可信度分数的待点胶区域。因为保留的待点胶区域的可信度分数大于预设的分数阈值,可以保证保留的待点胶区域都是准确确定出的待点胶区域。
电子设备确定可信度分数最大的待点胶区域,因为镜头模组中点胶区域的分布间隔是固定且不变的,因此电子设备可以预先保存点胶区域分布间隔,根据可信度分数最大的待点胶区域和点胶区域分布间隔,在水平方向移动该可信度分数最大的待点胶区域,可以确定出第一图像中其余的待点胶区域。具体的,将可信度分数最大的待点胶区域按照点胶区域分布间隔在水平方向进行移动,每次移动后,判断该位置是否存在保留的待点胶区域,如果存在则继续移动,如果不存在,则移动后的可信度分数最大的待点胶区域,即确定为该位置的待点胶区域。
假设待点胶区域有N个,这是预知的数量,NCC模板匹配算法正常会返回N个匹配结果,考虑到异常情况,可能会返回小于N个目标的情况,对返回的匹配结果按照可信度分数从高到低排序,选择可信度分数最高的目标待点胶区域作为参考基准。设置分数阈值T1,对于大于分数阈值T1的待点胶区域进行保留。对于小于等于分数阈值T1的待点胶区域进行滤除,第一图像中其余待点胶区域依据参考基准位置,根据预先保存的点胶区域分布间隔做偏移计算得出。由于是在极化变换图像中做偏移计算,仅做水平x方向偏移,垂直y方向保持不变。
由于在本发明实施例中,通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数之后;根据预设的分数阈值对待点胶区域进行滤除,然后根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定第一图像中其余的待点胶区域,使得确定的每个待点胶区域更加准确。
实施例5:
为了使确定的每个待点胶区域中的目标点胶像素点更加准确,在上述各实施例的基础上,在本发明实施例中,所述确定所述每个待点胶区域中的目标点胶像素点包括:
将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
电子设备在确定出每个待点胶区域之后,每个待点胶区域的匹配中心像素点有可能不在缝隙处,因此,为了使确定的每个待点胶区域中的目标点胶像素点更加准确,需要对每个待点胶区域的匹配中心像素点进行调整。具体的,考虑到缝隙处与非缝隙处的像素点的灰度值差异较大,因此电子设备在确定出每个待点胶区域之后,将每个待点胶区域的匹配中心像素点作为候选点胶像素点,然后针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,则说明该像素点在缝隙处,因此将该候选点胶像素点确定为目标点胶像素点,如果否,则说明该像素点不在缝隙处,此时以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于预设的灰度阈值的像素点作为目标点胶像素点。较佳的,预设邻域可以是包含该候选点胶像素点的竖直方向的邻域。查找时可以按照竖直方向向上进行查找。为了快速找到缝隙处的目标点胶像素点,可以预设查找步长,根据所述查找步长在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
由于在本发明实施例中,将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。使得确定的目标点胶像素点都为缝隙处的像素点,因此确定的目标点胶像素点更准确。
实施例6:
为了便于点胶机器在每个目标点胶像素点处进行点胶,在上述各实施例的基础上,在本发明实施例中,所述确定所述每个待点胶区域中的目标点胶像素点之后,在每个目标点胶像素点处进行点胶之前,所述方法还包括:
对更新后的第一图像进行极化反变换处理,得到第三图像;
所述在每个目标点胶像素点处进行点胶包括:
在所述第三图像中的每个目标点胶像素点处进行点胶。
为了便于点胶机器在每个目标点胶像素点处进行点胶,对每个目标点胶像素点调优之后,对极化变换处理后的图像进行极化反变换处理,极化反变换处理为极化变换处理的逆过程,通过对极化变换处理后的图像进行极化反变换处理,将矩形的镜头模组还原为圆形的镜头模组,从而便于点胶机器根据极化反变换处理后的图像中的每个目标点胶像素点进行点胶。
图4为本发明实施例提供的点胶流程图,包括输入图像,基于形状模板匹配确定镜头模组的第一图像;对第一图像进行极化变换处理,基于NCC模板匹配算法确定极化变换处理后的第一图像中的每个待点胶区域;对每个待点胶区域以及每个目标点胶像素点进行调优;对极化变换处理后的图像进行极化反变换处理,根据极化反变换处理后的图像中的每个目标点胶像素点进行点胶。
图5为本发明实施例提供的对每个待点胶区域以及每个目标点胶像素点进行调优流程图,如图5所示,包括以下步骤:
S201:通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数。
S202:针对每个待点胶区域,判断该待点胶区域的可信度分数是否大于预设的分数阈值,如果是,进行S203,如果否,进行S204。
S203:保留该待点胶区域。
S204:滤除该待点胶区域。
S205:根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
S206:将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点。
S207:针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,进行S208,如果否,进行S209。
S208:将该候选点胶像素点确定为目标点胶像素点。
S209:以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
实施例7:
图6为本发明实施例提供的点胶装置结构示意图,该装置包括:
获取模块61,用于获取镜头模组的第一图像;
第一确定模块62,用于通过模板匹配算法确定所述第一图像中的每个待点胶区域;
第二确定模块63,用于确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
所述装置还包括:
更新模块64,用于确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
所述第一确定模块62,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
所述第一确定模块62,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
所述第二确定模块63,具体用于确定将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
所述装置还包括:
处理模块65,用于对更新后的第一图像进行极化反变换处理,得到第三图像;
所述第二确定模块63,具体用于在所述第三图像中的每个目标点胶像素点处进行点胶。
实施例8:
在上述各实施例的基础上,本发明实施例中还提供了一种电子设备,如图7所示,包括:处理器301、通信接口302、存储器303和通信总线304,其中,处理器301,通信接口302,存储器303通过通信总线304完成相互间的通信;
所述存储器303中存储有计算机程序,当所述程序被所述处理器301执行时,使得所述处理器301执行如下步骤:
获取镜头模组的第一图像;
通过模板匹配算法确定所述第一图像中的每个待点胶区域;
确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
基于同一发明构思,本发明实施例中还提供了一种电子设备,由于上述电子设备解决问题的原理与点胶方法相似,因此上述电子设备的实施可以参见方法的实施,重复之处不再赘述。
本发明实施例提供的电子设备具体可以为桌面计算机、便携式计算机、智能手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)、网络侧设备等。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口302用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括中央处理器、网络处理器(NetworkProcessor,NP)等;还可以是数字信号处理器(Digital Signal Processing,DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
在本发明实施例中处理器执行存储器上所存放的程序时,实现获取镜头模组的第一图像;通过模板匹配算法确定所述第一图像中的每个待点胶区域;确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。本发明实施例中,通过机器视觉定位的方法确定点胶位置,具体的获取镜头模组的第一图像,通过模板匹配算法确定第一图像中的每个待点胶区域,然后确定每个待点胶区域中的目标点胶像素点。进而在每个目标点胶像素点处进行点胶。相较于人工点胶的方式,避免了由于人眼疲劳导致点胶不准确的问题,提高了点胶的准确性。
实施例9:
在上述各实施例的基础上,本发明实施例还提供了一种计算机存储可读存储介质,所述计算机可读存储介质内存储有可由电子设备执行的计算机程序,当所述程序在所述电子设备上运行时,使得所述电子设备执行时实现如下步骤:
获取镜头模组的第一图像;
通过模板匹配算法确定所述第一图像中的每个待点胶区域;
确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
基于同一发明构思,本发明实施例中还提供了一种计算机可读存储介质,由于处理器在执行上述计算机可读存储介质上存储的计算机程序时解决问题的原理与点胶方法相似,因此处理器在执行上述计算机可读存储介质存储的计算机程序的实施可以参见方法的实施,重复之处不再赘述。
上述计算机可读存储介质可以是电子设备中的处理器能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器如软盘、硬盘、磁带、磁光盘(MO)等、光学存储器如CD、DVD、BD、HVD等、以及半导体存储器如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD)等。
在本发明实施例中提供的计算机可读存储介质内存储计算机程序,计算机程序被处理器执行时实现获取镜头模组的第一图像;通过模板匹配算法确定所述第一图像中的每个待点胶区域;确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。本发明实施例中,通过机器视觉定位的方法确定点胶位置,具体的获取镜头模组的第一图像,通过模板匹配算法确定第一图像中的每个待点胶区域,然后确定每个待点胶区域中的目标点胶像素点。进而在每个目标点胶像素点处进行点胶。相较于人工点胶的方式,避免了由于人眼疲劳导致点胶不准确的问题,提高了点胶的准确性。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (14)

1.一种点胶方法,其特征在于,所述方法包括:
获取镜头模组的第一图像;
通过模板匹配算法确定所述第一图像中的每个待点胶区域;
确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
2.如权利要求1所述的方法,其特征在于,所述获取镜头模组的第一图像之后,通过模板匹配算法确定所述第一图像中的每个待点胶区域之前,所述方法还包括:
确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
3.如权利要求2所述的方法,其特征在于,所述通过模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
4.如权利要求3所述的方法,其特征在于,所述通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域包括:
通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;
保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;
根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
5.如权利要求2所述的方法,其特征在于,所述确定所述每个待点胶区域中的目标点胶像素点包括:
将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
6.如权利要求2所述的方法,其特征在于,所述确定所述每个待点胶区域中的目标点胶像素点之后,在每个目标点胶像素点处进行点胶之前,所述方法还包括:
对更新后的第一图像进行极化反变换处理,得到第三图像;
所述在每个目标点胶像素点处进行点胶包括:
在所述第三图像中的每个目标点胶像素点处进行点胶。
7.一种点胶装置,其特征在于,所述装置包括:
获取模块,用于获取镜头模组的第一图像;
第一确定模块,用于通过模板匹配算法确定所述第一图像中的每个待点胶区域;
第二确定模块,用于确定所述每个待点胶区域中的目标点胶像素点,在每个目标点胶像素点处进行点胶。
8.如权利要求7所述的装置,其特征在于,所述装置还包括:
更新模块,用于确定所述第一图像的圆心坐标和半径,根据所述圆心坐标和半径对所述第一图像进行极化变换处理,得到镜头模组的第二图像,采用所述第二图像对所述第一图像进行更新。
9.如权利要求8所述的装置,其特征在于,所述第一确定模块,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域。
10.如权利要求9所述的装置,其特征在于,所述第一确定模块,具体用于通过NCC模板匹配算法确定所述第一图像中的每个待点胶区域及所述每个待点胶区域的可信度分数;保留可信度分数大于预设的分数阈值的待点胶区域,滤除可信度分数不大于所述预设的分数阈值的待点胶区域;根据可信度分数最大的待点胶区域和预先保存的点胶区域分布间隔确定所述第一图像中其余的待点胶区域。
11.如权利要求8所述的装置,其特征在于,所述第二确定模块,具体用于确定将所述每个待点胶区域的匹配中心像素点作为候选点胶像素点,针对每个候选点胶像素点,判断该像素点的灰度值是否小于预设的灰度阈值,如果是,将该候选点胶像素点确定为目标点胶像素点,如果否,以该候选点胶像素点为起点在包含该候选点胶像素点的预设邻域内查找小于所述预设的灰度阈值的像素点作为目标点胶像素点。
12.如权利要求8所述的装置,其特征在于,所述装置还包括:
处理模块,用于对更新后的第一图像进行极化反变换处理,得到第三图像;
所述第二确定模块,具体用于在所述第三图像中的每个目标点胶像素点处进行点胶。
13.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-6任一项所述的方法步骤。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-6任一项所述的方法步骤。
CN202010959752.6A 2020-09-14 2020-09-14 一种点胶方法、装置、电子设备及存储介质 Active CN112164032B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010959752.6A CN112164032B (zh) 2020-09-14 2020-09-14 一种点胶方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010959752.6A CN112164032B (zh) 2020-09-14 2020-09-14 一种点胶方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112164032A true CN112164032A (zh) 2021-01-01
CN112164032B CN112164032B (zh) 2023-12-29

Family

ID=73857938

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010959752.6A Active CN112164032B (zh) 2020-09-14 2020-09-14 一种点胶方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112164032B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112907593A (zh) * 2021-04-17 2021-06-04 湖南健坤激光科技有限公司 一种手机镜片胶体断层位置的识别方法、装置及相关设备
CN113210217A (zh) * 2021-04-26 2021-08-06 深圳市世宗自动化设备有限公司 流水线点胶固化控制方法、装置、设备及其存储介质
CN113304967A (zh) * 2021-04-30 2021-08-27 深圳市世宗自动化设备有限公司 点胶自动补偿增压方法、装置、设备及其存储介质
CN113304966A (zh) * 2021-04-26 2021-08-27 深圳市世宗自动化设备有限公司 动态点胶补偿方法、装置、计算机设备及其存储介质
CN113304971A (zh) * 2021-04-26 2021-08-27 深圳市世宗自动化设备有限公司 3d动态引导点胶补偿方法、装置、设备及其存储介质
CN115388778A (zh) * 2022-10-28 2022-11-25 深圳市元硕自动化科技有限公司 一种计算机屏幕质检控制装置
CN115463807A (zh) * 2022-09-09 2022-12-13 深圳市世宗自动化设备有限公司 缝隙点胶方法及系统
CN116977647A (zh) * 2023-09-22 2023-10-31 深圳市安铂柔印科技有限公司 一种图文点胶控制方法及相关装置

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6229921B1 (en) * 1999-01-06 2001-05-08 National Instruments Corporation Pattern matching system and method with improved template image sampling using low discrepancy sequences
US20050152604A1 (en) * 2004-01-09 2005-07-14 Nucore Technology Inc. Template matching method and target image area extraction apparatus
CN104463195A (zh) * 2014-11-08 2015-03-25 沈阳工业大学 基于模板匹配的印刷体数字识别方法
US20150317037A1 (en) * 2014-05-01 2015-11-05 Fujitsu Limited Image processing device and image processing method
CN106919883A (zh) * 2017-02-28 2017-07-04 浙江华睿科技有限公司 一种快速反应qr码的定位方法及装置
CN107452028A (zh) * 2017-07-28 2017-12-08 浙江华睿科技有限公司 一种确定目标图像位置信息的方法及装置
WO2018068304A1 (zh) * 2016-10-14 2018-04-19 深圳配天智能技术研究院有限公司 一种图像匹配的方法及装置
CN107931012A (zh) * 2017-10-25 2018-04-20 浙江华睿科技有限公司 一种提取点胶路径的方法及点胶系统
CN110248075A (zh) * 2019-07-16 2019-09-17 北京博视智动技术有限公司 图像获取装置、方法及系统和点胶质量检测方法及系统
WO2019237520A1 (zh) * 2018-06-11 2019-12-19 平安科技(深圳)有限公司 一种图像匹配方法、装置、计算机设备及存储介质
WO2020001197A1 (zh) * 2018-06-29 2020-01-02 Oppo广东移动通信有限公司 图像处理方法、电子设备、计算机可读存储介质
CN111462054A (zh) * 2020-03-18 2020-07-28 广州大学 一种点胶质量检测方法

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6229921B1 (en) * 1999-01-06 2001-05-08 National Instruments Corporation Pattern matching system and method with improved template image sampling using low discrepancy sequences
US20050152604A1 (en) * 2004-01-09 2005-07-14 Nucore Technology Inc. Template matching method and target image area extraction apparatus
US20150317037A1 (en) * 2014-05-01 2015-11-05 Fujitsu Limited Image processing device and image processing method
CN104463195A (zh) * 2014-11-08 2015-03-25 沈阳工业大学 基于模板匹配的印刷体数字识别方法
WO2018068304A1 (zh) * 2016-10-14 2018-04-19 深圳配天智能技术研究院有限公司 一种图像匹配的方法及装置
CN106919883A (zh) * 2017-02-28 2017-07-04 浙江华睿科技有限公司 一种快速反应qr码的定位方法及装置
CN107452028A (zh) * 2017-07-28 2017-12-08 浙江华睿科技有限公司 一种确定目标图像位置信息的方法及装置
CN107931012A (zh) * 2017-10-25 2018-04-20 浙江华睿科技有限公司 一种提取点胶路径的方法及点胶系统
WO2019237520A1 (zh) * 2018-06-11 2019-12-19 平安科技(深圳)有限公司 一种图像匹配方法、装置、计算机设备及存储介质
WO2020001197A1 (zh) * 2018-06-29 2020-01-02 Oppo广东移动通信有限公司 图像处理方法、电子设备、计算机可读存储介质
CN110248075A (zh) * 2019-07-16 2019-09-17 北京博视智动技术有限公司 图像获取装置、方法及系统和点胶质量检测方法及系统
CN111462054A (zh) * 2020-03-18 2020-07-28 广州大学 一种点胶质量检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
包晓敏;吴小荣;吕文涛;: "基于IBBS-SIFT算法的PCB板Mark点定位方法", 浙江理工大学学报(自然科学版), no. 03 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112907593A (zh) * 2021-04-17 2021-06-04 湖南健坤激光科技有限公司 一种手机镜片胶体断层位置的识别方法、装置及相关设备
CN112907593B (zh) * 2021-04-17 2023-09-22 湖南健坤激光科技有限公司 一种手机镜片胶体断层位置的识别方法、装置及相关设备
CN113210217A (zh) * 2021-04-26 2021-08-06 深圳市世宗自动化设备有限公司 流水线点胶固化控制方法、装置、设备及其存储介质
CN113304966A (zh) * 2021-04-26 2021-08-27 深圳市世宗自动化设备有限公司 动态点胶补偿方法、装置、计算机设备及其存储介质
CN113304971A (zh) * 2021-04-26 2021-08-27 深圳市世宗自动化设备有限公司 3d动态引导点胶补偿方法、装置、设备及其存储介质
CN113304971B (zh) * 2021-04-26 2022-12-13 深圳市世宗自动化设备有限公司 3d动态引导点胶补偿方法、装置、设备及其存储介质
CN113304967A (zh) * 2021-04-30 2021-08-27 深圳市世宗自动化设备有限公司 点胶自动补偿增压方法、装置、设备及其存储介质
CN115463807A (zh) * 2022-09-09 2022-12-13 深圳市世宗自动化设备有限公司 缝隙点胶方法及系统
CN115388778A (zh) * 2022-10-28 2022-11-25 深圳市元硕自动化科技有限公司 一种计算机屏幕质检控制装置
CN116977647A (zh) * 2023-09-22 2023-10-31 深圳市安铂柔印科技有限公司 一种图文点胶控制方法及相关装置
CN116977647B (zh) * 2023-09-22 2024-01-09 深圳市安铂柔印科技有限公司 一种图文点胶控制方法及相关装置

Also Published As

Publication number Publication date
CN112164032B (zh) 2023-12-29

Similar Documents

Publication Publication Date Title
CN112164032B (zh) 一种点胶方法、装置、电子设备及存储介质
CN109635657B (zh) 目标跟踪方法、装置、设备及存储介质
CN110197232B (zh) 基于边缘方向和梯度特征的图像匹配方法
CN108960211B (zh) 一种多目标人体姿态检测方法以及系统
CN110850872A (zh) 机器人巡检方法、装置、计算机可读存储介质及机器人
US11395100B2 (en) Indoor positioning method, indoor positioning system, indoor positioning apparatus and computer readable medium
CN109561257B (zh) 画面对焦方法、装置、终端及对应的存储介质
CN110335313B (zh) 音频采集设备定位方法及装置、说话人识别方法及系统
CN112085033A (zh) 一种模板匹配方法、装置、电子设备及存储介质
CN112336342B (zh) 手部关键点检测方法、装置及终端设备
CN110909665B (zh) 一种多任务的图像处理方法、装置、电子设备及存储介质
CN112949519B (zh) 目标检测方法、装置、设备及存储介质
CN111915657A (zh) 一种点云配准方法、装置、电子设备及存储介质
CN111433780A (zh) 车道线检测方法、设备、计算机可读存储介质
CN108876806A (zh) 基于大数据分析的目标跟踪方法和系统、存储介质及设备
CN110796135A (zh) 目标的定位方法及装置、计算机设备、计算机存储介质
CN110910445A (zh) 一种物件尺寸检测方法、装置、检测设备及存储介质
CN110366100B (zh) 终端的定位方法、定位装置、可读存储介质及终端设备
CN111866378A (zh) 图像处理方法、装置、设备及介质
CN111177440B (zh) 目标图像的检索方法、装置、计算机设备和存储介质
CN111898408B (zh) 一种快速人脸识别方法及装置
CN110030467B (zh) 一种用于摄像组件的安装的方法、装置及设备
CN112435299B (zh) 一种机载点云辅助的卫星影像立体匹配点云定向方法
CN112212851B (zh) 一种位姿确定方法、装置、存储介质及移动机器人
CN113920083A (zh) 基于图像的尺寸测量方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: C10, No. 1199 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province

Applicant after: Zhejiang Huarui Technology Co.,Ltd.

Address before: C10, No. 1199 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province

Applicant before: ZHEJIANG HUARAY TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant