CN115145562A - 一种视觉检测系统、方法、电子设备及存储介质 - Google Patents
一种视觉检测系统、方法、电子设备及存储介质 Download PDFInfo
- Publication number
- CN115145562A CN115145562A CN202210641513.5A CN202210641513A CN115145562A CN 115145562 A CN115145562 A CN 115145562A CN 202210641513 A CN202210641513 A CN 202210641513A CN 115145562 A CN115145562 A CN 115145562A
- Authority
- CN
- China
- Prior art keywords
- visual processing
- processed
- visual
- image data
- plug
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 332
- 238000001514 detection method Methods 0.000 title claims abstract description 86
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000012545 processing Methods 0.000 claims abstract description 353
- 230000008569 process Effects 0.000 claims abstract description 45
- 238000004891 communication Methods 0.000 claims abstract description 30
- 238000004458 analytical method Methods 0.000 claims abstract description 15
- 238000011179 visual inspection Methods 0.000 claims description 27
- 238000013523 data management Methods 0.000 claims description 10
- 238000007689 inspection Methods 0.000 claims description 9
- 230000000750 progressive effect Effects 0.000 claims description 5
- 238000003672 processing method Methods 0.000 claims description 2
- 238000012423 maintenance Methods 0.000 abstract description 6
- 230000000875 corresponding effect Effects 0.000 description 43
- 238000011161 development Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/36—Software reuse
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种视觉检测系统、方法、电子设备及存储介质,涉及图像检测技术领域,通过接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;并且,根据视觉处理策略,确定视觉处理层级,视觉处理层级与至少一个视觉处理层相对应;根据检测指令,将待处理图像数据输入至少一个视觉处理层进行逐级视觉处理,获取检测结果;在逐级视觉处理的过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取对应检测结果。本系统、方法、电子设备及存储介质的复用性较强,扩展性较强,可维护性较强,减少后期维护成本。
Description
技术领域
本公开涉及图像检测技术领域,尤其涉及一种视觉检测系统、方法、电子设备及存储介质。
背景技术
随着工业视觉检测项目的增多,视觉检测系统也越来越多,不同视觉检测系统搭载不同视觉检测软件流程框架,从而造成以下3个问题:1)系统软件代码复用性较差,重复性代码开发任务大量增加,冗余人力投入也成倍增长;2)系统软件代码扩展性较差,新项目开发周期较长,无法满足算法快速落地需求;3)系统软件代码维护成本较大。
目前,通常采用封装通用函数或者参考代码库的方法,来提高视觉检测系统的复用性。其中,封装通用函数是将常用的软件功能模块封装为通用函数,以此提高代码复用性,然而,此方法提升代码复用性的作用较有限,且不能较好地提升代码的扩展性感和可维护性。而参考代码库的方法则是指整合常用项目场景形成代码库,新的项目基于代码库中代码进行修改,从而提高代码的复用性,然而,该方法需要对代码库进行创建与维护,工作量较大,且扩展性较差,不便于实施,成本较高。
发明内容
本公开提供了一种视觉检测系统、方法、电子设备及存储介质,以至少解决现有技术中存在的上述问题。
根据本公开的第一方面,提供了一种视觉检测系统,所述系统包括:
通信模块,用于接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对所述待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;
视觉处理模块,所述视觉处理模块包括至少一个视觉处理层,所述视觉处理模块用于根据所述视觉处理策略,确定视觉处理层级,所述视觉处理层级与至少一个视觉处理层相对应,当所述视觉处理层级对应的视觉处理层为多个时,多个所述视觉处理层逐层连接;根据所述检测指令,将所述待处理图像数据输入所述至少一个视觉处理层进行逐级视觉处理,获取检测结果;
插件接口模块,所述插件接口模块包括一个或多个插件接口,所述插件接口与所述视觉处理层相互关联;
在逐级视觉处理的过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对所述待处理图像数据进行视觉检测,获取所述检测结果。
在一可实施方式中,所述视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;
并且,根据所述视觉处理需求,对接入所述插件接口的插件进行修改与更新。
在一可实施方式中,所述视觉处理模块根据所述视觉处理策略,确定视觉处理层级的步骤包括:
按照预设的策略解析规则,对所述视觉处理策略进行解析,获取次级过程数量和待处理图像数据数量,所述次级过程数量为所述视觉处理策略中预先设置的对待处理图像数据进行二次处理的节点数量;
根据所述次级过程数量、待处理图像数据数量和预设的层级匹配规则,确定与所述视觉处理策略相对应的视觉处理层级;
所述层级匹配规则的数据表达为:
其中,VisionProcessLayers为视觉处理层级,NumSP为次级过程数量,NumDN为待处理图像数据数量,n为正整数。
在一可实施方式中,所述视觉处理模块根据所述检测指令,将所述待处理图像数据输入所述多个视觉处理层进行逐级视觉处理的步骤包括:
根据所述视觉处理策略,确定数据流向信息,所述数据流向信息用于限定所述待处理图像数据在多个视觉处理层之间的数据流向;所述数据流向信息包括:待处理图像数据编号、以及与所述待处理图像数据编号相对应的视觉处理层的视觉处理线程编号;
根据所述检测指令和所述数据流向信息,将所述待处理图像数据输入所述多个视觉处理层进行逐级视觉处理。
在一可实施方式中,所述系统还包括:
数据管理模块,用于管理操作参数,并且,对所述待处理图像数据进行存储,所述操作参数包括:设置参数和用于查询视觉处理层所关联的插件接口的查询参数;所述数据管理模块分别与通信模块、视觉处理模块和插件接口模块连接。
根据本公开的第二方面,提供了一种视觉检测方法,所述方法包括:
接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对所述待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;
根据所述视觉处理策略,确定视觉处理层级,所述视觉处理层级与至少一个视觉处理层相对应,当所述视觉处理层级对应的视觉处理层为多个时,多个所述视觉处理层逐层连接;
根据所述检测指令,将所述待处理图像数据输入所述至少一个视觉处理层进行逐级视觉处理,获取检测结果;
其中,获取检测结果的步骤包括:在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对所述待处理图像数据进行视觉检测,获取所述检测结果。
在一可实施方式中,所述视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;
并且,根据所述视觉处理需求,对接入所述插件接口的插件进行修改与更新。
在一可实施方式中,所述视觉处理模块根据所述视觉处理策略,确定视觉处理层级的步骤包括:
按照预设的策略解析规则,对所述视觉处理策略进行解析,获取次级过程数量和待处理图像数据数量,所述次级过程数量为所述视觉处理策略中预先设置的对待处理图像数据进行二次处理的节点数量;
根据所述次级过程数量、待处理图像数据数量和预设的层级匹配规则,确定与所述视觉处理策略相对应的视觉处理层级;
所述层级匹配规则的数据表达为:
其中,VisionProcessLayers为视觉处理层级,NumSP为次级过程数量,NumDN为待处理图像数据数量,n为正整数。
根据本公开的第三方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开所述的方法。
根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行本公开所述的方法。
本公开的视觉检测系统、方法、电子设备及存储介质,通过对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;根据所述视觉处理策略,确定视觉处理层级;根据所述检测指令,将所述待处理图像数据输入与视觉处理层级相对应的至少一个视觉处理层进行逐级视觉处理,获取检测结果。并且,在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取该检测结果,从而有效提高了视觉处理框架的通用性。利用上述系统与方法,当视觉处理需求发生变化时,通过修改视觉处理策略和/或插件,即可实现视觉处理框架的复用,避免重复代码开发,减少冗余人力物力,扩展性较强,有效缩短项目开发周期,加速项目落地时间,且可维护性较强,减少后期维护成本,灵活度较高。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
通过参考附图阅读下文的详细描述,本公开示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本公开的若干实施方式,其中:
在附图中,相同或对应的标号表示相同或对应的部分。
图1示出了本公开实施例中视觉检测系统的组成结构示意图;
图2示出了本公开实施例中视觉检测系统中确定视觉处理层级的流程示意图;
图3示出了本公开实施例中视觉检测系统中逐级视觉处理的流程示意图;
图4示出了本公开实施例中视觉检测系统中视觉处理模块的组成结构示意图;
图5示出了本公开实施例中视觉检测方法的流程示意图;
图6示出了本公开实施例中一种电子设备的组成结构示意图。
具体实施方式
为使本公开的目的、特征、优点能够更加的明显和易懂,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而非全部实施例。基于本公开中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
每当一个工业视觉检测项目开启,软件流程逻辑就需重新开发,软件流程框架也越来越多,例如:工业视觉检测领域,不同的工业视觉检测项目,分别对应了不同的视觉检测软件流程框架。这就导致了软件代码的复用性与通用性较差,一旦出现项目变更,就需要重新进行软件开发,开发任务量较大,开发成本较高,时间较长,效率较低,且维护成本较高。因此,本实施例提出一种视觉检测系统、方法、电子设备及存储介质,通过设置通信模块,接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;并设置视觉处理模块,根据视觉处理策略,确定视觉处理层级;根据检测指令,将待处理图像数据输入与视觉处理层级相对应的至少一个视觉处理层进行逐级视觉处理,获取检测结果。在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取该检测结果,从而提高视觉处理框架的通用性与复用性。当视觉处理需求发生变化时,通过修改视觉处理策略和/或插件,即可实现视觉处理框架的复用,避免重复代码开发,减少冗余人力物力,扩展性较强,有效缩短项目开发周期,加速项目落地时间,且可维护性较强,减少后期维护成本,灵活度较高,可实施性较强。
请参考图1,本实施例提供的视觉检测系统,包括:
通信模块,用于接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;该视觉处理策略包含有视觉处理层级与待处理图像在至少一个视觉处理层的数据流向信息;
视觉处理模块,视觉处理模块包括至少一个视觉处理层,视觉处理模块用于根据视觉处理策略,确定视觉处理层级,视觉处理层级与至少一个视觉处理层相对应,当视觉处理层级对应的视觉处理层为多个时,多个视觉处理层逐层连接;根据检测指令,将待处理图像数据输入至少一个视觉处理层进行逐级视觉处理,获取检测结果;可以理解的,至少一个视觉处理层为多个层级的视觉处理层,如:一级视觉处理层、二级视觉处理层和三级视觉处理层等;每个视觉处理层分别包括至少一个视觉处理进程;图1所示的图像数据指待处理图像数据;
插件接口模块,插件接口模块包括一个或多个插件接口,插件接口与视觉处理层相互关联;插件接口接有一个或多个用于进行图像视觉处理的插件;
在逐级视觉处理的过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取检测结果。
具体的,通信模块基于UDP(User Datagram Protocol,用户数据报协议)、TCP(Transmission Control Protocol,传输控制协议)等通信协议以及私有数据封包协议与终端设备进行沟通交流。终端设备可以为上位机、电脑、手机等设备。通过设置通信模块,实现与外部设备的稳定交流与沟通。
通过设置视觉处理模块,对视觉处理策略进行解析,确定相应的视觉处理层级,实现对输入的待处理图像数据的逐级视觉处理,提高视觉处理精确度。
通过设置插件接口模块,能够接入多个视觉检测插件,视觉处理层、插件接口、插件相互关联,在逐级视觉处理过程中,通过调用与当前的视觉处理层相关联的插件接口,利用对应的插件,进行视觉处理,即视觉检测,实现了对待处理图像数据的精确视觉检测,精确度较高。
可知,上述系统的通用性与复用性较强,当视觉检测项目发生变更,即获取的视觉处理需求发生变化时,通信模块、视觉检测模块、插件接口模块均无需更改,通过对待处理数据包中的视觉处理策略进行修改和/或对相应的插件进行修改,即可适应新的视觉处理需求,适用范围较广,提高了系统框架的复用性,结构较清晰,维护较方便。
为了便于对待处理数据包中的视觉处理策略进行修改,在一些实施例中,终端设备中视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;进而将更新后的待处理数据包发送至通信层。
并且,根据视觉处理需求,对接入插件接口的插件进行修改与更新。即当视觉处理需求发生变化时,对应开发相应的插件,对原有插件接口的插件进行修改与更新,以此适应视觉处理需求的变更,实现系统框架的复用,灵活度较高。
在一些实施例中,视觉检测系统还包括:
数据管理模块,用于管理操作参数,并且,对待处理图像数据进行存储,操作参数包括:设置参数和用于查询视觉处理层所关联的插件接口的查询参数;数据管理模块分别与通信模块、视觉处理模块和插件接口模块连接。具体的,设置参数指系统的常规设置参数。视觉处理模块可通过查询数据管理模块中的查询参数,确定相应的插件接口,进而通过数据管理模块调用对应的插件接口,运行相应的插件,进行图像视觉检测或视觉处理。
请参考图2,在一些实施例中,视觉处理模块根据视觉处理策略,确定视觉处理层级的步骤包括:
S201:按照预设的策略解析规则,对视觉处理策略进行解析,获取次级过程数量和待处理图像数据数量,次级过程数量为视觉处理策略中预先设置的对待处理图像数据进行二次处理的节点数量。二次处理指对待处理图像数据进行再次处理。
S202:根据次级过程数量、待处理图像数据数量和预设的层级匹配规则,确定与视觉处理策略相对应的视觉处理层级。
层级匹配规则的数据表达为:
其中,VisionProcessLayers为视觉处理层级,NumSP为次级过程数量,NumDN为待处理图像数据数量,n为正整数。通过设置上述层级匹配规则,能够较好地确定与视觉处理策略相匹配的视觉处理层级,精确度较高,较好地满足视觉处理需求。
请参考图3,在一些实施例中,视觉处理模块根据检测指令,将待处理图像数据输入多个视觉处理层进行逐级视觉处理的步骤包括:
S301:根据视觉处理策略,确定数据流向信息,数据流向信息用于限定待处理图像数据在多个视觉处理层之间的数据流向;数据流向信息包括:待处理图像数据编号、以及与待处理图像数据编号相对应的视觉处理层的视觉处理线程编号。
S302:根据检测指令和数据流向信息,将待处理图像数据输入多个视觉处理层进行逐级视觉处理。
例如:请参考图4,假设接收的待处理数据包中包括:检测指令、视觉处理策略xml、以及4帧待处理图像。那么,根据视觉处理策略xml,确定视觉处理层级与数据流向信息。视觉处理层级为3层。根据数据流向信息,将4帧待处理图像输入3层依次连接的视觉处理层进行逐级视觉处理。数据流向信息如下:4帧待处理图像的待处理图像数据编号分别为0、1、2、3,待处理图像0、对应一级视觉处理线程0、二级视觉处理线程0和三级视觉处理线程0,待处理图像1对应一级视觉处理线程1、二级视觉处理线程1和三级视觉处理线程0,待处理图像2对应一级视觉处理线程2、二级视觉处理线程1和三级视觉处理线程0,待处理图像3对应一级视觉处理线程3、二级视觉处理线程2和三级视觉处理线程0。逐级视觉处理过程中,根据上述数据流向信息,将4帧待处理图像输入3层视觉处理层进行视觉检测。视觉检测的方式为:调用与视觉处理层相关联的插件接口,运行对应的插件,进行视觉检测,获取检测结果。在一些实施例中,逐级视觉处理过程中,均可以通过数据管理模块引用对应的插件进行视觉算法处理,即视觉检测。当项目发生变更,即视觉处理需求发生变化时,通过修改数据管理模块中的配置文件,指定对应插件库中插件的所在目录,实现插件、插件接口、视觉处理层之间的关联。可以理解的,不同的视觉处理层分别对应的不同的视觉处理过程或视觉检测过程,如一级视觉处理层对应图像的灰度处理、亮度处理、对比度处理等,二级视觉处理层对应图像的拼接等,三级视觉处理层对应图像特征提取与识别等,不同视觉处理过程通过设置对应的插件实现。插件的功能与类别可以根据实际情况进行设置,此处不再赘述。
在一些实施例中,线程控制采用即用即创建,用完即销毁策略,从而减小无效线程占用资源造成的浪费。如:当待处理图像0输入一级视觉处理层时,则开启对应的一级视觉处理线程0,当将待处理图像0在一级视觉处理层的处理结果输入二级视觉处理层时,则销毁一级视觉处理线程0,并开启对应的二级视觉处理线程0,实现即用即创建,用完即销毁,减轻运行负担,避免负载过大导致的运行缓慢。
实施例一:
工业视觉检测场景下,需要对多张图像进行视觉检测。通过利用本实施例中的视觉检测系统,能够较好地实现对多张图像精确视觉检测,且当视觉处理需求发生变化时,能够灵活变通,复用性较强,通用性较强。
具体检测过程包括:首先,利用通信模块接收终端设备传输的待处理数据包。根据预设的通信协议解析规则,对待处理数据包进行解析,获取待处理数据包中的检测指令、待处理图像数据和视觉处理策略xml;该视觉处理策略xml包含有视觉处理层级与待处理图像在至少一个视觉处理层的数据流向信息;其次,利用视觉处理模块对视觉处理策略进行解析,确定视觉处理层级;根据检测指令和数据流向信息,将待处理图像数据输入与该视觉处理层级相对应的至少一个视觉处理层进行逐级视觉处理,在逐级视觉处理的过程中,各视觉处理层通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取检测结果,实现工业视觉检测。本系统与方法能够较好地应对多种工业视觉检测场景。当检测项目,即视觉处理需求发生变化时,通过修改终端设备中的视觉处理策略xml和对应的插件,即可实现系统软件框架的复用,降低开发成本,灵活度较强,加快项目落地时间,成本较低,可维护性较强。
实施例二:
当视觉检测项目,即视觉处理需求发生变化时,通过修改终端设备中的视觉处理策略xml和对应的插件,实现系统软件框架的复用,无需修改系统框架中的其他模块,更无需重新开发。有效降低开发成本,灵活度较强,加快项目落地时间,成本较低,可维护性较强。
请参考图5,本实施例还提供一种视觉检测方法,包括:
S501:接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略。
S502:根据视觉处理策略,确定视觉处理层级,视觉处理层级与至少一个视觉处理层相对应,当视觉处理层级对应的视觉处理层为多个时,多个视觉处理层逐层连接。
S503:根据检测指令,将待处理图像数据输入至少一个视觉处理层进行逐级视觉处理,获取检测结果;其中,获取检测结果的步骤包括:在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取检测结果。本方法通过对待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;根据视觉处理策略,确定视觉处理层级;根据检测指令,将待处理图像数据输入与视觉处理层级相对应的至少一个视觉处理层进行逐级视觉处理,获取检测结果。并且,在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对待处理图像数据进行视觉检测,获取该检测结果,有效提高了视觉处理框架的通用性。使得当视觉处理需求发生变化时,通过修改视觉处理策略和/或插件,即可实现视觉处理框架的复用,避免重复代码开发,减少冗余人力物力,扩展性较强,有效缩短项目开发周期,可维护性较强,减少后期维护成本,灵活度较高,可实施性较强,稳定性较强。
在一些实施例中,视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;
并且,根据视觉处理需求,对接入插件接口的插件进行修改与更新。
在一些实施例中,视觉处理模块根据视觉处理策略,确定视觉处理层级的步骤包括:
按照预设的策略解析规则,对视觉处理策略进行解析,获取次级过程数量和待处理图像数据数量,次级过程数量为视觉处理策略中预先设置的对待处理图像数据进行二次处理的节点数量;
根据次级过程数量、待处理图像数据数量和预设的层级匹配规则,确定与视觉处理策略相对应的视觉处理层级;
层级匹配规则的数据表达为:
其中,VisionProcessLayers为视觉处理层级,NumSP为次级过程数量,NumDN为待处理图像数据数量,n为正整数。
在一些实施例中,根据检测指令,将待处理图像数据输入多个视觉处理层进行逐级视觉处理的步骤包括:
根据视觉处理策略,确定数据流向信息,数据流向信息用于限定待处理图像数据在多个视觉处理层之间的数据流向;数据流向信息包括:待处理图像数据编号、以及与待处理图像数据编号相对应的视觉处理层的视觉处理线程编号;
根据检测指令和数据流向信息,将待处理图像数据输入多个视觉处理层进行逐级视觉处理。
根据本公开的实施例,本公开还提供了一种电子设备和一种可读存储介质。
图6示出了可以用来实施本公开的实施例的示例电子设备600的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图6所示,设备600包括计算单元601,其可以根据存储在只读存储器(ROM)602中的计算机程序或者从存储单元608加载到随机访问存储器(RAM)603中的计算机程序,来执行各种适当的动作和处理。在RAM 603中,还可存储设备600操作所需的各种程序和数据。计算单元601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
设备600中的多个部件连接至I/O接口605,包括:输入单元606,例如键盘、鼠标等;输出单元607,例如各种类型的显示器、扬声器等;存储单元608,例如磁盘、光盘等;以及通信单元609,例如网卡、调制解调器、无线通信收发机等。通信单元609允许设备600通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元601可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元601的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元601执行上文所描述的各个方法和处理,例如视觉检测方法。例如,在一些实施例中,视觉检测方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元608。在一些实施例中,计算机程序的部分或者全部可以经由ROM 602和/或通信单元609而被载入和/或安装到设备600上。当计算机程序加载到RAM603并由计算单元601执行时,可以执行上文描述的视觉检测方法的一个或多个步骤。备选地,在其他实施例中,计算单元601可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行视觉检测方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,也可以为分布式系统的服务器,或者是结合了区块链的服务器。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本公开的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
以上所述,仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种视觉检测系统,其特征在于,所述系统包括:
通信模块,用于接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对所述待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;
视觉处理模块,所述视觉处理模块包括至少一个视觉处理层,所述视觉处理模块用于根据所述视觉处理策略,确定视觉处理层级,所述视觉处理层级与至少一个视觉处理层相对应,当所述视觉处理层级对应的视觉处理层为多个时,多个所述视觉处理层逐层连接;根据所述检测指令,将所述待处理图像数据输入所述至少一个视觉处理层进行逐级视觉处理,获取检测结果;
插件接口模块,所述插件接口模块包括一个或多个插件接口,所述插件接口与所述视觉处理层相互关联;
在逐级视觉处理的过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对所述待处理图像数据进行视觉检测,获取所述检测结果。
2.根据权利要求1所述的视觉检测系统,其特征在于,所述视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;
并且,根据所述视觉处理需求,对接入所述插件接口的插件进行修改与更新。
4.根据权利要求1所述的视觉检测系统,其特征在于,所述视觉处理模块根据所述检测指令,将所述待处理图像数据输入所述多个视觉处理层进行逐级视觉处理的步骤包括:
根据所述视觉处理策略,确定数据流向信息,所述数据流向信息用于限定所述待处理图像数据在多个视觉处理层之间的数据流向;所述数据流向信息包括:待处理图像数据编号、以及与所述待处理图像数据编号相对应的视觉处理层的视觉处理线程编号;
根据所述检测指令和所述数据流向信息,将所述待处理图像数据输入所述多个视觉处理层进行逐级视觉处理。
5.根据权利要求1所述的视觉检测系统,其特征在于,所述系统还包括:
数据管理模块,用于管理操作参数,并且,对所述待处理图像数据进行存储,所述操作参数包括:设置参数和用于查询视觉处理层所关联的插件接口的查询参数;所述数据管理模块分别与通信模块、视觉处理模块和插件接口模块连接。
6.一种视觉检测方法,其特征在于,所述方法包括:
接收终端设备传输的待处理数据包,根据预设的通信协议解析规则,对所述待处理数据包进行解析,获取检测指令、待处理图像数据和视觉处理策略;
根据所述视觉处理策略,确定视觉处理层级,所述视觉处理层级与至少一个视觉处理层相对应,当所述视觉处理层级对应的视觉处理层为多个时,多个所述视觉处理层逐层连接;
根据所述检测指令,将所述待处理图像数据输入所述至少一个视觉处理层进行逐级视觉处理,获取检测结果;
其中,获取检测结果的步骤包括:在逐级视觉处理过程中,通过调用与视觉处理层相关联的插件接口,运行对应的插件,对所述待处理图像数据进行视觉检测,获取所述检测结果。
7.根据权利要求6所述的视觉检测方法,其特征在于,所述视觉处理策略的存储格式为xml,当获取的视觉处理需求发生改变时,通过对xml格式的视觉处理策略进行修改与更新,获取更新后的视觉处理策略,并获取更新后的待处理数据包;
并且,根据所述视觉处理需求,对接入所述插件接口的插件进行修改与更新。
9.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求6-8中任一项所述的方法。
10.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,所述计算机指令用于使所述计算机执行根据权利要求6-8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210641513.5A CN115145562A (zh) | 2022-06-07 | 2022-06-07 | 一种视觉检测系统、方法、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210641513.5A CN115145562A (zh) | 2022-06-07 | 2022-06-07 | 一种视觉检测系统、方法、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115145562A true CN115145562A (zh) | 2022-10-04 |
Family
ID=83407970
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210641513.5A Pending CN115145562A (zh) | 2022-06-07 | 2022-06-07 | 一种视觉检测系统、方法、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115145562A (zh) |
-
2022
- 2022-06-07 CN CN202210641513.5A patent/CN115145562A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114816393B (zh) | 信息生成方法、装置、设备以及存储介质 | |
CN115373861B (zh) | Gpu资源调度方法、装置、电子设备及存储介质 | |
CN113641544B (zh) | 用于检测应用状态的方法、装置、设备、介质和产品 | |
CN114445682A (zh) | 训练模型的方法、装置、电子设备、存储介质及产品 | |
CN114461658A (zh) | 名称确定方法、装置、设备、程序产品及存储介质 | |
CN116302218B (zh) | 函数信息的添加方法、装置、设备以及存储介质 | |
CN115328621B (zh) | 基于区块链的事务处理方法、装置、设备及存储介质 | |
CN115145562A (zh) | 一种视觉检测系统、方法、电子设备及存储介质 | |
CN114969444A (zh) | 数据的处理方法、装置、电子设备和存储介质 | |
CN114218313A (zh) | 数据管理方法、装置、电子设备、存储介质及产品 | |
CN114510334A (zh) | 类实例的调用方法、装置、电子设备及自动驾驶车辆 | |
CN111552898A (zh) | 基于Html5的流程图绘制方法、装置、计算机设备及存储介质 | |
CN116561075B (zh) | 动态链接库文件的生成方法、算子的调用方法及装置 | |
US20220222868A1 (en) | Method for processing point cloud data, electronic device and storage medium | |
CN118276975A (zh) | 一种插件管理方法、装置、电子设备及存储介质 | |
CN116414999A (zh) | 基于知识图谱的管理方法、装置、电子设备及存储介质 | |
CN114416194A (zh) | 基于ImageView聚合功能组件的图片加载方法及装置 | |
CN115964024A (zh) | 一种组件处理方法、调用方法、装置、设备及存储介质 | |
CN117591145A (zh) | 接口文档的更新方法及装置、电子设备和存储介质 | |
CN117632545A (zh) | 业务系统的数据共享方法、装置及电子设备 | |
CN117270862A (zh) | 基于动态编译的软件可插拔方法、装置、设备和介质 | |
CN117251419A (zh) | 一种文件监测方法、装置、电子设备及存储介质 | |
CN117931195A (zh) | 数据字典的处理方法、装置、电子设备及存储介质 | |
CN115203083A (zh) | 一种信息处理方法、装置及电子设备 | |
CN116382699A (zh) | 车辆标定工程中映射文件的处理方法、装置、设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |