CN115914855A - 一种图像处理方法及相关装置 - Google Patents

一种图像处理方法及相关装置 Download PDF

Info

Publication number
CN115914855A
CN115914855A CN202110938036.4A CN202110938036A CN115914855A CN 115914855 A CN115914855 A CN 115914855A CN 202110938036 A CN202110938036 A CN 202110938036A CN 115914855 A CN115914855 A CN 115914855A
Authority
CN
China
Prior art keywords
image
row
line
target
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110938036.4A
Other languages
English (en)
Inventor
修浩然
王嘉伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Sineva Intelligent Machine Co Ltd
Original Assignee
Hefei Sineva Intelligent Machine Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Sineva Intelligent Machine Co Ltd filed Critical Hefei Sineva Intelligent Machine Co Ltd
Priority to CN202110938036.4A priority Critical patent/CN115914855A/zh
Publication of CN115914855A publication Critical patent/CN115914855A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Image Processing (AREA)

Abstract

本申请实施例提供了一种图像处理方法及相关装置,本申请实施例通过彩色线扫相机获取待检测目标的原始图像,该原始图像是拜耳格式的彩色线扫图像,包括明场数据和暗场数据。基于拜耳阵列中像素点RGB值的排布规律,将原始图像转化为宽度、高度均相同的目标图像,以使该目标图像中每行像素点均包含RG值或GB值。进一步的,通过将目标图像中每相邻两行图像数据组成行数对,以此构建行数对集合后,通过对该行数对集合进行提取即可得到彩色的明场图像和暗场图像。以此降低因黑白线扫图像所能呈现的信息量有限而导致无法对产品细微的颜色缺陷进行有效检测的情况。

Description

一种图像处理方法及相关装置
技术领域
本发明涉及图像处理领域,特别涉及一种图像处理方法及相关装置。
背景技术
随着工业自动化进程的加剧,机器视觉技术已经成为工业生产过程中质检的重要选择。工业检测中,相关人员通过控制黑白线扫相机在多路光源下对待检测目标进行图像采集,并基于通道分离算法将线扫图像分成与光源数量对应的不同光路下的图像,通过不同光路图像中待检测目标的图像数据来确定待检测目标的质量。由于现有技术中仅支持对黑白线扫相机的线扫图像进行通道分离,然而黑白线扫图像所能呈现的信息量有限,针对产品上细微的颜色缺陷无法进行有效检测。
发明内容
本申请实施例提供一种图像处理方法及相关装置,通过彩色线扫相机对待检测目标进行检测,并针对彩色线扫图像采用通道分离算法获取待检测目标的明场图像和暗场图像,以此降低因黑白线扫图像所能呈现的信息量有限而导致无法对产品细微的颜色缺陷进行有效检测的情况。
第一方面,本申请实施例提供了一种图像处理方法,所述方法包括:
获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据;
基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一所述行数对中的图像数据均不相同。
本申请实施例通过彩色线扫相机获取待检测目标的原始图像,该原始图像是拜耳格式的彩色线扫图像,包括明场数据和暗场数据。基于拜耳阵列中像素点RGB值的排布规律,将原始图像转化为宽度、高度均相同的目标图像,以使该目标图像中每行像素点均包含RG值或GB值。进一步的,通过将目标图像中每相邻两行图像数据组成行数对,以此构建行数对集合后,通过对该行数对集合进行提取即可得到待检测目标对应的彩色的明场图像和暗场图像。
在一些可能的实施例中,所述图像数据包括每一像素点的行列坐标和RGB值,所述基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,包括:
对所述图像数据在所述原始图像中的排列方式进行重组,以使重组后的图像宽度为所述原始图像的二倍,长度为所述原始图像的一半;
构建所述目标图像的图像内存,基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存;其中,所述预设参数是基于所述拜耳阵列中像素点RGB值的排布规律确定的。
本申请实施例通过对原始图像的图像数据的排布方式进行重组,将原本处于相邻两行的明场/暗场数据排布到一行。基于拜耳阵列中像素点RGB值的排布规律确定预设参数,根据重组后图像中每一像素点的行列坐标与预设参数的模除结果确定各像素点在目标图像的图像内存中的存储位置,以使目标图像中每行像素点均包含RG值或GB值。
在一些可能的实施例中,所述对所述图像数据在所述原始图像中的排列方式进行重组,包括:
剔除所述图像数据中奇数行或偶数行对应的截断标志,所述截断标志用于确定所述原始图像的宽度。
本申请实施例通过剔除奇数行或偶数行后面的截断标志即可将原始图像中相邻两行像素点扩充到一行中排布。
在一些可能的实施例中,所述基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存,包括:
针对所述每一所述像素点,根据所述像素点列坐标与所述预设参数的模除结果确定所述像素点在所述图像内存的对应行列位置。
本申请实施例基于拜耳阵列的排布规律确定预设参数,通过对目标图像中各像素点列坐标与预设参数的模除结果确定该像素点在图像内存中的存储位置,以使目标图像中每行像素点均包含RG值或GB值。
在一些可能的实施例中,所述针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,包括:
获取所述目标图像的图像数据,所述图像数据包括每一像素点的行列坐标和RGB值;
将所述图像数据中每相邻两行的像素点组成所述行数对,并根据所述行数对中像素点的行坐标确定所述行数对的排列序号,所述排列序号表征所述行数对在所述行数对集合中的排列顺序;
基于所述行数对和所述排列序号确定所述行数对集合。
本申请实施例将目标图像中相邻两行的像素点组成行数对,并基于行数对中像素点的行坐标对行数对标注序号,根据序号的大小确定行数对在行数对集合中的排列顺序。
在一些可能的实施例中,基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像,包括:
构建第一图像内存和第二图像内存,所述第一图像内存和所述第二图像内存的宽度所述原始图像相同,高度为所述原始图像的一半;
根据所述行数对集合中每一行数对的排列序号,将奇数排列序号的行数对存储到所述第一图像内存,生成第一图像;并将偶数排列序号的行数对存储到所述第二图像内存,生成第二图像;其中,若所述第一图像为所述明场图像则所述第二图像为所述暗场图像,若所述第一图像为所述暗场图像则所述第二图像为所述明场图像。
本申请实施例分别构建第一图像内存和第二图像内存,两张图像内存的宽度均与原始图像相同,高度均为原始图像的一半。通过分别将行数对集合中奇数排列序号的行数对存储到第一图像内存中,将偶数排列序号的行数对存储到第二图像内存中即可得到待检测目标对应的彩色明场图像和暗场图像。
在一些可能的实施例中,所述基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像之后,所述方法还包括:
采用插值算法分别对所述明场图像和所述暗场图像进行格式转化。
本申请实施例中基于原始图像得到的明场图像和暗场图像的图像格式与原始图像相同,均为拜耳格式。由于拜耳传感器的数据量比RGB传感器的数据量要小,因此需要对明场图像和暗场图像进行插值处理,以得到色彩准确的彩色图像。
第二方面,本申请实施例提供了一种图像处理装置,所述装置包括:
图像数据获取模块,被配置为执行获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据;
目标图像获取模块,被配置为执行基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
图像提取模块,被配置为执行针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一所述行数对中的图像数据均不相同。
在一些可能的实施例中,执行所述图像数据包括每一像素点的行列坐标和RGB值,所述基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,所述目标图像获取模块被配置为:
对所述图像数据在所述原始图像中的排列方式进行重组,以使重组后的图像宽度为所述原始图像的二倍,长度为所述原始图像的一半;
构建所述目标图像的图像内存,基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存;其中,所述预设参数是基于所述拜耳阵列中像素点RGB值的排布规律确定的。
在一些可能的实施例中,执行所述对所述图像数据在所述原始图像中的排列方式进行重组,所述目标图像获取模块被配置为:
剔除所述图像数据中奇数行或偶数行对应的截断标志,所述截断标志用于确定所述原始图像的宽度。
在一些可能的实施例中,执行所述基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存,所述目标图像获取模块被配置为:
针对所述每一所述像素点,根据所述像素点列坐标与所述预设参数的模除结果确定所述像素点在所述图像内存的对应行列位置。
在一些可能的实施例中,执行所述针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,所述图像提取模块被配置为:
获取所述目标图像的图像数据,所述图像数据包括每一像素点的行列坐标和RGB值;
将所述图像数据中每相邻两行的像素点组成所述行数对,并根据所述行数对中像素点的行坐标确定所述行数对的排列序号,所述排列序号表征所述行数对在所述行数对集合中的排列顺序;
基于所述行数对和所述排列序号确定所述行数对集合。
在一些可能的实施例中,执行基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像,所述图像提取模块被配置为:
构建第一图像内存和第二图像内存,所述第一图像内存和所述第二图像内存的宽度所述原始图像相同,高度为所述原始图像的一半;
根据所述行数对集合中每一行数对的排列序号,将奇数排列序号的行数对存储到所述第一图像内存,生成第一图像;并将偶数排列序号的行数对存储到所述第二图像内存,生成第二图像;其中,若所述第一图像为所述明场图像则所述第二图像为所述暗场图像,若所述第一图像为所述暗场图像则所述第二图像为所述明场图像。
在一些可能的实施例中,执行所述基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像之后,所述图像提取模块还被配置为:
采用插值算法分别对所述明场图像和所述暗场图像进行格式转化。
第三方面,本申请实施例还提供了一种电子设备,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如本申请第一方面中提供的任一方法。
第四方面,本申请实施例还提供了一种计算机可读存储介质,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行如本申请第一方面中提供的任一方法。
本申请的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍,显而易见地,下面所介绍的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例示出的产品颜色缺陷示意图;
图2a为本申请实施例示出的应用环境示意图;
图2b为本申请实施例示出的光源触发时序示意图;
图3a为本申请实施例示出的图像处理方法整体流程图;
图3b为本申请实施例示出的拜耳阵列示意图;
图3c为本申请实施例示出的原始图像的像素点排布示意图;
图3d为本申请实施例示出的重组后图像的像素点排布示意图;
图3e为本申请实施例示出的截断标志使用示意图;
图3f为本申请实施例示出的将图像数据存储到目标图像的过程示意图;
图3g为本申请实施例示出的第一图像内存和第二图像内存示意图;
图3h为本申请实施例示出的对第一图像和第二图像进行插值示意图;
图4为本申请实施例示出的图像处理装置400的框图;
图5为本申请实施例示出的电子设备示意图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清楚、详尽地描述。在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
在本申请实施例的描述中,除非另有说明,术语“多个”是指两个或两个以上,其它量词与之类似应当理解,此处所描述的优选实施例仅用于说明和解释本申请,并不用于限定本申请,并且在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
为进一步说明本申请实施例提供的技术方案,下面结合附图以及具体实施方式对此进行详细的说明。虽然本申请实施例提供了如下述实施例或附图所示的方法操作步骤,但基于常规或者无需创造性的劳动在方法中可以包括更多或者更少的操作步骤。在逻辑上不存在必要因果关系的步骤中,这些步骤的执行顺序不限于本申请实施例提供的执行顺序。在实际的处理过程中或者控制设备执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行。
线扫相机对工业产品进行检测是通过对待检测目标在多光路下的图像进行检测,来确定产品质量。若产品存在颜色缺陷可能表征该产品存在质量隐患,例如图1左侧示出的焊盘氧化以及图1右侧示出的玻璃制品丝印异色问题。相关技术中仅支持对黑白线扫相机的线扫图像进行通道分离,故多采用黑白线扫相机进行工业检测。通道分离即为从线扫图像中分离出待检测目标在多光路下的图像。由于黑白线扫相机所采集的线扫图像是黑白的,所能呈现的信息量有限。针对产品上细微的颜色缺陷无法进行有效检测。
为解决上述问题,本申请的发明构思为:通过彩色线扫相机获取待检测目标的原始图像,该原始图像是拜耳格式的彩色线扫图像,包括明场数据和暗场数据。基于拜耳阵列中像素点RGB值的排布规律,将原始图像转化为宽度、高度均相同的目标图像,以使该目标图像中每行像素点均包含RG值或GB值。进一步的,通过将目标图像中每相邻两行图像数据组成行数对,以此构建行数对集合后,通过对该行数对集合进行提取即可得到彩色的明场图像和暗场图像。以此降低因黑白线扫图像所能呈现的信息量有限而导致无法对产品细微的颜色缺陷进行有效检测的情况。
下面结合附图对本申请实施例提供的一种图像处理方法及相关装置进行详细说明。
参见图2a,为根据本申请一个实施例的应用环境的示意图。如图2a所示,该应用环境中例如可以包括线扫相机10、光源切换系统20、滚轮传送平台30以及待检测目标40。其中,光源切换系统20可控制光源A和光源B的点亮和熄灭。
采用线扫相机对待检测目标进行工业质检时,首先在滚轮传送平台30上摆放待检测目标40。并调整线扫相机10的位置,以使线扫相机10的CCD(Charge-coupled Device,电荷耦合元件)方向与滚轮传送平台30的传送方向垂直。沿滚轮传送平台30的传送方向,在线扫相机10的前后位置分别放置光源A和光源B,并调整光源A和光源B的角度,以使两路光源的光路位于线扫相机10的正下方。
进一步的,将线扫相机10的触发方式设置为内触发,并将线扫相机10的触发信号接到光源切换系统20的触发信号上,以使光源系统20能够基于线扫相机10的扫描次数控制光源A和光源B的状态。通过匀速启用滚动传送平台20,使线扫相机10对待检测目标40进行图像采集。其中,内触发即为通过软件设定来控制相机采集图像的帧率,由此可设置相机在触发扫描的时刻,光源切换系统20同步控制光源的点亮。
在一些可能的实施例中,采用通道分离算法将待检测目标40的线扫图像分离成光路A下待检测目标的第一图像和光路B下待检测目标40的第二图像。
光源切换系统的触发逻辑为线扫相机10奇数次触发扫描时,控制光源A点亮且光源B熄灭。偶数次触发扫描时,控制光源A熄灭且光源B点亮。具体实施可如图2b所示,线扫相机每偶数次电信号的扫描触发会同步触发光源A的点亮,奇数次电信号的扫描触发会同步触发光源B的点亮。
需要说明的是,上述图2a所示的结构仅是一种示例,并非本申请实施例对此结构进行限定。
本申请实施例基于采用拜耳传感器的彩色线扫相机对待检测目标进行图像采集,以获取待检测目标的原始图像。并基于拜耳阵列中像素点RGB值的排布规律设置对应的图像处理方法以实现通道分离,用于从原始图像中提取出不同光路下,待检测目标的彩色图像。
具体实施流程可参考图2a部分,工业检测过程中需通过微调光源A与光源B的角度,使光源A光路通过待检测目标的镜面反射能够直接进入线扫相机,以形成明场图像。相应的,使光源B光路通过待检测目标的镜面反射不能够进入线扫相机,以形成暗场图像。当匀速启动滚轮传送平台,使彩色线扫相机对待检测目标进行图像采集后,针对所采集的线扫图像可采用本申请实施例提供的图像处理方法进行通道分离,以实现从彩色线扫相机扫描到的原始图像中,提取出待检测目标的明场图像和暗场图像。
下面结合附图对本申请实施例中图像处理方法进行详细说明,具体如图3a所示,包括以下步骤:
步骤301:获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据。
原始图像即为拜耳传感器的彩色线扫相机对待检测目标所采集的线扫图像。原始图像是由彩色线扫相机采集多通道的原始数据流得到的,故而该原始图像中包含了待检测目标的明场图像和暗场图像。图像数据即为图像内所包含的各像素点数据,例如像素点的行列坐标、RGB值等信息。以明场和暗场角度划分,图像数据中属于明场图像的像素点数据即为明场数据,属于暗场图像的像素点数据即为暗场数据。
步骤302:基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
图像数据中包含有原始图像内每一像素点的行列坐标以及每一像素点的RGB值,其中R表示红色、G表示绿色、B表示蓝色。拜耳阵列是实现传感器拍摄彩色图像的主要技术,通过模拟人眼对色彩的敏感程度将灰度信息转换成彩色信息,以形成彩色图像。拜耳阵列是一个4×4矩阵,可如图3b所示,由4个B、8个G和4个R组成。该阵列中一排像素点均为B或G,相邻排像素点均为G或R。拜耳阵列通过将灰度图形以2×2矩阵进行9次运算转换为彩色图像。
本申请实施例意在将原始图像中的像素点排列顺序进行重组并抽取,以形成符合拜耳阵列的像素点排布。
下面以彩色线扫相机奇数行扫描为待检测目标的明场图像,偶数行扫描为待检测目标的暗场图像为例进行说明,即原始图像中的像素点排布可如图3c所示,每相邻两行的像素点均属于不同光路对应图像,例如图3c中第0、1行为暗场图像像素点,第2、3行为明场图像像素点。应理解的是,线扫相机奇数行和偶数行对应的光路是由相关人员设置的,本申请对此不作限定。
执行步骤302时,首先需对图像数据在原始图像中的排列方式进行重组,以使重组后的图像宽度为原始图像的二倍,长度为原始图像的一半。例如将4×4原始图像进行重组,重组后图像应为8×2,重组后图像中像素点的排布可如图3d所示,由此将原本每相邻两行中像素点对应光路不同更新为每行内各像素点对应光路相同,且相邻行对应光路不同。
实施时,可通过剔除图像数据中奇数行或偶数行对应的截断标志,来实现对原始图像的重组。具体如图3e所示,截断标志是用于确定原始图像的宽度的标记,相机中传输的数据流是一维的,通过向一定量的数据流后添加截断标记即可对一维数据流进行分行。进而通过对原始图像中奇数行或偶数行后的截断标记进行剔除,即可将相邻两行合并为一行。
进一步的,构建目标图像的图像内存,基于每一像素点的行列坐标与预设参数的模除结果,将像素点存储到图像内存。其中,预设参数是基于拜耳阵列中像素点RGB值的排布规律确定的,目的在于将像素点存储到该图像内存中生成目标图像后,目标图像中像素点的排列规律符合拜耳阵列。
实施时,针对每一像素点,根据像素点列坐标与预设参数的模除结果确定像素点在图像内存的对应行列位置。具体的,由于拜耳阵列将灰度图形转换为彩色图片时会以2×2矩阵进行运算。故此可设置预设参数值为4。以图像数据中,第0行中第N个像素点为例,若N%4(即,N以4为模的结果)结果为0,则将该像素点存储到该图像内存中的第0行第“N/2”的位置。若N%4的结果为1,则将该像素点存储到该图像内存中的第0行第“(N+1)/2”的位置。若N%4的结果为2,则将该像素点存储到该图像内存中的第1行第“N/2-1”的位置。若N%4的结果为3,则将该像素点存储到该图像内存中的第1行第“(N-1)/2”的位置。由此,可使图像数据中第M行操作方式对应新开辟图像内存中的第“M*2”行和第“M*2+1”行。
为便于理解上述判断流程,可如图3f所示,例如原始图像中前两行为明场图像的像素点,第一行的像素点为“R1、G1、B1、G2、R2、G3、B2、G4”,第二行的像素点为“R3、G5、B3、G6、R4、G7、B4、G8”。则重排后第一行的像素点应为“R1、G1、B1、G1、G2、R2、G3、B2、G4、R3、G5、B3、G6、R4、G7、B4、G8”。通过上述对像素点行列坐标的判断,确定该第一行中每一像素点在目标图像中的位置。目标图像中第一行存储的像素点应为“R1、G1、R2、G3、R3、G5、R4、G7”。第二行存储的像素点应为“G2、B1、G4、B2、G6、B3、G8、B4”。由此,目标图像中从首行中像素点均包含R或G值起,每相邻两行的像素点均为RG和GB交替。由此目标图像中,每相邻两行像素点所属光路相同,且服从拜耳阵列的排布方式。
步骤303:针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一行数对中的图像数据均不相同。
由于前文已提及,目标图像中,每相邻两行像素点所属光路相同,且服从拜耳阵列的排布方式。故此,通过将相邻两行组成行数对的方式构建行数对集合,即可根据该行数对集合确定原始图像对应的明场图像和暗场图像。
构建行数对集合时,可通过获取目标图像的图像数据,将图像数据中每相邻两行的像素点组成行数对,并根据行数对中像素点的行坐标确定行数对的排列序号。该排列序号表征行数对在行数对集合中的排列顺序,可基于行数对和排列序号确定行数对集合。
实施时可选取行数对中最小行坐标作为该行数对的排列序号。具体的,例如目标图像中第0行和第1行组成第一行数对,第2行和第3行组成第二行数对,由于第一行数对的最小行坐标为0,第二行数对的最小行坐标为1。则可设置第一行数对的排列序号为1,第二行数对的排列序号为2。
进一步的,如图3g所示,通过构建第一图像内存和第二图像内存,其中。第一图像内存和第二图像内存的宽度原始图像相同,高度为原始图像的一半。根据行数对集合中每一行数对的排列序号,将奇数排列序号的行数对存储到第一图像内存,生成第一图像;并将偶数排列序号的行数对存储到第二图像内存,生成第二图像。行数对集合中各奇数排列序号的行数对均为相同光路对应像素点,各偶数排列序号的行数对均为相同光路对应像素点,且各奇数排列序号的行数对与各偶数排列序号的行数对所属光路不同。以彩色线扫相机首先获取明场图像像素点为例,则第一图像应为待检测目标的明场图像,第二图像即为暗场图像。
本申请实施例中基于原始图像得到的明场图像和暗场图像的图像格式与原始图像相同,均为拜耳格式。由于拜耳传感器的数据量比RGB传感器的数据量要小,因此需要对明场图像和暗场图像进行插值处理,以得到色彩准确的彩色图像。具体如图3h所示,实施时,可采用插值算法分别对明场图像和暗场图像进行格式转化,将明场图像和暗场图像由拜耳格式转换为BGR格式。
通过上述流程,本申请实施例针对拜耳格式的线扫图像进行图像处理,以获取该线扫图像中对应不同光路下待检测目标的彩色图像,进而降低因黑白线扫图像所能呈现的信息量有限而导致无法对产品细微的颜色缺陷进行有效检测的情况。
基于相同的发明构思,本申请实施例还提供了一种图像处理装置400,具体如图4所示,包括:
图像数据获取模块401,被配置为执行获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据;
目标图像获取模块402,被配置为执行基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
图像提取模块403,被配置为执行针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一所述行数对中的图像数据均不相同。
在一些可能的实施例中,执行所述图像数据包括每一像素点的行列坐标和RGB值,所述基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,所述目标图像获取模块402被配置为:
对所述图像数据在所述原始图像中的排列方式进行重组,以使重组后的图像宽度为所述原始图像的二倍,长度为所述原始图像的一半;
构建所述目标图像的图像内存,基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存;其中,所述预设参数是基于所述拜耳阵列中像素点RGB值的排布规律确定的。
在一些可能的实施例中,执行所述对所述图像数据在所述原始图像中的排列方式进行重组,所述目标图像获取模块402被配置为:
剔除所述图像数据中奇数行或偶数行对应的截断标志,所述截断标志用于确定所述原始图像的宽度。
在一些可能的实施例中,执行所述基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存,所述目标图像获取模块402被配置为:
针对所述每一所述像素点,根据所述像素点列坐标与所述预设参数的模除结果确定所述像素点在所述图像内存的对应行列位置。
在一些可能的实施例中,执行所述针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,所述图像提取模块403被配置为:
获取所述目标图像的图像数据,所述图像数据包括每一像素点的行列坐标和RGB值;
将所述图像数据中每相邻两行的像素点组成所述行数对,并根据所述行数对中像素点的行坐标确定所述行数对的排列序号,所述排列序号表征所述行数对在所述行数对集合中的排列顺序;
基于所述行数对和所述排列序号确定所述行数对集合。
在一些可能的实施例中,执行基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像,所述图像提取模块403被配置为:
构建第一图像内存和第二图像内存,所述第一图像内存和所述第二图像内存的宽度所述原始图像相同,高度为所述原始图像的一半;
根据所述行数对集合中每一行数对的排列序号,将奇数排列序号的行数对存储到所述第一图像内存,生成第一图像;并将偶数排列序号的行数对存储到所述第二图像内存,生成第二图像;其中,若所述第一图像为所述明场图像则所述第二图像为所述暗场图像,若所述第一图像为所述暗场图像则所述第二图像为所述明场图像。
在一些可能的实施例中,执行所述基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像之后,所述图像提取模块403还被配置为:
采用插值算法分别对所述明场图像和所述暗场图像进行格式转化。
下面参照图5来描述根据本申请的这种实施方式的电子设备130。图5显示的电子设备130仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图5所示,电子设备130以通用电子设备的形式表现。电子设备130的组件可以包括但不限于:上述至少一个处理器131、上述至少一个存储器132、连接不同系统组件(包括存储器132和处理器131)的总线133。
总线133表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。
存储器132可以包括易失性存储器形式的可读介质,例如随机存取存储器(RAM)1321和/或高速缓存存储器1322,还可以进一步包括只读存储器(ROM)1323。
存储器132还可以包括具有一组(至少一个)程序模块1324的程序/实用工具1325,这样的程序模块1324包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
电子设备130也可以与一个或多个外部设备134(例如键盘、指向设备等)通信,还可与一个或者多个使得用户能与电子设备130交互的设备通信,和/或与使得该电子设备130能与一个或多个其它电子设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口135进行。并且,电子设备130还可以通过网络适配器136与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图5所示,网络适配器136通过总线133与用于电子设备130的其它模块通信。应当理解,尽管图中未示出,可以结合电子设备130使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
在示例性实施例中,还提供了一种包括指令的计算机可读存储介质,例如包括指令的存储器132,上述指令可由装置400的处理器131执行以完成上述方法。可选地,计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供一种计算机程序产品,包括计算机程序/指令,所述计算机程序/指令被处理器131执行时实现如本申请提供的图像处理方法中的任一方法。
在示例性实施例中,本申请提供的一种图像处理方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在计算机设备上运行时,程序代码用于使计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的一种图像处理方法中的步骤。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
本申请的实施方式的用于图像处理的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在电子设备上运行。然而,本申请的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本申请操作的程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“如“语言或类似的程序设计语言。程序代码可以完全地在用户电子设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户电子设备上部分在远程电子设备上执行、或者完全在远程电子设备或服务端上执行。在涉及远程电子设备的情形中,远程电子设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户电子设备,或者,可以连接到外部电子设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意,尽管在上文详细描述中提及了装置的若干单元或子单元,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本申请的实施方式,上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之,上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。
此外,尽管在附图中以特定顺序描述了本申请方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程图像缩放设备的处理器以产生一个机器,使得通过计算机或其他可编程图像缩放设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程图像缩放设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程图像缩放设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种图像处理方法,其特征在于,所述方法包括:
获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据;
基于拜耳阵列中像素点三原色RGB值的排布规律,将所述原始图像转化为目标图像,以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一所述行数对中的图像数据均不相同。
2.根据权利要求1所述的方法,其特征在于,所述图像数据包括每一像素点的行列坐标和RGB值,所述基于拜耳阵列中像素点RGB值的排布规律,将所述原始图像转化为目标图像,包括:
对所述图像数据在所述原始图像中的排列方式进行重组,以使重组后的图像宽度为所述原始图像的二倍,长度为所述原始图像的一半;
构建所述目标图像的图像内存,基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存;其中,所述预设参数是基于所述拜耳阵列中像素点RGB值的排布规律确定的。
3.根据权利要求2所述的方法,其特征在于,所述对所述图像数据在所述原始图像中的排列方式进行重组,包括:
剔除所述图像数据中奇数行或偶数行对应的截断标志,所述截断标志用于确定所述原始图像的宽度。
4.根据权利要求2所述的方法,其特征在于,所述基于所述每一像素点的行列坐标与预设参数的模除结果,将所述像素点存储到所述图像内存,包括:
针对所述每一所述像素点,根据所述像素点列坐标与所述预设参数的模除结果确定所述像素点在所述图像内存的对应行列位置。
5.根据权利要求1所述的方法,其特征在于,所述针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,包括:
获取所述目标图像的图像数据,所述图像数据包括每一像素点的行列坐标和RGB值;
将所述图像数据中每相邻两行的像素点组成所述行数对,并根据所述行数对中像素点的行坐标确定所述行数对的排列序号,所述排列序号表征所述行数对在所述行数对集合中的排列顺序;
基于所述行数对和所述排列序号确定所述行数对集合。
6.根据权利要求5所述的方法,其特征在于,基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像,包括:
构建第一图像内存和第二图像内存,所述第一图像内存和所述第二图像内存的宽度与所述原始图像相同,高度为所述原始图像的一半;
根据所述行数对集合中每一行数对的排列序号,将奇数排列序号的行数对存储到所述第一图像内存,生成第一图像;并将偶数排列序号的行数对存储到所述第二图像内存,生成第二图像;其中,若所述第一图像为所述明场图像则所述第二图像为所述暗场图像,若所述第一图像为所述暗场图像则所述第二图像为所述明场图像。
7.根据权利要求1-6中任一所述的方法,其特征在于,所述基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像之后,所述方法还包括:
采用插值算法分别对所述明场图像和所述暗场图像进行格式转化。
8.一种图像处理装置,其特征在于,所述装置包括:
图像数据获取模块,被配置为执行获取原始图像的图像数据;其中,所述原始图像的图像格式是拜耳bayer格式,所述图像数据为明场数据和暗场数据;
目标图像获取模块,被配置为执行基于拜耳阵列中像素点三原色RGB值的排布规律,将所述原始图像转化为目标图像,以使所述目标图像中,每行像素点均包含RG值或均包含GB值;其中,所述目标图像的宽度和高度均与所述原始图像相同;
图像提取模块,被配置为执行针对所述目标图像,将每相邻两行的图像数据组成行数对,构建行数对集合,并基于所述行数对集合确定所述原始图像对应的明场图像和暗场图像;其中,每一所述行数对中的图像数据均不相同。
9.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至7中任一项所述的图像处理方法。
10.一种计算机可读存储介质,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1至7中任一项所述的图像处理方法。
CN202110938036.4A 2021-08-16 2021-08-16 一种图像处理方法及相关装置 Pending CN115914855A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110938036.4A CN115914855A (zh) 2021-08-16 2021-08-16 一种图像处理方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110938036.4A CN115914855A (zh) 2021-08-16 2021-08-16 一种图像处理方法及相关装置

Publications (1)

Publication Number Publication Date
CN115914855A true CN115914855A (zh) 2023-04-04

Family

ID=86486886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110938036.4A Pending CN115914855A (zh) 2021-08-16 2021-08-16 一种图像处理方法及相关装置

Country Status (1)

Country Link
CN (1) CN115914855A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116908212A (zh) * 2023-09-12 2023-10-20 厦门微亚智能科技股份有限公司 一种基于特征提取的电芯蓝膜外观缺陷检测方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116908212A (zh) * 2023-09-12 2023-10-20 厦门微亚智能科技股份有限公司 一种基于特征提取的电芯蓝膜外观缺陷检测方法及系统
CN116908212B (zh) * 2023-09-12 2023-12-08 厦门微亚智能科技股份有限公司 一种基于特征提取的电芯蓝膜外观缺陷检测方法及系统

Similar Documents

Publication Publication Date Title
US9564073B2 (en) Display analysis using scanned images
JP2007315967A (ja) 欠陥検出装置、欠陥検出方法、欠陥検出プログラム、および、それを記録したコンピュータ読み取り可能な記録媒体
JP4564768B2 (ja) パターン検査方法及びその装置
CN115914855A (zh) 一种图像处理方法及相关装置
JP4143660B2 (ja) 画像解析方法、画像解析装置、検査装置、画像解析プログラムおよびコンピュータ読み取り可能な記録媒体
CN112730251A (zh) 一种用于屏幕颜色缺陷检测的装置及方法
JP2005165387A (ja) 画面のスジ欠陥検出方法及び装置並びに表示装置
JP3585166B2 (ja) カメラモジュールの画像検査装置およびカメラモジュールの画像検査方法
JPH09101236A (ja) 表示欠陥検査装置および表示欠陥検査方法
JP2002024802A (ja) 画像処理システム
JP2008032653A (ja) テストパターン発生方法、テストパターンのデータ構造、テストパターン発生装置、表示パネル検査システム、制御プログラム、及び該プログラムを記録したコンピュータ読み取り可能な記録媒体
JPH04238592A (ja) 結束棒鋼自動検数装置
JP2011044094A (ja) 表示装置
JPH11257937A (ja) 欠陥検査方法
JP2019158711A (ja) 画像処理システム、画像処理装置、画像処理プログラム
JP3584507B2 (ja) パタンムラ検査装置
JP2010044010A (ja) 網入りまたは線入りガラスの欠陥検出方法
JP3985891B2 (ja) 画像欠陥検出装置および画像欠陥検出方法
JP7572762B1 (ja) 検査装置、検査方法及びプログラム
KR101394493B1 (ko) 라벨 병합 기간이 없는 단일 스캔 라벨러
US20230421891A1 (en) Controller
JP2000193437A (ja) 各種電子機器のキ―ボ―ドのパタ―ン欠陥検査方法及びパタ―ン欠陥検査システム並びにパタ―ン欠陥検査プログラムを記録したコンピュ―タ読み取り可能な記録媒体
JP4382210B2 (ja) 周期性パターンの検査方法及び装置
JP3548835B2 (ja) 欠陥検査装置及び方法
JPH0735699A (ja) 表面欠陥検出方法およびその装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination