CN114511830B - 用于垃圾分类的无人车视觉识别方法 - Google Patents

用于垃圾分类的无人车视觉识别方法 Download PDF

Info

Publication number
CN114511830B
CN114511830B CN202210022619.7A CN202210022619A CN114511830B CN 114511830 B CN114511830 B CN 114511830B CN 202210022619 A CN202210022619 A CN 202210022619A CN 114511830 B CN114511830 B CN 114511830B
Authority
CN
China
Prior art keywords
image
garbage
fusion
unclear
fused
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210022619.7A
Other languages
English (en)
Other versions
CN114511830A (zh
Inventor
王文峰
邢海莲
张晶晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Institute of Technology
Original Assignee
Shanghai Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Institute of Technology filed Critical Shanghai Institute of Technology
Priority to CN202210022619.7A priority Critical patent/CN114511830B/zh
Publication of CN114511830A publication Critical patent/CN114511830A/zh
Application granted granted Critical
Publication of CN114511830B publication Critical patent/CN114511830B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • G06F18/251Fusion techniques of input or preprocessed data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20064Wavelet transform [DWT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种用于垃圾分类的无人车视觉识别方法,带有智能垃圾分类识别系统的无人车能对个别垃圾进行识别并处理。但是,采集图像时可能会出现了不清晰、有遮挡的情况,故而图像的质量对机器识别的准确度有很大的影响。本发明利用简单的图像处理和图像融合技术解决低质量垃圾图像严重影响识别准确度的问题,遮挡、光线等多种因素都可能会影响获取图像的重要特征,造成机器识别效率低下。利用python中的tkinder库制作了一个用于垃圾分类的无人车视觉识别系统,给出了算法的数学原理、融合步骤和主要程序。

Description

用于垃圾分类的无人车视觉识别方法
技术领域
本发明涉及一种用于垃圾分类的无人车视觉识别方法。
背景技术
现如今,随着垃圾分类的普遍推广,为了节省人工成本,智能垃圾分类识别系统的研究是非常重要。
目前有的智能垃圾分类系统大多都需要由人工提前进行分类,通过袋子上的二维码等将垃圾自动收入对应的垃圾桶内。但是像一些公共场所可能会出现个别零散的垃圾,就需要带有智能垃圾分类识别系统的无人车,它能对垃圾进行识别,再进行对应的处理。因为同一垃圾可能有不同的形状,或是在采集垃圾图像时出现由于环境等因素出现了不清晰、有遮挡的情况,普通的物体识别系统的识别能力比较有限。
发明内容
本发明的目的在于提供一种用于垃圾分类的无人车视觉识别方法。
为解决上述问题,本发明提供一种用于垃圾分类的无人车视觉识别方法,包括:
采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像;
基于融合后的垃圾图像,确定对应的垃圾类别。
进一步的,在上述方法中,采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像,包括:
把不清晰的垃圾图像,按照预设的规则分解成若干个小图像,而后将每一个小图像放置于对应的位置上进行融合,待所有的内容完成融合后,最后做一次小波逆变换,得到最终融合后的垃圾图像。
进一步的,在上述方法中,所述小波逆变换为离散小波变换。
进一步的,在上述方法中,所述离散小波变换的过程如下:
将信号x[n]通过具有脉冲响应h[n]的半带低通滤波器;
根据奈奎斯特定理进行下采样,间隔一个剔除样本点,信号留下一半样本点,尺度翻倍。
进一步的,在上述方法中,对不清晰的垃圾图像数据进行处理和融合中,包括:使用系数绝对值较大法和加权平均法两种融合规则,对不清晰的垃圾图像数据进行处理和融合。
进一步的,在上述方法中,采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像,包括:
在python的GUI功能库tkinder编写了一个具有小波变换融合图像融合算法的用于垃圾分类的无人车视觉识别系统,利用无人车视觉识别系统对不清晰的图像数据进行处理和融合,以得到融合后的垃圾图像。
与现有技术相比,本发明可以用于垃圾分类的无人车视觉识别系统,目前的智能垃圾分类系统大多都需要由人工提前进行分类打包,但零散的垃圾如此处理会浪费人工成本。带有智能垃圾分类识别系统的无人车能对个别垃圾进行识别并处理。但是,采集图像时可能会出现了不清晰、有遮挡的情况,故而图像的质量对机器识别的准确度有很大的影响。本发明利用简单的图像处理和图像融合技术解决低质量垃圾图像严重影响识别准确度的问题,遮挡、光线等多种因素都可能会影响获取图像的重要特征,造成机器识别效率低下。利用python中的tkinder库制作了一个用于垃圾分类的无人车视觉识别系统,给出了算法的数学原理、融合步骤和主要程序。
附图说明
图1是本发明一实施例的小波变换融合的示意图;
图2是本发明一实施例的用于垃圾分类的无人车视觉识别系统界面设计布局的示意图;
图3是本发明一实施例的用于垃圾分类的无人车视觉识别系统运行示意图;
图4是本发明一实施例的单张图像选择示意图;
图5是本发明一实施例的完成单张图像选择后的示意图;
图6是本发明一实施例的完成两张不清晰图像选择后的示意图;
图7是本发明一实施例的小波变换融合后的系统界面示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
如图1所示,本发明提供一种用于垃圾分类的无人车视觉识别方法,包括:
步骤S1,采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像;
步骤S2,基于融合后的垃圾图像,确定对应的垃圾类别。
本发明得到用于垃圾分类的无人车视觉识别方法一实施例中,步骤S1,采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像,包括:
把不清晰的垃圾图像,按照预设的规则分解成若干个小图像,而后将每一个小图像放置于对应的位置上进行融合,待所有的内容完成融合后,最后做一次小波逆变换,得到最终融合后的垃圾图像。
在此,小波变换融合的思路是会分别把清晰和不清晰的垃圾图像,按照预设的规则分解成若干个小图像,而后将每一个小图像放置于对应的位置上进行融合,待所有的内容完成融合后,最后做一次小波逆变换,就能得到最终融合后的垃圾图像。
小波变换的数学公式(4.3)如下:
公式中,a为尺度,τ为平移量。尺度和平移量分别决定的是函数的伸缩与平移,分别对应于频率(反比)和时间。
小波变换的固有特性使其在图像处理中有如下优点:小波变换能够保证在分解图像的过程中没有信息损失和冗余信息,保持了信息的完整性,具有完善的重构能力;它把原图像分解成低频图像和高频图像的组合,分别代表了图像的不同结构,故而容易提取原始图像的结构信息和细节信息;同时它还提供了与人类视觉系统方向相吻合的选择性图像。
本发明得到用于垃圾分类的无人车视觉识别方法一实施例中,所述小波逆变换为离散小波变换。
在此,图像融合的小波分解一般采用离散小波变换(Discrete WaveletTransform,DWT)。DWT的函数基由一个称为母小波或分析小波的单一函数通过膨胀和平移获得。DWT用小波函数和尺度函数来分别分析高频信号和低频信号,也即高通滤波器和低通滤波器。
DWT融合算法基本思想:首先对源图像进行小波变换,然后按照一定规则对变换系数进行合并;最后对合并后的系数进行小波逆变换得到融合图像。
DWT分解过程如下:
(1)将信号x[n]通过具有脉冲响应h[n]的半带低通滤波器,这一过程类似数学里的卷积:
这一操作会剔除信号中频率低于p/2的部分(信号最高频率为p),信号分辨率下降一半。
(2)根据奈奎斯特定理进行下采样,间隔一个剔除样本点,信号留下一半样本点,尺度翻倍。将这一半进行高通滤波(滤波不影响信号的尺度):
这是第一个level的分解,如果要进行进一步分解,就把高通滤波器的结果再次一分为二,进行高通滤波和低通滤波,各自的公式为
由此可知,分解的level数为不超过信号长度的2的n次幂,保留了频率的时间位置信息。
DWT同时具有时域和频域分析能力,与金字塔分解相比,DWT图像分解具有以下优势:
1)具有方向性,在提取图像低频信息的同时,还可获得了水平、垂直和对角三个方向的高频信息;
2)通过合理的选择母小波,可使DWT在压缩噪声的同时更有效的提取纹理、边缘等显著信息;
3)金字塔分解各尺度之间具有信息的相关性,而DWT在不同尺度上具有更高的独立性。
小波变换的缺点:仅仅是简单的用全色影像的高频信息替换多光谱数据的高频分量,这样导致了多光谱数据的高频纹理信息丢失;且多光谱数据的低频信息与全色影像的低频分量光谱差异较大,直接替换会有很大误差;随着分解层数的增加,融合的图像容易产生斑块现象。
图像融合过程主要是:先将原图像分解为低频图像和高频图像,再继续分别分解。在每一分解层上,图像均被分解为LL,LH,HH和HL四个频带(LL:水平低频,垂直低频;LH:水平低频,垂直高频;HL:水平高频,垂直低频;HH:水平高频,垂直高频),下一层的分解仅对LL进行分解。这四个子图像中的每一个都是由原图与一个小波基函数的内积后,再经过在x和y方向都进行2倍的间隔采样而生成的,这是就小波变换,即图像的分解;小波逆变换,即是图像的重建,是通过图像的增频采样和卷积来实现的。
2、主要代码:
两种融合规则分别是系数绝对值较大法、加权平均法,前者适合高频成分比较丰富,亮度、对比度比较高的源图像,小波变换将信号的全部信息集中到一部分具有大幅值的小波系数中。这些大的小波系数含有的能量远比小系数含有的能量大。后者权重系数可调,适用范围广,且可消除部分噪声,源图像信息损失较少,但会造成图像对比度的下降,需要增强图像灰度。
这一步是对图像进行小波分解,得到若干图像。
这是根据上述两种规则中的一种对分解后的图像数据进行算法融合。
融合后进行小波逆变换得到最终的融合图像。
本发明最主要的研究内容便是利用图像融合技术解决采集垃圾图像出现遮挡和不清晰的问题,避免由于提供给计算机的数据所剩无几或光照、物体遮挡等因素影响获取图像特征的场景下,造成机器视觉的执行效率较低的问题。
本发明的用于垃圾分类的无人车视觉识别方法一实施例中,对不清晰的垃圾图像数据进行处理和融合中,包括:使用系数绝对值较大法和加权平均法两种融合规则,对不清晰的垃圾图像数据进行处理和融合。
在此,对于分解层数和融合规则的选择非常重要,会影响最终图像融合的效果,使用系数绝对值较大法和加权平均法两种融合规则能基本满足大部分的图像处理要求,能消除部分噪声,且运算简单快速,操作轻松。
详细的:
一、在python的GUI功能库tkinder编写了一个具有小波变换融合图像融合算法的用于垃圾分类的无人车视觉识别系统,利用这个系统对几组清晰和不清晰的图像数据进行处理和融合。
二、用于垃圾分类的无人车视觉识别系统界面设计
在python中,按照设计绘制出文本框、按钮、标签等必要组件,调整大小、位置、颜色和布局,并且完成各组件属性的修改。最后的结果图如图2所示。
五、用于垃圾分类的无人车视觉识别系统界面调试
系统运行后如图3所示。
单张图像选择时图像界面如图4所示。
完成图像选择后系统界面如图5所示。
两张不清晰原图像选择后系统界面如图6所示。
此时单击菜小波变换图像融合的按钮,得到融合后系统界面如图7所示:
六、用于垃圾分类的无人车视觉识别系统程序设计如下:
七、小波变换融合主要代码
小波变换融合的思路是会把原图像按照一定的规则分解成若干个小图像,而后将每一个小图像放置于对应的位置上进行融合,待所有的内容完成融合后,最后做一次逆小波变换,就能得到最终融合的结果。图像融合的小波分解一般采用离散小波变换(DiscreteWavelet Transform,DWT)。DWT融合算法基本思想:首先对源图像进行小波变换,然后按照一定规则对变换系数进行合并;最后对合并后的系数进行小波逆变换得到融合图像。DWT的函数基由一个称为母小波或分析小波的单一函数通过膨胀和平移获得。
本发明可以用于垃圾分类的无人车视觉识别系统,目前的智能垃圾分类系统大多都需要由人工提前进行分类打包,但零散的垃圾如此处理会浪费人工成本。带有智能垃圾分类识别系统的无人车能对个别垃圾进行识别并处理。但是,采集图像时可能会出现了不清晰、有遮挡的情况,故而图像的质量对机器识别的准确度有很大的影响。本发明利用简单的图像处理和图像融合技术解决低质量垃圾图像严重影响识别准确度的问题,遮挡、光线等多种因素都可能会影响获取图像的重要特征,造成机器识别效率低下。利用python中的tkinder库制作了一个用于垃圾分类的无人车视觉识别系统,给出了算法的数学原理、融合步骤和主要程序。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
显然,本领域的技术人员可以对发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包括这些改动和变型在内。

Claims (1)

1.一种用于垃圾分类的无人车视觉识别方法,其特征在于,包括:
采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像;
基于融合后的垃圾图像,确定对应的垃圾类别;
采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像,包括:
把不清晰的垃圾图像,按照预设的规则分解成若干个小图像,而后将每一个小图像放置于对应的位置上进行融合,待所有的内容完成融合后,最后做一次小波逆变换,得到最终融合后的垃圾图像;
所述小波逆变换为离散小波变换;
所述离散小波变换的过程如下:
将信号x[n]通过具有脉冲响应h[n]的半带低通滤波器;
根据奈奎斯特定理进行下采样,间隔一个剔除样本点,信号留下一半样本点,尺度翻倍;
对不清晰的垃圾图像数据进行处理和融合中,包括:使用系数绝对值较大法和加权平均法两种融合规则,对不清晰的垃圾图像数据进行处理和融合;
采用小波变换融合图像融合算法,对不清晰的垃圾图像数据进行处理和融合,以得到融合后的垃圾图像,包括:
在python的GUI功能库tkinder编写了一个具有小波变换融合图像融合算法的用于垃圾分类的无人车视觉识别系统,利用无人车视觉识别系统对不清晰的图像数据进行处理和融合,以得到融合后的垃圾图像。
CN202210022619.7A 2022-01-10 2022-01-10 用于垃圾分类的无人车视觉识别方法 Active CN114511830B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210022619.7A CN114511830B (zh) 2022-01-10 2022-01-10 用于垃圾分类的无人车视觉识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210022619.7A CN114511830B (zh) 2022-01-10 2022-01-10 用于垃圾分类的无人车视觉识别方法

Publications (2)

Publication Number Publication Date
CN114511830A CN114511830A (zh) 2022-05-17
CN114511830B true CN114511830B (zh) 2024-05-17

Family

ID=81550309

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210022619.7A Active CN114511830B (zh) 2022-01-10 2022-01-10 用于垃圾分类的无人车视觉识别方法

Country Status (1)

Country Link
CN (1) CN114511830B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106504221A (zh) * 2016-10-13 2017-03-15 江南大学 基于四元数小波变换上下文结构的医学图像融合新方法
US9836433B1 (en) * 2012-04-02 2017-12-05 Rockwell Collins, Inc. Image processing using multiprocessor discrete wavelet transform
CN107480643A (zh) * 2017-08-18 2017-12-15 潘金文 一种智能垃圾分类处理的机器人
CN111461000A (zh) * 2020-03-31 2020-07-28 安徽理工大学 一种基于cnn和小波分析的办公室垃圾智能分类方法
CN113256547A (zh) * 2021-05-26 2021-08-13 西安石油大学 一种基于小波技术的地震数据融合方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9836433B1 (en) * 2012-04-02 2017-12-05 Rockwell Collins, Inc. Image processing using multiprocessor discrete wavelet transform
CN106504221A (zh) * 2016-10-13 2017-03-15 江南大学 基于四元数小波变换上下文结构的医学图像融合新方法
CN107480643A (zh) * 2017-08-18 2017-12-15 潘金文 一种智能垃圾分类处理的机器人
CN111461000A (zh) * 2020-03-31 2020-07-28 安徽理工大学 一种基于cnn和小波分析的办公室垃圾智能分类方法
CN113256547A (zh) * 2021-05-26 2021-08-13 西安石油大学 一种基于小波技术的地震数据融合方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于HVS的小波图像融合新算法;周礼, 王章野, 金剑秋, 彭群生;中国图象图形学报;20040925(第09期);全文 *
基于图像视觉的垃圾分类机器人识别控制系统算法设计;张方超;董振;张栋;武涛;李卫国;;电子测量技术;20191023(第20期);全文 *

Also Published As

Publication number Publication date
CN114511830A (zh) 2022-05-17

Similar Documents

Publication Publication Date Title
CN107239751B (zh) 基于非下采样轮廓波全卷积网络的高分辨sar图像分类方法
Mishra et al. Image fusion techniques: a review
US6310967B1 (en) Normal and abnormal tissue identification system and method for medical images such as digital mammograms
Liu et al. A medical image enhancement method using adaptive thresholding in NSCT domain combined unsharp masking
CN101201937A (zh) 基于小波重构与分解的数字图像增强方法及其装置
WO2006130699A2 (en) Method of screening cellular tissue
CN105894483A (zh) 一种基于多尺度图像分析和块一致性验证的多聚焦图像融合方法
CN115049640B (zh) 一种基于深度学习的道路裂缝检测方法
Verma et al. Hybrid image fusion algorithm using Laplacian Pyramid and PCA method
Tripathi Facial image noise classification and denoising using neural network
Bajpai et al. Analysis of image enhancement techniques used in remote sensing satellite imagery
CN113392937A (zh) 一种3d点云数据分类方法及其相关装置
CN114511830B (zh) 用于垃圾分类的无人车视觉识别方法
Wang et al. A fusion algorithm of remote sensing image based on discrete wavelet packet
Wang et al. Multispectral image fusion approach based on GHM multiwavelet transform
CN105225214A (zh) 一种基于直觉模糊处理理论的图像融合方法及其系统
Patil et al. Study of texture representation techniques
Fu et al. Deep Decomposition Network for Image Processing: A Case Study for Visible and Infrared Image Fusion
CN114612434A (zh) 一种波纹管表面缺陷检测方法及系统
CN111325765A (zh) 一种基于冗余小波变换的图像边缘检测算法
Wang et al. Texture classification using wavelet decomposition with Markov random field models
CN116152807B (zh) 一种基于U-Net网络的工业缺陷语义分割方法及存储介质
CN107590784A (zh) 一种用于3d视觉识别的抗干扰系统及其抗干扰方法
Gambhir et al. Wavelet based fusion of fuzzy enhanced images captured under improper illumination
Rane et al. Comparative Study of Image Fusion Methods

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant