CN109344894B - 基于多传感器融合和深度学习的垃圾分类识别方法及装置 - Google Patents
基于多传感器融合和深度学习的垃圾分类识别方法及装置 Download PDFInfo
- Publication number
- CN109344894B CN109344894B CN201811137854.9A CN201811137854A CN109344894B CN 109344894 B CN109344894 B CN 109344894B CN 201811137854 A CN201811137854 A CN 201811137854A CN 109344894 B CN109344894 B CN 109344894B
- Authority
- CN
- China
- Prior art keywords
- garbage
- sensor
- classification
- classification model
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000013135 deep learning Methods 0.000 title claims abstract description 19
- 230000004927 fusion Effects 0.000 title claims abstract description 14
- 238000013145 classification model Methods 0.000 claims abstract description 26
- 238000012549 training Methods 0.000 claims abstract description 20
- 238000013528 artificial neural network Methods 0.000 claims abstract description 13
- 230000035699 permeability Effects 0.000 claims abstract description 8
- 230000005484 gravity Effects 0.000 claims description 19
- 238000001914 filtration Methods 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 10
- 239000011159 matrix material Substances 0.000 claims description 8
- 238000012360 testing method Methods 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 4
- 238000012937 correction Methods 0.000 claims description 3
- 230000002087 whitening effect Effects 0.000 claims description 3
- 238000006073 displacement reaction Methods 0.000 claims description 2
- 238000011084 recovery Methods 0.000 abstract 1
- 239000004033 plastic Substances 0.000 description 9
- 238000005259 measurement Methods 0.000 description 5
- 239000002184 metal Substances 0.000 description 5
- 239000011521 glass Substances 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 239000002699 waste material Substances 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000000123 paper Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000004146 energy storage Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000575 pesticide Substances 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02W—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO WASTEWATER TREATMENT OR WASTE MANAGEMENT
- Y02W30/00—Technologies for solid waste management
- Y02W30/10—Waste collection, transportation, transfer or storage, e.g. segregated refuse collecting, electric or hybrid propulsion
Abstract
本发明公开了一种基于多传感器融合和深度学习的垃圾分类识别方法,包括步骤:S1:获取学习样本数据,样本数据包括已知分类垃圾的图像和物理参量,所述物理参量包括介电常数、磁导率、光电参数和重量;S2:采用深度学习神经网络方法训练分类模型,分类模型的输入为上述样本数据,输出为预测的垃圾种类;S3:拍摄待分类垃圾的图像,采集待分类发垃圾的物理参量,然后将信息输入到步骤S2中的分类模型,得到预测的垃圾种类。本发明还提供一种用于实现上述方法的装置。本发明能够高速且准确地将用户投放的生活垃圾分类,做到尽可能成功分类常见的生活垃圾,并同时将垃圾种类等信息反馈回来,进而提高垃圾的回收率。
Description
技术领域
本发明涉及图像检测、机器视觉、测量技术领域,特别涉及一种基于多传感器融合和深度学习的垃圾分类识别方法及装置。
背景技术
目前,从世界和我国范围来看,随着人口的不断增长,垃圾总量和人均垃圾制造量也在不断增加,因此垃圾的分类处理成为了摆在各方面前的难题,而在这难题中比较突出的就是城市垃圾的分类处理,特别是人口密集区中的生活垃圾,是城市垃圾的高产之地。
为了解决这个垃圾分类问题,各界研究出各种垃圾分类方法,其中较为突出的是以图像分类为目标的图像识别的方法和仅依靠相关传感器采集的物理参数实现垃圾分类的方法。这两种方法都有其优势所在,但他们的缺陷也很明显,前者的识别速度快但错误率较高,而后者虽然分类的准确度较高,但是有时因为工作环境等因素的影响会导致识别到的垃圾种类较少,且识别的速度比较慢。
为此,研究一种既高效又准确的垃圾分类识别方法及装置具有重要意义。
发明内容
本发明的目的在于克服现有技术的缺点与不足,提供一种基于多传感器融合和深度学习的垃圾分类识别方法和装置,该方法和装置能够高速且准确地将用户投放的生活垃圾分类,做到尽可能成功分类常见的生活垃圾,并同时将垃圾种类等信息反馈回来,进而提高垃圾的回收率。
为实现以上目的,本发明采取如下技术方案:
基于多传感器融合和深度学习的垃圾分类识别方法,包括步骤:
S1:获取学习样本数据,样本数据包括已知分类垃圾的图像和物理参量,所述物理参量包括介电常数、磁导率、光电参数和重量;
S2:采用深度学习神经网络方法训练分类模型,分类模型的输入为上述样本数据,输出为预测的垃圾种类;
S3:拍摄待分类垃圾的图像,采集待分类发垃圾的物理参量,然后将信息输入到步骤S2中的分类模型,得到预测的垃圾种类。
作为优先考虑的技术方案,待分类垃圾的垃圾袋外层上若存在条形码,则先通过图像读取条形码信息,条形码信息中包括了垃圾的类别信息,将条形码信息与条形码数据库中的信息进行匹配,如果匹配成功,则自动完成分类,否则采集物理参量,连同图像一起输入到所述分类模型进行判别。
作为优先考虑的技术方案,图像在用于训练分类模型或者输入分类模型前,进行如下处理:
预处理步骤,包括图像的初始化、去均值、归一化、PCA和白化;
图像增强步骤,包括对比度拉升、Gamma校正和直方图均衡化。
作为优先考虑的技术方案,对于采集的样本数据或者待分类垃圾的物理参量,在用于训练分类模型或者输入分类模型前,进行如下处理:
滤波步骤,包括硬件滤波和软件滤波方法,其中,硬件滤波是在用于采集物理参量的传感器和用于进行信息处理的信息处理器之间接入一个RC滤波器;而软件滤波是对样本数据或者物理参量采用限幅滤波法或均值滤波法。
作为优先考虑的技术方案,为了将图像的RGB值与物理参量能够融合,对采集的物理参量执行填充步骤,具体步骤为:将摄像头所识别的区域进行平面数学建模,以摄像头的位置作为参考对象,用于采集介电常数、磁导率、光电参数的介电常数传感器、电涡流传感器、光电传感器组成阵列形排布的传感器单元体,均安装在摄像头所拍摄的范围内;
摄像头所识别的像素范围是m*m,为使传感器尽可能均匀分布在像素范围内,每n*n像素范围布置一个传感器单元体,则需要[m/n]*[m/n]个传感器单元体,即n*n范围内都是当前传感器单元体的测量值;
用于采集重量的重力传感器只需测量垃圾总体的质量,即像素m*m范围内分布一个重力传感器,即像素m*m内都是一个重力传感器的测量值;
摄像头所形成图像的RGB值即三维信息,与4种传感器处理后的四维的电参数共同构成一个m*m*7的矩阵,共同融合为七维信息,作为神经网络的输入参数。
作为优先考虑的技术方案,步骤S2中采用深度学习神经网络方法训练分类模型,采用的是SSD算法(Single Shot MultiBox Detector),步骤是:
将学习样本数据分为训练集和测试集;
Tensorflow框架下构建SSD模型结构,将训练集输入到模型中进行训练;
对训练完成后的模型再用测试集进行测试。
作为优先考虑的技术方案,所述垃圾种类包括金属、塑料、纸巾与玻璃。
一种用于实现上述垃圾分类识别方法的装置,包括信息处理器、执行控制器、摄像头、传感器组件和垃圾投放箱,摄像头设置在垃圾投放箱的顶部,传感器组件设置在垃圾投放箱中垃圾放置位置的底部,包括介电常数传感器、电涡流传感器、重力传感器和光电传感器,所有传感器分别与执行控制器连接,所述传感器组件、执行控制器和摄像头分别与信息处理器相连。本发明综合图像以及物理参数来对垃圾进行分类识别,具有准确和高效的优点。
作为优先考虑的技术方案,一个传感器单元体内包括一个介电常数传感器、电涡流传感器、光电传感器,传感器单元体均匀分布在摄像头所拍摄的范围内,且成阵列分布。
作为优先考虑的技术方案,所述介电常数传感器采用DZ5001介电常数测定仪。采用该传感器用来测量垃圾的介电常数。
作为优先考虑的技术方案,所述电涡流传感器采用MIRAN米朗ML33电涡流位移传感器。该传感器通过涡流测量垃圾的磁导率。
作为优先考虑的技术方案,所述重力传感器是一种采用弹性敏感元件制成悬臂式位移器,与采用弹性敏感元件制成的储能弹簧来驱动电触点,完成从重力变化到电信号的转换。采用该传感器用来测量垃圾的重量,再根据摄像头可计算垃圾的密度。
作为优先考虑的技术方案,所述光电传感器采用红外对射管。采用该传感器可根据光电信号测定垃圾是否为透明。
作为优先考虑的技术方案,所述执行控制器采用STM微控制器或AVR单片机等。
作为优先考虑的技术方案,所述信息处理器与用于显示垃圾的类别的显示装置连接。从而可对外显示识别的结果。
作为优先考虑的技术方案,所述装置中包括供电系统,供电系统与传感器组件中的各个传感器连接。供电系统为整个传感器提供能量,保证整个装置的正常运行。
本发明与现有技术相比,具有如下优点和有益效果:
1、本发明采用图像识别与传感器测量垃圾物理参量二者相结合的方法,既克服了图像识别错误率较高的缺点,又解决了单纯依靠物理参量分类速度不足的问题。在垃圾分类中,图像识别错误率较高的问题主要体现在识别垃圾时主要识别垃圾的轮廓与颜色,与信息处理器的信息库中信息比对来判断垃圾种类,而实际上,不同种类垃圾是有很大可能轮廓与颜色等数据是接近的,从而导致错误的发生。而本发明在图像识别的基础上再加上测量的物理参量作为判断的依据,大大提高了识别的准确性。
2、本发明在对计算机的神经网络训练时以及整个装置在工作时,神经网络的输入参数不同于一般的训练方法仅仅采用图像RGB值组成的三维数据,而是加入垃圾的介电常数、磁导率、光电参数和对应的重量,将输入信息从三维扩充为七维数据,其优点在于,数据的维度增加,描述垃圾数据的特征维度也增加,其输出结果的可信度远远高于单纯以三维数据训练输出的结果。
3、本发明可以配合相应的垃圾桶帮助垃圾投放者(如小区居民)将绝大多数生活垃圾进行分类,包括可回收垃圾、不可回收垃圾、污染类垃圾和其他,而可回收垃圾又可细分为金属、塑料、纸类、玻璃等,实现智能分类。
附图说明
图1为本发明方法的流程图。
图2为本发明神经网络结构示意图。
图3为本发明采用的SSD算法的示意图。
图4为本发明装置的结构示意图。
图5为本发明中传感器阵列图。
图中:1、计算机主机;2、摄像头;3、垃圾投放箱;4、垃圾;5、传感器阵列;6、重力传感器;7、传感器单元体;8、介电常数传感器;9、光电传感器;10、电涡流传感器。
具体实施方式
下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。
实施例
如图4、5所示,本实施例一种基于多传感器融合和深度学习的垃圾分类识别装置,结构包括计算机主机1、显示屏、摄像头2、垃圾投放箱3以及传感器组件和执行控制器。执行控制器设置在垃圾投放箱3的上盖上,摄像头2设置在上盖的下方,用于采集垃圾投放箱中垃圾放置位置处的图像信息,包括条形码和其他图像相关信息。
传感器组件包括重力传感器6、介电常数传感器8、光电传感器9、电涡流传感器10,介电常数传感器8、光电传感器9、电涡流传感器10组成传感器阵列5,其结构布局如图5所示。每种传感器均成阵列分布在垃圾投放箱中垃圾4放置位置的底部。介电常数传感器8测量垃圾的介电常数,电涡流传感器10在满足其使用条件的前提下通过涡流测量其磁导率,重力传感器6测量垃圾的重量,结合上述摄像头读取的图像数据来计算垃圾密度,而光电传感器9根据光电信号测定垃圾是否为透明。所有传感器分别与执行控制器连接,传感器、执行控制器和摄像头3分别与计算机主机相连。
为了便于后续将图像的RGB值与物理参量进行融合,在设置装置时,将摄像头所识别的区域进行平面数学建模,以摄像头的位置作为参考对象,传感器所安装的位置在摄像头所拍摄的范围内。假设摄像头所识别的像素范围是500*500,为使传感器尽可能均匀分布在像素范围内,每70*70像素范围布置一个传感器单元体7,则需要[500/70]*[500/70]即7*7个传感器单元体,即70*70范围内都是当前传感器单元体的测量值。而重力传感器只需垃圾总体的质量,因此不需要阵列化,即像素500*500范围内分布一个重力传感器,即像素500*500内都是一个重力传感器的测量值。摄像头所形成图像的RGB值即三维信息,与传感器阵列处理后的四维的电参数可融合为七维信息,作为神经网络的输入参数。
本实施例中,垃圾分类识别装置还包括辅助工作外设,所述辅助工作外设包括供电系统和信号输出系统,所述供电系统为整个传感器提供能量,所述信号输出系统把信息处理器的处理结果传输并显示在显示屏上,所述处理结果包括垃圾的类别和预测的准确率。
在本实施例中,所述信息处理器为计算机主机1。所述执行控制器采用STM微控制器或AVR单片机。所述各传感器和摄像头将垃圾大致分类为金属、纸类、塑料、玻璃。
参见图1-3,基于上述装置,本实施例提供一种基于多传感器融合和深度学习的垃圾分类识别方法,包括步骤:
S1、用户将垃圾置于垃圾投放箱中,摄像头开始对垃圾进行拍摄数据采样;
S2、摄像头采集数据包括垃圾外层条形码和垃圾整体的实时图像,信息处理器处理上述信息时,先扫描条形码获得垃圾的相应信息,将读取到的信息去匹配条形码数据库,如果成功则执行分类操作,否则,说明条形码破损或读取信息无效,执行下一步操作。
S3、介电常数传感器、电涡流传感器、光电传感器和重力传感器读取垃圾各个物理参量,与摄像头采集的实时数据整合作为分类模型的输入参数,通过训练好的分类模型去预测结果,之后执行相应的分类操作。
S4、上述步骤后,垃圾分类的类别包括金属、塑料、纸巾与玻璃。
在采用深度学习神经网络方法训练分类模型时,利用学习样本数据进行训练,训练步骤是:
(1)采集学习样本数据,样本数据包括已知分类垃圾的图像和物理参量,所述物理参量包括介电常数、磁导率、光电参数和重量。
(2)对图像先进行预处理,预处理包括图像的初始化、去均值、归一化、PCA和白化,之后是图像增强,包括对比度拉升、Gamma校正和直方图均衡化,最后读取图像中各像素点的RGB值,作为输入参数的其中一系列数据。
(3)对采集的物理参量,先进行滤波处理,包括硬件RC滤波和软件均值和限幅滤波,之后滤波后的电参数根据各个传感器单元体的数值,得到与图像相同大小的矩阵,这样图像的RGB值即三维信息,与处理后的四维的电参数融合为七维信息,作为神经网络的输入参数。
(4)信息处理器在训练时采用SSD算法,与传统的SSD算法不同的是,输入的数据除了传统的图像RGB值以外,加入垃圾的介电常数、磁导率、光电参数和对应的重量,将输入信息从三维扩充为七维数据,样本数据所描述的特征增多,大幅度地提高了垃圾分类的准确性。输入信息中,RGB值对应图像三维矩阵,分别为 而各传感器测得各物理参量,包括垃圾的介电常数、磁导率、光电参数和对应的重量,分别对应矩阵E、P、C、M,其中 矩阵E、P、C、M经过填充算法得到与矩阵R、G、B相同维度的矩阵,合并所有矩阵后作为神经网络输入层信息输入,经过如图2、3所示一系列卷积和池化运算,即经过SSD训练模型结构后,最终得到垃圾的类别的信息。
本实施例中,摄像头、电介质常数测量传感器、磁导率测量传感器等物理传感器,得到垃圾本体的图像与物理参量,以此作为测量垃圾本体的数据依据,经过一系列数据处理、算法分析,从而得出垃圾的类别。例如,对于瓶子类垃圾进行分类时,摄像头很容易识别出物体为瓶子,很容易将垃圾划分为可回收垃圾,但很难快速而又准确地识别出垃圾的材料,如是否为金属,很难做到垃圾分类的精确化,而在分类时融合多传感器就能保证以较高的精度与速度完成对垃圾的准确分类。而单独依靠传感器识别垃圾种类的话,虽然能正确识别垃圾材料,但无法避免一些特殊情况,比如有两种塑料瓶子,水瓶和装农药的瓶子,前者可回收,后者不可回收,单纯依靠传感器就都归为可回收类垃圾,而本发明扫描的条形码信息和图像信息就可以将二者区分开来。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受上述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。
Claims (9)
1.基于多传感器融合和深度学习的垃圾分类识别方法,其特征在于,包括步骤:
S1:获取学习样本数据,样本数据包括已知分类垃圾的图像和物理参量,所述物理参量包括介电常数、磁导率、光电参数和重量;
S2:采用深度学习神经网络方法训练分类模型,分类模型的输入为上述样本数据,输出为预测的垃圾种类;
S3:拍摄待分类垃圾的图像,采集待分类垃圾的物理参量,然后将信息输入到步骤S2中的分类模型,得到预测的垃圾种类;具体的,为了将图像的RGB值与物理参量能够融合并作为所述分类模型的输入参数,对采集的物理参量执行填充步骤,具体步骤为:将摄像头所识别的区域进行平面数学建模,以所述摄像头的位置作为参考对象,用于采集介电常数、磁导率、光电参数的介电常数传感器、电涡流传感器、光电传感器组成阵列形排布的传感器单元体,均安装在所述摄像头所拍摄的范围内;
所述摄像头所识别的像素范围是m*m,为使传感器尽可能均匀分布在像素范围内,每n*n像素范围布置一个所述传感器单元体,则需要[m/n]*[m/n]个所述传感器单元体,即n*n范围内都是当前所述传感器单元体的测量值;
用于采集重量的重力传感器只需测量垃圾总体的质量,即像素m*m范围内分布一个所述重力传感器,即像素m*m内都是一个所述重力传感器的测量值;
所述摄像头所形成图像的RGB值即三维信息,与4种传感器处理后的四维的电参数共同构成一个m*m*7的矩阵,共同融合为七维信息,作为所述分类模型的输入参数。
2.根据权利要求1所述的基于多传感器融合和深度学习的垃圾分类识别方法,其特征在于,待分类垃圾的垃圾袋外层上若存在条形码,则先通过图像读取条形码信息,条形码信息中包括了垃圾的类别信息,将条形码信息与条形码数据库中的信息进行匹配,如果匹配成功,则自动完成分类,否则采集物理参量,连同图像一起输入到所述分类模型进行判别。
3.根据权利要求1所述的基于多传感器融合和深度学习的垃圾分类识别方法,其特征在于,图像在用于训练分类模型或者输入分类模型前,进行如下处理:
预处理步骤,包括图像的初始化、去均值、归一化、PCA和白化;
图像增强步骤,包括对比度拉升、Gamma校正和直方图均衡化。
4.根据权利要求1所述的基于多传感器融合和深度学习的垃圾分类识别方法,其特征在于,对于采集的样本数据或者待分类垃圾的物理参量,在用于训练分类模型或者输入分类模型前,进行如下处理:
滤波步骤,包括硬件滤波和软件滤波方法,其中,硬件滤波是在用于采集物理参量的传感器和用于进行信息处理的信息处理器之间接入一个RC滤波器;而软件滤波是对样本数据或者物理参量采用限幅滤波法或均值滤波法。
5.根据权利要求1所述的基于多传感器融合和深度学习的垃圾分类识别方法,其特征在于,步骤S2中采用深度学习神经网络方法训练分类模型,采用的是SSD算法,步骤是:
将学习样本数据分为训练集和测试集;
Tensorflow框架下构建SSD模型结构,将训练集输入到模型中进行训练;
对训练完成后的模型再用测试集进行测试。
6.一种用于实现权利要求1-5任一项所述垃圾分类识别方法的装置,其特征在于,包括信息处理器、执行控制器、摄像头、传感器组件和垃圾投放箱,摄像头设置在垃圾投放箱的顶部,传感器组件设置在垃圾投放箱中垃圾放置位置的底部,包括介电常数传感器、电涡流传感器、重力传感器和光电传感器,所有传感器分别与执行控制器连接,所述传感器组件、执行控制器和摄像头分别与信息处理器相连。
7.根据权利要求6所述的装置,其特征在于,所述介电常数传感器采用DZ5001介电常数测定仪;
所述电涡流传感器采用MIRAN米朗ML33电涡流位移传感器;
所述光电传感器采用红外对射管。
8.根据权利要求6所述的装置,其特征在于,一个传感器单元体内包括一个介电常数传感器、电涡流传感器、光电传感器,传感器单元体均匀分布在摄像头所拍摄的范围内,且成阵列分布。
9.根据权利要求6所述的装置,其特征在于,所述重力传感器包括悬臂式位移器和储能弹簧,储能弹簧驱动电触点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811137854.9A CN109344894B (zh) | 2018-09-28 | 2018-09-28 | 基于多传感器融合和深度学习的垃圾分类识别方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811137854.9A CN109344894B (zh) | 2018-09-28 | 2018-09-28 | 基于多传感器融合和深度学习的垃圾分类识别方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109344894A CN109344894A (zh) | 2019-02-15 |
CN109344894B true CN109344894B (zh) | 2023-12-22 |
Family
ID=65307487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811137854.9A Active CN109344894B (zh) | 2018-09-28 | 2018-09-28 | 基于多传感器融合和深度学习的垃圾分类识别方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109344894B (zh) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109948506B (zh) * | 2019-03-14 | 2023-08-01 | 南通大学 | 一种基于深度学习的多角度垃圾分类云平台 |
CN110210635A (zh) * | 2019-06-05 | 2019-09-06 | 周皓冉 | 一种能识别废弃物的智能分类回收系统 |
CN112141557B (zh) * | 2019-06-28 | 2022-04-15 | 深圳精匠云创科技有限公司 | 回收装置 |
CN112298844B (zh) * | 2019-07-29 | 2023-09-22 | 杭州海康威视数字技术股份有限公司 | 一种垃圾分类监督方法及装置 |
CN110738131A (zh) * | 2019-09-20 | 2020-01-31 | 广州游艺云物联网技术有限公司 | 基于深度学习神经网络的垃圾分类管理方法及装置 |
CN110723432A (zh) * | 2019-09-20 | 2020-01-24 | 精锐视觉智能科技(深圳)有限公司 | 垃圾分类的方法及增强现实设备 |
CN111310091B (zh) * | 2019-09-25 | 2021-01-19 | 北京星选科技有限公司 | 信息处理方法、装置、电子设备及计算机可读存储介质 |
CN110689085B (zh) * | 2019-09-30 | 2023-04-18 | 天津大学 | 基于深度跨连接网络及损失函数设计的垃圾分类方法 |
CN112607240A (zh) * | 2019-10-05 | 2021-04-06 | 山西集智数据服务有限公司 | 一种智能垃圾分类投放装置 |
CN110929760A (zh) * | 2019-10-30 | 2020-03-27 | 中国科学院自动化研究所南京人工智能芯片创新研究院 | 一种基于计算机视觉的垃圾分类软件 |
CN110990774A (zh) * | 2019-11-05 | 2020-04-10 | 武汉菲旺软件技术有限责任公司 | 小区垃圾分类识别方法、装置、设备及介质 |
CN111017429B (zh) * | 2019-11-20 | 2021-05-25 | 重庆特斯联智慧科技股份有限公司 | 一种基于多因素融合的社区垃圾分类方法及系统 |
CN111237765A (zh) * | 2019-11-28 | 2020-06-05 | 武汉九象云大数据科技有限公司 | 一种基于信息技术进行垃圾配比的垃圾预处理系统及方法 |
CN110921146A (zh) * | 2019-11-28 | 2020-03-27 | 蚌埠学院 | 基于互联网大数据和图像处理技术的生活垃圾分类方法及其系统 |
CN110861854B (zh) * | 2019-11-29 | 2022-04-08 | 三峡大学 | 智能垃圾分类装置及智能垃圾分类方法 |
CN110861853B (zh) * | 2019-11-29 | 2021-10-19 | 三峡大学 | 视觉与触觉相结合的智能垃圾分类方法 |
CN111144259B (zh) * | 2019-12-18 | 2022-12-23 | 重庆特斯联智慧科技股份有限公司 | 一种基于hmm模型的社区污染物处理方法和系统 |
CN113051963A (zh) * | 2019-12-26 | 2021-06-29 | 中移(上海)信息通信科技有限公司 | 垃圾检测方法、装置、电子设备及计算机存储介质 |
CN111151368B (zh) * | 2020-01-09 | 2021-04-02 | 珠海格力电器股份有限公司 | 垃圾处理方法、系统、存储介质以及垃圾处理设备 |
CN111274913A (zh) * | 2020-01-16 | 2020-06-12 | 珠海格力电器股份有限公司 | 垃圾分类识别方法、装置、电子设备及存储介质 |
CN111217062A (zh) * | 2020-03-12 | 2020-06-02 | 河海大学 | 一种基于边缘计算和深度学习的垃圾箱垃圾识别方法 |
CN111590611B (zh) * | 2020-05-25 | 2022-12-02 | 北京具身智能科技有限公司 | 一种基于多模态主动感知的物品分类回收方法 |
CN112036500A (zh) * | 2020-09-04 | 2020-12-04 | 广东弓叶科技有限公司 | 基于深度图像及多光谱图像融合的垃圾分类方法及装置 |
CN113680695A (zh) * | 2021-08-24 | 2021-11-23 | 武昌工学院 | 基于机器人的机器视觉垃圾分拣系统 |
CN113705694A (zh) * | 2021-08-31 | 2021-11-26 | 中关村科学城城市大脑股份有限公司 | 一种城市垃圾治理方法及相关设备 |
CN113830459B (zh) * | 2021-09-24 | 2023-04-14 | 北京声智科技有限公司 | 垃圾桶控制方法、装置及电子设备 |
CN113996543B (zh) * | 2021-10-09 | 2023-11-10 | 西安石油大学 | 一种智能垃圾分拣机器人 |
CN117299596A (zh) * | 2023-08-14 | 2023-12-29 | 江苏秦郡机械科技有限公司 | 一种自动检测的物料筛选系统及其筛选方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101482742A (zh) * | 2008-01-09 | 2009-07-15 | 阿尔伯托·罗贝塔 | 垃圾桶及垃圾收运系统 |
CN105718952A (zh) * | 2016-01-22 | 2016-06-29 | 武汉科恩斯医疗科技有限公司 | 使用深度学习网络对断层医学影像进行病灶分类的方法 |
CN106000904A (zh) * | 2016-05-26 | 2016-10-12 | 北京新长征天高智机科技有限公司 | 一种生活垃圾自动分拣系统 |
CN106485274A (zh) * | 2016-10-09 | 2017-03-08 | 湖南穗富眼电子科技有限公司 | 一种基于目标特性图的物体分类方法 |
CN106516486A (zh) * | 2016-09-27 | 2017-03-22 | 广西大学 | 一种自动分类的生活垃圾收集设备 |
CN106516487A (zh) * | 2016-12-16 | 2017-03-22 | 广州大学 | 一种垃圾识别分类装置及方法 |
CN107262387A (zh) * | 2017-06-30 | 2017-10-20 | 福建南方路面机械有限公司 | 一种基于多种检测方式的块状固体建筑垃圾分拣系统 |
JP2018120485A (ja) * | 2017-01-26 | 2018-08-02 | 株式会社ピリカ | 分布予測装置、分布予測方法及び分布予測プログラム |
CN108438628A (zh) * | 2018-03-16 | 2018-08-24 | 陈文彬 | 一种具有自动分选功能的垃圾箱及其垃圾自动分类方法 |
-
2018
- 2018-09-28 CN CN201811137854.9A patent/CN109344894B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101482742A (zh) * | 2008-01-09 | 2009-07-15 | 阿尔伯托·罗贝塔 | 垃圾桶及垃圾收运系统 |
CN105718952A (zh) * | 2016-01-22 | 2016-06-29 | 武汉科恩斯医疗科技有限公司 | 使用深度学习网络对断层医学影像进行病灶分类的方法 |
CN106000904A (zh) * | 2016-05-26 | 2016-10-12 | 北京新长征天高智机科技有限公司 | 一种生活垃圾自动分拣系统 |
CN106516486A (zh) * | 2016-09-27 | 2017-03-22 | 广西大学 | 一种自动分类的生活垃圾收集设备 |
CN106485274A (zh) * | 2016-10-09 | 2017-03-08 | 湖南穗富眼电子科技有限公司 | 一种基于目标特性图的物体分类方法 |
CN106516487A (zh) * | 2016-12-16 | 2017-03-22 | 广州大学 | 一种垃圾识别分类装置及方法 |
JP2018120485A (ja) * | 2017-01-26 | 2018-08-02 | 株式会社ピリカ | 分布予測装置、分布予測方法及び分布予測プログラム |
CN107262387A (zh) * | 2017-06-30 | 2017-10-20 | 福建南方路面机械有限公司 | 一种基于多种检测方式的块状固体建筑垃圾分拣系统 |
CN108438628A (zh) * | 2018-03-16 | 2018-08-24 | 陈文彬 | 一种具有自动分选功能的垃圾箱及其垃圾自动分类方法 |
Non-Patent Citations (2)
Title |
---|
Calculation and Choice of Grip Parameters for Garbage Truck Manipulator;V.V. Zubov等;Procedia Engineering;第896-902页 * |
基于倒谱与BP网络的船舶生活垃圾分类方法研究;刘强等;南通航运职业技术学院学报;第15卷(第1期);第34-38页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109344894A (zh) | 2019-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109344894B (zh) | 基于多传感器融合和深度学习的垃圾分类识别方法及装置 | |
CN109606991B (zh) | 智能垃圾桶及基于深度学习的垃圾分类方法 | |
CN103593670B (zh) | 一种基于在线序列极限学习机的铜板带表面缺陷检测方法 | |
CN109508664B (zh) | 一种基于深度学习的菜品识别计价方法 | |
CN104112269B (zh) | 一种基于机器视觉的太阳能电池激光刻线参数检测方法及系统 | |
CN108932510A (zh) | 一种垃圾检测方法及装置 | |
CN108711148B (zh) | 一种基于深度学习的轮胎缺陷智能检测方法 | |
CN110813792B (zh) | 一种智能垃圾识别分类方法 | |
CN105740912B (zh) | 基于核范数正则化的低秩图像特征提取的识别方法及系统 | |
CN111652883B (zh) | 基于深度学习的玻璃表面缺陷检测方法 | |
CN107345927A (zh) | 一种用于机器人自主环境感知的介质材料识别装置 | |
CN101915767B (zh) | 一种鸡蛋裂纹的系统性识别方法 | |
CN111914634A (zh) | 一种抗复杂场景干扰的井盖类别自动检测方法和系统 | |
CN108564577A (zh) | 基于卷积神经网络的太阳能电池片断栅缺陷检测方法 | |
CN107167509A (zh) | 一种用于机器人自主环境感知的介质材料识别方法 | |
CN109886932A (zh) | 基于svm的轮速传感器齿圈表面缺陷检测方法 | |
US20210295039A1 (en) | Methods and electronic devices for automated waste management | |
CN112827846B (zh) | 一种垃圾自动分类的装置及方法 | |
CN109522961A (zh) | 一种基于字典深度学习的半监督图像分类方法 | |
CN106056597A (zh) | 物体视觉检测方法及装置 | |
CN111709393B (zh) | 联合卷积与循环神经网络的结构损伤识别方法 | |
CN104063720A (zh) | 基于深度玻尔兹曼机的电商网站违禁商品图片检测方法 | |
CN114821102A (zh) | 密集柑橘数量检测方法、设备、存储介质及装置 | |
CN110084198A (zh) | 基于Fisher特征分析的CNN机场室内场景识别方法 | |
Tsai et al. | Use SSD to detect the digital region in electricity meter |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |