CN106991427A - 果蔬新鲜度的识别方法及装置 - Google Patents

果蔬新鲜度的识别方法及装置 Download PDF

Info

Publication number
CN106991427A
CN106991427A CN201710072811.6A CN201710072811A CN106991427A CN 106991427 A CN106991427 A CN 106991427A CN 201710072811 A CN201710072811 A CN 201710072811A CN 106991427 A CN106991427 A CN 106991427A
Authority
CN
China
Prior art keywords
fruits
vegetables
freshness
image
identified
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710072811.6A
Other languages
English (en)
Inventor
段胜业
胡江明
李宏言
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Haier Uplus Intelligent Technology Beijing Co Ltd
Original Assignee
Haier Uplus Intelligent Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Haier Uplus Intelligent Technology Beijing Co Ltd filed Critical Haier Uplus Intelligent Technology Beijing Co Ltd
Priority to CN201710072811.6A priority Critical patent/CN106991427A/zh
Publication of CN106991427A publication Critical patent/CN106991427A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/50Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G06V10/507Summing image-intensity values; Histogram projection analysis

Abstract

本发明公开了一种果蔬新鲜度的识别方法及装置,用以解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题。所述方法包括:采集待识别果蔬的果蔬图像;从所述果蔬图像中提取颜色直方图和边缘梯度直方图;将所述颜色直方图和所述边缘梯度直方图组合为特征向量;将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。

Description

果蔬新鲜度的识别方法及装置
技术领域
本发明涉及果蔬储藏技术领域,特别是涉及一种果蔬新鲜度的识别方法及装置。
背景技术
将果蔬保存在冰箱中可以有效提高果蔬的保质时间。现有技术中可以记录果蔬在冰箱中的存放时长,但是现有技术不能获取自采摘到放入冰箱期间的时间和周围环境因素,单纯通过在冰箱中的存放时长推断果蔬的新鲜度;因此现有技术通过记录食物在冰箱中存放时长来判定食物是否过期,未考虑自食物产生到放入冰箱期间的时间,这样单纯通过在冰箱中的存放时长推断果蔬的新鲜度不够客观,条件不充分,导致判断食物是否过期的结论不准确。
发明内容
为了克服上述现有技术的缺陷,本发明要解决的技术问题是提供一种果蔬新鲜度的识别方法及装置,用以解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题。
为解决上述技术问题,本发明中的一种果蔬新鲜度的识别方法,包括:
采集待识别果蔬的果蔬图像;
从所述果蔬图像中提取颜色直方图和边缘梯度直方图;
将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
为解决上述技术问题,本发明中的一种果蔬新鲜度的识别装置,包括:
采集模块,用于采集待识别果蔬的果蔬图像;
提取模块,用于从所述果蔬图像中提取颜色直方图和边缘梯度直方图;将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
识别模块,用于将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
本发明有益效果如下:
本发明中方法及装置,通过采集待识别果蔬的果蔬图像,从所述果蔬图像中提取特定的特征向量,将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度,从而有效解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题。
附图说明
图1是本发明实施例中一种果蔬新鲜度的识别方法流程图;
图2是本发明实施例中果蔬新鲜度模型训练流程图;
图3是本发明实施例中一种具体的果蔬新鲜度的识别方法流程图;
图4是本发明实施例中一种果蔬新鲜度的识别装置的结构示意图。
具体实施方式
为了解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题,本发明提供了一种果蔬新鲜度的识别方法及装置,以下结合附图以及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不限定本发明。
如图1所示,本发明实施例中一种果蔬新鲜度的识别方法,包括:
S101,采集待识别果蔬的果蔬图像;
S102,从所述果蔬图像中提取特征向量;具体说,从所述果蔬图像中提取颜色直方图和边缘梯度直方图;将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
S103,将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
本发明实施例通过采集待识别果蔬的果蔬图像,从所述果蔬图像中提取特定的特征向量,将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度,从而有效解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题。
也就是说,本发明实施例考虑到果蔬在成熟和变腐过程中均会伴随着颜色、形状、轮廓和纹理等外观变化,因此从根本出发,直接获取果蔬的外观特征,通过统计分析的方法对外观特征进行分类识别,直接得到果蔬的新鲜度,不受采摘时间、放入保鲜设备(例如冰箱)时间等条件的约束,进而有效提高了对果蔬新鲜度判断的准确性。本发明实施例较其他现有技术更为直接、有效,并且不受其他条件的限制,能够从根本上直接得到最终结果。
在上述实施例的基础上,进一步提出上述实施例的变型实施例,在此需要说明的是,为了使描述简要,在各变型实施例中仅描述与上述实施例的不同之处。
在本发明的一个实施例中,所述将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度之前,还包括:
采集至少一种果蔬的至少一个图片样本;
针对每种果蔬:对该种果蔬的每个图片样本标注对应的新鲜度标签;
从每个图片样本的果蔬图像提取特征向量;
将提取的特征向量和对应的新鲜度标签送入所述分类器中进行训练,以使所述分类器输出该种果蔬对应的新鲜度识别模型。其中,基于识别效果的考虑,选用SVM(SupportVector Machine)分类器。
在本发明实施例的一个具体实施方式中,所述从每个图片样本的果蔬图像提取特征向量,包括:
对每个图片样本进行分割和尺寸归一化预处理,得到该图片样本的果蔬图像;从得到的果蔬图像中提取特征向量。
在本发明实施例的另一个具体实施方式中,所述提取特征向量包括:
提取颜色直方图和边缘梯度直方图;
将所述颜色直方图和边缘梯度直方图组合为特征向量。
简述本发明实施例中的颜色直方图、边缘梯度直方图和SVM分类器。
颜色直方图:
颜色直方图中的数值都是统计而来,描述了该图像中关于颜色的数量特征,可以反映图像颜色的统计分布和基本色调;颜色直方图只包含了该图像中某一颜色值出现的频数,而不关心某象素所在的空间位置信息;任一幅图像都能唯一的给出一幅与它对应的颜色直方图,但不同的图像可能有相同的颜色分布,从而就具有相同的颜色直方图,因此颜色直方图与图像是一对多的关系;如将图像划分为若干个子区域,所有子区域的颜色直方图之和等于全图直方图;一般情况下,由于图像上的背景和前景物体颜色分布明显不同,从而在颜色直方图上会出现双峰特性,但背景和前景颜色较为接近的图像不具有这个特性。
梯度方向直方图:
梯度方向直方图重在提取图像的边缘信息,通过边缘算子得到每个像素的边缘梯度和边缘方向,并根据方向将直方图划分为若干个bin,将每个像素的边缘梯度根据边缘方向投影到对应的bin中,最终得到梯度方向直方图。主要反映图像的纹理、轮廓和形状等特征。
SVM分类器:
在机器学习领域,支持向量机SVM分类器是一个有监督的学习模型,通常用来进行模式识别、分类、以及回归分析。主要思想可以概括为:它是针对线性可分情况进行分析,对于线性不可分的情况,通过使用非线性映射算法将低维输入空间线性不可分的样本转化为高维特征空间使其线性可分,从而使得高维特征空间采用线性算法对样本的非线性特征进行线性分析成为可能。
本发明实施例采用分类器,通过通过训练的方式得到新鲜度识别模型,并将新鲜度识别模型应用到果蔬的新鲜度检测,从而进一步提高了对果蔬新鲜度判断的准确性。
本发明实施例中果蔬新鲜度识别模型的具体流程如图2所示,包括:
步骤1,采集一种果蔬的图片样本;
步骤2,对果蔬样本进行新鲜度标注,每个图片样本的新鲜度标签即为其最多可再存放多少天;
步骤3,图片样本预处理,将采集的图片样本进行分割、尺寸归一化等预处理;
步骤4,提取预处理图片(即该图片样本的果蔬图像)的颜色直方图和梯度方向直方图,并将二者合并为同一个特征向量;
步骤5,将特征向量和对应的类别标签送入SVM分类器,训练分类器;
步骤6,分类器训练完成,输出训练结果,即果蔬新鲜度识别模型,该模型可以直接得到果蔬对应的新鲜度。
在本发明的另一个实施例中,所述待识别果蔬存储在保鲜设备的储物空间;所述采集待识别果蔬的果蔬图像,包括:
对所述储物空间进行图像采集,得到原始图像;
对所述原始图像进行图像分割,得到1个或多个果蔬图像;
将各果蔬图像分别作为一个待识别果蔬的果蔬图像。
本发明实施例利用图像分割技术对储物空间(例如冷藏室)的照片进行图像分割,将不同果蔬的所在区域分隔开,每种果蔬对应一个区域,得到若干子图像(SubImg0,SubImg1,……,SubImgn),每副子图像包含一种果蔬;也就是说本发明实施例通过图像分割,可以有效的识别出储物空间中的果蔬,为实现对储物空间的存储的多个果蔬进行新鲜度识别提供了必要前提。
在本发明实施例的一个具体实施方式中,所述对所述原始图像进行图像分割,得到1个或多个果蔬图像,包括:
提取所述原始图像中边缘信息,得到1个或多个包含边缘的二值图;
提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像。
进一步说,所述提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像,包括:
通过轮廓面积和先验知识删除不符合预设要求的轮廓;
根据剩余的每个轮廓从所述原始图像中提取一个对应的果蔬图像。
具体说,本发明实施例包括:
步骤1,获取原始果蔬图像(即原始图像);
步骤2,利用Canny算子提取图像的边缘信息,得到只包含边缘的二值图;
步骤3,提取二值图的轮廓;
步骤4,通过轮廓面积和先验知识删除面积过小、过大及特殊形状的轮廓;即删除不符合预设要求的轮廓;
步骤5,剩下的每个轮廓对应一个果蔬的区域;
步骤6,在原始图像中截取每个区域的图像,得到各个果蔬的子图像。
在本发明实施例的另一个具体实施方式中,所述将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度之前,还包括:
采集至少一种果蔬的至少一个果蔬图像(也可称之为图片样本);
针对每种果蔬:对该种果蔬的每个果蔬图像标注果蔬类别标签,形成训练样本;
通过所述训练样本对预先搭建的果蔬类别识别深度学习模型进行监督训练,得到所述果蔬类别识别模型;
通过所述果蔬类别识别模型,识别出所述待识别果蔬的果蔬类别。
进一步说,所述识别出所述待识别果蔬的果蔬类别,还包括:
得到与所述果蔬类别对应的类别索引;
所述根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,包括:
根据所述待识别果蔬的类别索引选择对应的新鲜度识别模型。
本具体实施方式,可以有效的识别出每个果蔬图像对应的果蔬类别。也就是说本具体实施方式实现了通过深度学习技术识别每种果蔬对应的子图像,得到每一种果蔬的所属类别索引(CategoryIndex),包括:
步骤1,搭建果蔬种类识别深度学习网络模型;
步骤2,采集果蔬图片并标注,形成训练样本;
步骤3,通过训练样本对网络模型进行有监督训练,得到果蔬种类识别模型;
步骤4,将子图像作为果蔬种类识别模型,识别模型输出果蔬的种类,得到果蔬所属类别索引CategoryIndex;
在本发明实施例的又一个具体实施方式中,所述对所述储物空间进行图像采集,得到原始图像,包括:
在所述保鲜设备的设定检测范围内进行预设目标检测;
在检测到目标的情况下,对所述目标进行面部识别;
当识别出所述目标的面部朝向所述保鲜设备时,对所述储物空间进行图像采集,得到原始图像。
本具体实施方式基于检测结果,判断是否启动果蔬的新鲜度识别的任务。具体说,包括:
步骤1,通过预置的一个红外探测功能,实时检测冰箱一定范围内是否有目标(例如人)出现;
步骤2,若有人出现,则进行人脸(即面部)识别,检测是否有人脸出现;
步骤3,若检测到人脸,则启动预置的姿态判断模块,判断人脸是否面朝冰箱;
步骤4,若人脸面朝冰箱则表示用户正在关注冰箱,此时启动后续模块执行步骤5,否则不启动;
步骤5,打开保鲜设备(例如冰箱)的储物空间(例如冷藏室)内的灯光,通过摄像头对冷藏室进行拍照,得到冷藏室的照片(Img_all,即原始图像)。
以冰箱为例,举一具体实施方式描述本发明中果蔬新鲜度的识别方法。
如图3所示,本具体实施方式包括:
1、训练果蔬新鲜度识别模型(RecModel);
2、通过唤醒模块判断是否唤醒冰箱,启动果蔬新鲜度识别任务;
3、打开冰箱冷藏室内的灯光,通过摄像头对冷藏室进行拍照,得到冷藏室的照片(Img_all);
4、利用图像分割技术对冷藏室的照片进行图像分割,将不同果蔬的所在区域分隔开,每种果蔬对应一个区域,得到若干子图像(SubImg0,SubImg1……SubImgn),每副子图像包含一种果蔬;
5、通过深度学习技术识别每种果蔬对应的子图像,得到每一种果蔬的所属类别索引(CategoryIndex);
6、识别子图像对应的果蔬新鲜度:
1)提取子图像的颜色直方图和边缘梯度直方图;
2)将二者组合为特征向量FeatureVec;
3)将FeatureVec输入SVM分类器,SVM分类器通过CategoryIndex选择对应的新鲜度识别模型RecModeli,并利用RecModeli对FeatureVec进行新鲜度识别,得到每种果蔬可继续存放的时长(RemainTime);
7、对RemainTime按照升序排列,并将排序结果输出。
本具体实施方式在策略上通过拍摄冰箱内果蔬的图像来识别果蔬的新鲜度,可以通过果蔬的外观特征直接识别出新鲜程度,较其他方式,诸如记录果蔬在冰箱中存放时长的方法、通过往冰箱中存放食物时手工设定计时器等方法,更直接有效。
本发明进一步提出一种果蔬新鲜度的识别装置,包括:
采集模块310,用于采集待识别果蔬的果蔬图像;
提取模块320,用于从所述果蔬图像中提取颜色直方图和边缘梯度直方图;将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
识别模块330,用于将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
本发明实施例通过采集待识别果蔬的果蔬图像,从所述果蔬图像中提取特定的特征向量,将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度,从而有效解决现有技术中对保鲜设备内果蔬新鲜度判断不准确的问题。
在本发明的一个实施例中,所述装置还包括训练模块,所述训练模块包括新鲜度训练模块和类别训练模块:
新鲜度训练模块,用于采集至少一种果蔬的至少一个图片样本;
针对每种果蔬:对该种果蔬的每个图片样本标注对应的新鲜度标签;
从每个图片样本的果蔬图像提取特征向量;
将提取的特征向量和对应的新鲜度标签送入所述分类器中进行训练,以使所述分类器输出该种果蔬对应的新鲜度识别模型。
进一步说,所述从每个图片样本的果蔬图像提取特征向量,包括:
对每个图片样本进行分割和尺寸归一化预处理,得到该图片样本的果蔬图像;
从得到的果蔬图像中提取特征向量。
在本发明的另一个实施例中,所述提取特征向量包括:
提取颜色直方图和边缘梯度直方图;
将所述颜色直方图和边缘梯度直方图组合为特征向量。
在本发明的又一个实施例中,所述待识别果蔬存储在保鲜设备的储物空间;
所述采集模块,具体用于对所述储物空间进行图像采集,得到原始图像;
对所述原始图像进行图像分割,得到1个或多个果蔬图像;
将各果蔬图像分别作为一个待识别果蔬的果蔬图像。
进一步说,所述对所述原始图像进行图像分割,得到1个或多个果蔬图像,包括:
提取所述原始图像中边缘信息,得到1个或多个包含边缘的二值图;
提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像。
其中,所述提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像,包括:
通过轮廓面积和先验知识删除不符合预设要求的轮廓;
根据剩余的每个轮廓从所述原始图像中提取一个对应的果蔬图像。
进一步说,所述类别训练模块,用于采集至少一种果蔬的至少一个果蔬图像;
针对每种果蔬:对该种果蔬的每个果蔬图像标注果蔬类别标签,形成训练样本;
通过所述训练样本对预先搭建的果蔬类别识别深度学习模型进行监督训练,得到所述果蔬类别识别模型;
通过所述果蔬类别识别模型,识别出所述待识别果蔬的果蔬类别。
其中,所述识别出所述待识别果蔬的果蔬类别,还包括:
得到果蔬类别对应的类别索引;
所述根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,包括:
根据所述待识别果蔬的类别索引选择对应的新鲜度识别模型。
在本发明实施例的一个具体实施方式中,所述装置还包括:
探测模块,用于在所述保鲜设备的设定检测范围内进行预设目标检测;
姿态判断模块,用于在检测到目标的情况下,对所述目标进行面部识别;当识别出所述目标的面部朝向所述保鲜设备时,对所述储物空间进行图像采集,得到原始图像。
本发明通过训练果蔬新鲜度识别模型,通过每种果蔬对应一个识别模型,该模型可以直接得到果蔬的新鲜度;通过图像分割模块(即分割模块)有效识别冗余信息和有效信息,从而保证了分割效果,进一步保证了果蔬图片的质量,进一步提高了果蔬新鲜度识别准确性;通过果蔬种类识别模块的识别结果直接决定了使用哪个果蔬新鲜度识别模型,进一步提高了果蔬新鲜度识别错误。从而实现了通过果蔬的颜色、纹理和轮廓等外观特征识别果蔬的新鲜度,采用本发明中装置识别果蔬新鲜度较其他技术更为直接、有效,不受其他条件的限制,能够从根本上直接得到最终结果
需要说明的是,本发明中装置可以是单独存在的一种识别装置,也可以是保鲜设备,还可以是设置在保鲜设备(例如冰箱)的一个功能模块。
也就是说,本发明还提供一种保鲜设备,所述保鲜设备包括上述任意一种果蔬新鲜度的识别装置。所述保鲜设备可以是冰箱、保鲜柜等等。
虽然本申请描述了本发明的特定示例,但本领域技术人员可以在不脱离本发明概念的基础上设计出来本发明的变型。
本领域技术人员在本发明技术构思的启发下,在不脱离本发明内容的基础上,还可以对本发明做出各种改进,这仍落在本发明的保护范围之内。

Claims (10)

1.一种果蔬新鲜度的识别方法,其特征在于,所述方法包括:
采集待识别果蔬的果蔬图像;
从所述果蔬图像中提取颜色直方图和边缘梯度直方图;
将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
2.如权利要求1所述的方法,其特征在于,所述待识别果蔬存储在保鲜设备的储物空间;
所述采集待识别果蔬的果蔬图像,包括:
对所述储物空间进行图像采集,得到原始图像;
对所述原始图像进行图像分割,得到1个或多个果蔬图像;
将各果蔬图像分别作为一个待识别果蔬的果蔬图像。
3.如权利要求2所述的方法,其特征在于,所述对所述原始图像进行图像分割,得到1个或多个果蔬图像,包括:
提取所述原始图像中边缘信息,得到1个或多个包含边缘的二值图;
提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像。
4.如权利要求3所述的方法,其特征在于,所述提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像,包括:
通过轮廓面积和先验知识删除不符合预设要求的轮廓;
根据剩余的每个轮廓从所述原始图像中提取一个对应的果蔬图像。
5.如权利要求2所述的方法,其特征在于,所述对所述储物空间进行图像采集,得到原始图像,包括:
在所述保鲜设备的设定检测范围内进行预设目标检测;
在检测到目标的情况下,对所述目标进行面部识别;
当识别出所述目标的面部朝向所述保鲜设备时,对所述储物空间进行图像采集,得到原始图像。
6.如权利要求1-5中任意一项所述的方法,其特征在于,所述将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度之前,还包括:
采集至少一种果蔬的至少一个图片样本;
针对每种果蔬:
对该种果蔬的每个图片样本标注对应的新鲜度标签;从每个图片样本的果蔬图像提取特征向量;将提取的特征向量和对应的新鲜度标签送入所述分类器中进行训练,以使所述分类器输出该种果蔬对应的新鲜度识别模型;和/或
对该种果蔬的每个图片样本标注对应的果蔬类别标签,形成训练样本;通过所述训练样本对预先搭建的果蔬类别识别深度学习模型进行监督训练,得到所述果蔬类别识别模型;通过所述果蔬类别识别模型,识别出所述待识别果蔬的果蔬类别。
7.一种果蔬新鲜度的识别装置,其特征在于,所述装置包括:
采集模块,用于采集待识别果蔬的果蔬图像;
提取模块,用于从所述果蔬图像中提取颜色直方图和边缘梯度直方图;将所述颜色直方图和所述边缘梯度直方图组合为特征向量;
识别模块,用于将所述特征向量输入预设的分类器中,并使所述分类器根据所述待识别果蔬的果蔬类别选择对应的新鲜度识别模型,以使所述新鲜度识别模型识别所述待识别果蔬的新鲜度。
8.如权利要求7所述的装置,其特征在于,所述待识别果蔬存储在保鲜设备的储物空间;
所述采集模块,具体用于对所述储物空间进行图像采集,得到原始图像;
对所述原始图像进行图像分割,得到1个或多个果蔬图像;
将各果蔬图像分别作为一个待识别果蔬的果蔬图像。
9.如权利要求8所述的装置,其特征在于,所述对所述原始图像进行图像分割,得到1个或多个果蔬图像,包括:
提取所述原始图像中边缘信息,得到1个或多个包含边缘的二值图;
提取每个所述二值图的轮廓,根据每个轮廓从所述原始图像中提取一个对应的果蔬图像。
10.如权利要求7-9中任意一项所述的装置,其特征在于,所述装置还包括:
训练模块,用于采集至少一种果蔬的至少一个图片样本;
针对每种果蔬:
对该种果蔬的每个图片样本标注对应的新鲜度标签;从每个图片样本的果蔬图像提取特征向量;将提取的特征向量和对应的新鲜度标签送入所述分类器中进行训练,以使所述分类器输出该种果蔬对应的新鲜度识别模型;和/或,
对该种果蔬的每个图片样本标注对应的果蔬类别标签,形成训练样本;通过所述训练样本对预先搭建的果蔬类别识别深度学习模型进行监督训练,得到所述果蔬类别识别模型;通过所述果蔬类别识别模型,识别出所述待识别果蔬的果蔬类别。
CN201710072811.6A 2017-02-10 2017-02-10 果蔬新鲜度的识别方法及装置 Pending CN106991427A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710072811.6A CN106991427A (zh) 2017-02-10 2017-02-10 果蔬新鲜度的识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710072811.6A CN106991427A (zh) 2017-02-10 2017-02-10 果蔬新鲜度的识别方法及装置

Publications (1)

Publication Number Publication Date
CN106991427A true CN106991427A (zh) 2017-07-28

Family

ID=59414177

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710072811.6A Pending CN106991427A (zh) 2017-02-10 2017-02-10 果蔬新鲜度的识别方法及装置

Country Status (1)

Country Link
CN (1) CN106991427A (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107665336A (zh) * 2017-09-20 2018-02-06 厦门理工学院 智能冰箱中基于Faster‑RCNN的多目标检测方法
CN108224894A (zh) * 2018-01-08 2018-06-29 合肥美的智能科技有限公司 基于深度学习的食材新鲜度识别方法、装置、冰箱和介质
CN109447165A (zh) * 2018-11-02 2019-03-08 西安财经学院 一种农产品品质状态识别方法及装置
CN109740681A (zh) * 2019-01-08 2019-05-10 南方科技大学 一种水果分拣方法、装置、系统、终端及存储介质
CN109753980A (zh) * 2017-11-03 2019-05-14 虹软科技股份有限公司 一种用于检测的方法和装置
CN110210406A (zh) * 2019-06-04 2019-09-06 北京字节跳动网络技术有限公司 用于拍摄图像的方法和装置
CN110287824A (zh) * 2019-06-10 2019-09-27 秒针信息技术有限公司 识别食物的方法及装置
CN110503314A (zh) * 2019-08-02 2019-11-26 Oppo广东移动通信有限公司 一种新鲜度评估方法及装置、存储介质
CN110659579A (zh) * 2019-08-23 2020-01-07 平安科技(深圳)有限公司 变质物品识别方法、装置、设备和介质
CN110738250A (zh) * 2019-10-09 2020-01-31 陈浩能 果蔬新鲜度识别方法及相关产品
CN111126156A (zh) * 2019-11-27 2020-05-08 四川大学 一种基于机器学习的菜品新鲜度识别方法
CN111558943A (zh) * 2020-04-01 2020-08-21 电子科技大学 一种基于机器学习的智能管家机器人
CN113670920A (zh) * 2021-07-30 2021-11-19 华中农业大学 一种柑橘新鲜度检测方法及装置
CN115078662A (zh) * 2022-07-22 2022-09-20 广东省农业科学院蚕业与农产品加工研究所 一种蔬果保鲜状态的智能分析方法及系统
CN116976675A (zh) * 2023-08-09 2023-10-31 南京龟兔赛跑软件研究院有限公司 一种基于物联网数据监控的冷链运输风险预警方法及系统
CN110659579B (zh) * 2019-08-23 2024-05-03 平安科技(深圳)有限公司 变质物品识别方法、装置、设备和介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103093208A (zh) * 2013-01-23 2013-05-08 中国科学技术大学 一种果蔬识别的方法及系统
CN105160317A (zh) * 2015-08-31 2015-12-16 电子科技大学 一种基于区域分块行人性别识别方法
CN105301208A (zh) * 2015-10-28 2016-02-03 张捷 一种生鲜蔬菜新鲜度检测系统及方法
CN105302872A (zh) * 2015-09-30 2016-02-03 努比亚技术有限公司 图像处理装置和方法
CN105717051A (zh) * 2016-04-22 2016-06-29 合肥美菱股份有限公司 一种快速检测果蔬新鲜度的系统及冰箱
CN105891112A (zh) * 2016-03-31 2016-08-24 江苏大学 一种基于Android手机的蔬菜叶片新鲜度检测装置及方法
CN106338517A (zh) * 2016-09-23 2017-01-18 江苏大学 基于视觉和嗅觉信息协同的水果新鲜度智能化评判方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103093208A (zh) * 2013-01-23 2013-05-08 中国科学技术大学 一种果蔬识别的方法及系统
CN105160317A (zh) * 2015-08-31 2015-12-16 电子科技大学 一种基于区域分块行人性别识别方法
CN105302872A (zh) * 2015-09-30 2016-02-03 努比亚技术有限公司 图像处理装置和方法
CN105301208A (zh) * 2015-10-28 2016-02-03 张捷 一种生鲜蔬菜新鲜度检测系统及方法
CN105891112A (zh) * 2016-03-31 2016-08-24 江苏大学 一种基于Android手机的蔬菜叶片新鲜度检测装置及方法
CN105717051A (zh) * 2016-04-22 2016-06-29 合肥美菱股份有限公司 一种快速检测果蔬新鲜度的系统及冰箱
CN106338517A (zh) * 2016-09-23 2017-01-18 江苏大学 基于视觉和嗅觉信息协同的水果新鲜度智能化评判方法

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107665336A (zh) * 2017-09-20 2018-02-06 厦门理工学院 智能冰箱中基于Faster‑RCNN的多目标检测方法
CN109753980A (zh) * 2017-11-03 2019-05-14 虹软科技股份有限公司 一种用于检测的方法和装置
US11120310B2 (en) 2017-11-03 2021-09-14 Arcsoft Corporation Limited Detection method and device thereof
CN108224894B (zh) * 2018-01-08 2020-04-28 合肥美的智能科技有限公司 基于深度学习的食材新鲜度识别方法、装置、冰箱和介质
CN108224894A (zh) * 2018-01-08 2018-06-29 合肥美的智能科技有限公司 基于深度学习的食材新鲜度识别方法、装置、冰箱和介质
CN109447165A (zh) * 2018-11-02 2019-03-08 西安财经学院 一种农产品品质状态识别方法及装置
CN109740681A (zh) * 2019-01-08 2019-05-10 南方科技大学 一种水果分拣方法、装置、系统、终端及存储介质
CN110210406A (zh) * 2019-06-04 2019-09-06 北京字节跳动网络技术有限公司 用于拍摄图像的方法和装置
CN110287824A (zh) * 2019-06-10 2019-09-27 秒针信息技术有限公司 识别食物的方法及装置
CN110503314A (zh) * 2019-08-02 2019-11-26 Oppo广东移动通信有限公司 一种新鲜度评估方法及装置、存储介质
CN110659579A (zh) * 2019-08-23 2020-01-07 平安科技(深圳)有限公司 变质物品识别方法、装置、设备和介质
CN110659579B (zh) * 2019-08-23 2024-05-03 平安科技(深圳)有限公司 变质物品识别方法、装置、设备和介质
CN110738250A (zh) * 2019-10-09 2020-01-31 陈浩能 果蔬新鲜度识别方法及相关产品
CN110738250B (zh) * 2019-10-09 2024-02-27 陈浩能 果蔬新鲜度识别方法及相关产品
CN111126156A (zh) * 2019-11-27 2020-05-08 四川大学 一种基于机器学习的菜品新鲜度识别方法
CN111558943A (zh) * 2020-04-01 2020-08-21 电子科技大学 一种基于机器学习的智能管家机器人
CN113670920A (zh) * 2021-07-30 2021-11-19 华中农业大学 一种柑橘新鲜度检测方法及装置
CN115078662A (zh) * 2022-07-22 2022-09-20 广东省农业科学院蚕业与农产品加工研究所 一种蔬果保鲜状态的智能分析方法及系统
CN116976675A (zh) * 2023-08-09 2023-10-31 南京龟兔赛跑软件研究院有限公司 一种基于物联网数据监控的冷链运输风险预警方法及系统
CN116976675B (zh) * 2023-08-09 2024-04-05 南京龟兔赛跑软件研究院有限公司 一种基于物联网数据监控的冷链运输风险预警方法及系统

Similar Documents

Publication Publication Date Title
CN106991427A (zh) 果蔬新鲜度的识别方法及装置
CN102779338B (zh) 图像处理方法和图像处理装置
CN109447169A (zh) 图像处理方法及其模型的训练方法、装置和电子系统
CN105160317B (zh) 一种基于区域分块行人性别识别方法
CN107273796A (zh) 一种基于人脸特征的快速人脸识别搜索方法
CN106570510B (zh) 一种超市商品识别方法
CN107330892A (zh) 一种基于随机森林法的向日葵病害识别方法
CN110189383B (zh) 基于机器学习的中医舌色苔色定量分析方法
CN102103690A (zh) 一种自动的头发区域分割方法
CN106845513B (zh) 基于条件随机森林的人手检测器及方法
CN103323455A (zh) 基于反射、透视和显微图像的烟叶分级方法
CN105389581B (zh) 一种胚芽米胚芽完整度智能识别系统及其识别方法
US8135216B2 (en) Systems and methods for unsupervised local boundary or region refinement of figure masks using over and under segmentation of regions
CN110097510B (zh) 一种纯色花朵识别方法、装置及存储介质
CN108062971A (zh) 冰箱菜谱推荐的方法、装置及计算机可读存储介质
CN109034094A (zh) 一种物品查找方法和装置
Asmara et al. Chicken meat freshness identification using the histogram color feature
CN110857831A (zh) 控制冰箱温度的方法及装置
Sabri et al. Evaluation of color models for palm oil fresh fruit bunch ripeness classification
Chen et al. A practical solution for ripe tomato recognition and localisation
Tian et al. An image processing method for green apple lesion detection in natural environment based on GA-BPNN and SVM
CN105404682B (zh) 一种基于数字图像内容的图书检索方法
CN113313692B (zh) 一种基于航拍可见光图像的香蕉幼株自动识别与计数方法
Castelo-Quispe et al. Optimization of brazil-nuts classification process through automation using colour spaces in computer vision
CN106066887B (zh) 一种广告序列图像快速检索和分析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170728

RJ01 Rejection of invention patent application after publication