CN111709913B - 冰箱内变质食品检测方法、装置及系统 - Google Patents

Abstract

本发明提供了冰箱内变质食品检测方法、装置及系统，该方法包括：获取冰箱内摄像头采集到的第一图像，其中，第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像；从第一图像中分别提取每一个目标食品的第二图像；分别将每一个第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个第二图像所对应的目标食品是否变质；如果确定一个第二图像所对应的目标食品发生变质，则向冰箱的用户发送第一提示信息，其中，第一提示信息用于指示相应的目标食品发生变质。本方案可以方便检测外表变质却无异味的食品。

Description

冰箱内变质食品检测方法、装置及系统

技术领域

本发明涉及智能家电设备技术领域，特别涉及冰箱内变质食品检测方法、装置及系统。

背景技术

随着人工智能的发展，智能冰箱的市场占有率逐年都在增加，已成为每个家庭必不可少的生活电器。智能冰箱作为一种低温储存食物或其他物品的工具，可以为食品的保鲜和在保质期内的食品储存提供最佳的保存温度。

专利申请号为201711457364的中国专利申请文件公开了一种冰箱异味检测方法，通过气体分离的方式，计算冰箱内总的气体苯乙烯的浓度值，并将该浓度值与气味嗅阈值做对比，从而判断其异味的产生，以便用户及时对冰箱进行清理。

然而，现有技术通过上述气味分离的方式，计算冰箱内总的气体苯乙烯的浓度值与气味嗅阈值做对比，实现对冰箱异味的检测，而对于一些外表变质却无异味的食品则无法进行检测。

发明内容

本发明实施例提供了冰箱内变质食品检测方法、装置及系统，可以方便检测外表变质却无异味的食品。

第一方面，本发明提供了冰箱内变质食品检测方法，包括：

获取冰箱内摄像头采集到的第一图像，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像；

从所述第一图像中分别提取每一个所述目标食品的所述第二图像；

分别将每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质；

如果确定一个所述第二图像所对应的所述目标食品发生变质，则向所述冰箱的用户发送第一提示信息，其中，所述第一提示信息用于指示相应的所述目标食品发生变质。

优选地，

所述分别将每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质，包括：

针对每一个所述第二图像，均执行：

按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照所述图像转换规则转换出的二进制序列不同，且所转换出的所述二进制序列具有相同的位数；

按照所述图像转换规则，分别将每一个所述变质食品图像转换为相对应的第二二进制序列；

分别计算每一个所述第二二进制序列与所述第一二进制序列之间的相似度，其中，所述相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断各个所述第二二进制序列中是否存在与所述第一二进制序列之间所述相似度不为零的至少一个第三二进制序列；

如果存在所述至少一个第三二进制序列，则确定所述第二图像对应的所述目标食品变质。

优选地，

在所述确定所述第二图像对应的所述目标食品变质之后，且在所述向所述冰箱的用户发送第一提示信息之前，进一步包括：

从所述至少一个第三二进制序列中确定与所述第一二进制序列之间的所述相似度最大的至少一个第四二进制序列；

判断所述第四二进制序列的个数是否等于1,；

如果所述第四二进制序列的个数等于1，则将所述第四二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品；

如果所述第四二进制序列的个数大于1，则分别将每一个所述第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个所述第四二进制序列确定为第五二进制序列，将所述第五二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品。

优选地，

进一步包括：

获取所述冰箱内气味传感器检测到的所述冰箱内的至少一种气味的浓度；

针对所述至少一种气味中的每一种气味，判断该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

如果一种所述气味的浓度大于该气味对应的所述嗅阈值，则向所述用户发送第二提示信息，其中，所述第二提示信息用于指示所述冰箱内存在发生变质的食品。

第二方面，本发明提供了冰箱内变质食品检测装置，包括：

第一获取模块，用于获取冰箱内摄像头采集到的第一图像，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像；

提取模块，用于从所述第一获取模块获取到的所述第一图像中分别提取每一个所述目标食品的所述第二图像；

第一确定模块，用于分别将所述提取模块提取到的每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质；

第一处理模块，用于如果所述第一确定模块确定的一个所述第二图像所对应的所述目标食品发生变质，则向所述冰箱的用户发送第一提示信息，其中，所述第一提示信息用于指示相应的所述目标食品发生变质。

优选地，

所述确定模块，包括：

第一转换单元，用于针对每一个所述第二图像，按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照所述图像转换规则转换出的二进制序列不同，且所转换出的所述二进制序列具有相同的位数；

第二转换单元，用于按照所述图像转换规则，分别将每一个所述变质食品图像转换为相对应的第二二进制序列；

计算单元，用于分别计算每一个所述第二转换单元转换出的所述第二二进制序列与所述第一转换单元转换出的所述第一二进制序列之间的相似度，其中，所述相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断单元，用于判断各个所述第二二进制序列中是否存在与所述第一二进制序列之间通过所述计算单元计算出的所述相似度不为零的至少一个第三二进制序列；

处理单元，用于如果所述判断单元判断出存在所述至少一个第三二进制序列，则确定所述第二图像对应的所述目标食品变质。

优选地，

进一步包括：

第二确定模块，用于从所述处理单元得到的所述至少一个第三二进制序列中确定与所述第一二进制序列之间的所述相似度最大的至少一个第四二进制序列；

第一判断模块，用于判断所述第二确定模块确定出的所述第四二进制序列的个数是否等于1,；

第二处理模块，用于如果所述第一判断模块判断出的所述第四二进制序列的个数等于1，则将所述第四二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品；如果所述第一判断模块判断出所述第四二进制序列的个数大于1，则分别将每一个所述第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个所述第四二进制序列确定为第五二进制序列，将所述第五二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品。

优选地，

进一步包括：

第二获取模块，用于获取所述冰箱内气味传感器检测到的所述冰箱内的至少一种气味的浓度；

第二判断模块，用于针对所述至少一种气味中的每一种气味，判断所述第二获取模块获取到的该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

第三处理模块，用于如果所述第二判断模块判断出一种所述气味的浓度大于该气味对应的所述嗅阈值，则向所述用户发送第二提示信息，其中，所述第二提示信息用于指示所述冰箱内存在发生变质的食品。

第三方面，本发明提供了冰箱内变质食品检测系统，包括：第二方面中任一所述的冰箱内变质食品检测装置和内部设置有摄像头的冰箱；

所述冰箱，用于通过所述摄像头采集第一图像，并将所述第一图像发送给所述冰箱内变质食品检测装置，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像。

优选地，

所述冰箱，进一步用于通过其内部所设置的气味传感器检测其内部的至少一种气味的浓度，冰箱所检测到的所述至少一种气味的浓度发送给所述冰箱内变质食品检测装置。

本发明实施例提供了冰箱内变质食品检测方法、装置及系统，冰箱作为一种低温储存食物或其他物品的工具，其本身的制冷模式可以为食品的保鲜和在保质期内的食品储存提供冷藏，然而冰箱内储藏的一些食品在外表发生变质之后会影响其他食品的冷藏，因此，为了解决上述问题，可以预先存储至少一个变质食品图像，然后获取冰箱内摄像头采集到的第一图像，第一图像包括有存放在冰箱内的至少一个目标食品的第二图像，再从第一图像中分别提取每一个目标食品的第二图像，并基于提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，分别确定每一个第二图像所对应的目标食品是否变质，并在确定一个第二图像所对应的目标食品发生变质时，向冰箱的用户发送第一提示信息，以提示用户变质的食品。通过上述方式，在冰箱的储藏室内部一些食品外表发生变质的情况下，无需打开冰箱即可及时地发现变质的目标食品，从而可以方便地对冰箱内变质食品进行检测。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一实施例提供的一种冰箱内变质食品检测方法的流程图；

图2是本发明一实施例提供的另一种冰箱内变质食品检测方法的流程图；

图3是本发明一实施例提供的一种冰箱内变质食品检测装置的示意图；

图4是本发明一实施例提供的另一种冰箱内变质食品检测装置的示意图；

图5是本发明一实施例提供的又一种冰箱内变质食品检测装置的示意图；

图6是本发明一实施例提供的再一种冰箱内变质食品检测装置的示意图；

图7是本发明一实施例提供的一种冰箱内变质食品检测系统的示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例，基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，本发明实施例提供了冰箱内变质食品检测方法，该方法可以包括以下步骤：

步骤101：获取冰箱内摄像头采集到的第一图像，其中，第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像；

步骤102：从第一图像中分别提取每一个目标食品的第二图像；

步骤103：分别将每一个第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个第二图像所对应的目标食品是否变质；

步骤104：如果确定一个第二图像所对应的目标食品发生变质，则向冰箱的用户发送第一提示信息，其中，第一提示信息用于指示相应的目标食品发生变质。

在本发明实施例中，冰箱作为一种低温储存食物或其他物品的工具，其本身的制冷模式可以为食品的保鲜和在保质期内的食品储存提供冷藏，然而冰箱内储藏的一些食品在外表发生变质之后会影响其他食品的冷藏，因此，为了解决上述问题，可以预先存储至少一个变质食品图像，然后获取冰箱内摄像头采集到的第一图像，第一图像包括有存放在冰箱内的至少一个目标食品的第二图像，再从第一图像中分别提取每一个目标食品的第二图像，并基于提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，分别确定每一个第二图像所对应的目标食品是否变质，并在确定一个第二图像所对应的目标食品发生变质时，向冰箱的用户发送第一提示信息，以提示用户变质的食品。通过上述方式，在冰箱的储藏室内部一些食品外表发生变质的情况下，无需打开冰箱即可及时地发现变质的目标食品，从而可以方便地对冰箱内变质食品进行检测。

为了确定第二图像对应的目标食品是否变质，在本发明一实施例中，上述实施例中的步骤103分别将每一个第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个第二图像所对应的目标食品是否变质，具体可以通过如下方式实现：

针对每一个第二图像，按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照图像转换规则转换出的二进制序列不同，且所转换出的二进制序列具有相同的位数；

按照图像转换规则，分别将每一个变质食品图像转换为相对应的第二二进制序列；

分别计算每一个第二二进制序列与第一二进制序列之间的相似度，其中，相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断各个第二二进制序列中是否存在与第一二进制序列之间相似度不为零的至少一个第三二进制序列；

如果存在至少一个第三二进制序列，则确定第二图像对应的目标食品变质。

在本发明一实施例中，由于不同图像按照图像转换规则转换出的二进制序列不同，因此，为了方便确定第二图像对应的目标食品变质，可以根据预先设定的图像转换规则将每一个第二图像转换为相对应的第一二进制序列，并将每一个变质食品图像转换为相对应的第二二进制序列，同时在上述转换的过程中需要控制所转换出的二进制序列具有相同的位数，以使分析结果更为准确。基于相似度可以用于表征两个二进制序列中在具有相同数值的数据位的个数，可以分别计算每一个第二二进制序列与第一二进制序列之间的相似度，并在第二二进制序列中存在与第一二进制序列之间相似度不为零的至少一个第三二进制序列时，确定第二图像所对应的目标食品变质。

为了确定第二图像对应的食品，在本发明一实施例中，上述实施例中在步骤确定第二图像对应的目标食品变质之后，且在向冰箱的用户发送提示信息之前，进一步包括：

从至少一个第三二进制序列中确定与第一二进制序列之间的相似度最大的至少一个第四二进制序列；

判断第四二进制序列的个数是否等于1,；

如果第四二进制序列的个数等于1，则将第四二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品；

如果第四二进制序列的个数大于1，则分别将每一个第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个第四二进制序列确定为第五二进制序列，将第五二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品。

在本发明一实施例中，为了便于用户清理冰箱中变质的食品，在确定第二图像所对应的目标食品变质之后，可以通过二进制序列方便地确定变质的食品。由于存在至少一个第三二进制序列，且第三二进制序列不为零的情况，相似度越大表明相近程度越高，因此，可以从至少一个第三二进制序列中确定与第一二进制序列之间的相似度最大的至少一个第四二进制序列，通过第四二进制序列确定第二图像对应的食品，而第四二进制序列的个数可能也存在多个的情况，为了便于分析，在第四二进制序列的个数大于1时，可以将每一个第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个第四二进制序列确定为第五二进制序列，将第五二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品。

为了通过检测冰箱内的异味确定冰箱内是否存在发生变质的食品，在本发明一实施例中，进一步包括：

获取冰箱内气味传感器检测到的冰箱内的至少一种气味的浓度；

针对至少一种气味中的每一种气味，判断该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

如果一种气味的浓度大于该气味对应的嗅阈值，则向用户发送第二提示信息，其中，第二提示信息用于指示冰箱内存在发生变质的食品。

在本发明一实施例中，一些食品变质后无法通过外表确定是否变质，可以通过气味传感器检测冰箱内的至少一种气味的浓度，针对每一种气味，可以基于预先针对该气味所设置的嗅阈值，确定该气味的浓度大于该气味对应的嗅阈值，并在该气味的浓度大于该气味对应的嗅阈值时，向用户发送可以指示冰箱内存在发生变质的食品第二提示信息，以提醒用户及时清理产生异味的食品。通过上述方式，可以达到冰箱内异味存在时间最短，给冰箱创造一个干净清爽的环境。

如图2所示，为了更加清楚地说明本发明的技术方案及优点，下面对本发明实施例提供了冰箱内变质食品检测方法进行详细说明，具体可以包括以下步骤：

步骤201：获取冰箱内摄像头采集到的第一图像，其中，第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像。

具体地，通过获取摄像头采集的第一图像，而第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像，以便对每一个第二图像进行分析。

举例来说，冰箱内可以安装多个高清摄像头，用于采集包括有存放在冰箱内的至少一个目标食品的第二图像对应的第一图像，为避免需要频繁采集，可以设置摄像头定时采集第一图像，定时的时间用户可以自行在冰箱上设置。冰箱可以将采集到的第一图像通过WiFi上传至云平台服务器。

步骤202：从第一图像中分别提取每一个目标食品的第二图像。

步骤203：针对每一个第二图像，按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照图像转换规则转换出的二进制序列不同，且所转换出的二进制序列具有相同的位数。

步骤204：按照图像转换规则，分别将每一个变质食品图像转换为相对应的第二二进制序列。

步骤205：分别计算每一个第二二进制序列与第一二进制序列之间的相似度，其中，相似度用于表征两个二进制序列中在具有相同数值的数据位的个数。

步骤206：判断各个第二二进制序列中是否存在与第一二进制序列之间相似度不为零的至少一个第三二进制序列。

步骤207：如果各个第二二进制序列中存在与第一二进制序列之间相似度不为零的至少一个第三二进制序列，则确定第二图像对应的目标食品变质。

步骤208：从至少一个第三二进制序列中确定与第一二进制序列之间的相似度最大的至少一个第四二进制序列。

步骤209：判断第四二进制序列的个数是否等于1，若是，执行步骤210，否则，执行步骤211。

步骤210：将第四二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品，并执行步骤212。

步骤211：分别将每一个第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个第四二进制序列确定为第五二进制序列，将第五二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品。

具体地，云平台服务器可以预先采集好变质食品图像对应的图像库。预先采集好的变质食品图像库中可以对应至少一个二进制序列，以助于对比分析冰箱内食品变质情况。

举例来说，可以首先通过操作系统函数将冰箱采集上传的第一图像分解为二进制序列，假设冰箱内一张第二图像A的第一二进制序列为110111，苹果变质的图片B的第二二进制序列为001000，香蕉变质的图片C的第二二进制序列为111000，黄瓜变质的图片D的第二二进制序列为000111，梨子变质的图片E的第二二进制序列为100011，萝卜变质的图片F的第二二进制序列为010001。将A逐一与B、C、D、E、F进行二进制数据位对比，计算其相似度。比如A与B的相似度为0，A与C的相似度2，A与D的相似度为4，A与E的相似度为4，A与F的对比相似度为3，存在相似度不为零的至少一个第三二进制序列，此时可以确定第二图像A对应的目标食品变质。

由于A与D的相似度为4以及A与E的相似度为4，即第四二进制序列有两个(不等于1)，则可以将两个第四二进制序列转化为十进制序列，例如将D换算为十进制序列为7，将E换算为十进制序列为43，并取最大值E即为最佳相似度，同时可以确定E对应的食品梨子为第二图像对应的食品。

步骤212：向所述冰箱的用户发送第一提示信息，其中，所述第一提示信息用于指示相应的所述目标食品发生变质。

具体地，确定出第二图像对应的食品，可以通过短信的形式向用户发送第一提示信息，以方便用户进行详细查看，及时处理变质食品。

步骤213：获取所述冰箱内气味传感器检测到的所述冰箱内的至少一种气味的浓度。

步骤214：针对至少一种气味中的每一种气味，判断该气味的浓度是否大于预先针对该气味所设置的嗅阈值，若是，执行步骤215，否则结束当前流程。

步骤215：向用户发送第二提示信息，其中，第二提示信息用于指示冰箱内存在发生变质的食品。

具体地，某些食品变质后，无法通过外表确定是否变质，比如烹饪的食品以及一些内部已经变质的蔬菜或者水果。可以通过气味传感器，定时地检测冰箱内气味情况，通过气味检测算法，计算出冰箱内多种气味的浓度。将计算出的各个气味浓度与对应的嗅阈值做对比。

举例来说，假设冰箱内测得甲硫醇的浓度为0.00009，甲硫醇对应的嗅阈值0.00007，由于甲硫醇的浓度大于对应的嗅阈值，则可确定冰箱内存在发生变质的食品，并可通过短信的形式给用户发送第二提示信息，以及时提醒用户清理冰箱。

如图3所示，本发明实施例提供了冰箱内变质食品检测装置，包括：

第一获取模块301，用于获取冰箱内摄像头采集到的第一图像，其中，第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像；

提取模块302，用于从第一获取模块301获取到的第一图像中分别提取每一个目标食品的第二图像；

第一确定模块303，用于分别将提取模块302提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个第二图像所对应的目标食品是否变质；

第一处理模块304，用于如果第一确定模块303确定一个第二图像所对应的目标食品发生变质，则向冰箱的用户发送第一提示信息，其中，第一提示信息用于指示相应的目标食品发生变质。

在本发明实施例中，冰箱作为一种低温储存食物或其他物品的工具，其本身的制冷模式可以为食品的保鲜和在保质期内的食品储存提供冷藏，然而冰箱内储藏的一些食品在外表发生变质之后会影响其他食品的冷藏，因此，为了解决上述问题，可以预先存储至少一个变质食品图像，然后通过第一获取模块获取冰箱内摄像头采集到的第一图像，第一图像包括有存放在冰箱内的至少一个目标食品的第二图像，再通过提取模块从第一图像中分别提取每一个目标食品的第二图像，并通过第一确定模块基于提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，分别确定每一个第二图像所对应的目标食品是否变质，并通过第一处理模块在确定一个第二图像所对应的目标食品发生变质时，向冰箱的用户发送第一提示信息，以提示用户变质的食品。通过上述方式，在冰箱的储藏室内部一些食品外表发生变质的情况下，无需打开冰箱即可及时地发现变质的目标食品，从而可以方便地对冰箱内变质食品进行检测。

如图4所示，基于图3所示的冰箱内部变质食品检测装置，在本发明一实施例中，第一确定模块303，包括：

第一转换单元3031，用于针对每一个第二图像，按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照图像转换规则转换出的二进制序列不同，且所转换出的二进制序列具有相同的位数；

第二转换单元3032，用于按照图像转换规则，分别将每一个变质食品图像转换为相对应的第二二进制序列；

计算单元3033，用于分别计算每一个第二转换单元3032转换出的第二二进制序列与第一转换单元3031转换出的第一二进制序列之间的相似度，其中，相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断单元3034，用于判断各个第二二进制序列中是否存在与第一二进制序列之间通过计算单元3033计算出的相似度不为零的至少一个第三二进制序列；

处理单元3035，用于如果判断单元3034判断出存在至少一个第三二进制序列，则确定第二图像对应的目标食品变质。

如图5所示，基于图3和图4所示的冰箱内部变质食品检测装置，在本发明一实施例中，进一步包括：

第二确定模块305，用于从处理单元3035得到的至少一个第三二进制序列中确定与第一二进制序列之间的相似度最大的至少一个第四二进制序列；

第一判断模块306，用于判断第二确定模块305确定出的第四二进制序列的个数是否等于1,；

第二处理模块307，用于如果第一判断模块306判断出的第四二进制序列的个数等于1，则将第四二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品；如果第一判断模块判断出第四二进制序列的个数大于1，则分别将每一个第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个第四二进制序列确定为第五二进制序列，将第五二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品。

如图6所示，基于图3、图4和图5所示的冰箱内部变质食品检测装置，在本发明一实施例中，进一步包括：

第二获取模块308，用于获取冰箱内气味传感器检测到的冰箱内的至少一种气味的浓度；

第二判断模块309，用于针对至少一种气味中的每一种气味，判断第二获取模块308获取到的该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

第三处理模块310，用于如果第二判断模块309判断出一种气味的浓度大于该气味对应的嗅阈值，则向用户发送第二提示信息，其中，第二提示信息用于指示冰箱内存在发生变质的食品。

如图7所示，本发明实施例提供了冰箱内变质食品检测系统，包括：上述实施例中任一的冰箱内变质食品检测装置701和内部设置有摄像头的冰箱702；

冰箱702，用于通过摄像头采集第一图像，并将第一图像发送给冰箱内变质食品检测装置701，其中，第一图像中包括有存放在冰箱内的至少一个目标食品的第二图像。

在本发明实施例中，冰箱作为一种低温储存食物或其他物品的工具，其本身的制冷模式可以为食品的保鲜和在保质期内的食品储存提供冷藏，然而冰箱内储藏的一些食品在外表发生变质之后会影响其他食品的冷藏，因此，为了解决上述问题，冰箱内变质食品检测装置可以预先存储至少一个变质食品图像，然后获取冰箱内摄像头采集到的第一图像，第一图像包括有存放在冰箱内的至少一个目标食品的第二图像，再从第一图像中分别提取每一个目标食品的第二图像，并基于提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，分别确定每一个第二图像所对应的目标食品是否变质，并在冰箱内变质食品检测装置确定一个第二图像所对应的目标食品发生变质时，向冰箱的用户发送第一提示信息，以提示用户变质的食品。通过上述方式，在冰箱的储藏室内部一些食品外表发生变质的情况下，无需打开冰箱即可及时地发现变质的目标食品，从而可以方便地对冰箱内变质食品进行检测。

在本发明一实施例中，冰箱702，进一步用于通过其内部所设置的气味传感器检测其内部的至少一种气味的浓度，冰箱所检测到的至少一种气味的浓度发送给冰箱内变质食品检测装置701。

可以理解的是，本发明实施例示意的结构并不构成对冰箱内变质食品检测装置的具体限定。在本发明的另一些实施例中，冰箱内变质食品检测装置可以包括比图示更多或者更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件、软件或者软件和硬件的组合来实现。

上述装置内的各单元之间的信息交互、执行过程等内容，由于与本发明方法实施例基于同一构思，具体内容可参见本发明方法实施例中的叙述，此处不再赘述。

本发明实施例还提供了冰箱内变质食品检测装置，包括：至少一个存储器和至少一个处理器；

至少一个存储器，用于存储机器可读程序；

至少一个处理器，用于调用机器可读程序，执行本发明任一实施例中的冰箱内变质食品检测方法。

本发明实施例还提供了一种计算机可读介质，计算机可读介质上存储有计算机指令，计算机指令在被处理器执行时，使处理器执行本发明任一实施例中的冰箱内变质食品检测方法。具体地，可以提供配有存储介质的系统或者装置，在该存储介质上存储着实现上述实施例中任一实施例的功能的软件程序代码，且使该系统或者装置的计算机(或CPU或MPU)读出并执行存储在存储介质中的程序代码。

在这种情况下，从存储介质读取的程序代码本身可实现上述实施例中任何一项实施例的功能，因此程序代码和存储程序代码的存储介质构成了本发明的一部分。

用于提供程序代码的存储介质实施例包括软盘、硬盘、磁光盘、光盘(如CD-ROM、CD-R、CD-RW、DVD-ROM、DVD-RAM、DVD-RW、DVD+RW)、磁带、非易失性存储卡和ROM。可选择地，可以由通信网络从服务器计算机上下载程序代码。

此外，应该清楚的是，不仅可以通过执行计算机所读出的程序代码，而且可以通过基于程序代码的指令使计算机上操作的操作系统等来完成部分或者全部的实际操作，从而实现上述实施例中任意一项实施例的功能。

此外，可以理解的是，将由存储介质读出的程序代码写到插入计算机内的扩展板中所设置的存储器中或者写到与计算机相连接的扩展单元中设置的存储器中，随后基于程序代码的指令使安装在扩展板或者扩展单元上的CPU等来执行部分和全部实际操作，从而实现上述实施例中任一实施例的功能。

本发明各个实施例至少具有如下有益效果：

1、在本发明实施例中，冰箱作为一种低温储存食物或其他物品的工具，其本身的制冷模式可以为食品的保鲜和在保质期内的食品储存提供冷藏，然而冰箱内储藏的一些食品在外表发生变质之后会影响其他食品的冷藏，因此，为了解决上述问题，可以预先存储至少一个变质食品图像，然后获取冰箱内摄像头采集到的第一图像，第一图像包括有存放在冰箱内的至少一个目标食品的第二图像，再从第一图像中分别提取每一个目标食品的第二图像，并基于提取到的每一个第二图像与预先存储的至少一个变质食品图像进行比对，分别确定每一个第二图像所对应的目标食品是否变质，并在确定一个第二图像所对应的目标食品发生变质时，向冰箱的用户发送第一提示信息，以提示用户变质的食品。通过上述方式，在冰箱的储藏室内部一些食品外表发生变质的情况下，无需打开冰箱即可及时地发现变质的目标食品，从而可以方便地对冰箱内变质食品进行检测；

2、在本发明一实施例中，由于不同图像按照图像转换规则转换出的二进制序列不同，因此，为了方便确定第二图像对应的目标食品变质，可以根据预先设定的图像转换规则将每一个第二图像转换为相对应的第一二进制序列，并将每一个变质食品图像转换为相对应的第二二进制序列，同时在上述转换的过程中需要控制所转换出的二进制序列具有相同的位数，以使分析结果更为准确。基于相似度可以用于表征两个二进制序列中在具有相同数值的数据位的个数，可以分别计算每一个第二二进制序列与第一二进制序列之间的相似度，并在第二二进制序列中存在与第一二进制序列之间相似度不为零的至少一个第三二进制序列时，确定第二图像所对应的目标食品变质；

3、在本发明一实施例中，为了便于用户清理冰箱中变质的食品，在确定第二图像所对应的目标食品变质之后，可以通过二进制序列方便地确定变质的食品。由于存在至少一个第三二进制序列，且第三二进制序列不为零的情况，相似度越大表明相近程度越高，因此，可以从至少一个第三二进制序列中确定与第一二进制序列之间的相似度最大的至少一个第四二进制序列，通过第四二进制序列确定第二图像对应的食品，而第四二进制序列的个数可能也存在多个的情况，为了便于分析，在第四二进制序列的个数大于1时，可以将每一个第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个第四二进制序列确定为第五二进制序列，将第五二进制序列所对应的变质食品图像对应的食品确定为第二图像对应的食品。

需要说明的是，上述各流程和各系统结构图中不是所有的步骤和模块都是必须的，可以根据实际的需要忽略某些步骤或模块。各步骤的执行顺序不是固定的，可以根据需要进行调整。上述各实施例中描述的系统结构可以是物理结构，也可以是逻辑结构，即，有些模块可能由同一物理实体实现，或者，有些模块可能分由多个物理实体实现，或者，可以由多个独立设备中的某些部件共同实现。

以上各实施例中，硬件单元可以通过机械方式或电气方式实现。例如，一个硬件单元可以包括永久性专用的电路或逻辑(如专门的处理器，FPGA或ASIC)来完成相应操作。硬件单元还可以包括可编程逻辑或电路(如通用处理器或其它可编程处理器)，可以由软件进行临时的设置以完成相应操作。具体的实现方式(机械方式、或专用的永久性电路、或者临时设置的电路)可以基于成本和时间上的考虑来确定。

上文通过附图和优选实施例对本发明进行了详细展示和说明，然而本发明不限于这些已揭示的实施例，基与上述多个实施例本领域技术人员可以知晓，可以组合上述不同实施例中的代码审核手段得到本发明更多的实施例，这些实施例也在本发明的保护范围之内。

Claims (6)

1.冰箱内变质食品检测方法，其特征在于，包括：

获取冰箱内摄像头采集到的第一图像，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像；

从所述第一图像中分别提取每一个所述目标食品的所述第二图像；

分别将每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质；

如果确定一个所述第二图像所对应的所述目标食品发生变质，则向所述冰箱的用户发送第一提示信息，其中，所述第一提示信息用于指示相应的所述目标食品发生变质；

所述分别将每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质，包括：

针对每一个所述第二图像，均执行：

按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照所述图像转换规则转换出的二进制序列不同，且所转换出的所述二进制序列具有相同的位数；

按照所述图像转换规则，分别将每一个所述变质食品图像转换为相对应的第二二进制序列；

分别计算每一个所述第二二进制序列与所述第一二进制序列之间的相似度，其中，所述相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断各个所述第二二进制序列中是否存在与所述第一二进制序列之间所述相似度不为零的至少一个第三二进制序列；

如果存在所述至少一个第三二进制序列，则确定所述第二图像对应的所述目标食品变质；

在所述确定所述第二图像对应的所述目标食品变质之后，且在所述向所述冰箱的用户发送第一提示信息之前，进一步包括：

从所述至少一个第三二进制序列中确定与所述第一二进制序列之间的所述相似度最大的至少一个第四二进制序列；

判断所述第四二进制序列的个数是否等于1；

如果所述第四二进制序列的个数等于1，则将所述第四二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品；

如果所述第四二进制序列的个数大于1，则分别将每一个所述第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个所述第四二进制序列确定为第五二进制序列，将所述第五二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品。

2.根据权利要求1所述的方法，其特征在于，进一步包括：

获取所述冰箱内气味传感器检测到的所述冰箱内的至少一种气味的浓度；

针对所述至少一种气味中的每一种气味，判断该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

如果一种所述气味的浓度大于该气味对应的所述嗅阈值，则向所述用户发送第二提示信息，其中，所述第二提示信息用于指示所述冰箱内存在发生变质的食品。

3.冰箱内变质食品检测装置，其特征在于，包括：

第一获取模块，用于获取冰箱内摄像头采集到的第一图像，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像；

提取模块，用于从所述第一获取模块获取到的所述第一图像中分别提取每一个所述目标食品的所述第二图像；

第一确定模块，用于分别将所述提取模块提取到的每一个所述第二图像与预先存储的至少一个变质食品图像进行比对，以分别确定每一个所述第二图像所对应的所述目标食品是否变质；

第一处理模块，用于如果所述第一确定模块确定的一个所述第二图像所对应的所述目标食品发生变质，则向所述冰箱的用户发送第一提示信息，其中，所述第一提示信息用于指示相应的所述目标食品发生变质；

所述第一确定模块，包括：

第一转换单元，用于针对每一个所述第二图像，按照预先设定的图像转换规则，将该第二图像转换为相对应的第一二进制序列，其中，不同图像按照所述图像转换规则转换出的二进制序列不同，且所转换出的所述二进制序列具有相同的位数；

第二转换单元，用于按照所述图像转换规则，分别将每一个所述变质食品图像转换为相对应的第二二进制序列；

计算单元，用于分别计算每一个所述第二转换单元转换出的所述第二二进制序列与所述第一转换单元转换出的所述第一二进制序列之间的相似度，其中，所述相似度用于表征两个二进制序列中在具有相同数值的数据位的个数；

判断单元，用于判断各个所述第二二进制序列中是否存在与所述第一二进制序列之间通过所述计算单元计算出的所述相似度不为零的至少一个第三二进制序列；

处理单元，用于如果所述判断单元判断出存在所述至少一个第三二进制序列，则确定所述第二图像对应的所述目标食品变质；

进一步包括：

第二确定模块，用于从所述处理单元得到的所述至少一个第三二进制序列中确定与所述第一二进制序列之间的所述相似度最大的至少一个第四二进制序列；

第一判断模块，用于判断所述第二确定模块确定出的所述第四二进制序列的个数是否等于1；

第二处理模块，用于如果所述第一判断模块判断出的所述第四二进制序列的个数等于1，则将所述第四二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品；如果所述第一判断模块判断出所述第四二进制序列的个数大于1，则分别将每一个所述第四二进制序列转换为相对应的十进制序列，并将对应十进制序列最大的一个所述第四二进制序列确定为第五二进制序列，将所述第五二进制序列所对应的所述变质食品图像对应的食品确定为所述第二图像对应的食品。

4.根据权利要求3所述的装置，其特征在于，

进一步包括：

第二获取模块，用于获取所述冰箱内气味传感器检测到的所述冰箱内的至少一种气味的浓度；

第二判断模块，用于针对所述至少一种气味中的每一种气味，判断所述第二获取模块获取到的该气味的浓度是否大于预先针对该气味所设置的嗅阈值；

第三处理模块，用于如果所述第二判断模块判断出一种所述气味的浓度大于该气味对应的所述嗅阈值，则向所述用户发送第二提示信息，其中，所述第二提示信息用于指示所述冰箱内存在发生变质的食品。

5.冰箱内变质食品检测系统，其特征在于，包括：权利要求3至4中任一所述的冰箱内变质食品检测装置和内部设置有摄像头的冰箱；

所述冰箱，用于通过所述摄像头采集第一图像，并将所述第一图像发送给所述冰箱内变质食品检测装置，其中，所述第一图像中包括有存放在所述冰箱内的至少一个目标食品的第二图像。

6.根据权利要求5所述的系统，其特征在于，

所述冰箱，进一步用于通过其内部所设置的气味传感器检测其内部的至少一种气味的浓度，冰箱所检测到的所述至少一种气味的浓度发送给所述冰箱内变质食品检测装置。

Images