CN112419432A - 冰箱内食物的控制方法和装置、电子设备和存储介质 - Google Patents

冰箱内食物的控制方法和装置、电子设备和存储介质 Download PDF

Info

Publication number
CN112419432A
CN112419432A CN202011254694.3A CN202011254694A CN112419432A CN 112419432 A CN112419432 A CN 112419432A CN 202011254694 A CN202011254694 A CN 202011254694A CN 112419432 A CN112419432 A CN 112419432A
Authority
CN
China
Prior art keywords
food
target
refrigerator
image
existing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011254694.3A
Other languages
English (en)
Inventor
肖岱云
李喜林
刘洪钊
朱建垣
王兆琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Zhuhai Lianyun Technology Co Ltd
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Zhuhai Lianyun Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai, Zhuhai Lianyun Technology Co Ltd filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN202011254694.3A priority Critical patent/CN112419432A/zh
Publication of CN112419432A publication Critical patent/CN112419432A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06395—Quality analysis or management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/136—Segmentation; Edge detection involving thresholding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Resources & Organizations (AREA)
  • Databases & Information Systems (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Strategic Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

本申请提供一种冰箱内食物的控制方法和装置、电子设备和存储介质，该方法包括：获取目标对象输入的目标参考信息，其中，目标参考信息为目标食物的参考信息；在已有食物的参考信息中存在目标参考信息的情况下，获取已有食物中的目标食物的位置信息，其中，已有食物为冰箱内已确定位置的食物。本申请将冰箱内已有食物都用坐标来标记其位置，然后获取目标对象输入的目标食物，将目标食物与已有食物的参考信息做匹配，进而得到目标食物的空间坐标系，以提高目标对象寻找目标食物的速度和准确度。

Description

冰箱内食物的控制方法和装置、电子设备和存储介质
技术领域
本申请涉及数据处理领域，尤其涉及一种冰箱内食物的控制方法和装置、电子设备和存储介质。
背景技术
冰箱是一种保持恒定低温的制冷设备，是日常生活中常用的一种用于保存食物或其它物品的家用电器。
随着人们生活水平的提高，食物的种类越来越丰富，冰箱内放置的食物越来越多，冰箱内部的容积也越来越大，在冰箱内储存的食物较多的情况下，人们往往会忘记放入冰箱内的食物的位置，每次取食物时都需要去冰箱内翻找，且位于冰箱内部前方的食品经常挡住其后方的食品，导致用户不能快速的找到需要的食物。
因此，现有技术中存在无法及时获取冰箱内食物的摆放位置的问题。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种冰箱内食物的控制方法和装置、电子设备和存储介质。
根据本申请实施例的一个方面，提供了一种冰箱内食物的控制方法，该方法包括：
获取目标对象输入的目标参考信息，其中，所述目标参考信息为目标食物的参考信息；
在已有食物的参考信息中存在所述目标参考信息的情况下，获取所述已有食物中的所述目标食物的位置信息，其中，所述已有食物为冰箱内已确定位置的食物。
可选地，所述获取所述已有食物中的所述目标食物的位置信息包括：
通过所述冰箱内位于不同位置的多个摄像头确定所述已有食物的坐标信息；
将所述已有食物中的所述目标食物的坐标信息，确定为所述目标食物的位置信息。
可选地，在所述获取所述已有食物中的所述目标食物的位置信息之后，所述方法还包括：
生成所述目标食物的图像信息，其中，所述图像信息用于表示所述目标食物的位置信息；
将所述图像信息进行可视化显示。
可选地，该方法还包括：
利用所述冰箱内位于不同位置的多个摄像头获取所述已有食物对应的至少一个食物图像；
按照所述至少一个食物图像中的每个食物图像的时间戳顺序，将时间戳最小的食物图像确定为参考图像；
获取所述参考图像与其他食物图像的目标比较结果，其中，所述其他食物图像为所述至少一个食物图像中除了所述参考图像以外的食物图像，所述目标比较结果用于表示所述已有食物是否即将变质。
可选地，所述获取所述参考图像与其他食物图像的目标比较结果包括以下至少之一：
提取所述参考图像的第一颜色特征和所述其他食物图像的第二颜色特征；获取所述第二颜色特征与所述第一颜色特征的第一比较结果，其中，所述第一比较结果用于表示所述第二颜色特征与所述第一颜色特征的颜色差值是否小于第一阈值；
提取所述参考图像的第一形状特征和所述其他食物图像的第二形状特征；获取所述第二形状特征与所述第一形状特征的第二比较结果，其中，所述第二比较结果用于表示所述第二形状特征与所述第一形状特征的尺寸差值是否小于第二阈值；
其中，所述目标比较结果包括以下至少之一：所述第一比较结果，所述第二比较结果。
可选地，该方法还包括：
获取所述已有食物的生产日期和保质期；
根据所述生产日期和所述保质期确定所述已有食物是否即将变质。
可选地，该方法还包括：
获取气味传感器检测到的所述冰箱内的目标气味的气味浓度；
在所述目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定所述冰箱内已有食物即将变质，其中，所述目标浓度阈值用于指示在所述已有食物即将发生变质的情况下，所述冰箱内的所述目标气味的最小浓度值。
根据本申请实施例的另一个方面，提供了一种冰箱内食物的控制装置，该装置包括：
第一获取模块，用于获取目标对象输入的目标参考信息，其中，所述目标参考信息为目标食物的参考信息；
第二获取模块，用于在已有食物的参考信息中存在所述目标参考信息的情况下，获取所述已有食物中的所述目标食物的位置信息，其中，所述已有食物为冰箱内已确定位置的食物。
可选地，所述第二获取模块包括：
第一确定单元，用于通过所述冰箱内位于不同位置的多个摄像头确定所述已有食物的坐标信息；
第二确定单元，用于将所述已有食物中的所述目标食物的坐标信息，确定为所述目标食物的位置信息。
可选地，该装置还包括：
生成模块，用于获取所述已有食物中的所述目标食物的位置信息之后，生成所述目标食物的图像信息，其中，所述图像信息用于表示所述目标食物的位置信息；
显示模块，用于将所述图像信息进行可视化显示。
可选地，所述装置还包括：
第三获取模块，用于在利用所述冰箱内位于不同位置的多个摄像头获取所述已有食物对应的至少一个食物图像；
第一确定模块，用于按照所述至少一个食物图像中的每个食物图像的时间戳顺序，将时间戳最小的食物图像确定为参考图像；
第四获取模块，用于获取所述参考图像与其他食物图像的目标比较结果，其中，所述其他食物图像为所述至少一个食物图像中除了所述参考图像以外的食物图像，所述目标比较结果用于表示所述已有食物是否即将变质。
可选地，所述第四获取模块包括以下至少之一：
第一提取子单元，用于提取所述参考图像的第一颜色特征和所述其他食物图像的第二颜色特征；获取所述第二颜色特征与所述第一颜色特征的第一比较结果，其中，所述第一比较结果用于表示所述第二颜色特征与所述第一颜色特征的颜色差值是否小于第一阈值；
第二提取子单元，用于提取所述参考图像的第一形状特征和所述其他食物图像的第二形状特征；获取所述第二形状特征与所述第一形状特征的第二比较结果，其中，所述第二比较结果用于表示所述第二形状特征与所述第一形状特征的尺寸差值是否小于第二阈值；
其中，所述目标比较结果包括以下至少之一：所述第一比较结果，所述第二比较结果。
可选地，该装置还包括：
第五获取模块，用于获取所述已有食物的生产日期和保质期；
第二确定模块，用于根据所述生产日期和所述保质期确定所述已有食物是否即将变质。
可选地，该装置还包括：
第六获取模块，用于获取气味传感器检测到的所述冰箱内的目标气味的气味浓度；
第三确定模块，用于在所述目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定所述冰箱内已有食物即将变质，其中，所述目标浓度阈值用于指示在所述已有食物即将发生变质的情况下，所述冰箱内的所述目标气味的最小浓度值。
根据本申请实施例的又一个方面，还提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器、通信接口和存储器通过通信总线完成相互间的通信；其中，存储器，用于存储计算机程序；处理器，用于通过运行存储器上所存储的所述计算机程序来执行上述任一实施例中冰箱内食物的控制方法步骤。
根据本申请实施例的又一个方面，还提供了一种计算机可读的存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一实施例中冰箱内食物的控制方法步骤。
本申请实施例将冰箱内已有食物都用坐标来标记其位置，然后获取目标对象(用户)输入的目标食物，将目标食物与已有食物的参考信息做匹配，进而得到目标食物的空间坐标系，以提高目标对象寻找目标食物的速度和准确度。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种可选的冰箱内食物的控制方法流程示意图；
图2为本申请实施例提供的一种可选的冰箱内食物的控制的系统示意图；
图3为本申请实施例提供的一种可选的冰箱内食物的控制装置框图；
图4为本申请实施例提供的一种可选的电子设备框图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请的一部分实施例，而不是全部的实施例，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个类似的实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
在冰箱内储存的食物较多的情况下，人们往往会忘记放入冰箱内的食物的位置，每次取食物时都需要去冰箱内翻找，且位于冰箱内部前方的食品经常挡住其后方的食品，导致用户不能快速的找到需要的食物。为了解决该问题，本申请提供一种冰箱内食物的控制方法，如图1所示，该方法包括：
步骤S101，获取目标对象输入的目标参考信息，其中，目标参考信息为目标食物的参考信息。
可选地，本申请实施例的服务器获取目标对象语音输入或通过虚拟键盘输入的目标食物的参考信息(即目标参考信息)，其中，目标对象是指使用该冰箱的用户，目标参考信息包括目标食物的图像、数量、名称等。
步骤S102，在已有食物的参考信息中存在目标参考信息的情况下，获取已有食物中的目标食物的位置信息，其中，已有食物为冰箱内已确定位置的食物。
可选地，本申请实施例中的已有食物是指在冰箱内已经能够确定出坐标位置的食物，其中，确定坐标位置可以采用冰箱摄像头模组构建空间坐标系获得。
已有食物的参考信息是指已有食物的图像、数量，名称等，在确定已有食物的参考信息中存在目标参考信息时，说明用户输入的目标食物的在已有食物内能够找到，所以直接从已有食物内找到目标食物的位置信息即可得到用户输入的食物的坐标位置。
本申请实施例将冰箱内已有食物都用坐标来标记其位置，然后获取目标对象(用户)输入的目标食物，将目标食物与已有食物的参考信息做匹配，进而得到目标食物的空间坐标系，以提高目标对象寻找目标食物的速度和准确度。
作为一种可选实施例：获取已有食物中的目标食物的位置信息包括：
通过冰箱内位于不同位置的多个摄像头确定已有食物的坐标信息；
将已有食物中的目标食物的坐标信息，确定为目标食物的位置信息。
可选地，在冰箱内部设置多个不同角度和位置的摄像头，根据该摄像头能后构建空间坐标系，将冰箱内每个食物都用坐标来标记，得到已有食物的坐标信息。
然后根据已有食物中的目标食物的坐标信息，确定为目标食物的位置信息即可。
作为一种可选实施例：在获取已有食物中的目标食物的位置信息之后，方法还包括：
生成目标食物的图像信息，其中，图像信息用于表示目标食物的位置信息；
将图像信息进行可视化显示。
可选地，在本申请实施例中，在冰箱门上设置显示屏，用于显示冰箱内部的食物摆放位置，所以本申请实施例生成目标食物的图像信息，利用显示屏进行可视化显示。
作为一种可选实施例：方法还包括：
利用冰箱内位于不同位置的多个摄像头获取已有食物对应的至少一个食物图像；
按照至少一个食物图像中的每个食物图像的时间戳顺序，将时间戳最小的食物图像确定为参考图像；
获取参考图像与其他食物图像的目标比较结果，其中，其他食物图像为至少一个食物图像中除了参考图像以外的食物图像，目标比较结果用于表示已有食物是否即将变质。
可选地，本申请实施例服务器利用冰箱内位于不同位置的摄像头对已有食物进行全方位的拍摄，得到至少一个食物图像，同时由于拍摄是存在时间顺序的，所以获取最先拍摄得到的食物图像(即时间戳最小的食物图像)作为参考图像，然后根据该参考图像与除了该参考图像以外的食物图像进行比较，得到目标比较结果，根据目标比较结果确定已有食物是否即将变质。
作为一种可选实施例：获取参考图像与其他食物图像的目标比较结果包括以下至少之一：
提取参考图像的第一颜色特征和其他食物图像的第二颜色特征；获取第二颜色特征与第一颜色特征的第一比较结果，其中，第一比较结果用于表示第二颜色特征与第一颜色特征的颜色差值是否小于第一阈值；
提取参考图像的第一形状特征和其他食物图像的第二形状特征；获取第二形状特征与第一形状特征的第二比较结果，其中，第二比较结果用于表示第二形状特征与第一形状特征的尺寸差值是否小于第二阈值；
其中，目标比较结果包括以下至少之一：第一比较结果，第二比较结果。
可选地，本申请实施例首先对提取参考图像进行图像预处理，包括图像变换(将图像转换到变化域或空间域)、图像增强、图像去噪、图像数据压缩、图像边缘检测和图像背景分割(通过图像特征分析进行分割，将图像分成有用区域和无用区域。
将提取的参考图像的第一颜色特征和其他食物图像的第二颜色特征进行比较，得到第一比较结果，且第一比较结果用于表示第二颜色特征与第一颜色特征的颜色差值是否小于第一阈值，这时若第一比较结果大于或者等于第一阈值，表示已有食物即将变质；
或者提取的参考图像的第一形状特征和其他食物图像的第二形状特征进行比较，得到第二比较结果，且第二比较结果用于表示第二形状特征与第一形状特征的颜色差值是否小于第二阈值，这时若第二比较结果大于或者等于第二阈值，表示已有食物即将变质；
需要说明的是，这里的第一比较结果和第二比较结果均是表示已有食物是否即将变质的参数，其均是目标比较结果的子集。
作为一种可选实施例：方法还包括：
获取已有食物的生产日期和保质期；
根据生产日期和保质期确定已有食物是否即将变质。
可选地，本申请实施例可以通过扫描食物包装袋的方式获取食物的生产日期或保质期，也可以是用户手动将生产日期或保质期输入冰箱屏幕上，通过冰箱数据存储装置进行存储。
根据生产日期以及保质期上的天数或小时数，推算出已有食物是否即将变质。
作为一种可选实施例：方法还包括：
获取气味传感器检测到的冰箱内的目标气味的气味浓度；
在目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定冰箱内已有食物即将变质，其中，目标浓度阈值用于指示在已有食物即将发生变质的情况下，冰箱内的目标气味的最小浓度值。
可选地，本申请实施例根据气味传感器去确定冰箱内已有食物是否即将变质。可选地，利用气味传感器获取冰箱内的目标气味的气味浓度，其中，该目标气味可以是一种气味或多种气味重叠处的气味，在目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定冰箱内已有食物即将变质，其中，目标浓度阈值是指已有食物即将发生变质时，目标气味的最小浓度值。
上述各实施例在得出已有食物即将发生变质时，会通过冰箱发出提示声音给用户，同时会将即将变质的食物在冰箱的显示屏上进行显示供用户及时有目标地食用即将变质食物，避免浪费。
本申请实施例通过实时采集冰箱内各种食物的形态颜色等特征，通过WiFi模块发送到云端进行匹配设备，当判断食物快过期时就会提醒用户赶紧食用。
作为一种可选实施例，对于别不出的食物，冰箱会提醒用户，并可通过用户意愿将进入学习模式，将该食物的信息记录到云端。
作为一种可选实施例，如图2所示，该图2的冰箱内食物的控制的系统执行如下步骤：
用户输入想要提取的食物，云端接收提取食物的信息并做识别处理，其中云端识别处理包括：食物寻找子系统和保质期提醒子系统，其中，食物寻找子系统和保质期提醒子系统都主要分为无包装的食物的寻找方式/保质期提醒和带包装的食物的寻找方式/保质期提醒。
主要识别处理方式用到了摄像头模组，可以在冰箱左右两侧各加一个冰箱摄像头模组，两个摄像头模组通过WiFi模块向云端传输食物的深度数据和图像信息，云端通过深度数据构建坐标并反馈到冰箱，在冰箱屏幕上显示食物的位置。云端通过获取的图像信息来进行特征提取，进而判断食物是否即将过期，并将数据反馈给冰箱。
无包装的食物的寻找方式为：提取食物的特征图像；获取食物坐标并发送到云端；带包装的食物的寻找方式为：提取包装上食物的名字；获取食物坐标并发送到云端。
无包装的食物的保质期提醒：提取食物的特征图像；带包装的食物的保质期提醒：扫描包装上的生产日期和保质期。
将云端识别处理获得的即将变质食物以及用户寻找的食物通过屏幕显示出来。
根据本申请实施例的另一个方面，还提供了一种用于实施上述冰箱内食物的控制方法的冰箱内食物的控制装置。图3是根据本申请实施例的一种可选的冰箱内食物的控制装置的示意图，如图3所示，该装置可以包括：
第一获取模块301，用于获取目标对象输入的目标参考信息，其中，目标参考信息为目标食物的参考信息；
第二获取模块302，用于在已有食物的参考信息中存在目标参考信息的情况下，获取已有食物中的目标食物的位置信息，其中，已有食物为冰箱内已确定位置的食物。
需要说明的是，该实施例中的第一获取模块301可以用于执行上述步骤S101，该实施例中的第二获取模块302可以用于执行上述步骤S102。
通过上述模块，将冰箱内已有食物都用坐标来标记其位置，然后获取目标对象(用户)输入的目标食物，将目标食物与已有食物的参考信息做匹配，进而得到目标食物的空间坐标系，以提高目标对象寻找目标食物的速度和准确度。
作为一种可选的实施例，第二获取模块包括：
第一确定单元，用于通过冰箱内位于不同位置的多个摄像头确定已有食物的坐标信息；
第二确定单元，用于将已有食物中的目标食物的坐标信息，确定为目标食物的位置信息。
作为一种可选的实施例，该装置还包括：
生成模块，用于获取已有食物中的目标食物的位置信息之后，生成目标食物的图像信息，其中，图像信息用于表示目标食物的位置信息；
显示模块，用于将图像信息进行可视化显示。
作为一种可选的实施例，装置还包括：
第三获取模块，用于在利用冰箱内位于不同位置的多个摄像头获取已有食物对应的至少一个食物图像；
第一确定模块，用于按照至少一个食物图像中的每个食物图像的时间戳顺序，将时间戳最小的食物图像确定为参考图像；
第四获取模块，用于获取参考图像与其他食物图像的目标比较结果，其中，其他食物图像为至少一个食物图像中除了参考图像以外的食物图像，目标比较结果用于表示已有食物是否即将变质。
作为一种可选的实施例，第四获取模块包括以下至少之一：
第一提取子单元，用于提取参考图像的第一颜色特征和其他食物图像的第二颜色特征；获取第二颜色特征与第一颜色特征的第一比较结果，其中，第一比较结果用于表示第二颜色特征与第一颜色特征的颜色差值是否小于第一阈值；
第二提取子单元，用于提取参考图像的第一形状特征和其他食物图像的第二形状特征；获取第二形状特征与第一形状特征的第二比较结果，其中，第二比较结果用于表示第二形状特征与第一形状特征的尺寸差值是否小于第二阈值；
其中，目标比较结果包括以下至少之一：第一比较结果，第二比较结果。
作为一种可选的实施例，该装置还包括：
第五获取模块，用于获取已有食物的生产日期和保质期；
第二确定模块，用于根据生产日期和保质期确定已有食物是否即将变质。
作为一种可选的实施例，该装置还包括：
第六获取模块，用于获取气味传感器检测到的冰箱内的目标气味的气味浓度；
第三确定模块，用于在目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定冰箱内已有食物即将变质，其中，目标浓度阈值用于指示在已有食物即将发生变质的情况下，冰箱内的目标气味的最小浓度值。
根据本申请实施例的又一个方面，还提供了一种用于实施上述冰箱内食物的控制方法的电子设备，该电子设备可以是服务器、终端、或者其组合。
图4是根据本申请实施例的一种可选的电子设备的结构框图，如图4所示，包括处理器401、通信接口402、存储器403和通信总线404，其中，处理器401、通信接口402和存储器403通过通信总线404完成相互间的通信，其中，
存储器403，用于存储计算机程序；
处理器401，用于执行存储器403上所存放的计算机程序时，实现如下步骤：
S1，获取目标对象输入的目标参考信息，其中，目标参考信息为目标食物的参考信息；
S2，在已有食物的参考信息中存在目标参考信息的情况下，获取已有食物中的目标食物的位置信息，其中，已有食物为冰箱内已确定位置的食物。
可选地，在本实施例中，上述的通信总线可以是PCI(Peripheral ComponentInterconnect，外设部件互连标准)总线、或EISA(Extended Industry StandardArchitecture，扩展工业标准结构)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图4中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括RAM，也可以包括非易失性存储器(non-volatile memory)，例如，至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。
作为一种示例，如图4所示，上述存储器402中可以但不限于包括上述冰箱内食物的控制装置中的第一获取模块301、第二获取模块302。此外，还可以包括但不限于上述冰箱内食物的控制装置中的其他模块单元，本示例中不再赘述。
上述处理器可以是通用处理器，可以包含但不限于：CPU(Central ProcessingUnit，中央处理器)、NP(Network Processor，网络处理器)等；还可以是DSP(DigitalSignal Processing，数字信号处理器)、ASIC(Application Specific IntegratedCircuit，专用集成电路)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例在此不再赘述。
本领域普通技术人员可以理解，图4所示的结构仅为示意，实施上述冰箱内食物的控制方法的设备可以是终端设备，该终端设备可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices，MID)、PAD等终端设备。图4其并不对上述电子设备的结构造成限定。例如，终端设备还可包括比图4中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图4所示的不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、ROM、RAM、磁盘或光盘等。
根据本申请实施例的又一个方面，还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以用于执行冰箱内食物的控制方法的程序代码。
可选地，在本实施例中，上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：
S1，获取目标对象输入的目标参考信息，其中，目标参考信息为目标食物的参考信息；
S2，在已有食物的参考信息中存在目标参考信息的情况下，获取已有食物中的目标食物的位置信息，其中，已有食物为冰箱内已确定位置的食物。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例中对此不再赘述。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、ROM、RAM、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例冰箱内食物的控制方法的全部或部分步骤。
在本申请的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例中所提供的方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上仅是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种冰箱内食物的控制方法，其特征在于，所述方法包括：
获取目标对象输入的目标参考信息，其中，所述目标参考信息为目标食物的参考信息；
在已有食物的参考信息中存在所述目标参考信息的情况下，获取所述已有食物中的所述目标食物的位置信息，其中，所述已有食物为冰箱内已确定位置的食物。
2.根据权利要求1所述的方法，其特征在于，所述获取所述已有食物中的所述目标食物的位置信息包括：
通过所述冰箱内位于不同位置的多个摄像头确定所述已有食物的坐标信息；
将所述已有食物中的所述目标食物的坐标信息，确定为所述目标食物的位置信息。
3.根据权利要求1所述的方法，其特征在于，在所述获取所述已有食物中的所述目标食物的位置信息之后，所述方法还包括：
生成所述目标食物的图像信息，其中，所述图像信息用于表示所述目标食物的位置信息；
将所述图像信息进行可视化显示。
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述方法还包括：
利用所述冰箱内位于不同位置的多个摄像头获取所述已有食物对应的至少一个食物图像；
按照所述至少一个食物图像中的每个食物图像的时间戳顺序，将时间戳最小的食物图像确定为参考图像；
获取所述参考图像与其他食物图像的目标比较结果，其中，所述其他食物图像为所述至少一个食物图像中除了所述参考图像以外的食物图像，所述目标比较结果用于表示所述已有食物是否即将变质。
5.根据权利要求4所述的方法，其特征在于，所述获取所述参考图像与其他食物图像的目标比较结果包括以下至少之一：
提取所述参考图像的第一颜色特征和所述其他食物图像的第二颜色特征；获取所述第二颜色特征与所述第一颜色特征的第一比较结果，其中，所述第一比较结果用于表示所述第二颜色特征与所述第一颜色特征的颜色差值是否小于第一阈值；
提取所述参考图像的第一形状特征和所述其他食物图像的第二形状特征；获取所述第二形状特征与所述第一形状特征的第二比较结果，其中，所述第二比较结果用于表示所述第二形状特征与所述第一形状特征的尺寸差值是否小于第二阈值；
其中，所述目标比较结果包括以下至少之一：所述第一比较结果，所述第二比较结果。
6.根据权利要求1至3中任一项所述的方法，其特征在于，所述方法还包括：
获取所述已有食物的生产日期和保质期；
根据所述生产日期和所述保质期确定所述已有食物是否即将变质。
7.根据权利要求1至3中任一项所述的方法，其特征在于，所述方法还包括：
获取气味传感器检测到的所述冰箱内的目标气味的气味浓度；
在所述目标气味的气味浓度大于或者等于目标浓度阈值的情况下，确定所述冰箱内已有食物即将变质，其中，所述目标浓度阈值用于指示在所述已有食物即将发生变质的情况下，所述冰箱内的所述目标气味的最小浓度值。
8.一种冰箱内食物的控制装置，其特征在于，所述装置包括：
第一获取模块，用于获取目标对象输入的目标参考信息，其中，所述目标参考信息为目标食物的参考信息；
第二获取模块，用于在已有食物的参考信息中存在所述目标参考信息的情况下，获取所述已有食物中的所述目标食物的位置信息，其中，所述已有食物为冰箱内已确定位置的食物。
9.一种可读计算机存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序运行时执行上述权利要求1至7中任一项所述的冰箱内食物的控制方法步骤。
10.一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；其中：
存储器，用于存放计算机程序；
处理器，用于通过运行存储器上所存放的程序来执行权利要求1至7中任一项所述的冰箱内食物的控制方法步骤。
CN202011254694.3A 2020-11-11 2020-11-11 冰箱内食物的控制方法和装置、电子设备和存储介质 Pending CN112419432A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011254694.3A CN112419432A (zh) 2020-11-11 2020-11-11 冰箱内食物的控制方法和装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011254694.3A CN112419432A (zh) 2020-11-11 2020-11-11 冰箱内食物的控制方法和装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN112419432A true CN112419432A (zh) 2021-02-26

Family

ID=74781502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011254694.3A Pending CN112419432A (zh) 2020-11-11 2020-11-11 冰箱内食物的控制方法和装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN112419432A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113569646A (zh) * 2021-06-28 2021-10-29 青岛海尔科技有限公司 冰箱的异常物品提示方法、装置、存储介质及电子装置
CN113674359A (zh) * 2021-08-13 2021-11-19 珠海格力电器股份有限公司 一种对象信息检测方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105513052A (zh) * 2015-11-26 2016-04-20 四川长虹电器股份有限公司 一种冰箱内食物存量及变质信息探知系统及方法
WO2017160499A2 (en) * 2016-03-14 2017-09-21 Amazon Technologies, Inc. Scent-based spoilage sensing refrigerator
CN109425192A (zh) * 2017-08-28 2019-03-05 合肥美的智能科技有限公司 指示冰箱内食材位置的方法及系统
KR20200064181A (ko) * 2018-11-16 2020-06-08 엘지전자 주식회사 디스플레이 장치를 갖는 인공지능 냉장고
CN111310586A (zh) * 2020-01-19 2020-06-19 合肥美的电冰箱有限公司 冰箱内食物的管理方法、管理装置及冰箱

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105513052A (zh) * 2015-11-26 2016-04-20 四川长虹电器股份有限公司 一种冰箱内食物存量及变质信息探知系统及方法
WO2017160499A2 (en) * 2016-03-14 2017-09-21 Amazon Technologies, Inc. Scent-based spoilage sensing refrigerator
CN109425192A (zh) * 2017-08-28 2019-03-05 合肥美的智能科技有限公司 指示冰箱内食材位置的方法及系统
KR20200064181A (ko) * 2018-11-16 2020-06-08 엘지전자 주식회사 디스플레이 장치를 갖는 인공지능 냉장고
CN111310586A (zh) * 2020-01-19 2020-06-19 合肥美的电冰箱有限公司 冰箱内食物的管理方法、管理装置及冰箱

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113569646A (zh) * 2021-06-28 2021-10-29 青岛海尔科技有限公司 冰箱的异常物品提示方法、装置、存储介质及电子装置
CN113674359A (zh) * 2021-08-13 2021-11-19 珠海格力电器股份有限公司 一种对象信息检测方法、装置、电子设备及存储介质
CN113674359B (zh) * 2021-08-13 2024-05-03 珠海格力电器股份有限公司 一种对象信息检测方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
US9323785B2 (en) Method and system for mobile visual search using metadata and segmentation
CN103377287B (zh) 一种投放物品信息的方法和装置
CN108520196B (zh) 奢侈品辨别方法、电子装置及存储介质
CN109426785B (zh) 一种人体目标身份识别方法及装置
CN113627411A (zh) 一种基于超分辨率的商品识别与价格匹配方法及系统
CN110781805A (zh) 一种目标物体检测方法、装置、计算设备和介质
CN112419432A (zh) 冰箱内食物的控制方法和装置、电子设备和存储介质
CN109752496A (zh) 食材的检测方法、装置以及存储装置
CN110443224A (zh) 翻页检测方法、装置、电子设备及存储介质
CN110610202B (zh) 一种图像处理方法及电子设备
CN106203466B (zh) 食物识别的方法和装置
CN110969047A (zh) 识别食材的方法、装置和冰箱
WO2019148923A1 (zh) 一种以图搜图方法、装置、电子设备及存储介质
CN111882524A (zh) 食物重量计算方法、装置及存储介质
CN110084187B (zh) 基于计算机视觉的位置识别方法、装置、设备及存储介质
JP2018049584A (ja) 食事量推定プログラム、食事量推定方法及び食事量推定装置
CN110309691B (zh) 一种人脸识别方法、装置、服务器及存储介质
CN114998665A (zh) 一种图像类别识别方法、装置、电子设备及存储介质
CN104867026B (zh) 提供商品图像的方法和系统以及输出商品图像的终端装置
CN110163657B (zh) 基于流形学习算法的保险产品推荐方法及相关设备
CN110210920B (zh) 用餐信息的推荐方法和装置
CN110762943B (zh) 物品的展示方法、装置以及家电设备
CN111178274A (zh) 信息提示方法和装置、计算机可读的存储介质及电子装置
CN109993022B (zh) 高度检测方法及高度检测方程的建立方法
CN110956075A (zh) 图像处理装置、图像处理方法及记录介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination