CN204478714U - 冰箱 - Google Patents

Abstract

本实用新型公开了一种冰箱，包括：摄像头，摄像头设置在冰箱上，用于获取用户放入或取出食物的动作过程图像；控制装置，用于对动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，其中，食物信息包括食物的名称、存放位置，以及根据动作类型和对应的食物信息对冰箱内的食物统计数据进行管理。本实用新型的冰箱只需一个摄像头即可在冰箱开门期间实现智能自动识别用户放入或取出食物的名称以及存放位置等，具有更好的实时性和用户体验，且成本低。

Description

冰箱

技术领域

本实用新型涉及家用电器技术领域，特别涉及一种冰箱。

背景技术

随着计算机技术与信息技术的发展，图像识别技术获得了越来越广泛的应用。例如医疗诊断中各种医学图片的分析与识别、天气预报中的卫星云图识别、指纹识别、脸谱识别等，图像识别技术越来越多地渗透到我们的日常生活中。图像识别技术的涵义很广，主要指通过计算机或者其它软件平台，采用数学计数方法，对一个系统前端获取的图像按照特定目的进行相应地处理。图像识别包括诸如生物特征识别(人脸识别、指纹识别等)技术、智能交通中的动态对象识别、手写识别等。随着计算机技术及人工智能技术的发展，图像识别技术越来越成为人工智能的基础技术，它涉及的技术领域也越来越广泛，应用越来越深入。

同时，家电智能化的浪潮，催生了智能冰箱的产生。智能冰箱对硬件技术和软件技术均进行了升级和革新。如何有效地进行冰箱内食物管理是智能冰箱的核心功能，也是用户非常关注的问题。在智能冰箱的食物管理研究过程中，智能冰箱已经具有了多摄像头进行拍照、远程查看进行食物管理等功能，还有配备了RFID(射频电子标签)、触摸操作等方式进行食物添加、食物删除等功能。尽管这些设备和功能解决了智能冰箱食物管理的部分问题，但是依然没有从根本上解决冰箱内食物管理操作繁琐的问题，仍然需要用户对冰箱内的食物出库、入库进行人工操作来完成食物管理。

相关技术中提出了一种智能冰箱食品管理的方法，该方法在冰箱关门后，通过设置于冰箱内的2个以上摄像头采集冰箱体内的食品图像，进行图像识别，最终实现智能管理冰箱食品。

相关技术中的智能冰箱食品管理的方法仍然存在一些缺点和不足之处，主要表现在：需要2个以上的摄像头，成本高；在冰箱关门后才能识别，不具有实时性；只能智能识别食品名称，无法进行放入/取出动作的识别和食品位置的识别。

实用新型内容

本实用新型的目的旨在至少从一定程度上解决上述的技术问题之一。

为此，本实用新型的一个目的在于提出一种冰箱，该冰箱只需一个摄像头即可在冰箱开门期间自动识别用户放入或取出食物的动作和食物的名称等，具有更好的实时性和用户体验，且成本低。

为达到上述目的，本实用新型一方面实施例提出了一种冰箱，该冰箱包括：摄像头，所述摄像头设置在所述冰箱上，用于获取用户放入或取出食物的动作过程图像；以及控制装置，用于对所述动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，其中，所述食物信息包括食物的名称、存放位置，以及根据所述动作类型和对应的食物信息对所述冰箱内的食物统计数据进行管理。

本实用新型实施例提出的冰箱，在摄像头获取用户放入或取出食物的动作过程图像后，控制装置对动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，以及根据动作类型和对应的食物信息对冰箱内的食物统计数据进行管理。该冰箱只需一个摄像头即可在冰箱开门期间自动识别用户放入或取出食物的动作和食物的名称、存放位置等，具有更好的实时性和用户体验，且成本低。

进一步地，在本实用新型的一个实施例中，所述动作类型包括放入食物动作和取出食物动作。

进一步地，在本实用新型的一个实施例中，所述控制装置包括：动作类型获取模块，所述动作类型获取模块用于获取相邻图像中用户手和食物的变化关系，并对所述变化关系进行图像顺序比较以确定所述动作类型；以及食物信息获取模块，所述食物信息获取模块用于对所述动作过程图像进行图像分割以获取所述食物的图像，并对所述食物的图像进行图像模式识别以获取所述对应的食物信息。

进一步地，在本实用新型的一个实施例中，所述存放位置包括所述食物摆放搁架的层级。

进一步地，在本实用新型的一个实施例中，所述食物的图像包括所述用户手与所述食物遮挡搁架的图像，所述食物摆放搁架的层级通过对所述用户手与所述食物遮挡搁架的图像进行图像模式识别获取。

进一步地，在本实用新型的一个实施例中，所述摄像头安装在所述冰箱间室内部的顶端、或所述间室内部的底部、或所述间室外部的顶端、或所述间室外部的底部。

进一步地，在本实用新型的一个实施例中，所述摄像头安装在所述冰箱中紧邻的两个间室中上部间室门体的下端或下部间室门体的上端。

本实用新型附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本实用新型的实践了解到。

附图说明

本实用新型上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为根据本实用新型实施例的冰箱的方框示意图；

图2为根据本实用新型一个具体实施例的冰箱，当摄像头安装在间室内部的顶端时的位置示意图；

图3为根据本实用新型一个具体实施例的冰箱，当摄像头安装在间室外部的顶端时的位置示意图；

图4为根据本实用新型另一个具体实施例的冰箱，当摄像头安装在冰箱中紧邻的两个间室中上部间室门体的下端时的位置示意图；

图5为根据本实用新型另一个具体实施例的冰箱，当摄像头安装在冰箱中紧邻的两个间室中下部间室门体的上端时的位置示意图；以及

图6为根据本实用新型一个实施例的冰箱的方框示意图。

具体实施方式

下面详细描述本实用新型的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本实用新型，而不能解释为对本实用新型的限制。

下文的公开提供了许多不同的实施例或例子用来实现本实用新型的不同结构。为了简化本实用新型的公开，下文中对特定例子的部件和设置进行描述。当然，它们仅仅为示例，并且目的不在于限制本实用新型。此外，本实用新型可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施例和/或设置之间的关系。此外，本实用新型提供了的各种特定的工艺和材料的例子，但是本领域普通技术人员可以意识到其他工艺的可应用于性和/或其他材料的使用。另外，以下描述的第一特征在第二特征之“上”的结构可以包括第一和第二特征形成为直接接触的实施例，也可以包括另外的特征形成在第一和第二特征之间的实施例，这样第一和第二特征可能不是直接接触。

在本实用新型的描述中，需要说明的是，除非另有规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是机械连接或电连接，也可以是两个元件内部的连通，可以是直接相连，也可以通过中间媒介间接相连，对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。

下面参照附图来描述根据本实用新型实施例提出的冰箱。

如图1所示，本实用新型实施例的冰箱1包括：摄像头2以及控制装置3。其中，摄像头2设置在冰箱1上，用于获取用户放入或取出食物的动作过程图像。控制装置3用于对动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，其中，食物信息包括食物的名称、存放位置，以及根据动作类型和对应的食物信息对冰箱1内的食物统计数据进行管理。

具体地，在本实用新型的一个实施例中，摄像头2可以安装在冰箱间室4内部的顶端、或间室4内部的底部、或间室4外部的顶端、或间室4外部的底部等能够获取用户放入或取出食物的动作过程图像的位置。其中，在本实用新型的一个具体实施例中，当摄像头2安装在间室4内部的顶端时如图2所示，当摄像头2安装在间室4外部的顶端时如图3所示。

具体地，在本实用新型的另一个实施例中，摄像头2可以安装在冰箱1中紧邻的两个间室4中上部间室门体5的下端或下部间室门体6的上端等能够获取用户放入或取出食物的动作过程图像的位置。其中，在本实用新型的一个具体实施例中，当摄像头2安装在冰箱1中紧邻的两个间室4中上部间室门体5的下端时如图4所示，当摄像头2安装在冰箱1中紧邻的两个间室4中下部间室门体6的上端时如图5所示。

在本实用新型的一个实施例中，控制装置3可以在冰箱1开门后启动摄像头2。进一步地，在本实用新型的一个具体实施例中，摄像头2取用户放入或取出食物的动作过程图像具体可以为：摄像头2连续拍摄用户放入或取出食物过程的一组图像(照片)，该组图像包括静态搁架图像、用户手与食物遮挡搁架的图像以及没有食物的用户手图像等。

具体地，对动作过程图像进行图像分割可以为对用户手的轮廓线、食物的轮廓线等进行分割。另外，在本实用新型的一个实施例中，控制装置3还可以对动作过程图像进行图像顺序比较。需要说明的是，对于摄像头2拍摄的动作过程图像即连续拍摄的一组图像，控制装置3进行图像分割、图像模式识别、图像顺序比较这三种动作的先后次序是可以交换的，例如图像分割-图像模式识别-图像顺序比较、图像分割-图像顺序比较-图像模式识别、图像顺序比较-图像模式识别-图像分割等次序，而且控制装置3对动作过程图像进行图像分割、图像模式识别、图像顺序比较这三种动作可以同时进行或两两同时进行，例如图像分割和图像模式识别同时进行、图像分割和图像顺序比较同时进行等。

进一步地，在本实用新型的一个实施例中，动作类型可以包括放入食物动作和取出食物动作。进一步地，在本实用新型的一个实施例中，控制装置3可以包括动作类型获取模块31和食物信息获取模块32。其中，动作类型获取模块31用于获取相邻图像中用户手和食物的变化关系，并对变化关系进行图像顺序比较以确定动作类型。食物信息获取模块32用于对动作过程图像进行图像分割以获取食物的图像，并对食物的图像进行图像模式识别以获取对应的食物信息。其中，食物信息获取模块32对食物的图像进行图像模式识别后，即可自动获得与食物的名称相关的食物信息。

进一步地，在本实用新型的一个实施例中，存放位置可以包括食物摆放搁架的层级。具体地，在本实用新型的一个实施例中，食物的图像包括用户手与食物遮挡搁架的图像，食物摆放搁架的层级可以通过对用户手与食物遮挡搁架的图像进行图像模式识别获取。

在本实用新型的一个实施例中，如图6所示，食物统计数据可以存储在存储器4中，控制装置3可以为单片机等，其中，冰箱1中的控制装置3还可以通过通信接口5与冰箱1外的设备进行通信。

本实用新型实施例提出的冰箱，在摄像头获取用户放入或取出食物的动作过程图像后，控制装置对动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，以及根据动作类型和对应的食物信息对冰箱内的食物统计数据进行管理。该冰箱只需一个摄像头即可在冰箱开门期间自动识别用户放入或取出食物的动作、食物的名称和存放位置，具有更好的实时性和用户体验，且成本低。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本实用新型的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本实用新型的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本实用新型的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本实用新型各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本实用新型的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本实用新型的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本实用新型的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本实用新型的范围由所附权利要求及其等同限定。

Claims (7)

1.一种冰箱，其特征在于，包括：

摄像头，所述摄像头设置在所述冰箱上，用于获取用户放入或取出食物的动作过程图像；以及

控制装置，用于对所述动作过程图像进行图像分割、图像模式识别以确定动作类型和对应的食物信息，其中，所述食物信息包括食物的名称、存放位置，以及根据所述动作类型和对应的食物信息对所述冰箱内的食物统计数据进行管理。

2.如权利要求1所述的冰箱，其特征在于，所述动作类型包括放入食物动作和取出食物动作。

3.如权利要求2所述的冰箱，其特征在于，所述控制装置包括：

动作类型获取模块，所述动作类型获取模块用于获取相邻图像中用户手和食物的变化关系，并对所述变化关系进行图像顺序比较以确定所述动作类型；以及

食物信息获取模块，所述食物信息获取模块用于对所述动作过程图像进行图像分割以获取所述食物的图像，并对所述食物的图像进行图像模式识别以获取所述对应的食物信息。

4.如权利要求3所述的冰箱，其特征在于，所述存放位置包括所述食物摆放搁架的层级。

5.如权利要求4所述的冰箱，其特征在于，所述食物的图像包括所述用户手与所述食物遮挡搁架的图像，所述食物摆放搁架的层级通过对所述用户手与所述食物遮挡搁架的图像进行图像模式识别获取。

6.如权利要求1所述的冰箱，其特征在于，所述摄像头安装在所述冰箱间室内部的顶端、或所述间室内部的底部、或所述间室外部的顶端、或所述间室外部的底部。

7.如权利要求1所述的冰箱，其特征在于，所述摄像头安装在所述冰箱中紧邻的两个间室中上部间室门体的下端或下部间室门体的上端。