CN107763955B - 一种冰箱及其控制方法 - Google Patents

一种冰箱及其控制方法 Download PDF

Info

Publication number
CN107763955B
CN107763955B CN201610709750.5A CN201610709750A CN107763955B CN 107763955 B CN107763955 B CN 107763955B CN 201610709750 A CN201610709750 A CN 201610709750A CN 107763955 B CN107763955 B CN 107763955B
Authority
CN
China
Prior art keywords
food material
target food
image
refrigerator
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610709750.5A
Other languages
English (en)
Other versions
CN107763955A (zh
Inventor
朱建高
刘照光
刘兆祥
彭汉光
高宽志
高韬
侯同尧
宁美凤
马妍妍
彭红亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Shandong Refrigerator Co Ltd
Original Assignee
Hisense Shandong Refrigerator Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Shandong Refrigerator Co Ltd filed Critical Hisense Shandong Refrigerator Co Ltd
Priority to CN201610709750.5A priority Critical patent/CN107763955B/zh
Publication of CN107763955A publication Critical patent/CN107763955A/zh
Application granted granted Critical
Publication of CN107763955B publication Critical patent/CN107763955B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • F25D29/003Arrangement or mounting of control or safety devices for movable devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • F25D29/005Mounting of control devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2500/00Problems to be solved
    • F25D2500/06Stock management

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

本发明的实施例提供一种冰箱及其控制方法,涉及家电领域,能够提高冰箱对其内部食材监控的准确性。具体方案为:根据检测单元的输出信号判断目标食材的运动方向,所述目标食材为用户放入或者取出食材时所移动的食材;在预设的拍照触发条件满足时控制图像采集处理单元对所述目标食材拍照,根据拍得的照片提取所述目标食材的特征;根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签并保存;冰箱所保存的录入标签用于标识冰箱已录入的食材。本发明用于冰箱的制造。

Description

一种冰箱及其控制方法
技术领域
本发明涉及家电领域,尤其涉及一种冰箱及其控制方法。
背景技术
生活中常常出现冰箱内食材过期而造成食材浪费的问题,为解决该问题,市场上出现了带有食材录入和过期提醒功能的冰箱。
当用户向冰箱放入食材时,通过冰箱提供的输入界面录入放入了什么食材,保质期是多久,另外从冰箱内取出食材时,再删除或者更新之前的记录。当某种食材到了保质期时,就输出提醒信息。然而这种方案需要用户进行录入和删除,实际使用中十分不便,市场反馈使用体验不佳,因此冰箱实现自动录入和提醒功能是产品的改进方向。
现有方案中,在冰箱中安装摄像头,当用户打开冰箱门然后又关闭冰箱门时,对冰箱内食材进行拍照,通过图像分析为出现在图像中的食材各设置一个保质期标签,在保质期内如果该种食材在图像中消失则认为用户将食材取出,此时删除保质期标签。如果一个保质期标签一直存在未被删除,并且其设置的保质期到期,则向用户输出提醒信息。
然而,当冰箱内食材的种类和数量较多时,由于食材之间互相遮挡,很可能导致摄像头拍摄不到某一种食材,在对摄像头拍得到的照片进行分析后被遮挡的食材可能会被判定为已经被取出,因此冰箱将该种食材对应的保质期标签删除,这样当被遮挡的食材过期时用户不会收到提醒信息,也就是说这种情况下提醒功能会失效。
冰箱内食材互相遮挡的情况下,用户在使用过程中如果不仔细检查,被遮挡的食材往往不易被发现,由于现有的冰箱对其内部食材的监控不够准确,非常容易导致食材因过期而浪费。另外过期的食材如果不被及时清理,还可能导致冰箱内异味、其它食材被污染等问题,严重影响用户对冰箱产品的使用体验。
发明内容
本申请提供一种冰箱及其控制方法,能够提高冰箱对其内部食材监控的准确性。为达到上述目的,本申请采用如下技术方案:
第一方面,提供一种冰箱的控制方法,根据检测单元的输出信号判断目标食材的运动方向,所述目标食材为用户放入或者取出食材时所移动的食材;
在预设的拍照触发条件满足时控制图像采集处理单元对所述目标食材拍照,根据拍得的照片提取所述目标食材的特征;
根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签并保存;冰箱所保存的录入标签用于标识冰箱已录入的食材。
第二方面,提供一种冰箱,包括:检测单元、图像采集处理单元、控制单元以及存储单元;
所述检测单元,用于检测目标食材的运动方向,并根据检测结果向控制单元输出反馈信号;所述目标食材为用户放入或者取出食材时所移动的食材;
所述图像采集处理单元,用于在预设的拍照触发条件满足时对所述目标食材拍照;
所述控制单元,用于根据所述检测单元输出的反馈信号确定所述目标食材的运动方向,并根据所述图像采集处理单元拍得的照片提取所述目标食材的特征;根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签;并将所述录入标签存储于所述存储单元,所述存储单元所保存的录入标签用于标识冰箱已录入的食材。
本发明的实施例所提供的冰箱及其控制方法,通过检测目标食材的运动方向,确定用户是在放入还是在取出食材;通过拍照触发条件限定拍照的时机得到目标食材的图像,从图像中提取的目标食材的特征;最后根据目标食材的运动方向以及特征,更新录入标签。例如,当用户放入食材时,冰箱根据从图像中提取的目标食材的特征,新建或者修改录入标签,当用户取出食材时,冰箱根据从图像中提取的目标食材的特征,修改或者删除已有的录入标签,从而达到准确监控冰箱内食材的目的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的实施例一所提供的一种冰箱的控制方法流程示意图;
图2为本发明的实施例一中对信号发射端、信号接收端以及摄像头安装位置的说明示意图;
图3为本发明的实施例一中对信号发射端和信号接收端安装位置和数量和一种示例图;
图4为本发明的实施例一中对信号发射端和信号接收端安装位置和数量和另一种示例图;
图5为本发明的实施例一提供的对冰箱工作流程的说明示意图;
图6为本发明的实施例二中对摄像头安装位置的说明示意图;
图7为本发明的实施例二中对摄像头动检区域的说明示意图;
图8为本发明的实施例二提供的对冰箱工作流程的说明示意图;
图9为本发明的实施例提供的一种冰箱结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了便于清楚描述本发明实施例的技术方案,在本发明的实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分,本领域技术人员可以理解“第一”、“第二”等字样并不是在对数量和执行次序进行限定。
现有技术中,为了监控冰箱内部的食材,采用摄像头对冰箱储物空间进行监控,摄像头拍摄得到冰箱内食材的图片,图片里有哪些食材,就确定冰箱里有哪些食材。拍摄的对象为冰箱内已有的食材,图形分析的目的也是确定冰箱内已有的食材。简而言之,拍摄和分析的对象都是冰箱内的“存量”。
一方面,由于冰箱内多种食材往往堆叠放置导致食材之间互相遮挡,摄像头并不能拍摄到全部的食材;另一方面,需要识别和记录图片里所呈现的每一种食材,因而图形分析难度大,易出错,因而导致冰箱对食材存量的监控出错。
本发明的目的在于讨论如何提高对食材监控的准确性。为克服食材相互遮挡带来的影响,本发明的方案检测用户单次放入或者取出操作,仅对用户单次操作过程中放入或者取出的食材进行监控和分析,用户每放入一件食材就增加一条记录,每取出一件食材就删除一条记录,无需拍摄分析冰箱内的全部存量,而只是对用户一次放入或取出操作的对象进行监控分析,简而言之,仅对用户单次操作的“差量”进行监控分析,从而克服食材相互遮挡带来的监控出错的问题,同时由于拍摄的重点仅仅为一次操作的差量,因而图像分析的难度随之降低,分析识别的准确性相应提高。以下结合本发明的实施例对本申请的方案做具体说明。
实施例一
本发明的实施例一提供一种冰箱的控制方法,参照图1所示,包括以下步骤:
101、根据检测单元的输出信号判断目标食材的运动方向。
目标食材为用户放入或者取出食材时所移动的食材。为便于描述,本发明的实施例中将用户放入、取出某一种物体(食材)的行为称为一次操作。
用户放入食材或者取出食材均为一次操作。如果用户在放入一件食材同时又取出一件食材,这样的操作过程可以拆分为两次操作,一次放入,一次取出。
食材的运动方向包括放入方向和取出方向,本发明的实施例中通过判断食材的运动方向来确定冰箱的存量增加还是减少。存量增加则增加一个录入标签,用来记录增加的差量,存量减少则删除一个录入标签,用来记录减少的差量,具体将在后文说明。
以下结合一种具体的实时方式,对检测目标食材运动方向的具体过程进行说明。结合图2所示,冰箱包括检测单元,检测单元包括安装于箱体内胆上的信号发射端21和信号接收端22,信号发射端21和信号接收端22位于箱体前端面与层架前端面之间,在无外物遮挡的情况下,信号发射端21发出的检测信号被信号接收端22接收。
可选的,检测信号可以为红外信号或者激光信号。对应地,信号发射端和信号接收端分别为红外信号发射端和红外信号接收端,或者分别为激光信号发射端和激光信号接收端。
图2中A和A1用于标识信号发射端和信号接收端可能的安装位置。信号发射端和信号接收端可以在同侧(均在A线上或者均在A1线上)或者两侧(一个在A线上另一个在A1线上),信号发射端和信号接收端的数量也可以有多个。
例如,如图3所示,红外信号发射端31和红外信号接收端32为一组,在无外物遮挡的情况下,红外信号发射端31向红外信号接收端32发射检测信号。冰箱包括若干个隔层,每个隔层可以对应一组信号发射和接收端,图3所示为3个隔层对应3组信号发射和接收端的情形。
另举一例,如图4所示,激光信号发射端41和激光信号接收端42为一组,在无外物遮挡的情况下,激光信号发射端41发出的检测信号经过若干反射镜面43反射后到达激光信号接收端42。
结合图3,当用户操作隔层内食材时,用户的手或者手中的食材会遮挡检测信号,用户操作结束后,信号接收端正常接收检测信号。结合图4,检测信号被反射镜面43反射过程中,信号传输路径形成网状,用户操作过程中会遮挡检测信号,用户操作结束后,信号接收端正常接收检测信号。
因此,当信号接收端接收到的检测信号由接通状态中断时,即可确定目标食材的运动方向为放入方向;当信号接收端在检测信号中断后重新接收到检测信号时,即可确定目标食材的运动方向为取出方向。
102、在预设的拍照触发条件满足时对目标食材拍照。
冰箱包括摄像头,通过拍照得到用于图像分析的图像。
在拍照触发条件满足时对拍照,具体包括两种情形:
第一种,确定用户在放入食材时拍照。具体的,当检测信号由连接状态中断时,对预设的空间范围拍照得到第一图像。这里的空间范围是指摄像头的拍摄范围。结合图2所示,摄像头23可以安装在冰箱储物空间顶部,位于门体和层架之间,空间范围具体是箱体前端面与层架前端面之间的空间范围,也就是用户操作过程中其手还有食材所经过的空间范围。
第二种,确定用户在取出食材时拍照。具体的,当检测信号在中断后重新接通时,对空间范围拍照得到第二图像。
第一图像用于记录用户放入食材的过程,第二图像用于记录用户取出食材的过程。通过对第一图像和第二图像设置标签加以区分,便于对放入和取出操作分别做记录和分析。例如将第一图像存入到放入食材图片库,将第二图像存入到取出食材图片库,并对图片增加时间标签,从而完整记录用户操作的整个过程。
103、根据拍得的照片提取目标食材的特征。
提取目标食材的特征,是指对目标食材进行识别或者标记。例如,通过图像分割和深度学习识别技术,识别目标食材,对于其中只有手的图像则直接删除,如果不能识别目标食材则提取其特征并分配代号标识。这样,不同的食材均与其各自的特征或者代号相对应。
104、根据目标食材的运动方向以及目标食材的特征,更新录入标签并保存。
冰箱所保存的录入标签用于标识冰箱已录入的食材,一次更新录入标签即记录一次操作的差量,包括增加放入操作的差量以及删除取出操作的差量。
更新和保存录入标签包括新建并保存录入标签、修改并保存录入标签或者删除录入标签。当冰箱内没有与目标食材同类的食材时新建录入标签。放入目标食材时,当冰箱内已有与目标食材同类的食材时修改已有的录入标签,即在已有录入标签上增加该同类食材的数量。取出目标食材时,当冰箱内再没有与目标食材同类的食材时删除已有的录入标签,当冰箱内还有与目标食材同类的食材时修改已有的录入标签,即在已有录入标签上减少该同类食材的数量。
本实施例中分别通过步骤104-1和104-2,以新建和删除录入标签的情况为例对更新录入标签的过程进行说明。
104-1、放入食材。
当检测确定目标食材的运动方向为放入方向时,表示用户向冰箱内放入了目标食材,此时根据目标食材的特征,新建并保存录入标签。录入标签可以根据从第一图像提取的特征生成,可以包括目标食材的种类(如果识别成功)或者代号(如果未成功识别),还有存入时间等信息。
104-2、取出食材。
当检测确定目标食材的运动方向为取出方向时,表示用户从冰箱取出了目标食材,此时在已存的录入标签中,将与目标食材的特征相匹配的录入标签删除。具体的,根据从第二图像提取的特征,在已存储的录入标签中查找到匹配的录入标签并删除。
以下结合图5所示的流程图对冰箱监控食材的过程进行说明。
信号发射端和信号接收端可以在冰箱门打开时启动,在启动之后,检测信号的状态有两种:接通和被阻。当用户没有任何操作时,检测信号接通。
当用户在操作时导致检测信号被阻时,摄像头抓拍得到第一图像。
当用户操作完成时,检测信号接通,此时摄像头抓拍得到第二图像。
可选的,摄像头可以连续抓拍多张第一图像或者第二图像,在图像分析的时候可以筛选得到最佳的图像。
第一图像和第二图像被分别存储在放入食材图片库和取出食材图片库。
在冰箱门打开的情况下,根据检测信号的状态多次抓拍。在冰箱门关闭后,开始对已经存储的第一图像和第二图像进行分析处理,包括特征提取、生成或删除录入标签等。
冰箱完成对图像的分析处理后,将处理结果上传云端,由云端向用户的手机提供食材过期提醒、实时查看等功能。
本发明的实施例所提供的冰箱的控制方法,通过检测目标食材的运动方向,确定用户是在放入还是在取出食材,通过拍照触发条件限定拍照的时机得到目标食材的图像,当用户放入食材时,冰箱根据从图像中提取的目标食材的特征,新建或者修改录入标签,当用户取出食材时,冰箱根据从图像中提取的目标食材的特征,修改或者删除已有的录入标签,从而达到准确监控冰箱内食材的目的。
实施例二
参照图1,本发明的实施例二还提供另一种具体的实施方式。实施例二中部分步骤与实施例一中相应的步骤相同,此处对相同部分不再详述,而仅对与实施例一的区别部分做详细说明。
101、根据检测单元的输出信号判断目标食材的运动方向。
结合图6所示,在冰箱储物空间顶部,位于门体和层架之间的位置处安装有摄像头61,用于监控冰箱门体和层架之间的区域。
结合图7所示,摄像头61的监控区域包括两个动态检测区域,分别为第一动检区域62和第二动检区域63,第一动检区域62靠近门体一侧,第二动检区域63靠近层架一侧。
用户向冰箱内放入食材时,食材先经过第一动检区域,后经过第二动检区域。用户从冰箱取出食材时,食材先经过第二动检区域,后经过第一动检区域。因此,当检测到第一动检区域内的图像先于第二动检区域内的图像变化时,确定目标食材的运动方向为放入方向。当检测到第二动检区域内的图像先于第一动检区域内的图像变化时,确定目标食材的运动方向为取出方向。
102、在预设的拍照触发条件满足时对目标食材拍照。
在拍照触发条件满足时对拍照,具体包括两种情形:
第一种,确定用户在放入食材时拍照。具体的,当先后检测到第一动检区域和第二动检区域内图像变化时,表示用户在放入食材,此时对监控区域拍照得到第一图像。
第二种,确定用户在取出食材时拍照。具体的,当先后检测到第二动检区域和第一动检区域内图像变化时,对监控区域拍照得到第二图像。
103、根据拍得的照片提取目标食材的特征。
104、根据目标食材的运动方向以及目标食材的特征,更新录入标签。
以下结合图8所示的流程图对冰箱监控食材的过程进行说明。
摄像头启动对第一动检区域和第二动检区域的动态检测,当先后检测到第一动检区域和第二动检区域内图像变化时,对监控区域拍照得到第一图像。当先后检测到第二动检区域和第一动检区域内图像变化时,对监控区域拍照得到第二图像。
第一图像和第二图像被分别存储在放入食材图片库和取出食材图片库。
在冰箱门打开的情况下,根据动检结果多次抓拍。在冰箱门关闭后,开始对已经存储的第一图像和第二图像进行分析处理,包括特征提取、生成或删除录入标签等。特别指出一点,用户打开冰箱门后第一次伸手进冰箱时,如果是空手,则第一图像中只有手,对于这样的图像在进行分析处理时直接删除。
冰箱完成对图像的分析处理后,将处理结果上传云端,由云端向用户的手机提供食材过期提醒、实时查看等功能。
本发明的实施例所提供的冰箱及其控制方法,利用摄像头的动态检测功能来检测目标食材的运动方向,确定用户是在放入还是在取出食材,通过拍照触发条件限定拍照的时机得到目标食材的图像,当用户放入食材时,冰箱根据从图像中提取的目标食材的特征,新建或者修改录入标签,当用户取出食材时,冰箱根据从图像中提取的目标食材的特征,修改或者删除已有的录入标签,从而达到准确监控冰箱内食材的目的。
基于上述实施例所提供的控制方法,本发明的实施例还提供一种冰箱,用于执行上述控制方法。参照图9所示,冰箱包括:检测单元901、图像采集处理单元902、控制单元903以及存储单元904。
检测单元901,用于检测目标食材的运动方向,并根据检测结果向控制单元903输出反馈信号。目标食材为用户放入或者取出食材时所移动的食材。
图像采集处理单元902,用于在预设的拍照触发条件满足时对目标食材拍照。
控制单元903,用于根据检测单元901输出的反馈信号确定目标食材的运动方向,并根据图像采集处理单元902拍得的照片提取目标食材的特征。根据目标食材的运动方向以及目标食材的特征,更新录入标签,并将录入标签存储于存储单元904,存储单元904所保存的录入标签用于标识冰箱已录入的食材。
可选的,检测单元901包括安装于箱体内胆上的信号发射端和信号接收端,其中,信号发射端和信号接收端位于箱体前端面与层架前端面之间,在无外物遮挡的情况下,信号发射端发出的检测信号被信号接收端接收。
信号接收端,用于在接收到检测信号时向控制单元903输出第一反馈信号,在没有接收到检测信号时向控制单元903输出第二反馈信号。
控制单元903,具体用于当从检测单元901接收到的反馈信号由第一反馈信号变化为第二反馈信号时,确定目标食材的运动方向为放入方向。当从检测单元901接收到的反馈信号由第二反馈信号变化为第一反馈信号时,确定目标食材的运动方向为取出方向。
可选的,图像采集处理单元902包括摄像头,
控制单元903具体用于在确定第一反馈信号变化为第二反馈信号时,控制摄像头对预设的空间范围拍照得到第一图像。在确定第二反馈信号变化为第一反馈信号时,控制摄像头对空间范围拍照得到第二图像。
其中空间范围是位于箱体前端面与层架前端面之间的空间范围。
可选的,检测单元901为安装于箱体内胆上的摄像头,摄像头用于监控箱体前端面与层架前端面之间的区域,生成监控数据,监控区域包括第一动检区域和第二动检区域,第一动检区域靠近门体一侧,第二动检区域靠近层架一侧。
检测单元901,具体用于当根据监控数据确定第一动检区域内图像有变化时,向控制单元903输出第一反馈信号。当确定第二动检区域内图像有变化时,向控制单元903输出第二反馈信号。
控制单元903,具体用于在先后接收到第一反馈信号和第二反馈信号时,确定目标食材的运动方向为放入方向。在先后接收到第二反馈信号和第一反馈信号时,确定目标食材的运动方向为取出方向。
可选的,控制单元903,还用于在先后接收到第一反馈信号和第二反馈信号时,控制图像采集处理单元902对监控区域拍照得到第一图像。在先后接收到第二反馈信号和第一反馈信号时,控制图像采集处理单元902对监控区域拍照得到第二图像。
可选的,控制单元903,还用于当确定目标食材的运动方向为放入方向时,根据从第一图像提取的特征更新录入标签。当确定目标食材的运动方向为取出方向时,根据从第二图像提取的特征更新录入标签。
本发明的实施例所提供的冰箱,通过检测目标食材的运动方向,确定用户是在放入还是在取出食材;通过拍照触发条件限定拍照的时机得到目标食材的图像,从图像中提取的目标食材的特征;最后根据目标食材的运动方向以及特征,更新录入标签。例如,当用户放入食材时,冰箱根据从图像中提取的目标食材的特征,新建或者修改录入标签,当用户取出食材时,冰箱根据从图像中提取的目标食材的特征,修改或者删除已有的录入标签,从而达到准确监控冰箱内食材的目的。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种冰箱的控制方法,其特征在于,包括:
根据检测单元的输出信号判断目标食材的运动方向,所述目标食材为用户放入或者取出食材时所移动的食材;
在预设的拍照触发条件满足时控制图像采集处理单元对所述目标食材拍照,根据拍得的照片提取所述目标食材的特征;
根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签并保存;冰箱所保存的录入标签用于标识冰箱已录入的食材;
所述检测单元为安装于箱体内胆上的信号发射端和信号接收端,其中,信号发射端和信号接收端位于箱体前端面与层架前端面之间,在无外物遮挡的情况下,所述信号发射端发出的检测信号被所述信号接收端接收;
所述根据检测单元的输出信号判断目标食材的运动方向,包括:当所述信号接收端接收到的所述检测信号由接通状态至中断时,确定所述目标食材的运动方向为放入方向;当所述信号接收端在所述检测信号中断后重新接收到所述检测信号时,确定所述目标食材的运动方向为取出方向。
2.根据权利要求1所述的控制方法,其特征在于,所述在预设的拍照触发条件满足时控制图像采集处理单元对所述目标食材拍照,包括:
当所述检测信号由连接状态中断时,对预设的空间范围拍照得到第一图像;当所述检测信号在中断后重新接通时,对所述空间范围拍照得到第二图像;
其中所述空间范围是箱体前端面与层架前端面之间的空间范围。
3.根据权利要求1所述的控制方法,其特征在于,
所述检测单元为安装于箱体内胆上的摄像头,所述摄像头用于监控冰箱箱体前端面与层架前端面之间的区域,监控区域包括第一动检区域和第二动检区域,所述第一动检区域靠近箱体前端面一侧,所述第二动检区域靠近层架前端面一侧;
当检测到所述第一动检区域内的图像先于所述第二动检区域内的图像变化时,确定所述目标食材的运动方向为放入方向;当检测到所述第二动检区域内的图像先于所述第一动检区域内的图像变化时,确定所述目标食材的运动方向为取出方向。
4.根据权利要求3所述的控制方法,其特征在于,所述在预设的拍照触发条件满足时控制图像采集处理单元对所述目标食材拍照,包括:
当先后检测到所述第一动检区域和所述第二动检区域内图像变化时,对监控区域拍照得到第一图像;当先后检测到所述第二动检区域和所述第一动检区域内图像变化时,对监控区域拍照得到第二图像。
5.根据权利要求2或4所述的控制方法,其特征在于,
所述根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签,包括:
当确定所述目标食材的运动方向为放入方向时,根据从所述第一图像提取的特征增加录入标签或在已有录入标签上增加数量;
当确定所述目标食材的运动方向为取出方向时,根据从所述第二图像提取的特征,删除录入标签或在录入标签上减少数量。
6.一种冰箱,其特征在于,包括:检测单元、图像采集处理单元、控制单元以及存储单元;
所述检测单元,用于检测目标食材的运动方向,并根据检测结果向控制单元输出反馈信号;所述目标食材为用户放入或者取出食材时所移动的食材;
所述图像采集处理单元,用于在预设的拍照触发条件满足时对所述目标食材拍照;
所述控制单元,用于根据所述检测单元输出的反馈信号确定所述目标食材的运动方向,并根据所述图像采集处理单元拍得的照片提取所述目标食材的特征;根据所述目标食材的运动方向以及所述目标食材的特征,更新录入标签;并将所述录入标签存储于所述存储单元;
所述存储单元所保存的录入标签用于标识冰箱已录入的食材;
所述检测单元包括安装于箱体内胆上的信号发射端和信号接收端,其中,信号发射端和信号接收端位于箱体前端面与层架前端面之间,在无外物遮挡的情况下,所述信号发射端发出的检测信号被所述信号接收端接收;
所述信号接收端,用于在接收到所述检测信号时向所述控制单元输出第一反馈信号,在没有接收到所述检测信号时向所述控制单元输出第二反馈信号;
所述控制单元,具体用于当从所述检测单元接收到的反馈信号由所述第一反馈信号变化为所述第二反馈信号时,确定所述目标食材的运动方向为放入方向;当从所述检测单元接收到的反馈信号由所述第二反馈信号变化为所述第一反馈信号时,确定所述目标食材的运动方向为取出方向。
7.根据权利要求6所述的冰箱,其特征在于,所述图像采集处理单元包括摄像头,
所述控制单元具体用于在确定所述第一反馈信号变化为所述第二反馈信号时,控制所述摄像头对预设的空间范围拍照得到第一图像;在确定所述第二反馈信号变化为所述第一反馈信号时,控制所述摄像头对所述空间范围拍照得到第二图像;
其中所述空间范围是位于箱体前端面与层架前端面之间的空间范围。
8.根据权利要求6所述的冰箱,其特征在于,
所述检测单元为安装于箱体内胆上的摄像头,所述摄像头用于监控箱体前端面与层架前端面之间的区域,生成监控数据,监控区域包括第一动检区域和第二动检区域,所述第一动检区域靠近门体一侧,所述第二动检区域靠近层架一侧;
所述检测单元,具体用于当根据所述监控数据确定所述第一动检区域内图像有变化时,向所述控制单元输出第一反馈信号;当确定所述第二动检区域内图像有变化时,向所述控制单元输出第二反馈信号;
所述控制单元,具体用于在先后接收到第一反馈信号和所述第二反馈信号时,确定所述目标食材的运动方向为放入方向;在先后接收到所述第二反馈信号和所述第一反馈信号时,确定所述目标食材的运动方向为取出方向。
9.根据权利要求8所述的冰箱,其特征在于,
所述控制单元,还用于在先后接收到第一反馈信号和所述第二反馈信号时,控制所述图像采集处理单元对监控区域拍照得到第一图像;在先后接收到所述第二反馈信号和所述第一反馈信号时,控制所述图像采集处理单元对监控区域拍照得到第二图像。
10.根据权利要求7或9所述的冰箱,其特征在于,
所述控制单元,还用于当确定所述目标食材的运动方向为放入方向时,根据从所述第一图像提取的特征更新录入标签;当确定所述目标食材的运动方向为取出方向时,根据从所述第二图像提取的特征更新录入标签。
CN201610709750.5A 2016-08-23 2016-08-23 一种冰箱及其控制方法 Active CN107763955B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610709750.5A CN107763955B (zh) 2016-08-23 2016-08-23 一种冰箱及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610709750.5A CN107763955B (zh) 2016-08-23 2016-08-23 一种冰箱及其控制方法

Publications (2)

Publication Number Publication Date
CN107763955A CN107763955A (zh) 2018-03-06
CN107763955B true CN107763955B (zh) 2020-06-09

Family

ID=61264196

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610709750.5A Active CN107763955B (zh) 2016-08-23 2016-08-23 一种冰箱及其控制方法

Country Status (1)

Country Link
CN (1) CN107763955B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110245724B (zh) * 2018-03-07 2023-09-15 博西华电器(江苏)有限公司 食材更新方法、装置及储藏设备
CN110378907B (zh) * 2018-04-13 2023-09-19 青岛海尔智能技术研发有限公司 智能冰箱内图像的处理方法及计算机设备、存储介质
CN109114877A (zh) * 2018-08-13 2019-01-01 长虹美菱股份有限公司 一种基于冰箱动态识别的食品管理系统
CN109284728B (zh) * 2018-10-08 2020-12-18 深圳市微埃智能科技有限公司 识别物品的方法、装置、设备和存储介质
CN109612199B (zh) * 2018-11-20 2019-12-06 珠海格力电器股份有限公司 一种冰箱中异物信息提醒方法及装置
CN113124634B (zh) * 2019-12-31 2022-05-13 海信集团有限公司 冰箱
CN113494792B (zh) * 2020-03-20 2022-08-16 海信集团有限公司 冰箱
CN113465251B (zh) * 2020-05-28 2022-10-18 海信集团有限公司 智能冰箱及食材识别方法
CN115493343B (zh) * 2021-06-18 2023-10-27 海信集团控股股份有限公司 一种冰箱及其食材管理方法及装置
WO2022262234A1 (zh) * 2021-06-18 2022-12-22 海信集团控股股份有限公司 一种冰箱及其食材管理方法及装置
CN113983737A (zh) * 2021-10-18 2022-01-28 海信(山东)冰箱有限公司 冰箱及冰箱的食材定位方法
CN113915842B (zh) * 2021-10-20 2023-06-23 海信冰箱有限公司 一种冰箱及其食材监控方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100213150B1 (ko) * 1997-08-30 1999-08-02 윤종용 냉장고의 표시 제어방법
CN104132502A (zh) * 2014-07-29 2014-11-05 青岛海尔股份有限公司 冰箱及其内部照明的控制方法
CN105841434A (zh) * 2016-05-25 2016-08-10 海信(山东)冰箱有限公司 一种冰箱及其控制方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100213150B1 (ko) * 1997-08-30 1999-08-02 윤종용 냉장고의 표시 제어방법
CN104132502A (zh) * 2014-07-29 2014-11-05 青岛海尔股份有限公司 冰箱及其内部照明的控制方法
CN105841434A (zh) * 2016-05-25 2016-08-10 海信(山东)冰箱有限公司 一种冰箱及其控制方法

Also Published As

Publication number Publication date
CN107763955A (zh) 2018-03-06

Similar Documents

Publication Publication Date Title
CN107763955B (zh) 一种冰箱及其控制方法
CN106552772B (zh) 视觉识别系统和使用所述视觉识别系统的分类分拣系统
CN106288591B (zh) 一种具有食材管理功能的冰箱及食材管理方法
CN109727275B (zh) 目标检测方法、装置、系统和计算机可读存储介质
CN109271847B (zh) 无人结算场景中异常检测方法、装置及设备
JP6550696B2 (ja) 判定装置、および、判定方法
CN108269333A (zh) 人脸识别方法、应用服务器及计算机可读存储介质
JP2021513690A (ja) 物品識別方法及びシステム、電子機器
CN111626201B (zh) 商品检测方法、装置及可读存储介质
US20160088262A1 (en) Method For Managing Storage Product In Refrigerator Using Image Recognition, And Refrigerator For Same
WO2013110780A1 (en) Systems, methods and computer program products for identifying objects in video data
CN102891960A (zh) 用于确定图像调整参数的方法和相机
US11023717B2 (en) Method, apparatus, device and system for processing commodity identification and storage medium
US10713536B1 (en) Camera method with animal recognition function and monitoring camera
WO2014103673A1 (ja) 情報処理システム、情報処理方法及びプログラム
CN111832345B (zh) 集装箱监控方法、装置及设备、存储介质
JP6508329B2 (ja) 監視システム、監視対象装置、制御方法、及びプログラム
KR101355206B1 (ko) 영상분석을 이용한 출입 계수시스템 및 그 방법
JP6977200B2 (ja) 画像処理装置、画像処理方法及びプログラム
CN113785327A (zh) 图像处理方法、装置、边缘计算设备和计算机存储介质
TWI518293B (zh) A method of controlling the cooling stroke by the image recognition, and a refrigerator
CN111444757A (zh) 无人超市的行人重识别方法、装置、设备及存储介质
CN112580379A (zh) 数据处理系统和方法、电子设备以及计算机可读存储介质
JP2020149132A (ja) 画像処理装置及び画像処理プログラム
CN113850942B (zh) 一种3d库房的辅助信息管理方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant