CN107642944B - 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质 - Google Patents

冰箱储藏物品信息的管理方法、冰箱及计算机存储介质 Download PDF

Info

Publication number
CN107642944B
CN107642944B CN201710906203.0A CN201710906203A CN107642944B CN 107642944 B CN107642944 B CN 107642944B CN 201710906203 A CN201710906203 A CN 201710906203A CN 107642944 B CN107642944 B CN 107642944B
Authority
CN
China
Prior art keywords
refrigerator
information
articles
infrared
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710906203.0A
Other languages
English (en)
Other versions
CN107642944A (zh
Inventor
覃伟柱
邵怀荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TCL Home Appliances Hefei Co Ltd
Original Assignee
TCL Home Appliances Hefei Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TCL Home Appliances Hefei Co Ltd filed Critical TCL Home Appliances Hefei Co Ltd
Priority to CN201710906203.0A priority Critical patent/CN107642944B/zh
Publication of CN107642944A publication Critical patent/CN107642944A/zh
Application granted granted Critical
Publication of CN107642944B publication Critical patent/CN107642944B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

本发明公开了一种冰箱储藏物品信息的管理方法,所述方法包括:获取用户进行存取物品操作时经过预设区域的位置信息;根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。本发明还公开了一种冰箱及计算机存储介质。本发明在用户进行存取物品操作时,可通过确定摄像组件的拍摄参数而使摄像组件拍出清晰的照片,从而提高对照片中物品的识别率。

Description

冰箱储藏物品信息的管理方法、冰箱及计算机存储介质
技术领域
本发明涉及智能家电技术领域,尤其涉及一种冰箱储藏物品信息的管理方法、冰箱及计算机存储介质。
背景技术
随着科技的不断进步和发展,智能化已经成为家电发展的必然趋势。对于冰箱来说,冰箱储藏物品的智能化管理是冰箱智能化的重要组成因素。对于冰箱储藏物品的智能化管理,目前可通过在冰箱的冷藏柜顶部安装摄像头,在物品进出冰箱时连续抓拍照片并进行识别来实现。然而,这种摄像头进行连续抓拍的方式,会拍摄出多张照片,且在拍摄时无法精确聚焦,造成拍摄到的照片不够清晰,从而增加了对照片中物品的识别难度,导致识别率不高。
发明内容
本发明的主要目的在于提供一种冰箱储藏物品信息的管理方法、冰箱及计算机存储介质,旨在解决现有的在物品进出冰箱时连续抓拍照片的方式,拍摄的照片过多且不够清晰,导致对照片中物品的识别率不高的技术问题。
为实现上述目的,本发明提供一种冰箱储藏物品信息的管理方法,所述冰箱储藏物品信息的管理方法应用于冰箱,所述冰箱包括箱体,所述箱体内包括主控模块、监测组件和摄像组件,所述监测组件和摄像组件分别与所述主控模块连接,其中,所述监测组件包括红外发射管,所述红外发射管发射的红外线在预设区域形成红外光束,所述方法包括:
所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息;
根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;
对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。
可选地,所述红外发射管发射的红外线在箱体入口处的预设区域形成竖直方向的红外光束,所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息的步骤包括:
在用户进行存取物品操作时,通过所述监测组件监测预设区域的红外光束状态;
根据所述红外光束状态获取用户进行存取物品操作时经过预设区域的位置信息。
可选地,所述根据所述红外光束状态获取用户进行存取物品操作时经过预设区域的位置信息的步骤包括:
若所述红外光束从无遮挡到被遮挡,则确定当前为用户进行存取物品操作时的进冰箱动作,并获取所述进冰箱动作经过预设区域的位置信息;
若所述红外光束从被遮挡到无遮挡,则确定当前为用户进行存取物品操作时的出冰箱动作,并获取所述出冰箱动作经过预设区域的位置信息。
可选地,所述根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片的步骤包括:
根据所述进冰箱动作经过预设区域的位置信息确定所述摄像组件的第一拍摄参数,并控制所述摄像组件根据所述第一拍摄参数拍摄进冰箱动作的照片;
根据所述出冰箱动作经过预设区域的位置信息确定所述摄像组件的第二拍摄参数,并控制所述摄像组件根据所述第二拍摄参数拍摄出冰箱动作的照片。
可选地,所述对所述摄像组件拍摄的照片进行识别得到识别结果的步骤包括:
对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别;
若从所述进冰箱动作的照片中识别出物品,而从所述出冰箱动作的照片中未识别出物品,则确定当前为存入物品操作,并获取存入物品的信息。
可选地,所述对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别的步骤之后还包括:
若从所述进冰箱动作的照片中未识别出物品,而从所述出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,并获取取出物品的信息。
可选地,所述对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别的步骤之后还包括:
若从所述进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取存入物品信息和取出物品的信息。
可选地,所述方法还包括:
将所述冰箱储藏物品信息通过设置于冰箱上的Wi-Fi模块发送至服务器,以供所述服务器将所述冰箱储藏物品信息反馈至用户终端。
此外,为实现上述目的,本发明还提供一种冰箱,所述冰箱包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理程序被所述处理器执行时如上所述的冰箱储藏物品信息的管理方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机存储介质,所述计算机存储介质上存储有冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理程序被处理器执行时实现如上所述的冰箱储藏物品信息的管理方法的步骤。
本发明提供一种冰箱储藏物品信息的管理方法,所述冰箱包括箱体,所述箱体内包括主控模块、监测组件和摄像组件,所述监测组件和摄像组件分别与所述主控模块连接,其中,所述监测组件包括红外发射管,所述红外发射管发射的红外线在预设区域形成红外光束,所述方法包括:所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息;根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。通过上述方式,本发明主控模块首先获取用户进行存取物品操作时经过预设区域的位置信息,进一步地,根据该位置信息确定摄像组件的拍摄参数,该拍摄参数包括摄像组件的焦距,即根据用户进行存取物品操作时经过预设区域的位置信息可确定摄像组件的精确焦距,然后主控模块控制摄像组件根据拍摄参数拍摄照片,主控模块对摄像组件拍摄的照片进行识别得到识别结果,由于该照片是摄像组件根据精确的焦距拍摄的,那么照片的清晰度将大大提升,主控模块对照片中物品的识别率也随之提高,那么识别结果就更加准确,因此能更好地实现对冰箱内储藏物品信息的管理。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图;
图2是本发明实施例方案中冰箱涉及的系统架构图;
图3为本发明冰箱储藏物品信息的管理方法第一实施例的流程示意图;
图4为图3中步骤S10的细化流程示意图;
图5为本发明冰箱储藏物品信息的管理方法第二实施例的流程示意图;
图6为图3中步骤S20的细化流程示意图;
图7为本发明冰箱储藏物品信息的管理方法第三实施例的流程示意图;
图8为本发明实施例方案中冰箱的监测组件和摄像组件的示意图;
图9为本发明实施例方案中冰箱的监测组件和摄像组件的另一示意图;
图10为本发明实施例方案中监测组件监测A点位置的示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例的主要解决方案是:获取用户进行存取物品操作时经过预设区域的位置信息;根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端是冰箱。
如图1所示,该终端可以包括:处理器1001,例如CPU,通信总线1002,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选的用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、Wi-Fi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示屏的亮度,接近传感器可在移动终端移动到耳边时,关闭显示屏和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及冰箱储藏物品信息的管理程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的冰箱储藏物品信息的管理程序,并执行以下操作:
获取用户进行存取物品操作时经过预设区域的位置信息;
根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;
对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
在用户进行存取物品操作时,通过所述监测组件监测预设平面区域的红外光束状态;
根据所述红外光束状态获取用户进行存取物品操作时经过预设平面区域的位置信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
若所述红外光束从无遮挡到被遮挡,则确定当前为用户进行存取物品操作时的进冰箱动作,并获取所述进冰箱动作经过预设区域的位置信息;
若所述红外光束从被遮挡到无遮挡,则确定当前为用户进行存取物品操作时的出冰箱动作,并获取所述出冰箱动作经过预设区域的位置信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
根据所述进冰箱动作经过预设区域的位置信息确定所述摄像组件的第一拍摄参数,并控制所述摄像组件根据所述第一拍摄参数拍摄进冰箱动作的照片;
根据所述出冰箱动作经过预设区域的位置信息确定所述摄像组件的第二拍摄参数,并控制所述摄像组件根据所述第二拍摄参数拍摄出冰箱动作的照片。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别;
若从所述进冰箱动作的照片中识别出物品,而从所述出冰箱动作的照片中未识别出物品,则确定当前为存入物品操作,并获取存入物品的信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
若从所述进冰箱动作的照片中未识别出物品,而从所述出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,并获取取出物品的信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
若从所述进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取存入物品信息和取出物品的信息。
进一步地,处理器1001可以调用存储器1005中存储的冰箱储藏物品信息的管理程序,还执行以下操作:
将所述冰箱储藏物品信息通过设置于冰箱上的Wi-Fi模块发送至服务器,以供所述服务器将所述冰箱储藏物品信息反馈至用户终端。
基于上述硬件结构,提出本发明冰箱储藏物品信息的管理方法的各个实施例。
参照图3,本发明冰箱储藏物品信息的管理方法第一实施例提供一种冰箱储藏物品信息的管理方法,所述冰箱储藏物品信息的管理方法包括:
步骤S10,所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息;
步骤S20,根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片;
步骤S30,对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。
本实施例应用于冰箱,该冰箱可以为智能冰箱。对于智能冰箱来说,冰箱储藏物品的智能化管理是冰箱智能化的重要组成因素,可通过在冰箱的冷藏柜顶部安装摄像头,在物品进出冰箱时拍摄照片并进行识别来实现,为使摄像头拍摄出的照片更加清晰,提高照片识别率,本实施例提供一种冰箱储藏物品的管理方法。其中,该物品包括食品。
参照图2,本实施例的冰箱涉及的系统架构包括主控模块、摄像组件、监测组件、电控模块、Wi-Fi模块、电源模块。摄像组件、监测组件、电控模块、Wi-Fi模块可分别与主控模块进行通讯连接。其中,主控模块包括芯片,主控模块可安装于冰箱顶部,主控模块可对上述摄像组件、监测组件、电控模块、Wi-Fi模块进行控制。
参照图8和图9,摄像组件包括摄像头,该摄像头可以是通用的USB摄像头,镜头采用广角镜头(如120°以上广角的镜头),广角镜头的视角范围大,可以涵盖较大范围的区域;摄像组件可安装于冰箱的箱体内,其具体安装位置可灵活设置,利于拍摄冰箱箱体入口区域的位置即可,此处不作限定,比如可以将摄像组件安装于冰箱的箱体内胆的顶壁前侧;另外,摄像组件的摄像头数量也不作限定,可根据实际需要进行设置。
继续参照图8和图9,监测组件可以是红外触摸框,红外触摸框有上下左右四条边框,红外触摸框可以安装于冰箱箱体的入口边缘,嵌入在安装凹槽里;红外触摸框的相邻两条边框内配置有依次排列的红外发射管,另外两条相邻的边框内配置有依次排列的红外接收管,红外发射管和红外接收管呈一一对应的排列关系,红外发射管发射的红外线被对应的红外接收管接收,在红外触摸框围成的区域形成二维度的红外光束(红外线光网)。对红外发射管和红外接收管的设置数量不作限定,它们形成的红外光束可覆盖红外触摸框围成的区域即可。可以理解的是,若在红外触摸框的边框内配置的红外发射管仅有一排,对应的红外接收管也仅有一排的情况,那么红外发射管发射的红外线在红外触摸框围成的区域形成红外光束,形成的就是红外触摸框围成的区域内一个垂直平面的红外光束;若在红外触摸框的边框内配置的红外发射管不止一排,对应的红外接收管不一排的情况,那么红外发射管发射的红外线在红外触摸框围成的区域形成红外光束,形成的就是红外触摸框围成的区域内立体的红外光束。将会覆盖红外光束的区域定义为预设区域,有物体经过预设区域时,物体经过预设区域的点的横竖两个方向的红外光束被挡住,那么对应的接收管对红外光束的接收情况就会发生变化,红外触摸框就可通过红外接收管对红外线光束的接收情况变化,精确得出物体经过的具体坐标。如图10所示,红外触摸框的左边框和下面框内是红外发射管,右边框和上面框内是红外接收管,定义红外触摸框左下角为坐标(0,0),当有物体经过A点(X,Y)时,就挡住A点横竖方向红外光束,此时红外触摸框可以确定A点有物体进入,然后结合对应的红外接收管接收红外光束的情况确定A点的坐标。
此外,电控模块、Wi-Fi模块和电源模块也可安装于冰箱顶部,电控模块可检测出冰箱门的开关状态,用于向主控模块提供冰箱开门/关门信号;Wi-Fi模块可将主控模块获得的冰箱储藏物品信息上传至服务器;电源模块用于向上述模块或组件提供电源。
在本实施例中,基于上述冰箱涉及的系统架构,主控模块首先获取用户进行存取物品操作时经过预设区域的位置信息。其中,该存取物品操作包括仅存入物品操作,仅取出物品操作,以及,即存入物品又取出物品的操作。
具体地,参照图4,步骤S10包括:
步骤S11,在用户进行存取物品操作时,通过所述监测组件监测预设区域的红外光束状态;
步骤S12,根据所述红外光束状态获取用户进行存取物品操作时经过预设区域的位置信息。
本实施例中,在冰箱的电控模块检测到冰箱开门时,向主控模块发出冰箱已开门的信号,主控模块接收到冰箱的开门信号后,启动监测组件(红外触摸框),此时监测组件(红外触摸框)的红外发射管发射的红外线在冰箱箱体入口处的预设区域形成竖直方向的红外光束,监测组件(红外触摸框)就可通过用户进行存取物品操作时经过预设区域时红外光束的状态确定用户进行存取物品操作时经过预设区域的具体坐标点,即用户进行存取物品操作时经过预设区域的位置信息。可以理解的是,一次存取操作对应进冰箱动作和出冰箱动作,即用户进行存取物品操作时经过预设区域的位置信息包括进冰箱动作经过预设区域的位置信息和出冰箱动作经过预设区域的位置信息。进一步地,主控模块接收监测组件(红外触摸框)发送的用户进行存取物品操作时经过预设区域的位置信息。
主控模块在得到用户进行存取物品操作时经过预设区域的位置信息后,根据该位置信息确定摄像组件的拍摄参数,该摄像组件的拍摄参数包括摄像组件的焦距,即可通过确定用户进行存取物品操作时经过预设区域的位置信息,从而确定出摄像组件的精确焦距。进一步地,主控模块控制摄像组件根据拍摄参数拍摄照片,那么,摄像组件根据精确的焦距拍摄出的照片,清晰度将大大提升。可以理解的是,由于一次存取操作对应进冰箱动作和出冰箱动作,即用户进行存取物品操作时经过预设区域的位置信息包括进冰箱动作经过预设区域的位置信息和出冰箱动作经过预设区域的位置信息,那么上述拍摄参数也就包括进冰箱动作的拍摄参数和进冰箱动作的拍摄参数,相对应地,摄像组件拍摄出的照片就包括进冰箱动作的照片和出冰箱动作的照片,即在用户的一次存取操作中,根据对应的精确焦距拍摄两张照片。进一步地,主控模块接收摄像组件拍摄的照片。
在本实施例中,主控模块预设有图像识别技术(或图像识别算法),图像识别技术是利用计算机对图像进行处理、分析和理解,以识别各种不同模式的目标和对像的技术。主控模块在获得摄像组件拍摄的照片后,通过图像识别技术对照片进行识别得到识别结果,其中,具体的识别过程可参照现有的图像识别技术,此处不作限定。主控模块对上述进冰箱动作的照片和出冰箱动作的照片分别进行识别,此时,识别结果可能存在三种情况:1)若主控模块从进冰箱动作的照片中识别出物品,而从出冰箱动作的照片中未识别到物品,则确定当前为存入物品操作,然后获取存入物品的信息;2)若主控模块从进冰箱动作的照片中未识别到物品,而从出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,然后获取取出物品的信息;3)若从进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取存入物品信息和取出物品的信息。其中,物品信息包括物品的名称、类别、保鲜期等。在得到上述识别结果后,主控模块将上述识别结果对应地录入预设物品清单中,实现对冰箱储藏物品信息的管理。
在本实施例中,主控模块首先获取用户进行存取物品操作时经过预设区域的位置信息,进一步地,根据该位置信息确定摄像组件的拍摄参数,该拍摄参数包括摄像组件的焦距,即根据用户进行存取物品操作时经过预设区域的位置信息可确定摄像组件的精确焦距,然后主控模块控制摄像组件根据拍摄参数拍摄照片,主控模块对摄像组件拍摄的照片进行识别得到识别结果,由于该照片是摄像组件根据精确的焦距拍摄的,那么照片的清晰度将大大提升,主控模块对照片中物品的识别率也随之提高,那么识别结果就更加准确,因此能更好地实现对冰箱内储藏物品信息的管理。
进一步的,参照图5,本发明冰箱储藏物品信息的管理方法第二实施例提供一种冰箱储藏物品信息的管理方法,基于上述实施例,步骤S12包括:
步骤S120,若所述红外光束从无遮挡到被遮挡,则确定当前为用户进行存取物品操作时的进冰箱动作,并获取所述进冰箱动作经过预设区域的位置信息;
步骤S121,若所述红外光束从被遮挡到无遮挡,则确定当前为用户进行存取物品操作时的出冰箱动作,并获取所述出冰箱动作经过预设区域的位置信息。
基于上述实施例,监测组件(红外触摸框)的红外发射管发射的红外线在冰箱箱体入口处的预设区域形成竖直方向的红外光束,当有物体经过预设区域时,物体经过预设区域的点的横竖两个方向的红外被挡住,那么对应的接收管对红外线的接收情况就会发生变化。本实施例中,主控模块可在用户进行存取物品操作时,通过监测组件(红外触摸框)监测预设区域的红外光束状态获取用户进行存取物品操作时经过预设平面区域的位置信息。具体地,在用户进行存取物品操作时,当监测组件(红外触摸框)监测到红外光束从无遮挡到被遮挡,主控模块可通过监测组件(红外触摸框)确定此时为用户进行存取物品操作时的进冰箱动作,监测组件(红外触摸框)可检测出用户进冰箱动作经过预设区域的坐标点,即位置信息,监测组件(红外触摸框)将用户进冰箱动作经过预设区域的位置信息发送至主控模块;当监测组件(红外触摸框)监测到红外线从被遮挡到无遮挡,主控模块可通过监测组件(红外触摸框)确定此时为用户进行存取物品操作时的出冰箱动作,监测组件(红外触摸框)可检测出用户出冰箱动作经过预设区域的位置信息,监测组件(红外触摸框)将该出冰箱动作经过预设区域的位置信息发送至主控模块。
主控模块在获得用户进行存取物品操作时的进冰箱动作经过预设区域的位置信息和出冰箱动作经过预设区域的位置信息后,进一步地,执行根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片的步骤,具体地,参照图6,步骤S20包括:
步骤S21,根据所述进冰箱动作经过预设区域的位置信息确定所述摄像组件的第一拍摄参数,并控制所述摄像组件根据所述第一拍摄参数拍摄进冰箱动作的照片;
步骤S22,根据所述出冰箱动作经过预设区域的位置信息确定所述摄像组件的第二拍摄参数,并控制所述摄像组件根据所述第二拍摄参数拍摄出冰箱动作的照片。
主控模块在获得用户进行存取物品操作时的进冰箱动作经过预设区域的位置信息和出冰箱动作经过预设区域的位置信息后,根据进冰箱动作经过预设区域的位置信息确定进冰箱动作时摄像组件的拍摄参数,该拍摄参数包括拍摄焦距,定义该拍摄参数为第一拍摄参数,然后主控模块就可根据第一拍摄参数拍摄进冰箱动作的照片;同理,主控模块可根据出冰箱动作经过预设区域的位置信息确定出冰箱动作时摄像组件的拍摄参数,定义该拍摄参数为第一拍摄参数,然后主控模块就可根据第二拍摄参数拍摄出冰箱动作的照片,即在用户的一次存取操作中,摄像组件分别拍摄了一张进冰箱动作的照片和一张出冰箱动作的照片,共拍了两张照片。
进一步地,主控模块接收摄像组件拍摄的照片,然后对摄像组件拍摄的照片进行识别得到识别结果,具体地,对所述摄像组件拍摄的照片进行识别得到识别结果的步骤包括:
步骤S31,对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别;
步骤S32,若从所述进冰箱动作的照片中识别出物品,而从所述出冰箱动作的照片中未识别出物品,则确定当前为存入物品操作,并获取存入物品的信息;
步骤S33,若从所述进冰箱动作的照片中未识别出物品,而从所述出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,并获取取出物品的信息。
步骤S34,若从所述进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取存入物品信息和取出物品的信息。
主控模块通过图像识别技术对摄像组件拍摄的一张进冰箱动作的照片和一张出冰箱动作的照片分别进行识别,可确定出用户进行存取物品操作的类型,即判断用户是仅存入物品的操作,还是仅取出物品的操作,或是即存入物品又取出物品的操作。具体实施时,若主控模块从进冰箱动作的照片中识别出物品,而从出冰箱动作的照片中未识别到物品,则确定当前为存入物品操作,然后获取识别出的存入物品的信息;若主控模块从进冰箱动作的照片中未识别到物品,而从出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,然后获取识别出的取出物品的信息;若从进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取识别出的存入物品信息和取出物品的信息。其中,物品信息包括物品的名称、类别、保鲜期等。进一步地,主控模块就能确定冰箱内储存物品的名称、类别、保鲜期、数量等信息了。
在更多的实施中,监测组件(红外触摸框)还可检测出用户进行存取操作时经过预设区域的时间,可以理解的是,该时间包括用户进冰箱的动作经过预设区域的时间和出冰箱的动作经过预设区域的时间,主控模块通过监测组件获取上述时间后,就可确定对应物品存入冰箱的时间等,从而可得出冰箱储藏物品的存放时间。
本实施例通过上述方式,在用户的一次存取操作中,仅仅根据精确的焦距拍摄出两张清晰的照片,利于识别,从而能更加准确地确定冰箱内储存物品的信息。
参照图7,本发明冰箱储藏物品信息的管理方法第三实施例提供一种冰箱储藏物品信息的管理方法,基于上述实施例,所述冰箱储藏物品信息的管理方法还包括:
步骤S40,将所述冰箱储藏物品信息通过设置于冰箱上的Wi-Fi模块发送至服务器,以供所述服务器将所述冰箱储藏物品信息反馈至用户终端。
基于上述实施例,主控模块在确定冰箱储藏物品信息后,可通过Wi-Fi模块将冰箱储藏物品信息发送至服务器,服务器进而将冰箱储藏物品信息反馈至用户终端。其中,冰箱储藏物品信息包括储存物品的名称、类别、保鲜期、数量、存放时间等信息,用户终端包括PC、智能手机、平板电脑、掌上电脑等终端设备。用户终端显示冰箱储藏物品信息供用户进行查看,方便用户了解冰箱内物品的情况。
此外,本发明实施例还提出一种冰箱,所述冰箱包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理方程序被所述处理器执行时实现如上所述的冰箱储藏物品信息的管理方法的步骤。
其中,本发明冰箱中存储的冰箱储藏物品信息的管理程序被处理器执行的具体实施例与上述冰箱储藏物品信息的管理方法各实施例基本相同,在此不作赘述。
此外,本发明实施例还提出一种计算机存储介质。
本发明计算机存储介质上存储有冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理程序被处理器执行时实现如上所述的冰箱储藏物品信息的管理方法的步骤。
其中,本发明计算机存储介质中存储的冰箱储藏物品信息的管理程序被处理器执行的具体实施例与上述冰箱储藏物品信息的管理方法各实施例基本相同,在此不作赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种冰箱储藏物品信息的管理方法,其特征在于,所述冰箱储藏物品信息的管理方法应用于冰箱,所述冰箱包括箱体,所述箱体内包括主控模块、监测组件和摄像组件,所述监测组件和摄像组件分别与所述主控模块连接,其中,所述监测组件包括红外发射管,所述红外发射管发射的红外线在预设区域形成红外光束,所述方法包括:
所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息;将红外光束区域定义为所述预设区域,所述红外光束区域为所述红外发射管发射的红外线在红外触摸框围成的区域,所述红外触摸框包括上下左右四条边框,所述红外触摸框安装于冰箱箱体的入口边缘,嵌入在安装凹槽里;
根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片,所述拍摄参数包括摄像组件的焦距;
对所述摄像组件拍摄的照片进行识别得到识别结果,并根据所述识别结果管理冰箱储藏物品信息。
2.如权利要求1所述的冰箱储藏物品信息的管理方法,其特征在于,所述红外发射管发射的红外线在箱体入口处的预设区域形成竖直方向的红外光束,所述主控模块获取用户进行存取物品操作时经过预设区域的位置信息的步骤包括:
在用户进行存取物品操作时,通过所述监测组件监测预设区域的红外光束状态;
根据所述红外光束状态获取用户进行存取物品操作时经过预设区域的位置信息。
3.如权利要求2所述的冰箱储藏物品信息的管理方法,其特征在于,所述根据所述红外光束状态获取用户进行存取物品操作时经过预设区域的位置信息的步骤包括:
若所述红外光束从无遮挡到被遮挡,则确定当前为用户进行存取物品操作时的进冰箱动作,并获取所述进冰箱动作经过预设区域的位置信息;
若所述红外光束从被遮挡到无遮挡,则确定当前为用户进行存取物品操作时的出冰箱动作,并获取所述出冰箱动作经过预设区域的位置信息。
4.如权利要求3所述的冰箱储藏物品信息的管理方法,其特征在于,所述根据所述位置信息确定所述摄像组件的拍摄参数,并控制所述摄像组件根据所述拍摄参数拍摄照片的步骤包括:
根据所述进冰箱动作经过预设区域的位置信息确定所述摄像组件的第一拍摄参数,并控制所述摄像组件根据所述第一拍摄参数拍摄进冰箱动作的照片;
根据所述出冰箱动作经过预设区域的位置信息确定所述摄像组件的第二拍摄参数,并控制所述摄像组件根据所述第二拍摄参数拍摄出冰箱动作的照片。
5.如权利要求4所述的冰箱储藏物品信息的管理方法,其特征在于,所述对所述摄像组件拍摄的照片进行识别得到识别结果的步骤包括:
对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别;
若从所述进冰箱动作的照片中识别出物品,而从所述出冰箱动作的照片中未识别出物品,则确定当前为存入物品操作,并获取存入物品的信息。
6.如权利要求5所述的冰箱储藏物品信息的管理方法,其特征在于,所述对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别的步骤之后还包括:
若从所述进冰箱动作的照片中未识别出物品,而从所述出冰箱动作的照片中识别出物品,则确定当前为取出物品操作,并获取取出物品的信息。
7.如权利要求5所述的冰箱储藏物品信息的管理方法,其特征在于,所述对所述进冰箱动作的照片和出冰箱动作的照片分别进行识别的步骤之后还包括:
若从所述进冰箱动作的照片和出冰箱动作的照片中分别识别出物品,则确定当前为既存入物品又取出物品操作,并获取存入物品信息和取出物品的信息。
8.如权利要求1至7中任一项所述的冰箱储藏物品信息的管理方法,其特征在于,所述方法还包括:
将所述冰箱储藏物品信息通过设置于冰箱上的Wi-Fi模块发送至服务器,以供所述服务器将所述冰箱储藏物品信息反馈至用户终端。
9.一种冰箱,其特征在于,所述冰箱包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理程序被所述处理器执行时实现如权利要求1至8中任一项所述的冰箱储藏物品信息的管理方法的步骤。
10.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有冰箱储藏物品信息的管理程序,所述冰箱储藏物品信息的管理程序被处理器执行时实现如权利要求1至8中任一项所述的冰箱储藏物品信息的管理方法的步骤。
CN201710906203.0A 2017-09-27 2017-09-27 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质 Active CN107642944B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710906203.0A CN107642944B (zh) 2017-09-27 2017-09-27 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710906203.0A CN107642944B (zh) 2017-09-27 2017-09-27 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质

Publications (2)

Publication Number Publication Date
CN107642944A CN107642944A (zh) 2018-01-30
CN107642944B true CN107642944B (zh) 2020-08-21

Family

ID=61122939

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710906203.0A Active CN107642944B (zh) 2017-09-27 2017-09-27 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质

Country Status (1)

Country Link
CN (1) CN107642944B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108885813B (zh) * 2018-06-06 2021-03-23 达闼机器人有限公司 智能售货柜、物品识别的方法、装置、服务器和存储介质
CN113849582A (zh) * 2021-09-29 2021-12-28 珠海格力电器股份有限公司 物品存取方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5111050A (en) * 1990-12-03 1992-05-05 Santa Barbara Research Center Quick cooldown/low distortion hybrid focal plane array platform for use in infrared detector dewar packages
CN1570814A (zh) * 2003-07-26 2005-01-26 于尚民 带透镜的红外式免触摸输入装置及应用该装置的设备
CN104853094A (zh) * 2015-04-30 2015-08-19 广东欧珀移动通信有限公司 一种拍照方法及装置
WO2016107701A1 (en) * 2014-12-31 2016-07-07 Arcelik Anonim Sirketi A cooling device
CN106204573A (zh) * 2016-07-07 2016-12-07 Tcl集团股份有限公司 一种智能冰箱的食品管理方法及系统
CN106288591A (zh) * 2016-11-08 2017-01-04 朱恺 一种具有食材管理功能的冰箱及食材管理方法
CN106766615A (zh) * 2016-11-30 2017-05-31 海尔优家智能科技(北京)有限公司 一种用于智能冰箱的物品管理方法及智能冰箱

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5111050A (en) * 1990-12-03 1992-05-05 Santa Barbara Research Center Quick cooldown/low distortion hybrid focal plane array platform for use in infrared detector dewar packages
CN1570814A (zh) * 2003-07-26 2005-01-26 于尚民 带透镜的红外式免触摸输入装置及应用该装置的设备
WO2016107701A1 (en) * 2014-12-31 2016-07-07 Arcelik Anonim Sirketi A cooling device
CN104853094A (zh) * 2015-04-30 2015-08-19 广东欧珀移动通信有限公司 一种拍照方法及装置
CN106204573A (zh) * 2016-07-07 2016-12-07 Tcl集团股份有限公司 一种智能冰箱的食品管理方法及系统
CN106288591A (zh) * 2016-11-08 2017-01-04 朱恺 一种具有食材管理功能的冰箱及食材管理方法
CN106766615A (zh) * 2016-11-30 2017-05-31 海尔优家智能科技(北京)有限公司 一种用于智能冰箱的物品管理方法及智能冰箱

Also Published As

Publication number Publication date
CN107642944A (zh) 2018-01-30

Similar Documents

Publication Publication Date Title
CN109644229B (zh) 用于控制相机的方法及其电子设备
EP3163498B1 (en) Alarming method and device
CN110913132B (zh) 对象跟踪方法及电子设备
CN105074615B (zh) 虚拟传感器系统和方法
JP2018503272A (ja) 機器グルーピング管理システム、方法および装置
US10929642B2 (en) Identification of objects for three-dimensional depth imaging
US11074449B2 (en) Method, apparatus for controlling a smart device and computer storge medium
US11671275B2 (en) Method and system of controlling device using real-time indoor image
CN105704472A (zh) 一种识别儿童用户的电视控制方法和系统
US20230067154A1 (en) Monitoring apparatus and system
CN109581886B (zh) 设备控制方法、装置、系统及存储介质
CN107642944B (zh) 冰箱储藏物品信息的管理方法、冰箱及计算机存储介质
JP2017106671A (ja) 冷蔵庫、冷蔵庫内画像管理システムおよびプログラム
CN112929860A (zh) 蓝牙连接方法、装置和电子设备
EP3892069B1 (en) Determining a control mechanism based on a surrounding of a remote controllable device
CN105549572A (zh) 智能家居设备的控制方法、装置及设备
CN109587552A (zh) 视频人物音效处理方法、装置、移动终端及存储介质
KR102495326B1 (ko) 전자장치 및 그 제어방법
CN115713616A (zh) 一种房源空间模型生成方法、装置、终端设备及存储介质
CN115061380A (zh) 设备控制方法、装置、电子设备及可读存储介质
CN112541940B (zh) 物品检测方法及系统
CN111107271B (zh) 拍摄方法及电子设备
CN103716667A (zh) 通过显示设备捕获目标物信息的显示系统及显示方法
US11689707B2 (en) Techniques for calibrating a stereoscopic camera in a device
CN112333494B (zh) 获取物品信息的方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20190201

Address after: 230601 No. 355 Feicui Road, Taohua Industrial Park, Feixi County, Hefei City, Anhui Province

Applicant after: TCL household appliances (Hefei) Co., Ltd.

Address before: 516001, 6th Floor, TCL Building, No. 6, Eling South Road, Huizhou City, Guangdong Province

Applicant before: Huizhou TCL Household Electrical Appliance Group Co., Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant