CN111219940A - 冰箱内灯光控制的方法及装置、冰箱 - Google Patents

冰箱内灯光控制的方法及装置、冰箱 Download PDF

Info

Publication number
CN111219940A
CN111219940A CN201911369996.2A CN201911369996A CN111219940A CN 111219940 A CN111219940 A CN 111219940A CN 201911369996 A CN201911369996 A CN 201911369996A CN 111219940 A CN111219940 A CN 111219940A
Authority
CN
China
Prior art keywords
refrigerator
position information
lamp tube
determining
intensity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911369996.2A
Other languages
English (en)
Other versions
CN111219940B (zh
Inventor
高岩
张坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Haier Smart Technology R&D Co Ltd
Haier Smart Home Co Ltd
Original Assignee
Qingdao Haier Smart Technology R&D Co Ltd
Haier Smart Home Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Haier Smart Technology R&D Co Ltd, Haier Smart Home Co Ltd filed Critical Qingdao Haier Smart Technology R&D Co Ltd
Priority to CN201911369996.2A priority Critical patent/CN111219940B/zh
Publication of CN111219940A publication Critical patent/CN111219940A/zh
Application granted granted Critical
Publication of CN111219940B publication Critical patent/CN111219940B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D27/00Lighting arrangements
    • F25D27/005Lighting arrangements combined with control means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2600/00Control issues
    • F25D2600/06Controlling according to a predetermined profile

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Thermal Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Combustion & Propulsion (AREA)
  • Geometry (AREA)
  • Chemical & Material Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)

Abstract

本申请涉及智能设备技术领域,公开一种冰箱内灯光控制的方法及装置、冰箱。该方法包括:获取冰箱设定范围内用户的当前用户图像,所述冰箱内配置了至少一个灯管;对所述当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据所述灯管在冰箱内的位置信息,确定所述灯管映射到所述人脸框上的映射位置信息;根据所述预设特征点位置信息,以及所述映射位置信息,确定对应所述灯管的灯光强度;根据所述灯光强度,控制对应所述灯管启动运行。这样,灯光强度可随预设特征点动态改变,不仅提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。

Description

冰箱内灯光控制的方法及装置、冰箱
技术领域
本申请涉及智能设备技术领域,例如涉及冰箱内灯光控制的方法及装置、冰箱。
背景技术
随着智能化技术的不断发展,冰箱功能越来越强大,用户的使用体验越来越好。冰箱的体积越来越大,因此,冰箱内部需要有一个、两个或多个灯管,来给冰箱提高照明。目前可通过机械式的开关门来控制灯光开关,或者,还可通过红外和光敏感应来对灯光进行控制。
但是,是对于一些冰箱,例如可透视冰箱,上述控制方式还存在一些问题,其中,机械式的开门触发灯光开启并不能体现出可透视冰箱的优点;而红外和光敏传感虽然能在开门之前就能开启灯光,但是并不能对内部所有灯管进行智能灯光强度控制,因此,冰箱的智能控制还有待提高。
发明内容
为了对披露的实施例的一些方面有基本的理解,下面给出了简单的概括。所述概括不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围,而是作为后面的详细说明的序言。
本公开实施例提供了一种冰箱内灯光控制的方法、装置和冰箱,以解决冰箱智能性有待提高的技术问题,其中,所述冰箱内配置了至少一个灯管。
在一些实施例中,所述方法包括:
获取冰箱设定范围内用户的当前用户图像;
对所述当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据所述灯管在冰箱内的位置信息,确定所述灯管映射到所述人脸框上的映射位置信息;
根据所述预设特征点位置信息,以及所述映射位置信息,确定对应所述灯管的灯光强度;
根据所述灯光强度,控制对应所述灯管启动运行。
在一些实施例中,所述装置包括:
图像获取模块,被配置为获取冰箱设定范围内用户的当前用户图像;
识别定位模块,被配置为对所述当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据所述灯管在冰箱内的位置信息,确定所述灯管映射到所述人脸框上的映射位置信息;
强度确定模块,被配置为根据所述预设特征点位置信息,以及所述映射位置信息,确定对应所述灯管的灯光强度;
第一控制模块,被配置为根据所述灯光强度,控制对应所述灯管启动运行。
在一些实施例中,所述冰箱内灯光控制的装置,包括处理器和存储有程序指令的存储器,所述处理器被配置为在执行所述程序指令时,执行上述冰箱内灯光控制方法。
在一些实施例中,所述冰箱包括:上述冰箱内灯光控制的装置。
本公开实施例提供的冰箱内灯光控制的方法、装置和冰箱,可以实现以下技术效果:
可在对冰箱用户进行人脸识别时,确定人脸框中预设特征点位置信息,从而,可根据预设特征点位置信息,控制冰箱内灯管的灯光强度,这样,随着头部运行,眼睛运动等导致预设特征点位置不同后,冰箱内每个灯管的灯光强度也不同,即灯光强度可随预设特征点动态改变,不仅提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。
以上的总体描述和下文中的描述仅是示例性和解释性的,不用于限制本申请。
附图说明
一个或多个实施例通过与之对应的附图进行示例性说明,这些示例性说明和附图并不构成对实施例的限定,附图中具有相同参考数字标号的元件示为类似的元件,附图不构成比例限制,并且其中:
图1是本公开实施例提供的一种冰箱内灯光控制方法的流程示意图;
图2是本公开实施例提供的一种人脸识别的示意图;
图3是本公开实施例提供的一种人脸识别结果坐标示意图;
图4是本公开实施例提供的一种灯管映射到所述人脸框上的映射位置信息示意图;
图5是本公开实施例提供的一种冰箱内灯光控制硬件结构示意图;
图6是本公开实施例提供的一种冰箱内灯光控制方法的流程示意图;
图7是本公开实施例提供的一种冰箱内灯光控制装置的结构示意图;
图8是本公开实施例提供的一种冰箱内灯光控制装置的结构示意图。
具体实施方式
为了能够更加详尽地了解本公开实施例的特点与技术内容,下面结合附图对本公开实施例的实现进行详细阐述,所附附图仅供参考说明之用,并非用来限定本公开实施例。在以下的技术描述中,为方便解释起见,通过多个细节以提供对所披露实施例的充分理解。然而,在没有这些细节的情况下,一个或多个实施例仍然可以实施。在其它情况下,为简化附图,熟知的结构和装置可以简化展示。
本公开实施例中,可根据人脸识别的结果控制冰箱内灯管的灯光强度,特别是可根据识别的人脸框中预设特征点不同,动态地控制灯光强度,提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。
图1是本公开实施例提供的一种冰箱内灯光控制方法的流程示意图。如图1所示,冰箱内灯光控制的过程包括:
步骤101:获取冰箱设定范围内用户的当前用户图像。
随着智能技术的发展,冰箱的前面板上可配置有图像采集设备,例如:可配置在显示屏中的正上方,或者,配置冰箱距地面设定距离的位置。通过图像采集设备,可获取冰箱设定范围内的图像。设定范围一般与图像采集设备的安装位置以及性能相关。通过图像采集设备可以实时或定时采集冰箱设定范围内的图像,冰箱设定范围内有用户时,即可获取到冰箱设定范围内用户的用户图像,每次采集到的用户图像即为当前用户图像。
或者,为节省冰箱的内存,减少对冰箱资源的占用,可在满足设定条件的情况下,才可启动图像采集设备进行图像采集。即在一些实施例中,可在通过人体探测装置确定冰箱设定范围内有用户的情况下,启动配置的图像采集装置,使得图像采集装置采集用户的用户图像。
人体探测装置可包括:红外探测器,多普勒探测器,超声波探测器等等。人体探测装置也可配置在冰箱的前面板上,例如:冰箱上开门的下方位置,或者,冰箱下开门位置,具体位置根据冰箱的外形,以及人体探测装置的性能确定,即冰箱可通过监听人体探测装置,确定冰箱设定范围内是否有用户?若有,则可启动配置的图像采集装置,从而,图像采集装置可以采集用户的用户图像,每次采集到的用户图像即为当前用户图像,从而,可获取冰箱设定范围内用户的当前用户图像。
步骤102:对当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据灯管在冰箱内的位置信息,确定灯管映射到人脸框上的映射位置信息。
冰箱具有人脸识别功能,人脸识别可确定人脸的大小,以及提取特征信息等等,因此,可根据人脸识别的结果,确定识别人脸的人脸框中预设特征点位置信息。其中,预设特征点包括:眼部关注点、鼻子特征点、嘴角特征点、或眉头中心点等等。
在一些实施例中,若预设特征点为眼部关注点,则确定识别人脸的人脸框中预设特征点位置信息包括:提取进行人脸识别的人脸框中边界特征点坐标信息,左眼关键点坐标信息、以及右眼关键点坐标信息;根据左眼关键点坐标信息和右眼关键点坐标信息,确定眼部关注点坐标信息;根据眼部关注点坐标信息,以及边界特征点坐标信息,确定眼部关注点在人脸框中的距离位置信息。
图2是本公开实施例提供的一种人脸识别的示意图。如图2所示,对图像进行人脸识别中,可采用识别人脸的人脸框210,一般每次识别过程中,人脸框210的大小是固定的,从而可确定人脸框210的边界信息,还可提取人脸中特征点坐标信息,如可提取左眼关键点0坐标信息、右眼关键点1坐标信息、鼻子关键点2坐标信息、嘴唇左边界关键点3坐标信息,以及嘴唇右边界关键点4坐标信息。当然,不同的应用场景,提取的关键点坐标信息是不完全相同,本公开实施例中,由于将眼部关注点确定为预设特征点,可提取进行人脸识别的人脸框中边界特征点坐标信息,左眼关键点0坐标信息、以及右眼关键点1坐标信息。若另一实施例中,将鼻子特征点确定为预设特征点,则可提取进行人脸识别的人脸框中边界特征点坐标信息和鼻子关键点2坐标信息。
图3是本公开实施例提供的一种人脸识别结果坐标示意图。如图3所示,人脸识别提取到的人脸框中边界特征点坐标信息包括:左上角坐标(x1,y1)、右下角坐标(x2,y2);提取到的左眼关键点坐标(a1,b1)、右眼关键点坐标(a2,b2)。
这样,根据左眼关键点坐标信息和右眼关键点坐标信息,确定眼部关注点坐标信息,即根据左右眼关键点坐标获取中间点的坐标:(a3,b3)=(a1+(a2-a1)/2,b1+(b2-b1)/2),该中间点的坐标即为眼部关注点坐标信息。然后,根据眼部关注点坐标信息,以及边界特征点坐标信息,确定眼部关注点在人脸框中的距离位置信息。其中,根据人脸框左上右下角坐标计算人脸框宽:W=|x2-x1|,高H=|y2–y1|;获取眼部关注点距离人脸框的距离,距离左侧:w1=|a3|-|x1|,距离右侧:w2=W-w1,距离上侧:h1=|b3|-|y1|,距离下侧h2=H-h1
当然,若提取了人脸框中其他预设特征点的坐标信息,从而,也可根据人脸框中边界特征点坐标信息,以及预设特征点的坐标信息,确定预设特征点位置信息。例如:鼻子特征点坐标信息为(m,n),则鼻子特征点距离人脸框的距离,距离左侧:w1=|m|-|x1|,距离右侧:w2=W-w1,距离上侧:h1=|n|-|y1|,距离下侧h2=H-h1
由于每次进行人脸识别的人脸框是固定的,所以当用户头部运行,或眼部运动时,确定的人脸框中预设特征点位置信息是不同的。例如:头向左,头向右,对应的眼部关注点位置信息或者鼻子特征点位置信息都是不同的。
冰箱中包括有一个、两个或多个灯管。在一些实施例中,冰箱为可视冰箱,包括可视门,而对应的可视部分为方形,可在方形的四个角上配置了四个灯管,从而,可灯管映射到人脸框上的映射位置信息也分别为人脸框上的四个角。
图4是本公开实施例提供的一种灯管映射到人脸框上的映射位置信息示意图。如图4,四个灯管L1、L2、L3、L4的映射位置分别为人脸框的四个角。当然,若冰箱中只有两个灯管,分别在冰箱方形可视部分的左上角和右下角,即L1、L3,则两个灯管的映射位置分别为人脸识别框的左上角和右下角。若冰箱中只有三个灯管,分别在冰箱方形可视部分的左上角、右上角以及下边中间点,即L1、L2以及L5,则两个灯管的映射位置分别为人脸框的左上角、右上角以及下边线中间位置。具体就不一一列举了。
步骤103:根据预设特征点位置信息,以及映射位置信息,确定对应灯管的灯光强度。
预设特征点位置与灯管映射位置越近,则表明用户可能需要得到该灯管区域的图像,因此,该灯管的灯管强度就越强,若眼部关注点位置与灯管映射位置越远,该灯管的灯管强度就越弱。
因此,在一些实施例中,可根据预设点位置信息,以及每个灯管对应的映射位置信息,确定每个灯管的强度系数值,其中,根据灯管映射位置信息与预设特征点位置信息确定的相对距离与强度系数值反向相关;然后,根据强度系数值以及预设强度,得到每个灯管的灯管强度。
如图4,已经确定了四个灯管的映射位置信息了,并且已经得到根据如图3所示识别结果,确定预设特征点为眼部关注点,并确定了眼部关注点坐标信息,以及与人脸框的距离位置信息,从而,可确定每个灯管的强度系数值。
例如:确定L1、L2、L3、L4的强度系数值可分别为
Figure BDA0002339419020000081
Figure BDA0002339419020000082
可见,强度系数值与灯管映射位置与眼部关注点位置之间的相对距离反向相关,即灯管映射位置与眼部关注点位置之间的相对距离越远,对应灯管的强度系数值越小,而若灯管映射位置与眼部关注点位置之间的相对距离越近,对应灯管的强度系数值越大。
其中,用户朝左看,通过人脸识别,眼部关注点在人脸框中,会离人脸框中左边线近,则相对应w1比较小,而w2比较大,从而,左边的两个灯管L1,L4两个灯管的灯光强度会较大一些。若用户朝右,通过人脸识别,眼部关注点在人脸框中,会离人脸框中右边线近,则相对应w2比较小,而w1比较大,右边的两个灯管L2,L3两个灯管的灯光强度会较大一些。
当然,若冰箱包括三个灯管L1、L2、L5,分别在方形冰箱可视部分的左上角、右上角以及下边中间点。L1、L2的强度系数值的确定过程可如上述,由于L5映射到人脸框的下边线中间位置,则确定可将横向方向的值确定预设固定值γ,而纵向方向的值仍然可为上述为
Figure BDA0002339419020000091
这样,L5对应的强度系数值为可
Figure BDA0002339419020000092
或者,在一些实施例中,冰箱包括三个灯管L1、L2、L5,且已知预设特征点坐标信息(q,p),L1、L2、L5映射到人脸框上的映射位置坐标信息分别为(x1,y1)、(x2,y1),(x1+(x2-x1)/2),y2),从而,可得到预设特征点坐标信息与L1映射位置坐标信息的相对距离ΔL1,预设特征点坐标信息与L2映射位置坐标信息的相对距离ΔL2,以及,预设特征点坐标信息与L5映射位置坐标信息的相对距离ΔL5。从而,L1、L2、L5的强度系数可为
Figure BDA0002339419020000093
同样,强度系数值与灯管映射位置与预设特征点位置之间的相对距离反向相关,其中,相对距离是根据灯管映射位置信息与预设特征点位置信息确定的。
由于人脸框和预设特征点位置信息是独立输出的,而图像采集设备的安装位置,性能等等都可能会影响到预设特征点在人脸框中的距离位置信息,因此,在一些实施例中,为了补偿距离与灯光强度之间线性关系,可预设权重系数,从而,可获取补偿距离与灯光强度之间线性关系的预设权重系数;然后,根据预设特征点位置信息,每个灯管对应的映射位置信息,以及预设权重系数,确定每个灯管的强度系数值。
例如:已经确定了四个灯管的映射位置信息了,并且已经得到根据如图3所示识别结果,确定的眼部关注点坐标信息,以及与人脸框的距离位置信息,而对应的预设权重系数为数α1、α2、β1、β2,则对应每个灯管L1、L2、L3、L4的强度系数值可分别为:
Figure BDA0002339419020000101
Figure BDA0002339419020000102
即α1、α2、β1、β2分别与w1、w2、h1、h2对应,通过调整预设权重系数α1、α2、β1、β2,可使得用户平视冰箱时,L1、L2、L3、L4使得灯管的强度系数值相同。对于其他不同的灯管分布的冰箱,对应的预设权重系数是不一定相同,只需通过预设权重系数可补偿距离与灯光强度之间线性关系。预设权重系数可根据冰箱的型号性能,图像采集装置的安装位置性能,以及用户使用数据等信息来确定。
已确定了每个灯管的强度系数值,则可根据强度系数值以及预设强度,得到每个灯管的灯管强度。如图4,已经确定了四个灯管的映射位置信息了,若预设强度为A,则L1、L2、L3、L4对应的灯管强度可为
Figure BDA0002339419020000103
Figure BDA0002339419020000104
或者,在一些实施例中,若冰箱包括三个灯管L1、L2、L5,对应的强度系数可为
Figure BDA0002339419020000105
Figure BDA0002339419020000106
若预设强度为A,则L1、L2、L5对应的灯管强度可为
Figure BDA0002339419020000107
步骤104:根据灯光强度,控制对应灯管启动运行。
每个灯管的强度都已经确定了,从而,可向灯光控制模块发现携带每个灯管灯光强度的控制指令,从而,控制对应所述灯管根据接收到控制指令进行运行。
可见,本公开实施例中,可在对冰箱用户进行人脸识别时,确定人脸框中预设特征点位置信息,从而,可根据预设特征点位置信息,控制冰箱内灯管的灯光强度,这样,随着头部运行,眼睛运动等导致预设特征点位置不同后,冰箱内灯管的灯光强度也不同,即灯光强度可随预设特征点动态改变,不仅提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。
当然,在通过人体探测装置确定冰箱设定范围内没有用户的情况下,控制灯管处于熄灭状态。这样,不仅进一步提高了冰箱控制的智能性,也节省了资源。
下面将操作流程集合到具体实施例中,举例说明本发明实施例提供的冰箱内灯光控制过程。
本公开一实施例中,图5是本公开实施例提供的一种冰箱内灯光控制硬件结构示意图。如图5所示,用于冰箱内灯光控制硬件包括:控制电路板1000、用于人体探测的红外探头2000、用于获取用户图像的摄像头3000、灯光控制模块4000、以及冰箱内的灯管5000,其中,灯管可分别为四个灯管L1、L2、L3、L4(图中未示出)。其中,冰箱包括了透明可视门,红外探头2000可位于可视门的右下方,而摄像头3000嵌入在可视门的显示屏上,而L1、L2、L3、L4可分别安装在可视门对应的冰箱的左上,右上,右下以及左下四个位置的灯管L1、L2、L5。预设特征点为眼部关注点。
图6是本公开实施例提供的一种冰箱内灯光控制方法的流程示意图。如图6所示,冰箱内灯光控制的过程包括:
步骤601:监听红外探测头是否确定冰箱设定范围内有用户?若是,执行步骤602,否则,执行步骤608。
步骤602:启动摄像头,获取冰箱设定范围内用户的当前用户图像。
步骤603:对当前用户图像进行人脸识别,提取进行人脸识别的人脸框中边界特征点坐标信息,左眼关键点坐标信息、以及右眼关键点坐标信息。
步骤604:根据左眼关键点坐标信息和右眼关键点坐标信息,确定眼部关注点坐标信息,以及,根据眼部关注点坐标信息,以及边界特征点坐标信息,确定眼部关注点在人脸框中的距离位置信息。
例如可以确定图3所示的人脸识别结果,得到眼部关注点坐标信息(a3,b3)=(a1+(a2-a1)/2,b1+(b2-b1)/2),则眼部关注点距离人脸框的距离,分别为:距离左侧:w1=|a3|-|x1|,距离右侧:w2=W-w1,距离上侧:h1=|b3|-|y1|,距离下侧h2=H-h1
步骤605:根据灯管在冰箱内的位置信息,确定灯管映射到人脸框上的映射位置信息。
如图4,四个灯管L1、L2、L3、L4的映射位置分别为人脸框的四个角。
步骤606:根据眼部关注点位置信息,每个灯管对应的映射位置信息,以及预设权重系数,确定每个灯管的强度系数值,并根据强度系数值以及预设强度,得到每个灯管的灯管强度。
眼部关注点位置信息包括了:眼部关注点距离人脸框的距离w1,w2,h1,h2,预设权重系数为数α1、α2、β1、β2,则每个灯管L1、L2、L3、L4的强度系数值可分别为:
Figure BDA0002339419020000121
Figure BDA0002339419020000122
若预设强度为100,则四个灯管的灯光强度分别为:
Figure BDA0002339419020000123
Figure BDA0002339419020000124
Figure BDA0002339419020000125
Figure BDA0002339419020000126
步骤607:向灯光控制模块发送携带每个灯管对应灯光强度的控制指令,控制对应灯管运行。
步骤608:向灯光控制模块发送灯光处于熄灭状态的控制指令,并控制摄像头处于关闭状态。
若冰箱中的灯时启动运行的,那么当通过红外探测头确定设定范围内没有用户了,则向灯光控制模块发送灯光处于熄灭状态的控制指令后,冰箱中的灯管熄灭了。若冰箱中灯管是熄灭的,则仍处于熄灭状态。同时,没有用户了,摄像头也不用采集用户图像了,进一步节省了资源。
可见,本实施例中,可在对冰箱用户进行人脸识别时,确定人脸框中眼部关注点位置信息,从而,可根据眼部关注点位置信息,控制冰箱内灯管的灯光强度,这样,随着头部运行,眼睛运动等导致眼部关注点位置不同后,冰箱内灯管的灯光强度也不同,即灯光强度可随眼部关注点动态改变,不仅提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。另外,还可通过红外探测触发人脸识别,进一步提高冰箱的智能性也节省了资源。
根据上述冰箱内灯光控制的过程,可构建一种冰箱内灯光控制的装置。
图7是本公开实施例提供的一种冰箱内灯光控制装置的结构示意图。如图7所示,冰箱内灯光控制装置包括:图像获取模块710、识别定位模块720、强度确定模块730以及第一控制模块740。
图像获取模块710,被配置为获取冰箱设定范围内用户的当前用户图像,冰箱内配置了至少一个灯管。
识别定位模块720,被配置为对当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据灯管在冰箱内的位置信息,确定灯管映射到人脸框上的映射位置信息;
强度确定模块730,被配置为根据预设特征点位置信息,以及映射位置信息,确定对应灯管的灯光强度。
第一控制模块740,被配置为根据灯光强度,控制对应灯管启动运行。
在一些实施例中,冰箱内灯光控制的装置还包括:采集启动模模块,被配置为在通过人体探测装置确定冰箱设定范围内有用户的情况下,启动配置的图像采集装置,使得图像采集装置采集用户的用户图像。
在一些实施例中,识别定位模块720,具体被配置为提取进行人脸识别的人脸框中边界特征点坐标信息,左眼关键点坐标信息、以及右眼关键点坐标信息;根据左眼关键点坐标信息和右眼关键点坐标信息,确定眼部关注点坐标信息;根据眼部关注点坐标信息,以及边界特征点坐标信息,确定眼部关注点在人脸框中的距离位置信息。
在一些实施例中,强度确定模块730可包括:系数确定单元和强度确定单元。
系数确定单元,被配置为根据预设特征点位置信息,以及每个灯管对应的映射位置信息,确定每个灯管的强度系数值,其中,根据灯管映射位置信息与预设特征点位置信息确定的相对距离与强度系数值反向相关。
强度确定单元,被配置为根据强度系数值以及预设强度,得到每个灯管的灯管强度。
在一些实施例中,系数确定单元,具体被配置为获取补偿距离与灯光强度之间线性关系的预设权重系数;根据预设特征点位置信息,每个灯管对应的映射位置信息,以及预设权重系数,确定每个灯管的强度系数值。
在一些实施例中,冰箱内灯光控制的装置还包括:第二控制模块,被配置为在通过人体探测装置确定冰箱设定范围内没有用户的情况下,控制灯管处于熄灭状态。
可见,本实施例中,冰箱内灯光控制装置可在对冰箱用户进行人脸识别时,确定人脸框中预设特征点位置信息,从而,可根据预设特征点位置信息,控制冰箱内灯管的灯光强度,这样,随着头部运行,眼睛运动等导致预设特征点位置不同后,冰箱内每个灯管的灯光强度也不同,即灯光强度可随预设特征点动态改变,不仅提高了冰箱的智能性,还增加了冰箱的科技感以及用户体验。另外,还可通过红外探测触发人脸识别,进一步提高冰箱的智能性也节省了资源。
本公开实施例提供了一种冰箱内灯光控制的装置,其结构如图8所示,包括:
处理器(processor)100和存储器(memory)101,还可以包括通信接口(Communication Interface)102和总线103。其中,处理器100、通信接口102、存储器101可以通过总线103完成相互间的通信。通信接口102可以用于信息传输。处理器100可以调用存储器101中的逻辑指令,以执行上述实施例的冰箱内灯光控制的方法。
此外,上述的存储器101中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。
存储器101作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序,如本公开实施例中的方法对应的程序指令/模块。处理器100通过运行存储在存储器101中的程序指令/模块,从而执行功能应用以及数据处理,即实现上述方法实施例中的冰箱内灯光控制的方法。
存储器101可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端设备的使用所创建的数据等。此外,存储器101可以包括高速随机存取存储器,还可以包括非易失性存储器。
本公开实施例提供了一种冰箱,包含上述的冰箱内灯光控制装置。
本公开实施例提供了一种计算机可读存储介质,存储有计算机可执行指令,所述计算机可执行指令设置为执行上述冰箱内灯光控制方法。
本公开实施例提供了一种计算机程序产品,所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行上述冰箱内灯光控制方法。
上述的计算机可读存储介质可以是暂态计算机可读存储介质,也可以是非暂态计算机可读存储介质。
本公开实施例的技术方案可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括一个或多个指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开实施例所述方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质,包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等多种可以存储程序代码的介质,也可以是暂态存储介质。
以上描述和附图充分地示出了本公开的实施例,以使本领域的技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求,否则单独的部件和功能是可选的,并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。本公开实施例的范围包括权利要求书的整个范围,以及权利要求书的所有可获得的等同物。当用于本申请中时,虽然术语“第一”、“第二”等可能会在本申请中使用以描述各元件,但这些元件不应受到这些术语的限制。这些术语仅用于将一个元件与另一个元件区别开。比如,在不改变描述的含义的情况下,第一元件可以叫做第二元件,并且同样第,第二元件可以叫做第一元件,只要所有出现的“第一元件”一致重命名并且所有出现的“第二元件”一致重命名即可。第一元件和第二元件都是元件,但可以不是相同的元件。而且,本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的,除非上下文清楚地表明,否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地,如在本申请中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外,当用于本申请中时,术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素,和/或组件的存在,但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下,由语句“包括一个…”限定的要素,并不排除在包括所述要素的过程、方法或者设备中还存在另外的相同要素。本文中,每个实施例重点说明的可以是与其他实施例的不同之处,各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言,如果其与实施例公开的方法部分相对应,那么相关之处可以参见方法部分的描述。
本领域技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,可以取决于技术方案的特定应用和设计约束条件。所述技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能,但是这种实现不应认为超出本公开实施例的范围。所述技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本文所披露的实施例中,所揭露的方法、产品(包括但不限于装置、设备等),可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,可以仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外,在本公开实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中,不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生,有时不同的操作或步骤之间不存在特定的顺序。例如,两个连续的操作或步骤实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

Claims (10)

1.一种冰箱内灯光控制的方法,其特征在于,包括:
获取冰箱设定范围内用户的当前用户图像,所述冰箱内配置了至少一个灯管;
对所述当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据所述灯管在冰箱内的位置信息,确定所述灯管映射到所述人脸框上的映射位置信息;
根据所述预设特征点位置信息,以及所述映射位置信息,确定对应所述灯管的灯光强度;
根据所述灯光强度,控制对应所述灯管启动运行。
2.根据权利要求1所述的方法,其特征在于,所述获取冰箱设定范围内用户的当前用户图像之前,还包括:
在通过人体探测装置确定所述冰箱设定范围内有用户的情况下,启动配置的图像采集装置,使得所述图像采集装置采集所述用户的用户图像。
3.根据权利要求1所述的方法,其特征在于,所述确定识别人脸的人脸框中预设特征点位置信息包括:
提取进行人脸识别的人脸框中边界特征点坐标信息,左眼关键点坐标信息、以及右眼关键点坐标信息;
根据所述左眼关键点坐标信息和所述右眼关键点坐标信息,确定所述眼部关注点坐标信息;
根据所述眼部关注点坐标信息,以及边界特征点坐标信息,确定眼部关注点在所述人脸框中的距离位置信息。
4.根据权利要求1、2或3所述的方法,其特征在于,所述确定对应所述灯管的灯光强度包括:
根据所述预设特征点位置信息,以及每个灯管对应的映射位置信息,确定每个灯管的强度系数值,其中,根据所述灯管映射位置信息与所述预设特征点位置信息确定的相对距离与所述强度系数值反向相关;
根据所述强度系数值以及预设强度,得到每个灯管的灯管强度。
5.根据权利要求4所述的方法,其特征在于,所述确定每个灯管的强度系数值包括:
获取补偿距离与灯光强度之间线性关系的预设权重系数;
根据所述预设特征点位置信息,每个灯管对应的映射位置信息,以及所述预设权重系数,确定每个灯管的强度系数值。
6.根据权利要求1或2所述的方法,其特征在于,还包括:
在通过人体探测装置确定所述冰箱设定范围内没有用户的情况下,控制所述灯管处于熄灭状态。
7.一种冰箱内灯光控制的装置,其特征在于,包括:
图像获取模块,被配置为获取冰箱设定范围内用户的当前用户图像,所述冰箱内配置了至少一个灯管;
识别定位模块,被配置为对所述当前用户图像进行人脸识别,确定识别人脸的人脸框中预设特征点位置信息,以及,根据所述灯管在冰箱内的位置信息,确定所述灯管映射到所述人脸框上的映射位置信息;
强度确定模块,被配置为根据所述预设特征点位置信息,以及所述映射位置信息,确定对应所述灯管的灯光强度;
第一控制模块,被配置为根据所述灯光强度,控制对应所述灯管启动运行。
8.根据权利要求7所述的装置,其特征在于,还包括:
采集启动模模块,被配置为在通过人体探测装置确定所述冰箱设定范围内有用户的情况下,启动配置的图像采集装置,使得所述图像采集装置采集所述用户的用户图像。
9.一种冰箱内灯光控制的装置,所述冰箱内配置了至少一个灯管,该装置包括处理器和存储有程序指令的存储器,其特征在于,所述处理器被配置为在执行所述程序指令时,执行如权利要求1至6任一项所述的冰箱内灯光控制的方法。
10.一种冰箱,其特征在于,包括如权利要求7或9所述的冰箱内灯光控制的装置。
CN201911369996.2A 2019-12-26 2019-12-26 冰箱内灯光控制的方法及装置、冰箱 Active CN111219940B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911369996.2A CN111219940B (zh) 2019-12-26 2019-12-26 冰箱内灯光控制的方法及装置、冰箱

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911369996.2A CN111219940B (zh) 2019-12-26 2019-12-26 冰箱内灯光控制的方法及装置、冰箱

Publications (2)

Publication Number Publication Date
CN111219940A true CN111219940A (zh) 2020-06-02
CN111219940B CN111219940B (zh) 2023-09-22

Family

ID=70830904

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911369996.2A Active CN111219940B (zh) 2019-12-26 2019-12-26 冰箱内灯光控制的方法及装置、冰箱

Country Status (1)

Country Link
CN (1) CN111219940B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112856887A (zh) * 2021-01-15 2021-05-28 珠海格力电器股份有限公司 储存装置及其控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008225838A (ja) * 2007-03-13 2008-09-25 Aisin Seiki Co Ltd 顔特徴点検出装置、顔特徴点検出方法及びプログラム
US20090169108A1 (en) * 2007-12-27 2009-07-02 Chi Mei Communication Systems, Inc. System and method for recognizing smiling faces captured by a mobile electronic device
CN104519640A (zh) * 2013-09-26 2015-04-15 松下电器产业株式会社 照明控制系统
CN104768309A (zh) * 2015-04-23 2015-07-08 天脉聚源(北京)传媒科技有限公司 一种根据用户情绪调节灯光的方法及装置
CN105323934A (zh) * 2015-11-27 2016-02-10 青岛海尔股份有限公司 一种冰箱的照明控制方法
CN106991367A (zh) * 2016-01-21 2017-07-28 腾讯科技(深圳)有限公司 确定人脸转动角度的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008225838A (ja) * 2007-03-13 2008-09-25 Aisin Seiki Co Ltd 顔特徴点検出装置、顔特徴点検出方法及びプログラム
US20090169108A1 (en) * 2007-12-27 2009-07-02 Chi Mei Communication Systems, Inc. System and method for recognizing smiling faces captured by a mobile electronic device
CN104519640A (zh) * 2013-09-26 2015-04-15 松下电器产业株式会社 照明控制系统
CN104768309A (zh) * 2015-04-23 2015-07-08 天脉聚源(北京)传媒科技有限公司 一种根据用户情绪调节灯光的方法及装置
CN105323934A (zh) * 2015-11-27 2016-02-10 青岛海尔股份有限公司 一种冰箱的照明控制方法
CN106991367A (zh) * 2016-01-21 2017-07-28 腾讯科技(深圳)有限公司 确定人脸转动角度的方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112856887A (zh) * 2021-01-15 2021-05-28 珠海格力电器股份有限公司 储存装置及其控制方法

Also Published As

Publication number Publication date
CN111219940B (zh) 2023-09-22

Similar Documents

Publication Publication Date Title
EP3740897B1 (en) License plate reader using optical character recognition on plural detected regions
US20200279120A1 (en) Method, apparatus and system for liveness detection, electronic device, and storage medium
US11263769B2 (en) Image processing device, image processing method, and image processing system
CN108734676B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110651301A (zh) 用于自动为夜视图像着色的方法和系统
EP3180784B1 (en) Management for wearable display
CN109993115B (zh) 图像处理方法、装置及可穿戴设备
CN111598065B (zh) 深度图像获取方法及活体识别方法、设备、电路和介质
US10607088B2 (en) Image processing device, image processing method, and image processing system
EP2367139A1 (en) Matching device, digital image processing system, matching device control program, computer-readable recording medium, and matching device control method
US20160264051A1 (en) Night Driving System and Method
US20160364008A1 (en) Smart glasses, and system and method for processing hand gesture command therefor
EP2309454A2 (en) Apparatus and method for detecting motion
JP2021526269A (ja) オブジェクト追跡方法および装置、電子設備並びに記憶媒体
CN106941588B (zh) 一种数据处理方法及电子设备
KR101630286B1 (ko) 전경 및 배경 분리 장치 및 방법
KR20150018927A (ko) 야간 카메라 영상 저장 장치 및 그 영상 저장 방법
WO2016025614A1 (en) Power management for wearable display
CN111219940A (zh) 冰箱内灯光控制的方法及装置、冰箱
CN104063041A (zh) 一种信息处理方法及电子设备
KR101675542B1 (ko) 스마트 글래스 및 이를 위한 손 제스처 명령 처리 방법
CN108847191B (zh) 背光调节系统及其背光调节方法、装置和智能交互设备
KR20180111150A (ko) 영상에서 전경을 추출하는 장치 및 그 방법
EP2831702B1 (en) Information processing device, information processing method and program
US10409464B2 (en) Providing a context related view with a wearable apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant