CN113012656A - 显示屏控制方法、智能家电设备及存储介质 - Google Patents

Abstract

本申请涉及智能家居技术领域，具体公开了一种显示屏控制方法、智能家电设备及存储介质。其中方法包括：在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息；在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像；若所述图像中存在人脸，则获取所述人脸的脸部角度；若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。通过本申请可以提高智能家电的显示屏的智能化，提高用户使用显示屏的操作效率。

Description

显示屏控制方法、智能家电设备及存储介质

技术领域

本申请涉及智能家居技术领域，尤其涉及一种显示屏控制方法、智能家电设备及存储介质。

背景技术

随着智能家居技术的发展，家电设备越来越多都智能化。例如，智能冰箱可以对冰箱进行智能化控制以及对食品进行智能化管理。可让用户通过手机或电脑，随时随地了解冰箱里食物的数量、保鲜保质信息，为用户提供健康食谱和营养禁忌，提醒用户定时补充食品等。为了方便用户操作智能家电设备，智能家电设备上一般设置有显示屏，但是现有的智能家电设备的显示屏功能还不够智能，需要进一步优化。

发明内容

本申请提供了一种显示屏控制方法、智能家电设备及存储介质，可以提高智能家电的显示屏功能的智能化，提高用户的操作效率。

第一方面，本申请提供了一种显示屏控制方法，所述方法包括：

在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息；

在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像；

若所述图像中存在人脸，则获取所述人脸的脸部角度；

若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。

第二方面，本申请还提供了一种智能家电设备，所述智能家电设备包括存储器和处理器；所述存储器用于存储计算机程序；所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如上述的显示屏控制方法。

第三方面，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如上述的显示屏控制方法。

本申请公开了一种显示屏控制方法、智能家电设备及存储介质，所述方法用于在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息；在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像；若所述图像中存在人脸，则获取所述人脸的脸部角度；若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。本申请可以通过感应器检测是否有用户靠近智能家电，进而根据摄像头采集用户的图像进一步判断用户是否有使用智能家电的显示屏的需求，并且在判断到用户有使用显示屏需求的时候，控制显示屏亮屏，以便用户使用。通过本申请实施例的显示屏控制方法可以提高智能家电的显示屏的智能化，提高用户使用显示屏的操作效率。

附图说明

为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种显示屏控制方法的示意流程图；

图2为本申请实施例提供的一种显示屏控制方法的一个场景示意；

图3为本申请实施例提供的一种显示屏控制方法的另一个场景示意；

图4为本申请实施例提供的另一种显示屏控制方法的流程示意图；

图5为本申请实施例提供的另一种显示屏控制方法的流程示意图；

图6为本申请实施例提供的摄像头采集的图像的示意图；

图7为本申请实施例提供的另一种显示屏控制方法的流程示意图；

图8是本申请的实施例提供的一种智能家电设备的结构示意性框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。

应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

本申请的实施例提供了一种显示屏控制方法、智能家电设备及存储介质。下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。

请参阅图1，图1是本申请的实施例提供的一种显示屏控制方法的示意流程图。如图1所示，该显示屏控制方法具体包括步骤S101至步骤S104。

S101、在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息。

其中，所述智能家电可以是具备显示屏的家电设备，示例性地，可以是智能冰箱或智能电视机等等。熄屏状态可以是显示屏以较低的功耗处于休眠的状态，智能家电的显示屏不会持续保持亮屏的状态，在用户不使用显示屏的时候，智能家电的显示屏一般是处于熄屏状态，直到用户主动触发智能家电的显示屏，显示屏才会进入亮屏状态，以供用户操作。现有技术中，用户一般是通过触摸显示屏或者触摸智能家电上的触发按键以控制显示屏进入亮屏状态。

感应器可以是用于检测周围环境中是否有人出现的传感器，示例性地，感应器可以是红外传感器或距离传感器。感应器设置在智能家电上，以便在有人靠近智能家电时，感应器可以检测到人体感应信息。

图2为本申请实施例提供的显示屏控制方法的一个场景示意，如图2所示，以智能冰箱10为例，智能冰箱10上设置有显示屏11和感应器12，感应器12可以设置在显示屏11周围，可选的，可以是设置在显示屏11的上方。当有人走到智能冰箱10前，感应器12可以感应到人体感应信息。如果感应器12是距离传感器，感应器12则可以获取到人和智能冰箱10的距离。

S102、在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像。

其中，摄像头设置在智能家电上，可以采集到智能家电周围的图像。在检测到感应器发送的人体感应信息时，则表示有人靠近了智能家电，可以通过摄像头采集图像来进一步分析用户是否需要使用智能家电的显示屏。

图3为本申请实施例提供的显示屏控制方法的另一个场景示意，如图3所示，智能冰箱10上还设置有摄像头13，摄像头13可以是设置在显示屏11的周围，可以是设置在显示屏的上方。摄像头13设置在较高的位置可以采集到更大范围的图像。在检测到感应器发送的人体感应信息时，通过摄像头13采集图像，则可以采集到可能包含人体的图像，以便进一步分析判断用户是否需要使用智能家电的显示屏。

S103、若所述图像中存在人脸，则获取所述人脸的脸部角度。

用户在靠近智能家电时，如果要使用智能家电的显示屏，一般是会尽量面向显示屏。在摄像头采集到图像后，可以对图像进行图像处理，以判断图像中是否存在人脸。若图像中存在人脸，则获取人脸的脸部角度，以便进一步分析判断用户是否需要使用智能家电的显示屏。

S104、若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。

其中，预设角度范围可以是根据摄像头与显示屏的位置关系进行确定。例如，如果摄像头设置在显示屏的左侧，当用户面向显示屏时，摄像头可能采集到偏向左侧的人脸图像。而如果摄像头设置在显示屏的上方，且靠近显示屏的中间的位置，在用户面向显示屏时，摄像头可能采集到正脸的人脸图像。预设角度范围可以是正脸范围、右侧脸范围或左侧脸范围，具体可以根据摄像头与显示屏的位置关系进行确定。

若所述脸部角度符合预设角度范围，则表示用户正在面向显示屏，如此可以确定用户想要使用智能家电的显示屏，可以控制智能家电的显示屏亮屏，以便用户可以直接对显示屏进行操作。

在另一个实施例中，所述若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏的操作可以通过如下方式实施：

若所述脸部角度为正脸，则控制所述智能家电的显示屏亮屏。

其中，摄像头可以是设置在显示屏的上方，且靠近显示屏的中间的位置。若检测到的图像中的人脸的脸部角度为正脸，则表示用户正在面向显示屏，可以控制智能家电的显示屏亮屏，用户无需主动触发显示屏，就可以对显示屏进行操作。

本申请实施例提供的显示屏控制方法，可以通过感应器检测是否有用户靠近智能家电，进而根据摄像头采集用户的图像进一步判断用户是否有使用智能家电的显示屏的需求，并且在判断到用户有使用显示屏需求的时候，控制显示屏亮屏，以便用户使用。通过本申请实施例的显示屏控制方法可以提高智能家电的显示屏的智能化，提高用户使用显示屏的操作效率。

图4为本申请实施例提供的另一种显示屏控制方法的流程示意图，在上述实施例的基础上，对所述显示屏控制方法进行了优化，如图4所示，所述方法具体包括：

S201、在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息。

S202、在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像。

S203、若所述图像中存在人脸，则获取所述人脸的脸部角度。

S204、若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。

具体实施方式可以参考上文的相关描述，在此不再赘述。

S205、根据所述图像中的人脸确定用户身份。

其中，根据识别到的所述图像中的人脸，可以确定用户身份。示例性地，智能家电中预存了多个用户身份对应的预设人脸信息，将采集到的图像中识别到的人脸跟预设人脸信息进行比对，以确定与采集到的图像中的人脸最匹配的用户身份。

S206、获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

家庭内不同的成员都会使用智能家电的显示屏，不同的家庭成员使用智能家电的需求或操作习惯都有所不同。为了进一步方便用户对智能家电的显示屏的使用，在确定用户身份后，可以通过智能家电显示屏显示与用户身份对应的用户显示内容，以便可以进一步提高用户使用智能家电的显示屏的操作效率。

以智能冰箱为例，家庭内负责做饭的用户可能会通过智能冰箱的显示屏了解冰箱内的食物的保鲜信息，儿童用户可能会通过智能冰箱的显示屏了解冰箱内的零食数量。在确定用户身份后，分别对应显示不同地方用户显示内容。

用户显示内容还可以包括根据每个用户身份的历史操作习惯所确定的内容。

可选地，所述用户显示内容包括应用程序。

智能家电中一般都具备操作系统功能，而操作系统中可以装载多种应用程序(APP,Application)。例如，用户显示内容可以是某个用户身份最常用的一个应用程序，在检测到是该用户身份使用显示屏时，通过显示屏显示该应用程序。

可选地，所述用户显示内容包括：所述用户身份前一次使用所述智能家电的显示屏，在熄屏之前的操作界面。

其中，将所述用户身份前一次使用所述智能家电的显示屏并在熄屏之前的操作界面作为用户显示内容进行显示，可以使用户的操作连贯起来。例如，用户在前一次使用智能冰箱的显示屏查询冰箱内的水果的保鲜信息，因为有其他事情离开了智能冰箱。离开期间，可能有其他用户操作过智能冰箱。而用户回到智能冰箱继续操作时，智能冰箱可以根据识别的用户身份恢复该用户前一次使用智能冰箱的显示屏时所操作的最后一个操作界面，用户可以继续之前的操作，如此可以提高用户的操作效率。

本申请实施例提供的显示屏控制方法，可以在确定用户身份后，进一步确定用户身份对应的用户显示内容，并通过显示屏进行显示。可以进一步提高用户对智能家电的显示屏的操作效率。

作为本申请的另一个实施例，在所述获取所述用户身份对应的用户显示内容的操作之前，还包括如下操作：

若所述图像中存在手势，则获取所述手势的手势特征信息；

相应地，所述获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容，包括：

确定所述用户身份的手势特征信息对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

本申请实施例可以进一步获取图像中的手势，根据用户的手势特征信息可以确定更进一步的用户显示内容。示例性地，一个用户身份可以对应多个用户显示内容，用户可以通过摆出不同的手势，对应打开不同的用户显示内容。

示例性地，如果所述用户显示内容包括应用程序。每个用户身份对应多个应用程序，用户可以预先设置不同的手势对应不同的应用程序的关系，在确定用户身份后进一步识别用户的手势，根据手势特征信息确定具体的应用程序作为用户显示内容。

通过结合用户身份和手势信息，在用户如果不方便触碰显示屏时，用户可以通过摆出手势，使智能家电打开和手势对应的用户显示内容，用户无需触碰显示屏，也可以看到自己想要看的内容，可以进一步提高用户操作智能家电的显示屏的操作效率。

作为本申请的另一个实施例，所述感应器为距离传感器，所述人体感应信息包括人体距离；距离传感器可以是感应在预设距离范围内的人体，在检测到有人体进入预设距离范围内时，检测与人体之间的人体距离。

相应地，如图5所示，所述若所述图像中存在人脸，则获取所述人脸的脸部角度的操作可以通过如下方式进行实施：

S301、若所述图像中存在人脸，则确定所述人脸和摄像头的人脸距离；

S302、若所述人脸距离和所述感应器检测的人体距离匹配，则获取所述人脸的脸部角度。

其中，由于摄像头采集到的图像包括智能家电的周围环境，如果智能家电的周围有多个用户，摄像头采集到的图像中就可能会拍摄到多个用户的图像。而如果摄像头采集到位于远处的用户恰好正脸面对智能设备的显示屏，可能也会触发智能设备的显示屏，如此会导致不必要的亮屏，造成不必要的功耗。

如图6所示，摄像头采集到的图像中包括两个用户，一个相对近的用户20和一个相对远的用户21，而真正可能在使用智能家电的应该是相对近的用户20，所以需要进一步确定图像中的人脸是否为真正在使用智能家电的用户。

在检测到的图像中存在人脸时，确定所述人脸和摄像头的人脸距离，并判断人脸距离和感应器检测的人体距离是否相匹配，如果两个距离相匹配，则表示图像中的人脸和感应器检测到的人体是同一个用户。

摄像头可以是具备测距功能的摄像头，可以确定采集到的图像中的每个区域的拍摄距离。在采集到包含人脸的图像时，也可以确定所述人脸的人脸区域的拍摄距离，即所述人脸和摄像头的人脸距离。示例性地，所述摄像头可以是3D摄像头或景深摄像头。

如果摄像头是普通的摄像头，不具备测距功能，可选地，如图7所示，所述确定所述人脸和摄像头的人脸距离地操作还可以通过如下方式实施：

S303、确定所述人脸的区域面积；

S304、根据所述区域面积在所述图像中的占比确定所述人脸和摄像头的人脸距离。

其中，在摄像头采集到图像并进行人脸识别后，根据识别到的人脸的区域确定所述人脸的区域面积。示例性地，所述区域面积可以包括识别到的人脸的区域中所包括的像素点的个数。

而如果站在智能家电前想要使用显示屏的用户会与智能家电保持相对近的距离，相应地该用户也会和摄像头保持相对近的距离，由此摄像头采集到的图像中人脸区域会比较大，在摄像头拍摄到的完整画面中占有一定的比例。而如果占比较小的识别的人脸，可能是位于相对远的用户。

通过所述人脸的区域面积在所述图像中的占比可以确定出人脸和摄像头的人脸距离，占比越大则表示用户离摄像头越近。

本申请实施例通过确定摄像头和人脸的人脸距离，并将人脸距离和感应器采集的人体距离进行匹配，若两者匹配，则可以确定摄像头采集到的人脸是靠近智能家电的用户，进而可以触发智能家电的显示屏。由此可以避免显示屏进行不必要的亮屏，避免造成不必要的功耗。

请参阅图8，图8是本申请的实施例提供的一种智能家电设备的结构示意性框图。该智能家电设备可以是智能冰箱。

参阅图8，该智能家电设备包括通过系统总线连接的显示器、感应器、摄像头、处理器。可选地，还可以包括存储器和网络接口，其中，存储器可以包括非易失性存储介质和内存储器。所述感应器用于检测人体感应信息，所述摄像头用于采集图像；所述显示器用于显示。

非易失性存储介质可存储操作系统和计算机程序。该计算机程序包括程序指令，该程序指令被执行时，可使得处理器执行任意一种显示屏控制方法。

处理器用于提供计算和控制能力，支撑整个智能家电设备的运行。

内存储器为非易失性存储介质中的计算机程序的运行提供环境，该计算机程序被处理器执行时，可使得处理器执行任意一种显示屏控制方法。

该网络接口用于进行网络通信，如发送分配的任务等。本领域技术人员可以理解，图8中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的智能家电设备的限定，具体的智能家电设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

应当理解的是，处理器可以是中央处理单元(Central Processing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

其中，在一个实施例中，所述处理器用于运行存储在存储器中的计算机程序，以实现如下步骤：

在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息；

在检测到感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像；

若所述图像中存在人脸，则获取所述人脸的脸部角度；

若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。

在一个实施例中，所述处理器在实现所述若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏时，用于实现：

若所述脸部角度为正脸，则控制所述智能家电的显示屏亮屏。

在一个实施例中，所述处理器在实现若所述图像中存在人脸，还用于实现：

根据所述图像中的人脸确定用户身份；

获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

在一个实施例中，所述用户显示内容包括：所述用户身份前一次使用所述智能家电的显示屏，在熄屏之前的操作界面。

在一个实施例中，所述处理器在实现所述获取所述用户身份对应的用户显示内容之前，还用于实现：

若所述图像中存在手势，则获取所述手势的手势特征信息；

所述获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容，包括：

确定所述用户身份的手势特征信息对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

在一个实施例中，所述用户显示内容包括应用程序。

在一个实施例中，所述感应器为距离传感器，所述人体感应信息包括人体距离；所述处理器在实现所述获取所述人脸的脸部角度时，用于实现：

确定所述人脸和摄像头的人脸距离；

若所述人脸距离和所述感应器检测的人体距离匹配，则获取所述人脸的脸部角度。

在一个实施例中，所述处理器在实现所述确定所述人脸和摄像头的人脸距离时，用于实现：

确定所述人脸的区域面积；

根据所述区域面积在所述图像中的占比确定所述人脸和摄像头的人脸距离。

本申请的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序中包括程序指令，所述处理器执行所述程序指令，实现本申请实施例提供的任一项显示屏控制方法。

其中，所述计算机可读存储介质可以是前述实施例所述的智能家电设备的内部存储单元，例如所述智能家电设备的硬盘或内存。所述计算机可读存储介质也可以是所述智能家电设备的外部存储设备，例如所述智能家电设备上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (11)

1.一种显示屏控制方法，其特征在于，包括：

在智能家电的显示屏处于熄屏状态时，通过设置在所述智能家电上的感应器检测人体感应信息；

在检测到所述感应器发送的人体感应信息时，通过设置在所述智能家电上的摄像头采集图像；

若所述图像中存在人脸，则获取所述人脸的脸部角度；

若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏。

2.根据权利要求1所述的方法，其特征在于，所述若所述脸部角度符合预设角度范围，则控制所述智能家电的显示屏亮屏，所述方法包括：

若所述脸部角度为正脸，则控制所述智能家电的显示屏亮屏。

3.根据权利要求1所述的方法，其特征在于，所述若所述图像中存在人脸，所述方法还包括：

根据所述图像中的人脸确定用户身份；

获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

4.根据权利要求3所述的方法，其特征在于，所述用户显示内容包括：所述用户身份前一次使用所述智能家电的显示屏，在熄屏之前的操作界面。

5.根据权利要求3所述的方法，其特征在于，所述获取所述用户身份对应的用户显示内容之前，还包括：

若所述图像中存在手势，则获取所述手势的手势特征信息；

所述获取所述用户身份对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容，包括：

确定所述用户身份的手势特征信息对应的用户显示内容，并通过所述智能家电的显示屏显示所述用户显示内容。

6.根据权利要求5所述的方法，其特征在于，所述用户显示内容包括应用程序。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述感应器为距离传感器，所述人体感应信息包括人体距离；

所述获取所述人脸的脸部角度，包括：

确定所述人脸和摄像头的人脸距离；

若所述人脸距离和所述感应器检测的人体距离匹配，则获取所述人脸的脸部角度。

8.根据权利要求7所述的方法，其特征在于，所述确定所述人脸和摄像头的人脸距离包括：

确定所述人脸的区域面积；

根据所述区域面积在所述图像中的占比确定所述人脸和摄像头的人脸距离。

9.一种智能家电设备，其特征在于，所述智能家电设备包括显示器、感应器、摄像头、存储器和处理器；

所述感应器用于检测人体感应信息；

所述摄像头用于采集图像；

所述存储器用于存储计算机程序；

所述显示器用于显示；

所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如权利要求1至8中任一项所述的显示屏控制方法。

10.如权利要求9所述的智能家电设备，其特征在于，所述智能家电设备包括智能冰箱。

11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如权利要求1至8中任一项所述的显示屏控制方法。

Images