CN106249877A - 控制方法及控制装置 - Google Patents

Abstract

本发明公开了一种控制方法，用于控制电子装置的屏幕显示。控制方法包括步骤：获取多帧连续人脸图像；处理多帧连续人脸图像以识别嘴部区域；根据嘴部区域确定用户的嘴部变化状态；判断嘴部变化状态是否满足预定条件；及在嘴部变化状态满足预定条件时触发屏幕的预定护眼设置。此外，本发明还公开了一种控制装置。本发明实施方式的控制方法及控制装置，通过用户嘴部区域的变化状态判断用户的疲劳程度，进而触发屏幕的预定护眼设置以减小用户在疲劳状态下的用眼压力，进而保护视力。

Description

控制方法及控制装置

技术领域

本发明涉及显示技术，特别涉及一种控制方法及控制装置。

背景技术

用户处于疲劳状态并继续观看手机时，往往会由于得不到休息而加重疲劳状态，并且由于处于疲劳状态而导致用眼姿势不正确而损害视力，不利于保护眼睛。

发明内容

本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明需要提供一种控制方法及控制装置。

本发明实施方式的控制方法，用于控制电子装置的屏幕显示，所述控制方法包括以下步骤：

获取多帧连续人脸图像；

处理所述多帧连续人脸图像以识别嘴部区域；

根据所述嘴部区域确定用户的嘴部变化状态；

判断所述嘴部变化状态是否满足预定条件；及

在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置。

在某些实施方式中，所述判断所述嘴部变化状态是否满足预定条件的步骤包括：

判断所述用户是否打哈欠；及

在所述用户打哈欠时确定所述嘴部变化状态满足所述预定条件。

在某些实施方式中，所述判断所述用户是否打哈欠的步骤包括：

判断所述嘴部的张开程度是否大于预定值且是否维持超过预定时间；及

在所述嘴部的张开程度大于所述预定值且维持超过所述预定时间则确定所述用户打哈欠。

在某些实施方式中，所述判断所述嘴部变化状态是否满足预定条件的步骤还包括：

统计所述用户在预定时间段打哈欠的次数；及

在所述打哈欠的次数大于预定次数时确定所述嘴部变化状态满足所述预定条件。

在某些实施方式中，所述在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置的步骤包括：

在所述嘴部变化状态满足所述预定条件时降低所述屏幕的亮度及/或所述屏幕的对比度。

本发明实施方式的控制装置，用于控制电子装置的屏幕显示，

所述控制装置包括：

成像模块，用于获取多帧连续人脸图像；

处理模块，用于处理所述多帧连续人脸图像以识别嘴部区域；

确定模块，用于根据所述嘴部区域确定用户的嘴部变化状态；

判断模块，用于判断所述嘴部变化状态是否满足预定条件；及

控制模块，用于在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置。

在某些实施方式中，所述判断模块用于判断所述用户是否打哈欠，并在所述用户打哈欠时确定所述嘴部变化状态满足所述预定条件。

在某些实施方式中，所述判断模块用于判断所述嘴部的张开程度是否大于预定值且是否维持超过预定时间，并在所述嘴部的张开程度大于所述预定值且维持超过所述预定时间则确定所述用户打哈欠。

在某些实施方式中，所述判断模块用于统计所述用户在预定时间段打哈欠的次数，并在所述打哈欠的次数大于预定次数时确定所述嘴部变化状态满足所述预定条件。

在某些实施方式中，所述控制模块用于在所述嘴部变化状态满足所述预定条件时降低所述屏幕的亮度及/或所述屏幕的对比度。

本发明实施方式的控制方法及控制装置，通过用户嘴部区域的变化状态判断用户的疲劳程度，进而触发屏幕的预定护眼设置以减小用户在疲劳状态下的用眼压力，进而保护视力。

本发明的附加方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：

图1是本发明实施方式的控制方法的流程示意图。

图2是本发明实施方式的控制装置的功能模块示意图。

具体实施方式

下面详细描述本发明的实施方式，所述实施方式的示例在附图中示出，其中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本发明的实施方式，而不能理解为对本发明的实施方式的限制。

请参阅图1，本发明实施方式的控制方法，用于控制电子装置的屏幕显示。控制方法包括步骤：

S10：获取多帧连续人脸图像；

S20：处理多帧连续人脸图像以识别嘴部区域；

S30：根据嘴部区域确定用户的嘴部变化状态；

S40：判断所述嘴部变化状态是否满足预定条件；及

S50：在嘴部变化状态满足预定条件时触发屏幕的预定护眼设置。

请参阅图2，本发明实施方式的控制装置100包括成像模块10、处理模块20、确定模块30、判断模块40及控制模块50。作为例子，本发明实施方式的控制方法可以由本发明实施方式的控制装置100实现，并可应用于电子装置1000并用于控制电子装置1000的屏幕200。

其中，本发明实施方式的控制方法的步骤S10可以由成像模块10实现，步骤S20可以由处理模块20实现，步骤S30可以由确定模块30实现，步骤S40可以由判断模块40实现，而步骤S50可以由控制模块50实现。也即是说，成像模块10用于获取多帧连续人脸图像。处理模块20用于处理多帧连续人脸图像以识别嘴部区域。确定模块30用于根据嘴部区域确定用户的嘴部变化状态。判断模块40用于判断嘴边变化状态是否满足预定条件。控制模块50用于在嘴部变化状态满足预定条件时触发屏幕的预定护眼设置。

用户在使用电子装置1000例如手机的过程中，通过屏幕200观看显示内容，例如文字或图像。随着互联网的普及，可供人们选择进行阅读的文字信息越来越多，例如新闻、电子书、社交文章等。在一些场景中，用户自身处于疲劳状态并继续观看手机。而疲劳状态下用户不及时休息而继续观看手机，一来，会加重疲劳状态，二来，由于用户处于疲劳状态往往会导致其用眼姿势不正确而损害视力。

本发明实施方式的控制方法通过检测用户在使用手机时嘴部变化状态判断用户是否处于疲劳状态进而触发屏幕的预定护眼设置，以保护用户在疲劳状态下的用眼健康。

在操作中，根据触发信号进入疲劳状态监测模式，在疲劳状态监测模式下，通过成像模块10例如前置摄像头对用户脸部成像，进而识别嘴部区域及嘴部变化状态，通过嘴部变化状态判断用户是否处于疲劳状态，进而触发预定护眼设置。

可以理解，多帧连续图像可完整获取嘴部变化状态以判断是否满足触发护眼设置的预定条件。

预定条件可以是嘴部变化状态的相关参数，例如时间、次数、变化程度等。

预定护眼设置则可以是屏幕相关参数的调节，例如屏幕的亮度、对比度、点亮时间等。预定护眼设置可用以提醒或辅助改善用户的用眼状况。

在本发明实施方式中，电子装置1000包括控制装置100。

综上所述，本发明实施方式的控制方法、控制装置100及电子装置1000，通过用户嘴部区域的变化状态判断用户的疲劳程度，进而触发屏幕200的预定护眼设置以减小用户在疲劳状态下的用眼压力，进而保护视力。

在某些实施方式中，电子装置1000可以是手机或平板电脑。

可以理解，电子装置1000包括但不限于本实施方式的示例。

优选地，在某些实施方式中，步骤S40包括：

判断用户是否打哈欠；及

在用户打哈欠时确定嘴部变化状态满足预定条件。

在某些实施方式中，上述步骤可以由判断模块40实现。或者说，判断模块40用于判断用户是否打哈欠，并在用户打哈欠时确定嘴部变化状态满足预定条件。

可以理解，用户若处于疲劳状态，通常会在观看手机的过程中呈现打哈欠的状态，而打哈欠时嘴部通常会呈张开状态并持续一定时间。因此，可将用户打哈欠时确定为满足预定条件进而触发护眼设置。

进一步地，在某些实施方式中，判断用户是否打哈欠的步骤包括：

判断嘴部的张开程度是否大于预定值且是否维持超过预定时间；及

在嘴部的张开程度大于预定值且维持超过预定时间则确定用户打哈欠。

在某些实施方式中，判断嘴部的张开程度是否大于预定值且是否维持超过预定时间的步骤及在嘴部的张开程度大于预定值且维持超过预定时间则确定用户打哈欠的步骤可以由判断模块40实现。或者说，判断模块40用于判断嘴部的张开程度是否大于预定值且是否维持超过预定时间并在嘴部的张开程度大于预定值且维持超过预定时间则确定用户打哈欠。

可以理解，为防止判断中对其他嘴部张开但非打哈欠的状态的误判断，因此需嘴部张开程度及持续时间满足一定相关条件，例如嘴部的张开程度大于预定值及维持时间超过预定时间。如此，可准确判断用户是否打哈欠，进而判断用户是否处于疲劳状态从而触发预定护眼设置。

优选地，在某些实施方式中，步骤S40包括：

统计用户在预定时间段打哈欠的次数；及

在打哈欠的次数大于预定次数时确定嘴部变化状态满足预定条件。

在某些实施方式中，统计用户在预定时间段打哈欠的次数的步骤及在打哈欠的次数大于预定次数时确定嘴部变化状态满足预定条件的步骤可以由判断模块40实现。或者说，判断模块40用于统计用户在预定时间段打哈欠的次数并在打哈欠的次数大于预定次数时确定嘴部变化状态满足预定条件。

统计预定时间段打哈欠的次数可以更加准确地判断用户是否疲劳及疲劳程度。可以理解，随着用户疲劳程度的加重，用户在预定时间段内打哈欠的次数将逐渐增加。在这样实施方式中，预定条件还可包括对打哈欠次数的统计，进而可根据不同的打哈欠的次数触发不同的护眼设置。

例如，预设时间段为30分钟，当打哈欠的次数大于5次而小于10次时，可认为用户处于轻度疲劳状态，当打哈欠的次数大于10次而小于15次时，可认为用户处于中度疲劳状态，当打哈欠的次数大于15次时，可认为用户处于重度疲劳状态。进一步地，轻度疲劳状态、中度疲劳状态及重度疲劳状态分别对应不同的预定护眼设置。

如此，可根据用户打哈欠的次数准确判断用户的疲劳状态，并根据不同程度的疲劳状态触发不同的预定护眼设置以形成多级护眼，使得护眼设置更加准确全面。

在某些实施方式中，步骤S50包括步骤：

提示用户。

在某些实施方式中，控制模块50包括提示单元。提示用户的步骤可以由提示单元实现。在这样的实施方式中，提示单元可以是蜂鸣器、振动器、呼吸灯或屏幕200的一种或多种，提示可以是蜂鸣、震动、闪烁或屏幕显示一种或多种。或者说，提示可以是视觉、听觉或触觉提示中的一种或多种。

具体地，视觉提示可以是图形、动画、文字等提示信息，并通过屏幕200显示。听觉提示可以是通过电子装置1000的某些元件，例如蜂鸣器、扬声器等发出的特定的提示声，触觉提示可以是电子装置震动时所发出的触觉提示信息，例如由震动马达震动时所产生的触觉提示信息。

视觉提示，例如可通过屏幕显示预置的提示信息“疲劳使用，请注意”以提示用户处于疲劳观看状态；听觉提示，例如可通过扬声器播放预置的提示信息“疲劳使用，请注意”以提示用户处于疲劳观看状态；触觉提示例如可通过震动马达按预设频率震动来提示用户处于疲劳观看状态。

需要说明的是，以上提示信息的具体内容只是作为例子对本发明实施方式进行说明，不应该理解为对本发明的限制。

具体地，在某些实施方式中，步骤S50包括：

在嘴部变化状态满足预定条件时降低屏幕的亮度。

在某些实施方式中，在嘴部变化状态满足预定条件时降低屏幕的亮度的步骤可以由控制模块50实现。或者说，控制模块50用于在嘴部变化状态满足预定条件时降低屏幕200的亮度。

可以理解，用户处于疲劳状态时，过亮的屏幕亮度将对用户造成一定的刺激，而此时降低屏幕亮度将减弱眼部的刺激并有助于引导用户逐渐进入休息状态。

进一步地，在某些实施方式中，步骤S50包括步骤：

在嘴部变化状态满足预定条件时降低屏幕的亮度调节速度。

在某些实施方式中，在嘴部变化状态满足预定条件时降低屏幕的亮度调节速度的步骤可以由控制模块50实现。或者说，控制模块50用于在嘴部变化状态满足预定条件时降低屏幕的亮度调节速度。

可以理解，降低亮度调节速度可以减小亮度变化对人眼的刺激，平缓的调节也有助于引导用户进入休息状态。

相类似地，在某些实施方式中，步骤S50包括：

在嘴部变化状态满足预定条件时降低屏幕的对比度。

在某些实施方式中，在嘴部变化状态满足预定条件时降低屏幕的对比度的步骤可以由控制模块50实现。或者说，控制模块50用于在嘴部变化状态满足预定条件时降低屏幕200的对比度。

与降低屏幕200的亮度相类似，在用户处于疲劳状态时，过高的对比度将对用户造成一定的刺激，降低屏幕200的对比度将减弱高对比度的眼部的刺激并有助于引导用户逐渐进入休息状态。

在本发明的实施方式的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明的实施方式和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的实施方式的限制。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

在本发明的实施方式的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接或可以相互通讯；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。

在本发明的实施方式中，除非另有明确的规定和限定，第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触，也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且，第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方，或仅仅表示第一特征水平高度小于第二特征。

上文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开，上文中对特定例子的部件和设置进行描述。当然，它们仅仅为示例，并且目的不在于限制本发明。此外，本发明的实施方式可以在不同例子中重复参考数字和/或参考字母，这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施方式和/或设置之间的关系。此外，本发明的实施方式提供了的各种特定的工艺和材料的例子，但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。

在本说明书的描述中，参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明的各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种控制方法，用于控制电子装置的屏幕显示，其特征在于，所述控制方法包括以下步骤：

获取多帧连续人脸图像；

处理所述多帧连续人脸图像以识别嘴部区域；

根据所述嘴部区域确定用户的嘴部变化状态；

判断所述嘴部变化状态是否满足预定条件；及

在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置。

2.如权利要求1所述的控制方法，其特征在于，所述判断所述嘴部变化状态是否满足预定条件的步骤包括：

判断所述用户是否打哈欠；及

在所述用户打哈欠时确定所述嘴部变化状态满足所述预定条件。

3.如权利要求2所述的控制方法，其特征在于，所述判断所述用户是否打哈欠的步骤包括：

判断所述嘴部的张开程度是否大于预定值且是否维持超过预定时间；及

在所述嘴部的张开程度大于所述预定值且维持超过所述预定时间则确定所述用户打哈欠。

4.如权利要求2所述的控制方法，其特征在于，所述判断所述嘴部变化状态是否满足预定条件的步骤还包括：

统计所述用户在预定时间段打哈欠的次数；及

在所述打哈欠的次数大于预定次数时确定所述嘴部变化状态满足所述预定条件。

5.如权利要求1所述的控制方法，其特征在于，所述在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置的步骤包括：

在所述嘴部变化状态满足所述预定条件时降低所述屏幕的亮度及/或所述屏幕的对比度。

6.一种控制装置，用于控制电子装置的屏幕显示，其特征在于，所述控制装置包括：

成像模块，用于获取多帧连续人脸图像；

处理模块，用于处理所述多帧连续人脸图像以识别嘴部区域；

确定模块，用于根据所述嘴部区域确定用户的嘴部变化状态；

判断模块，用于判断所述嘴部变化状态是否满足预定条件；及

控制模块，用于在所述嘴部变化状态满足所述预定条件时触发所述屏幕的预定护眼设置。

7.如权利要求6所述的控制装置，其特征在于，所述判断模块用于判断所述用户是否打哈欠，并在所述用户打哈欠时确定所述嘴部变化状态满足所述预定条件。

8.如权利要求7所述的控制装置，其特征在于，所述判断模块用于判断所述嘴部的张开程度是否大于预定值且是否维持超过预定时间，并在所述嘴部的张开程度大于所述预定值且维持超过所述预定时间则确定所述用户打哈欠。

9.如权利要求7所述的控制装置，其特征在于，所述判断模块用于统计所述用户在预定时间段打哈欠的次数，并在所述打哈欠的次数大于预定次数时确定所述嘴部变化状态满足所述预定条件。

10.如权利要求6所述的控制装置，其特征在于，所述控制模块用于在所述嘴部变化状态满足所述预定条件时降低所述屏幕的亮度及或所述屏幕的对比度。