CN110119708A - 一种基于台灯的用户状态调整方法和装置 - Google Patents

一种基于台灯的用户状态调整方法和装置 Download PDF

Info

Publication number
CN110119708A
CN110119708A CN201910389861.6A CN201910389861A CN110119708A CN 110119708 A CN110119708 A CN 110119708A CN 201910389861 A CN201910389861 A CN 201910389861A CN 110119708 A CN110119708 A CN 110119708A
Authority
CN
China
Prior art keywords
desk lamp
user
characteristic information
face
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910389861.6A
Other languages
English (en)
Inventor
万雪莉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201910389861.6A priority Critical patent/CN110119708A/zh
Publication of CN110119708A publication Critical patent/CN110119708A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ophthalmology & Optometry (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)

Abstract

本发明实施例公开了一种基于台灯的用户状态调整方法和装置,其中,所述方法包括:通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息,从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型,根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。采用本发明所述的基于台灯的用户状态调整方法,能够通过图像分析技术对提取用户的人脸特征进行准确的分析,提高用户当前状态判定的准确性,从而及时提醒用户调整坐姿和提高注意力。

Description

一种基于台灯的用户状态调整方法和装置
技术领域
本发明实施例涉及智能物联网技术领域,具体涉及一种基于台灯的用户状态调整方法和装置。
背景技术
随着经济社会的快速发展,人们的工作、学习压力越来越大。尤其是中小学生,在学习过程中时常面对的繁重的课业压力,如果学习习惯不规范,极易影响中小学生的学习效率和健康状况。例如,学习时间安排不合理,经常容易走神,导致学习效率低下;同时坐姿不规范,可能会给孩子造成严重的脊柱问题,导致驼背、近视和斜视等问题。一个良好的坐姿和学习习惯对孩子的成长至关重要,现在学生的坐姿还存在许多问题,而家长时常忙于工作,对这些情况可能完全不知情,从而无法对孩子的学习进行有效的监督。因此,如何设计一款产品能够帮助孩子建立良好学习习惯,提高学习效率,成为当前亟待解决的技术问题。
目前,人工智能技术快速发展,智能家居逐渐进入人们的日常生活,对人们的生活方式产生了深刻的影响。台灯作为一种普通的照明工具,在人工智能技术兴起以后,通过添加人工智能图像分析和控制技术,可以为台灯增加多种新功能,如监督用户坐姿、学习状态,再通过光线变化提醒用户修正。从而为用户提供更多的便利。但是,当前大多数智能台灯主要是通过设置的感应装置获取用户的当前状态,这些方式对用户状态的判断准确率不高,提醒方式单一,智能化程度不高,仍然无法有效解决孩子的学习习惯不规范的问题。
发明内容
为此,本发明实施例提供一种基于台灯的用户状态调整方法和装置,以解决现有技术中存在的用户状态的判断准确率不高,提醒方式单一,智能化程度不高的问题。
为了实现上述目的,本发明实施例提供如下技术方案:
根据本发明实施例的第一方面,提供一种基于台灯的用户状态调整方法,包括:
通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息;
从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型;
根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
进一步地,所述人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种;
进一步地,所述根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型,具体包括:
当提取的所述人脸特征信息为五官位置的特征信息时,通过提取对应所述五官位置的特征点信息,确定所述用户的人脸偏移角度值,将所述人脸偏移角度值与预设的角度偏移值进行比对,若所述人脸偏移角度值大于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态不规范,若所述人脸偏移角度值小于或等于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态规范;
当提取的所述人脸特征信息为眼部闭合程度的特征信息时,根据所述眼部闭合程度的特征信息,确定所述用户的眼部闭合度值,将所述眼部闭合度值与预设的眼部闭合度值进行比对,若所述眼部闭合度值大于预设的眼部闭合度值,则确定所述用户在使用所述台灯过程中的当前状态类型为清醒状态,若所述眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为疲劳状态;
当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值,将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
进一步地,所述状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
进一步地,所述的基于台灯的用户状态调整方法还包括:
从所述图像信息中提取所述用户的瞳孔大小信息;
通过台灯上预设的光照感应装置获取用户在使用所述台灯过程中的周围环境的光线强弱信息;
根据所述瞳孔大小信息和所述周围环境的光线强弱信息,控制所述台灯执行相应的光照强弱调整操作。
根据本发明实施例的第二方面,提供一种基于台灯的用户状态调整装置,包括:
图像信息获取单元,用于通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息;
当前状态类型确定单元,用于从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型;
提示单元,用于根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
进一步地,所述人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种;
进一步地,所述当前状态类型确定单元具体用于:
当提取的所述人脸特征信息为五官位置的特征信息时,通过提取对应所述五官位置的特征点信息,确定所述用户的人脸偏移角度值,将所述人脸偏移角度值与预设的角度偏移值进行比对,若所述人脸偏移角度值大于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态不规范,若所述人脸偏移角度值小于或等于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态规范;
当提取的所述人脸特征信息为眼部闭合程度的特征信息时,根据所述眼部闭合程度的特征信息,确定所述用户的眼部闭合度值,将所述眼部闭合度值与预设的眼部闭合度值进行比对,若所述眼部闭合度值大于预设的眼部闭合度值,则确定所述用户在使用所述台灯过程中的当前状态类型为清醒状态,若所述眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为疲劳状态;
当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值,将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
进一步地,所述状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
进一步地,所述的基于台灯的用户状态调整装置,还包括:
瞳孔大小信息提取单元,用于从所述图像信息中提取所述用户的瞳孔大小信息;
光线强弱信息获取单元,用于通过台灯上预设的光照感应装置获取用户在使用所述台灯过程中的周围环境的光线强弱信息;
光照强弱调整单元,用于根据所述瞳孔大小信息和所述周围环境的光线强弱信息,控制所述台灯执行相应的光照强弱调整操作。
采用本发明所述的基于台灯的用户状态调整方法,能够通过图像分析技术对提取用户的人脸特征进行准确的分析,提高用户当前状态判定的准确性,从而及时提醒用户调整坐姿和提高注意力。
附图说明
为了更清楚地说明本发明的实施方式或现有技术中的技术方案,下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是示例性的,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图引伸获得其它的实施附图。
本说明书所绘示的结构、比例、大小等,均仅用以配合说明书所揭示的内容,以供熟悉此技术的人士了解与阅读,并非用以限定本发明可实施的限定条件,故不具技术上的实质意义,任何结构的修饰、比例关系的改变或大小的调整,在不影响本发明所能产生的功效及所能达成的目的下,均应仍落在本发明所揭示的技术内容得能涵盖的范围内。
图1为本发明实施例提供的一种基于台灯的用户状态调整方法的流程图;
图2为本发明实施例提供的一种基于台灯的用户状态调整装置的示意图。
具体实施方式
以下由特定的具体实施例说明本发明的实施方式,熟悉此技术的人士可由本说明书所揭露的内容轻易地了解本发明的其他优点及功效,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面第一种基于台灯的用户状态调整方法,对其实施例进行详细描述。如图1所示,其为本发明实施例提供的一种基于台灯的用户状态调整方法的流程图。具体实现过程包括以下步骤:
步骤S101:通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息。
在本发明实施例中,所述的图像采集装置可以是指获取用户使用台灯时的图像信息的摄像头或者其他图像拍摄装置。
在具体实施过程中,第一次使用所述台灯时,服务器内的智能处理模块可以通过提示音提示用户坐在台灯前保持正常学习或工作状态一段时间。通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息,提取该用户正常坐姿状态时的五官位置数据、眼部闭合程度数据、人脸大小以及瞳孔位置偏移数据等,并将其作为预设的状态数据存储至服务器的数据库中。例如,记录此时图像信息中用户的人脸大小,作为预设的初始范围阈值,当再次检测到的人脸大小在此初始范围阈值中,若偏移不超过比如10%(灵敏度参数)时,可以认为用户在正在使用台灯前学习或工作,进而可以触发台灯开启。
本发明所述的台灯可以根据图像采集装置采集的图像信息自动开启或关闭。具体的,图像采集装置可以通过预先设定的时间间隔触发开启或关闭,在开启状态时,可以实时监视当前台灯前的图像信息,当服务器中的智能处理模块检测到图像采集装置发送的图像信息中出现用户的人脸时,并且人脸的大小、用户坐姿以及持续的时间均满足设定阈值后,智能处理模块可以生成控制所述台灯开启的控制指令,控制台灯开启。智能处理模块在当前图像采集装置采集的图像信息中未检测到人脸数据,并且持续时间超过预定的时间阈值后,可以生成控制所述台灯关闭的控制指令,控制台灯关闭,从而有效的节约能源,减少浪费。
本发明实施例中还可以通过设置在台灯上的光敏传感器获取台灯周围的环境光照信息,当服务器中的智能处理模块检测到图像采集装置发送的图像信息中出现用户的人脸时,并且人脸的大小、用户坐姿以及持续的时间均满足设定阈值后,智能处理模块还可以进一步的根据周围的环境光照强度判断是否生成控制所述台灯关闭或开启的控制指令。
步骤S102:从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型。
上述步骤S101中通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息后,为本步骤确定所述用户在使用所述台灯过程中的当前状态类型做了数据准备工作。在步骤S102中,可以从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型。
在本发明实施例中,所述的人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种。当然,很多情况下,还可以包括人脸大小的特征信息。
所述的根据人脸特征信息,确定用户在使用台灯过程中的当前状态类型,具体可以通过如下方式实现:
1)当提取的人脸特征信息为五官位置的特征信息时,可以将图像法信息中人脸部分图像区域进行切割、旋转、对齐、缩放,再发送至智能处理模块进行处理。通过智能处理模块中预设的特征提取算法从所述缩放后的图像区域中提取对应五官位置的特征点信息。根据五官位置的特征点的相对位置信息确定用户的当前人脸偏移角度值。
具体的,智能处理模块中的特征提取算法会设置很多检测框,当一个检测框内包含人脸时,其输出特征值会比较大,基于特征值大小可以得到包含人脸图像的检测框。通过提取对应人眼、鼻子、嘴巴、耳朵以及眉毛的相对位置,就可以得到人脸偏移角度,再通过投影变换(projection transformation)即可旋转人脸偏移角度,使其正对图像界面。缩放就是把不同大小的人脸全部放缩到一个统一的尺寸,比如96*96像素的尺寸。其中,所述的人脸偏移角度包括人脸的横滚偏移角度、俯仰偏移角度、偏转偏移角度中的至少一种。
将人脸偏移角度值与预设的角度偏移值进行比对,若人脸偏移角度值大于预设的角度偏移值,则确定用户在使用台灯过程中的当前状态类型为坐姿状态不规范。确定坐姿状态不规范之后,服务器中的智能处理模块可以通过生成控制指令控制台灯的光照强度、光线色调等发生变化,进而实现控制提示用户调整坐姿的目的。若人脸偏移角度值小于或等于预设的角度偏移值,则确定用户在使用台灯过程中的当前状态类型为坐姿状态规范。
2)当提取的人脸特征信息为眼部闭合程度的特征信息时,可以通过预设的特征提取算法提取当前用户眼部闭合程度的特征信息,确定用户的眼部闭合度值。将眼部闭合度值与预设的眼部闭合度值进行比对,若眼部闭合度值大于预设的眼部闭合度值,则确定用户在使用台灯过程中的当前状态类型为清醒状态,若眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定用户在使用台灯过程中的当前状态类型为疲劳状态。当判定用户在使用台灯过程中的当前状态类型为疲劳状态时,服务器中的智能处理模块可以通过控制指令控制台灯的光照强度等发生变化用户调整进行休息。
具体的,智能处理模块可以检测图像信息中的人眼部分,进而提取专门的人眼图像区域,再将所述人眼图像区域的数据发送到预先训练好的深度神经网络预测模型中,通过特定的算法获得当前用户的人眼闭合度值为0.5,若预设的人眼闭合度值为0.3以下时判定为闭眼(此时可以认定为严重疲劳状态),人眼闭合度值为0.3-0.6时判定眯眼(此时可以认定为一般疲劳状态),人眼闭合度值为0.7以上时判定为清醒状态。当判定当前用户处于为严重疲劳状态或一般疲劳状态,智能处理模块可以发出控制指令,控制台灯的光照强弱等提醒用户适当的休息。
3)当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值。具体的,将图像采集装置采集的图像信息中获取人眼部分图像进行切割、旋转、对齐以及缩放处理,再发送至智能处理模块处理,通过智能处理模块中预设的智能处理算法提取瞳孔位置偏移或者瞳孔大小数据。详细的实现过程可以参照上述人脸偏移角度值的获取流程,在此不再赘述。
将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
在具体实施过程中,一般正常状态下,瞳孔是在眼部区域的中心位置,当斜眼观察旁边目标时,瞳孔会偏移。智能处理模块可以检测图像采集装置获取的图像信息中瞳孔位置的偏移信息,根据瞳孔位置的偏移信息可以获得人注意力观察位置点,进而判断当前用户是否处于注意力集中的状态,若否,则可以控制台灯的光照强弱等,提醒用户提高注意力。
在具体实施过程中,也可以通过震动或提示音的方式提醒用户调整状态,具体实现方式可以多种多样,在此不做具体限定。
另外,在本发明实施例中,还可以从图像信息中提取用户的瞳孔大小信息,通过台灯上预设的光照感应装置获取用户在使用台灯过程中的周围环境的光线强弱信息。根据所述瞳孔大小信息和周围环境的光线强弱信息控制台灯执行相应的光照强弱调整操作。
步骤S103:根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
上述步骤S102中确定所述用户在使用所述台灯过程中的当前状态类型后,为本步骤控制所述台灯执行相应的状态调整提示操作做了准备工作。在步骤S102中,可以根据所述当前状态类型控制所述台灯执行相应的状态调整提示操作。
在本发明实施例中,所述的台灯状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
以光线色调变化提示操作为例,当判定用户当前的坐姿不规范,注意力不集中或者处于疲劳状态时,可以控制台灯的光线从常见的黄白色光线变为其他如红色或蓝色等刺激性色调,也可以通过台灯上设置的低功率LED射灯组照射人眼范围实现状态调整提示操作。
以光线强弱变化提示操作为例,比如当台灯的光线变亮时可以作为提醒用户应当提高学习或工作的注意力提示操作,当台灯的光照强度变暗时可以作为提醒用户眼睛应当适当远离桌面提示操作。
以光线闪烁变化提示操作为例,当台灯的光线变为闪烁时可以作为提醒用户需要适当的休息提示操作。
在具体实施过程中,还可以通过设置的提示音装置或震动装置实现状态调整提示操作。
在本发明实施例中,还可以根据不同用户的习惯差异,通过智能处理模块对图像采集装置采集的图像信息中的人脸进行识别,对比预先存储的历史数据记录不同用户的使用、操作习惯,提供个性化的服务,从而做到每个用户能有独特的定制化设定,提升用户的使用体验。
采用本发明所述的基于台灯的用户状态调整方法,能够通过图像分析技术对提取用户的人脸特征进行准确的分析,提高用户当前状态判定的准确性,从而及时提醒用户调整坐姿和提高注意力。
与上述提供的一种基于台灯的用户状态调整方法相对应,本发明还提供一种基于台灯的用户状态调整装置。由于该装置的实施例相似于上述方法实施例,所以描述的比较简单,相关之处请参见上述方法实施例部分的说明即可,下面描述第一种基于台灯的用户状态调整装置的实施例仅是示意性的。请参考图2所示,其为本发明实施例提供的一种基于台灯的用户状态调整装置的示意图。
本发明所述的一种基于台灯的用户状态调整装置包括如下部分:
图像信息获取单元201,用于通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息。
在本发明实施例中,所述的图像采集装置可以是指获取用户使用台灯时的图像信息的摄像头或者其他图像拍摄装置。
在具体实施过程中,第一次使用所述台灯时,服务器内的智能处理模块可以通过提示音提示用户坐在台灯前保持正常学习或工作状态一段时间。通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息,提取该用户正常坐姿状态时的五官位置数据、眼部闭合程度数据、人脸大小以及瞳孔位置偏移数据等,并将其作为预设的状态数据存储至服务器的数据库中。例如,记录此时图像信息中用户的人脸大小,作为预设的初始范围阈值,当再次检测到的人脸大小在此初始范围阈值中,若偏移不超过比如10%(灵敏度参数)时,可以认为用户在正在使用台灯前学习或工作,进而可以触发台灯开启。
本发明所述的台灯可以根据图像采集装置采集的图像信息自动开启或关闭。具体的,图像采集装置可以通过预先设定的时间间隔触发开启或关闭,在开启状态时,可以实时监视当前台灯前的图像信息,当服务器中的智能处理模块检测到图像采集装置发送的图像信息中出现用户的人脸时,并且人脸的大小、用户坐姿以及持续的时间均满足设定阈值后,智能处理模块可以生成控制所述台灯开启的控制指令,控制台灯开启。智能处理模块在当前图像采集装置采集的图像信息中未检测到人脸数据,并且持续时间超过预定的时间阈值后,可以生成控制所述台灯关闭的控制指令,控制台灯关闭,从而有效的节约能源,减少浪费。
本发明实施例中还可以通过设置在台灯上的光敏传感器获取台灯周围的环境光照信息,当服务器中的智能处理模块检测到图像采集装置发送的图像信息中出现用户的人脸时,并且人脸的大小、用户坐姿以及持续的时间均满足设定阈值后,智能处理模块还可以进一步的根据周围的环境光照强度判断是否生成控制所述台灯关闭或开启的控制指令。
当前状态类型确定单元202,用于从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型。
上述图像信息获取单元201通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息后,为本单元确定所述用户在使用所述台灯过程中的当前状态类型做了数据准备工作。图像信息获取单元201可以从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型。
在本发明实施例中,所述的人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种。当然,很多情况下,还可以包括人脸大小的特征信息。
所述的根据人脸特征信息,确定用户在使用台灯过程中的当前状态类型,具体可以通过如下方式实现:
1)当提取的人脸特征信息为五官位置的特征信息时,可以将图像法信息中人脸部分图像区域进行切割、旋转、对齐、缩放,再发送至智能处理模块进行处理。通过智能处理模块中预设的特征提取算法从所述缩放后的图像区域中提取对应五官位置的特征点信息。根据五官位置的特征点的相对位置信息确定用户的当前人脸偏移角度值。
具体的,智能处理模块中的特征提取算法会设置很多检测框,当一个检测框内包含人脸时,其输出特征值会比较大,基于特征值大小可以得到包含人脸图像的检测框。通过提取对应人眼、鼻子、嘴巴、耳朵以及眉毛的相对位置,就可以得到人脸偏移角度,再通过投影变换(projection transformation)即可旋转人脸偏移角度,使其正对图像界面。缩放就是把不同大小的人脸全部放缩到一个统一的尺寸,比如96*96像素的尺寸。其中,所述的人脸偏移角度包括人脸的横滚偏移角度、俯仰偏移角度、偏转偏移角度中的至少一种。
将人脸偏移角度值与预设的角度偏移值进行比对,若人脸偏移角度值大于预设的角度偏移值,则确定用户在使用台灯过程中的当前状态类型为坐姿状态不规范。确定坐姿状态不规范之后,服务器中的智能处理模块可以通过生成控制指令控制台灯的光照强度、光线色调等发生变化,进而实现控制提示用户调整坐姿的目的。若人脸偏移角度值小于或等于预设的角度偏移值,则确定用户在使用台灯过程中的当前状态类型为坐姿状态规范。
2)当提取的人脸特征信息为眼部闭合程度的特征信息时,可以通过预设的特征提取算法提取当前用户眼部闭合程度的特征信息,确定用户的眼部闭合度值。将眼部闭合度值与预设的眼部闭合度值进行比对,若眼部闭合度值大于预设的眼部闭合度值,则确定用户在使用台灯过程中的当前状态类型为清醒状态,若眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定用户在使用台灯过程中的当前状态类型为疲劳状态。当判定用户在使用台灯过程中的当前状态类型为疲劳状态时,服务器中的智能处理模块可以通过控制指令控制台灯的光照强度等发生变化用户调整进行休息。
具体的,智能处理模块可以检测图像信息中的人眼部分,进而提取专门的人眼图像区域,再将所述人眼图像区域的数据发送到预先训练好的深度神经网络预测模型中,通过特定的算法获得当前用户的人眼闭合度值为0.5,若预设的人眼闭合度值为0.3以下时判定为闭眼(此时可以认定为严重疲劳状态),人眼闭合度值为0.3-0.6时判定眯眼(此时可以认定为一般疲劳状态),人眼闭合度值为0.7以上时判定为清醒状态。当判定当前用户处于为严重疲劳状态或一般疲劳状态,智能处理模块可以发出控制指令,控制台灯的光照强弱等提醒用户适当的休息。
3)当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值。具体的,将图像采集装置采集的图像信息中获取人眼部分图像进行切割、旋转、对齐以及缩放处理,再发送至智能处理模块处理,通过智能处理模块中预设的智能处理算法提取瞳孔位置偏移或者瞳孔大小数据。详细的实现过程可以参照上述人脸偏移角度值的获取流程,在此不再赘述。
将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
在具体实施过程中,一般正常状态下,瞳孔是在眼部区域的中心位置,当斜眼观察旁边目标时,瞳孔会偏移。智能处理模块可以检测图像采集装置获取的图像信息中瞳孔位置的偏移信息,根据瞳孔位置的偏移信息可以获得人注意力观察位置点,进而判断当前用户是否处于注意力集中的状态,若否,则可以控制台灯的光照强弱等,提醒用户提高注意力。
在具体实施过程中,也可以通过震动或提示音的方式提醒用户调整状态,具体实现方式可以多种多样,在此不做具体限定。
另外,在本发明实施例中,还可以从图像信息中提取用户的瞳孔大小信息,通过台灯上预设的光照感应装置获取用户在使用台灯过程中的周围环境的光线强弱信息。根据所述瞳孔大小信息和周围环境的光线强弱信息控制台灯执行相应的光照强弱调整操作。
提示单元203,用于根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
上述提示单元203确定所述用户在使用所述台灯过程中的当前状态类型后,为本单元控制所述台灯执行相应的状态调整提示操作做了准备工作。提示单元203可以根据所述当前状态类型控制所述台灯执行相应的状态调整提示操作。
在本发明实施例中,所述的台灯状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
以光线色调变化提示操作为例,当判定用户当前的坐姿不规范,注意力不集中或者处于疲劳状态时,可以控制台灯的光线从常见的黄白色光线变为其他如红色或蓝色等刺激性色调,也可以通过台灯上设置的低功率LED射灯组照射人眼范围实现状态调整提示操作。
以光线强弱变化提示操作为例,比如当台灯的光线变亮时可以作为提醒用户应当提高学习或工作的注意力提示操作,当台灯的光照强度变暗时可以作为提醒用户眼睛应当适当远离桌面提示操作。
以光线闪烁变化提示操作为例,当台灯的光线变为闪烁时可以作为提醒用户需要适当的休息提示操作。
在具体实施过程中,还可以通过设置的提示音装置或震动装置实现状态调整提示操作。
在本发明实施例中,还可以根据不同用户的习惯差异,通过智能处理模块对图像采集装置采集的图像信息中的人脸进行识别,对比预先存储的历史数据记录不同用户的使用、操作习惯,提供个性化的服务,从而做到每个用户能有独特的定制化设定,提升用户的使用体验。
采用本发明所述的基于台灯的用户状态调整装置,能够通过图像分析技术对提取用户的人脸特征进行准确的分析,提高用户当前状态判定的准确性,从而及时提醒用户调整坐姿和提高注意力。
虽然,上文中已经用一般性说明及具体实施例对本发明作了详尽的描述,但在本发明基础上,可以对之作一些修改或改进,这对本领域技术人员而言是显而易见的。因此,在不偏离本发明精神的基础上所做的这些修改或改进,均属于本发明要求保护的范围。

Claims (10)

1.一种基于台灯的用户状态调整方法,其特征在于,包括:
通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息;
从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型;
根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
2.根据权利要求1所述的基于台灯的用户状态调整方法,其特征在于,所述人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种。
3.根据权利要求2所述的基于台灯的用户状态调整方法,其特征在于,所述根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型,具体包括:
当提取的所述人脸特征信息为五官位置的特征信息时,通过提取对应所述五官位置的特征点信息,确定所述用户的人脸偏移角度值,将所述人脸偏移角度值与预设的角度偏移值进行比对,若所述人脸偏移角度值大于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态不规范,若所述人脸偏移角度值小于或等于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态规范;
当提取的所述人脸特征信息为眼部闭合程度的特征信息时,根据所述眼部闭合程度的特征信息,确定所述用户的眼部闭合度值,将所述眼部闭合度值与预设的眼部闭合度值进行比对,若所述眼部闭合度值大于预设的眼部闭合度值,则确定所述用户在使用所述台灯过程中的当前状态类型为清醒状态,若所述眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为疲劳状态;
当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值,将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
4.根据权利要求1所述的基于台灯的用户状态调整方法,其特征在于,还包括:
从所述图像信息中提取所述用户的瞳孔大小信息;
通过台灯上预设的光照感应装置获取用户在使用所述台灯过程中的周围环境的光线强弱信息;
根据所述瞳孔大小信息和所述周围环境的光线强弱信息,控制所述台灯执行相应的光照强弱调整操作。
5.根据权利要求1所述的基于台灯的用户状态调整方法,其特征在于,所述状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
6.一种基于台灯的用户状态调整装置,其特征在于,包括:
图像信息获取单元,用于通过台灯上预设的图像采集装置获取用户在使用所述台灯过程中的图像信息;
当前状态类型确定单元,用于从所述图像信息中提取所述用户的人脸特征信息,根据所述人脸特征信息,确定所述用户在使用所述台灯过程中的当前状态类型;
提示单元,用于根据所述当前状态类型,控制所述台灯执行相应的状态调整提示操作。
7.根据权利要求6所述的基于台灯的用户状态调整装置,其特征在于,所述人脸特征信息包括五官位置的特征信息、眼部闭合程度的特征信息以及瞳孔位置偏移的特征信息中的至少一种。
8.根据权利要求7所述的基于台灯的用户状态调整装置,其特征在于,所述当前状态类型确定单元具体用于:
当提取的所述人脸特征信息为五官位置的特征信息时,通过提取对应所述五官位置的特征点信息,确定所述用户的人脸偏移角度值,将所述人脸偏移角度值与预设的角度偏移值进行比对,若所述人脸偏移角度值大于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态不规范,若所述人脸偏移角度值小于或等于预设的角度偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为坐姿状态规范;
当提取的所述人脸特征信息为眼部闭合程度的特征信息时,根据所述眼部闭合程度的特征信息,确定所述用户的眼部闭合度值,将所述眼部闭合度值与预设的眼部闭合度值进行比对,若所述眼部闭合度值大于预设的眼部闭合度值,则确定所述用户在使用所述台灯过程中的当前状态类型为清醒状态,若所述眼部闭合度值小于或等于预设的眼部闭合度值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为疲劳状态;
当提取的所述人脸特征信息为瞳孔位置偏移的特征信息时,根据所述瞳孔位置偏移的特征信息,确定所述用户的瞳孔位置偏移值,将所述瞳孔位置偏移值与预设的瞳孔位置偏移值进行比对,若所述瞳孔位置偏移值大于预设的瞳孔位置偏移值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力分散状态,若所述瞳孔位置偏移值小于或等于预设的瞳孔位置偏移值并且持续时间满足预定的时间阈值,则确定所述用户在使用所述台灯过程中的当前状态类型为注意力集中状态。
9.根据权利要求6所述的基于台灯的用户状态调整装置,其特征在于,所述状态调整提示操作包括光线强弱变化提示操作、光线色调变化提示操作以及光线闪烁变化提示操作中的至少一种方式。
10.根据权利要求6所述的基于台灯的用户状态调整装置,其特征在于,还包括:
瞳孔大小信息提取单元,用于从所述图像信息中提取所述用户的瞳孔大小信息;
光线强弱信息获取单元,用于通过台灯上预设的光照感应装置获取用户在使用所述台灯过程中的周围环境的光线强弱信息;
光照强弱调整单元,用于根据所述瞳孔大小信息和所述周围环境的光线强弱信息,控制所述台灯执行相应的光照强弱调整操作。
CN201910389861.6A 2019-05-10 2019-05-10 一种基于台灯的用户状态调整方法和装置 Pending CN110119708A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910389861.6A CN110119708A (zh) 2019-05-10 2019-05-10 一种基于台灯的用户状态调整方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910389861.6A CN110119708A (zh) 2019-05-10 2019-05-10 一种基于台灯的用户状态调整方法和装置

Publications (1)

Publication Number Publication Date
CN110119708A true CN110119708A (zh) 2019-08-13

Family

ID=67522073

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910389861.6A Pending CN110119708A (zh) 2019-05-10 2019-05-10 一种基于台灯的用户状态调整方法和装置

Country Status (1)

Country Link
CN (1) CN110119708A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111160104A (zh) * 2019-12-02 2020-05-15 中国联合网络通信集团有限公司 一种注意力分析方法和装置
CN117042257A (zh) * 2023-09-21 2023-11-10 永林电子股份有限公司 一种多级调光的led灯调节控制方法、装置及其电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016117593A1 (ja) * 2015-01-20 2016-07-28 バルミューダ株式会社 照明装置
CN107731201A (zh) * 2017-10-31 2018-02-23 武汉华星光电技术有限公司 屏幕亮度调节方法及调节装置
CN108601133A (zh) * 2018-02-12 2018-09-28 甄十信息科技(上海)有限公司 一种智能台灯及基于智能台灯的坐姿纠正方法
CN109002757A (zh) * 2018-06-04 2018-12-14 上海商汤智能科技有限公司 驾驶管理方法和系统、车载智能系统、电子设备、介质
CN109340607A (zh) * 2018-10-23 2019-02-15 电子科技大学 一种防视疲劳多功能台灯

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016117593A1 (ja) * 2015-01-20 2016-07-28 バルミューダ株式会社 照明装置
CN107731201A (zh) * 2017-10-31 2018-02-23 武汉华星光电技术有限公司 屏幕亮度调节方法及调节装置
CN108601133A (zh) * 2018-02-12 2018-09-28 甄十信息科技(上海)有限公司 一种智能台灯及基于智能台灯的坐姿纠正方法
CN109002757A (zh) * 2018-06-04 2018-12-14 上海商汤智能科技有限公司 驾驶管理方法和系统、车载智能系统、电子设备、介质
CN109340607A (zh) * 2018-10-23 2019-02-15 电子科技大学 一种防视疲劳多功能台灯

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111160104A (zh) * 2019-12-02 2020-05-15 中国联合网络通信集团有限公司 一种注意力分析方法和装置
CN117042257A (zh) * 2023-09-21 2023-11-10 永林电子股份有限公司 一种多级调光的led灯调节控制方法、装置及其电子设备
CN117042257B (zh) * 2023-09-21 2024-02-06 永林电子股份有限公司 一种多级调光的led灯调节控制方法、装置及其电子设备

Similar Documents

Publication Publication Date Title
CN105022981B (zh) 一种检测人眼健康状态的方法、装置及移动终端
CN110319544A (zh) 环境管理方法、装置和空调
CN107273071A (zh) 电子装置、屏幕调节系统及方法
KR20100016696A (ko) 가상강의의 학습상태 분석시스템 및 이를 이용한 학습코스스케줄링방법
CN107606512A (zh) 一种智能台灯、基于智能台灯提醒用户坐姿的方法及装置
CN112483924B (zh) 带坐姿矫正提醒的ai护眼台灯及其实现方法
CN110119708A (zh) 一种基于台灯的用户状态调整方法和装置
CN106406504B (zh) 人机交互界面的氛围渲染系统与方法
CN109584522A (zh) 台灯及其控制方法、计算机存储介质
CN110063736B (zh) 基于MOD-Net网络的眼动参数监测的疲劳检测及促醒系统
CN109240504A (zh) 控制方法、模型训练方法、装置及电子设备
TW201737237A (zh) 電子裝置、螢幕調節系統及方法
CN108960071A (zh) 一种睁眼闭眼状态检测方法
CN111447497A (zh) 智能播放设备及其节能控制方法
CN105025175A (zh) 显示装置及显示控制方法
CN208285607U (zh) 照明系统及物联网控制系统
CN110232327B (zh) 一种基于梯形级联卷积神经网络的驾驶疲劳检测方法
CN114093000A (zh) 课堂提示信息的显示方法及装置
CN109657432A (zh) 监管儿童使用智能设备的方法、介质、设备及系统
CN110425443A (zh) 一种智能台灯
CN204859299U (zh) 显示装置
CN110765911A (zh) 闹钟关闭方法及装置
Parameshachari et al. Communication Through Smart Glasses-An IOT Based Eye Blink Detection
US12080104B2 (en) Classification method
CN110167238A (zh) 一种智能家居的照明控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190813