发明内容
本发明的主要目的在于提供一种智能提醒方法和终端,旨在提高终端的灵活性,满足用户对终端的主动交流要求,提升用户体验。
为达以上目的,本发明提出一种智能提醒方法,包括步骤:
获取人脸图像;
根据所述人脸图像识别出人物的状态信息;
输出所述状态信息。
优选地,所述状态信息为情绪状态信息,所述根据人脸图像识别出人物的状态信息包括:
从所述人脸图像中提取出面部特征;
从表情特征库中选出与所述面部特征相匹配的表情特征,据此识别出与所述表情特征相对应的情绪状态信息。
优选地,所述状态信息为精神状态信息,所述根据人脸图像识别出人物的状态信息包括:
从所述人脸图像中提取出眼部信息;
根据所述眼部信息识别出人物的精神状态信息;
其中,所述眼部信息包括瞳孔大小信息、眨眼次数信息或/和闭眼时间信息。
优选地,所述获取人脸图像包括:调用摄像头获取人脸图像或获取外设传输过来的人脸图像。
优选地,所述输出所述状态信息包括:以图像、文字、声音或/和指示灯方式输出所述状态信息。
本发明同时提出一种终端,包括获取模块、识别模块和输出模块,其中:
获取模块,用于获取人脸图像;
识别模块,用于根据所述人脸图像识别出人物的状态信息;
输出模块,用于输出所述状态信息。
优选地,所述状态信息为情绪状态信息,所述识别模块用于:从所述人脸图像中提取出面部特征,从表情特征库中选出与所述面部特征相匹配的表情特征,据此识别出与所述表情特征相对应的情绪状态信息。
优选地,所述状态信息为精神状态信息,所述识别模块用于:从所述人脸图像中提取出眼部信息,根据所述眼部信息识别出人物的精神状态信息;其中,所述眼部信息包括瞳孔大小信息、眨眼次数信息或/和闭眼时间信息。
优选地,所述获取模块用于:调用摄像头获取人脸图像或获取外设传输过来的人脸图像。
优选地,所述输出模块用于:以图像、文字、声音或/和指示灯方式输出所述状态信息。
本发明所提供的一种智能提醒方法,通过获取人脸图像来快速识别出用户或他人的情绪状态、精神状态等状态信息,并及时主动的输出该状态信息来提醒用户,实现了人机交流,提高了终端的灵活性,满足了用户对终端的主动交流要求,提高了终端的智能化和人性化程度。用户或对方用户可以根据提醒及时调整自己状态,提升了用户体验。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参见图1,提出本发明的智能提醒方法一实施例,所述智能提醒方法包括以下步骤:
步骤S101:获取人脸图像
终端利用现有的人脸识别技术,可以调用摄像头采集人脸图像并获取,也可以获取从外设(外部设备)传输过来的人脸图像,还可以从本地存储的视频或图片中获取人脸图像。
步骤S102:根据人脸图像识别出人物的状态信息
所述状态信息可以是情绪状态信息及精神状态信息等等。其中,情绪状态信息表示该人物的喜、怒、哀、乐等情绪状态,精神状态信息则表示该人物是否疲倦,以及该人物的疲倦程度等。
根据人脸图像识别出人物的情绪状态信息的具体流程如下:
步骤S110:从人脸图像中提取出面部特征
所述面部特征为从人脸图像中提取出的眉毛、眼睛、嘴角等关键部位的特征,如眉毛的弯曲角度或弧度,眼睛的形状或大小,嘴角上翘或下撇的角度或弧度。
步骤S111:从表情特征库中选出与面部特征相匹配的表情特征
表情特征库中预存了若干代表人物喜、怒、哀、乐、惊等情绪状态的表情特征,终端将提取出的面部特征与表情特征库中的表情特征进行比较,选出与该面部特征最相匹配的表情特征。如比较面部特征与表情特征中眉毛的弯曲角度或弧度的相似度是否达到预设阈值,或/和嘴角上翘或下撇的角度或弧度是否达到预设阈值等等。
步骤S112:根据匹配出的表情特征识别出与之相对应的情绪状态信息
每一表情特征对应一情绪状态信息,从而根据匹配出的表情特征获得对应的情绪状态信息。
根据人脸图像识别出人物的精神状态信息的具体流程如下:
步骤S120:从人脸图像中提取出眼部信息
所述眼部信息包括瞳孔信息、眨眼信息、闭眼信息、眼球信息等,如瞳孔大小信息、眨眼次数信息、闭眼时间信息等。
步骤S121:根据眼部信息识别出人物的精神状态信息
可以通过瞳孔信息识别出人物的精神状态信息。具体的,根据瞳孔的大小进行判断,如瞳孔较大或大于某一阈值,则说明精神较佳;如瞳孔较小或小于某一阈值,则说明精神较差,比较疲倦,并根据瞳孔小于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
可以通过眨眼信息识别出人物的精神状态信息。具体的,计算预设时间内人物的眨眼次数,若眨眼次数小于某一阈值,则说明精神较佳;若眨眼次数大于某一阈值,则说明精神较差,比较疲倦,并根据眨眼次数大于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
可以通过闭眼信息识别出人物的精神状态信息。具体的,计算预设时间内人物的累积闭眼时间或者单次闭眼最长时间,若小于某一阈值,则说明精神较佳;如大于某一阈值,则说明精神较差,比较疲倦,并根据闭眼时间大于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
也可以将前述眼部信息中的任意两个或多个组合起来综合判断出人物的精神状态信息。
步骤S103:输出人物的状态信息
终端可以以图像、文字、声音或/和指示灯方式输出人物的状态信息以提醒用户自己或他人当时的情绪状态或精神状态等状态信息。
例如,通过显示屏显示代表喜、怒、哀、乐、惊等情绪状态的表情图像或文字信息,或者代表精神较佳、不同疲倦等级等精神状态的表情图像或文字信息;通过声音播放装置播放代表不同的情绪状态或精神状态等人物状态信息的声音;通过显示不同颜色的指示灯或控制指示灯以不同的频率进行闪烁,来代表不同的情绪状态或精神状态等人物状态信息。也可以综合前述两种或多种方式来输出状态信息。
本发明的智能提醒方法可以应用于视频录制、视频观看、图像浏览、视频聊天、视频通话等应用场景,或者摄像头启动后就自动开启智能提醒功能。
例如,当用户正在进行视频聊天时,通过摄像头获取用户的人脸图像,并根据人脸图像识别出用户当前的情绪状态、精神状态等状态信息,并及时以图像、文字、声音或/和指示灯方式输出该状态信息以提醒用户。同时,还可以获取对方终端传输过来的对方用户的人脸图像,根据该人脸图像识别出对方用户当前的情绪状态、精神状态等状态信息,并及时输出给本端用户或通过聊天框自动输出至对方用户。
从而,本发明的智能提醒方法,通过获取人脸图像来快速识别出用户或他人的情绪状态、精神状态等状态信息,并及时主动的输出该状态信息来提醒用户,实现了人机交流,提高终端的灵活性,满足了用户对终端的主动交流要求,提高了终端的智能化和人性化程度。用户或对方用户可以根据提醒及时调整自己状态,提升了用户体验。
参见图4,提出本发明的终端一实施例,所述终端可以是个人电脑、手机、平板电脑等。所述终端包括依次连接的获取模块110、识别模块120和输出模块130。
获取模块110:用于获取人脸图像,并发送给识别模块120。获取模块110利用现有的人脸识别技术,可以调用摄像头采集人脸图像并获取,也可以获取从外设传输过来的人脸图像,还可以从本地存储的视频或图片中获取人脸图像。
识别模块120:用于根据人脸图像识别出人物的状态信息,并发送给输出模块130。所述状态信息可以是情绪状态信息、精神状态信息等。其中,情绪状态信息反映人物的喜、怒、哀、乐等情绪状态,精神状态信息反映人物是否疲倦及疲倦程度等精神状态。
根据人脸图像识别出人物的情绪状态信息时,首先,识别模块120从人脸图像中提取出面部特征,所述面部特征为从人脸图像中提取出的眉毛、眼睛、嘴角等关键部位的特征。然后,识别模块120从表情特征库中选出与面部特征相匹配的表情特征,具体的,表情特征库中预存了若干代表人物喜、怒、哀、乐、惊等情绪状态的表情特征,识别模块120将提取出的面部特征与表情特征库中的表情特征进行比较,选出与该面部特征最相匹配的表情特征。每一表情特征对应一情绪状态信息,因此,最后识别模块120根据匹配出的表情特征识别出与之相对应的情绪状态信息。
根据人脸图像识别出人物的精神状态信息时,首先,识别模块120从人脸图像中提取出眼部信息,所述眼部信息包括瞳孔信息、眨眼信息、闭眼信息、眼球信息等,如瞳孔大小信息、眨眼次数信息、闭眼时间信息等。然后,识别模块120根据眼部信息识别出人物的精神状态信息。
识别模块120可以通过瞳孔信息识别出人物的精神状态信息。具体的,识别模块120根据瞳孔的大小进行判断,如瞳孔较大或大于某一阈值,则判定精神较佳;如瞳孔较小或小于某一阈值,则判定精神较差,比较疲倦,并根据瞳孔小于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
识别模块120也可以通过眨眼信息识别出人物的精神状态信息。具体的,识别模块120计算预设时间内人物的眨眼次数,若眨眼次数小于某一阈值,则判定精神较佳;若眨眼次数大于某一阈值,则判定精神较差,比较疲倦,并根据眨眼次数大于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
识别模块120还可以通过闭眼信息识别出人物的精神状态信息。具体的,识别模块120计算预设时间内人物的累积闭眼时间或者单次闭眼最长时间,若小于某一阈值,则判定精神较佳;如大于某一阈值,则判定精神较差,比较疲倦,并根据闭眼时间大于预设的不同阈值,来判断人物的疲倦程度或疲倦等级。
识别模块120还可以将前述眼部信息中的任意两个或多个组合起来综合判断出人物的精神状态信息。
输出模块130:用于输出人物的状态信息。
输出模块130可以以图像、文字、声音或/和指示灯方式输出人物的状态信息以提醒用户自己或他人当时的情绪状态或精神状态等状态信息。
例如,输出模块130通过显示屏显示代表喜、怒、哀、乐、惊等情绪状态的表情图像或文字信息,或者代表精神较佳、不同疲倦等级等精神状态的表情图像或文字信息;通过声音播放装置播放代表不同的情绪状态或精神状态等人物状态信息的声音;通过显示不同颜色的指示灯或控制指示灯以不同的频率进行闪烁,来代表不同的情绪状态或精神状态等人物状态信息。也可以综合前述两种或多种方式来输出状态信息。
据此,本发明的终端,通过获取人脸图像来快速识别出用户或他人的情绪状态、精神状态等状态信息,并及时主动的输出该状态信息来提醒用户,实现了人机交流,提高终端的灵活性,满足了用户对终端的主动交流要求,提高了终端的智能化和人性化程度。用户或对方用户可以根据提醒及时调整自己状态,提升了用户体验。
本领域普通技术人员可以理解,实现上述实施例方法中的全部或部分步骤可以通过程序来控制相关的硬件完成,所述的程序可以存储于一计算机可读取存储介质中,所述的存储介质可以是ROM/RAM、磁盘、光盘等。
以上参照附图说明了本发明的优选实施例,并非因此局限本发明的权利范围。本领域技术人员不脱离本发明的范围和实质内所作的任何修改、等同替换和改进,均应在本发明的权利范围之内。