CN102917120A

CN102917120A - 移动终端显示信息的刷新方法及移动终端

Info

Publication number: CN102917120A
Application number: CN2012103535752A
Authority: CN
Inventors: 党志立
Original assignee: Beijing Beny Wave Science and Technology Co Ltd
Current assignee: Beijing Beny Wave Science and Technology Co Ltd
Priority date: 2012-09-20
Filing date: 2012-09-20
Publication date: 2013-02-06

Abstract

本发明提供一种移动终端显示信息的刷新方法及移动终端。该方法包括：采集用户的面部图像；根据所述用户的面部图像，获取用户的表情；当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。本发明技术方案可基于用户的面部表情变化对移动终端显示的信息进行刷新，可提高用户使用移动终端时的用户体验。

Description

移动终端显示信息的刷新方法及移动终端

技术领域

本发明涉及移动终端显示技术，尤其涉及一种移动终端显示信息的刷新方法及移动终端。

背景技术

随着移动通信技术的发展进步，手机、MP3、PAD等移动设备已经成为人们生活工作中不可缺少的一部分。人们通常会在这些移动设备上浏览信息，由于移动设备通常是用户个人的手持设备，属于个人专用，因此，如何提高移动终端的用户体验，对用户来说非常重要。

目前，移动终端在进行信息展示时，例如微博等网页的信息显示时，由于微博的实时更新特性，使得用户在浏览微博时，需要经常的去刷新微博，而现有在对微博等显示的信息进行刷新时，通常是由用户通过菜单选择方式，对当前显示的信息进行刷新，例如，用户可通过按压按键或在触摸屏的手势动作，在移动终端的显示屏上选择相应的菜单，从而对当前显示的微博信息进行刷新。

但是，这种对于用户通过按键选择或触摸选择菜单进行信息刷新的方式，需要用户频繁的手动输入，导致信息刷新方式比较单一，用户的体验较差。

发明内容

本发明提供一种移动终端显示信息的刷新方法及移动终端，可克服现有采用按键或触摸选择菜单进行信息刷新所存在的用户体验性较差的问题。

本发明提供一种移动终端显示信息的刷新方法，包括：

采集用户的面部图像；

根据所述用户的面部图像，获取用户的表情；

当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

本发明另提供一种移动终端，包括：

图像采集模块，用于采集用户的面部图像；

表情获取模块，用于根据所述用户的面部图像，获取用户的表情；

信息刷新模块，用于当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

本发明提供的移动终端显示信息的刷新方法及移动终端，通过采集用户的面部图像来获得用户的面部表情，并基于用户的面部表情变化，来刷新移动终端当前的显示信息，可有效提高显示信息刷新的多样性，提高用户使用移动终端的用户体验，可适用于微博等实时更新较强的信息显示的刷新应用中。

附图说明

图1为本发明实施例一提供的移动终端显示信息的刷新方法的流程示意图；

图2为本发明实施例二提供的移动终端显示信息的刷新方法的流程示意图；

图3为本发明实施例三提供的移动终端显示信息的刷新方法的流程示意图；

图4为本发明实施例四提供的移动终端的结构示意图；

图5为本发明实施例五提供的移动终端的结构示意图。

具体实施方式

图1为本发明实施例一提供的移动终端显示信息的刷新方法的流程示意图。本实施例可基于用户的面部表情，对移动终端当前显示的信息进行刷新，具体地，如图1所示，本实施例移动终端显示信息的刷新方法可包括如下步骤：

步骤101、采集用户的面部图像；

步骤102、根据所述用户的面部图像，获取用户的表情；

步骤103、当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

实际应用中，移动终端上可在网页等信息显示时，例如显示微博时，移动终端就可以执行上述步骤101-步骤103，以实时获取用户的面部表情，并在用户的表情产生变化时，刷新当前显示的信息。

本领域技术人员可以理解，所述的用户的表情，具体可以是嘴的张开或闭合，眼睛的张开和闭合，严肃表情或笑的表情等。所谓的用户的表情产生变化，可以是指上述一种表情的变化，或者两种以上表情的变化等。

本实施例提供的移动终端显示信息的刷新方法，通过采集用户的面部图像来获得用户的面部表情，并基于用户的面部表情变化，来刷新移动终端当前的显示信息，可有效提高显示信息刷新的多样性，提高用户使用移动终端的用户体验，可适用于微博等实时更新较强的信息显示的刷新应用中。

图2为本发明实施例二提供的移动终端显示信息的刷新方法的流程示意图。本实施例可基于人脸识别技术获取用户的表情，具体地，如图2所示，本实施例显示方法包括如下步骤：

步骤201、采集用户的面部图像；

步骤202、利用人脸识别技术，对所述用户面部图像进行人脸表情识别，获得用户的表情；

步骤203、当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

上述步骤201中，可通过移动终端上设置的图像采集装置，例如摄像头来采集用户的面部图像。

上述步骤202中，具体可通过采用传统的人脸识别技术，以确定人脸表情。其中，人脸识别技术可包括人脸表情库的建立和人脸表情的识别，其中，人脸表情库的建立可采用美国CMU机器人研究所和心理学系共同建立的人脸表情库（Cohn-Kanade AU-Coded Facial Expression Image Database，CKACFEID)，或者采用日本ATR建立的日本女性表情数据库(JAFFE)；而人脸表情识别可包括人脸图像获取、图像预处理、图像特征提取以及分类判别，其中，本实施例中通过移动终端中的摄像头采集人脸图像，图像预处理主要是对图像的大小和灰度的归一化处理，图像特征提取可采用几何特征、统计特征、频率域特征和运动特征等的提取，图像分类判别可采用线性分类器、神经网络分类器、支持向量机（SVM）分类算法、隐马尔可夫模型（HiddenMarkov Models，HMM）等方法来实现。具体地，本实施例人脸表情识别方法可与现有技术相同或类似，在此不再赘述。

本领域技术人员可以理解，移动终端可实时检测用户的面部图像，并实时获得用户的表情，当用户的表情产生变化时，就可以刷新当前显示的信息，例如微博信息等。

实际应用中，为避免信息的频繁刷新，上述步骤203具体可在预设时间段内，所述用户的表情发生变化时，对所述移动终端当前显示的信息进行刷新。具体地，移动终端只有在一定时间间隔检测到用户的表情产生变化时，才刷新当前显示的信息，否则就不做刷新。

图3为本发明实施例三提供的移动终端显示信息的刷新方法的流程示意图。本实施例具体可通过获取人脸的面部特征信息，并基于移动终端中预存的表情与面部特征信息对应关系表来获取人脸表情，具体地，如图3所示，本实施例显示方法包括如下步骤：

步骤301、采集用户的面部图像；

步骤302、根据所述用户的面部图像，对所述用户的面部图像进行识别，获得用户的面部特征信息；

步骤303、从表情与面部特征信息对应关系表中，查询得到与所述用户的面部特征信息对应的表情，所述表情即为用户的表情；

步骤304、当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

本实施例中，可在移动终端中预先设置用户在不同表情下的面部特征信息，并将面部特征信息与表情对应，获得表情与面部特征信息对应关系表。具体地，可包括：采集用户在不同表情下的面部特征信息，得到表情与面部特征信息对应关系表。

实际应用中，用户在第一次使用移动终端基于表情来进行信息显示时，可在移动终端上设置表情与面部特征信息对应关系表，具体地，用户可在移动终端上显示的用户自定义菜单，用户可在该自定义菜单的引导下，定义不同表情，例如张嘴和闭嘴时的表情、睁眼和闭眼时的表情、笑和严肃时的表情等，同时，用户可在不同表情下作出相应的面部表情，此时，移动终端就可以通过摄像头采集用户作出的这些表情，并可提取相应的面部特征信息存储起来，并将这些面部特征信息与相应的表情对应起来，得到表情与面部特征信息对应关系表。

本实施例中，用户的面部特征信息，具体可以是用户面部眼睛的位置信息和眼睛形状信息，用户面部嘴巴位置信息和嘴巴形状信息，用户面部脸庞位置信息和脸庞形状信息（该信息可体现用户是笑的表情或严肃的表情）。本领域技术人员可以理解，人脸在不同面部表情下，上述的人脸面部特征信息是有所不同的，因此，通过采集这些面部特征信息，可以准确地确定用户的面部表情。本领域技术人员可以理解，本实施例中用户的面部特征信息的提取具体可采用传统人脸识别技术来获得，在此不再赘述。

本实施例中，对于使用移动终端的用户而言，由于用户的面部图像通常是完整的，且不会有其他干扰，而且，预设建立的表情与面部特征信息对应关系表中的面部特征信息也是基于用户个人采集的，因此，通过这种方式获得的用户的面部表情更加准确。此外，本实施例基于表情与面部特征信息对应关系表来获取用户的面部表情，使得表情的识别更加简单，可提高用户表情的识别效率，有效适用于移动终端这种面部表情的识别场合。

本领域技术人员可以理解，假设用户预设设定用户的表情包括：张嘴时的表情、闭嘴时的表情、睁眼时的表情、闭眼时的表情、笑时的表情和严肃时的表情，同时，采集各表情下用户的面部特征信息，并一一对应；那么移动终端检测到用户的面部表情同时由张嘴和睁眼变化为闭嘴和闭眼时，就可确定用户的表情产生变化，就可以对当前显示的信息进行刷新；或者，也可以在表情由笑的表情变化为严肃的表情时，对显示信息进行刷新；或者，也可将上述三类表情一起的变化来触发显示信息的刷新。对此，本发明实施例并不做特别限制。

本领域技术人员可以理解，本实施例中所述的移动终端具体可以是指手机、掌上电脑、平板电脑、笔记本等。

图4为本发明实施例四提供的移动终端的结构示意图。如图4所示，本实施例移动终端包括图像采集模块1、表情获取模块2和信息刷新模块3，其中：

图像采集模块1，用于采集用户的面部图像；

表情获取模块2，用于根据所述用户的面部图像，获取用户的表情；

信息刷新模块3，用于当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新。

本发明实施例移动终端可基于用户的面部表情来进行信息的刷新，可有效提高用户使用移动终端的用户体验，其具体实现可参见上述本发明方法实施例的说明，在此不再赘述。

图5为本发明实施例五提供的移动终端的结构示意图。本实施例中，如图5所示，上述图4中的表情获取模块2具体可包括面部特征获取单元21和面部表情获取单元22，其中：

面部特征获取单元21，用于根据所述用户的面部图像，对所述用户的面部图像进行识别，获得用户的面部特征信息；

面部表情获取单元22，用于从表情与面部特征信息对应关系表中，查询得到与所述用户的面部特征信息对应的表情，所述表情即为用户的表情。

如图5所示，本实施例中移动终端还可包括表情与面部特征信息对应关系建立模块4，用于采集用户在不同表情下的面部特征信息，得到表情与面部特征信息对应关系表。

本实施例中，信息刷新模块3具体可用于在预设时间段内，用户的表情发生变化时，对移动终端当前显示的信息进行刷新，以避免频繁对当前显示信息进行刷新。

本实施例移动终端可基于表情与面部特征信息来获取用户的面部表情，其具体实现可参见上述本发明方法实施例三的说明，在此不再赘述。

此外，上述图4所示的表情获取模块3也可利用人脸识别技术，对所述用户面部图像进行人脸表情识别，获得用户的表情。其具体实现可参见上述本发明方法实施例二的说明，在此不再赘述。

本领域技术人员可以理解，上述本发明实施例提供的移动终端中的各功能模块可集成在现有移动终端中，并可以单独的移动终端的信息显示装置集成在移动终端中，例如可以单独的处理器集成在移动终端中，以在传统移动终端已具备的功能基础上，可通过上述各功能模块实现基于用户的面部表情进行信息的显示。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims

1.一种移动终端显示信息的刷新方法，其特征在于，包括：

采集用户的面部图像；

根据所述用户的面部图像，获取用户的表情；

2.根据权利要求1所述的移动终端显示信息的刷新方法，其特征在于，所述根据所述用户的面部图像，获取用户的表情包括：

利用人脸识别技术，对所述用户面部图像进行人脸表情识别，获得用户的表情。

3.根据权利要求1所述的移动终端显示信息的刷新方法，其特征在于，所述根据所述用户的面部图像，获取用户的表情包括：

根据所述用户的面部图像，对所述用户的面部图像进行识别，获得用户的面部特征信息；

从表情与面部特征信息对应关系表中，查询得到与所述用户的面部特征信息对应的表情，所述表情即为用户的表情。

4.根据权利要求3所述的移动终端显示信息的刷新方法，其特征在于，还包括：

采集用户在不同表情下的面部特征信息，得到所述表情与面部特征信息对应关系表。

5.根据权利要求1-4任一所述的移动终端显示信息的刷新方法，其特征在于，所述当用户的表情产生变化时，对所述移动终端当前显示的信息进行刷新包括：

在预设时间段内，所述用户的表情发生变化时，对所述移动终端当前显示的信息进行刷新。

6.一种移动终端，其特征在于，包括：

图像采集模块，用于采集用户的面部图像；

7.根据权利要求6所述的移动终端，其特征在于，所述表情获取模块，具体用于利用人脸识别技术，对所述用户面部图像进行人脸表情识别，获得用户的表情。

8.根据权利要求6所述的移动终端，其特征在于，所述表情获取模块包括：

面部特征获取单元，用于根据所述用户的面部图像，对所述用户的面部图像进行识别，获得用户的面部特征信息；

面部表情获取单元，用于从表情与面部特征信息对应关系表中，查询得到与所述用户的面部特征信息对应的表情，所述表情即为用户的表情。

9.根据权利要求8所述的移动终端，其特征在于，还包括：

表情与面部特征信息对应关系建立模块，用于采集用户在不同表情下的面部特征信息，得到所述表情与面部特征信息对应关系表。

10.根据权利要求6-9任一所述的移动终端，其特征在于，所述信息刷新模块，具体用于在预设时间段内，所述用户的表情发生变化时，对所述移动终端当前显示的信息进行刷新。