CN103049084A - 一种可根据人脸方向来调整显示方向的电子设备及其方法 - Google Patents

一种可根据人脸方向来调整显示方向的电子设备及其方法 Download PDF

Info

Publication number
CN103049084A
CN103049084A CN2012105497844A CN201210549784A CN103049084A CN 103049084 A CN103049084 A CN 103049084A CN 2012105497844 A CN2012105497844 A CN 2012105497844A CN 201210549784 A CN201210549784 A CN 201210549784A CN 103049084 A CN103049084 A CN 103049084A
Authority
CN
China
Prior art keywords
face
user
display
people
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105497844A
Other languages
English (en)
Other versions
CN103049084B (zh
Inventor
徐浩
任义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guowei Group Shenzhen Co ltd
Original Assignee
Shenzhen State Micro Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen State Micro Technology Co Ltd filed Critical Shenzhen State Micro Technology Co Ltd
Priority to CN201210549784.4A priority Critical patent/CN103049084B/zh
Publication of CN103049084A publication Critical patent/CN103049084A/zh
Application granted granted Critical
Publication of CN103049084B publication Critical patent/CN103049084B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种可根据人脸方向来调整显示方向的电子设备，其包括：摄像模块，用于获取用户的画面信息；面部识别模块，用于根据用户的画面信息识别出用户的脸部方位，并定位用户脸部特征与显示屏的相对方向；显示控制模块，根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向，使显示模块的显示的图像方向与用户的观看方向一致；和显示模块，用于显示图像。本发明的电子设备可根据用户的脸部朝向来调整显示屏幕的显示方向。本发明还提供一种根据人脸方向来调整显示方向的方法。

Description

一种可根据人脸方向来调整显示方向的电子设备及其方法
技术领域
本发明涉及电子设备领域，尤其涉及一种可根据人脸方向来调整显示方向的电子设备，还涉及一种可根据人脸方向来调整显示方向的方法。
背景技术
电子设备的摄像功能使用简单且用途十分广泛，由于个人的喜好对电子设备的摆放位置和方向的不同，人们希望电子设备的屏幕被横向或竖向设置。然而现有电子设备都只能通过重力感应装置、陀螺仪或手动控制来调整显示方向，在无重力的太空或者在在倾斜的情况下较难实现方向的判断。在使用的过程中，需要使电子设备的屏幕的显示方向与人脸的位置相适应。而且，当电子设备的方向不变而使用者由于某种需要改变脸部朝向（如侧脸）来使用电子设备时，会导致使用者由于不是出于最佳的观看方位而眼睛疲劳或无法看清显示屏幕。
因此，需要一种可根据人脸方向来调整显示方向的电子设备。
发明内容
本发明的目的是提供一种可根据人脸方向来调整显示方向的电子设备。
为解决本发明的技术问题，本发明公开一种可根据人脸方向来调整显示方向的电子设备，其包括：摄像模块，用于获取用户的画面信息；面部识别模块，用于根据用户的画面信息识别出用户的脸部方位，并定位用户脸部特征与显示屏的相对方向；显示控制模块，根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向，使显示模块的显示的图像方向与用户的观看方向一致；和显示模块，用于显示图像。
其中，用户的脸部特征包括眼睛、鼻子、嘴区域的位置和特征。
本发明还提供一种根据人脸方向来调整显示方向的方法，其包括：
获取用户的画面信息；
识别用户的人脸区域及面部特征；
根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向。
其中，所述识别用户的人脸区域及面部特征的步骤进一步包括：
寻找所有可能的人脸候选区域；
从各候选区域中确定人脸的区域；
在人脸区域内采用边缘检测算法进一部确定人眼、鼻子嘴等器官的位置。
其中，所述边缘检测算法包括如下图像处理过程：本地直方图归一化、平滑、二值化、跟踪、特定提取。
其中，识别用户的人脸区域及面部特征后，当用户旋转90度、180度或270度面对显示屏时，将显示图像的所有象素点相应的旋转90度、180度或270度。
采用本发明的设备和方法，可使得显示屏幕的根据用户人脸的方位自动调整，使用户在任意角度观看时都能看到最适宜观看的显示界面，提升了用户体验。
附图说明
图1是本发明实施例提供的可根据人脸识别来调整显示方向的电子设备的原理框图。
图2是本发明实施例提供的基于经典镶嵌图的系统总体框图。
图3是本发明实施例提供的人脸的四分图。
图4是本发明实施例提供的确定人脸位置的流程图。
图5是本发明实施例提供的边缘检测算法方框图。
图6—11是本发明实施例提供的实现图像旋转的图形。
具体实施方式
如图1所示，本发明提出一种通过可通过面部识别技术确定显示方向的电子设备，其包括：摄像模块，用于获取使用该电子设备人员的信息；面部识别模块，所述面部识别模块的接收来自摄像模块拍摄的用户信息，并对所述用户信息进行人脸识别，定位用户脸部特征（眼睛、鼻子、嘴区域的位置和特征）与显示屏的相对方向；显示控制模块，所述显示控制模块的接收来自面部识别模块定位的面部信息，根据面部特征与显示屏的相对方向，显示屏幕的显示方向进行旋转；显示模块，用于显示图像。
所述面部识别方法包括以下步骤：启动电子设备的摄像功能获取用户信息；寻找所有可能的人脸候选区域；从各候选区域中确定人脸的区域；在人脸区域内采用改进的边缘检测算法进一部确定人眼、嘴等器官的位置。面部识别完成后，进一步包括根据面部的朝向调整显示方向的步骤，从而使得显示方向总是人眼观看的方向。
本发明实现面部识别的方法主要基于特征的人脸检测方法。该方法主要是利用人脸的明显特征，如几何特征、肤色、纹理等，将人脸图像视为一个高维向量，从而将人脸检测问题转化为高维空间中分布信号的检测问题。该方法源于这样一个视觉事实；人类在不同姿态、视角和光照等条件下可以毫不费力地检测出人脸，这说明人脸或人脸的部件可能存在某种在任何条件下具有不变性的特征，利用这种特征就可检测出图像中是否存在人脸。本发明根据象素的灰度和颜色信息等进行图像分割来对人脸特征进行定位。人脸核心区域(眼睛、鼻子、嘴区域)具有独特的灰度分布特征，根据灰度分布特征可以建立若干规则，应用这些规则就可将检测图像中是否存在人脸的问题转化为检测该图像中是否存在满足这些规则的图像块的问题。
镶嵌图方法将原始图像的分辨率具有规则地降低后得到图像；他们将原始图像均匀的划分成矩形单元(称为细胞，人脸的五官区域在镶嵌图中占据4*4个细胞的图称为四分图，占据8*8个细胞的镶嵌图称为八分图。人脸在四分图和八分图具有一定的规则，依据这些规则对图像从粗分辨率到高分辨率进行筛选，以样本满足这些规则的程度作为人脸检测的依据。
经典的镶嵌图方法是一个基于知识的三层检测系统，其系统总体框图如图2所示，包括筛选人脸候选区域、确定人脸基本位置和对人脸位置进行分割。
第一层针对四分图，如图3所示，格局如下较简单的规则寻找所有可能的人脸候选区域：(1)面部中心有4个灰度基本相同的细胞；(2)面部上部、外围的8个细胞有基本相同的灰度；(3)四分图中心部分和上部、外围部分平均灰度有较明显的差别。
第二层针对八分图，如图4所示，根据如下规则从各候选区域中确定人脸区域:(1)眼区:本行中有两个灰度极小的值，它们之间的距离2<d<5;本行中有一个灰度极大的值，嘴亮点的位置靠近中心，且极小的值与最亮点的距离0<d<3；(2)鼻区:眼区中心以下一个细胞单位处有一个垂直灰度极小的值，并且在水平方向它也接近于极小值；(3)口区:在鼻区下方一个细胞单位处有一个垂直方向的灰度极小值，并且在水平方向有一个宽度为2~3个细胞的低灰度值区域.。
第三层的具体过程如图5所示，在人脸区域内采用改进的边缘检测算法，具体包括本地直方图归一化、平滑、二值化、跟踪、特定提取等步骤，进一步确定人眼、嘴等器官的位置。
通过上述方法，用户的面部特征能够被识别出来，由于人脸的核心区域（眼睛、鼻子、嘴区域）具有独特的灰度分布特征，因此面部器官和显示屏的相对方向就能被确定如图6。
当用户旋转90度面对显示屏的时候如图7，根据灰度分布特征（眼睛、鼻子、嘴区域具有独特的灰度分布），面部器官和显示屏的相对方向能被确定如图8。将图像所有的象素点（图中每个方格代表一个象素点）相应的旋转90度，这样图像就能按照用户观看的相对角度显示出来如图9。
根据上面的操作，当用户旋转180度或270度面对显示屏的时候，通过软件配置，将图像所有的象素点旋转180度或270度（图10或图11），这样一来无论使用者是站立、平躺、倒立或是各种角度的倾斜都可以按照人类本来的习惯看到图像或视频。
与现有技术相比较，采用本发明的设备和方法，可使得显示屏幕的根据用户人脸的方位自动调整，使用户在任意角度观看时都能看到最适宜观看的显示界面，提升了用户体验。

Claims (6)

1.一种可根据人脸方向来调整显示方向的电子设备，其特征在于包括：
摄像模块，用于获取用户的画面信息；
面部识别模块，用于根据用户的画面信息识别出用户的脸部方位，并定位用户脸部特征与显示屏的相对方向；
显示控制模块，根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向，使显示模块的显示的图像方向与用户的观看方向一致；和
显示模块，用于显示图像。
2.如权利要求1所述的可根据人脸方向来调整显示方向的电子设备，其特征在于，用户的脸部特征包括眼睛、鼻子、嘴区域的位置和特征。
3.一种根据人脸方向来调整显示方向的方法，其特征在于，包括：
获取用户的画面信息；
识别用户的人脸区域及面部特征；
根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向。
4.如权利要求3所述的根据人脸方向来调整显示方向的方法，其特征在于，所述识别用户的人脸区域及面部特征的步骤进一步包括：
寻找所有可能的人脸候选区域；
从各候选区域中确定人脸的区域；
在人脸区域内采用边缘检测算法进一部确定人眼、鼻子嘴等器官的位置。
5.如权利要求4所述的根据人脸方向来调整显示方向的方法，其特征在于，所述边缘检测算法包括如下图像处理过程：本地直方图归一化、平滑、二值化、跟踪、特定提取。
6.如权利要求3所述的根据人脸方向来调整显示方向的方法，其特征在于，识别用户的人脸区域及面部特征后，当用户旋转90度、180度或270度面对显示屏时，将显示图像的所有象素点相应的旋转90度、180度或270度。
CN201210549784.4A 2012-12-18 2012-12-18 一种可根据人脸方向来调整显示方向的电子设备及其方法 Expired - Fee Related CN103049084B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210549784.4A CN103049084B (zh) 2012-12-18 2012-12-18 一种可根据人脸方向来调整显示方向的电子设备及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210549784.4A CN103049084B (zh) 2012-12-18 2012-12-18 一种可根据人脸方向来调整显示方向的电子设备及其方法

Publications (2)

Publication Number Publication Date
CN103049084A true CN103049084A (zh) 2013-04-17
CN103049084B CN103049084B (zh) 2016-01-27

Family

ID=48061753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210549784.4A Expired - Fee Related CN103049084B (zh) 2012-12-18 2012-12-18 一种可根据人脸方向来调整显示方向的电子设备及其方法

Country Status (1)

Country Link
CN (1) CN103049084B (zh)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103353760A (zh) * 2013-04-25 2013-10-16 上海大学 挂墙式适应任意脸部方位的显示界面调节装置及方法
CN104122978A (zh) * 2013-04-24 2014-10-29 国基电子（上海）有限公司 显示画面调整系统及方法
CN104216508A (zh) * 2013-05-31 2014-12-17 中国电信股份有限公司 通过眼动跟踪技术进行功能键操作的方法和装置
CN104423546A (zh) * 2013-08-28 2015-03-18 联芯科技有限公司 一种方向传感实现方法及终端设备
CN104636036A (zh) * 2015-01-12 2015-05-20 青岛海信电器股份有限公司 一种画面显示控制方法及装置
CN104699380A (zh) * 2013-12-09 2015-06-10 联想(北京)有限公司 一种信息处理方法及电子设备
CN104777989A (zh) * 2014-01-13 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
CN104866809A (zh) * 2014-02-25 2015-08-26 腾讯科技（深圳）有限公司 画面播放方法和装置
CN105105938A (zh) * 2015-07-14 2015-12-02 南京邮电大学 基于人脸朝向识别与跟踪的智能轮椅控制方法及系统
CN105242888A (zh) * 2014-07-10 2016-01-13 联想(北京)有限公司 一种系统控制方法及电子设备
CN105320264A (zh) * 2015-05-25 2016-02-10 维沃移动通信有限公司 一种移动终端的显示方法及移动终端
CN105389011A (zh) * 2015-12-01 2016-03-09 深圳还是威健康科技有限公司 一种显示旋转控制方法及智能穿戴设备
CN105573488A (zh) * 2014-10-30 2016-05-11 三星电子株式会社 用于控制电子装置上的屏幕显示的方法和设备
CN106162152A (zh) * 2015-03-30 2016-11-23 联想(北京)有限公司 一种显示方法及电子设备
WO2016192062A1 (en) * 2015-06-03 2016-12-08 Motorola Mobility Llc Determining the orientation of image data based on user facial position
WO2016205979A1 (en) * 2015-06-26 2016-12-29 Intel Corporation Flaw detection and correction in digital images
CN106445157A (zh) * 2016-09-30 2017-02-22 珠海市魅族科技有限公司 一种画面显示方向调整的方法以及装置
CN106569705A (zh) * 2016-10-27 2017-04-19 努比亚技术有限公司 一种内容显示方法及终端
CN109257489A (zh) * 2018-08-23 2019-01-22 维沃移动通信有限公司 一种显示方法及移动终端
CN109445331A (zh) * 2018-10-24 2019-03-08 天津津航计算技术研究所 一种智能显控系统
CN109445735A (zh) * 2018-10-22 2019-03-08 奇酷互联网络科技（深圳）有限公司 显示方向的控制方法、移动终端及计算机存储介质
CN109558842A (zh) * 2018-11-30 2019-04-02 北京七鑫易维信息技术有限公司 一种调整图像显示方向的方法、装置、设备和介质
CN109643154A (zh) * 2016-07-28 2019-04-16 泰雷兹公司 用于控制信息的显示的方法和系统、以及实施该方法的用户终端
CN110864208A (zh) * 2019-11-20 2020-03-06 商丘师范学院 一种具有自动追踪功能的计算机显示器
US10613687B2 (en) 2014-01-13 2020-04-07 Beijing Lenovo Software Ltd. Information processing method and electronic device
CN113168823A (zh) * 2018-12-18 2021-07-23 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质
CN113990214A (zh) * 2021-10-22 2022-01-28 深圳倜傥国际设计有限公司 一种模块化区域可调节展示系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917548A (zh) * 2010-08-11 2010-12-15 无锡中星微电子有限公司 自适应调整画面的摄像装置及方法
CN102081918A (zh) * 2010-09-28 2011-06-01 北京大学深圳研究生院 一种视频图像显示控制方法及视频图像显示器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917548A (zh) * 2010-08-11 2010-12-15 无锡中星微电子有限公司 自适应调整画面的摄像装置及方法
CN102081918A (zh) * 2010-09-28 2011-06-01 北京大学深圳研究生院 一种视频图像显示控制方法及视频图像显示器

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104122978A (zh) * 2013-04-24 2014-10-29 国基电子（上海）有限公司 显示画面调整系统及方法
CN103353760B (zh) * 2013-04-25 2017-01-11 上海大学 适应任意脸部方位的显示界面调节装置及方法
CN103353760A (zh) * 2013-04-25 2013-10-16 上海大学 挂墙式适应任意脸部方位的显示界面调节装置及方法
CN104216508A (zh) * 2013-05-31 2014-12-17 中国电信股份有限公司 通过眼动跟踪技术进行功能键操作的方法和装置
CN104216508B (zh) * 2013-05-31 2017-05-10 中国电信股份有限公司 通过眼动跟踪技术进行功能键操作的方法和装置
CN104423546A (zh) * 2013-08-28 2015-03-18 联芯科技有限公司 一种方向传感实现方法及终端设备
CN104699380A (zh) * 2013-12-09 2015-06-10 联想(北京)有限公司 一种信息处理方法及电子设备
US10613687B2 (en) 2014-01-13 2020-04-07 Beijing Lenovo Software Ltd. Information processing method and electronic device
CN104777989A (zh) * 2014-01-13 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
CN104777989B (zh) * 2014-01-13 2019-03-29 联想(北京)有限公司 一种信息处理方法及电子设备
CN104866809A (zh) * 2014-02-25 2015-08-26 腾讯科技（深圳）有限公司 画面播放方法和装置
CN105242888A (zh) * 2014-07-10 2016-01-13 联想(北京)有限公司 一种系统控制方法及电子设备
CN105573488A (zh) * 2014-10-30 2016-05-11 三星电子株式会社 用于控制电子装置上的屏幕显示的方法和设备
CN105573488B (zh) * 2014-10-30 2020-11-10 三星电子株式会社 用于控制电子装置上的屏幕显示的方法和设备
CN104636036A (zh) * 2015-01-12 2015-05-20 青岛海信电器股份有限公司 一种画面显示控制方法及装置
CN106162152A (zh) * 2015-03-30 2016-11-23 联想(北京)有限公司 一种显示方法及电子设备
CN105320264A (zh) * 2015-05-25 2016-02-10 维沃移动通信有限公司 一种移动终端的显示方法及移动终端
CN105320264B (zh) * 2015-05-25 2019-10-15 维沃移动通信有限公司 一种移动终端的显示方法及移动终端
WO2016192062A1 (en) * 2015-06-03 2016-12-08 Motorola Mobility Llc Determining the orientation of image data based on user facial position
WO2016205979A1 (en) * 2015-06-26 2016-12-29 Intel Corporation Flaw detection and correction in digital images
CN105105938A (zh) * 2015-07-14 2015-12-02 南京邮电大学 基于人脸朝向识别与跟踪的智能轮椅控制方法及系统
CN105389011A (zh) * 2015-12-01 2016-03-09 深圳还是威健康科技有限公司 一种显示旋转控制方法及智能穿戴设备
CN109643154A (zh) * 2016-07-28 2019-04-16 泰雷兹公司 用于控制信息的显示的方法和系统、以及实施该方法的用户终端
CN106445157A (zh) * 2016-09-30 2017-02-22 珠海市魅族科技有限公司 一种画面显示方向调整的方法以及装置
CN106569705A (zh) * 2016-10-27 2017-04-19 努比亚技术有限公司 一种内容显示方法及终端
CN106569705B (zh) * 2016-10-27 2020-06-09 南京秦淮紫云创益企业服务有限公司 一种内容显示方法及终端
CN109257489A (zh) * 2018-08-23 2019-01-22 维沃移动通信有限公司 一种显示方法及移动终端
CN109445735A (zh) * 2018-10-22 2019-03-08 奇酷互联网络科技（深圳）有限公司 显示方向的控制方法、移动终端及计算机存储介质
CN109445331A (zh) * 2018-10-24 2019-03-08 天津津航计算技术研究所 一种智能显控系统
CN109558842A (zh) * 2018-11-30 2019-04-02 北京七鑫易维信息技术有限公司 一种调整图像显示方向的方法、装置、设备和介质
CN113168823A (zh) * 2018-12-18 2021-07-23 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质
CN110864208A (zh) * 2019-11-20 2020-03-06 商丘师范学院 一种具有自动追踪功能的计算机显示器
CN113990214A (zh) * 2021-10-22 2022-01-28 深圳倜傥国际设计有限公司 一种模块化区域可调节展示系统

Also Published As

Publication number Publication date
CN103049084B (zh) 2016-01-27

Similar Documents

Publication Publication Date Title
CN103049084A (zh) 一种可根据人脸方向来调整显示方向的电子设备及其方法
WO2020151489A1 (zh) 基于面部识别的活体检测的方法、电子设备和存储介质
CN103716594B (zh) 基于运动目标检测的全景拼接联动方法及装置
US20160142625A1 (en) Method and system for determining image composition attribute adjustments
US9049397B2 (en) Image processing device and image processing method
US9582731B1 (en) Detecting spherical images
US20150055824A1 (en) Method of detecting a main subject in an image
CN105659200A (zh) 用于显示图形用户界面的方法、设备和系统
CN104463855B (zh) 一种基于频域和空域结合的显著区域检测方法
CN102917232A (zh) 基于人脸识别的3d显示自适应调节方法和装置
JP5756322B2 (ja) 情報処理プログラム、情報処理方法、情報処理装置および情報処理システム
CN105812790B (zh) 图像传感器感光面与光轴垂直度的评测方法及光学测试卡
US20170186170A1 (en) Facial contour recognition for identification
CN107018323A (zh) 控制方法、控制装置和电子装置
CN102084397A (zh) 图像处理设备、方法和程序
CN110472460A (zh) 人脸图像处理方法及装置
CN112183200A (zh) 一种基于视频图像的眼动追踪方法和系统
CN109214350A (zh) 一种光照参数的确定方法、装置、设备及存储介质
CN105335688B (zh) 一种基于视觉图像的飞机机型识别方法
CN109194952B (zh) 头戴式眼动追踪设备及其眼动追踪方法
CN105092589B (zh) 一种胶囊头缺陷检测方法
CN109785439A (zh) 人脸素描图像生成方法及相关产品
US8576212B2 (en) Billboard display system and method
CN111898552B (zh) 一种判别人员关注目标物的方法、装置及计算机设备
CN105913389A (zh) 皮肤异常时的图片处理方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address

Address after: 518000 Guangdong Province Shenzhen Nanshan District High-tech Industrial Park South District High-tech Nandao National Micro-R&D Building 1 Floor West Part, 2 Floors

Patentee after: GUOWEI GROUP (SHENZHEN) Co.,Ltd.

Address before: 518000 2F, Nanshan District new high tech Industrial Park, Shenzhen, Guangdong.

Patentee before: SHENZHEN STATE MICRO TECHNOLOGY Co.,Ltd.

CP03 Change of name, title or address
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160127

CF01 Termination of patent right due to non-payment of annual fee