CN107562199A - 一种页面对象设置方法、装置、电子设备及存储介质 - Google Patents

一种页面对象设置方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN107562199A
CN107562199A CN201710774148.4A CN201710774148A CN107562199A CN 107562199 A CN107562199 A CN 107562199A CN 201710774148 A CN201710774148 A CN 201710774148A CN 107562199 A CN107562199 A CN 107562199A
Authority
CN
China
Prior art keywords
area
page object
human eye
sub
regions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710774148.4A
Other languages
English (en)
Other versions
CN107562199B (zh
Inventor
曹莎
高嘉宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jupiter Technology Co ltd
Original Assignee
Beijing Kingsoft Internet Security Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Internet Security Software Co Ltd filed Critical Beijing Kingsoft Internet Security Software Co Ltd
Priority to CN201710774148.4A priority Critical patent/CN107562199B/zh
Publication of CN107562199A publication Critical patent/CN107562199A/zh
Application granted granted Critical
Publication of CN107562199B publication Critical patent/CN107562199B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例提供一种页面对象设置方法、装置、电子设备及存储介质,其中方法包括如下步骤:识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。采用本发明,可以提高对页面对象操控的便利性和趣味性。

Description

一种页面对象设置方法、装置、电子设备及存储介质
技术领域
本发明涉及电子技术领域,尤其涉及一种页面对象设置方法、装置、电子设备及存储介质。
背景技术
随着科技不断的进步,使得各种移动终端(例如手机、平板电脑、超轻薄笔记本电脑及卫星导航等)不断地推陈出新。现有的移动终端提供了人性化及直觉化的操作界面,因此,多采用触控式技术来控制操作界面上的显示对象以实现对移动终端的操控,例如,通过手指移动操作界面上的贴纸到指定的位置以完成对贴纸的设置。
但这种操控方式使得用户手指一旦离开操作界面即无法执行控制功能,而这往往给用户造成控制上的不便,尤其对某些特殊人群,有诸多不便之处,降低了对页面对象操作的便利性。
发明内容
本发明实施例提供一种页面对象设置方法、装置、电子设备及存储介质,可以解决采用触控式技术操作页面对象导致便利性不足的问题。
本发明实施例第一方面提供了一种页面对象设置方法,包括:
识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;
当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;
分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
可选的,所述识别人脸图像中的目标人眼区域,包括:
通过摄像头采集所述人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
可选的,所述分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,包括:
分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离;
根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
可选的,所述分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离,包括:
分别计算所述各个子区域中所述第一面积与所述第二面积的差值,确定所述差值中的最大值;
确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为所述移动方向,将所述目标子区域的第一面积与所述目标子区域的第二面积的比值设置为所述第一移动距离。
可选的,所述根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数,包括:
基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离;
将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。
可选的,所述识别人脸图像中的目标人眼区域之后,还包括:
对所述目标人眼区域对应的目标人眼图像进行二值化处理;
根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
本发明实施例第二方面提供了一种页面对象设置装置,所述装置包括:
第一面积获取模块,用于识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;
第二面积获取模块,用于当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;
页面对象移动模块,用于分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
可选的,所述第一面积获取模块具体用于:
通过摄像头采集所述人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
可选的,所述页面对象移动模块,包括:
第一确定单元,用于分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离;
第二确定单元,用于根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
可选的,所述第一确定单元具体用于:
分别计算所述各个子区域中所述第一面积与所述第二面积的差值,确定所述差值中的最大值;
确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为移动方向,将所述目标子区域所述第一面积与所述目标子区域的第二面积的比值设置为所述第一移动距离。
可选的,所述第二确定单元具体用于:
基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离;
将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。
可选的,所述装置还包括:
图像处理模块,用于对所述目标人眼区域对应的目标人眼图像进行二值化处理;
瞳孔区域确定模块,用于根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
本发明实施例第三方面提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述第一方面的方法。
本发明实施例第四方面提供一种电子设备,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述第一方面的方法。
本发明实施例第五方面提供一种应用程序,包括程序指令,所述程序指令当被执行时用于执行上述第一方面的方法。
在本发明实施中,页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种页面对象设置方法的流程示意图;
图2是本发明实施例提供的另一种页面对象设置方法的流程示意图;
图3是本发明实施例提供的一种目标人眼区域的界面示意图;
图4是本发明实施例提供的另一种目标人眼区域的界面示意图;
图5是本发明实施例提供的一种页面对象的界面示意图;
图6(a)是本发明实施例提供的一种页面对象移动前的界面示意图;
图6(b)是本发明实施例提供的一种页面对象移动后的界面示意图;
图7是本发明实施例提供的又一种页面对象设置方法的流程示意图;
图8是本发明实施例提供的一种页面对象设置装置的结构示意图;
图9是本发明实施例提供的一种页面对象设置装置中页面对象移动模块的结构示意图;
图10是本发明实施例提供的另一种页面对象设置装置的结构示意图;
图11是本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。另外,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供的页面对象设置方法可以应用于移动终端显示对象控制的应用场景,例如:页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性。
本发明实施例涉及的页面对象设置装置可以是任何具备存储和可操作性功能的设备,例如:平板电脑、手机、电子阅读器、个人计算机(Personal Computer,PC)、笔记本电脑、车载设备、网络电视、可穿戴设备等。
下面将结合附图1-附图7,对本发明实施例提供的页面对象设置方法进行详细介绍。
请参见图1,为本发明实施例提供了一种页面对象设置方法的流程示意图。如图1所示,本发明实施例的所述方法可以包括以下步骤S101-步骤S103。
S101,识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积。
具体的,在一种可行的实施方式中,开启摄像头并通过摄像头持续采集人脸图像,该图像包含多种面部信息,如人眼区域、鼻子区域、嘴巴区域等。基于特征识别算法识别所采集到的人脸图像中的人眼区域,若识别到一个人眼区域,则将该人眼区域作为目标人眼区域,若识别到两个人眼区域,则并将其中的一个人眼区域设置为目标人眼区域,如设定左眼区域为目标人眼区域。然后对确定的人眼区域进行划分,从而得到多个子区域,并分别获取各个子区域中瞳孔区域的面积,并将该面积作为第一面积。其中,所述目标人眼区域包括眼白区域和瞳孔区域,且所划分子区域的个数不作具体限定。
需要说明的是,特征识别算法是一种图像处理技术,基本原理是通过提取两个或多个图像的点特征、边缘特征或者区域特征等特征基元,对特征进行参数描述,然后运用所描述的参数进行诸如矩阵的运算、梯度的求解、傅立叶变换或者泰勒展开等数学运算来完成匹配,最终能够在一幅图像中识别出具有一定特征的目标。
目前常见的特征识别算法是基于几何形状的特征匹配方法,利用该技术可以快速识别出眼睛、眉毛、鼻子、嘴等各种器官在面部图像中的位置。目前有很多成熟算法能够轻松提取出圆形、方形、三角形等目标。
例如,一种基于加窗Hough变换的圆形检测算法。检测原理为:检测出圆形形状之后,得到圆的半径值,和目标圆形形状半径值进行相似性比对。
再例如,一种基于加窗Hough变换的任意三角形检测算法。检测原理为:在图像中选择适当大小的窗口,以窗口中心为坐标原点对窗口内图像作Hough变化,在图像的Hough域中检测直线段,滑动窗口,从检测出的直线段中找出满足三角形条件的线段组合,然后定位这些线段构成的三角形。改变线段的长度条件或者角度条件还可以检测直角三角形,等腰三角形,等边三角形等特殊三角形。
再例如,一种岛校检测图像中是否有三角形的算法。该方法利用区域填充及三角形三边的长度面积之间的关系实现三角形目标检测。
S102,当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积。
具体的,所谓的人眼移动,是指人眼中眼白部分和瞳孔部分的移动,而人眼区域不变。以瞳孔部分的移动为准,并将移动后各个子区域中的瞳孔区域的面积作为第二面积。
S103,分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
具体的,页面对象可以为当前显示界面的任何可移动的显示对象,如应用图标、短信息、所拍摄的图像、对图像进行编辑的标签等。
具体实现中,可分别计算各个子区域中第一面积和第二面积的差值,并确定所述差值中的最大值,然后找到该最大值所指示的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为移动方向,将所述目标子区域第一面积与第二面积的比值设置为第一移动距离,同时,基于当前显示界面的显示尺寸将第一移动距离换算为所选定的页面对象的第二移动距离,再根据移动方向和第二移动距离,最终的移动位置,将该页面对象可通过任意的移动轨迹移动到所指定的位置处即可。其中,所述显示尺寸为显示界面的长与款的比值,通过对第一距离按照显示界面的比值进行等比例缩放即可匹配到第二移动距离。
在本发明实施中,页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性。
请参见图2,为本发明实施例提供了另一种页面对象设置方法的流程示意图。如图2所示,本发明实施例的所述方法可以包括以下步骤S201-步骤S206。
S201,通过摄像头采集人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
具体的,开启摄像头并通过摄像头持续采集人脸图像,该人脸图像包含多种面部信息,如人眼区域、鼻子区域、嘴巴区域等。基于特征识别算法识别所采集到的人脸图像中的人眼区域,若识别到一个人眼区域,则将该人眼区域作为目标人眼区域,若识别到两个人眼区域,则并将其中的一个人眼区域设置为目标人眼区域,如设定左眼区域为目标人眼区域。其中,所述目标人眼区域包括眼白区域和瞳孔区域,且所划分子区域的个数不作具体限定。
需要说明的是,特征识别算法是一种图像处理技术,基本原理是通过提取两个或多个图像的点特征、边缘特征或者区域特征等特征基元,对特征进行参数描述,然后运用所描述的参数进行诸如矩阵的运算、梯度的求解、傅立叶变换或者泰勒展开等数学运算来完成匹配,最终能够在一幅图像中识别出具有一定特征的目标。目前常见的特征识别算法是基于几何形状的特征匹配方法,利用该技术可以快速识别出眼睛、眉毛、鼻子、嘴等各种器官在面部图像中的位置。
S202,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积。
具体的,通过对识别到的人眼区域进行划分,从而得到多个子区域,并分别获取各个子区域中瞳孔区域的面积,并将该面积作为第一面积。
例如,如图3所示为一种人眼区域界面图,其中白色部分为眼白区域,黑色部分为瞳孔区域,现对人眼区域进行9宫格划分,从而得到9个子区域1-9,每个子区域中可以包括部分眼白面积和部分瞳孔面积,且每个区域中,瞳孔部分的面积作为第一面积,例如,图3中9个子区域的第一面积分别为0、S1、0、0、S2、0、0、S3和0。
S203,当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积。
具体的,所谓的人眼移动,是指人眼中眼白部分和瞳孔部分的移动,而人眼区域不变。以瞳孔部分的移动为准,并将移动后各个子区域中的瞳孔区域的面积作为第二面积。
例如,若目标人眼如图3所示,当目标人眼移动后,人眼区域如图4所示,每个子区域中眼白区域和瞳孔区域的面积发生变化,例如,图4中9个子区域的第二面积分别为0、S4、S5、0、S6、S7、0、S8和S9。
S204,分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离。
具体的,分别计算所述各个子区域中第一面积与第二面积的差值,确定所述差值中的最大值,并确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为移动方向,将所述目标子区域第一面积与第二面积的比值设置为第一移动距离。
例如,假设1-9这9个子区域中的第一面积分别为0、S1、0、0、S2、0、0、S3和0,对应的第二面积分别为0、S4、S5、0、S6、S7、0、S8和S9,然后计算差值的绝对值,得到0、|S1-S4|、|-S5|、0、|S2-S6|、|-S7|、0、|S3-S8|、|-S9|,确定其中的最大值,若最大值为|S3-S8|,则目标子区域为区域8,因此区域8的移动方向即为页面对象的移动方向,而第一移动距离d=S3/S8。
S205,根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
具体的,页面对象可以为当前显示界面的任何可移动的显示对象,如应用图标、短信息、所拍摄的图像、对图像进行编辑的标签等。
具体实现中,基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离,将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。其中,所述显示尺寸为显示界面的长与款的比值,通过对第一距离按照显示界面的比值进行等比例缩放即可匹配到第二移动距离。
例如,在一种应用场景中,如图5所示,在当前显示界面上有A、B、C和D四个应用图标,若需要将C移动到指定位置,则C即为预先选择的页面对象,目标子区域移动前瞳孔面积为x,移动后瞳孔面积为y,那么第一移动距离d1=x/y,当前显示界面的显示尺寸a/b,那么第二移动距离d2=(x/y)*(a/b),基于d2以及目标子区域的移动方向可确定将C移动到C1处,其中a和b分别为当前显示界面的长和宽。
又例如,在另一种应用场景中,如图6(a)所示,若页面对象为图中圈起来的贴纸标签,通过目标人眼的移动操作后,将该贴纸进行移动后,得到图6(b)所示的显示效果。
S206,控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
其中,将C移动到C1处时,可按照任意的移动轨迹进行移动。优选的,可优先选择所有移动轨迹中最短路径的轨迹。
可选的,如图7所示,在S201之后,还可执行:
S2012,对所述目标人眼区域对应的目标人眼图像进行二值化处理。
具体的,图像的二值化就是将图像上的像素点的灰度值设置为0或255,也就是将整个图像呈现出明显的只有黑和白的视觉效果。这是因为,通常在一幅图像中包括有目标物体、背景还有噪声,而要想从多值的数字图像中直接提取出目标物体,最常用的方法就是设定一个阈值T,用T将图像的数据分成两部分:大于T的像素群和小于T的像素群。
S2013,根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
具体的,所谓灰度值是指图像中点的色彩的浓淡程度。每一个像素有一个灰度值,对于8位的灰度图像,其灰度值范围为0~255,白色为255,黑色为0。预设某一灰度值T,将获取到的灰度值与预设灰度值T一一比较,筛选出灰度值小于T的点,这些点组成的区域即为瞳孔区域。
在本发明实施中,页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性,同时,通过增加眼动以实现对页面对象的控制的方式,丰富了页面对象的控制方式,增加了对页面对象控制的趣味性。
请参见图8,为本发明实施例提供了一种页面对象设置装置的结构示意图。如图8所示,本发明实施例的所述页面对象设置1可以包括:第一面积获取模块11、第二面积获取模块12和页面对象移动模块13。
第一面积获取模块11,用于识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积。
具体的,所述第一面积获取模块11具体用于:
通过摄像头采集人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
第二面积获取模块12,用于当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积。
页面对象移动模块13,用于分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
可选的,如图9所示,所述页面对象移动模块13,包括:
第一确定单元131,用于分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离。
所述第一确定单元具体用于:
分别计算所述各个子区域中所述第一面积与所述第二面积的差值,确定所述差值中的最大值;
确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为移动方向,将所述目标子区域的第一面积与所述目标子区域的第二面积的比值设置为第一移动距离。
第二确定单元132,用于根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
所述第二确定单元具体用于:
基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离;
将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。
可选的,如图10所示,所述装置还包括:
图像处理模块14,用于对所述目标人眼区域对应的目标人眼图像进行二值化处理。
瞳孔区域确定模块15,用于根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
在本发明实施中,页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性,同时,通过增加眼动以实现对页面对象的控制的方式,丰富了页面对象的控制方式,增加了对页面对象控制的趣味性。
请参见图11,为本发明实施例提供了一种电子设备的结构示意图。如图11所示,所述电子设备1000可以包括:至少一个处理器1001,例如CPU,至少一个网络接口1004,用户接口1003,存储器1005,至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图11所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及页面对象设置应用程序。
在图11所示的电子设备1000中,用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的页面对象设置应用程序,并具体执行以下操作:
识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;
当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;
分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
在一个实施例中,所述处理器1001在执行识别人脸图像中的目标人眼区域时,具体执行以下步骤:
通过摄像头采集所述人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
在一个实施例中,所述处理器1001在执行分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数时,具体执行以下步骤:
分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离;
根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
在一个实施例中,所述处理器1001在执行分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离时,具体执行以下步骤:
分别计算所述各个子区域中所述第一面积与所述第二面积的差值,确定所述差值中的最大值;
确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为所述移动方向,将所述目标子区域的第一面积与所述目标子区域的第二面积的比值设置为所述第一移动距离。
在一个实施例中,所述处理器1001在执行根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数时,具体执行以下步骤:
基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离;
将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。
在一个实施例中,所述处理器1001在执行识别人脸图像中的目标人眼区域之后,还执行以下步骤:
对所述目标人眼区域对应的目标人眼图像进行二值化处理;
根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
在本发明实施中,页面对象设置装置通过识别人脸图像中的目标人眼区域后,将所识别到的目标人眼区域划分为多个子区域,并分别获取各个子区域中瞳孔区域的第一面积,当检测到目标人眼移动时,获取移动后各个子区域中瞳孔区域的第二面积,再分别比对各个子区域中的第一面积和第二面积,并根据比对的结果控制预先选择的页面对象在当前显示界面中进行移动。现有技术中,通过用户手指对显示界面的页面对象进行移动控制,一旦用户手指离开显示界面即无法控制该页面对象,从而造成控制上的不便,与现有技术相比,采用本发明,通过页面对象设置装置对人眼移动前后瞳孔区域的面积进行比对,并根据比对结果就可实现对页面对象的移动操作,操作简单快捷,从而提高了对页面对象操作的便利性,同时,通过增加眼动以实现对页面对象的控制的方式,丰富了页面对象的控制方式,增加了对页面对象控制的趣味性。
本发明实施例还提供一种计算机存储介质(非临时性计算机可读存储介质),所述计算机存储介质存储有计算机程序,所述计算机程序包括程序信令,所述程序信令当被计算机执行时使所述计算机执行如前述实施例所述的方法,所述计算机可以为上述提到的页面对象设置装置或电子设备的一部分。
上述非临时性计算机可读存储介质可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(Read Only Memory;以下简称:ROM)、可擦式可编程只读存储器(ErasableProgrammable Read Only Memory;以下简称:EPROM)或闪存、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LocalArea Network;以下简称:LAN)或广域网(Wide Area Network;以下简称:WAN)连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本申请实施例还提供一种计算机程序产品,当上述计算机程序产品中的指令由处理器执行时,可以实现本申请图1或图2或图7所示实施例提供的页面对象设置方法。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory;以下简称:ROM)、随机存取存储器(Random Access Memory;以下简称:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种页面对象设置方法,其特征在于,包括:
识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;
当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;
分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
2.根据权利要求1所述的方法,其特征在于,所述识别人脸图像中的目标人眼区域,包括:
通过摄像头采集所述人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
3.根据权利要求1所述的方法,其特征在于,所述分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,包括:
分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离;
根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数。
4.根据权利要求3所述的方法,其特征在于,所述分别比对所述各个子区域中的所述第一面积和所述第二面积,根据比对结果确定所述目标人眼的移动方向和第一移动距离,包括:
分别计算所述各个子区域中所述第一面积与所述第二面积的差值,确定所述差值中的最大值;
确定所述最大值对应的目标子区域,将所述目标子区域中瞳孔区域的变化方向设置为所述移动方向,将所述目标子区域的第一面积与所述目标子区域的第二面积的比值设置为所述第一移动距离。
5.根据权利要求4所述的方法,其特征在于,所述根据所述移动方向和所述第一移动距离,确定针对所述预先选择的页面对象的移动参数,包括:
基于所述当前显示界面的显示尺寸和所述第一移动距离,确定所述页面对象的第二移动距离;
将所述第二移动距离和所述移动方向设置为所述页面对象的移动参数。
6.根据权利要求1所述的方法,其特征在于,所述识别人脸图像中的目标人眼区域之后,还包括:
对所述目标人眼区域对应的目标人眼图像进行二值化处理;
根据所述二值化处理后所述目标人眼图像中各个像素点的灰度值确定所述目标人眼区域中的瞳孔区域。
7.一种页面对象设置装置,其特征在于,包括:
第一面积获取模块,用于识别人脸图像中的目标人眼区域,将所述目标人眼区域划分为多个子区域,分别获取各个子区域中瞳孔区域的第一面积;
第二面积获取模块,用于当检测到目标人眼移动时,获取移动后所述各个子区域中瞳孔区域的第二面积;
页面对象移动模块,用于分别比对所述各个子区域中的所述第一面积和所述第二面积,以获取针对预先选择的页面对象的移动参数,并控制所述页面对象在当前显示界面中移动至所述移动参数所指示的位置处。
8.根据权利要求7所述的装置,其特征在于,所述第一面积获取模块具体用于:
通过摄像头采集所述人脸图像,基于特征识别算法识别所述人脸图像中的目标人眼区域,所述目标人眼区域包括眼白区域和瞳孔区域。
9.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1至6任一项所述方法。
10.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述处理器在执行所述计算机程序时实现如权利要求1至6任一项所述方法。
CN201710774148.4A 2017-08-31 2017-08-31 一种页面对象设置方法、装置、电子设备及存储介质 Active CN107562199B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710774148.4A CN107562199B (zh) 2017-08-31 2017-08-31 一种页面对象设置方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710774148.4A CN107562199B (zh) 2017-08-31 2017-08-31 一种页面对象设置方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN107562199A true CN107562199A (zh) 2018-01-09
CN107562199B CN107562199B (zh) 2020-10-09

Family

ID=60977689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710774148.4A Active CN107562199B (zh) 2017-08-31 2017-08-31 一种页面对象设置方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN107562199B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110148075A (zh) * 2019-06-19 2019-08-20 重庆工商职业学院 一种基于人工智能的学习评价方法及装置
CN113660477A (zh) * 2021-08-16 2021-11-16 吕良方 一种vr眼镜及其图像呈现方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8113657B2 (en) * 2000-10-07 2012-02-14 Metaio Gmbh Device and method for determining the orientation of an eye
JP2012141470A (ja) * 2011-01-04 2012-07-26 Nikon Corp 結像光学系、及び、顕微鏡装置
CN103310186A (zh) * 2012-02-29 2013-09-18 三星电子株式会社 校正图像中用户的注视方向的方法和便携式终端
US20140372957A1 (en) * 2013-06-18 2014-12-18 Brian E. Keane Multi-step virtual object selection
US20150261295A1 (en) * 2014-03-17 2015-09-17 Samsung Electronics Co., Ltd. Method for processing input and electronic device thereof
CN106406526A (zh) * 2016-09-07 2017-02-15 长安大学 一种能够预判驾驶员转向意图的辅助车灯控制方法
CN106530623A (zh) * 2016-12-30 2017-03-22 南京理工大学 一种疲劳驾驶检测装置及检测方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8113657B2 (en) * 2000-10-07 2012-02-14 Metaio Gmbh Device and method for determining the orientation of an eye
JP2012141470A (ja) * 2011-01-04 2012-07-26 Nikon Corp 結像光学系、及び、顕微鏡装置
CN103310186A (zh) * 2012-02-29 2013-09-18 三星电子株式会社 校正图像中用户的注视方向的方法和便携式终端
US20140372957A1 (en) * 2013-06-18 2014-12-18 Brian E. Keane Multi-step virtual object selection
US20150261295A1 (en) * 2014-03-17 2015-09-17 Samsung Electronics Co., Ltd. Method for processing input and electronic device thereof
US9817475B2 (en) * 2014-03-17 2017-11-14 Samsung Electronics Co., Ltd. Method for tracking a user's eye to control an indicator on a touch screen and electronic device thereof
CN106406526A (zh) * 2016-09-07 2017-02-15 长安大学 一种能够预判驾驶员转向意图的辅助车灯控制方法
CN106530623A (zh) * 2016-12-30 2017-03-22 南京理工大学 一种疲劳驾驶检测装置及检测方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110148075A (zh) * 2019-06-19 2019-08-20 重庆工商职业学院 一种基于人工智能的学习评价方法及装置
CN113660477A (zh) * 2021-08-16 2021-11-16 吕良方 一种vr眼镜及其图像呈现方法

Also Published As

Publication number Publication date
CN107562199B (zh) 2020-10-09

Similar Documents

Publication Publication Date Title
Nikam et al. Sign language recognition using image based hand gesture recognition techniques
Sharma et al. A static hand gesture and face recognition system for blind people
Lahiani et al. Real time hand gesture recognition system for android devices
CN112070015B (zh) 一种融合遮挡场景的人脸识别方法、系统、设备及介质
CN104517265B (zh) 智能磨皮方法和装置
CN112052834B (zh) 一种基于隐私保护的面部识别方法、装置及设备
CN110427932A (zh) 一种识别图像中多个票据区域的方法及装置
US20110310260A1 (en) Augmented Reality
CN105550631A (zh) 一种虹膜图像采集方法及装置
CN106683100A (zh) 一种图像分割去雾方法及终端
Bhame et al. Vision based hand gesture recognition using eccentric approach for human computer interaction
CN110502974A (zh) 一种视频图像的展示方法、装置、设备、及可读存储介质
CN110072046A (zh) 图像合成方法和装置
CN109948450A (zh) 一种基于图像的用户行为检测方法、装置和存储介质
CN108197585A (zh) 脸部识别方法和装置
CN107562199A (zh) 一种页面对象设置方法、装置、电子设备及存储介质
CN111507149B (zh) 基于表情识别的交互方法、装置和设备
CN111126250A (zh) 一种基于ptgan的行人重识别方法及装置
CN116721460A (zh) 手势识别方法、装置、电子设备以及存储介质
Gorbova et al. Going deeper in hidden sadness recognition using spontaneous micro expressions database
CN108961314A (zh) 运动图像生成方法、装置、电子设备及计算机可读存储介质
CN108694398A (zh) 一种图像分析方法及装置
CN106796649A (zh) 使用标记物的基于姿态的人机接口
CN113343773B (zh) 基于浅层卷积神经网络的人脸表情识别系统
CN110223334B (zh) 一种景深图获取方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20201127

Address after: Room 115, area C, 1 / F, building 8, yard 1, yaojiayuan South Road, Chaoyang District, Beijing

Patentee after: Beijing LEMI Technology Co.,Ltd.

Address before: 100085 Beijing City, Haidian District Road 33, two floor East Xiaoying

Patentee before: BEIJING KINGSOFT INTERNET SECURITY SOFTWARE Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231018

Address after: 100000 3870A, 3rd Floor, Building 4, No. 49 Badachu Road, Shijingshan District, Beijing

Patentee after: Beijing Jupiter Technology Co.,Ltd.

Address before: Room 115, area C, 1 / F, building 8, yard 1, yaojiayuan South Road, Chaoyang District, Beijing

Patentee before: Beijing LEMI Technology Co.,Ltd.