CN105843383A - 应用启动装置及方法 - Google Patents

应用启动装置及方法 Download PDF

Info

Publication number
CN105843383A
CN105843383A CN201610160794.7A CN201610160794A CN105843383A CN 105843383 A CN105843383 A CN 105843383A CN 201610160794 A CN201610160794 A CN 201610160794A CN 105843383 A CN105843383 A CN 105843383A
Authority
CN
China
Prior art keywords
application
application icon
watching area
display screen
eyeball
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610160794.7A
Other languages
English (en)
Other versions
CN105843383B (zh
Inventor
徐桃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201610160794.7A priority Critical patent/CN105843383B/zh
Publication of CN105843383A publication Critical patent/CN105843383A/zh
Application granted granted Critical
Publication of CN105843383B publication Critical patent/CN105843383B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种应用启动装置,所述应用启动装置包括:判断模块,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;获取模块,用于若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;启动模块,用于启动获取的所述应用图标对应的应用。本发明还公开了一种应用启动方法。本发明提高了应用启动的智能性。

Description

应用启动装置及方法
技术领域
本发明涉及移动终端领域,尤其涉及一种应用启动装置及方法。
背景技术
随着移动终端崛起及通信技术的成熟,人们开始探索脱离鼠标和键盘的新型人机交互方式,其中,热门的方向包括语音控制、手势识别控制和眼动识别控制等方式。现在的移动终端包括各式各类的应用,当用户在开启应用时,一般都是通过点击应用的图标开启应用,例如,在手机使用过程中,如果用户想要开启某些应用,则要通过点击应用图标以开启应用,若此时用户的双手在忙其它事情,就导致应用无法开启了,显然,目前的应用启动方式,需要手动进行操作,智能性较低。
发明内容
本发明的主要目的在于提出一种应用启动装置及方法,旨在解决应用启动方式,智能性较低的技术问题。
为实现上述目的,本发明提供的一种应用启动装置,所述应用启动装置包括:
判断模块,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
获取模块,用于若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
启动模块,用于启动获取的所述应用图标对应的应用。
可选地,所述应用启动装置还包括:
确定模块,用于通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
识别模块,用于基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
处理模块,用于控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
所述确定模块,还用于根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
可选地,所述判断模块包括:
确定单元,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
判断单元,用于根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
可选地,在获取的应用图标包括多个应用图标时,所述启动模块包括:
第一处理单元,用于分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
第二处理单元,用于获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
可选地,所述应用启动装置还包括:
输出模块,用于若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
此外,为实现上述目的,本发明还提出一种应用启动方法,所述应用启动方法包括以下步骤:
当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
启动获取的所述应用图标对应的应用。
可选地,所述当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤之前,所述应用启动方法还包括:
通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
可选地,所述当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤包括:
当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
可选地,在获取的应用图标包括多个应用图标时,所述启动获取的所述应用图标对应的应用的步骤包括:
分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
或者,获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
可选地,所述判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤之后,所述应用启动方法还包括:
若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
本发明提出的应用启动装置及方法,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,先判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域,若存在与所述注视区域匹配的应用图标区域,则获取所述应用图标区域对应的应用图标,并直接启动获取的所述应用图标对应的应用,而不是只能通过手动点击应用图标开启应用,本发明通过眼球在终端的注视区域的注视时长达到预设时长时,获取所述终端显示屏中所述与注视区域匹配的应用图标,并启动获取的所述应用图标对应的应用,实现了无需手动操作,也可以启动应用,提高了应用启动的智能性。
附图说明
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图;
图2为如图1所示的移动终端的无线通信装置示意图;
图3为本发明应用启动装置第一实施例的功能模块示意图;
图4为图3中判断模块的细化功能模块示意图;
图5为本发明中注视区域对应微信应用图标的较佳实施场景示意图;
图6为本发明中注视区域对应音视频应用的控件图标的较佳实施场景示意图;
图7为本发明应用启动装置第二实施例的功能模块示意图;
图8为本发明应用启动方法第一实施例的流程示意图;
图9为本发明判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域较佳实施例的流程示意图;
图10为本发明应用启动方法第二实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意。
移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信装置或网络之间的无线电通信。
A/V输入单元120用于接收音频或视频信号。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。
感测单元140检测移动终端100的当前状态,(例如,移动终端100的打开或关闭状态)、移动终端100的位置、用户对于移动终端100的接触(即,触摸输入)的有无、移动终端100的取向、移动终端100的加速或将速移动和方向等等,并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100实施为滑动型移动电话时,感测单元140可以感测该滑动型电话是打开还是关闭。另外,感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。感测单元140还可以包括虹膜识别传感器141、红外发射器142和红外传感器143。所述虹膜识别传感器141先基于确定的人脸位置,识别人脸的眼球,在人脸的眼球确定之后,所述红外发射器142向确定的所述眼球发送红外线,并由所述红外传感器143感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置。
接口单元170用作至少一个外部装置与移动终端100连接可以通过的接
口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外,当移动终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152、警报单元153等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且,音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括拾音器、蜂鸣器等等。
警报单元153可以提供输出以将事件的发生通知给移动终端100。典型的事件可以包括呼叫接收、消息接收、键信号输入、触摸输入等等。除了音频或视频输出之外,警报单元153可以以不同的方式提供输出以通知事件的发生。例如,警报单元153可以以振动的形式提供输出,当接收到呼叫、消息或一些其它进入通信(incoming communication)时,警报单元153可以提供触觉输出(即,振动)以将其通知给用户。通过提供这样的触觉输出,即使在用户的移动电话处于用户的口袋中时,用户也能够识别出各种事件的发生。警报单元153也可以经由显示单元151或音频输出模块152提供通知事件的发生的输出。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181,多媒体模块181可以构造在控制器180内,或者可以构造为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。
至此,己经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何类型的移动终端,并且不限于滑动型移动终端。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信装置以及基于卫星的通信装置来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信装置。
这样的通信装置可以使用不同的空中接口和/或物理层。例如,由通信装置使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信装置(UMTS)(特别地,长期演进(LTE))、全球移动通信装置(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信装置,但是这样的教导同样适用于其它类型的装置。
参考图2,CDMA无线通信装置可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的装置可以包括多个BSC2750。
每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。
分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子装置(BTS)或者其它等效术语。在这样的情况下,术语"基站"可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为"蜂窝站"。或者,特定BS270的各分区可以被称为多个蜂窝站。
如图2中所示,广播发射器(BT)295将广播信号发送给在装置内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位装置(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。
在图2中,描绘了多个卫星300,但是可以理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪移动终端的位置的其它技术。另外,至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。
作为无线通信装置的一个典型操作,BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。
基于上述移动终端硬件结构、通信装置的结构,提出本发明应用启动装置各个实施例。
参照图3,图3为本发明应用启动装置第一实施例的功能模块示意图。
需要强调的是,对本领域的技术人员来说,图3所示功能模块图仅仅是一个较佳实施例的示例图,本领域的技术人员围绕图3所示的应用启动装置的功能模块,可轻易进行新的功能模块的补充;各功能模块的名称是自定义名称,仅用于辅助理解该应用启动装置的各个程序功能块,不用于限定本发明的技术方案,本发明技术方案的核心是,各自定义名称的功能模块所要达成的功能。
本实施例提出一种应用启动装置,所述应用启动装置包括:
判断模块10,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
在本实施例中,所述注视区域的确定方式可通过预设模块进行确定,所述预设模块包括确定模块、识别模块和处理模块等等,具体地,
确定模块,用于通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
识别模块,用于基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
处理模块,用于控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
所述确定模块,还用于根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
在本实施例中,人的注视点是由头的方位和眼睛的方位两个因素决定的,眼球追踪技术的基本原理是利用图像处理技术,通过摄入从人眼角膜和瞳孔反射的红外线连续记录实现变化,从而达到记录分析实现跟踪的过程。因此,监测眼球运动,记录注视点位置及其变化是首先由所述确定模块通过前置摄像头确定人脸相对于所述终端显示屏的相对位置,具体地确定方式为:确定人脸相对于所述终端显示屏的距离,然后根据所述距离确定人脸相对于所述终端显示屏的相对位置,然后在所述确定模块确定的所述相对位置的基础上,由所述识别模块的虹膜识别传感器利用虹膜技术识别用户眼球的方位和特征,具体表示虹膜角度,识别人脸中眼球的位置之后,所述处理模块再控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置,可以理解,所述眼球的角膜和瞳孔在接收到红外线之后会反射红外线,由于角膜和瞳孔的位置不同,因此会得到不同方向上的红外线,而角膜表面形成的虚像因眼球旋转而移动,因此,底层软件接收到反射的红外线,所述确定模块即可确定所述眼球反射的红外线在终端屏幕上落点位置,从而实时检测出注视区域的位置,最终可实现眼球的实时追踪和记录。总的来说,就是先通过虹膜识别技术确定眼球在终端屏幕上的落点,然后根据红外摄像技术,连续采集眼球在终端屏幕上的落点成像图,再由底层软件应用的二维识别技术,由瞳孔中心点为眼球运动轨迹的追踪原点,通过改变屏幕上被追踪图案的方位,由此即可获取用户在某一时间段内注视点的轨迹,最后根据获取的注视点的轨迹确定所述眼球在所述终端中对应的注视区域。
在本实施例中,所述确定模块确定所述眼球在所述终端显示屏的注视区域之后,先确定所述眼球在所述注视区域的注视时长,可以理解,当检测到眼球在所述注视区域落点时,通过预设的计时器开始计时,并在计时的时长达到预设时长时,所述判断模块10才判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域,若眼球在终端的注视区域对应的注视时长小于预设时长,则不做任何操作。
具体地,参照图4,所述判断模块10包括:
确定单元11,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
判断单元12,用于根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
在本实施例中,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,所述确定单元11先确定所述终端显示屏中的各个应用图标的应用图标区域,然后所述判断单元12根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,优选在各个所述应用图标中有应用图标的应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配,也就是说,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时之后,先判断所述注视区域是否与所述终端显示屏中的应用图标的区域匹配,具体通过所述注视区域与应用图标的应用图标区域的覆盖率进行,本实施例中,优选在所述注视区域与所述应用图标的应用图标区域的覆盖率达到预设覆盖率时,确定所述注视区域与所述应用图标的区域匹配,若所述注视区域与所有应用图标的应用图标区域的覆盖率都小于预设覆盖率时,认为所述注视区域与所有应用图标的区域都不匹配,其中,所述预设覆盖率根据具体情况进行设置,例如设置所述预设覆盖率为80%。
一般来说,若眼球是看向某一个应用图标,一般都是看向所述应用图标的中心区域,因此,本实施方式中,为了提高注视区域与应用图标的应用图标区域是否匹配的判断准确性,所述判断模块10根据所述注视区域与应用图标的中心区域的重复率,以判断所述注视区域是否与应用图标的中心区域匹配,其中,在所述注视区域与应用图标的中心区域的重复率达到预设重复率时,确定所述注视区域与所述应用图标的中心区域匹配。优选所述中心区域是以所述应用图标的中心点为圆心,以预设的长度为半径形成的区域,所述预设半径优选为所述应用图标边长的1/4,当然,也可以为其它值,具体数值根据实际情况进行设置,并且,优选所述预设重复率大于方式一中的预设覆盖率,例如设置所述预设重复率为90%。
获取模块20,用于若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
启动模块30,用于启动获取的所述应用图标对应的应用。
在本实施例中,若存在与所述注视区域匹配的应用图标区域,则所述获取模块20获取所述应用图标区域对应的应用图标,并在所述获取模块20获取到所述应用图标区域对应的应用图标之后,先确定所述终端显示屏中获取的的应用图标的个数,若只有一个应用图标,即只有一个应用图标的应用图标区域与所述注视区域匹配,所述启动模块30则可直接启动所述应用图标对应的应用。
进一步地,在获取的应用图标包括多个应用图标时,所述启动模块30启动获取的所述应用图标对应的应用的实施方式包括:
1)方式一、所述启动模块30包括:
第一处理单元,用于分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
在本实施例中,在所述注视区域与多个应用图标的区域匹配时,所述第一处理单元可获取个应用图标对应的应用,然后分别启动各个所述应用图标对应的应用,启动了各个应用图标对应的应用之后,可分屏显示各个所述应用对应的界面。
进一步地,为了提高应用显示的智能性,先确定启动的各个应用的显示优先级,所述显示优先级可以是用户事先进行设置,也可以根据各个应用在预设的时间间隔内的启动次数进行设置,并按照预设时间间隔内的启动次数从高到低的顺序确定各个应用的显示优先级,然后,先显示各个应用中优先级最高的应用,并在该优先级最高的应用关闭后,再次获取其它开启的各个应用中优先级最高的应用,并显示再次获取的应用,按照这种方式显示各个应用。
2)方式二、所述启动模块30包括:
第二处理单元,用于获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
在本实施例中,在所述注视区域与多个应用图标的区域匹配时,所述第二处理单元先确定各个应用图标中与所述注视区域的覆盖率的大小关系,然后获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,最终启动获取的所述应用图标对应的应用。
本实施例中所述的应用,不仅包括应用程序(Application,APP),还可包括各类控件、可点击的图标以及链接信息等等。也就是说,只要是可以通过点击跳转至相应界面的应用程序,或者是通过点击可以执行相应操作的图标,即为本实施例中所述的应用。为更好理解本实施例中,举例应用场景如下:
1、当手机处于系统主界面中时,此时,所述系统主界面显示各个应用图标,如微信应用图标、酷狗应用图标、QQ应用图标、支付宝应用图标等等,此时,若用户的眼球注视在所述系统主界面中,先确定所述眼球在所述系统主界面中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述系统主界面中应用图标的区域匹配,若所述注视区域与系统主界面中的微信应用图标的区域匹配,即所述注视区域与所述微信应用图标的区域的覆盖率达到预设覆盖率如80%,则打开所述微信应用图标对应的应用,具体可参照图5。
2、当手机处于应用所在的功能界面中时,此时,所述功能界面显示各个控件图标,如QQ应用的主界面中显示消息控件图标、联系人控件图标、动态控件图标等等,具体的联系人控件图标中又对应各个子控件图标,如我的设备子控件图标、手机通讯录子控件图标、我的好友子控件图标等等,此时,若用户的眼球注视在所述QQ应用的主界面中,先确定所述眼球在所述QQ应用的主界面中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述QQ应用的主界面中控件图标的区域匹配,若所述注视区域与所述QQ应用的主界面中的控件图标的区域匹配,如所述注视区域与所述QQ应用的主界面中动态控件图标的区域匹配,即所述注视区域与所述动态控件图标的区域的覆盖率达到预设覆盖率如80%,则打开所述动态图标控件,以进入所述动态图标控件对应的界面。
3、当手机处于音视频播放界面时,此时,所述音频播放界面的预设区域显示各个控件图标,如暂停/继续播放图标、菜单图标、上一个音视频图标、下一个音视频图标和音量调整图标等等,此时,若用户的眼球注视在所述音频播放界面的预设区域中,先确定所述眼球在所述音频播放界面的预设区域中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述音视频播放界面中控件图标的区域匹配,若所述注视区域与所述音视频播放界面中的控件图标的区域匹配,如所述注视区域与所述音视频播放界面中上一个音视频图标的区域匹配,即所述注视区域与所述上一个音视频图标的区域的覆盖率达到预设覆盖率如80%,则触发所述上一个音视频图标对应的控件,以切换到上一个音视频中,具体可参照图6。
以上所列举出的三种应用场景仅仅为示例性的,本领域技术人员利用本发明的技术思想,根据其具体需求所提出的其它各种与本发明相关的应用场景均在本发明的保护范围内,在此不进行一一穷举。
本实施例提出的应用启动装置,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,先判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域,若存在与所述注视区域匹配的应用图标区域,则获取所述应用图标区域对应的应用图标,并直接启动获取的所述应用图标对应的应用,而不是只能通过手动点击应用图标开启应用,本发明通过眼球在终端的注视区域的注视时长达到预设时长时,获取所述终端显示屏中所述与注视区域匹配的应用图标,并启动获取的所述应用图标对应的应用,实现了无需手动操作,也可以启动应用,提高了应用启动的智能性。
进一步地,为了提高应用启动的灵活性,参照图7,基于第一实施例提出本发明应用启动装置的第二实施例,在本实施例中,所述应用启动装置还包括:
输出模块40,用于若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
在本实施例中,若不存在与所述注视区域匹配的应用图标区域,有可能是所述终端显示屏中没有所述注视区域对应的应用图标,如所述注视区域对应空白区域,此时,所述输出模块40可输出提示文字信息,以提示用户调整眼球的注视区域,例如,在当前的显示界面输出提示窗口,并在所述提示窗口显示文字信息,如“请调整眼球的注视区域”。或者,在所述注视区域与所述应用图标的区域不匹配时,所述输出模块40输出语音提示信息,以提示用户调整眼球的注视区域,例如,语音输出“请调整眼球的注视区域”,或者语音输出警鸣声。
在本实施例中,若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域,方便用户快速得知当前的情况,并及时调整眼球的注视区域,以继续开启应用,从而提高了应用启动的灵活性。
本发明进一步提供一种应用启动方法。
参照图8,图8为本发明应用启动方法第一实施例的流程示意图。
本实施例提出一种应用启动方法,所述应用启动方法包括:
步骤S10,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
在本实施例中,所述步骤S10之前,包括:
步骤1,通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
步骤2,基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
步骤3,控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
步骤4,根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
在本实施例中,人的注视点是由头的方位和眼睛的方位两个因素决定的,眼球追踪技术的基本原理是利用图像处理技术,通过摄入从人眼角膜和瞳孔反射的红外线连续记录实现变化,从而达到记录分析实现跟踪的过程。因此,监测眼球运动,记录注视点位置及其变化是首先通过手机的前置摄像头确定人脸相对于所述终端显示屏的相对位置,具体地确定方式为:确定人脸相对于所述终端显示屏的距离,然后根据所述距离确定人脸相对于所述终端显示屏的相对位置,然后在确定的所述相对位置的基础上,由虹膜识别传感器利用虹膜技术识别用户眼球的方位和特征,具体表示虹膜角度,识别人脸中眼球的位置之后,再控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置,可以理解,所述眼球的角膜和瞳孔在接收到红外线之后会反射红外线,由于角膜和瞳孔的位置不同,因此会得到不同方向上的红外线,而角膜表面形成的虚像因眼球旋转而移动,因此,底层软件接收到反射的红外线即可确定所述眼球反射的红外线在终端屏幕上落点位置,从而实时检测出注视区域的位置,最终可实现眼球的实时追踪和记录。总的来说,就是先通过虹膜识别技术确定眼球在终端屏幕上的落点,然后根据红外摄像技术,连续采集眼球在终端屏幕上的落点成像图,再由底层软件应用的二维识别技术,由瞳孔中心点为眼球运动轨迹的追踪原点,通过改变屏幕上被追踪图案的方位,由此即可获取用户在某一时间段内注视点的轨迹,最后根据获取的注视点的轨迹确定所述眼球在所述终端中对应的注视区域。
在本实施例中,确定所述眼球在所述终端显示屏的注视区域之后,先确定所述眼球在所述注视区域的注视时长,可以理解,当检测到眼球在所述注视区域落点时,所述终端通过预设的计时器开始计时,并在计时的时长达到预设时长时,所述终端才判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域,若眼球在终端的注视区域对应的注视时长小于预设时长,则不做任何操作。
具体地,所述参照图9,所述步骤S10包括:
步骤S11,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
步骤S12,根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
在本实施例中,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,先确定所述终端显示屏中的各个应用图标的应用图标区域,然后根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,优选在各个所述应用图标中有应用图标的应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配,也就是说,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时之后,先判断所述注视区域是否与所述终端显示屏中的应用图标的区域匹配,具体通过所述注视区域与应用图标的应用图标区域的覆盖率进行,本实施例中,优选在所述注视区域与所述应用图标的应用图标区域的覆盖率达到预设覆盖率时,确定所述注视区域与所述应用图标的区域匹配,若所述注视区域与所有应用图标的应用图标区域的覆盖率都小于预设覆盖率时,认为所述注视区域与所有应用图标的区域都不匹配,其中,所述预设覆盖率根据具体情况进行设置,例如设置所述预设覆盖率为80%。
一般来说,若眼球是看向某一个应用图标,一般都是看向所述应用图标的中心区域,因此,本实施方式中,为了提高注视区域与应用图标的应用图标区域是否匹配的判断准确性,根据所述注视区域与应用图标的中心区域的重复率,以判断所述注视区域是否与应用图标的中心区域匹配,其中,在所述注视区域与应用图标的中心区域的重复率达到预设重复率时,确定所述注视区域与所述应用图标的中心区域匹配。优选所述中心区域是以所述应用图标的中心点为圆心,以预设的长度为半径形成的区域,所述预设半径优选为所述应用图标边长的1/4,当然,也可以为其它值,具体数值根据实际情况进行设置,并且,优选所述预设重复率大于方式一中的预设覆盖率,例如设置所述预设重复率为90%。
步骤S20,若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
步骤S30,启动获取的所述应用图标对应的应用。
在本实施例中,若存在与所述注视区域匹配的应用图标区域,则获取所述应用图标区域对应的应用图标,并在获取到所述应用图标区域对应的应用图标之后,先确定所述终端显示屏中获取的的应用图标的个数,若只有一个应用图标,即只有一个应用图标的应用图标区域与所述注视区域匹配,所述终端则可直接启动所述应用图标对应的应用。
进一步地,在获取的的应用图标包括多个应用图标时,所述步骤S30的实施方式包括:
1)方式一、分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
在本实施例中,在所述注视区域与多个应用图标的区域匹配时,可获取个应用图标对应的应用,然后分别启动各个所述应用图标对应的应用,启动了各个应用图标对应的应用之后,可分屏显示各个所述应用对应的界面。
进一步地,为了提高应用显示的智能性,先确定启动的各个应用的显示优先级,所述显示优先级可以是用户事先进行设置,也可以根据各个应用在预设的时间间隔内的启动次数进行设置,并按照预设时间间隔内的启动次数从高到低的顺序确定各个应用的显示优先级,然后,先显示各个应用中优先级最高的应用,并在该优先级最高的应用关闭后,再次获取其它开启的各个应用中优先级最高的应用,并显示再次获取的应用,按照这种方式显示各个应用。
2)方式二、获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
在本实施例中,在所述注视区域与多个应用图标的区域匹配时,先确定各个应用图标中与所述注视区域的覆盖率的大小关系,然后获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,最终启动获取的所述应用图标对应的应用。
本实施例中所述的应用,不仅包括应用程序(Application,APP),还可包括各类控件、可点击的图标以及链接信息等等。也就是说,只要是可以通过点击跳转至相应界面的应用程序,或者是通过点击可以执行相应操作的图标,即为本实施例中所述的应用。为更好理解本实施例中,举例应用场景如下:
1、当手机处于系统主界面中时,此时,所述系统主界面显示各个应用图标,如微信应用图标、酷狗应用图标、QQ应用图标、支付宝应用图标等等,此时,若用户的眼球注视在所述系统主界面中,先确定所述眼球在所述系统主界面中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述系统主界面中应用图标的区域匹配,若所述注视区域与系统主界面中的微信应用图标的区域匹配,即所述注视区域与所述微信应用图标的区域的覆盖率达到预设覆盖率如80%,则打开所述微信应用图标对应的应用,具体可参照图5。
2、当手机处于应用所在的功能界面中时,此时,所述功能界面显示各个控件图标,如QQ应用的主界面中显示消息控件图标、联系人控件图标、动态控件图标等等,具体的联系人控件图标中又对应各个子控件图标,如我的设备子控件图标、手机通讯录子控件图标、我的好友子控件图标等等,此时,若用户的眼球注视在所述QQ应用的主界面中,先确定所述眼球在所述QQ应用的主界面中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述QQ应用的主界面中控件图标的区域匹配,若所述注视区域与所述QQ应用的主界面中的控件图标的区域匹配,如所述注视区域与所述QQ应用的主界面中动态控件图标的区域匹配,即所述注视区域与所述动态控件图标的区域的覆盖率达到预设覆盖率如80%,则打开所述动态图标控件,以进入所述动态图标控件对应的界面。
3、当手机处于音视频播放界面时,此时,所述音频播放界面的预设区域显示各个控件图标,如暂停/继续播放图标、菜单图标、上一个音视频图标、下一个音视频图标和音量调整图标等等,此时,若用户的眼球注视在所述音频播放界面的预设区域中,先确定所述眼球在所述音频播放界面的预设区域中对应的注视区域,再确定所述注视区域对应的注视时长,在所述注视时长达到预设时长时,判断所述注视区域是否与所述音视频播放界面中控件图标的区域匹配,若所述注视区域与所述音视频播放界面中的控件图标的区域匹配,如所述注视区域与所述音视频播放界面中上一个音视频图标的区域匹配,即所述注视区域与所述上一个音视频图标的区域的覆盖率达到预设覆盖率如80%,则触发所述上一个音视频图标对应的控件,以切换到上一个音视频中,具体可参照图6。
以上所列举出的三种应用场景仅仅为示例性的,本领域技术人员利用本发明的技术思想,根据其具体需求所提出的其它各种与本发明相关的应用场景均在本发明的保护范围内,在此不进行一一穷举。
本实施例提出的应用启动方法,当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,先判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域,若存在与所述注视区域匹配的应用图标区域,则获取所述应用图标区域对应的应用图标,并直接启动获取的所述应用图标对应的应用,而不是只能通过手动点击应用图标开启应用,本发明通过眼球在终端的注视区域的注视时长达到预设时长时,获取所述终端显示屏中所述与注视区域匹配的应用图标,并启动获取的所述应用图标对应的应用,实现了无需手动操作,也可以启动应用,提高了应用启动的智能性。
进一步地,为了提高应用启动的灵活性,参照图10,基于第一实施例提出本发明应用启动方法的第二实施例,在本实施例中,所述步骤S10之后,所述应用启动方法还包括:
步骤S40,若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
在本实施例中,若不存在与所述注视区域匹配的应用图标区域,有可能是所述终端显示屏中没有所述注视区域对应的应用图标,如所述注视区域对应空白区域,此时,可输出提示文字信息,以提示用户调整眼球的注视区域,例如,在当前的显示界面输出提示窗口,并在所述提示窗口显示文字信息,如“请调整眼球的注视区域”。或者,在所述注视区域与所述应用图标的区域不匹配时,输出语音提示信息,以提示用户调整眼球的注视区域,例如,语音输出“请调整眼球的注视区域”,或者语音输出警鸣声。
在本实施例中,若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域,方便用户快速得知当前的情况,并及时调整眼球的注视区域,以继续开启应用,从而提高了应用启动的灵活性。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其它要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种应用启动装置,其特征在于,所述应用启动装置包括:
判断模块,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
获取模块,用于若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
启动模块,用于启动获取的所述应用图标对应的应用。
2.如权利要求1所述的应用启动装置,其特征在于,所述应用启动装置还包括:
确定模块,用于通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
识别模块,用于基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
处理模块,用于控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
所述确定模块,还用于根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
3.如权利要求1所述的应用启动装置,其特征在于,所述判断模块包括:
确定单元,用于当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
判断单元,用于根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
4.如权利要求1所述的应用启动装置,其特征在于,在获取的应用图标包括多个应用图标时,所述启动模块包括:
第一处理单元,用于分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
第二处理单元,用于获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
5.如权利要求1-4任一项所述的应用启动装置,其特征在于,所述应用启动装置还包括:
输出模块,用于若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
6.一种应用启动方法,其特征在于,所述应用启动方法包括以下步骤:
当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域;
若存在与所述注视区域匹配的应用图标区域,获取所述应用图标区域对应的应用图标;
启动获取的所述应用图标对应的应用。
7.如权利要求6所述的应用启动方法,其特征在于,所述当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤之前,所述应用启动方法还包括:
通过终端的前置摄像头确定人脸相对于所述终端显示屏的相对位置;
基于确定的所述相对位置,利用虹膜识别传感器识别人脸中眼球的位置;
控制所述终端中的红外发射器向所述眼球发射红外线,并由红外传感器感应所述眼球反射的红外线,以确定所述眼球反射的红外线在终端显示屏中的落点位置;
根据所述眼球反射的红外线在所述终端显示屏中的落点位置,确定所述眼球在所述终端中的注视区域。
8.如权利要求6所述的应用启动方法,其特征在于,所述当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤包括:
当眼球在终端显示屏的注视区域对应的注视时长达到预设时长时,确定所述终端显示屏中各个应用图标的应用图标区域;
根据各个所述应用图标区域与所述注视区域的覆盖率,判断是否存在与所述注视区域匹配的应用图标区域,其中,在应用图标区域与所述注视区域的覆盖率达到预设覆盖率时,确定所述应用图标区域与所述注视区域匹配。
9.如权利要求6所述的应用启动方法,其特征在于,在获取的应用图标包括多个应用图标时,所述启动获取的所述应用图标对应的应用的步骤包括:
分别启动各个所述应用图标对应的应用,并分屏显示各个所述应用对应的界面;
或者,获取各个应用图标中与所述注视区域的覆盖率最大的应用图标,并启动获取的所述应用图标对应的应用。
10.如权利要求6-9任一项所述的应用启动方法,其特征在于,所述判断所述终端显示屏中是否存在与所述注视区域匹配的应用图标区域的步骤之后,所述应用启动方法还包括:
若不存在与所述注视区域匹配的应用图标区域,输出提示信息,以提示用户调整眼球的注视区域。
CN201610160794.7A 2016-03-21 2016-03-21 应用启动装置及方法 Active CN105843383B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610160794.7A CN105843383B (zh) 2016-03-21 2016-03-21 应用启动装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610160794.7A CN105843383B (zh) 2016-03-21 2016-03-21 应用启动装置及方法

Publications (2)

Publication Number Publication Date
CN105843383A true CN105843383A (zh) 2016-08-10
CN105843383B CN105843383B (zh) 2019-03-12

Family

ID=56588030

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610160794.7A Active CN105843383B (zh) 2016-03-21 2016-03-21 应用启动装置及方法

Country Status (1)

Country Link
CN (1) CN105843383B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107358078A (zh) * 2017-06-13 2017-11-17 广东欧珀移动通信有限公司 终端的输入方法和装置、终端和计算机可读存储介质
CN107506630A (zh) * 2017-09-15 2017-12-22 北京小米移动软件有限公司 具有虹膜识别功能的设备及虹膜识别方法
CN107508963A (zh) * 2017-07-05 2017-12-22 宇龙计算机通信科技(深圳)有限公司 终端控制方法、装置、终端及计算机可读存储介质
CN107562305A (zh) * 2017-08-01 2018-01-09 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN108282699A (zh) * 2018-01-24 2018-07-13 北京搜狐新媒体信息技术有限公司 一种显示界面处理方法及装置
CN108289151A (zh) * 2018-01-29 2018-07-17 维沃移动通信有限公司 一种应用程序的操作方法及移动终端
CN109141461A (zh) * 2017-06-13 2019-01-04 博世汽车部件(苏州)有限公司 汽车地图导航控制系统和方法
CN109769147A (zh) * 2019-01-10 2019-05-17 珠海格力电器股份有限公司 控制显示设备的方法、装置和显示设备
CN110096317A (zh) * 2019-04-30 2019-08-06 努比亚技术有限公司 交互控制方法、可穿戴设备以及计算机可读存储介质
CN110298154A (zh) * 2018-03-23 2019-10-01 深圳富泰宏精密工业有限公司 便携式电子装置及解锁方法
CN110929241A (zh) * 2019-11-12 2020-03-27 北京字节跳动网络技术有限公司 一种小程序的快速启动方法、装置、介质和电子设备
CN110989895A (zh) * 2019-10-15 2020-04-10 厦门美柚股份有限公司 一种控件显示状态检测方法及装置
CN111104818A (zh) * 2018-10-25 2020-05-05 珠海格力电器股份有限公司 一种人脸识别方法及人脸识别设备
CN111931742A (zh) * 2020-09-30 2020-11-13 苏宁金融科技(南京)有限公司 一种app登录验证方法、装置及计算机可读存储介质
CN112083795A (zh) * 2019-06-12 2020-12-15 北京迈格威科技有限公司 对象控制方法及装置、存储介质和电子设备
CN115277915A (zh) * 2022-06-29 2022-11-01 重庆长安汽车股份有限公司 车辆的来电音量调节方法、装置、车辆及存储介质
CN116048243A (zh) * 2022-05-20 2023-05-02 荣耀终端有限公司 一种显示方法和电子设备
CN116909439A (zh) * 2023-09-13 2023-10-20 荣耀终端有限公司 电子设备及其交互方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140168056A1 (en) * 2012-12-19 2014-06-19 Qualcomm Incorporated Enabling augmented reality using eye gaze tracking
CN103885589A (zh) * 2014-03-06 2014-06-25 华为技术有限公司 眼动追踪方法及装置
CN103905709A (zh) * 2012-12-25 2014-07-02 联想(北京)有限公司 一种控制电子设备的方法及电子设备
CN104123161A (zh) * 2014-07-25 2014-10-29 西安交通大学 一种利用人眼注视点的屏幕解锁和应用启动的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140168056A1 (en) * 2012-12-19 2014-06-19 Qualcomm Incorporated Enabling augmented reality using eye gaze tracking
CN103905709A (zh) * 2012-12-25 2014-07-02 联想(北京)有限公司 一种控制电子设备的方法及电子设备
CN103885589A (zh) * 2014-03-06 2014-06-25 华为技术有限公司 眼动追踪方法及装置
CN104123161A (zh) * 2014-07-25 2014-10-29 西安交通大学 一种利用人眼注视点的屏幕解锁和应用启动的方法

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109141461A (zh) * 2017-06-13 2019-01-04 博世汽车部件(苏州)有限公司 汽车地图导航控制系统和方法
CN107358078A (zh) * 2017-06-13 2017-11-17 广东欧珀移动通信有限公司 终端的输入方法和装置、终端和计算机可读存储介质
CN107508963A (zh) * 2017-07-05 2017-12-22 宇龙计算机通信科技(深圳)有限公司 终端控制方法、装置、终端及计算机可读存储介质
CN107562305A (zh) * 2017-08-01 2018-01-09 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN107562305B (zh) * 2017-08-01 2020-11-24 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN107506630A (zh) * 2017-09-15 2017-12-22 北京小米移动软件有限公司 具有虹膜识别功能的设备及虹膜识别方法
CN108282699A (zh) * 2018-01-24 2018-07-13 北京搜狐新媒体信息技术有限公司 一种显示界面处理方法及装置
CN108289151A (zh) * 2018-01-29 2018-07-17 维沃移动通信有限公司 一种应用程序的操作方法及移动终端
CN110298154A (zh) * 2018-03-23 2019-10-01 深圳富泰宏精密工业有限公司 便携式电子装置及解锁方法
CN111104818A (zh) * 2018-10-25 2020-05-05 珠海格力电器股份有限公司 一种人脸识别方法及人脸识别设备
CN109769147A (zh) * 2019-01-10 2019-05-17 珠海格力电器股份有限公司 控制显示设备的方法、装置和显示设备
CN109769147B (zh) * 2019-01-10 2020-12-11 珠海格力电器股份有限公司 控制显示设备的方法、装置和显示设备
CN110096317A (zh) * 2019-04-30 2019-08-06 努比亚技术有限公司 交互控制方法、可穿戴设备以及计算机可读存储介质
CN112083795A (zh) * 2019-06-12 2020-12-15 北京迈格威科技有限公司 对象控制方法及装置、存储介质和电子设备
CN110989895A (zh) * 2019-10-15 2020-04-10 厦门美柚股份有限公司 一种控件显示状态检测方法及装置
CN110989895B (zh) * 2019-10-15 2021-11-19 厦门美柚股份有限公司 一种控件显示状态检测方法及装置
CN110929241B (zh) * 2019-11-12 2023-05-16 北京字节跳动网络技术有限公司 一种小程序的快速启动方法、装置、介质和电子设备
CN110929241A (zh) * 2019-11-12 2020-03-27 北京字节跳动网络技术有限公司 一种小程序的快速启动方法、装置、介质和电子设备
CN111931742A (zh) * 2020-09-30 2020-11-13 苏宁金融科技(南京)有限公司 一种app登录验证方法、装置及计算机可读存储介质
CN116048243A (zh) * 2022-05-20 2023-05-02 荣耀终端有限公司 一种显示方法和电子设备
CN116048243B (zh) * 2022-05-20 2023-10-20 荣耀终端有限公司 一种显示方法和电子设备
CN115277915A (zh) * 2022-06-29 2022-11-01 重庆长安汽车股份有限公司 车辆的来电音量调节方法、装置、车辆及存储介质
CN116909439A (zh) * 2023-09-13 2023-10-20 荣耀终端有限公司 电子设备及其交互方法
CN116909439B (zh) * 2023-09-13 2024-03-22 荣耀终端有限公司 电子设备及其交互方法

Also Published As

Publication number Publication date
CN105843383B (zh) 2019-03-12

Similar Documents

Publication Publication Date Title
CN105843383A (zh) 应用启动装置及方法
CN104915143B (zh) 无边框移动终端的控制方法及终端
CN104866135B (zh) 一种利用触屏边框输入数字符号的方法及装置
CN105100603B (zh) 一种智能终端内嵌的触发拍照装置及其方法
CN105843508B (zh) 移动终端及其截屏方法
CN106412291B (zh) 一种设备控制方法及移动终端
CN106534565A (zh) 电视控制装置、移动终端及方法
CN105704539A (zh) 视频共享装置及方法
CN106130734A (zh) 移动终端的控制方法及控制装置
CN106843724A (zh) 一种移动终端屏幕防误触装置及方法、移动终端
CN105704531A (zh) 播放视频时的免打扰终端及方法
CN105955613B (zh) 一种控制方法及装置
CN108924364A (zh) 消息提醒方法、移动终端及计算机可读存储介质
CN105357367B (zh) 基于压力传感器的按键识别装置及方法
CN105843478B (zh) 快捷开关的图标显示控制方法及装置
CN106911850A (zh) 移动终端及其截屏方法
EP3716030A1 (en) Interactive interface display method, apparatus and storage medium
CN107734099A (zh) 移动终端
CN105739896B (zh) 移动终端及其触控操作方法
CN106550126A (zh) 移动终端及其屏幕亮度的控制装置和方法
CN106775372A (zh) 一种悬浮操作盘的显示调整方法、装置及终端
CN105117155B (zh) 移动终端及其操控方法
CN106302137A (zh) 群聊消息处理装置及方法
CN106506778A (zh) 一种拨号装置及方法
CN107463255A (zh) 一种视频播放方法、终端和计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant